tasani.ruВ предыдущих статьях я рассматривал основы апскейлинга и столкнулся с недостатками существующих инструментов, таких как NeatVideo и Topaz Video AI. В этом эксперименте я решил написать симулятор разрушения пленки, чтобы научить модель распознавать специфические дефекты. Процесс занял два месяца и два миллиона итераций, в результате чего появился набор специализированных инструментов. Я выбрал архитектуру Real-ESRGAN Compact из-за её скорости и легкости, ограничившись возможностями своей видеокарты RTX 4060 Ti.
Ключевая проблема существующих денойзеров заключалась в их неспособности эффективно работать с пленкой. Я создал Project Degrader, чтобы симулировать реальное старение пленки. Модель научилась выявлять и устранять дефекты, такие как растяжение, царапины и химические повреждения.
В итоге, я разработал несколько моделей, каждая из которых решает определенные задачи восстановления, что позволило создать гибридный пайплайн для достижения оптимальных результатов.