Исследователи из Технологического университета Граца и компании HS-Art разработали алгоритм преимущественно автоматического, но полностью контролируемого пользователем процесса реставрации черно-белых фильмов. Технология сокращает затраты, позволяет точно передать исходные цвета и воссоздавать «стиль» старой съемки.
Представленная технология комбинирует автоматическую обработку ленты с контролируемым ручным окрашиванием отдельных кадров. Возможно полностью автоматическое окрашивание пленки, объясняют ученые, но у него есть недостаток, заключающийся в том, что цвета могут быть красивыми, но не соответствуют действительности.
Восстановление цветов черно-белого фильма с помощью нейросети. Видео: HS-Art
Алгоритм снабжен достаточно большой коллекцией обучающих выборок, чтобы затем автоматически взять на себя раскрашивание исторических фильмов. Технология требует минимального участия человека: например, пользователь может указать цвета для определенного кадра, после чего ИИ берет на себя окрашивание следующих кадров.
С помощью разработанных алгоритмов пленки можно восстанавливать очень точно, говорят разработчики. Но в ряде случаев это не желательно: чтобы фильмы выглядели аутентично иногда требуется добавить небольшое количество шума, соответствующего зернистости пленки. ИИ может самостоятельно генерировать шум на окрашенных изображениях.
Исследователи опубликовали исходный код алгоритма в открытом доступе, но полная версия нейросети, используемой для обработки видео, доступна в платном приложении компании HS-Art.
