Нейросеть научили раскрашивать чёрно-белые фильмы

По инф. hightech.fm   
22.03.2023 11:17

Исследователи из Технологического университета Граца и компании HS-Art разработали алгоритм преимущественно автоматического, но полностью контролируемого пользователем процесса реставрации черно-белых фильмов. Технология сокращает затраты, позволяет точно передать исходные цвета и воссоздавать «стиль» старой съемки.

Нейросеть научили раскрашивать чёрно-белые фильмы

Представленная технология комбинирует автоматическую обработку ленты с контролируемым ручным окрашиванием отдельных кадров. Возможно полностью автоматическое окрашивание пленки, объясняют ученые, но у него есть недостаток, заключающийся в том, что цвета могут быть красивыми, но не соответствуют действительности.

Алгоритм снабжен достаточно большой коллекцией обучающих выборок, чтобы затем автоматически взять на себя раскрашивание исторических фильмов. Технология требует минимального участия человека: например, пользователь может указать цвета для определенного кадра, после чего ИИ берет на себя окрашивание следующих кадров.

С помощью разработанных алгоритмов пленки можно восстанавливать очень точно, говорят разработчики. Но в ряде случаев это нежелательно: чтобы фильмы выглядели аутентично иногда требуется добавить небольшое количество шума, соответствующего зернистости пленки. ИИ может самостоятельно генерировать шум на окрашенных изображениях.

Исследователи опубликовали исходный код алгоритма в открытом доступе, но полная версия нейросети, используемой для обработки видео, доступна в платном приложении компании HS-Art.

&t=2s

Ещё кое-что из новостей прогресса:

По инф. hightech.fm

Новости о всякой всячине

 

Владислав Толстов - книжный рецензент

Видеосюжеты
Сергей Шмидт: Срок