Штучний інтелект навчився розмальовувати старі фільми

Дослідники з Технологічного університету Граца (Австрія) разом з компанією HS-Art, яка спеціалізується на відновленні історичних фільмів, розробили алгоритм автоматичного процесу реставрації чорно-білих кінострічок. Технологія скорочує витрати на ретуш та реставрацію плівки, а також дає змогу точно передати вихідні кольори та відтворити “стиль” старої зйомки.

Проект дістав назву “RE:Color: Ефективне розфарбовування фільмів у кінематографічній якості на основі нових методів машинного навчання”. Головна мета — розробка ефективної технології розфарбовування старих фільмів із найменшою участю людини та зі збереженням автентичних кольорів.

Представлена технологія комбінує автоматичну обробку кіноплівки з контрольованим ручним фарбуванням окремих кадрів. Також можливе повністю автоматичне фарбування плівки.

Алгоритм ШІ забезпечений значною колекцією навчальних кольорових вибірок. Він може автоматично обирати оптимальні відтінки, у які зафарбовуватимуться кадри. Технологія вимагає мінімальної участі людини — користувач може задати кольори для певного кадру, після чого ШІ сам їх зафарбує.

Розробники заявляють: за допомогою такого алгоритму плівки реставруються з високою точністю. Щоправда, в низці випадків це навіть небажано: щоб фільми мали автентичний вигляд, іноді потрібно додати невелику кількість шуму, що відповідає зернистості плівки. Втім ШІ може й самостійно генерувати шум на забарвлених кадрах.

Дослідники опублікували вихідний код алгоритму у відкритому доступі, але повна версія нейромережі доступна у платному застосунку компанії HS-Art.