Штучний інтелект навчився генерувати відео

Розробники нейромережі Sta­ble Dif­fu­sion, які працюють у стартапі Run­way, повідомили про запуск штучного інтелекту, який може генерувати відео. Він перетворює існуючі відео на нові, застосовуючи будь-який стиль, вказаний у текстовому запиті.

Як показано у відео, опублікованому на сайті Run­way, ШІ може перетворити відео людей, які йдуть вулицею, на фігурок з пластиліну або чоловіка, який біжить по снігу — на астронавта у космосі. «Ми спостерігали великий бум у сфері генерації зображень. Я щиро вірю, що 2023 рік стане роком відео», — наголосив генеральний директор і співзасновник Run­way Крістобаль Валенсуела.

Заснований у 2018 році, стартап Run­way вже декілька років розробляє програмне забезпечення на основі ШІ для редагування відео. Його інструменти використовують у Tik­Tok і YouTube. Також автори The Late Show зі Стівеном Колбертом використовували ПЗ Run­way для редагування графіки шоу.

У 2021 році розробники Run­way співпрацювали з дослідниками Мюнхенського університету, щоб створити першу версію Sta­ble Dif­fu­sion. У 2022 році нейромережа Sta­ble Dif­fu­sion стала популярною.

Нагадаємо, що саме завдяки Sta­ble Dif­fu­sion художнику з Італії вдалось втілити у життя свою ідею з подорожами у часі. Творчий проект «Stelfie» є серією фотографій чоловіка з подорожей різними епохами. На своїх фото мандрівник у часі обіймає Вінсента Ван Гога, голить Сальвадора Далі та сидить поряд з Альбертом Ейнштейном. Створити «Stelfie» вдалось завдяки багатогодинній роботі з алгоритмом генерації зображень Sta­ble Dif­fu­sion та з редактором Pho­to­shop. Щоб отримати «чорнову» версію фотографії, потрібно близько 3 годин, а щоб завершити роботу повністю — 15 годин.