Штучний інтелект навчився генерувати відео

Розробники нейромережі Stable Diffusion, які працюють у стартапі Runway, повідомили про запуск штучного інтелекту, який може генерувати відео. Він перетворює існуючі відео на нові, застосовуючи будь-який стиль, вказаний у текстовому запиті.

Як показано у відео, опублікованому на сайті Runway, ШІ може перетворити відео людей, які йдуть вулицею, на фігурок з пластиліну або чоловіка, який біжить по снігу — на астронавта у космосі. «Ми спостерігали великий бум у сфері генерації зображень. Я щиро вірю, що 2023 рік стане роком відео», — наголосив генеральний директор і співзасновник Runway Крістобаль Валенсуела.

Заснований у 2018 році, стартап Runway вже декілька років розробляє програмне забезпечення на основі ШІ для редагування відео. Його інструменти використовують у TikTok і YouTube. Також автори The Late Show зі Стівеном Колбертом використовували ПЗ Runway для редагування графіки шоу.

У 2021 році розробники Runway співпрацювали з дослідниками Мюнхенського університету, щоб створити першу версію Stable Diffusion. У 2022 році нейромережа Stable Diffusion стала популярною.

Нагадаємо, що саме завдяки Stable Diffusion художнику з Італії вдалось втілити у життя свою ідею з подорожами у часі. Творчий проект «Stelfie» є серією фотографій чоловіка з подорожей різними епохами. На своїх фото мандрівник у часі обіймає Вінсента Ван Гога, голить Сальвадора Далі та сидить поряд з Альбертом Ейнштейном. Створити «Stelfie» вдалось завдяки багатогодинній роботі з алгоритмом генерації зображень Stable Diffusion та з редактором Photoshop. Щоб отримати «чорнову» версію фотографії, потрібно близько 3 годин, а щоб завершити роботу повністю — 15 годин.