Runway держит в тонусе. Выкатил новую фичу video-to-video на базе Gen-3 и создал инфоповод. Повод получился увесистым и хайповым. Модель предлагает возможность переделать любое видео. Хочу, мол, «Матрицу» в пластилиновой анимации посмотреть – бери, пожалуйста.
В двух словах про процесс. Заходим в Dashboard, переходим в Generative Video и выбираем модель Gen-3 Alpha. Фича доступна лишь в этой версии. Версия, конечно же, платная. Покупаем кредиты и только потом грузим видео. Модель поддерживает файлы до 64 Мб с соотношением сторон 16:9. Все, что не впишется, порежут принудительно.
И потом обыкновенная магия генеративного ИИ. Пишем промпт. Как обычно, чем точнее – тем лучше результат. Хотите на финише ролик в стиле 3D-халфтон-комиксов с яркими слоями цвета – пожалуйста. Ни в чем себе не отказывайте. Если фантазия решила отдохнуть, не беда. Предустановки вам в помощь. Заходим, выбираем и получаем готовый шаблон.
На панели с настройками все немного сложнее. Надо сесть и разобраться. Например, там можно настроить структурную трансформацию от 0.00 до 1.0. Если нужно, чтобы видео было сильно похожим на оригинал – выставляем минимальное значение. Готовы к экспериментам, выкручивайте на максимум. И запускайте процесс генерации.
Если видео до 10 секунд, финальная версия будет такой же длины. Если больше – все лишнее отрежут. Готовые ролики лежат в Assets, откуда автоматически сохраняются в Generative Video.
Компания пишет, что вместе с новой фичей улучшили качество Gen-3. Подкрутили динамику, скорость и четкость. Будем ждать, когда эта штука станет поддерживать 4K и увеличит длительность роликов. А пока наблюдаем за тем, как интернет заваливается мемными генерациями. Тут уж кто во что горазд. Одни заворачивают Крестного отца в Lego Movie. Другим интересно, как Терминатор превращается в мультик Рик и Морти. В общем, полный композ идей.
Напомним, что модель для генерации видео Gen-3 Alpha компания представила в июне 2024 года. Доступ платный. За $15 в месяц удается создать порядка минуты (62 секунды) генеративного видео.
А вообще ни одна из подобных моделей, включая Sora, пока не дотягивает до качества, сопоставимого с видеосъемками. Эксперты надеялись, что 2024-й станет прорывом в нише генеративного видео. Не получилось. Кажется, годик-другой придется еще подождать. А пока дожидаемся, можно размяться, превращая сцены из «Побега из Шоушенка» в пиксаровские мульты.
