Нейросеть Gen-3 от Runway
Что за нейросеть Gen-3 от Runway
В июне видеогенератор от стартапа Runway обновился до версии Gen-3 Alpha. Модель в открытом доступе для всех. Генерирует кино высокого качества буквально из воздуха. Ну, или из текста. Исходником, к слову, может быть и картинка, то есть модель согласна работать в режимах «Text To Video», «Image To Video» и комбо из них. Создает короткие видео продолжительностью 5-10 секунд. Как обычно, годится, скорее, для развлечения. До серьезных проектов ИИ-генераторы видео пока не доросли. Что касается претензии Gen-3 от Runway стать лучшей в сегменте, с такими заявками в этом году появляются все, но ни одной не удалось действительно выбиться в лидеры.
Возможности сервиса Runway Gen-3
Ожидаемый и предсказуемый результат коллаборации ИИ и творчества. Нейросеть Gen-3 от Runway обучили генерировать видео из текста и фото, понимать кинематографическую терминологию и создавать видеоролики самой разной стилистической формы. Как обычно, есть возможность отрегулировать движение камеры, освещение, динамику командами в промпте. Нейросеть хорошо генерирует «тонкие грани души», отражая эмоции в весьма реалистичной мимике.
Как пользоваться Gen-3 Alpha
Зарегистрироваться через e-mail и на главной кликнуть Get started. Бесплатно доступна версия Turbo, которую можно тестировать за кредиты (выдаются в момент регистрации). Turbo – режим невысокого качества. То самое high-fidelity, о котором пишут на главной, доступно за деньги. В остальном как обычно – есть поле для ввода промпта (слева) и экран генерации (справа). К слову, компания сделала классный гайд, как правильно этот промпт сформулировать. Ссылка на гайд – прямо в поле промпта. В нем много советов, подсказок и, главное, нужных и важных команд. Те самые эффектные киношные видео, где камера «пролетает» сквозь сцену – всего лишь правильный промпт, а не стечение удачных обстоятельств.
Мечта снять хорошее видео, набрав в поле промпта пару случайных слов, пока не бьется с реальностью. Генераторы видео еще не способны понимать с полуслова, как это делают, например, генераторы текстов. Gen-3 нуждается в технически подробных, логически связных и не перегруженных описаниях (на английском). В целом, довольно дружелюбный интерфейс. Новичок не растеряется и не потеряется.
Сколько стоит подписка на Gen-3
Для начала достаточно 15 долларов. За эти деньги уберут watermark, повысят качество и сделают меньше продолжительность генерации. Годовая подписка дешевле на 20% – $12 в месяц, но нужно сразу платить за год. О безлимите речь, конечно, не идет даже за деньги. Ежемесячно будут начисляться кредиты, а именно 625. Их хватит на генерацию 62 секунд в режиме Alpha (примерно 6 роликов).
Выводы
Пока генерация видео в нейронных сетях весьма криповая, включая Gen-3 от Runway. А компании просят за эти «поделки» вполне ощутимые деньги. Чтобы создать что-то более-менее профессиональное, придется потратиться. Потому что бесплатный режим очень редко генерирует быстро, выдает среднее качество и выглядит так, будто за платный не стоит платить.
В пользу Gen-3 говорит клиентоориентированность компании. Чтобы мы не спускали в трубу свой бюджет, разработчики сделали гайд, как правильно формулировать промпт. И вклеили в гайд много важных команд с настройками камеры и другой эффектной динамикой. Итого, у нас на руках инструмент с потенциалом, но пока еще не раскрытым. С другой стороны, развитие нейронных сетей движется быстро. И те разработчики, кто сегодня активно экспериментирует с подобными сервисами, в ближайшем будущем получат конкурентное преимущество. А пока создатели творческого контента могут расслабиться. До замещения человека нейросетям еще далеко.