Runway представили новую генеративную модель для создания видео — Gen-4. Для компании это — один из ключевых продуктов для дальнейшего развития. Как повлияет развитие генеративных моделей на индустрию развлечений и что может помешать Runway взойти на вершину ИИ-Олимпа?
Модель под названием Gen-4 была представлена стартапом. По их заявлению, она является лучшей из видеогенераторов на основе ИИ:
«Gen-4 устанавливает новый стандарт для создания видео и является заметным улучшением по сравнению с Gen-3 Alpha. Он отличается способностью создавать очень динамичные видео с реалистичным движением, а также согласованностью сюжета, объектов и стиля с превосходной оперативностью и лучшими в своем классе…» — написали они в своем блоге.
Что может эта чудо-модель, что Runway называют ее лучшей среди лучших? Разработчики утверждают, что Gen-4 может генерировать заданных персонажей, локации и объекты в разных сценах, поддерживать «целостную окружающую среду» и воссоздавать элементы с разных точек зрения и позиций в рамках сцен. С помощью референсов и инструкций модель создает новые изображения в едином стиле в заданной вами локации и с описанным сюжетом. Можно и композицию кадра описать для достижения кинематографического эффекта в видео.
Кадр из презентации возможностей Gen-4. Источник: runwayml.com
Runway уже много лет поддерживают крупные компании, например, Salesforce, Google и Nvidia. В целом модель Gen-4 — не единственный инструмент для работы с видео от этого стартапа. И, несмотря на других серьезных игроков в сфере видеогенераторов — только OpenAI и Google чего стоят — Runway находят способы поддерживать свою конкурентоспособность. В прошлом году они подписали договор с Lionsgate — студией, ответственной за создания «Джона Уика» и «Сумерек». Не последние люди в Голливуде, в общем. При сотрудничестве с другой организацией они вложили 5 миллионов долларов в создание фильмов с технологией ИИ. Одним словом, стартап всеми силами старается развиваться и совершенствоваться.
«Gen-4 отличается способностью генерировать очень динамичные видео с реалистичным движением, а также согласованностью сюжета, объектов и стиля с превосходной оперативностью и лучшим в своём классе пониманием мира», — утверждает компания в своем блоге. Модель способна даже имитировать физику реального мира.
Runway, очевидно, делают серьезные ставки на свою Gen-4, ведь они собираются привлечь новое финансирование и рассчитывают в этом году получить 300 миллионов долларов, по данным The Information. А поможет им в этом, в частности, запуск таких продуктов, как API для своих моделей, генерирующих видео.
Как и большинство других компаний, занимающихся созданием моделей ИИ, Runway отказались дать ответ на вопрос о базе данных, на которой обучался Gen-4. Как обычно, объясняется это возможной потерей конкурентного преимущества, но и гипотетические судебные иски по вопросам интеллектуальной собственности как причину секретности не нужно отметать. Мы знаем только то, что было использовано огромное количество видео. Иначе обучать ИИ закономерностям еще не научились.
Собственно, вариант с нарушением авторского права в контексте Runway, как и других компаний, совсем не гипотетическийю В их истории уже был эпизод судебных разбирательств с художниками из-за использования их творчества без разрешения в целях обучения генеративных моделей. Runway утверждает, что доктрина, известная как добросовестное использование, защищает её от юридических последствий. Дело тянется до сих пор и на чьей стороны окажется правда — пока неясно.
Судебный иск против них терпит неудачу. Мы на пороге глобальных изменений в сфере кино и телевидения: с приходом в индустрию технологии ИИ все кардинально изменилось. Как прежде уже не будет никогда. Согласно исследованию 2024 года, 75% кинокомпаний, внедривших искусственный интеллект, сократили, консолидировали или ликвидировали рабочие места после внедрения технологии. А у 2026 году прогнозируют более 100 000 работников в сфере развлечений в США будут вытеснены генеративным искусственным интеллектом.
