Нейросеть VIGGLE — создает анимацию с помощью «скрещивания» фото и видео

Что умеет: Летом 2024 года TikTok наводнили вирусные ролики с танцующими котами, ожившими портретами исторических личностей и популярными мемами, которые внезапно задвигались. Как выяснилось, за ними стояла нейросеть Viggle, которую сделали парни из Warpengine Canada Inc.

Viggle предлагает три основных режима работы – Mix, Move и Multi. В Mix можете интегрировать персонажей в готовое видео, то есть взять любое фото и «вставить» человека, изображенного там, в динамику клипа. Собственно, так появились вирусные ролики в TikTok, где Наполеон читает Бродского.

Если в Mix персонаж внедряется в клип, в Move наоборот – динамика видео переносится на фото. Другими словами, если нужно сохранить фон из видео, используйте Mix. И работайте с Move, если важно оставить фон фото. Кстати, в Mix оригинальный фон можно убрать, заменив его на белый или зеленый.

Multi – «внедрение» нескольких персонажей в видео. Можно, например, поместить себя и друга в сцену из «Матрицы». Нейросеть Viggle заменит актеров на предложенных персонажей, сохраняя оригинальные движения, эмоции, фон.

Недавно в нейросети появился виджет Rap. Конструктор превращает статичное фото в читающего рэп человека, анимируя персонажа с липсинком (синхронизацией динамики губ). Текст можно добавить свой или сгенерировать тут же. Для тех, кто мечтал увидеть, как Илон Маск баттлится с Чебурашкой.

Доступ: бесплатный (5 видео ежедневно, до 60 секунд, до 720р, 2 задания одновременно).

Стоимость: Pro за $9,99 в месяц (безлимит на создание видео в медленном режиме, 20 минут генерации с «молниеносной скоростью», до 1080р, 10 заданий одновременно, удаление водяного знака).

Оплата российскими картами: нет.

Нужно ли использовать VPN: нет.

Поддержка русского языка: нет.

На каких платформах работает: веб-версия, Discord, приложение для iOS и Android.

ТОП-3 фишек:

• Библиотека движений — на Viggle есть шаблоны с динамикой. Выбираете видео-паттерн и используете его для «скрещивания» с персонажем. В каталоге – танцы (от TikTok-челленджей до брейкданса), боевка (удары, уклоны, прыжки, борьба), эмоции (мимика, вращения головы, выражение чувств), жесты и позы (хлопки, приветствия, реакции) и другое.
• Кроссплатформенность — сервис доступен где угодно. Веб-версия работает в браузере. Не нужно скачивать, устанавливать, захламляя смартфон сто-пятисотым приложением. Для тех, кто привык к мобильным версиям, есть эпп-ки для iOS и Android. Viggle есть в Discord, и не только как инструмент. Там большое комьюнити (более 4 миллионов) людей, которые любят создавать креативное, яркое и виральное.
• Тонкое понимание физики — Viggle использует видео-3D-модель JST-1. Сервис берет статичное фото, анализирует анатомию тела, «натягивает» на нее модель движения и бесшовно соединяет фигуру и фон. Результат – натуральная, плавная анимация. Персонажи имеют объем, стабильны на всем протяжении видео.

ТОП-3 применений:

• Оживление бренд-персонажей и продакшн рекламного видео.
• Создание мемов и забавных роликов для социальных сетей.
• Прототипирование движений персонажей в гейминдустрии.

Что понравилось: Можно загрузить какие угодно свои движения, кадры из фильмов и повторить их любым персонажем/фотографией. Картинка в финальном видео не мерцает, как у аналогов. Синхронный липсинк. Удобный интерфейс. На английском, но понятный интуитивно – блоки для загрузки фото (Character) и видео (Motion), кнопка генерации (Create). Качество роликов – HD на Free и FullHD на Pro. Все видео сохраняются в Library. В любом количестве, но по сроку есть варианты – 60 дней на Free и 2 года на Pro.

Что не понравилось: При всей виральности роликов, созданных нейросетью Viggle, видео не идеальны. Нейросеть часто криво натягивает динамику на персонажей. Хваленая JST-1 работает с перебоями. В итоге появляются «резиновые лица», размазанные элементы, странные артефакты. Результат генерации перепутать с реальным видео невозможно, но справедливости ради отметим: нейросеть Viggle на это не претендует.

При попытке оживить мультяшных персонажей или животных появляются странности. Нейросеть пытается «человечить» пропорции, и выглядит это порой пугающе. Герои Disney вроде Моаны анимируются сносно. Их анатомия приближена к человеческой, но и здесь видны артефакты. Животные точно нет. Даже не пробуйте. Что касается людей, подбирайте исходники, схожие по пропорциям, чтобы не получить неожиданный результат.

Оценка редакции:

Простота использования: 5/5

Точность и надежность: 4,6/5

Настройки и гибкость: 4,4/5

Функциональность: 4,7/5

Производительность: 4,8/5

Общая оценка сервиса: 4,7/5

Интерфейс:

Категории нейросети VIGGLE