Самое сложное в ИИ-видео давно уже не эффектная картинка, а постоянство. Нейросеть без труда нарисует красивый кадр, но попросите её показать того же героя во втором, пятом и двадцатом кадре, и у персонажа внезапно меняются нос, борода и, кажется, вся биография.
https://www.youtube.com/watch?v=2iA2at8NzlM
Тем любопытнее выглядит пятиминутный live-action фанфильм по Plants vs. Zombies, целиком собранный с помощью генеративных моделей. По данным тех, кто распространяет ролик в соцсетях, за первые сутки его посмотрели 1,8 млн раз. На экране разваливается пригород, по улице бредут зомби (один, как и положено, с ведром на голове), Кусака (Chomper) ростом выше забора глотает мертвеца целиком, а на газоне занимает позицию Горохострел (Peashooter).
Вишенкой на торте стал Безумный Дейв с кастрюлей на голове и бородой, забитой землёй. Фокус в том, что лицо чудаковатого соседа остаётся одинаковым в каждом кадре, а для ИИ-кино это едва ли не главный технический барьер. Такой фильм не делается одним запросом, ведь это стабильные персонажи, существа, десятки планов, озвучка, субтитры и монтаж, и с каждой задачей лучше справляется своя модель.
На этом уже строит маркетинг Picsart, которая продвигает ролик как пример работы своего конвейера. Сервис обещает следующее:
188 моделей генерации за единой строкой запроса
возможность отправлять каждый кадр той модели, которая лучше всего справляется именно с ним
доступ ко всем промежуточным материалам, чтобы один неудачный кадр не хоронил весь фильм
стоимость генерации в кредитах, видимую ещё до запуска
Альтернативой, по подсчётам Picsart, служат 11 отдельных подписок и $277 в месяц ещё до первого отрендеренного кадра. Арифметика рекламная, но проблему она описывает реальную. Рынок ИИ-видео буквально раздроблен: картинки, анимация, голос и липсинк живут в разных сервисах, и создателям подобных роликов приходится собирать фильм как конструктор из деталей разных производителей.
Сколько бы это рисовали руками? И взялись бы?
Источник новости: shazoo.ru
