Luma AI выпустила Dream Machine — нейросеть для генерации видео

Пока нейросеть справляется с роликами продолжительностью до пяти секунд. Разработчики отмечают, что итоговые материалы получаются плавными и фотореалистичными. Кроме того, Dream Machine называют самой быстрой моделью машинного обучения для создания видео — генерация пятисекундного ролика занимает 120 секунд.

Нейросеть работает в режиме Text-to-Video и поддерживает создание роликов в разных стилях и запоминает персонажей, сохраняя их внешний вид на всех кадрах. Но разработчики отмечают, что в некоторых сценариях Dream Machine может плохо работать или создавать ролики с браком. К примеру, нейросеть не умеет работать с текстом в кадре, а объекты в кадре могут изменять форму.

Dream Machine уже доступна пользователям для экспериментов. Для регистрации понадобится почта Google, а в бесплатном тарифе доступно 30 генераций в месяц. Можно оформить платную подписку, чтобы расширить лимит. Самый дорогой тариф обойдётся в 500 долларов и позволит создавать 2 тыс. роликов. Важно отметить, что сейчас из-за наплыва пользователей придётся подождать в очереди на генерацию.