Компания Luma, известная своими разработками в области ИИ, представила новую нейросеть Dream Machine для генерации коротких видеороликов. Она создает видео по картинке и текстовому описанию и доступна бесплатно для всех желающих. В статье расскажем, что умеет нейросеть от Luma и как пользоваться сервисом.
Что умеет нейросеть Dream Machine
Новая нейросеть от Luma создает короткие видео продолжительностью до 5 секунд. Средняя скорость генерации — 30 секунд, но может потребоваться и больше времени. Здесь доступна функция улучшения подсказки и продолжения сюжета. ИИ передает точную физику персонажа, запоминает его и сохраняет во всех кадрах.
Нейросеть работает на основе предоставленных материалов:
- По одному изображению.
- По картинке с объяснениями.
- По текстовому описанию.
На официальном сайте нейросети Dream Machine есть руководство по использованию и написанию подсказок. Разработчики рекомендуют изучить его, чтобы выстроить правильный запрос и получить желаемый результат. Можно прочитать часто задаваемые вопросы и почерпнуть полезную информацию из ответов.
Нейросеть от Luma не умеет работать с текстом и дополнительными элементами в кадре. Она не сохраняет их, а изменяет форму. Поэтому лучше, если на изображении будет один персонаж. Далее расскажем, как пользоваться Dream Machine.
Dream Machine: руководство по использованию
Чтобы получить доступ к нейросети от Luma, зайдите на официальный сайт, зарегистрируйтесь или войдите через аккаунт Google. Далее нажмите «Создать» и добавьте картинку или фото с вашего устройства или текстовое описание. К изображению можно добавить пояснение.
Мы нажали на прямоугольник слева и выбрали фото Анджелины Джоли из фильма «Лара Крофт». Для начала генерации кликнули на стрелку справа.
ИИ превратил фотографию в короткий 5-секундный видеоролик. Нейросеть Luma «оживила» Лару: она поворачивается и меняет положение рук. У персонажа такая же фигура, одежда, прическа, вот только лицо получилось совершенно другое, нейросеть его не запомнила. Видео можно сохранить на свое устройство. Для этого нажмите на него и выберите в выпадающем списке «Сохранить видео».
Мы проверили, как нейросеть от Luma справляется с текстовым запросом без картинки. Для этого добавили описание: «Красивая птица летит над морским побережьем» и сделали акцент, что на видео должны быть солнце, море, голубое небо. ИИ справился с задачей: видео полностью соответствует запросу.
Мы протестировали, как нейросеть Luma работает по картинке с описанием. Для теста выбрали фото Лары Крофт и уточнили, что девушка стреляет из пистолета, поворачивается назад, выбрали фон — морское побережье.
На данном этапе можно выбрать функцию «Улучшенная подсказка», и нейросеть Luma перефразирует ваше описание. Мы оставили наше пояснение. В итоге получилось видео, где девушка просто идет вперед. ИИ не понял поставленной задачи.
Вы можете создать в нейросети от Luma продолжение ролика, выбрав функцию «Расширить». Опишите, что вы хотите видеть в следующем кадре, и запустите процесс генерации. Мы все-таки хотим, чтобы Лара стреляла на фоне морского побережья, и включили наши пожелания в запрос.
Но нейросеть от Luma опять не поняла запроса. Лара не поворачивается, не стреляет, и фон остался прежним.
На сайте заявлено, что Dream Machine создает 1 ролик за 30 секунд. По факту это не так: придется ждать около минуты или больше.
На странице генерации под полем для текста и изображения мы нашли все видеоролики, созданные по нашим запросам:
Тарифы
Нейросеть Dream Machine доступна бесплатно для всех желающих после регистрации, но с ограничениями. Без оплаты можно создавать до 30 роликов в месяц, которые нельзя использовать в коммерческих целях.
Платных тарифов несколько:
- «Стандарт» за $29,99 в месяц. В него входит 150 генераций, которые можно использовать в маркетинге, и приоритетная очередь.
- «Профессиональный» за $99,99, где можно создавать до 430 видео ежемесячно и делать генерации без очереди.
- «Premier» за $499,99 в месяц, где можно еще быстрее делать 2030 роликов и использовать их в коммерческих целях.
Заключение
Нейросеть Dream Machine от Luma можно использовать для генерации 5-секундных видеороликов, которые разнообразят ваш контент. Лучше всего у нее получается «оживлять» картинки или фотографии. С текстовыми запросами она пока не очень хорошо справляется, не умеет работать с текстом в кадре и с элементами вокруг персонажа. К сервису ежедневно подключается большое количество пользователей, поэтому результата приходится ждать более 1 минуты.
Из плюсов можно отметить бесплатный доступ, функцию улучшения подсказки и расширения видео, сохранение на свое устройство. В любом случае стоит попробовать новый инструмент, который не только развлечет вас, но и может пригодиться в маркетинговых целях.
