Нейросеть для видео: Yenisei сняла пять роликов со звуком

7 мин

Мы проверили нейросеть для видео на пяти задачах. Yenisei Чат снял рилс для кофейни, мини-сериал из трёх сцен с одной героиней, оживил старую фотографию, сделал ролик с блогером и рекламу товара. Каждый ролик идёт от 5 до 16 секунд, и в каждом есть звук. Одна сцена снимается около минуты.

Как сделать ИИ видео: рилс для соцсетей

Ролик заказывают словами, как у оператора: что в кадре, формат, длина, звук.

Сделай вертикальное видео 9:16 на 8 секунд для соцсетей кофейни: крупный план, бариста рисует молоком сердечко на капучино, над чашкой пар, тёплый утренний свет, камера медленно приближается. Звук: шум кофемашины и тихая музыка.

Перед съёмкой нейросеть повторила условия одной строкой и спросила, всё ли верно. Мы подтвердили, и меньше чем через минуту ролик был в переписке.

Рилс для кофейни: 8 секунд, вертикальный формат, со звуком
Нейросеть для видео: четыре кадра из рилса для кофейни — молоко льётся в капучино, камера приближается
Кадры из ролика для кофейни: 8 секунд, вертикальный формат

Ролик длится 8 секунд, размер кадра 768×1344 точки, 24 кадра в секунду. Камера приближается к чашке, как мы просили. В ролике есть звуковая дорожка.

Смотреть ролик можно прямо в переписке, под ним есть ссылка для скачивания.

ИИ для видео в окне Yenisei Чата: готовый ролик с проигрывателем и ссылкой для скачивания
Готовый ролик в переписке: проигрыватель и ссылка «Скачать»

ИИ видео создать: мини-сериал из трёх сцен с одной героиней

Вторая задача труднее: три сцены, и героиня во всех должна быть одна и та же.

Теперь сними мини-сериал «Первый день в новом городе» из трёх сцен по 5 секунд с одной и той же героиней: девушка 25 лет, рыжие волосы до плеч, зелёное пальто. 1) Выходит из поезда на вокзале с чемоданом и оглядывается. 2) Идёт по дождливой вечерней улице и замечает маленькую кофейню с тёплым светом. 3) Сидит в кофейне у окна с чашкой и улыбается. Формат 16:9, звуки города и спокойная музыка. Склей три сцены в один ролик.

Нейросеть снимает по одной сцене за ответ. После первой и второй сцены она спрашивала, продолжать ли, после третьей склеила все три в один ролик.

Мини-сериал «Первый день в новом городе»: три сцены, 16 секунд, со звуком
Мини-сериал от нейросети: три сцены мини-сериала с одной героиней — вокзал, дождливая улица, кофейня
Три сцены мини-сериала: героиня, пальто и сумка одни и те же

Склеенный ролик длится 16 секунд, кадр 1344×768 точек. Героиня узнаётся во всех трёх сценах: те же рыжие волосы, то же зелёное пальто, та же сумка через плечо и тот же чемодан. Вместе с нашими ответами на мини-сериал ушло около шести минут.

Тренд «оживи старое фото»: видео из картинки

Ожившие старые снимки — один из самых частых трендов в соцсетях. Для него нужен ролик, который начинается с готовой картинки. Фотографию для проверки мы тоже попросили нарисовать, настоящих людей на ней нет.

Нарисуй старую чёрно-белую фотографию 1960-х годов: молодая пара стоит у деревянного дома в деревне и смотрит в камеру, горизонтальный кадр. Потом сделай ролик на 5 секунд, где эта фотография — первый кадр: пара поворачивается друг к другу и улыбается, ветер шевелит листву. Без музыки, только звуки деревни.

Ожившая старая фотография: 5 секунд, со звуком
Сделать ИИ видео из фотографии: начало и конец ролика, в котором оживает старый чёрно-белый снимок
Слева начало ролика, справа его конец

Ролик начинается с нарисованной фотографии. За пять секунд пара поворачивается друг к другу и улыбается. Дом, забор и берёза остаются на своих местах, снимок сохраняет вид старой плёнки.

Ролик с блогером, который говорит в камеру

Ещё ролик с речью, вертикальный 9:16, 8 секунд: девушка-блогер снимает себя на телефон на улице старого города, смотрит в камеру и говорит по-русски: «Привет! Сегодня покажу три места, куда стоит зайти в выходные». Солнечный день, лёгкое движение камеры, как при съёмке с руки.

Ролик с блогером: 8 секунд, вертикальный формат, с речью
Нейросеть создаёт видео с блогером: четыре кадра, девушка говорит в камеру на улице старого города
Кадры из ролика с блогером: 8 секунд, съёмка «с руки»

Героиня смотрит в камеру и говорит по-русски, ролик начинается с её «Привет!». Кадр слегка покачивается, как при съёмке с вытянутой руки, за спиной идут прохожие.

Реклама товара

Последний пример — короткий ролик о товаре. Мы попросили сначала нарисовать сам товар, а потом снять по картинке ролик:

Последний пример — реклама товара. Нарисуй предметное фото: банка малинового варенья с крафтовой крышкой на деревянном столе, рядом свежая малина и ложка, мягкий свет из окна, квадратный кадр, без надписей. Потом сними по этому фото ролик на 6 секунд: камера медленно облетает банку, ложка зачерпывает варенье, с неё тянется капля. Звук: лёгкая музыка.

Картинку нейросеть нарисовала, а ролик по ней не запустился. Она сразу предложила два выхода: снять ту же сцену по описанию, без привязки к картинке, или снять без звука. Мы выбрали первый.

Рекламный ролик о варенье: 7 секунд, квадратный формат, с музыкой
ИИ для видео о товаре: рука открывает банку малинового варенья, ложка зачерпывает его, тянется капля
Кадры из рекламного ролика: 6 секунд, квадратный формат

В ролике рука снимает крышку, ложка зачерпывает варенье, с неё тянется капля. Кадр квадратный, 768×768 точек, длина — почти 7 секунд, звучит музыка.

Что учесть

  • Один ролик за ответ. Сериал из нескольких сцен снимается по шагам, и на каждом нейросеть ждёт ответа.
  • Ролик по картинке запускается не всегда. Со старой фотографией получилось с первого раза, с банкой варенья — нет. Запасной путь — снять сцену по описанию.
  • Мелкие детали нейросеть решает сама. В рилсе мы просили сердечко на пене, а получился узор-листок.
  • Громкость сцен в склейке разная. В мини-сериале вторая сцена звучит заметно громче первой и третьей.
  • Секунда ролика стоит один кредит. Пять наших роликов вместе длятся 44 секунды.
  • Размер кадра один — 768 точек по короткой стороне. Для соцсетей этого хватает, для большого экрана мало.
  • Настоящих людей снимать без их согласия нельзя. Это относится и к фотографиям, которые оживляют.

Что писать в просьбе о видео

Во всех пяти просьбах одни и те же части:

  • формат и длина — «вертикальное 9:16, 8 секунд», «16:9, три сцены по 5 секунд», «квадратный кадр»;
  • кто и что делает — одно действие на сцену;
  • камера — «медленно приближается», «облетает», «как при съёмке с руки»;
  • свет и место — «тёплый утренний свет», «дождливая вечерняя улица»;
  • звук — музыка, шум, слова, которые произносит герой;
  • что должно повторяться — внешность и одежда героя, если сцен несколько.

Где работает нейросеть для видео

Ролики снимают в двух местах, работают они одинаково.

  • Приложение Yenisei Агент для Windows, macOS и Linux, раздел «Чаты». Мы снимали здесь: переписка, ролики и скачанные файлы в одном окне на компьютере.
  • Yenisei Чат в браузере — если ставить приложение не хочется.

Попросить нейросеть создать видео можно обычным сообщением, готовый ролик появляется в переписке. VPN не требуется.

Мультики из нескольких сцен с одним героем мы разобрали в статье «Создать ИИ мультик». Серию на минуту с сюжетом и крючком в конце — в статье «ИИ для сериалов».

Исходные картинки для роликов можно нарисовать там же. Готовые описания для снимков собраны в статье «Промты для ИИ фото», серия кадров с одним человеком — в статье «ИИ для фотосессии».

Что выбрать

  • Рилс, сторис, заставка для поста — Yenisei Агент, раздел «Чаты», или Yenisei Чат в браузере: опишите сцену, формат и звук. Ставить оба не нужно.
  • Мини-сериал или ролик из нескольких сцен — там же: опишите героя один раз и снимайте сцены по очереди, потом попросите склеить.
  • Ролик для рекламы — посмотрите его со звуком до публикации и проверьте каждую деталь товара.

Проверьте на своей задаче

Агент работает в приложении для Windows, macOS и Linux. Вход по почте и коду из письма, базовый тариф бесплатный.