Нейросеть для создания видео: как я делаю ролики про природу и здоровье без камеры

Я веду материалы про здоровье, природу и науку, и долгое время главной проблемой были не тексты, а видео. Снять лесную тропу в тумане или показать, как выглядит галактика, мне было негде и нечем. Стоковые ролики повторяются у всех, а съёмка своих требует времени, техники и погоды. Около года назад я начал пробовать нейросеть для создания видео и теперь делаю короткие ролики для статей сам. Расскажу, что из этого вышло, какие ошибки я совершал и что стоит знать тем, кто только собирается начать.

Два способа получить ролик

Генерация видео обычно устроена одним из двух способов.

  1. Из текста. Вы пишете описание сцены, модель рисует несколько секунд движения с нуля. Подходит для абстрактных и невозможных для съёмки кадров: тёмная материя вокруг галактики, рассвет над хвойным лесом, капля росы на листе крупным планом.
  2. Из картинки. Вы загружаете изображение, а нейросеть его оживляет: облака плывут, трава колышется, человек на фото делает вдох. Этот способ даёт больше контроля, потому что композицию и цвета вы задаёте заранее.

На практике я чаще использую второй вариант. Сначала подбираю или генерирую кадр, который нравится, и только потом превращаю его в видео. Так меньше попыток уходит впустую.

С чего начать

Сервисов сейчас много, и я не буду делать вид, что перепробовал все. Мне было важно, чтобы в одном окне были и картинки, и видео, чтобы можно было сравнить несколько моделей на одном описании и оплачивать без зарубежной карты. Сейчас для этого я пользуюсь агрегатором https://iskragen.ru/: там собраны разные модели генерации изображений, видео и звука, и удобно прогнать одну и ту же сцену через несколько из них, чтобы выбрать, какая лучше справляется именно с природой или с людьми.

Совет из собственного опыта: не привязывайтесь к одной модели. Одна отлично передаёт воду и листву, но путает пальцы у людей. Другая хорошо держит лицо, зато делает небо плоским. Сравнение на двух-трёх коротких пробах экономит массу времени.

Как писать описание сцены

Первые мои ролики выглядели странно: всё двигалось сразу и во все стороны. Потом я понял, что модели нужно описывать кадр так же, как оператору.

  • Объект. Что в центре кадра: «старая сосна на краю обрыва», а не просто «лес».
  • Действие. Одно главное движение: «ветер медленно качает ветки».
  • Камера. «Медленный наезд», «камера неподвижна», «плавный облёт справа налево».
  • Свет и время суток. «Мягкий утренний свет, лёгкий туман».
  • Стиль. «Документальная съёмка», «макро», «кинематографичный кадр».

Хорошее описание звучит примерно так: «Макросъёмка: капля росы скатывается по зелёному листу, камера неподвижна, мягкий утренний свет, фон размыт». Короткая фраза «красивая природа» почти всегда даёт что-то усреднённое и скучное.

Ошибки, которые я совершал

Слишком много действий в одном кадре. Если попросить, чтобы человек шёл, говорил, пил воду и оборачивался, получится каша. Одно движение на один ролик, остальное лучше сделать отдельными кадрами.

Длинные ролики. Нейросети уверенно держат несколько секунд. Чем длиннее фрагмент, тем выше шанс, что к концу лицо «поплывёт», а предметы начнут менять форму. Я делаю короткие куски и потом склеиваю их обычным редактором.

Люди в сложных позах. Упражнения на дыхание, растяжка, йога — именно здесь модели ошибаются чаще всего: лишние суставы, руки, проходящие сквозь тело. Для таких тем я показываю не всё упражнение, а спокойный общий план или деталь, например ладонь на животе во время вдоха.

Текст в кадре. Надписи внутри видео нейросети рисуют плохо. Заголовки и подписи я добавляю уже при монтаже.

Где это реально пригодилось

Для статьи о полезном завтраке я сделал несколько секундных сцен: овсянка, на которую падают ягоды, пар над чашкой, нарезка яблока. Для материала про активность — пустую утреннюю спортивную площадку и бегущие по асфальту тени от деревьев. Для научной темы про Вселенную — медленный пролёт мимо туманности. Ни одну из этих сцен я бы не снял сам за разумное время.

Читатели чаще досматривают страницу до конца, когда текст разбавлен движением. Но важна мера: ролик должен иллюстрировать мысль, а не отвлекать от неё.

О чём стоит помнить

Сгенерированное видео — это иллюстрация, а не документ. Если вы пишете о здоровье, не выдавайте нарисованную сцену за реальную съёмку процедуры или упражнения и не используйте её как доказательство. Показывать технику выполнения упражнения лучше живым видео специалиста, а нейросеть оставить для атмосферных вставок.

Второй момент — права и приличия. Не оживляйте фотографии реальных людей без их согласия и не создавайте ролики, которые можно принять за новости. Правила использования у сервисов разные, поэтому перед публикацией стоит прочитать условия того инструмента, которым вы пользуетесь.

Мой порядок работы

  1. Решаю, какую мысль статьи должен поддержать ролик.
  2. Пишу описание сцены по схеме «объект, действие, камера, свет, стиль».
  3. Делаю или подбираю исходную картинку, если нужен точный контроль.
  4. Запускаю две-три пробы на разных моделях.
  5. Выбираю лучший вариант, обрезаю неудачные секунды, добавляю подписи.

Весь цикл для одного короткого ролика у меня теперь занимает меньше часа, включая неудачные попытки. Если вы давно хотели добавить видео в свой блог, но упирались в отсутствие камеры и времени, попробуйте начать с одной простой сцены из природы. Лес, вода и небо получаются у нейросетей лучше всего, и на них проще всего научиться.

Прокрутить вверх