Гайд по Pika: генерируем видео, оживляем картинки и применяем эффекты

Pika — это нейросеть для генерации коротких видео. В ней можно создавать ролики по текстовому запросу, оживлять иллюстрации или накладывать эффекты, чтобы превратить картинку в сюрреалистичное видео. У Pika простой интерфейс и небольшое количество настроек, в ней легко разобраться и начать создавать видеоролики. Нейросеть доступна в России, ее можно попробовать бесплатно.

Регистрируемся в Pika

Чтобы начать пользоваться нейросетью, зайдите на официальный сайт Pika. Платформа предложит зарегистрироваться через email, аккаунт Google, Discord или Facebook*. Выбирайте любой удобный вариант. 

Знакомимся с интерфейсом

На главной странице по центру будут показаны примеры сгенерированных в программе роликов. Видео из библиотеки можно скачивать, добавлять в закладки или отправлять в социальных сетях. Для этого наведите курсор на ролик — справа появятся соответствующие кнопки.

Чтобы посмотреть свои сгенерированные видео, переключитесь с вкладки Explore на My library. Эти ролики также можно скачивать, отправлять в соцсетях и добавлять в избранное. Понравившиеся генерации хранятся на этой же странице в папке My Favorites.

Внизу экрана располагается поле для ввода промпта.

Генерируем видео по текстовому промпту

Чтобы сгенерировать видео, напишите текстовый запрос в поле Describe your story. Промпты пишите на английском языке, иначе нейросеть может неправильно их обработать. Запросы могут быть короткими из одного предложения или длинными на пару абзацев. Последние Pika может долго обрабатывать. Также не перебарщивайте с деталями: они могут запутать программу, и она выдаст некорректный результат.

В промпте важно описать главное действие. Например, автомобиль едет по дороге в городе, кот пьет молоко, верблюд идет в пустыне. Дополнительно можно указать положение камеры, фон, освещение, стиль (аниме, мультяшный, черно-белая пленка и т. д.). 

В результате может получиться что-то вроде такого промпта: черный кот идет по дороге в деревне, ярко светит солнце, на фоне видны деревенские дома, мультяшный стиль.

Теперь переведем наш промпт на английский язык и вставим в текстовое поле. Чтобы нейросеть приступила к генерации, нужно нажать на кнопку со звездочкой.

Pika сгенерировала 5-секундный ролик по нашему описанию. У кота косоглазие и не видно задних лап, но в целом картинка симпатичная.

Если результат не устроил, нажмите на кнопку Retry, и нейросеть его перегенерирует. Если нажать Reprompt, программа вставит в текстовое поле промпт ролика, вы сможете подкорректировать его и улучшить результат генерации.

Если под текстовым полем нажать на значок с ползунками (Advanced Options) откроются дополнительные настройки:

• Negative prompt — отрицательный запрос. Здесь можно написать, чего не должно быть на видео. Например, людей, деревьев, зеленых глаз (у кота или человека, например);
• Seed — это код (цифровое обозначение), который присваивается каждому ролику в Pika. Вы можете вставить в поле Seed код любого сгенерированного видео, и нейросеть создаст ролик с похожим визуальным стилем;
• Aspect ratio — соотношение сторон видео. По умолчанию стоит 16:9, но вы можете заменить на другое более подходящее. 

Для примера скопируем Seed нашего видео про кота и попросим нейросеть сделать ролик с пролетающей бабочкой над котом. Чтобы взять Seed, нажмите на значок информации под нужным видео.

Напишем в текстовом поле промпт: a butterfly flies over a cat (бабочка пролетает над котом). Для этого откроем дополнительные настройки и вставим значение Seed. Кликнем на кнопку со звездочкой и оценим результат.

Pika старалась сохранить визуал, но отличия все равно заметны: кот другого цвета и не мультяшный, цветочное поле тоже не совсем соответствуют этому стилю.

Попробуем указать в промпте мультяшный стиль и цвет кота — черный. Получился такой промпт: a butterfly flies over a black cat, cartoon style. Скопируем Seed нашего первого видео про кота и отправим на генерацию. Получилось лучше:

Создаем видео в старой версии нейросети — Pika 1.0

По умолчанию запускается новая версия Pika. Чтобы переключиться на старую (Pika 1.0), нажмите на иконку кролика под текстовым полем и выберите модель.

Рядом с текстовым полем появятся дополнительные настройки:

• Style — стиль. Можно его не прописывать в промпте, а выбрать из шаблона: в Pika есть стиль аниме, 3D, натуральный, черно-белый и другие.
• Camera Control — движение камеры. Можно выбрать, чтобы камера медленно приближалась к главному объекту, уменьшая угол обзора (настройка Zoom +) или указать, чтобы камера двигалась влево или вправо (настройка Pan). Одновременно можно задавать несколько вариантов.
• Sound effects — звуковое сопровождение. Включите его, нейросеть будет автоматически генерировать звуки к видео.
• Inspire me (кубики в текстовом поле) — рандомный промпт. Используйте, если хотите попробовать сделать видео, а идей для генерации нет, воспользуйтесь этой кнопкой.

Попробуем сделать видео в 3D-стиле с приближением камеры. Выберем соответствующий стиль, зададим настройку камеры Zoom + и напишем промпт: red apple on the table (красное яблоко на столе). 

Pika выполнила наш запрос и сгенерировала ролик, где камера приближается к яблоку.

В версии Pika 1.0 есть дополнительные настройки в Advanced options:

• Frames per second — кадры в секунду. Параметр влияет на плавность движения в видео. Если хотите получить гладкий и естественный ролик, оставьте по умолчанию 24. Либо снизьте до 8, чтобы видео получилось рваным, как в старой киноленте.
• Strength of motion — параметр для управления скоростью движения. Чем выше, тем быстрее движутся объекты в видео.
• Consistency with the text — точность соответствия промпту. Чем выше показатель, тем больше генерация соответствует запросу.

Можно поэкспериментировать с этими настройками, чтобы получить лучший результат.

В этой версии можно удлинять видео на 4 секунды (Add 4s) и редактировать ролики (Edit). В режиме редактирования есть такие настройки:

• Modify region — функция, которая позволяет менять объекты на видео по текстовому промпту. Например, можно заменить щенка на котенка, торшер на новогоднюю елку, белую футболку на вязаный свитер.
• Expand canvas — инструмент для расширения холста. Здесь можно указать новые соотношения сторон видео, и нейросеть дорисует пустые области.
• Lip sync — функция, которая позволяет добавлять диалоги в видео и синхронизировать речь с движением губ.
• Sound effects — генерация звуков к видео по текстовому промпту. Например, можно добавить шум дождя или автомобильного мотора, лай собаки и т. д.

Попробуем заменить в ролике яблоко на торт. Нажимаем Edit → Modify region и выбираем область на видео, которую будем менять. В промпте мы заменили red apple (красное яблоко) на cake (торт).

Нейросеть переделала ролик по нашему запросу: 

Генерируем видео по картинке

В Pika можно загрузить свою картинку, и нейросеть на ее основе создаст видео. При таком способе ролики получаются более качественными и с меньшим количеством багов в сравнении с генерацией по текстовому промту. Все потому, что программе не нужно создавать окружение с нуля. 

Pika может оживлять практически любые предметы, животных, людей. Но не стоит загружать иллюстрации с большим количеством объектов. Желательно, чтобы был один главный персонаж. Иначе программа запутается и выдаст плохой результат.

Чтобы попробовать функцию, нажмите под текстовым полем Image и загрузите изображение с компьютера. Если нет подходящей картинки, ее можно создать в Leonardo AI, Midjourney, Stable Diffusion или в других нейросетях.

В текстовом поле укажите, что именно должна сделать Pika. Допустим, вы загрузили портрет девушки и хотите, чтобы она улыбалась, напишите просто: девушка улыбается. Или у вас изображение автомобиля на дороге и нужно, чтобы он ехал. Подойдет промпт: машина едет по дороге.

Для примера загрузим картинку кабриолета, который едет по живописной дороге. Попросим Pika оживить иллюстрацию с помощью промпта: a convertible is driving down the road (кабриолет едет по дороге). Получилось неплохо:

А вот мы попросили нейросеть сделать так, чтобы девушка улыбалась. Вышло довольно естественно:

Добавляем эффект на картинку с помощью Pikaffect

В Pika есть шаблоны эффектов, которые превращают картинки в сюрреалистичные ролики. Например, объект на иллюстрации можно сплющить руками, как пластилин, или разбить на кусочки. Превратить в торт и нарезать или надуть как воздушный шар. Сейчас на выбор доступно 13 эффектов. Чтобы посмотреть их, нажмите на Pikaffect под текстовым полем.  

Чтобы воспользоваться функцией, нужно загрузить изображение с компьютера через инструмент Image и выбрать понравившийся эффект. Мы для примера попробуем спрессовать бутылку воды.

Получилось неплохо:

Вот еще интересный эффект Squish it:

Тарифы в нейросети Pika

Каждый пользователь при регистрации получает 150 кредитов, которые обновляются раз в месяц. Этого хватит на создание 10 видео. Однако иногда сайт бывает перегружен и нейросеть не генерирует ролики бесплатным пользователям. В платной версии подобных проблем нет, но для оплаты понадобится карта зарубежного банка.

Чтобы оплатить подписку, нажмите в правом верхнем углу сайта кнопку Upgrade и выберите нужный тариф:

Резюме

Pika подходит для создания несложных коротких видео. В большинстве случаев анимация получается качественной, но могут встречаться баги при генерации людей и животных. Чтобы снизить этот риск, лучше делать ролики на основе готовых изображений.

Эффекты в Pika можно использовать, чтобы создавать сюрреалистичные видео для сториз, рилсов, рекламы. Это поможет привлечь внимание аудитории в интернете. Но придется приобрести подписку Pro или Unlimited, в которых разрешено коммерческое использование.