Нейросети

Runway Gen-2

Инновационная система искусственного интеллекта, которая позволяет генерировать видео на основе текстовых запросов, изображений и видеоклипов.

🏆1 место в рейтинге «Нейросети для создания видео»

Видеообзор

Что такое Runway Gen-2?

Компания Anthropic представила инновационную систему искусственного интеллекта Runway Gen-2, способную генерировать видео на основе текста, изображений и видеоклипов. Эта многофункциональная нейросеть предлагает широкий спектр возможностей, включая синтез видео из текстовых описаний, стилизацию существующих видео, создание анимированных раскадровок и многое другое. Runway Gen-2 доступна через веб-интерфейс и мобильное приложение для iOS, предоставляя пользователям инструменты для воплощения творческих идей в визуальные истории.
Работа с Runway Gen-2 интуитивно понятна и не требует специальных навыков. Пользователи могут генерировать четырехсекундные видеоролики, используя текстовые запросы на английском языке. Система позволяет настраивать различные параметры, такие как стиль, жанр, план съемки, объекты, действия, окружение и освещение. Бесплатная версия сервиса предоставляет ограниченный функционал, но позволяет оценить потенциал технологии. Для достижения наилучших результатов рекомендуется использовать четкие и детальные запросы, а также экспериментировать с настройками интерполяции и сидами для создания серии связанных видеороликов.

Что умеет Runway Gen-2?

  • Создание видео из текста
  • Создание видео из изображения
  • Есть кисть движения (Вы можете загрузить изображение и изменить направление просмотра, к примеру вы загрузили фото человека который смотрит прямо, и благодаря этой функции вы сможете сделать так, чтобы он мог смотреть в любую сторону, это касается не только головы, частей человека в целом, т.е. можно кистью отметить руку человека и сделать так, чтобы он ее поднял)

Процесс создания видео

Создание видео из текста

После того как вы зарегистрировались, вас перенаправят на основную страницу, первым делом нужно будет нажать на кнопку “Генерация видео”, в оригинале она написана так: Generate Videos

Дальше нужно будет нажать на кнопку “Начало работы”

После этого нужно написать промт, желательно детально описать что должно быть в видео, но при этом нужно уложиться в 350 символов. В итоге получится видео длительностью 4 секунды, поэтому не нужно писать слишком подробный промт, который рассчитан на более 4 секунд.

В итоге получилось подобное видео, результат не очень хороший, видео полностью отличается от составленного мной запроса. Он создал видео, которое вообще не подходит.

Я решил проверить, как будет выглядеть новое видео, если написать промт на английском языке. В этом случае результат порадовал, видео получилось неплохим.

Создание видео из изображения

Для того чтобы создать видео из изображения, вам нужно нажать на кнопку “Select from Assets” или на фон этого текста, в принципе разницы нет, после этого нужно выбрать подходящее изображение, либо вы можете просто перенести изображение в этот большой квадрат

После того как вы выбрали изображение, нужно написать промт, что из этой картинки должно получится, также как и с обычным промтом, тут нужно написать максимально подробно. Я написал такой промт: “На изображении изображен рыжий кот, твоя задача сделать так чтобы он повернул голову вправо”. Только предварительно перевел его на английский, для более лучшего результата, т.к. с русскими запросами у Runway Gen-2 есть проблемы. После того как загрузите изображение и напишете промт, нужно нажать на кнопку “Сгенерировать 4 сек.”

В итоге получилось такое видео:

Видео было создано в течении 1 минуты, оно получилось неплохим, нейросеть полностью поняла мой запрос, кот повернул голову вправо, но к сожалению не так как я ожидал, возможно стоило в запросе указать больше деталей, для лучшего результата.

Функция «Кисть движения»

Для начала нужно нажать на кисть с левой стороны интерфейса, после этого нужно загрузить изображение с которым вы будете работать

После этого вам нужно навести кисточкой на объект, который вы хотите передвинуть

Я выбрал несколько объектов которые хочу анимировать, теперь нужно настроить движение анимации (эти настройки находятся с правой стороны)

Я выбрал такие параметры, при желании вы можете добавлять несколько кистей, для каждой кисти вы можете выбирать свои параметры, после того как закончите, нажмите - “Сгенерировать 4 сек.”.

Если вам что-то не понравилось в созданном видео, вы без проблем можете все изменить, но помните, создание каждого видео будет стоить 20 кредитов.

Мне не очень понравился результат, я стер ластиком в “Кисть 1” нос, и глаза, т.к. он слишком сильно поднимал голову вверх, и это смотрелось очень странно, я создал новую кисть, поставил ручное выделение и выделил ушки, сделал так, чтобы они немного наклонились влево. После чего нажал на кнопку “Сгенерировать 4 сек.”, в надежде получить красивую анимацию 🙂

В итоге получилось создать неплохое видео, но и не совсем такое как хотелось, почему то ракурс ушел вниз, хотя я это нигде не указывал, да и уши не шевелились как хотелось бы.

Стоимость использования:

Runway Gen-2 можно использовать совершенно бесплатно, всего вам дается 525 кредитов, создание одного видео стоит 20 кредитов, вы можете создать до 21 видео, длительностью 4 секунды. Но в бесплатной версии есть ограничения, во-первых, вы не сможете создать видео высокого разрешения, во-вторых в каждом созданном видео буджет вотермарк.
Подписка на месяц стоит 15$ в месяц, если оплатить сразу за год, то выходит 12$ в месяц, оплатив подписку, вы получаете множества преимуществ:
  • Высокое разрешение
  • Удаление водяных знаков
  • Сокращение времени ожидания
  • Получайте 125 секунд сгенерированного видео каждый месяц

Как пользовать Runway из России?

Runway недоступен в России, поэтому пользоваться можно только через VPN. Поэтому для начала вам потребуется:
  1. Ноутбук или компьютер
  2. VPN (мы делали обзор лучших ВПН для нейросетей)
  3. Сайт для виртуальных номеров телефонов

Шаг 1: Найдите зарубежный номер телефона

Для верификации понадобится иностранный номер телефона. Можно купить eSIM или арендовать виртуальный номер через сервисы виртуальных номеров. Выбирайте страну, где доступен Runway. Например, номер США можно получить за 30 ₽. Как это сделать:
  1. Зарегистрируйтесь на сайте виртуальных номеров и пополните баланс на 100 рублей.
  2. Выберите сервис и страну (Англия или США). Рекомендуется начать с Англии.
  3. Получите виртуальный номер телефона.

Шаг 2: Подключитесь к VPN

Включите VPN и выберите сервер в одной из стран, где работает Runway. Лучше в США или Великобритании

Шаг 3: Перейдите на сайт Runway

Откройте сайт Runway под иностранным IP (VPN).
Важно: всегда заходите на сайт под иностранным IP, иначе ваш аккаунт могут заблокировать.

Как зарегистрироваться

Для начала вам необходимо нажать на кнопку “Попробуйте Gen-2 на взлетно-посадочной полосе” переводит не совсем корректно, но Runway Gen-2 не поддерживает русский язык, приходится пользоваться переводом страницы, в оригинале кнопка будет выглядеть так: Try Gen-2 in Runway

После этого вас перебросит на страницу регистрации, вам нужно будет нажать на кнопку “Войти с помощью Google”, далее нужно будет выбрать аккаунт, с которого вы хотите зарегистрироваться.
Видео