Runway — это нейросеть, которая умеет генерировать видео и фото, а также анимировать «скормленных» ей персонажей и озвучивать текст. На вход она принимает как текст, так и картинки, а для начала работы не нужна подписка. Разбираемся, какой контент можно сгенерировать с Runway бесплатно и как это сделать.
Содержание
Что такое Runway
Runway — так называется и сама нейросеть, и платформа для создания контента, с помощью которой можно получить доступ к генеративному ИИ. Есть несколько версий нейросети, начиная с Runway Gen 1. Самая новая — модель Gen 4 Turbo. На сайте доступно несколько версий нейросети Runway, и инструкция для них везде одинаковая. Актуальных версий нейросети — четыре:
- Gen-4 Turbo: самая быстрая и эффективная.
- Gen-4: самая последовательная и управляемая (платная).
- Gen-3: Alpha Turbo: самая быстрая в генерации видео из текста или картинок.
- Gen-3 Alpha: просто умеет генерировать видео, картинки и переводить текст в видео (платная).
По умолчанию выбирается частично бесплатная Gen-4 Turbo. Она построена так же, как и другие подобные нейросети, — на базе диффузионных моделей. Последние превращают графический «шум» в то, что мы видим в результате работы нейросети, — видео или изображение.
Модели делают это благодаря обучению: сначала в них загружают тысячи пар описаний видео или картинок и сами исходные ролики или изображения. С помощью этих материалов алгоритм выявляет то, какие слова и каким образом отражаются в конечном результате. Например, со временем алгоритм понимает, что банан — это что-то желтое и продолговатое.
Иначе говоря: если дать модели 10 000 картинок банана в разных ракурсах под разным светом и множество точных описаний этих картинок, она будет точно знать, чем «банан под дождем» отличается от «надкусанного банана» и почему банан — это не желтый огурец. И в итоге безошибочно выдаст свою вариацию, если попросить сгенерировать «банан, лежащий на столе».
Ранее мы рассказывали:
Топ-10 нейросетей для создания презентаций: от Gamma.app до Presentations.ai
Что можно сделать с помощью ИИ Runway
На главном экране платформы перечислены основные возможности нейросети — это создание видео, анимация персонажей и генерация изображений.
К примеру, можно загрузить фотографию бюста Наполеона и заставить его говорить, «оживить» нарисованного персонажа или сгенерировать картинку по текстовому описанию. Все это может нейросеть Runway. Как пользоваться ей бесплатно? Нужно зарегистрировать учетную запись с помощью Google-аккаунта или Apple ID.
Как работать с Runway
Создание видео из картинок
Видео можно сделать из картинок. Такая генерация доступна на главном экране в первом окошке слева. Чтобы загрузить изображение, перетащите его в рабочую область или нажмите кнопку Create Image для создания первого кадра с нуля с помощью Runway.
Снизу можно выбрать стиль картинки или добавить примеры для более точной генерации, а по кнопке Select Asset откроется папка с уже загруженными на сайт файлами, если они есть.
Напишите запрос (промпт) на английском языке. Нейросеть создаст четыре похожих варианта видео на выбор, но процесс может занять 10 минут или больше. Если закрыть сайт, генерация не прервется. Нажмите на понравившееся изображение и кнопку Use, чтобы использовать его как первый кадр ролика.
Дальше появится поле ввода, где можно описать сюжет видео. Процесс создания тоже может затянуться. В конце сайт выдаст пятисекундный ролик, созданный по вашему описанию. Но сервис работает неидеально, и результат может отличаться от задуманного.
Ранее мы рассказывали:
Топ-15 нейросетей для создания видео: от «Шедеврума» до PixVerse
Анимация персонажей
Функция анимации персонажей принимает видео длиной до 30 секунд и пример того, как будет двигаться будущий персонаж. Это могут быть движения тела в полный рост или мимика крупным планом.
После загрузки ролика или записи его с веб-камеры прямо на сайте в нижней части рабочей области можно добавить и самого персонажа — это может быть скриншот героя мультфильма, фото наброска на бумаге или качественная картинка проработанного персонажа. Результатом будет объект с фото, который двигается так же, как человек на видео.
Генерация картинок
Функция генерации картинок похожа на создание видео, но нейросеть делает только первый кадр без дальнейшего производства ролика. Внизу, во вкладке Styles, тоже можно выбрать стили, а во вкладке References — добавить примеры, которыми нейросеть будет руководствоваться во время создания изображения.
Скачать картинки, как и другие медиафайлы, можно в подменю Assets в левой панели. Картинки скачиваются в разрешении 1920×1080 пикселей, а видео — 1280×720 пикселей.
Перевод текста в речь
Меню создания звуков не отображается на основном экране и доступно слева, чуть ниже подменю Assets. Там можно добавить в поле ввода текст и озвучить его своим или чужим голосом.
«Исполнителя речи» можно выбрать в меню снизу, а для озвучки собственным голосом нужна подписка. Эта функция доступна по кнопке Record Audio. Русская речь генерируется с американским акцентом. Результат можно скачать на ПК.
Ранее мы рассказывали:
Лучшие инструменты генеративного ИИ: топ-12 приложений
Что дает подписка
Изначально пользователю дается несколько моделей и 125 кредитов, и с каждой генерацией последние уменьшаются. Подписка увеличивает их количество. Например, самый доступный тариф за $144 в год каждый месяц предоставляет 625 кредитов и открывает доступ ко всем моделям. Также он расширяет память для пользовательских файлов с 5 до 100 ГБ, удаляет водяной знак и позволяет генерировать бесконечное число проектов.
Каждый следующий вариант подписки увеличивает лимиты и добавляет что-то сверху. Например, в тарифе Pro за $336 доступно уже 2250 кредитов и 500 ГБ, а также включена возможность озвучки текста собственным сгенерированным голосом.
Самый дорогой тарифный план стоит $2000 в год и открывает доступ ко всем возможностям нейросети Runway. Как пользоваться подпиской в России в условиях санкций? Самый простой способ — с помощью карты иностранного банка или тех же сервисов, что помогают при работе с большинством заграничных оплат.
2SDnjePbYNR
