Runway Ru

Нейросеть для видео:четыре разные задачи

Runway способен выполнить четыре независимые задачи: снять ролик с нуля, оживить снимок, переделать снятое и перенести мимику на персонажа. Нейросеть справится со всем, но не во всем сильна одинаково.

Gen-4.5 флагманская модель4 разных режима

Снять с нуля по описанию

Текст на входе, ролик на выходе. Здесь Runway работает наравне с соседями по рынку: качество зависит от того, насколько точно описаны действие, камера и свет.

Оживить фотографию

Снимок превращается в видео. Композиция уже задана кадром, модели остаётся добавить действие — результат предсказуемее, чем у сцены с нуля.

Переделать снятое

Можно заменить объект, сменить обстановку, убрать лишнее — прямо в готовом ролике. Разбор Aleph.

Сыграть за персонажа

Мимика и подача снимаются с живого человека и переносятся на героя. Играет актёр, рисует модель — как это устроено.

Кадры,снятые Runway

ночная погоня по мокрой набережной, камера едет параллельно, отражения фар в лужах
марокканский рынок специй, камера медленно облетает торговца
кит плывёт в воздухе над ночным городом, огни отражаются на его боку
крупный план актрисы: удивление сменяется улыбкой, мягкий оконный свет
корги в скафандре идёт по лунному реголиту, Земля в небе, длинные тени

Заменяет не монтажёра,а пересъёмку

Задачи вроде «поменять вывеску на фоне» или «переснять сцену в другую погоду» раньше решались двумя способами: ротоскопией на несколько часов или новой съемкой. Модель делает это одной генерацией.

Обратная сторона: это по-прежнему всего лишь инструмент. Кадр нужно отобрать, описание сформулировать, результат проверить. Разница в том, что цикл занимает минуты, а не целую смену.

1. Взять готовый материал

Своё фото или снятый кадр даёт понятную точку отсчёта. Оценить модель на этом проще, чем на сцене, придуманной с нуля.

2. Гонять черновики на Turbo

Быстрая модель расходует 5 кредитов в секунду против 12 у флагмана. Композицию перебирают на ней, в высокое качество уводят отобранный дубль.

3. Считать в секундах

Тариф удобнее мерить не кредитами, а секундами готового видео — бренд сам приводит этот пересчёт: таблица.

Проверить на своём материале

Доступ к Runway по подписке с оплатой российской картой — через сервис-посредник.