Midjourney выпус­тила свою первую нейросеть для гене­рации видео

18 июня Midjourney представила модель V1 для генерации видео.

V1 генерирует видео только на основе картинок. Текстовый промпт для создания ролика с нуля, как в большинстве других нейросетей, задать нельзя. Воспользоваться функцией можно только платно.

Чтобы сгенерировать видео, потребуется изображение. Можно создать его прямо в Midjourney или загрузить свое. В последнем случае картинку нужно перетащить в поле для ввода запроса и отметить как стартовый кадр. Затем надо выбрать настройки и нажать Animate, чтобы запустить генерацию.

Генерация работает в двух режимах: автоматическом, когда нейросеть сама придумывает движение, и ручном, когда пользователь в запросе описывает, что должно происходить в сцене.

Еще можно настроить уровень движения. С параметром Low Motion камера остается неподвижной, а объект двигается. При выборе High Motion будут двигаться и объекты, и камера.

Генерация ролика занимает несколько секунд. На выходе получается четыре варианта видео на выбор — каждое продолжительностью 5 секунд. Понравившиеся можно продлить до 20 секунд. Качество — 480p при 24 кадрах в секунду.

Для генерации видео потребуется оплатить как минимум нижний уровень подписки — Basic. Он стоит 10 $⁣ (785 ₽)  в месяц и предоставляет доступ к созданию 200 картинок. Генерировать видео обходится примерно в восемь раз дороже, чем изображения. Таким образом, с базовым планом получится примерно 25 роликов в месяц.

Владельцам подписки Pro за 60 $⁣ (4711 ₽) в месяц и выше доступны безлимитные генерации видео в Relax-режиме. В нем видео генерируются медленнее — примерно по три-четыре минуты.

В будущем Midjourney планирует объединить генерацию картинок, видео, 3D и работу в реальном времени в один алгоритм — для создания полноценных симуляций открытого мира с управлением сценами и объектами в нем. Пока разработчики выпускают части этого алгоритма, а потом соберут это в единую систему.