Midjourney научилась генерировать видео из картинки — стоит в 25 раз дешевле конкурентов

После многочисленных слухов Midjourney всё-таки выпустила свою первую ИИ-модель для генерации видео. Этот шаг компания описывает как стремление к системам искусственного интеллекта, способным моделировать целые трёхмерные миры в реальном времени. С технической точки зрения эта модель является функцией, позволяющей пользователям создавать «что-то весёлое, лёгкое, красивое и доступное». Такой процесс компания называет «Image-to-Video». Midjourney по-прежнему будет создавать изображения, но теперь появилась кнопка «Анимировать», которая превращает картинку в короткий анимированный клип.

Работает новая функция пока только в веб-интерфейсе Midjourney. Пользователи могут выбирать между автоматическим режимом, в котором система самостоятельно определяет, как будет осуществляться анимация, и ручным режимом, в котором все движения детально прописываются. Разработчики говорят, что есть два главных параметра: «high motion» и «low motion». Первый лучше всего подходит для быстрых сцен, где двигаются и объект, и камера. Второй — для сцен, где камера остаётся в основном неподвижной, а объект движется медленно. У обоих есть недостатки: «high motion» сильно агрессивный и ошибается, тогда как «low motion» иногда вообще может не анимировать объект.

Длительность видео составляет 4 секунды, его можно продлить 4 раза, то есть в общей сложности получится 16 секунд. Пользователи могут анимировать изображения, созданные вне Midjourney, перетаскивая их в панель подсказок и устанавливая в качестве «Начального кадра». Затем в текстовом поле описывается желаемая анимация. Midjourney не называет технические данные сгенерированного ролика, но видео загружается, как MP4-файл с разрешением 480p и частотой 24 кадра в секунду. Стоимость генерации видео стоит примерно в 8 раз дороже, чем изображения. Midjourney утверждает, что её модель в 25 раз дешевле конкурентов.

Для подписчиков уровня «Pro» и выше Midjourney тестирует режим «Video Relax Mode», который позволяет создавать видео, не используя приоритетную обработку, что потенциально должно снизить стоимость выполнения задания. В ближайшее время цены будут скорректированы в зависимости от спроса и нагрузки на сервер.