Adobe выпускает свой первый коммерчески безопасный ИИ Firefly, генерирующий видео

Вслед за успехом своей модели Firefly Image , совместимой с IP, Adobe объявила в среду о бета-выпуске новой модели Firefly Video, а также о двух пакетах подписки, с помощью которых можно получить доступ к возможностям создания аудио и видео. Generate Video, согласно рекламному сообщению, «предоставляет творческим профессионалам инструменты для создания видеоклипов из текстовой подсказки или изображения, использования ракурсов камеры для управления кадрами, создания изображений профессионального качества из 3D-эскизов, создания атмосферных элементов и разработки индивидуальных элементов анимационного дизайна».

Первоначально модель сможет генерировать видео в разрешении 1080p, хотя в ближайшем будущем компания планирует выпустить модель 4K для профессиональной продюсерской работы. Как и генератор изображений, Firefly Video обучается исключительно на стандартном, лицензированном и общедоступном контенте Adobe, что позволяет использовать его результаты в коммерческих приложениях, не опасаясь, что они нарушат авторские права или защиту интеллектуальной собственности. И, в отличие от Grok 2, вероятность того, что он выведет расистский, оскорбительный или незаконный контент, минимальна.

Firefly Video будет доступен как через Adobe Premiere Pro (как инструмент Generative Extend), так и через новое веб-приложение Firefly.Adobe.com. Пользователи смогут создавать видеоклипы как из текстовых подсказок, так и из эталонных изображений, а также добавлять атмосферные эффекты и элементы пользовательского анимационного дизайна. Они даже смогут фиксировать первый и последний кадры клипа, «чтобы сохранить визуальную непрерывность, цвета и детали персонажей».

Новая функция «Сцена в изображение» позволяет пользователям «бесшовно визуализировать готовые к производству ресурсы» с помощью инструмента для создания 3D-эскизов, преобразуя концепт-арт автора в изображения с высоким разрешением и ссылки на структуры, которые затем можно использовать для итерации сгенерированного видеоклипа. Firefly Video также может генерировать аудио для перевода разговорного диалога на любой из 20 языков.

Adobe запускает пару планов подписки вместе с Firefly Video, любой из которых предоставит вам полный доступ к новой модели. План Firefly Standard стоимостью 10 долларов в месяц предлагает 2000 видео/аудио кредитов в месяц на сумму до 20 5-секундных поколений видео в разрешении 1080p. С другой стороны, план Firefly Pro стоимостью 30 долларов в месяц предоставляет 7000 видео/аудио кредитов в месяц, что позволит вам просматривать до 70 5-секундных клипов с разрешением 1080p. Adobe также сообщила, что в разработке находится план «Firefly Premium», ориентированный на профессионалов, желающих создавать большие объемы видео и аудио, хотя пока нет информации о том, сколько он может стоить и когда он будет выпущен.

Adobe впервые представила видеомодель Firefly в апреле прошлого года, а в сентябре представила предварительный обзор ее возможностей . Он выходит на все более насыщенный рынок, где конкурируют как премиальные, так и бесплатные модели , такие как Kling AI , Movie Gen от Meta и Sora от OpenAI.