Новый конкурент Adobe Sora по генерации видео с помощью ИИ теперь доступен для всех

Adobe запустил свой генератор видео на основе искусственного интеллекта (AI), который может создавать видео по текстовым и изображениям подсказкам. С 24 октября компания началла выпуск инструментов, основанных на модели Firefly Video AI, начиная с бета-версии Generative Extend для Premiere Pro, позволяющей расширять начало или конец видеозаписей.

Сегодня стартовал публичный бета-тест инструмента Generate Video. Включает в себя две функции: Text-to-Video и Image-to-Video. Первая позволяет создавать видео на основе текстового описания, а вторая использует изображение как отправную точку для генерации ролика.

Generate Video предлагает различные опции для уточнения и направления результатов, включая симуляцию стилей, углов камеры, движения и расстояния до объекта. Видео выводится в разрешении 1080p при 24 кадрах в секунду — это улучшение по сравнению с первоначальным качеством 720p.

Обе функции Text-to-Video и Image-to-Video требуют до 90 секунд или более для генерации видео длиной не более пяти секунд. Adobe также работает над созданием быстрого, но с меньшим разрешением «модели идеации» и модели в разрешении 4K.

Кроме того, компания обновила Firefly — веб-приложение, которое хранит большинство инструментов на основе AI. Новый интерфейс позволяет легко перемещать и редактировать сгенерированные материалы в таких программах Creative Cloud как Photoshop, Premiere Pro и Express.

Firefly обучается на материалах из общественного достояния и с лицензионным содержанием, что делает его безопасным для коммерческого использования. Adobe называет инструмент Generate Video «готовым к производству», чтобы привлечь пользователей, которые хотят использовать AI-видео в своих фильмах без риска нарушения авторских прав.

Adobe сталкивается с возрастающей конкуренцией в рынке видео на основе искусственного интеллекта. В дополнение к Sora, Google тестирует второе поколение своего AI-модели Veo для генерации видео, которая выглядит более привлекательной по сравнению с моделью OpenAI, как показывают ранние демонстрационные примеры. ByteDance и Pika Labs также недавно объявили о новых инструментах на основе AI для создания видео.

Главное преимущество Adobe — коммерческая привлекательность Firefly, но компании все равно придется справляться с качеством и функциями, которые предлагают ее конкуренты.

Дополнительно к Generate Video, два новых инструмента станут доступны в бета-версии на платформе Firefly: Scene to Image для создания собственных образцов AI-изображений с помощью встроенных 3D и функций рисования; Translate Audio and Video — для перевода и озвучивания аудио более чем на 20 языках, сохраняя оригинальный голос говорящего.

Adobe запускает две новые подписки Firefly: Standard за $9.99 в месяц дает до 2,000 кредитов (до 20 видео по пять секунд) и Pro за $29.99 с 7,000 кредитами (до 70 видео), обе включают неограниченный доступ к функциям Firefly для изображений и векторных данных.