Adobe объявила о запуске приложения Firefly Video Model в публичной бета-версии на платформе генеративного ИИ Firefly. Это приложение представляется как «первая коммерчески безопасная модель создания видео на основе ИИ», что, по мнению компании, может значительно изменить подход к видеопроизводству.
Firefly Video Model включает функции Generate Video и Generative Extend, доступные в Adobe Premiere Pro. Первая функция позволяет пользователям создавать видеоклипы на основе текстовых подсказок или изображений, при этом предлагая контроль над углами камеры и выбором типов снимков. Инструмент также упрощает создание визуальных эффектов, таких как атмосферные элементы и графика движения. В данный момент поддерживается разрешение 1080p, но в будущем планируется запуск моделей с более низким разрешением для быстрой итерации и 4K.
Одной из примечательных функций является интеграция Firefly Video Model с существующими инструментами Adobe Creative Cloud, такими как Photoshop и Adobe Express. Кроме генерации видео, новое приложение позволяет использовать функции Firefly, включая Generative Fill и Generative Remove. Также представлена функция Translate Audio and Video, которая обеспечивает языковую доступность, позволяя переводить диалоги на более чем 20 языков с сохранением оригинальных голосовых характеристик.
Новые планы подписки Firefly Standard и Firefly Pro предоставляют различные уровни доступа к функционалу приложения. Стандартный план за $9,99 в месяц включает 2000 видео/аудиокредитов, что позволяет пользователю создавать до 20 пятисекундных видео в разрешении 1080p. Профессиональный план предоставляет более 7000 кредитов в месяц за $29,99 и позволяет создавать до 70 видеороликов.
Adobe анонсировала Firefly Video Model в октябре, и утверждает, что с момента запуска эта модель обучалась на лицензионном контенте и контенте общественного достояния, что делает её безопасной для коммерческого использования. Эта модель позиционируется как конкурент OpenAI Sora, но с более выгодными условиями подписки и уникальными возможностями для создателей контента.
Инновация Adobe в сегменте генеративного ИИ обещает открыть новые горизонты для видеопроизводства, позволяя пользователям генерировать видеоролики из статичных изображений или текстового описания, управляя параметрами видеоряда с помощью промптов. Генератор роликов также нацелен на создание рекламных материалов и может применяться для оживления раскадровок и эскизов, тем самым меняя подход к процессу создания видео.