Ассеты
Блендер
Движки
Игры
Красивое
Профессия
Разработка
Adobe запускает публичную бета-версию своей ИИ модели для генерации видео
https://blog.adobe.com/en/publish/2020/05/28/evolving-our-brand-identity
Компания Adobe выпустила Firefly Video Model - новую модель искусственного интеллекта, которая привнесет генеративный искусственный интеллект в такие инструменты видеопроизводства компании, как Premiere Pro и, возможно, After Effects.
Ее возможности включают генерацию дополнительных аудио- или видеокадров из существующего видеоклипа, а также создание новых видеоклипов на основе опорных изображений или текстовых подсказок.
Cейчас модель доступна в публичной бета-версии веб-приложения Firefly и в бета-сборках Premiere Pro.
Изначально модель разрабатывалась для создания неподвижных изображений.
Ключевые особенности Firefly
Новая модель Firefly Video Model позволяет генерировать движущиеся изображения, синтезируя новые видеоматериалы из различных источников подобно таким платформам, как Runway.
По словам Adobe, ее возможности модели включают генеративное расширение, которое расширяет существующие видеоклипы, генерируя новые кадры в начале или конце.
Функция Image to Video генерирует клипы на основе референсных снимков или даже концептуальных иллюстраций.
Функция Text to Video генерирует видео на основе текстовых подсказок с дополнительной возможностью задать свойства камеры, такие как положение камеры, степень зума и распространенные типы движения камеры.
Хотя Firefly Video Model может генерировать 2D- и 3D-анимацию - в блоге Adobe были приведены примеры сгенерированных кадров, напоминающих 3D, нарисованную от руки и стоп-моушн анимацию, - ее основным первоначальным вариантом использования является более натуралистичное видео.
По словам Adobe, она «отлично справляется с созданием видеороликов о мире природы... например, пейзажей, растений или животных».
Однако компания также называет ряд других возможных применений, включая создание FX-элементов, таких как огонь, дым и пыль, которые могут быть использованы в проектах VFX или графики движения.
Хотя Firefly Video Model потенциально может генерировать целые видеопоследовательности, существующие инструменты генеративного видео с трудом поддерживают временную и стилистическую последовательность в своих результатах.
В блоге Adobe сообщается, что на начальном этапе она будет использоваться для создания дополнительного материала для проектов, снятых обычным способом - по сути, для создания стоковых материалов AI - с указанием таких вариантов использования, как создание B-роликов и недостающих установочных кадров.
Помимо исходного изображения и/или текстовой подсказки - она поддерживает до 1 000 символов текста - реализация Видеомодели в веб-приложении Firefly включает встроенные элементы управления.
Пользователи могут выбрать соотношение сторон создаваемого видео (в настоящее время только 16:9 или 9:16), а также выбрать из ряда предустановленных параметров размер кадра (от очень близкого до очень длинного), угол наклона камеры (включая съемку с воздуха) и движения камеры (включая съемку с рук).
Ограничения Firefly
В начальной публичной бета-версии создаваемые ролики ограничены 5 секундами и разрешением 1080p.
Сколько стоит
Как и во многих других сервисах Firefly, цены на модель Firefly Video Model основаны на кредитах.
Adobe ввела новые цены, приурочив их к выходу публичной бета-версии. Первоначально для создания видео используется 20 кредитов за секунду отснятого материала, в дальнейшем стоимость будет увеличена до 100 кредитов за секунду.
Новые тарифные планы Firefly Standard стоимостью $9,99 в месяц предоставляют 2 000 видеокредитов в месяц; тарифные планы Firefly Pro стоимостью $29,99 в месяц предоставляют 7 000 кредитов в месяц.
Кредиты также включены в подписку Creative Cloud.
Видеомодель Firefly уже доступна через веб-приложение Firefly. Бета-версии приложений «Текст в видео» и «Изображение в видео» находятся в стадии разработки.
Присоединяйтесь к нам в телеграмм!
Приглашаем вас присоединиться к нашему Телеграмм каналу, где мы делимся самыми свежими новостями, трендами и ресурсами из мира разработки игр и компьютерной графики. 👇
