Adobe переходит к генеративному искусственному интеллекту для видео в Premiere с помощью Firefly, который в настоящее время доступен в Premiere Pro. Сегодня официально дебютирует видеомодель Firefly, анонсированная ранее в этом году. В новых бета-инструментах пользователи могут, например, автоматически создавать видео из текстовых подсказок или изображений или расширять существующие клипы. Набег Adobe на редактирование видео с использованием искусственного интеллекта начинается сегодня и направлен на упрощение рабочих процессов для всех создателей.
Звездой шоу является Generative Extend, бета-инструмент, который теперь доступен в Premiere Pro. Эта функция решает распространенную проблему: клипы слишком короткие. Искусственный интеллект идеально подходит для небольших корректировок в начале или в конце видеоролика, поскольку он может продлить их на две секунды. Он делает не только это; он также может исправить проблемы в середине кадра, такие как смещение линий глаз или даже случайные движения, которые являются небольшими исправлениями, но обычно требуют повторной съемки.
Новейший трюк Adobe в Premiere Pro
Генеративное расширение на базе Adobe Firefly инструмент открывает новые возможности для креативщиков. Все это под рукой, если вам нужно несколько секунд, чтобы собрать клип, или если вы хотите смешать немного звука. Но у инструмента есть свои ограничения. Вы получаете только расширенные кадры (за пределами две секунды это занимает чтобы сделать снимок на этом устройстве) до 1080p при 24 кадрах в секундуи эта запись ограничена. Ухудшен также звук: окружающий звук и прочее увеличивается только до десяти секунд, оставляя разговорные диалоги и музыку нетронутыми.
Хотя эти ограничения могут сделать «Генераторное расширение» более подходящим для небольших корректировок, а не для крупных правок, оно может избавить пользователей от повторного устранения мелких проблем. Короче говоря, это идеальный вариант быстрого решения для тех, кто хочет, чтобы все работало без необходимости возвращаться к началу заново.
Adobe выпустила еще два инструмента помимо Premiere Pro: веб-приложение Adobe Firefly сейчас находится в стадии бета-тестирования. Преобразование текста в видео и Преобразование изображения в видео. Эти инструменты, анонсированные в сентябре, позволяют пользователям создавать короткие видеоклипы либо из текстовых подсказок, либо из неподвижных изображений. Они могут даже возиться с вкладками, похожими на камеру, настраивая видео, используя углы, движение и расстояние съемки.
Преобразование текста в видео: новая эра в создании видео
Как и аналогичные генераторы видео с использованием искусственного интеллекта, инструмент преобразования текста в видео следует хорошо известному шаблону. Все, что нужно сделать пользователям, — это ввести описание нужного видеоклипа, и искусственный интеллект Adobe сделает все это. Но есть так много вариантов; Если вы хотите создать фильм, напоминающий 3D-анимацию, покадровую анимацию или более традиционный стиль фильма, есть много способов сделать это. Благодаря дополнительной функции «управления камерой» пользователи могут еще больше усовершенствовать эти клипы, регулируя визуальные элементы, такие как ракурс камеры и движение.
Adobe также предлагает функцию преобразования изображения в видео. Однако этот инструмент идет еще дальше, позволяя пользователям предоставлять эталонное изображение вместе с текстовым приглашением. Эта функция полезна при создании быстрого репортажа или визуализации повторных съемок, позволяя лучше контролировать конечный результат. Но и этот инструмент не идеален. Ранние тесты показали, что это испытание на шаткий кабель и сдвиг фона — то есть ИИ еще предстоит кое-что вырасти.
Это подтверждается эффективностью — вы всегда получаете разрешение 720p со скоростью 24 кадра в секунду и максимум за пять секунд. Клипы могут быть созданы примерно за 90 секунд, хотя Adobe уже работает над «турбо-режимом», чтобы еще больше ускорить процесс.
В целости и сохранности: коммерческое преимущество Adobe Firefly
Самая большая разница заключается в том, что инструменты Adobe Firefly коммерчески жизнеспособны. Устраняя создателей, Adobe обещает, что ее модель искусственного интеллекта обучена на контенте, который она может использовать на законных основаниях. В отличие от некоторых конкурентов, которые подвергались критике за обучение своих моделей несанкционированному контенту (включая видео на YouTube), инструменты Adobe «коммерчески безопасны».
Видео, созданные с помощью видеоинструментов Adobe на базе искусственного интеллекта, также содержат встроенные учетные данные контента. Это означает, что если какой-либо искусственный интеллект участвует в создании или редактировании контента, он раскрывается, что делает прозрачным процесс создания видео и их права.
Модель Firefly Video Model компании является частью более широкого подхода к инструментам на базе искусственного интеллекта во всех приложениях Adobe. Эти новые функции были анонсированы на конференции MAX в минувшие выходные, что сделало их общедоступными, что является преимуществом перед другими аналогично мыслящими компаниями, такими как Meta, Google и OpenAI, чьи инструменты создания видео все еще находятся в стадии разработки их публичных выпусков.
Изображение предоставлено: Adobe
Source: Немного искусственного интеллекта в Premiere Pro с Adobe Firefly