AI Assistant

• Теперь в бета-версии: AI Assistant.

В Premiere Beta (сборка 36 и выше) мы представляем AI Assistant, разработанный для того, чтобы взять на себя трудоемкие, многоэтапные этапы монтажа, позволяя монтажерам уделять больше времени важным творческим решениям.

Цель не в том, чтобы заменить монтажеров, а в том, чтобы предоставить им помощника, который сможет взять на себя основную работу по монтажу, в то время как они сохранят полный контроль. AI Assistant работает под вашим руководством, и вы всегда принимаете творческие решения. Начиная с сегодняшнего дня, AI Assistant может помочь организовать видеоматериалы, обрабатывать стенограммы, добавлять маркеры, создавать последовательности кадров и выполнять ряд задач на панели проекта и временной шкале с помощью простых инструкций на естественном языке. Все, что он создает, полностью редактируется в Premiere, и каждое действие можно изменить или отменить.

Просто опишите своими словами, чего вы хотите добиться, предоставьте исходные медиафайлы, и AI Assistant поможет выполнить рабочий процесс за кулисами. Не знаете, с чего начать? Вы даже можете спросить его, как он может помочь.

Это только начало. Мы изучаем, как AI Assistant может поддерживать дополнительные рабочие процессы, такие как версионирование, сокращение, учет отзывов заинтересованных сторон и многое другое. Независимо от задачи, редактор по-прежнему контролирует творческие решения.

Как всегда, мы будем рады услышать ваши отзывы о том, как бы вы хотели работать с AI Assistant в Premiere.

• Больше времени для творчества: Adobe переносит возможности своего креативного агента в приложения Creative Cloud.

За каждой рекламной кампанией, видеороликом, иллюстрацией или дизайн-проектом стоят бесчисленные производственные задачи: организация ресурсов, подготовка файлов, адаптация креатива для новых форматов, обновление версий, управление отзывами и подготовка работы к сдаче. Это важная работа, но не поэтому большинство из вас стали профессионалами в сфере креатива.

Сегодня Adobe внедряет свой креативный агент в ведущие приложения Creative Cloud, начиная с Premiere, Photoshop, Illustrator, InDesign и Frame.io, а также внедряет новые инновации в рабочие процессы в Firefly. Креативный агент управляет ИИ-помощником в каждом приложении, помогая организовывать многоэтапные рабочие процессы, чтобы вы могли сосредоточиться на своем ремесле. Как креативный специалист, вы сохраняете контроль, выбирая, что передать, что доработать и как применить свой вкус, опыт и суждения для формирования каждого редактируемого результата. Эти инструменты созданы для того, как вы нам рассказали о своей реальной работе. Креативный агент Adobe помогает уменьшить трение между идеями и их реализацией, оптимизируя сложные рабочие процессы в разных приложениях, чтобы вы могли больше времени уделять творчеству, сохраняя при этом контроль над каждым результатом.

В результате у вас появляется больше времени на самую важную работу: доработку идей, формирование сюжетов и применение творческого подхода, вкуса и мастерства, которые выделяют действительно выдающиеся работы.

Давайте посмотрим, что нового.

Меньше повторяющихся кликов. Больше творческого мастерства.

В Creative Cloud ИИ-помощник помогает сократить повторяющуюся, отнимающую много времени работу, которая может замедлять работу творческих команд. ИИ-помощник выявляет то, что трудно обнаружить вручную: изменение бренда, ошибки в производстве и обратную связь, которая ускользает от внимания.

Например:

• Видеоредакторы в Premiere могут импортировать исходные медиафайлы, и ИИ-помощник позаботится о настройке, включая сортировку ресурсов по папкам, пакетное переименование клипов, определение вопросов для интервью или даже создание рабочей отправной точки.

Если это можно сделать на панели «Проект/Project» или «Таймлайн/Timeline», ИИ-помощник сможет помочь.

• Дизайнеры в Photoshop могут описать желаемый результат, например, пакетное удаление фона, изменение размера ресурсов или организацию слоев, и ИИ-помощник выполнит работу над всей композицией.

• Графические дизайнеры в Illustrator могут автоматизировать многоэтапные задачи производства, от создания версионированных файлов из данных электронных таблиц до проведения предпечатной проверки перед выводом.

• Дизайнеры печатной продукции в InDesign могут вносить изменения в фирменный стиль во все макеты, включая текст, стиль и проверку готовности к печати.

• Креативные команды в Frame.io могут организовывать ресурсы, получать обратную связь по всем версиям и создавать дополнительные видеоматериалы, не покидая рабочее пространство проекта.

Независимо от приложения, цель состоит в том, чтобы уменьшить сложность производства, чтобы вы могли сосредоточиться на работе, требующей вашего мастерства, вкуса, рассудительности и руководства.

Создание пространства для творчества.

Лучшее творчество никогда не определялось скоростью организации файлов, подготовки экспорта или управления производственными процессами.

Оно определялось вашими идеями, мастерством, вкусом и способностями: творческими решениями, которые можете принимать только вы, которые устанавливают связь с вашей аудиторией и делают вашу работу неповторимой, интуицией, которая подсказывает вам, что вы нашли идеальный оттенок цвета, соответствующий настроению, тонкой настройкой, которая позволяет идеально вписать последнюю версию в вашу временную шкалу — деталью, о которой никто не просил, но которую в итоге замечают все.

Наша цель — предоставить вам больше возможностей именно для этого. Когда рутинная работа отходит на второй план, у вас появляется время и пространство, чтобы дольше обдумывать идею, развивать концепцию, рассказывать более полные истории и воплощать своё творческое видение в жизнь таким образом, чтобы работа была безошибочно вашей.

AI Assistant доступен сегодня в публичной бета-версии для Premiere, Photoshop, Illustrator, Frame.io и InDesign. AI Assistant доступен в закрытой бета-версии для After Effects.

• В Premiere появится помощник на основе искусственного интеллекта.

По мере развития наших инструментов для редактирования видео в эпоху искусственного интеллекта новые функции появляются с головокружительной скоростью. Adobe Premiere не стал исключением, и теперь Adobe представляет Premiere AI Assistant — новую панель в Premiere (сначала она будет доступна в бета-версии), которая представляет собой чат-помощника для выполнения множества различных задач в открытом файле проекта Premiere.

Возможности Ассистента ограничены только вашим воображением. Конечно, Ассистент не сможет делать все то же, что и вы в процессе монтажа, но многое ему по силам. Вы можете попросить его выполнить технические задачи, например изменить порядок медиафайлов, синхронизировать ракурсы нескольких камер с помощью карты синхронизации или переименовать клипы. В Adobe говорят об этой первой версии: «Если вы можете сделать это на панели «Проект» или на таймлайне, вам поможет ИИ-помощник».

Вы также сможете попросить Ассистента внести предварительные правки. Насколько они будут качественными? Это вам, уважаемый редактор, предстоит выяснить самостоятельно.

Вы даже можете спросить у Ассистента, что делать дальше в процессе редактирования. На первый взгляд может показаться, что это сделано для начинающих пользователей, ведь Adobe усердно работает над тем, чтобы сделать Premiere проще для начинающих редакторов, но при этом он способен на более сложные и мощные действия. Если вы не уверены, просто спросите у Ассистента, что он должен сделать, и он вам ответит, если что-то окажется ему не по силам. Кажется, все довольно просто.

Для выполнения своих функций Ассистент будет использовать медиааналитику и расшифровку. Следует учитывать, что все, что вы вводите в чат, отправляется в облако, поэтому Ассистент с искусственным интеллектом — это не инструмент, работающий только на устройстве. При необходимости он также может более тщательно анализировать кадры. Я уверен, что по мере развития этой технологии искусственного интеллекта (а в бета-версии она будет развиваться быстро) будут совершенствоваться и способы анализа и обработки видео. Мы видим, что корпорация Adobe очень быстро совершенствует инструменты на основе искусственного интеллекта, поэтому новый помощник Premiere AI Assistant кажется вполне логичным следующим шагом.

Все действия Ассистента можно воспроизвести и отменить. Поскольку Ассистент «физически» выполняет действия в проекте, вы можете видеть, что он делает, на панели «История» (поэтому вам, вероятно, захочется увеличить количество отмен до максимума с помощью этого совета по работе с инструментами). Но по мере выполнения Ассистент записывает свои действия в стек отмены, поэтому, если вы продолжите работать, пока Ассистент выполняет свои задачи, они будут накапливаться в истории, и отмены будут работать не так, как вы ожидаете.

Использование Ассистента может привести к списанию кредитов Firefly в зависимости от того, что вы делаете. В период бета-тестирования платные пользователи Creative Cloud смогут использовать ИИ-Ассистента без использования кредитов. По достижении бесплатного дневного лимита пользователи смогут продолжить работу на следующий день, когда лимит обнулится автоматически.

Это бета-версия, и в Ассистенте есть возможность оставлять отзывы с помощью кнопок «Нравится» и «Не нравится». Adobe учитывает эти отзывы, поэтому используйте эти кнопки.

И Premiere — не единственный инструмент Adobe с таким ИИ-помощником. Эта идея воплощается во многих приложениях Adobe. Вот несколько примеров на основе изображений, предоставленных Adobe.

На самом деле студия Firefly AI позволит вам делать вот такие вещи (цитата из пресс-релиза Adobe):

• Создание фирменного стиля: опишите свой стиль, название бренда и цветовую палитру; ИИ-помощник в Firefly сгенерирует и сохранит полный логотип, фирменный стиль и цветовую палитру, которые можно будет использовать в любом создаваемом вами контенте.
• Создание коротких видеороликов о товарах: превращайте фотографии товаров в отточенные, кинематографичные короткие видеоролики с первоклассным освещением, анимацией, звуком и фирменным стилем, готовые к публикации.
• Создайте быстрый монтаж: автоматически соберите видеофрагменты в законченный первый монтаж, отредактировав его с учетом диалогов, закадрового текста или визуального контента.
• Создавайте раскадровки и генерируйте видео на их основе: превратите идею в последовательность визуальных сцен, а затем используйте эти раскадровки кадры для создания видео.

• AI Assistant доступен в After Effects в режиме закрытого бета-тестирования. Adobe работает над расширением его возможностей в других приложениях Creative Cloud для работы с фотографиями, видео и моушн-дизайном.

• Автоматизированные анимированные субтитры в Premiere Beta — без плагинов.

Я экспериментировал с возможностями нового ИИ-помощника в бета-версии и, кажется, нашел отличное применение этой функции.

Речь идет о полностью автоматизированных анимированных субтитрах в стиле соцсетей — без использования плагинов или сторонних инструментов. Это скорее демонстрация концепции, но тесты показывают, что решение работает весьма неплохо.

Как это попробовать. Все необходимое можно скачать здесь.

Решение состоит из двух частей: скрипта (навыка) для ИИ-помощника и файла MOGRT, созданного в After Effects. Я также добавил исходный проект After Effects для этого MOGRT.

Чтобы установить скрипт, откройте панель ИИ-помощника, нажмите на три точки в правом верхнем углу и выберите пункт «Skills» (Навыки). Затем нажмите «Open skills folder» (Открыть папку навыков). Перетащите папку «animated-subtitles-skill» из скачанного архива в эту папку. А теперь — как этим пользоваться:

Импортируйте файл .MOGRT в свой проект через панель «Graphics Templates» (Шаблоны графики).

Выполните транскрибацию (распознавание речи) для всех клипов на таймлайне, к которым нужно добавить субтитры.

Попросите помощника сделать что-то вроде: «Add animated subtitles using the MOGRT in this project to sequence 1» (Добавь анимированные субтитры на таймлайн Sequence 1, используя MOGRT из этого проекта) и дождитесь завершения процесса.

Вы также можете давать команды вроде «Change the text in the selected subtitle to xxxxx» (Измени текст в выбранном субтитре на xxxxx) и просить изменить следующие параметры внешнего вида для отдельных или всех титров:

Цвет и размер текста

Цвет и толщина обводки текста

Цвет, размер и скругление углов фоновой подложки

На данный момент помощник не может менять шрифт, так как этот параметр недоступен для управления через него. Если вы хотите использовать другой шрифт, откройте проект After Effects для этого MOGRT, измените шрифт там, сохраните новый файл MOGRT и замените им старый в своем проекте.

В чем подвох? Существует одно огромное ограничение, из-за которого это решение скорее напоминает экспериментальный «костыль», чем полноценный рабочий инструмент. ИИ-ассистент в Premiere не умеет считывать или записывать свойства исходного текста (source text) в MOGRT — он способен управлять только теми параметрами, которые принимают числовые значения.

Поэтому для передачи текста в MOGRT его приходится кодировать в виде чисел (значений слайдеров), а затем декодировать обратно в текст внутри самого MOGRT для отображения.

Для тех, кому интересны технические подробности: текст очищается (оставляются только символы ASCII), кодируется по системе base96 (группами по 3 символа), а затем масштабируется (умножается на число от 2 до 33), чтобы итоговое значение укладывалось в лимит 1 000 000, предусмотренный для слайдеров с плавающей запятой.

Увы, но это означает, что поддерживаются только стандартные английские символы, знаки препинания и пробелы.

Такой способ кодирования также делает практически невозможным самостоятельное изменение текста субтитров — вам придется просить ассистента внести правки.

Кроме того, в MOGRT жестко задан лимит в 48 символов (две строки по 24 символа), а используемый мной метод анимации ограничивает длину титра 17 словами. Ассистент «знает» об этих ограничениях. Впрочем, лимиты на количество символов и слов можно увеличить, добавив в MOGRT дополнительные слайдеры.

Все эти проблемы исчезнут, если в одном из будущих обновлений Adobe добавит возможность чтения и записи свойств исходного текста. Я уже отправил соответствующий запрос на добавление этой функции — буду признателен, если вы поддержите его своим голосом.

Декодированием значений слайдеров обратно в текст занимается текстовый слой, а для создания фоновой подложки я использую систему с отрицательным временем в выражении sourceRectAtTime.

Ползунок на фоновом слое использует значения тайминга для каждого слова, выбранного помощником, и выполняет интерполяцию маски формы при переходе между словами.

Смело используйте этот небольшой проект, изучайте его или дополняйте!