Adobe Firefly теперь может генерировать музыку, речь и звуковые эффекты

Аудиоинструменты Adobe Firefly стали общедоступны в четверг. Функции генерации музыки (Generate Music), речи (Generate Speech) и звуковых эффектов (Generate Sound Effects) теперь дополняют инструменты для работы с изображениями, видео и дизайном в творческой студии ИИ.

Каждая из них работает на базе отдельной модели. Функция генерации музыки использует модель Firefly Music Model и создает оригинальные треки, настроенные под длительность и настроение видео. Генерация речи работает на базе модели Firefly Speech Model, при этом в качестве опции предлагается ElevenLabs. Она обеспечивает контроль над голосом, темпом и эмоциями. Генерация звуковых эффектов использует аудиомодель Firefly Audio Model для синхронизации звуков с таймингом клипа.

Adobe называет очевидные сценарии применения: контент для соцсетей, лайв-влоги, короткометражные фильмы, обучающие ролики по продуктам и отрывки для подкастов. Ни для одной из этих функций не требуется отдельная подписка.

Проблема, которую, по словам Adobe, компания решает, — это переключение между вкладками. Создатели контента постоянно перепрыгивают между рабочими пространствами, приложениями и разрозненными сервисами, и каждый раз рабочий процесс прерывается. По мнению компании, со звуком это происходит чаще всего, поскольку он обычно является последним добавляемым элементом и первым, на что обращает внимание аудитория.

Список функций ничем не примечателен. Множество инструментов генерируют музыку по текстовому запросу. То, что на самом деле продает Adobe, выражено в фразе, которую компания повторяет на протяжении всего анонса.

Продукт — это лицензия

Фраза «коммерчески безопасно» звучит снова и снова. Генерация музыки создает «универсально лицензированные оригинальные треки», заявляет Adobe. После этого музыка может «сопровождать ваш контент повсюду, не опасаясь блокировок за нарушение авторских прав». Аудио «создано для реального производства».

Ничто из этого не описывает качество звука. Это описание юридической чистоты, и в этом заключается главная презентация.

Adobe обучает модели Firefly на материалах, находящихся в общественном достоянии и защищенных лицензией. Именно поэтому компания вообще может давать такие обещания. С момента запуска Firefly компания строила свою стратегию генеративного ИИ вокруг этого различия, и аудио стало последним крупным форматом, выпущенным в рамках этого подхода.

Почему это актуально именно сейчас

Тайминг играет здесь огромную роль. В июле немецкий суд постановил, что Suno нарушает авторские права — это первое подобное решение в Европе. Иск был подан организацией по управлению правами GEMA.

С тех пор компания Suno отступает под юридическим давлением. Столкнувшись с судебными исками, компания в этом месяце перешла к внедрению водяных знаков, цифровых отпечатков и ограничению загрузок.

Однако контент продолжает поступать независимо от этого. ИИ-музыка попала в чарты в этом году, и артисты, использующие ее, перестали это скрывать. Adobe выходит на рынок, где технология работает, а спрос доказан. Открытым остается вопрос о том, переживет ли трек столкновение с правообладателем.

Два автора, чьи цитаты приведены в анонсе, подчеркивают это в коммерческих терминах. Один из них описал лицензирование фоновой музыки как постоянную сложность при работе с брендами. Adobe предоставила оба этих отзыва.

Adobe перепродает своих конкурентов

Firefly работает не только на собственных моделях Adobe. В студии интегрированы системы от Google, ElevenLabs, Kling AI, Luma AI, OpenAI и Runway. В четверг Adobe добавила модель Google Gemini Omni Flash.

Эта модель принимает на вход видео, аудио и изображения наряду с текстом. Грубая идея может превратиться в раскадровку чернового монтажа в том же окне.

Опция ElevenLabs представляет особый интерес. Adobe создала собственную модель речи, а затем предложила рядом модель конкурента. В июле ElevenLabs вела переговоры о тендерном предложении исходя из оценки в 22 миллиарда долларов, так что это далеко не мелкий поставщик, которого тихо поглотили.

Adobe, судя по всему, вполне устраивает роль рабочей среды, а не создателя модели, если вся работа происходит в ее окне. Это отличается от стратегии большинства ИИ-компаний, и такая ставка окупится только в том случае, если проект начинается именно в Firefly.

Ассистент теперь бесплатен

Adobe также открыла доступ к Adobe Firefly AI Assistant для всех пользователей, предложив бесплатный тариф и ежедневные генерации. Ассистент был запущен в режиме бета-тестирования в начале этого года. В июне он получил набор творческих навыков, когда компания объявила о своем самом масштабном наступлении в сфере ИИ.

Функции «Создание раскадровки» (Create Storyboard) и «Создание набора брендовых материалов» (Create Brand Kit) входят в число наиболее востребованных, согласно данным Adobe. Ассистент также справляется с пакетным редактированием и созданием брендированных макетов. Сопутствующая функция под названием Elements сохраняет персонажей, локации и объекты проекта, чтобы их можно было переносить между разными задачами.

Бесплатный ассистент и отсутствие подписки на аудио ведут к одной цели. Adobe формирует привычку пользователей. Компания делает ставку на то, что авторы, собирающие проект внутри Firefly, в итоге заплатят за инструменты, которые доводят его до конца.

Рыночная статистика с примечанием

Adobe подкрепляет свои аргументы исследованием Музыкального колледжа Беркли. Почти четыре из пяти опрошенных видеомейкеров, музыкантов и маркетологов создают видеоконтент ежедневно или несколько раз в неделю. Каждый респондент заявил, что использует музыку в своих видео.

Adobe профинансировала это исследование, о чем прямо говорится в сноске. В сноске добавляется, что компания «не контролировала привлечение респондентов, ответы на опросы, анализ или выводы», а Лаборатория развивающихся художественных технологий Беркли сохранила за собой редакционную ответственность за отчет.

Это раскрытие информации выглядит более полным, чем у многих других статистических данных, на которые ссылаются вендоры. Тем не менее, это цифра, за которую заплатила компания и которую она использует, чтобы доказать: ее новый продукт отвечает широко распространенной потребности.

Что на самом деле проверяется на прочность

Главное здесь — это защита от претензий (индемнити), а не само аудио. Adobe утверждает, что ее музыка имеет универсальную лицензию и защищена от блокировок. Авторов, сдающих работу клиентам, просят доверять этому.

Музыкальная индустрия уже два года спорит о том, какие обучающие данные делают сгенерированный трек законным. Суды в Европе только начали давать ответы. Adobe заняла ту сторону в этом споре, победу которой она ожидает, используя материалы, которые, по ее словам, были лицензированы.

Если эта позиция устоит, предложение станет непревзойденным для любого, кто выставляет счета клиентам. Если же суд решит, что лицензированные обучающие данные все равно могут производить производный контент, то это обещание будет стоить ровно столько же, сколько и любое другое обещание на этом рынке. А пока Adobe продает то единственное, что ее конкуренты не могут рекламировать.