Adobe представила аудиоинструмент с искусственным интеллектом, который позволяет быстро добавлять к вашим видео тематически подходящую фоновую музыку и закадровый голос. Инструменты «Создать саундтрек» и «Создать речь» будут интегрированы в обновленное приложение Adobe Firefly.
Функция «Создать саундтрек», находящаяся сейчас в общедоступной бета-версии, анализирует загруженное видео и генерирует до четырех инструментальных звуковых дорожек продолжительностью до пяти минут, автоматически синхронизируя их с видео. Пользователи могут выбрать музыкальный стиль из предустановленных настроек, таких как лофи, хип-хоп, классика и т. д., или описать желаемое настроение в текстовом поле, например «сентиментальный» или «агрессивныйПервоначально система также предложит примеры текстовых запросов на основе анализа видеоконтента.
Что касается авторских прав, по словам компании, модель Firefly AI, лежащая в основе Generate Soundtrack, обучена на лицензионном музыкальном контенте, что делает полученные записи безопасными для коммерческого использования. Как объясняет Александру Костин, руководитель отдела генеративного искусственного интеллекта Adobe, компания приобрела права на музыку и голоса у правообладателей, гарантируя, что они свободны от рисков нарушения авторских прав. Это отличает Adobe от конкурентов, таких как Suno и Udio, которые столкнулись с судебными исками о нарушении авторских прав за обучение своих моделей на запатентованных материалах.
В то же время в публичной бета-версии была выпущена функция Generate Speech, позволяющая создавать голосовые подписи из текста. Он предлагает более 50 голосов на основе технологии Adobe Firefly Speech Model или ElevenLabs и поддерживает более 20 языков. Вы можете настроить скорость, высоту и эмоциональный тон речи, а также вручную настроить произношение имен и региональных слов.
Adobe также разрабатывает веб-приложение Firefly Video Editor — многодорожечный редактор временной шкалы для создания, организации, обрезки и редактирования видеоклипов. Оно объединит инструменты озвучки, саундтрека и создания титров в одном приложении, а также покадровое редактирование и предустановленные стили. Бета-версия редактора начнет распространяться в следующем месяце, и пользователи смогут подписаться на список ожидания раннего доступа.
