Нейросеть ElevenLabs научилась генерировать саундтреки для видео. Загружаете ролик — сервис анализирует картинку, ритм и настроение и за несколько секунд генерирует оригинальную музыку под него. Функция стала частью направления Eleven Music, запущенного 5 августа.
Это позволит авторам и маркетологам не подбирать треки вручную или возиться с лицензиями для коротких роликов, трейлеров и рекламных клипов — система подстраивает саундтрек под динамику и эмоцию видео и позволяет экспортировать результат.
Как создавать музыку для видео в ElevenLabs
Функция доступна в веб‑Studio ElevenLabs в разделе «Video to Music». Условия использования, лимиты и цены зависят от выбранного плана.
Шаг 1. Войдите в ElevenLabs Studio и выберите раздел «Video to Music».
Шаг 2. Загрузите видео с устройства — сервис автоматически проанализирует его и подготовит описание сцены и настроения, а также создаст первый вариант трека.
Шаг 3. Чтобы прослушать получившийся саундтрек — нажмите «Play».
Отредактируйте текст-описание (prompt), если хотите точнее задать жанр, динамику, инструменты или вокал и нажмите «Regenerate», чтобы получить другие варианты саундтрека.
Шаг 4. Сохраните результат, как новый проект и продолжайте работу в проекте Studio вместе с дикторской озвучкой и звуковыми эффектами. Чтобы скачать нажмите «Export» и выберите параметры скачивания: тип файл — audio/video, структуру и формат.
Кроме того, есть возможность редактировать музыку: управлять жанром/структурой, инструменталом или вокалом, а также многоязычные тексты и точечные правки секций. Экспорт и API: выгрузка готового аудио; для масштабирования предусмотрен API Eleven Music.
5 августа ElevenLabs представила «Eleven Music» — генерацию песен и инструментала из текста с заявленными коммерческими правами. Также ранее в Studio появился «Video‑to‑Sound» для автоматических звуковых эффектов — теперь линейка закрывает и музыку, и SFX.