Архив рубрики ~Лента новостей~

Озвучить текст нейросетью: полный гайд по ElevenLabs, чтобы голос звучал естественно

Озвучить текст нейросетью: полный гайд по ElevenLabs, чтобы голос звучал естественно
Озвучить текст нейросетью: полный гайд по ElevenLabs, чтобы голос звучал естественно

Показываем по шагам, как озвучить текст нейросетью ElevenLabs: какой текст ей давать, как задать эмоцию тегом и собрать диалог на несколько голосов, чтобы озвучка не звучала как объявление на вокзале.

Текст для озвучки не обязательно писать в другом сервисе: в SYNTX.AI сценарий пишет чат-модель, а ElevenLabs озвучивает его в том же окне, без копирования. Промокод SYNTXVC, скидка 15%.

Мы озвучили один и тот же текст дважды: как его пишут обычно и подготовленный по советам из инструкций для ИИ-озвучки.

В подготовленном числа записаны словами, а ударная гласная растянута тройной буквой: так в инструкциях советуют подсказывать ударение. Первый вариант прозвучал естественнее, а подготовка испортила звук. Слово «квартааал» голос так и протянул.

Чтобы озвучить текст нейросетью без робота в голосе, в ElevenLabs почти ничего не нужно готовить.

Вставляете текст так, как его написали, выбираете голос и ставите тег эмоции там, где нужна интонация. Если какое-то слово прозвучало криво, правите только его, а не весь текст.

Ниже пять шагов, тексты для копирования и порядок действий, если что-то прозвучало криво.

Коротко, как озвучить текст в ElevenLabs:

  1. Откройте ElevenLabs Voice и выберите режим: «Текст в речь» для одного голоса или «Создание диалогов» для нескольких.
  2. Текст вставляйте как есть, без подготовки.
  3. Выберите голос под задачу и под интонации, которые понадобятся.
  4. Где нужна эмоция, поставьте тег в квадратных скобках по-английски.
  5. Перед запуском сверьте число символов и цену в токенах.
Озвучить текст нейросетью: полный гайд по ElevenLabs, чтобы голос звучал естественно

Шаг 1. Вставьте текст как пишете: числа и даты голос прочитает сам

ElevenLabs в документации советует записывать числа и сокращения словами. Модель по умолчанию сама переводит цифры в слова, но телефоны, валюты, даты и адреса может прочитать неверно.

Чтобы проверить, справится ли голос без подготовки, мы собрали текст, где ловушка на ловушке: цифры, дата через точку, время и процент. Ещё в нём есть слово «мука» в значении «мучение» и слова с коварным ударением, а буква «ё» не написана нигде, даже там, где она нужна.

Текст для озвучки, как его пишут обычно:

Привет! Это первый урок курса «Excel для маркетолога». За 12 уроков вы научитесь собирать отчет за квартал за 15 минут, а не за 3 часа. Сводная таблица больше не мука: разберем ее по шагам. Старт 1 ноября в 19:00, скидка 25% действует до 28.10. Домашние задания проверяет куратор, а ИИ подсказывает формулы. Остались вопросы? Звоните, договор пришлем в тот же день. Все готово, начинаем!

«Все готово» и «разберем ее» голос прочитал с «ё», хотя в тексте её нет, то есть правильно. «Мука» тоже прозвучала верно, с ударением на первый слог, как мучение, а не как мука для блинов.

Числа, дата, время и процент прочитаны правильно. Ударения верные: «квартАл», «звонИте», «договОр» (заглавной буквой здесь отмечен ударный слог).

«ИИ» голос прочитал как «и-и», и это правильно: так аббревиатуру и произносят вслух. Паузы на месте, звук естественный.

Теперь тот же текст, подготовленный по всем правилам: числа словами, «ё» на месте, ударная гласная тройной буквой, многоточия для пауз.

Подготовленный текст (так делать не нужно):

Привет! Это первый урок курса «Excel для маркетолога». За двенадцать уроков вы научитесь собирать отчёт за квартааал за пятнадцать минут, а не за три часа. Сводная таблица больше не мууука: разберём её по шагам… Старт первого ноября в семь вечера, скидка двадцать пять процентов действует до двадцать восьмого октября. Домашние задания проверяет куратор, а искусственный интеллект подсказывает формулы. Остались вопросы? Звонииите, договооор пришлём в тот же день… Всё готово, начинаем!

Вышло хуже, чем без подготовки.

На «квартааал», «мууука» и «договооор» голос тянет звук, будто диктор зевнул посреди слова. В инструкциях по озвучке встречается совет ставить тройную гласную, чтобы подсказать ударение. Голос понял подсказку буквально и растянул букву.

Я бы не тратил время на такую подготовку до первого прогона. Проще записать первый дубль как есть и поправить конкретное слово, если оно прозвучало не так.

Шаг 2. Выберите голос под интонации, которые нужны

Готовые голоса отличаются характером, и подбирать их стоит под задачу: урок читают иначе, чем рекламный ролик или историю с героями.

Голос лучше выбирать с прицелом на интонации, которые понадобятся дальше. Тег эмоции срабатывает лучше, когда эмоция подходит характеру голоса: бодрый голос шепчет хуже.

Если в сценарии есть шёпот и вздохи, сразу ищите голос, которому они подходят. Иначе придётся раз за разом перегенерировать запись, пытаясь заставить бодрый голос шептать.

Озвучить текст нейросетью: полный гайд по ElevenLabs, чтобы голос звучал естественно

Шаг 3. Задайте эмоцию тегом на английском, даже в русском тексте

Интонацию задают теги в квадратных скобках перед фразой. Пишутся они всегда по-английски, а текст вокруг остаётся русским. Тег действует до следующего тега: если поставить шёпот перед первой фразой, шёпотом прозвучит весь текст до следующего тега. Хотели одну тихую реплику, а получили тихий абзац.

Теги из документации ElevenLabs.

Голос и эмоции:

  • [whispers] — шёпот;
  • [sighs] — вздох;
  • [exhales] — выдох;
  • [laughs] — смех;
  • [starts laughing] — начинает смеяться;
  • [laughs harder] — смеётся громче;
  • [snorts] — фыркает;
  • [sarcastic] — сарказм;
  • [curious] — любопытство;
  • [excited] — воодушевление;
  • [mischievously] — с озорством;
  • [crying] — плач.

Звуки:

  • [applause] — аплодисменты;
  • [clapping] — хлопки;
  • [gulps] — глоток.

Особые, у разработчика они в экспериментальной группе:

  • [sings] — поёт;
  • [strong X accent] — сильный акцент, вместо X название акцента, например [strong French accent].

Это не весь список. ElevenLabs советует описывать тегом то, как звучит голос (шёпот, вздох), а не только чувство, и разрешает комбинировать теги, например [low, gravelly voice] — низкий хрипловатый голос. В диалоге ниже мы поставили [curious] и [laughs].

Паузы задаются многоточием и знаками препинания.

Шаг 4. Диалог соберите по полям голосов, без разметки реплик

Для разговора двух и больше персонажей есть режим «Создание диалогов». Подписывать в тексте, кто говорит, не нужно: у каждого голоса своё поле в интерфейсе, и реплику вставляют в поле того, кто её произносит.

Озвучить текст нейросетью: полный гайд по ElevenLabs, чтобы голос звучал естественно

В режим можно добавить больше двух голосов, у каждого будет своё поле, и реплики не перепутаются.

Метки «Speaker 1» и «Speaker 2» в блоке ниже стоят только для наглядности, чтобы было видно, чья реплика. В поле их не пишут: первая и третья реплики уходят в поле одного голоса, вторая и четвёртая — в поле другого.

Диалог для озвучки двумя голосами:

Speaker 1: [curious] Слушай, а правда, что отчёт за квартааал теперь собирают за пятнадцать минут? Speaker 2: [laughs] Правда. Если сводная таблица уже настроена… остаётся нажать «обновить». Speaker 1: А если данные пришли в другом формате? Speaker 2: Тогда ещё минут пять. Но не три часа, как раньше.

Вышли два разных голоса, и каждая реплика прозвучала тем голосом, в чьё поле её вставили. Ударения и числа в порядке, теги эмоций сработали. И главное, это звучит как разговор двух людей.

В блоке диалога в слове «квартааал» осталась тройная гласная из подготовленного варианта. В своём тексте пишите «квартал» обычными буквами: в озвучке одним голосом растяжка портила звук.

Шаг 5. Сверьте цену до запуска и уложитесь в 10 000 символов

В «Тексте в речь» за один запуск можно озвучить до 10 000 символов. Длинный текст режьте по абзацам и озвучивайте частями. Тон голоса может сам смениться посреди записи, и тогда перегенерировать придётся только этот кусок, а не весь урок.

До запуска интерфейс показывает число символов и стоимость в токенах, так что смету видно заранее. Токены SYNTX.AI — единицы, в которых сервис списывает оплату за генерацию. Для ориентира: в нашем прогоне фраза на 9-10 секунд стоила 1,6 токена.

Если голос споткнулся, правьте одно место, а не весь текст

Идите по порядку и меняйте что-то одно за раз, иначе не поймёте, какая правка помогла:

  1. Тон сменился посреди записи: перегенерируйте этот кусок, текст не трогайте.
  2. Если число, дата или сокращение прочитаны неверно, напишите их словами в нужном падеже.
  3. Паузу, которая встала не там, поправьте многоточием или точкой.
  4. Тег эмоции не сработал: проверьте, что он написан по-английски.
  5. Тег написан верно, но не подходит голосу (нужен шёпот, а голос бодрый), или ничего выше не помогло? Меняйте голос, а не тег.

Ударную гласную тройной буквой не растягивайте ни на каком шаге: голос тянет звук вместо того, чтобы выделить слог.

Вопросы, которые остаются после первой озвучки

Нужно ли готовить текст перед озвучкой нейросетью?

Нет, начинайте с текста как есть. Голос из готовых, без клонирования, сам справился с цифрами, датой, ударениями и произнёс «ё» там, где её не написали. Править стоит только то, что прозвучало неверно.

Можно ли озвучить текст своим голосом?

Можно, но клон своего голоса в SYNTX.AI делает другая нейросеть для голоса, MiniMax. Клонирование есть в Telegram-боте SYNTX.AI: Аудио → Клонирование голоса.

Подойдёт ли озвученный диалог для видео?

Видеомодели Seedance можно дать аудио как образец звука для ролика, но русский диалог из ElevenLabs она пока не принимает. Озвучку можно положить на готовый ролик при монтаже.

Начните с абзаца, который уже написан

Возьмите абзац из своего сценария, урока или поста и вставьте его без правок. Прослушайте первый дубль целиком, отметьте, где голос споткнулся, и дальше идите по списку из раздела «Если голос споткнулся».

ElevenLabs Voice доступен на SYNTX.AI. По промокоду SYNTXVC скидка 15%. Переходите в веб-версию или в Telegram-бота.

Источник: vc.ru

Оцените материал:

Поделиться
Понравилась статья? Расскажите другим
ВКонтакте
Читайте также
Новости робототехники Искусственный интеллект в БПЛА: преимущества и риски Новости робототехники Новая система искусственного интеллекта поможет машинам более детально понимать трехмерное пространство. Новости робототехники Ростех показал кобота с «умным» зрением Новости робототехники ДНК-роботы могли бы доставлять лекарства и выслеживать вирусы внутри вашего тела. Новости робототехники Человекоподобные роботы, играющие в футбол, забили важный гол в области робототехники, продемонстрировав высокую координацию движений. Новости робототехники Специалист по робототехнике утверждает, что безопасность человекоподобных роботов должна быть первостепенной задачей. Новости робототехники Приводимый в движение мышечными клетками, тончайший, как бумага, робот плывет по водному лабиринту. Архив рубрики ~Коротко из Telegram~ Поселил ИИ‑агента в чёлку макбука: он слушает мой день и… Архив рубрики ~Коротко из Telegram~ Немой парень впервые признался в любви СИЛОЙ МЫСЛИ — его………… Новости робототехники GM делает ставку на вычислительные технологии и искусственный интеллект, которые, по её мнению, помогут ей конкурировать с китайскими автопроизводителями. Архив рубрики ~Коротко из Telegram~ В легендарный Need for Speed: Underground 2 теперь можно поиграть… Архив рубрики ~Коротко из Telegram~ ИИ придумал пистолет, и его напечатали на 3D-принтере Однозарядный пистолет… Архив рубрики ~Коротко из Telegram~ В Швейцарии с помощью бактерий разработали печатный материал, похожий на бетон Архив рубрики ~Коротко из Telegram~ Модели искусственного интеллекта позволили России применять технологии для лучших крылатых… Новости робототехники Искусственный интеллект в БПЛА: преимущества и риски Новости робототехники Новая система искусственного интеллекта поможет машинам более детально понимать трехмерное пространство. Новости робототехники Ростех показал кобота с «умным» зрением Новости робототехники ДНК-роботы могли бы доставлять лекарства и выслеживать вирусы внутри вашего тела. Новости робототехники Человекоподобные роботы, играющие в футбол, забили важный гол в области робототехники, продемонстрировав высокую координацию движений. Новости робототехники Специалист по робототехнике утверждает, что безопасность человекоподобных роботов должна быть первостепенной задачей. Новости робототехники Приводимый в движение мышечными клетками, тончайший, как бумага, робот плывет по водному лабиринту. Архив рубрики ~Коротко из Telegram~ Поселил ИИ‑агента в чёлку макбука: он слушает мой день и… Архив рубрики ~Коротко из Telegram~ Немой парень впервые признался в любви СИЛОЙ МЫСЛИ — его………… Новости робототехники GM делает ставку на вычислительные технологии и искусственный интеллект, которые, по её мнению, помогут ей конкурировать с китайскими автопроизводителями. Архив рубрики ~Коротко из Telegram~ В легендарный Need for Speed: Underground 2 теперь можно поиграть… Архив рубрики ~Коротко из Telegram~ ИИ придумал пистолет, и его напечатали на 3D-принтере Однозарядный пистолет… Архив рубрики ~Коротко из Telegram~ В Швейцарии с помощью бактерий разработали печатный материал, похожий на бетон Архив рубрики ~Коротко из Telegram~ Модели искусственного интеллекта позволили России применять технологии для лучших крылатых…

Оставить комментарий