Урок из полного доступа, первые уроки курса бесплатно Официальный курс Llama Cookbook на русском
Урок 09 · Текст · ~5 мин

Озвучиваем подкаст через TTS

Урок 9 из 32 курса «Llama: сценарии использования»: официальный курс Llama Cookbook (Мета Лама) на русском языке. Урок входит в платный доступ; первые уроки курса бесплатно.

О чём урок

У нас готовы точные транскрипты подкастов для генерации аудио для нашего подкаста.

В этом notebook мы научимся генерировать Audio, используя сначала модели suno/bark и parler-tts/parler-tts-mini-v1.

После этого мы используем output из Notebook 3 для генерации нашего полного подкаста

Примечание: Пожалуйста, не стесняйтесь расширять этот notebook новыми моделями. Две вышеупомянутые были выбраны после нескольких тестов с использованием sample prompt.

⚠️ Предупреждение: Этот notebook предпочитает версию transformers 4.43.3 или более раннюю, поэтому мы понизим версию нашего окружения, чтобы обеспечить бесперебойную работу

Источник: Этот Colab был использован для стартового кода

Мы можем установить эти пакеты для ускорения работы

Импортируем необходимые фреймворки

Попробуем сгенерировать аудио, используя обе модели, чтобы понять, как они работают.

Обратите внимание на тонкие различия в prompting:

  • Parler: Принимает description prompt, который можно использовать для настройки профиля диктора и скорости генерации
  • Suno: Принимает выразительные слова, такие как [sigh], [laughs] и т. д. Вы можете найти больше заметок об экспериментах, проведенных для этого notebook, в файле TTS_Notes.md, чтобы узнать больше.

Пожалуйста, установите device = "cuda" ниже, если вы используете single GPU node.

Попробуем сначала использовать модель Parler и сгенерировать короткий сегмент голосом диктора Лоры

План урока

  1. Notebook 4: Рабочий процесс TTS
  2. Тестирование генерации Audio
  3. Модель Parler

Урок входит в полный доступ. Полный текст и видео открываются после оплаты. Первые уроки каждого курса бесплатны.

Откройте полный доступ

Вы прошли бесплатные уроки. Выберите тариф, чтобы продолжить обучение.

Курсы Meta Llama 1 490 ₽ Разовый платёж, навсегда
  • Все курсы от Meta Llama (2 шт.)
  • Именной сертификат по каждому пройденному курсу
Оплатить
Полный доступ 4 900 ₽ Разовый платёж, навсегда
  • Все 77 курсов от 11 AI-провайдеров
  • Библиотека промптов и новые курсы
Оплатить

Безопасная оплата через Robokassa: СБП, карты, электронные кошельки. Доступ откроется в этом браузере и придёт письмом. Уже оплатили? Восстановить доступ

Полезные гиды