О чём урок
Этот блокнот покажет вам, как генерировать высококачественную музыку с помощью Lyria 3.5, передовой модели генерации музыки от Google DeepMind.
Независимо от того, нужен ли вам короткий музыкальный луп или полноценная 3-минутная песня с богатым вокалом и структурной сложностью, Lyria 3.5 делает это возможным с помощью простого вызова interactions.create.
В этом блокноте вы узнаете, как: - Генерировать музыку из текстовых подсказок. - Создавать "визуальные саундтреки", где изображение служит вдохновением. - Использовать расширенные подсказки с временными метками для управления структурой песни. - Генерировать чисто инструментальные треки. - Создавать вокальные треки на нескольких языках.
Это руководство проведет вас через процесс создания вашей первой хитовой песни с использованием GenAI SDK и Interactions API.
Примечание: Этот блокнот использует Interactions API, новейший способ взаимодействия с моделями Gemini. Ищете версию generateContent? Проверьте архивную ветку.
Установите SDK из PyPI. Рекомендуется всегда использовать последнюю версию.
Чтобы запустить следующую ячейку, ваш ключ API должен быть сохранен в Colab Secret с именем GEMINI_API_KEY. Если у вас еще нет ключа API или вы не знаете, как создать Colab Secret, см. Аутентификация для пошагового руководства.
С новым SDK теперь вам нужно только инициализировать клиент с вашим ключом API (или OAuth, если вы используете Vertex AI). Модель теперь устанавливается в каждом вызове.
Lyria 3.5 — это наша передовая модель для генерации полноценных песен с улучшенной точностью звука и четкостью вокала, оптимизированная для точного соответствия подсказкам и создания богатых, связных музыкальных аранжировок (генерирует песни до 3 минут с интро, куплетом, припевом!). 🎼
- lyria-3.5: Наша флагманская модель генерации музыки.
- lyria-3-pro-preview: Генерирует полноценные песни (до 3 минут) со структурой (интро, куплет, припев!).
- lyria-3-clip-preview: Идеально подходит для быстрых 30-секундных клипов, лупов и экспериментов.
Более подробная информация в документации.
Создание песни осуществляется просто с помощью вызова interactions.create. Вы ДОЛЖНЫ указать модальности Audio и Text в конфигурации, чтобы получить аудиоданные и сгенерированные тексты/структуру.
Вывод будет содержать как текстовые…
План урока
- Настройка
- Установка SDK
- Настройка ключа API
- Инициализация клиента SDK
- Выбор модели
- Создайте свою первую песню
- Разбор вывода
- Утилита
Урок входит в полный доступ. Полный текст и видео открываются после оплаты. Первые уроки каждого курса бесплатны.