О чём урок
В этом руководстве вы будете использовать несколько функций Gemini (длинный контекст, мультимодальность, структурированный вывод, File API, режим чата...) в сочетании с моделью генерации изображений Nano Banana для иллюстрации книги.
Вы также узнаете, как оживить свои иллюстрации с помощью: - 🎬 Veo — Анимируйте иллюстрацию главы в короткое видео - 🎵 Lyria 3.5 — Генерируйте инструментальную фоновую музыку для каждой главы - 🗣️ TTS — Пусть рассказчик читает вслух начало главы
Каждая концепция будет объясняться по ходу дела, но если вам нужно более простое введение в модель генерации изображений Gemini, ознакомьтесь с блокнотом начало работы или документацией по генерации изображений.
Примечание: для уменьшения размера блокнота (и ваших счетов, если вы его запускаете) количество изображений было ограничено 3 персонажами и 3 главами каждый раз, но вы можете снять это ограничение, если хотите большего в своих экспериментах.
Также обратите внимание, что в этом блокноте раньше использовались модели Imagen вместо Nano Banana. Если вас интересует версия Imagen, ознакомьтесь с этой старой версией.
Примечание: Включите оплату, чтобы использовать генерацию изображений. Это функция с оплатой по мере использования (см. цены). Это не относится к случаю использования gemini-2.5-flash-image (Nano Banana), у которого есть бесплатный уровень.
Этот блокнот также включает необязательные разделы для генерации видео (Veo), генерации музыки (Lyria 3.5) и преобразования текста в речь (TTS), которые являются платными функциями. У каждого есть свой флажок, который необходимо включить перед запуском.
В этом разделе устанавливается SDK, настраивается с использованием вашего ключа API, импортируются соответствующие библиотеки, загружаются образцы видео и загружаются в Gemini.
Просто сверните (нажмите на маленькую стрелку слева от заголовка) и запустите этот раздел, если хотите сразу перейти к примерам (только не забудьте запустить его, иначе ничего не будет работать).
Чтобы запустить следующую ячейку, ваш ключ API должен быть сохранен в секрете Colab с именем GEMINI_API_KEY.
С новым SDK вам теперь нужно только инициализировать клиент с вашим ключом API (или OAuth, если…
План урока
- 0/ Настройка
- Настройка ключа API
- Установка SDK
- Инициализация клиента SDK
- Импорт
- Выбор моделей
- 1/ Получите книгу и загрузите ее с помощью File API
- 2/ Начать чат
Урок входит в полный доступ. Полный текст и видео открываются после оплаты. Первые уроки каждого курса бесплатны.