О чём урок
В этом блокноте показано, как использовать мультимодальные возможности моделей Gemini для распознавания исторического события, происходящего в видео.
Чтобы запустить следующую ячейку, ваш ключ API должен быть сохранен в секрете Colab с именем GEMINI_API_KEY. Если у вас еще нет ключа API или вы не знаете, как создать секрет Colab, см. Аутентификация для примера.
В этом примере используется общедоступное видео речи президента Рональда Рейгана у Берлинской стены из Национального архива и управления записей (NARA), снятое 12 июня 1987 года.
Загруженное видео готово к обработке. Этот запрос инструктирует модель предоставить основную информацию об исторических событиях, изображенных в видео.
Некоторые исторические события затрагивают спорные темы, которые могут быть помечены Gemini API, что блокирует ответ на запрос.
Из-за этого может быть хорошей идеей отключить настройки безопасности.
Как видите, модель правильно предоставила информацию о датах, Рональде Рейгане, который был главным героем видео, и названии этого события.
Вы можете удалить видео, чтобы предотвратить ненужное хранение данных.
Теперь вы знаете, как можно использовать модели Gemini с видео и использовать их для распознавания исторических событий.
Этот блокнот показывает только один из многих вариантов использования. Проверьте блокнот Понимание видео для получения дополнительных примеров использования Gemini API с видео.
План урока
- Настройка ключа API
- Пример
- Следующие шаги
Урок входит в полный доступ. Полный текст и видео открываются после оплаты. Первые уроки каждого курса бесплатны.