О чём урок
В этом ноутбуке мы будем использовать API Mistral для извлечения структурированных описаний изображений в формате JSON с помощью модели ministral-14b-2512. Мы отправим URL изображения и предложим модели вернуть ключевые элементы с описаниями, используя структурированные выводы.
Убедитесь, что у вас есть ключ API для платформы Mistral AI. Мы также покажем вам, как загрузить его из переменных среды.
Мы загрузим ключ API Mistral из переменных среды и инициализируем клиент. Убедитесь, что ваш ключ API сохранен в ваших переменных среды как MISTRAL_API_KEY.
Определите объект, который будет соответствовать ожидаемому выводу модели. Используя структурированные выводы, мы можем заставить модель отвечать в определенном формате.
Мы предложим модели описать изображение, предоставив URL изображения. Ответ будет возвращен в структурированном формате JSON с описанием ключевых элементов.
Теперь мы разберем JSON-ответ от API. Наш SDK разбирает и предоставляет объект из коробки в .parsed, вы можете получить доступ к необработанному ответу в .content
И готово! Вы знаете, как использовать возможности Mistral Vision для описания изображения, отправляя URL изображения и получая структурированный JSON-ответ. Описания, предоставленные моделью, дают представление о ключевых элементах изображения.
План урока
- Предварительные условия
- Настройка
- Модель данных
- Отправка URL изображения для описания
- Показ результата
Урок входит в полный доступ. Полный текст и видео открываются после оплаты. Первые уроки каждого курса бесплатны.