Урок из полного доступа, первые уроки курса бесплатно Официальный курс OpenAI Academy на русском
Урок 04 · Текст · ~5 мин

Классификация текстов через эмбеддинги

Урок 4 из 303 курса «OpenAI Cookbook»: официальный курс OpenAI Academy (ОпенАИ) на русском языке. Урок входит в платный доступ; первые уроки курса бесплатно.

О чём урок

Существует множество способов классификации текста. В этом notebook представлен пример классификации текста с использованием embeddings. Для многих задач классификации текста мы наблюдали, что fine-tuned модели показывают лучшие результаты, чем embeddings. Пример fine-tuned моделей для классификации можно найти в Fine-tuned_classification.ipynb. Мы также рекомендуем иметь больше примеров, чем размерность embedding, чего нам здесь не совсем удалось достичь.

В этой задаче классификации текста мы предсказываем оценку отзыва о еде (от 1 до 5) на основе embedding текста отзыва. Мы разделяем набор данных на обучающий и тестовый для всех последующих задач, чтобы реалистично оценить производительность на невиданных ранее данных. Набор данных создан в Get_embeddings_from_dataset Notebook.

Мы видим, что модель достаточно хорошо научилась различать категории. Отзывы с 5 звездами показывают наилучшую общую производительность, и это не слишком удивительно, поскольку они являются наиболее распространенными в наборе данных.

Урок входит в полный доступ. Полный текст и видео открываются после оплаты. Первые уроки каждого курса бесплатны.

Откройте полный доступ

Вы прошли бесплатные уроки. Выберите тариф, чтобы продолжить обучение.

Курсы OpenAI 1 490 ₽ Разовый платёж, навсегда
  • Все курсы от OpenAI (1 шт.)
  • Именной сертификат по каждому пройденному курсу
Оплатить
Полный доступ 4 900 ₽ Разовый платёж, навсегда
  • Все 77 курсов от 11 AI-провайдеров
  • Библиотека промптов и новые курсы
Оплатить

Безопасная оплата через Robokassa: СБП, карты, электронные кошельки. Доступ откроется в этом браузере и придёт письмом. Уже оплатили? Восстановить доступ

Полезные гиды