Урок из полного доступа, первые уроки курса бесплатно Официальный курс Hugging Face Learn на русском
Урок 84 · Текст · ~5 мин

Используем размеченный датасет

Урок 84 из 104 курса «HuggingFace: курс по Transformers»: официальный курс Hugging Face Learn (Хаггинг Фейс) на русском языке. Урок входит в платный доступ; первые уроки курса бесплатно.

О чём урок

Теперь мы узнаем, как экспортировать и использовать аннотированные данные, которые у нас есть в Argilla.

Сначала нам нужно убедиться, что мы подключены к нашему экземпляру Argilla, как и на предыдущих шагах:

А теперь загрузим набор данных, с которым будем работать:

Загрузки набора данных и вызова его записей с помощью dataset.records достаточно, чтобы начать использовать ваш набор данных и записи для ваших собственных целей и пайплайнов. Однако мы также узнаем, как выполнить несколько необязательных операций, таких как фильтрация записей и экспорт вашего набора данных в Hugging Face Hub.

Иногда вы хотите использовать только завершенные записи, поэтому сначала мы отфильтруем записи в нашем наборе данных по их статусу:

[!СОВЕТ] ⚠️ Обратите внимание, что записи со статусом completed (т.е. записи, которые соответствуют минимальному количеству отправленных ответов, настроенному в параметрах распределения задач) могут иметь более одного ответа, и каждый ответ может иметь любой статус из submitted, draft или discarded.

Узнайте больше о запросах и фильтрации записей в документации Argilla.

Теперь мы можем экспортировать наши аннотации в Hugging Face Hub, чтобы поделиться ими с другими. Для этого нам потребуется преобразовать записи в 🤗 Dataset, а затем отправить его в Hub:

В качестве альтернативы мы можем экспортировать полный набор данных Argilla (включая ожидающие записи) следующим образом:

Это интересный вариант, если другие захотят открыть набор данных в своих экземплярах Argilla, так как настройки автоматически сохраняются, и они могут просто импортировать полный набор данных, используя одну строку кода:

План урока

  1. Загрузка набора данных
  2. Фильтрация набора данных
  3. Экспорт в Hub

Урок входит в полный доступ. Полный текст и видео открываются после оплаты. Первые уроки каждого курса бесплатны.

Откройте полный доступ

Вы прошли бесплатные уроки. Выберите тариф, чтобы продолжить обучение.

Курсы HuggingFace 1 490 ₽ Разовый платёж, навсегда
  • Все курсы от HuggingFace (1 шт.)
  • Именной сертификат по каждому пройденному курсу
Оплатить
Полный доступ 4 900 ₽ Разовый платёж, навсегда
  • Все 77 курсов от 11 AI-провайдеров
  • Библиотека промптов и новые курсы
Оплатить

Безопасная оплата через Robokassa: СБП, карты, электронные кошельки. Доступ откроется в этом браузере и придёт письмом. Уже оплатили? Восстановить доступ

Урок входит в темы

Полезные гиды