Урок из полного доступа, первые уроки курса бесплатно Официальный курс OpenAI Academy на русском
Урок 238 · Текст · ~5 мин

Выбираем модель по конверсии в Stripe

Урок 238 из 303 курса «OpenAI Cookbook»: официальный курс OpenAI Academy (ОпенАИ) на русском языке. Урок входит в платный доступ; первые уроки курса бесплатно.

О чём урок

Наилучшая модель для вас зависит от ваших бизнес-целей. Многие стартапы выбирают большие языковые модели (LLM) на основе офлайн-оценок и публичных бенчмарков. Однако модель, которая достигает высоких показателей на бенчмарке, не обязательно приведет к тому, что ваши пользователи будут платить, подписываться или продолжать использовать ваш продукт. Модели, которые выглядят сильными на бумаге, могут показывать низкие результаты при измерении по фактическим бизнес-показателям.

В этом руководстве описывается подход к оценке, основанный на одном из наиболее важных бизнес-результатов для стартапов: готовности людей платить за ваш продукт.

Мы рассмотрим процесс оценки моделей HyperWrite, сосредоточившись на реальной конверсии платежей — в частности, платежей Stripe за разовые покупки или подписки с ежемесячным регулярным доходом (MRR). Если ваша цель — улучшить коэффициенты конверсии или поддерживать их при переходе на менее дорогую модель, этот пример оценки может стать полезным шаблоном для подражания.

Чтобы применить это руководство к вашему бизнесу, вам потребуется:

  • Платежный процессор. В этом примере мы используем Stripe, но вы можете внести небольшие корректировки и использовать тот же подход с любым поставщиком платежных услуг.
  • Достаточное количество пользователей для получения значимого сигнала. Стремитесь к тому, чтобы на каждый тестовый вариант приходилось не менее тысячи пользователей. Для более высокой статистической значимости потребуется больше пользователей.
  • Продукт на базе AI с событием конверсии. Мы используем LLM-приложение, и нашим событием конверсии является платеж. Тот же подход к тестированию применим к приложениям, построенным на основе голоса, видео и других модальностей.

HyperWrite создает инструменты для письма и ассистентов для исследований на базе AI. Основное предложение компании — это ассистент для письма с расширенными исследовательскими возможностями.

Офлайн-бенчмарки не предсказывали то, что было наиболее важно для HyperWrite: будут ли пользователи взаимодействовать с ассистентом для письма таким образом, чтобы это привело их к подписке и дальнейшему использованию продукта.

Во многих стартапах целью является привлечение пользователей к регистрации и дальнейшему использованию продукта.

  • Новые пользователи объединяются в batch, и каждому batch предлагается своя…

План урока

  1. Обзор
  2. Предварительные условия и область применения
  3. Выбор модели на основе вашей реальной цели
  4. Что движет стартапами: конверсия
  5. Как проводить A/B-тестирование для выбора модели
  6. Основы: одна модель против другой
  7. Пример из реального мира: тест HyperWrite по замене модели
  8. Установка параметров: Что считается победой?

Урок входит в полный доступ. Полный текст и видео открываются после оплаты. Первые уроки каждого курса бесплатны.

Откройте полный доступ

Вы прошли бесплатные уроки. Выберите тариф, чтобы продолжить обучение.

Курсы OpenAI 1 490 ₽ Разовый платёж, навсегда
  • Все курсы от OpenAI (1 шт.)
  • Именной сертификат по каждому пройденному курсу
Оплатить
Полный доступ 4 900 ₽ Разовый платёж, навсегда
  • Все 77 курсов от 11 AI-провайдеров
  • Библиотека промптов и новые курсы
Оплатить

Безопасная оплата через Robokassa: СБП, карты, электронные кошельки. Доступ откроется в этом браузере и придёт письмом. Уже оплатили? Восстановить доступ

Урок входит в темы

Полезные гиды