Урок из полного доступа, первые уроки курса бесплатно Официальный курс Anthropic Academy на русском
Урок 79 · Видео · 4 мин

Computer Use: Claude управляет компьютером

Урок 79 из 89 курса «Claude в Amazon Bedrock»: официальный курс Anthropic Academy (Антропик) на русском языке. Урок входит в платный доступ; первые уроки курса бесплатно.

Кадр из видеоурока

О чём урок

Функция «Использование компьютера» (Computer Use) представляет собой мощную возможность, позволяющую Claude напрямую взаимодействовать с десктопными средами. По сути, это дает Claude способность управлять компьютером так, как это делал бы человек. Это открывает совершенно новые горизонты для автоматизации, тестирования и выполнения сложных рабочих процессов, выходящих за рамки простой генерации текста.

В традиционном понимании, большие языковые модели (LLM) вроде Claude генерируют текст, отвечают на вопросы или пишут код. Однако с функцией «Использование компьютера» Claude переходит от «описания того, что нужно сделать» к «фактическому выполнению этого». Это означает, что модель может не просто предложить шаги для решения задачи, но и самостоятельно пройти эти шаги в реальной компьютерной среде.

Вместо того чтобы просто описывать действия или генерировать код, Claude может фактически выполнять задачи, используя следующие возможности:

  • Создание снимков экрана: Claude может «видеть» содержимое экрана, делая скриншоты, что позволяет ему анализировать визуальную информацию и понимать текущее состояние интерфейса.
  • Нажатие кнопок и ссылок: Модель может взаимодействовать с элементами пользовательского интерфейса, такими как кнопки, ссылки, чекбоксы и выпадающие списки.
  • Ввод текста: Claude способен вводить текст в формы, текстовые поля и различные приложения, имитируя ввод с клавиатуры.
  • Навигация: Модель может переключаться между различными приложениями, вкладками браузера и окнами, перемещаясь по операционной системе или веб-сайту.
  • Выполнение многошаговых процессов: Claude может следовать сложным инструкциям, требующим визуальной обратной связи и последовательного выполнения нескольких действий.

Эти возможности делают «Использование компьютера» особенно ценным для таких задач, как тестирование обеспечения качества (QA), где необходимо взаимодействовать с пользовательским интерфейсом и проверять, что все работает так, как ожидается.

Рассмотрим практический сценарий, демонстрирующий мощь функции «Использование компьютера». Представьте, что вы разработали компонент React с функцией автозаполнения, где пользователи могут вводить символ @, чтобы упомянуть файлы или ресурсы. На первый взгляд компонент работает нормально, но вы хотите тщательно протестировать его на наличие пограничных случаев.

Вместо того чтобы вручную тестировать каждый сценарий, вы можете настроить Claude с функцией «Использование компьютера…

План урока

  1. Что такое «Использование компьютера» (Computer Use) с Claude
  2. Возможности «Использования компьютера»
  3. Пример из реального мира: Автоматизированное QA-тестирование
  4. Как работает процесс тестирования с Claude
  5. Настройка «Использования компьютера»
  6. Рекомендации по использованию «Использования компьютера»
  7. Заключение

Урок входит в полный доступ. Полный текст и видео открываются после оплаты. Первые уроки каждого курса бесплатны.

Откройте полный доступ

Вы прошли бесплатные уроки. Выберите тариф, чтобы продолжить обучение.

Курсы Anthropic 1 490 ₽ Разовый платёж, навсегда
  • Все курсы от Anthropic (34 шт.)
  • Именной сертификат по каждому пройденному курсу
Оплатить
Полный доступ 4 900 ₽ Разовый платёж, навсегда
  • Все 77 курсов от 11 AI-провайдеров
  • Библиотека промптов и новые курсы
Оплатить

Безопасная оплата через Robokassa: СБП, карты, электронные кошельки. Доступ откроется в этом браузере и придёт письмом. Уже оплатили? Восстановить доступ

Полезные гиды