Агент управляет мышью и клавиатурой Mac
1 просмотр
Агент делает снимки экрана, понимает, что на нём, и двигает курсор, нажимая кнопки и печатая текст. Он переименовывает файлы, заполняет таблицы и формы, собирает информацию из вкладок. Человек получает готовые документы и упорядоченные данные, пока не следит за процессом.
- Для кого
- Для себя
Что понадобится
- Инструменты
- Claude — Чат-бот с ИИ от Anthropic
Готовой инструкции нет — это рассказ автора о своём опыте.
Подробности
Программа Computer Use от Claude умеет управлять компьютером так, как это делает человек. Она видит экран, определяет элементы интерфейса и выполняет действия с помощью мыши и клавиатуры. Это работает только на macOS в рамках исследовательского превью для подписчиков Pro и Max.
Автор протестировал агента на реальных рабочих задачах. Агент успешно переименовал и рассортировал более 40 файлов в папке за пять минут. Он перенёс данные из PDF-файла в таблицу Numbers, заполнил веб-форму с разными данными восемь раз и собрал ключевую информацию из пяти открытых вкладок в текстовый документ.
Сложные сценарии требуют контроля. При переключении между приложениями агент иногда теряет, в каком окне находится. Длинные цепочки действий из 20 шагов могут завершиться ошибкой на середине пути. Агент не справляется с капчами, двухфакторной аутентификацией и быстрыми действиями, так как каждое нажатие занимает несколько секунд. Он также не умеет выполнять сложные перетаскивания элементов.
Главная особенность — агент захватывает управление всей машиной. Пользователь не может работать на компьютере, пока работает ИИ. Поэтому лучший сценарий — запустить задачу и уйти. Автор также подключил удалённое управление телефоном, чтобы отправлять задания на Mac из любой точки.
Надёжность на простых задачах составляет около 80%, на сложных — 50%. Технология переходит от простого общения к выполнению физических действий в цифровом пространстве.
Оригинал: reddit.com
reddit.com · англ. · Перевод и пересказ ahamoment
Здесь пересказ своими словами. Подробности, цифры и контекст — у автора.
Читать оригиналЧто сделал автор
- Автор установил и запустил исследовательскую версию Computer Use на macOS.
- Автор дал команду агенту переименовать и рассортировать файлы в папке.
- Автор попросил перенести данные из PDF в таблицу и заполнить веб-форму.
- Автор открыл несколько вкладок и попросил собрать информацию в документ.
- Автор отправил задачу через телефон, пока находился вне дома.
Добавлено 1 ноября 2026 г.