Новая версия agent-desktop: все команды управления рабочим столом превращены в инструменты MCP

Инструмент «управления компьютером» от Vercel Labs: вместо скриншотов и сопоставления пикселей он читает дерево доступности (accessibility tree) настольных приложений macOS, Windows и Linux, присваивая каждому интерактивному элементу ссылку; агент на основе этого выполняет клики и ввод текста, а затем повторно считывает интерфейс для подтверждения результата. 11 5 числа выпущенный 1.2.0 добавил agent-desktop mcp, который предоставляет каждую команду как инструмент MCP через stdio; также поддерживается чтение вводимого текста из конвейера (pipe), выбор строк списка на macOS, которые можно изменить только через контейнер, и прямая установка из стандартного репозитория Homebrew.

Оригинальное название: vercel-labs/agent-desktop

Инструмент «управления компьютером» от Vercel Labs: вместо скриншотов и сопоставления пикселей он читает дерево доступности (accessibility tree) настольных приложений macOS, Windows и Linux, присваивая каждому интерактивному элементу ссылку; агент на основе этого выполняет клики и ввод текста, а затем повторно считывает интерфейс для подтверждения результата. 11 5 числа выпущенный 1.2.0 добавил agent-desktop mcp, который предоставляет каждую команду как инструмент MCP через stdio; также поддерживается чтение вводимого текста из конвейера (pipe), выбор строк списка на macOS, которые можно изменить только через контейнер, и прямая установка из стандартного репозитория Homebrew.

Почему это важно Что нового по сравнению с предыдущими версиями: больше не нужно обучать агента вызову командной строки в промптах; клиенты с поддержкой MCP могут напрямую управлять настольными приложениями.

Количество звёзд 16868 (+2173 / 24 ч)

Причины

  • За 24 часов добавлено 2173 звёзд, всего звёзд 16868 (отражает только уровень внимания).

Риски

  • Снимки экрана, буфер обмена и скриншоты могут содержать конфиденциальные данные; в README указано, что их не следует помещать в открытые журналы.
  • Требуется предоставление системных прав на доступность (accessibility permissions).

Открыть

Trendshift(GitHub Trending 快照)

Открыть последние новости ИИ