Titre original : vercel-labs/agent-desktop
L’outil « Computer Use » de Vercel Labs : sans recourir aux captures d’écran ni à la correspondance de pixels, il lit l’arbre d’accessibilité des applications de bureau macOS, Windows et Linux, attribue une référence à chaque élément interactif, permettant à l’agent de cliquer, saisir du texte, puis relire l’interface pour confirmer le résultat. 11 5 : la version 1.2.0 publiée ajoute agent-desktop mcp, qui expose chaque commande comme un outil MCP via stdio ; elle prend également en charge la lecture du texte à saisir depuis un pipe, la sélection de lignes de liste modifiables uniquement via le conteneur sur macOS, et l’installation directe depuis le dépôt par défaut de Homebrew.
Pourquoi c’est important Nouveauté par rapport aux versions précédentes : il n’est plus nécessaire d’apprendre à l’agent à appeler des commandes en ligne de commande dans les prompts ; les clients prenant en charge MCP peuvent directement manipuler les applications de bureau.
Nombre d’étoiles 16868 (+2173 / 24h)
Raison
- 2173 nouvelles étoiles en 24 heures, total de 16868 étoiles (représente uniquement l’attention portée).
Risques
- Les instantanés, le presse-papiers et les captures d’écran peuvent contenir des données personnelles ; le README recommande de ne pas les inclure dans les journaux publics.
- L’autorisation d’accessibilité système est requise.