computer use (Anthropic)
Tool : Une action précise que l’IA peut appeler · nécessite anthropic-api
Laisse Claude voir l'écran, bouger la souris et taper au clavier sur une machine.
La capacité la plus dangereuse du catalogue : jamais sans VM isolée et supervision.
La sécurité reflète la destination des données, les permissions demandées et les incidents recensés à la date de vérification. Ce n’est pas une garantie d’absence de risque : vérifiez le mode de déploiement et les connexions que vous activez.
Ce que ça fait, concrètement
Certaines tâches informatiques sont trop complexes pour être décrites en mots : naviguer dans une interface graphique, remplir un formulaire, déplacer des fichiers sur un bureau. Computer use permet à Claude d'agir directement sur un environnement de bureau en voyant l'écran et en contrôlant la souris et le clavier, comme le ferait un utilisateur humain.
Concrètement, l'outil expose à Claude un ensemble de 17 actions membres (capture d'écran, clic gauche, saisie au clavier, zoom, etc.) via un seul identifiant de type dans l'API. Claude reçoit des captures d'écran, décide des actions à enchaîner, les envoie sous forme de blocs, et votre application les exécute dans l'environnement que vous contrôlez avant de renvoyer les résultats. Ce cycle se répète jusqu'à ce que la tâche soit terminée.
Cet outil s'adresse aux développeurs qui construisent des agents capables d'automatiser des tâches de bureau : tests logiciels, extraction de données depuis des interfaces graphiques, automatisation de flux de travail répétitifs sur Linux. Il nécessite une maîtrise de l'API Anthropic et la mise en place d'un environnement d'exécution isolé.
Il ne convient pas aux utilisateurs non techniques, ni aux cas d'usage qui se limitent à des pages web : pour cela, l'outil browser use est plus adapté et ne requiert pas d'environnement de bureau complet. Il n'est pas non plus disponible dans Claude Managed Agents.
Ce que ça propose
- ·Capture d'écran automatique : Claude prend des captures pour observer l'état du bureau avant chaque décision. (payant)
- ·Contrôle de la souris et du clavier : clic, double-clic, saisie de texte, défilement et zoom sont disponibles parmi les 17 actions membres. (payant)
- ·Actions groupées (batch actions) : Claude peut planifier et envoyer plusieurs actions en une seule réponse, exécutées dans l'ordre. (payant)
- ·Détection d'injection de prompt : des classificateurs analysent automatiquement les captures d'écran pour repérer les tentatives d'injection et demander une confirmation humaine avant de continuer. (payant)
- ·Compatibilité avec les outils bash et éditeur de texte : computer use s'utilise couramment aux côtés de ces outils pour des tâches combinant bureau et ligne de commande. (payant)
- ·Disponibilité sur l'API Claude et Google Cloud via l'identifiant computer_toolset_20260801. (payant)
- ·Rétrocompatibilité : les intégrations basées sur l'ancienne version computer_20251124 continuent de fonctionner. (payant)
En pratique
- Prix
- PayantTokens du modèle.
- Usage commercial
- Usage commercial : oui
- Disponible sur
- api
- Hôte
- anthropic-api
- Interface FR
- Non
Sécurité et données
- Pastille
- Sécu : réserves importantes
- Capacités
- litécritexécuteréseau
- Vos données
- Local ou cloud selon usage
- Permissions
- Écriture, exécution, réseau, contrôle total de la machine ; injection possible via ce qui s'affiche.
- Maintenance
- Active
Liens et dépôt vérifiés le 25 octobre 2026 · ajoutée le 1 octobre 2024
Comment installer computer use (Anthropic)
pip install anthropic