Exemple concret
Claude prend des screenshots, identifie un bouton, déplace la souris et clique. Tu lui dis 'remplis ce formulaire', il le fait.
Pourquoi ça compte
Computer Use ouvre l'automatisation à tous les logiciels, même ceux sans API. Game changer pour les workflows legacy.
Tu le vois dans les agents navigateur, les tests visuels et certaines automatisations web.
À ne pas confondre
Tool use / Function calling : Le tool use permet à un modèle d'appeler un outil externe au lieu de seulement répondre avec du texte.
Workflow agentique : Un workflow agentique est une suite d'étapes où l'IA planifie, utilise des outils, vérifie et continue jusqu'au résultat.
Erreurs fréquentes
- Le lancer en plein écran sur ton ordi perso sans sandbox.
- Croire que c'est fiable à 100% : ça plante souvent sur des interfaces complexes.
- Oublier que ça consomme énormément de tokens.
Mini-checklist
- Je vérifie d'abord si le mot désigne un concept, un outil, un risque ou une métrique.
- Je le relie à un cas concret : Claude prend des screenshots, identifie un bouton, déplace la souris et clique. Tu lui dis 'remplis ce formulaire', il le fait.
- Je garde en tête le piège principal : Le lancer en plein écran sur ton ordi perso sans sandbox.
Questions rapides
C'est quoi Computer use en IA ?
Le computer use permet à une IA de lire un écran, déplacer la souris, cliquer et taper comme un utilisateur. Il sert à automatiser des logiciels sans API, mais reste fragile sur les interfaces complexes.
Où vais-je croiser Computer use ?
Tu le vois dans les agents navigateur, les tests visuels et certaines automatisations web.
Quel mot lire après Computer use ?
Commence par Tool use / Function calling, Workflow agentique, Sandbox.