Cowork permet déjà à Claude de créer des fichiers, exécuter du code et travailler avec des services connectés. Mais certaines tâches vivent dans des applications sans connecteurs — le tableau de bord interne de votre entreprise, un outil de design, un portail gouvernemental, une application de bureau sans API. Jusqu’ici, ces tâches étaient hors de portée.
Computer Use change la donne. Une fois activé, Claude peut voir votre écran, déplacer la souris, cliquer sur des boutons, taper du texte et naviguer dans les applications — de la même manière que vous, mais sans que vous soyez au clavier. C’est encore une research preview, avec des limitations claires, mais pour les bonnes tâches, ça élimine un vrai goulet d’étranglement.
Comment ça fonctionne
Claude utilise une approche à trois niveaux pour accomplir les tâches :
-
Connecteurs d’abord. Si une intégration directe existe — Gmail, Google Drive, Slack, Asana — Claude l’utilise. C’est le chemin le plus rapide et le plus fiable.
-
Navigateur ensuite. S’il n’y a pas de connecteur mais que la tâche peut se faire dans un navigateur, Claude navigue la version web.
-
Contrôle d’écran en dernier recours. Seulement quand aucune des options précédentes ne fonctionne, Claude prend des captures d’écran, analyse ce qu’il voit, et interagit par clics de souris et saisie clavier.
Cette hiérarchie compte. Computer Use est puissant mais plus lent et moins fiable qu’un connecteur direct. Claude ne recourt pas au contrôle d’écran quand une meilleure option est disponible.
Activation
Computer Use nécessite :
- macOS (le support Windows est prévu mais pas encore disponible)
- Un abonnement Pro ou Max
- La dernière version de l’app Claude Desktop
- Votre ordinateur doit être éveillé avec Claude Desktop ouvert
Pour l’activer : ouvrez Claude Desktop, allez dans Settings → General, et activez Computer use. C’est tout. La prochaine fois que Claude devra interagir avec une app pendant une session Cowork, il demandera la permission avant d’y accéder.
Ce que Claude peut faire
Quelques exemples concrets où Computer Use fait la différence :
Remplir des formulaires web. Un portail administratif où vous devez soumettre régulièrement le même type de formulaire. Vous décrivez ce qui doit être rempli, Claude navigue vers le portail, remplit les champs, et fait une pause avant la soumission pour que vous puissiez vérifier.
Travailler avec des apps de bureau. Tester une app dans un simulateur de téléphone, formater un tableur d’une manière spécifique nécessitant la navigation dans les menus, ou interagir avec un outil interne propriétaire qui n’existe qu’en application de bureau.
Recherche multi-sources. Claude peut ouvrir votre navigateur, rechercher sur plusieurs sites, croiser les informations avec des fichiers sur votre bureau, et compiler les résultats dans un document — le tout sans que vous basculiez entre les onglets.
Tâches GUI répétitives. Tout ce qui vous fait cliquer à travers la même séquence de menus et de boîtes de dialogue de façon répétée. Saisie de données entre applications, export de rapports depuis un tableau de bord, mise à jour de fiches dans un système sans fonction d’édition en masse.
Contrôles de sécurité
Computer Use prend des captures d’écran pour naviguer. Cela signifie que Claude peut potentiellement voir tout ce qui est visible sur votre écran — données personnelles, documents sensibles, onglets de navigateur ouverts, notifications. Anthropic a intégré plusieurs garde-fous :
Permissions par application. La première fois que Claude veut accéder à une application, il demande votre approbation explicite. Vous pouvez refuser l’accès à n’importe quelle app.
Liste de blocage par défaut. Les plateformes d’investissement, apps de cryptomonnaie et outils de trading sont bloqués par défaut. Vous pouvez ajouter d’autres apps à une liste de blocage personnalisée.
Revue des actions. Vous pouvez arrêter Claude à tout moment. Si quelque chose semble anormal, interrompez la session.
Limites d’entraînement. Claude est entraîné pour éviter le trading d’actions, la saisie de données d’identification sensibles, et l’interaction avec des systèmes financiers ou médicaux — bien qu’Anthropic précise que ces garde-fous ne sont pas absolus.
Points d’attention
C’est une research preview, et la documentation est claire sur les limitations :
C’est plus lent que les connecteurs. L’interaction par écran implique de prendre des captures, les analyser, planifier des actions et les exécuter une par une. Une tâche qui prend 2 secondes via un connecteur peut en prendre 30 via le contrôle d’écran.
Les tâches complexes nécessitent parfois un second essai. Si une page se charge différemment de ce qui est attendu, ou si une boîte de dialogue apparaît à un endroit inhabituel, Claude peut être désorienté. Considérez-le comme un assistant compétent mais littéral : si la première tentative échoue, la seconde réussit généralement.
N’utilisez pas Computer Use pour les apps sensibles. La documentation met explicitement en garde contre l’utilisation avec les applications bancaires, de santé, gouvernementales et juridiques. Le risque n’est pas que Claude fasse quelque chose de malveillant — c’est que les captures d’écran enregistrent tout ce qui est à l’écran, et les erreurs dans des contextes sensibles ont de vraies conséquences.
Votre écran est visible pour Claude. Fermez les applications et onglets que vous ne voulez pas que Claude voie avant de démarrer une session Computer Use. Si votre messagerie est ouverte en arrière-plan avec de la correspondance sensible, Claude pourrait la capturer involontairement dans une capture d’écran.
Quand l’utiliser (et quand pas)
Bons cas d’usage : tâches GUI répétitives, remplissage de formulaires, test d’applications, navigation dans des outils sans API, recherche multi-sources entre onglets et fichiers locaux.
Déconseillé : tout ce qui implique de l’argent (banque, trading), des données personnelles sensibles (dossiers médicaux, documents juridiques), ou des actions à enjeux élevés où une erreur coûte cher.
Le sweet spot, ce sont les tâches fastidieuses pour vous mais simples pour un agent qui lit l’écran : « va sur ce tableau de bord, exporte les données du mois dernier, mets-les dans un tableur, et envoie-moi le tout par e-mail. » C’est exactement le genre de travail mécanique que Computer Use gère bien.
Prochaines étapes
- Nouveau sur Cowork ? Commencez par le guide débutant
- Déclencher Computer Use depuis votre téléphone ? Découvrez Dispatch
- Tâches que Claude peut faire sans contrôle d’écran ? Voir 10 choses inattendues