Meta lance My Computer, l’agent IA qui prend la main sur votre PC

L’ère du chatbot qui discute est révolue. Meta prépare une intelligence artificielle qui ne se contente pas de répondre, mais qui agit à votre place, en prenant le contrôle de votre souris et de votre clavier. Son projet, nommé « My Computer », peut transformer notre façon d’utiliser nos machines, pour le meilleur… et pour le pire.

À retenir

• Meta développe « My Computer », un agent IA capable d’agir sur un ordinateur en analysant l’écran et en contrôlant le curseur.
• Cette technologie, inspirée de l’open source OpenClaw, marque le passage de l’IA conversationnelle à l’IA agente (Agentic AI) qui exécute des tâches complexes.
• Le principal défi n’est pas technique mais lié à la sécurité et la vie privée : comment empêcher les actions malveillantes et où traiter les données sensibles ?
• Meta mise sur son modèle Llama 3.2 Vision et un fonctionnement potentiellement en local pour garantir la confidentialité, se distinguant de concurrents comme Anthropic.
• L’objectif est d’automatiser des flux de travail multi-logiciels, comme remplir un CRM à partir d’une feuille de calcul, par la simple force du langage naturel.

Alors que l’IA générative s’est installée dans nos habitudes, une nouvelle étape, bien plus intrusive, se dessine : celle d’agents logiciels qui observent, comprennent et manipulent directement notre environnement numérique. Le projet My Computer de Meta illustre ce basculement et pose une question simple : jusqu’où sommes-nous prêts à déléguer le contrôle ?

La promesse d’un ordinateur pilotable par la pensée

L’ambition de « My Computer » est radicale : faire de l’ordinateur personnel une sorte d’extension exécutive de notre volonté, où la friction entre l’intention et l’action technique disparaît. Il ne s’agit plus de demander à une IA de rédiger un email, mais de lui ordonner : « Planifie la réunion d’équipe de jeudi prochain », et de la voir ouvrir l’agenda, consulter les disponibilités, rédiger l’invitation et l’envoyer.

De l’écran à l’action : la vision comme nouvelle interface

Le point clé de cette faculté réside dans l’utilisation de modèles de vision-langage (modèles VLM). Contrairement aux scripts d’automatisation rigides, l’agent de Meta comprend visuellement l’interface : il interprète boutons, menus déroulants et champs de texte en temps réel. Inspiré par le projet open source OpenClaw, « My Computer » traduit cette compréhension en actions concrètes : un clic ici, une frappe là. Llama 3.2 Vision en est le cœur technique, capable d’une interprétation contextuelle de l’interface qui lui permet de s’adapter si l’application change de design.

Automatiser le flux de travail, pas seulement les clics

La puissance de cet agent apparaît dans l’automatisation de séquences complexes impliquant plusieurs logiciels. Imaginez extraire les chiffres clés d’un tableau Excel, les synthétiser dans un document de présentation, puis programmer leur envoi par email à une liste de contacts spécifique. L’IA agente orchestre ce flux de travail (workflow) multi-étapes de manière autonome. Elle navigue entre le navigateur web, le tableur et le client mail comme un utilisateur humain, mais avec une rapidité et une constance inédites. L’objectif est clair : libérer les professionnels des tâches répétitives pour qu’ils se concentrent sur un travail à plus forte valeur ajoutée.

Le prix de la toute-puissance : sécurité et vie privée

Donner les clés de son ordinateur à une intelligence artificielle n’est pas un acte anodin. C’est le revers de cette innovation : des risques de sécurité majeurs et une intrusion possible dans la sphère privée, au travail comme à domicile.

Des garde-fous contre l’agent trop zélé

La première ligne de défense consiste en des garde-fous (guardrails) algorithmiques. Comment s’assurer que l’agent, obéissant à une instruction mal formulée ou malveillante, ne supprime pas des fichiers système essentiels, n’envoie pas de données confidentielles à un destinataire externe, ou ne réalise pas un achat en ligne non autorisé ? Meta travaille sur des protocoles stricts pour limiter le périmètre d’action de l’IA et empêcher l’exécution d’opérations critiques sans validation humaine explicite. La conception de ces barrières internes devient aussi stratégique que le développement des capacités de l’agent lui-même.

Une bataille pour la confiance : local contre cloud

Le second front est celui de la confidentialité. Pour « voir » l’écran, l’IA a besoin de captures d’écran. Si ces images sont envoyées vers des serveurs cloud pour être analysées, c’est l’ensemble de votre activité professionnelle – documents, emails, sites visités – qui transite par les data centers de Meta. Face à cette perspective difficilement compatible avec les exigences européennes, notamment au regard du RGPD, Meta mise sur une stratégie de privacy by design. La firme privilégierait un déploiement local des modèles, où le traitement s’effectuerait directement sur l’appareil de l’utilisateur. Cette approche, techniquement plus exigeante, devient un argument concurrentiel face à des solutions comme « Computer Use » d’Anthropic, qui fonctionne via une API cloud. C’est en promettant une véritable souveraineté des données que Meta espère convaincre les entreprises méfiantes.

La course à l’IA agente n’est donc plus une simple guerre des modèles linguistiques. Elle se joue désormais sur le terrain de la confiance et du contrôle. Avec « My Computer », Meta parie qu’une IA puissante, mais confinée dans les limites de votre propre machine, reste plus acceptable qu’un assistant omnipotent logé dans le cloud. Son succès dira qui, de l’humain ou de son agent, tient réellement la souris.