OpenAI a annoncé une nouvelle fonctionnalité pour son application de bureau sur Mac, baptisée « Work with Apps » (Travailler avec des applications). Cette nouveauté permet d’intégrer ChatGPT avec des applications axées sur le développement telles que VS Code, Xcode, TextEdit, Terminal et iTerm2, simplifiant considérablement les workflows des développeurs.
Qu’est-ce que « Work with Apps » ?
Jusqu’à présent, la méthode classique pour utiliser ChatGPT dans les tâches de programmation consistait à copier-coller des extraits de code dans le chat. Bien que fonctionnel, ce procédé est loin d’exploiter tout le potentiel d’un outil comme ChatGPT. Avec « Work with Apps », cette limite est repoussée : désormais, l’application ChatGPT pour Mac peut lire directement le code ou le texte sur lequel vous travaillez et l’utiliser comme contexte pour vos requêtes.
Dans une démonstration relayée par TechCrunch, un employé d’OpenAI a utilisé l’app ChatGPT avec un projet Xcode modélisant le système solaire, mais où manquait la Terre. Grâce à une simple commande, ChatGPT a généré le code nécessaire pour ajouter la planète, tout en respectant la logique et le format du projet existant.

Même si les réponses générées doivent encore être copiées manuellement dans l’environnement de développement, cette nouvelle fonctionnalité économise du temps et réduit les erreurs liées aux changements fréquents de fenêtres.
La fonctionnalité tire parti de l’API d’accessibilité de macOS pour lire le texte dans les applications sélectionnées. Selon l’application, peut traiter jusqu’à 200 lignes de code récentes ou l’intégralité du contenu visible dans la fenêtre active. Si nous voulons qu’il se concentre sur une zone spécifique, nous pouvons sélectionner un extrait, et ChatGPT inclura également le texte environnant pour offrir un meilleur contexte.
Il y a des limitations pour l’instant. cette fonctionnalité ne peut pas interpréter d’éléments visuels tels que des graphiques ou des vidéos. Par ailleurs, certaines applications, comme VS Code, nécessitent l’installation d’une extension dédiée pour activer cette fonctionnalité.
Vers des agents intelligents plus autonomes
Bien que « Work with Apps » ne soit pas encore un système totalement autonome, OpenAI le décrit comme un premier pas vers cette autonomie. Selon Alexander Embiricos, chef de produit pour l’application de bureau chez OpenAI, le but est que ChatGPT puisse comprendre et interagir avec tout le contenu visible à l’écran, posant ainsi les bases d’agents plus intelligents à l’avenir.
Cette annonce intervient dans un contexte où des rumeurs évoquent le lancement, en 2025, d’un agent généraliste nommé « Operator » par OpenAI, destiné à rivaliser avec des projets similaires d’entreprises comme Anthropic, Google ou Microsoft.
Pour l’instant, « Work with Apps » est accessible uniquement aux abonnés ChatGPT Plus et Teams sur macOS. OpenAI prévoit une extension de cette fonctionnalité aux utilisateurs Enterprise et Edu, sans toutefois préciser de date. Quant à une disponibilité sur Windows, aucune information n’a encore été communiquée.
Pour les développeurs travaillant sur macOS, cette intégration offre une productivité accrue. Si le chemin vers des agents d’intelligence artificielle pleinement autonomes est encore long, « Work with Apps » marque une avancée significative. Reste à voir comment cette fonctionnalité continuera d’évoluer dans les mois à venir.