Parlons de votre projet
Architecture IA

GPT-6.1 Terra : mesurer les erreurs sur un écran avant d’automatiser

Votre assistant doit retrouver le bon dossier dans un tableau. Comparez ce qu’il reconnaît sur la capture, ce qu’il propose de faire et l’état réellement obtenu sur une interface fictive.

GPT-6.1 Terra : mesurer les erreurs sur un écran avant d’automatiser

Deux lignes d’une liste ont presque le même libellé. Un modèle peut lire leur contenu et pourtant choisir le mauvais bouton. Pour une tâche d’interface, séparez la lecture de l’écran de la vérification de l’action qui suit.

Lire un écran et agir dessus

Le 26 octobre, OpenAI a publié gpt-6.1-terra dans Responses et Chat Completions. La fiche indique des entrées d’image et la prise en charge de l’utilisation d’un ordinateur. Dans une application, votre intégration fournit les captures et contrôle l’exécution des actions. Le changelog cité documente cette sortie API.

À vérifier sur votre application

Construisez une page de test affichant des dossiers fictifs. Capturez la liste à deux largeurs avec une ligne tronquée et deux noms proches. Demandez d’abord l’identifiant et l’état du dossier. Rejouez ensuite le choix en lecture seule et comparez l’écran final avec l’identifiant attendu. Notez les erreurs de lecture, les mauvais clics et les reprises.

Comparez Terra à votre solution actuelle sur les mêmes cas et les mêmes limites de temps. Fixez une règle de transfert à un humain lorsque la ligne est ambiguë.

Capture d’interface, état reconnu et résultat de l’action contrôlé.

Partager cet article