Aller au contenu

IA

Cette IA note tes placements et valide 88,6 % des avis des seniors

L'Eval Agent de Terminal X fait tourner GPT-6.1 Sol sur une grille de 54 critères et, selon l'entreprise, repère 25 % de dérives de mandat en plus que les investisseurs seniors. Le stylo rouge a changé de main.

Photo de couverture : Jernej Furman from Slovenia / CC BY 2.0

TL;DR

  1. L'Eval Agent de Terminal X note des productions d'investissement sur une grille de 54 critères, avec GPT-6.1 Sol.
  2. Il rejoint le jugement des investisseurs seniors dans 88,6 % des cas, selon l'annonce.
  3. Il repère 25 % de écarts en plus par rapport au mandat d'un fonds que les investisseurs seniors.

Ce qui s'est passé

L'Eval Agent note des productions d'investissement selon une grille de 54 critères, et c'est GPT-6.1 Sol qui tient le stylo rouge. Terminal X affirme que le système rejoint le jugement des investisseurs seniors dans 88,6 % des cas.

Le deuxième chiffre est le plus piquant. Terminal X assure que l'agent repère 25 % de écarts en plus par rapport au mandat d'un fonds que les investisseurs seniors. Le mandat d'un fonds, c'est le règlement qui dit ce que le fonds a le droit de faire. Un écart, c'est donc le fonds qui sort de son propre script.

Les deux chiffres viennent de l'annonce. Traite-les comme des affirmations du vendeur, jusqu'à ce que quelqu'un d'extérieur refasse le test.

Pourquoi ça compte

La plupart des titres sur l'IA en finance parlent de générer : des analyses, des résumés, des réponses. Ici, on parle de vérifier. Un modèle qui note des productions à grande échelle, c'est un autre métier qu'un modèle qui les rédige, et sans doute un métier plus utile.

Le 88,6 % mérite une lecture attentive. Il dit que le correcteur est d'accord avec les seniors la plupart du temps, ce qui laisse penser que la grille reflète bien la façon de raisonner des experts. Il ne dit pas que le correcteur a raison quand les deux désaccordent.

C'est là qu'arrive l'affirmation des 25 %. Si l'agent signale vraiment plus d'écarts de mandat que les seniors, cet écart est le produit. Un humain qui lit de longs documents se fatigue et survole. Une grille, non.

Le périmètre reste étroit. C'est l'outil d'une seule entreprise, visant les équipes d'investissement en entreprise, et tout le détail public tient en une annonce et trois chiffres. De quoi prendre ça au sérieux, pas de quoi parler de révolution.

Reste que la tendance mérite le coup d'œil, sapiens. Le rôle de l'expert glisse : il ne fait plus la vérification, il définit ce qu'on vérifie.

Qu'est-ce que tu en fais

  • Pique l'idée de la grille.Découpe « une bonne production » en critères explicites, comme Terminal X l'a fait avec 54, avant de demander à un modèle de juger quoi que ce soit.
  • Demande le protocole.Si un vendeur te sort un taux d'accord, demande par rapport à quoi il a été mesuré et qui étaient les relecteurs.
  • Surveille les désaccords.88,6 % de concordance, ça veut dire que les cas intéressants sont les autres : fais-les relire par un humain.
  • Relis tes mandats.Si tu gères de l'argent, regarde à quel point tes propres règles pourraient se transformer en checklist lisible par une machine.

Ciao, sapiens. La grille compte 54 critères. Ton entretien annuel en a moins, pour l'instant.