Aller au contenu

Harness : 5 réglages tirés d’un agent qui a gagné 14 points

Le harness, c’est tout ce qui entoure une IA : consignes, outils, rappels. LangChain a gardé la même IA pour son agent de code et n’a changé que cet entourage : son score est passé de 52,8 % à 66,5 % sur le banc d’essai Terminal-Bench 2.0 (billet du 17 février 2026). Verdict : info. Le bond est vrai ; mais le « top 5 » date de février, il est annoncé par LangChain, et un site de classement non daté les place aujourd’hui 35e sur 68 avec presque le même score (65,8 %). Voici les cinq réglages, en mots simples, et le cours gratuit (en anglais) pour les construire.

Guides · Accès libre

Ce que vous obtenez

Savoir nommer cinq réglages d’agent, et avoir sous la main le cours gratuit pour les construire soi-même. À savoir : avec une version plus ancienne de cet entourage, sans le même travail d’amélioration, Opus 4.6 a fait 59,6 % ; le gain n’est pas garanti pour toutes les IA.

Comment s’en servir

Prérequis : Aucun pour lire la fiche. Pour suivre le cours : Python de niveau moyen, 4 à 8 heures, textes en anglais ; le faire tourner demande une clé d’un fournisseur d’IA. Le cours est indépendant de LangChain, soutenu par des sponsors, et ce n’est pas le code de Claude Code : c’est un agent de code écrit pour le cours.

  1. Teste avant de dire « fini » : avant de rendre sa copie, l’IA doit faire une vraie vérification. LangChain a vu son agent écrire une solution, relire son code, trouver ça bien, puis s’arrêter. Un rappel automatique avant la sortie corrige cela.
  2. Compare à la consigne, pas à ta copie : lancer les tests, lire toute la sortie, puis comparer à ce qui était demandé. Se comparer à son propre code est la fausse bonne idée.
  3. Regarde l’heure : une IA estime très mal le temps. Un avertissement de temps restant la pousse à arrêter de peaufiner et à vérifier.
  4. Tu tournes en rond ? Change d’idée : après un certain nombre de modifications du même fichier, un message suggère de changer d’approche. Limite reconnue par LangChain : l’IA peut s’obstiner quand même.
  5. Donne le plan de la maison au départ : au démarrage, l’IA reçoit la carte des dossiers et la liste des outils disponibles. Moins de tâtonnements, moins d’erreurs bêtes.