
RegretBench : 86 % de réussite mais aucun retour arrière ?
Les meilleurs agents de code réussissent 86,1 % des tâches de RegretBench, mais ne pensent à sauvegarder l'état du système avant une action critique que dans 15,2 % des cas. Entre laisser le modèle juger du risque ou imposer un hook automatique comme BackUpper dans l'infrastructure, cet épisode décortique le vrai coût économique et technique de la marche arrière. Quand une restauration n'est fidèle qu'à 92,2 %, où faut-il placer le curseur de la réversibilité ?
#modeles #meta-evergreen #regretbench #devops #reversibilite
The skinny
The skinny isn't ready yet — notes appear once the transcript is processed.