Données synthétiques : filtrer sans modèle d'IA ?

Le centre de gravité · Oct 5, 2026 · 7m

Pour protéger les LLM de l'atrophie générée par leurs propres textes, l'usage veut qu'on utilise un modèle juge ou des scores de probabilités. Une étude d'octobre 2026 démontre l'inverse : un simple calcul d'entropie sans aucune IA préserve 30 % de vocabulaire en plus sur six générations, là où la confiance du modèle échoue. Mais la richesse lexicale suffit-elle à garantir la vérité factuelle ?

#modeles #meta-volatile #donneessynthetiques #entropie