Informatique & IA · l'expérience
Démasque le faux hasard
Un modèle de langage, une consigne : « donne-moi un nombre au hasard ». Quatre questions, du débutant à l'expert, sur les habitudes que le réglage par instructions installe.
1 · Compare la base et la version réglée
Débutant
Qu'a fait le réglage par instructions à la répartition des nombres choisis ?
2 · Calcule la probabilité mal placée
La distance de variation totale vaut TV = ½ Σ |P(n) − 1/N| : la part de probabilité mal placée par rapport à un tirage équitable entre 1 et N.
Entre 1 et 5, imagine un modèle qui répond 3 à coup sûr.
Intermédiaire
Quelle est sa distance de variation totale ?
3 · Prévois qui ne sera jamais tiré
Un enseignant demande à un modèle réglé par instructions un nombre entre 1 et 30 pour désigner un élève au hasard, chaque élève portant un numéro.
Expert
Quels numéros sortiraient très rarement ?
4 · Trouve où vit le biais
Couper les réponses improbables avant de tirer (la troncature « nucleus ») est un réglage de décodage courant. Ici, il n'ajoute qu'une médiane de 0,035 à la distance d'un tirage équitable.
Expert
Qu'en conclut l'auteur ?
Faux hasard démasqué
—