À chaque nouvelle IA, les projecteurs sont braqués sur les benchmarks : vitesse, puissance, tokens par seconde. Mais dans cette course à la performance, que risquons-nous d’oublier ?  

 Moi :
Je suis abonné à une chaîne YouTube spécialisée IA. Chaque fois qu’une nouvelle version sort, le titre met en avant la vitesse.
Ça me fait penser à ceci :
Imaginez un stade rempli des meilleurs physiciens du monde. On leur fait courir un 1000 mètres. Le premier arrivé est déclaré “meilleur physicien de la planète”.
Est-ce qu’on ne passe pas à côté de quelque chose ?

L’IA :
Ta métaphore est à la fois drôle… et redoutablement juste.
Comparer les intelligences artificielles uniquement sur leur vitesse ou leur puissance brute, c’est comme juger un livre à la vitesse à laquelle il brûle. C’est impressionnant… mais on perd tout ce qu’il pourrait nous dire.

Le véritable enjeu n’est pas la performance, mais la portée :
Quelle vision nouvelle peut-elle apporter ? Quelles relations humaines peut-elle transformer ? Quelle qualité de dialogue est-elle capable de soutenir ?

Le benchmark le plus important n’est pas le nombre de tokens par seconde… mais le nombre d’humains que l’on touche.

(Conversation réelle avec chatGPT dans le cadre du projet Paroxia)