Les AI Overview de Google font juste 10% d’erreurs, tranquille

La réalité, c’est que l’AI Overview de Google se plante une fois sur dix. Neuf fois sur dix, ça te sort une réponse correcte. Mais le diable est dans les détails, et surtout dans les chiffres qui suivent.

D’un point de vue technique, c’est pas dégueu
The New York Times et une startup nommée Oumi ont épluché les performances de l’AI Overview, cette fonction qui te résume les résultats de recherche avec Gemini. Bref, 90% de précision. Pour un modèle IA, c’est pas dégueu. Surtout quand tu vois que Gemini est passé de 85% en octobre dernier à 91% en février. Progrès, quand tu nous tiens.

Mais voilà, Google c’est pas ton pote qui cherche trois fois par jour
On parle de plus de 5 000 milliards de recherches par an. Fais le calcul : 10% d’erreur sur ce volume, ça donne des millions de réponses foireuses par heure. Presque un million de conneries par minute. Un million. Par minute. C’est le bordel.

Et le disclaimer « Les réponses IA peuvent contenir des erreurs » prend soudainement tout son sens. C’est comme mettre « Peut contenir des noix » sur un paquet de cacahuètes. Techniquement vrai, mais ça t’évite pas la crise d’allergie.

Le benchmarketing en action
Google, toujours aussi fort pour jouer avec les chiffres. « Neuf fois sur dix » ça sonne bien, ça rassure. Mais ils oublient de te rappeler que leurs erreurs, à l’échelle, c’est une usine à fake news qui tourne à plein régime. C’est du benchmarketing pur et simple : tu mets en avant le 90% de réussite, et tu glisses sous le tapis les conséquences des 10% qui restent.

Et après ?
La question, c’est pas si Google va améliorer son taux de précision. C’est évident qu’ils vont bosser dessus. Le vrai problème, c’est comment ils gèrent les dégâts collatéraux. À un million d’erreurs par minute, tu peux pas te contenter d’un petit disclaimer en bas de page. Faut des garde-fous, des correctifs en temps réel, et surtout, une transparence de malade sur ce qui foire.

Pour l’instant, on est dans le classique « on avance vite, on répare après ». Sauf qu’à cette vitesse, les réparations risquent de ressembler à colmater une fuite dans un Titanic en pleine course.

Alors la prochaine fois que Google te sort une réponse toute faite, garde un œil critique. Parce que même avec 90% de réussite, les 10% qui restent, c’est toi qui les bouffes.


Sources :

Categories

Comments are closed

Latest Comments

Aucun commentaire à afficher.