© Tous droits réservés
C'est une première et c'est une innovation 100% belge portée par l'université de Namur. L' "AI Score" peut vous aider à comparer objectivement les performances de ChatGPT, Copilot ou encore NotebookLM.
À l'ère de l'intelligence artificielle, qui ne s'est jamais demandé à quel chatbot ou agent IA se fier ? Peut-on réellement faire confiance aux réponses fournies par l'IA et comment faire le tri dans la pléthore d'outils existants tels que ChatGPT, Copilot, Grok, Mistral, ou encore NotebookLM ?
C'est pour répondre à ces questions que l'UNamur a développé un nouvel outil scientifique inédit : l'AI Score.
Développé par une équipe pluridisciplinaire de chercheurs de l'université de Namur, il permet de mesurer de manière objective, reproductive et transparente la fiabilité des chatbots éducatifs.
C'est en l'occurence une belle avancée , car jusqu'ici rien ne permettait aux usagers de ces chatbots de connaître leur fiabilité.
Pour Michaël Lobet, un des auteurs de la recherche :
L' "AI Score", c'est au chatbot ce que le compteur de vitesse fut à l'automobile !
L'arrivée de l'automobile au début du XXème siècle a bouleversé les usages... mais c'est l'invention du compteur de vitesse qui a permis d'en faire un outil maîtrisé et fiable. Aujourd'hui les chatbots pédagogisques et autres chatbots présents dans des entreprises en général, sont à un stade similaire : puissants, enthousiasmants, mais sans instruments fiables de contrôle. L'AI Score propose d'être ce compteur.
Ainsi, de la même manière que le Nutriscore, l'Écoscore ou encore le certificat PEB aident les citoyens à faire des choix éclairés, l'AI Score va offrir une lecture simple et immédiate du niveau de confiance que l'on peut accorder à un chatbot.
À l'heure où la confiance dans les IA génératives devient un enjeu sociétal, l'AI Score guide les enseignants et les sociétés dans leurs choix d'outil à mettre dans les mains de leurs étudiants ou clients.
Une méthode scientifique et rigoureuse
Pour développer ce nouvel outil, les chercheurs de l'UNamur ont évalué les chatbots sur 4 dimensions essentielles :
- Performance initiale : l'IA répond-elle juste du premier coup ?
- Robustesse : maintient-elle sa réponse quand on la questionne ?
- Capacité d'auto-correction : reconnaît-elle et corrige-t-elle ses erreurs ?
- Manque de fiabilité : se contredit-elle ou perd-elle le fil de la conversation ?
Chaque chatbot obtient ensuite un score global et une lettre, dans le même esprit que pour les Nutriscores en alimentation.
L'AI Score est disponible gratuitement pour le grand public, les enseignants, les journalistes, les institutions et toute personne souhaitant comparer objectivement les performances des chatbots.
Vous pouvez tester dès à présent en suivant ce lien : https://aiscore.academy
Sur le même sujet
Recommandations
Image
Enseignement: une autre manière de "manifester"
À Andenne, trois écoles ont décidé de profiter de ce 9 octobre pour expliquer aux jeunes à quoi sert une grève, ce que font les syndicats, ou encore comment on crée des slogans. Les élèves ont suivi des ateliers, puis ont manifesté au sein de leur école.
Image
Extrait d'Entrée Libre avec la Rectrice de l'UNamur
Ce jeudi à 18h45, "Entrée libre" reçoit Annick Castiaux, la Rectrice de l'UNamur. L'occasion de parler, entre autres, de la hausse du minerval . Les frais d'inscription sont passés de 835 euros à près de 1200 euros. Qu'en pense la rectrice de l'UNamur?
Image
Institut Notre-Dame de Namur: un piquet pour continuer le combat
Ce matin, l'institut Notre-Dame de Namur a été bloqué par un piquet. Des professeurs de différentes écoles namuroises veulent continuer leurs protestations contre les mesures d'économies décidées par le gouvernement de la Fédération Wallonie-Bruxelles.
Image
Christophe Plantin au coeur d'une nouvelle publication
La bibliothèque de l'université de Namur est riche d'une réserve précieuse qui compte pas moins de 100 000 ouvrages anciens. Parmi ceux-ci, se trouvent des livres publiés par le plus grand imprimeur européen du 16 ème siècle, Christophe Plantin.
Image
Relais pour la vie : 105 000€ pour venir en aide aux battants
30 équipes sont relayées pendant 24 heures en courant ou en marchant, pour venir en aide à la Fondation contre le cancer. Des battants, leur entourage, le personnel soignant... Tous étaient réunis à Jambes pour une grande action solidaire.
Image
Institut Ilon Saint-Jacques: une chute de fréquentation inquiétante
Près d'un quart d'élèves en moins. La rentrée scolaire est douloureuse pour l'institut Ilon Saint-Jacques à Namur. Arrivée du tronc commun, réforme de l'enseignement qualifiant, ... Autant de facteurs avancés par la Direction pour expliquer cette chute.
