IA : mon premier article dans Nature
Par Stéphane Durand
Mon premier article dans la prestigieuse revue Nature, comme participant à la réalisation de l’un des “benchmarks” les plus difficiles pour tester les limites des futures IA, un test appelé Humanity’s Last Exam. D’accord, il y a 1000 auteurs, mais provenant de plusieurs domaines et avec seulement 9% de physiciens. En fait, chaque contributeur a produit une partie de l’examen en soumettant une ou plusieurs questions.
Dans le concours initial, toutes disciplines confondues (math, informatique, sciences naturelles, sciences humaines, ingénierie, linguistique, musicologie, etc), il y a eu 70 000 tentatives de questions, 13 000 ont franchi la première étape, 3000 questions ont été retenues, et 550 ont gagné un prix. Ma question est arrivée en position 51, elle concernait les fondements de la théorie de la relativité d’Einstein.
PS :
Les questions doivent rester secrètes pour ne pas contaminer les données d’entraînement des IA. Le but est que les IA découvrent les réponses par “raisonnement” et non pas par un copier-coller de réponses qui se trouveraient déjà sur le Web.