Les IA plus intelligentes que l'homme

 
❓ Les IA plus intelligentes que l'homme ?

ça dépend...sur les questions à la con oui, mais après ça se mesure ! 📏


✅ C'est ce que propose de faire GAIA:
un benchmark pour les AI généralistes:

▶ GAIA propose des questions du monde réel qui nécessitent un ensemble de capacités fondamentales telles que le raisonnement, la gestion multimodale, la navigation sur le Web et, de manière générale, la maîtrise de l'utilisation d'outils.

➡ Les questions GAIA sont conceptuellement simples pour les humains mais difficiles pour les IA les plus avancées :

➡ Dans un récent article de recherche Grégoire Mialon , Clémentine Fourrier , Craig Swift , Thomas Wolf , Yann LeCun , Thomas Scialom, PhD
nous montrent que les répondants humains obtiennent 92 % contre 15 % pour GPT-4 équipé de plugins.
Cette disparité notable en matière de performances contraste avec la tendance récente des LLM à surpasser les humains sur des tâches nécessitant des compétences professionnelles, par ex. droit ou chimie
🔗 Article https://arxiv.org/pdf/2311.12983

hashtag