Glossaire · AGI et alignement
ARC Prize
ARC Prize est une initiative de recherche et de concours qui encourage les progrès ouverts sur les problèmes de généralisation en IA. Elle s’appuie notamment sur la série ARC-AGI pour évaluer des méthodes, partager des résultats et récompenser certaines contributions selon les règles de chaque édition.
ARC Prize : l'explication
Un concours définit les tâches, les moyens autorisés et les conditions d’évaluation. Les équipes proposent des systèmes de résolution, puis leurs résultats sont examinés selon ce cadre. Une méthode peut associer modèles, programmes et recherche de solutions. Le classement renseigne sur la performance dans ces conditions précises. Pour comprendre un résultat, il faut distinguer la méthode soumise, le modèle éventuellement utilisé et les ressources mobilisées pendant la résolution des tâches de l’édition concernée.
ARC Prize associe des benchmarks et des incitations au partage de travaux. Son objectif déclaré est de soutenir une recherche ouverte sur des capacités plus générales. Les modalités concrètes dépendent de l’édition et de la catégorie, notamment pour la publication des méthodes et leur reproductibilité. La page officielle présente cette articulation entre recherche, évaluation et récompenses : [présentation d’ARC Prize](https://arcprize.org/). Un concours reste un cadre particulier, avec ses choix méthodologiques et ses objectifs propres.
ARC Prize et ARC-AGI ne sont pas synonymes. Le premier désigne l’initiative et ses compétitions ; le second désigne la série de tests utilisée dans cet écosystème. Une récompense reconnaît une contribution selon un règlement. Elle ne certifie pas qu’un système possède une intelligence générale ni qu’il convient à tous les usages. Les règles, les pistes de compétition et les critères peuvent évoluer. Une comparaison doit donc préciser l’édition et la catégorie considérées.
Un exemple concret
Vous lisez qu’une équipe a été récompensée dans un concours ARC Prize. Vous recherchez la catégorie, la méthode et les conditions d’évaluation avant d’interpréter cette distinction. Si vous souhaitez réutiliser ses travaux, vous examinez aussi le code disponible, la licence et les ressources nécessaires. La récompense attire votre attention sur une contribution, mais votre décision dépend de ce que vous pouvez réellement reproduire ou utiliser.
Pourquoi c'est important
ARC Prize influence les travaux visibles et les méthodes que des équipes choisissent d’explorer. Pour un lecteur, l’enjeu est de comprendre ce qu’une distinction démontre réellement. Regardez le règlement, les résultats reproductibles et les limites annoncées. Pour choisir un agent, complétez ces informations par des essais adaptés à votre besoin. Un succès en compétition ne remplace pas une évaluation de qualité, de coût et de sécurité.
Idées reçues
- Gagner une récompense ARC Prize ne signifie pas automatiquement avoir créé une AGI, puisque les prix reconnaissent des performances ou des contributions selon des catégories et des règles qui ne couvrent pas toutes les capacités d’un système.
- ARC Prize n’est pas simplement un autre nom pour ARC-AGI, car l’initiative organise et encourage des travaux tandis que les benchmarks définissent des tâches d’évaluation, avec des versions et des conditions qu’il faut identifier séparément.
Autres termes : agi et alignement
- AGI (intelligence artificielle générale)
- L’AGI, ou intelligence artificielle générale, désigne l’idée d’une IA capable d’apprendre et d’accomplir un large éventail de tâches intellectuelles, au-delà d’un domaine étroit.
- ARC-AGI
- ARC-AGI est une série de tests conçus pour étudier la capacité des IA à résoudre des problèmes nouveaux à partir de peu d’exemples ou d’interactions.
- généralisation
- La généralisation est la capacité d’un système IA à utiliser ce qu’il a appris pour traiter des cas nouveaux.
- intelligence fluide
- L’intelligence fluide est la capacité à raisonner face à un problème nouveau, sans dépendre principalement de connaissances déjà apprises.
Où le site en parle
Le terme apparaît dans 19 pages du site. Quelques-unes :
- L'ARC Prize : la compétition, ses règles, ses éditions, ses résultats et ce qu'ils ont appris Guide
- « How We Get To AGI » : la conférence de François Chollet, chapitre par chapitre Guide
- ARC-AGI : le test, ses versions et les scores publiés Guide
- L'adaptation au moment du test : principe et résultats Guide
- La généralisation, cœur de l'intelligence selon François Chollet : définitions, exemples, mesure Guide
- Mesurer les progrès vers l’AGI : benchmarks, leurs limites, saturation et contamination Guide
- Histoire de l'idée d'AGI : de Turing aux laboratoires actuels Guide
- Les limites de l'apprentissage profond : ce que les modèles font mal, analyse de François Chollet et d'autres chercheurs Guide
Pour aller plus loin
Questions fréquentes
Est-ce un modèle de langage ?
Non. ARC Prize désigne une initiative et des compétitions, pas un modèle à utiliser dans une conversation. Les participants peuvent employer différentes méthodes, dont certaines reposent sur des modèles de langage associés à du code ou à une recherche.
Les travaux sont-ils réutilisables ?
Cela dépend des publications disponibles, de leur licence et des conditions de l’édition. Vérifiez le code, les dépendances et les ressources nécessaires. Un travail publié peut rester difficile à reproduire dans votre propre environnement sans adaptations importantes.
Comment lire une annonce de résultat ?
Identifiez l’édition, la catégorie, le benchmark et les conditions de calcul. Distinguez une distinction officielle d’un résultat déclaré par une équipe. Examinez ensuite les preuves disponibles et ce que le résultat ne permet pas de conclure.
Neutralité. Aucun lien d'affiliation. Aucun éditeur ne paie pour être évalué, noté ou classé. Les évaluations sont dirigées par François Chollet, neutres et factuelles, et chaque donnée est datée et sourcée. Comment nous notons