Richard Sutton lance Oak Lab pour des IA qui apprennent en continu

Résumé

Lauréat du Turing Award 2024, Richard Sutton crée à Toronto la startup Oak Lab pour développer des agents d’IA apprenant en continu par renforcement.

Les faits

Lauréat du Turing Award 2024 et cofondateur de l’apprentissage par renforcement moderne, Richard Sutton a lancé à Toronto une nouvelle startup baptisée Oak Lab, aux côtés de Khurram Javed. Tous deux ont précédemment travaillé dans l’entreprise d’IA Keen Technologies fondée par John Carmack. Dans sa présentation du projet, Sutton qualifie les méthodes actuelles de deep learning de « faibles et inefficaces » et estime qu’elles « n’ont pas besoin de nouveaux petits ajustements, mais d’idées fondamentalement nouvelles et d’une refonte en profondeur avant de pouvoir servir de base solide pour atteindre les objectifs les plus ambitieux de l’IA ». Son ambition est de développer des agents d’IA qui apprennent de manière continue à partir de leur environnement, construisent des modèles internes du monde et gèrent eux-mêmes la variation, l’évaluation et la sélection. Oak Lab est structuré autour de cette vision, en misant sur l’apprentissage par renforcement et sur la conviction que l’IA doit apprendre à partir de l’expérience en phase de fonctionnement plutôt que d’être entraînée une fois pour toutes sur des jeux de données statiques. Richard Sutton fixe un cap de long terme : mettre au point un agent doté « d’un billion de paramètres qui apprend et planifie en temps réel avec 20 watts d’énergie ». Cette cible illustre la volonté de concilier puissance de calcul, capacité d’adaptation en ligne et sobriété énergétique dans une architecture d’agent unique.

Pourquoi c’est important

La création d’Oak Lab par Richard Sutton s’inscrit dans un débat croissant sur les limites des approches dominantes du deep learning. En jugeant ces méthodes « faibles et inefficaces » et en appelant à des « idées fondamentalement nouvelles », Sutton pousse le secteur à remettre en cause les modèles d’IA entraînés une fois sur des données statiques, au profit de systèmes qui apprennent en continu de leur environnement. En mettant l’accent sur des agents capables de construire des modèles internes du monde, de gérer la variation, l’évaluation et la sélection, tout en visant un agent « d’un billion de paramètres » opérant en temps réel avec seulement « 20 watts », Oak Lab se positionne sur la frontière entre recherche de rupture, efficacité énergétique et nouvelles architectures d’IA. Ce projet pourrait influencer la prochaine génération d’agents autonomes, plus adaptatifs et frugaux, fondés sur l’apprentissage par renforcement et l’expérience en situation réelle.

Questions fréquentes

Qui est à l’origine d’Oak Lab ?

Oak Lab a été fondée à Toronto par Richard Sutton, lauréat du Turing Award 2024, avec Khurram Javed.

Que pense Richard Sutton du deep learning actuel ?

Il juge les méthodes actuelles de deep learning « faibles et inefficaces » et appelle à des idées fondamentalement nouvelles.

Quel est l’objectif principal d’Oak Lab ?

Développer des agents d’IA qui apprennent en continu de leur environnement et construisent des modèles internes du monde.

Sur quelle approche Oak Lab mise-t-elle ?

Oak Lab mise sur l’apprentissage par renforcement et l’idée que l’IA doit apprendre à partir de l’expérience en fonctionnement.

Quel est le but à long terme annoncé par Sutton ?

Créer un agent avec « un billion de paramètres » qui apprend et planifie en temps réel avec une consommation de 20 watts.

Source

Auteur

Rédaction spécialisée dans la veille et l'analyse de l'actualité de l'intelligence artificielle, des puces IA, des robots, des agents IA et de la recherche.