NVIDIA et le laboratoire d'intelligence artificielle londonien Ineffable Intelligence ont annoncé une nouvelle collaboration technique visant à développer l'infrastructure nécessaire à l'apprentissage par renforcement à grande échelle. Cette initiative intervient peu après la sortie officielle du public du laboratoire fondé par David Silver, l'architecte célèbre de l'algorithme AlphaGo. L'objectif de ce partenariat est de concevoir des systèmes capables d'apprendre continuellement à partir de l'expérience, une étape que Jensen Huang, PDG de NVIDIA, qualifie de prochaine frontière de l'intelligence artificielle. Selon David Silver, la recherche actuelle a largement résolu la problématique consistant à construire des systèmes capables de mémoriser ce que les humains savent déjà. Le véritable défi de demain réside dans la création d'agents capables de découvrir de nouvelles connaissances par eux-mêmes. Cette approche, connue sous le nom d'apprentissage par renforcement, diffère fondamentalement des méthodes actuelles car elle ne s'appuie pas sur des ensembles de données statiques fournis par l'homme. Au contraire, les agents génèrent leurs propres données en temps réel en agissant, en observant les résultats, en évaluant leurs actions et en mettant à jour leurs modèles dans des boucles rapides et complexes. Ce mode de fonctionnement impose des exigences techniques très spécifiques qui mettent à rude épreuve les infrastructures informatiques traditionnelles. La nécessité de calculer, de stocker et de traiter des flux de données dynamiques exige une bande passante mémoire élevée, des interconnexions ultra-rapides et des capacités de service adaptées, bien au-delà des besoins standards du pré-entraînement. Les systèmes doivent être capables de gérer des formes d'expérience riches et variées qui n'ont rien à voir avec le langage humain, nécessitant potentiellement de nouvelles architectures de modèles et de nouveaux algorithmes d'entraînement. Pour répondre à ces défis, les ingénieurs de NVIDIA et d'Ineffable Intelligence travaillent en étroite collaboration pour créer un pipeline d'entraînement optimisé capable de soutenir ces agents à une échelle inédite. Le développement de cette infrastructure commence sur la plateforme matérielle NVIDIA Grace Blackwell et constituera l'une des premières explorations de la future plateforme NVIDIA Vera Rubin. L'ambition est de valider et de définir les standards des générations futures de matériel et de logiciels, préparant ainsi la transition vers un monde où les modèles d'IA n'auront plus besoin de données humaines pour apprendre, mais pourront découvrir des solutions par la simulation et l'expérience. Une infrastructure robuste et performante est la clé pour débloquer le potentiel de l'apprentissage par renforcement dans des environnements complexes. En optimisant ces outils, les partenaires visent à permettre aux agents d'IA de réaliser des percées significatives dans tous les domaines du savoir, transformant radicalement la manière dont la technologie aborde les problèmes scientifiques et techniques. Cette alliance marque une étape cruciale vers l'avènement d'agents autonomes capables d'évolution continue et de découverte autonome.