La startup d'intelligence artificielle xAI, dirigée par le milliardaire Elon Musk, poursuit l'expansion de ses projets ambitieux en IA, travaillant actuellement sur ce qu'on appelle les "modèles du monde réel", une nouvelle génération de systèmes d'IA conçus pour comprendre et interagir avec le monde physique, et pas seulement analyser des textes et des images.

Ce projet place la société de Musk en concurrence directe avec des géants technologiques comme Meta et Google, qui cherchent également à développer des systèmes capables d'apprendre du monde réel et de construire de nouveaux mondes qui le simulent. Bien que l'idée ressemble au concept d'intelligence artificielle générale (AGI), le rapport du Financial Times ne mentionne pas explicitement ce terme.

Selon le rapport, xAI a recruté ces derniers mois les meilleurs chercheurs de Nvidia pour soutenir ses efforts dans la construction de ces modèles. Les "modèles du monde réel" reposent sur l'entraînement de l'IA à l'aide de vidéos et de données provenant de robots pour comprendre les dynamiques du réel telles que le mouvement, la physique et la cause à effet — des compétences que les modèles textuels actuels comme ChatGPT ou Grok ne possèdent pas.

Contrairement aux outils d'IA populaires aujourd'hui qui prédisent des mots ou des pixels, les "modèles du monde réel" cherchent à comprendre le comportement des objets dans des environnements tridimensionnels, comme la façon dont une balle rebondit, comment la lumière se reflète, ou comment un robot se déplace dans une pièce encombrée. Ces modèles visent à donner à l'IA une intuition physique plus proche de celle des humains.

Le journal cite deux sources bien informées affirmant que xAI développe actuellement des modèles pouvant être utilisés dans les jeux vidéo, permettant à l'IA de créer des environnements 3D entièrement interactifs et immersifs. Une source a indiqué que la même technologie pourrait être utilisée à l'avenir dans les robots pour leur apprendre à comprendre et concevoir des espaces réels.

Pour accélérer cette orientation, xAI a embauché les anciens chercheurs de Nvidia Zeeshan Patel et Ethan He, spécialistes dans la construction de modèles du monde réel. Nvidia a été parmi les premières entreprises dans ce domaine grâce à sa plateforme Omniverse, qui permet aux développeurs de simuler des mondes numériques très réalistes.

Elon Musk a confirmé via la plateforme X (anciennement Twitter) que sa société prévoit de lancer un "jeu vidéo incroyable produit par l'IA" avant la fin de l'année prochaine. Musk avait évoqué ce projet l'année dernière, et les nouvelles embauches indiquent que le travail sur le jeu est déjà à un stade avancé.

Cette semaine, xAI a également lancé son dernier modèle de génération d'images et de vidéos avec des "mises à jour majeures", le rendant disponible gratuitement aux utilisateurs. L'entreprise cherche actuellement à élargir son équipe spécialisée appelée "Omni Team", chargée de créer des "expériences d'IA magiques au-delà du texte", incluant images, vidéos et sons. Les salaires de cette équipe varient entre 180 000 et 440 000 dollars par an, tandis qu'une offre d'emploi pour un "entraîneur de jeux vidéo" propose un salaire horaire de 45 à 100 dollars pour entraîner le système Grok à la conception de jeux.

Nvidia estime que le marché des modèles du monde réel pourrait valoir autant que l'ensemble de l'économie mondiale, compte tenu de ses applications potentielles dans la robotique, l'automatisation industrielle et les véhicules autonomes.

Cependant, malgré l'enthousiasme, les défis restent énormes ; la formation de ces systèmes nécessite d'énormes quantités de données et une puissance de calcul considérable, ainsi qu'une modélisation précise des lois de la physique et du comportement humain — un domaine que même les laboratoires les plus avancés n'ont pas encore maîtrisé.

D'autre part, les experts de l'industrie du jeu vidéo restent sceptiques quant à la capacité de l'IA à résoudre les problèmes du secteur. Michael Dos, responsable de la publication chez Larian Studios, développeur de Baldur's Gate 3, a déclaré : "L'IA ne résoudra pas le plus grand problème des jeux, qui est le leadership et la vision", ajoutant que l'industrie n'a pas besoin de "boucles de jeu générées mathématiquement ou entraînées psychologiquement", mais de mondes qui expriment la passion humaine et attirent une interaction réelle.

Avec ce projet, Elon Musk mise sur le fait que les "modèles du monde réel" seront l'étape la plus audacieuse pour intégrer l'IA aux mondes réel et numérique. Si cette vision réussit, elle pourrait radicalement changer la manière dont les humains et les machines interagissent avec la réalité ; en cas d'échec, ce sera un nouveau chapitre passionnant dans les expériences scientifiques futures de Musk.