Incroyable, j’appellerais ce projet l’infrastructure du Metaverse.
Vous souvenez-vous de 2021, quand Facebook a changé de nom pour Meta et a annoncé qu’il deviendrait une entreprise du Metaverse ?
Quelques années ont passé, et le Metaverse semble avoir peu à peu disparu. Pour être honnête, j’ai cru un moment que ce concept était mort.
Jusqu’à récemment, quand j’ai découvert AlayaWorld.
1. L’infrastructure manquante du Metaverse
Beaucoup de gens imaginent le Metaverse comme un monde 3D qu’on explore avec des lunettes VR, ou simplement une coquille de jeu 3D.
Un bâtiment a besoin de modélisation et de textures, un PNJ nécessite design d’apparence, animations et arbres de comportement, une explosion demande effets spéciaux et scripts, et même ce qu’un joueur voit en poussant une porte doit être prédéfini par les développeurs.
Ce processus industriel peut produire un beau jeu, mais il a du mal à soutenir un véritable Metaverse.
Un véritable Metaverse ne devrait pas être une simple carte fixe plus grande, mais un univers parallèle à l’échelle quasi infinie, aux scènes en constante évolution, co-créé par un grand nombre d’utilisateurs et d’Agents.
2. AlayaWorld : laisser le monde se générer en temps réel selon les actions des utilisateurs
AlayaWorld vise à résoudre simultanément quatre problèmes fondamentaux du Metaverse :
Interaction en temps réel, mémoire spatiale, stabilité à long terme et génération de contenu ouverte.
- D’abord, l’interaction en temps réel.
AlayaWorld prend en charge le contrôle caméra 6DoF, permettant aux utilisateurs d’avancer, reculer et tourner pour explorer le monde généré sous différents angles.
Il permet aussi de changer dynamiquement les prompts pendant la génération.
Cela signifie que les utilisateurs ne sont plus contraints de suivre un scénario écrit par les développeurs ; ils peuvent modifier le monde directement avec le langage naturel.
- Ensuite, la mémoire spatiale.
Le plus gros problème des modèles vidéo classiques est qu’ils ne « se souviennent pas du chemin ».
Si un utilisateur fait demi-tour et revient, le bâtiment d’origine peut disparaître, ou la route peut changer complètement.
AlayaWorld utilise un cache 3D pour enregistrer les informations spatiales générées, combiné à des trames historiques compressées, permettant au modèle de se souvenir : à quoi ressemblait cet endroit et ce qui vient de se passer.
Cela donne au contenu généré par IA les attributs de base d’un « monde », plutôt que d’une simple vidéo qui avance.
- Troisièmement, la stabilité à long terme.
Un monde génératif doit constamment utiliser ses propres trames fraîchement générées comme entrée pour le tour suivant.
La moindre erreur s’accumule, menant à la distorsion des personnages, à la dérive des scènes, voire à l’effondrement du monde entier.
AlayaWorld utilise un entraînement sur historique avec dérive et une banque d’erreurs pour apprendre au modèle à identifier et corriger ces erreurs cumulées à l’avance, améliorant ainsi la cohérence de la génération à long terme.
- Enfin, l’opération en temps réel.
Si un utilisateur fait un pas en avant et que l’IA doit attendre des dizaines de secondes pour générer une trame, ce n’est pas un Metaverse, c’est juste un outil de génération vidéo.
AlayaWorld utilise la distillation de modèle et la génération par blocs vidéo en streaming pour booster la vitesse de génération du monde à 720p à 24 FPS.
En d’autres termes, on approche d’un état où « le monde se génère au fur et à mesure que l’utilisateur opère ».
C’est pourquoi je crois qu’AlayaWorld est adapté comme infrastructure sous-jacente du Metaverse.
Il ne résout pas « comment faire entrer les gens dans le Metaverse », mais une question plus fondamentale : comment le monde à l’intérieur du Metaverse doit-il être créé, mémorisé et soutenu.
3. Le conte de fées du Metaverse : quand humains et Agents co-créent une civilisation numérique
L’avenir vraiment excitant d’AlayaWorld n’est pas seulement d’aider les utilisateurs à générer une ville, mais de laisser les utilisateurs et les agents IA vivre ensemble dans une ville qui évolue continuellement.
Imaginez un jour entrer dans un monde sans scénario fixe.
La taverne de la rue est tenue par un agent qui se souvient que vous lui devez de l’argent depuis la dernière fois et ajuste son commerce en fonction des guerres, des prix et du trafic ; votre agent personnel continue de gérer vos actifs, assister à des réunions et gérer des collaborations après votre déconnexion.
Pendant ce temps, il y a d’autres humains ici.
Vous sortez de la taverne et découvrez que toute la ville organise un vote.
Les votants incluent à la fois des utilisateurs humains et des agents.
Un groupe d’humains et d’agents prône l’expansion des frontières de la ville pour laisser le modèle du monde continuer à générer de nouvelles îles ; un autre groupe veut limiter l’expansion et utiliser la puissance de calcul pour réparer le vieux quartier.
Ils feront des discours, feront campagne pour les votes, et même organiseront d’autres humains et agents pour faire du lobbying.
Et le résultat final changera véritablement la forme future de la ville.
Si les expansionnistes gagnent, quand vous vous réveillerez le lendemain, un nouveau continent pourrait déjà avoir été généré en dehors de la ville.
Les joueurs humains et les agents de construction commencent à y construire des ports, les agents d’exploration entrent dans des zones inconnues pour les cartographier, les agents commerciaux établissent rapidement des marchés, et les agents de sécurité analysent constamment les risques potentiels dans la nouvelle zone.
Quelques mois plus tard, ce continent qui n’existait pas pourrait avoir développé de nouveaux pays, professions, routes commerciales et systèmes politiques à cause d’un seul prompt.
Les agents ici ne sont plus de simples outils au service des humains.
Ils peuvent être marchands, journalistes, architectes, mercenaires, artistes, chercheurs, ou même gestionnaires de ville.
Et les modèles de monde comme AlayaWorld sont chargés de transformer en temps réel l’imagination des utilisateurs, les actions des agents et les décisions collectives de la communauté en nouveaux espaces, événements et histoires.
C’est la partie vraiment fascinante du Metaverse :
Ce n’est pas une carte préfabriquée, mais une civilisation numérique où humains et agents vivent ensemble, gouvernent ensemble et grandissent ensemble.
Nous pensions que le Metaverse était mort.
Il semble maintenant qu’il attendait juste que deux technologies clés mûrissent :
L’une est les agents IA capables d’action autonome et de mémoire à long terme ;
L’autre est un modèle de monde capable d’héberger ces agents et les humains vivant ensemble.
Quand ces deux-là se combinent vraiment, le Metaverse peut passer d’un concept marketing à un second monde qui tourne en continu.
Et la technologie représentée par AlayaWorld pourrait être l’une des infrastructures menant à ce monde.
4. Démonstrations officielles
- Invoquer de la magie noire pour détruire des bâtiments avec un seul prompt
- Lancer une boule de feu magique
- Se promener et explorer dans le monde du Metaverse
Si vous voulez embrasser l’avenir du Metaverse, suivez ce projet !
- Compte X officiel : https://x.com/alayastd
- Dépôt GitHub : https://github.com/AlayaLab/AlayaWorld
- Page d’accueil du projet : https://alaya-lab.github.io/AlayaWorld/
- Site officiel d’Alaya Lab : https://alaya-lab.github.io/
