Mamma mia, definirei questo progetto l'infrastruttura del Metaverso.
Ricordate nel 2021, quando Facebook ha cambiato nome in Meta e ha annunciato che sarebbe diventata un'azienda del Metaverso?
Sono passati alcuni anni e il Metaverso sembra essere gradualmente scomparso. A dire il vero, pensavo che questo concetto fosse morto.
Fino a poco tempo fa, quando ho visto AlayaWorld.
1. L'infrastruttura mancante del Metaverso
Molte persone intendono il Metaverso come entrare in un mondo 3D con occhiali VR, o semplicemente un guscio di un gioco 3D.
Un edificio ha bisogno di modellazione e texture, un NPC necessita di design dell'aspetto, animazioni e alberi comportamentali, un'esplosione richiede effetti speciali e script, e persino ciò che un giocatore vede dopo aver aperto una porta deve essere predefinito dagli sviluppatori.
Questo processo industriale può produrre un bel gioco, ma è difficile sostenere un vero Metaverso.
Un vero Metaverso non dovrebbe essere solo una mappa fissa più grande, ma un universo parallelo con scala quasi infinita, scene in continuo cambiamento e co-creato da un gran numero di utenti e Agenti.
2. AlayaWorld: lascia che il mondo si generi in tempo reale in base alle azioni degli utenti
AlayaWorld mira a risolvere contemporaneamente quattro problemi fondamentali del Metaverso:
Interazione in tempo reale, memoria spaziale, stabilità a lungo termine e generazione di contenuti aperti.
- Primo: l'interazione in tempo reale.
AlayaWorld supporta il controllo della telecamera a 6 gradi di libertà, consentendo agli utenti di avanzare, indietreggiare e girarsi per esplorare il mondo generato da diverse angolazioni.
Supporta anche la commutazione dinamica dei Prompt durante il processo di generazione.
Ciò significa che gli utenti non sono più limitati a seguire una sceneggiatura scritta dagli sviluppatori; possono modificare direttamente il mondo usando il linguaggio naturale.
- Secondo: la memoria spaziale.
Il problema più grande dei normali modelli video è che non "ricordano la strada".
Se un utente si gira e torna indietro, l'edificio originale potrebbe scomparire, o la strada potrebbe cambiare completamente.
AlayaWorld utilizza una cache 3D per registrare le informazioni spaziali generate, combinate con frame storici compressi, permettendo al modello di ricordare: com'era questo posto e cosa è appena successo.
Questo dà ai contenuti generati dall'IA gli attributi di base di un "mondo", piuttosto che essere solo un video che va avanti.
- Terzo: la stabilità a lungo termine.
Un mondo generativo deve usare costantemente i frame appena generati come input per il round successivo.
Qualsiasi minimo errore si accumulerà, portando infine a distorsioni dei personaggi, deriva di scena o persino il collasso dell'intero mondo.
AlayaWorld utilizza un addestramento sulla cronologia della deriva e un Error Bank per far sì che il modello impari a identificare e correggere in anticipo questi errori cumulativi, migliorando la coerenza della generazione a lungo termine.
- Infine, l'operatività in tempo reale.
Se un utente fa un passo avanti e l'IA deve aspettare decine di secondi per generare un frame, non è un Metaverso; è solo uno strumento di generazione video.
AlayaWorld utilizza la distillazione del modello e la generazione di blocchi video in streaming per aumentare la velocità di generazione del mondo a 720p a 24 FPS.
In altre parole, si sta avvicinando a uno stato in cui "il mondo si genera mentre l'utente opera".
Ecco perché credo che AlayaWorld sia adatto come infrastruttura sottostante per il Metaverso.
Non sta risolvendo "come far entrare le persone nel Metaverso", ma una domanda più fondamentale: come dovrebbe essere creato, ricordato e sostenuto il mondo all'interno del Metaverso.
3. La favola del Metaverso: quando umani e Agenti co-creano una civiltà digitale
Il futuro veramente entusiasmante di AlayaWorld non è solo aiutare gli utenti a generare una città, ma permettere a utenti e Agenti IA di vivere insieme in una città che si evolve continuamente.
Immagina un giorno di entrare in un mondo senza una sceneggiatura fissa.
La taverna sulla strada è gestita da un Agente che si ricorda che la volta scorsa dovevi dei soldi e adatta gli affari in base a guerre, prezzi e flusso di persone; il tuo Agente personale continua a gestire asset, partecipare a riunioni e gestire collaborazioni dopo che vai offline.
Nel frattempo, ci sono altri umani qui.
Esci dalla taverna e scopri che l'intera città sta tenendo un voto.
Gli elettori includono sia utenti umani che Agenti.
Un gruppo di umani e Agenti sostiene l'espansione dei confini della città per permettere al modello del mondo di continuare a generare nuove isole; un altro gruppo vuole limitare l'espansione e usare la potenza di calcolo per riparare il vecchio distretto.
Terranno discorsi, faranno campagna per i voti e persino organizzeranno altri umani e Agenti per fare lobbying.
E il risultato finale cambierà davvero la forma futura della città.
Se gli espansionisti vincono, quando ti svegli il giorno dopo, potrebbe essere già stato generato un nuovo continente fuori dalla città.
I giocatori umani e gli Agenti di costruzione iniziano a costruire porti lì, gli Agenti di esplorazione entrano in aree sconosciute per mapparle, gli Agenti commerciali stabiliscono rapidamente mercati e gli Agenti di sicurezza analizzano costantemente i potenziali rischi nella nuova area.
Pochi mesi dopo, questo continente che non esisteva potrebbe aver sviluppato nuovi paesi, professioni, rotte commerciali e sistemi politici a causa di un unico Prompt.
Gli Agenti qui non sono più solo strumenti al servizio degli umani.
Potrebbero essere commercianti, giornalisti, architetti, mercenari, artisti, ricercatori o persino amministratori della città.
E modelli del mondo come AlayaWorld sono responsabili di trasformare l'immaginazione degli utenti, le azioni degli Agenti e le decisioni collettive della comunità in nuovi spazi, eventi e storia in tempo reale.
Questa è la parte veramente affascinante del Metaverso:
Non è una mappa predefinita, ma una civiltà digitale in cui umani e Agenti vivono insieme, governano insieme e crescono insieme.
Pensavamo che il Metaverso fosse morto.
Ora sembra che stesse solo aspettando che due tecnologie chiave maturassero:
Una sono gli Agenti IA capaci di azione autonoma e memoria a lungo termine;
L'altra è un modello del mondo in grado di ospitare questi Agenti e umani che vivono insieme.
Quando queste due tecnologie si combineranno davvero, il Metaverso potrà trasformarsi da concetto di marketing in un secondo mondo in esecuzione continua.
E la tecnologia rappresentata da AlayaWorld potrebbe essere una delle infrastrutture che portano a quel mondo.
4. Demo ufficiali
- Evocare magia oscura per distruggere edifici con un solo Prompt
- Lanciare una magia di palla di fuoco
- Esplorare e vagare nel mondo del Metaverso
Se vuoi abbracciare il futuro del Metaverso, segui questo progetto!
- Account X ufficiale: https://x.com/alayastd
- Repository GitHub: https://github.com/AlayaLab/AlayaWorld
- Homepage del progetto: https://alaya-lab.github.io/AlayaWorld/
- Sito ufficiale di Alaya Lab: https://alaya-lab.github.io/
