Vedere un mondo in un contesto vivo: generazione unificata di un mondo urbano, tra interni ed esterni

Abstract degli autori

La generazione 3D guidata dal testo ha compiuto rapidi progressi nella creazione di ambienti esterni su larga scala e di scene d’interni dettagliate, ma questi due ambiti vengono di solito generati separatamente, senza la corrispondenza necessaria a creare un mondo urbano coerente. Presentiamo HoloWorld, un framework unificato per la generazione di mondi urbani, tra interni ed esterni, basato su un contesto del mondo a più scale e continuamente aggiornato. A partire da una descrizione fornita dall’utente, HoloWorld rappresenta e aggiorna progressivamente informazioni diverse sul mondo, dalla pianificazione su scala urbana ai singoli edifici, consentendo agli interni generati di mantenere una corrispondenza esplicita con gli esterni degli edifici a cui appartengono. Sulla base del contesto in evoluzione e degli isolati adiacenti già generati, HoloWorld genera autoregressivamente ambienti urbani esterni con un’organizzazione spaziale e un’identità visiva coerenti da un isolato all’altro. Le rappresentazioni degli esterni generate vengono inoltre ancorate a istanze 3D degli edifici e alle loro impronte a terra, rendendo possibile la generazione di interni specifici per ciascun edificio, con disposizioni vincolate dalla geometria e caratteristiche estetiche ereditate. Per quanto ne sappiamo, HoloWorld è il primo framework a unificare la generazione di interni ed esterni in un mondo urbano 3D coerente. Esperimenti approfonditi dimostrano che HoloWorld ottiene risultati superiori nella generazione di ambienti urbani esterni, migliorando del 7,68\% il punteggio AQS medio rispetto alla SOTA e ottenendo il punteggio RDR medio più alto, pur mantenendo una forte corrispondenza tra interni ed esterni a livello di edificio e la continuità tra isolati all’interno di un mondo urbano 3D unificato. La pagina del nostro progetto: https://huangxb326.github.io/HoloWorld/.