Presentando ControlRoom3D di Meta. È uno strumento innovativo che genera diverse e plausibili mesh 3D di stanze che si allineano perfettamente con la disposizione delle stanze definita dall’utente e le descrizioni testuali dello stile della stanza. Visita la pagina del progetto o leggi l’articolo per ulteriori informazioni approfondite.
La nostra principale innovazione consiste nell’utilizzare le informazioni geometriche e semantiche che la rappresentazione 3D ci fornisce quando viene convertita in 2D. Utilizziamo queste informazioni per controllare modelli generativi 2D, consentendo la creazione di texture e geometrie coerenti con la stanza di riferimento.
Abbiamo dato una nuova svolta alla generazione delle scene. Invece di creare singole viste 2D, abbiamo sviluppato una tecnica di generazione di panorami che fornisce una vista a 360°. Questa vista iniziale serve come base e ulteriori punti di vista aiutano a completare le aree mancanti.
Una novità innovativa è la nostra tecnica di allineamento della geometria. Utilizzando le dimensioni spaziali delle bounding box 3D, abbiamo sviluppato una strategia di ottimizzazione iterativa che aiuta una rete di stima della profondità a produrre in modo preciso strutture 3D.
Il nostro nuovo processo offre versatilità, consentendo la creazione di una vasta gamma di tipologie di scene e layout, anche complicate come le cucine.
Questo progetto è il risultato di una collaborazione con un incredibile team di Metamates: Sam Tsai, @LukasHollein, @wu_bichen, Jialiang Wang, Chih-Yao Ma, Kunpeng Li, Xiaofang Wang, @felixwimbauer, Zijian He, Peizhao Zhang, Bastian Leibe, Peter Vajda, @sekunde_.
What's new
How does it work-1
How does it work-2
How does it work-3
kitchens
bathrooms
children's room
overall