Vorstellung von ControlRoom3D von Meta. Es handelt sich um ein innovatives Tool, das vielfältige und plausible 3D-Raummeshes generiert, die perfekt mit benutzerdefinierten Raumlayouts und textuellen Beschreibungen des Raumstils übereinstimmen. Besuchen Sie die Projektseite oder lesen Sie das Paper für detailliertere Informationen.
Unser bedeutender Durchbruch besteht darin, die geometrischen und semantischen Informationen zu nutzen, die uns die 3D-Repräsentation liefert, wenn sie in 2D umgewandelt wird. Wir nutzen dies, um 2D-generative Modelle zu steuern, die die Erzeugung von zusammenhängender 3D-Textur und Geometrie ermöglichen, die mit dem Proxy-Raum übereinstimmt.
Wir haben einen neuen Ansatz für die Szenenerzeugung entwickelt. Anstatt einzelne 2D-Ansichten zu erstellen, haben wir eine Panorama-Generierungstechnik entwickelt, die eine 360°-Ansicht bietet. Diese anfängliche Ansicht dient als Basis, und zusätzliche Ansichten helfen dabei, fehlende Bereiche auszufüllen.
Eine innovative Ergänzung ist unsere Technik zur Geometrieausrichtung. Durch die Verwendung der räumlichen Dimensionen von 3D-Begrenzungskästen haben wir eine iterative Optimierungsstrategie entwickelt, die einem Tiefenschätzungssystem hilft, sauber strukturierte 3D-Strukturen zu erzeugen.
Unser neuer Ansatz bietet Vielseitigkeit und ermöglicht die Erstellung einer Vielzahl von Szenentypen und Layouts, sogar komplizierte wie Küchen.
Dieses Projekt ist das Ergebnis einer Zusammenarbeit mit einem unglaublichen Team von Metamates: Sam Tsai, @LukasHollein, @wu_bichen, Jialiang Wang, Chih-Yao Ma, Kunpeng Li, Xiaofang Wang, @felixwimbauer, Zijian He, Peizhao Zhang, Bastian Leibe, Peter Vajda, @sekunde_.
What's new
How does it work-1
How does it work-2
How does it work-3
kitchens
bathrooms
children's room
overall