Apresentando o ControlRoom3D da Meta. É uma ferramenta inovadora que gera malhas de salas 3D diversas e plausíveis que se alinham perfeitamente com layouts de sala definidos pelo usuário e descrições textuais do estilo da sala. Visite a página do projeto ou leia o artigo para obter informações mais detalhadas.
Nosso grande avanço é o uso das informações geométricas e semânticas que a representação 3D nos oferece quando convertida em 2D. Usamos isso para controlar modelos generativos 2D, permitindo a criação de texturas e geometrias consistentes em 3D alinhadas com a sala proxy.
Demos uma nova abordagem à geração de cenas. Em vez de criar visualizações 2D individualmente, desenvolvemos uma técnica de geração de panoramas que proporciona uma visão de 360°. Essa visualização inicial serve como base e pontos de vista adicionais ajudam a preencher áreas faltantes.
Uma adição inovadora é nossa técnica de alinhamento de geometria. Ao usar as dimensões espaciais de caixas delimitadoras 3D, desenvolvemos uma estratégia de otimização iterativa que auxilia uma rede de estimativa de profundidade a produzir estruturas 3D de forma organizada.
Nosso novo processo oferece versatilidade, permitindo a criação de uma ampla gama de tipos e layouts de cenas, mesmo os complicados, como cozinhas.
Este projeto é o resultado de uma colaboração com uma equipe incrível de Metamates: Sam Tsai, @LukasHollein, @wu_bichen, Jialiang Wang, Chih-Yao Ma, Kunpeng Li, Xiaofang Wang, @felixwimbauer, Zijian He, Peizhao Zhang, Bastian Leibe, Peter Vajda, @sekunde_.
What's new
How does it work-1
How does it work-2
How does it work-3
kitchens
bathrooms
children's room
overall