ControlRoom3D by Meta를 소개합니다. 이는 사용자가 정의한 방 배치와 방 스타일에 완벽하게 부합하는 다양하고 타당한 3D 방 메시를 생성하는 혁신적인 도구입니다. 더 자세한 정보를 보려면 프로젝트 페이지 또는 **논문**을 방문하세요.
우리의 주요 성과는 3D 표현을 2D로 변환할 때 얻는 기하학적 및 의미론적 정보를 활용한 것입니다. 이를 사용하여 2D 생성 모델을 제어하여 3D 일관된 텍스처와 기하를 프록시 방과 일치하도록 만듭니다.
우리는 장면 생성에 새로운 변화를 주었습니다. 개별적으로 2D 뷰를 생성하는 대신 360° 시야를 제공하는 패노라마 생성 기술을 개발했습니다. 이 초기 뷰는 기초가 되며, 추가적인 시점은 누락된 영역을 보정하는 데 도움이 됩니다.
혁신적인 추가 기술로는 기하학적 정렬 기술이 있습니다. 3D 경계 상자의 공간적 차원을 사용하여 깔끔한 3D 구조를 만들 수 있는 깊이 추정 네트워크를 지원하는 반복적 최적화 전략을 개발했습니다.
우리의 새로운 접근법은 다양한 장면 유형과 레이아웃, 심지어 주방과 같은 복잡한 장면도 생성할 수 있는 다재다능함을 제공합니다.
이 프로젝트는 Meta의 멋진 팀인 Sam Tsai, @LukasHollein, @wu_bichen, Jialiang Wang, Chih-Yao Ma, Kunpeng Li, Xiaofang Wang, @felixwimbauer, Zijian He, Peizhao Zhang, Bastian Leibe, Peter Vajda, @sekunde_와의 협력의 결과입니다.
What's new
How does it work-1
How does it work-2
How does it work-3
kitchens
bathrooms
children's room
overall