참고팁X
텐센트, 이미지 한 장으로 실시간 렌더링 3D 월드 생성 'WorldMirror 2.0' 공개
이미지를 3D 애셋으로 변환해 언리얼/유니티로 즉시 내보낼 수 있는 모델. 가우시안 스플랫 기반의 효율적 3D 구현 도구입니다.
요약
Tencent이 공개한 WorldMirror 2.0은 단 한 장의 이미지를 즉각적으로 3D 공간으로 변환할 수 있는 기술이다. 이 모델은 비디오 생성 모델과 달리 단순히 영상을 생성하는 것을 넘어, Unity, Unreal, Blender에서 즉시 사용할 수 있는 메시와 가우시안 스플랫 형태의 실제 3D 에셋을 제공한다. 또한 스마트폰으로 촬영한 영상을 입력하면 깊이, 노멀 맵, 카메라 위치, 포인트 클라우드를 단 한 번의 패스로 예측하여 3D 장면으로 재구성한다. 소비자용 GPU에서 실시간 렌더링이 가능한 효율성을 갖췄으며, 관련 가중치와 추론 코드는 오픈소스로 공개되어 현재 2,700개 이상의 스타를 기록하고 있다.
AI가 원문을 요약한 내용으로, 부정확할 수 있습니다.
원문 제목 @godofprompt: Tencent just dropped something ridiculous one image turns into a 3D world you can actually walk around in not a video. an actual 3
원문 보기 ↗