VISION LAB / DENSE 4D HUMAN CORRESPONDENCE
Dense4D
몸·옷·머리카락의 표면을 프레임 사이에서 대응시킵니다. 공식 3D 데모를 살펴볼 수 있으며, 자체 추론은 코드·가중치 공개 대기 중입니다.
공식 데모
저자가 미리 계산한 결과를 외부 뷰어에서 탐색합니다. 새 영상을 업로드해 추론하는 서비스가 아닙니다.
드래그로 시점을 회전하고, 프레임 슬라이더·색상·궤적 길이를 바꿔 확인할 수 있습니다.
Human Point Maps
- 사람 표면의 각 픽셀을 하나의 기준 자세에 대응시키고, 프레임별 깊이로 3D 궤적을 구성합니다. 몸뿐 아니라 옷과 머리카락을 대상으로 합니다.
- 입력에는 사람 영역과 초점거리 정보로 만든 512×512 크롭을 사용합니다. 인체 템플릿을 맞추는 방식은 아닙니다.
- 공식 장면 시각화의 카메라·배경·스케일 정합에는 VGGT-Ω를 추가로 사용합니다.
로컬 재현 준비
- 공식 코드와 학습된 가중치가 공개되어야 동일 모델 추론을 시작할 수 있습니다. 현재 로컬 설치·추론·정확도 측정 결과는 없습니다.
- 공개 후 기존 춤 입력의 짧은 구간부터 시험하고, 원시 HPM·깊이·대응 점과 실행 조건을 보존해 TAPNext++·TraceAnything 결과와 비교할 계획입니다.
- RTX 4090 24GB에서의 호환성과 메모리는 미검증입니다. 논문의 GH200 측정치를 이 환경의 실행 성능으로 표시하지 않습니다.
실험 기록을 불러오는 중…