Instruct NeRF2NeRF

Instruct-NeRF2NeRF는 텍스트 명령을 통해 3D 장면 편집을 재정의합니다. 이미지 조건 확산 모델인 InstructPix2Pix의 강력함을 활용하여 NeRF 장면을 매끄럽게 수정하고 대규모 실제 환경에 사실적이고 타겟팅된 편집을 생성합니다.

주요 기능:

• 명령 기반 편집: 간단한 텍스트 명령으로 3D 장면을 변환하여 물체, 조명, 전반적인 미적 감각을 정확하게 수정할 수 있습니다.
• 사실적이고 타겟팅된 편집: 원본 장면의 맥락과 기하학을 존중하는 매우 사실적인 편집을 생성하여 기존 방법보다 사실성과 정확성 면에서 뛰어납니다.
• 대규모 장면 편집: 대규모 실제 장면을 손쉽게 편집하여 방법의 확장성과 복잡한 환경을 처리하는 능력을 보여줍니다.

사용 사례:

• 고요한 가을 숲을 화려한 야생화로 장식된 활기찬 봄 초원으로 변환합니다.
• 장엄한 회색곰을 장난기 있는 판다곰으로 바꾸면서 자연스러운 환경과 조명 조건을 유지합니다.
• 맑은 하늘에서 극적인 눈보라로 전환하여 3D 장면 내의 날씨를 변경합니다.

결론:

Instruct-NeRF2NeRF는 자연어 명령으로 가상 환경을 조작할 수 있도록 해주어 3D 장면 편집에 혁신을 일으킵니다. 사실적이고 타겟팅된 편집을 생성하는 기능으로 창의적인 콘텐츠 생성, 몰입형 경험, 건축 설계에 대한 새로운 가능성을 열어줍니다.