Key points are not available for this paper at this time.
"총알 시간" 효과를 생성하는 것은 몰입형 시각 효과와 VR/AR 경험을 위해 매우 중요합니다. 최근의 신경 발전은 우리 궤적 인식 작업의 실시간, 동적 및 일반 설정 하에서 인간 자유 시점 렌더링을 위한 제어 가능한 상호작용 총알 시간 디자인 능력이 여전히 부족합니다. 이러한 격차를 해소하기 위해, 본 논문에서는 밀집 RGB 스트림에서 사진 현실적인 인간 자유 시점 렌더링을 위한 신경 상호작용 총알 시간 생성기(iButter)를 제안합니다. 이는 인간 총알 시간 시각 효과를 위한 유연하고 상호작용적인 디자인을 가능하게 합니다. 우리의 iButter 접근법은 실시간 미리보기 및 디자인 단계와 궤적 인식 정제 단계로 구성됩니다. 미리보기 단계에서 우리는 NeRF 렌더링을 실시간 및 동적 설정으로 확장하고 지루한 장면별 훈련을 없애는 상호작용 총알 시간 디자인 접근법을 제안합니다. 이를 위해 우리의 총알 시간 디자인 단계는 하이브리드 훈련 세트, 경량 네트워크 디자인 및 효율적인 실루엣 기반 샘플링 전략을 활용합니다. 정제 단계에서는 설계된 궤적을 따라 공간적, 시간적 일관성과 의미적 단서를 공동 인코딩하는 효율적인 궤적 인식 계획을 도입하여 20분 이내에 사진 현실적인 총알 시간 관찰 경험을 달성합니다. 광범위한 실험은 편리한 상호작용 총알 시간 디자인과 사진 현실적인 인간 자유 시점 비디오 생성을 위한 우리의 접근법의 효과를 입증합니다.
Wang et al. (Sun,)은 이 질문에 대해 연구하였습니다.