다중 객체 제어에 기반한 장면 스케치-이미지 합성

장면 스케치-이미지 합성은 특히 스케치에 여러 클래스의 객체가 포함될 때 어려운 작업입니다. 기존 방법은 장면 스케치에서 이미지를 생성할 때 다양한 객체 클래스 간에 간섭하여 정확한 객체 클래스를 가진 이미지를 합성하기 어렵습니다. 본 논문에서는 장면 스케치와 텍스트 프롬프트로부터 고품질의 클래스 정확한 이미지를 생성할 수 있는 다중 객체 제어 기반 장면 스케치-이미지 생성 방법을 제안합니다. 우리는 전경 객체의 클래스를 정확하게 제어하고 전경 객체와 배경의 조화를 더욱 높일 수 있는 세분화 마스크 및 독립적 노이즈 제거에 기반한 샘플링 전략을 제안합니다. 우리의 방법은 추가적인 훈련 오버헤드 없이 사전 훈련된 확산 모델을 기반으로 합니다. SketchyCOCO 및 SketchyScene 데이터셋에 대한 실험은 장면 스케치 및 텍스트 프롬프트로부터 사실적인 복잡한 이미지를 생성할 수 있는 우리의 방법의 능력을 입증합니다.