역방향 요리: 음식 이미지로부터의 레시피 생성

사람들은 음식에 대한 애정 때문에 음식 사진을 즐깁니다. 각 식사 뒤에는 복잡한 레시피로 설명된 이야기가 있으며, 안타깝게도 음식 이미지를 단순히 보는 것으로는 그 준비 과정을 알 수 없습니다. 따라서 본 논문에서는 음식 이미지를 기반으로 요리 레시피를 재구성하는 역방향 요리 시스템을 소개합니다. 우리 시스템은 새로운 구조를 통해 재료를 집합으로 예측하며 의존성을 모델링 하여 어떤 순서도 부과하지 않고, 그 다음에는 이미지와 유추된 재료를 동시에 살펴보며 요리 지침을 생성합니다. 우리는 대규모 Recipe1M 데이터셋에서 전체 시스템을 광범위하게 평가하고 (1) 재료 예측에 대한 이전 기준선 대비 성능을 향상시킴을 보여줍니다; (2) 이미지와 재료를 모두 활용하여 고품질 레시피를 얻을 수 있습니다; (3) 인공지능의 판단에 따라 우리 시스템은 검색 기반 접근 방식보다 더 매력적인 레시피를 생성할 수 있습니다. 우리는 코드와 모델을 공개합니다.