De onde vêm as emoções? Prevendo o Mapa de Estímulos Emocionais

Quais partes de uma imagem evocam emoções em um observador? Para responder a esta pergunta, introduzimos um problema novo em visão computacional - prever um Mapa de Estímulos Emocionais (ESM), que descreve a contribuição pixel a pixel para as emoções evocadas. Construindo uma nova base de dados de imagens, EmotionROI, como referência para prever o ESM, descobrimos que as regiões selecionadas pela detecção de saliência e de objetos não preveem corretamente as regiões da imagem que evocam emoção. Embora os objetos representem regiões importantes para evocar emoção, partes do fundo também são importantes. Com base nesse fato, propomos usar redes completamente convolutionais para prever o ESM. Tanto os resultados experimentais qualitativos quanto quantitativos confirmam que nosso método pode prever as regiões que evocam emoção melhor do que a detecção de saliência e de objetos.