Selective-Stereo: Seleção Adaptativa de Informações de Frequência para Correspondência Estéreo

Métodos de correspondência estéreo baseados em otimização iterativa, como RAFT-Stereo e IGEV-Stereo, evoluíram para se tornarem um alicerce no campo da correspondência estéreo. No entanto, esses métodos têm dificuldade em capturar simultaneamente informações de alta frequência nas bordas e informações de baixa frequência em regiões suaves devido ao campo receptivo fixo. Como resultado, tendem a perder detalhes, borrar bordas e produzir correspondências falsas em áreas sem textura. Neste artigo, propomos a Unidade Recurrente Seletiva (SRU), um novo operador de atualização iterativa para correspondência estéreo. O módulo SRU pode fundir adaptativamente informações de disparidade ocultas em múltiplas frequências para regiões de borda e suaves. Para realizar a fusão adaptativa, introduzimos um novo módulo de Atenção Espacial Contextual (CSA) para gerar mapas de atenção como pesos de fusão. O SRU capacita a rede a agregar informações de disparidade ocultas em múltiplas frequências, mitigando o risco de perda vital de informações de disparidade ocultas durante processos iterativos. Para verificar a universalidade da SRU, aplicamos ao métodos de correspondência estéreo iterativos representativos, referidos coletivamente como Selective-Stereo. Nosso Selective-Stereo ocupa o 1º lugar nos rankings KITTI 2012, KITTI 2015, ETH3D e Middlebury entre todos os métodos publicados. O código está disponível em https://github.com/Windsrain/Selective-Stereo.