Uma pesquisa sobre costura de imagens e vídeos

A costura de imagens/vídeos é uma tecnologia para resolver a limitação do campo de visão (FOV) de imagens/vídeos. Ela costura várias imagens/vídeos sobrepostos para gerar uma imagem/vídeo de amplo FOV, e tem sido usada em várias áreas, como transmissão esportiva, vigilância por vídeo, visualização de ruas e entretenimento. Essa pesquisa revisa algoritmos de costura de imagens/vídeos, com foco especial naqueles desenvolvidos nos últimos anos. A costura de imagens primeiro calcula as relações correspondentes entre várias imagens sobrepostas, deforma e alinha as imagens correspondentes, e em seguida mistura as imagens alinhadas para gerar uma imagem de amplo FOV. Um método contínuo é sempre adotado para eliminar possíveis falhas, como fantasmas e desfoque causados por paralaxe ou objetos que se movem nas regiões sobrepostas. A costura de vídeos é a extensão further da costura de imagens. Ela geralmente costura quadros selecionados de vídeos originais para gerar um modelo de costura, realizando algoritmos de costura de imagens, e os quadros subsequentes podem então ser costurados de acordo com o modelo. A costura de vídeos é mais complicada com objetos em movimento ou movimentos violentos da câmera, porque esses fatores introduzem tremores, instabilidade, fantasmas e desfoque. A técnica de detecção de primeiro plano é geralmente combinada com a costura para eliminar fantasmas e desfoque, enquanto algoritmos de estabilização de vídeo são adotados para resolver o tremor e a instabilidade. Este artigo discute ainda a costura panorâmica como uma extensão especial da costura de imagens/vídeos. A costura panorâmica é atualmente a aplicação mais amplamente utilizada na costura. Esta pesquisa revisa os métodos mais recentes de costura de imagens/vídeos, e introduz os princípios/advantagens/fraquezas fundamentais dos algoritmos de costura de imagens/vídeos. A costura de imagens/vídeos enfrenta desafios de longo prazo, como base larga, grande paralaxe, e problemas de baixa textura na região sobreposta. Novas tecnologias podem apresentar novas oportunidades para abordar estas questões, como correspondência semântica baseada em aprendizado profundo, e costura de imagens 3D. Finalmente, esta pesquisa discute os desafios da costura de imagens/vídeos e propõe soluções potenciais.