Fusión de imágenes libre de fantasmas impulsada por semántica utilizando un flujo de video de ganancia dual con FPGA

Los métodos convencionales que fusionan múltiples imágenes con diferentes niveles de exposición a menudo sufren de desenfoque y fantasmas debido al movimiento de objetos. Los algoritmos existentes para eliminar fantasmas suelen ser complejos y lentos, lo que los hace inadecuados para aplicaciones de video en tiempo real. Para abordar este desafío, este estudio propone un nuevo método de fusión de imágenes libre de fantasmas utilizando un sistema de flujo de video de ganancia dual en un FPGA. Se emplea un sensor de imagen IMX662, que captura simultáneamente tanto imágenes HCG como LCG con el mismo tiempo de exposición, lo que permite una síntesis eficiente de imágenes HDR. El método propuesto aborda directamente la fuente del problema, eliminando la necesidad de pasos de post-procesamiento, preservando así la simplicidad algorítmica. Los resultados experimentales revelan que el método propuesto no solo elimina los fantasmas en un 100%, sino que también procesa datos en un FPGA un 98.79% más rápido que las técnicas tradicionales de fusión HDR basadas en software, permitiendo el procesamiento de flujos de video en tiempo real. Este algoritmo de fusión de ganancia dual y libre de fantasmas demuestra un potencial prometedor para su uso en fotografía de alta velocidad y vigilancia.