Extraction de couches à partir de plusieurs images contenant des réflexions et de la transparence

De nombreuses images naturelles contiennent des réflexions et de la transparence, c'est-à-dire qu'elles contiennent des mélanges de lumière réfléchie et transmise. Lorsqu'elles sont vues d'une caméra en mouvement, celles-ci apparaissent comme la superposition d'images de couches composantes se déplaçant les unes par rapport aux autres. Le problème de la récupération de mouvements multiples a été précédemment étudié par plusieurs chercheurs. Cependant, personne n'a encore démontré comment récupérer de manière précise les images composantes elles-mêmes. Dans cet article, nous développons une approche optimale pour récupérer les images de couches et leurs mouvements associés à partir d'un nombre quelconque d'images composites. Nous développons deux techniques différentes pour estimer les images de couches composantes données des estimations de mouvement connues. La première approche utilise les moindres carrés contraints pour récupérer les images de couches. La deuxième approche affine de manière itérative les limites inférieure et supérieure des images de couches à l'aide de deux opérations de composition novatrices, à savoir les composés minimaux et maximaux d'images alignées. Nous combinons ces techniques d'extraction de couches avec un estimateur de mouvement dominant et une étape de raffinement du mouvement subséquente. Cela aboutit à un système complètement automatisé qui récupère des images transparentes et des mouvements à partir d'une collection d'images d'entrée.