Clip art photo

Nous présentons un système pour insérer de nouveaux objets dans des photographies existantes en interrogeant une vaste bibliothèque d'objets basée sur des images, pré-calculée à l'aide d'une base de données d'objets accessible au public sur Internet. L'objectif central est de protéger l'utilisateur de toutes les tâches ardues généralement impliquées dans le compositing d'images. L'utilisateur n'est invité à faire que deux choses simples : 1) choisir un emplacement 3D dans la scène pour placer un nouvel objet ; 2) sélectionner un objet à insérer à l'aide d'un menu hiérarchique. Nous posons le problème de l'insertion d'objet comme une tâche de récupération d'objet contextuellement sensible, basée sur des données et en 3D. Au lieu d'essayer de manipuler l'objet pour changer son orientation, sa distribution de couleur, etc., pour l'adapter à la nouvelle image, nous récupérons simplement un objet d'une classe spécifiée qui a toutes les propriétés requises (position de la caméra, éclairage, résolution, etc.) de notre grande bibliothèque d'objets. Nous présentons de nouveaux algorithmes automatiques pour améliorer la segmentation et le mélange d'objets, estimer la véritable taille et orientation d'objets 3D, et estimer les conditions d'éclairage de la scène. Nous présentons également une interface utilisateur intuitive qui rend l'insertion d'objets rapide et simple même pour ceux qui ont des difficultés artistiques.