Virtual camera for the sampling of an increased reality system on the semi-transparent display
Abstract
We present a novel extrinsic calibration method for optical see-through systems. It is
primarily aimed at tablet-like systems with a semi-transparent screen, a user-tracking device and
a device dedicated to the localization of the system in the environment but easily generalizable
to any optical see-through setup. The proposed algorithm estimates the relative poses of those
three component based on the user indicating the projections onto the screen of several reference
points chosen on a known object. A convex estimation is computed through the resectioning
of virtual cameras and used to initialize a global bundle adjustment. Both synthetic and real
experiments show the viability of our approach.
Nous proposons dans cet article une nouvelle méthode d'étalonnage extrinsèque pour
systèmes de réalité augmentée sur affichages semi-transparents. Cette méthode est
appliquée ici à un système de type tablette augmentée composé d'un écran semi-
transparent, d'un dispositif de suivi de l'utilisateur et d'un dispositif de localisation par rapport
à la scène observée. Cette méthode reste cependant générique et applicable à la plupart
des scénarios de réalité augmentée. Elle estime les poses relatives de ces trois composants
en se basant sur les obervations 2D à l'écran de points de référence d'un objet connu. Ces
observations sont fournies par l'utilisateur, par exemple sous forme de clics à la souris. Une
initialisation convexe est d'abord calculée grâce à l'étalonnage de caméras virtuelles. Un
ajustement de faisceaux global raffine ensuite le résultat. Des expériences sur données
synthétiques et réelles montrent le bien-fondé de cette approche.