Depth camera indoor mapping for 3D virtual radio play

By combining game engines with indoor mapping, it is possible to create interactive virtual environments that represent the real world. In this paper a virtual version of an audio installation in a historic building is produced, where the user freely explores the building and experiences a set of audio clips, creating a virtual radio play. A depth camera indoor mapping system, Matterport, captured a set of staged interiors. The aim was to evaluate the quality and usability of the indoor models and to demonstrate applying them in 3D application development. The quality of the models was evaluated by comparison with laser scanning, revealing limitations with Matterport: increasing the size of the measured area lowered the level of detail and accuracy of volumetric models. The quality of textures was not affected by this limitation, maintaining the appearance of models. To obtain optimised models for mobile 3D applications, a manual revision process was applied. En combinant les moteurs de jeu avec la cartographie d'intérieur, il est possible de créer des environnements virtuels interactifs qui représentent le monde réel. Dans cet article, une version virtuelle d'une installation audio dans un bâtiment historique est produite, où l'utilisateur explore librement le bâtiment et peut écouter un ensemble de clips audio, créant une pièce radiophonique virtuelle. Un système de cartographie d'intérieur basé sur une caméra de profondeur, Matterport, a capturé un ensemble de scènes d'intérieur. Le but était d’évaluer la qualité et la facilité d'utilisation des modèles d'intérieur et de montrer qu'on pouvait les utiliser dans le développement d'applications 3D. La qualité des modèles a été évaluée par comparaison avec un balayage laser, mettant en évidence les limites du système Matterport: l'augmentation de l’étendue de la zone relevée dégrade le niveau de détail et la précision des modèles volumétriques. La qualité des textures n'est pas affectée par cette limitation ce qui permet de préserver l'apparence des modèles. Afin obtenir des modèles optimisés pour les applications 3D mobiles, une révision manuelle a été mise en œuvre. Durch die Kombination von Spielekonsolen mit Indoor‐Mapping, wird es möglich, interaktive virtuelle Welten zur erstellen, die die reale Welt repräsentieren. In diesem Beitrag wird eine virtuelle Version einer Audio‐Installation in einem historischen Gebäude erstellt, die es dem Nutzer erlaubt, das Gebäude frei zu erkunden und einen Satz von Au