3D Gaussian Splatting est un nouvel algorithme pour reconstruire des scènes 3D photo-réalistes à partir de jeux d’images 2D. Cet algorithme a été développé en 2023 par l’INRIA à Sophia Antipolis. Il est devenu en quelques mois la référence dans le domaine. Cette solution se décompose en 2 parties : un outil pour entraîner les scènes avec Pytorch basé sur des algorithmes d’IA et un visualiseur de scènes 3D Gaussian Splatting développé en C++/CUDA (nommé SIBR_gaussianViewer).
Dans le cadre des activités du programme de recherche Orange sur la vidéo volumétrique, Orange a porté le visualiseur SIBR_gaussianViewer sur OpenXR qui est un standard pour supporter la plupart des casques de réalité virtuelle du marché (Occulus Quest, HTC Vive …). Cette visualisation de scène 3D volumétrique à travers un casque de réalité virtuelle a été démontrée lors des Open Tech Days 2023 et a reçu un vif intérêt de la part du public. Les visiteurs pouvaient s’immerger dans des scènes de sports comme du saut en hauteur ou du breakdance.
Début 2024, ce développement a fait l’objet d’une contribution opensource à la solution INRIA afin de matérialiser notre investissement sur ce sujet et de consolider nos échanges rapprochés avec l’INRIA. Vous pouvez retrouver le projet sur le GitLab de l’INRIA