Intégrer un gaussian splat sur un site web !

Utilisez votre souris pour naviguer dans l'animation ci-dessous !

Qu'est-ce que le gaussian splat ?

Le gaussian splatting est une technique utilisée pour la reconstruction et le rendu de scènes 3D. Il représente une scène comme une collection d'ellipsoïdes gaussiens 3D au lieu de maillages polygonaux traditionnels ou de grilles de voxels. Ces Gaussiennes sont ensuite projetées sur l'écran et mélangées pour créer une image lisse et photoréaliste.

Comment convertir mon travail multi-caméras en gaussian splat ?

Ayant travaillé avec des configurations multi-caméras pendant 14 ans, j'ai expérimenté de manière approfondie les techniques de capture 3D. Ce projet spécifique a été créé en 2022 en utilisant 176 caméras sur un seul plan (c'est pourquoi vous ne pouvez pas vous déplacer au-dessus de la tête de Kim sans que la scène ne se désagrège). Il y a quelques semaines, j'ai détaillé mon processus de conversion d'images en Gaussian splats à l'aide de Postshot.

Pourquoi le besoin de visualiser sur une page web ?

Je préfère généralement contrôler le mouvement exact de mon travail, comme on le voit dans cet exemple : publication Instagram. Cependant, il y a quelque chose d'incroyablement satisfaisant à permettre aux utilisateurs d'explorer manuellement une scène 3D à leur propre rythme. Aujourd'hui, le PDG de PlayCanvas (SuperSplat) a partagé un tweet montrant comment il a navigué à travers une œuvre d'art en utilisant SuperSplat. La vidéo parle d'elle-même !

Qu'est-ce que SuperSplat ?

Comment intégrer un gaussian splat ?

Jusqu'à récemment, la seule façon d'intégrer un Gaussian splat était de télécharger manuellement un fichier PLY sur un serveur web. Cependant, les choses se sont considérablement améliorées ! Désormais, l'intégration d'un Gaussian splat est beaucoup plus simple. Il suffit d'ouvrir l'éditeur SuperSplat, de naviguer vers File → Publish, et le tour est joué ! Vous pouvez utiliser le mode orbit par défaut (comme dans l'exemple ci-dessus) ou créer un mouvement de caméra personnalisé.

Réflexions finales

Le gaussian splatting révolutionne la façon dont nous visualisons les scènes 3D, et avec des outils comme SuperSplat, partager et intégrer ces expériences en ligne n'a jamais été aussi facile.

Lien vers mon article sur Supersplat : https://superspl.at/view?id=1c6c9462