Intégrer un gaussian splat sur un site web !

Utilisez votre souris pour naviguer dans l'animation ci-dessous !

Qu'est-ce que le gaussian splat ?

Le gaussian splatting est une technique utilisée pour la reconstruction et le rendu de scènes 3D. Elle représente une scène comme une collection d'ellipsoïdes gaussiens 3D au lieu des maillages polygonaux ou des grilles de voxels traditionnels. Ces gaussiens sont ensuite projetés sur l'écran et mélangés pour créer une image lisse et photoréaliste.

Comment convertir mon travail multi-caméras en gaussian splat ?

Ayant travaillé avec des installations multi-caméras pendant 14 ans, j'ai beaucoup expérimenté avec les techniques de capture 3D. Ce projet spécifique a été créé en 2022 avec 176 caméras sur un seul plan (c'est pourquoi vous ne pouvez pas vous déplacer au-dessus de la tête de Kim sans que la scène ne se désagrège). Il y a quelques semaines, j'ai détaillé mon processus pour convertir des images en Gaussian splats en utilisant Postshot.

Pourquoi visualiser sur une page web ?

Je préfère généralement contrôler le mouvement exact de mon travail, comme on le voit dans cet exemple : publication Instagram. Cependant, il y a quelque chose d'incroyablement satisfaisant à permettre aux utilisateurs d'explorer manuellement une scène 3D à leur propre rythme. Aujourd'hui, le PDG de PlayCanvas (SuperSplat) a partagé un tweet montrant comment il naviguait à travers une œuvre d'art en utilisant SuperSplat. La vidéo parle d'elle-même !

Qu'est-ce que SuperSplat ?

Comment intégrer un gaussian splat ?

Jusqu'à récemment, la seule façon d'intégrer un Gaussian splat était de téléverser manuellement un fichier PLY sur un serveur web. Cependant, les choses se sont considérablement améliorées ! Maintenant, l'intégration d'un Gaussian splat est beaucoup plus simple. Il suffit d'ouvrir l'éditeur SuperSplat, de naviguer vers File → Publish, et c'est tout ! Vous pouvez soit utiliser le mode orbite par défaut (comme dans l'exemple ci-dessus), soit créer un mouvement de caméra personnalisé.

Réflexions finales

Le gaussian splatting révolutionne la façon dont nous visualisons les scènes 3D, et avec des outils comme SuperSplat, le partage et l'intégration de ces expériences en ligne n'ont jamais été aussi faciles.

Lien vers ma publication sur Supersplat : https://superspl.at/view?id=1c6c9462