Notes d'ingénierie · nouvelle synthèse de points de vue
Évaluer la reconstruction 3D d’intérieurs : Dr Johnson et Playroom
MakeWorlds Studio a reconstruit Dr Johnson et Playroom à partir de photographies en utilisant ses propres estimations d'appareil photo. Dans les exécutions Mac enregistrées, les deux scènes renvoient des valeurs PSNR et SSIM supérieures et inférieures LPIPS aux valeurs correspondantes rapportées dans le document de recherche original 3DGS. Les paires d'images montrent ce que les reconstructions conservent dans la pratique : les profils d'armoires, les motifs répétitifs de tapis et le contenu superposé d'une étagère.
1. Résultats sur l’ensemble des tests
Les moyennes ci-dessous couvrent les 16 vues de test dans Dr Johnson et les 14 dans Playroom. Dans les deux scènes, les trois mesures sont favorables par rapport aux valeurs 3DGS rapportées. Quatre paires d'images plus loin dans l'article montrent les détails visibles derrière ces résultats.
Les tableaux utilisent le protocole de comparaison des documents de recherche de notre évaluation publiée, sans remplacer les scores corrigés en couleur. Les valeurs de référence sont les résultats sur 30 000 étapes dans l'annexe originale 3DGS. Les estimations des caméras et les ensembles de vues de test diffèrent, de sorte que les deltas fournissent un contexte par rapport à la littérature plutôt qu'une comparaison contrôlée. [1] Conditions et portée de la comparaison
| Résultat | PSNR ↑ / dB | SSIM ↑ | LPIPS ↓ |
|---|---|---|---|
| 3DGS document de recherche (rapporté) | 28.766 | 0.8990 | 0.2440 |
| MakeWorlds Studio · Mac | 29.180Δ +0.414 | 0.9124Δ +0.0134 | 0.2215Δ −0.0225 |
| Résultat | PSNR ↑ / dB | SSIM ↑ | LPIPS ↓ |
|---|---|---|---|
| 3DGS document de recherche (rapporté) | 30.044 | 0.9060 | 0.2410 |
| MakeWorlds Studio · Mac | 30.385Δ +0.341 | 0.9148Δ +0.0088 | 0.2264Δ −0.0146 |
La direction est cohérente dans les deux scènes : PSNR et SSIM supérieurs, LPIPS inférieurs. Ces mesures décrivent l'erreur de pixel, la structure locale de l'image et la distance perceptuelle. Les comparaisons ci-dessous relient cette évaluation au niveau de la scène à des caractéristiques spécifiques, notamment les bords des armoires, les coutures des planches de parquet et les motifs répétés.
2. Des photographies aux vues évaluées
Dr Johnson et Playroom sont des scènes publiques de Deep Blending également utilisées dans l'évaluation originale de 3DGS. Toutes les images et partitions MakeWorlds Studio ici proviennent des exécutions Mac dans le lot publié le 1er octobre 2026. [2]
| Ensemble de données et vues | Dr Johnson | Playroom |
|---|---|---|
| Saisir des photos | 263 | 225 |
| Tester les vues | 16 | 14 |
| Vues affichées ici | 2 | 2 |
| Taille de l'image (pixels) | 1332 × 875 | 1264 × 832 |
Nous avons exécuté le préréglage Medium à la résolution source pour 30 000 étapes d'optimisation sur un Apple M4 Max. MakeWorlds Studio a estimé les caméras à partir des images d'entrée, entraîné la scène et rendu les vues de test. Ces points de vue ont été fixés avant la formation ; leurs images ont été exclues de l'optimisation de la scène et utilisées comme références pour l'évaluation.
Les quatre vues illustrées couvrent les armoires, l'aire de jeux, les motifs de tapis et une étagère bondée. Nous les avons sélectionnés pour ces fonctionnalités, et non pour les scores de vue les plus élevés. Chaque paire référence/rendu utilise une orientation d'affichage et un recadrage correspondants, ce qui permet de vérifier les caractéristiques individuelles par rapport aux résultats au niveau de la scène.
3. Dr Johnson : du contour du meuble à son encadrement interne
La reconstruction conserve les détails à plusieurs échelles dans la même vue. Le meuble sombre conserve son profil général ainsi que les arcs brisés et les divisions horizontales de ses portes. Le manteau du foyer, les supports latéraux et les moulures murales offrent d'autres contours à suivre. Ensemble, ces éléments montrent comment le mobilier reconstruit se rapporte à la pièce environnante.


Figure 1. Dr Johnson, Mac, vue-000040. Les arches et les divisions internes du meuble restent distinctes, tout comme son profil extérieur et les moulures du foyer. Photo de référence à gauche ; Rendu MakeWorlds Studio à droite.
La preuve utile ici est la combinaison d’une disposition reconnaissable de la pièce et des structures plus petites à l’intérieur. En faisant glisser le séparateur à travers le meuble, ces correspondances apparaissent. La zone lumineuse de la fenêtre et quelques bords fins diffèrent encore visiblement de la référence.
4. Playroom : zones de couleur, objets séparés et texture du sol
Playroom offre plusieurs échelles de détails dans une seule image. La reconstruction reproduit les larges rayures du tapis et les lettres en mousse, tandis que les jouets dispersés conservent des formes et des positions identifiables. Loin de l’aire de jeu colorée, les coutures et les nœuds des planches de parquet offrent un autre ensemble de correspondances. L'image conserve des informations sur de larges régions de couleurs, les limites des objets et la texture de la surface.


Figure 2. Playroom, Mac, vue-000184. Les rayures des tapis, les lettres sur les tapis en mousse, les contours des jouets et les coutures des planches de parquet permettent des contrôles à des échelles de plus en plus fines.
5. Une inspection plus approfondie : les modèles répétés et le contenu de l'étagère
Sur le tapis Dr Johnson, les motifs de bordure restent disposés dans une séquence continue, et les formes et positions des motifs centraux plus grands peuvent être adaptées à la photographie. Playroom préserve les largeurs et les couleurs des dos de livres voisins, les angles des classeurs et les couches d'objets empilés. Sur l’étagère supérieure, le titre du livre vert reste lisible. Les deux paires ci-dessous utilisent le même recadrage et le même grossissement pour la référence et le rendu, afin que ces caractéristiques puissent être comparées directement.


Figure 3a. Dr Johnson, vue-000248. La bordure et les motifs centraux du tapis restent identifiables individuellement. Certains éléments de motif plus fins et les bords du dossier de chaise sont plus doux.


Figure 3b. Playroom, vue-000089. Les dos des livres et les classeurs conservent leurs contours, leurs couleurs et leur disposition séparés. Les lettres de titre plus grandes restent lisibles ; un texte plus petit montre différents degrés d’adoucissement.
6. Connecter les détails visibles aux métriques
Les exemples vont de la disposition de la pièce et des larges régions de couleurs aux limites des objets, aux motifs répétés et aux traits de lettres individuels. L'évaluation quantitative résume les différences d'image en termes d'erreur de pixel, de structure locale et de caractéristiques perceptuelles. L’utilisation des deux donne au lecteur des résultats numériques à comparer et des caractéristiques d’image concrètes à inspecter.
- PSNR ↑
- PSNR exprime l’erreur quadratique moyenne des pixels sur une échelle logarithmique. Des valeurs plus élevées indiquent une erreur plus faible dans les conditions de comparaison choisies. L’alignement de l’image, la luminosité et les différences de couleur l’affectent tous.
- SSIM ↑
- SSIM compare la luminance, le contraste et la structure locaux. Des valeurs plus élevées indiquent une correspondance plus étroite dans ces propriétés d'image, ajoutant une vue structurelle de similarité aux côtés de l'erreur de pixel. [3]
- LPIPS ↓
- LPIPS mesure la distance entre les caractéristiques de l'image profonde ; des valeurs inférieures indiquent une correspondance plus proche de la référence. Le réseau de fonctionnalités et le prétraitement affectent les valeurs, de sorte que les comparaisons entre les implémentations nécessitent un protocole cohérent. [4]
Le modèle public 3D Gaussian Splatting fournit un moyen utile de réfléchir à ces images. Une scène est représentée par des primitives gaussiennes, qui sont projetées dans l'image et fusionnées dans un ordre de profondeur. L'omission du terme d'arrière-plan donne : [1]
Ici, u est la position du pixel et d est la direction de visualisation. Alpha combine l'empreinte gaussienne projetée avec l'opacité ; T est la transmission restante après les gaussiennes précédentes. Plusieurs contributions forment chaque pixel, rendant la couverture, l'occlusion et la variation de couleur locale pertinentes pour l'image finale. La charpente des armoires, les bords des jouets et les motifs des tapis fournissent des endroits concrets pour inspecter ces effets.
7. Conclusions et portée
Dans ces deux cas d'intérieur, MakeWorlds Studio préserve la disposition de la pièce, la structure des meubles et les détails fins des surfaces, ainsi que des résultats favorables sur l'ensemble des ensembles de tests. Les preuves sont visibles à plusieurs échelles : la disposition générale d’une pièce, le cadre interne d’une armoire et les motifs ou lettrages de la scène. Ces exécutions démontrent une reconstruction intérieure détaillée à partir d'un flux de travail qui commence par des photographies et estime ses propres caméras.
Ces deux cas d’intérieur ont été retenus dans l’évaluation publiée parce que les trois métriques étaient favorables par rapport aux valeurs de référence de l’article. MakeWorlds Studio utilise ses propres estimations des caméras ; les vues de test et les chaînes de traitement complètes n’ont pas été harmonisées avec l’expérience de l’article. Les écarts donnent un point de comparaison avec les valeurs publiées, sans établir un classement dans des conditions contrôlées ni isoler la contribution d’un composant.
Les conclusions concernent la fidélité de l'image aux points de vue testés dans ces scènes et paramètres. Les applications de mesure nécessiteraient également une vérité géométrique indépendante, des tests d’erreur dimensionnelle et des contrôles de surface. Les procédures pas à pas nécessiteraient une inspection pendant le mouvement de la caméra pour détecter le scintillement, les transitions d'occlusion et les régions nouvellement exposées. Ces tests sont en dehors de cet article.
Nous rapportons un lot d'évaluation enregistré sans variance d'exécution à exécution ni intervalle de confiance. Les deltas sont des observations sans prétention de signification statistique.
Conditions et sources des tests
- Entrée
- 263 photos d'entrée pour Dr Johnson ; 225 pour Playroom.
- Paramètres
- Préréglage moyen, résolution source, 30 000 pas. Les images et les scores proviennent des exécutions Mac dans le même lot d'évaluation.
- Images
- Dr Johnson : vue-000040 et vue-000248. Playroom : vue-000184 et vue-000089. Les vues ont été choisies pour inspecter la disposition, les bords et la texture, plutôt que pour présenter les scores les plus élevés. Chaque rendu est associé à sa photo de référence ; l'orientation de l'affichage et le recadrage correspondent.
Ensemble de données : mélange profond. Deep Blending
Références
Le modèle de rendu et les définitions de métriques suivent les sources ci-dessous. Les résultats expérimentaux sont tirés des évaluations de scènes publiées par MakeWorlds Studio.
- Kerbl et al. (2023). 3D Gaussian Splatting for Real-Time Radiance Field Rendering.
- Hedman et al. (2018). Deep Blending for Free-Viewpoint Image-Based Rendering.
- Wang et al. (2004). Image Quality Assessment: From Error Visibility to Structural Similarity.
- Zhang et al. (2018). The Unreasonable Effectiveness of Deep Features as a Perceptual Metric.
Explorez les résultats du benchmark sur trois plateformes · Planifier une capture photo