Lewati ke konten
Kembali ke blog

Teknologi menjelaskan · Rekonstruksi 3D

Dari Foto ke Sudut Pandang Baru: Memahami 3D Gaussian Splatting

Gaussian splatting mengubah pengamatan suatu adegan menjadi representasi 3D yang dapat dirender dari sudut pandang baru. MakeWorlds Studio menghadirkan input gambar, rekonstruksi, inspeksi, dan persiapan pemandangan ke dalam satu alur kerja. Artikel ini menghubungkan geometri kamera, representasi pemandangan, dan prinsip rendering di balik proses tersebut.

Tim MakeWorlds Studio ·

Interior yang hangat dengan dinding di dekatnya, kursi di tengah, dan pintu masuk lebih jauh
Ilustrasi konsep: dinding, kursi, dan pintu membentuk hubungan latar depan dan latar belakang untuk membahas paralaks dan oklusi.

Adegan yang direkonstruksi memberi penonton kendali atas tempat untuk melihatnya. Bergerak di sekitar suatu objek atau mendekati furnitur di dalam ruangan mengubah hubungan antara latar depan dan latar belakang. Hal ini memungkinkan untuk memeriksa tampilan dan tata letak secara bersamaan saat merekam atau menyajikan suatu ruang.

MakeWorlds Studio Train dan studi kasus dalam ruangan menunjukkan foto dan render berpasangan, memungkinkan pembaca memeriksa kontur dan tekstur secara langsung. Tiga tahap yang terhubung menjelaskan bagaimana hasil tersebut dihasilkan: memulihkan hubungan kamera, mewakili pemandangan, dan merender tampilan yang dipilih.

Pulihkan hubungan kamera dan adegan dari berbagai tampilan

Foto-foto dari berbagai posisi memberikan proyeksi yang saling melengkapi. Sudut dan tekstur bersama membentuk korespondensi yang menghubungkan gambar.

Structure from Motion, atau SfM, menggunakan korespondensi tersebut untuk memperkirakan pose kamera dan kumpulan awal titik 3D. Mereka memberikan referensi spasial untuk rekonstruksi.

Tangkap dari posisi yang berubah dengan tumpang tindih antara tampilan yang berdekatan. Bangun cakupan yang terhubung terlebih dahulu, lalu tambahkan tampilan lebih dekat pada detail penting.

Perkiraan kamera memungkinkan representasi pemandangan disempurnakan berdasarkan pengamatan yang diketahui dan dirender dari sudut pandang tertentu.

Mewakili penampilan dengan primitif Gaussian spasial

3DGS mewakili pemandangan dengan banyak Gaussian spasial. Masing-masing membawa informasi posisi, skala, orientasi, opasitas, dan tampilan; kontribusi gabungan mereka membentuk gambaran adegan itu.

Pengaruh Gaussian menjauh dari pusatnya. Ellipsoid lembut adalah ilustrasi yang berguna: proyeksinya memberikan jejak kaki yang memudar ke arah tepinya.

Penyaji memadukan kontribusi yang diproyeksikan ini menggunakan urutan kedalaman dan opasitasnya. Animasi di bawah ini menggunakan cangkir untuk mengilustrasikan proyeksi dan pembentukan gambar.

Pelatihan membandingkan tampilan pelatihan yang diberikan dengan foto mereka dan menyesuaikan representasi agar sesuai dengan beberapa observasi.

Berikan posisi baru, dengan paralaks dan oklusi baru

Perubahan posisi atau orientasi kamera mengubah posisi, ukuran, dan oklusi yang diproyeksikan. Rendering dari kamera tersebut menghasilkan tampilan baru dengan representasi spasial yang sama.

Dengan gerakan kamera menyamping, latar depan dan latar belakang bergeser dengan jumlah yang berbeda. Garis pandang juga dapat melewati suatu penghalang dan mengungkapkan sesuatu di baliknya. Diagram tampilan rencana menggambarkan hubungan itu.

Dalam diagram top-down, sebuah kolom menghalangi garis pandang dari A ke objek latar belakang, sedangkan garis pandang dari B lewat di sampingnya.
Kolom latar depanObjek latar belakangAdegan yang sama dilihat dari atas: di A, kolom menyembunyikan objek latar belakang; di B, garis pandang lewat di sampingnya. Mengubah posisi mengubah oklusi.

Panorama tunggal memberikan tampilan terarah di sekitar satu posisi pengambilan. Adegan yang direkonstruksi juga mendukung perubahan posisi tersebut, memberikan perencanaan pengambilan gambar dan rute presentasi dimensi lain untuk dikerjakan.

Rencanakan penangkapan dan tinjauan seputar tujuan penggunaan

Tentukan area tampilan utama, rute kamera yang diinginkan, dan detail yang memerlukan pemeriksaan cermat sebelum diambil. Cakupan yang terhubung, foto yang tajam, dan pencahayaan yang cukup stabil memberikan observasi yang berguna; pandangan lebih dekat menambah bukti adanya tekstur dan struktur penting.

Tinjau kontur, perubahan oklusi, dan wilayah baru yang terlihat di sepanjang rute yang direncanakan. Berikan perhatian khusus pada permukaan reflektif, kaca, area bertekstur rendah, dan benda bergerak saat memutuskan di mana akan mengambil kembali atau menyempurnakannya. Area yang tidak teramati pada materi sumber masih memerlukan bukti tambahan.

Artikel ini menjelaskan rekonstruksi gambar dan rendering tampilan. Pengukuran, penanganan tumbukan, dan analisis teknik memerlukan data geometrik dan validasi yang sesuai untuk tujuan penggunaannya.

Hubungkan gambar sumber, pemandangan, dan evaluasi di MakeWorlds Studio

MakeWorlds Studio mengatur input gambar, rekonstruksi, inspeksi, dan persiapan pemandangan ke dalam alur kerja yang terhubung. Pengguna bekerja dari materi yang ditangkap hingga adegan yang direkonstruksi, memeriksanya dari berbagai posisi, dan mempersiapkannya untuk tujuan presentasi mereka.

Kasus yang dipublikasikan memberikan contoh nyata: Train memasangkan detail lokomotif dengan hasil tiga platform; ruang belajar dalam ruangan memeriksa lemari, pola berulang, dan isi rak buku. Gambar yang cocok dan metrik set pengujian lengkap memungkinkan pembaca memeriksa struktur dan detail visual mana yang dipertahankan dalam rekonstruksi.