NeRF ve Gaussian Splatting: 3D Sahnelerin Yapay Zeka Modeli

"Birkaç fotoğraf → tam 3D"

20 fotoğraf çekiyorsunuz: bir araba farklı açılardan.
NeRF veya Gaussian Splatting → istediğiniz açıdan yeni görüntü.

Tam 3D bir model, ama klasik mesh değil — AI tabanlı.

NeRF (2020)

Neural Radiance Fields — Mildenhall et al., UC Berkeley.

Fikir:

• 3D uzayda bir nokta + bakış yönü ver.
• Neural network: renk + yoğunluk üret.
• Tüm noktaları volumetric render → görüntü.

Eğitim: birkaç fotoğraf ile MLP'yi optimize et.

6000+ atıf. 3D dünyasında devrim.

NeRF problemleri

• Yavaş eğitim: saatler.
• Yavaş render: saniyeler.
• Statik sahne.
• Sınırlı kalite.

Hızla iyileştirmeler:

• Instant-NGP (NVIDIA 2022): saniyeler.
• MipNeRF.
• NeRF-W: dış ortam.
• DNeRF: dinamik.

Gaussian Splatting (2023)

Kerbl et al. — 3D Gaussian Splatting:

• Sahneyi milyonlarca 3D Gauss ile temsil et.
• Her Gauss: konum, renk, opaklık, boyut.
• Renderer rastgele paralel hızlı.

Avantajlar:

• 60 FPS gerçek zamanlı.
• Yüksek kalite.
• Daha hızlı eğitim.

NeRF'i rakipsiz geçti.

Modern oyuncular

Luma AI

NeRF tabanlı, mobil uygulama.

Polycam

3D scan + AI yeniden inşa.

NVIDIA Omniverse

Endüstri 3D.

Apple Vision Pro

Spatial computing için 3D AI.

Google Maps

3D şehir modelleme.

Uygulamalar

Sanal turlar

Emlak, müze, otel.

Film yapımı

Pre-visualization, post-production.

Endüstriyel

Üretim hattı dijital ikiz.

Tıp

Cerrahi planlama.

Robotik

Ortam haritalama.

AR/VR

Apple Vision Pro içerik.

Arkeoloji

• Vesuvius Challenge ile birlikte.
• Ören yerlerinin dijital koruma.

Teknik detaylar

Volumetric rendering

Bir piksel = bir ışın → boyunca integral.

Differentiable rendering

Gradient backprop için sürekli.

Multi-view stereo

Çoklu fotoğraftan derinlik.

SfM (Structure from Motion)

Kamera pozları tahmini.

Türkçe / Türkiye için

Kültürel miras

• Selçuklu / Osmanlı eserleri 3D koruma.
• Bergama, Efes, Aphrodisias: AI tabanlı tarama.

Turizm

• Kapadokya sanal turlar.
• İstanbul tarihi alanlar.

Sanayi

• ASELSAN simülasyon.
• TUSAŞ uçak parça.

Akademi

• ODTÜ, İTÜ bilgisayar grafiği dersleri.

Sınırlamalar

Dinamik sahne

İnsan, hayvan, doğa hareketi — zor.

Yansıtıcı yüzeyler

Cam, ayna — kötü çıkıyor.

Karanlık / aydınlık

Aşırı koşullar.

Geleneksel mesh export

Klasik 3D yazılımlarla uyum.

Gaussian Splatting > NeRF mı?

2024'te:

• Hız: Gaussian Splatting kazanır.
• Kalite: yakın.
• Düzenleme: NeRF daha esnek (?).
• Çıkış formatı: ikisi de özel.

Endüstri Gaussian Splatting'e kayıyor.

Modern AI birleşimi

NeRF + diffusion

• DreamFusion: text → 3D.
• Magic3D: yüksek kalite.

Gaussian Splatting + LLM

• 3D sahneleri text ile düzenleme.

Multi-modal

Görsel + text + 3D.

Veri toplama

Modern smartphone'lar:

• LiDAR (iPhone Pro).
• ToF kamera.
• AR scanner uygulamaları.

Eskiden uzman tarama → şimdi herkes 3D scan yapabilir.

Apple Vision Pro etkisi

2024 lansman:

• Spatial computing yeni paradigma.
• 3D içerik talep patladı.
• NeRF/Gaussian Splatting standart araç.

Felsefe

3D AI temel mesajı: "Dünya 2D değil, 3D".

LLM 2D metin için iyi. Mekanı anlama için 3D AI gerekli. Embodied AI ile birleşir.

Pratik kullanım

Eğer mobil scan istiyorsanız

• Luma AI.
• Polycam.

Yüksek kalite gerekirse

• Custom Gaussian Splatting pipeline.

Türk araştırması

• TÜBİTAK BİLGEM 3D AI.
• ODTÜ CGM.

Kapanış

NeRF ve Gaussian Splatting, bilgisayar grafiğinin AI ile yeniden yazılması. Klasik mesh dünya bitti, neural sahneler çağı geldi.

Bir mühendisin olgunluk işareti: hangi 3D AI tekniği hangi durumda kullanılacağını bilmek.

Apple Vision Pro çağında 3D AI ana akım.