3DGS vs. fotogrammetrie voor auto's: welke 3D-scanmethode moet je gebruiken?
Als je een 3D-model van een echte auto wilt, kom je al snel twee termen tegen: fotogrammetrie en Gaussian splatting (3DGS). Beide methodes beginnen met foto's of video. Beide geven je iets wat je op je scherm kunt ronddraaien. Maar ze werken op een compleet andere manier, en juist voor auto's is dat verschil heel belangrijk. Dit artikel vergelijkt 3DGS en fotogrammetrie voor auto's, zodat je de juiste methode voor jouw project kunt kiezen.
Het korte antwoord
- Kies Gaussian splatting als je een fotorealistische visuele kopie van een auto wilt die je kunt bekijken, delen en gebruiken in real-time scènes, snel vastgelegd met één video.
- Kies fotogrammetrie als je een mesh met strakke oppervlakken nodig hebt die je kunt bewerken, opmeten of 3D-printen, en je bereid bent meer moeite te steken in het opnemen en opschonen.
De rest van dit artikel legt uit waarom.
Hoe fotogrammetrie werkt
Fotogrammetrie bestaat al tientallen jaren. Je neemt veel overlappende foto's, waarna software overeenkomstige punten vindt, berekent waar elke foto is genomen, een dichte puntenwolk opbouwt en die vervolgens omzet in een mesh: een oppervlak van driehoekjes. Ten slotte worden de foto's op de mesh geprojecteerd als een textuur.
De output is een klassiek 3D-model, meestal in OBJ-, FBX- of glTF-formaat. Elk 3D-programma kan dit lezen. Je kunt de mesh aanpassen, opmeten, bewerken en in bijna elke tool importeren.
Hoe Gaussian splatting werkt
Gaussian splatting begint op dezelfde manier: met overlappende beelden en camera-reconstructie. Daarna slaat het een andere weg in. In plaats van een oppervlak te bouwen, vult het de scène met miljoenen kleine, zachte, gekleurde 'Gaussians' en traint deze totdat de gerenderde beelden lijken op de originele foto's. Er is geen enkel oppervlak; het is een wolk van deeltjes die er samen vanuit elke hoek *uitziet* als de auto.
De output is meestal een .ply-bestand met Gaussian-parameters. Je bekijkt het in een speciale viewer zoals SuperSplat, in een browser of in een game engine met een 3DGS-plugin. Lees voor een volledige introductie wat is Gaussian splatting?
Auto's zijn lastig voor fotogrammetrie
Fotogrammetrie is afhankelijk van het vinden van hetzelfde fysieke punt in verschillende foto's. Dat werkt goed op steen, hout, stof of matte objecten. Auto's zijn vrijwel het tegenovergestelde:
- Glanzende lak reflecteert de omgeving, waardoor hetzelfde punt er op elke foto anders uitziet.
- Glas is tegelijkertijd doorzichtig en reflecterend.
- Chroom en donkere lak hebben weinig zichtbare textuur om te matchen.
- Grote, gladde panelen bieden weinig unieke kenmerken.
Het resultaat bij fotogrammetrie is vaak een hobbelige, gesmolten ogende carrosserie met gaten in de ruiten. Professionals omzeilen dit door auto's in te spuiten met matte scanspray, polarisatiefilters te gebruiken of te werken met gecontroleerd studiolicht. Voor de meeste mensen is dat onpraktisch.
Waarom 3DGS auto's visueel beter aan kan
Gaussian splatting hoeft niet het precieze oppervlak te begrijpen om er goed uit te zien. Het kan reflecties weergeven als 'view-dependent' kleur: de lak ziet er vanuit verschillende hoeken anders uit, net als in het echt. Dunne details, zachte randen en deels transparante gebieden zijn ook makkelijker weer te geven met deeltjes dan met driehoekjes.
Daarom ziet een 3D-scan van een auto met 3DGS er vaak verbluffend realistisch uit, zelfs als deze is gemaakt met een telefoon in een normale omgeving. Glanzende oppervlakken blijven een uitdaging (we behandelen dit in why shiny paint is hard for Gaussian splatting), maar de onvolkomenheden zijn minder storend dan de gaten en hobbels bij fotogrammetrie.
Vergelijking
| Gaussian splatting (3DGS) | Fotogrammetrie | |
|---|---|---|
| Output | Wolk van Gaussians (.ply) | Mesh met textuur (OBJ, FBX, glTF) |
| Visueel realisme | Zeer hoog, inclusief reflecties | Goed op matte oppervlakken, zwakker op glans |
| Glanzende autolak | Wordt redelijk goed verwerkt | Vaak hobbelig of incompleet |
| Geometrie bewerken | Beperkt | Volledige mesh-bewerking |
| Opmeten / CAD | Niet geschikt | Mogelijk, met zorg |
| Opname-inspanning | Eén stabiele video | Veel foto's, vaak gecontroleerd licht |
| Real-time weergave | Snel met splat-renderers | Snel met elke 3D-engine |
| Ondersteuning in software | Groeit snel | Universeel |
Wanneer kies je voor fotogrammetrie
Fotogrammetrie is nog steeds de winnaar als je het volgende nodig hebt:
- Geometrie om te opmeten, inspecteren of voor reverse-engineering
- Een model om te 3D-printen
- Een strakke topologie voor animatie of physics
- Compatibiliteit met tools die nog geen splats ondersteunen
Wanneer kies je voor Gaussian splatting
3DGS is de betere keuze als het je vooral gaat om hoe de auto eruitziet:
- Een interactieve 3D-weergave om met anderen te delen
- Een realistische auto in een real-time scène, AR- of VR-prototype
- Referentiemateriaal voor CGI- en game-artiesten
- Onderzoek en experimenten met 'neural rendering'
- Een snelle visuele kopie van je eigen auto
Voor het werken met splats in een engine, zie using car splats in Unreal Engine.
Probeer een 3D-scan van een auto zonder een pipeline te bouwen
Je eigen 3DGS-pipeline bouwen betekent frames selecteren, camera-reconstructie uitvoeren, de training afstellen en de ondergrond en achtergrond opschonen. CarTwin doet dat voor je, met een pipeline die speciaal voor auto's is gebouwd. Je filmt twee rustige rondes om de auto met je telefoon, uploadt de video en na ongeveer 60 tot 75 minuten ontvang je een model dat je in de browser kunt bekijken, kunt delen via een link en kunt downloaden als .ply.
CarTwin is nog volop in ontwikkeling en in een vroege pilotfase. De resultaten zijn dus nog niet altijd een exacte kopie van de auto. Als een scan mislukt door een fout in onze software, krijg je je credit terug.
Conclusie
Fotogrammetrie en Gaussian splatting zijn geen rivalen, maar eerder gereedschappen voor verschillende taken. Voor meetbare geometrie kies je fotogrammetrie. Voor realistische, deelbare beelden van een auto, vastgelegd met één video, is 3DGS moeilijk te overtreffen. De snelste manier om te oordelen is door het zelf te zien: bekijk de voorbeelden, lees hoe je een auto filmt voor 3DGS en start je eerste scan. Bundels zijn er al vanaf één credit; zie onze prijzen.
