StegoNGP: 3D Cryptographic Steganography using Instant-NGP

Het artikel introduceert StegoNGP, een parameterloze methode die Instant-NGP gebruikt om een volledige 3D-scène veilig en onopvallend te verbergen in de netwerkweegs door middel van sleutelgecontroleerde hash-codering, zonder de modelarchitectuur te wijzigen.

De kern

Stel je voor dat je een prachtige, driedimensionale wereld bouwt in de computer, zoals een virtueel museum of een speelgoedwereld. Dit is wat mensen doen met technologie die Instant-NGP heet: het maakt razendsnelle, realistische 3D-afbeeldingen.

Nu, stel je voor dat je diezelfde 3D-wereld wilt gebruiken om een geheime boodschap te verstoppen. Niet zomaar een klein woordje, maar een hele andere 3D-wereld, volledig verborgen binnen de eerste. En het allerbelangrijkste: als iemand anders naar je model kijkt, ziet hij alleen de gewone wereld. Hij vermoedt niets van het geheim.

Dat is precies wat StegoNGP doet. Het is een slimme truc om geheime 3D-werelden te verstoppen in gewone 3D-modellen, zonder dat het model er anders uitziet of zwaarder wordt.

Hier is hoe het werkt, vertaald in alledaagse taal:

1. De Magische Sleutel (De Hash-functie)

In de basis van Instant-NGP zit een soort "magische lijst" (een hash-tabel). Als de computer een punt in de 3D-wereld wil zien, vraagt hij aan deze lijst: "Welke kleur heeft dit punt?"

Normaal gebruikt de computer een standaardrecept (een reeks grote priemgetallen) om de punten op die lijst te vinden.

• StegoNGP's truc: Ze zeggen: "Wacht even, we gebruiken niet alleen het standaardrecept, maar we hebben ook een geheime sleutel."

2. De Twee Werelden in Eén Doos

Stel je een enorme, lege kast voor (het computermodel).

• Wereld A (De dekmantel): Dit is de wereld die iedereen mag zien. Als je de standaardsleutel gebruikt, opent de kast en zie je alleen deze wereld. Het ziet er perfect uit, net als een normaal 3D-model.
• Wereld B (Het geheim): Dit is de wereld die je wilt verstoppen (bijvoorbeeld een copyright-bericht of een geheime foto). Als je de geheime sleutel gebruikt, verandert de "magische lijst" binnenin de kast. Plotseling wijst dezelfde kast naar een heel andere verzameling punten. De computer bouwt nu Wereld B op, terwijl de structuur van de kast exact hetzelfde blijft.

Het is alsof je een boek hebt. Als je het op de standaard manier leest, is het een verhaal over een kat. Maar als je een geheime code gebruikt om te lezen, zie je dat elke zin eigenlijk een code is voor een verhaal over een ruimtevaartuig. Het boek zelf ziet er identiek uit; alleen de lezer met de code ziet de waarheid.

3. Waarom is dit zo slim?

Eerdere methoden hadden vaak extra "luie" onderdelen nodig om het geheim te verbergen. Dat was als het toevoegen van een zware, opvallende slot aan je deur. Iedereen zag: "Hé, die deur heeft een extra slot, daar zit iets verstop!"

StegoNGP doet dit zonder extra gewicht.

• Het model heeft exact hetzelfde aantal parameters (de bouwstenen) als een normaal Instant-NGP-model.
• Het is onmogelijk te onderscheiden van een normaal model. Een hacker kan het bestand openen en ziet alleen een standaard 3D-model. Er is geen "extra slot" te zien.

4. De Super-Securiteit (Meerdere Sleutels)

De auteurs hebben nog een extra laag toegevoegd: Multi-Key.
Stel dat je niet één sleutel hebt, maar 16 verschillende sleutels die elk een klein stukje van het geheim openen.

• Als een hacker één sleutel vindt, kan hij niets zien. Het is alsof je één stukje van een puzzel hebt; je ziet alleen een wazig beeld.
• Je moet alle 16 sleutels hebben om het volledige geheim te zien. Zelfs als ze 75% van de sleutels hebben, blijft het geheim onleesbaar. Dit maakt het extreem veilig tegen hackers die proberen om stukje bij beetje de code te kraken.

Samenvatting in een metafoor

Stel je voor dat je een spiegel hebt.

• Voor de gewone toeschouwer (zonder sleutel) weerspiegelt de spiegel gewoon de kamer waarin hij staat (de dekwereld).
• Maar voor de persoon met de geheime sleutel (een specifieke code), verandert de spiegel in een raam naar een volledig andere kamer (de geheime wereld).
• De spiegel zelf is niet veranderd. Hij is niet dikker, niet zwaarder en er zit geen extra slot op. Voor iedereen die niet weet hoe hij moet kijken, is het gewoon een normale spiegel.

Conclusie:
StegoNGP is een revolutionaire manier om grote hoeveelheden geheime informatie (zelfs hele 3D-werelden) veilig te verstoppen in digitale kunst, zonder dat iemand erachter komt dat er iets verstop zit. Het combineert de snelheid van moderne 3D-technologie met de veiligheid van cryptografie.

Technische samenvatting

Probleemstelling

Hoewel Instant Neural Graphics Primitives (Instant-NGP) een doorbraak heeft betekend in de snelle reconstructie van 3D-scènes, blijft het veilig verbergen van grote hoeveelheden data (zoals een volledige 3D-scene) binnen deze modellen een uitdaging. Bestaande methoden voor 3D-steganografie en watermerken hebben aanzienlijke beperkingen:

• Beperkte capaciteit: Veel methoden kunnen slechts lage-capaciteit data (zoals binaire berichten of kleine logo's) verbergen.
• Detecteerbaarheid: Methoden zoals GS-Hider vereisen extra parameters of architecturale wijzigingen (bijv. het toevoegen van extra neurale netwerken of parameters), waardoor het model structureel detecteerbaar is als een steganografisch model.
• Afhankelijkheid van externe decoders: Veel technieken vereisen externe netwerken om de verborgen informatie te extraheren, wat de veiligheid en onopvallendheid ondermijnt.
• Integriteit: Methoden die gebruikmaken van "backdoors" (zoals geheime viewpoints) beschadigen vaak de integriteit van het 3D-model of kunnen geen volledige 3D-scènes verbergen.

Er is dus behoefte aan een methode die hoge capaciteit biedt, geen extra parameters toevoegt, en het model ononderscheidbaar maakt van een standaard Instant-NGP-model.

Methodologie: StegoNGP

De auteurs stellen StegoNGP voor, een parameterloos raamwerk voor 3D-cryptografische steganografie dat de inherente structuur van Instant-NGP benut.

1. Het Kernprincipe: Hash-gecontroleerde Scène-Switching
In standaard Instant-NGP worden 3D-coördinaten gemapt naar een kenmerkentabel (feature table) via een hash-functie die een vaste reeks grote priemgetallen gebruikt. StegoNGP transformeert deze hash-functie in een sleutelgecontroleerde scène-switcher:

• Cover Scène (S): Wordt gerenderd met de standaard (default) reeks priemgetallen ($\Pi$). Dit is wat een gebruiker ziet zonder de geheime sleutel.
• Verborgen Scène (B): Wordt gerenderd met een geheim priemgetallen-reeks ($K$).
• Eén Model: Een enkel Instant-NGP-model wordt getraind om beide scènes te optimaliseren. Het model leert dat dezelfde netwerkweegs (weights) twee verschillende 3D-weergaven kunnen produceren, afhankelijk van welke hash-sleutel wordt gebruikt om de indexen in de feature tabel te berekenen.

2. Training en Loss-functie
Tijdens het trainen wordt willekeurig gekozen tussen de cover-scène (met sleutel $\Pi$) en de verborgen scène (met sleutel $K$). De loss-functie minimaliseert de fout voor beide scènes tegelijkertijd, zonder dat er extra parameters worden toegevoegd aan het model.

3. Multi-Key Schem (Versterkte Beveiliging)
Om de beveiliging verder te verhogen, stellen de auteurs een Multi-Key Level-Assignment Scheme voor:

• In plaats van één geheime sleutel voor alle hash-niveaus, worden meerdere onafhankelijke sleutels ($K_1, K_2, ..., K_m$) toegewezen aan de verschillende resolutieniveaus van de hash-tabel.
• Dit vergroot de cryptografische sleutelruimte exponentieel. Een aanvaller moet niet één, maar alle $m$ sleutels en de juiste toewijzingsvolgorde kennen om de verborgen scène te reconstrueren.

Belangrijkste Bijdragen

1. Parameterloze Stenografie: StegoNGP voegt geen extra parameters toe aan het Instant-NGP-model. Het resultaat is architectonisch en qua grootte ononderscheidbaar van een standaard Instant-NGP-model, wat het "plausible deniability" (aannemelijke ontkenning) garandeert.
2. Hoge Capaciteit: Het is mogelijk om een volledige, hoogwaardige 3D-scène te verbergen binnen een andere 3D-scène, in plaats van slechts kleine data-fragmenten.
3. Cryptografische Beveiliging: De toegang tot de verborgen scène is strikt afhankelijk van de cryptografische sleutel. Zonder de juiste sleutel (of met een gedeeltelijke sleutel) wordt alleen ruis of de cover-scène gerenderd.
4. Multi-Key Robuustheid: Het Multi-Key-schem biedt weerstand tegen aanvallen waarbij een aanvaller slechts een deel van de sleutel heeft achterhaald.

Resultaten

De auteurs hebben hun methode getest op synthetische datasets (Blender Synthetic) en real-world datasets (Mip-Nerf-360).

• Reconstructie Kwaliteit: StegoNGP bereikt reconstructiekwaliteit (gemeten in PSNR, SSIM en LPIPS) die vergelijkbaar is met, en soms zelfs iets beter is dan, een standaard Instant-NGP-model dat alleen de cover-scène leert. Dit bewijst dat het gezamenlijk trainen van twee scènes geen significante kwaliteitsverlies veroorzaakt.
• Onopvallendheid: Visuele vergelijkingen tonen aan dat de cover-scène geen artefacten vertoont die het model onderscheiden van een normaal model.
• Vergelijking met GS-Hider: In tegenstelling tot GS-Hider (dat extra parameters toevoegt en detecteerbaar is), heeft StegoNGP 0 MB extra overhead. GS-Hider is structureel detecteerbaar door zijn grotere bestandsgrootte.
• Sleutelgevoeligheid: Experimenten tonen aan dat het model alleen de verborgen scène reproduceert met de exacte geheime sleutel. Gebruik van een verkeerde sleutel of een gedeeltelijk juiste sleutel resulteert in incoherente ruis.
• Multi-Key Analyse: Bij het Multi-Key-schem (bijv. $m=16$) is het onmogelijk om de verborgen scène te reconstrueren zonder 100% van de sleutels. Zelfs bij 75% van de juiste sleutels blijft de output onbruikbaar.

Betekenis en Impact

StegoNGP introduceert een nieuw paradigma voor informatieverbergen in neurale velden. Door de hash-mapping van Instant-NGP te gebruiken als cryptografische sleutel, overkomt het de beperkingen van eerdere methoden:

• Het maakt hoogwaardige copyrightbescherming en geheime communicatie mogelijk binnen 3D-modellen zonder dat de integriteit van het model wordt aangetast of dat het model verdacht wordt.
• De methode is cryptografisch veilig met een sleutelruimte die astronomisch groot is (bij Multi-Key), waardoor brute-force-aanvallen onmogelijk zijn met huidige rekenkracht.
• Het biedt een schaalbare oplossing voor de beveiliging van digitale 3D-activa in een wereld waar 3D-content steeds meer waarde krijgt.

Kortom, StegoNGP bewijst dat het mogelijk is om "twee werelden" in één model te verbergen, waarbij de toegang tot de geheime wereld volledig wordt beschermd door cryptografie, zonder de zichtbaarheid of grootte van het model te beïnvloeden.