Tiny-DroNeRF: Tiny Neural Radiance Fields aboard Federated Learning-enabled Nano-drones

Die Arbeit stellt Tiny-DroNeRF vor, ein auf einem ultra-leistungssparenden Mikrocontroller laufendes, federiertes Lernsystem für NeRF-Modelle auf Nano-Drohnen, das durch eine 96%ige Speicherreduktion und kollaboratives Training trotz strenger Ressourcenbeschränkungen eine präzise 3D-Szenenrekonstruktion ermöglicht.

Ilenia Carboni, Elia Cereda, Lorenzo Lamberti, Daniele Malpetti, Francesco Conti, Daniele Palossi

Veröffentlicht 2026-03-03
📖 3 Min. Lesezeit☕ Kaffeepausen-Lektüre

Each language version is independently generated for its own context, not a direct translation.

Stellen Sie sich vor, Sie haben eine winzige Drohne, die so leicht ist wie ein Briefumschlag (weniger als 30 Gramm) und so klein wie eine Handfläche. Diese kleinen Roboter sind wahre Meister der Geschicklichkeit: Sie können durch enge Gänge in verlassenen Fabriken fliegen oder in Trümmern nach Überlebenden suchen, wo große Drohnen nicht hinkommen.

Das Problem ist jedoch: Diese winzigen Helden haben nur einen winzigen Gehirn. Sie haben kaum Speicherplatz und verbrauchen so wenig Strom wie eine kleine LED-Lampe.

Das große Rätsel: Wie baut man eine 3D-Karte mit einem Taschenrechner?
Normalerweise brauchen Computer, die eine Umgebung so detailliert in 3D nachbauen können, dass man sie später aus jeder Perspektive betrachten kann (eine Technik namens „NeRF"), riesige Supercomputer mit Grafikkarten, die so viel Strom verbrauchen wie ein kleiner Kühlschrank. Unsere winzige Drohne hat dafür weder den Platz noch die Energie.

Die Lösung: Tiny-DroNeRF
Die Forscher haben nun eine Lösung namens Tiny-DroNeRF entwickelt. Man kann sich das wie folgt vorstellen:

Stellen Sie sich vor, Sie wollen ein riesiges Puzzle aus 10.000 Teilen zusammenlegen.

  • Der alte Weg: Ein riesiger Tisch (ein Supercomputer) ist nötig, um alle Teile gleichzeitig zu sehen.
  • Der neue Weg (Tiny-DroNeRF): Die Forscher haben das Puzzle so verkleinert und vereinfacht, dass es auf einen einzigen kleinen Notizblock passt, der auf der Drohne sitzt. Sie haben den Algorithmus so stark optimiert, dass er mit extrem wenig Speicher und Rechenkraft auskommt. Das Ergebnis ist eine 3D-Karte, die zwar nicht perfekt ist (etwas unscharfer als auf dem Supercomputer), aber für die Drohne absolut ausreichend, um sich nicht zu verirren.

Das Teamwork-Prinzip: Federated Learning
Aber was, wenn eine einzelne Drohne nur einen kleinen Teil des Raumes sieht? Sie kann das ganze Bild nicht allein rekonstruieren.
Hier kommt das Federated Learning (verbundenes Lernen) ins Spiel.

Stellen Sie sich eine Gruppe von vier dieser kleinen Drohnen vor, die in einem großen, dunklen Raum fliegen:

  1. Drohne A sieht nur die linke Wand.
  2. Drohne B sieht nur die rechte Wand.
  3. Drohne C sieht den Boden.
  4. Drohne D sieht die Decke.

Früher hätten sie alle ihre Fotos zu einer Zentrale schicken müssen, um dort ein großes Bild zu machen. Aber das kostet zu viel Zeit und Energie.
Der neue Trick: Jede Drohne baut erst eine kleine, eigene 3D-Karte von dem, was sie sieht. Dann tauschen sie nur die Ideen (die mathematischen Regeln, wie die Wände aussehen) untereinander aus, nicht die ganzen Fotos.

  • Drohne A sagt: „Ich habe gelernt, wie eine rote Wand aussieht."
  • Drohne B sagt: „Ich habe gelernt, wie eine blaue Wand aussieht."
  • Zusammen ergeben sie ein komplettes Bild des Raumes, ohne dass jemand jemals ein einziges Foto der anderen gesehen hat.

Das Ergebnis
Durch diese Kombination aus extrem sparsamer Software und klugem Teamwork schaffen es die Forscher zum ersten Mal, dass diese winzigen Drohnen komplexe 3D-Karten ihrer Umgebung direkt an Bord erstellen können.

  • Der Speicher-Check: Sie haben den Speicherbedarf um 96 % reduziert (von einem riesigen Haufen auf eine winzige Schachtel).
  • Die Qualität: Die 3D-Bilder sind immer noch sehr gut, nur minimal unschärfer als auf einem Supercomputer.
  • Die Geschwindigkeit: Eine Drohne braucht etwa 97 Minuten, um eine komplette Karte zu lernen. Aber mit dem Teamwork-Verfahren wird das Ergebnis noch besser, als wenn jede Drohne allein arbeiten würde.

Fazit:
Diese Arbeit ist wie der Bau eines Hochhauses aus Lego-Steinen, das auf einer einzigen kleinen Drohne Platz findet. Es zeigt, dass wir auch mit winzigsten Robotern in Zukunft komplexe Aufgaben in engen und gefährlichen Räumen lösen können, ohne auf riesige Computer angewiesen zu sein.