Multiple Object Detection and Tracking in Panoramic Videos for Cycling Safety Analysis

Dit onderzoek presenteert een innovatief drie-stapskader voor het detecteren en volgen van objecten in panoramische video's om de veiligheid van fietsers te analyseren, waarbij door het segmenteren van beelden en het aanpassen van trackingmodellen voor vervormingen en randcontinuïteit de prestaties aanzienlijk worden verbeterd, zoals blijkt uit een succesvolle toepassing voor het detecteren van inhalen op Londense wegen.

Jingwei Guo, Yitai Cheng, Meihui Wang, Ilya Ilyankou, Natchapon Jongwiriyanurak, Xiaowei Gao, Nicola Christie, James Haworth

Gepubliceerd 2026-02-20
📖 5 min leestijd🧠 Diepgaand

Each language version is independently generated for its own context, not a direct translation.

🚴‍♂️ De Missie: De Fietsveiligheid van de "Alziende Oog"

Stel je voor dat je fietst door Londen. Je hebt een helm op met een camera die 360 graden kan zien. Het is alsof je een holle bol hebt om je heen, waarin je alles ziet: voor je, achter je, links, rechts en zelfs boven je hoofd. Dit is een "panoramische video".

Het probleem? De meeste slimme computerprogramma's (die auto's en fietsers herkennen) zijn getraind op platte foto's. Als je die programma's direct op die holle bol (de 360-graads video) laat kijken, wordt het een puinhoop. De randen van de foto zijn vervormd, alsof je door een kikkerbril kijkt. Auto's die dichtbij zijn, worden gigantisch en uitgerekt; auto's die ver weg zijn, worden piepklein. En als een auto precies over de rand van de foto loopt, denkt de computer dat het twee verschillende auto's zijn, terwijl het er maar één is.

De onderzoekers van dit paper hebben een drie-stappenplan bedacht om deze computer "wijs" te maken, zodat hij veiligheidsrisico's voor fietsers kan detecteren.


🛠️ Stap 1: De "Sneeuwbollen" Oplossen (Object Detectie)

Het Probleem:
Een 360-graads foto is als een wereldbol die plat is uitgerold. Als je daar een auto op tekent, kan die auto eruitzien alsof hij uit elkaar valt of vervormd is.

De Oplossing:
De onderzoekers hebben een slimme truc bedacht. In plaats van de hele bol in één keer te bekijken, snijden ze de bol op in vier kleinere stukken (zoals vier sneeuwbollen die je naast elkaar legt).

  1. Ze projecteren het beeld op vier verschillende vlakke vlakken.
  2. Ze laten de slimme computer (een AI genaamd YOLO) elk van die vier vlakken apart bekijken. Omdat deze vlakken minder vervormd zijn, herkent de computer de auto's en fietsers veel beter.
  3. Vervolgens plakken ze de resultaten weer terug op de grote bol.

De Analogie:
Het is alsof je een grote, gekromde pizza hebt die je niet goed kunt snijden. In plaats van te proberen de hele ronde pizza in één keer te snijden, knip je hem in vier driehoekige stukken. Je snijdt elk stukje netjes, en plakt ze daarna weer samen. De computer ziet nu de "pizza" (de auto's) veel scherper.


🏃‍♂️ Stap 2: De "Naamloze" Auto's Herkennen (Volgen van Objecten)

Het Probleem:
Stel je voor dat een auto van rechts naar links rijdt en precies over de rand van je camera verdwijnt. In een normaal video zou je de auto zien verdwijnen. In een 360-graads video duikt diezelfde auto direct weer op aan de andere kant van het scherm.
De computer denkt dan vaak: "Oh, die auto is weg! En oh, daar is een nieuwe auto!" Dit noemen we een ID-switch (de computer verliest de naam van de auto). Ook denkt de computer soms dat een vrachtwagen en een busje dezelfde auto zijn, omdat ze dicht bij elkaar staan.

De Oplossing:
De onderzoekers hebben het programma StrongSORT (een slimme volger) aangepast met twee regels:

  1. De "Naam" Regels: De computer krijgt de opdracht om alleen auto's te vergelijken met andere auto's, en fietsers met fietsers. Hij mag geen busje en een vrachtwagen met elkaar verwarren.
  2. De "Rondje" Regels: De computer leert dat als een object aan de linkerkant verdwijnt, het aan de rechterkant weer kan opduiken. Hij houdt de "naam" van de auto vast, zelfs als die over de rand van de wereldbol loopt.

De Analogie:
Stel je voor dat je een dansfeest hebt in een kamer met spiegels aan alle kanten. Als iemand de kamer uitloopt, zie je hem direct weer in de spiegel aan de andere kant. Een domme volger denkt: "Die persoon is weg, en daar komt een nieuwe!" Maar onze slimme volger denkt: "Ah, dat is nog steeds Jan, hij is gewoon door de deur gegaan en komt nu via de spiegel weer terug."


🚗 Stap 3: Het "Gevaarlijke Inhalen" Detecteren

Het Doel:
Het uiteindelijke doel is om te weten te komen wanneer een auto een fietser veilig of onveilig passeert.

Hoe het werkt:
Het systeem kijkt naar de beweging. Als een auto van achteren komt, de fietser passeert en weer voorbij is, telt het systeem dit als een "inhaalmanoeuvre".

  • Als de auto snel voorbij schiet, is het een gevaar.
  • Als de auto langzaam en veilig passeert, is het goed.

De Resultaten:
De onderzoekers hebben dit getest op echte video's van fietsers in Londen.

  • Beter zien: De nieuwe methode zag veel meer kleine auto's en fietsers dan de oude methoden.
  • Minder fouten: De computer verwisselde de namen van auto's veel minder vaak (10% minder fouten).
  • Succes: Het systeem kon in 82% van de gevallen correct zeggen: "Let op, daar komt een auto langs!"

🌟 Waarom is dit belangrijk?

Vroeger moesten we wachten op ongelukken of politieverslagen om te weten waar het gevaarlijk is. Maar die gegevens zijn vaak te weinig of te vaag.

Met deze nieuwe "holle bol-camera" en de slimme computer kunnen we continu kijken naar het gedrag op de weg. Het is alsof we een superheld hebben die nooit slaapt en 360 graden om zich heen ziet.

  • Het kan aantonen of auto's veilig langskomen.
  • Het kan helpen bij het ontwerpen van betere fietspaden.
  • Het kan in de toekomst zelfs een waarschuwing geven aan de fietser: "Pas op, er komt een auto aan!" voordat het te laat is.

Kortom: De onderzoekers hebben een manier gevonden om de "kikkerbril" van de 360-graads camera te corrigeren, zodat computers de wereld om de fietser heen eindelijk echt kunnen begrijpen. Dit maakt het leven op de fiets veiliger voor iedereen.

Ontvang papers zoals deze in je inbox

Gepersonaliseerde dagelijkse of wekelijkse digests op basis van jouw interesses. Gists of technische samenvattingen, in jouw taal.

Probeer Digest →