Kooperative Wahrnehmung · Containerterminal
Das Objekt, das Ihr Fahrzeug nicht sieht: kooperative Wahrnehmung
Ein autonomer Terminal-Trecker nähert sich einer Kreuzung, an der ein Containerstapel einen Stapler verdeckt. Ein Wahrnehmungsknoten am Fahrbahnrand sendet den Zustand des Objekts statt eines weiteren Videostreams, und das Fahrzeug verzögert, bevor es selbst etwas sieht.
Kapitel
KONZEPTFILM
Szenen, Fahrzeuge und Sensoren sowie die Boxen, Spuren und Beschriftungen im Bild sind Spikedges eigene 3D-Animation, keine Ausgabe eines Detektors oder Reglers. Der Film stellt keine Messbehauptungen auf.
01Was der Film zeigt
Das ist kein Problem der Sensorqualität. Eine Kamera erkennt nichts durch einen Container, ein Lidar liefert keine Punkte hinter einer Wand; in den eigenen Daten des Fahrzeugs gibt es nichts zu verbessern. Ein größeres neuronales Netz ändert diese Geometrie nicht. Das Fahrzeug braucht keine bessere Schätzung, sondern einen anderen Blickwinkel.
Der Knoten an der Ecke fusioniert Kamera und Radar, behält, worin beide übereinstimmen, und sendet Identität, Klasse, Position, Richtung, Geschwindigkeit, Unsicherheit und den Beobachtungszeitpunkt. Ein über das Netzwerk empfangener Track beschreibt immer die Vergangenheit; das Fahrzeug überträgt ihn in sein eigenes Bezugssystem und in die Gegenwart, bevor es fragt, ob zwei Zukünfte zur selben Zeit denselben Raum beanspruchen.
Die Wahrnehmung plant auf Linux, die Regelung antwortet innerhalb einer Frist, der unabhängige Sicherheitspfad arbeitet in jedem Fall weiter. Kooperative Wahrnehmung ersetzt diesen Pfad nicht, sie verschafft der Maschine Zeit, bevor sie handeln muss. Die Sichtlinie in der Szene wurde nicht von Hand gezeichnet, sondern per Ray-Casting in Blender geprüft.
02Transkript
Der Film ist englisch vertont. Unter jeder Zeile steht der Originaltext; ein Klick auf den Zeitstempel startet den Film an dieser Stelle.
Das gefährlichste Objekt in der autonomen Wahrnehmung kann das sein, das keiner Ihrer Sensoren sieht.
The most dangerous object in autonomous perception can be the one none of your sensors can see.
Zwei Fahrzeuge, eine Kreuzung und eine Wand aus Containern dazwischen.
Two vehicles, one junction, and a wall of containers between them.
Eine Kamera erkennt nichts durch einen Container. Ein Lidar liefert keine Punkte hinter einer Wand.
A camera cannot detect through a container. A lidar cannot return points from behind a wall.
Und ein größeres neuronales Netz ändert keine der beiden Tatsachen.
And a larger neural network does not change either fact.
Das Fahrzeug braucht keine bessere Schätzung. Es braucht einen anderen Blickwinkel.
The vehicle does not need a better guess. It needs another point of view.
Vom Mast aus ist das Objekt einfach sichtbar.
From the mast the object is simply visible.
Aus der Erkennung wird ein Track: Position, Richtung und wie sicher wir sind.
Detection becomes a track: position, heading, and how sure we are.
Kamera und Radar sind unterschiedliche Physik, also versagen sie unterschiedlich. Der Knoten behält, worin sie übereinstimmen.
Camera and radar are different physics, so they fail differently. The node keeps what they agree on.
Er sendet keinen weiteren Videostream. Er sendet den Zustand des Objekts.
It does not send another video stream. It sends the state of the object.
Aber ein über das Netzwerk empfangener Track beschreibt, wo etwas war, nicht wo es ist. Zeit muss Teil der Wahrnehmung sein.
But a track received over a network describes where something was, not where it is. Time has to be part of perception.
In einem gemeinsamen Bezugssystem ausgerichtet, existieren beide Fahrzeuge endlich im selben Weltmodell.
Aligned in one frame of reference, the two vehicles finally exist in the same world model.
Erkennung ist nicht die Entscheidung. Die Frage ist, ob zwei Zukünfte denselben Raum teilen.
Detection is not the decision. The question is whether two futures share the same space.
Die Wahrnehmung plant auf Linux. Die Regelung antwortet innerhalb einer Frist.
Perception plans on Linux. Control answers on a deadline.
Das Fahrzeug verzögert, bevor es sehen kann. Kein Nothalt. Eine Maschine, die Zeit hatte.
The vehicle slows before it can see. No emergency stop. A machine that had time.
Kooperative Wahrnehmung ersetzt die Sicherheitskette nicht. Sie verschafft der Maschine Zeit, bevor sie handeln muss.
Cooperative perception does not replace the safety chain. It gives the machine time before it has to act.
