Der Weg
Eine Drohne im Einsatz erzeugt einen H.264-Videostream und, bei Fluggeräten, die das unterstützen, eine MAVLink-Verbindung zum Autopiloten. Beides muss einen Betreiber in der Einsatzleitung erreichen, unter Umständen über das Netz einer Partnerbehörde, unter Umständen bis zu einer öffentlichen Zuschauerseite, die die Einsatzleitung an eine Pressestelle weitergeben kann. Das Cloud-Relay von Nebli sitzt in der Mitte und überträgt die Bytes. Dieser Abschnitt beschreibt den Weg über das Relay; DJI-Drohnen nutzen eine andere, einfachere Architektur, die weiter unten beschrieben ist.
Es gibt drei Softwarekomponenten:
- Proxy am Einsatzort. Läuft auf einem Laptop im lokalen Netz der Drohne: einem robusten Toughbook, jedem Rechner mit Linux, macOS oder Windows, was das Team eben hat. Nimmt Video und Telemetrie der Drohne auf und sendet sie über die vorhandene Verbindung hinaus, ob Mobilfunk-Hotspot, Starlink oder gebündelter Router. Zeichnet gleichzeitig auf eine SD-Karte auf, damit das Material erhalten bleibt, wenn die Verbindung abbricht.
- Cloud-Relay. Läuft bei AWS in einer einzigen Region in den USA. Der Proxy verbindet sich dorthin und bleibt verbunden. Ebenso der Client des Betreibers. Das Relay leitet die Bytes zwischen beiden weiter und fügt die Wiederherstellungsschicht hinzu, die Video über Mobilfunk nutzbar hält.
- Client des Betreibers. Läuft auf dem Laptop in der Einsatzleitung, auf Wunsch als Dienst, der beim Hochfahren startet. Stellt Video und MAVLink der Drohne unter
127.0.0.1bereit, sodass jede übliche Bodenkontrollsoftware (CCA3, Mission Planner, QGroundControl) sich damit verbindet, als stünde die Drohne auf demselben Tisch.
Den Proxy und den Client betreiben Sie entweder mit der Nebli-CLI (nebli proxy start und nebli client start) oder mit der Desktop-App Hover Relay, einer Version derselben zwei Rollen zum Klicken für Betreiber, die nicht im Terminal arbeiten. Aus Sicht der Drohne spricht sie mit einem Rechner in ihrem eigenen Netz. Aus Sicht des Betreibers ist die Drohne auf dem Laptop. Dazwischen kümmert sich das Relay um das öffentliche Internet.
Der Weg für DJI
DJI-Drohnen überspringen alle drei Komponenten oben. Die DJI-App (Pilot 2 oder DJI Fly) sendet RTMP-Video direkt an einen Ingest-Punkt in der Cloud, entweder nach einer Anmeldung mit der geschäftlichen E-Mail-Adresse in Pilot 2 selbst oder über einen Stream-Schlüssel, der in das Feld für benutzerdefiniertes RTMP der App eingefügt wird. Es gibt keinen Proxy am Einsatzort, keinen Client des Betreibers und an keinem Ende einen Laptop, nur die Fernsteuerung oder das Smartphone, das der Pilot schon in der Hand hat. Das Bild erscheint direkt in der Ansicht des Deployments im Dashboard von Nebli. Der RTMP-Push überträgt nur Video, ohne MAVLink-Verbindung, also bleiben mit einem eingefügten Stream-Schlüssel Flugtelemetrie und Gimbal-Steuerung auf der Fernsteuerung, genau wie heute. Mit der Anmeldung in Pilot 2 kommt auch die Flugtelemetrie, und sobald der Pilot auf der Fernsteuerung zustimmt, können Sie den Gimbal ausrichten und die Kamera aus dem Dashboard bedienen; der Pilot fliegt weiter mit der Fernsteuerung. Welcher der drei Wege für DJI zu Ihrer Flotte passt, steht unter DJI-Drohnen.
Warum die Mitte der spannende Teil ist
Mobilfunk- und Satellitenverbindungen verhalten sich nicht wie Ethernet. Pakete kommen in falscher Reihenfolge an. Sie fallen gehäuft aus, wenn ein Mast übergibt. Die Umlaufzeit springt von 50 ms auf 600 ms, wenn die Verbindung ausgelastet ist. Ein naives RTP-Relay über UDP macht aus solchen Ereignissen Pixelbrei, eingefrorene Bilder und verzögerte Befehle.
Das Relay hat dafür drei Mechanismen:
Wiederherstellung bei Verlust (Neuübertragung per NACK)
Das Relay hält einen laufenden Puffer der letzten Pakete. Wenn die Empfangsseite eine Lücke in der Folge bemerkt, fordert sie eine Neuübertragung an. Das Relay holt das Paket aus dem Puffer und sendet es erneut, so getaktet, dass sich Neuübertragungen nicht auf frisches Video stapeln und die Verbindung überlasten. Beide Abschnitte des Wegs, vom Einsatzort in die Cloud und von der Cloud zum Betreiber, haben ihre eigene Schicht für Neuübertragungen.
Toleranz für Neuordnung
Mobilfunknetze ordnen Pakete regelmäßig neu. Ein naives System sieht eine Lücke in der Folge und fordert sofort eine Neuübertragung an. Meist kommt das „fehlende“ Paket 15 bis 25 ms später an, weil es über einen anderen Mast lief. Das Relay hält die Lücke 75 ms offen, bevor es sie als Verlust einstuft. Das Ergebnis: Der Verkehr durch Neuübertragungen bleibt ungefähr so groß wie der tatsächliche Verlust, statt von Neuordnung bestimmt zu werden, die sich von selbst auflöst.
Ehrliche Messung
Die Verlustzähler rechnen verspätete Pakete wieder gut. Wenn ein Paket ankommt, nachdem wir es kurz als verloren gezählt haben, sinkt der Zähler wieder. Klingt selbstverständlich, aber die meisten Relays tun das nicht; dann steigen die Verlustzahlen über eine Sitzung immer weiter und verlieren jede Bedeutung für den Betrieb. Nebli Drones zeigt die echten Zahlen live an, in der Verbindungsanzeige der App Hover Relay, in nebli logs und im Dashboard, statt sie davonlaufen zu lassen.
Kurz gesagt. Mobilfunk ist unordentlich; das Relay ist darauf ausgelegt. Der Preis sind etwa 75 ms Verzögerung für die Wiederherstellung, dafür eine Größenordnung weniger Verkehr durch Neuübertragungen.
Was der Betreiber sieht
Im Alltag sollte der Betreiber vom Relay fast nichts merken. Auf dem Weg über das Relay erscheint die Drohne unter 127.0.0.1 in seiner vorhandenen GCS-Software, und das Video läuft in seinem vorhandenen Player; wenn er die Verbindung doch prüfen will, ist alles eingebaut: Die App Hover Relay zeigt den Zustand der Verbindung live und eine Konsole genau dort, wo Sie das Relay starten, die CLI liefert dieselben Ereignisse mit nebli logs, und das Dashboard zeigt den Live-Status jedes Deployments. Auf dem Weg für DJI sieht der Betreiber das Bild einfach direkt im Dashboard; es gibt keine GCS und keine Relay-Konsole dazwischen. Kein SSH, keine Fehlerhilfen, die innen am Laptopdeckel kleben.
Was optional ist
Mehrere Funktionen stehen neben dem eigentlichen Relay. Die ersten drei gibt es in jedem Tarif; der Rest sind kostenpflichtige Funktionen (siehe Preise).
- Öffentliche Zuschauerseite. Eine mit PIN geschützte Browser-URL, die die Einsatzleitung an eine Partnerbehörde oder eine Pressestelle weitergeben kann. Dieselbe Drohne, dasselbe Bild, per URL erreichbar, ohne Installation. Jeder Tarif.
- Aufzeichnung vor Ort. Der Proxy zeichnet H.264 ununterbrochen auf eine beschriftete SD-Karte auf. Wenn der Betreiber fertig ist, tauscht er die Karte und übergibt sie als Beweismittel, so wie die Karte einer Bodycam. Das ist die maßgebliche Aufzeichnung. Jeder Tarif.
- Cloud-Aufzeichnung. Parallel zur SD-Karte kann der Flug in einen Cloud-Speicher geschrieben werden, sodass er im Dashboard durchsucht und geteilt werden kann, mit einer Aufbewahrung je nach Tarif. Pro Deployment einzuschalten. Alle Tarife.
- Sentry. Gimbal-Automatik auf Knopfdruck, die die Kamera einer Drohne im Schwebeflug nacheinander auf Punkte von Interesse richtet und die Steuerung sofort zurückgibt, wenn der Betreiber die Steuerknüppel berührt. Ab Fleet.
- Erkennungen. Eine KI beobachtet das Live-Bild anhand einer Regel in einfachen Worten und zeigt Treffer auf der Zeitleiste. Ab Fleet; derzeit in einer geschlossenen Beta.
- Sensornetz. Über Drohnen hinaus überträgt Nebli Drones LoRa-Sensor-Assets mit geringem Stromverbrauch (zum Beispiel Drifter im Meer) und zeigt sie auf derselben Karte. Siehe Grundbegriffe.
Als Nächstes: was Sie erwartet, wenn Sie Nebli Drones in Ihren Betrieb bringen.
Einführung →