O caminho
Um drone em campo gera um fluxo de vídeo H.264 e, nas aeronaves que oferecem suporte, uma conexão MAVLink com o piloto automático. Os dois precisam chegar a um operador em um posto de comando, às vezes passando pela rede de um órgão parceiro, às vezes até um visualizador público que o comandante do incidente pode entregar a um assessor de imprensa. O relay na nuvem da Nebli fica no meio e transporta os bytes. Esta seção descreve o caminho do relay; os drones DJI usam uma arquitetura diferente e mais simples, explicada mais abaixo.
São três componentes de software:
- Proxy de campo. Roda em um notebook na rede local do drone: um Toughbook robusto, qualquer máquina Linux/macOS/Windows, o que a equipe tiver. Pega o vídeo e a telemetria do drone e envia pela conexão disponível, seja um hotspot celular, Starlink ou um roteador com agregação de links (bonding). Ao mesmo tempo grava em um cartão SD, para que as imagens sobrevivam se a conexão cair.
- Relay na nuvem. Roda na AWS, em uma única região dos Estados Unidos. O proxy se conecta e fica conectado. O cliente do operador também. O relay encaminha os bytes entre os dois e acrescenta a camada de recuperação que mantém o vídeo utilizável na rede celular.
- Cliente do operador. Roda no notebook do posto de comando, opcionalmente como serviço, para iniciar junto com o sistema. Expõe o vídeo e o MAVLink do drone em
127.0.0.1, para que qualquer software de controle em solo padrão (CCA3, Mission Planner, QGroundControl) se conecte a ele como se o drone estivesse na mesma mesa.
Você roda o proxy e o cliente com a Nebli CLI (nebli proxy start e nebli client start) ou com o aplicativo de desktop Hover Relay, uma versão de apontar e clicar dos mesmos dois papéis para operadores que não trabalham no terminal. Do ponto de vista do drone, ele está falando com uma máquina na própria rede. Do ponto de vista do operador, o drone está no notebook. No meio, o relay cuida da internet pública.
O caminho DJI
Os drones DJI dispensam os três componentes acima. O app da DJI (Pilot 2 ou DJI Fly) envia vídeo RTMP direto para um ponto de ingestão na nuvem, seja depois de uma entrada com o e-mail de trabalho dentro do próprio Pilot 2, seja a partir de uma chave de transmissão colada no campo de RTMP personalizado do app. Não há proxy de campo, nem cliente do operador, nem notebook em nenhuma das pontas, só o controle ou o celular que o piloto já tem na mão. A transmissão aparece direto na visualização do deployment no painel da Nebli. O envio RTMP leva só vídeo, sem conexão MAVLink, então com uma chave de transmissão colada a telemetria de voo e o controle do gimbal ficam no controle, exatamente como hoje. Com o login no Pilot 2 vem também a telemetria de voo e, depois que o piloto aprovar no controle, você pode apontar o gimbal e operar a câmera pelo painel; o piloto continua voando com o controle. Veja Drones DJI para saber qual dos três caminhos DJI serve à sua frota.
Por que o meio é a parte interessante
Conexões celulares e via satélite não se comportam como uma rede cabeada. Os pacotes chegam fora de ordem. Caem em rajadas quando uma torre passa a conexão para outra. O tempo de ida e volta salta de 50 ms para 600 ms quando a conexão satura. Um relay RTP ingênuo sobre UDP transforma esses eventos em pixelização, quadros congelados e atraso nos comandos.
O relay tem três mecanismos para isso:
Recuperação de perdas (retransmissão por NACK)
O relay mantém um buffer contínuo dos pacotes recentes. Quando a ponta que recebe nota uma lacuna na sequência, pede uma retransmissão. O relay tira o pacote do buffer e o reenvia, num ritmo que impede que as retransmissões se acumulem sobre o vídeo novo e saturem a conexão de subida. As duas pernas do caminho, do campo à nuvem e da nuvem ao operador, têm sua própria camada de retransmissão.
Tolerância à reordenação
As redes celulares reordenam pacotes o tempo todo. Um sistema ingênuo lê uma lacuna na sequência e pede uma retransmissão na hora. Na maioria das vezes, o pacote "perdido" chega 15 a 25 ms depois, por outro caminho de torre. O relay segura a lacuna por 75 ms antes de classificá-la como perda. Resultado: o tráfego de retransmissão fica mais ou menos igual à perda real, em vez de ser dominado pelo ruído de reordenação, que se resolve sozinho.
Contagem fiel
Os contadores de perda devolvem o crédito das chegadas atrasadas. Quando um pacote chega depois de ter sido contado como perdido por um instante, o contador diminui. Parece óbvio, mas a maioria dos relays não faz isso; o resultado são números de perda que inflam ao longo de uma sessão e perdem todo o sentido operacional. O Nebli Drones mostra os números reais, ao vivo, na leitura de conexão do app Hover Relay, no nebli logs e no painel, em vez de deixá-los se distorcer.
Resumindo. A rede celular é bagunçada; o relay foi projetado em torno disso. A troca é de cerca de 75 ms de latência de recuperação por uma ordem de grandeza a menos de retransmissões desnecessárias.
O que o operador vê
No dia a dia, quase nada do relay deveria ficar visível para o operador. No caminho do relay, o drone aparece em 127.0.0.1 no software de controle em solo que ele já usa, e o vídeo toca no visualizador que ele já usa; quando ele quer conferir a conexão, as ferramentas já estão lá: o app Hover Relay mostra a saúde da conexão ao vivo e um console bem onde você inicia o relay, a CLI mostra os mesmos eventos com nebli logs, e o painel mostra o status ao vivo de cada deployment. No caminho DJI, o operador simplesmente assiste à transmissão direto no painel; não há software de controle em solo nem console do relay no meio. Sem SSH, sem guias de solução de problemas colados na tampa do notebook.
O que é opcional
Vários recursos ficam ao lado do relay principal. Os três primeiros estão disponíveis em todos os planos; os outros são recursos pagos (veja os preços).
- Visualizador público. Uma URL de navegador protegida por PIN, que um comandante de incidente pode entregar a um órgão parceiro ou a um assessor de comunicação. O mesmo drone, a mesma transmissão, acessível pela URL sem instalar nada. Todos os planos.
- Gravação em campo. O proxy grava H.264 continuamente em um cartão SD identificado. Quando o operador termina, troca o cartão e o entrega como evidência, do mesmo jeito que entregaria o cartão de uma câmera corporal. Esta é a gravação principal. Todos os planos.
- Gravação na nuvem. Em paralelo ao cartão SD, o voo pode ser gravado no armazenamento em nuvem, para ser navegável e compartilhável pelo painel, com retenção conforme o plano. Ativada por deployment. Todos os planos.
- Sentry. Automação do gimbal com um botão, que passa a câmera de um drone parado no ar por pontos de interesse e devolve o controle no instante em que o operador toca nos manches. Fleet e acima.
- Detecções. IA vigiando a transmissão ao vivo de acordo com uma regra em linguagem simples e mostrando as correspondências na linha do tempo. Fleet e acima; hoje em beta privado.
- Malha de sensores. Além de drones, o Nebli Drones encaminha ativos de sensores LoRa de baixo consumo (por exemplo, derivadores no mar) e os mostra no mesmo mapa. Veja Conceitos.
A seguir: o que esperar ao levar o Nebli Drones para a sua operação.
Implantação →