💻 computer science

HORUS: A Mixed Reality Interface for Managing Teams of Mobile Robots

Este artigo apresenta o HORUS, uma interface de Realidade Mista projetada para o gerenciamento holístico de equipes de robôs móveis, que combina monitoramento de minimapa, visualização de sensores em tempo real e modos de teleoperação flexíveis para apoiar efetivamente a coordenação multi-robô em ambientes dinâmicos como busca e salvamento.

Autores originais: Omotoye Shamsudeen Adekoya, Antonio Sgorbissa, Carmine Tommaso Recchiuto

Publicado 2026-06-08

📖 5 min de leitura🧠 Leitura aprofundada

CC BY 4.0

Autores originais: Omotoye Shamsudeen Adekoya, Antonio Sgorbissa, Carmine Tommaso Recchiuto

Artigo original sob licença CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). ✨ Esta é uma explicação gerada por IA do artigo abaixo. Não foi escrita nem endossada pelos autores. Para precisão técnica, consulte o artigo original. Ler aviso legal completo

Imagine que você é o comandante de um pequeno esquadrão de robôs batedores enviados para um edifício misterioso e labiríntico para encontrar pistas escondidas. Nos velhos tempos, você teria que encarar uma série de telas de computador planas, tentando costurar mentalmente o que cada robô vê, onde ele está e o que está fazendo. É como tentar dirigir um carro enquanto olha para um mapa, um espelho retrovisor e um rádio ao mesmo tempo, sem poder tocar diretamente no volante.

Este artigo apresenta o HORUS, uma nova ferramenta de "Realidade Mista" (RM) projetada para fazer com que o gerenciamento de uma equipe de robôs pareça jogar um videogame de estratégia de alta tecnologia.

O que é o HORUS?

Pense no HORUS como um "mini-mapa" mágico e flutuante que existe bem diante dos seus olhos. Em vez de olhar para uma tela 2D em uma mesa, você usa um headset (como o Meta Quest 3) e vê um mapa holográfico 3D da sala. Nesse mapa, você vê pequenos modelos digitais de seus robôs se movendo em tempo real.

O sistema é construído sobre a ideia de dar a você uma "visão de Deus", permitindo ao mesmo tempo que você dê zoom para assumir o controle direto quando as coisas ficarem complicadas.

Como Funciona?

A interface é organizada em torno de um "Painel de Gerenciamento de Robôs" que aparece sempre que você toca em um robô no seu mini-mapa. É como um painel de controle para cada robô com quatro botões principais:

Verificação de Status: Uma olhada rápida para ver se a bateria do robô está baixa, a que velocidade ele está indo ou se ele está preso.
Visão de Dados: Você pode alternar a "visão de raio-x". Isso permite que você veja o que os sensores do robô estão vendo, como um escaneamento a laser das paredes ou uma transmissão de vídeo ao vivo. Você pode escolher ver o vídeo flutuando acima do robô ou projetado diretamente dos "olhos" do robô.
Controle de Missão: Em vez de dirigir o robô centímetro por centímetro, você pode soltar um "marcador de objetivo" no mapa. O robô então dirige sozinho até lá. Você também pode desenhar um caminho específico para ele seguir ou rotular pontos no mapa (como "Zona de Perigo" ou "Pista Encontrada").
Teleoperação (Controle Direto): Se o robô ficar preso em um canto apertado, você pode mudar de modo.
- Modo Mini-Mapa: Você dirige o robô como um carro de controle remoto, a partir da visão superior, usando os controles.
- Modo Semi-Imersivo: Você recebe uma tela grande e plana (como uma TV) bem na sua frente, mostrando exatamente o que o robô vê, permitindo uma condução precisa por corredores estreitos.

O Teste de "Busca e Resgate"

Para ver se isso realmente funciona, os pesquisadores realizaram um teste. Eles pediram a dois grupos de pessoas para encontrar cinco etiquetas escondidas (como tesouros digitais) escondidas em um edifício usando dois robôs.

Grupo A (A Equipe HORUS): Usou o novo sistema de realidade mista. Eles podiam atribuir objetivos, ver o mapa completo e alternar para o controle direto quando necessário.
Grupo B (A Equipe do "Velho Estilo"): Usou um sistema padrão onde apenas tinham que dirigir os robôs manualmente com joysticks, alternando entre transmissões de vídeo, sem mapa ou recursos de definição de objetivos.

O Que Eles Descobriram?

Os resultados foram claros, muito parecidos com uma corrida onde um corredor tem um GPS e o outro está adivinhando as direções:

Conclusão Mais Rápida: A equipe HORUS terminou a missão cerca de 23% mais rápido. Como eles podiam definir objetivos e deixar os robôs dirigirem sozinhos na maior parte do tempo, não perderam tempo dirigindo manualmente por cada corredor.
Mais Fácil de Usar: Mesmo que o sistema HORUS tivesse mais recursos, os usuários o classificaram como "excelente" e muito mais fácil de usar do que o sistema básico de joystick. Eles se sentiram mais confiantes e menos frustrados.
Melhor Trabalho em Equipe: Os usuários do HORUS naturalmente dividiram o trabalho, enviando um robô para o lado esquerdo do edifício e o outro para o direito. O grupo do joystick tendia a focar em um robô de cada vez, perdendo partes do edifício.
Sem "Enjoo de Movimento": Os usuários não se sentiram mal ou tontos, o que significa que o sistema é confortável para uso por períodos prolongados.

A Conclusão

O artigo conclui que, embora aprender a usar o HORUS leve um pouco mais de tempo (cerca de 18 minutos de treinamento vs. 7 minutos para o sistema simples), o retorno é enorme. Ele transforma o trabalho caótico de gerenciar uma equipe de robôs em uma experiência suave e intuitiva.

Os pesquisadores afirmam que este é um grande passo à frente para o trabalho em equipe humano-robô. Eles planejam testar o sistema com diferentes tipos de robôs (como robôs que caminham ou drones) e em cenários mais complexos, como zonas de desastre ou canteiros de obras, no futuro. Mas, por enquanto, eles provaram que dar aos operadores um "mapa mágico" torna a busca por pistas — e o gerenciamento de equipes de robôs — muito mais rápido e menos estressante.

Resumo Técnico: HORUS – Uma Interface de Realidade Mista para Gestão de Equipes de Robôs Móveis

Declaração do Problema

Embora as interfaces de Realidade Mista (MR) tenham sido amplamente exploradas para o controle de robôs móveis individuais, existe uma lacuna significativa de pesquisa em relação à sua aplicação na gestão de equipes de robôs. As interfaces de controle 2D tradicionais frequentemente forçam os operadores a fundir mentalmente fluxos de dados díspares (feeds de câmera, saídas de sensores, mapas), levando ao aumento da carga cognitiva e potenciais erros em ambientes dinâmicos. As soluções de MR existentes focam frequentemente em cenários de robô único, ambientes simulados ou carecem de escalabilidade para lidar com a coordenação de múltiplos robôs de forma eficaz. O desafio reside na criação de uma interface que permita a rápida assimilação de fontes de dados variadas, visualização clara do status da missão e alternância fluida entre a atribuição de tarefas de alto nível e a teleoperação direta para múltiplos agentes simultaneamente.

Metodologia

Arquitetura do Sistema e Hardware

Os autores desenvolveram o HORUS (Holistic Operational Reality for Unified Systems), uma interface de MR projetada para gerir equipes de robôs móveis com rodas.

Plataforma de Hardware: O sistema utiliza o Husarion ROSbot 2.0, um robô compacto de tração diferencial equipado com um LiDAR 2D, encoders de roda e uma placa Asus Tinker Board (ARM7L) embarcada rodando ROS 1.
Dispositivo de MR: A interface roda no Meta Quest 3, escolhido por sua tecnologia de passthrough colorido e um campo de visão (FOV) mais amplo em comparação com dispositivos como o HoloLens 2.
Stack de Software: Desenvolvido em Unity 2022.3.34f1 utilizando o Meta XR All-in-One SDK. A comunicação entre o headset e os robôs é gerenciada via um Unity TCP Connector e um nó HORUS Bridge customizado rodando em uma máquina remota.
Rede: O sistema emprega uma abordagem de multi-master utilizando o pacote fkie_multimaster para evitar pontos únicos de falha e congestionamento. Para implantação remota, uma VPN Tailscale cria uma rede mesh ponto-a-ponto segura, permitindo que operadores gerenciem robôs pela internet como se estivessem em uma rede local.

Robótica e SLAM

Dadas as restrições computacionais do ROSbot 2.0, os autores implementaram um framework simplificado de SLAM e navegação multi-robô:

Mapeamento Local: Cada robô executa de forma independente o GMapping para criar um mapa de grade de ocupação 2D usando LiDAR 2D e odometria.
Fusão de Mapas: Um script customizado unifica esses mapas locais aplicando um alinhamento grosseiro via ROS TF, seguido por uma etapa de refinamento de correlação de fase usando OpenCV. Isso mitiga o desvio de odometria individual e melhora o detalhamento do mapa.
Navegação: Os robôs utilizam o planejador local Timed Elastic Band (TEB) para desvio de obstáculos em tempo real e adaptação dinâmica de trajetória no mapa consolidado.

A Interface HORUS

O núcleo do sistema é o Painel de Gerenciamento de Robôs, uma interface holográfica ancorada a um Mini-Mapa compartilhado (Estação de Solo). O painel apresenta quatro abas dedicadas para cada robô:

Status: Exibe bateria, velocidade, pose e status de conclusão de tarefa.
Visualização de Dados: Permite alternar sobreposições de sensores, incluindo varreduras LiDAR (com avisos de obstáculos codificados por cores) e feeds de câmera. Os modos de câmera incluem Projetado (fixado ao frame do robô) e Overhead (uma janela flutuante acima do robô).
Tarefas: Suporta comandos de nível de missão, como definição de poses de objetivo, definição de waypoints, rotulagem de poses específicas (ex: "Vítima Ferida") e desenho de planos de navegação customizados.
Teleoperação: Oferece dois modos distintos:
- Teleoperação via Mini-Mapa: Controle em terceira pessoa via mini-mapa (semelhante a um jogo de carro RC), usando joysticks para velocidade linear/angular.
- Teleoperação Semi-Imersiva: Uma visão de tela plana (simples ou estéreo 3D) do feed de câmera do robô para manobras precisas em espaços apertados, mantendo o mini-mapa visível.

Principais Contribuições

Gestão Unificada de Multi-Robôs: O HORUS preenche a lacuna entre o controle de MR para robô único e a gestão de equipes, integrando monitoramento em tempo real, visualização de sensores e atribuição de tarefas para múltiplos robôs em uma única interface espacial.
Modos de Controle Híbridos: O sistema suporta de forma única a alternância fluida entre a atribuição de tarefas autônomas de alto nível (definição de objetivos, planejamento de waypoints) e a teleoperação direta de baixo nível (modos mini-mapa e semi-imersivo) sem sair do ambiente de MR.
Arquitetura Escalável: Ao utilizar uma arquitetura ROS multi-master e conectividade baseada em VPN, o sistema é projetado para escalar para equipes maiores e configurações operacionais remotas sem depender de um servidor central único.
Validação no Mundo Real: Diferente de muitos trabalhos anteriores confinados à simulação, o HORUS foi validado em uma equipe física de robôs móveis com rodas em um ambiente do mundo real.

Estudo de Usuário e Resultados

Um estudo de usuário foi conduzido com 20 participantes divididos em dois grupos: o Grupo HORUS (utilizando a interface completa) e o Grupo Apenas-Teleop (utilizando uma interface de teleoperação semi-imersiva independente, sem o mini-mapa ou as funcionalidades de tarefas autônomas). Os participantes tiveram a tarefa de localizar cinco tags ArUco escondidas em um ambiente de corredor e escritório usando dois robôs.

Principais Descobertas:

Tempo de Conclusão da Tarefa: O grupo HORUS completou a missão significativamente mais rápido (Média: 8:42) em comparação ao grupo Apenas-Teleop (Média: 11:17), com uma diferença estatisticamente significativa ( $p < 0.001$ , Cohen's $d = 1.93$ ). Isso representa uma melhoria de aproximadamente 23% na eficiência.
Usabilidade (SUS): O HORUS alcançou uma pontuação média de 82.3 no System Usability Scale ("Excelente"), significativamente superior aos 68.5 ("Bom") do grupo Apenas-Teleop. Os participantes relataram maior confiança e perceberam o sistema como menos complexo e mais integrado.
Carga de Trabalho (NASA TLX): Embora as pontuações de carga de trabalho geral tenham sido semelhantes, o grupo HORUS relatou níveis de frustração significativamente menores ( $p = 0.04$ ).
Treinamento: Embora o HORUS tenha exigido uma sessão de treinamento inicial mais longa (18 min vs. 7 min para o Apenas-Teleop) para dominar a navegação baseada em objetivos e os controles do mini-mapa, os benefícios de desempenho justificaram o investimento.
Coordenação: A análise qualitativa indicou que os usuários do HORUS empregaram estratégias de busca complementares, atribuindo robôs a áreas distintas para cobertura paralela, enquanto os usuários do Apenas-Teleop tenderam a focar nos robôs sequencialmente.

Significância e Alegações

O artigo afirma que o HORUS demonstra a versatilidade e eficácia das interfaces de Realidade Mista na coordenação de múltiplos robôs. Ao fundir dados de todos os robôs em um mapa espacialmente registrado comum, o sistema aumenta a consciência situacional e permite que os operadores gerenciem ambientes dinâmicos baseados em equipes de forma mais eficaz do que a teleoperação tradicional.

Os autores posicionam o HORUS como um passo à frente na colaboração humano-robô, abordando especificamente as limitações de interfaces 2D e sistemas de MR para robô único. Eles sustentam que a capacidade de alternar perfeitamente entre a navegação autônoma e o controle manual, combinada com um quadro operacional compartilhado, impulsiona significativamente a velocidade da missão e reduz a frustração do operador. O estudo valida que, apesar de uma curva de aprendizado inicial mais acentuada, os recursos avançados de uma interface de MR holística resultam em um desempenho superior em simulações de busca e salvamento no mundo real.

O trabalho futuro delineado pelos autores inclui a extensão do sistema para equipes heterogêneas (robôs terrestres e aéreos), implementação de sistemas de planejamento de trajetória avançados e copilotos de IA, além de aprimorar as capacidades de mapeamento 3D para uma consciência situacional mais rica.