Principais insights

Apresentou duas demonstrações de robótica coordenadas combinando navegação, interação por voz e reconhecimento de gestos, transformando repositórios PoC fragmentados em sistemas de demonstração reproduzíveis e implantáveis.

Sobre o cliente

Uma empresa global de telecomunicações focada em demonstrar o papel da conectividade na habilitação de sistemas robóticos inteligentes em tempo real.

O desafio

O cliente pretendia criar demonstrações de alto impacto usando duas plataformas robóticas (humanóide e quadrúpede) para mostrar comportamento, autonomia e interação coordenados.

Os repositórios existentes forneciam um ponto de partida, mas estavam incompletos e instáveis. O sistema exigia:

• Navegação e teleoperação SLAM confiáveis
• Interação de voz de baixa latência e reconhecimento de gestos no edge
• Integração entre vários SDKs, sensores e componentes de IA
• Implantação e reprodutibilidade claras para equipes internas

Sem consolidação e validação, as demonstrações corriam o risco de permanecerem experimentais em vez de mostras utilizáveis.

A abordagem de Marvik

Nós nos concentramos em transformar protótipos fragmentados em sistemas funcionais e reproduzíveis.

• Integração e controle de robótica: Construiu e estabilizou pilhas de controle baseadas em RoS2, integrou sensores (LiDAR, câmeras) e garantiu um comportamento consistente em ambos os robôs.
• Interação por voz e gestos: Implementou canais de fala para texto → LLM → texto para fala e reconhecimento de gestos em tempo real para acionar ações e comportamentos do robô.
  
  
• Simulação e teste: Ambientes de simulação desenvolvidos (Gazebo) e modos de fallback para permitir testes sem hardware e acelerar a iteração.
  
  
• Reprodutibilidade e implantação: Repositórios padronizados, scripts de configuração criados e configurações documentadas para garantir uma implantação consistente em todos os ambientes.

Os resultados e o impacto

• Duas demonstrações funcionais que combinam navegação, voz e interação por gestos
• Sistemas estáveis e reproduzíveis validados em ambientes simulados e reais
• Guias de implantação e documentação claros para equipes internas
• Tempo de configuração reduzido e maior confiabilidade para demonstrações ao vivo

Por que isso importa

As demonstrações de robótica geralmente falham na última milha: integração, estabilidade e reprodutibilidade.

Ao estruturar o sistema de ponta a ponta e documentá-lo de forma clara, esse projeto permitiu que as equipes executassem, adaptassem e estendessem as demonstrações sem reformulá-las do zero.