Perspectivas clave

Entregué dos demostraciones de robótica coordinadas que combinaban la navegación, la interacción de voz y el reconocimiento de gestos, transformando los repositorios de PoC fragmentados en sistemas de exhibición reproducibles e implementables.

Acerca del cliente

Una compañía global de telecomunicaciones enfocada en demostrar el papel de la conectividad para habilitar sistemas robóticos inteligentes en tiempo real.

El desafío

El objetivo del cliente era crear demostraciones de alto impacto utilizando dos plataformas robóticas (humanoide y cuadrúpeda) para mostrar el comportamiento coordinado, la autonomía y la interacción.

Los repositorios existentes proporcionaban un punto de partida, pero estaban incompletos e inestables. El sistema requería:

• Navegación y teleoperación SLAM confiables
• Interacción de voz de baja latencia y reconocimiento de gestos en el borde
• Integración en varios SDK, sensores y componentes de IA
• Implementación y reproducibilidad claras para los equipos internos

Sin la consolidación y la validación, las demostraciones corrían el riesgo de permanecer experimentales en lugar de ser utilizables.

El enfoque de Marvik

Nos centramos en convertir prototipos fragmentados en sistemas funcionales y reproducibles.

• Integración y control robóticos: Construyó y estabilizó pilas de control basadas en ROS2, sensores integrados (LiDAR, cámaras) y garantizó un comportamiento uniforme en ambos robots.
• Interacción de voz y gestos: Se implementaron canales de conversión de voz a texto → LLM → de conversión de texto a voz y reconocimiento de gestos en tiempo real para activar las acciones y los comportamientos de los robots.
  
  
• Simulación y pruebas: Desarrollé entornos de simulación (Gazebo) y modos alternativos para permitir las pruebas sin hardware y acelerar la iteración.
  
  
• Reproducibilidad e implementación: Repositorios estandarizados, scripts de configuración creados y configuraciones documentadas para garantizar una implementación uniforme en todos los entornos.

Los resultados y el impacto

• Dos demostraciones funcionales que combinan la navegación, la voz y la interacción por gestos
• Sistemas estables y reproducibles validados en entornos simulados y reales
• Guías de implementación y documentación claras para los equipos internos
• Reducción del tiempo de configuración y mejora de la confiabilidad para las demostraciones en vivo

Por qué es importante

Las demostraciones de robótica suelen fallar en la última milla: integración, estabilidad y reproducibilidad.

Al estructurar el sistema de principio a fin y documentarlo con claridad, este proyecto permitió a los equipos ejecutar, adaptar y ampliar las demostraciones sin tener que rediseñarlas desde cero.