Robot hexápodo ROS2 ROSpider con Jetson/Raspberry Pi, modelos de IA multimodales, ChatGPT, visión 3D, mapeo SLAM y navegación

Aplicaciones de IA encarnada
Impulsado por hardware de alto rendimiento y sensores multidimensionales combinados con modelos multimodales de gran tamaño, ROSpider logra un nivel superior de colaboración humano-robot y ejecución inteligente de tareas.

Implementa grandes modelos de IA
Al integrar modelos de IA de visión, voz y texto, ROSpider percibe de forma inteligente el entorno, planifica acciones y ejecuta tareas. Esto desbloquea aplicaciones avanzadas de IA encarnada, incluyendo percepción de emociones, comprensión de escenas, seguimiento de objetivos y navegación impulsada por IA.

Visión 3D y brazo robótico 6DOF
Al fusionar datos RGB y de profundidad en tiempo real, ROSpider percibe con precisión los colores y los detalles de las nubes de puntos. Junto con la cinemática inversa, permite realizar tareas 3D complejas como el seguimiento arbitrario, el agarre, la clasificación y el transporte.

Percepción LiDAR de precisión
Equipado con LiDAR TOF, codificadores e IMU, ROSpider logra un mapeo SLAM preciso y una navegación autónoma. Detecta obstáculos dinámicos en tiempo real para optimizar la planificación de rutas, garantizando una alta eficiencia en entornos complejos.

Comprensión de escenas
Aprovechando el gran modelo de visión, ROSpider analiza las escenas dentro de su campo de visión. Basándose en su base de datos, evalúa las condiciones de iluminación, los nombres de los objetos y sus atributos, proporcionando retroalimentación a través de texto o voz.

Seguimiento visual de objetos
Aprovechando las potentes capacidades analíticas del gran modelo de visión, ROSpider identifica y se fija automáticamente en los objetos objetivo en entornos complejos para ejecutar un seguimiento en tiempo real. 

Control por voz
Impulsado por la comprensión semántica del gran modelo de lenguaje, ROSpider interpreta con precisión los comandos de voz y ejecuta las acciones correspondientes, brindando un control por voz natural y fluido.

Reconocimiento y agarre autónomos
Aprovechando las potentes capacidades analíticas del gran modelo de visión, ROSpider identifica y se fija automáticamente en los objetos objetivo en entornos complejos, permitiendo el seguimiento y agarre en tiempo real.