- 【ROS2 y Hardware de Alto Rendimiento】Construido sobre ROS2 y compatible con Jetson y Raspberry Pi 5, ROSpider cuenta con servos de bus de alta tensión y algoritmos de marcha avanzados, ofreciendo una
- 【Grandes Modelos de IA y Navegación SLAM】ROSpider integra Modelos de Lenguaje, Voz y Visión Grandes con soporte para despliegue tanto en línea como local. Combinado con LiDAR TOF, permite planificaci
- 【Visión 3D y Brazo Robótico de 6 Grados de Libertad】Equipado con una cámara de profundidad 3D y un brazo robótico de 6 grados de libertad, ROSpider permite tareas de IA de alto nivel en espacio 3D, c
- 【Integrated & Efficient Algorithm Framework】Incorpora varios algoritmos y herramientas, incluyendo YOLO26, OpenCV, MoveIt2 y MediaPipe, proporcionando un entorno altamente configurable y escalabl
- 【Tutoriales y Recursos de Desarrollo Completos】Viene con cursos extensos, tutoriales de código y manuales. Cubriendo el camino de aprendizaje completo desde lo básico hasta temas avanzados, le ayuda
Descripción del Producto:
ROSpider es una plataforma hexápoda ROS todo terreno que presenta una estructura biomimética. Su chasis integra dieciocho servos de bus de alta tensión de 35 kilogramos, asegurando una flexibilidad y adaptabilidad excepcionales. Impulsado por algoritmos avanzados de marcha biocinética, realiza combinaciones de marcha dinámica y ajustes de postura para navegar por espacios estrechos y evitar obstáculos con facilidad.
Impulsado por Jetson/Raspberry Pi, ROSpider está equipado con LiDAR, una cámara de profundidad 3D, un arreglo de 6 micrófonos, un brazo robótico de 6 grados de libertad y una pantalla OLED. Este conjunto de hardware permite el control de movimiento, mapeo y navegación SLAM, planificación de rutas, evasión de obstáculos, agarre 3D, transporte autónomo, detección de movimiento, interacción por voz y localización de fuentes de sonido.
ROSpider integra grandes modelos de IA para visión, voz y texto, lo que le permite percibir su entorno, planificar acciones y ejecutar tareas de manera flexible. Ya sea a través de APIs en línea o despliegue local, el sistema combina datos de LiDAR, cámara y micrófonos para desbloquear tareas avanzadas de IA incorporada, incluyendo comprensión semántica, percepción emocional, interacción natural por voz, comprensión de escenas, seguimiento de objetivos y navegación impulsada por IA.
① Aplicaciones de IA Incorporada
Impulsado por hardware de alto rendimiento y sensores multidimensionales combinados con modelos grandes multimodales, ROSpider logra colaboración humano-robot de siguiente nivel y ejecución inteligente de tareas.
② Despliega Grandes Modelos de IA
Integrando modelos de IA de visión, voz y texto, ROSpider percibe inteligentemente su entorno, planifica acciones y ejecuta tareas. Esto desbloquea aplicaciones avanzadas de IA incorporada, incluyendo percepción emocional, comprensión de escenas, seguimiento de objetivos y navegación impulsada por IA.
③ Visión 3D y Brazo Robótico de 6 Grados de Libertad
Al fusionar datos RGB y de profundidad en tiempo real, ROSpider percibe detalles de color y nube de puntos con precisión. Combinado con cinemática inversa, permite tareas 3D complejas como seguimiento arbitrario, agarre, clasificación y transporte.
④ Percepción de LiDAR de Precisión
Equipado con LiDAR TOF, codificadores e IMU, ROSpider logra mapeo SLAM preciso y navegación autónoma. Detecta obstáculos dinámicos en tiempo real para optimizar la planificación de rutas, asegurando alta eficiencia en entornos complejos.
1. Aplicaciones Creativas de Modelos de IA Multimodal
1) Comprensión de Escenas
Aprovechando el gran modelo de visión, ROSpider analiza escenas dentro de su campo de visión. Basado en su base de datos, evalúa condiciones de iluminación, nombres de objetos y atributos, proporcionando retroalimentación a través de texto o voz.
2) Seguimiento Visual de Objetos
Aprovechando las poderosas capacidades analíticas del gran modelo de visión, ROSpider identifica automáticamente y fija objetos objetivo en entornos complejos para ejecutar seguimiento en tiempo real.
3) Control por Voz
Impulsado por la comprensión semántica del gran modelo de voz, ROSpider interpreta con precisión comandos de voz y ejecuta acciones correspondientes, ofreciendo un control por voz natural y fluido.
4) Reconocimiento y Agarre Autónomo
Aprovechando las poderosas capacidades analíticas del gran modelo de visión, ROSpider identifica automáticamente y fija objetos objetivo en entornos complejos, permitiendo seguimiento y agarre en tiempo real.
5) Grandes Modelos de IA + Navegación y Transporte SLAM
ROSpider admite interacción por comando de voz, utilizando tecnología SLAM para planificar rutas de manera adaptativa y navegar a áreas designadas. Combinado con el gran modelo de visión, identifica y sigue objetos dentro de su campo de visión en tiempo real, ejecutando tareas precisas de agarre y transporte mediante control PID de alta precisión.
2. Aplicaciones de IA en Múltiples Escenarios
Impulsado por algoritmos de marcha cinemática inversa, ROSpider navega de manera estable a través de terrenos complejos como escombros y pasajes estrechos. Fusionando navegación SLAM con percepción visual de IA y un brazo robótico de alta precisión de 6 grados de libertad, permite la identificación rápida, agarre y transporte de objetos.
1) Mapeo y Navegación SLAM
ROSpider utiliza LiDAR para escanear su entorno en tiempo real, construyendo mapas de alta precisión. Al integrar tecnología de localización en tiempo real, logra navegación autónoma a nivel centimétrico y planificación de rutas.
2) Navegación en Pasajes Estrechos
Gracias a su diseño biomimético compacto y ajustes ágiles de marcha, ROSpider cambia autónomamente marchas y posturas corporales para navegar sin esfuerzo por pasajes estrechos y brechas estructurales.
3) Cruce de Puentes
ROSpider percibe su actitud corporal en tiempo real. Corrige dinámicamente su marcha para adaptarse a un centro de gravedad cambiante, asegurando un cruce estable sobre puentes y otras estructuras inestables.
4) Agarre Autónomo
ROSpider percibe objetos dentro de su campo de visión en tiempo real. A través de una coordinación precisa mano-ojo, ejecuta sin esfuerzo tareas de agarre de alta dificultad, incluso dentro de entornos estructurales complejos.
5) Transporte Inteligente
Basándose en visión de IA y un sistema de sensores multimodal, ROSpider transporta de manera estable y coloca objetos con precisión, asegurando la finalización segura y eficiente de tareas de alta dificultad.
6) Travesía de Terreno Colapsado
Al enfrentar terreno colapsado, ROSpider utiliza algoritmos avanzados de cinemática inversa para asegurar una colocación precisa de los pies, permitiendo una travesía eficiente y estable sobre escombros.
3. Detección Integral de LiDAR
ROSpider cuenta con LiDAR TOF de alta precisión, fusionando datos de codificadores e IMU para lograr mapeo preciso y navegación autónoma. Detecta obstáculos dinámicos en tiempo real para optimizar la planificación de rutas.
1 )slam_toolbox Mapeo LiDAR
2) AMCL (Localización Adaptativa de Monte Carlo)
3) Planificación de Rutas TEB y Evasión de Obstáculos Dinámicos
4) rf2o_laser_odometry Odometría LiDAR
5) Fusión y Filtrado IMU-LiDAR
6) Planificación de Rutas Local DWB
7) Navegación de Punto Único
8) Navegación de Múltiples Puntos
9) Seguimiento LiDAR
10) Protección LiDAR
11) Evasión de Obstáculos LiDAR
12) Imagen de Nube de Puntos LiDAR
4. Reconocimiento Preciso de Cámara de Profundidad 3D
La cámara de luz estructurada de profundidad 3D genera mapas de profundidad y datos de nube de puntos para adquirir con precisión información de profundidad espacial de objetos objetivo, permitiendo mediciones de distancia y volumen de alta precisión. Combinado con datos de LiDAR, construye mapas 3D de color de alta precisión, apoyando una percepción ambiental superior y navegación inteligente.
1) Datos de Profundidad y Nube de Puntos
2) Medición de Distancia de Cámara de Profundidad
3) Seguimiento de Línea OpenCV
4) Seguimiento de Objetos KCF
5) Reconocimiento de Color OpenCV
6) Detección de Objetos YOLOv26
7) Visual 3D RTAB-Map
8) Punta de Dedo MediaPipe
9) Control de Movimiento Corporal MediaPipe
10) Detección de Rostro 3D MediaPipe
11) Mapeo y Navegación
12) Reconocimiento de Trayectoria
5. Brazo Robótico de 6 Grados de Libertad Visión 3D
ROSpider fusiona información RGB y de profundidad para percibir colores de objetos y datos de nube de puntos en tiempo real. Integrando algoritmos de cinemática inversa, ejecuta tareas avanzadas de IA como seguimiento flexible, agarre, clasificación y transporte dentro de un espacio de trabajo 3D.
1) Agarre Espacial 3D
2) Navegación y Transporte
3) Clasificación de Residuos
4) Control de Coordenadas de Cinemática Inversa
6. Recogida de Largo Alcance y Localización de Fuente de Sonido
Equipado con un arreglo integrado de 6 micrófonos, ROSpider logra localización de fuente de sonido de alta precisión y supresión de ruido. Combinado con LiDAR, permite una convocatoria conveniente del robot y admite diálogo en línea, creando una interacción fluida e inteligente.
1) Interacción Natural por Voz
2) Navegación Inteligente por Voz
3) Agarre y Transporte Inteligente
4) Localización de Fuente de Sonido 360°
7. Planificación de Marcha de Cinemática Inversa
Usando algoritmos de marcha de cinemática inversa, ROSpider calcula las trayectorias de 18 articulaciones en tiempo real, logrando posicionamiento de pies a nivel centimétrico y movimiento omnidireccional 360°. Con un IMU de 6 ejes incorporado, percibe autónomamente la postura y se adapta dinámicamente a terrenos complejos, asegurando equilibrio y estabilidad durante el movimiento.
1) Cambio de Marcha Eficiente
ROSpider cuenta con marchas de trípode y onda basadas en cinemática inversa. El cambio libre entre estas marchas asegura una adaptabilidad superior a todo terreno.
2) Movimiento Omnidireccional Flexible
ROSpider admite control omnidireccional 360, permitiendo la traslación en cualquier dirección con ajustes coordinados de postura para cambiar ágilmente los modos de movimiento.
3) Ajuste de Actitud Ilimitado
ROSpider puede ajustar parámetros multidimensionales, incluyendo rumbo, cabeceo y balanceo, durante el movimiento para adaptarse a diversos escenarios.
4) Control Dinámico de Altura y Equilibrio
Cambie libremente la altura del cuerpo y el centro de gravedad con inclinación hacia adelante o hacia atrás. El ajuste dinámico de parámetros permite al robot manejar tareas versátiles con facilidad.
5) Movimiento Combinado y Poses Adaptativas
ROSpider admite el ajuste sincrónico del centro de gravedad y ángulos de postura multidimensionales durante el movimiento, logrando fácilmente planificación de postura de alto grado de libertad y cambio.
6) Detección de Postura y Autoequilibrio
Integrado con un IMU de alta precisión, ROSpider detecta la postura corporal en tiempo real. Usando retroalimentación de lazo cerrado, ajusta autónomamente los ángulos de las articulaciones de sus seis patas para mantener el equilibrio en entornos complejos.
8. Cinemática Inversa y Coordinación Mano-Ojo
ROSpider cuenta con algoritmos avanzados de cinemática inversa de Hiwonder. Dentro del espacio de trabajo 3D alcanzable, el efector final del brazo puede moverse a cualquier coordenada. La programación en Python permite además la planificación de rutas del brazo robótico.
1) Detección de Objetos y Ajuste Adaptativo de Articulaciones
ROSpider detecta objetos dentro del área de reconocimiento, calculando sus coordenadas y ángulo. Combinado con algoritmos de cinemática inversa, ajusta adaptativamente los ángulos de las articulaciones para lograr un agarre libre.
* La mayoría de las opciones del mercado están limitadas a agarre en puntos fijos, careciendo de detección de área y agarre libre.
2) Control de Movimiento Espacial 3D
Utilizando algoritmos de cinemática inversa, ROSpider logra movimiento lineal y planificación de rutas en espacio 3D, elevando las dimensiones de movimiento a un nuevo nivel. Esto le ayuda a entender los principios de interpolación de control de movimiento del brazo robótico y dominar la esencia de la cinemática inversa.
9. Simulación Gazebo
Construido sobre el marco ROS, ROSpider admite simulación Gazebo. Esto permite el control del robot hexápodo y la verificación de algoritmos dentro de un entorno virtual, reduciendo los requisitos de pruebas físicas y mejorando la eficiencia experimental.
Visualización de Datos - Visualice las trayectorias de movimiento del efector final del robot y el centro de gravedad para mejorar y optimizar rápidamente los algoritmos.
10. Cinemática Movelt2
ROSpider admite simulación Movelt2, permitiendo el control del brazo robótico y la verificación de algoritmos en un entorno virtual. Esto reduce la dependencia de entornos físicos y acelera el desarrollo de proyectos.
1) Modelo de Simulación de Cinemática URDF
Una réplica realista 1:1 del robot físico. La interfaz visual de Movelt2 admite control de arrastrar y soltar, posicionamiento preestablecido y evasión de obstáculos del brazo robótico.
2) Control de Simulación Movelt2 y Planificación de Movimiento
Controle los movimientos del brazo robótico en tiempo real a través de la interfaz de simulación visual, ejecutando acciones consistentes con el modelo.
3) Detección de Colisiones
Cree obstáculos dentro de la interfaz de simulación, y el brazo robótico los evitará autónomamente durante el movimiento.
11. Control Interconectado Multiplataforma
1) Control de Aplicación
Use la aplicación para ver la transmisión de video en primera persona y controlar ROSpider para agarrar y transportar objetos objetivo específicos. Cambie libremente las funciones preestablecidas para experimentar rápidamente la diversión del robot.
2) Control de Software Gráfico para PC
Controle el movimiento y ejecute programas en tiempo real a través del software gráfico para PC. El software para PC incluido le permite coreografiar las acciones de ROSpider sin habilidades de programación.
3) Controlador Inalámbrico
Controle remotamente ROSpider con un controlador inalámbrico PS2, y programe el robot para ejecutar acciones de retroalimentación específicas.
