¿Qué es la recopilación multimodal para IA incorporada?
El servicio por proyecto conecta la definición de tareas, el sistema de adquisición, la teleoperación o demostración, la sincronización y calibración, la curación, el etiquetado, la conversión y la aceptación del dataset. Puede comenzar con un P0 en tareas representativas.
Datos robóticos incluidos
Los campos, frecuencias, relojes, precisión y umbrales de aceptación se fijan en el SOW según el robot, la tarea y la plataforma de entrenamiento.
| Grupo | Campos habituales | Criterio de aceptación |
|---|---|---|
| Visión y espacio | Visión y espacio: RGB, varias cámaras, estéreo, profundidad, nubes de puntos y parámetros de cámara. | Tiempo, fotogramas, imagen, calibración y coordenadas |
| Estado del robot | Estado del robot: posición, velocidad y par articular, pose del efector, pinza, odometría e IMU. | Unidades, marcos, continuidad, pérdidas y versión del dispositivo |
| Interacción y semántica | Interacción y semántica: mandos, acciones, fuerza, tacto, contacto, fase de tarea, instrucciones y etiquetas. | Alineación observación-acción, eventos, fallos, etiquetas y trazabilidad |
Módulos del servicio
Los módulos se pueden seleccionar por fase del proyecto.
- Diseño de escenarios y tareas con fases, variaciones, fallos y cobertura.
- Integración de sensores, control, grabación, supervisión y exportación.
- Teleoperación y demostración con equipos existentes o interfaz, marcadores y parada segura acordados.
- Sincronización de relojes, coordenadas, disparos y versiones de calibración.
- Curación de integridad, duplicados, anomalías, desidentificación, etiquetas y muestreo.
- Adaptación a ROS bag/MCAP, Parquet/MP4, estructura compatible con LeRobot o formato del cliente.
Proyectos adecuados
- Agarre, clasificación, montaje, carga/descarga y uso de herramientas
- Almacén, manipulación móvil, inspección y navegación
- Humanoides, ruedas, cuadrúpedos, brazos y pinzas
- Actualización de plataformas y entrega local o por etapas para proyectos internacionales
Información de inicio
- Robot, controlador, teleoperación, sensores, interfaces, firmware y grafo ROS
- Tareas, objetos, escenas, fallos, zonas seguras y variaciones
- Uso de datos, modelo, formato, lugar, retención y responsable de aceptación
- Permisos, consentimiento del operador, licencias de terceros, derechos y requisitos transfronterizos
Proceso de ejecución
- Evaluación de requisitos y derechos de datos
- P0 de interfaces, sincronización y carga
- Fijación de campos, formato, cobertura, umbrales, lotes y cambios
- Recopilación, curación, versiones, entrega y validación downstream
Entregables acordables
- Especificación de tareas, diccionario y matriz de cobertura
- Software de adquisición, configuración, sincronización y calibración
- Lotes versionados, metadatos y checksums
- Reglas e informes de curación, etiquetado y muestreo
- Convertidores, loaders, replay y acta de aceptación
Aceptación de la calidad
Los umbrales deben vincularse al dispositivo, tarea, lote, versión de herramienta y método de prueba.
- Desfase temporal, pérdidas, continuidad y calibración
- Episodios válidos, éxito/fallo, anomalías y cobertura
- Consistencia de etiquetas, desidentificación y linaje
- Campos, unidades, marcos, versiones y checksums
- Importación, replay o lectura preentrenamiento en el entorno acordado
Seguridad de datos en proyectos internacionales
Si hay rostros, voces, espacios industriales o domésticos, ubicaciones, identificadores o datos del operador, se definen antes la base legítima, consentimiento, finalidad, campos mínimos, retención, acceso y desidentificación. El procesamiento local y la ruta internacional se acuerdan conforme a las reglas aplicables.
Límites de capacidad y responsabilidad
Esta página no afirma una fábrica de datos a gran escala ni volumen, plazo, calidad o capacidad local fijos. La ampliación exige evaluar equipos, ubicaciones, personal, seguridad y finalidad.
La aceptación puede comprobar sincronización, cobertura, carga y replay, pero no garantiza precisión, generalización, convergencia, resultado comercial o aprobación del modelo.
Formatos y referencias técnicas públicas
Las referencias sirven para el diseño y no son certificación, declaración de conformidad ni aval de terceros.
- Hugging Face LeRobotDataset v3 documentation
- NVIDIA Isaac GR00T end-to-end workflow
- China national standard plan for embodied-intelligence data collection and model training (drafting)
Preguntas frecuentes
¿Puede añadirse a un robot existente?
Primero se revisan controlador, sensores, relojes, red, cómputo, ROS y seguridad; los cambios dependen de interfaces y pruebas.
¿Se admiten LeRobot, ROS bag y formatos propios?
Por acuerdo escrito se puede usar ROS bag/MCAP, Parquet/MP4, estructura compatible con LeRobot o formato del cliente; el P0 verifica campos y loader.
¿Cómo se acepta la calidad?
Se revisan tiempo, pérdidas, segmentos válidos, cobertura, calibración, etiquetas, desidentificación, checksums, carga y replay; los umbrales son específicos del proyecto.
¿Se garantiza la mejora del modelo?
No. También influyen el modelo, entrenamiento, distribución, evaluación y despliegue; el ciclo de evaluación es un alcance aparte.
Páginas relacionadas：Desarrollo de robots · Productos y Servicios · Soluciones Sectoriales · Servicios para Clientes Internacionales
Revisado por Winge Robotics and AI Engineering Services | Actualizado el 30-08-2026