DENOMINACIÓN Laboratorio de XR y percepción 3D

DESCRIPCIÓN

Laboratorio enfocado al desarrollo de aplicaciones para facilitar la interacción de los trabajadores con distintos sistemas de fabricación industriales, como por ejemplo robots colaborativos y robots móviles. El laboratorio combina nuevas interfaces como las gafas de realidad mixta (MR) y virtual (VR) con distintos sistemas de percepción 3D y modelos de inteligencia artificial (IA) para facilitar el guiado de los operarios durante la realización de procesos complejos. Los sistemas de percepción permiten capturar información relevante del entorno, como la posición de personas o elementos de interés para el proceso. En este segundo caso, el posicionamiento se puede realizar mediante técnicas de visión artificial (monocular o RGB-D) basadas en inteligencia artificial, lo que permite la localización de objetos sin necesidad de su modificación; o mediante el uso de marcadores activos, lo que permite la localización a alta velocidad y con gran precisión (200Hz y precisión mayor de 0.5mm en condiciones ambientales más complejas. La información se integra mediante sistemas de comunicación avanzados basados en protocolos industriales estándar para proporcionar información del proceso empleando interfaces avanzados basados en realidad extendida (XR). Estas interfaces permiten una interacción natural con los equipos, así como una colaboración entre distintos miembros del equipo de trabajo.

ÁMBITOS DE APLICACIÓN

Desarrollos

Despliegue y Aplicación

EQUIPOS Y COMPONENTES MÁS DESTACADOS

  • Cámaras de visión 3D

    Cámaras de visión estéreo Intel RealSense D435, StereoLabs ZED X.

  • Gafas de Realidad Mixta

    Dispositivos de última generación que permiten visualizar elementos virtuales integrados en la realidad como las Meta Quest 3, Microsoft Hololens 1 y 2.

  • Librerías de software propio

    Librerías para el procesamiento geométrico de modelos CAD. Modelos de IA para la detección de la posición de objetos de interés.

  • Sistema de seguimiento estéreo de alta velocidad

    Sistema de desarrollo propio para el seguimiento a alta velocidad (200 FPS) del movimiento de objetos con precisión submilimétrica.

SERVICIOS OFRECIDOS POR EL ACTIVO

Análisis de una secuencia de vídeo para la generación de datos y entrenamiento de modelos para la estimación de la pose de objetos.

Se emplea un modelos de visión artificial para la generación automática de un dataset de entrenamiento y entrenamiento de modelos basados en G2L-NET

Asistencia ad-hoc para distintos procesos. Visualización de información y guiado en entorno virtual.

Se emplean algoritmos de geometría computacional para el procesado de la geometría de modelos CAD y automatizar la generación de información de asistencia.

ENTIDAD QUE GESTIONA EL ACTIVO

CEIT
Persona de contacto:
Iñaki Díaz
idiaz@ceit.es