Hasta ahora, ejecutar cualquier tipo de sistema de visión por computadora en la Raspberry Pi ha sido bastante decepcionante, incluso con la incorporación de productos como el Movidius Neural Compute Stick. Buscando mejorar la situación de rendimiento mientras disfruta de los beneficios de la comunidad Raspberry Pi, [Brandon] y su equipo han estado trabajando en Luxonis DepthAI. El proyecto utiliza una placa de soporte para acoplar una VPU Myriad X y un conjunto de cámaras al módulo de cómputo Raspberry Pi, y las ganancias de rendimiento hasta ahora han sido muy prometedoras.
¿Entonces, cómo funciona? Las cámaras gemelas en escala de grises permiten que el sistema perciba la profundidad, o distancia, que se utiliza para producir un "mapa de calor"; ideal para tareas como evitar obstáculos. Al mismo tiempo, la cámara en color de alta resolución se puede utilizar para la detección y el seguimiento de objetos. De acuerdo a [Brandon], eludir la CPU del Pi y enviar todos los datos procesados a través de USB proporciona un aumento de rendimiento de aproximadamente 5 veces, lo que permite liberar todo el potencial del chip principal Intel Myriad X.
Para detectar objetos estándar como personas o rostros, será bastante fácil comenzar a usar software como OpenVino, que ya es bastante maduro en Raspberry Pi. Tenemos curiosidad acerca de cómo el sistema manejará modelos personalizados, pero sin duda [Brandon’s] El equipo ayudará a mejorar esta situación para el futuro.
El proyecto se encuentra en un estado de desarrollo activo, que es exactamente lo que esperaríamos para participar en el Premio Hackaday 2019. En este momento, las cámaras no son necesariamente ideales, por ejemplo, los sensores de profundidad están demasiado juntos para ser muy efectivos, pero el equipo todavía está ajustando su selección de hardware. En última instancia, el objetivo es crear un dispositivo que ayude a los ciclistas a evitar colisiones peligrosas, y estamos muy interesados en ver evolucionar el proyecto.
El video después del descanso muestra el mapa de calor estereoscópico en acción. La mano se muestra como un amarillo cálido, ya que está relativamente cerca en comparación con el fondo azul. Hemos cubierto la combinación Raspberry Pi y la memoria USB Movidius en el pasado, pero el rendimiento de la visión estéreo mejora Luxonis DepthAI realmente lo lleva a otro nivel.