De "ver" a "comprender", SingTown impulsa la mejora de la visión robótica.

En las aplicaciones de robots de servicio inteligente, la percepción del entorno y el reconocimiento de objetivos son tecnologías clave para lograr la interacción autónoma y la ejecución de tareas.

El robot necesita identificar múltiples objetos en entornos interiores complejos, como puertas de habitaciones y su estado de apertura o cierre, gestos humanos, códigos QR, así como objetos típicos en escenarios cotidianos (como mesas, artículos, señales, etc.). Para ello, los fabricantes de robots de servicio planean utilizar la cámara inteligente OpenMV de SingTown Technology para construir un sistema de reconocimiento de múltiples objetivos basado en visión artificial. Este sistema, instalado en la cabeza o el cuerpo del robot, puede capturar imágenes en tiempo real en direcciones específicas según las instrucciones del control principal, identificar la categoría, tamaño y características de color del objetivo, y devolver los resultados al host para la toma de decisiones de ruta, activación de tareas o respuestas de interacción vocal. Además, se puede ampliar para reconocer códigos QR, logrando navegación y posicionamiento, identificación de tareas o autenticación, ayudando a los robots a alcanzar comportamientos inteligentes de mayor nivel en áreas como la vida cotidiana, seguridad, guías turísticos, entre otros.

El sistema de reconocimiento de múltiples objetivos desarrollado por fabricantes de robots de servicio basado en la cámara inteligente OpenMV de SingTown, permite que los robots de servicio logren una percepción visual inteligente en escenarios complejos, integrando algoritmos de visión por computadora, reconocimiento de imágenes con IA, coincidencia de plantillas, seguimiento de colores, análisis de formas y decodificación de códigos QR.

El sistema recopila en tiempo real imágenes del campo visual frontal del robot mediante la cámara. La IA en el dispositivo utiliza un modelo de detección de objetos para identificar los bordes y características de forma, permitiendo determinar la posición de la puerta y su estado de apertura o cierre. Mediante el análisis de segmentación de color y cambios de luminosidad, puede reconocer el color, tamaño y distancia relativa de diversos objetos.

Este robot también puede reconocer gestos. En condiciones de corta distancia, el sistema utiliza algoritmos de seguimiento de contorno y coincidencia de puntos clave para identificar movimientos comunes (como levantar la mano, señalar, agitar, etc.). Además, la función integrada de reconocimiento de códigos QR permite la identificación de puntos de navegación del robot o la recepción de instrucciones de tareas.

El sistema permite implementación en el borde, con algoritmos que operan eficientemente en entornos embebidos, alcanzando una tasa de cuadros superior a 20 fps y un retraso de reconocimiento inferior a 100 ms.

El sistema puede comunicarse con el microcontrolador principal a través de puerto serie, I²C o bus CAN, emitiendo categorías de reconocimiento, dimensiones, colores e información de estado, logrando una interacción inteligente con el host.

Los resultados de las pruebas muestran que la solución desarrollada basada en la cámara inteligente OpenMV de SingTown Technology logra una precisión de reconocimiento superior al 92% bajo cambios de iluminación interior, puede admitir múltiples escenarios de tareas, como robots de compañía domésticos, robots de patrulla de seguridad y robots guía, mejorando significativamente la capacidad de comprensión e interacción del robot con el entorno.