Dalla "visione" alla "comprensione" dei robot, SingTown Technology promuove l'evoluzione visiva.

Nell'applicazione dei robot di servizio intelligenti, la percezione ambientale e il riconoscimento degli obiettivi sono tecnologie chiave per realizzare l'interazione autonoma e l'esecuzione dei compiti.

Il robot deve riconoscere vari oggetti in ambienti interni complessi, come le porte delle stanze e il loro stato di apertura/chiusura, i gesti umani, i codici QR e oggetti tipici della vita quotidiana (ad esempio scrivanie, oggetti, segnali, ecc.). A tal fine, i produttori di robot di servizio intendono utilizzare la telecamera intelligente OpenMV di SingTown per costruire un sistema di riconoscimento multi-oggetto basato sulla visione artificiale. Questo sistema, installato sulla testa o sul corpo del robot, è in grado di catturare in tempo reale immagini nella direzione specificata in base ai comandi del controller principale, riconoscendo la categoria, le dimensioni e le caratteristiche cromatiche degli obiettivi, e restituendo i risultati di riconoscimento al computer host per decisioni sul percorso, attivazione di compiti o risposte interattive vocali. Inoltre, può essere esteso per riconoscere codici QR, consentendo la navigazione e il posizionamento, il riconoscimento dei compiti o l'autenticazione, contribuendo così a realizzare comportamenti intelligenti di livello superiore per i robot nei settori della vita quotidiana, della sicurezza e della guida.

Il sistema di riconoscimento multi-oggetto sviluppato dal produttore di robot di servizio basato sulla telecamera intelligente OpenMV di SingTown, consente ai robot di servizio di realizzare una percezione visiva intelligente in scenari complessi, integrando algoritmi di visione artificiale, riconoscimento di immagini AI, corrispondenza di modelli, tracciamento dei colori, analisi morfologica e decodifica di codici QR.

Il sistema acquisisce in tempo reale le immagini del campo visivo anteriore del robot tramite la fotocamera. L'AI sul lato dispositivo utilizza un modello di rilevamento degli oggetti per identificare i bordi e le caratteristiche di forma, consentendo di determinare la posizione della porta e il suo stato di apertura o chiusura. Attraverso l'analisi della segmentazione dei colori e delle variazioni di luminosità, è possibile riconoscere i colori, le dimensioni e la distanza relativa di vari oggetti.

Il robot può anche riconoscere i gesti: in condizioni di prossimità, il sistema, basandosi su algoritmi di tracciamento dei contorni e corrispondenza dei punti chiave, è in grado di identificare azioni comuni (come alzare la mano, indicare, agitare, ecc.). Allo stesso tempo, la funzione integrata di riconoscimento dei codici QR consente l'identificazione dei punti di navigazione del robot o la ricezione di comandi per le attività.

Il sistema può essere implementato in modalità edge, con algoritmi che operano efficientemente in ambienti embedded, raggiungendo una frequenza di fotogrammi superiore a 20 fps e una latenza di riconoscimento inferiore a 100 ms.

Il sistema può comunicare con il microcontrollore principale tramite porta seriale, I²C o bus CAN, emettendo informazioni su categoria di riconoscimento, dimensioni, colore e stato, realizzando un'interazione intelligente con l'host.

I risultati dei test mostrano che la soluzione sviluppata sulla base della fotocamera intelligente OpenMV di SingTown Technology raggiunge un'accuratezza di riconoscimento superiore al 92% in condizioni di variazione dell'illuminazione interna, supportando molteplici scenari applicativi, come robot domestici di compagnia, robot per la sicurezza e pattugliamento, robot guida, migliorando significativamente la capacità del robot di comprendere l'ambiente e interagire.