Роботтардың «көруден» «түсінуге» дейінгі жолында SingTown технологиясы көру қабілетін жаңартуды ілгерілетеді

Ақылды қызмет көрсету роботтарын қолдануда, ортаны сезіну және нысанды тану – бұл автономды өзара әрекеттесу мен тапсырмаларды орындауды іске асырудың негізгі технологиялары болып табылады.

Робот күрделі ішкі ортада бірнеше объектілерді тануы керек, мысалы, бөлменің есігі мен оның ашық-жабық күйі, адамның қолының ишарасы, QR-код, сондай-ақ тұрмыстық сценарийлердегі типтік заттар (үстел, заттар, белгілер және т.б.). Осы мақсатта қызмет көрсету роботтарын өндірушілер SingTown технологиясының OpenMV ақылды камерасын пайдаланып, машиналық көруге негізделген көп нысанды тану жүйесін құруды жоспарлап отыр. Бұл жүйе роботтың басына немесе корпусына орнатылып, басқарушы командаларға сәйкес белгіленген бағыттағы суреттерді нақты уақытта түсіре алады, нысандардың санатын, өлшемдерін және түс ерекшеліктерін анықтайды, содан кейін тану нәтижелерін басқарылатын компьютерге жібереді, бұл жолды шешім қабылдау, тапсырманы іске қосу немесе дауыстық өзара әрекеттесу үшін пайдаланылады. Сонымен қатар, QR-кодтарды тануды кеңейтуге болады, навигациялық орналастыруды, тапсырманы тануды немесе куәлік тексеруді іске асыруға мүмкіндік береді, бұл роботтардың тұрмыстық, қауіпсіздік, экскурсиялық және басқа салаларда жоғары деңгейдегі ақылды әрекеттерді іске асыруына көмектеседі.

Сервистік роботтарды өндірушілер SingTown технологиясының OpenMV ақылды камерасы негізінде жасаған көп нысанды тану жүйесі сервистік роботтарға күрделі жағдайларда ақылды көру қабылдауын іске асыруға мүмкіндік береді. Бұл жүйе компьютерлік көру, AI бейне тану, үлгі сәйкестендіру, түс бақылау, морфологиялық талдау және QR-код декодтау алгоритмдерін біріктіреді.

Жүйе камера арқылы роботтың алдындағы көрініс суреттерін нақты уақытта жинайды, шеткі жақтағы ЖС нысананы анықтау моделін пайдаланып, заттардың жиектері мен пішіндерін таниды, бұл есіктің орны мен ашық-жабық күйін анықтауға мүмкіндік береді; түстерді бөлу және жарықтық өзгерістерін талдау арқылы әртүрлі заттардың түсін, өлшемін және салыстырмалы қашықтығын анықтауға болады.

Бұл робот сонымен қатар қолдың қимылдарын тануға да қабілетті. Жақын қашықтықта жүйе контурды бақылау және негізгі нүктелерді сәйкестендіру алгоритмі арқылы жиі кездесетін қимылдарды (қолды көтеру, бағыттау, қағу және т.б.) анықтай алады. Сонымен қатар, кірістірілген QR-кодты тану функциясы роботтың навигациялық нүктелерін анықтау немесе тапсырма бұйрықтарын қабылдау мүмкіндігін қамтамасыз етеді.

Бұл жүйе жиектік орналастыруды жүзеге асыра алады, оның алгоритмі ендірілген ортада жоғары тиімділікпен жұмыс істейді, кадр жиілігі 20fps-тен асып, тану кідірісі 100ms-тен төмен болады.

Жүйе сериялық порт, I²C немесе CAN магистралі арқылы басқару микроконтроллерімен байланыса алады, тану категориясын, өлшемін, түсін және күй ақпаратын шығарады, осылайша хостпен ақылды интеграцияны іске асырады.

Сынақ нәтижелері көрсеткендей, осы SingTown технологиясының OpenMV ақылды камерасы негізінде әзірленген шешім ішкі жарық өзгерістері астында тану дәлдігі 92% жоғары болып, отбасылық серіктес роботтар, қауіпсіздік патрульдік роботтар, экскурсиялық роботтар сияқты көптеген тапсырмаларды қолдай алады, роботтың ортаны түсіну және өзара әрекеттесу қабілетін айтарлықтай арттырады.