Robot od "vidění" k "porozumění", SingTown Technology podporuje vizuální upgrade

V aplikacích inteligentních servisních robotů je vnímání prostředí a rozpoznávání cílů klíčovou technologií pro dosažení autonomní interakce a provádění úkolů.

Robot musí v složitém vnitřním prostředí rozpoznávat různé objekty, jako jsou dveře místnosti a jejich stav otevření/zavření, gesta lidského těla, QR kódy a typické předměty v životních scénářích (například stoly, předměty, značky atd.). Za tímto účelem plánují výrobci servisních robotů využít inteligentní kameru SingTown OpenMV k vytvoření systému pro rozpoznávání více cílů založeného na strojovém vidění. Tento systém je instalován na hlavě nebo těle robota a dokáže podle pokynů hlavního řídicího systému zachytit obrazy v určeném směru v reálném čase, rozpoznat kategorii cíle, jeho rozměry a barevné charakteristiky a výsledky rozpoznání předat hostitelskému počítači pro rozhodování o trase, spouštění úloh nebo hlasovou interakci. Kromě toho lze systém rozšířit o rozpoznávání QR kódů, čímž se dosáhne navigační lokalizace, rozpoznání úloh nebo ověření identity, což pomáhá robotům dosáhnout vyšší úrovně inteligentního chování v oblastech jako je každodenní život, bezpečnostní ochrana a průvodcovské služby.

Výrobci servisních robotů vyvinuli systém pro rozpoznávání více cílů založený na inteligentní kameře OpenMV od společnosti SingTown. Tento systém umožňuje servisním robotům dosáhnout inteligentního vizuálního vnímání ve složitých scénách a integruje počítačové vidění, rozpoznávání obrazu pomocí AI, porovnávání šablon, sledování barev, morfologickou analýzu a algoritmy pro dekódování QR kódů.

Systém v reálném čase snímá obraz z kamery v zorném poli robota před ním. AI na koncovém zařízení využívá model detekce cílů k rozpoznání okrajů objektů a tvarových charakteristik, což umožňuje určit polohu dveří a jejich stav otevření či zavření. Analýzou barevného rozdělení a změn jasu lze identifikovat barvy, rozměry a relativní vzdálenosti různých objektů.

Robot také dokáže rozpoznávat gesta. Při blízkém kontaktu systém na základě algoritmů sledování obrysů a porovnávání klíčových bodů identifikuje běžné pohyby (jako zvednutí ruky, ukázání, mávání atd.). Zároveň vestavěná funkce rozpoznávání QR kódů umožňuje identifikaci navigačních bodů robota nebo přijímání pokynů k úkolům.

Tento systém umožňuje nasazení na okraji sítě, jeho algoritmus vykazuje vysokou efektivitu provozu v embedded prostředí, snímková frekvence může dosáhnout více než 20 snímků za sekundu a zpoždění rozpoznávání je nižší než 100 ms.

Systém může komunikovat s hlavním řídicím mikrokontrolérem prostřednictvím sériového portu, I²C nebo CAN sběrnice, výstupně poskytuje kategorie rozpoznání, rozměry, barvy a stavové informace, čímž umožňuje inteligentní propojení s hostitelským zařízením.

Výsledky testů ukazují, že řešení vyvinuté na základě inteligentní kamery OpenMV od společnosti SingTown dosahuje v interiéru při změnách osvětlení přesnosti rozpoznání nad 92 % a podporuje různé scénáře úloh, jako jsou roboti pro domácí doprovod, bezpečnostní hlídací roboti nebo průvodci, což výrazně zlepšuje schopnost robotů porozumět prostředí a interagovat.