OpenMV4 Cam H7 Plus

OpenMV Cam - бұл нақты жағдайда машиналық көру арқылы қолданбаларды оңай іске асыруға мүмкіндік беретін шағын, төмен қуатты микроконтроллерлік тақта. OpenMV Cam-ді C/C++ емес, жоғары деңгейлі Python скрипттері арқылы бағдарламалайсыз (MicroPython Операциялық Жүйесінің арқасында). Бұл машиналық көру алгоритмдерінің күрделі нәтижелерімен және жоғары деңгейлі деректер құрылымдарымен жұмыс істеуді жеңілдетеді. Бірақ, сіз Python арқылы өз OpenMV Cam-іңізге және оның I/O түйреуіштеріне толық бақылау жасай аласыз. Сіз сыртқы оқиғалар бойынша суреттер мен бейне түсіруді оңай іске қоса аласыз немесе I/O түйреуіштерін қалай басқару керектігін анықтау үшін машиналық көру алгоритмдерін орындай аласыз.

OpenMV Cam құралдары:

• STM32H743II480 МГц жылдамдықта жұмыс істейтін ARM Cortex M7 процессоры, 32 МБ SDRAM + 1 МБ SRAM және 32 МБ сыртқы флеш-жады + 2 МБ ішкі флеш-жады бар. Барлық I/O түйреуіштері 3,3 В шығарады және 5 В кернеуге төзімді. Процессорда келесі I/O интерфейстері бар:
• • Компьютеріңізге толық жылдамдықтағы USB (12 Мбит/с) интерфейсі. OpenMV Cam-іңіз қосылған кезде Виртуалды COM Порт және USB Flash Drive ретінде көрінеді.
  • 100 Мбит/с оқу/жазу мүмкіндігі бар μSD карта ұясы, ол OpenMV камераңызға суретке түсіруге және μSD картадан машиналық көру активтерін оңай алуға мүмкіндік береді.
  • 80 Мбит/с жылдамдыққа дейін жұмыс істей алатын SPI шинасы, ол сізге сурет деректерін жүйеден LCD Shield, WiFi Shield немесе басқа микроконтроллерге оңай ағызуға мүмкіндік береді.
  • I2C желісі (1 Мб/с дейін), CAN желісі (1 Мб/с дейін) және басқа микроконтроллерлер мен сенсорлармен байланысу үшін асинхронды сериялық желі (TX/RX, 7,5 Мб/с дейін).
  • 12-биттік ADC және 12-биттік DAC.
  • Сервоны басқару үшін екі I/O түйреуіші.
  • Барлық I/O түйреуіштерінде үзілістер және PWM (тақтада 10 I/O түйреуіші бар).
  • Сондай-ақ, RGB жарықдиодты шам және екі жоғары қуатты 850 нм IR жарықдиодты шам.
  • 32 МБ сыртқы 32-биттік SDRAM, 100 МГц жиілікте жұмыс істейді, 400 МБ/с жылдамдықпен.
  • 32 МБ сыртқы квадспи флеш жады 100 МГц жиілікте 4-биттік DDR режимінде жұмыс істейді, бұл 100 МБ/с жылдамдықпен оқу мүмкіндігін қамтамасыз етеді.
• Алынбалы камера модульді жүйесі, 8-битті параллельді қолдаумен, OpenMV Cam H7-ге әртүрлі сенсорлармен байланысуға мүмкіндік береді:
• • OpenMV Cam H7 Plus SingTown-пен бірге келедіOV5640Image sensor 2592x1944 (5MP) суреттерді түсіре алады. Қарапайым алгоритмдер QVGA (320x240) және одан төмен ажыратымдылықта 25-50 FPS жылдамдықпен жұмыс істейді. Сіздің image sensor-іңіз стандартты M12 линза орнатылған 2.8мм линзамен бірге келеді. Егер image sensor-іңізге арнайы линзаларды қолданғыңыз келсе, оларды оңай сатып алып, орната аласыз. Арнайы линзаларды қолдану үшін оларды оңай орната аласыз.
  • Кәсіби машиналық көру қолданбалары үшін біздің SingTown өнімдерін сатып алуға болады.Global shutter камера модулі mt9V034SingTown.
  • Инфрақызыл жылулық кескіндеу машиналық көру қолданбалары үшін біздіңFLIR Lepton жылулық кескіндеме модулі.
• 3.7V литий-иондық батарея интерфейсі, біздің SingTown өнімдерін сатып ала аласыз.3.7V-1000MAH литий-иондық батарея

Құжаттама:https://singtown.com/openmv/

Қолданбалар

Қазіргі уақытта OpenMV камерасы мынаны жасай алады (болашақта тағы да көп нәрселер қосылады):

• Нейрондық желі арқылы объектілерді анықтау
• • Сіз OpenMV арқылы нысанды анықтау үшін нейрондық желілерді оқыта аласыз, сіз анықтағыңыз келетін кез келген нысанды оқыта аласыз. Мысалы, әртүрлі сандар, әртүрлі жемістер, әртүрлі белгілер, әртүрлі бөлшектер немесе кез келген нақты бейрегулі нысандарды оқыту арқылы нақты нысандардың санын, координаталарын және нысан түрінің атауын анықтауға болады.
  • Сіз біздің бейне оқулықтарымыз негізінде нақты жолдардағы қозғалыс белгілерін анықтай аласыз, мысалы, дүркін шығармау, тұрақтамау, жылдамдық шегі 80, т.б./learn/50918
• Нейрондық желілерді жіктеу
• • Сіз OpenMV арқылы нысанды анықтау үшін нейрондық желілерді оқыта аласыз, сіз анықтағыңыз келетін кез келген нысанды оқыта аласыз. Мысалы, әртүрлі сандар, әртүрлі жемістер, әртүрлі белгілер, әртүрлі бөлшектер немесе кез келген нақты бейрегулі нысандарды оқыту арқылы нақты нысандардың санын, координаталарын және нысан түрінің атауын анықтауға болады.
  • Біздің бейне оқулығымыз негізінде адамның бетперде киіп жатқанын немесе жатпағанын анықтай алады./learn/50872
• TensorFlow Lite for Microcontrollers
• • TensorFlow Lite қолдауы OpenMV Cam-де жеке суреттерді жіктеу және сегментациялау модельдерін іске қосуға мүмкіндік береді. TensorFlow Lite арқысында сіз суреттегі күрделі аймақтарды оңай жіктеп, көргеніңізге сүйене отырып 1/0 түйреуіштерін басқара аласыз.

• Frame Differencing
• • Сіз OpenMV камераңызда кадрларды айырмашылық алгоритмін пайдаланып, сценадағы қозғалысты көре аласыз. Кадрларды айырмашылық әдісі OpenMV-ді қауіпсіздік қолданбалары үшін пайдалануға мүмкіндік береді.
• Түстерді Бақылау
• • OpenMV арқылы сіз бір суретте бір уақытта 16 түрлі түсті анықтай аласыз (дегенмен, 4-тен астам түсті табу қажет емес), әрбір түстің әртүрлі дақтар саны болуы мүмкін. OpenMV әрбір дақтың орналасуын, өлшемін, орталығын және бағытын айтады. Түсті бақылау арқылы сіздің OpenMV камераңыз күнді бақылау, сызықтарды еріту, нысандарды қуу және басқа да тапсырмаларды орындау үшін бағдарламалануы мүмкін. Бейне демо:/learn/49993

• Marker Tracking
• • Сіз OpenMV камераңызды жеке түстерді емес, түстер тобын анықтау үшін пайдалана аласыз. Бұл объектілерге түс белгілерін (2 немесе одан да көп түс белгілерін) орналастыруға мүмкіндік береді, сонда OpenMV белгіленген объектілердің мазмұнын алады.
• Face Detection
• • Сіз OpenMV камераңызды беттерді (немесе кез келген жалпы объектіні) анықтау үшін пайдалана аласыз. Сіздің OpenMV камераңыз жалпы объектілерді анықтау үшін Haar үлгілерін өңдей алады және беттер мен көздерді анықтау үшін кірістірілген Фронталды Бет және Көз Haar үлгілерімен бірге келеді./learn/50013

• Көзді бақылау
• • Көздің қарайтын бағытын анықтау үшін көзді бақылауды пайдалануға болады. Бұл роботтарды басқару үшін қолданылуы мүмкін. Көзді бақылау көздердің суретте бар-жоғын анықтай отырып, қарашықтың орнын анықтайды.
• Адамды анықтау
• • Сіз көріністе адамдар бар-жоғын анықтау үшін кірістірілген адам детекторын (TensorFlow Lite моделі) пайдалана аласыз.

• Оптикалық ағын
• • Сіз OpenMV камерасының алдындағы қозғалысты анықтау үшін оптикалық ағынды пайдалана аласыз. Мысалы, төрт винтті ұшақта оптикалық ағынды пайдаланып, ауадағы тұрақтылықты басқаруға болады.

• QR Code Анықтау/Шифрлау
• • Сіз OpenMV камераңызды оның көру өрісіндегі QR кодтарын оқу үшін пайдалана аласыз. QR кодты анықтау/декодтау арқылы сіз ақылды роботтарды олардың ортасындағы белгілерді оқуға мүмкіндік бере аласыз.

• Data Matrix Анықтау/Декодтау
• • OpenMV Cam сонымен қатар Data Matrix кодтарын (2D штрих-кодтар) анықтап, декодтай алады. Сіз біздің бейнені мына жерден көре аласыз.
• Linear Barcode Decoding
• • OpenMV Cam сондай-ақ 1D штрих-кодтарды өңдей алады. Ол EAN2, EAN5, EAN8, UPCE, ISBN10, UPCA, EAN13, ISBN13, I25, DATABAR, DARABAR_EXP, CODABAR, CODE39, CODE93 және CODE128 кодтарын декодтай алады. Біздің бейнені мына жерден көріңіз:/learn/50017

• AprilTag Бақылау
• • OpenMV камерасы QR кодтарынан да жақсы, ол AprilTags-ті де бақылай алады. AprilTags - бұл айналмалы, масштабтық, қиғаштық және жарықтандыру тәуелсіздігі бар заманауи фидуциалды маркерлер. Біздің бейнені мына жерден көріңіз:/learn/49590

• Сызықтарды анықтау
• • OpenMV Cam дерлік толық кадр жылдамдығында жұмыс істеп, шексіз сызықтарды тез анықтай алады. Сонымен қатар, ол шексіз емес сызық сегменттерін де таба алады. Біздің бейнені мына жерден көре аласыз:/learn/50009
• Шеңберді анықтау
• • OpenMV арқылы суреттердегі шеңберлерді оңай анықтай аласыз.

• Тікбұрышты анықтау
• • OpenMV сондай-ақ төртбұрыштарды анықтай алады, AprilTag кітапханасының шаршы анықтау кодын пайдалана отырып.
• Template Matching
• • Сіз OpenMV үлгі сәйкестендіруді пайдаланып, көріністе үлгіге ұқсас суреттер бар-жоғын анықтай аласыз. Мысалы, үлгі сәйкестендіру ПХД-дағы белгілерді табуға немесе дисплейлердегі белгілі сандарды оқуға қолданылуы мүмкін.

• Суретті түсіру
• • Сіз OpenMV арқылы RGB565/сұр түсті BMP/JPG/PPM/PGM суреттерін түсіре аласыз. Сіз Python скрипттерінде суреттерді қалай түсіруді тікелей басқара аласыз. Ең бастысы, машиналық көру алгоритмдерін пайдаланып сызықтар салу, таңбалар салу, содан кейін сақтау.

• Бейнежазба
• • Сіз OpenMV камерасын пайдаланып, RGB565/сұр түсті MJPEG бейнелерін немесе GIF суреттерін (немесе RAW бейнелерін) жазуға болады. Сіз Python скрипттерінде әр бейне кадрының қалай жазылатынын тікелей басқара аласыз және бейне жазу басталған кезде және аяқталған кезде толық бақылау жасай аласыз. Сонымен қатар, суретке түсіру сияқты, сіз машиналық көру алгоритмдерін пайдаланып, сызықтар сыза аласыз, таңбалар сала аласыз, содан кейін сақтай аласыз.

Соңында, жоғарыда аталған барлық мүмкіндіктерді IO түйреуіш басқаруымен араластырып, өз теңшеу қолданбаларыңызбен жұмыс істеуге және нақты әлеммен өзара әрекеттесуге болады.