OpenMV4 Cam H7 Plus

Το OpenMV Cam είναι μια μικρή πλακέτα μικροελεγκτή χαμηλής κατανάλωσης που σας επιτρέπει να υλοποιήσετε εύκολα εφαρμογές χρησιμοποιώντας μηχανική όραση στον πραγματικό κόσμο. Προγραμματίζετε το OpenMV Cam σε σενάρια Python υψηλού επιπέδου (χάρη στο Λειτουργικό Σύστημα MicroPython) αντί για C/C++. Αυτό διευκολύνει την αντιμετώπιση των πολύπλοκων αποτελεσμάτων των αλγορίθμων μηχανικής όρασης και την εργασία με δομές δεδομένων υψηλού επιπέδου. Ωστόσο, εξακολουθείτε να έχετε πλήρη έλεγχο του OpenMV Cam και των ακροδεκτών εισόδου/εξόδου του σε Python. Μπορείτε εύκολα να ενεργοποιήσετε τη λήψη φωτογραφιών και βίντεο σε εξωτερικά συμβάντα ή να εκτελέσετε αλγόριθμους μηχανικής όρασης για να καθορίσετε πώς να ελέγξετε τους ακροδέκτες εισόδου/εξόδου σας.

Το OpenMV Cam διαθέτει:

• STM32H743IIARM Cortex M7 επεξεργαστής λειτουργώντας στα 480 MHz με 32MB SDRAM + 1MB SRAM και 32 MB εξωτερικής flash + 2 MB εσωτερικής flash. Όλοι οι ακροδέκτες I/O εξάγουν 3.3V και είναι ανεκτικοί στα 5V. Ο επεξεργαστής διαθέτει τις ακόλουθες διεπαφές I/O:
• • Μια διεπαφή USB πλήρους ταχύτητας (12 Mbps) στον υπολογιστή σας. Το OpenMV Cam θα εμφανιστεί ως Εικονική Θύρα COM και ως Μονάδα Flash USB όταν συνδεθεί.
  • Ένας υποδοχέας κάρτας μSD ικανός για αναγνώσεις/εγγραφές 100Mbs που επιτρέπει στην κάμερά σας OpenMV να τραβάει φωτογραφίες και να ανακτά εύκολα στοιχεία μηχανικής όρασης από την κάρτα μSD.
  • Ένα δίαυλο SPI που μπορεί να λειτουργήσει έως και 80 Mbps, επιτρέποντάς σας να μεταφέρετε εύκολα δεδομένα εικόνας από το σύστημα είτε στην Ασπίδα LCD, στην Ασπίδα WiFi ή σε έναν άλλο μικροελεγκτή.
  • Ένας Δίαυλος I2C (έως 1Mb/s), Δίαυλος CAN (έως 1Mb/s) και ένας Ασύγχρονος Σειριακός Δίαυλος (TX/RX, έως 7.5Mb/s) για διασύνδεση με άλλους μικροελεγκτές και αισθητήρες.
  • Ένας μετατροπέας αναλογικού σε ψηφιακό 12-bit και ένας μετατροπέας ψηφιακού σε αναλογικό 12-bit.
  • Δύο ακίδες I/O για έλεγχο σερβοκινητήρων.
  • Διακοπές και PWM σε όλες τις ακίδες εισόδου/εξόδου (υπάρχουν 10 ακίδες εισόδου/εξόδου στον πίνακα).
  • Και, ένα LED RGB και δύο υψηλής ισχύος IR LED 850nm.
  • 32 MB εξωτερικής 32-bit SDRAM με ρολόι στα 100 MHz για εύρος ζώνης 400 MB/s.
  • 32 MB εξωτερικής quadspi flash με ρολόι στα 100 MHz σε λειτουργία 4-bit DDR για εύρος ζώνης 100 MB/s (ταχύτητα ανάγνωσης).
• Ένα αφαιρούμενο σύστημα μονάδας κάμερας, με υποστήριξη παράλληλης 8-bit, επιτρέποντας στην OpenMV Cam H7 να συνδέεται με διαφορετικούς αισθητήρες:
• • Το OpenMV Cam H7 Plus διαθέτει έναOV5640Ο αισθητήρας εικόνας είναι ικανός να λαμβάνει εικόνες 2592x1944 (5MP). Οι περισσότεροι απλοί αλγόριθμοι θα εκτελούνται με ρυθμό 25-50 καρέ ανά δευτερόλεπτο σε αναλύσεις QVGA (320x240) και χαμηλότερες. Ο αισθητήρας εικόνας σας συνοδεύεται από έναν φακό 2,8mm σε τυπική βάση φακού M12. Εάν επιθυμείτε να χρησιμοποιήσετε πιο εξειδικευμένους φακούς με τον αισθητήρα εικόνας σας, μπορείτε εύκολα να τους αγοράσετε και να τους προσαρμόσετε μόνοι σας. Για τη χρήση πιο εξειδικευμένων φακών, μπορείτε εύκολα να τους εγκαταστήσετε.
  • Για επαγγελματικές εφαρμογές μηχανικής όρασης, μπορείτε να αγοράσετε το SingTownμονάδα κάμερας παγκόσμιας κλείστρας mt9V034SingTown
  • Για εφαρμογές μηχανικής όρασης με θερμική απεικόνιση υπέρυθρης ακτινοβολίας, μπορείτε να αγοράσετε το SingTownFLIR Lepton θερμική μονάδα απεικόνισης.
• 3.7V διεπαφή μπαταρίας λιθίου-ιόντων, μπορείτε να αγοράσετε το SingTown3.7V-1000MAH μπαταρία λιθίου-ιόντων

Τεκμηρίωση:https://singtown.com/openmv/

Εφαρμογές

Προς το παρόν, η κάμερα OpenMV μπορεί να κάνει τα εξής (με περισσότερα να έρχονται):

• Ανίχνευση Αντικειμένων με Νευρωνικά Δίκτυα
• • Μπορείτε να χρησιμοποιήσετε το OpenMV για να εκπαιδεύσετε νευρωνικά δίκτυα για ανίχνευση αντικειμένων, εκπαιδεύοντας οποιοδήποτε στόχο θέλετε να ανιχνεύσετε. Για παράδειγμα, διαφορετικούς αριθμούς, διαφορετικά φρούτα, διαφορετικούς δείκτες, διαφορετικά μέρη ή οποιοδήποτε συγκεκριμένο ακανόνιστο στόχο μπορούν να εκπαιδευτούν για να αναγνωρίσουν τον αριθμό, τις συντεταγμένες και το όνομα τύπου αντικειμένου συγκεκριμένων στόχων.
  • Μπορείτε να ανιχνεύσετε πινακίδες κυκλοφορίας στους πραγματικούς μας δρόμους βάσει των βίντεο μαθημάτων μας, όπως απαγόρευση κόρνας, απαγόρευση στάθμευσης, όριο ταχύτητας 80 κ.λπ./learn/50918
• Ταξινόμηση Νευρωνικού Δικτύου
• • Μπορείτε να χρησιμοποιήσετε το OpenMV για να εκπαιδεύσετε νευρωνικά δίκτυα για ανίχνευση αντικειμένων, εκπαιδεύοντας οποιοδήποτε στόχο θέλετε να ανιχνεύσετε. Για παράδειγμα, διαφορετικούς αριθμούς, διαφορετικά φρούτα, διαφορετικούς δείκτες, διαφορετικά μέρη ή οποιοδήποτε συγκεκριμένο ακανόνιστο στόχο μπορούν να εκπαιδευτούν για να αναγνωρίσουν τον αριθμό, τις συντεταγμένες και το όνομα τύπου αντικειμένου συγκεκριμένων στόχων.
  • Μπορεί να ταξινομήσει εάν ένα άτομο φορά μάσκα βάσει του εκπαιδευτικού μας βίντεο./learn/50872
• TensorFlow Lite για Μικροελεγκτές
• • Η υποστήριξη TensorFlow Lite σας επιτρέπει να εκτελείτε προσαρμοσμένα μοντέλα ταξινόμησης και διαχωρισμού εικόνας στο OpenMV Cam. Με το TensorFlow Lite, μπορείτε εύκολα να ταξινομήσετε πολύπλοκες περιοχές στην εικόνα και να ελέγξετε τους ακροδέκτες 1/0 με βάση αυτό που βλέπετε.

• Πλαισιακή Διαφοροποίηση
• • Μπορείτε να χρησιμοποιήσετε τον αλγόριθμο διαφοροποίησης καρέ στο OpenMV Cam σας για να ανιχνεύσετε κίνηση σε μια σκηνή. Η διαφοροποίηση καρέ επιτρέπει στο OpenMV σας να χρησιμοποιηθεί για εφαρμογές ασφαλείας.
• Παρακολούθηση Χρώματος
• • Μπορείτε να χρησιμοποιήσετε το OpenMV για να ανιχνεύσετε έως και 16 χρώματα ταυτόχρονα σε μια εικόνα (αν και ποτέ δεν θα θέλετε να βρείτε περισσότερα από 4 χρώματα), και κάθε χρώμα μπορεί να έχει οποιονδήποτε αριθμό διαφορετικών κηλίδων. Το OpenMV θα σας ενημερώσει για τη θέση, το μέγεθος, το κέντρο και τον προσανατολισμό κάθε κηλίδας. Χρησιμοποιώντας την παρακολούθηση χρωμάτων, το OpenMV Cam μπορεί να προγραμματιστεί να παρακολουθεί τον ήλιο, να ακολουθεί γραμμές, να παρακολουθεί στόχους και πολλά άλλα. Επίδειξη βίντεο:/learn/49993

• Marker Tracking
• • Μπορείτε να χρησιμοποιήσετε την κάμερά σας OpenMV για να ανιχνεύσετε ομάδες χρωμάτων αντί για μεμονωμένα χρώματα. Αυτό σας επιτρέπει να τοποθετήσετε ετικέτες χρωμάτων (2 ή περισσότερες ετικέτες χρωμάτων) σε αντικείμενα και το OpenMV θα λάβει το περιεχόμενο των αντικειμένων με ετικέτες.
• Ανίχνευση Προσώπου
• • Μπορείτε να χρησιμοποιήσετε την κάμερά σας OpenMV για να ανιχνεύσετε πρόσωπα (ή οποιοδήποτε γενικό αντικείμενο). Η κάμερά σας OpenMV μπορεί να επεξεργαστεί πρότυπα Haar για γενική ανίχνευση αντικειμένων και διαθέτει ενσωματωμένα πρότυπα Haar για πρόσωπο και μάτια για την ανίχνευση προσώπων και ματιών./learn/50013

• Παρακολούθηση Οφθαλμών
• • Μπορείτε να χρησιμοποιήσετε την παρακολούθηση της ματιάς για να ανιχνεύσετε την κατεύθυνση που κοιτάει κάποιος. Μπορείτε να το χρησιμοποιήσετε για να ελέγξετε ρομπότ. Η παρακολούθηση της ματιάς ανιχνεύει τη θέση της κόρης ενώ ανιχνεύει αν υπάρχουν μάτια στην εικόνα.
• Ανίχνευση Ατόμων
• • Μπορείτε να χρησιμοποιήσετε τον ενσωματωμένο ανιχνευτή προσώπων (μοντέλο TensorFlow Lite) για να ανιχνεύσετε εάν υπάρχουν άτομα στο οπτικό πεδίο.

• Optical Flow
• • Μπορείτε να χρησιμοποιήσετε τη ροή οπτικού πεδίου για να ανιχνεύσετε κίνηση μπροστά από την κάμερά σας OpenMV. Για παράδειγμα, μπορείτε να χρησιμοποιήσετε τη ροή οπτικού πεδίου σε ένα τετραπλόπτερο για να ελέγξετε τη σταθερότητα στον αέρα.

• Ανίχνευση/Αποκωδικοποίηση Κώδικα QR
• • Μπορείτε να χρησιμοποιήσετε την κάμερά σας OpenMV για να διαβάσετε κωδικούς QR στο οπτικό της πεδίο. Με την ανίχνευση/αποκωδικοποίηση κωδικών QR, μπορείτε να επιτρέψετε σε έξυπνα ρομπότ να διαβάζουν ετικέτες στο περιβάλλον τους.

• Ανίχνευση/Αποκωδικοποίηση Data Matrix
• • Το OpenMV Cam μπορεί επίσης να ανιχνεύσει και να αποκωδικοποιήσει κώδικες Data Matrix (δισδιάστατους γραμμωτούς κώδικες). Μπορείτε να δείτε το βίντεό μας εδώ.
• Αποκωδικοποίηση Γραμμικού Barcode SingTown
• • Το OpenMV Cam μπορεί επίσης να επεξεργαστεί μονοδιάστατους γραμμωτούς κώδικες. Μπορεί να αποκωδικοποιήσει EAN2, EAN5, EAN8, UPCE, ISBN10, UPCA, EAN13, ISBN13, I25, DATABAR, DARABAR_EXP, CODABAR, CODE39, CODE93 και CODE128. Δείτε το βίντεό μας εδώ:/learn/50017

• Παρακολούθηση AprilTag
• • Ακόμα καλύτερα από τους QR κώδικες παραπάνω, το OpenMV Cam μπορεί επίσης να ανιχνεύει AprilTags. Τα AprilTags είναι σύγχρονοι οδηγητικοί δείκτες που είναι ανεξάρτητοι από περιστροφή, κλίμακα, διάτμηση και φωτισμό. Δείτε το βίντεό μας εδώ:/learn/49590

• Ανίχνευση Γραμμής
• • Το OpenMV Cam μπορεί να ολοκληρώσει γρήγορα την ανίχνευση απείρων γραμμών ενώ λειτουργεί σχεδόν σε πλήρες ρυθμό καρέ. Επίσης, μπορεί να εντοπίσει μη άπειρα τμήματα γραμμών. Μπορείτε να δείτε το βίντεό μας εδώ:/learn/50009
• Ανίχνευση Κύκλου
• • Μπορείτε εύκολα να χρησιμοποιήσετε το OpenMV για την ανίχνευση κύκλων σε εικόνες.

• Ανίχνευση Ορθογωνίου
• • Το OpenMV μπορεί επίσης να ανιχνεύσει ορθογώνια, χρησιμοποιώντας τον κώδικα ανίχνευσης τετραγώνων από τη βιβλιοθήκη AprilTag.
• Αντιστοίχιση Προτύπου
• • Μπορείτε να χρησιμοποιήσετε την αντιστοίχιση προτύπων του OpenMV για να ανιχνεύσετε εάν υπάρχουν εικόνες παρόμοιες με πρότυπο στην οπτική περιοχή. Για παράδειγμα, η αντιστοίχιση προτύπων μπορεί να χρησιμοποιηθεί για την εύρεση σημαδιών σε πλακέτες τυπωμένων κυκλωμάτων ή για την ανάγνωση γνωστών αριθμών σε οθόνες.

• Λήψη Εικόνας
• • Μπορείτε να χρησιμοποιήσετε το OpenMV για να καταγράψετε εικόνες RGB565/γκριζοκίτρινες BMP/JPG/PPM/PGM. Μπορείτε να ελέγξετε άμεσα τον τρόπο λήψης εικόνων σε σενάρια Python. Το πιο σημαντικό, χρησιμοποιήστε αλγόριθμους μηχανικής όρασης για να σχεδιάσετε γραμμές, χαρακτήρες και στη συνέχεια να αποθηκεύσετε.

• Εγγραφή Βίντεο
• • Μπορείτε να χρησιμοποιήσετε την κάμερα OpenMV για να καταγράψετε βίντεο MJPEG RGB565/ασπρόμαυρα ή εικόνες GIF (ή βίντεο RAW). Μπορείτε να ελέγξετε απευθείας πώς καταγράφεται κάθε καρέ βίντεο σε σενάρια Python και να έχετε πλήρη έλεγχο πότε ξεκινά και τελειώνει η εγγραφή βίντεο. Επίσης, όπως στη λήψη φωτογραφιών, μπορείτε να χρησιμοποιήσετε αλγόριθμους μηχανικής όρασης για να σχεδιάσετε γραμμές, χαρακτήρες και στη συνέχεια να αποθηκεύσετε.

Τέλος, όλες οι παραπάνω λειτουργίες μπορούν να συνδυαστούν με τον έλεγχο ακίδων IO για να λειτουργήσουν με τις δικές σας προσαρμοσμένες εφαρμογές για αλληλεπίδραση με τον πραγματικό κόσμο.