ロボットが「見る」から「理解する」へ、SingTownテクノロジーが視覚の進化を推進

スマートサービスロボットの応用において、環境認識と目標識別は自律的なインタラクションとタスク実行を実現するための重要な技術です。

ロボットは複雑な室内環境において、部屋のドアとその開閉状態、人間のジェスチャー、QRコード、および生活シーンにおける典型的な物体（デスク、物品、標識など）など、多様な対象を識別する必要があります。このため、サービスロボットメーカーはSingTownテクノロジーのOpenMVスマートカメラを採用し、機械視覚に基づく多目的識別システムを構築する計画です。このシステムはロボットの頭部または本体に設置され、主制御装置の指示に従って指定方向の画像をリアルタイムで捕捉し、対象のカテゴリ、サイズ、色の特徴を識別し、識別結果をホストに返して経路決定、タスクトリガー、または音声インタラクション応答に利用します。さらに、QRコードの識別を拡張し、ナビゲーション位置特定、タスク識別、または認証を実現し、ロボットが生活、セキュリティ、ガイドなどの分野でより高度なインテリジェント行動を実現することを支援します。

サービスロボットメーカーがSingTown TechnologyのOpenMVスマートカメラを基に開発した多目標認識システムは、サービスロボットに複雑なシーンでのインテリジェントな視覚知覚を実現させ、コンピュータビジョン、AI画像認識、テンプレートマッチング、色追跡、形態分析、QRコードデコードアルゴリズムを融合しています。

システムはカメラを通じてロボット前方の視野画像をリアルタイムで収集し、エッジAIは物体検出モデルを利用して物体の輪郭と形状特徴を識別し、ドアの位置と開閉状態を判断することができます。色分割と明るさ変化の分析を通じて、様々な物体の色、サイズ、相対距離を識別することが可能です。

このロボットはジェスチャー認識も可能で、近距離条件下では、輪郭追跡とキーポイントマッチングアルゴリズムに基づき、一般的な動作（手を挙げる、指さす、振るなど）を認識できます。同時に、内蔵のQRコード認識機能により、ロボットのナビゲーションポイント認識やタスク指令の受信を実現しています。

このシステムはエッジデプロイメントを実現でき、そのアルゴリズムは組み込み環境において高い実行効率を発揮し、フレームレートは20fps以上、認識遅延は100ms未満に達します。

システムはシリアルポート、I²C、またはCANバスを介してメイン制御マイクロコントローラと通信し、識別カテゴリ、サイズ、色、および状態情報を出力することで、ホストとのインテリジェントな連動を実現します。

テスト結果によると、星瞳科技のOpenMVスマートカメラに基づいて開発されたソリューションは、室内照明の変化下で92％以上の識別精度を達成し、家庭用コンパニオンロボット、セキュリティパトロールロボット、ガイドロボットなど、多様なタスクシナリオをサポート可能であり、ロボットの環境理解とインタラクション能力を著しく向上させることができます。