4つの「目」で優れた視覚的処理、3Dコンテナ検査を通じたプレス加工品の自動搬出入
2023/09/19
アイ・ディー・エス（IDS imaging）株式会社
ロボットは、単調なワークフローや、退屈な反復作業の処理に才能を発揮します。画像処理と組み合わせると、「視覚的」な面で人間の信頼できる支援者となります。部品を検査する品質保証、部品の組み立てや位置決めの補助、生産プロセスでのミスや偏差の検出に使用され、生産ライン全体の効率を向上させます。自動車メーカーがこれを利用して、プレスラインのサイクルタイムを改善しています。このメーカーと共同で、マンハイムのVMT Vision Machine Technic Bildverarbeitungssysteme GmbHは、コンテナの搬出入を全自動で行うロボットベースの3D測定システム FrameSenseを開発しました。プレス加工品は安全かつ正確に、コンテナから出し入れされます。IDS Imaging Development Systems GmbHの4台のEnsenso 3Dカメラから基本データが提供され、プロセスオートメーションのプラットフォームとなります。
■アプリケーション
FrameSenseが自動化するために設計された実際のワークフローは、多くの製造業務の一部です。機械から排出された部品がプレスされ、コンベアベルトに載せられてコンテナに移動します。そこで積み重ねられます。コンテナがいっぱいになると、次の生産ステップに進み、車両へと組み込まれます。これまでは、従業員がコンテナへの積載を担当していました。これはシンプルなサブタスクのように思えますが、実は複雑です。実際の挿入プロセスに加えて、最初のステップは部品に応じた適切な空きスペースを判断することです。同時に、インターロックなどの干渉要因があれば取り除く必要があり、「入れ物」に欠陥がないか、全般的なチェックを行う必要があります。これらの作業はすべて、ビジョンシステムを搭載したロボットに引き継がれようとしています。しかしここで技術的な課題が生じます。コンテナは異なるメーカーから提供され、タイプがさまざまであるため、寸法が異なります。
■4台の3Dカメラを利用して、タイプ、形状、位置を検査
完全自動の搬出入のためには、ロボットのいわゆるマルチベクトル補正のために、コンテナのいくつかの関連する特長の位置を決定しなければなりません。そのために該当するコンテナのタイプ、形状、位置のチェックがベースとなります。これは搬出入ロボットに確実で衝突しない経路を指示するための、唯一の手段です。このすべてを、既存の生産プロセスに組み込む必要があります。時間の遅れを排除し、部品の位置決めはミリ単位で正確でなければなりません。
これに対処するため、VMTはシステムあたり4台の3Dカメラを使用しています。4台のセンサーがそれぞれ、画像フィールド全体の一部分を記録します。これは2台のコンテナで構成でき、それぞれおよそ1.5×2×1.5m(D×W×H)です。カメラのうち2台は1つのコンテナにフォーカスします。
この結果、それぞれ2つの視点からのデータで、3D点群の高品質の情報が得られます。これら4つのセンサーの点群は、その後の評価のために合成されます。その過程で、コンテナの関連する特長のレジストレーションは、点群全体のROI(Region of Interest)で行われる。レジストレーションとは、6自由度すべてのモデルを使用して、特長を正確に位置決めすることです。他のROIでは、積載中に衝突を招く可能性があ1／4る干渉輪郭が探索されます。最後に、全体的な画像が保存された参照モデルと比較されます。このようにすると、コンテナの状態と位置を、完全に自動化された方法で同時に確認できます。変形したコンテナや傾いたコンテナも処理できます。また、この情報はすべて、品質管理システムで使用するために記録され、すべてのコンテナの状態を追跡できます。校正、測定データの統合、およびその後の評価は、画面の視覚化、操作要素、および各ロボット制御への接続を備えた別のIPC(産業用コンピュータ)で行われます。
画像処理ソリューションの主な結果はマルチベクター補正です。これにより、ロボットは部品を次に可能な適切な配置位置に挿入できるように調整されます。2番目の結果は、充填を妨害する、コンテナ内の干渉するエッジや物体に起因するエラーメッセージです。全体的に状態の良くない破損したコンテナを検出し、データを利用して除外できます。画像処理全体は、VMTが開発した画像処理ソフトウェア MSS(マルチセンサーシステム)で実行されます。FrameSenseは操作が簡単になるように設計され、現場で他のコンポーネントにも直接変換できます。
■頑丈な3Dカメラシステム
カメラ側では、VMTはEnsenso 3Dカメラを利用し、当初はX36モデルでした。現在、FrameSenseは拡張段階にあり、Ensenso Cモデルを搭載しています。この変更の理由は主に、新しい投影プロセスによるプロジェクターのパフォーマンスの改善と、優れた速度です。さらに、Ensenso Cにより、測定可能な体積が増大しました。これはFrameSenseにとって重要な基準で、ロボットは、充填対象のコンテナに、特定の距離までしか近づけないからです。Ensenso Cの仕様はVMTの要件にぴったり一致していると、プロジェクトマネージャー兼テクノロジーマネージャーのAndreas Redekop氏は説明します。「高性能プロジェクターと高解像度、それに高速データ処理は、私たちがカメラを選ぶ際の主な技術面での基準でした。固定されたハウジングへの設置もまた、メリットです」
Ensenso Cはオートメーションおよびロボティクス産業における現在の課題に対処します。他のEnsensoモデルと異なり、3DとRGBカラー情報の両方を提供します。そのため、より有意義な画像データを活用できます。丈夫な3Dカメラシステムのハウジングは、保護クラス IP65／67の要件を満たします。解像度5MPを実現し、現在からおよそ455mmまでのベースラインに対応します。つまり、より大型の物体も確実に検出できることになります。カメラはすばやく容易に操作でき、医療技術、物流、ファクトリーオートメーションなど、主に大容量アプリケーションに対応します。
■今後の予定
コンテナを自動的に搬出入し、統合された3Dコンテナ検査により、FrameSenseを利用して手動のワークステーションを自動化できます。熟練した作業員の不足という状況にあって、システムは自動車業界などのプロセスオートメーションにおいて大きく貢献します。業界に広まっている課題を解決します。Ensenso Cは、データ生成に欠かせないベースとなり、多数のアプリケーションの要件を満たします。製品管理のLukas Neumann氏は、この付加価値を特に重視しています。「プロジェクターの高出力と大型センサー解像度は、イントラロジスティクスの現場では特に有利です。ここでは、高精度の部品を、離れたところから大きな測定体積で把持しなければなりません」従来の物流におけるその他の積み重ね用途やビンピッキング用途では、プロジェクターが高出力でも解像度が低く、速度が速い同様のカメラが考えられます。「見る」ロボットと組み合わせることで、さらなる開発およびオートメーションソリューションは進化を続けます。
■クライアント
VMT Vision Machine Technic Bildverarbeitungssysteme GmbHは、個々のターンキー型の画像処理およびレーザーセンサーシステムを、あらゆるセクターの業界に供給しています。システムソリューションは、アプリケーション範囲全体をカバーする、自社開発の製品ラインをベースとしています。Pepperl＋FuchsGroupの高性能ネットワークのコンピテンスセンターとして、VMTは最先端のテクノロジーを提供し、投資を最大限に保証しています。
https://vmt-vision-technology.com/
■アプリケーション
FrameSenseが自動化するために設計された実際のワークフローは、多くの製造業務の一部です。機械から排出された部品がプレスされ、コンベアベルトに載せられてコンテナに移動します。そこで積み重ねられます。コンテナがいっぱいになると、次の生産ステップに進み、車両へと組み込まれます。これまでは、従業員がコンテナへの積載を担当していました。これはシンプルなサブタスクのように思えますが、実は複雑です。実際の挿入プロセスに加えて、最初のステップは部品に応じた適切な空きスペースを判断することです。同時に、インターロックなどの干渉要因があれば取り除く必要があり、「入れ物」に欠陥がないか、全般的なチェックを行う必要があります。これらの作業はすべて、ビジョンシステムを搭載したロボットに引き継がれようとしています。しかしここで技術的な課題が生じます。コンテナは異なるメーカーから提供され、タイプがさまざまであるため、寸法が異なります。
■4台の3Dカメラを利用して、タイプ、形状、位置を検査
完全自動の搬出入のためには、ロボットのいわゆるマルチベクトル補正のために、コンテナのいくつかの関連する特長の位置を決定しなければなりません。そのために該当するコンテナのタイプ、形状、位置のチェックがベースとなります。これは搬出入ロボットに確実で衝突しない経路を指示するための、唯一の手段です。このすべてを、既存の生産プロセスに組み込む必要があります。時間の遅れを排除し、部品の位置決めはミリ単位で正確でなければなりません。
これに対処するため、VMTはシステムあたり4台の3Dカメラを使用しています。4台のセンサーがそれぞれ、画像フィールド全体の一部分を記録します。これは2台のコンテナで構成でき、それぞれおよそ1.5×2×1.5m(D×W×H)です。カメラのうち2台は1つのコンテナにフォーカスします。
この結果、それぞれ2つの視点からのデータで、3D点群の高品質の情報が得られます。これら4つのセンサーの点群は、その後の評価のために合成されます。その過程で、コンテナの関連する特長のレジストレーションは、点群全体のROI(Region of Interest)で行われる。レジストレーションとは、6自由度すべてのモデルを使用して、特長を正確に位置決めすることです。他のROIでは、積載中に衝突を招く可能性があ1／4る干渉輪郭が探索されます。最後に、全体的な画像が保存された参照モデルと比較されます。このようにすると、コンテナの状態と位置を、完全に自動化された方法で同時に確認できます。変形したコンテナや傾いたコンテナも処理できます。また、この情報はすべて、品質管理システムで使用するために記録され、すべてのコンテナの状態を追跡できます。校正、測定データの統合、およびその後の評価は、画面の視覚化、操作要素、および各ロボット制御への接続を備えた別のIPC(産業用コンピュータ)で行われます。
画像処理ソリューションの主な結果はマルチベクター補正です。これにより、ロボットは部品を次に可能な適切な配置位置に挿入できるように調整されます。2番目の結果は、充填を妨害する、コンテナ内の干渉するエッジや物体に起因するエラーメッセージです。全体的に状態の良くない破損したコンテナを検出し、データを利用して除外できます。画像処理全体は、VMTが開発した画像処理ソフトウェア MSS(マルチセンサーシステム)で実行されます。FrameSenseは操作が簡単になるように設計され、現場で他のコンポーネントにも直接変換できます。
■頑丈な3Dカメラシステム
カメラ側では、VMTはEnsenso 3Dカメラを利用し、当初はX36モデルでした。現在、FrameSenseは拡張段階にあり、Ensenso Cモデルを搭載しています。この変更の理由は主に、新しい投影プロセスによるプロジェクターのパフォーマンスの改善と、優れた速度です。さらに、Ensenso Cにより、測定可能な体積が増大しました。これはFrameSenseにとって重要な基準で、ロボットは、充填対象のコンテナに、特定の距離までしか近づけないからです。Ensenso Cの仕様はVMTの要件にぴったり一致していると、プロジェクトマネージャー兼テクノロジーマネージャーのAndreas Redekop氏は説明します。「高性能プロジェクターと高解像度、それに高速データ処理は、私たちがカメラを選ぶ際の主な技術面での基準でした。固定されたハウジングへの設置もまた、メリットです」
Ensenso Cはオートメーションおよびロボティクス産業における現在の課題に対処します。他のEnsensoモデルと異なり、3DとRGBカラー情報の両方を提供します。そのため、より有意義な画像データを活用できます。丈夫な3Dカメラシステムのハウジングは、保護クラス IP65／67の要件を満たします。解像度5MPを実現し、現在からおよそ455mmまでのベースラインに対応します。つまり、より大型の物体も確実に検出できることになります。カメラはすばやく容易に操作でき、医療技術、物流、ファクトリーオートメーションなど、主に大容量アプリケーションに対応します。
■今後の予定
コンテナを自動的に搬出入し、統合された3Dコンテナ検査により、FrameSenseを利用して手動のワークステーションを自動化できます。熟練した作業員の不足という状況にあって、システムは自動車業界などのプロセスオートメーションにおいて大きく貢献します。業界に広まっている課題を解決します。Ensenso Cは、データ生成に欠かせないベースとなり、多数のアプリケーションの要件を満たします。製品管理のLukas Neumann氏は、この付加価値を特に重視しています。「プロジェクターの高出力と大型センサー解像度は、イントラロジスティクスの現場では特に有利です。ここでは、高精度の部品を、離れたところから大きな測定体積で把持しなければなりません」従来の物流におけるその他の積み重ね用途やビンピッキング用途では、プロジェクターが高出力でも解像度が低く、速度が速い同様のカメラが考えられます。「見る」ロボットと組み合わせることで、さらなる開発およびオートメーションソリューションは進化を続けます。
■クライアント
VMT Vision Machine Technic Bildverarbeitungssysteme GmbHは、個々のターンキー型の画像処理およびレーザーセンサーシステムを、あらゆるセクターの業界に供給しています。システムソリューションは、アプリケーション範囲全体をカバーする、自社開発の製品ラインをベースとしています。Pepperl＋FuchsGroupの高性能ネットワークのコンピテンスセンターとして、VMTは最先端のテクノロジーを提供し、投資を最大限に保証しています。
https://vmt-vision-technology.com/
