JP2020517966A - 対象物を光学的に検査する検査装置、検査装置を備えた製造システム、及び、検査装置を用いて対象物を光学的に検査する方法 - Google Patents

対象物を光学的に検査する検査装置、検査装置を備えた製造システム、及び、検査装置を用いて対象物を光学的に検査する方法 Download PDF

Info

Publication number
JP2020517966A
JP2020517966A JP2019558604A JP2019558604A JP2020517966A JP 2020517966 A JP2020517966 A JP 2020517966A JP 2019558604 A JP2019558604 A JP 2019558604A JP 2019558604 A JP2019558604 A JP 2019558604A JP 2020517966 A JP2020517966 A JP 2020517966A
Authority
JP
Japan
Prior art keywords
inspection
control
inspection device
camera
focal plane
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019558604A
Other languages
English (en)
Inventor
トーベ アレクサンダー
トーベ アレクサンダー
ガイラー トーマス
ガイラー トーマス
アッカーマン イェンス
アッカーマン イェンス
ナッテラー アンドレアス
ナッテラー アンドレアス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of JP2020517966A publication Critical patent/JP2020517966A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01Arrangements or apparatus for facilitating the optical investigation
    • G01N21/13Moving of cuvettes or solid samples to or from the investigating station
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/001Industrial image inspection using an image reference approach
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Pathology (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Studio Devices (AREA)

Abstract

製品の製造にはしばしば目視検査が行われる。ここでは、対象物Oを光学的に検査する検査装置(1)が提案される。この検査装置(1)は、カメラ装置を備え、カメラ装置(3)は、撮影領域(11)を含む焦点面(10)を有し、かつ、撮影領域(11)の画像を撮影するように構成されている。さらに検査装置(1)は、対象物Oを把持及び/又は受容するハンドリング装置(2)と、ハンドリング装置(2)を駆動制御する制御装置(13)と、を備え、制御装置(13)は、撮影領域(11)内で対象物Oを位置決めするためにハンドリング装置(2)を駆動制御するように構成されている。制御装置(13)は、対象物のモデル(15)を含み、制御装置(13)は、モデル(15)に基づき撮影領域(11)内で対象物Oを位置決めするためにハンドリング装置(2)を駆動制御することを特徴とする。

Description

本発明は、カメラ装置を備えた、対象物を光学的に検査する検査装置に関し、カメラ装置は、撮影領域を有する焦点面を有し、かつ、撮影領域の画像を撮影するように構成されている。
目視検査作業を自動化するためには、製造過程において、通常、特別な機械が使用される。その際には、すべての検査位置を含めて検査すべき製品域が、システムの開発段階でわかっていなければならない。この目的のために、すべての検査作業に対して、製品固有の固定カメラ位置が定められる。運転開始の期間中、結像距離及び/又は焦点距離は、画質が検査作業の要件に合うように手動で調整され、その後機械的に固定される。時には後からの修正が可能な場合もあるが、しかしながら、これには非常に手間がかかり、高いコストに結びつく。
おそらく本願に最も近い従来技術を形成する独国特許発明第4426968号明細書(DE4426968C2)においては、少なくとも1つの光源と、光導波路と、受光検査システムとを備えた光学的な検査装置が開示されており、ここでは、少なくとも1つの光源が、光を光導波路に入力している。この光学的な検査装置は、内側に4つの壁部で画定された開口部を有しており、その中で、検査すべき対象物が撮影されている。さらにこの光学的な検査装置は、その外縁部に複数の反射器と、それらに対して異なる傾斜のさらなる複数の反射器とを有している。ここでは、前者の複数の反射器は、対象物の側面が照明されるように入力された光の一部を偏向させ、後者のさらなる複数の反射器は、対象物の上面が照明されるように入力された光のさらなる一部を偏向させる。さらに壁部は、対象物の側面から反射された光を、対象物の上面に面する検査システムの方向に偏向させる。
独国特許発明第4426968号明細書
発明の開示
本発明の枠内においては、請求項1の特徴を有する、対象物を光学的に検査する検査装置が提案される。さらに、請求項13の特徴を有する製造システム及び請求項14の特徴を有する検査装置を用いて対象物を光学的に検査する方法が提案される。本発明の好適な及び/又は有利な実施形態は、従属請求項、以下の説明及び添付の図面から明らかになるであろう。
本発明によれば、対象物を光学的に検査する検査装置が提案される。この検査装置は、固定式又は移動式の検査装置である。特にこの検査装置は、製造システム内、手作業スペース内に統合されるように構成されており、又は、独立式のシステムとして構成されている。特に好適には検査装置は、ピックアンドプレース式の検査装置である。
光学的な検査は、特に対象物の目視検査、例えば、光の可視波長領域、赤外線波長領域又は紫外線波長領域に対応する。対象物は、例えば製造システムの部品、ワークピース及び/又は製品である。対象物は、全体として又は部分的に、光沢面、反射面、つや消し面又は吸収面を有する。対象物は、異なるサイズを有することができ、例えば10センチメートル未満又は100センチメートル超であってもよい。検査装置は、特に、対象物の異なるポートフォリオを光学的に検査するように、特に異なる対象物を光学的に検査するように構成されている。
検査装置は、カメラ装置を備えている。好適には、カメラ装置は、1つのカメラ又は複数のカメラを含み、例えば少なくとも2つのカメラ、特に少なくとも10個のカメラを含む。特に、カメラ装置は、透過光カメラを有する。カメラ装置及び/又はカメラは撮影方向を有する。カメラ装置は、カメラ装置によって包含される複数のカメラに対して少なくとも1つの焦点面を有する。カメラ装置は、複数の焦点面を有することができる。焦点面は、焦点領域として形成されてもよい。焦点面は、撮影領域を含み、ここでは、複数の焦点面が存在する場合、カメラ装置は、複数の撮影領域を含み得る。撮影方向は、特に撮影面に対して垂直である。撮影面は、特に、画像の中でカメラ装置によって完全に焦点が合って結像される領域である。
カメラ装置は、撮影領域の少なくとも1つの画像を撮影するように構成されている。カメラは特にビデオカメラであり、代替的にカメラは、シングルフレームカメラである。特に、カメラはCCDカメラ、例えばカラーカメラ又は白黒カメラである。代替的に、カメラはCMOSカメラである。カメラはまた、赤外線カメラ又は紫外線カメラであってもよい。
検査装置は、対象物を把持及び/又は受容するハンドリング装置を備えている。特に、ハンドリング装置は、対象物を移動させるために、例えば対象物を経路及び/又は軌道に沿って移動させるために構成されている。この場合、ハンドリング装置は、例えばロボット、特にロボットアームである。ハンドリング装置は、好適には、3軸、6軸又は多軸ロボットである。ハンドリング装置は、例えばグリッパを有し、この場合、グリッパは、対象物を把持及び保持するために構成されている。ハンドリング装置は、この場合対象物を、例えば空気圧で、機械的に又は電磁力を用いて保持することができる。ハンドリング装置は、対象物を、この場合特に力結合的、形状結合的又は摩擦結合的に保持及び/又は受容する。
検査装置は、ハンドリング装置を駆動制御する制御装置を備えている。この制御装置は、例えば、コンピュータユニットとして、プロセッサユニットとして、又は、マイクロチップとして構成されている。例えば制御装置は、ハンドリング装置を制御信号によって駆動制御し、この場合、制御装置は、データ技術的に及び/又は信号技術的にハンドリング装置に接続されている。特に好適には、制御装置は、ハンドリング装置の一部であり、及び/又は、ハンドリング装置に含まれる。
制御装置は、撮影領域内で対象物を位置決めするためにハンドリング装置を駆動制御するように構成されている。ここでは、制御装置は、例えば制御信号を用いてハンドリング装置を駆動制御し、この場合、ハンドリング装置は、制御信号に基づき対象物を撮影領域に移動させ、及び/又は、対象物を撮影領域内で位置決めする。特に、撮影領域内での対象物の位置決めは、撮影領域内での対象物の表面の位置決めである。
制御装置は、対象物のモデルを含む。特に、制御装置内の対象物のモデルは、例えばデータ技術的に保管可能である。対象物のモデルは、好適には3Dモデルであり、特に対象物のモデルは、CADモデルである。
制御装置は、対象物のモデルに基づき撮影領域内で対象物を位置決めするためにハンドリング装置を駆動制御するように構成されている。その際、制御装置は、モデルに基づき撮影領域への軌道に応じて対象物を移動させるためにハンドリング装置を駆動制御することができる。特に、制御装置は、ハンドリング装置が対象物を撮影領域に移動させなければならない軌道及び/又は経路を計算するために及び/又は決定するために、モデルを使用している。
本発明は、変幻自在に、異なる対象物に適合化可能な検査装置を提供するという考察に基づいている。この場合、検査すべき対象物の交換のために光学系及び/又はハンドリング装置が適合化されている必要はない。特に、本発明は、検査の対象物ポートフォリオが変化した場合に、ハードウェア変更の実施の必要性なしで対象物を検査する変幻自在の検査装置を可能にする。特に、この検査装置は、従来技術の欠点の好適な解決手段を提示するものである。
本発明の特に好適な実施形態においては、制御装置は、モデルに基づいて焦点面内で対象物を位置決めするためにハンドリング装置を駆動制御するように構成されている。特に、ハンドリング装置は、制御信号に基づいて対象物をカメラ装置の焦点面に位置決めする。特に、焦点面における対象物の位置決めは、焦点面における対象物の表面の位置決めである。特に、撮影領域とは、完全に焦点面の内部にある領域を意味するものと理解されたい。
本発明の1つの可能な実施形態は、モデルの一部区間、特にモデルの任意の一部区間が、選択領域として選択可能であることを想定している。この目的のために、検査装置は、例えば入力装置及び/又は入力手段を含み、この場合、ユーザは、入力装置を用いてモデルの一部区間を選択領域として選択することができる。特に、モデルの複数の一部区間が選択領域として選択可能である。好適には、モデルの一部区間は、例えば入力装置に含まれている表示装置上のモデル内で図式的に選択可能である。
制御装置は、選択領域に対応する対象物の一部区間を対象物選択領域として決定するように構成されている。この対象物選択領域は、特に、モデル上で選択領域として対応して選択されている、対象物上の領域に相当する。制御装置は、撮影領域内及び/又は焦点面内で対象物を対象物選択領域と共に位置決めするためにハンドリング装置を駆動制御するように構成されている。特に、制御装置は、対象物が対象物選択領域と共に撮影領域及び/又は焦点面に移動されるように及び/又はそこに位置決めされるように、ハンドリング装置を駆動制御するように構成されている。複数の選択領域の選択の際には、制御装置は、例えば、対応する対象物選択領域を、カメラ装置の撮影領域内及び/又は焦点面内で相前後して位置決めするように構成されている。この実施形態は、検査装置を用いて対象物の一時的でかつ特定の検査を可能にする検査装置を提供するという考察に基づいている。
本発明の可能な一実施形態においては、制御装置が装置データを含むことが想定されている。これらの装置データは、特に、ハンドリング装置の幾何学形状、構造、距離及び/又は可能な動き及び/又は軌道に対する情報を含む。例えば、これらの装置データは、ハンドリング装置が移動し得る、及び/又は、ハンドリング装置が対象物を移動させ得るすべての可能な経路を含む。
制御装置は、撮影領域内及び/又は焦点面内で対象物を衝突なしで位置決めするために装置データに基づきハンドリング装置を駆動制御するように構成されている。衝突なしとは、特に、対象物、カメラ装置及び/又はハンドリングユニットの間で衝突がないことを意味する。特に、制御装置は、装置データを使用するように構成され、対象物が衝突なし及び/又はクラッシュなしで撮影領域内及び/又は焦点面内で位置決めされ得る経路及び/又は軌道を、及び/又は、撮影領域及び/又は焦点面に移動され得る経路及び/又は軌道を決定するように構成されている。この実施形態は、検査期間中の対象物の安全な操作を可能にする検査装置を提供するという考察に基づいている。
特に好適には、検査装置は照明装置を含む。この照明装置は、特に複数の光源を有する。特にこの照明装置は、10を超える、特に15を超える、特に100を超える光源を有する。これらの光源は、例えばLEDである。特にこれらの光源は、白色光源、赤外光源、有色光源、及び、特にRGB光源である。これらの光源は、特に点状光源であり、代替的及び/又は補足的にこれらの光源は、例えばOLED面などの平坦な光源である。
制御装置は、撮影領域及び/又は焦点面の高コントラスト画像を撮影することができるようにするために、特に撮影領域内及び/又は焦点面内で位置決めされた対象物の高コントラスト画像をカメラ装置によって撮影することができるようにするために、照明ユニットを駆動制御するように構成されている。この場合、制御装置は、例えば、照明ユニットの光源が個別に及び/又はグループで駆動制御されるように、例えば1つのLED及び/又はLEDのグループがオン/オフされるように構成されており、それによって、撮影領域及び/又は焦点面の所望の照明が達成される。この実施形態は、対象物の高品質でかつ評価可能な画像を撮影する検査装置を提供するという考察に基づいている。特にこの実施形態は、複数の画像の継続的な品質を可能にする。
可能な一実施形態は、制御装置が少なくとも1つの選択可能な検査プログラムを含むことを想定する。この検査プログラムは、例えば、どのタイプの画像を、例えば赤外線画像、可視画像又は白黒画像を撮影すべきかについての情報を含む。特に検査プログラムは、検査されるべき対象物の選択領域を含む。特に検査プログラムは、照明ユニットによる照明についての情報も含む。
制御装置は、特に、撮影領域内及び/又は焦点面内での対象物の位置決めのために選択された検査プログラムに基づきハンドリング装置を駆動制御するように構成されている。特に、制御装置は、検査プログラムに基づき対象物の対象物選択領域を、検査プログラムに記憶されている選択領域の当該選択領域に対応している画像として撮影するように構成されている。特にこの検査プログラムは、入力装置を用いて選択可能、適合化可能、及び/又は、設定可能である。この実施形態は、ユーザが特に簡単に、実行すべき検査に設定可能である検査装置を提供するという考察に基づいている。
特に好適には、制御装置は、撮影領域内及び/又は焦点面内で位置決めされた対象物の画像を検査プログラムに応じて撮影するために照明ユニットを駆動制御するように構成されている。特に制御装置は、画像撮影が検査プログラムに応じて撮影することができるように対象物を照明ユニットの駆動制御によって照明するように構成されている。
一実施形態は、検査装置が静止検出装置を含むことを想定している。好適には、この静止検出装置は、グリッパ及び/又はハンドリング装置に配置されている。静止検出装置は、特に振動検出器及び/又は加速度センサである。静止検出装置は、ハンドリング装置及び/又はグリッパが静止しているときを及び/又はハンドリング装置及び/又はグリッパが振動していないときを検出するように構成されている。カメラ装置は、静止検出装置がハンドリング装置の静止状態及び/又は振動していない状態を検出した場合にはじめて画像を撮影するように構成されている。この実施形態は、対象物の評価不能な画像及び/又はぼやけた画像の撮影を除外する検査装置を提供するという考察に基づいている。
本発明の特に好適な実施形態においては、カメラ装置は、固定焦点距離及び/又は固定結像距離を有するカメラ装置である。特に、このカメラ装置は、固定焦点距離及び/又は固定結像距離を有するカメラを含む。従って、カメラ装置の焦点距離及び/又は結像距離は、特に設定可能なものではない。特に、カメラ装置は、焦点合わせの不要なカメラ装置である。この実施形態は、カメラ装置のために高価な集束レンズを使用する必要性のない特に好適な検査装置を提供するという考察に基づいている。
本発明の特に好適な実施形態は、検査装置が開始位置決定モジュールを含むことを想定している。開始位置の決定のための最適化パラメータとして、特に画像の鮮鋭度が用いられる。例えば、開始位置決定モジュールは、制御装置の一部であることも可能である。この開始位置決定モジュールは、ハンドリング装置によって把持及び/又は保持された対象物の開始位置を決定するように構成されている。特に、開始位置決定モジュールは、固定焦点距離及び固定結像距離のための開始位置を決定するように構成されている。特に、開始位置は、特に初期時点における、保持装置によって把持された対象物の位置及び/又は姿勢を含む。この実施形態は、対象物の開始位置の参照を可能にする、従って、特に、撮影領域内で対象物を位置決めするために、経路及び/又は軌道が正確に決定可能及び/又は実行可能である検査装置を提供するという考察に基づいている。
ここでは、制御装置が、対象物が、開始位置から撮影領域に移動されるように及び/又は撮影領域内で位置決めされるように、ハンドリング装置を駆動制御するように構成されていることが想定されてもよい。特に、制御装置は、対象物が開始位置から撮影領域にクラッシュ及び/又は衝突なしで移動されるようにハンドリング装置を駆動制御するように構成されている。好適には、制御装置は、経路を短いクロックタイムに関して最適化するように構成されている。
特に好適には、開始位置決定モジュールは、少なくとも1つの推定画像、特に少なくとも2つの推定画像、特に少なくとも3つの推定画像の撮影のためにカメラ装置を駆動制御するように構成されている。好適には、10未満の推定画像、特に5未満の推定画像が撮影される。特に、3つの推定画像の撮影が好適である。推定画像は、好適には、カメラ装置によって撮影された対象物のライブ画像である。特にこれらの推定画像は、対象物の画像一部区間の画像であり、この場合、これらの画像一部区間はそれほど離間されていない。好適には、対象物の異なる画像一部区間が、ハンドリング装置の動きなしで及び/又はハンドリング装置のわずかな動きと共にカメラ装置により推定画像として撮影可能である。例えばこれらの画像一部区間は、少なくとも対状の重畳部分を有する。
開始位置決定モジュールは、モデルと、少なくとも1つの推定画像、例えばCADモデルとを比較するように構成されている。特に、開始位置決定モジュールは、モデルと、対象物の複数の推定画像とを比較するように構成されている。さらに、開始位置決定モジュールは、モデルと少なくとも1つの推定画像との比較によって、対象物の開始位置を決定するように、特に開始位置における対象物の姿勢、位置及び/又は配置構成を決定するように構成されている。開始位置決定モジュールによる開始位置の決定は、特に検査装置の初期化を意味するものと理解されたい。この実施形態は、測定すべき対象物の位置の開始点を特に簡単に決定する検査装置を提供するという考察に基づいている。さらに、ここでの本発明の考察は、開始位置を、対象物の完全な走査なしで決定するということにあり、そのため、ここでは、特に開始位置を決定するための時間が短縮可能である。なぜなら、対象物の動き出しの際の機構の安定化時間を待機する必要がないからである。
本発明のさらなる態様は、検査装置を備えた製造システムによって形成される。製造システムは、特に、人が対象物を製造するためのワークステーション、ロボットワークステーション、マシンワークステーション又は手動ワークステーションである。好適には、検査装置は、製造システムによって製造された対象物を自動的に及び/又は独立して把持するように、及び/又は、当該対象物を撮影するように構成されている。特に、検査装置は、製造された部品の少なくとも90パーセントを光学的に検査するように構成されている。特に、検査装置は、製造システムの製造された対象物のすべてを、即ち、特に100パーセントを光学的に検査するように構成されている。この実施形態は、製造システム、特に交換される製品ポートフォリオと、製造された対象物の特に簡単で好適な光学的検査を可能にする検査装置とを備えた製造システムを提供するという考察に基づいている。
本発明のさらなる態様は、検査装置を用いて対象物を光学的に検査する方法によって形成される。この方法は、特に制御装置により、ハンドリング装置が駆動制御されることを特徴とする。特にこの制御装置によれば、対象物がモデルに基づきカメラ装置の撮影領域内で位置決めされるようにハンドリング装置が駆動制御される。特に対象物は、ハンドリング装置によって撮影領域内及び/又は焦点面内で位置決めされる。本発明のこの態様は、対象物を光学的に検査する簡単で安価な方法を提供するという考察に基づいている。
本方法の特に好ましい実施形態は、ハンドリング装置が対象物を受容することを想定している。例えば、ハンドリング装置は、製造システムから直接対象物を受容する。ここでは、ハンドリング装置は、例えばピックアンドプレース式装置である。カメラ装置は、この実施形態においては、対象物の少なくとも1つの推定画像を撮影し、この場合、この推定画像の開始位置決定モジュールは、対象物のモデルと比較され、この比較に基づいて対象物の開始位置が決定される。
本発明のさらなる特徴、利点及び効果は、本発明の好適な実施例の以下の説明から明らかになるであろう。
検査装置の一実施形態を示す。
図1は、検査装置1の実施例を示す。この検査装置1は、ハンドリング装置2とカメラ装置3とを含む。ハンドリング装置2は、対象物Oの操作及び把持のために構成されている。
ハンドリング装置2は、ベース4と、その上に取り付けられている及び/又はその上に配置されている多軸ロボット5とを含む。特にベース4は、多軸ロボット5の無振動の取り付け及び/又は安定した取り付けのためのものである。多軸ロボット5は、自身の自由端部にグリッパ6を含む。このグリッパ6は、対象物Oの把持と保持のために、特に力結合的、形状結合的、及び/又は、摩擦結合的保持のために構成されている。グリッパ6は、ハンドリング装置2の作業領域内で移動可能であり、この場合、グリッパ6は、作業領域の内部に固定可能な経路上を移動可能である。
対象物Oは、特に部品である。好適にはこの部品は、電子部品、自動車供給部品又は製造品である。対象物Oは、好適には10センチメートル未満、特に5センチメートル未満である。代替的に対象物Oは、より大形の対象物、例えばフェンダであってもよい。この場合、そのような対象物は、好適には1/2メートルよりも長い長さ、特に1ミリメートルよりも長い長さを有する。対象物Oは、平坦な対象物であってもよく、代替的に対象物Oは、嵩張った対象物であってもよい。
グリッパによって把持された対象物Oは、特に、ハンドリング装置2の作業領域内で移動可能であり、ここでは、対象物Oは、ハンドリング装置2のグリッパ6と同じ経路を描く。
配向に対して、座標系Kが支援的に示されており、この場合、座標系Kは、X方向、Y方向、Z方向を規定する。ハンドリング装置2の作業領域内でグリッパ6及び/又は対象物Oが通過する経路は、特にX方向、Y方向及びZ方向によって説明可能である。
検査装置1は、カメラ装置3を備え、カメラ装置3は、ハウジング7と、カメラ8と、照明ユニット9とを有する。カメラ8は、例えばCCDカメラである。代替的にカメラ8は、CMOSカメラである。
ハウジング7は、ドーム形状の中空体として形成されており、この実施例においては、半球状の中空体として形成されている。半球状の中空体は、特に赤道面で切断されている。このハウジング7は、開口部を有しており、この場合、この開口部にはカメラ8及び/又はカメラ装置3の焦点面10が配置されている。ハウジング7は内側領域を有し、この場合、この内側領域は好適には反射性であり、代替的にこの内側領域は吸収性である。
ハウジング7の内部領域には照明ユニット9が配置されており、この場合、この照明ユニット9は、複数の光源、特にLEDを含む。これらのLEDは、特に、等距離で及び/又は均等にハウジング7の内側に取り付けられている。焦点面10の向かい側にはさらなる開口部が存在し、この場合、この開口部は、半球状ハウジング7の極に配置されている。この開口部内においては、極にカメラ8が視線方向で焦点面10の方向に配置されている。
焦点面10は撮影領域11を有する。この撮影領域11は、特にカメラ8によって特に高コントラストで完全に結像される領域である。撮影領域11は、特に1平方センチメートルよりも大きい、特に10平方センチメートルよりも大きい面積を有する領域である。撮影領域11は、平坦な領域、特に平面領域である。代替的に、撮影領域11は、湾曲した領域であり、この場合は焦点面10も湾曲した平面である。
ハンドリング装置2は、データリンク12を介して制御装置13に接続されている。このデータリンク12は、有線接続であってもよい。代替的に、このリンク12は、例えば赤外線接続の形態の無線接続のような仮想リンクである。
制御装置13は、例えばコンピュータユニットとして構成されている。制御ユニット13は、好適には表示ユニット14を含む。この表示ユニット14は、特にタッチスクリーンモニタである。制御装置13は、対象物Oのモデル15を含む。このモデル15は、特に3Dモデル、例えばCADモデルである。モデル15は、特に実物大のモデルである。好適にはモデル15は、カメラ装置3の位置、姿勢、及び/又は、幾何学的情報を含む。特に好適にはモデル15は、焦点面10の位置、特に撮影領域11の位置を含む。
制御装置13は入力手段16を有し、この場合、入力手段16は、例えばコンピュータマウスである。代替的に入力手段16は、タッチスクリーンモニタとして構成されてもよい。入力手段16を用いて、ユーザは、対象物Oのモデル15内で選択領域17を選択することができる。特に選択領域17は、モデル15内で自由に選択可能である。選択領域17は、特に直線的に及び/又は曲線的に画定されてもよい平坦な領域である。さらにモデル15の選択領域17は、現実の世界における対象物O上の対象物選択領域18に対応している。ここでの対象物選択領域18は、モデル15上で選択領域17として選択された、現実の対象物上の領域である。制御装置13は、対象物Oを対象物選択領域18と共に移動させなければならない軌道19を決定するように構成されており、それによって、対象物選択領域18は、カメラ装置3の撮影領域11内及び/又は焦点面内に存在する。この軌道19は、特に座標系Kを用いてパラメータ化され及び/又は計算され得る。
ハンドリング装置2は、この場合、制御装置13により、対象物Oが対象物選択領域18と共に軌道19に沿って移動し、対象物選択領域18の移動後に撮影領域11内に存在するように駆動制御される。対象物Oが対象物選択領域18と共に撮影領域11及び/又は焦点面に移動されることによって、特に安価な検査装置1が達成され得る。なぜなら、ここでは、一定の焦点距離を有しかつ高価な集束装置を持たないカメラ8を使用することができるからである。

Claims (15)

  1. 対象物(O)を光学的に検査する検査装置(1)であって、
    前記検査装置(1)は、カメラ装置を備え、前記カメラ装置(3)は、撮影領域(11)を含む焦点面(10)を有し、かつ、前記撮影領域(11)の画像を撮影するように構成されている、検査装置(1)において、
    前記対象物(O)を把持及び/又は受容するハンドリング装置(2)と、
    前記ハンドリング装置(2)を駆動制御する制御装置(13)と、
    を備え、
    前記制御装置(13)は、前記撮影領域(11)内で前記対象物(O)を位置決めするために前記ハンドリング装置(2)を駆動制御するように構成されており、
    前記制御装置(13)は、前記対象物のモデル(15)を含み、
    前記制御装置(13)は、前記モデル(15)に基づき前記撮影領域(11)内で前記対象物を(O)を位置決めするために前記ハンドリング装置(2)を駆動制御するように構成されていることを特徴とする検査装置(1)。
  2. 前記制御装置(13)は、前記モデル(15)に基づき前記焦点面(10)内で前記対象物(O)を位置決めするために前記ハンドリング装置(2)を駆動制御するように構成されている、請求項1に記載の検査装置(1)。
  3. 前記モデル(15)の一部区間は、選択領域(17)として選択可能であり、前記制御装置(13)は、前記選択領域(17)に対応する前記対象物(O)の一部区間を、対象物選択領域(18)として決定するように構成され、かつ、前記撮影領域(11)内及び/又は前記焦点面(10)内で前記対象物(O)を前記対象物選択領域(18)と共に位置決めするために前記ハンドリング装置(2)を駆動制御するように構成されている、請求項1又は2に記載の検査装置(1)。
  4. 前記制御装置(13)は、前記撮影領域(11)内及び/又は前記焦点面(10)内で前記対象物(O)を衝突なしで位置決めするために装置データに基づき前記ハンドリング装置(2)を駆動制御するように構成されている、請求項1乃至3のいずれか一項に記載の検査装置(1)。
  5. 前記検査装置(1)は、照明装置(9)を備え、前記制御装置(13)は、前記撮影領域(11)内及び/又は前記焦点面(10)内で位置決めされた前記対象物(O)の高コントラスト画像を前記カメラ装置によって撮影するために前記照明装置(9)を駆動制御するように構成されている、請求項1乃至4のいずれか一項に記載の検査装置(1)。
  6. 前記制御装置(13)は、少なくとも1つの選択可能な検査プログラムを含み、前記制御装置(13)は、前記撮影領域(11)内及び/又は前記焦点面(10)内での前記対象物(O)の位置決めのために選択された前記検査プログラムに基づき前記ハンドリング装置(2)を駆動制御するように構成されている、請求項1乃至5のいずれか一項に記載の検査装置(1)。
  7. 前記制御装置(13)は、前記撮影領域(11)内及び/又は前記焦点面内で位置決めされた前記対象物(O)の画像を前記検査プログラムに応じて撮影するために前記照明装置(9)を駆動制御するように構成されている、請求項5に記載の検査装置(1)。
  8. 前記検査装置(1)は、静止検出装置を備え、前記静止検出装置は、前記ハンドリング装置(2)が静止しているときを及び/又は振動していないときを検出するように構成されており、前記カメラ装置は、前記ハンドリング装置(2)が静止している場合に及び/又は振動していない場合にはじめて画像を撮影するように構成されている、請求項1乃至7のいずれか一項に記載の検査装置(1)。
  9. 前記カメラ装置は、固定焦点距離及び/又は固定結像距離を有するカメラ装置である、請求項1乃至8のいずれか一項に記載の検査装置(1)。
  10. 前記検査装置(1)は、開始位置決定モジュールを備え、前記開始位置決定モジュールは、前記ハンドリング装置(2)によって把持及び/又は保持された前記対象物(O)の開始位置を決定するように構成されている、請求項1乃至9のいずれか一項に記載の検査装置(1)。
  11. 前記制御装置(13)は、前記対象物(O)が、前記開始位置から前記撮影領域(11)及び/又は前記焦点面(10)に移動されるように、及び/又は、前記撮影領域(11)及び/又は前記焦点面(10)内で位置決めされるように、前記ハンドリング装置(2)を駆動制御するように構成されている、請求項10に記載の検査装置(1)。
  12. 前記開始位置決定モジュールは、少なくとも1つの推定画像の撮影のために前記カメラ装置を駆動制御し、かつ、前記モデル(15)を前記少なくとも1つの推定画像と比較し、かつ、当該比較によって前記対象物(O)の前記開始位置を決定するように構成されている、請求項10又は11に記載の検査装置(1)。
  13. 請求項1乃至12のいずれか一項に記載の検査装置(1)を備えた、対象物(O)を製造する製造システムであって、
    前記検査装置(1)は、製造された前記対象物(O)の少なくとも90パーセントを光学的に検査するように構成されている、製造システム。
  14. 検査装置(1)を用いて対象物を光学的に検査する方法において、
    制御装置(13)により、前記対象物がモデル(15)に基づきカメラ装置の撮影領域(11)内及び/又は焦点面(10)内で位置決めされるようにハンドリング装置(2)が駆動制御されることを特徴とする、光学的に検査する方法。
  15. 前記ハンドリング装置(2)は、前記対象物を保持及び/又は把持し、前記カメラ装置は、前記対象物の少なくとも1つの推定画像を撮影し、開始位置決定モジュールは、前記推定画像を前記モデル(15)と比較し、当該比較に基づき開始位置を決定する、請求項14に記載の光学的に検査する方法。
JP2019558604A 2017-04-27 2018-02-28 対象物を光学的に検査する検査装置、検査装置を備えた製造システム、及び、検査装置を用いて対象物を光学的に検査する方法 Pending JP2020517966A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102017207069.2A DE102017207069A1 (de) 2017-04-27 2017-04-27 Prüfvorrichtung zur optischen Prüfung eines Objektes, Produktionsanlage mit der Prüfvorrichtung und Verfahren zur optischen Prüfung des Objektes mit der Prüfvorrichtung
DE102017207069.2 2017-04-27
PCT/EP2018/054863 WO2018197078A1 (de) 2017-04-27 2018-02-28 Prüfvorrichtung zur optischen prüfung eines objektes, produktionsanlage mit der prüfvorrichtung und verfahren zur optischen prüfung des objektes mit der prüfvorrichtung

Publications (1)

Publication Number Publication Date
JP2020517966A true JP2020517966A (ja) 2020-06-18

Family

ID=61581265

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019558604A Pending JP2020517966A (ja) 2017-04-27 2018-02-28 対象物を光学的に検査する検査装置、検査装置を備えた製造システム、及び、検査装置を用いて対象物を光学的に検査する方法

Country Status (5)

Country Link
US (1) US11090812B2 (ja)
EP (1) EP3615907A1 (ja)
JP (1) JP2020517966A (ja)
DE (1) DE102017207069A1 (ja)
WO (1) WO2018197078A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110057827B (zh) * 2019-04-24 2024-03-08 杭州富生电器有限公司 一种电机定子的视频检测装置
CN114295624A (zh) * 2021-12-29 2022-04-08 星禧威视智能科技研究院(重庆)有限公司 电极头先端检测系统及方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08327554A (ja) * 1995-03-31 1996-12-13 Lintec Corp 照明装置
JP2002207013A (ja) * 2001-01-05 2002-07-26 Naberu:Kk 卵殻の表面状態検出方法及びこの方法を用いる卵殻の表面状態検出装置
JP2010125582A (ja) * 2008-12-01 2010-06-10 Seiko Epson Corp ロボットアーム装置、ロボットアーム装置の制御方法および制御プログラム
JP2015136778A (ja) * 2014-01-24 2015-07-30 キヤノン株式会社 ロボット制御方法、ロボット装置、プログラム及び記録媒体
JP2017015483A (ja) * 2015-06-30 2017-01-19 セイコーエプソン株式会社 電子部品搬送装置および電子部品検査装置
JP2017015396A (ja) * 2015-06-26 2017-01-19 キヤノン株式会社 検査方法、検査装置、処理装置、プログラム及び記録媒体
EP3156761A1 (en) * 2015-10-14 2017-04-19 H4 Technologies Limited Image acquisition and processing

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4426968C2 (de) 1994-07-29 1998-07-09 Bosch Gmbh Robert Optische Untersuchungsvorrichtung
WO2002071023A1 (fr) * 2001-03-06 2002-09-12 Toray Industries, Inc. Procede et dispositif de controle, et procede de fabrication d'un panneau d'affichage
JP2003136465A (ja) 2001-11-06 2003-05-14 Yaskawa Electric Corp 検出対象物の3次元位置・姿勢決定方法とロボット用視覚センサ
US7371590B2 (en) * 2005-11-21 2008-05-13 General Electric Company Integrated inspection system and defect correction method
US8433128B2 (en) * 2008-11-04 2013-04-30 Omron Corporation Method of creating three-dimensional model and object recognizing device
JP5471355B2 (ja) * 2009-11-24 2014-04-16 オムロン株式会社 3次元視覚センサ
US9089966B2 (en) * 2010-11-17 2015-07-28 Mitsubishi Electric Corporation Workpiece pick-up apparatus
SE1150505A1 (sv) * 2011-05-31 2012-12-01 Mobile Imaging In Sweden Ab Metod och anordning för tagning av bilder
JP6004809B2 (ja) 2012-03-13 2016-10-12 キヤノン株式会社 位置姿勢推定装置、情報処理装置、情報処理方法
JP5949242B2 (ja) * 2012-07-11 2016-07-06 セイコーエプソン株式会社 ロボットシステム、ロボット、ロボット制御装置、ロボット制御方法、およびロボット制御プログラム
DE102012014451A1 (de) 2012-07-21 2013-03-14 Daimler Ag Verfahren zum Steuern eines Roboters
US9565400B1 (en) * 2013-12-20 2017-02-07 Amazon Technologies, Inc. Automatic imaging device selection for video analytics
JP6642968B2 (ja) * 2014-03-20 2020-02-12 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
JP6327931B2 (ja) * 2014-05-02 2018-05-23 キヤノン株式会社 画像処理装置、情報処理方法及びプログラム
JP6594129B2 (ja) * 2014-11-28 2019-10-23 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
US10113993B2 (en) * 2015-04-07 2018-10-30 Edison Welding Institute, Inc. Phased array system for inspection of laser welds
CN108137260B (zh) * 2015-10-05 2021-02-12 南洋理工大学 机器人包胶带系统和包胶带的方法
JP6823502B2 (ja) * 2017-03-03 2021-02-03 株式会社キーエンス ロボット設定装置、ロボット設定方法、ロボット設定プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器
JP6889574B2 (ja) * 2017-03-03 2021-06-18 株式会社キーエンス ロボット設定装置、ロボット設定方法、ロボット設定プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器
JP6392922B1 (ja) * 2017-03-21 2018-09-19 ファナック株式会社 検査システムの検査対象外となる領域を算出する装置、および検査対象外となる領域を算出する方法
JP6549644B2 (ja) * 2017-06-27 2019-07-24 ファナック株式会社 機械学習装置、ロボット制御システム及び機械学習方法
JP6970551B2 (ja) * 2017-07-31 2021-11-24 株式会社キーエンス 形状測定装置及び形状測定方法
US10269108B2 (en) * 2017-09-01 2019-04-23 Midea Group Co., Ltd. Methods and systems for improved quality inspection of products using a robot
JP6695843B2 (ja) * 2017-09-25 2020-05-20 ファナック株式会社 装置、及びロボットシステム
JP7000213B2 (ja) * 2018-03-19 2022-01-19 株式会社東芝 保持装置、搬送システム、コントローラ、および保持方法
JP7134016B2 (ja) * 2018-08-10 2022-09-09 キヤノン株式会社 情報処理装置、情報処理方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08327554A (ja) * 1995-03-31 1996-12-13 Lintec Corp 照明装置
JP2002207013A (ja) * 2001-01-05 2002-07-26 Naberu:Kk 卵殻の表面状態検出方法及びこの方法を用いる卵殻の表面状態検出装置
JP2010125582A (ja) * 2008-12-01 2010-06-10 Seiko Epson Corp ロボットアーム装置、ロボットアーム装置の制御方法および制御プログラム
JP2015136778A (ja) * 2014-01-24 2015-07-30 キヤノン株式会社 ロボット制御方法、ロボット装置、プログラム及び記録媒体
JP2017015396A (ja) * 2015-06-26 2017-01-19 キヤノン株式会社 検査方法、検査装置、処理装置、プログラム及び記録媒体
JP2017015483A (ja) * 2015-06-30 2017-01-19 セイコーエプソン株式会社 電子部品搬送装置および電子部品検査装置
EP3156761A1 (en) * 2015-10-14 2017-04-19 H4 Technologies Limited Image acquisition and processing

Also Published As

Publication number Publication date
US20200070350A1 (en) 2020-03-05
DE102017207069A1 (de) 2018-10-31
WO2018197078A1 (de) 2018-11-01
US11090812B2 (en) 2021-08-17
EP3615907A1 (de) 2020-03-04

Similar Documents

Publication Publication Date Title
JP6734253B2 (ja) ワークを撮像する視覚センサを備える撮像装置
JP6188440B2 (ja) ロボット装置及びロボット制御方法
US10754307B2 (en) Teaching device and control information generation method
EP1475627A2 (en) Machine vision inspection system and method
CN110404816B (zh) 一种基于机械臂的3d曲面玻璃缺陷检测装置及方法
CN109459984B (zh) 一种基于三维点云的定位抓取系统及其使用方法
JP2024009106A (ja) ツールの作業位置のずれ量を取得する装置、及び方法
CN110712194A (zh) 物体检查装置、物体检查系统以及调整检查位置的方法
CN110978056B (zh) 机器人运动的平面校准系统及方法
JP2020517966A (ja) 対象物を光学的に検査する検査装置、検査装置を備えた製造システム、及び、検査装置を用いて対象物を光学的に検査する方法
JP5561109B2 (ja) 3次元寸法を計測する装置及びその方法
JP6444455B2 (ja) 微細対象物観察装置
US11040452B2 (en) Depth sensing robotic hand-eye camera using structured light
JP6714393B2 (ja) 計測装置、システム、計測方法、および物品の製造方法
JP2006297559A (ja) キャリブレーションシステムおよびロボットのキャリブレーション方法
JP6356845B1 (ja) 検査システムの動作プログラムを生成する装置および方法
JPH0545117A (ja) 光学式3次元位置計測方法
WO2016151667A1 (ja) ティーチング装置及び制御情報の生成方法
JPH1133962A (ja) ロボットの三次元位置センサのキャリブレーション 方法とその装置
CN211047019U (zh) 一种多角度图像采集系统
JP6343930B2 (ja) ロボットシステム、ロボット制御装置、及びロボット制御方法
JP2003004666A (ja) X線透視撮影装置
CN207487602U (zh) 一种微位移测量装置
JP4901451B2 (ja) 部品実装装置
JP2010264560A (ja) ロボットの干渉防止方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191025

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210906

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20211206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220301

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220420

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220816