JP4724056B2 - Inspection device - Google Patents

Inspection device Download PDF

Info

Publication number
JP4724056B2
JP4724056B2 JP2006167732A JP2006167732A JP4724056B2 JP 4724056 B2 JP4724056 B2 JP 4724056B2 JP 2006167732 A JP2006167732 A JP 2006167732A JP 2006167732 A JP2006167732 A JP 2006167732A JP 4724056 B2 JP4724056 B2 JP 4724056B2
Authority
JP
Japan
Prior art keywords
image
inspection
inspection object
imaging
movement amount
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2006167732A
Other languages
Japanese (ja)
Other versions
JP2007333639A (en
Inventor
徹郎 相川
隆 仏円
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2006167732A priority Critical patent/JP4724056B2/en
Publication of JP2007333639A publication Critical patent/JP2007333639A/en
Application granted granted Critical
Publication of JP4724056B2 publication Critical patent/JP4724056B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Testing And Monitoring For Control Systems (AREA)
  • Image Processing (AREA)

Description

本発明は、遠隔操作のカメラにより検査対象を撮影し、その撮影画像を検査対象から離れた場所に設置したモニタに出力し、この映像を基に検査員が目視等で確認する検査装置に関する。   The present invention relates to an inspection apparatus in which an inspection object is photographed by a remotely operated camera, the photographed image is output to a monitor installed at a location away from the inspection object, and an inspector visually confirms this image.

一般に、発電プラントやプロセスプラント等の工業プラントなどでは、プラント機器の安全性を維持するために定期的な検査が実施されている。このプラントなどの検査方法としては、遠隔から操作したカメラにより検査対象を撮影し、その撮影画像を、検査対象から離れた場所に設置したモニタにカメラの映像を出力し、この映像を検査員が目視で確認するといった方法が多く用いられる(例えば、特許文献1参照)。これは、例えば原子力発電所の放射線管理区域のような危険性の高い区域で各種検査や作業する人(作業者や検査員)の数を安全性向上のために可及的に抑制し、作業時間の短縮を目的としたものである。
特開2003−202921号公報
In general, in an industrial plant such as a power plant or a process plant, periodic inspections are performed to maintain the safety of plant equipment. As an inspection method for this plant, the inspection object is photographed by a remotely operated camera, and the photographed image is output to a monitor installed at a location away from the inspection object. Many methods such as visual confirmation are used (see, for example, Patent Document 1). This is to reduce the number of people (operators and inspectors) who perform various inspections and work in high-risk areas such as radiation control areas of nuclear power plants as much as possible to improve safety. The purpose is to shorten time.
JP 2003-202921 A

このような従来の検査方法では、カメラの映像を基に検査員が目視により検査対象の欠陥を探すため、カメラの画素分解能が検出すべき欠陥に対して不十分である場合、欠陥が発見しにくくなり、見落としが発生してしまう。このような欠陥の見落としを回避するためには、カメラの撮影範囲を狭くして検査を行なうのが一般的であるが、これでは広域な検査範囲を全て撮影範囲の狭いカメラで撮影するには時間がかかり過ぎる。その結果、検査時間が長時間化するといった問題がでてくる。   In such a conventional inspection method, an inspector visually looks for a defect to be inspected based on the image of the camera. If the pixel resolution of the camera is insufficient for the defect to be detected, the defect is found. It becomes difficult and oversight occurs. In order to avoid oversight of such defects, it is common to perform inspections with a narrow camera shooting range, but this requires shooting a wide inspection range with a camera with a narrow shooting range. It takes too long. As a result, there arises a problem that the inspection time becomes longer.

また、カメラの撮影範囲を狭くすることなくカメラの画素分解能を確保する方法としては、高分解能なカメラを利用する方法もある。しかし、高分解能なカメラは、サンプリング速度が遅く遠隔でカメラを操作するには操作性が悪くなるという課題がある。また、時間あたりに検査できる検査範囲が狭くなり前述した方法と同様に検査時間が長時間化するといった課題もある。また、高分解能なカメラ自体が高価なために検査コストが高くなってしまうという課題がある。   In addition, as a method of ensuring the pixel resolution of the camera without narrowing the shooting range of the camera, there is a method of using a high-resolution camera. However, a high-resolution camera has a problem that the sampling speed is slow and the operability is poor when the camera is operated remotely. In addition, there is a problem that the inspection range that can be inspected per time becomes narrow and the inspection time becomes longer as in the above-described method. Moreover, since the high-resolution camera itself is expensive, there is a problem that the inspection cost becomes high.

本発明は、このような課題を解決するためになされたものであり、その目的は、カメラもしくは検査対象物を移動(走査)させ、移動させながら得られた時系列の映像から、使用したカメラの画素分解能よりも高い画素分解能の画像を作成し、使用したカメラとほぼ同様のサンプリング速度により画像を出力し表示することができる検査装置を提供することにある。   The present invention has been made to solve such a problem, and its purpose is to move (scan) the camera or the inspection object, and to use the camera from the time-series images obtained while moving the camera or the inspection object. It is an object of the present invention to provide an inspection apparatus capable of generating an image with a pixel resolution higher than the pixel resolution and outputting and displaying an image at a sampling rate almost the same as that of the camera used.

本発明は、検査対象を広域的に撮影する広域カメラ、この広域カメラの撮影範囲内で前記検査対象を局所的に撮影する局所カメラ、前記検査対象からの光を前記広域カメラおよび前記局所カメラに導光する光学系を備えた撮影装置と、前記検査対象に前記撮影装置を走査させる撮影駆動装置と、この撮影駆動装置の走査による移動量を計測する移動量計測装置と、前記撮影装置から出力される画像を蓄積する画像蓄積装置と、この画像蓄積装置が蓄積している画像と前記移動量計測装置で計測した前記撮影駆動装置の移動量とに基づいて、前記広域カメラの画素分解能よりも高い画素分解能の高精細画像を作成する高精細画像作成装置と、高精細画像作成装置により作成した高精細画像と前記局所カメラから出力された画像とを比較して高精細画像の復元度を求め、この復元度に基づいて前記高精細画像作成装置を制御することにより、この高精細画像作成装置により作成される高精細画像を制御する画像比較装置と、この高精細画像作成装置により作成した高精細画像を表示する表示装置と、を備えたことを特徴とする検査装置である。   The present invention relates to a wide-area camera that images an inspection object in a wide area, a local camera that locally images the inspection object within an imaging range of the wide-area camera, and light from the inspection object to the wide-area camera and the local camera. An imaging device including an optical system that guides light, an imaging drive device that scans the imaging device on the inspection target, a movement amount measurement device that measures a movement amount by scanning of the imaging drive device, and an output from the imaging device Based on the image storage device for storing the image to be processed, the image stored in the image storage device and the movement amount of the photographing drive device measured by the movement amount measurement device, than the pixel resolution of the wide-area camera. A high-definition image creation device that creates a high-definition image with high pixel resolution and a high-definition image created by the high-definition image creation device are compared with the image output from the local camera. An image comparison device that controls a high-definition image created by the high-definition image creation device by obtaining a restoration degree of the image and controlling the high-definition image creation device based on the restoration degree, and the high-definition image An inspection apparatus comprising: a display device that displays a high-definition image created by the creation device.

本発明によれば、検査対象の検査を迅速かつ高精度で行なうことができる。   According to the present invention, an inspection target can be inspected quickly and with high accuracy.

以下、本発明に係わる実施形態について、添付図面を参照して説明する。なお、添付図面中、同一または相当部分には同一符号を付している。   Embodiments according to the present invention will be described below with reference to the accompanying drawings. In addition, the same code | symbol is attached | subjected to the same or an equivalent part in an accompanying drawing.

図1は、本発明の第1の実施形態に係わる検査装置1の構成図である。この検査装置1は、検査対象2を撮影する撮影装置3、撮影装置3を走査するために駆動する撮影駆動装置4、検査対象2の欠陥を検出する画像検査装置5を具備している。撮影装置3は、検査対象2を撮影する広域カメラ3aおよびこの広域カメラ3aの撮影範囲の一部を局所的に撮影する局所カメラ3bと、半透過ミラー3cおよび全反射ミラー3dとを有する光学系を備えている。   FIG. 1 is a configuration diagram of an inspection apparatus 1 according to the first embodiment of the present invention. The inspection apparatus 1 includes an imaging apparatus 3 that images the inspection object 2, an imaging drive apparatus 4 that is driven to scan the imaging apparatus 3, and an image inspection apparatus 5 that detects defects in the inspection object 2. The imaging device 3 includes an optical system having a wide area camera 3a for imaging the inspection object 2, a local camera 3b for locally imaging a part of the imaging range of the wide area camera 3a, a semi-transmissive mirror 3c, and a total reflection mirror 3d. It has.

図2に示すように撮影駆動装置4は、撮影装置3により検査対象2の検査面に沿って走査し、連続的に検査対象2を撮影するように駆動する。図2は撮影駆動装置4により撮影装置3の撮影視点を走査するための走査の一例を示しており、図中3eは撮影装置3の走査方向を示している。この例ではテレビモニタなどの走査方法と同様に、水平方向に走査した後、再び走査始点に戻り、ここで、その水平方向の位置を垂直方向下方へ所定距離ずらし再度水平方向を走査する。この繰返しにより検査対象2の全面を撮影装置3により撮影する。   As shown in FIG. 2, the imaging drive device 4 is driven by the imaging device 3 to scan along the inspection surface of the inspection object 2 and continuously image the inspection object 2. FIG. 2 shows an example of scanning for scanning the photographing viewpoint of the photographing device 3 by the photographing driving device 4, and 3 e in the figure indicates the scanning direction of the photographing device 3. In this example, similarly to the scanning method of a television monitor or the like, after scanning in the horizontal direction, the scan is returned to the scanning start point. Here, the horizontal position is shifted downward by a predetermined distance and the horizontal direction is scanned again. By repeating this, the entire surface of the inspection object 2 is imaged by the imaging device 3.

撮影装置3では、検査対象2の広域な範囲を広域カメラ3aにより撮影させ、広域カメラ3aの撮影範囲の一部を局所的に局所カメラ3bにより撮影させ、他方、半透過ミラー3cにより検査対象2からの光の一部を透過させて広域カメラ3aに導光して入力させ、残りの光を反射する。この反射させた光を全反射ミラー3dにより反射させ局所カメラ3bに導光して入力させるものである。   In the imaging device 3, a wide area of the inspection object 2 is imaged by the wide area camera 3a, a part of the imaging range of the wide area camera 3a is locally imaged by the local camera 3b, and on the other hand, the inspection object 2 by the transflective mirror 3c. A part of the light from the light is transmitted and guided to the wide-area camera 3a for input, and the remaining light is reflected. The reflected light is reflected by the total reflection mirror 3d and guided to the local camera 3b for input.

局所カメラ3bの撮影範囲は、後に説明する高精細画像作成装置5aにより広域カメラ3aが撮影した画像から作成する高精細画像の画素分解能に等しい画素分解能を有し、局所カメラ3bの画素数と前記画素分解能から算出された範囲とする。   The shooting range of the local camera 3b has a pixel resolution equal to the pixel resolution of the high-definition image created from the image taken by the wide-area camera 3a by the high-definition image creation device 5a described later. The range is calculated from the pixel resolution.

このように、半透過ミラー3cおよび全反射ミラー3dの光学機器を利用した光学系に構成することにより、広域カメラ3aと同一の撮影位置から局所カメラ3bにより検査対象2を撮影することが容易に可能となる。仮に、これら光学機器を利用しない場合には、広域カメラ3aと局所カメラ3bの撮影位置を同一にすることは物理的に困難であり、設置位置をずらす必要がある。その場合、広域カメラ3aと局所カメラ3bの視点(撮影)位置が異なるため、広域カメラ3aにより撮影した検査対象2の画像に対して、局所カメラ3aにより撮影した検査対象2の画像が歪んでしまい、後に述べる画像比較装置5bによる画像間の比較が難しくなる。   In this way, by configuring the optical system using the optical devices of the semi-transmissive mirror 3c and the total reflection mirror 3d, it is easy to image the inspection object 2 by the local camera 3b from the same imaging position as the wide-area camera 3a. It becomes possible. If these optical devices are not used, it is physically difficult to make the shooting positions of the wide area camera 3a and the local camera 3b the same, and it is necessary to shift the installation positions. In this case, since the viewpoints (shooting) positions of the wide area camera 3a and the local camera 3b are different, the image of the inspection object 2 imaged by the local camera 3a is distorted with respect to the image of the inspection object 2 imaged by the wide area camera 3a. Therefore, comparison between images by the image comparison device 5b described later becomes difficult.

また、広域カメラ3aと局所カメラ3bとにおいて検査対象2から入力される光の光量に相違がでるために、両画像間に明るさの相違が発生し、前述の問題と同様に画像比較装置5bによる画像間の比較が難しくなる。   Further, since the light amount of light input from the inspection object 2 is different between the wide area camera 3a and the local camera 3b, a difference in brightness occurs between the two images, and the image comparison device 5b is similar to the above-described problem. It becomes difficult to compare between images.

図3(a)〜(c)は撮影装置3により撮影する画像の一例を示した。図3(a)は検査対象2の画像を示している。図3(b)は撮影装置3の走査により得られる広域カメラ3aの撮影画像を時間軸に沿った順に画像31a,31b,31cと順次図示している。   3A to 3C show an example of an image photographed by the photographing device 3. FIG. 3A shows an image of the inspection object 2. FIG. 3B sequentially shows images taken by the wide-area camera 3a obtained by scanning of the image taking device 3 as images 31a, 31b, and 31c in order along the time axis.

図3(b)は、図3(a)の検査対象2に対して撮影装置3を左側から右側に水平方向に走査した場合の撮影画像を示しており、検査対象2が左側から順次撮影されている。   FIG. 3B shows a photographed image when the photographing apparatus 3 is scanned in the horizontal direction from the left side to the right side with respect to the inspection object 2 of FIG. 3A, and the inspection object 2 is sequentially photographed from the left side. ing.

また、図3(b)中、範囲32a,32b,32cは、広域カメラ3aの画像31a,31b,31cのそれぞれにおける局所カメラ3bの撮影範囲を示しており、広域カメラ3aの撮影範囲を局所的に撮影している。   Further, in FIG. 3B, ranges 32a, 32b, and 32c indicate the shooting ranges of the local camera 3b in the images 31a, 31b, and 31c of the wide area camera 3a, respectively. I am shooting.

図3(c)は、局所カメラ3bの撮影範囲が32a,32b,32cの場合における局所カメラ3bの画像を示したものである。なお、図3では、局所カメラ3bの撮影範囲を広域カメラ3aの画像の中央部に設定した場合を示しているが、中央部に限定されるものでなく、例えば左上や右下のような他の所要の位置でもよい。   FIG. 3C shows an image of the local camera 3b when the imaging range of the local camera 3b is 32a, 32b, 32c. FIG. 3 shows a case where the shooting range of the local camera 3b is set at the center of the image of the wide area camera 3a. However, the present invention is not limited to the center, and other examples such as upper left and lower right are shown. The required position may be used.

図1に示すように画像検査装置5は高精細画像作成装置5a、画像比較装置5b、移動量計測装置5c、画像蓄積装置5d、展開画像作成装置5e、表示装置5fを具備している。移動量計測装置5cは撮影駆動装置4により走査させた撮影装置3の移動量を、広域カメラ3aの撮影画像に画像処理を施し計測するものである。   As shown in FIG. 1, the image inspection device 5 includes a high-definition image creation device 5a, an image comparison device 5b, a movement amount measurement device 5c, an image storage device 5d, a developed image creation device 5e, and a display device 5f. The moving amount measuring device 5c measures the moving amount of the photographing device 3 scanned by the photographing driving device 4 by performing image processing on the photographed image of the wide area camera 3a.

図4は、移動量計測装置5cによる画像処理手順の一例のフローチャートである。図4に示すように移動量計測装置5cは、まず広域カメラ3aからの撮影画像データに1次式を当てはめた線形補間法や3次元多項式を当てはめた3次元補間法などにより画像を拡大する画像拡大処理(S1)を実行する。この画像拡大処理を初めに実施することで、画像中における撮影装置3の移動量を1画素以下のサブピクセル精度で計測することができる。   FIG. 4 is a flowchart of an example of an image processing procedure performed by the movement amount measuring device 5c. As shown in FIG. 4, the moving amount measuring device 5c first enlarges an image by a linear interpolation method in which a linear expression is applied to captured image data from the wide-area camera 3a, a three-dimensional interpolation method in which a three-dimensional polynomial is applied, or the like. The enlargement process (S1) is executed. By performing this image enlargement process first, the movement amount of the photographing device 3 in the image can be measured with subpixel accuracy of one pixel or less.

次にブロックマッチング処理(S2)を実行する。図5に示すようにブロックマッチング処理は、広域カメラ3aの例えば2枚の画像に画像拡大処理を実行した後の例えば2画像100a,100bにおいて、一方の画像100aの各画素の移動位置を他方の画像100bから求める処理である。この具体的な画像処理方法の一例を以下に説明する。   Next, block matching processing (S2) is executed. As shown in FIG. 5, in the block matching process, for example, in the two images 100a and 100b after the image enlargement process is performed on, for example, two images of the wide area camera 3a, the movement position of each pixel of one image 100a is set to the other. This is processing to be obtained from the image 100b. An example of this specific image processing method will be described below.

まず一方の画像100aの移動位置を求める画素101を中心とした所要大の矩形ブロック102を設定し、さらに、この矩形ブロック102内の輝度の分散を求める。次に、矩形ブロック102内の輝度の分散が所定のしきい値以上である場合には、他方の画像100bに対してブロック走査103を行い、輝度の差を用いた方法や輝度の相関を用いた方法などにより、最も矩形ブロック102に類似した位置を求める。前処理で最も矩形ブロック102に類似した位置と判断した位置が、一方の画像100aの移動位置を求める画素101の画像100bにおける移動位置となる。ブロックマッチング処理は、この処理を一方の画像100aの全画素に対して実行する。   First, a required large rectangular block 102 centering on the pixel 101 for obtaining the moving position of one image 100a is set, and further, the luminance dispersion in the rectangular block 102 is obtained. Next, when the luminance dispersion in the rectangular block 102 is equal to or greater than a predetermined threshold value, the block scan 103 is performed on the other image 100b, and a method using luminance difference or luminance correlation is used. The position that is most similar to the rectangular block 102 is obtained by the method described above. The position determined as the position most similar to the rectangular block 102 in the preprocessing is the movement position in the image 100b of the pixel 101 for obtaining the movement position of the one image 100a. In the block matching process, this process is executed for all the pixels of one image 100a.

しかし、矩形ブロック102内の輝度の分散が所定のしきい値未満の画素については画像処理が実行されないために、他方の画像100bに対する移動位置が求まらない。このように実行されない画素については、実行された周辺の画素の結果から他方の画像100bに対する移動位置を推定する。   However, since the image processing is not executed for the pixels whose luminance distribution in the rectangular block 102 is less than the predetermined threshold value, the moving position with respect to the other image 100b cannot be obtained. For pixels that are not executed in this way, the movement position with respect to the other image 100b is estimated from the results of the executed peripheral pixels.

その推定方法の一例としては、移動位置を推定する画素を囲む、画像処理が実行された最低3画素を検索する。次に、画像の横方向をX軸、縦方向をY軸として、前記3画素のXY軸上の位置と、X軸およびY軸の移動位置をZ軸とした2つの3次元空間に3画素の値からそれぞれ3つの点をプロットする。   As an example of the estimation method, a search is made for at least three pixels that have been subjected to image processing and surround a pixel whose movement position is estimated. Next, three pixels in two three-dimensional spaces, where the horizontal direction of the image is the X axis and the vertical direction is the Y axis, the position of the three pixels on the XY axis and the movement position of the X and Y axes are the Z axis. Plot three points from each value.

この後、この3点を結ぶ3次元空間における平面を計算で求め、推定する画素の点がこの平面上にあるとして、推定する画素のXY軸の位置からZ軸の値を計算する。この計算で求めたZ軸の値が移動位置となる。なお、この例では、3点を用いた平面を仮定したが3点以上を利用して計算できる多項式の面でもよい。   Thereafter, a plane in a three-dimensional space connecting these three points is obtained by calculation, and the value of the Z axis is calculated from the position of the estimated pixel on the XY axis, assuming that the point of the estimated pixel is on this plane. The Z-axis value obtained by this calculation is the movement position. In this example, a plane using three points is assumed, but a polynomial surface that can be calculated using three or more points may be used.

以上で説明したブロックマッチング処理の例では、輝度の分散の高い矩形ブロック102にのみ当該処理を実行する。輝度の分散が高いということは画像のテクスチャが特徴的であり、マッチング処理に適しているということである。逆に輝度の分散が低いということは、画像のテクスチャが一様であり特碑的でないためにマッチング処理を実行した結果が間違った移動位置を計測する可能性が高くなる。このように矩形ブロックについてマッチング処理の実行の是非を判断することにより信頼性の高い計測が可能となる。また、輝度の分散以外に画像のテクスチャの特徴性を評価できる情報を用いて判断してもよい。   In the example of the block matching process described above, the process is executed only for the rectangular block 102 with high luminance dispersion. A high luminance dispersion means that the texture of the image is characteristic and is suitable for matching processing. On the other hand, when the luminance dispersion is low, there is a high possibility that the result of executing the matching process will measure the wrong moving position because the texture of the image is uniform and not special. As described above, it is possible to perform highly reliable measurement by determining whether or not to execute the matching process for the rectangular block. Further, determination may be made using information capable of evaluating the texture characteristics of the image in addition to the luminance dispersion.

なお、移動量計測装置5cは上記移動量計測方法以外に、検査対象2と撮影装置3との位置関係や、広域カメラ3aの視野角および、撮影駆動装置4の移動情報などを基に幾何学的に計測する方法により移動量を計測するように構成してもよい。   In addition to the movement amount measurement method described above, the movement amount measuring device 5c is geometric based on the positional relationship between the inspection object 2 and the photographing device 3, the viewing angle of the wide area camera 3a, the movement information of the photographing driving device 4, and the like. Alternatively, the movement amount may be measured by a method of measuring automatically.

画像蓄積装置5dは、広域カメラ3aの撮影画像と移動量計測装置5cの計測データを、後述する高精細画像作成装置5aに必要となる情報数を蓄積するものである。   The image accumulating device 5d accumulates the number of information necessary for the high-definition image creating device 5a, which will be described later, with respect to the captured image of the wide area camera 3a and the measurement data of the movement amount measuring device 5c.

図6は広域カメラ3aの画像と移動量計測装置5cの計測データとを共に図示しており、例えば蓄積できる情報数としては3つとしている。画像情報を蓄積する画像蓄積装置5dには画像情報が入力される入口5daと、出力される出口5dbを備えている。   FIG. 6 illustrates both the image of the wide area camera 3a and the measurement data of the movement amount measuring device 5c. For example, the number of pieces of information that can be stored is three. The image storage device 5d for storing image information includes an inlet 5da for inputting image information and an outlet 5db for outputting.

図6(a)は、所定時間tの開始時点の画像蓄積装置5dの状態を表しており、画像蓄積装置5dには、その入口5da側から出口5dbに向けて時間t−Δt(所要の微小時間)の画像情報200b、時間t−Δ2tの画像情報200c、時間t−Δ3tの画像情報200dの順に3つの画像が蓄積されている。この後、時間tの画像情報200aが広域カメラ3aと移動量計測装置5cから送られてくると画像蓄積装置5dは、その出口5db側にある時間t−Δ3tの画像情報200dを選択する。   FIG. 6A shows the state of the image storage device 5d at the start of the predetermined time t. The image storage device 5d has a time t-Δt (required minute amount) from the inlet 5da side to the outlet 5db. (Time) image information 200b, image information 200c at time t-Δ2t, and image information 200d at time t-Δ3t are stored in this order. Thereafter, when the image information 200a at time t is sent from the wide area camera 3a and the movement amount measuring device 5c, the image storage device 5d selects the image information 200d at time t−Δ3t on the exit 5db side.

次に、選択した時間t−Δ3tの画像情報200dを消去し、画像蓄積装置5dに蓄積していた情報を出口5db側へずらし、広域カメラ3aと移動量計測装置5dから送られてきた時間tの画像情報200aを画像蓄積装置5dの入口5daから画像蓄積装置5dへ与えて蓄積する。この状態を表したのが図6(b)である。   Next, the image information 200d of the selected time t−Δ3t is erased, the information stored in the image storage device 5d is shifted to the exit 5db side, and the time t sent from the wide area camera 3a and the movement amount measuring device 5d. The image information 200a is supplied from the entrance 5da of the image storage device 5d to the image storage device 5d and stored. FIG. 6B shows this state.

このような手順にて画像情報を蓄積することにより、蓄積している画像情報の中で最も過去の画像情報を破棄し、最も新しい画像情報を常時、順に蓄積することが可能となり、広域カメラ3aにより検査対象2を撮影してから最小の遅延時間で、過去から現在までの画像を高精細画像作成装置5aに送ることができる。   By accumulating the image information in such a procedure, it becomes possible to discard the past image information among the accumulated image information and accumulate the newest image information in order at all times. Thus, images from the past to the present can be sent to the high-definition image creating apparatus 5a with a minimum delay time after the inspection object 2 is imaged.

高精細画像作成装置5aは、画像蓄積装置5dに蓄積された広域カメラ3aの画像と移動量計測装置5cの計測データから、広域カメラ3aが有する画素分解能よりも高い画素分解能を有した高精細画像を作成する装置である。   The high-definition image creation device 5a is a high-definition image having a pixel resolution higher than the pixel resolution of the wide-area camera 3a from the image of the wide-area camera 3a stored in the image storage device 5d and the measurement data of the movement amount measuring device 5c. Is a device to create.

図7に示すように高精細画像作成装置5aは、画像蓄積装置5dに蓄積されている最も新しい画像300aを基準として高精細画像302を作成処理する。ここで、高精細画像302とは、例えばその画素分解能を、最新画像300aと、画像蓄積装置5dに蓄積されている他の画像300bの画像に対して2倍にしてある。   As shown in FIG. 7, the high-definition image creation device 5a creates a high-definition image 302 based on the newest image 300a stored in the image storage device 5d. Here, the high-resolution image 302 has, for example, the pixel resolution twice that of the latest image 300a and the other image 300b stored in the image storage device 5d.

そして、最新画像300aの画素301aが例えば高精細画像302の座標1A,2A,1B,2Bの画素だとすると、画像300bの画素301bは、移動量計測装置5dにより計測した移動位置を基に画像300aからの相対移動位置を計算し、高精細画像302における座標を計算する。この例では、座標を2B,3B,2C,3Cとする。この処理を画像蓄積装置5dに蓄積された全画像の全画素に対して実行する。   If the pixel 301a of the latest image 300a is, for example, a pixel of coordinates 1A, 2A, 1B, and 2B of the high-definition image 302, the pixel 301b of the image 300b is extracted from the image 300a based on the movement position measured by the movement amount measuring device 5d. Is calculated, and the coordinates in the high-definition image 302 are calculated. In this example, the coordinates are 2B, 3B, 2C, 3C. This process is executed for all pixels of all images stored in the image storage device 5d.

次に、高精細画像302の輝度を計算する。すなわち、図7に示すように、高精細画像302の座標2Bは、画像300aの画素301aと画像300bの画素301bが重複した座標であり、高精細画像302の座標2Bの輝度は、画素301aと画素301bの輝度の平均値により計算される。高精細画像作成装置5aでは、この処理を高精細画像302の全ての画素に対して実行し、高精細画像302の輝度を決定する。この処理段階で作成された高精細画像302は、平均輝度で作成されているためコントラストの悪い画像である。   Next, the brightness of the high-definition image 302 is calculated. That is, as shown in FIG. 7, the coordinate 2B of the high-definition image 302 is a coordinate where the pixel 301a of the image 300a and the pixel 301b of the image 300b overlap, and the luminance of the coordinate 2B of the high-definition image 302 is the pixel 301a. It is calculated by the average value of the luminance of the pixel 301b. In the high-definition image creating apparatus 5a, this process is executed for all the pixels of the high-definition image 302, and the brightness of the high-definition image 302 is determined. The high-definition image 302 created at this processing stage is an image with poor contrast because it is created with average luminance.

そこで、次に画像のコントフストを上げるコントラスト改善処理を実行する。   Therefore, a contrast improvement process for increasing the image contrast is executed next.

図8は高精細画像作成装置5aにより高精細画像のコントラストを改善するためのコントラスト改善処理の説明図である。すなわち、図8に示すように例えば画素400のコントラストを上げる場合、まず、画素400を中心とする所要大の中央範囲401と、その周辺の周辺範囲402を同心状に設定する。このとき、周辺範囲402は、中央範囲401よりも広い範囲でなければならない。図8では、例えば中央範囲401の画素が3行3列(3×3)、周辺範囲402の画素が5行5列(5×5)で図示してある。   FIG. 8 is an explanatory diagram of a contrast improvement process for improving the contrast of a high-definition image by the high-definition image creation device 5a. That is, as shown in FIG. 8, for example, when increasing the contrast of the pixel 400, first, a required large central range 401 centering on the pixel 400 and a peripheral range 402 around it are set concentrically. At this time, the peripheral range 402 must be wider than the central range 401. In FIG. 8, for example, the pixels in the central range 401 are illustrated in 3 rows and 3 columns (3 × 3), and the pixels in the peripheral range 402 are illustrated in 5 rows and 5 columns (5 × 5).

次に、中央範囲401、周辺範囲402の各々の平均輝度を求め、中央範囲401の平均輝度から周辺範囲402の平均輝度を差し引く。この差し引いた輝度がプラスの場合には、中央範囲401の方が周辺範囲402よりも明るく、逆にマイナスの場合には中央範囲401の方が周辺範囲402よりも暗いことになる。   Next, the average luminance of each of the central range 401 and the peripheral range 402 is obtained, and the average luminance of the peripheral range 402 is subtracted from the average luminance of the central range 401. When the subtracted luminance is positive, the central range 401 is brighter than the peripheral range 402, and conversely, when it is negative, the central range 401 is darker than the peripheral range 402.

そこで、この差し引いた値を画素400の輝度に加算することにより、中央範囲401が周辺範囲402よりも明るい場合には、画素400を更に明るく、中央範囲401が周辺範囲402よりも暗い場合には、画素400を更に暗くし、画素400のコントラストを強調改善する。   Therefore, by adding this subtracted value to the luminance of the pixel 400, when the central range 401 is brighter than the peripheral range 402, the pixel 400 is brighter and when the central range 401 is darker than the peripheral range 402. , The pixel 400 is further darkened and the contrast of the pixel 400 is enhanced.

画像比較装置5bは、広域カメラ3aの撮影範囲の一部を、局所的に撮影した局所カメラ3bの画像と、高精細画像作成装置5aにより作成した高精細画像と、を比較し、高精細画像作成装置5aを制御する。局所カメラ3bの画像の画素分解能は、高精細画像作成装置5aにより作成した高精細画像の画素分解能と等しくなるように局所カメラ3bの撮影範囲が設定されており、半透過ミラー3cおよび全反射ミラー3dの光学機器(光学系)を利用することによりカメラの視点位置も同一にすることができる。   The image comparison device 5b compares a part of the photographing range of the wide-area camera 3a with the image of the local camera 3b that is locally photographed and the high-definition image created by the high-definition image creation device 5a. The creation device 5a is controlled. The imaging range of the local camera 3b is set so that the pixel resolution of the image of the local camera 3b is equal to the pixel resolution of the high-definition image created by the high-definition image creation device 5a, and the transflective mirror 3c and the total reflection mirror By using 3d optical equipment (optical system), the viewpoint position of the camera can be made the same.

したがって、図9に示すように、広域カメラ3aの画像500の撮影範囲503を撮影した局所カメラ3bの画像502は、広域カメラ3aの画像500から作成した高精細画像501の撮影範囲503の領域の画像と等しい画像であり、局所カメラ3bの画像502と高精細画像501の撮影範囲503の画像とを比較することにより、高精細画像作成装置5aにより作成した高精細画像501の復元度を評価することができる。   Therefore, as shown in FIG. 9, the image 502 of the local camera 3b obtained by photographing the photographing range 503 of the image 500 of the wide area camera 3a is an area of the photographing range 503 of the high-definition image 501 created from the image 500 of the wide area camera 3a. The restoration degree of the high-definition image 501 created by the high-definition image creation device 5a is evaluated by comparing the image 502 of the local camera 3b with the image in the shooting range 503 of the high-definition image 501. be able to.

また、撮影装置3が前述した光学機器を用いた構成としているため、画像間の比較が容易にできる。画像比較装置5bは、局所カメラ3aの画像502と高精細画像501の撮影範囲503の画像を比較評価し、評価値が一定のしきい値以下の場合にはコントラスト改善処理を再度繰り返すように高精細画像作成装置5aに指示する。画像の比較評価は、輝度の差を用いる方法や、輝度の相関を評価する方法などを利用する。   In addition, since the photographing apparatus 3 uses the above-described optical apparatus, comparison between images can be easily performed. The image comparison device 5b compares and evaluates the image 502 of the local camera 3a and the image of the shooting range 503 of the high-definition image 501, and when the evaluation value is equal to or less than a certain threshold value, the image improvement device 5b repeats the contrast improvement processing again. The fine image creating apparatus 5a is instructed. For comparative evaluation of images, a method using a difference in luminance, a method for evaluating correlation of luminance, or the like is used.

このように、局所カメラ3aと画像比較装置5bにより高精細画像作成装置5aを制御することで、高精細画像の復元度を高品質に維持することが可能となる。   As described above, by controlling the high-definition image creation device 5a by the local camera 3a and the image comparison device 5b, it is possible to maintain the restoration degree of the high-definition image with high quality.

展開画像作成装置5eは、高精細画像作成装置5aにより作成した高精細画像を検査対象2の形状から平面に座標変換し、移動量計測装置5cにより計測した撮影装置3の移動量を基に平面に座標変換した高精度画像を合成して、検査対象2の全面を1度に見ることが可能な平面展開画像を作成する。この平面展開画像を表示装置5fに出力し検査員などに提供することで、検査対象2の正常な箇所と、正常な箇所とは異なる箇所を比較しながら欠陥箇所を検出する比較検査ができる。   The developed image creation device 5e performs coordinate conversion of the high definition image created by the high definition image creation device 5a from the shape of the inspection object 2 to a plane, and is based on the movement amount of the imaging device 3 measured by the movement amount measurement device 5c. Is combined with the high-accuracy image that has been coordinate-transformed to create a flat developed image that allows the entire surface of the inspection object 2 to be viewed at a time. By outputting this flat developed image to the display device 5f and providing it to an inspector or the like, a comparative inspection for detecting a defective portion while comparing a normal portion of the inspection object 2 with a portion different from the normal portion can be performed.

また、撮影装置3が移動することにより得られた時系列の画像から広域カメラ3aの画素分解能よりも高い画素分解能を有した高精細画像を広域カメラ3aのサンプリング速度と同等の時間間隔で得ることができ、この高精細画像により高精度の検査が可能となる。さらに、広域カメラ3aの撮影領域の一部を局所的に光学機器を用いて局所カメラ3aにより撮影することにより、容易に画像比較装置5bにより画像間の比較ができ、高品質の高精度画像を提供することが可能である。   In addition, a high-definition image having a pixel resolution higher than the pixel resolution of the wide area camera 3a is obtained at a time interval equivalent to the sampling speed of the wide area camera 3a from a time-series image obtained by moving the photographing device 3. This high-definition image enables high-precision inspection. Furthermore, a part of the imaging area of the wide-area camera 3a is locally captured by the local camera 3a using an optical device, so that the images can be easily compared by the image comparison device 5b, and a high-quality high-accuracy image can be obtained. It is possible to provide.

図10は、本発明の第2の実施形態に係る検査装置1Aの構成図である。この検査装置1Aは、図1で示す第1の実施形態に係る検査装置1に対し、撮影装置3を走査させる撮影駆動装置4に代えて、検査対象2自体を移動させることにより撮影装置3を走査させる検査体駆動装置6を設けた点に特徴があり、これ以外は図1で示す検査装置1とほぼ同様の構成である。   FIG. 10 is a configuration diagram of an inspection apparatus 1A according to the second embodiment of the present invention. The inspection apparatus 1A moves the inspection object 2 itself by moving the inspection object 2 itself instead of the imaging drive apparatus 4 that scans the imaging apparatus 3 with respect to the inspection apparatus 1 according to the first embodiment shown in FIG. The inspection object driving device 6 to be scanned is characterized in that it has the same configuration as the inspection device 1 shown in FIG.

すなわち、第2の検査装置1Aは撮影装置3を駆動せずに固定する一方、検査体駆動装置6により検査対象2を駆動することにより走査させて撮影装置3により連続的に検査対象2を撮影させる。   That is, the second inspection apparatus 1 </ b> A fixes the imaging apparatus 3 without driving it, while the inspection object driving apparatus 6 drives the inspection object 2 to scan and continuously image the inspection object 2 by the imaging apparatus 3. Let

この検査装置1Aによれば、検査対象2を走査させることにより前記第1の実施形態と同様の作用効果を得ることができる。   According to this inspection apparatus 1A, it is possible to obtain the same function and effect as in the first embodiment by scanning the inspection object 2.

図11は本発明の第3の実施形態に係わる検査装置1Bの構成図である。この検査装置1Bは、図1で示す第1の実施形態に係る検査装置1に対して、欠陥検査装置5gを追加した点に特徴があり、これ以外は図1で示す検査装置1と同様である。   FIG. 11 is a configuration diagram of an inspection apparatus 1B according to the third embodiment of the present invention. This inspection apparatus 1B is characterized in that a defect inspection apparatus 5g is added to the inspection apparatus 1 according to the first embodiment shown in FIG. 1, and other than this, the inspection apparatus 1B is the same as the inspection apparatus 1 shown in FIG. is there.

欠陥検査装置5gは、展開画像作成装置5eにより作成された平面展開画像に対して図12に示すような画像処理を適用して、自動で検査対象2の欠陥箇所を認識して検査する装置である。   The defect inspection apparatus 5g is an apparatus for automatically recognizing and inspecting a defect portion of the inspection object 2 by applying image processing as shown in FIG. 12 to the planar development image created by the development image creation apparatus 5e. is there.

すなわち、図12に示すように欠陥検査装置5gは、まず欠陥の輪郭線を求めるために展開画像作成装置5eからの平面展開画像に微分処理(S11)を施し、次に微分成分の大きさが所定のしきい値以上の領域を抽出する2値化処理(S12)を行なう。この2値化処理にて抽出した結果は、欠陥の輪郭線であるため輪郭線で囲まれた領域を欠陥領域とする閉領域埋込み処理(S13)を実行する。   That is, as shown in FIG. 12, the defect inspection apparatus 5g first performs a differentiation process (S11) on the flat developed image from the developed image creating apparatus 5e in order to obtain a defect outline, and then the magnitude of the differential component is determined. A binarization process (S12) is performed to extract an area above a predetermined threshold. Since the result extracted in this binarization process is the outline of the defect, the closed area embedding process (S13) is executed in which the area surrounded by the outline is the defect area.

次に、この閉領域埋込み処理により抽出した領域の面積が所定のしきい値以上のものを選択するノイズ除去処理(S14)を実行し、欠陥を検出する。また、展開画像作成装置5eにより作成した平面展開画像について、欠陥検査装置5gにより自動認識した欠陥領域を色等を変えてオーバーレイ表示し、検査員が視覚的に識別しやすい情報として表示装置5fに出力する。   Next, a noise removal process (S14) is performed in which the area extracted by the closed area embedding process is selected so that the area is equal to or larger than a predetermined threshold value, and a defect is detected. Further, with respect to the flat developed image created by the developed image creating device 5e, the defect area automatically recognized by the defect inspecting device 5g is overlaid and displayed on the display device 5f as information that is easily identifiable by the inspector. Output.

したがって、この検査装置1Bによれば、前記第1の実施形態の検査装置1と同様の効果が得られると共に、検査対象2の欠陥を高精度に自動検出することができる。   Therefore, according to this inspection apparatus 1B, the same effect as the inspection apparatus 1 of the first embodiment can be obtained, and the defect of the inspection object 2 can be automatically detected with high accuracy.

図13は本発明の第4の実施形態に係わる検査装置1Cの構成図である。この検査装置1Cは、上記第1の実施形態に係る検査装置1において、検査対象2が一端面が開口した筒状であり、その筒状検査対象2aの内部を、その開口端から照明する照明装置7を設けた点に主な特徴がある。   FIG. 13 is a configuration diagram of an inspection apparatus 1C according to the fourth embodiment of the present invention. In this inspection apparatus 1C, in the inspection apparatus 1 according to the first embodiment, the inspection object 2 has a cylindrical shape whose one end face is opened, and illumination that illuminates the inside of the cylindrical inspection object 2a from the opening end. The main feature is that the device 7 is provided.

照明装置7は、撮影装置3の広域カメラ3aの受光側前面に配設され、筒状検査対象2a内に、その開口端2aaから挿入し得る外径を有する透明円筒体7a、所要の照明光を出力する光源装置7b、この光源装置7bからの光を筒状検査対象2a内に投光して、その内面を照明する一方、筒状検査対象2aの内面からの光を撮影装置3の受光部、すなわち、広域カメラ3aの入光部に案内する光学系7cを具備している。   The illuminating device 7 is disposed on the light receiving side front surface of the wide area camera 3a of the photographing device 3, and has a transparent cylindrical body 7a having an outer diameter that can be inserted into the cylindrical inspection object 2a from the opening end 2aa, and required illumination light. The light source device 7b that outputs the light, the light from the light source device 7b is projected into the cylindrical inspection object 2a to illuminate the inner surface thereof, and the light from the inner surface of the cylindrical inspection object 2a is received by the imaging device 3 Part, that is, an optical system 7c for guiding the light incident part of the wide area camera 3a.

光学系7cは透明円筒体7aに配設された光源装置7bからの投光を透明円筒体7aの挿入先端部(図13中左端部)側へ反射させる照明用半透過ミラー7caと、透明円筒体7aの挿入先端部(図13中左端部)の内部に配設されて照明用半透過ミラー7caからの光を遠心方向ヘリング状に反射させる円錐ミラー7cbを具備している。   The optical system 7c includes an illumination translucent mirror 7ca that reflects the light emitted from the light source device 7b disposed on the transparent cylindrical body 7a toward the insertion tip (left end in FIG. 13) of the transparent cylindrical body 7a, and a transparent cylinder. A cone mirror 7cb is provided inside the insertion tip (left end in FIG. 13) of the body 7a and reflects the light from the illumination semi-transmissive mirror 7ca in a centrifugal direction herring shape.

また、撮影駆動装置4aは透明円筒体7aを、筒状検査対象2a内に軸方向に挿脱すると共に、透明円筒体7aをその中心軸周りに回動させるように構成されている。   The imaging drive device 4a is configured to insert and remove the transparent cylindrical body 7a in the cylindrical inspection object 2a in the axial direction and to rotate the transparent cylindrical body 7a around its central axis.

したがって、この筒状検査対象2aの内面を撮影する場合は、まず、撮影駆動装置4aを駆動して透明円筒体7aを筒状検査対象2a内へその開口端から内方へ適宜位置まで挿入する。この挿入状態において、光源装置7bからの照明光が照明用半透過ミラー7caで反射されて円錐ミラー7cb側に向けて照射される。さらに、その照明光は、円錐ミラー7cbの外周面にてリング状に反射され、この反射光が筒状検査対象2aの内周面2bに照射されて照明される。一方、この内周面2bで反射した光は、再び円錐ミラー7cbの外周面にて反射され、その反射光は再度照明用半透過ミラー7ca側に反射される。この照明用半透過ミラー7caは、円錐ミラー7cb側からの光の一部を透過させるため、筒状検査対象2aの内周面2bからの反射光は、広域カメラ3aおよび局所カメラ3bに入力される。   Therefore, when imaging the inner surface of the cylindrical inspection object 2a, first, the imaging drive device 4a is driven to insert the transparent cylindrical body 7a into the cylindrical inspection object 2a from the opening end to the inner position as appropriate. . In this inserted state, the illumination light from the light source device 7b is reflected by the illumination semi-transmissive mirror 7ca and is irradiated toward the conical mirror 7cb side. Further, the illumination light is reflected in a ring shape on the outer peripheral surface of the conical mirror 7cb, and this reflected light is applied to the inner peripheral surface 2b of the cylindrical inspection object 2a to be illuminated. On the other hand, the light reflected by the inner peripheral surface 2b is reflected again by the outer peripheral surface of the conical mirror 7cb, and the reflected light is reflected again to the illumination semi-transmissive mirror 7ca side. Since this illumination semi-transmissive mirror 7ca transmits part of the light from the conical mirror 7cb side, the reflected light from the inner peripheral surface 2b of the cylindrical inspection object 2a is input to the wide area camera 3a and the local camera 3b. The

そして、撮影装置3は、撮影駆動装置4aにより、筒状検査対象2aの軸方向と周方向にも走査される。これにより、撮影装置3には2次元で走査された画像が得られ、高精度画像作成装置5aによる高精度画像の作成時において、同一の画素の重なりを持つ画素が発生するのを防止または低減できる。   The imaging device 3 is also scanned in the axial direction and the circumferential direction of the cylindrical inspection object 2a by the imaging drive device 4a. As a result, a two-dimensionally scanned image is obtained in the photographing device 3, and the generation of pixels having the same pixel overlap is prevented or reduced when the high-precision image creation device 5a creates a high-precision image. it can.

そして、この検査装置1Cによっても前記第1の実施形態の検査装置1と同様に広域カメラ3aの撮影画像から高精度画像が作成されると共に、局所カメラ3bの画像と画像比較することにより、高品質の高精度画像を得ることができる。   And also by this inspection apparatus 1C, a high-precision image is created from the captured image of the wide area camera 3a as in the inspection apparatus 1 of the first embodiment, and by comparing the image with the image of the local camera 3b, it is possible to A high-quality image with high quality can be obtained.

また、この検査装置1Cによれば、通常では検査対象の外側から撮影することが困難な筒状検査対象2aの内周面2bにおいても広域,局所カメラ3a,3bによる撮影が可能となり、前記第1の実施の形態と同様の効果を得ることができる。   In addition, according to the inspection apparatus 1C, it is possible to perform imaging with the wide area and local cameras 3a and 3b even on the inner peripheral surface 2b of the cylindrical inspection object 2a, which is usually difficult to image from outside the inspection object. The same effect as that of the first embodiment can be obtained.

本発明の第1の実施形態に係る検査装置の構成図。1 is a configuration diagram of an inspection apparatus according to a first embodiment of the present invention. 図1で示す撮影装置の走査例を示す図。FIG. 3 is a diagram illustrating a scanning example of the imaging apparatus illustrated in FIG. 1. (a),(b),(c)は図1で示す撮影装置の画像例をそれぞれ示す図。(A), (b), (c) is a figure which each shows the example of an image of the imaging device shown in FIG. 図1で示す移動量計測装置が実行するブロックマッチング処理のフローチャート。The flowchart of the block matching process which the movement amount measuring apparatus shown in FIG. 1 performs. 図4で示すブロックマッチング処理の説明図。Explanatory drawing of the block matching process shown in FIG. 図1で示す画像蓄積装置の説明図。Explanatory drawing of the image storage apparatus shown in FIG. 図4で示す高精度画像作成装置による高精度画像の作成方法の説明図。Explanatory drawing of the production method of the high precision image by the high precision image production apparatus shown in FIG. 図1で示す高精度画像作成装置による高精度画像のコントラスト改善処理の説明図。Explanatory drawing of the contrast improvement process of the high precision image by the high precision image creation apparatus shown in FIG. 図1で示す画像比較装置による画像比較処理の説明図。Explanatory drawing of the image comparison process by the image comparison apparatus shown in FIG. 本発明の第2の実施形態に係る検査装置の構成図。The block diagram of the inspection apparatus which concerns on the 2nd Embodiment of this invention. 本発明の第3の実施形態に係る検査装置の構成図。The block diagram of the inspection apparatus which concerns on the 3rd Embodiment of this invention. 図11で示す欠陥検査装置による欠陥検査処理のフローチャート。The flowchart of the defect inspection process by the defect inspection apparatus shown in FIG. 本発明の第4の実施形態に係る撮影装置の構成図。The block diagram of the imaging device which concerns on the 4th Embodiment of this invention.

符号の説明Explanation of symbols

1,1A,1B,1C,… 検査装置
2 検査対象
2a 筒状検査対象
3 撮影装置
3a 広域カメラ
3b 局所カメラ
3c 半透過ミラー
3d 全反射ミラー
4,4a 撮影駆動装置
5 画像検査装置
5a 高精細画像作成装置
5b 画像比較装置
5c 移動量計測装置
5d 画像蓄積装置
5e 展開画像作成装置
5f 表示装置
6 検査体駆動装置
7 照明装置
7a 透明円筒体
7b 光源装置
7ca 照明用半透過ミラー
7cb 円錐ミラー
1, 1A, 1B, 1C,... Inspection device 2 Inspection object 2a Tubular inspection object 3 Imaging device 3a Wide area camera 3b Local camera 3c Semi-transmission mirror 3d Total reflection mirror 4, 4a Imaging drive device 5 Image inspection device 5a High-definition image Creation device 5b Image comparison device 5c Movement amount measurement device 5d Image storage device 5e Expanded image creation device 5f Display device 6 Inspection object drive device 7 Illumination device 7a Transparent cylinder 7b Light source device 7ca Illumination semi-transmission mirror 7cb Conical mirror

Claims (8)

検査対象を広域的に撮影する広域カメラ、この広域カメラの撮影範囲内で前記検査対象を局所的に撮影する局所カメラ、前記検査対象からの光を前記広域カメラおよび前記局所カメラに導光する光学系を備えた撮影装置と、
前記検査対象に前記撮影装置を走査させる撮影駆動装置と、
この撮影駆動装置の走査による移動量を計測する移動量計測装置と、
前記撮影装置から出力される画像を蓄積する画像蓄積装置と、
この画像蓄積装置が蓄積している画像と前記移動量計測装置で計測した前記撮影駆動装置の移動量とに基づいて、前記広域カメラの画素分解能よりも高い画素分解能の高精細画像を作成する高精細画像作成装置と、
高精細画像作成装置により作成した高精細画像と前記局所カメラから出力された画像とを比較して高精細画像の復元度を求め、この復元度に基づいて前記高精細画像作成装置を制御することにより、この高精細画像作成装置により作成される高精細画像を制御する画像比較装置と、
この高精細画像作成装置により作成した高精細画像を表示する表示装置と、
を備えたことを特徴とする検査装置。
Wide area camera for photographing the inspection object in a wide area, local camera for photographing the inspection object locally within the photographing range of the wide area camera, and optical for guiding light from the inspection object to the wide area camera and the local camera An imaging device equipped with a system;
An imaging drive device that scans the imaging device to the inspection object;
A moving amount measuring device for measuring a moving amount by scanning of the photographing driving device;
An image storage device for storing an image output from the photographing device;
A high-definition image having a pixel resolution higher than the pixel resolution of the wide-area camera is created based on the image accumulated by the image accumulation device and the movement amount of the photographing drive device measured by the movement amount measurement device. A fine image creation device;
Comparing a high-definition image created by a high-definition image creation device with an image output from the local camera to obtain a restoration degree of the high-definition image, and controlling the high-definition image creation device based on the restoration degree The image comparison device that controls the high-definition image created by the high-definition image creation device,
A display device for displaying a high-definition image created by the high-definition image creation device;
An inspection apparatus comprising:
請求項1記載の検査装置において、前記撮影駆動装置に代えて前記検査対象を移動させる検査体駆動装置を備えたことを特徴とする検査装置。 The inspection apparatus according to claim 1, further comprising an inspection body driving device that moves the inspection object instead of the imaging driving device. 請求項1または2記載の検査装置において、前記移動量計測装置は、前記撮影駆動装置または前記検査体駆動装置の走査による移動量を前記広域カメラの画像における移動量として求める画像処理手段を有することを特徴とする検査装置。 3. The inspection apparatus according to claim 1, wherein the movement amount measuring device includes an image processing unit that obtains a movement amount by scanning of the imaging driving device or the inspection object driving device as a movement amount in the image of the wide area camera. Inspection device characterized by 請求項1から3のいずれか1項に記載の検査装置において、前記移動量計測装置は、前記撮影駆動装置または前記検査体駆動装置の走査による移動量を、前記広域カメラの画像における移動量として、前記検査対象の形状情報と、前記検査対象と前記撮影装置の位置情報と、前記撮影駆動装置または検査体駆動装置の走査情報から計測する計測手段を有することを特徴とする検査装置。 4. The inspection apparatus according to claim 1, wherein the movement amount measuring device uses a movement amount obtained by scanning the imaging driving device or the inspection object driving device as a movement amount in an image of the wide area camera. An inspection apparatus comprising measuring means for measuring from shape information of the inspection object, position information of the inspection object and the imaging apparatus, and scanning information of the imaging drive apparatus or the inspection object drive apparatus. 請求項1から4のいずれか1項に記載の検査装置において、前記高精細画像作成装置により作成した高精細画像を、前記移動量計測装置により計測した前記撮影駆動装置もしくは前記検査体駆動装置の移動量と、前記検査対象の形状とを基に平面画像に座標変換し、複数の前記高精細画像を合成した平面展開画像を作成する展開画像作成装置を有することを特徴とする検査装置。 5. The inspection device according to claim 1, wherein a high-definition image created by the high-definition image creation device is measured by the movement amount measurement device, or the imaging drive device or the inspection object drive device. An inspection apparatus comprising: a developed image creation device that creates a planar developed image obtained by synthesizing a plurality of the high-definition images by performing coordinate conversion into a planar image based on a movement amount and the shape of the inspection target. 請求項1から5のいずれか1項に記載の検査装置において、前記高精細画像作成装置により作成した高精細画像もしくは前記展開画像作成装置により作成した平面展開画像に画像処理を施すことにより、前記検査対象の欠陥を自動で識別検査する画像検査装置を備えたことを特徴とする検査装置。 The inspection apparatus according to any one of claims 1 to 5, wherein image processing is performed on a high-definition image created by the high-definition image creating device or a flat developed image created by the developed image creating device, An inspection apparatus comprising an image inspection apparatus for automatically identifying and inspecting a defect to be inspected. 請求項1から6のいずれか1項に記載の検査装置において、検査対象が筒状であって、その筒状の内部に少なくとも一部が挿脱可能に構成され、その挿入時、筒状検査対象の内部を照明する一方、この内部からの光を前記光学系に導光する光学系を有する照明装置を備えたことをと特徴とする検査装置。 The inspection apparatus according to any one of claims 1 to 6, wherein the object to be inspected is cylindrical, and at least a part of the inspection object can be inserted into and removed from the inside of the cylinder. An inspection apparatus comprising an illuminating device having an optical system that illuminates the inside of an object and guides light from the inside to the optical system. 請求項7記載の検査装置において、前記筒状検査対象の内部にて周方向に前記照明装置と、前記撮影装置を走査させる撮影駆動装置を備えたことを特徴とする検査装置。 8. The inspection apparatus according to claim 7, further comprising a photographing drive device that scans the illumination device and the photographing device in a circumferential direction inside the cylindrical inspection object.
JP2006167732A 2006-06-16 2006-06-16 Inspection device Active JP4724056B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006167732A JP4724056B2 (en) 2006-06-16 2006-06-16 Inspection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006167732A JP4724056B2 (en) 2006-06-16 2006-06-16 Inspection device

Publications (2)

Publication Number Publication Date
JP2007333639A JP2007333639A (en) 2007-12-27
JP4724056B2 true JP4724056B2 (en) 2011-07-13

Family

ID=38933243

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006167732A Active JP4724056B2 (en) 2006-06-16 2006-06-16 Inspection device

Country Status (1)

Country Link
JP (1) JP4724056B2 (en)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5057839B2 (en) 2007-04-27 2012-10-24 株式会社東芝 Structure visual inspection device and inspection method thereof
ES2661736T3 (en) * 2007-10-03 2018-04-03 Kabushiki Kaisha Toshiba Visual exam device and visual exam method
JP5214323B2 (en) * 2008-05-13 2013-06-19 株式会社東芝 Visual inspection apparatus and method
JP5907659B2 (en) * 2011-01-28 2016-04-26 日立Geニュークリア・エナジー株式会社 Inspection method
JP5613603B2 (en) * 2011-03-28 2014-10-29 株式会社東芝 In-reactor equipment shape measuring apparatus and in-reactor equipment shape measuring method
KR101311309B1 (en) 2012-04-12 2013-09-25 국방과학연구소 Detecting method of image operation and detecting device of image operation
US9948843B2 (en) * 2016-06-17 2018-04-17 Mitutoyo Corporation Super resolution bore imaging system
CN109587448A (en) * 2018-12-12 2019-04-05 国网山西省电力公司大同供电公司 A kind of intelligent substation inspection tour system
JP7386143B2 (en) 2020-06-25 2023-11-24 Pacraft株式会社 Information acquisition system
JP2022186391A (en) * 2021-06-04 2022-12-15 株式会社Sumco Wafer appearance inspection device and wafer appearance inspection method
CN116413214A (en) * 2021-12-31 2023-07-11 广东利元亨智能装备股份有限公司 Operation control method, detection system and storage medium for CCD photographing detection

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02253105A (en) * 1989-03-28 1990-10-11 Yokogawa Electric Corp Image measuring device
JP3559071B2 (en) * 1994-09-07 2004-08-25 株式会社ミツトヨ Image superposition optical device
JPH10253319A (en) * 1997-03-12 1998-09-25 Hitachi Ltd Position measuring device
JP2001194133A (en) * 2000-01-17 2001-07-19 Nippon Dejitetsuku:Kk Method and apparatus for measuring concentricity of cylindrical parts
JP4332987B2 (en) * 2000-04-27 2009-09-16 アイシン精機株式会社 Cross-sectional shape measuring apparatus and cross-sectional shape measuring method
WO2004068862A1 (en) * 2003-01-31 2004-08-12 The Circle For The Promotion Of Science And Engineering Method for creating high resolution color image, system for creating high resolution color image and program for creating high resolution color image
JP4609879B2 (en) * 2004-06-08 2011-01-12 オムロン株式会社 Image high resolution method, image high resolution device, and image recognition device
JP2007183135A (en) * 2006-01-05 2007-07-19 Toshiba Corp Method and device for inspecting pattern

Also Published As

Publication number Publication date
JP2007333639A (en) 2007-12-27

Similar Documents

Publication Publication Date Title
JP4724056B2 (en) Inspection device
US10319103B2 (en) Method and device for measuring features on or near an object
US11514643B2 (en) Method and device for displaying a two-dimensional image of a viewed object simultaneously with an image depicting the three-dimensional geometry of the viewed object
KR101207378B1 (en) Visual examination device and visual examination method
US20220172385A1 (en) Method and device for measuring features on or near an object
EP2508871A1 (en) Inspection apparatus, measurement method for three-dimensional shape, and production method for structure
JP6865046B2 (en) Methods and devices for automatically identifying points of interest in depth measurement of visible objects
EP2495524A1 (en) Method and device for displaying a three-dimensional view of the surface of a viewed object
CN108027233B (en) Method and apparatus for measuring features on or near an object
JP4331541B2 (en) Endoscope device
EP2141912B1 (en) Appearance inspection apparatus and appearance inspection method
WO2016208622A1 (en) Surface defect detection apparatus and surface defect detection method
WO2016149189A1 (en) Method and device for displaying a two-dimensional image of a viewed object simultaneously with an image depicting the three-dimensional geometry of the viewed object
JP2007292699A (en) Surface inspection method of member
JP2022518186A (en) Methods and equipment for inspecting hard-to-reach parts
JP5305164B2 (en) Pipe inner surface inspection apparatus and inspection method
JP3324699B2 (en) Method and apparatus for measuring fiber diameter distribution
JP4581424B2 (en) Appearance inspection method and image processing apparatus
JP2011138096A (en) Measuring microscope
JP5214323B2 (en) Visual inspection apparatus and method
JP2005164301A (en) Automatic inspection device for fuel rod for nuclear reactor
JP6185539B2 (en) Optical connector ferrule end face inspection device and inspection program
JP2007155394A (en) Fuel rod inspection device
JP2007033379A (en) Flaw detecting method and flaw detector

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20090107

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090108

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20090108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110303

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110315

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110408

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140415

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4724056

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140415

Year of fee payment: 3