JP5442305B2 - Defect detection apparatus and defect detection method - Google Patents

Defect detection apparatus and defect detection method Download PDF

Info

Publication number
JP5442305B2
JP5442305B2 JP2009096889A JP2009096889A JP5442305B2 JP 5442305 B2 JP5442305 B2 JP 5442305B2 JP 2009096889 A JP2009096889 A JP 2009096889A JP 2009096889 A JP2009096889 A JP 2009096889A JP 5442305 B2 JP5442305 B2 JP 5442305B2
Authority
JP
Japan
Prior art keywords
region
alignment
unit
group
pairs
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009096889A
Other languages
Japanese (ja)
Other versions
JP2010249565A (en
Inventor
泰志 佐々
典雄 森田
雄一郎 疋田
健 猿渡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Screen Holdings Co Ltd
Dainippon Screen Manufacturing Co Ltd
Original Assignee
Screen Holdings Co Ltd
Dainippon Screen Manufacturing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Screen Holdings Co Ltd, Dainippon Screen Manufacturing Co Ltd filed Critical Screen Holdings Co Ltd
Priority to JP2009096889A priority Critical patent/JP5442305B2/en
Publication of JP2010249565A publication Critical patent/JP2010249565A/en
Application granted granted Critical
Publication of JP5442305B2 publication Critical patent/JP5442305B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Description

本発明は、第1のパターンを撮像した第1の画像と第2のパターンを撮像した第2の画像とを比較して第1のパターンに含まれる欠陥を検出する欠陥検出装置及び欠陥検出方法に関する。   The present invention relates to a defect detection apparatus and a defect detection method for detecting a defect included in a first pattern by comparing a first image obtained by imaging a first pattern with a second image obtained by imaging a second pattern. About.

第1のパターンを撮像した第1の画像と第2のパターンを撮像した第2の画像とを比較して第1のパターンに含まれる欠陥を検出する場合、第1の画像と第2の画像との位置あわせが実行される。位置あわせにあたって、相対的に低い精度で位置あわせを行った後に相対的に高い精度で位置あわせを行う場合もある。   When detecting a defect included in the first pattern by comparing the first image obtained by imaging the first pattern and the second image obtained by imaging the second pattern, the first image and the second image Alignment with is performed. In alignment, there is a case where alignment is performed with relatively high accuracy after alignment with relatively low accuracy.

特許文献1は、そのような2段階の位置あわせに言及している。特許文献1の「背景技術」の欄は、「低解像度での位置あわせを行った後に高解像度にて位置あわせを行う」ことに言及している。また、特許文献1の「発明を実施するための最良の形態」の欄は、「位置補正部52」で位置あわせを行った後に「欠陥検出部53」で位置あわせ及び欠陥の検出を行うことに言及している。   Patent Document 1 refers to such two-stage alignment. The column “Background Technology” in Patent Document 1 refers to “positioning at a high resolution after positioning at a low resolution”. In the column of “Best Mode for Carrying Out the Invention” in Patent Document 1, the “position correction unit 52” performs alignment and then the “defect detection unit 53” performs alignment and defect detection. To mention.

特開2005−292016号公報JP 2005-292016 A

しかし、第1の画像を複数の第1の領域に分割し第2の画像を複数の第2の領域に分割し第1の領域と第2の領域とを比較する場合、上述のような2段階の位置あわせを第1の領域と第2の領域との対の全部について行うと、欠陥の検出の処理に要する時間が長くなる。   However, when the first image is divided into a plurality of first regions and the second image is divided into a plurality of second regions, and the first region and the second region are compared, the above 2 If the stage alignment is performed for all the pairs of the first region and the second region, the time required for the defect detection process becomes longer.

本発明は、この問題を解決するためになされたもので、欠陥の検出の精度を低下させることなく欠陥の検出に要する時間が短くなる欠陥検出装置及び欠陥検出方法を提供することを目的とする。   The present invention has been made to solve this problem, and an object of the present invention is to provide a defect detection apparatus and a defect detection method in which the time required for defect detection is shortened without reducing the accuracy of defect detection. .

上記課題を解決するため、請求項1及び2の発明は、第1のパターンを撮像した第1の画像と第2のパターンを撮像した第2の画像とを比較して第1のパターンに含まれる欠陥を検出する欠陥検出装置であって、第1の画像を複数の第1の領域に分割する第1の画像分割部と、第2の画像を複数の第2の領域に分割する第2の画像分割部と、比較される第1の領域と第2の領域との複数の対のうちの第1の群に属する対について相対的に低い精度で第1の領域と第2の領域との位置あわせを実行する第1の位置あわせ部と、比較される第1の領域と第2の領域との複数の対のうちの第1の群に属さず第2の群に属する残余の対に前記第1の位置あわせ部による第1の群に属する対についての位置あわせの結果を援用する第1の援用部と、比較される第1の領域と第2の領域との複数の対について前記第1の位置あわせ部により位置あわせが実行された状態又は前記第1の援用部により位置あわせの結果が援用された状態を基準として相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行する第2の位置あわせ部と、比較される第1の領域と第2の領域との複数の対について第1の領域と第2の領域との比較結果から欠陥を検出する欠陥検出部と、を備える。 In order to solve the above-mentioned problems, the first and second aspects of the invention include a first image obtained by imaging the first pattern and a second image obtained by comparing the second image obtained by imaging the second pattern. A defect detection apparatus for detecting a defect to be detected, a first image dividing unit that divides a first image into a plurality of first regions, and a second that divides a second image into a plurality of second regions. And the first region and the second region with relatively low accuracy with respect to the pairs belonging to the first group among the plurality of pairs of the first region and the second region to be compared. A first alignment unit that executes the alignment of the first and second pairs of the first region and the second region to be compared that do not belong to the first group but belong to the second group Compared to the first support unit that uses the result of alignment for the pairs belonging to the first group by the first alignment unit, Based on a state in which alignment is performed by the first alignment unit for a plurality of pairs of the first region and the second region to be registered or a state in which the alignment result is incorporated by the first assistance unit A second alignment unit that performs alignment between the first region and the second region with relatively high or the same accuracy, and a plurality of the first region and the second region to be compared A defect detection unit that detects a defect from a comparison result between the first region and the second region for the pair.

請求項1の欠陥検出装置においては、前記第2の位置あわせ部は、比較される第1の領域と第2の領域との複数の対のうちの第3の群に属する対について相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行し、前記欠陥検出装置は、比較される第1の領域と第2の領域との複数の対のうちの第3の群に属さず第4の群に属する残余の対に前記第2の位置あわせ部による第3の群に属する対についての位置あわせの結果を援用する第2の援用部、をさらに備える。 The defect detection apparatus according to claim 1 , wherein the second alignment unit is relatively configured for a pair belonging to a third group among a plurality of pairs of the first region and the second region to be compared. Alignment of the first region and the second region is performed with high or the same accuracy, and the defect detection apparatus performs the first of the plurality of pairs of the first region and the second region to be compared. A second assisting unit that uses the result of alignment of the pair belonging to the third group by the second aligning unit to the remaining pairs belonging to the fourth group without belonging to the third group.

請求項2の欠陥検出装置において、比較される第1の領域と第2の領域との複数の対の各々が相対的に低い精度の位置あわせに適するか否かを順次に判定する適否判定部と、前記適否判定部により相対的に低い精度の位置あわせに適さないと判定された対を第2の群に属すると判定し、相対的に低い精度の位置あわせに適さないと判定された対のひとつ後に相対的に低い精度の位置あわせに適すると判定された対を第1の群に属すると判定する群判定部と、をさらに備える。 In the defect detecting apparatus according to claim 2, sequentially determines the appropriateness determining whether each of the plurality of pairs of the first and second regions to be compared are suitable for alignment of a relatively low accuracy And the pair determined to be unsuitable for relatively low accuracy alignment by the suitability determining unit are determined to belong to the second group, and determined to be unsuitable for relatively low accuracy alignment A group determination unit that determines that a pair determined to be suitable for relatively low-precision alignment after one pair belongs to the first group;

また、請求項2の欠陥検出装置においては、前記群判定部は、前記適否判定部により相対的に低い精度の位置あわせに適すると判定された対のひとつ後に相対的に低い精度の位置あわせに適すると判定された対を第2の群に属すると判定する。
請求項3の発明は、請求項2の欠陥検出装置において、前記第2の位置あわせ部は、比較される第1の領域と第2の領域との複数の対の全部について相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行する。
請求項4の発明は、請求項2の欠陥検出装置において、前記第2の位置あわせ部は、比較される第1の領域と第2の領域との複数の対のうちの第3の群に属する対について相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行し、前記欠陥検出装置は、比較される第1の領域と第2の領域との複数の対のうちの第3の群に属さず第4の群に属する残余の対に前記第2の位置あわせ部による第3の群に属する対についての位置あわせの結果を援用する第2の援用部、をさらに備える。
Further, in the defect detection apparatus according to claim 2, the group determination unit performs alignment with relatively low accuracy after one of the pairs determined to be suitable for alignment with relatively low accuracy by the suitability determination unit. The pair determined to be suitable is determined to belong to the second group.
According to a third aspect of the present invention, in the defect detection device of the second aspect, is the second alignment unit relatively high for all of the plurality of pairs of the first region and the second region to be compared? Alternatively, the alignment between the first area and the second area is executed with the same accuracy.
According to a fourth aspect of the present invention, in the defect detection apparatus according to the second aspect, the second alignment unit is included in a third group of a plurality of pairs of the first region and the second region to be compared. The defect detection apparatus performs alignment between the first region and the second region to be compared by performing alignment between the first region and the second region with relatively high or the same accuracy with respect to the pair to which the member belongs. Second assistance that uses the result of alignment of the pair belonging to the third group by the second alignment unit to the remaining pair belonging to the fourth group but not belonging to the third group A section.

請求項5の発明は、請求項2ないし請求項4のいずれかの欠陥検出装置において、前記適否判定部は、第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるエッジを検出するエッジ検出部と、前記エッジ検出部によりエッジが検出されない場合に対が相対的に精度が低い位置あわせに適さないと判定する判定部と、を備える。 According to a fifth aspect of the present invention, in the defect detection device according to any of the second to fourth aspects, the suitability determination unit is included in a determination target region that is one or both of the first region and the second region. An edge detection unit that detects an edge; and a determination unit that determines that a pair is not suitable for alignment with relatively low accuracy when no edge is detected by the edge detection unit.

請求項6の発明は、請求項2ないし請求項4のいずれかの欠陥検出装置において、前記適否判定部は、第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるエッジを検出するエッジ検出部と、前記エッジ検出部により検出されたエッジの平均的な接線方向を導出する平均接線方向導出部と、前記平均接線方向導出部により導出された接線方向に対する判定対象領域の自己相関性を評価する自己相関性評価部と、前記自己相関性導出部により導出された自己相関性が基準よりも高い場合に対が相対的に精度が低い位置あわせに適さないと判定する判定部と、を備える。 According to a sixth aspect of the present invention, in the defect detection device according to any of the second to fourth aspects, the suitability determination unit is included in a determination target region that is one or both of the first region and the second region. An edge detection unit for detecting an edge, an average tangent direction deriving unit for deriving an average tangent direction of the edge detected by the edge detection unit, and a determination target region for the tangent direction derived by the average tangent direction deriving unit An autocorrelation evaluation unit that evaluates the autocorrelation of a pair, and when the autocorrelation derived by the autocorrelation derivation unit is higher than a reference, it is determined that the pair is not suitable for alignment with relatively low accuracy A determination unit.

請求項7の発明は、請求項2ないし請求項4のいずれかの欠陥検出装置において、前記適否判定部は、第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるエッジを検出するエッジ検出部と、前記エッジ検出部により検出されたエッジを構成する画素により構成される直線を検出する直線検出部と、前記直線検出部により検出された直線の方向を導出する方向導出部と、前記方向導出部により導出された方向の一様性が基準よりも高い場合に対が相対的に低い精度の位置あわせに適さないと判定する判定部と、を備える。 The invention according to claim 7 is the defect detection device according to any one of claims 2 to 4 , wherein the suitability determination unit is included in a determination target region that is one or both of the first region and the second region. An edge detection unit for detecting an edge, a straight line detection unit for detecting a straight line composed of pixels constituting the edge detected by the edge detection unit, and a direction for deriving the direction of the straight line detected by the straight line detection unit A derivation unit, and a determination unit that determines that the pair is not suitable for alignment with relatively low accuracy when the uniformity of the direction derived by the direction derivation unit is higher than a reference.

請求項8の発明は、請求項2ないし請求項4のいずれかの欠陥検出装置において、前記適否判定部は、第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるエッジを検出するエッジ検出部と、前記エッジ検出部により検出されたエッジの接線方向のヒストグラムを導出するヒストグラム導出部と、前記ヒストグラム導出部により導出されたヒストグラムに存在するピークの数が1個のみである場合に対が相対的に低い精度の位置あわせに適さないと判定する判定部と、を備える。 The invention according to claim 8 is the defect detection device according to any one of claims 2 to 4 , wherein the suitability determination unit is included in a determination target region that is one or both of the first region and the second region. An edge detection unit for detecting an edge, a histogram derivation unit for deriving a histogram in the tangential direction of the edge detected by the edge detection unit, and the number of peaks present in the histogram derived by the histogram derivation unit is only one And a determination unit that determines that the pair is not suitable for alignment with relatively low accuracy.

請求項9の発明は、請求項2ないし請求項4のいずれかの欠陥検出装置において、前記適否判定部は、第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるコーナーを検出するコーナー検出部と、前記コーナー検出部によりコーナーが検出されない場合に対が相対的に低い精度の位置あわせに適さないと判定する判定部と、を備える。 According to a ninth aspect of the present invention, in the defect detection device according to any one of the second to fourth aspects, the suitability determination unit is included in a determination target region that is one or both of the first region and the second region. A corner detection unit that detects a corner; and a determination unit that determines that a pair is not suitable for relatively low-precision alignment when a corner is not detected by the corner detection unit.

請求項10の発明は、請求項2ないし請求項4のいずれかの欠陥検出装置において、前記適否判定部は、第1の領域又は第2の領域の片方又は両方である判定対象領域の移動先をゆすらせ範囲内でゆすらせたときの自己相関性の分布を導出する分布導出部と、前記分布導出部により導出された分布が基準を満たす方向性を有する場合に対が相対的に低い精度の位置あわせに適さないと判定する判定部と、を備える。 According to a tenth aspect of the present invention, in the defect detection device according to any one of the second to fourth aspects, the suitability determination unit is a destination of a determination target region that is one or both of the first region and the second region. A distribution deriving unit for deriving an autocorrelation distribution when the range is swayed within a range, and a pair having a relatively low accuracy when the distribution derived by the distribution deriving unit has a direction that satisfies a criterion And a determination unit that determines that the position is not suitable for the positioning.

請求項11の発明は、請求項1ないし請求項10のいずれかの欠陥検出装置において、前記第1の位置あわせ部は、位置あわせのための演算を行う演算処理回路と、位置あわせのための演算を複数回に分割して前記演算処理回路に行わせる演算分割部と、を備える。 According to an eleventh aspect of the present invention, in the defect detection apparatus according to any one of the first to tenth aspects, the first alignment unit includes an arithmetic processing circuit that performs an operation for alignment, and an alignment processing circuit. An operation dividing unit that divides the operation into a plurality of times and causes the arithmetic processing circuit to perform the operation.

請求項12の発明は、請求項1ないし請求項10のいずれかの欠陥検出装置において、前記第2の位置あわせ部は、位置あわせのための演算を行う演算処理回路と、位置あわせのための演算を複数回に分割して前記演算処理回路に行わせる演算分割部と、を備える。 According to a twelfth aspect of the present invention, in the defect detection apparatus according to any one of the first to tenth aspects, the second alignment unit includes an arithmetic processing circuit that performs an operation for alignment, and an alignment processing circuit. An operation dividing unit that divides the operation into a plurality of times and causes the arithmetic processing circuit to perform the operation.

請求項13及び14の発明は、第1のパターンを撮像した第1の画像と第2のパターンを撮像した第2の画像とを比較して第1のパターンに含まれる欠陥を検出する欠陥検出方法であって、(a) 第1の画像を複数の第1の領域に分割する工程と、(b) 第2の画像を複数の第2の領域に分割する工程と、(c) 比較される第1の領域と第2の領域との複数の対のうちの第1の群に属する対について相対的に低い精度で第1の領域と第2の領域との位置あわせを実行する工程と、(d) 比較される第1の領域と第2の領域との複数の対のうちの第1の群に属さず第2の群に属する残余の対に前記工程(c)による第1の群に属する対についての位置あわせの結果を援用する工程と、(e) 比較される第1の領域と第2の領域との複数の対について前記工程(c)により位置あわせが実行された状態又は前記工程(d)により位置あわせの結果が援用された状態を基準として相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行する工程と、(f) 比較される第1の領域と第2の領域との複数の対について第1の領域と第2の領域との比較結果から欠陥を検出する工程と、を備える。
請求項13の欠陥検出方法においては、前記工程(e)は、比較される第1の領域と第2の領域との複数の対のうちの第3の群に属する対について相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行し、前記欠陥検出方法は、(g) 比較される第1の領域と第2の領域との複数の対のうちの第3の群に属さず第4の群に属する残余の対に前記工程(e)による第3の群に属する対についての位置あわせの結果を援用する工程、をさらに備える。
請求項14の欠陥検出方法においては、(g) 比較される第1の領域と第2の領域との複数の対の各々が相対的に低い精度の位置あわせに適するか否かを順次に判定する工程と、(h) 前記工程(g)により相対的に低い精度の位置あわせに適さないと判定された対を第2の群に属すると判定し、相対的に低い精度の位置あわせに適さないと判定された対のひとつ後に相対的に低い精度の位置あわせに適すると判定された対を第1の群に属すると判定する工程と、をさらに備え、前記工程(h)は、前記工程(g)により相対的に低い精度の位置あわせに適すると判定された対のひとつ後に相対的に低い精度の位置あわせに適すると判定された対を第2の群に属すると判定する。
The invention according to claims 13 and 14 detects a defect included in the first pattern by comparing the first image obtained by imaging the first pattern and the second image obtained by imaging the second pattern. A method comprising: (a) dividing a first image into a plurality of first regions; (b) dividing a second image into a plurality of second regions; and (c) being compared. Performing alignment between the first region and the second region with relatively low accuracy with respect to pairs belonging to the first group among a plurality of pairs of the first region and the second region. (D) The remaining pair belonging to the second group but not belonging to the first group of the plurality of pairs of the first region and the second region to be compared is assigned to the first pair according to the step (c). Using the result of the alignment for the pairs belonging to the group; and (e) for a plurality of pairs of the first region and the second region to be compared by the step (c) Alignment between the first region and the second region is performed with relatively high or the same accuracy based on the state where the alignment is performed or the state where the alignment result is used in the step (d). And (f) detecting a defect from a comparison result between the first region and the second region for a plurality of pairs of the first region and the second region to be compared.
14. The defect detection method according to claim 13, wherein the step (e) is relatively high for pairs belonging to the third group among a plurality of pairs of the first region and the second region to be compared. Alternatively, the first region and the second region are aligned with the same accuracy, and the defect detection method includes: (g) Of the plurality of pairs of the first region and the second region to be compared, A step of using a result of alignment of the pairs belonging to the third group in the step (e) for the remaining pairs belonging to the fourth group without belonging to the third group.
15. The defect detection method according to claim 14, wherein (g) sequentially determines whether or not each of the plurality of pairs of the first region and the second region to be compared is suitable for relatively low-precision alignment. And (h) determining that the pair determined to be unsuitable for relatively low accuracy alignment by the step (g) belongs to the second group, and is suitable for relatively low accuracy alignment. A step of determining that a pair determined to be suitable for relatively low-precision alignment after one of the pairs determined not to belong to the first group includes the step (h), A pair determined to be suitable for relatively low-precision alignment is determined to belong to the second group after one of the pairs determined to be suitable for relatively low-precision alignment in (g).

本発明によれば、第2の群に属する対について相対的に低い精度の位置あわせが実行されないので、欠陥の検出に要する時間が短くなる。また、第1の群に属する対についての相対的に低い精度の位置あわせの結果が第2の群に属する対に援用されるので、欠陥の検出の精度の低下が少ない。   According to the present invention, since relatively low-precision alignment is not performed for pairs belonging to the second group, the time required for defect detection is shortened. In addition, since a relatively low accuracy alignment result for the pairs belonging to the first group is used for the pairs belonging to the second group, there is little decrease in the accuracy of defect detection.

請求項1の発明によれば、第4の群に属する対について相対的に高いか又は同じ精度の位置あわせが実行されないので、欠陥の検出に要する時間が短くなる。また、第3の群に属する対についての相対的に低い精度の位置あわせの結果が第4の群に属する対に援用されるので、欠陥の検出の精度の低下が少ない。 According to the first aspect of the present invention, since the alignment that is relatively high or the same accuracy is not performed for the pairs belonging to the fourth group, the time required for detecting the defect is shortened. In addition, since the result of relatively low accuracy alignment for the pairs belonging to the third group is used for the pairs belonging to the fourth group, there is little reduction in the accuracy of defect detection.

請求項2の発明によれば、相対的に低い精度の位置あわせに適さない対について相対的に低い精度の位置あわせが実行されず、相対的に低い精度の位置あわせが必要な対について相対的に低い精度の位置あわせが実行されるので、欠陥の検出の精度が向上する。 According to the invention of claim 2 , relatively low accuracy alignment is not executed for a pair that is not suitable for relatively low accuracy alignment, and relative to a pair that requires relatively low accuracy alignment. Therefore, the accuracy of defect detection is improved.

請求項2の発明によれば、相対的に低い精度の位置あわせが必ずしも必要でない対について相対的に低い精度の位置あわせが実行されないので、欠陥の検出に要する時間が短縮される。 According to the second aspect of the present invention, since a relatively low accuracy alignment is not executed for a pair that does not necessarily require a relatively low accuracy alignment, the time required for detecting a defect is shortened.

請求項5ないし請求項10の発明によれば、相対的に低い精度の位置あわせに適するか否かが適切に判定されるので、相対的に低い精度の位置あわせが適切に実行される。 According to the fifth to tenth aspects of the present invention, since it is appropriately determined whether or not it is suitable for alignment with relatively low accuracy, alignment with relatively low accuracy is appropriately executed.

請求項11ないし請求項12の発明によれば、位置あわせのための演算を行う演算処理回路の規模が縮小されるので、欠陥検出装置が簡略化される。

According to the eleventh to twelfth aspects of the present invention, since the scale of the arithmetic processing circuit that performs the arithmetic operation for the alignment is reduced, the defect detection apparatus is simplified.

第1実施形態の位置あわせを説明する図である。It is a figure explaining the alignment of 1st Embodiment. 被検査画像が分割された状態を示す図である。It is a figure which shows the state by which the to-be-inspected image was divided | segmented. 参照画像が分割された状態を示す図である。It is a figure which shows the state by which the reference image was divided | segmented. 第1実施形態の欠陥検出装置のブロック図である。It is a block diagram of the defect detection apparatus of a 1st embodiment. 第1実施形態の位置あわせ部のブロック図である。It is a block diagram of the position alignment part of 1st Embodiment. 第2実施形態の位置あわせを説明する図である。It is a figure explaining the alignment of 2nd Embodiment. 第2実施形態の位置あわせ部のブロック図である。It is a block diagram of the position alignment part of 2nd Embodiment. 第3実施形態のグローバルアライメント要否判定装置のブロック図である。It is a block diagram of the global alignment necessity determination apparatus of 3rd Embodiment. 第3実施形態の群判定部の判定を説明する図である。It is a figure explaining the determination of the group determination part of 3rd Embodiment. グローバルアライメントに適する判定対象領域の例を示す図である。It is a figure which shows the example of the determination object area | region suitable for global alignment. グローバルアライメントに適する判定対象領域の自己相関性を説明する図である。It is a figure explaining the autocorrelation of the determination object area | region suitable for global alignment. グローバルアライメントに適さない判定対象領域の例を示す図である。It is a figure which shows the example of the determination object area | region which is not suitable for global alignment. グローバルアライメントに適さない判定対象領域の自己相関性を説明する図である。It is a figure explaining the autocorrelation of the determination object area | region which is not suitable for global alignment. 第4実施形態のグローバルアライメント要否判定装置のブロック図である。It is a block diagram of the global alignment necessity determination apparatus of 4th Embodiment. Prewittの微分オペレータを示す図である。It is a figure which shows the differential operator of Prewitt. 第5実施形態のグローバルアライメント適否判定装置のブロック図である。It is a block diagram of the global alignment suitability determination apparatus of 5th Embodiment. 判定対象領域がグローバルアライメントに適する場合に検出される直線を示す図である。It is a figure which shows the straight line detected when a determination object area | region is suitable for global alignment. 判定対象領域がグローバルアライメントに適さない場合に検出される直線を示す図である。It is a figure which shows the straight line detected when a determination object area | region is not suitable for global alignment. 第6実施形態のグローバルアライメント適否判定装置のブロック図である。It is a block diagram of the global alignment suitability determination apparatus of 6th Embodiment. 判定対象領域がグローバルアライメントに適する場合に導出されるヒストグラムを示す図である。It is a figure which shows the histogram derived when the determination object area | region is suitable for global alignment. 判定対象領域がグローバルアライメントに適さない場合に導出されるヒストグラムを示す図である。It is a figure which shows the histogram derived | led-out when the determination object area | region is not suitable for global alignment. 第7実施形態のグローバルアライメント適否判定装置のブロック図である。It is a block diagram of the global alignment suitability determination apparatus of 7th Embodiment. 判定対象領域がグローバルアライメントに適する場合に検出されるコーナーを示す図である。It is a figure which shows the corner detected when a determination object area | region is suitable for global alignment. 第8実施形態のグローバルアライメント適否判定装置のブロック図である。It is a block diagram of the global alignment suitability determination apparatus of 8th Embodiment. 判定対象領域がグローバルアライメントに適する場合に自己相関性の指標値の分布を示す図である。It is a figure which shows distribution of the index value of autocorrelation, when a determination object area | region is suitable for global alignment. 判定対象領域がグローバルアライメントに適さない場合に分布導出部により導出される自己相関性の指標値の分布を示す図である。It is a figure which shows distribution of the autocorrelation index value derived | led-out by a distribution derivation | leading-out part, when a determination object area | region is not suitable for global alignment. グローバルアライメントを説明する図である。It is a figure explaining global alignment. ファインアライメントを説明する図である。It is a figure explaining fine alignment. 第9実施形態の位置あわせ装置のブロック図である。It is a block diagram of the alignment apparatus of 9th Embodiment.

<1 第1実施形態>
第1実施形態は、被検査パターンを撮像した被検査画像Aと参照パターンを撮像した参照画像Bとを比較して被検査パターンに含まれる欠陥を検出する欠陥検出装置102に関する。
<1 First Embodiment>
The first embodiment relates to a defect detection apparatus 102 that detects a defect included in an inspected pattern by comparing an inspected image A obtained by imaging the inspected pattern with a reference image B obtained by imaging a reference pattern.

(第1実施形態の位置あわせの概略)
図1は、第1実施形態の被検査領域a1〜a12と参照領域b1〜b12との位置あわせを説明する図である。図2及び図3は、それぞれ、被検査画像Aが複数の被検査領域a1〜a12に分割された状態及び参照画像Bが複数の参照領域b1〜b12に分割された状態を示す。
(Outline of alignment of the first embodiment)
FIG. 1 is a diagram for explaining the alignment between the areas to be inspected a1 to a12 and the reference areas b1 to b12 according to the first embodiment. 2 and 3 respectively show a state in which the inspection image A is divided into a plurality of inspection regions a1 to a12 and a state in which the reference image B is divided into a plurality of reference regions b1 to b12.

第1実施形態では、図2に示すように、被検査画像Aが複数の被検査領域a1〜a12に分割され、図3に示すように、参照画像Bが複数の参照領域b1〜b12に分割され、比較される被検査領域aiと参照領域biとの複数の対(i=1,2,・・・,12)の各々について被検査領域aiと参照領域biとの位置あわせが行われた後に被検査領域aiと参照領域biとが比較され欠陥が検出される。   In the first embodiment, as shown in FIG. 2, the inspected image A is divided into a plurality of inspected areas a1 to a12, and as shown in FIG. 3, the reference image B is divided into a plurality of reference areas b1 to b12. Then, for each of a plurality of pairs (i = 1, 2,..., 12) of the inspected area ai and the reference area bi to be compared, the inspected area ai and the reference area bi are aligned. Later, the inspection area ai and the reference area bi are compared to detect a defect.

第1実施形態の位置あわせにあたっては、図1に示すように、比較される被検査領域aiと参照領域biとの複数の対の「一部」についてピクセル単位で被検査領域aiと参照領域biとの位置あわせを行うグローバルアライメントが実行される。また、比較される被検査領域aiと参照領域biとの複数の対の「全部」についてサブピクセル単位又はサブピクセルよりも粗い単位で被検査領域aiと参照領域biとの位置あわせを行うファインアライメントが実行される。つまり、第1の群に属する対については、グローバルアライメント及びファインアライメントの両方が実行される。しかし、第1の群に属さず第2の群に属する残余の対については、グローバルアライメントが実行されずファインアライメントのみが実行される。また、グローバルアライメントが実行されない第2の群に属する対には、直前に行われたグローバルアライメントの結果が援用される。   In the alignment of the first embodiment, as shown in FIG. 1, the “inspection area ai and the reference area bi” in pixel units for a “part” of a plurality of pairs of the inspection area ai and the reference area bi to be compared. A global alignment is performed to align with the. Further, fine alignment is performed in which a plurality of pairs of the inspected area ai and the reference area bi to be compared are aligned with the inspected area ai and the reference area bi in subpixel units or in units coarser than the subpixels. Is executed. That is, both global alignment and fine alignment are executed for pairs belonging to the first group. However, for the remaining pairs that do not belong to the first group but belong to the second group, the global alignment is not executed and only the fine alignment is executed. Moreover, the result of the global alignment performed immediately before is used for the pair which belongs to the 2nd group in which global alignment is not performed.

この結果、第1の群に属する対については、グローバルアライメントが実行され、グローバルアライメントが行われた状態を基準としてファインアライメントがさらに実行される。一方、第2の群に属する対については、直前に行われたグローバルアライメントの結果が援用され、直前に行われたグローバルアライメントの結果が援用された状態を基準としてファインアライメントが実行される。これにより、第2の群に属する対についてグローバルアライメントが実行されないので、欠陥の検出に要する時間が短くなる。また、第1の群に属する対についてのグローバルアライメントの結果が第2の群に属する対に援用されるので、欠陥の検出の精度の低下が少ない。   As a result, for the pairs belonging to the first group, global alignment is executed, and fine alignment is further executed on the basis of the state where the global alignment is performed. On the other hand, for the pairs belonging to the second group, the result of the global alignment performed immediately before is used, and the fine alignment is executed based on the state where the result of the global alignment performed immediately before is used. Thereby, since global alignment is not performed about the pair which belongs to the 2nd group, time required for detection of a defect becomes short. Moreover, since the result of the global alignment about the pair which belongs to the 1st group is used for the pair which belongs to the 2nd group, there is little fall of the precision of a defect detection.

なお、被検査画像A及び参照画像Bの分割数は必要に応じて増減される。また、第1の群及び第2の群に属する対は必要に応じて変更される。   Note that the number of divisions of the image A and the reference image B is increased or decreased as necessary. Further, the pairs belonging to the first group and the second group are changed as necessary.

(欠陥検出装置102の概略)
図4は、第1実施形態の欠陥検出装置102のブロック図である。図4の各ブロックは、専用のハードウエアを含んでもよいし、その機能の全部又は一部がコンピュータにプログラムを実行させることにより実現されてもよい。
(Outline of the defect detection apparatus 102)
FIG. 4 is a block diagram of the defect detection apparatus 102 according to the first embodiment. Each block in FIG. 4 may include dedicated hardware, or all or part of its functions may be realized by causing a computer to execute a program.

図4に示すように、欠陥検出装置102は、パターンを撮像する撮像部104と、被検査画像Aを複数の被検査領域a1〜a12に分割する被検査画像分割部106と、参照画像Bを複数の参照領域b1〜b12に分割する参照画像分割部108と、被検査領域aiと参照領域biとの位置あわせを行う位置あわせ部110と、被検査領域aiと参照領域biとの比較結果から欠陥を検出する欠陥検出部112と、を備える。   As shown in FIG. 4, the defect detection apparatus 102 includes an imaging unit 104 that captures a pattern, an inspection image dividing unit 106 that divides the inspection image A into a plurality of inspection regions a1 to a12, and a reference image B. From the comparison result between the reference image dividing unit 108 that divides the plurality of reference regions b1 to b12, the alignment unit 110 that aligns the inspection region ai and the reference region bi, and the inspection region ai and the reference region bi. A defect detection unit 112 that detects defects.

(撮像部104)
撮像部104は、被検査パターンを撮像して被検査画像Aを生成するとともに、参照パターンを撮像して参照画像Bを生成する。被検査画像Aは被検査画像分割部106に与えられ、参照画像Bは参照画像分割部108に与えられる。
(Imaging unit 104)
The imaging unit 104 captures an inspection pattern to generate an inspection image A, and also captures a reference pattern to generate a reference image B. The inspected image A is given to the inspected image dividing unit 106, and the reference image B is given to the reference image dividing unit 108.

(被検査画像分割部106及び参照画像分割部108)
被検査画像分割部106及び参照画像分割部108は、それぞれ、被検査画像A及び参照画像Bを水平方向及び垂直方向に規則的に分割する。水平方向及び垂直方向の分割数は被検査画像A及び参照画像Bで同じである。これにより、被検査領域aiと対応する参照領域biとの対について被検査領域aiと参照領域biとの位置あわせが実行され、被検査領域aiと参照領域biとが比較される。ただし、被検査領域aiと参照領域biとの位置あわせが実行され、被検査領域aiと参照領域biとが比較されるならば、被検査画像A及び参照画像Bは、どのように分割されてもよい。例えば、被検査画像A及び参照画像Bは、水平方向のみに分割されてもよいし、垂直方向のみに分割されてもよい。比較される被検査領域aiと参照領域biとの複数の対の各々は、位置あわせ部110に順次与えられる。
(Inspected image dividing unit 106 and reference image dividing unit 108)
The inspected image dividing unit 106 and the reference image dividing unit 108 regularly divide the inspected image A and the reference image B in the horizontal direction and the vertical direction, respectively. The number of divisions in the horizontal direction and the vertical direction is the same for the image A and the reference image B. As a result, the inspection area ai and the reference area bi are aligned with respect to the pair of the inspection area ai and the corresponding reference area bi, and the inspection area ai and the reference area bi are compared. However, if the inspection area ai and the reference area bi are aligned and the inspection area ai and the reference area bi are compared, how the inspection image A and the reference image B are divided. Also good. For example, the inspected image A and the reference image B may be divided only in the horizontal direction or may be divided only in the vertical direction. Each of a plurality of pairs of the inspected area ai and the reference area bi to be compared is sequentially given to the alignment unit 110.

(位置あわせ部110)
図5は、第1実施形態の位置あわせ部110のブロック図である。図5の各ブロックも、専用のハードウエアを含んでいてもよいし、その機能の全部又は一部がコンピュータにプログラムを実行させることにより実現されてもよい。
(Alignment unit 110)
FIG. 5 is a block diagram of the alignment unit 110 according to the first embodiment. Each block in FIG. 5 may also include dedicated hardware, or all or part of its functions may be realized by causing a computer to execute a program.

図5に示すように、位置あわせ部110は、比較される被検査領域aiと参照領域biとの対をグローバルアライメントが実行される第1の群とグローバルアライメントが実行されない第2の群とに分類する対分類部114と、グローバルアライメントを実行するグローバルアライメント実行部116と、ファインアライメントを実行するファインアライメント実行部118と、一の対についてのグローバルアライメントの実行結果を他の対に援用するグローバルアライメント実行結果援用部120と、を備える。   As shown in FIG. 5, the alignment unit 110 divides the pair of the region to be inspected ai and the reference region bi into a first group in which global alignment is performed and a second group in which global alignment is not performed. A pair classification unit 114 that classifies, a global alignment execution unit 116 that executes global alignment, a fine alignment execution unit 118 that executes fine alignment, and a global that uses the execution result of global alignment for one pair as another pair. An alignment execution result assistance unit 120.

対分類部114により第1の群に分類された対は、グローバルアライメント実行部116に与えられ、当該対についてグローバルアライメントが実行される。また、当該対は、グローバルアライメントが実行された後にファインアライメント実行部118に与えられ、当該対についてグローバルアライメントが実行された状態を基準としてファインアライメントが実行される。グローバルアライメント実行部116のグローバルアライメントで導出されたピクセル単位の位置ずれ量は、グローバルアライメント実行結果援用部120に与えられる。   The pairs classified into the first group by the pair classification unit 114 are given to the global alignment execution unit 116, and global alignment is executed for the pair. Further, the pair is given to the fine alignment execution unit 118 after the global alignment is executed, and the fine alignment is executed on the basis of the state where the global alignment is executed for the pair. The amount of positional deviation in units of pixels derived by the global alignment of the global alignment execution unit 116 is given to the global alignment execution result assisting unit 120.

一方、対分類部114により第2の群に分類された対は、グローバルアライメント実行結果援用部120に与えられ、グローバルアライメント実行部116から与えられた直前のグローバルアライメントで導出されたピクセル単位の位置ずれ量が当該対についてのピクセル単位の位置ずれ量として援用される。したがって、第2の群に属する対については、グローバルアライメントが実行されることなく、ピクセル単位の位置ずれ量が決まる。また、当該対は、ピクセル単位の位置ずれ量が援用された後にファインアライメント実行部118に与えられ、当該対について援用されたピクセル単位の位置ずれ量だけ被検査領域aiと参照領域biとが相対的に移動された状態を基準としてファインアライメントが実行される。   On the other hand, the pair classified into the second group by the pair classifying unit 114 is given to the global alignment execution result assisting unit 120, and the pixel unit position derived by the previous global alignment given from the global alignment executing unit 116 The shift amount is used as a positional shift amount in pixels for the pair. Therefore, for the pairs belonging to the second group, the amount of displacement in pixels is determined without performing global alignment. Further, the pair is given to the fine alignment execution unit 118 after the amount of displacement in units of pixels is used, and the inspected area ai and the reference region bi are relative to each other by the amount of position deviation in units of pixels used for the pair. Fine alignment is executed with reference to the moved state as a reference.

一の対についての位置あわせの処理の終了後は、位置あわせが実行されていない対が残っている限り、位置あわせがまだ実行されていない他の対について位置あわせが実行される。一の対についての位置あわせの処理を終了する前に他の対について位置あわせの処理を開始するパイプライン処理を行うことも望ましい。   After completion of the alignment process for one pair, as long as there are pairs for which alignment has not been performed, alignment is performed for other pairs for which alignment has not yet been performed. It is also desirable to perform pipeline processing for starting the alignment process for another pair before the alignment process for one pair is completed.

(欠陥検出部112)
欠陥検出部112は、ファインアライメントが行われた被検査領域aiと参照領域biとの対について被検査領域aiと参照領域biとを比較し欠陥を検出する。欠陥は、どのように検出されてもよいが、被検査領域aiと参照領域biの対応する2つの画素値の差分や比率を求めることにより行うことが典型的である。
(Defect detection unit 112)
The defect detection unit 112 detects a defect by comparing the inspection area ai and the reference area bi with respect to the pair of the inspection area ai and the reference area bi on which fine alignment has been performed. The defect may be detected in any way, but it is typically performed by obtaining a difference or ratio between two corresponding pixel values of the inspection area ai and the reference area bi.

(2段階の位置あわせ)
上述の説明では、ピクセル単位で位置あわせを行うグローバルアライメントの後にサブピクセル単位で位置あわせを行うファインアライメントが実行される場合に言及したが、より一般的には、相対的に低い精度の位置あわせの後に相対的に高いか又は同じ精度の位置あわせが実行される2段階の位置あわせが実行される場合に本発明は適用される。
(2-step alignment)
In the above description, the case where fine alignment in which alignment is performed in units of sub-pixels is performed after global alignment in which alignment is performed in units of pixels is described, but more generally, alignment with relatively low accuracy is performed. The present invention is applied in the case where a two-stage alignment is performed in which a relatively high or the same accuracy of the alignment is performed after.

(パターン)
欠陥の検出の対象となるパターンは、どのようなパターンであってもよいが、フラットディスプレイパネル、プリント基板、リードフレーム、フォトマスク等のパターンが典型的である。
(pattern)
The pattern for which the defect is to be detected may be any pattern, but patterns such as a flat display panel, a printed board, a lead frame, and a photomask are typical.

<2 第2実施形態>
第2実施形態は、第1実施形態の位置あわせ部110に代えて採用される位置あわせ部210に関する。
<2 Second Embodiment>
The second embodiment relates to an alignment unit 210 that is employed in place of the alignment unit 110 of the first embodiment.

(第2実施形態の位置あわせの概略)
図6は、第2実施形態の被検査領域a1〜a12と参照領域b1〜b12との位置あわせを説明する図である。
(Outline of alignment of the second embodiment)
FIG. 6 is a diagram for explaining alignment between the inspected areas a1 to a12 and the reference areas b1 to b12 according to the second embodiment.

第2実施形態の位置あわせにあたっては、図6に示すように、第1実施形態の位置あわせと同じく、比較される被検査領域aiと参照領域biとの複数の対の「一部」についてグローバルアライメントが実行されるが、第1実施形態の位置あわせと異なり、比較される被検査領域aiと参照領域biとの複数の対の「全部」ではなく「一部」についてファインアライメントが実行される。   In the alignment of the second embodiment, as shown in FIG. 6, as in the alignment of the first embodiment, the “partial” of a plurality of pairs of the inspected area ai and the reference area bi to be compared is globally Although alignment is performed, unlike the alignment of the first embodiment, fine alignment is performed on “part” rather than “all” of a plurality of pairs of the inspected area ai and the reference area bi to be compared. .

つまり、図6に示すように、第1の群に属する対については、グローバルアライメントが実行される。しかし、第1の群に属さず第2の群に属する残余の対については、グローバルアライメントが行われない。また、グローバルアライメントが行われない第2の群に属する対については、直前に行われたグローバルアライメントの結果が援用される。   That is, as shown in FIG. 6, global alignment is executed for pairs belonging to the first group. However, global alignment is not performed for the remaining pairs that do not belong to the first group but belong to the second group. Moreover, the result of the global alignment performed immediately before is used about the pair which belongs to the 2nd group in which global alignment is not performed.

さらに、図6に示すように、第3の群に属する対については、ファインアライメントが実行される。しかし、第3の群に属さず第4の群に属する残余の対については、ファインアライメントが実行されない。また、ファインアライメントが実行されない第4の群に属する対については、直前に行われたファインアライメントの結果が援用される。この結果、第1の群に属する対については、グローバルアライメントが行われ、グローバルアライメントが実行された状態を基準として、ファインアライメントがさらに実行されるか(第3の群に属する対)、又は、直前に実行されたファインアライメントの結果が援用される(第4の群に属する対)。一方、第2の群に属する対については、直前に実行されたグローバルアライメントの結果が援用され、直前に実行されたグローバルアライメントの結果が援用された状態を基準として、ファインアライメントが実行されるか(第3の群に属する対)、又は、直前に実行されたファインアライメントの結果が援用される(第4の群に属する対)。このような位置あわせによれば、第2の群に属する対についてグローバルアライメントが実行されないので、欠陥の検出に要する時間が短くなる。また、第1の群に属する対についてのグローバルアライメントの結果が第2の群に属する対に援用されるので、欠陥の検出の精度の低下が少ない。加えて、第4の群に属する対についてファインアライメントが実行されないので、欠陥の検出に要する時間が短くなる。また、第3の群に属する対についてのファインアライメントの結果が第4の群に属する対に援用されるので、欠陥の検出の精度の低下が少ない。このようなファインアライメントの省略は、サブピクセル単位の位置ずれ量に大きな変動がないことが期待される場合に実行される。   Further, as shown in FIG. 6, fine alignment is executed for pairs belonging to the third group. However, fine alignment is not executed for the remaining pairs that do not belong to the third group and belong to the fourth group. Moreover, the result of the fine alignment performed immediately before is used about the pair which belongs to the 4th group in which fine alignment is not performed. As a result, for the pairs belonging to the first group, whether global alignment is performed and fine alignment is further performed on the basis of the state where the global alignment is performed (pairs belonging to the third group), or The result of the fine alignment performed immediately before is used (a pair belonging to the fourth group). On the other hand, for the pairs belonging to the second group, is the result of the global alignment executed immediately before being used and whether the fine alignment is executed with reference to the state where the result of the global alignment executed immediately before is used? (A pair belonging to the third group) or the result of the fine alignment performed immediately before is used (a pair belonging to the fourth group). According to such alignment, since the global alignment is not executed for the pairs belonging to the second group, the time required for detecting the defect is shortened. Moreover, since the result of the global alignment about the pair which belongs to the 1st group is used for the pair which belongs to the 2nd group, there is little fall of the precision of a defect detection. In addition, since fine alignment is not executed for the pairs belonging to the fourth group, the time required for defect detection is shortened. In addition, since the fine alignment result for the pairs belonging to the third group is used for the pairs belonging to the fourth group, there is little decrease in the accuracy of defect detection. Such omission of fine alignment is executed when it is expected that there is no large variation in the amount of positional deviation in units of subpixels.

なお、第1の群ないし第4の群に属する対は必要に応じて変更される。   The pairs belonging to the first group to the fourth group are changed as necessary.

(位置あわせ部210)
図7は、第2実施形態の位置あわせ210のブロック図である。図7の各ブロックも、専用のハードウエアを含んでいてもよいし、その機能の全部又は一部がコンピュータにプログラムを実行させることにより実現されてもよい。
(Alignment unit 210)
FIG. 7 is a block diagram of the alignment 210 of the second embodiment. Each block in FIG. 7 may also include dedicated hardware, or all or part of its functions may be realized by causing a computer to execute a program.

図7に示すように、位置あわせ部210は、第1実施形態の位置あわせ部110と同じく、対分類部214と、グローバルアライメント実行部216と、グローバルアライメント実行結果援用部220と、ファインアライメント実行部218とを備えるが、第1実施形態の位置あわせ部110と異なり、一の対についてのファインアライメントの実行結果を他の対に援用するファインアライメント実行結果援用部222も備える。   As shown in FIG. 7, the alignment unit 210 is the same as the alignment unit 110 of the first embodiment. The pair classification unit 214, the global alignment execution unit 216, the global alignment execution result assistance unit 220, and the fine alignment execution are performed. However, unlike the alignment unit 110 of the first embodiment, a fine alignment execution result assisting unit 222 that assists the execution result of fine alignment for one pair with another pair is also provided.

対分類部214により第1の群に分類された対は、グローバルアライメント実行部216に与えられ、当該対についてグローバルアライメントが実行される。グローバルアライメント実行部216のグローバルアライメントで導出されたピクセル単位の位置ずれ量は、グローバルアライメント実行結果援用部220に与えられる。   The pairs classified into the first group by the pair classification unit 214 are given to the global alignment execution unit 216, and global alignment is executed for the pair. The positional deviation amount in pixel units derived by the global alignment of the global alignment execution unit 216 is given to the global alignment execution result assisting unit 220.

一方、対分類部214により第2の群に分類された対は、グローバルアライメント実行結果援用部220に与えられ、グローバルアライメント実行部216から与えられた直前のグローバルアライメントで導出されたピクセル単位の位置ずれ量が当該対についてのピクセル単位の位置ずれ量として援用される。   On the other hand, the pair classified into the second group by the pair classifying unit 214 is given to the global alignment execution result assisting unit 220, and is a pixel unit position derived by the previous global alignment given from the global alignment executing unit 216. The shift amount is used as a positional shift amount in pixels for the pair.

グローバルアライメントが実行された後又はピクセル単位の位置ずれ量が援用された後に、第3の群に属する対は、ファインアライメント実行部218に与えられ、当該対についてグローバルアライメントが実行された状態又は直前に実行されたグローバルアライメントの結果が援用された状態を基準としてファインアライメントが実行される。ファインアライメント実行部218のファインアライメントで導出されたサブピクセル単位の位置ずれ量は、ファインアライメント実行結果援用部222に与えられる。   After global alignment is performed or after a positional shift amount in units of pixels is used, the pairs belonging to the third group are given to the fine alignment execution unit 218, and the state in which global alignment has been performed for the pair or immediately before Fine alignment is executed on the basis of the state where the result of the global alignment executed in step 1 is used. The amount of positional deviation in units of sub-pixels derived by the fine alignment of the fine alignment execution unit 218 is given to the fine alignment execution result assistance unit 222.

一方、グローバルアライメントが実行された後又はピクセル単位の位置ずれ量が援用された後に、第4の群に属する対は、ファインアライメント実行結果援用部222に与えられ、ファインアライメント実行部218から与えられた直前のファインアライメントで導出されたサブピクセル単位の位置ずれ量が当該対についてのサブピクセル単位の位置ずれ量として援用される。したがって、第4の群に属する対については、ファインアライメントが実行されることなく、サブピクセル単位の位置ずれ量が決まる。   On the other hand, after global alignment is performed or after a positional deviation amount in units of pixels is used, pairs belonging to the fourth group are given to the fine alignment execution result assistance unit 222 and given from the fine alignment execution unit 218. The positional deviation amount in subpixel units derived by the fine alignment just before is used as the positional deviation amount in subpixel units for the pair. Accordingly, for the pairs belonging to the fourth group, the amount of positional deviation in sub-pixel units is determined without performing fine alignment.

一の対についての位置あわせの処理の終了後は、位置あわせが実行されていない対が残っている限り、位置あわせがまだ実行されていない他の対について位置あわせが実行される。一の対についての位置あわせの処理を終了する前に他の対について位置あわせの処理を開始するパイプライン処理を行うことも望ましい。   After completion of the alignment process for one pair, as long as there are pairs for which alignment has not been performed, alignment is performed for other pairs for which alignment has not yet been performed. It is also desirable to perform pipeline processing for starting the alignment process for another pair before the alignment process for one pair is completed.

<3 第3実施形態>
第1実施形態の位置あわせ又は第2実施形態の位置あわせを行う場合、グローバルアライメントが実行される第1の群に属する被検査領域aiと参照領域biとの対は、手動で決定されるか、被検査画像A又は参照画像Bをプリスキャンして自動で決定される。しかし、グローバルアライメントに適さない対についてグローバルアライメントが実行されたり、グローバルアライメントが必要な対についてグローバルアライメントが実行されなかったりすると、位置あわせが適切に行われず、欠陥の検出の精度が低下する。
<3 Third Embodiment>
When the alignment of the first embodiment or the alignment of the second embodiment is performed, is the pair of the inspection area ai and the reference area bi belonging to the first group where the global alignment is performed manually determined? The image A to be inspected or the reference image B is pre-scanned and automatically determined. However, if global alignment is performed for a pair that is not suitable for global alignment, or if global alignment is not performed for a pair that requires global alignment, the alignment is not performed properly, and the accuracy of defect detection decreases.

第3実施形態は、この問題を解決するために提供される、グローバルアライメントの要否を判定するグローバルアライメント要否判定装置324に関する。第3実施形態のグローバルアライメント要否判定装置324は、第1実施形態の対分類部114又は第2実施形態の対分類部214に実装される。   The third embodiment relates to a global alignment necessity determination device 324 that is provided to solve this problem and determines whether or not global alignment is necessary. The global alignment necessity determination device 324 of the third embodiment is mounted on the pair classification unit 114 of the first embodiment or the pair classification unit 214 of the second embodiment.

図8は、第3実施形態のグローバルアライメント要否判定装置324のブロック図である。図8の各ブロックも、専用のハードウエアを含んでいてもよいし、その機能の全部又は一部がコンピュータにプログラムを実行させることにより実現されてもよい。   FIG. 8 is a block diagram of the global alignment necessity determination device 324 according to the third embodiment. Each block in FIG. 8 may also include dedicated hardware, or all or part of its functions may be realized by causing a computer to execute a program.

図8に示すように、グローバルアライメント要否判定装置324は、比較される被検査領域aiと参照領域biとの対の各々がグローバルアライメントに適するか否かを順次に判定する適否判定部326と、比較される被検査領域aiと参照領域biとの対が属する群を判定する群判定部328と、を備える。   As shown in FIG. 8, the global alignment necessity determination device 324 includes a suitability determination unit 326 that sequentially determines whether or not each pair of the region to be inspected ai and the reference region bi to be compared is suitable for global alignment. A group determination unit 328 that determines a group to which a pair of the inspected area ai and the reference area bi to be compared belongs.

図9は、群判定部328の判定を説明する遷移図である。図9のノードN102,N104に記載されている「適」及び「不適」は、適否判定部326の判定である。矢印AR102,AR104,AR106,AR108に添えて記載されている「グローバルアライメント+ファインアライメント」及び「ファインアライメント」は、当該矢印AR102,AR104,AR106,AR108が出るノードN102,N104に記載されている適否判定部326の判定が群判定部328の判定の対象となっている対のひとつ前の対に対してなされ、当該矢印AR102,AR104,AR106,AR108が入るノードN102,N104に記載されている適否判定部326の判定が群判定部328の判定の対象となっている対に対してなされたときに実行される位置あわせの内容である。   FIG. 9 is a transition diagram for explaining the determination by the group determination unit 328. “Appropriate” and “Inappropriate” described in the nodes N102 and N104 in FIG. “Global alignment + fine alignment” and “fine alignment” described along with the arrows AR102, AR104, AR106, AR108 are appropriateness described in the nodes N102, N104 from which the arrows AR102, AR104, AR106, AR108 exit. The determination by the determination unit 326 is performed on the previous pair of the pair that is the target of the determination by the group determination unit 328, and the suitability described in the nodes N102 and N104 in which the arrows AR102, AR104, AR106, and AR108 enter This is the content of alignment executed when the determination by the determination unit 326 is performed on the pair that is the target of the determination by the group determination unit 328.

図9に示すように、適否判定部326によりグローバルアライメントに適さないと判定された対は、第2の群に属すると判定され、当該対については、グローバルアライメントが行われずファインアライメントのみが実行される(矢印AR102,AR106)。また、適否判定部326によりグローバルアライメントに適さないと判定された対のひとつ後にグローバルアライメントに適すると判定された対は、第1の群に属すると判定され、当該対については、グローバルアライメントが実行された後にファインアライメントが実行される(矢印AR104)。これにより、グローバルアライメントに適さない対についてグローバルアライメントが実行されず、グローバルアライメントが必要な対についてグローバルアライメントが実行されるので、欠陥の検出の精度が向上する。   As shown in FIG. 9, the pair determined not to be suitable for the global alignment by the suitability determining unit 326 is determined to belong to the second group, and the global alignment is not performed on the pair and only the fine alignment is performed. (Arrows AR102 and AR106). In addition, a pair determined to be suitable for global alignment after one of the pairs determined to be unsuitable for global alignment by the suitability determination unit 326 is determined to belong to the first group, and global alignment is executed for the pair. After that, fine alignment is executed (arrow AR104). Thereby, global alignment is not executed for pairs that are not suitable for global alignment, and global alignment is executed for pairs that require global alignment, so that the accuracy of defect detection is improved.

さらに、適否判定部326によりグローバルアライメントに適すると判定された対のひとつ後にグローバルアライメントに適すると判定された対は、第1の群及び第2の群のいずれに属すると判定されてもよいが、第2の群に属すると判定されることが望ましく、当該対については、グローバルアライメントが行われずファインアライメントのみが実行されることが望ましい(矢印AR108)。これにより、グローバルアライメントが必ずしも必要でない対についてグローバルアライメントが行われないので、欠陥の検出に要する時間が短縮される。   Furthermore, a pair determined to be suitable for global alignment after one of the pairs determined to be suitable for global alignment by the suitability determination unit 326 may be determined to belong to either the first group or the second group. It is desirable to determine that the pair belongs to the second group, and it is desirable that only the fine alignment is performed for the pair without performing the global alignment (arrow AR108). As a result, since global alignment is not performed for pairs that do not necessarily require global alignment, the time required for defect detection is reduced.

なお、上述したように、適否判定部326によりグローバルアライメントに適さないと判定された対は、第2の群に属すると判定されるのが原則であるが、グローバルアライメントが一度も実行されておらず援用するグローバルアライメントの実行結果が存在しない場合は、ファインアライメントを実行することができない。そのため、そのような場合は、当該対の処理を後回しにし、後の対についてグローバルアライメントが実行されてからファインアライメントを実行する例外の処理が実行される。   Note that, as described above, in principle, a pair determined to be unsuitable for global alignment by the suitability determination unit 326 is determined to belong to the second group, but global alignment has never been executed. Fine alignment cannot be executed when there is no execution result of the global alignment that is supported. Therefore, in such a case, the processing of the pair is postponed, and after the global alignment is executed for the subsequent pair, the exception processing for executing the fine alignment is executed.

<4 第4実施形態>
第3実施形態の適否判定部326では、比較される被検査領域aiと参照領域biとの対の各々がグローバルアライメントに適するか否かは、被検査画像A又は参照画像Bを参照して自動で判定される。ただし、その判定が適切に行われないと、グローバルアライメントが適切に実行されない。
<4 Fourth Embodiment>
In the suitability determination unit 326 of the third embodiment, whether each pair of the inspected area ai and the reference area bi to be compared is suitable for global alignment is automatically referred to the inspected image A or the reference image B. It is determined by. However, if the determination is not properly performed, the global alignment is not properly performed.

第4実施形態は、この問題を解決するために提供される、比較される被検査領域aiと参照領域biとの対の各々がグローバルアライメントに適するか否かを判定するグローバルアライメント適否判定装置430に関する。グローバルアライメント適否判定装置430は、第3実施形態の適否判定部326に実装される。   In the fourth embodiment, a global alignment suitability determination device 430 is provided to solve this problem. The global alignment suitability determination device 430 determines whether each of the pair of the region to be inspected ai and the reference region bi to be compared is suitable for global alignment. About. The global alignment suitability determination device 430 is mounted on the suitability determination unit 326 of the third embodiment.

図10(a)〜(g)は、グローバルアライメントに適する判定対象領域の例を示す図である。図11は、グローバルアライメントに適する判定対象領域の自己相関性を説明する図である。   FIGS. 10A to 10G are diagrams illustrating examples of determination target regions suitable for global alignment. FIG. 11 is a diagram for explaining autocorrelation of a determination target region suitable for global alignment.

図10(a)〜図10(c)のようにエッジが閉じた閉図形のパターンが含まれる場合、図10(d)〜図10(f)のようにエッジがコーナーを有するパターンが含まれる場合、図10(g)のようにエッジが曲線となっているパターンが含まれる場合等は、判定対象領域はグローバルアライメントに適する。これは、図11に示すように、判定対象領域JRを移動する前の画像(以下では、「移動前画像」という)BIと判定対象領域JRを移動した後の画像(以下では「移動後画像」という)AIとが、判定対象領域JRの移動方向MDによらず、類似しないからである。すなわち、判定対象領域JRの自己相関性が任意の方向に対して低いからである。   When a closed figure pattern with closed edges is included as shown in FIGS. 10A to 10C, patterns with edges having corners are included as shown in FIGS. 10D to 10F. In this case, the determination target region is suitable for global alignment when a pattern having a curved edge as shown in FIG. As shown in FIG. 11, an image before moving the determination target area JR (hereinafter referred to as “pre-movement image”) BI and an image after moving the determination target area JR (hereinafter “post-movement image”). This is because the AI is not similar regardless of the movement direction MD of the determination target area JR. That is, the autocorrelation of the determination target region JR is low with respect to an arbitrary direction.

図12(a)〜(h)は、グローバルアライメントに適さない判定対象領域の例を示す図である。図13は、グローバルアライメントに適さない判定対象領域の自己相関性を説明する図である。   12A to 12H are diagrams illustrating examples of determination target regions that are not suitable for global alignment. FIG. 13 is a diagram illustrating the autocorrelation of a determination target region that is not suitable for global alignment.

図12(a)のようにパターンが含まれない場合、図12(b)〜(c)のようにエッジの大部分が垂直方向に延在するパターンのみからなる場合、図13(d)〜(f)に示すようにエッジの大部分が水平方向に延在するパターンのみからなる場合、図12(g)〜(h)のようにエッジの大部分が特定の斜め方向に延在するパターンのみからなる場合等は、判定対象領域はグローバルアライメントに適さない。これは、図13に示すように、移動前画像BIと移動後画像AIとが、判定対象領域JRの移動方向MDによっては、類似するからである。すなわち、判定対象領域JRの自己相関性が特定の方向に対して高いからである。   When a pattern is not included as shown in FIG. 12A, when most of the edges are composed of a pattern extending in the vertical direction as shown in FIGS. 12B to 12C, FIG. When most of the edges consist only of a pattern extending in the horizontal direction as shown in (f), a pattern in which most of the edges extend in a specific oblique direction as shown in FIGS. For example, the determination target area is not suitable for global alignment. This is because, as shown in FIG. 13, the pre-movement image BI and the post-movement image AI are similar depending on the movement direction MD of the determination target region JR. That is, this is because the autocorrelation of the determination target region JR is high in a specific direction.

図14は、第4実施形態のグローバルアライメント適否判定装置430のブロック図である。図14の各ブロックも、専用のハードウエアを含んでいてもよいし、その機能の全部又は一部がコンピュータにプログラムを実行させることにより実現されてもよい。   FIG. 14 is a block diagram of the global alignment suitability determination device 430 of the fourth embodiment. Each block in FIG. 14 may also include dedicated hardware, or all or part of its functions may be realized by causing a computer to execute a program.

図14に示すように、グローバルアライメント適否判定装置430は、判定対象領域に含まれるエッジを検出するエッジ検出部432と、エッジの平均的な接線方向を導出する平均接線方向導出部434と、特定の方向に対する判定対象領域の自己相関性を評価する自己相関性評価部436と、対がグローバルアライメントに適するか否かを判定する判定部438と、を備える。「判定対象領域」は、被検査領域ai及び参照領域biの片方又は両方である。   As illustrated in FIG. 14, the global alignment suitability determination device 430 includes an edge detection unit 432 that detects an edge included in the determination target region, an average tangent direction derivation unit 434 that derives an average tangent direction of the edge, and a specification. An autocorrelation evaluation unit 436 that evaluates the autocorrelation of the determination target region with respect to the direction of the image, and a determination unit 438 that determines whether the pair is suitable for global alignment. The “determination target area” is one or both of the inspection area ai and the reference area bi.

エッジ検出部432は、判定対象領域を構成する複数の画素PX(x,y)の各々における水平方向(x方向)の濃度値I(x,y)の微分値dx及び垂直方向(y方向)の濃度値I(x,y)の微分値dyを導出する。微分値は、どのように導出してもよいが、例えば、図15(a)〜(b)に示すPrewittの微分オペレータを微分値の導出の対象となる画素を中心とする水平方向3画素、垂直方向3画素の正方形の領域に適用することにより導出する。なお、Prewittの微分オペレータの適用には、ノイズの平滑化の効果が高いという利点があるが、このことは、Sobel、Roberts等の微分オペレータの適用による導出や単純な微分演算による導出を妨げない。   The edge detection unit 432 includes the differential value dx of the density value I (x, y) in the horizontal direction (x direction) and the vertical direction (y direction) in each of the plurality of pixels PX (x, y) constituting the determination target region. A differential value dy of the density value I (x, y) is derived. The differential value may be derived in any way. For example, the Prewitt differential operator shown in FIGS. 15A to 15B is set to 3 pixels in the horizontal direction centering on the pixel from which the differential value is derived, Derived by applying to a square area of 3 pixels in the vertical direction. Note that the application of the Prewitt differential operator has the advantage of a high noise smoothing effect, but this does not preclude derivation by application of a differential operator such as Sobel, Roberts, or simple differential operation. .

また、エッジ検出部432は、微分値dxを水平成分、微分値dyを垂直成分とする法線ベクトルd=(dx,dy)の大きさ|d|を式(1)にしたがって導出し、大きさ|d|が閾値を超える画素をエッジを構成する画素として検出する。   Further, the edge detection unit 432 derives the magnitude | d | of the normal vector d = (dx, dy) having the differential value dx as the horizontal component and the differential value dy as the vertical component according to the equation (1), Pixels for which | d | exceeds a threshold are detected as pixels constituting the edge.

Figure 0005442305
Figure 0005442305

このエッジの検出は、法線ベクトルの大きさ|d|は、フラット部において小さくなり、エッジ部において大きくなることを利用している。   This edge detection utilizes the fact that the normal vector magnitude | d | becomes smaller in the flat portion and larger in the edge portion.

平均接線方向導出部434は、エッジ検出部432により検出されたエッジの平均的な接線方向θを導出する。平均的な接線方向θは、どのように導出してもよいが、ここでは、「生データベクトル合算法」により導出する。「生データベクトル合算方法」では、ベクトルの角度を導出してから導出した角度を合算するのではなく、ベクトルを合算してから合算したベクトルの角度を導出する。   The average tangent direction deriving unit 434 derives the average tangent direction θ of the edge detected by the edge detecting unit 432. The average tangential direction θ may be derived in any way, but here it is derived by the “raw data vector summing method”. In the “raw data vector summing method”, the angle of the vector derived is not summed but the angle of the vector derived is summed, and the angle of the vector summed is derived.

「生データベクトル合算法」による平均的な接線方向θの導出にあたっては、まず、エッジを構成する複数の画素の各々におけるエッジの法線ベクトルd1,d2,・・・,diを式(2)にしたがって合算する。 When the average tangential θ derived by the "raw data vector summing method", first, the normal vector d 1 of the edge in each of the plurality of pixels constituting the edge, d 2, · · ·, a d i Formula Add up according to (2).

Figure 0005442305
Figure 0005442305

式(2)にしたがった法線ベクトルの合算は、1番目からj−1番目までの法線ベクトルd1,d2,・・・,dj-1を合算したベクトルmdj-1にj番目の法線ベクトルdj又はj番目の法線ベクトルdjを180°反転したベクトル−djを加えることを繰り返すことにより実行される。ただし、md1=d1である。 The sum of the normal vectors according to the equation (2) is obtained by adding j to a vector md j−1 obtained by summing the first to j−1 normal vectors d 1 , d 2 ,. It is performed by repeating the addition of th normal vector d j or j-th normal vector d j a 180 ° reversed vector -d j. However, md 1 = d 1 .

法線ベクトル+djを加えるのは、ベクトルmdj-1と法線ベクトルdjとのなす角がπ/2又はπ/2より大きくベクトルmdj-1と法線ベクトルdjとの内積mdj-1・djが0又は正の場合である。ベクトル−djを加えるのは、ベクトルmdj-1と法線ベクトルdjとのなす角がπ/2ラジアンより大きくベクトルmdj-1と法線ベクトルdjとの内積mdj-1・djが負の場合である。このような合算によれば、微妙な濃度値の違いによるベクトルの反転により法線ベクトルd1,d2,・・・,diの合算結果が0ベクトルに近くなることが回避される。このような合算は、導出したい平均的な接線方向は、ベクトルの方向そのものではなく、ベクトルの傾きであることにより許容される。また、このような合算によれば、強いエッジの寄与が大きくなり弱いエッジの寄与が小さくなるので、誤って検出されたエッジの影響が小さくなる。 Add normal vector + d j is the inner product of the vector md j-1 and the normal vector d j larger vector than the angle formed [pi / 2 or [pi / 2 with md j-1 and the normal vector d j md This is a case where j−1 · d j is 0 or positive. Add vector -d j is the inner product md j-1 · a vector md j-1 and the normal vector d j greatly angle formed than [pi / 2 radians vector md j-1 and the normal vector d j This is the case when dj is negative. According to such summation, it is avoided that the sum of the normal vectors d 1 , d 2, ..., D i is close to the 0 vector due to the inversion of the vector due to a subtle difference in density value. Such summation is permitted by the fact that the average tangential direction to be derived is not the vector direction itself but the vector slope. Further, according to such summation, the contribution of strong edges becomes large and the contribution of weak edges becomes small, so that the influence of erroneously detected edges becomes small.

また、平均接線方向導出部434は、法線ベクトルd1,d2,・・・,di を合算することにより導出された合算ベクトルmdiの水平成分mdix及び垂直成分mdiyから式(3)にしたがって平均的な接線方向θを導出する。接線方向θは、合算ベクトルmdiに垂直なベクトルと水平方向とのなす角であり、−π/2からπ/2までの値をとる。 The average tangential derivation unit 434, normal vector d 1, d 2, · · ·, a horizontal component md ix and vertical components md iy summation vector md i derived by summing the d i formula ( The average tangential direction θ is derived according to 3). Tangential theta, an angle between a vector perpendicular and horizontal to the summing vector md i, takes values from - [pi] / 2 to [pi / 2.

Figure 0005442305
Figure 0005442305

自己相関性評価部436は、平均接線方向導出部434により導出された平均的な接線方向θに対する判定対象領域の自己相関性を評価する。自己相関性は、どのように評価してもよいが、例えば、移動前画像と移動後画像との重なり部分における濃度値の差により評価する。   The autocorrelation evaluation unit 436 evaluates the autocorrelation of the determination target region with respect to the average tangent direction θ derived by the average tangent direction derivation unit 434. The autocorrelation may be evaluated in any way. For example, the autocorrelation is evaluated based on a difference in density value in an overlapping portion between the pre-movement image and the post-movement image.

自己相関性の評価にあたっては、移動前画像を構成する画素PX(x,y)における濃度値I(x,y)と移動後画像を構成する画素PX’(x,y)を中心とするゆすらせ範囲内にある複数の画素PX’(x+i,y+j)の濃度値I’(x+i,y+j)の各々との二乗差sdij(x,y)が式(4)にしたがって導出され、複数の二乗差sdij(x,y)のうちの最小二乗差SD(x,y)が式(5)にしたがって導出される。このように濃度値I(x,y)との差がとられる濃度値I’(x+i,y+j)の位置をゆすらせることにより、計算精度や量子化誤差により後述する二乗差総和SSDが大きくなることが抑制される。 In evaluating the autocorrelation, the density value I (x, y) in the pixel PX (x, y) constituting the pre-movement image and the pixel PX ′ (x, y) constituting the post-movement image are centered. A square difference sd ij (x, y) with each of the density values I ′ (x + i, y + j) of the plurality of pixels PX ′ (x + i, y + j) within the marginal range is derived according to the equation (4). The least square difference SD (x, y) of the square differences sd ij (x, y) is derived according to equation (5). By shifting the position of the density value I ′ (x + i, y + j) from which the difference from the density value I (x, y) is taken in this way, the sum of squared differences SSD (to be described later) increases due to calculation accuracy and quantization error. It is suppressed.

Figure 0005442305
Figure 0005442305

Figure 0005442305
Figure 0005442305

式(4)及び式(5)のx及びyは、それぞれ、水平方向及び垂直方向の画素の座標である。式(4)及び式(5)のi及びjは、それぞれ、水平方向及び垂直方向のゆすらせ量であり、−1,0,+1のいずれかの値をとる。   In equations (4) and (5), x and y are the coordinates of the pixels in the horizontal and vertical directions, respectively. In equations (4) and (5), i and j are the amounts of displacement in the horizontal direction and the vertical direction, respectively, and take a value of -1, 0, or +1.

さらに、重なり部分に含まれる全ての画素についての最小二乗差SD(x,y)の二乗差総和SSDが式(6)にしたがって導出される。   Further, the sum of square differences SSD of the least square differences SD (x, y) for all the pixels included in the overlapping portion is derived according to the equation (6).

Figure 0005442305
Figure 0005442305

判定対象領域を接線方向θに距離kだけ移動するベクトルsは、式(7)にしたがって導出される。   A vector s that moves the determination target region in the tangential direction θ by the distance k is derived according to Equation (7).

Figure 0005442305
Figure 0005442305

ベクトルsの大きさkは、判定対象領域を移動する量が数ピクセル以上となるように大きくすることが望ましい。これにより、移動前画像と移動後画像とが近くなりすぎ、自己相関性が小さいにもかかわらず二乗差総和SSDが小さくなることが抑制される。また、複数の大きさk1,k2を用いて二乗差総和SSDを導出し、最も大きい二乗差総和SSDを採用することも望ましい。これにより、濃度値I(x,y)に周期性がある場合に判定対象領域を移動する量が周期に一致することにより自己相関性が小さいにもかかわらず二乗差総和SSDが小さくなることが抑制される。複数の大きさk1,k2の比k1:k2は、互いに素な整数m,nの比m:nと等しいことが望ましい(k1,k2=m:n)。これにより、複数の大きさk1,k2の両方について判定対象領域を移動する量が周期に一致することが回避される。 The size k of the vector s is desirably increased so that the amount of movement in the determination target region is several pixels or more. As a result, the pre-movement image and the post-movement image are too close to each other, and the square difference sum SSD is suppressed from becoming small despite the small autocorrelation. It is also desirable to derive a square difference sum SSD using a plurality of magnitudes k 1 and k 2 and adopt the largest square difference sum SSD. As a result, when the density value I (x, y) has periodicity, the amount of movement in the determination target region matches the period, so that the square difference sum SSD is reduced even though the autocorrelation is small. It is suppressed. The ratio k 1 : k 2 of the plurality of magnitudes k 1 and k 2 is preferably equal to the ratio m: n of the prime integers m and n (k 1 , k 2 = m: n). Thereby, it is avoided that the amount of movement of the determination target region for both the plurality of sizes k 1 and k 2 matches the cycle.

判定部438は、エッジ検出部432によりエッジが検出されない場合に対がグローバルアライメントに適さないと判定する。これにより、図12(a)に示すような場合にグローバルアライメントが行われない。また、判定部438は、二条差総和SSDが閾値を下回り自己相関性が基準よりも高い場合に対がグローバルアライメントに適さないと判定する。これにより、図12(b)〜(g)に示すような場合にグローバルアライメントが行われない。また、判定部438は、これら以外の場合に対がグローバルアライメントに適すると判定する。   The determination unit 438 determines that the pair is not suitable for global alignment when the edge detection unit 432 does not detect an edge. Thereby, global alignment is not performed in the case as shown in FIG. In addition, the determination unit 438 determines that the pair is not suitable for global alignment when the double difference total SSD is below the threshold value and the autocorrelation is higher than the reference. Thereby, global alignment is not performed in the case as shown in FIGS. In addition, the determination unit 438 determines that the pair is suitable for global alignment in other cases.

このようなグローバルアライメント適否判定処理によれば、グローバルアライメントに適するか否かが適切に判定されるので、グローバルアライメントが適切に実行される。   According to such a global alignment suitability determination process, it is appropriately determined whether or not it is suitable for the global alignment, and therefore the global alignment is appropriately executed.

<5 第5実施形態>
第5実施形態は、第4実施形態のグローバルアライメント適否判定装置430に代えて採用されるグローバルアライメント適否判定装置530に関する。
<5 Fifth Embodiment>
The fifth embodiment relates to a global alignment suitability determination device 530 employed in place of the global alignment suitability determination device 430 of the fourth embodiment.

図16は、第5実施形態のグローバルアライメント適否判定装置530のブロック図である。   FIG. 16 is a block diagram of the global alignment suitability determination device 530 of the fifth embodiment.

図16に示すように、グローバルアライメント適否判定装置530は、判定対象領域に含まれるエッジを検出するエッジ検出部532と、画素により構成される直線を検出する直線検出部540と、直線の方向を導出する方向導出部542と、対がグローバルアライメントに適するか否かを判定する判定部538と、を備える。   As illustrated in FIG. 16, the global alignment suitability determination device 530 includes an edge detection unit 532 that detects an edge included in a determination target region, a straight line detection unit 540 that detects a straight line including pixels, and a straight line direction. A direction deriving unit 542 for deriving and a determining unit 538 for determining whether or not the pair is suitable for global alignment.

エッジ検出部532は、第4実施形態のエッジ検出部432と同じく、エッジを検出する。   The edge detection unit 532 detects edges in the same manner as the edge detection unit 432 of the fourth embodiment.

直線検出部540は、エッジ検出部532により検出されたエッジを構成する画素により構成される直線を一般的なハフ変換等により検出する。   The straight line detection unit 540 detects a straight line constituted by pixels constituting the edge detected by the edge detection unit 532 by a general Hough transform or the like.

方向導出部542は、直線検出部540により検出された直線の方向を導出する。   The direction deriving unit 542 derives the direction of the straight line detected by the straight line detecting unit 540.

図17(a)〜(b)は、判定対象領域がグローバルアライメントに適する場合に直線検出部540により検出される直線Lを示す図である。また、図18(a)〜(b)は、判定対象領域がグローバルアライメントに適さない場合に直線検出部540により検出される直線Lを示す図である。判定対象領域がグローバルアライメントに適する場合は、図17に示すように、検出される直線Lの方向は非一様であり、判定対象領域がグローバルアライメントに適さない場合は、図18に示すように、検出される直線Lの方向は一様である。   FIGS. 17A to 17B are diagrams illustrating a straight line L detected by the straight line detection unit 540 when the determination target region is suitable for global alignment. 18A to 18B are diagrams illustrating a straight line L detected by the straight line detection unit 540 when the determination target region is not suitable for global alignment. When the determination target region is suitable for global alignment, the direction of the detected straight line L is non-uniform as shown in FIG. 17, and when the determination target region is not suitable for global alignment, as shown in FIG. The direction of the detected straight line L is uniform.

判定部538は、第4実施形態の判定部438と同じく、エッジ検出部532によりエッジが検出されない場合に対がグローバルアライメントに適さないと判定する。さらに、判定部538は、第4実施形態の判定部438とは異なり、上述の直線の一様性の変化を利用して、方向導出部542により導出された方向の一様性が基準よりも高い場合に対がグローバルアライメントに適さないと判定する。また、判定部538は、これら以外の場合に対がグローバルアライメントに適すると判定する。   Similar to the determination unit 438 of the fourth embodiment, the determination unit 538 determines that the pair is not suitable for global alignment when no edge is detected by the edge detection unit 532. Furthermore, unlike the determination unit 438 of the fourth embodiment, the determination unit 538 uses the above-described change in straight line uniformity, and the uniformity of the direction derived by the direction deriving unit 542 is higher than the reference. If it is high, it is determined that the pair is not suitable for global alignment. In addition, the determination unit 538 determines that the pair is suitable for global alignment in other cases.

このようなグローバルアライメント適否判定装置530によっても、グローバルアライメントに適するか否かが適切に判定されるので、グローバルアライメントが適切に実行される。   Such a global alignment suitability determination device 530 also appropriately determines whether or not it is suitable for global alignment, so that global alignment is appropriately executed.

<6 第6実施形態>
第6実施形態は、第4実施形態のグローバルアライメント適否判定装置430に代えて採用されるグローバルアライメント適否判定装置630に関する。
<6 Sixth Embodiment>
The sixth embodiment relates to a global alignment suitability determination device 630 employed in place of the global alignment suitability determination device 430 of the fourth embodiment.

図19は、第6実施形態のグローバルアライメント適否判定装置630のブロック図である。   FIG. 19 is a block diagram of a global alignment suitability determination device 630 according to the sixth embodiment.

図19に示すように、グローバルアライメント適否判定装置630は、判定対象領域に含まれるエッジを検出するエッジ検出部632と、エッジの接線方向のヒストグラムを導出するヒストグラム導出部644と、対がグローバルアライメントに適するか否かを判定する判定部638と、を備える。   As illustrated in FIG. 19, the global alignment suitability determination device 630 includes an edge detection unit 632 that detects an edge included in the determination target region, a histogram derivation unit 644 that derives a histogram in the tangential direction of the edge, and a pair that is a global alignment. And a determination unit 638 for determining whether or not it is suitable.

エッジ検出部632は、第4実施形態のエッジ検出部432と同じく、エッジを検出する。   The edge detection unit 632 detects edges in the same manner as the edge detection unit 432 of the fourth embodiment.

ヒストグラム導出部644は、エッジ検出部632により検出されたエッジの接線方向のヒストグラムを導出する。   The histogram deriving unit 644 derives a histogram in the tangential direction of the edge detected by the edge detecting unit 632.

図20は、判定対象領域がグローバルアライメントに適する場合にヒストグラム導出部644により導出されるヒストグラムを示す図である。また、図21は、判定対象領域がグローバルアライメントに適さない場合にヒストグラム導出部644により導出されるヒストグラムを示す図である。判定対象領域がグローバルアライメントに適する場合は、図20に示すように、ヒストグラムに2個以上のピークが存在し、判定対象領域がグローバルアライメントに適さない場合は、ヒストグラムに1個のピークのみが存在する。   FIG. 20 is a diagram illustrating a histogram derived by the histogram deriving unit 644 when the determination target region is suitable for global alignment. FIG. 21 is a diagram illustrating a histogram derived by the histogram deriving unit 644 when the determination target region is not suitable for global alignment. When the determination target region is suitable for global alignment, as shown in FIG. 20, there are two or more peaks in the histogram, and when the determination target region is not suitable for global alignment, only one peak exists in the histogram. To do.

判定部638は、第4実施形態の判定部438と同じく、エッジ検出部632によりエッジが検出されない場合に対がグローバルアライメントに適さないと判定する。さらに、判定部638は、第4実施形態の判定部438とは異なり、上述のヒストグラムに存在するピークの数の変化を利用して、ヒストグラム導出部644により導出されたヒストグラムに存在するピークの数が1個のみである場合に対がグローバルアライメントに適さないと判定する。また、判定部638は、これら以外の場合に対がグローバルアライメントに適すると判定する。   Similar to the determination unit 438 of the fourth embodiment, the determination unit 638 determines that the pair is not suitable for global alignment when no edge is detected by the edge detection unit 632. Furthermore, unlike the determination unit 438 of the fourth embodiment, the determination unit 638 uses the change in the number of peaks present in the above-described histogram, and the number of peaks present in the histogram derived by the histogram deriving unit 644. If there is only one, it is determined that the pair is not suitable for global alignment. In addition, the determination unit 638 determines that the pair is suitable for global alignment in other cases.

このようなグローバルアライメント適否判定装置630によっても、グローバルアライメントに適するか否かが適切に判定されるので、グローバルアライメントが適切に実行される。   Such a global alignment suitability determination device 630 also appropriately determines whether or not it is suitable for global alignment, so that global alignment is appropriately executed.

<7 第7実施形態>
第7実施形態は、第4実施形態のグローバルアライメント適否判定装置430に代えて採用されるグローバルアライメント適否判定装置730に関する。
<7 Seventh Embodiment>
The seventh embodiment relates to a global alignment suitability determination device 730 employed in place of the global alignment suitability determination device 430 of the fourth embodiment.

図22は、第7実施形態のグローバルアライメント適否判定装置730のブロック図である。   FIG. 22 is a block diagram of the global alignment suitability determination device 730 according to the seventh embodiment.

図22に示すように、グローバルアライメント適否判定装置730は、判定対象領域に含まれるエッジを検出するエッジ検出部732と、判定対象領域に含まれるコーナーを検出するコーナー検出部746と、対がグローバルアライメントに適するか否かを判定する判定部738と、を備える。   As illustrated in FIG. 22, the global alignment suitability determination device 730 includes an edge detection unit 732 that detects an edge included in the determination target region, a corner detection unit 746 that detects a corner included in the determination target region, and a global pair And a determination unit 738 for determining whether or not it is suitable for alignment.

エッジ検出部732は、第4実施形態のエッジ検出部432と同じく、エッジを検出する。   The edge detection unit 732 detects an edge in the same manner as the edge detection unit 432 of the fourth embodiment.

コーナー検出部746は、判定対象領域に含まれるコーナーを一般的なHarrisオペレータ、SUSANオペレータ等により検出する。   The corner detection unit 746 detects a corner included in the determination target region by a general Harris operator, a SUSAN operator, or the like.

図23(a)〜(b)は、判定対象領域がグローバルアライメントに適する場合にコーナー検出部732により検出されるコーナーCを示す図である。判定対象領域がグローバルアライメントに適する場合は、図23に示すように、1個以上のコーナーが検出されるが、判定対象領域がグローバルアライメントに適さない場合は、コーナーCは検出されない。   FIGS. 23A and 23B are diagrams illustrating a corner C detected by the corner detection unit 732 when the determination target region is suitable for global alignment. When the determination target region is suitable for global alignment, as shown in FIG. 23, one or more corners are detected. However, when the determination target region is not suitable for global alignment, corner C is not detected.

判定部738は、第4実施形態の判定部438と同じく、エッジ検出部732によりエッジが検出されない場合に対がグローバルアライメントに適さないと判定する。さらに、判定部738は、第4実施形態の判定部438とは異なり、上述のコーナーの検出の有無を利用して、コーナー検出部746によりコーナーが検出されない場合に対がグローバルアライメントに適さないと判定する。また、判定部738は、これら以外の場合に対がグローバルアライメントに適すると判定する。   Similar to the determination unit 438 of the fourth embodiment, the determination unit 738 determines that the pair is not suitable for global alignment when no edge is detected by the edge detection unit 732. Further, unlike the determination unit 438 of the fourth embodiment, the determination unit 738 uses the above-described presence / absence of corner detection, and if the corner is not detected by the corner detection unit 746, the pair is not suitable for global alignment. judge. In addition, the determination unit 738 determines that the pair is suitable for global alignment in other cases.

このようなグローバルアライメント適否判定装置730によっても、グローバルアライメントに適するか否かが適切に判定されるので、グローバルアライメントが適切に実行される。   Such a global alignment suitability determination device 730 also appropriately determines whether or not it is suitable for global alignment, so that global alignment is appropriately executed.

<8 第8実施形態>
第8実施形態は、第4実施形態のグローバルアライメント適否判定装置430に代えて採用されるグローバルアライメント適否判定装置830に関する。
<8 Eighth Embodiment>
The eighth embodiment relates to a global alignment suitability determination device 830 employed in place of the global alignment suitability determination device 430 of the fourth embodiment.

図24は、第8実施形態のグローバルアライメント適否判定装置830のブロック図である。   FIG. 24 is a block diagram of the global alignment suitability determination device 830 of the eighth embodiment.

図24に示すように、グローバルアライメント適否判定装置830は、判定対象領域の移動先をゆすらせ範囲内でゆすらせたときの自己相関性の分布を導出する分布導出部848と、対がグローバルアライメントに適するか否かを判定する判定部838と、を備える。   As shown in FIG. 24, the global alignment suitability determination device 830 includes a distribution derivation unit 848 for deriving an autocorrelation distribution when the movement destination of the determination target region is swayed within a range, and the pair is a global alignment. And a determination unit 838 for determining whether or not it is suitable.

第8実施形態が第4実施形態と異なるのは、エッジの接線方向から自己相関性が高い方向を求めるのではなく、分布導出部848が、判定対象領域の移動先をゆすらせ範囲内でゆすらせて、移動量ごとに差分値SSDのような自己相関性の指標値を導出し、判定部838が、その分布が特定の方向性を持つか否かにより特定の方向に対する自己相関性があるかどうかを判定することにある。   The eighth embodiment is different from the fourth embodiment in that the distribution derivation unit 848 swayes the movement destination of the determination target region within the range, instead of obtaining a direction with high autocorrelation from the tangential direction of the edge. Thus, an autocorrelation index value such as the difference value SSD is derived for each movement amount, and the determination unit 838 has autocorrelation with respect to a specific direction depending on whether or not the distribution has a specific directionality. It is to determine whether or not.

図25は、判定対象領域がグローバルアライメントに適する場合に分布導出部848により導出される自己相関性の指標値の分布を示す図である。図26は、判定対象領域がグローバルアライメントに適さない場合に分布導出部848により導出される自己相関性の指標値の分布を示す図である。図25及び図26においては、暗部ほど自己相関性が高く、明部ほど自己相関性が低くなっている。判定対象領域がグローバルアライメントに適する場合は、図25に示すように、自己相関性の指標値の分布には異方性がない。判定対象領域がグローバルアライメントに適さない場合は、図26に示すように、自己相関性の指標値の分布には異方性がある。   FIG. 25 is a diagram showing a distribution of autocorrelation index values derived by the distribution deriving unit 848 when the determination target region is suitable for global alignment. FIG. 26 is a diagram illustrating a distribution of autocorrelation index values derived by the distribution deriving unit 848 when the determination target region is not suitable for global alignment. In FIGS. 25 and 26, the dark area has higher autocorrelation, and the bright area has lower autocorrelation. When the determination target region is suitable for global alignment, the distribution of the autocorrelation index value has no anisotropy, as shown in FIG. When the determination target region is not suitable for global alignment, the distribution of autocorrelation index values is anisotropic as shown in FIG.

判定部838は、上述の自己相関性の分布の異方性の有無を利用して、分布導出部により導出された自己相関性の指標値の分布が基準を満たす方向性を有する場合に対が相対的に低い精度の位置あわせに適さないと判定する。方向性を有するか否かは、自己相関性の指標値の分布に対して、第5実施形態と同様に、エッジを構成する画素により構成される直線の方向が一様であるか否かを調べるか、第6実施形態と同様に、エッジの接線方向のヒストグラムに存在するピークが1個のみであるか否かを調べるか、第7実施形態と同様に、コーナーが検出されないか否かを調べることにより、特定される。   The determination unit 838 uses the presence / absence of the anisotropy of the autocorrelation distribution described above to determine whether the pair of autocorrelation index values derived by the distribution deriving unit has a direction that satisfies the criterion. It is determined that it is not suitable for alignment with relatively low accuracy. Whether or not it has directionality is determined by whether or not the direction of a straight line constituted by pixels constituting an edge is uniform, as in the fifth embodiment, with respect to the distribution of index values of autocorrelation. Check whether or not there is only one peak in the histogram in the tangential direction of the edge as in the sixth embodiment, or whether or not a corner is detected as in the seventh embodiment. It is specified by examining.

このようなグローバルアライメント適否判定装置830によっても、グローバルアライメントに適するか否かが適切に判定されるので、グローバルアライメントが適切に実行される。 Such a global alignment suitability determination device 830 also appropriately determines whether or not it is suitable for global alignment, so that global alignment is appropriately executed.

<9 第9実施形態>
第1実施形態の位置あわせ又は第2実施形態の位置あわせを行うにあたって被検査領域aiと参照領域biとの相関をハードウエアの演算処理回路により導出する場合、グローバルアライメントを行う範囲を拡大したり、ファインアライメントを行う精度を向上したりすると、演算処理回路の規模が大きくなる。
<9 Ninth Embodiment>
When the correlation between the inspected area ai and the reference area bi is derived by the hardware processing circuit when performing the alignment of the first embodiment or the alignment of the second embodiment, the range for performing the global alignment is expanded, If the precision of fine alignment is improved, the scale of the arithmetic processing circuit increases.

例えば、被検査領域aiと参照領域biとの位置関係を示す図27に示すように、グローバルアライメントを水平方向及び垂直方向に±P画素広がる範囲内で行うと、(2P+1)2個の加算器が必要になる。 For example, as shown in FIG. 27 showing the positional relationship between the region to be inspected ai and the reference region bi, if global alignment is performed within a range that extends ± P pixels in the horizontal and vertical directions, (2P + 1) 2 adders Is required.

また、被検査領域aiと参照領域biとの位置関係を示す図28に示すように、ファインアライメントを1/P画素単位で行うと、1画素をP画素に増やす補間処理が行われ、(2P+1)2個の加算器が必要になる。 Further, as shown in FIG. 28 showing the positional relationship between the region to be inspected ai and the reference region bi, when fine alignment is performed in units of 1 / P pixel, interpolation processing for increasing one pixel to P pixels is performed, and (2P + 1) ) Two adders are required.

第9実施形態は、この問題を解決するために提供される、位置あわせ装置950に関する。位置あわせ装置950は、第1実施形態のグローバルアライメント実行部116及びファインアライメント実行部118並びに第2実施形態のグローバルアライメント実行部216及びファインアライメント実行部218の全部又は一部に実装される。なお、グローバルアライメント実行部116及びファインアライメント実行部118でハードウエアの演算処理回路を共用してもよいし、グローバルアライメント実行部216及びファインアライメント実行部218でハードウエアの演算処理回路を共用してもよい。   The ninth embodiment relates to an alignment apparatus 950 provided to solve this problem. The alignment device 950 is mounted on all or part of the global alignment execution unit 116 and fine alignment execution unit 118 of the first embodiment and the global alignment execution unit 216 and fine alignment execution unit 218 of the second embodiment. The global alignment execution unit 116 and the fine alignment execution unit 118 may share a hardware arithmetic processing circuit, or the global alignment execution unit 216 and the fine alignment execution unit 218 share a hardware arithmetic processing circuit. Also good.

図29は、第9実施形態の位置あわせ装置950のブロック図である。図29の演算処理回路952は、全部又は一部がハードウエアであるが、演算処理分割部954は、専用のハードウエアを含んでいてもよいし、その機能の全部又は一部がコンピュータにプログラムを実行させることにより実現されてもよい。   FIG. 29 is a block diagram of an alignment apparatus 950 according to the ninth embodiment. The arithmetic processing circuit 952 in FIG. 29 is entirely or partially hardware, but the arithmetic processing dividing unit 954 may include dedicated hardware, or all or part of its functions may be programmed in the computer. It may be realized by executing.

図29に示すように、位置あわせ装置950は、位置あわせのための演算処理を行う演算処理回路952と位置あわせのための演算を複数回に分割して前記演算処理回路に行わせる演算分割部954とを備える。   As shown in FIG. 29, the alignment device 950 includes an arithmetic processing circuit 952 that performs arithmetic processing for alignment, and an arithmetic dividing unit that divides the arithmetic for alignment into a plurality of times and causes the arithmetic processing circuit to perform the arithmetic processing circuit. 954.

これにより、位置あわせのための演算処理を行う演算処理回路の規模を縮小するので、欠陥検出装置102が簡略化される。   As a result, the scale of the arithmetic processing circuit that performs arithmetic processing for alignment is reduced, so that the defect detection apparatus 102 is simplified.

<10 その他>
この発明は詳細に説明されたが、上述の説明は、全ての局面において例示であり、この発明はその説明内容に限定されない。例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得る。
<10 Others>
Although the present invention has been described in detail, the above description is illustrative in all aspects, and the present invention is not limited to the description. Innumerable variations not illustrated may be envisaged without departing from the scope of the present invention.

102 欠陥検出装置
106 被検査画像分割部
108 参照画像分割部
110,210 位置あわせ部
112 欠陥検出部
114,214 対分類部
116,216 グローバルアライメント実行部
118,218 ファインアライメント実行部
120,220 グローバルアライメント実行結果援用部
222 ファインアライメント実行結果援用部
DESCRIPTION OF SYMBOLS 102 Defect detection apparatus 106 Inspected image division part 108 Reference image division part 110,210 Position alignment part 112 Defect detection part 114,214 Pair classification part 116,216 Global alignment execution part 118,218 Fine alignment execution part 120,220 Global alignment Execution result assistance part 222 Fine alignment execution result assistance part

Claims (14)

第1のパターンを撮像した第1の画像と第2のパターンを撮像した第2の画像とを比較して第1のパターンに含まれる欠陥を検出する欠陥検出装置であって、
第1の画像を複数の第1の領域に分割する第1の画像分割部と、
第2の画像を複数の第2の領域に分割する第2の画像分割部と、
比較される第1の領域と第2の領域との複数の対のうちの第1の群に属する対について相対的に低い精度で第1の領域と第2の領域との位置あわせを実行する第1の位置あわせ部と、
比較される第1の領域と第2の領域との複数の対のうちの第1の群に属さず第2の群に属する残余の対に前記第1の位置あわせ部による第1の群に属する対についての位置あわせの結果を援用する第1の援用部と、
比較される第1の領域と第2の領域との複数の対について前記第1の位置あわせ部により位置あわせが実行された状態又は前記第1の援用部により位置あわせの結果が援用された状態を基準として相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行する第2の位置あわせ部と、
比較される第1の領域と第2の領域との複数の対について第1の領域と第2の領域との比較結果から欠陥を検出する欠陥検出部と、
を備え、
前記第2の位置あわせ部は、
比較される第1の領域と第2の領域との複数の対のうちの第3の群に属する対について相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行し、
前記欠陥検出装置は、
比較される第1の領域と第2の領域との複数の対のうちの第3の群に属さず第4の群に属する残余の対に前記第2の位置あわせ部による第3の群に属する対についての位置あわせの結果を援用する第2の援用部、
をさらに備える欠陥検出装置。
A defect detection device that detects a defect included in a first pattern by comparing a first image obtained by imaging a first pattern with a second image obtained by imaging a second pattern,
A first image dividing unit for dividing the first image into a plurality of first regions;
A second image dividing unit for dividing the second image into a plurality of second regions;
Alignment between the first region and the second region is performed with relatively low accuracy with respect to pairs belonging to the first group among a plurality of pairs of the first region and the second region to be compared. A first alignment section;
Of the plurality of pairs of the first region and the second region to be compared, the remaining pair belonging to the second group and not belonging to the first group is added to the first group by the first alignment unit. A first assistance unit that uses the result of the alignment for the pair to which it belongs;
A state in which alignment is executed by the first alignment unit for a plurality of pairs of the first region and the second region to be compared, or a state in which the alignment result is incorporated by the first assistance unit A second alignment unit that performs alignment between the first region and the second region with relatively high or the same accuracy with respect to
A defect detection unit for detecting a defect from a comparison result between the first region and the second region for a plurality of pairs of the first region and the second region to be compared;
With
The second alignment unit is
Alignment of the first region and the second region with a relatively high or the same accuracy with respect to a pair belonging to the third group among a plurality of pairs of the first region and the second region to be compared Run
The defect detection apparatus includes:
Of the plurality of pairs of the first region and the second region to be compared, the remaining pair belonging to the fourth group and not belonging to the third group is added to the third group by the second alignment unit. A second aid part that uses the result of the alignment for the pair to which it belongs,
A defect detection apparatus further comprising:
第1のパターンを撮像した第1の画像と第2のパターンを撮像した第2の画像とを比較して第1のパターンに含まれる欠陥を検出する欠陥検出装置であって、A defect detection device that detects a defect included in a first pattern by comparing a first image obtained by imaging a first pattern with a second image obtained by imaging a second pattern,
第1の画像を複数の第1の領域に分割する第1の画像分割部と、A first image dividing unit for dividing the first image into a plurality of first regions;
第2の画像を複数の第2の領域に分割する第2の画像分割部と、A second image dividing unit for dividing the second image into a plurality of second regions;
比較される第1の領域と第2の領域との複数の対のうちの第1の群に属する対について相対的に低い精度で第1の領域と第2の領域との位置あわせを実行する第1の位置あわせ部と、Alignment between the first region and the second region is performed with relatively low accuracy with respect to pairs belonging to the first group among a plurality of pairs of the first region and the second region to be compared. A first alignment section;
比較される第1の領域と第2の領域との複数の対のうちの第1の群に属さず第2の群に属する残余の対に前記第1の位置あわせ部による第1の群に属する対についての位置あわせの結果を援用する第1の援用部と、Of the plurality of pairs of the first region and the second region to be compared, the remaining pair belonging to the second group and not belonging to the first group is added to the first group by the first alignment unit. A first assistance unit that uses the result of the alignment for the pair to which it belongs;
比較される第1の領域と第2の領域との複数の対について前記第1の位置あわせ部により位置あわせが実行された状態又は前記第1の援用部により位置あわせの結果が援用された状態を基準として相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行する第2の位置あわせ部と、A state in which alignment is executed by the first alignment unit for a plurality of pairs of the first region and the second region to be compared, or a state in which the alignment result is incorporated by the first assistance unit A second alignment unit that performs alignment between the first region and the second region with relatively high or the same accuracy with respect to
比較される第1の領域と第2の領域との複数の対について第1の領域と第2の領域との比較結果から欠陥を検出する欠陥検出部と、A defect detection unit for detecting a defect from a comparison result between the first region and the second region for a plurality of pairs of the first region and the second region to be compared;
を備え、With
比較される第1の領域と第2の領域との複数の対の各々が相対的に低い精度の位置あわせに適するか否かを順次に判定する適否判定部と、A suitability determination unit that sequentially determines whether each of the plurality of pairs of the first region and the second region to be compared is suitable for alignment with relatively low accuracy;
前記適否判定部により相対的に低い精度の位置あわせに適さないと判定された対を第2の群に属すると判定し、相対的に低い精度の位置あわせに適さないと判定された対のひとつ後に相対的に低い精度の位置あわせに適すると判定された対を第1の群に属すると判定する群判定部と、One of the pairs determined to be unsuitable for relatively low accuracy alignment by determining that the pair determined to be unsuitable for relatively low accuracy alignment by the suitability determining unit belongs to the second group. A group determination unit that determines that a pair that is later determined to be suitable for relatively low-precision alignment belongs to the first group;
をさらに備え、Further comprising
前記群判定部は、The group determination unit
前記適否判定部により相対的に低い精度の位置あわせに適すると判定された対のひとつ後に相対的に低い精度の位置あわせに適すると判定された対を第2の群に属すると判定する、Determining that the pair determined to be suitable for relatively low precision alignment after the pair determined to be suitable for relatively low precision alignment by the suitability determining unit belongs to the second group;
欠陥検出装置。Defect detection device.
請求項2の欠陥検出装置において、The defect detection apparatus according to claim 2.
前記第2の位置あわせ部は、The second alignment unit is
比較される第1の領域と第2の領域との複数の対の全部について相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行する、Performing alignment of the first region and the second region with relatively high or the same accuracy for all of the plurality of pairs of the first region and the second region to be compared;
欠陥検出装置。Defect detection device.
請求項2の欠陥検出装置において、The defect detection apparatus according to claim 2.
前記第2の位置あわせ部は、The second alignment unit is
比較される第1の領域と第2の領域との複数の対のうちの第3の群に属する対について相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行し、Alignment of the first region and the second region with a relatively high or the same accuracy with respect to a pair belonging to the third group among a plurality of pairs of the first region and the second region to be compared Run
前記欠陥検出装置は、The defect detection apparatus includes:
比較される第1の領域と第2の領域との複数の対のうちの第3の群に属さず第4の群に属する残余の対に前記第2の位置あわせ部による第3の群に属する対についての位置あわせの結果を援用する第2の援用部、Of the plurality of pairs of the first region and the second region to be compared, the remaining pair belonging to the fourth group and not belonging to the third group is added to the third group by the second alignment unit. A second aid part that uses the result of the alignment for the pair to which it belongs,
をさらに備える欠陥検出装置。A defect detection apparatus further comprising:
請求項2ないし請求項4のいずれかの欠陥検出装置において、The defect detection apparatus according to any one of claims 2 to 4,
前記適否判定部は、The suitability determination unit
第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるエッジを検出するエッジ検出部と、An edge detection unit that detects an edge included in the determination target region that is one or both of the first region and the second region;
前記エッジ検出部によりエッジが検出されない場合に対が相対的に精度が低い位置あわせに適さないと判定する判定部と、A determination unit that determines that a pair is not suitable for alignment with relatively low accuracy when an edge is not detected by the edge detection unit;
を備える欠陥検出装置。A defect detection apparatus comprising:
請求項2ないし請求項4のいずれかの欠陥検出装置において、The defect detection apparatus according to any one of claims 2 to 4,
前記適否判定部は、The suitability determination unit
第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるエッジを検出するエッジ検出部と、An edge detection unit that detects an edge included in the determination target region that is one or both of the first region and the second region;
前記エッジ検出部により検出されたエッジの平均的な接線方向を導出する平均接線方向導出部と、An average tangential direction deriving unit for deriving an average tangential direction of the edges detected by the edge detection unit;
前記平均接線方向導出部により導出された接線方向に対する判定対象領域の自己相関性を評価する自己相関性評価部と、An autocorrelation evaluating unit that evaluates the autocorrelation of the determination target region with respect to the tangential direction derived by the average tangential direction deriving unit;
前記自己相関性導出部により導出された自己相関性が基準よりも高い場合に対が相対的に精度が低い位置あわせに適さないと判定する判定部と、A determination unit that determines that the pair is not suitable for alignment with relatively low accuracy when the autocorrelation derived by the autocorrelation deriving unit is higher than a reference;
を備える欠陥検出装置。A defect detection apparatus comprising:
請求項2ないし請求項4のいずれかの欠陥検出装置において、The defect detection apparatus according to any one of claims 2 to 4,
前記適否判定部は、The suitability determination unit
第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるエッジを検出するエッジ検出部と、An edge detection unit that detects an edge included in the determination target region that is one or both of the first region and the second region;
前記エッジ検出部により検出されたエッジを構成する画素により構成される直線を検出する直線検出部と、A straight line detection unit for detecting a straight line constituted by pixels constituting the edge detected by the edge detection unit;
前記直線検出部により検出された直線の方向を導出する方向導出部と、A direction deriving unit for deriving the direction of the straight line detected by the straight line detecting unit;
前記方向導出部により導出された方向の一様性が基準よりも高い場合に対が相対的に低い精度の位置あわせに適さないと判定する判定部と、A determination unit that determines that the pair is not suitable for alignment with relatively low accuracy when the uniformity of the direction derived by the direction deriving unit is higher than a reference;
を備える欠陥検出装置。A defect detection apparatus comprising:
請求項2ないし請求項4のいずれかの欠陥検出装置において、The defect detection apparatus according to any one of claims 2 to 4,
前記適否判定部は、The suitability determination unit
第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるエッジを検出するエッジ検出部と、An edge detection unit that detects an edge included in the determination target region that is one or both of the first region and the second region;
前記エッジ検出部により検出されたエッジの接線方向のヒストグラムを導出するヒストグラム導出部と、A histogram derivation unit for deriving a histogram in the tangential direction of the edge detected by the edge detection unit;
前記ヒストグラム導出部により導出されたヒストグラムに存在するピークの数が1個のみである場合に対が相対的に低い精度の位置あわせに適さないと判定する判定部と、A determination unit that determines that a pair is not suitable for alignment with relatively low accuracy when the number of peaks present in the histogram derived by the histogram deriving unit is only one;
を備える欠陥検出装置。A defect detection apparatus comprising:
請求項2ないし請求項4のいずれかの欠陥検出装置において、
前記適否判定部は、
第1の領域又は第2の領域の片方又は両方である判定対象領域に含まれるコーナーを検出するコーナー検出部と、
前記コーナー検出部によりコーナーが検出されない場合に対が相対的に低い精度の位置あわせに適さないと判定する判定部と、
を備える欠陥検出装置。
The defect detection apparatus according to any one of claims 2 to 4 ,
The suitability determination unit
A corner detection unit that detects a corner included in the determination target region that is one or both of the first region and the second region;
A determination unit that determines that a pair is not suitable for alignment with relatively low accuracy when a corner is not detected by the corner detection unit;
A defect detection apparatus comprising:
請求項2ないし請求項4のいずれかの欠陥検出装置において、The defect detection apparatus according to any one of claims 2 to 4,
前記適否判定部は、The suitability determination unit
第1の領域又は第2の領域の片方又は両方である判定対象領域の移動先をゆすらせ範囲内でゆすらせたときの自己相関性の分布を導出する分布導出部と、A distribution deriving unit for deriving an autocorrelation distribution when the movement destination of the determination target region that is one or both of the first region and the second region is swung within the range;
前記分布導出部により導出された分布が基準を満たす方向性を有する場合に対が相対的に低い精度の位置あわせに適さないと判定する判定部と、A determination unit that determines that the pair is not suitable for alignment with relatively low accuracy when the distribution derived by the distribution deriving unit has a direction that satisfies a criterion;
を備える欠陥検出装置。A defect detection apparatus comprising:
請求項1ないし請求項10のいずれかの欠陥検出装置において、The defect detection apparatus according to any one of claims 1 to 10,
前記第1の位置あわせ部は、The first alignment unit includes:
位置あわせのための演算を行う演算処理回路と、An arithmetic processing circuit for performing an arithmetic operation for alignment;
位置あわせのための演算を複数回に分割して前記演算処理回路に行わせる演算分割部と、A calculation dividing unit for dividing the calculation for alignment into a plurality of times and causing the calculation processing circuit to perform the calculation;
を備える欠陥検出装置。A defect detection apparatus comprising:
請求項1ないし請求項10のいずれかの欠陥検出装置において、The defect detection apparatus according to any one of claims 1 to 10,
前記第2の位置あわせ部は、The second alignment unit is
位置あわせのための演算を行う演算処理回路と、An arithmetic processing circuit for performing an arithmetic operation for alignment;
位置あわせのための演算を複数回に分割して前記演算処理回路に行わせる演算分割部と、A calculation dividing unit for dividing the calculation for alignment into a plurality of times and causing the calculation processing circuit to perform the calculation;
を備える欠陥検出装置。A defect detection apparatus comprising:
第1のパターンを撮像した第1の画像と第2のパターンを撮像した第2の画像とを比較して第1のパターンに含まれる欠陥を検出する欠陥検出方法であって、
(a) 第1の画像を複数の第1の領域に分割する工程と、
(b) 第2の画像を複数の第2の領域に分割する工程と、
(c) 比較される第1の領域と第2の領域との複数の対のうちの第1の群に属する対について相対的に低い精度で第1の領域と第2の領域との位置あわせを実行する工程と、
(d) 比較される第1の領域と第2の領域との複数の対のうちの第1の群に属さず第2の群に属する残余の対に前記工程(c)による第1の群に属する対についての位置あわせの結果を援用する工程と、
(e) 比較される第1の領域と第2の領域との複数の対について前記工程(c)により位置あわせが実行された状態又は前記工程(d)により位置あわせの結果が援用された状態を基準として相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行する工程と、
(f) 比較される第1の領域と第2の領域との複数の対について第1の領域と第2の領域との比較結果から欠陥を検出する工程と、
備え、
前記工程(e)は、
比較される第1の領域と第2の領域との複数の対のうちの第3の群に属する対について相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行し、
前記欠陥検出方法は、
(g) 比較される第1の領域と第2の領域との複数の対のうちの第3の群に属さず第4の群に属する残余の対に前記工程(e)による第3の群に属する対についての位置あわせの結果を援用する工程、
をさらに備える欠陥検出方法。
A defect detection method for detecting a defect included in a first pattern by comparing a first image obtained by imaging a first pattern with a second image obtained by imaging a second pattern,
(a) dividing the first image into a plurality of first regions;
(b) dividing the second image into a plurality of second regions;
(c) Alignment of the first region and the second region with relatively low accuracy with respect to pairs belonging to the first group among a plurality of pairs of the first region and the second region to be compared. A step of executing
(d) The first group according to the step (c) is assigned to the remaining pairs belonging to the second group and not belonging to the first group among the plurality of pairs of the first region and the second region to be compared. Using the result of the alignment for pairs belonging to,
(e) A state in which the alignment of the plurality of pairs of the first region and the second region to be compared is performed in the step (c) or a state in which the result of the alignment is used in the step (d) Performing alignment of the first region and the second region with relatively high or the same accuracy relative to
(f) detecting a defect from a comparison result between the first region and the second region for a plurality of pairs of the first region and the second region to be compared;
Equipped with a,
The step (e)
Alignment of the first region and the second region with a relatively high or the same accuracy with respect to a pair belonging to the third group among a plurality of pairs of the first region and the second region to be compared Run
The defect detection method includes:
(g) The third group according to the step (e) is added to the remaining pair belonging to the fourth group and not belonging to the third group among the plurality of pairs of the first region and the second region to be compared. Using the result of alignment for pairs belonging to,
A defect detection method further comprising:
第1のパターンを撮像した第1の画像と第2のパターンを撮像した第2の画像とを比較して第1のパターンに含まれる欠陥を検出する欠陥検出方法であって、
(a) 第1の画像を複数の第1の領域に分割する工程と、
(b) 第2の画像を複数の第2の領域に分割する工程と、
(c) 比較される第1の領域と第2の領域との複数の対のうちの第1の群に属する対について相対的に低い精度で第1の領域と第2の領域との位置あわせを実行する工程と、
(d) 比較される第1の領域と第2の領域との複数の対のうちの第1の群に属さず第2の群に属する残余の対に前記工程(c)による第1の群に属する対についての位置あわせの結果を援用する工程と、
(e) 比較される第1の領域と第2の領域との複数の対について前記工程(c)により位置あわせが実行された状態又は前記工程(d)により位置あわせの結果が援用された状態を基準として相対的に高いか又は同じ精度で第1の領域と第2の領域との位置あわせを実行する工程と、
(f) 比較される第1の領域と第2の領域との複数の対について第1の領域と第2の領域との比較結果から欠陥を検出する工程と、
備え、
(g) 比較される第1の領域と第2の領域との複数の対の各々が相対的に低い精度の位置あわせに適するか否かを順次に判定する工程と、
(h) 前記工程(g)により相対的に低い精度の位置あわせに適さないと判定された対を第2の群に属すると判定し、相対的に低い精度の位置あわせに適さないと判定された対のひとつ後に相対的に低い精度の位置あわせに適すると判定された対を第1の群に属すると判定する工程と、
をさらに備え、
前記工程(h)は、
前記工程(g)により相対的に低い精度の位置あわせに適すると判定された対のひとつ後に相対的に低い精度の位置あわせに適すると判定された対を第2の群に属すると判定する、
欠陥検出方法。
A defect detection method for detecting a defect included in a first pattern by comparing a first image obtained by imaging a first pattern with a second image obtained by imaging a second pattern,
(a) dividing the first image into a plurality of first regions;
(b) dividing the second image into a plurality of second regions;
(c) Alignment of the first region and the second region with relatively low accuracy with respect to pairs belonging to the first group among a plurality of pairs of the first region and the second region to be compared. A step of executing
(d) The first group according to the step (c) is assigned to the remaining pairs belonging to the second group and not belonging to the first group among the plurality of pairs of the first region and the second region to be compared. Using the result of the alignment for pairs belonging to,
(e) A state in which the alignment of the plurality of pairs of the first region and the second region to be compared is performed in the step (c) or a state in which the result of the alignment is used in the step (d) Performing alignment of the first region and the second region with relatively high or the same accuracy relative to
(f) detecting a defect from a comparison result between the first region and the second region for a plurality of pairs of the first region and the second region to be compared;
Equipped with a,
(g) sequentially determining whether each of the plurality of pairs of the first region and the second region to be compared is suitable for relatively low accuracy alignment;
(h) It is determined that the pair determined to be unsuitable for relatively low precision alignment by the step (g) belongs to the second group, and is not suitable for relatively low precision alignment. Determining that a pair determined to be suitable for relatively low accuracy alignment after one of the pairs belongs to the first group;
Further comprising
The step (h)
Determining that a pair determined to be suitable for relatively low accuracy alignment after the pair determined to be suitable for relatively low accuracy alignment by the step (g) belongs to the second group;
Defect detection method.
JP2009096889A 2009-04-13 2009-04-13 Defect detection apparatus and defect detection method Expired - Fee Related JP5442305B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009096889A JP5442305B2 (en) 2009-04-13 2009-04-13 Defect detection apparatus and defect detection method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009096889A JP5442305B2 (en) 2009-04-13 2009-04-13 Defect detection apparatus and defect detection method

Publications (2)

Publication Number Publication Date
JP2010249565A JP2010249565A (en) 2010-11-04
JP5442305B2 true JP5442305B2 (en) 2014-03-12

Family

ID=43312079

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009096889A Expired - Fee Related JP5442305B2 (en) 2009-04-13 2009-04-13 Defect detection apparatus and defect detection method

Country Status (1)

Country Link
JP (1) JP5442305B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190092506A (en) * 2017-01-20 2019-08-07 가부시키가이샤 스크린 홀딩스 Position shift amount acquisition device, inspection device, position shift amount acquisition method and inspection method

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013124868A (en) 2011-12-13 2013-06-24 Canon Inc Inspection apparatus, inspection method and computer program
JP2013123812A (en) 2011-12-13 2013-06-24 Canon Inc Inspecting device, inspecting method, and computer program
JP5771561B2 (en) * 2012-05-30 2015-09-02 株式会社日立ハイテクノロジーズ Defect inspection method and defect inspection apparatus
KR101796009B1 (en) * 2017-03-07 2017-12-01 주식회사 한글과컴퓨터 Program automatic analysis system and automatic analysis method using the same
KR101774815B1 (en) * 2017-03-07 2017-09-19 주식회사 한글과컴퓨터 Cursor location recognition test automation system and test automation method using the same
JP7077631B2 (en) 2018-01-18 2022-05-31 コニカミノルタ株式会社 Image inspection equipment and image formation system
DE102018220236A1 (en) 2018-11-26 2020-05-28 Heidelberger Druckmaschinen Ag Fast image rectification for image inspection
EP3865304B1 (en) 2020-02-13 2022-01-05 Heidelberger Druckmaschinen AG Deterministic image inspection

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4016472B2 (en) * 1997-01-10 2007-12-05 株式会社日立製作所 Appearance inspection method and apparatus
JP3283836B2 (en) * 1998-08-31 2002-05-20 日本電気株式会社 Image alignment method for reticle appearance inspection device
JP4185789B2 (en) * 2003-03-12 2008-11-26 株式会社日立ハイテクノロジーズ Pattern inspection method and apparatus
JP4502186B2 (en) * 2004-04-02 2010-07-14 大日本スクリーン製造株式会社 Defect detection apparatus and defect detection method
JP4185502B2 (en) * 2005-03-22 2008-11-26 アドバンスド・マスク・インスペクション・テクノロジー株式会社 SAMPLE INSPECTION DEVICE, IMAGE Alignment Method Of Sample To Be Inspected, And Program
JP4143101B2 (en) * 2006-08-10 2008-09-03 アドバンスド・マスク・インスペクション・テクノロジー株式会社 Specimen inspection apparatus, image alignment method, misregistration amount estimation method, and program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190092506A (en) * 2017-01-20 2019-08-07 가부시키가이샤 스크린 홀딩스 Position shift amount acquisition device, inspection device, position shift amount acquisition method and inspection method
KR102227341B1 (en) * 2017-01-20 2021-03-11 가부시키가이샤 스크린 홀딩스 Position shift amount acquisition device, inspection device, position shift amount acquisition method and inspection method

Also Published As

Publication number Publication date
JP2010249565A (en) 2010-11-04

Similar Documents

Publication Publication Date Title
JP5442305B2 (en) Defect detection apparatus and defect detection method
US10552952B2 (en) GPU-based TFT-LCD Mura defect detection method
US7903880B2 (en) Image processing apparatus and method for detecting a feature point in an image
US9773299B2 (en) Method for correcting fragmentary or deformed quadrangular image
CN108414193B (en) Detection area positioning method and device of display screen
CN106651828B (en) Method for measuring sub-pixel of product size under industrial small-scale motion blur imaging condition
US20080069453A1 (en) Inspection Apparatus Using Template Matching Method Using Similarity Distribution
US10013619B2 (en) Method and device for detecting elliptical structures in an image
CN103413311B (en) A kind of fuzzy detection method based on edge
US9196034B2 (en) Method of fast analysis of the relief elements featuring on the internal surface of a tyre
CN112085709B (en) Image comparison method and device
US20110299784A1 (en) Image Based Structural Characterization of Fibrous Materials
CN115147415A (en) Wine box defect detection method based on image processing
CN111462056B (en) Workpiece surface defect detection method, device, equipment and storage medium
CN114219802A (en) Skin connecting hole position detection method based on image processing
JP2009250937A (en) Pattern inspection device and method
CN114882035B (en) Fabric ironing quality prediction evaluation method and device based on image processing
CN107862679B (en) Method and device for determining image detection area
CN111028215A (en) Method for detecting end surface defects of steel coil based on machine vision
CN104112266A (en) Image edge blurring detecting method and device
JP5642605B2 (en) Inspection apparatus, program, and image alignment method
JP2009157701A (en) Method and unit for image processing
Gao et al. Development of OLED panel defect detection system through improved Otsu algorithm
CN109215068B (en) Image magnification measuring method and device
Hui et al. Study on edge detection method of aluminum foil image

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111219

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130325

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130820

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130918

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131218

R150 Certificate of patent or registration of utility model

Ref document number: 5442305

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees