JP2004101338A - 画像処理方法及び装置並びに画像処理方法のプログラム - Google Patents

画像処理方法及び装置並びに画像処理方法のプログラム Download PDF

Info

Publication number
JP2004101338A
JP2004101338A JP2002262695A JP2002262695A JP2004101338A JP 2004101338 A JP2004101338 A JP 2004101338A JP 2002262695 A JP2002262695 A JP 2002262695A JP 2002262695 A JP2002262695 A JP 2002262695A JP 2004101338 A JP2004101338 A JP 2004101338A
Authority
JP
Japan
Prior art keywords
image processing
data
processing method
pixel
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002262695A
Other languages
English (en)
Other versions
JP4218291B2 (ja
Inventor
Yoshifumi Yoshida
吉田 佳史
Eisuke Kanazawa
金澤 英祐
Atsushi Hirai
平井 篤史
Kei Takada
高田 圭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2002262695A priority Critical patent/JP4218291B2/ja
Publication of JP2004101338A publication Critical patent/JP2004101338A/ja
Application granted granted Critical
Publication of JP4218291B2 publication Critical patent/JP4218291B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

【課題】表示装置(パネルの種類)、表示状況の違いに依存した処理を行わなくても検査を行えるような画像処理方法等を得る。
【解決手段】液晶パネル100をカメラ20が撮像して得られたデータを処理し、液晶パネル100の表示画面の良否を検査するための画像処理方法において、人間の眼の分解能に基づいて画素を2次元の位置に分解し、各位置で得られた複数の輝度のデータを、処理手段1は、ある方向に基づいて各位置の輝度のデータを並べるように変換して処理し、液晶パネル100の画面を構成するパネル画素毎に、良否の判断の基準となるマハラノビスの距離を算出する。
【選択図】    図1

Description

【0001】
【発明の属する技術分野】
本発明は画像処理方法等に関するものである。例えば被検査対象の表示画面に生ずる欠陥の有無を検査をする際に特に用いられる処理についてのものである。
【0002】
【従来の技術】
現在、例えば液晶パネル等、様々な種類の表示装置がある。各表示装置の表示部分は画素の集まりで構成される。ここで、各画素における発光量のバランスがとれていれば表示画面は一様である。しかし、実際には画素全体にわたって品質管理を行うのが困難であるため、表示部分の全ての画素のバランスをとることは難しい。発光量のバランスが崩れると、画面上に発生する点欠陥、シミ、むら等(以下、これらを欠陥という)の原因となってしまう。当然、画素数が多くなるほど(大きな画面になるほど)欠陥が発生する確率は高くなる。また、プロジェクタ等のように表示部分が拡大されて投影される(画素も拡大される)場合には、発生した欠陥が人間の眼に映りやすくなる。
【0003】
通常、表示装置を製品として出荷する前の段階で、その表示部分であるパネルが良又は不良であるかどうかの検査(以下、良否判断という)がなされる。従来は、検査員がパネルを直接目視又は投影面に投影した表示画面を目視してパネルの良否を判断していた。しかし、検査員によって欠陥が発生しているかどうかの判断基準に個人差があるし、同じ検査員でもその時の状況(体調等)により判断に差が生じる場合がある。そこで、このような欠陥の有無を客観的、自動的に検出し、良否判断を行うための装置等も提案されている(例えば特許文献1参照)。
【0004】
【特許文献1】
特開平11−257937号公報
【0005】
【発明が解決しようとする課題】
ただ、表示装置(パネル)の種類(例えばプラズマ、有機EL等)によって、その画面の良否判断の検査の基準が異なる。また、画素の表示階調が異なることによっても基準が異なる。このように表示装置の種類の違い、同じ表示装置でも表示状況の違いに応じて基準が異なるので、その判断処理の方法もその度に異なるものとなり不便であった。しかも、これらの基準は、欠陥のある画面(画素)とはどのようなものであるかを基準とするものであり、日々厳しくなる基準に伴って検査する(判断する)項目も追加され多くなっていく傾向にあった。
【0006】
本発明はこのような問題点を解決するためになされたものであり、表示装置(パネルの種類)、表示状況の違いに依存した処理を行わなくても検査を行えるような画像処理方法等を得ることを目的とするものである。
【0007】
【課題を解決するための手段】
そのため、本発明に係る画像処理方法は、被検査対象の表示画面を評価するための画像処理方法において、表示画面の画素に基づく輝度のデータを処理して表示画面の良否を判断するものである。
本発明においては、被検査対象の表示画面の良否を評価するために、表示画面の1又は複数画素に基づく輝度のデータを演算処理して表示画面の良否判断を行う。したがって、輝度に基づくパターン認識の方法を確立することができ、自動的に表示画面の良否を判断して評価を行うことができる。
【0008】
また、本発明に係る画像処理方法は、画素を2次元の位置に分解し、各位置で得られた複数の輝度のデータを、ある方向に基づいて各位置の輝度のデータを並べるように変換して処理し、マハラノビスの距離を算出するものである。
本発明においては、画素を基準として画像処理する場合に、その画素を例えば2次元座標で表される位置として分解し、各位置における複数の輝度のデータについて、パターン認識を行おうとする方向に各位置を1次元として捉えて輝度のデータを並べように変換した上で、処理を行い、マハラノビスの距離を算出する。これにより、画像処理を行ってマハラノビスの距離を行うに際し、パターン認識の方向を定めることができる。
【0009】
また、本発明に係る画像処理方法は、良画素と判断した画素を複数サンプルとして用い、マハラノビスの距離を算出するための単位空間を作成するものである。
本発明においては、良画素を基準とするため、良と判断した画素をサンプルとして単位空間を作成する。これにより、良画素とのマハラノビスの距離の違いにより、画素の良否を判断することができる。
【0010】
また、本発明に係る画像処理方法は、画像処理を行うための基準の範囲を分解して得られたデータを、任意に選択した順に処理し、マハラノビスの距離を算出するものである。
本発明においては、少なくともマハラノビスの距離を実用的に適用できるデータ量が得られるような範囲、分解数により、基準の範囲を分解して得られたデータの全部又は一部を、所望のパターン認識を行うために任意に選択し、選択した順に処理を行うことにより、所望する方向性をもってパターン認識を行い、マハラノビスの距離を算出する。これにより、画像処理を行ってマハラノビスの距離を行うに際し、パターン認識の方向性を定める(特徴付けを行う)ことができる。
【0011】
また、本発明に係る画像処理方法は、基準の範囲における位置に基づいて、データを選択するものである。
本発明においては、パターン認識の方向を定めるために、基準の範囲における位置に基づいて、データを選択する。これにより、パターン認識の方向が決まり、それに伴って必要なデータの選択を行うことができる。
【0012】
また、本発明に係る画像処理方法は、人間の眼の分解能に基づいて基準の範囲を分解するものである。
本発明においては、例えば人間の眼に合わせた画像処理を行ってマハラノビスの距離を算出するため、人間の眼が有する分解能で分解を行う。人間の眼の分解能に基づいて基準の範囲を分解する。したがって、人間の眼に会わせた精度をもって画像処理を行うことができる。
【0013】
また、本発明に係る画像処理方法は、被検査対象の表示画面を撮像手段が撮像して得られたデータを処理し、被検査対象の表示画面の良否を検査するための画像処理方法において、人間の眼の分解能に基づいて処理すべきデータ量を算出し、算出したデータ量が得られる撮像手段によって被検査対象を撮像して得られたデータに基づいて画像処理を行うものである。
本発明においては、人間の眼が輝度等の差を判別できる分解能(視角)と同じ分解能で被検査対象を撮像するための撮像手段の画素数(データ量)を例えばコンピュータのような処理手段により算出し、撮像手段によって被検査対象を撮像して得られたデータに基づいて、処理手段により画像処理を行う。これにより、検査対象の種類に関係なく人間の眼の分解能に基づいた検査を行える。
【0014】
また、本発明に係る画像処理方法は、ランドルト氏環に基づく視力の分解能を人間の眼の分解能の基準とする。
本発明においては、検査精度と演算量とを比較考量した上で、視力による分解能を人間の眼の分解能の基準とする。検査の基準を厳しくする場合は、高い視力値に基づく分解能を設定し、逆に検査の基準を緩和する場合は、低い視力値に基づく分解能を設定する。これにより、大多数の人間の眼の能力に対応して画面の良否を判断することができる。
【0015】
また、本発明に係る画像処理方法では、被検査対象に表示された画面を撮像手段が撮像して得られたデータを処理し、被検査対象の表示画面の良否を検査するための画像処理方法において、得られたデータに基づいて、検査対象の画面を構成する画素毎に、良否の判断の基準となるマハラノビスの距離を算出するものである。
本発明においては、例えばコンピュータのような処理手段により、得られたデータに基づいて画素毎にマハラノビスの距離を算出し、例えばあらかじめ良画素について算出されているマハラノビスの距離の距離差に基づいて画面の良否判断を行う。これにより、画素の良否の基準を最終的にマハラノビスの距離だけで判断することができる。また、距離の比較対象をあらかじめ定めた良画素のサンプルにしておくことで、良画素を基準とした画素の良否を行い、また、画面の良否判断を自動的に行うことができる。しかも、マハラノビスの距離の分布具合により、表示画面のグレード(品質)についても判断し、検査することができる。
【0016】
また、本発明に係る画像処理方法は、画面の構成単位である画素を基準の範囲とするものである。
本発明においては、画素を基準の範囲とし画像処理を行う。これにより、画面を構成する画素を単位とした画像処理を確立することができる。
【0017】
また、本発明に係る画像処理方法において、データは被検査対象の表示画面の発光による輝度に基づいて得られるものである。
本発明においては、輝度をデータとして検査を行う。これにより、点欠陥、むら、シミ等の画面の欠陥を効率的に検査することができる。
【0018】
また、本発明に係る画像処理方法においては、表示画面における各画素の位置と各画素のマハラノビスの距離とを関連づけて、表示画面の各画素によるマハラノビスの距離の分布に基づいて表示画面の良否を検査するものである。
本発明においては、表示画面における各画素の位置と各画素のマハラノビスの距離とを関連づけて、表示画面の各画素によるマハラノビスの距離の分布により、点欠陥、むら、シミ等の画面の検査を行う。これにより、特にむら、シミ等の欠陥は、複数の画素が集まってできるものであるから、実体に即した判断ができ、都合がよい。また、画面の隅の欠陥と中央の欠陥とではその検査対象の良否に対する重みが違うので、より実体に即した良否判断を行うことができる。
【0019】
また、本発明に係る画像処理方法では、被検査対象より得られたデータを画像処理して欠陥の有無を検査するための画像処理方法において、得られたデータに基づいて、欠陥の有無の判断の基準となるマハラノビスの距離を算出するものである。
本発明においては、例えば、音、光、温度等の物理量によって得られたデータを、例えばコンピュータのような処理手段により画像処理し、例えばある一定の区画毎にマハラノビスの距離を算出し、あらかじめサンプル等で算出されているマハラノビスの距離と比較して被検査対象に欠陥があるかどうかを判断する。これにより、音、光、温度等の物理量を計測するためのセンサ等についても、例えば良品を基準とした検査を行うことができる。
【0020】
また、本発明に係る画像処理方法は、マハラノビスの距離を算出するために、データに対してシュミットの直交展開に基づいた処理を行う。
本発明においては、シュミットの直交展開を利用した処理を行う。これにより、演算量を減らし、一時的に記憶させるデータ量を節約し、桁落ちを少なくしてマハラノビスの距離の算出精度を上げる処理を行うことができる。
【0021】
また、本発明に係る画像処理方法は、印加する電圧に基づいて表示階調が異なる画面について、任意の電圧において良と判断した画素により単位空間からのマハラノビスの距離を算出するものである。
本発明においては、任意の電圧において良と判断した画素により単位空間からのマハラノビスの距離を算出し、単位空間を作成することなく、ある電圧における画素の基準を算出する。これにより、最も時間と手間を費やす単位空間を各電圧について算出しなくても各電圧における基準を得ることができる。また、印加する電圧とマハラノビスの距離との関係を推定し、マハラノビスの距離を算出しなかった電圧との関係を補完することができる。
【0022】
また、本発明に係る画像処理装置は、被検査対象の表示画面の画素に基づく輝度のデータを処理する演算処理手段と、演算処理手段が処理した結果に基づいて被検査対象の表示画面の良否を判断する検査判断手段とを備えたものである。
本発明においては、演算処理手段が画面の1又は複数画素に基づく輝度のデータを演算処理する。そして、検査判断手段が、演算処理手段の演算結果に基づいて画面の良否判断を行う。したがって、輝度に基づくパターン認識の方法を確立することができ、画面の画素に基づく輝度から画面の良否を判断して評価を行うことができる。
【0023】
また、本発明に係る画像処理装置は、被検査対象に表示された画面を撮像手段が撮像して得られたデータを処理し、被検査対象の画面の良否を検査するための画像処理装置において、良画素のサンプルによってあらかじめ得られたデータの平均値及び標準偏差に基づいて、被検査対象に表示された画面を撮像手段が撮像して得られたデータを基準化した基準化値をデータとして算出する基準化値データ演算手段と、基準化値に基づいて、検査対象の画面を構成する画素毎にマハラノビスの距離をデータとして算出する距離演算手段と、マハラノビスの距離のデータに基づいて被検査対象に表示された画面の良否を判断する検査判断手段とを備えたものである。
本発明においては、基準化値データ演算手段が、被検査対象に表示された画面を撮像手段が撮像して得られたデータを基準化する。基準化値データ演算手段が基準化した基準化値データに基づいて、距離演算手段が画素毎にマハラノビスの距離を算出する。これにより、画素の良否の基準を最終的にマハラノビスの距離だけで判断することができる。また、距離の比較対象をあらかじめ定めた良画素のサンプルにしておくことで、良画素を基準とした画素の良否を行い、また、画面の良否判断を自動的に行うことができる。
【0024】
また、本発明に係る画像処理装置は、良画素のサンプルによってあらかじめ得られたデータを基準化し、各データの相関関係に基づく相関行列の逆行列を算出しておき、距離演算手段は、逆行列の各要素及び基準化値に基づいてマハラノビスの距離を算出する。
本発明においては、サンプルに基づく単位空間の演算過程で各データの相関関係を算出し、それに基づく相関行列、さらにその逆行列を算出する。距離演算手段は、逆行列の各要素及び基準化値に基づいてマハラノビスの距離を算出する。これにより、逆行列を演算する過程で相関関係を算出するので、データ間の相関関係を把握することが容易である。
【0025】
また、本発明に係る画像処理装置は、直交展開演算手段及び直交変数演算手段をさらに備え、良画素のサンプルによってあらかじめ得られたデータを基準化し、シュミットの直交展開を利用してそれぞれのデータに基づいて回帰係数及び残差成分の分散に基づく値を算出しておき、直交展開演算手段は、基準化値に基づいて撮像手段が撮像して得られたデータについて算出した残差成分の値をデータとして算出し、直交変数演算手段は、直交展開演算手段が算出した残差成分の値及び分散に基づく値により直交変数の値をデータとして算出し、距離演算手段は、直交変数の値のデータに基づいてマハラノビスの距離を算出する。
本発明においては、直交展開演算手段が基準化値データに基づいて残差成分の値を算出する。直交変数演算手段が、残差成分の値及び分散に基づく値により直交変数の値を算出する。距離演算手段が、直交変数の値のデータに基づいてマハラノビスの距離を算出する。これにより、マハラノビスの距離を算出する際の演算量及びその際に一時的に演算値を記憶させる記憶量(メモリ)を減らすことができる。また、回帰係数及び残差成分の分散を算出する際に、マハラノビスの距離に影響を与える項目順に算出しておくことで、残差成分の値、直交変数の値又はマハラノビスの距離を算出する際に、演算を切り上げて、距離算出速度(良否判断までの時間短縮)を優先させることもできる。
【0026】
また、本発明に係る画像処理装置は、撮像手段の撮像により得られるデータのデータ量を、人間の眼の分解能に基づいて決定するものである。
本発明においては、人間の眼が輝度等の差を判別できる視角(分解能)と同じ分解能で被検査対象を撮像するためのデータ量(撮像手段の画素数)を決定した上で、その後、各手段が処理を行うようにする。これにより、検査対象の種類に関係なく人間の眼の分解能に基づいた検査を行うことができる。
【0027】
また、本発明に係る画像処理装置は、被検査対象に表示された画面を撮像した撮像手段から送信された輝度を表す信号に基づいて輝度値データを作成する輝度値データ取得手段をさらに備えたものである。
本発明においては、撮像手段から送信される輝度の信号を輝度値データとして処理できる輝度値データ取得手段を備える。これにより、画像処理装置単体での検査、リアルタイムでの検査を行うことができる。
【0028】
また、本発明に係る画像処理装置の距離演算手段は、算出した各画素のマハラノビスの距離と表示画面における各画素の位置とを関連づけて、検査判断手段は、表示画面の各画素によるマハラノビスの距離の分布に基づいて表示画面の良否を判断する。
本発明においては、距離演算手段が、表示画面における各画素の位置と各画素のマハラノビスの距離とを関連づけて、検査判断手段が、表示画面の各画素によるマハラノビスの距離の分布により、点欠陥、むら、シミ等の画面の検査を行う。この場合、画面の隅の欠陥と中央の欠陥とで良否判断の重みを異ならせるような判断を行わせることもできる。これにより、より実体に即した良否判断を行うことができる。
【0029】
また、本発明に係る画像処理方法のプログラムでは、被検査対象の表示画面を評価させる画像処理方法のプログラムにおいて、表示画面の画素に基づく輝度のデータを処理させて表示画面の良否を判断させることを処理手段に行わせる。
本発明においては、被検査対象の画面の良否を評価するために、画面の1又は複数画素に基づく輝度のデータを演算処理して画面の良否判断を行う。したがって、輝度に基づくパターン認識の方法を確立することができ、処理手段に自動的に画面の良否を判断させ、評価を行わせることができる。
【0030】
また、本発明に係る画像処理方法のプログラムでは、2次元空間の画素を分解して得られた輝度のデータを1次元空間の輝度のデータに変換させ、変換した輝度値のデータを処理させてマハラノビスの距離を算出させることを処理手段に行わせる。
本発明においては、画素を基準として処理手段が画像処理する場合に、その画素を例えば2次元座標で表される位置として分解し、各位置における複数の輝度のデータについて、パターン認識を行おうとする方向に各位置を1次元として捉えて輝度のデータを並べように変換させた上で、処理を行わせ、マハラノビスの距離を算出させることができる。したがって、画像処理を行ってマハラノビスの距離を行うに際し、パターン認識の方向を定めることができる。
【0031】
また、本発明に係る画像処理方法のプログラムでは、被検査対象の表示画面を撮像手段が撮像して得られたデータを処理し、被検査対象の表示画面の良否を検査するための画像処理方法のプログラムにおいて、人間の視力が有する分解能に基づいて処理すべきデータ量を算出させ、算出させたデータ量が得られる撮像手段によって被検査対象を撮像して得られたデータに基づいて、検査対象の画面を構成する画素毎に画像処理させることを処理手段に行わせる。
本発明においては、コンピュータ等の処理手段に、人間の眼が輝度等の差を判別できる分解能と同じ分解能で被検査対象を撮像するための撮像手段の画素数(データ量)を算出させ、撮像手段によって被検査対象を撮像して得られたデータに基づいて、検査対象の画面を構成する画素毎に画像処理を行わせる。これにより、画素の良否の基準を最終的にマハラノビスの距離だけで判断することができる。また、距離の比較対象をあらかじめ定めた良画素のサンプルにしておくことで、良画素を基準とした画素の良否を行い、また、画面の良否判断を処理手段に自動的に行わせることができる。
【0032】
また、本発明に係る画像処理方法のプログラムでは、被検査対象に表示された画面を撮像手段が撮像して得られたデータを処理させ、被検査対象の表示画面の良否を検査させるための画像処理方法のプログラムにおいて、得られたデータに基づいて、検査対象の画面を構成する画素毎に、良否の判断の基準となるマハラノビスの距離を算出させることを処理手段に行わせる。
本発明においては、コンピュータ等の処理手段に、得られたデータに基づいて画素毎にマハラノビスの距離を算出させ、例えばあらかじめ良画素について算出されているマハラノビスの距離の距離差に基づいて画面の良否判断を行わせる。
【0033】
また、本発明に係る画像処理方法のプログラムでは、表示画面における各画素の位置と各画素のマハラノビスの距離とを関連づけさせ、表示画面の各画素によるマハラノビスの距離の分布に基づいて表示画面の良否を検査させることを処理手段に行わせる。
本発明においては、コンピュータ等の処理手段に、表示画面における各画素の位置と各画素のマハラノビスの距離とを関連づけさせ、表示画面の各画素によるマハラノビスの距離の分布により、点欠陥、むら、シミ等の画面の検査を行わせる。これにより、点欠陥、むら、シミ等の画面の検査を行うことができる。特にむら、シミ等の欠陥は、複数の画素が集まってできるものであるから、実体に即した判断を行わせることができ、都合がよい。また、画面の隅の欠陥と中央の欠陥とではその検査対象の良否に対する重みが違うので、より実体に即した良否判断を行わせることができる。
【0034】
また、本発明に係る画像処理方法のプログラムでは、被検査対象より得られたデータを画像処理させて欠陥の有無を検査させるための画像処理方法のプログラムにおいて、得られたデータに基づいて、欠陥の有無の判断の基準となるマハラノビスの距離を算出させることを処理手段に行わせる。
本発明においては、コンピュータ等の処理手段に対し、例えば、音、光、温度等の物理量によって得られたデータを画像処理し、例えばある一定の区画毎にマハラノビスの距離を算出させ、サンプルのマハラノビスの距離と比較して被検査対象に欠陥があるかどうかを判断させる。これにより、音、光、温度等の物理量を計測するためのセンサ等についても例えば良品を基準とした検査を行わせることができる。
【0035】
また、本発明に係る画像処理方法のプログラムは、マハラノビスの距離を算出させるために、データに対してシュミットの直交展開に基づいた処理を処理手段に行わせる。
本発明においては、シュミットの直交展開を利用した処理をコンピュータ等の処理手段に対して行わせる。これにより、演算量を減らすことができ、一時的に記憶させるデータ量を節約することができ、桁落ちを少なくしてマハラノビスの距離の算出精度を上げる処理を行うことができる。
【0036】
【発明の実施の形態】
実施形態1.
図1は本発明の第1の実施の形態に係る画像処理装置を中心とするシステムの構成を示すブロック図である。図1において、10は画像処理装置である。画像処理装置10は、処理手段1、入力手段2、表示手段3及び記憶手段4で構成される。
【0037】
1は処理手段である。処理手段1は、演算処理部分となる平均・標準偏差演算部1A、逆行列演算部1B、基準化値データ演算部1C及び距離演算部1D、検査判断手段となる検査判断部1E並びに輝度値データ取得部1Fで構成される。平均・標準偏差演算部1Aは、送信される輝度値のデータ(以下、これを輝度値データという)に基づいて、その平均値と標準偏差とを演算処理する。逆行列演算部1Bは、輝度値データに基づく相関行列の逆行列を算出する。基準化値データ演算部1Cは、輝度値データ並びに平均・標準偏差演算部1Aが算出した平均値及び標準偏差に基づいて基準化値を算出し、データ(以下、これを基準化値データという)の作成処理をする。距離演算部1Dは、液晶パネル100の各画素についてマハラノビスの距離(又はその平方距離。本明細書ではこれらを含めて距離という)を算出し、これをデータとする。検査判断部1Eは、距離演算部1Dが算出したマハラノビスの距離のデータに基づいて、画面(画素)の良否を判断する。輝度値データ取得部1Fは、カメラ20から送信される信号に基づいて輝度値を判断し、輝度値データを作成する。処理手段1の各部の処理の詳細については後述する。また、ここでは特に図示はしないが、後述するように、撮像画素数を決定し、カメラ20にその撮像画素で撮像させるための処理を行う部を設けるようにしてもよい。
【0038】
入力手段2は、操作者が入力する指示、各種データ等を、例えば電気信号に変換して処理手段1に送信する。表示手段3は、処理手段1からの表示信号に基づいて、検査結果その他操作者に示すデータ(情報)を記号、画像等で表示する。記憶手段4は、処理手段1が演算途中、演算後に算出したデータを一時的に又は長期的に記憶する。
【0039】
20は撮像手段となるカメラである。カメラ20は、例えばCCD等の複数の受光素子で構成されており、各受光素子は受光量を、例えば電気信号に変換する。本実施の形態では、信号は画像処理装置1の輝度値データ取得部1Fに送信され、輝度値データとして作成処理されるものとする。なお、処理手段1に信号を送信する際にインターフェイスとなる手段を介する場合もあるが、ここでは省略している。100は被検査対象となる液晶パネルである。本実施の形態では液晶パネル100を被検査対象とするが、特に液晶パネルに限定するものではなく、他の種類(例えばプラズマ、有機EL等)のパネル等でもよい。
【0040】
本実施の形態は、液晶パネル等のパネル画素単位での検査方法を確立したものである。そのため、カメラ20で撮像した画像に基づいて、液晶パネル100の良否を判断するが、カメラ20で撮像する際、人間の視力に基づく眼の最小分解能による画素数(これが輝度値データの数となる)での撮像を行う。そして、輝度値データに基づいて演算を行い、特殊なパターン認識技術であるMT(マハラノビス・タグチ)法に基づいてマハラノビスの距離をパネルを構成する画素毎に算出する。マハラノビスの距離の分布に基づいてパネル(表示画面)の良否判断を行う。このように人間の眼の分解能を基準として、液晶パネル100を検査するために必要な輝度値データ数を決定することで、パネルに依存しない基準を確立する。また、良画素を単位空間とするマハラノビスの距離の差を基準として、画素の良、不良の度合いを数値化し、不良画素の基準を増減することで良否判断を行うのではなく、良画素であるための基準を広狭して良否判断を行う。そのため、パネルの種類に関係なく、しかも良画素との比較において、画素毎の良否を含めた検査対象の良否を判断することができる。このように、人間の眼の分解能を基準として算出したマハラノビスの距離だけに基づいた良否判断の手順は、パネルに関係なく同じ手順で行える。
【0041】
ここで、処理手段1を構成する各部をそれぞれ別個の手段(ハードウェア)として構成してもよいが、本実施の形態では、処理手段1を例えばCPU(Central Prosessing Unit )を中心とするコンピュータ等のような演算処理手段で構成するものとする。そして、各部の処理手順をあらかじめプログラム化したものを演算処理手段が実行し、そのプログラムに基づく処理を行うことで、上述した各部の機能を実現する。
【0042】
また、本実施の形態では画像処理装置1の輝度値データ取得部1Fがカメラ20から入力された信号に基づく輝度の判断処理を行っているが、別の装置にこの処理を行わせ、取得されたデータを例えば他の記録媒体から入力した上で、検査処理を処理手段1が行うようにしてもよい。この場合には、処理手段1に輝度値データ取得部1Fは必要がない。また、平均・標準偏差演算部1A及び逆行列演算部1Bについても、マハラノビスの距離を算出する際の基準となる単位空間の作成時にしか用いないので、実際の検査時に用いる処理手段1には必要がない。
【0043】
次に本実施の形態に係る画像処理の方法について説明する。その前段階として、液晶パネル100を検査するために必要なデータ数(つまり、液晶パネル100を撮像するカメラ20の画素数)を決定する。この決定に際しては人間の視力に注目する。
【0044】
図2は最小分解能を決定する方法を示す図である。図2において、破線で示されている部分の間が、人間が投影面を視認できる範囲である。また、投影された投影面を人間が直視して検査を行う場合の最小分解能(以下、分解能という)を実線で示す。また、一点鎖線は、液晶パネル100と投影面との関係を表す。画像処理による検査を行う場合には、まず、投影面に投影した画面を人間が目視で検査する場合と同じ条件(分解能)を保ちつつ、カメラ10による液晶パネル100の直に撮像(以下、直撮という)する必要がある。そのために、液晶パネル100を撮像するカメラ10の画素数を決定する。
【0045】
ここで、以下に3種類の画素に基づいて分解能を説明するが、3種類の画素とはそれぞれ次の示す画素である。1つ目は、検査対象である液晶パネルが有する画素(以下、パネル画素という)である。2つ目は、投影面に投影させた画像について、ある基準に基づいて算出した、人が視認できる最小の単位を表す画素(以下、表示画素という)である。3つ目は、検査のデータを得るために液晶パネルを直撮するカメラが有するそれぞれの受光素子が表す画素(以下、撮像画素という)である。
【0046】
図3は各視力値におけるランドルト氏環の寸法を表す図である。画素数の算出をするため、計算に必要な分解能について求める。人間の眼の分解能については「最小分離閾を基本理念とし、最小可読閾を用いる」と国際眼科学会で規定されている。この基準としてランドルト氏環が定められている。この規定から、分解能についてはランドルト氏環の定義より視力2.0の値を引用することとし、視野角として表される約0.5分(1/120°)を分解能として定める。この視力2.0は、2.0の視力であればほとんどの人の眼の分解能を満たすであろうという推測のもとに定めた値である(視力2.0の人は、5mの距離から3.64mmのランドルト氏環における0.727mmの切れ目(0.5分)を判別することができる)。
【0047】
ここでは、図2に示すように、撮像画素数を求めるための条件として、カメラ(眼)と液晶パネルの距離を240mm、注視時の分解能(視角)を0.5分(1/120°)と定める。
【0048】
図4は検査を行う際の投影サイズの関係を表す図である。図4のように、目視による実際の投影検査においては、眼と投影面との距離を1500mm、投影サイズを60インチ(1219.15mm×914.36mm)とする。
【0049】
まず、人間の眼の分解能を計算する。
Figure 2004101338
【0050】
したがって、人間の眼の分解能により検査することができる投影面の表示画素数は次式(2)のようになる。
Figure 2004101338
【0051】
次に人間の眼の分解能と同じ分解能で表示パネルを直撮するカメラの撮像画素数を決定する。ここで検査の対象となる液晶パネルの最大サイズを85mm×55mmと定めた。前述したようにカメラ20と液晶パネル100の距離は240mmであるので、このときの分解能は次式(3)で表される。
Figure 2004101338
【0052】
したがって、人間の眼の分解能と同じ分解能で85mm×55mmの液晶パネルを検査する際、カメラに必要な撮像画素数は次式(4)のようになる。
Figure 2004101338
【0053】
上述のように、本実施の形態では85mm×55mmの液晶パネル100を60インチの表示で投影した場合に、視力が2.0の人の眼の分解能に合わせて、検査に必要なカメラ10の撮像画素数を決定したが、条件の採り方によってはその値も異なる。このような場合には上述の各式に当てはめて撮像画素数を算出する。ここで、撮像画素を基準に考えれば、投影サイズが同じ場合、液晶パネル100の画素ピッチが広い程、1つのパネル画素に対する撮像画素数が多くなり、逆に画素ピッチが狭い程、1つのパネル画素に対する撮像画素数も少なくなる。
【0054】
図5は1つのパネル画素の輝度値の分布を3次元で表した図である。図5は1つのパネル画素を13×13(=169)の受光素子で受光し、輝度値データ取得部1Fにおいて、1つのパネル画素について169の輝度値のデータを取得することを示している。ここでは、6×6のパネル画素を有するパネルの、ある1つのパネル画素について表している。ここで、本実施の形態では分解能及びパネル画素の大きさから、マハラノビスの距離を有効に算出するのに必要な輝度値データ数を確保することができ、そのため、1つのパネル画素に注目することができる。ただ、基準とする範囲が小さかったり、分解能が低かったりした場合には、通常マハラノビスの距離を有効に算出するのに必要なデータ数を確保できるだけの範囲(大きさ。ここでは複数のパネル画素を基準とする)を確保したり、分解能を高めたり(ここでは視力の基準を上げる)する必要がある。以下では説明を簡単にするため、検査処理するデータ数(量)は必ずしも上述した85mm×55mmの液晶パネル100のパネル画素数並びに算出した表示画素数及び撮像画素数に基づいて算出したデータ量に準拠したものではない場合もある。
【0055】
図6は1つのパネル画素の輝度値の分布を3次元から2次元に展開した図である。ここで、各パネル画素における各撮像画素の位置(座標)を(1,1)、(1,2)、…、(13,13)で表すことにする。このように、x座標、y座標、輝度値の3次元(項目)(位置関係としては2次元)として得られるデータを(x座標,y座標)と輝度値という2次元(位置関係としては1次元)のデータとして扱う(変換する)。そして、位置(x座標,y座標)に基づいて、輝度値データの列びや採るデータを選択する。この選択は非常に重要なものとなる。というのは、例えば、2次元でのパターン認識(マッチング)を考える場合には、通常、縦(y方向)又は横(x方向)からのアプローチが考えられるが、この選択(本実施の形態では横方向への選択)によりそのパターン認識の方向が確定され、検査に反映されることになるからである。また、一般的には、位置、輝度値だけでなく、様々な項目(次元)を、その選択の対象とされる場合もある。そして、図5のように3次元で表されていたデータを2次元で表す。次に各パネル画素について、サンプルで取得した画素群(単位空間)との間のマハラノビスの距離(Mahalanobis Distance)を算出する。ここで、マハラノビスの距離を算出する前に、まず、本実施の形態における単位空間の作成方法について説明する。
【0056】
単位空間を形成する際の画素のサンプルとして、理想形状に近く、良画素と判断したパネル画素を選ぶ。本実施の形態では約1000のパネル画素に基づいて単位空間が形成されるものとする。ここで、パネル画素は印加される電圧により輝度が異なるが、本実施の形態では輝度が最も高くなる電圧における輝度値データを単位空間の計算のためのデータとして取得する。また、ある電圧(輝度)については良好であっても、他の電圧では不良となる画面がある。従来は、電圧の違いによっても良否判断が異なることもあったが、ここでは、同じ電圧の良画素との違いをみることになるので、同じ単位空間を利用した各電圧の良画素の距離を把握しておくことで、同一空間、同一方法での良否判断を行うことができる。ただ、検査対象(パネル)の種類、規格等が異なる場合には、そのパネル画素のピッチ、形状等も異なってしまう場合があるので、常にサンプルの場合と同様の状態で受光できる(本実施の形態では13×13の受光素子で受光する)わけではない。そのような場合には、それに応じた単位空間を形成する場合があり得る。
【0057】
サンプルとなるパネル画素について取得した輝度値データについて、平均・標準偏差演算部1Aは、パネル画素毎に平均値と標準偏差を算出する。算出した平均値及び標準偏差に基づいて、基準化値データ演算部1Cは、各パネル画素の各撮像画素の輝度値のデータについて基準化値を算出して基準化値データとする。具体的には輝度値と平均値との差を標準偏差で割った値が基準価値となる。これにより、全ての輝度値のデータを1を中心として均等に分布する基準化値データに変換することができる。
【0058】
次に逆行列演算部1Bは、基準化値データに基づいて相関係数を算出する。自己の相関係数も算出するがこの値は1となる。例えば(1,1)と(1,2)の場合、各パネル画素の(1,1)の基準化値と同じパネル画素の(1,2)の基準化値とを乗算する(本実施の形態ではパネル画素数である約1000の数が算出される)。そして、それらの和を算出してパネル画素数で割る(つまり、平均を算出する)。これを全ての組み合わせに対して行う。算出した相関係数を要素とする行列を相関行列とする。ここで、相関行列の対角成分は自己相関による係数であるので全て1となる。また、転置した要素は同じ値になる。逆行列演算部1Bが算出した相関行列の逆行列が最終目標の単位空間算出の基礎となる。
【0059】
次に実際に液晶パネル100を検査する際の処理について説明する。カメラ20から送信された信号に基づいて、輝度値データ取得部1Fは輝度値データを取得する。本実施の形態では、全てのパネル画素において13×13の輝度値データが取得できるものとして説明する。ここで、単位空間を構成するサンプルのパネル画素を13×13の撮像画素分の輝度値データに基づいて算出したので、演算の関係上、検査を行う場合も液晶パネル100のパネル画素につき同じ撮像画素数にする方が都合がよい。例えば、液晶パネル100のパネル画素ピッチがサンプルの画素ピッチと異なる場合や、それによって表示される投影面のサイズが異なる場合には、カメラ20と液晶パネル100との間の距離を変更することにより、パネル画素につき13×13の撮像画素数の関係と視力2.0の人間の眼の分解能の関係を保つようにする。
【0060】
基準化値データ演算部1Cは、単位空間の作成時にパネル画素毎に算出した平均値及び標準偏差に基づいて、各輝度値データについて基準化値を算出し、基準化値データとする。
【0061】
そして、基準化値データ演算部1Cによる各基準化値データ及びあらかじめ逆行列演算部1Bが算出した相関行列の逆行列の各要素に基づいて、距離演算部1Dはマハラノビスの距離を算出する。距離演算部1Dは、全てのパネル画素についてこのような演算を行い、各パネル画素にマハラノビスの距離(D2 )を算出する。なお、ここで、単位空間を構成するサンプルの輝度値(基準化値)のデータに基づいて算出したマハラノビスの距離の平均は、理論的には1となる。
【0062】
図7は算出したマハラノビスの距離を縦軸とし、輝度値を横軸としたグラフである。ここで、前述したように、サンプルは輝度値が最も高い位置に分布している。例えば、液晶パネル等では印加する電圧によって表示階調を調節している。そのため、印加する電圧によって表示階調(輝度値)には違いが生ずるが、画素の形状、大きさや得られる輝度値データ数に違いがなければ、印加する電圧に関わらず、新たな単位空間を作成しなくてもマハラノビスの距離算出により、その電圧における基準を作り出し、検査(評価)を行うことができる。これにより、最も時間と手間が費やされる単位空間作成を行う必要がない。また、複数の電圧とその電圧に対するマハラノビスの距離を算出することにより、電圧とその電圧に対するマハラノビスの距離との関係を補完して導き出すことができる。ここではサンプルによる分布を単位空間という。サンプルのマハラノビスの距離の距離は1前後となり、その平均は前述したように1である。したがって本実施の形態では分布の距離を1とする。
【0063】
ここで図7は輝度を次元とした2次元のグラフで構成しているが、良否判断は、実際にはマハラノビスの距離に基づいてのみ行われる。図7に示すように、印加する電圧によって同じ液晶パネル100でもマハラノビスの距離が異なる。また、液晶パネルに表示する画像(輝度値)によっても異なる。また、パネルの種類によっても異なる。条件が異なれば単位空間とのマハラノビスの距離も異なる。ここで重要なことは、検査対象の画面の良否は、単位空間と間の距離差ではなく、同条件における良画素(又はその分布)が基準となり、それとの距離差によって判断されるということである。
【0064】
したがって、実際には被検査対象を検査する前段階で、検査で用いられる条件での良画素のサンプルについて単位空間とのマハラノビスの距離(良画素の分布)を算出しておいてから検査を行い、同条件での良画素(分布)との距離差に基づいた判断を行う。良否の判断基準となる距離差の値については任意に定めることができる。検査判断部1Eは、直接的又は間接的に同条件での分布との距離差を算出し、あらかじめ定めた基準値と比較する。そして、例えば、基準値を越えたパネル画素数を計数し、その数等により、液晶パネル100全体としての良、不良の判断を行う。判断結果は例えば文字、処理した画像の映像とともに表示手段3に表示する。
【0065】
図8は良画素及び不良画素のマハラノビスの距離の分布を表す図である。図8に示すように、点欠陥、シミ、むら等の欠陥ではその現れ方が異なるが、マハラノビスの距離だけで良画素との比較を行い、良否を判断することができる。また、検査条件が異なったとしてもマハラノビスの距離による算出方法は同じであり、同条件の良画素との距離差により良否を判断することができる。ここで、良否判断の基準は、パネルの種類、要求されるグレード(品質の高さ)によって任意に定めることができるが、場合によっては不良なパネル画素は存在するものの、そのパネル画素が画面全体に点在しているために、パネル(画面)としては良品と判断することもある。ただ、各パネル画素については良画素と判断しながら、全体として不良画面となるような基準の設定は避けた方がよい。
【0066】
以上のように第1の実施の形態によれば、人間の眼の分解能に基づいて処理すべき輝度値データのデータ数(量)を算出するようにしたので、検査対象となるパネルの種類に関係なく、人間の能力に基づいたパネル画素毎の検査を行うことができる。また、2.0の視力の分解能を基準とすれば、ほとんどの人の眼の分解能をカバーすることができる。そして、距離演算部1Dがパネル画素毎にマハラノビスの距離を算出するようにし、検査判断部1Eが距離差に基づいた画面(画素)の良否判断を行うようにしたので、良否判断の基準をマハラノビスの距離だけの数値にすることができる。しかもこの判断は、例えば、パネル種類、印加電圧等のような条件下での良画素との距離差に基づいて行われるので、条件が異なったとしても、演算方法が異なることもなく、良否判断を行うことができる。また、良画素を基準とする判断を行うことができ、良画素との距離差により不良の度合いを数値化することができる。また、逆行列演算部1Bが逆行列を算出する際、各位置の撮像画素間の相関関係を演算の過程で算出するので、妥当性の評価を行うことができる。また、マハラノビスの距離の分布によって、不良画素の多さ、その具合(各画素の良画素からの距離の分布具合等)等に基づく各装置(製品)のグレード(品質)も判断することができ、ランク分けを行うこともできる。
【0067】
実施の形態2.
図9は本発明の第2の実施の形態に係る画像処理装置10Aを中心とするシステムの構成を示すブロック図である。図9において、図1と同じ符号を付しているものは、第1の実施の形態で説明したことと同様の動作を行うので説明を省略する。画像処理装置10Aは、処理手段1の代わりに処理手段1a構成されている点で画像処理装置10とは異なる。処理手段1aは、逆行列演算部1Bの代わりに直交展開演算部1G及び直交変数演算部1Hを有している点及び距離演算部1Dのマハラノビスの距離算出手順が異なる点で処理手段1とは異なる。
【0068】
直交展開演算部1Gは、サンプルのパネル画素による基準化値に基づいて直交展開を行い、後述する回帰係数、残差成分の値(以下、残差成分値という)及びその残差成分の分散に基づく値(以下、分散という)を算出し、これをデータとする。また、実際に液晶パネル100を検査する場合には、算出した回帰係数及び分散のデータを利用して、液晶パネル100に基づく基準化値データにより残差成分値を算出し、これをデータとする。直交変数演算部1Hは、直交展開演算部1Gが算出した残差成分値のデータに基づいて、直交変数の値(以下、直交変数値という)を算出し、これをデータとする。距離演算部1Dは直交変数値のデータに基づいて、液晶パネル100のパネル画素毎のマハラノビスの距離を算出する。
【0069】
上述の第1の実施の形態では相関行列及びその逆行列を算出し、その要素及び基準化値に基づいてマハラノビスの距離を算出した。この方法では、撮像画素間の相関係数が算出されるので相関関係を把握しやすいという利点がある。ただ、第1の実施の形態のような場合、相関行列は169×169の要素を有することになる。したがって、逆行列を算出する際の演算量は大変多く、時間を要する。また、通常、コンピュータ等の演算装置は、演算に際して一定の桁数までしか扱えないので、逆行列を算出する際、途中で桁落ちが行わる可能性が高い。したがって、最終的に算出された逆行列の要素の値が、算出されたマハラノビスの距離に影響を与えるほどに真の値と異なる場合もある。これらは特に行列数(要素数)が多くなるほど顕著に顕れる。そこで、本実施の形態ではマハラノビス・タグチ・シュミット(MTS)と呼ばれる、シュミットの直交展開を利用したマハラノビスの距離の算出方法について説明する。これにより、逆行列の演算処理を行わずにすみ、演算量を抑えることができるし、記憶手段4に一時的に記憶させておくデータ量も少なくてすむ。しかも、逆行列の計算に比べると複雑で大量の計算を行わないのでその間の桁落ちを抑えることができる。
【0070】
また、本実施の形態の方法では、ある項目(ここでは、各位置の輝度値)の回帰係数及び分散に基づいて次の項目の回帰係数、残差成分値及び分散の算出が行われる。したがって、マハラノビスの距離に特に影響を与える項目(例えば、パネル画素のある位置における輝度値データ、ここでは示していないが彩度等)が存在する場合、優先的にその項目の回帰係数及び分散を算出するようにしておくことで、実際の検査の演算過程において、検査精度の高さ、製品のグレードの高さ等に応じて直交変数値の算出具合を変化させることもできる(ここで、本実施の形態ではパネル画素の各位置の輝度値データ(全ての撮像画素)を同等に扱っているので、特に優先する項目はない)。
【0071】
次にMTSを利用したマハラノビスの距離の算出方法について説明する。その前段階となる回帰係数及び分散を良画素のサンプルに基づいて算出する。まず、基準化値データを算出するに至るまでの平均・標準偏差演算部1A及び基準化値データ演算部1Cの演算処理は、第1の実施の形態で説明したことと同じような処理を行うので説明を省略する。
【0072】
直交展開演算部1Gは、基準化値データに基づいて、例えば、(1,2)の基準化値の残差成分値を、(1,2)の基準化値、(1,1)の残差成分値及び回帰係数で表す。また、(1,3)の基準化値の残差成分値を、(1,3)の基準化値、(1,1)の残差成分値、(1,2)の残差成分値及びそれぞれの回帰係数で表す。これを本実施の形態では(1,1)、…、(1,13)、(2,1)、…の順に(13,13)まで行う。ここで(1,1)については、残差成分値は基準化値と同じになる。残差成分とは、ある項目(ここでは、(1,2)の輝度値とする)のある(パネル画素の)基準化値の成分のうち、それ以前の項目(ここでは、(1,1)の輝度値となる)と独立する(直交する)成分のことである。つまり、それ以前の項目の残差成分と関係する部分(回帰部分)を除き、それらで表せない成分がそのパネル画素のその項目(位置)での残差成分となる。また、ある項目での回帰係数は、その項目の基準化値、それ以前の項目の残差成分値、それ以前の項目の残差成分の分散により算出される係数である。分散はサンプルにおいて算出された残差成分の自乗の和に基づいて算出される値である。これを繰り返していくと、例えば(13,13)の残差成分値は、(1,1)、…、(13,12)の残差成分値によって表されることになる。ここで、本実施の形態では(1,1)、…、(1,13)、(2,1)、…の順に行っているが、順序を変えて行っても最終的には同じ結果(マハラノビスの距離)が得られると考えられる。
【0073】
このことから考えると、マハラノビスの距離に影響を与える重要項目順に回帰係数及び分散を確定することができる。したがって、実際に液晶パネル100の各輝度値データ(基準化値データ)に基づいて直交変数値を算出する段階において、直交変数演算部1Hは、ある一定の項目までの基準化値データに基づいて直交変数値を算出し、その他の項目の直交変数値の演算を省略しても、真の距離に近似したマハラノビスの距離を算出できる場合がある。また、場合によっては、回帰係数及び分散を算出しなくても、誤差範囲内で真の距離に近似したマハラノビスの距離を算出することもできる。
【0074】
次に実際に液晶パネル100の検査に基づく輝度値データの処理について説明する。カメラ20から送信された信号に基づいて輝度値データ取得部1Fが取得した輝度値データを基準化値データ演算部1Cが処理し、基準化値データとするまでの処理については第1の実施の形態と同様である。
【0075】
直交展開演算部1Gは、回帰係数及び分散に基づいて液晶パネル100の各輝度値データに基づく残差成分値を算出する。そして、直交変数演算部1Hは、直交展開演算部1Gが算出した残差成分値及び分散に基づいて直交変数を算出する。具体的には残差成分値を分散の平方根で割った値が直交変数値となる。
【0076】
距離演算部1Dは、算出した直交変数値に基づいてパネル画素のマハラノビスの距離を算出し、データとする。これを全てのパネル画素について行う。具体的には各直交変数値の自乗の和を項目数(本実施の形態では169となる)で割ったものがマハラノビスの距離となる。ここで、各パネル画素のマハラノビスの距離の算出結果は第1の実施の形態と同じものとなる。以後の検査判断部1Eの良否判断の処理は第1の実施の形態と同様の動作を行うので説明を省略する。
【0077】
以上のように第2の実施の形態によれば、直交展開演算部1Gによって、シュミットの直交展開を利用して回帰係数及び分散を算出しておき、実際の液晶パネル100のパネル画素のマハラノビスの距離の算出には、直交展開演算部1G及び直交変数演算部1Hが算出した残差成分値及び直交変数値に基づいて距離演算部1Dがマハラノビスの距離を算出するようにしたので、マハラノビスの距離を算出する際の演算量及びその際に一時的に演算値を記憶させる記憶量(メモリ)を減らすことができる。また、回帰係数及び残差成分の分散を算出する際に、マハラノビスの距離に影響を与える項目順にこれらの値を算出しておくことで、残差成分値、直交変数値又はマハラノビスの距離を算出する際に、それぞれの演算を誤差範囲内において途中で切り上げることもできるので、距離算出又は良否判断までの時間を短縮させることもできる。
【0078】
実施形態3.
上述の実施の形態では、特にその関連を説明しなかったが、パネル画素の位置とマハラノビスの距離とを関連づけておくようにする。というのは、例えば、良画素の分布からのマハラノビスの距離があるパネル画素が多数存在するものと判断された場合であっても、その画素の位置の集まり具合によって、むら、シミとなる場合もあればならない場合もある。また、点欠陥についても同様であり、点欠陥が分散して点在していれば、良好な液晶パネルと判断される場合もある。また、欠陥がパネルの隅にある場合と中央にある場合とでも良否判断が異なる場合もあるからである。
【0079】
実施形態4.
上述の実施の形態は被検査対象物である液晶パネル100を液晶プロジェクタに用いられるものを前提に説明しているが、本発明本発明の検査対象はこれに限定されるものではなく、ディスプレイに用いられるパネルでもよい。
【0080】
実施形態5.
上述の実施の形態は被検査対象物である液晶パネル100をカメラ20で撮像し、マハラノビスの距離を算出して良否判断を行った。本発明ではこれに限定されるものではなく、被検査対象が発生させる物理量を、例えば色が付された画像として処理できれば、画面の輝度の検査だけではなく、様々な被検査対象の検査をマハラノビスの距離を利用して行うことができる。また、この方法を応用すれば、逆にカメラ20のような撮像手段の撮像画素の検査も、マハラノビスの距離を利用して行うこともできる。さらに、撮像手段だけでなく、サーモグラフィを利用した温度センサをはじめ、音響センサ等の手段についても、例えばセンシング状態を画像化し、検査することもできる。
【図面の簡単な説明】
【図1】画像処理装置を中心とするシステムの構成図である。
【図2】最小分解能を決定する方法を示す図である。
【図3】各視力値におけるランドルト氏環の寸法を表す図である。
【図4】検査を行う際の投影サイズの関係を表す図である。
【図5】1つのパネル画素の輝度値の分布を3次元で表した図である。
【図6】1つのパネル画素の輝度値の分布を2次元に展開した図である。
【図7】マハラノビスの距離と輝度値のグラフである。
【図8】良画素及び不良画素の距離の分布を表す図である。
【図9】画像処理装置10Aを中心とするシステムの構成図である。
【符号の説明】
1、1a 処理手段、1A 平均・標準偏差演算部、1B 逆行列演算部、1C基準化値データ演算部、1D 距離演算部、1E 検査判断部、1F 輝度値データ取得部、1G 直交展開演算部、1H 直交変数演算部、2 入力手段、3 表示手段、4 記憶手段、10、10A 画像処理装置、20 カメラ、100 液晶パネル

Claims (29)

  1. 被検査対象の表示画面を評価するための画像処理方法において、
    前記表示画面の画素に基づく輝度のデータを処理し、前記表示画面の良否を判断することを特徴とする画像処理方法。
  2. 画素を2次元の位置に分解し、各位置で得られた複数の輝度のデータを、ある方向に基づいて各位置の輝度のデータを並べるように変換して処理し、マハラノビスの距離を算出することを特徴とする画像処理方法。
  3. 良画素と判断した画素を複数サンプルとして用い、マハラノビスの距離を算出するための単位空間を作成することを特徴とする請求項2記載の画像処理方法。
  4. 画像処理を行うための基準の範囲を分解して得られたデータを、任意に選択した順に処理し、マハラノビスの距離を算出することを特徴とする画像処理方法。
  5. 前記基準の範囲における位置に基づいて、前記データを選択することを特徴とする請求項2記載の画像処理方法。
  6. 人間の眼の分解能に基づいて前記基準の範囲を分解することを特徴とする請求項2記載の画像処理方法。
  7. 被検査対象の表示画面を撮像手段が撮像して得られたデータを処理し、前記被検査対象の表示画面の良否を検査するための画像処理方法において、
    人間の眼の分解能に基づいて処理すべきデータ量を算出し、算出した前記データ量が得られる前記撮像手段によって前記被検査対象を撮像して得られたデータに基づいて画像処理を行うことを特徴とする画像処理方法。
  8. ランドルト氏環に基づく視力の分解能を前記人間の眼の分解能の基準とすることを特徴とする請求項6又は7記載の画像処理方法。
  9. 被検査対象に表示された画面を撮像手段が撮像して得られたデータを処理し、前記被検査対象の表示画面の良否を検査するための画像処理方法において、
    前記得られたデータに基づいて、基準となる範囲毎に、前記良否の判断の基準となるマハラノビスの距離を算出することを特徴とする画像処理方法。
  10. 画面の構成単位である画素を、前記基準の範囲とすることを特徴とする請求項4又は9記載の画像処理方法。
  11. 前記データは、発光による輝度に基づいて得られるものであることを特徴とする請求項3〜10のいずれかに記載の画像処理方法。
  12. 前記表示画面における各画素の位置と前記各画素のマハラノビスの距離とを関連づけて、前記表示画面の各画素によるマハラノビスの距離の分布に基づいて表示画面の良否を検査することを特徴とする請求項10記載の画像処理方法。
  13. 被検査対象より得られたデータを画像処理して欠陥の有無を検査するための画像処理方法において、
    前記得られたデータに基づいて、前記欠陥の有無の判断の基準となるマハラノビスの距離を算出することを特徴とする画像処理方法。
  14. 前記マハラノビスの距離を算出するために、前記データに対してシュミットの直交展開に基づいた処理を行うことを特徴とする請求項9又は13記載の画像処理方法。
  15. 印加する電圧に基づいて表示階調が異なる画面について、任意の電圧において良と判断した画素により単位空間からのマハラノビスの距離を算出することを特徴とする請求項10記載の画像処理方法。
  16. 被検査対象の表示画面の画素に基づく輝度のデータを処理する演算処理手段と、
    前記演算処理手段が処理した結果に基づいて前記表示画面の良否を判断する検査判断手段と
    を備えたことを特徴とする画像処理装置。
  17. 被検査対象に表示された画面を撮像手段が撮像して得られたデータを処理し、前記被検査対象の表示画面の良否を検査するための画像処理装置において、
    良画素のサンプルによってあらかじめ得られたデータの平均値及び標準偏差に基づいて、前記被検査対象に表示された画面を撮像手段が撮像して得られたデータを基準化した基準化値をデータとして算出する基準化値データ演算手段と、
    前記基準化値に基づいて、前記検査対象の画面を構成する画素毎にマハラノビスの距離をデータとして算出する距離演算手段と、
    前記マハラノビスの距離のデータに基づいて前記被検査対象に表示された画面の良否を判断する検査判断手段と
    を備えたことを特徴とする画像処理装置。
  18. 前記良画素のサンプルによってあらかじめ得られたデータを基準化し、各データの相関関係に基づく相関行列の逆行列を算出しておき、
    前記距離演算手段は、前記逆行列の各要素及び前記基準化値に基づいて前記マハラノビスの距離を算出することを特徴とする請求項17記載の画像処理装置。
  19. 直交展開演算手段及び直交変数演算手段をさらに備え、
    前記良画素のサンプルによってあらかじめ得られたデータを基準化し、シュミットの直交展開を利用してそれぞれのデータに基づいて回帰係数及び残差成分の分散に基づく値を算出しておき、
    前記直交展開演算手段は、前記基準化値データに基づいて撮像手段が撮像して得られたデータについて算出した残差成分の値をデータとして算出し、
    前記直交変数演算手段は、前記直交展開演算手段が算出した前記残差成分の値及び前記分散に基づく値により直交変数の値をデータとして算出し、
    前記距離演算手段は、前記直交変数の値のデータに基づいてマハラノビスの距離を算出することを特徴とする請求項17記載の画像処理装置。
  20. 前記撮像手段の撮像により得られるデータのデータ量を、人間の眼の分解能に基づいて決定することを特徴とする請求項17記載の画像処理装置。
  21. 被検査対象に表示された画面を撮像した撮像手段から送信された輝度を表す信号に基づいて輝度値データを作成する輝度値データ取得手段をさらに備えたことを特徴とする請求項17記載の画像処理装置。
  22. 前記距離演算手段は、算出した前記各画素のマハラノビスの距離と前記表示画面における各画素の位置とを関連づけて、前記検査判断手段は、前記表示画面の各画素によるマハラノビスの距離の分布に基づいて表示画面の良否を判断することを特徴とする請求項17記載の画像処理装置。
  23. 被検査対象の表示画面を評価させる画像処理方法のプログラムにおいて、
    前記表示画面の画素に基づく輝度のデータを処理させて前記表示画面の良否を判断させる
    ことを処理手段に行わせることを特徴とする画像処理方法のプログラム。
  24. 2次元空間の画素を分解して得られた輝度のデータを1次元空間の輝度のデータに変換させ、
    変換した輝度値のデータを処理させてマハラノビスの距離を算出させる
    ことを処理手段に行わせることを特徴とする画像処理方法のプログラム。
  25. 被検査対象の表示画面を撮像手段が撮像して得られたデータを処理し、前記被検査対象の表示画面の良否を検査するための画像処理方法において、
    人間の視力が有する分解能に基づいて処理すべきデータ量を算出させ、算出させた前記データ量が得られる前記撮像手段によって前記被検査対象を撮像して得られたデータに基づいて、前記検査対象の画面を構成する画素毎に画像処理させる
    ことを処理手段に行わせることを特徴とする画像処理方法のプログラム。
  26. 被検査対象に表示された画面を撮像手段が撮像して得られたデータを処理させ、前記被検査対象の表示画面の良否を検査させるための画像処理方法のプログラムにおいて、
    前記得られたデータに基づいて、前記検査対象の画面を構成する画素毎に、前記良否の判断の基準となるマハラノビスの距離を算出させる
    ことを処理手段に行わせることを特徴とする画像処理方法のプログラム。
  27. 前記表示画面における各画素の位置と前記各画素のマハラノビスの距離とを関連づけさせ、前記表示画面の各画素によるマハラノビスの距離の分布に基づいて表示画面の良否を検査させる
    ことを処理手段に行わせることを特徴とする請求項26記載の画像処理方法のプログラム。
  28. 被検査対象より得られたデータを画像処理させて欠陥の有無を検査させるための画像処理方法のプログラムにおいて、
    前記得られたデータに基づいて、前記欠陥の有無の判断の基準となるマハラノビスの距離を算出させる
    ことを処理手段に行わせることを特徴とする画像処理方法のプログラム。
  29. 前記マハラノビスの距離を算出させるために、前記データに対してシュミットの直交展開に基づいた処理を行わせることを特徴とする請求項26又は28記載の画像処理方法のプログラム。
JP2002262695A 2002-09-09 2002-09-09 画像処理装置 Expired - Fee Related JP4218291B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002262695A JP4218291B2 (ja) 2002-09-09 2002-09-09 画像処理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002262695A JP4218291B2 (ja) 2002-09-09 2002-09-09 画像処理装置

Publications (2)

Publication Number Publication Date
JP2004101338A true JP2004101338A (ja) 2004-04-02
JP4218291B2 JP4218291B2 (ja) 2009-02-04

Family

ID=32262679

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002262695A Expired - Fee Related JP4218291B2 (ja) 2002-09-09 2002-09-09 画像処理装置

Country Status (1)

Country Link
JP (1) JP4218291B2 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100841497B1 (ko) 2006-09-07 2008-06-25 가부시끼가이샤 도시바 불균일 검사 방법, 표시 패널의 제조 방법 및 불균일 검사장치
JP2010276481A (ja) * 2009-05-28 2010-12-09 Alps Electric Co Ltd 画像処理装置
JP2013104937A (ja) * 2011-11-11 2013-05-30 Toshiba Corp 表示処理装置及び表示処理方法
JP2015059766A (ja) * 2013-09-17 2015-03-30 ソニー株式会社 検査方法および検査装置
WO2021201205A1 (ja) * 2020-04-03 2021-10-07 パナソニックIpマネジメント株式会社 表面状態の評価方法、表面状態の評価装置、及び、プログラム

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100841497B1 (ko) 2006-09-07 2008-06-25 가부시끼가이샤 도시바 불균일 검사 방법, 표시 패널의 제조 방법 및 불균일 검사장치
JP2010276481A (ja) * 2009-05-28 2010-12-09 Alps Electric Co Ltd 画像処理装置
JP2013104937A (ja) * 2011-11-11 2013-05-30 Toshiba Corp 表示処理装置及び表示処理方法
JP2015059766A (ja) * 2013-09-17 2015-03-30 ソニー株式会社 検査方法および検査装置
WO2021201205A1 (ja) * 2020-04-03 2021-10-07 パナソニックIpマネジメント株式会社 表面状態の評価方法、表面状態の評価装置、及び、プログラム

Also Published As

Publication number Publication date
JP4218291B2 (ja) 2009-02-04

Similar Documents

Publication Publication Date Title
KR100954703B1 (ko) 결함을 검출하는 방법 및 시스템
JP6288249B2 (ja) 目視検査支援装置、目視検査支援方法及び目視検査支援プログラム
JP2016114592A (ja) 情報処理装置、情報処理方法、プログラム
WO2017202114A1 (zh) 确定用于检测的光照强度的方法和装置、及光学检测方法和装置
WO2020079694A1 (en) Optimizing defect detection in an automatic visual inspection process
JP2022507678A (ja) 自動目視検査プロセスにおけるセットアップ段階の最適化
JP2004101338A (ja) 画像処理方法及び装置並びに画像処理方法のプログラム
JP2019105460A (ja) 診断方法、プログラム、診断装置、および学習済みモデル
JPH1096696A (ja) 対象物にあるむらの検査方法および装置
JPWO2020071086A1 (ja) 情報処理装置、制御方法、及びプログラム
TWI477768B (zh) 平面基板之自動光學檢測方法及其裝置
KR20220111214A (ko) 인공지능 기반 제품 결함 검사 방법, 장치 및 컴퓨터 프로그램
KR101695531B1 (ko) 비전영상 기반 객체 검사 인증 시스템
JP2004170374A (ja) 表面欠陥検出装置、及び表面欠陥検出方法
JP7078543B2 (ja) 多方向の照明及び関連デバイスによって表面上の欠陥を検出するための方法
JP2004206498A (ja) 画像処理方法及び装置並びに画像処理方法のプログラム
JP2006145228A (ja) ムラ欠陥検出方法及び装置
JP2006250876A (ja) 光学パネル検査方法、光学パネル検査装置、光学パネル検査プログラムおよびこのプログラムを記録した記録媒体
US11748925B2 (en) Surface inspection apparatus, non-transitory computer readable medium storing program, and surface inspection method
US20240078651A1 (en) Assessment device and assessment method
KR20190075283A (ko) 금속입자 검출 시스템 및 방법
EP4010873B1 (en) Use of an hdr image in a visual inspection process
TWI840374B (zh) 用於檢測半導體裝置之缺陷之系統及方法
JP2007285753A (ja) 欠陥検出方法および欠陥検出装置
JP2000278721A (ja) 表示装置の画質確認方法およびそのための装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050121

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071205

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080108

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080415

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080606

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080729

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080916

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081021

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081103

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111121

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111121

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121121

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121121

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131121

Year of fee payment: 5

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees