JP2021018208A - 判定方法 - Google Patents

Abstract

【課題】照明透過部によって表される記号の輝度ムラを適切に判定することが可能な判定方法を提供する。【解決手段】判定方法は、照明透過部によって表される記号の輝度ムラを記号の撮像画像に基づいて判定するものであり、記号の構成および形状に応じて、記号を複数の判定対象部に分割するステップと、複数の判定対象部毎に輝度ムラを判定するステップと、複数の判定対象部のうちの少なくとも一つの判定対象部において輝度ムラが有ると判定された場合に、記号に輝度ムラが有ると判定するステップとを備える。【選択図】図８

Description

本発明は、判定方法に関する。

従来、ディスプレイの輝度ムラを判定する判定方法が知られている（たとえば、特許文献１参照）。この判定方法では、ディスプレイを撮像した撮像画像に対して演算処理を施すことにより、ディスプレイの輝度ムラが判定される。

特開２００９−１８０５８３号公報

ここで、たとえば、車両のスイッチの操作面に照明透過部が設けられ、その照明透過部によって表される記号（スイッチ内から照明透過部を介して外部に出射される光によって構成される記号）によりスイッチの機能がユーザに報知されるものがある。このような照明透過部によって表される記号においても輝度ムラが発生する場合があり、その輝度ムラを適切に判定することが望まれる。

本発明は、上記の課題を解決するためになされたものであり、本発明の目的は、照明透過部によって表される記号の輝度ムラを適切に判定することが可能な判定方法を提供することである。

本発明による判定方法は、照明透過部によって表される記号の輝度ムラを記号の撮像画像に基づいて判定するものであり、記号の構成および形状に応じて、記号を複数の判定対象部に分割するステップと、複数の判定対象部毎に輝度ムラを判定するステップと、複数の判定対象部のうちの少なくとも一つの判定対象部において輝度ムラが有ると判定された場合に、記号に輝度ムラが有ると判定するステップとを備える。

このように構成することによって、記号の構成および形状に応じた複数の判定対象部に分割して、複数の判定対象部毎に輝度ムラを判定することにより、記号の輝度ムラを適切に判定することができる。

本発明の判定方法によれば、照明透過部によって表される記号の輝度ムラを適切に判定することができる。

判定システムを示したブロック図である。 スイッチの第１例を示した図である。 スイッチの第２例を示した図である。 スイッチの第３例を示した図である。 スイッチの第４例を示した図である。 スイッチの第５例を示した図である。 本実施形態の判定方法を説明するためのフローチャート（その１）である。 本実施形態の判定方法を説明するためのフローチャート（その２）である。 本実施形態の判定方法を説明するためのフローチャート（その３）である。 本実施形態の判定方法を説明するためのフローチャート（その４）である。 本実施形態の判定方法における低輝度セルの検出を説明するための図である。

以下、本発明の一実施形態を説明する。

まず、図１〜図６を参照して、本発明の一実施形態による判定方法を実行可能な判定システム１００の構成について説明する。

判定システム１００は、スイッチの照明透過部によって表される記号の輝度ムラを判定するように構成されている。スイッチは、たとえば車両（図示省略）の車室内に設置可能に構成され、ユーザによって操作される操作面を有する。スイッチの操作面には照明透過部が設けられ、その照明透過部によって表される記号によりスイッチの機能がユーザに報知されるようになっている。この判定システム１００による輝度ムラの判定が行われるスイッチの記号の一例としては、スイッチ５１〜５５の記号Ｓｉ１〜Ｓｉ５（図２〜図６参照）を挙げることができる。

スイッチ５１では、図２に示すように、操作面に照明透過部５１ａが設けられ、内部に光源（図示省略）が設けられている。照明透過部５１ａは、スピーカの形状を模した図形状に形成されている。そして、スイッチ５１は、スピーカスイッチであり、イルミネーションオン時に照明透過部５１ａによって表される記号Ｓｉ１が点灯されるようになっている。記号Ｓｉ１は、スイッチ５１内の光源から照明透過部５１ａを介して外部に出射される光によって構成される。

スイッチ５２では、図３に示すように、操作面に照明透過部５２ａおよび５２ｂが設けられ、内部に光源（図示省略）が設けられている。照明透過部５２ａは、シートの形状を模した図形状に形成され、照明透過部５２ｂは、ファンの形状を模した図形状に形成されている。そして、スイッチ５２は、シートベンチレーションスイッチであり、イルミネーションオン時に照明透過部５２ａおよび５２ｂによって表される記号Ｓｉ２が点灯されるようになっている。記号Ｓｉ２は、スイッチ５２内の光源から照明透過部５２ａおよび５２ｂを介して外部に出射される光によって構成される。

スイッチ５３では、図４に示すように、操作面に照明透過部５３ａおよび５３ｂが設けられ、内部に光源（図示省略）が設けられている。照明透過部５３ａおよび５３ｂは、格納状態のドアミラーの形状を模した図形状に形成されている。そして、スイッチ５３は、ドアミラー格納スイッチであり、イルミネーションオン時に照明透過部５３ａおよび５３ｂによって表される記号Ｓｉ３が点灯されるようになっている。記号Ｓｉ３は、スイッチ５３内の光源から照明透過部５３ａおよび５３ｂを介して外部に出射される光によって構成される。

スイッチ５４では、図５に示すように、操作面に照明透過部５４ａおよび５４ｂが設けられ、内部に光源（図示省略）が設けられている。照明透過部５４ａは、英文字「Ｏ」の形状を模した文字状に形成され、照明透過部５４ｂは、英文字「Ｋ」の形状を模した文字状に形成されている。そして、スイッチ５４は、決定スイッチであり、イルミネーションオン時に照明透過部５４ａおよび５４ｂによって表される記号Ｓｉ４が点灯されるようになっている。記号Ｓｉ４は、スイッチ５４内の光源から照明透過部５４ａおよび５４ｂを介して外部に出射される光によって構成される。

スイッチ５５では、図６に示すように、操作面に照明透過部５５ａ〜５５ｇが設けられ、内部に光源（図示省略）が設けられている。照明透過部５５ａは、英文字「Ｐ」の形状を模した文字状に形成され、照明透過部５５ｂは、英文字「Ｏ」の形状を模した文字状に形成され、照明透過部５５ｃは、英文字「Ｗ」の形状を模した文字状に形成され、照明透過部５５ｄは、英文字「Ｅ」の形状を模した文字状に形成され、照明透過部５５ｅは、英文字「Ｒ」の形状を模した文字状に形成されている。また、照明透過部５５ｆおよび５５ｇは、照明透過部５５ｆが切欠を有する円形状に形成されるとともに、照明透過部５５ｇがその切欠に配置される棒状に形成されており、全体で電源マークの図形状に形成されている。そして、スイッチ５５は、パワースイッチであり、イルミネーションオン時に照明透過部５５ａ〜５５ｇによって表される記号Ｓｉ５が点灯されるようになっている。記号Ｓｉ５は、スイッチ５５内の光源から照明透過部５５ａ〜５５ｇを介して外部に出射される光によって構成される。

上記で例示したように、判定システム１００により輝度ムラが判定される記号は、図形および文字を含んでいる。記号における図形は、複数の構成要素によって構成されている場合があり、その場合には、各構成要素が独立した１つのものとして認識される場合と、複数の構成要素の組合せで１つのものと認識される場合とがある。

たとえば、記号Ｓｉ１（図２参照）は図形のみであり、その図形は１つの構成要素によって構成されている。記号Ｓｉ２（図３参照）は図形のみであり、その図形は２つの構成要素によって構成され、その２つの構成要素は個別のものと認識される。具体的には、記号Ｓｉ２の図形は、シートの図形とファンの図形との組合せと認識される。記号Ｓｉ３（図４参照）は図形のみであり、その図形は２つの構成要素によって構成され、その２つの構成要素の組合せで１つのものと認識される。具体的には、記号Ｓｉ３の図形は、全体で格納状態のドアミラーの図形と認識される。記号Ｓｉ４（図５参照）は文字のみであり、各文字は個別のものと認識される。記号Ｓｉ５（図６参照）は図形および文字の組合せであり、図形は２つの構成要素によって構成され、その２つの構成要素の組合せで１つのものと認識され、各文字は個別のものと認識される。なお、記号Ｓｉ５の図形は、全体で電源マークの図形と認識される。

判定システム１００は、図１に示すように、撮像装置１および判定装置２を備え、スイッチの照明透過部によって表される記号の輝度ムラをその記号の撮像画像に基づいて判定するように構成されている。

撮像装置１は、判定対象のスイッチの記号を点灯させた状態で撮像するように構成されている。すなわち、撮像装置１は、照明透過部から光が出射されている状態の記号を撮像するようになっている。具体的に、撮像装置１は、記号を含む操作面の所定領域を撮像し、その撮像結果（撮像画像）を判定装置２に送信するように構成されている。なお、撮像装置１による記号の撮像は、車両に設置される前のスイッチ単独の状態で行われるようにしてもよいし、車両に組み付けられた状態のスイッチに対して行われるようにしてもよい。

判定装置２は、撮像装置１により撮像された撮像画像に基づいて記号の輝度ムラを判定するように構成されている。具体的に、判定装置２は、判定対象のスイッチが撮像された撮像画像に対して後述する判定方法を行うことにより、記号における輝度ムラの有無を判定するように構成されている。この判定装置２は、制御部２１と、記憶部２２と、通信部２３と、画像処理部２４とを含んでいる。

制御部２１は、演算処理を実行することにより判定装置２を制御するように構成されている。記憶部２２には、撮像装置１により撮像された撮像画像などが格納されている。通信部２３は、撮像装置１と通信するために設けられ、撮像装置１から撮像画像を受信するように構成されている。画像処理部２４は、撮像画像に対して各種処理を施すように構成されている。

−判定方法−
次に、図７〜図１１を参照して、本実施形態による判定方法について説明する。この判定方法は、判定対象のスイッチの照明透過部によって表される記号の輝度ムラを、撮像装置１により撮像された撮像画像に基づいて判定するものである。なお、判定方法は、たとえば判定対象のスイッチ毎（撮像画像毎）に行われる。

まず、図７のステップＳ１において、画像処理部２４（図１参照）により、撮像画像における各セル（各画素）の輝度情報が算出される。この撮像画像は、判定対象のスイッチの記号を含む操作面が撮像装置１によって撮影された画像である。なお、撮像画像において、操作面の照明透過部以外の部分と対応する領域のセルは、操作面の照明透過部と対応する領域のセルに比べて、輝度が非常に低くなっている。

次に、ステップＳ２において、画像処理部２４により、撮像画像において記号と対応する領域（照明透過部と対応する領域）のセルの輝度情報が抽出される。たとえば、算出された輝度情報を用いて操作面の照明透過部と照明透過部以外の部分とを区分可能であり、操作面の照明透過部以外の部分と対応する領域のセルに関する輝度情報が取り除かれる。

次に、ステップＳ３において、制御部２１（図１参照）により、抽出された記号と対応する領域のセルの平均輝度が算出される。たとえば、操作面の照明透過部と対応する領域の各セルの輝度情報に基づいてその領域の平均輝度を算出し、平均輝度を１００として領域の各セルを輝度情報に応じてスコア化する。このため、記号と対応する領域において、平均輝度よりも輝度が高いセルには１００よりも高いスコアが割り当てられ、平均輝度よりも輝度が低いセルには１００よりも低いスコアが割り当てられる。図１１は、スイッチ５３（図４参照）の撮像画像から記号Ｓｉ３（図４参照）が抽出された後に、記号Ｓｉ３と対応する領域のセルがスコア化された状態における、照明透過部５３ｂ（図４参照）と対応する領域Ｒを拡大して示した図である。領域Ｒの各セルＣには平均輝度に対するスコアが表示され、領域Ｒの周囲のセル（照明透過部以外の部分と対応する領域のセル）Ｃは輝度情報が除去されてブランクになっている。なお、領域Ｒの全てのセルＣのスコアが１００よりも低いが、記号Ｓｉ３と対応する領域の平均輝度が１００であることから、この場合、照明透過部５３ａ（図４参照）と対応する領域にスコアが１００よりも高いセルがある。

次に、ステップＳ４において、制御部２１により、記号と対応する領域の中から低輝度セルが検出される。たとえば、記号と対応する領域において、スコアが所定値未満（たとえば、８０未満）のセルが低輝度セルとして検出される。図１１の例では、領域Ｒの全てのセルＣが低輝度セルとして検出され、この場合には、照明透過部５３ａと対応する領域に低輝度セルとして検出されないセルが存在する。

次に、ステップＳ５において、制御部２１により、低輝度セルが集まっているか否かが判断される。たとえば、低輝度セルが２行２列の４セル以上集合している場合（低輝度セルが田の字状に集合している場合）に、低輝度セルが集まっていると判断される。そして、低輝度セルが集まっていると判断された場合には、ステップＳ６に移る。その一方、低輝度セルが集まっていないと判断された場合（低輝度セルが無い場合や低輝度セルが分散されている場合）には、ステップＳ１０に移る。

次に、ステップＳ６において、制御部２１により、記号全体で輝度ムラが判定される。この輝度ムラの判定は以下の式（１）を用いて行われる。

式（１）において、Ｓ_aは、記号と対応する領域の面積（記号全体の面積）であり、Ｓ_adは、記号と対応する領域における低輝度セルの面積（低輝度面積）である。また、ａとｂとｃとは、それぞれ予め設定された係数である。このため、式（１）では、記号全体の面積に対する低輝度面積の割合と低輝度面積の大きさとが輝度ムラの有無を判定するための特徴量として設定されており、ユーザが受ける刺激の強度がウェーバー−フェヒナーの法則を用いて感覚量に置き換えられている。式（１）の第１項は、記号全体の面積に対する低輝度面積の割合を刺激の強度とした場合の感覚量に相当し、式（１）の第２項は、低輝度面積の大きさを刺激の強度とした場合の感覚量に相当する。

上記した式（１）は、以下の式（２）に変換可能である。そして、たとえば、式（２）のＦ_a＞０の場合には、記号全体で輝度ムラ有りと判定され、式（２）のＦ_a≦０の場合には、記号全体で輝度ムラ無しと判定される。

次に、ステップＳ７において、制御部２１により、記号全体で輝度ムラ有りと判定されたか否かが判断される。そして、記号全体で輝度ムラ有りと判定された場合には、ステップＳ８に移る。その一方、記号全体で輝度ムラ無しと判定された場合には、図１０のステップＳ３１に移る。

次に、ステップＳ８において、記号が図形および文字の組合せであるか否かが判断される。この判断は、たとえばユーザによって行われる。そして、記号が図形および文字の組合せではないと判断された場合（記号が図形または文字のみからなる場合）には、ステップＳ９に移る。その一方、記号が図形および文字の組合せであると判断された場合には、図８のステップＳ１１に移る。なお、記号が図形または文字のみからなる場合の一例としては、記号Ｓｉ１（図２参照）、記号Ｓｉ２（図３参照）、記号Ｓｉ３（図４参照）および記号Ｓｉ４（図５参照）を挙げることができ、記号が図形および文字の組合せである場合の一例としては、記号Ｓｉ５（図６参照）を挙げることができる。

そして、記号全体で輝度ムラ有りと判定され、記号が図形または文字のみからなる場合（ステップＳ８：No）には、記号を分割して再検討を行うまでもないことから、ステップＳ９において、記号に輝度ムラが有ると判定される。その後、エンドに移る。

また、低輝度セルが無い場合や低輝度セルが分散されている場合（ステップＳ５：No）には、ステップＳ１０において、記号に輝度ムラが無いと判定される。その後、エンドに移る。

次に、記号全体で輝度ムラ有りと判定され、記号が図形および文字の組合せである場合（ステップＳ８：Yes）には、記号を分割して再検討が行われる。まず、記号に含まれる文字について１文字ずつ輝度ムラが判定される。なお、記号に含まれる文字の一例としては、図５の「ＯＫ」および図６の「ＰＯＷＥＲ」を挙げることができる。

具体的には、図８のステップＳ１１において、制御部２１により、１文字についての輝度ムラが判定される。この輝度ムラの判定は以下の式（３）を用いて行われる。なお、判定対象の文字は、たとえばユーザによって指定される。

式（３）において、Ｓ_cは、判定対象の１文字と対応する領域の面積であり、Ｓ_cdは、判定対象の１文字と対応する領域における低輝度セルの面積である。そして、たとえば、式（３）のＦ_c＞０の場合には、１文字について輝度ムラ有りと判定され、式（３）のＦ_c≦０の場合には、１文字について輝度ムラ無しと判定される。

次に、ステップＳ１２において、制御部２１により、１文字について輝度ムラ有りと判定されたか否かが判断される。そして、１文字について輝度ムラ有りと判定された場合には、図７のステップＳ９において、記号に輝度ムラが有ると判定される。その一方、１文字について輝度ムラ無しと判定された場合には、ステップＳ１３に移る。

次に、ステップＳ１３において、記号に含まれる文字を全て判定したか否かが判断される。この判断は、たとえばユーザによって行われる。そして、記号に含まれる文字が全て判定されたと判断された場合には、記号に含まれる図形について判定するために、ステップＳ１４に移る。その一方、記号に含まれる文字において判定されていない文字があると判断された場合には、残りの文字の輝度ムラを判定するために、ステップＳ１１に戻る。すなわち、記号における少なくとも１文字で輝度ムラ有りと判定された場合に図７のステップＳ９に移り、記号における全ての文字で輝度ムラ無しと判定された場合にステップＳ１４に移る。なお、記号における各文字は、本発明の「判定対象部」の一例である。

次に、ステップＳ１４において、図形が分離された複数の構成要素を有するか否かが判断される。この判断は、たとえばユーザによって行われる。そして、図形が複数の構成要素を有しないと判断された場合（図形が１つの構成要素によって構成されている場合）には、ステップＳ１５に移る。その一方、図形が複数の構成要素を有すると判断された場合には、ステップＳ１９に移る。なお、図形が１つの構成要素によって構成されている場合の一例としては、図２のようなスピーカの図形を挙げることができ、図形が複数の構成要素を有する場合の一例としては、図３のようなシートベンチレーションの図形、図４のような格納状態のドアミラーの図形、および、図６のような電源マークの図形を挙げることができる。

次に、ステップＳ１５において、判定対象の図形が線対称であるか否かが判断される。この判断は、たとえばユーザによって行われる。そして、図形が線対称であると判断された場合には、ステップＳ１６に移る。その一方、図形が線対称ではないと判断された場合には、ステップＳ１７に移る。なお、図形が線対称である場合の一例としては、図２のようなスピーカの図形を挙げることができる。また、線対称の図形には、図２のスピーカの図形のように上下対称な図形に加えて、左右対称な図形も含まれる。

次に、ステップＳ１６において、制御部２１により、線対称の図形を対称軸で分割してそれぞれについて輝度ムラが判定される。この輝度ムラの判定は以下の式（４）および（５）を用いて行われる。

式（４）において、Ｓ_faは、判定対象の図形の対称軸に対する一方側と対応する領域の面積であり、Ｓ_fadは、判定対象の図形の対称軸に対する一方側と対応する領域における低輝度セルの面積である。そして、たとえば、式（４）のＦ_fa＞０の場合には、図形の一方側について輝度ムラ有りと判定され、式（４）のＦ_fa≦０の場合には、図形の一方側について輝度ムラ無しと判定される。

式（５）において、Ｓ_fbは、判定対象の図形の対称軸に対する他方側と対応する領域の面積であり、Ｓ_fbdは、判定対象の図形の対称軸に対する他方側と対応する領域における低輝度セルの面積である。そして、たとえば、式（５）のＦ_fb＞０の場合には、図形の他方側について輝度ムラ有りと判定され、式（５）のＦ_fb≦０の場合には、図形の他方側について輝度ムラ無しと判定される。

そして、図形の一方側について輝度ムラ有りと判定された場合、および、図形の他方側について輝度ムラ有りと判定された場合には、図形について輝度ムラ有りと判定される。なお、図形の一方側について輝度ムラ無しと判定され、かつ、図形の他方側について輝度ムラ無しと判定された場合には、図形について輝度ムラ無しと判定される。

また、図形が線対称ではない場合（ステップＳ１５：No）には、ステップＳ１７において、制御部２１により、図形について輝度ムラが判定される。この輝度ムラの判定は以下の式（６）を用いて行われる。

式（６）において、Ｓ_fは、判定対象の図形と対応する領域の面積であり、Ｓ_fdは、判定対象の図形と対応する領域における低輝度セルの面積である。そして、たとえば、式（６）のＦ_f＞０の場合には、図形について輝度ムラ有りと判定され、式（６）のＦ_f≦０の場合には、図形について輝度ムラ無しと判定される。

次に、ステップＳ１８において、制御部２１により、図形について輝度ムラ有りと判定されたか否かが判断される。そして、図形について輝度ムラ有りと判定された場合には、図７のステップＳ９において、記号に輝度ムラが有ると判定される。その一方、図形について輝度ムラ無しと判定された場合には、図７のステップＳ１０において、記号に輝度ムラが無いと判定される。なお、記号における図形、図形が線対称である場合における図形の対称軸に対する一方側および他方側は、本発明の「判定対象部」の一例である。

また、図形が複数の構成要素を有する場合（ステップＳ１４：Yes）には、ステップＳ１９において、各構成要素が独立した１つのものとして認識されるか否かが判断される。この判断は、たとえばユーザによって行われる。そして、各構成要素が独立した１つのものとして認識されると判断された場合（単独で１つのものとして認識される場合）には、ステップＳ２０に移る。その一方、各構成要素が独立した１つのものとして認識されないと判断された場合（組合せで１つのものとして認識される場合）には、図９のステップＳ２５に移る。なお、単独で１つのものとして認識される場合の一例としては、図３のようなシートベンチレーションを構成するシートの図形およびファンの図形を挙げることができ、組合せで１つのものとして認識される場合の一例としては、図４のような格納状態のドアミラーの図形、および、図６のような電源マークの図形を挙げることができる。

次に、ステップＳ２０において、判定対象の構成要素が線対称であるか否かが判断される。判定対象の構成要素は、たとえばユーザによって指定され、その構成要素が線対称であるか否かは、たとえばユーザによって判断される。そして、構成要素が線対称であると判断された場合には、ステップＳ２１に移る。その一方、構成要素が線対称ではないと判断された場合には、ステップＳ２２に移る。なお、線対称の構成要素には、上下対称な構成要素および左右対称な構成要素が含まれる。

次に、ステップＳ２１において、制御部２１により、線対称の構成要素を対称軸で分割してそれぞれについて輝度ムラが判定される。この輝度ムラの判定は以下の式（７）および（８）を用いて行われる。

式（７）において、Ｓ_fpaは、判定対象の構成要素の対称軸に対する一方側と対応する領域の面積であり、Ｓ_fpadは、判定対象の構成要素の対称軸に対する一方側と対応する領域における低輝度セルの面積である。そして、たとえば、式（７）のＦ_fpa＞０の場合には、構成要素の一方側について輝度ムラ有りと判定され、式（７）のＦ_fpa≦０の場合には、構成要素の一方側について輝度ムラ無しと判定される。

式（８）において、Ｓ_fpbは、判定対象の構成要素の対称軸に対する他方側と対応する領域の面積であり、Ｓ_fpbdは、判定対象の構成要素の対称軸に対する他方側と対応する領域における低輝度セルの面積である。そして、たとえば、式（８）のＦ_fpb＞０の場合には、構成要素の他方側について輝度ムラ有りと判定され、式（８）のＦ_fpb≦０の場合には、構成要素の他方側について輝度ムラ無しと判定される。

そして、構成要素の一方側について輝度ムラ有りと判定された場合、および、構成要素の他方側について輝度ムラ有りと判定された場合には、構成要素について輝度ムラ有りと判定される。なお、構成要素の一方側について輝度ムラ無しと判定され、かつ、構成要素の他方側について輝度ムラ無しと判定された場合には、構成要素について輝度ムラ無しと判定される。

また、構成要素が線対称ではない場合（ステップＳ２０：No）には、ステップＳ２２において、制御部２１により、構成要素について輝度ムラが判定される。この輝度ムラの判定は以下の式（９）を用いて行われる。

式（９）において、Ｓ_fpは、判定対象の構成要素と対応する領域の面積であり、Ｓ_fpdは、判定対象の構成要素と対応する領域における低輝度セルの面積である。そして、たとえば、式（９）のＦ_fp＞０の場合には、構成要素について輝度ムラ有りと判定され、式（９）のＦ_fp≦０の場合には、構成要素について輝度ムラ無しと判定される。

次に、ステップＳ２３において、制御部２１により、構成要素について輝度ムラ有りと判定されたか否かが判断される。そして、構成要素について輝度ムラ有りと判定された場合には、図７のステップＳ９において、記号に輝度ムラが有ると判定される。その一方、構成要素について輝度ムラ無しと判定された場合には、ステップＳ２４に移る。

次に、ステップＳ２４において、記号に含まれる図形の構成要素を全て判定したか否かが判断される。この判断は、たとえばユーザによって行われる。そして、図形における全ての構成要素が判定されたと判断された場合には、図７のステップＳ１０において、記号に輝度ムラが無いと判定される。その一方、図形を構成する構成要素において判定されていないものがあると判断された場合には、残りの構成要素の輝度ムラを判定するために、ステップＳ２０に戻る。すなわち、図形の構成要素の少なくとも１つで輝度ムラ有りと判定された場合に図７のステップＳ９に移り、図形の構成要素の全てで輝度ムラ無しと判定された場合に図７のステップＳ１０に移る。なお、記号の図形における構成要素、構成要素が線対称である場合における構成要素の対称軸に対する一方側および他方側は、本発明の「判定対象部」の一例である。

また、各構成要素が独立した１つのものとして認識されない場合（ステップＳ１９：No）には、図９のステップＳ２５において、制御部２１により、構成要素毎に平均輝度を算出して低輝度セルの再検出が行われる。たとえば、図４に示すような格納状態のドアミラーの図形の場合には、照明透過部５３ａおよび５３ｂ（図４参照）と対応する領域毎に平均輝度が算出されて低輝度セルが再検出される。具体的には、照明透過部５３ａと対応する領域では、その領域内の各セルの輝度情報に基づいて平均輝度が算出され、その平均輝度を用いてその領域内の各セルをスコア化して低輝度セルが検出される。また、照明透過部５３ｂと対応する領域では、その領域内の各セルの輝度情報に基づいて平均輝度が算出され、その平均輝度を用いてその領域内の各セルをスコア化して低輝度セルが検出される。このため、たとえば低輝度セルの集合であった領域Ｒ（図１１参照）においてこの再計算が行われると、記号全体での平均輝度に対して領域Ｒの平均輝度が低いことから、領域Ｒにおいて低輝度セルが検出されにくくなる。

次に、ステップＳ２６において、判定対象の構成要素が線対称であるか否かが判断される。判定対象の構成要素は、たとえばユーザによって指定され、その構成要素が線対称であるか否かは、たとえばユーザによって判断される。そして、構成要素が線対称であると判断された場合には、ステップＳ２７に移る。その一方、構成要素が線対称ではないと判断された場合には、ステップＳ２８に移る。なお、線対称の構成要素には、上下対称な構成要素および左右対称な構成要素が含まれる。

次に、ステップＳ２７において、制御部２１により、線対称の構成要素を対称軸で分割してそれぞれについて輝度ムラが判定される。この輝度ムラの判定は以下の式（１０）および（１１）を用いて行われる。

式（１０）において、Ｓ_fpraは、判定対象の構成要素の対称軸に対する一方側と対応する領域の面積であり、Ｓ_fpradは、判定対象の構成要素の対称軸に対する一方側と対応する領域における再計算後の低輝度セルの面積である。そして、たとえば、式（１０）のＦ_fpra＞０の場合には、構成要素の一方側について輝度ムラ有りと判定され、式（１０）のＦ_fpra≦０の場合には、構成要素の一方側について輝度ムラ無しと判定される。

式（１１）において、Ｓ_fprbは、判定対象の構成要素の対称軸に対する他方側と対応する領域の面積であり、Ｓ_fprbdは、判定対象の構成要素の対称軸に対する他方側と対応する領域における再計算後の低輝度セルの面積である。そして、たとえば、式（１１）のＦ_fprb＞０の場合には、構成要素の他方側について輝度ムラ有りと判定され、式（１１）のＦ_fprb≦０の場合には、構成要素の他方側について輝度ムラ無しと判定される。

そして、構成要素の一方側について輝度ムラ有りと判定された場合、および、構成要素の他方側について輝度ムラ有りと判定された場合には、構成要素について輝度ムラ有りと判定される。なお、構成要素の一方側について輝度ムラ無しと判定され、かつ、構成要素の他方側について輝度ムラ無しと判定された場合には、構成要素について輝度ムラ無しと判定される。

また、構成要素が線対称ではない場合（ステップＳ２６：No）には、ステップＳ２８において、制御部２１により、構成要素について輝度ムラが判定される。この輝度ムラの判定は以下の式（１２）を用いて行われる。

式（１２）において、Ｓ_fprは、判定対象の構成要素と対応する領域の面積であり、Ｓ_fprdは、判定対象の構成要素と対応する領域における再計算後の低輝度セルの面積である。そして、たとえば、式（１２）のＦ_fpr＞０の場合には、構成要素について輝度ムラ有りと判定され、式（１２）のＦ_fpr≦０の場合には、構成要素について輝度ムラ無しと判定される。

次に、ステップＳ２９において、制御部２１により、構成要素について輝度ムラ有りと判定されたか否かが判断される。そして、構成要素について輝度ムラ有りと判定された場合には、図７のステップＳ９において、記号に輝度ムラが有ると判定される。その一方、構成要素について輝度ムラ無しと判定された場合には、ステップＳ３０に移る。

次に、ステップＳ３０において、記号に含まれる図形の構成要素を全て判定したか否かが判断される。この判断は、たとえばユーザによって行われる。そして、図形における全ての構成要素が判定されたと判断された場合には、図７のステップＳ１０において、記号に輝度ムラが無いと判定される。その一方、図形を構成する構成要素において判定されていないものがあると判断された場合には、残りの構成要素の輝度ムラを判定するために、ステップＳ２６に戻る。すなわち、図形の構成要素の少なくとも１つで輝度ムラ有りと判定された場合に図７のステップＳ９に移り、図形の構成要素の全てで輝度ムラ無しと判定された場合に図７のステップＳ１０に移る。なお、記号の図形における構成要素、構成要素が線対称である場合における構成要素の対称軸に対する一方側および他方側は、本発明の「判定対象部」の一例である。

また、記号全体で輝度ムラ無しと判定された場合（図７のステップＳ７：No）には、記号を分割して再検討を行うために、図１０のステップＳ３１において、記号が図形および文字の組合せであるか否かが判断される。この判断は、たとえばユーザによって行われる。そして、記号が図形および文字の組合せではないと判断された場合（記号が図形または文字のみからなる場合）には、ステップＳ３２に移る。その一方、記号が図形および文字の組合せであると判断された場合には、図８のステップＳ１１に移る。

次に、ステップＳ３２において、記号が文字のみからなるか否かが判断される。この判断は、たとえばユーザによって行われる。そして、記号が文字のみからなると判断された場合には、ステップＳ３３に移る。その一方、記号が図形のみからなると判断された場合には、図８のステップＳ１４に移る。

次に、ステップＳ３３において、制御部２１により、１文字についての輝度ムラが判定される。この輝度ムラの判定は上記した式（３）を用いて行われる。なお、判定対象の文字は、たとえばユーザによって指定される。そして、たとえば、式（３）のＦ_c＞０の場合には、１文字について輝度ムラ有りと判定され、式（３）のＦ_c≦０の場合には、１文字について輝度ムラ無しと判定される。

次に、ステップＳ３４において、制御部２１により、１文字について輝度ムラ有りと判定されたか否かが判断される。そして、１文字について輝度ムラ有りと判定された場合には、図７のステップＳ９において、記号に輝度ムラが有ると判定される。その一方、１文字について輝度ムラ無しと判定された場合には、ステップＳ３５に移る。

次に、ステップＳ３５において、記号に含まれる文字を全て判定したか否かが判断される。この判断は、たとえばユーザによって行われる。そして、記号に含まれる文字が全て判定されたと判断された場合には、図７のステップＳ１０において、記号に輝度ムラが無いと判定される。その一方、記号に含まれる文字において判定されていない文字があると判断された場合には、残りの文字の輝度ムラを判定するために、ステップＳ３３に戻る。なお、記号における各文字は、本発明の「判定対象部」の一例である。

−効果−
本実施形態では、上記のように、照明透過部によって表される記号の構成および形状に応じて複数の判定対象部に分割して、複数の判定対象部毎に輝度ムラを判定することにより、記号の輝度ムラを適切に判定することができる。

具体的には、記号全体で輝度ムラ無しと判定され、記号が文字のみからなる場合には、記号の文字列が分割されて１文字ずつ輝度ムラの判定が行われる。そして、記号に含まれる文字において１文字でも輝度ムラ有りと判定された場合には、記号に輝度ムラが有ると判定される。なお、記号に含まれる全ての文字で輝度ムラ無しと判定された場合には、記号に輝度ムラが無いと判定される。

また、記号全体で輝度ムラ無しと判定され、記号が図形のみからなる場合には、記号の図形が分割されて構成要素毎に輝度ムラの判定が行われる。そして、記号の図形を構成する構成要素において１つでも輝度ムラ有りと判定された場合には、記号に輝度ムラが有ると判定される。なお、記号の図形を構成する全ての構成要素で輝度ムラ無しと判定された場合には、記号に輝度ムラが無いと判定される。

また、記号全体で輝度ムラ無しと判定され、記号が図形および文字の組合せである場合には、記号の文字列を分割して１文字ずつの輝度ムラの判定、および、記号の図形を分割して構成要素毎の輝度ムラの判定が行われる。そして、記号に含まれる文字において１文字でも輝度ムラ有りと判定された場合、および、記号の図形を構成する構成要素において１つでも輝度ムラ有りと判定された場合には、記号に輝度ムラが有ると判定される。なお、記号に含まれる全ての文字で輝度ムラ無しと判定され、かつ、記号の図形を構成する全ての構成要素で輝度ムラ無しと判定された場合には、記号に輝度ムラが無いと判定される。

また、記号全体で輝度ムラ有りと判定され、記号が図形および文字の組合せである場合には、記号の文字列を分割して１文字ずつの輝度ムラの判定、および、記号の図形を分割して構成要素毎の輝度ムラの判定が行われる。そして、記号に含まれる文字において１文字でも輝度ムラ有りと判定された場合、および、記号の図形を構成する構成要素において１つでも輝度ムラ有りと判定された場合には、記号に輝度ムラが有ると判定される。なお、記号に含まれる全ての文字で輝度ムラ無しと判定され、かつ、記号の図形を構成する全ての構成要素で輝度ムラ無しと判定された場合には、記号に輝度ムラが無いと判定される。

このように、記号の文字を１文字ずつ判定すること、および、記号の図形を構成要素毎に判定することによって、記号全体でのみ判定する場合に比べて、輝度ムラの判定精度の向上を図ることができる。

また、図形の構成要素が線対称である場合に、構成要素を対称軸で分割してそれぞれについて輝度ムラを判定することによって、構成要素全体（分割前の構成要素）で判定する場合に比べて、輝度ムラ有りと判定されやすくすることができる。つまり、図形の構成要素が線対称である場合には、輝度ムラによって対称形状の一部が欠けていると、ユーザの経験等に基づく知識（スキーマ）が働いて、その欠けている部分を補完しようとするため、ユーザが輝度ムラに気付きやすいので、輝度ムラ有りと判定されやすくしている。

また、各構成要素が独立した１つのものとして認識されない場合（複数の構成要素の組合せで１つのものとして認識される場合）に、構成要素毎に平均輝度を算出して低輝度セルの再検出を行うことによって、独立した１つのものと認識されない構成要素の輝度ムラの判定が必要以上に厳しくなるのを抑制することができる。すなわち、組合せで１つのものと認識される構成要素については、全体で認識されれば個別に正確に認識される必要性が低いので、単独で１つのものと認識される構成要素の場合に比べて、構成要素の輝度ムラの判定が緩くされて輝度ムラ有りと判定されにくくなっている。

なお、記号全体で輝度ムラ有りと判定され、記号が図形または文字のみからなる場合には、記号を分割して再検討を行うまでもなく、記号に輝度ムラが有ると判定される。

−他の実施形態−
なお、今回開示した実施形態は、すべての点で例示であって、限定的な解釈の根拠となるものではない。したがって、本発明の技術的範囲は、上記した実施形態のみによって解釈されるものではなく、特許請求の範囲の記載に基づいて画定される。また、本発明の技術的範囲には、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれる。

たとえば、上記実施形態では、スイッチに設けられた照明透過部によって表される記号の輝度ムラが判定される例を示したが、これに限らず、スイッチ以外に設けられた照明透過部によって表される記号の輝度ムラが判定されるようにしてもよい。

また、上記実施形態では、車両に設置されるスイッチの記号の輝度ムラが判定される例を示したが、これに限らず、車両以外に設置されるスイッチの記号の輝度ムラが判定されるようにしてもよい。

また、上記実施形態では、低輝度セルが集まっているか否かを制御部２１が判断する例を示したが、これに限らず、低輝度セルが集まっているか否かをユーザが判断するようにしてもよい。

また、上記実施形態では、記号が図形および文字の組合せであるか否か、および、記号が文字のみからなるか否かをユーザが判断する例を示したが、これに限らず、判定対象の記号に関する情報が判定装置に予め格納されている場合には、記号が図形および文字の組合せであるか否か、および、記号が文字のみからなるか否かを制御部が判断するようにしてもよい。

また、上記実施形態では、判定対象の文字の指定、および、全ての文字を判定したか否かの判断をユーザが行う例を示したが、これに限らず、記号に含まれる文字に関する情報が判定装置に予め格納されている場合には、判定対象の文字の指定、および、全ての文字を判定したか否かの判断を制御部が行うようにしてもよい。

また、上記実施形態では、図形が複数の構成要素を有するか否かの判断、各構成要素が独立した１つのものとして認識されるか否かの判断、判定対象の構成要素の指定、全ての構成要素を判定したか否かの判断、および、構成要素（図形）が線対称であるか否かの判断を、ユーザが行う例を示したが、これに限らず、記号に含まれる図形に関する情報が判定装置に予め格納されている場合には、図形が複数の構成要素を有するか否かの判断、各構成要素が独立した１つのものとして認識されるか否かの判断、判定対象の構成要素の指定、全ての構成要素を判定したか否かの判断、および、構成要素（図形）が線対称であるか否かの判断を、制御部が行うようにしてもよい。

本発明は、照明透過部によって表される記号の輝度ムラを記号の撮像画像に基づいて判定する判定方法に利用可能である。

１ 撮像装置
２ 判定装置
５１、５２、５３、５４、５５ スイッチ
５１ａ、５２ａ、５２ｂ、５３ａ、５３ｂ、５４ａ、５４ｂ、５５ａ〜５５ｇ 照明透過部
１００ 判定システム

Claims (1)

1. 照明透過部によって表される記号の輝度ムラを前記記号の撮像画像に基づいて判定する判定方法であって、
   前記記号の構成および形状に応じて、前記記号を複数の判定対象部に分割するステップと、
   前記複数の判定対象部毎に輝度ムラを判定するステップと、
   前記複数の判定対象部のうちの少なくとも一つの判定対象部において輝度ムラが有ると判定された場合に、前記記号に輝度ムラが有ると判定するステップとを備えることを特徴とする判定方法。

Images