WO2017010058A1

WO2017010058A1 - 識別媒体認識装置および識別媒体認識方法

Info

Publication number: WO2017010058A1
Application number: PCT/JP2016/003183
Authority: WO
Inventors: 郁雄渕上; 匡夫濱田
Original assignee: パナソニックＩｐマネジメント株式会社
Priority date: 2015-07-14
Filing date: 2016-07-04
Publication date: 2017-01-19

Abstract

識別媒体認識装置（３）は、撮像装置により撮像された撮像画像を取得する画像取得部（１１）と、撮像画像から識別媒体領域を検出する識別媒体領域検出部（１２）と、識別媒体領域から識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識部（１８）と、識別媒体領域の超解像処理を選択的に行う超解像処理部（１７）と、撮像画像における予め設定された領域を記憶する領域記憶部（１４）と識別媒体領域が前記予め設定された領域内に位置するか否かを判定する識別媒体領域判定部（１３）と、識別媒体領域が予め設定された領域内に位置すると判定された場合には、超解像処理部による超解像処理の実施を選択する超解像処理選択部（１６）とを備える。

Description

識別媒体認識装置および識別媒体認識方法

　本開示は、車両のナンバープレートやＩＤカード等の識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識装置および識別媒体認識方法に関する。

　セキュリティ環境の充実や、顧客管理などを目的として、道路や施設の出入口などに設置されたカメラで撮影された車両の画像からナンバープレートを読み取るための技術が普及している。例えば、幹線道路等に設置される自動車ナンバー自動読取装置では、所定方向に車道を走行する車両のナンバープレートを読み取ることが可能である。車両のナンバープレートやＩＤカード等の文字や数字が記された識別媒体を撮像し、撮像角度に起因する撮像画像の幾何学的な歪みを補正した後に、撮像画像から識別媒体の文字または数字を読み取る技術が知られている（例えば、特許文献１および特許文献２参照）。特許文献１に開示されている技術では、識別媒体（車両のナンバープレート）の画像上のサイズを特定し、特定されたサイズに適したパラメータを用いて歪み補正を行っている。また、特許文献２に開示されている技術では、遠距離で撮像した幾何学的歪みがより小さい識別媒体画像（ナンバープレート画像）を基準画像として利用して、近距離で撮像した幾何学的歪みがより大きな識別媒体画像の歪み補正を行っている。

　歪み補正を行うためには識別媒体画像の領域サイズがある程度の大きさを有している必要があり、そのためには、近距離で撮像した識別媒体画像を使用する必要がある。つまり、遠距離で撮像した識別媒体画像は、領域サイズが小さいため、認識処理を行うのが困難である。近距離で撮像された識別媒体画像および遠距離で撮像された識別媒体画像を両方とも認識できるようにするために、撮像された識別媒体画像の超解像処理を行うことも考えられるが、その場合は、装置の処理負荷が大きくなるという問題が生じる。

　一方、識別媒体の読み取りに特化した装置であっても、悪天候やカメラのレンズの汚れなどの撮影状況の変化により、明瞭な撮像画像が得られない場合がある。また、店舗や街頭などに設置された監視カメラでは、カメラの解像度や、撮影条件（撮像画像中の識別媒体のサイズや、撮影角度等）によっては、必ずしも識別媒体の認識に適した撮像画像が得られない場合がある。

　そこで、そのような識別媒体の認識に適さない撮像画像であっても、識別媒体画像における文字列の誤認識（読取ミス）を防止するための技術が開発されている。例えば、識別媒体画像における文字と、照合用の文字パターンとの相関値を算出し、その相関値が一定値以上となる場合にのみ文字を認識するようにした技術が知られている（特許文献３参照）。

　また、カメラにより撮影した撮像パターンを、予め記憶された複数の辞書パターンと比較し、辞書パターンごとに類似度を算出し、予め記憶されている辞書パターンごとの出現頻度に基づきその類似度を補正した補正類似度を算出し、その補整類似度が最も高い辞書パターンを決定する技術が知られている（特許文献４参照）。

　しかしながら、識別媒体に一連指定番号のような文字列（複数桁の数字や一連の文字など）が記載され、その文字列を認識する場合、その文字列全体と照合用のパターンとの類似度を評価するだけでは、文字列を構成する個々の数字や文字と照合用のパターンに含まれる個々の数字や文字との間の類似性が適切に反映されないという問題がある。

　本開示は、装置の処理負荷を大きくすることなく、近距離で撮像された識別媒体画像および遠距離で撮像された識別媒体画像を両方とも認識することを目的とする。さらに本開示は、撮影された識別媒体画像における文字列の誤認識を低減することを目的とする。

特開２０１４－００６８５４号公報特開２０１２－０６３８６９号公報特開昭６４－７４７００号公報特開平１０－６３７８６号公報

　本開示の識別媒体認識装置は、識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識装置であって、撮像装置により撮像された撮像画像を取得する画像取得部と、撮像画像から識別媒体の領域を検出する識別媒体領域検出部と、識別媒体の領域から識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識部と、識別媒体の領域の超解像処理を選択的に行う超解像処理部と、撮像画像における予め設定された領域を記憶する領域記憶部と、識別媒体の領域が予め設定された領域内に位置するか否かを判定する識別媒体領域判定部と、識別媒体の領域が予め設定された領域内に位置すると判定された場合には、超解像処理部による超解像処理の実施を選択する超解像処理選択部とを備える。

　さらに、本開示の識別媒体認識装置は、識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識装置であって、撮像装置により撮像された撮像画像を取得する画像取得部と、撮像画像から識別媒体の領域を検出する識別媒体領域検出部と、識別媒体の領域から識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識部と、識別媒体の領域の超解像処理を選択的に行う超解像処理部と、識別媒体の領域の領域サイズ、および幾何学的歪みの度合いを示す値である歪み度の少なくとも一方を算出する領域パラメータ算出部と、識別媒体の領域の領域サイズおよび歪み度の少なくとも一方に基づいて、超解像処理部による超解像処理の実施、不実施を選択する超解像処理選択部とを備える。

　さらに、本開示の識別媒体認識装置は、撮影された識別媒体画像における文字列を認識する処理を実行するプロセッサを備えた識別媒体認識装置であって、文字列は、識別媒体画像中の位置または文字間の相対位置に応じて１からｘ（ただし、ｘは２以上の整数）までの配置順位が設定された複数の文字から構成され、プロセッサは、識別媒体画像中の文字列と、予め準備された複数の基準画像との類似度をそれぞれ算出し、文字列において評価対象となる配置順位にある１またはｙ（ただし、ｙはｘよりも小さい２以上の整数）個の文字に対応する複数の基準画像にそれぞれ含まれる参照用文字について、当該参照用文字が同一となる基準画像ごとに類似度の和を含む評価値を算出し、評価値に基づき、識別媒体画像における文字列を構成し得る少なくとも１つの文字の候補を決定する。

　本開示の識別媒体認識方法は、識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識方法であって、撮像装置により撮像された撮像画像を取得する画像取得ステップと、撮像画像から識別媒体の領域を検出する識別媒体領域検出ステップと、識別媒体の領域から識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識ステップと、識別媒体の領域の超解像処理を選択的に行う超解像処理ステップと、撮像画像における予め設定された領域を記憶する領域記憶ステップと、識別媒体の領域が予め設定された領域内に位置するか否かを判定する識別媒体領域判定ステップと、識別媒体の領域が予め設定された領域内に位置すると判定された場合には、超解像処理ステップの実施を選択する超解像処理選択ステップとを有する。

　さらに、本開示の識別媒体認識方法は、識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識方法であって、撮像装置により撮像された撮像画像を取得する画像取得ステップと、撮像画像から識別媒体の領域を検出する識別媒体領域検出ステップと、識別媒体の領域から識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識ステップと、識別媒体の領域の超解像処理を選択的に行う超解像処理ステップと、識別媒体の領域の領域サイズ、および幾何学的歪みの度合いを示す値である歪み度の少なくとも一方を算出する領域パラメータ算出ステップと、識別媒体の領域の領域サイズおよび歪み度の少なくとも一方に基づいて、超解像処理ステップの実施、不実施を選択する超解像処理選択ステップとを有する。

　さらに、本開示の識別媒体認識方法は、撮影された車両の識別媒体画像における文字列を認識する処理を実行する識別媒体認識装置による識別媒体認識方法であって、文字列は、識別媒体画像中の位置または文字間の相対位置に応じて１からｘ（ただし、ｘは２以上の整数）までの配置順位が設定された複数の文字から構成され、識別媒体画像中の文字列と、予め準備された基準画像との類似度を算出し、文字列において評価対象となる配置順位にある１またはｙ（ただし、ｙはｘよりも小さい２以上の整数）個の文字に対応する複数の基準画像にそれぞれ含まれる参照用文字について、当該参照用文字が同一となる基準画像ごとに類似度の和を含む評価値を算出し、評価値に基づき、識別媒体画像における文字列を構成し得る少なくとも１つの文字の候補を決定する。

　本開示によれば、装置の処理負荷を大きくすることなく、近距離で撮像された識別媒体画像および遠距離で撮像された識別媒体画像を両方とも認識できる。さらに、本開示によれば、撮影された車両等のナンバープレート画像における文字列の誤認識を低減できる。

図１Ａは、本開示の実施形態に係る識別媒体認識システムの概略を示す構成図である。図１Ｂは、図１Ａに示した識別媒体認識装置のハードウェア構成を示すブロック図である。図２は、本開示の第１実施形態に係る識別媒体認識装置の概略構成を示すブロック図である。図３は、撮像装置により撮像された撮像画像の一例を示す図である。図４は、本開示の第１実施形態に係る識別媒体認識装置による識別媒体認識処理の流れを示すフロー図である。図５は、本開示の第２実施形態に係る識別媒体認識装置の概略構成を示すブロック図である。図６は、撮像画像から抽出した識別媒体領域の一例を示す図である。図７は、本開示の第２実施形態に係る識別媒体認識装置による識別媒体認識処理の流れを示すフロー図である。図８Ａは、本開示の第３実施形態に係る識別媒体認識システムにおいて撮像装置により撮像された撮像画像の一例を示す図であり、自車両が第２走行車線を走行している場合の図である。図８Ｂは、本開示の第３実施形態に係る識別媒体認識システムにおいて撮像装置により撮像された撮像画像の一例を示す図であり、自車両が第１走行車線を走行している場合の図である。図９は、本開示の第４実施形態に係る識別媒体認識システムの概略を示す構成図である。図１０は、撮像装置により撮像された撮像画像の一例を示す図である。図１１は、図１Ａに示した識別媒体認識装置の第５実施形態に係る機能ブロック図である。図１２は、図１１中の類似度演算部による演算結果の一例を示す図である。図１３は、図１１中の類似評価部による相関値の上位候補の抽出例を示す図である。図１４は、図１１中の類似評価部による各桁の評価値算出結果の一例を示す図である。図１５は、図１１中の類似評価部による候補番号の抽出方法の変形例を示す説明図である。図１６は、図１Ａに示した識別媒体認識装置の第５実施形態に係る処理の流れを示すフロー図である。図１７は、図１６中のステップＳＴ１０８の詳細を示すフロー図である。図１８は、第６実施形態に係る識別媒体認識装置の類似度演算部による演算結果の一例（上位２桁）を示す図である。図１９は、第６実施形態に係る識別媒体認識装置の類似度演算部による演算結果の一例（下位２桁）を示す図である。図２０は、第６実施形態に係る識別媒体認識装置の類似評価部による各桁の評価値算出結果の一例を示す図である。

　以下、適宜図面を参照しながら、本開示に係る識別媒体認識装置および識別媒体認識方法を具体的に開示した実施形態（以下、「本実施形態」という）を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、添付図面及び以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより請求の範囲に記載の主題を限定することは意図されていない。本明細書では、車両のナンバープレートやＩＤカード等の、撮像装置で撮像可能な文字や数字が記されたプレートやカード等を「識別媒体」と称することとする。文字には、平仮名、片仮名、漢字、アルファベット等が含まれる。なお、識別媒体は、プレートやカード状のものに限らず、例えばヘルメット等の識別対象物の表面に添付されるラベルやシール状の印刷物や、識別対象物の表面に直接印刷された表示物等であってもよい。また、識別媒体の文字や数字は、印刷されたものに限らず、手書きのものであってもよい。

　図１Ａは、本開示の実施形態に係る識別媒体認識システム１の概略を示す構成図である。図１Ｂは、図１Ａに示した識別媒体認識装置３のハードウェア構成を示すブロック図である。この識別媒体認識システム１は例えば、車両のナンバープレート等を撮像して読み取るためのシステムである。図１Ａ及び図１Ｂに示すように、識別媒体認識システム１は、撮像装置２と、識別媒体認識装置３と、外部記憶装置４と、表示装置５とを備えて構成される。例えば図１Ａ及び図１Ｂに示す識別媒体認識システム１が車両等のナンバープレートを識別媒体として撮影して得られた識別媒体画像における文字列を認識するためのシステムである場合、識別媒体認識システム１は、識別媒体を含む車両等を撮像する撮像装置２と、この撮像装置２によって取得された識別媒体画像における文字列の認識処理を実行する識別媒体認識装置３と、識別媒体認識装置３の処理に関わる各種データを記憶する外部記憶装置４と、撮像装置２により撮像された識別媒体画像や、識別媒体認識装置３の処理結果等を表示する表示装置５とを備える。

　撮像装置２は、ＣＣＤ等のイメージセンサを備えたデジタルスチルカメラやデジタルビデオカメラであり、車道を走行する車両のナンバープレートを撮像する。撮像された画像には、主要な被写体としての識別媒体（ナンバープレート）の他に、車体や、周辺の物体等が含まれる。撮像装置２は、施設の出入口、車道の側方または上方に配置してもよいし、警察車両等の車両に搭載してもよい。撮像装置２を車道の側方に配置する場合は、車道の路側に設置された路側式のカメラ柱に取り付けるとよい。また、撮像装置２を車道の上方に配置する場合は、車道の路側から車道の上方に突出するように構成された片持式のカメラ柱または車道を跨ぐように構成された門型式のカメラ柱に取り付けるとよい。撮像装置２を車両に搭載する場合は、撮像装置２を搭載した車両が車道の路肩に停止した状態で、車両のナンバープレートを撮像するようにするとよい。撮像装置２により撮像された画像（撮像画像）は、識別媒体認識装置３に入力される。

　識別媒体認識装置３は、ＣＰＵ、ＲＡＭ、ＲＯＭ、ネットワークインタフェースなどから構成される。識別媒体認識装置３は、撮像装置２から入力された撮像画像から識別媒体の領域を抽出し、識別媒体の領域に含まれている文字およびまたは数字を認識して識別媒体を読み取る。図１Ｂに示すように、識別媒体認識装置３では、所定の制御プログラムに基づき識別媒体画像における文字列を認識する処理を統括的に実行するプロセッサ１２１、このプロセッサ１２１のワークエリア等として機能する揮発性メモリであるＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）１２２、プロセッサ１２１が実行する制御プログラムやデータを格納する不揮発性メモリであるＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）１２３が、それぞれ入出力バス１２５に接続されている。また、識別媒体認識装置３には、周辺機器として、キーボード及びマウス等の入力デバイスである入力装置１２４、液晶等のモニタからなる表示装置５、ならびにＨＤＤ（Ｈａｒｄ　Ｄｉｓｋ　Ｄｒｉｖｅ）やフラッシュメモリ等のストレージである外部記憶装置４などが接続されている。なお、後述する図２，図５，図１１の機能ブロック図において、識別媒体認識装置３の各部の機能は、主としてプロセッサ１２１が制御プログラムを実行することによって実現可能である。

　外部記憶装置４は、例えばＨＤＤ（Ｈａｒｄ　Ｄｉｓｋ　Ｄｒｉｖｅ）装置であり、表示装置５は、例えばモニタ装置である。外部記憶装置４および表示装置５は、識別媒体認識装置３に接続されている。撮像装置２により撮像された画像、および識別媒体認識装置３で読み取られた識別媒体は、外部記憶装置４に記憶される。また、撮像装置２により撮像された画像、および識別媒体認識装置３で読み取られた識別媒体は、表示装置５に表示される。識別媒体画像は、識別媒体認識装置３に直接送られずに撮像装置２内のメモリに一旦記憶される構成であってもよい。

　識別媒体認識装置３と、撮像装置２、外部記憶装置４および表示装置５との接続形態は、特に限定されるものではなく、例えば、ＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）などの有線または無線通信を介した接続であってもよいし、またはインターネットなどの通信ネットワークを介した接続であってよい。また、撮像装置２と識別媒体認識装置３は、識別媒体認識機能を備えた撮像装置として一体的に構成してもよい。その場合は、出力インターフェースを介して、外部記憶装置４および表示装置５に出力するように構成するとよい。また、外部記憶装置４の代わりに記録媒体を用いてもよい。

　（第１実施形態）
　次に、本開示の第１実施形態に係る識別媒体認識装置について、ナンバープレートを識別媒体の例として説明する。本開示の第１実施形態に係る識別媒体認識システム１は、上述の図１Ａ，図１Ｂに示した識別媒体認識システム１と同様の構成を有している。図２は、本開示の第１実施形態に係る識別媒体認識装置の概略構成を示すブロック図である。図３は、撮像装置により撮像された撮像画像の一例を示す図である。図４は、本開示の第１実施形態に係る識別媒体認識装置による識別媒体認識処理の流れを示すフロー図である。

　図２に示すように、本開示の第１実施形態に係る識別媒体認識装置３は、画像取得部１１と、識別媒体領域検出部１２と、識別媒体領域判定部１３と、領域情報記憶部１４と、識別媒体画像抽出部１５と、超解像処理選択部１６と、超解像処理部１７と、識別媒体認識部１８とを備えている。

　画像取得部１１は、撮像装置２により撮像された撮像画像２１（図３参照）を取得する。図３の撮像画像２１は、車道２２の路側帯または歩道２３に配置された撮像装置２により撮像された撮像画像である。車道２２は片道３車線の道路であり、車両は図中の奥側（図中上側）から手前側（図中下側）に向かって走行する。車道２２の３車線は、路肩側（図中右側）から順に、第１走行車線２４、第２走行車線２５、第３走行車線２６と称することとする。そして、第１走行車線２４上に領域２７が、第２走行車線２５上に領域２８が、第３走行車線２６上に領域２９が設定されている。領域２７、２８、２９は、後述する認識領域である。画像取得部１１が取得した撮像画像は、識別媒体領域検出部１２および識別媒体画像抽出部１５に入力される。

　識別媒体領域検出部１２は、画像認識技術を用いて、撮像画像から識別媒体の領域（以降、単に「識別媒体領域」と称する）を検出する。識別媒体領域検出部１２で検出された識別媒体領域は、識別媒体領域判定部１３に入力される。なお、識別媒体領域が検出されなかった場合は、識別媒体認識装置３による識別媒体認識処理を終了する。

　識別媒体領域判定部１３は、撮像画像における識別媒体領域の位置が、撮像画像における、識別媒体の認識処理を実施する領域（以降、「認識領域」と称する）内に位置するか否かを判定する。この判定は、領域情報記憶部１４に記憶されている認識領域に関する情報を参照して行う。認識領域に関する情報は、ユーザ等により予め設定されており、領域情報記憶部１４に記憶されている。

　また、認識領域は、超解像処理を必要とする領域と、超解像処理を必要としない領域とに分けられている。超解像処理を必要とする領域は、請求の範囲における「撮像画像における予め設定された領域」に相当する。超解像処理を必要とする領域は、ユーザにより予め設定されており、領域情報記憶部１４に記憶されている。識別媒体領域判定部１３は、識別媒体位置が認識領域内に位置すると判定された場合に、その認識領域が、超解像処理を必要とする領域であるか、または超解像処理を必要としない領域であるかも判定する。

　図３に示す撮像画像２１では、第１走行車線２４上の領域２７、第２走行車線２５上の領域２８、および第３走行車線２６上の領域２９が認識領域であり、領域２７と領域２８が超解像処理を必要としない領域、領域２９が超解像処理を必要とする領域である。前述したように、識別媒体を認識するためには、識別媒体画像の領域サイズがある程度の大きさを有している必要がある。そのため、識別媒体は、近距離で撮像されることが望ましい。また、識別媒体画像の幾何学的歪みが大きいと、識別媒体を認識することができなくなる。そのため、識別媒体画像は、幾何学的歪みが小さいものである必要がある。第１走行車線２４および第２走行車線２５は撮像装置２との距離が近いため、第１走行車線２４および第２走行車線２５において近距離で撮像された識別媒体画像は、幾何学的歪みが小さくなる（すなわち、画像認識に適している）。したがって、識別媒体が近距離で撮像される第１走行車線２４上の領域２７および第２走行車線２５上の領域２８は、超解像処理を必要としない領域となる。第３走行車線２６は撮像装置２との距離が遠いため、第３走行車線２６において近距離で撮像された識別媒体画像は、幾何学的歪みが大きくなる（すなわち、画像認識に適していない）。一方、第３走行車線２６において遠距離で撮像された識別媒体画像は、幾何学的歪みが比較的小さくなる（すなわち、画像認識に適している）。しかし、第３走行車線２６において遠距離で撮像された識別媒体画像は、領域サイズが小さいので、超解像処理を実施する必要がある。したがって、識別媒体が遠距離で撮像される第３走行車線２６上の領域２９は、超解像処理を必要とする領域となる。

　識別媒体領域判定部１３での判定結果、すなわち超解像処理を必要とする領域、および超解像処理を必要としない領域に関する情報は、超解像処理選択部１６に入力される。また、識別媒体位置が認識領域内に位置すると判定された場合は、識別媒体領域判定部１３は、識別媒体画像抽出部１５に対して、撮像画像から識別媒体画像を抽出することを命令する。なお、識別媒体位置が認識領域内に位置しないと判定された場合は、識別媒体認識装置３による識別媒体認識処理を終了する。

　識別媒体画像抽出部１５は、識別媒体領域判定部１３から、撮像画像から識別媒体画像を抽出する命令を受け取ると、撮像画像から識別媒体領域の画像（以降、「識別媒体画像」と称する）を抽出する。具体的には、その後の認識処理等に適切な領域サイズ（画像サイズ）の識別媒体画像を、撮像画像から切り出す。抽出された識別媒体画像は、超解像処理選択部１６に入力される。

　超解像処理選択部１６は、識別媒体領域判定部１３から受け取った、判定結果、すなわち超解像処理を必要とする領域、および超解像処理を必要としない領域に関する情報に基づいて、超解像処理の実施、不実施を選択する。具体的には、識別媒体領域が超解像処理を必要とする領域（図３の領域２９）内に位置する場合は、超解像処理選択部１６は超解像処理の実施を選択する。一方、識別媒体領域が超解像処理を必要としない領域（図３の領域２７、２８）内に位置する場合は、超解像処理選択部１６は超解像処理の不実施を選択する。超解像処理の実施が選択された場合は、識別媒体画像は、超解像処理部１７に入力される。超解像処理の不実施が選択された場合は、識別媒体画像は、識別媒体認識部１８に入力される。

　超解像処理部１７は、識別媒体画像の解像度を高める超解像処理を行う。超解像処理が行われた識別媒体画像は、識別媒体認識部１８に入力される。本開示では、撮像画像における超解像処理を必要とする領域が予め定められているため、識別媒体画像の領域サイズ（画像サイズ）や幾何学的歪みの度合いが限定される。すなわち、識別媒体画像の文字サイズや幾何学的歪みのパターンが限定される。したがって、テンプレート型の超解像処理技術に使用されるテンプレート画像（参照画像）のパターンが限定されるので、データサイズをコンパクトにすることができ、その結果、処理速度を高めることが可能となる。

　識別媒体認識部１８は、超解像処理選択部１６から入力された超解像処理が行われていない識別媒体画像、または、超解像処理部１７から入力された超解像処理が行われた識別媒体画像から、識別媒体に含まれる文字およびまたは数字を認識して、識別媒体を読み取る。識別媒体認識部１８で読み取られた識別媒体は、外部記憶装置４に記憶されるか、または表示装置５に表示される。

　次に、図２に示した第１実施形態に係る識別媒体認識装置３による識別媒体認識処理の流れを、図４を参照して説明する。

　まず、画像取得部１１は、撮像装置２により撮像された撮像画像を取得する（ＳＴ１０１）。続いて、識別媒体領域検出部１２は、撮像画像から識別媒体領域を検出する（ＳＴ１０２）。次に、識別媒体領域検出部１２は、撮像画像における識別媒体領域の位置を検出する（ＳＴ１０３）。

　続くステップＳＴ１０４では、識別媒体領域判定部１３は、識別媒体領域が、識別媒体の認識処理を実施する領域（認識領域）内に位置するか否かを判定する。また、識別媒体領域判定部１３は、識別媒体領域が認識領域内に位置すると判定された場合に、その認識領域が、超解像処理を必要とする領域であるか、または超解像処理を必要としない領域であるかも判定する。

　ステップＳＴ１０４で、識別媒体領域が認識領域内に位置すると判定された場合（ＳＴ１０４：Ｙｅｓ）は、ステップＳＴ１０５へ進む。識別媒体領域が認識領域内に位置しないと判定された場合（ＳＴ１０４：Ｎｏ）は、処理を終了する。

　ステップＳＴ１０５では、識別媒体画像抽出部１５は、撮像画像から識別媒体領域の画像（識別媒体画像）を抽出する。続くステップＳＴ１０６では、超解像処理選択部１６は、識別媒体領域判定部１３から入力された、超解像処理を必要とする領域、および超解像処理を必要としない領域に関する情報に基づいて、超解像処理の実施、不実施を選択する。識別媒体領域が超解像処理を必要とする領域（以降、「超解像領域」と称する）内に位置する場合（ＳＴ１０６：Ｙｅｓ）は、ステップＳＴ１０７に進む。識別媒体領域が超解像処理を必要としない領域内に位置する場合（ＳＴ１０６：Ｎｏ）は、ステップＳＴ１０８に進む。

　ステップＳＴ１０７では、超解像処理部１７は、識別媒体画像の超解像処理を行う。そして、ステップＳＴ１０８では、識別媒体認識部１８は、超解像処理選択部１６から入力された超解像処理が行われていない識別媒体画像、または、超解像処理部１７から入力された超解像処理が行われた識別媒体画像から識別媒体に含まれる文字およびまたは数字を認識して、識別媒体を読み取る。

　このようにして、第１実施形態に係る識別媒体認識装置３によれば、撮像画像における識別媒体領域の位置に基づいて、超解像処理の実施、不実施を選択することが可能となる。したがって、遠距離で撮像された識別媒体画像の領域、すなわち撮像画像における領域サイズが小さくなる領域を超解像領域として設定することにより、遠距離で撮像された識別媒体画像を超解像処理することができ、これにより、装置の処理負荷を大きくすることなく、近距離で撮像された識別媒体画像および遠距離で撮像された識別媒体画像を両方とも認識することが可能となる。

　（第２実施形態）
　次に、本開示の第２実施形態に係る識別媒体認識システム１について、ナンバープレートを識別媒体の例として説明する。本開示の第２実施形態に係る識別媒体認識システム１は、上述の図１Ａ，図１Ｂに示した識別媒体認識システム１と同様の構成を有している。図５は、第２実施形態に係る識別媒体認識装置３の概略構成を示すブロック図であり、図６は、撮像画像から抽出した識別媒体領域の一例を示す図であり、図７は、第２実施形態に係る識別媒体認識装置３による識別媒体認識処理の流れを示すフロー図である。

　この第２実施形態は、識別媒体認識装置３が、識別媒体領域判定部１３および領域情報記憶部１４を備えておらず、それらの代わりに、歪み度算出部３１、領域サイズ算出部３２、認識領域指定部３３、および評価値情報記憶部３４を備えている点が、上記した第１実施形態と異なる。歪み度算出部３１および領域サイズ算出部３２は、請求の範囲における領域パラメータ算出部に相当する。それ以外の点については、第１実施形態と同様であるため、説明は省略する。

　歪み度算出部３１は、識別媒体領域の幾何学的歪みの度合いを示す値である歪み度を算出する。図６に示すように、識別媒体領域４１は、略四角形の形状を有している。歪み度は、識別媒体領域４１の四隅の内角Ａ１～Ａ４の角度を用いて、下記の数式（１）から求めることができる。歪み度算出部３１で算出された歪み度は、認識領域指定部３３に入力される。

　領域サイズ算出部３２は、識別媒体領域の領域サイズを算出する。略四角形状の識別媒体領域の輪郭を画定する４つの辺における、長さが長い方の縦方向の辺の高さのピクセル数を、領域サイズとする。図６では、図中右側の縦の辺の高さが、領域サイズとなる。領域サイズ算出部３２で算出された領域サイズは、認識領域指定部３３に入力される。

　認識領域指定部３３は、まず、歪み度算出部３１で算出された歪み度と、領域サイズ算出部３２で算出された領域サイズとを用いて、識別媒体領域における領域サイズと歪み度とのバランスを評価する値である評価値を算出する。評価値は、下記の数式（２）から求めることができる。αは、予め定められた係数である。

　評価値＝領域サイズ－α×歪み度　　　…数式（２）
　認識領域指定部３３は、次に、算出された評価値に基づいて、識別媒体領域検出部１２で検出された識別媒体領域を、識別媒体の認識処理を実施する領域である認識領域に指定するか否かを判定する。この判定は、評価値情報記憶部３４に記憶されている評価値に関する情報を参照して行う。評価値に関する情報は、ユーザ等により予め設定されており、評価値情報記憶部３４に記憶されている。具体的には、評価値が予め定められた閾値Ｔ１を超える場合は、識別媒体領域を認識領域に指定する。閾値Ｔ１は、識別媒体領域における領域サイズと歪み度とのバランスが、識別媒体の認識処理を実施するのに適切と判断される値とする。評価値が閾値Ｔ１以下である場合は、識別媒体認識装置３による識別媒体認識処理を終了する。識別媒体領域が認識領域に指定された場合は、認識領域指定部３３は、識別媒体領域の領域サイズを超解像処理選択部１６に入力する。また、認識領域指定部３３は、識別媒体画像抽出部１５に対して、撮像画像から識別媒体画像を抽出することを命令する。

　識別媒体画像抽出部１５は、認識領域指定部３３から、撮像画像から識別媒体画像を抽出する命令を受け取ると、撮像画像から識別媒体画像を抽出する。抽出された識別媒体画像は、超解像処理選択部１６に入力される。

　超解像処理選択部１６は、認識領域指定部３３から受け取った識別媒体領域の領域サイズに基づいて、超解像処理の実施、不実施を選択する。具体的には、識別媒体領域の領域サイズが予め定められた閾値Ｔ２を下回った場合は、超解像処理選択部１６は超解像処理の実施を選択する。領域サイズが小さいと、識別媒体の文字およびまたは数字の大きさが小さいことから、識別媒体認識部１８での認識が困難になるため、超解像処理が必要と判断される。一方、領域サイズが閾値Ｔ２以上であった場合は、領域サイズが大きいことから超解像処理が不要と判断されるため、超解像処理選択部１６は超解像処理の不実施を選択する。超解像処理の実施が選択された場合は、識別媒体画像は、超解像処理部１７に入力される。超解像処理の不実施が選択された場合は、識別媒体画像は、識別媒体認識部１８に入力される。

　超解像処理部１７は、識別媒体画像の超解像処理を行う。超解像処理が行われた識別媒体画像は、識別媒体認識部１８に入力される。そして、識別媒体認識部１８は、超解像処理選択部１６から入力された超解像処理が行われていない識別媒体画像、または、超解像処理部１７から入力された超解像処理が行われた識別媒体画像から、識別媒体に含まれる文字およびまたは数字を認識して、識別媒体を読み取る。識別媒体認識部１８で読み取られた識別媒体は、外部記憶装置４に記憶されるか、または表示装置５に表示される。

　なお、上述した、歪み度算出部３１、領域サイズ算出部３２および認識領域指定部３３での算出方法または評価方法は一例であり、これに限定されるものではなく、他の様々な算出方法または評価方法を用いることが可能である。例えば、歪み度は、識別媒体領域の内角の角度ではなく、識別媒体領域の略四角形状の輪郭を画定する各辺の長さを用いて算出することも可能である。また、本実施形態では、識別媒体領域を、識別媒体の認識処理を実施する領域である認識領域に指定するか否かを判定は、歪み度および領域サイズの両方を用いて行ったが、前記判定は、歪み度および領域サイズの一方だけを用いて行うことも可能である。

　次に、図５に示した第２実施形態に係る識別媒体認識装置３による識別媒体認識処理の流れを、図７を参照して説明する。

　まず、画像取得部１１は、撮像装置２により撮像された撮像画像を取得する（ＳＴ２０１）。続いて、識別媒体領域検出部１２は、撮像画像から識別媒体領域を検出する（ＳＴ２０２）。

　次に、ステップＳＴ２０３では、歪み度算出部３１は、識別媒体領域の歪み度を算出する。続くステップＳＴ２０４では、領域サイズ算出部３２は、識別媒体領域の領域サイズを算出する。次のステップＳＴ２０５では、認識領域指定部３３は、識別媒体領域の歪み度および領域サイズを用いて、識別媒体領域の歪み度と領域サイズとのバランスを表す値である評価値を算出する。

　そして、次のステップＳＴ２０６では、認識領域指定部３３は、評価値が、予め定められた閾値Ｔ１を上回るか否かを判定する。ステップＳＴ２０６で、評価値が閾値Ｔ１を上回ると判定された場合（ＳＴ２０６：Ｙｅｓ）は、ステップＳＴ２０７へ進み、評価値が閾値Ｔ１以下であると判定された場合（ＳＴ２０６：ＮＯ）は、処理を終了する。

　ステップＳＴ２０７では、識別媒体画像抽出部１５は、撮像画像から識別媒体画像を抽出する。続くステップＳＴ２０８では、超解像処理選択部１６は、識別媒体領域の領域サイズが、予め定められた閾値Ｔ２を下回るか否かを判定する。ステップＳＴ２０８で、領域サイズが閾値Ｔ２を下回ると判定された場合（ＳＴ２０８：Ｙｅｓ）は、ステップＳＴ２０９へ進み、領域サイズが閾値Ｔ２以上であると判定された場合（ＳＴ２０８：ＮＯ）は、ステップＳＴ２１０に進む。

　ステップＳＴ２０９では、超解像処理部１７は、識別媒体画像の超解像処理を行う。そして、ステップＳＴ２１０では、識別媒体認識部１８は、超解像処理が行われた識別媒体画像または超解像処理が行われていない識別媒体画像から識別媒体に含まれる文字およびまたは数字を認識して、識別媒体を読み取る。

　このようにして、第２実施形態に係る識別媒体認識装置３によれば、識別媒体領域の領域サイズおよび歪み度に基づいて、超解像処理の実施、不実施を選択することができる。したがって、遠距離で撮像された識別媒体画像の領域、すなわち撮像画像における領域サイズが小さくなる領域を、歪み度および領域サイズに基づいて検出することにより、遠距離で撮像された識別媒体画像を超解像処理することができ、これにより、装置の処理負荷を大きくすることなく、近距離で撮像された識別媒体画像および遠距離で撮像された識別媒体画像を両方とも認識することが可能となる。

　（第３実施形態）
　次に、本開示の第３実施形態に係る識別媒体認識システム１について、ナンバープレートを識別媒体の例として説明する。本開示の第３実施形態に係る識別媒体認識システム１は、上述の図１Ａ，図１Ｂに示した識別媒体認識システム１と同様の構成を有している。ただし、この第３実施形態は、撮像装置２が車道の側方または上方ではなく自車両に搭載されており、自車両の走行中に他車両のナンバープレートを撮像する点が、上記した第１実施形態と異なる。それ以外の点については、第１実施形態と同様であるため、説明は省略する。

　撮像装置２は、自車両のフロントガラスの上端付近（例えばルームミラーの裏側）に設置されており、自車両の前方に所定の角度範囲で広がる領域を撮像する。これにより、自車両の走行中に、自車両の前方に存在する他車両のナンバープレートを撮像することができる。他車両には、自車両の走行方向と同一方向に走行する先行車両、自車両の走行方向と反対方向に走行する対向車両、自車両の前方で停止している停止車両などが含まれる。撮像装置２としては、ドライブレコーダ用の車載カメラを使用することができる。なお、撮像装置２の種類、数、配置位置等は、特に限定されるものではなく、様々に改変可能である。例えば、撮像装置２を自車両の後部に設置し、自車両の後方に存在する他車両のナンバープレートを撮像するように構成してもよい。

　図８Ａおよび図８Ｂは、撮像装置２により撮像された撮像画像５１の一例を示す図である。図８Ａおよび図８Ｂに示すように、撮像画像５１には、自車両の前方の車道５２が含まれる。車道５２は中央分離帯５３を有する片道２車線の道路であり、自車両は図中の手前側（図中下側）から奥側（図中上側）に向かって走行する。車道５２の２車線は、路側帯５４側（図中左側）の車線を第１走行車線５５、中央分離帯５３側の車線を第２走行車線５６と称することとする。すなわち、第１走行車線５５は、車道外側線６１と車線境界線６２との間の車線であり、第２走行車線５６は、車線境界線６２と車道中央線６３との間の車線である。図８Ａでは、自車両は第２走行車線５６を走行しており、図８Ｂでは、自車両は第１走行車線５５を走行している。

　そして、第１走行車線５５および第２走行車線５６の両車線上には、自車両に近い側（図中下側）に認識領域７１が、自車両から遠い側（図中上側）に認識領域７２がそれぞれ設定されている。また、中央分離帯５３を挟んだ対向車線５７には、認識領域７３が設定されている。認識領域７１は、超解像処理を必要としない領域であり、認識領域７２および認識領域７３は、超解像処理を必要とする領域である。第１実施形態において前述したように、車両のナンバープレートを認識するためには、識別媒体画像の領域サイズがある程度の大きさを有している必要がある。撮像装置２との距離が近い認識領域７１において撮像された識別媒体画像は、領域サイズがある程度の大きさを有しているため、超解像処理を必要としない。一方、撮像装置２との距離が遠い認識領域７２、７３において撮像された識別媒体画像は、領域サイズが小さいため、超解像処理を必要とする。

　撮像装置２は自車両に搭載されているので、認識領域７１、７２、７３は自車両の走行に伴い変化する。したがって、自車両の走行時には、認識領域７１、７２、７３は随時設定する必要がある。具体的には、まず、第１走行車線５５、第２走行車線５６、対向車線５７を認識する。第１走行車線５５、第２走行車線５６、対向車線５７の認識は、車道５２の路面に描かれた車道外側線６１、車線境界線６２、車道中央線６３等の区画線に基づき行うようにするとよい。そして、第１走行車線５５および第２走行車線５６の両車線上における自車両に近い側の所定の範囲および形状の領域を認識領域７１と設定し、自車両から遠い側の所定の範囲および形状の領域を認識領域７２と設定する。また、対向車線５７上の所定の範囲および形状の領域を認識領域７３と設定する。認識領域７１、７２、７３の範囲および形状に関する情報は、ユーザ等により予め設定されており、例えば記憶部に記憶される。

　あるいは、撮像画像５１中における区画線６１、６２、６３の位置、形状、傾斜角度を認識し、その認識結果に応じて、認識領域７１、７２、７３の範囲および形状を設定するようにしてもよい。撮像画像５１中における区画線６１、６２、６３の位置等に対応する認識領域７１、７２、７３の範囲および形状に関する情報は、ユーザ等により予め設定されており、例えば記憶部に記憶される。また、対向車線５７の認識は、他車両の動きベクトルに基づき行うようにしてもよい。他車両の動きベクトルの向きが自車両に近づく方向である場合は、その他車両は対向車線５７を走行していると判断することができる。

　識別媒体の認識処理は、第１実施形態において説明したのと同様にして行う。つまり、撮像画像５１から検出された識別媒体領域が超解像処理を必要とする認識領域７２、７３内に位置する場合は、超解像処理の実施を選択し、超解像処理を必要としない認識領域７１内に位置する場合は、超解像処理の実施を選択しない。

　このようにして、第３実施形態に係る識別媒体認識システム１によれば、自車両の走行中に自車両に搭載された撮像装置２により他車両のナンバープレートを撮像し、撮像画像５１における識別媒体領域の位置に基づいて、超解像処理の実施、不実施を選択することができる。これにより、走行中の自車両から他車両のナンバープレートを撮像した場合でも、装置の処理負荷を大きくすることなく、近距離で撮像された識別媒体画像および遠距離で撮像された識別媒体画像を両方とも認識することが可能となる。

　なお、この第３実施形態では片側２車線の道路を例に挙げて説明したが、これに限定されるものではない。この第３実施形態は、片側１車線の道路、片側３車線以上の道路、一車線道路等にも適用可能である。また、一車線道路等で車道５２の路面に区画線が描かれていない場合は、自車両の前方の路面を車道５２として検出し、車道５２上における自車両に近い側の所定の範囲および形状の領域を認識領域７１と設定し、自車両から遠い側の所定の範囲および形状の領域を認識領域７２と設定するとよい。

　（第４実施形態）
　次に、本開示の第４実施形態に係る識別媒体認識システム１について説明する。本開示の第４実施形態に係る識別媒体認識システム１は、上述の図１Ａ，図１Ｂに示した識別媒体認識システム１と同様の構成を有している。ただし、この第４実施形態に係る識別媒体認識システム１は、車両のナンバープレートではなく人物が身につけているＩＤカードを認識する点が、上記した第１実施形態と異なる。それ以外の点については、第１実施形態と同様であるため、説明は省略する。

　図９は、本開示の第４実施形態に係る識別媒体認識システム１の概略を示す構成図である。この第４実施形態に係る識別媒体認識システム１は、個人認証を行うためにＩＤカードを撮像して読み取るためのシステムである。この第４実施形態では、建物内のある部屋への入退室を管理するために、ＩＤカードによるＩＤ認証を行うことを想定している。

　図９に示すように、建物内の廊下８１に、その先の部屋への入退室を管理するためのセキュリティゲート８２が設置されており、セキュリティゲート８２の上部またはその近傍の天井もしくは壁には撮像装置２が配置されている。セキュリティゲート８２の前には、人物８３、８４が存在しており、人物８３、８４は胸にＩＤカード８５、８６をつけている。なお、ＩＤカード８５、８６は、胸につけるのではなく、首からぶら下げるようにしてもよい。また、この第４実施形態では、人物の人数は２名であるが、人物の人数は、特に限定されるものではない。

　撮像装置２は、セキュリティゲート８２の前方に所定の角度範囲で広がる領域を撮像する。これにより、人物８３、８４が胸につけているＩＤカード８５、８６を撮像することができる。この第４実施形態では、撮像装置２としてボックスカメラを用いているが、撮像装置２は特に限定されるものではない。例えば、撮像装置２は、全方位型カメラであってもよい。

　図１０は、撮像装置２により撮像された撮像画像９１の一例を示す図である。図１０に示すように、撮像画像９１には、人物８３、８４が胸につけているＩＤカード８５、８６が含まれる。また、図１０に示すように、撮像画像９１における撮像装置２に近い側（図中下側）には認識領域９２が、撮像装置２から遠い側（図中上側）には認識領域９３が設定されている。認識領域９２は、超解像処理を必要としない領域であり、認識領域９３は、超解像処理を必要とする領域である。認識領域９２、９３は、ユーザにより予め設定されており、識別媒体認識装置３の領域情報記憶部１４に記憶されている。

　第１実施形態において前述したように、ＩＤカードを認識するためには、識別媒体画像の領域サイズがある程度の大きさを有している必要がある。撮像装置２との距離が近い認識領域９２において撮像されたＩＤカード画像は、領域サイズがある程度の大きさを有しているため、超解像処理を必要としない。一方、撮像装置２との距離が遠い認識領域９３において撮像されたＩＤカード画像は、領域サイズが小さいため、超解像処理を必要とする。また、識別媒体画像の幾何学的歪みが大きいと、識別媒体を認識することができなくなる。そのため、識別媒体画像は、幾何学的歪みが小さいものである必要がある。図９に示すように撮像装置２がセキュリティゲート８２の上方にある場合、識別媒体がセキュリティゲート８２にあまりにも近いと、識別媒体画像の幾何学的歪みが大きくなることがある。その場合、認識領域９２は、セキュリティゲート８２よりも少し後方の、幾何学的歪みが小さい領域に設定されることが望ましい。これに対して、撮像装置２がセキュリティゲート８２の横にある場合など、セキュリティゲート８２の比較的近くまで幾何学的歪みが小さい識別媒体画像を撮像することができれば、認識領域９２をセキュリティゲート８２近くにまで設定することができる。

　ＩＤカードの認識処理は、第１実施形態において説明したのと同様にして行う。つまり、撮像画像９１から検出された識別媒体領域が超解像処理を必要とする認識領域９３内に位置する場合は、超解像処理の実施を選択し、超解像処理を必要としない認識領域９２内に位置する場合は、超解像処理の実施を選択しない。

　このようにして、第４実施形態に係る識別媒体認識システム１によれば、撮像装置２により人物８３、８４が胸につけているＩＤカード８５、８６を撮像し、撮像画像９１におけるＩＤカード領域の位置に基づいて、超解像処理の実施、不実施を選択することができる。これにより、ＩＤ認証を行うためにＩＤカードを撮像した場合でも、装置の処理負荷を大きくすることなく、近距離で撮像されたＩＤカード画像および遠距離で撮像されたＩＤカード画像を両方とも認識することが可能となる。

　また、この第４実施形態に係る識別媒体認識システム１によれば、撮像装置２との距離が近い認識領域９２だけでなく、撮像装置２との距離が遠い認識領域９３においてもＩＤ認証が可能なので、ＩＤ認証の対象者が複数存在する場合でも、認識領域９２、９３の両領域においてＩＤ認証を行うことにより、複数の人物のＩＤ認証を迅速かつ効率的に行うことが可能となる。また、セキュリティゲート８２に近い認識領域９２と、セキュリティゲート８２から離れた認識領域９３との両領域におけるＩＤ認証が可能になるとＩＤ認証の実施機会が増えるため不審者を発見しやすくなり、これにより、ＩＤ認証を受けていない人物がＩＤ認証を受けた人物と共に不正に入室する共連れを防止することも可能となる。

　また、ＩＤカード８５、８６によるＩＤ認証に加えて顔認証も行い、顔認証の認証結果とＩＤ認証の認証結果とを照合するようにしてもよい。このように、ＩＤ認証と顔認証とを組み合わせると、なりすましの防止、入退記録の視認性向上、不審者の記録等を実現することができる。この場合は、撮像画像９１における人物８３、８４の顔領域８７、８８（図９および図１０参照）の画像を、記憶部に予め記憶された認証対象者の顔画像と照合することにより、顔認証を行うとよい。なお、顔領域８７、８８の画像と、認証対象者の顔画像とを照合する方法は、特に限定されるものではなく、類似度に基づく方法等の、様々な技術を用いることが可能である。

　また、この第４実施形態に係る識別媒体認識システム１は、セキュリティゲート８２での個人認証だけでなく、他の様々な用途でのＩＤ認証にも適用可能である。例えば、工事現場や建設現場等において、作業者が着用するヘルメットに、作業者の名前や認識番号等の作業者情報が記された識別媒体が取り付けられる場合がある。このような場合、この第４実施形態に係る識別媒体認識システム１を適用することにより、ヘルメットに取り付けられた識別媒体から、作業人情報を読み取ることができる。これにより、作業者毎に、作業状態や健康状態等の様々な状態を管理することが可能となる。例えば、作業者の肌色領域から脈波や脈拍等の生体情報を抽出することにより、作業者毎に健康状態を管理することが可能となる。

　（第５実施形態）
　次に、本開示の第５実施形態に係る識別媒体認識システム１について、ナンバープレートを識別媒体の例として説明する。本開示の第５実施形態に係る識別媒体認識システム１は、上述の図１Ａ，図１Ｂに示した識別媒体認識システム１と同様の構成を有している。

　本開示の第５実施形態では、識別媒体として、日本国内で使用されるナンバープレート、すなわち自動車登録番号標を例として説明する。自動車登録番号標には、識別媒体認識装置３による認識処理の対象となる文字列として一連指定番号が表示されている。この一連指定番号は、主として上位２桁および下位２桁の間にハイフン「－」が挿入された４桁のアラビア数字から構成される。また、一連指定番号が３桁以下の数となる場合には、その上位の桁に「０」（または空白）の代わりに中点「・」が表示される（ここでは、中点「・」は数字として扱う）。

　なお、識別媒体認識システム１で認識される識別媒体画像における文字列は、文字（特に、数字）から構成されることが好ましいが、厳密に文字（数字を含む）に限定されるものではなく、記号や簡易な図形を含むものであってもよい。また、そのような文字列の文字数は、４個（ここでは、４桁）に限定されるものではなく、少なくとも複数であればよい。さらに、そのような文字列における文字は、複数桁の数字のように一列に配置されるものに限定されるものではなく、少なくとも文字群を構成し、識別媒体画像中の位置または文字間の相対位置に応じて実質的に配置順位を設定可能なものであればよい。

　撮像装置２は、ＣＣＤ等のイメージセンサを備えたデジタルスチルカメラや、デジタルビデオカメラから構成され、識別媒体としてのナンバープレートを備えた車両等を撮像することにより、識別媒体画像を取得する。識別媒体画像は、主要な被写体として識別媒体を含む撮像画像であるが、通常は識別媒体以外の車体や、周辺の物体等が含まれる。撮像装置２としては、例えば、道路や施設の出入口などに設置された監視カメラや、車両等に搭載される車載カメラなどを用いることができる。撮像装置２で撮像された識別媒体画像は、識別媒体認識装置３に順次送られることにより、表示装置５に表示されるとともに、外部記憶装置４に記憶される。また、識別媒体画像は、識別媒体認識装置３に直接送られずに撮像装置２内のメモリに一旦記憶される構成であってもよい。

　識別媒体認識装置３は、例えばＰＣ（Ｐｅｒｓｏｎａｌ　Ｃｏｍｐｕｔｅｒ）である。図１Ｂに示すように、識別媒体認識装置３では、所定の制御プログラムに基づき識別媒体画像における文字列を認識する処理を統括的に実行するプロセッサ１２１、このプロセッサ１２１のワークエリア等として機能する揮発性メモリであるＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）１２２、プロセッサ１２１が実行する制御プログラムやデータを格納する不揮発性メモリであるＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）１２３が、それぞれ入出力バス２５に接続されている。また、識別媒体認識装置３には、周辺機器として、キーボード及びマウス等の入力デバイスである入力装置２４、液晶等のモニタからなる表示装置５、ならびにＨＤＤ（Ｈａｒｄ　Ｄｉｓｋ　Ｄｒｉｖｅ）やフラッシュメモリ等のストレージである外部記憶装置４などが接続されている。なお、後述する図１１の機能ブロック図において、識別媒体認識装置３の各部の機能は、主としてプロセッサ１２１が制御プログラムを実行することによって実現可能である。

　識別媒体認識装置３と、撮像装置２、外部記憶装置４、及び表示装置５との接続形態は特に限定されるものではなく、例えば、通信ケーブルによって直接接続してもよいし、ＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）などの有線もしくは無線通信を介したネットワーク接続の形態でもよい。また、識別媒体認識装置３は、ＰＣに限らず、同様の機能を有するサーバや、デジタルカメラ等として実現することもできる。

　外部記憶装置４には、撮像装置２で撮像された識別媒体画像とともに、認識対象となる識別媒体の文字列を構成し得る個々の文字（以下、「参照用文字」という。）の画像データが記憶されている。本実施形態では、基準画像には、参照用文字の画像データとして、一連指定番号を構成する全てのアラビア数字（ここでは、「１」－「９」）および中点「・」の画像データが含まれる。

　図１１は、図１Ａに示した識別媒体認識装置３の第５実施形態に係る機能ブロック図である。図１２は、図１１中の類似度演算部１３６による演算結果の一例を示す図であり、図１３は、図１１中の類似評価部１３７による相関値の上位候補の抽出例を示す図である。図１４は、図１１中の類似評価部１３７による各桁の評価値算出結果の一例を示す図である。図１５は類似評価部１３７による候補番号の抽出方法の変形例を示す説明図である。図１５では、各桁に関し、縦軸に評価値、横軸に数字がそれぞれ示されている。

　図１１に示す識別媒体認識装置３において、基準画像生成部１３１は、外部記憶装置４に記憶された参照用文字の画像を取得し、それら参照用文字の画像を適宜組み合わせることにより、認識対象となる識別媒体（ナンバープレート）に表示され得る全ての文字列の基準画像を順次生成する。図１１では、基準画像として第４桁の文字列「５７７５」（より厳密には、上位２桁および下位２桁の間にハイフン「－」が挿入されている。以下同様。）が生成された場合を示しているが、実際には、一連指定番号（認識対象の文字列）を構成する「・・・１」～「９９９９」までの９９９９通りの基準画像が順次生成される。

　また、射影変換行列取得部１３２は、外部記憶装置４に記憶された評価対象の識別媒体（ナンバープレート）画像を取得し、その画像における識別媒体（ナンバープレート）のコーナー部（四隅）を検出することにより、それら４点の座標から平面射影変換行列を算出する。射影変換処理部１３３は、その平面射影変換行列を用いて、基準画像生成部１３１で生成された基準画像を順次射影変換する。これにより、撮像画像の識別媒体（ナンバープレート）と同様に変形した基準画像（以下、「変換画像」という。）が得られる。画像劣化処理部１３４は、変換画像のダウンサンプリングや、ぼかし処理等の画像処理による模擬的な劣化処理を実行することにより、変換画像を劣化させた画像（以下、「劣化画像」という。）を順次生成する。

　類似度演算部１３６は、外部記憶装置４に記憶された評価対象の識別媒体（ナンバープレート）画像を取得し、その画像中の文字列について、各劣化画像との類似度を順次算出する。本実施形態では、画像間の類似性の高さを示す類似度として、以下のような画像相関係数（以下、「相関値」という。）を用いる。

　類似度演算部１３６による類似度の演算処理結果として、図１２に示すように、「・・・１」～「９９９９」までの一連指定番号の各々に対する相関値が求められる。それらの相関値は、表示装置５に表示されるとともに、外部記憶装置４に記憶される。

　類似評価部１３７は、図１２に示した一連指定番号の各々に対する相関値に基づき、図１３に示すように、相関値の大きさの順序が閾値（ここでは、上位８０個）以内となる一連指定番号を抽出する。図１３では、相関値が最大となる一連指定番号「５５７５」から相関値の大きさが８０番目となる一連指定番号「５０２５」までが抽出された例が示されている。なお、類似評価部１３７は、上述のように所定数（ここでは、８０個）の一連指定番号を抽出する代わりに、相関値の大きさが所定の閾値以上の値となる一連指定番号を抽出する構成であってもよい。

　また、類似評価部１３７は、抽出した一連指定番号において評価対象となる各桁（配置順位）の数字について、当該数字（ここでは、１つの数字）が同一となる基準画像における一連指定番号の類似度の和を求める。さらに、類似評価部１３７は、その類似度の和を一連指定番号の抽出数で除した値を評価値として求める。より詳細には、類似評価部３７は、各桁（ここでは、第１桁－第４桁）に関し、各数字（「１」－「９」及び「・」を含む１０個の数字）についてそれぞれ一連指定番号の類似度（すなわち、第４桁の数字の類似度）の和を求め、その和を８０で除した値を評価値とする。

　例えば、類似評価部１３７は、一連指定番号における第４桁（図１３中の符号４０で示す）の数字「５」についての評価値を求める場合には、一連指定番号「５５７５」の相関値０．３９９３、一連指定番号「５７２５」の相関値０．３５７５、一連指定番号「５７１５」の相関値０．３５３７、一連指定番号「５３７５」の相関値０．３５３４、・・・・、一連指定番号「５１７５」の相関値０．３００７、一連指定番号「５７７７」の相関値０．３００９、及び一連指定番号「５０２５」の相関値０．２９８５の和を８０で除した値を評価値とする。

　このようにして類似評価部１３７は、図１４に示すように、第１桁－第４桁の各数字「０」－「９」、「・」に対する評価値をそれぞれ求めることができる。また、類似評価部３７は、図１４中の各桁の評価値に関して最大値をとる数字を、識別媒体（ナンバープレート）画像における文字列を構成し得る文字の候補（第１候補）として抽出（決定）する。図１４の例では、第４桁では数字「５」が最大の評価値となり、第３桁では数字「７」が最大の評価値となり、第２桁では数字「７」が最大の評価値となり、第１桁では数字「５」が最大の評価値となる。これにより、類似評価部１３７は、識別媒体（ナンバープレート）画像中の文字列の第１の候補番号として一連指定番号「５７７５」を決定し、それを表示装置５に出力するとともに、外部記憶装置４に記憶する。

　なお、本実施形態では、第１の候補番号のみを求める例を示したが、類似評価部１３７は、例えば、第１の候補番号の評価値と他の評価値との差を考慮して、第２の候補番号以下の複数の候補番号を決定することができる。類似評価部３７は、各桁における各数字の評価値に基づき、一連指定番号「５７７５」の各桁の評価値との差が最も小さい１つの数字を第２の候補番号を構成する数字として決定することができる。より詳細には、図１５の例では、第４桁における最も高い評価値（０．１３５）を有する「５」と２番目に高い評価値（０．０５５）を有する「９」との評価値の差（０．０８０）が、他の桁における同様の評価値の差（例えば、第３桁における「７」と「３」の評価値の差（０．０８５）、第２桁における「７」と「２」の評価値の差（０．０８８）、第１桁における「５」と「３」の評価値の差（０．２３９））よりも小さい。そこで、類似評価部１３７は、その第４桁の「９」を一連指定番号「５７７５」において対応する第４桁の「５」と入れ替えた「９７７５」を第２の候補番号とすることができる。類似評価部１３７は、上記と同様の方法により、第３の候補番号以下の更なる候補番号（図１５の例では、「５３７５」、「５７２５」等）を抽出してもよい。また、本実施形態では、類似評価部１３７は、４桁の数字の全ての候補を決定したが、その一部のみを決定する構成としてもよい。

　また、本実施形態では、各桁（すなわち、１つの桁）についての評価値を算出する構成としたが、少なくとも認識対象となる文字列を構成する文字数よりも小さい数（例えば、２つの桁）に対して評価値を算出する構成とすることができる。

　図１６は、図１に示した識別媒体認識装置３の処理の流れを示すフロー図である。

　識別媒体認識装置３による文字列の認識処理では、まず、一連指定番号ｎが１（ｎ＝１）に設定され（ＳＴ３０１）、その一連指定番号に対応する参照用文字から構成される基準画像（すなわち、「・・・１」等）が生成される（ＳＴ３０２）。

　その後、ステップＳＴ３０２で生成された基準画像が射影変換されることにより、変換画像が生成され（ＳＴ３０３）、続いて、ステップＳＴ３０３で生成された変換画像に劣化処理が施されることにより、劣化画像が生成される（ＳＴ３０４）。さらに、ステップＳＴ３０４で生成された劣化画像と、認識対象の識別媒体（ナンバープレート）画像中の文字列との類似度（ここでは、相関値）が算出される（ＳＴ３０５）。

　そこで、一連指定番号ｎが９９９９以下（ｎ≦９９９９）であるか（すなわち、類似度を算出すべき基準画像が残されているか）否かが判定され（ＳＴ３０６）、類似度を算出すべき基準画像が残されている場合（Ｙｅｓ）には、ｎに１を加算（ｎ＝ｎ＋１）し（ＳＴ３０７）、再びステップＳＴ３０２に戻って上述と同様の処理を実行する。最終的に一連指定番号ｎが９９９９を越えると（ＳＴ３０６：Ｎｏ）、ステップＳＴ３０５において各一連指定番号に対して算出された類似度に基づき、後に詳述する類似評価処理が実行され（ＳＴ３０８）、これにより文字列の認識処理が終了する。

　図１７は、図１６中のステップＳＴ３０８の詳細を示すフロー図である。このステップＳＴ３０８における類似評価処理では、まず、図１６中のステップＳＴ３０５で算出された類似度に関し、より大きいもの（最大値）から所定の閾値以内の数までの類似度を有する文字列（ここでは、一連指定番号）からなる上位候補が抽出される（ＳＴ４０１）。そこで、文字列における文字の配置順位ｄが１（ｄ＝１）に設定され（ＳＴ４０２）、また、文字番号ｓが１（ｓ＝１）に設定される（ＳＴ４０３）。

　ここで、ステップＳＴ４０２に関する文字の配置順位ｄは、識別媒体（ナンバープレート）画像における文字の配置に応じて設定されるものであり、ここでは、一連指定番号の桁（第１桁から第４桁のいずれか）に相当する。認識対象である文字列に数字以外の文字等が含まれる場合でも、識別媒体（ナンバープレート）画像における文字の位置またはそれら文字間の相対位置に応じて配置順位が定められる。例えば、識別媒体（ナンバープレート）画像において文字列が左右方向に１列に表示されている場合、最も右側に位置する文字の配置番号を１とし、左方に向けて２、３、・・・・ｘ（ただし、ｘは整数）と配置番号を設定することができる。

　また、ステップＳＴ４０３に関する文字番号ｓは、所定の文字の配置順位に位置する文字の種類であり、ここでは、各桁の数字に相当する。認識対象とする文字列に数字以外の文字等が含まれる場合には、例えば文字コードに基づき、文字番号ｓを設定することができる。

　そこで、ステップＳＴ４０２で設定された文字の配置順位において、ステップＳＴ４０３で設定された文字番号と一致する文字を含む全ての文字列（ＳＴ４０１で抽出されたもの）の類似度を加算する（ＳＴ４０４）。その加算結果は、外部記憶装置４に順次記憶される。

　その後、文字番号ｓがＮｓ（全文字数）以下であるか（すなわち、所定の配置順位における全ての文字の各々に関し、類似度の加算が終了していない文字が残されているか）否かが判定され（ＳＴ４０６）、類似度の加算が終了していない文字が残されている場合（Ｙｅｓ）には、ｓに１を加算（ｓ＝ｓ＋１）し（ＳＴ４０７）、次の文字番号に関して再びステップＳＴ４０４を実行する。最終的に文字番号ｓがＮｓを越えると（ＳＴ４０６：Ｎｏ）、配置順位ｄが４以下（ｄ≦４）であるか（すなわち、配置順位ｄがその最大値以下であるか）否かが判定される（ＳＴ４０８）。

　そこで、ｄ≦４を満たす場合（ＳＴ４０８：Ｙｅｓ）には、ｄに１を加算（ｄ＝ｎ＋１）し（ＳＴ４０９）、再びステップＳＴ４０３に戻って次の桁（配置順位）に関して上述と同様の処理を実行する。最終的に配置順位ｄが４を越えると（ＳＴ４０８：Ｎｏ）、ステップＳＴ４０４で算出された類似度の和の各々について正規化処理が実行され（ＳＴ４１０）、これにより類似評価処理が終了する。ステップＳＴ４１０の正規化処理としては、例えば、ステップＳＴ４０４で算出された類似度の和の各々を、ステップＳＴ４０１で抽出された上位候補の数で除する演算を実行することができる。

　このような類似評価処理により、図１４に示したような評価値が算出され、それらは、表示装置５に出力されるとともに、外部記憶装置４に記憶される。さらに、識別媒体認識装置３は、上述のように、それら評価値に基づき識別媒体（ナンバープレート）画像における文字列を構成し得る少なくとも１つの文字の候補を決定することができ、それを表示装置５に出力するとともに、外部記憶装置４に記憶する。なお、識別媒体認識装置３は、そのような評価値に基づく文字の候補とともに、図１３に示したような類似度に基づく識別媒体（ナンバープレート）画像中の文字列の上位候補を表示装置５に出力することができる。

　以上に述べた本第５実施形態に係る識別媒体認識システム１は、車両のナンバープレートのみならず、第４実施形態で述べたセキュリティゲート８２での人物が身につけているＩＤカードを認識して個人認証を行う場合などの、様々な用途でのＩＤ認証にも適用可能である。

　（第６実施形態）
　本開示の第６実施形態に係る識別媒体認識システム１は、上述の図１Ａ，図１Ｂ及び図１１に示した第５実施形態に係る識別媒体認識システム１と同様の構成を有している。ただし、上述の第５実施形態では、類似度演算部１３６が、文字列（一連指定番号）全体の類似度を算出するのに対し、第６実施形態では、類似度演算部１３６は、文字列の一部（ただし、少なくとも複数の文字からなる）について類似度を算出する。なお、第６実施形態に関し、以下で特に言及しない事項については、上述の第５実施形態と同様とする。

　図１８および図１９は、それぞれ本開示の第６実施形態に係る識別媒体認識装置３の類似度演算部１３６による演算結果の一例（上位２桁および下位２桁）を示す図であり、図２０は、識別媒体認識装置の類似評価部１３７による各桁の評価値算出結果の一例を示す図である。

　第６実施形態では、類似度演算部１３６は、それぞれ図１８および図１９に示すように、一連指定番号の上位２桁（「・・」－「９９」まで）および下位２桁（「・１」－「９９」および「００」－「０９」まで）の各々の数についてそれぞれ相関値を算出する。

　その後、類似評価部１３７は、図１８に示した相関値に基づき、相関値の大きさの順序が閾値以内となる一連指定番号（上位２桁）を抽出し、さらに、一連指定番号（上位２桁）において評価対象となる各桁の数字について、同一の数字を含む一連指定番号（上位２桁）についての類似度の和を求め、その和を一連指定番号の抽出数で除した値を評価値として算出する。このようにして類似評価部１３７は、図２０に示すように、上位２桁の各数字についての評価値を取得することができる。なお、詳細な説明は省略するが、同様に、類似評価部１３７は、図２０に示した相関値に基づき、下位２桁の各数字の評価値を求めることができる。

　以上に述べた本第６実施形態に係る識別媒体認識システム１は、車両のナンバープレートのみならず、第４実施形態で述べたセキュリティゲート８２での人物が身につけているＩＤカードを認識して個人認証を行う場合などの、様々な用途でのＩＤ認証にも適用可能である。

　以上に説明したように、本開示の識別媒体認識装置によれば、撮像画像における識別媒体の領域が、撮像画像における予め設定された領域内に位置する場合に超解像処理の実施を選択するように構成したので、撮像画像における識別媒体の領域の位置に基づいて、超解像処理の実施、不実施を選択することができる。したがって、遠距離で撮像された識別媒体画像の領域、すなわち撮像画像における領域サイズが小さくなる領域を「撮像画像における予め設定された領域」として設定することにより、遠距離で撮像された識別媒体画像を超解像処理することができ、これにより、装置の処理負荷を大きくすることなく、近距離で撮像された識別媒体画像および遠距離で撮像された識別媒体画像を両方とも認識することが可能となる。

　本開示の識別媒体認識装置によれば、識別媒体の領域の歪み度および領域サイズの少なくとも一方に基づいて超解像処理の実施、不実施を選択するように構成したので、識別媒体の領域の歪み度および領域サイズの少なくとも一方に基づいて、超解像処理の実施、不実施を選択することができる。したがって、遠距離で撮像された識別媒体画像の領域を、歪み度および領域サイズの少なくとも一方に基づいて検出することにより、遠距離で撮像された識別媒体画像を超解像処理することができ、これにより、装置の処理負荷を大きくすることなく、近距離で撮像された識別媒体画像および遠距離で撮像された識別媒体画像を両方とも認識することが可能となる。

　本開示の識別媒体認識装置によれば、ｒ評価値が予め定められた値を上回り、かつ領域サイズが予め定められた値を下回った場合に、超解像処理の実施を選択するように構成したので、遠距離で撮像された識別媒体画像の領域を、識別媒体の領域の歪み度および領域サイズに基づいて検出することが可能となる。

　本開示の識別媒体認識装置によれば、識別媒体画像中の文字列において評価対象となる配置順位にある１またはｙ個の文字に対応する複数の基準画像にそれぞれ含まれる参照用文字について、当該参照用文字が同一となる基準画像ごとに類似度の和を含む評価値を算出し、その評価値に基づきナンバープレート画像における文字列を構成し得る少なくとも１つの文字の候補を決定するため、撮影された識別媒体画像における文字列の誤認識を低減可能となる。

　本開示の識別媒体認識装置によれば、評価値の算出において、類似度が比較的低い基準画像を排除することにより、より適切な評価値を取得することが可能となる。

　本開示の識別媒体認識装置によれば、隣接配置された複数の参照用文字が同一となる基準画像ごとに類似度の和を含む評価値を算出することにより、評価値の算出処理が容易となる。

　本開示の識別媒体認識装置によれば、文字列に含まれる１個の文字に注目することにより、個々の文字の類似性が適切に評価され、より適切な評価値を取得することが可能となる。

　本開示の識別媒体認識装置によれば、全ての配置順位に関して評価値が算出されるため、ナンバープレート画像における文字列を構成し得る全ての文字の候補を適切に決定することが可能となる。

　本開示の識別媒体認識装置によれば、類似度として相関係数を用いることにより、簡易な処理により適切な評価値を取得することが可能となる。

　本開示の識別媒体認識装置によれば、ユーザは、評価値に基づく少なくとも１つの文字の候補および類似度に基づく文字列の候補を参照して、ナンバープレート画像における文字列を容易に推定することが可能となる。

　以上、本開示を特定の実施形態に基づいて説明したが、これらの実施形態はあくまでも例示であって、本開示はこれらの実施形態によって限定されるものではない。なお、上記実施形態に示した本開示に係る識別媒体認識装置および識別媒体認識方法の各構成要素は、必ずしも全てが必須ではなく、少なくとも本開示の範囲を逸脱しない限りにおいて適宜取捨選択することが可能である。

　本開示に係る識別媒体認識装置および識別媒体認識方法は、装置の処理負荷を大きくすることなく、近距離で撮像された識別媒体画像および遠距離で撮像された識別媒体画像を両方とも認識することを可能とする識別媒体認識装置および識別媒体認識方法などとして有用である。

１　　識別媒体認識システム
２　　撮像装置
３　　識別媒体認識装置
４　　外部記憶装置
５　　表示装置
１１　　画像取得部
１２　　識別媒体領域検出部
１３　　識別媒体領域判定部
１４　　領域情報記憶部
１５　　識別媒体画像抽出部
１６　　超解像処理選択部
１７　　超解像処理部
１８　　識別媒体認識部
１２１　　プロセッサ
１２４　　入力装置
１２５　　入出力バス
１３１　　基準画像生成部
１３２　　射影変換行列取得部
１３３　　射影変換処理部
１３４　　画像劣化処理部
１３６　　類似度演算部
１３７　　類似評価部

Claims

　識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識装置であって、
　撮像装置により撮像された撮像画像を取得する画像取得部と、
　前記撮像画像から前記識別媒体の領域を検出する識別媒体領域検出部と、
　前記識別媒体の領域から前記識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識部と、
　前記識別媒体の領域の超解像処理を選択的に行う超解像処理部と、
　前記撮像画像における予め設定された領域を記憶する領域記憶部と、
　前記識別媒体の領域が前記予め設定された領域内に位置するか否かを判定する識別媒体領域判定部と、
　前記識別媒体の領域が前記予め設定された領域内に位置すると判定された場合には、前記超解像処理部による超解像処理の実施を選択する超解像処理選択部と
　を備えたことを特徴とする識別媒体認識装置。
　識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識装置であって、
　撮像装置により撮像された撮像画像を取得する画像取得部と、
　前記撮像画像から前記識別媒体の領域を検出する識別媒体領域検出部と、
　前記識別媒体の領域から前記識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識部と、
　前記識別媒体の領域の超解像処理を選択的に行う超解像処理部と、
　前記識別媒体の領域の領域サイズ、および幾何学的歪みの度合いを示す値である歪み度の少なくとも一方を算出する領域パラメータ算出部と、
　前記識別媒体の領域の前記領域サイズおよび歪み度の少なくとも一方に基づいて、前記超解像処理部による超解像処理の実施、不実施を選択する超解像処理選択部と
　を備えたことを特徴とする識別媒体認識装置。
　前記超解像処理選択部は、前記識別媒体の領域の前記領域サイズおよび歪み度に基づく値である評価値が予め定められた値を上回り、かつ前記領域サイズが予め定められた値を下回った場合に、前記超解像処理部による超解像処理の実施を選択することを特徴とする請求項２に記載の識別媒体認識装置。
　　撮影されたナンバープレート画像における文字列を認識する処理を実行するプロセッサを備えた請求項１又は請求項２に記載の識別媒体認識装置であって、
　　前記識別媒体に含まれる文字およびまたは数字からなる文字列は、前記識別媒体画像中の位置または文字間の相対位置に応じて１からｘ（ただし、ｘは２以上の整数）までの配置順位が設定された複数の文字から構成され、
　　前記プロセッサは、
　　前記識別媒体画像中の前記文字列と、予め準備された複数の基準画像との類似度をそれぞれ算出し、
　　前記文字列において評価対象となる配置順位にある１またはｙ（ただし、ｙはｘよりも小さい２以上の整数）個の文字に対応する前記複数の基準画像にそれぞれ含まれる参照用文字について、当該参照用文字が同一となる前記基準画像ごとに前記類似度の和を含む評価値を算出し、
　　前記評価値に基づき、前記識別媒体画像における文字列を構成し得る少なくとも１つの文字の候補を決定することを特徴とする識別媒体認識装置。
　　前記プロセッサは、複数の前記類似度のうちより大きいものから所定の閾値以内の数までの類似度のみを用いて前記評価値を算出することを特徴とする請求項４に記載の識別媒体認識装置。
　　前記ｙ個の文字は、互いに連続する前記配置順位にあることを特徴とする請求項４に記載の識別媒体認識装置。
　　前記参照用文字は、１個の文字からなることを特徴とする請求項４に記載の識別媒体認識装置。
　　前記プロセッサは、全ての前記配置順位に関し、前記参照用文字が同一となる前記基準画像ごとに前記類似度の和を含む評価値を算出することを特徴とする請求項７に記載の識別媒体認識装置。
　　前記類似度は、前記識別媒体画像中の前記文字列と、前記基準画像との相関係数であることを特徴とする請求項４に記載の識別媒体認識装置。
　　前記プロセッサは、前記類似度に基づき、前記識別媒体画像中の前記文字列の候補を決定し、
　　前記少なくとも１つの文字の候補および前記文字列の候補を表示する表示装置を更に備えたことを特徴とする請求項４に記載の識別媒体認識装置。
　請求項１又は請求項２に記載のナンバープレート認識装置と、前記ナンバープレート画像を撮影する撮像装置とを備えたことを特徴とする識別媒体認識方法。
　識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識方法であって、
　撮像装置により撮像された撮像画像を取得する画像取得ステップと、
　前記撮像画像から前記識別媒体の領域を検出する識別媒体領域検出ステップと、
　前記識別媒体の領域から前記識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識ステップと、
　前記識別媒体の領域の超解像処理を選択的に行う超解像処理ステップと、
　前記撮像画像における予め設定された領域を記憶する領域記憶ステップと、
　前記識別媒体の領域が前記予め設定された領域内に位置するか否かを判定する識別媒体領域判定ステップと、
　前記識別媒体の領域が前記予め設定された領域内に位置すると判定された場合には、前記超解像処理ステップの実施を選択する超解像処理選択ステップと
　を有することを特徴とする識別媒体認識方法。
　識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識方法であって、
　撮像装置により撮像された撮像画像を取得する画像取得ステップと、
　前記撮像画像から前記識別媒体の領域を検出する識別媒体領域検出ステップと、
　前記識別媒体の領域から前記識別媒体に含まれる文字およびまたは数字を認識する識別媒体認識ステップと、
　前記識別媒体の領域の超解像処理を選択的に行う超解像処理ステップと、
　前記識別媒体の領域の領域サイズ、および幾何学的歪みの度合いを示す値である歪み度の少なくとも一方を算出する領域パラメータ算出ステップと、
　前記識別媒体の領域の前記領域サイズおよび歪み度の少なくとも一方に基づいて、前記超解像処理ステップの実施、不実施を選択する超解像処理選択ステップと
　を有することを特徴とする識別媒体認識方法。
　請求項１２又は請求項１３に記載の識別媒体認識方法であって、
　前記識別媒体に含まれる文字およびまたは数字からなる文字列は、前記識別媒体画像中の位置または文字間の相対位置に応じて１からｘ（ただし、ｘは２以上の整数）までの配置順位が設定された複数の文字から構成され、
　前記識別媒体画像中の前記文字列と、予め準備された基準画像との類似度を算出し、
　前記文字列において評価対象となる配置順位にある１またはｙ（ただし、ｙはｘよりも小さい２以上の整数）個の文字に対応する前記複数の基準画像にそれぞれ含まれる参照用文字について、当該参照用文字が同一となる前記基準画像ごとに前記類似度の和を含む評価値を算出し、
　前記評価値に基づき、前記識別媒体画像における文字列を構成し得る少なくとも１つの文字の候補を決定することを特徴とする識別媒体認識方法。