JP2009245385A - 車両照合装置、車両照合方法およびプログラム - Google Patents

Abstract

【課題】車両番号による照合に加えて、外観情報による照合が可能な車両照合装置、方法およびプログラムを提供する。
【解決手段】車両の外観を撮影するカラーカメラ５と、前記車両のナンバープレートを撮影する赤外線カメラ４と、赤外線カメラ４で撮影した画像からナンバープレートの文字を抽出し認識する文字認識部６と、捜索対象の識別情報を登録するデータベース部７と、文字認識部６で認識された文字とデータベース部７に登録された捜索対象の識別情報を照合する照合部８手段を備える。
【選択図】図２

Description

本発明は、車両をカメラで撮影して得られた画像を捜索対象の識別情報と照合する車両照合装置、車両照合方法およびコンピュータにインストールされて前記方法を実行するプログラムに関する。

車両のナンバープレートをカメラで撮影して、ナンバープレートに記載された文字を抽出して、捜索対象の車両番号と照合する車両照合装置が各種提案されている（例えば、特許文献１，２）。

また、ナンバープレートを撮影した画像から、文字を抽出・認識する装置・方法についても多数提案されている（例えば、特許文献３）。

特開平１１−２９６７８５号公報 特表２００４−５３６４１０号公報 特許第３５９１５８３号

特許文献１等に開示された車両照合装置は、ナンバープレートの文字の抽出・認識と、捜索対象の車両番号との照合を自動的に行うので、人手による認識・照合に比べて、捜索員の負担を軽減することができる。また人手では不可能な大量の照合も可能である。

しかしながら、これらの車両照合装置は、車両番号にのみに依拠するので、次のような課題があった。

捜索対象の車両番号は常に完全であるとは限らない。例えば「横浜７８く１２−●４」のように一部が欠落している場合がある。このような場合に、撮影画像から「横浜７８く１２−３４」の文字を抽出・認識したとしても、不一致として処理される。

また、カメラが車両のナンバープレートの文字を完全に認識するとは限らない。例えば、ナンバープレートが汚れている場合に文字の一部が判別できないことがある。このような場合も、文字の一部が一致したとしても、不一致として処理される。

つまり、特許文献１，２等に開示された車両照合装置では車両番号が捜索対象に似ている車両をカメラで捉えても、車両番号が完全に一致しなければ、見逃してしまうという問題があった。

また、捜索対象に係る情報には、車両番号の他に、型式（車名、年式）や車色（車体の外側の塗装色）など外観の特徴に関する情報（外観情報）もある。外観情報を車両照合に活用すれば、車両番号による照合の不備を補うことができるが、外観情報を数値化して自動処理するのは難しいという問題もあった。

本発明は、このような背景の下でなされたものであり、車両番号による照合に加えて、外観情報による照合が可能な車両照合装置、方法およびプログラムを提供するものである。

本発明の車両照合装置は、車両を撮影するカメラと、前記カメラで撮影した画像からナンバープレートの文字を抽出し認識する文字認識手段と、捜索対象の識別情報を登録するデータベースと、前記文字認識手段で認識された文字と前記データベースに登録された捜索対象の識別情報を照合する照合手段を備える車両照合装置において、前記車両のナンバープレートを撮影する赤外線カメラと、前記車両の外観を撮影するカラーカメラと、前記カラーカメラで撮影された車両の画像を表示する画像表示手段を備えるものである。

前記識別情報を、車両番号と外観情報としてもよい。

前記外観情報を、車両の型式と車色としてもよい。

前記データベース装置から抽出された外観情報を表示する外観情報表示手段を備えるようにしてもよい。

前記文字認識装置で認識されたナンバープレートの文字と前記データベース装置に登録された捜索対象の車両番号が部分一致した場合に、前記画像表示手段は、前記カラーカメラで撮影された車両の画像をするとともに、前記外観情報表示手段は、当該捜索対象の外観情報を表示するようにしてもよい。

本発明の車両照合装置を、車両に搭載するとともに、前記車両の現在位置を認識するＧＰＳ装置を備えるようにしてもよい。

基地局と通信する通信手段を備え、前記通信手段は、前記赤外線カメラ又は前記カラーカメラで捜索対象車両を撮影した位置を前記基地局に通報するようにしてもよい。

前記カラーカメラで撮影された捜索対象車両の走行方向を判別する走行方向判別手段を備えるとともに、前記通信手段は、前記捜索対象車両の走行方向を前記基地局に通報するようにしてもよい。

基地局と通信する通信手段を備え、前記通信手段は、前記赤外線カメラで撮影された捜索対象車両のナンバープレートの画像と、前記カラーカメラで撮影された前記捜索対象車両の外観画像を前記基地局に通報するようにしてもよい。

前記通信手段は、前記赤外線カメラ又は前記カラーカメラで前記捜索対象車両を撮影した時刻を前記基地局に通報するようにしてもよい。

本発明の車両照合方法は、赤外線カメラで車両のナンバープレートを撮影するとともに、カラーカメラで前記車両の外観を撮影する撮影段階と、前記赤外線カメラで撮影した画像から文字を抽出し認識する文字認識段階と、前記文字認識段階で認識された文字と捜索対象の車両番号を照合する番号照合段階と、前記文字認識段階で認識された文字と捜索対象の車両番号が部分一致した場合に、前記カラーカメラで撮影した前記車両の外観画像と前記捜索対象の外観情報を表示装置に表示する外観画像・情報表示段階を有するものである。

本発明のプログラムは、赤外線カメラで車両のナンバープレートを撮影するとともに、カラーカメラで前記車両の外観を撮影する撮影処理と、前記赤外線カメラで撮影した前記車両のナンバープレートの画像から文字を抽出し認識する文字認識処理と、前記文字認識処理で認識された文字と捜索対象の車両番号を照合する番号照合処理と、前記文字認識処理で認識された文字と捜索対象の車両番号が部分一致した場合に、前記カラーカメラで撮影した前記車両の外観画像と前記捜索対象の外観情報を表示装置に表示する外観画像・情報表示処理をコンピュータに実行させるものである。

本発明の車両照合装置は、車両のナンバープレートを撮影する赤外線カメラに加えて、車両の外観を撮影するカラーカメラと、前記カラーカメラで撮影された車両の画像を表示する画像表示手段を備えるので、データベース装置に登録された車両番号あるいは赤外線カメラの撮影画像から抽出認識された車両番号の一部に欠落があっても、精度よく車両を照合することができる。また、データベース装置から抽出された識別情報を表示する識別情報表示手段を備えるので、オペレータが外観画像と外観情報を目視して識別することができる。また、ＧＰＳ装置を備えるので、捜索対象を発見した場所を認識することができる。

以下、本発明を実施するための最良の形態について説明する。

図１は、本発明に係る車両照合装置を搭載した捜索車両の外形図であり、図１（ａ）は平面図であり。図１（ｂ）は側面図である。図１において、捜索車両１は車両照合装置２を搭載して、盗難車両等の捜索に従事する自動車であり、その天蓋上にカメラユニット３を取り付けている。

カメラユニット３は赤外線カメラ４及びカラーカメラ５を備える。赤外線カメラ４及びカラーカメラ５はいずれもビデオカメラであり、同一の被写体に向くように、光軸を揃えて、並列に配置されている。

図２は、車両照合装置２の概念的な構成を示す構成図である。図２に示すように、車両照合装置２は、前述の赤外線カメラ４及びカラーカメラ５に加えて、文字認識部６、データベース部７、照合部８及び表示部９を備える。

文字認識部６は、赤外線カメラ４で撮像した車両のナンバープレートの画像から文字を抽出して、認識する装置である。なお、画像から文字を抽出認識する具体的方法については、前述の特許文献３等で既に公知であるので、説明を省略する。

データベース部７は、捜索対象の車両の車両番号と外観情報（型式、車色、その他の外観上の特徴）を記憶する記憶装置である。なお、データベース部７に記録された捜索対象の車両に関する情報を総称して識別情報ということにする。

照合部８は、赤外線カメラ４で撮影された画像から抽出・認識したナンバープレートの文字（以下、抽出番号という）と、データベース部７に記憶された捜索対象の車両の車両番号（以下、登録番号という）を照合する装置である。

表示部９は、抽出番号と登録番号の一致（完全一致だけでなく、部分一致も含む）が確認された場合に、当該車両の抽出番号、登録番号、外観情報に加えて、カラーカメラ５で撮影した当該車両のカラー画像を表示する装置である。なお、表示部９による表示の態様については、後述する。

図３に示すように、車両照合装置２は、入力装置１０、ＧＰＳ装置１１、及び通信部１２を備えてもよい。

入力装置１０は、オペレータ（捜索車両１の乗務員）が車両ナンバー照合装置２に対して各種の操作入力を行う装置である。なお、入力装置１０による操作入力の詳細については後述する。

ＧＰＳ装置１１は、ＧＰＳ（Global Positioning System）衛星を利用して、車両照合装置２を搭載した捜索車両１が地球上のどの地点にいるかを知る装置である。

通信部１２は、固定局（例えば、捜索車両１の基地）に設置されたサーバ装置１３の間で通信を行う装置であり、サーバ装置１３から送信される新たな捜索対象の識別情報を受信して、データベース部７の識別情報を更新するとともに、照合部８による照合結果をサーバ装置１３に送信する。なお、識別情報の更新は、定期的に行ってもよいし、サーバ装置１３に捜索対象が登録される度に、サーバ装置１３が通信部１２を呼び出して、識別情報を送信するようにしてもよい。

また、入力装置１０を使って、つまりオペレータが手動でデータベース部７の識別情報を追加・削除・編集できるようにしてもよい。あるいは、データベース部７に、識別情報を記録した記憶媒体と前記記憶媒体からデータを読み出す装置を備えて、前記記憶媒体の交換によって、識別情報を更新するようにしてもよい。

本実施形態においては、説明の便宜のために、文字認識部６ないし通信部１２の各構成要素を専用のハードウェアの形で示したが、ソフトウェアで構成してもよい。つまり、コンピュータに所定のプログラムをインストールして、当該コンピュータに文字認識部６ないし通信部１２の各機能を持たせるようにしてもよい。

図４は、コンソールボックス１４の操作面１５を示す概念図である。コンソールボックス１４は、車両照合装置２の表示部９と入力装置１０を格納する筐体であり、操作面１５は液晶表示装置（ＬＣＤ）に透明なタッチパネルを重ね合わせた装置であって、ディスプレイ装置とスイッチボードを兼ねる。

図４に示すように、操作面１５には、抽出番号表示部１６、カラー画像表示部１７、登録番号表示部１８、照合結果表示部１９、識別情報表示部２０および操作スイッチ２１を備える。

抽出番号表示部１６は、文字認識部６で抽出・認識されたナンバープレート上の文字（＝抽出番号）を表示する部位である。

カラー画像表示部１７は、カラーカメラ５で撮影された車両のカラー画像を表示する部位である。

登録番号表示部１８は、照合部８で抽出番号との一致が確認された登録番号を表示する部位である。

照合結果表示部１９は、照合部８による抽出番号と登録番号の照合結果を表示する部位である。抽出番号と登録番号の全ての文字が一致する場合は「完全一致」が点灯し、一部の文字が一致する場合には、「部分一致」が点灯する。

識別情報表示部２０は、照合部８で、抽出番号との一致が確認された登録番号とその登録番号に係る外観情報（つまり識別情報のすべて）を表示する部位である。

操作ボタン２１は、オペレータが車両照合システム２に対して操作入力を行うスイッチであり、「確認」と「終了」の２種を備えている。

図５は、車両ナンバー照合装置２で実行される処理プログラムの概要を示すフローチャートである。以下、図５に付したステップ番号を追いながら、この処理プログラムを説明する。

（ステップ１）捜索車両１は路上を走行しながら、赤外線カメラ４及びカラーカメラ５で周囲の車両を撮影する。

（ステップ２）赤外線カメラ４で撮影された映像は文字認識部６で処理されて、ナンバープレートに記載された文字が認識される。また、カラーカメラ５で撮影された画像はカラー画像表示部１７に表示される。

なお、文字認識部６は、赤外線カメラ４で撮影された映像を、背景（風景）と車両の画像に分離し、その中からナンバープレートの画像を抽出し、さらに、その中から文字を抽出する。また、文字認識部６はナンバープレートの文字を認識すると、当該文字（抽出番号）と赤外線カメラ４が当該車両（のナンバープレート）を撮影した時刻を照合部８に送信する。同時に、赤外線カメラ４が当該車両（のナンバープレート）を撮影した時の捜索車両１の位置が、ＧＰＳ装置１１から読み出されて、照合部８に送られる。

（ステップ３）照合部８は、抽出番号と、データベース部７に登録された登録番号を照合する。

（ステップ４）データベース部７に抽出番号と完全一致する登録番号があれば、照合結果表示部１９の「完全一致」を点灯し、ステップ５に進む。なければ、ステップ６に進む。

（ステップ５）通信部１２が、登録番号と完全一致する車両番号の車両が発見された旨を、登録番号、赤外線カメラ４で撮影した当該車両のナンバープレートの画像、カラーカメラ５で撮影した当該車両の外観画像、発見時刻及び発見場所（ステップ３でＧＰＳ装置１１から読み出された捜索車両１の位置）ととともに、サーバ装置１３に送信して、処理プログラムを終了する。

（ステップ６）データベース部７に抽出番号と部分一致する登録番号があれば、照合結果表示部１９の「部分一致」を点灯し、その登録番号とその登録番号に係る外観情報（つまり識別情報のすべて）を登録データ表示部２０に表示して、ステップ７に進み、部分一致する登録番号がなければ、処理プログラムを終了する。

（ステップ７）オペレータは、画像表示部１７に表示される車両のカラー画像と登録データ表示部２０に表示された外観情報（車名、年式、車色）を照合する。オペレータが、両者が一致していると判断した場合に、「確認」（操作ボタン２１）を操作し、両者が一致しないと判断した場合は、「終了」（操作ボタン２１）を操作する。

（ステップ８）「確認」（操作ボタン２１）が操作されれば、ステップ９に進み、「終了」（操作ボタン２１）が操作されれば、処理プログラムを終了する。

（ステップ９）登録番号と部分一致する車両番号を有して、外観情報が一致する車両が発見された旨を、登録番号、赤外線カメラ４で撮影した当該車両のナンバープレートの画像、カラーカメラ５で撮影した当該車両の外観画像、発見時刻及び発見場所（ステップ２でＧＰＳ装置１１から読み出された捜索車両１の位置）ととともに、通信部１２からサーバ装置１３に送信して、処理プログラムを終了する。

また、カラーカメラ５で撮影された画像を解析して、発見された車両の走行方向を判別（捜索車両１の方向に対して同方向か逆方向かを判別できれば十分である）して、発見場所とともに当該車両の走行方向をサーバ装置１３に送信するようにしてもよい。

あるいは、図６に示すように、捜索車両１の正面前方を撮影するカメラユニット３ａと捜索車両１の右斜め前方を撮影するカメラユニット３ｂを備えるようにしてもよい。このように構成すれば、カメラユニット３ａで車両を発見した場合は、当該車両は捜索車両１と同一の車線にいるから、捜索車両１と同方向に走行しているとみなすことができる。カメラユニット３ｂで車両を発見した場合は、当該車両は捜索車両１の反対車線にいるから、捜索車両１と逆方向に走行しているとみなすことができる。

本発明に係る車両照合装置を搭載した捜索車両の外形図である。 本発明に係る車両照合装置の概念的な構成を示す構成図である。 本発明に係る車両照合装置の別の構成を示す構成図である。 コンソールボックスの操作面を示す図である。 本発明に係る車両照合装置の処理プログラムの概要を示すフローチャートである。 本発明に係る車両照合装置を搭載した捜索車両の外形図である。

符号の説明

１ 捜索車両
２ 車両照合装置
３ カメラユニット
４ 赤外線カメラ
５ カラーカメラ
６ 文字認識部
７ データベース部
８ 照合部
９ 表示部
１０ 入力装置
１１ ＧＰＳ装置
１２ 通信部
１３ サーバ装置
１４ コンソールボックス
１５ 操作面
１６ 抽出番号表示部
１７ カラー画像表示部
１８ 登録番号表示部
１９ 照合結果表示部
２０ 識別情報表示部
２１ 操作ボタン

Claims (12)

1. 車両を撮影するカメラと、前記カメラで撮影した画像からナンバープレートの文字を抽出し認識する文字認識手段と、捜索対象の識別情報を登録するデータベースと、前記文字認識手段で認識された文字と前記データベースに登録された捜索対象の識別情報を照合する照合手段を備える車両照合装置において、
   前記車両のナンバープレートを撮影する赤外線カメラと、
   前記車両の外観を撮影するカラーカメラと、
   前記カラーカメラで撮影された車両の画像を表示する画像表示手段を備える
   ことを特徴とする車両照合装置。
2. 前記識別情報は、車両番号と外観情報である
   ことを特徴する請求項１に記載の車両照合装置。
3. 前記外観情報は、車両の型式と車色である
   ことを特徴する請求項２に記載の車両照合装置。
4. 前記データベース装置から抽出された捜索対象の外観情報を表示する外観情報表示手段を備える
   ことを特徴する請求項２に記載の車両照合装置。
5. 前記文字認識装置で認識された文字と前記データベース装置に登録された捜索対象の車両番号が部分一致した場合に、
   前記画像表示手段は、前記カラーカメラで撮影された車両の画像を表示するとともに、
   前記外観情報表示手段は、当該捜索対象の外観情報を表示する
   ことを特徴とする請求項４に記載の車両照合装置。
6. 車両に搭載されるとともに、
   前記車両の現在位置を認識するＧＰＳ装置を備える
   ことを特徴する請求項１に記載の車両照合装置。
7. 基地局と通信する通信手段を備え、
   前記通信手段は、前記赤外線カメラ又は前記カラーカメラで捜索対象車両を撮影した位置を前記基地局に通報する
   ことを特徴とする請求項６に記載の車両照合装置。
8. 前記カラーカメラで撮影された捜索対象車両の走行方向を判別する走行方向判別手段を備えるとともに、
   前記通信手段は、前記捜索対象車両の走行方向を前記基地局に通報する
   ことを特徴とする請求項７に記載の車両照合装置。
9. 基地局と通信する通信手段を備え、
   前記通信手段は、前記赤外線カメラで撮影された捜索対象車両のナンバープレートの画像と、前記カラーカメラで撮影された前記捜索対象車両の外観画像を前記基地局に通報する
   ことを特徴とする請求項１に記載の車両照合装置。
10. 前記通信手段は、前記赤外線カメラ又は前記カラーカメラで前記捜索対象車両を撮影した時刻を前記基地局に通報する
    ことを特徴とする請求項９に記載の車両照合装置。
11. 赤外線カメラで車両のナンバープレートを撮影するとともに、カラーカメラで前記車両の外観を撮影する撮影段階と、
    前記赤外線カメラで撮影した画像から文字を抽出し認識する文字認識段階と、
    前記文字認識段階で認識された文字と捜索対象の車両番号を照合する番号照合段階と、
    前記文字認識段階で認識された文字と捜索対象の車両番号が部分一致した場合に、前記カラーカメラで撮影した前記車両の外観画像と前記捜索対象の外観情報を表示装置に表示する外観画像・情報表示段階を有する
    ことを特徴とする車両照合方法。
12. 赤外線カメラで車両のナンバープレートを撮影するとともに、カラーカメラで前記車両の外観を撮影する撮影処理と、
    前記赤外線カメラで撮影した前記車両のナンバープレートの画像から文字を抽出し認識する文字認識処理と、
    前記文字認識処理で認識された文字と捜索対象の車両番号を照合する番号照合処理と、
    前記文字認識処理で認識された文字と捜索対象の車両番号が部分一致した場合に、前記カラーカメラで撮影した前記車両の外観画像と前記捜索対象の外観情報を表示装置に表示する外観画像・情報表示処理
    をコンピュータに実行させるプログラム。
    
    
    

Images