JP2009540413A - 検証エンジン、方法、データ処理システム(検証エンジン) - Google Patents

検証エンジン、方法、データ処理システム(検証エンジン) Download PDF

Info

Publication number
JP2009540413A
JP2009540413A JP2009513690A JP2009513690A JP2009540413A JP 2009540413 A JP2009540413 A JP 2009540413A JP 2009513690 A JP2009513690 A JP 2009513690A JP 2009513690 A JP2009513690 A JP 2009513690A JP 2009540413 A JP2009540413 A JP 2009540413A
Authority
JP
Japan
Prior art keywords
image
identification
engine
generated
conflict
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009513690A
Other languages
English (en)
Other versions
JP5260504B2 (ja
Inventor
アクセモ、スヴェン、ゲオルグ
ハミルトン、カール・ヴィクトール
サナムラド、モハマド、アリ
テスドルフ、アレクシス、ウィリアム
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of JP2009540413A publication Critical patent/JP2009540413A/ja
Application granted granted Critical
Publication of JP5260504B2 publication Critical patent/JP5260504B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/98Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/987Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns with the intervention of an operator
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07BTICKET-ISSUING APPARATUS; FARE-REGISTERING APPARATUS; FRANKING APPARATUS
    • G07B15/00Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points
    • G07B15/06Arrangements for road pricing or congestion charging of vehicles or vehicle users, e.g. automatic toll systems
    • G07B15/063Arrangements for road pricing or congestion charging of vehicles or vehicle users, e.g. automatic toll systems using wireless information transmission between the vehicle and a fixed station

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Character Discrimination (AREA)
  • Devices For Checking Fares Or Tickets At Control Points (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)
  • Pharmaceuticals Containing Other Organic And Inorganic Compounds (AREA)
  • Fuel-Injection Apparatus (AREA)
  • Sampling And Sample Adjustment (AREA)

Abstract

【課題】 光学式文字認識システムによって発生される競合する画像識別に応答して実行される動作を決定するための動作確認エンジンを提供する。
【解決手段】 光学式文字認識システムによって発生される競合する画像識別に応答して実行される動作を決定するための動作確認エンジンであって、光学式文字認識システムから競合する画像識別を受信するための分析コンポーネントを含み、各画像識別が発生された信頼度値を有し、分析コンポーネントが、発生された信頼度値を分析して、受信した画像識別の各々間の識別競合を判定し、分析コンポーネントが、発生された競合を分析して、識別競合が所定の動作パラメータ範囲内に入るか否かを識別し、識別競合が範囲内のどこであるかに依存して、実行する動作を決定する。
【選択図】 図1

Description

本発明は、光学式文字認識システムの分野に関する。具体的には、本発明は、光学式文字認識システムが発生する同一の画像識別および競合する画像識別を検証するための検証エンジンに関する。
セキュリティ・システムであれ道路料金システムであれ、人物または車両を識別するために写真撮影に頼るシステムがますます増えている。人物または車両を識別するために、車両登録番号または従業員番号等、写真から情報が抽出される。多くの場合、人物または車両が移動中に、あらゆる気象条件において写真が撮影される。
識別またはデータ抽出の目的のためにこれらの写真に頼る場合、写真の品質が極めて重要な役割を担う。多くの場合、天候のために写真は不明瞭になる。例えば、ある日は天気が良く晴れていて、これは写真撮影のために良好な気象条件であるように思えるが、日光が車両の塗装面に反射してある量のぎらつきが生じ、このため写真の歪みを発生させる場合がある。別の日は雪が降っているため、この雪が車両に付着して車両登録番号を見えにくくするので、はっきりした写真が取れない場合がある。他の変数としては、日光の性質、または料金所の光源が夜にナンバープレートを照らす適切な光源を提供可能であるか否か、または車両がどのくらい高速で料金所領域を通過するか、または車両の高さおよび大きさ等が含まれる可能性がある。
写真に含まれた意味のあるデータを生成するため、光学式文字認識システム(OCR:optical character recognition system)が導入される。このシステムでは、画像内の文字を標準的な符号化方式に変換する。例えば車両ナンバープレートの写真のようないくつかの写真は、このナンバープレートに積もった雪のために見えにくくなることがあるという理由で、OCRエンジンは、画像の文字を適切な符号化方式に信頼性高く変換することができない場合がある。この問題を解決するため、OCRエンジンは、画像の文字を変換することができる信頼度レベルを格付けする信頼度格付けを用いる。しかしながら、当技術分野においては、この信頼度格付けが高い場合であってもOCR変換の結果は決して正確ではないことが示されている。このため、車両課金環境において、多くの場合は正確でないOCRの結果に基づいて車両所有者に課金する等の行動が実行されるという問題が生じる。
このため、当技術分野において、OCR変換の結果を検証し改善するための手段が必要とされている。
第1の態様から見ると、本発明は、光学式文字認識システムによって発生される競合する画像識別に応答して実行される動作を決定するための検証エンジンを提供する。この検証エンジンは、光学式文字認識システムから競合する画像識別を受信するための分析コンポーネントを含み、各画像識別が発生された信頼度値を有し、分析コンポーネントが、発生された信頼度値を分析して、受信した画像識別の各々間の識別競合を判定し、分析コンポーネントが、発生された競合を分析して、識別競合が所定の動作パラメータ範囲内に入るか否かを識別し、識別競合が範囲内のどこであるかに依存して、実行する動作を決定する。
好都合に、検証エンジンは、OCRエンジンから画像識別を受信するように設けられる。各画像識別は、信頼度レベル、すなわちOCRが画像内および既定のシンタックス内の文字を識別することがどのくらい容易であったかを含む。多くの場合、各OCRエンジンは別のOCRエンジンが分析しているものと同じ画像を分析しているが、OCRエンジンの各々によって生成される識別が競合し非同一である場合がある。検証エンジンは、多数のルールを用いて、競合する識別を確認して理解し、更に、競合する識別に応答して実行するべき動作を決定することができる。例えば、人間のエージェントに指示して、OCRエンジンの捕捉画像および識別を分析すること等によって、競合を検証する。または、場合によっては、競合は無視できる程度であり、車両の登録された所有者を明白に識別することができ、従って、課金システムに送信するための通知を発生する。
好都合に、検証エンジンは、識別間の競合を解決することによって、車両の登録された所有者の判定において高い精度を達成する。
好ましくは、本発明が提供する検証エンジンにおいては、前述の動作が、画像識別、発生された信頼度レベル、および判定された競合の各々を、検証のために人間のエージェントに送信することを含む。
好ましくは、本発明が提供する検証エンジンにおいては、分析コンポーネントが、動作検証のために人間のエージェントに送信するために、画像識別の各々の捕捉画像を受信することを更に含む。
好ましくは、本発明が提供する装置においては、前述の動作が、分析コンポーネントに、識別競合がルールを適用することによって解決可能であるか否かを判定することを要求し、競合がルールの適用によって解決可能である場合、課金システムに通知を発生することを含む。
好ましくは、本発明が提供する検証エンジンにおいては、分析コンポーネントが、競合する画像識別がないことを判定し、分析コンポーネントが課金システムに通知を発生する。
好ましくは、本発明が提供する検証エンジンにおいては、画像の外観が車両の前方または後方のナンバープレートの画像を含む。
好ましくは、本発明が提供する検証エンジンにおいては、画像の画像がエンティティの識別標識を含む。
好ましくは、本発明が提供する検証エンジンにおいては、所定の動作パラメータ範囲が、OCRエンジンが画像内の各文字を識別した容易さを示す百分率値の範囲を含む。
好ましくは、本発明が提供する装置は、1つ以上のOCRエンジンから受信される画像識別および信頼度レベルを管理するための受信コンポーネントを更に含む。
好ましくは、本発明が提供する装置においては、受信コンポーネントが、画像識別を所定の時間量だけキュー上に記憶して、処理のために同じエンティティに関連した更に別の画像識別を待つことを更に含む。
好ましくは、本発明が提供する装置においては、分析コンポーネントがOCRエンジンから変換画像データを更に受信する。
好ましくは、本発明が提供する装置においては、分析コンポーネントが、変換画像データおよび発生された信頼度値を分析して、変換画像データが例外領域内に収まるか否か、およびそのために更に別の動作を実行するべきであるか否かを判定する。
第2の態様から見ると、本発明は、光学式文字認識システムによって発生される競合する画像識別に応答して実行される動作を決定するための方法を提供する。この方法は、光学式文字認識システムから競合する画像識別を受信するステップであって、各画像識別が発生された信頼度値を有する、ステップと、発生された信頼度値を分析して、受信した画像識別の各々間の識別競合を判定するステップと、発生された競合を分析して、識別競合が所定の動作パラメータ範囲内に入るか否かを識別し、識別競合が範囲内のどこであるかに依存して、実行する動作を決定するステップと、を含む。
第3の態様から見ると、本発明は、少なくとも2つの光学式文字認識システムによって発生される競合する画像識別に応答して実行される動作を決定するためのデータ処理システムを提供する。このデータ処理システムは、上述した本発明を実行するために適合された、中央演算処理装置と、メモリ・デバイスと、ストレージ・デバイスと、を含む。
第4の態様から見ると、本発明は、デジタル・コンピュータの内部メモリにロードすることができるコンピュータ・プログラムを提供する。このプログラムは、コンピュータ上で動作されると、上述したように本発明を実施するように実行するためのソフトウェア・コード部分を含む。
本発明の実施形態について、添付図面を参照して、例示としてのみ以下に詳しく記載する。
図1は、道路125を通って料金所領域100を通過する車両130を示す。料金所領域100は、通常、車両130の外観の画像を取得するための少なくとも1つのカメラ105、110を含む。例えば、第1のカメラ110は車両の前方のナンバープレートの画像を取得する。また、料金所領域100は、車両の後方のナンバープレートの写真を撮影するための第2のカメラ105も含む場合がある。
また、料金所領域100は、料金所領域100において車両130の存在を検出して、料金所領域100において車両130を検出すると画像を取得するように第1のカメラ105をトリガするためのレーザ検出器115を含む。車両130が料金所領域100を通過すると、レーザ115は、例えば後方のナンバープレートの画像を取得するように第2のカメラ110をトリガする。各カメラ105、110は、画像をメモリに記憶し、その画像をネットワーク通信手段(図示せず)を介して中央データ記憶装置に送信する。
また、照明135も設けられており、これは、車両が料金所領域100を通過する際に車両130の外観を照明するために道路125を照らす。図1の例では、カメラ105は車両の前方のナンバープレートの写真を撮影している。写真は、日付、時刻、料金所の位置を識別する識別子等の情報と共にデータ記憶装置(図示せず)に記憶される。
図2は、図1と同一の料金所領域100を示すが、この例では、車両130は、レーザ115が車両の後方のナンバープレートの写真を撮影するように第2のカメラ110をトリガするまで料金所領域100を通っている。この場合も、同じ照明135が下方向に道路125を照明して、車両130が料金所領域100を通過する際に車両130の外観を照明する。後方のナンバープレートの写真は、日付、時刻、料金所領域100の位置を識別する識別子等の情報と共にデータ記憶装置に記憶される。任意に、車両130は、車両130が料金所領域100を通過する際にこれを識別する搭載課金ユニット(図示せず)と協働するように動作することができる。1つ以上の送信機(図示せず)に接続されたアンテナ120が、車両130が料金所領域100を通過する時を検出する。
各料金所領域100は、分散型データ処理システムに接続する。図3に、このようなデータ処理システムの1つを示す。データ処理システム300は、多数の入力デバイス305、310を含む。これは、例えば、カメラ305または車両130内で動作するように構成可能な搭載コンピューティング・デバイスである。入力デバイス305、310は、例えばサーバのようなコンピューティング・デバイス315によって受信されるデータを送信する。コンピューティング・デバイス315は、CPU330、揮発性メモリ335、およびアプリケーションが記憶され実行される不揮発性メモリ320を含む。入力デバイスから受信したデータは、アプリケーションがデータを処理するためにデータ記憶装置340にアクセスを要求するような時まで、データ記憶装置340に記憶される。データ記憶装置は、ローカルにコンピューティング・デバイスに位置するか、または、例えばネットワーク接続ストレージまたはストレージ・エリア・ネットワークを介してアクセスすることで、ネットワーク355を介してアクセスすることができる。
クライアント・デバイス350、345は、データ入力手段を提供するためにコンピューティング・デバイス315に接続するように構成可能である。例えば、クライアント・デバイス345、350は、コンピューティング・デバイスに接続されたカメラを介して画像捕捉ソフトウェアをトリガするソフトウェアを管理することができる。
カメラ105、110または他の画像捕捉デバイスが取得した画像を処理するために、画像内のデータを何らかの意味のある形態に変換する必要がある。例えば、道路課金環境においては、車両の登録された所有者を識別し課金を行うために、車両の前方または後方のナンバープレートの画像から車両登録番号を捕捉しなければならない。または、カメラが一般の従業員または構成員の画像を取得するセキュリティ・システムにおいては、何らかの異常を検出するために従業員データのデータベースに対して従業員番号または他の識別手段を識別し相互参照する必要がある場合がある。
全ての例において、光学式文字認識(OCR)エンジンが採用される。好適な実施形態においては、2つ以上のOCRエンジンを導入する。OCRエンジンは、当技術分野において既知であり、文字の画像を、ASCIIまたはUnicodeで変換文字を表す標準的な符号化方式に変換する。本発明の好適な実施形態では、いくつかのOCRエンジンを採用して、車両のナンバープレートの捕捉画像から取得した車両130の登録番号を抽出する。
図4にOCRエンジンを示す。OCRエンジン400は、車両の前方のナンバープレートおよび後方のナンバープレートを表す画像を含むデータ・パケットを受信するための受信コンポーネント405と、例えばナンバープレートのライセンス番号のシンタックスすなわちHT55 HNZを記述するためのテンプレート・コンポーネント410と、テンプレート内に明示されたシンタックスに従って車両の車両登録番号を構成する画像内の文字を識別するための識別コンポーネント415と、識別コンポーネント415が車両の車両登録番号の捕捉画像内の文字を識別する容易さから信頼度レベルを導出するための信頼度レベル・コンポーネント420と、を含む。
テンプレート・コンポーネント410は、例えば車両登録場号の正しいシンタックスのような識別対象のデータ・シンタックス、または同様に、従業員の連続番号もしくは画像から捕捉する必要のある他のいずれかのデータを明示する。車両登録番号の例を用いると、スウェーデンでは、車両登録番号のためのシンタックスは3つのアルファベットの後に3つの数字があり、ノルウェーおよびデンマークでは、シンタックスは2つのアルファベットおよび5つの数字であり、英国では、シンタックスは2つのアルファベットの後に2つの数字および3つのアルファベットがある等である。
識別コンポーネント415は、各画像をパースし、車両の車両登録番号の文字の各々を識別しようとし、抽出された文字が必要なシンタックスと合致するか否かを識別しようとする。識別コンポーネント415は、識別を実行するためおよび各文字を識別する信頼度レベルを決定するためにマッチング・アルゴリズムを採用する。例えば、車両登録番号HT55 HNXを例に挙げると、マッチング・アルゴリズムは、画像内の文字HがアルファベットHであり、文字TがアルファベットTであり、文字5が数字5であり、次の文字5が数字5であり、文字H、N、およびXがアルファベットH、N、およびXである等のことを信頼度高く識別しようとする。
識別コンポーネント415は、画像内の文字の各々を識別した信頼度レベルを格付けするために、信頼度コンポーネント420と接続する。上述のHT55 HNZの例においては、信頼度コンポーネント420は、識別コンポーネント415が識別した合致を、高い信頼度の値を有するものとして格付けすることができる。なぜなら、これは文字の各々を容易に識別し、結果として得られた文字は関連したシンタックスに一致するからである。
同様に、マッチング・アルゴリズムが文字に合致することができない、または部分的にしか文字に一致することができない場合、例えば文字「L」を例に挙げると、ナンバープレートの汚れまたは雪等のために取得した画像が不明瞭であると、文字「l」が実際に文字「I」に見えるので、マッチング・アルゴリズムによる合致の信頼度レベルは低くなるであろう。上述のプロセスは、OCRエンジン400に送信された各画像ごとに実行される。
しかしながら、OCRエンジン400のためのマッチング・アルゴリズムにおいて技術的な進展があったとしても、決定された信頼度レベルが高くても不正確さはなお残ることが示されている。
例えば、図5に、多数の車両登録番号を示す。右側の登録番号500、510、520は、画像内で捕捉された文字である。左側の登録番号505、515、525は、マッチング・アルゴリズムから得られた文字列である。図示のように、合致は決して正確ではなく、このため識別および信頼度レベルは常に信頼できるというわけではない。
本発明の好適な実施形態によれば、検証エンジンが提供され、この検証エンジンはOCRエンジンからの一致する信頼度度レベルおよび矛盾する信頼度レベルの妥当性を確認する。検証エンジンは、1つ以上のOCRエンジンと接続するように構成可能であり、処理のために1つ以上のOCRエンジンから入力を受信する。動作確認コンポーネントは、OCRエンジンの出力データの正確さおよび信頼性を改善するために、現在の既知のOCRアルゴリズムを改良し強化する。
図6は、図3のコンピューティング・デバイス300と共に動作可能なOCRエンジン400および動作確認コンポーネント600の構成を示す。OCRエンジン400は、カメラ等の入力デバイスから画像を受信する。OCRエンジン400は、図4を参照して記載したようにこの画像を処理する。OCRエンジン400は作業パッケージを生成し、これは検証エンジン600に送信されて、矛盾するか競合する場合があるOCRエンジン400の結果を検証可能であるか否かを判定する。あるいは、OCRエンジン・マネージャ625を導入して、検証エンジン600に送信するために、多数のOCRエンジンから作業パッケージを受信する。
検証エンジン600は、多数のOCRエンジン400からワークフロー・キューを介して作業パッケージを受信する。各作業パッケージは、1組の画像、マッチング・アルゴリズムから形成された文字列、および各文字列ごとに得られた信頼度レベルを含む。
検証エンジン600は、計算された結果をデータ記憶装置内に記憶する。検証エンジン600がOCRエンジン400の結果を検証することができ、その結果がある例外基準に該当しない場合、検証エンジン600は課金システム610にメッセージを送信して、例えば、車両の登録された所有者に課金する。検証エンジン600がOCRエンジン400の結果を検証することができない場合、検証エンジン600はオペレータに通知を送り、OCRエンジン400および検証エンジン600の結果の再検査を要求する。
検証エンジン600は、OCRエンジン400の結果を検証し動作確認するために、相互に接続しインタラクトする多数のコンポーネントを含む。これらのコンポーネントを図7に示す。これらのコンポーネントには、ワークフロー・キューからの作業パッケージおよび抽出画像、文字列、および作業パッケージからの信頼度格付けを受信するための受信コンポーネント700と、信頼度レベルおよびOCR識別から、競合する信頼度レベルから動作確認応答を決定するための分析エンジン720と、が含まれる。受信コンポーネント700は、更に、進行中のキュー705および保留キュー710を含み、OCRエンジン400から検証エンジン600までの作業パッケージのストリームを管理する。
これらのコンポーネントの各々について順番に説明する。受信コンポーネント700は、ワークフロー・キューから作業パッケージを受信する。受信コンポーネント700は、ワークフロー・パッケージの各々を検査し、ワークフロー・パッケージの各々が少なくとも2つの画像および2つの信頼度レベル格付けを含むか否かを判定する。判定結果が肯定であった場合、受信コンポーネント700はこの作業パッケージを進行中のキュー705に置く。判定結果が否定であった場合、受信コンポーネント700はこの作業パッケージを保留キュー710に置き、更に別の作業パッケージが検出されるまで作業パッケージの処理を継続しない。作業パッケージは、所定の時間量だけ保留キュー710にとどまる。所定の時間量の経過後、更に別の作業パッケージが受信されず、作業パッケージ内に1つのみの画像が含まれる場合、この作業パッケージを拒絶する。
受信コンポーネント700は、進行中のキュー705を監視し、キューに作業パッケージが置かれると、受信コンポーネント700はこの作業パッケージを処理のために分析コンポーネント720に送信する。
分析コンポーネント720は、受信コンポーネント700から1つ以上の作業パッケージを受信する。分析コンポーネント700は、作業パッケージの復号を開始して、多数の異なる特性とする。すなわち、料金所名、日時、受信した画像数、および各OCRエンジンによって得られた信頼度レベルとする。分析コンポーネント720は、抽出した特性をログ・ファイルに書く。
分析コンポーネント720は、ログ・ファイルをパースし、比較コンポーネント725によって、各OCRエンジン400からの各出力の結果を比較する。分析コンポーネント720は、いずれかの2つの識別が同一であるか否かを判定するためにルール・エンジン730を用いる。例えば、まとめた集合すなわちログ・ファイルが4つの画像を含み、各画像が導出された登録番号および信頼度レベルを有する場合、分析コンポーネント720は、第1の導出された登録番号と第2の導出された登録番号を比較することから開始し、同一の合致が検出されない場合には、分析コンポーネント720は、比較コンポーネント725によって、第1の導出された登録番号を第3のものと比較する等して、導出された登録場号の全ての組み合わせが比較されるまで続ける。
例えば、
Figure 2009540413
比較結果の各々をデータ・ファイルに書く。分析コンポーネント720は、ロジック・コンポーネント730により、結果の各々を分析して、例えば課金システムに対する動作確認応答を決定する。
分析コンポーネント720は、ログ・ファイルから最初に、例えば8.5パーセントを超える信頼度レベル格付けを有する識別があるか否かを判定する。判定結果が肯定であった場合、例えば課金システムに通信コンポーネントを介して応答を送信し、この車両の登録された所有者に課金することを課金システムに指示する。しかしながら、例えば8.5パーセントを超える信頼度レベルを有するOCRエンジンの識別が存在しない場合、画像、識別、ログ・ファイル、および信頼度レベルを含む作業パッケージを、識別および動作確認のために人間のエージェントに送信し、その後、車両の登録された所有者に課金するか否かの最終的な決定を行う。
しかしながら、全ておよび少なくとも2つの識別が同一であり、例えば85パーセントを超える信頼度レベルを有する競合する識別がそれ以上ない場合、分析コンポーネント720は、その識別が正しい識別であることを検証する。特別な場合すなわち料金免除車両の識別を除いて、例えば70パーセントを超える信頼度を有する競合する識別が検出された場合、作業パッケージを1つ以上の人間のエージェントに送信する。例えば、ABC123が8.5パーセントを超え、ABC123が8.5パーセントを超え、BBC123が70パーセントを超えると、作業パッケージを検証のために人間のエージェントに送信する。
分析コンポーネント720が、例えば70パーセントと8パーセントとの間の信頼度レベルを有する識別を検出したが、少なくとも3つのOCR識別が同一であり双方の識別が前方および後方のナンバープレートからである場合、分析コンポーネントはこの識別を受け入れる。例えば、前方のABC123が8.5パーセントを超え、後方のABC123が85パーセントを超え、前方のABC123が8.5パーセントを超え、後方のBBC123が70パーセントを超えると、識別を受け入れる。
分析コンポーネント720が、各々が高い信頼度レベルを有する識別を検出したが、その識別の少なくとも一部が競合する場合、分析コンポーネントはこの作業パッケージを競合する識別として表示し、この作業パッケージを検証のために人間のエージェントに送信する。例えば、前方のABC123が8.5パーセントを超え、前方のABC123が8.5パーセントを超え、後方のABC123が8.5パーセントよりも大きく、後方のBCD123が85パーセントを超え、後方のBCD123が8.5パーセントを超え、後方のBCD123が85パーセントを超えると、競合する識別としてマークし、この作業パッケージを人間のエージェントに送信する。
分析コンポーネント720が、例えば85パーセントよりも大きい信頼度レベルを有する上述の1つのみのOCRエンジン400の識別を識別した場合、分析コンポーネント720はこの作業パッケージを、識別のために人間のエージェントに送信するため、通信コンポーネントに送信する。
分析コンポーネント720が、8.5パーセントよりも大きい識別のいずれかを識別し、車両が例えばタクシーであると識別され、または料金を免除された他の車両として識別された場合、登録データベースにおける参照を実行して、車両が実際にタクシーであることを確認し、この作業パッケージを廃棄する。データベース内に識別が見つからない場合、この識別を、通信コンポーネントを介して検証のために人間のエージェントに送信する。
分析コンポーネント720が、85パーセントを超える信頼度レベルを有する識別および85パーセントを超える信頼度レベルを有する別の識別を識別し、第1の識別がタクシーであり第2の識別が異種の車両である場合、タクシーのためのルールが優先される。
分析コンポーネント720が、高い信頼度レベルを有する第1の識別を識別し、その車両が異種の車両である場合、この作業パッケージを検証のために人間のエージェントに送信する。
上述のプロセスを、検証エンジンが受信する全ての作業パッケージについて繰り返す。しかしながら、本発明の範囲から逸脱することなく、他のタイプのルールまたはロジックを組み込むことができることは、当業者には理解されよう。
図8に移ると、検証エンジンのプロセス・ステップを詳述するフローチャートが示されている。ステップ800において、検証エンジン600の受信コンポーネント600は、1つ以上のOCRエンジンから作業パッケージを受信し、各作業パッケージを「進行中のキュー」に置く。受信コンポーネントは、画像中で識別される車両に関連した作業パッケージがOCRエンジン400からこれ以上は受信されないと判定されるまで、所定の時間量だけ待つ。いったん受信コンポーネント700が作業パッケージの各々を照合すると、ステップ805において、受信コンポーネント700は、画像、識別、およびOCRエンジン400が発生した信頼度レベル・データの各々を抽出する。受信コンポーネント700は、抽出したデータを分析コンポーネント720に送信し、分析コンポーネント720は、ステップ810において、各画像対ごとに、OCEエンジン400が発生した信頼度レベルが、別のOCRエンジン400が発生した信頼度レベルに一致するかまたは矛盾するかを判定する。ステップ815において、分析コンポーネント720は多数のルールを用いて、識別した競合する信頼度レベルが、ルールによって決定される所定の動作パラメータ範囲内に入るか否かを判定する。識別競合が範囲内のどこにあるかに応じて、ステップ820において、分析コンポーネント720は、実行する適切な動作を決定する。すなわち、競合を解決するために別のルールを適用するか、課金システムに通知を発生するか、または、競合する識別を解決するために、画像、画像識別、および信頼度レベルの見直しを人間のエージェントに要求する。
本発明の好適な実施形態に従った、車両の前方のナンバープレートの画像が取得される料金所領域を通る車両を詳しく示すブロック図である。 本発明の好適な実施形態に従った、車両の後方のナンバープレートの画像が取得される料金所領域を通る車両を詳しく示すブロック図である。 本発明の好適な実施形態を実施可能なデータ処理システムを詳しく示すブロック図である。 当技術分野において既知のOCRエンジンおよびそのサブ・コンポーネントを詳しく示すブロック図である。 車両登録番号およびOCRエンジンによって識別される同じ車両登録番号を示すブロック図である。 本発明の好適な実施形態に従った検証エンジンを示すブロック図である。 本発明の好適な実施形態に従った検証エンジンのコンポーネントを示すブロック図である。 本発明の好適な実施形態に従った動作ステップを示すフローチャートである。

Claims (30)

  1. 光学式文字認識システムによって発生される競合する画像識別に応答して実行される動作を決定するための検証エンジンであって、
    前記光学式文字認識システムから前記競合する画像識別を受信するための分析コンポーネントを含み、各画像識別が発生された信頼度値を有し、
    前記分析コンポーネントは、前記発生された信頼度値を分析して、前記受信した画像識別の識別競合を判定し、
    前記分析コンポーネントは、前記発生された競合を分析して、前記識別競合が所定の動作パラメータ範囲内に入るか否かを識別し、前記識別競合が前記範囲内のどこであるかに依存して、実行する動作を決定する、
    検証エンジン。
  2. 前記動作が、前記画像識別、前記発生された信頼度レベル、および前記判定された競合の各々を、検証のために人間のエージェントに送信することを含む、請求項1に記載の検証エンジン。
  3. 更に、前記分析コンポーネントが、動作検証のために人間のエージェントに送信するために、前記画像識別の各々の捕捉画像を受信する、請求項1または2に記載の検証エンジン。
  4. 前記動作が、前記分析コンポーネントに、前記識別競合がルールを適用することによって解決可能であるか否かを判定することを要求し、前記競合がルールの適用によって解決可能である場合、課金システムに通知を発生することを含む、請求項1に記載の検証エンジン。
  5. 前記分析コンポーネントが、競合する画像識別がないことを判定し、前記分析コンポーネントが課金システムに通知を発生する、請求項1に記載の検証エンジン。
  6. 画像の外観が車両の前方または後方のナンバープレートの画像を含む、前出の請求項のいずれかに記載の検証エンジン。
  7. 画像の画像がエンティティの識別標識を含む、前出の請求項のいずれかに記載の検証エンジン。
  8. 前記所定の動作パラメータ範囲が1組のルールによって規定され、各ルールが、信頼度値が収まることができる最小閾値を明示し、特定の最小および最大閾値内に収まる発生された信頼度レベルに依存して、実行する動作を決定する、前出の請求項のいずれかに記載の検証エンジン。
  9. 1つ以上のOCRエンジンから受信される画像識別および信頼度レベルを管理するための受信を更に含む、請求項1に記載の検証エンジン。
  10. 前記受信コンポーネントが、前記画像識別を所定の時間量だけキュー上に記憶して、処理のために同じエンティティに関連した更に別の画像識別を待つことを含む、請求項8に記載の検証エンジン。
  11. 前記分析コンポーネントがOCRエンジンから変換画像データを更に受信する、請求項1に記載の検証エンジン。
  12. 前記分析コンポーネントが、前記変換画像データおよび前記発生された信頼度値を分析して、前記変換画像データが例外領域内に収まるか否か、およびそのために更に別の動作を実行するべきであるか否かを判定する、請求項10に記載の検証エンジン。
  13. 車両渋滞環境において用いるように適合される、前出の請求項のいずれかに記載の検証エンジン。
  14. 前記検証エンジンが、複数のOCRエンジンから画像識別、画像、および信頼度値を受信するために動作可能である、前出の請求項のいずれかに記載の検証エンジン。
  15. 光学式文字認識システムによって発生される競合する画像識別に応答して実行される動作を決定するための方法であって、
    前記光学式文字認識システムから前記競合する画像識別を受信するステップであって、各画像識別が発生された信頼度値を有する、ステップと、
    前記発生された信頼度値を分析して、前記受信した画像識別の各々間の識別競合を判定するステップと、
    前記発生された競合を分析して、前記識別競合が所定の動作パラメータ範囲内に入るか否かを識別し、前記識別競合が前記範囲内のどこであるかに依存して、実行する動作を決定するステップと、
    を含む、方法。
  16. 前記動作が、前記画像識別、前記発生された信頼度レベル、および前記判定された競合の各々を、検証のために人間のエージェントに送信することを含む、請求項15に記載の方法。
  17. 更に、動作検証のために人間のエージェントに送信するために、前記画像識別の各々の捕捉画像を受信する、請求項15または16に記載の方法。
  18. 前記動作が、分析コンポーネントに、前記識別競合がルールを適用することによって解決可能であるか否かを判定することを要求し、前記競合がルールの適用によって解決可能である場合、課金システムに通知を発生することを含む、請求項17に記載の方法。
  19. 比較するステップが、競合する画像識別がないことを判定することを含み、分析コンポーネントが課金システムに通知を発生する、請求項15に記載の方法。
  20. 画像の外観が車両の前方または後方のナンバープレートの画像を含む、前出の請求項のいずれかに記載の方法。
  21. 画像の画像がエンティティの識別標識を含む、前出の請求項のいずれかに記載の方法。
  22. 前記所定の動作パラメータ範囲が1組のルールによって規定され、各ルールが、信頼度値が収まることができる最小閾値を明示し、特定の最小および最大閾値内に収まる発生された信頼度レベルに依存して、実行する動作を決定する、前出の請求項のいずれかに記載の方法。
  23. 1つ以上のOCRエンジンから受信される画像識別および信頼度レベルを管理するためのステップを更に含む、請求項16に記載の方法。
  24. 前記管理するステップが、前記画像識別を所定の時間量だけキュー上に記憶して、処理のために同じエンティティに関連した更に別の画像識別を待つことを含む、請求項23に記載の方法。
  25. OCRエンジンから変換画像データを受信することを更に含む、請求項15に記載の方法。
  26. 前記受信するステップが、前記変換画像データおよび前記発生された信頼度値を分析して、前記変換画像データが例外領域内に収まるか否か、およびそのために更に別の動作を実行するべきであるか否かを判定する、請求項25に記載の方法。
  27. 車両渋滞環境において用いるように適合される、前出の請求項のいずれかに記載の方法。
  28. 検証エンジンが、複数のOCRエンジンから画像識別、画像、および信頼度値を受信するために動作可能である、前出の請求項のいずれかに記載の方法。
  29. 光学式文字認識システムによって発生される競合する画像識別に応答して実行される動作を決定するためのデータ処理システムであって、請求項15から29に記載の発明を実行するために適合された、中央演算処理装置とメモリ・デバイスとストレージ・デバイスとを含む、データ処理システム。
  30. デジタル・コンピュータの内部メモリにロードすることができるコンピュータ・プログラムであって、コンピュータ上で動作されると、請求項15から29に記載の発明を実施するように実行するためのソフトウェア・コード部分を含む、コンピュータ・プログラム。
JP2009513690A 2006-06-08 2007-06-06 検証エンジン、方法、データ処理システム(検証エンジン) Active JP5260504B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GBGB0611561.2A GB0611561D0 (en) 2006-06-08 2006-06-08 A validation engine
GB0611561.2 2006-06-08
PCT/EP2007/055579 WO2007141297A1 (en) 2006-06-08 2007-06-06 A validation engine

Publications (2)

Publication Number Publication Date
JP2009540413A true JP2009540413A (ja) 2009-11-19
JP5260504B2 JP5260504B2 (ja) 2013-08-14

Family

ID=36745705

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009513690A Active JP5260504B2 (ja) 2006-06-08 2007-06-06 検証エンジン、方法、データ処理システム(検証エンジン)

Country Status (8)

Country Link
US (1) US8094887B2 (ja)
EP (1) EP2030153B1 (ja)
JP (1) JP5260504B2 (ja)
CN (1) CN101449280B (ja)
AT (1) ATE549694T1 (ja)
GB (1) GB0611561D0 (ja)
TW (1) TWI428838B (ja)
WO (1) WO2007141297A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108734797A (zh) * 2018-03-27 2018-11-02 西安艾润物联网技术服务有限责任公司 车辆通行费的支付方法、装置及计算机可读存储介质
CN113128247A (zh) * 2021-05-17 2021-07-16 阳光电源股份有限公司 一种图像定位标识验证方法及服务器

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8401230B2 (en) 2010-11-01 2013-03-19 Xerox Corporation Signature based drive-through order tracking system and method
US8730334B2 (en) * 2010-12-10 2014-05-20 Symantec Corporation Techniques for providing improved perpetrator imaging
US9092979B2 (en) * 2010-12-14 2015-07-28 Xerox Corporation Automated license plate recognition system and method using human-in-the-loop based adaptive learning
CA2824330C (en) * 2011-01-12 2018-05-01 Videonetics Technology Private Limited An integrated intelligent server based system and method/systems adapted to facilitate fail-safe integration and/or optimized utilization of various sensory inputs
US8792682B2 (en) 2011-04-21 2014-07-29 Xerox Corporation Method and system for identifying a license plate
US9104939B2 (en) 2011-08-16 2015-08-11 Xerox Corporation Emergency rescue vehicle video based violation enforcement method and system
US8798325B2 (en) * 2012-02-21 2014-08-05 Xerox Corporation Efficient and fault tolerant license plate matching method
US9122928B2 (en) 2013-04-11 2015-09-01 International Business Machines Corporation Determining images having unidentifiable license plates
EP2819113B1 (de) * 2013-06-28 2016-08-03 Siemens Aktiengesellschaft Messanlage zur Erfassung eines einem Fahrzeug zugeordneten Kennzeichens bei Passage eines Messquerschnittes einer Fahrbahn
EP2854186A1 (en) * 2013-09-26 2015-04-01 Seoul Semiconductor Co., Ltd. Light source module, fabrication method therefor, and backlight unit including the same
US9754171B1 (en) 2014-06-27 2017-09-05 Blinker, Inc. Method and apparatus for receiving vehicle information from an image and posting the vehicle information to a website
US10540564B2 (en) 2014-06-27 2020-01-21 Blinker, Inc. Method and apparatus for identifying vehicle information from an image
US9773184B1 (en) 2014-06-27 2017-09-26 Blinker, Inc. Method and apparatus for receiving a broadcast radio service offer from an image
US9892337B1 (en) 2014-06-27 2018-02-13 Blinker, Inc. Method and apparatus for receiving a refinancing offer from an image
US10867327B1 (en) 2014-06-27 2020-12-15 Blinker, Inc. System and method for electronic processing of vehicle transactions based on image detection of vehicle license plate
US9779318B1 (en) 2014-06-27 2017-10-03 Blinker, Inc. Method and apparatus for verifying vehicle ownership from an image
US9818154B1 (en) 2014-06-27 2017-11-14 Blinker, Inc. System and method for electronic processing of vehicle transactions based on image detection of vehicle license plate
US9589202B1 (en) * 2014-06-27 2017-03-07 Blinker, Inc. Method and apparatus for receiving an insurance quote from an image
US10733471B1 (en) 2014-06-27 2020-08-04 Blinker, Inc. Method and apparatus for receiving recall information from an image
US9760776B1 (en) 2014-06-27 2017-09-12 Blinker, Inc. Method and apparatus for obtaining a vehicle history report from an image
US9594971B1 (en) * 2014-06-27 2017-03-14 Blinker, Inc. Method and apparatus for receiving listings of similar vehicles from an image
US9607236B1 (en) * 2014-06-27 2017-03-28 Blinker, Inc. Method and apparatus for providing loan verification from an image
US10515285B2 (en) 2014-06-27 2019-12-24 Blinker, Inc. Method and apparatus for blocking information from an image
US9563814B1 (en) * 2014-06-27 2017-02-07 Blinker, Inc. Method and apparatus for recovering a vehicle identification number from an image
US9600733B1 (en) * 2014-06-27 2017-03-21 Blinker, Inc. Method and apparatus for receiving car parts data from an image
US10572758B1 (en) 2014-06-27 2020-02-25 Blinker, Inc. Method and apparatus for receiving a financing offer from an image
US9558419B1 (en) * 2014-06-27 2017-01-31 Blinker, Inc. Method and apparatus for receiving a location of a vehicle service center from an image
US9589201B1 (en) * 2014-06-27 2017-03-07 Blinker, Inc. Method and apparatus for recovering a vehicle value from an image
US10579892B1 (en) 2014-06-27 2020-03-03 Blinker, Inc. Method and apparatus for recovering license plate information from an image
CN109948634A (zh) * 2017-12-21 2019-06-28 江苏奥博洋信息技术有限公司 一种判断两张图像特征是否一致的方法
CN107945530B (zh) * 2017-12-24 2021-05-04 上海捷崇科技有限公司 一种车辆超限检测系统及其检测方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05189598A (ja) * 1992-01-10 1993-07-30 Toshiba Corp ナンバプレート情報読取装置
JPH07146916A (ja) * 1993-11-24 1995-06-06 Nippondenso Co Ltd ナンバープレートの認識装置
JPH09507721A (ja) * 1994-03-10 1997-08-05 インターナシヨナル・ビジネス・マシーンズ・コーポレーシヨン 文字認識機構
JPH11259642A (ja) * 1998-03-12 1999-09-24 Omron Corp 認識処理方法およびその方法を用いた認識処理装置ならびに車番読取装置
JP2000293623A (ja) * 1999-04-06 2000-10-20 Mitsubishi Electric Corp 文字認識装置
JP2001273461A (ja) * 2000-03-24 2001-10-05 Fujitsu Ltd ナンバープレート読取装置及び方法
JP2003099825A (ja) * 2001-09-21 2003-04-04 Toshiba Corp 料金収受システム、車載器及び料金収受方法
JP2003196590A (ja) * 2001-12-25 2003-07-11 Matsushita Electric Ind Co Ltd 車両ナンバープレート認識システムおよび車両ナンバープレート認識装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3969698A (en) * 1974-10-08 1976-07-13 International Business Machines Corporation Cluster storage apparatus for post processing error correction of a character recognition machine
US4817166A (en) * 1986-05-05 1989-03-28 Perceptics Corporation Apparatus for reading a license plate
US5257323A (en) 1991-05-29 1993-10-26 Canon Kabushiki Kaisha Selection agent for a symbol determination system with multiple character recognition processors
ES2144435T3 (es) 1992-09-03 2000-06-16 Cit Alcatel Dispositivo para captar caracteres sobre objetos, especialmente letras y cifras de placas de matricula de vehiculos.
DK0618544T3 (da) 1993-03-29 1999-12-06 Kleindienst Datentechnik Zv Lo Fremgangsmåde og indretning til automatisk registrering og genkendelse af skrifter
US5455872A (en) * 1993-04-26 1995-10-03 International Business Machines Corporation System and method for enhanced character recogngition accuracy by adaptive probability weighting
US6109525A (en) * 1993-05-28 2000-08-29 Saab-Scania Combitech Akitiebolag Method and device for registering vehicles in a road toll facility
US5970171A (en) 1995-08-14 1999-10-19 Hughes Aircraft Company Apparatus and method of fusing the outputs of multiple intelligent character recognition (ICR) systems to reduce error rate
CA2199999A1 (en) 1997-03-14 1998-09-14 Peter Johann Kielland Parking regulation enforcement system
US6219453B1 (en) * 1997-08-11 2001-04-17 At&T Corp. Method and apparatus for performing an automatic correction of misrecognized words produced by an optical character recognition technique by using a Hidden Markov Model based algorithm
US6400805B1 (en) * 1998-06-15 2002-06-04 At&T Corp. Statistical database correction of alphanumeric identifiers for speech recognition and touch-tone recognition
US6959869B2 (en) * 1999-06-07 2005-11-01 Metrologic Instruments, Inc. Automatic vehicle identification (AVI) system employing planar laser illumination and imaging (PLIIM) based subsystems
US6654487B1 (en) * 2000-03-03 2003-11-25 Charles H. Downs, Jr. Character recognition, including method and system for processing checks with invalidated MICR lines
US7738706B2 (en) * 2000-09-22 2010-06-15 Sri International Method and apparatus for recognition of symbols in images of three-dimensional scenes
DE10104502B4 (de) 2001-01-31 2013-02-07 Compagnie Financière et Industrielle des Autoroutes (Cofiroute) S.A. Kontrollverfahren zur Straßengebührenerfassung
US20060030985A1 (en) * 2003-10-24 2006-02-09 Active Recognition Technologies Inc., Vehicle recognition using multiple metrics
US7539326B2 (en) * 2005-12-23 2009-05-26 Pitney Bowes Inc. Method for verifying an intended address by OCR percentage address matching
GB0623236D0 (en) * 2006-11-22 2007-01-03 Ibm An apparatus and a method for correcting erroneous image identifications generated by an ocr device

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05189598A (ja) * 1992-01-10 1993-07-30 Toshiba Corp ナンバプレート情報読取装置
JPH07146916A (ja) * 1993-11-24 1995-06-06 Nippondenso Co Ltd ナンバープレートの認識装置
JPH09507721A (ja) * 1994-03-10 1997-08-05 インターナシヨナル・ビジネス・マシーンズ・コーポレーシヨン 文字認識機構
JPH11259642A (ja) * 1998-03-12 1999-09-24 Omron Corp 認識処理方法およびその方法を用いた認識処理装置ならびに車番読取装置
JP2000293623A (ja) * 1999-04-06 2000-10-20 Mitsubishi Electric Corp 文字認識装置
JP2001273461A (ja) * 2000-03-24 2001-10-05 Fujitsu Ltd ナンバープレート読取装置及び方法
JP2003099825A (ja) * 2001-09-21 2003-04-04 Toshiba Corp 料金収受システム、車載器及び料金収受方法
JP2003196590A (ja) * 2001-12-25 2003-07-11 Matsushita Electric Ind Co Ltd 車両ナンバープレート認識システムおよび車両ナンバープレート認識装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108734797A (zh) * 2018-03-27 2018-11-02 西安艾润物联网技术服务有限责任公司 车辆通行费的支付方法、装置及计算机可读存储介质
CN113128247A (zh) * 2021-05-17 2021-07-16 阳光电源股份有限公司 一种图像定位标识验证方法及服务器
CN113128247B (zh) * 2021-05-17 2024-04-12 阳光电源股份有限公司 一种图像定位标识验证方法及服务器

Also Published As

Publication number Publication date
CN101449280A (zh) 2009-06-03
TW200807310A (en) 2008-02-01
EP2030153A1 (en) 2009-03-04
ATE549694T1 (de) 2012-03-15
EP2030153B1 (en) 2012-03-14
US8094887B2 (en) 2012-01-10
WO2007141297A1 (en) 2007-12-13
GB0611561D0 (en) 2006-07-19
US20080031522A1 (en) 2008-02-07
CN101449280B (zh) 2012-05-23
JP5260504B2 (ja) 2013-08-14
TWI428838B (zh) 2014-03-01

Similar Documents

Publication Publication Date Title
JP5260504B2 (ja) 検証エンジン、方法、データ処理システム(検証エンジン)
US12008123B2 (en) Systems and methods for sharing verified identity documents
EP3813331B1 (en) Systems and methods for electronically sharing private documents using pointers
US9396383B2 (en) System, method and computer program for verifying a signatory of a document
US8027504B2 (en) Apparatus and method for analyzing image identifications generated by an OCR device
US20160232534A1 (en) Systems and Methods for Generating an Auditable Digital Certificate
CN109711133A (zh) 身份信息的认证方法、装置及服务器
JP6409082B2 (ja) ノンストップ顔認証システム
KR102085489B1 (ko) 하이브리드 음주측정관리 시스템
US11074330B2 (en) Biometric recognition method
CN111886842A (zh) 使用基于阈值的匹配进行远程用户身份验证
US20220046012A1 (en) Method and System for Verifying the Identity of a User
CN111241566A (zh) 保单管理方法、电子装置、计算机设备及存储介质
RU2701088C1 (ru) Способ и система для доверенного безбумажного предъявления документов
US20200019689A1 (en) Biometric recognition method
CN111462480A (zh) 交通图像证据验证方法、装置、计算机设备和存储介质
KR102646405B1 (ko) 안면과 지문을 이용한 신분증명 방법
CN113569839B (zh) 证件识别方法、系统、设备及介质
KR20170020196A (ko) 차량 서비스 방법
KR20130095345A (ko) 차량번호 인식 불법 주정차 cctv 단속 시스템 및 이를 위한 전자 상거래 방법
CN117495630A (zh) 基于数据分析的套牌申诉处理方法及系统
JP2022190791A (ja) 移動体認証装置、入退場管理装置、移動体認証システム装置、移動体認証方法、入退場管理方法、プログラム及び記録媒体
FR3105480A3 (fr) Système d’identification

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100323

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120223

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120306

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120529

RD12 Notification of acceptance of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7432

Effective date: 20120529

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120530

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120904

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130409

RD14 Notification of resignation of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7434

Effective date: 20130409

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130425

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160502

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5260504

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250