JP2013257864A - 自動ナンバープレート認識のための幾何学的事前補正 - Google Patents
自動ナンバープレート認識のための幾何学的事前補正 Download PDFInfo
- Publication number
- JP2013257864A JP2013257864A JP2013105848A JP2013105848A JP2013257864A JP 2013257864 A JP2013257864 A JP 2013257864A JP 2013105848 A JP2013105848 A JP 2013105848A JP 2013105848 A JP2013105848 A JP 2013105848A JP 2013257864 A JP2013257864 A JP 2013257864A
- Authority
- JP
- Japan
- Prior art keywords
- image
- plate
- matrix
- correction
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012937 correction Methods 0.000 title claims abstract description 86
- 238000000034 method Methods 0.000 claims abstract description 45
- 238000001454 recorded image Methods 0.000 claims abstract description 18
- 239000011159 matrix material Substances 0.000 claims description 74
- 238000012549 training Methods 0.000 claims description 38
- 230000004044 response Effects 0.000 claims description 7
- 238000005457 optimization Methods 0.000 claims description 3
- 238000004891 communication Methods 0.000 description 16
- 238000003702 image correction Methods 0.000 description 9
- 230000009466 transformation Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000010008 shearing Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/24—Aligning, centring, orientation detection or correction of the image
- G06V10/243—Aligning, centring, orientation detection or correction of the image by compensating for image skew or non-uniform image deformations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/63—Scene text, e.g. street names
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Image Processing (AREA)
- Character Input (AREA)
- Geometry (AREA)
Abstract
【解決手段】傾斜配向されたプレートに対応する補正パラメータの少なくとも1つの集合を自動的に決定しておき、傾斜配向されたナンバープレートの入力画像を受け取り、入力画像を受け取ると、補正済みの画像を得るために、少なくとも1つの補正パラメータの集合を適用することで、入力画像を自動的に調節する画像調節モジュールを持つ。
【選択図】図2
Description
ほとんどすべてのナンバープレートの形は長方形である。米国内のほとんどの州の標準仕様の旅客用プレートは、同様の設計、レイアウト、および寸法を有している。さらに、傾斜したプレートは、一般的に、だいたい同じ角度で取り付けられている。
図7を参照すると、少なくとも1つの補正行列を決定するために使用する較正段階を説明するためのフローチャートを示している。較正は、オンラインでもオフラインでも実行できる。方法はS700から始まる。S702で、トレーニング装置(図1の102を参照すること)において多くの画像見本を受け取る。画像は、較正しようとしているカメラから記録することが好ましい。上述のように、画像見本は電子フォーマットでトレーニング装置に提供できる。画像データ見本は、入力として任意の好適なソースからトレーニング装置へ提供できる。画像見本は、それぞれ、ナンバープレート見本、および/またはナンバープレート見本を含むバンパ領域を含んでいる。
較正済みのカメラの運用を開始するまで、トレーニング段階で決定した補正行列C1、C2を記憶装置内に保存する。一般に、較正済みのカメラがナンバープレートの画像を特定したり、および/または記録したりできるように、較正済みのカメラを交通インフラストラクチャ内の選択位置に設置する。較正済みのカメラを使用して車両交通流量を監視し、画像を使用して車両のナンバープレート番号を特定する。
初期の較正の後に、システムは、ALPR結果を監視し続けて、パラメータドリフトを検出し続けてもよい。例えば、24時間ごとまたは5分ごとなどの所定の期間後に、システムは、最近のALPR検出データを用いて補正行列を再計算して更新するために、図7に記載するプロセスを繰り返してもよい。また、事前に設定した閾値または限度をドリフトが超えているとき、システムは警報を送出してもよい。
図10A〜図10Bおよび図11A〜図11Bに、運用段階の実施の例を、記録された画像および結果として示している。図10Aおよび図10Bは、較正済みのイメージ・キャプチャ・デバイスが記録した2枚の入力画像を示している。図10Aは、記録され、垂直取り付けを有していた元のナンバープレートの画像を示している。図を見て分かるように、プレートは垂直に取り付けてあるが、プレートを取り付けてある車両が、イメージ・キャプチャ・デバイスに対して所定の角度をなして位置している。このように、プレートは、プレートの水平軸に沿った所定の角度で記録されている。
Claims (10)
- 傾斜配向されたプレートに対応する補正パラメータの少なくとも1つの集合を自動的に決定することと、
検出したナンバープレートを表す入力画像を受け取ることと、
前記入力画像を受け取ることに呼応して、補正パラメータの前記少なくとも1つの集合を用いて補正済みの画像を得るために前記入力画像を自動的に調節することと、を含む、
記録された画像内で検出したナンバープレートを調節する方法。 - 前記調節することが、
補正パラメータの前記第1の集合を適用した後に、前記傾斜配向されたプレートを検出したかどうかを判断することと、
前記傾斜配向されたプレートと判断されないことに呼応して、垂直配向されたプレートに対応する補正パラメータの少なくとも第2の集合を適用することと、をさらに含む、請求項1に記載の方法。 - 前記調節することが、
前記入力画像が正面プレートを含むとき、1つの行列を適用することと、前記入力画像が背面プレートを含むとき、2つの行列を適用することと、を含む、請求項1に記載の方法。 - 前記調節することが、
前記入力画像内の前記検出したプレートを所定の寸法に拡大縮小することと、
前記入力画像内の前記検出したプレートを調節して、ひずみを補正することと、を含む、請求項1に記載の方法。 - 前記調節することが
前記少なくとも1つの補正行列を前記提供することと、
イメージ・キャプチャ・デバイスを提供することと、
前記イメージ・キャプチャ・デバイスが記録したN枚のナンバープレートの画像を受け取ることと、
前記画像内に記録された各ナンバープレートの四隅の各々のx,y座標を決定することと、
最適化を用いて補正行列を決定することと、を含む、請求項1に記載の方法。 - 前記補正行列を前記決定することが、
前記四隅の前記x,y座標の間の差を計算することにより特徴集合を決定することを含み、
前記特徴集合の元のプレートの形状行列Viを決定することを含み、
理想的なプレート形状Dを決定することを含み、理想的な長方形プレートの高さと幅とが前記D行列のベクトルを定義し、
補正済みのプレート形状CViを決定することを含み、
前記補正済みのプレート形状から前記理想的なプレート形状を差し引くこと(CVi−D)により、前記補正済みのプレート形状と、前記理想的なプレート形状の間の距離を決定することを含み、
前記ナンバープレートに対するすべての行列エントリの合計を二乗することにより前記補正行列Cを決定することを含む、請求項5に記載の方法。 - 前記少なくとも1つの補正行列を前記提供することが、
前記N枚のプレートに対する前記プレート情報を含む行列V’を決定することと、
理想的なプレート形状D’を決定することと、
前記行列V’と前記行列D’とを用いてベクトルc’を計算することと、をさらに含む、請求項5に記載の方法。 - 前記N枚のプレートがすべて、垂直配向されたプレートおよび傾斜配向されたプレートのうちの一方を含む、請求項7に記載の方法。
- 前記理想的なプレート形状D’を前記決定することが、
前記N番目のナンバープレートの理想的な高さと幅とを特定することを含む、請求項7に記載の方法。 - N枚のプレートの画像を受け取り、
前記N枚のプレートの各々に対する特徴集合を含む行列V’を決定して、
N枚の理想的なプレートの高さと幅との特徴集合を特定することにより理想的な形状行列D’を決定して、
前記行列V’と前記理想形状D’とを用いて補正行列を計算するように構成された
トレーニング装置と、
前記トレーニング装置と通信して、前記少なくとも1つの補正行列を保存するように構成された記憶装置と、
検出したナンバープレートの画像を記録するように構成された入力装置と、
前記入力装置および前記記憶装置と通信して、
前記入力装置から送信された前記記録された画像を受け取り、
前記入力画像を受け取ることに呼応して、前記少なくとも1つの補正行列を適用することにより補正済みの画像v’(x,y)を得るために前記入力画像v[(x’,y’)]を自動的に調節するように構成された
補正装置と、
前記補正装置と通信して、前記補正済みの画像を表示するように構成されたインタフェースと、を含む、
入力画像を調節するシステム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/494,302 US9020200B2 (en) | 2012-06-12 | 2012-06-12 | Geometric pre-correction for automatic license plate recognition |
US13/494,302 | 2012-06-12 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013257864A true JP2013257864A (ja) | 2013-12-26 |
JP2013257864A5 JP2013257864A5 (ja) | 2016-07-07 |
JP6091325B2 JP6091325B2 (ja) | 2017-03-08 |
Family
ID=49626057
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013105848A Expired - Fee Related JP6091325B2 (ja) | 2012-06-12 | 2013-05-20 | ナンバープレートを調節する方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9020200B2 (ja) |
JP (1) | JP6091325B2 (ja) |
DE (1) | DE102013210478B4 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022522596A (ja) * | 2020-02-12 | 2022-04-20 | シェンチェン センスタイム テクノロジー カンパニー リミテッド | 画像識別方法及び装置、電子機器並びに記憶媒体 |
Families Citing this family (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9607236B1 (en) | 2014-06-27 | 2017-03-28 | Blinker, Inc. | Method and apparatus for providing loan verification from an image |
US10579892B1 (en) | 2014-06-27 | 2020-03-03 | Blinker, Inc. | Method and apparatus for recovering license plate information from an image |
US9773184B1 (en) | 2014-06-27 | 2017-09-26 | Blinker, Inc. | Method and apparatus for receiving a broadcast radio service offer from an image |
US10867327B1 (en) | 2014-06-27 | 2020-12-15 | Blinker, Inc. | System and method for electronic processing of vehicle transactions based on image detection of vehicle license plate |
US9892337B1 (en) | 2014-06-27 | 2018-02-13 | Blinker, Inc. | Method and apparatus for receiving a refinancing offer from an image |
US9754171B1 (en) | 2014-06-27 | 2017-09-05 | Blinker, Inc. | Method and apparatus for receiving vehicle information from an image and posting the vehicle information to a website |
US9589201B1 (en) | 2014-06-27 | 2017-03-07 | Blinker, Inc. | Method and apparatus for recovering a vehicle value from an image |
US9589202B1 (en) | 2014-06-27 | 2017-03-07 | Blinker, Inc. | Method and apparatus for receiving an insurance quote from an image |
US10572758B1 (en) | 2014-06-27 | 2020-02-25 | Blinker, Inc. | Method and apparatus for receiving a financing offer from an image |
US9818154B1 (en) | 2014-06-27 | 2017-11-14 | Blinker, Inc. | System and method for electronic processing of vehicle transactions based on image detection of vehicle license plate |
US9594971B1 (en) | 2014-06-27 | 2017-03-14 | Blinker, Inc. | Method and apparatus for receiving listings of similar vehicles from an image |
US10540564B2 (en) | 2014-06-27 | 2020-01-21 | Blinker, Inc. | Method and apparatus for identifying vehicle information from an image |
US10733471B1 (en) | 2014-06-27 | 2020-08-04 | Blinker, Inc. | Method and apparatus for receiving recall information from an image |
US9779318B1 (en) | 2014-06-27 | 2017-10-03 | Blinker, Inc. | Method and apparatus for verifying vehicle ownership from an image |
US9600733B1 (en) | 2014-06-27 | 2017-03-21 | Blinker, Inc. | Method and apparatus for receiving car parts data from an image |
US9563814B1 (en) | 2014-06-27 | 2017-02-07 | Blinker, Inc. | Method and apparatus for recovering a vehicle identification number from an image |
US10515285B2 (en) | 2014-06-27 | 2019-12-24 | Blinker, Inc. | Method and apparatus for blocking information from an image |
US9558419B1 (en) | 2014-06-27 | 2017-01-31 | Blinker, Inc. | Method and apparatus for receiving a location of a vehicle service center from an image |
US9760776B1 (en) | 2014-06-27 | 2017-09-12 | Blinker, Inc. | Method and apparatus for obtaining a vehicle history report from an image |
US10323450B2 (en) * | 2015-10-20 | 2019-06-18 | Hi-Tech Solutions Ltd. | Cloud-base ANPR management |
US10198954B2 (en) | 2015-12-30 | 2019-02-05 | Motorola Solutions, Inc. | Method and apparatus for positioning an unmanned robotic vehicle |
US10068146B2 (en) | 2016-02-25 | 2018-09-04 | Conduent Business Services, Llc | Method and system for detection-based segmentation-free license plate recognition |
CN106127248A (zh) * | 2016-06-24 | 2016-11-16 | 平安科技(深圳)有限公司 | 基于深度学习的车牌分类方法及系统 |
CN106127206B (zh) * | 2016-06-28 | 2019-04-05 | 北京智芯原动科技有限公司 | 一种车牌的竖直角度检测方法及装置 |
WO2020133464A1 (en) * | 2018-12-29 | 2020-07-02 | Zhejiang Dahua Technology Co., Ltd. | Systems and methods for license plate recognition |
CN110427937B (zh) * | 2019-07-18 | 2022-03-22 | 浙江大学 | 一种基于深度学习的倾斜车牌矫正和不定长车牌识别方法 |
TWI818535B (zh) * | 2022-05-04 | 2023-10-11 | 博遠智能科技股份有限公司 | 車牌辨識系統及方法 |
CN114882489B (zh) * | 2022-07-07 | 2022-12-16 | 浙江智慧视频安防创新中心有限公司 | 一种对旋转车牌进行水平校正方法、装置、设备及介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07114689A (ja) * | 1993-10-18 | 1995-05-02 | Nippon Signal Co Ltd:The | 車両登録番号認識方法 |
JPH08320990A (ja) * | 1995-05-26 | 1996-12-03 | Japan Radio Co Ltd | 車番読み取り装置 |
JP2003317033A (ja) * | 2002-04-23 | 2003-11-07 | Ikegami Tsushinki Co Ltd | 画像処理におけるアフィン変換係数算出方法および画像処理装置 |
US20120275653A1 (en) * | 2011-04-28 | 2012-11-01 | Industrial Technology Research Institute | Method for recognizing license plate image, and related computer program product, computer-readable recording medium, and image recognizing apparatus using the same |
-
2012
- 2012-06-12 US US13/494,302 patent/US9020200B2/en active Active
-
2013
- 2013-05-20 JP JP2013105848A patent/JP6091325B2/ja not_active Expired - Fee Related
- 2013-06-05 DE DE102013210478.2A patent/DE102013210478B4/de active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07114689A (ja) * | 1993-10-18 | 1995-05-02 | Nippon Signal Co Ltd:The | 車両登録番号認識方法 |
JPH08320990A (ja) * | 1995-05-26 | 1996-12-03 | Japan Radio Co Ltd | 車番読み取り装置 |
JP2003317033A (ja) * | 2002-04-23 | 2003-11-07 | Ikegami Tsushinki Co Ltd | 画像処理におけるアフィン変換係数算出方法および画像処理装置 |
US20120275653A1 (en) * | 2011-04-28 | 2012-11-01 | Industrial Technology Research Institute | Method for recognizing license plate image, and related computer program product, computer-readable recording medium, and image recognizing apparatus using the same |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022522596A (ja) * | 2020-02-12 | 2022-04-20 | シェンチェン センスタイム テクノロジー カンパニー リミテッド | 画像識別方法及び装置、電子機器並びに記憶媒体 |
Also Published As
Publication number | Publication date |
---|---|
US20130329961A1 (en) | 2013-12-12 |
DE102013210478A1 (de) | 2013-12-12 |
US9020200B2 (en) | 2015-04-28 |
DE102013210478B4 (de) | 2023-10-26 |
JP6091325B2 (ja) | 2017-03-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6091325B2 (ja) | ナンバープレートを調節する方法 | |
US10229332B2 (en) | Method and apparatus for recognizing obstacle of vehicle | |
CN108921925B (zh) | 基于激光雷达和视觉融合的语义点云生成方法和装置 | |
US20220012909A1 (en) | Camera pose determination method and apparatus, and electronic device | |
US10015394B2 (en) | Camera-based speed estimation and system calibration therefor | |
US20160019683A1 (en) | Object detection method and device | |
CN108470356B (zh) | 一种基于双目视觉的目标对象快速测距方法 | |
US10474935B2 (en) | Method and device for target detection | |
KR20140045854A (ko) | 단일객체에 대한 기울기를 추정하는 영상을 감시하는 장치 및 방법 | |
CN110659658B (zh) | 一种目标检测方法及其装置 | |
CN112378333B (zh) | 仓储货物测量方法和装置 | |
CN104167109A (zh) | 车辆位置的检测方法和检测装置 | |
EP3617937A1 (en) | Image processing device, driving assistance system, image processing method, and program | |
KR20180098945A (ko) | 고정형 단일 카메라를 이용한 차량 속도 감지 방법 및 장치 | |
CN112633255A (zh) | 目标检测方法、装置及设备 | |
CN116563384A (zh) | 一种图像采集装置标定方法、设备及计算机设备 | |
CN116614621B (zh) | 相机内感知算法的测试方法、设备和存储介质 | |
CN111626078A (zh) | 识别车道线的方法及装置 | |
KR20160098020A (ko) | 스테레오 영상들의 보정 방법, 및 그 방법을 수행하는 장치 | |
CN113635299B (zh) | 一种机械臂的校正方法、终端设备及存储介质 | |
KR102371594B1 (ko) | 스테레오 카메라 영상 실시간 자동 캘리브레이션 장치, 그를 포함한 시스템 및 그 방법 | |
CN115272487A (zh) | 相机位姿估计方法、装置、存储介质和电子设备 | |
CN113470103A (zh) | 车路协同中相机作用距离确定方法、装置和路侧设备 | |
CN110580707A (zh) | 一种对象跟踪方法及系统 | |
CN117724494B (zh) | 一种智能巡检机器人的巡检方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160519 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160519 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20160519 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20160808 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160816 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161028 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170110 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170207 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6091325 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |