JP6527013B2 - 交通標識から英数字を抽出/認識するコンピュータ実施システムおよび方法 - Google Patents

交通標識から英数字を抽出/認識するコンピュータ実施システムおよび方法 Download PDF

Info

Publication number
JP6527013B2
JP6527013B2 JP2015094712A JP2015094712A JP6527013B2 JP 6527013 B2 JP6527013 B2 JP 6527013B2 JP 2015094712 A JP2015094712 A JP 2015094712A JP 2015094712 A JP2015094712 A JP 2015094712A JP 6527013 B2 JP6527013 B2 JP 6527013B2
Authority
JP
Japan
Prior art keywords
image
alphanumeric
alphanumeric characters
characters
readable
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015094712A
Other languages
English (en)
Other versions
JP2016143408A (ja
JP2016143408A5 (ja
Inventor
スネハール イェスガデ
スネハール イェスガデ
ムケシュ ホラニ
ムケシュ ホラニ
サイカット クンドゥ
サイカット クンドゥ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tata Consultancy Services Ltd
Original Assignee
Tata Consultancy Services Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tata Consultancy Services Ltd filed Critical Tata Consultancy Services Ltd
Publication of JP2016143408A publication Critical patent/JP2016143408A/ja
Publication of JP2016143408A5 publication Critical patent/JP2016143408A5/ja
Application granted granted Critical
Publication of JP6527013B2 publication Critical patent/JP6527013B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/582Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/50Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/22Character recognition characterised by the type of writing
    • G06V30/224Character recognition characterised by the type of writing of printed characters having additional code marks or containing code marks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/255Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/34Smoothing or thinning of the pattern; Morphological operations; Skeletonisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/46Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/467Encoded features or binary features, e.g. local binary patterns [LBP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Character Discrimination (AREA)
  • Image Analysis (AREA)
  • Character Input (AREA)
  • Traffic Control Systems (AREA)

Description

本発明は、交通標識からの英数字認識の分野に関する。
都会の増大し続ける交通量は交通事故統計の過度な増加をもたらした。運転手にとり標識、特に制限速度を表す交通標識を無視することは共通している。これらの標識は安全運転とコンフォートを確実にするために表記されている。標識に従うには、運転手が標識を認識でき、従って必要な処置を取ることができることが重要である。
近年においては異なる高度運転手支援システム(ADAS)が車両と道路の安全ともに維持することにより走行を支援している。交通標識の認識は交通標識関連の情報を伝達して運転手を補助する高度運転手支援システムの構成要素である。この種のシステムは運転手が交通規則に従うのを支援する。既知の交通標識検出方法は異なる機械学習技法を使用している。これらの技法は計算が複雑であり、オフライントレーニングが必要である。さらに、この種のシステムにおいて数字を正しく識別できることは照明すなわち照光条件ならびに交通標識のサイズに依存する。さらに、以上の条件に基づいて、交通標識から抽出された数字が不完全であり誤認に及ぶ可能性がある。
従って、機械学習技法によらずに上記の欠点を制限できるシステムが必要である。
既知の技術の1つまたは複数の課題を改善するか少なくとも有用な代替手段を提供することを意図する本発明の目的のうちいくつかのものについて以下で説明する。
本発明の目的は交通標識から英数字を抽出/認識するためのシステムを提供することである。
本発明のもう1つの目的は交通標識から英数字を抽出/認識するために機械学習技法を使用しないシステムを提供することである。
本発明のさらに別の目的は照明条件により変化しないシステムを提供することである。
本発明のさらにもう1つの目的は交通標識の取得画像の縮尺によって変化しないシステムを提供することである。
本発明のさらにもう1つの目的は抽出された不完全な数字を画質向上するシステムを提供することである。
本発明のもう1つの目的は形態の予備処理を行って英数字を認識するシステムを提供することである。
本発明のその他の目的と優位性は本発明の範囲をこれに限定することは意図されていない付随する図面を参照しつつ読むと以下の説明からさらに明らかとなる。
本発明は交通標識から英数字を抽出/認識し、認識された英数字を車載ディスプレイに表示するためのシステムを得ることを目的とする。
本発明による交通標識から英数字を抽出/認識し認識された英数字を車載ディスプレイに表示するためのシステムは、リポジトリ、カメラ、プロセッサ、形状認識装置、画質向上モジュール、英数字認識デバイスおよびディスプレイから構成される。システムにあるリポジトリは、事前に定められている区画された雛形、この雛形に重ねて配置した英数字およびテーブルを持つ。このテーブルは雛形に重ねて配置した英数字の区画ごとに事前に定められている閾値ピクセル数を含む。これらの英数字と閾値ピクセル数の間には一意対応が成立している。カメラはシステムに車載されており交通標識の画像を取得するように設定されている。システムに搭載されているプロセッサは、カメラと連動して事前に定められているルールに基づいて認識に適する交通標識のアナログ画像を選択する。認識に適する交通標識のアナログ画像は、プロセッサからコマンドを受けて適切なアナログ画像の範囲内にある形状を検出し、読取り可能な英数字画像を取得する形状認識装置へ送られる。画質向上モジュールは形状認識装置と連動して読取り可能な英数字画像を受け取り、英数字画像の品質を改善(画質向上)し、画質向上された読取り可能な画像を取得する。これらの画質向上された読取り可能な画像は英数字認識デバイスによって受容され、受け取った画質向上された読取り可能な画像に基づいて英数字を認識する。英数字を認識するために、英数字認識デバイスは、バイナリコンバータ、第1のサイズ変更デバイス、細線化モジュール、画像トリムモジュール、英数字トリムモジュール、第2のサイズ変更デバイス、第1のコンパレータ(比較対照デバイス)および第2のコンパレータから構成される。バイナリコンバータは受け取った画質向上された読取り可能な画像をデジタルバイナリ画像に変換し、次にこの画像は第1のサイズ変更デバイスでサイズ変更されて目的サイズの画像を取得する。次に形態上の細線化が細線化モジュールによりこれらのサイズ変更された画像に適用されて、細線化された英数字のアナログ画像を取得する。次に画像トリムモジュールはこれらの細線化された英数字を含むアナログ画像をトリミングして英数字を取得する。英数字トリムモジュールはこれらの英数字を受け取ってトリミングし分離された英数字を取得する。次に第2のサイズ変更デバイスは分離された英数字のサイズを変更して目的サイズの英数字を取得する。これらのサイズ変更された英数字は第1のコンパレータ(比較対照デバイス)で事前に定められている雛形と照合され、雛形上の異なる区画に存在するピクセルが取得される。第2のコンパレータは雛形に重ねて配置した英数字の各区画に対する事前に定められている閾値ピクセル数を格納しているテーブルをリポジトリから受け取り、また取得された数のピクセルを第1のコンパレータ(比較対照デバイス)から受け取り、特定の区画に存在する取得された数のピクセルを対応する区画に対して受け取った閾値ピクセル数と照合して対応する英数字を認識する。次にディスプレイはこれらの認識された英数字を受け取り表示する。
本発明に従い、交通標識から英数字を抽出/認識し認識された英数字を車載ディスプレイに表示するためにコンピュータ実施方法を提供する。この方法は、以下のステップを含む。
・事前に定められている区画割された雛形、雛形に重ねて配置した英数字および雛形に重ねて配置した英数字の各区画に対する事前に定められている前記英数字と一意対応する閾値ピクセル数を含むテーブルを保存するステップ、
・交通標識の画像取得ステップ、
・認識に適する交通標識アナログ画像を事前に定められているルールに従い選択するステップ、
・適切なアナログ画像の中から形状を検出して読取り可能な英数字画像を取得するステップ、
・英数字の画像品質を向上して画質向上された読取り可能な画像を取得するステップ、及び
・取得された画質向上された読取り可能な画像から英数字を認識するステップ。
英数字認識ステップは、以下のステップを含む。
・・受け取った画質向上された読取り可能な画像をデジタルバイナリ画像に変換するステップ、
・・デジタルバイナリ画像をサイズ変更し目的サイズの画像を取得するステップ、
・・取得した目的サイズの画像に形態上の細線化を適用して細線化された英数字を含むアナログ画像を取得するステップ、
・・細線化された英数字を含むアナログ画像をトリミングして英数字を取得するステップ、
・・トリミングして英数字のみ分離するステップ、
・・分離された英数字をサイズ変更し目的のサイズの英数字を取得するステップ、
・・目的サイズになった英数字をひとつずつ保存された事前に定められている雛形と照合して異なる区画雛形に存在する数のピクセルを取得するステップ、及び
・・特定の区画に存在する取得された数のピクセルをリポジトリに保存されているその区画についての合計閾値ピクセル数と照合する、対応が付けられた英数字を認識するステップ。
最後に、
・認識された英数字を表示するステップを含む。
本発明の交通標識から英数字を抽出/認識するためにコンピュータを使用するコンピュータ実施システムを添付図面を用いて説明する。
本発明の交通標識から英数字を抽出/認識するシステムの好ましい実施例を概念図として図解したものである。 (2a)、(2b)および(2c)に図解されている通り、12個の区画から構成される15×30ピクセルからなる雛形の好ましい実施例を図解したものである。 本発明の好ましい実施例を図解したものである。ここに、3(a)は2個の数字の細線化された画像の間で取得される分画部、3(b)は細線化されサイズ変更された画像のうち第1桁および細線化された画像から英数字を判断するための区画を表している。 本発明による文字の形態抽出・認識の好ましい流れ図を図解したものである。 本発明の円の内部に数字が表記された交通標識(制限速度標識)の複数の画像および数字の抽出・認識方法を適用する間に異なるステップで取得された画像の実施例を図解したものである。
本発明の好ましい実施例を、以下添付図面を参照しつつ詳細に説明する。好ましい実施例は本発明の範囲を限定するものではない。説明はあくまでも例示および図解のために行われる。
本発明の実施例ならびに様々な特徴および優位性の詳細を限定することのない実施例を参照することによって以下に説明する。確立している既存のコンポーネントならびに処理技術についての説明は省略し、本発明の実施例についての理解を不要に困難にしないようにした。本発明に使用されている例は単に本発明の実施例を実用化可能にする方法の理解を容易にし、当業者が本発明の実施例を実施することを可能にすることのみを目的としている。従って、例によって本発明の実施例の範囲を限定するものと解釈されてはならない。
本発明のシステムは交通標識から英数字を抽出/認識する。システム内に存在するカメラは交通標識の画像取得を目的として車載されている。次にシステムは対象領域(ROI)を取得された画像のフレーム内に規定する。この領域から英数字が抽出され画質向上(例えば拡大及び鮮明化)(enhanced)されて認識可能になる。このシステムに関しては、対象領域は取得された交通標識画像内部の英数字境界線によって定義される。ROIが特定されると英数字が抽出され画質向上される。画質向上された英数字を認識するため、画像がバイナリ画像に変換され、変換画像に形態上の細線化技法が適用される。次に2個の英数字の間で取得された空白は取得された画像とは独立的に英数字を抽出して認識する際の補助を果たす。抽出された各英数字は規定サイズにサイズ変更され白ピクセル数に基づいて認識される。
添付図面を参照すると、図1は交通標識から英数字を抽出/認識し運転手のために表示するための好ましい実施例システムの模式図を図解したものである。システム100は交通標識から英数字を抽出し認識して認識された英数字をディスプレイ134に表示する。ディスプレイ134は車載ダッシュボードまたはその他任意の車載可能で認識された英数字を運転手に明瞭に表示できるディスプレイであってよい。システム100は事前に定められている区画割された雛形を保存しているリポジトリ102、雛形に重ねて配置した英数字、および事前に定められている閾値ピクセル数を雛形に重ねて配置した各英数字ごとに格納しているテーブルから構成される。ここに、英数字と合計閾値ピクセル数の間には一意対応が成立している。添付図面において、図2は(2a)、(2b)および(2c)に図解された12個の区画から構成される15×30ピクセルの雛形の代表的実施例を図解したものである。一実施例においては、リポジトリ102はこの雛形および、区画ごとの閾値ピクセル数および複数区画にまたがりこの範囲にある合計閾値ピクセル数に基づく対応する英数字を格納しているテーブルを保存している。
システム100は道路に沿って設置されている標識の画像取得のため車載用に適合されているカメラ104を含む。カメラ104がこれらの標識を取得すると、システム100に搭載されたプロセッサ106は撮影されたアナログ画像を処理する。
次にプロセッサ106は適切なアナログ画像を事前に定められているルールに基づいて選択する。システム100に搭載されている形状認識装置108はプロセッサ106から適切なアナログ画像を受け取り、対象領域を識別することによって適切なアナログ画像の範囲に存在する形状を検出し、読取り可能な英数字画像を取得する。例えば、適切なアナログ画像が円形の中に数字が記載された速度制限標識の画像である場合は、形状認識装置は円形を検出し、制限速度を表す数字の画像を取得する。このように、形状認識装置は円形、三角形、楕円形や四角形等多様な形状を検出し、読取り可能な英数字画像を取得する。取得された読み取り可能な画像は英数字に関連する不備な情報を含み、分類誤差が発生する可能性がある。これを回避するために、1個の画質向上モジュール110がシステム100に内蔵されている。この画質向上モジュール110は形状認識装置108と連動し読取り可能な英数字画像を受け取り、英数字画像品質を向上し、画質向上された読取り可能な画像を取得する。画質向上された読取り可能な画像を取得するため、画質向上モジュール110は英数字の読み取り可能な各画像の対象領域に対応する画像の領域を識別することにより英数字の読み取り可能な画像をトリミングするROI識別素子112を搭載している。次にこのトリミングされた画像は画質向上モジュール110に搭載されているROIコンバータ114によってグレー画像に変換される。画質向上モジュール110はグレー画像を受け取りヒストグラム等化をグレー画像に適用して画質向上された読み取り可能な画像を取得するヒストグラムイコライザー116も搭載している。ヒストグラム等化は画像のヒストグラムを用いたコントラス補正であって、これによりヒストグラムの上で画像内英数字の強度分布を改善する。この機能により局所の低コントラストを高コントラストに変えることが可能になる。一実施例においては、画質向上された読み取り可能なアナログ画像は白い画像背景の上の黒い英数字画像を含む。次にシステム100に搭載された1個の英数字認識デバイス118が画質向上された読み取り可能な画像を受け取る。英数字認識デバイス118は受け取った画質向上された読取り可能な画像から英数字を認識する。英数字を認識するため、英数字認識デバイス118は1個のバイナリコンバータ120、1個の第1のサイズ変更デバイス122、1個の細線化モジュール124、1個の画像トリムモジュール126、1個の英数字トリムモジュール128、1個の第2のサイズ変更デバイス129、1個の第1のコンパレータ(比較対照デバイス)130および第2のコンパレータ132を含む。バイナリコンバータ120は受け取った画質向上された読取り可能な画像をデジタルバイナリ画像に変換する。一実施例においては、デジタルバイナリ画像は黒い画像背景上の白い英数字画像を含む。次に第1のサイズ変更デバイス122がデジタルバイナリ画像を適切なサイズにサイズ変更する。細線化モジュール124はこれらのサイズ変更された画像に形態上の細線化を適用し、細線化された英数字を含むアナログ画像を取得し、このアナログ画像は次に画像トリムモジュール126でトリミングされて英数字を取得する。英数字トリムモジュール128は取得された英数字の画像を再度トリミングし、分離された英数字を取得する。次に第2のサイズ変更デバイス129がこれらの分離された英数字を適切なサイズに変更し、サイズ変更された英数字を取得する。次に第1のコンパレータ(比較対照デバイス)130がサイズ変更された英数字をリポジトリ102に保存されている事前に定められている雛形と照合し、雛形の異なる区画に存在するピクセル数を取得する。第2のコンパレータ132はリポジトリ102と連動し、雛形に重ねて配置した各英数字ごとの事前に定められている閾値ピクセル数を格納しているテーブルを受け取り、さらに、第1のコンパレータ(比較対照デバイス)130と連動し取得された数のピクセルを受け取る。次に第2のコンパレータ132は特定の区画に存在する取得された数のピクセルをその区画に対する受け取った保存閾値ピクセル数と照合し、対応のついた英数字を認識する次にこれらの認識された英数字はディスプレイ134に表示される。
添付図面を参照すると、図2は12区画から構成される15×30ピクセルの雛形の代表的実施例を図解したものである。図2の(2a)、(2b)および(2c)は一つの雛形上の異なる区画を図解したものであって、A、B、C、D、F、G、H、I、J、K、Lはこれらの異なる区画を表す。一実施例においては、これらの各区画に存在する白いピクセルを使用して抽出された英数字を認識する。
添付図面を参照すると、図3は代表的実施例を図解したものである。ここに、3(a)は細線化された画像の2個の数字間の分画部、3(b)は細線化されサイズ変更された画像の1桁目の数字と英数字を特定するための区画を表す。この図において、3(a)はバイナリ変換ならびに形態上の細線化後の取得された画像を図解したものである。英数字は形態上の細線化によって分離されている。これらの分離文字のサイズが変更されて規定の雛形に合わせられ、次に雛形に載せられ、雛形の各区画ごとに存在する白いピクセルを識別する。特定の区画にある文字の白いピクセル数に基づいて、文字が認識され、表示される。3(b)は異なる区画雛形を表す。ここに細線化された数字の白いピクセルが存在する。
添付図面を参照すると、図4は形態学的な文字抽出/認識を利用する代表的実施例の流れ図を図解したものである。この実施例は制限速度を表示する交通標識を入力画像として評価する(ステップ400)。交通標識は通常の場合、円形の中に配置された数字を含む。画像が取得されると、システム内にある形状認識装置は円形を検出し、円形の中にある画像(この実施例では64×64ピクセル)を抽出する(ステップ402)。このようにしてフレーム内部にある数字のROIを与える。時としてこの抽出された数字には不備(数字の一部欠落等)がある可能性がある。この不備による分類誤りを回避するため、画質向上によって数字を完成させる必要がある(ステップ404)。抽出された数字の画像がある対象領域(ROI)は領域が円形境界内部になるまで縦横方向に拡大される(ステップ404a)。次に、この色付ROI画像はグレー画像に変換され(ステップ404b)、このグレー画像にヒストグラム等化が適用され(ステップ404c)、数字が黒で背景が白に変わる。次に取得された画像は英数字認識デバイスへ送られて数字が認識される(ステップ406)。形態的な数字の認識が数字認識のために使用されている。英数字認識デバイスはグレー画像を数字が白く背景が黒くなるようにバイナリ画像に変換(二値化)する(ステップ406a)。英数字認識デバイスは次にバイナリ画像を適切なサイズ(この実施例30×30ピクセル)にサイズ変更し(ステップ406b)、形態上の細線化をサイズ変更されたバイナリ画像に適用する(ステップ406c)。次に画像は4辺(全辺)がすべてトリミングされ(ステップ406d)、数字のみ取得される。次に細線化された画像から得られたすべての数字が数字どうしの隙間に基づいて個別にトリミングされる(ステップ406e)。隙間が無い場合は、このプロセスは停止され、画像は認識のために不適切なものとして破棄され別の画像が取得される。数字が分離された画像が隙間を基準にして取得されたら、数字は適切なサイズ(この実施例では15×30ピクセル)にサイズ変更される(ステップ406f)。雛形は(図2に図解されるとおり)15×30ピクセルの画像で異なる12の区画にすでに分割されている。次にシステムは分離されている各区画にある数字のサイズ変更された画像の白いピクセル数を計算し(ステップ406g)、数字は特定区画にある白ピクセル数に基づいて認識/判断される(ステップ406h)。これらの認識された数字は交通標識に表示された制限速度を表す(ステップ408)。例えば、数字の7を認識するためには、図3の3(b)に示されるように、区画3、5、7および区画10内の白ピクセル数を使用する。
本発明の目的であるシステムは交通標識の画像を取得し、交通標識から英数字を抽出して交通標識に記載されている英数字を認識して表示する。このシステムは取得された画像の縮尺および照明条件に依存しない。同システムは取得された画像を処理して取得する白いピクセルと白いピクセル数の閾値を照合することにより英数字を認識し、この照合に基づいて最尤英数字を表示させる。
添付図を参照すると、図5は円の内部に数字が表記された交通標識(制限速度標識)の複数の画像ならびに数字の抽出・認識方法の適用中に異なる段階で取得された画像の実施例を図解したものである。この図は取得された画像の縮尺および画像取得時の照明条件から影響されないシステムを目的として画像から数字を正しく抽出し認識するために日中および夜間に取得された異なる速度制限標識の例を図解したものである。
一つの実施例において、四角形の交通標識画像が取得され処理されて交通標識の四角形を検出し、検出された領域にある対象範囲を識別して英数字部分の読み取れる画像を取得する。
本発明の目的であるシステムは円形、三角形、楕円、四角形等多様な形状の交通標識の画像から英数字を抽出し認識する。
<技術的進歩性>
本発明により提供される技術的進歩性には以下のことの実現が含まれる。
・交通標識から英数字を抽出/認識するシステム、
・交通標識から英数字を抽出/認識するために機械学習技法を使用しないシステム、
・照明条件により影響を受けないシステム、
・交通標識の取得画像の縮尺により影響を受けないシステム、
・抽出された不備のある数字を画質向上するシステム、
・形態の予備処理を使用する英数字を認識するシステム。
「少なくとも」または「少なくとも1つの」という表現の使用は、1つまたは複数の目的物質または結果を得るために本発明の実施例において使用される場合があることに従い、1つまたは複数の要素または成分または数量の使用を示唆している。
前記の具体的実施例は本発明の実施例が持つ一般的性質をじゅうぶんに明らかにしているので、現状の知識を適用することにより他者は前記の一般的概念から乖離することなく前記の具体的実施例を異なる用途のために変更および/または適合することができる。従って、同適合や変更は本発明の実施例と同等の物としての意味およびその範囲で理解されることが意図されるべきであり、意図されている。本明細書に使用されている句節の用法や用語は説明目的のためであって限定するために使用されてはいない。従って、本明細書に記載された実施例は優先的実施例に基づいて説明されていると同時に、同分野の技能を有する者は本明細書に記載された実施例が本明細書で説明された実施例の意図および範囲で変更しても実践可能であることが認められる。

Claims (12)

  1. 交通標識から英数字を抽出/認識し、認識された英数字を車載ディスプレイに表示するためのコンピュータ実施システムであって、
    (i)事前に定められている区画割りされた雛形と当該雛形に重ねて配置した英数字を格納するリポジトリと、
    (ii)交通標識の画像を取得するカメラと、
    (iii)取得した交通標識の画像からアナログ画像を選択するプロセッサと、
    (iv)読取可能な英数字の画像を取得するための適切なアナログ画像に含まれる形状を認識する形状認識装置と、
    (v)英数字の画像の品質を向上させる画質向上モジュールと、
    (vi)受け取った画質向上された読取可能な画像から英数字を認識する英数字認識デバイスと、
    を有し、
    前記英数字認識デバイスは、
    受け取った画質向上された読取可能な画像をデジタルバイナリ画像に変換するバイナリコンバータと、
    前記バイナリコンバータと連動して、前記デジタルバイナリ画像をサイズ変更して目的サイズの画像を取得する第1のサイズ変更デバイスと、
    前記第1のサイズ変更デバイスと連動して、サイズ変更された画像を受け取り、受け取ったサイズ変更された画像にモルフォロジー演算による細線化処理を適用して細線化された英数字を含むアナログ画像を取得する細線化モジュールと、
    前記細線化モジュールと連動して、細線化された英数字を含むアナログ画像をトリミングして英数字を取得する画像トリムモジュールと、
    前記画像トリムモジュールと連動して、英数字を含むトリミングされた画像を受け取り、分離された英数字を取得する英数字トリムモジュールと、
    前記英数字トリムモジュールと連動して、分離された英数字のサイズを変更して、サイズ変更された英数字を取得する第2のサイズ変更デバイスと、
    前記リポジトリと連動して事前に定められている雛形を受け取るとともに、前記第2のサイズ変更デバイスと連動してサイズ変更された英数字を受け取り、サイズ変更された各英数字を事前に定められている雛形と照合して、異なる雛形区画に存在するピクセル数を取得する第1のコンパレータと、
    前記リポジトリと連動して、雛形に重ねて配置した英数字の各区画に対して事前に定められている閾値ピクセル数を格納しているテーブルを受け取り、前記第1のコンパレータと連動して、取得された数のピクセルを受け取り、特定の区画に存在する取得されたピクセル数を対応する区画に対する受け取った閾値ピクセル数と照合して、対応する英数字を認識する第2のコンパレータと、
    を有することを特徴とするコンピュータ実施システム。
  2. 前記画質向上モジュールは、
    英数字が読取可能な各画像の対象領域に対応する画像の領域を識別してトリミングされた画像を取得するROI識別素子と、
    前記ROI識別素子と連動してトリミングされた画像をグレー画像に変換するROIコンバータと、
    前記ROIコンバータと連動してグレー画像を受け取り、ヒストグラム等化をグレー画像に適用し、画質向上された読取可能なアナログ画像を取得するヒストグラムイコライザーと、
    を有することを特徴とする請求項1に記載のコンピュータ実施システム。
  3. 画質向上された読取可能なアナログ画像は、白い画像背景上にある黒い英数字画像からなる、
    ことを特徴とする請求項2に記載のコンピュータ実施システム。
  4. 前記形状認識装置は、適切なアナログ画像内にある対象領域を識別することにより、読取可能な英数字画像を取得する、
    ことを特徴とする請求項1に記載のコンピュータ実施システム。
  5. 前記ディスプレイは、車載ダッシュボードに取り付けられている、
    ことを特徴とする請求項1に記載のコンピュータ実施システム。
  6. 前記デジタルバイナリ画像は、黒い画像背景上にある白い英数字画像を含んでいる、
    ことを特徴とする請求項1に記載のコンピュータ実施システム。
  7. 交通標識から英数字を抽出/認識し、認識された英数字を車載ディスプレイに表示するためのコンピュータ実施方法であって、
    (i)事前に定められている区画割りされた雛形と当該雛形に重ねて配置した英数字を格納するステップと、
    (ii)交通標識の画像を取得するステップと、
    (iii)取得した交通標識の画像からアナログ画像を選択するステップと、
    (iv)読取可能な英数字の画像を取得するための適切なアナログ画像に含まれる形状を認識するステップと、
    (v)英数字の画像の品質を向上させるステップと、
    (vi)受け取った画質向上された読取可能な画像から英数字を認識するステップと、
    を有し、
    前記英数字を認識するステップは、
    受け取った画質向上された読取可能な画像をデジタルバイナリ画像に変換するステップと、
    前記デジタルバイナリ画像をサイズ変更して目的サイズの画像を取得するステップと、
    サイズ変更された画像に対してモルフォロジー演算による細線化処理を適用することにより、細線化された英数字を含むアナログ画像を取得するステップと、
    細線化された英数字を含むアナログ画像をトリミングして英数字を取得するステップと、
    トリミングにより英数字を分離するステップと、
    分離された英数字のサイズを変更して、サイズ変更された英数字を取得するステップと、
    サイズ変更された各英数字を事前に定められている雛形と照合して、異なる雛形区画に存在するピクセル数を取得するステップと、
    特定の区画に存在する取得されたピクセル数を対応する区画に対する閾値ピクセル数と照合して、対応する英数字を認識するステップと、
    を有することを特徴とするコンピュータ実施方法。
  8. 画像の品質を向上させるステップは、
    英数字が読取可能な各画像の対象領域に対応する画像の領域を識別してトリミングされた画像を取得するステップと、
    トリミングされた画像をグレー画像に変換するステップと、
    ヒストグラム等化をグレー画像に適用して画質向上された読取可能なアナログ画像を取得するステップと、
    を有することを特徴とする請求項7に記載のコンピュータ実施方法。
  9. 画質向上された読取可能なアナログ画像を取得するステップでは、白い画像背景上にある黒い英数字画像を取得する、
    ことを特徴とする請求項8に記載のコンピュータ実施方法。
  10. 英数字の形状を認識するステップでは、適切なアナログ画像内にある対象領域を識別する、
    ことを特徴とする請求項7に記載のコンピュータ実施方法。
  11. 認識された英数字を表示するステップでは、認識された英数字を車載ダッシュボードに表示する、
    ことを特徴とする請求項7に記載のコンピュータ実施方法。
  12. 受け取った画質向上された読取可能な画像をデジタルバイナリ画像に変換するステップでは、黒い画像背景上にある白い英数字画像を取得する、
    ことを特徴とする請求項7に記載のコンピュータ実施方法。
JP2015094712A 2015-01-31 2015-05-07 交通標識から英数字を抽出/認識するコンピュータ実施システムおよび方法 Active JP6527013B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
IN326/MUM/2015 2015-01-31
IN326MU2015 2015-01-31

Publications (3)

Publication Number Publication Date
JP2016143408A JP2016143408A (ja) 2016-08-08
JP2016143408A5 JP2016143408A5 (ja) 2018-06-07
JP6527013B2 true JP6527013B2 (ja) 2019-06-05

Family

ID=53040405

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015094712A Active JP6527013B2 (ja) 2015-01-31 2015-05-07 交通標識から英数字を抽出/認識するコンピュータ実施システムおよび方法

Country Status (6)

Country Link
US (1) US9569676B2 (ja)
EP (1) EP3051461B1 (ja)
JP (1) JP6527013B2 (ja)
DK (1) DK3051461T3 (ja)
ES (1) ES2804586T3 (ja)
PT (1) PT3051461T (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6552979B2 (ja) * 2016-02-16 2019-07-31 株式会社日立製作所 画像処理装置、警告装置、画像処理システム、画像処理方法
JP6607139B2 (ja) * 2016-04-26 2019-11-20 トヨタ自動車株式会社 情報収集システム
CN109472202A (zh) * 2018-09-29 2019-03-15 天津大学 一种基于车载摄像头的路面标志检测方法
JP6929823B2 (ja) * 2018-11-16 2021-09-01 株式会社東芝 読取システム、読取方法、プログラム、記憶媒体、及び移動体
US11436713B2 (en) * 2020-02-19 2022-09-06 International Business Machines Corporation Application error analysis from screenshot
CN113449639B (zh) * 2021-06-29 2024-09-06 深圳市海亿达科技股份有限公司 一种物联网网关对仪表的无接触数据采集方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6266442B1 (en) * 1998-10-23 2001-07-24 Facet Technology Corp. Method and apparatus for identifying objects depicted in a videostream
US20030202683A1 (en) * 2002-04-30 2003-10-30 Yue Ma Vehicle navigation system that automatically translates roadside signs and objects
IL162878A0 (en) 2004-07-06 2005-11-20 Hi Tech Solutions Ltd Multi-level neural network based characters identification method and system
WO2006059246A2 (en) * 2004-11-08 2006-06-08 Dspv, Ltd. System and method of enabling a cellular/wireless device with imaging capabilities to decode printed alphanumeric characters
US7274311B1 (en) * 2005-04-20 2007-09-25 Navteq North America, Llc Animated display of traffic information
US20090017765A1 (en) * 2005-11-04 2009-01-15 Dspv, Ltd System and Method of Enabling a Cellular/Wireless Device with Imaging Capabilities to Decode Printed Alphanumeric Characters
US8233670B2 (en) * 2007-09-13 2012-07-31 Cognex Corporation System and method for traffic sign recognition
JP2010205160A (ja) * 2009-03-05 2010-09-16 Denso Corp 速度規制標識認識結果の通知方法
TWI416073B (zh) * 2009-11-16 2013-11-21 Ind Tech Res Inst 移動攝影機對路景影像的處理方法及系統
CN101706873B (zh) 2009-11-27 2012-05-30 东软集团股份有限公司 数字类限制标志的识别方法和装置

Also Published As

Publication number Publication date
EP3051461B1 (en) 2020-04-15
US20160224851A1 (en) 2016-08-04
PT3051461T (pt) 2020-07-14
JP2016143408A (ja) 2016-08-08
EP3051461A1 (en) 2016-08-03
ES2804586T3 (es) 2021-02-08
US9569676B2 (en) 2017-02-14
DK3051461T3 (da) 2020-07-27

Similar Documents

Publication Publication Date Title
JP6527013B2 (ja) 交通標識から英数字を抽出/認識するコンピュータ実施システムおよび方法
US8059868B2 (en) License plate recognition apparatus, license plate recognition method, and computer-readable storage medium
EP2573711A2 (en) Traffic sign detecting method and traffic sign detecing device
CN108073928B (zh) 一种车牌识别方法及装置
EP3036730B1 (en) Traffic light detection
JP2010205160A (ja) 速度規制標識認識結果の通知方法
JP2011216051A (ja) 信号灯識別プログラムおよび信号灯識別装置
CN107292214B (zh) 车道偏离检测方法、装置及车辆
CN106778736A (zh) 一种鲁棒的车牌识别方法及其系统
JP2016143408A5 (ja)
CN104966047A (zh) 一种车牌识别的方法及装置
CN108182691B (zh) 识别限速标志的方法、装置及车辆
Biswas et al. Detection and classification of speed limit traffic signs
CN101369312B (zh) 检测图像中交叉口的方法和设备
CN106022242B (zh) 智能交通系统中的驾驶员接打电话识别方法
Ahmed et al. Traffic sign detection and recognition model using support vector machine and histogram of oriented gradient
Sumi et al. Detection and recognition of road traffic signs: a survey
KR101902291B1 (ko) 차선 보정 시스템 및 그 보정 방법
KR101620425B1 (ko) 주변 환경 정보를 이용한 차선 인식 시스템 및 그 방법
CN106803064B (zh) 一种交通灯快速识别方法
CN113065399A (zh) 基于车载平台的交通标识识别系统
Nienhüser et al. Fast and reliable recognition of supplementary traffic signs
Farhat et al. Real-time recognition of road traffic signs in video scenes
Chincholkar et al. TRAFFIC SIGN BOARD DETECTION AND RECOGNITION FOR AUTONOMOUS VEHICLES AND DRIVER ASSISTANCE SYSTEMS.
Tewari et al. Smart driver assistant

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180413

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180413

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180413

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20180810

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180813

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180828

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190416

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190509

R150 Certificate of patent or registration of utility model

Ref document number: 6527013

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250