JP5910365B2 - 画像ブロックにおける文字の方向を認識する方法及び装置 - Google Patents

画像ブロックにおける文字の方向を認識する方法及び装置 Download PDF

Info

Publication number
JP5910365B2
JP5910365B2 JP2012150259A JP2012150259A JP5910365B2 JP 5910365 B2 JP5910365 B2 JP 5910365B2 JP 2012150259 A JP2012150259 A JP 2012150259A JP 2012150259 A JP2012150259 A JP 2012150259A JP 5910365 B2 JP5910365 B2 JP 5910365B2
Authority
JP
Japan
Prior art keywords
sub
evaluation index
character
image blocks
accuracy evaluation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012150259A
Other languages
English (en)
Other versions
JP2013025800A (ja
Inventor
スヌ・ジュヌ
直井 聡
聡 直井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Publication of JP2013025800A publication Critical patent/JP2013025800A/ja
Application granted granted Critical
Publication of JP5910365B2 publication Critical patent/JP5910365B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/146Aligning or centring of the image pick-up or image-field
    • G06V30/1463Orientation detection or correction, e.g. rotation of multiples of 90 degrees
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/88Image or video recognition using optical means, e.g. reference filters, holographic masks, frequency domain filters or spatial domain filters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/148Segmentation of character regions
    • G06V30/153Segmentation of character regions using recognition of characters or words
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Character Input (AREA)
  • Character Discrimination (AREA)

Description

本発明は、文書画像処理に関し、具体的には、画像ブロックにおける文字の方向を認識する方法及び装置に関する。
ユーザがスキャナなどの設備を用いて各々が複数ページを有する複数文書をスキャニングする時に、理想的なインプットとしては、各文書の各ページが全て正方向(例えば、連続してインプットする時の文書ページの進行方向と水平又は垂直である方向)に置かれている。文書を正方向に置く時に、ユーザは、簡単に該文書を読むことができ、また、スキャニングされた文書画像は、ユーザが方向を調整することを要せずに閲覧され得る。しかし、実際に使用する場合、ユーザは、しばしば、スキャニングしたい文書を正方向0°、逆方向180°、横方向90°及び270°で交代して積み重ねる。そのため、スキャニング時にユーザにより文書の置き方向をページ毎にチェック及び調整する必要があれば、その作業は、繁雑で時間のかかるものである。よって、スキャナには、文書画像方向を自動的に判別する機能が用意されている。スキャニングされた文書画像は、文書画像方向を自動的に判別する機能に基づいて正方向に調整され得る。これにより、ユーザの負担を軽減し、スキャナの使用効率を向上することができる。
従来の文書画像方向自動判別方法の一つとしては、文書画像におけるテキスト行を見つけ出し、四つの所定方向にOCR(Optical Character Recognition)処理をそれぞれ行うことによってこの四つの所定方向に認識された認識文字(Character〔キャラクタ〕)及びそれらに対応する信頼度(Degree of Confidence)又は認識距離を取得し、テキスト行の平均信頼度又は平均認識距離を計算することによるものである。平均信頼度が最大である又は平均認識距離が最小である方向が、テキスト行の方向として判別される。さらに、テキスト行の方向に基づいて文書画像の方向を判断する。ここで、テキスト行の方向とは、テキスト行の正方向を指し、文書画像の方向とは、文書画像の正方向を指す。なお、以下は、文字方向又は文字の方向とは、文字の正方向を指す。
次に、図1及び図2を参照して、上述の従来の文書画像方向自動判別方法における問題点を説明する。
図1は、テキスト行の画像ブロックをOCR処理した後に得られた0°及び180°方向におけるサブ画像ブロック、認識文字及びその信頼度を示す図である。図2は、テキスト行の画像ブロックをOCR処理した後に得られた0°及び180°方向におけるサブ画像ブロック、認識文字及びその認識距離を示す図である。
図1に示すように、テキスト行“TIP AMOUNT”の画像ブロックが入力される。このテキスト行の方向は0°方向とする。また、このテキスト行の画像ブロックを180°回転することによって180°方向のテキスト行の画像ブロックが得られる。なお、90°及び270°方向の処理は0°及び180°方向の処理と同様であるので、ここでは、0°及び180°方向のみを例として説明する。また、0°及び180°方向においてテキスト行の画像ブロックに対してOCR処理をそれぞれ行うことにより、この2つの方向におけるサブ画像ブロック、サブ画像ブロックに対応する認識文字及びその信頼度を取得することができる。同様に、図2に示すように、0°及び180°方向におけるサブ画像ブロック、サブ画像ブロックに対応する認識文字及びその認識距離を取得することもできる。
上述の従来の方法により、図1に示す0°方向における認識文字の平均信頼度は、(0.59+0.36+0.53+0.61+0.61+0.61+0.53+0.72)/8=0.57となり、180°方向における認識文字の平均信頼度は、(0.62+0.58+0.65+0.67+0.60+0.46+0.50+0.58)/8=0.5825となる。0.57は0.5825よりも小さいため、この従来の方法では、180°方向(即ち、平均信頼度が高い方向)がテキスト行の画像ブロックにおける文字の方向であると誤って判断してしまう。また、図2に示す0°及び180°方向における認識文字の平均距離による判断結果も同様である。
上述の誤りが生じる原因の一つとしては、180°方向の画像は0°方向の画像を180°回転することによって得られたものであるということがある。認識文字の中には、「回転されても変わらない文字」又は「回転されても変わらない文字ペア」(以下、それぞれ「回転不変文字」又は「回転不変文字ペア」という)、例えば、N、0、p-d、U-nが多く存在する。同一の画像の正、逆方向における認識結果が同一の回転不変文字である又は同一の回転不変文字ペアに属するのであれば、実際には、対応する信頼度又は認識距離は一致すべきである。なぜなら、正、逆方向における認識結果とも同一の形状による正確な認識結果だからである。言い換えると、平均信頼度又は平均認識距離を利用してテキスト行の方向を判断する従来の方法では、「回転されても変わらない」即ち「回転不変」という特性を考慮しないため、パフォーマンスの低下を引き起こしてしまう。
なお、回転不変文字は、180°自己回転対称性を有する文字を含む。180°自己回転対称性とは、文字が180°回転された後に依然としてそれ自身であることを指し、例えば、“I”、“0”、“Z”、“N”、“S”又は“%”などのような文字〔キャラクタ〕である。このような回転不変文字は、180°回転不変文字とも称される。
また、回転不変文字ペアは、2つの文字を含み、且つこの2つの文字のうち何れか一つは180°回転された後にもう一つと一致し又は高い形状相似度〔類似性〕を有し、例えば、“W-M”、“U-n”又は“P-d”などのような文字である。このような回転不変文字ペアは、180°回転不変文字ペアとも称される。
本発明の目的は、上述の従来技術の問題点に鑑み、画像ブロックにおける文字の方向を正確に認識することができる方法及び装置を提供することにある。
かかる方法は、異なる方向を複数の所定文字方向として前記画像ブロックに対して光学式文字認識処理を行い、前記複数の所定文字方向の各々におけるサブ画像ブロック、前記サブ画像ブロックに対応する認識文字、及び前記認識文字の正確性評価指標値を取得するステップと、互いが180°の関係を有する二つの所定文字方向におけるサブ画像ブロックから、サブ画像ブロックの最小マッチングペアを検索するステップであって、前記最小マッチングペアは、互いが180°の関係を有する前記二つの所定文字方向において位置が対応し、大小〔サイズ〕が同じであり、最小個数のサブ画像ブロックを含む二つのサブ画像ブロックの集合である、ステップと、最小マッチングペアに対応する二つの所定文字方向に一つのサブ画像ブロックがそれぞれあり、且つ前記最小マッチングペアに属する二つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する時に、前記二つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整するステップと、前記調整後のサブ画像ブロックに対応する正確性評価指標値に基づいて前記複数の所定文字方向の各々における累積正確性評価指標値を計算するステップと、前記累積正確性評価指標値に基づいて前記画像ブロックにおける文字の方向を認識するステップと、を含む。
テキスト行の画像ブロックをOCR処理した後に得られた0°及び180°方向におけるサブ画像ブロック、認識文字及びその信頼度を示す図である。 テキスト行の画像ブロックをOCR処理した後に得られた0°及び180°方向におけるサブ画像ブロック、認識文字及びその認識距離を示す図である。 第一実施例による、画像ブロックにおける文字の方向を認識する方法のフローチャートである。 第二実施例による、画像ブロックにおける文字の方向を認識する方法のフローチャートである。 一実施例による、画像ブロックにおける文字の方向を認識する装置のブロック図である。 かかる方法及び装置を実現するためのコンピュータのブロック図である。
以下、添付した図面を参照しながら、本発明の好適な実施形態を詳細に説明する。
図3及び図4を参照して、第一及び第二実施例による、画像ブロックにおける文字の方向を認識する方法のフローチャートを説明する。図3及び図4に示す第一及び第二実施例による、画像ブロックにおける文字の方向を認識する方法は、例えば図6に示すコンピュータ600により行われてもよい。
なお、本開示では、文書画像からテキスト行を既に見つけ出しており、また、文書画像からこのテキスト行を含む画像ブロックを既に分割していると仮定する。言い換えると、本開示の重点は、文書画像においてテキスト行の位置を如何に見出すかでなく、テキスト行を含む画像ブロックにおける文字の方向を如何に正確に認識するかである。
また、ここでは、主に四つの主要方向が所定文字方向として考慮される。この四つの主要方向は、画像ブロックそのものの方向(0°方向)、画像ブロックを180°回転した後の方向、画像ブロックを90°回転した後の方向、及び画像ブロックを270°回転した後の方向である。この四つの主要方向は、画像ブロックの横向きにおける2つの方向及び縦向きにおける2つの方向とも称される。90°及び270°方向は、主に中国語、日本語などのような縦書き可能な文字の場合に用いられる。なお、0°及び180°方向と、90°及び270°方向との処理は同様であるので、ここでは、0°及び180°方向のみを例として説明する。
図3を参照して、第一実施例による、画像ブロックにおける文字の方向を認識する方法のフローチャートを説明する。
第一実施例では、認識結果に信頼度が含まれている場合を例として説明する。まず、0°及び180°方向を所定文字方向として画像ブロックに対してOCR処理を行うことにより、0°及び180°方向におけるサブ画像ブロック、サブ画像ブロックに対応する認識文字及びその信頼度を取得する(ステップS301)。図1には、0°及び180°方向におけるサブ画像ブロック、認識文字及びその信頼度の例が示されており、また、各サブ画像ブロックには、順番号が付けられている。OCR処理による認識結果は、一般的に、分割されているサブ画像ブロック、サブ画像ブロックに対応する認識文字、及び認識文字の正確性評価指標値を含む。正確性評価指標値は、認識文字の正確さの度合いを反映し、通常は、信頼度又は認識距離である。信頼度が大きれば大きいほど、認識文字の正確性が大きく、信頼度が小さければ小さいほど、認識文字の正確性が小さい。
続いて、0°及び180°方向におけるサブ画像ブロックから、サブ画像ブロックの最小マッチングペアを検索する(ステップS302)。最小マッチングペアとは、互いが180°の関係を有する二つの所定文字方向において、位置が対応し、大小〔サイズ〕が同じであり、最小個数のサブ画像ブロックを含む2つのサブ画像ブロックの集合を指す。具体的には、最小マッチングペアは、2つのサブ画像ブロックの集合を含み、この2つのサブ画像ブロックの集合に含まれているサブ画像ブロックは、それぞれ、互いが180°の関係を有する2つの所定文字方向に位置し、且つ、この2つのサブ画像ブロックの集合は、位置が対応し、大小が同じであり、即ち、この2つのサブ画像ブロックの集合のうち何れか一つのサブ画像ブロックの集合は、その所在するテキスト行が180°回転された後に、同最小マッチングペアに属するもう一つのサブ画像ブロックの集合と重なり合うことができる。この2つのサブ画像ブロックの集合に含まれているサブ画像ブロックの個数が最小である時に、この2つのサブ画像ブロックの集合は最小マッチングペアを構成していると称される。例えば、図1では、P1及びN8は、最小マッチングペアを構成する。同様に、P2及びN7、P3及びN6、P4及びN5、P5及びN4、P6及びN3、P7及びN2、P8及びN1は、それぞれ、最小マッチングペアを構成する。最小マッチングペアの検索方法としては、いろいろあるが、例えば、最小マッチングペアの定義に基づいて2つの方向の対応側から最小マッチングペアを順に探してもよい。具体的には、図1に示すように、0°方向の最左側及び180°方向の最右側において一つ目のサブ画像ブロックP1及びN8をそれぞれ見つけ出し、それから、この2つのサブ画像ブロックの大小〔サイズ〕が同じであるかを判断し、もし両者の大小が同じであると判断すれば、P1及びN8は最小マッチングペアであると確定する。続いて、上述の2つの方向に沿って次のサブ画像ブロックP2及びN7を見つけ出し、それから、この2つのサブ画像ブロックの大小が同じであるかを判断し、もし両者の大小が同じであると判断すれば、P2及びN7は最小マッチングペアであると確定する。これによって類推し、互いが180°の関係を有する2つの所定文字方向におけるすべての最小マッチングペアが見つかるまで上述の処理を行う。
上述のように、誤りが現れる原因の一つとしては、文字の回転不変という特性を考慮せず、同一の回転不変文字である又は同一の回転不変文字ペアに属する2つの方向における認識結果に異なる信頼度を与えたことがある。なお、上述のステップS302にて見つかった最小マッチングペアはテキスト行の画像ブロックを更に細分化した結果であると見なしてもよい。
よって、ステップS303では、最小マッチングペアにおいて、対応する2つの所定文字方向にそれぞれ一つのサブ画像ブロックがあり、且つ、この最小マッチングペアに属する2つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属するかどうかを判断する。なお、既知の回転不変文字及び回転不変文字ペアを記録する回転不変文字辞書(データベース)を予め定義してもよい。このような辞書を利用することにより、ステップS303中の判断を行うことができる。ステップS303の判断結果が「いいえ」であれば、最小マッチングペア中のサブ画像ブロックに対応する信頼度に対して調整を行う必要がなく、ステップS305に直接進んで後続の処理を行う。ステップS303の判断結果が「はい」であれば、ステップS304に進み、最小マッチングペア中のサブ画像ブロックに対応する信頼度に対して調整を行う。
最小マッチングペア中のサブ画像ブロックに対応する信頼度についての調整は、主に、回転不変文字及び回転不変文字ペアの回転不変という特性を考慮することにより行われる。具体的には、ステップS304では、最小マッチングペア中の2つのサブ画像ブロックに対応する信頼度を同一の数値に調整する。なお、同一の数値の取り方は、いろいろあるが、ここでは、いくつかの例示的な実施方式を挙げる。
〔方式1〕
最小マッチングペア中の2つのサブ画像ブロックに対応する信頼度は、この2つのサブ画像ブロックに対応する信頼度の平均値に調整する。
図1に示すように、回転不変文字又は回転不変文字ペアは、P1−N8、P2−N7、P5−N4、P7−N2を含む。よって、P1、N8の信頼度は(0.59+0.58)/2=0.585に、P2、N7の信頼度は(0.36+0.50)/2=0.43に、P5、N4の信頼度は(0.61+0.67)/2=0.64に、P7、N2の信頼度は(0.53+0.58)/2=0.555にそれぞれ調整してもよい
〔方式2〕
最小マッチングペア中の2つのサブ画像ブロックに対応する信頼度は、この2つのサブ画像ブロックに対応する信頼度のうち何れか一つに調整する。
例えば、図1の場合、P1、N8の信頼度は0.59に、P2、N7の信頼度は0.36に、P5、N4の信頼度は0.61に、P7、N2の信頼度は0.53にそれぞれ調整してもよい。
ステップS304では、2つの所定文字方向にそれぞれ一つのサブ画像ブロックがあり、且つ、この2つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する最小マッチングペア中の2つのサブ画像ブロックに対応する信頼度を調整し、調整後の信頼度を取得した。その後、処理は、ステップS305に進み、調整後の信頼度に基づいて各所定文字方向における累積信頼度を計算し、また、算出された累積信頼度に基づいてテキスト行の画像ブロックにおける文字の方向を認識する。
累積信頼度は、一つの方向においてテキスト行の画像ブロックの認識結果全体の正確性評価指標値を表すために用いられる。累積信頼度を計算する方式は通常2つある。一つは、一つの所定文字方向における全てのサブ画像ブロックに対応する信頼度の和をこの方向における累積信頼度とする方式である。もう一つは、一つの所定文字方向における全てのサブ画像ブロックに対応する信頼度の算術平均値をこの方向における累積信頼度とする方式である。累積信頼度が高ければ高いほど、その対応する方向における認識結果の正確さが高い。
上述のステップS304では、方式1及び方式2の目的は、ともに、最小マッチングペアの信頼度を調整することにより、文字の回転不変という特性を有する認識文字に、より合理的な信頼度を与えることにある。調整後の結果としては、ともに、最小マッチングペア全体の信頼度が更に合理的になるのである。累積信頼度の計算方法はいろいろあるが、ステップS305では、例示としては、一つの所定文字方向における全ての信頼度の和を累積信頼度とする方法、又は、一つの所定文字方向における平均信頼度を累積信頼度とする方法を採用してもよい。平均信頼度を計算する時に、好ましくは、一つの所定文字方向における最小マッチングペアの数を分母とし、一つの文字方向における全ての信頼度の和を分子とする。この物理的意味は、最小マッチングペア中のサブ画像ブロックの集合を、テキスト行の画像ブロックの分割後に得られた結果の基本単位とし、最小マッチングペア中の2つのサブ画像ブロックの集合全体の信頼度を調整したことであり、理解すべきは、この時に、最小マッチングペアの数を、平均信頼度を計算する時の分母とする方が適切であるということである。もちろん、一つの所定文字方向における全ての信頼度の和を分子とし、一つの所定文字方向におけるサブ画像ブロックの個数を分母とし、平均信頼度を計算してもよい。この場合、各所定文字方向におけるサブ画像ブロックの個数が異なるとすれば、好ましくは、各所定文字方向における平均信頼度を計算する時に、同じ一つの所定文字方向におけるサブ画像ブロックの個数を同じ分母とする。
各所定文字方向のうち累積信頼度が最も高い所定文字方向を、正確な認識結果が所在する方向であると判定すべきことは、明らかである。
一つの所定文字方向における全ての信頼度の平均信頼度を累積信頼度とするものを例とし、上述のステップS304における方式1及び方式2を採用して計算した累積信頼度は、それぞれ次の通りである。
〔方式1〕
0°方向の累積信頼度は、(0.585+0.43+0.53+0.61+0.64+0.61+0.555+0.72)/8=0.585である。
180°方向の累積信頼度は、(0.62+0.555+0.65+0.64+0.60+0.46+0.43+0.585)/8=0.5675である。
〔方式2〕
0°方向の累積信頼度は、(0.59+0.36+0.53+0.61+0.61+0.61+0.53+0.72)/8=0.57である。
180°方向の累積信頼度は、(0.62+0.53+0.65+0.61+0.60+0.46+0.36+0.59)/8=0.5525である。
してみると、上述の2つの方式を採用して信頼度を調整した後には、ともに、0°方向の累積信頼度は180°方向の累積信頼度よりも大きいことが分かる。これにより、より正確な判断結果を得たことがわかる。
図4を参照して、本発明の第二実施例による、画像ブロックにおける文字の方向を認識する方法のフローチャートを説明する。
第二実施例では、認識結果に認識距離が含まれている場合を例として説明する。上述のように、OCR認識結果は、一般的に、分割されているサブ画像ブロック、サブ画像ブロックに対応する認識文字、及び認識文字の正確性評価指標値を含む。正確性評価指標値は、認識文字の正確さの度合いを反映し、通常、信頼度又は認識距離である。上述の第一実施例では、認識結果に信頼度が含まれている場合を例として説明を行ったが、この第二実施例では、認識結果に認識距離が含まれている場合について説明を行う。図2には、0°及び180°方向におけるサブ画像ブロック、認識文字、及び認識距離の例が示されており、また、各サブ画像ブロックには順番号が付けられている。
図2では、従来の方法を採用して計算した0°方向における認識文字の平均認識距離は、(828+1279+934+774+778+940+595)/8=864.625であり、180°方向における認識文字の平均認識距離は、(759+840+704+669+802+1087+1005+790)/8=832である。832は864.625よりも小さいため、従来の方法では、180°方向(即ち、平均認識距離が小さい方向)がテキスト行の画像ブロック中の文字方向であると誤って判断してしまう。このような誤りが生じる原因の一つとしては、文字の回転不変という特性を考慮せず、同一の回転不変文字である又は同一の回転不変文字ペアに属する2つの方向における認識結果に異なる認識距離を与えたことである。
このような問題が生じる原因の一つは、文字の回転不変という特性を考慮しないことにあるが、本開示の実施例が採用する方法は、回転不変文字又は回転不変文字ペアの正確性評価指標値を同一の数値に調整することであるので、上述の第一実施例に述べた思想は、認識結果に信頼度でなく認識距離が含まれている場合にも同様に適用される。即ち、第二実施例による方法は、第一実施例による方法と同様である。
まず、0°及び180°方向を所定文字方向として画像ブロックに対してOCR処理を行い、これにより、0°及び180°方向におけるサブ画像ブロック、サブ画像ブロックに対応する認識文字及びその認識距離を取得する(ステップS401)。
続いて、0°及び180°方向におけるサブ画像ブロックから、サブ画像ブロックの最小マッチングペアを検索する(ステップS402)。例えば、図2には、P1及びN8は最小マッチングペアを構成する。同様に、P2及びN7、P3及びN6、P4及びN5、P5及びN4、P6及びN3、P7及びN2、P8及びN1は、それぞれ、最小マッチングペアを構成する。
ステップS403では、最小マッチングペアに対応する2つの所定文字方向にそれぞれ一つのサブ画像ブロックがあり、且つ、この最小マッチングペアに属する2つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属するかどうかを判断する。なお、既知の回転不変文字及び回転不変文字ペアを記録する回転不変文字辞書(データベース)を予め定義してもよい。このような辞書を利用することにより、ステップS403中の判断を行うことができる。判断結果が「いいえ」であれば、最小マッチングペア中のサブ画像ブロックに対応する認識距離について調整を行う必要がなく、処理はステップS405に直接進んで後続の処理を行う。判断結果が「はい」であれば、処理はステップS404に進み、最小マッチングペア中のサブ画像ブロックに対応する認識距離について調整を行う。
最小マッチングペア中のサブ画像ブロックに対応する認識距離についての調整は、主に、回転不変文字及び回転不変文字ペアの回転不変という特性を考慮することにより行われる。具体的には、最小マッチングペア中の2つのサブ画像ブロックに対応する認識距離を同一の数値に調整する。同一の数値の取り方はいろいろあるが、ここでは、いくつかの例示的な実施方式を挙げる。
〔方式1〕
最小マッチングペア中の2つのサブ画像ブロックに対応する認識距離は、この2つのサブ画像ブロックに対応する認識距離の平均値に調整する。
図2に示すように、回転不変文字又は回転不変文字ペアは、P1−N8、P2−N7、P5−N4、P7−N2を含む。そのため、P1、N8の認識距離は(828+790)/2=809に、P2、N7の認識距離は(1279+1005)/2=1142に、P5、N4の認識距離は(778+669)/2=723.5に、P7、N2の認識距離は(940+840)/2=890に調整してもよい。
〔方式2〕
最小マッチングペア中の2つのサブ画像ブロックに対応する認識距離は、この2つのサブ画像ブロックに対応する認識距離のうち何れか一つに調整する。
例えば、図2の場合、P1、N8の認識距離は828に、P2、N7の認識距離は1279に、P5、N4の認識距離は778に、P7、N2の認識距離は940にそれぞれ調整してもよい。
ステップS404では、2つの所定文字方向にそれぞれ一つのサブ画像ブロックがあり、且つ、この2つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する最小マッチングペア中の2つのサブ画像ブロックに対応する認識距離を調整し、調整後の認識距離を取得した。その後、処理は、ステップS405に進み、調整後の認識距離に基づいて各所定文字方向における累積認識距離を計算し、また、算出された累積認識距離に基づいてテキスト行の画像ブロックにおける文字の方向を認識する。
累積認識距離は、一つの方向においてテキスト行の画像ブロックの認識結果全体の正確性評価指標値を表すために用いられる。累積認識距離を計算する方式は通常2つある。一つは、一つの文字方向における全てのサブ画像ブロックに対応する認識距離の和をこの方向における累積認識距離とする方式である。もう一つは、一つの文字方向における全てのサブ画像ブロックに対応する認識距離の算術平均値をこの方向における累積認識距離とする方式である。累積認識距離が小さければ小さいほど、その対応する方向における認識結果の正確さが高い。
上述のステップS404では、方式1及び方式2の目的は、ともに、最小マッチングペアの認識距離を調整することにより、文字の回転不変という特性を有する認識文字に、より合理的な認識距離を与えることにある。調整後の結果としては、ともに、最小マッチングペア全体の認識距離が更に合理的になるのである。ステップS405では、累積認識距離の計算方法はいろいろあるが、例示としては、一つの文字方向における全ての認識距離の和を累積認識距離とする方法、又は、一つの文字方向における平均認識距離を累積認識距離とする方法を採用してもよい。平均認識距離を計算する時に、好ましくは、一つの文字方向における最小マッチングペアの数を分母とし、一つの文字方向における全ての認識距離の和を分子とする。この物理的意味は、最小マッチングペア中のサブ画像ブロックの集合を、テキスト行の画像ブロックの分割後に得られた結果の基本単位とし、最小マッチングペア中の2つのサブ画像ブロックの集合全体の信頼度を調整したことである。理解すべきは、この時に、最小マッチングペアの数を、平均認識距離を計算する時の分母とする方が適切であるということである。
各所定文字方向のうち累積認識距離が最も小さい文字方向を、正確な認識結果が所在する方向であると判定すべきことは、明らかである。
一つの所定文字方向における平均認識距離を累積認識距離とするものを例とし、上述のステップS404における方式1及び方式2を採用して計算した累積認識距離は、それぞれ次の通りである。
〔方式1〕
0°方向の累積認識距離は、(809+1142+934+774+723.5+789+890+595)/8=832.0625である。
180°方向の累積認識距離は、(759+890+704+723.5+802+1087+1142+809)/8=864.5625である。
〔方式2〕
0°方向の累積認識距離は、(828+1279+934+774+778+789+940+595)/8=864.625である。
180°方向の累積認識距離は、(759+940+704+778+802+1087+1279+828)/8=897.125である。
してみると、上述の2つの方式を採用して認識距離を調整した後には、ともに、0°方向の累積認識距離は180°方向の累積認識距離よりも小さいことが分かる。これにより、より正確な判断結果を得たことがわかる。
次に、図5を参照しながら、一実施例による、画像ブロックにおける文字の方向を認識する装置の構造を説明する。
図5に示すように、本実施例による、画像ブロックにおける文字の方向を認識する装置500は、異なる方向を複数の所定文字方向として画像ブロックに対して光学式文字認識処理を行うことにより、各所定文字方向におけるサブ画像ブロック、サブ画像ブロックに対応する認識文字及びその正確性評価指標値を取得するように構成される光学式文字認識処理ユニット501と、互いが180°の関係を有する2つの所定文字方向におけるサブ画像ブロックから、サブ画像ブロックの最小マッチングペアを検索するように構成される最小マッチングペア検索ユニット502であって、最小マッチングペアは、互いが180°の関係を有する2つの所定文字方向において位置が対応し、大小〔サイズ〕が同じであり、最小個数のサブ画像ブロックを含む2つのサブ画像ブロックの集合である、最小マッチングペア検索ユニット502と、最小マッチングペアに対応する2つの所定文字方向にそれぞれ一つのサブ画像ブロックがあり且つこの最小マッチングペアに属する2つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する場合に、この2つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整するように構成される正確性評価指標値調整ユニット503と、調整後のサブ画像ブロックに対応する正確性評価指標値に基づいて各所定文字方向における累積正確性評価指標値(累積信頼度又は累積認識距離)を計算するように構成される累積正確性評価指標値計算ユニット504と、算出した累積正確性評価指標値に基づいて画像ブロックにおける文字の方向を認識するように構成される文字方向認識ユニット505と、を含む。
本実施例による認識装置500が有する光学式文字認識処理ユニット501、最小マッチングペア検索ユニット502、正確性評価指標値調整ユニット503、累積正確性評価指標値計算ユニット540及び文字方向認識ユニット505中の処理は、上述の方法におけるステップS301−S305、S401−S405中の処理とそれぞれ同様であるので、ここでは、簡潔のために、これらのユニット中の処理についての説明を省略する。
なお、上述の方法及び装置を構成する各モジュール(ステップ)及び各ユニットは、ソフトウェア、ファームウェア、ハードウェア又はそれらの組合せにより実現しもよい。実現するために使用可能な具体的な手段又は方式は、当業者にとって周知であるため、ここでは、その説明を省略する。また、ソフトウェア又はファームウェアにより実現する場合、記憶媒体又はネットワークから専用ハードウェア構造を有するコンピュータ(例えば、図6に示す汎用コンピュータ600)にこのソフトウェア又はファームウェアを構成するプログラムをインストールすることができ、コンピュータは、各種のプログラムがインストールされているときに、対応する各種の機能などを実行することができる。
上述の実施例による方法及び装置によれば、文字の回転不変という特性を考慮し、またこの特性に基づいて認識文字に対応する正確性評価指標値(信頼度又は認識距離)を調整することにより、文書画像の方向を自動的に判別する正確率を向上することができる。
次に、図6を参照して、かかる実施例による方法及び装置を実現するためのコンピュータ600の構造を説明する。
図6に示すように、中央処理ユニット(CPU)601が、リードオンリーメモリ(ROM)602に記憶されているプログラム、又は、記憶部608からランダムアクセスメモリ(RAM)603にロードされているプログラムに基づいて各種の処理を行う。RAM603は、ニーズに応じて、CPU601が各種の処理などを実行するときに必要なデータを記憶してもよい。CPU601、ROM602及びRAM603は、バス604を経由して互いに接続される。また、入力/出力インターフェース605もバス604に接続される。
入力/出力インターフェース605には、入力部606(キーボード、マウスなどを含む。)、出力部分607(表示器例えばCRT、LCD、スピーカーなどを含む。)、記憶部608(ハードディスクなどを含む。)、及び通信部609(ネットワーク接続カード例えばLANカード、モデムなどを含む。)が接続される。通信部609は、ネットワーク例えばインターネットを経由して通信処理を行う。駆動器〔ドライブ〕610がニーズに応じて入力/出力インターフェース605に接続されてもよい。また、ニーズに応じて、取り外し可能な媒体611例えば磁気ディスク、光ディスク、光磁気ディスク、半導体メモリなどを駆動器〔ドライブ〕610にセットすることにより、その中から読み出したコンピュータプログラムを記憶部608にインストールしてもよい。
ソフトウェアにより上述の一連の処理を実現する場合は、ネットワーク例えばインターネット、又は記憶媒体例えば取り外し可能な媒体611から、このソフトウェアを構成するプログラムをインストールしてもよい。
なお、当業者が理解すべきは、このような記憶媒体は、中にプログラムが記憶されており、ユーザにプログラムを提供するよう装置と独立して配られる図6に示すような取り外し可能な媒体611に限定されないということである。取り外し可能な媒体611の例としては、磁気ディスク(フロッピー(登録商標)ディスクを含む。)、光ディスク(CD−ROM及びDVDを含む。)、光磁気ディスク(MD(登録商標)を含む。)、及び半導体メモリを含む。或いは、記憶媒体はROM602、記憶部608に含まれるハードディスクなどであってもよく、それらにはプログラムが記憶されており、且つそれらを含む装置とともにユーザに配られてもよい。
また、本発明は、マシン(例えば、コンピュータ)読取可能な命令コードからなるプログラムプロダクトにも関する。この命令コードは、マシンに読み取られて実行されるときに、上述の実施例による方法を実行することができる。
さらに、上述のマシン読取可能な命令コードからなるプログラムプロダクトを記憶している記憶媒体も本開示に含まれている。このような記憶媒体は、磁気ディスク(フロッピーディスク)、光ディスク、光磁気ディスク、メモリカード、メモリメモリスティックなどを含むが、これらに限定されない。
上述の実施例に記載の画像ブロックにおける文字の方向を認識する方法及び装置並びに関連するプログラムプロダクトは、スキャナなどの画像スキャニング装置に用い、スキャニングされた文書画像における文字の方向を認識するために使用されてもよい。
また、上述の各実施例を含む実施形態に関し、更に以下の付記を開示する。
(付記1)
画像ブロックにおける文字の方向を認識する方法であって、
異なる方向を複数の所定文字方向として前記画像ブロックに対して光学式文字認識処理を行い、前記複数の所定文字方向の各々におけるサブ画像ブロック、前記サブ画像ブロックに対応する認識文字、及び前記認識文字の正確性評価指標値を取得するステップと、
互いが180°の関係を有する二つの所定文字方向におけるサブ画像ブロックから、サブ画像ブロックの最小マッチングペアを検索するステップであって、前記最小マッチングペアは、互いが180°の関係を有する前記二つの所定文字方向において位置が対応し、サイズが同じであり、最小個数のサブ画像ブロックを含む二つのサブ画像ブロックの集合であるステップと、
最小マッチングペアに、二つの所定文字方向においてそれぞれ一つのサブ画像ブロックが属し、且つ前記最小マッチングペアに属する二つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する場合に、前記二つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整するステップと、
前記調整後のサブ画像ブロックに対応する正確性評価指標値に基づいて前記複数の所定文字方向の各々における累積正確性評価指標値を計算するステップと、
前記累積正確性評価指標値に基づいて前記画像ブロックにおける文字の方向を認識するステップと、を含む方法。
(付記2)
前記回転不変文字は、180°自己回転対称性を有する文字を含み、180°自己回転対称性とは、文字が180°回転された後に依然としてそれ自身であることを指し、
前記回転不変文字ペアは、二つの文字を含み、且つ前記二つの文字のうち何れか一つは、180°回転された後にもう一つと一致し又は高い形状相似度を有する、付記1に記載の方法。
(付記3)
前記二つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整することは、前記二つのサブ画像ブロックに対応する正確性評価指標値を、前記二つのサブ画像ブロックに対応する正確性評価指標値の平均値に調整することを含む、付記1に記載の方法。
(付記4)、
前記二つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整することは、前記二つのサブ画像ブロックに対応する正確性評価指標値を、前記二つのサブ画像ブロックに対応する正確性評価指標値のうち何れか一つに調整することを含む、付記1に記載の方法。
(付記5)
前記正確性評価指標値は、信頼度及び認識距離を含み、
前記異なる方向は、前記画像ブロックの横向きにおける二つの方向及び縦向きにおける二つの方向を含む、付記1ないし4の何れか一つに記載の方法。
(付記6)
前記調整後のサブ画像ブロックに対応する正確性評価指標値に基づいて前記複数の所定文字方向の各々における累積正確性評価指標値を計算するステップは、
前記複数の所定文字方向の各々における調整後のサブ画像ブロックに対応する正確性評価指標値の和を、対応する所定文字方向における最小マッチングペアの数で割った結果を、対応する所定文字方向における累積正確性評価指標値にすることを含む、付記1ないし4の何れか一つに記載の方法。
(付記7)
画像ブロックにおける文字の方向を認識する装置であって、
異なる方向を複数の所定文字方向として前記画像ブロックに対して光学式文字認識処理を行い、前記複数の所定文字方向の各々におけるサブ画像ブロック、前記サブ画像ブロックに対応する認識文字、及び前記認識文字の正確性評価指標値を取得する光学式文字認識処理ユニットと、
互いが180°の関係を有する二つの所定文字方向におけるサブ画像ブロックから、サブ画像ブロックの最小マッチングペアを検索する最小マッチングペア検索ユニットであって、前記最小マッチングペアは、互いが180°の関係を有する前記二つの所定文字方向において位置が対応し、サイズが同じであり、最小個数のサブ画像ブロックを含む二つのサブ画像ブロックの集合である最小マッチングペア検索ユニットと、
最小マッチングペアに、二つの所定文字方向においてそれぞれ一つのサブ画像ブロックが属し、且つ前記最小マッチングペアに属する二つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する場合に、前記二つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整する正確性評価指標値調整ユニットと、
前記調整後のサブ画像ブロックに対応する正確性評価指標値に基づいて前記複数の所定文字方向の各々における累積正確性評価指標値を計算する累積正確性評価指標値計算ユニットと、
前記累積正確性評価指標値に基づいて前記画像ブロックにおける文字の方向を認識する文字方向認識ユニットと、を含む装置。
(付記8)
前記正確性評価指標値調整ユニットでは、
最小マッチングペアに、二つの所定文字方向においてそれぞれ一つのサブ画像ブロックが属し、且つ前記最小マッチングペアに属する二つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する場合に、前記二つのサブ画像ブロックに対応する正確性評価指標値を、前記二つのサブ画像ブロックに対応する正確性評価指標値の平均値に調整する、付記7に記載の装置。
(付記9)
前記正確性評価指標値調整ユニットでは、
最小マッチングペアに、二つの所定文字方向においてそれぞれ一つのサブ画像ブロックが属し、且つ前記最小マッチングペアに属する二つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する場合に、前記二つのサブ画像ブロックに対応する正確性評価指標値を、前記二つのサブ画像ブロックに対応する正確性評価指標値のうち何れか一つに調整する、付記7に記載の装置。
(付記10)
前記累積正確性評価指標値計算ユニットでは、
前記複数の所定文字方向の各々における調整後のサブ画像ブロックに対応する正確性評価指標値の和を、対応する所定文字方向における最小マッチングペアの数で割った結果を、対応する所定文字方向における累積正確性評価指標値にする、付記7に記載の装置。
(付記11)
付記7ないし10の何れか一つに記載の装置を含むスキャナ。
(付記12)
コンピュータに、付記1に記載の各ステップを実行させるためのプログラム。
(付記13)
付記12に記載のプログラムを記憶しているコンピュータ読み出し可能な記憶媒体。
以上、本発明の好ましい実施形態を説明したが、本発明はこの実施形態に限定されず、本発明の趣旨を離脱しない限り、本発明に対するあらゆる変更は本発明の技術範囲に属する。

Claims (10)

  1. 画像ブロックにおける文字の方向を認識する方法であって、
    異なる方向を複数の所定文字方向として前記画像ブロックに対して光学式文字認識処理を行い、前記複数の所定文字方向の各々におけるサブ画像ブロック、前記サブ画像ブロックに対応する認識文字、及び前記認識文字の正確性評価指標値を取得するステップと、
    互いが180°の関係を有する二つの所定文字方向におけるサブ画像ブロックから、サブ画像ブロックの最小マッチングペアを検索するステップであって、前記最小マッチングペアは、互いが180°の関係を有する前記二つの所定文字方向において位置が対応し、サイズが同じであり、最小個数のサブ画像ブロックを含む二つのサブ画像ブロックの集合である、ステップと、
    最小マッチングペアに、二つの所定文字方向においてそれぞれ一つのサブ画像ブロックが属し、且つ前記最小マッチングペアに属する二つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する場合に、前記二つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整するステップと、
    前記調整後のサブ画像ブロックに対応する正確性評価指標値に基づいて前記複数の所定文字方向の各々における累積正確性評価指標値を計算するステップと、
    前記累積正確性評価指標値に基づいて前記画像ブロックにおける文字の方向を認識するステップと、を含む方法。
  2. 前記回転不変文字は、180°自己回転対称性を有する文字を含み、180°自己回転対称性とは、文字が180°回転された後に依然としてそれ自身であることを指し、
    前記回転不変文字ペアは、二つの文字を含み、且つ前記二つの文字のうち何れか一つは、180°回転された後にもう一つと一致し又は高い形状相似度を有する、請求項1に記載の方法。
  3. 前記二つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整することは、前記二つのサブ画像ブロックに対応する正確性評価指標値を、前記二つのサブ画像ブロックに対応する正確性評価指標値の平均値に調整することを含む、請求項1に記載の方法。
  4. 前記二つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整することは、前記二つのサブ画像ブロックに対応する正確性評価指標値を、前記二つのサブ画像ブロックに対応する正確性評価指標値のうち何れか一つに調整することを含む、請求項1に記載の方法。
  5. 前記調整後のサブ画像ブロックに対応する正確性評価指標値に基づいて前記複数の所定文字方向の各々における累積正確性評価指標値を計算するステップは、
    前記複数の所定文字方向の各々における調整後のサブ画像ブロックに対応する正確性評価指標値の和を、対応する所定文字方向における最小マッチングペアの数で割った結果を、対応する所定文字方向における累積正確性評価指標値にすることを含む、請求項1に記載の方法。
  6. 画像ブロックにおける文字の方向を認識する装置であって、
    異なる方向を複数の所定文字方向として前記画像ブロックに対して光学式文字認識処理を行い、前記複数の所定文字方向の各々におけるサブ画像ブロック、前記サブ画像ブロックに対応する認識文字、及び前記認識文字の正確性評価指標値を取得する光学式文字認識処理ユニットと、
    互いが180°の関係を有する二つの所定文字方向におけるサブ画像ブロックから、サブ画像ブロックの最小マッチングペアを検索する最小マッチングペア検索ユニットであって、前記最小マッチングペアは、互いが180°の関係を有する前記二つの所定文字方向において位置が対応し、サイズが同じであり、最小個数のサブ画像ブロックを含む二つのサブ画像ブロックの集合である、最小マッチングペア検索ユニットと、
    最小マッチングペアに、二つの所定文字方向においてそれぞれ一つのサブ画像ブロックが属し、且つ前記最小マッチングペアに属する二つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する場合に、前記二つのサブ画像ブロックに対応する正確性評価指標値を同一の数値に調整する正確性評価指標値調整ユニットと、
    前記調整後のサブ画像ブロックに対応する正確性評価指標値に基づいて前記複数の所定文字方向の各々における累積正確性評価指標値を計算する累積正確性評価指標値計算ユニットと、
    前記累積正確性評価指標値に基づいて前記画像ブロックにおける文字の方向を認識する文字方向認識ユニットと、を含む装置。
  7. 前記正確性評価指標値調整ユニットでは、
    最小マッチングペアに、二つの所定文字方向においてそれぞれ一つのサブ画像ブロックが属し、且つ前記最小マッチングペアに属する二つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する場合に、前記二つのサブ画像ブロックに対応する正確性評価指標値を、前記二つのサブ画像ブロックに対応する正確性評価指標値の平均値に調整する、請求項6に記載の装置。
  8. 前記正確性評価指標値調整ユニットでは、
    最小マッチングペアに、二つの所定文字方向においてそれぞれ一つのサブ画像ブロックが属し、且つ前記最小マッチングペアに属する二つのサブ画像ブロックに対応する認識文字が同一の回転不変文字である又は同一の回転不変文字ペアに属する場合に、前記二つのサブ画像ブロックに対応する正確性評価指標値を、前記二つのサブ画像ブロックに対応する正確性評価指標値のうち何れか一つに調整する、請求項6に記載の装置。
  9. 前記累積正確性評価指標値計算ユニットでは、
    前記複数の所定文字方向の各々における調整後のサブ画像ブロックに対応する正確性評価指標値の和を、対応する所定文字方向における最小マッチングペアの数で割った結果を、対応する所定文字方向における累積正確性評価指標値にする、請求項6に記載の装置。
  10. 請求項6ないし9の何れか一つに記載の装置を含むスキャナ。
JP2012150259A 2011-07-20 2012-07-04 画像ブロックにおける文字の方向を認識する方法及び装置 Active JP5910365B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201110209833.5 2011-07-20
CN201110209833.5A CN102890784B (zh) 2011-07-20 2011-07-20 识别图像块中文字的方向的方法和装置

Publications (2)

Publication Number Publication Date
JP2013025800A JP2013025800A (ja) 2013-02-04
JP5910365B2 true JP5910365B2 (ja) 2016-04-27

Family

ID=46679100

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012150259A Active JP5910365B2 (ja) 2011-07-20 2012-07-04 画像ブロックにおける文字の方向を認識する方法及び装置

Country Status (5)

Country Link
US (1) US8787674B2 (ja)
EP (1) EP2549407B1 (ja)
JP (1) JP5910365B2 (ja)
KR (1) KR101345925B1 (ja)
CN (1) CN102890784B (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106778733A (zh) * 2015-11-25 2017-05-31 中兴通讯股份有限公司 调整图片文字的显示方法及装置
US10210384B2 (en) * 2016-07-25 2019-02-19 Intuit Inc. Optical character recognition (OCR) accuracy by combining results across video frames
CN108345827B (zh) * 2017-01-24 2021-11-30 富士通株式会社 识别文档方向的方法、系统和神经网络
CN107220640B (zh) * 2017-05-23 2020-07-17 广州绿怡信息科技有限公司 字符识别方法、装置、计算机设备和计算机可读存储介质
CN114842464A (zh) * 2022-05-13 2022-08-02 北京百度网讯科技有限公司 图像方向识别方法、装置、设备、存储介质及程序产品

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5031225A (en) * 1987-12-09 1991-07-09 Ricoh Company, Ltd. Character recognition method for recognizing character in an arbitrary rotation position
JPH04195485A (ja) 1990-11-28 1992-07-15 Hitachi Ltd 画像情報入力装置
JP3251959B2 (ja) * 1991-10-17 2002-01-28 株式会社リコー 画像形成装置
JP3727971B2 (ja) * 1995-02-01 2005-12-21 キヤノン株式会社 文書処理装置、及び文書処理方法
JPH08293000A (ja) * 1995-04-21 1996-11-05 Canon Inc 画像処理装置及び方法
JPH09282413A (ja) 1996-04-16 1997-10-31 Canon Inc 文書方向獲得方法とその装置並びに文字認識方法とその装置
JP3728040B2 (ja) * 1996-12-27 2005-12-21 キヤノン株式会社 画像形成装置及び方法
JPH11213089A (ja) * 1998-01-23 1999-08-06 Canon Inc 画像処理装置及びその方法
US6151423A (en) 1998-03-04 2000-11-21 Canon Kabushiki Kaisha Character recognition with document orientation determination
US6804414B1 (en) * 1998-05-01 2004-10-12 Fujitsu Limited Image status detecting apparatus and document image correcting apparatus
JPH11338974A (ja) * 1998-05-28 1999-12-10 Canon Inc 文書処理方法及び装置、記憶媒体
TW457458B (en) * 1998-06-01 2001-10-01 Canon Kk Image processing method, device and storage medium therefor
US6993205B1 (en) * 2000-04-12 2006-01-31 International Business Machines Corporation Automatic method of detection of incorrectly oriented text blocks using results from character recognition
JP2002125114A (ja) 2000-10-13 2002-04-26 Ricoh Co Ltd 画像読取装置
JP2004013704A (ja) * 2002-06-10 2004-01-15 Sumitomo Denko Systems Kk 文字認識処理における原稿方向判別方法
JP2004272798A (ja) * 2003-03-11 2004-09-30 Pfu Ltd 画像読み取り装置
US8200043B2 (en) 2008-05-01 2012-06-12 Xerox Corporation Page orientation detection based on selective character recognition
US8023770B2 (en) * 2008-05-23 2011-09-20 Sharp Laboratories Of America, Inc. Methods and systems for identifying the orientation of a digital image
CN101833648B (zh) * 2009-03-13 2012-05-02 汉王科技股份有限公司 文本图像的校正方法
JP4927122B2 (ja) * 2009-06-15 2012-05-09 シャープ株式会社 画像処理方法、画像処理装置、画像形成装置、プログラムおよび記録媒体

Also Published As

Publication number Publication date
CN102890784A (zh) 2013-01-23
CN102890784B (zh) 2016-03-30
US20130022271A1 (en) 2013-01-24
US8787674B2 (en) 2014-07-22
EP2549407A3 (en) 2014-06-04
JP2013025800A (ja) 2013-02-04
KR20130011921A (ko) 2013-01-30
EP2549407A2 (en) 2013-01-23
EP2549407B1 (en) 2020-06-10
KR101345925B1 (ko) 2013-12-27

Similar Documents

Publication Publication Date Title
US9201879B2 (en) Method, apparatus and system for generating a feature vector
JP5910365B2 (ja) 画像ブロックにおける文字の方向を認識する方法及び装置
JP6900164B2 (ja) 情報処理装置、情報処理方法及びプログラム
US9141853B1 (en) System and method for extracting information from documents
US10062007B2 (en) Apparatus and method for creating an image recognizing program having high positional recognition accuracy
US11475688B2 (en) Information processing apparatus and information processing method for extracting information from document image
US10262202B2 (en) Form recognition method, form recognition device, and non-transitory computer-readable medium
CN110674396A (zh) 文本信息处理方法、装置、电子设备及可读存储介质
JP2010044485A (ja) 文字認識装置、文字認識プログラム、および文字認識方法
US9519404B2 (en) Image segmentation for data verification
US10331717B2 (en) Method and apparatus for determining similar document set to target document from a plurality of documents
US20150169971A1 (en) Character recognition using search results
JP5983075B2 (ja) 画像ブロック中のキャラクタの向きを識別する方法および装置
JP6247103B2 (ja) 帳票項目認識方法、帳票項目認識装置及び帳票項目認識プログラム
US20180189562A1 (en) Character recognition apparatus, character recognition method, and computer program product
JP2020095374A (ja) 文字認識システム、文字認識装置、プログラム及び文字認識方法
JP5712415B2 (ja) 帳票処理システム及び帳票処理方法
WO2020044537A1 (ja) 画像照合装置、画像照合方法、及びプログラム
JP7421384B2 (ja) 情報処理装置、修正候補表示方法、及びプログラム
JP4221960B2 (ja) 帳票識別装置及びその識別方法
JP5272664B2 (ja) 情報処理装置、画像検索方法、及びプログラム
JP2013097590A (ja) 文字認識用コンピュータプログラム、文字認識装置及び文字認識方法
JP6663329B2 (ja) 文字認識装置、及び、文字認識方法
JP2021009659A (ja) 情報処理装置及びプログラム
JP2004234406A (ja) 帳票処理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150406

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160301

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160314

R150 Certificate of patent or registration of utility model

Ref document number: 5910365

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350