JP2020173802A - 画像ブロックの認識結果の補正方法及び装置、並びに記憶媒体 - Google Patents

画像ブロックの認識結果の補正方法及び装置、並びに記憶媒体 Download PDF

Info

Publication number
JP2020173802A
JP2020173802A JP2020066804A JP2020066804A JP2020173802A JP 2020173802 A JP2020173802 A JP 2020173802A JP 2020066804 A JP2020066804 A JP 2020066804A JP 2020066804 A JP2020066804 A JP 2020066804A JP 2020173802 A JP2020173802 A JP 2020173802A
Authority
JP
Japan
Prior art keywords
tree
recognition result
nodes
candidate matrix
image block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020066804A
Other languages
English (en)
Other versions
JP7487532B2 (ja
Inventor
シア・シアオジエ
Xiao Jie Xia
俊 孫
Shun Son
俊 孫
ユィ・シアオイ
Xiaoyi Yu
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Publication of JP2020173802A publication Critical patent/JP2020173802A/ja
Application granted granted Critical
Publication of JP7487532B2 publication Critical patent/JP7487532B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/148Segmentation of character regions
    • G06V30/153Segmentation of character regions using recognition of characters or words

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Character Discrimination (AREA)
  • Character Input (AREA)
  • Image Analysis (AREA)

Abstract

【課題】画像ブロックの認識結果の補正方法及び装置、並びに記憶媒体を提供する。【解決手段】該方法は、認識結果の候補行列を取得するステップであって、該候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す、ステップと、木における探索すべきノードの範囲を決定するステップであって、該木は、該木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される、ステップと、決定された範囲内の全てのノードに含まれる内容と候補行列とのマッチングを行うことで、認識結果を補正するステップと、を含む。【選択図】図3

Description

本開示は、画像補正の分野に関し、具体的には、画像ブロックの認識結果の補正方法に関する。
OCR(光学文字認識)技術は、例えば郵便サービス、金融、保険、課税などの産業で広く使用されており、産業及び生活の効率を改善するための利便性をもたらしている。自動的に生成された正確なテキスト認識結果は、より多くの情報を提供し、労力を節約することができる。一般的なOCRエンジンを用いて、前処理後の元のテキスト画像を認識し、概略的な認識結果を取得することができる。
以下は、本発明の態様を基本的に理解させるために、本発明の簡単な概要を説明する。なお、この簡単な概要は、本発明を網羅的な概要ではなく、本発明のポイント又は重要な部分を意図的に特定するものではなく、本発明の範囲を意図的に限定するものではなく、後述するより詳細的な説明の前文として、単なる概念を簡単な形で説明することを目的とする。
本発明は、画像ブロックの認識結果の補正方法及び装置、並びに記憶媒体を提供する。
本発明の1つの態様では、画像ブロックの認識結果の補正方法であって、前記認識結果の候補行列を取得するステップであって、前記候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す、ステップと、木における探索すべきノードの範囲を決定するステップであって、前記木は、前記木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される、ステップと、決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うことで、前記認識結果を補正するステップと、を含む、方法を提供する。
本発明のもう1つの態様では、画像ブロックの認識結果の補正装置であって、前記認識結果の候補行列を取得する取得部であって、前記候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す、取得部と、木における探索すべきノードの範囲を決定する決定部であって、前記木は、前記木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される、決定部と、決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うことで、前記認識結果を補正する補正部と、を含む、装置を提供する。
本発明の他の態様では、対応するコンピュータプログラムコード、コンピュータ読み取り可能な記憶媒体、及びコンピュータプログラムプロダクトをさらに提供する。
本発明に係る画像ブロックの認識結果の補正方法及び装置によれば、画像認識結果の補正を改善し、補正速度を向上させることができるため、画像認識精度を改善することができる。
以下は図面を参照しながら本発明の好ましい実施形態を詳細に説明することにより、本発明の上記及び他の利点はより明確になる。
本開示の上記及び他の利点及び特徴を理解させるために、以下は図面を参照しながら本開示の具体的な実施形態を詳細に説明する。図面及び以下の詳細な説明は本明細書に含まれ、本明細書の一部を構成する。同一の機能及び構造を有する素子は同一の符号で示される。なお、これらの図面は単なる本開示の典型的な例を説明するためのものであり、本開示の範囲を限定するものではない。
オーバーセグメンテーション法を用いて得られた住所画像における各文字の部分の一例を示す図である。 ビームサーチアルゴリズムを用いて得られた概略的な認識結果の一例を示す図である。 OCRエンジンにより得られた複数の候補を有する認識結果行列の一例を示す図である。 本発明の1つの実施形態に係る画像ブロックの認識結果の補正方法のフローチャートである。 BK木の構造を示す模式図である。 BK木における特定の探索範囲の決定方法を示す模式図である。 本発明の1つの実施形態に係る画像ブロックの認識結果の補正装置を示すブロック図である。 本発明の実施形態に係る方法及び/又は装置を実現可能な汎用パーソナルコンピュータの例示的な構成を示すブロック図である。
以下、図面を参照しながら本発明の例示的な実施例を詳細に説明する。説明の便宜上、明細書には実際の実施形態の全ての特徴が示されていない。なお、実際に実施する際に、開発者の具体的な目標を実現するために、特定の実施形態を変更してもよい、例えばシステム及び業務に関する制限条件に応じて実施形態を変更してもよい。また、開発作業が非常に複雑であり、且つ時間がかかるが、本公開の当業者にとって、この開発作業は単なる例の作業である。
なお、本発明を明確にするために、図面には本発明に密に関連する装置の構成要件及び/又は処理のステップのみが示され、本発明と関係のない細部が省略されている。
上述したように、OCRエンジンを用いることで、画像の概略的な認識結果を取得することができる。しかし、OCRエンジンの性能により、認識結果は通常正確ではない。従って、より正確な認識結果を取得し、労力を節約し、認識結果を自動的に補正することが望ましい。
本発明は、画像認識精度を改善できる画像における例えばテキストのOCR認識結果の補正方法を提供する。特に、本発明に係る方法は、距離メトリックを用いて認識結果と既存テキストとの類似性を比較するとともに、補正プロセスにおいて大きなテキストライブラリにおける探索プロセスを加速させる。
簡単に言えば、本発明に係る補正方法は、次の3つの段階を含む。(1)OCRエンジンにより例えば住所の画像の認識結果を取得し、該住所画像を複数の画像ブロックに分割し、各画像ブロックについて複数の文字候補を提供する。(2)既存の正確なテキストライブラリを記憶するための木(木構造)を構築する。(3)構築された木から最適なマッチした認識テキストを探索し、最終的な補正結果を取得する。
以下は、図3を参照しながら、本発明の1つの実施形態に係る方法300を詳細に説明する。
方法300はステップ301で開始し、画像ブロックの認識結果の候補行列を取得する。ここで、該候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す。
具体的には、この実施形態では、一般的なOCRエンジンを用いて画像の概略的な認識結果を取得してもよい。OCRエンジンは、オーバーセグメンテーション法及びビームサーチ(beam−Search)法に基づいて設計される。本発明を容易に理解させるために、以下はこの2つの方法の基本的な原理を簡単に説明する。
(オーバーセグメンテーション法)
オーバーセグメンテーションとは、文字列を原始言語フラグメントに分割し、原始言語フラグメントを結合文字認識及びコンテキストの文字に組み合わせることを意味する。オーバーセグメンテーションは、通常、連結成分ラベリング及びマージ文字分割(merged characters segmentation)の2つのステップを含む。まず、住所画像に対してノイズ低減、正規化、2値化などの全処理を行う。次に、該住所画像の連結成分を取得してもよい。図1Aに示すように、これらの連結成分及び輪郭線を分析することで、オーバーセグメンテーション法を用いて住所画像における各文字の部分を取得することができる。各セグメントは、例えば訓練された畳み込みニューラルネットワーク(CNN)モデルにより認識されてもよい。
(ビームサーチアルゴリズム)
住所画像の全てのセグメント及びCNNモデルの対応する認識結果が取得された後に、ビームサーチアルゴリズムにより、組み合わせ結果及び最終的な結果を取得してもよい。ビームサーチアルゴリズムは、経路評価及び探索のアルゴリズムである。経路評価関数は、ベイズ決定に基づくものであり、文字分類、幾何学的コンテキスト及び言語コンテキストを含む複数のコンテキストを統合する。様々な組み合わせは、異なる経路に対応する。改良されたビームサーチアルゴリズムは、最大の経路評価スコアを有する経路を効率的に見つけるように、プルーニング(pruning)判定を2つの段階に分ける。図1Bに示すように、最後に最大のスコアを有する経路により最終的な認識結果を取得する。
図2は以上の方法により得られたステップ301における候補行列の一例を示している。各画像ブロックについて、図2に示す行列における各列に対応する複数の文字候補を提供する。
好ましくは、候補行列の各列における各候補は、信頼度の高い順にランク付けされている。
次に、ステップ302において、木における探索すべきノードの範囲を決定する。ここで、木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて、該木を構築する。
具体的には、本実施形態では、既存の正確な真値テキストを記憶するために、例えばBK木構造に基づいて木を構築してもよい。
なお、様々なOCR応用シナリオでは、通常、既存のドメイン知識又は真値テキスト候補の収集は簡単である。例えば、タスクが請求書、領収書における会社名の認識である場合、税務機関から全ての登録された合法的会社名を取得することができる。タスクが宅配便伝票、封筒における住所の認識である場合、官庁の郵政システムから全ての正確な住所項目を取得することができる。
本実施形態では、取得されたドメイン知識を用いて、好ましくは、最長共通部分列(Longest Common Subsequence:LCS)に基づいてBK木構造を構築するとともに、BK木に基づく探索速度を加速させてもよい。本発明を容易に理解させるために、以下はB木の基本原理を簡単に説明する。
(BK木)
BK木は、Walter Austin Burkhard及びRobert M. Kellerにより提案されたため、Burkhard−Keller Treeとも称される。BK木は、主にスペル訂正、ファジイ(fuzzy)マッチング、及び辞書における文字列の類似性の比較などに使用される。通常、距離メトリックd(x、y)を用いて、BK木の隣接ノード間の距離を計算する。BK木で最も一般的に使用される距離メトリックは、レーベンシュタイン(levenshtein)距離である。該距離は、編集距離とも称され、即ち2つの文字シーケンスを比較するための文字列距離メトリックである。編集距離は、単一文字により構成された2つの文字列を挿入、削除又は置換により相互に変換する最小のステップ数を表す。
2つの文字列a、b(文字の長さはそれぞれ|a|及び|b|である)間の編集距離EDa,b(|a|,|b|)は下記の式で示されてもよい。
Figure 2020173802
BK木を構築する際に、まず、1つの根ノードを選択する。該根ノードは任意の要素aであってもよい。次に、挿入すべきノードと該根ノードとの間の距離を計算する。ノードの下のk層目の部分木(subtree)の全ての要素と該ノード要素との間の距離はkである。図4は簡単なBK木の構造を示している。
好ましい態様では、例えば最長共通部分列を用いてBK木を構築してもよい。本発明を容易に理解させるために、以下は最長共通部分列を簡単に説明する。
(最長共通部分列)
LCS(最長共通部分列)は、列の集合(通常は2つの列からなる集合)の最長共通部分列を見つけ出すためのものである。最長共通文字列(Longest Common Substring)とは異なり、連続した部分列の元の列における位置は必ずしも同一ではない。この態様では、LCSは、BK木構造における任意のノード要素と特定の文字列とを比較するために用いられる。
例えば、2つの列は、X=(x,x,…,x)及びY=(y,y,…,y)と定義される。Xのプレフィックスは、X1,2,…,mと示されてもよく、Yのプレフィックスは、Y1,2,…,nと示されてもよい。LCS(X,Y)は、プレフィックスがX及びYの得られた最長共通部分列の集合を表す。該集合は、下記の式により計算されてもよい。
Figure 2020173802
及びYの最長共通部分列を見つけ出すために、まず要素xとyとを比較する。両者が等しい場合、LCS(X,Y)はLCS(Xi−1,Yj−1)+xと示されてもよい。両者が等しくない場合、LCS(X,Y)はLCS(X,Yj−1)とLCS(Xi−1,Y)のうち大きい方である。
2次元の数列C[i][j]でLCS(X,Y)を記録する。C[i][j]の再帰式は次のように示されてもよい。
Figure 2020173802
上述したように、既存の知識ドメインのOCR応用シナリオを収集してもよい。日本の住所の手書きの認識の例では、まず、日本官庁の郵便局の全ての主要住所を真値テキストの住所ライブラリとして収集する。これらの住所は、例えば「北海道札幌市中央区円山西町」、「埼玉県所沢市金山町」、「熊本県玉名郡玉東町原倉」などの様々な住所項目である。次に、任意の1つの住所列を根ノードとして選択する。次に、次の挿入された住所列と根ノードとの間のLCS距離を計算する。このように、住所ライブラリにおける全ての住所項目を順次挿入して最終的なBK木を構成する。
以下は、ステップ302のBK木における探索範囲の決定方法を詳細に説明する。
上述したように、元のOCRエンジンは、認識されたテキスト画像を複数のブロックに分割し、各ブロックは複数の認識候補を有する。kは認識候補の数を表す。k個の候補のうち、候補文字のランク(rank)が高いほど、正確である可能性が大きくなる。
2次元の数列C[i][j]を用いて、複数の候補を有する認識結果行列AとBK木における特定の文字列bとの間の重み付けLCS距離を記録する。再帰式は次のようになる。
Figure 2020173802
Figure 2020173802
ここで、f(i,j)はLCS長さの重みである。式(4)及び(5)により、認識結果行列Aにマッチングの取れた文字があり、且つ該文字の可能性が高い場合、LCS長さの重みは1に近くなる。一方、マッチングの取れた文字がない場合、LCS長さの重みは非常に低くなり、一例として、−999999という値であってもよい。
元のOCRエンジンの各認識ブロックの複数の文字候補認識結果が取得された後に、BK木の特定範囲内のノードにおいて最適なマッチした文字列を、補正結果として探索してもよい。図5は、BK木における特定の探索範囲の決定方法を示している。
具体的には、この態様では、探索範囲の決定は以下のステップを含む。(1)探索距離閾値nを設定し、ここで、nは正整数、例えば5である。(2)候補認識結果行列AとBK木の根ノードとの間のLCS長さを計算する。(3)該根ノードの全ての子ノードの親ノードとその子ノードとの間のLCS長さd(A,B)≧n−dのノードを探索範囲に追加する。
なお、nを設定することで、探索プロセスにおいて多くのノード及び部分木が除去され、検索プロセス全体の走査範囲は全てのノードの5%〜8%を超えていないため、その効率は力まかせ探査(Brute−force search)よりも遥かに高い。
最後に、ステップ303において、決定された範囲内の全てのノードに含まれる内容と該候補行列とのマッチングを行うことで、該認識結果を補正する。
具体的には、この実施形態では、BK木が終了するまで、上記の探索範囲の決定ステップ(2)、(3)を繰り返す。次に、探索結果の候補を並び替え、LCS長さが大きいほど、対応するマッチ度が高くなる。このように、補正結果である最適なマッチしたテキストを見つけることができる。
上記の方法は、コンピュータ実行可能なプログラムにより完全に実現されてもよいし、ハードウェア及び/又はファームウェアを用いて部分的又は完全に実現されてもよい。ハードウェア及び/又はファームウェアにより実現される場合、又はコンピュータ実行可能なプログラムがプログラムを実行可能なハードウェア装置にロードされる場合、後述する画像ブロックの認識結果の補正装置が実現される。以下は、上述した詳細な内容を省略し、これらの装置の概要を説明する。なお、これらの装置は上記の方法を実行することができるが、上記方法は後述する装置の構成部を採用し、或いは構成部により実行されるものに限定されない。
図6は本発明の1つの実施形態に係る画像ブロックの認識結果の補正装置を示している。装置600は、取得部601、決定部602及び補正部603を含む。取得部601は、画像ブロックの認識結果の候補行列を取得する。ここで、該候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す。決定部602は、木における探索すべきノードの範囲を決定する。ここで、該木は、該木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される。補正部603は、決定された範囲内の全てのノードに含まれる内容と該候補行列とのマッチングを行うことで、該認識結果を補正する。
図6に示す画像ブロックの認識結果の補正装置600は図3に示す方法300に対応する。よって、画像ブロックの認識結果の補正装置600における各部の詳細は、図3における画像ブロックの認識結果の補正方法300について説明において既に詳細に説明され、ここでその説明を省略する。
上記処理及び装置はソフトウェア及び/又はファームウェアにより実現されてもよい。ソフトウェア及び/又はファームウェアにより実施されている場合、記憶媒体又はネットワークから専用のハードウェア構成を有するコンピュータ(例えば図7示されている汎用パーソナルコンピュータ700)に上記方法を実施するためのソフトウェアを構成するプログラムをインストールしてもよく、該コンピュータは各種のプログラムがインストールされている場合は各種の機能などを実行できる。
図7は本発明の実施形態に係る方法及び/又は装置を実現可能な汎用パーソナルコンピュータの例示的な構成を示すブロック図である。図7において、中央処理部(CPU)701は、読み出し専用メモリ(ROM)702に記憶されているプログラム、又は記憶部708からランダムアクセスメモリ(RAM)703にロードされたプログラムにより各種の処理を実行する。RAM703には、必要に応じて、CPU701が各種の処理を実行するに必要なデータが記憶されている。CPU701、ROM702、及びRAM703は、バス704を介して互いに接続されている。入力/出力インターフェース705もバス604に接続されている。
入力部706(キーボード、マウスなどを含む)、出力部707(ディスプレイ、例えばブラウン管(CRT)、液晶ディスプレイ(LCD)など、及びスピーカなどを含む)、記憶部708(例えばハードディスクなどを含む)、通信部709(例えばネットワークのインタフェースカード、例えばLANカード、モデムなどを含む)は、入力/出力インターフェース705に接続されている。通信部709は、ネットワーク、例えばインターネットを介して通信処理を実行する。必要に応じて、ドライバ710は、入力/出力インターフェース705に接続されてもよい。取り外し可能な媒体711は、例えば磁気ディスク、光ディスク、光磁気ディスク、半導体メモリなどであり、必要に応じてドライバ710にセットアップされて、その中から読みだされたコンピュータプログラムは必要に応じて記憶部708にインストールされている。
ソフトウェアにより上記処理を実施する場合、ネットワーク、例えばインターネット、又は記憶媒体、例えば取り外し可能な媒体711を介してソフトウェアを構成するプログラムをインストールする。
なお、これらの記憶媒体は、図7に示されている、プログラムを記憶し、機器と分離してユーザへプログラムを提供する取り外し可能な媒体711に限定されない。取り外し可能な媒体711は、例えば磁気ディスク(フロッピーディスク(登録商標)を含む)、光ディスク(光ディスク−読み出し専用メモリ(CD−ROM)、及びデジタル多目的ディスク(DVD)を含む)、光磁気ディスク(ミニディスク(MD)(登録商標))及び半導体メモリを含む。或いは、記憶媒体は、ROM702、記憶部708に含まれるハードディスクなどであってもよく、プログラムを記憶し、それらを含む機器と共にユーザへ提供される。
本発明は、対応するコンピュータプログラムコード、機器が読み取り可能な命令コードが記憶されているコンピュータプログラムプロダクトをさらに提供する。該命令コードは、機器により読み取られ、実行される際に、上記の本発明の実施形態に係る方法を実行することができる。
それに応じて、本発明は、機器が読み取り可能な命令コードを含むプログラムプロダクトが記録されている記憶媒体をさらに含む。該記憶媒体は、フロッピーディスク、光ディスク、光磁気ディスク、メモリカード、メモリスティック等を含むが、これらに限定されない。
また、上述の各実施例を含む実施形態に関し、更に以下の付記を開示する。
(付記1)
画像ブロックの認識結果の補正方法であって、
前記認識結果の候補行列を取得するステップであって、前記候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す、ステップと、
木における探索すべきノードの範囲を決定するステップであって、前記木は、前記木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される、ステップと、
決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うことで、前記認識結果を補正するステップと、を含む、方法。
(付記2)
前記候補行列の各列における各候補は、信頼度の高い順にランク付けされる、付記1に記載の方法。
(付記3)
前記木は、LCS(最長共通部分列)に基づいて構築され、
前記差のメトリックは、LCS長さである、付記1又は2に記載の方法。
(付記4)
前記木における探索すべきノードの範囲を決定するステップは、
前記木における根ノードに含まれる内容と前記候補行列との重み付けLCS長さと、所定閾値との差分値を計算するステップと、
前記差分値以上のLCS長さを有する子ノードを前記範囲に含ませるステップと、を含む、付記3に記載の方法。
(付記5)
マッチングが取れた場合、前記重み付けLCS長さの重みは、対応する画像ブロックについて選択された候補の数、及び前記候補行列におけるマッチングすべき候補の選択された候補の数のうちのランクに基づくものである、付記4に記載の方法。
(付記6)
マッチングが取れていない場合、前記重みは、負の無限大である、付記4に記載の方法。
(付記7)
前記決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うステップは、
前記範囲内の各ノードに含まれる内容と前記候補行列との重み付けLCS長さを計算するステップ、を含む、付記5又は6に記載の方法。
(付記8)
前記認識結果を補正するステップは、
算出された前記範囲内の各ノードに含まれる内容と前記候補行列との1つ又は複数の重み付けLCS長さに基づいて、前記認識結果を補正するステップ、を含む、付記7に記載の方法。
(付記9)
前記木は、Burkhard−Keller木である、付記1又は2に記載の方法。
(付記10)
認識結果は、光学文字認識(OCR)エンジンにより取得される、付記1又は2に記載の方法。
(付記11)
OCRエンジンは、オーバーセグメンテーション法及びビームサーチアルゴリズムを用いる、付記10に記載の方法。
(付記12)
画像ブロックの認識結果の補正装置であって、
前記認識結果の候補行列を取得する取得部であって、前記候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す、取得部と、
木における探索すべきノードの範囲を決定する決定部であって、前記木は、前記木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される、決定部と、
決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うことで、前記認識結果を補正する補正部と、を含む、装置。
(付記13)
前記候補行列の各列における各候補は、信頼度の高い順にランク付けされる、付記12に記載の装置。
(付記14)
前記木は、LCS(最長共通部分列)に基づいて構築され、
前記差のメトリックは、LCS長さである、付記12又は13に記載の装置。
(付記15)
前記決定部は、
前記木における根ノードに含まれる内容と前記候補行列との重み付けLCS長さと、所定閾値との差分値を計算し、
前記差分値以上のLCS長さを有する子ノードを前記範囲に含ませる、付記14に記載の装置。
(付記16)
マッチングが取れた場合、前記重み付けLCS長さの重みは、対応する画像ブロックについて選択された候補の数、及び前記候補行列におけるマッチングすべき候補の選択された候補の数のうちのランクに基づくものである、付記15に記載の装置。
(付記17)
マッチングが取れていない場合、前記重みは、負の無限大である、付記15に記載の装置。
(付記18)
前記補正部は、算出された前記範囲内の各ノードに含まれる内容と前記候補行列との1つ又は複数の重み付けLCS長さに基づいて、前記認識結果を補正する、付記16又は17に記載の装置。
(付記19)
前記木は、Burkhard−Keller木である、付記12又は13に記載の装置。
(付記20)
プログラムを記憶したコンピュータ読み取り可能な記憶媒体であって、前記プログラムがプロセッサにより実行される際に、
画像ブロックの認識結果の候補行列を取得するステップであって、前記候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す、ステップと、
木における探索すべきノードの範囲を決定するステップであって、前記木は、前記木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される、ステップと、
決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うことで、前記認識結果を補正するステップと、を実行させる、記憶媒体。
なお、用語「含む」、「有する」又は他の任意の変形は、排他的に含むことに限定されず、一連の要素を含むプロセス、方法、物又は装置は、これらの要素を含むことだけではなく、明示的に列挙されていない他の要素、又はこのプロセス、方法、物若しくは装置の固有の要素を含む。また、さらなる制限がない限り、用語「1つの…を含む」より限定された要素は、該要素を含むプロセス、方法、物又は装置に他の同一の要素が存在することを排除しない。
以上は図面を参照しながら本発明の好ましい実施例を説明しているが、上記実施例及び例は例示的なものであり、制限的なものではない。当業者は、特許請求の範囲の主旨及び範囲内で本発明に対して各種の修正、改良、均等的なものに変更してもよい。これらの修正、改良又は均等的なものに変更することは本発明の保護範囲に含まれるものである。

Claims (10)

  1. 画像ブロックの認識結果の補正方法であって、
    前記認識結果の候補行列を取得するステップであって、前記候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す、ステップと、
    木における探索すべきノードの範囲を決定するステップであって、前記木は、前記木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される、ステップと、
    決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うことで、前記認識結果を補正するステップと、を含む、方法。
  2. 前記候補行列の各列における各候補は、信頼度の高い順にランク付けされる、請求項1に記載の方法。
  3. 前記木は、LCS(最長共通部分列)に基づいて構築され、
    前記差のメトリックは、LCS長さである、請求項1又は2に記載の方法。
  4. 前記木における探索すべきノードの範囲を決定するステップは、
    前記木における根ノードに含まれる内容と前記候補行列との重み付けLCS長さと、所定閾値との差分値を計算するステップと、
    前記差分値以上のLCS長さを有する子ノードを前記範囲に含ませるステップと、を含む、請求項3に記載の方法。
  5. 前記重み付けLCS長さを計算する際に、
    マッチングが取れた場合、前記重み付けLCS長さの重みは、対応する画像ブロックについて選択された候補の数、及び前記候補行列におけるマッチングすべき候補の選択された候補の数のうちのランクに基づくものであり、
    マッチングが取れていない場合、前記重みは、負の無限大である、請求項4に記載の方法。
  6. 前記決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うステップは、
    前記範囲内の各ノードに含まれる内容と前記候補行列との重み付けLCS長さを計算するステップ、を含む、請求項5に記載の方法。
  7. 前記認識結果を補正するステップは、
    算出された前記範囲内の各ノードに含まれる内容と前記候補行列との1つ又は複数の重み付けLCS長さに基づいて、前記認識結果を補正するステップ、を含む、請求項6に記載の方法。
  8. 前記木は、Burkhard−Keller木である、請求項1又は2に記載の方法。
  9. 画像ブロックの認識結果の補正装置であって、
    前記認識結果の候補行列を取得する取得部であって、前記候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す、取得部と、
    木における探索すべきノードの範囲を決定する決定部であって、前記木は、前記木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される、決定部と、
    決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うことで、前記認識結果を補正する補正部と、を含む、装置。
  10. プログラムを記憶したコンピュータ読み取り可能な記憶媒体であって、前記プログラムがプロセッサにより実行される際に、
    画像ブロックの認識結果の候補行列を取得するステップであって、前記候補行列の各列は、対応する画像ブロックの認識結果の複数の候補を表す、ステップと、
    木における探索すべきノードの範囲を決定するステップであって、前記木は、前記木におけるノードの各ペアに含まれる内容間の差のメトリックに基づいて構築される、ステップと、
    決定された範囲内の全てのノードに含まれる内容と前記候補行列とのマッチングを行うことで、前記認識結果を補正するステップと、を実行させる、記憶媒体。
JP2020066804A 2019-04-11 2020-04-02 画像ブロックの認識結果の補正方法及び装置、並びに記憶媒体 Active JP7487532B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201910288895.6 2019-04-11
CN201910288895.6A CN111814781A (zh) 2019-04-11 2019-04-11 用于对图像块识别结果进行校正的方法、设备和存储介质

Publications (2)

Publication Number Publication Date
JP2020173802A true JP2020173802A (ja) 2020-10-22
JP7487532B2 JP7487532B2 (ja) 2024-05-21

Family

ID=72831500

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020066804A Active JP7487532B2 (ja) 2019-04-11 2020-04-02 画像ブロックの認識結果の補正方法及び装置、並びに記憶媒体

Country Status (2)

Country Link
JP (1) JP7487532B2 (ja)
CN (1) CN111814781A (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7134526B1 (ja) 2021-11-15 2022-09-12 株式会社Cogent Labs マッチング装置、マッチング方法、プログラム、及び記録媒体

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112990225B (zh) * 2021-05-17 2021-08-27 深圳市维度数据科技股份有限公司 一种复杂环境下的图像目标识别方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001283156A (ja) 2000-03-31 2001-10-12 Glory Ltd 住所認識装置、住所認識方法、およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
US7536064B2 (en) * 2005-05-31 2009-05-19 Microsoft Corporation Image comparison by metric embeddings
JP2012223338A (ja) * 2011-04-19 2012-11-15 Fujifilm Corp 木構造作成装置および方法ならびにプログラム
JP6470249B2 (ja) 2016-12-20 2019-02-13 ソフトバンク株式会社 データクレンジングシステム、データクレンジング方法及びデータクレンジングプログラム
CN107169445B (zh) * 2017-05-11 2020-07-03 北京东方金指科技有限公司 一种大规模掌纹编码和比对方法
CN109325138B (zh) * 2018-07-12 2022-07-15 上海电机学院 一种基于扩展与亚像素矩阵结合的图像快速识别方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7134526B1 (ja) 2021-11-15 2022-09-12 株式会社Cogent Labs マッチング装置、マッチング方法、プログラム、及び記録媒体
JP2023073104A (ja) * 2021-11-15 2023-05-25 株式会社Cogent Labs マッチング装置、マッチング方法、プログラム、及び記録媒体

Also Published As

Publication number Publication date
CN111814781A (zh) 2020-10-23
JP7487532B2 (ja) 2024-05-21

Similar Documents

Publication Publication Date Title
Stephen String searching algorithms
CN111159990B (zh) 一种基于模式拓展的通用特殊词识别方法及系统
US9754176B2 (en) Method and system for data extraction from images of semi-structured documents
WO2023005293A1 (zh) 文本纠错方法、装置、设备及存储介质
CN110362824B (zh) 一种自动纠错的方法、装置、终端设备及存储介质
CN112784009B (zh) 一种主题词挖掘方法、装置、电子设备及存储介质
JP7487532B2 (ja) 画像ブロックの認識結果の補正方法及び装置、並びに記憶媒体
KR101379128B1 (ko) 사전 생성 장치, 사전 생성 방법 및 사전 생성 프로그램을 기억하는 컴퓨터 판독 가능 기록 매체
JPH11328317A (ja) 日本語文字認識誤り訂正方法及び装置、並びに、誤り訂正プログラムを記録した記録媒体
CN112182353B (zh) 用于信息搜索的方法、电子设备和存储介质
CN111782892B (zh) 基于前缀树的相似字符识别方法、设备、装置和存储介质
CN111160445B (zh) 投标文件相似度计算方法及装置
KR101245631B1 (ko) 근사조합장치, 근사조합방법, 프로그램 및 기록매체
CN114090722B (zh) 查询内容自动补全的方法及装置
CN113407693B (zh) 一种用于全媒体审读的文本相似度比对方法及装置
Pandi et al. A novel similarity measure for sequence data
JP5252596B2 (ja) 文字認識装置、文字認識方法及びプログラム
CN111488757B (zh) 用于对图像的识别结果进行分割的方法和设备及存储介质
CN111310442B (zh) 形近字纠错语料挖掘方法、纠错方法、设备及存储介质
CN115917527A (zh) 文档检索装置、文档检索系统、文档检索程序、以及文档检索方法
JP3080066B2 (ja) 文字認識装置、方法及び記憶媒体
JP2003331214A (ja) 文字認識誤り訂正方法、装置及びプログラム
JP4915499B2 (ja) 同義語辞書生成システム、同義語辞書生成方法および同義語辞書生成プログラム
JP4985096B2 (ja) 文書解析システム、および文書解析方法、並びにコンピュータ・プログラム
JPH06274547A (ja) 複合語認識装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230112

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20231120

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240301

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240409

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240422