JP2013077157A - 光学式文字認識で生成したテキストデータの校正を支援するためのシステム、方法、プログラム - Google Patents

光学式文字認識で生成したテキストデータの校正を支援するためのシステム、方法、プログラム Download PDF

Info

Publication number
JP2013077157A
JP2013077157A JP2011216500A JP2011216500A JP2013077157A JP 2013077157 A JP2013077157 A JP 2013077157A JP 2011216500 A JP2011216500 A JP 2011216500A JP 2011216500 A JP2011216500 A JP 2011216500A JP 2013077157 A JP2013077157 A JP 2013077157A
Authority
JP
Japan
Prior art keywords
calibration
tool
carpet
character
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011216500A
Other languages
English (en)
Other versions
JP5771108B2 (ja
Inventor
Toshio Isho
利生 井床
Takashi Ito
伊藤  隆
Takayuki Osogami
貴行 恐神
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Priority to JP2011216500A priority Critical patent/JP5771108B2/ja
Priority to US13/630,474 priority patent/US8953910B2/en
Priority to US13/669,789 priority patent/US8971670B2/en
Publication of JP2013077157A publication Critical patent/JP2013077157A/ja
Application granted granted Critical
Publication of JP5771108B2 publication Critical patent/JP5771108B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/98Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Character Discrimination (AREA)
  • Character Input (AREA)

Abstract

【課題】 光学式文字認識で生成されたテキストデータの校正を支援するためのシステム、方法およびプログラムを提供する。
【解決手段】
システムは、テキストデータのカーペット校正を行うための第1の校正ツールと、テキストデータのサイド・バイ・サイド校正を行うための第2の校正ツールと、第1および第2の校正ツールで行った校正オペレーションのログを記録するための記憶部と、第1の校正ツールのカーペット校正を行う単位である属性ごとに、ログに基づいて算出された第1の校正ツールを使用して校正を行った場合に要する時間の第1の推測値と、第1の校正ツールを使用することなく第2の校正ツールを使用して校正を行った場合に要する時間の第2の推測値を比較して当該属性の校正に第1の校正ツールを使用するかどうかを決定する解析部を備える。
【選択図】 図2

Description

本発明は、一般的には、電子化されたテキストデータの校正技術に関し、より特定的には、光学式文字認識で生成したテキストデータの校正を支援するためのシステム、方法、プログラムに関する。
紙媒体の文書の保存、インターネット上への公開等の目的のために、既存の紙媒体の文書を電子化することが一般的に行われている。紙媒体の電子化は、単に紙媒体をイメージとして電子化する場合もあるが、後の編集や検索等の目的のために文書内の印刷テキストをデジタルのテキストに光学式文字認識(Optical Character Recognition。以下、「OCR」ということがある)を用いて変換する場合が多い。しかし、文字認識は完全に正確に行われるとは限らず、誤認識が生じることがある。そこで、誤認識を最小とするために、コンピュータにより自動的に認識されたテキストの正確性をオペレータがコンピュータ上で確認することが一般的に行われている。
当分野の背景技術として、特開2003−099709号公報(特許文献1)は、認識結果修正画面上で誤読文字について文字修正がなされた際に、類似字形集合ファイルを参照して、中間ファイル内の上記修正された文字が含まれる類似字形のすべてに修正された文字を反映させ、一括して修正する処理を行う光学的文字認識装置を開示する。
他の背景技術として、特開平07−057042号公報(特許文献2)は、オペレータが読取不能文字を効率良く変換することができるようにする文字読取装置を開示する。装置では、文字データに変換できなかった読取不能文字がクラスタリングされ、各イメージ群に区分される。クラス化されたイメージ群は代表イメージとその他のイメージで表わされ、その候補文字が抽出される。代表イメージ群とそれに対応する候補文字に基づき、当該代表イメージ群に属する文字イメージと候補文字とを同一表示画面上に表示する。表示画面に基づいて、候補文字のいずれかが正解文字として選択されるか、新たに正解文字が入力されると、当該代表イメージ群に対応する各文字イメージ群を正解文字に対応する文字データに一括変換する。
他の背景技術として、特開平09−179934号公報(特許文献3)は、オペレータの作業負担が小さい文字認識装置を開示する。装置は、印刷文書上の文字や図形を光学的に走査して、文字や図形を画像データとして読み込み、読み込んだ画像データの文字領域および図形領域を抽出し、文字領域について文字の認識処理を行い、認識結果を表示し、表示した認識結果が正しいかどうかの確認をオペレータに促す。該認識結果に誤りが発見された場合、オペレータの指示を受けて認識結果の誤りを修正・編集し、認識結果の全ての誤りを修正・編集して得た最終結果を出力する文字読取装置において、連続した複数行のそれぞれの行に、抽出処理の誤りによる文字の並びの誤りが存在する認識結果が表示された場合、修正・編集を、各行ごとに存在する誤った文字列から成る文字列群を指定し、文字列群に対して一括して行う。
他の背景技術として、特開平06−290297号公報(特許文献4)は、装置は、特徴情報を位置情報とともに蓄積し、操作者が修正した修正履歴情報から画像特徴蓄積部の情報を抽出し、抽出された参照特徴と以降の特徴とのマッチングを行い、その結果に基づいて自動修正を行う文字認識装置を開示する。
他の背景技術として、特開平05−314303号公報(特許文献5)は、オペレータの誤読修正作業を軽減し、修正時間の短縮化を実現する誤読文字修正方法を開示する。方法は、オペレータがキー操作などにより修正した文字または文字列を修正履歴として記憶し、OCRの読取結果について過去に修正された文字を検出し、誤読箇所をオペレータに強調表示し、修正候補文字を選択可能とする。
他の背景技術として、特開平03−240183号公報(特許文献6)は、誤認識文字の確認修正作業の自動化が可能な文字認識結果の認識文字自動修正方式を開示する。文字認識結果に対する確認修正処理において、文字単位の認識を実行する文字認識手段と、文字認識結果を表示する手段と、確認の結果および修正指示を与える手段と、全文字認識結果を保持するテーブルと、正解文字候補が2位以下とされる誤認識に対して正解文字候補を1位とする修正が施された場合に他の文字位置に着いて類似の誤認識が生起しているか否かを識別する並べ替え判定手段と、前記の各手段の動作を制御する制御手段を備える。類似の誤認識が生起していると判断された文字位置に対して正解文字候補と推定されるも次候補の順位を1位とする入れ替えを行う。
他の背景技術として、特開2003−223608号公報(特許文献7)は、認識結果の一括修正を可能とした上で、文字修正の精度の向上を図る認識文字列修正方法を開示する。方法では、認識結果のテキストデータの中から、作業者の操作指令に基づく任意の文字が選択し、その選択文字が、作業者の操作指令に基づいて置換文字に置き換えられる。次いで、テキストデータ上で処理対象の文字を選択文字から後方に移行して、選択文字と同一か、もしくは類似しているかの判定がなされる。同一かもしくは類似と判別された場合には、その文字を自動修正対象文字として、置換文字に一旦置き換える。その置換文字の前後についての構文を解析し、その構文が正しいと判別された場合には、置換文字への置き換えを正当なものとして確定する。
他の背景技術として、特開2005−309608号公報(特許文献8)は、同一カテゴリの文字イメージを並べた確認画面において、字形の近似する文字イメージをまとめて表示する文字認識装置を開示する。文字認識装置の出力機構において、文字認識処理の対象となる文字のイメージデータを、文字認識処理により認識された文字(カテゴリ)ごとに分類し、分類された各カテゴリのイメージデータに関して、そのイメージデータに含まれる文字の形状に関する特徴量を求め、この特徴量に基づきイメージデータをさらに複数のクラスタに分類し、クラスタごとにイメージデータを表示する確認画面を生成し表示出力する。
他の背景技術として、松村季樹ほか(非特許文献1)は、文字認識率等の認識精度に応じて最も効率の良い確認修正手段を、複数の手段の中から自動選択する入力方式を提案する。認識精度ごとに最大入力効率を示す確認修正手段を、測定によりあらかじめ認識精度と対応づけておく。入力効率として、例えば、単位時間あたりの入力可能文字数を表す入力速度を想定する。次に、得られた対応関係を参照して、文書の文字認識結果に基づいて推定された認識精度から、入力速度が最大となる確認修正手段を自動選択する。入力作業は、提示された確認修正手段に従って行う。
他の背景技術として、宮原末治ほか(非特許文献2)は、日本語OCRのための効率的な確認修正法として、パターン間照合を利用した多段型の一括修正法を開示する。本方法は、初段のリジェクト処理でリジェクト文字の同一カテゴリを集めて一括修正し、次段の誤り修正処理で初段の処理結果を利用して誤り文字を検出し、再度一括修正を行う。
特開2003−099709号公報 特開平07−057042号公報 特開平09−179934号公報 特開平06−290297号公報 特開平05−314303号公報 特開平03−240183号公報 特開2003−223608号公報 特開2005−309608号公報
松村季樹ほか、「文字認識精度推定による確認修正手段の選択とその結果」、情報処理学会論文誌、Vol.40,No.4,pp.1840−1850、1999年4月 宮原末治ほか、「パターン間照合を利用した文字認識結果の確認修正法」、電子情報通信学会論文誌、D−II、Vol.J77−D−II No.9,pp.1735−1743、1994年9月 P.Auer, N.Cesa-Bianchi and P. Fischer, "Finite-timeanalysis of the maltiarmed bandit problem", Machine Learning, 47(2/3):p.235-256, 2002 National Center for BiomedicalCommunications National Library of Medicine, "A report to the Board ofScientific Counselors Communications Engineering Branch Lister Hill", October2001, 2011年9月29日検索、URL: http://archive.nlm.nih.gov/pubs/reports/mars2001-DIAU/mars2001-DIAU.php
OCRにより電子化されたテキストデータの校正を行う場合、ある共通の属性(例えば、文字)を有する部分として認識された紙媒体のイメージを切り出して、OCRの正誤をまとめて確認することで効率的に校正作業を行う手法が存在する(以下、この手法を「カーペット校正」といい、カーペット校正を実現するためのソフトウェア・ツールを「カーペット校正ツール」ということがある)。この手法は、現在の検証対象の共通属性とイメージが一致しているかどうかだけを判断すればよく、また、誤認識を発見した場合に一度に共通属性を有する複数の部分を修正することができる等のメリットを得られる。
カーペット校正は、例えば、共通の属性が「文字」である場合に対象の文字がどの文字として認識されるかを判断するために前後の文脈の情報が必要である場合など、OCRの正誤の判断が困難である場合がある。そのようなOCRの正誤を判断するために、カーペット校正を実施した後で、共通の属性での切り出しを行わず元のイメージとテキストを対比して校正を行う手法(以下、この手法を「サイド・バイ・サイド校正」といい、サイド・バイ・サイド校正を実現するためのソフトウェア・ツールを「サイド・バイ・サイド校正ツール」ということがある))により電子化されたテキストの校正を行うことが行う必要であることがある。
しかし、例えば、ほとんど間違いがない文字に対してカーペット校正を行うと、サイド・バイ・サイド校正のみを行うよりも時間がかかる場合がある。すなわち、カーペット校正を行うことなく、サイド・バイ・サイド校正を行ったほうが効率的な場合があり得る。しかし、従来はかかる問題を解決する手法は存在しなかった。
したがって、本発明の目的の1つは、光学式文字認識で生成されたテキストデータの校正作業をより効率的に支援するための装置、プログラム、および、方法を提供することである。
上記の目的を達成するために、光学式文字認識で生成されたテキストデータの校正を支援するためのシステムが提供される。システムは、テキストデータのカーペット校正を行うための第1の校正ツールと、テキストデータのサイド・バイ・サイド校正を行うための第2の校正ツールと、第1および第2の校正ツールで行った校正オペレーションのログを記録するための記憶部と、第1の校正ツールのカーペット校正を行う単位である属性ごとに、ログに基づいて算出された第1の校正ツールを使用して校正を行った場合に要する時間の第1の推測値と、第1の校正ツールを使用することなく第2の校正ツールを使用して校正を行った場合に要する時間の第2の推測値を比較して当該属性の校正に第1の校正ツールを使用するかどうかを決定する解析部を備える。
カーペット校正を行う単位である属性が、文字であることが好ましい。
第1の校正ツールによる校正を行った後で、第2の校正ツールによる校正が行われ、第1の校正ツールによる校正において、文字認識の正誤が不明である場合に、不明であることを示すマークが付されることが好ましい。さらに、不明であることを示すマークが付された文字を、カーペット校正において正誤不明であることを示すようにオペレータに提示することが好ましい。
ログに基づいて、ログ統計情報を算出する算出部を備えることが好ましい。さらに、算出部が、各文字について、
Figure 2013077157

のうちの少なくとも1つを統計情報として算出することができることが好ましい。
解析部が、統計情報に基づいて、
Figure 2013077157
のうちの少なくとも1つを算出し、算出結果に基づいて当該文字の校正に第1の校正ツールを使用するかどうかを決定することが好ましい。
さらに、解析部が、該文字の校正に第1の校正ツールを使用するかどうかを、下記手順に従って決定することが好ましい。
Figure 2013077157
算出部が、複数の文字をクラスタリングし、クラスタごとにログ情報から統計情報を算出することが好ましい。さらに、算出部が、(1)すべての文字に対する1つのクラスタの形成、(2)統計情報の各パラメータの空間によるクラスタの形成、または、(3)文字種ごとのクラスタの形成、のいずれかを実行することができることが好ましい。
解析部の決定に基づいて属性を第1の校正ツールを使用する対象であることを記述するリストを備えることが好ましい。さらに、リストに基づいて、第1および第2の校正ツールの制御を行う制御部を備えることが好ましい。
第1の校正ツールを、コンテキスト付きカーペット校正ツールとすることができる。また、第2の校正ツールが、ページ、文章、行のうちの少なくとも1つの単位でイメージデータとテキストデータを並べて提示することが好ましい。
以上、テキストデータの校正を支援するためのシステムとして本発明の概要を説明したが、本発明は、方法、プログラム、プログラム製品、ソフトウェア、ソフトウェア製品、装置などとして把握することもできる。プログラム製品ないしソフトウェア製品は、例えば、前述のプログラム、ソフトウェアを格納した記憶媒体を含め、あるいはプログラム、ソフトウェアを伝送する媒体を含めることができる。
上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの構成要素のコンビネーションまたはサブコンビネーションもまた、発明となり得ることに留意すべきである。
本発明の実施形態おけるデータ処理システムの外観イメージの一例を示した図である。 本発明の実施形態におけるデータ処理システムの機能ブロック図である。 本発明の実施形態におけるデータ処理システムの全体動作を表現するフローチャートである。 本発明の実施形態におけるデータ処理システムのカーペット校正処理の動作を表現するフローチャートである。 本発明の実施形態におけるデータ処理システムのサイド・バイ・サイド校正処理の動作を表現するフローチャートである。 本発明の実施形態におけるデータ処理システムのカーペット校正処理のインターフェースのスナップショットの一例である。 本発明の実施形態におけるデータ処理システムのサイド・バイ・サイド校正処理のインターフェースのスナップショットの一例である。 コンテキスト付きカーペット校正処理のインターフェースのスナップショットの一例である。 本発明の実施形態におけるデータ処理システムを実現するのに好適な情報処理装置のハードウェア構成の一例を示した図である。
以下、本発明を実施するための形態を図面に基づいて詳細に説明するが、以下の実施形態は特許請求の範囲に記載された発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
また、本発明は多くの異なる態様で実施することが可能であり、実施の形態の記載内容に限定して解釈されるべきものではない。実施の形態の説明の全体を通じて同じ要素には同じ番号を付している。
図1は、本発明の実施形態おけるデータ処理システムの全体像の一例を示した図である。データ処理システム100は紙媒体文書を電子化して得られたテキストデータの校正を実施するオペレータが操作する端末110および紙媒体文書をスキャンし、電子イメージデータとすることができるスキャナ120を含む。
本発明の実施の形態では、大量の紙媒体文書がスキャナ120によって読み込まれ、生成されたイメージデータが端末110に送信される。本発明の実施形態の端末110には光学式文字認識(OCR)ソフトウェアがインストールされており、受け取った文書のイメージデータから文書中に存在する文字を認識し、テキストデータに変換する。
本発明の実施形態では、端末110にインストールされたOCRソフトウェアの性質上、変換されたテキストデータが完全に正確であるとは限らないものとする。そして、オペレータは、端末110にインストールされた校正ソフトウェアを操作して文字認識の正誤の確認および誤って認識された文字の修正を行う。テキストデータの校正のために、ユーザは、端末110の表示装置に作業状況の情報などを視覚的に提示するウィンドウ・ベースのグラフィカル・ユーザ・インターフェースを通じて、キーボード、マウスなどの入力デバイス用いてアプリケーション・プログラムを操作する。
本発明の実施形態の校正ソフトウェアは、カーペット校正機能およびサイド・バイ・サイド校正機能を有するものとする。本発明の実施形態のカーペット校正機能は、共通の文字として認識されたイメージデータの部分を切り出して、OCRの正誤をまとめて確認することで効率的に校正作業を行う環境を提供するものである。
本発明の実施形態のサイド・バイ・サイド校正機能は、カーペット校正機能のように共通の文字を有するイメージの切り出しを行うのではなく、元のイメージとテキストデータを所定の単位で対比して校正を行う。その一例として、本発明の実施形態では、サイド・バイ・サイド校正機能が文書内のページのイメージと、それに対応する認識されたテキストをオペレータに同一画面に提示して校正をさせる機能を含むシナリオを開示するが、サイド・バイ・サイド校正機能によって表示される単位はページに限られず、文章単位、行単位などでイメージとテキストデータの対比をするようにしてもよい。
本発明の実施形態のカーペット校正機能を用いた作業では、オペレータは、一覧表示されているイメージのそれぞれが、現在検証対象の共通の文字であるかどうかだけを判断すればよいので、オペレータの負担が軽減され、作業効率が向上する場合がある。また、共通の文字を有するイメージは同じようにOCRで誤認識をされることが多いので、カーペット校正機能を用いた校正においてそのような同様の誤認識を複数発見した場合に一度に複数箇所を修正することができる等のメリットを得られる。一方、本発明の実施形態のカーペット校正機能については、例えば、対象のイメージがどの文字として認識されるかを判断するために前後のコンテキストの情報が必要である場合など、OCRの正誤が判断できない場合などがあり得る。
本発明の実施形態では、オペレータがカーペット校正でOCRの正誤が判断できない場合、対応するイメージに正誤不明であることを示すマークを付しておき、その後、最終的に正誤を判断し必要に応じて修正を行うためにサイド・バイ・サイド校正を行うものとする。しかし、本発明の実施形態では、一部のイメージについては、カーペット校正を行わず、最初からサイド・バイ・サイド校正を行うようにされている。すなわち、本発明の実施形態では、システムは、カーペット校正およびサイド・バイ・サイド校正の両方を行うか、カーペット校正を実施せずにサイド・バイ・サイド校正を行うかを制御する機構を備える。
本発明の実施形態では、事前指定のリスト、文字認識出力の解析、テキスト構造からの推論、および、過去の校正のログから得られた統計情報に基づいて、かかる制御が自動的に行われる。かかる制御を行う結果、効率的な校正作業が実現される。
図2は、本発明の実施形態のデータ処理システム100の機能ブロック図である。なお、図2の機能ブロック図に示す各要素は、図9に例示したハードウェア構成を有する情報処理装置およびスキャナ装置を組み合わせ、ハードディスク装置13などに格納されたオペレーティング・システム、OCRソフトウェア、校正ソフトウェアなどのコンピュータ・プログラムをメインメモリ4にロードした上でCPU1に読み込ませ、ハードウェア資源とソフトウェアを協働させることによって実現することができる。具体的には、イメージ読取部205はスキャナ120において実現され、その他の要素は端末110において実現される。
本発明の実施形態のデータ処理システム100は、イメージ読取部205、OCR部210、テキストデータ保存部215、カーペット校正部220、サイド・バイ・サイド校正部225、校正ツール制御部230、入力部235、出力部240を備える。
本発明の実施形態において、イメージ読取部205は紙媒体の文書を光学的に読み取ってイメージデータを生成し、OCR部210に引き渡す。文書のイメージデータを受けたOCR部210は、イメージデータに存在する文字を認識し、テキストデータに変換する。また、イメージデータからその他の属性を抽出するようにしてもよい。生成されたテキストデータに含まれる文字が、対応するイメージ片、イメージデータにおける位置の情報等と関連付けられ、テキストデータ保存部215に保存される。その他の属性が抽出されている場合は、あわせて対応する文字と関連付けて保存するようにしてもよい。イメージ読取部205、OCR部210およびテキストデータ保存部215は、既存のスキャニング技術、OCR技術、ストレージ技術によって当業者は適宜実施をすることができるので、ここではこれ以上詳細には説明されない。
本発明の実施形態のカーペット校正部220は、ある共通の文字として認識された紙媒体のイメージデータの部分を切り出して一覧表示し、オペレータがOCRの正誤をまとめて確認することで効率的な校正作業を行う環境を提供する機能を有する。
図6は、本発明の実施形態におけるカーペット校正部220によって提供される環境においてカーペット校正を行うためのインターフェース600のスナップショットの一例である。カーペット校正のインターフェース600の上部605に文書を特定する識別子が表示されている。オペレータは、共通の属性610(ここでは文字r)を有する部分として認識された文書のイメージデータの一部が切り出され、フィールド615にカーペット状に並べられている。このインターフェースを通じて、並べられたイメージ片が文字rとしてOCRされているかどうかをオペレータが判断する。例えば、OCRが誤っていた場合(例えば、文字γ(ガンマ)のイメージが、誤って文字rとして認識されている場合など)は、誤っているイメージを1回クリックして選択し、入力フィールド620に正しい文字(ここではγ)を入力してボタン625を押すことによって修正を行う。複数のイメージについてOCRが誤っている場合は、当該複数のイメージを一括選択して同様の操作を行うことで、一度に複数のOCRの認識誤りを修正することができる。
本発明の実施形態のサイド・バイ・サイド構成部225は、カーペット校正部220のように共通の文字での切り出しを行うのではなく、元のイメージとテキストデータを所定の単位で対比して校正を行う環境をオペレータに提供する機能を備える。その一例として、サイド・バイ・サイド校正部225は、文書内のページのイメージと、それに対応する認識されたテキストをオペレータに同一画面に提示して校正をさせる機能を、図7を用いて示すが、本発明の実施形態では、サイド・バイ・サイド校正機能によって表示される単位はページに限られず、文章単位、行単位などでイメージとテキストデータの対比をすることができるものとする。
図7は、本発明の実施形態におけるサイド・バイ・サイド校正部225によって提供される環境においてサイド・バイ・サイド校正を行うためのインターフェース700のスナップショットの一例である。カーペット校正のインターフェース700の左側に紙文書のページ単位のイメージ705が表示され、右側にOCRの結果得られたテキストデータのうち、イメージ705に対応する部分がイメージ705と類似するレイアウト710にしたがって表示されている。オペレータは、左右を見比べながら一致していない部分が見つかった場合は、レイアウト710に表示されたテキストを修正する。本発明の実施形態におけるサイド・バイ・サイド校正では、左側のイメージと右側テキストを見比べなければならないこと、また一括修正ができないことなどから時間がカーペット校正よりも時間がかかる場合がある。他方、サイド・バイ・サイド校正では、前後のコンテキストを参照して正誤が判断できるのでカーペット校正で発見されないOCRの認識誤りが発見できる可能性がある。
図2に戻り、本発明の実施形態の校正ツール制御部230は、各文字について、事前指定、OCR出力の解析、テキスト構造からの推論、および、過去の校正ログから抽出された統計情報に基づいて形成されたカーペット校正対象リスト245を参照して、カーペット校正部220によるカーペット校正を行うかどうかを判断する。すなわち、校正ツール制御部230は、カーペット校正対象リスト245を参照して、各文字について、カーペット校正部220およびサイド・バイ・サイド校正機能225の両方を用いて校正をするか、サイド・バイ・サイド校正機能225のみを用いて校正をするか、または、カーペット校正およびサイド・バイ・サイド校正のいずれも行わないか、の校正モードを制御する機能を含む。
また、校正ツール制御部230は、ユーザが入力部235を通じて入力した校正オペレーションをカーペット校正部220およびサイド・バイ・サイド校正機能225に引渡す。また、校正ツール制御部230は、カーペット校正部220およびサイド・バイ・サイド校正機能225から受けたユーザに提示する情報を出力部240に引き渡す。さらに、校正ツール制御部230は、カーペット校正部220およびサイド・バイ・サイド校正機能225を監視し、それぞれにおいて修正に要した時間および文字認識の正誤を含むログ情報を生成し、校正ログ保存部245に引き渡す。入力部235はユーザからの入力を受け付けて校正ツール制御部230に引渡し、出力部240は校正ツール制御部230からユーザに提示すべき情報を受けて、ユーザに視覚的に提示する。
さらに本発明の実施形態のデータ処理システム100は、校正ログ保存部245、処理時間推定部250、ログ統計情報保存部255、カーペット校正対象リスト260、OCR出力解析部265、および、構造推論エンジン270を含む。これらの要素は、校正ツール制御部230に制御のための情報を提示するために設けられている。
本発明の実施形態のカーペット校正対象リスト260は、検証対象の文書に含まれる文字とその文字に適用される校正モードを表すタグのペアを含む。本発明の実施形態では、タグは、<accept>(その文字については、カーペット校正部220およびサイド・バイ・サイド校正機能225の両方を用いて校正をすることを意味する)、<reject>(その文字については、サイド・バイ・サイド校正機能225のみを用いて校正をすることを意味する)、<no-correction>(その文字については、カーペット校正およびサイド・バイ・サイド校正のいずれも行わないことを意味する)の三種類が存在するものとする。
オペレータは、入力部235を通じて、カーペット校正対象リスト245を編集することができる。例えば、ユーザは文字だけ見ても判別が困難なアルファベットの“l”(エル)と、数字の”1”(いち)をカーペット校正の対象外とし、<reject>タグを付することができる。
本発明の実施形態のOCR出力解析部265は、OCRの結果を解析し、所定のルールに従って、各文書においてカーペット校正を実施することは効率的であると判断される文字をカーペット校正の対象外として特定し、カーペット校正対象リストを更新する。具体的には、本発明の実施形態では、OCR出力解析部265は、ある文書において所定の閾値(例えば、1回)以下しか出現しない文字をカーペット校正の対象外として特定する(すなわち、<no-correction>タグが付される)。
本発明の実施形態の構造推論エンジン270は、ある文書に表れる文字がその文書のどこに現れるかを構造的に解析し、校正してもほとんどあるいは全く意味のない文字を校正の対象外として特定し、カーペット校正対象リストを更新する。例えば、本文ではないページ番号など後で使用されない部分にある文字を対象外に指定する(すなわち、<no-correction>タグが付される)。
本発明の実施形態の校正ログ保存部245は、カーペット校正部220およびサイド・バイ・サイド校正部225を監視し、それぞれにおいて修正に要した時間およびOCRの正誤を含むログ情報を校正ツール制御部230から受けて記憶する。
本発明の実施形態のログ統計情報算出部250は、校正ログ保存部260に保存されたログ情報に基づいて、ログ統計情報を算出する。具体的には、本発明の実施形態では、以下の統計情報が文字ごとに算出されるが、これら以外の統計情報を算出するようにしてもよいことは勿論である。
Figure 2013077157
本発明の実施形態では、ログ情報におけるそれぞれのイベントの回数をカウントすることによって、N、M、NW´、N、Nをそれぞれ算出することができる。
ログ統計情報解析部255は、所定のイベントの生起(例えば、本発明の実施形態では、1つの文書の校正作業が終わるなど)を受けて、ログ統計情報算出部265によって算出された統計情報に基づいて、カーペット校正部220およびサイド・バイ・サイド校正機能225の両方で校正を行った場合に要する時間の推測値と、カーペット校正部220を使用せずにサイド・バイ・サイド校正機能225で校正を行った場合に要する時間の推測値を対比し、いずれのモードで校正を行うのかが最も効率がよいかどうかを判断する。本発明の実施形態では、ログ統計情報解析部270の判断結果に基づいて、カーペット校正対象リスト260が更新されることとなる。
具体的には、本発明の実施形態では、以下の処理が行われることによって、ログ統計情報解析部255は、ある文字xをカーペット校正部220およびサイド・バイ・サイド校正機能225の両方を用いて校正をするかどうかを判定し、両方を用いて校正をすると判定された場合、<accept>のタグを付してカーペット校正対象リスト260に追加されることとなる。
Figure 2013077157
なお、本発明の実施形態の上記手順においては、サンプル数が少ないことに起因した統計上の偏りの影響を少なくするために、それぞれのパラメータについて、「パラメータの統計情報」から「パラメータの取り得る幅」に「単調減少関数(ルート部分)」を乗じたもの(「補正統計情報」という)を算出し、それに基づいて「カーペット校正部220およびサイド・バイ・サイド校正機能225の両方で校正を行った場合に要する時間の推測値」と「カーペット校正部220を使用せずにサイド・バイ・サイド校正機能225で校正を行った場合に要する時間の推測値」を算出して比較していることに留意されたい。ただし、補正統計情報が当該パラメータの下限値よりも小さい場合は下限値が使用される。
図3は、本発明の実施形態におけるデータ処理システム100の動作を表現するフローチャート300である。処理はステップ305でスタートし、ステップ310でユーザの入力部235を介した入力を処理することで初期設定が実施される。かかる初期設定は、カーペット校正対象リスト260への手動の編集(特定の文字を<accept>、<reject>、<no-correction>タグを付して登録すること)を含む。
処理はステップ315に進み、イメージ読取部205によって電子化される紙媒体の文書のスキャンが実施される。本発明の実施形態では、スキャンは一度に一文書ずつ行われるようにしてもよいし、一度に多量の文書を対象として実施されるようにしてもよい。スキャンされた文書は文書を特定する情報およびページ番号の情報と関連付けられて、イメージデータが形成され、OCR部210に引き渡される。
次いで、ステップ320において、OCR部210によって、OCR処理が実施される。OCR処理の結果、認識された文字を含むテキストデータが形成され、テキストデーた保存ブ215に記憶される。そして、ステップ325において、OCR出力解析部265および構造推論エンジン270によって、OCR出力解析および構造推論が実施され、カーペット校正対象リスト260が更新される。
処理はステップ330に進み、ステップ315でスキャンした文書で未校正のもののうち、いずれを校正するかを選択する。この選択は、スキャンをした順番で、順次文書を選択していってもよいし、他のルールに従ってシステムが選択するようにしてもよい。また、オペレータにユーザ・インターフェースを通じて選択させてもよい。
次いで、ステップ335で過去の校正オペレーションのログからログ統計情報算出部265が算出した統計情報に基づいて、ログ統計情報解析部270がカーペット校正対象リストの更新を行う。かかる更新の詳細については、ログ統計情報解析部270の説明において既に述べたので、ここでは詳述されない。
次いで、ステップ335において、ステップ330で選択された文書内のテキストについて、カーペット校正処理が実行される。カーペット校正処理の詳細は、図4を用いて後で詳細に説明される。次いで、ステップ340において、サイド・バイ・サイド校正処理が実行される。サイド・バイ・サイド校正処理の詳細は、図5を用いて後で詳細に説明される。なお、ステップ340および345では、校正オペレーションのログがシステム上で記録されていっているものとする。かかるログ採取の手法は、当業者は適宜実施することができるので、ここではこれ以上詳述されない。
ステップ350において、校正対象となる文書のイメージデータがまだ存在するかどうかが判断される。ステップ350で存在すると判断された場合、処理はYESの矢印を介してステップ330に戻り、校正対象文書の選択(ステップ335)および校正処理(ステップ340、345)が繰り返される。ステップ350で存在しないと判断された場合、処理はNOの矢印を介してステップ355に進み、スキャン対象となる紙媒体の文書がさらに存在するかどうかが判断される。ステップ350で存在すると判断された場合、処理はYESの矢印を介してステップ315に進み、以降の処理が繰り返される。ステップ355で存在しないと判断された場合、処理はNOの矢印空ステップ360へ進み終了する。
次に、図4のフローチャート335を使用して、図3のステップ335におけるカーペット校正処理の一例をより詳細に説明する。処理は、ステップ405でスタートし、ステップ410でカーペット校正対象リストを参照して、校正対象文書に含まれる文字からカーペット校正の対象となる文字(すなわち、<accept>タグが付された文字)を1つ選択する。この選択は、オペレータが表示されたリストの中から手動で選択することで行ってもよいし、コンピュータが所定のルールに従って自動で選択するようにしてもよい。
処理はステップ415に進み、ステップ410において選択された文字について、校正対象の文書に含まれる対応する文字イメージの部分を切り出し、図6を用いて既に説明されたインターフェースを通じて一覧表示する。次にステップ420で、オペレータが一覧表示された文字イメージのうちの1以上について、当該文字として正しく認識されているかどうかを判断する対象として選択し、システムが当該選択を受け付ける。
処理はステップ425に進み、ステップ420において選択された文字イメージについて文字認識が正しいかどうかが判断される。ステップ425で正しいと判断された場合は、YESの矢印を通じてステップ430へ進み、選択イメージに文字認識が正しく行われたことを確認したことを示す「確認済み」マークが付され、次いで、ステップ445へ進む。
ステップ425で正誤不明と判断された場合、「正誤不明」の矢印からステップ435へ進み、カーペット校正で文字認識の正誤が不明であったことを示す「正誤不明」マークが付され、次いで、ステップ445へ進む。
ステップ425で文字認識が誤っていると判断された場合は、NOの矢印を通じてステップ435へ進み、当該イメージに対応する文字認識の修正を行い、誤っていた文字認識を修正したことを示す「修正済」マークが付され、次いで、ステップ445へ進む。これらの一連のカーペット校正処理については、すべてのオペレーションについてログが保存される。
ステップ445では、一覧表示されているイメージに未確認イメージが存在するかどうかが判断される。ステップ445で存在すると判断された場合、処理はYESの矢印からステップ420に戻り、以降のステップが繰り返される。ステップ445で存在しないと判断された場合は、NOの矢印を介してステップ450に進む。ステップ450では、校正対象の文書中に存在する文字に、カーペット校正の対象文字がまだ存在するかどうかが判断される。ステップ450において存在すると判断された場合は、YESの矢印を介してステップ410に戻り、以降のステップを繰り返す。ステップ450において存在しないと判断された場合は、処理はNOの矢印を通じて、ステップ455に進む。
次に、ステップ455において、ログ統計情報算出部250が、カーペット校正のログ情報に基づいて、校正オペレーションに関する統計情報を更新する。具体的には、本発明の実施形態では、以下の擬似コードよって表現される手順を実行するプログラムによって、ステップ455における統計情報の更新が行われる。
Figure 2013077157
ステップ455において統計情報の更新が完了したことに応じて、ステップ460において処理は終了する。
次に、次に、図5のフローチャート340を使用して、図3のステップ340におけるサイド・バイ・サイド校正処理の一例をより詳細に説明する。図5は、本発明の実施形態におけるデータ処理システム100のサイド・バイ・サイド処理を表現するフローチャート340である。処理はステップ505から開始し、次いで、ステップ510でサイド・バイ・サイド校正の対象ページを選択する。
処理はステップ515に進み、ステップ510において選択されたページについて、当該ページの読み取られたイメージと、それに対応する文字認識されたテキストデータを、図7に例示したユーザ・インターフェースを通じてオペレータに同時に提示する。このとき、既にカーペット校正において文字認識が正しいことが確認され、また、カーペット校正で誤認識が修正されたものについてはサイド・バイ・サイド校正の対象でないということがオペレータわかるように表示がされる。また、カーペット校正において、「正誤不明」マークが付された文字はそのことがオペレータにわかるように表示される。かかる表示は様々な方法が考えられ、例えば、文字の色を変える等が考えられるがこれに限られない。なお、既に述べたようにサイド・バイ・サイド校正において表示される単位はページに限られず、文章単位、行単位などでイメージとテキストデータの対比をすることもできることに留意されたい。
処理はステップ520に進み、ステップ510で選択され、ステップ515で表示されたページについて、サイド・バイ・サイド校正処理がなされる。これらの一連のサイド・バイ・サイド校正処理についても、すべての校正オペレーションについてログが記録される。
次に、ステップ525において、まだサイド・バイ・サイド校正が完了していないページが校正対象の文書に存在するかどうかが判断される。ステップ525において存在すると判断された場合、処理はYESの矢印を介してステップ510に戻り、以降のステップが繰り返される。ステップ525において存在しないと判断された場合、処理はNOの矢印からステップ530に進む。
ステップ530では、ログ統計情報算出部250が、サイド・バイ・サイド校正のログ情報に基づいて校正オペレーションに関する統計情報を更新する。具体的には、本発明の実施形態では、以下の擬似コードよって表現される手順を実行するプログラムによって、ステップ530における統計情報の更新が行われる。
Figure 2013077157
ステップ530において統計情報の更新が完了したことに応じて、ステップ535において処理は終了する。
図9は、本発明の実施の形態による端末110を実現するのに好適な情報処理装置のハードウェア構成の一例を示した図である。情報処理装置は、バス2に接続されたCPU(中央処理装置)1とメインメモリ4を含んでいる。ハードディスク装置13、30、およびCD−ROM装置26、29、フレキシブル・ディスク装置20、MO装置28、DVD装置31のようなリムーバブル・ストレージ(記録メディアを交換可能な外部記憶システム)がフロッピーディスクコントローラ19、IDEコントローラ25、SCSIコントローラ27などを経由してバス2へ接続されている。
フレキシブル・ディスク、MO、CD−ROM、DVD−ROMのような記憶メディアが、リムーバブル・ストレージに挿入される。これらの記憶メディアやハードディスク装置13、30、ROM14には、オペレーティング・システムと協働してCPU等に命令を与え、本発明を実施するためのコンピュータ・プログラムのコードを記録することができる。メインメモリ4にロードされることによってコンピュータ・プログラムは実行される。コンピュータ・プログラムは圧縮し、また複数に分割して複数の媒体に記録することもできる。
情報処理装置は、キーボード/マウス・コントローラ5を経由して、キーボード6やマウス7のような入力デバイスからの入力を受ける。情報処理装置は、視覚データをユーザに提示するための表示装置11にDAC/LCDC10を経由して接続される。
情報処理装置は、ネットワーク・アダプタ18(イーサネット(R)・カードやトークンリング・カード)等を介してネットワークに接続し、他のコンピュータ等と通信を行うことが可能である。図示はされていないが、パラレルポートを介してプリンタと接続することや、シリアルポートを介してモデムを接続することも可能である。
以上の説明により、本発明の実施の形態によるデータ処理システムを実現するのに好適な情報処理装置は、通常のパーソナルコンピュータ、ワークステーション、メインフレームなどの情報処理装置、または、これらの組み合わせによって実現されることが容易に理解されるであろう。ただし、これらの構成要素は例示であり、そのすべての構成要素が本発明の必須構成要素となるわけではない。
本発明の実施の形態において使用される情報処理装置の各ハードウェア構成要素を、複数のマシンを組み合わせ、それらに機能を配分し実施する等の種々の変更は当業者によって容易に想定され得ることは勿論である。それらの変更は、当然に本発明の思想に包含される概念である。
本発明の実施の形態のデータ処理システムは、マイクロソフト・コーポレーションが提供するWindows(R)オペレーティング・システム、アップル・コンピュータ・インコーポレイテッドが提供するMacOS(R)、X Window Systemを備えるUNIX(R)系システム(例えば、インターナショナル・ビジネス・マシーンズ・コーポレーションが提供するAIX(R))のような、GUI(グラフィカル・ユーザー・インターフェース)マルチウインドウ環境をサポートするオペレーティング・システムを採用する。
以上から、本発明の実施の形態において使用されるデータ処理システムは、特定のマルチウインドウ・オペレーティング・システム環境に限定されるものではないことを理解することができる。
以上、本発明の実施形態によれば、カーペット校正ツールとサイド・バイ・サイド校正ツールを適切に制御することができる、効率的な校正システム、ソフトウェア、および方法が実現される。従って、校正システムを操作してOCRによる誤認識の修正を行うユーザの生産性を高めることができることが容易に理解できる。
また、本発明は、ハードウェア、ソフトウェア、またはハードウェア及びソフトウェアの組み合わせとして実現可能である。ハードウェアとソフトウェアの組み合わせによる実行において、所定のプログラムを有するデータ処理システムにおける実行が典型的な例として挙げられる。かかる場合、該所定プログラムが該データ処理システムにロードされ実行されることにより、該プログラムは、データ処理システムを制御し、本発明にかかる処理を実行させる。このプログラムは、任意の言語・コード・表記によって表現可能な命令群から構成される。そのような命令群は、システムが特定の機能を直接、または1.他の言語・コード・表記への変換、2.他の媒体への複製、のいずれか一方もしくは双方が行われた後に、実行することを可能にするものである。
もちろん、本発明は、そのようなプログラム自体のみならず、プログラムを記録した媒体もその範囲に含むものである。本発明の機能を実行するためのプログラムは、フレキシブル・ディスク、MO、CD−ROM、DVD、ハードディスク装置、ROM、MRAM、RAM等の任意のコンピュータ読み取り可能な記録媒体に格納することができる。かかるプログラムは、記録媒体への格納のために、通信回線で接続する他のデータ処理システムからダウンロードしたり、他の記録媒体から複製したりすることができる。また、かかるプログラムは、圧縮し、または複数に分割して、単一または複数の記録媒体に格納することもできる。また、様々な形態で、本発明を実施するプログラム製品を提供することも勿論可能であることにも留意されたい。
上記の実施の形態に、種々の変更または改良を加えることが可能であることが当業者に明らかである。例えば、上述の本発明の実施形態では、図6に示すユーザ・インターフェースを備える特定のカーペット校正ツールを使用する態様を開示しているが、他のいかなるカーペット校正ツールを用いる変更を加えることができる。そのような他のカーペット校正ツールには、図8に示すユーザ・インターフェース800を備えるコンテキスト付きカーペット校正ツールが含まれる。
具体的には、図8に示すインターフェース800は、現在、図6のインターフェースのコンポーネント605〜625に対応する805〜825のほか、選択中の文字イメージのコンテキスト(すなわち、文字イメージの周辺)をユーザに提示する小さなフィールド835およびコンテキスト表示機能をアクティベートするためのチェックボックス830がさらに含まれている。この場合、上述の実施形態と異なり、カーペット校正ツールを使用するだけで(すなわち、サイド・バイ・サイド校正ツールを使用することなく)高精度の校正ができる可能性がある。
しかし、上述の実施形態におけるカーペット校正ツールと異なり、コンテキスト付きカーペット校正ツールを使用する場合は一括修正ができず、また、コンテキストを確認する必要があるため、サイド・バイ・サイド校正ツールよりも常に速く校正ができるとは限らない。従って、この場合も、ログ情報に基づいて算出したカーペット校正ツールを使用して校正を行った場合に要する時間の第1の推測値と、カーペット校正ツールを使用することなくサイド・バイ・サイド校正ツールを使用して校正を行った場合に要する時間の第2の推測値を対比して、カーペット校正ツールを使用するかどうかを決定する意義がある。
他の変更例として、本発明の実施形態のシステムの運用を開始する前に、ログ情報に相当する教師データが得られる場合に、その教師データを利用して運用開始から校正時間を最適化することができる。
他の変更例として、ある文字について、「カーペット校正ツールを使用しない校正に要する時間」が「カーペット校正ツールを使用する校正に要する時間」よりも大きい確率が、ほぼ1に近い場合に、当該文字をカーペット校正ツールの対象としてリストに追加するようにすることができる。
他の変更例として、文字ごとに十分なサンプル数が得られない可能性があることに対応するために、複数の文字をクラスタリングして、クラスタごとにログ情報から統計情報を算出することが考えられる。クラスタリングの例としては、(1)すべての文字に対して1つのクラスタを形成する、(2)「OCRが誤認識され、カーペット校正で誤認識を修正できた文字イメージの割合」、「OCRが誤認識され、カーペット校正で誤認識を修正しなかった文字イメージの割合」、「文字イメージ1つにつきOCRの正誤が不明であることを示すマークを付するために要する時間」、「文字イメージ1つにつきサイド・バイ・サイド校正で修正に要する時間」、「文字イメージ1つにつきカーペット校正で修正に要する時間」などの統計情報の各パラメータの空間で文字をクラスタを形成する、(3)ひらがな、カタカナ、漢字、数字、英字、記号などの文字種ごとにクラスタを形成する、などの手法があり得る。
ログ情報またはログ情報に相当する教師データから統計情報の各パラメータは、以下のようにして算出することもできる。まず、aは「カーペット校正にて修正された回数」を「これまで処理した文字イメージの数」で除算することによって算出することができる。bは「サイド・バイ・サイド校正にて修正した回数」を「これまで処理した文字イメージの数」で除算することによって算出することができる。cは、1からその時点でのa、bを減じる(すなわち、c=1−a−b)ことによって算出することができる。
u、w´は以下のように求めることができる。すなわち、ある1回のカーペット校正について、当該校正に要した時間をT、確認した文字イメージの数をα、正誤不明のマークが付された文字イメージの数をβ、修正された文字イメージの数をγとする。また、当該1回のカーペット校正において、文字イメージ1つにつきOCRの正誤が不明であることを示すマークを付するために要する時間をU、文字イメージ1つにつきOCRの正誤が不明であることを示すマークを付するために要する時間をW´、イメージの文字認識の正誤を確認するための時間をVとする。すると、T=αV+βU+γW´が成り立ち、この式を最小二乗法で線形回帰をすることによって、V、U、W´を求めることができる。そして、すべてのカーペット校正について、こうして求められたU、W´の平均値を求めることによって、u、w´をそれぞれ算出することができる。
また、本発明の実施形態では、wは、α=0、β=0、γ=1であるカーペット校正のログのみの平均値を求めるか、または、γ=1となるサンプルについて、それまでに算出されたU、Vの最新の推定値を用いてW´を求め、それらの平均値を求めることによって算出することができる。
なお、オペレータが作業の途中に休憩した場合などは、Tの値が極端に大きくなっている場合があり、かかる異常値を有するサンプルを考慮すると、u、w´、wの値が正しく求められない可能性がある。したがって、本発明の実施形態では、所定の閾値よりも大きなTを有するものが、u、w´、wの算出の基礎から除外されるものとする。
また、本発明の実施形態では、カーペット校正ツールの校正の単位を「文字」として説明をしたが、複数の文字や単語などのより大きな単位を校正の単位としてもよいし、また、そのほかの属性を校正の単位とすることができる。本発明の実施形態では、カーペット校正ツール対象のイメージに対して「確認済み」「正誤不明」「修正済」のいずれかのマークを付することとしたが、当該カーペット校正完了の時点でいずれのマークも付されていないイメージがある場合はそれらに特定のマーク(例えば、「確認済み」マーク)が追加されるようにしてもよい。
また、本発明の実施形態では、サンプル数が少ないことに起因した統計上の偏りの影響を少なくするために、特定の補正統計情報を算出し、それに基づいて「カーペット校正部220およびサイド・バイ・サイド校正機能225の両方で校正を行った場合に要する時間の推測値」と「カーペット校正部220を使用せずにサイド・バイ・サイド校正機能225で校正を行った場合に要する時間の推測値」を算出した。しかし、かかる算出は例示に過ぎず、かかる2つの比較される推測値は、補正がされない統計上情報を用いて算出されてもよいし、他のいかなる方法によって算出されてもよい。上記のような変更または改良を加えた形態も当然に本発明の技術的範囲に含まれる。
110…オペレータ端末
120…スキャナ

Claims (17)

  1. 光学式文字認識で生成されたテキストデータの校正を支援するためのシステムであって、
    前記テキストデータのカーペット校正を行うための第1の校正ツールと、
    前記テキストデータのサイド・バイ・サイド校正を行うための第2の校正ツールと、
    前記第1および第2の校正ツールで行った校正オペレーションのログを記録するための記憶部と、
    前記第1の校正ツールのカーペット校正を行う単位である属性ごとに、前記ログに基づいて算出された前記第1の校正ツールを使用して校正を行った場合に要する時間の第1の推測値と、第1の校正ツールを使用することなく第2の校正ツールを使用して校正を行った場合に要する時間の第2の推測値を比較して当該属性の校正に第1の校正ツールを使用するかどうかを決定する解析部と、
    を備える、システム。
  2. 前記カーペット校正を行う単位である属性が、文字である請求項1に記載のシステム。
  3. 前記第1の校正ツールによる校正を行った後で、前記第2の校正ツールによる校正が行われ、前記第1の校正ツールによる校正において、文字認識の正誤が不明である場合に、不明であることを示すマークが付される、請求項2に記載の方法。
  4. 前記不明であることを示すマークが付された文字を、カーペット校正において正誤不明であることを示すようにオペレータに提示する、請求項3に記載のシステム。
  5. 前記ログに基づいて、ログ統計情報を算出する算出部を備える、請求項2に記載のシステム。
  6. 前記算出部が、各文字について、
    Figure 2013077157
    のうちの少なくとも1つを統計情報として算出することができる、請求項5に記載のシステム。
  7. 前記解析部が、前記統計情報に基づいて、
    Figure 2013077157
    のうちの少なくとも1つを算出し、算出結果に基づいて当該文字の校正に第1の校正ツールを使用するかどうかを決定する、請求項6に記載のシステム。
  8. 前記解析部が、前記該文字の校正に第1の校正ツールを使用するかどうかを、下記手順に従って決定する、請求項7に記載のシステム。
    Figure 2013077157
  9. 前記算出部が、複数の文字をクラスタリングし、クラスタごとにログ情報から統計情報を算出する、請求項5に記載のシステム。
  10. 前記算出部が、(1)すべての文字に対する1つのクラスタの形成、(2)統計情報の各パラメータの空間によるクラスタの形成、または、(3)文字種ごとのクラスタの形成、のいずれかを実行することができる、請求項9に記載のシステム。
  11. 前記解析部の決定に基づいて前記属性を第1の校正ツールを使用する対象であることを記述するリストを備える、請求項1に記載のシステム。
  12. 前記リストに基づいて、前記第1および第2の校正ツールの制御を行う制御部を備える、請求項11に記載のシステム。
  13. 前記第1のツールが、コンテキスト付きカーペット校正ツールである、請求項1に記載のシステム。
  14. 前記第2の校正ツールが、ページ、文章、行のうちの少なくとも1つの単位でイメージデータとテキストデータを並べて提示する、請求項1に記載のシステム。
  15. 請求項1乃至14のいずれかに記載のシステムとしてコンピュータを機能させることができる、プログラム。
  16. 光学式文字認識で生成されたテキストデータの校正を支援するためのプログラムであって、
    前記テキストデータのカーペット校正を行うための第1の校正ツールを準備するステップと、
    前記テキストデータのサイド・バイ・サイド校正を行うための第2の校正ツールを準備するステップと、
    前記第1および第2の校正ツールで行った校正オペレーションのログを記録するステップと、
    前記第1の校正ツールのカーペット校正を行う単位である属性ごとに、前記ログに基づいて算出された前記第1の校正ツールを使用して校正を行った場合に要する時間の第1の推測値と、第1の校正ツールを使用することなく第2の校正ツールを使用して校正を行った場合に要する時間の第2の推測値を比較して当該属性の校正に第1の校正ツールを使用するかどうかを決定するステップと、
    をコンピュータに実行させる、プログラム。
  17. 光学式文字認識で生成されたテキストデータの校正を支援するための方法であって、
    前記テキストデータのカーペット校正を行うための第1の校正ツールを準備するステップと、
    前記テキストデータのサイド・バイ・サイド校正を行うための第2の校正ツールを準備するステップと、
    前記第1および第2の校正ツールで行った校正オペレーションのログを記録するステップと、
    前記第1の校正ツールのカーペット校正を行う単位である属性ごとに、前記ログに基づいて算出された前記第1の校正ツールを使用して校正を行った場合に要する時間の第1の推測値と、第1の校正ツールを使用することなく第2の校正ツールを使用して校正を行った場合に要する時間の第2の推測値を比較して当該属性の校正に第1の校正ツールを使用するかどうかを決定するステップと、
    を含む、方法。
JP2011216500A 2011-09-30 2011-09-30 光学式文字認識で生成したテキストデータの校正を支援するためのシステム、方法、プログラム Expired - Fee Related JP5771108B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2011216500A JP5771108B2 (ja) 2011-09-30 2011-09-30 光学式文字認識で生成したテキストデータの校正を支援するためのシステム、方法、プログラム
US13/630,474 US8953910B2 (en) 2011-09-30 2012-09-28 Proof reading of text data generated through optical character recognition
US13/669,789 US8971670B2 (en) 2011-09-30 2012-11-06 Proof reading of text data generated through optical character recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011216500A JP5771108B2 (ja) 2011-09-30 2011-09-30 光学式文字認識で生成したテキストデータの校正を支援するためのシステム、方法、プログラム

Publications (2)

Publication Number Publication Date
JP2013077157A true JP2013077157A (ja) 2013-04-25
JP5771108B2 JP5771108B2 (ja) 2015-08-26

Family

ID=47992654

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011216500A Expired - Fee Related JP5771108B2 (ja) 2011-09-30 2011-09-30 光学式文字認識で生成したテキストデータの校正を支援するためのシステム、方法、プログラム

Country Status (2)

Country Link
US (2) US8953910B2 (ja)
JP (1) JP5771108B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5661214B1 (ja) * 2014-09-02 2015-01-28 三菱電機インフォメーションシステムズ株式会社 文字データ修正方法、文字データ修正装置およびプログラム
JP2018133605A (ja) * 2017-02-13 2018-08-23 京セラドキュメントソリューションズ株式会社 画像形成装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11087409B1 (en) 2016-01-29 2021-08-10 Ocrolus, LLC Systems and methods for generating accurate transaction data and manipulation
JP6294554B1 (ja) * 2017-10-24 2018-03-14 サンネット株式会社 文字表示システム、文字表示装置及び文字表示システムを実現させるためのプログラム
JP2020167618A (ja) * 2019-03-29 2020-10-08 キヤノン株式会社 画像処理装置、その制御方法及びプログラム
CN110751140A (zh) * 2019-09-16 2020-02-04 深圳市国信合成科技有限公司 字符批量识别方法、装置和计算机设备
CN113780285B (zh) * 2021-09-27 2024-03-15 常州市公共资源交易中心 证照分析方法、装置和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11110480A (ja) * 1997-07-25 1999-04-23 Kuraritec Corp テキストの表示方法およびその装置
JPH11353311A (ja) * 1998-06-11 1999-12-24 Just Syst Corp 文書処理装置、文書処理方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002073827A (ja) * 2000-08-31 2002-03-12 Fujitsu Ltd 校正者の能力管理方法、及び装置
JP2004341754A (ja) * 2003-05-14 2004-12-02 Matsushita Electric Ind Co Ltd 文字認識結果修正装置及びその方法並びに文字認識結果修正プログラム
JP2005309608A (ja) * 2004-04-19 2005-11-04 Internatl Business Mach Corp <Ibm> 文字認識結果出力装置、文字認識装置、その方法及びプログラム

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03240183A (ja) 1990-02-16 1991-10-25 Nippon Telegr & Teleph Corp <Ntt> 認識文字自動修正方式
JPH05346970A (ja) * 1991-04-04 1993-12-27 Fuji Xerox Co Ltd 文書認識装置
JPH05314303A (ja) 1992-05-11 1993-11-26 Fuji Facom Corp 誤読文字修正方法
JP3240183B2 (ja) 1992-06-24 2001-12-17 日東電工株式会社 試料中の抗原または抗体の測定方法およびその測定装置
JPH06290297A (ja) 1993-04-02 1994-10-18 Sharp Corp 文字認識装置
JPH0757042A (ja) 1993-08-17 1995-03-03 Nippon Telegr & Teleph Corp <Ntt> 文字読取方法および装置
JPH09179934A (ja) 1995-12-22 1997-07-11 Oki Electric Ind Co Ltd 文字読取装置
US5923792A (en) * 1996-02-07 1999-07-13 Industrial Technology Research Institute Screen display methods for computer-aided data entry
US6351574B1 (en) * 1998-12-11 2002-02-26 International Business Machines Corporation Interactive verification of OCRed characters
US7111255B2 (en) * 2001-06-25 2006-09-19 International Business Machines Corporation Time-based evaluation of data verification results
US7039256B2 (en) * 2001-07-12 2006-05-02 International Business Machines Corporation Efficient verification of recognition results
JP2003099709A (ja) 2001-09-25 2003-04-04 Toshiba Corp 誤読文字修正方法及び光学的文字認識装置
JP4110786B2 (ja) 2002-01-30 2008-07-02 セイコーエプソン株式会社 認識文字列修正方法およびその装置並びにコンピュータプログラム
US7849398B2 (en) * 2007-04-26 2010-12-07 Xerox Corporation Decision criteria for automated form population
JP5314303B2 (ja) 2008-03-17 2013-10-16 パナソニック株式会社 貯湯式給湯システム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11110480A (ja) * 1997-07-25 1999-04-23 Kuraritec Corp テキストの表示方法およびその装置
JPH11353311A (ja) * 1998-06-11 1999-12-24 Just Syst Corp 文書処理装置、文書処理方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2002073827A (ja) * 2000-08-31 2002-03-12 Fujitsu Ltd 校正者の能力管理方法、及び装置
JP2004341754A (ja) * 2003-05-14 2004-12-02 Matsushita Electric Ind Co Ltd 文字認識結果修正装置及びその方法並びに文字認識結果修正プログラム
JP2005309608A (ja) * 2004-04-19 2005-11-04 Internatl Business Mach Corp <Ibm> 文字認識結果出力装置、文字認識装置、その方法及びプログラム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5661214B1 (ja) * 2014-09-02 2015-01-28 三菱電機インフォメーションシステムズ株式会社 文字データ修正方法、文字データ修正装置およびプログラム
JP2015185157A (ja) * 2014-09-02 2015-10-22 三菱電機インフォメーションシステムズ株式会社 文字データ修正方法、文字データ修正装置およびプログラム
JP2018133605A (ja) * 2017-02-13 2018-08-23 京セラドキュメントソリューションズ株式会社 画像形成装置

Also Published As

Publication number Publication date
US20130084011A1 (en) 2013-04-04
US8971670B2 (en) 2015-03-03
JP5771108B2 (ja) 2015-08-26
US8953910B2 (en) 2015-02-10
US20130085746A1 (en) 2013-04-04

Similar Documents

Publication Publication Date Title
JP5771108B2 (ja) 光学式文字認識で生成したテキストデータの校正を支援するためのシステム、方法、プログラム
US7236968B2 (en) Question-answering method and question-answering apparatus
JP2882569B2 (ja) 文書書式認識実行方法および装置
JP6874729B2 (ja) 画像処理装置、画像処理方法およびプログラム
US20120134589A1 (en) Optical character recognition (OCR) engines having confidence values for text types
US20060285746A1 (en) Computer assisted document analysis
US10599722B1 (en) Systems and methods for automated document comparison
US20060008148A1 (en) Character recognition device and method
JP2016095753A (ja) 文字認識システム及び文字認識方法
US20120158599A1 (en) System and method for analyzing office action of patent application
JP2019185137A (ja) 画像処理装置、画像処理方法およびプログラム
US20170178528A1 (en) Method and System for Providing Automated Localized Feedback for an Extracted Component of an Electronic Document File
EP2138959A1 (en) Word recognizing method and word recognizing program
JP2010061471A (ja) 文字認識装置およびプログラム
US20180067916A1 (en) Analysis apparatus, analysis method, and recording medium
JP2017111500A (ja) 文字認識装置及びプログラム
US20220292857A1 (en) Information processing apparatus, information processing method, and recording medium
US20220207900A1 (en) Information processing apparatus, information processing method, and storage medium
WO2002003240A1 (en) Proofreading system of chinese characters by means of one-to-one comparison
JP2020087112A (ja) 帳票処理装置および帳票処理方法
US20210042555A1 (en) Information Processing Apparatus and Table Recognition Method
US11482029B2 (en) Image processing device, image processing method, and recording medium
CN110647628B (zh) 一种自动化标检方法及系统
EP2573694A1 (en) Conversion method and system
JP2007286711A (ja) 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140507

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150210

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150507

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150609

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150626

R150 Certificate of patent or registration of utility model

Ref document number: 5771108

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees