JP2021056750A - データ入力支援装置、データ入力支援方法及びプログラム - Google Patents

Abstract

【課題】スキャン画像に対する文字認識処理においては、文字列内の文字に対して誤認識が発生することがあるが、誤認識された各文字に対して正解候補があることから、それらの組み合わせからなる正解候補文字列が多数あり得るため、データ入力作業におけるユーザの負担が重いという課題がある。【解決手段】文字認識処理された文字列に対して修正が必要な文字を指定し、その文字についてのみ修正した正解候補文字列を提示する。これにより、正解候補文字列を絞り込むことができるため、ユーザの作業負担を軽減することができる。【選択図】図７

Description

本発明は、データ入力支援装置、データ入力支援方法及びプログラムに関する。

プリンタ機能、複写機能、ファクシミリ機能などの多機能を備えた複合機能装置（Multi Function Printer。以下、「ＭＦＰ」という）では、備えられたスキャナを用いて、ＯＣＲ（Optical Character Recognition）処理を行うことが広く知られている。ここで、ＯＣＲ処理とは、光学的手段により文書から活字や手書き文字を読み取り、コンピュータが利用可能な文字コードに変換する文字認識処理をいう。ＯＣＲ処理は、ＭＦＰに限られず、コンパクトカメラやスマートフォンに代表されるモバイル機器においても、備えられたデジタルカメラ等を用いて行われる。
ＯＣＲ処理を行うことにより、一般的なオフィスで行われている経費精算作業に代表されるような、紙媒体の帳票からデジタルデータへの変換を伴う作業を自動化することが可能になり、データ入力作業における生産性の向上が期待できる。

ただし、スキャナにより読み取られた画像の品質や文字状態には、ばらつきが存在する。そのため、ＯＣＲ処理の正解率は１００％には到達せず、文字の誤認識が発生することがある。
ＯＣＲ処理により取得された文字列の中に誤認識された文字が含まれる場合、誤認識された文字をユーザが直接に修正する必要がある。文字列の修正は、一般的に、ＰＣ（Personal Computer）や情報処理装置の表示部においてユーザにより行われる。しかし、文字列中の誤認識された文字の発見、指定、修正など作業は煩雑であるため、特に多くの文書を処理する場合、ユーザの作業負担が重くなるという課題がある。

上記の課題に対して、特許文献１の文字読み取り装置では、ＯＣＲ結果の文字列内の誤認識文字をユーザに指定させることで誤認識文字と正解文字を区別する。そして、予め文字読み取り装置に搭載した単語辞書に登録された単語に基づいて、誤認識文字を自動的に修正した文字列を生成する。これにより、ユーザによる正解文字の入力作業が省略できるため、ＯＣＲ結果を修正するユーザの負荷が軽減される。
また、特許文献２の文字認識装置では、処理対象の文字列内の、ＯＣＲ結果の誤認識を含む単語をユーザに選択させる。そして、選択された単語について再度詳細なＯＣＲ処理を行うことで候補を生成し、その中から単語辞書に合致する組み合わせを検索することで、ＯＣＲ結果を修正する作業の効率化を図っている。

特開昭６２―４９５８２号公報 特開平４−１３８５８３号公報

しかしながら、特許文献１や特許文献２では、依然として、ＯＣＲ処理により取得された文字列中の誤認識された文字を、ユーザが発見し、指定する際の作業負担が重いという課題がある。また、単語辞書に基づいて文字列を修正するため、誤認識された文字を含む文字列を、単語辞書に登録されていない単語（未知語）に修正することができないという課題もある。
後者の課題に対しては、誤認識された文字について、下位候補や、運用時の学習などによって取得されたＯＣＲ処理の誤認識パターンなどの置換候補を用いることで、正解候補文字列を生成することが考えられる。
しかし、修正対象の文字中の文字の組み合わせにより生成される正解候補文字列には、外観が類似するものが多数ある。このような類似する多数の正解候補文字列の中からユーザが正しい文字列を選択することは、作業の負担が重くなることは容易に想像される。

本発明は、以上のような事情に鑑みてなされたものであり、文字認識処理において誤認識された文字を含む文字列について、正解候補文字列を絞り込むことにより、ユーザの作業の負担を軽減することができるデータ入力支援装置を提供することを目的とする。

本発明は、文書をスキャンすることにより生成された画像に対して文字認識処理を行う認識手段と、前記文字認識処理により取得された文字列における修正が必要な文字を指定する指定手段と、前記文字列における指定された前記文字についての置換候補を用いるとともに、前記文字列における指定された前記文字以外の文字についての置換候補を用いることなく、前記文字列に対応する複数の正解候補文字列を生成する生成手段と、生成された前記複数の正解候補文字列を利用して１つの正解文字列を確定する確定手段と、を有することを特徴とするデータ入力支援装置である。

本発明によれば、文字認識処理により取得された文字列に誤認識された文字が含まれる場合にも、データ入力作業におけるユーザの負荷を低減することができる。

データ入力支援システムの構成を示す図である。 操作パネルに表示されるＵＩの例である。 データ入力支援システムを実現するためのソフトウェア構成を示す図である（実施例１）。 処理の全体の流れを示すフローチャートである。 スキャンされた文書の例である。 項目値表示画面の例である。 項目値修正処理を示すフローチャートである。 修正箇所指定画面の例である。 正解候補文字列を生成するために用いられるラティスの例である。 正解文字列選択画面の例である。 誤認識パターン登録処理を示すフローチャートである。 データ入力支援システムを実現するためのソフトウェア構成を示す図である（実施例２）。 文字認識結果について文字ごとの信頼度示す図である。 修正箇所確認画面の例である。

以下に、図面を参照して、本発明を実施するための実施例について説明する。ただし、以下に説明する実施例はあくまで例示であり、本発明の範囲をそれらに限定する趣旨のものではない。また、以下の実施例で説明されている特徴の組み合わせのすべてが本発明の解決手段に必須のものとは限らない。

＜実施例１＞
図１は、本発明の実施例１に係るデータ入力支援システム１０のシステム構成を示す図である。
データ入力支援システム１０は、読み取り装置１００と、情報処理装置１１０と、を有する。読み取り装置１００は、スキャナ１０１と、読み取り装置側の通信部１０２と、を有する。スキャナ１０１は、文書のスキャンを行い、スキャンした文書の画像（スキャン画像）を生成する。読み取り装置側の通信部１０２は、ネットワークを介して不図示の外部装置と通信を行う。

情報処理装置１１０は、システム制御部１１１と、ＲＯＭ１１２と、ＲＡＭ１１３と、ＨＤＤ１１４と、表示部１１５と、入力部１１６と、情報処理装置側の通信部１１７と、を有する。
システム制御部１１１は、ＣＰＵなどを有し、ＲＯＭ１１２に記憶された制御プログラムを読み出して各種処理を実行する。ＲＡＭ１１３は、システム制御部１１１の主メモリ、ワークエリア等の一時記憶領域として用いられる。ＨＤＤ１１４は、各種データや各種プログラム等を記憶する。なお、後述する情報処理装置１１０の機能や処理は、システム制御部１１１がＲＯＭ１１２又はＨＤＤ１１４に格納されているプログラムを読み出し、これらのプログラムを実行することにより実現される。

表示部１１５は、ディスプレイなどを有し、各種情報を表示する。入力部１１６は、キーボードやマウスを有し、ユーザによる各種操作を受け付ける。なお、表示部１１５と入力部１１６は、タッチパネルのように一体として設けられてもよい。また、表示部１１５は、プロジェクタによる投影を行うものであってもよい。入力部１１６は、投影された画像に対する指先の位置を、カメラで認識するものであってもよい。情報処理装置側の通信部１１７は、ネットワークを介して不図示の外部装置との通信処理を行う。

本実施例のデータ入力支援システム１０においては、読み取り装置１００のスキャナ１０１が帳票等の文書をスキャンし、スキャン画像を生成する。スキャン画像は、読み取り装置側の通信部１０２により情報処理装置１１０に送信される。情報処理装置１１０では、情報処理装置側の通信部１１７がスキャン画像を受信し、ＨＤＤ１１４などの記憶装置に記憶する。なお、表示部１１５と入力部１１６の一部機能は、読み取り装置１００にあってもよい。
また、データ入力支援システム１０を構成する読み取り装置１００と情報処理装置１１０とは１つの装置により構成されてもよい。

図２は、本実施例における、操作パネル２０１に表示されるＵＩ（User Interface）の例である。
操作パネル２０１は、情報処理装置１１０の表示部１１５に設けられる。操作パネル２０１は、タッチパネル２０２及びテンキー２０３を備える。タッチパネル２０２には、ログイン中のユーザＩＤ、メインメニューなどが表示される。

図３は、実施例１における、データ入力支援システム１０を実現するためのソフトウェア構成を示す構成図である。
データ入力支援システム１０は、文字認識結果提供部３０１と、文字認識結果生成部３０２と、を有する。

文字認識結果提供部３０１は、文字認識結果生成部３０２による文字認識処理の結果をユーザに提供する。また、文字認識結果提供部３０１は、ユーザからの入力を受け付け、文字認識結果生成部３０２に通知する。すなわち、文字認識結果提供部３０１はＵＩとして機能を有し、例えば、情報処理装置１１０に備えられたタッチパネル２０２やＰＣに接続されたディスプレイによって実現される。
文字認識結果提供部３０１は、文字認識結果提示部３０３、修正対象文字指定部３０４、正解候補文字列提示部３０５、正解文字列選択部３０６、正解文字列入力部３０７を備える。

文字認識結果提示部３０３は、文字認識結果生成部３０２により認識された文字列をユーザに提示する。
修正対象文字指定部３０４は、文字認識結果提示部３０３が提示した文字列の中から、ユーザによる修正対象となる文字の指定を受け付ける。
正解候補文字列提示部３０５は、文字認識結果生成部３０２で生成された正解候補文字列をユーザに提示する。
正解文字列選択部３０６は、正解候補文字列提示部３０５により提示された正解候補文字列の中から、ユーザが最終的に確定した正解文字列を選択する。
正解文字列入力部３０７は、文字認識結果生成部３０２により認識された正解文字列に対して、正解文字列選択部３０６が選択した文字列を入力する。

文字認識結果生成部３０２は、情報処理装置１１０に入力された文書に対して文字認識処理を実行して文字列を取得するとともに、誤認識した文字について置換候補を用いて正解候補文字列を生成する。
文字認識結果生成部３０２は、画像処理部３０８、文字認識部３０９、項目値抽出部３１０、修正要否判断部３１１、正解候補文字列生成部３１２を備える。

画像処理部３０８は、入力されたスキャン画像に対して文字認識処理が実行できるように前処理を行う。
文字認識部３０９は、スキャン画像中の文字列を文字コードに変換する文字認識処理を実行する。
項目値抽出部３１０は、文書について登録される項目値（後述）をスキャン画像から抽出する。
修正要否判断部３１１は、文字認識処理された文字列中の文字について修正が必要であるか否かを判断する。
正解候補文字列生成部３１２は、修正が必要であると修正要否判断部３１１が判断した文字について置換候補を用いることにより、正解候補文字列を生成する。

図４は、スキャンされた文書について、文字認識処理により取得された文字列をユーザが修正し、修正したデータをシステムに登録するまでの処理の全体の流れを示すフローチャートである。
まず、Ｓ４００において、読み取り装置１００によって文書がスキャン画像に変換される。
次に、Ｓ４０１において、情報処理装置１１０のシステム制御部１１１は、変換されたスキャン画像に対して、スキャン画像内の文字列の記述方向を検知することによって、傾き補正処理を行う。
次に、Ｓ４０２において、システム制御部１１１は、グレースケールのスキャン画像に対して、所定の閾値を用いて二値化する二値化処理を行う。
次に、Ｓ４０３において、システム制御部１１１は、スキャン画像から文字認識処理に不要である罫線を除去する罫線除去処理を行う。
Ｓ４０１〜Ｓ４０３で行われる処理は、後述のＳ４０４の文字領域特定処理及びＳ４０５の文字認識処理を正確に実行するための前処理として位置づけられる。

次に、Ｓ４０４において、システム制御部１１１は、前処理が行われたスキャン画像に対して、文字領域を特定する文字領域特定処理を行う。
次に、Ｓ４０５において、システム制御部１１１は、文字領域が特定されたスキャン画像に対して、文字認識処理を行う。これにより、スキャン画像内の文字領域ごとに、文字列を構成する各文字の文字コードが取得される。
次に、Ｓ４０６において、システム制御部１１１は、ユーザが必要とする項目値をスキャン画像から抽出する項目値抽出処理を行う。

ここで、図５及び図６を用いて、項目値について説明する。
図５は、読み取り装置１００によってスキャンされた文書５００の一例である。ここでは、図５に示されるように、文書５００として請求書が用いた例について説明する。
ここで、項目値とは、例えば、後述するＳ４０９におけるデータ登録処理でシステムに登録される項目である「電話番号」や「合計金額」などの値（ここでは、「０３−１２３−４５６７」や「￥１１，２８６」など）を指す。

図６は、図５で示される文書について、項目値抽出処理が行われた結果がユーザに提示される項目値表示画面６００の例を示したものである。
プレビュー画面６０１には、スキャンされた文書のプレビュー画像が表示される。項目の欄６０２は、スキャンされた文書の「種別」、「電話番号」、「合計金額」などの項目名が表示される。項目値の欄６０３には、スキャン画像から抽出された、各項目の欄６０２に対応する項目値が表示される。

項目値抽出処理は、例えば、ユーザがプレビュー画面６０１において、抽出対象とする項目値が表示されている位置を指定することによって実現される。例えば、項目名「合計金額」の項目値を抽出する場合、ユーザはプレビュー画面６０１上の「￥１１，２８６」が表示されている領域をタッチすればよい。

また、項目値抽出処理は、ユーザが指定することなく、自動的に抽出することも可能である。この場合、項目の欄６０２に示されている項目名に基づいて、項目名に関連する文字列をスキャン画像から検索し、予め定義された項目名と項目値の位置関係に基づいて、検索された項目名の位置から項目値を検索すればよい。

例えば、項目名「合計金額」の項目値を抽出する場合、スキャンされた文書の種別（この場合は、「請求書」）を考慮し、「合計金額」の意を示すであろう「請求金額」などの文字列をスキャン画像から検索する。その結果、スキャン画像から検索された「御請求金額」の位置と、予め定義され、情報処理装置１１０が記憶している「御請求金額」と金額が表示される位置関係に基づいて、項目値を検索する。この例では、「「御請求金額」という文字列の右側に合計金額の項目値が存在する」という文字列の表記に関するルールに基づいて、項目値「￥１１，２８６」が抽出されることになる。なお、以上に示した項目値の抽出の手法はあくまで一例であり、他の手法であってもよい。

抽出された項目値は、文字認識結果表示部３０３（図３を参照）により、項目値の欄６０３に表示される。
しかし、スキャン画像の品質によってはＯＣＲ処理により取得された文字列には誤認識された文字が含まれることがあるため、抽出された項目値のままシステムに登録すると、誤ったデータを登録してしまうリスクがある。そのため、文字認識処理により取得された文字列について、ユーザが、誤認識された文字がないかを確認して、必要な場合、誤認識された文字を修正する必要がある。そのために、本実施例では、Ｓ４０７において、項目値を修正する項目値修正処理を行う。

図７は、Ｓ４０７の項目値修正処理の詳細を示すフローチャートである。
まず、Ｓ７００において、システム制御部１１１は、文字認識処理により取得された文字列中の誤認識された文字を指定する修正箇所の指定をユーザに促すために、文字列を操作パネル２０１に拡大表示する。
次に、Ｓ７０１において、システム制御部１１１は、表示された文字列において修正箇所の指定がユーザにより指示されたか否かを検知する。

図８は、ユーザに修正箇所の指定を促すために表示される修正箇所指定画面８００の例である。
例えば、項目名「合計金額」の項目値である「￥１１，２８６」が、誤認識された文字を含む形で、「判１，２Ｂ６」として認識されたとする。このままでは正しくシステムに登録することはできないので、誤認識された文字の修正が必要である。
そこで、修正箇所指定画面８００において、欄８０１に示されるように、文字認識処理により取得された文字列を拡大表示し、ユーザに対して文字列の中で、修正が必要な箇所の指定を促す。

なお、本実施例では、修正箇所指定画面８００は情報処理装置１１０に備えられた操作パネル２０１に表示され、ユーザは表示された修正箇所指定画面８００上で操作することにより、修正箇所の指定を行うものとする。ただし、ＭＦＰに備えられたタッチパネル上でタッチによる操作でも、ＰＣのディスプレイ上に表示された文字列に対してマウスカーソルを用いる指定でも、文字列中の修正箇所の指定を行うことができるものであれは、手法は問わない。

図８の例では、「￥１」が「判」に、「８」が「Ｂ」に誤認識されている。このため、ユーザは、拡大表示された文字列８０１中の「判」と「Ｂ」を修正箇所として指定する。この際、ユーザによって指定された修正箇所に、影をつけたり、ハイライト表示したりするなどの強調表示をすると、指定された箇所をユーザが認識しやすくなる。さらに、欄８０２に示されるように、拡大表示された文字列に対応する画像を、スキャン画像から切り取り、欄８０１の近傍に表示しておくと、ユーザに対して誤認識された文字を特定しやすくすることができる。

Ｓ７０１においてユーザの指示による修正箇所の指定が検知されると、Ｓ７０２において、システム制御部１１１は、指定された箇所に基づいて、正解候補文字列の生成を行う。

図９を用いて、正解候補文字列を生成する手法について説明する。
図９は、この例における修正対象の文字列である「判１，２Ｂ６」に対応した正解候補文字列を生成するために用いられるラティスである。
ラティスは、指定された修正箇所についての置換候補を用いて構成される。本実施例では、置換候補とは、文字認識処理により取得された文字の下位候補、又は、情報処理装置１１０に記憶された文字や文字列に対する誤認識パターンに基づいて定義される。

下位候補とは、文字認識処理により取得された文字に続いて尤もらしい文字又は文字列のことである。例えば、図９の例では、文字９０１の「判」については、文字９０１ａの「刊」が下位候補として登録されている。下位候補は、一般的に、１つの箇所に対して１つが登録されているが、１つの箇所に対して２つ以上を登録しておいてもよい。

また、誤認識パターンとは、文字認識処理において誤認識されやすい文字と、その文字について誤認識されやすい結果を登録したパターンである。例えば、文字９０１ａの「刊」については、文字列９０１ｂの「￥リ」、文字列９０１ｃの「￥１」、文字列９０１ｄの「￥７」が、誤認識パターンとして登録されている。誤認識パターンは、予め情報処理装置１１０に記憶されたものを用いてもよいし、文字認識処理の結果に対するユーザの修正履歴に基づいて取得されたものを用いてもよい。

本実施例では、正解候補文字列の生成処理は、下位候補と誤認識パターンをともに用いて行う。なお、誤認識パターンの取得は、図７のフローチャートにおけるＳ７０７で行われるが、具体的な手法については後述する。
また、本実施例では、文字認識処理により取得された文字列についての、下位候補や誤認識パターンを用いて図９に示すようなノードを追加するラティス９００を生成は、Ｓ７０１においてユーザによる指定がなされた文字に限定して行われる。これは、誤認識でないとユーザが判断した文字については、修正をする必要がないからである。例えば、図８に示した例では、ユーザにより指定された文字は「判」と「Ｂ」のみであるため、文字９０１の「判」と文字９０２の「Ｂ」のノードに限定して、下位候補及び誤認識パターンを追加したラティス９００を生成する。

そして、正解候補文字列は、生成されたラティス９００から選択しうるパスのすべてである。すなわち、ラティス９００から生成される正解候補文字列は、
「判１，２Ｂ６」、 「判１，２８６」、 「判１，２１３６」、
「刊１，２Ｂ６」、 「刊１，２８６」、 「刊１，２１３６」、
「￥リ１，２Ｂ６」、 「￥リ１，２８６」、 「￥リ１，２１３６」、
「￥１１，２Ｂ６」、 「￥１１，２８６」、 「￥１１，２１３６」、
「￥７１，２Ｂ６」、 「￥７１，２８６」、 「￥７１，２１３６」
の１５パターンである。

さらに正解候補文字列を絞るために、「金額は数字以外の文字を含まない」という文字列の表記に関するルールを用いることによって、このルールに適合しない正解候補文字列は除外される。これにより、前述の１５パターンの正解候補文字列は、
「￥１１，２８６」、 「￥１１，２１３６」、 「￥７１，２８６」、
「￥７１，２１３６」
の４パターンに絞られる。

さらに、「数字は３桁毎にカンマを打つ」という文字列の表記に関するルールを用いることによって，このルールに適合しない正解候補文字列は除外される。これにより、前述の４パターンの正解候補文字列は、
「￥１１，２８６」、 「￥７１，２８６」
の２パターンに絞られる。

なお、複数の正解候補文字列を絞り込む手法として、ここで用いたようなラティスから生成した文字列を用いる手法は一例であり、その他の様々な手法が考えられる。例えば、項目名が「氏名」である場合、「数字を含まない」という文字列の表記に関するルールを用いてもよい。また、一般的な項目値に対しては、文字の生起確率や、隣接する文字の遷移確率などの文字列の表記に関するルールをラティスに付与することで、最も尤度の高いパスを選択するという手法を採用することもできる。

図７のフローチャートに戻り、Ｓ７０３において、システム制御部１１１は、Ｓ７０２で生成した正解候補文字列を操作パネル２０１に表示する。
図１０は、生成された正解候補文字列を利用してユーザに正解文字列を選択させるための正解文字列選択画面１０００の例を示したものある。
図１０に示すように、複数の正解候補文字列の中から正解文字列をユーザに選択させるために、正解文字列選択画面１０００において、例えばスクロール可能なドロップダウンリスト１００２として正解候補文字列をユーザインターフェースに表示する。

そして、Ｓ７０４において、システム制御部１１１は、ユーザの指示により、複数の正解候補文字列の中から１つの文字列が選択されたか否かを検知する。
ここで、正解文字列選択画面１０００において、ドロップダウンリスト１００２として表示された文字列の中から１つの文字列が選択され、確定ボタン１００３を押下することにより、複数の正解候補文字列の中から１つの正解文字列が選択されたと判断される。

なお、ドロップダウンリスト１００２に正解文字列が表示されない場合は、ユーザによる文字列を確定する指示は、従来の操作と同様に、入力部１１６に備えられているキーボードから文字を入力していくことにより行われる。この際、ユーザは、ドロップダウンリスト１００２から正解文字列に最も近い正解候補文字列を選択してから、誤認識された文字のみを修正するようにしてもよい。また、ドロップダウンリスト１００２から正解候補文字列を選択することなく、正解文字列を構成するすべての文字を入力していくようにしてもよい。

複数の正解候補文字列の中から１つの文字列が選択され、確定ボタン１００３が押下されると、Ｓ７０５において、システム制御部１１１は、正解文字列を確定する。
次に、Ｓ７０６において、システム制御部１１１は、Ｓ４０５で文字認識処理により取得された文字列と、Ｓ７０５で確定した正解文字列が同じである否かを判断する。
同じである場合、すなわち、文字列の修正が行われなかった場合は、そのまま処理を終了する。一方、異なる場合、すなわち、文字列の修正が行われた場合は、Ｓ７０７において、システム制御部１１１は、文字認識処理により取得された文字列とユーザの指示により確定した正解文字列とを比較する。これにより、誤認識パターンを取得して登録する、誤認識パターン登録処理を行う。

図１１は、Ｓ７０７において行われる誤認識パターン登録処理を示すフローチャートである。
まず、Ｓ１１００において、システム制御部１１１は、文字認識処理により取得された文字列とユーザの指示により確定した正解文字列と比較し、一致する文字を検索する。例えば、文字認識処理の結果が「判１，２Ｂ６」であり、正解文字列が「￥１１，２８６」である場合、一致する文字は、前から順に、「１」、「，」、「２」、「６」である。なお、一致する文字は、例えば、２つの文字列間の編集距離計算で得られるグラフから求めることができる。

次に、Ｓ１１０１において、システム制御部１１１は、一致する文字以外の誤認識された文字を検出する。図１１の例の場合、誤認識された文字は、「判」と「Ｂ」である。
最後に、Ｓ１１０２において、システム制御部１１１は、誤認識された文字ごとに、誤認識パターンを誤認識パターン登録部（不図示）に登録する。図１１の例の場合、「判」→「￥１」、「Ｂ」→「８」という誤認識パターンが登録される。

これにより、ユーザが文字認識処理の結果を修正するごとに、誤認識パターンを取得し、学習することができる。学習された誤認識パターンは、次回以降にラティス９００を生成する際に用いられる。既に登録されている誤認識パターンについては、例えば、修正回数をカウントしていくことにより、正解候補文字列を生成する際の重みとして修正回数を用いることもできる。

Ｓ７０７の誤認識パターン登録処理である図１１のフローチャートを終了すると、図４のフローチャートに戻る。
そして、Ｓ４０８において、システム制御部１１１は、すべての項目値が確定したか否かを判断する。
ユーザが項目値表示画面６００（図６）において「次へ」ボタン６０４を押下すると、すべての項目値が確定したと判断される。
そして、Ｓ４０９において、システム制御部１１１は、項目値表示画面６００に表示されている項目値６０３に基づいて、システムへのデータ登録をするデータ登録処理を行う。これにより、すべての処理が終了する。

以上のとおり、本実施例によれば、文字認識処理により取得された文字列において修正が必要な文字をユーザに指定させ、指定された文字の下位候補や誤認識パターンを用いて正解候補文字列を生成する。
これにより、正解候補文字列を絞り込むことができるため、正解候補文字列の中から正解文字列を選択し、データ入力作業を行うユーザの負担を軽減することができる。また、正解候補文字列を生成する際に、辞書を必要としないため、未知語も含めたあらゆる文字列にも対応することができる。

＜実施例２＞
次に、本発明の実施例２について説明する。
前述のように、実施例１では、文字認識処理により取得された文字列について、修正が必要な文字をユーザの指示に基づいて指定した。
これに対して、本実施例では、文字認識処理において取得された文字ごとの信頼度に基づいて、ユーザによる指示を介することなく、修正が必要である文字を指定する。
本実施例では、処理の全体の流れを示すフローチャートは、実施例１で説明した図４と同様である。また、図４のＳ４０７における項目値修正処理についてのフローチャートは、実施例１で説明した図７と基本的には同様である。ただし、Ｓ７０１の修正箇所を検知する工程において、実施例１のようにユーザによる指示を介することなく、文字認識処理において取得された信頼度を用いる。

図１２は、実施例２における、データ入力支援システム１０を実現するためのソフトウェア構成を示す構成図である。
実施例１におけるソフトウェア構成（図３）との相違は、文字認識結果提供部３０１が修正対象文字指定部（図３の３０４）を備えておらず、代わりに、文字認識結果生成部３０２が文字信頼度推定部１２０１を備えている点である。

図１３は、文字認識処理により取得された文字列について、文字ごとの文字認識処理の結果の信頼度の例である。図１３の例では、文字列「￥１１，２８６」が「判１，２Ｂ６」と認識された際に、文字信頼度推定部１２０１によって取得された文字ごとの信頼度を示している。
この例では、「判」と「Ｂ」については信頼度が低く、その他の文字については信頼度が高いことが分かる。図中の破線は、文字認識処理の結果が信頼できるか否かを判断するために予め設定された閾値を示している。

本実施例では、修正要否判断部３１１は、「信頼度が閾値より低い文字については修正が必要」というルールに基づき、修正が必要な文字を指定する。その結果、「判」と「Ｂ」は修正対象となり、これらの文字についてのみ下位候補及び誤認識パターンを追加したラティスを生成する。なお、生成されたラティスから正解候補文字列を生成する手法は、実施例１で述べた方法と同様である。

なお、文字認識処理の結果の信頼度を用いて修正が必要であるか否かを判断する際には、すべての文字に対して同一の閾値を用いずに、文字ごとに予め設定した閾値を用いてもよい。また、信頼度を用いて修正が必要な文字の候補を文字信頼度推定部１２０１が選択した後、図１４に示すように、修正箇所確認画面１４００をユーザに提示し、ユーザに修正対象の文字を確認させるようにしてもよい。

以上のとおり、本実施例によれば、ユーザが文字認識処理において誤認識された文字を発見し、その文字を指定する必要がなくなるため、データ入力作業のさらなる効率化を図ることができる。

＜実施例３＞
次に、本発明の実施例３について説明する。
本実施例では、文字認識処理により取得された文字列中において修正を必要とする文字を、情報処理装置１１０が予め備える、図示しない修正文字指定用のデータベース（辞書）を用いて選択する。
修正文字指定用の辞書には、修正を必要とする文字が予め登録されている。修正を必要とする文字とは、文字認識部３０９が誤認識しやすい文字である。なお、文字認識処理における誤認識には、「￥１」が「判」と誤認識されるような複数文字の組み合わせも含まれるため、修正文字指定用の辞書には、文字単位のみではなく、文字の組み合わせでも登録されている。

例えば、文字認識処理により取得された文字列が「判１，２Ｂ６」であるとする。ここで、修正文字指定用の辞書に「判」、「Ｂ」が登録されている場合、修正要否判断部３１１は、文字列中の「判」と「Ｂ」を修正が必要な文字又は文字列であると判断する。
なお、本実施例では、修正要否判断部３１１は、修正が必要な文字について、判断はできるが、確定することまではしない。このため、修正が必要な文字を修正要否判断部３１１が選択したら、それを修正箇所確認画面１４００（図１４）に提示し、修正が必要であるか否かをユーザの指示に基づいて確定する。ただし、修正要否判断部３１１において修正が必要な文字の確定までするように構成してもよい。

その後、図９に示したようなラティス９００を生成し、生成されたラティスから正解候補文字列を生成する。正解候補文字列を生成する手法は、実施例１で説明した方法と同様である。

以上のとおり、本実施例によれば、修正文字指定用の辞書を用いて修正文字を選択し、選択された修正文字について修正が必要であるか否かをユーザに確定させる。
これにより、ユーザは、修正文字指定用の辞書に基づいて選択された文字について修正が必要であるか否かを確定するだけでよいため、データ入力作業のさらなる効率化を図ることができる。

＜その他の実施例＞
本発明は、上述の実施例の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
また、本発明は、複数の機器から構成されるシステムに適用しても、１つの機器からなる装置に適用してもよい。
本発明は上述の実施例に限定されるものではなく、本発明の趣旨に基づき種々の変形が可能であり、それらを本発明の範囲から除外するものではない。すなわち、上述した各実施例及びその変形例を組み合わせた構成もすべて本発明に含まれるものである。

１０ データ入力支援システム
１００ 読み取り装置
１１０ 情報処理装置
２０１ 操作パネル

Claims (14)

1. 文書をスキャンすることにより生成された画像に対して文字認識処理を行う認識手段と、
   前記文字認識処理により取得された文字列における修正が必要な文字を指定する指定手段と、
   前記文字列における指定された前記文字についての置換候補を用いるとともに、前記文字列における指定された前記文字以外の文字についての置換候補を用いることなく、前記文字列に対応する複数の正解候補文字列を生成する生成手段と、
   生成された前記複数の正解候補文字列を利用して１つの正解文字列を確定する確定手段と、を有する
   ことを特徴とするデータ入力支援装置。
2. 前記文字認識処理により取得された前記文字列を提示する第１の提示手段をさらに有し、
   前記指定手段は、ユーザによる第１の指示に基づいて、前記第１の提示手段により提示された前記文字列における修正が必要な文字を指定する
   ことを特徴とする請求項１に記載のデータ入力支援装置。
3. 前記指定手段は、前記文字認識処理により取得された前記文字列を構成する文字ごとに、前記文字認識処理の信頼度に基づいて、前記文字列における修正が必要な文字を指定する
   ことを特徴とする請求項１に記載のデータ入力支援装置。
4. 前記指定手段は、前記信頼度と、予め定められた閾値とに基づいて、修正が必要な文字として指定する
   ことを特徴とする請求項３に記載のデータ入力支援装置。
5. 前記閾値は、文字ごとに予め定められている
   ことを特徴とする請求項４に記載のデータ入力支援装置。
6. 前記指定手段は、修正が必要な文字を指定するための予め備えられたデータベースに基づいて、前記文字列における修正が必要な文字を指定する
   ことを特徴とする請求項１に記載のデータ入力支援装置。
7. 前記置換候補は、指定された文字についての下位候補及び／又は誤認識パターンから構成される
   ことを特徴とする請求項１乃至６のいずれか１項に記載のデータ入力支援装置。
8. 前記下位候補は、予め登録されている
   ことを特徴とする請求項７に記載のデータ入力支援装置。
9. 前記複数の正解候補文字列を提示する第２の提示手段を有し、
   前記確定手段は、ユーザによる第２の指示に基づいて、前記複数の正解候補文字列の中から前記１つの正解文字列を確定する
   ことを特徴とする請求項１乃至８のいずれか１項に記載のデータ入力支援装置。
10. 前記確定手段が前記複数の正解候補文字列の中から前記１つの正解文字列を確定する前に、前記生成手段は、文字列の表記に関するルールに基づいて、生成された前記複数の正解候補文字列を絞り込む
    ことを特徴とする請求項９に記載のデータ入力支援装置。
11. 前記第２の指示に基づいて、指定された前記文字についての誤認識パターンを登録する登録手段を有する
    ことを特徴とする請求項９又は１０に記載のデータ入力支援装置。
12. 前記複数の正解候補文字列の中に正解文字列がないと判断された場合に、ユーザによる前記正解文字列の入力を受け付ける入力手段を有する
    ことを特徴とする請求項１乃至８のいずれか１項に記載のデータ入力支援装置。
13. 文書をスキャンすることにより生成された画像に対して文字認識処理を行う認識ステップと、
    前記文字認識処理により取得された文字列における修正が必要な文字を指定する指定ステップと、
    前記文字列における指定された前記文字についての置換候補を用いるとともに、前記文字列における指定された前記文字以外の文字についての置換候補を用いることなく、前記文字列に対応する複数の正解候補文字列を生成する生成ステップと、
    生成された前記複数の正解候補文字列を利用して１つの正解文字列を確定する確定ステップと、を有する
    ことを特徴とするデータ入力支援方法。
14. 請求項１３に記載のデータ入力支援方法をコンピュータにより実行させるためのプログラム。

Images