JP2021047688A - 帳票認識方法およびプログラム - Google Patents

Abstract

【課題】帳票認識技術に関して、ユーザによる認識テンプレートの作成・登録の作業の手間を削減できる技術等を提供する。【解決手段】帳票認識方法は、認識テンプレート作成指示を入力する第１ステップと、帳票画像に対し、登録済みの第１認識テンプレートが適用できる場合には、適用してＯＣＲによる認識の結果を取得し、表示画面に認識の結果および第１認識テンプレートの情報を表示する第２ステップと、第１認識テンプレートが適用できない場合には、第２認識テンプレートを作成し、表示画面に第２認識テンプレートの情報を表示する第３ステップと、表示画面で、ユーザの操作に基づいて、第１または第２認識テンプレートに対する確認および修正を行い、第１または第２認識テンプレートを登録する第４ステップと、帳票画像に対し、第２認識テンプレートを適用してＯＣＲによる認識の結果を表示する第５ステップと、を有する。【選択図】図２

Description

本発明は、情報処理技術に関し、特に、帳票認識技術に関する。

帳票認識技術としてＯＣＲ技術等が挙げられる。ＯＣＲ（Optical Character Recognition：光学文字認識）による帳票認識では、帳票からの画像読み取りによって画像ファイルにされた帳票画像から、文字や図形等の情報を読み取る。ＯＣＲ装置は、ＯＣＲ機能を備える。ＯＣＲ機能は、ソフトウェアプログラム処理等で実現できる。ＯＣＲによる帳票認識は、主に定型帳票を対象としている。この帳票認識のためには、予め、帳票上の文字や図形等の認識対象物の位置情報を計測または手動設定して、帳票認識用のテンプレート（認識テンプレートと記載する場合がある）としてシステムに登録しておく必要がある。ＯＣＲ装置は、帳票認識の際、帳票画像と認識テンプレートとの比較に基づいて、文字や図形等を認識する。

上記帳票認識に係わる先行技術例としては、特開平９−３３０３６３号公報（特許文献１）、特許第３０８８０１９号公報（特許文献２）が挙げられる。特許文献１には、帳票読取装置として、記載事項及び記載位置がそれぞれ異なる帳票であっても、各記載事項をそれぞれ区別して読み取る旨が記載されている。特許文献１の技術は、予め用意しておいたテンプレートを、帳票上に記載されたＩＤによって使い分ける旨の技術であり、テンプレートそのものには汎用性は無いと考えられる。

特許文献２には、媒体処理装置等として、読み取ったイメージのデータから、解析用辞書を参照してイメージのレイアウトの特徴を抽出し、その特徴から認識すべき情報の存在する位置を特定する旨が記載されている。特許文献２の技術は、帳票レイアウトを自動解析し学習する旨の技術であり、帳票内の表の解析に関しては、表の特徴をビット列に変換して処理する旨が記載されている。

特開平９−３３０３６３号公報 特許第３０８８０１９号公報

従来技術では、ＯＣＲによる帳票認識のためには、対象帳票の種類毎に、前述の認識テンプレートが必要であり、ユーザによる認識テンプレートの作成や登録の作業が必要である。従来の認識テンプレートは、帳票内の単項目毎の位置座標情報を主として持つ構成である。認識テンプレートは、基本的にはユーザが手作業で一から作成・登録する必要があるため、手間が大きい。また、対象帳票の種類・数が多いほど、それに対応して、作成・登録しなければならない認識テンプレートの種類・数も多くなり、ユーザによる作業の手間がさらに多大となる。

帳票は、項目のレイアウトに関して、様々なバリエーションを持つ場合がある。例えば、帳票内に表が設けられ、その表部分を構成する複数の項目やそれらの値の行数に関してバリエーションがある。また、例えば、帳票内に別紙貼付欄が設けられ、その貼付欄に貼り付けられる別帳票の種類や貼付位置等に関してもバリエーションがある。

従来技術では、基本構造が同じ種類の帳票の場合でも、帳票内の表の値の行数が異なる場合や、帳票内の別帳票が貼り付けられている場合等によって、レイアウトが変化する場合には、基本構造の帳票とは違う帳票とみなされる。よって、そのような帳票については、別の種類の帳票として、認識テンプレートの再登録、言い換えると別の種類の認識テンプレートの作成・登録が必要になる。従来技術では、このような帳票のレイアウトのバリエーションおよび変化には対応できず、帳票一枚につき１個以上の認識テンプレートの作成・登録が必要であった。業務分野等に応じて、複数の種類の帳票の全てのバリエーションに対応するためには、多数または莫大な数の認識テンプレートを登録しなければならない場合もある。

本発明の目的は、帳票認識技術に関して、ユーザによる認識テンプレートの作成・登録の作業の手間を削減でき、レイアウトのバリエーションを持つ各種の帳票に関する多数の認識テンプレートの作成・登録の手間を削減できる技術を提供することである。

本発明のうち代表的な実施の形態は、以下に示す構成を有することを特徴とする。一実施の形態の帳票認識方法は、コンピュータが帳票画像からＯＣＲによる認識を行うための認識テンプレートを作成する帳票認識方法であって、前記コンピュータが実行するステップとして、ユーザの操作に基づいて、前記帳票画像についての認識テンプレート作成指示を入力する第１ステップと、前記帳票画像に対し、登録済みの第１認識テンプレートが適用できる場合には、適用してＯＣＲによる認識の結果を取得し、表示画面に前記認識の結果および前記第１認識テンプレートの情報を表示する第２ステップと、前記帳票画像に対し、前記第１認識テンプレートが適用できない場合には、第２認識テンプレートを作成し、前記表示画面に前記第２認識テンプレートの情報を表示する第３ステップと、前記表示画面で、前記ユーザの操作に基づいて、前記第１認識テンプレートまたは前記第２認識テンプレートに対する確認および修正を行い、前記帳票画像の認識に前記第１認識テンプレートまたは前記第２認識テンプレートを適用する設定として、前記第１認識テンプレートまたは前記第２認識テンプレートを登録する第４ステップと、前記帳票画像に対し、前記第２認識テンプレートを適用してＯＣＲによる認識の結果を取得し、前記表示画面に前記認識の結果を表示する第５ステップと、を有する。

本発明のうち代表的な実施の形態によれば、帳票認識技術に関して、ユーザによる認識テンプレートの作成・登録の作業の手間を削減でき、レイアウトのバリエーションを持つ各種の帳票に関する多数の認識テンプレートの作成・登録の手間を削減できる。

本発明の実施の形態１の帳票認識プログラムが実装され、実施の形態１の帳票認識方法に従った処理を行う帳票認識装置を含む、帳票認識システムの構成例を示す図である。 図１の帳票認識システムを用いる帳票認識業務フロー例を示す図である。 図２のステップ２０７の詳細例を示す図である。 単項目に関する認識フォーマット情報の構成例を示す図である。 従来技術における認識テンプレートの構成例を示す図である。 実施の形態１の帳票認識方法における帳票画像や認識テンプレートの構成例を示す図である。 認識テンプレート自動作成の際にユーザに対し表示するテンプレート登録画面の例を示す図である。 図７の画面のうちの帳票画像欄の表示例を示す図である。 実施の形態１で、表項目に関する処理例を示す図である。 実施の形態１で、表項目に関する処理例を示す図である。 実施の形態１で、表の罫線を用いた表構造の抽出処理の一例を示す図である。 実施の形態１で、表項目に関する他の処理例を示す図である。 実施の形態１で、参照項目に関する処理例を示す図である。 実施の形態１で、他の帳票の例を示す図である。 実施の形態１で、参照項目に関する処理例を示す図である。 テンプレート登録画面の表示例を示す図である。 帳票全体の認識テンプレートと、参照項目の認識テンプレートとの関係を示す図である。 実施の形態１で、参照項目に関する処理例を示す図である。 実施の形態１で、参照項目に関する他の処理例を示す図である。

以下、本発明の実施の形態を図面に基づいて詳細に説明する。実施の形態を説明するための全図面において同一部には原則として同一符号を付し、繰り返しの説明は省略する。

（実施の形態１）
図１〜図１９を用いて、本発明の実施の形態１の帳票認識方法およびプログラムについて説明する。

［概要］
実施の形態１の帳票認識方法は、以下のような機能に対応する処理を行うステップを有する方法である。

（１）認識テンプレート自動作成機能： 実施の形態１の帳票認識プログラムおよび方法等の技術は、帳票認識のために必要な認識テンプレートを自動作成する。この帳票認識技術は、自動作成した認識テンプレートの情報を、所定のグラフィカル・ユーザ・インタフェース（ＧＵＩ）を伴う画面に表示し、ユーザによる内容の確認や編集を受け付け、ユーザの操作に基づいて確定してＤＢに登録する。この帳票認識技術は、このような基本機能に加え、以下の（２）および（３）の機能を有する。

（２）表項目機能： 従来技術では、帳票内の項目として例えば表については、位置座標情報を保持していた。一方、この帳票認識技術は、帳票内の項目について、従来の位置座標情報に加え、以下の表項目情報、言い換えるとグループ項目情報を設ける。表項目情報は、配置関係に所定の規則性がある複数の項目を、１グループとみなし、繰り返し照合が可能な表項目として定義されるものである。

（３）参照項目機能： 従来技術では、帳票内の項目として例えば別紙貼付欄の別帳票については、その別帳票の項目毎の位置座標情報を保持していた。一方、この帳票認識技術は、帳票内の項目について、従来の位置座標情報に加え、以下の参照項目情報を設ける。参照項目情報は、帳票内のある範囲に対し、別帳票に対する別の認識テンプレートを参照して適用可能な参照項目として定義されるものである。

［（１）認識テンプレート自動作成機能］
認識テンプレート自動作成機能については、帳票認識装置は、帳票画像ファイルの認識結果と、ＤＢに登録済みの既存の認識テンプレートとに基づいて、必要に応じて自動的に認識テンプレートを作成する。帳票認識装置は、既存の認識テンプレートで対応できると判断した場合、既存の認識テンプレートを適用し、対応できないと判断した場合、新たな認識テンプレートを自動作成する。帳票認識装置は、作成した認識テンプレートを画面に表示し、ユーザによる確認や編集を受け付け、ユーザによる確定に基づいてＤＢに登録する。

実施の形態１では、認識テンプレートは、各単項目の単項目情報に加え、自動解析の結果、必要に応じて、表項目情報と参照項目情報とを持つ。実施の形態１では、作成される認識テンプレートは、帳票内の表構造や貼付欄内の別帳票等に関する、レイアウトのバリエーションを持つ複数の帳票に対応可能な汎用的な認識テンプレートとして得られる。

［（２）表項目機能］
表項目機能について、帳票認識装置は、認識テンプレートの作成の際には、帳票画像内の表部分についての表構造を抽出し、表の値の行数に依らずに、表構造を構成する複数の項目を１グループとして、表項目を設定する。帳票認識装置は、帳票認識時には、対象帳票画像上の表構造と、認識テンプレートの表項目とを比較し、適用できるかどうかを判断する。帳票認識装置は、認識テンプレートの表項目に対し、対象帳票画像の表の値の行数が異なる場合、列方向の各行に対する表項目の繰り返し照合を行って認識する。また、帳票認識装置は、繰り返し照合に基づいて、対象帳票画像の表と、認識テンプレートの表項目との間で、幅や高さの差、言い換えるとずれ量を算出する。このずれ量に基づいて、帳票認識装置は、対象帳票画像内で、表以下（例えば下方向または右方向）に位置する他の項目に対し、認識テンプレートの対応する項目をスライド（シフト）させて適用する。

［（３）参照項目機能］
参照項目機能について、帳票認識装置は、認識テンプレートを作成する際には、対象帳票画像内の帳票名文字列等の手がかりに基づいて、貼付欄等に対応する領域を抽出し、その領域内を１枚の別帳票と見立て、この領域を参照項目として設定する。この参照項目では、別帳票に対応付けられる別の認識テンプレートが参照して適用される。

［帳票認識装置］
図１は、実施の形態１の帳票認識プログラムが実装され、実施の形態１の帳票認識方法に対応する処理を行う帳票認識装置を含む、帳票認識システムの構成例を示す。実施の形態１の帳票認識プログラムは、実施の形態１の帳票認識方法に対応する処理をコンピュータに実行させるプログラムである。この帳票認識装置は、言い換えるとＯＣＲ装置であり、例えばＰＣ等のコンピュータおよびそれに搭載される帳票認識ソフトウェア（言い換えるとＯＣＲソフトウェア）によって実装されている。この帳票認識ソフトウェアには、実施の形態１の帳票認識プログラムが含まれている。なお、このような実装例に限らず、例えばスキャナ装置等を備える専用のＯＣＲ装置としての形態としてもよい。

図１の帳票認識システムは、帳票認識装置であるコンピュータ１と、スキャナ装置２と、帳票３と、ユーザとを有する。コンピュータ１には、ＬＡＮ等の通信手段を介して、スキャナ装置２が接続されている。ユーザは、コンピュータ１およびスキャナ装置２を使用しながら、帳票認識等の作業を行う。スキャナ装置２は、スキャナ機能やプリンタ機能等を持つ複合機等であってもよい。

スキャナ装置２は、セットされた帳票３等の紙面を光学的に走査して画像を読み取る装置である。ＯＣＲ対象の帳票３は、ユーザの操作に基づいて、まずスキャナ装置２によって画像として読み取られ、帳票画像ファイル１２２となり、ＬＡＮを通じてコンピュータ１に送信される。コンピュータ１は、スキャナ装置２からの帳票画像ファイル１２２を入力・取得し、記憶装置１０２内に記憶する。なお、この帳票認識装置にスキャナ装置２が一体的に実装されている形態でもよい。

コンピュータ１は、演算装置１０１、記憶装置１０２、通信インタフェース装置１０３、入出力インタフェース装置１０４、入力装置１０５、表示装置１０６、外部記憶装置１０７等を備え、これらはバス等を介して相互に接続されている。演算装置１０１は、ＣＰＵ、ＲＯＭ、ＲＡＭ等により構成され、装置全体を制御するプロセッサまたはコントローラを実現する。演算装置１０１は、ソフトウェアプログラム処理により実現される機能ブロックとして、帳票画像入力部１１、帳票認識処理部１２、認識結果出力部１３、認識テンプレート作成部１４、画面表示部１５、および設定部１６を有する。演算装置１０１は、記憶装置１０２の帳票認識プログラム１２１を読み出してそのプログラムに従った処理を実行することにより、認識テンプレート作成部１４を含む各機能ブロックを実現する。

記憶装置１０２には、実施の形態１の帳票認識プログラムである帳票認識プログラム１２１や、帳票画像ファイル１２２、認識結果データ１２３、認識テンプレートデータ１２４、および設定情報１２５等の各種のデータや情報が記憶される。帳票画像ファイル１２２は、帳票３の読み取り画像データである。認識結果データ１２３は、帳票認識処理の結果として作成されユーザに対し出力される、帳票内の文字や図形の情報を含むデータである。認識テンプレートデータ１２４は、複数の認識テンプレート（例えば対応するファイル）を含み、ＤＢ（データベース）およびファイルシステム等において整理して格納される。なお、コンピュータ１の外部にＤＢサーバやストレージ装置等が接続され、それらに各種のデータや情報が記憶されてもよい。設定情報１２５は、この帳票認識装置の帳票認識機能に係わるシステム設定情報やユーザ設定情報を含む。

また、記憶装置１０２には、対象となる帳票３の項目毎に、予め、認識用のフォーマット情報（認識フォーマットと記載する場合がある）も設定されて記憶されている。この認識フォーマットは、認識テンプレートとは異なる。

通信インタフェース装置１０３は、スキャナ装置２等の外部装置との間で所定の通信インタフェースで通信処理を行う部分である。帳票認識装置は、スキャナ装置２に限らず、サーバ装置やストレージ装置等の外部装置から帳票画像ファイルを入力・取得してもよい。

入出力インタフェース装置１０４には、入力装置１０５、表示装置１０６、および外部記憶装置１０７等が接続されている。入力装置１０５は、例えばキーボードや操作パネルが挙げられる。ユーザは、入力装置１０５を通じて指示等を入力する。表示装置１０６は、液晶ディスプレイ等が挙げられる。表示装置１０６の表示画面には、後述の所定のＧＵＩを伴う画面が表示される。この画面は、帳票認識に係わる作業用または管理用の画面である。ユーザは、表示装置１０６のその画面を通じて、帳票認識に係わる作業が可能であり、特に、認識テンプレートの確認や編集を含む管理作業も可能である。

外部記憶装置１０７は、例えばディスク装置やメモリカード装置等が挙げられる。外部記憶装置１０７には、演算装置１０１からの制御に基づいて、認識結果データ１２３や認識テンプレートデータ１２４等を格納することも可能である。コンピュータ１は、外部記憶装置１０７に格納されている帳票画像ファイル等を入力することも可能である。

帳票画像入力部１１は、スキャナ装置２からの帳票画像ファイル１２２を入力・取得して記憶装置１０２に記憶する。帳票認識処理部１２は、認識対象の帳票画像ファイル１２２と、認識テンプレートデータ１２４および認識フォーマット情報とを用いて、帳票画像からのＯＣＲ処理、すなわち文字や図形等の認識処理を行い、認識結果データ１２３を作成し、記憶装置１０２に記憶する。認識結果出力部１３は、認識結果データ１２３に基づいた帳票認識結果を表示画面に表示し、ユーザに対し出力し、確認や修正を受け付ける。

認識テンプレート作成部１４は、認識テンプレート自動作成機能（言い換えると認識テンプレート登録機能）に対応する処理部である。認識テンプレート作成部１４は、帳票画像ファイル１２２に基づいて、認識テンプレートを自動作成し、認識テンプレートデータ１２４として保存・登録する。認識テンプレート作成部１４は、帳票画像ファイル１２２に対し、ＤＢ内の既存の認識テンプレートを適用可能な場合には適用し、適用できない場合には、新たな認識テンプレートを自動作成する。認識テンプレート作成部１４は、表項目機能および参照項目機能に対応する実装も含んでおり、認識テンプレートの作成の際には、必要に応じて表項目に関する処理や参照項目に関する処理を行う。画面表示部１５は、作成した認識テンプレートの内容を画面（後述のテンプレート登録画面）に表示し、ユーザによる確認や編集を受け付ける。設定部１６は、テンプレート登録画面等の画面を通じて、帳票認識機能に関するユーザ設定を受け付け、設定情報１２５として記憶する。

［帳票認識業務フロー］
図２は、図１の帳票認識システムを用いる帳票認識業務フロー例を示し、ユーザに対する入出力と、コンピュータ１のプロセッサの処理と、ＤＢ等の記憶（図１の記憶装置１０２）との間でのステップを示す。まず、ユーザの列において、帳票画像２０１は、図１の認識対象の帳票画像ファイル１２２の入力に相当する。プロセッサの列において、プロセッサは、帳票画像２０１について、帳票認識（区別のため第１帳票認識とする）２０２の処理を行う。この第１帳票認識２０２は、ＤＢに登録されている既存のテンプレートＴ１および図示しない既存の認識フォーマット情報を用いた処理である。なお、最初の状態で既存のテンプレートＴ１が無くても構わない。プロセッサは、第１帳票認識２０２の結果を、第１認識結果２０３として保存し、表示画面に、対応する第１認識結果表示２０４を行う。ユーザは、第１認識結果表示２０４を見て、第１認識結果確認２０５を行う。

次に、ステップ２０６は、ユーザおよびコンピュータ１のプロセッサの両方による確認であり、上記帳票認識の際に、既存のテンプレートＴ１が適用できたかどうかの確認である。適用できた場合（ＹＥＳ）にはフローが終了となる。適用できなかった場合（ＮＯ）には以降のステップに続く。適用できなかった場合（ＮＯ）とは、すなわち、対象の帳票画像２０１が、基本構造の帳票に対するレイアウトのバリエーションである等の理由から、既存の基本構造のテンプレートＴ１では対応できなかったことを意味する。このため、プロセッサは、ステップ２０７で示すように、図１の認識テンプレート作成部１４を用いて、テンプレート自動作成の処理を行う。

ステップ２０７のテンプレート自動作成では、プロセッサが、既存のテンプレートＴ１および認識フォーマット情報に基づいて、上記バリエーションに対応するための新たなテンプレートＴ２を自動作成し、ＤＢに登録する。新たなテンプレートＴ２は、既存の認識フォーマット情報と関連付けられて管理される。プロセッサは、作成したテンプレートＴ２を画面に表示し、ユーザは、その画面を見てテンプレート作成確認２０８を行う。ユーザは、そのテンプレートＴ２の内容に問題無い場合には、確定操作し、プロセッサはそのテンプレートＴ２をＤＢに登録する。ユーザは、そのテンプレートＴ２の内容を一部修正・編集したい場合には、その一部修正・編集を行ってから確定操作し、プロセッサはそのテンプレートＴ２をＤＢに登録する。

ステップ２０７の後には、あらためて、新たなテンプレートＴ２を用いて帳票認識が行われる。ユーザの列の帳票画像２１０は、最初の帳票画像２０１に対応する同じ帳票画像ファイルである。プロセッサは、その帳票画像２１０について、新たなテンプレートＴ２を用いて第２帳票認識２１１の処理を行い、第２認識結果２１２を記憶する。プロセッサは、第２認識結果２１２を用いて、画面に第２認識結果表示２１３を行う。ユーザは、第２認識結果表示２１３を見て、第２認識結果確認２１４を行う。なお、１回目の帳票認識２０２に対し、２回目の帳票認識２１１では、比較対象として使用されている認識テンプレートが異なっているため、異なる認識結果としてより正確な認識結果が得られる。

［テンプレート自動作成ステップ］
図３は、図２のステップ２０７のテンプレート自動作成についての詳細例を示す。ユーザは、コンピュータ１の画面に対し、テンプレート作成開始指示３０１を入力する。プロセッサは、その指示を受けると、図１の認識テンプレート作成部１４によるテンプレート自動作成３０２の処理を行う。その際、プロセッサは、ＤＢから対象の帳票画像や、既存の認識テンプレートおよび認識フォーマット情報等の情報を適宜に参照しながら、その処理を行う。また、プロセッサは、帳票認識結果や、作成した認識テンプレート等のデータを、適宜に記憶装置１０２（ＤＢ）に保存する。プロセッサは、例えば既存のテンプレートＴ１とそれを作成元とした新たなテンプレートＴ２とを関連付けるようにして、そのための管理情報についてもＤＢに記憶する。

ステップ３０３では、プロセッサは、作成したテンプレートＴ２をユーザが確認するための画面であるテンプレート登録画面のデータを作成し、表示装置の表示画面に表示する。ユーザは、そのテンプレート登録画面を見て、テンプレート確認・編集３０４を行う。ユーザは、テンプレートＴ２の内容を修正すること等ができる。

ユーザは、テンプレートＴ２の確認後、確定操作として、テンプレート登録指示３０５を入力する。プロセッサは、その指示を受けると、テンプレート登録３０６の処理として、その時点の状態のテンプレートＴ２をＤＢに登録する。プロセッサは、登録処理完了後、テンプレート登録画面に、登録完了通知を出力する。

従来技術の方法では、テンプレート自動作成を行うステップは無く、認識テンプレート作成はすべてユーザによる手動作業が主であり、帳票のバリエーション毎に認識テンプレートの作成が必要であった。それに対し、実施の形態１の帳票認識方法では、上記のように、テンプレート自動作成３０２や、テンプレート登録画面作成表示のステップ３０３等がある。これにより、ユーザは、指示入力等の簡単な操作だけで、多数のバリエーションに対応できる汎用的な認識テンプレートを作成し登録することができる。

［認識フォーマット情報］
図４は、単項目に関する認識フォーマット情報の構成例を示す。このような認識フォーマット情報は、従来技術でも使用されている。認識フォーマット情報は、例えばファイル、テーブル等の形式で構成できる。（Ａ）の認識フォーマット情報は、構成を示し、テーブル形式において項目名と概要とを示す。項目名は、例えば、「読取キーワード」、「属性」、「長さ」、「文字種」、「活字または手書き」を有する。「読取キーワード」は、認識する領域の位置を決定するために使用する文字列（キーワード）を指定する項目である。「属性」は、例えば金額、住所、企業名等の属性を指定する項目である。「長さ」は、長さの範囲（例えば文字数）を指定する項目である。「文字種」は、例えば数字、英字、ひらがな等の文字種を指定する項目である。「活字または手書き」は、認識対象文字が活字か手書きかを指定する項目である。

（Ｂ）の認識フォーマット情報例は、ある帳票３（例えば請求書）において、その中のある認識対象項目４０１（例えば合計金額欄）に対して適用するための認識フォーマット情報４０２を示している。この認識フォーマット情報４０２は、「読取キーワード」項目では「合計」が指定され、「属性」項目では「金額」が指定され、「長さ」項目では「５」が指定され、「文字種」項目では「数字」が指定され、「活字または手書き」項目では「活字」が指定されている。この認識フォーマット情報４０２に基づいて、コンピュータ１のプロセッサは、帳票画像内からの文字「合計」の検出に基づいて、認識対象項目４０１として合計金額欄の文字列を認識できる。

［認識テンプレート（１）］
図５は、従来技術における認識テンプレートの構成例を示す。認識テンプレートは、対象帳票内で認識対象の各項目がどの位置にあるかを、始点座標（Ｓｘ，Ｓｙ）と終点座標（Ｅｘ，Ｅｙ）で指定する位置座標情報を含む。帳票認識時には、この認識テンプレートの位置座標情報に基づいて、対象項目の位置・領域が把握され、その位置・領域から文字や図形が認識される。従来技術における認識テンプレートでは、認識フォーマット情報によって認識する項目に対し、認識対象の文字列が存在する位置座標情報のみが指定されている。従来技術では、画面に表示された帳票画像上で、ユーザがマウス等のドラッグ操作、または始点と終点を指定するクリック等の操作によって、対象項目の領域を指定している。帳票毎に、認識テンプレートとして、このような各項目を指定する位置座標情報（言い換えるとテンプレート矩形）が管理されている。

それに対し、実施の形態１の帳票認識方法では、認識テンプレートに関して、上記従来技術のような単項目に関する機能に加え、以下のような機能を有する。この帳票認識方法では、既存の認識テンプレートおよび帳票認識結果に基づいて、バリエーションの帳票に対応するための認識テンプレートを自動的に作成する。また、この帳票認識方法では、帳票内における行数可変の表に対応させて、認識テンプレートの表項目を設定する。この表項目は、帳票内の表部分の複数の項目を１グループないし１セットとして管理するものである。また、この帳票認識方法では、帳票内の別紙貼付欄等の領域に対応させて、認識テンプレートの参照項目を設定する。この参照項目には、リンク等の記述によって、別の認識テンプレートが参照される。

（Ａ）は、従来技術における認識対象項目の指定例について示す。ユーザは、帳票画像５００内で、それぞれの認識対象項目（対応する認識対象文字列）を、ドラッグ操作等によって例えば囲むようにして指定する。それに応じて、コンピュータは、指定された領域毎の項目を、単項目情報として設定する。コンピュータは、それらの単項目情報を含んだ認識テンプレートを登録する。単項目の例として、破線枠で示す、項目５０１，５０２，５０３，５０４，５０５，５０６，５０７，５０８を示す。例えば、項目５０１は宛名、項目５０２は日付、項目５０３は品名、項目５０４は数量、項目５０５は単価、項目５０６は金額、項目５０７は合計金額、項目５０８は振込先である。項目５０３〜５０６は、表５１０を構成している列項目でもある。従来技術では、このような表５１０については、列の値毎に分けて、認識用の項目（言い換えるとテンプレート矩形）として指定されている。

（Ｂ）は、従来技術における（Ａ）の指定例に対応する認識テンプレートの構成例を示す。この認識テンプレートは、指定された項目の領域毎に、位置座標情報として、始点の位置座標（Ｓｘ，Ｓｙ）と終点の位置座標（Ｅｘ，Ｅｙ）を持つ。本例では、この認識テンプレートは、項目５０１〜５０８に対応する８個の単項目の情報を持つ。領域を指定する位置座標情報は、例えば始点が左上の点、終点が右下の点である。なお、領域を指定する情報は、始点・終点に限らず、幅や高さ、中心点等を用いて定義することも可能である。

［認識テンプレート（２）］
一方、図６は、実施の形態１の帳票認識方法における帳票画像や認識テンプレートの構成例を示す。図６の（Ａ）は、図５の（Ａ）の帳票に対するレイアウトのバリエーションの帳票における帳票画像６００である。このバリエーションの帳票は、表の値の行数が、図５の（Ａ）の表５１０では２行であるのに対し、図６の（Ａ）の表６１０では６行となっている。また、このバリエーションの帳票では、一部に、別紙貼付欄として、領収証６３０の貼付欄６２０を有する。

帳票画像６００において、項目６０１は宛名、項目６０２は日付、項目６０３は品名、項目６０４は数量、項目６０５は単価、項目６０６は金額、項目６０７は合計金額、項目６０８は振込先である。項目６０３〜６０６は、表６１０の各列の値を構成する複数（例えば４個）の項目である。それぞれ破線枠で示す項目６０３〜６０６は、１グループ、１セットとしてまとめられて、一点鎖線枠で示すように、表項目６１１として設定される。表項目６１１の矩形の領域には、それらの複数の項目（例えば項目６０３〜６０６）が包含されている。また、この際、表項目６１１とされるのは、項目値に関して縦方向に複数行があったとしても、図示のように最初の１行の部分のみでよい。認識テンプレート作成部１４は、帳票画像６００内からこのような表項目６１１を自動的に抽出し設定する。なお、本例では帳票画像内に１つの表があり１つの表項目が設定される場合を示すが、これに限らず、帳票画像内に複数の表がある場合でも同様に複数の表項目の設定が可能である。

また、実施の形態１の例では、貼付欄６２０に対応する領域が、１つの参照項目６２１として設定される。認識テンプレート作成部１４は、帳票画像６００内からこのような参照項目６２１を自動的に抽出し設定する。参照項目６２１の領域内では、別帳票として例えば領収証６３０に対応付けられる認識テンプレート（言い換えると参照項目認識テンプレート）が作成および適用される。本例では、参照項目６２１内では、領収証６３０を構成する複数の単項目として、項目６３１，６３２，６３３，６３４が設定されている。項目６３１は日付、項目６３２は宛名、項目６３３は金額、項目６３４は用途（例えば書籍代）である。なお、図示の例では、参照項目６２１内で、複数の項目は領収証６３０の画像とずれが生じている場合を示す。これは、貼付欄６２０において、貼り付けられる領収証６３０等の位置には上下左右にずれが生じ得るためである。参照項目６２１の領域の抽出は、例えば、「貼付欄」や「領収証」といった特定の文字列の検出に基づいて可能である。

（Ｂ）は、（Ａ）に対応する認識テンプレートの構成例を示す。この認識テンプレートは、従来技術と同様に単項目毎の項目情報６４１に加え、表項目情報６４２、および参照項目情報６４３を有する。項目情報６４１、表項目情報６４２、および参照項目情報６４３は、それぞれ領域を指定する位置座標情報を含む。また、この認識テンプレートは、図示しないが、検出用に特定の文字列（例えば「貼付欄」等）の情報も含む。

表項目情報６４２の位置座標情報は、例えば表項目６１１の領域の始点と終点の情報を含む。帳票内で指定された表項目６１１については、この帳票に関する認識テンプレート内に、表項目情報６４２として埋め込まれた形式で記述される。

参照項目情報６４３の位置座標情報は、例えば参照項目６２１の領域の始点と終点の情報と、リンクによって関連付けられる別帳票の別認識テンプレートを指定する情報とを含む。なお、各認識テンプレートは、テンプレートＩＤや更新日時等の基本情報も付与されて管理される。

上記表項目６１１の情報を含む認識テンプレートを用いた帳票認識時には、コンピュータ１は、表項目６１１内の複数の項目同士の位置関係を崩さずに、行方向の任意の数の行について繰り返し照合して認識する。

参照項目６２１の情報を含む認識テンプレートを用いた帳票認識時には、コンピュータ１は、参照項目６２１の領域内を１枚の別帳票とみなし、リンクによって参照される認識テンプレートを適用して認識する。

実施の形態１の変形例として、表項目を含む認識テンプレートについて、下記のような構成としてもよい。変形例の方法では、帳票全体の認識テンプレートに対し、例えば表項目６１１の部分のみを、表項目認識テンプレートとして分ける。帳票全体の認識テンプレート内に、リンクとして表項目認識テンプレートの情報が記述される。表項目認識テンプレートは、帳票全体の認識テンプレートと関連付けられた状態でＤＢ内に登録される。帳票認識時および認識テンプレート自動作成時には、既存の帳票全体の認識テンプレートに基づいて、リンクから表項目認識テンプレートが参照されて適用される。この変形例の場合、複数の種類の帳票の中に同様の表構造が現れる場合には、対応する表項目認識テンプレートを、複数の種類の帳票の認識テンプレートで共通に流用できる可能性があり、汎用性が高められる。

［認識テンプレート自動作成およびテンプレート登録画面］
図７は、認識テンプレート自動作成の際にユーザに対し表示するテンプレート登録画面の例を示す。図７では画面の一部を示す。コンピュータ１は、帳票認識結果に基づいて、認識テンプレートを自動作成し、この画面内に所定のＧＵＩと共に表示する。この画面は、大別して、帳票画像欄７００、帳票情報欄７０１、単項目情報欄７０２、表項目情報欄７０３、および参照項目情報欄７０４を有する。帳票情報欄７０１には、認識テンプレートを登録する対象となる帳票の帳票名等の情報が表示される。単項目情報欄７０２には、対象帳票および対応する認識テンプレート内における各単項目の情報が、例えば表形式で整理して表示される。各単項目の情報は、例えば項目、項目名、位置座標を有する。本例では、ユーザにとってわかりやすいように、項目番号を付与して表示しているが、省略可能である。位置座標は、例えば帳票画像の矩形の平面において、横軸をＸ、縦軸をＹとし、左上の点を原点（０，０）とする。

図８は、図７の画面のうちの帳票画像欄７００の表示例を示す。帳票画像欄７００では、帳票画像および認識テンプレート（単項目、表項目および参照項目を含む）の情報を表示する。帳票画像欄７００には、帳票画像ファイル１２２に基づいた帳票画像を下地として、その上に、破線枠で示すように、認識テンプレートの各項目（対応するテンプレート矩形）を表す画像が重ねて表示される。帳票画像欄７００には、ユーザが選択した種類の情報（例えば認識テンプレート）のみを表示することも可能である。また、帳票画像欄７００では、認識テンプレートの各項目、左側の各欄の情報との対応関係等がユーザにとってわかりやすくなるように、各項目の便宜上の識別記号８００の画像、例えば丸付き記号等を、近くの空いている位置等に表示してもよい。また、単項目と表項目と参照項目との区別がわかりやすいように、各種の項目について、青、黄、赤等の異なる色や、異なる線や図形を付けた表示画像としてもよい。

帳票内の単項目については、ＯＣＲによる帳票画像の認識結果の矩形領域に基づいて、認識テンプレートの単項目の位置座標情報（対応するテンプレート矩形）が作成される。帳票の状態やデータ化する過程において、各項目の位置にはずれが生じ得ることを考慮し、単項目の位置座標情報は、ＯＣＲによる矩形領域（例えば矩形領域８０１）に対し、例えば上下左右に１文字分程度拡大して設定されてもよい。ただし、拡大によってその領域が罫線や他の文字列と重なる場合には、重なる手前でその拡大を止める。また、ユーザによる編集の操作によって、各項目の領域の位置や大きさの調整を行うことも可能である。

表項目（例えば表項目８０２）については、帳票画像内から認識された表構造が、登録済みの認識テンプレートの表項目（または表項目認識テンプレート）の表構造と一致する場合に、自動的に表項目として設定され表示される。

参照項目（例えば参照項目８０３）については、帳票画像内において例えば複数の帳票名文字列や、別紙貼付欄等を表す特定の文字列が発見された場合に、それらの手がかりに基づいて、推定された領域が、参照項目として設定され表示される。例えば、コンピュータ１は、帳票画像内を左上から右下に向かって探索し、帳票名文字列や、特定の文字列（例えば「貼り付け」「添付」等）を抽出する。例えば、１番目に、図示のように紙面の左上の付近に「請求書」文字列８０４が発見され、２番目に、より下方の位置に「貼付欄」文字列８０６が発見され、３番目に、より下方の位置に「領収証」文字列８０５が発見される。コンピュータ１は、発見した文字列のうち、１番目の帳票名文字列を、その帳票の帳票名であると推定し、その１番目の帳票名文字列の位置から下に離れてある３番目の帳票名文字列（「領収証」）については、別帳票の帳票名であると推定する。また、コンピュータ１は、２番目の「貼付欄」文字列８０６については、別紙貼付欄があると推定する。よって、コンピュータ１は、「貼付欄」文字列８０６および「領収証」文字列８０５の付近の領域で、他の単項目や表項目とは重ならない範囲で確保される領域を、参照項目として設定する。なお、コンピュータ１は、帳票画像から、帳票名文字列に限らず、ある程度以上の大きさを持ち独立した線等の図形（例えば区切りの線や「貼付欄」の矩形）を発見することで、参照項目を設定してもよい。

なお、認識テンプレートを構成する項目に関して、コンピュータ１による認識結果の文字列の位置と、ユーザが抽出を期待する位置とに相違がある項目については、ユーザによる画面に対する編集の操作によって、その項目の位置を修正でき、その修正した状態を確認後に確定操作によって登録することができる。画面に対する編集の操作は、例えば、キーボード、マウス、タッチパネル等を用いた、クリックやドラッグ等の操作であり、例えば矩形領域の位置やサイズを変える操作等がある。より具体的には、例えば項目の矩形領域の位置をシフトしたい場合には、その矩形領域の内部をクリックして所望の方向へドラッグする操作が挙げられる。また例えば項目の矩形領域のサイズを変えたい場合には、その矩形領域の枠線等をクリックして縦または横へドラッグする操作が挙げられる。

図７で、表項目情報欄７０３では、最初、自動作成された表項目の情報、例えば表項目８０２の情報が表示される。表項目の情報は、表項目の識別記号、表項目を構成する複数の項目の情報、表項目の領域の位置座標情報、および表項目の属性を含む。表項目の識別記号（例えば「Ａ」）は省略可能である。表項目を構成する複数の項目の情報は、単項目情報欄７０２における対応する項目と対応関係を持つ。表項目８０２の例では、複数の項目は、単項目における項目３の品名、項目４の数量、項目５の単価、および項目６の金額である。表項目の領域の位置座標情報は、例えば表項目８０２の領域の左上点と右下点の情報であるが、最初の項目３の左上点と最後の項目６の右下点の情報としてもよい。表項目の属性７０３ｄは、値として「可変」と「固定」とから選択して設定できる。値「固定」は、この表項目の値の行数を固定とする場合に設定され、また、その行数を１〜Ｎの範囲から選択して設定できる。値「可変」は、この表項目の値の行数を可変とする場合に設定される。

また、「＋」ボタン７０３ｅがユーザによって押された場合、他の表項目の指定を追加することができ、上側の表項目「Ａ」のような列が同様に追加される。ユーザは、帳票画像欄７００に対する編集の操作に基づいて、他の表項目を指定して設定できる。例えば、ユーザは、クリック、ドラッグ等の操作によって、帳票画像内の所望の項目を個別に選択またはまとめて囲む等して指定する。これに応じて、指定された複数の項目を、表項目として設定できる。同様に、単項目や参照項目についても、「＋」ボタンを設けることで、ユーザによる追加の指定が可能である。

参照項目情報欄７０４では、最初、自動作成された参照項目の情報、例えば参照項目８０３の情報が表示される。参照項目の情報は、リンクとして参照される認識テンプレート（参照項目認識テンプレート）を指定する項目７０４ａと、その参照項目の識別記号や位置座標情報と、その参照項目の認識テンプレート内の複数の項目の情報とを有する。

なお、本例では、ある帳票内に１つの参照項目が設定される場合を示すが、複数の参照項目の設定も同様に適用可能である。その場合、上記参照項目情報欄７０４では、各参照項目について、同様の情報を並列に表示してもよいし、複数の参照項目の情報を表形式等でまとめて表示してもよい。

ユーザが図７および図８のようなテンプレート登録画面を見ながら認識テンプレートの作成や登録の作業を行う場合の操作例は以下が挙げられる。コンピュータ１は、図２のフローのステップ２０７に基づいて、対象帳票（帳票画像ファイル１２２）に対し、一旦、認識テンプレートを自動作成し、その作成結果の認識テンプレートを含むテンプレート登録画面を図７および図８のように表示する。コンピュータ１は、例えば、認識テンプレートにおいて表項目８０２や参照項目８０３を設定する。

ユーザは、その画面で、作成された認識テンプレートの内容、すなわち単項目、表項目、および参照項目等を確認する。ユーザは、表項目については、図７の表項目情報欄７０３で、構成要素となる複数の項目、位置、属性等を確認または編集する。ユーザは、自動作成によって提示された表項目や参照項目を、編集操作によって修正できる。また、ユーザは、自動作成によって提示された表項目や参照項目とは別の表項目や参照項目を、編集操作によって追加することもできる。例えば「＋」ボタン７０３ｅの押下によって表項目を追加できる。

また、図７の画面では、前述の表項目の繰り返し照合に関して、属性７０３ｄの値が「可変」の場合には、表の値の行数としてとり得る範囲（例えば最小１行から最大１０行まで等）を設定できるようにしてもよい。属性７０３ｄの値が「固定」の場合には、表の値の行数が設定できる。

［表項目に関する処理例（１）］
図９は、表項目に関する処理例を示す。（Ａ）は、ある帳票Ａの画像内のある表９００の部分の表構造の例と、その表９００の部分に対し認識テンプレート内で設定される表項目の例とを示す。本例で、表９００は、項目名に対応する行９１０の部分が、２行×３列から成り、項目名Ａ，Ｂ，Ｃ，Ｄ，Ｅの５個の項目名を有する。１列目の２個のセルは結合された１個の項目（項目名Ａ）となっている。表９００は、項目名に対応付けられた値（項目値）の行としては３行（行９０１，９０２，９０３）を有する。なお、例えばこれらの５個の単項目である項目Ａ〜Ｅについて、予め、項目毎に前述の認識フォーマット情報が設定されている。各認識フォーマット情報では、それらの複数の単項目の配置関係等については規定されていない。

コンピュータ１の認識テンプレート作成部１４は、帳票画像内から表９００の構造を認識する。その際の認識は、罫線を持つ表である場合には、抽出した罫線および文字列同士の関係を用い、罫線を持たない表である場合には、抽出した文字列同士の関係を用いる。コンピュータ１は、対象帳票から認識した表構造が、比較対象となる認識テンプレート内の表項目の表構造と一致すると判断した場合、その表構造の部分（特に項目値の１行目の部分）を、既知の表項目が適用できると判断し、一致しない場合には、その表構造の部分を、新たな表構造であるため既知の表項目は適用できないと判断する。ここでは、行９０１の表構造は、既存の認識テンプレートには無い新たな表構造であったとする。コンピュータ１は、表９００の値の複数行のうちの１行目の行９０１を参照し、項目名の行部分９１０と同様の表構造を持つことを確認する。また、コンピュータ１は、面内の縦方向（Ｙ）に探索し、表９００の値における１行目の行９０１の表構造と、表９００の領域の終わりまでの他の行９０２，９０３の表構造とが同じであることを確認する。そして、コンピュータ１は、１行目の行９０１における複数の項目（項目値Ａ〜Ｅ）を、１グループとして、新規の認識テンプレートの表項目９２０として決定する。コンピュータ１は、その新規の認識テンプレートの情報を、その帳票に対し適用するものとして、テンプレート登録画面に表示する。なお、表項目９２０は、全体では１行としてカウントされる。

上記表構造が一致する場合には、その表構造の部分を新規の表項目として決定・登録する必要は無く、既存の認識テンプレートの表項目（あるいは表項目認識テンプレート）が共通して適用できると判断される。コンピュータ１は、その既存の認識テンプレートの情報を、その帳票に対し適用するものとして、テンプレート登録画面に表示する。

また、（Ｂ）は、他の帳票Ｂの画像内の他の表９３０の部分の構造例と、表項目９２０を用いた繰り返し照合の例とを示す。この表９３０は、項目値の行数として５行（行９３１，９３２，９３３，９３４，９３５）がある。項目名９４０の部分は、（Ａ）の項目名９１０の部分と同様の表構造を持つ。コンピュータ１は、帳票認識時には、帳票画像から表部分を同様に抽出し、その表部分に対し、既存の認識テンプレートの表項目、例えば（Ａ）の表項目９２０を適用して照合する。コンピュータ１は、表項目９２０を１セットとして、複数行の各行について繰り返し照合を行う。コンピュータ１は、まず表９３０の値の１行目の行９３１に対し、表項目９２０を照合し、複数の項目の各領域（テンプレート矩形）に基づいて、各項目値Ａ〜Ｅの文字列を抽出する。コンピュータ１は、表９３０の値の他の行に対しても、同様に表項目９２０を繰り返し照合する。すなわち、コンピュータ１は、２行目の行９３２からは各項目値Ａ１〜Ｅ１の文字列を抽出し、３行目の行９３３からは各項目値Ａ２〜Ｅ２の文字列を抽出し、４行目の行９３４からは各項目値Ａ３〜Ｅ３の文字列を抽出し、５行目の行９３５からは各項目値Ａ４〜Ｅ４の文字列を抽出する。コンピュータ１は、それらの抽出した文字列を認識結果データ１２３に記載する。

なお、実施の形態１で表項目として扱うことができる表とは、近接する２つ以上の項目で構成され、１行の表でもよいし、１列の表でもよい。

コンピュータ１は、帳票画像内の表部分（始まりから終わりまでの部分）を認識する。例えば、（Ａ）の表９００の場合では、始点Ｐ１から終点Ｐ２までの領域が認識される。表項目９２０については、始点Ｐ３から終点Ｐ４までの領域が認識される。（Ｂ）の表９３０の場合では、始点Ｐ５から終点Ｐ６までの領域が認識される。コンピュータ１は、各表の大きさの違いによるずれの位置や長さも把握できる。

表９００と表９３０のように、表に関するバリエーションを持つ帳票同士の場合、表の後に続く各項目（例えば図８の合計金額や振込先）については、表の終わりを起点として同様の位置関係で配置されている。よって、コンピュータ１は、バリエーションを持つ帳票についても、表の終わりの把握に基づいて、表の後に続く各項目についての位置をシフトさせることで、共通の認識テンプレートを用いて対応することができる。

［表項目に関する処理例（２）］
図１０は、表項目に関する処理例を示す。（Ａ）の帳票画像１００１は、ある対象帳票の認識結果の帳票画像を示す。破線枠は、単項目のテンプレート矩形を示す。ドットパターン領域の文字列は、ＯＣＲによって認識された文字列を示す。（Ｂ）は、（Ａ）の対象帳票の認識に適用した認識テンプレートを、作成元の帳票画像１０１１の上に重ねて示す。（Ａ）の帳票は、（Ｂ）の帳票に対するバリエーションである。この認識テンプレートは、表１０１２に関する表項目１０１０を含んでいる。

（Ａ）の対象帳票の表１００２は、値の行数が２である。コンピュータ１は、この帳票の認識の際には、前述のように、表項目１０１０を、値の各行に繰り返し照合する。これにより、各行の各項目の文字列が認識される。（Ａ）の帳票は、表１００２の行数が、（Ｂ）の帳票の表１０１２の行数である６行に対し、２行に変わっている。そのため、表１００２の後に下側に続く項目部分についても帳票内での位置が変わっている。よって、（Ａ）の帳票に（Ｂ）の認識テンプレートを適用する際には、コンピュータ１は、属性「可変」、および表の値の行数の差を考慮して、表の後に続く項目部分についての認識を行う。

コンピュータ１は、認識テンプレート登録時の作成元の帳票の表構造（例えば罫線の枠の構造）と、現在の対象帳票の表構造（例えば罫線の枠の構造）とを比較し、その縦方向でのずれ量１０３０を算出してもよい。例えば、作成元の帳票の表１０１２の下辺の罫線の座標と、対象帳票の表１００２の下辺の罫線の座標との差から、縦方向でのずれ量１００３０が算出できる。コンピュータ１は、そのずれ量１０３０および認識テンプレートに基づいて、表１００２の後に続く項目（例えば項目１００４，１００５）の位置を推定し、その位置に合わせるように認識テンプレート内の対応する項目（テンプレート矩形）を下方向にシフトして適用する。対象帳票の表の行数が増える場合でも同様の処理が可能である。なお、表の罫線を用いた表構造の抽出処理については、従来技術を適用してもよい。

図１１は、表の罫線を用いた表構造の抽出処理の一例を示す。表は、点（格子点）と罫線との関係から構成できる。本例は、図９の表項目９２０に対応する一部を示す。格子点の例として点ｐ１〜ｐ５を有する。罫線の例として罫線Ｌ１〜Ｌ５を有する。各格子点は、罫線の交わりに関するタイプを有する。例えば、点ｐ１は、横方向の罫線Ｌ１と縦方向の罫線Ｌ４との交わりの点である。罫線で囲まれる領域（必ずしも全部が囲まれていなくてもよい）は、項目に対応しており、その項目に項目値等の文字列が含まれている場合がある。コンピュータ１は、このような格子点および罫線を抽出し解析することで、表構造、言い換えると複数の項目の関係を把握することができる。例えば、点ｐ１，ｐ２，ｐ４，ｐ５、罫線Ｌ１，Ｌ３，Ｌ４，Ｌ５で囲まれる領域は、文字列Ａを持つ項目であり、横の長さＨ１、縦の長さＶ１を持つ。同様に、各項目の位置や、項目同士の配置関係が把握できる。

罫線を持つ表の場合、コンピュータ１は、画像から罫線を検出し、各罫線で区分される項目を抽出し、その項目同士の関係から、表構造を判断できる。なお、罫線を持たない表の場合でも、コンピュータ１は、画像から複数の文字列を検出し、複数の文字列同士における配置関係（例えば文字列中心点同士の位置関係）を判断し、その配置関係から表構造を推定できる。コンピュータ１は、文字列の配置関係から、項目の大きさや項目間の距離を推定してもよい。コンピュータ１は、項目同士（対応する文字列同士）の距離が、十分に近い場合、例えば閾値以下である場合、その項目同士（対応する文字列同士）が、表構造としての関係を持つと推定してもよい。

図１０で、表の大きさのずれに関する処理に関しては、以下のようにしてもよい。表項目１０１０の位置座標情報から、表項目１０１０の領域の縦および横の長さがわかる。よって、コンピュータ１は、その表項目１０１０の長さの情報を用いて、各表の値の行数の差による長さ（縦方向でのずれ量１０３０）を概略的に算出し、同様に処理を行ってもよい。上記に限らず、ずれ量１０３０を算出できる任意の手段を用いればよい。

なお、従来技術の場合、上記のような表項目機能を持たないので、表の行数が異なるバリエーションの帳票について、同じ認識テンプレートを適用しようとしても、表の大きさに変動があることから、認識テンプレート内の項目の適用の位置が不適切な位置にずれてしまい、正しい認識はできない。

また、上記は、帳票が１枚のページ（例えば縦Ａ４用紙）で構成される場合を示したが、帳票は複数枚のページで構成されてもよく、その場合でも同様の方法が適用できる。例えば、ある帳票における連続する複数のページ（例えばページ１とページ２）において、それらのページに跨って、同様の表構造（複数の項目の配置関係が同じであるもの）があるとする。その場合、コンピュータ１は、それらのページの表構造の部分を、同じ表を構成している複数の部分であると推定する。そして、コンピュータ１は、その同じ表の部分について、上記と同様に、表項目の設定や、認識時の繰り返し照合を適用する。

図１２は、表項目に関する他の処理例を示す。この例は、表の項目の横幅が変動する場合を示す。（Ａ）の帳票１２０１は、横方向（Ｘ）に長く、表１２０２を含む。表１２０２に対し、右側には、単項目１２０３を有する。コンピュータ１は、（Ａ）の帳票１２０１に対し、表項目１２１０を含む認識テンプレートを作成する。

（Ｂ）の帳票１２１１は、（Ａ）の帳票１２０１に対するバリエーションである。この帳票１２１１は、表１２１２を含む。この表１２１２は、表１２０２に対し、複数の項目の配置関係は同じであるが、サイズが異なっている。具体的には、項目（列）毎の横幅が大きくなっている。表１２１２に対し、右側には、単項目１２１３を有する。単項目１２１３の位置は、単項目１２０３の位置に比べると、右側にずれている。

コンピュータ１は、（Ｂ）の帳票１２１１に対し、表構造の解析に基づいて、（Ａ）の表項目１２１０を含む認識テンプレートを同様に適用できると判断する。コンピュータ１は、（Ｂ）の帳票１２１１を認識する際には、例えば、表１２０２に対する表１２１２のサイズ（横幅等）の比率を算出し、その比率に応じて、表項目１２１０における複数の項目の適用の位置をシフトさせる、もしくは各項目のサイズを拡大／縮小させるように調整する。表項目１２１０ｂは、処理上で調整後の表項目を示す。これにより、表１２１２についても同じ表項目１２１０によって認識ができる。

また、コンピュータ１は、表１２１２の横方向、右側に続いている他の項目、例えば単項目１２１３の認識については、前述（図１０）の縦方向でのシフトと同様に、例えば各表の右辺の罫線に関する横方向でのずれ量１２３０を算出し、そのずれ量１２３０を用いて、単項目１２１３に対する認識テンプレートの対応する項目の適用の位置をシフトさせる。他の処理例として、表を構成する各項目の縦方向の長さが変動する場合等にも、同様の対応の処理が可能である。

［参照項目に関する処理例（１）］
図１３は、参照項目に関する処理例を示す。（Ａ）の帳票画像１３０１の例は、貼付欄１３０２を有する。貼付欄１３０２は、矩形の枠線を有する。また、貼付欄１３０２内には、領収証１３０３を貼り付ける際の基準やガイドとなる枠線１３０４も設けられている。この枠線１３０４は、領収証１３０３を囲むような大きさの罫線である。あるいは、この枠線１３０４の領域は、背景色の区別による領域であってもよい。例えば帳票全体の背景色が白であり、貼付欄１３０２または枠線１３０４の領域の背景色がグレーや緑等であってもよい。ユーザは、貼付欄１３０２内にその枠線１３０４に沿って領収証１３０３を貼り付ける。このような帳票の場合、コンピュータ１は、貼付欄１３０２の枠線に合わせて、またはその枠線を包含するように参照項目の領域を設定してもよいが、貼付欄１３０２内の枠線１３０４に合わせて、またはその枠線を包含するように参照項目の領域を設定してもよい。

（Ｂ）は、別の帳票画像１３０５の例を示す。この帳票画像１３０５は、違いとしては、貼付欄に関して、「貼付欄」のような文字列は無く、また、貼付欄自体を表す枠線も無く、領収証１３０３を貼り付ける際の基準を表す枠線も無い。このような帳票の場合、コンピュータ１は、例えば、帳票画像内から発見した「領収証」文字列１３０６に基づいて、その文字列から周囲の領域へ拡大して、その帳票（請求書）内の他の項目（単項目または表項目または参照項目）に当たるまでの領域を、参照項目１３０７として設定する。参照項目の領域は、貼り付けのずれを考慮して、なるべく広い領域として確保される。他の項目は、本例では、上側にある合計金額の単項目１３０８と、下側にある振込先の単項目１３０９とがある。例えば単項目１３０８の下端から単項目１３０９の上端までの間に、参照項目１３０７が設定される。また、「領収証」文字列１３０６の位置から下側に、単項目が無く、帳票の平面の下端に達する場合には、その平面の下端まで参照項目１３０７として設定される。本例では、帳票の平面の縦方向（Ｙ）に沿って、単項目や表項目や参照項目が存在する場合を説明したが、帳票の平面の横方向（Ｘ）に沿って、単項目や表項目や参照項目が存在する場合にも、上記と同様の処理によって、表項目や参照項目を設定することができる。

図１４は、他の帳票の例を示す。１つの帳票内に複数の貼付欄があってもよいし、１つの貼付欄内に複数の帳票が貼り付けられてもよい。このような帳票に対しても同様の対応が可能である。（Ａ）の帳票１４０１の例は、縦方向（Ｙ）で上から順に、「単項目１」、「単項目２」、「表項目１」、「参照項目１」、「表項目２」、「参照項目２」を有する。この帳票１４０１に対する認識テンプレートは、２個の表項目と、２個の参照項目とを持つ。

（Ｂ）の帳票１４０２の例は、縦方向で上から順に、「単項目１」、「単項目２」、「表項目１」、「貼付欄」を有し、さらに、「貼付欄」内において、横方向（Ｘ）の左右に、２個の参照項目として、「参照項目１」、「参照項目２」を有する。この帳票は、「貼付欄」内に、２個の別帳票を貼り付けることができる帳票であり、それに対応させて、認識テンプレートは、２個の参照項目を有する。

［参照項目に関する処理例（２）］
図１５は、参照項目に関する処理例を示す。図１５は、前述のテンプレート登録画面における帳票画像欄７００において、ある帳票（例えば申請書）の帳票画像１５００上に重ねるようにして、一旦自動作成された認識テンプレートの情報が表示されている。この認識テンプレートは、単項目である項目１５０１〜１５０５と、貼付欄に対応させて設定された参照項目１５１０とを有する。最初、参照項目１５１０内部の構成については決定されていない。

図１６は、テンプレート登録画面の表示例を示す。（Ａ）は、図１５の認識テンプレートに対応して、最初にテンプレート登録画面内に表示される単項目情報欄１６０２、表項目情報欄１６０３、および参照項目情報欄１６０４等の状態を示す。ユーザは、画面で、自動作成された認識テンプレートの構成を確認し、例えば参照項目１５１０の部分について編集を行う。例えば、ユーザは、参照項目１５１０内の別帳票（例えば領収証）に関する複数の項目（項目ｋ１〜ｋ４）についての指定を行う。

ユーザは、参照項目情報欄１６０４において、参照項目１５１０に関する参照する認識テンプレートを指定する。この際、ＤＢ内の既存の認識テンプレートを指定することもできるし、新規の認識テンプレートの作成を指定することもできる。ユーザは、例えば、参照テンプレート項目７０４ａのリストボックスを操作する。リストボックスには、選択肢として、「なし」／「あり（領域指定のみ）」／「帳票名」／「テンプレート名」／……等が表示され、ユーザはそれらから１つを選択できる。選択肢「帳票名」や「テンプレート名」は、ＤＢに登録済みの複数の帳票画像や認識テンプレートがある場合にはリストとして表示され選択できる。

選択肢「なし」は、提示された参照項目としての参照を行わないこと（別帳票の認識テンプレートを参照しないこと）を示す。この操作を受けた場合、コンピュータ１は、認識テンプレートにおける図１５の参照項目１５１０の設定を解除する。

選択肢「あり（領域指定のみ）」は、参照項目としての参照を行うこと、かつ、参照項目の領域を指定し、参照項目内部の複数の項目については指定しないことを示す。この操作を受けた場合、ユーザは、必要に応じて編集操作によってその参照項目１５１０の位置を調整し、コンピュータ１は、その参照項目１５１０を設定する。

選択肢「帳票名」は、参照項目としての参照を行うこと、かつ、認識テンプレートの作成のために用いる帳票画像の指定を示す。例えば、ある帳票名の帳票画像が選択される。コンピュータ１は、参照項目１５１０の領域において、その選択された帳票画像の配置に基づいて、参照項目１５１０の認識テンプレートを作成する。例えば、その認識テンプレートにおける複数の項目として、図１５中の項目ｋ１〜ｋ４が設定される。ユーザは、それらの項目を確認し、編集操作によって各項目の有無や位置等を調整できる。

選択肢「テンプレート名」は、参照項目としての参照を行うこと、かつ、既存の認識テンプレートの指定を示す。例えば、あるテンプレート名の認識テンプレートが選択される。コンピュータ１は、参照項目１５１０の領域において、その選択された認識テンプレートにおける複数の項目（例えば図１５中の項目ｋ１〜ｋ４）を配置する。ユーザは、それらの項目を確認し、編集の操作によって各項目の有無や位置等を調整できる。

参照項目１５１０内に複数の項目が設定された場合、図１６の（Ｂ）のように、参照項目情報欄１６０４の表示が更新される。（Ｂ）の参照項目情報欄１６０４内には、複数の項目（項目ｋ１〜ｋ４）の位置座標情報等が追加されている。

ユーザは、上記画面で参照項目１５１０の構成を確認または編集した後、ＯＫボタン等の操作によって、認識テンプレートとして確定してＤＢに登録することができる。また、画面では、登録する認識テンプレートについて、ユーザが名前を付けて保存することもできる。

図１７は、帳票全体の認識テンプレートと、参照項目の認識テンプレートとの関係を示す。図１７の（Ａ）は、例えば図１５の対象帳票１５００（申請書）に対して適用される認識テンプレート１７０１の概要を示し、（Ｂ）は、認識テンプレート１７０１のうちの参照項目１７１０に対してリンクによって適用される認識テンプレート１７０２（言い換えると参照項目認識テンプレート）を示す。（Ｂ）の認識テンプレート１７０２は、（Ａ）の認識テンプレート１７０１（対応する作成元の帳票画像１５００）のサイズに合わせて定義されており、複数の項目の位置は、認識テンプレート１７０１の作成元の帳票画像１５００の原点を基準とした位置とされている。（Ｃ）は、認識テンプレート１７０２に関する変形例としての認識テンプレート１７０３を示す。この認識テンプレート１７０３は、参照項目１７１０の領域に対応させたサイズで定義されており、複数の項目の位置は、参照項目１７１０の領域の原点を基準とした位置とされている。コンピュータ１は、内部処理としては、図１７のように、複数の認識テンプレートとして分割して関連付けた状態でＤＢ等に記憶および管理する。

変形例として、認識テンプレート内には、帳票名文字列の位置座標情報を記述してもよい。例えば、情報１７５１は、帳票名文字列（例えば「申請書」）の位置座標情報の例である。情報１７５２は、参照項目１５１０内の帳票名文字列（例えば「領収書」）の位置座標情報の例である。コンピュータ１は、このような帳票名文字列に関する情報を用いて、帳票名文字列と、複数の項目（単項目、表項目および参照項目）との配置関係を把握でき、その把握に基づいた処理例が可能である。

図１８は、参照項目に関する処理例を示す。（Ａ）は、ある帳票（例えば申請書）の帳票画像１８０１に対し、図１７の（Ａ）の認識テンプレート１７０１と同様の認識テンプレート１８１１を適用して認識した結果を示す。この帳票は、単項目の他、貼付欄１８０２を持ち、貼付欄１８０２に領収証１８０３が貼り付けられている。特に、貼付欄１８０２内で、下辺寄りの位置に領収証１８０３が貼り付けられている。コンピュータ１は、この帳票画像１８０１の全体に対し、まず認識テンプレート１８１１を適用して認識を行う。この認識テンプレート１８１１は、単項目の他、参照項目１８０４を持つ。この認識の結果、まず各単項目の認識結果の文字列が得られる。

次に、コンピュータ１は、（Ｂ）のように、帳票画像１８０１の参照項目１８０４の領域に対し、この認識テンプレート１８１１のリンクからの参照によって、例えば図１７の（Ｂ）の認識テンプレート１７０２と同様の認識テンプレート１８１２を適用する。この際、貼付欄１８０２内の領収証１８０３の位置は様々にあり得ることから、そのままでは、認識テンプレート１８１２の複数の項目（項目ｋ１〜ｋ４）の位置に対し、図示のようにずれがある。

そこで、コンピュータ１は、（Ｃ）のように、参照項目１８０３の領域内で、帳票名文字列（例えば「領収証」）を検出し、検出した帳票名文字列の位置に合わせて上記のずれを補正するように、認識テンプレート１８１２の複数の項目を、配置関係を維持したままシフトして適用して認識を行う。この認識の結果、領収証１８０３内の複数の項目についての認識結果の文字列が得られる。

なお、参照項目の領域およびそれに適用する認識テンプレートにおいて、さらに、階層的に、表項目や参照項目が含まれてもよい。その場合でも、上記の方法と同様の対応が可能である。

従来技術では、上記のような貼付欄を持つ帳票に対し所定の認識テンプレートを適用した場合、貼付欄内の別帳票の位置に対する認識テンプレートの項目の位置のずれが大きいと、正しい適用、認識ができない。ユーザは、その帳票に合わせて認識テンプレートを作成しなければならないので、手間が大きく、テンプレート数が増え、管理が複雑化してしまう。一方、実施の形態１の方法では、上記のように、参照項目内の別帳票の位置については、ある程度のずれが許容され、貼り付け位置が異なる帳票であっても、同じ認識テンプレートで対応できる。

［参照項目に関する処理例（３）］
図１９は、参照項目に関する他の処理例を示す。ある帳票の貼付欄に、第１帳票が貼り付けられる場合と、他の第２帳票が貼り付けられる場合とがあるとする。最初、第１帳票が貼り付けられた帳票を元として、第１認識テンプレートが作成され登録される。第１帳票が貼り付けられた帳票に対しては、この第１認識テンプレートによって対応可能である。一方、第２帳票が貼り付けられた帳票については、従来技術であれば、第１認識テンプレートによっては対応できないので、別の第２認識テンプレートの作成が必要となる。一方、実施の形態１の方法では、貼付欄に配置される別帳票に関して、複数の種類の帳票が存在する場合でも、少ない数の認識テンプレートで対応できる。

まず、（Ａ）は、前述の図１８の（Ａ）と同様であるが、ある帳票（申請書）の帳票画像１９０１の貼付欄１９０２に、第１帳票として、領収証１９０３が貼り付けられている。この帳票を対象に認識テンプレート１９１０が作成され、適用されている。認識テンプレート１９１０は、貼付欄１９０２に対応させて、参照項目１９０４を有する。参照項目１９０４は、別帳票として第１帳票（領収証１９０３）に対応させた認識テンプレート１９２０を参照するリンクが記述されている。

（Ｂ）は、（Ａ）と基本構成が同じである帳票（申請書）の帳票画像１９０５を示す。この帳票画像１９０５の貼付欄１９０２には、第２帳票として、例えば支払証明書１９０６が貼り付けられている。この帳票を対象に、認識テンプレート１９１０が適用された場合、参照項目１９０４については、第１帳票に対応した認識テンプレート１９２０が参照されるが、この認識テンプレート１９２０の複数の項目は、参照項目１９０４内の第２帳票の複数の項目とは合わないので、正しい認識はできない。

そこで、コンピュータ１は、参照項目１９０４の領域内から帳票名文字列を検出する。例えば「支払証明書」文字列が検出できる。コンピュータ１は、その帳票名文字列に適合する既存の認識テンプレートをＤＢ内から検索する。コンピュータ１は、適合する認識テンプレート（例えば認識テンプレート１９３０）があった場合、その認識テンプレート１９３０を、認識テンプレート１９１０の参照項目１９０４にリンクとして記述する。これにより、認識テンプレート１９１０の参照項目１９０４には、複数のリンクとして、第１帳票に対応できる認識テンプレート１９２０と、第２帳票に対応できる認識テンプレート１９３０との２つが記述される。言い換えると、この認識テンプレート１９１０の参照項目１９０４には、適用候補となる複数の認識テンプレートの情報が記述される。コンピュータ１は、この帳票（申請書）を認識する際には、例えば参照項目１９０４内の帳票名文字列に応じて、適合する方の認識テンプレートを選択して適用できる。

また、コンピュータ１は、上記ＤＢから検索した結果、適合する既存の認識テンプレートが無かった場合には、参照項目１９０４の領域内の画像を対象として、第２帳票に対応させた認識テンプレート１９３０を作成する。この認識テンプレート１９３０は、例えば（Ｃ）のような構成を有する。この認識テンプレート１９３０は、例えば支払証明書の領域内に、帳票名文字列の位置座標情報や、複数の単項目（項目ｋ３１，ｋ３２，ｋ３３，ｋ３４，ｋ３５）を持つ。

［効果等］
上記のように、実施の形態１の帳票認識プログラムおよび方法によれば、ユーザによる認識テンプレートの作成・登録の作業の手間を削減でき、レイアウトのバリエーションを持つ各種の帳票に関する多数の認識テンプレートの作成・登録の手間を削減できる。実施１の形態の帳票認識技術によれば、認識テンプレートの自動作成、または少なくとも一部の処理の自動化が可能となるので、以下の効果が期待できる。

（１）認識テンプレートの作成の自動化および特有のＧＵＩの提供によって、ユーザビリティが向上する。ユーザは、認識テンプレートの作成・登録の作業が容易にでき、手間が少ない。ユーザは、帳票の各バリエーション毎に認識テンプレートを作成・登録する作業が必要無く、１つの汎用認識テンプレートによって多数の帳票バリエーションに対応可能となる。

（２）また、認識テンプレートの登録数の低減によって、帳票管理に係わる工数が削減できる。ユーザは、汎用性が高い少ない数の認識テンプレートを管理すれば済む。従来では帳票のバリエーション毎に認識テンプレートの作成・登録が必要であったのに対し、実施の形態の帳票認識技術によれば、基本構造が同じでレイアウトのバリエーション（例えば表の行数や別紙貼付欄）を持つ複数の帳票に関して、従来よりも少ない数の汎用的な認識テンプレートの作成・登録による対応が可能となる。これにより、認識テンプレートの管理に係わるユーザの手間が大幅に削減でき、莫大な数の認識テンプレートの管理も不要となる。

（３）また、類似テンプレートによるテンプレート誤適用率が低減できる。従来では帳票のレイアウトの細かいバリエーションに応じて多数の類似の認識テンプレートが存在し、ユーザが誤った認識テンプレートを適用してしまうことがあった。実施の形態の技術によれば、そのような誤適用を防止できる。

（４）帳票認識の際には、登録済みの認識テンプレートとの比較が行われる。従来、多数の帳票のバリエーションに関する多数の認識テンプレートがある場合、その分、帳票認識の際に、誤認識が生じる可能性も高くなる。それに対し、実施の形態の帳票認識技術では、多数の帳票のバリエーションに対し、より少数の汎用認識テンプレートで対応できるので、帳票認識の際の誤認識の率も低減できる。

［変形例１］
他の実施の形態として以下も可能である。前述の実施の形態１の方法では、表項目において、構成要素である複数の単項目については、順序関係が規定されている。例えば、図６の表項目６１１の表構造では、複数の単項目が、横方向、左から右への方向において、項目６０３，６０４，６０５，６０６の順序での配置関係を持つ。一方、変形例１としては、表項目における複数の単項目についての順序関係の制限を設けない構成とする。言い換えると、表項目における複数の単項目の配置の順序を任意でよいとする。これにより、帳票のバリエーションとして、表を構成する複数の項目の配置順序が異なる複数の帳票が存在する場合にも対応できる。例えば、ある帳票では、項目６０３，６０５，６０４，６０６の並びとなる。変形例１の方法では、このような複数の帳票に対し、認識テンプレートの表項目に、複数の項目の配置順序が任意であることが記述される。例えば、図７の画面の表項目情報欄７０３で、属性７０３ｄに「複数の項目の配置順序が任意であること」を表す値が設定できる。コンピュータ１は、これらの帳票の表部分を認識する際には、属性および表項目の記述に基づいて、複数の項目の順序を適宜に並び替えて適用する。

以上、本発明を実施の形態に基づいて具体的に説明したが、本発明は前述の実施の形態に限定されず、要旨を逸脱しない範囲で種々変更可能である。

１…コンピュータ（帳票認識装置）、２…スキャナ装置、３…帳票、１１…帳票画像入力部、１２…帳票認識処理部、１３…認識結果出力部、１４…認識テンプレート作成部、１５…画面表示部、１６…設定部、１２１…帳票認識プログラム、１２２…帳票画像ファイル、１２３…認識結果データ、１２４…認識テンプレートデータ、1２５…設定情報。

Claims (12)

1. コンピュータが帳票画像からＯＣＲによる認識を行うための認識テンプレートを作成する帳票認識方法であって、
   前記コンピュータが実行するステップとして、
   ユーザの操作に基づいて、前記帳票画像についての認識テンプレート作成指示を入力する第１ステップと、
   前記帳票画像に対し、登録済みの第１認識テンプレートが適用できる場合には、適用してＯＣＲによる認識の結果を取得し、表示画面に前記認識の結果および前記第１認識テンプレートの情報を表示する第２ステップと、
   前記帳票画像に対し、前記第１認識テンプレートが適用できない場合には、第２認識テンプレートを作成し、前記表示画面に前記第２認識テンプレートの情報を表示する第３ステップと、
   前記表示画面で、前記ユーザの操作に基づいて、前記第１認識テンプレートまたは前記第２認識テンプレートに対する確認および修正を行い、前記帳票画像の認識に前記第１認識テンプレートまたは前記第２認識テンプレートを適用する設定として、前記第１認識テンプレートまたは前記第２認識テンプレートを登録する第４ステップと、
   前記帳票画像に対し、前記第２認識テンプレートを適用してＯＣＲによる認識の結果を取得し、前記表示画面に前記認識の結果を表示する第５ステップと、
   を有する、帳票認識方法。
2. 請求項１記載の帳票認識方法において、
   前記第２認識テンプレートは、認識フォーマット情報に基づいて作成される、前記帳票画像内の単項目毎の項目情報と、規則性を持つ複数の項目を１グループにまとめて、繰り返し照合が可能である表項目として設定される表項目情報と、を含み、
   前記第３ステップでは、前記コンピュータが、前記帳票画像から前記規則性を持つ複数の項目を抽出し、前記第２認識テンプレートに前記表項目を設定する、
   帳票認識方法。
3. 請求項１記載の帳票認識方法において、
   前記第２認識テンプレートは、認識フォーマット情報に基づいて作成される、前記帳票画像内の単項目毎の項目情報と、前記帳票画像の全体のうち一部の領域が別の帳票の第３認識テンプレートを参照するための参照項目として設定される参照項目情報と、を含み、
   前記第３ステップでは、前記コンピュータが、前記帳票画像から前記一部の領域を抽出し、前記第２認識テンプレートに前記参照項目を設定する、
   帳票認識方法。
4. 請求項２記載の帳票認識方法において、
   前記表項目情報は、前記帳票画像内の表における前記複数の項目が前記表項目として設定される情報であり、
   前記第３ステップでは、前記コンピュータが、前記帳票画像内の表における前記複数の項目として、前記表の値の行数または列数に依らずに、１行または１列の部分を前記表項目として設定し、
   前記第５ステップでは、前記コンピュータが、前記帳票画像内の表に対し、前記第２認識テンプレートの前記表項目を適用して認識を行う際に、前記表の値の２行目以降の各行または２列目以降の各列について、前記表項目の前記複数の項目を繰り返し照合して認識を行う、
   帳票認識方法。
5. 請求項２記載の帳票認識方法において、
   前記第５ステップでは、前記コンピュータが、前記帳票画像内の表のサイズと、前記第２認識テンプレートの作成元の帳票画像内の表のサイズとから、それらの表同士のずれ量を算出し、前記ずれ量に基づいて、前記帳票画像内の表の後に続く項目について、前記第２認識テンプレート内の項目の位置をシフトさせて適用する、
   帳票認識方法。
6. 請求項２記載の帳票認識方法において、
   前記第３ステップでは、前記コンピュータが、前記表示画面に、前記表項目情報を確認および編集するためのグラフィカル・ユーザ・インタフェース情報を表示し、
   前記グラフィカル・ユーザ・インタフェース情報は、前記表項目を構成する前記複数の項目の情報と、前記表項目の位置情報と、前記表項目を適用する対象となる表の値の行数または列数に関する固定または可変の属性情報と、を有する、
   帳票認識方法。
7. 請求項３記載の帳票認識方法において、
   前記第３ステップでは、前記コンピュータが、前記帳票画像内から特定の文字列を検出した場合に、前記特定の文字列から周辺に他の項目に重ならない範囲で拡大した領域を、前記参照項目として設定する、
   帳票認識方法。
8. 請求項３記載の帳票認識方法において、
   前記第３ステップでは、前記コンピュータが、前記第２認識テンプレート内の前記参照項目に、前記第３認識テンプレートとして、参照候補となる複数の認識テンプレートを関連付けるように設定する、
   帳票認識方法。
9. 請求項３記載の帳票認識方法において、
   前記第３ステップでは、前記コンピュータが、前記表示画面に、前記参照項目情報を確認および編集するためのグラフィカル・ユーザ・インタフェース情報を表示し、
   前記グラフィカル・ユーザ・インタフェース情報は、前記参照項目の位置情報と、前記第３認識テンプレートの情報と、を有する、
   帳票認識方法。
10. コンピュータに帳票画像からＯＣＲによる認識を行うための認識テンプレートを作成する処理を実行させる帳票認識プログラムであって、
    ユーザの操作に基づいて、前記帳票画像についての認識テンプレート作成指示を入力する第１ステップと、
    前記帳票画像に対し、登録済みの第１認識テンプレートが適用できる場合には、適用してＯＣＲによる認識の結果を取得し、表示画面に前記認識の結果および前記第１認識テンプレートの情報を表示する第２ステップと、
    前記帳票画像に対し、前記第１認識テンプレートが適用できない場合には、第２認識テンプレートを作成し、前記表示画面に前記第２認識テンプレートの情報を表示する第３ステップと、
    前記表示画面で、前記ユーザの操作に基づいて、前記第１認識テンプレートまたは前記第２認識テンプレートに対する確認および修正を行い、前記帳票画像の認識に前記第１認識テンプレートまたは前記第２認識テンプレートを適用する設定として、前記第１認識テンプレートまたは前記第２認識テンプレートを登録する第４ステップと、
    前記帳票画像に対し、前記第２認識テンプレートを適用してＯＣＲによる認識の結果を取得し、前記表示画面に前記認識の結果を表示する第５ステップと、
    を実行させる、帳票認識プログラム。
11. 請求項１０記載の帳票認識プログラムにおいて、
    前記第２認識テンプレートは、認識フォーマット情報に基づいて作成される、前記帳票画像内の単項目毎の項目情報と、規則性を持つ複数の項目を１グループにまとめて、繰り返し照合が可能である表項目として設定される表項目情報と、を含み、
    前記第３ステップでは、前記コンピュータが、前記帳票画像から前記規則性を持つ複数の項目を抽出し、前記第２認識テンプレートに前記表項目を設定する、
    帳票認識プログラム。
12. 請求項１０記載の帳票認識プログラムにおいて、
    前記第２認識テンプレートは、認識フォーマット情報に基づいて作成される、前記帳票画像内の単項目毎の項目情報と、前記帳票画像の全体のうち一部の領域が別の帳票の第３認識テンプレートを参照するための参照項目として設定される参照項目情報と、を含み、
    前記第３ステップでは、前記コンピュータが、前記帳票画像から前記一部の領域を抽出し、前記第２認識テンプレートに前記参照項目を設定する、
    帳票認識プログラム。

Images