JP7559415B2 - 情報処理装置、情報処理方法、情報処理プログラム、情報処理システム - Google Patents

Description

本発明は、帳票の認識を行う情報処理装置、情報処理方法、情報処理プログラム、情報処理システムに関する。

従来から、帳票画像から文字列を読み取り、読み取った文字列から、互いに対応付く文字列を、項目名と項目値として抽出する帳票認識技術が知られている。

帳票のレイアウトは多種多様であり、その中には、予め固定された項目名と項目値とを含む帳票が存在する。従来の技術では、このように予め固定された項目名と項目値に対しても、帳票認識を行う度に、ユーザによる帳票認識結果の確認が要求され。また、従来では、予め固定された項目名と項目値が正しく抽出されていない場合には、その都度ユーザによる修正が必要となる。

このように、従来の技術では、予め固定された項目名と項目値に対しても、ユーザによる確認作業や修正作業等が発生するため、作業が煩雑であり、ユーザの負荷となる。

本発明は、上記事情に鑑みて成されたものであり、ユーザの負荷を軽減させることを目的としている。

開示の技術は、帳票情報に含まれる文字列の定義した情報を参照して帳票画像データから、帳票の発行元を示す情報を抽出し、前記帳票の発行元と対応付けられた入金先情報が格納された記憶部を参照して、前記帳票の発行元を示す情報と対応する入金先情報を取得する情報取得部と、前記帳票の発行元を示す情報と、前記情報取得部により取得された前記入金先情報と、を含む画面データを端末装置へ出力する表示制御部と、金融機関情報に含める文字列の定義を示す定義情報と、金融機関情報に含める文字列を抽出する際の条件を示す条件情報とを参照し、前記帳票画像データから金融機関情報を抽出する抽出部と、を有し、前記情報取得部は、前記記憶部から前記帳票の発行元を示す情報と対応する入金先情報が取得されなかった場合に、前記抽出部により抽出された前記金融機関情報を前記帳票の発行元を示す情報と対応する入金先情報に設定する、情報処理装置である。

ユーザの負荷を軽減させることができる。

帳票認識システムのシステム構成の一例を示す図である。 サーバ装置のハードウェア構成の一例を示す図である。 抽出定義データベースの一例を示す第一の図である。 抽出定義データベースの一例を示す第二の図である。 辞書データベースの一例を示す図である。 取引先データベースの一例を示す図である。 サーバ装置の機能を説明する図である。 帳票認識システムの動作を説明するシーケンス図である。 ジョブリストの一例を示す図である。 帳票認識部の処理を説明する第一のフローチャートである。 帳票認識部の処理を説明する第二のフローチャートである。 文字認識について説明する図である。 金融機関情報の抽出結果の一例を示す図である。 認識結果データの一例を示す図である。 帳票認識部の処理を説明する第三のフローチャートである。 帳票認識部の処理を説明する第四のフローチャートである。 表示例を示す第一の図である。 表示例を示す第二の図である。 表示例を示す第三の図である。 表示例を示す第四の図である。 表示例を示す第五の図である。 表示例を示す第六の図である。 出力データの一例を示す図である。

以下に図面を参照して、実施形態について説明する。図１は、帳票認識システムのシステム構成の一例を示す図である。

本実施形態の帳票認識システム１００は、サーバ装置２００、画像形成装置３００、端末装置４００を有する。本実施形態の帳票認識システム１００において、サーバ装置２００と、画像形成装置３００と、端末装置４００とは、ネットワークを介して接続される。

また、本実施形態の端末装置４００は、例えば、ネットワークを介して基幹システム５００と接続される。基幹システム５００とは、例えば、本実施形態の帳票認識システム１００において帳票を認識した結果を用いて、特定の処理を行うシステムである。

本実施形態では、請求書を帳票の一例として説明する。

本実施形態の帳票認識システム１００は、請求書を読み取った帳票画像から、請求書を発行した請求元と、請求金額を示す情報（請求書情報）を抽出する。そして、帳票認識システム１００は、請求元と請求金額の入金となる金融機関とを対応付けた取引先情報を参照し、抽出された請求元と対応する金融機関を特定する。尚、取引先情報は、予めサーバ装置２００に格納された情報であり、項目名と項目値とが固定された情報である。つまり、言い換えれば、取引先情報は、請求元（帳票の発行元）と対応付けられた固定情報である。取引先情報の詳細は後述する。

また、本実施形態では、帳票認識により、帳票画像から、請求金額の入金先となる金融機関に関する情報（金融機関情報）を抽出し、取引先情報から特定された金融機関を示す情報と照合してもよい。

また、基幹システム５００は、金融機関に対する請求金額の振込等を行う会計システムであってもよい。

本実施形態の帳票認識システム１００において、サーバ装置２００は、画像形成装置３００のスキャナ機能によって読み取られた帳票の画像を示す画像データから、帳票に含まれる項目と項目の値とを抽出し、項目と項目の値とを対応付けたテキストデータとする。

以下の説明では、画像形成装置３００のスキャナ機能によって読み取られた帳票の画像を帳票画像と呼び、帳票画像を示す画像データを帳票画像データと呼ぶ。

また、以下の説明では、帳票画像に含まれる項目の名称（項目名）と、この項目の値（項目値）とを抽出し、項目と項目の値とをテキストデータに変換して対応付けることを、帳票認識と呼ぶ。

本実施形態のサーバ装置２００は、記憶部２２０と、帳票認識処理部２３０とを有する。記憶部２２０には、画像データベース２４０、抽出定義データベース２５０、辞書データベース２６０、取引先データベース２７０、認識結果データベース２８０が設けられている。

画像データベース２４０は、帳票画像データが格納される。抽出定義データベース２５０は、抽出定義情報が格納される。抽出定義情報は、帳票画像から金融機関情報に含まれる文字列を抽出する際に、帳票認識処理部２３０に参照される。

辞書データベース２６０は、金融機関を特定するための辞書情報が格納される。辞書情報は、予め取得された情報であり、帳票認識処理部２３０により、金融機関名等を特定する際に参照される。

取引先データベース２７０は、帳票認識システム１００が提供するサービスを利用する組織（テナント）の取引先に関する取引先情報が格納される。テナントとは、言い換えれば、請求書を受け取る請求先である。また、テナントの取引先とは、請求書を受け取ったテナントから、請求書に記載された金額の支払いを受ける組織である。つまり、テナントの取引先とは、言い換えれば、請求書を発行した請求元（帳票の発行元）である。取引先情報は、テナント毎に予め取引先データベース２７０に格納された情報であり、予め項目名と項目値とが固定された情報である。

認識結果データベース２８０は、帳票認識処理部２３０による帳票認識の結果を示す情報が格納される。

本実施形態の帳票認識処理部２３０は、画像データベース２４０に格納された帳票画像データを取得し、文字認識を行って、帳票画像に含まれる文字列群を抽出する。そして、帳票認識処理部２３０は、文字列群から請求書情報を抽出する。また、帳票認識処理部２３０は、抽出定義データベース２５０に格納された抽出定義情報２５３を参照して、文字列群から、金融機関情報に含める文字列を抽出する。

本実施形態の抽出定義情報２５３は、金融機関情報に含める文字列の定義を示す定義情報２５１と、金融機関情報に含める文字列を抽出する際の条件を示す条件情報２５２とを含む。

帳票認識処理部２３０は、定義情報２５１を参照して、文字認識により抽出された文字列群から、金融機関名と対応する文字列を特定し、特定された文字列との位置関係に基づき、金融機関名を示す文字列（第一の文字列）を抽出する。

つまり、第一の文字列は、文字認識によって抽出された文字列群から特定された文字列を基点として抽出される。言い換えれば、文字認識によって抽出された文字列群から特定された文字列は、第一の文字列の抽出基点となる文字列となる。

また、帳票認識処理部２３０は、条件情報２５２を参照し、金融機関名を示す文字列（第一の文字列）との位置関係に基づき、金融機関情報に含める他の文字列（第二の文字列）を抽出する。

つまり、第二の文字列は、第一の文字列を基点として抽出される。言い換えれば、第一の文字列は、前の抽出基点に基づき特定された文字列であって、第二の文字列の抽出基点となる文字列となる。

そして、帳票認識処理部２３０は、帳票画像データから、第一の文字列と第二の文字列とを対応付けて金融機関情報とする。

また、帳票認識処理部２３０は、抽出定義情報２５３に基づき抽出された文字列と、辞書データベース２６０に格納された辞書情報とに基づき、金融機関名等を確定させる。そして、帳票認識処理部２３０は、請求書情報と、金融機関情報とを対応付けた認識結果を認識結果データベース２８０へ格納する。

また、本実施形態の帳票認識処理部２３０は、取引先データベース２７０を参照し、帳票認識によって抽出された請求書情報に含まれる請求元と対応する取引先情報を特定する。そして、帳票認識処理部２３０は、取引先情報に含まれる金融機関を示す情報を、請求金額の入金先を示す入金先情報として、請求書情報と共に、端末装置４００に表示させてもよい。

本実施形態では、このように、入金先情報を取引先データベース２７０から取得することで、例えば、帳票画像データから抽出された金融機関情報に誤りがあった場合でも、予め固定された項目名と項目値である入金先情報を取得することができる。

したがって、本実施形態によれば、帳票認識を行う度に、ユーザ（テナント）が金融機関情報を確認する必要になく、ユーザの負担を軽減できる。

また、本実施形態において、入金先情報は、認識結果データの一部として、請求書情報及び金融機関情報と対応付けられて、認識結果データベース２８０に格納されてもよい。

また、帳票認識処理部２３０は、認識結果データを、基幹システム５００と対応する形式に変換し、基幹システム５００に対して出力してもよい。

本実施形態では、このように、帳票認識における文字認識によって、金融機関名と対応する文字列と対応付けられた複数の文字列を抽出することができる。言い換えれば、本実施形態によれば、帳票画像から抽出された文字列と対応づけられた複数の文字列を抽出することができ、帳票の認識の精度を向上させることができる。

本実施形態の帳票認識システム１００において、画像形成装置３００は、スキャナ機能を有する複合機である。画像形成装置３００は、コピー機能、ＦＡＸ機能、スキャナ機能等を実現するためのアプリケーションが搭載されており、各機能と対応するアプリケーションを選択することで、これらの機能が実現される。

本実施形態の端末装置４００は、帳票認識システム１００を利用する利用者（テナント）によって使用される。また、端末装置４００には、サーバ装置２００による帳票認識の結果が表示されてもよい。

尚、本実施形態におけるテナントとは、例えば、企業等である。より具体的には、例えば、テナントとは、帳票認識システム１００が提供するサービスを利用するための契約を締結している事業所や企業、団体等である。

また、図１の例では、サーバ装置２００は、記憶部２２０内に５つのデータベースを有する構成としたが、これに限定されない。各データベースは、一部がサーバ装置２００の外部装置に設けられていてもよいし、各データベース全てが外部装置に設けられていてもよい。

また、図１の例では、サーバ装置２００が帳票認識処理部２３０を実現するものとしたが、これに限定されない。帳票認識処理部２３０は、複数の情報処理装置によって実現されてもよい。

また、図１の例では、帳票認識システム１００に含まれる画像形成装置３００と端末装置４００とは、それぞれ１台としているが、帳票認識システム１００に含まれる画像形成装置３００と端末装置４００の台数は、任意の数であって良い。

次に、図２を参照して、本実施形態のサーバ装置２００のハードウェア構成について説明する。図２は、サーバ装置のハードウェア構成の一例を示す図である。

図２に示されているように、サーバ装置２００は、コンピュータによって構築されており、図２に示されているように、ＣＰＵ２０１、ＲＯＭ２０２、ＲＡＭ２０３、ＨＤ２０４、ＨＤＤ(Hard Disk Drive)コントローラ２０５、ディスプレイ２０６、外部機器接続Ｉ／Ｆ(Interface)２０８、ネットワークＩ／Ｆ２０９、バスライン２１０、キーボード２１１、ポインティングデバイス２１２、ＤＶＤ－ＲＷ(Digital Versatile Disk Rewritable)ドライブ２１４、メディアＩ／Ｆ２１６を備えている。

これらのうち、ＣＰＵ２０１は、サーバ装置２００全体の動作を制御する。ＲＯＭ２０２は、ＩＰＬ等のＣＰＵ２０１の駆動に用いられるプログラムを記憶する。ＲＡＭ２０３は、ＣＰＵ２０１のワークエリアとして使用される。ＨＤ２０４は、プログラム等の各種データを記憶する。ＨＤＤコントローラ２０５は、ＣＰＵ２０１の制御にしたがってＨＤ２０４に対する各種データの読み出し又は書き込みを制御する。ディスプレイ２０６は、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示する。外部機器接続Ｉ／Ｆ２０８は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリやプリンタ等である。ネットワークＩ／Ｆ２０９は、通信ネットワークを利用してデータ通信をするためのインターフェースである。バスライン２１０は、図２に示されているＣＰＵ２０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

また、キーボード２１１は、文字、数値、各種指示などの入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス２１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。ＤＶＤ－ＲＷドライブ２１４は、着脱可能な記録媒体の一例としてのＤＶＤ－ＲＷ２１３に対する各種データの読み出し又は書き込みを制御する。なお、ＤＶＤ－ＲＷに限らず、ＤＶＤ－Ｒ等であってもよい。メディアＩ／Ｆ２１６は、フラッシュメモリ等の記録メディア２１５に対するデータの読み出し又は書き込み（記憶）を制御する。

本実施形態の端末装置４００のハードウェア構成は、サーバ装置２００と同様であるから、説明を省略する。尚、端末装置４００は、例えば、タブレット型の端末装置や、スマートフォン等であってもよく、キーボード２１１やポインティングデバイス２１２と、ディスプレイ２０６の代わりに、タッチパネル等により実現される表示操作装置を有していてもよい。

次に、図３、図４を参照して、本実施形態のサーバ装置２００の有する抽出定義データベース２５０について
図３は、抽出定義データベースの一例を示す第一の図である。図３では、抽出定義データベース２５０に格納された抽出定義情報２５３に含まれる定義情報２５１の一例を示す。

定義情報２５１は、情報の項目として、項目名、抽出基点、抽出方向、抽出範囲、辞書参照を有する。抽出定義データベース２５０において、項目「項目名」とその他の項目とは対応付けられており、項目「項目名」の値と、その他の項目の値とを含む情報が定義情報２５１となる。

項目「項目名」の値は、項目値と対応付けられる項目名を示す。項目「項目名」の値は、項目名と対応する項目「抽出基点」の値が示す文字列との位置関係に基づき抽出される。言い換えれば、項目「項目名」の値は、第一の文字列又は第二の文字列に対応付けられる項目名である。

また、項目「項目名」の値は、金融機関情報に含まれる情報の項目でもある。図３の例では、項目「項目名」の値として、銀行名、支店名、口座種別、口座番号、口座名義が含まれる。これらの値は、金融機関情報の項目となる。

項目「抽出基点」の値は、項目「項目名」の値が示す項目名の項目値となる文字列を抽出する際に、基点となる文字列を示す。

項目「抽出方向」の値は、基点になる文字列と、項目「項目名」の値が示す項目名の項目値となる文字列との位置関係を示す。言い換えれば、項目「抽出方向」の値は、過去に抽出された文字列であって、基点となる文字列（第一の文字列）に対して、項目「項目名」の値が示す項目名の項目値となる文字列（第二の文字列）が存在する方向を示す。

項目「抽出範囲」の値は、抽出する文字列の数を示す。項目「辞書参照」の値は、辞書データベース２６０に格納された辞書情報を参照して文字列を確定させる処理を行うか否かを示す。

図３では、例えば、項目名「銀行名」の項目値となる文字列は、帳票画像から抽出された文字列群のうち、「金融機関」、「振込先」等の文字列の右方向又は下方向に位置する文字列であり、該当する文字列の数は１つであり、辞書データベース２６０に基づき確定される文字列である。

また、例えば、項目名「支店名」の項目値となる文字列は、項目名「銀行名」の項目値として抽出された文字列を抽出基点として、抽出基点となる文字列の右側に位置する文字列、又は、抽出基点となる文字列の下側に位置する文字列であり、該当する文字列の数は１つであり、辞書データベース２６０に基づき確定される文字列である。

したがって、ここでは、項目名「銀行名」と対応する項目値として抽出された文字列が第一の文字列となり、項目名「支店名」と対応する項目値として抽出された文字列が第二の文字列となる。

また、例えば、項目名「口座種別」の項目値となる文字列は、項目名「支店名」の項目値として抽出された文字列を抽出基点として、抽出基点となる文字列の右側に位置する文字列、又は、抽出基点となる文字列の下側に位置する文字列、又は、抽出基点となる文字列の左側に位置する文字列である。また、項目名「口座種別」の項目値となる文字列は、該当する文字列の数は、２つであり、辞書データベース２６０に基づき確定される文字列である。

この場合、項目名「支店名」と対応する項目値として抽出された文字列が第一の文字列となり、項目名「口座種別」と対応する項目値として抽出された文字列が第二の文字列となる。

図４は、抽出定義データベースに一例を示す第二の図である。図４は、抽出定義情報２５３に含まれる条件情報２５２を示す。

条件情報２５２は、情報の項目として、支店名抽出条件、口座種別抽出条件、口座番号抽出条件を有する。抽出定義データベース２５０において、項目「項目名」の値を含む情報が条件情報２５２となる。

項目「支店名抽出条件」の値は、項目名「支店名」の項目値として抽出される文字列の条件を示す。項目「口座種別抽出条件」の値は、項目名「口座種別」の項目値として抽出される文字列の条件を示す。項目「口座番号抽出条件」の値は、項目名「口座番号」の項目値として抽出される文字列の条件を示す・
図４では、項目名「支店名」の項目値として抽出される文字列の条件を、文字列の末尾に、「支店」、「本店」、「店」、「営業所」、「営業部」等であることとしている。また、項目名「口座種別」の項目値として抽出される文字列の条件を、文字列に、「普」、「通」、「当」、「座」、「貯」、「蓄」を含むこととしている。また、項目名「口座番号」の項目値として抽出される文字列の条件を、数字としている。

次に、図５を参照して、辞書データベース２６０について説明する。図５は、辞書データベースの一例を示す図である。

本実施形態の辞書データベース２６０に格納される辞書情報は、情報の項目として、銀行名と支店名とを有し、各項目は対応付けられている。本実施形態において、項目「銀行名」の値と、項目「支店名」の値と、を対応付けた情報が辞書情報である。

図５の例では、銀行名「ＸＸＸ銀行」には、「ＡＡＡ支店」、「ＣＣＣ支店」、「ＥＥＥ支店」が存在することがわかる。

次に、図６を参照して、取引先データベース２７０について説明する。図６は、取引先データベースの一例を示す図である。

本実施形態の取引先データベース２７０は、テナント毎に設けられていてよい。取引先データベース２７０は、情報の項目として、テナント名、取引先名、基本情報、取引担当者、支払情報等を含む。

取引先データベース２７０において、項目「テナント名」とのその他の項目とが対応付けられている。本実施形態において、取引先データベース２７０において、項目「テナント名」の値と、その他の項目の値とを含む情報が、取引先情報である。

項目「テナント名」の値は、テナントの名称を示し、テナントを特定するための情報である。尚、テナントを特定するための情報として、テナント名以外の情報を用いても良い。具体的には、例えば、テナントを特定するための情報として、テナントＩＤ等を用いてもよい。

項目「取引先名」の値は、テナントの取引先の名称を示し、取引先を特定するための情報である。尚、取引先とは、請求書の請求元である。したがって、本実施形態の項目「取引先名」の値は、帳票（請求書）の発行元を特定するための情報である。尚、項目「取引先名」の値は、取引先を特定するための情報であればよく、取引先（請求元）を特定する取引先ＩＤ等であってもよい。

項目「基本情報」の値は、取引先名で特定される取引先の電話番号、住所等を含む情報である。項目「取引担当者」の値は、取引担当者の名称や連絡先等を含む情報である。

項目「支払情報」には、項目「支払方法」、「金融機関名」、「支店名」、「口座種別」、「口座番号」、「口座名義」、「手数料負担」、「支払条件」等が対応付けられている。

項目「支払方法」の値は、取引先に対する請求金額の支払い方法を示す。項目「金融機関名」の値は、請求金額の入金先となる金融機関を示す。項目「支店名」の値は、請求金額の入金先となる金融機関の支店名を示し、項目「口座種別」、「口座番号」、「口座名義」のそれぞれの値は、口座種別、口座番号、口座名義を示す。

項目「手数料負担」の値は、支払いの際に生じる手数料を支払う側を示す。項目「支払条件」の値は、支払いを行う際の条件を示す。

本実施形態では、取引先データベース２７０において、項目「支払情報」と対応付けられた項目「金融機関名」、「支店名」、「口座種別」、「口座番号」、「口座名義」のそれぞれの値を含む情報が、請求金額の入金先を示す入金先情報となる。

このように、本実施形態の取引先情報は、項目名と項目値とが、帳票の発行元に応じて予め固定された固定情報である。より具体的には、本実施形態の取引先データベース２７０に格納された取引先情報に含まれる入金先情報は、項目値と項目値が帳票の発行元に応じて予め決められた固定情報である。固定情報とは、帳票に含まれる情報のうち、帳票の発行元に応じて予め決められた情報である。すなわち、固定情報は、同一発行元により発行された帳票であれば、変化しない情報である。

尚、図６は、取引先データベース２７０の一例を示すものであり、取引先データベース２７０は、図６に示す全ての項目を含まなくてもよい。取引先データベース２７０は、例えば、項目「テナント名」、「取引先名」の値と、入金先情報を示す項目「金融機関名」、「支店名」、「口座種別」、「口座番号」、「口座名義」の値と、を含んでいればよい。

また、テナント毎の取引先情報には、例えば、各テナントが保有する金融機関の口座情報等を含んでいてもよい。言い換えれば、取引先情報には、請求金額の支払元となる支払元情報が含まれてもよい。

次に、図７を参照して、サーバ装置２００の機能について説明する。図７は、サーバ装置の機能を説明する図である。

本実施形態のサーバ装置２００では、例えば、ＨＤ５０４等に格納された情報処理プログラムをＣＰＵ２０１が読み出して実行することで、後述する各部の機能が実現される。

本実施形態のサーバ装置２００は、帳票認識処理部２３０を有する。帳票認識処理部２３０は、入力受付部２２１、認証処理部２２２、帳票認識部２９０を有する。

入力受付部２２１は、サーバ装置２００に対する各種の入力を受け付ける。具体的には、入力受付部２２１は、帳票認識システム１００にログインするための認証情報の入力を受け付ける。認証情報とは、例えば、利用者ＩＤとパスワード等である。また、入力受付部２２１は、例えば、画像形成装置３００から送信された帳票画像データの入力を受け付ける。

認証処理部２２２は、入力受付部２２１が入力を受け付けた認証情報に基づき、認証を行う。尚、認証処理部２２２は、例えば、サーバ装置２００の外部に設けられた認証サーバに対して、入力された認証情報を送信し、認証サーバによる認証の結果を取得してもよい。認証処理部２２２は、利用者が認証されると、入力受付部２２１が受け付けた帳票画像データを帳票認識部２９０に渡してもよい。

本実施形態の帳票認識部２９０は、画像データ格納部２９１、ジョブリスト生成部２９２、画像データ取得部２９３、文字認識部２９４、第一抽出部２９５、第二抽出部２９６、認識結果生成部２９７、更新部２９９、表示制御部２８４、出力部２８５を有する。

画像データ格納部２９１は、画像形成装置３００から帳票画像データを受信すると、画像データベース２４０に格納する。

ジョブリスト生成部２９２は、入力受付部２２１が画像形成装置３００から帳票画像データの入力を受け付けて、ジョブリストにジョブを登録し、ジョブリストを管理する。ジョブリストの詳細は後述する。

画像データ取得部２９３は、画像データベース２４０に格納された帳票画像データを取得する。

文字認識部２９４は、帳票画像データから、文字列と、文字列が配置された位置を示す情報とを抽出し、読取結果情報として保持する。したがって、読取結果情報には、帳票画像データから抽出された文字列群が含まれる。読取結果情報の詳細は後述する。

第一抽出部２９５は、読取結果情報から、請求書を発行した請求元を示す情報、請求金額を示す情報を、文字列として抽出し、請求書情報とする。尚、第一抽出部２９５は、例えば、予め請求書情報に含まれる文字列の定義を示す情報等を保持し、この情報に基づき。請求書情報に含まれる文字列を抽出してもよい。

第二抽出部２９６は、抽出定義データベース２５０の定義情報２５１と、条件情報２５２とを参照して、金融機関情報を抽出する。第二抽出部２９６の処理の詳細は後述する。

このことから、第一抽出部２９５は、帳票画像データから請求書情報を抽出する請求書情報抽出部の一例であり、第二抽出部２９６は、帳票画像データから金融機関情報を抽出する金融機関情報抽出部の一例である。

認識結果生成部２９７は、第一抽出部２９５により抽出された請求書情報と、第二抽出部２９６により抽出された金融機関情報と、を対応付けた認識結果データを生成する。

情報取得部２９８は、取引先データベース２７０から、請求書情報に含まれる請求元と対応する支払情報を取得する。具体的には、情報取得部２９８は、取引先データベース２７０を参照し、第一抽出部２９５が抽出した請求書情報に含まれる請求元と、取引先名とが一致する取引先情報を特定する。そして、情報取得部２９８は、特定した取引先情報に含まれる支払情報を取得する。さらに、本実施形態の情報取得部２９８は、取得された支払情報から、支払情報に含まれる入金先情報を取得する。

更新部２９９は、端末装置４００に表示された認識結果の確認画面に表示された入金先情報に対して、編集が行われた場合等に、取引先データベース２７０を更新する。

表示制御部２８４は、端末装置４００等における画面の表示を制御する。具体的には、表示制御部２８４は、端末装置４００に表示される認識結果確認画面を示す画面データを生成してもよい。

出力部２８５は、表示制御部２８４が生成した認識結果確認画面を示す画面データを端末装置４００へ出力する。言い換えれば、出力部２８５は、表示制御部２８４が生成した認識結果確認画面を端末装置４００のウェブブラウザ（表示部）上で表示させる。また、出力部２８５は、認識結果データを、基幹システム５００と対応する形式のデータに変換し、出力する。

以下に、図８を参照して、本実施形態の帳票認識システム１００の動作について説明する。図８は、帳票認識システムの動作を説明するシーケンス図である。

帳票認識システム１００において、画像形成装置３００は、利用者から帳票認識を行うためのアプリケーションの起動要求を受け付けると（ステップＳ８０１）、このアプリケーションを起動させる（ステップＳ８０２）。利用者とは、例えば、テナントの管理者等である。

続いて、画像形成装置３００は、利用者から認証情報の入力を受け付けると（ステップＳ８０３）、この認証情報をサーバ装置２００へ送信し、認証要求を行う（ステップＳ８０４）。

サーバ装置２００は、認証要求を受けて、認証処理部２２２により認証を行い、その結果を画像形成装置３００へ通知する（ステップＳ８０５）。尚、ここでは、利用者が認証された場合の動作を示している。

続いて、画像形成装置３００は、帳票のスキャン指示を受け付け（ステップＳ８０６）、帳票のスキャンを行い、帳票画像データを取得する（ステップＳ８０７）。続いて、画像形成装置３００は、帳票画像データをサーバ装置２００へ送信する（ステップＳ８０８）。

サーバ装置２００は、入力受付部２２１が帳票画像データの入力を受け付けると、認証処理部２２２がこの帳票画像データを帳票認識部２９０へ渡す（ステップＳ８０９）。尚、図８の例では、認証処理部２２２を介して帳票画像データが帳票認識部２９０へ渡されるものとしたが、これに限定されない。帳票画像データは、認証処理部２２２を介さずに帳票認識部２９０に渡されてもよい。

サーバ装置２００の帳票認識部２９０は、帳票画像データを受け取ると、ジョブリスト生成部２９２により、ジョブリストにジョブを登録する（ステップＳ８１０）。続いて、帳票認識部２９０は、画像データ格納部２９１により、帳票画像データを画像データベース２４０へ格納する（ステップＳ８１１）。

続いて、帳票認識部２９０は、画像データ取得部２９３により、画像データベース２４０から認識する対象となる帳票画像データを取得し（ステップＳ８１２）、帳票画像を認識する処理を実行する（ステップＳ８１３）。

具体的には、本実施形態の帳票認識部２９０は、第一抽出部２９５により、読取結果情報に含まれる文字列群から請求書情報を抽出し、第二抽出部２９６により、文字列群から金融機関情報を抽出し、認識結果生成部２９７により、請求書情報と金融機関情報とを対応付けた認識結果データを生成する。

また、帳票認識部２９０は、補完部２９８により、読取結果情報に含まれる文字列群を辞書データベース２６０に基づき補完した、補完後読取結果情報を生成する。ステップＳ８１３の処理の詳細は後述する。

続いて、帳票認識部２９０は、認識結果生成部２９７が生成した認識結果データを認識結果データベース２８０に格納する（ステップＳ８１４）。

帳票認識システム１００において、端末装置４００は、利用者からのブラウザの表示指示の入力を受け付けると（ステップＳ８１５）、サーバ装置２００に対して認識結果データを表示させるブラウザの表示要求を行う（ステップＳ８１６）。

また、端末装置４００は、利用者から認証情報の入力を受け付けて（ステップＳ８１７）、この認証情報をサーバ装置２００へ送信する（ステップＳ８１８）。

サーバ装置２００は、認証処理部２２２により、利用者の認証を行い（ステップＳ８１９）、その結果を端末装置４００へ通知する（ステップＳ８２０）。尚、ここでは、利用者が認証された場合の処理を示す。

続いて、端末装置４００は、利用者から、帳票画像の認識結果の閲覧指示の入力を受け付けると（ステップＳ８２１）、サーバ装置２００に対して閲覧要求を行う（ステップＳ８２２）。

サーバ装置２００は、閲覧要求を受けて、認識結果データベース２８０に格納されている認識結果データを取得する（ステップＳ８２３）。続いて、サーバ装置２００は、認識結果データに含まれる支払情報を取得する（ステップＳ８２４）。ステップＳ８２４の処理の詳細は後述する。

続いて、サーバ装置２００は、認識結果確認画面を生成して端末装置４００のブラウザ上に表示させ（ステップＳ８２５）、利用者に、表示された認識結果確認画面で認識結果を確認させて、処理を終了する。

ここで、図９を参照して、本実施形態のジョブリスト生成部２９２により生成されるジョブリストについて説明する。図９は、ジョブリストの一例を示す図である。

本実施形態のサーバ装置２００は、画像形成装置３００から帳票画像データが入力されると、ジョブリスト生成部２９２により、帳票画像データとジョブＩＤとを対応付けたジョブリストとして保持する。

本実施形態のジョブリスト９１は、情報の項目として、ジョブＩＤ、利用者ＩＤ、帳票画像ファイルパス、認識結果ファイルパス、ステータスを有する。

項目「ジョブＩＤ」の値は、ジョブを特定する識別子である。言い換えれば、項目「ジョブＩＤ」の値は、画像形成装置３００から受信した帳票画像データを特定するための識別子である。

項目「利用者ＩＤ」の値は、帳票認識システム１００にログインした利用者を特定するための識別子である。

項目「画像ファイルパス」の値は、帳票画像データが格納されている場所を示す情報である。項目「認識結果ファイルパス」の値は、帳票画像を認識した結果の認識結果データが格納されている場所を示す情報である。

項目「ステータス」の値は、帳票画像の認識の進捗を示す。言い換えれば、項目「ステータス」の値は、ジョブの状態を示す。

本実施形態では、項目「ステータス」の値として、未処理状態、下書き保存状態、確定済み状態、外部出力済み状態の４つがある。各状態は、以下の通りである。

・未処理状態（状態１） 帳票認識によって認識結果データが取得された直後であり、認識結果の確認等が行われていない状態。

・下書き保存状態（状態２） 認識結果データの確認等の作業の途中等であり、認識結果データが確定される前の状態。

・確定済み状態（状態３） 認識結果データの確認等の作業が完了し、確定された情報として認識結果データベース２８０へ格納された状態。
・外部出力済み状態（状態４） 帳票認識システム１００と連携する会計システム等への認識結果データの出力が完了した状態。

本実施形態のサーバ装置２００は、画像形成装置３００から帳票画像データを受信すると、ジョブリスト生成部２９２により、ジョブＩＤを付与し、認証情報として取得した利用者ＩＤを対応付けて、ジョブリスト９１にレコードを追加する。そして、ジョブリスト生成部２９２は、帳票画像データが画像データベース２４０に格納されると、この格納先を示す情報を項目「画像ファイルパス」の値として、追加する。

さらに、ジョブリスト生成部２９２は、帳票画像の認識において、参照する帳票定義情報が特定されると、その定義ＩＤを項目「定義ＩＤ」の値として追加する。そして、ジョブリスト生成部２９２は、ジョブリスト９１が完了して、認識結果データが認識結果データベース２８０に格納されると、この格納先を示す情報を項目「認識結果ファイルパス」の値として追加し、項目「ステータス」の値を完了とする。

本実施形態では、例えば、ジョブリスト生成部２９２によって生成されたジョブリストを表示してもよい。この場合、利用者は、ジョブリストに基づいて表示されたジョブリスト画面を介して、帳票画像の認識の進捗を確認することができる。

次に、図１０と図１１を参照して、本実施形態の帳票認識部２９０の処理について説明する。図１０では、図８のステップＳ８１３の処理の詳細を示している。

図１０は、帳票認識部の処理を説明する第一のフローチャートである。より具体的には、図１０では、金融機関情報における項目名「銀行名」の項目値となる文字列を抽出する処理を示している。

本実施形態の帳票認識部２９０は、画像データ取得部２９３により、画像データベース２４０から帳票画像データを取得する（ステップＳ１００１）。

続いて、帳票認識部２９０は、文字認識部２９４により、帳票画像から、文字が形成されている領域（以下、文字フィールド）を切り取り、切り取られた文字フィールドの中の文字を切り取り、文字認識する（ステップＳ１００２）。このとき、文字認識部２９４は、切り出した文字の位置を示す座標も取得する。

続いて、帳票認識部２９０は、文字認識部２９４により認識された各文字の位置関係に基づいて読取結果情報を生成して、保持する（ステップＳ１００３）。具体的に、帳票認識部２９０は、認識された各文字の座標に基づいて、互いの距離が予め設定された閾値以内の文字を１つの文字列として認識し、文字列と、文字列が形成された領域の位置を示す座標などの情報とを対応付けて読取結果情報を生成する。読取結果情報の詳細は後述する。

続いて、帳票認識部２９０は、第二抽出部２９６により、読取結果情報に含まれる文字列群の中から、定義情報２５１における項目名「銀行名」と対応する抽出基点とされた文字列と、一致する文字列を特定する（ステップＳ１００４）。尚、第二抽出部２９６は、項目名「銀行名」と対応する抽出基点と一致する文字列が存在しない場合には、抽出基点とされた文字列と、一部が一致する文字列を特定してもよい。言い換えれば、第二抽出部２９６は、項目名「銀行名」の項目値を抽出するための基点となる文字列を特定する。

続いて、第二抽出部２９６は、ステップＳ１００３において、項目名「銀行名」の抽出基点となる文字列が特定されたか否かを判定する（ステップＳ１００５）。

ステップＳ１００５において、該当する文字列が特定されない場合、第二抽出部２９６は、項目名「銀行名」の項目値を抽出する処理を終了する。

ステップＳ１００５において、項目名「銀行名」の抽出基点となる文字列が特定された場合、第二抽出部２９６は、読取結果情報に含まれる文字列群の中から、定義情報２５１において、項目名「銀行名」と対応する抽出方向が示す方向に配置された文字列を抽出する（ステップＳ１００６）。ここで抽出される文字列は、項目名「銀行名」の項目値となる文字列である。

続いて、第二抽出部２９６は、辞書データベース２６０に格納された辞書情報と、ステップＳ１００６で抽出された文字列とを照合して、項目名「銀行名」の項目値を決定し（ステップＳ１００７）、項目名「銀行名」の項目値を抽出する処理を終了する。

尚、実施形態では、第二抽出部２９６による金融機関情報の抽出が行われる前に、第一抽出部２９５により、帳票画像データから請求書情報を抽出する処理が行われてもよい。また、第一抽出部２９５による請求書情報を抽出する処理は、第二抽出部２９６による金融機関情報を抽出する処理が行われた後に行われてもよい。

尚、図１０の例では、第二抽出部２９６は、ステップＳ１００７において、辞書データベース２６０に格納された辞書情報を参照して、銀行名の項目値を決定するものとしたが、第二抽出部２９６は、辞書データベース２６０を参照しなくてもよい。

図１１は、帳票認識部の処理を説明する第二のフローチャートである。図１１では、金融機関情報における項目名「銀行名」に続く項目名の項目値となる文字列を抽出する処理を示している。

本実施形態の帳票認識部２９０は、第二抽出部２９６により、定義情報２５１を参照し、項目値を抽出する対象の項目名（抽出対象項目名）に対応する抽出基点となる文字列と、抽出方向と、を取得する（ステップＳ１１０１）。

続いて、第二抽出部２９６は、抽出基点となる文字列が取得されたか否かを判定する（ステップＳ１１０２）。ステップＳ１１０２において、該当する文字列が取得されない場合、第二抽出部２９６は、後述するステップＳ１１０５へ進む。

ステップＳ１１０２において、該当する文字列が取得された場合、第二抽出部２９６は、定義情報２５１を参照し、取得した文字列と抽出方向に沿って、抽出範囲内に配置され、且つ、条件情報２５２を満たす文字列を取得する（ステップＳ１１０３）。

続いて、第二抽出部２９６は、ステップＳ１１０３において、該当する文字列が取得されたか否かを判定する（ステップＳ１１０４）。ステップＳ１１０４において、該当する文字列が取得された場合、第二抽出部２９６は、後述するステップＳ１１０７へ進む。

ステップＳ１１０４において、該当する文字列が取得されない場合、第二抽出部２９６は、次の抽出基点となる文字列が存在するか否かを判定する（ステップＳ１１０５）。

ステップＳ１１０５において、該当する文字列が存在する場合、第二抽出部２９６は、ステップＳ１１０１へ戻る。

ステップＳ１１０５において、該当する文字列が存在しない場合、第二抽出部２９６は、定義情報２５１に含まれる各項目名の項目値を空として（ステップＳ１１０６）、後述するステップＳ１１１０へ進む。したがって、本実施形態では、ここでは、項目名「銀行名」の項目値が抽出されない場合には、金融機関情報の全ての項目名の項目値が空となる。

ステップＳ１１０４において、該当する文字列が取得できない場合、第二抽出部２９６は、定義情報２５１における項目「辞書参照」の値を参照し、辞書データベース２６０を参照するか否かを判定する（ステップＳ１１０７）。

ステップＳ１１０７において、辞書データベース２６０を参照しないと判定された場合、第二抽出部２９６は、後述するステップＳ１１０９へ進む。

ステップＳ１１０７において、辞書データベース２６０を参照すると判定された場合、第二抽出部２９６は、辞書データベース２６０を参照し、抽出された文字列と照合する（ステップＳ１１０８）。

続いて、第二抽出部２９６は、項目名の項目値となる文字列を決定する（ステップＳ１１０９）。

続いて、第二抽出部２９６は、定義情報２５１に含まれる全ての項目名に、項目値を対応付けたか否かを判定する（ステップＳ１１１０）。ステップＳ１１１０において、全ての項目値が対応付けられていない場合、第二抽出部２９６は、ステップＳ１１０１へ戻る。

ステップＳ１１１０において、全ての項目名に項目値が対応付けられている場合、帳票認識部２９０は、認識結果生成部２９７により、金融機関情報と請求書情報とを対応付けた認識結果データを生成する（ステップＳ１１１１）。

続いて、認識結果生成部２９７は、認識結果データの格納先をジョブリスト９１に登録し（ステップＳ１１１２）、処理を終了する。

このように、本実施形態の第二抽出部２９６は、抽出基点とされた文字列との位置関係に基づき抽出された文字列を、次の抽出基点となる文字列する処理を繰り返していく。そして、本実施形態の第二抽出部２９６は、抽出基点とされた文字列との位置関係に基づき抽出された文字列を、抽出基点とされた文字列と対応する項目名の項目値とする。

次に、図１２、図１３Ａ、図１３Ｂを参照し、帳票認識部２９０の処理について具体的に説明する。図１２は、文字認識について説明する図である。

図１２に示す情報１２１は、帳票画像データに対し、文字認識部２９４による文字認識を行った結果である。

情報１２１は、文字フィールドを切り取り、文字フィールドの中の文字を認識した結果と、文字の位置を示す座標とから抽出した例を示す。

本実施形態の文字認識部２９４は、この情報１２１から、隣り合う位置にある文字同士をつなげて文字列（文字列）を認識する。具体的には、文字認識部２９４は、文字と文字との間の距離が、所定ピクセル以内である文字の組み合わせを、１つ単語として認識しても良い。

図１２に示す情報１２２は、文字認識部２９４により認識された文字列と、文字列の領域とを示す情報であり、文字認識部２９４による帳票画像の読取結果情報である。

また、文字認識部２９４は、帳票画像データから、縦線と横線で区切られた領域を１つのセルとして認識し、セル毎にセルを識別する識別情報（セルＩＤ）を付与する。

図１２に示す情報１２２は、帳票画像から認識されたセル毎の領域とセルＩＤとの対応付けを示す情報である。

図１２では、例えば、文字列「お振込先」が認識された領域は、情報１２１において、Ｘ座標とＹ座標によって示される位置を基準として、高さと幅とから特定される。

また、情報１２１において、キーワード「氏名」が認識された領域は、セルＩＤ「２」に含まれることがわかる。したがって、キーワード「お振込先」は、読取結果情報に含まれる文字列として、セルＩＤ「３７」と対応付けられる。

本実施形態の帳票認識部２９０は、このようにして、帳票画像データから、文字列とセルとを対応付ける。

図１３Ａは、金融機関情報の抽出結果の一例を示す図である。本実施形態の第二抽出部２９６は、まず、図１０の処理により、金融機関情報に含まれる項目のうち、銀行名が抽出される。

具体的には、第二抽出部２９６は、定義情報２５１において、先頭の項目名「銀行名」の抽出基点となる文字列を、読取結果情報に含まれる文字列群から特定する。そして、第二抽出部２９６は、定義情報２５１によって規定された、特定した文字列（第一の文字列）との位置関係に基づき、項目名「銀行名」の項目値となる文字列を特定する。

定義情報２５１では、項目名「銀行名」は、抽出基点の文字列の右方向、又は、下方向に位置する文字列である。

ここでは、例えば、読取結果情報の文字列群の中から、「お振込先」という文字列が特定されると、第二抽出部２９６は、この「お振込先」を抽出基点して、「お振込先」の右側又は下側に位置する文字列を、項目名「銀行名」の項目値とする。

尚、定義情報２５１において、抽出方向が複数定義されている場合、最初に定義された抽出方向から順に、該当する位置における文字列の有無を判定していく。

図１３Ａの例では、項目「銀行名」の項目値として、「ＸＸＸ銀行」という文字列が特定されたことがわかる。

尚、ここで、例えば、文字認識によって、項目「銀行名」の項目値に特定された文字列が示す銀行名が、誤っていた場合でも、第二抽出部２９６は、辞書情報と照合し、特定された文字列と部分一致する文字列を、銀行名を示す文字列とする。

次に、第二抽出部２９６は、定義情報２５１において、次の項目名「支店名」と対応する抽出基点の文字列を特定する。定義情報２５１では、項目名「支店名」の抽出基点となる文字列は、抽出済みの銀行名である。したがって、ここでは、「ＸＸＸ銀行」が抽出基点の文字列となる。

第二抽出部２９６は、項目名「支店名」と対応する抽出方向が、右と下であるため、はじめに、「ＸＸＸ銀行」の右側に配置された文字列の有無を判定する。そして、該当する位置に文字列が存在する場合、この文字列を、項目名「支店名」の項目値とする。

また、第二抽出部２９６は、右側に該当する文字列が存在しない場合、「ＸＸＸ銀行」の右側に配置された文字列の有無を判定する。そして、該当する位置に文字列が存在する場合には、その文字列を、項目名「支店名」の項目値とする。

第二抽出部２９６は、この処理を、金融機関情報に含まれる全ての項目名について行い、各項目名と、項目値とを対応づけた情報が、金融機関情報１３１として抽出される。

図１３Ｂは、認識結果データの一例を示す図である。本実施形態の認識結果データ１４１は、第二抽出部２９６によって抽出された金融機関情報１３１と、第一抽出部２９５によって抽出された請求書情報１４２とが対応付けられたデータを含む。尚、本実施形態の認識結果データでは、入金先情報を含まれてもよい。図１３Ｂに示す認識結果データ１４１は、入金先情報が認識結果データに含まれる前の状態であってもよい。

請求書情報１４２には、例えば、情報の項目として、請求書を特定するための請求書番号、請求書の発行元（請求元）、請求日、請求金額等が含まれる。

次に、図１４を参照して、図８のステップＳ８２４の処理の詳細を説明する。図１４は、帳票認識部の処理を説明する第三のフローチャートである。図１４では、帳票認識部２９０の情報取得部２９８による処理を示している。

本実施形態の情報取得部２９８は、図８のステップＳ８２３において、認識結果データを取得すると、取引先データベース２７０を参照する（ステップＳ１４０１）。続いて、情報取得部２９８は、取引先データベース２７０に、取引先情報の取引先名が、認識結果データに含まれる請求書情報の請求元と完全に一致する取引先情報が存在するか否かを判定する（ステップＳ１４０２）。

ステップＳ１４０２において、取引先データベース２７０に該当する取引先情報が存在する場合、情報取得部２９８は、後述するステップＳ１４１０へ進む。

ステップＳ１４０２において、取引先データベース２７０に該当する取引先情報が存在しない場合、情報取得部２９８は、取引先データベース２７０に、取引先情報の取引先名と請求書情報の請求元との標準化編集距離が基準値以下となる取引先情報が存在するか否かを判定する（ステップＳ１４０３）。尚、ここでは、取引先名が、請求元と類似している取引先情報が存在するか否かを判定すれば良く、類似しているか否かを判定する方法は、標準化編集距離を求める方法以外の方法であってもよい。

ステップＳ１４０３において、取引先データベース２７０に、該当する取引先情報が存在する場合、情報取得部２９８は、後述するステップＳ１４０９へ進む。

ステップＳ１４０３において、取引先データベース２７０に該当する取引先情報が存在しない場合、情報取得部２９８は、第二抽出部２９６により、金融機関情報が抽出さされているか否かを判定する（ステップＳ１４０４）。

具体的には、情報取得部２９８は、認識結果データ１４１に金融機関情報１３１が含まれているか否かを判定している。

ステップＳ１４０４において、金融機関情報が抽出されていない場合、情報取得部２９８は、後述するステップＳ１４１１へ進む。

ステップＳ１４０４において、金融機関情報が抽出されている場合、情報取得部２９８は、抽出された金融機関情報が複数存在するか否かを判定する（ステップＳ１４０５）。

ステップＳ１４０５において、複数の金融機関情報が抽出されていない場合、つまり、抽出された金融機関情報が１つであった場合、情報取得部２９８は、この金融機関情報を入金先情報に設定し（ステップ１４０６）、後述するステップＳ１４１１へ進む。

ステップＳ１４０５において、複数の金融機関情報が抽出されていた場合、情報取得部２９８は、端末装置４００に金融機関情報の選択画面を表示させ（ステップＳ１４０７）、択された金融機関情報を入金先情報に設定し（ステップＳ１４０８）、後述するステップＳ１４１１へ進む。

ステップＳ１４０３において、取引先データベース２７０に、該当する取引先情報が存在する場合、情報取得部２９８は、標準化編集距離が最小となる取引先情報を参照する（ステップＳ１４０９）。

続いて、情報取得部２９８は、参照した取引先情報に含まれる支払情報を取得し、支払情報に含まれる入金先情報を設定する（ステップＳ１４１０）。

続いて、情報取得部２９８は、第二抽出部２９６により抽出された金融機関情報と、取引先データベース２７０の取引先情報に含まれる入金先情報とを比較し、両者が一致するか否かを判定する（ステップＳ１４１１）。

ステップＳ１４１１において、両者が一致しない場合、情報取得部２９８は、認識結果の確認画面に表示させるアラートを生成し、処理を終了する。

ステップＳ１４１１において、両者が一致する場合、情報取得部２９８は、処理を終了する。

本実施形態では、このように、帳票画像データから抽出された請求元と取引先名が一致する、又は、類似する取引先情報を取引先データベース２７０から取得し、取引先情報の一部として、予め格納されている支払情報に含まれる入金先情報を認識結果データに設定する。

したがって、本実施形態では、テナントが請求元に対して請求金額の支払いを行う際に、認識結果の確認画面に表示された入金先情報を毎回確認する必要がなく、テナント（ユーザ）の作業負荷を軽減させることができる。

また、本実施形態では、取引先データベース２７０に、請求元と対応する取引先情報が存在しない場合には、帳票画像データから抽出された金融機関情報を入金先情報として設定するため、テナント（ユーザ）が入金先情報を入力する手間を削減できる。

さらに、本実施形態では、取引先データベース２７０かに取得した入金先情報と、帳票画像データから抽出した金融機関情報とを比較し、一致しない場合には、認識結果の確認画面において、アラートを表示させる。したがって、本実施形態によれば、サーバ装置２００によって抽出された入金先情報が正しいか否かの確認をユーザに促すことができる。

次に、図１５を参照して、認識確の確認画面に表示された入金先情報が更新された場合の更新部２９９の処理について説明する。図１５は、帳票認識部の処理を説明する第四のフローチャートである。図１５に示す処理は、認識結果の確認画面において、認識結果データの状態を、確定済みの状態とする操作が行われた後に、更新部２９９により行われる処理である。

本実施形態の更新部２９９は、認識結果データの状態を確定済みの状態する操作を受け付けると（ステップＳ１５０１）、情報取得部２９８による処理において、取引先データベース２７０が参照されたか否かを判定する（ステップＳ１５０２）。

ステップＳ１５０２において、取引先データベース２７０が参照されていない場合、更新部２９９は、現在設定されている入金先情報（第二抽出部２９６により抽出された文字列）を、請求元と対応付けて、新規の取引先情報として、取引先データベース２７０に格納（登録）し（ステップＳ１５０３）、後述するステップＳ１５０６へ進む。

ステップＳ１５０２において、取引先データベース２７０が参照された場合、更新部２９９は、入金先情報が編集されたか否かを判定する（ステップＳ１５０４）。ステップＳ１５０４において、編集されていない場合、更新部２９９は、後述するステップＳ１５０６へ進む。

ステップＳ１５０４において、入金先情報が編集されていた場合、更新部２９９は、取引先データベース２７０における、請求元と対応する取引先名と対応付けられた入金先情報を更新する（ステップＳ１５０５）。

具体的には、更新部２９９は、例えば、取引先データベース２７０において、請求元と一致又は類似する取引先名を含む取引先情報に含まれる支払情報と、確定済みの状態とする操作を受け付けたときに設定されていた入金先情報と、が一致しない場合に、入金先情報の編集が行われたと判定してもよい。

続いて、更新部２９９は、認識結果データの状態を確定済みの状態とし、出力部２８５により、出力データを生成し（ステップＳ１５０６）、処理を終了する。

本実施形態では、このように、入金先情報が編集された場合には、取引先データベース２７０を編集内容に合わせて更新することができる。したがって、本実施形態では、ユーザ（テナント）は、１回の入金先情報の編集で、マスタデータである取引先データベース２７０を更新することができる。このため、本実施形態では、帳票認識を行う度に入金先情報の確認や修正等を行う必要がなく、ユーザの負荷を軽減することができる。

次に、図１６乃至図２１を参照して、本実施形態の表示例について説明する。図１６は、表示例を示す第一の図である。

図１６に示す画面１６１は、例えば、端末装置４００に表示されても良い。画面１６１は、ステップＳ８２６において、端末装置４００のブラウザに表示される認識結果の確認画面の一例である。

画面１６１は、表示欄１６２、表示欄１６３と、操作ボタン１６９、１７０とを含む。表示欄１６２には、帳票画像データが示す帳票画像が表示される。図１６の例では、帳票が請求書であり、帳票画像には、請求書情報を表示させる領域１６４ａ、金融機関情報を示す領域１６４ｂが含まれる。

表示欄１６３は、表示欄１６２に表示された帳票画像を示す帳票画像データに対して帳票認識部２９０による帳票認識を行った結果の認識結果データが表示される。

表示欄１６３は、表示欄１６５、１６６、１６７、１６８を含む。表示欄１６５は、請求書情報１４２が表示される。請求書情報１４２は、認識結果データの一部である。表示欄１６６は、金融機関情報１３１が表示される。表示欄１６７は、入金先情報が表示される。表示欄１６８は、ジョブリスト９１の項目「ステータス」の値が表示される。

図１６の例では、領域１６４ａから抽出された請求書情報１４２が表示欄１６５に表さ
れ、領域１６４ｂから抽出された金融機関情報１３１が表示欄１６６に表示される。図１６の例では、領域１６４ａから抽出される金融機関情報１３１が示す金融機関は１つである。

また、図１６の例では、請求書情報１４２に含まれる請求元である「○○株式会社」と対応する取引先情報から取得された入金先情報か表示欄１６７に表示される。

図１６の例では、請求元が「株式会社○○」である。したがって、帳票認識部２９０の情報取得部２９８は、取引先データベース２７０を参照する。そして、情報取得部２９８は、取引先名が「株式会社○○」と完全一致する取引先情報が存在するか否かを判定する。

この場合、該当する取引先情報が存在するため（図６参照）、情報取得部２９８は、該当する取引先情報に含まれる支払情報の中から、金融機関、支店名、口座種別、口座番号、口座名義を抽出し、表示欄１６７に入金先情報として設定する。

本実施形態では、表示欄１６６に表示された金融機関情報と、表示欄１６７に表示された入金先情報とが一致しているため、アラートは生成されず、画面１６１にはアラートは表示されない。

また、表示欄１６７には、表示欄１６７に表示された入金先情報の編集を行うための表示部品１６７ｃを含む。

本実施形態では、表示欄１６７の中に含まれる表示部品１６７ｃを選択する操作を受け付けると、該当する表示欄に表示された内容の編集が可能となる。表示欄に表示された内容の編集の詳細は後述する。

操作ボタン１６９は、ジョブリスト９１のステータスの値を、未処理状態から下書き保存状態とするための操作ボタンである。操作ボタン１６９が操作されると、表示欄１６８は、「未処理」から「下書き保存」に変化する。

操作ボタン１７０は、ジョブリスト９１のステータスの値を、確定済み状態とするための操作ボタンである。本実施形態では、操作ボタン１７０が操作されると、ジョブリスト９１のステータスの値を、確定済み状態とする。尚、本実施形態において、ステータスが確定済み状態とされた認識結果データは、出力部２８５により、基幹システム５００と対応する形式のデータに変換することができる。

図１７は、表示例を示す第二の図である。図１７に示す画面１６１Ａでは、金融機関情報を示す領域１６４ｂに複数の金融機関を示す情報が含まれる場合を示している。

この場合、表示欄１６３Ａに含まれる表示欄１６６Ａには、複数の金融機関情報が表示される。また、表示欄１６３Ａには、複数の金融機関情報を選択するための選択欄１６６ａ、１６６ｂが含まれる。

図１７の例では、選択欄１６６ａ、１６６ｂの何れかを選択することで、金融機関情報を選択することができる。

図１７の例では、情報取得部２９８は、金融機関情報が選択されると取引先データベース２７０を参照し、取引先名が「株式会社○○」と一致し、且つ、金融機関名が、選択された金融機関情報に含まれる金融機関名と一致する取引先情報を特定してもよい。そして、情報取得部２９８は、特定された取引先情報から、入金先情報を抽出し、表示欄１６７に表示させてもよい。

尚、図１７の例では、認識結果の確認画面である画面１６１Ａに、金融機関情報の選択欄が表示されるものとしたが、これに限定されない。金融機関情報の選択画面は、認識結果の確認画面が表示される前に、端末装置４００等に表示されてもよい。

また、本実施形態では、例えば、金融機関情報が複数抽出された場合には、テナントが口座を保有する金融機関が予め記憶部２２０のテナントＤＢ（非図示）に登録され、登録されたテナントに対応する金融機関と同一の金融機関名を含む金融機関情報が自動的に選択されるようにしてもよい。このようにすることで、金融機関同士の送金にかかる手数料を削減することができる。さらに、本実施形態では、記憶部２２０に記憶された異なる金融機関の間の送金手数料を記憶しており、抽出された複数の金融機関のうち、テナントに対応する金融機関との間の送信手数料の少ない金融機関が自動的に選択されるようにしてもよい。また、ネットワークを介して、抽出された金融機関を示す情報と、テナントに対応する杞憂機関を示す情報とを他のシステムに送信し、送信手数料を受信して、受信した送信手数料に基づいて、送信手数料の少ない金融機関が自動的に選択されるようにしてもよい。

図１８は、表示例を示す第三の図である。図１８に示す画面１６１Ｂでは、表示欄１６３Ｂに、金融機関情報が表示される表示欄１６６が表示されていない。言い換えれば、図１８の例では、表示欄１６３Ｂには、表示欄１６５と表示欄１６７とが表示され、請求項情報と、入金先情報とが表示される。

本実施形態では、例えば、第二抽出部２９６によって抽出された金融機関情報と、情報取得部２９８によって取得された入金先情報とが完全に一致する場合には、帳票画像データから抽出した金融機関情報の表示を省略し、予め固定された項目名と項目値である入金先情報のみを表示させる。

本実施形態では、このように、金融機関情報の表示を省略することで、画面１６１Ｂを閲覧しているユーザに対して、必要な情報のみを提示することができる。

図１９は、表示例を示す第四の図である。図１９では、表示欄１６７Ａにおいて、入金先情報以外の内容も自動で表示される例を示している。

図１９に示す画面１６１Ｃにおいて、表示欄１６５の表示欄１６５ａには、請求日が表示されている。請求日は、請求書情報に含まれる情報である。

図１９では、情報取得部２９８は、例えば、この請求日と、取引先名が「株式会社○○」である取引先情報に含まれる支払情報とを参照し、表示欄１６７Ａの表示欄１６７ａに表示される支払期限を設定する。

取引先データベース２７０では、取引先名が「株式会社○○」である取引先情報に含まれる支払情報の項目「支払条件」の値が、「支払期日：２ヶ月後の２５日」となっている（図６参照）。したがって、情報取得部２９８は、請求日である２０１８年７月２０日の２ヶ月後の２５日として、２０１８年９月２５日を導出し、表示欄１６７ａに表示させる。

このように、本実施形態では、請求書情報と、支払情報とから、表示欄１６７に表示される入金先情報以外の情報も、自動で設定してもよい。

本実施形態では、このようにすることで、ユーザ（テナント）が手入力する項目を減らすことができ、ユーザの負荷を軽減することができる。

図２０は、表示例を示す第五の図である。図２０に示す画面１６３Ｄは、第二抽出部２９６により帳票画像データから抽出された金融機関情報と、情報取得部２９８により取引先データベース２７０から取得された入金先情報とが一致しない場合を示している。

画面１６１Ｄにおいて、表示欄１６７Ｂには、金融機関情報と入金先情報とが一致しないことを示すアラート１６７ｂが表示されている
本実施形態では、ここで、表示部品１６７ｃを操作することで、取引先データベース２７０に格納されている取引先情報を編集するための画面を表示させることができる。

尚、金融機関情報と入金先情報とが一致しない場合とは、例えば、参照する取引先情報が誤っている場合、取引先情報に含まれる金融機関名が変更された場合、請求元を示す文字列ではない文字列が、誤って請求元として抽出された場合等が考えられる。

図２１は、表示例を示す第六の図である。図２１に示す画面１６１Ｅは、図２０に示す画面１６１Ｄにおいて、表示部品１６７ｃが操作された後の画面を示す。

画面１６１Ｅには、取引先名が「株式会社○○」である取引先情報を編集するための画面１７１が表示される。

画面１７１には、取引先データベース２７０に格納された取引先情報のうち、取引先名が「株式会社○○」である取引先情報の一覧が表示されている。

本実施形態では、例えば、参照される取引先情報に誤りがあった場合には、ユーザは、画面１７１から、参照すべき取引先情報を選択することができる。

また、本実施形態では、例えば、金融機関名の変更等があった場合には、画面１７１において、該当する取引先情報を編集することができる。

本実施形態では、このような操作が行われた後に、操作ボタン１７０が操作され、ジョブリスト９１のステータスの値が、確定済み状態とされると、確定済みの状態とされた認識結果データは、出力部２８５により、基幹システム５００と対応する形式のデータに変換される。

次に、図２２を参照して、本実施形態の出力部２８５により基幹システム５００に出力するデータの一例について説明する。

図２２は、出力データの一例を示す図である。図２２に示す出力データ２３１は、支払元情報、入金先情報、請求金額、振込実行日等を含む。

本実施形態の出力データ２３１において、支払元情報は、取引先データベース２７０に格納された取引先情報に含まれる情報であり、テナントが保有する口座に関する情報である。

入金先情報は、取引先データベース２７０に格納された取引先情報に含まれる入金先情報である。

請求金額は、帳票認識部２９０により、帳票画像データから抽出した請求書情報に含まれる。振込実行日は、例えば、出力データ２３１が基幹システム５００に出力された日であってもよい。

本実施形態の出力データ２３１は、基幹システム５００において、テナントから請求元への請求金額の振り込む（支払う）処理を自動的に実行させることができる形式であればよい。

このように、本実施形態では、請求書の帳票画像データから、請求元を特定し、取引先データベース２７０において、予め項目名と項目値とが決められた入金先情報を取得する。

このため、本実施形態によれば、入金先情報が認識結果の確認画面において、入金先情報が表示される度に、入金先情報が正しいか否かを確認する手間が省ける。

また、本実施形態では、帳票画像データから抽出された金融機関情報と入金先情報とを比較し、両者が一致しない場合には、マスタデータとなる取引先データベース２７０を更新することができる。

したがって、ユーザは、入金先情報が誤っていた場合等でも、１度マスタデータを修正すれば良く、何度も入金先情報を修正する、といった手間を削減できる。

尚、上述した実施形態では、請求書を帳票の一例として説明したが、本実施形態が適用される帳票の種類は、請求書に限定されない。また、本実施形態は、固定情報を、入金先情報としたがこれに限定されない。

帳票は、例えば、注文書等であってもよく、その場合は、固定情報は、注文書の発行元である発注元に応じて予め固定された発注元の住所や納品先の住所等であってもよい。また、例えば、帳票は、試験の回答用紙等であってもよい。その場合、固定情報は、例えば、回答用紙の発行元を示す試験が行われた教科（すなわち、どの教科の試験かを示す情報）に応じて、予め固定された、その教科の授業を行っいる教師の名称等であってもよい。

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

また、実施形態に記載された装置群は、本明細書に開示された実施形態を実施するための複数のコンピューティング環境のうちの１つを示すものにすぎない。

ある実施形態では、サーバ装置２００は、サーバクラスタといった複数のコンピューティングデバイスを含む。複数のコンピューティングデバイスは、ネットワークや共有メモリなどを含む任意のタイプの通信リンクを介して互いに通信するように構成されており、本明細書に開示された処理を実施する。同様に、サーバ装置２００は、互いに通信するように構成された複数のコンピューティングデバイスを含むことができる。

さらに、サーバ装置２００は、開示された処理ステップを様々な組み合わせで共有するように構成できる。例えば、サーバ装置２００によって実行されるプロセスは、他のサーバ装置によって実行され得る。同様に、サーバ装置２００の機能は、他のサーバ装置によって実行することができる。また、サーバ装置と他のサーバ装置の各要素は、１つのサーバ装置にまとめられていても良いし、複数の装置に分けられていても良い。

また、明細書中の対応テーブルは、機械学習の学習効果によって生成されたものでもよい。また、取引内容の記載に含まれうるキーワードと勘定項目とを機械学習にて分類付けすることで、対応テーブルを使用しなくてもよい。

ここで、機械学習とは、コンピュータに人のような学習能力を獲得させるための技術であり，コンピュータが、データ識別等の判断に必要なアルゴリズムを、事前に取り込まれる学習データから自律的に生成し，新たなデータについてこれを適用して予測を行う技術のことをいう。機械学習のための学習方法は、教師あり学習、教師なし学習、半教師学習、強化学習、深層学習のいずれかの方法でもよく、さらに、これらの学習方法を組み合わせた学習方法でもよく、機械学習のための学習方法は問わない。

以上、各実施形態に基づき本発明の説明を行ってきたが、上記実施形態に示した要件に本発明が限定されるものではない。これらの点に関しては、本発明の主旨をそこなわない範囲で変更することができ、その応用形態に応じて適切に定めることができる。

１００ 帳票認識システム
２００ サーバ装置
２２０ 記憶部
２３０ 帳票認識処理部
２４０ 画像データベース
２５０ 抽出定義データベース
２６０ 辞書データベース
２７０ テナントデータベース
２８０ 認識結果データベース
２８４ 表示制御部
２８５ 出力部
２９０ 帳票認識部
２９１ 画像データ格納部
２９２ ジョブリスト生成部
２９３ 画像データ取得部
２９４ 文字認識部
２９５ 第一抽出部
２９６ 第二抽出部
２９７ 認識結果生成部
２９８ 情報取得部
２９９ 更新部
３００ 画像形成装置
４００ 端末装置
５００ 基幹システム

特開２０１６－５１３３９号公報

Claims (10)

1. 帳票情報に含まれる文字列の定義した情報を参照して帳票画像データから、帳票の発行元を示す情報を抽出し、前記帳票の発行元と対応付けられた入金先情報が格納された記憶部を参照して、前記帳票の発行元を示す情報と対応する入金先情報を取得する情報取得部と、
   前記帳票の発行元を示す情報と、前記情報取得部により取得された前記入金先情報と、を含む画面データを端末装置へ出力する表示制御部と、
   金融機関情報に含める文字列の定義を示す定義情報と、金融機関情報に含める文字列を抽出する際の条件を示す条件情報とを参照し、前記帳票画像データから金融機関情報を抽出する抽出部と、
   を有し、
   前記情報取得部は、
   前記記憶部から前記帳票の発行元を示す情報と対応する入金先情報が取得されなかった場合に、前記抽出部により抽出された前記金融機関情報を前記帳票の発行元を示す情報と対応する入金先情報に設定する、情報処理装置。
2. 前記端末装置に表示された前記入金先情報に対する編集が行われた場合に、前記記憶部に格納された前記入金先情報を更新する更新部を有する、請求項１記載の情報処理装置。
3. 前記帳票画像データに対する文字認識によって抽出された複数の文字列のうち、前記定義情報を参照して特定された特定の文字列との位置関係に基づき、前記複数の文字列から、抽出基点となる文字列を特定し、前記抽出基点となる文字列との位置関係に基づき、前記抽出基点となる文字列と対応する文字列を抽出する認識処理部を有し、
   前記認識処理部は、
   前記抽出基点となる文字列との位置関係に基づき抽出された文字列を、前記抽出基点となる文字列と対応付けられた項目名の項目値とする、請求項１又は２記載の情報処理装置。
4. 前記表示制御部は、
   前記帳票の発行元を示す情報及び前記入金先情報と、前記認識処理部に基づき抽出された項目名の項目値とを含む画面データを端末装置に出力する、請求項３記載の情報処理装置。
5. 前記帳票は、請求書である、請求項４記載の情報処理装置。
6. 前記認識処理部により抽出された前記項目名は、金融機関に関する情報の項目名であり、
   前記認識処理部は、前記項目名と前記項目値とを対応付けて金融機関情報とする、請求項５記載の情報処理装置。
7. 前記情報取得部は、
   前記入金先情報と、前記金融機関情報とが一致するか否かを判定し、
   前記表示制御部は、
   前記入金先情報と前記金融機関情報とが一致しない場合に、前記画面データにアラートを表示させるための情報を含める、請求項６記載の情報処理装置。
8. 情報処理装置と端末装置とを含む情報処理システムによる情報処理方法であって、前記情報処理システムが、
   帳票情報に含まれる文字列の定義した情報を参照して帳票画像データから帳票の発行元を示す情報を抽出し、前記帳票の発行元と対応付けられた入金先情報が格納された記憶部を参照して、情報取得部により前記帳票の発行元を示す情報と対応する入金先情報を取得し、
   前記帳票の発行元を示す情報と、前記情報取得部により取得された前記入金先情報と、を含む画面データを前記端末装置へ出力し、
   金融機関情報に含める文字列の定義を示す定義情報と、金融機関情報に含める文字列を抽出する際の条件を示す条件情報とを参照し、前記帳票画像データから金融機関情報を抽出し、
   前記記憶部から前記帳票の発行元を示す情報と対応する入金先情報が取得されなかった場合に、抽出された前記金融機関情報を前記帳票の発行元を示す情報と対応する入金先情報に設定する、情報処理方法。
9. 帳票情報に含まれる文字列の定義した情報を参照して帳票画像データから帳票の発行元を示す情報を抽出し、前記帳票の発行元と対応付けられた入金先情報が格納された記憶部を参照して、情報取得部により前記帳票の発行元を示す情報と対応する入金先情報を取得する処理と、
   前記帳票の発行元を示す情報と、前記情報取得部により取得された前記入金先情報と、を含む画面データを端末装置へ出力する処理と、
   金融機関情報に含める文字列の定義を示す定義情報と、金融機関情報に含める文字列を抽出する際の条件を示す条件情報とを参照し、前記帳票画像データから金融機関情報を抽出する処理と、
   前記記憶部から前記帳票の発行元を示す情報と対応する入金先情報が取得されなかった場合に、抽出された前記金融機関情報を前記帳票の発行元を示す情報と対応する入金先情報に設定する処理と、をコンピュータに実行させる、情報処理プログラム。
10. 情報処理装置と端末装置とを含む情報処理システムであって、
    前記情報処理装置は、
    帳票情報に含まれる文字列の定義した情報を参照して帳票画像データから帳票の発行元を示す情報を抽出し、前記帳票の発行元と対応付けられた入金先情報が格納された記憶部を参照して、前記帳票の発行元を示す情報と対応する入金先情報を取得する情報取得部と、
    前記帳票の発行元を示す情報と、前記情報取得部により取得された前記入金先情報と、を含む画面データを前記端末装置へ出力する表示制御部と、
    金融機関情報に含める文字列の定義を示す定義情報と、金融機関情報に含める文字列を抽出する際の条件を示す条件情報とを参照し、前記帳票画像データから金融機関情報を抽出する抽出部と、を有し、
    前記情報取得部は、
    前記記憶部から前記帳票の発行元を示す情報と対応する入金先情報が取得されなかった場合に、前記抽出部により抽出された前記金融機関情報を前記帳票の発行元を示す情報と対応する入金先情報に設定し、
    前記端末装置は、
    前記画面データを表示させる表示部を有する、情報処理システム。

Images