JP2009048531A - 帳票処理システム及び帳票処理方法 - Google Patents

Abstract

【課題】画像認識の対象となる認識対象領域の配置や大きさ等を再設定することなく、帳票の記入欄のレイアウトを容易に変更可能な帳票処理システムを提供する。
【解決手段】帳票処理システム１が有するストローク解析サーバ１４は、デジタルペン１０により帳票１１に手書き記入された筆跡を表すストロークデータに基づいて、帳票１１に記入された筆跡を含む帳票イメージデータを生成する。画像認識サーバ１５は、帳票イメージデータを複数の小領域に分割し、複数の小領域の各々に対する画像認識を行うことにより、各小領域内におけるデジタルペン１０の筆跡の有無を判定する。変換テーブル１７は、複数の小領域の各々に割り当てられた定義情報を記憶する。変換サーバ１６は、複数の小領域のうち、画像認識サーバ１５により筆跡ありと判定され、かつ、変換テーブル１７に定義情報が記録されている小領域に関する定義情報を出力する。
【選択図】図１

Description

本発明は、帳票に記入された内容を電子化して取得する帳票処理システムに関する。

パターン認識等の画像認識技術を利用して、帳票に手書き記入された内容を電子的に取得するための帳票処理システムが知られている。例えば、特許文献１には、筆跡を電子的なストロークデータとして取得可能なデジタルペンを用いることにより、帳票に記入された内容を電子データ化して取得する帳票処理システムが開示されている。
より具体的に述べると、特許文献１に開示された帳票処理システムは、
（１）デジタルペンによって生成されたストロークデータを受信し、
（２）帳票のイメージデータにストロークデータから再生される筆跡を合成することで、記入済みの帳票のイメージデータを生成し、
（３）当該記入済み帳票のイメージデータに対する文字認識処理を実行し、
（４）帳票に手書きされた内容がテキストデータによって置き換えられた記入済みイメージデータを生成する。

特許文献１に開示された帳票処理システムにおいて使用されるデジタルペンは、スウェーデンのAnoto社が開発した「アノトペン（Anoto pen）」と同等のものである。アノトペンは、用紙種別及び用紙上の位置座標を特定することが可能な背景パターン（具体的にはドットパターン）が印刷された専用紙とともに使用される。アノトペンは、通常のインクタイプのペン先部に加えて、専用紙に印刷されたドットパターンを読み取って、ストロークデータを生成、送信するためのカメラ、プロセッサ、メモリ、データ通信ユニット及びバッテリ等を搭載している。

利用者が、アノトペンで文字、記号、図形などを専用紙に書いたり、専用紙上に図案化されている画像をチェックしたりすると、アノトペンに搭載されたプロセッサが、ペンの移動に伴ってカメラにより撮影されるドットパターン画像を用いて、専用紙に記入された文字や図形の筆跡を示すストロークデータを生成する。生成されたストロークデータは、専用紙への記入が行われた時刻を示す時刻情報（以下、記入時刻情報と呼ぶ）と関連付けてメモリに記憶される。さらに、アノトペンは、データ通信ユニットによって近くの携帯電話端末やパーソナルコンピュータ等の通信機器にストロークデータ及び記入時刻情報を送信することができる。アノトペンの構成や、アノト方式の専用紙に印刷されるドットパターンについては、特許文献２を含む様々な文献に既に開示されている。

また、アノトペンに限らず、ペン先部による筆跡を表すストロークデータを生成することができる様々なデジタルペンが知られている。例えば、ペン先部を有するペンと、前記ペンによるストロークデータを生成するストロークデータ生成装置とが分離したデジタルペンがある。具体的には、ペン側にペン先部、赤外線発信部及び超音波発信部が搭載される。また、ストロークデータ生成装置側に、赤外線センサ、２つの超音波センサ、ストロークデータ生成部、メモリ及びデータ通信ユニットが搭載される。そして、ストロークデータ生成装置は、赤外線センサによる赤外線の受信時刻と、２つの超音波センサによる超音波の受信時刻との差分を用いて、ペン先部の筆跡を算出する。
特開２００３−３０８４７９号公報 特開２００７−１２２４２５号公報

特許文献１に開示された帳票処理システムのように、帳票に手書きで記入された文字の認識やチェックマーク等の記号の認識を画像認識技術によって行う場合、画像認識を実行する認識対象領域が帳票の記入欄のレイアウトに対応したものとなるように、認識対象領域の配置や大きさ等の情報を、画像認識を行う装置（以下、画像認識装置）に予め設定しておく必要がある。そして、帳票の記入欄のレイアウトが変更される度に、認識対象領域の配置や大きさ等を画像認識装置に対して再設定する必要がある。画像認識装置の認識対象領域に関する設定内容を変更する作業は、画像認識用ソフトウェアに関する専門知識を必要とするため、設定変更に要する時間が長くなり、作業コストも高くなる傾向がある。したがって、画像認識装置の設定変更が頻繁に発生することは好ましくない。

本発明は、上述した事情を考慮してなされたものであり、画像認識の対象となる認識対象領域の配置や大きさ等を再設定することなく、帳票の記入欄のレイアウトを容易に変更可能な帳票処理システムを提供することを目的とする。

本発明の第１の態様にかかる帳票処理システムは、イメージデータ生成手段、筆跡判定手段、定義情報記憶手段、及び出力手段を有する。前記イメージデータ生成手段は、デジタルペンにより帳票に手書き記入された筆跡を表すストロークデータに基づいて、前記帳票に記入された筆跡を含む帳票イメージデータを生成する。前記筆跡判定手段は、前記帳票イメージデータを複数の小領域に分割し、前記複数の小領域の各々に対する画像認識を行うことにより、各小領域内における前記デジタルペンの筆跡の有無を判定する。前記定義情報記憶手段は、前記複数の小領域の各々に割り当てられた定義情報を記憶する。最後に、前記出力手段は、前記複数の小領域のうち、前記筆跡判定手段により筆跡ありと判定され、かつ、前記定義情報記憶手段に前記定義情報が記録されている小領域に関する前記定義情報を出力する。

このように構成された前記第１の態様にかかる帳票処理システムは、定義情報記憶手段において、定義情報を割り当てる小領域とその定義情報の設定内容を変更することで、帳票のレイアウト変更に対応することができる。このとき、画像認識を実行する筆跡判定手段は、帳票の記入欄のレイアウトが如何なるものであるかに関わらず、帳票イメージデータを分割する複数の小領域に対する画像認識を半固定的に行えば良い。つまり、前記第１の態様にかかる帳票処理システムは、画像認識を実行する筆跡判定手段における認識対象領域の配置や大きさ等を再設定することなく、帳票の記入欄のレイアウト変更に対処することができる。

なお、前記定義情報記憶手段は、前記帳票において記入欄とされていない領域に対応する前記小領域を、前記定義情報が割り当てられていない未定義領域として記憶すると良い。これにより、記入欄でない箇所に誤って記入された場合であっても、この誤記入に反応して定義情報の出力が誤って行われることがない。

また、前記複数の小領域は、例えば、前記帳票イメージデータを格子状に分割するよう設定すればよい。この場合、前記筆跡判定手段は、格子状に配置された前記複数の小領域の全体を走査することで、各小領域の筆跡の有無を判定するとよい。

また、前記定義情報記憶手段は、前記複数の小領域の各々を特定する領域ＩＤと、前記複数の小領域の各々に割り当てられた前記定義情報とを関連付けたテーブルデータを記憶するよう構成してもよい。この場合、前記出力手段は、前記筆跡判定手段により筆跡ありと判定され、かつ、前記定義情報記憶手段に前記定義情報が記録されている小領域に関する前記領域ＩＤと、当該領域ＩＤに関連付けられた前記定義情報とを出力すると良い。

本発明の第２の態様は、帳票に記入された内容を電子化して取得する帳票処理方法である。具体的には、デジタルペンにより帳票に手書き記入された筆跡を表すストロークデータに基づいて、前記帳票に記入された筆跡を含む帳票イメージデータを生成する。そして、前記帳票イメージデータを複数の小領域に分割し、前記複数の小領域の各々に対する画像認識を行うことにより、各小領域内における筆跡の有無を判定する。さらに、前記複数の小領域の各々に割り当てられた定義情報を記憶する定義情報記憶手段を参照することによって、前記複数の小領域のうち、前記筆跡判定手段により筆跡ありと判定され、かつ、前記定義情報記憶手段に前記定義情報が記録されている小領域に関する前記定義情報を出力する。

このような方法によれば、定義情報記憶手段において、定義情報を割り当てる小領域とその定義情報の設定内容を変更することで、帳票のレイアウト変更に容易に対応することができる。帳票イメージデータの画像認識を実行する際は、帳票の記入欄のレイアウトが如何なるものであるかに関わらず、帳票イメージデータを分割する複数の小領域に対する画像認識を半固定的に行えば良い。つまり、当該帳票処理方法によれば、帳票イメージデータの画像認識の対象領域の配置や大きさ等を再設定することなく、帳票の記入欄のレイアウト変更に対処することができる。

本発明の第３の態様は、帳票に記入された内容を電子化して取得する帳票処理システムである。当該帳票処理システムは、画像認識装置、定義情報記憶部及び変換装置を有する。前記画像認識装置は、前記帳票に記入された筆跡を含む帳票イメージデータを複数の小領域に分割し、前記複数の小領域の各々に対する画像認識を行うことにより、各小領域内における筆跡の有無を判定する。前記定義情報記憶部は、前記複数の小領域の各々に割り当てられた定義情報を記憶する。前記変換装置は、前記複数の小領域のうち、前記画像認識装置により筆跡ありと判定され、かつ、前記定義情報記憶部に前記定義情報が記録されている小領域に関する前記定義情報を出力する。

このような構成によれば、定義情報記憶部において、定義情報を割り当てる小領域とその定義情報の設定内容を変更することで、帳票のレイアウト変更に容易に対応することができる。つまり、前記第３の態様にかかる帳票処理システムは、画像認識装置による画像認識対象領域の配置や大きさ等を再設定することなく、帳票の記入欄のレイアウト変更に対処することができる。

なお、前記第３の態様にかかる帳票処理システムは、前記画像認識装置による前記帳票の筆跡判定結果をインターネットを経由して前記変換装置に送信する配信装置をさらに備え、前記画像認識装置及び前記配信装置は、アプリケーションサービスプロバイダ（ＡＳＰ）によって運用されるよう構成してもよい。さらに、前記ＡＳＰの顧客により運用される前記変換装置が、インターネットを経由して前記配信装置から受信した前記帳票の筆跡判定結果に基づいて、前記定義情報を可視化して表示するとよい。

このような構成であれば、ＡＳＰが提供する帳票電子化処理サービスの顧客が運用している変換装置に読み込まれる定義情報の変更によって、帳票のレイアウト変更に対応可能である。つまり、帳票のレイアウト変更に際して、ＡＳＰが運用する画像認識装置の設定変更を行う必要がないため、帳票電子化処理サービスの顧客は、帳票のレイアウト変更を迅速に低コストで行うことができる。

本発明により、画像認識の対象となる認識対象領域の配置や大きさ等を再設定することなく、帳票の記入欄のレイアウトを容易に変更可能な帳票処理システムを提供することができる。

以下では、本発明を適用した具体的な実施の形態について、図面を参照しながら詳細に説明する。各図面において、同一要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略される。

発明の実施の形態１．
本実施の形態にかかる帳票処理システム１の構成を図１に示す。帳票処理システム１は、デジタルペン１０によって帳票１１に記入された内容の電子化を実行することで、帳票に記入された内容の電子的な管理を支援する。図１の構成例の場合、帳票処理システム１は、デジタルペン１０によって帳票１１に記入された筆跡を示すストロークデータを、携帯電話端末１２及び通信網１３を介して受信する。さらに、帳票処理システム１は、受信したストロークデータを用いて変換済みデータ１８を生成する。変換済みデータ１８は、帳票１１に記入された内容を表す電子データである。以下では、図１に示す各要素について順に説明する。

図１において、デジタルペン１０は、利用者によって専用紙に記入された筆跡を示すストロークデータを生成する装置である。デジタルペン１０は、紙面上の位置座標を特定可能な背景パターンが印刷された専用紙とともに使用される。また、デジタルペン１０は、生成したストロークデータを携帯電話端末１２に送信可能である。例えば、上述したアノトペンをデジタルペン１０として使用することができる。以下では、デジタルペン１０が、上述したアノトペンであるものとして説明する。

図２は、ストロークデータの記憶及び送信に関連する主要な部分を示したデジタルペン１０の機能ブロック図である。デジタルペン１０は、通常のインクタイプのペン先部１００に加えて、カメラ１０１、プロセッサ１０２、メモリ１０３、圧力センサ１０４、クロック１０５、データ通信ユニット１０６及びバッテリを有する。

カメラ１０１は、専用紙に印刷された背景パターンを読み取るために使用される。具体的には、カメラ１０１は、光源（不図示）から照射され、専用紙によって反射された反射光を受光する。アノト方式における背景パターンは、専用紙の種別及び紙面上の位置座標を一意に特定可能なドットパターンである。一例として、光源に赤外線光源を利用する場合には、専用紙の表面を赤外線を反射する材質としたうえ、赤外線を吸収するインクによりドットパターンを印刷すればよい。これによって、カメラ１０１は、ドットパターンを撮影することができる。なお、アノト方式の専用紙に印刷されるドットパターンは、上述した特許文献２を含む様々な文献に既に開示されているから、本明細書ではドットパターンに関する詳細な説明を省略する。

プロセッサ１０２は、デジタルペン１０の全体制御を実行するとともに、ストロークデータの生成及び記入時刻情報の生成を行う。具体的には、プロセッサ１０２は、カメラ１０１による撮影画像をもとにストロークデータを生成し、生成したストロークデータを記入時刻情報とともにメモリ１０３に格納する。また、プロセッサ１０２は、生成したストロークデータに基づいて、専用紙上の予め指定された領域に対する記入が行われたことを検出し、当該領域への記入の検出に応じて予め設定された動作を実行する。例えば、専用紙の一部の領域を「送信チェック領域」に割り当てておくことで、プロセッサ１０２が送信チェック領域への記入を検出したことに応じて、携帯電話端末１２へのストロークデータ及び記入時刻情報の送信処理を実行させることができる。

メモリ１０３は、ＤＲＡＭ等の揮発性メモリ若しくはフラッシュメモリ等の不揮発性メモリ、又はこれらの組合せとして構成され、デジタルペン１０で使用されるデータ及びプログラム並びにデジタルペン１０で生成されるデータの格納に使用される。

圧力センサ１０４は、ペン先部１００の先端に作用する圧力の変化を検出するセンサである。上述したプロセッサ１０２は、圧力センサ１０４によって検出される圧力の変化によって、利用者がデジタルペン１０を用いて記入動作を行っていることを検出し、筆跡パターンの生成を実行する。

クロック１０５は、ハードウェアクロック等の時間を計測する手段である。プロセッサ１０２は、クロック１０５を参照することで上述した記入時刻情報を生成する。

データ通信ユニット１０６は、ストロークデータ、記入時刻情報及びペンＩＤ情報を携帯電話端末１２に対して送信する。データ通信ユニット１０６には、既存のＵＳＢ（Universal Serial Bus）等の有線通信インタフェース又はＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線通信インタフェースを利用すればよい。

最後に、バッテリ１０７は、デジタルペン１０が有するカメラ１０１及びプロセッサ１０２等の各種の機能部に対して動作電力を供給する。

このように、デジタルペン１０は、利用者が専用紙に記入した文字及び図形等に対応するストロークデータと記入時刻情報とを生成し、携帯電話端末１２に送信する。なお、デジタルペン１０が生成するストロークデータは、利用者の筆跡を特定可能であればよい。ストロークデータの具体例の１つは、記入が行われた座標の経時的変化を示す座標データ列である。

図１に戻り説明を続ける。本実施の形態では、デジタルペン１０によって読み取り可能な背景パターンが印刷された専用紙として帳票１１が使用される。デジタルペン１０は、利用者によって帳票１１に記入された筆跡を示すストロークデータを生成し、生成したストロークデータを帳票１１への記入が行われた時刻を示す記入時刻情報及びデジタルペン１０を識別可能なペンＩＤ情報とともに携帯電話端末１２に送信する。

携帯電話端末１２は、デジタルペン１０より受信したストロークデータ、記入時刻情報及びペンＩＤ情報を、通信網１３を介して帳票処理システム１に転送する。なお、携帯電話端末１２は、デジタルペン１０が生成したストロークデータを帳票処理システム１に転送するための通信装置の一例に過ぎない。例えば、携帯電話端末１２に代えて、他の携帯通信機器やパーソナルコンピュータ等を使用することができる。また、デジタルペン１０が、帳票処理システム１が接続されている通信網１３にストロークデータを直接送信することが可能な通信機能を有する場合、携帯電話端末１２等の通信機器を使用しなくてもよい。

本実施の形態にかかる帳票処理システム１は、ストローク解析サーバ１４、画像認識サーバ１５、変換サーバ１６、変換テーブル１７を有する。ストローク解析サーバ１４は、デジタルペン１０により生成されたストロークデータを入力し、帳票イメージデータを生成する。ストローク解析サーバ１４により生成される帳票イメージデータは、記入済みの帳票１１を表すＪＰＥＧ（Joint Photographic Experts Group）形式又はＧＩＦ（Graphics Interchange Format）形式等のイメージデータである。より具体的に述べると、ストローク解析サーバ１４は、未記入の帳票を表すＪＰＥＧ形式、ＧＩＦ形式等のイメージデータに、ストロークデータによって特定される筆跡を合成することで、帳票イメージデータを生成する。

画像認識サーバ１５は、ストローク解析サーバ１４によって生成された帳票イメージデータを入力し、帳票イメージデータの画像面を分割して得られる複数のセルの各々に対する画像認識処理を実行することで、チェック状態データを生成する。チェック状態データは、帳票イメージデータの画像面を分割して得られる複数のセルの各々について、デジタルペン１０による記入の有無を示すデータである。以下では、画像認識サーバ１５によるチェック状態データの生成処理について、帳票１１の具体例とともに詳しく説明する。

図３（ａ）は、帳票１１の一例である解答用紙を示す図である。図３（ａ）の帳票１１には、解答１〜９の各々についてａ〜ｄの４つのチェック記入枠が設定されており、用紙内に合計３６個のチェック記入枠が印刷されている。例えば、「解答１」に対応して４つのチェック記入枠１１０〜１１３が配置されている。

図３（ａ）の送信チェック領域１１４は、デジタルペン１０にデータ送信を指示するために設けられた領域である。デジタルペン１０は、送信チェック領域１１４にチェックマークが記入されると、それまでに蓄積したストロークデータ及び記入時刻情報を携帯電話端末１２に送信し、携帯電話端末１２への送信が完了したストロークデータ及び記入時刻情報を削除して新たなデータの蓄積を開始する。

図３（ｂ）は、画像認識サーバ１５が図３（ａ）の帳票１１に対する画像認識を行う際に画像認識の単位とする複数のセルを図示した格子３１を示している。図３（ｂ）の格子３１は、帳票１１の上部を除いた紙面を、１２行、２７列、合計３２４個の矩形セルに分割している。なお、各矩形セルを参照する際の便宜のため、格子３１の行に対して上から下の順に"Ａ"〜"Ｌ"の記号を付し、格子３１の列に対して左から右の順に"１"〜"２７"の記号を付すこととする。

図３（ａ）に示す帳票１１のチェック記入枠は、格子３１のいずれかの矩形セルと対応する位置に配置されている。具体的には、図３（ａ）の３６個のチェック記入枠は、図３（ｂ）においてハッチングを施した３６個の矩形セルと対応している。例えば、チェック記入枠１１０〜１１３は、それぞれ矩形セル３１０〜３１３と対応している。

画像認識サーバ１５は、予め設定された格子３１を構成する矩形セルを単位として、格子３１に含まれる３２４個の矩形セルに対する画像認識を行い、各矩形セルへのデジタルペン１０による記入の有無を判定する。一例として、画像認識サーバ１５が、図４に示す記入後の帳票１１に対する画像認識を行った結果、画像認識サーバ１５から出力されるチェック状態データを図５に示す。

図５に示すチェック状態データ５０は、格子３１を構成する複数の矩形セルの各々を特定するためのセルＩＤと、各矩形セルに対するデジタルペン１０による記入の有無を示すチェック状態情報とを関連付けたデータである。例えば、図４のチェック記入枠１１０について見ると、当該記入枠は、デジタルペン１０によるチェックマークの記入が行われている。チェック記入枠１１０に対応する矩形セル３１０のセルＩＤは"Ｃ２"であるから、図５のチェック状態データ５０における矩形セル"Ｃ２"のチェック状態は"ＯＮ"、すなわち、デジタルペン１０による「記入有り」を示している。一方、図４のチェック記入枠１１１について見ると、当該記入枠は、未記入である。チェック記入枠１１１に対応する矩形セル３１１のセルＩＤは"Ｃ４"であるから、図５のチェック状態データ５０における矩形セル"Ｃ４"のチェック状態は"ＯＦＦ"、すなわち、デジタルペン１０による「記入無し」を示している。

次に、図１に示す変換サーバ１６は、画像認識サーバ１５により生成されたチェック状態データを変換テーブル１７と照合することで、チェック済みデータ１８を生成する。変換テーブル１７は、帳票１１を分割する各セルに割り当てられた定義情報を、各セルを特定可能な識別情報（セルＩＤ）と関連付けて保持するテーブルである。また、チェック済みデータ１８は、チェック状態データにおいて「記入有り」とされたセルに対応する定義情報を含むデータである。

変換テーブル１７及び変換済みデータ１８の具体例を図６に示す。図６に示す変換テーブル１７は、図３（ａ）に示した帳票１１の具体例に対応して定義された定義情報を含むテーブルである。例えば、図３（ａ）の「解答１」の正解が"ｃ"である場合、選択肢"ｃ"に対応するセルＩＤ"Ｃ６"（つまり矩形セル３１２）の定義情報は「正解」とされる。一方、「解答１」のａ、ｂ、及びｄのチェック記入枠に対応するセルＩＤ"Ｃ１"（つまり矩形セル３１０）、"Ｃ４"（つまり矩形セル３１１）、"Ｃ８"（つまり矩形セル３１３）の定義情報は「不正解」とされる。

変換サーバ１６は、図５に示したチェック状態データ５０を図６に示す変換テーブル１７と照合する。そして、変換サーバ１６は、チェック状態データ５０においてチェック状態が"ＯＮ"、つまり「記入有り」を示しており、かつ、変換テーブル１７において定義情報が設定されている矩形セルについて、これらの矩形セルの定義情報を変換情報として含む変換済みデータ１８を出力する。図６の例では、チェック状態が"ＯＮ"であり、かつ、定義情報として「正解」又は「不正解」が設定されている矩形セルは、"Ｃ２"及び"Ｃ１１"であるから、"Ｃ２"に対応する変換情報「不正解」と、"Ｃ１１"に対応する変換情報「正解」が、変換済みデータ１８に含まれる。変換サーバ１６は、例えば、セルＩＤと変換情報とを対応付けることが容易に可能なＣＳＶ形式のテキストデータとして変換済みデータ１８を出力すればよい。また、変換サーバ１６は、ＸＭＬ形式、ＨＴＭＬ形式等の他のデータフォーマットで変換済みデータ１８を出力してもよい。

なお、帳票１１のチェック記入枠が配置されていない領域にデジタルペン１０による記入が行われた場合、ストローク解析サーバ１４が生成する帳票イメージデータにはその筆跡が反映される。このため、画像認識サーバ１５は、この誤って記入された筆跡が含まれる矩形セルを、「記入有り」と判定するおそれがある。しかしながら、チェック記入枠が配置されていない領域に対応する矩形セルについては、変換テーブル１７に定義情報が設定されていないため、このような誤って記入された筆跡に起因する情報が変換済みデータ１８に含まれることはない。

上述した帳票処理システム１は、帳票１１のチェック記入枠の配置変更を伴うレイアウト変更に、変換テーブル１７の定義情報を変更することで容易に対処できるという利点がある。一例として、図３（ａ）の帳票１１のレイアウトを、図７（ａ）のレイアウトに変更する場合を考える。図７（ａ）は、帳票１１を携帯電話サービスへの加入申込用紙とした場合の例である。図７（ａ）の１１個のチェック記入枠は、図７（ｂ）においてハッチングを施した１１個の矩形セルと対応する。例えば、チェック記入枠７１０は矩形セル７２０と対応し、チェック記入枠７１１は矩形セル７２１と対応する。

帳票１１のレイアウトが図３（ａ）から図７（ａ）に変更された場合に、図７（ａ）に対応する帳票記入内容の電子化処理を帳票処理システム１に実行させるためには、変換テーブル１７の定義情報を変更すればよい。具体的には、図８の左側に示す図３（ａ）に対応した変換テーブル１７の定義情報を、図８の右側に示す定義情報に変更すればよい。つまり、帳票処理システム１によれば、帳票１１のレイアウト変更が発生した場合に、画像認識の対象となる認識対象領域の配置や大きさ等を画像認識サーバ１５に再設定する必要がない。

その他の実施の形態１．
図３（ｂ）及び図７（ｂ）に示した格子３１は、送信チェック領域１１４が配置された上部を除く領域を分割するものであるが、帳票１１のどの領域を本実施の形態に示した画像認識方法による処理対象領域とするかは任意に決定可能である。例えば、図９に示すように、帳票１１の一部領域を格子定義領域９１とし、帳票１１の他の領域をその他の画像認識処理の対象としてもよい。図９の文字認識領域９２は、手書き文字及び記号をテキストデータ化して取得する文字認識処理の対象領域である。また、イメージ切り出し領域９３は、帳票イメージデータから切り出して独立したイメージデータとする処理の対象領域である。なお、これらの文字認識処理及びイメージ切り出し処理は、画像認識サーバ１５に実行させてもよいし、他のコンピュータに実行させてもよい。

その他の実施の形態２．
図１に示した帳票処理システム１の構成要素であるストローク解析サーバ１４、画像認識サーバ１５及び変換サーバ１６は、それぞれ１台のコンピュータシステムによって構成されてもよいし、適宜機能分担を行って各々が複数台のコンピュータシステムによって構成されてもよい。また、これらストローク解析サーバ１４、画像認識サーバ１５及び変換サーバ１６に関する上述した処理を、１台又は数台のコンピュータシステムに実行させてもよい。つまり、図１は、イメージデータ生成処理、筆跡判定処理、及び変換テーブルを用いた変換済みデータの出力処理を複数台のコンピュータで実行する一例を示しているに過ぎない。

また、帳票処理システム１の複数の構成要素を物理的に離れた拠点に設置することも可能である。図１０は、図１の変換サーバ１６に相当するパーソナルコンピュータ（ＰＣ）２４が、ストローク解析サーバ１４及び画像認識サーバ１５が設置されている拠点（情報処理センタ２０１）と異なる拠点（事務所２０２）に配置された構成図である。

図１０の構成では、客先等の外出先２００にて顧客担当者が帳票１１に記入した筆跡を示すストロークデータが、携帯電話端末１２及び通信網１３を経由して情報処理センタ２０１に設置されたストローク解析サーバ１４に送信される。データベース２１は、ストローク解析サーバ１４が生成する帳票イメージデータ及び画像認識サーバ１５が生成するチェック状態データを格納する。配信サーバ２２は、外出先２００の担当者が保持する携帯電話端末１２に、帳票記入内容の電子化処理が完了したことを通知する電子メール（完了通知メール）を送信する。また、配信サーバ２２は、変換サーバ１６として動作するＰＣ２４の要求に応じて、データベース２１に格納された帳票イメージデータ及びチェック状態データを、インターネット等の通信網２３を介してＰＣ２４に送信する。

ＰＣ２４は、内蔵するＣＰＵ（Central Processing Unit）において変換プログラム２４１を実行することにより、上述した変換サーバ１６の処理、具体的には、変換テーブル１７を用いた変換済みデータ１８の生成・出力処理を行う。また、ＰＣ２４は、テキストエディタ、表計算ソフトウェア及びイメージビューア等のプログラムを実行し、帳票イメージデータ及び変換済みデータを可視化して液晶ディスプレイなどの表示デバイス（不図示）に表示させる。

図１０に示す構成は、帳票１１の電子化処理がＡＳＰ（Application Service Provider）によって利用者に提供される場合に特に有効である。具体的には、ＡＳＰは、帳票イメージデータ及びチェック状態データの生成及び配信を帳票電子化処理サービスとして提供する。帳票電子化処理サービスの利用者は、事務所２０２に設置されたＰＣ２４を用いてＡＳＰが運用する配信サーバ２２にアクセスし、帳票イメージデータ及びチェック状態データを取得する。このような形態であれば、帳票電子化処理サービスの利用者が運用しているＰＣ２４に読み込まれる変換テーブル１７の設定変更によって、帳票１１のレイアウト変更に対応可能である。つまり、帳票１１のレイアウト変更に際して、ＡＳＰが運用する画像認識サーバ１５の設定変更を行う必要がないため、帳票電子化処理サービスの利用者は、帳票１１のレイアウト変更を迅速に低コストで行うことができる。

その他の実施の形態３．
上述した発明の実施の形態１では、デジタルペン１０が、ペン先部１００、カメラ１０１、プロセッサ１０２、メモリ１０５及びデータ通信ユニット１０６等を１つの筐体に搭載して構成されたアノトペンであり、帳票１１にはアノトペンによって認識可能な背景パターン（ドットパターン）が印刷されているものとして説明した。しかしながら、アノトペンは、デジタルペンの一例に過ぎず、デジタルペンによるストロークデータの生成には様々な技術が適用可能である。

例えば、ペン先部を有するペンと、前記ペンによるストロークデータを生成するストロークデータ生成装置とが分離しているデジタルペンを、上述したデジタルペン１０に代えて使用してもよい。具体的には、ペン側にペン先部、赤外線発信部及び超音波発信部が搭載される。また、ストロークデータ生成装置側に、赤外線センサ、２つの超音波センサ、ストロークデータ生成部、メモリ及びデータ通信ユニットが搭載される。そして、ストロークデータ生成装置は、赤外線センサによる赤外線の受信時刻と、２つの超音波センサによる超音波の受信時刻との差分を用いて、ペン先部の筆跡を算出すればよい。なお、この場合には、運送伝票３０に背景パターンを設ける必要はない。

さらに、本発明は上述した実施の形態のみに限定されるものではなく、既に述べた本発明の要旨を逸脱しない範囲において種々の変更が可能であることは勿論である。

発明の実施の形態１にかかる帳票処理システムの構成を示す図である。 発明の実施の形態１にかかるデジタルペンの機能ブロック図である。 発明の実施の形態１にかかる帳票の具体例を示す図である。 発明の実施の形態１にかかる帳票の具体例を示す図である。 発明の実施の形態１にかかる画像認識サーバが出力するチェック状態データの具体例を示す図である。 発明の実施の形態１にかかる変換テーブルの具体例及び変換済みデータの具体例を示す図である。 発明の実施の形態１にかかる帳票の変形例を示す図である。 発明の実施の形態１にかかる変換テーブルの変形例を示す図である。 発明の実施の形態１にかかる帳票の変形例を示す図である。 発明の実施の形態１にかかる帳票処理システムの変形例を示す図である。

符号の説明

１ 帳票処理システム
１０ デジタルペン
１１ 帳票
１２ 携帯電話端末
１３ 通信網
１４ ストローク解析サーバ
１５ 画像認識サーバ
１６ 変換サーバ
１７ 変換テーブル
１８ 変換済みデータ
２１ データベース
２２ 配信サーバ
２３ 通信網
２４ パーソナルコンピュータ（ＰＣ）
３１ 格子
９１ 文字認識領域
９２ 格子定義領域
９３ イメージ切り出し領域
１１０〜１１３ チェック記入枠
２４１ 変換プログラム
３１０〜３１３ 矩形セル
５０ チェック状態データ
７１０、７１１ チェック記入枠
７２０、７２１ 矩形セル

Claims (10)

1. デジタルペンにより帳票に手書き記入された筆跡を表すストロークデータに基づいて、前記帳票に記入された筆跡を含む帳票イメージデータを生成するイメージデータ生成手段と、
   前記帳票イメージデータを複数の小領域に分割し、前記複数の小領域の各々に対する画像認識を行うことにより、各小領域内における筆跡の有無を判定する筆跡判定手段と、
   前記複数の小領域の各々に割り当てられた定義情報を記憶する定義情報記憶手段と、
   前記複数の小領域のうち、前記筆跡判定手段により筆跡ありと判定され、かつ、前記定義情報記憶手段に前記定義情報が記録されている小領域に関する前記定義情報を出力する出力手段と、
   を備える帳票処理システム。
2. 前記定義情報記憶手段は、前記帳票において記入欄とされていない領域に対応する前記小領域を、前記定義情報が割り当てられていない未定義領域として記憶する、請求項１に記載の帳票処理システム。
3. 前記複数の小領域は、前記帳票イメージデータを格子状に分割するよう設定され、
   前記筆跡判定手段は、格子状に配置された前記複数の小領域の全体を走査することで、各小領域の筆跡の有無を判定する、請求項１又は２に記載の帳票処理システム。
4. 前記定義情報記憶手段は、前記複数の小領域の各々を特定可能な領域ＩＤと、前記複数の小領域の各々に割り当てられた前記定義情報とを関連付けたテーブルデータを記憶し、
   前記出力手段は、前記筆跡判定手段により筆跡ありと判定され、かつ、前記定義情報記憶手段に前記定義情報が記録されている小領域に関する前記領域ＩＤと、当該領域ＩＤに関連付けられた前記定義情報とを出力する、請求項１乃至３のいずれか１項に記載の帳票処理システム。
5. 帳票に記入された内容を電子化して取得する帳票処理方法であって、
   デジタルペンにより帳票に手書き記入された筆跡を表すストロークデータに基づいて、前記帳票に記入された筆跡を含む帳票イメージデータを生成し、
   前記帳票イメージデータを複数の小領域に分割し、前記複数の小領域の各々に対する画像認識を行うことにより、各小領域内における筆跡の有無を判定し、
   前記複数の小領域の各々に割り当てられた定義情報を記憶する定義情報記憶手段を参照することによって、前記複数の小領域のうち、前記筆跡判定手段により筆跡ありと判定され、かつ、前記定義情報記憶手段に前記定義情報が記録されている小領域に関する前記定義情報を出力する、帳票処理方法。
6. 帳票に記入された内容を電子化する帳票処理システムであって、
   前記帳票に記入された筆跡を含む帳票イメージデータを複数の小領域に分割し、前記複数の小領域の各々に対する画像認識を行うことにより、各小領域内における筆跡の有無を判定する画像認識装置と、
   前記複数の小領域の各々に割り当てられた定義情報を記憶する定義情報記憶部と、
   前記複数の小領域のうち、前記画像認識装置により筆跡ありと判定され、かつ、前記定義情報記憶部に前記定義情報が記録されている小領域に関する前記定義情報を出力する変換装置と、
   を備える帳票処理システム。
7. 前記画像認識装置による前記帳票の筆跡判定結果をインターネットを経由して前記変換装置に送信する配信装置をさらに備え、
   前記画像認識装置及び前記配信装置は、アプリケーションサービスプロバイダによって運用され、
   前記アプリケーションサービスプロバイダの顧客により運用される前記変換装置が、インターネットを経由して前記配信装置から受信した前記帳票の筆跡判定結果に基づいて、前記定義情報を可視化して表示する、請求項６に記載の帳票処理システム。
8. 前記定義情報記憶部は、前記帳票において記入欄とされていない領域に対応する前記小領域を、前記定義情報が割り当てられていない未定義領域として記憶する、請求項６又は７に記載の帳票処理システム。
9. 前記複数の小領域は、前記帳票イメージデータを格子状に分割するよう設定され、
   前記画像認識装置は、格子状に配置された前記複数の小領域の全体を走査することで、各小領域の筆跡の有無を判定する、請求項６乃至８のいずれか１項に記載の帳票処理システム。
10. 前記定義情報記憶部は、前記複数の小領域の各々を特定する領域ＩＤと、前記複数の小領域の各々に割り当てられた前記定義情報とを関連付けたテーブルデータを記憶し、
    前記変換装置は、前記画像認識装置により筆跡ありと判定され、かつ、前記定義情報記憶部に前記定義情報が記録されている小領域に関する前記領域ＩＤと、当該領域ＩＤに関連付けられた前記定義情報とを出力する、請求項６乃至９のいずれか１項に記載の帳票処理システム。

Images