JP2019032645A - 書類管理装置、書類管理方法、および、書類管理装置用のプログラム - Google Patents

Abstract

【課題】記載内容を読み取ることができ、セキュリティを向上させた書類管理装置等を提供する。【解決手段】複数の記号が並んだ情報が記載された記載領域を書類の画像データから検出し（Ｓ１）、記載領域における情報の記載幅ｗを算出し（Ｓ３）、記載幅ｗの２分の１より長い第１分割幅ｄ１を決定し（Ｓ４）、記載領域の所定の基点ｂ１から、記載領域を第１分割幅毎に分割して複数の第１分割画像を生成し（Ｓ６）、所定の基点ｂ１からずらして、第１分割幅ｄ１に対応する第２分割幅ｄ２毎に記載領域を分割して複数の第２分割画像を生成する（Ｓ８）。【選択図】図１０

Description

本発明は、書類の電子データを管理する書類管理装置、書類管理方法、および、書類管理装置用のプログラムに関する。

書類のデータの管理において、情報漏洩防止のために画像分割が行われている。例えば、特許文献１には、画像データ内の文字領域を複数のブロックに分割した複数の画像ブロックを作成し、画像ブロックの配列順序を変更し、配列順序を変更した後の画像ブロックに基づいて作成された暗号化画像を、ＯＣＲ処理し、ＯＣＲ後データに基づいて文字領域のテキストデータを作成する文字画像処理システムが開示されている。

特開２０１６−１１８９０９号公報

しかしながら、上記従来技術は、白画素検出による文字間の空白位置を検出するものであり、比較的に白画素の多い「川」などの文字や、人によって文字間隔に偏りが生まれる手書き文字については、正確に分割ができず、文字の読み取りが正確にできなかった。

そこで、本発明は上記の問題点等に鑑みて為されたもので、その課題の一例は、記載内容を読み取ることができ、セキュリティを向上させた書類管理装置等を提供することを目的とする。

上記の課題を解決するために、請求項１に記載の発明は、複数の記号が並んだ情報が記載された記載領域を書類の画像データから検出する記載領域検出手段と、前記記載領域における前記情報の記載幅を算出する記載幅算出手段と、前記記載幅の２分の１より長い第１分割幅を決定する分割幅決定手段と、前記記載領域の所定の基点から、前記記載領域を前記第１分割幅毎に分割して複数の第１分割画像を生成する第１分割画像生成手段と、前記所定の基点からずらして、前記第１分割幅に対応する第２分割幅毎に前記記載領域を分割して複数の第２分割画像を生成する第２分割画像生成手段と、を備えることを特徴とする。

また、請求項２に記載の発明は、請求項１に記載の書類管理装置において、前記第１分割画像および第２分割画像内に記載された記号を読み取る読取手段と、前記読み取られた記号が属する第１分割画像または第２分割画像における前記読み取られた記号の読取位置に応じて、前記記号が分断されて誤って読み取られる可能性がある分割境界記号であるか否かを判定する分割境界記号判定手段と、を更に備えたことを特徴とする。

また、請求項３に記載の発明は、請求項２に記載の書類管理装置において、前記分割境界記号判定手段が、前記読取位置が、前記第１分割画像または第２分割画像の分割位置から前記記号の記号幅以内である場合、前記分割境界記号と判定することを特徴とする。

また、請求項４に記載の発明は、請求項２または請求項３に記載の書類管理装置において、前記第１分割画像の分割境界記号と、当該第１分割画像に対応する前記第２分割画像の読み取られた記号とを比較して、前記第１分割画像の分割境界記号の適否を判定する記号適否判定手段を、更に備えたことを特徴とする。

また、請求項５に記載の発明は、請求項１から請求項４のいずれか１項に記載の書類管理装置において、前記第１分割画像毎および前記第２分割画像毎の分割位置と、分割画像とを関連付けて記憶する記憶手段を更に備えたことを特徴とする。

また、請求項６に記載の発明は、記載領域検出手段が、複数の記号が並んだ情報が記載された記載領域を書類の画像データから検出する記載領域検出ステップと、記載幅算出手段が、前記記載領域における前記情報の記載幅を算出する記載幅算出ステップと、分割幅決定手段が、前記記載幅の２分の１より長い第１分割幅を決定する分割幅決定ステップと、第１分割画像生成手段が、前記記載領域の所定の基点から、前記記載領域を前記第１分割幅毎に分割して複数の第１分割画像を生成する第１分割画像生成ステップと、第２分割画像生成手段が、前記所定の基点からずらして、前記第１分割幅に対応する第２分割幅毎に前記記載領域を分割して複数の第２分割画像を生成する第２分割画像生成ステップと、を含むことを特徴とする。

また、請求項７に記載の発明は、コンピュータを、複数の記号が並んだ情報が記載された記載領域を書類の画像データから検出する記載領域検出手段、前記記載領域における前記情報の記載幅を算出する記載幅算出手段、前記記載幅の２分の１より長い第１分割幅を決定する分割幅決定手段、前記記載領域の所定の基点から、前記記載領域を前記第１分割幅毎に分割して複数の第１分割画像を生成する第１分割画像生成手段、および、前記所定の基点からずらして、前記第１分割幅に対応する第２分割幅毎に前記記載領域を分割して複数の第２分割画像を生成する第２分割画像生成手段として機能させることを特徴とする。

本発明によれば、記載内容を基点が異なる複数の分割画像に分割して、いずれかの分割画像に分断されない記号があるので、記載内容を読み取ることができ、記載された情報が分割画像に分割されているので、セキュリティを向上させることができる。

本発明の実施形態に係る書類管理システムの概要構成例を示す模式図である。 書類の一例を示す模式図である。 書類の一例を示す模式図である。 書類の一例を示す模式図である。 書類の一例を示す模式図である。 図１の書類管理サーバの概要構成の一例を示すブロック図である。 図１の書類管理サーバにおけるデータベースのデータの一例を示す模式図である。 項目の位置情報の一例を示す模式図である。 図１の画像入力装置の概要構成の一例を示すブロック図である。 図１の照合端末装置の概要構成の一例を示すブロック図である。 記載情報の分割の動作例を示すフローチャートである。 記載領域の一例を示す模式図である。 分割画像の一例を示す模式図である。 分割画像の一例を示す模式図である。 記載領域の一例を示す模式図である。 分割画像の一例を示す模式図である。 分割画像の一例を示す模式図である。 記載領域の一例を示す模式図である。 分割画像の一例を示す模式図である。 分割画像の一例を示す模式図である。 記載領域の一例を示す模式図である。 分割画像の一例を示す模式図である。 分割画像の一例を示す模式図である。 図１０の記載領域の検出のサブルーチンを示すフローチャートである。 記載情報の復元の動作例を示すフローチャートである。 照合端末装置での画面の一例を示す模式図である。 照合端末装置での画面の一例を示す模式図である。 照合端末装置での画面の一例を示す模式図である。 照合端末装置での画面の一例を示す模式図である。

以下、図面を参照して本発明の実施形態について説明する。なお、以下に説明する実施の形態は、書類管理システムに対して本発明を適用した場合の実施形態である。

［１．書類管理システムの構成および機能概要］
（１．１ 書類管理システムの構成および機能）
まず、本発明の一実施形態に係る書類管理システムの構成および概要機能について、図１から図４を用いて説明する。

図１は、本発明の実施形態に係る書類管理システムの概要構成例を示す模式図である。図２から図４は書類の一例を示す模式図である。

図１に示すように、書類管理システム１は、書類に関する書類情報を管理する書類管理サーバ１０と、書類の画像を撮像して画像データを取り込む画像入力装置２０と、書類の項目の照合作業をする照合端末装置３０と、を備えている。ここで、書類情報の一例として、書類の画像データ、書類の画像データから抽出された特徴量、画像データから作成されたテキストデータ、顧客に納品するための納品用のデータ等の電子データが挙げられる。

書類管理サーバ１０は、画像入力装置２０、および、照合端末装置３０における作業を管理する。

画像入力装置２０は、顧客から預かった書類の画像を撮像し、書類に付されるフロントページを作成する。フロントページが付された書類は、保管庫に保管される。

照合端末装置３０は、例えば、パーソナルコンピュータやスマートフォンを含む携帯型無線電話機やタブレット端末等の携帯端末である。照合端末装置３０は、照合して審査するための書類の画像を表示する。照合端末装置３０は、各作業者に応じて、設置されている。

なお、予め、書類の種別のマスタ登録作業、種別毎の書類の項目の切り出し領域の設定作業、項目の照合の難易度の設定作業、作業者の習熟度の設定作業等が行われてもよい。

書類管理サーバ１０、画像入力装置２０、および、照合端末装置３０は、ネットワーク３を介して、例えば、通信プロトコルにＴＣＰ／ＩＰ等を用いて相互にデータの送受信が可能になっている。なお、ネットワーク３は、例えば、ローカルエリアネットワーク、インターネット、専用通信回線（例えば、ＣＡＴＶ（Community Antenna Television）回線）、移動体通信網、およびゲートウェイ等により構築されている。

書類は、例えば、契約書等の申込書類である。また、本人を確認するための書類は、住民票、免許証、戸籍票、健康保険証、パスポート、領収書（例えば、電気、ガス等の公共料金の領収書のように氏名、住所が記載されたもの）、登記簿謄本、納品書等の書類である。なお、書類は、平面の紙のみならず、立体形状でもよく、書類の表面に、読み取り可能な情報が記載されていればよい。

書類の種別の一例として、契約書、住民票、免許証等の種別が挙げられる。さらに、書類の種別は、契約書の場合、顧客毎の契約書のフォーマット毎、住民票の場合、各市町村のフォーマット毎に分類される。

図２に示すように、書類５０の表面に、契約内容、氏名、住所、電話番号等が記載されている。同じ形式の契約書の共通領域として、契約内容、氏名の項目、住所の項目、電話番号の項目、印鑑証明用印影の項目（図示せず）等が挙げられる。契約書の非共通領域として、個人情報である氏名、住所、電話番号等が挙げられる。なお、共通領域は、同じ形式の書類に関して、共通している共通フォーマットの部分である。非共通領域は、同じ形式の書類に関して、申請者毎に異なる部分である。

図３Ａおよび図３Ｂに示すように、書類が住民票の場合、書類５１の表面に、市町村名、住所、氏名、生年月日、性別等が記載されている。ある市町村の形式の住民票の共通領域として、書類の名称、市町村名、住所の項目、氏名の項目、生年月日の項目、性別の項目等が挙げられる。住民票の非共通領域として、個人情報である住所、氏名、生年月日、性別等が挙げられる。

図３Ａおよび図３Ｂに示すように、書類が住民票の場合、市町村により記載の形式が異なる。

図４に示すように、書類が免許証の場合、書類の表面に、氏名、生年月日、住所、写真等が記載されている。免許証の共通領域として、氏名の項目、住所の項目、生年月日の項目、写真の項目等が挙げられる。免許証の非共通領域として、個人情報である氏名、生年月日、住所、個人の写真等が挙げられる。

関連する複数の書類は、一個人や、一法人において関連する複数の書類である。同一の個人または同一の法人に関する少なくとも２以上の書類である。例えば、一個人や、一法人における、契約書等の申込書類、本人を確認するための書類（住民票、免許証、戸籍票、健康保険証、パスポート、領収書）、納品書等の書類等から少なくとも２以上の書類である。関連する複数の書類の一例として、例えば、契約書、住民票、および、免許証の組み合せ、契約書、住民票、および、パスポートの組み合せ、申込書類、および、健康保険証の組み合せ、申込書類、領収証、契約書、および、登記簿謄本の組み合せ等が挙げられる。これら関連する複数の書類は、例えば、書類のセットが同封された封筒で送られてくる。

なお、氏名、住所等が記載される非共通領域は、記載領域の一例である。氏名の項目、住所の項目等の各項目の記載領域がある。

また、記載された内容は、記載情報の一例で、図２から図４に示すように、複数の（英数字、特殊記号等を含む）記号が並んで記載されている。また、記号の中に、スペース（空白）を含めてもよい。複数の記号が並んで記載されている場合、記号の間（特に、１記号の幅以上）は、スペースの記号としてもよい。

（１．２ 書類管理サーバ１０の構成および機能）
次に、書類管理サーバ１０の構成および機能について、図５から図７を用いて説明する。

図５は、書類管理サーバ１０の概要構成の一例を示すブロック図である。図６は、書類管理サーバにおけるデータベースのデータの一例を示す模式図である。図７は、項目の位置情報の一例を示す模式図である。

図５に示すように、コンピュータである書類管理サーバ１０は、書類管理サーバ１０を制御する制御部１１と、様々なデータベースを有する記憶部１２と、照合端末装置３０等と通信する通信部１３と、管理情報等を表示する出力部１４と、を備えている。

制御部１１は、例えば、ＣＰＵ（Central Processing Unit）と、ＲＯＭ（Read Only Memory）と、ＲＡＭ（Random Access Memory）とを有する。制御部１１は、ＣＰＵが、ＲＯＭや、ＲＡＭに記憶された各種制御プログラムを読み出して実行する。制御部１１が、書類管理サーバ１０の各部（記憶部１２、通信部１３、出力部１４等）を制御する。なお、これらのプログラムを記憶した記録媒体等を制御部１１が読み出し実行してもよい。

記憶部１２は、例えば、ハードディスクドライブ等により構成されている。記憶部１２には、予め登録しておくデータを記憶した登録データベース１２ａ、作業者のレベル等を記憶した作業者データベース１２ｂ、撮像された書類の画像データおよび分割画像等を記憶した画像データベース１２ｃ、書類の項目を照合した作業者等を記憶した作業結果データベース１２ｄ、書類の審査結果を記憶した審査結果データベース１２ｅ等が構築されている。

登録データベース１２ａには、書類種別用の登録データベース、項目切り出し領域用の登録データベース、項目の難易度用の登録データベース等が、構築されている。

書類種別用の登録データベースには、書類種別コードに関連付けられて、住民票、免許証、契約書等の書類の種別が記録されている。さらに、登録データベース１２ａには、住民票に対して、市町村名、契約書に対して、顧客名等が記憶されている。

また、項目切り出し領域用の登録データベースには、例えば、書類の種別を示す書類種別ＩＤに関連付けられて、書類のフォーマットの各項目に対応した切り出し領域等が関連付けられて記憶されている。切り出し領域が矩形の場合、矩形の対角に位置する頂点の位置情報が、切り出し領域となる。項目切り出し領域用の登録データベースには、顧客毎の契約書、各市町村の住民票等に関する様々なテンプレートが記憶されている。また、項目切り出し領域用の登録データベースには、書類における項目の情報が記載されて無い無記入の各書類の画像が記憶されている。

また、項目の難易度用の登録データベースには、各項目に対する照合の難易度の情報が記憶されている。例えば、項目の一例の性別は、男／女、またはＭ／Ｆであるので、照合が楽であるが、氏名の場合、異字があり、住所の場合は、書き方がいくつかあり、照合が難しくなる。また、例えば、氏名は、”氏名 ○○”、”被保険者名 ○○”、”世帯主 ○○”、”被扶養者 ○○”と、記載の仕方が異なることもあり、照合が難しくなる。

また、登録データベース１２ａには、顧客ＩＤに関連付けられて、顧客名、納品後の書類の裁断の有無、等の情報が記憶されている。

また、作業者データベース１２ｂには、作業者ＩＤ毎に、作業レベルが記憶されている。なお、作業レベルは、作業者の習熟度、適正等により決定される。作業レベルは、例えば、”Ａ”、”Ｂ”、”Ｃ”等に分類される。なお、作業者ＩＤは、ログインＩＤおよびパスワード、作業者が携帯しているＩＣカードや、名札に印刷されたコード等に関連付けられている。

また、画像データベース１２ｃ（記憶手段の一例）には、図６に示すように、書類を特定する書類ＩＤに関連付けられて、書類の各項目に対応した項目ＩＤ、記載領域を分割した分割画像を示す分割ＩＤ、分割の基点に対応して、分割方向が順方向か逆方向かを示す分割方向ＩＤ、各分割画像の分割位置を示す座標、分割画像の画像データ等が関連付けられて記憶されている。

なお、分割位置を示す座標は、図７に示すように、例えば、第１基点ｂ１の座標（ｘ１，ｙ１）、第２基点ｂ２の座標（ｘ２，ｙ１）等が挙げられる。また、分割位置は、第１基点ｂ１から自然数倍の分割幅の位置、第２基点ｂ２から自然数倍の分割幅の位置等が挙げられる。また、分割方向ＩＤは、分割の基点が３以上の場合、分割方向を示すとは限らない。

また、画像データベース１２ｃには、書類ＩＤ毎に、撮像された画像データ、画像データから切り出しされた切り出し画像（記載領域の一例）等が記憶されている。切り出し画像は、項目に関連付けられて、画像データベース１２ｃには、記憶されている。

なお、画像データと切り出し画像、分割画像とは別々のデータベースでもよい。また、書類ＩＤは、書類ＩＤの他に、書類の特徴量、作業ＩＤ等の書類を特定できるＩＤならばよい。

また、作業結果データベース１２ｄには、包袋ＩＤおよび項目ＩＤに関連付けられて、項目を照合した作業者の作業者ＩＤ、照合に使用した書類の書類ＩＤ、書類において、どの部分を照合に使用したかの選択情報等が記憶されている。

また、審査結果データベース１２ｅには、包袋ＩＤおよび項目ＩＤに関連付けられて、項目を照合した作業者の作業者ＩＤおよび審査結果が記憶されている。審査結果は、例えば、セットの書類に記載された内容が同一であるかの照合結果や、記載の有無のデータである。また、審査結果データベース１２ｅには、住民票等から読み取られたテキストデータが記憶されていてもよい。

同じ書類管理サーバ１０の同じデータベースにより管理されてもよいし、それぞれのデータベースが、別の管理サーバのデータベースに記憶されてもよい。

また、記憶部１２には、オペレーティングシステムおよびサーバプログラム等の各種プログラムが記憶されていてもよい。なお、各種プログラムは、例えば、他のサーバ等からネットワーク３を介して取得されるようにしてもよいし、記録媒体に記録されてドライブ装置を介して読み込まれるようにしてもよい。

通信部１３は、ネットワーク３に接続して、画像入力装置２０、および、照合端末装置３０との通信を制御する。

出力部１４は、例えば、液晶表示素子またはＥＬ（Electro Luminescence）素子等によって構成されている。

（１．３ 画像入力装置２０の構成および機能）
次に、画像入力装置２０の構成および機能について、図８を用いて説明する。

図８は、画像入力装置２０の概要構成の一例を示すブロック図である。

図８に示すように、画像入力装置２０は、制御部２１と、記憶部２２と、通信部２３と、出力部２４と、操作部２５と、撮像部２６と、を備えている。

制御部２１は、制御部１１と同様の構成を有し、画像入力装置２０を制御する。記憶部２２は、記憶部１２と同様の構成を有し、各種プログラムを記憶する。通信部２３は、書類管理サーバ１０等と通信を制御する。

出力部２４は、例えば、液晶表示素子またはＥＬにより構成されていて、撮像した画像が表示される。さらに、出力部２４は、プリンタを有し、書類に付されるフロントページを印刷してもよい。

操作部２５は、例えば、キーボードおよびマウス等によって構成されている。さらに、操作部２５は、ユーザの足により、撮像部２６の撮像の作動を行う画像入力スイッチを有する。

撮像部２６は、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサやＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等の撮像素子を有するデジタルカメラである。

撮像部２６は、複数のデジタルカメラにより構成される。テーブルの上に、書類（例えば、契約書、住民票等）が複数並べられ、解像度を上げるために、各書類を部分的に区切って、複数のデジタルカメラにより撮像する。なお、撮像部２６は、スキャナでもよく、書類をスキャニングして撮像する。

（１．４ 照合端末装置３０の構成および機能）
次に、照合端末装置３０の構成および機能について、図９を用いて説明する。

図９に示すように、コンピュータとして機能する照合端末装置３０は、例えば、パーソナルコンピュータやスマートフォンを含む携帯型無線電話機やＰＤＡ等の携帯端末であり、制御部３１と、記憶部３２と、通信部３３と、出力部３４と、操作部３５と、を備えている。

制御部３１は、制御部２１と同様の構成を有し、照合端末装置３０を制御する。記憶部３２は、記憶部２２と同様の構成を有し、各種プログラムを記憶する。通信部３３は、書類管理サーバ１０等と通信を制御する。出力部３４は、出力部２４と同様の構成を有し、審査用の画像を表示する。

［２．書類管理システムの動作］
次に、本発明の１実施形態に係る書類管理システムの動作について図を用いて説明する。

（２．１ 記載情報の分割の動作例）
まず、書類管理システムにおける記載情報の分割の動作例を、図１０を用いて説明する。

図１０は、記載情報の分割の動作例を示すフローチャートである。図１１Ａ、図１２Ａ、図１３Ａ、および、図１４Ａは、記載領域の一例を示す模式図である。図１１Ｂ、図１１Ｃ、図１２Ｂ、図１２Ｃ、図１３Ｂ、図１３Ｃ、図１４Ｂ、および、図１４Ｃは、分割画像の一例を示す模式図である。

顧客（例えば、カード会社、保険会社等）から、複数の書類が組まれた書類のセットが、まとめて送られてくる。例えば、書類のセットが同封された封筒が詰められた段ボール箱が、顧客から送られてくる。

複数の書類のセットは、例えば、顧客の各ユーザ（例えば、カード会社、保険会社等に申し込みをする個人や法人）から顧客に申し込まれた書類のセットである。書類のセットは、申込書類（例えば、契約書、申込用紙）および本人確認用の書類等である。本人確認用の書類として２通必要な場合、例えば、住民票および免許証、住民票および健康保険証等である。なお、法人の場合、法人確認用の書類として、代表取締役の印が押された書類である。

まず、送付されてきた封筒等の開封作業が行われる。例えば、届けられた段ボールが開けられ、書類のセットが同封された封筒が取り出される。そして、封筒が開封されて、書類のセットが取り出される。

また、各書類にコード等の各書類を識別するための書類ＩＤが付与されてもよい。付与されるコードの一例として、バーコードや２次元コード等が挙げられる。

次に、書類の不備の確認作業が行われる。書類が、書類のセットが全て揃っているか、書類の毀損が無いか等のチェックが行われる。確認作業後、書類のセットが保管庫に搬送される。

次に、書類管理システム１は、書類の画像データを取得する（ステップＳ１）。具体的には、画像入力装置２０が、保管庫から取り出した書類の画像データ化を行うため、画像入力装置２０の制御部２１が、撮像部２６により書類を撮像して画像を取り込む。画画像入力装置２０は、通信部２３を介して、画像データを、書類管理サーバ１０に送信する。書類管理サーバ１０の制御部１１が、通信部１３を介して、画画像入力装置２０から画像データを取得する。書類管理サーバ１０が、受信した画像データを画像データベース１２ｃに記憶する。

なお、画像入力装置２０は、撮像された画像データの傾き等を補正してもよい。例えば、制御部２１が、画像処理により画像における書類の枠を検出し、傾きを補正する。なお、画像データ化が終了した書類のセットは、保管庫に保存される。

次に、画画像入力装置２０は、通信部２３を介して、画像データを、書類管理サーバ１０に送信する。

次に、書類管理システム１は、記載領域を検出する（ステップＳ２）。具体的には、書類管理サーバ１０の制御部１１が、通信部１３を介して、画画像入力装置２０から画像データを取得する。制御部１１が、後述の記載領域の検出のサブルーチンにより、書類の画像データから項目毎の記載領域を検出する。

このように、書類管理サーバ１０は、複数の記号が並んだ情報が記載された記載領域を書類の画像データから検出する記載領域検出手段の一例として機能する。

次に、書類管理システム１は、記載幅を算出する（ステップＳ３）。具体的には、制御部１１が、記載領域に記載された記号を検出し、記号の記載方向の記載幅を算出する。図１１Ａに示すように、制御部１１が、記載幅ｗを算出する。例えば、制御部１１が、記載された記号をそれぞれ検出して、端の文字、例えば、文字“大”を示す領域の最小のｘ座標と、文字“郎”を示す領域の最大のｘ座標との差から、記載幅ｗを算出する。なお、記載幅ｗの中に記載されている記号の間に、１記号の幅以上の空白があってもよい。

なお、記載幅は、記載された記号の端同士に関連した幅でよい。例えば、図１２Ａに示すように、記載された記号を含む記載幅ｗでもよい。また、記載幅は、図１３Ａに示すように、端の文字“山”の中心部分と、端の文字“冬”の中心部分を結ぶ幅でもよい。また、記載幅は、図１４Ａに示すように、端の文字“Ｄ”の中心部分と、端の文字“o”の端の部分とを結ぶ記載幅ｗでもよい。

このように、書類管理サーバ１０は、前記記載領域における前記情報の記載幅を算出する記載幅算出手段の一例として機能する。

次に、書類管理システム１は、分割幅を決定する（ステップＳ４）。制御部１１が、記載幅ｗの２分の１より長い第１分割幅ｄ１を決定する。例えば、図１１Ａ（図１３Ａ、図１４Ａ）に示すように、制御部１１が、記載幅ｗの２／３である第１分割幅ｄ１を決定する。

図１１Ａに示すように、第２分割幅ｄ２は、第１分割幅ｄ１と同じだが、第２分割幅ｄ２と第１分割幅ｄ１とは、記載されている記号の大きさ（平均の大きさ、最大または最小の大きさ等）より短い幅で、互いに多少異なってもよい。また、各分割幅ｄ１は、記載されている記号の大きさより短い幅で、互いに多少異なってもよい。各分割幅ｄ２は、記載されている記号の大きさより短い幅で、互いに多少異なってもよい。

また、第１分割幅ｄ１および第２分割幅は、記載幅ｗの２分の１より長ければよく、図１２Ａに示すように、記載幅ｗの３／５等でもよい。

このように、書類管理サーバ１０は、前記記載幅の２分の１より長い第１分割幅を決定する分割幅決定手段の一例として機能する。

次に、書類管理システム１は、第１分割位置を決定する（ステップＳ５）。具体的には、制御部１１が、図１１Ａに示すように、記載領域の１の端の位置に基点ｂ１となる第１分割位置を決定する。第１分割位置を基点として、分割幅ｄ１の位置に各第１分割位置が定まる。

なお、図１１Ａに示すように、基点ｂ１となる第１分割位置は、文字“大”のｘ座標の位置付近でもよい。図１４Ａに示すように、基点ｂ１となる第１分割位置は、記載領域の端の位置でもよい。

次に、書類管理システム１は、第１分割画像を生成する（ステップＳ６）。具体的には、制御部１１が、分割位置を基点ｂ１として、記載領域の画像を分割幅ｄ１に分割し、図１１Ｂに示すように、４つの第１分割画像を生成する。図１２Ｂに示すように、制御部１１が、短めの第１分割幅ｄ１（記載幅ｗの３／５）により、５つの第１分割画像を生成してもよい。図１３Ｂに示すように、３つの第１分割画像を生成してもよい。ここで、分割位置（基点ｂ１）は、記載領域の所定の基点の一例である。また、所定の基点は、図１１Ａ中において、黒丸で示す点のように、第１分割画像の境界部分なら、どこでもよい。

このように、書類管理サーバ１０は、前記記載領域の所定の基点から、前記記載領域を前記第１分割幅毎に分割して複数の第１分割画像を生成する第１分割画像生成手段の一例として機能する。

次に、書類管理システム１は、第２分割位置を決定する（ステップＳ７）。具体的には、制御部１１が、図１１Ａに示すように、記載領域の他の端の位置に基点ｂ２となる第２分割位置を決定する。第２分割位置を基点ｂ２として、分割幅ｄ２の位置に各第２分割位置が定まる。これらの第２分割位置は、所定の基点からずれた第２基点の一例であり、例えば、各第１分割位置の中間（好ましくは、真ん中）に位置する。また、第２基点は、図１１Ａ中において、白丸で示す点のように、第２分割画像の境界部分なら、どこでもよい。記載領域に記載された各記号が、第１分割画像または第２分割画像のいずれかに、分断されない状態で入るように、第１分割位置に対して第２分割位置が設定されるならよい。

なお、図１２Ａに示すように、分割幅ｄ１の真ん中の位置に第２分割位置が設定されてもよい。図１４Ａに示すように、第２分割位置（基点ｂ２）は、第１分割位置（基点ｂ１）と逆の記載領域の端の位置でもよい。

このように、書類管理サーバ１０は、前記所定の基点からずらして、前記第１分割幅に対応する第２分割幅毎に前記記載領域を分割して複数の第２分割画像を生成する第２分割画像生成手段の一例として機能する。

次に、書類管理システム１は、第２分割画像を生成する（ステップＳ８）。具体的には、制御部１１が、分割位置を基点ｂ２として、記載領域の画像を分割幅ｄ２に分割し、図１１Ｃに示すように、４つの第１分割画像を生成する。図１２Ｃに示すように、制御部１１が、短めの第１分割幅ｄ２（記載幅ｗの３／５）により、５つの第２分割画像を生成してもよい。図１３Ｃに示すように、３つの第２分割画像を生成してもよい。

なお、分割画像を生成する際、図１１Ａに示すように、第１分割位置（基点ｂ１）から分割し第１分割画像を生成し、反対に位置する第２分割位置（基点ｂ２）から分割し第２分割画像を生成しているので、分割方向が２方向あるとみることができる。なお、方向でなくとも、分割の基点（第１分割位置および第２分割位置）で区別してもよい。

特に、図１３Ｂ、図１３Ｃ等の分割画像が示すように、記載幅ｗの２分の１より長い第１分割幅ｄ１および第２分割幅により、各第１分割画像および各第２分割画像のいずれかに、分断されない記載された文字が含まれる。

例えば、図１３Ｂ、に示すように、第１分割画像に、分断されていない手書きの記号“山”“秋”が含まれている。また、図１３Ｃに示すように、第２分割画像に、分断されていない手書きの記号“川”“冬”が含まれている。

また、図１４Ｂ、図１４Ｃに示すように、英語の場合、単語は、いずれかの分割画像に含まれているとは限らないが、各文字は、いずれかの分割画像に含まれている。

次に、書類管理システム１は、分割方向と分割位置と各分割画像とを関連付けて記憶する（ステップＳ９）。具体的には、制御部１１が、各第１分割画像および各第２分割画像を、各第１分割位置および各第２分割位置とともに、図６に示すように、書類ＩＤ、項目ＩＤ、分割ＩＤ、分割方向ＩＤ（第１分割か第２分割であるかのＩＤ）に関連付けられて、画像データベース１２ｃ等に記憶される。なお、分割画像は分割画像ＩＤに関連付けられて、別のデータベースに保存されてもよい。

さらに、制御部１１が、ＯＣＲ（Optical Character Recognition）等で、記載された記号があるか否かを判定した結果も、各分割画像を関連付けて記憶してもよい。記載された記号がない分割画像は、出力されなくてもよい。また、制御部１１が、ＯＣＲ等で、各分割画像の両端の分割位置にかかっている記号（分割境界記号）があるか否かを判定し、判定結果を、各分割画像と関連付けて画像データベース１２ｃ等に記憶してもよい。

このように、書類管理サーバ１０は、前記第１分割画像毎および前記第２分割画像毎の分割位置と、分割画像とを関連付けて記憶する記憶手段の一例として機能する。

（２．２ 記載領域の検出のサブルーチン）
次に、記載領域の検出のサブルーチンについて図１５を用いて説明する。

図１５は、記載領域の検出のサブルーチンを示すフローチャートである。

図１５に示すように、書類管理サーバ１０は、書類の種別の特定を行う（ステップＳ１０）。例えば、制御部１１が、顧客名から契約書の種別（顧客毎の契約書のフォーマット）を特定したりして、受け付けた書類の種別により特定を行う。なお、また、制御部１１が、書類の画像データから文字認識をして、契約書、住民票、市町村等を認識し、書類の種別を特定してもよい。

次に、書類管理サーバ１０は、書類種別に基づき、無記入の各書類の画像を取得する（ステップＳ１１）。具体的には、制御部１１が、項目切り出し領域用の登録データベース等を参照して、書類種別に基づき、項目の情報が記載されて無い無記入の各書類の画像を取得する。

次に、書類管理サーバ１０は、無記入の書類の画像との差分画像から、各項目の画像を切り出す（ステップＳ１２）。具体的には、制御部１１が、書類における項目の情報が記載されている書類の画像と、無記入の書類の画像との位置合わせをして、差分画像を求める。制御部１１は、書類の隅、書類のタイトル等の特徴量の位置により、項目の情報が記載されている画像と無記入の画像との位置合わせを行う。項目の情報が記載されている画像と無記入の画像と差分画像なので、項目の情報が記載されたところの画素以外の画素が、０の値になり、項目の情報が記載されたところの画素が容易に抽出される。記載事項の黒色等の記載部分のパターンのみが容易に抽出される。

制御部１１が、項目切り出し領域用の登録データベース等を参照して、特定した書類種別に基づき、書類における記載領域の位置を特定し、項目毎の記載領域の画像として、差分画像から項目毎の画像を切り出す。図２および図３Ａに示すように、各項目の記載領域の画像として、切り出し領域５０ａ、５０ｂ、５０ｃ、切り出し領域５１ａ、５１ｂ、５１ｃ、５１ｄ等の切り出し画像が切り出される。罫線がある場合、記載領域の画像に罫線が含まれても、含まれなくてもよく、また、記載領域の画像に共通領域が含まれても含まれなくてもよく、他の項目が含まれなければよい。

なお、制御部１１が、画像処理により、項目毎の画像を切り出してもよい。例えば、制御部１１が、項目切り出し領域用の登録データベースのテンプレート等を参照して、パターンマッチングにより、項目毎の画像を切り出してもよい。また、画像認識、ＯＣＲ等により、記載領域を検出してもよい。

（２．３ 記載情報の復元の動作例）
次に、記載情報の復元の動作例について、図１６から図１７を用いて説明する。

図１６は、記載情報の復元の動作例を示すフローチャートである。図１７Ａから図１７Ｄは、照合端末装置での画面の一例を示す模式図である。

次に、書類管理システム１は、分割画像を出力する（ステップＳ２０）。具体的には、書類管理サーバ１０の制御部１１が、審査対象の書類の各分割画像を、書類ＩＤおよび分割ＩＤとともに、各照合端末装置３０に送信する。なお、記号がない空白の分割画像は送信されなくてもよい。また、第１分割画像であるか、第２分割画像であるかは、分割ＩＤ等で特定してもよい。

各照合端末装置３０は、書類管理サーバ１０から、別々の分割画像の画像データを受信する。各照合端末装置３０は、図１７Ａから図１７Ｄに示すように、それぞれ別々に、検査対象画像として、分割画像を、出力部３４の画面３４ａに表示する。

次に、書類管理システム１は、分割画像の読取結果を取得する（ステップＳ２１）。各照合端末装置３０の各作業者は、画面３４ａの検査対象画像欄に表示された分割画像を見て、読取結果入力欄に、読み取った読取結果を、操作部３５により入力する。例えば、図１７Ａに示すように、第１分割画像の読取結果“大日本”が入力される。なお、記号“：”のように見える分割境界記号は入力されなくてもよい。

また、図１７Ｂに示すように、第１分割画像の読取結果“太郎”が入力される。なお、一部文字が欠けているので、読取結果“郎”のみが入力され、分割境界記号である“太”は入力されなくてもよい。

図１７Ｃに示すように、第２分割画像の読取結果“大”が入力される。なお、一部文字が見えている記号（分割境界記号）から判読して、読取結果“大Ｅ” が入力されてもよい。

図１７Ｄに示すように、第２分割画像の読取結果“本 太郎”が入力される。なお、一部文字が見えている記号から判読して、読取結果“１本 太郎” が入力されてもよい。また、記号“１”は、分割境界記号として、別に入力されてもよい。

なお、分割画像の端にある記号の場合、作業者は、その記号を入力しなくてもよいし、分割境界記号として、別に入力してもよい。

各照合端末装置３０は、読取結果を、書類ＩＤおよび分割ＩＤとともに、書類管理サーバ１０に送信する。なお、照合端末装置３０が、ＯＣＲで読み取りを行ってもよい。

書類管理サーバ１０は、読取結果を、各照合端末装置３０から受信する。

次に、書類管理システム１は、分割境界記号を検出する（ステップＳ２２）。具体的には、制御部１１が、分割画像ＩＤに基づき、読み取り結果に対応する分割画像を読み出し、ＯＣＲ等で、分割境界記号を検出する。制御部１１が、分割画像の両端から所定距離（例えば、１文字、１記号の大きさ、記載領域に記載された記号の平均の記号幅、記載幅を文字数で割った値等）にある記号を、分割境界記号とする。なお、制御部１１が、入力文字の始めと終わりの文字のうち、分割画像の両端から所定距離にある記号を分割境界記号としてもよい。作業者が読み取る場合、分割画像の両端の分割位置にかかっている記号を、分割境界記号として、別入力しておいてもよい。

このように、書類管理サーバ１０は、前記読み取られた記号が属する第１分割画像または第２分割画像における前記読み取られた記号の読取位置に応じて、前記記号が分断されて誤って読み取られる可能性がある分割境界記号であるか否かを判定する分割境界記号判定手段の一例として機能する。書類管理サーバ１０は、前記読取位置が、前記第１分割画像または第２分割画像の分割位置から前記記号の記号幅以内である場合、前記分割境界記号と判定する分割境界記号判定手段の一例として機能する。

次に、書類管理システム１は、分割境界記号の適切な結果を判定する（ステップＳ２３）。具体的には、制御部１１が、第１分割画像と第２分割画像との対応関係から、分割境界記号が適切か判定する。

例えば、図１７Ａに示すような第１分割画像の左側と図１７Ｃに示すような第２分割画像の右側とは対応する。図１７Ａに示すように、読み取られた分割境界記号“大”と、図１７Ｃに示すように、読み取られた記号“大”（読み取られた記号の右側）とが同じなので、制御部１１が、適切と判定する。

なお、第２分割画像で、読み取られた記号が“大E”の場合、第１分割画像で読み取られた分割境界記号“大”と、第２分割画像で読み取られた分割境界記号“E”と異なるので、不適切と判定されてもよい。この場合、さらに、第１分割画像で読み取られた分割境界記号“大”の隣の記号“日”と、第２分割画像で読み取られた分割境界記号“E”と比較して、異なるので、分割境界記号“E”は不適切と判定され、第２分割画像で読み取られた分割境界記号“E”の隣の記号“大”と、第１分割画像で読み取られた分割境界記号“大”と比較して、同じなので、分割境界記号“大”は適切と判断されてもよい。

また、図１７Ａに示すような第１分割画像の右側と対応する、図１７Ｄに示すような第２分割画像の左側は対応する。図１７Ａに示すように、読み取られた分割境界記号“：”と、図１７Ｄに示すように、読み取られた記号“大”とが異なるので、制御部１１が、不適切と判定する。

図１７Ｂに示すような第１分割画像の左側と図１７Ｄに示すような第２分割画像の右側とは対応する。図１７Ｂに示すように、読み取られた記号“郎”と、図１７Ｄに示すように、読み取られた分割境界記号“郎”とが同じなので、制御部１１が、適切と判定する。また、図１７Ｂに示すように、読み取られた分割境界記号“太”と記号“朗”と、図１７Ｄに示すように、読み取られた記号“太”と分割境界記号“朗”とを対応させて、制御部１１が、適切か否かを判定してもよい。

なお、制御部１１が、分割位置を考慮して、統計的に２回以上出現した“大”、“本”、“郎”や、”大日本 ：”における中間の文字“日本”、”１本 太郎”における中間の文字”本 太”を、適切な記号と判定してもよい。制御部１１が、分割方向および分割位置より分割境界記号の適切な結果を判定してもよい。

このように、書類管理サーバ１０は、前記第１分割画像の分割境界記号と、当該第１分割画像に対応する前記第２分割画像の読み取られた記号とを比較して、前記第１分割画像の分割境界記号の適否を判定する記号適否判定手段の一例として機能する。

次に、書類管理システム１は、書類の記載内容を復元する（ステップＳ２４）。具体的には、制御部１１が、適切な記号と判定された記号より、分割方向および分割位置より並べて、書類の内容を復元する。なお、“大Ｅ”と、”大日本 ：”と、”１本 太郎”と、”郎”とを分割方向および分割位置に従って順番に並べ、制御部１１が、人工知能等により、”大日本 太郎”と復元してもよい。

以上、本実施形態によれば、記載内容を基点ｂ１、ｂ２が異なる複数の分割画像に分割して、いずれかの分割画像に分断されない記号があるので、記載内容を読み取ることができ、記載された情報が分割画像に分割されているので、セキュリティを向上させることができる。

また、「川」や手書き文字といった空白位置により文字分割位置を決めにくい場合も、ＯＣＲ等により読み取り可能な記号の情報を、いずれかの分割画像に含んだ状態での分割が可能となる。さらに、書式が多岐に渡るため、分割書式を登録できない住民票のような帳票の場合も、ＯＣＲ等により読み取り可能な記号の情報を、いずれかの分割画像に含んだ状態での分割が可能となる。

第１分割画像および第２分割画像内に記載された記号を読み取り、読み取られた記号が属する第１分割画像または第２分割画像における読み取られた記号の読取位置に応じて、記号が分断されて誤って読み取られる可能性がある分割境界記号であるか否かを判定する場合、読取位置によって、読み取られた記号を、分割境界記号である否かで分けることにより、読み取られた内容が正しいか否かの判断がしやすくなる。

読取位置が、第１分割画像または第２分割画像の分割位置から記号の記号幅以内である場合、分割境界記号と判定する場合、明確に、分割境界記号である否かで分けることができる。

第１分割画像の分割境界記号と、当該第１分割画像に対応する第２分割画像の読み取られた記号とを比較して、第１分割画像の分割境界記号の適否を判定する場合、分割境界記号の適否を判定することで、記号が分断された読み間違った記号を取り除くことができる。

第１分割画像毎および記第２分割画像毎の分割位置と、分割画像とを関連付けて記憶する場合、各分割画像において読み取られた記号から、各分割画像の関係性により、記載内容を復元することができる。

さらに、書類管理サーバ１０または書類管理システム１の外部システムのＯＣＲを利用する際は、分割画像でのＯＣＲを行い、その結果を元に分割前画像の記号内容を復元することにより、手書き帳票や非定型帳票などの様々な種類の帳票画像に対して、分割による匿名化・秘匿化を行った上でのデジタルデータ化を実現できる。

１：書類管理システム
１０：管理サーバ（書類管理装置）
１１：制御部
５０、５１：書類
５０ａ、５０ｂ、５０ｃ、５１ａ、５１ｂ、５１ｃ、５１ｄ：切り出し領域（記載領域）
ｗ：記載幅
ｄ１：第１分割幅（分割幅）
ｄ２：第２分割幅（分割幅）

Claims (7)

1. 複数の記号が並んだ情報が記載された記載領域を書類の画像データから検出する記載領域検出手段と、
   前記記載領域における前記情報の記載幅を算出する記載幅算出手段と、
   前記記載幅の２分の１より長い第１分割幅を決定する分割幅決定手段と、
   前記記載領域の所定の基点から、前記記載領域を前記第１分割幅毎に分割して複数の第１分割画像を生成する第１分割画像生成手段と、
   前記所定の基点からずらして、前記第１分割幅に対応する第２分割幅毎に前記記載領域を分割して複数の第２分割画像を生成する第２分割画像生成手段と、
   を備えることを特徴とする書類管理装置。
2. 請求項１に記載の書類管理装置において、
   前記第１分割画像および第２分割画像内に記載された記号を読み取る読取手段と、
   前記読み取られた記号が属する第１分割画像または第２分割画像における前記読み取られた記号の読取位置に応じて、前記記号が分断されて誤って読み取られる可能性がある分割境界記号であるか否かを判定する分割境界記号判定手段と、
   を更に備えたことを特徴とする書類管理装置。
3. 請求項２に記載の書類管理装置において、
   前記分割境界記号判定手段が、前記読取位置が、前記第１分割画像または第２分割画像の分割位置から前記記号の記号幅以内である場合、前記分割境界記号と判定することを特徴とする書類管理装置。
4. 請求項２または請求項３に記載の書類管理装置において、
   前記第１分割画像の分割境界記号と、当該第１分割画像に対応する前記第２分割画像の読み取られた記号とを比較して、前記第１分割画像の分割境界記号の適否を判定する記号適否判定手段を、更に備えたことを特徴とする書類管理装置。
5. 請求項１から請求項４のいずれか１項に記載の書類管理装置において、
   前記第１分割画像毎および前記第２分割画像毎の分割位置と、分割画像とを関連付けて記憶する記憶手段を更に備えたことを特徴とする書類管理装置。
6. 記載領域検出手段が、複数の記号が並んだ情報が記載された記載領域を書類の画像データから検出する記載領域検出ステップと、
   記載幅算出手段が、前記記載領域における前記情報の記載幅を算出する記載幅算出ステップと、
   分割幅決定手段が、前記記載幅の２分の１より長い第１分割幅を決定する分割幅決定ステップと、
   第１分割画像生成手段が、前記記載領域の所定の基点から、前記記載領域を前記第１分割幅毎に分割して複数の第１分割画像を生成する第１分割画像生成ステップと、
   第２分割画像生成手段が、前記所定の基点からずらして、前記第１分割幅に対応する第２分割幅毎に前記記載領域を分割して複数の第２分割画像を生成する第２分割画像生成ステップと、
   を含むことを特徴とする書類管理方法。
7. コンピュータを、
   複数の記号が並んだ情報が記載された記載領域を書類の画像データから検出する記載領域検出手段、
   前記記載領域における前記情報の記載幅を算出する記載幅算出手段、
   前記記載幅の２分の１より長い第１分割幅を決定する分割幅決定手段、
   前記記載領域の所定の基点から、前記記載領域を前記第１分割幅毎に分割して複数の第１分割画像を生成する第１分割画像生成手段、および、
   前記所定の基点からずらして、前記第１分割幅に対応する第２分割幅毎に前記記載領域を分割して複数の第２分割画像を生成する第２分割画像生成手段として機能させることを特徴とする書類管理装置用のプログラム。

Images