以下、図面を参照して本発明の実施形態について説明する。なお、以下に説明する実施の形態は、管理システムに対して本発明を適用した場合の実施形態である。
[1.管理システムの構成および機能概要]
(1.1 管理システムの構成および機能)
まず、本発明の一実施形態に係る管理システムの構成および概要機能について、図1から図4を用いて説明する。
図1は、本実施形態に係る管理システム1の概要構成例を示す模式図である。図2から図4は、書類の一例を示す模式図である。
図1に示すように、管理システム1は、書類に関する書類情報を管理する管理サーバ10と、書類の種別や種別毎の切り出し領域等の登録作業をする登録装置20と、書類の項目に対して情報が記載された記載領域の画像を撮像して画像データを取り込む画像入力装置30と、書類の項目の照合作業をする照合端末装置40と、を備えている。ここで、書類情報の一例として、書類の画像データ、書類の画像データから抽出された特徴量、画像データから作成されたテキストデータ、顧客に納品するための納品用のデータ等の電子データが挙げられる。
管理サーバ10は、登録装置20、画像入力装置30、および、照合端末装置40における作業を管理する。
登録装置20では、予め、書類の種別のマスタ登録作業、種別毎の書類の項目の切り出し領域の設定作業、項目の照合の難易度の設定作業、作業者の習熟度の設定作業等が行われる。
画像入力装置30は、顧客から預かった書類の画像を撮像し、書類に付されるフロントページを作成する。フロントページが付された書類は、保管庫5に保管される。
照合端末装置40は、例えば、パーソナルコンピュータやスマートフォンを含む携帯型無線電話機やタブレット端末等の携帯端末である。照合端末装置40は、照合して審査するための書類の画像を表示する。照合端末装置40は、各作業者に応じて、設置されている。
管理サーバ10、登録装置20、画像入力装置30、および、照合端末装置40は、ネットワーク3を介して、例えば、通信プロトコルにTCP/IP等を用いて相互にデータの送受信が可能になっている。なお、ネットワーク3は、例えば、ローカルエリアネットワーク、インターネット、専用通信回線(例えば、CATV(Community Antenna Television)回線)、移動体通信網、およびゲートウェイ等により構築されている。
書類は、例えば、契約書等の申込書類である。また、本人を確認するための書類は、住民票、免許証、戸籍票、健康保険証、パスポート、領収書(例えば、電気、ガス等の公共料金の領収書のように氏名、住所が記載されたもの)、登記簿謄本、納品書等の書類である。なお、書類は、平面の紙のみならず、立体形状でもよく、書類の表面に、読み取り可能な情報が記載されていればよい。
書類の種別の一例として、契約書、住民票、免許証等の種別が挙げられる。さらに、書類の種別は、契約書の場合、顧客毎の契約書のフォーマット毎、住民票の場合、各市町村のフォーマット毎に分類される。
図2に示すように、書類が契約書(書類50)の場合、書類の表面に、契約内容、氏名、住所、電話番号等が記載されている。同じ形式の契約書の共通領域として、契約内容、氏名の項目、住所の項目、電話番号の項目、印鑑証明用印影の項目(図示せず)等が挙げられる。契約書の非共通領域として、個人情報である氏名(切り出し領域50a)、住所(切り出し領域50b)、電話番号(切り出し領域50c)等が挙げられる。なお、共通領域は、同じ形式の書類に関して、共通している共通フォーマットの部分である。非共通領域は、同じ形式の書類に関して、申請者毎に異なる部分である。
図3Aおよび図3Bに示すように、書類が住民票の場合、書類の表面に、市町村名、住所、氏名、生年月日、性別等が記載されている。ある市町村の形式(書類に応じた所定の形式の一例)の住民票の共通領域として、書類の名称、市町村名、住所の項目、氏名の項目、生年月日の項目、性別の項目等が挙げられる。住民票の非共通領域として、個人情報である住所(切り出し領域51b)、氏名(切り出し領域51a)、生年月日、性別等が挙げられる。
図3Aおよび図3Bに示すように、書類が住民票の場合、市町村により記載の形式(書類に応じた所定の形式の一例)が異なる。
図4に示すように、書類に応じた所定の形式の一例として、書類が免許証の場合、書類の表面に、氏名、生年月日、住所、写真等が記載されている。免許証の共通領域として、氏名の項目、住所の項目、生年月日の項目、写真の項目等が挙げられる。免許証の非共通領域として、個人情報である氏名、生年月日、住所、個人の写真等が挙げられる。
関連する複数の書類は、一個人や、一法人において関連する複数の書類である。同一の個人または同一の法人に関する少なくとも2以上の書類である。例えば、一個人や、一法人における、契約書等の申込書類、本人を確認するための書類(住民票、免許証、戸籍票、健康保険証、パスポート、領収書)、納品書等の書類等から少なくとも2以上の書類である。関連する複数の書類の一例として、例えば、契約書、住民票、および、免許証の組み合せ、契約書、住民票、および、パスポートの組み合せ、申込書類、および、健康保険証の組み合せ、申込書類、領収証、契約書、および、登記簿謄本の組み合せ等が挙げられる。これら関連する複数の書類は、例えば、書類のセットが同封された封筒で送られてくる。
(1.2 管理サーバ10の構成および機能)
次に、管理サーバ10の構成および機能について、図5から図12を用いて説明する。
図5は、管理サーバ10の概要構成の一例を示すブロック図である。図6から図12は、管理サーバ10におけるデータベースのデータの一例を示す模式図である。
図5示すように、コンピュータである管理サーバ10は、管理サーバ10を制御する制御部11と、様々なデータベースを有する記憶部12と、各管理サーバ10および登録装置20と通信する通信部13と、管理情報等を表示する出力部14と、を備えている。
制御部11は、例えば、CPU(Central Processing Unit)と、ROM(Read Only Memory)と、RAM(Random Access Memory)とを有する。制御部11は、例えば、CPUと、ROMと、RAMと、を有する。制御部11は、CPUが、ROMや、RAMに記憶された各種制御プログラムを読み出して実行する。制御部11が、管理サーバ10の各部(記憶部12、通信部13、出力部14等)を制御する。なお、これらのプログラムを記憶した記録媒体等を制御部11が読み出し実行してもよい。
記憶部12(記憶手段の一例)は、例えば、ハードディスクドライブ等により構成されている。記憶部12には、予め登録しておくデータを記憶した登録データベース12a、作業者のレベル等を記憶した作業者データベース12b、撮像された切り出し画像等を記憶した画像データベース12c、書類の項目を照合した作業者等を記憶した作業結果データベース12d、書類の審査結果を記憶した審査結果データベース12e等が構築されている。
書類種別用の登録データベース12aには、図6に示すように、書類種別コードに関連付けられて、住民票、免許証、契約書等の書類の種別が記録されている。さらに、登録データベース12aには、住民票に対して、市町村名、契約書に対して、顧客名等が記憶されている。
また、項目切り出し領域用の登録データベース12aには、図7に示すように、書類の種別を示すIDに関連付けられて、書類のフォーマットの各項目に対応した切り出し領域等が関連付けられて記憶されている。図8に示すように、切り出し領域50aが矩形の場合、矩形の対角に位置する頂点の位置情報が、切り出し領域50aとなる。項目切り出し領域用の登録データベース12aには、顧客毎の契約書、各市町村の住民票等に関する様々なテンプレートが記憶されている。
また、項目の難易度用の登録データベース12aには、図9に示すように、各項目に対する照合の難易度の情報が記憶されている。性別は、男/女、またはM/Fであるので、照合が楽であるが、氏名の場合、異字があり、住所の場合は、書き方がいくつかあり、照合が難しくなる。また、例えば、氏名は、”氏名 ○○”、”被保険者名 ○○”、”世帯主 ○○”、”非扶養者 ○○”と、記載の仕方が異なることもあり、照合が難しくなる。
また、登録データベース12aには、顧客IDに関連付けられて、顧客名、納品後の書類の裁断の有無、等の情報が記憶されている。
また、作業者データベース12bには、図10に示すように、作業者ID毎に、作業レベルが記憶されている。なお、作業レベルは、作業者の習熟度、適正等により決定される。作業レベルは、例えば、”A”、”B”、”C”等に分類される。なお、作業者IDは、ログインIDおよびパスワード、作業者が携帯しているICカードや、名札に印刷されたコード等に関連付けられている。
また、画像データベース12cには、図11に示すように、書類ID毎に、画像データから切り出しされた切り出し画像(部分画像の一例であり、書類における各項目の部分の画像)等が記憶されている。切り出し画像は、項目に関連付けられて、画像データベース12cには、記憶されている。なお、書類IDは、書類IDの他に、書類の特徴量、作業ID等の書類を特定できるIDならばよい。
また、作業結果データベース12d(記憶手段の一例)には、図12に示すように、包袋IDおよび項目IDに関連付けられて、項目を照合した作業者の作業者ID、照合に使用した書類の書類ID、書類において、どの部分を照合に使用したかの選択情報等が記憶されている。
また、審査結果データベース12e(記憶手段の一例)には、図13に示すように、包袋IDおよび項目IDに関連付けられて、項目を照合した作業者の作業者IDおよび審査結果が記憶されている。審査結果は、例えば、セットの書類に記載された内容が同一であるかの照合結果や、記載の有無のデータである。また、審査結果データベース12eには、住民票等から読み取られたテキストデータが記憶されていてもよい。
同じ管理サーバ10の同じデータベースにより管理されてもよいし、それぞれのデータベースが、別の管理サーバのデータベースに記憶されてもよい。
また、記憶部12には、オペレーティングシステムおよびサーバプログラム等の各種プログラムが記憶されていてもよい。なお、各種プログラムは、例えば、他のサーバ等からネットワーク3を介して取得されるようにしてもよいし、記録媒体に記録されてドライブ装置を介して読み込まれるようにしてもよい。
通信部13は、ネットワーク3に接続して、登録装置20、画像入力装置30、および、照合端末装置40との通信を制御する。
出力部14は、例えば、液晶表示素子またはEL(Electro Luminescence)素子等によって構成されている。
(1.3 登録装置20の構成および機能)
次に、登録装置20の構成および機能について、図14を用いて説明する。
図14は、登録装置20の一例を示す模式図である。要構成の一例を示すブロック図である。
なお、管理サーバ10と異なる構成および機能について、主に説明する。
図14に示すように、コンピュータとして機能する登録装置20は、制御部21と、記憶部22と、通信部23と、出力部24と、操作部25と、を備えている。
制御部21は、CPUと、ROMと、RAMと、を有し、登録装置20を制御する。制御部21は、CPUが、ROMや、RAMに記憶された各種制御プログラムを読み出して実行する。なお、これらのプログラムを記憶した記録媒体等を制御部21が読み出し実行してもよい。
記憶部22は、ハードディスクドライブ等により構成されていて、各種プログラムを記憶する。
通信部23は、ネットワーク3を通して、管理サーバ10等と通信を制御する。
出力部24は、例えば、液晶表示素子またはELにより構成されていて、各種登録用の画面が表示される。
操作部25は、例えば、キーボードおよびマウス等によって構成されている。
(1.4 画像入力装置30の構成および機能)
次に、画像入力装置30の構成および機能について、図15から図17を用いて説明する。
図15は、画像入力装置30の概要構成の一例を示すブロック図である。図16は、画像入力装置30の一例を示す模式図である。図17は、画像入力装置30の遮蔽部の一例を示す模式図である。
図15に示すように、画像入力装置30は、制御部31と、記憶部32と、通信部33と、出力部34と、操作部35と、撮像部36と、遮蔽部37と、を備えている。
制御部31は、制御部21と同様の構成を有し、画像入力装置30を制御する。記憶部32は、記憶部22と同様の構成を有し、各種プログラムを記憶する。通信部33は、管理サーバ10等と通信を制御する。
出力部34は、出力部24と同様の構成を有し、撮像した画像が表示される。さらに、出力部34は、プリンタを有し、フロントページを印刷する。
操作部35は、例えば、キーボードおよびマウス等によって構成されている。さらに、操作部35は、ユーザの足により、撮像部36の撮像の作動を行う画像入力スイッチ35aを有する。
撮像部36は、例えば、CCD(Charge Coupled Device)イメージセンサやCMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等の撮像素子を有するデジタルカメラである。
遮蔽部37(書類に記載された情報を光学的に遮断する遮蔽手段の一例)は、マスキングパターンが形成できるように、液晶素子等によって構成されている。制御部31の制御により、遮蔽部37には、部分的に光り遮る遮蔽領域(遮蔽手段の一例)、または、部分的に光りを通過させる開口領域(遮蔽手段に形成される開口の一例)が形成される。
図16に示すように、撮像部36は、複数のデジタルカメラ36aにより構成される。テーブルの上に、書類(例えば、契約書(書類50)、住民票(書類51)等)が複数並べられ、解像度を上げるために、各書類を部分的に区切って、複数のデジタルカメラ36aにより撮像する。なお、撮像部36は、スキャナでもよく、書類をスキャニングして撮像する。
図16に示すように、各デジタルカメラ36aと書類50、51との間に、遮蔽部37が挿入される。図17に示すように、遮蔽部37には、遮蔽領域37aと、開口領域37bとが形成される。遮蔽領域37aにより、書類50の所定の領域がマスクされ、開口領域37bを通して部分画像が撮像される。なお、遮蔽部37は、各デジタルカメラ36aの開口に設置されてもよいし、書類50、51を覆うように設置されてもよい。
(1.5 照合端末装置40の構成および機能)
次に、照合端末装置40の構成および機能について、図18を用いて説明する。
図18に示すように、コンピュータとして機能する照合端末装置40は、例えば、パーソナルコンピュータやスマートフォンを含む携帯型無線電話機やPDA等の携帯端末であり、制御部41と、記憶部42と、通信部43と、出力部44と、操作部45と、を備えている。
制御部41は、制御部21と同様の構成を有し、照合端末装置40を制御する。記憶部42は、記憶部22と同様の構成を有し、各種プログラムを記憶する。通信部43は、管理サーバ10等と通信を制御する。出力部44は、出力部24と同様の構成を有し、審査用の画像を表示する。
[2.管理システムの動作]
次に、本発明の1実施形態に係る管理システムの動作について図を用いて説明する。
(2.1 管理システムにおける作業工程)
まず、管理システムにおける作業工程を、図19を用いて説明する。
図19は、管理システム1における作業工程の一例を示す模式図である。
顧客(例えば、カード会社、保険会社等)から、複数の書類が組まれた書類のセットが、まとめて送られてくる。例えば、書類のセットが同封された封筒が詰められた段ボール箱が、顧客から送られてくる。
複数の書類のセットは、例えば、顧客の各ユーザ(例えば、カード会社、保険会社等に申し込みをする個人や法人)から顧客に申し込まれた書類のセットである。書類のセットは、申込書類(例えば、契約書、申込用紙)および本人確認用の書類等である。本人確認用の書類として2通必要な場合、例えば、住民票および免許証、住民票および健康保険証等である。なお、法人の場合、法人確認用の書類として、代表取締役の印が押された書類である。
図19に示すように、工程P1において、送付されてきた封筒等の開封作業が行われる。例えば、届けられた段ボールが開けられ、書類のセットが同封された封筒が取り出される。そして、封筒が開封されて、書類のセットが取り出される。
次に、工程P2において、書類の不備の確認作業が行われる。書類が、工程P2の場所に運ばれ、書類のセットが全て揃っているか、書類の毀損が無いか等のチェックが行われる。確認作業後、書類のセットが保管庫5に搬送される。
次に、工程P3において、画像入力装置30が、保管庫5から取り出した書類の画像データ化を行う。画像入力装置30が、書類を撮像して、書類を画像データ化する。画像入力装置30が、画像データを管理サーバ10に送信する。管理サーバ10が、受信した画像データを画像データベース12cに記憶する。管理サーバ10が、各書類の各項目の画像を切り出し、切り出し画像を画像データベース12cに記憶する。書画像データ化が終了した書類のセットは、保管庫5に保存される。
次に、工程P4において、書類の項目の照合作業が行われる。照合端末装置40が、作業者の作業者IDを受け付け、作業者に応じた項目の切り出し画像を管理サーバ10から取得して表示する。照合端末装置40が、作業者からの照合結果を受け付け、照合結果を管理サーバ10に送信する。管理サーバ10が、作業者ID、照合の過程等の作業結果を作業結果データベース12dに記憶する。管理サーバ10が、照合結果等を審査結果データベース12eに記憶する。
なお、複数の書類のセット用に、フロントページが作成されてもよい。フロントページには、顧客名、書類のセットを特定するためのフロントページID、書類の数、受け付け日付、工程番号等が記載される。このフロントページを書類のセットに含めてもよいし、電子データ上存在し書類のセットに含めなくてもよい。記憶部12のデータベースには、フロントページIDに関連付けられ、各書類の書類IDが記憶されてもよい。また、記憶部12のデータベースには、フロントページの管理情報のため、フロントページIDに関連付けられ、工程番号も記憶されてもよい。
また、工程P1において、各書類にコード等の各書類を識別するための書類IDが付与されてもよい。付与されるコードの一例として、バーコードや2次元コード等が挙げられる。また、工程P3において、書類の画像の特徴量から生成されたコードにより、各書類に書類IDが割り振られてもよい。バーコード付与する装置の受け入れ口に各書類を入れて、書類のセットのフロントページに、コードが付されるようにしてもよいし、人手によってコードを貼ってもよい。
次に、工程P5において、返却書類の照合作業が行われる。全ての項目に対して照合が終わった書類のセットが、返却書類として、保管庫から運び出される。コンピュータとして機能する返却書類の照合作業用の端末装置(図示せず)において、書類のセットのフロントページのコードを読み取り機により読み込んで、書類の返却のための照合作業、審査結果の納品のための準備等が行われる。
(2.2 管理サーバおよび登録装置の動作例)
次に、管理サーバおよび登録装置の動作例について、図20を用いて説明する。
図20は、管理サーバ10および登録装置20の動作例を示すシーケンス図である。
図20に示すように、登録装置20は、書類の種別のマスタ登録作業を受け付ける(ステップS1)。具体的には、登録装置20の制御部21が、登録の作業者から、書類種別IDに対する種別等の入力を受け付ける。例えば、書類種別IDの内容を決めるために、登録装置20の出力部24の画面に、書類種別IDと共に、書類名の記入欄または選択欄、種別が住民票の場合は市町村記入欄または選択欄、種別が契約書の場合は顧客名の記入欄等が表示される。登録装置20は、作業者からの入力を受け付け、管理サーバ10に送信する。
次に、管理サーバ10は、書類の種別のマスタ登録を行う(ステップS2)。具体的には、管理サーバ10の制御部11が、図6に示すように、登録装置20から受信した情報を、書類種別用の登録データベース12aに記憶する。
次に、登録装置20は、種別毎の切り出し領域のマスタ登録作業を受け付ける(ステップS3)。具体的には、制御部21が、登録の作業者から、書類種別IDに対し、各書類の項目に対応する各切り出し領域等の入力を受け付ける。例えば、画像の切り出し領域を決めるために、登録装置20の出力部24の画面に、書類種別ID、書類名等と共に、項目の記入欄または選択欄、切り出し領域の座標の記入欄または領域選択画面等が表示される。登録装置20は、作業者からの入力を受け付け、管理サーバ10に送信する。
次に、管理サーバ10は、種別毎の切り出し領域のマスタ登録を行う(ステップS4)。具体的には、制御部11が、図7に示すように、登録装置20から受信した情報を、項目切り出し領域用の登録データベース12aに記憶する。
次に、登録装置20は、項目の難易度のマスタ登録作業を受け付ける(ステップS5)。具体的には、制御部21が、登録の作業者から、各項目に対する照合の難易度等の入力を受け付ける。例えば、項目の照合の難易度を決めるために、登録装置20の出力部24の画面に、項目名等と共に、難易度の記入欄または領域選択画面等が表示される。登録装置20は、作業者からの入力を受け付け、管理サーバ10に送信する。
次に、管理サーバ10は、項目の難易度のマスタ登録を行う(ステップS6)。具体的には、制御部11が、登録装置20から受信した情報を、項目の難易度用の登録データベース12aに記憶する。
次に、登録装置20は、作業者の習熟度のマスタ登録作業を受け付ける(ステップS7)。具体的には、制御部21が、登録の作業者から、作業者毎の作業者の作業能力を示す作業レベルの入力を受け付ける。例えば、作業レベルを決めるために、登録装置20の出力部24の画面に、作業者名、作業者ID等と共に、作業レベルの記入欄または領域選択画面等が表示される。登録装置20は、作業者からの入力を受け付け、管理サーバ10に送信する。
次に、管理サーバ10は、作業者のレベルのマスタ登録を行う(ステップS8)。具体的には、制御部11が、登録装置20から受信した情報を、作業者データベース12bに記憶する。
なお、登録作業の順番は、上記の順番に限らず、登録の必要が生じた登録作業を順次行ってもよい。
(2.3 管理サーバおよび画像入力装置の動作例)
次に、工程P3における画像データ化の作業である、管理サーバおよび画像入力装置の動作例について、図21および図22を用いて説明する。
図21は、管理サーバ10および画像入力装置30の動作例を示すシーケンス図である。図22は、フロントページの一例を示す模式図である。
図21に示すように、画像入力装置30は、書類の部分画像を撮像する(ステップS10)。画像入力装置30の制御部31が、後述の書類撮像のサブルーチンにより、撮像部36により書類から各項目に対する切り出した部分画像を撮像する。図16に示すように、テーブルに各書類50、51が並べられて設置される。作業者が、画像入力スイッチ35aを踏むと、制御部31が、デジタルカメラ36aにより書類50、51を撮像して、書類の各項目に対応する部分画像を取得する。
なお、制御部31が、撮像する書類の顧客名の入力を受け付けてもよい。また、制御部31が、書類のセットの各書類の種別の入力を受け付けてもよい。また、制御部31が、包袋ID、書類IDとして、自動的に、受付番号、作業番号等を生成してもよいし、受付番号、作業番号等の入力を受け付けてもよい。
次に、画像入力装置30は、撮像した部分画像を送信する。具体的には、制御部31が、通信部33を介して、各項目に対応する部分画像の画像データと、部分画像の位置情報とを、管理サーバ10に送信する。
次に、管理サーバ10は、部分画像を登録する(ステップS11)。具体的には、制御部11が、受信した部分画像の画像データを、項目に関連付けて、画像データベース12cに記憶する。なお、管理サーバ10が受信する部分画像は、図2および図3Aに示すように、切り出し領域50a、50b、50c、切り出し領域51a、51b等の切り出し画像である。また、図3Aのように、罫線がある場合、切り出し領域に罫線が含まれても、含まれなくてもよい。また、切り出し領域に共通領域が含まれても含まれなくてもよく、他の項目が含まれなければよい。
次に、画像入力装置30は、フロントページを作成する(ステップS12)。具体的には、制御部31が、書類のセットに含まれる書類の種別等に基づき、出力部34のプリンタが、フロントページを印刷する。図22に示すように、書類種別の情報や、包袋ID等に対応したバーコード等がフロントページに印刷される。セットの書類の上に、フロントページが添付されて、保管庫5に保管される。なお、包袋ID等に対応したコード情報は、管理サーバ10から受信してもよい。
(2.4 書類の部分画像の撮像のサブルーチン)
次に、書類の部分画像の撮像のサブルーチンについて図23から図25を用いて説明する。
図23は、書類の部分画像の撮像のサブルーチンを示すフローチャートである。図24から図25は、開口の一例を示す模式図である。
図23に示すように、画像入力装置30は、第1の部分画像を撮像する(ステップS15)。具体的には、制御部31が、書類の種別を特定し、書類に応じた所定の形式に基づき、1の項目に対して情報が記載されている部分を十分に含むように、図24Aに示すように、広目にした開口領域37bの形態のマスキングパターンに遮蔽部37を制御する。
このように、画像入力装置30は、前記遮蔽手段に形成される開口の形態を制御する開口制御手段の一例として機能する。画像入力装置30は、前記書類に応じた所定の形式に基づき、前記項目に対して情報が記載されている部分を撮像できるように前記開口の形態を制御する開口制御手段の一例として機能する。
次に、制御部31の指令により、デジタルカメラ36aが、限定された開口領域37bを通した第1の部分画像を撮像する。開口領域37b以外の部分は、遮蔽領域37aによりマスクされているので、デジタルカメラ36aに1の項目に対する情報以外の部分のデータが取り込まれにくくなる。
このように、画像入力装置30は、前記書類における項目に対して情報が記載されている部分を撮像できるように前記開口の形態が前記開口制御手段により制御された前記開口を通して、前記書類の部分画像を撮像する撮像手段の一例として機能する。
次に、制御部31が、デジタルカメラ36aからの第1の部分画像の画像データを取得して、記憶部32またはRAMに記憶する。
なお、書類の種別の特定は、例えば、制御部31が、書類の共通領域の画像データから文字認識をして、契約書、住民票、市町村等を認識し、書類の種別を特定してもよい。制御部31が、デジタルカメラ36aの設置位置から、書類の種別を特定してもよし、操作部35から受け付けた書類の種別により特定してもよい。また、制御部31が、管理サーバ10から、項目切り出し領域用の登録データベース12aに記憶された書類に応じた所定の形式の情報(テンプレート等)を取得してもよい。制御部31が、登録データベース12aのテンプレート等を参照して、パターンマッチングにより、第1の部分画像を撮像してもよい。
次に、画像入力装置30は、記載領域を特定する(ステップS16)。具体的には、制御部31が、第1の部分画像の中から、項目名の場所を探索する。例えば、制御部31が、画像認識やパターンマッチングにより、項目名(例えば”氏名”の単語)の場所Pを特定する。制御部31が、項目名の場所Pを基点に、記載領域(例えば、開口領域37cに対応した部分)を特定する。図24Aおよび図24Bに示すように、例えば、制御部31が、項目名の場所Pを基点に、記載内容がある部分や、記載枠を含むように、矩形等の所定の形状の記載領域(例えば、開口領域37cに対応した部分)を決定する。制御部31が、使用後、第1の部分画像の画像データを消去する。
図24Cに示すように、制御部31が、開口領域37cを更に、記載内容がある部分のみの開口領域37dまで狭めてもよい。限定して撮像された箇所を、更に部分画像として限定するために開口領域を調整すると画像認識に不要な箇所が除かれるため文字認識等がし易くなるという効果を奏する。
なお、制御部31が、文字認識により、文字が記載されている記載領域を特定してもよい。例えば、制御部31が、様々な文字とのマッチングにより、文字を特定し、文字が記載されている場所を特定する。
このように、画像入力装置30は、前記部分画像から、前記項目に対して情報が記載された記載領域を特定する記載領域特定手段の一例として機能する。画像入力装置30は、画像認識により前記記載領域を特定する記載領域特定手段の一例として機能する。画像入力装置30は、前記部分画像が使用された後に、前記部分画像を消去する消去手段の一例として機能する。
次に、画像入力装置30は、記載領域を特定できたか否かを判定する(ステップS17)。具体的には、制御部31が、項目名を画像認識できたか否かを判定する。例えば、パターンマッチングのマッチング度が閾値以上の場合は、記載領域が特定できたとする。
記載領域を特定できた場合(ステップS17;YES)、画像入力装置30は、第2の部分画像を撮像する(ステップS18)。具体的には、図24Bに示すように、制御部31が、特定された記載領域になるように、開口領域37cの形態のマスキングパターンに遮蔽部37を制御する。次に、制御部31の指令により、デジタルカメラ36aが、開口領域37cを通した第2の部分画像を撮像する。制御部31が、デジタルカメラ36aから第2の部分画像の画像データを取得して、記憶部32またはRAMに記憶する。
このように、画像入力装置30は、前記開口制御手段により前記記載領域に基づいて開口の形態が制御された前記開口を通して、前記部分画像を撮像して出力する撮像手段の一例として機能する。
次に、画像入力装置30は、作業者からチェックの受け付ける(ステップS19)。具体的には、制御部31が、出力部34の画面に、開口領域37cを通して撮像された記載領域の第2の部分画像を表示する。作業者が、第2の部分画像を見て、適正に撮像されているかをチェックする。第2の部分画像が傾き過ぎているとか、第2の部分画像の記載部分にゴミが写っているとか、コントラストが適切か、記載部分を全て含まれているか、他の項目の部分が含まれていないか、書類が折れて撮像されていないか、書類が欠けていないか等をチェックする。また、文字が訂正されて欄外に書かれている場合、記載部分が全て含まれていないことがある。
作業者が、チェックの結果に基づき、操作部35により適正か否かを選択する。制御部31が、操作部35から、適正または不適正の入力を受け付ける。
なお、作業者からチェックの代わりに、制御部31が、第2の部分画像の中の記載領域の傾き度、第2の部分画像における雑音の量、コントラストの値、空隙率、他の項目名が検出される否か、折れの度合いや、書類の破れ等による欠けの割合等を算出し、判定を行ってもよい。
次に、画像入力装置30は、適切か否かを判定する(ステップS20)。具体的には、制御部31が、操作部35からの適正の入力を受け付けた場合、適切と判定し、不適正の入力を受け付けた場合、不適正と判定する。
適切でない場合(ステップS20;NO)、または、記載領域を特定できない場合(ステップS17;NO)、画像入力装置30は、作業者から手動入力を受け付ける(ステップS21)。作業者が操作部35を操作しながら、遮蔽部37の開口領域37bを調整する。このとき、出力部34に第2の部分画像が表示され、作業者が第2の部分画像を見ながら、インタラクティブに開口領域を調整してもよい。調整が終了したら、作業者は確定を選択する。制御部31が、開口領域を調整した結果を、操作部35から受け付ける。
次に、画像入力装置30は、第2の部分画像を撮像する(ステップS22)。具体的には、制御部31の指令により、デジタルカメラ36aが、調整された開口領域を通した第2の部分画像を撮像する。
このように、画像入力装置30は、前記開口制御手段により前記記載領域に基づいて開口の形態が制御された前記開口を通して、前記部分画像を撮像して出力する撮像手段の一例として機能する。
適切である場合(ステップS20;YES)、または、開口領域の調整後に第2の部分画像が撮像された後(ステップS22)、画像入力装置30は、第2の部分画像の位置情報を記憶する(ステップS23)。具体的には、制御部31が、記載領域の位置座標として、記載領域の隅の座標点、幅、高さ等の記載領域の形態の情報を記憶部32またはRAMに記憶する。
次に、制御部31が、記載領域の位置座標および第2の部分画像の画像データを管理サーバ10に送信する。管理サーバ10は、部分画像の画像データと共に、記載領域の位置座標、撮像時間等をデータベースに記憶する。送信後、制御部31が、第2の部分画像の画像データを消去する。
なお、記載領域の位置座標および撮像時間の情報を、書類を特定するコード情報に含ませてもよい。記載領域の形態や位置の位置座標および撮影時間の情報は、各書類の特定性が高くなり、書類との関連性が増加し、書類が管理し易くなる。
このように、画像入力装置30は、前記部分画像が使用された後に、前記部分画像を消去する消去手段の一例として機能する。
次に、画像入力装置30は、全ての項目を撮像したか否かを判定し(ステップS24)、全ての項目に対して、第2の部分画像が撮像されていない場合(ステップS24;NO)、ステップS15の処理に戻り、次の項目に対する第1の部分画像を撮像する。画像入力装置30は、全ての項目に対して、第2の部分画像が撮像されている場合(ステップS24;YES)、サブルーチンを終了する。
各書類に対して、ステップS15からステップS24の処理が行われる。
なお、図24および図25に示すように、部分画像が、複数の項目のうち、単独の項目に対して情報が記載されている部分の画像でもよいし、複数の項目に対して情報が記載されている部分の画像でもよい。
また、図25Aから図25Cに示すように、修正した文字を欄外に記載する場合は、制御部31が、開口領域37eを更に、修正された文字を含むように、矩形でない開口領域37fまで限定してもよい。また、修正した文字を矢印により欄外に記載する場合のように、修正した文字が更に離れている場合、遮蔽部37に、複数の開口領域が離れて存在してもよい。限定して撮像された箇所を、複数の開口領域を通して撮像された複数の部分画像として更に限定するために、開口領域を調整すると画像認識に不要な箇所が除かれるため文字認識等がし易くなるという効果を奏する。
また、撮像した書類の枚数が、規定数でない場合、例えば、送信した第2の部分画像の数が、書類数および各書類の項目数が矛盾する場合、ステップS10の処理を再度行ってもよい。
(2.5 管理サーバおよび照合端末装置の動作例)
次に、工程P4における項目の照合作業である、管理サーバおよび照合端末装置の動作例について、図26から図29を用いて説明する。
図26は、管理サーバ10および照合端末装置40の動作例を示すシーケンス図である。図27は、項目の審査画面の一例を示す模式図である。図28は、書類における項目の一例を示す模式図である。図29A、図29Bは、項目の審査画面の一例を示す模式図である。
図26に示すように、照合端末装置40は、作業者情報の入力を受け付ける(ステップS30)。具体的には、照合端末装置40の制御部41が、作業者情報として、操作部45からログインIDおよびパスワードを受け付ける。なお、読み取り機により、作業者が携帯しているICカードや、名札に印刷されたコードから、制御部41が、作業者情報を受け付けてもよい。制御部41が、作業者情報と共に、審査用の切り出し画像の要求を管理サーバ10に送信する。
次に、管理サーバ10は、作業者のレベルを特定する(ステップS31)。具体的には、制御部11が、作業者データベース12bを参照して、作業者情報に対応して作業者IDに基づき、作業者のレベルを特定する。
次に、管理サーバ10は、レベルに応じた切り出し画像を送信する(ステップS32)。具体的には、制御部11が、項目の難易度用の登録データベース12aを参照して、レベルに応じた項目を特定する。制御部11が、画像データベース12cを参照して、特定する項目に対応する切り出し画像を抽出する。例えば、制御部11が、初級者の”C”レベルの作業者に対しては、性別の切り出し画像を抽出し、上級者の”A”レベルの作業者に対しては、住所の切り出し画像を抽出する。
照合端末装置40の出力部44において、1の書類の項目に対して他の書類の項目に対応した切り出し画像が表示されるように、制御部11が、包袋IDおよび書類IDと共に、切り出し画像を、要求があった照合端末装置40に送信する。制御部11が、項目毎に、作業者のレベルと項目の照合の難易度とがマッチするように、切り出し画像を各照合端末装置40に送信する。
このように、管理サーバ10は、前記書類の1の書類の項目に対する前記他の書類の項目画像データを、前記端末装置に送信する送信手段の一例として機能する。管理サーバ10は、前記書類の1の書類と他の書類とを互いに照合するために、表示手段において当該1の書類の項目に対して当該他の書類の項目画像データを出力させる出力手段の一例として機能する。管理サーバ10は、前記レベルに応じた前記項目画像データを出力する出力手段の一例として機能する。管理サーバ10は、前記表示手段において並べて表示できるように、前記1の書類の項目画像データと、前記他の書類の項目画像データとを、出力する出力手段の一例として機能する。
次に、照合端末装置40は、審査画像を表示する(ステップS33)。具体的には、制御部41が、審査対象である切り出し画像を、出力部44の画面に表示する。図27に示すように、出力部44の画面に、比較して照合する書類名(”契約書”、”住民票”)、切り出し領域50a、51aの切り出し画像が並べて表示される。このように切り出しされることにより、記載された項目が強調表示される。
なお、図28に示すように、書類のセットが、書類α、書類β、書類γの場合、書類βに同じ項目があるので、書類αの項目と、書類βの項目とを比較する場合、図29Aに示すように、制御部41が、出力部44の画面に各項目の切り出し画像を表示してもよい。
このように、照合端末装置40は、前記書類の1の書類と他の書類とを互いに照合するために、当該1の書類の項目に対して、当該他の書類の項目画像データを表示する表示手段の一例として機能する。
次に、照合端末装置40は、審査作業の入力を受け付ける(ステップS34)。具体的には、制御部41が、図27に示すように、出力部44の画面に、照合結果のボタン55を表示する。作業者が照合を行い、照合結果が正しい場合は、操作部45により、OKのボタン55を選択し、照合結果が正しくない場合は、NGのボタン55を選択する。
このように、照合端末装置40は、前記書類の1の書類と他の書類とを互いに照合した照合の結果を受け付ける入力手段の一例として機能する。
また、図29Bに示すように、切り出し表示されることにより強調表示された項目画像データである、書類αの1の項目と、対応した書類βの複数の項目(項目a、項目a’、項目a”)のうち、照合に使用した項目を作業者が選択し、制御部41が、マークを補記するように表示してもよい。
制御部41が、作業者が入力ペンやマウス等で描いたマークの軌跡の情報により、照合結果を判定してもよい。例えば、作業者が入力ペンでマークMを描いて、制御部41が、マークの形状が円形に近い場合は、”OK”と判定し、”×”に近い場合は、”NG”と判定してもよい。マークの軌跡や形状の情報を管理サーバ10が受信した、管理サーバ10が照合結果を判定してもよい。
また、書類αの各項目に対して、照合に使用した項目に、マークとして、丸印、チェックマーク等を、書類β、γに補記するように表示してもよい。マークは同じでもよいし、項目毎に形状、形態等を変えてもよい。1の書類の項目に対して、複数の書類を照合に使用した場合、照合に使用したそれぞれの書類にマークを設定してもよい。この場合、第1優先の照合箇所、第2優先の照合箇所等が分かるように、マークを変えてもよい。
なお、作業者がどの書類のどの項目を照合および審査に使用したかが分かるように、制御部41が、書類IDおよび項目IDに対して、タグ情報として関連付けた情報を生成してもよい。
ここで、選択情報(前記出力された項目画像データに対応した他の書類の項目の情報の一例)として、適のOKのボタン55および不適のNGのボタン55のどちらかを選択したかの情報、書類におけるマークの軌跡の情報、マークの形態の情報、クリックされた位置の情報、選択された項目または項目ID等の情報、操作の順番、操作時間が挙げられる。また、複数の項目画像データから選択された項目画像データの情報の一例として、図29Bに示すように、書類β、γにおけるマークの軌跡の情報、マークの形態の情報、クリックされた位置の情報、選択された項目または項目ID等の情報、操作の順番、操作時間が挙げられる。
次に、照合端末装置40は、作業結果を送信する(ステップS35)。具体的には、制御部41が、通信部43を介して、作業結果(照合結果の一例)として、作業者ID、包袋ID、項目ID、審査結果、書類において選択した選択情報等を、管理サーバ10に送信する。
次に、管理サーバ10は、作業結果を結合する(ステップS36)。具体的には、制御部11が、作業結果を、各照合端末装置40から受信する。制御部11が、各照合端末装置40から受信した作業結果を、1の書類の項目の情報の一例である包袋ID、項目ID毎に作業結果データベース12dに記憶する。図12に示すように、包袋ID、項目ID毎に分類されてデータベースが整理されている場合は、結果的に作業結果が結合される。分類整理されていない場合は、制御部11が、包袋ID、項目IDに基づき、作業結果を検索して、作業結果を統合する。
このように、管理サーバ10は、前記照合の結果を取得する照合結果取得手段の一例として機能する。管理サーバ10は、前記照合の結果として、前記複数の項目画像データから選択された項目画像データの情報を取得する照合結果取得手段の一例として機能する。管理サーバ10は、前記照合の結果に応じて、前記出力された項目画像データに対応した他の書類の項目の情報を、前記1の書類の項目の情報と関連付けて記憶する記憶手段の一例として機能する。
次に、管理サーバ10は、審査結果を登録する(ステップS37)。具体的には、制御部11が、作業結果データベース12dを参照して、包袋IDに基づき、作業結果を検索し、作業結果から適・不適の情報を集め、審査結果を、審査結果データベース12eに記憶する。
このように、管理サーバ10は、前記照合の結果に応じて、前記出力された項目画像データに対応した他の書類の項目の情報を、前記1の書類の項目の情報と関連付けて記憶する記憶手段の一例として機能する。
全ての項目に関して照合作業が終わったら、工程P5において、書類の返却のための書類の確認作業が行われる。書類の不備、審査結果の抜け等が発見された場合、返却書類の照合作業用の端末装置から、作業履歴の確認のため、書類のセットのフロントページのコードを読み込んだ包袋ID等の情報を、管理サーバ10に送信する。
管理サーバ10は、作業結果データベース12dを参照して、包袋IDに基づき、作業結果を抽出し、照合作業用の端末装置に送信する。
照合作業用の端末装置は、出力部の画面に、例えば、図29Bに示すように、マークを補記した画像を表示する。作業者は、マークを補記した画像に基づき、作業履歴の確認を行う。
以上、本実施形態によれば、書類の項目に対応した部分を限定して、開口領域37bを通して、第1の部分画像を撮像し、第1の部分画像から特定された記載領域(項目名の場所P)に基づいてさらに正確に項目に対応した第2の部分画像を、開口領域37cを通して、限定した上で撮像して、外部に出力しているので、記載された内容すべてが一括されて撮像されることがなく、不用な個人情報の画像を取得することが無いので、セキュリティが高くなる。
書類に応じた所定の形式に基づき、項目に対して情報が記載されている部分を撮像できるように開口の形態を制御する場合、記載領域が特定しやすくなり、記載領域の特定の精度が向上する。
画像認識により記載領域を特定する場合、記載領域が特定しやすくなり、記載領域の特定の精度が向上する。特に、図25Cに示すように、欄外に記載された場合にも、記載領域が特定し易くなる。さらに、抽出したい文字等の情報の画像の位置が決まっていない非定型の書類においても、情報等の画像の大きさに合わせて開口の大きさを決めることができ、画像認識機能によって位置を特定できるため定型書類のみならず非定型書類においても適用可能となる。
部分画像が、複数の前記項目のうち、単独の項目に対して情報が記載されている部分の画像である場合、情報が分割され、個人情報になりにくく、管理が容易になる。
部分画像が使用された後に、部分画像を消去する場合、部分画像も消去することにより、よりセキュリティが向上する。
また、項目に分けて照合することにより、他の項目が見えないので、セキュリティが向上する。
項目に応じて照合の難易度のレベル分けがされ、レベルに応じた項目画像データを出力される場合、作業者のレベルに合わせた作業を分担でき、セキュリティが向上する。
表示手段(出力部44の画面)において並べて表示できるように、1の書類の項目画像データと、他の書類の項目画像データとを、出力させる場合、1つの項目のみなので、セキュリティが向上する。
さらに、本発明は、上記各実施形態に限定されるものではない。上記各実施形態は、例示であり、本発明の特許請求の範囲に記載された技術的思想と実質的に同一な構成を有し、同様な作用効果を奏するものは、いかなるものであっても本発明の技術的範囲に包含される。