JP7287684B2 - 読取支援システム - Google Patents

Description

本発明は、読取支援システムに関する。

近年、情報処理技術の発展に伴い、ロボットを用いて様々な業務を自動的に処理するＲＰＡ（Ｒｏｂｏｔｉｃ Ｐｒｏｃｅｓｓ Ａｕｔｏｍａｔｉｏｎ）の技術が注目されている。

ＲＰＡを効果的に実施するためには、入力する情報をコンピューターが処理できるようにデータ化しておく必要がある。しかし、たとえば客先から送られてくる請求書や納品書等のように、紙媒体の書類を処理する業務においては、書類から文字や数字等を読み取ってコンピューターに入力する必要がある。このような処理を行うために、紙の書類をスキャナーで読み取った画像を解析して文字や数字を自動的に認識する各種のＯＣＲ（Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅｃｏｇｎｉｔｉｏｎ）の技術が知られている（たとえば、特許文献１参照）。

特開２０２０－１６９４６号公報

しかしながら、ＯＣＲによる自動読み取り技術は、読み取りの精度が完全ではないため、正確さが求められる業務には適用できないという問題がある。たとえば、ＯＣＲによって、アルファベットの「ｌ」と数字の「１」を正確に判別することは難しい。また、書類に表や罫線等が設けられている場合も、ＯＣＲによって正確な文字認識を行うことは困難である。このため、紙の書類が存在する業務においては、ＲＰＡ等による自動処理の導入を諦めざるを得ないという問題がある。

本発明は、上記事情に鑑みてなされたものであり、紙の書類が存在する業務において、書類中の情報を正確に読み取ってデータ化し、自動処理を可能とするための読取支援システムを提供することを目的とする。

上記目的は、下記の手段によって達成される。

読取支援装置、リーダー端末、およびチェッカー端末を有する読取支援システムであって、
前記読取支援装置は、
読取支援を依頼する依頼者端末から、文字、数字および記号の少なくとも一つを有するテキストが画像として含まれる書類の画像情報を取得する取得部と、
前記取得部によって取得された前記画像情報において、読み取り対象とする少なくとも一つの読取領域の登録を受け付ける登録部と、
前記画像情報において、前記登録部に登録された前記少なくとも一つの読取領域に対応する部分画像を生成する生成部と、
前記生成部によって生成された前記部分画像を送信する送信先である前記リーダー端末の指定を受け付ける指定部と、
前記指定部において指定された前記リーダー端末に、前記部分画像とともに、前記部分画像に対してテキスト認識処理を実行した結果を示すテキスト認識情報を送信する送信部と、
前記リーダー端末によって入力された前記テキスト認識情報と前記部分画像が表す前記テキストとを比較した比較結果が前記リーダー端末から前記チェッカー端末に送信されて、前記チェッカー端末によって修正または確定された比較結果情報を、前記チェッカー端末から受信する受信部と、
前記受信部によって受信された前記比較結果情報により確定された、前記読取領域を読み取った結果を示す読取結果情報を前記依頼者端末へ出力する出力部と、
を有し、
前記リーダー端末は、
前記読取支援装置から前記部分画像および前記テキスト認識情報を受信し、前記部分画像と前記部分画像に対応する前記テキスト認識情報とを関連付けて表示するとともに、
前記部分画像および前記テキスト認識情報を比較する担当者であるリーダーから、前記部分画像と前記テキスト認識情報との前記比較結果の入力を受け付ける受付部と、
受け付けた前記比較結果を前記チェッカー端末へ送信するリーダー端末送信部と、
を有し、
前記チェッカー端末は、
一つの前記部分画像に対応した前記テキスト認識情報に対して、複数の前記リーダー端末のそれぞれから受信した複数の前記比較結果と、当該複数の比較結果の一致状況を表示するとともに、
前記一致状況が不一致を示している場合には、前記リーダーによる前記比較結果をチェックする担当者であるチェッカーから前記比較結果の修正の指示を受け付け、前記一致状況が一致を示している場合には、前記チェッカーから前記比較結果の確定の指示を受け付ける確認部と、
前記確定の指示を受け付けた前記比較結果を前記比較結果情報として前記読取支援装置へ送信するチェッカー端末送信部と、
を有する、読取支援システム。

本発明によれば、読取支援装置は、読取支援を依頼する依頼者端末から、文字、数字および記号の少なくとも一つを有するテキストが画像として含まれる書類の画像情報を取得し、画像情報において、読み取り対象とする少なくとも一つの読取領域の登録を受け付ける。読取支援装置は、画像情報において、登録された少なくとも一つの読取領域に対応する部分画像を生成し、生成された部分画像を送信するリーダー端末の指定を受け付ける。読取支援装置は、指定されたリーダー端末に、部分画像とともに、部分画像に対してテキスト認識処理を実行した結果を示すテキスト認識情報を送信する。リーダー端末は、読取支援装置から部分画像およびテキスト認識情報を受信し、部分画像と部分画像に対応するテキスト認識情報とを関連付けて表示するとともに、部分画像およびテキスト認識情報を比較する担当者であるリーダーから、比較結果の入力を受け付けて、受け付けた比較結果をチェッカー端末へ送信する。チェッカー端末は、一つの部分画像に対応したテキスト認識情報に対して、複数のリーダー端末のそれぞれから受信した複数の比較結果と、当該複数の比較結果の一致状況を表示するとともに、一致状況が不一致を示している場合には、リーダーによる比較結果をチェックする担当者であるチェッカーから比較結果の修正の指示を受け付け、一致状況が一致を示している場合には、チェッカーから比較結果の確定の指示を受け付け、確定の指示を受け付けた比較結果を比較結果情報として読取支援装置へ送信する。読取支援装置は、チェッカー端末によって修正または確定された比較結果情報を、チェッカー端末から受信する。読取支援装置は、受信した比較結果情報に基づいて、読取領域を読み取った結果を示す読取結果情報を出力する。したがって、ユーザーが、紙の書類の画像情報を読取支援装置に送信すると、読取支援装置は、予め登録された読取領域の部分画像と当該部分画像のテキスト認識結果が送信先に送信し、送信先における比較結果に基づいて読取領域を読み取った結果を出力する。これにより、ユーザーは、紙の書類または紙の処理の画像情報を読取支援装置に送信するだけで、書類中の情報を正確にデータ化できるため、紙の書類が存在する業務においても、業務の自動化を実現することが可能となる。

本発明の一実施形態に係る読取支援システムの概略構成を示す図である。 依頼者端末の概略構成を示すブロック図である。 支援装置の概略構成を示すブロック図である。 リーダーサーバーの概略構成を示すブロック図である。 リーダー端末の概略構成を示すブロック図である。 チェッカー端末の概略構成を示すブロック図である。 読取支援システムにおいて実行される処理の手順を示すシーケンスチャートである。 依頼者端末において表示される依頼作成画面の一例を示す図である。 依頼者端末において表示される依頼案件一覧画面の一例を示す図である。 支援装置において表示される支援案件一覧画面の一例を示す図である。 支援装置において表示される振分画面の一例を示す図である。 リーダーサーバーにおいて表示される読取案件一覧画面の一例を示す図である。 リーダー端末において表示される比較結果入力画面の一例を示す図である。 チェッカー端末において表示されるチェック画面の一例を示す図である。

以下、添付した図面を参照して、本発明の実施形態を説明する。なお、図面の説明において同一の要素には同一の符号を付し、重複する説明を省略する。また、図面の寸法比率は、説明の都合上誇張されており、実際の比率とは異なる場合がある。

＜読取支援システムの構成＞
図１は、本発明の一実施形態に係る読取支援システムの概略構成を示す図である。

図１に示すように、読取支援システムは、依頼者端末１００、支援装置２００、リーダーサーバー３００、リーダー端末４００、およびチェッカー端末５００を有し、各構成はネットワークを通じて相互に通信可能に構成されている。

依頼者端末１００は、依頼者が使用するノートＰＣ、デスクトップＰＣ、スマートフォン、タブレットＰＣ等の情報端末である。

支援装置２００は、読取支援システムおよびサービスを管理・運営する事業者（以下、「サービス提供者」と称する）によって設けられるサーバーである。支援装置２００は、読取支援装置を構成する。

リーダーサーバー３００は、後述する部分画像と部分画像のＯＣＲ読取結果を比較する担当者であるリーダーを管理する事業者（以下、「リーダー事業者」と称する）によって設けられるサーバーである。

リーダー端末４００は、上記のリーダーによって使用されるスマートフォン等の情報端末である。リーダー端末４００は、送信先装置を構成する。

チェッカー端末５００は、リーダーによる比較結果をチェックする担当者であるチェッカーによって使用されるスマートフォン等の情報端末である。

以下、各構成について詳細に説明する。

＜依頼者端末１００＞
図２は、依頼者端末の概略構成を示すブロック図である。

図２に示すように、依頼者端末１００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１０、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２０、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３０、ストレージ１４０、通信インターフェース１５０、操作部１６０、および表示部１７０を有する。各構成は、バス１８０を介して相互に通信可能に接続されている。

ＣＰＵ１１０は、ＲＯＭ１２０やストレージ１４０に記録されているプログラムにしたがって、上記各構成の制御や各種の演算処理を行う。

ＲＯＭ１２０は、各種プログラムや各種データを格納する。

ＲＡＭ１３０は、作業領域として一時的にプログラムやデータを記憶する。

ストレージ１４０は、オペレーティングシステムを含む各種プログラムや、各種データを格納する。

通信インターフェース１５０は、支援装置２００等の外部機器と通信するためのインターフェースであり、たとえば、携帯電話通信用の３Ｇ、４Ｇ、５Ｇ等の規格や、Ｗｉ－Ｆｉ（登録商標）等の規格が用いられる。

操作部１６０は、マウス等のポインティングデバイス、およびキーボードを含み、各種の入力を行うために使用される。

表示部１７０は、たとえば、液晶ディスプレイであり、各種の情報を表示する。表示部１７０は、タッチパネル式のディスプレイによって構成することによって、操作部１６０として機能してもよい。

＜支援装置２００＞
図３は、支援装置の概略構成を示すブロック図である。

図３に示すように、支援装置２００は、ＣＰＵ２１０、ＲＯＭ２２０、ＲＡＭ２３０、ストレージ２４０、通信インターフェース２５０、操作部２６０、および表示部２７０を有する。各構成は、バス２８０を介して相互に通信可能に接続されている。なお、ＣＰＵ２１０、ＲＯＭ２２０、ＲＡＭ２３０、ストレージ２４０、通信インターフェース２５０、操作部２６０、および表示部２７０の各構成は、依頼者端末１００のＣＰＵ１１０、ＲＯＭ１２０、ＲＡＭ１３０、ストレージ１４０、通信インターフェース１５０、操作部１６０、および表示部１７０と同様の機能を有するので、重複する説明を省略する。

ＣＰＵ２１０は、取得部、登録部、生成部、指定部、送信部、受信部、および出力部として機能する。取得部は、文字、数字および記号の少なくとも一つを有するテキストが画像として含まれる書類の画像情報を取得する。登録部は、画像情報において、読み取り対象とする少なくとも一つの読取領域の登録を受け付ける。生成部は、画像情報において、登録された少なくとも一つの読取領域に対応する部分画像を生成する。指定部は、部分画像を送信する送信先の指定を受け付ける。送信部は、指定された送信先に、部分画像とともに、部分画像に対してテキスト認識処理を実行した結果を示すテキスト認識情報を送信する。受信部は、テキスト認識情報と部分画像とを比較した結果に基づく比較結果情報を送信先から受信する。出力部は、受信された比較結果情報に基づいて、読取領域を読み取った結果を示す読取結果情報を出力する。

＜リーダーサーバー３００＞
図４は、リーダーサーバーの概略構成を示すブロック図である。

図４に示すように、リーダーサーバー３００は、ＣＰＵ３１０、ＲＯＭ３２０、ＲＡＭ３３０、ストレージ３４０、通信インターフェース３５０、操作部３６０、および表示部３７０を有する。各構成は、バス３８０を介して相互に通信可能に接続されている。なお、ＣＰＵ３１０、ＲＯＭ３２０、ＲＡＭ３３０、ストレージ３４０、通信インターフェース３５０、操作部３６０、および表示部３７０の各構成は、依頼者端末１００のＣＰＵ１１０、ＲＯＭ１２０、ＲＡＭ１３０、ストレージ１４０、通信インターフェース１５０、操作部１６０、および表示部１７０と同様の機能を有するので、重複する説明を省略する。

＜リーダー端末４００＞
図５は、リーダー端末の概略構成を示すブロック図である。

図５に示すように、リーダー端末４００は、ＣＰＵ４１０、ＲＯＭ４２０、ＲＡＭ４３０、ストレージ４４０、通信インターフェース４５０、操作部４６０、および表示部４７０を有する。各構成は、バス４８０を介して相互に通信可能に接続されている。なお、ＣＰＵ４１０、ＲＯＭ４２０、ＲＡＭ４３０、ストレージ４４０、通信インターフェース４５０、操作部４６０、および表示部４７０の各構成は、依頼者端末１００のＣＰＵ１１０、ＲＯＭ１２０、ＲＡＭ１３０、ストレージ１４０、通信インターフェース１５０、操作部１６０、および表示部１７０と同様の機能を有するので、重複する説明を省略する。

ＣＰＵ４１０は、受付部として機能する。受付部は、部分画像と、当該部分画像に対応するテキスト認識情報とを関連付けて表示するとともに、当該部分画像および当該テキスト認識情報との比較結果の入力をリーダーから受け付ける。

＜チェッカー端末５００＞
図６は、チェッカー端末の概略構成を示すブロック図である。

図６に示すように、チェッカー端末５００は、ＣＰＵ５１０、ＲＯＭ５２０、ＲＡＭ５３０、ストレージ５４０、通信インターフェース５５０、操作部５６０、および表示部５７０を有する。各構成は、バス５８０を介して相互に通信可能に接続されている。なお、ＣＰＵ５１０、ＲＯＭ５２０、ＲＡＭ５３０、ストレージ５４０、通信インターフェース５５０、操作部５６０、および表示部５７０の各構成は、依頼者端末１００のＣＰＵ１１０、ＲＯＭ１２０、ＲＡＭ１３０、ストレージ１４０、通信インターフェース１５０、操作部１６０、および表示部１７０と同様の機能を有するので、重複する説明を省略する。

ＣＰＵ５１０は、確認部として機能する。確認部は、複数のリーダーによってそれぞれ入力された複数の比較結果と、当該複数の比較結果の一致状況を表示して、チェッカーからの修正または確定の指示を受け付ける。

なお、読取支援システムの各構成は、それぞれ上記の構成要素以外の構成要素を含んでいてもよく、あるいは、上記の構成要素のうちの一部が含まれていなくてもよい。

＜読取支援システムにおける処理の概要＞
図７は、読取支援システムにおいて実行される処理の手順を示すシーケンスチャートである。図８は、依頼者端末において表示される依頼作成画面の一例を示す図である。図９は、依頼者端末において表示される依頼案件一覧画面の一例を示す図である。図１０は、支援装置において表示される支援案件一覧画面の一例を示す図である。図１１は、支援装置において表示される振分画面の一例を示す図である。図１２は、リーダーサーバーにおいて表示される読取案件一覧画面の一例を示す図である。図１３は、リーダー端末において表示される比較結果入力画面の一例を示す図である。図１４は、チェッカー端末において表示されるチェック画面の一例を示す図である。図７のシーケンスチャートに示される処理は、各構成のストレージにプログラムとして記憶されており、各構成のＣＰＵが各部を制御することにより実行される。

まず、依頼者端末１００は、読取支援を依頼する書類に関する情報を取得する（ステップＳ１０１）。たとえば、依頼者は、客先から受領した請求書や納品書等の紙の書類をスキャナー等によって読み取って画像情報（ＰＤＦファイルやＪＰＧファイル等）を生成する。あるいは、依頼者は、客先から請求書や納品書等のＰＤＦファイルを画像情報として受領する。書類には、文字、数字および記号の少なくとも一つを有するテキストが含まれており、この書類の画像情報には、上記のようなテキストが画像として含まれている。

たとえば、依頼者が、依頼者端末１００を操作して支援装置２００にアクセスし、依頼の作成を要求すると、依頼者端末１００には、図８に示すような依頼作成画面が表示される。依頼者は、図８の画面において、支援装置２００に送信する画像情報を選択する。また、依頼者は、「帳票」のプルダウンメニューを選択することによって、選択した画像情報の書類の種類を選択する。選択された種類を示す種類情報は、画像情報と関連付けられて記憶される。依頼者が「作成」ボタンを選択すると、画像情報および種類情報を含む依頼情報が作成される。作成された依頼情報は、図９に示すような画面に一覧表示される。

次に、依頼者端末１００は、画像情報および種類情報を含む依頼情報を、支援装置２００に送信する（ステップＳ１０２）。なお、依頼者端末１００は、画像情報および種類情報に関連付けて、支援装置２００から当該画像情報に関する処理の結果を受け取る納期に関する納期情報を支援装置２００に送信してもよい。

次に、支援装置２００は、依頼者端末１００から送信された画像情報および種類情報を取得し、種類情報に関連付けてストレージ２４０に予め登録された読取領域に関する読取領域情報を取得する（ステップＳ１０３）。読取領域情報は、たとえば、書類の種類ごとに予め登録される情報であり、画像情報において、読み取り対象とする少なくとも一つの読取領域を含む情報である。また、読取領域情報には、各読取領域のテキストの種類に関する情報が含まれる。テキストの種類とは、「数字」、「英数字」、「英数字記号」、「日本語文字」、「中国語文字」等、テキストの内容や属性を示す情報である。

たとえば、同じ取引先との間で継続的に使用される請求書や納品書等の書類は、形式が定まっていることが一般的である。したがって、読み取りが必要な情報が記載される領域を、書類の種類ごとに予め登録しておくことによって、必要な情報が記載されている部分を抽出することができる。たとえば、書類の種類が請求書である場合、読取領域には、請求日、請求項目、単価、個数、金額、支払期限、支払先口座等の業務上必要な項目の内容が記載される領域が設定される。読取支援サービスを管理・運営する事業者は、依頼者から書類の種類ごとの読取領域をヒアリングして、予め支援装置２００に登録しておく。

読取領域は、１行に示されたテキストが含まれるように設定されてもよく、２行以上にわたって示されたテキストが含まれるように設定されてもよい。読取領域情報は、たとえば、所定の位置を基準とする座標系における座標群として登録される。

次に、支援装置２００は、依頼者端末１００から取得した画像情報において、ステップＳ１０３の処理において取得された読取領域に対応する部分画像を生成する（ステップＳ１０４）。たとえば、書類の種類が発注書であり、読取領域として、発注番号、数量、合計金額、商品番号、発注日、納品日の内容が記載される領域が設定されている場合、図１１の「画像」の列に示すように、それぞれの内容を示す複数の画像が、部分画像として生成される。

支援装置２００は、依頼者端末１００から受信した依頼情報に対応する画像情報または部分画像に関する情報を、図１０に示すような画面に一覧表示する。図１０の画面には、「件名（ファイル名）」、「クライアント」、「帳票」、「依頼日」、「ステータス」等の情報が表示される。また、納期に関する納期情報があわせて表示されてもよい。「件名（ファイル名）」は、画像情報または画像情報から生成された複数の部分画像からなるグループ（セクション）を識別するための識別情報である。「クライアント」は、依頼者を識別するための情報である。「帳票」は、画像情報に対応する書類の種類を示す情報である。「ステータス」は、読取支援サービスにおける処理の進捗状況を示す情報である。たとえば、「ステータス」として、処理が必要な部分画像の数と、その中で送信先から比較結果情報を受信している数を示す情報が表示されてもよい。

次に、支援装置２００は、生成された部分画像を送信する送信先の指定を受け付ける（ステップＳ１０５）。たとえば、支援装置２００は、図１０の画面において画像情報（または画像情報を適切な処理単位に分割または統合したセクション）を選択することによって表示される図１１の画面において、部分画像を送信する送信先の指定を受け付ける。支援装置２００は、たとえば、送信先の候補である複数のリーダー事業者の中から、当該部分画像を送信するリーダー事業者の振り分け先の指定を受け付けることによって、部分画像を送信する送信先の指定を受け付ける。あるいは、支援装置２００は、部分画像に対応するテキストの種類と、予め支援装置２００に登録された各リーダー事業者の対応可能言語に応じて、送信先を自動的に決定してもよい。また、支援装置２００は、各リーダー事業者の処理能力、処理スピード、または空きリソース状況等と、各依頼情報に設定された納期情報を考慮して送信先を自動的に決定してもよい。

次に、支援装置２００は、ステップＳ１０５の処理において指定された送信先のリーダー事業者のリーダーサーバー３００に、部分画像および関連付けられて登録されたテキストの種類に関する情報を送信する（ステップＳ１０６）。このとき、支援装置２００は、部分画像に対してテキスト認識処理を実行した結果を示すテキスト認識情報をあわせて送信する。部分画像に対するテキスト認識処理は、支援装置２００によって実行されてもよく、あるいは、クラウドサーバー等の外部の装置において実行され、実行結果を支援装置２００またはリーダーサーバー３００が取得してもよい。なお、本実施形態では、リーダーサーバー３００は、支援装置２００とは別の構成として説明されているが、リーダーサーバー３００の機能は、支援装置２００と同じ物理構成によって論理的に実現されてもよい。リーダーサーバー３００は、支援装置２００から受信した画像情報を、図１２に示すような画面に一覧表示する。

次に、リーダーサーバー３００は、支援装置２００から受信した部分画像について、どのリーダーに処理させるかの割り振りを決定する（ステップＳ１０７）。たとえば、リーダーサーバー３００は、リーダー事業者の担当者からの指示を受け付けることによって、割り振りを決定する。あるいは、リーダーサーバー３００は、部分画像に対応するテキストの種類と、予めリーダーサーバー３００に登録された各リーダーの対応可能言語に応じて、割り振りを自動的に決定してもよい。また、リーダーサーバー３００は、各リーダーの処理能力、処理スピード、または空きリソース状況等と、各画像情報に設定された納期情報を考慮して割り振りを自動的に決定してもよい。なお、本実施形態では、リーダー事業者は同じ部分画像に対する処理を複数のリーダーに実行させて、実行結果の一致状況をチェッカーに確認させて、書類の読み取りの正確性を向上させる。このため、リーダーサーバー３００は、振り分け先として複数のリーダーの指定を受け付ける。たとえば、図１２の画面において、「読取」のボタンを選択することによって、リストの中から複数のリーダーを指定することができ、「チェック」のボタンを選択することによって、リストの中からチェッカーを指定することができる。

次に、リーダーサーバー３００は、ステップＳ１０７の処理において決定された振り分けに従い、振り分け先のリーダーのリーダー端末４００に、部分画像、テキストの種類に関する情報、およびテキスト認識情報を送信する（ステップＳ１０８）。

振り分け先の複数のリーダーのリーダー端末４００各々は、リーダーサーバー３００から送信された部分画像、テキストの種類に関する情報、およびテキスト認識情報を関連付けて、たとえば図１３のような画面に一覧表示する（ステップＳ１０９）。図１３の画面においては、「画像」の列に部分画像、「テキスト」の列にテキスト認識情報、「入力タイプ」の列にテキストの種類に関する情報が表示されている。

なお、図１３の画面では、部分画像とテキスト認識情報は、テキストの並び方向に沿って並べて表示されているが、部分画像とテキスト認識情報は、テキストの並び方向において重なる位置に並べて表示されてもよい。すなわち、テキストの並び方向に直交する方向に沿って、部分画像とテキスト認識情報とが並べて表示されてもよい。たとえば、図１３の例では、横並びのテキストを示す部分画像とテキスト認識情報とが横に並べて表示されているが、縦に並べて表示されてもよい。これにより、部分画像とテキスト認識情報において、対応するテキストの横方向の位置を揃えることができるため、リーダーの比較を実行容易とすることができる。

リーダー端末４００は、ステップＳ１０９の処理において、部分画像およびテキスト認識情報を表示した後、リーダーによる部分画像およびテキスト認識情報の比較の結果を受け付ける（ステップＳ１１０）。具体的には、リーダーは、図１３の画面に表示された部分画像と、対応するテキスト認識情報とを比較し、両者の内容が一致しているか否かを確認する。リーダーは、両者が一致していると判断した場合はテキスト認識情報をそのまま保存し、両者が一致していないと判断した場合は、図１３の画面においてテキスト認識情報を修正してから保存する。この際、リーダーは、テキストの種類に関する情報を参照することによって比較や修正を適切に実行することができる。

リーダー端末４００は、ステップＳ１１０の処理において受け付けた部分画像およびテキスト認識情報の比較の結果を、チェッカー端末５００に送信する（ステップＳ１１１）。

チェッカー端末５００は、複数のリーダーそれぞれのリーダー端末４００から送信された比較の結果を並べて表示する（ステップＳ１１２）。たとえば、チェッカー端末５００は、図１４に示すような画面において、複数のリーダーによる比較の結果を表示する。図１４の画面では、「画像」の列に部分画像、「入力０１」の列に１人目のリーダーによる比較の結果、「入力０２」の列に２人目のリーダーによる比較の結果、「ステータス」の列に複数のリーダーによる比較の結果の一致状況が表示されている。

チェッカー端末５００は、複数のリーダーから送信された比較の結果が互いに一致しているか否かを判断する（ステップＳ１１３）。図１４の画面では、一致している場合には、「ステータス」の欄に「Ｍａｔｃｈ」と表示され、一致していない場合には、「ステータス」の欄に「Ｎｏｔ Ｍａｔｃｈ」と表示されている。

複数のリーダーによる比較の結果が互いに一致している場合（ステップＳ１１３：ＹＥＳ）、チェッカー端末５００は、チェッカーから確定の指示を受け付け、比較の結果を確定させる（ステップＳ１１５）。

複数のリーダーによる比較の結果が互いに一致していない場合（ステップＳ１１３：ＮＯ）、チェッカー端末５００は、チェッカーからの修正の指示を受け付ける（ステップＳ１１４）。図１４の画面では、「テキスト修正」の欄に、チェッカーが修正内容を入力することによって、修正の指示が受け付けられる。

チェッカーからの修正の指示を受け付けていない場合（ステップＳ１１４：ＮＯ）、チェッカー端末５００は、指示を受け付けるまで待機する。

チェッカーからの修正の指示を受け付けた場合（ステップＳ１１４：ＹＥＳ）、チェッカー端末５００は、ステップＳ１１５の処理に進み、比較の結果を確定させる。

チェッカー端末５００は、部分画像とテキスト認識情報との比較の結果を確定した後、確定された比較の結果を示す比較結果情報を支援装置２００に送信する（ステップＳ１１６）。

支援装置２００は、チェッカー端末５００から送信された各部分画像に関する比較結果情報を統合し、画像情報の読取領域を読み取った結果を示す読取結果情報を生成する（ステップＳ１１７）。

支援装置２００は、ステップＳ１１７の処理において生成した読取結果情報を依頼者端末１００に送信する（ステップＳ１１８）。

依頼者端末１００は、支援装置２００から送信された読取結果情報を受信して出力する（ステップＳ１１９）。たとえば、図１１のような例では、依頼者端末１００は、読取結果情報として、発注番号が「１２９．０３．０５０Ｒ」、数量１が「３６」、数量２が「１」、合計金額が「５１，３６０」、商品番号が「ＭＴ６０－０３５５１」、発注日が「２０／０１／１６」、納品日が「２０／０１／３１」であることを示す情報を受信することができる。これにより、依頼者端末１００は、受信した読取結果情報を、たとえば、業務用の端末やアプリケーションにおける入力用データとして使用して、自動処理を行うことができる。

なお、上記においては、チェッカー端末５００から支援装置２００に、部分画像とテキスト認識情報との比較結果情報を送信する例を説明したが、これに限定されない。たとえば、チェッカーによるチェックを行わない場合、リーダー端末４００から支援装置２００に、比較結果情報を送信してもよい。

また、リーダーサーバー３００を介して支援装置２００がリーダー端末４００に部分画像およびテキスト認識情報を送信する例を説明したが、支援装置２００から直接リーダー端末４００に部分画像およびテキスト認識情報を送信してもよい。

以上のように、本実施形態に係る読取支援システムによれば、文字、数字および記号の少なくとも一つを有するテキストが画像として含まれる書類の画像情報を取得し、画像情報において、読み取り対象とする少なくとも一つの読取領域の登録を受け付ける。読取支援装置は、画像情報において、登録された少なくとも一つの読取領域に対応する部分画像を生成し、生成された部分画像を送信する送信先の指定を受け付ける。読取支援装置は、指定された送信先に、部分画像とともに、部分画像に対してテキスト認識処理を実行した結果を示すテキスト認識情報を送信し、送信先から、テキスト認識情報と部分画像とを比較した結果に基づく比較結果情報を受信する。読取支援装置は、受信した比較結果情報に基づいて、読取領域を読み取った結果を示す読取結果情報を出力する。したがって、ユーザーが、紙の書類の画像情報を読取支援装置に送信すると、読取支援装置は、予め登録された読取領域の部分画像と当該部分画像のテキスト認識結果が送信先に送信し、送信先における比較結果に基づいて読取領域を読み取った結果を出力する。これにより、ユーザーは、紙の書類または紙の処理の画像情報を読取支援装置に送信するだけで、書類中の情報を正確にデータ化できるため、紙の書類が存在する業務においても、業務の自動化を実現することが可能となる。

また、読取支援システムは、画像情報とあわせて、画像情報の種類を示す種類情報を取得し、画像情報および種類情報が受け付けられた場合、種類情報に関連付けて登録された読取領域に対応する部分画像を生成する。これにより、継続的に授受される定型的な書類について、書類の種類ごとに読取領域を登録しておくことができるため、読取領域を都度指定する必要をなくすことができる。依頼者は、書類の画像情報と書類の種類を送信するだけで、書類の中の必要なテキストのデータを入手することができる。

また、読取支援システムにおいて、読取領域は、一行に示されたテキストを含む。これにより、必要な情報を精度よく取得することができる。

また、読取支援システムは、少なくとも一つの読取領域を、所定の位置を基準とする座標系における座標群として登録する。これにより、所定の位置を基準とした相対的な座標情報として読取領域を登録できるため、たとえば、書類をスキャンして画像情報を生成する際に位置がずれた場合でも、適切に読取領域を適用して部分画像を生成することができる。

また、読取支援システムは、画像情報とともに読取結果情報の納期に関する納期情報を取得して、部分画像とともに、納期情報を送信先に送信し、画像情報を識別するための識別情報に関連付けて、画像情報から生成された部分画像の数と、部分画像のうち送信先から比較結果情報を受信した数と、納期情報とを一覧表示可能に出力する。これにより、読取支援サービスにおける各案件の納期と進捗状況を容易に確認することができ、遅延のないスムーズなサービス提供につなげることができる。

また、読取支援システムは、読取領域ごとに異なる送信先の指定を受け付け可能である。これにより、読み取る内容やボリューム、納期等に応じて、適切な送信先（リーダー事業者）を組み合わせて指定することができ、円滑かつ効率的なサービス提供につなげることができる。

また、読取支援システムは、読取領域に関連付けてテキストの種類の登録を受け付け可能であり、登録されたテキストの種類と、予め登録された送信先の対応可能言語に応じて、読取領域の送信先を決定する。これにより、テキストの種類に応じて、適切な送信先を指定することができる。送信先のリーダー事業者としては、様々な国の事業者の参加が想定されているため、たとえば、日本語が得意なリーダー事業者、中国語が得意なリーダー事業者、英数字のみ対応可能なリーダー事業者等を予め把握して登録しておくことにより、テキストの種類に応じて適切なリーダー事業者を指定することができる。

また、読取支援システムのリーダー端末４００は、部分画像と、当該部分画像に対応するテキスト認識情報とを関連付けて表示するとともに、当該部分画像および当該テキスト認識情報との比較結果の入力をリーダーから受け付ける。これにより、リーダーは、リーダー端末４００の画面に表示された部分画像とテキスト認識情報とを容易に比較することができる。

また、読取支援システムは、読取領域に関連付けてテキストの種類の登録を受け付け可能であり、リーダー端末４００は、読取領域に対応する部分画像およびテキスト認識結果に関連付けて、登録部に登録されたテキストの種類を表示する。これにより、リーダーは、登録されたテキストの種類を参照することで、比較や修正を正確に行うことができる。

また、リーダー端末４００は、部分画像およびテキスト認識結果を、テキストの並び方向において重なる位置に並べて表示する。これにより、部分画像およびテキスト認識結果において、対応するテキスト同士の位置が揃って表示されるため、リーダーによる比較を実行容易とすることができる。

また、リーダー端末４００は、複数の部分画像と、複数の部分画像それぞれに対応する複数のテキスト認識結果をそれぞれ関連付けて一覧表示する。これにより、リーダーは、一度に多数の部分画像の比較処理を行うことができ、効率よく作業を進めることができる。

また、チェッカー端末５００は、複数のリーダーによってそれぞれ入力された複数の比較結果と、当該複数の比較結果の一致状況を表示して、チェッカーからの修正または確定の指示を受け付ける。これにより、複数のリーダーによる比較結果の一致状況を確認し、必要な修正を行った上で比較結果を確定するため、より正確に読取支援処理を行うことができる。

また、チェッカー端末５００は、一致状況が不一致を示している場合において、修正の指示が受け付けられていない場合には、確定の指示を受け付けない。これにより、複数のリーダーによる比較結果が一致していない場合には、チェッカーが修正を行わないと比較結果を確定することができないため、チェッカーによるチェック作業を確実に実行させることができる。

また、チェッカー端末５００は、複数のリーダーに関する情報を表示可能である。これにより、たとえば、チェッカーは、複数のリーダーによる比較結果を確認する場合に、それぞれのリーダーに関する情報を考慮することができる。

なお、本発明は、上述した実施形態のみに限定されるものではなく、特許請求の範囲内において、種々改変することができる。

たとえば、依頼者端末１００、支援装置２００、リーダーサーバー３００、リーダー端末４００、およびチェッカー端末５００は、それぞれ複数の装置によって構成されてもよく、あるいは単一の装置によって構成されてもよい。

また、各構成が有する機能は、他の構成によって実現されてもよい。たとえば、支援装置２００が有する各機能の一部が、リーダーサーバー３００によって実現されてもよい。あるいは、リーダーサーバー３００が有する各機能の一部が、リーダー端末４００やチェッカー端末５００によって実現されてもよい。

また、上記の実施形態におけるシーケンスチャートやフローチャートの処理単位は、各処理の理解を容易にするために、主な処理内容に応じて分割したものである。処理ステップの分類の仕方によって、本願発明が制限されることはない。各処理は、さらに多くの処理ステップに分割することもできる。また、１つの処理ステップが、さらに多くの処理を実行してもよい。

上述した実施形態に係るシステムにおける各種処理を行う手段および方法は、専用のハードウェア回路、またはプログラムされたコンピューターのいずれによっても実現することが可能である。上記プログラムは、たとえば、フレキシブルディスクおよびＣＤ－ＲＯＭ等のコンピューター読み取り可能な記録媒体によって提供されてもよいし、インターネット等のネットワークを介してオンラインで提供されてもよい。この場合、コンピューター読み取り可能な記録媒体に記録されたプログラムは、通常、ハードディスク等の記憶部に転送され記憶される。また、上記プログラムは、単独のアプリケーションソフトとして提供されてもよいし、システムの一機能としてその装置のソフトウエアに組み込まれてもよい。

１００ 依頼者端末、
１１０ ＣＰＵ、
１２０ ＲＯＭ、
１３０ ＲＡＭ、
１４０ ストレージ、
１５０ 通信インターフェース、
１６０ 操作部、
１７０ 表示部、
１８０ バス、
２００ 支援装置、
２１０ ＣＰＵ、
２２０ ＲＯＭ、
２３０ ＲＡＭ、
２４０ ストレージ、
２５０ 通信インターフェース、
２６０ 操作部、
２７０ 表示部、
２８０ バス、
３００ リーダーサーバー、
３１０ ＣＰＵ、
３２０ ＲＯＭ、
３３０ ＲＡＭ、
３４０ ストレージ、
３５０ 通信インターフェース、
３６０ 操作部、
３７０ 表示部、
３８０ バス、
４００ リーダー端末、
４１０ ＣＰＵ、
４２０ ＲＯＭ、
４３０ ＲＡＭ、
４４０ ストレージ、
４５０ 通信インターフェース、
４６０ 操作部、
４７０ 表示部、
４８０ バス、
５００ チェッカー端末、
５１０ ＣＰＵ、
５２０ ＲＯＭ、
５３０ ＲＡＭ、
５４０ ストレージ、
５５０ 通信インターフェース、
５６０ 操作部、
５７０ 表示部、
５８０ バス。

Claims (9)

1. 読取支援装置、リーダー端末、およびチェッカー端末を有する読取支援システムであって、
   前記読取支援装置は、
   読取支援を依頼する依頼者端末から、文字、数字および記号の少なくとも一つを有するテキストが画像として含まれる書類の画像情報を取得する取得部と、
   前記取得部によって取得された前記画像情報において、読み取り対象とする少なくとも一つの読取領域の登録を受け付ける登録部と、
   前記画像情報において、前記登録部に登録された前記少なくとも一つの読取領域に対応する部分画像を生成する生成部と、
   前記生成部によって生成された前記部分画像を送信する送信先である前記リーダー端末の指定を受け付ける指定部と、
   前記指定部において指定された前記リーダー端末に、前記部分画像とともに、前記部分画像に対してテキスト認識処理を実行した結果を示すテキスト認識情報を送信する送信部と、
   前記リーダー端末によって入力された前記テキスト認識情報と前記部分画像が表す前記テキストとの比較結果が前記リーダー端末から前記チェッカー端末に送信されて、前記チェッカー端末によって修正または確定された比較結果情報を、前記チェッカー端末から受信する受信部と、
   前記受信部によって受信された前記比較結果情報により確定された、前記読取領域を読み取った結果を示す読取結果情報を前記依頼者端末へ出力する出力部と、
   を有し、
   前記リーダー端末は、
   前記読取支援装置から前記部分画像および前記テキスト認識情報を受信し、前記部分画像と前記部分画像に対応する前記テキスト認識情報とを関連付けて表示するとともに、
   前記部分画像および前記テキスト認識情報を比較する担当者であるリーダーから、前記比較結果の入力を受け付ける受付部と、
   受け付けた前記比較結果を前記チェッカー端末へ送信するリーダー端末送信部と、
   を有し、
   前記チェッカー端末は、
   一つの前記部分画像に対応した前記テキスト認識情報に対して、複数の前記リーダー端末のそれぞれから受信した複数の前記比較結果と、当該複数の比較結果の一致状況を表示するとともに、
   前記一致状況が不一致を示している場合には、前記リーダーによる前記比較結果をチェックする担当者であるチェッカーから前記比較結果の修正の指示を受け付け、前記一致状況が一致を示している場合には、前記チェッカーから前記比較結果の確定の指示を受け付ける確認部と、
   前記確定の指示を受け付けた前記比較結果を前記比較結果情報として前記読取支援装置へ送信するチェッカー端末送信部と、
   を有する、読取支援システム。
2. 前記読取領域は、一行に示された前記テキストを含む請求項１に記載の読取支援システム。
3. 前記取得部は、前記依頼者端末から、前記画像情報とともに、前記読取結果情報の納期に関する納期情報を取得し、
   前記送信部は、前記部分画像とともに、前記納期情報を前記リーダー端末に送信し、
   前記出力部は、前記画像情報または前記画像情報から生成された複数の前記部分画像からなるグループを識別するための件名に関連付けて、前記画像情報から生成された前記部分画像の数と、前記部分画像のうち前記チェッカー端末から前記比較結果情報を受信した数と、前記納期情報とを一覧表示可能に出力する請求項１または２に記載の読取支援システム。
4. 前記指定部は、前記読取領域ごとに異なる前記送信先の指定を受け付け可能である請求項１～３のいずれかに記載の読取支援システム。
5. 前記登録部は、数字、英数字、英数字記号、日本語文字、中国語文字のいずれかを示す前記テキストの種類を、前記読取領域に関連付けて登録を受け付け可能であり、
   前記指定部は、前記テキストの種類における言語と、予め登録された前記リーダー端末に入力するリーダーの対応可能言語に応じて、前記部分画像および前記テキスト認識情報の送信先となる前記リーダー端末を決定する請求項１～４のいずれかに記載の読取支援システム。
6. 前記登録部は、前記読取領域に関連付けて前記テキストの種類の登録を受け付け可能であり、
   前記受付部は、前記読取領域に対応する前記部分画像および前記テキスト認識情報に関連付けて、前記登録部に登録された前記テキストの種類を表示する請求項１～５のいずれかに記載の読取支援システム。
7. 前記受付部は、前記部分画像および前記テキスト認識情報を、前記テキストの並び方向において重なる位置に並べて表示する請求項１～６のいずれかに記載の読取支援システム。
8. 前記受付部は、複数の前記部分画像と、複数の前記部分画像それぞれに対応する前記テキスト認識情報とを関連付けて一覧表示する請求項１～７のいずれかに記載の読取支援システム。
9. 前記確認部は、前記一致状況が不一致を示している場合において、前記修正の指示が受け付けられていない場合には、前記確定の指示を受け付けない請求項１～８のいずれかに記載の読取支援システム。

Images