JP5445858B2 - 入力支援装置、入力支援方法、及びプログラム - Google Patents

Description

本発明は、利用者による端末を用いたデータ入力作業を支援する技術に関する。

近年、銀行等の店舗内に設置されるローンの申し込みを行うための所謂無人契約機と呼ばれる端末など、何らかの商品やサービスを申し込むために用いられる端末が普及している。利用者は、端末に備えられたタッチパネルで所謂ソフトキーボードを操作するなどして、申し込みに必要な文字（例えば、氏名や住所など）を入力したり、端末に備えられた読取装置を操作して、申し込みに必要な身分証明書の写しを作成する。
例えば、下記特許文献１及び２には、読取装置を備える端末の例が開示されている。
具体的には、特許文献１には、表示画面に所定形状を有する物体を置いて、人がその物体を移動させる操作や、図形を描画する操作により、表示画面に表示された画像を操ることが可能な画像表示装置が開示されている。
また、特許文献２には、撮像に際して、外光モニタその他の方法で判断して、外来光が不足している場合には、調光シートの実効透過率を上げ、外来光を多く取り入れるようにすることで、白地レベルを確保し、逆に明るすぎる場所では、実効透過率を下げることで対処する撮像機能付投射装置が開示されている。
また、特許文献３には、帳票や身分証明書等の前記読み取り対象のセット位置を顧客操作表示部６の画面上とし、その上方から読み取りを行う顧客操作型端末装置が開示されている。

特開２００７−１１２７６号公報 特開２００９−１７１４４２号公報 特開２００５−１８４３６１号公報

ところで、タッチパネル操作（例えば、ソフトキーボードなど）による文字の入力を上手く行えない利用者は、端末操作による商品やサービスの申し込み手続きに多くの手間と時間を要してしまう。このような利便性の問題に起因し、端末の回転効率が悪化するという問題も生ずる。
しかしながら、特許文献１及び２に開示されている装置は、利用者が文字等の入力を行うことが想定されていないので、商品やサービスの申し込みを行うための端末として利用するのは困難である。従って、これら文献に開示されている装置では、端末の利便性に関する上記の問題を解決することはできない。
本発明は、利用者による端末を用いて行うデータ入力作業を支援する新しい枠組みを提供することを目的とする。

本発明の入力支援装置は、透光性パネルと、前記透光性パネル上に配置される被写体を該透光性パネルの下方から撮影する撮影部と、撮影により生成される前記被写体の画像から、予め決められた情報の少なくとも一部を抽出する情報抽出部と、を備えることを特徴とする。

本発明の実施態様では、前記抽出した情報を、所定の入力フォームにおける対応する項目に関連付ける情報関連部を備える。この場合、前記透光性パネルはタッチパネルであり、前記情報関連部は、前記タッチパネルで受け付けた操作に基づいて、前記抽出した情報を前記入力フォームにおける対応する項目に関連付けてもよい。

本発明の別の実施態様では、前記抽出した情報を前記透光性パネルにリアルタイムに表示する表示制御部を備える。
また別の実施態様では、前記透光性パネルはタッチパネルであり、前記入力支援装置は、さらに、前記タッチパネルで受け付けた操作に基づいて、前記抽出した情報を修正する情報修正部を備えていてもよい。

また別の実施態様では、前記情報抽出部は、前記被写体の画像から、予め決められた情報を表す文字の少なくとも一部をＯＣＲ処理により抽出し、前記入力支援装置は、さらに、前記ＯＣＲ処理の精度と、該ＯＣＲ処理により抽出された文字の修正情報とを関連づけて記録する修正ログ記録部を備える。

また別の実施態様では、前記透光性パネルに配置されたのと同じ被写体を該透光性パネルの上方から撮影する上方撮影部を備え、前記情報抽出部は、前記透光性パネルの上方からの撮影により生成される前記被写体の画像から、予め決められた情報の少なくとも一部を抽出する。
また別の実施態様では、前記情報抽出部は、前記被写体の画像から抽出した情報を揮発性記録媒体に書き込むようにしてもよい。

本発明の入力支援方法は、透光性パネル上に配置される被写体を該透光性パネルの下方から撮影するステップと、撮影により生成される前記被写体の画像から、予め決められた情報の少なくとも一部を抽出するステップと、を含むことを特徴とする。

本発明のプログラムは、上記入力支援方法を情報処理装置に実行させるコンピュータプログラムである。
なお、本発明において、１つの機能部や装置が有する機能が２つ以上の物理的手段や装置により実現されても、２つ以上の機能部や装置の機能が１つの物理的手段や装置により実現されても良い。

本発明によれば、被写体の画像から、予め決められた情報の少なくとも一部が抽出されるので、利用者による端末を用いて行うデータ入力作業を支援することができ、利用者の負担を軽減することができる。

第１実施形態の入力支援装置の全体構成を示す図である。 入力支援装置のハードウェア構成を示す図である。 入力支援装置の機能構成を示す図である。 入力支援装置による所定の入力フォームへのデータの入力支援処理の流れを示すフローチャートである。 タッチパネル上に被写体を配置した状態を示す図である。 被写体の画像から抽出された情報（抽出済み情報）と該抽出済み情報が反映された入力フォームとを透光性パネルに表示した状態を示す図である。 タッチパネル上で領域を設定する方法の具体例を説明する図である。 入力支援装置の変形例を説明する図である。 入力支援装置の別の変形例を説明する図である。 入力支援装置のまた別の変形例を説明する図である。 入力支援装置のまた別の変形例を説明する図である。 上方撮影部を備える入力支援装置による入力支援処理の流れを示す図である。 上方撮影部を備える入力支援装置による入力支援処理の流れを示す図である。 入力フォームに対応する書面を撮影し、入力フォームにおける項目に関する情報を抽出する実施形態を説明する図である。 抽出済み情報を透光性パネルにリアルタイムに表示する実施形態を説明する図である。

以下、本発明の第１実施形態として、投射表示機能及び撮像機能を有し、利用者による商品やサービスの申し込み情報の入力作業を支援する入力支援装置１について、図面を参照して説明する。

図１は、第１実施形態の入力支援装置１の全体構成を模式的に示す。
入力支援装置１は、透光性パネル３と、制御装置５と、表示部７と、撮影部９とを備える。第１実施形態では、例えば、透光性パネル３は筐体１１の上面の一部をなすように配置され、制御装置５、表示部７、及び撮影部９は、筐体１１内に適宜配置される。なお、図１では、各ハードウェア間を接続するコードや基板を省略している。

透光性パネル３は、ユーザからの操作を受け付けるタッチパネル１３と、タッチパネル１３を介して画像を表示するスクリーン１５とを適宜の間隔を空けて重ね又は隙間なく重ねてなる透光性を有するパネルを用いる。この透光性パネル３は、撮影部９によって撮影される被写体（例えば、何らかの申込書や身分証明書など）を配置するための原稿台及び読み取り面を成す。

タッチパネル１３としては、指や専用のペン（スタイラスペンなど）で電子機器（ここでは入力支援装置１）に対して動作を指示することができる透過率の高いタッチパネル（例えば、静電容量方式、又は光学方式のものなど）を用いる。
また、スクリーン１５としては、電圧に応じて透光性が変化する部材（例えば、ＵＭＵフィルム（登録商標）など）を用いる。
なお、図１では、透光性パネル３（タッチパネル１３及びスクリーン１５）の厚みを誇張して表示している。

制御装置５は、透光性パネル３上の領域を設定する機能、透光性パネル３の透光性（詳細には、スクリーン１５の透光性）を変化させる機能、表示部７を制御する機能、撮影部９を制御する機能、及び撮影により生成された画像から所望の情報を抽出する機能等の様々な機能を有する。制御装置５のハードウェア構成及び機能の詳細については、図２及び図３を参照して後述する。

表示部７は、制御装置５によって設定された透光性パネル３上の領域に対して撮影用の光を照射したり、利用者に提示する画像（ユーザインターフェースなど）をスクリーン１５に投影する。第１実施形態では、表示部７として、ＣＲＴプロジェクタ、液晶プロジェクタ、又はＤＬＰプロジェクタ等の周知のプロジェクタを用いる。以下、第１実施形態では、表示部７をプロジェクタ７と称する。
プロジェクタ７が照射する撮影用の光は、上記設定された領域に応じた画像（例えば、白一色の画像など）を、スクリーン１５のうちの上記設定された領域に対応する範囲に投影するための光であり、所謂ストロボの役割を果たす。なお、図において、プロジェクタ７とスクリーン１５との間に示した破線は、プロジェクタ７による光の照射範囲を表す。

撮影部９は、透光性パネル３（詳細にはスクリーン１５）に照射された光の透光性パネル３からの反射光を該透光性パネル３の下方から撮影する。
第１実施形態では、撮影部９として、例えばＣＣＤイメージセンサやＣＭＯＳイメージセンサ等の撮像素子を備える周知のデジタルカメラを用いる。以下、第１実施形態では、撮影部９をカメラ９と称する。なお、図において、カメラ９とスクリーン１５との間に示した破線は、カメラ９による撮像範囲を表す。

図２は、入力支援装置１のハードウェア構成を示す。
第１実施形態の入力支援装置１では、タッチパネル１３、スクリーン１５、プロジェクタ７、及びカメラ９は、それぞれ制御装置５と通信可能に接続される。制御装置５は、バスを介して通信可能に接続される、ＣＰＵ２１、ＲＯＭ２２、ＲＡＭ２３、ＨＤＤ（ハードディスク）２４、及び通信装置２５等の構成要素を含んで構成される。

図３は、制御装置５の機能構成を示す。
制御装置５は、領域設定部３１、透光性制御部３２、表示制御部３３、撮影制御部３４、情報抽出部３５、情報関連部３６、情報修正部３７、及び修正ログ記録部３８を備える。これら機能部は、例えばＣＰＵ２１がＨＤＤ２４やＲＯＭ２２等の記憶装置からＲＡＭ２３上に所定のプログラムを読み出して実行することにより機能的に実現される。以下、各機能部について、原則として符号の順に説明するが、説明の都合上、表示制御部３３及び撮影制御部３４については最後に説明する。

領域設定部３１は、タッチパネル１３で利用者から受け付けた操作に基づいて透光性パネル３上の領域を設定する。具体的には、タッチパネル１３上に配置された被写体について、タッチパネル１３上における該被写体の位置がタッチパネル操作によって指定された場合に、該指定された位置に対応する領域を、撮影用の光を照射すべき領域として設定する。領域の設定方法の例については、図７を参照して後述する。

透光性制御部３２は、スクリーン１５の透光性を変化させる。例えば、利用者に提示する画像をプロジェクタ７によってスクリーン１５に投射表示する場合、スクリーン１５の透光性を下げ（より不透明（例えば半透明）に変化させ）、カメラ９によって撮影を行う時には、スクリーン１５の透光性を上げる（より透明に変化させる）。

情報抽出部３５は、撮影により生成される被写体の画像から、予め決められた情報の少なくとも一部を抽出し、該抽出した情報をＲＡＭ２３等の揮発性記録媒体に書き込む。第１実施形態では、情報抽出部３５は、被写体の画像から、予め決められた情報（例えば、氏名、住所、及び生年月日など）を表す文字の少なくとも一部を周知のＯＣＲ処理により抽出するとともに、該ＯＣＲ処理の精度（尤度）を表す情報を出力するように構成される。

情報関連部３６は、情報抽出部３５が被写体の画像から抽出した情報を、所定の入力フォームにおける対応する項目に関連付ける。第１実施形態では、タッチパネル１３で受け付けた操作に基づいて、前記抽出した情報を入力フォームにおける対応する項目に関連付ける。

情報修正部３７は、タッチパネル１３で受け付けた操作に基づいて、情報抽出部３５が被写体の画像から抽出した情報を修正する。

修正ログ記録部３８は、情報抽出部３５によるＯＣＲ処理の精度と、該ＯＣＲ処理により抽出された文字の修正情報とを対応づけて、例えばＨＤＤ２４等の記憶装置に書き込むなどして記録する。

表示制御部３３は、プロジェクタ７がスクリーン１５に対して照射する光の条件（例えば、画像パターン、輝度、色など）を決定し、該決定した条件で光が照射されるようにプロジェクタ７を制御する。例えば、情報抽出部３５が被写体の画像から抽出した情報や、情報修正部３７が修正した情報（修正後の情報）を透光性パネル３に表示するようにプロジェクタ７を制御する。

撮影制御部３４は、プロジェクタ７が透光性パネル３に対して撮影用の光を照射したタイミングに合わせて、スクリーン１５からの反射光が撮影されるようにカメラ９を制御する。

図４は、入力支援装置１による所定の入力フォームへのデータの入力支援処理の流れを示すフローチャートであり、図５は、タッチパネル１３上に被写体（例えば、身分証明書としての運転免許証）５１を配置した状態を示し、図６は、被写体５１の画像から抽出された情報（抽出済み情報）と該抽出済み情報が反映された入力フォームとを透光性パネル３に表示した状態を示し、図７は、タッチパネル１３上で領域を設定する方法の具体例を示す。以下、図４〜７を参照して、かかる入力支援処理について説明する。

なお、領域設定部３１がタッチパネル１３上の領域を設定する（領域設定処理を実行する）までは、入力支援装置１の透光性制御部３２は、透光性パネル３を不透明（例えば半透明）な状態に維持しており、表示制御部３３は、プロジェクタ７を制御し、所定の光をスクリーン１５に対して照射させ、図５（Ａ）に示すような画面（画像）を表示しているものとする。また、図５（Ａ）において、タッチパネル１３上に示した斜線は、画像の模様ではなく、透光性パネル３が不透明な状態であることを表す。

まず、図５（Ａ）に示すように、利用者が被写体５１（身分証明書としての運転免許証）の一方の面（例えば、表面）を下に向けた状態でタッチパネル１３上に配置し、撮影を指示するためのＳｃａｎボタン５２を押下した場合、入力支援装置１の撮影制御部３４は、カメラ９を制御し、かかる被写体５１の一方の面を撮影する（Ｓ４１）。
具体的には、まず、領域設定部３１は、利用者によるタッチパネル操作に応じて透光性パネル３上の領域を設定する。例えば、領域設定部３１は、Ｓｃａｎボタン５２が押下されたことをトリガとして、被写体５１の位置に対応する領域を設定する。なお、以下、透光性パネル３において、設定された領域を“設定済み領域”と称し、それ以外の領域を“余白領域”と称する。

領域が設定されると、透光性制御部３２は、透光性パネル３のスクリーン１５の透光性を上げて、例えば、スクリーン１５を透明な状態に変化させる。

次に、表示制御部３３は、スクリーン１５の透光性が上がるタイミング（例えば、透明になるタイミング）に合わせてプロジェクタ７を制御し、図５（Ｂ）に示すように、設定済み領域５４に撮影用の光を照射させ、余白領域５５により暗い光を照射させる。
これにより、タッチパネル１３上に配置された被写体に撮影用の光が照射される。なお、図５（Ｂ）において、余白領域５５に示したドット模様は、プロジェクタ７が照射した光（画像）の模様を表すのではなく、該余白領域５５全体に暗い色が照射されていることを表す。また、図５（Ｂ）では、プロジェクタ７による光照射時の透光性パネル３の状態を説明するため、被写体５１の図示を省略した。

そして、撮影制御部３４は、プロジェクタ７が透光性パネル３に撮影用の光を照射したタイミングに合わせてカメラ９を制御し、照射された光の透光性パネル３からの反射光を撮影する。これにより、設定済み領域、すなわちタッチパネル１３上に配置された被写体５１が鮮明に表示され、かつ、余白領域が暗い色（黒色など）で表示される画像が生成される。
このように、第１実施形態の入力支援装置１では、撮影時には、プロジェクタ７が余白領域に対してより暗い色を照射するので、利用者の目が眩むことはない。

次に、情報抽出部３５は、撮影により生成された被写体５１の画像に対してＯＣＲ処理を実行し、予め決められた情報の少なくとも一部を抽出する（Ｓ４２）。
具体的には、第１実施形態では、予め決められた情報は、氏名、住所、及び生年月日であり、情報抽出部３５は、被写体５１の画像から、氏名、住所、及び生年月日を項目名とし、該項目名に対応して記載されている文字を抽出する。

そして、情報抽出部３５は、上記の抽出済み情報をＲＡＭ２３等の揮発性記録媒体に書き込む（Ｓ４３）。これにより、入力支援装置１の電源をＯＦＦにした場合には、ＯＣＲ処理により抽出された情報は消去されるので、利用者の個人情報の漏洩を抑止できるとともに、利用者に安心感を与えることができる。

被写体５１の画像からの情報抽出が完了すると、表示制御部３３は、抽出済み情報及び所定の申込書に対応する入力フォームをタッチパネル１３に表示する（Ｓ４４）。
具体的には、図６（Ａ）に示すように、表示制御部３３は、プロジェクタ７を制御し、タッチパネル１３の右側領域に抽出済み情報６１を、また、タッチパネル１３の左側領域に入力フォーム６２を、それぞれタッチパネル１３で操作可能に表示する（例えば、選択やドラッグができるように表示する）。なお、抽出済み情報６１と入力フォーム６２は、図示の例にかかわらず、タッチパネル１３上の任意の位置に表示することができる。

次に、情報修正部３７は、抽出済み情報６１について、利用者から修正指示があったかどうかを判断する（Ｓ４５）。
具体的には、例えば、利用者によって、抽出済み情報６１のいずれかが押下（選択）され、続いて、修正処理の実行を指示するための修正ボタン６４が押下された場合には、修正指示があったものと判断する。

修正指示がない場合（Ｓ４５の判断がＮｏの場合）、情報関連部３６は、タッチパネル１３で受け付けた操作に基づいて、抽出済み情報６１を入力フォーム６２における対応する項目に関連付ける（Ｓ４６）。
具体的には、図６（Ｂ）に示すように、利用者によって、抽出済み情報６１のいずれか（例えば、氏名に関する情報など）が押下（選択）された状態で、入力フォーム６２における一つの項目（例えば、氏名に関する項目など）上にドラッグ（移動）された場合、情報関連部３６は、移動された情報を、移動先である入力フォーム６２中の項目に関連付ける。

また、入力フォーム６２における項目のうち、抽出済み情報６１に対応しない項目（図６では、性別やプランに関する項目）については、チェックボックスやリストボックス等をタッチパネル１３で操作することにより、情報を入力することができるようにするのがよい。そして、情報関連部３６は、このようにして入力された情報についても、対応する項目に関連付けるものとする。

そして、情報修正部３７は、Ｓ４５と同様に、抽出済み情報６１について、利用者から修正指示があったかどうかを判断する（Ｓ４７）。なお、ここでいう抽出済み情報６１は、入力フォーム６２における対応する項目に関連付けられた情報（入力フォーム６２上に移動され表示されている情報）を含むものとする。

一方、Ｓ４５又はＳ４７で修正指示があった場合、情報修正部３７は、タッチパネル１３で受け付けた操作に基づいて、抽出済み情報６１を修正する（Ｓ４８）。
具体的には、例えば、修正候補の情報（例えば文字など）や、修正内容を入力するための所謂ソフトウェアキーボード（a soft keyboard）をタッチパネル１３上に表示し（詳細には、表示制御部３３による処理である）、修正の対象となる抽出済み情報６１について、修正内容の入力を利用者から受け付け、受け付けた内容で抽出済み情報６１を修正する。

次に、入力支援装置１は、入力フォーム６２への情報の入力が完了したかどうかを判断する（Ｓ４９）。
具体的には、利用者によって、入力が完了したことを通知するための完了ボタン６５が押下された場合には、入力が完了したものと判断する。そして、入力支援装置１は、入力が完了していないと判断すると、処理をＳ４７へ移行し、以後、修正指示があるか又は入力が完了するまで待機する。

一方、入力が完了した場合（完了ボタン６５が押下された場合）には、修正ログ記録部３８は、情報抽出部３５によるＯＣＲ処理の精度と、該ＯＣＲ処理により抽出された文字の修正情報とを対応づけて、ログ情報としてＨＤＤ２４等の記憶装置に記録する（Ｓ５０）。

そして、入力支援装置１は、入力フォーム６２の各項目に対応づけられた情報とログ情報とを、入力フォーム６２に対応するサービスの受け付け業務を行う管理センターに送信し（Ｓ５１）、処理を終了する。

次に、被写体５１の撮影時（Ｓ４１）における、タッチパネル操作に応じた透光性パネル３上の領域の設定方法の例について詳細に説明する。
図７（Ａ）に示すように、タッチパネル１３上のポイント（例えば、タッチパネル１３上の任意の位置に配置された被写体５１の左上の角）が押下され、続いて図７（Ｂ）に示すように、タッチパネル１３上のポイント（例えば、被写体５１の右下の角）が押下された後、Ｓｃａｎボタン５２（図５（Ａ）参照）が押下された場合、領域設定部３１は、押下された２箇所のポイントを、領域を指定するためのポイント（領域指定ポイントＰ１及び領域指定ポイントＰ２）として設定する。
そして、領域設定部３１は、上記領域指定ポイントＰ１及びＰ２の座標を対角の座標とする四角形の領域を設定する。
これにより、図７（Ｃ）に示すように、撮影時には、タッチパネル１３上の設定済み領域５４に撮影用の光が照射され、余白領域５５にはより暗い光が照射される。

なお、透光性パネル３上の領域の設定方法は、上記に限定されるものではなく、タッチパネル１３上で被写体の外縁を指でなぞる（トレースする）ことによって、被写体の外形に対応する領域を設定してもよいし、被写体の各角を押下させ、押下された順に角を線分で結んで成る任意の形状に対応する領域を設定してもよい。

以上のように、第１実施形態の入力支援装置１によれば、所定のサービスに関する申し込みを行う利用者は、基本的には、被写体５１の画像から抽出された情報をタッチパネル１３上で操作（選択やドラッグなど）することにより、申し込みに必要な情報の入力（抽出情報６１と入力フォーム６２における項目との関連付け）を行うことができる。これにより、タッチパネル１３を操作して文字を入力するのに不慣れな利用者でも、申し込み情報を容易に入力することができる。

また、管理センターでは、受信した情報に基づいてサービスの受け付け処理が行われる。そして、その際にログ情報を参照することにより、サービスの利用を許可するかどうかを判断することができる。例えば、ＯＣＲ処理の精度と修正情報が整合しない場合、例えば、ＯＣＲ処理の精度が高い（文字が正しく抽出された可能性が高い）にもかかわらず、該ＯＣＲ処理により認識された文字が修正されている場合には、不正な入力が行われたものと判断し、サービスの利用を許可しないという対応が考えられる。

以上、本発明の第１実施形態を説明したが、本発明は、上記実施形態に限定されることなく、下記のように種々に変形して適用することが可能である。なお、変形例を説明するための図面において、第１実施形態又はいずれかの変形例に関する図面中の要素と同じ符号が付されている要素は、基本的には互いに同様の機能を有しているものとする。
［変形例］
例えば、第１実施形態で説明した入力支援装置１において、カメラ９に代えて、イメージスキャナ（例えば、ラインスキャナなど）を撮影部として用いたり、プロジェクタ７及びスクリーン１５に代えて、透明ディスプレイ（例えば、透明に作られた所謂有機ＥＬディスプレイなど）を表示部として用いたり、さらに、透光性パネル３上に配置された被写体を上方から撮影する上方撮影部（例えばデジタルカメラ）を備えてもよい。
具体的には、変形例の入力支援装置８１は、図８に示すように、第１実施形態で説明した入力支援装置１とほぼ同様の機能を有するとともに、カメラ９が透光性パネル３の下方から撮影するのと同じ被写体を透光性パネル３の上方から撮影する上方撮影部（以下、上方カメラと称する）８２を備える。この例では、撮影制御部３４が、カメラ９及び上方カメラ８２を制御する。

また別の変形例の入力支援装置９１は、図９に示すように、第１実施形態で説明した入力支援装置１とほぼ同様の機能を有し、上方撮影部８２を備えるとともに、第１実施形態で説明したカメラ９に代えて、イメージスキャナ（例えば、ラインスキャナなど）９３を備える。この例では、撮影制御部３４が、イメージスキャナ９３及び上方カメラ８２を制御する。

また別の変形例の入力支援装置１０１は、図１０に示すように、第１実施形態で説明した入力支援装置１とほぼ同様の機能を有し、上方撮影部８２を備え、第１実施形態で説明したプロジェクタ７及びスクリーン１５に代えて、透明ディスプレイ１０２を備えるとともに、撮影用の光を照射する所謂ストロボとして機能する照明装置１０３を備える。この例では、表示制御部３３が、透明ディスプレイ１０２を制御し、撮影制御部３４が、カメラ９、照明装置１０３、及び上方カメラ８２を制御する。なお、この例では、透光性制御部３２は必ずしも必要ではない。

また別の変形例の入力支援装置１１１は、図１１に示すように、第１実施形態で説明した入力支援装置１とほぼ同様の機能を有し、上方撮影部８２を備え、第１実施形態で説明したプロジェクタ７及びスクリーン１５に代えて、透明ディスプレイ１０２を備えるとともに、カメラ９に代えて、イメージスキャナ（例えば、ラインスキャナなど）９３を備える。この例では、表示制御部３３が、透明ディスプレイ１０２を制御し、撮影制御部３４が、イメージスキャナ９３を制御する。なお、この例においても、透光性制御部３２は必ずしも必要ではない。

図１２及び図１３は、上方撮影部８２を備える入力支援装置８１による所定の入力フォームへのデータの入力支援処理の流れを示す。
上方撮影部８２を備える入力支援装置８１は、タッチパネル１３上に配置される被写体１２１（例えば、身分証名書としての運転免許証など）の表面と裏面のそれぞれに記載されている文字をＯＣＲ処理により認識し、予め決められた情報の少なくとも一部を抽出する。
例えば、図１３に示すように、裏面に新しい住所が記載された被写体１２１が、表面を下に向けてタッチパネル１３上に配置されている場合には、撮影制御部３４は、カメラ９及び上方撮影部８２を制御し、被写体１２１の表面側をカメラ９に撮影させ、被写体１２１の裏面側を上方撮影部８２に撮影させる。

そして、情報抽出部３５は、撮影により生成される被写体１２１の表面の画像及び裏面の画像それぞれから、予め決められた情報の少なくとも一部を抽出する。この例では、ＯＣＲ処理により、被写体１２１（運転免許証）の表面の画像から氏名、住所、及び生年月日を表す文字を抽出し、裏面の画像から新しい住所を表す文字を抽出する。
また、情報抽出部３５は、被写体１２１の表面の画像と裏面の画像それぞれから同じ種類（この例では、住所）の情報を抽出した場合、その種類について、より新しい情報を抽出済み情報として保持するものとする。具体的には、図示の例では、表面の画像から抽出した情報を消去し、裏面の画像から抽出した情報（より新しい情報）を抽出済み情報として保持する。

次に、表示制御部３３は、図１３に示すように、プロジェクタ７を制御し、タッチパネル１３の右側領域に抽出済み情報１３１を、また、タッチパネル１３の左側領域に入力フォーム１３２を、それぞれタッチパネル１３で操作可能に表示する（例えば、選択やドラッグができるように表示する）。
なお、このほかの入力支援装置８１（制御装置５）による処理の内容は、第１実施形態で説明したのと同様である。また、上方撮影部８２を備える他の入力支援装置９１，１０１，１１１においても、上記と同様の処理を実行することができる。

また例えば、第１実施形態とは異なり、図１４に示すように、被写体（例えば、身分証明書としての運転免許証）５１とともに、所定の入力フォームに対応する書面（例えば、サービス利用申込書）１４１をタッチパネル１３上に配置し、カメラ９やイメージスキャナ９３等の撮影部で撮影し、撮影により生成される画像から、予め決められた情報をＯＣＲ処理により抽出してもよい。これにより、画像中の運転免許証５１に対応する部分からは、入力フォームへの入力に用いるための抽出済み情報が抽出され、画像中のサービス利用申込書１４１に対応する部分からは、入力フォームにおける各項目を表す情報が抽出される。

この例に示すように、例えば身分証明書の表面と裏面それぞれの画像から、予め決められた情報を抽出し、抽出済み情報として用いることで、身分証明書の不正使用を抑止することができる。例えば、一般に、商品やサービスの申込書とともに身分証証明書の写しを管理センターへ送付する場合、管理センターでは、身分証明書の表面と裏面それぞれの写しが同一の身分証明書の写しであることを確認することができない。一方、上方撮影部８２を備える入力支援装置８１等を用いれば、同じ被写体（例えば、身分証明書としての運転免許証など）の表面と裏面を撮影し、それぞれの画像から抽出した情報を用いて入力フォームへの入力が行われるので、表面と裏面の画像をそれぞれ別の被写体に基づいて用意することができないため、身分証明書の不正使用を抑止することができる。

また例えば、上方撮影部８２を備える入力支援装置８１において、制御装置５の表示制御部３３及び撮影制御部３４は、プロジェクタ７、カメラ９、及び上方撮影部８２をそれぞれ制御し、抽出済み情報を透光性パネル３にリアルタイムに表示するようにしてもよい。
具体的には、例えば図１５に示すように、被写体（例えば、裏返して配置された運転免許証など）１５１がタッチパネル１３上に存在するかどうかをリアルタイムに検出し、被写体１５１がタッチパネル１３上から取り除かれた場合には、抽出済み情報１５２をタッチパネル１３から消去することが考えられる。これにより、利用者に対し、身分証明書に記載されている個人情報が装置内に無用に保持されていないという安心感を与えることができる。

なお、タッチパネル１３上に被写体１５１が存在するかどうかを検出する方法としては、例えば上方撮影部８２が被写体１５１をリアルタイムに撮影し、該撮影により生成される画像が変化（例えば、被写体１５１に対応する部分の画素値の変化量が閾値を越えたことなど）を検出する方法が考えられる。また、上方撮影部８２を備える他の入力支援装置９１，１０１，１１１においても、上記と同様の処理を実行することができる。なお、装置内に備えられる撮影部９によって、被写体１５１をリアルタイムに検出してもよい。

また例えば、第１実施形態で説明したのとは異なり、情報関連部３６は、タッチパネル１３で何らかの操作を受け付けたかどうかにかかわらず、抽出済み情報を、入力フォームにおける対応する項目に対応付けてもよい。この場合、利用者は、タッチパネル１３上で、図６（Ｂ）に示すような、抽出済み情報６１と入力フォーム６２における項目との関連付けを行う必要はなく、必要に応じて修正を行うだけでよいため、申し込み情報の入力作業をより容易に行うことができる。

また例えば、第１実施形態では、情報抽出部３５は、ＯＣＲ処理により、被写体の画像から、予め決められた情報の少なくとも一部を抽出しているが、画像中の抽出すべき文字が存在する部分（部分画像）を切り取り、該切り取った部分画像を抽出済み情報としてもよい。これにより、ＯＣＲ処理の精度が著しく低い場合などのように、予め決められた情報を正確に認識し抽出できない場合でも、抽出済み情報を用いて入力フォームへの入力作業を行うことができる。

１，８１，９１，１０１，１１１…入力支援装置
３…透光性パネル
５…制御装置
７…プロジェクタ（表示部）
９…カメラ（撮影部）
１１…筐体
１３…タッチパネル
１５…スクリーン
３１…領域設定部
３２…透光性制御部
３３…表示制御部
３４…撮影制御部
３５…情報抽出部
３６…情報関連部
３７…情報修正部
３８…修正ログ記録部
８２…上方撮影部
９３…イメージスキャナ
１０２…透明ディスプレイ
１０３…照明装置

Claims (8)

1. 透光性のタッチパネルと、
   前記タッチパネル上に配置される被写体を該タッチパネルの下方から撮影する撮影部と、
   撮影により生成される前記被写体の画像から、予め決められた情報を表す文字の少なくとも一部をＯＣＲ処理により抽出する情報抽出部と、
   前記タッチパネルで受け付けた操作に基づいて、前記抽出した情報を修正する情報修正部と、
   前記ＯＣＲ処理の精度と、該ＯＣＲ処理により抽出された文字の修正情報とを関連づけて記録する修正ログ記録部と
   を備える入力支援装置。
2. 前記抽出した情報を、所定の入力フォームにおける対応する項目に関連付ける情報関連部
   をさらに備える請求項１に記載の入力支援装置。
3. 前記情報関連部は、前記タッチパネルで受け付けた操作に基づいて、前記抽出した情報を前記入力フォームにおける対応する項目に関連付ける
   請求項２に記載の入力支援装置。
4. 前記抽出した情報を前記透光性パネルにリアルタイムに表示する表示制御部
   をさらに備える請求項１に記載の入力支援装置。
5. 前記透光性パネルに配置されたのと同じ被写体を該透光性パネルの上方から撮影する上方撮影部
   をさらに備え、
   前記情報抽出部は、前記透光性パネルの上方からの撮影により生成される前記被写体の画像から、予め決められた情報の少なくとも一部を抽出する
   請求項１に記載の入力支援装置。
6. 前記情報抽出部は、前記被写体の画像から抽出した情報を揮発性記録媒体に書き込む
   請求項１に記載の入力支援装置。
7. 透光性のタッチパネル上に配置される被写体を該タッチパネルの下方から撮影するステップと、
   撮影により生成される前記被写体の画像から、予め決められた情報を表す文字の少なくとも一部をＯＣＲ処理により抽出するステップと、
   前記タッチパネルで受け付けた操作に基づいて、前記抽出した情報を修正するステップと、
   前記ＯＣＲ処理の精度と、該ＯＣＲ処理により抽出された文字の修正情報とを関連づけて記録するステップと
   を含む入力支援方法。
8. 透光性のタッチパネル上に配置される被写体を該タッチパネルの下方から撮影するステップと、
   撮影により生成される前記被写体の画像から、予め決められた情報を表す文字の少なくとも一部をＯＣＲ処理により抽出するステップと、
   前記タッチパネルで受け付けた操作に基づいて、前記抽出した情報を修正するステップと、
   前記ＯＣＲ処理の精度と、該ＯＣＲ処理により抽出された文字の修正情報とを関連づけて記録するステップと
   を情報処理装置に実行させるコンピュータプログラム。

Images