JP5378281B2 - 文書処理方法および文書処理システム - Google Patents

Description

この発明は、文書処理方法および文書処理システムに関する。

従来、コミュニケーションを開始するトリガーに対して自動で応答する技術が知られている。かかる技術の一例としては、電子メールを受信した場合、受信した電子メールの送信者に対して自動的に返信する技術がある（例えば、非特許文献１参照）。

"メッセージに自動返信する"、［online］、［平成２２年３月２３日検索］、インターネット＜http://office.microsoft.com/ja-jp/outlook/HA102487481041.aspx＞

ところで、上記した従来の技術は、送信した電子メールが受信先に受信されたことを送信者が確認する技術に過ぎず、電子メールの受信者が当該電子メールを読んだか否かを送信者が確認するものではない。

また、上記した従来の技術は、電子メールに限定したものであり、例えば、葉書などのように紙媒体を発送した場合に適用することができない。

すなわち、上記した従来の技術は、紙媒体の文書の受領者が当該紙媒体の文書を読んだか否かを、発送者が確認することができないという課題があった。

そこで、この発明は、上述した従来技術の課題を解決するためになされたものであり、紙媒体の文書の受領者が当該紙媒体の文書を読んだか否かを、発送者に確認させることが可能となる文書処理方法および文書処理システムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、この方法は、文書の処理を行う文書処理装置と、前記文書の発送者が利用する発送者装置とを含む文書処理システムの文書処理方法であって、前記文書処理装置が、前記文書を撮影した画像を生成する撮影ステップと、前記撮影ステップにより生成された前記画像を所定の表示部に表示させるように制御する表示制御ステップと、前記撮影ステップにより生成された前記画像を複数の領域に分割する分割ステップと、前記表示制御ステップの制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して光送信装置から送信された光を検知する検知ステップと、前記検知ステップが検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割ステップにより分割された前記複数の領域から特定する特定ステップと、前記特定ステップにより特定された領域を拡大した拡大画像を生成する拡大画像生成ステップと、前記拡大画像生成ステップにより生成された前記拡大画像を前記画像とは別に前記所定の表示部にてさらに表示するように制御する第二の表示制御ステップと、前記第二の表示制御ステップの制御により前記拡大画像が前記所定の表示部に表示されたことを契機として、前記文書の利用者が前記画像を参照した旨を前記発送者装置に通知する通知ステップと、を含んだことを要件とする。

また、このシステムは、文書の処理を行なう文書処理装置と、前記文書の発送者が利用する発送者装置とを含む文書処理システムであって、前記文書処理装置は、利用者が配置した文書を撮影した画像を生成する撮影手段と、前記撮影手段により生成された前記画像を所定の表示部に表示させるように制御する表示制御手段と、前記撮影手段により生成された前記画像を複数の領域に分割する分割手段と、前記表示制御手段の制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して光送信装置から送信された光を検知する検知手段と、前記検知手段が検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割手段により分割された前記複数の領域から特定する特定手段と、前記特定手段により特定された領域を拡大した拡大画像を生成する拡大画像生成手段と、前記拡大画像生成手段により生成された前記拡大画像を前記画像とは別に前記所定の表示部にてさらに表示するように制御する第二の表示制御手段と、前記第二の表示制御手段の制御により前記拡大画像が前記所定の表示部に表示されたことを契機として、前記文書の利用者が前記画像を参照した旨を前記発送者装置に通知する通知手段と、を備えたことを要件とする。

開示の方法およびシステムによれば、紙媒体の文書の受領者が当該紙媒体の文書を読んだか否かを、発送者に確認させることが可能となる。

図１は、実施例１に係る文書処理システムの構成を説明するための図である。 図２は、実施例１に係るリモコンの外観例を説明するための図である。 図３は、実施例１に係る文書処理装置の外観例を説明するための図である。 図４は、実施例１に係る文書処理装置の構成を説明するための図である。 図５は、通知先情報記憶部を説明するための図である。 図６は、分割部を説明するための図である。 図７は、実施例１に係る文字列認識部を説明するための図である。 図８は、表示制御部により表示される撮影画像の一例を説明するための図である。 図９は、受領者から照射される可視光の一例を説明するための図である。 図１０は、特定部を説明するための図である。 図１１は、表示制御部により表示される拡大画像の一例を説明するための図である。 図１２は、実施例１に係る通信部を説明するための図である。 図１３は、実施例１に係る文書処理装置の処理を説明するためのフローチャートである。 図１４は、実施例２に係る文字列認識部を説明するための図である。 図１５は、実施例２に係る通知部を説明するための図（１）である。 図１６は、実施例２に係る通知部を説明するための図（２）である。 図１７は、実施例２に係る文書処理装置の処理を説明するためのフローチャートである。 図１８は、実施例３に係る通知部を説明するための図である。 図１９は、実施例３に係る文書処理装置の処理を説明するためのフローチャートである。

以下に添付図面を参照して、この発明に係る文書処理方法および文書処理システムの実施例を詳細に説明する。なお、以下では、本発明に係る文書処理方法を実行する文書処理システムを実施例として説明する。

まず、図１を用いて、実施例１に係る文書処理システムの構成について説明する。図１は、実施例１に係る文書処理システムの構成を説明するための図である。

実施例１に係る文書処理システムは、図１に示すように、発送者が発送した紙媒体の文書（例えば、葉書など）に対して処理を行なう文書処理装置１０と、可視光を送信するリモコン２０とを含む。ここで、図１に示す文書処理装置１０およびリモコン２０は、紙媒体の文書を受領した受領者が操作する装置である。

また、文書処理装置１０は、ネットワーク３０を介して発送者装置４０と接続されている。ここで、発送者装置４０は、発送者が利用している装置であり、具体的には、図１に示すように、発送者が所有するＰＣ（Personal Computer）や、携帯電話、ＦＡＸ機能付き電話などである。

図２は、実施例１に係るリモコンの外観例を説明するための図である。図２に示すように、リモコン２０は、照射口２２から可視光を照射するための可視光スイッチ２１を有する。リモコン２０は、可視光スイッチ２１が受領者により押下された場合、照射口２２から可視光を照射させる。また、リモコン２０は、文書処理装置１０にて表示される画像に関する処理を指示するための各種ボタンを有する。具体的には、リモコン２０は、拡大ボタン２３（図中に示す「拡大」）、縮小ボタン２４（図中に示す「縮小」）および消去ボタン２５（図中に示す「消去」）を有する。なお、拡大ボタン２３、縮小ボタン２４および消去ボタン２５については、後に詳述する。

図３は、実施例１に係る文書処理装置の外観例を説明するための図である。図３に示すように、文書処理装置１０は、スキャナー１１と、表示部１２と、信号受信部１３と、スピーカ１４と、入力部１５と、通信部１６とを有する。

スキャナー１１は、受領者が配置した紙媒体の文書を撮影した撮影画像を生成するために用いられ、文書を読込んで、読込んだ文書をデジタルデータに変換する。

表示部１２は、光センサが内蔵された光センサ内臓ディスプレイである。具体的には、表示部１２は、ディスプレイ機能により、スキャナー１１が変換したデジタルデータから生成された撮影画像を表示する。また、表示部１２は、内蔵された光センサにより、リモコン２０から照射された可視光を検知する。

信号受信部１３は、拡大ボタン２３、縮小ボタン２４および消去ボタン２５から送信された各種画像処理指示を受信する。

スピーカ１４は、音声出力に用いられ、例えば、図３に示すように、文書処理装置１０の前面において２箇所設置される。

入力部１５は、受領者が文書処理装置１０の電源ＯＮ／ＯＦＦや、スキャナー１１によるスキャン開始、処理終了などを行なうための各種ボタン群を有する。また、入力部１５は、後述する発送者情報を受領者が入力するためのキーボードなども有する。

通信部１６は、ネットワーク３０を介して、発送者装置４０に対して各種情報を送信する。なお、通信部１６から発送者装置４０に対して送信される各種情報については、後に詳述する。

そして、かかる外観を有する文書処理装置１０およびリモコン２０は、発送者装置４０と協働することで、紙媒体の文書の受領者が当該紙媒体の文書を読んだか否かを、発送者に確認させることが可能となるように構成されている。以下、文書処理装置１０が有する機能について図４などを用いて詳細に説明する。

図４は、本実施例に係る文書処理装置の構成を説明するための図である。図４に示すように、実施例１に係る文書処理装置１０は、上述したスキャナー１１、表示部１２、信号受信部１３、スピーカ１４、入力部１５および通信部１６とともに、記憶部１７と制御部１８とを有する。

記憶部１７は、制御部１８の処理に用いられる情報や、制御部１８による各種処理結果を記憶し、図４に示すように、特に本実施例に関連するものとして、通知先情報記憶部１７ａ、画像記憶部１７ｂおよび分割認識結果記憶部１７ｃを有する。

通知先情報記憶部１７ａは、氏名と通知先とが対応付けられた通知先情報を記憶する。具体的には、受領者は、自身宛に文書を発送することが想定される発送者の氏名および当該発送者の通知先を通知先情報として予め入力部１５を介して入力し、入力部１５は、受領者が入力した通知先情報を通知先情報記憶部１７ａに格納する。図５は、通知先情報記憶部を説明するための図である。

これにより、通知先情報記憶部１７ａは、例えば、図５に示すように、受領者の長男である「氏名：Ａ山Ｂ男」と、「Ａ山Ｂ男」が所有するＰＣ宛のメールアドレスである「通知先：ｘｘｘ＠ｙｙｙ．ｃｏｍ」とを対応付けた通知先情報を記憶する。同様に、通知先情報記憶部１７ａは、図５に示すように、受領者の長女である「氏名：Ｃ原Ｄ子」と、「Ｃ原Ｄ子」が所有する携帯電話の電話番号である「通知先：０９０−ｚｚｚｚ−ｗｗｗｗ」とを対応付けた通知先情報を記憶する。また、通知先情報記憶部１７ａは、図５に示すように、受領者の次男である「氏名：Ａ山Ｅ男」と、「Ａ山Ｅ男」が所有するＦＡＸ機能付き電話の電話番号である「通知先：０２９−ｃｃｃ−ｄｄｄｄ」とを対応付けた通知先情報を記憶する。

図４に戻って、画像記憶部１７ｂは、後述する画像生成部１８ａによる処理結果を記憶し、分割認識結果記憶部１７ｃは、後述する分割部１８ｂおよび後述する文字列認識部１８ｃによる処理結果を記憶するが、これらについては、後に詳述する。

制御部１８は、スキャナー１１、表示部１２および信号受信部１３から転送された各種情報に基づいて各種処理を実行し、特に本実施例に関連するものとして、画像生成部１８ａと、分割部１８ｂと、文字列認識部１８ｃと、表示制御部１８ｄと、特定部１８ｅと、指示判定部１８ｆと、通知部１８ｇとを有する。

画像生成部１８ａは、スキャナー１１から転送されたデジタルデータから文書を撮影した画像（撮影画像）を生成し、生成した撮影画像を画像記憶部１７ｂに格納する。なお、画像生成部１８ａは、撮影画像の一部を拡大した拡大画像も生成するが、これについては、後に説明する。

分割部１８ｂは、画像生成部１８ａにより生成された撮影画像を画像記憶部１７ｂから読み出し、読み出した撮影画像を複数の領域に分割する。ここで、葉書などの文書は、一般的に、写真や、本文、発送者の情報（住所、氏名、電話番号など）などのように、内容に応じて複数の領域に分けることができる。また、文書は、文書の背景色により占められる領域と、当該背景色と異なる色調により占められる領域とに分割することができる。すなわち、文書の背景色により囲まれる領域を特定することで、文書は、当該文書に記載されている内容に応じて、複数の領域に分割することができる。

そこで、分割部１８ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、撮影画像に描出されている内容に応じて当該撮影画像を複数の領域に分割する。図６は、分割部を説明するための図である。

例えば、撮影画像の生成元である文書が、図６の（Ａ）に示すように、「写真」の領域と、「本文１」の領域と、「本文２」の領域と、「発送者情報」の領域との４つの領域により構成されているとする。

かかる場合、分割部１８ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、図６の（Ｂ）に示すように、「写真」の領域に対応する「領域Ａ」と、「本文１」の領域に対応する「領域Ｂ」と、「本文２」の領域に対応する「領域Ｃ」と、「発送者情報」の領域に対応する「領域Ｄ」とに撮影画像を分割する。

そして、分割部１８ｂは、図６の（Ｂ）に示すように、撮影画像における領域Ａの位置情報を「位置情報Ａ」として分割認識結果記憶部１７ｃに格納する。同様に、分割部１８ｂは、図６の（Ｂ）に示すように、撮影画像における領域Ｂの位置情報である「位置情報Ｂ」と、撮影画像における領域Ｃの位置情報である「位置情報Ｃ」と、撮影画像における領域Ｄの位置情報である「位置情報Ｄ」とをそれぞれ分割認識結果記憶部１７ｃに格納する。

図４に戻って、文字列認識部１８ｃは、画像生成部１８ａにより生成された撮影画像を画像記憶部１７ｂから読み出し、読み出した撮影画像に含まれる文字列を認識する。図７は、実施例１に係る文字列認識部を説明するための図である。

例えば、文字列認識部１８ｃは、図７に示すように、「本文１」に含まれる文字列「お元気ですか？先日、ＸＸ高原に行きました。」を認識する。また、文字列認識部１８ｃは、図７に示すように、「発送者情報」に含まれる文字列「Ａ山Ｂ男」を認識する。そして、文字列認識部１８ｃは、認識した文字列を分割認識結果記憶部１７ｃに格納する。例えば、文字列認識部１８ｃは、認識した文字列の撮影画像における位置情報に基づいて、文字列「お元気ですか？先日、ＸＸ高原に行きました。」を領域Ｂ（本文１）に対応付けて分割認識結果記憶部１７ｃに格納する。また、文字列認識部１８ｃは、認識した文字列の撮影画像における位置情報に基づいて、文字列「Ａ山Ｂ男」を領域Ｄ（発送者情報）に対応付けて分割認識結果記憶部１７ｃに格納する。

図４に戻って、表示制御部１８ｄは、画像生成部１８ａにより生成された撮影画像を画像記憶部１７ｂから読み出し、読み出した撮影画像を表示部１２に表示させるように制御する。図８は、表示制御部により表示される撮影画像の一例を説明するための図である。例えば、表示制御部１８ｄは、図８に示すように、図６の（Ａ）を用いて説明した文書から生成された撮影画像を、表示部１２の中心に表示させる。

そして、図４に示す通知部１８ｇは、表示制御部１８ｄの制御により表示部１２に撮影画像が表示されたことを契機として、受領者が撮影画像を参照した旨を発送者装置４０に通知する。具体的には、通知部１８ｇは、撮影画像を参照した受領者が拡大画像の表示処理を行なった場合、通知処理を行なう。以下、実施例１において実行される拡大画像の表示処理について詳細に説明する。

表示制御部１８ｄの制御により撮影画像が表示された状態で、受領者は、撮影画像にて自身が拡大表示したい領域に向けてリモコン２０から可視光を照射する。そして、表示部１２の光センサは、リモコンから照射された可視光を検知し、検知した可視光の表示部１２における位置を特定する。図９は、受領者から照射される可視光の一例を説明するための図である。

例えば、図９に示すように、受領者は、表示部１２に表示された撮影画像の中で本文１に向けてリモコン２０から可視光を照射させる。そして、表示部１２の光センサは、リモコン２０から照射された可視光を検知し、検知した可視光の表示部１２における位置を特定する。

図４に示す特定部１８ｅは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１８ｂにより分割された複数の領域から特定する。具体的には、特定部１８ｅは、光センサが特定した表示部１２における可視光の位置と、撮影画像の表示部１２における表示位置とから、可視光の位置が撮影画像においてどの位置に対応するかを特定する。そして、特定部１８ｅは、分割認識結果記憶部１７ｂに格納された各領域の位置情報を参照して、可視光が照射された位置に対応する領域を特定する。図１０は、特定部を説明するための図である。例えば、特定部１８ｅは、図１０に示すように、表示部１２の光センサが特定した可視光の表示部１２における位置が「位置情報Ｂ」内に対応する位置にあると判定して、可視光の照射位置が分割部１８ｂにより撮影画像から分割された「領域Ｂ」に対応すると特定する。

図４に戻って、画像生成部１８ａは、特定部１８ｅにより特定された領域を拡大した拡大画像を生成し、生成した拡大画像を画像記憶部１７ｂに格納する。そして、表示制御部１８ｄは、画像生成部１８ａにより生成された拡大画像を画像記憶部１７ｂから読み出し、読み出した拡大画像を表示部１２に表示するように制御する。図１１は、表示制御部により表示される拡大画像の一例を説明するための図である。

例えば、画像生成部１８ａは、特定部１８ｅが特定した領域Ｂを拡大した拡大画像を生成し、表示制御部１８ｄは、図１１に示すように、領域Ｂの拡大画像を表示部１２に表示させる。これにより、表示部１２には、図１１に示すように、文書の本文１が拡大表示される。

ここで、表示制御部１８ｄは、撮影画像が表示部１２にて表示された状態で、当該撮影画像の前面に拡大画像を表示する。例えば、表示制御部１８ｄは、図１１に示すように、本文１の拡大画像が文書全体を撮影した撮影画像の前面に表示されるように制御する。

そして、図４に示す通知部１８ｇは、拡大画像が表示された場合、受領者が撮影画像を参照した旨を発送者装置４０に通知する。

具体的には、通知部１８ｇは、文字列認識部１８ｃにより認識された文字列から特定される発送者の通知先に対して受領者が撮影画像を参照した旨を通知する。より具体的には、通知部１８ｇは、文字列認識部１８ｃにより認識された文字列から特定された氏名に対応付けられた通知先を通知先情報記憶部１７ａに格納された通知先情報から特定し、当該特定した通知先に対して、受領者が撮影画像を参照した旨を発送者装置４０に通知する。

具体的には、通知部１８ｇは、受領者が撮影画像を参照した日時を通知する。また、通知部１８ｇは、受領者が撮影画像を参照した日時とともに、拡大画像を参照した日時を通知してもよい。また、通知部１８ｇは、受領者が参照した撮影画像の元となる紙媒体の文書の内容を発送者に認識させるための情報として、受領者が参照した画像において文字列認識部１８ｃにより認識された文字列を通知する。あるいは、通知部１８ｇは、受領者が参照した撮影画像の元となる紙媒体の文書の内容を発送者に認識させるための情報として、受領者が参照した画像データを通知する。

例えば、通知部１８ｇは、文字列認識部１８ｃが認識した文字列のうち「氏名」に該当する「Ａ山Ｂ男」を分割認識結果記憶部１７ｃから特定する。そして、通知部１８ｇは、図５に示す通知先情報を参照して、「Ａ山Ｂ男」の通知先がメールアドレスである「ｘｘｘ＠ｙｙｙ．ｃｏｍ」と特定する。かかる場合、通知部１８ｇは、上述した通知内容を含む電子メールを作成して、作成した電子メールを「Ａ山Ｂ男」の発送者装置４０に通信部１６およびネットワーク３０を介して送信する。図１２は、実施例１に係る通信部を説明するための図である。

例えば、通知部１８ｇは、図１２の（Ａ）に示すように、宛先が「ｘｘｘ＠ｙｙｙ．ｃｏｍ」であり、本文に撮影画像の参照日時である「２０１０年３月１５日１５時１０分」が記載された電子メールを作成する。さらに、通知部１８ｇは、図１２の（Ａ）に示すように、受領者が最初に拡大画像の参照を行なった箇所に含まれる領域の文字列の一部（お元気ですか？先日、ＸＸ高原に行きました。）が拡大参照箇所として記載された電子メールを作成する。さらに、通知部１８ｇは、図１２の（Ａ）に示すように、受領者が最初に拡大画像の参照を行なった日時である「２０１０年３月１５日１５時１２分」が記載された電子メールを作成する。なお、通知部１８ｇは、受領者が最初に拡大画像の参照を行なった箇所に含まれる領域の文字列すべてが拡大参照箇所として記載された電子メールを作成してもよい。

あるいは、通知部１８ｇは、図１２の（Ｂ）に示すように、宛先が「ｘｘｘ＠ｙｙｙ．ｃｏｍ」であり、撮影画像の参照日時である「２０１０年３月１５日１５時１０分」と受領者が最初に拡大画像の参照を行なった日時である「２０１０年３月１５日１５時１２分」とが本文に記載された電子メールを作成する。そして、通知部１８ｇは、図１２の（Ｂ）に示すように、領域Ｂのすべての画像データ、または領域Ｂの一部の画像データである「領域Ｂ画像．ｊｐｇ」が添付された電子メールを作成する。

そして、通知部１８ｇは、作成した電子メールを通信部１６に転送し、通信部１６は、通知部１８ｇから転送された電子メールを、ネットワーク３０を介して発送者装置４０に送信する。

なお、通知部１８ｇは、文字列認識部１８ｃにより認識された文字列にメールアドレスや電話番号などの通知先が含まれている場合、当該通知先に通知を行なってもよい。例えば、通知部１８ｇは、文字列認識部１８ｃにより認識された氏名を含む通知先情報がない場合、再度、文字列認識部１８ｃにより認識された文字列に通知先を示す文字列（例えば、「＠」を含む文字列や電話番号に相当する文字列など）があるか否かを判定し、通知先を示す文字列があるならば、当該文字列により特定される通知先に対して、受領者が撮影画像を参照した旨を発送者装置４０に通知する。

また、通知部１８ｇは、特定した通知先がＦＡＸ機能付き電話の電話番号であった場合、図１２の（Ａ）に示す内容を通信部１６およびネットワーク３０を介して、当該電話番号宛にＦＡＸ送信してもよい。あるいは、通知部１８ｇは、特定した通知先がＦＡＸ機能なしの電話番号であった場合、図１２の（Ａ）に示す内容の音声データを合成し、合成した音声データを通信部１６およびネットワーク３０を介して、当該電話番号宛に伝送してもよい。あるいは、通知部１８ｇは、文書処理装置１０に割り当てられた電話番号を発信者電話番号として通知先の電話番号宛にコールを行なうことで、受領者が拡大画像を参照した旨を通知する場合であってもよい。

なお、上記では、通知部１８ｇの通知処理が、拡大画像が最初に表示された時点で実行される場合について説明した。しかし、本実施例は、通知部１８ｇの通知処理が、撮影画像が表示された時点で実行される場合であってもよい。かかる場合、通知部１８ｇは、撮影画像の参照日時や、撮影画像において認識された文字列の一部（文書のタイトルなど）または全部を発送者装置４０に通知する。

ここで、表示制御部１８ｄの制御により撮影画像の前面に拡大画像が表示された状態で、受領者は、リモコン２０が有する各種ボタンを操作することで、拡大画像に対する画像処理指示を送信することができる。

例えば、受領者は、拡大画像をさらに拡大したい場合、拡大ボタン２３を押下する。また、受領者は、拡大画像を縮小したい場合、縮小ボタン２４を押下する。また、受領者は、拡大画像を消去して撮影画像を再度参照したい場合や、拡大画像を消去して撮影画像における他の領域を拡大参照したい場合、消去ボタン２５を押下する。

受領者が拡大ボタン２３を押下することで、リモコン２０は、表示されている拡大画像を所定の倍率で拡大する指示を送信する。例えば、受領者は、表示される拡大画像が所望の大きさまで拡大されるまで、拡大ボタン２３を連続して押下する。また、受領者が縮小ボタン２４を押下することで、リモコン２０は、表示されている拡大画像を所定の倍率で縮小する指示を送信する。例えば、受領者は、表示される拡大画像が所望の大きさまで縮小されるまで、縮小ボタン２４を連続して押下する。

かかる操作によりリモコン２０から送信された画像処理指示の信号は、図３および４に示す信号受信部１３により受信され、信号受信部１３は、受信した画像処理指示の信号を、図４に示す指示判定部１８ｆに転送する。

指示判定部１８ｆは、信号受信部１３から転送された画像処理指示の信号に含まれる指示内容を判定し、判定結果を画像生成部１８ａおよび表示制御部１８ｄに転送する。

例えば、判定結果が拡大画像の拡大処理であった場合、指示判定部１８ｆは、拡大率を画像生成部１８ａに転送し、画像生成部１８ａは、転送された拡大率に基づいて拡大画像をさらに拡大した拡大画像を生成し、生成した拡大画像を新規に画像記憶部１７ｂに格納する。そして、表示制御部１８ｄは、画像記憶部１７ｂに新規に格納された拡大画像を読み出して表示部１２に表示させる。

また、判定結果が拡大画像の縮小処理であった場合、指示判定部１８ｆは、縮小率を画像生成部１８ａに転送し、画像生成部１８ａは、転送された縮小率に基づいて拡大画像を縮小した縮小画像を生成し、生成した縮小画像を新規に画像記憶部１７ｂに格納する。そして、表示制御部１８ｄは、画像記憶部１７ｂに新規に格納された縮小画像を読み出して表示部１２に表示させる。

また、判定結果が拡大画像の消去処理であった場合、指示判定部１８ｆは、拡大画像の非表示指示を表示制御部１８ｄに転送し、表示制御部１８ｄは、表示されている拡大画像を非表示とする。そして、受領者は、リモコン２０を操作することで、例えば、撮影画像の写真などを拡大表示させる。

上述した文書処理は、入力部１５が有する処理終了ボタンが受領者により押下されることで終了する。

続いて、図１３を用いて実施例１に係る文書処理装置１０の処理の手順について説明する。図１３は、実施例１に係る文書処理装置の処理を説明するためのフローチャートである。なお、図１３では、受領者が紙媒体の文書をスキャナー１１に配置した以降の処理について説明する。

図１３に示すように、本実施例１における文書処理装置１０は、受領者から入力部１５を介してスキャン開始要求を受け付けたか否かを判定する（ステップＳ１０１）。スキャン開始要求を受け付けない場合（ステップＳ１０１否定）、文書処理装置１０は、待機状態となる。一方、スキャン開始要求を受け付けた場合（ステップＳ１０１肯定）、スキャナー１１は、文書の読み込み処理を行なって、当該文書をデジタルデータに変換し、画像生成部１８ａは、スキャナー１１から転送されたデジタルデータから撮影画像を生成する（ステップＳ１０２）。

そして、分割部１８ｂは、画像生成部１８ａにより生成された撮影画像を複数の領域に分割する（ステップＳ１０３）。具体的には、分割部１８ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、撮影画像に描出されている内容に応じて当該撮影画像を複数の領域に分割する。

続いて、文字列認識部１８ｃは、画像生成部１８ａにより生成された撮影画像に含まれる文字列を認識し（ステップＳ１０４）、通知部１８ｇは、文字列認識部１８ｃにより認識された文字列から通知先を特定する（ステップＳ１０５）。具体的には、通知部１８ｇは、文字列認識部１８ｃにより認識された文字列から特定された氏名に対応付けられた通知先を通知先情報記憶部１７ａに格納された通知先情報から特定する。

その後、表示制御部１８ｄは、画像生成部１８ａにより生成された撮影画像を表示部１２に表示させるように制御し（ステップＳ１０６）、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する（ステップＳ１０７）。

ここで、可視光を検知した場合（ステップＳ１０７肯定）、表示部１２の光センサは、検知した可視光の表示部１２における位置を特定する。そして、特定部１８ｅは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１８ｂにより分割された複数の領域から特定する（ステップＳ１０８）。

続いて、画像生成部１８ａは、特定部１８ｅにより特定された領域を拡大した拡大画像を生成し（ステップＳ１０９）、表示制御部１８ｄは、画像生成部１８ａにより生成された拡大画像を表示部１２に表示するように制御する（ステップＳ１１０）。具体的には、画像生成部１８ａは、撮影画像の前面に拡大画像を表示させる。

そして、通知部１８ｇは、ステップＳ１０５において特定した発送者の通知先に、拡大画像を受領者が参照した旨を通知する（ステップＳ１１１）。なお、ステップＳ１０５の通知先特定処理は、ステップＳ１１０の後に実行される場合でもよい。

ステップＳ１１１の処理の後、または、表示部１２の光センサが可視光を検知しなかった場合（ステップＳ１０７否定）、信号受信部１３は、リモコン２０から画像処理指示を受信したか否かを判定する（ステップＳ１１２）。ここで、リモコン２０から画像処理指示を受信した場合（ステップＳ１１２肯定）、信号受信部１３は、受信した画像処理指示を指示判定部１８ｆに転送し、指示判定部１８ｆは、信号受信部１３から転送された画像処理指示の内容を判定する（ステップＳ１１３）。すなわち、指示判定部１８ｆは、画像処理指示の内容が、拡大画像の拡大処理であるか、拡大画像の縮小処理であるか、拡大画像の消去処理であるかを判定する。

そして、指示判定部１８ｆは、判定結果を画像生成部１８ａおよび表示制御部１８ｄに転送し、画像生成部１８ａおよび表示制御部１８ｄは、判定結果に沿った処理を実行する（ステップＳ１１４）。

ステップＳ１１４の処理の後、または、信号受信部１３が画像処理指示を受信しなかった場合（ステップＳ１１２否定）、文書処理装置１０は、処理終了要求を受け付けたか否かを判定する（ステップＳ１１５）。

ここで、処理終了要求を受け付けなかった場合（ステップＳ１１５否定）、ステップＳ１０７に戻って、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する。

一方、処理終了要求を受け付けた場合（ステップＳ１１５肯定）、文書処理装置１０は、処理を終了する。

上述してきたように、実施例１では、スキャナー１１は、受領者が配置した紙媒体の文書をデジタルデータに変換し、画像生成部１８ａは、スキャナー１１から転送されたデジタルデータから文書を撮影した撮影画像を生成し、表示制御部１８ｄは、画像生成部１８ａにより生成された撮影画像を表示部１２に表示させるように制御する。そして、通知部１８ｇは、表示制御部１８ｄの制御により表示部１２に撮影画像が表示されたことを契機として、受領者が撮影画像を参照した旨を発送者装置４０に通知する。

具体的には、通知部１８ｇは、撮影画像を参照した受領者が拡大画像の表示処理を行なった場合、通知処理を行なう。すなわち、撮影画像が生成された時点で、分割部１８ｂは、画像生成部１８ａにより生成された撮影画像を複数の領域に分割する。表示部１２の光センサは、撮影画像が表示された状態でリモコン２０から照射された可視光の表示部１２における位置を特定する。そして、特定部１８ｅは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１８ｂにより分割された複数の領域から特定する。そして、画像生成部１８ａは、特定部１８ｅにより特定された領域を拡大した拡大画像を生成し、生成した拡大画像を画像記憶部１７ｂに格納する。そして、表示制御部１８ｄは、画像生成部１８ａにより生成された拡大画像を画像記憶部１７ｂから読み出し、読み出した拡大画像を表示部１２に表示するように制御する。そして、拡大画像が表示された時点で、通知部１８ｇは、通知処理を行なう。

したがって、実施例１によれば、受領者が撮影画像を参照し、かつ、撮影画像において所望の領域を拡大した拡大画像を最初に参照した時点で、発送者装置４０に対して受領者が紙媒体の文書を参照したことを通知することができる。その結果、実施例１によれば、紙媒体の文書の受領者が当該紙媒体の文書を読んだか否かを、発送者に確認させることが可能となる。

また、実施例１では、通知部１８ｇは、受領者が撮影画像や拡大画像を参照した日時を通知するので、受領者が何時、文書を読んだかを発送者に確認させることが可能となる。

また、実施例１では、通知先情報記憶部１７ａは、氏名と通知先とが対応付けられた通知先情報を記憶し、文字列認識部１８ｃは、撮影画像に含まれる文字列を認識する。そして、通知部１８ｇは、文字列認識部１８ｃにより認識された文字列から特定された氏名に対応付けられた通知先を通知先情報から特定し、当該特定した通知先に対して通知する。したがって、実施例１では、紙媒体の文書の受領者が当該紙媒体の文書を読んだか否かを、確実に発送者に確認させることが可能となる。

また、実施例１では、通知部１８ｇは、受領者が参照した画像のデータ、または、当該画像から文字列認識部１８ｃにより認識された文字列をさらに通知するので、文書のどの部分を受領者が参照したのかを発送者に確認させることが可能となる。

上述した実施例１では、拡大画像が最初に表示された時点で通知処理が行なわれる場合について説明した。実施例２では、受領者が拡大表示した領域に重要語が含まれる時点で通知処理が行なわれる場合について、図１４〜１６を用いて説明する。なお、図１４は、実施例２に係る文字列認識部を説明するための図であり、図１５および１６は、実施例２に係る通知部を説明するための図である。

実施例２に係る文書処理システムは、図１を用いて説明した文書処理システムと同様に、文書処理装置１０とリモコン２０とを含み、実施例２に係る文書処理装置１０は、図４を用いて説明した実施例１に係る文書処理装置１０と同様の構成からなる。しかし、実施例２においては、文字列認識部１８ｃおよび通知部１８ｇの処理内容が実施例１と異なる。以下、これらを中心に、実施例２に係る文書処理装置１０について説明する。

実施例２に係る文字列認識部１８ｃは、撮影画像に含まれる文字列の中で重要となる重要語をさらに抽出する。

具体的には、実施例２に係る文字列認識部１８ｃは、撮影画像において認識した文字列の中で、発送者が受領者に対して何らかしらの要望を行なっていると想定される文字列を抽出する。例えば、文字列認識部１８ｃは、図１４に示すように、「本文１」に含まれる文字列「お元気ですか？先日、ＸＸ高原に行きました。」および「発送者情報」に含まれる文字列「Ａ山Ｂ男」を認識する。また、文字列認識部１８ｃは、図１４に示すように、「本文２」に含まれる文字列「必ず連絡下さいね。」を認識する。そして、文字列認識部１８ｃは、発送者が受領者に対して連絡を要望している文字列である「必ず連絡下さいね。」を重要語として抽出する。そして、文字列認識部１８ｃは、領域Ｃ（本文２）に対応付けて文字列「必ず連絡下さいね。」を分割認識結果記憶部１７ｃに格納するとともに、領域Ｃに重要語が含まれている旨を示す情報をさらに分割認識結果記憶部１７ｃに格納する。

そして、実施例２に係る通知部１８ｇは、表示制御部１８ｄの制御により表示部１２に表示された拡大画像が重要語を含む領域から生成された画像である場合、通知処理を行なう。

例えば、表示制御部１８ｄの制御により表示部１２に表示された拡大画像が、図１５に示すように、本文２（領域Ｃ）の拡大画像である場合、通知部１８ｇは、領域Ｃに重要語が含まれている旨を示す情報が分割認識結果記憶部１７ｃに格納されていることから、通知処理を行なう。

具体的には、通知部１８ｇは、文字列認識部１８ｃが認識した文字列のうち「氏名」に該当する「Ａ山Ｂ男」を分割認識結果記憶部１７ｃから特定し、図５に示す通知先情報を参照して、「Ａ山Ｂ男」の通知先がメールアドレスである「ｘｘｘ＠ｙｙｙ．ｃｏｍ」と特定する。そして、通知部１８ｇは、例えば、図１６の（Ａ）に示すように、宛先が「ｘｘｘ＠ｙｙｙ．ｃｏｍ」であり、本文に撮影画像の参照日時である「２０１０年３月１５日１５時１０分」が記載された電子メールを作成する。さらに、通知部１８ｇは、図１６の（Ａ）に示すように、受領者が最初に拡大画像の参照を行なった箇所に含まれる領域の文字列の一部（お元気ですか？先日、ＸＸ高原に行きました。）が拡大参照箇所１として記載された電子メールを作成する。さらに、通知部１８ｇは、図１６の（Ａ）に示すように、拡大参照箇所１の参照日時である「２０１０年３月１５日１５時１２分」が記載された電子メールを作成する。

さらに、通知部１８ｇは、図１６の（Ａ）に示すように、例えば、受領者が２番目に拡大画像の参照を行なった箇所に含まれる領域の文字列の一部（必ず連絡下さいね。）が拡大参照箇所２として記載された電子メールを作成する。さらに、通知部１８ｇは、図１６の（Ａ）に示すように、拡大参照箇所２の参照日時である「２０１０年３月１５日１５時１４分」が記載された電子メールを作成する。なお、通知部１８ｇは、受領者が拡大画像の参照を行なった箇所に含まれる領域の文字列すべてが拡大参照箇所として記載された電子メールを作成してもよい。

あるいは、通知部１８ｇは、図１６の（Ｂ）に示すように、宛先が「ｘｘｘ＠ｙｙｙ．ｃｏｍ」であり、撮影画像の参照日時である「２０１０年３月１５日１５時１０分」と拡大参照箇所１の参照日時である「２０１０年３月１５日１５時１２分」と、拡大参照箇所２の参照日時である「２０１０年３月１５日１５時１４分」とが本文に記載された電子メールを作成する。そして、通知部１８ｇは、図１２の（Ｂ）に示すように、領域Ｂおよび領域Ｃのすべての画像データ、または領域Ｂおよび領域Ｃの一部の画像データである「領域Ｂ画像．ｊｐｇ」および「領域Ｃ画像．ｊｐｇ」が添付された電子メールを作成する。

そして、通知部１８ｇは、作成した電子メールを通信部１６に転送し、通信部１６は、通知部１８ｇから転送された電子メールを、ネットワーク３０を介して発送者装置４０に送信する。

なお、通知部１８ｇは、特定した通知先がＦＡＸ機能付き電話の電話番号であった場合、図１６の（Ａ）に示す内容を通信部１６およびネットワーク３０を介して、当該電話番号宛にＦＡＸ送信してもよい。あるいは、通知部１８ｇは、特定した通知先がＦＡＸ機能なしの電話番号であった場合、図１６の（Ａ）に示す内容の音声データを合成し、合成した音声データを通信部１６およびネットワーク３０を介して、当該電話番号宛に伝送してもよい。あるいは、通知部１８ｇは、文書処理装置１０に割り当てられた電話番号を発信者電話番号として通知先の電話番号宛にコールを行なうことで、受領者が拡大画像を参照した旨を通知する場合であってもよい。

続いて、図１７を用いて実施例２に係る文書処理装置１０の処理の手順について説明する。図１７は、実施例２に係る文書処理装置の処理を説明するためのフローチャートである。なお、図１７では、受領者が紙媒体の文書をスキャナー１１に配置した以降の処理について説明する。

図１７に示すように、本実施例２における文書処理装置１０は、受領者から入力部１５を介してスキャン開始要求を受け付けたか否かを判定する（ステップＳ２０１）。スキャン開始要求を受け付けない場合（ステップＳ２０１否定）、文書処理装置１０は、待機状態となる。一方、スキャン開始要求を受け付けた場合（ステップＳ２０１肯定）、スキャナー１１は、文書の読み込み処理を行なって、当該文書をデジタルデータに変換し、画像生成部１８ａは、スキャナー１１から転送されたデジタルデータから撮影画像を生成する（ステップＳ２０２）。

そして、分割部１８ｂは、画像生成部１８ａにより生成された撮影画像を複数の領域に分割する（ステップＳ２０３）。具体的には、分割部１８ｂは、撮影画像の背景色を特定し、特定した背景色により囲まれる領域を特定することで、撮影画像に描出されている内容に応じて当該撮影画像を複数の領域に分割する。

続いて、文字列認識部１８ｃは、画像生成部１８ａにより生成された撮影画像に含まれる文字列を認識し、さらに、認識した文字列から重要語を抽出する（ステップＳ２０４）。そして、通知部１８ｇは、文字列認識部１８ｃにより認識された文字列から通知先を特定する（ステップＳ２０５）。

その後、表示制御部１８ｄは、画像生成部１８ａにより生成された撮影画像を表示部１２に表示させるように制御し（ステップＳ２０６）、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する（ステップＳ２０７）。

ここで、可視光を検知した場合（ステップＳ２０７肯定）、表示部１２の光センサは、検知した可視光の表示部１２における位置を特定する。そして、特定部１８ｅは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１８ｂにより分割された複数の領域から特定する（ステップＳ２０８）。

続いて、画像生成部１８ａは、特定部１８ｅにより特定された領域を拡大した拡大画像を生成し（ステップＳ２０９）、表示制御部１８ｄは、画像生成部１８ａにより生成された拡大画像を表示部１２に表示するように制御する（ステップＳ２１０）。具体的には、画像生成部１８ａは、撮影画像の前面に拡大画像を表示させる。

そして、通知部１８ｇは、表示された拡大画像に重要語が含まれるか否かを判定する（ステップＳ２１１）。ここで、表示された拡大画像に重要語が含まれる場合（ステップＳ２１１肯定）、通知部１８ｇは、ステップＳ２０５において特定した発送者の通知先に、拡大画像を受領者が参照した旨を通知する（ステップＳ２１２）。なお、ステップＳ２０５の通知先特定処理は、ステップＳ２１１の判定処理が肯定であった場合の後に実行される場合でもよい。

ステップＳ２１２の処理の後、または、表示部１２の光センサが可視光を検知しなかった場合（ステップＳ２０７否定）、または、表示された拡大画像に重要語が含まれない場合（ステップＳ２１１否定）、信号受信部１３は、リモコン２０から画像処理指示を受信したか否かを判定する（ステップＳ２１３）。ここで、リモコン２０から画像処理指示を受信した場合（ステップＳ２１３肯定）、信号受信部１３は、受信した画像処理指示を指示判定部１８ｆに転送し、指示判定部１８ｆは、信号受信部１３から転送された画像処理指示の内容を判定する（ステップＳ２１４）。

そして、指示判定部１８ｆは、判定結果を画像生成部１８ａおよび表示制御部１８ｄに転送し、画像生成部１８ａおよび表示制御部１８ｄは、判定結果に沿った処理を実行する（ステップＳ２１５）。

ステップＳ２１５の処理の後、または、信号受信部１３が画像処理指示を受信しなかった場合（ステップＳ２１３否定）、文書処理装置１０は、処理終了要求を受け付けたか否かを判定する（ステップＳ２１６）。

ここで、処理終了要求を受け付けなかった場合（ステップＳ２１６否定）、ステップＳ２０７に戻って、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する。

一方、処理終了要求を受け付けた場合（ステップＳ２１６肯定）、文書処理装置１０は、処理を終了する。

上述してきたように、実施例２では、文字列認識部１８ｃは、画像生成部１８ａにより生成された撮影画像に含まれる文字列を認識し、さらに、認識した文字列から重要語を抽出する。そして、通知部１８ｇは、表示された拡大画像が重要語を含む領域から生成された画像である場合に通知処理を行なう。したがって、実施例２によれば、発送者が必ず読んで欲しいと要望する箇所を受領者が参照したことを、発送者に認識させることが可能となる。

実施例３では、受領者が文書処理装置１０を用いた処理を終了した時点で通知処理が行なわれる場合について、図１８を用いて説明する。なお、図１８は、実施例３に係る通知部を説明するための図である。

実施例３に係る文書処理システムは、図１を用いて説明した文書処理システムと同様に、文書処理装置１０とリモコン２０とを含み、実施例３に係る文書処理装置１０は、図４を用いて説明した実施例１に係る文書処理装置１０と同様の構成からなる。しかし、実施例２においては、通知部１８ｇの処理内容が実施例１と異なる。以下、これを中心に、実施例３に係る文書処理装置１０について説明する。

実施例３に係る通知部１８ｇは、表示制御部１８ｄの制御により表示部１２に表示された画像の参照を受領者が終了した時点、すなわち、入力部１５が有する処理終了ボタンが受領者により押下された時点で通知処理を行なう。そして、実施例３に係る通知部１８ｇは、利用者が行なった操作内容の履歴をさらに通知する。

すなわち、通知部１８ｇは、実施例１および２と同様に、文字列認識部１８ｃが認識した文字列のうち「氏名」に該当する「Ａ山Ｂ男」を分割認識結果記憶部１７ｃから特定し、図５に示す通知先情報を参照して、「Ａ山Ｂ男」の通知先がメールアドレスである「ｘｘｘ＠ｙｙｙ．ｃｏｍ」と特定する。そして、通知部１８ｇは、例えば、図１８の（Ａ）に示すように、宛先が「ｘｘｘ＠ｙｙｙ．ｃｏｍ」であり、本文に撮影画像の参照日時である「２０１０年３月１５日１５時１０分」が記載された電子メールを作成する。さらに、通知部１８ｇは、図１８の（Ａ）に示すように、拡大参照箇所１である領域Ｂの文字列の一部（お元気ですか？先日、ＸＸ高原に行きました。）および参照日時「２０１０年３月１５日１５時１２分」が記載された電子メールを作成する。

さらに、通知部１８ｇは、図１８の（Ａ）に示すように、拡大参照箇所２である領域Ｃの文字列の一部（必ず連絡下さいね。）および参照日時「２０１０年３月１５日１５時１４分」が記載された電子メールを作成する。さらに、通知部１８ｇは、図１８の（Ａ）に示すように、拡大参照箇所３である領域Ｄの文字列の一部（Ａ山Ｂ男）および参照日時「２０１０年３月１５日１５時１５分」が記載された電子メールを作成する。さらに、通知部１８ｇは、図１８の（Ａ）に示すように、拡大参照箇所４である領域Ａ（写真）にて認識された文字列の一部（ＸＸ高原）および参照日時「２０１０年３月１５日１５時１７分」が記載された電子メールを作成する。

なお、通知部１８ｇは、受領者が拡大画像の参照を行なった箇所に含まれる領域の文字列すべてが拡大参照箇所として記載された電子メールを作成してもよい。また、通知部１８ｇは、拡大参照された拡大画像にて文字列が含まれなかった場合、当該画像の内容を示す文字列を拡大参照箇所として記載してもよい。例えば、領域Ａの写真に文字列が含まれていない場合、通知部１８ｇは、拡大参照箇所４である領域Ａの内容を示す「写真」が記載された電子メールを作成する。

あるいは、通知部１８ｇは、図１８の（Ｂ）に示すように、宛先が「ｘｘｘ＠ｙｙｙ．ｃｏｍ」であり、撮影画像の参照日時である「２０１０年３月１５日１５時１０分」と拡大参照箇所１の参照日時である「２０１０年３月１５日１５時１２分」と、拡大参照箇所２の参照日時である「２０１０年３月１５日１５時１４分」と、拡大参照箇所３の参照日時である「２０１０年３月１５日１５時１５分」と、拡大参照箇所４の参照日時である「２０１０年３月１５日１５時１７分」とが本文に記載された電子メールを作成する。そして、通知部１８ｇは、図１８の（Ｂ）に示すように、領域Ｂ、領域Ｃ、領域Ｄおよび領域Ａのすべての画像データ、または領域Ｂ、領域Ｃ、領域Ｄおよび領域Ａの一部の画像データである「領域Ｂ画像．ｊｐｇ」、「領域Ｃ画像．ｊｐｇ」、「領域Ｄ画像．ｊｐｇ」および、「領域Ａ画像．ｊｐｇ」が添付された電子メールを作成する。

そして、通知部１８ｇは、作成した電子メールを通信部１６に転送し、通信部１６は、通知部１８ｇから転送された電子メールを、ネットワーク３０を介して発送者装置４０に送信する。

なお、通知部１８ｇは、特定した通知先がＦＡＸ機能付き電話の電話番号であった場合、図１８の（Ａ）に示す内容を通信部１６およびネットワーク３０を介して、当該電話番号宛にＦＡＸ送信してもよい。あるいは、通知部１８ｇは、特定した通知先がＦＡＸ機能なしの電話番号であった場合、図１８の（Ａ）に示す内容の音声データを合成し、合成した音声データを通信部１６およびネットワーク３０を介して、当該電話番号宛に伝送してもよい。あるいは、通知部１８ｇは、文書処理装置１０に割り当てられた電話番号を発信者電話番号として通知先の電話番号宛にコールを行なうことで、受領者が拡大画像を参照した旨を通知する場合であってもよい。

続いて、図１９を用いて実施例３に係る文書処理装置１０の処理の手順について説明する。図１３は、実施例３に係る文書処理装置の処理を説明するためのフローチャートである。なお、図１９では、受領者が紙媒体の文書をスキャナー１１に配置した以降の処理について説明する。

図１３に示すように、本実施例３における文書処理装置１０は、受領者から入力部１５を介してスキャン開始要求を受け付けたか否かを判定する（ステップＳ３０１）。スキャン開始要求を受け付けない場合（ステップＳ３０１否定）、文書処理装置１０は、待機状態となる。一方、スキャン開始要求を受け付けた場合（ステップＳ３０１肯定）、スキャナー１１は、文書の読み込み処理を行なって、当該文書をデジタルデータに変換し、画像生成部１８ａは、スキャナー１１から転送されたデジタルデータから撮影画像を生成する（ステップＳ３０２）。

そして、分割部１８ｂは、画像生成部１８ａにより生成された撮影画像を複数の領域に分割する（ステップＳ３０３）。

続いて、文字列認識部１８ｃは、画像生成部１８ａにより生成された撮影画像に含まれる文字列を認識し（ステップＳ３０４）、通知部１８ｇは、文字列認識部１８ｃにより認識された文字列から通知先を特定する（ステップＳ３０５）。

その後、表示制御部１８ｄは、画像生成部１８ａにより生成された撮影画像を表示部１２に表示させるように制御し（ステップＳ３０６）、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する（ステップＳ３０７）。

ここで、可視光を検知した場合（ステップＳ３０７肯定）、表示部１２の光センサは、検知した可視光の表示部１２における位置を特定する。そして、特定部１８ｅは、表示部１２の光センサが特定した可視光の表示部１２における位置を取得し、当該取得した位置に対応する領域を分割部１８ｂにより分割された複数の領域から特定する（ステップＳ３０８）。

続いて、画像生成部１８ａは、特定部１８ｅにより特定された領域を拡大した拡大画像を生成し（ステップＳ３０９）、表示制御部１８ｄは、画像生成部１８ａにより生成された拡大画像を表示部１２に表示するように制御する（ステップＳ３１０）。

ステップＳ３１０の処理の後、または、表示部１２の光センサが可視光を検知しなかった場合（ステップＳ３０７否定）、信号受信部１３は、リモコン２０から画像処理指示を受信したか否かを判定する（ステップＳ３１１）。ここで、リモコン２０から画像処理指示を受信した場合（ステップＳ３１１肯定）、信号受信部１３は、受信した画像処理指示を指示判定部１８ｆに転送し、指示判定部１８ｆは、信号受信部１３から転送された画像処理指示の内容を判定する（ステップＳ３１２）。

そして、指示判定部１８ｆは、判定結果を画像生成部１８ａおよび表示制御部１８ｄに転送し、画像生成部１８ａおよび表示制御部１８ｄは、判定結果に沿った処理を実行する（ステップＳ３１３）。

ステップＳ３１４の処理の後、または、信号受信部１３が画像処理指示を受信しなかった場合（ステップＳ３１１否定）、文書処理装置１０は、処理終了要求を受け付けたか否かを判定する（ステップＳ３１４）。

ここで、処理終了要求を受け付けなかった場合（ステップＳ３１４否定）、ステップＳ３０７に戻って、表示部１２の光センサは、リモコン２０から照射された可視光を検知したか否かを判定する。

一方、処理終了要求を受け付けた場合（ステップＳ３１４肯定）、通知部１８ｇは、ステップＳ３０５において特定した発送者の通知先に、受領者が画像参照を終了した旨を示す操作履歴を通知し（ステップＳ３１５）、文書処理装置１０は、処理を終了する。

上述してきたように、実施例３では、通知部１８ｇは、文書から生成された画像の参照を受領者が終了した場合に、受領者が行なった操作内容の履歴をさらに通知するので、紙媒体の文書の受領者が当該紙媒体の文書を読んだ経緯を詳細に発送者に確認させることが可能となる。

なお、上記した文書処理装置１０は、文字列認識部１８ｃが認識した文字列から音声データを合成し、特定部１８ｅが特定した領域に含まれる文字列の音声データをスピーカ１４から出力してもよい。そして、通知部１８ｇは、スピーカ１４から音声データが出力された時点で、発送者装置４０に対して通知を行なってもよい。また、通知部１８ｇは、スピーカ１４から出力された音声データに重要語が含まれている時点で、発送者装置４０に対して通知を行なってもよい。

また、上記した実施例１〜３では、拡大画像の表示に際してリモコン２０から可視光が照射される場合について説明したが、本発明は、拡大画像の表示に際してリモコン２０から赤外線などが照射される場合であってもよい。

また、本実施例において説明した各処理のうち、自動的におこなわれるものとして説明した処理の全部または一部を手動的におこなうこともでき、あるいは、手動的におこなわれるものとして説明した処理の全部または一部を公知の方法で自動的におこなうこともできる。この他、上記文書中や図面中で示した処理手順、制御手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。

また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。さらに、各装置にて行なわれる各処理機能は、その全部または任意の一部が、ＣＰＵおよび当該ＣＰＵにて解析実行されるプログラムにて実現され、あるいは、ワイヤードロジックによるハードウェアとして実現され得る。

なお、本実施例で説明した文書処理方法は、あらかじめ用意されたプログラムをパーソナルコンピュータやワークステーションなどのコンピュータで実行することによって実現することができる。このプログラムは、インターネットなどのネットワークを介して配布することができる。また、このプログラムは、ハードディスク、フレキシブルディスク（ＦＤ）、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤなどのコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行することもできる。

以上のように、本発明に係る文書処理方法および文書処理システムは、紙媒体の文書の受領者が当該紙媒体の文書を読んだか否かを、発送者に確認させることに適する。

１０ 文書処理装置
１１ スキャナー
１２ 表示部（光センサ内蔵ディスプレイ）
１３ 信号受信部
１４ スピーカ
１５ 入力部
１６ 通信部
１７ 記憶部
１７ａ 通知先情報記憶部
１７ｂ 画像記憶部
１７ｃ 分割認識結果記憶部
１８ 制御部
１８ａ 画像生成部
１８ｂ 分割部
１８ｃ 文字列認識部
１８ｄ 表示制御部
１８ｅ 特定部
１８ｆ 指示判定部
１８ｇ 通知部
２０ リモコン
２１ 可視光スイッチ
２２ 照射口
２３ 拡大ボタン
２４ 縮小ボタン
２５ 消去ボタン
３０ ネットワーク
４０ 発送者装置

Claims (8)

1. 文書の処理を行う文書処理装置と、前記文書の発送者が利用する発送者装置とを含む文書処理システムの文書処理方法であって、
   前記文書処理装置が、
   前記文書を撮影した画像を生成する撮影ステップと、
   前記撮影ステップにより生成された前記画像を所定の表示部に表示させるように制御する表示制御ステップと、
   前記撮影ステップにより生成された前記画像を複数の領域に分割する分割ステップと、
   前記表示制御ステップの制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して光送信装置から送信された光を検知する検知ステップと、
   前記検知ステップが検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割ステップにより分割された前記複数の領域から特定する特定ステップと、
   前記特定ステップにより特定された領域を拡大した拡大画像を生成する拡大画像生成ステップと、
   前記拡大画像生成ステップにより生成された前記拡大画像を前記画像とは別に前記所定の表示部にてさらに表示するように制御する第二の表示制御ステップと、
   前記第二の表示制御ステップの制御により前記拡大画像が前記所定の表示部に表示されたことを契機として、前記文書の利用者が前記画像を参照した旨を前記発送者装置に通知する通知ステップと、
   を実行することを特徴とする文書処理方法。
2. 前記撮影ステップにより生成された前記画像に含まれる文字列を認識し、当該認識された文字列の中で重要となる重要語をさらに抽出する文字列認識ステップをさらに含み、
   前記通知ステップは、前記第二の表示制御ステップの制御により前記所定の表示部に表示された前記拡大画像が前記重要語を含む領域から生成された画像である場合に、前記文書の利用者が前記画像を参照した旨を前記発送者装置に通知することを特徴とする請求項１に記載の文書処理方法。
3. 前記通知ステップは、前記文字列認識ステップにより認識された文字列から特定される前記発送者の通知先に対して通知することを特徴とする請求項２に記載の文書処理方法。
4. 氏名と通知先とが対応付けられた通知先情報を所定の記憶部に格納する格納ステップをさらに含み、
   前記通知ステップは、前記文字列認識ステップにより認識された文字列から特定された氏名に対応付けられた通知先を前記所定の記憶部に格納された前記通知先情報から特定し、当該特定した通知先に対して通知することを特徴とする請求項２又は３に記載の文書処理方法。
5. 前記通知ステップは、前記利用者が参照した前記画像のデータ、または、当該画像から前記文字列認識ステップにより認識された文字列をさらに通知することを特徴とする請求項２〜４のいずれか一項に記載の文書処理方法。
6. 前記通知ステップは、前記利用者が行なった操作内容の履歴をさらに通知することを特徴とする請求項１〜５のいずれか一項に記載の文書処理方法。
7. 文書の処理を行なう文書処理装置と、前記文書の発送者が利用する発送者装置とを含む文書処理システムであって、
   前記文書処理装置は、
   利用者が配置した文書を撮影した画像を生成する撮影手段と、
   前記撮影手段により生成された前記画像を所定の表示部に表示させるように制御する表示制御手段と、
   前記撮影手段により生成された前記画像を複数の領域に分割する分割手段と、
   前記表示制御手段の制御により前記画像が前記所定の表示部に表示された状態で、当該所定の表示部に対して光送信装置から送信された光を検知する検知手段と、
   前記検知手段が検知した前記光の位置を取得し、当該取得した位置に対応する領域を前記分割手段により分割された前記複数の領域から特定する特定手段と、
   前記特定手段により特定された領域を拡大した拡大画像を生成する拡大画像生成手段と、
   前記拡大画像生成手段により生成された前記拡大画像を前記画像とは別に前記所定の表示部にてさらに表示するように制御する第二の表示制御手段と、
   前記第二の表示制御手段の制御により前記拡大画像が前記所定の表示部に表示されたことを契機として、前記文書の利用者が前記画像を参照した旨を前記発送者装置に通知する通知手段と、
   を備えたことを特徴とする文書処理システム。
8. 前記撮影手段により生成された前記画像に含まれる文字列を認識し、当該認識された文字列の中で重要となる重要語をさらに抽出する文字列認識手段をさらに備え、
   前記通知手段は、前記第二の表示制御手段の制御により前記所定の表示部に表示された前記拡大画像が前記重要語を含む領域から生成された画像である場合に、前記文書の利用者が前記画像を参照した旨を前記発送者装置に通知することを特徴とする請求項７に記載の文書処理システム。

Images