JP6308759B2 - 携帯端末及びその制御方法、画像形成システム、並びにプログラム - Google Patents

Description

本発明は、携帯端末及びその制御方法、画像形成システム、並びにプログラムに関する。

従来、ドキュメントの画像情報と識別情報を関連付けてデータベースに記憶し、スキャン時に識別情報を検知し、識別情報に一致する画像情報があれば、スキャン画像ではなく画像情報を出力する技術がある（例えば、特許文献１参照）。

また、最近はドキュメントの印刷物をカメラ付き携帯端末で気軽に撮影し、撮影画像を携帯端末で表示し、必要に応じてプリンタで印刷するというユースケースが存在する。

特開平１０−２８５３７８号公報

携帯端末で撮影画像を拡大表示したり印刷したりする場合、撮影画像の画質では詳細部分の表示や印刷には不十分な場合がある。また、印刷物によっては、ウォーターマークのようにプリンタドライバが追加した印刷部分があったり、ユーザが貼った付箋紙があったりする。

このようにプリンタドライバやユーザが印刷物に対して後から追加した情報は、ドキュメント自体に存在しないので、ドキュメントの識別情報に一致する画像情報から再現することができない。

本発明の目的は、印刷物を撮影した撮影画像に対して予め定められた処理を実行する場合に、より高画質な画像を用いて処理を実行可能な携帯端末及びその制御方法、画像形成システム、並びにプログラムを提供することにある。

上記目的を達成するために、請求項１の携帯端末は、電子データであるドキュメントを印刷した印刷物を撮影する撮影手段と、前記撮影手段により前記印刷物を撮影することで得られた撮影画像を拡大した拡大画像を表示する指示を受け付ける受付手段と、前記撮影手段により前記印刷物を撮影することで得られた前記撮影画像から、該印刷物に印刷された前記ドキュメントの電子データの記憶場所を特定する特定情報を取得する第１の取得手段と、前記第１の取得手段により取得された前記特定情報を用いて、前記ドキュメントの電子データを取得する第２の取得手段と、前記撮影画像の解像度が第１の解像度である場合には、命令に従って前記撮影画像を拡大して表示手段に表示させる制御を行い、前記撮影画像の解像度が前記第１の解像度よりも低い第２の解像度である場合には、前記第２の取得手段により取得された前記電子データの表示サイズを前記命令に従って変更した電子データを前記表示手段に表示させる制御を行う表示制御手段とを有することを特徴とする。

本発明によれば、印刷物を撮影することで得られた撮影画像から、ドキュメントの電子データの記憶場所を特定する特定情報を取得し、取得された特定情報を用いて、ドキュメントの電子データを取得し、撮影画像の解像度が第１の解像度である場合には、命令に従って撮影画像を拡大して表示手段に表示させる制御を行い、撮影画像の解像度が第１の解像度よりも低い第２の解像度である場合には、取得された電子データの表示サイズを命令に従って変更した電子データを表示手段に表示させる制御を行うので、より高画質な画像を用いて処理を実行可能となる。

本発明の実施の形態に係る画像形成装置であるプリンタを含む画像形成システムの概略構成を示す図である。 ＰＣ、プリンタ、ドキュメントサーバ、及び携帯端末のハードウェア構成を示す図である。 ＰＣ、プリンタ、ドキュメントサーバ、及び携帯端末のソフトウェア構成を示す図である。 プリンタで印刷される３種類の印刷物を示す図である。 プリンタドライバにより実行される図４（Ａ）の印刷物に対応する印刷データ送付処理の手順を示すフローチャートである。 携帯端末により実行される図４（Ａ）の印刷物に対応する表示処理の手順を示すフローチャートである。 ドキュメントサーバにより実行される図４（Ａ）の印刷物に対応するサーバ処理の手順を示すフローチャートである。 プリンタドライバにより実行される図４（Ｂ）の印刷物に対応する印刷データ送付処理の手順を示すフローチャートである。 携帯端末により実行される図４（Ｂ）の印刷物に対応する印刷要求処理の手順を示すフローチャートである。 ドキュメントサーバにより実行される図４（Ｂ）の印刷物に対応するサーバ処理の手順を示すフローチャートである。 携帯端末により実行される図４（Ｃ）の印刷物に対応する表示処理の手順を示すフローチャートである。 ドキュメントサーバにより実行される図４（Ｃ）の印刷物に対応するサーバ処理の手順を示すフローチャートである。

以下、本発明の実施の形態について図面を参照しながら詳述する。

図１は、本発明の実施の形態に係る画像形成装置であるプリンタ１０２を含む画像形成システム１００の概略構成を示す図である。

図１において、画像形成システム１００は、情報処理装置であるＰＣ１０１（Personal Computer）、プリンタ１０２、ドキュメントサーバ１０３、及び携帯端末１０４で構成され、それらはネットワーク１０５により接続されている。

ＰＣ１０１にはプリンタドライバがインストールされており、このプリンタドライバはドキュメントを印刷するための印刷データをプリンタ１０２に送信する。

プリンタ１０２はＰＣ１０１や携帯端末１０４から送信された印刷データを受信して印刷することができる。

ドキュメントサーバ１０３は、ドキュメントに関連する各種ファイルを記憶できるドキュメントサーバである。携帯端末１０４は、カメラ付きの携帯端末である。

図２は、ＰＣ１０１、プリンタ１０２、ドキュメントサーバ１０３、及び携帯端末１０４のハードウェア構成を示す図である。

図２（Ａ）は、プリンタ１０２のハードウェア構成を示す図である。

図２（Ａ）において、プリンタ１０２は、ＣＰＵ１２１１、ＲＡＭ１２１２、ＲＯＭ１２１３、ネットワークインタフェース１２１４、操作パネル１２１５、及びエンジン１２１６で構成される。

ＣＰＵ１２１１は、プリンタ１０２全体を制御する。ＲＡＭ１２１２は、ＣＰＵ１２１１のワークエリアとして用いられたり、各種プログラムや各種データを記憶する。

ＲＯＭ１２１３は、ブートプログラムや各種処理を実行するための各種プログラムなどを記憶する。プリンタ１０２が実行する後述するフローチャートは、ＲＯＭ１２１３に記憶されたプログラムがＲＡＭ１２１２に展開され、ＣＰＵ１２１１により実行される処理を示している。

ネットワークインタフェース１２１４は、プリンタ１０２に対する印刷データの入力を受け付ける。操作パネル１２１５は、ユーザからの操作を受け付けたり、ユーザに情報を表示する。

エンジン１２１６は、ＲＡＭ１２１２へ展開されるビットマップ画像を印刷用紙に出力する。

図２（Ｂ）は、ＰＣ１０１、及びドキュメントサーバ１０３のハードウェア構成を示す図である。ここではＰＣ１０１を例にして説明する。

図２（Ｂ）において、ＰＣ１０１は、ＣＰＵ１２２１、ＲＡＭ１２２２、ＲＯＭ１２２３、ＨＤ１２２４、ネットワークインタフェース１２２５、キーボード１２２６、及びディスプレイ１２２７で構成される。

ＣＰＵ１２２１は、ＰＣ１０１全体を制御する。ＲＡＭ１２２２は、ＣＰＵ１２２１のワークエリアとして用いられたり、各種プログラムや各種データを記憶する。

ＲＯＭ１２２３は、ブートプログラムや各種処理を実行するための各種プログラムなどを記憶する。ＰＣ１０１が実行する後述するフローチャートは、ＲＯＭ１２２３に記憶されたプログラムがＲＡＭ１２２２に展開され、ＣＰＵ１２２１により実行される処理を示している。

ＨＤ１２２４は、ドキュメント等のファイルなどを記憶する。ネットワークインタフェース１２２５は、ＰＣ１０１とネットワーク１０５とのインタフェースである。キーボード１２２６は、ユーザからの操作を受け付ける。ディスプレイ１２２７は、ユーザに情報を表示する。

図２（Ｃ）は、携帯端末１０４のハードウェア構成を示す図である。

図２（Ｃ）において、携帯端末１０４は、ＣＰＵ１２３１、ＲＡＭ１２３２、ＲＯＭ１２３３、ＨＤ１２３４、ネットワークインタフェース１２３５、操作パネル１２３６、ディスプレイ１２３７、及びカメラ１２３８で構成される。

ＣＰＵ１２３１は、携帯端末１０４全体を制御する。ＲＡＭ１２３２は、ＣＰＵ１２３１のワークエリアとして用いられたり、各種プログラムや各種データを記憶する。

ＲＯＭ１２３３は、ブートプログラムや各種処理を実行するための各種プログラムなどを記憶する。携帯端末１０４が実行する後述するフローチャートは、ＲＯＭ１２３３に記憶されたプログラムがＲＡＭ１２３２に展開され、ＣＰＵ１２３１により実行される処理を示している。

ＨＤ１２３４は、ドキュメント等のファイルなどを記憶する。ネットワークインタフェース１２３５は、携帯端末１０４とネットワーク１０５とのインタフェースである。操作パネル１２３６は、ユーザからの操作を受け付ける。ディスプレイ１２３７は、ユーザに情報を表示する。カメラ１２３８は、光学部材やＣＣＤセンサなどで構成される被写体を撮影するカメラである。

図３は、ＰＣ１０１、プリンタ１０２、ドキュメントサーバ１０３、及び携帯端末１０４のソフトウェア構成を示す図である。なお、図３に示される構成では、本実施の形態に関連しないソフトウェアについては省略している。

図３（Ａ）は、ＰＣ１０１のプリンタドライバのソフトウェア構成を示す図である。

図３（Ａ）において、プリンタドライバは、印刷データ生成部２０１ａ、通信部２０１ｂ、設定部２０１ｃ、及び制御部２０１ｄで構成される。

印刷データ生成部２０１ａは、ドキュメントから印刷データを生成する。通信部２０１ｂは、他デバイスと通信を行う。設定部２０１ｃは、ユーザの設定を管理する。制御部２０１ｄは、プリンタドライバ全体を制御する。

図３（Ｂ）は、プリンタ１０２のソフトウェア構成を示す図である。

図３（Ｂ）において、プリンタ１０２は、印刷データ受信部２０２ａ、印刷データ解析部２０２ｂ、画像生成部２０２ｃ、及び制御部２０２ｄで構成される。

印刷データ受信部２０２ａは、印刷データを受信する。印刷データ解析部２０２ｂは、印刷データを解析する。画像生成部２０２ｃは、解析結果から印刷画像を生成する。制御部２０２ｄは、プリンタ１０２全体を制御する。

図３（Ｃ）は、ドキュメントサーバ１０３のソフトウェア構成を示す図である。

図３（Ｃ）において、ドキュメントサーバ１０３は、通信部２０３ａ、ファイル解析部２０３ｂ、画像生成部２０３ｃ、及び制御部２０３で構成される。

通信部２０３ａは、他デバイスと通信を行う。ファイル解析部２０３ｂは、記憶されたファイルを解析する。画像生成部２０３ｃは、解析結果から画像を生成する。制御部２０３ｄは、ドキュメントサーバ全体を制御する。

図３（Ｄ）は、携帯端末１０４のソフトウェア構成を示す図である。

図３（Ｄ）において、携帯端末１０４は、通信部２０４ａ、撮影部２０４ｂ、表示部２０４ｃ、操作部２０４で、認識部２０４ｅ、及び制御部２０４ｆで構成される。

通信部２０４ａは、他デバイスと通信を行う。撮影部２０４ｂは、撮影処理を行う。表示部２０４ｃは、ディスプレイ１２３７を制御してユーザへ各種表示を行う。操作部２０４ｄは、操作パネル１２３６でのユーザ操作を認識する。認識部２０４ｅは、画像の認識処理を行う。制御部２０４ｆは、携帯端末全体を制御する。

以上説明した構成において、本実施の形態ではプリンタ１０２で３種類の印刷物を印刷する。

図４は、プリンタ１０２で印刷される３種類の印刷物を示す図である。

図４（Ａ）は、ＱＲコード(登録商標)４０１ａが印刷された印刷物４０１を示す図である。

図４（Ｂ）は、ＱＲコード(登録商標)４０２ａ，４０２ｂ、及びウォーターマーク４０２ｃが印刷された印刷物４０２を示す図である。

図４（Ｃ）は、ＱＲコード(登録商標)４０３ａ、及び付箋紙４０３ｂが印刷された印刷物４０３を示す図である。

各図におけるＱＲコード(登録商標)４０１ａ，４０２ａ，４０２ｂ，４０３ａは、各印刷物のドキュメントまたはウォーターマークの記憶場所を示すファイルパスを示すものとなっている。なお、本実施の形態におけるドキュメントとは、プリンタ１０２が印刷物を印刷するための電子データを示している。また、ＱＲコード(登録商標)に限らず、ファイルパスを示すことが可能であれば、バーコードなど他のコードを用いてもよい。

以下、印刷物４０１，４０２，４０３の各々に対応する処理について順に説明していく。

まず印刷物４０１に対応するプリンタドライバ、携帯端末１０４、及びドキュメントサーバ１０３での処理について説明する。

図５は、プリンタドライバにより実行される図４（Ａ）の印刷物４０１に対応する印刷データ送付処理の手順を示すフローチャートである。

図５において、制御部２０１ｄは、通信部２０１ｂを利用して、印刷対象であるドキュメントの記憶をドキュメントサーバ１０３に要求することで、ドキュメントをドキュメントサーバ１０３に記憶する（ステップＳ３０１）。このステップＳ３０１は、プリンタ１０２が印刷するドキュメントを記憶する記憶手段に対応する。

次いで、制御部２０１ｄは、ファイルパスをファイルパスとしてドキュメントサーバ１０３から取得する（ステップＳ３０２）。このステップＳ３０２は、記憶されたドキュメントを特定する特定情報を取得する取得手段に対応する。このファイルパスは、ドキュメントを特定する特定情報に対応している。

印刷データ生成部２０１ａは、プリンタ１０２で印刷できる印刷データを印刷対象のドキュメントから生成する（ステップＳ３０３）。このステップＳ３０３は、ドキュメントからプリンタ１０２で印刷するための印刷データを生成する生成手段に対応する。

印刷データ生成部２０１ａは、ステップＳ３０２で取得されたファイルパスを示すＱＲコード(登録商標)を印刷データに追加する（ステップＳ３０４）。このＱＲコード(登録商標)は、特定情報を示す画像に対応し、ステップＳ３０４は、特定情報を示す画像を生成された印刷データに追加する追加手段に対応する。

そして、制御部２０１ｄは、通信部２０１ｂを利用して生成した印刷データをプリンタ１０２へ送付して（ステップＳ３０５）、本処理を終了する。このステップＳ３０５は、特定情報を示す画像が追加された印刷データを印刷するためにプリンタ１０２に送付する送付手段に対応する。

このように送信された印刷データをプリンタ１０２が受信し、印刷することで、図４（Ａ）の印刷物４０１が得られる。

図６は、携帯端末１０４により実行される図４（Ａ）の印刷物４０１に対応する表示処理の手順を示すフローチャートである。

図６において、撮影部２０４ｂがドキュメントを印刷物４０１を撮影し、撮影画像として記憶し（ステップＳ５０１）、表示部２０４ｃは撮影画像をユーザに表示する（ステップＳ５０２）。このステップＳ５０１は撮影手段に対応する。

次いで、操作部２０４ｄがユーザの操作を認識し、拡大表示が指示されたか否か判別する（ステップＳ５０３）。

ステップＳ５０３の判別の結果、拡大表示以外が指示された場合には（ステップＳ５０２でＮＯ）、指示に対する処理を行い（ステップＳ５０４）、ステップＳ５０２に戻る。

一方、ステップＳ５０３の判別の結果、拡大表示が指示された場合には（ステップＳ５０２でＹＥＳ）、認識部２０４ｅは撮影画像を認識し、ＱＲコード(登録商標)４０１ａからファイルパスが認識できたか否か判別する（ステップＳ５０５）。

ステップＳ５０５の判別の結果、ファイルパスが認識できなかった場合には（ステップＳ５０５でＮＯ）、表示部２０４ｃはステップＳ５０１で撮影した撮影画像を拡大表示して（ステップＳ５０６）、本処理を終了する。

一方、ステップＳ５０５の判別の結果、ファイルパスが認識できた場合には（ステップＳ５０５でＹＥＳ）、制御部２０４ｆは撮影画像を表示した拡大画像が見難いか否か判別する（ステップＳ５０７）。ここでの判別基準については後述する。

ステップＳ５０７の判別の結果、撮影画像を表示した拡大画像が見難くない場合には（ステップＳ５０７でＮＯ）、上記ステップＳ５０６に進む。

一方、ステップＳ５０７の判別の結果、撮影画像を表示した拡大画像が見難い場合には（ステップＳ５０７でＹＥＳ）、認識したファイルパスを取得し、通信部２０４ａを利用してドキュメントサーバ１０３にドキュメント画像の生成を要求する（ステップＳ５０８）。このステップＳ５０８は、印刷物を撮影することで得られた撮影画像から、ドキュメントを特定する特定情報を取得する特定情報取得手段に対応し、さらに特定情報を用いて、ドキュメントから生成されるドキュメント画像の生成を要求する要求手段に対応する。なお、ドキュメント画像とは、ドキュメントが示す画像のことである。

次いで、ステップＳ５０８での要求がドキュメントサーバ１０３から要求が拒否されたか否か判別する（ステップＳ５０９）。

ステップＳ５０９の判別の結果、ドキュメントサーバ１０３から要求が拒否された場合には（ステップＳ５０９でＹＥＳ）、上記ステップＳ５０６に進む。

一方、ステップＳ５０９の判別の結果、ドキュメントサーバ１０３から要求が拒否されなかった場合には（ステップＳ５０９でＮＯ）、表示部２０４ｃは、ドキュメントサーバ１０３によって生成されたドキュメント画像を拡大表示して（ステップＳ５１０）、本処理を終了する。このステップＳ５１０は、要求によって生成されたドキュメント画像を用いて予め定められた処理を実行する実行手段に対応し、ここでの予め定められた処理は、ドキュメント画像を表示する処理である。

上記ステップＳ５０７での、撮影画像を表示した拡大画像が見難いか否かの判別基準について説明する。

例えば３００ｄｐｉの撮影画像に対して、拡大表示の要求解像度が６００ｄｐｉの場合、６００≧３００×２（＝６００）となり、撮影画像を拡大表示しても見易いと判別される。

一方、１００ｄｐｉの撮影画像に対して、拡大表示の要求解像度が６００ｄｐｉの場合、６００≧１００×２（＝２００）となり、拡大表示すると見難いと判別される。

なお、撮影画像よりも、印刷物の原本データであるドキュメントから生成されたドキュメント画像の方が高画質であることは一般的なことである。

図７は、ドキュメントサーバ１０３により実行される図４（Ａ）の印刷物４０１に対応するサーバ処理の手順を示すフローチャートである。

図７において、制御部２０３ｄは、通信部２０３ａを確認し、プリンタドライバからファイルの記憶を要求されたか否か判別する（ステップＳ６０１）。

ステップＳ６０１の判別の結果、ファイルの記憶を要求されていない場合には（ステップＳ６０１でＮＯ）、ステップＳ６０４に進む。

一方、ステップＳ６０１の判別の結果、ファイルの記憶を要求された場合には（ステップＳ６０１でＹＥＳ）、制御部２０３ｄは、要求されたファイルを記憶する（ステップＳ６０２）。

そして制御部２０３ｄは、通信部２０３ａを利用し、ファイルの記憶場所を示すファイルパスを要求元であるプリンタドライバに通知する（ステップＳ６０３）。

次いで、制御部２０３ｄは、通信部２０３ａを確認し、携帯端末１０４からファイルパスとともにドキュメント画像の生成が要求されたか否か判別する（ステップＳ６０４）。

ステップＳ６０４の判別の結果、ドキュメント画像の生成が要求されていない場合には（ステップＳ６０４でＮＯ）、ステップＳ６１１に進む。

一方、ステップＳ６０４の判別の結果、ドキュメント画像の生成が要求された場合には（ステップＳ６０４でＹＥＳ）、制御部２０３ｄは、ドキュメント画像の生成を要求されたドキュメントが存在するか否か判別する（ステップＳ６０５）。

ステップＳ６０５の判別の結果、ドキュメントが存在しない場合には（ステップＳ６０５でＮＯ）、制御部２０３ｄは、通信部２０３ａを利用し、要求元である携帯端末１０４に要求に対する拒否を通知して（ステップＳ６０６）、ステップＳ６１１に進む。

一方、ステップＳ６０５の判別の結果、ドキュメントが存在する場合には（ステップＳ６０５でＹＥＳ）、制御部２０３ｄは、要求されたドキュメント画像が既に存在するか否か判別する（ステップＳ６０７）。

ステップＳ６０７の判別の結果、要求されたドキュメント画像が既に存在する場合には（ステップＳ６０７でＹＥＳ）、ステップＳ６０９に進む。

一方、ステップＳ６０７の判別の結果、要求されたドキュメント画像が既に存在しない場合には（ステップＳ６０７でＮＯ）、ファイル解析部２０３ｂは要求されたドキュメントの解析を行い、解析結果から画像生成部２０３ｃがドキュメント画像を生成する（ステップＳ６０８）。このステップＳ６０８は、ドキュメントから生成されるドキュメント画像の生成を、ドキュメントを特定する特定情報とともに要求された場合に、ドキュメントからドキュメント画像を生成する生成手段に対応する。

次いで、制御部２０３ｄは、ドキュメント画像のタイムスタンプを現在時刻に更新する（ステップＳ６０９）。

そして、制御部２０３ｄは、通信部２０３ａを利用し、要求元である携帯端末１０４にドキュメント画像の生成終了を通知することで提供する（ステップＳ６１０）。このステップＳ６１０は、生成されたドキュメント画像を要求元に提供する提供手段に対応する。

次いで、制御部２０３ｄは、ドキュメント画像が際限なく増えることを防ぐため、現在時刻に対して規定時間以上古いタイムスタンプのドキュメント画像を削除して（ステップＳ６１１）、ステップＳ６０１に戻る。

図５〜７の処理により、印刷物を撮影した画像に対して拡大表示を行う場合、ドキュメントサーバのドキュメント画像が使用されることにより、高画質の拡大表示を実現できるようになる。

次に印刷物４０２に対応するプリンタドライバ、携帯端末１０４、及びドキュメントサーバ１０３での処理について説明する。

図８は、プリンタドライバにより実行される図４（Ｂ）の印刷物４０２に対応する印刷データ送付処理の手順を示すフローチャートである。

なお、この処理は、図５のステップＳ３０４に代わる処理がステップＳ３０３とステップＳ３０５に挿入されたものであるため、それらの処理について説明する。また、以下の説明では、合成画像であるウォーターマークをＷＭと表現することがある。

図８において、ステップＳ３０３を行うと、設定部２０１ｃは、印刷対象のドキュメントに対してＷＭが指定されているか否か判別する（ステップＳ７０４）。

ステップＳ７０４の判別の結果、ＷＭが指定されていない場合には（ステップＳ７０４でＮＯ）、印刷データ生成部２０１ａは、ステップＳ３０２で取得されたファイルパスを示すＱＲコード(登録商標)を印刷データに追加して（ステップＳ７０９）、本処理を終了する。

一方、ステップＳ７０４の判別の結果、ＷＭが指定されている場合には（ステップＳ７０４でＹＥＳ）、制御部２０１ｄは、通信部２０１ｂを利用して、合成画像に関する合成画像情報であるＷＭ情報の記憶をドキュメントサーバ１０３に要求することで、ＷＭ情報をドキュメントサーバ１０３に記憶する（ステップＳ７０５）。なお、ＷＭ情報には、ＷＭの内容や位置を示す情報が含まれている。

次いで、制御部２０１ｄは、通信部２０１ｂを利用して、ＷＭ情報が記憶された場所を示すファイルパスを、ウォーターマークパスとしてドキュメントサーバ１０３から取得する（ステップＳ７０６）。このＷＭ情報が記憶された場所を示すファイルパスであるウォーターマークパスは、他の特定情報に対応している。

そして、印刷データ生成部２０１ａは、ファイルパスを示す描画情報とウォーターマークパスを示すＱＲコード(登録商標)を印刷データに追加して（ステップＳ７０７）、ステップＳ３０５に進む。

このように送信された印刷データをプリンタ１０２が受信し、印刷することで、図４（Ｂ）の印刷物４０２が得られる。

印刷物４０２におけるＱＲコード(登録商標)４０２ａ、４０２ｂは、それぞれファイルパスとウォーターマークパスを示すＱＲコード(登録商標)である。ウォーターマーク４０２ｃの「CONFIDENTIAL」の文字が、オリジナルのドキュメントにはなく、プリンタドライバによって追加されて印刷されたものである。

このように、本実施の形態では、印刷データに合成画像を合成する場合には、合成画像に関する合成画像情報をさらに記憶し、合成画像情報を特定する他の特定情報をさらに取得し、他の特定情報を示す画像を印刷データにさらに追加するようになっている。

図９は、携帯端末１０４により実行される図４（Ｂ）の印刷物４０２に対応する印刷要求処理の手順を示すフローチャートである。なお、図６での携帯端末１０４の処理は、拡大表示させる処理であったが、ここでは、プリンタ１０２に印刷を要求する処理を例にしている。

図９において、撮影部２０４ｂが印刷物４０２を撮影し、撮影画像として記憶し（ステップＳ８０１）、表示部２０４ｃは撮影画像をユーザに表示する（ステップＳ８０２）。

次いで、操作部２０４ｄがユーザの操作を認識し、印刷が指示されたか否か判別する（ステップＳ８０３）。

ステップＳ８０３の判別の結果、印刷以外が指示された場合には（ステップＳ８０２でＮＯ）、指示に対する処理を行い（ステップＳ８０４）、ステップＳ８０２に戻る。

一方、ステップＳ８０３の判別の結果、印刷が指示された場合には（ステップＳ８０２でＹＥＳ）、認識部２０４ｅは撮影画像を認識し、ＱＲコード(登録商標)４０２ａからファイルパスが認識でき、かつＱＲコード(登録商標)４０２ｂからウォーターマークパスが認識できたか否か判別する（ステップＳ８０５）。

ステップＳ８０５の判別の結果、ファイルパスとウォーターマークパスが認識できなかった場合には（ステップＳ８０５でＮＯ）、制御部２０４ｆはステップＳ８０１で撮影した撮影画像の印刷をプリンタ１０２に要求して（ステップＳ８０６）、本処理を終了する。

一方、ステップＳ８０５の判別の結果、ファイルパスとウォーターマークパスが認識できた場合には（ステップＳ８０５でＹＥＳ）、制御部２０４ｆは、ファイルパスとウォーターマークパスを参照し、通信部２０４ａを利用して、ウォーターマーク付きのドキュメント画像の生成をドキュメントサーバ１０３に要求する（ステップＳ８０７）。

次いで、ステップＳ８０７での要求がドキュメントサーバ１０３から要求が拒否されたか否か判別する（ステップＳ８０８）。

ステップＳ８０８の判別の結果、ドキュメントサーバ１０３から要求が拒否された場合には（ステップＳ８０８でＹＥＳ）、上記ステップＳ８０６に進む。

一方、ステップＳ８０８の判別の結果、ドキュメントサーバ１０３から要求が拒否されなかった場合には（ステップＳ８０８でＮＯ）、制御部２０４ｆは、ドキュメントサーバ１０３が生成したドキュメント画像の印刷をプリンタ１０２に要求し（ステップＳ８１０）、本処理を終了する。ここで印刷されるドキュメント画像は、ドキュメント画像に合成画像が合成された合成ドキュメント画像である。

このように、本実施の形態では、印刷物に、ドキュメント画像に合成された合成画像ＷＭがさらに印刷されている場合には、撮影画像から、合成画像ＷＭに関する合成画像情報を特定する他の特定情報であるＷＭ情報をさらに取得し、特定情報、及び他の特定情報を用いて、ドキュメント画像に合成画像が合成された合成ドキュメント画像を取得するようになっている。

さらに、上記ステップＳ８０９は、要求によって生成されたドキュメント画像を用いて予め定められた処理を実行する実行手段に対応し、ここでの予め定められた処理は、ドキュメント画像の印刷をプリンタ１０２に要求する処理である。

図１０は、ドキュメントサーバ１０３により実行される図４（Ｂ）の印刷物４０２に対応するサーバ処理の手順を示すフローチャートである。

図１０において、制御部２０３ｄは、通信部２０３ａを確認し、プリンタドライバからファイルの記憶を要求されたか否か判別する（ステップＳ９０１）。

ステップＳ９０１の判別の結果、ファイルの記憶を要求されていない場合には（ステップＳ９０１でＮＯ）、ステップＳ９０４に進む。

一方、ステップＳ９０１の判別の結果、ファイルの記憶を要求された場合には（ステップＳ９０１でＹＥＳ）、制御部２０３ｄは、要求されたファイルを記憶する（ステップＳ９０２）。

そして制御部２０３ｄは、通信部２０３ａを利用し、ファイルの記憶場所を示すファイルパスを要求元であるプリンタドライバに通知する（ステップＳ９０３）。

次いで、制御部２０３ｄは、通信部２０３ａを確認し、携帯端末１０４からＷＷ付きドキュメント画像の生成が要求されたか否か判別する（ステップＳ９０４）。

ステップＳ９０４の判別の結果、ＷＷ付きドキュメント画像の生成が要求されていない場合には（ステップＳ９０４でＮＯ）、ステップＳ９１３に進む。

一方、ステップＳ９０４の判別の結果、ＷＷ付きドキュメント画像の生成が要求された場合には（ステップＳ９０４でＹＥＳ）、制御部２０３ｄは、ＷＷ付きドキュメント画像の生成を要求されたドキュメントとＷＭ情報が存在するか否か判別する（ステップＳ９０５）。

ステップＳ９０７の判別の結果、ドキュメントとＷＭ情報が存在しない場合には（ステップＳ９０５でＮＯ）、制御部２０３ｄは、通信部２０３ａを利用し、要求元である携帯端末１０４に要求に対する拒否を通知して（ステップＳ９０６）、ステップＳ９１３に進む。

一方、ステップＳ９０５の判別の結果、ドキュメントとＷＭ情報が存在する場合には（ステップＳ９０５でＹＥＳ）、制御部２０３ｄは、要求されたドキュメント画像が既に存在するか否か判別する（ステップＳ９０７）。

ステップＳ９０７の判別の結果、要求されたドキュメント画像が既に存在する場合には（ステップＳ９０７でＹＥＳ）、ステップＳ９１１に進む。

一方、ステップＳ９０７の判別の結果、要求されたドキュメント画像が既に存在しない場合には（ステップＳ９０７でＮＯ）、ファイル解析部２０３ｂは要求されたドキュメントの解析を行い、解析結果から画像生成部２０３ｃがドキュメント画像を生成する（ステップＳ９０８）。

さらに、ファイル解析部２０３ｂは要求されたＷＭ情報の解析を行い、解析結果から画像生成部２０３ｃがＷＭ画像を生成する（ステップＳ９０９）。

そして、制御部２０３ｄはドキュメント画像にＷＭ画像を合成する（ステップＳ９１０）。

次いで、制御部２０３ｄは、ドキュメント画像のタイムスタンプを現在時刻に更新する（ステップＳ９１１）。

そして、制御部２０３ｄは、通信部２０３ａを利用し、要求元である携帯端末１０４にドキュメント画像の生成終了を通知する（ステップＳ９１２）。

次いで、制御部２０３ｄは、ドキュメント画像が際限なく増えることを防ぐため、現在時刻に対して規定時間以上古いタイムスタンプのドキュメント画像を削除して（ステップＳ９１３）、ステップＳ９０１に戻る。

このように、本実施の形態では、ドキュメント画像の生成を、合成画像情報を特定する他の特定情報とともに要求された場合には、他の特定情報で特定される合成画像情報から合成画像をさらに生成してドキュメント画像に合成した合成ドキュメント画像を生成し、合成ドキュメント画像を提供するようになっている。

図８〜１０の処理により、ウォーターマークのようにプリンタドライバが付加した情報がある印刷物に対しても、高画質の拡大表示や印刷が可能になる。

次に印刷物４０３に対応する携帯端末１０４、及びドキュメントサーバ１０３での処理について説明する。

図１１は、携帯端末１０４により実行される図４（Ｃ）の印刷物４０３に対応する表示処理の手順を示すフローチャートである。

図１１において、撮影部２０４ｂが印刷物４０３を撮影し、撮影画像として記憶する（ステップＳ１００１）。

次いで、制御部２０４ｆは、認識部２０４ｅが認識した印刷物のファイルパスを参照し、通信部２０４ａを利用してドキュメントサーバ１０３にドキュメント画像の生成を要求する（ステップＳ１００２）。

そして、制御部２０４ｆはドキュメントサーバ１０３から撮影画像の送信を要求され、操作部２０４ｄはユーザの操作を認識し、撮影画像の送信が了承されたか否か判別する（ステップＳ１００３）。

ステップＳ１００３の判別の結果、撮影画像の送信が了承されなかった場合には（ステップＳ１００３でＮＯ）、制御部２０４ｆは、ドキュメントサーバによって生成された付箋紙を含まないドキュメント画像を拡大表示して、印刷をプリンタ１０２に要求して（ステップＳ１００６）、本処理を終了する。

一方、ステップＳ１００３の判別の結果、撮影画像の送信が了承された場合には（ステップＳ１００３でＹＥＳ）、制御部２０４ｆは、通信部２０４ａを利用してドキュメントサーバ１０３に撮影画像を送信する（ステップＳ１００４）。

次いで、制御部２０４ｆは、ドキュメントサーバによって合成された付箋紙を含んだドキュメント画像を拡大表示して、印刷をプリンタ１０２に要求して（ステップＳ１００５）、本処理を終了する。ステップＳ１００５でのドキュメント画像は、ドキュメント画像に新たに加えられた要素を示す追加要素合成ドキュメント画像である。この新たに加えられた要素は、本実施の形態では上記付箋であるが、手書き文字などであってもよい。

図１２は、ドキュメントサーバ１０３により実行される図４（Ｃ）の印刷物４０３に対応するサーバ処理の手順を示すフローチャートである。

図１２において、ファイル解析部２０３ｂは、携帯端末１０４から要求されたドキュメントの解析を行い、解析結果から画像生成部２０３ｃがドキュメント画像を生成する（ステップＳ１１０１）。

次いで、制御部２０３ｄは、携帯端末１０４に対して撮影画像を要求する（ステップＳ１１０２）。

そして、ステップＳ１１０２での要求が拒否されたか否か判別する（ステップＳ１１０３）。ステップＳ１１０３の判別の結果、要求が拒否された場合には（ステップＳ１１０３でＹＥＳ）、ステップＳ１１０６に進む。

一方、ステップＳ１１０３の判別の結果、要求が拒否されなかった場合には（ステップＳ１１０３でＮＯ）、制御部２０３ｄは撮影画像とドキュメント画像に差分があるか否か判別する（ステップＳ１１０４）。

ステップＳ１１０４の判別の結果、差分がない場合には（ステップＳ１１０４でＮＯ）、ステップＳ１１０６に進む。

一方、ステップＳ１１０４の判別の結果、差分がある場合には（ステップＳ１１０４でＹＥＳ）、制御部２０３ｄは差分が発生している画像領域を撮影画像から抽出し、それをドキュメント画像に合成する（ステップＳ１１０５）。この合成によって、撮影画像にだけ含まれていた付箋紙がドキュメント画像に反映される。

そして、制御部２０３ｄは、通信部２０３ａを利用し、ドキュメント画像の生成終了を携帯端末１０４に通知して（ステップＳ１１０６）、本処理を終了する。

このように、本実施の形態では、印刷物の印刷後に新たに加えられた要素を示す画像が含まれている撮影画像を受信した場合には、ドキュメント画像と撮影画像との差分をとることで新たに加えられた要素を示す画像を抽出し、ドキュメント画像に抽出した画像を合成した追加要素合成ドキュメント画像を提供するようになっている。

図１１，１２の処理によれば、付箋紙のようにユーザが付加した情報がある印刷物に対しても、付加された情報を含め、高画質の拡大表示や印刷が可能になる。

本実施の形態によれば、印刷物を撮影し（ステップＳ５０１）、印刷物を撮影することで得られた撮影画像から、ドキュメントを特定する特定情報を用いて、ドキュメントから生成されるドキュメント画像の生成を要求し（ステップＳ５０８）、生成されたドキュメント画像を用いて予め定められた処理を実行する（ステップＳ５０１０）ので、より高画質な画像を用いて処理を実行可能となる。

実際、図４に示した各印刷物に対するいずれの処理においても、撮影画像より高画質なドキュメント画像を用いて予め定められた処理を実行するので、撮影画像に対して予め定められた処理を実行する場合と比較して、より高画質な画像を用いて処理を実行可能となる。

また、本実施の形態によれば、ウォーターマークや付箋紙のようにプリンタドライバやユーザが印刷物に後から追加した情報があっても、それらを考慮した表示や印刷が可能になる。

（他の実施の形態）
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）をネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムコードを読み出して実行する処理である。この場合、そのプログラム、及び該プログラムを記憶した記憶媒体は本発明を構成することになる。

１００ 画像形成システム
１０１ ＰＣ
１０２ プリンタ
１０３ ドキュメントサーバ
１０４ 携帯端末
１２１１，１２２１，１２３１ ＣＰＵ
１２１２，１２２２，１２３２ ＲＡＭ
１２１３，１２２３，１２３３ ＲＯＭ
１２３８ カメラ

Claims (6)

1. 電子データであるドキュメントを印刷した印刷物を撮影する撮影手段と、
   前記撮影手段により前記印刷物を撮影することで得られた撮影画像を拡大した拡大画像を表示する指示を受け付ける受付手段と、
   前記撮影手段により前記印刷物を撮影することで得られた前記撮影画像から、該印刷物に印刷された前記ドキュメントの電子データの記憶場所を特定する特定情報を取得する第１の取得手段と、
   前記第１の取得手段により取得された前記特定情報を用いて、前記ドキュメントの電子データを取得する第２の取得手段と、
   前記撮影画像の解像度が第１の解像度である場合には、命令に従って前記撮影画像を拡大して表示手段に表示させる制御を行い、前記撮影画像の解像度が前記第１の解像度よりも低い第２の解像度である場合には、前記第２の取得手段により取得された前記電子データの表示サイズを前記命令に従って変更した電子データを前記表示手段に表示させる制御を行う表示制御手段と
   を有することを特徴とする携帯端末。
2. 前記第２の取得手段は、サーバが前記電子データに追加画像を合成した合成画像を取得し、
   前記表示制御手段は、前記第２の取得手段により取得された前記合成画像を拡大表示する制御を行うことを特徴とする請求項１に記載の携帯端末。
3. 前記特定情報は、前記ドキュメントの電子データが記憶された場所を示すファイルパスであることを特徴とする請求項１に記載の携帯端末。
4. 情報処理装置、携帯端末、及びサーバを有する画像形成システムであって、
   前記情報処理装置は、
   画像形成装置が印刷するドキュメントの電子データを記憶する記憶手段と、
   前記記憶手段により記憶された前記ドキュメントの電子データの記憶場所を特定する特定情報を取得する取得手段と、
   前記ドキュメントの電子データから前記画像形成装置で印刷するための印刷データを生成する生成手段と、
   前記特定情報を示す画像を前記生成手段により生成された印刷データに追加する追加手段と、
   前記追加手段により前記特定情報を示す画像が追加された印刷データを印刷するために前記画像形成装置に送信する送信手段と
   を有し、
   前記携帯端末は、
   前記特定情報を示す画像が追加された印刷データを前記画像形成装置が印刷した印刷物を撮影する撮影手段と、
   前記撮影手段により前記印刷物を撮影することで得られた撮影画像を拡大した拡大画像を表示する指示を受け付ける受付手段と、
   前記撮影手段により前記印刷物を撮影することで得られた前記撮影画像から、前記特定情報を取得する第１の取得手段と、
   前記第１の取得手段により取得された前記特定情報を用いて、前記ドキュメントの電子データを取得する第２の取得手段と、
   前記撮影画像の解像度が第１の解像度である場合には、命令に従って前記撮影画像を拡大して表示手段に表示させる制御を行い、前記撮影画像の解像度が前記第１の解像度よりも低い第２の解像度である場合には、前記第２の取得手段により取得された前記電子データの表示サイズを前記命令に従って変更した電子データを前記表示手段に表示させる制御を行う表示制御手段と
   を有し、
   前記サーバは、
   ドキュメントの電子データから生成されるドキュメント画像の生成を、前記ドキュメントを特定する特定情報に基づいて要求された場合に、前記ドキュメントの電子データから前記ドキュメント画像を生成する生成手段と、
   前記生成手段に生成された前記ドキュメント画像を要求元に提供する提供手段と、
   を有することを特徴とする画像形成システム。
5. 携帯端末の制御方法であって、
   電子データであるドキュメントを印刷した印刷物を撮影する撮影ステップと、
   前記撮影ステップにより前記印刷物を撮影することで得られた撮影画像を拡大した拡大画像を表示する指示を受け付ける受付ステップと、
   前記撮影ステップにより前記印刷物を撮影することで得られた前記撮影画像から、該印刷物に印刷された前記ドキュメントの電子データの記憶場所を特定する特定情報を取得する第１の取得ステップと、
   前記第１の取得ステップにより取得された前記特定情報を用いて、前記ドキュメントの電子データを取得する第２の取得ステップと、
   前記撮影画像の解像度が第１の解像度である場合には、命令に従って前記撮影画像を拡大して表示手段に表示させる制御を行い、前記撮影画像の解像度が前記第１の解像度よりも低い第２の解像度である場合には、前記第２の取得ステップにより取得された前記電子データの表示サイズを前記命令に従って変更した電子データを前記表示手段に表示させる制御を行う表示制御ステップと
   を有することを特徴とする制御方法。
6. 携帯端末の制御方法をコンピュータに実行させるためのプログラムであって、
   前記制御方法は、
   電子データであるドキュメントを印刷した印刷物を撮影する撮影ステップと、
   前記撮影ステップにより前記印刷物を撮影することで得られた撮影画像を拡大した拡大画像を表示する指示を受け付ける受付ステップと、
   前記撮影ステップにより前記印刷物を撮影することで得られた前記撮影画像から、該印刷物に印刷された前記ドキュメントの電子データの記憶場所を特定する特定情報を取得する第１の取得ステップと、
   前記第１の取得ステップにより取得された前記特定情報を用いて、前記ドキュメントの電子データを取得する第２の取得ステップと、
   前記撮影画像の解像度が第１の解像度である場合には、命令に従って前記撮影画像を拡大して表示手段に表示させる制御を行い、前記撮影画像の解像度が前記第１の解像度よりも低い第２の解像度である場合には、前記第２の取得ステップにより取得された前記電子データの表示サイズを前記命令に従って変更した電子データを前記表示手段に表示させる制御を行う表示制御ステップと
   を有することを特徴とするプログラム。

Images