JP6561936B2 - 画像表示システム及び情報処理装置 - Google Patents

Description

本発明は、画像表示システム及び情報処理装置に関し、特に、印刷対象画像を複数の画像に分割して、これらの画像をそれぞれの記録紙に記録し、これらの記録紙を配列して貼り付けることで、印刷対象画像全体を示す印刷物を作成する作業を支援するための技術に関する。

例えば、特許文献１には、印刷対象画像を複数の画像に分割して、これらの各画像をそれぞれの記録紙に印刷するという所謂ポスター印刷の技術が記載されている。当該ポスター印刷により記録された記録紙を壁などに配列して貼り付けると、印刷対象画像全体を示す印刷物を作成することができる。そして、当該特許文献１に記載の技術は、印刷対象画像を分割した各画像の一辺に余白部分を設け、これら各画像を表示部に表示させることで、これらの余白部分に基づき各画像の相対的な位置をユーザーが把握可能として、各画像を配列してなる画像全体をユーザーが確認できるようにしている。

特開２０１５−２２６３０２号公報

ところで、複数の画像を記録したそれぞれの記録紙を壁などに配列して貼り付ける場合、例えば１枚目の記録紙を位置決めして貼り付け、この１枚目の記録紙の位置に合わせて、２枚目以降の他の各記録紙を壁に貼り付けて行く。従って、全ての記録紙を壁に貼り付けてから、全ての記録紙により示される画像全体についての当該壁における位置や、画像自体の角度等が明らかとなる。このため、当該壁における画像全体の位置や角度がユーザーの意に沿わなかった場合は、全ての記録紙の貼り付け作業をやり直す必要があった。つまり、１枚目の記録紙の位置決めを適確に行わなければ、画像全体を所望の位置に配置することができず、また１枚目の記録紙のみを位置決めしただけでは、画像全体の位置を正確に把握することが困難である。

また、特許文献１では、各画像をそれぞれの位置に配置した状態を表示することで、画像全体の把握を可能にしているが、１枚目の記録紙を壁などに実際に位置決めした状態から、貼り付けた全ての記録紙により示される画像の位置や角度を正確に把握するための技術については開示がない。

本発明は、上記の事情に鑑みなされたものであり、印刷対象画像を複数の画像に分割して、これらの各画像が印刷されたそれぞれの記録紙を壁などに配列して貼り付けて印刷対象画像全体を示す印刷物を得る場合に、１枚目の記録紙を壁等に配置するだけで、上記各記録紙により構成される当該印刷物の位置や角度をユーザーが把握可能にすることを目的とする。

本発明の一局面にかかる画像表示システムは、情報処理装置と画像形成装置とを備える画像表示システムであって、前記画像形成装置は、印刷対象画像を複数の記録媒体への画像形成用に分割した各画像と、当該各画像の合成により前記印刷対象画像を形成可能な当該各画像の配置位置を示す配置位置情報とを生成する画像処理部と、前記画像処理部によって分割された各画像をそれぞれの記録媒体に画像形成する画像形成部と、前記分割された各画像と前記配置位置情報とを前記情報処理装置に送信する送信部とを備え、前記情報処理装置は、撮像部と、前記撮像部により撮像された撮像画像を表示する表示部と、前記画像形成装置から前記分割された各画像及び前記配置位置情報を受信する受信部と、前記撮像画像から、前記受信部により受信された前記各画像のいずれかに相当する検出画像を検出する画像検出部と、前記撮像画像における、前記検出画像に対する前記検出画像以外の他の画像の配置目標位置を前記配置位置情報に基づいて算出する目標位置算出部と、前記撮像画像における、前記目標位置算出部によって算出された配置目標位置に、前記受信部により受信された前記各画像のうち前記検出画像以外の他の各画像を配置して、前記分割を行う前の前記印刷対象画像を前記撮像画像中に生成する画像生成部と、前記画像生成部によって生成された前記印刷対象画像を含む前記撮像画像からなる仮想画面を前記表示部に表示させる制御部と、を備えるものである。

また、本発明の一局面にかかる情報処理装置は、撮像部と、前記撮像部により撮像された撮像画像を表示する表示部と、画像形成装置から、当該画像形成装置において印刷対象画像を複数の記録媒体への画像形成用に分割された各画像と、当該各画像の合成により前記印刷対象画像を形成可能な当該各画像の配置位置を示す配置位置情報とを受信する受信部と、前記撮像画像から、前記受信部により受信された前記各画像のいずれかに相当する検出画像を検出する画像検出部と、前記撮像画像における、前記検出画像に対する前記検出画像以外の他の画像の配置目標位置を前記配置位置情報に基づいて算出する目標位置算出部と、前記撮像画像における、前記目標位置算出部によって算出された配置目標位置に、前記受信部により受信された前記各画像のうち前記検出画像以外の他の各画像を配置して、前記分割を行う前の前記印刷対象画像を前記撮像画像中に生成する画像生成部と、前記画像生成部によって生成された前記印刷対象画像を含む前記撮像画像からなる仮想画面を前記表示部に表示させる制御部と、を備えるものである。

本発明によれば、印刷対象画像を複数の画像に分割して、これらの各画像が印刷されたそれぞれの記録紙を壁などに配列して貼り付けて印刷対象画像全体を示す印刷物を得る場合に、１枚目の記録紙を壁等に配置するだけで、上記各記録紙により構成される印刷物の位置や角度をユーザーが把握可能にすることができる。

本発明の第１実施形態の画像表示システムにおける画像形成装置の外観及び情報処理装置の外観を示す斜視図である。 第１実施形態の画像表示システムにおける画像形成装置の構成及び情報処理装置の構成を示すブロック図である。 （ａ）は画像全体を示す図であり、（ｂ）は画像全体を構成する各画像が記録されたそれぞれの記録紙を示す図である。 （ｃ）は情報処理装置の表示部に表示された撮像画像を示す図であり、（ｄ）は撮像画像に配置された１枚目の記録紙の画像に対して他の画像を組み合わせてなる仮想画面を示す図である。 第１実施形態の画像表示システムによる処理手順を示すフローチャートである。 第２実施形態の画像表示システムにおける画像形成装置の構成及び情報処理装置の構成を示すブロック図である。 第２実施形態の画像表示システムによる処理手順を示すフローチャートである。

以下、本発明の実施形態にかかる画像表示システムについて図面を参照して説明する。
＜第１実施形態＞

図１は、本発明の第１実施形態にかかる画像表示システムにおける画像形成装置の概観及び情報処理装置の外観を示す斜視図である。図２は、第１実施形態にかかる画像表示システムにおける画像形成装置の構成及び情報処理装置の構成を示すブロック図である。

第１実施形態の画像表示システムＳｙにおいて、画像形成装置１０は、制御ユニット１１と、表示部１２と、操作部１４と、通信部１６と、画像読取部１７と、画像形成部１８と、記憶部１９とを備えている。これらの構成要素は、互いにバスを通じてデータ又は信号の送受信を可能とされている。

画像読取部１７は、コンタクトガラスに載置された原稿を光学的に読み取るスキャナーを有し、この原稿の画像を示す画像データを生成する。

画像形成部１８は、感光体ドラム、感光体ドラムの表面を均一帯電させる帯電装置、感光体ドラムの表面を露光して、感光体ドラムの表面に静電潜像を形成する露光装置、感光体ドラムの表面の静電潜像をトナー像に現像する現像装置、及び感光体ドラムの表面のトナー像（画像）を記録紙に転写する転写装置等を備え、画像読取部１７により生成された画像データによって示される画像を記録紙に印刷する。

表示部１２は、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（ＯＬＥＤ：Organic Light-Emitting Diode）ディスプレイなどから構成される。

操作部１４は、例えば、メニューを呼び出すメニューキー、メニューを構成するＧＵＩにおけるフォーカスを移動させる矢印キー、メニューを構成するＧＵＩに対して確定操作を行う決定キー、スタートキーなどを備えている。

通信部１６は、通信モジュールを備える通信インターフェイスであり、ネットワークを通じて情報処理装置３０との間でデータ通信を行ったり、あるいは近距離通信方式により情報処理装置３０との間でデータ通信を行ったりする。

記憶部１９は、ＨＤＤ（Hard Disk Drive）などの大容量の記憶装置であって、画像データ等を記憶する。

制御ユニット１１は、プロセッサー、ＲＡＭ(Random Access Memory）、及びＲＯＭ（Read Only Memory）などから構成される。プロセッサーは、例えば、ＣＰＵ（Central Processing Unit）、ＡＳＩＣ、又はＭＰＵ等である。この制御ユニット１１は、上記のＲＯＭまたは記憶部１９に記憶された動作制御プログラムが上記のプロセッサーで実行されることにより、制御部２１、操作受付部２２、表示制御部２３、通信制御部２４、及び画像処理部２５として機能する。なお、制御ユニット１１の上記の各構成は、当該動作制御プログラムに基づく動作によらず、それぞれハード回路により構成されてもよい。

制御部２１は、画像形成装置１０の全体的な動作制御を司る。

操作受付部２２は、操作部１４のハードキーに対するユーザー操作を受け付ける機能を有する。

表示制御部２３は、表示部１２を制御して、画像形成処理に必要な設定項目の入力画面、あるいは情報の入力画面などを表示する。

通信制御部２４は、通信部１６による通信動作を制御する機能を有する。通信部１６は、通信制御部２４による制御のもと、情報処理装置３０との間でデータを送受する。

画像処理部２５は、例えば記憶部１９から画像データを読み出して、画像データに対して各種の画像処理を施す。例えば、画像処理部２５は、後述するポスター印刷のために、印刷対象画像を、複数の記録媒体への画像形成用に分割する。すなわち、画像処理部２５は、印刷対象画像を複数の記録紙への画像形成用に分割した各画像と、当該各画像の合成により上記印刷対象画像を形成可能にする当該各画像の配置位置を示す配置位置情報とを生成する。この配設位置は、当該各画像の１つを基準画像として、当該基準画像に対する他の各画像の相対的な位置により定められる。画像形成部１８は、画像処理部２５によって分割された当該各画像をそれぞれの記録紙に画像形成する。通信部（受信部の一例）１６は、当該分割された各画像と配置位置情報とを情報処理装置３０に送信する。

一方、本実施形態の画像表示システムＳｙにおいて、情報処理装置３０は、例えば、スマートフォンなどの携帯端末装置である。情報処理装置３０は、制御ユニット３１と、表示部４１と、タッチパネル（入力部）４２と、ハードキー４３と、記憶部４４と、通信部４５と、撮像部４６と、音声出力部４７とを備えている。これらの構成要素は、互いにバスを通じてデータ又は信号の送受信を可能とされている。

表示部４１は、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（ＯＬＥＤ：Organic Light-Emitting Diode）ディスプレイなどから構成される。

表示部４１の画面には、タッチパネル４２が配置されている。タッチパネル４２は、所謂抵抗膜方式や静電容量方式などのタッチパネルであって、タッチパネル４２に対するユーザーの指などの接触（タッチ）をその接触位置とともに検知する。

また、情報処理装置３０は、ユーザー操作が入力される操作部として、上記のタッチパネル４２に加えてハードキー４３を備えている。

通信部４５は、通信モジュールを備える通信インターフェイスであり、ネットワークを通じて画像形成装置１０との間でデータ通信を行ったり、あるいは近距離通信方式により画像形成装置１０との間でデータ通信を行ったりする。通信部４５は、画像形成装置１０から上記分割された各画像及び配置位置情報を受信する。

記憶部４４は、フラッシュメモリーなどの大容量の記憶装置である。

撮像部４６は、撮像素子及びレンズなどからなるカメラである。

音声出力部（報知部の一例）４７は、音声信号を増幅するアンプ、及び音声を発生するスピーカーなどからなる。

制御ユニット３１は、プロセッサー、ＲＡＭ(Random Access Memory）、及びＲＯＭ（Read Only Memory）などから構成される。プロセッサーは、例えば、ＣＰＵ（Central Processing Unit）、ＡＳＩＣ、又はＭＰＵ等である。制御ユニット３１は、上記のＲＯＭ又は記憶部４４に記憶された制御プログラムが上記のプロセッサーにより実行されることにより、制御部５１、操作受付部５２、画像検出部５３、目標位置算出部５４、及び画像生成部５５として機能する。なお、制御ユニット３１の上記の各構成要素は、前述の制御プログラムに基づく動作によらず、それぞれハード回路により構成されてもよい。

制御部５１は、情報処理装置３０の全体的な動作制御を司る。また、制御部５１は、例えば記憶部４４から画像データを読み出して、画像データに対して各種の処理を施す。

また、制御部５１は、表示部４１を制御して、情報処理に必要な設定項目を表示部４１の画面に表示したり、撮像部４６により撮像された撮像画像を該画面に表示したりする。

更に、制御部５１は、通信部４５の通信動作を制御する機能を有する。通信部４５は、制御部５１による制御のもと、画像形成装置１０との間でデータを送受する。通信部４５は、画像形成装置１０から上記分割された各画像及び上記配置位置情報を受信する。

操作受付部５２は、タッチパネル４２から出力される検知信号あるいはハードキー４３の操作に基づき、ユーザーにより入力されたユーザー操作を特定する。そして、操作受付部５２は、特定したユーザー操作を受け付け、当該ユーザー操作に対応する制御信号を制御部５１などに出力する。

画像検出部５３は、撮像部４６により撮像された撮像画像から、通信部（受信部の一例）４５により受信された上記各画像のいずれかに相当する検出画像を検出する。画像検出部５３は、例えば、パターンマッチング技術を用いて、当該検出を行う。

目標位置算出部５４は、上記撮像画像における、画像検出部５３により検出された検出画像に対する、当該検出画像以外の他の画像の配置目標位置を上記配置位置情報に基づいて算出する。

画像生成部５５は、上記撮像画像における、目標位置算出部５４によって算出された配置目標位置に、通信部４５により受信された上記各画像のうち上記検出画像以外の他の各画像を配置して、上記分割を行う前の印刷対象画像を上記撮像画像中に生成する。制御部５１は、画像生成部５５によって生成された上記印刷対象画像を含む撮像画像からなる仮想画面を表示部４１に表示させる。

ここで、第１実施形態の画像形成装置１０では、印刷対象画像を複数の各画像に分割して、これらの各画像をそれぞれの記録紙に記録するという所謂ポスター印刷の実行が可能とされている。

例えば、当該ポスター印刷により記録された記録紙を壁などに配列して貼り付けると、ユーザーは、当該各画像が印刷されたそれぞれの記録紙のうち、いずれか１枚の記録紙を壁などに位置決めして貼り付け、この１枚目の記録紙の位置に合わせて、２枚目以降の他の各記録紙を順次貼り付けて、印刷対象画像の全体を示す印刷物を作成する。

このとき、ユーザーは、まず１枚目の記録紙を壁などに仮止めしてから、情報処理装置３０を操作して、撮像部４６により仮止めされた１枚目の記録紙を含む当該壁を撮像する。また、上記通信部１６，４５を介して、情報処理装置３０では、画像形成装置１０から印刷対象画像が分割された各画像及び上記配置位置情報を受信する。情報処理装置３０の画像検出部５３は、撮像部４６により撮像された撮像画像から、１枚目の記録紙に画像形成されている画像に相当する検出画像を検出する。

ここで、画像形成装置１０は、既知のＡＲ（拡張現実）技術により以下の処理を行う。画像生成部５５が、目標位置算出部５４により算出された配置目標位置に従って、撮像画像における上記検出画像に対して、上記分割された他の各画像を配置して、上記分割を行う前の印刷対象画像を上記撮像画像中に生成する。制御部５１は、当該生成された印刷対象画像を含む撮像画像からなる仮想画面を表示部４１に表示させる。このため、ユーザーは、１枚目の記録紙を仮止めした時点で、その仮想画面を見て、上記各記録紙により構成される印刷物の位置や角度を把握することができる。

例えば、画像形成装置１０では、図３（ａ）に示すように、画像処理部２５が、全体画像６１を４つの画像６２ａ、６２ｂ、６２ｃ、６２ｄに分割する。画像形成部１８は、図３（ｂ）に示すように各画像６２ａ、６２ｂ、６２ｃ、６２ｄを４枚の記録紙６３ａ、６３ｂ、６３ｃ、６３ｄにそれぞれ画像形成する。

そして、ユーザーは、１枚目の記録紙６３ａを、部屋の壁等に仮止めする。ユーザーは、情報処理装置３０を操作して、１枚目の記録紙６３ａが仮止めされた当該壁を撮像して、図４（ｃ）に示すように、その撮像画像を表示部４１に表示させる。情報処理装置３０では、画像形成装置１０から各画像６２ａ、６２ｂ、６２ｃ、６２ｄ及び上記配置位置情報を受信する。画像検出部５３は、上記撮像画像から１枚目の記録紙６３ａに記録されている画像６２ａを検出する。画像生成部５５は、目標位置算出部５４により算出された配置目標位置に従って、図４（ｄ）に示すように、検出した画像６２ａに対して他の各画像６２ｂ、６２ｃ、６２ｄを配置して、上記分割を行う前の印刷対象画像を上記撮像画像中に生成する。制御部５１は、当該生成された印刷対象画像を含む撮像画像からなる仮想画面を表示部４１に表示させる。

ユーザーは、仮想画面６４を見て、撮像画像における、生成された印刷対象画像である全体画像６１の位置を確認し、全体画像６１の位置が所望の通りであると認めると、１枚目の記録紙６３ａを位置決めして固定し、１枚目の記録紙６３ａの位置に合わせて、他の各記録紙６３ｂ、６３ｃ、及び６３ｄを順次貼り付けて、記録紙６３ａ、６３ｂ、６３ｃ、及び６３ｄからなる、印刷対象物全体を示す印刷物を作成する。

また、ユーザーは、仮想画面６４を見て、全体画像６１の位置を修正することにした場合は、１枚目の記録紙６３ａの位置を変更して、他の記録紙６３ｂ、６３ｃ、及び６３ｄを壁から外し、１枚目の記録紙６３ａを再度仮止めし、情報処理装置３０を操作して、当該壁を再び撮像し、これにより得られた撮像画像に全体画像６１が位置決めして合成された仮想画面６４を表示部４１に表示させて、撮像画像における全体画像６１の位置を再度確認する。

なお、情報処理装置３０を机等に置いた状態で、１枚目の記録紙６３ａが仮止めされた壁を撮像することが可能な場合は、１枚目の記録紙６３ａの位置変更を繰り返し、その度に、撮像画像に全体画像６１が位置決めされた仮想画面６４を表示させることで、ユーザーは、情報処理装置３０の表示部４１が見える位置に移動すれば、この仮想画面６４を確認しながら、印刷対象画像全体を示す印刷物を壁に貼り付けるための各記録紙の位置を調節することができる。

また、ユーザーが情報処理装置３０を手持ちで操作する場合は、他の人に手伝ってもらって、１枚目の記録紙６３ａの位置変更を繰り返し、その度に、仮想画面６４を確認して、全体画像６１の位置を調節することができる。

次に、そのようなポスター機能の利用に際し、拡張現実を利用して、撮像画像に全体画像６１を位置決めして重ね合わせた仮想画面を表示するまでの画像表示システムによる処理の手順を、図５に示すフローチャートを参照して詳しく説明する。

まず、ユーザーは、画像形成装置１０の操作部１４を操作して、例えば記憶部１９に記憶されている画像データが示す画像を印刷対象画像として指定し、ポスター印刷の実行と、画像全体の分割数とを指示する。画像形成装置１０では、それらの指示が操作受付部５２で受け付けられると、画像処理部２５が、記憶部１９から上記指定された画像データを読み出して、当該画像データが示す画像を、指定された複数の各画像に分割する。このとき、画像処理部２５は、例えば図３（ｂ）に示す画像が用いられる場合、当該各画像の１つ、右上の画像６２ａを基準画像として、当該基準画像に並べて配列することで分割前の印刷対象画像を形成できることになる、他の画像の配置位置を、当該基準画像に対する相対位置により示される配置位置情報を算出する。

そして、画像形成部１８は、上記分割された各画像を画像処理部２５から受け取って、これら各画像をそれぞれ別個の同一サイズの記録紙に画像形成する（ステップＳ１０１）。例えば、画像形成部１８は、図３（ａ）に示すような全体画像６１を分割してなる４つの画像６２ａ、６２ｂ、６２ｃ、６２ｄを、図３（ｂ）に示すように４枚の記録紙６３ａ、６３ｂ、６３ｃ、６３ｄにそれぞれ画像形成する。

また、ユーザーは、画像形成装置１０の操作部１４を操作して、上記分割された各画像と、これらについての上記配置位置情報を情報処理装置３０に送信することを指示する。この場合は、制御部２１が、各画像６２ａ、６２ｂ、６２ｃ、６２ｄ及び配置位置情報を、通信部１６を通じて例えばＬＡＮにより情報処理装置３０に送信する。

情報処理装置３０では、各画像６２ａ、６２ｂ、６２ｃ、６２ｄ及び配置位置情報を、通信部４５で受信すると、これらの画像データを記憶部４４に記憶する（ステップＳ１０２）。

この後、ユーザーは、壁に仮止めする１枚目の記録紙として、例えば全体画像６１における、基準画像が画像形成されている右上角の記録紙６３ａを壁に仮止めし、この後、情報処理装置３０のタッチパネル４２を操作して、撮像部４６による撮像の実行指示を入力すると、当該指示が操作受付部５２に受け付けられる（ステップＳ１０３）。このとき、ユーザーは、情報処理装置３０を、仮止めされている上記１枚目の記録紙を含む壁部分が撮像部４６により撮像される向きとしておく。上記指示に従って、制御部５１は、撮像部４６を起動させ、撮像部４６による撮像を開始させる（Ｓ１０４）。このとき、制御部５１は、撮像部４６により撮像されている映像（撮像画像）を、リアルタイムで表示部４１に表示させる。

このとき、画像検出部５３は、１枚目の記録紙６３ａが配置された壁が撮像された撮像画像を解析して、上記基準画像として設定されている１枚目の記録紙６３ａ（画像６２ａ）に相当する画像（検出画像）を検出する（ステップＳ１０５）。目標位置算出部５４は、当該撮像画像における、上記検出画像以外の他の各画像、この例では、画像６２ｂ、６２ｃ、６２ｄの配置目標位置を、上記受信された配置位置情報に基づいて算出する。

そして画像生成部５５は、上記算出された配置目標位置に従って、図４（ｄ）に示すように、上記検出画像としての画像６２ａに対して、他の各画像６２ｂ、６２ｃ、６２ｄを配置して、上記印刷対象画像の全体を示す全体画像６１を生成し、上記撮像画像に全体画像６１を位置決めして、全体画像６１を合成した撮像画像を仮想画面６４として生成する。

例えば、画像生成部５５は、上記検出された画像６２ａの姿勢に合わせて、当該画像６２ａ以外の他の各画像６２ｂ、６２ｃ、６２ｄを移動、回転、又は拡大縮小させて、分割を行う前の上記印刷対象画像を生成する。

制御部５１は、この仮想画面６４を表示部４１に表示させる（ステップＳ１０６）。

これにより、ユーザーは、仮想画面６４を見て、壁における全体画像６１の位置を確認することができる。この確認により、ユーザーは、１枚目の記録紙６３ａを位置決めして固定し、他の各記録紙６３ｂ、６３ｃ、６３ｄを順次貼り付けて、上記大きな全体画像６１を作成することが可能になる。

あるいは、ユーザーは、壁における全体画像６１の位置を修正するべく、１枚目の記録紙６３ａの位置を変更してから、ハードキー４３を操作して、撮像部４６による撮像の実行を再度指示すると（ステップＳ１０７で「Ｙｅｓ」）、ステップＳ１０４〜Ｓ１０６が繰り返される。

このように第１実施形態では、１枚目の記録紙６３ａを壁に仮止めして、１枚目の記録紙６３ａが配置された壁などを撮像すると、撮像画像に上記全体画像６１を重ね合わせた仮想画面６４が表示部４１に表示されるので、全ての記録紙６３ａ〜６３ｄを実際に貼り付ける前に、壁において、分割前の印刷対象画像全体を示す印刷物の位置を確認することができる。
＜第２実施形態＞

次に、本発明の第２実施形態の画像表示システムについて説明する。図６は、第２実施形態の画像表示システムにおける画像形成装置の構成及び情報処理装置の構成を示すブロック図である。なお、第２実施形態の画像表示システムにおける情報処理装置及び画像形成装置は、第１実施形態と同様に、図１及び図２に示すような外観及び内部構成を有している。第２実施形態の説明では、第１実施形態と同様の処理については説明を省略する。

図６に示すように、第２実施形態に係る画像表示システムにおける情報処理装置３０は、制御ユニット３１が、更に、位置検出部５６及び判別部５７を備えている。第１実施形態と同様に、制御ユニット３１は、ＲＯＭ又は記憶部４４に記憶された制御プログラムが上記のプロセッサーにより実行されることにより、制御部５１、操作受付部５２、画像検出部５３、目標位置算出部５４び画像生成部５５、位置検出部５６及び判別部５７として機能する。なお、制御ユニット３１の上記の各構成要素は、前述の制御プログラムに基づく動作によらず、それぞれハード回路により構成されてもよい。

位置検出部５６は、画像検出部５３により、撮像部４６により撮像された撮像画像から上記検出画像が検出された後に、印刷対象画像を構成する他の各画像のいずれかが更に検出されたとき、当該撮像画像における当該更に検出された他の各画像の位置を検出する。

例えば、画像検出部５３は、上記基準画像を検出した後、撮像部４６により撮像された撮像画像に、当該基準画像以外の他の各画像のいずれかが存在するか否かの検出を、例えばパターンマッチング技術を用いて行う。位置検出部５６は、画像検出部５３により撮像画像中に他の各画像のいずれかが検出された場合には、撮像画像における当該検出された他の画像の座標位置を算出し、当該算出した座標位置を、上記更に検出された他の画像の位置とする。

判別部５７は、位置検出部５６によって検出された上記他の画像の位置と、この時点で目標位置算出部５４により算出されている、当該検出された他の画像についての配置目標位置とが一致しているかを判別する。判別部５７は、該検出された他の画像についての配置目標位置に対応する、撮像画像における座標位置を算出し、当該算出した座標位置と、上記位置検出部５６によって検出された上記他の画像の位置との比較により、上記判別を行う。

第２実施形態では、画像検出部５３が、検出画像としての画像６２ａを検出した後に、他の各画像６２ｂ、６２ｃ、６２ｄのいずれかを撮像画像中に検出すると、位置検出部５６が、当該検出された他の画像の位置と、当該検出された各画像についての配置目標位置とが一致しているかを判別する。当該判別部５７による判別結果は、制御部５１が報知部としての表示部４１に表示させる。

また、判別部５７が、上記配置目標位置に対する、位置検出部５６によって検出された上記他の各画像の位置のずれ量を判別結果として判別し、報知部としての音声出力部４７が、当該判別されたずれ量を音声で出力するようにしてもよい。

例えば、判別部５７は、上記ずれ量として、配置目標位置に対する、検出された上記他の画像のずれ方向又はずれ角度を判別し、音声出力部４７がこれを音声で出力する。この場合、ユーザーは、所望の配置位置に印刷対象画像を示す印刷物を貼り付けるには、最初に貼り付けた１枚目の記録紙に対して、他の記録紙をどのように移動させて貼り付ければ良いかを把握することができる。

次に、第２実施形態の画像表示システムによる画像表示の処理手順を説明する。図７は、第２実施形態の画像表示システムによる処理手順を示すフローチャートである。第１実施形態と同様の処理は説明を省略する。

第２実施形態では、画像検出部５３が上記検出画像を検出して、画像生成部５５が上記分割を行う前の印刷対象画像を生成し、図４（ｄ）に例を示すように、当該印刷対象画像を含む撮像画像を仮想画面６４として表示部４１に表示させているときに（ステップＳ２０６）、画像検出部５３が、撮像部４６により撮像されている表示中の撮像画像に、当該基準画像以外の他の各画像のいずれかを検出した場合（ステップＳ２０７でＹＥＳ）、判別部５７が、上記配置目標位置に対する、位置検出部５６によって検出された上記他の各画像の位置のずれ量として、配置目標位置に対する、検出された上記他の画像のずれ方向又はずれ角度を判別する（ステップＳ２０８）。なお、図７では、ステップＳ２０７でＮＯの場合、処理はステップＳ２１０に移るとしているが、ステップＳ２０７〜ステップＳ２０９の処理は、ユーザーにより撮像部４６による撮像実行の再指示があるまでは、継続して行われる。

制御部５１は、音声出力部４７に、当該判別されたずれ量を音声で出力させる（ステップＳ２０９）。ここでは、ずれ量がない場合は、音声出力部４７により「ずれ量なし」が音声で出力されることになる。

なお、制御部５１は、ずれ方向又はずれ角度について、軽度ずれ、中程度ずれ、及び大幅ずれのそれぞれのカテゴリーに属する値の範囲を定めておき、判別されたずれ方向又はずれ角度の値がいずれのカテゴリーに属するかに応じて、音声出力の内容を変更するようにしてもよい。例えば、制御部５１は、音声出力部４７に、軽度ずれに属する場合は、音声出力を「少しだけずれています」とし、中程度ずれに属する場合は、音声出力を「ずれています」とし、大幅ずれに属する場合は、音声出力を「かなりずれています」として、音声出力を行わせてもよい。

これにより、ユーザーは、所望の配置位置に印刷対象画像を示す印刷物を貼り付けるには、１枚目の記録紙に対して、他の記録紙をどのように移動させて貼り付ければ良いかを把握することができる。

なお、本発明は上記実施の形態の構成に限られず種々の変形が可能である。例えば、上記各実施形態では、画像検出部５３が、印刷対象画像が分割された各画像のうちの予め定められた１つを基準画像として検出したときに、目標位置算出部５４が、上記配置位置情報に基づいて、この基準画像に対する他の各画像の配置目標位置を算出するようにしているが、これに代えて、例えば、画像検出部５３が、印刷対象画像が分割された各画像のうちのいずれか不特定の１つを検出したときに、目標位置算出部５４が、上記配置位置情報に基づいて、上記基準画像についての配置目標位置を算出し、上記基準画像についての配置目標位置から更に上記配置位置情報に基づいてこの基準画像に対する他の各画像の配置目標位置を算出するようにし、当該各配置目標位置から、分割を行う前の上記印刷対象画像を生成するようにしてもよい。

なお、上記各実施形態では、情報処理装置３０としてスマートフォンなどの携帯端末装置を例示しているが、他の種類の電子機器であってもよい。また、表示部４１と撮像部４６をそれぞれの装置として別体に設け、撮像部４６により撮像された撮像画像を撮像部４６から表示部４１に送信して、撮像画像を表示部４１に表示させるようにしても構わない。この場合は、撮像部４６を、記録紙が貼り付けられる壁を撮像可能な定位置に置き、表示部４１はユーザーが視認できる位置に置くことで、ユーザーが、表示部４１に表示される上記仮想画面６４を見ながら、印刷対象物を示す印刷物を構成する各記録紙の配置位置を調整することが可能になる。

また、画像形成装置１０の画像処理部２５が印刷対象画像を分割する分割数は、任意の分割数でよい。分割数が多くなる程、印刷対象物を示す印刷物を構成するための記録紙の枚数が増えて、各記録紙を適確に配置することが困難になるが、画像表示システムＳｙによれば、上記仮想画面６４の表示により、当該各記録紙の配置位置を把握できるため、画像表示システムＳｙの有用性が高くなる。

また、第２実施形態では、１枚目の記録紙６３ａのずれ方向又はずれ角度を音声で出力しているが、これらを表示部４１に表示しても構わない。

また、図１乃至図７を用いて説明した上記各実施形態の構成及び処理は、本発明の一例に過ぎず、本発明を当該構成及び処理に限定する趣旨ではない。

１０ 画像形成装置
１１ 制御ユニット
１２ 表示部
１４ 操作部
１６ 通信部
１７ 画像読取部
１８ 画像形成部
１９ 記憶部
２１ 制御部
２２ 操作受付部
２５ 画像処理部
３０ 情報処理装置
３１ 制御ユニット
４１ 表示部
４２ タッチパネル
４３ ハードキー
４４ 記憶部
４５ 通信部
４６ 撮像部
４７ 音声出力部
５１ 制御部
５２ 操作受付部

Claims (7)

1. 情報処理装置と画像形成装置とを備える画像表示システムであって、
   前記画像形成装置は、
   印刷対象画像を複数の記録媒体への画像形成用に分割した各画像と、当該各画像の合成により前記印刷対象画像を形成可能な当該各画像の配置位置を示す配置位置情報とを生成する画像処理部と、
   前記画像処理部によって分割された各画像をそれぞれの記録媒体に画像形成する画像形成部と、
   前記分割された各画像と前記配置位置情報とを前記情報処理装置に送信する送信部とを備え、
   前記情報処理装置は、
   撮像部と、
   前記撮像部により撮像された撮像画像を表示する表示部と、
   前記画像形成装置から前記分割された各画像及び前記配置位置情報を受信する受信部と、
   前記撮像画像から、前記受信部により受信された前記各画像のいずれかに相当する検出画像を検出する画像検出部と、
   前記撮像画像における、前記検出画像に対する前記検出画像以外の他の画像の配置目標位置を前記配置位置情報に基づいて算出する目標位置算出部と、
   前記撮像画像における、前記目標位置算出部によって算出された配置目標位置に、前記受信部により受信された前記各画像のうち前記検出画像以外の他の各画像を配置して、前記分割を行う前の前記印刷対象画像を前記撮像画像中に生成する画像生成部と、
   前記画像生成部によって生成された前記印刷対象画像を含む前記撮像画像からなる仮想画面を前記表示部に表示させる制御部と、を備える画像表示システム。
2. 前記画像生成部は、前記検出画像の姿勢に合わせて、当該検出画像以外の他の各画像を移動、回転、又は拡大縮小させて、前記分割を行う前の前記印刷対象画像を前記撮像画像中に生成する請求項１に記載の画像表示システム。
3. 前記情報処理装置は、
   前記画像検出部により、前記撮像画像から前記検出画像が検出された後に、前記他の各画像のいずれかが更に検出されたとき、前記撮像画像における当該更に検出された他の各画像の位置を検出する位置検出部と、
   前記位置検出部によって検出された前記他の各画像の位置と、前記配置目標位置とが一致しているかを判別する判別部と、
   前記判別部による判別結果を報知する報知部と、を更に備える請求項１又は請求項２に記載の画像表示システム。
4. 前記情報処理装置においては、
   前記判別部は、前記配置目標位置に対する、前記位置検出部によって検出された前記他の各画像の位置のずれ量を判別結果として判別し、
   前記判別部により判別されたずれ量を音声で出力する音声出力部を前記報知部として備える請求項３に記載の画像表示システム。
5. 前記情報処理装置は、携帯端末装置である請求項１乃至請求項４のいずれかに記載の画像表示システム。
6. 前記情報処理装置は、前記撮像部及び前記表示部が別体とされている請求項１乃至請求項５のいずれかに記載の画像表示システム。
7. 撮像部と、
   前記撮像部により撮像された撮像画像を表示する表示部と、
   画像形成装置から、当該画像形成装置において印刷対象画像を複数の記録媒体への画像形成用に分割された各画像と、当該各画像の合成により前記印刷対象画像を形成可能な当該各画像の配置位置を示す配置位置情報とを受信する受信部と、
   前記撮像画像から、前記受信部により受信された前記各画像のいずれかに相当する検出画像を検出する画像検出部と、
   前記撮像画像における、前記検出画像に対する前記検出画像以外の他の画像の配置目標位置を前記配置位置情報に基づいて算出する目標位置算出部と、
   前記撮像画像における、前記目標位置算出部によって算出された配置目標位置に、前記受信部により受信された前記各画像のうち前記検出画像以外の他の各画像を配置して、前記分割を行う前の前記印刷対象画像を前記撮像画像中に生成する画像生成部と、
   前記画像生成部によって生成された前記印刷対象画像を含む前記撮像画像からなる仮想画面を前記表示部に表示させる制御部と、を備える情報処理装置。