JP7271861B2 - 画像処理システム及び画像処理方法 - Google Patents

Description

本発明は、画像処理システム及び画像処理方法に関する。

一般にデジタル複写機又はプリンタといった画像処理装置は、複写画質等の複写条件を標準の値に設定されている標準モードで複写を行なう。しかしながら、標準モードにて複写を行なった場合、原稿の画像又は個々のユーザの好みに応じて複写条件の最適な設定が異なるため、必ずしも満足しうる画質で複写ができるとは限らない。

そこで、複写時の設定変更の簡易化を目的として、プレビュー画面にてユーザが指定した画像位置の色情報を取得し、当該色情報に対応した濃度域において濃度値を調整させるための調整画面を表示し、ユーザによる濃度域毎の濃度調整を補助する技術が既に知られている（例えば特許文献１）。

しかしながら、従来の構成では画像調整前後の確認のみが可能であり、個人の主観による色相等の多様な好み又は画像調整を行う領域の選択に関して、十分に反映できなかったり、複写条件の変更方法が複雑で、画質の調整に時間が掛かったりするという問題があった。また、従来は複写機本体の操作部で色調整を行う必要があり、ユーザが操作する場所を制限するものであった。

本発明は、上記の点に鑑みてなされたものであって、スマートフォン等の外部端末にて複写機が保持する画像データの色調整を行い、当該色調整結果を複写機の画像データに反映させることを可能にする。

そこで上記課題を解決するため、画像処理システムは、画像処理装置及び情報端末を含み、前記画像処理装置は、画像データを前記情報端末と送受信する第１の通信部と、複数の画像データを合成する合成部と、ユーザからの操作を受け付ける第１の表示操作部とを有し、前記情報端末は、画像データを前記画像処理装置と送受信する第２の通信部と、前記画像データに画像処理を行う画像処理部と、ユーザからの操作を受け付ける第２の表示操作部とを有し、前記画像処理システムは、前記第２の通信部が、第１の画像データの一部である前記第１の通信部から送信された第２の画像データを受信し、前記画像処理部は、前記送信された第２の画像データに画像処理を行い、前記第１の通信部は、前記第２の通信部から送信された前記画像処理を行った第２の画像データを受信し、前記合成部が、前記画像処理を行った第２の画像データと、前記第１の画像データとを合成し、前記第１の表示操作部は、前記第２の画像データが、第１の画像データの一部である場合、前記第１の画像データの一部を決定するユーザからの操作を受け付け、前記第２の表示操作部は、前記画像処理部が画像処理を行うためのユーザからの操作を受け付け、前記第２の表示操作部が、表示する画像のサイズに基づいて、前記ユーザからの操作を受け付けるボタンの表示位置を変更し、前記第２の表示操作部が、表示する画像の個数に基づいて、前記ユーザからの操作を受け付けるボタンの表示位置を変更する第１の処理と、前記第２の通信部が、前記第１の画像データ及び前記第１の画像データのうち画像処理を行う領域を示す情報を受信し、前記画像処理部は、前記領域に画像処理を行い、前記第２の表示操作部は、前記第１の画像データ、前記領域の拡大画像及び前記第１の画像データに画像処理後の前記領域を合成した画像を同時に表示する第２の処理とを選択的に実行する。

本発明は、上記の点に鑑みてなされたものであって、スマートフォン等の外部端末にて複写機が保持する画像データの色調整を行い、当該色調整結果を複写機の画像データに反映させることができる。

本発明の実施の形態における画像処理システム１０００の全体構成例を示す図である。 本発明の実施の形態における複写機１００のハードウェア構成例を示す図である。 本発明の実施の形態におけるスマートフォン２００のハードウェア構成例を示す図である。 本発明の実施の形態における複写機１００の機能構成例を示す図である。 本発明の実施の形態におけるスマートフォン２００の機能構成例を示す図である。 本発明の実施の形態における複写機１００の操作部パネル２０１で画質調整を行う領域を指定する手順を説明するための図である。 本発明の実施の形態における複写機１００とスマートフォン２００間の画像データの転送手順を説明するための図である。 本発明の実施の形態におけるスマートフォン２００で複写機１００から画像データを取得する手順を説明するための図である。 本発明の実施の形態における画像編集及び画像印刷の手順を説明するためのフローチャートである。 本発明の実施の形態における複写機１００の操作部アプリ画面表示の例（１）を示す図である。 本発明の実施の形態における複写機１００の操作部アプリ画面表示の例（２）を示す図である。 本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の例を示す図である。 本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の手順を説明するためのフローチャートである。 本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の領域指定の例を示す図である。 本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の色相指定の例（１）を示す図である。 本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の色相指定の例（２）を示す図である。 本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の色相指定の例（３）を示す図である。 本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集前後の表示例を示す図である。 本発明の実施の形態におけるＰＣ２０２による画像編集の例を示す図である。 本発明の実施の形態におけるＰＣ２０２による画像編集の色相指定の例を示す図である。

以下、図面に基づいて本発明の実施の形態を説明する。

図１は、本発明の実施の形態における画像処理システム１０００の全体構成例を示す図である。画像処理システム１０００は、複写機１００及びスマートフォン２００を有する。

原稿は、ユーザによって複写機１００のスキャナにセットされ、記載内容を読取られる。スキャナは、読取った原稿を画像データとして保持し、画像処理部（図４にて後述）に送る。画像処理部は、複写機の表示部に画像データを送信し表示させる。ユーザは画質を調整したい部分を選択し指定する（図６にて後述）。

複写機１００の操作部は、ユーザに指定された画像データの領域を画像データ処理部に伝える。画像データ処理部は指定された領域の画像データを、例えばユーザのスマートフォン２００に転送する（図７にて後述）。

ユーザは、スマートフォン２００に転送された画像をスマートフォン２００で動作するアプリケーションソフトウェア（以下、「アプリ」という。）にて画質の調整を行う。アプリは、どのようなアプリでもよく、一般に普及されていて、普段使用している写真加工のアプリでもよい。

スマートフォン２００において画質調整を終えたら、ユーザは、スマートフォン２００から複写機１００へ画質調整後の画像データを転送させる。

複写機１００は、スマートフォン２００から画質調整後の画像が転送されると、ユーザに指定された領域の画像をスマートフォン２００から転送された画像に差し替えて印刷を行う。

スマートフォン２００の代わりに、ＰＣ（Personal Computer）を用いて同様の処理が可能である。例えば、デスクトップＰＣでは、複写機１００において操作を行った後、画質の調整を行うため当該デスクトップＰＣが設置されている席に戻って処理を行う。また、ノートＰＣでは席に戻る必要はなく、片手でパソコンを支えながらもう一方の手で画質調整の操作を行う。ＰＣにおいて当該処理を行う場合、ユーザは広い画面を使用して作業することができる。

また、スマートフォン２００で写真を撮ることは広く一般的であり、そのため写真の画質を調整するアプリも豊富に存在する。そのため、スマートフォン２００は、ユーザが複写機１００に近接する位置で画質調整を行うことに適している。さらに、ユーザは、スマートフォン２００を所持しての移動が容易であるため、例えば、ある複写機１００から取得した画像を移動中に画質調整し、移動先の他の複写機１００に転送し印刷するといったことも可能となる。

図２は、本発明の実施の形態における複写機１００のハードウェア構成例を示す図である。図２に示されるように、複写機１００は、それぞれ相互に接続されているＣＰＵ１００１、記憶装置１００２、補助記憶装置１００３、ネットワークインタフェース１００４、表示装置１００５、入力装置１００６、スキャナ装置１００７及びプリンタ装置１００８等を有する。

ＣＰＵ（Central Processing Unit）１００１は、起動指示を受けると、補助記憶装置１００３から複写機１００での処理を実現するプログラムを読み出して、記憶装置１００２に展開し、当該プログラムに従って複写機１００に係る機能を実現する。補助記憶装置１００３は、プログラムを記憶すると共に、必要なデータを記憶する。

ネットワークインタフェース１００４は、スマートフォン２００、後述するＰＣ２０２又はサーバ３００等と通信を行うための有線又は無線のインタフェースである。

表示装置１００５は、複写機１００に備え付けられた液晶ディスプレイ等の表示装置である。入力装置１００６は、ユーザから複写機１００への操作の入力を受け付ける装置である。表示装置１００５及び入力装置１００６は、例えば、タッチパネルのように、表示手段及び入力手段を共に有するひとつの装置であってもよい。

スキャナ装置１００７は、原稿を読み取って画像データとして取得し、記憶装置１００２又は補助記憶装置１００３に画像データを格納する。プリンタ装置１００８は、画像データに基づいて、紙等の印刷媒体に印刷を行う。

図３は、本発明の実施の形態におけるスマートフォン２００のハードウェア構成例を示す図である。図３に示されるように、スマートフォン２００は、それぞれ相互に接続されているＣＰＵ２００１、記憶装置２００２、補助記憶装置２００３、ネットワークインタフェース２００４、表示装置２００５及び入力装置２００６等を有する。

ＣＰＵ２００１は、起動指示を受けると、補助記憶装置２００３からスマートフォン２００での処理を実現するプログラムを読み出して、記憶装置２００２に展開し、当該プログラムに従ってスマートフォン２００に係る機能を実現する。補助記憶装置２００３は、プログラムを記憶すると共に、必要なデータを記憶する。

ネットワークインタフェース２００４は、複写機１００又はサーバ３００等と通信を行うための有線又は無線のインタフェースである。

表示装置２００５は、スマートフォン２００に備え付けられた液晶ディスプレイ等の表示装置である。入力装置２００６は、ユーザからスマートフォン２００への操作の入力を受け付ける装置である。表示装置２００５及び入力装置２００６は、例えば、タッチパネルのように、表示手段及び入力手段を共に有するひとつの装置であってもよい。また、入力装置２００６は、さらにカメラを含んでもよい。

なお、後述するＰＣ２０２及び複写機１００の操作部パネル２０１も図３と同様のハードウェア構成を有していてもよい。

図４は、本発明の実施の形態における複写機１００の機能構成例を示す図である。図４に示されるように、複写機１００は、制御部１１、表示部１２、操作部１３、通信部１４、画像処理部１５、読取部１６、印刷部１７及び記憶部１８を有する。これら各部は、複写機１００にインストールされた１以上のプログラムがＣＰＵ１００１に実行させる処理により実現される。また、表示部１２は、表示装置１００５により実現され、操作部１３は、入力装置１００６により実現される。また、読取部１６は、スキャナ装置１００７により実現され、印刷部１７は、プリンタ装置１００８により実現される。また、記憶部１８は、記憶装置１００２及び補助記憶装置１００３により実現される。

制御部１１は、複写機１００の各機能部を含む全体を制御する。

表示部１２は、画像、原稿レイアウト、ユーザインタフェースに係るボタン、複写機１００の状態等を表示する。

操作部１３は、例えば、表示部１２に表示されたボタン又は物理的なスイッチ等のユーザインタフェースを介して、ユーザからの操作を受け付ける。また、操作部１３は、ユーザから画質を調整する画像の領域を指定する入力を受け付ける。

通信部１４は、スマートフォン２００、サーバ３００又はＰＣ２０２等と通信を行う。

画像処理部１５は、画像データの一部の領域のデータを抽出する機能、画像データに色相の変更等の画像編集を行う機能を有する。また、画像処理部１５は、表示部１２に画像データを送信し、当該画像データを表示させる。

読取部１６は、原稿を読み取り、画像データとして取得し、記憶部１８に記憶させる。印刷部１７は、記憶部１８に記憶されている画像データに基づいて、紙等の印刷媒体に印刷を行う。

記憶部１８は、画像データ及び各機能部が必要とする情報を記憶する。また、記憶部１８は、各機能部から必要に応じて記憶している情報を読み出される。

図５は、本発明の実施の形態におけるスマートフォン２００の機能構成例を示す図である。図５に示されるように、スマートフォン２００は、制御部２１、表示部２２、操作部２３、通信部２４、画像処理部２５及び記憶部２６を有する。これら各部は、スマートフォン２００にインストールされた１以上のプログラムがＣＰＵ２００１に実行させる処理により実現される。また、表示部２２は、表示装置２００５により実現され、操作部２３は、入力装置２００６により実現され、記憶部２６は、記憶装置２００２及び補助記憶装置２００３により実現される。

制御部２１は、スマートフォン２００の各機能部を含む全体を制御する。

表示部２２は、画像、原稿レイアウト、ユーザインタフェースに係るボタン等を表示する。

操作部２３は、例えば、表示部２２に表示されたボタン又は物理的なスイッチ等のユーザインタフェースを介して、ユーザからの操作を受け付ける。また、操作部２３は、ユーザから画像データに対する画像編集に係る入力を受け付ける。

通信部２４は、スマートフォン２００、サーバ３００又はＰＣ２０２等と通信を行う。

画像処理部２５は、画像データに色相の変更等の画像編集を行う機能を有する。画像処理部２５は、スマートフォン２００にインストールされたアプリによって実現されてよい。

記憶部２６は、画像データ及び各機能部が必要とする情報を記憶する。また、記憶部２６は、各機能部から必要に応じて記憶している情報を読み出される。

なお、後述するＰＣ２０２及び複写機１００の操作部パネル２０１も図５と同様の機能構成を有していてもよい。

図６は、本発明の実施の形態における複写機１００の操作部パネル２０１で画質調整を行う領域を指定する手順を説明するための図である。図６は、複写機１００の操作部パネル（タッチパネル）２０１にて、画質調整を行う領域を指定する実施例である。操作部パネル２０１を拡大した図６ａ及び図６ｂにて説明する。

複写機１００の画像処理部１５は、読取部１６から原稿の画像データを取得し、表示部１２に送信して、複写機１００の操作部パネル２０１に当該原稿を表示させる。

図６ａでは、画像処理部１５は、操作部パネル２０１に画像データを加工せず表示させている。図６ａに示されるように、操作部パネル２０１はタッチパネルであり、ユーザは画質の調整を行う領域を、指をスライドさせることにより指定することができる。

図６ｂでは、画像処理部１５は、画像データを分類に分けて操作部パネル２０１に表示させている。図６ｂの例において、画像処理部１５は、（１）表題、（２）本文、（３）写真と領域を分けて、例えば点線等で、当該領域が判別できるように操作部パネル２０１に表示させる。ユーザは、画質調整したい領域をタッチして指定する。領域の区分は、画像処理部１５が有する機能を用いて行われる。

なお、画質調整を行う領域の指定は、複写機１００が自動判別した結果に基づいて実行されてもよい。すなわち、画像処理部１５が、例えば、原稿のカラー写真の領域を判別して、当該領域を画質調整を行う領域として指定してもよい。

また、画質調整を行う領域の指定をスマートフォン２００のアプリを用いて行ってもよい。スマートフォン２００の場合、操作画面が小さいため、図６ａの指でのスライド操作による領域の指定が困難な場合があるが、図６ｂと同様に、原稿の文字部と写真部の領域を自動分割するアプリを使用すれば、問題は解決される。すなわち、スマートフォン２００における画質調整を行う領域の指定は、図６ａ及び図６ｂに示される操作部パネル２０１の画面を用いる手順と同様であってもよい。

また、複写機１００の機種によっては、タッチパネル形式の操作部がないものがある。スマートフォン２００を使用することにより、複写機１００にタッチパネル形式の操作部がない場合でも画質調整を行う領域の指定が可能となる。スマートフォン２００で画像範囲の選択を行う場合、複写機１００からスマートフォン２００へスキャナ装置１００７で読取った画像データを送信する必要がある。当該送信方式及び方法については、図７、図８にて説明する。

図７は、本発明の実施の形態における複写機１００とスマートフォン２００間の画像データの転送手順を説明するための図である。図７において、複写機１００の画像処理部１５は、ユーザにより指定された領域の画像をスマートフォン２００に転送する例を以下説明する。

第１の例として、Ｗｉ－Ｆｉ（登録商標）が考えられる。スマートフォン２００は、Ｗｉ－Ｆｉ設定をＯＮにして複写機１００のＩＤを検索及び接続を行い、スマートフォン２００のアプリから複写機１００に対して画像転送の要求（図８にて後述）を行うと、複写機１００はスマートフォン２００に対し通信部１４を介して画像調整を行う領域の画像データを転送する。スマートフォン２００は通信部２４を介して画像調整を行う領域の画像データを受信し、記憶部２６に保存する。また、複写機１００からＷｉ－Ｆｉを使用して自機周辺のスマートフォン２００のＩＤを検索してもよい。その場合は、検索の結果、接続可能なスマートフォン２００のＩＤを全て表示部１２に表示し、ユーザが自分のスマートフォン２００を選択すると、複写機１００は、当該スマートフォン２００に対し、画質調整を行う領域の画像の転送を行う。また、原稿の画像データは、画質調整を行う切取り画像の領域の画像位置情報、すなわち切取り位置情報と共に、複写機１００の記憶部１８に保存される。図７において、原稿画像内の点線で「切取り位置情報」が示されている。

第２の例として、Ｂｌｕｅｔｏｏｔｈ（登録商標）が考えられる。Ｂｌｕｅｔｏｏｔｈを使用した転送方法は上記Ｗｉ－Ｆｉを使用する転送方法と同様である。

第３の例として、複写機１００は、画質調整を行う領域の画像を、複写機１００にネットワークを介して接続されるサーバ３００に送信する。続いて、画像処理部１５は、表示部１２に保存先のＵＲＬを取得できるＱＲコード（登録商標）を表示する。スマートフォン２００はカメラにてＱＲコードを読み取ると、ＱＲコードに含まれるＵＲＬが示すサーバ３００上の画像の保存先にアクセスし、サーバ３００上で画質の調整を行うことができる。なお、表示部１２に保存先のＵＲＬが直接表示されてもよい。また、スマートフォン２００の記憶部２６の空き容量に余裕がある場合、サーバ３００のストレージ３０１に保存されている画像をスマートフォン２００にダウンロードし、スマートフォン２００の記憶部２６上で画質の調整を行ってもよい。図７においては、サーバ３００から画像をダウンロードし、画質調整を行った後、アップロードする例が示されている。原稿画像データは、画質調整を行う領域の画像位置情報と共に、複写機１００の記憶部１８に保存するか、またはサーバ３００のストレージ３０１に保存してもよい。

なお、第３の例においては、画質調整を行う画像をサーバ３００のストレージ３０１に保存しているため、ユーザが画質調整に長けた他のユーザにＵＲＬを送信することにより、画像を共有でき、より綺麗に調整してもらうといったことも可能となる。

スマートフォン２００のアプリにて画質を調整した後、スマートフォン２００から複写機１００に画質調整後の画像を転送する方法は、第１の例及び第２の例においては、上記同様にＷｉ－Ｆｉ及びＢｌｕｅｔｏｏｔｈにて複写機１００と接続し、画像を複写機１００内の記憶部１８に転送及び保存する（図８にて後述）。

第３の例においては、スマートフォン２００のアプリで画質の調整を行った後、複写機１００が画像をアップロードした同じＵＲＬ先に、画像を保存することにより、複写機１００は当該ＵＲＬを参照することで画質調整後の画像を取得することができる。

最後に合成画像を印刷する方法は、第１の例及び第２の例については、スマートフォン２００から複写機１００へＷｉ－ＦｉおよびＢｌｕｅｔｏｏｔｈを介して画像転送後、例えば、ユーザが複写機１００の操作部１３のコピー開始ボタンを押すと、画像処理部１５が、記憶部１８に記憶されている原稿読み取り画像及び切り取られた画像位置情報に基づいて、スマートフォン２００で画質調整後に転送されてきた画像を原稿読み取り画像と合成し、制御部１１は、印刷部１７にて印刷を開始させる。

第３の例については、スマートフォン２００にて画質調整後の画像がＵＲＬが示すサーバ３００のストレージ３０１に保存された後、ユーザが複写機１００の操作部１３のコピー開始ボタンを押下すると、画像処理部１５が複写機１００の記憶部１８に保存されている、原稿読み取り画像及び切り取られた画像位置情報に基づいて、ＵＲＬが示すサーバ３００のストレージ３０１に保存されている画質調整後の画像を取得して原稿読み取り画像と合成し、制御部１１は、印刷部１７にて印刷を開始させる。なお、画質調整後の画像に、原稿画像との関連付けをするためのタグ情報を添付してそれを参照することで、原稿画像と画質調整後の画像とを関連付けることが可能となる。また、原稿画像にＵＲＬを関連付けておくことで、画質調整後の画像をＵＲＬが示すサーバ３００上のリソースを参照して、原稿画像と画質調整後の画像とを関連付けることが可能となる。

なお、原稿読み取り画像と切り取られた画像位置情報もサーバ３００上に保存した場合は、サーバ３００に接続されているいずれの複写機１００からも画像を合成し印刷することが可能となる。

また、全ての例において、画像を合成する時に、画質調整前後で画像のサイズ又はファイル形式が異なる場合が考えられる。複写機１００の画像処理部１５は、サイズが異なる場合は、画質調整前のサイズになるように画質調整後の画像のサイズを拡大または縮小する。また、ファイル形式が異なる場合は、画像処理部１５で調整前の形式に変換可能であれば変換し、変換ができない場合は、複写機１００の表示部１２に画質調整後の画像のファイル形式を、他のファイル形式に変更するよう表示しユーザに伝える。

図８は、本発明の実施の形態におけるスマートフォン２００で複写機１００から画像データを取得する手順を説明するための図である。画質調整をするために切り取られた画像を、スマートフォン２００が取得し、アプリで画質調整後に複写機１００またはサーバ３００に送信する方法について説明する。図８ａ及び図８ｂは、画像を取得及び送信するための専用アプリの画面であり、画質調整を行う一般的なアプリとは異なる。

複写機１００とスマートフォン２００とがＷｉ－Ｆｉ又はＢｌｕｅｔｏｏｔｈで接続されている場合は、スマートフォン２００は、図８ａに示される「画像の取得」ボタンを押下されることにより、複写機１００の操作部１３で範囲を指定した画像データを、複写機１００から取得できる。

複写機１００に関連付けられるサーバ３００のストレージ３０１に画像が保存されている場合は、図７で説明したとおり複写機１００の操作部１３にＱＲコードが表示されるので、スマートフォン２００の一般的なＱＲコード読み取りアプリ（図示せず）を使用して読み取ることにより、スマートフォン２００は、サーバ３００のストレージ３０１の画像保存先のリンクを取得することができる。

画質調整後の画像の送信について、複写機１００とスマートフォン２００とがＷｉ－Ｆｉ又はＢｌｕｅｔｏｏｔｈで接続されている場合は、スマートフォン２００は、図８ｂに示される「画像の送信」ボタンを押下されることにより、画質調整後の画像を複写機１００に送信することができる。

スマートフォン２００が、サーバ３００のストレージ３０１に保存されている画像の画質調整を行った場合は、画質調整を行ったスマートフォン２００の一般的な画質調整アプリ（図示せず）にて、画質調整後の画像をＱＲコードで読み取った同じリンク先に保存する。

スマートフォン２００が、画質調整後の画像を送信した後、複写機１００の操作部１３のコピー開始ボタン又は印刷ボタン、あるいは図８ｂに示される専用ソフトの「印刷」ボタンを押下することで、複写機１００は、図７で説明したように合成画像の印刷を開始する。

なお、図６で説明した画質調整を行う領域をスマートフォン２００が選択する場合は、図８ａに示される「画像領域の選択」のボタンを押下すると、原稿全体の画像がスマートフォン２００に送信及び表示される。ここで、スマートフォン２００が受信する原稿全体の画像は、画質調整を行う領域を指定するための表示を可能とする最低限の解像度あるいは色数を有する簡便なものでもよい。表示された後は図６ａ及び図６ｂと同じように画質調整を行う領域を選択し、領域の送信ボタンを押下すると、選択した画像領域情報が複写機１００に送信される。また本専用アプリには、図８ｂに示される様な切取った画像の画質調整ソフトも付属している。画質調整の行い易さの点では、普段使い慣れている一般の画質調整アプリより劣るかもしれないが、複写機１００に係る専用アプリのため、画質の調整結果は画像データではなく、複写機１００内の画像処理ソフトのパラメータのみを送れば良い。したがって、通常、画像処理ソフトのパラメータは画像データそのものよりはるかに容量が少ないため、複写機１００との通信速度が短時間で済み、印刷までの時間を短くできるメリットがある。

また、他の実施例として、複写機１００の操作部１３（タッチパネル）にて一般のスマートフォン２００のアプリをダウンロードして使用可能な場合は、スマートフォン２００を使用せずに、複写機１００単体で上記実施例を行うことが可能となる。

図９は、本発明の実施の形態における画像編集及び画像印刷の手順を説明するためのフローチャートである。図９では、複写機１００の操作部パネル２０１において動作する操作部アプリによって画質調整を行う手順を説明する。

ステップＳ１０１において、図６で説明したように、複写機１００の操作部パネル２０１において、画質調整を行う領域すなわち画像調整領域の指定を行う。続いて、ステップＳ１０２において、図１０及び図１１に示されるように、原稿の全体画像及び領域指定された画像が操作部アプリの画面上に表示される。

図１０は、本発明の実施の形態における複写機１００の操作部アプリ画面表示の例（１）を示す図である。図１０において、複写機１００の操作部パネル２０１上で表示及び動作する操作部アプリの画面表示の例を説明する。原稿には、写真Ａ、写真Ｂ及び写真Ｃが含まれる。なお、スマートフォン２００又はＰＣ２０２のアプリが、図１０に示されるような画面表示及び動作を実行してもよい。「編集機能一覧」は、編集機能を実行するためのボタンが複数配置されている領域を表す。

図１０ａは、写真Ａを編集するとした場合の操作部パネル２０１の画面表示を示す。画面左側に原稿の全体表示、画面中央に領域指定された編集する箇所、すなわち「写真Ａ」が拡大表示される。このとき、「編集機能一覧」は、画面右側に表示される。

図１０ｂは、「写真Ａ」を編集した場合の操作部パネル２０１の画面表示を示す。図１０ｂに示されるように、拡大図「写真Ａ」を編集機能一覧の機能により編集（横線の網掛け）を行うと、原稿の全体図へも編集結果が反映される。全体画像及び拡大図が表示されることで、画像全体の変化を確認しながら拡大図で微調整を行うことが可能となり、編集後の画像を原稿と合成した時の全体の調和具合が一目で確認できるため調整に要する時間が少なくなり、ユーザの利便性が向上する。

図１０ｃは、「写真Ａ」に加えて、「写真Ｂ」も拡大表示した場合の画面表示を示す。図１０ｂと同様に、「写真Ｂ」の編集（縦線の網掛け）を行うと、原稿の全体図へも編集結果が反映される。また、図１０ｃにおいて、「編集機能一覧」は、図１０ａ及び図１０ｂとは異なり拡大図の表示位置に応じて、画面下部に表示される。

図１１は、本発明の実施の形態における複写機１００の操作部アプリ画面表示の例（２）を示す図である。図１１において、複写機１００の操作部パネル２０１上で表示及び動作する操作部アプリの画面表示の例を説明する。なお、スマートフォン２００又はＰＣ２０２のアプリが、図１１に示されるような画面表示及び動作を実行してもよい。「編集機能一覧」は、編集機能を実行するためのボタンが複数配置されている領域を表す。

図１１ａは、拡大図の水平方向すなわちＸ軸方向の長さが、拡大図の垂直方向すなわちＹ軸方向の長さより短い場合の画面表示を示す。図１１ａに示されるように、「編集機能一覧」は、画面右側に表示される。

図１１ｂは、拡大図のＸ軸方向の長さが、拡大図のＹ軸方向の長さより長い場合の画面表示を示す。図１１ｂに示されるように、「編集機能一覧」は、画面下部に表示される。すなわち、「編集機能一覧」の表示位置を変更することによって、拡大図を大きく表示することができる。

なお、「編集機能一覧」のボタンの配置については、ユーザがボタンの位置を設定してもよく、図１１ａ及び図１１ｂのように、拡大図の縦横比から自動で最大表示画面になるようにしてもよい。図１１ａ及び図１１ｂは、拡大図のＸ軸の長さ＜拡大図のＹ軸の長さの場合、「編集機能一覧」を右側に配置し、拡大図のＸ軸の長さ＞拡大図のＹ軸の長さの場合、「編集機能一覧」を下側に配置する。

また、「編集機能一覧」のボタンの配置は、表示する拡大図の個数により決定されてもよい。例えば、図１１ｃに示されるように、拡大図がふたつの場合、「編集機能一覧」は、下側に配置されてもよい。

図９に戻る。ステップＳ１０３において、操作部アプリにて、鮮やかさの補正を行う。続いて、画像調整が終了したら、図１０又は図１１に示されるように、編集画面の「完了」ボタンを押下する（Ｓ１０４のＹｅｓ）と、ステップＳ１０５に進む。編集画面の「完了」ボタンが押下されない（Ｓ１０４のＹｅｓ）ときは、ステップＳ１０３の処理を繰り返す。

ステップＳ１０５において、通常の印刷アプリへ移行する。通常の印刷アプリとは、複写機１００において印刷を実行する通常使用されるアプリである。続いて、印刷アプリは、他に編集する箇所はあるかユーザに確認を行う。他に編集する箇所がある場合（Ｓ１０６のＹｅｓ）、ステップＳ１０１に進み、再度画像調整を開始する。他に編集する箇所がない場合（Ｓ１０６のＮｏ）、ステップＳ１０７に進み、画像調整後の画像と全体画像とが合成された画像の印刷を実行して処理を終了する。

図１２は、本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の例を示す図である。図１２に示されるように、複写機１００は、原稿を読み込み、色味をあざやかにする画像編集を行う領域を指定し、当該領域の色味調整を行う。原稿中の点線で示される領域にあるボールの色味が変更されている。

図１３は、本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の手順を説明するためのフローチャートである。

ステップＳ２０１において、複写機１００は、読取部１６を介して原稿をスキャンする。続いて、複写機１００は、操作部パネル２０１を介して、ユーザから変更する領域と色相を指定され、変更を行う（Ｓ２０２）。ステップＳ２０３において、複写機１００は、操作部パネル２０１に、変更前の画像「Ｂｅｆｏｒｅ」と、変更後の画像「Ａｆｔｅｒ」を表示する。続いて、複写機１００は、変更後の画像を印刷部１７に出力し、印刷を実行する。

図１４は、本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の領域指定の例を示す図である。図１４に示されるように、例えば、２分割の場合の領域指定では、「上半分」、「下半分」、「右半分」又は「左半分」のように、領域を指定することができる。ここで、領域選択は、例として２分割としているが、分割数は変更可能である。

図１５は、本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の色相指定の例（１）を示す図である。図１５に示されるように、色相指定では例として、「カラー調整」又は「カラーバランス」を指定して調整することができる。

図１６は、本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の色相指定の例（２）を示す図である。図１６に示されるように、カラー調整は、最大３つの色相を選択し、それぞれの色相に応じて変更できる。図１６の例では、レッドとマゼンタを選択し、レッドはイエローよりかマゼンタよりか、マゼンタはブルーよりかレッドよりかを選択することで、色相の変更が可能となる。

カラー調整及びカラーバランスは、複写機１００に搭載されている既存のＵＩ（User Interface）画面での調整となるため、複写機１００の操作部１３に慣れたユーザは、時間短縮と精度向上ができる。色相変更は既存のＵＩ画面と同じとすることで、操作性の共通性を高め、精度良く短時間で出力することができる。

図１７は、本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集の色相指定の例（３）を示す図である。図１７に示されるように、カラーバランスは、ＣＭＹＫ別に濃淡の段階を調整できる。

図１８は、本発明の実施の形態における複写機１００の操作部パネル２０１による画像編集前後の表示例を示す図である。図１８に示されるように、複写機１００は、操作部パネル２０１に、変更前の画像「Ｂｅｆｏｒｅ」と、変更後の画像「Ａｆｔｅｒ」を並行して表示する。画質調整を行った領域のあざやかさが、変更前の画像と変更後の画像を直接比較することで、印刷出力前によく確認できる。そのため、例えば変更が不十分であった場合に印刷してしまうことを防ぎ、用紙の節約にもなる。

図１９は、本発明の実施の形態におけるＰＣ２０２による画像編集の例を示す図である。

原稿は、ユーザによって複写機１００のスキャナ装置１００７にセットされ、記載内容を読み取られる。

スキャナ装置１００７を制御する読取部１６は、読み取った原稿を画像データとして保持し、画像処理部１５に送る。

画像処理部１５は、通信部１４を介して、ＬＡＮ（Local Area Network）で接続されたノートＰＣへ画像データを送信する。当該原稿のスキャン、画像データの保持及び送信は、複写機１００側からでもＰＣ２０２側からでも、双方指示を出すことが可能であってよい。また、図１９では、読み取ったデータをそのまま送信する形態にしているが、送信前に、図６で説明したスマートフォン２００による実施例のように、複写機１００の操作部１３に画像データを送信し表示させ、ユーザが画質調整を行う領域を指定し、当該領域の画像データのみを、ＰＣ２０２に送信してもよい。領域を指定した場合は、図７と同様に、画像データ全体に対する当該領域の位置情報を保持しておく。当該位置情報は、画像合成時の必要情報として使用される。

他の実施例として、図７で説明したスマートフォンによる実施例のように、ＰＣ２０２は、ＵＲＬ「ｈｔｔｐ：／／ｗｗｗ...」によるリンクをメール等で受け取り、当該リンクにて指定される複写機１００がサーバ３００上に確保しているストレージ３０１を利用して、サーバ３００上で、画像データのやりとり及び画像データの編集を完結させてもよい。

ユーザは、ＰＣ２０２に転送された画像を、ＰＣ２０２で動作するソフトウェアにて画質の調整を行う（図２０にて後述）。ソフトウェアは例えば、複写機１００のスキャナドライバの詳細設定画面、または、一般的に普及されていて、普段よく使用している画像編集及び解析できるものが想定でき、複写機１００と連動できるものでよい。例えば、ＴＷＡＩＮに準拠するソフトウェア等がある。

画質調整を完了すると、ユーザが、今度は反対にＰＣ２０２から複写機１００へ、画質調整後の画像を転送する。

複写機１００は、ＰＣ２０２から画質調整後の画像が転送されると、ユーザに指定された範囲の画像を、ＰＣ２０２から転送された画像に差し替えて印刷を行う。

ＰＣ２０２を用いて画質調整を行うメリットは、複写機１００の操作部パネル２０１よりも画面が大きいため、一度にたくさんの情報を表示できること、および画像が見易く画質調整項目を多く表示可能であり画質調整がしやすいことが挙げられる。

図２０は、本発明の実施の形態におけるＰＣ２０２による画像編集の色相指定の例を示す図である。

ＰＣ２０２は、複写機１００のスキャナ装置１００７から送られてきた原稿の画像データを、ＰＣ２０２で動作する編集及び加工を行うソフトウェアに表示させる。

複写機１００から受信した画像データは、スキャナで読み取った状態のまま、すなわち原稿全体の画像データでも、複写機１００側から送信前に調整箇所を指定してその領域だけ切り取った状態のままでも、どちらでもよい。ここで、画像データが受信された際、特定の画像編集ソフトが自動で立ち上がるようにシステムが構成されていてもよいし、ユーザが好みに合わせて手動でソフトウェアを起動してもよい。

複写機１００から受信した画像データが原稿全体の画像データである場合は、画像データの画質調整の前に、画質調整を行う領域を指定する。このとき、ユーザが、調整を行う範囲を自由に指定する場合と、いくつかの領域別に分かれた画像情報を選択する場合の２つを想定する。ユーザが自由に指定する場合は、画質の調整を行いたい範囲をドラッグにより示して指定する。指定される領域は、離れた範囲が２つ以上であってもよい。一方、領域別に選択する場合は、例えば、あらかじめ複写機１００で画像データの領域の情報を写真部と文字部に分離しておく。当該分離に係る情報も含めて画像データを受信した状態で、画像データを表示し、その際に例えば図２０の「ｂｅｆｏｒｅ」に示されるように領域をＡ（写真）とＢ（文字部）といった形で表示する。ユーザは、画質調整したい領域を１以上選択する。ここで、領域の区分けは複写機１００の画像処理部１５の機能を用いて行う。

複写機１００側で領域を区分けする場合は、ＰＣ２０２は、画質調整箇所を指定した画像データの他に、画像データの大きさ及び画質調整箇所の位置情報を合わせて受信する。いずれの場合も、画質調整する画像の切り取り時に画像データ全体の情報に対する、画質調整箇所の位置情報を複写機１００あるいはＰＣ２０２のそれぞれの記憶部内に画像の合成が完了するまで保持しておく必要がある。

ＰＣ２０２は、指定された画質調整箇所の画像データを大きく表示して画質調整を行う。図２０に示される「補正機能一覧」の項目を実行することにより画質調整を行うとき、補正機能としては、例えば、フィルタ調整、階調補正、彩度調整、濃度調整、色相調整等が挙げられ、ユーザが様々に設定を変更して、好みの色味になるように反映できる。

画質調整が完了すると、画像の合成が行われる。画像の合成は、ＰＣ２０２側のソフトウェアによって行われてもよいし、画質調整後の画像データを複写機１００側に送ってから画像処理部１５で行われてもよい。画質調整する画像を切り抜く前の元のスキャン画像データ全体に対する画質調整箇所の位置情報を参照し、当該位置情報が対応する画像データを画質調整後の画像データに差し替える。

次に画像の確認及び印刷が行われる。ＰＣ２０２側で確認し、複写機１００に印刷を実行させる場合を示す。

図２０の「ａｆｔｅｒ」に示されるように、ＰＣ２０２は、画質調整後の画像を合成したデータをプレビュー表示する。ユーザがプレビューを確認し、調整不十分と判断した場合は、調整作業に戻り、再度調整が終わったら、調整後のデータが再度プレビュー表示される。これらを繰り返し、調整がＯＫとなったら、「印刷実行」ボタンを押下して画質調整後の画像を出力する。印刷は、プリンタドライバ等が起動して処理される。ＰＣ２０２側で、印刷まで完了させる場合、要する時間が短縮される。

複写機１００側で確認及び印刷を行う場合は、合成した画像データ、あるいは調整箇所の画像データを「複写機へ送信」ボタンを押下して送信する。そして、図７で説明したスマートフォン２００、または図１３で説明した複写機１００の操作部パネル２０１の実施例と同様にして、印刷を実行する。画質調整箇所の画像データは、複写機１００で合成をしてから印刷が行われる。この場合、複数の実施例が考えられる。

まず、送信する画像データについて、例えば、複写機１００側にもＰＣ２０２側での編集及び加工ソフトウェアと同等の機能の編集機能又はアプリが搭載されている場合、最終的に複写機１００側で画像処理を実行することも想定できる。その際は、画像データそのものではなく、画像編集に係るパラメータ又は設定値等が送信されてもよい。パラメータ又は設定値は、画像データに比べ少量のデータであるため、送信負荷が軽減される。

次に、複写機１００側において、画像関連データが受信されたとき、自動で確認及び印刷画面が立ち上がってもよいし、ユーザによる手動でボタン操作がされて確認及び印刷がされてもよい。複写機１００側において、パラメータ又は設定値が受信された場合には、編集アプリ等が立ち上がり、受信された情報に基づいて、編集機能が自動でセットされることも想定できる。

上述のように、本発明の実施の形態によれば、複写機１００が原稿をスキャンして取得した画像データのうち、画質調整を行う一部の領域の画像データを、スマートフォン２００が取得し、スマートフォン２００で動作する画像処理アプリによって画質調整を行う。画質調整を行った後の画像データが、スマートフォン２００から複写機１００に送信され、複写機１００は、受信した画像データとスキャンして取得した画像データとを合成して、印刷を実行する。すなわち、スマートフォン等の外部端末にて複写機が保持する画像データの色調整を行い、当該色調整結果を複写機の画像データに反映させることができる。

なお、本発明の実施の形態において、複写機１００は、画像処理装置の一例であり印刷する機能を有する機器であればこれに限られない。また、スマートフォン２００、操作部パネル２０１、ＰＣ２０２は、情報端末の一例である。通信部１４は、第１の通信部の一例である。通信部２４は、第２の通信部又は通信部の一例である。画像処理部１５は、合成部の一例である。画像処理部２５は、画像処理部の一例である。表示部１２及び操作部１３は、第１の表示操作部の一例である。表示部２２及び操作部２３は、第２の表示操作部の一例である。

以上、本発明の実施例について詳述したが、本発明は斯かる特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。

１０００ 画像処理システム
１００ 複写機
２００ スマートフォン
３００ サーバ
２０１ 操作部パネル
２０２ ＰＣ
１００１ ＣＰＵ
１００２ 記憶装置
１００３ 補助記憶装置
１００４ ネットワークインタフェース
１００５ 表示装置
１００６ 入力装置
１００７ スキャナ装置
１００８ プリンタ装置
２００１ ＣＰＵ
２００２ 記憶装置
２００３ 補助記憶装置
２００４ ネットワークインタフェース
２００５ 表示装置
２００６ 入力装置
１１、２１ 制御部
１２、２２ 表示部
１３、２３ 操作部
１４、２４ 通信部
１５、２５ 画像処理部
１６ 読取部
１７ 印刷部
１８、２６ 記憶部

特許第５８１４６１２号公報

Claims (4)

1. 画像処理装置及び情報端末を含む画像処理システムであって、
   前記画像処理装置は、
   画像データを前記情報端末と送受信する第１の通信部と、
   複数の画像データを合成する合成部と、
   ユーザからの操作を受け付ける第１の表示操作部とを有し、
   前記情報端末は、
   画像データを前記画像処理装置と送受信する第２の通信部と、
   前記画像データに画像処理を行う画像処理部と、
   ユーザからの操作を受け付ける第２の表示操作部とを有し、
   前記画像処理システムは、
   前記第２の通信部が、第１の画像データの一部である前記第１の通信部から送信された第２の画像データを受信し、
   前記画像処理部は、前記送信された第２の画像データに画像処理を行い、
   前記第１の通信部は、前記第２の通信部から送信された前記画像処理を行った第２の画像データを受信し、
   前記合成部が、前記画像処理を行った第２の画像データと、前記第１の画像データとを合成し、
   前記第１の表示操作部は、前記第２の画像データが、第１の画像データの一部である場合、前記第１の画像データの一部を決定するユーザからの操作を受け付け、
   前記第２の表示操作部は、前記画像処理部が画像処理を行うためのユーザからの操作を受け付け、
   前記第２の表示操作部が、表示する画像のサイズに基づいて、前記ユーザからの操作を受け付けるボタンの表示位置を変更し、
   前記第２の表示操作部が、表示する画像の個数に基づいて、前記ユーザからの操作を受け付けるボタンの表示位置を変更する第１の処理と、
   前記第２の通信部が、前記第１の画像データ及び前記第１の画像データのうち画像処理を行う領域を示す情報を受信し、
   前記画像処理部は、前記領域に画像処理を行い、
   前記第２の表示操作部は、前記第１の画像データ、前記領域の拡大画像及び前記第１の画像データに画像処理後の前記領域を合成した画像を同時に表示する第２の処理とを選択的に実行する画像処理システム。
2. 前記第２の画像データが、第１の画像データの一部である場合、
   前記第１の画像データの一部は、前記画像処理装置に決定される請求項１記載の画像処理システム。
3. 前記第２の通信部は、前記第１の画像データに画像処理後の前記領域を合成したデータを前記第１の通信部に送信せず、前記領域の画像処理に係るパラメータ又は設定値を前記第１の通信部に送信する、請求項１又は２記載の画像処理システム。
4. 画像処理装置及び情報端末を含む画像処理システムで実行される画像処理方法であって、
   前記画像処理装置は、
   画像データを前記情報端末と送受信する第１の通信手順と、
   複数の画像データを合成する合成手順と、
   ユーザからの操作を受け付ける第１の表示操作手順を実行し、
   前記情報端末は、
   画像データを前記画像処理装置と送受信する第２の通信手順と、
   前記画像データに画像処理を行う画像処理手順と、
   ユーザからの操作を受け付ける第２の表示操作手順を実行し、
   前記画像処理システムは、
   前記情報端末が、第１の画像データの一部である前記第１の通信手順により送信された第２の画像データを受信する手順を実行し、
   前記情報端末は、前記送信された第２の画像データに画像処理を行う手順を実行し、
   前記画像処理装置は、前記第２の通信手順により送信された前記画像処理を行った第２の画像データを受信する手順を実行し、
   前記画像処理装置が、前記画像処理を行った第２の画像データと、前記第１の画像データとを合成する手順を実行し、
   前記画像処理装置は、前記第２の画像データが、第１の画像データの一部である場合、前記第１の画像データの一部を決定するユーザからの操作を受け付ける前記第１の表示操作手順を実行し、
   前記情報端末は、前記画像処理手順において、画像処理を行うためのユーザからの操作を受け付ける前記第２の表示操作手順を実行し、
   前記情報端末が、前記第２の表示操作手順において、表示する画像のサイズに基づいて、前記ユーザからの操作を受け付けるボタンの表示位置を変更する手順を実行し、
   前記情報端末が、前記第２の表示操作手順において、表示する画像の個数に基づいて、前記ユーザからの操作を受け付けるボタンの表示位置を変更する手順を実行する第１の処理と、
   前記情報端末が、前記第２の通信手順において、前記第１の画像データ及び前記第１の画像データのうち画像処理を行う領域を示す情報を受信し、
   前記情報端末は、前記画像処理手順において、前記領域に画像処理を行い、
   前記情報端末は、前記第２の表示操作手順において、前記第１の画像データ、前記領域の拡大画像及び前記第１の画像データに画像処理後の前記領域を合成した画像を同時に表示する第２の処理とを選択的に実行する画像処理方法。

Images