JP6454991B2 - 印刷条件設定装置、印刷条件設定システム、印刷条件設定方法 - Google Patents

Description

本発明は、印刷条件の設定を行う、印刷条件設定装置、印刷条件設定システム、印刷条件設定方法に関する。

プリンタやスキャナ、ファクシミリ等の機能を備える画像形成装置などの複合機（ＭＦＰ（Multi Function Peripheral）のユーザが、ＭＦＰの本体設定や、出力設定などの設定を行う場合、該設定を行うための画面まで、画面遷移を行い、その画面にて機能等を選択して、設定を行わなければならない。

設定を行うために、複数の画面を行ったり来たりする必要がある場合は、ユーザにとって非常に手間がかかる。そこで、該設定に係る操作を簡略化するための技術が提案されている。

たとえば、特許文献１には、加工済みの原稿や用紙をスキャンした場合に、その原稿や用紙の加工痕（パンチ跡、ステイプル痕、折った痕など）を検出して、同様の加工が行われるような設定内容を、自動で再設定する技術が開示されている（特許文献１参照）。

また、特許文献２には、表示部に表示されたプレビュー画像に対してユーザが行ったジェスチャーを検出し、そのジェスチャーに応じた設定を自動で行う技術が開示されている（特許文献２参照）。

特開２００６−８４６８５号公報 特開２０１１−１３５２２６号公報

特許文献１に記載の方法では、設定を行うために、加工済みの原稿を必要とする。よって、加工済みの原稿が無い場合は、新たな原稿に対して、パンチ穴をあける、ステイプルを打つ、折り目を付けるなどの加工処理を施さなければならない。

また、特許文献２に記載の方法では、プレビュー画像は、平面状の表示部に表示されているので、設定内容から直観的に連想されるジェスチャーでは、設定を行うことができないケースが存在する。たとえば、冊子、差し込み、折りのような後処理に係る出力設定や、本体設定などを行うために、平面状の表示部上でどのようなジェスチャーを行うべきかを直感的に理解できない。よって、それらの設定を行う場合、ユーザは、冊子、差し込み、折りなどの機能や、本体設定に係る機能と対応する各ジェスチャーを予め覚えておかなければならない。

本発明は、上記の問題を解決しようとするものであり、印刷条件の設定を容易に行うことができる印刷条件設定装置、印刷条件設定システム、印刷条件設定方法を提供することを目的としている。

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。

［１］ユーザが用紙の形状を変化させる様子をカメラで撮影して得た動画を取得する取得部と、
前記取得部が取得した前記動画を解析して、前記用紙の形状の変化を検出する検出部と、
用紙の形状の変化パターンと印刷条件が対応付けて登録された登録部と、
前記検出部が検出した用紙の形状の変化が前記登録部に登録されているいずれかの前記変化パターンに一致するか否かを調べ、一致する場合に、
（１）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を、所定の操作表示装置の表示部に表示させる、
（２）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる、
（３）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（１）の設定画面を前記表示部に表示させる、
のうちのいずれか１つを行う第１制御を実行する制御部と、
を備える
ことを特徴とする印刷条件設定装置。

上記発明では、ユーザが用紙の形状を変化させる様子をカメラで撮影して得た動画を取得し、該動画から用紙の形状の変化を検出する。そして、検出した変化が、登録部に登録されている変化パターンと一致する場合は、所定の操作表示装置の表示部が表示する画面を、その変化パターンに対応づけて登録されている印刷条件の設定を行うための設定画面に遷移等させる。これにより、ユーザは、該表示部の画面を、印刷条件の設定を行うための設定画面に容易に遷移させ、設定を行うことができる。なお、該設定画面にて、該印刷条件が選択された状態であってもよいし、該印刷条件に係る設定操作を誘導する誘導表示を行ってもよい。

［２］前記制御部は、前記検出部が前記用紙の形状の変化を検出してから一定時間内に、前記所定の操作表示装置の操作部が操作を受けた場合、または前記検出部が前記用紙の形状の変化を検出しなかった場合は、前記検出後に実行した前記第１制御を維持する
ことを特徴とする［１］に記載の印刷条件設定装置。

上記発明では、前述の変化パターンと一致する用紙の形状の変化を検出してから一定時間内に、所定の操作表示装置の操作部が操作を受けた場合、または検出部が用紙の形状の変化を検出しなかった場合は、該検出後に実行した第１制御を維持する。これにより、該操作を受けた後、または一定時間の経過後に検出される用紙の形状の変化に対応する第１制御の更なる実行が禁止される。該操作を受けた後、または一定時間の経過後に検出される用紙の形状の変化に対応する第１制御の更なる実行が禁止されれば、用紙の形状を変化させても設定画面が切り替わらない。よって、ユーザは、用紙の形状を変化させて所望の設定画面が表示された後は、その変化後の形状を維持し続けることなく、操作を行うことができる。

［３］前記取得部は、ユーザの動作をカメラで撮影して得た動画を取得し、
前記検出部は、前記動画内のユーザの動作をさらに検出し、
前記登録部には、ジェスチャーと印刷条件が対応付けて登録されており、
前記制御部は、前記検出部が検出したユーザの動作が前記登録部に登録されているいずれかのジェスチャーに一致するか否かを調べ、一致する場合に、
（４）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を前記表示部に表示させる
（５）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
（６）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（４）の設定画面を前記表示部に表示させる、
のうちのいずれか１つを行う第２制御を実行する
ことを特徴とする［１］または［２］に記載の印刷条件設定装置。

上記発明では、ユーザの動作をカメラで撮影して得た動画を取得し、その取得した動画からユーザの動作を検出し、その検出した動作が、登録部に登録されているジェスチャーと一致する場合は、そのジェスチャーに対応づけて登録されている印刷条件の設定を行うための設定画面に遷移等する。これにより、ユーザは、表示部の表示を所望する印刷条件の設定を行うための設定画面に容易に遷移させ、設定を行うことができる。なお、該設定画面にて、該印刷条件が選択された状態であってもよいし、該印刷条件に係る設定操作を誘導する誘導表示を行ってもよい。用紙の形状を変化させるだけでなく、ユーザの動作によっても設定画面へ遷移させることができる。よって、多様な設定方法の提供により、個人の好みや、設定の種類に応じた適切な方法で設定画面への遷移が可能になる。

［４］前記登録部に登録されるジェスチャーは、現実世界の用紙に対してユーザが行う所定の動作、または、前記表示部に表示された用紙の画像に対してユーザが行う所定の動作である
ことを特徴とする［３］に記載の印刷条件設定装置。

上記発明では、登録部に登録されるジェスチャーは、現実世界の用紙に対してユーザが行う所定の動作、または、表示部に表示された用紙の画像に対してユーザが行う所定の動作である。たとえば、現実世界の用紙、および表示部に表示された用紙の画像を背景にしてユーザが行う動作などが登録される。なお、用紙の画像よりも、現実世界の用紙の方が、サイズが大きいことが想定される。よって、用紙上の位置を指定する動作においては、現実世界の用紙に対する動作を検出する場合の方が、用紙の画像に対して行う動作を検出する場合よりも高い精度で位置を検出することができる。

［５］前記用紙の形状の変化パターンに対応付けて前記登録部に登録された印刷条件は後処理に係る印刷条件であり、前記ジェスチャーに対応付けて前記登録部に登録された印刷条件は後処理以外に係る印刷条件である
ことを特徴とする［３］または［４］に記載の印刷条件設定装置。

後処理は用紙に対して施す加工であるため、後処理に係る印刷条件と、用紙の形状の変化はユーザが直観的に結び付けやすく、用紙の形状の変化による後処理に係る印刷条件の設定は容易である。よって、用紙の形状の変化パターンに対応付けて後処理に係る印刷条件を登録する。一方、非後処理に係る印刷条件は、用紙の形状の変化とは、ユーザが直観的に結び付けづらいので、ユーザの動作による入力が適している。よって、ジェスチャーに対応付けて後処理以外に係る印刷条件を登録する。

［６］前記制御部は、前記検出部によって前記用紙の形状の変化が検出されない場合に、前記第２制御を実行する
ことを特徴とする［３］乃至［５］のいずれか１つに記載の印刷条件設定装置。

上記発明では、ユーザの動作による設定よりも、用紙の形状の変化による設定が優先される。これにより、用紙の形状を変化させている際の手の動きをジェスチャーとして誤認されることが無くなる。

［７］前記第１制御と前記第２制御について、実行を許可するか否かの設定を予め受け付け、
前記制御部は、前記設定で許可された制御を実行する
ことを特徴とする［３］乃至［６］のいずれか１つに記載の印刷条件設定装置。

上記発明では、用紙の形状の変化を検出した場合の第１制御と、ユーザの動作を検出した場合の第２制御について、実行を許可するか否かの設定を予め受け付け、該設定で許可された制御を実行する。たとえば、ユーザは、自身の得手不得手に合わせて、得意な設定方法のみを有効にすることができる。

［８］前記制御部は、前記第１制御または前記第２制御を実行中もしくは実行後に、該実行の中止指示を受けた場合、前記表示部の表示内容を前記第１制御または前記第２制御を実行開始前の状態に戻す
ことを特徴とする［３］乃至［７］のいずれか１つに記載の印刷条件設定装置。

［９］情報処理装置を、
［１］乃至［８］のいずれか１つに記載の印刷条件設定装置として動作させる
ことを特徴とするプログラム。

［１０］ユーザが用紙の形状を変化させる様子を撮影するカメラ部と、
用紙の形状の変化パターンと印刷条件が対応付けて登録された登録部と、
前記カメラ部が撮影して得た動画から、前記用紙の形状の変化を検出する検出部と、
印刷条件設定装置と、
を含んで構成される印刷条件設定システムであって、
前記印刷条件設定装置は、前記検出部が検出した用紙の形状の変化が前記登録部に登録されているいずれかの前記変化パターンに一致するか否かを調べ、一致する場合に、
（１）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を所定の操作表示装置の表示部に表示させる
（２）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
（３）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（１）の設定画面を前記表示部に表示させる
のうちのいずれか１つを行う第１制御を実行する
ことを特徴とする印刷条件設定システム。

上記発明では、カメラ部、登録部、検出部、印刷条件設定装置は単体の装置であってもよいし、いずれかの組み合わせで同じ装置内に含まれていてもよい。たとえば、スマートフォンなどのように、全部が同じ装置に含まれていてもよい。カメラ部と登録部と検出部が同一の装置に含まれ、印刷条件設定装置が単体の装置であってもよい。

［１１］前記印刷条件設定装置は、前記検出部が前記一致する用紙の形状の変化を検出してから一定時間内に、前記所定の操作表示装置の操作部が操作を受けた場合、または前記検出部が前記用紙の形状の変化を検出しなかった場合は、前記検出後に実行した前記第１制御を維持する
ことを特徴とする［１０］に記載の印刷条件設定システム。

［１２］前記カメラ部で撮影して得た動画を取得する取得部を備え、
前記登録部は、ジェスチャーと印刷条件が対応付けて登録されており、
前記検出部は、前記動画内のユーザの動作を検出し、
前記印刷条件設定装置は、前記検出部が検出したユーザの動作が前記登録部に登録されているいずれかのジェスチャーに一致するか否かを調べ、一致する場合に、
（４）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を前記表示部に表示させる
（５）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
（６）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（４）の設定画面を前記表示部に表示させる
のうちのいずれか１つを行う第２制御を実行する
ことを特徴とする［１０］または［１１］に記載の印刷条件設定システム。

［１３］前記登録部に登録されるジェスチャーは、現実世界の用紙に対してユーザが行う所定の動作、または、前記表示部に表示された用紙の画像に対してユーザが行う所定の動作である
ことを特徴とする［１２］に記載の印刷条件設定システム。

［１４］前記用紙の形状の変化パターンに対応付けて前記登録部に登録された印刷条件は後処理に係る印刷条件であり、前記ジェスチャーに対応付けて前記登録部に登録された印刷条件は後処理以外に係る印刷条件である
ことを特徴とする［１２］または［１３］に記載の印刷条件設定システム。

［１５］前記印刷条件設定装置は、前記検出部によって前記用紙の形状の変化が検出されない場合に、前記第２制御を実行する
ことを特徴とする［１２］乃至［１４］のいずれか１つに記載の印刷条件設定システム。

［１６］前記印刷条件設定装置は、前記制御と前記第２制御について、実行を許可するか否かの設定を予め受け付け、前記設定で許可された制御を実行する
ことを特徴とする［１２］乃至［１５］のいずれか１つに記載の印刷条件設定システム。

［１７］前記印刷条件設定装置は、前記第１制御または前記第２制御を実行中、もしくは実行後に該実行の中止指示を受けた場合、前記表示部の表示内容を前記第１制御または前記第２制御を実行開始前の状態に戻す
ことを特徴とする［１２］乃至［１６］のいずれか１つに記載の印刷条件設定システム。

［１８］取得部が、ユーザが用紙の形状を変化させる様子をカメラで撮影して得た動画を取得する取得ステップと、
検出部が、前記取得部が取得した前記動画を解析して、前記用紙の形状の変化を検出する検出ステップと、
印刷条件設定装置が、前記検出部が検出した用紙の形状の変化が、印刷条件に対応付けて登録部に登録されているいずれかの用紙の形状の変化パターンに一致するか否かを調べ、一致する場合に、
（１）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を所定の表示装置の表示部に表示させる
（２）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
（３）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（１）の設定画面を前記表示部に表示させる
のうちの少なくとも１つを行う第１制御を実行する第１制御ステップと、
操作部が、印刷条件の設定操作を受ける操作ステップと、
を備える
ことを特徴とする印刷条件設定方法。

［１９］前記検出部が前記一致する用紙の形状の変化を検出してから一定時間内に、前記所定の操作表示装置の操作部が操作を受けた場合、または前記検出部が前記用紙の形状の変化を検出しなかった場合に、前記検出後に実行した前記第１制御を維持する制御維持ステップをさらに備える
ことを特徴とする［１８］に記載の印刷条件設定方法。

［２０］登録部には、ジェスチャーと印刷条件を対応付けて登録してあり、
前記取得ステップでは、ユーザの動作をカメラで撮影して得た動画を取得し、
前記検出ステップでは、前記動画内のユーザの動作をさらに検出し、
前記印刷条件設定装置が、前記検出部が検出したユーザの動作が前記登録部に登録されているいずれかの前記ジェスチャーに一致するか否かを調べ、一致する場合に、
（４）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を前記表示部に表示させる
（５）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
（６）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（４）の設定画面を前記表示部に表示させる
のうちのいずれか１つを行う第２制御を実行する第２制御ステップをさらに備える
ことを特徴とする［１８］または［１９］に記載の印刷条件設定方法。

［２１］前記登録部に登録されるジェスチャーは、現実世界の用紙に対してユーザが行う所定の動作、または、前記表示部に表示された用紙の画像に対してユーザが行う所定の動作である
ことを特徴とする［２０］に記載の印刷条件設定方法。

［２２］前記用紙の形状の変化パターンに対応付けて前記登録部に登録された印刷条件は後処理に係る印刷条件であり、前記ジェスチャーに対応付けて前記登録部に登録された印刷条件は後処理以外に係る印刷条件である
ことを特徴とする［２０］または［２１］に記載の印刷条件設定方法。

［２３］前記印刷条件設定装置は、前記検出部によって前記用紙の形状の変化が検出されない場合に、前記第２制御を実行する
ことを特徴とする［２０］乃至［２２］のいずれか１つに記載の印刷条件設定方法。

［２４］前記第１制御と前記第２制御について、実行を許可するか否かの設定を予め受け付ける設定受け付けステップをさらに備え、
前記印刷条件設定装置は、前記設定で許可された制御を実行する
ことを特徴とする［２０］乃至［２３］のいずれか１つに記載の印刷条件設定方法。

［２５］前記印刷条件設定装置が前記第１制御または前記第２制御を実行中もしくは実行後に、該実行の中止指示を受けたら、前記表示部の表示内容を前記第１制御または前記第２制御の実行前に戻す制御キャンセルステップをさらに備える
ことを特徴とする［２０］乃至［２４］のいずれか１つに記載の印刷条件設定方法。

本発明に係る印刷条件設定装置、印刷条件設定システム、印刷条件設定方法によれば、印刷条件に係る設定を簡易に行うことができる。

本発明の実施の形態に係る画像形成装置を含む印刷条件設定システムの構成例を示す図である。 ＡＲメガネを装着したユーザが用紙を見たときの表示例を示す図である。 ＡＲメガネの電気的な概略構成を示すブロック図である。 画像形成装置の電気的な概略構成を示すブロック図である。 ＡＲメガネを装着したユーザから見た、用紙と、その上に重ねられて表示されている拡張画像とを示す図である。 用紙を右から左にめくった場合の様子を示す図である。 図６の場合に表示する画面の表示例を示す図である。 用紙を左から右にめくった場合の様子を示す図である。 図８の場合に表示する画面の表示例を示す図である。 新たな用紙の差し込みを行う場合の様子を示す図である。 図１０の場合に表示する画面の表示例を示す図である。 用紙を二つ折りにした場合の様子を示す図である。 図１２の場合に表示する画面の表示例を示す図である。 用紙を三つ折りにした場合の様子を示す図である。 図１４の場合に表示する画面の表示例を示す図である。 ジェスチャーを行う場合の様子の一例を示す図である。 図１６の場合に表示する画面の表示例を示す図である。 指示方法を設定する画面の表示例を示す図である。 印刷条件の設定の補助を行う場合の処理を示す流れ図である。

以下、図面に基づき本発明の実施の形態を説明する。

図１は、本発明の実施の形態に係る印刷条件設定システムとしての役割を果たすＡＲメガネ４０が使用される印刷システム２の構成を示している。印刷システム２は、ＡＲメガネ４０と、画像形成装置１０、無線ルータ５、などをＬＡＮ（Local Area Network）などのネットワーク３に接続して構成される。ＡＲメガネ４０は無線ルータ５と無線通信で接続され、無線ルータ５を介してネットワーク３に接続されている。

画像形成装置１０は、原稿を光学的に読み取ってその複製画像を記録紙に印刷するコピー機能、読み取った原稿の画像データをファイルにして保存したり外部装置へネットワーク３を通じて送信したりするスキャン機能、外部装置からネットワーク３を通じて受信した印刷データに係る画像を記録紙上に画像形成して印刷出力するプリンタ機能などを備えた、所謂、複合機（ＭＦＰ）である。また、画像形成装置１０は、コピーや印刷を行う前には、後述する操作部１８（図４参照）が受けた操作に応じて印刷条件の設定を行う。本発明の実施の形態では、画像形成装置１０が、本発明の印刷条件設定システムにおける所定の操作表示装置としての役割を果たす。

ＡＲメガネ４０は、所謂、ヘッドマウントディスプレイ（ＨＭＤ）方式で拡張現実空間を表示するウェアラブルコンピュータである。ＡＲメガネ４０は、ユーザの見ている光景（現実空間）を撮影するカメラ部５２（図３参照）を備えており、このカメラ部５２でユーザが用紙の形状を変化させる様子を撮影する。本発明の実施の形態では、ＡＲメガネ４０を装着したユーザが、複数枚の用紙が重ねられた用紙束７の形状を、めくる、折るなどして変化させる様子や、用紙束７を背景にして行うユーザの動作を見る。

その後、該撮影により得た動画を解析し、該動画の中における、用紙束７の形状の変化、もしくは用紙束７に対して行われたユーザの動作を検出する。ＡＲメガネ４０は、その検出した形状の変化や、ユーザの動作が、予め印刷条件と対応づけて登録されている変化パターン、もしくはジェスチャーと一致するか否かを調べ、一致する場合に、その一致する変化パターン、もしくはジェスチャーに対応付けられて登録されている印刷条件の設定を補助するよう画像形成装置１０に指示する。

具体的には、該印刷条件に係る設定を行うための設定画面を後述する表示部１９（図４参照）に表示させたり、その設定画面を該印刷条件が設定された状態で表示させたり、該印刷条件に係る設定操作を誘導する誘導表示を行ったりするよう指示する。これにより、ユーザは、画像形成装置１０に対し、該印刷条件を容易に設定することができる。なお、本発明の実施の形態では、各印刷条件に対応付けされている変化パターンやジェスチャーは、ユーザが直観的に分かるようなものが割り当てられている。

図２は、ＡＲメガネ４０の機械的な概略構成の例を示す。ＡＲメガネ４０はメガネのようにユーザの目の周辺に装着されて使用される。ＡＲメガネ４０は、装着時に装着者の左右の目の前にそれぞれ配置されるメガネのレンズ部分に対応した透過部４１と、左右の透過部４１の間を繋ぐブリッジ４２と、左右の透過部４１の両脇から同一方向に延びて装着者の耳に引っ掛けられるツル部４３を備えて構成される。

ＡＲメガネ４０は、ユーザの見ている実際の光景に、仮想的に表示すべき部分の画像だけを重ね合わせる方式（所謂、光透過型）を採用している。透過部４１を通してユーザは現実世界を見る。透過部４１には画像を表示可能な半透明な表示スクリーン部４４が設けてあり、任意の画像を現実世界の光景に重ね合わせることで拡張現実空間をユーザに見せる。図２では、透過部４１を通してユーザが用紙束７を見ている。後述するカメラ部５２は、透過部４１を通してユーザが見ている景色（ユーザが向いている方向）を撮影可能な位置に設けられている。たとえば、カメラ部５２はブリッジ４２の上部などに設けられる（図示は省略する）。

図３は、ＡＲメガネ４０の電気的な概略構成を示している。ＡＲメガネ４０は、制御部としてのＣＰＵ(Central Processing Unit)４６にバスを介してＲＯＭ(Read Only Memory)４７、ＲＡＭ(Random Access Memory)４８、不揮発メモリ４９、方位センサ部５１、カメラ部５２、操作部５３、前述の表示スクリーン部４４、無線通信部５４、画像処理部５５、認証部５６などを接続して構成される。

ＣＰＵ４６はＲＯＭ４７に格納されているプログラムに従ってＡＲメガネ４０の動作を制御する。ＲＯＭ４７にはプログラムや固定データが記憶されている。ＲＡＭ４８はＣＰＵ４６がプログラムを実行する際に各種のデータを一時的に格納するワークメモリなどとして使用される。不揮発メモリ４９には、各種の設定情報や、ユーザ情報等が記憶される。

本発明の実施の形態では、不揮発メモリ４９に前述の変化パターンおよびジェスチャーと印刷条件が対応付けて登録されている。たとえば、用紙束７の一番上の用紙の右端部分が左方向に向けてめくられた場合の用紙束７の形状の変化パターンには、左とじの印刷条件が対応付けて登録されている。

方位センサ部５１は、ＡＲメガネ４０の向きや姿勢およびその変化を検出する。方位センサ部５１は、複数の地磁気センサと、複数の加速度センサを組み合わせて構成される。方位センサ部５１は、ＡＲメガネ４０を装着しているユーザの姿勢やユーザが向いている方向や角度（これらは、カメラ部５２が撮影している方向や向きと一致）を検出したり、ＡＲメガネ４０が傾けられたりした場合の動作の向きや速さを検出したりして、その検出結果をＣＰＵ４６へ通知する。ＣＰＵ４６は、方位センサ部５１からの通知に基づいて、ＡＲメガネ４０を装着しているユーザの姿勢、角度、傾けられたりした動作の向きや速さを認識する。

カメラ部５２は、ＡＲメガネ４０の前方（装着者が見ている光景）を撮影する。より詳細には、装着者が前方を見たときの視野とほぼ同じ範囲を撮影する。カメラ部５２は動画を撮影し、たとえば、毎秒３０フレームの画像を取り込む。

操作部５３は少数のスイッチ等であり、表示スクリーン部４４に表示する画像の明るさなどの調整に使用される。

無線通信部５４は、無線ルータ５と無線通信し、該無線ルータ５およびネットワーク３を介して画像形成装置１０と各種の情報を授受する機能を果たす。本発明の実施の形態では、画像形成装置１０に対して印刷条件の設定を補助する指示を送信する。

画像処理部５５は、表示スクリーン部４４に表示する画像の拡大・縮小、変形などを行う。

認証部５６は、ユーザ認証を行う機能を果たす。具体的には、自装置を装着したユーザに対してログイン時にユーザ認証を行い、ログインユーザを特定する。本実施の形態では、ＡＲメガネ４０を利用するにはログインを必要とし、利用前にユーザ認証が必ず行われるものとする。なお、ユーザ認証の方法は、ユーザＩＤ（Identification）とパスワードによる認証等、任意の方法でよい。

図４は、画像形成装置１０の概略構成を示すブロック図である。画像形成装置１０は、当該画像形成装置１０の動作を統括的に制御するＣＰＵ１１を有している。ＣＰＵ１１にはバスを通じてＲＯＭ１２、ＲＡＭ１３、不揮発メモリ１４、ハードディスク装置１５、自動原稿搬送部（ＡＤＦ：Auto Document Feeder）１６、画像読取部１７、操作部１８、表示部１９、ネットワーク通信部２０、画像処理部２１、プリンタ部２２、後処理部２３などが接続されている。

ＣＰＵ１１は、ＯＳ（Operating System）プログラムをベースとし、その上で、ミドルウェアやアプリケーションプログラムなどを実行する。ＲＯＭ１２には、各種のプログラムが格納されており、これらのプログラムに従ってＣＰＵ１１が各種処理を実行することで画像形成装置１０の各機能が実現される。

ＲＡＭ１３は、ＣＰＵ１１がプログラムに基づいて処理を実行する際に各種のデータを一時的に格納するワークメモリや画像データを格納する画像メモリなどとして使用される。

不揮発メモリ１４は、電源をオフにしても記憶内容が破壊されないメモリ（フラッシュメモリ）であり、各種設定情報の保存などに使用される。ハードディスク装置１５は大容量不揮発の記憶装置であり、印刷データ、画像データなどのほか各種のプログラムや、データが記憶される。

画像読取部１７は、原稿を光学的に読み取って画像データを取得する機能を果たす。画像読取部１７は、例えば、原稿に光を照射する光源と、その反射光を受けて原稿を幅方向に１ライン分読み取るラインイメージセンサと、ライン単位の読取位置を原稿の長さ方向に順次移動させる移動ユニットと、原稿からの反射光をラインイメージセンサに導いて結像させるレンズやミラーなどからなる光学経路と、ラインイメージセンサの出力するアナログ画像信号をデジタルの画像データに変換する変換部などを備えて構成される。

自動原稿搬送部１６は、原稿台にセットされた原稿をその最上のものから１枚ずつ順に繰り出して搬送し、画像読取部１７の読み取り位置を通過させて所定の排紙位置へ排紙する機能を果たす。

操作部１８と表示部１９はユーザからジョブの投入などの操作を受ける操作パネルを構成する。表示部１９は、液晶ディスプレイ（ＬＣＤ…Liquid Crystal Display）などで構成され、各種の操作画面、設定画面などを表示する機能を果たす。操作部１８は、スタートボタンなどの各種操作スイッチと、表示部１９の物理的画面上に設けられたタッチパネルとを備えている。タッチパネルは、表示部１９の物理的画面がタッチペンや指などで接触操作された座標位置を検出する。本発明の実施の形態では、操作部１８と表示部１９は、本発明の印刷条件設定システムにおける所定の操作表示装置の操作部と表示部に該当する。

ネットワーク通信部２０は、ＬＡＮなどのネットワーク３を通じてサーバなどの外部装置と通信する機能を果たす。ネットワーク通信部２０は、無線ＬＡＮの機能も有する。

画像処理部２１は、画像の拡大縮小、回転などの処理のほか、印刷データをイメージデータに変換するラスタライズ処理、画像データの圧縮、伸張処理などを行う。

プリンタ部２２は、画像データに応じた画像を記録紙上に画像形成する機能を果たす。ここでは、記録紙の搬送装置と、感光体ドラムと、帯電装置と、レーザーユニットと、現像装置と、転写分離装置と、クリーニング装置と、定着装置とを有し、電子写真プロセスによって画像形成を行う、所謂、レーザープリンタとして構成されている。画像形成は他の方式でもかまわない。

後処理部２３は、画像形成済みの用紙に対して、ステイプル、パンチ、紙折り、とじ、糊付け製本等の後処理を行う。実行される後処理の内容は、設定された印刷条件に基づいて行われる。

本発明の実施の形態では、ＡＲメガネ４０が、撮影した動画に対して画像解析を実行し、その動画内における用紙を認識するとともに、その用紙の形状の変化や、ユーザが該用紙を背景にして行う動作を検出する。そして、その検出した変化、または動作が、不揮発メモリ４９に登録されている変化パターン、もしくはジェスチャーと一致するか否かを調べ、一致する場合、該変化パターンやジェスチャーに対応付けて登録されている印刷条件の設定を補助する指示を画像形成装置１０に送信する。

具体的には、ＡＲメガネ４０は検出した用紙の形状の変化が、不揮発メモリ４９に登録されているいずれかの変化パターンに一致する場合は、
（１）その一致する変化パターンに対応付けて登録されている印刷条件に係る設定を行うための設定画面を表示部１９に表示させる指示を画像形成装置１０に送信する
（２）その一致する変化パターンに対応付けて登録されている印刷条件に係る設定項目が選択された状態で、該印刷条件に係る設定を行うための設定画面を表示部１９に表示させる指示を画像形成装置１０に送信する
（３）その一致する変化パターンに対応付けて登録されている印刷条件に係る設定を行うための設定画面を表示部１９に表示させるとともに、該印刷条件に係る設定操作を誘導する誘導表示を行わせる指示を画像形成装置１０に送信する
のうちのいずれか１つを行う第１制御を実行する。

また、ＡＲメガネ４０は検出したユーザの動作が、不揮発メモリ４９に登録されているいずれかのジェスチャーに一致する場合は、
（４）その一致するジェスチャーに対応付けて登録されている印刷条件に係る設定を行うための設定画面を表示部１９に表示させる指示を画像形成装置１０に送信する
（５）その一致するジェスチャーに対応付けて登録されている印刷条件に係る設定項目が選択された状態で、該印刷条件に係る設定を行うための設定画面を表示部１９に表示させる指示を画像形成装置１０に送信する
（６）その一致するジェスチャーに対応付けて登録されている印刷条件に係る設定を行うための設定画面を表示部１９に表示させるとともに、該印刷条件に係る設定操作を誘導する誘導表示を行わせる指示を画像形成装置１０に送信する
のうちのいずれか１つを行う第２制御を実行する。

これにより、該変化パターンやジェスチャーに対応付けて登録されている印刷条件を設定するための設定画面まで画面を遷移させる手間が省略される。また、表示された設定画面において該印刷条件を自動で選択された状態にしたり、該印刷条件の設定操作を誘導する誘導表示を行ったりするので、複数ある印刷条件の中から、所望する印刷条件を探して選択する手間が軽減される。本発明の実施の形態では、各印刷条件に対して、ユーザが直観的に分かるような変化パターンやジェスチャーが割り当てられている。たとえば、冊子を作る後処理の印刷条件に対して、ページをめくる動作（該動作による用紙の形状の変化）が対応付けされていることは、容易に想像することができる。また、そのページをめくる方向により、冊子における綴じ位置が指定される。これにより、ユーザは直感的な動作（または該動作による用紙の形状の変化）で、所望する印刷条件を容易に設定することができる。

なお、画像形成装置１０は、ＡＲメガネ４０から用紙の形状の変化を検出したことに起因する第１制御の実行指示を受けた後、操作部１８にて操作を受けた場合は、直ぐにＡＲメガネ４０にその旨を通知する。ＡＲメガネ４０は該変化の検出後、一定時間内に該通知を受けた場合、または一定時間内に次の用紙の形状の変化を検出しなかった場合は、該検出による第１制御の効果を維持させることで、該通知を受けた後、または該一定時間の経過後に検出した用紙の形状の変化に対応する第１制御の実行を禁止する。

用紙束７の形状を変化させた後、その変化後の状態を維持しつつ、操作部１８にて操作を行うのは難しい。たとえば、変化後の状態の維持に両手を使用する場合は、ユーザは操作を行うことができなくなる。そこで、用紙束７の形状を変化させた後、ユーザが直ぐに（一定時間内に）操作部１８にて操作を行った場合や、ＡＲメガネ４０が最初に用紙の形状の変化を検出してから一定時間の間、ユーザが用紙束７の形状を維持した場合は、次の第１制御の実行を禁止する。これによりユーザは、用紙束７の形状を変化させ、設定画面に画面を遷移させた後、その変化後の形状を維持し続けることなく、該設定画面での操作を行うことができる。

変化の検出後から一定時間内ではなく、第１制御の実行後から一定時間内に操作部１８にて操作を受けた場合、または第１制御の実行後から一定時間内に次の用紙の形状の変化を検出しなかった場合は、該第１制御の効果を維持させるようにしてもよい。

また、ＡＲメガネ４０は、第１制御または第２制御を実行中もしくは実行後に該実行の中止指示を受けた場合、画像形成装置１０の表示部１９が表示する表示内容を前述の第１制御または第２制御を実行開始前の状態に戻すことができる。これにより、ユーザは、意図せずに第１制御または第２制御が開始された場合であっても、その効果をキャンセルすることができる。

次に、ＡＲメガネ４０が、用紙の形状の変化、およびユーザの動作の検出を開始するまでの手順について説明する。

まず、ＡＲメガネは、カメラ部５２が撮影した動画を解析し、その中に用紙（本発明の実施の形態では用紙束７）を認識したら、該用紙の形状の変化や、該用紙を背景にして行うユーザの動作が検出可能になる。

ＡＲメガネ４０は、該動画の中の用紙を認識したら、拡張画像５７を該用紙に重ねて表示する。図５は、用紙束７に該拡張画像５７を重ねて表示する様子の一例を示す。図５では、拡張画像５７は、用紙束７の輪郭を点線で表示した画像である。ユーザは、用紙束７に対して拡張画像５７が重ねられたことにより、ＡＲメガネ４０が用紙束７の形状の変化や用紙束７を背景にして行うユーザの動作の検出が可能な状態になったことを認識する。また、拡張画像５７が表示されることにより、ユーザは、検出対象となる用紙（もしくは検出対象の動作の背景となる用紙）と、他の用紙を識別することができる。なお、本発明の実施の形態では、動画内に用紙を認識したら拡張画像５７を表示したが、表示しなくともよい。用紙束７の形状の変化や、用紙束７を背景にして行うユーザの動作の検出が可能になった通知は、他の手段で行ってもよい。

次に、ＡＲメガネ４０が検出する用紙の形状の変化またはユーザの動作、およびＡＲメガネ４０が第１制御または第２制御を実行して送信した指示に従って画像形成装置１０が表示する画面について、複数の具体例を挙げて説明する。

（具体例１）
図６は、ユーザが用紙束７の一番上に置かれた用紙の右端部分を左方向に向けてめくることにより、用紙束７の形状が変化する様子を示す。ＡＲメガネ４０は、カメラ部５２が撮影して得た動画の中から該変化を検出したら、該変化と、登録されている変化パターンを照らし合わせ、該変化に一致する変化パターンがあるか否かを調べる。そして、該変化に一致する変化パターンがある場合は、その変化パターンに対応づけて登録されている印刷条件の設定を補助する指示を画像形成装置１０に送信する。

図７は、図６に示す変化をＡＲメガネ４０が検出した際に送信した指示により、画像形成装置１０が表示部１９に表示する設定画面の一例である小冊子設定画面６０を示す。

小冊子設定画面６０は、画像形成された複数枚の用紙の端部をステイプルで綴じて小冊子にする後処理に関する設定をユーザから受けるための設定画面である。小冊子設定画面６０には、小冊子を作成しない設定を行うための非設定釦６１と、左とじで小冊子を作成する設定を行うための左とじ釦６２と、右とじで小冊子を作成する設定を行うための右とじ釦６３、および決定釦１００と、キャンセル釦１０１が表示されている。非設定釦６１と左とじ釦６２と右とじ釦６３のうちのいずれかが選択された状態で決定釦１００が押下されたら、画像形成装置１０は、選択された状態の釦に係る印刷条件を設定する。キャンセル釦１０１が押下されたら、小冊子の後処理に係る設定内容を変更せずにこの画面を閉じる。なお、非設定釦６１と左とじ釦６２と右とじ釦６３のうち２つ以上の釦を同時に選択することはできない。

本発明の実施の形態では、ユーザが、用紙束７の一番上の用紙の右端部分を左方向に向けてめくった場合における用紙束７の形状の変化と一致する変化パターンには、左とじの印刷条件が対応付けて登録されている。よって、ＡＲメガネ４０は、図６に示す変化を検出したら、左とじに係る印刷条件を設定する（左とじ釦６２を選択する）ための画面である小冊子設定画面６０を自動で表示するよう画像形成装置１０に指示する。

なお、ＡＲメガネ４０は、検出した用紙の形状の変化と一致する変化パターンに対応する印刷条件が予め選択された状態の設定画面を表示するよう画像形成装置１０に指示する。図７では、図６に示す変化に一致する印刷条件（左とじ釦６２）が予め選択された状態の小冊子設定画面６０を表示する指示を受けて、画像形成装置１０は、左とじ釦６２が予め選択された状態の小冊子設定画面６０を表示している。

画像形成装置１０は、ユーザから画面遷移操作を受けて、小冊子設定画面６０に遷移した場合は、デフォルトの設定として非設定釦６１が選択されている状態の小冊子設定画面６０を表示するが、ＡＲメガネ４０からの指示により、自動で小冊子設定画面６０に遷移する場合は、予め該指示が指定する印刷条件が選択された状態で小冊子設定画面６０を表示する。よって、ＡＲメガネ４０からの指示により設定画面に画面を遷移する場合は、この小冊子設定画面６０の中で該当の印刷条件を探して選択する手間が省略される。

（具体例２）
図８は、ユーザが用紙束７の一番上に置かれた用紙の左端部分を右方向に向けてめくることにより、用紙束７の形状が変化する様子を示す。ＡＲメガネ４０は、前述の方法で該変化を検出する。

図９は、図８に示す変化をＡＲメガネ４０が検出した際に送信した指示により、画像形成装置１０が表示部１９に表示する小冊子設定画面６０を示す。

本発明の実施の形態では、ユーザが、用紙束７の一番上の用紙の左端部分を右方向に向けてめくった場合における用紙束７の形状の変化パターンには、右とじの印刷条件が対応付けて登録されている。よって、ＡＲメガネ４０は、図８に示す変化を検出したら、右とじに係る印刷条件を設定するための画面である小冊子設定画面６０を自動で表示するよう画像形成装置１０に指示する。

図９でも、図７のようにＡＲメガネ４０からの指示により、自動で小冊子設定画面６０に遷移したので、画像形成装置１０は、右とじ釦６３が予め選択された状態の小冊子設定画面６０を表示する。

（具体例３）
図１０は、ユーザが用紙束７に対して、他の用紙を追加（差し込む）することにより、用紙束７の形状が変化する様子を示す。図１０では、用紙束７の一番上に置かれた用紙の下に、他の用紙を追加して（差し込んで）いる。ＡＲメガネ４０は、前述の方法で該変化を検出する。

図１１は、図１０に示す変化を検出したＡＲメガネ４０からの指示により、画像形成装置１０が表示部１９に表示する設定画面の一例である差し込み画面７０を示す。

差し込み画面７０は、画像形成済みの用紙（もしくは用紙束）に対して、他の用紙（他の種類や、他の内容の用紙）を差し込む、差し込み印刷に関する後処理の設定をユーザから受けるための設定画面である。差し込み画面７０には、差し込み印刷の後処理を実行しない設定を行うための非設定釦７１と、差し込み印刷の後処理を実行する設定を行うための差し込み釦７２、および決定釦１００と、キャンセル釦１０１が表示されている。非設定釦７１と差し込み釦７２のうちのいずれかが選択された状態で決定釦１００が押下されたら、画像形成装置１０は、その選択された状態の釦に係る印刷条件を設定する。キャンセル釦１０１が押下されたら、差し込み印刷の後処理に係る設定内容を変更せずにこの画面を閉じる。なお、非設定釦７１と差し込み釦７２の２つの釦を同時に選択することはできないものとする。

本発明の実施の形態では、ユーザが用紙束７に対して、他の用紙を追加（差し込む）する場合における、用紙束７の形状の変化に一致する変化パターンには、差し込み印刷の印刷条件が対応付けて登録されている。よって、ＡＲメガネ４０、図１０に示す変化を検出したら、差し込み印刷に係る印刷条件を設定するための画面である差し込み画面７０を自動で表示するよう画像形成装置１０に指示する。

図１１でも、ＡＲメガネ４０からの指示により、自動で差し込み画面７０に遷移したので、画像形成装置１０は、差し込み釦７２が予め選択された状態の差し込み画面７０を表示する。

（具体例４）
図１２は、ユーザが用紙束７を折る（２つ折りにする）ことにより、用紙束７の形状が変化する様子を示す。図１２では、ユーザが、用紙束７の下部をユーザから見て手前側に持ち上げて、用紙束７の上部と合わさるように用紙の形状を変化させている。ＡＲメガネ４０は、前述の方法で該変化を検出する。

なお、ユーザが用紙束７を折る場合、折り目が付くように用紙束７を折ってもよいが、本発明の実施の形態では、用紙束７の上部と下部を合わせれば、前述の折りに係る変化をＡＲメガネ４０が検出可能であるものとする。これにより用紙束７に折り目をつけることなく、折りに係る変化を検出することができる。

図１３は、図１２に示す変化を検出したＡＲメガネ４０からの指示により、画像形成装置１０が表示部１９に表示する設定画面の一例である折り画面８０を示す。

折り画面８０は、画像形成された複数枚の用紙を、二つ折りや三つ折り、Ｚ折りにする後処理（折りの後処理）に関する設定をユーザから受けるための設定画面である。折り画面８０には、折りの後処理を実行しない設定を行うための非設定釦８１と、二つ折りの設定を行うための２つ折り釦８２と、三つ折りの設定を行うための三つ折り釦８３と、Ｚ折り設定を行うためのＺ折り釦８４、および決定釦１００と、キャンセル釦１０１が表示されている。非設定釦８１と二つ折り釦８２、三つ折り釦８３、Ｚ折り釦８４のうちのいずれかが選択された状態で決定釦１００が押下されたら、画像形成装置１０は、その選択された状態の釦に係る印刷条件を設定する。キャンセル釦１０１が押下されたら、折りの後処理に係る設定内容を変更せずにこの画面を閉じる。なお、非設定釦８１と二つ折り釦８２、三つ折り釦８３、Ｚ折り釦８４のうち２つ以上の釦を同時に選択することはできないものとする。

本発明の実施の形態では、ユーザが用紙束７を二つに折った場合における用紙束７の形状の変化に一致する変化パターンには、二つ折りの印刷条件が対応付けて登録されている。よって、ＡＲメガネ４０は、図１２に示す変化を検出したら、二つ折りの印刷条件を設定するための画面である折り画面８０を自動で表示するよう画像形成装置１０に指示する。

図１３でも、ＡＲメガネ４０からの指示により、自動で折り画面８０に遷移したので、画像形成装置１０は、二つ折り釦８２が予め選択された状態の折り画面８０を表示する。

（具体例５）
図１４は、ユーザが用紙束７を折る（三つ折りにする）ことにより、用紙束７の形状が変化する様子を示す。図１４では、ユーザが、用紙束７の上部、中部、下部のうち、下部を内側（中部に向かって）に折り、上部をその上にかぶせるように折っている。下部に対して上部をかぶせるように折ってもよい。ＡＲメガネ４０は、前述の方法で該変化を検出する。

ユーザが用紙束７を折る場合、折り目が付くように用紙束７を折ってもよいが、本発明の実施の形態では、用紙束７の上部と中部を合わせ、その上に下部をかぶせれば、前述の折りに係る変化パターンをＡＲメガネ４０が検出可能であるものとする。これにより用紙束７に折り目をつけることなく、折りに係る変化を検出することができる。

図１５は、図１４に示す変化を検出したＡＲメガネ４０からの指示により画像形成装置１０が表示部１９に表示する折り画面８０を示す。

本発明の実施の形態では、ユーザが用紙束７を三つに折った場合における用紙束７の形状の変化に一致する変化パターンには、三つ折りの印刷条件が対応付けて登録されている。よって、ＡＲメガネ４０は、図１４に示す変化を検出したら、三つ折りの印刷条件を設定するための画面である折り画面８０を自動で表示するよう画像形成装置１０に指示する。

図１５でも、ＡＲメガネ４０からの指示により、自動で折り画面８０に遷移したので、画像形成装置１０は、三つ折り釦８３が予め選択された状態の折り画面８０を表示する。

（具体例６）
図１６は、用紙束７を背景にして行うユーザの動作の一例を示す。図１６では、ユーザが、用紙束７を背景にして、左上、右上、左下、右下の書き順で「Ｚ」を描くような動作を行っている。ＡＲメガネ４０は、カメラ部５２が撮影して得た動画の中から、用紙を背景にして行ったユーザの動作を検出したら、その動作と、登録されているジェスチャーを照らし合わせ、該動作に一致するジェスチャーがあるか否かを調べる。そして、一致するジェスチャーがある場合は、そのジェスチャーに対応づけて登録されている印刷条件の設定を補助するよう画像形成装置１０に指示する。

図１７は、図１６に示す動作を検出したＡＲメガネ４０の指示により画像形成装置１０が表示部１９に表示する設定画面の一例であるページ集約画面９０を示す。

ページ集約画面９０は、複数の画像を一枚の用紙（１ページ）に集約して画像形成を行う設定をユーザから受けるための設定画面である。ページ集約画面９０には、ページ集約を実行しない設定を行うための非設定釦９１と、２in１の設定を行うための２in１釦９２と、４in１（横順）の設定を行うための横順４in１釦９３と、４in１（縦順）の設定を行うための縦順４in１釦９４、および決定釦１００と、キャンセル釦１０１が表示されている。非設定釦９１と、２in１釦９２と、横順４in１釦９３と、縦順４in１釦９４のうちのいずれかが選択された状態で決定釦１００が押下されたら、画像形成装置１０は、その選択された状態の釦に係る印刷条件を設定する。キャンセル釦１０１が押下されたら、ページ集約に係る設定内容を変更せずにこの画面を閉じる。なお、非設定釦９１と、２in１釦９２と、横順４in１釦９３と、縦順４in１釦９４のうち２つ以上の釦を同時に選択することはできないものとする。

本発明の実施の形態では、ユーザが用紙束７を背景にして行った、左上、右上、左下、右下の順番の書き順で「Ｚ」を描く動作と一致するジェスチャーには、４in１（横順）の印刷条件が対応づけて登録されている。よって、ＡＲメガネ４０、図１６に示す動作を検出したら、４in１（横順）の印刷条件を設定するための画面であるページ集約画面９０を自動で表示するよう画像形成装置１０に指示する。

図１７では、通常の操作による遷移ではなく、ＡＲメガネ４０の指示により、ページ集約画面９０に遷移している。よって、画像形成装置１０は、横順４in１釦９３が予め選択された状態のページ集約画面９０を表示する。

なお、右上、右下、左上、左下の書き順でＮを描く動作には、４in１（縦順）の印刷条件が対応づけて登録されている。本発明の実施の形態では、ＺとＮを描く場合について説明したが、たとえば、画像の配置位置や、配置順番を、ユーザの動作に合わせて設定するようにしてもよい。このように、ユーザは直感的な動作で、ページ集約に係る詳細な設定を簡易に行うことができる。

このように、本発明の実施の形態では、変化パターン（具体例１〜５）には後処理に係る印刷条件が対応付けて登録され、ジェスチャー（具体例６）には後処理以外の処理に係る印刷条件が対応付けて登録されている。

後処理は、用紙に加工等を施す処理であるので、用紙の形状の変化により該後処理に係る印刷条件の補助を行う場合は、該後処理に対応付けされている変化パターンをユーザが直観的に理解することができる。たとえば、具体例１、２では、ページをめくる動作による用紙の形状の変化に冊子を作る後処理の印刷条件が対応付けされており、そのページをめくる方向により、冊子における綴じ位置が指定される。左にページをめくる場合は左綴じ、右にめくれば右綴じとなる。

一方、非後処理に係る印刷条件は、用紙の形状の変化とは、ユーザが直観的に結び付けづらいので、ユーザの動作による入力が適している。たとえば、具体例６のようにページ集約に係る印刷条件は、ユーザが、用紙の形状の変化と直観的に結び付けることが他の具体例よりも難しい。

ここまで説明した、具体例１〜５における第１制御と、具体例２における第２制御では、画像形成装置１０は、ＡＲメガネ４０が検出した変化（動作）に応じた印刷条件が選択された状態で、該印刷条件を設定するための設定画面を自動で表示していたが、該印刷条件が選択されていない状態で該設定画面を表示してもよい。また、ＡＲメガネ４０が検出した変化（動作）と一致する変化パターン（ジェスチャー）に応じた印刷条件の選択を誘導する誘導表示を行ってもよい。誘導表示では、たとえば、印刷条件を示す釦を点滅表示させたり、他の釦と異なる色で表示したり、該印刷条件を示す釦を選択する旨の指示を表示部１９に表示させたりする。

また、ＡＲメガネ４０は、用紙の形状の変化が検出されない場合にのみ、第２制御を実行するよう画像形成装置１０に指示する。すなわち、ＡＲメガネ４０は、用紙の形状の変化と、ユーザの動作を同時に撮影した場合は、用紙の形状の変化を優先して、第１制御を実行する指示を画像形成装置１０に送信する。具体的には、たとえば、用紙の形状の変化を検出している際中は、ユーザの動作の検出を禁止する。用紙の形状の変化を検出している際中は、第２制御を実行する指示の送信を禁止するようにしてもよい。これにより、用紙束７の形状を変化させている際の手の動きをジェスチャーとして誤認されることが無くなる。

不揮発メモリ４９に登録されている変化パターンとジェスチャーは、具体例１〜６で紹介したものに限らない。

なお、画像形成装置１０は、第１制御と第２制御について、実行を許可するか否かの設定を予め受け付け、該設定で許可された制御のみを実行する。図１８は、ＡＲメガネ４０が用紙の形状の変化を検出して送信した指示と、ユーザの動作を検出して送信した指示に応じて、第１制御および第２制御を実行するか否かの設定を受けるために、画像形成装置１０が表示する設定画面の一例である指示方法設定画面１１０を示す。

指示方法設定画面１１０には、第１制御と第２制御の双方を実行禁止する設定を行うための補助無効釦１１１と、第１制御の実行のみを許可する設定を行うための用紙有効釦１１２と、第２制御の実行のみを許可する設定を行うための動作有効釦１１３と、第１制御と第２制御の双方の実行を許可する両方有効釦１１４、および決定釦１００と、キャンセル釦１０１が表示されている。

補助無効釦１１１と、用紙有効釦１１２と、動作有効釦１１３と、両方有効釦１１４のうちのいずれかが選択された状態で決定釦１００が押下されたら、画像形成装置１０は、第１制御、および第２制御の実行を許可するか否かについて、選択されている釦に対応する内容の設定を行う。キャンセル釦１０１が押下されたら、第１制御と第２制御の実行許可に係る設定内容を変更せずにこの画面を閉じる。なお、補助無効釦１１１と、用紙有効釦１１２と、動作有効釦１１３と、両方有効釦１１４のうち２つ以上の釦を同時に選択することはできないものとする。

これにより、ユーザは、印刷条件の設定を行う場合に、第１制御、および第２制御の機能を利用するか否かを、予め設定しておくことができる。

図１９は、ＡＲメガネ４０が第１制御または第２制御を実行して、画像形成装置１０に指示を送信する処理を示す。図中では画像形成装置１０をＭＦＰと記す。

まず、ＡＲメガネ４０は、画像形成装置１０と通信可能になるまで待つ（ステップＳ００１；Ｎｏ）。ＡＲメガネ４０は、画像形成装置１０と通信可能になったら（ステップＳ００１；Ｙｅｓ）カメラ部５２にて撮影して得た動画の画像解析を繰り返し行う。

なお、前述したように、ＡＲメガネ４０は、動画を解析した結果、動画内における用紙束７を識別したら、用紙の形状の変化や、ユーザの動作の検出が可能になったことを示す拡張画像５７を該用紙束７に重ねて表示する。

撮影して得た動画の解析を繰り返した結果、用紙束７に動きがあっても（ステップＳ００２；Ｙｅｓ）、形状が変化しない場合は（ステップＳ００３；Ｎｏ）、ステップＳ００２に戻って処理を継続する。たとえば、用紙束７の位置が変わった場合等がこれに該当する。

用紙束７の形状が変化した場合は（ステップＳ００３；Ｙｅｓ）、登録されている変化パターンの中に、該変化と一致するものがあるか否かを調べる（ステップＳ００４）。一致するものが無ければ（ステップＳ００４；Ｎｏ）、ステップＳ００２に戻って処理を継続する。

一致するものがある場合は（ステップＳ００４；Ｙｅｓ）、その変化パターンに対応づけて登録されている印刷条件にて第１制御を実行し（ステップＳ００７）、本処理を終了する。画像形成装置１０は、該第１制御にて送信された指示に従って動作する。

用紙束７に動きが無い場合は（ステップＳ００２；Ｎｏ）、用紙束７を背景にして行われるユーザの動作を検出するまでは（ステップＳ００６；Ｎｏ）、ステップＳ００２に戻って処理を継続する。

ユーザの動作を検出したら（ステップＳ００６；Ｙｅｓ）登録されているジェスチャーの中に、該動作と一致するものがあるか否かを調べる（ステップＳ００７）。一致するものが無ければ（ステップＳ００７；Ｎｏ）、ステップＳ００２に戻って処理を継続する。

一致するものがある場合は（ステップＳ００７；Ｙｅｓ）、そのジェスチャーに対応づけて登録されている印刷条件にて第２制御を実行し（ステップＳ００８）、本処理を終了する。画像形成装置１０は、該第２制御にて送信された指示に従って動作する。

図１９では、用紙の形状の変化が検出されているときは、ユーザの動作の検出を行わない。すなわち、ＡＲメガネ４０は、用紙の形状の変化を優先して検出し、第１制御を実行する指示を画像形成装置１０に送信する。

このように、印刷システム２では、用紙束７の形状の変化、もしくは用紙束７を背景にして行われたユーザの動作を検出し、その検出した内容と一致する変化パターンやジェスチャーに対応する印刷条件の設定を補助する。これにより、ユーザは、用紙束７の形状を変化させたり、用紙束７を背景にして手を動かしたりすることで、所望の印刷条件を容易に見つけ出して設定することができる。

以上、本発明の実施の形態を図面によって説明してきたが、具体的な構成は実施の形態に示したものに限られるものではなく、本発明の要旨を逸脱しない範囲における変更や追加があっても本発明に含まれる。

本発明の実施の形態では、ＡＲメガネ４０は、ヘッドマウントディスプレイであったが、これに限らず、たとえば、スマートフォンなどのようなカメラ付きの携帯端末などでもかまわない。スマートフォンを使用する場合、該スマートフォンに、本発明の実施の形態における所定の操作表示装置としての役割も果たさせてもよい。すなわち、画像形成装置１０の表示部１９の代わりに、該スマートフォンの表示部を使用して、印刷条件に係る設定画面を表示し、操作部１８の代わりにスマートフォンの操作部を使用して該印刷条件の設定操作を受けてもよい。

本発明の実施の形態では、ＡＲメガネ４０が、本発明のカメラ部として動画の撮影をし、検出部としてその動画を解析し、印刷条件設定装置として第１制御（第２制御）を実行したが、ＡＲメガネ４０は動画の撮影のみを行い、動画の解析と、第１制御（第２制御）の実行は、他の装置が行ってもよい。

他の装置が、動画の解析と、第１制御（第２制御）を行う場合、該他の装置は２台であってもよい。すなわち、本発明の印刷条件設定システムにおける検出部としての役割を果たす、動画の解析を行う装置（装置Ａとする）と、該本発明の印刷条件設定システムにおける印刷条件設定装置としての役割を果たす、第１制御（第２制御）を行う装置（装置Ｂとする）は別の装置であってもよい。具体的には、装置Ａが動画を解析して得た結果（変化（動作）の検出結果）を装置Ｂに送信し、装置Ｂが、該結果に基づいて、印刷条件に対応づけて装置Ｂに登録されている変化パターン（ジェスチャー）と、装置Ａが検出した変化（動作）が一致するか否かを調べ、一致する場合に、第１制御（第２制御）を実行する。

なお、変化パターン（ジェスチャー）と印刷条件は、装置Ｂ以外の装置（装置Ｃとする）に登録されていてもよい。その場合、装置Ｂが装置Ｃから、印刷条件と、該印刷条件に対応付けされた変化パターン（ジェスチャー）の情報を取得する。

なお、装置Ａ、装置Ｂ（装置Ｃ）は、サーバなどのような外部の装置でもよいし、ＡＲメガネ４０や、画像形成装置１０に含まれて構成されていてもよい。たとえば、ＡＲメガネ４０が装置Ａを含んで構成され、画像形成装置１０が装置Ｂを含んで構成されていてもよい。装置Ａと装置Ｂの双方が単体のサーバであってもよい。画像形成装置１０が装置Ａ、装置Ｂの双方を含んで構成されていてもよい。

なお、本発明は、前述の装置Ａ、装置Ｂを含んで構成される印刷条件設定装置、および情報処理装置を該印刷条件設定装置のように動作させるプログラムであってもよい。

本発明の実施の形態では、用紙束７を例に挙げて説明したが、用紙の枚数は一枚であってもよい。

本発明の実施の形態では、ＡＲメガネ４０の不揮発メモリ４９にはジェスチャーとして、現実世界の用紙に対して（背景にして）ユーザが行う所定の動作が登録されていたが、表示部１９などに表示された用紙の画像に対して（背景にして）ユーザが行う所定の動作をジェスチャーとして登録しておいてもよい。用紙の画像は、模擬的な用紙（白紙の用紙）の画像が表示されてもよいし、印刷プレビュー画像であってもよい。なお、表示部上に表示される用紙の画像は、現実世界の用紙よりもサイズが小さいことが想定されるので、現実世界の用紙に対してユーザが行う動作を検出する場合は、表示部に表示された用紙の画像に対してユーザが行う動作を検出する場合に比べて、ユーザの動作によって指定される位置を高い精度で検出することができる。

本発明の実施の形態では、変化パターンには後処理に係る印刷条件が、ジェスチャーには非後処理に係る印刷条件が対応付けて登録されていたが、変化パターンに非後処理に係る印刷条件を対応付けて登録してもよいし、ジェスチャーに後処理に係る印刷条件を対応付けて登録してもよい。

本発明の実施の形態では、用紙を背景にして行ったユーザの動作を検出していたが、用紙を背景にしないで行ったユーザの動作を検出してもよい。

以下に、用紙の形状の変化およびジェスチャーにおいて、本発明の実施の形態にて説明した具体例１〜６以外の例を示す。

（具体例７）
具体例７では、ユーザが用紙束７の一番上に置かれた用紙の右下端部分を左上方向に向けてめくることにより、用紙束７の形状が変化する場合について説明する。ＡＲメガネ４０は、具体例１〜５と同様の方法で該変化を検出する。

不揮発メモリ４９には、ユーザが用紙束７の一番上の用紙の右下端部分を左上方向に向けてめくった場合における用紙束７の形状の変化パターンに、左上部分を綴じる印刷条件（左上ステイプル）が対応付けて登録されている。よって、ＡＲメガネ４０は、前述の変化を検出したら、左上ステイプルに係る印刷条件を設定するための画面（図示は省略する）を自動で表示するよう画像形成装置１０に指示する。

なお、用紙束７の一番上の用紙の左下端部分を右上方向に向けてめくった場合における用紙束７の形状の変化パターンには、右上部分を綴じる印刷条件（右上ステイプル）が対応付けて登録されている。

具体例７においても、具体例１、２と同じく、用紙の形状の変化により該後処理に係る印刷条件の補助を行う。よって、後処理に対応付けされている変化パターンをユーザが直観的に理解することができる。

（具体例８）
具体例８では、用紙束７を構成する用紙が並べられた場合の配置によって、画像の配置を設定する場合について説明する。たとえば、ＡＲメガネ４０は、用紙束７を構成する用紙が（４枚以上の用紙で構成されているものとする）２行２列に並べられた場合の用紙の形状の変化を検出したら、その用紙の並び方を解析する。解析結果にて用紙の並びが、全体が縦長になるような配置の場合は４in１（縦順）の印刷条件を設定し、全体が横長になるような配置場合は４in１（横順）の印刷条件を設定する。

（具体例９）
具体例９では、特定のジェスチャーが行われた際の用紙の向きによって、画像の配置を設定する場合について説明する。たとえば、ＡＲメガネ４０は、用紙の真ん中にユーザが線を引く動作を検出した場合、その用紙が縦長の方向に設置されていた場合は２in１（縦順）の印刷条件を、その用紙が横長の方向に設置されていた場合は２in１（横順）の印刷条件を設定する。

（具体例１０）
具体例１０では、ユーザが用紙束７の一番上に置かれた用紙の左端に対して丸を描く動作を行った場合について説明する。ＡＲメガネ４０は、具体例６と同様の方法で該動作を検出する。

不揮発メモリ４９には、ユーザが用紙束７の一番上に置かれた用紙に対して丸を描く動作に、パンチ（穴あけ）の印刷条件が対応付けて登録されている。よって、ＡＲメガネ４０は、前述の動作を検出したら、パンチに係る印刷条件を設定するための画面（図示は省略する）を自動で表示するよう画像形成装置１０に指示する。なお、ユーザが描く丸の大きさは、実際に空けられる穴と同じ程度のサイズが望ましい。

また、パンチによって穴をあける位置は、予め設定された固定位置でもよいし、ユーザによって設定可能であってもよい。たとえば、用紙とユーザが描いた丸の相対位置によって、用紙上において穴をあける位置を併せて設定するようにしてもよい。たとえば、用紙の左端に対して丸を描く動作を検出したら、パンチの印刷条件を設定するとともに、その穴をあける位置を用紙の左端に設定する。これにより、ユーザは、パンチの設定、およびパンチによって穴をあける位置の双方を一の動作で設定することができる。

２…印刷システム
３…ネットワーク（ＬＡＮ）
５…無線ルータ
７…用紙束
１０…画像形成装置
１１…ＣＰＵ
１２…ＲＯＭ
１３…ＲＡＭ
１４…不揮発メモリ
１５…ハードディスク装置
１６…自動原稿搬送部
１７…画像読取部
１８…操作部
１９…表示部
２０…ネットワーク通信部
２１…画像処理部
２２…プリンタ部
２３…後処理部
４０…ＡＲメガネ
４１…透過部
４２…ブリッジ
４３…ツル部
４４…表示スクリーン部
４６…ＣＰＵ
４７…ＲＯＭ
４８…ＲＡＭ
４９…不揮発メモリ
５１…方位センサ部
５２…カメラ部
５３…操作部
５４…無線通信部
５５…画像処理部
５６…認証部
５７…拡張画像
６０…小冊子設定画面
６１…非設定釦
６２…左とじ釦
６３…右とじ釦
７０…差し込み画面
７１…非設定釦
７２…差し込み釦
８０…折り画面
８１…非設定釦
８２…二つ折り釦
８３…三つ折り釦
８４…Ｚ折り釦
９０…ページ集約画面
９１…非設定釦
９２…２in１釦
９３…横順４in１釦
９４…縦順４in１釦
１００…決定釦
１０１…キャンセル釦
１１０…指示方法設定画面
１１１…補助無効釦
１１２…用紙有効釦
１１３…動作有効釦
１１４…両方有効釦

Claims (25)

1. ユーザが用紙の形状を変化させる様子をカメラで撮影して得た動画を取得する取得部と、
   前記取得部が取得した前記動画を解析して、前記用紙の形状の変化を検出する検出部と、
   用紙の形状の変化パターンと印刷条件が対応付けて登録された登録部と、
   前記検出部が検出した用紙の形状の変化が前記登録部に登録されているいずれかの前記変化パターンに一致するか否かを調べ、一致する場合に、
   （１）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を、所定の操作表示装置の表示部に表示させる、
   （２）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる、
   （３）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（１）の設定画面を前記表示部に表示させる、
   のうちのいずれか１つを行う第１制御を実行する制御部と、
   を備える
   ことを特徴とする印刷条件設定装置。
2. 前記制御部は、前記検出部が前記一致する用紙の形状の変化を検出してから一定時間内に、前記所定の操作表示装置の操作部が操作を受けた場合、または前記検出部が前記用紙の形状の変化を検出しなかった場合は、前記検出後に実行した前記第１制御を維持する
   ことを特徴とする請求項１に記載の印刷条件設定装置。
3. 前記取得部は、ユーザの動作をカメラで撮影して得た動画を取得し、
   前記検出部は、前記動画内のユーザの動作をさらに検出し、
   前記登録部には、ジェスチャーと印刷条件が対応付けて登録されており、
   前記制御部は、前記検出部が検出したユーザの動作が前記登録部に登録されているいずれかのジェスチャーに一致するか否かを調べ、一致する場合に、
   （４）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を前記表示部に表示させる
   （５）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
   （６）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（４）の設定画面を前記表示部に表示させる、
   のうちのいずれか１つを行う第２制御を実行する
   ことを特徴とする請求項１または２に記載の印刷条件設定装置。
4. 前記登録部に登録されるジェスチャーは、現実世界の用紙に対してユーザが行う所定の動作、または、前記表示部に表示された用紙の画像に対してユーザが行う所定の動作である
   ことを特徴とする請求項３に記載の印刷条件設定装置。
5. 前記用紙の形状の変化パターンに対応付けて前記登録部に登録された印刷条件は後処理に係る印刷条件であり、前記ジェスチャーに対応付けて前記登録部に登録された印刷条件は後処理以外に係る印刷条件である
   ことを特徴とする請求項３または４に記載の印刷条件設定装置。
6. 前記制御部は、前記検出部によって前記用紙の形状の変化が検出されない場合に、前記第２制御を実行する
   ことを特徴とする請求項３乃至５のいずれか１つに記載の印刷条件設定装置。
7. 前記第１制御と前記第２制御について、実行を許可するか否かの設定を予め受け付け、
   前記制御部は、前記設定で許可された制御を実行する
   ことを特徴とする請求項３乃至６のいずれか１つに記載の印刷条件設定装置。
8. 前記制御部は、前記第１制御または前記第２制御を実行中もしくは実行後に、該実行の中止指示を受けた場合、前記表示部の表示内容を前記第１制御または前記第２制御を実行開始前の状態に戻す
   ことを特徴とする請求項３乃至７のいずれか１つに記載の印刷条件設定装置。
9. 情報処理装置を、
   請求項１乃至８のいずれか１つに記載の印刷条件設定装置として動作させる
   ことを特徴とするプログラム。
10. ユーザが用紙の形状を変化させる様子を撮影するカメラ部と、
    用紙の形状の変化パターンと印刷条件が対応付けて登録された登録部と、
    前記カメラ部が撮影して得た動画から、前記用紙の形状の変化を検出する検出部と、
    印刷条件設定装置と、
    を含んで構成される印刷条件設定システムであって、
    前記印刷条件設定装置は、前記検出部が検出した用紙の形状の変化が前記登録部に登録されているいずれかの前記変化パターンに一致するか否かを調べ、一致する場合に、
    （１）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を所定の操作表示装置の表示部に表示させる
    （２）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
    （３）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（１）の設定画面を前記表示部に表示させる
    のうちのいずれか１つを行う第１制御を実行する
    ことを特徴とする印刷条件設定システム。
11. 前記印刷条件設定装置は、前記検出部が前記一致する用紙の形状の変化を検出してから一定時間内に、前記所定の操作表示装置の操作部が操作を受けた場合、または前記検出部が前記用紙の形状の変化を検出しなかった場合は、前記検出後に実行した前記第１制御を維持する
    ことを特徴とする請求項１０に記載の印刷条件設定システム。
12. 前記カメラ部で撮影して得た動画を取得する取得部を備え、
    前記登録部は、ジェスチャーと印刷条件が対応付けて登録されており、
    前記検出部は、前記動画内のユーザの動作を検出し、
    前記印刷条件設定装置は、前記検出部が検出したユーザの動作が前記登録部に登録されているいずれかのジェスチャーに一致するか否かを調べ、一致する場合に、
    （４）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を前記表示部に表示させる
    （５）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
    （６）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（４）の設定画面を前記表示部に表示させる
    のうちのいずれか１つを行う第２制御を実行する
    ことを特徴とする請求項１０または１１に記載の印刷条件設定システム。
13. 前記登録部に登録されるジェスチャーは、現実世界の用紙に対してユーザが行う所定の動作、または、前記表示部に表示された用紙の画像に対してユーザが行う所定の動作である
    ことを特徴とする請求項１２に記載の印刷条件設定システム。
14. 前記用紙の形状の変化パターンに対応付けて前記登録部に登録された印刷条件は後処理に係る印刷条件であり、前記ジェスチャーに対応付けて前記登録部に登録された印刷条件は後処理以外に係る印刷条件である
    ことを特徴とする請求項１２または１３に記載の印刷条件設定システム。
15. 前記印刷条件設定装置は、前記検出部によって前記用紙の形状の変化が検出されない場合に、前記第２制御を実行する
    ことを特徴とする請求項１２乃至１４のいずれか１つに記載の印刷条件設定システム。
16. 前記印刷条件設定装置は、前記第１制御と前記第２制御について、実行を許可するか否かの設定を予め受け付け、前記設定で許可された制御を実行する
    ことを特徴とする請求項１２乃至１５のいずれか１つに記載の印刷条件設定システム。
17. 前記印刷条件設定装置は、前記第１制御または前記第２制御を実行中、もしくは実行後に該実行の中止指示を受けた場合、前記表示部の表示内容を前記第１制御または前記第２制御を実行開始前の状態に戻す
    ことを特徴とする請求項１２乃至１６のいずれか１つに記載の印刷条件設定システム。
18. 取得部が、ユーザが用紙の形状を変化させる様子をカメラで撮影して得た動画を取得する取得ステップと、
    検出部が、前記取得部が取得した前記動画を解析して、前記用紙の形状の変化を検出する検出ステップと、
    印刷条件設定装置が、前記検出部が検出した用紙の形状の変化が、印刷条件に対応付けて登録部に登録されているいずれかの用紙の形状の変化パターンに一致するか否かを調べ、一致する場合に、
    （１）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を所定の表示装置の表示部に表示させる
    （２）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
    （３）前記一致する変化パターンに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（１）の設定画面を前記表示部に表示させる
    のうちの少なくとも１つを行う第１制御を実行する第１制御ステップと、
    操作部が、印刷条件の設定操作を受ける操作ステップと、
    を備える
    ことを特徴とする印刷条件設定方法。
19. 前記検出部が前記一致する用紙の形状の変化を検出してから一定時間内に、前記所定の操作表示装置の操作部が操作を受けた場合、または前記検出部が前記用紙の形状の変化を検出しなかった場合に、前記検出後に実行した前記第１制御を維持する制御維持ステップをさらに備える
    ことを特徴とする請求項１８に記載の印刷条件設定方法。
20. 登録部には、ジェスチャーと印刷条件を対応付けて登録してあり、
    前記取得ステップでは、ユーザの動作をカメラで撮影して得た動画を取得し、
    前記検出ステップでは、前記動画内のユーザの動作をさらに検出し、
    前記印刷条件設定装置が、前記検出部が検出したユーザの動作が前記登録部に登録されているいずれかの前記ジェスチャーに一致するか否かを調べ、一致する場合に、
    （４）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定を行うための設定画面を前記表示部に表示させる
    （５）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定項目が選択された状態で前記設定画面を前記表示部に表示させる
    （６）前記一致するジェスチャーに対応付けて前記登録部に登録されている印刷条件に係る設定操作を誘導する誘導表示と前記（４）の設定画面を前記表示部に表示させる
    のうちのいずれか１つを行う第２制御を実行する第２制御ステップをさらに備える
    ことを特徴とする請求項１８または１９に記載の印刷条件設定方法。
21. 前記登録部に登録されるジェスチャーは、現実世界の用紙に対してユーザが行う所定の動作、または、前記表示部に表示された用紙の画像に対してユーザが行う所定の動作である
    ことを特徴とする請求項２０に記載の印刷条件設定方法。
22. 前記用紙の形状の変化パターンに対応付けて前記登録部に登録された印刷条件は後処理に係る印刷条件であり、前記ジェスチャーに対応付けて前記登録部に登録された印刷条件は後処理以外に係る印刷条件である
    ことを特徴とする請求項２０または２１に記載の印刷条件設定方法。
23. 前記印刷条件設定装置は、前記検出部によって前記用紙の形状の変化が検出されない場合に、前記第２制御を実行する
    ことを特徴とする請求項２０乃至２２のいずれか1つに記載の印刷条件設定方法。
24. 前記第１制御と前記第２制御について、実行を許可するか否かの設定を予め受け付ける設定受け付けステップをさらに備え、
    前記印刷条件設定装置は、前記設定で許可された制御を実行する
    ことを特徴とする請求項２０乃至２３のいずれか１つに記載の印刷条件設定方法。
25. 前記印刷条件設定装置が前記第１制御または前記第２制御を実行中もしくは実行後に、該実行の中止指示を受けたら、前記表示部の表示内容を前記第１制御または前記第２制御の実行前に戻す制御キャンセルステップをさらに備える
    ことを特徴とする請求項２０乃至２４のいずれか１つに記載の印刷条件設定方法。