JP6988311B2 - 情報処理装置、記録装置、情報処理システム、及びプログラム - Google Patents

Description

本発明は、情報処理装置、記録装置、情報処理システム、及びプログラムに関する。

特許文献１には、印刷装置が操作パネルを有し、印刷装置が、印刷ジョブ処理中に、操作パネルから操作が行われたことを検知する検知手段と、前記操作が正常な操作であるかどうかを判定する判定手段と、前記操作を無効化し、処理中の印刷ジョブを停止する第１ の制御手段と、を有することを特徴とする印刷処理システムが記載されている。

特開２００７−０５５０２３号公報

利用者が、情報が記録された記録媒体を確認したときに、利用者が求める記録形態とは異なる記録形態で情報が記録されていることに気付く場合がある。この場合、利用者は、設定画面を操作して記録形態設定の変更を行う。

本発明の目的は、設定画面を操作して記録形態設定の変更を行う際に、次の記録形態設定を選択する手間を削減できる、情報処理装置、記録装置、情報処理システム、及びプログラムを提供することにある。

上記目的を達成するために、本開示の第１の態様は、利用者の動作を認識する認識手段と、前記認識手段で認識された動作であって、記録形態設定に従って記録装置により情報が記録された記録媒体に対する利用者の予め定めた動作に応じて得られた、前記記録形態設定の変更候補である次の記録形態設定を出力する出力手段と、を備えた情報処理装置である。

本開示の第２の態様は、前記次の記録形態設定は、１つの予め定めた動作または複数の予め定めた動作各々に対し１つの次の記録形態設定を対応付けた第１の対応関係から定める、第１の態様の情報処理装置である。

本開示の第３の態様は、前記予め定めた動作が、前記記録媒体に目を近づける動作、及び前記記録媒体を破棄する動作の少なくとも１つを含む、第１または第２の態様の情報処理装置である。

本開示の第４の態様は、前記出力手段は、前記記録媒体に対する利用者の予め定めた動作と、前記記録媒体への情報の記録に用いた元の記録形態設定とに応じて得られた、前記次の記録形態設定を出力する、第１の態様の情報処理装置である。

本開示の第５の態様は、前記次の記録形態設定は、前記予め定めた動作、前記元の記録形態設定として設定し得る第１の記録形態設定、及び前記次の記録形態設定として設定し得る第２の記録形態設定を対応付けた組合せを、少なくとも１組有する第２の対応関係から定める、第４の態様の情報処理装置である。

本開示の第６の態様は、前記予め定めた動作が、前記記録媒体を折る動作、前記記録媒体に目を近づける動作、前記記録媒体の裏側を見る動作、前記記録媒体の向きを変化させる動作、及び前記記録媒体を破棄する動作の少なくとも１つを含む、第４または第５の態様の情報処理装置である。

本開示の第７の態様は、前記記録媒体への情報の記録に用いた元の記録形態設定を、前記次の記録形態設定に変更する変更手段をさらに備えた、第１から第６までの態様のいずれかの情報処理装置である。

本開示の第８の態様は、前記変更手段は、前記次の記録形態設定が複数あり、１つの記録形態設定を実施すると他の記録形態設定が実施できない場合に、前記１つの記録形態設定については記録形態設定を変更しない、第７の態様の情報処理装置である。

本開示の第９の態様は、前記予め定めた動作が認識された場合は、記録媒体への情報の記録処理を一時中断するように前記記録装置を制御する制御手段と、記録処理を一時中断した後に、前記次の記録形態設定を含む複数の選択肢を表示して、利用者からの記録形態設定を受け付ける受付手段と、をさらに備えた、第１から第６までの態様のいずれかの情報処理装置である。

本開示の第１０の態様は、前記制御手段は、記録形態設定が変更されて、記録処理の実行が指示されると、一時中断した記録処理を中止して、変更後の記録形態設定で記録処理を最初からやり直すように記録装置を制御する、第９の態様の情報処理装置である。

本開示の第１１の態様は、前記複数の選択肢は、記録形態設定を変更しない選択肢を含む、第９の態様の情報処理装置である。

本開示の第１２の態様は、前記制御手段は、記録形態設定が変更されず、記録処理の実行が指示されると、変更前の記録形態設定で一時中断した記録処理を再開するように記録装置を制御する、第１１の態様の情報処理装置である。

本開示の第１３の態様は、前記複数の選択肢は、他の選択肢と共に選択される選択肢であって、記録処理を最初からやり直す選択肢を含む、第９の態様の情報処理装置である。

本開示の第１４の態様は、前記制御手段は、前記記録処理を最初からやり直す選択肢が選択されていない場合は、記録処理の実行が指示されると、変更後の記録形態設定で一時中断した記録処理を再開するように記録装置を制御する、第１３の態様の情報処理装置である。

本開示の第１５の態様は、前記制御手段は、前記記録処理を最初からやり直す選択肢が選択された場合は、記録処理の実行が指示されると、一時中断した記録処理を中止して、変更後の記録形態設定で記録処理を最初からやり直すように記録装置を制御する、第１３の態様の情報処理装置である。

本開示の第１６の態様は、前記認識手段で認識された動作、元の記録形態設定、及び選択された選択肢に係る次の記録形態設定を対応付けた組合せを、前記予め定めた動作、前記元の記録形態設定として設定し得る第１の記録形態設定、及び前記次の記録形態設定として設定し得る第２の記録形態設定を対応付けた組合せを、少なくとも１組有する第２の対応関係に追加する、第９から第１５までの態様のいずれかの情報処理装置である。

本開示の第１７の態様は、前記認識手段は、記録媒体への記録開始後から、利用者の動作の認識を開始する、第１から第１６までの態様のいずれかの情報処理装置である。

本開示の第１８の態様は、前記認識手段は、利用者が記録装置から離れるまで、利用者の動作を認識する、第１７の態様の情報処理装置である。

本開示の第１９の態様は、本開示の情報処理装置を備え、前記情報処理装置に制御されて記録媒体に情報を記録する記録装置である。

本開示の第２０の態様は、元の記録形態設定が他の装置から設定され、次の記録形態設定が自装置から設定される、第１９の態様の記録装置である。

本開示の第２１の態様は、予め定めた撮像範囲を撮像する撮像装置と、記録媒体に情報を記録する記録装置と、前記記録装置を制御すると共に、前記撮像装置から得られた撮像データを用いて利用者の動作を認識する、本開示の情報処理装置と、を備えた情報処理システムである。

本開示の第２２の態様は、前記情報を生成する他の装置を更に備え、前記情報処理装置は、前記他の装置で生成された情報を記録媒体に記録するように前記記録装置を制御する、第２１の態様の情報処理システムである。

本開示の第２３の態様は、コンピュータを、本開示の情報処理装置の各手段として機能させるためのプログラムである。

第１の態様、第４の態様、第１９の態様、第２１の態様、第２３の態様によれば、設定画面を操作して記録形態設定の変更を行う際に、次の記録形態設定を選択する手間を削減できる。

第２の態様、第５の態様によれば、対応関係を用いない場合に比べて、次の記録形態設定の取得が容易になる。

第３の態様、第６の態様によれば、記録形態設定の変更の必要性を示唆する動作が、情報が記録された記録媒体に対する利用者の予め定めた動作とされる。

第７の態様によれば、利用者の確認を待つことなく記録形態設定が変更される。

第８の態様によれば、一緒には設定変更できない記録形態設定を排除することができる。

第９の態様によれば、利用者は記録形態設定の変更候補を確認して、記録形態設定の変更を指示することができる。

第１１の態様、第１２の態様によれば、動作認識の誤りにより記録処理が一時中断された場合には、記録処理を再開できる。

第１０の態様、第１４の態様によれば、変更後の記録形態設定を適用する時期を、利用者が決めることができる。

第１３の態様、第１５の態様によれば、新たな情報を生成することなく、変更後の記録形態設定で最初のページから記録処理を行うことができる。

第１６の態様によれば、対応関係が学習により改善される。

第１７の態様によれば、無駄な認識処理を省くことができる。

第１８の態様によれば、記録処理終了後も変更後の記録形態設定で、再度、記録処理を行うことができる。

第２０の態様、第２２の態様によれば、情報を生成した他の装置から設定画面を操作して、記録形態設定の変更を行わずに済む。

本発明の実施の形態に係る印刷システムの構成の一例を示すブロック図である。 各装置の配置関係の一例を示す概略図である。 本発明の実施の形態に係る印刷装置の電気的構成の一例を示すブロック図である。 端末装置の電気的構成の一例を示すブロック図である。 撮像装置の電気的構成の一例を示すブロック図である。 （Ａ）は骨格モデルの一例を示す模式図である。（Ｂ）は用紙モデルの一例を示す模式図である。 （Ａ）は利用者が端末装置から印刷設定画面を操作する様子を示す概略図である。（Ｂ）は利用者に表示される「印刷設定画面」の一例を示す模式図である。 出力された印刷物に対する利用者の動作の一例を示す概略図である。 予め定めた動作、第１の印刷設定、及び第２の印刷設定を対応付けた組合せを複数組有する対応関係を示す図表である。 第１の実施の形態に係る「印刷制御処理」の流れの一例を示すフローチャートである。 第２の実施の形態に係る「印刷制御処理」の流れの一例を示すフローチャートである。 「選択画面」の一例を示す模式図である。 「選択画面（次ページ）」の一例を示す模式図である。 「選択画面」の他の一例を示す模式図である。 「選択画面（次ページ）」の他の一例を示す模式図である。 第３の実施の形態に係る「印刷制御処理」の流れの一例を示すフローチャートである。 「選択画面」の更に他の一例を示す模式図である。 変形例に係る「印刷制御処理」の流れの一例を示すフローチャートである。 変形例に係る「印刷設定画面の生成処理」の流れの一例を示すフローチャートである。 変形例に係る「印刷設定画面」の一例を示す模式図である。 変形例に係る「印刷設定画面」の他の一例を示す模式図である。

以下、図面を参照して本発明の実施の形態の一例を詳細に説明する。

＜第１の実施の形態＞
（印刷システム）
まず、本発明の実施の形態に係る印刷システムについて説明する。
図１は本発明の実施の形態に係る印刷システムの構成の一例を示すブロック図である。図１に示すように、本実施の形態に係る印刷システム１０は、印刷処理を実行する印刷装置２０、利用者が使用する端末装置３０、及び撮像装置４０を備えている。印刷装置２０、端末装置３０、及び撮像装置４０の各々は、通信回線１２に接続され、通信回線１２を介して情報をやり取りする。

印刷装置２０は、印刷データに基づいて印刷処理、即ち、「記録媒体」の一例である用紙上に画像を形成する処理を行う装置である。印刷装置２０は、用紙上に形成された画像を他の用紙に複写するコピー機能と、画像データに対応した画像を用紙上に形成するプリント機能等を備えている。

印刷データは、印刷対象となる文書画像を表す画像データと、印刷設定データとを含む。ここで「印刷設定データ」は、ページ、部数、用紙サイズ等の印刷属性を表すデータである。印刷データは、印刷装置２０が解釈可能な言語で記述されている。

プリント機能により印刷処理を実行する場合は、端末装置３０は、利用者からの指示に従って、印刷データを生成し、印刷装置２０に印刷処理の実行を依頼する。印刷データは、端末装置３０から印刷装置２０に送信される。印刷装置２０は、受信した印刷データを解釈し、依頼された印刷処理を実行する。

コピー機能により印刷処理を実行する場合は、印刷装置２０は、利用者からの指示に従って、自装置で印刷データを生成して、印刷データに基づく印刷処理を実行する。

印刷装置２０は「記録装置」の一例である。印刷装置２０の後述する制御部２１は、情報処理装置の一例である。端末装置３０は「他の装置」の一例である。また、印刷処理は、記録媒体の一例としての用紙上に情報を記録する「記録処理」の一例である。また、印刷設定は「記録態様設定」の一例である。

また、撮像装置４０は、印刷装置２０の周辺を撮像して、印刷装置２０に撮像データを送信する。撮像装置４０の撮像範囲は、印刷装置２０から出力された印刷物を手にしている利用者が撮像される撮像範囲とする。以下では「予め定めた撮像範囲」という。本実施の形態の「撮像データ」には、一定周期で（フレーム毎に）撮像された撮像画像の画像データ、撮像画像の画素毎の距離データ、及び利用者の骨格データが含まれる。距離データ及び骨格データも、フレーム毎に取得される。

距離データは、撮像装置４０から被写体までの距離を表すデータである。ここでは、予め定めた撮像範囲にある物体（例えば、印刷物や利用者）が被写体である。骨格データは、利用者を骨格モデルに当てはめた場合に、骨格モデルの各構成要素の長さと、骨格モデルの各接続部の仮想三次元空間での位置とを表すデータである。距離データ及び骨格データを含む撮像データを出力する撮像装置の一例としては、Ｍicrosoft社のゲーム機「Xbox360（登録商標）」に使用されるモーション・センサ・デバイス「Kinect(登録商標）」が挙げられる。

骨格データの変化を記録することで、モーション・キャプチャ技術により利用者の動作が記録される。印刷装置２０は、撮像装置４０から得られた撮像データを経時解析することにより、印刷物に対する利用者の予め定めた動作を認識する。印刷装置２０は、予め定めた動作が認識されると、印刷設定の変更候補を表す次の印刷設定を出力する。

なお、撮像装置４０は、継続して、予め定めた撮像範囲の像を撮像して、印刷装置２０に撮像データを出力してもよい。また、撮像装置４０は、印刷装置２０から要求があった場合に、予め定めた撮像範囲の像を撮像して、印刷装置２０に撮像データを出力するようにしてもよい。また、撮像装置４０は、利用者等の「人」を検知した場合に、予め定めた撮像範囲の像を撮像して、印刷装置２０に撮像データを出力するようにしてもよい。

ここで、各装置の配置関係について説明する。
図２は各装置の配置関係の一例を示す概略図である。図２に示す例では、印刷装置２０は部屋Ｒ内に配置されている。なお、図示はしてしないが、端末装置３０は、例えば、部屋Ｒの外、印刷装置２０から離れた場所等、印刷装置２０とは異なる場所に配置されている。図示した例では、印刷装置２０は部屋Ｒの壁Ｗに沿って配置されている。印刷装置２０が配置される壁Ｗの上部には、撮像装置４０が設置されている。撮像装置４０は、印刷装置２０の周辺を上方から撮像する。

印刷処理の実行を指示した利用者５０は、印刷装置２０から出力された印刷物２２を取りに、印刷装置２０が配置された場所まで来る。印刷装置２０の周辺（予め定めた撮像範囲）は、撮像装置４０により撮像されている。印刷物２２を取りに来た利用者５０も、撮像装置４０により撮像される。

なお、撮像装置４０は、予め定めた撮像範囲を撮像できればよく、どこに設置されていてもよい。例えば、撮像装置４０は、部屋Ｒの床や天井に設置されていてもよく、部屋Ｒに配置される家具等に設置されていてもよい。また、撮像装置４０は、印刷装置２０に設置されていてもよい。また、予め定めた撮像範囲を撮像するために、複数の撮像装置４０を設置してもよい。

（印刷装置）
次に、印刷装置２０の構成について説明する。
図３は本発明の実施の形態に係る印刷装置の電気的構成の一例を示すブロック図である。本実施の形態の印刷装置２０は、制御部２１、操作表示部２３、印刷部２４、用紙搬送部２５、通信部２６、及び記憶部２７を備えている。なお、印刷装置２０の構成は一例であり、不要な機能部を削除したり、新たな機能部を追加したり、各部の構成、配置を変更してもよい。

制御部２１は、装置全体の制御及び各種演算を行うコンピュータとして構成されている。即ち、制御部２１は、ＣＰＵ（中央処理装置; Central Processing Unit）２１Ａ、ＲＯＭ（Read Only Memory）２１Ｂ、ＲＡＭ（Random Access Memory）２１Ｃ、不揮発性のメモリ２１Ｄ、及び入出力部（Ｉ／Ｏ）２１Ｅを備えている。ＣＰＵ２１Ａ、ＲＯＭ２１Ｂ、ＲＡＭ２１Ｃ、メモリ２１Ｄ、及びＩ／Ｏ２１Ｅの各々は、バス２１Ｆを介して接続されている。

ＣＰＵ２１Ａは、例えばＲＯＭ２１Ｂに記憶されたプログラムを読み出し、ＲＡＭ２１Ｃをワークエリアとして使用してプログラムを実行する。本実施の形態では、後述する「印刷制御処理」の制御プログラム等、各種プログラムはＲＯＭ２１Ｂに記憶されている。

操作表示部２３、印刷部２４、用紙搬送部２５、通信部２６、及び記憶部２７の各部は、制御部２１のＩ／Ｏ２１Ｅに接続されている。制御部２１は、操作表示部２３、印刷部２４、用紙搬送部２５、通信部２６、及び記憶部２７の各部との間で情報の授受を行い、各部を制御する。

操作表示部２３は、各種ボタン、各種画面を表示する操作パネル等を含んで構成されている。操作表示部２３は、上記構成により、利用者からの操作を受け付けると共に、利用者に各種情報を表示する。

印刷部２４は、印刷データに基づいて印刷処理、即ち、用紙上に画像を形成する処理を行う装置である。画像形成方式は、電子写真方式でもよく、インクジェット方式でもよい。例えば、電子写真方式により画像を形成する場合は、印刷部２４は、画像形成ユニット、定着装置等を含んで構成されている。画像形成ユニットは、感光体ドラム、帯電装置、露光装置、現像装置、転写装置、クリーニング装置等を含んで構成されている。

用紙搬送部２５は、用紙が収容される用紙収容部、用紙収容部から用紙を取り出す取出ローラ、取り出された用紙を搬送する搬送ローラ等を含んで構成されている。用紙搬送部２５は、上記構成により、用紙収容部から取り出した用紙を搬送し、印刷部２４に供給する。また、印刷部２４で画像が形成された用紙を、用紙排出部へと搬送する。

通信部２６は、有線又は無線の通信回線を介して外部装置と通信を行うためのインターフェースである。例えば、ＬＡＮ（Local Area Network）、インターネット等のネットワークに接続されたコンピュータ等の外部装置と通信を行うためのインターフェースとして機能する。例えば、通信部２６は、コンピュータ等の外部装置から、印刷データを通信により取得する。

記憶部２７は、ハードディスク等の記憶装置を備えている。記憶部２７には、ログデータ等の各種データ、各種プログラム等が記憶される。

また、後述する「印刷制御処理」を各部を制御して実行する制御部２１が、「認識手段」、「出力手段」、「変更手段」、及び「制御手段」の一例である。制御部２１及び操作表示部２３が、「受付手段」の一例である。

なお、本実施の形態では、後述する「印刷制御処理」の制御プログラム等、各種プログラムがＲＯＭ２１Ｂに記憶されている場合について説明するが、通信部２６を介して外部装置から各種プログラムを取得してもよい。

また、制御部２１には、各種ドライブが接続されていてもよい。各種ドライブは、ＣＤ−ＲＯＭ、ＵＳＢ（Universal Serial Bus)メモリなどのコンピュータ読み取り可能な可搬性の記録媒体からデータを読み込んだり、記録媒体に対してデータを書き込んだりする装置である。各種ドライブを備える場合には、可搬性の記録媒体にプログラムを記録しておいて、これを対応するドライブで読み込んで実行してもよい。

（端末装置）
次に、端末装置３０の構成について説明する。
図４は端末装置の電気的構成の一例を示すブロック図である。本実施の形態の端末装置３０は、コンピュータ等の情報処理装置である制御部３１を備えている。制御部３１は、ＣＰＵ３１Ａ、ＲＯＭ３１Ｂ、ＲＡＭ３１Ｃ、不揮発性のメモリ３１Ｄ、及びＩ／Ｏ３１Ｅを備えている。ＣＰＵ３１Ａ、ＲＯＭ３１Ｂ、ＲＡＭ３１Ｃ、メモリ３１Ｄ、及びＩ／Ｏ３１Ｅの各々は、バス３１Ｆを介して接続されている。

制御部３１のＩ／Ｏ３１Ｅには、ディスプレイ等の表示部３２、キーボードやマウス等の入力部３４、通信部３６、及び記憶部３８が接続されている。通信部３６は、通信回線に接続するための通信インターフェイス（Ｉ／Ｆ）である。記憶部３８は、ハードディスク等の外部記憶装置である。

ＣＰＵ３１Ａは、例えばＲＯＭ３１Ｂに記憶されたプログラムを読み出し、ＲＡＭ３１Ｃをワークエリアとして使用してプログラムを実行する。なお、印刷装置２０と同様に、
通信部３６を介して外部装置からプログラムを取得してもよい。また、各種ドライブを備える場合には、可搬性の記録媒体にプログラムを記録しておいて、これを対応するドライブで読み込んで実行してもよい。

（撮像装置）
次に、撮像装置４０の構成について説明する。
図５は撮像装置の電気的構成の一例を示すブロック図である。図５に示すように、撮像装置４０は、投光部４１、受光部４２、撮像部４３、制御部４４、記憶部４５、及び送信部４６を備えている。投光部４１、受光部４２、撮像部４３、記憶部４５、及び送信部４６の各々は、制御部４４に接続されている。なお、撮像装置４０の構成は一例であり、不要な機能部を削除したり、新たな機能部を追加したり、各部の構成、配置を変更してもよい。

投光部４１は、制御部４４により制御されて、予め定めた撮像範囲に赤外光を投光する。投光された赤外光は、予め定めた撮像範囲にある物体（例えば、利用者）の表面で反射される。受光部４２は、物体の表面で反射された赤外光を受光する。受光部４２は、例えば、赤外光像を撮像する赤外線カメラや、赤外光に感度を有する二次元センサである。受光部４２は、受光した光信号（アナログデータ）をデジタルデータに変換し、赤外画像の画像データとして制御部４４に出力する。

撮像部４３は、予め定めた撮像範囲の可視光像を撮像する。撮像部４３は、例えば、可視光像を撮像するカメラや、可視光に感度を有する二次元センサである。撮像部４３は、撮像した光信号（アナログデータ）をデジタルデータに変換し、可視画像の画像データとして制御部４４に出力する。

なお、「赤外光」とは、７８０ｎｍ以上１０００ｎｍ以下の波長領域の光であり、「可視光」とは、３８０ｎｍ以上７８０ｎｍ未満の波長領域の光である。

制御部４４は、ＣＰＵを備えたマイクロコンピュータ等であり、記憶部４５に記憶された制御プログラムを読み出して実行する。制御部４４は、具体的には以下の処理を行う。制御部４４は、赤外画像の画像データ及び可視画像の画像データから、仮想の三次元空間と、フレーム毎に撮像された撮像画像の画素毎の距離データとを生成する。距離データは、光の飛行時間から距離を求めるＴＯＦ（Time of Flight）方式で算出してもよく、投光パターンの歪み量から算出してもよい。また、制御部４４は、仮想の三次元空間及び撮像画像の画素毎の距離データから、フレーム毎に骨格データを生成する。

そして、制御部４４は、撮像画像の画像データ、撮像画像の画素毎の距離データ、及び骨格データを、フレーム毎に送信部４６に出力する。なお、予め定めた撮像範囲に利用者等の「人」が居る場合に、骨格データが生成される。送信部４６は、入力されたデータを、撮像データとして印刷装置２０に送信する。受信された撮像データは、印刷装置２０のメモリ２１ＤやＲＡＭ２１Ｃ等の記憶装置に記憶される。

（端末装置からの印刷設定）
プリント機能により印刷処理を実行する場合は、端末装置３０（他の装置）に接続された表示部３２に「印刷設定画面」が表示される。利用者５０は、表示部３２に表示された印刷設定画面から印刷設定を行う。これに対し、コピー機能により印刷処理を実行する場合は、印刷装置２０の操作表示部２３に「印刷設定画面」が表示される。利用者５０は、操作表示部２３に表示された印刷設定画面から印刷設定を行う（図１参照）。

次に、端末装置３０からの印刷設定について説明する。
図７（Ａ）は利用者が端末装置から印刷設定画面を操作する様子を示す概略図である。図７（Ａ）に示すように、利用者５０が印刷装置２０に印刷処理を行わせる場合、利用者５０が使用する端末装置３０に接続された表示部３２に、印刷設定画面を表示させる。利用者５０は、印刷設定画面を操作して印刷設定を行い、印刷処理の実行を指示する。

ここで「印刷設定画面」について説明する。
図７（Ｂ）は利用者に表示される「印刷設定画面」の一例を示す模式図である。図７（Ｂ）に示すように、印刷設定画面６０には、印刷装置の選択肢６２、印刷範囲の選択肢６４、印刷範囲の指定欄６６、印刷部数の設定欄６８、印刷を指示するボタン７０、及び詳細設定を行うボタン７４が表示されている。図示した例では、印刷を指示するボタン７０には「印刷」という文字が表示され、詳細設定を行うボタン７４には「詳細設定」という文字が表示されている。

印刷装置の選択肢６２は、図示した例では選択肢を一覧表示する。例えば▼のボタンが押されると、利用可能な印刷装置の一覧が表示される。図示した例では「プリンタＡ」が選択されている。印刷範囲の選択肢６４は、印刷する文書が複数ページにわたる文書である場合に、「すべて（全部のページを印刷）」、「現在のページ（表示されているページを印刷）」、「ページ指定（指定したページを印刷）」という選択肢を表示する。選択肢には白丸（○）が併記されており、選択されると黒丸（●）に反転する。印刷範囲の指定欄６６は、ページ指定が選択された場合に、指定するページ情報を入力する欄である。

印刷部数の設定欄６８では、例えば０から９９９９まで等、予め定めた範囲で印刷部数が設定される。▼のボタンを押すと印刷部数が減少し、▲のボタンを押すと印刷部数が増加する。図示した例では、印刷部数は「１」に設定されている。

詳細設定を行うボタン７４が押されると、詳細設定画面８０に遷移する。詳細設定画面８０には、印刷の向きの選択肢８２、用紙サイズの選択肢８４、両面印刷の選択肢８８、まとめて１枚の選択肢８８、設定を確定するボタン８３、及び設定を取り消すボタン８５が表示されている。図示した例では、設定を確定するボタン８３には「ＯＫ」という文字が表示され、設定を取り消すボタン８５には「キャンセル」という文字が表示されている。

印刷の向きの選択肢８２には、「たて」、「よこ」という選択肢を表示する。選択肢には白丸（○）が併記されており、選択されると黒丸（●）に反転する。用紙サイズの選択肢８４は、図示した例では選択肢を一覧表示する。例えば▼のボタンが押されると、用紙サイズの一覧が表示される。図示した例では「Ａ４」が選択されている。

両面印刷の選択肢８８は、図示した例では選択肢を一覧表示する。例えば▼のボタンが押されると、印刷態様の一覧が表示される。例えば、印刷態様として、「しない（片面印刷）」、「両面印刷（長辺とじ）」、「両面印刷（短辺とじ）」という選択肢が表示される。図示した例では「しない（片面印刷）」が選択されている。

まとめて１枚の選択肢８８は、図示した例では選択肢を一覧表示する。例えば▼のボタンが押されると、２ページ、４ページ、８ページ等、１枚の用紙にまとめて印刷するページ数の一覧が表示される。図示した例では、「２ページ」が選択されている。

設定を確定するボタン８３が押されると、詳細設定画面８０において設定された内容が確定される。設定を取り消すボタン８５が押されると、詳細設定画面８０において設定された内容が取り消され、初期設定（デフォルト）に戻る。

利用者は、印刷設定画面６０及び詳細設定画面８０で印刷設定を行い、印刷を指示するボタン７０を押して印刷処理の実行を指示する。印刷を指示するボタン７０が押されると、端末装置３０は、印刷データを生成し、印刷装置２０に印刷データを出力する。

（利用者の印刷物に対する動作）
次に、利用者の印刷物に対する動作について説明する。
図８は出力された印刷物に対する利用者の動作の一例を示す概略図である。図２、図８に示すように、印刷処理の実行を指示した利用者５０は、印刷装置２０が配置された場所まで来て、印刷物２２を手に取り、利用者が求める印刷物が出力されたか否かを確認する。印刷物２２は「情報が記録された記録媒体」の一例である。

図示した例では、利用者５０の手５０Ｈには、印刷物２２が保持されている。利用者５０の視線は、保持された印刷物２２に落とされている。このように印刷物２２を確認する利用者５０の姿が、撮像装置４０により撮像される。

利用者５０が求める印刷物２２が得られていない場合、ときに利用者５０は印刷物２２に対し、印刷設定の変更の必要性を示唆する種々の動作をする。本実施の形態では、これ等の動作を「印刷物に対する利用者の予め定めた動作」とする。

印刷物に対する利用者の予め定めた動作（以下、「予め定めた動作」という。）としては、印刷物を変形させる動作（例えば、印刷物を半分に折る動作）、印刷物に対する視線を変化させる動作（例えば、印刷物に目を近づける動作、印刷物の裏側を見る動作）、印刷物の向きを変化させる動作（例えば、印刷物を回転させる動作）、及び印刷物を破棄する動作（例えば、印刷物をまるめる動作）等が挙げられる。

図９は予め定めた動作、第１の印刷設定、及び第２の印刷設定を対応付けた組合せを複数組有する対応関係を示す図表である。第１の印刷設定は、元の印刷設定として他の装置から設定し得る印刷設定である。第２の印刷設定は、次の印刷設定として自装置で設定し得る印刷設定である。次の印刷設定は、利用者が求めていると推定される印刷設定であり、印刷設定の変更候補（変更先として推奨される印刷設定）である。

図９には「予め定めた動作」として、印刷物を半分に折る動作、印刷物に目を近づける動作、印刷物の裏側を見る動作、印刷物を回転させる動作、印刷物をまるめる動作等が例示されている。

例えば、元の印刷設定が「片面印刷」であり、印刷物２２の裏側を見ている場合は、利用者５０が求める印刷物２２は、「両面印刷」されたものであると推測される。即ち、利用者５０は、「両面印刷」を選択すべきところを、間違えて「片面印刷」を選択してしまったのである。したがって、印刷設定を変更する場合は、次の印刷設定として「両面印刷」を利用者５０に推奨する。

図９に示す対応関係で「第１の印刷設定」が指定されていない（「−」で図示）場合は、第１の印刷設定は「何でもよい（不問）」設定とする。したがって、元の印刷設定に拘らず、印刷物に対する利用者の予め定めた動作から、次の印刷設定が得られる。

例えば、印刷物２２に目を近づけている場合は、次の印刷設定として「拡大印刷」を推奨する。また、印刷物２２をまるめた場合は、印刷対象となる文書を間違えたと推測されるので、次の印刷設定として「印刷中止」を推奨する。

図９に例示されたその他の組合せについて説明する。
元の印刷設定が「１枚にまとめない」であり、印刷物２２を半分に折っている場合は、次の印刷設定として「２ページを１枚にまとめる」を推奨する。また、元の印刷設定が「２ページを１枚にまとめる」であり、印刷物２２を半分に折っている場合は、次の印刷設定として「４ページを１枚にまとめる」を推奨する。

また、元の印刷設定が「半分に折らない」であり、印刷物２２を半分に折っている場合は、次の印刷設定として「後処理で半分に折る」を推奨する。また、元の印刷設定が「たて（印刷の向き）」であり、印刷物２２を回転させている場合は、次の印刷設定として「よこ（印刷の向き）」を推奨する。

上記の対応関係は例示である。以下では、予め定めた動作、第１の印刷設定、及び第２の印刷設定を対応付けた組合せを複数組有する対応関係を「データベース」と称する。実行回数、使用頻度、使用時間などをデータベースに追加してもよい。データベースは、学習により改善される。本実施の形態では、データベースは、印刷装置２０のメモリ２１Ｄ等の記憶装置に記憶されている。

（印刷制御処理）
次に、「印刷制御処理」について説明する。
図１０は第１の実施の形態に係る「印刷制御処理」の流れの一例を示すフローチャートである。「印刷制御処理」を実行する制御プログラムは、印刷装置２０の制御部２１のＲＯＭ２１Ｂに予め記憶されており、ＣＰＵ２１ＡによってＲＯＭ２１Ｂから読み出されて実行される。端末装置３０から印刷処理が依頼されると「印刷制御処理」の実行が開始される。撮像装置４０で得られた撮像データは、印刷装置２０にフレーム毎に出力され、印刷装置２０のＲＡＭ２１Ｃにフレーム毎に記憶されている。

まず、ステップ１００で、利用者５０を検知したか否かを判断する。利用者５０を検知したか否かは、例えば、撮像装置４０から取得される撮像データが「利用者の骨格データ」を含むか否かにより判断する。また、撮像装置４０とは別に設けられた人感センサ（図示せず）により、印刷装置２０の周辺で利用者５０を検知したか否かを判断してもよい。利用者５０を検知した場合は、ステップ１０２に進む。利用者５０を検知していない場合は、ステップ１００で、利用者５０を検知したか否かの判断を繰り返し行う。

次に、ステップ１０２で、「動作認識処理」を実行する。本実施の形態では、印刷物に対する利用者の予め定めた動作を認識するので、印刷物の出力開始後に実行を開始すればよい。なお、「動作認識処理」の手順については後述する。次に、ステップ１０４で、予め定めた動作が認識されたか否かを判断する。予め定めた動作が認識された場合は、ステップ１０６に進む。予め定めた動作が認識されていない場合は、ステップ１０６からステップ１１０までを飛ばして、ステップ１１２に進む。

次に、ステップ１０６で、メモリ２１Ｄに記憶されたデータベースを読み出し、データベースを参照する（図９参照）。次に、ステップ１０８で、認識された予め定めた動作と元の印刷設定とに対応する「次の印刷設定」を取得する。予め定めた動作から「次の印刷設定」が求まる場合は、元の印刷設定に拘らず、予め定めた動作から「次の印刷設定」を取得する。次に、ステップ１１０で、印刷設定の「元の印刷設定」を「次の印刷設定」に変更する。

「次の印刷設定」は、印刷部２４に出力される。印刷部２４は、印刷データに基づいてページ毎に印刷出力を実行している。印刷設定が変更されたことにより、印刷データのうち「印刷設定データ」が「次の印刷設定」に応じて変更される。印刷設定の変更後は、印刷部２４は、変更後の印刷データに基づいてページ毎に印刷出力を実行する。即ち、続きのページから変更後の印刷設定で印刷処理が行われる。

最後に、ステップ１１２で、印刷処理が終了したか否かを判断する。印刷処理が終了している場合は、「印刷制御処理」のルーチンを終了する。印刷処理が終了していない場合は、ステップ１０２に戻って、ステップ１０２の「動作認識処理」以下の手順を再度実行する。

第１の実施の形態に係る「印刷制御処理」では、印刷処理中に利用者の予め定めた動作が認識されると、利用者の確認を得ることなく、印刷処理の途中で印刷設定が自動的に「次の印刷設定」に変更される。プリント機能により印刷処理を実行する場合も、印刷データを生成した他の装置から印刷設定画面を操作して印刷設定の変更を行うことなく、印刷装置により印刷設定の変更が行われる。

（動作認識処理）
ここで、「動作認識処理」について詳細に説明する。
印刷装置２０は、撮像装置４０から得られた撮像データを経時解析することにより、印刷物に対する利用者の予め定めた動作を認識する。

−骨格データ及び骨格モデル−
まず、前提となる骨格データ及び骨格モデルについて説明する。
上記の通り、骨格データは、利用者を骨格モデルに当てはめた場合に、骨格モデルの各構成要素の長さと、骨格モデルの各接続部の仮想三次元空間での位置とを表すデータである。図６（Ａ）は骨格モデルの一例を示す模式図である。骨格モデル５２は、複数の構成要素５２Ａと、隣接する構成要素５２Ａを接続する接続部５２Ｂとを有している。

人体を構成する体幹、上肢を概念する構成要素５２Ａをバーで表し、接続部５２Ｂを黒丸で表す。接続部５２Ｂは、関節などに概念している。図示した例では、構成要素５２Ａは「前腕部」と「上腕部」に対応付けされ、接続部５２Ｂは、前腕部と上腕部を繋ぐ関節（肘関節）に対応付けされている。そして、利用者の大きさに対応して、構成要素５２Ａの長さが特定される。

接続部５２Ｂは、仮想の三次元空間における三次元座標（例えば、［X,Y,Z］）を有している。利用者の動作に従って、接続部５２Ｂの三次元座標が変化する。構成要素５２Ａの長さは特定されているので、接続部５２Ｂの三次元座標の変化に対応して、仮想の三次元空間における構成要素５２Ａの位置及び角度が変化する。構成要素５２Ａの長さと、接続部５２Ｂの三次元座標とが、骨格データとされる。

−動作認識処理の手順−
動作認識処理では、まず、現在のフレームの骨格データと前のフレームの骨格データとを比較して、各構成要素の位置変化を求める。位置変化を繰り返し求めることで、各構成要素の位置変化のパターンが得られる（手順１）。

次に、得られた各構成要素の位置変化のパターンを、予め定めた動作時の各構成要素の位置変化のパターンと比較して、両者が対応する場合には「予め定めた動作」が認識されたと判定する（手順２）。なお、印刷物に対する利用者の予め定めた動作の各々について、予め定めた動作時の各構成要素の位置変化のパターンが、記憶部２７等の記憶装置に予め記憶されている。

−印刷物認識処理の併用−
本実施の形態では「印刷物」に対する利用者の動作を認識する。印刷物を半分に折る動作では「印刷物は半分に折られる」、印刷物の裏側を見る動作では「印刷物の表裏が反転する」、印刷物を回転させる動作では「印刷物の上下が反転する」等、利用者の動作に伴い印刷物の状態も変化する。したがって、利用者の動作を認識する「動作認識処理」と併せて、印刷物の状態の変化を認識する「印刷物認識処理」を実行してもよい。

印刷物の状態の「予め定めた変化」は、利用者の「予め定めた動作」の裏付けとなる。例えば、「予め定めた動作」と対応する「予め定めた変化」とが認識された場合に、「予め定めた動作」が認識されたと判定することで、「印刷物認識処理」を併用しない場合に比べて「動作認識処理」の精度が高くなる。

例えば、撮像画像の画像データから、画像認識により白い部分（用紙）を追跡してもよい。また、骨格データの代わりに「印刷物データ」を取得し、「動作認識処理」と同じ手法で、印刷物認識処理を行ってもよい。

骨格データの代わりに用いる「印刷物データ」は、印刷物を用紙モデルに当てはめた場合に、用紙モデルの各構成要素の長さと、用紙モデルの各接続部の仮想三次元空間での位置とを表すデータである。図６（Ｂ）は用紙モデルの一例を示す模式図である。用紙モデル２２Ｍは、用紙の各辺を概念する複数の構成要素２２Ａと、用紙の各隅を概念する接続部２２Ｂとを有している。

構成要素２２Ａをバーで表し、接続部２２Ｂを黒丸で表す。用紙サイズに対応して、構成要素２２Ａの長さが特定される。印刷物の状態の変化に従って、接続部２２Ｂの三次元座標が変化する。接続部２２Ｂの三次元座標の変化に対応して、仮想の三次元空間における構成要素２２Ａの位置及び角度が変化する。構成要素５２Ａの長さと、接続部５２Ｂの三次元座標とが、印刷物データとされる。

印刷物の状態の「予め定めた変化」の各々について、予め定めた変化時の各構成要素の位置変化のパターンが、記憶部２７等の記憶装置に予め記憶されている。印刷物認識処理では、動作認識処理と同様に、各構成要素の位置変化のパターンを、予め定めた印刷物の各構成要素の位置変化のパターンと比較して、両者が対応する場合には「予め定めた変化」が認識されたと判定する。

（次の印刷設定が複数ある場合）
また、「次の印刷設定」を取得する際に、予め定めた動作及び元の印刷設定の組合せに対し、「次の印刷設定」が複数ある場合は、少なくとも１つの印刷設定を選択して変更すればよい。複数の印刷設定の中で優先順位をつけて、優先順位の高い印刷設定を選択してもよい。例えば、利用頻度の高い印刷設定、最近使用された印刷設定の優先順位を高くする。

また、１つの印刷設定を実施すると他の印刷設定が実施できない場合は、１つの印刷設定については印刷設定を変更しないようにする。一緒には実施できない印刷設定が排除される。

例えば、図９に示す例で、「印刷物を半分に折る」という動作が認識された場合は、元の印刷設定が「１枚にまとめない」であると、次の印刷設定は「２ページを１枚にまとめる」となる。また、元の印刷設定に拘らず、次の印刷設定として「後処理で半分に折る」となる。元の印刷設定が「１枚にまとめない」である場合は、次の印刷設定は「２ページを１枚にまとめる」と「後処理で半分に折る」としてもよい。「後処理で半分に折る」を実施しても、「２ページを１枚にまとめる」も実施できる。

一方、元の印刷設定が「２ページを１枚にまとめる」であると、次の印刷設定は「４ページを１枚にまとめる」となる。また、元の印刷設定に拘らず、次の印刷設定として「後処理で半分に折る」となる。「４ページを１枚にまとめる」場合の各ページの配置順序は不明であるため、「後処理で半分に折る」を実施すると、「４ページを１枚にまとめる」は実施できない。したがって、次の印刷設定に「後処理で半分に折る」は含めないようにする。

＜第２の実施の形態＞
第２の実施の形態は、印刷処理中に利用者の予め定めた動作が認識されると、印刷処理を中断して利用者に印刷設定用の画面を表示して、利用者からの印刷設定を受け付ける以外は、第１の実施の形態と同じであるため、相違点である「印刷制御処理」について説明し、同じ部分については説明を省略する。

図１１は第２の実施の形態に係る「印刷制御処理」の流れの一例を示すフローチャートである。まず、ステップ２００で、利用者５０を検知したか否かを判断する。利用者５０を検知した場合は、ステップ２０２に進む。利用者５０を検知していない場合は、ステップ２００で、利用者５０を検知したか否かの判断を繰り返し行う。

次に、ステップ２０２で、「動作認識処理」を実行する。次に、ステップ２０４で、予め定めた動作が認識されたか否かを判断する。予め定めた動作が認識された場合は、ステップ２０６に進む。予め定めた動作が認識されていない場合は、ステップ２０６からステップ２２８までを飛ばして、ステップ２３２に進む。

次に、ステップ２０６で、印刷処理を一時中断する。印刷部２４は、印刷データに基づいてページ毎に印刷出力を実行している。印刷処理が中断されると、印刷部２４は、残りのページについて、ページ毎の印刷出力を保留する。

次に、ステップ２０８で、メモリ２１Ｄに記憶されたデータベースを読み出し、データベースを参照する（図９参照）。次に、ステップ２１０で、認識された予め定めた動作と元の印刷設定とに対応する「次の印刷設定」を取得する。取得された「次の印刷設定」は、記憶部ＲＡＭ２１等の記憶装置に保持される。

次に、ステップ２１２で、印刷設定の選択肢を表示する選択画面を生成し、印刷装置２０の操作表示部２３に選択画面を表示する。取得された「次の印刷設定」は、選択画面に表示される。ここでは、選択画面への表示が「出力」の一例である。表示される選択画面は、印刷データを生成した端末装置３０に表示される「印刷設定画面」とは異なる画面である。図１２は「選択画面」の一例を示す模式図である。図１３は「選択画面（次ページ）」の一例を示す模式図である。

図１２に示すように、選択画面２００の最初のページには、印刷設定の選択肢として、ボタン２０２、ボタン２０４、ボタン２０６、ボタン２０８、及びチェックボックス２１０が表示されている。また、選択画面２００の最初のページには、印刷を指示するボタン２１２、及び印刷を中止するボタン２１４が表示されている。図示した例では、印刷を指示するボタン２１２には「印刷」という文字が表示され、印刷を中止するボタン２１４には「印刷キャンセル」という文字が表示されている。

ボタン２０２及びボタン２０４は、ステップ２１０で取得された「次の印刷設定」を選択するボタンである。図示した例では、ボタン２０２は「２アップ印刷（２ページをまとめて１枚に印刷）」を選択するボタンであり、ボタン２０４は「フィニッシャーで折る（後処理で半分に折る）」を選択するボタンである。ボタン２０２及びボタン２０４には、「次の印刷設定」であることを示す「推奨設定」という文字が併記されている。

ボタン２０６は、印刷設定を変更しないことを選択するボタンである。図示した例では、ボタン２０６には「そのまま印刷」という文字が表示されている。ボタン２０８は、その他の印刷設定を選択するボタンである。図示した例では、ボタン２０８には「その他の印刷設定」という文字が表示されている。ボタン２０８が押されると、図１３に示す選択画面（次ページ）２００Ａに遷移する。

図１３に示すように、選択画面（次ページ）２００Ａには、印刷設定の選択肢として、ボタン２１６、ボタン２１８、ボタン２２０、ボタン２２２、及びチェックボックス２１０が表示されている。また、選択画面（次ページ）２００Ａには、印刷を指示するボタン２１２、及び前ページに戻るボタン２２４が表示されている。図示した例では、前ページに戻るボタン２２４には「戻る」という文字が表示されている。

ボタン２１６は、まとめて１枚の選択肢を表示するボタンである。図示した例では、ボタン２１６には、「まとめて１枚」という文字と共に、元の印刷設定を表す「ｎアップしない」という文字が表示されている。例えば、元の印刷設定から他の印刷設定に変更する場合には、ボタン２１６を押すと選択肢が表示されるので、選択肢の中から他の印刷設定を選択する。

ボタン２１８は、両面印刷の選択肢を表示するボタンである。図示した例では、ボタン２１８には、「両面印刷」という文字と共に、元の印刷設定を表す「しない（片面印刷）」という文字が表示されている。

ボタン２２０は、印刷の向きの選択肢を表示するボタンである。図示した例では、ボタン２２０には、「印刷の向き」という文字と共に、元の印刷設定を表す「たて」という文字が表示されている。

ボタン２２２は、フィニッシャー（後処理）の選択肢を表示するボタンである。図示した例では、ボタン２２２には、「フィニッシャー」という文字と共に、元の印刷設定を表す「折らない」という文字が表示されている。

図１２及び図１３に表示されるチェックボックス２１０は、チェックを入れることにより、印刷処理を最初からやり直すことを選択する欄である。図示した例では、チェックボックス２１０には「最初のページから印刷」という文字が併記されている。チェックボックス２１０にチェックが入れられていない場合は、続きのページから印刷処理が行われる。

利用者は、ボタン２０２やボタン２０４により、ステップ２１０で取得された「次の印刷設定」を選択して、印刷設定を変更してもよい。また、利用者は、ボタン２１６〜２２２により、他の印刷設定について選択肢を表示し、「次の印刷設定」とは異なる印刷設定を選択して、印刷設定を変更してもよい。また、利用者は、ボタン２０６により、印刷設定を変更しないことを選択してもよい。

また、利用者は、印刷設定を変更する場合及び印刷設定を変更しない場合、いずれの場合であっても、印刷処理を最初からやり直したい場合には、チェックボックス２１０にチェックを入れる。

印刷を指示するボタン２１２が押されると、選択画面２００及び２００Ａにおいて選択された印刷設定で印刷処理が実行される。印刷を中止するボタン２１４が押されると、中断している印刷処理が中止される。

ここで、図１１に示すフローチャートの説明に戻る。
次に、ステップ２１４で、利用者による選択が終了したか否かを判断する。印刷処理の実行が指示された場合、または印刷処理が中止された場合に、利用者による選択が終了する。利用者による選択が終了している場合は、ステップ２１６に進む。利用者による選択が終了していない場合は、ステップ２１４で、利用者による選択が終了したか否かの判断を繰り返し行う。

次に、ステップ２１６で、印刷設定の変更が行われた場合は、データベースを更新する。今回選択された印刷設定について、「予め定めた動作、元の印刷設定、及び選択された印刷設定を関連付けた組合せ」をデータベースに追加する（図９参照）。同じ組合せがデータベースに既に存在する場合は、その組合せについての実行回数、使用頻度、使用時間などをデータベースに追加する。より多くの事例がデータベースに登録されることで、データベースが学習により改善される。

次に、ステップ２１８で、印刷処理を中止するか否かを判断する。印刷処理を中止する場合は、「印刷制御処理」のルーチンを終了する。印刷処理を中止しない場合は、ステップ２２０に進む。次に、ステップ２２０で、印刷設定を変更するか否かを判断する。印刷設定を変更する場合は、ステップ２２２に進む。印刷設定を変更しない場合は、ステップ２２２を飛ばしてステップ２２４に進む。

次に、ステップ２２２で、印刷設定の「元の印刷設定」を選択された印刷設定に変更する。変更後の印刷設定は、印刷部２４に出力される。「次の印刷設定」が選択された場合は、「次の印刷設定」が印刷部２４に出力される。印刷部２４は、再印刷機能を備え、印刷データを保持している。印刷設定が変更されたことにより、保持された印刷データのうち「印刷設定データ」が変更される。印刷設定の変更後は、印刷部２４は、変更後の印刷データに基づいてページ毎に印刷出力を実行する。即ち、続きのページから変更後の印刷設定で印刷処理が行われる。

次に、ステップ２２４で、印刷処理を最初からやり直すか否かを判断する。最初からやり直す場合は、ステップ２２６に進む。ステップ２２６では、ステップ２０６で一時中断した印刷処理を中止する。次に、ステップ２２８で、印刷部２４を制御して、最初のページから印刷処理を開始させる。印刷部２４は、変更後の印刷データに基づいてページ毎に印刷出力を実行する。即ち、最初のページから変更後の印刷設定で印刷処理が行われる。

一方、ステップ２２４で、最初からやり直さない場合は、ステップ２３０に進む。
ステップ２３０では、印刷部２４を制御して、ステップ２０６で一時中断した印刷処理を再開させる。印刷部２４は、変更後の印刷データに基づいてページ毎に印刷出力を実行する。即ち、続きのページから変更後に印刷設定で印刷処理が行われる。印刷処理が終了すると、ステップ２３２に進む。

最後に、ステップ２３２で、印刷処理が終了したか否かを判断する。印刷処理が終了している場合は、「印刷制御処理」のルーチンを終了する。印刷処理が終了していない場合は、ステップ２０２に戻って、ステップ２０２の「動作認識処理」以下の手順を再度実行する。

なお、上記では、印刷設定を変更する場合について説明したが、印刷設定を変更しない場合は、変更後の印刷設定は、印刷部２４に出力されず、「印刷設定データ」は変更されない。印刷設定を変更しない場合は、最初からやり直す必要は無いので、ステップ２３０で、印刷部２４を制御して、ステップ２０６で一時中断した印刷処理を再開させる。また、元の印刷設定で印刷処理を最初からやり直してもよい。この場合は、ステップ２０６で、一時中断した印刷処理を中止して、ステップ２０８で、最初のページから印刷処理を開始させる。

第２の実施の形態に係る「印刷制御処理」では、印刷処理中に利用者の予め定めた動作が認識されると、印刷処理を中断して印刷装置の操作表示部に選択画面を表示する。利用者は「次の印刷設定」の内容を確認し、表示された選択画面を操作して印刷設定の変更を行う。プリント機能により印刷処理を実行する場合も、印刷データを生成した端末装置から印刷設定画面を操作して印刷設定の変更を行うことなく、印刷装置により印刷設定の変更が行われる。

また、動作認識の誤りにより印刷処理が一時中断された場合には、選択画面の「印刷設定を変更しない選択肢」を選択することで、印刷処理が再開される。また、選択画面の「印刷処理を最初からやり直す選択肢」が他の選択肢と共に選択されると、新たな印刷データを生成することなく、変更後の印刷設定で最初のページから印刷処理が行われる。

（変形例）
ここで、選択画面の変形例について説明する。
図１４は「選択画面」の他の一例を示す模式図である。図１５は「選択画面（次ページ）」の他の一例を示す模式図である。チェックボックス２１０を含まないこと以外は、図１４に示す選択画面は図１２に示す選択画面と同様であり、図１５に示す選択画面は図１３に示す選択画面と同様である。

チェックボックス２１０を含まない選択画面を表示する場合は、印刷処理を中止する場合を除き、いずれの選択肢が選択されても、一時中断した印刷処理を中止し、最初のページから印刷処理を開始する。具体的には、図１１に示す「印刷制御処理」のフローチャートから、ステップ２２４及びステップ２３０が省略される。新たな印刷データを生成することなく、変更後の印刷設定で最初のページから印刷処理が行われる。

＜第３の実施の形態＞
第３の実施の形態は、印刷終了後も利用者の動作の認識を実施し、利用者の予め定めた動作が認識されると、利用者に印刷設定用の画面を表示して、利用者からの再印刷の印刷設定を受け付ける以外は、第１の実施の形態と同じであるため、相違点である「印刷制御処理」について説明し、同じ部分については説明を省略する。

図１６は第３の実施の形態に係る「再印刷制御処理」の流れの一例を示すフローチャートである。まず、ステップ３００で、利用者５０を検知したか否かを判断する。利用者５０を検知した場合は、ステップ３０２に進む。利用者５０を検知していない場合は、ステップ３００で、利用者５０を検知したか否かの判断を繰り返し行う。

次に、ステップ３０２で、「動作認識処理」を実行する。次に、ステップ３０４で、予め定めた動作が認識されたか否かを判断する。予め定めた動作が認識された場合は、ステップ３０６に進む。予め定めた動作が認識されていない場合は、ステップ３０６からステップ３２４までを飛ばして、ステップ３２６に進む。

次に、ステップ３０６で、メモリ２１Ｄに記憶されたデータベースを読み出し、データベースを参照する（図９参照）。次に、ステップ３０８で、認識された予め定めた動作と元の印刷設定とに対応する「次の印刷設定」を取得する。取得された「次の印刷設定」は、記憶部ＲＡＭ２１等の記憶装置に保持される。

次に、ステップ３１０で、印刷設定の選択肢を表示する選択画面を生成し、印刷装置２０の操作表示部２３に選択画面を表示する。取得された「次の印刷設定」は、選択画面に表示される。ここでは、選択画面への表示が「出力」の一例である。図１７は「選択画面」の更に他の一例を示す模式図である。

図１７に示すように、選択画面３００には、印刷設定の選択肢として、ボタン３０２、ボタン３０４、ボタン３０６、及びボタン３０８が表示されている。また、選択画面３００には、再印刷を指示するボタン３１０、及び再印刷をしないことを指示するボタン３１２が表示されている。図示した例では、再印刷を指示するボタン３１０には「印刷」という文字が表示され、再印刷をしないことを指示するボタン３１２には「再印刷しない」という文字が表示されている。

ボタン３０２及びボタン３０４は、ステップ３０８で取得された「次の印刷設定」を選択するボタンである。図示した例では、ボタン３０２は「２アップ印刷（２ページをまとめて１枚に印刷）」を選択するボタンであり、ボタン３０４は「フィニッシャーで折る（後処理で半分に折る）」を選択するボタンである。ボタン３０２及びボタン３０４には、「次の印刷設定」であることを示す「推奨設定」という文字が併記されている。

ボタン３０６は、印刷設定を変更しないことを選択するボタンである。図示した例では、ボタン３０６には「そのまま印刷」という文字が表示されている。ボタン３０８は、その他の印刷設定を選択するボタンである。図示した例では、ボタン３０８には「その他の印刷設定」という文字が表示されている。ボタン２０３が押されると、他の印刷設定について選択肢を表示する選択画面（次ページ）に遷移する。

利用者は、ボタン３０２やボタン３０４により、ステップ３０８で取得された「次の印刷設定」を選択して、印刷設定を変更してもよい。また、利用者は、他の印刷設定について選択肢を表示し、「次の印刷設定」とは異なる印刷設定を選択して、印刷設定を変更してもよい。また、利用者は、ボタン３０６により、印刷設定を変更しないことを選択してもよい。

再印刷を指示するボタン３１０が押されると、選択画面３００において選択された印刷設定で再印刷処理が実行される。再印刷をしないことを指示するボタン３１２が押されると、再印刷処理を行わずに「再印刷制御処理」が終了する。

ここで、図１６に示すフローチャートの説明に戻る。
次に、ステップ３１２で、利用者による選択が終了したか否かを判断する。再印刷の実行が指示された場合、または、再印刷をしないことが指示された場合に、利用者による選択が終了する。利用者による選択が終了している場合は、ステップ３１４に進み、利用者による選択が終了していない場合は、ステップ３１２で、利用者による選択が終了したか否かの判断を繰り返し行う。

次に、ステップ３１４で、印刷設定の変更が行われた場合は、データベースを更新する。今回選択された印刷設定について、「予め定めた動作、元の印刷設定、及び選択された印刷設定の対応関係」をデータベースに追加する（図９参照）。対応関係がデータベースに既に存在する場合は、対応関係についての実行回数、使用頻度、使用時間などをデータベースに追加する。

次に、ステップ３１６で、再印刷をしないことが指示されたか否かを判断する。再印刷をしない場合は、「再印刷制御処理」のルーチンを終了する。再印刷をする場合は、ステップ３１８に進む。次に、ステップ３１８で、印刷設定を変更するか否かを判断する。印刷設定を変更する場合は、ステップ３２０に進む。印刷設定を変更しない場合は、ステップ３２０を飛ばしてステップ３２２に進む。

次に、ステップ３２０で、印刷設定の「元の印刷設定」を、選択された印刷設定に変更する。変更後の印刷設定は、印刷部２４に出力される。「次の印刷設定」が選択された場合は、「次の印刷設定」が印刷部２４に出力される。

次に、ステップ３２２で、印刷部２４を制御して、最初のページから印刷処理を開始させる。印刷部２４は、再印刷機能を備え、印刷データを保持している。印刷設定が変更されたことにより、印刷データのうち「印刷設定データ」が「次の印刷設定」に応じて変更される。印刷部２４は、変更後の印刷データに基づいてページ毎に印刷出力を実行する。即ち、最初のページから変更後の印刷設定で印刷処理が行われる。

なお、印刷設定を変更しない場合は、変更後の印刷設定は、印刷部２４に出力されず、「印刷設定データ」は変更されない。印刷設定を変更しない場合は、「元の印刷設定」で最初のページから印刷処理が行われる。

次に、ステップ３２４で、印刷処理が終了したか否かを判断する。印刷処理が終了している場合は、ステップ３２６に進む。印刷処理が終了していない場合は、ステップ３２４で、印刷処理が終了したか否かの判断を繰り返し行う。次に、ステップ３２６で、予め定めた時間が経過したか否かを判断する。経過している場合は、「再印刷制御処理」のルーチンを終了する。経過していない場合は、ステップ３０２に戻って、ステップ３０２の「動作認識処理」以下の手順を再度実行する。

なお、予め定めた時間の経過を待つ代わりに、利用者が印刷装置から離れるまで待ってもよい。例えば、利用者５０を検知した場合と同様に、撮像装置４０から取得される撮像データから「利用者の骨格データ」が消えた場合に、利用者が印刷装置から離れたと判断する。

第３の実施の形態に係る「再印刷制御処理」では、印刷終了後であっても、印刷終了後に利用者の予め定めた動作が認識されると、再印刷の印刷設定を行うための選択画面を表示する。利用者は「次の印刷設定」の内容を確認し、表示された選択画面を操作して印刷設定の変更を行う。

また、プリント機能により印刷処理を実行する場合も、印刷データを生成した端末装置から印刷設定画面を操作して印刷設定の変更を行うことなく、変更後の印刷設定で再印刷処理が行われる。

また、印刷設定が変更されると、新たな印刷データを生成することなく、変更後の印刷設定で最初のページから印刷処理が実行される。また、選択画面の「印刷設定を変更しない選択肢」を選択することで、同じ印刷物が再度出力される。

＜変形例＞
なお、上記実施の形態で説明した印刷装置及びプログラムの構成は一例であり、本発明の主旨を逸脱しない範囲内においてその構成を変更してもよいことは言うまでもない

（印刷設定画面からの操作）
上記の実施の形態では、印刷処理で取得された「次の印刷設定」が印刷装置２０の選択画面に表示される例について説明したが、印刷処理で取得された「次の印刷設定」が他の装置に出力されてもよい。例えば、印刷処理で取得された「次の印刷設定」が端末装置３０に送信され、利用者が使用する端末装置３０の「印刷設定画面」に「次の印刷設定」が反映されるようにしてもよい。

図１８は変形例に係る「印刷制御処理」の流れの一例を示すフローチャートである。まず、ステップ４００で、利用者５０を検知したか否かを判断する。利用者５０を検知した場合は、ステップ４０２に進む。利用者５０を検知していない場合は、ステップ４００で、利用者５０を検知したか否かの判断を繰り返し行う。

次に、ステップ４０２で「動作認識処理」を実行する。次に、ステップ４０４で、予め定めた動作が認識されたか否かを判断する。予め定めた動作が認識された場合は、ステップ４０６に進む。予め定めた動作が認識されていない場合は、ステップ４０６からステップ４１０までを飛ばして、ステップ４１２に進む。

次に、ステップ４０６で、メモリ２１Ｄに記憶されたデータベースを読み出し、データベースを参照する（図９参照）。次に、ステップ４０８で、認識された予め定めた動作と元の印刷設定とに対応する「次の印刷設定」を取得する。次に、ステップ４１０で、取得された「次の印刷設定」を端末装置３０に送信（出力）する。

最後に、ステップ４１２で、印刷処理が終了したか否かを判断する。印刷処理が終了している場合は、「印刷制御処理」のルーチンを終了する。印刷処理が終了していない場合は、ステップ４０２に戻って、ステップ４０２の「動作認識処理」以下の手順を再度実行する。

端末装置３０は、通信部３６を介して「次の印刷設定」を取得する。「次の印刷設定」は、印刷された文書と関連付けて、記憶部３８等の記憶装置に記憶される。「次の印刷設定」は、次に説明する「印刷設定画面の生成処理」が実行される際に、記憶部３８等から読み出される。

図１９は変形例に係る「印刷設定画面の生成処理」の流れの一例を示すフローチャートである。「印刷設定画面の生成処理」の制御プログラムは、利用者により印刷する文書が選択され、印刷設定を開始する指示を受け付けた場合に、端末装置３０の制御部３１のＣＰＵ３１Ａにより、ＲＯＭ３１Ｂから読み出されて実行される。

まず、ステップ５００で、選択された文書の再印刷か否かを判断する。再印刷の場合は、ステップ５０２に進む。再印刷ではない場合は、「印刷設定画面の生成処理」のルーチンを終了する。この場合は、通常の印刷設定画面が表示される。次に、ステップ５０２で、文書に関連づけられた「次の印刷設定」があるか否かを判断する。「次の印刷設定」がある場合は、ステップ５０４に進む。「次の印刷設定」がない場合は、「印刷設定画面の生成処理」のルーチンを終了する。

次に、ステップ５０４で、記憶部３８等から「次の印刷設定」を読み出し、「次の印刷設定」を反映させた「印刷設定画面」を生成する。「次の印刷設定」は、印刷設定画面に表示される。そして、利用者５０が使用する端末装置３０に接続された表示部３２に「印刷設定画面」を表示して、「印刷設定画面の生成処理」のルーチンを終了する。

図２０は変形例に係る「印刷設定画面」の一例を示す模式図である。図７（Ｂ）に示す「印刷設定画面」と同じ構成部分には同じ符号を付して説明を省略し、相違点について説明する。図２０に示す「印刷設定画面」では、詳細設定画面８０の、まとめて１枚の選択肢８８について、初期設定（デフォルト）として「次の印刷設定」が選択されている。図示した例では、「２ページ（推奨）」が選択されている。なお、▼のボタンを押して選択肢を表示し、他の選択肢を選択してもよい。

図２１は変形例に係る「印刷設定画面」の他の一例を示す模式図である。図７（Ｂ）に示す「印刷設定画面」と同じ構成部分には同じ符号を付して説明を省略し、相違点について説明する。図２１に示す「印刷設定画面」は、推奨設定を行うボタン７６が表示されている。図示した例では、推奨設定を行うボタン７６には「推奨設定」という文字が表示されている。

推奨設定を行うボタン７６が押されると、推奨設定画面９０に遷移する。推奨設定画面９０には、まとめて１枚の選択肢９２、及び後処理（フィニッシャー）の選択肢９４が表示されている。選択肢９２及び選択肢９４の各々について、初期設定（デフォルト）として「次の印刷設定」が選択されている。図示した例では、まとめて１枚の選択肢９２について「２ページ」が選択され、後処理の選択肢９４について「半分に折る」が選択されている。なお、▼のボタンを押して選択肢を表示し、他の選択肢を選択してもよい。

変形例では、印刷処理中に利用者の予め定めた動作が認識されると、「次の印刷設定」が端末装置３０に送信される。送信された「次の印刷設定」は印刷設定画面に反映される。したがって、端末装置３０から印刷設定画面を操作して印刷設定の変更を行う場合にも、利用者により「次の印刷設定」の内容が確認される。

（次の印刷設定の他の取得方法）
上記の実施の形態では、予め定めた動作、第１の印刷設定、及び第２の印刷設定を対応付けた組合せを複数組有する対応関係（データベース）を参照して、認識された予め定めた動作から、または、認識された予め定めた動作と元の印刷設定とから、「次の印刷設定」を取得したが、「次の印刷設定」の取得方法はこれには限定されない。例えば、認識された予め定めた動作と元の印刷設定とから、最尤推定等の各種の推定手法により、他の印刷設定より尤度の高い「次の印刷設定」を取得してもよい。

１０ 印刷システム
１２ 通信回線
２０ 印刷装置
２１ 制御部
２２ 印刷物
２２Ｍ 用紙モデル
２３ 操作表示部
２４ 印刷部
２５ 用紙搬送部
２６ 通信部
２７ 記憶部
３０ 端末装置
３１ 制御部
３２ 表示部
３４ 入力部
３６ 通信部
３８ 記憶部
４０ 撮像装置
４１ 投光部
４２ 受光部
４３ 撮像部
４４ 制御部
４５ 記憶部
４６ 送信部
５０ 利用者
５０Ｈ 手
５２ 骨格モデル
５２Ａ 構成要素
５２Ｂ 接続部
６０ 印刷設定画面
８０ 詳細設定画面
９０ 推奨設定画面
２００ 選択画面
３００ 選択画面

Claims (20)

1. 利用者の姿を撮影して前記利用者の動作を認識する認識手段と、
   前記認識手段で認識された動作であって、記録形態設定に従って記録装置により情報が記録された記録媒体に対する利用者の予め定めた動作と、前記記録媒体への情報の記録に用いた元の記録形態設定とに応じて得られた、前記記録形態設定の変更候補である次の記録形態設定を出力する出力手段と、
   を備えた情報処理装置。
2. 前記次の記録形態設定は、前記予め定めた動作、前記元の記録形態設定として設定し得る第１の記録形態設定、及び前記次の記録形態設定として設定し得る第２の記録形態設定を対応付けた組合せを、少なくとも１組有する第２の対応関係から定める、
   請求項１に記載の情報処理装置。
3. 前記予め定めた動作が、前記記録媒体を折る動作、前記記録媒体に目を近づける動作、前記記録媒体の裏側を見る動作、前記記録媒体の向きを変化させる動作、及び前記記録媒体を破棄する動作の少なくとも１つを含む、
   請求項１または請求項２に記載の情報処理装置。
4. 前記記録媒体への情報の記録に用いた元の記録形態設定を、前記次の記録形態設定に変更する変更手段をさらに備えた、
   請求項１から請求項３までのいずれか１項に記載の情報処理装置。
5. 前記変更手段は、前記次の記録形態設定が複数あり、１つの記録形態設定を実施すると他の記録形態設定が実施できない場合に、前記１つの記録形態設定については記録形態設定を変更しない、
   請求項４に記載の情報処理装置。
6. 前記予め定めた動作が認識された場合は、記録媒体への情報の記録処理を一時中断するように前記記録装置を制御する制御手段と、
   記録処理を一時中断した後に、前記次の記録形態設定を含む複数の選択肢を表示して、利用者からの記録形態設定を受け付ける受付手段と、
   をさらに備えた、請求項１から請求項３までのいずれか１項に記載の情報処理装置。
7. 前記制御手段は、
   記録形態設定が変更されて、記録処理の実行が指示されると、
   一時中断した記録処理を中止して、変更後の記録形態設定で記録処理を最初からやり直すように記録装置を制御する、
   請求項６に記載の情報処理装置。
8. 前記複数の選択肢は、記録形態設定を変更しない選択肢を含む、
   請求項６に記載の情報処理装置。
9. 前記制御手段は、
   記録形態設定が変更されず、記録処理の実行が指示されると、
   変更前の記録形態設定で一時中断した記録処理を再開するように記録装置を制御する、
   請求項８に記載の情報処理装置。
10. 前記複数の選択肢は、他の選択肢と共に選択される選択肢であって、記録処理を最初からやり直す選択肢を含む、
    請求項６に記載の情報処理装置。
11. 前記制御手段は、
    前記記録処理を最初からやり直す選択肢が選択されていない場合は、記録処理の実行が指示されると、変更後の記録形態設定で一時中断した記録処理を再開するように記録装置を制御する、
    請求項１０に記載の情報処理装置。
12. 前記制御手段は、
    前記記録処理を最初からやり直す選択肢が選択された場合は、記録処理の実行が指示されると、一時中断した記録処理を中止して、変更後の記録形態設定で記録処理を最初からやり直すように記録装置を制御する、
    請求項１０に記載の情報処理装置。
13. 前記認識手段で認識された動作、元の記録形態設定、及び選択された選択肢に係る次の記録形態設定を対応付けた組合せを、
    前記予め定めた動作、前記元の記録形態設定として設定し得る第１の記録形態設定、及び前記次の記録形態設定として設定し得る第２の記録形態設定を対応付けた組合せを、少なくとも１組有する第２の対応関係に追加する、
    請求項６から請求項１２までのいずれか１項に記載の情報処理装置。
14. 前記認識手段は、記録媒体への記録開始後から、利用者の動作の認識を開始する、
    請求項１から請求項１３までのいずれか１項に記載の情報処理装置。
15. 前記認識手段は、利用者が記録装置から離れるまで、利用者の動作を認識する、
    請求項１４に記載の情報処理装置。
16. 請求項１から請求項１５までのいずれか１項に記載の情報処理装置を備え、
    前記情報処理装置に制御されて記録媒体に情報を記録する記録装置。
17. 元の記録形態設定が他の装置から設定され、次の記録形態設定が自装置から設定される、請求項１６に記載の記録装置。
18. 予め定めた撮像範囲を撮像する撮像装置と、
    記録媒体に情報を記録する記録装置と、
    前記記録装置を制御すると共に、前記撮像装置から得られた撮像データを用いて利用者の動作を認識する、請求項１から請求項１５までのいずれか１項に記載の情報処理装置と、
    を備えた情報処理システム。
19. 前記情報を生成する他の装置を更に備え、
    前記情報処理装置は、前記他の装置で生成された情報を記録媒体に記録するように前記記録装置を制御する、
    請求項１８に記載の情報処理システム。
20. コンピュータを、
    請求項１から請求項１５までのいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラム。

Images