JP7424016B2 - 画像処理システム、情報処理装置の制御方法、プログラムおよび画像処理方法 - Google Patents

Description

画像処理システム、情報処理装置の制御方法、プログラムおよび画像処理方法に関する。

近年、スマートフォンなどの携帯デバイスでは、通常の画面をタップするなどの操作以外に、他の操作を受け付ける仕組みが整いつつある。当該他の操作としては、例えば、音声を用いて検索を行う操作または音声を用いてアプリケーションの起動を行う操作などがある。

例えば、印刷システムにおいて、音声を用いて所定のアプリケーションを起動し、これにより、写真の印刷を自動的に実行する機能がある。当該機能では、携帯デバイスから離れた場所にありＷｉ－Ｆｉで携帯デバイスと同じアクセスポイントとつながっている印刷装置、または、携帯デバイスから離れた場所にありインターネット経由で携帯デバイスと接続される印刷装置などによって、印刷を実行する場合があった。

特許文献１には、音声操作を受け付けて印刷を行う印刷装置において、印刷設定を音声で通知する通知手段を備える構成が記載されている（特許文献１の請求項１６など参照。）。

特開２０１９－４６１０３号公報

しかしながら、特許文献１に記載の技術では、音声制御に対して音声で通知する構成に関しては記載されているものの、ディスプレイ等の他の通知手段との関係には言及されていない。

上記課題を解決するために一態様は、情報処理装置と、画像処理装置と、を備える画像処理システムであって、前記情報処理装置は、第１操作入力を受け付ける第１操作入力部と、第２操作入力を受け付ける第２操作入力部と、第１通知を行う第１通知部と、第２通知を行う第２通知部と、前記第１操作入力部によって受け付けられた前記第１操作入力、もしくは前記第２操作入力部によって受け付けられた前記第２操作入力に基づいて、前記画像処理装置への指示を取得する指示取得部と、前記指示取得部によって取得された前記指示に基づいて、画像処理の要求を前記画像処理装置に対して行う画像処理要求部と、を備え、前記画像処理装置は、前記情報処理装置から前記画像処理の要求を受け付ける要求受付部と、前記要求受付部によって受け付けられた前記画像処理を実行する画像処理部と、を備え、前記画像処理システムは、前記画像処理装置において実行された前記画像処理に関する処理結果を通知する先として、前記情報処理装置の前記第１通知部と前記第２通知部の少なくとも一方を選択させる通知選択部を備える、画像処理システムである。

上記課題を解決するために一態様は、第１操作入力部、第２操作入力部、第１通知部、及び第２通知部を有し、画像処理装置と通信を行う情報処理装置の制御方法であって、前記第１操作入力部によって受け付けられた第１操作入力、もしくは前記第２操作入力部によって受け付けられた第２操作入力に基づいて、前記画像処理装置への指示を取得し、取得された前記指示に基づいて、画像処理の要求を前記画像処理装置に対して行い、前記画像処理装置において実行された前記画像処理に関する処理結果を通知する先として、前記第１通知部と前記第２通知部の少なくとも一方の選択を行う、情報処理装置の制御方法である。

上記課題を解決するために一態様は、第１操作入力部、第２操作入力部、第１通知部、及び第２通知部を有し、画像処理装置と通信を行う情報処理装置を構成するコンピューターに、前記第１操作入力部によって受け付けられた第１操作入力、もしくは前記第２操作入力部によって受け付けられた第２操作入力に基づいて、前記画像処理装置への指示を取得する第１機能と、取得された前記指示に基づいて、画像処理の要求を前記画像処理装置に対して行う第２機能と、前記画像処理装置において実行された前記画像処理に関する処理結果を通知する先として、前記第１通知部と前記第２通知部の少なくとも一方の選択を行なわせる第３機能と、を実現させるためのプログラムである。
上記課題を解決するために一態様は、画像処理方法であって、情報処理装置が操作入力を取得し、前記操作入力に基づいて、画像処理装置が画像処理を行い、第１通知部が選択された場合は、前記第１通知部を用いて前記画像処理に関する処理結果を通知し、第２通知部が選択された場合は、前記第２通知部を用いて前記画像処理に関する処理結果を通知する、画像処理方法である。

実施形態に係る画像処理システムの概略的な構成を示す図である。 実施形態に係る情報処理装置の機能ブロックの構成を示す図である。 実施形態に係る画像処理装置の機能ブロックの構成を示す図である。 実施形態に係る音声認識サーバーの機能ブロックの構成を示す図である。 実施形態に係る対応情報の例を示す図である。 実施形態に係る画像処理システムにおいて行われる処理のシーケンスを示す図である。 実施形態に係る情報処理装置において行われる処理の手順の一例を示す図である。

以下、実施形態について、図面を参照して説明する。

図１は、実施形態に係る画像処理システム１の概略的な構成を示す図である。
画像処理システム１は、情報処理装置１１と、画像処理装置１２を備える。
また、図１には、情報処理装置１１のユーザー３１と、音声認識サーバー１３を示している。
なお、画像処理システム１は、音声認識サーバー１３を含んでもよい。

情報処理装置１１は、画像処理装置１２および音声認識サーバー１３のそれぞれと通信することが可能である。本実施形態では、情報処理装置１１は、画像処理装置１２および音声認識サーバー１３のそれぞれに、直接、アクセスすることが可能である。
ここで、情報処理装置１１と画像処理装置１２とは、有線または無線により接続されて、通信を行う。
同様に、情報処理装置１１と音声認識サーバー１３とは、有線または無線により接続されて、通信を行う。
なお、情報処理装置１１と画像処理装置１２と音声認識サーバー１３が、同一のネットワークで接続されてもよい。当該ネットワークは、例えば、インターネットであってもよい。
また、画像処理装置１２と音声認識サーバー１３とが、有線または無線により、通信可能であってもよい。

本実施形態では、情報処理装置１１、および音声認識サーバー１３は、それぞれ、コンピューターである。なお、情報処理装置１１は、例えば、タブレット端末装置またはスマートフォンなどの任意のコンピューターであってもよく、他の装置であってもよい。また、情報処理装置１１としては、例えば、対話型の音声操作に対応したスマートスピーカーであって、表示装置などのように音声以外の伝達手段を用いた操作入力機能および通知機能を備えたデバイスが用いられてもよい。
音声認識サーバー１３は、例えば、インターネットを介して一般に使用することが可能なサーバーが使用されてもよい。
画像処理装置１２は、例えば用紙に印刷を行う印刷装置であってもよく、原稿を読み取るスキャナーでもよい。また、画像処理装置１２は、印刷装置とスキャナーを有する複合機でもよい。

ここで、本実施形態では、画像処理として、印刷の処理が用いられる場合を示す。本実施形態では、画像処理装置１２は印刷装置である。
また、情報処理装置１１および画像処理装置１２は、例えば、ユーザー３１を含む複数の異なるユーザーによって共有されてもよい。また、画像処理装置１２は、例えば、情報処理装置１１を含む複数の情報処理装置によって共有されてもよい。
なお、画像処理としては、印刷の処理に限られず、スキャナーによる画像の読み込み処理、コピー機能によるコピーの処理などに適用されてもよい。

図２は、実施形態に係る情報処理装置１１の機能ブロックの構成を示す図である。
情報処理装置１１は、第１入力部１１１と、第１出力部１１２と、第１通信部１１３と、第１記憶部１１４と、第１検出部１１５と、第１制御部１１６を備える。
第１入力部１１１は、ｎ個の操作入力部として、第１操作入力部１３１－１、第２操作入力部１３１－２、・・・、第ｎ操作入力部１３１－ｎを備える。ここで、ｎは、２以上の整数を表す。
第１出力部１１２は、ｍ個の通知部として、第１通知部１５１－１、第２通知部１５１－２、・・・、第ｍ通知部１５１－ｍを備える。ここで、ｍは、２以上の整数を表す。
なお、ｎとｍとは、同じ値であってもよく、あるいは、異なる値であってもよい。
第１検出部１１５は、音レベル検出部１７１と、被携帯検出部１７２を備える。
第１制御部１１６は、入力情報取得部１９１と、指示取得部１９２と、画像処理要求部１９３と、画像処理結果取得部１９４と、通知選択部１９５を備える。

本実施形態において、情報処理装置１１では、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）が第１記憶部１１４に記憶された所定のプログラムを実行することで、各種の処理を行う。本実施形態では、このようなプログラムとして、画像処理装置１２によって行われる画像処理を制御するアプリケーションのプログラム、および、当該画像処理に関する情報を通知する態様を制御するアプリケーションのプログラムが含まれる。なお、これらのプログラムは、例えば、別体のプログラムであってもよく、または、一体のプログラムとして構成されてもよい。また、これらのプログラムは、例えば、あらかじめ、または、任意のタイミングで、情報処理装置１１にインストールされる。

第１入力部１１１は、各種の情報の入力を行う入力インターフェイスである。
第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのそれぞれは、それぞれの種類の伝達手段を用いて、ユーザー３１によって行われる操作入力を受け付ける。
なお、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのそれぞれは、任意の伝達手段を用いて操作入力を受け付けてもよい。また、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのそれぞれは、互いに異なる伝達手段を用いて操作入力を受け付けてもよく、または、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのうちの２以上が、同じ伝達手段を用いて操作入力を受け付けてもよい。

本実施形態では、第１操作入力部１３１－１は、伝達手段として音声を用いて、操作入力を受け付ける。例えば、第１操作入力部１３１－１は、マイクを有しており、ユーザー３１によって発せられる音声の情報を入力する。この場合、当該音声の内容が操作の内容に変換される。
本実施形態では、第２操作入力部１３１－２は、伝達手段として手動の操作を用いて、操作入力を受け付ける。例えば、第２操作入力部１３１－２は、キーボード、マウス、またはタッチパネルなどの操作部を有しており、ユーザー３１によって当該操作部が操作された内容の情報を入力する。
本実施形態では、第３操作入力部１３１－３は、伝達手段として撮像した画像を用いて、操作入力を受け付ける。例えば、第３操作入力部１３１－３は、カメラを有しており、ユーザー３１を撮像した画像の情報を入力する。この場合、当該画像に映るユーザー３１の動きまたは姿勢などが操作の内容に変換される。ユーザー３１の動きまたは姿勢などは、ジェスチャーと呼ばれてもよい。

ここで、例えば、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのそれぞれによって、操作入力を受け付けるための情報を取得する機器については、情報処理装置１１に備えられずに、情報処理装置１１の外部に設けられてもよい。
例えば、音声の情報を取得するマイク、手動の操作の情報を取得する操作部、または、画像の情報を取得するカメラなどは、情報処理装置１１に備えられずに、情報処理装置１１の外部に設けられてもよい。この場合、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのそれぞれは、情報処理装置１１の外部に設けられたそれぞれの種類の機器を用いて操作入力を行う。

なお、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのそれぞれによって操作入力を受け付ける伝達手段の種類は、任意に割り当てられてもよく、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのそれぞれの番号については一例であって任意の番号であってもよい。つまり、伝達手段としての音声、手動、画像などは、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのうちの任意の番号の操作入力部に割り当てられてもよい。

第１出力部１１２は、各種の情報を出力する出力インターフェイスである。
第１通知部１５１－１～第ｍ通知部１５１－ｍのそれぞれは、それぞれの種類の伝達手段を用いて、ユーザー３１に対して通知を行う。当該通知の内容は、例えば、画像処理に関する内容であり、当該画像処理の結果に関する内容であってもよい。
なお、第１通知部１５１－１～第ｍ通知部１５１－ｍのそれぞれは、任意の伝達手段を用いて通知を行ってもよい。また、第１通知部１５１－１～第ｍ通知部１５１－ｍのそれぞれは、互いに異なる伝達手段を用いて通知を行ってもよく、または、第１通知部１５１－１～第ｍ通知部１５１－ｍのうちの２以上が、同じ伝達手段を用いて通知を行ってもよい。

本実施形態では、第１通知部１５１－１は、伝達手段として音声を用いて、通知を行う。例えば、第１通知部１５１－１は、スピーカーを有しており、当該スピーカーから通知内容を示す音声を出力することで、当該通知内容の通知を行う。
本実施形態では、第２通知部１５１－２は、伝達手段として画面表示を用いて、通知を行う。例えば、第２通知部１５１－２は、画面を有しており、当該画面に通知内容を示す情報を表示出力することで、当該通知内容の通知を行う。
本実施形態では、第３通知部１５１－３は、伝達手段として振動を用いて、通知を行う。例えば、第３通知部１５１－３は、振動機を有しており、当該振動機によって通知内容を示す情報に応じた振動を発生することで、当該通知内容の通知を行う。

ここで、例えば、第１通知部１５１－１～第ｍ通知部１５１－ｍのそれぞれによって、通知内容を示す情報を出力する機器については、情報処理装置１１に備えられずに、情報処理装置１１の外部に設けられてもよい。
例えば、音声を出力するスピーカー、情報を表示出力する画面、または、振動を発生する振動機などは、情報処理装置１１に備えられずに、情報処理装置１１の外部に設けられてもよい。この場合、第１通知部１５１－１～第ｍ通知部１５１－ｍのそれぞれは、情報処理装置１１の外部に設けられたそれぞれの種類の機器を用いて通知を行う。

なお、第１通知部１５１－１～第ｎ通知部１５１－ｎのそれぞれによって通知を行う伝達手段の種類は、任意に割り当てられてもよく、第１通知部１５１－１～第ｎ通知部１５１－ｎのそれぞれの番号については一例であって任意の番号であってもよい。つまり、音声、画像、振動などは、第１通知部１５１－１～第ｎ通知部１５１－ｎのうちの任意の番号の操作入力部に割り当てられてもよい。

第１通信部１１３は、他の装置と通信を行うインターフェイスである。
第１記憶部１１４は、各種の情報を記憶するメモリーである。
第１検出部１１５は、各種の情報を検出するセンサーである。
音レベル検出部１７１は、音の音量レベルを検出する。
被携帯検出部１７２は、情報処理装置１１が人間によって携帯されている状態を検出する。

第１制御部１１６は、プロセッサー等で構成され、各種の制御を行うコントローラーである。
入力情報取得部１９１は、第１入力部１１１によって入力される情報を取得する。入力情報取得部１９１は、例えば、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのそれぞれによって受け付けられる操作入力の情報を取得する。
指示取得部１９２は、入力情報取得部１９１によって取得された情報に基づいて、指示を受け付ける。本実施形態では、当該指示は、画像処理に関する指示である。指示取得部１９２は、必要に応じて、音声認識サーバー１３との間で情報のやり取りを行う。
画像処理要求部１９３は、指示取得部１９２によって取得された指示に基づいて、画像処理装置１２に対して画像処理の要求を行う。
画像処理結果取得部１９４は、画像処理装置１２によって行われた画像処理の処理結果に関する情報を取得する。なお、画像処理の処理結果としては、例えば、画像処理の最終的な結果ばかりでなく、画像処理の途中の結果を含んでもよい。
通知選択部１９５は、通知を行う態様を選択する。

図３は、実施形態に係る画像処理装置１２の機能ブロックの構成を示す図である。
画像処理装置１２は、第２入力部２１１と、第２出力部２１２と、第２通信部２１３と、第２記憶部２１４と、画像処理部２１５と、第２制御部２１６を備える。
第２制御部２１６は、要求受付部２３１と、画像処理制御部２３２と、画像処理結果通知部２３３を備える。

第２入力部２１１は、画像処理装置１２のユーザーにより操作される操作部を有する。当該操作部は、例えば、キーなどであってもよい。
第２出力部２１２は、情報を表示する画面、および、音を出力するスピーカーなどを有する。
なお、第２入力部２１１と第２出力部２１２の画面とが、タッチパネルにより、一体化されてもよい。
第２通信部２１３は、他の装置と通信を行うインターフェイスである。
第２記憶部２１４は、各種の情報を記憶するメモリーである。
画像処理部２１５は、所定の画像処理を実行する。本実施形態では、画像処理部２１５は、印刷処理を実行し、例えば、印刷対象の画像を紙などの媒体に印刷する処理を実行する。

第２制御部２１６は、プロセッサー等で構成され、各種の制御を行うコントローラーである。
要求受付部２３１は、情報処理装置１１から要求を受け付ける。当該要求は、例えば、画像処理の要求である。また、当該要求には、例えば、画像処理の設定内容が含まれてもよい。
画像処理制御部２３２は、要求受付部２３１によって受け付けられた要求に基づいて、画像処理部２１５を制御して、画像処理部２１５に画像処理を実行させる。
画像処理結果通知部２３３は、画像処理の処理結果を情報処理装置１１に通知する。なお、画像処理の処理結果としては、例えば、画像処理の最終的な処理結果ばかりでなく、画像処理の途中の結果を含んでもよい。

ここで、本実施形態では、説明の便宜上、情報処理装置１１のユーザー３１と、画像処理装置１２のユーザーとは、共通である場合を示す。なお、これらのユーザーは、異なってもよい。

図４は、実施形態に係る音声認識サーバー１３の機能ブロックの構成を示す図である。
音声認識サーバー１３は、第３入力部３１１と、第３出力部３１２と、第３通信部３１３と、第３記憶部３１４と、第３制御部３１５を備える。
第３制御部３１５は、音声情報受付部３３１と、音声認識部３３２と、音声認識結果通知部３３３を備える。

第３入力部３１１は、音声認識サーバー１３の管理者により操作される操作部を有する。当該操作部は、例えば、キーボードあるいはマウスなどであってもよい。
第３出力部３１２は、情報を表示する画面、および、音を出力するスピーカーなどを有する。
第３通信部３１３は、他の装置と通信を行うインターフェイスである。
第３記憶部３１４は、各種の情報を記憶するメモリーである。

第３制御部３１５は、プロセッサー等で構成され、各種の制御を行うコントローラーである。
音声情報受付部３３１は、情報処理装置１１から音声の情報を受け付ける。
音声認識部３３２は、音声情報受付部３３１によって受け付けられた音声の情報について、当該音声を認識する処理を行う。当該処理は、当該音声を解析して、例えば、当該音声によって伝えられる内容を特定する。本実施形態では、当該内容は、指示の内容である。また、当該処理は、例えば、当該音声を発した人間を識別する処理などを含んでもよい。
音声認識結果通知部３３３は、音声認識部３３２によって行われた処理の結果に関する情報を情報処理装置１１に通知する。

図５は、実施形態に係る対応情報１０１１の例を示す図である。
本実施形態では、対応情報１０１１は、情報処理装置１１の第１記憶部１１４に記憶されている。対応情報１０１１は、例えば、第１記憶部１１４に、デフォルトの設定として、あらかじめ情報処理装置１１などに記憶されてもよく、または、任意のタイミングで情報処理装置１１などに記憶されてもよい。対応情報１０１１は、アプリケーションによって初期的に設定される内容であってもよい。また、第１記憶部１１４に記憶された対応情報１０１１は、例えば、ユーザー３１の操作に応じて、または、情報処理装置１１によって自動的に、書き換え、または、消去されてもよい。
また、対応情報１０１１に規定される対応のそれぞれは、例えば、情報処理装置１１において、常に使用される状態で管理されてもよく、または、使用される状態と使用されない状態との切り替えが可能に管理されてもよい。当該切り替えは、例えば、ユーザー３１により行われる操作に応じて行われてもよく、または、情報処理装置１１などの装置により自動的に行われてもよい。

本実施形態では、対応情報１０１１は、条件と、通知態様とを対応付けて格納する。
条件は、様々な条件であってもよく、例えば、操作入力の態様を含んでもよい。
通知態様は、様々な通知の態様であってもよい。

図５の例を示す。
音声で操作入力という条件と、音声で通知という通知態様とが対応付けられている。これは、ユーザー３１によって音声で操作入力が行われた場合には、音声で通知する態様を用いるという対応付けである。ここで音声は、音声そのものでも、音声を処理した音声データでもよい。音声はそれによって表現される情報を含むものである。以降、音声、もしくは音声データを単に音声と称する。
また、手動で操作入力という条件と、表示で通知という通知態様とが対応付けられている。これは、ユーザー３１によって手動で操作入力が行われた場合には、表示で通知する態様を用いるという対応付けである。
また、画像で操作入力という条件と、音声と表示で通知という通知態様とが対応付けられている。これは、ユーザー３１によって画像で操作入力が行われた場合には、音声と表示との両方で通知する態様を用いるという対応付けである。なお、画像で操作入力を行う態様としては、例えば、画像に写されたユーザー３１の動きまたは姿勢などに応じた操作入力を行う態様が用いられてもよい。

ここで、説明の便宜上、図５には、条件と通知態様との対応付けの例を示したが、様々な対応付けが用いられてもよい。
例えば、条件としては、操作入力の態様ばかりでなく、ユーザー３１を識別する情報、画像処理装置１２による画像処理の結果、情報処理装置１１における所定の状況、時間、過去の履歴、または、背景の音の状況などの１以上の要素に関する条件が用いられてもよい。また、１つの条件は、例えば、１つの要素に関する条件であってもよく、または、２以上の要素が組み合わせられた条件であってもよい。
また、通知態様としては、例えば、音声または表示などの通知手法のうちの１つの通知手法による態様が用いられてもよく、または、２以上の通知手法が組み合わせられた通知態様が用いられてもよい。

図６は、実施形態に係る画像処理システム１において行われる処理のシーケンスを示す図である。
図６には、ユーザー３１と、情報処理装置１１と、画像処理装置１２と、音声認識サーバー１３を模式的に示してある。
処理Ｔ１～処理Ｔ７について説明する。

処理Ｔ１
ユーザー３１は、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのうちの１以上を用いて、操作入力を行う。
情報処理装置１１は、入力情報取得部１９１によって、当該操作入力に応じた入力情報を取得する。
ここでは、当該操作入力が、音声による操作入力であるとして説明する。

処理Ｔ２
情報処理装置１１は、入力情報取得部１９１によって音声の入力情報が取得された場合には、当該音声の情報を第１通信部１１３によって音声認識サーバー１３に送信する。
音声認識サーバー１３は、情報処理装置１１から当該音声の情報を第３通信部３１３によって受信する。

処理Ｔ３
音声認識サーバー１３は、音声情報受付部３３１によって、第３通信部３１３によって受信された当該音声の情報を受け付ける。音声認識サーバー１３は、音声認識部３３２によって、当該音声の情報を認識する。音声認識サーバー１３は、当該音声の情報の認識の結果を第３通信部３１３によって情報処理装置１１に送信する。
情報処理装置１１は、音声認識サーバー１３から当該音声の情報の認識の結果を第１通信部１１３によって受信する。

処理Ｔ４
情報処理装置１１は、第１通信部１１３によって受信された当該音声の情報の認識の結果に基づいて、指示取得部１９２によって、当該音声の情報に対応する指示を取得する。情報処理装置１１は、指示取得部１９２によって取得された指示に基づいて、画像処理要求部１９３によって、当該指示の内容を表す情報を第１通信部１１３によって画像処理装置１２に送信することで、当該指示に応じた画像処理を画像処理装置１２に要求する。
画像処理装置１２は、情報処理装置１１から当該指示の内容を表す情報を第２通信部２１３によって受信する。

ここで、情報処理装置１１は、例えば、画像処理要求部１９３によって、印刷対象となるデータを第１通信部１１３によって画像処理装置１２に送信する。
なお、当該データは、例えば、情報処理装置１１以外の装置に記憶されていてもよい。この場合、情報処理装置１１は、例えば、画像処理要求部１９３によって、印刷対象となるデータが画像処理装置１２によって取得されるように制御を行う。
一例として、情報処理装置１１は、画像処理要求部１９３によって、印刷対象となるデータの記憶場所を示す情報を第１通信部１１３によって画像処理装置１２に送信してもよい。この場合、画像処理装置１２は、要求受付部２３１によって、当該記憶場所を示す情報に基づいて、当該記憶場所から当該印刷対象となるデータを第２通信部２１３により受信する。当該記憶場所は、例えば、情報処理装置１１以外の任意の装置であってもよい。
他の一例として、情報処理装置１１は、画像処理要求部１９３によって、印刷対象となるデータの記憶場所に対して、当該印刷対象となるデータを画像処理装置１２に送信するように指示する。この場合、当該記憶場所から画像処理装置１２に当該印刷対象となるデータが送信される。当該記憶場所は、例えば、情報処理装置１１以外の任意の装置であってもよい。

処理Ｔ５
画像処理装置１２は、第２通信部２１３によって受信された情報に基づいて、要求受付部２３１によって、画像処理の要求を受け付ける。画像処理装置１２は、要求受付部２３１によって受け付けられた画像処理の要求に基づいて、画像処理制御部２３２によって画像処理部２１５を制御して、画像処理を実行する。画像処理装置１２は、画像処理結果通知部２３３によって、当該画像処理の結果を表す情報を第２通信部２１３によって情報処理装置１１に送信することで、当該画像処理結果の情報を情報処理装置１１に通知する。
情報処理装置１１は、画像処理装置１２から当該画像処理の結果を表す情報を第１通信部１１３によって受信する。
情報処理装置１１は、第１通信部１１３によって受信された情報に基づいて、画像処理結果取得部１９４によって、当該画像処理の結果を表す情報を取得する。

処理Ｔ６
情報処理装置１１は、通知選択部１９５によって、対応情報１０１１に基づいて、通知態様を選択する。

処理Ｔ７
情報処理装置１１は、画像処理結果取得部１９４によって取得された情報に基づいて、通知選択部１９５によって選択された通知態様を用いて、当該画像処理の結果を表す情報をユーザー３１に対して通知する。
本実施形態では、当該通知態様としては、第１通知部１５１－１～第ｍ通知部１５１－ｍのうちの１以上の通知部による通知態様が用いられる。情報処理装置１１では、例えば、通知選択部１９５によって、画像処理装置１２によって行われた画像処理の結果に基づいて、選択された通知部に通知を行うための信号を送信する。

ここで、本実施形態では、情報処理装置１１において、音声による操作入力があった場合について説明したが、他の操作入力があった場合には、処理Ｔ１～処理Ｔ４の代わりに、次のような処理が行われる。
すなわち、情報処理装置１１は、入力情報取得部１９１によって、当該操作入力に応じた入力情報を取得する。ここでは、当該操作入力が、手動などによる操作入力であるとして説明する。
処理Ｔ１において、情報処理装置１１は、入力情報取得部１９１によって取得された入力情報に基づいて、指示取得部１９２によって、当該入力情報に対応する指示を取得する。
処理Ｔ４において、情報処理装置１１は、指示取得部１９２によって取得された指示に基づいて、画像処理要求部１９３によって、当該指示の内容を表す情報を第１通信部１１３によって画像処理装置１２に送信することで、当該指示に応じた画像処理を画像処理装置１２に要求する。
画像処理装置１２は、情報処理装置１１から当該指示の内容を表す情報を第２通信部２１３によって受信する。
ここで、処理Ｔ２および処理Ｔ３は行われない。
そして、処理Ｔ５以降の処理が行われる。

図７は、実施形態に係る情報処理装置１１において行われる処理の手順の一例を示す図である。
図７の例では、情報処理装置１１において、ユーザー３１によって音声操作が行われて、当該音声操作に応じた指示が受け付けられたときには、当該指示に対応する結果の情報を、音声により通知することが規定されている場合を示す。この規定の内容は、対応情報１０１１によって記憶される。
また、図７の例では、情報処理装置１１において、ユーザー３１によって手動操作が行われて、当該手動操作に応じた指示が受け付けられたときには、当該指示に対応する結果の情報を、表示により通知することが規定されている場合を示す。この規定の内容は、対応情報１０１１によって記憶される。

ステップＳ１
情報処理装置１１では、ユーザー３１が、音声操作に対応する第１操作入力部１３１－１または手動操作に対応する第２操作入力部１３１－２のうちのいずれか一方により、操作入力を行う。
情報処理装置１１では、入力情報取得部１９１によって、当該操作入力に応じた入力情報を取得する。
そして、情報処理装置１１では、指示取得部１９２によって、当該入力情報に応じた指示を取得する。ここで、当該入力情報が音声の情報である場合には、情報処理装置１１では、指示取得部１９２によって、音声認識サーバー１３と通信することで、当該音声の情報に応じた指示を取得する。
そして、ステップＳ２の処理へ移行する。

ステップＳ２
情報処理装置１１では、画像処理要求部１９３によって、画像処理装置１２に対して当該指示に応じた画像処理の要求を行うことで、当該画像処理を開始させる。
そして、ステップＳ３の処理へ移行する。

ステップＳ３
情報処理装置１１では、画像処理要求部１９３によって、印刷対象のデータを第１通信部１１３により画像処理装置１２に送信する。
そして、ステップＳ４の処理へ移行する。

ステップＳ４
情報処理装置１１では、画像処理結果取得部１９４によって、画像処理装置１２に要求した画像処理が終了したか否かを判定する。
この判定の結果、情報処理装置１１では、画像処理結果取得部１９４によって、画像処理装置１２に要求した画像処理が終了したと判定した場合（ステップＳ４：ＹＥＳ）、ステップＳ５の処理へ移行する。
一方、この判定の結果、情報処理装置１１では、画像処理結果取得部１９４によって、画像処理装置１２に要求した画像処理が終了していないと判定した場合（ステップＳ４：ＮＯ）、ステップＳ６の処理へ移行する。

ここで、本実施形態では、情報処理装置１１において、画像処理結果取得部１９４によって、画像処理装置１２から画像処理の終了結果に関する情報を受信した場合に、画像処理が終了したと判定する。
一方、本実施形態では、情報処理装置１１において、画像処理結果取得部１９４によって、画像処理装置１２から画像処理の終了結果に関する情報を受信していない場合に、画像処理が終了していないと判定する。

ステップＳ５
情報処理装置１１では、画像処理結果取得部１９４によって、画像処理装置１２に要求した画像処理が正常に終了したか否かを判定する。
この判定の結果、情報処理装置１１では、画像処理結果取得部１９４によって、画像処理装置１２に要求した画像処理が正常に終了したと判定した場合（ステップＳ５：ＹＥＳ）、ステップＳ７の処理へ移行する。
一方、この判定の結果、情報処理装置１１では、画像処理結果取得部１９４によって、画像処理装置１２に要求した画像処理が正常に終了しなかったと判定した場合（ステップＳ５：ＮＯ）、ステップＳ６の処理へ移行する。

ここで、本実施形態では、説明の便宜上、画像処理が終了したが当該画像処理が正常に終了していない場合は、画像処理が異常に終了した場合であるとする。
また、本実施形態では、画像処理装置１２から情報処理装置１１に通知される画像処理の結果に関する情報は、当該画像処理が正常に終了したか、または、当該画像処理が異常に終了したか、を識別することが可能な情報を含むとする。

ステップＳ６
情報処理装置１１では、画像処理結果取得部１９４によって、画像処理装置１２に要求した画像処理について、エラーのステータスであるか否かを判定する。当該ステータスは、例えば、画像処理装置１２のステータスであってもよい。
この判定の結果、情報処理装置１１では、画像処理結果取得部１９４によって、画像処理装置１２に要求した画像処理について、エラーのステータスであると判定した場合（ステップＳ６：ＹＥＳ）、ステップＳ７の処理へ移行する。
一方、この判定の結果、情報処理装置１１では、画像処理結果取得部１９４によって、画像処理装置１２に要求した画像処理について、エラーのステータスではないと判定した場合（ステップＳ６：ＮＯ）、ステップＳ３の処理へ移行する。

ここで、本実施形態では、ステップＳ５の処理からステップＳ６の処理へ移行してきた場合には、すべて、エラーのステータスであるとする。つまり、画像処理が異常に終了したことは、エラーの一種であるとする。
また、本実施形態では、ステップＳ４の処理からステップＳ６の処理へ移行してきた場合には、エラーのステータスである場合があり得るとする。この場合におけるエラーとしては、様々なエラーが用いられてもよい。例えば、この場合におけるエラーとして、情報処理装置１１から画像処理装置１２への画像処理の要求があったときから所定の時間が経過したときに、当該画像処理が終了していないというエラーが用いられてもよい。当該所定の時間は、タイムアウトの時間となる。

ステップＳ７
情報処理装置１１では、通知選択部１９５によって、今回の画像処理について、音声操作により開始されたか否かを判定する。
この判定の結果、情報処理装置１１では、通知選択部１９５によって、今回の画像処理について、音声操作により開始されたと判定した場合（ステップＳ７：ＹＥＳ）、ステップＳ８の処理へ移行する。
一方、この判定の結果、情報処理装置１１では、通知選択部１９５によって、今回の画像処理について、音声操作により開始されていないと判定した場合（ステップＳ７：ＮＯ）、ステップＳ９の処理へ移行する。図７の例では、画像処理が音声操作により開始されていない場合は、画像処理が手動操作により開始された場合である。

ステップＳ８
情報処理装置１１では、通知選択部１９５によって、音声による通知を選択する。
そして、情報処理装置１１では、音声に対応する第１通知部１５１－１によって、音声を用いて、今回の画像処理の結果に関する情報を出力することで、当該情報をユーザー３１に通知する。
ここで、通知の内容は、様々な内容であってもよく、例えば、今回の画像処理が正常に終了したことを表す内容、または、エラーに関する内容などである。
そして、ステップＳ１０の処理へ移行する。

ステップＳ９
情報処理装置１１では、通知選択部１９５によって、表示による通知を選択する。
そして、情報処理装置１１では、表示に対応する第２通知部１５１－２によって、表示を用いて、今回の画像処理の結果に関する情報を出力することで、当該情報をユーザー３１に通知する。
ここで、通知の内容は、様々な内容であってもよく、例えば、今回の画像処理が正常に終了したことを表す内容、または、エラーに関する内容などである。
そして、ステップＳ１０の処理へ移行する。

ステップＳ１０
情報処理装置１１では、画像処理結果取得部１９４によって、すべての画像処理が終了したか否かを判定する。
この判定の結果、情報処理装置１１では、画像処理結果取得部１９４によって、すべての画像処理が終了したと判定した場合（ステップＳ１０：ＹＥＳ）、本フローの処理を終了する。
一方、この判定の結果、情報処理装置１１では、画像処理結果取得部１９４によって、少なくとも一部の画像処理が終了していないと判定した場合（ステップＳ１０：ＮＯ）、ステップＳ３の処理へ移行する。

なお、エラーとしては、例えば、画像処理の続行が不可能なエラーと、画像処理の続行が可能なエラーがあり得る。
具体例として、画像処理の途中で、画像処理装置１２のリセットが必要となるエラーが発生した場合、通常は、当該画像処理の当該途中からの続行は不可能となる。
また、具体例として、画像処理として印刷をしている途中で、紙切れのエラーが発生した場合、当該画像処理の当該途中からの続行は可能である。

ここで、本実施形態では、情報処理装置１１から画像処理装置１２に印刷対象となるデータが所定部分ずつ順次送信され、画像処理装置１２において、当該所定部分ずつ順次印刷を行う場合を示した。
これに対して、他の構成例として、情報処理装置１１から画像処理装置１２に印刷対象となるデータのすべてが送信された後に、画像処理装置１２において、当該印刷データの印刷を行ってもよい。この場合、例えば、（ステップＳ６：ＮＯ）のときに、ステップＳ３の処理の代わりに、ステップＳ４の処理へ移行してもよい。また、この場合に、例えば、ステップＳ１０の処理が設けられず、ステップＳ８の処理の終了後およびステップＳ９の処理の終了後に、本フローの処理が終了させられてもよい。

このように、本実施形態に係る情報処理装置１１では、通知態様を制御するアプリケーションは、印刷アプリケーションの操作が、音声で開始されたか、または、音声以外の操作で開始されたかを判定する。なお、図７の例では、説明の便宜上、音声以外の操作として、手動操作が例示されている。
情報処理装置１１では、印刷処理中における画像処理装置１２のステータスをチェックする。ここで、本実施形態では、印刷処理中とは、印刷データを画像処理装置１２に送付したときから、当該印刷データの印刷が画像処理装置１２において終了するまでの期間を表す。
情報処理装置１１では、印刷処理中のステータスに基づいて、エラーが発生したことを判定した場合、当該エラーの内容を通知する。この際、情報処理装置１１では、音声により操作が開始された場合には音声で通知を行い、他の場合には画面表示で通知を行う。
また、情報処理装置１１では、印刷終了時においても、音声により操作が開始された場合には音声で印刷終了の通知を行い、他の場合には画面表示で印刷終了の通知を行う。なお、情報処理装置１１では、ステータスの変化に基づいて、印刷終了を判定する。例えば、画像処理装置１２のステータスは、エラー無しの印刷中である場合にはビジーの状態となり、印刷終了である場合にはアイドルの状態となる。

ここで、本実施形態では、情報処理装置１１から音声認識サーバー１３に音声認識を要求する構成を示したが、他の例として、画像処理装置１２から音声認識サーバー１３に音声認識を要求する構成が用いられてもよい。
例えば、情報処理装置１１では、指示取得部１９２によって、入力情報取得部１９１により取得された音声の情報を第１通信部１１３により画像処理装置１２に送信する。画像処理装置１２では、情報処理装置１１から当該音声の情報を第２通信部２１３により受信する。画像処理装置１２では、要求受付部２３１によって、受信された音声の情報を第２通信部２１３により音声認識サーバー１３に送信する。画像処理装置１２では、要求受付部２３１によって、音声認識サーバー１３から当該音声の情報の認識の結果を表す情報を第２通信部２１３により受信する。画像処理装置１２では、要求受付部２３１によって、当該情報に基づいて、画像処理に関する要求を受け付ける。

さらに、本実施形態では、ユーザー３１により行われる音声による操作入力を情報処理装置１１によって受け付ける構成を示したが、他の例として、ユーザー３１により行われる音声による操作入力を画像処理装置１２によって受け付ける構成が用いられてもよい。
例えば、画像処理装置１２では、第２入力部２１１によって、ユーザー３１により行われる音声による操作入力を受け付ける。画像処理装置１２では、要求受付部２３１によって、受け付けられた音声の情報を第２通信部２１３により音声認識サーバー１３に送信する。画像処理装置１２では、要求受付部２３１によって、音声認識サーバー１３から当該音声の情報の認識の結果を表す情報を第２通信部２１３により受信する。画像処理装置１２では、要求受付部２３１によって、当該情報に基づいて、画像処理に関する要求を受け付ける。

図５に示されるような条件と通知態様との対応について、他の例を示す。
一例として、情報処理装置１１において、音声により通知が実行されるときにおける情報処理装置１１の周囲の雑音に応じて、出力される当該音声の音量レベルを変化させる制御が行われてもよい。この場合、例えば、当該雑音のレベルが条件となり、通知に使用される音声の音量レベルが通知態様となる。なお、音声の音量レベルは、単に音量などと呼ばれてもよい。
具体例として、情報処理装置１１では、音レベル検出部１７１によって、周囲の音のレベルを検出する。そして、情報処理装置１１では、通知選択部１９５によって、検出された音のレベルが小さいほど通知の音声の音量レベルを小さくし、検出された音のレベルが大きいほど通知の音声の音量レベルを大きくする。
または、情報処理装置１１では、通知選択部１９５によって、検出された音のレベルと所定の閾値とを比較して、検出された音のレベルが当該閾値以下である場合には通知の音声の音量レベルを所定の小さいレベルに設定し、検出された音のレベルが当該閾値を超える場合には通知の音声の音量レベルを所定の大きいレベルに設定する。なお、このような閾値を２以上設けて、通知の音声の音量レベルを３段階以上で切り替えることが行われてもよい。
このような対応が用いられると、周囲の雑音が静かである場合には通知の音声の音量レベルが小さくなり、周囲の雑音が騒がしい場合には通知の音声の音量レベルが大きくなる。

他の一例として、情報処理装置１１において、通知選択部１９５によって、検出された音のレベルが所定の閾値以下である場合には音声を用いて通知を行い、検出された音のレベルが当該閾値を超える場合には振動と画面表示の一方または両方を用いて通知を行う態様が用いられる制御が行われてもよい。

ここで、音声に含まれる雑音としては、例えば、ユーザー３１を含む人間の音声以外の音が用いられてもよく、または、ユーザー３１の音声以外の音が用いられてもよい。
また、音声に含まれる雑音としては、例えば、所定の周波数の領域の音が用いられてもよい。当該所定の周波数の領域としては、例えば、人間の音声の周波数の領域のうちで主な領域を外れた領域が用いられてもよい。
なお、雑音は、騒音または背景音などと呼ばれてもよい。

具体例として、通知選択部１９５は、音声による操作入力に基づいて、当該音声に含まれる雑音のレベルが第１閾値を超える場合、音声以外の伝達手段を用いる通知態様を選択する。
ここで、第１閾値としては、任意の値が用いられてもよく、例えば、音声による通知に許容される雑音のレベルの上限値などが用いられてもよい。一例として、雑音のレベルが大きい場合には、音声による通知よりも、画面表示などによる通知の方が好ましいと考えられる。

具体例として、通知選択部１９５は、音声による操作入力に基づいて、当該音声のレベルが第２閾値未満である場合、第３閾値未満のレベルの音声を用いる通知態様を選択する。
ここで、第２閾値としては、任意の値が用いられてもよい。一例として、操作入力の音声の音量レベルが小さい場合には、小さい音声による通知によってユーザー３１に通知内容を伝えることが可能であると考えられる。
また、第３閾値としては、任意の値が用いられてもよく、例えば、第２閾値と同じ値が用いられてもよく、または、第２閾値とは異なる値が用いられてもよい。
また、第３閾値未満のレベルの音声としては、任意のレベルの音声が用いられてもよい。第３閾値未満のレベルの音声としては、雑音のレベルに応じて、変化させられてもよい。第３閾値未満のレベルの音声としては、例えば、雑音のレベルよりも大きいレベルの音声が用いられてもよい。

具体例として、通知選択部１９５は、音声による操作入力に基づいて、当該音声のレベルが第２閾値未満である場合、音声と音声以外の伝達手段との両方を用いる通知態様を選択する。
一例として、操作入力の音声の音量レベルが小さい場合には、小さい音声による通知によってユーザー３１に通知内容を伝えることが可能であると考えられるが、併せて、画面表示などによる通知によってユーザー３１に通知内容を確実に伝えることが可能であると考えられる。

一例として、情報処理装置１１において、画像処理の開始の契機となる操作入力の種類にかかわらず、情報処理装置１１が人間の身に着けられているという条件が満たされると判定した場合には、振動を用いて通知を行う態様が用いられる制御が行われてもよい。当該人間は、例えば、ユーザー３１である。操作入力の種類は、音声による操作入力、手動による操作入力などの種類を表す。
また、この場合、情報処理装置１１は、例えば、人間の身に着けられることが可能な携帯機器である。情報処理装置１１では、被携帯検出部１７２によって、情報処理装置１１が人間の身に着けられているか否かを判定する。被携帯検出部１７２としては、様々なセンサーが用いられてもよい。

ここで、情報処理装置１１が人間の身に着けられているという条件としては、例えば、情報処理装置１１が特定の人間の身に着けられているという条件が用いられてもよい。当該特定の人間は、ユーザー３１である。この場合、情報処理装置１１では、ある人間が特定の人間であるか否かを判定する機能を有する。

なお、情報処理装置１１において、通知の内容と振動のパターンとが対応付けられてもよい。例えば、正常終了を通知する振動のパターンと、異常終了を通知する振動のパターンとが、異なっていてもよい。これにより、情報処理装置１１を着用しているユーザー３１は、画面表示による通知を受けなくても、振動のパターンによって、エラーの有無を把握することができる。このことは、例えば、ユーザー３１が画面を見ることができない状況である場合に、特に有効である。

一例として、情報処理装置１１において、画像処理の開始の契機となる操作入力の種類にかかわらず、情報処理装置１１が人間の身に着けられていないという条件が満たされると判定した場合には、音声を用いて通知を行う態様が用いられる制御が行われてもよい。

一例として、情報処理装置１１において、画像処理の開始の契機となる操作入力の種類にかかわらず、人間が情報処理装置１１を見ているという条件が満たされると判定した場合には、画面表示を用いて通知を行う態様が用いられる制御が行われてもよい。当該人間は、例えば、ユーザー３１である。
ここで、情報処理装置１１では、例えば、情報処理装置１１の外界を撮像するカメラを備え、当該カメラにより撮像された画像に基づいて、人間が情報処理装置１１を見ているか否かを判定する。この判定は、例えば、当該画像に映る人間の目の視線を検出した結果に基づいて行われてもよい。当該カメラは、例えば、第３操作入力部１３１－３～第ｎ操作入力部１３１－ｎのうちのいずれかが有してもよい。
なお、人間が情報処理装置１１を見ているという条件としては、例えば、人間が情報処理装置１１を注視しているという条件が用いられてもよい。具体例として、情報処理装置１１において、人間が情報処理装置１１を連続的または断続的に見ている時間が所定の閾値を超えた場合に、当該人間が情報処理装置１１を注視していると判定する態様が用いられてもよい。

ここで、人間が情報処理装置１１を見ているという条件としては、例えば、特定の人間が情報処理装置１１を見ているという条件が用いられてもよい。当該特定の人間は、ユーザー３１である。この場合、情報処理装置１１では、ある人間が特定の人間であるか否かを判定する機能を有する。

一例として、情報処理装置１１において、画像処理の開始の契機となる操作入力の種類にかかわらず、異常の通知が行われるという条件が満たされると判定した場合には、音声および画面表示の両方を用いて通知を行う態様が用いられる制御が行われてもよい。

一例として、情報処理装置１１において、情報処理装置１１が所定のモードであるという条件が満たされると判定した場合には、音声による操作入力によって画像処理が開始されたときにおいても、画面表示と振動の一方または両方を用いて通知を行う態様が用いられる制御が行われてもよい。
ここで、所定のモードは、例えば、音の出力をオフにするモードであってもよく、いわゆるマナーモードであってもよい。当該所定のモードでは、例えば、振動による通知をオンにしてもよい。

一例として、情報処理装置１１において、操作入力が行われた伝達手段の種類と同じ種類の伝達手段を用いて通知を行う態様が用いられる制御が行われてもよい。この場合、例えば、情報処理装置１１において、操作入力が行われた伝達手段の種類と異なる種類の伝達手段を用いた通知は行われなくてもよい。ここで、伝達手段とは、例えば、音声、画面表示などを表す。
一例として、情報処理装置１１において、正常である場合には振動を用いて通知を行い、異常である場合には音声を用いて通知を行う態様が用いられる制御が行われてもよい。
一例として、情報処理装置１１において、ユーザー３１によって設定されたデフォルトの設定に基づいて、所定の伝達手段を用いて通知を行う態様が用いられる制御が行われてもよい。
一例として、情報処理装置１１において、通知選択部１９５によって、ユーザー３１の音声に基づいて行われるユーザー３１の識別の結果を含む条件に応じて、通知態様を選択する構成が用いられてもよい。ユーザー３１の識別は、例えば、情報処理装置１１において行われてもよく、または、音声認識サーバー１３において行われてもよい。

通知のスヌーズ機能について説明する。
情報処理装置１１では、通知に関して、スヌーズ機能を備えてもよい。

音声を用いた通知が行われたときのスヌーズ機能について説明する。
情報処理装置１１では、音声で通知を行った後に、ユーザー３１のリアクションが検出されなかった場合、所定時間後に音声などによる通知を繰り返して行う。
ここで、ユーザー３１のリアクションは、例えば、ユーザー３１によって行われる音声による応答、または、ユーザー３１によって行われる画面のタップなどである。このようなユーザー３１のリアクションは、例えば、第１操作入力部１３１－１～第ｎ操作入力部１３１－ｎのうちの１以上によって、検出され得る。

画面表示を用いた通知が行われたときのスヌーズ機能について説明する。
例えば、情報処理装置１１では、画面表示で通知を行った後に、ユーザー３１のリアクションが検出されなかった場合、所定時間後に音声による通知を行う。
ここで、ユーザー３１のリアクションは、例えば、ユーザー３１によって行われる画面のタップなどである。
その後、情報処理装置１１では、音声で通知を行った後に、ユーザー３１のリアクションが検出されなかった場合、所定時間後に音声による通知を繰り返して行う。

なお、スヌーズ機能において、ある回数の通知と次の回数の通知との間の時間間隔に相当する所定時間としては、任意の時間が設定されてもよい。当該所定時間は、例えば、一定の時間であってもよく、または、通知の繰り返しの回数に応じて変化する時間であってもよい。一例として、当該所定時間は、通知の繰り返しの回数が多くなるほど、長い時間が設定されてもよい。
また、通知が繰り返される回数としては、任意の回数が設定されてもよい。

音声認識の機能が備えられる装置について、他の例を示す。
例えば、情報処理装置１１が音声認識の機能を備えてもよい。この場合、情報処理装置１１では、入力情報取得部１９１によって取得された音声の情報に基づいて、音声認識を行う。そして、情報処理装置１１では、指示取得部１９２によって、当該音声認識の結果に基づく指示を取得する。
このような構成では、音声認識サーバー１３は用いられなくてもよい。

例えば、画像処理装置１２が音声認識の機能を備えてもよい。この場合、例えば、情報処理装置１１では、指示取得部１９２によって、入力情報取得部１９１により取得された音声の情報を第１通信部１１３により画像処理装置１２に送信する。画像処理装置１２では、情報処理装置１１から当該音声の情報を第２通信部２１３により受信する。画像処理装置１２では、受信された当該音声の情報に基づいて、音声認識を行う。そして、画像処理装置１２では、要求受付部２３１によって、当該音声認識の結果に基づいて、画像処理に関する要求を受け付ける。
このような構成では、音声認識サーバー１３は用いられなくてもよい。

通知選択部１９５によって通知態様を選択する機能が備えられる装置について、他の例を示す。ここでは、説明の便宜上、当該機能を通知態様選択機能と呼んで説明する。
例えば、通知態様選択機能が音声認識サーバー１３に備えられてもよい。この場合、情報処理装置１１は、指示取得部１９２によって、通知態様選択機能による通知態様の選択に必要となる情報を第１通信部１１３により音声認識サーバー１３に送信する。
音声認識サーバー１３は、情報処理装置１１から当該情報を第３通信部３１３により受信し、受信された当該情報に基づいて通知態様選択機能により通知態様を選択し、選択された通知態様を示す情報を第３通信部３１３により情報処理装置１１に送信する。
情報処理装置１１は、音声認識サーバー１３から当該情報を第１通信部１１３により受信し、指示取得部１９２によって、受信された当該情報に基づいて、通知態様を特定する。

例えば、通知態様選択機能が画像処理装置１２に備えられてもよい。この場合、情報処理装置１１は、指示取得部１９２によって、通知態様選択機能による通知態様の選択に必要となる情報を第１通信部１１３により画像処理装置１２に送信する。
画像処理装置１２は、情報処理装置１１から当該情報を第２通信部２１３により受信し、受信された当該情報に基づいて通知態様選択機能により通知態様を選択し、選択された通知態様を示す情報を第２通信部２１３により情報処理装置１１に送信する。
情報処理装置１１は、画像処理装置１２から当該情報を第１通信部１１３により受信し、指示取得部１９２によって、受信された当該情報に基づいて、通知態様を特定する。

例えば、通知態様選択機能が他の装置に備えられてもよい。当該他の装置は、情報処理装置１１、画像処理装置１２および音声認識サーバー１３とは別の装置である。この場合、当該他の装置は、画像処理システム１に含まれてもよい。
この場合、情報処理装置１１は、指示取得部１９２によって、通知態様選択機能による通知態様の選択に必要となる情報を第１通信部１１３により当該他の装置に送信する。
当該他の装置は、情報処理装置１１から当該情報を受信し、受信された当該情報に基づいて通知態様選択機能により通知態様を選択し、選択された通知態様を示す情報を情報処理装置１１に送信する。
情報処理装置１１は、当該他の装置から当該情報を第１通信部１１３により受信し、指示取得部１９２によって、受信された当該情報に基づいて、通知態様を特定する。

以上のように、本実施形態に係る画像処理システム１では、情報処理装置１１と、画像処理装置１２と、を備え、次のような構成である。
すなわち、情報処理装置１１は、第１操作入力を受け付ける第１操作入力部１３１－１と、第２操作入力を受け付ける第２操作入力部１３１－２と、第１通知を行う第１通知部１５１－１と、第２通知を行う第２通知部１５１－２と、第１操作入力部１３１－１によって受け付けられた第１操作入力と、第２操作入力部１３１－２によって受け付けられた第２操作入力との少なくとも一方に基づいて、画像処理装置１２への指示を取得する指示取得部１９２と、指示取得部１９２によって取得された指示に基づいて、画像処理の要求を画像処理装置１２に対して行う画像処理要求部１９３と、を備える。ここで、第１操作入力は、第１操作入力部１３１－１によって受け付けられる操作入力である。第２操作入力は、第２操作入力部１３１－２によって受け付けられる操作入力である。第１通知は、第１通知部１５１－１によって行われる通知である。第２通知は、第２通知部１５１－２によって行われる通知である。
また、画像処理装置１２は、情報処理装置１１から画像処理の要求を受け付ける要求受付部２３１と、要求受付部２３１によって受け付けられた画像処理を実行する画像処理部２１５と、を備える。
さらに、画像処理システム１は、画像処理装置１２において実行された画像処理に関する情報を通知する先として、情報処理装置１１における第１通知部１５１－１と第２通知部１５１－２の少なくとも一方の選択を行う通知選択部１９５を備える。

例えば、ユーザーが音声で操作する場合には、当該ユーザーがスマートフォンなどの携帯デバイスの画面を注視できない状況、当該ユーザーが携帯デバイスに対して手動による操作ができない状況、または、当該ユーザーがこれらを希望しない状況にある可能性がある。
従来では、このような状況においても、印刷装置において印刷が終了したときまたは印刷処理の途中でエラーが発生したときには、ユーザーは、印刷装置の本体パネルなどの状態を見ること、または、携帯デバイスの画面を見ることでしか、印刷処理の状況を確認することができなかった。これは、ユーザーにとって、印刷装置が遠方にあるときには不可能な制約となり、携帯デバイスの画面を見ることができない状況では印刷処理の実行結果の確認をすることができず、当該ユーザーの利便性に欠ける。
本実施形態に係る画像処理システム１では、ユーザー３１の利便性の良い通知態様で、画像処理に関する通知を行うことができる。
複数の異なる種類の操作入力を受け付ける情報処理装置１１を使用して画像処理装置１２を制御する画像処理システム１において、ユーザー３１に対して望ましいと想定される通知態様で、ユーザー３１に対する応答を行うことができる。本実施形態に係る画像処理システム１では、特に、ユーザー３１によって用いられた操作入力の種類に応じて、望ましいと想定される通知態様で、ユーザー３１への通知を行うことができる。

本実施形態に係る画像処理システム１では、第１操作入力は、音声を用いた操作入力である。
したがって、本実施形態に係る画像処理システム１では、ユーザー３１によって音声を用いて操作入力が行われた場合に、ユーザー３１にとって適切な通知態様で通知を行うことができる。

本実施形態に係る画像処理システム１では、第１通知部は、音声を用いて第１通知を行い、第２通知部は、音声以外の伝達手段を用いて前記第２通知を行う。
したがって、本実施形態に係る画像処理システム１では、音声による通知と、音声以外の伝達手段による通知とを使い分けて、ユーザー３１にとって適切な通知態様で通知を行うことができる。

本実施形態に係る画像処理システム１では、通知選択部１９５は、第１操作入力部１３１－１に入力された音声の情報に基づいて、選択を行う。
したがって、本実施形態に係る画像処理システム１では、ユーザー３１によって音声を用いて操作入力が行われた場合に、例えば、当該音声の内容に基づいて、ユーザー３１にとって適切な通知態様で通知を行うことができる。

本実施形態に係る画像処理システム１では、通知選択部１９５は、第１操作入力部１３１－１に入力された音声の情報に基づいて、音声に含まれる雑音のレベルが第１閾値を超える場合、第２通知部１５１－２を選択する。
したがって、本実施形態に係る画像処理システム１では、ユーザー３１によって音声を用いて操作入力が行われた場合に、当該音声に含まれる雑音のレベルに基づいて、ユーザー３１にとって適切な通知態様で通知を行うことができる。具体例として、操作入力の音声に含まれる雑音のレベルが大きい場合に、音声以外の伝達手段を用いて通知が行われる。

本実施形態に係る画像処理システム１では、通知選択部１９５は、第１操作入力部１３１－１に入力された音声の情報に基づいて、音声のレベルが第２閾値未満である場合、第１通知部１５１－１を選択する。そして、第１通知部１５１－１は、第３閾値未満のレベルの音声を用いて前記第１通知を行う。
したがって、本実施形態に係る画像処理システム１では、ユーザー３１によって音声を用いて操作入力が行われた場合に、当該音声のレベルに基づいて、ユーザー３１にとって適切な通知態様で通知を行うことができる。具体例として、操作入力の音声が小さい場合に、ユーザー３１に聞こえる程度で、小さい音声を用いて通知が行われる。

本実施形態に係る画像処理システム１では、通知選択部１９５は、第１操作入力部１３１－１に入力された音声の情報に基づいて、音声の音量レベルが第２閾値未満である場合、第１通知部と第２通知部との両方を選択する。
したがって、本実施形態に係る画像処理システム１では、ユーザー３１によって音声を用いて操作入力が行われた場合に、当該音声の音量レベルに基づいて、ユーザー３１にとって適切な通知態様で通知を行うことができる。具体襟として、操作入力の音声が小さい場合に、小さい音声を用いて通知が行われるとともに、音声以外の伝達手段を用いて通知が行われる。

本実施形態に係る画像処理システム１では、通知選択部１９５は、第１操作入力部１３１－１によって第１操作入力が受け付けられた場合、第１通知部１５１－１を選択する。
したがって、本実施形態に係る画像処理システム１では、ユーザー３１によって音声を用いて操作入力が行われた場合に、音声による通知態様で通知を行うことができる。
本例では、ユーザー３１によって音声による操作入力が行われた場合には、ユーザー３１によって画面表示を見ることが困難な状況にある可能性があることから、音声による通知を行う。

本実施形態に係る画像処理システム１では、通知選択部１９５は、第１操作入力部１３１－１によって第１操作入力が受け付けられた場合、第２通知部１５１－２は、第２通知を行わない。
したがって、本実施形態に係る画像処理システム１では、ユーザー３１によって音声を用いて操作入力が行われた場合には、音声以外の伝達手段を用いた通知は不要であると推定し、音声以外の伝達手段による通知態様で通知を行わなくてもよい。

なお、例えば、本実施形態に係る画像処理システム１では、音声による通知は、ユーザー３１によって音声を用いて操作入力が行われた場合にだけ行われてもよい。この場合、例えば、不要な音声通知を抑制しつつ、ユーザー３１にとって音声による確認が必要な状況では、ユーザー３１が設定を変えるなどすることなく、画像処理実行時のエラーおよび画像処理の終了等のメッセージを音声により確認することが可能になり、ユーザー３１の利便性が高まる。

本実施形態に係る画像処理システム１では、通知選択部１９５は、画像処理の結果に基づいて、選択を行う。
したがって、本実施形態に係る画像処理システム１では、画像処理の結果に基づいて、ユーザー３１にとって適切な通知態様で通知を行うことができる。

本実施形態に係る画像処理システム１では、第２操作入力は、手動による操作入力である。
したがって、本実施形態に係る画像処理システム１では、ユーザー３１によって行われる手動による操作入力に応じて、ユーザー３１にとって適切な通知態様で通知を行うことができる。
例えば、画像処理システム１では、ユーザー３１によって行われる音声による操作入力と手動による操作入力とに応じて、通知態様を使い分けることができる。

本実施形態に係る画像処理システム１では、第２操作入力は、撮像された画像を用いた操作入力である。
したがって、本実施形態に係る画像処理システム１では、ユーザー３１によって行われる画像による操作入力に応じて、ユーザー３１にとって適切な通知態様で通知を行うことができる。
例えば、画像処理システム１では、ユーザー３１によって行われる音声による操作入力と画像による操作入力とに応じて、通知態様を使い分けることができる。

本実施形態に係る画像処理システム１では、通知選択部１９５は、情報処理装置１１に備えられる。
したがって、本実施形態に係る画像処理システム１では、情報処理装置１１において、ユーザー３１にとって適切な通知態様を選択することができる。

また、本実施形態では、情報処理装置１１の制御方法として提供することができる。
例えば、情報処理装置１１の制御方法では、情報処理装置１１が、情報処理装置１１の第１操作入力部１３１－１によって受け付けられた第１操作入力と、情報処理装置１１の第２操作入力部１３１－２によって受け付けられた第２操作入力との少なくとも一方に基づいて、画像処理装置１２への指示を取得する。情報処理装置１１が、取得された指示に基づいて、画像処理の要求を画像処理装置１２に対して行い、画像処理装置１２において実行された画像処理に関する情報を通知する先として、情報処理装置１１の第１通知部１５１－１と情報処理装置１１の第２通知部１５１－２の少なくとも一方の選択を行う。

また、本実施形態では、情報処理装置１１において実行されるプログラムとして提供することができる。
例えば、プログラムは、情報処理装置１１を構成するコンピューターに、情報処理装置１１の第１操作入力部１３１－１によって受け付けられた第１操作入力と、情報処理装置１１の第２操作入力部１３１－２によって受け付けられた第２操作入力との少なくとも一方に基づいて、画像処理装置１２への指示を取得する第１機能と、取得された指示に基づいて、画像処理の要求を画像処理装置１２に対して行う第２機能と、画像処理装置１２において実行された画像処理に関する情報を通知する先として、情報処理装置１１の第１通知部１５１－１と情報処理装置１１の第２通知部１５１－２の少なくとも一方の選択を行う第３機能と、を実現させるためのプログラムである。

なお、以上に説明した情報処理装置１１、画像処理装置１２、音声認識サーバー１３などの任意の装置における任意の構成部の機能を実現するためのプログラムを、コンピューター読み取り可能な記録媒体に記録し、そのプログラムをコンピューターシステムに読み込ませて実行するようにしてもよい。なお、ここでいう「コンピューターシステム」とは、オペレーティングシステムあるいは周辺機器等のハードウェアを含むものとする。また、「コンピューター読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）－ＲＯＭ等の可搬媒体、コンピューターシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピューター読み取り可能な記録媒体」とは、インターネット等のネットワークあるいは電話回線等の通信回線を介してプログラムが送信された場合のサーバーあるいはクライアントとなるコンピューターシステム内部の揮発性メモリーのように、一定時間プログラムを保持しているものも含むものとする。当該揮発性メモリーは、例えば、ＲＡＭであってもよい。記録媒体は、例えば、非一時的記録媒体であってもよい。

また、上記のプログラムは、このプログラムを記憶装置等に格納したコンピューターシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピューターシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワークあるいは電話回線等の通信回線のように情報を伝送する機能を有する媒体のことをいう。
また、上記のプログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、上記のプログラムは、前述した機能をコンピューターシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイルであってもよい。差分ファイルは、差分プログラムと呼ばれてもよい。

また、以上に説明した情報処理装置１１、画像処理装置１２、音声認識サーバー１３などの任意の装置における任意の構成部の機能は、プロセッサーにより実現されてもよい。例えば、実施形態における各処理は、プログラム等の情報に基づき動作するプロセッサーと、プログラム等の情報を記憶するコンピューター読み取り可能な記録媒体により実現されてもよい。ここで、プロセッサーは、例えば、各部の機能が個別のハードウェアで実現されてもよく、あるいは、各部の機能が一体のハードウェアで実現されてもよい。例えば、プロセッサーはハードウェアを含み、当該ハードウェアは、デジタル信号を処理する回路およびアナログ信号を処理する回路のうちの少なくとも一方を含んでもよい。例えば、プロセッサーは、回路基板に実装された１または複数の回路装置、あるいは、１または複数の回路素子のうちの一方または両方を用いて、構成されてもよい。回路装置としてはＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）などが用いられてもよく、回路素子としては抵抗あるいはキャパシターなどが用いられてもよい。

ここで、プロセッサーは、例えば、ＣＰＵであってもよい。ただし、プロセッサーは、ＣＰＵに限定されるものではなく、例えば、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、あるいは、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）等のような、各種のプロセッサーが用いられてもよい。また、プロセッサーは、例えば、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）によるハードウェア回路であってもよい。また、プロセッサーは、例えば、複数のＣＰＵにより構成されていてもよく、あるいは、複数のＡＳＩＣによるハードウェア回路により構成されていてもよい。また、プロセッサーは、例えば、複数のＣＰＵと、複数のＡＳＩＣによるハードウェア回路と、の組み合わせにより構成されていてもよい。また、プロセッサーは、例えば、アナログ信号を処理するアンプ回路あるいはフィルター回路等のうちの１以上を含んでもよい。

以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。

１…画像処理システム、１１…情報処理装置、１２…画像処理装置、１３…音声認識サーバー、３１…ユーザー、１１１…第１入力部、１１２…第１出力部、１１３…第１通信部、１１４…第１記憶部、１１５…第１検出部、１１６…第１制御部、１３１－１～１３１－ｎ…第１操作入力部～第ｎ操作入力部、１５１－１～１５１－ｍ…第１通知部～第ｍ通知部、１７１…音レベル検出部、１７２…被携帯検出部、１９１…入力情報取得部、１９２…指示取得部、１９３…画像処理要求部、１９４…画像処理結果取得部、１９５…通知選択部、２１１…第２入力部、２１２…第２出力部、２１３…第２通信部、２１４…第２記憶部、２１５…画像処理部、２１６…第２制御部、２３１…要求受付部、２３２…画像処理制御部、２３３…画像処理結果通知部、３１１…第３入力部、３１２…第３出力部、３１３…第３通信部、３１４…第３記憶部、３１５…第３制御部、３３１…音声情報受付部、３３２…音声認識部、３３３…音声認識結果通知部、１０１１…対応情報

Claims (23)

1. 情報処理装置と、画像処理装置と、を備える画像処理システムであって、
   前記情報処理装置は、
   第１操作入力を受け付ける第１操作入力部と、
   第２操作入力を受け付ける第２操作入力部と、
   第１通知を行う第１通知部と、
   第２通知を行う第２通知部と、
   前記第１操作入力部によって受け付けられた前記第１操作入力、もしくは前記第２操作入力部によって受け付けられた前記第２操作入力に基づいて、前記画像処理装置への指示を取得する指示取得部と、
   前記指示取得部によって取得された前記指示に基づいて、画像処理の要求を前記画像処理装置に対して行う画像処理要求部と、
   を備え、
   前記画像処理装置は、
   前記情報処理装置から前記画像処理の要求を受け付ける要求受付部と、
   前記要求受付部によって受け付けられた前記画像処理を実行する画像処理部と、
   を備え、
   前記画像処理システムは、
   前記画像処理装置において実行された前記画像処理に関する処理結果を通知する先として、前記情報処理装置の前記第１通知部と前記第２通知部の少なくとも一方を選択させる通知選択部を備える、
   画像処理システム。
2. 前記第１操作入力は、音声を用いた操作入力である、
   請求項１に記載の画像処理システム。
3. 前記第１通知部は、音声を用いて前記第１通知を行い、
   前記第２通知部は、音声以外の伝達手段を用いて前記第２通知を行う、
   請求項２に記載の画像処理システム。
4. 前記通知選択部は、前記第１操作入力部に入力された前記音声に基づいて、前記選択を行う、
   請求項３に記載の画像処理システム。
5. 前記通知選択部は、前記第１操作入力部に入力された前記音声に含まれる雑音のレベルが第１閾値を超える場合、前記第２通知部を選択する、
   請求項４に記載の画像処理システム。
6. 前記通知選択部は、前記第１操作入力部に入力された前記音声の音量レベルが第２閾値未満である場合、前記第１通知部を選択し、
   前記第１通知部は、第３閾値未満のレベルの音声を用いて前記第１通知を行う、
   請求項４に記載の画像処理システム。
7. 前記通知選択部は、前記第１操作入力部に入力された前記音声の音量レベルが第２閾値未満である場合、前記第１通知部と前記第２通知部との両方を選択する、
   請求項４に記載の画像処理システム。
8. 前記通知選択部は、前記第１操作入力部によって前記第１操作入力が受け付けられた場合、前記第１通知部を選択する、
   請求項３に記載の画像処理システム。
9. 前記第２操作入力は、手動による操作入力である、
   請求項１から請求項８のいずれか１項に記載の画像処理システム。
10. 前記第２操作入力は、撮像された画像を用いた操作入力である、
    請求項１から請求項８のいずれか１項に記載の画像処理システム。
11. 前記通知選択部は、前記情報処理装置に備えられる、
    請求項１から請求項１０のいずれか１項に記載の画像処理システム。
12. 第１操作入力部、第２操作入力部、第１通知部、及び第２通知部を有し、画像処理装置と通信を行う情報処理装置の制御方法であって、
    前記第１操作入力部によって受け付けられた第１操作入力、もしくは前記第２操作入力部によって受け付けられた第２操作入力に基づいて、前記画像処理装置への指示を取得し、
    取得された前記指示に基づいて、画像処理の要求を前記画像処理装置に対して行い、
    前記画像処理装置において実行された前記画像処理に関する処理結果を通知する先として、前記第１通知部と前記第２通知部の少なくとも一方の選択を行う、
    情報処理装置の制御方法。
13. 第１操作入力部、第２操作入力部、第１通知部、及び第２通知部を有し、画像処理装置と通信を行う情報処理装置を構成するコンピューターに、
    前記第１操作入力部によって受け付けられた第１操作入力、もしくは前記第２操作入力部によって受け付けられた第２操作入力に基づいて、前記画像処理装置への指示を取得する第１機能と、
    取得された前記指示に基づいて、画像処理の要求を前記画像処理装置に対して行う第２機能と、
    前記画像処理装置において実行された前記画像処理に関する処理結果を通知する先として、前記第１通知部と前記第２通知部の少なくとも一方の選択を行なわせる第３機能と、
    を実現させるためのプログラム。
14. 画像処理方法であって、
    情報処理装置が操作入力を取得し、
    前記操作入力に基づいて、画像処理装置が画像処理を行い、
    第１通知部が選択された場合は、前記第１通知部を用いて前記画像処理に関する処理結果を通知し、
    第２通知部が選択された場合は、前記第２通知部を用いて前記画像処理に関する処理結果を通知する、
    画像処理方法。
15. 前記第１通知部は、音声を用いて通知を行い、
    前記第２通知部は、音声以外の伝達手段を用いて通知を行う、
    請求項１４に記載の画像処理方法。
16. 前記情報処理装置は音声を用いた前記操作入力を取得する、
    請求項１４又は１５に記載の画像処理方法。
17. 前記操作入力の前記音声に基づいて、前記選択を行う、
    請求項１６に記載の画像処理方法。
18. 前記操作入力の前記音声に含まれる雑音のレベルが第１閾値を超える場合、前記第２通知部を選択する、
    請求項１７に記載の画像処理方法。
19. 前記操作入力の前記音声の音量レベルが第２閾値未満である場合、前記第１通知部を選択し、
    第３閾値未満のレベルの音声を用いて通知を行う、
    請求項１７に記載の画像処理方法。
20. 前記操作入力の前記音声の音量レベルが第２閾値未満である場合、前記第１通知部と前記第２通知部との両方を選択する、
    請求項１７に記載の画像処理方法。
21. 前記操作入力の種類に応じて、前記第１通知部と前記第２通知部の少なくとも一方の選択を行う、
    請求項１４に記載の画像処理方法。
22. 前記情報処理装置は手動を用いた前記操作入力を取得する、
    請求項１４から請求項２１のいずれか１項に記載の画像処理方法。
23. 前記情報処理装置は撮像された画像を用いた前記操作入力を取得する、
    請求項１４から請求項２１のいずれか１項に記載の画像処理方法。

Images