JP7383885B2 - 情報処理装置及びプログラム - Google Patents

情報処理装置及びプログラム Download PDF

Info

Publication number
JP7383885B2
JP7383885B2 JP2019038937A JP2019038937A JP7383885B2 JP 7383885 B2 JP7383885 B2 JP 7383885B2 JP 2019038937 A JP2019038937 A JP 2019038937A JP 2019038937 A JP2019038937 A JP 2019038937A JP 7383885 B2 JP7383885 B2 JP 7383885B2
Authority
JP
Japan
Prior art keywords
search
user
search results
parameter
job memory
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019038937A
Other languages
English (en)
Other versions
JP2020144469A (ja
Inventor
駿 三井
章 角田
徹哉 小林
智彦 二宮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2019038937A priority Critical patent/JP7383885B2/ja
Publication of JP2020144469A publication Critical patent/JP2020144469A/ja
Application granted granted Critical
Publication of JP7383885B2 publication Critical patent/JP7383885B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、情報処理装置及びプログラムに関する。
例えば画像形成装置には、ユーザを支援する機能として、繰り返し用いる操作やパラメータの値をジョブメモリとして登録する機能が用意されている。ジョブメモリとして登録された設定は、ボタンひとつで呼び出すことができる。また、ジョブメモリには、一連の操作の過程で表示される画面の階層なども記憶することができる。
特開2018-46416号公報
ジョブメモリの実行には、表示部から実行したいジョブメモリを選択する必要があるが、多くのジョブメモリが登録されている場合、その名称だけからは、希望するジョブメモリを見つけることが難しい。また、ジョブメモリを構成するパラメータの幾つかを指定して類似度の高いジョブメモリを検索する手法でも、類似度の高いジョブメモリが多数見つかる場合には、希望するジョブメモリを見つけるまでに多くの時間を必要とする。
本発明は、パラメータの組み合わせが指定される度に検索結果の全てをユーザに提示するだけの場合に比して、希望するパラメータの組み合わせを容易に見つけられるようにすることを目的とする。
請求項1に記載の発明は、操作の対象とする画像形成装置に登録されている、画像の形成に関するパラメータの組み合わせ情報を検索の対象として検索を実行する検索手段と、前記検索手段による検索結果として提示される組み合わせ情報の数を、前回の検索結果を対象とする前記検索手段による追加の検索により更に絞り込むための条件のユーザによる入力を、対話形式により支援する支援手段とを有し、前記支援手段は、前記検索結果としての組み合わせ情報が所定数以上の場合には、当該検索結果をユーザに提示する前に絞り込み条件の指定に誘導し、前記支援手段は、前記絞り込み条件の候補として、パラメータが関連する概念を提示する場合、パラメータと関連する概念の関係を学習した学習済みモデルに前記検索結果に含まれるパラメータを与えて関連する概念を出力し、出力された概念を当該絞り込み条件の候補として提示する、情報処理装置である。
請求項2に記載の発明は、操作の対象とする画像形成装置に登録されている、画像の形成に関するパラメータの組み合わせ情報を検索の対象として検索を実行する検索手段と、前記検索手段による検索結果として提示される組み合わせ情報の数を、前回の検索結果を対象とする前記検索手段による追加の検索により更に絞り込むための条件のユーザによる入力を、対話形式により支援する支援手段とを有し、前記支援手段は、前記検索結果としての組み合わせ情報が所定数以上の場合には、当該検索結果をユーザに提示する前に絞り込み条件の指定に誘導し、前記支援手段は、絞り込み後の前記検索結果の数を1つ以上かつ予め定めた個数以下にできるパラメータの候補が存在しない場合、絞り込みに用いるパラメータの入力をユーザに要求する、情報処理装置である。
請求項3に記載の発明は、前記支援手段は、絞り込み効果が認められないパラメータを事前に提示する、請求項2に記載の情報処理装置である。
請求項4に記載の発明は、請求項1又は2に記載の情報処理装置は、ユーザが頭部に装着するメガネ型の端末又は携帯型の端末であるである。
請求項5に記載の発明は、コンピュータに、操作の対象とする画像形成装置に登録されている、画像の形成に関するパラメータの組み合わせ情報を検索の対象として検索を実行する機能と、前記検索を実行する機能による検索結果として提示される組み合わせ情報の数を、前回の検索結果を対象とする前記検索を実行する機能による追加の検索により更に絞り込むための条件のユーザによる入力を、対話形式により支援する機能とを実現させるためのプログラムであり、前記支援する機能は、前記検索結果としての組み合わせ情報が所定数以上の場合には、当該検索結果をユーザに提示する前に絞り込み条件の指定に誘導し、前記支援する機能は、前記絞り込み条件の候補としてパラメータが関連する概念を提示する場合、パラメータと関連する概念の関係を学習した学習済みモデルに前記検索結果に含まれるパラメータを与えて関連する概念を出力し、出力された概念を当該絞り込み条件の候補として提示する、プログラムである。
請求項6に記載の発明は、コンピュータに、操作の対象とする画像形成装置に登録されている、画像の形成に関するパラメータの組み合わせ情報を検索の対象として検索を実行する機能と、前記検索を実行する機能による検索結果として提示される組み合わせ情報の数を前回の検索結果を対象とする前記検索を実行する機能による追加の検索により更に絞り込むための条件のユーザによる入力を、対話形式により支援する機能とを実現させるためのプログラムであり、前記支援する機能は、前記検索結果としての組み合わせ情報が所定数以上の場合には、当該検索結果をユーザに提示する前に絞り込み条件の指定に誘導し、前記支援する機能は、絞り込み後の検索結果の数を1つ以上かつ予め定めた個数以下にできるパラメータの候補が存在しない場合、絞り込みに用いるパラメータの入力をユーザに要求する、プログラムである。
請求項1記載の発明によれば、絞り込みに用いる条件を概念的に提示できる。
請求項記載の発明によれば、絞り込みの必要性をユーザに知らせることができる。
請求項記載の発明によれば、候補の絞り込みを効率的に進められる。
請求項4記載の発明によれば、実機を見ながらの操作を効率化できる。
請求項5記載の発明によれば、絞り込みに用いる条件を概念的に提示できる。
請求項6記載の発明によれば、絞り込みの必要性をユーザに知らせることができる。
実施の形態1で想定するシステム構成の一例を説明する図である。 実施の形態1で使用する画像形成装置の構成例を説明する図である。 実施の形態1で使用する制御ユニットの機能構成を説明する図である。 実施の形態で使用する端末装置の構成例を示す図である。 端末装置の制御ユニットにより実現される機能構成を説明する図である。 画像形成装置と端末装置との間で進行するデータの流れを説明する図である。 ジョブメモリ検索モジュール及び絞り込み支援モジュールの連携により実行される絞り込みロジックの例を説明する図である。 白黒かカラーを指定することで検索結果の数を3個以下に絞り込める例を説明する図である。 用紙サイズを指定することで検索結果の数を3個以下に絞り込める例を説明する図である。 検索結果の数が1個であった場合の操作画面の例を説明する図である。 検索結果の数が3個であった場合の操作画面の例を説明する図である。 端末装置が横向きに保持されている場合に可能な表示画面の例を説明する図である。 検索結果の数が4個以上であるが3個以下への絞り込みが可能な場合の操作画面の例を説明する図である。 検索結果の数が4個以上であるが3個以下への絞り込みが可能な場合の操作画面の他の例を説明する図である。 検索結果の数が4個以上であるが使用頻度による3個以下への絞り込みが可能な場合の操作画面の他の例を説明する図である。 検索結果の数が4個以上である場合に検索結果の数を3個以下に絞り込めない場合の操作画面の他の例を説明する図である。 図16における質問に対するユーザからの応答が全ての検索結果の表示である場合の操作画面の例を説明する図である。 画像形成装置におけるジョブメモリの登録数が0の場合の操作画面の例を説明する図である。 実施の形態2で想定するシステム構成の一例を説明する図である。 図19における問い合わせに対するユーザの応答及びアプリケーション側からの質問を説明する図である。 ユーザの指示に対してアプリケーション側から提示される仮想の画像の例を説明する図である。 検索結果の数が9個以上の場合における絞り込みの提案がアプリケーション側から提示される例を説明する図である。 特定のジョブメモリの実行をジェスチャーにより指示する例を説明する図である。 ジョブメモリの詳細を確認したい場合のユーザのジェスチャーを説明する図である。 ジョブメモリの詳細内容の提示の例を説明する図である。
以下、図面を参照して、本発明の実施の形態を説明する。
<実施の形態1>
<システム構成>
図1は、実施の形態1で想定するシステム構成の一例を説明する図である。実施の形態1で想定するシステムは、用紙などの媒体に画像を形成する画像形成装置10と、画像形成装置10を操作するユーザが携帯する端末装置20とで構成される。
本実施の形態の場合、ユーザは、端末装置20を操作の対象とする。換言すると、ユーザは、画像形成装置10を直接には操作しない。ユーザは、端末装置20を操作し、画像形成装置10にジョブメモリの呼び出しと実行を指示する。
ジョブメモリは、いわゆるコピー、スキャン、ファックス等のジョブに関するパラメータの設定の記録である。ジョブメモリは、ジョブメモリ名で区別される。使用の頻度が高いパラメータの設定の組み合わせをジョブメモリとして記録することで、使用の頻度が高いパラメータの設定をワンタッチで呼び出すことが可能となり、結果として設定の作業が簡略化される。なお、ジョブメモリは、画像の形成に関するパラメータの組み合わせ情報の一例である。
1つのジョブメモリには、ジョブメモリ名、機能名、パラメータが含まれる。機能名は、ジョブメモリが関連する機能の名称であり、例えばコピー、スキャン、ファックスである。パラメータは、ユーザが設定する項目である。コピーに関するパラメータには、例えばカラーモード、用紙サイズがある。なお、ジョブメモリを管理する情報には、例えば使用回数、使用回数から計算される使用頻度がある。
本実施の形態における端末装置20には、ユーザによるジョブメモリの特定を支援する機能が用意されている。ここでの端末装置20は、情報処理装置の一例である。
図1に示す画像形成装置10と端末装置20は、近距離無線通信により接続されている。近距離無線通信には、例えばブルートゥース(登録商標)、無線LAN(=Local Area Networkの略)を使用する。
本実施の形態における端末装置20は、携帯型の端末である。携帯型の端末には、例えばスマートフォン、ウェアラブル端末、ノート型のコンピュータが含まれる。図1では、端末装置20がスマートフォンの例を表している。
<各装置の構成>
以下では、画像形成装置10と端末装置20の装置構成を個別に説明する。
<画像形成装置の構成>
図2は、実施の形態1で使用する画像形成装置10の構成例を説明する図である。
画像形成装置10は、原稿の画像を読み取る画像読取ユニット101と、用紙などの媒体に画像を形成する画像形成ユニット102と、画像データが表す画像に色補正や階調補正等の処理を加える画像処理ユニット103と、装置全体の動作を制御する制御ユニット104と、画像データ等を記憶する記憶ユニット105と、ユーザインタフェース画面等の表示に用いられる表示ユニット106と、ユーザの操作を受け付ける操作受付ユニット107と、近距離無線通信その他の通信を実現する通信インタフェース(=通信IF)108を有している。
画像読取ユニット101は、いわゆるスキャナであり、原稿を自動搬送する機構を有していてもよい。
画像形成ユニット102は、電子写真方式やインクジェット方式等により媒体に画像を形成するユニットであり、画像の形成方式に応じた機構を有している。
画像処理ユニット103は、画像データを処理するための専用のプロセサや処理回路等で構成されている。
制御ユニット104は、CPU(=Central Processing Unit)111と、ファームウェアやBIOS(=Basic Input Output System)等が記憶されたROM(=Read Only Memory)112と、ワークエリアとして用いられるRAM(=Random Access Memory)113とを有している。制御ユニット104は、いわゆるコンピュータとして機能する。なお、ROM112は、不揮発性の書き換え可能な半導体メモリでもよい。
また、記憶ユニット105は、不揮発性の記憶装置であるハードディスク装置(=HDD)等によって構成される。記憶ユニット105には、画像読取ユニット101で読み取られた画像データ、通信により外部から与えられる画像データ、FAX通信を通じて受信された画像データ等が保存される。
また、表示ユニット106は、例えば液晶ディスプレイや有機EL(=Electro Luminescence)ディスプレイで構成される。
操作受付ユニット107は、表示ユニット106の表面に配置されるタッチセンサ、スイッチ、ボタン等で構成される。
因みに、制御ユニット104と各ユニット等とは、バス109や不図示の信号線を通じて接続されている。
図3は、実施の形態1で使用する制御ユニット104の機能構成を説明する図である。図3に示す機能モジュールは、CPU111(図2参照)によるプログラムの実行を通じて実現される。なお、図3に示す機能モジュールは、制御ユニット104によって提供される機能モジュールの一例である。
本実施の形態における制御ユニット104は、装置内のジョブメモリを管理するジョブメモリ管理モジュール121と、ユーザを認証する認証モジュール122としての機能を有している。
ジョブメモリ管理モジュール121は、ジョブメモリの使用回数も管理する。本実施の形態の場合、使用回数は、ジョブメモリ別の使用回数、任意のジョブメモリの総使用回数、ユーザ別又は端末装置20別に集計されたジョブメモリ別の使用回数、ユーザ別又は端末装置20別に集計された任意のジョブメモリの総使用回数である。
任意のジョブメモリの総使用回数は、画像形成装置10で集計された使用回数の総和を意味する。例えばユーザAによる任意のジョブメモリの使用回数が10回、ユーザBによる任意のジョブメモリの使用回数が20回であれば、総使用回数は30回である。
また、ユーザ別又は端末装置20別に集計された任意のジョブメモリの使用回数は、ユーザ別又は端末装置20別に集計された使用回数の総和を意味する。例えばユーザAによる任意のジョブメモリの使用が10回、ユーザBによる任意のジョブメモリの使用が20回であれば、ユーザAの総使用回数は10回であり、ユーザBの総使用回数は20回である。
本実施の形態におけるジョブメモリ管理モジュール121は、ユーザ認証により権限が認められたユーザが操作する端末装置20(図1参照)からジョブメモリが要求された場合、ジョブメモリに関する全ての情報を端末装置20に送信する。ここでの情報には、前述した使用回数も含まれる。また、本実施の形態の場合、ジョブメモリ管理モジュール121は、画像形成装置10に記憶されている全てのジョブメモリを端末装置20に送信する。
認証モジュール122は、端末装置20からユーザに関する情報を取得し、権限の有無を認証する。本実施の形態では、認証モジュール122を制御ユニット104の一部として実行しているが、ユーザ認証については、不図示の認証サーバで実行し、認証の結果を受け取ってもよい。
<端末装置の構成>
図4は、実施の形態で使用する端末装置20の構成例を示す図である。
図4に示す端末装置20は、装置全体の動作を制御する制御ユニット201と、画像データ等を記憶する記憶ユニット202と、ユーザインタフェース画面等の表示に用いられる表示ユニット203と、ユーザの操作を受け付ける操作受付ユニット204と、画像を撮像するカメラ205と、ユーザの音声を電気信号に変換するマイク206と、通信インタフェース(=通信IF)207とを有している。
ここでのカメラ205は、静止画像又は動画像による撮像が可能である。
本実施の形態における制御ユニット201は、CPU211と、ファームウェアやBIOS等が記憶されたROM212と、ワークエリアとして用いられるRAM213とを有している。制御ユニット201は、いわゆるコンピュータとして機能する。なお、ROM212は、不揮発性の書き換え可能な半導体メモリでもよい。
記憶ユニット202は、不揮発性の書き換え可能な半導体メモリ等によって構成される。記憶ユニット202には、例えばカメラ205で撮像された画像データ、マイク206で収録された音声データ等が保存される。
表示ユニット203は、例えば液晶ディスプレイや有機ELディスプレイで構成される。表示ユニット203には、ユーザによる操作を支援する情報が表示される。
操作受付ユニット204は、表示ユニット203の表面に配置されるタッチセンサ、スイッチ、ボタン等で構成される。
因みに、制御ユニット201と各ユニット等とは、バス208や不図示の信号線を通じて接続されている。
図5は、端末装置20の制御ユニット201により実現される機能構成を説明する図である。図5に示す機能モジュールは、CPU211(図4参照)によるプログラムの実行を通じて実現される。なお、図5に示す機能モジュールは、制御ユニット201によって提供される機能モジュールの一例である。
実施の形態における制御ユニット201は、ユーザの音声を認識する音声認識モジュール221と、操作の対象である画像形成装置10(図1参照)からジョブメモリを取得するジョブメモリ取得モジュール222と、ユーザの発話した内容に基づいてジョブメモリを検索するジョブメモリ検索モジュール223と、検索されたジョブメモリの候補について使用頻度を計算する使用頻度計算モジュール224と、検索されたジョブメモリの候補の数の絞り込みを支援する絞り込み支援モジュール225と、ユーザが選択したジョブメモリの呼び出しを画像形成装置10に指示するジョブメモリ指示モジュール226として機能する。
音声認識モジュール221は、ユーザの音声を文字列に変換する機能を分担する。音声認識モジュール221は、例えば音声の特徴を抽出する特徴抽出ユニットと、メル周波数ケプストラム係数(=Mel-Frequency Cepstrum Coefficients)等の特徴量から文字列を生成する認識エンジンとで構成される。音声認識の技術は既に実用化されているので、詳細な説明は省略する。
本実施の形態では、音声認識モジュール221により音声認識の処理を完結しているが、クラウドサービス等を活用して音声認識の結果を取得してもよい。
なお、ユーザは、音声認識モジュール221を使用しない入力を選択することも可能である。
ジョブメモリ取得モジュール222は、操作の対象である画像形成装置10からジョブメモリに関する情報の全てを取得する。取得されるジョブメモリの数は、画像形成装置10に記憶されているジョブメモリの数に依存する。なお、ジョブメモリ取得モジュール222は、ジョブメモリの取得に先立って、端末装置20(図1参照)を操作するユーザの情報(以下「ユーザ情報」という)を画像形成装置10に与える。ジョブメモリの取得は、画像形成装置10による認証が成功し、権限が認められた場合に実行される。
ジョブメモリ検索モジュール223は、画像形成装置10から取得されたジョブメモリを検索の対象とし、ユーザの発話に含まれる言葉を検索キーに用い、ユーザが希望しているジョブメモリの候補を検索する。ジョブメモリ検索モジュール223は、発話に含まれるジョブメモリ名、機能名、パラメータ等を検索キーに使用する。例えばユーザが「コピーをお願い」と発話した場合、ジョブメモリ検索モジュール223は、機能名である「コピー」に関連するジョブメモリを検索キーに用いてジョブメモリを検索する。ジョブメモリ検索モジュール223は、検索手段の一例である。
本実施の形態におけるジョブメモリ検索モジュール223は、概念又は属性(以下では「概念」という)による条件の入力にも対応している。例えばユーザが「まとめてコピーしたい」と発話した場合、ジョブメモリ検索モジュール223は、「まとめてコピー」に関連するパラメータを含むジョブメモリを検索する。
また、本実施の形態におけるジョブメモリ検索モジュール223は、発話に含まれるパラメータや検索対象とするジョブメモリのパラメータを概念に変換した後に検索する機能も備えていてもよい。例えば複数枚の原稿の縮尺を変更して1枚の用紙にコピーする機能は、画像形成装置10のメーカによって呼び名が異なっている。このため、ユーザの発話した呼び名が操作の対象である画像形成装置10のパラメータでは用いられていないことも起こり得る。ただし、呼び名を関連する概念に変換する機能があれば、ジョブメモリ検索モジュール223は、ユーザの希望に近いジョブメモリの検索が可能である。ここでの「関連する概念」には、例えば呼び名が属する上位の区分、同じ機能を意味する別の呼び名がある。呼び名と概念の関係は、テーブルとして事前に与えられてもよいし、後述する学習済みモデルの出力として与えられてもよいし、その両方でもよい。
ジョブメモリ検索モジュール223は、発話に含まれる呼び名を、操作の対象である画像形成装置10で使用される呼び名に変換するテーブルを有していてよい。この場合、ジョブメモリ検索モジュール223は、ユーザの発話を画像形成装置10で用いられる呼び名に変換した後に、ジョブメモリを検索することが可能である。
本実施の形態の場合、ジョブメモリ名、機能名、パラメータと概念との関係を学習した学習済みモデルが利用される。学習済みモデルは、例えばニューラルネットワークで構成される。後述する絞り込み支援モジュール225による絞り込み条件の候補の提示にも利用される。
学習済みモデルには、ジョブメモリ名、機能名、パラメータを入力すると、関連する概念を出力する分類器と、概念を入力すると、操作の対象である画像形成装置10で使用するジョブメモリ名、機能名、パラメータを出力する分類器がある。
例えば前者の分類器は、パラメータとしてのA5やB4が入力されると、関連する概念として用紙サイズを出力する。また例えば前者の分類器は、パラメータとして2アップ、4アップ、8アップ等が入力されると、関連する概念として「まとめてコピー」や「まとめて印刷」を出力する。後者の分類器では、前述の入力と出力の関係が入れ替わる。
使用頻度計算モジュール224は、画像形成装置10から取得される使用回数の情報に基づいて、ジョブメモリxの使用頻度P(x)を計算する。なお、本実施の形態における使用頻度計算モジュール224は、検索結果の数が予め定めた閾値より多い場合に、使用頻度P(x)を計算する。もっとも、使用頻度P(x)の計算は無条件に計算されてもよい。また、使用頻度P(x)は、画像形成装置10から与えられてもよい。
対象とするジョブメモリxの使用頻度P(x)は、p1(x)*α+p2(x)*βとして計算される。
ここで、p1(x)は、端末装置20(図1参照)におけるジョブメモリxの使用頻度であり、p2(x)は、画像形成装置10(図1参照)におけるジョブメモリxの使用頻度である。
なお、p1(x)は、n/mで計算される。
ここで、nは端末装置20におけるジョブメモリxの使用回数であり、mは端末装置20における全てのジョブメモリの総使用回数である。
一方、p2(x)は、N/Mで計算される。
ここで、Nは画像形成装置10におけるジョブメモリxの使用回数であり、Mは画像形成装置10における全てのジョブメモリの総使用回数である。
因みに、係数α及びβは、α+β=1を満たす正の実数である。本実施の形態の場合、αとβの初期値はいずれも0.5である。
係数α及びβは、ユーザによる調整も可能である。例えばユーザ固有の使用頻度P(x)を計算したい場合には、αを1.0とし、βを0とすればよい。調整は、操作画面上で行うことも可能であるが、音声で行うことも可能である。例えばユーザが「いつもの」と発話していた場合、α=1.0、β=0が計算に使用される。このように、画像形成装置10を使用する任意のユーザ全体の使用頻度だけでなく、特定個人の使用頻度の情報を参照することも可能であるので、ユーザにとっての使い勝手の向上が期待される。
なお、係数α及びβは、使用頻度計算モジュール224が自動的に計算してもよい。例えば端末装置20における全てのジョブメモリの総使用回数と画像形成装置10における全てのジョブメモリの総使用回数の比によって係数α及びβの値を計算してもよい。例えば端末装置20における全てのジョブメモリの総使用回数mが20回であり、画像形成装置10における全てのジョブメモリの総使用回数Mが100回である場合、α=0.2、β=0.8と計算される。
絞り込み支援モジュール225は、ジョブメモリ検索モジュール223による検索結果の数が2個以上の場合に実行され、検索結果の数の絞り込みを支援する。絞り込み支援モジュール225は、支援手段の一例である。
本実施の形態の場合、絞り込み支援モジュール225は、絞り込みの支援に使用するストーリーを2つ有している。「ストーリー1」と「ストーリー2」の2つである。
「ストーリー1」は、検索結果による候補の数が7つ未満の場合である。すなわち、検索結果による候補の数が最大でも6個の場合である。
この場合、絞り込み支援モジュール225は、検索結果に含まれるジョブメモリのパラメータを解析し、候補を3個以下に絞り込むことが可能な追加のパラメータの候補をユーザに提示する。追加のパラメータの候補が複数ある場合、絞り込み支援モジュール225は、追加のパラメータの候補を予め定めた優先順位に従って1個ずつ提示する。例えば絞り込み後の数が少ない候補を絞り込み後の数が多い候補よりも優先する。
なお、検索結果の数を3個以下に絞り込むことが可能な追加のパラメータが存在しない場合、絞り込み支援モジュール225は、検索結果に含まれるジョブメモリxの使用頻度P(x)と予め定めた閾値T2を比較し、閾値T2以上の検索結果の数が3個以下に絞り込めるか否かを判定する。3個以下に絞り込める場合、絞り込み支援モジュール225は、使用頻度P(x)が高い順番に候補を表示し、ユーザに選択を求める。因みに、検索結果の数を3個以下に絞り込めない場合、絞り込み支援モジュール225は、他の条件の入力を促す。
前述した「ストーリー2」は、検索結果による候補の数が7個以上の場合である。この場合、絞り込み支援モジュール225は、検索結果に含まれるジョブメモリのパラメータを解析し、候補を半分以下に絞り込むことが可能な追加のパラメータの候補をユーザに提示する。
なお、「ストーリー2」の場合には、「ストーリー1」における処理のうち「3個以下絞り込める」かの部分を「半分以下に絞り込める」かに読み替える。
ジョブメモリ指示モジュール226は、ユーザが選択した特定のジョブメモリの呼び出しを画像形成装置10に指示する。
<処理動作の概略>
図6は、画像形成装置10と端末装置20との間で進行するデータの流れを説明する図である。なお、図中の記号Sは、ステップを意味する。
図6の例では、ユーザが端末装置20に対して「コピーをお願い」と話し掛けることが処理動作の起点となる。発話を検知した端末装置20は、端末装置20に記憶されているユーザの情報を画像形成装置10に送信する。ユーザの情報を受信した画像形成装置10は、ユーザ認証を実行する(ステップ1)。
ユーザ認証に成功すると、画像形成装置10は、装置内に記憶されている全てのジョブメモリを読み出し(ステップ2)、端末装置20に送信する。個々のジョブメモリには、例えばジョブメモリ名、機能名、パラメータ、使用回数が含まれている。
ジョブメモリを受信した端末装置20は、ユーザが希望する「コピー」に関連するジョブメモリを検索し、検索結果を候補として提示する(ステップ3)。検索結果の数が予め定めた数より多い場合、端末装置20は、候補を提示する前に質問や条件の候補を提示し、ユーザに提示される候補の数を絞り込む。
図6の例の場合、ユーザは、白黒で2枚の原稿を1枚にまとめてコピーするパラメータを設定したジョブメモリを意味する「白黒2アップ」と発話している。この後、端末装置20は、該当するジョブメモリの呼び出しを画像形成装置10に通知する。画像形成装置10では、該当するジョブメモリを呼び出してパラメータを設定する(ステップ4)。
この後、画像形成装置10は、スタートボタン等の操作があると、コピージョブを実行する(ステップ5)。実行の操作は、画像形成装置10の操作パネル等に配置されたスタートボタンの操作の他、端末装置20に対する実行の指示でもよい。端末装置20に対する実行の指示は音声でもよいし、操作画面に表示されたボタンの操作でもよい。なお、コピーの場合には、原稿が画像形成装置10の指定の位置に配置されることが、実行の条件である。スキャンやファックスについても同様である。
本実施の形態では、音声による対話形式で指示が可能であるので、ユーザの操作性の向上が期待される。
<検索結果の数の絞り込みの例>
図7は、ジョブメモリ検索モジュール223(図5参照)及び絞り込み支援モジュール225(図5参照)の連携により実行される絞り込みロジックの例を説明する図である。図中の記号Sはステップを意味する。
まず、ユーザは呼び出したいジョブメモリ名や実行したい操作に関するキーワード等を発話する(ステップ11)。図7の例では、ユーザは「白黒」と発話している。この発話の内容では、実行したい機能がコピーなのか、スキャンなのか、ファックスなのかも分からない。なお、発話の内容は、音声認識モジュール221(図5参照)によって認識され、文字列としてジョブメモリ検索モジュール223に与えられる。
次に、ジョブメモリ検索モジュール223は、ジョブメモリ名に「白黒」を含む数を判定する(ステップ12)。勿論、検索に用いる文字列は、ユーザが発話した内容によって異なる。ジョブメモリ検索モジュール223は、検索結果の数が0個か、1個か、2個以上かで異なる処理を実行する。
ジョブメモリ名を対象とする検索結果が1個であった場合、ジョブメモリ検索モジュール223は、確認画面を表示する。図7の例では、「白黒」を含むジョブメモリ名は「白黒コピー」であるので、「白黒コピーでよろしいですか?」と表示される。もっとも、スピーカから音声を出力してユーザに確認を求めてもよい。
ジョブメモリ名を対象とする検索結果が0個であった場合、ジョブメモリ検索モジュール223は、パラメータを対象として「白黒」を含むジョブメモリを検索する。ジョブメモリ検索モジュール223は、検索結果の数が0個か、1個か、2個以上かを判定する(ステップ13)。
ジョブメモリ名を対象とする検索結果が0個であり、パラメータを対象とする検索結果も0個であった場合、ジョブメモリ検索モジュール223は、該当するジョブメモリが存在しないこと(すなわち「該当なし」)をユーザに提示する。ジョブメモリ検索モジュール223は、例えば「該当の操作は登録されておりません」とのメッセージを表示する。
ジョブメモリ名を対象とする検索結果が0個であったが、パラメータを対象とする検索結果が1個であった場合、ジョブメモリ検索モジュール223は、見つかったジョブメモリでよいかを確認する画面を表示する。
ジョブメモリ名を対象とする検索結果が2個以上であった場合、又は、ジョブメモリ名を対象とする検索結果が0個であったが、パラメータを対象とする検索結果が2個以上であった場合、絞り込み支援モジュール225が処理を引き継ぐ。
本実施の形態の場合、絞り込み支援モジュール225は、パラメータによる検索結果の数が3個以下か4個以上かを判定する(ステップ14)。なお、ステップ14の判定は、パラメータによる検索結果の数が6個以下であることを前提としている。パラメータによる検索結果の数が7個以上の場合には、検索結果の数の半分以下か半分を超えるかの判定になる。また、後述する説明の「3個以下」は「検索結果の数の半分」に、「4個以上」は「検索結果の数の半分を超える」と読み替えることになる。
ステップ14で4個以上と判定された場合、絞り込み支援モジュール225は、3個以下に絞り込める他のパラメータの有無を判定する(ステップ15)。なお、この時点では、検索結果はユーザに提示されていない。
絞り込みが可能である場合、絞り込み支援モジュール225は、絞り込める質問をユーザに提示する。図7の例では「用紙サイズは何ですか?」と「用紙サイズはA4ですか?A3ですか?」を例示している。
前者の質問は、パラメータとしてのA4やA3による絞り込みが可能な場合に、A4やA3が属する概念である「用紙サイズ」を質問文とする例である。前述したように、パラメータとしてのA4と概念としての用紙サイズの関係はテーブルとして用意されていてもよいし、学習済みモデルにパラメータとしてのA4を入力することで読み出してもよい。
後者の質問は、パラメータとしてのA4やA3による絞り込みが可能な場合に、パラメータとしてのA4やA3を直接の質問文とする例である。
ステップ15で絞り込みに用いられる他のパラメータが無いと判定された場合、絞り込み支援モジュール225は、使用頻度から絞り込んだ結果の数が1個か、2個又は3個か、4個以上かを判定する(ステップ16)。この時点でも、検索結果はユーザに提示されていない。
ステップ14で1個と判定された場合、又は、ステップ16で1個と判定された場合、絞り込み支援モジュール225は、確認画面を表示する。図7の例では、「白黒コピーでよろしいですか?」と表示されている。もっとも、スピーカから音声を出力してユーザに確認を求めてもよい。
ステップ14で2個又は3個と判定された場合、又は、ステップ16で2個又は3個と判定された場合、絞り込み支援モジュール225は、使用頻度の値の降順にジョブメモリ名を表示し、ユーザに選択を促す。図7の例では、「上記のどれですか?」との文が表示される。この場合も、スピーカから音声でユーザに選択を促してもよい。
ステップ16で4個以上と判定された場合、絞り込み支援モジュール225は、他の条件を質問する。図7の例では、「他の条件は何ですか?」との文が表示される。この場合も、スピーカから音声でユーザに選択を促してもよい。
ここでは、ステップ15における絞り込みの具体例を用いて説明する。
図8は、白黒かカラーかを指定することで検索結果の数を3個以下に絞り込める例を説明する図である。
図8に示す例は、ユーザが「コピーをお願い」と発話した場合に、パラメータに「コピー」を含むジョブメモリが6個見つかった状態を表している。ここでの6個のジョブメモリの場合、機能名に対応するパラメータは、いずれも「コピー」である。因みに、ジョブメモリ名は、「白黒」、「コピー01」、「コピー02」、「コピー03」、「カラーコピー04」、「白黒コピー05」の6つである。
この例の場合、パラメータが白黒であるジョブメモリは3個であり、パラメータがカラーであるジョブメモリは3個である。また、パラメータがA4であるジョブメモリは1個であり、パラメータがA5であるジョブメモリは4個であり、パラメータがB4であるジョブメモリは1個であり、パラメータがB5であるジョブメモリは0個である。
この例の場合、カラーモードのパラメータを特定できれば、絞り込み後のジョブメモリの数は3個以下になる。そこで、ステップ15では、「カラーですか?白黒ですか?」とパラメータを直接質問する文や「カラーモードは何ですか?」等の概念を質問する文をユーザに提示する。
図9は、用紙サイズを指定することで検索結果の数を3個以下に絞り込める例を説明する図である。
図9に示す例も、ユーザが「コピーをお願い」と発話した場合に、パラメータに「コピー」を含むジョブメモリが6個見つかった状態を表している。ここでの6個のジョブメモリの場合、機能名に対応するパラメータは、いずれも「コピー」である。因みに、ジョブメモリ名は、「白黒」、「AAコピー」、「BBコピー」、「XXコピー」、「YYコピー」、「ZZコピー」の6つである。
この例の場合、パラメータが白黒であるジョブメモリは6個であり、パラメータがカラーであるジョブメモリは0個である。また、パラメータがA4であるジョブメモリは1個であり、パラメータがA5であるジョブメモリは3個であり、パラメータがB4であるジョブメモリは1個であり、パラメータがB5であるジョブメモリは1個である。
この例の場合、用紙サイズのパラメータを特定できれば、絞り込み後のジョブメモリの数は3個以下になる。そこで、ステップ15では、「用紙サイズはA5ですか?それ以外ですか?」とパラメータを直接質問する文や「用紙サイズは何ですか?」等の概念を質問する文をユーザに提示する。
<操作画面の例>
<画面1>
以下では、検索結果の数に応じた操作画面の例を説明する。
図10は、検索結果の数が1個であった場合の操作画面の例を説明する図である。図10に示す操作画面は、ステップ12(図7参照)で1個と判定された場合、又は、ステップ13(図7参照)で1個と判定された場合、又は、ステップ16(図7参照)で1個と判定された場合に表示される。
操作画面の上段には、操作の対象である画像形成装置10(図1参照)の名称である「画像形成装置A」が表示されている。
時点T1の操作画面は、初期画面である。このため、アプリケーション側からユーザには、「こちらは画像形成装置Aです。どんなジョブメモリを実行しますか?」との質問230が最初に表示され、次段にユーザからの指示231が表示されている。この例では、「白黒コピーをお願い」との発話の内容が表示されている。
時点T2の操作画面は、ユーザの指示231に対する検索結果を示す画面である。この例では、検索結果の数を提示する文232と、該当するジョブメモリ名を提示するボタン233とが表示されている。図10の場合、文232は「白黒コピーに関するジョブメモリが1件ありました」であり、ボタン233は「白黒」である。
ユーザからの指示234は、ボタン233の下に表示される。指示234は「それお願い」である。他に「白黒お願い」のようにジョブメモリ名を指示することも可能である。なお、ボタン233のタップによりユーザの選択を入力してもよい。指示234の認識により、画像形成装置10(図1参照)に指示するジョブメモリが特定される。
<画面2>
図11は、検索結果の数が3個であった場合の操作画面の例を説明する図である。図11には、図10との対応部分に対応する符号を付して示している。
図11に示す操作画面は、ステップ14(図7参照)で3個以下と判定された場合、又は、ステップ16(図7参照)で3個以下と判定された場合に表示される。
時点T1の操作画面は初期画面であるので図10と共通する。
時点T2の操作画面は、ユーザの指示231に対する検索結果を示す画面である。この例では、検索結果の数が3個であるので、検索結果の数を提示する文232Aと、該当するジョブメモリ名を提示するボタン233Aの内容が図10と異なっている。
図11の場合、文232Aは「白黒コピーに関するジョブメモリが複数件ありました」に変更され、ボタン233Aとして「白黒」、「白黒コピー」、「白黒縮小」の3つが示されている。図11に示すように、ユーザは、ジョブメモリ名を正確に覚えていなくても、可能性が高いジョブメモリの候補の提示を受けることが可能である。
図11の例では、ジョブメモリ名が「白黒」であるジョブメモリが選択されている。このため、操作画面の指示234Aには、ユーザが発話した「白黒お願い」の言葉が表示される。指示234Aの認識により、画像形成装置10(図1参照)に指示するジョブメモリが特定される。
図12は、端末装置20が横向きに保持されている場合に可能な表示画面の例を説明する図である。
図12に示すように、端末装置20の長辺がユーザから見て横向きに保持されている場合、ユーザによって選択されたジョブメモリの詳細な内容を確認することが可能である。図12に示す画面は、ジョブメモリ名の「白黒」を選択した状態で、詳細な内容を表示する特定の操作が検知された場合に表示される。特定の操作には、例えば「白黒」を選択した状態が予め定めた時間以上の継続がある。
図12の場合、ジョブメモリ名が「白黒」のジョブメモリは、機能名のパラメータが「コピー」、カラーモードのパラメータが「白黒」、用紙サイズのパラメータが「A4」である。
<画面3>
図13は、検索結果の数が4個以上であるが3個以下への絞り込みが可能な場合の操作画面の例を説明する図である。図13には、図11との対応部分に対応する符号を付して示している。
図13に示す操作画面は、ステップ15(図7参照)で3個以下に絞り込める他のパラメータが有ると判定された場合に表示される。
時点T1の操作画面は初期画面であるので図11と共通する。
時点T11の操作画面は、絞り込みに用いるパラメータや概念の確認を求める画面である。図13の例では、カラーモードのパラメータによる絞り込みが可能であるので「カラーですか?白黒ですか?」との質問240が表示されている。なお、図13の例では、ユーザは、「白黒で」と指示241を発声している。
時点12の操作画面は、ユーザの指示241に対する検索結果を示す画面である。この例では、検索結果の数が3個に絞り込まれているので、検索結果の数を提示する文242と、該当するジョブメモリ名を提示する3個のボタン233Aが提示されている。図13の場合、文242は「3件ありました」である。
ジョブメモリ名を正確に覚えていない場合、検索結果の数は必然的に多くなるが、対話形式で絞り込み条件を入力できるので、ユーザの意図するジョブメモリに効率的にたどり着くことが可能になる。
<画面4>
図14は、検索結果の数が4個以上であるが3個以下への絞り込みが可能な場合の操作画面の他の例を説明する図である。図14には、図13との対応部分に対応する符号を付して示している。
図14に示す操作画面も、ステップ15(図7参照)で3個以下に絞り込める他のパラメータが有ると判定された場合に表示される。
時点T1の操作画面は初期画面であるので図13と共通する。
時点T11の操作画面も、絞り込みに用いるパラメータや概念の確認を求める画面である。ただし、図14の例では、まとめ印刷のパラメータによる絞り込みが可能であるので「2アップですか?」との質問240Aが表示されている。なお、図14の例では、ユーザは、「はい」と指示241Aを発声している。
時点12の操作画面は、ユーザの指示241Aに対する検索結果を示す画面である。この例では、検索結果の数が3個に絞り込まれているので、検索結果の数を提示する文242と、該当するジョブメモリ名を提示する3個のボタン243が提示されている。図13の場合、文242は「3件ありました」であり、ボタン243は「白黒2アップ」、「カラー2アップ」、「2アップ両面」の3つである。
<画面5>
図15は、検索結果の数が4個以上であるが使用頻度による3個以下への絞り込みが可能な場合の操作画面の他の例を説明する図である。図15には、図10との対応部分に対応する符号を付して示している。
図15に示す操作画面は、ステップ16(図7参照)の判定結果が1個又は3個以下の場合に表示される。
時点T1の操作画面は初期画面であるので図10と共通する。
時点T21の操作画面は、使用頻度で1個に絞り込める場合に表示される確認用の画面である。図15の例では、確認文251として「カラー2アップでよろしいですか?」と表示されている。なお、他の画面例と同様に、ジョブメモリ名のボタンを表示してもよい。
時点T22の操作画面は、使用頻度で3個以下に絞り込める場合に表示される確認用の画面である。図15の例では、「以下の候補が見つかりました」との文252と、該当するジョブメモリ名を提示する3個のボタン253が提示されている。図15の場合、ボタン253は「白黒コピー」、「カラー2アップ」、「その他」の3つである。
<画面6>
図16は、検索結果の数が4個以上である場合に検索結果の数を3個以下に絞り込めない場合の操作画面の他の例を説明する図である。図16には、図10との対応部分に対応する符号を付して示している。
図16に示す操作画面は、ステップ16(図7参照)の判定結果が4個以上の場合に表示される。
時点T1の操作画面は初期画面であるので図10と共通する。
時点T2の操作画面には、ユーザに追加の条件を求める質問261と、質問261に対するユーザからの応答262が表示されている。
図16の例では、質問261として「他の条件はございますか?」が表示され、応答262として「白黒で」が表示されている。
<画面7>
図17は、図16における質問に対するユーザからの応答262が全ての検索結果の表示である場合の操作画面の例を説明する図である。図17には、図16との対応部分に対応する符号を付して示している。
時点T2の操作画面にも、ユーザに追加の条件を求める質問261と、質問261に対するユーザからの応答262が表示されている。ただし、応答262の内容が図16とは異なっている。図17の場合、応答262は「すべて表示して」である。
このため、時点T3の操作画面には、検索結果に対応する全てのジョブメモリ名に対応するボタン263が表示されている。図17では、6個のボタン263が表示されている。図17の場合、ボタン263は「白黒」、「白黒コピー」、「白黒縮小」、「コピーA」、「コピーB」、「カラー縮小」の6つである。
<画面8>
図18は、画像形成装置10(図1参照)におけるジョブメモリの登録数が0の場合の操作画面の例を説明する図である。図18には、図10との対応部分に対応する符号を付して示している。
図18の場合も、操作画面の上段には、操作の対象である画像形成装置10(図1参照)の名称である「画像形成装置A」が表示されている。
ただし、画像形成装置10には、ジョブメモリが登録されていない。このため、説明文270には「こちらは画像形成装置Aです。ジョブメモリは1件も登録されていません」と表示されている。
<実施の形態2>
前述の実施の形態1においては、端末装置20がスマートフォンである場合を想定していたが、本実施の形態では、端末装置20がウェアラブル端末である場合を想定する。
ウェアラブル端末には、例えば手首装着型のウェアラブル端末、頭部に装着されるメガネ型のウェアラブル端末がある。
メガネ型の端末には、ホログラム光学素子を組み込んだ透明板を使用する透過式と呼ばれる端末がある。ホログラム光学素子は、前方から入射する光を透過する性質と、透明板の内部を伝搬する映像光を屈折してユーザの眼球方向に出力する特性とを有している。このため、メガネ型の端末を装着したユーザは、実在する物体に仮想の画像やテキストを重ねた像を視認することが可能である。
図19は、実施の形態2で想定するシステム構成の一例を説明する図である。実施の形態2で想定するシステムは、用紙などの媒体に画像を形成する画像形成装置10と、画像形成装置10を操作するユーザが頭部に装着する端末装置20とで構成される。以下では、端末装置20をウェアラブル端末と呼ぶ。
なお、本実施の形態で使用するウェアラブル端末のハードウェア構成や機能構成は、実施の形態1で説明した端末装置20と同じである。
図19では、ウェアラブル端末を頭部に装着したユーザが見ているイメージを吹き出しで示している。本実施の形態の場合、ユーザは、目の前に実在する画像形成装置10を裸眼で確認している。吹き出し301の中の枠線302は、ウェアラブル端末が認識している物体をユーザに示す仮想の画像である。このように、実在する物体にコンピュータが作成した仮想の視覚情報を重ねる技術は、拡張現実(=Augmented Reality:AR)又は複合現実(=Mixed Reality:MR)と呼ばれる。
図19に示す例では、仮想の枠線302で囲まれた範囲の画像を解析したウェアラブル端末から「こちらは、画像形成装置Aです。何を実行しますか?」との問い合わせ303が出力されている。この問い合わせ303は、初期画面の質問230(図10参照)と同じである。なお、問い合わせ303は不図示のスピーカから出力される。
図20は、図19における問い合わせ303に対するユーザの応答304及びアプリケーション側からの質問305を説明する図である。
ユーザは応答304として「ジョブメモリを実行したい」と発話している。ユーザの発話はマイク206(図4参照)により録音され、ウェアラブル端末に取り込まれる。図20では、ユーザの応答304に対する質問305として「どんなジョブメモリを実行しますか?」を出力する。
図21は、ユーザの指示306に対してアプリケーション側から提示される仮想の画像の例を説明する図である。
図21の場合もユーザは「白黒コピーをお願い」との指示306を発話している。発話の内容は、図10の指示231と同じである。
図21の場合、検索結果を表示する領域の制約がないので、検索結果に対応するジョブメモリ名の全てが空間に浮かぶように提示される。図21の例では、8個の仮想のボタン310が空間に浮かぶように提示されている。図21の場合、8個のボタン310は、「白黒」、「会議用」、「社長用フォーマット」、「白黒g」、「白黒A」、「白黒縮小」、「白黒縮小」、「営業用」である。
図22は、検索結果の数が9個以上の場合における絞り込みの提案がアプリケーション側から提示される例を説明する図である。図22には、図21との対応部分に対応する符号を付している。
本実施の形態の場合、検索結果の数が9個以上の場合には、アプリケーション側から絞り込みの提案がある。図22の例では、質問311として「カラーですか?白黒ですか?」との提案がアプリケーション側から提示されている。この質問311に対し、ユーザは指示312として「白黒で」と答えている。
図23は、特定のジョブメモリの実行をジェスチャーにより指示する例を説明する図である。図23には、図21との対応部分に対応する符号を付している。
図23の場合、ユーザは、自身の手を空中で移動し、実行させたジョブメモリ名が記載されている仮想のボタン310の上に重ねる。タップするようなジェスチャー、仮想のボタン310を摘むようなジェスチャー等により特定のボタン310を選択した後、手を画像形成装置10と重なる位置に移動することで、ジョブメモリの呼び出しを指示する。
なお、ジョブメモリの実行の指示は、特定のジョブメモリ名を発話することでも可能である。
図24は、ジョブメモリの詳細を確認したい場合のユーザのジェスチャーを説明する図である。図24にも、図21との対応部分に対応する符号を付している。
図24の場合、ユーザは、自身の両手を仮想のボタン310の上に重ね、その後、両手を広げるようなジェスチャーを実行している。なお、「白黒縮小の詳細内容を知りたい」等の発話により指示することも可能である。
図25は、ジョブメモリの詳細内容の提示の例を説明する図である。図25にも、図21との対応部分に対応する符号を付している。
図25の例では、ユーザが選択した「白黒縮小」に対応するジョブメモリに記録されているパラメータの詳細画面313が表示されている。詳細画面313には、機能名のパラメータがコピーであること、カラーモードのパラメータが白黒であること、用紙サイズのパラメータがA4であること、縮小率のパラメータが88%であることが示されている。
<他の実施の形態>
以上、本発明の実施の形態について説明したが、本発明の技術的範囲は上述の実施の形態に記載の範囲に限定されない。上述の実施の形態に、種々の変更又は改良を加えたものも、本発明の技術的範囲に含まれることは、特許請求の範囲の記載から明らかである。
前述の実施の形態においては、検索結果の数が多い場合の絞り込みを支援する絞り込み支援モジュール225(図5参照)その他のモジュールが実行される端末装置としてスマートフォンやメガネ型のウェアラブル端末を例示したが、同機能はクラウドサービスやオンプレミス型のサービスとして提供されてもよい。すなわち、検索結果の数を絞り込む機能はサーバ上で実行され、絞り込みの結果がスマートフォンやメガネ型のウェアラブル端末を通じてユーザに提供されてもよい。サービスを提供するサーバは、情報処理装置の一例である。
また、端末装置とサーバとの協働により、前述したモジュールの機能が実行されてもよい。この場合は、端末装置とサーバとで情報処理装置が構成される。
前述の実施の形態1の説明では、図7において、パラメータによる絞り込みの可能性を判断した後に使用頻度による絞り込みの可能性を判定しているが、使用頻度の計算に使用される使用回数が増加して信頼性が高くなった場合には、使用頻度による絞り込みの可能性を先に判定し、絞り込めない場合にパラメータによる絞り込みの可能性を判定してもよい。
10…画像形成装置、20…端末装置、121…ジョブメモリ管理モジュール、122…認証モジュール、221…音声認識モジュール、222…ジョブメモリ取得モジュール、223…ジョブメモリ検索モジュール、224…使用頻度計算モジュール、225…絞り込み支援モジュール、226…ジョブメモリ指示モジュール

Claims (6)

  1. 操作の対象とする画像形成装置に登録されている、画像の形成に関するパラメータの組み合わせ情報を検索の対象として検索を実行する検索手段と、
    前記検索手段による検索結果として提示される組み合わせ情報の数を、前回の検索結果を対象とする前記検索手段による追加の検索により更に絞り込むための条件のユーザによる入力を、対話形式により支援する支援手段と
    を有し、
    前記支援手段は、前記検索結果としての組み合わせ情報が所定数以上の場合には、当該検索結果をユーザに提示する前に絞り込み条件の指定に誘導し、
    前記支援手段は、前記絞り込み条件の候補として、パラメータが関連する概念を提示する場合、パラメータと関連する概念の関係を学習した学習済みモデルに前記検索結果に含まれるパラメータを与えて関連する概念を出力し、出力された概念を当該絞り込み条件の候補として提示する、情報処理装置。
  2. 操作の対象とする画像形成装置に登録されている、画像の形成に関するパラメータの組み合わせ情報を検索の対象として検索を実行する検索手段と、
    前記検索手段による検索結果として提示される組み合わせ情報の数を、前回の検索結果を対象とする前記検索手段による追加の検索により更に絞り込むための条件のユーザによる入力を、対話形式により支援する支援手段と
    を有し、
    前記支援手段は、前記検索結果としての組み合わせ情報が所定数以上の場合には、当該検索結果をユーザに提示する前に絞り込み条件の指定に誘導し、
    前記支援手段は、絞り込み後の前記検索結果の数を1つ以上かつ予め定めた個数以下にできるパラメータの候補が存在しない場合、絞り込みに用いるパラメータの入力をユーザに要求する、情報処理装置。
  3. 前記支援手段は、絞り込み効果が認められないパラメータを事前に提示する、請求項2に記載の情報処理装置。
  4. 請求項1又は2に記載の情報処理装置は、ユーザが頭部に装着するメガネ型の端末又は携帯型の端末である。
  5. コンピュータに、
    操作の対象とする画像形成装置に登録されている、画像の形成に関するパラメータの組み合わせ情報を検索の対象として検索を実行する機能と、
    前記検索を実行する機能による検索結果として提示される組み合わせ情報の数を、前回の検索結果を対象とする前記検索を実行する機能による追加の検索により更に絞り込むための条件のユーザによる入力を、対話形式により支援する機能と
    を実現させるためのプログラムであり、
    前記支援する機能は、前記検索結果としての組み合わせ情報が所定数以上の場合には、当該検索結果をユーザに提示する前に絞り込み条件の指定に誘導し、
    前記支援する機能は、前記絞り込み条件の候補としてパラメータが関連する概念を提示する場合、パラメータと関連する概念の関係を学習した学習済みモデルに前記検索結果に含まれるパラメータを与えて関連する概念を出力し、出力された概念を当該絞り込み条件の候補として提示する、プログラム。
  6. コンピュータに、
    操作の対象とする画像形成装置に登録されている、画像の形成に関するパラメータの組み合わせ情報を検索の対象として検索を実行する機能と、
    前記検索を実行する機能による検索結果として提示される組み合わせ情報の数を前回の検索結果を対象とする前記検索を実行する機能による追加の検索により更に絞り込むための条件のユーザによる入力を、対話形式により支援する機能と
    を実現させるためのプログラムであり、
    前記支援する機能は、前記検索結果としての組み合わせ情報が所定数以上の場合には、当該検索結果をユーザに提示する前に絞り込み条件の指定に誘導し、
    前記支援する機能は、絞り込み後の検索結果の数を1つ以上かつ予め定めた個数以下にできるパラメータの候補が存在しない場合、絞り込みに用いるパラメータの入力をユーザに要求する、プログラム。
JP2019038937A 2019-03-04 2019-03-04 情報処理装置及びプログラム Active JP7383885B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019038937A JP7383885B2 (ja) 2019-03-04 2019-03-04 情報処理装置及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019038937A JP7383885B2 (ja) 2019-03-04 2019-03-04 情報処理装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2020144469A JP2020144469A (ja) 2020-09-10
JP7383885B2 true JP7383885B2 (ja) 2023-11-21

Family

ID=72353631

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019038937A Active JP7383885B2 (ja) 2019-03-04 2019-03-04 情報処理装置及びプログラム

Country Status (1)

Country Link
JP (1) JP7383885B2 (ja)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010105179A (ja) 2008-10-28 2010-05-13 Kyocera Mita Corp 画像形成装置
JP2011113533A (ja) 2009-11-30 2011-06-09 Oki Data Corp 画像処理装置及び情報処理装置
US20130077129A1 (en) 2011-09-27 2013-03-28 Samsung Electronics Co., Ltd. Electronic apparatus, message server and method for controlling printing
JP5569638B1 (ja) 2013-08-09 2014-08-13 富士ゼロックス株式会社 画像形成装置、処理装置及びプログラム
JP2016045872A (ja) 2014-08-26 2016-04-04 京セラドキュメントソリューションズ株式会社 画像形成装置及び画像形成システム
JP2017016332A (ja) 2015-06-30 2017-01-19 京セラドキュメントソリューションズ株式会社 操作システム
JP2018010336A (ja) 2016-07-11 2018-01-18 シャープ株式会社 サーバ装置、画像形成装置、情報処理装置、画像形成制御方法、及び画像形成制御プログラム
JP2018120370A (ja) 2017-01-24 2018-08-02 京セラドキュメントソリューションズ株式会社 情報処理装置
JP2018128843A (ja) 2017-02-08 2018-08-16 株式会社リコー 情報処理システム、端末装置、情報処理方法およびプログラム
JP2018151805A (ja) 2017-03-13 2018-09-27 日本電気株式会社 データ項目名推定装置、データ項目名推定方法、及びプログラム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11296533A (ja) * 1998-04-08 1999-10-29 Nippon Telegr & Teleph Corp <Ntt> データベース検索装置および方法とデータベース検索プログラムを記録した記録媒体

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010105179A (ja) 2008-10-28 2010-05-13 Kyocera Mita Corp 画像形成装置
JP2011113533A (ja) 2009-11-30 2011-06-09 Oki Data Corp 画像処理装置及び情報処理装置
US20130077129A1 (en) 2011-09-27 2013-03-28 Samsung Electronics Co., Ltd. Electronic apparatus, message server and method for controlling printing
JP5569638B1 (ja) 2013-08-09 2014-08-13 富士ゼロックス株式会社 画像形成装置、処理装置及びプログラム
JP2016045872A (ja) 2014-08-26 2016-04-04 京セラドキュメントソリューションズ株式会社 画像形成装置及び画像形成システム
JP2017016332A (ja) 2015-06-30 2017-01-19 京セラドキュメントソリューションズ株式会社 操作システム
JP2018010336A (ja) 2016-07-11 2018-01-18 シャープ株式会社 サーバ装置、画像形成装置、情報処理装置、画像形成制御方法、及び画像形成制御プログラム
JP2018120370A (ja) 2017-01-24 2018-08-02 京セラドキュメントソリューションズ株式会社 情報処理装置
JP2018128843A (ja) 2017-02-08 2018-08-16 株式会社リコー 情報処理システム、端末装置、情報処理方法およびプログラム
JP2018151805A (ja) 2017-03-13 2018-09-27 日本電気株式会社 データ項目名推定装置、データ項目名推定方法、及びプログラム

Also Published As

Publication number Publication date
JP2020144469A (ja) 2020-09-10

Similar Documents

Publication Publication Date Title
JP6351562B2 (ja) 情報処理システム、受付サーバ、情報処理方法及びプログラム
JP3728304B2 (ja) 情報処理方法、情報処理装置、プログラム、及び記憶媒体
US11355106B2 (en) Information processing apparatus, method of processing information and storage medium comprising dot per inch resolution for scan or copy
US20200177747A1 (en) Information processing system, method of processing information and storage medium
JP2022048149A (ja) 画像処理装置、画像処理装置の制御方法、およびプログラム
JP2009116841A (ja) 入力装置
US20200076969A1 (en) Image forming system equipped with interactive agent function, method of controlling same, and storage medium
JP7263869B2 (ja) 情報処理装置及びプログラム
US11792338B2 (en) Image processing system for controlling an image forming apparatus with a microphone
EP3716040A1 (en) Image forming apparatus and job execution method
JP2010224890A (ja) 操作画面制御装置、画像形成装置、およびコンピュータプログラム
TWI453655B (zh) 多功能事務機及其警示方法
US11838459B2 (en) Information processing system, information processing apparatus, and information processing method
JP2020123817A (ja) 画像形成システム、画像形成装置、画像形成方法及びプログラム
US20060293896A1 (en) User interface apparatus and method
US20200366800A1 (en) Apparatus
JP7383885B2 (ja) 情報処理装置及びプログラム
JP2011193139A (ja) 画像形成装置
JP2002342049A (ja) 音声対応印刷処理システムおよびその制御方法、並びに記録媒体、コンピュータプログラム
JP7333761B2 (ja) システム及び画像形成システム
JP7468360B2 (ja) 情報処理装置および情報処理方法
JP7314499B2 (ja) 情報処理システム、情報処理装置、ジョブ制御方法およびジョブ制御プログラム
JP7286321B2 (ja) 情報処理システム、情報処理装置、制御方法、プログラム
WO2019142420A1 (ja) 情報処理装置および情報処理方法
JP2020181044A (ja) 情報処理装置、その制御方法、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220217

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230126

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230330

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230704

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230831

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231010

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231023

R150 Certificate of patent or registration of utility model

Ref document number: 7383885

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150