JP2022010808A - 画像形成装置、応答通知方法及び応答通知プログラム - Google Patents

画像形成装置、応答通知方法及び応答通知プログラム Download PDF

Info

Publication number
JP2022010808A
JP2022010808A JP2020111551A JP2020111551A JP2022010808A JP 2022010808 A JP2022010808 A JP 2022010808A JP 2020111551 A JP2020111551 A JP 2020111551A JP 2020111551 A JP2020111551 A JP 2020111551A JP 2022010808 A JP2022010808 A JP 2022010808A
Authority
JP
Japan
Prior art keywords
notification
external device
image forming
forming apparatus
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2020111551A
Other languages
English (en)
Inventor
長生 勝田
Takeo Katsuda
祐介 御子柴
Yusuke Mikoshiba
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2020111551A priority Critical patent/JP2022010808A/ja
Priority to EP21172256.6A priority patent/EP3934219A1/en
Priority to US17/350,459 priority patent/US11477335B2/en
Priority to CN202110712376.5A priority patent/CN113934126B/zh
Publication of JP2022010808A publication Critical patent/JP2022010808A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00477—Indicating status, e.g. of a job
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03G—ELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
    • G03G21/00—Arrangements not provided for by groups G03G13/00 - G03G19/00, e.g. cleaning, elimination of residual charge
    • G03G21/14—Electronic sequencing control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • G06F3/1279—Controller construction, e.g. aspects of the interface hardware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00403—Voice input means, e.g. voice commands
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/0048—Indicating an illegal or impossible operation or selection to the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32502—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device in systems having a plurality of input or output devices
    • H04N1/32523—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device in systems having a plurality of input or output devices a plurality of output devices
    • H04N1/32529—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device in systems having a plurality of input or output devices a plurality of output devices of different type, e.g. internal and external devices
    • H04N1/32534—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device in systems having a plurality of input or output devices a plurality of output devices of different type, e.g. internal and external devices details of interfacing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034—Details of the connection, e.g. connector, interface
    • H04N2201/0036—Detecting or checking connection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0094—Multifunctional device, i.e. a device capable of all of reading, reproducing, copying, facsimile transception, file transception

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Facsimiles In General (AREA)
  • Control Or Security For Electrophotography (AREA)
  • Accessory Devices And Overall Control Thereof (AREA)

Abstract

【課題】外部装置から音声操作する場合において、外部装置のタイムアウトを回避可能な画像形成装置、応答通知方法及び応答通知プログラムを提供する。【解決手段】画像形成装置は、外部装置を介して入力した指示に応じて処理を実行する処理実行部と、処理の実行終了に応じた第１通知を外部装置に行う第１通知部と、第１通知に関して外部装置に設定されるタイムアウト時間前に、処理の実行が終了しないと推測される場合、第１通知とは異なる第２通知を外部装置に行う第２通知部と、を備える。【選択図】図１

Description

本発明は、画像形成装置、応答通知方法及び応答通知プログラムに関する。
ユーザーが音声を入力して指示することにより、コピー、スキャン、プリント、ＦＡＸなどの複数の機能を音声で操作することができるＭＦＰ（Multi-Function Peripheral）などの画像形成装置が知られている（特許文献１を参照）。
また、現在、多くの種類のスマートスピーカーが実用化されている。スマートスピーカーは、ユーザーの音声を取得し、取得した音声に対応する応答を音声として出力したり、取得した音声に対応する動作を、クラウドサーバーを介して、外部の機器などへ指示したりすることができる。
上述した画像形成装置とスマートスピーカーとを接続する場合には、クラウドサーバーを介して、画像形成装置にユーザーの音声指示を送信して、画像形成装置を音声で操作することが可能となる。
特開２００６－０２３６３６号公報
ところで、クラウドサーバーは、その応答動作のため、ユーザーの音声指示を画像形成装置に送信した後、画像形成装置からクラウドサーバーへ一定時間（例えば、５～７秒）応答がないと、タイムアウトになる仕様となっている場合あった。
このような仕様の場合、ユーザーの音声指示を画像形成装置に送信したとき、画像形成装置で音声指示に対する処理に時間がかかり、画像形成装置からクラウドサーバーへ一定時間内に応答できないと、クラウドサーバーはタイムアウトとなってしまう。
例えば、画像形成装置に画像形成の設定（例えば、用紙の選択など）を入力する場合、ユーザーが操作画面から直接入力する場合も、ユーザーがスマートスピーカーから音声入力する場合も、操作画面上で入力処理を行っている。そのため、スマートスピーカーから音声入力する場合は、操作画面上での設定の入力処理が終わるまで、画像形成装置からクラウドサーバーへの応答が遅れることになる。特に、入力された設定により、エラー（選択できない用紙を選択するなど）が発生したり、禁則処理（選択できない入力値かどうかの確認）が必要だったりする場合、その処理時間が長くなるため、画像形成装置からクラウドサーバーへの応答が遅れることになる。
このように、スマートスピーカーから画像形成装置を音声操作する場合、音声操作により入力する設定の内容によっては、クラウドサーバーがタイムアウトとなってしまうことがある。このような場合、例えば、クラウドサーバーのタイムアウトにより、音声操作が中断して、その後の音声操作を継続できなくなるおそれがある。また、例えば、クラウドサーバーのタイムアウトにより、最初から操作し直すことになり、音声操作による操作性が悪化するおそれがある。
本発明の目的は、外部装置から音声操作する場合において、外部装置のタイムアウトを回避可能な画像形成装置、応答通知方法及び応答通知プログラムを提供することにある。
本発明に係る画像形成装置は、
外部装置を介して入力した指示に応じて処理を実行する処理実行部と、
前記処理の実行終了に応じた第１通知を前記外部装置に行う第１通知部と、
前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う第２通知部と、
を備える。
本発明に係る応答通知方法は、
外部装置を介して入力した指示に応じて処理を実行するとき、前記処理の実行終了に応じた第１通知を前記外部装置に行い、
前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う。
本発明に係る応答通知プログラムは、
コンピューターに、
外部装置を介して入力した指示に応じて処理を実行するとき、前記処理の実行終了に応じた第１通知を前記外部装置に行う第１通知処理と、
前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う第２通知処理と、
を実行させる。
本発明によれば、外部装置から音声操作する場合において、外部装置のタイムアウトを回避することができる。
本発明の実施の形態に係る画像形成システムの概略構成を説明するブロック図である。 図１に示した画像形成システムにおいて、操作パネルから直接指示する場合の手順を説明するシーケンス図である。 図１に示した画像形成システムにおいて、音声指示に対する応答遅れはないが、エラーがある場合の手順を説明するシーケンス図である。 図１に示した画像形成システムにおいて、音声指示に対する応答遅れがあり、エラーがある場合の手順を説明するシーケンス図である。 図１に示した画像形成システムにおいて、音声指示に対する応答遅れがあり、エラーがない場合の手順を説明するシーケンス図である。 画像形成装置における制御手順を説明するフローチャートである。
以下、本発明の実施の形態について、図面を参照して詳細に説明する。
図１は、本実施の形態の画像形成システム１の概略構成を説明するブロック図である。画像形成システム１は、画像形成装置１０と、ネットワーク２０と、音声入出力装置３０と、サーバー４０とを備えている。画像形成装置１０は、ネットワーク２０を介して、音声入出力装置３０やサーバー４０と接続されている。
画像形成装置１０は、コピー、スキャン、プリント、ＦＡＸなどの複数の処理機能を備えたＭＦＰであり、ネットワーク部１１、スキャナ部１２、プリンタ部１３、ＦＡＸ部１４を備える。
ネットワーク部１１は、ＬＡＮ（Local Area Network）や電話回線などのネットワーク２０を介して、音声入出力装置３０やサーバー４０との間で各種の情報を送受信する通信処理を行う。ネットワーク２０は、ＬＡＮや電話回線に限らず、ＷＡＮ（Wide Area Network）などでもよく、また、無線、有線を問わない。
スキャナ部１２は、原稿を光学的に読み取って画像データを作成し、画像のスキャン処理を行う。スキャナ部１２は、ＡＤＦ（Auto Document Feeder）と称される自動原稿給紙装置を備えていてもよい。その場合、ユーザーがＡＤＦの原稿トレイに多数枚の原稿をセットすると、原稿を１枚ずつ自動搬送し、原稿の画像を連続して一挙にスキャン処理することができる。
プリンタ部１３は、スキャナ部１２で読み取った画像データや外部装置からの印刷用の画像データに基づいて、印刷用紙などのシート材に印刷し、画像のプリント処理を行う。例えば、コピーを行う場合には、スキャナ部１２を用いて原稿をスキャンし、プリンタ部１３を用いてシート材に印刷を行う。印刷方式としては、レーザー方式やインクジェット方式などの公知のどのような印刷方式も適用可能である。
ＦＡＸ部１４は、電話回線などのネットワーク２０を介して、スキャナ部１２で読み取った画像データの送信や外部から送信された画像データの受信を行い、画像のＦＡＸ処理を行う。
また、画像形成装置１０は、制御部１５（コンピューター）、操作パネル１６（表示部）などを備える。
制御部１５は、詳細な図示は省略するが、ＣＰＵ（Central Processing Unit）などのプロセッサーと、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）などのメモリなどを備えている。この制御部１５が、操作パネル１６からの入力や音声入出力装置３０及びサーバー４０からの入力に基づいて、上述したネットワーク部１１、スキャナ部１２、プリンタ部１３、ＦＡＸ部１４を制御する。また、この制御部１５は、操作パネル１６の制御も行っている。
操作パネル１６も、詳細な図示は省略するが、例えば、ＬＣＤ（Liquid Crystal Display）などの表示装置と表示装置の前面に取り付けられた透明なタッチパッドや入力ボタンなどを有する入力装置とから構成されている。タッチパッドや入力ボタンを用いて、操作パネル１６に入力された操作指示情報（コマンド）が制御部１５に入力される。
音声入出力装置３０は、音声を入出力する装置である。音声入出力装置３０も、詳細な図示は省略するが、マイク、スピーカー、ネットワーク部、制御部などを有する。
マイクは、外部から音声が入力されると、音声を電気信号として制御部へ出力する。スピーカーは、制御部から入力された電気信号を音声として外部に出力する。ネットワーク部は、ネットワーク２０を介して、画像形成装置１０やサーバー４０との間で各種の情報を送受信する通信処理を行う。制御部は、マイクから入力された音声の電気信号を符号化して音声データとし、ネットワーク部を介して、サーバー４０へ音声データを送信する。また、制御部は、ネットワーク部を介して、サーバー４０から送信された音声データを受信し、音声データを電気信号に変換して、スピーカーへ出力する。
サーバー４０は、詳細な図示は省略するが、ＣＰＵなどのプロセッサーと、ＲＡＭ、ＲＯＭなどのメモリなどを備えている。サーバー４０は、ネットワーク部４１、制御部４２などを有する。
ネットワーク部４１は、ネットワーク２０を介して、画像形成装置１０や音声入出力装置３０との間で各種の情報を送受信する通信処理を行う。
制御部４２は、音声入出力装置３０から送信された音声データを操作指示情報（コマンド）に変換する音声認識処理を行う。制御部４２における音声認識処理は、公知のどのような方法も適用可能である。また、制御部４２は、音声認識処理により得られたコマンドに対応する処理、例えば、音声入出力装置３０への応答処理や画像形成装置１０へのコマンドの送信を行う。例えば、音声入出力装置３０に画像形成装置１０での処理を指示する音声が入力されると、その音声の音声データをコマンドに変換し、コマンドを画像形成装置１０へ送信する。このような制御部４２における処理は、例えば、サーバー４０上のアプリケーションとして提供される。
上述した音声入出力装置３０は、所謂、スマートスピーカーとして機能し、また、サーバー４０は、ユーザーが音声入出力装置３０から入力した音声に応答したり、画像形成装置１０への指示を行ったりするクラウドサーバーとして機能する。
従って、ユーザーが音声による操作指示（音声指示）を音声入出力装置３０から入力すると、サーバー４０は、音声指示の音声データをコマンドに変換して、画像形成装置１０へ送信する。そして、画像形成装置１０は、サーバー４０から送信されたコマンドに対応する処理を行うことになる。つまり、画像形成システム１においては、音声操作により、画像形成装置１０を操作することができる。
ところで、サーバー４０は、その応答動作のため、ユーザーの音声指示を画像形成装置１０に送信した後、画像形成装置１０からサーバー４０へ一定時間応答がないと、タイムアウトになる仕様となっている場合ある。
このような仕様の場合、ユーザーの音声指示を画像形成装置１０に送信したとき、画像形成装置１０で音声指示に対する処理に時間がかかり、画像形成装置１０からサーバー４０へ一定時間内に応答できないと、サーバー４０はタイムアウトとなってしまう。
そこで、本実施の形態において、画像形成装置１０は、外部装置を介して入力した指示（音声指示）に応じて処理を実行する処理実行部と、処理の実行終了に応じた第１通知を外部装置に行う第１通知部とを備えるようにしている。また、画像形成装置１０は、第１通知に関して外部装置に設定されるタイムアウト時間前に、処理の実行が終了しないと推測される場合、第１通知とは異なる第２通知を外部装置に行う第２通知部を備えるようにしている。
本実施の形態において、外部装置は、音声入出力装置３０及びサーバー４０である。なお、音声入出力装置３０がサーバー４０の機能を有する構成であれば、外部装置は、音声入出力装置３０であってもよい。
処理実行部、第１通知部及び第２通知部は、各々、制御部１５の１つの機能として備えられている。例えば、処理実行部、第１通知部及び第２通知部は、制御部１５で実行されるプログラムとして備えられている。
処理実行部は、音声入出力装置３０及びサーバー４０を介して入力した音声指示に応じて画像形成装置１０での処理を実行する。例えば、画像形成装置１０に画像形成の設定（例えば、用紙の選択など）を音声指示により入力した場合、処理実行部は、操作パネル１６の操作画面上で画像形成の設定の入力処理を実行する。
また、第１通知部は、画像形成装置１０での処理の実行終了に応じた第１通知を音声入出力装置３０及びサーバー４０に行う（第１通知処理）。例えば、上述したように、処理実行部が画像形成の設定の入力処理を実行し、その入力処理がエラーなく終了した場合には、その実行終了に応じて、「設定しました」との旨の第１通知を音声入出力装置３０及びサーバー４０に行う。
また、第２通知部は、第１通知に関して音声入出力装置３０及びサーバー４０に設定されるタイムアウト時間前に、画像形成装置１０での処理が終了するかどうかを推測する。そして、第２通知部は、画像形成装置１０での処理がタイムアウト時間前に終了しないと推測される場合、第１通知とは異なる第２通知を音声入出力装置３０及びサーバー４０に行う（第２通知処理）。例えば、上述したように、処理実行部が画像形成の設定の入力処理を実行し、その入力処理がタイムアウト時間前に終了しないと推測される場合、「設定できません」との旨の第２通知を音声入出力装置３０及びサーバー４０に行う。
ここで、まず、図２を参照して、ユーザーが操作パネル１６から直接指示する場合の応答の手順について説明する。図２は、画像形成システム１において、操作パネル１６から直接指示する場合の手順を説明するシーケンス図である。その後、上述した構成を有する画像形成装置１０において、音声指示に対する応答の手順（応答通知方法及び応答通知プログラム）を図３～図５を参照して説明する。
（ステップＳ１）
ユーザーは、操作パネル１６において、操作画面から直接入力することにより、画像形成の設定として、「カラーモード」を選択する。
（ステップＳ２）
操作パネル１６は、ステップＳ１で「カラーモード」が選択されているので、「カラーモード」のコマンドを制御部１５に入力する。
（ステップＳ３）
制御部１５は、画像形成装置１０において、「カラーモード」を設定する処理を行う。
（ステップＳ４）
制御部１５は、画像形成装置１０で「カラーモード」を設定できない場合、操作パネル１６にエラーを出力する。例えば、画像形成装置１０が、「カラーモード」に対応せず、「モノクロモード」に対応する装置である場合、制御部１５は、画像形成装置１０で「カラーモード」を設定できないと判定し、操作パネル１６にエラーを出力する。
（ステップＳ５）
操作パネル１６は、制御部１５から入力されたエラーを操作画面に表示する。例えば、操作画面に「設定できません」と表示する。
（ステップＳ６）
操作パネル１６は、操作画面に「設定できませんと」表示することで、この旨をユーザーに通知する。
以上のように、ユーザーが画像形成の設定を操作パネル１６の操作画面から直接入力する場合は、画像形成装置１０での処理となるため、もし、設定処理に時間がかかる場合でも、操作が中断する訳ではない。
次に、音声指示に対する応答の手順であって、応答遅れはないが、エラーがある場合の手順を、図３を参照して説明する。図３は、画像形成システム１において、音声指示に対する応答遅れはないが、エラーがある場合の手順を説明するシーケンス図である。
（ステップＳ１１）
ユーザーは、音声入出力装置３０に向かって、「カラーモード」と音声で指示をする。このように、音声で指示する音声指示は、例えば、画像形成を行う条件の設定指示である。
（ステップＳ１２）
音声入出力装置３０は、入力された音声を音声データに符号化して、サーバー４０に送信する。
（ステップＳ１３）
サーバー４０（制御部４２）は、音声入出力装置３０から送信された音声データの音声認識処理を行い、ステップＳ１１で「カラーモード」と音声で指示されているので、「カラーモード」のコマンドを画像形成装置１０の制御部１５へ送信する。以降、サーバー４０は、画像形成装置１０と音声入出力装置３０との間の応答制御を行うことになる。
（ステップＳ１４）
制御部１５は、画像形成装置１０において、「カラーモード」を設定する処理を行う。このとき、制御部１５は、後述の図６（ステップＳ６４を参照）で説明するように、処理時間のタイマーＴ１の計測を開始する。また、制御部１５は、この計測を開始するより前に、図６（ステップＳ６２を参照）で説明するように、サーバー４０のタイムアウト時間に応じた応答待ち時間Ｔ０を設定している。応答待ち時間Ｔ０は、サーバー４０のタイムアウト時間に応じて適宜に変更されるが、タイムアウト時間より短い時間が設定される。
（ステップＳ１５）
制御部１５は、処理が終了し、画像形成装置１０で「カラーモード」を設定できない場合、サーバー４０にエラー（第１通知）を通知する。このときの処理時間のタイマーＴ１＜Ｔ０である。つまり、応答待ち時間Ｔ０より前に、制御部１５は、サーバー４０にエラーを通知している。そのため、この場合、サーバー４０はタイムアウトにはならない。また、ここでは、下記のステップＳ１６よりも前に、つまり、処理終了の直後に、サーバー４０にエラーを通知しており、処理開始からサーバー４０にエラーを通知するまでの時間を短くして、タイムアウトにならないようにしている。
（ステップＳ１６）
制御部１５は、画像形成装置１０で「カラーモード」を設定できない場合、操作パネル１６にエラーを出力する。
（ステップＳ１７）
操作パネル１６は、制御部１５から入力されたエラーを操作画面に表示する。例えば、操作画面に「設定できません」と表示する。
（ステップＳ１８）
サーバー４０は、制御部１５からのエラーの通知を受けて、「設定できません」との音声データを音声入出力装置３０へ送信する。
（ステップＳ１９）
音声入出力装置３０は、サーバー４０から送信された「設定できません」との音声データを電気信号に変換し、音声入出力装置３０のスピーカーへ出力し、そのスピーカーから「設定できません」との音声を出力させる。
図３に示すように、サーバー４０のタイムアウト時間が、画像形成装置１０での処理時間より長ければ、タイムアウトの問題は起きない。しかしながら、タイムアウト時間は、サーバー４０により異なることがあるため、タイムアウト時間内に画像形成装置１０での処理が終わらない場合、後述の図４、図５で示すように、ダミーの応答を行って、タイムアウトを延長するようにする。
次に、音声指示に対する応答の手順であって、応答遅れがあり、エラーがある場合の手順を、図４を参照して説明する。図４は、画像形成システム１において、音声指示に対する応答遅れがあり、エラーがある場合の手順を説明するシーケンス図である。
（ステップＳ２１～Ｓ２４）
ステップＳ２１～Ｓ２４は、図３で示したステップＳ１１～Ｓ１４と同じであるので、ここでは、重複する説明は省略する。
（ステップＳ２５）
制御部１５は、画像形成装置１０で「カラーモード」を設定する処理に時間がかかる場合、サーバー４０にダミー（第２通知）を通知する。例えば、「処理中です」との旨をダミーとして通知する。また、制御部１５は、処理にかかる時間を推測してもよいし、また、図６（ステップＳ６７を参照）で説明するように、計測している処理時間のタイマーＴ１が応答待ち時間Ｔ０を超えたら、処理に時間がかかると推測してもよい。つまり、制御部１５は、サーバー４０のタイムアウト時間の前に、サーバー４０にダミーを通知して、サーバー４０のタイムアウトを回避し、タイムアウトを延長するようにしている。
また、このとき、制御部１５は、図６（ステップＳ６９を参照）で説明するように、処理時間のタイマーＴ１をリセットし、Ｔ１＝０とする。そして、タイマーＴ１の再計測を開始する。
なお、制御部１５において、設定指示に応じた処理としては、設定指示の内容を画像形成装置１０の操作パネル１６に表示する処理、設定指示の内容に禁止された内容があるかどうかを判定する禁則処理などが含まれる。例えば、画像データを送信する場合、その宛先指定には、禁則処理が必要であり、そのような処理を行う場合、設定処理に時間がかかる場合がある。
また、ダミーとして、「処理中です」に代えて、「作業中です」、「しばらく、お待ちください」などの定型文を用いてもよいし、処理の残時間を用いてもよい。
（ステップＳ２６）
制御部１５は、画像形成装置１０で「カラーモード」を設定する処理に時間がかかる場合、操作パネル１６にダミーを出力する。例えば、「処理中です」との旨をダミーとして出力する。
（ステップＳ２７）
操作パネル１６は、制御部１５から入力されたダミーを操作画面に表示する。例えば、操作画面に「処理中です」と表示する。
（ステップＳ２８）
サーバー４０は、制御部１５からのダミーの通知を受けて、「処理中です」との音声データを音声入出力装置３０へ送信する。
（ステップＳ２９）
音声入出力装置３０は、サーバー４０から送信された「処理中です」との音声データを電気信号に変換し、音声入出力装置３０のスピーカーへ出力し、そのスピーカーから「処理中です」との音声を出力させる。
（ステップＳ３０）
制御部１５は、画像形成装置１０で「カラーモード」を設定できない場合、サーバー４０にエラー（第１通知）を通知する。ステップＳ２５で、タイマーＴ１をリセットし、Ｔ１＝０として、タイマーＴ１を再計測しており、このときの処理時間のタイマーＴ１＜Ｔ０である。つまり、再計測後の応答待ち時間Ｔ０より前に、制御部１５は、サーバー４０にエラーを通知している。そのため、この場合、サーバー４０はタイムアウトにはならない。また、ここでも、下記のステップＳ３１よりも前に、つまり、処理終了の直後に、サーバー４０にエラーを通知しており、再計測開始からサーバー４０にエラーを通知するまでの時間を短くして、タイムアウトにならないようにしている。
（ステップＳ３１～Ｓ３４）
ステップＳ３１～Ｓ３４は、図３で示したステップＳ１６～Ｓ１９と同じであるので、ここでは、重複する説明は省略する。
次に、音声指示に対する応答の手順であって、応答遅れがあり、エラーがない場合の手順を、図５を参照して説明する。図５は、画像形成システム１において、音声指示に対する応答遅れがあり、エラーがない場合の手順を説明するシーケンス図である。
（ステップＳ４１～Ｓ４９）
ステップＳ４１～Ｓ４９は、図４で示したステップＳ２１～Ｓ２９と同じであるので、ここでは、重複する説明は省略する。
（ステップＳ５０）
制御部１５は、画像形成装置１０で「カラーモード」を設定後、サーバー４０に設定完了（第１通知）を通知する。ステップＳ４５で、タイマーＴ１をリセットし、Ｔ１＝０として、タイマーＴ１を再計測しており、このときの処理時間のタイマーＴ１＜Ｔ０である。つまり、再計測後の応答待ち時間Ｔ０より前に、制御部１５は、サーバー４０に設定完了を通知している。そのため、この場合、サーバー４０はタイムアウトにはならない。また、ここでも、下記のステップＳ５１よりも前に、つまり、処理終了の直後に、サーバー４０に設定完了を通知しており、再計測開始からサーバー４０に設定完了を通知するまでの時間を短くして、タイムアウトにならないようにしている。
（ステップＳ５１）
制御部１５は、画像形成装置１０で「カラーモード」を設定後、操作パネル１６に設定完了を出力する。
（ステップＳ５２）
操作パネル１６は、制御部１５から入力された設定完了を操作画面に表示する。例えば、操作画面に「設定完了」と表示する。
（ステップＳ５３）
サーバー４０は、制御部１５からの設定完了の通知を受けて、「設定しました」との音声データを音声入出力装置３０へ送信する。
（ステップＳ５４）
音声入出力装置３０は、サーバー４０から送信された「設定しました」との音声データを電気信号に変換し、音声入出力装置３０のスピーカーへ出力し、そのスピーカーから「設定しました」との音声を出力させる。
以上のように、サーバー４０のタイムアウト時間内に画像形成装置１０での処理が終わらない場合、ダミーの応答を行って、タイムアウトを延長するようにしている。これにより、音声操作の中断や再操作を防止することができ、音声操作の操作性の悪化を防止することができる。
次に、上述した図３～図５のシーケンスにおける画像形成装置１０の制御部１５での制御手順を、図６を参照して説明する。図６は、画像形成装置１０における制御手順を説明するフローチャートである。
（ステップＳ６１）
制御部１５は、音声操作サービスが選択されているかどうかを判断する。音声操作サービスが選択されている場合（ＹＥＳ）、ステップＳ６２へ進み、選択されていない場合（ＮＯ）、ステップＳ７０に進む。音声操作サービスが選択されていない場合、例えば、前述した図２でのシーケンスが実施されることになる。また、音声操作サービスの選択は、例えば、ユーザーが予め操作パネル１６を用いて設定する。
（ステップＳ６２）
制御部１５は、サーバー４０のタイムアウト時間に応じた応答待ち時間Ｔ０を設定する。この応答待ち時間Ｔ０は、タイムアウト時間より所定時間短く設定され、例えば、タイムアウト時間を７秒とすると、応答待ち時間Ｔ０を６秒とする。
（ステップＳ６３）
制御部１５は、サーバー４０からの音声指示があるかどうかを確認する。音声指示がある場合（ＹＥＳ）、ステップＳ６４へ進み、ない場合（ＮＯ）、ステップＳ６３を繰り返す。
（ステップＳ６４）
制御部１５は、サーバー４０からの音声指示があれば、処理時間のタイマーＴ１の計測を開始する。このタイマーＴ１により、音声指示に応じて画像形成装置１０で実施される処理、例えば、上述した設定処理にかかる時間を計測する。
（ステップＳ６５）
制御部１５は、音声指示に応じて画像形成装置１０で実施される処理、例えば、上述した設定処理の実行を開始する。
（ステップＳ６６）
制御部１５は、画像形成装置１０で実施される処理が終了したかどうかを判断する。処理が終了した場合（ＹＥＳ）、ステップＳ７０へ進み、終了していない場合（ＮＯ）、ステップＳ６７に進む。つまり、制御部１５は、処理が終了するまで、後述のステップＳ６７～Ｓ６９を繰り返す。なお、処理が長引かないように、タイムアウトの延長回数の上限の設け、その上限の回数まで、後述のステップＳ６７～Ｓ６９を繰り返すようにしてもよい。
（ステップＳ６７）
制御部１５は、処理時間のタイマーＴ１と応答待ち時間Ｔ０とを比較し、Ｔ１＞Ｔ０である場合（ＹＥＳ）、ステップＳ６８へ進み、Ｔ１＞Ｔ０でない場合（ＮＯ）、ステップＳ６６に戻る。
（ステップＳ６８）
制御部１５は、Ｔ１＞Ｔ０である場合、つまり、処理時間のタイマーＴ１が応答待ち時間Ｔ０を超えたとき、ダミーをサーバー４０に通知し、また、操作パネル１６に画面表示する。例えば、「処理中です」との旨をダミーとしてサーバー４０に通知し、また、「処理中です」と操作パネル１６に画面表示する。これにより、サーバー４０は、タイムアウトとはならない。
（ステップＳ６９）
制御部１５は、処理時間のタイマーＴ１をリセットし、Ｔ１＝０とする。そして、タイマーＴ１の再計測を開始し、ステップＳ６６へ戻る。
制御部１５は、ステップＳ６７～Ｓ６９を繰り返す場合、ステップＳ６７で、Ｔ１＞Ｔ０である場合には、サーバー４０にダミーを再通知し、また、操作パネル１６にダミーを再表示することになる。
（ステップＳ７０）
制御部１５は、処理が終了した場合、処理結果をサーバー４０に通知し、また、操作パネル１６に画面表示する。例えば、図５の場合は、「設定しました」との旨をサーバー４０に通知し、また、「設定しました」と操作パネル１６に画面表示する。
このように、画像形成装置１０において、制御部１５は、音声指示に応じた処理の処理時間であるタイマーＴ１を計測し、タイマーＴ１が予め設定した応答待ち時間Ｔ０を超える場合、サーバー４０にダミーを通知している。応答待ち時間Ｔ０は、サーバー４０のタイムアウト時間より短く設定されているので、Ｔ１＞Ｔ０となったときに、サーバー４０にダミーを通知することで、サーバー４０のタイムアウトを確実に回避することができる。
以上詳しく説明したように、本実施の形態の画像形成システム１において、画像形成装置１０は、外部装置を介して入力した指示（音声指示）に応じて処理を実行する処理実行部と、処理の実行終了に応じた第１通知を外部装置に行う第１通知部とを備える。また、画像形成装置１０は、第１通知に関して外部装置に設定されるタイムアウト時間前に、処理の実行が終了しないと推測される場合、第１通知とは異なる第２通知を外部装置に行う第２通知部を備える。
このように構成した本実施の形態によれば、外部装置である音声入出力装置３０及びサーバー４０から音声操作する場合において、サーバー４０のタイムアウトを回避することができる。
従って、サーバー４０のタイムアウトにより、音声操作が中断して、その後の音声操作を継続できなくなったり、最初から操作し直すことになったりすることがなくなり、音声操作の中断や音声操作の操作性の悪化を防止することができる。
なお、上記実施の形態は、何れも本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。
１ 画像形成システム
１０ 画像形成装置
１１ ネットワーク部
１２ スキャナ部
１３ プリンタ部
１４ ＦＡＸ部
１５ 制御部
１６ 操作パネル
２０ ネットワーク
３０ 音声入出力装置
４０ サーバー
４１ ネットワーク部
４２ 制御部

Claims (12)

  1. 外部装置を介して入力した指示に応じて処理を実行する処理実行部と、
    前記処理の実行終了に応じた第１通知を前記外部装置に行う第１通知部と、
    前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う第２通知部と、
    を備える画像形成装置。
  2. 前記指示は、画像形成を行う条件の設定指示である、
    請求項１に記載の画像形成装置。
  3. 前記設定指示に応じた処理は、前記設定指示の内容を前記画像形成装置の表示部に表示する処理を含む、
    請求項２に記載の画像形成装置。
  4. 前記設定指示に応じた処理は、前記設定指示の内容に禁止された内容があるかどうかを判定する禁則処理を含む、
    請求項２又は３に記載の画像形成装置。
  5. 前記第２通知部は、前記第２通知として、処理中である旨の通知を前記外部装置に行う、
    請求項１から４のいずれか一項に記載の画像形成装置。
  6. 前記第２通知部は、前記処理の実行開始からの処理時間を計測し、前記処理時間が前記タイムアウト時間より所定時間短く設定された待ち時間を超えるとき、前記第２通知を前記外部装置に行う、
    請求項１から５のいずれか一項に記載の画像形成装置。
  7. 前記第２通知部は、前記第２通知を前記外部装置に行った後、前記処理時間を０にリセットし、前記リセットからの前記処理の処理時間を計測し、計測された前記処理時間が前記待ち時間を超えるとき、前記第２通知を前記外部装置に行う、
    請求項６に記載の画像形成装置。
  8. 前記第１通知部は、前記処理の実行終了後、前記第１通知を前記外部装置に行う、
    請求項１から７のいずれか一項に記載の画像形成装置。
  9. 前記外部装置は、ユーザーからの音声指示を入力するスマートスピーカーを有する、
    請求項１から８のいずれか一項に記載の画像形成装置。
  10. 前記外部装置は、
    ユーザーからの音声指示を入力するスマートスピーカーと、
    前記スマートスピーカーに入力された前記音声指示を前記画像形成装置に出力し、前記画像形成装置から通知された前記第１及び第２通知を前記スマートスピーカーに送信するサーバーと、
    を有する、
    請求項１から８のいずれか一項に記載の画像形成装置。
  11. 外部装置を介して入力した指示に応じて処理を実行するとき、前記処理の実行終了に応じた第１通知を前記外部装置に行い、
    前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う、
    応答通知方法。
  12. コンピューターに、
    外部装置を介して入力した指示に応じて処理を実行するとき、前記処理の実行終了に応じた第１通知を前記外部装置に行う第１通知処理と、
    前記第１通知に関して前記外部装置に設定されるタイムアウト時間前に、前記処理の実行が終了しないと推測される場合、前記第１通知とは異なる第２通知を前記外部装置に行う第２通知処理と、
    を実行させる応答通知プログラム。
JP2020111551A 2020-06-29 2020-06-29 画像形成装置、応答通知方法及び応答通知プログラム Pending JP2022010808A (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2020111551A JP2022010808A (ja) 2020-06-29 2020-06-29 画像形成装置、応答通知方法及び応答通知プログラム
EP21172256.6A EP3934219A1 (en) 2020-06-29 2021-05-05 Image forming apparatus, response notification method, and response notification program
US17/350,459 US11477335B2 (en) 2020-06-29 2021-06-17 Image forming apparatus and response notification method
CN202110712376.5A CN113934126B (zh) 2020-06-29 2021-06-25 图像形成装置、响应通知方法以及记录介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020111551A JP2022010808A (ja) 2020-06-29 2020-06-29 画像形成装置、応答通知方法及び応答通知プログラム

Publications (1)

Publication Number Publication Date
JP2022010808A true JP2022010808A (ja) 2022-01-17

Family

ID=75825520

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020111551A Pending JP2022010808A (ja) 2020-06-29 2020-06-29 画像形成装置、応答通知方法及び応答通知プログラム

Country Status (4)

Country Link
US (1) US11477335B2 (ja)
EP (1) EP3934219A1 (ja)
JP (1) JP2022010808A (ja)
CN (1) CN113934126B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023008180A (ja) * 2021-07-05 2023-01-19 富士フイルムビジネスイノベーション株式会社 印刷システム、情報処理装置及びプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005037977A (ja) * 2003-07-15 2005-02-10 Sharp Corp 情報処理装置、情報処理装置のタイムアウト回避方法、タイムアウト回避ソフトウェア及び記憶媒体
JP2006023636A (ja) 2004-07-09 2006-01-26 Canon Inc 画像形成装置
US7921208B2 (en) * 2005-10-24 2011-04-05 Sap Aktiengesellschaft Network time out handling
JP2008026945A (ja) * 2006-07-18 2008-02-07 Bank Of Tokyo-Mitsubishi Ufj Ltd タイムアウト制御システム及びタイムアウト制御方法
JP2008158808A (ja) * 2006-12-22 2008-07-10 Bank Of Tokyo-Mitsubishi Ufj Ltd タイムアウト回避プログラム及びタイムアウトの回避方法
US8639113B2 (en) * 2009-08-12 2014-01-28 International Business Machines Corporation Network protection switching
JP6197341B2 (ja) * 2013-04-09 2017-09-20 株式会社リコー 画像形成装置、電源制御システム、電源制御方法、及びプログラム
JP6020353B2 (ja) * 2013-05-29 2016-11-02 コニカミノルタ株式会社 情報処理装置、画像形成装置、遠隔操作方法、遠隔制御方法、遠隔操作プログラムおよび遠隔制御プログラム
JP7192468B2 (ja) * 2018-12-14 2022-12-20 コニカミノルタ株式会社 画像処理システム、画像処理装置、クラウドサーバおよびプログラム

Also Published As

Publication number Publication date
US11477335B2 (en) 2022-10-18
EP3934219A1 (en) 2022-01-05
US20210409562A1 (en) 2021-12-30
CN113934126B (zh) 2023-10-10
CN113934126A (zh) 2022-01-14

Similar Documents

Publication Publication Date Title
US20190349488A1 (en) Image processor and program
US9069514B2 (en) Image processing apparatus, including conversion process judging, connectable to server via network
US9648203B2 (en) Facsimile apparatus for executing direct-print reception, memory reception, and interruption printing process, and printing method for facsimile apparatus
US9111210B2 (en) Information processing apparatus and job setting method
CN113934126B (zh) 图像形成装置、响应通知方法以及记录介质
US20130251127A1 (en) Image forming apparatus and method of controlling fax thereof
US9185257B2 (en) Information processing apparatus and method for job setting within or outside range of use authority of users
US8416440B2 (en) Facsimile apparatus, and control method and storage medium therefor
US20080174792A1 (en) Image forming system
US11011165B2 (en) Voice input device, non-transitory computer readable medium storing voice input program, and voice input system
JP5539110B2 (ja) 画像処理装置
US8488162B2 (en) Communication apparatus using reconnection request, method of controlling the same, and storage medium
JP2011091531A (ja) 画像読み取りシステム、画像読み取り装置および画像読み取り方法
JP4311207B2 (ja) 処理装置
US20160350043A1 (en) Image forming apparatus
US20160080586A1 (en) Non-transitory computer readable medium, image processing apparatus, and image processing method
JP2007074064A (ja) 画像処理システム、画像読取装置、及びクライアント装置
JP2007201610A (ja) デジタル複合機
JP2019161264A (ja) 画像処理装置、画像処理装置の制御方法、画像処理装置のリモート支援システム
US20200382676A1 (en) Communication apparatus, method of controlling communication apparatus, and recording medium
JP7137128B2 (ja) 電子機器およびリモート接続制御プログラム
JP2015177503A (ja) 画像形成装置、画像形成システムおよびプログラム
JP2024014484A (ja) データ処理装置、画像形成装置及びその制御方法、並びにプログラム
JP6330620B2 (ja) 画像処理装置、通信モード切替方法
JP2023078221A (ja) 情報処理装置、情報処理方法及び情報処理プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230317

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240220

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240422