JP7434519B2 - 印刷制御システムおよび制御方法 - Google Patents

印刷制御システムおよび制御方法 Download PDF

Info

Publication number
JP7434519B2
JP7434519B2 JP2022209294A JP2022209294A JP7434519B2 JP 7434519 B2 JP7434519 B2 JP 7434519B2 JP 2022209294 A JP2022209294 A JP 2022209294A JP 2022209294 A JP2022209294 A JP 2022209294A JP 7434519 B2 JP7434519 B2 JP 7434519B2
Authority
JP
Japan
Prior art keywords
print
content
service
printing
audio device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022209294A
Other languages
English (en)
Other versions
JP2023036866A (ja
Inventor
貴大 阪本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2022209294A priority Critical patent/JP7434519B2/ja
Publication of JP2023036866A publication Critical patent/JP2023036866A/ja
Application granted granted Critical
Publication of JP7434519B2 publication Critical patent/JP7434519B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00352—Input means
    • H04N1/00403—Voice input means, e.g. voice commands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
    • G06F3/1256—User feedback, e.g. print preview, test print, proofing, pre-flight checks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
    • G06F3/1257—Configuration of print job parameters, e.g. using UI at the client by using pre-stored settings, e.g. job templates, presets, print styles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • G06F3/1279—Controller construction, e.g. aspects of the interface hardware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • G06F3/1285—Remote printer device, e.g. being remote from client or server
    • G06F3/1287—Remote printer device, e.g. being remote from client or server via internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00488—Output means providing an audible output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G06F3/1207—Improving or facilitating administration, e.g. print management resulting in the user being informed about print result after a job submission
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00318—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a multi-media apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0074—Arrangements for the control of a still picture apparatus by the connected apparatus
    • H04N2201/0075—Arrangements for the control of a still picture apparatus by the connected apparatus by a user operated remote control device, e.g. receiving instructions from a user via a computer terminal or mobile telephone handset

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Accessory Devices And Overall Control Thereof (AREA)
  • Facsimiles In General (AREA)

Description

本発明は、印刷制御システムおよび制御方法に関するものである。
携帯端末に表示される印刷ボタンが押下されることで印刷指示を実行する技術が特許文献１に開示されている。
特開２０１５－１０００２０号公報
しかしながら、特許文献１では、印刷を指示するためにユーザは印刷ボタンを押下する必要がある。近年、様々な場面で印刷装置が使用されており、印刷に関わる操作性を更に向上させる技術が求められていた。
音声デバイスを介して利用される印刷コンテンツ生成サービスと、前記印刷コンテンツ生成サービスが生成した印刷コンテンツを印刷装置に印刷させるための指示を発行可能な印刷サービスが登録された音声デバイス管理サーバと通信可能であり、かつ、前記印刷装置において実行される印刷処理のための指示を生成可能な印刷制御システムであって、前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツを取得する取得手段と、前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツのデータフォーマットに基づいて、印刷処理を実行するための印刷設定情報を特定する特定手段と、を有し、前記印刷コンテンツおよび前記印刷設定情報に基づく印刷処理が前記印刷装置において実行され、前記印刷コンテンツ生成サービスの利用を要求する発話を前記音声デバイスが受信することで前記印刷コンテンツ生成サービスが印刷コンテンツを生成し、かつ、印刷に関わる機能を備えるサービスとして複数の印刷サービスが特定された場合、前記音声デバイスにより、印刷に関わる機能を備えるサービスとしてどのサービスを利用するかを問い合わせることを特徴とする。
本願発明により、印刷に関わるユーザの操作負荷を軽減することが可能となる。
印刷システムの構成の一例を示す図である。 音声デバイス１００の概略構成を示すブロック図である。 ＭＦＰ５００の概略構成を示すブロック図である。 音声デバイスアプリ管理サービス２００、アプリ３００および印刷管理サービス４００の概略構成を示すブロック図である。 音声デバイス１００とＭＦＰ５００を紐づける際のシーケンス図である。 音声指示に基づく印刷処理のシーケンス図である。 音声指示に基づく印刷処理のシーケンス図である。 印刷に必要な設定値の決定処理を含むシーケンス図である。 印刷アプリ３１０により実行されるフローチャートである。
以下、添付図面を参照して本発明の実施の形態を詳しく説明する。なお、以下の実施の形態は、特許請求の範囲に係る本発明を限定するものでなく、また本実施の形態で説明されている特徴の組み合わせの全てが本発明の解決手段に必須のものとは限らない。
まず、本発明の基本となる印刷システムの構成について説明する。
図１は、本実施例に係る印刷システムの構成の一例を示すブロック図である。図１に示す印刷システムは、音声デバイス１００、音声デバイスアプリ管理サービス２００、アプリ３００、印刷管理サービス４００およびＭＦＰ５００で構成される。なお、本実施形態では、音声デバイス１００、音声デバイスアプリ管理サービス２００、アプリ３００、印刷管理サービス４００およびＭＦＰ５００がインターネットを介して接続されているものとする。まず、音声デバイス１００は、ユーザが発話した音声に対応する音声データをネットワークを介して送信可能であり、かつ、ネットワークを介して受信した音声データを音声にて出力可能である。また、音声デバイスアプリ管理サービス２００は、音声デバイス１００を管理する機能の他に、音声デバイス１００から発話データを受信したり、音声デバイス１００へ発話データを送信したりする。なお、発話データとは、音声データでも良いしテキストデータでも良い。アプリ３００は、音声デバイスアプリ管理サービス２００からの指示により起動される。また、アプリ３００は、音声デバイスアプリ管理サービス２００からのリクエスト内容に応じた印刷コンテンツの読み出しおよびユーザへのメッセージ内容を含むテキスト情報の生成を行うことも可能である。印刷管理サービス４００は複合機（ＭｕｌｔｉＦｕｎｃｔｉｏｎ Ｐｒｉｎｔｅｒ：以下ＭＦＰ）５００とインターネットを介して通信可能であり、印刷管理サービス４００から遠隔で印刷指示が可能である。なお、音声デバイスアプリ管理サービス２００、アプリ３００、印刷管理サービス４００は、各サービス提供元が用意するサーバ（またはサーバ群）上で動作する。そのため、音声デバイスアプリ管理サービス２００を、音声デバイスアプリ管理サーバ（または音声デバイス管理サーバ）２００と呼び、印刷管理サービス４００を印刷管理サーバ４００と呼ぶこともある。また、アプリ３００と印刷管理サービス４００が同一のサーバ（またはサーバ群）により提供されても良い。さらに、アプリ３００と印刷管理サービス４００を含み、ＭＦＰ５００において実行される印刷処理のための指示を生成可能なシステムを印刷制御システムと呼ぶこともある。なお、ＭＦＰ５００は、インクジェット方式で印刷を行っても良いし、電子写真方式で印刷を行っても良い。
図２は、音声デバイス１００のハードウェア構成図である。音声デバイス１００は、スピーカ１０１、ＣＰＵ１０２、ＲＯＭ１０３、マイクロフォン１０４、ＲＡＭ１０５、外部記憶装置１０６、通信部１０７、近距離無線通信部１０８を有する。なお、図２乃至図４に示すブロックは、例えば内部バスを用いて相互に接続される。また、ＣＰＵはＣｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、ＲＯＭはＲｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ、ＲＡＭはＲａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙの頭字語である。なお、これらの構成は一例であり、各装置は図示されたもの以外のハードウェアを含んでもよい。また、図２乃至図４における複数のブロックが１つのブロックにまとめられてもよいし、１つのブロックが２つ以上のブロックに分割されてもよい。すなわち、各装置は後述するような処理を実行可能な範囲で任意の構成をとることができる。
スピーカ１０１は、後述する処理により音声を発する。ＣＰＵ１０２は、システムの制御部であり、音声デバイス１００の全体を制御する。ＲＯＭ１０３は、ＣＰＵ１０２が実行する制御プログラムやデータテーブル、組み込みＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）プログラム等の固定データを格納する。本実施形態では、ＲＯＭ１０３に格納されている各制御プログラムは、ＲＯＭ１０３に格納されている組み込みＯＳの管理下で、スケジューリングやタスクスイッチ、割り込み処理等のソフトウェア実行制御を行うために用いられる。マイクロフォン１０４は、例えばユーザの発話など音声デバイスの周囲の音声を受信する。ＲＡＭ１０５は、例えばバックアップ電源を必要とするＳＲＡＭ（Ｓｔａｔｉｃ ＲＡＭ）等で構成される。なお、ＲＡＭ１０５は、不図示のデータバックアップ用の一次電池によってデータが保持されるため、プログラム制御変数等のデータを揮発させずに格納することができる。また、音声デバイス１００の設定情報や管理データ等を格納するメモリエリアもＲＡＭ１０５に格納されている。さらに、ＲＡＭ１０５は、ＣＰＵ１０２の主メモリ及びワークメモリとしても用いられる。外部記憶装置１０６は、アプリケーションソフトウェアを記憶する。通信部１０７は、例えば、ＷｉＦｉ等の所定の無線通信方式に従って通信を行うための回路やアンテナを含んで構成される。また、通信部１０７は、一時的に使用される親局（例えば、アクセスポイント、またはＷｉＦｉダイレクトのグループオーナ）として動作することもある。本実施形態の通信部１０７は、ＩＥＥＥ８０２．１１規格シリーズに準拠した無線ＬＡＮの無線通信方式に従って動作する能力を有してもよいし、他の無線通信方式に従って動作する能力を有してもよい。近距離無線通信部１０８は、音声デバイス１００から一定の近距離範囲内に存在する他の装置と無線通信する。なお、近距離無線通信部１０８は、通信部１０７と異なる無線通信方式によって通信を行い、近距離無線通信部１０８の通信速度は通信部１０７の通信速度よりも遅い。また、近距離無線通信部１０８の通信範囲は通信部１０７の通信範囲よりも狭い。本実施形態では、近距離無線通信部１０８は、Ｂｌｕｅｔｏｏｔｈ（登録商標）規格に従って動作するものとする。なお、音声デバイス１００の通信部１０７は、音声デバイス１００のセットアップ処理のために、一時的に使用される親局として動作する。
例えば、音声デバイス１００の電源がＯＮとなった場合、通信部１０７が、一時的に使用される親局として動作する。そして、音声デバイス１００のユーザは、ユーザ端末を操作して、通信部１０７が一時的に親局として動作することで作成したネットワークにユーザのユーザ端末を無線接続させる。具体的には、ユーザは、通信部１０７が一時的に親局として動作することで作成したネットワークのＳＳＩＤをユーザ端末を操作して選択することで、ユーザ端末と音声デバイス１００間の無線接続を確立させる。
そして、ユーザは、ユーザ端末にインストールされている音声デバイス１００に対応するアプリケーションにより提供される設定画面を使って、音声デバイス１００をインフラストラクチャー接続させるためのＳＳＩＤおよびパスワードを入力する。なお、ここで入力されるＳＳＩＤ等は、音声デバイス１００の外部であり、かつ、ユーザ端末の外部である外部アクセスポイント等の外部親局が作成したネットワークに対応する。
上述した設定画面に入力されたＳＳＩＤおよびパスワードが、通信部１０７が一時的に親局として動作することで作成したネットワークを介してユーザ端末から音声デバイス１００に送信される。音声デバイス１００は、受信したＳＳＩＤおよびパスワードを使って接続処理を実行することで図１のようなシステムが構築される。なお、本実施形態では、通信部１０７が一時的に親局として生成したネットワークを利用したが、例えば近距離無線通信部１０８を使って音声デバイス１００とユーザ端末を無線接続させることで、上述したセットアップ処理が実行されても良い。
図３は、画像処理装置としてのＭＦＰ５００の概略構成を示すブロック図である。なお、本明細書では、周辺装置として専らＭＦＰを例に説明することとするが、画像処理装置、複写機、ファクシミリ、単機能の印刷装置等であってもよい。
ＭＦＰ５００において、印刷機能はプリンタ部５０１、スキャナ機能はスキャナ部５０２であり、ストレージ機能はメモリカード装着部５０３及びメモリカード５０４で実現される。
プリンタ部５０１は、外部から受信した画像データやメモリカード５０４に格納されている画像データ等を、インクジェット方式や電子写真方式などの記録方式によって印刷用紙に印刷する。また、プリンタ部５０１は、インク残量を含むインク情報や積載用紙の枚数を含む用紙情報も管理している。
スキャナ部５０２は、原稿台（不図示）にセットされた原稿を光学的に読み取って電子データに変換し、更に指定されたファイル形式に変換した画像データを、ネットワーク経由で外部装置に送信、或いはＨＤＤ等の保存領域（不図示）に格納する。また、コピーサービスは、原稿台に置かれた原稿をスキャナ部５０２で読み取って生成した画像データをプリンタ部５０１へ転送し、プリンタ部５０１が印刷用紙にその画像データを印刷することで実現される。
メモリカード装着部５０３に装着されたメモリカード５０４には、各種ファイルデータが格納される。このファイルデータは、ネットワークを介した外部装置から読み出して編集されることもある。また、外部装置からメモリカード５０４にファイルデータを格納することも可能である。
さらに、ＭＦＰ５００は、ＣＰＵ５０５、プログラムメモリ５０６、ワーキングメモリ５０８、表示部５０９、操作部５１０、ネットワーク通信部５１２、ネットワーク接続部５１３、フラッシュメモリ５１１を備える。ＣＰＵ５０５は、ＭＦＰ５００内の各部を制御するための中央演算装置である。プログラムメモリ５０６は、ＲＯＭなどで構成され、各種のプログラムコードや、サーバ装置と通信するためのアプリケーション５０７が格納されている。また、アプリケーション５０７はプリンタ部５０１にアクセスしてインクや用紙などの消耗品情報を取得する。ワーキングメモリ５０８は、ＲＡＭなどで構成され、各サービス実行時に画像データなどを一時格納したり、バッファリングしたりする。表示部５０９は、例えばＬＣＤで構成され、各種の情報を表示する。操作部５１０は、ユーザが各種の入力操作を行うためのスイッチ等からなる。
ネットワーク通信部５１２は、ＭＦＰ５００をネットワークに接続して各種通信を行う。なお、基本的には上述した通信部１０７と同じである。インターネット等のネットワークとは、ネットワーク接続部５１３を介して接続可能である。ネットワーク通信部５１２は、有線ＬＡＮや無線ＬＡＮに対応し、有線ＬＡＮ対応の場合のネットワーク接続部５１３は有線ＬＡＮのケーブルを接続するためのコネクタであり、無線ＬＡＮ対応の場合のネットワーク接続部５１３はアンテナとなる。なお、本実施形態では、無線ＬＡＮにて画像処理装置が無線通信する場合、ＩＥＥＥ８０２．１１規格シリーズに準拠した無線通信を行うものとする。また、ネットワーク通信部５１２は、有線ＬＡＮによる有線通信と無線ＬＡＮによる無線通信を排他的に行ってもよいし、並行して行っても良い。なお、ネットワーク接続部５１３が、有線ＬＡＮおよび無線ＬＡＮの両者に対応していても良い。フラッシュメモリ５１１は、ネットワーク通信部５１２が受信した画像データなどを格納するための不揮発性のメモリである。また、後述するＭＦＰ５００の処理は、ＣＰＵ５０５が、処理に必要なプログラムを読み出して実行することで実現される。また、不図示ではあるが、画像処理装置も、Ｂｌｕｅｔｏｏｔ（登録商標）規格に従って近距離無線通信を行っても良い。さらにこの近距離無線通信と上述した無線ＬＡＮによる無線通信は、別々のチップにより実現されても良いし、同一チップにより実現されても良い。
図４は、音声デバイスアプリ管理サービス２００、アプリ３００、および印刷管理サービス４００が動作可能なサーバの概略構成を示すブロック図である。
ＣＰＵ２０１は、以下の各部を制御するための中央演算装置である。記憶装置２１０は、ＣＰＵ２０１が読み出すアプリケーションプログラム２１１やデータベース２１２やＯＳのほか各種ファイルを格納する。外部記憶メディア読取装置２０２は、ＳＤカード等の外部記憶媒体に格納されたファイル等の情報を読み出すための装置である。メモリ２０３はＲＡＭ等で構成され、ＣＰＵ２０１が必要に応じてデータの一時的格納やバッファリング等を行う。表示部２０４は、例えばＬＣＤで構成され、各種情報を表示する。操作部２０５は、ユーザが各種入力操作を行うためのキーボードやマウス等からなる。ネットワーク通信部２０６は、ネットワーク接続部２０７を介してインターネット等のネットワークと接続され、各種通信を行う。なお、基本的には上述した通信部１０７と同じである。ネットワーク通信部２０６は、有線ＬＡＮや無線ＬＡＮに対応し、有線ＬＡＮ対応の場合のネットワーク接続部２０７は有線ＬＡＮのケーブルを接続するためのコネクタであり、無線ＬＡＮ対応の場合のネットワーク接続部２０７はアンテナとなる。なお、本実施形態では、無線ＬＡＮにて画像処理装置が無線通信する場合、ＩＥＥＥ８０２．１１規格シリーズに準拠した無線通信を行うものとする。また、ネットワーク接続部２０７が、有線ＬＡＮおよび無線ＬＡＮの両者に対応していても良い。ＵＳＢ通信部２０８は、各種周辺装置とＵＳＢ接続部２０９を介して接続され、各種通信を行う。また、後述する音声デバイスアプリ管理サービス２００、アプリ３００、および印刷管理サービス４００の処理は、ＣＰＵ２０１が処理に必要なプログラムを読み出して実行することで実現される。
図１で示した印刷システムにおいて、サービスを利用するために音声デバイス１００とＭＦＰ５００を紐づける際のシーケンス図を図５に示す。ユーザは、あらかじめ音声デバイスと関連付けてある携帯端末やパーソナルコンピュータ等のユーザ端末を使用する。つまり、ユーザ端末も、インターネットを介して図１に示す各装置と通信することが可能である。ユーザ端末は、ユーザの指示に基づいて、音声デバイスアプリ管理サービス２００に対して印刷サービスの登録要求を送信する（Ｓ５０１）。この登録要求は、例えばユーザ端末にインストールされたローカルアプリケーションにより実行されても良いし、Ｗｅｂブラウザを介してＷｅｂページから実行されてもよい。
印刷管理サービス４００への登録要求を音声デバイスアプリ管理サービス２００が受信すると、印刷管理サービス４００に認証を行うためのＵＲＬに対するアクセス要求がユーザ端末に送信される（Ｓ５０２）。アクセス要求を受けたユーザ端末は、指定されたＵＲＬを用いて印刷管理サービス４００に対して認証リクエストを送信し（Ｓ５０３）、印刷管理サービス４００から認証画面を受信する（Ｓ５０４）。
ユーザは、Ｓ５０４で表示された認証画面を使用して、あらかじめ登録してある印刷管理サービス４００を利用するために必要な認証情報を入力する。例えば、ユーザが印刷管理サービス４００にログインするために登録しているユーザＩＤとパスワードが、印刷管理サービス４００を利用するために必要な認証情報に相当する。ユーザは、ユーザ端末上で印刷管理サービス４００を利用するために必要な認証情報を入力し、印刷管理サービス４００に送信（Ｓ５０５）した後、印刷管理サービス４００は認証処理を実行する。
認証処理が正常に完了した場合、印刷管理サービス４００は音声デバイスアプリ管理サービス２００へコールバックを送信する（Ｓ５０６）。音声デバイスアプリ管理サービス２００は、このコールバックにより、印刷管理サービス４００にアクセスするための認証情報を取得できる。音声デバイスアプリ管理サービス２００は、ここで取得した認証情報を使用することで印刷管理サービス４００にアクセスすることが可能となる。例えば、ユーザ端末と関連付けられた音声デバイス１００に対して、ユーザ端末のユーザが印刷サービスの利用に関する発話を行った場合、当該発話に対応するリクエストが音声デバイスアプリ管理サービス２００を介して印刷管理サービス４００へ送信される。この際、Ｓ５０６で取得された認証情報が使用される。また、印刷管理サービス４００ではアクセストークンを元にログインユーザを特定することで、ユーザが登録しているＭＦＰ５００の特定が可能となる。
ここで、音声デバイスアプリ管理サービス２００は、印刷管理サービス４００にアクセスするために必要なアクセストークンやリフレッシュトークン等の認証情報を、ユーザ端末と関連付けられている音声デバイス１００の情報とともに保存する（Ｓ５０７）。
本実施例では、音声デバイス１００とＭＦＰ５００を紐づける方法としてＯａｕｔｈと呼ばれるユーザ認証処理をもとに説明したが、音声デバイス１００とＭＦＰ５００を紐づけることが可能であれば他の方法が用いられてもよい。
続いて、音声デバイス１００から印刷機能を有する印刷アプリ３１０を介してＭＦＰ５００に印刷処理を実行させるまでの流れを、図６を用いて説明する。なお、図１に示したアプリ３００の一例が印刷アプリ３１０である。また、図６の説明において、後述するが印刷アプリ３１０は、印刷コンテンツを読み出す。そのため、印刷アプリ３１０が動作するサーバの記憶装置２１０には、コンテンツデータ（例えば、ぬり絵のコンテンツデータなど）が保存されている。なお、本実施形態では、アプリ３００をサービスと呼ぶこともある。そのため印刷アプリ３１０は、印刷サービス３１０と呼ばれることもある。
ユーザは、音声デバイス１００に対して「プリンタを起動して」と発話する（Ｓ６０１）。音声デバイス１００は、受信した発話内容に対応する発話データを音声デバイスアプリ管理サービス２００に送信する（Ｓ６０２）。なお、発話データとは、発話内容を示す音声データでも良いし、発話内容から生成されたテキストデータでもよい。
音声デバイスアプリ管理サービス２００は、音声デバイス１００から受信した発話データをもとに対象アプリを決定する。なお、音声デバイスアプリ管理サービス２００には、音声デバイス１００を使用するユーザ用に複数のアプリケーションが登録されている。当該複数のアプリケーションは、上述した音声デバイス１００に対応するアプリケーションを使って登録される。ここで、音声デバイスアプリ管理サービス２００は、発話データに含まれるキーワードにより、使用する対象アプリを決定する。なお、本実施形態では、「プリンタを起動して」というキーワードが印刷アプリ３１０を起動するためのキーワードとして登録されているとする。そのため、「プリンタを起動して」というキーワードが発話データに含まれる場合、音声デバイスアプリ管理サービス２００は印刷アプリ３１０を対象アプリとして決定する。以後、図６のシーケンスが完了するまで、音声デバイス１００に対するユーザの発話は、印刷アプリ３１０へのリクエストとなる。
音声デバイスアプリ管理サービス２００は、印刷アプリ３１０に対して印刷可能なコンテンツリストをリクエストする（Ｓ６０３）。リクエストを受信した印刷アプリ３１０は、印刷可能なコンテンツのリストを生成して（Ｓ６０４）、音声デバイスアプリ管理サービスに返す（Ｓ６０５）。ここで作成したコンテンツリストは、印刷アプリ３１０の内部に保持されていてもよいし、ユーザの属性情報等をもとに動的に生成されてもよい。印刷アプリ３１０からのレスポンスを受信した音声デバイスアプリ管理サービス２００は、音声デバイス１００を通して音声出力するためのメッセージを生成する（Ｓ６０６）。ここで生成したメッセージの内容は、ユーザに次の行動を促す内容が望ましい。例えば、印刷可能なコンテンツの選択肢を提示してユーザに選択させるような問いかけや、『はい／いいえ』のような、ユーザの次の発話が限定されるようなメッセージが考えられる。生成されたメッセージに対応する発話データは、音声デバイス１００に送信され（Ｓ６０７）、スピーカ１０１で再生されることで当該メッセージがユーザに伝達される（Ｓ６０８、Ｓ６０９）。例えば、印刷アプリ３１０が提供コンテンツとしては、ぬり絵コンテンツ、ゲームコンテンツ、五線譜コンテンツが挙げられるが、これらのコンテンツのうち少なくとも１つが提供されても良いし、他のコンテンツが提供されても良い。
メッセージを聞いたユーザは、音声デバイス１００に対して印刷したいコンテンツを発話する（Ｓ６１０）。例えば、「ぬり絵を印刷して」と発話すると、音声デバイス１００から音声デバイスアプリ管理サービス２００にユーザの発話データが送信される（Ｓ６１１）。そして、音声デバイスアプリ管理サービス２００は、印刷アプリ３１０に対してユーザが選択したコンテンツを印刷するようにリクエストする（Ｓ６１２）。なお、Ｓ６１２のリクエストに、Ｓ５０７で保存された認証情報が含まれる。
リクエストを受信した印刷アプリ３１０は、ユーザの印刷装置を特定するためのリクエストを認証情報と共に印刷管理サービス４００に送信し、ユーザ用のＭＦＰ５００を示すプリンタＩＤを取得する。さらに、印刷アプリ３１０は、Ｓ６１２で受信したリクエストに含まれる印刷コンテンツの種類をもとに印刷コンテンツ（図６の例ではぬり絵の印刷コンテンツ）を読み出し、印刷管理サービス４００に対してアップロードリクエストを送信する。このアップロードリクエストにより印刷管理サービス４００からジョブＩＤとアップロード用のＵＲＬが印刷アプリ３１０に通知される。印刷アプリ３１０は、読み出した印刷コンテンツを指定されたアップロード用のＵＲＬに保存する。さらに、印刷アプリ３１０は、当該印刷コンテンツの印刷に使用される印刷設定情報を特定する。そして、印刷アプリ３１０は、認証情報、プリンタＩＤ、ジョブＩＤ、および特定された印刷設定情報を含む印刷リクエストを印刷管理サービス４００へ送信する（Ｓ６１３）。なお、印刷設定情報には、用紙サイズ「Ａ４」、用紙タイプ「普通紙」、カラー・モノクロ「カラー」、両面・片面印刷「片面」などの設定値が含まれる。
印刷管理サービス４００は、Ｓ６１３で送信されたプリンタＩＤに対応するユーザのＭＦＰ５００を特定する。続いて印刷管理サービス４００は、Ｓ６１３で送信されたジョブＩＤに対応するアップロード用のＵＲＬから取得した印刷コンテンツとＳ６１３で送信された印刷設定情報に基づいて印刷ジョブを生成する。そして、印刷管理サービス４００は、特定されたＭＦＰ５００に印刷ジョブを送信する（Ｓ６１４）。ここで印刷ジョブを適切に送信できた場合は印刷成功のレスポンスが印刷アプリ３１０に対して送信され、印刷ジョブを適切に送信できなかった場合は印刷失敗のレスポンスが印刷アプリ３１０に対して送信される（Ｓ６１６）。なお、本実施形態では、印刷ジョブの送信結果を印刷結果としてＳ６１６で送信すると説明したが、ＭＦＰ５００の印刷処理の結果が印刷結果としてＳ６１６において送信されても良い。印刷ジョブを受信したＭＦＰ５００は、印刷ジョブに基づいて印刷を実行する（Ｓ６１５）。
印刷アプリ３１０は、ユーザに発話するメッセージを含む情報を生成して音声デバイスアプリ管理サービス２００に送信する（Ｓ６１７）。音声デバイスアプリ管理サービス２００は、Ｓ６１７において受信した情報に基づいて音声デバイス１００を通して音声出力するためのメッセージを生成する（Ｓ６１８）。生成されたメッセージに対応する発話データは、音声デバイス１００に送信され（Ｓ６１９）、スピーカ１０１で再生されることで当該メッセージがユーザに伝えられる（Ｓ６２０、Ｓ６２１）。
図６は、音声デバイス１００が受信した音声指示により印刷機能を持つ印刷アプリ３１０が単独で使用され、ＭＦＰ５００に印刷処理を実行させる印刷フローを説明した。続いて、音声デバイス１００が受信した音声指示により複数のアプリが連携して使用され、ＭＦＰ５００に印刷処理を実行させるフローを、図７を用いて説明する。ここでは、印刷アプリ３１０と連携するアプリの一例として検索機能をもつ検索アプリ（検索サービス）３２０を用いるが、例えば占いアプリや天気予報アプリ、レシピアプリ等、印刷アプリ３１０に対して印刷コンテンツを供給できればアプリの種類は問わない。なお、これらのアプリは後述するように印刷コンテンツを生成するため印刷コンテンツ生成アプリ（または印刷コンテンツ生成サービス）と呼ばれることもある。つまり、図７の例では、アプリ３００として、印刷アプリ３１０と、印刷コンテンツ生成アプリである検索アプリ３２０が存在することになる。
まず、ユーザは音声デバイス１００に対して「検索アプリを起動して」と発話する（Ｓ７０１）。音声デバイス１００は、受信した発話内容に対応する発話データを音声デバイスアプリ管理サービス２００に送信する（Ｓ７０２）。ここで、送信される発話データには、「検索アプリを起動して」というキーワードが含まれる。音声デバイスアプリ管理サービス２００は、受信した発話データをもとに対象アプリを決定する。なお、本実施形態では、「検索アプリを起動して」というキーワードが検索アプリ３２０を起動するためのキーワードとして登録されているとする。そのため、「検索アプリを起動して」というキーワードが発話データに含まれる場合、音声デバイスアプリ管理サービス２００は検索アプリ３２０を対象アプリとして決定する。
音声デバイスアプリ管理サービス２００は、起動リクエストを検索アプリ３２０に送信する（Ｓ７０３）。検索アプリ３２０は、ユーザに検索キーワードを尋ねるためのメッセージを含むテキストデータを生成し（Ｓ７０４）、音声デバイスアプリ管理サービス２００にレスポンスとして送信する（Ｓ７０５）。なお、Ｓ７０４で生成されるテキストデータは、例えば、「何を調べますか」等のメッセージを含む。
音声デバイスアプリ管理サービス２００は、検索アプリ３２０のレスポンスをもとに、ユーザに発話するメッセージを生成し（Ｓ７０６）、生成されたメッセージに対応する発話データを音声デバイス１００に送信する（Ｓ７０７）。音声デバイス１００は、受信した発話データをスピーカ１０１で再生することで、当該メッセージがユーザに伝達される（Ｓ７０８、Ｓ７０９）。
ユーザは、調べたい物事について例えば「○○について教えて」と発話すると（Ｓ７１０）、音声デバイス１００は発話データを音声デバイスアプリ管理サービス２００に送信する（Ｓ７１１）。音声デバイスアプリ管理サービス２００は、音声デバイス１００から受信した発話データに含まれる検索キーワードを検索アプリ３２０に送信する（Ｓ７１２）。検索アプリ３２０は、例えばインターネットの検索ＡＰＩに対して受信したキーワードを送信し、キーワードに対する検索結果を取得する。そして、検索アプリ３２０は、検索結果に基づいて印刷コンテンツを生成する。なお、印刷コンテンツのデータフォーマットの一例は、Ｐｏｒｔａｂｌｅ Ｄｏｃｕｍｅｎｔ Ｆｏｒｍａｔ：ＰＤＦである（Ｓ７１３）。次に検索アプリ３２０は、印刷機能をもつアプリを要求するための付加情報（以下、後続アプリ情報と記載する）と印刷コンテンツを含むレスポンスを音声デバイスアプリ管理サービス２００に返却する（Ｓ７１４）。ここで生成した印刷コンテンツは、後述する印刷アプリ３１０が参照できればよい。そのため、印刷コンテンツ自体が音声デバイスアプリ管理サービス２００に返却されてもよいし、一旦印刷コンテンツをファイルサーバ等にアップロードし、その印刷コンテンツへの参照情報（ＵＲＬ）が音声デバイスアプリ管理サービス２００に返却されてもよい。
音声デバイスアプリ管理サービス２００は、レスポンス情報に付加情報として後続アプリ情報が含まれている場合、音声デバイスアプリ管理サービス２００の管理下にあって、かつユーザが登録しているアプリ一覧から、印刷機能をもつアプリを検索する。印刷機能をもつアプリ（印刷アプリ３１０）が存在した場合、音声デバイスアプリ管理サービス２００は、印刷機能をもつアプリを用いて検索結果の印刷処理を続行するか否かの判断をユーザに促すメッセージを生成する（Ｓ７１５）。Ｓ７１５で生成されるメッセージの一例は、「検索結果を印刷アプリ３１０で印刷しますか？」などである。生成されたメッセージに対応する発話データは、音声デバイス１００に送信され（Ｓ７１６）、スピーカ１０１で再生されることで当該メッセージがユーザに伝えられる（Ｓ７１７、Ｓ７１８）。なお、音声デバイスアプリ管理サービス２００の管理下にあって、かつユーザが登録しているアプリ一覧の中に、印刷機能を持つ複数の印刷アプリが登録されていることもある。つまり、印刷コンテンツ生成アプリが生成した印刷コンテンツに基づいて印刷処理を実行可能な複数の印刷アプリが登録されていることもある。この場合、Ｓ７１５において印刷機能をもつ複数の印刷アプリが検索されることになるため、音声デバイスアプリ管理サービス２００が、複数の印刷アプリの中でどの印刷アプリを使用するかをユーザに選択させるためのメッセージを生成しても良い。複数の印刷アプリとして２つの印刷アプリが登録されていることもあるし、３つ以上の印刷アプリが登録されていることもある。このメッセージに基づいて、検索された印刷に関わる機能を備える複数のアプリの中でどのアプリを利用するかを問い合わせに関わる発話が音声デバイス１００によりなされる。そして、音声デバイスアプリ管理サービス２００が、このメッセージに対する回答を受信した場合、上述したＳ７１５の処理が再開される。また、印刷機能を持つ複数の印刷アプリの中で優先度が高いアプリが自動的に選択されても良い。なお、印刷機能を持つ印刷アプリとは、印刷アプリ３１０が以降において実行するように、印刷コンテンツ生成アプリ（本実施形態では検索アプリ３２０）が生成した印刷コンテンツを印刷装置に印刷させるための指示を発行可能な機能を持つアプリである。
また、印刷アプリ毎に、制御対象となる印刷装置が異なる。なお、このような状況を避けるため、ユーザが音声デバイスアプリ管理サービス２００に登録できる印刷アプリが１つに制限されても良い。
ここで、ユーザが印刷機能をもつアプリを音声デバイスアプリ管理サービス２００に登録していない場合、音声デバイスアプリ管理サービス２００は、管理下にあり、かつ、ユーザが未登録の印刷機能をもつアプリを検索する。そして、検索されたアプリをユーザに推薦してもよい。
ユーザは、「印刷して」または「はい」と応答すると（Ｓ７１９）、ユーザの発話が音声デバイス１００に入力される。音声デバイス１００は、上記と同様に発話データを音声デバイスアプリ管理サービス２００に送信する（Ｓ７２０）。
音声デバイスアプリ管理サービス２００は、印刷機能をもつ印刷アプリ３１０を起動し、検索アプリ３２０から受信した印刷コンテンツを含むリクエストを印刷アプリ３１０に送信する（Ｓ７２１）。なお、Ｓ７２１において送信されるリクエストには、Ｓ７１３において付加された付加情報も含まれる。
印刷アプリ３１０は、ユーザの印刷装置を特定するためのリクエストを認証情報と共に印刷管理サービス４００に送信し、ユーザ用のＭＦＰ５００を示すプリンタＩＤを取得する。さらに、印刷アプリ３１０は、リクエストに含まれる印刷コンテンツを受信した場合、印刷管理サービス４００に対してアップロードリクエストを送信する。このアップロードリクエストにより印刷管理サービス４００からジョブＩＤとアップロード用のＵＲＬが印刷アプリ３１０に通知される。印刷アプリ３１０は、読み出した印刷コンテンツを指定されたアップロード用のＵＲＬに保存する。さらに、印刷アプリ３１０は、当該印刷コンテンツの印刷に使用される印刷設定情報を特定する。なお、印刷設定情報には、用紙サイズ「Ａ４」、用紙タイプ「普通紙」、カラー・モノクロ「カラー」、両面・片面印刷「片面」などの設定値が含まれる。そして、印刷アプリ３１０は、認証情報、プリンタＩＤ、ジョブＩＤ、および特定された印刷設定情報を含む印刷リクエストを印刷管理サービス４００へ送信する（Ｓ７２２）。なお、Ｓ７２１で受信したリクエストに印刷コンテンツへの参照情報（ＵＲＬ等ファイルの実体以外の情報）が含まれる場合、印刷アプリ３１０は、参照情報をもとに印刷コンテンツを取得してからアップロードリクエストを送信する。
Ｓ７２３～Ｓ７２５は、Ｓ６１４～Ｓ６１６と基本的に同じ処理であるため詳細な説明は省略する。印刷アプリ３１０は、印刷結果を含む情報をレスポンスとして音声デバイスアプリ管理サービス２００に送信する（Ｓ７２６）。音声デバイスアプリ管理サービス２００は、印刷アプリ３１０のレスポンスを検索アプリ３２０に渡し、検索アプリ３２０はレスポンスをもとに後続処理を続行する。以上の処理により、Ｓ７１０の問い合わせを受けて実行された検索結果が、印刷物としてＭＦＰ５００から出力される。なお、Ｓ７０１のユーザの発話により天気予報アプリが起動された場合は、天気予報アプリにより生成された印刷コンテンツに基づいて今日の天気予報または１週間の天気予報が印刷物として出力される。また、Ｓ７０１のユーザの発話によりニュースアプリが起動された場合は、ニュースアプリにより生成された印刷コンテンツに基づいてニュースが印刷物として出力される。
ここで印刷アプリ３１０の処理フローを図９を用いて説明する。図９の各ステップは、印刷アプリ３１０が動作するサーバのＣＰＵ２０１が、フローチャートに関わるプログラムを読み出して実行することで実現される。なお、図９のフローチャートの各処理は、図６のＳ６１２のリクエストまたは図７のＳ７２１のリクエストを受信することで開始する。
ＣＰＵ２０１は、音声デバイスアプリ管理サービス２００からリクエストを受信する（Ｓ９０１）。なお、Ｓ９０１が、Ｓ６１２またはＳ７２１の処理に相当する。
ＣＰＵ２０１は、受信したリクエストに所定の付加情報が含まれるか否かを判定する（Ｓ９０２）。なお、所定の付加情報とは、印刷アプリ３１０とは異なる他のアプリ（本実施形態では検索アプリ３２０）によりＳ７１３からＳ７１４において付加される。
ＣＰＵ２０１は、付加情報が含まれないと判定した場合、Ｓ９０３－Ｓ９０５を実行し、付加情報が含まれると判定した場合、Ｓ９０６－Ｓ９０７を実行する。なお、Ｓ９０３－Ｓ９０５は、図６のＳ６１３に対応し、Ｓ９０６－Ｓ９０７は、図７のＳ７２２に対応する。
ＣＰＵ２０１は、受信したリクエストに含まれるコンテンツを特定する（Ｓ９０３）。本実施形態では、「ぬり絵」を示す情報が含まれるため、「ぬり絵」が特定され、記憶装置２１０から「ぬり絵」に相当する印刷コンテンツを読み出す（Ｓ９０４）。
そして、ＣＰＵ２０１は、「ぬり絵」の印刷コンテンツを印刷するための印刷設定情報を特定する（Ｓ９０５）。
ＣＰＵ２０１は、Ｓ９０５で特定された印刷設定情報を含む印刷リクエストを送信する（Ｓ９０９）。
一方、ＣＰＵ２０１は、付加情報が含まれると判定した場合、受信したリクエストに含まれる情報に基づいて印刷コンテンツのデータフォーマットが処理可能なデータフォーマットか否かを判定する（Ｓ９０６）。この判定により印刷コンテンツのデータフォーマットが処理可能なデータのフォーマットと判定された場合、ＣＰＵ２０１は、印刷コンテンツを取得する（Ｓ９０７）。本実施形態では、検索アプリ３２０が生成したＰＤＦフォーマットの印刷コンテンツが取得される。なお、上述した通りＳ９０１において受信したリクエストに印刷コンテンツの保存場所を示すＵＲＬが含まれる場合、ＣＰＵ２０１は、ＵＲＬを使って印刷コンテンツをインターネットを介して取得する。
そして、ＣＰＵ２０１は、Ｓ９０７において取得した印刷コンテンツを印刷するための印刷設定情報を特定する（Ｓ９０８）。なお、Ｓ９０８で特定される印刷設定情報は、Ｓ９０５で特定される印刷設定情報と同じ設定値で構成されていても良いし、異なる設定値で構成されていても良い。また、ＣＰＵ２０１は、Ｓ９０５で特定される印刷設定情報そのものをＳ９０７において特定しても良い。また、Ｓ９０８においてＣＰＵ２０１は、連携対象の印刷コンテンツ生成アプリがどのようなアプリケーションであっても同じ印刷設定情報を特定しても良い。例えば、検索結果の印刷コンテンツを生成する検索アプリ３２０と天気予報の印刷コンテンツを生成する天気予報アプリが前記音声デバイスアプリ管理サービス２００に登録されている状況が考えられる。この状況において、Ｓ７０１により起動されたアプリが、検索アプリであっても天気予報アプリであっても同じ印刷設定情報がＳ９０８において特定されても良い。逆に、連携対象の印刷コンテンツ生成アプリにより異なる印刷設定情報を特定しても良い。つまり、検索アプリが印刷コンテンツを生成する場合は、検索アプリに対応する印刷設定情報が特定される。一方、天気予報アプリが印刷コンテンツを生成する場合は、天気予報アプリに対応する別の印刷設定情報（つまり、検索アプリに対応する印刷設定情報とは異なる印刷設定情報）が特定されても良い。例えば、検索アプリの印刷コンテンツはモノクロで印刷されるが、天気予報アプリの印刷コンテンツはカラーで印刷されても良い。
ＣＰＵ２０１は、Ｓ９０８で特定された印刷設定情報を含む印刷リクエストを送信する（Ｓ９０９）。
また、図７においては不図示であるが、Ｓ９０６において、印刷コンテンツのデータフォーマットが処理可能なデータのフォーマットではないと判定された場合、ＣＰＵ２０１は、エラーメッセージを生成する。そしてＣＰＵ２０１は、生成された音声デバイスアプリ管理サービス２００に送信する（Ｓ９１０）。この処理により、印刷できないことを示すメッセージが音声デバイス１００からユーザに音声で通知される。
以上、本実施形態の印刷アプリ３１０は、他のアプリにより生成された印刷コンテンツに基づく印刷処理をＭＦＰ５００に実行させることが可能である。この際、音声指示で印刷処理が実行されるため印刷に関わるユーザの操作負荷を軽減できる。また、印刷アプリ３１０は、印刷設定情報を自動的に特定するため、ユーザの操作負荷を更に軽減することが可能となる。
本実施例では、印刷アプリ３１０における印刷設定情報の特定方法について、実施例１とは異なる処理を実行することで、より利便性の高い印刷処理をユーザに提供する例について説明する。
実施例１では、印刷コンテンツのファイルフォーマットとしてＰＤＦを一例にあげて説明したが、印刷コンテンツのフォーマットの他の例としては、文書ファイル（ＤＯＣＸ、ＣＳＶ等）やイメージファイル（ＪＰＥＧ、ＰＮＧ等）等も考えられる。印刷アプリ３１０では、前段階のアプリ（例えば、検索アプリ３２０）から受信した印刷コンテンツのファイル形式を識別する。そして、例えば、印刷コンテンツのファイル形式が文書ファイルと識別された場合、印刷アプリ３１０は文書ファイル用の印刷設定情報（例えば、用紙サイズとしてＡ４を含む印刷設定情報）を特定しても良い。また、印刷コンテンツのファイル形式がイメージファイルと識別された場合、印刷アプリ３１０はイメージファイル用の印刷設定情報（例えば、用紙サイズとしてＬ判を含む印刷設定情報）を特定しても良い。
また、イメージファイルであってもＡ４サイズの用紙に印刷したい事例も考えられる。そのため、印刷アプリ３１０は、印刷管理サービス４００に対して印刷のリクエストをする前に（Ｓ７２２の前に）、印刷に使用する用紙を尋ねるメッセージを生成して、音声デバイス１００に発話させても良い。ユーザとの対話例を、図８を用いて説明する。ただし、印刷アプリ３１０を起動して印刷のリクエストを実行する前段階までのフロー（Ｓ８０１～Ｓ８１２）は図６と同様のため割愛する。
印刷アプリ３１０は、音声デバイスアプリ管理サービス２００からのリクエストを受信した際、印刷するために不足している設定値がある場合は、不足している設定値を取得するためのテキストデータを生成する（Ｓ８１３）。そして、音声デバイスアプリ管理サービス２００にレスポンスする（Ｓ８１４）。印刷アプリ３１０からのレスポンスを受信した音声デバイスアプリ管理サービス２００は、テキストデータから例えば「用紙サイズはどうされますか？」等のメッセージを生成する（Ｓ８１５）。生成されたメッセージに対応する発話データは、音声デバイス１００に送信され（Ｓ８１６）、スピーカ１０１で当該メッセージが再生されることでユーザに伝達される（Ｓ８１７、Ｓ８１８）。
メッセージを聞いたユーザは、音声デバイス１００に対して応答する（Ｓ８１９）。例えば、「Ａ４用紙に印刷して」と発話すると、音声デバイス１００から音声デバイスアプリ管理サービス２００にユーザの発話データが送信される（Ｓ８２０）。
音声デバイスアプリ管理サービス２００は、印刷アプリ３１０に対してユーザが要求した用紙サイズでコンテンツを印刷するようにリクエストする（Ｓ８２１）。リクエストを受信した印刷アプリ３１０は、印刷設定情報を特定する際に指定された設定値を含む印刷設定情報（図８ではＡ４サイズを含む印刷設定情報）を特定し、印刷リクエストを送信する（Ｓ８２２）。なお、Ｓ８２２は、基本的には図６のＳ６１２や図７のＳ７２１のリクエストを受信した時と基本的には同様の処理である。
ここで、まだ設定値が不足していれば、Ｓ８１３～Ｓ８２１の処理が繰り返されてもよい。必要な設定値が揃って印刷ジョブを投入してから印刷結果をユーザに伝えるＳ８２３～Ｓ８３０までの処理は、図６と同様である。なお、この処理は、図７の他のアプリと印刷アプリ３１０が連携する処理にも適用可能である。
印刷に使用する用紙のサイズは、国や地域によって販売されているサイズが異なる。例えば、文書ファイルの印刷に使用するＡ４用紙に対してＬｅｔｔｅｒ用紙、イメージファイルの印刷に使用するＬ判用紙に対してＫＧ用紙を使用する国や地域もある。
そこで、ＭＦＰ５００が設置されている国や地域の情報を印刷アプリ３１０または印刷管理サービス４００が判定することによって用紙の種類を自動判別する。この処理により、ユーザは国や地域に依存する用紙のサイズを意識することなく所望の印刷を行うことが可能になる。ここで、ＭＦＰ５００の設置されている国情報の判定は、国や地域が特定できればその手段は問わず、例えばＭＦＰ５００が接続されているネットワークのグローバルＩＰアドレスを元に推定してもよい。また、ＭＦＰ５００の設定値としてユーザに自分の居住国を設定させ、当該設定値に基づいて判定が実行されてもよい。
印刷の設定値は、例えば印字の濃淡や余白の有無等、用紙の種類以外にも多々ある。実施例１では言及しなかったが、印刷時に使用する設定値をユーザが指定できれば、よりユーザの嗜好に合った印刷が可能となる。これらの設定値は、ユーザが印刷アプリ３１０を音声デバイスアプリ管理サービス２００に登録した際に、設定しておいてもよいし、音声で印刷を実行する前段階で、図８のＳ８１３～Ｓ８２１の処理を繰り返して設定してもよい。
印刷に必要な設定値を決めるためには、先に述べたようにユーザとの対話を繰り返して収集する必要がある。しかし、対話の回数が増えると詳細な設定ができるようになる一方で、ユーザの負荷が増えるおそれがあった。そこで、印刷部数など、特別な場合を除いてあまり変更しない設定値はデフォルト値として設定しておき、対話中にユーザから指定があった設定項目のみ上書きするようにすることもできる。例えば、ユーザから要求が無ければ１部を設定し、他の対話の中で２部印刷するよう指示があった場合は、部数を２部に変更する。以上の処理により、ユーザは１部印刷したい場合に部数の指定をする必要がなくなるため、ユーザへの負荷を抑えたうえでユーザの要求を満たした印刷が可能になる。
〔その他の実施例〕
なお、上述した実施形態では、ＭＦＰ５００に印刷ジョブを投入するサービスが印刷管理サービス４００のみであったが、ＭＦＰ５００は複数の印刷管理サービスから印刷ジョブを受け付けるように動作することも可能である。その場合、複数の印刷管理サービスのそれぞれの認証情報が音声デバイスアプリ管理サービス２００に保持される。
また、上述した実施形態は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ（ＣＰＵ、ＭＰＵ、プロセッサ等）がプログラムを読み出して実行する処理である。また、プログラムは、１つのコンピュータで実行させても、複数のコンピュータで連動させて実行させるようにしてもよい。また、上記した処理の全てをソフトウェアで実現する必要はなく、処理の一部または全部をＡＳＩＣ等のハードウェアで実現するようにしてもよい。また、ＣＰＵも１つのＣＰＵで全ての処理を行うものに限らず、複数のＣＰＵが適宜連携をしながら処理を行うものとしてもよい。
３００ アプリ
４００ 印刷管理サービス
５００ ＭＦＰ

Claims (8)

  1. 音声デバイスを介して利用される印刷コンテンツ生成サービスと、前記印刷コンテンツ生成サービスが生成した印刷コンテンツを印刷装置に印刷させるための指示を発行可能な印刷サービスが登録された音声デバイス管理サーバと通信可能であり、かつ、前記印刷装置において実行される印刷処理のための指示を生成可能な印刷制御システムであって、
    前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツを取得する取得手段と、
    前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツのデータフォーマットに基づいて、印刷処理を実行するための印刷設定情報を特定する特定手段と、を有し、
    前記印刷コンテンツおよび前記印刷設定情報に基づく印刷処理が前記印刷装置において実行され、
    前記印刷コンテンツ生成サービスの利用を要求する発話を前記音声デバイスが受信することで前記印刷コンテンツ生成サービスが印刷コンテンツを生成し、かつ、印刷に関わる機能を備えるサービスとして複数の印刷サービスが特定された場合、前記音声デバイスにより、印刷に関わる機能を備えるサービスとしてどのサービスを利用するかを問い合わせることを特徴とする印刷制御システム。
  2. 第１印刷サービスが提供するコンテンツを印刷することに対応する発話を前記音声デバイスが受信した場合、前記特定手段は、前記第１印刷サービスが保持するコンテンツに基づく印刷処理を実行するための印刷設定情報を特定し、
    前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツに基づく印刷処理を実行するために特定された前記印刷設定情報と、前記第１印刷サービスが保持するコンテンツに基づく印刷処理を実行するために特定された前記印刷設定情報は同じであることを特徴とする請求項１に記載の印刷制御システム。
  3. 前記印刷サービスが提供するコンテンツを印刷することに対応する発話を前記音声デバイスが受信した場合、前記特定手段は、前記印刷サービスが保持するコンテンツに基づく印刷処理を実行するための印刷設定情報を特定し、
    前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツに基づく印刷処理を実行するために特定された前記印刷設定情報は、前記印刷サービスが保持するコンテンツに基づく印刷処理を実行するために特定された前記印刷設定情報と異なることを特徴とする請求項１または２に記載の印刷制御システム。
  4. 前記印刷サービスが提供するコンテンツは、ぬり絵コンテンツ、ゲームコンテンツ、五線譜コンテンツの少なくとも１つであることを特徴とする請求項１乃至３の何れか１項に記載のシステム。
  5. 音声デバイスを介して利用される印刷コンテンツ生成サービスと、前記印刷コンテンツ生成サービスが生成した印刷コンテンツを印刷装置に印刷させるための指示を発行可能な印刷サービスが登録された音声デバイス管理サーバと通信可能であり、かつ、前記印刷装置において実行される印刷処理のための指示を生成可能な印刷制御システムの制御方法であって、
    前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツを取得する取得ステップと、
    前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツのデータフォーマットに基づいて、印刷処理を実行するための印刷設定情報を特定する特定ステップと、を含み、
    前記印刷コンテンツおよび前記印刷設定情報に基づく印刷処理が前記印刷装置において実行され、
    前記印刷コンテンツ生成サービスの利用を要求する発話を前記音声デバイスが受信することで前記印刷コンテンツ生成サービスが印刷コンテンツを生成し、かつ、印刷に関わる機能を備えるサービスとして複数の印刷サービスが特定された場合、前記音声デバイスにより、印刷に関わる機能を備えるサービスとしてどのサービスを利用するかを問い合わせることを特徴とする制御方法。
  6. 第１印刷サービスが提供するコンテンツを印刷することに対応する発話を前記音声デバイスが受信した場合、前記特定ステップは、前記第１印刷サービスが保持するコンテンツに基づく印刷処理を実行するための印刷設定情報を特定し、
    前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツに基づく印刷処理を実行するために特定された前記印刷設定情報と、前記第１印刷サービスが保持するコンテンツに基づく印刷処理を実行するために特定された前記印刷設定情報は同じであることを特徴とする請求項５に記載の制御方法。
  7. 前記印刷サービスが提供するコンテンツを印刷することに対応する発話を前記音声デバイスが受信した場合、前記特定ステップは、前記印刷サービスが保持するコンテンツに基づく印刷処理を実行するための印刷設定情報を特定し、
    前記印刷コンテンツ生成サービスにより生成された前記印刷コンテンツに基づく印刷処理を実行するために特定された前記印刷設定情報は、前記印刷サービスが保持するコンテンツに基づく印刷処理を実行するために特定された前記印刷設定情報と異なることを特徴とする請求項５または６に記載の制御方法。
  8. 前記印刷サービスが提供するコンテンツは、ぬり絵コンテンツ、ゲームコンテンツ、五線譜コンテンツの少なくとも１つであることを特徴とする請求項５乃至７の何れか１項に記載の制御方法。
JP2022209294A 2018-10-11 2022-12-27 印刷制御システムおよび制御方法 Active JP7434519B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022209294A JP7434519B2 (ja) 2018-10-11 2022-12-27 印刷制御システムおよび制御方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018192957A JP7210217B2 (ja) 2018-10-11 2018-10-11 印刷制御システムおよび制御方法
JP2022209294A JP7434519B2 (ja) 2018-10-11 2022-12-27 印刷制御システムおよび制御方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018192957A Division JP7210217B2 (ja) 2018-10-11 2018-10-11 印刷制御システムおよび制御方法

Publications (2)

Publication Number Publication Date
JP2023036866A JP2023036866A (ja) 2023-03-14
JP7434519B2 true JP7434519B2 (ja) 2024-02-20

Family

ID=68104484

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018192957A Active JP7210217B2 (ja) 2018-10-11 2018-10-11 印刷制御システムおよび制御方法
JP2022209294A Active JP7434519B2 (ja) 2018-10-11 2022-12-27 印刷制御システムおよび制御方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2018192957A Active JP7210217B2 (ja) 2018-10-11 2018-10-11 印刷制御システムおよび制御方法

Country Status (4)

Country Link
US (2) US10949165B2 (ja)
EP (1) EP3637751B1 (ja)
JP (2) JP7210217B2 (ja)
CN (1) CN111045610A (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022047327A (ja) * 2020-09-11 2022-03-24 キヤノン株式会社 管理システム、方法、管理サーバ、並びにプログラム

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003016000A (ja) 2001-06-29 2003-01-17 Canon Inc コンテンツ提供サーバ、ネットワーク端末装置、ネットワークシステム、コンテンツ提供方法、コンテンツ入手方法、コンピュータ読み取り可能な記録媒体、及びコンピュータプログラム
JP2005026909A (ja) 2003-06-30 2005-01-27 Kyocera Mita Corp 広域印刷システム、サーバ及び画像形成装置
JP2005092368A (ja) 2003-09-12 2005-04-07 Ricoh Co Ltd サーバ装置、サーバ方法、記録媒体、印刷システム及び印刷サービス
JP2007199779A (ja) 2006-01-23 2007-08-09 Canon Inc 印刷装置及び印刷制御方法と印刷システム
JP2012203745A (ja) 2011-03-25 2012-10-22 Brother Ind Ltd 情報処理プログラム、情報処理装置、および情報処理方法
JP2013175024A (ja) 2012-02-24 2013-09-05 Mitsubishi Electric Corp 画像出力装置および画像出力方法
JP2014016673A (ja) 2012-07-05 2014-01-30 Canon Inc 印刷制御装置、印刷制御方法およびプログラム
JP2016157486A (ja) 2016-05-12 2016-09-01 ブラザー工業株式会社 制御装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10236017A (ja) * 1997-02-21 1998-09-08 Chescom Internatl Kk 個別情報を印刷した定形印刷物及び該印刷物の印刷システム
JP2003272046A (ja) 2000-08-15 2003-09-26 Konica Corp 印刷サービス提供方法
JP2002222237A (ja) 2001-01-29 2002-08-09 Ccp:Kk コンテンツデータベースを用いたページデータ作成のためのブックオンデマンド・システム
JP4849427B2 (ja) 2001-03-22 2012-01-11 株式会社リコー 印刷システム、印刷データ処理装置、印刷システムにおける印刷方法
JP5283969B2 (ja) * 2007-05-31 2013-09-04 キヤノン株式会社 情報処理装置及び情報処理装置の制御方法
US20090089811A1 (en) 2007-09-27 2009-04-02 Andrew Rodney Ferlitsch Persistent per URL print settings
JP2015100020A (ja) 2013-11-19 2015-05-28 ブラザー工業株式会社 表示装置、および、コンピュータプログラム
US20170201647A1 (en) 2016-01-13 2017-07-13 Fuji Xerox Co., Ltd. Systems and methods for geofencing for service availability and dynamic profit calculation
CN106227476B (zh) * 2016-07-22 2019-03-08 杨天来 一种智能语音云相片打印设备
JP6929168B2 (ja) * 2017-08-31 2021-09-01 キヤノン株式会社 音声制御デバイス、印刷装置、それらの制御方法およびプログラム
CN107678704B (zh) * 2017-10-11 2021-01-08 揭阳安麦思科技有限公司 3d打印机控制装置及方法
JP7071098B2 (ja) * 2017-11-20 2022-05-18 キヤノン株式会社 音声制御システム、制御方法およびプログラム
JP7173761B2 (ja) * 2018-06-15 2022-11-16 キヤノン株式会社 印刷システム、制御方法、サーバシステム

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003016000A (ja) 2001-06-29 2003-01-17 Canon Inc コンテンツ提供サーバ、ネットワーク端末装置、ネットワークシステム、コンテンツ提供方法、コンテンツ入手方法、コンピュータ読み取り可能な記録媒体、及びコンピュータプログラム
JP2005026909A (ja) 2003-06-30 2005-01-27 Kyocera Mita Corp 広域印刷システム、サーバ及び画像形成装置
JP2005092368A (ja) 2003-09-12 2005-04-07 Ricoh Co Ltd サーバ装置、サーバ方法、記録媒体、印刷システム及び印刷サービス
JP2007199779A (ja) 2006-01-23 2007-08-09 Canon Inc 印刷装置及び印刷制御方法と印刷システム
JP2012203745A (ja) 2011-03-25 2012-10-22 Brother Ind Ltd 情報処理プログラム、情報処理装置、および情報処理方法
JP2013175024A (ja) 2012-02-24 2013-09-05 Mitsubishi Electric Corp 画像出力装置および画像出力方法
JP2014016673A (ja) 2012-07-05 2014-01-30 Canon Inc 印刷制御装置、印刷制御方法およびプログラム
JP2016157486A (ja) 2016-05-12 2016-09-01 ブラザー工業株式会社 制御装置

Also Published As

Publication number Publication date
EP3637751B1 (en) 2022-06-22
JP2020061041A (ja) 2020-04-16
US10949165B2 (en) 2021-03-16
JP7210217B2 (ja) 2023-01-23
EP3637751A1 (en) 2020-04-15
JP2023036866A (ja) 2023-03-14
US20200117422A1 (en) 2020-04-16
US20210157546A1 (en) 2021-05-27
CN111045610A (zh) 2020-04-21
US11226786B2 (en) 2022-01-18

Similar Documents

Publication Publication Date Title
JP6704881B2 (ja) システム
JP7071098B2 (ja) 音声制御システム、制御方法およびプログラム
JP7146379B2 (ja) 印刷方法、音声制御システムおよびプログラム
JP6755834B2 (ja) システムおよび印刷装置およびサーバシステムおよび制御方法およびプログラム
JP7057647B2 (ja) 音声制御システム、制御方法及びプログラム
JP7224863B2 (ja) 中継サーバおよび制御方法
JP7173761B2 (ja) 印刷システム、制御方法、サーバシステム
JP2019096295A (ja) 音声制御システム、制御方法及びプログラム
JP2019181866A (ja) 印刷制御装置、制御方法及びプログラム
JP7467022B2 (ja) システムおよび制御方法
US10089050B2 (en) Information processing device, and method and computer-readable medium therefor
JP7434519B2 (ja) 印刷制御システムおよび制御方法
JP2024109559A (ja) 画像処理システム、及びその制御方法
JP6613084B2 (ja) 情報処理装置、プログラム、情報処理方法、及び情報処理システム
US11825042B2 (en) Peripheral device management system, peripheral device management method, and printing apparatus control system
JP2021013051A (ja) 通信システム、制御方法およびプログラム
JP7135022B2 (ja) システム
JP2020052577A (ja) プログラム及び情報処理装置
JP6515879B2 (ja) 画像形成装置、端末、画像形成システム、及び画像形成方法
JP2022156542A (ja) 通信ユニット

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230120

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230120

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231031

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20231108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231128

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20231213

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240109

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240207

R151 Written notification of patent or utility model registration

Ref document number: 7434519

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151