JP7491147B2 - 表示システムの制御方法、表示システム、及び、表示装置の制御方法 - Google Patents

Description

本発明は、表示システムの制御方法、表示システム、及び、表示装置の制御方法に関する。

従来、ユーザー以外の音声によって音声アシスタント機能が誤作動することを抑制する技術が知られている。例えば、特許文献１は、マイクで拾った音声と、外部機器が出力する音声との各々について音声認識を行い、各々の音声にウェイクワードが含まれている場合、音声アシスタント機能を起動させないスマートスピーカーを開示する。

特開２０１９－１８４８０９号公報

しかしながら、特許文献１は、外部機器が出力する音声の音声データを受信することが必須であるため、当該音声データを受信できない場所においてはウェイクワードに応答してしまい、ユーザー以外の音声によって音声アシスタント機能が誤作動し得る。また、特許文献１は、外部機器が出力する音声の音声データを常に解析し続ける必要があるため、処理負荷が大きい。

上記課題を解決する一態様は、音声アシスタントデバイスと、前記音声アシスタントデバイスと通信可能な表示装置を有する表示システムの制御方法であって、前記表示装置は、前記音声アシスタントデバイスに、前記表示装置が音声による第１操作を許可する第１状態と、前記第１操作を許可しない第２状態とのいずれの状態であるかを示す状態情報を送信し、前記音声アシスタントデバイスは、受信した前記状態情報が示す状態が前記第１状態である場合、ウェイクワードに基づく音声アシスタント機能を前記表示装置に対して実行し、受信した前記状態情報が示す状態が前記第２状態である場合、前記ウェイクワードに基づく前記音声アシスタント機能を前記表示装置に対して実行しない、表示システムの制御方法である。

上記課題を解決する別の一態様は、音声アシスタントデバイスと、前記音声アシスタントデバイスと通信可能な表示装置と、を有する表示システムであって、前記表示装置は、音声による第１操作を許可する第１状態と、前記第１操作を許可しない第２状態とのいずれかの状態であり、前記音声アシスタントデバイスに、前記表示装置が音声による第１操作を許可する第１状態と、前記第１操作を許可しない第２状態とのいずれの状態であるかを示す状態情報を送信し、前記音声アシスタントデバイスは、受信した前記状態情報が示す状態が前記第１状態である場合、ウェイクワードに基づく音声アシスタント機能を前記表示装置に対して実行し、受信した前記状態情報が示す状態が前記第２状態である場合、前記ウェイクワードに基づく前記音声アシスタント機能を前記表示装置に対して実行しない、表示システムである。

上記課題を解決するさらに別の一態様は、音声検出部を有し、ウェイクワードに基づく音声アシスタント機能を実行可能な表示装置の制御方法であって、第１状態と、第２状態とのいずれかの状態であり、前記表示装置の状態が音声検出部が検出した音声による操作を許可する前記第１状態であり、且つ、前記音声検出部が検出した音声に前記ウェイクワードが含まれる場合、前記ウェイクワードに応答し、前記表示装置の状態が前記音声検出部が検出した音声による操作を許可しない前記第２状態である場合、前記ウェイクワードに応答しない、表示装置の制御方法である。

プロジェクターの構成を示す図。 プロジェクターの動作を示すフローチャート。 プロジェクターの動作を示すフローチャート。 表示システムの構成を示す図。 表示システムの動作を示すフローチャート。 表示システムの動作を示すフローチャート。 プロジェクターの動作を示すフローチャート。 プロジェクターの動作を示すフローチャート。

［第１実施形態］
第１実施形態について説明する。
図１は、プロジェクター１の構成を示すブロック図である。プロジェクター１は、表示装置の一例に対応する。

プロジェクター１は、外部装置として画像供給装置２が接続される。画像供給装置２は、プロジェクター１に画像データを出力する。プロジェクター１は、画像供給装置２から入力される画像データに基づき、投写面としてのスクリーンＳＣに画像を投写する。投写は、表示の一例に対応する。

画像供給装置２から入力される画像データは、所定規格に準拠した画像データである。この画像データは、静止画像データであっても動画像データであってもよく、音声データを伴ってもよい。

画像供給装置２は、プロジェクター１に画像データを出力する、いわゆる画像ソースである。画像供給装置２の具体的な構成は制限されず、プロジェクター１に接続可能であって、プロジェクター１に画像データを出力できる機器であればよい。例えば、画像供給装置２としては、ディスク型記録メディア再生装置や、テレビチューナー装置、パーソナルコンピューター、書画カメラ等を用いてもよい。

スクリーンＳＣは、幕状のスクリーンであってもよいし、建造物の壁面や設置物の平面をスクリーンＳＣとして利用してもよい。スクリーンＳＣは平面に限らず、曲面や、凹凸を有する面であってもよい。

プロジェクター１は、ＰＪ制御部１０を備える。
ＰＪ制御部１０は、ＣＰＵやＭＰＵ等のプログラムを実行するプロセッサーであるＰＪプロセッサー１１０、及び、ＰＪ記憶部１２０を備え、プロジェクター１の各部を制御する。ＰＪ制御部１０は、ＰＪプロセッサー１１０が、ＰＪ記憶部１２０に記憶された制御プログラム１２１を読み出して処理を実行するように、ハードウェア、及びソフトウェアの協働により各種処理を実行する。また、ＰＪ制御部１０は、ＰＪプロセッサー１１０が制御プログラム１２１を読み出して実行することにより、音声データ取得部１１１、音声認識部１１２、ウェイクワード検出部１１３、音声アシスタント機能実行部１１４、操作処理部１１５、及び、投写制御部１１６として機能する。これら機能ブロックの詳細については後述する。

ＰＪ記憶部１２０は、ＰＪプロセッサー１１０が実行するプログラムや、ＰＪプロセッサー１１０により処理されるデータを記憶する記憶領域を有する。ＰＪ記憶部１２０は、プログラムやデータを不揮発的に記憶する不揮発性記憶領域を有する。また、ＰＪ記憶部１２０は、揮発性記憶領域を備え、ＰＪプロセッサー１１０が実行するプログラムや処理対象のデータを一時的に記憶するワークエリアを構成してもよい。

ＰＪ記憶部１２０は、ＰＪプロセッサー１１０が実行する制御プログラム１２１の他に、設定データ１２２、音声辞書データ１２３、及び、ウェイクワードデータ１２４を記憶する。

設定データ１２２は、プロジェクター１の動作に関する設定値を含む。設定データ１２２に含まれる設定値としては、例えば、スピーカー７１が出力する音声の音量レベルを示す設定値や、画像処理部４０及びＯＳＤ処理部５０が実行する処理内容を示す設定値、画像処理部４０及びＯＳＤ処理部５０の処理に用いるパラメーター等である。
音声辞書データ１２３は、音声認識部１１２がマイク７２により検出されたユーザーの音声を認識するためのデータである。例えば、音声辞書データ１２３は、ユーザーの音声のデジタルデータを、日本語、英語またはその他の設定された言語のテキストに変換するための辞書データを含む。
ウェイクワードデータ１２４は、予め定められた所定の文言であるウェイクワードを示すデータである。なお、ウェイクワードは、任意の語を含む文言とすることができる。

プロジェクター１は、インターフェース部２０、フレームメモリー３０、画像処理部４０、ＯＳＤ処理部５０、操作部６０、及び、音声処理部７０を備える。これらの各部は、バス１３０を介してＰＪ制御部１０とデータ通信可能に接続される。

インターフェース部２０は、所定の通信規格に準拠したコネクター及びインターフェース回路等の通信ハードウェアを備える。図１では、コネクター及びインターフェース回路についての図示を省略している。インターフェース部２０は、ＰＪ制御部１０の制御に従って、所定の通信規格に従って、画像供給装置２との間で画像データや制御データ等を送受信する。インターフェース部２０のインターフェースは、例えば、ＨＤＭＩ（High-Definition Multimedia Interface）や、Ｄｉｓｐｌａｙｐｏｒｔ、ＨＤＢａｓｅＴ、ＵＳＢ Ｔｙｐｅ－Ｃ、３Ｇ－ＳＤＩ（Serial Digital Interface）等の映像及び音声をデジタルで伝送可能なインターフェースを用いることができる。ＨＤＭＩは、登録商標である。ＨＤＢａｓｅＴは、登録商標である。また、インターフェースとして、イーサネット、ＩＥＥＥ１３９４、ＵＳＢ等のデータ通信用のインターフェースを用いることができる。イーサネットは、登録商標である。また、インターフェースとして、ＲＣＡ端子や、ＶＧＡ端子、Ｓ端子、Ｄ端子等のアナログの映像端子を備え、アナログの映像信号を送受信可能なインターフェースを用いることができる。

フレームメモリー３０、画像処理部４０、及び、ＯＳＤ処理部５０は、例えば集積回路により構成される。集積回路には、ＬＳＩ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field-Programmable Gate Array）、ＳｏＣ（System-on-a-chip）等が含まれる。また、集積回路の構成の一部にアナログ回路が含まれてもよく、ＰＪ制御部１０と集積回路とが組み合わる構成でもよい。

フレームメモリー３０は、複数のバンクを備える。各バンクは、画像データの１フレームを書き込み可能な記憶容量を有する。フレームメモリー３０は、例えば、ＳＤＲＡＭにより構成される。なお、ＳＤＲＡＭは、Ｓｙｎｃｈｒｏｎｏｕｓ Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙの略である。

画像処理部４０は、フレームメモリー３０に展開された画像データに対して、例えば、解像度変換処理又はリサイズ処理、歪曲収差の補正、形状補正処理、デジタルズーム処理、画像の色合いや輝度の調整等の画像処理を行う。画像処理部４０は、ＰＪ制御部１０により指定された処理を実行し、必要に応じて、ＰＪ制御部１０から入力されるパラメーターを使用して処理を行う。また、画像処理部４０は、上記のうち複数の画像処理を組み合わせて実行することも可能である。
画像処理部４０は、処理の終了した画像データをフレームメモリー３０から読み出してＯＳＤ処理部５０に出力する。

ＯＳＤ処理部５０は、ＰＪ制御部１０の制御に基づいて、画像処理部４０から入力された画データが示す画像上に、プロジェクター１の設定に係るユーザーインターフェースを重畳するための処理を行う。以下の説明では、当該ユーザーインターフェースを、設定ＵＩという。
ＯＳＤ処理部５０は、ＰＪ制御部１０が設定ＵＩの重畳を指示すると、画像処理部４０から入力された画像データが示す画像上の所定の位置に設定ＵＩが重畳されるように、画像処理部４０から入力される画像データに設定ＵＩの画像データを合成する。合成された画像データは、光変調装置駆動回路９２に出力される。なお、ＰＪ制御部１０から設定ＵＩを重畳する旨の指示がない場合には、ＯＳＤ処理部５０は、画像処理部４０から入力される画像データを、加工することなくそのまま光変調装置駆動回路９２に出力する。

操作部６０は、操作パネル６１、リモコン受光部６２、及び、入力処理部６３を備える。

操作パネル６１は、プロジェクター１の筐体に設けられ、ユーザーが操作可能な各種スイッチを備える。入力処理部６３は、操作パネル６１の各スイッチの操作を検出する。
リモコン受光部６２は、リモコン３が送信する赤外線信号を受光する。入力処理部６３は、リモコン受光部６２が受光した信号をデコードして、操作データを生成し、ＰＪ制御部１０に出力する。
入力処理部６３は、操作パネル６１、及び、リモコン受光部６２に接続される。入力処理部６３は、操作パネル６１またはリモコン受光部６２でユーザーの操作を受け付けた場合に、受け付けた操作に対応する操作データを生成してＰＪ制御部１０に出力する。

音声処理部７０は、スピーカー７１、マイク７２、及び、信号処理部７３を備える。マイク７２は、音声検出部の一例に対応する。

信号処理部７３は、ＰＪ制御部１０からデジタルの音声データが入力された場合、入力された音声データをデジタルからアナログに変換する。信号処理部７３は、変換したアナログの音声データをスピーカー７１に出力する。スピーカー７１は、入力される音声データに基づいて音声を出力する。
また、信号処理部７３は、マイク７２が音声を検出すると、マイク７２が検出した音声を示すアナログの音声データがマイク７２から入力される。信号処理部７３は、マイク７２から入力された音声データをアナログからデジタルに変換し、変換したデジタルの音声データをＰＪ制御部１０に出力する。

プロジェクター１は、投写部８０と、投写部８０を駆動する駆動部９０とを備える。
投写部８０は、光源部８１、光変調装置８２、及び、投写光学系８３を備える。駆動部９０は、光源駆動回路９１、及び、光変調装置駆動回路９２を備える。

光源駆動回路９１は、バス１３０を介してＰＪ制御部１０に接続され、また、光源部８１に接続される。光源駆動回路９１は、ＰＪ制御部１０の制御に従って光源部８１を点灯又は消灯させる。

光変調装置駆動回路９２は、バス１３０を介してＰＪ制御部１０に接続され、また、光変調装置８２が接続される。光変調装置駆動回路９２は、ＰＪ制御部１０の制御に従って、光変調装置８２を駆動し、光変調装置８２が具備する光変調素子にフレーム単位で画像を描画する。光変調装置駆動回路９２には、画像処理部４０からＲ、Ｇ、Ｂの各原色に対応する画像データが入力される。光変調装置駆動回路９２は、入力された画像データを、光変調装置８２が具備する光変調素子である液晶パネルの動作に適したデータ信号に変換する。光変調装置駆動回路９２は、変換したデータ信号に基づいて、各液晶パネルの各画素に電圧を印加し、各液晶パネルに画像を描画する。

光源部８１は、ハロゲンランプ、キセノンランプ、超高圧水銀ランプ等のランプ、或いは、ＬＥＤやレーザー光源等の固体光源で構成される。光源部８１は、光源駆動回路９１から供給される電力により点灯し、光変調装置８２に向けて光を発する。

光変調装置８２は、例えば、Ｒ、Ｇ、及び、Ｂの三原色に対応した３枚の液晶パネルを備える。Ｒは赤色を示し、Ｇは緑色を示し、Ｂは青色を示す。光源部８１から射出される光は、ＲＧＢの３色の色光に分離され、それぞれ対応する液晶パネルに入射される。３枚の液晶パネルの各々は、透過型の液晶パネルであり、透過する光を変調して画像光を生成する。各液晶パネルを通過して変調された画像光は、クロスダイクロイックプリズム等の合成光学系によって合成され、投写光学系８３に射出される。
本実施形態では、光変調装置８２が光変調素子として透過型の液晶パネルを備える場合を例示するが、光変調素子は反射型の液晶パネルであってもよいし、デジタルミラーデバイス（Ｄｉｇｉｔａｌ Ｍｉｃｒｏｍｉｒｒｏｒ Ｄｅｖｉｃｅ）でもよい。

投写光学系８３は、光変調装置８２により変調された画像光をスクリーンＳＣ上に結像させるレンズやミラー等を備える。投写光学系８３は、スクリーンＳＣに投写される画像を拡大又は縮小させるズーム機構や、フォーカスの調整を行うフォーカス調整機構等を備えてもよい。

次に、ＰＪ制御部１０の機能ブロックについて説明する。

音声データ取得部１１１は、音声処理部７０から、マイク７２が検出した音声を示す音声データを取得する。音声データ取得部１１１は、取得した音声データを後述する場合に音声認識部１１２に出力する。

音声認識部１１２は、音声データ取得部１１１が音声データに基づいて、マイク７２が検出した音声を認識する。音声認識部１１２は、音声認識の結果を、ウェイクワード検出部１１３、及び、音声アシスタント機能実行部１１４に出力する。例えば、音声認識部１１２は、ＰＪ記憶部１２０が記憶する音声辞書データ１２３を参照し、マイク７２が収音した音声の音声データを解析して、マイク７２が検出した音声をテキスト化する処理を行う。そして、音声認識部１１２は、テキスト化した音声データを音声認識の結果として、ウェイクワード検出部１１３、及び、音声アシスタント機能実行部１１４に出力する。

ウェイクワード検出部１１３は、音声認識部１１２が出力した音声認識の結果に、ウェイクワードが含まれているか否かを判定する。より詳細には、ウェイクワード検出部１１３は、音声認識の結果に、ウェイクワードデータ１２４が示すウェイクワードと一致する文言が含まれているか否かを判定する。例えば、ウェイクワード検出部１１３は、テキストの音声データに対して文字列検索を行うことで、ウェイクワードデータ１２４が示すウェイクワードが含まれている否かを判定する。ウェイクワード検出部１１３は、判定結果として、ウェイクワードが含まれているか否かを示すウェイクワード検出情報を、音声アシスタント機能実行部１１４に出力する。

音声アシスタント機能実行部１１４は、音声アシスタント機能を実行する。音声アシスタント機能とは、ウェイクワードに続く音声に対応する処理を行う機能である。音声アシスタント機能としては、例えば、プロジェクター１の電源のオンオフ、画像投写の開始、画像ソースの切り替え、設定ＵＩの投写、映像や音楽等の情報検索及び情報出力等が挙げられる。音声アシスタント機能実行部１１４は、ウェイクワード検出部１１３が出力するウェイクワード検出情報が、ウェイクワードを含むことを示す場合、このウェイクワードに続く音声に対応する処理を実行する。なお、音声アシスタント機能実行部１１４が実行する音声アシスタント機能に、ネットワークＮＷを利用した情報検索や情報出力が含まれる場合、プロジェクター１は、機能部として、ネットワークＮＷに接続する機器と通信可能な通信部を備える。

例えば、「マイプロジェクター 投写開始して」との音声を音声認識部１１２が認識し、「マイプロジェクター」がウェイクワードであったとする。この例の場合、音声アシスタント機能実行部１１４は、「投写開始して」との音声に基づいて、画像投写の開始を投写制御部１１６に要求することで、画像投写を開始する。

また、例えば、「マイプロジェクター 電源オンにして」との音声を音声認識部１１２が認識し、「マイプロジェクター」がウェイクワードであったとする。この例の場合、音声アシスタント機能実行部１１４は、「電源オンにして」との音声に基づいて、プロジェクター１の電源をオンにする。

また、例えば、「マイプロジェクター 設定画面を表示して」との音声を音声認識部１１２が認識し、「マイプロジェクター」がウェイクワードであったとする。この例の場合、音声アシスタント機能実行部１１４は、「設定画面を表示して」との音声に基づいて、設定ＵＩの投写の開始を投写制御部１１６に要求することで、設定ＵＩの投写を開始する。

操作処理部１１５は、操作部６０が受け付けた非音声操作に対応する処理を実行する。非音声操作とは、音声以外による操作であり、例えばプロジェクター１の筐体に設けられる各種スイッチに対する操作や、リモコン３に設けられた各種スイッチに対する操作である。非音声操作は、第２操作の一例に対応する。以下の説明において、音声による操作を、音声操作という。音声操作は、第１操作の一例に対応する。
例えば、操作処理部１１５は、操作部６０から出力された操作データが、音量を大きくする操作データである場合、設定データ１２２における音量レベルの設定値を更新することによって、スピーカー７１が出力する音声の音量レベルを現在の音量レベルより大きく設定する。

投写制御部１１６は、画像処理部４０や、ＯＳＤ処理部５０、駆動部９０等を制御して、スクリーンＳＣに画像を投写させる。

具体的には、投写制御部１１６は、画像処理部４０を制御して、フレームメモリー３０に展開された画像データを画像処理部４０に処理させる。この際、投写制御部１１６は、画像処理部４０が処理に必要なパラメーターをＰＪ記憶部１２０から読み出して画像処理部４０に出力する。

また、投写制御部１１６は、ＯＳＤ処理部５０を制御して、画像処理部４０から入力された画像データをＯＳＤ処理部５０に処理させる。

また、投写制御部１１６は、光源駆動回路９１、及び、光変調装置駆動回路９２を制御して、光源駆動回路９１によって光源部８１を点灯させ、光変調装置駆動回路９２により光変調装置８２を駆動させ、投写部８０によって画像光を投写してスクリーンＳＣに画像を表示する。また、投写制御部１１６は、投写光学系８３を制御してモーターを起動させ、投写光学系８３のズームやフォーカスを調整する。

本実施形態のプロジェクター１は、第１状態及び第２状態のいずれかの状態である。

第１状態は、ユーザーによる音声操作及び非音声操作を許可する状態である。すなわち、第１状態は、ユーザーから受け付けた音声操作或いは非音声操作に対応する処理を実行可能な状態である。具体的には、第１状態は、音声を出力していない状態であり、例えば、設定ＵＩのみを投写している状態や、画像投写していない状態、音声を伴わない映像を投写している状態、画像供給装置２から画像データが供給されていない状態、スピーカー７１の音量がゼロに設定されている状態、映像投写を一時停止している状態等である。

第２状態は、ユーザーによる音声操作を許可しない一方で、ユーザーによる非音声操作については許可する状態である。すなわち、第２状態は、ユーザーによる音声操作に対応する処理を実行しない一方で、ユーザーによる非音声操作に対応する処理を実行可能な状態である。具体的には、第２状態は、音声を出力している状態であり、例えば、音声出力を伴う画像を投写している状態や、スピーカー７１の音量がゼロ以外の音量で画像を投写している状態である。
なお、第２状態は、非音声操作を踏まえた音声操作については許可する。具体的には、第２状態は、音声操作を強制的に有効にするスイッチが操作された場合については音声操作を許可する。

以上の構成の下、本実施形態におけるプロジェクター１は、以下の動作を実行する。
図２は、プロジェクター１の動作を示すフローチャートである。

プロジェクター１のＰＪ制御部１０の音声データ取得部１１１は、音声処理部７０から、マイク７２が検出した音声の音声データを取得したか否かを判別する（ステップＳＡ１）。

音声データ取得部１１１は、音声処理部７０から音声データを取得していないと判別した場合（ステップＳＡ１：ＮＯ）、再度、ステップＳＡ１の処理を実行する。

一方、音声データ取得部１１１は、音声処理部７０から音声データを取得したと判別した場合（ステップＳＡ１：ＹＥＳ）、プロジェクター１の状態が第１状態であるか第２状態であるかを判別する（ステップＳＡ２）。

音声データ取得部１１１は、プロジェクター１の状態が第２状態であると判別した場合（ステップＳＡ２：「第２状態」）、音声処理部７０から取得した音声データを破棄し（ステップＳＡ３）、本処理を終了する。

一方、音声データ取得部１１１は、プロジェクター１の状態が第１状態であると判別した場合（ステップＳＡ２：「第１状態」）、ウェイクワード検出部１１３、及び、音声アシスタント機能実行部１１４に取得した音声データを出力する（ステップＳＡ４）。

ウェイクワード検出部１１３は、音声データ取得部１１１が出力した音声データが示す音声に、ウェイクワードが含まれている否かを判定し、ウェイクワード検出情報を音声アシスタント機能実行部１１４に出力する（ステップＳＡ５）。

次いで、音声アシスタント機能実行部１１４は、ウェイクワード検出情報が、ウェイクワードを含むことを示すか、ウェイクワードを含まないことを示すか、を判別する（ステップＳＡ６）。

音声アシスタント機能実行部１１４は、ウェイクワード検出情報が、ウェイクワードを含まないことを示すと判別した場合（ステップＳＡ６：「ウェイクワードを含まない」）、音声アシスタント機能を実行しない（ステップＳＡ７）。

一方、音声アシスタント機能実行部１１４は、ウェイクワード検出情報が、ウェイクワードを含むことを示すと判別した場合（ステップＳＡ６：「ウェイクワードを含む」）、ウェイクワードに続いてマイク７２が検出した音声に基づいて、音声アシスタント機能を実行する（ステップＳＡ８）。

＜変形例＞
次に、本実施形態の変形例について説明する。
本変形例は、上述した実施形態と比較して、プロジェクター１の動作が異なる。
図３は、変形例におけるプロジェクター１の動作を示すフローチャートである。

図３においては、図２に示すフローチャートと同じステップについては同一のステップ番号を付し、その詳細な説明を省略する。

プロジェクター１のＰＪ制御部１０の音声データ取得部１１１は、プロジェクター１の状態が第２状態であると判別した場合（ステップＳＡ２：「第２状態」）、ウェイクワード検出部１１３及び音声アシスタント機能実行部１１４に、音声処理部７０から取得した音声データを出力する（ステップＳＡ９）。

ウェイクワード検出部１１３は、音声データ取得部１１１が出力した音声データが示す音声に、ウェイクワードが含まれている否かを判定し、ウェイクワード検出情報を音声アシスタント機能実行部１１４に出力する（ステップＳＡ１０）。

次いで、音声アシスタント機能実行部１１４は、ウェイクワード検出情報が、ウェイクワードを含むことを示すか、ウェイクワードを含まないことを示すか、を判別する（ステップＳＡ１１）。

音声アシスタント機能実行部１１４は、ウェイクワード検出情報が、ウェイクワードを含まないことを示すと判別した場合（ステップＳＡ１１：「ウェイクワードを含まない」）、音声アシスタント機能を実行しない（ステップＳＡ７）。

一方、音声アシスタント機能実行部１１４は、ウェイクワード検出情報が、ウェイクワードを含むことを示すと判別した場合（ステップＳＡ１１：「ウェイクワードを含む」）、ウェイクワードを検出してから予め定められた所定時間が経過したか否かを判別する（ステップＳＡ１２）。

音声アシスタント機能実行部１１４は、ウェイクワードを検出してから予め定められた所定時間が経過したと判別した場合（ステップＳＡ１２：ＹＥＳ）、音声アシスタント機能を実行しない（ステップＳＡ７）。

一方、音声アシスタント機能実行部１１４は、ウェイクワードを検出してから予め定められた所定時間が経過していないと判別した場合（ステップＳＡ１２：ＮＯ）、操作を示す音声の音声データを、音声データ取得部１１１が取得したか否かを判別する（ステップＳＡ１３）。すなわち、ステップＳＡ１３において、音声アシスタント実行部１１４は、プロジェクター１が音声操作を受け付けたか否かを判別する。

音声アシスタント機能実行部１１４は、操作を示す音声の音声データを、音声データ取得部１１１が取得していないと判別した場合（ステップＳＡ１３：ＮＯ）、再度、ステップＳＡ１２の処理を実行する。

一方で、音声アシスタント機能実行部１１４は、操作を示す音声の音声データを、音声データ取得部１１１が取得したと判別した場合（ステップＳＡ１３：ＹＥＳ）、音声データ取得部１１１が取得した音声データに対応する音声操作を示す操作情報を、ＰＪ記憶部１２０に記憶する（ステップＳＡ１４）。

次いで、音声アシスタント機能実行部１１４は、プロジェクター１の状態が第２状態から第１状態になったか否かを判別する（ステップＳＡ１５）。

音声アシスタント機能実行部１１４は、プロジェクター１の状態が第２状態から第１状態になっていない、すなわち、プロジェクター１の状態が第２状態のままであると判別した場合（ステップＳＡ１５：ＮＯ）、再度、ステップＳＡ１２の処理を実行する。

一方、音声アシスタント機能実行部１１４は、プロジェクター１の状態が第１状態になったと判別した場合（ステップＳＡ１５：ＹＥＳ）、ＰＪ記憶部１２０に記憶された操作情報が示す音声操作に対応する処理を、音声アシスタント機能として実行する（ステップＳＡ１６）。なお、操作情報は、音声アシスタント機能実行部１１４が音声アシスタント機能を実行すると、ＰＪ記憶部１２０から消去される。

以上、説明したように、プロジェクター１の制御方法では、プロジェクター１は、マイク７２が検出した音声による操作を許可する第１状態と、マイク７２が検出した音声による操作を許可しない第２状態とのいずれかの状態である。プロジェクター１の制御方法は、プロジェクター１の状態が第１状態であり、且つ、マイク７２が検出した音声にウェイクワードが含まれる場合、このウェイクワードに応答し、プロジェクター１の状態が第２状態である場合、このウェイクワードに応答しない。

この構成によれば、プロジェクター１が音声操作を許可する状態である場合にウェイクワードに応答し、プロジェクター１が音声操作を許可しない状態である場合にウェイクワードに応答しないため、プロジェクター１の設置場所に依ることなく、ユーザー以外の音声によって音声アシスタント機能が誤作動することを抑制できる。また、プロジェクター１の状態に応じてウェイクワードに応答するか否かを異ならせるため、マイク７２が検出する音声データを解析し続ける必要がないため、処理負荷を抑えることができる。よって、プロジェクター１は、処理負荷を抑えつつ、ユーザー以外の音声によってウェイクワードに基づく音声アシスタント機能が誤作動することを抑制できる。

［第２実施形態］
次に、第２実施形態について説明する。
第２実施形態では、第１実施形態の構成要素と同じ構成要素については、同一の符号を付して詳細な説明を省略する。

図４は、第２実施形態の表示システム１０００の構成を示す図である。
表示システム１０００は、スマートスピーカー４と、プロジェクター１とを備える。スマートスピーカー４は、音声アシスタントデバイスの一例に対応する。表示システム１０００において、スマートスピーカー４とプロジェクター１とは、ネットワークＮＷを介して通信可能である。ネットワークＮＷは、インターネット、電話網、その他の通信網を含む。

スマートスピーカー４は、音声アシスタント機能を実行するデバイスであり、内蔵するマイク７２により音声を検出し、検出した音声に基づいて、ネットワークＮＷに接続するプロジェクター１や他の機器の制御、ネットワークＮＷを利用した情報検索、検索結果の出力等の音声アシスタント機能を実行する。

スマートスピーカー４は、ＳＰ制御部４００、ＳＰ通信部４０１、及び、音声処理部７０を備える。

ＳＰ制御部４００は、ＣＰＵやＭＰＵ等のプログラムを実行するプロセッサーであるＳＰプロセッサー４１０、及び、ＳＰ記憶部４２０を備え、スマートスピーカー４の各部を制御する。ＳＰ制御部４００は、ＳＰプロセッサー４１０が、ＳＰ記憶部４２０に記憶された制御プログラム４２１を読み出して処理を実行するように、ハードウェア、及びソフトウェアの協働により各種処理を実行する。また、ＳＰ制御部４００は、ＳＰプロセッサー４１０が制御プログラム４２１を読み出して実行することにより、音声データ取得部４１１、音声認識部４１２、ウェイクワード検出部４１３、及び、音声アシスタント機能実行部４１４として機能する。

ＳＰ記憶部４２０は、ＳＰプロセッサー４１０が実行するプログラムや、ＳＰプロセッサー４１０により処理されるデータを記憶する記憶領域を有する。ＳＰ記憶部４２０は、プログラムやデータを不揮発的に記憶する不揮発性記憶領域を有する。また、ＳＰ記憶部４２０は、揮発性記憶領域を備え、ＳＰプロセッサー４１０が実行するプログラムや処理対象のデータを一時的に記憶するワークエリアを構成してもよい。

ＳＰ記憶部４２０は、ＳＰプロセッサー４１０が実行する制御プログラム４２１の他に、スマートスピーカー４の動作に関する設定値を含む設定データ４２２、及び、ウェイクワードデータ１２４を記憶する。

ＳＰ通信部４０１は、所定の通信規格に従った通信ハードウェアを備え、ＳＰ制御部４００の制御により、ネットワークＮＷと接続する機器と所定の通信規格に従って通信する。本実施形態のＳＰ通信部４０１は、ネットワークＮＷを介してプロジェクター１と通信可能である。ＳＰ通信部４０１が使用する通信規格は、無線通信規格でも有線通信規格でもよい。

スマートスピーカー４が備える音声処理部７０は、第１実施形態のプロジェクター１が備える音声処理部７０と同様に構成される。スマートスピーカー４が備える音声処理部７０の信号処理部７３は、ＳＰ制御部４００からデジタルの音声データが入力された場合、入力された音声データをデジタルからアナログに変換し、変換したアナログの音声データをスピーカー７１に出力する。スピーカー７１は、入力される音声データに基づいて音声を出力する。また、信号処理部７３は、マイク７２が音声を収音すると、マイク７２が収音した音声を示すアナログの音声データがマイク７２から入力される。信号処理部７３は、マイク７２から入力された音声データをアナログからデジタルに変換し、変換したデジタルの音声データをＳＰ制御部４００に出力する。

上述した通り、ＳＰ制御部４００は、音声データ取得部４１１、音声認識部４１２、ウェイクワード検出部４１３、及び、音声アシスタント機能実行部４１４として機能する。

音声データ取得部４１１は、音声処理部７０から、マイク７２が検出した音声を示す音声データを取得する。音声データ取得部４１１は、音声処理部７０から取得した音声データを音声認識部４１２に出力する。

音声認識部４１２は、第１実施形態の音声認識部４１２と同様に、マイク７２が検出した音声を認識する。本実施形態の音声認識部４１２は、ネットワークＮＷに接続するサーバーやＡＩ（Ａｒｔｉｆｉｃｉａｌ Ｉｎｔｅｌｌｉｇｅｎｃｅ：人工知能）等に音声データを送信し、サーバーやＡＩ等から音声認識の結果を得ることで、マイク７２が検出した音声を認識する。音声認識部４１２は、音声認識の結果を、ウェイクワード検出部４１３、及び、音声アシスタント機能実行部４１４に出力する。

ウェイクワード検出部４１３は、第１実施形態のウェイクワード検出部１１３と同様、音声認識部４１２が認識した音声にウェイクワードが含まれているか否か判定し、ウェイクワード検出情報を音声アシスタント機能実行部４１４に出力する。

音声アシスタント機能実行部４１４は、第１実施形態の音声アシスタント機能実行部１１４と同様、ウェイクワード検出情報がウェイクワードを含むことを示す場合、ウェイクワードに続く音声に対応する処理を、音声アシスタント機能として実行する。本実施形態の音声アシスタント機能実行部４１４は、音声アシスタント機能として、例えば、画像投写の開始や、画像ソースの切り替え、設定ＵＩの投写開始等の処理を実行させる。音声アシスタント機能実行部４１４は、プロジェクター１に対して音声アシスタント機能を実行する際、プロジェクター１を制御する制御コマンドを送信する。

例えば、「マイプロジェクター 投写開始して」との音声を音声認識部４１２が認識し、「マイプロジェクター」がウェイクワードであったとする。この例の場合、音声アシスタント機能実行部４１４は、「投写開始して」との音声に基づいて、プロジェクター１に画像投写を開始させる制御コマンドを、ネットワークＮＷを介してプロジェクター１に送信する。

次に、プロジェクター１の構成について説明する。
本実施形態も第１実施形態と同様に、プロジェクター１は、第１状態及び第２状態のいずれかの状態である。
本実施形態のプロジェクター１は、第１実施形態のプロジェクター１と比較して、ＰＪ通信部１００を備える。また、本実施形態のプロジェクター１は、第１実施形態のプロジェクター１と比較して、ＰＪ制御部１０が、通信制御部１１７、音声操作処理部１１８、非音声操作処理部１１９、及び、投写制御部１１６として機能する。

なお、図４のプロジェクター１は、音声処理部７０を備えていない構成を例示しているが、本実施形態のプロジェクター１は、第１実施形態と同様に、音声処理部７０、或いは、音声処理部７０におけるマイク７２以外の構成要素を備えていてもよい。

ＰＪ通信部１００は、所定の通信規格に従った通信ハードウェアを備え、ＰＪ制御部１０の制御により、ネットワークＮＷと接続する機器と所定の通信規格に従って通信する。本実施形態のＰＪ通信部１００は、ネットワークＮＷを介してスマートスピーカー４と通信可能である。ＰＪ通信部１００が使用する通信規格は、無線通信規格でも有線通信規格でもよい。

通信制御部１１７は、ＰＪ通信部１００によりスマートスピーカー４と情報を送受信する。通信制御部１１７は、ＰＪ通信部１００により、スマートスピーカー４の音声アシスタント機能実行部４１４が送信した制御コマンドを受信する。通信制御部１１７は、受信した制御コマンドを、音声操作処理部１１８に出力する。また、通信制御部１１７は、スマートスピーカー４から、プロジェクター１の状態を要求する状態要求情報を受信すると、第１状態及び第２状態のいずれかを示す状態情報をスマートスピーカー４に送信する。

音声操作処理部１１８は、通信制御部１１７が出力した制御コマンドに基づいて処理を実行する。例えば、制御コマンドが、画像投写を開始させる制御コマンドである場合、音声操作処理部１１８は、画像投写の開始を投写制御部１１６に要求することで、画像投写を開始する。このように、音声操作処理部１１８は、制御コマンドに基づく処理を実行することで、スマートスピーカー４が受け付けた音声操作に対応する処理を実行する。

非音声操作処理部１１９は、第１実施形態の操作処理部１１５と同様の処理を実行する。

以上の構成の下、本実施形態における表示システム１０００は、以下の動作を実行する。以下の動作の説明では、スマートスピーカー４が受け付ける音声は、プロジェクター１を対象とした操作を示していることとする。

図５は、プロジェクター１の動作を示すフローチャートである。図５において、フローチャートＦＢは、スマートスピーカー４の動作を示し、フローチャートＦＣは、プロジェクター１の動作を示す。

スマートスピーカー４のＳＰ制御部４００の音声データ取得部４１１は、音声処理部７０から、マイク７２が検出した音声の音声データを取得したか否かを判別する（ステップＳＢ１）。

音声データ取得部４１１は、音声処理部７０から音声データを取得していないと判別した場合（ステップＳＢ１：ＮＯ）、再度、ステップＳＢ１の処理を実行する。

一方、音声データ取得部４１１は、音声処理部７０から音声データを取得したと判別した場合（ステップＳＢ１：ＹＥＳ）、ウェイクワード検出部４１３、及び、音声アシスタント機能実行部４１４に、取得した音声データを出力する（ステップＳＢ２）。

次いで、ウェイクワード検出部４１３は、音声データ取得部４１１が出力した音声データが示す音声に、ウェイクワードが含まれている否かを判定し、ウェイクワード検出情報を音声アシスタント機能実行部４１４に出力する（ステップＳＢ３）。

次いで、音声アシスタント機能実行部４１４は、ウェイクワード検出情報が、ウェイクワードを含むことを示すか、ウェイクワードを含まないことを示すか、を判別する（ステップＳＢ４）。

音声アシスタント機能実行部４１４は、ウェイクワード検出情報が、ウェイクワードを含まないことを示す場合（ステップＳＢ４：「ウェイクワードを含まない」）、音声アシスタント機能を実行しない（ステップＳＢ５）。

一方、音声アシスタント機能実行部４１４は、ウェイクワード検出情報が、ウェイクワードを含むことを示す場合（ステップＳＢ４：「ウェイクワードを含む」）、プロジェクター１の状態を要求する状態要求情報を、ＳＰ通信部４０１によりプロジェクター１に送信する（ステップＳＢ６）。

フローチャートＦＣを参照して、プロジェクター１のＰＪ制御部１０の通信制御部１１７は、ＰＪ通信部１００により状態要求情報を受信すると（ステップＳＣ１）、プロジェクター１の状態を示す状態情報を送信する（ステップＳＣ２）。状態情報が示すプロジェクター１の状態は、第１状態か第２状態のいずれかである。

フローチャートＦＢを参照して、スマートスピーカー４の音声アシスタント機能実行部４１４は、ＳＰ通信部４０１によりプロジェクター１から状態情報を受信すると（ステップＳＢ７）、受信した状態情報が示すプロジェクター１の状態が第１状態か第２状態かを判別する（ステップＳＢ８）。

音声アシスタント機能実行部４１４は、プロジェクター１の状態が第２状態であると判別した場合（ステップＳＢ８：「第２状態」）、プロジェクター１に対する音声アシスタント機能を実行しない（ステップＳＢ５）。

一方、音声アシスタント機能実行部４１４は、プロジェクター１の状態が第１状態であると判別した場合（ステップＳＢ８：「第１状態」）、ウェイクワードに続く音声に基づいて、プロジェクター１に対して音声アシスタント機能を実行する（ステップＳＢ９）。

＜変形例＞
次に、図５に示す表示システム１０００の動作の変形例について説明する。
図６は、表示システム１０００の動作の変形例を示すフローチャートである。

図６において、図５に示すフローチャートと同じステップについては同一のステップ番号を付し、その詳細な説明を省略する。

音声アシスタント機能実行部４１４は、プロジェクター１の状態が第２状態であると判別した場合（ステップＳＢ８：「第２状態」）、ウェイクワードを検出してから予め定められた所定時間が経過したか否かを判別する（ステップＳＢ１０）。

音声アシスタント機能実行部４１４は、ウェイクワードを検出してから予め定められた所定時間が経過したと判別した場合（ステップＳＢ１０：ＹＥＳ）、音声アシスタント機能を実行しない（ステップＳＢ５）。

一方、音声アシスタント機能実行部４１４は、ウェイクワードを検出してから予め定められた所定時間が経過していないと判別した場合（ステップＳＢ１０：ＮＯ）、操作を示す音声の音声データを音声データ取得部４１１が取得したか否かを判別する（ステップＳＢ１１）。すなわち、ステップＳＢ１１において、音声アシスタント実行部４１４は、スマートスピーカー４が音声操作を受け付けたか否かを判別する。

音声アシスタント機能実行部４１４は、操作を示す音声の音声データを、音声データ取得部４１１が取得していないと判別した場合（ステップＳＢ１１：ＮＯ）、処理をステップＳＢ１３に移行させる。

一方、音声アシスタント機能実行部４１４は、操作を示す音声の音声データを、音声データ取得部４１１が取得したと判別した場合（ステップＳＢ１１：ＹＥＳ）、音声データ取得部４１１が取得した音声データに対応する音声操作を示す操作情報を、ＳＰ記憶部４２０に記憶する（ステップＳＢ１２）。

次いで、音声アシスタント機能実行部４１４は、状態要求情報をＳＰ通信部４０１によりプロジェクター１に送信する（ステップＳＢ１３）。

フローチャートＦＣを参照して、プロジェクター１のＰＪ制御部１０の通信制御部１１７は、ＰＪ通信部１００により状態要求情報を受信すると（ステップＳＣ３）、プロジェクター１の状態が第１状態及び第２状態のいずれかであることを示す状態情報を送信する（ステップＳＣ４）。

フローチャートＦＢを参照して、スマートスピーカー４の音声アシスタント機能実行部４１４は、ＳＰ通信部４０１によりプロジェクター１から状態情報を受信すると（ステップＳＢ１４）、受信した状態情報に基づいて、プロジェクター１の状態が第２状態から第１状態になったか否かを判別する（ステップＳＢ１５）。

音声アシスタント機能実行部４１４は、プロジェクター１の状態が第２状態から第１状態になっていない、すなわち、プロジェクター１の状態が第２状態のままであると判別した場合（ステップＳＢ１５：ＮＯ）、再度、ステップＳＢ１０の処理を実行する。

一方、音声アシスタント機能実行部４１４は、プロジェクター１の状態が第１状態になったと判別した場合（ステップＳＢ１５：ＹＥＳ）、音声アシスタント機能として、ＳＰ記憶部４２０に記憶された操作情報が示す音声操作に対応する処理をプロジェクター１に実行させる（ステップＳＢ１６）。すなわち、音声アシスタント機能実行部４１４は、操作情報が示す音声操作に対する処理を実行させる制御コマンドを、プロジェクター１に送信する。なお、操作情報は、音声アシスタント機能実行部４１４が音声アシスタント機能を実行すると、ＳＰ記憶部４２０から消去される。

上述した図５及び図６は、スマートスピーカー４が主体となって、プロジェクター１の状態に応じて音声アシスタント機能の実行及び不実行を決定する構成の動作である。
次に、図７及び図８を参照し、プロジェクター１が主体となって、プロジェクター１の状態に応じて音声アシスタント機能の実行及び不実行を決定する構成の動作を説明する。

図７は、プロジェクター１の動作を示すフローチャートである。

プロジェクター１の通信制御部１１７は、プロジェクター１の状態が第１状態か第２状態かを判別する（ステップＳＤ１）。

通信制御部１１７は、プロジェクター１の状態が第２状態であると判別した場合（ステップＳＤ１：「第２状態」）、ウェイクワードに応答しないことを要求する非応答要求情報を、ＰＪ通信部１００によりスマートスピーカー４に送信する（ステップＳＤ３）。

スマートスピーカー４は、非応答要求情報をプロジェクター１から受信すると、ウェイクワードに応答しない。すなわち、スマートスピーカー４の音声アシスタント機能実行部４１４は、ウェイクワードに基づく音声アシスタント機能を実行しない。

ステップＳＤ１の説明に戻り、通信制御部１１７は、プロジェクター１の状態が第１状態であると判別した場合（ステップＳＤ１：「第１状態」）、ウェイクワードに応答することを要求する応答要求情報を、ＰＪ通信部１００によりスマートスピーカー４に送信する（ステップＳＤ２）。

スマートスピーカー４は、応答要求情報をプロジェクター１から受信すると、ウェイクワードに応答する。すなわち、スマートスピーカー４の音声アシスタント機能実行部４１４は、ウェイクワードに基づく音声アシスタント機能を実行可能となる。

図８は、プロジェクター１の動作を示すフローチャートである。図８の説明では、スマートスピーカー４は、プロジェクター１に対する音声操作を受け付けると、プロジェクター１の状態判別を行うことなく、受け付けた音声操作に対応する処理を実行させる制御コマンドをプロジェクター１に送信することを前提とする。

プロジェクター１の通信制御部１１７は、スマートスピーカー４から制御コマンドを受信したか否かを判別する（ステップＳＥ１）。

通信制御部１１７は、スマートスピーカー４から制御コマンドを受信していないと判別した場合（ステップＳＥ１：ＮＯ）、再度、ステップＳＥ１の処理を実行する。

通信制御部１１７は、スマートスピーカー４から制御コマンドを受信したと判別した場合（ステップＳＥ１：ＹＥＳ）、音声操作処理部１１８に受信した制御コマンドを出力する（ステップＳＥ２）。

音声操作処理部１１８は、プロジェクター１の状態が第１状態か第２状態かを判別する（ステップＳＥ３）。

音声操作処理部１１８は、プロジェクター１の状態が第１状態であると判別した場合（ステップＳＥ３：「第１状態」）、通信制御部１１７が出力した制御コマンドに基づいて処理を実行する（ステップＳＥ４）。これにより、表示システム１０００においては、ウェイクワードに基づく音声アシスタント機能が実行される。

一方、音声操作処理部１１８は、プロジェクター１の状態が第２状態であると判別した場合（ステップＳＥ３：「第２状態」）、通信制御部１１７が出力した制御コマンドに基づく処理を実行しない（ステップＳＥ５）。これにより、表示システム１０００においては、ウェイクワードに基づく音声アシスタント機能が実行されない。

以上、説明したように、表示システム１０００の制御方法では、プロジェクター１は、音声操作を許可する第１状態と、音声操作を許可しない第２状態とのいずれかの状態であり、スマートスピーカー４にプロジェクター１の状態を示す状態情報を送信する。表示システム１０００の制御方法では、スマートスピーカー４は、受信した状態情報が示す状態が第１状態である場合、ウェイクワードに基づく音声アシスタント機能をプロジェクター１に対して実行し、受信した状態情報が示す状態が第２状態である場合、ウェイクワードに基づく音声アシスタント機能をプロジェクター１に対して実行しない。

表示システム１０００は、スマートスピーカー４と、スマートスピーカー４と通信可能なプロジェクター１とを有する。プロジェクター１は、音声操作を許可する第１状態と、音声操作を許可しない第２状態とのいずれかの状態であり、スマートスピーカー４にプロジェクター１の状態を示す状態情報を送信する。スマートスピーカー４は、受信した状態情報が示す状態が第１状態である場合、ウェイクワードに基づく音声アシスタント機能をプロジェクター１に対して実行し、受信した状態情報が示す状態が第２状態である場合、ウェイクワードに基づく音声アシスタント機能をプロジェクター１に対して実行しない。

表示システム１０００の制御方法、及び、表示システム１０００によれば、プロジェクター１が音声操作を許可する状態である場合にウェイクワードに基づく音声アシスタント機能を実行し、プロジェクター１が音声操作を許可しない状態である場合に当該音声アシスタント機能を実行しない。そのため、スマートスピーカー４とプロジェクター１の設置場所に依ることなく、ユーザー以外の音声によって音声アシスタント機能が誤作動することを抑制できる。また、プロジェクター１の状態に応じて音声アシスタント機能を実行するか否かを異ならせるため、マイク７２が検出する音声データを解析し続ける必要がなく、処理負荷を抑えることができる。よって、表示システム１０００の制御方法、及び、表示システム１０００は、処理負荷を抑えつつ、ユーザー以外の音声によってウェイクワードに基づく音声アシスタント機能が誤作動することを抑制できる。

第２状態は、非音声操作については許可する状態である。

この構成によれば、プロジェクター１の状態を一切の操作を受け付けない状態となることを回避できる。よって、プロジェクター１の状態が音声操作を許可しない状態であっても、非音声操作によって、ユーザーは、例えば画像投写を開始させる等のプロジェクター１の操作を行うことができる。

スマートスピーカー４は、プロジェクター１が第２状態である際にウェイクワードを検出した場合、ウェイクワードの検出から所定時間内に受け付けた音声操作を記憶し、所定時間内にプロジェクター１が第１状態に変化した場合、音声アシスタント機能として、記憶した音声操作に対応する処理をプロジェクター１に実行させる。

この構成によれば、プロジェクター１の状態が音声操作を許可しない状態であるときに操作を示す音声を発話した場合、ユーザーは、ウェイクワードの発話と操作を示す音声の発話とを再度行わなくても、プロジェクター１の状態を第２状態から第１状態に変えることで、既に発話した音声に基づく音声アシスタント機能を実行させることができる。

第１状態は、プロジェクター１が音声出力していない状態である。第２状態は、プロジェクター１が音声出力している状態である。

この構成によれば、プロジェクター１が発する音声によってウェイクワードに基づく音声アシスタント機能が誤作動することを防止できる。

上述した各実施形態は、本発明の好適な実施の形態である。ただし、上述の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の変形実施が可能である。

例えば、上述した第２実施形態では、音声アシスタントデバイスとしてスマートスピーカー４を例示したが、音声アシスタントデバイスは、音声を検出可能なデバイスであれば、スマートスピーカー４に限定されず、例えばタブレット端末やスマートフォンでもよい。

例えば、上述した第１実施形態では、プロジェクター１が、マイク７２が検出した音声の音声データを解析して、音声認識を行う構成である。しかしながら、音声認識は、プロジェクター１と通信可能な外部装置が行ってもよい。例えば、音声認識は、プロジェクター１がローカルネットワークに接続する場合、このローカルネットワークに接続するホスト装置や、プロジェクター１がインターネット等のグローバルネットワークに接続する場合、このグローバルネットワークに接続するサーバーやＡＩ等が行ってもよい。この場合、プロジェクター１は、マイク７２が検出した音声の音声データを、外部装置に送信し、外部装置から音声認識の結果を受信する。この場合、ＰＪ記憶部１２０は、音声辞書データ１２３を記憶しなくてもよい。

また、ＰＪ制御部１０、及び、ＳＰ制御部４００の機能は、複数のプロセッサー、又は、半導体チップにより実現してもよい。

例えば、図３及図４に示したプロジェクター１の各機能部、及び、図４に示したスマートスピーカー４の各機能部は、機能的構成を示すものであって、具体的な実装形態は特に制限されない。つまり、必ずしも各機能部に個別に対応するハードウェアが実装される必要はなく、一つのプロセッサーがプログラムを実行することで複数の機能部の機能を実現する構成とすることも勿論可能である。また、上記実施形態においてソフトウェアで実現される機能の一部をハードウェアで実現してもよく、また、ハードウェアで実現される機能の一部をソフトウェアで実現してもよい。その他、プロジェクター１及びスマートスピーカー４の他の各部の具体的な細部構成についても、本発明の趣旨を逸脱しない範囲で任意に変更可能である。

また、図２、図３、図７、及び、図８に示すフローチャートの処理単位は、プロジェクター１の処理を理解容易にするために、主な処理内容に応じて分割したものである。フローチャートに示す処理単位の分割の仕方や名称によって本発明が制限されることはない。また、プロジェクター１の処理は、処理内容に応じて、さらに多くの処理単位に分割することもできるし、１つの処理単位がさらに多くの処理を含むように分割することもできる。また、上記のフローチャートの処理順序も、図示した例に限られるものではない。
また、図５、及び、図６に示すフローチャートの処理単位は、表示システム１０００の各部の処理を理解容易にするために、主な処理内容に応じて分割したものである。フローチャートに示す処理単位の分割の仕方や名称によって本発明が制限されることはない。また、表示システム１０００の各部の処理は、処理内容に応じて、さらに多くの処理単位に分割することもできるし、１つの処理単位がさらに多くの処理を含むように分割することもできる。また、上記のフローチャートの処理順序も、図示した例に限られるものではない。

また、本発明の表示装置は、スクリーンＳＣに画像を投写するプロジェクター１に限定されない。例えば、表示装置は、液晶表示パネルに画像を表示する液晶表示装置や、有機ＥＬパネルに画像を表示する表示装置など、モニター若しくは液晶テレビ等の自発光型の表示装置を含む。また、その他の各種の表示装置も本発明の表示装置に含まれる。

１…プロジェクター（表示装置）、２…画像供給装置、３…リモコン、４…スマートスピーカー（音声アシスタントデバイス）、１０…ＰＪ制御部、２０…インターフェース部、３０…フレームメモリー、４０…画像処理部、５０…ＯＳＤ処理部、６０…操作部、６１…操作パネル、６２…リモコン受光部、６３…入力処理部、７０…音声処理部、７１…スピーカー、７２…マイク（音声検出部）、７３…信号処理部、８０…投写部、８１…光源部、８２…光変調装置、８３…投写光学系、９０…駆動部、９１…光源駆動回路、９２…光変調装置駆動回路、１００…ＰＪ通信部、１１０…ＰＪプロセッサー、１１６…投写制御部、１１７…通信制御部、１１８…音声操作処理部、１１９…非音声操作処理部、１２０…ＰＪ記憶部、１２１…制御プログラム、１２２…設定データ、１２４…ウェイクワードデータ、１３０…バス、４１１…音声データ取得部、４１２…音声認識部、４１３…ウェイクワード検出部、４１４…音声アシスタント機能実行部、４２１…制御プログラム、４２２…設定データ、ＮＷ…ネットワーク、ＳＣ…スクリーン。

Claims (5)

1. 音声アシスタントデバイスと、前記音声アシスタントデバイスと通信可能な表示装置を
   有する表示システムの制御方法であって、
   前記表示装置は、
   前記音声アシスタントデバイスに、前記表示装置が音声による第１操作を許可する第１
   状態と、前記第１操作を許可しない第２状態とのいずれの状態であるかを示す状態情報を
   送信し、
   前記音声アシスタントデバイスは、
   受信した前記状態情報が示す状態が前記第１状態である場合、ウェイクワードに基づく
   音声アシスタント機能を前記表示装置に対して実行し、
   受信した前記状態情報が示す状態が前記第２状態である場合、前記ウェイクワードに基
   づく前記音声アシスタント機能を前記表示装置に対して実行せず、
   前記音声アシスタントデバイスは、
   前記表示装置が前記第２状態である際に前記ウェイクワードを検出した場合、前記ウェ
   イクワードの検出から所定時間内に受け付けた前記第１操作を記憶し、
   前記所定時間内に前記表示装置が前記第１状態に変化した場合、前記ウェイクワードに
   基づく前記音声アシスタント機能として、記憶した前記第１操作に対応する処理を前記表
   示装置に実行させる、
   表示システムの制御方法。
2. 前記第２状態は、音声以外による第２操作については許可する状態である、
   請求項１に記載の表示システムの制御方法。
3. 前記第１状態は、前記表示装置が音声出力していない状態であり、
   前記第２状態は、前記表示装置が音声出力している状態である、
   請求項１又は２に記載の表示システムの制御方法。
4. 音声アシスタントデバイスと、前記音声アシスタントデバイスと通信可能な表示装置と
   、を有する表示システムであって、
   前記表示装置は、
   音声による第１操作を許可する第１状態と、前記第１操作を許可しない第２状態とのい
   ずれかの状態であり、
   前記音声アシスタントデバイスに、前記表示装置が音声による第１操作を許可する第１
   状態と、前記第１操作を許可しない第２状態とのいずれの状態であるかを示す状態情報を
   送信し、
   前記音声アシスタントデバイスは、
   受信した前記状態情報が示す状態が前記第１状態である場合、ウェイクワードに基づく
   音声アシスタント機能を前記表示装置に対して実行し、
   受信した前記状態情報が示す状態が前記第２状態である場合、前記ウェイクワードに基
   づく前記音声アシスタント機能を前記表示装置に対して実行せず、
   前記音声アシスタントデバイスは、
   前記表示装置が前記第２状態である際に前記ウェイクワードを検出した場合、前記ウェ
   イクワードの検出から所定時間内に受け付けた前記第１操作を記憶し、
   前記所定時間内に前記表示装置が前記第１状態に変化した場合、前記ウェイクワードに
   基づく前記音声アシスタント機能として、記憶した前記第１操作に対応する処理を前記表
   示装置に実行させる、
   表示システム。
5. 音声検出部を有し、ウェイクワードに基づく音声アシスタント機能を実行可能な表示装
   置の制御方法であって、
   第１状態と、第２状態とのいずれかの状態であり、
   前記表示装置の状態が音声検出部が検出した音声による操作を許可する前記第１状態で
   あり、且つ、前記音声検出部が検出した音声に前記ウェイクワードが含まれる場合、前記
   ウェイクワードに応答し、前記表示装置の状態が前記音声検出部が検出した音声による操
   作を許可しない前記第２状態である場合、前記ウェイクワードに応答せず、
   前記表示装置の状態が前記第２状態であり、且つ、前記音声検出部が検出した音声に前
   記ウェイクワードが含まれる場合、前記ウェイクワードの検出から所定時間内に受け付け
   た前記音声検出部が検出した音声による第１操作を記憶し、
   前記所定時間内に前記表示装置の状態が前記第１状態に変化した場合、前記ウェイクワ
   ードに基づく前記音声アシスタント機能として、記憶した前記第１操作に対応する処理を
   前記表示装置に実行させる、
   表示装置の制御方法。

Images