JP2022191125A - バーチャルアシスタント装置及びバーチャルアシスタント装置用のプログラム - Google Patents
バーチャルアシスタント装置及びバーチャルアシスタント装置用のプログラム Download PDFInfo
- Publication number
- JP2022191125A JP2022191125A JP2021163806A JP2021163806A JP2022191125A JP 2022191125 A JP2022191125 A JP 2022191125A JP 2021163806 A JP2021163806 A JP 2021163806A JP 2021163806 A JP2021163806 A JP 2021163806A JP 2022191125 A JP2022191125 A JP 2022191125A
- Authority
- JP
- Japan
- Prior art keywords
- virtual assistant
- conversation
- interface
- content
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004891 communication Methods 0.000 claims abstract description 52
- 230000009471 action Effects 0.000 claims description 36
- 230000033001 locomotion Effects 0.000 claims description 35
- 238000001514 detection method Methods 0.000 claims description 21
- 238000012544 monitoring process Methods 0.000 claims description 13
- 238000000034 method Methods 0.000 abstract description 22
- 238000007726 management method Methods 0.000 description 39
- 230000004044 response Effects 0.000 description 31
- 238000010586 diagram Methods 0.000 description 26
- 230000006870 function Effects 0.000 description 20
- 230000008569 process Effects 0.000 description 13
- 238000010413 gardening Methods 0.000 description 12
- 230000000694 effects Effects 0.000 description 6
- 239000003795 chemical substances by application Substances 0.000 description 5
- 230000006399 behavior Effects 0.000 description 4
- 230000010365 information processing Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 241000282472 Canis lupus familiaris Species 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 3
- 235000003222 Helianthus annuus Nutrition 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000010079 rubber tapping Methods 0.000 description 2
- 241000208818 Helianthus Species 0.000 description 1
- 244000020551 Helianthus annuus Species 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000010411 cooking Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000035876 healing Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000008450 motivation Effects 0.000 description 1
- 230000000474 nursing effect Effects 0.000 description 1
- 230000008092 positive effect Effects 0.000 description 1
- 230000036544 posture Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
- 208000011580 syndromic disease Diseases 0.000 description 1
- 238000002560 therapeutic procedure Methods 0.000 description 1
Images
Landscapes
- Information Transfer Between Computers (AREA)
- User Interface Of Digital Computer (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
【課題】バーチャルアシスタント装置を利用する利用者のコンテンツの利用を促進しやすい技術を提供する。【解決手段】バーチャルアシスタント装置10において、制御部11は、外部から配信されるコンテンツ情報を通信部12が受けた場合に、インタフェース13を介して所定の報知を行う制御を実行する。制御部11は、上記報知を行った後、インタフェース13を介してコンテンツの提供を指示する入力を受けた場合に、コンテンツ情報に基づくコンテンツの表示を表示部15に行わせる。【選択図】図1
Description
本発明は、バーチャルアシスタント装置及びバーチャルアシスタント装置用のプログラムに関する。
特許文献1には、エージェント装置の一例が開示されている。特許文献1のエージェント装置は、表示装置とスピーカとを用いて画像と音声により現出させたエージェントにより状況に応じた違和感の無いユーザ性格判別用の質問をさせる。更に、このエージェント装置は、マイク入力されたユーザの回答結果からユーザの性格を判別し、ユーザの性格に合わせてエージェントの性格を可変させる。
特許文献1の装置は、利用者が発話をしなければ会話の機会を十分に確保できないため、積極的な行為を行いにくい利用者にとっては、コンテンツの提供を受ける機会を十分に確保しにくい。特許文献1の装置を含め、従来技術では、この種の観点で改善の余地がある。
本発明は、バーチャルアシスタント装置を利用する利用者のコンテンツの利用を促進しやすい技術を提供することを一つの目的とする。
本発明の一つであるバーチャルアシスタント装置は、
利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、上記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置であって、
上記制御部は、外部から配信されるコンテンツ情報を上記通信部が受けた場合に、上記インタフェースを介して所定の報知を行う制御を行い、上記報知を行った後、上記インタフェースを介してコンテンツの提供を指示する入力を受けた場合に、上記コンテンツ情報に基づくコンテンツの表示を上記表示部に行わせる。
利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、上記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置であって、
上記制御部は、外部から配信されるコンテンツ情報を上記通信部が受けた場合に、上記インタフェースを介して所定の報知を行う制御を行い、上記報知を行った後、上記インタフェースを介してコンテンツの提供を指示する入力を受けた場合に、上記コンテンツ情報に基づくコンテンツの表示を上記表示部に行わせる。
上記のバーチャルアシスタント装置は、外部から配信されるコンテンツ情報を通信部が受けた場合にインタフェースを介して所定の報知を行うため、利用者にコンテンツ配信があったことを知らせることができる。従って、この装置は、利用者に対しコンテンツの提供を受けるきっかけを能動的に与えることができ、利用者がコンテンツの提供を受ける機会を確保しやすい。しかも、この装置は、上記報知の後、「コンテンツの提供を指示する入力」を受けた場合に、配信されたコンテンツ情報に基づくコンテンツの表示を行うことができるため、利用者は、希望する時期に希望する話題の提供を受けやすい。ゆえに、このバーチャルアシスタント装置は、利用者のコンテンツの利用を促進しやすい。また、人感センサなどの利用者を認識するセンシングシステムを本装置の他に設ける必要がないため、経済的である。
上記のバーチャルアシスタント装置において、上記インタフェースは、接触又は非接触による上記利用者からの入力動作を検出する動作検出部又は上記利用者の音声を示す音声信号を取得する音声入力部の少なくともいずれかを有していてもよい。上記制御部は、上記報知を行った後、上記動作検出部が検出する動作又は上記音声入力部が取得した音声の少なくともいずれかに基づいて上記指示する入力を受けたか否かを判定してもよい。
上記のバーチャルアシスタント装置は、『配信を知らせる報知に対して「コンテンツの提供を指示する入力」があったか否か』を、動作検出又は音声検出によってより正確に確認することができる。
上記のバーチャルアシスタント装置において、上記制御部は、上記報知を行った後、所定時間を経過しても上記指示する入力がなされない場合に、上記コンテンツ情報の配信があったことを示す報知情報の表示を上記表示部に行わせてもよい。
上記のバーチャルアシスタント装置は、利用者が報知に気付かなかったり、報知の際にコンテンツの提供を希望しない場合には、コンテンツ情報の配信があったことを報知情報によって知らせることができ、事後的な対応を行いやすくすることができる。
上記バーチャルアシスタント装置又は上記バーチャルアシスタント装置の外部に設けられた登録部に上記利用者が希望する情報の種類が登録されていてもよい。上記制御部は、上記登録部に登録される上記種類の上記コンテンツを上記インタフェースを介して出力する制御を行ってもよい。
上記のバーチャルアシスタント装置は、利用者が希望したり、利用者にとって有意義な種類のコンテンツを選定して提供することができるため、利用者が興味を持ちやすくなり、利用者の満足度が高まりやすい。
上記のバーチャルアシスタント装置において、上記制御部は、上記インタフェースにウェイクワードが入力されたか否かを監視することおよび動作検出部によって動作が検出されたか否かを監視することの少なくとも一方を行う待機モードと、少なくとも上記ウェイクワード以外の言葉を検出する会話モードと、に切り替わり、上記待機モード中に上記ウェイクワードの入力を検出した場合に上記会話モードに切り替わり、上記待機モード中に、上記キャラクタが待機動作を行う画像を上記表示部に表示させつつ上記キャラクタが発する会話を上記インタフェースに音声出力させ、上記会話が出力されてから所定時間が経過するまでの間、上記会話モードに切り替わるように動作してもよい。
上記のバーチャルアシスタント装置は、待機モード中にキャラクタが待機動作を行うため、待機モード中であってもキャラクタの行動が利用者の印象に残りやすくなる。更に、待機モード中には、自発的に会話を開始するようにキャラクタを動作させることができるため、キャラクタが待機動作を行いながら利用者を会話に誘うような状況を発生させることができる。しかも、上記のバーチャルアシスタント装置は、ウェイクワードの検出によって会話モードに切り替わることやタッチパネル等の操作部の操作によって切り替わることを前提とする一方で、キャラクタから会話が発せられた後には、所定時間が経過するまでの間、自動的に会話モードに切り替えることができるため、利用者は、ウェイクワードを発することなく会話に入ることができ、より自然な流れで会話を進めることもできる。
本発明の一つであるバーチャルアシスタント装置は、
利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、上記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置であって、
上記制御部は、
上記インタフェースにウェイクワードが入力されたか否かを監視することおよび動作検出部によって動作が検出されたか否かを監視することの少なくとも一方を行う待機モードと、少なくとも上記ウェイクワード以外の言葉を検出する会話モードと、に切り替わり、上記待機モード中に上記ウェイクワードの入力を検出した場合に上記会話モードに切り替わり、
上記待機モード中に、上記キャラクタが待機動作を行う画像を上記表示部に表示させつつ上記キャラクタが発する会話を上記インタフェースに音声出力させ、
上記会話が出力されてから所定時間が経過するまでの間、上記会話モードに切り替わる。
利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、上記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置であって、
上記制御部は、
上記インタフェースにウェイクワードが入力されたか否かを監視することおよび動作検出部によって動作が検出されたか否かを監視することの少なくとも一方を行う待機モードと、少なくとも上記ウェイクワード以外の言葉を検出する会話モードと、に切り替わり、上記待機モード中に上記ウェイクワードの入力を検出した場合に上記会話モードに切り替わり、
上記待機モード中に、上記キャラクタが待機動作を行う画像を上記表示部に表示させつつ上記キャラクタが発する会話を上記インタフェースに音声出力させ、
上記会話が出力されてから所定時間が経過するまでの間、上記会話モードに切り替わる。
上記のバーチャルアシスタント装置は、待機モード中にキャラクタが待機動作を行うため、待機モード中であってもキャラクタの行動が利用者の印象に残りやすくなる。更に、待機モード中には、自発的に会話を開始するようにキャラクタを動作させることができるため、キャラクタが待機動作を行いながら利用者を会話に誘うような状況を発生させることができる。しかも、上記のバーチャルアシスタント装置は、ウェイクワードの検出によって会話モードに切り替わることやタッチパネル等の操作部の操作によって切り替わることを前提とする一方で、キャラクタから会話が発せられた後には、所定時間が経過するまでの間、自動的に会話モードに切り替えることができるため、利用者は、ウェイクワードを発することなく会話に入ることができ、より自然な流れで会話を進めることもできる。
上記のバーチャルアシスタント装置において、上記制御部は、上記所定時間が経過するまでの間の上記会話モード中に上記ウェイクワード以外の言葉を検出しなかった場合、上記待機モードに切り替わるように動作してもよい。
このバーチャルアシスタント装置は、上記所定時間が経過するまでの間の会話モード中に利用者からの応答の言葉がなかった場合、待機モードに戻すことができる。例えば、キャラクタが自発的に会話を発した後の会話モード中に利用者が近くにいなかったり、利用者が会話を望まずに応答しない状況であった場合には、自動的に待機モードに戻すことで、会話モードが不要な状況下で会話モードが継続しすぎることを抑えることができる。
上記のバーチャルアシスタント装置において、上記制御部は、上記所定時間が経過するまでの間の上記会話モード中に、上記待機動作の画像を解除して上記キャラクタが正面を向く基本画像を表示しつつ上記インタフェースに入力される上記ウェイクワード以外の言葉を検出するように動作してもよい。
このバーチャルアシスタント装置は、所定時間が経過するまでの間の会話モード中に、キャラクタが正面を向いた状態で利用者からの応答を受けることができるため、キャラクタが利用者に注目した状態で利用者からの話を待つような印象を利用者に与えることができる。
上記のバーチャルアシスタント装置において、上記制御部は、上記所定時間が経過するまでの間の上記会話モード中に、上記待機動作の画像を表示させつつ上記ウェイクワード以外の言葉を検出する。
このバーチャルアシスタント装置は、会話モード中に、キャラクタが待機動作を行いながら利用者からの話を待つような印象を利用者に与えることができる。
上記のバーチャルアシスタント装置において、上記制御部は、所定条件が成立した場合に、上記表示部に複数の選択肢を表示し、上記複数の選択肢の表示後の上記インタフェースへの入力結果に基づいていずれの選択肢が選択されたかを判定するように動作してもよい。
このバーチャルアシスタント装置は、選択肢の提示により回答の候補を単純化することで、回答の容易化を図ることができ、利用者がいずれの選択肢を選択したのかを判定することで、利用者の意思を誤認しにくい形で利用することができる。
本発明の一つであるバーチャルアシスタント装置用のプログラムは、
利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、上記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置に用いられるプログラムであって、
外部から配信されるコンテンツ情報を上記通信部が受けた場合に、上記インタフェースを介して所定の報知を行う制御を実行させるステップと、
上記報知が行われた後、コンテンツの提供を指示する入力が上記インタフェースを介してなされた場合に、上記コンテンツ情報に基づくコンテンツの表示を上記表示部に行わせる制御を実行させるステップと、
を含む。
利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、上記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置に用いられるプログラムであって、
外部から配信されるコンテンツ情報を上記通信部が受けた場合に、上記インタフェースを介して所定の報知を行う制御を実行させるステップと、
上記報知が行われた後、コンテンツの提供を指示する入力が上記インタフェースを介してなされた場合に、上記コンテンツ情報に基づくコンテンツの表示を上記表示部に行わせる制御を実行させるステップと、
を含む。
上記のバーチャルアシスタント装置用のプログラムは、外部から配信されるコンテンツ情報を通信部が受けた場合にインタフェースを介して所定の報知を行わせることができるため、利用者にコンテンツ配信があったことを知らせることができる。従って、上記のプログラムは、利用者に対しコンテンツの提供を受けるきっかけを能動的に与えることができ、利用者がコンテンツの提供を受ける機会を確保しやすい。しかも、上記のプログラムは、上記報知の後、「コンテンツの提供を指示する入力」を受けた場合に、配信されたコンテンツ情報に基づくコンテンツの表示を行うことができるため、利用者は、希望する時期に話題の提供を受けやすい。
本発明の一つであるバーチャルアシスタント装置用のプログラムは、
利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、前記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置に用いられるプログラムであって、
前記制御部を、前記インタフェースにウェイクワードが入力されたか否かを監視することおよび動作検出部によって動作が検出されたか否かを監視することの少なくとも一方を行う待機モードと、少なくとも前記ウェイクワード以外の言葉を検出する会話モードと、に切り替え、前記待機モード中に前記ウェイクワードの入力を検出した場合に前記会話モードに切り替えるステップと、
前記待機モード中に前記キャラクタが待機動作を行う画像を前記表示部に表示させつつ前記キャラクタが発する会話を前記インタフェースに音声出力させるように前記制御部を動作させるステップと、
前記会話が出力されてから所定時間が経過するまでの間、前記制御部を前記会話モードに切り替えるステップと、
を含む。
利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、前記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置に用いられるプログラムであって、
前記制御部を、前記インタフェースにウェイクワードが入力されたか否かを監視することおよび動作検出部によって動作が検出されたか否かを監視することの少なくとも一方を行う待機モードと、少なくとも前記ウェイクワード以外の言葉を検出する会話モードと、に切り替え、前記待機モード中に前記ウェイクワードの入力を検出した場合に前記会話モードに切り替えるステップと、
前記待機モード中に前記キャラクタが待機動作を行う画像を前記表示部に表示させつつ前記キャラクタが発する会話を前記インタフェースに音声出力させるように前記制御部を動作させるステップと、
前記会話が出力されてから所定時間が経過するまでの間、前記制御部を前記会話モードに切り替えるステップと、
を含む。
上記のプログラムによって動作するバーチャルアシスタント装置は、待機モード中にキャラクタが待機動作を行うため、待機モード中であってもキャラクタの行動が利用者の印象に残りやすくなる。更に、待機モード中には、自発的に会話を開始するようにキャラクタを動作させることができるため、キャラクタが待機動作を行いながら利用者を会話に誘うような状況を発生させることができる。しかも、ウェイクワードの検出によって会話モードに切り替わることやタッチパネル等の操作部の操作によって切り替わることを前提とする一方で、キャラクタから会話が発せられた後には、所定時間が経過するまでの間、自動的に会話モードに切り替えることができるため、利用者は、ウェイクワードを発することなく会話に入ることができ、より自然な流れで会話を進めることもできる。
本発明によれば、バーチャルアシスタント装置を利用する利用者のコンテンツの利用を促進やすい。
<第1実施形態>
1.バーチャルアシスタントシステムの概要
図1に示されるバーチャルアシスタントシステム1は、バーチャルアシスタント装置10と、管理装置90と、を備える。以下の説明では、バーチャルアシスタントシステム1は、単にシステム1とも称される。以下で説明される代表例は、バーチャルアシスタント装置10が、高齢者向けのバーチャルアシスタント装置として機能するものであり、例えば、利用者が、介護施設、自宅、病院などで利用することができるものである。
1.バーチャルアシスタントシステムの概要
図1に示されるバーチャルアシスタントシステム1は、バーチャルアシスタント装置10と、管理装置90と、を備える。以下の説明では、バーチャルアシスタントシステム1は、単にシステム1とも称される。以下で説明される代表例は、バーチャルアシスタント装置10が、高齢者向けのバーチャルアシスタント装置として機能するものであり、例えば、利用者が、介護施設、自宅、病院などで利用することができるものである。
2.バーチャルアシスタント装置のハードウェア構成
図1のように、バーチャルアシスタント装置10は、タブレット端末、スマートフォン、パーソナルコンピュータ、外部装置と通信可能に構成されたテレビジョンなどの汎用の情報端末にアプリケーションプログラムをインストールし、記憶及び利用可能とした情報通信端末であってもよく、後述される各機能を実現できる専用装置であってもよい。バーチャルアシスタント装置10は、通信機能を有する携帯型の情報装置であってもよく、通信機能を有する据置型の情報装置であってもよい。
図1のように、バーチャルアシスタント装置10は、タブレット端末、スマートフォン、パーソナルコンピュータ、外部装置と通信可能に構成されたテレビジョンなどの汎用の情報端末にアプリケーションプログラムをインストールし、記憶及び利用可能とした情報通信端末であってもよく、後述される各機能を実現できる専用装置であってもよい。バーチャルアシスタント装置10は、通信機能を有する携帯型の情報装置であってもよく、通信機能を有する据置型の情報装置であってもよい。
図1のように、バーチャルアシスタント装置10は、制御部11と通信部12とインタフェース13と記憶部14とを備える。以下で説明されるバーチャルアシスタント装置10の代表例は、バーチャルアシスタント装置10が、図2のようにタブレット端末によって実現される例である。
図1に示される制御部11は、例えば公知の情報処理装置として構成される。制御部11は、CPUなどの公知の演算装置及び他の周辺回路などを備え、様々な制御や演算を行い得る。制御部11は、インタフェース13を構成する表示部15に、具現化されたキャラクタを表示させる機能を有する。
図1に示される通信部12は、公知の有線通信方式又は公知の無線通信方式によって広域通信網に直接又は他装置を介して間接的にアクセス可能な装置である。通信部12は、基地局との間で無線通信を行い、図示されていない基地局を介して広域通信網(例えば、インターネット)に直接アクセスする構成であってもよい。通信部12は、図示されていないアクセスポイントとの間で無線通信を行い、アクセスポイントを介して広域通信網に間接的にアクセスする構成であってもよい。通信部12は、中継装置(ルータ等)との間で有線通信を行い、中継装置を介して広域通信網にアクセスする構成であってもよい。
図1に示されるインタフェース13は、利用者からの入力の受入れおよび出力を行う装置である。インタフェース13は、表示部15と音声出力部16と操作部17と音声入力部18とを備える。
表示部15及び音声出力部16は、情報を出力する出力部として機能する。表示部15は、液晶ディスプレイや有機エレクトロルミネッセンスディスプレイなどの公知の画像表示装置として構成される。以下で説明される代表例では、表示部15は、タッチパネル式の表示装置の一部をなす。音声出力部16は、例えば公知のスピーカなどの発音装置によって構成されている。音声出力部16は、制御部11と協働して各種音声を出力する機能を有する。
操作部17及び音声入力部18は、情報を入力する入力部として機能する。操作部17は、動作検出部の一例に相当し、接触方式での入力操作が可能とされた入力デバイスである。操作部17は、例えば、タッチパネルなどが好適例である。音声入力部18は、例えば公知のマイクなどの音声入力装置によって構成されている。音声入力部18は、入力される音を電気信号に変換して制御部11に与える機能を有する。
以下で説明される代表例では、図2等で示されるように、表示部15と操作部17とがタッチパネル式表示装置20を構成する。タッチパネル式表示装置20は、単にタッチパネル20とも称される。図2等の例では、操作部17は、表示部15からの光を透過可能に構成され、表示部15からの画像を外部から視認可能な構成で透明性のパネルが表示部15を覆っている。
記憶部14は、様々な情報を記憶する機能を有する。記憶部14は、半導体メモリ、HDD、SSD、など、公知の記憶装置が採用される。制御部11は、記憶部14に対して各種情報を書き込む機能や、記憶部14に記憶された各種情報を読み出す機能を有する。記憶部14には、後述されるアプリケーションプログラムなどの様々なプログラムが記憶されている。記憶部14には、管理装置90によって管理されているサイト、情報、プログラム等に対して広域通信網を介してアクセスするための識別情報(例えば、URL(Uniform Resource Locator)など)も記憶されている。
3.管理装置
図1に示される管理装置90は、様々な情報処理機能や様々な演算機能を有する。具体的には、管理装置90は、様々な情報を登録する機能、様々な情報を配信する機能、などを有する。管理装置90は、通信機能及び情報処理機能を有する装置であればよい。管理装置90は、例えば、CPU,記憶媒体、通信装置などを備えたコンピュータとして構成されている。図1の例では、管理装置90は、制御装置91と、通信部92、表示部93、入力部94、記憶部95、を備える。
図1に示される管理装置90は、様々な情報処理機能や様々な演算機能を有する。具体的には、管理装置90は、様々な情報を登録する機能、様々な情報を配信する機能、などを有する。管理装置90は、通信機能及び情報処理機能を有する装置であればよい。管理装置90は、例えば、CPU,記憶媒体、通信装置などを備えたコンピュータとして構成されている。図1の例では、管理装置90は、制御装置91と、通信部92、表示部93、入力部94、記憶部95、を備える。
制御装置91は、例えば公知の情報処理装置として構成される。制御部11は、CPUなどの公知の演算装置及び他の周辺回路などを備え、様々な制御や演算を行い得る。
通信部92は、公知の有線通信方式又は公知の無線通信方式によって広域通信網に直接又は他装置を介して間接的にアクセス可能な装置である。通信部92は、基地局との間で無線通信を行い、図示されていない基地局を介して広域通信網に直接アクセスする構成であってもよい。通信部92は、図示されていないアクセスポイントとの間で無線通信を行い、アクセスポイントを介して広域通信網に間接的にアクセスする構成であってもよい。通信部92は、中継装置(ルータ等)との間で有線通信を行い、中継装置を介して広域通信網にアクセスする構成であってもよい。
表示部93は、公知の画像表示装置として構成される。入力部94は、例えば、キーボード、マウス、タッチパネル、音声入力部など、公知の入力デバイスとして構成され、接触による操作や音声などによって情報の入力が可能とされる。記憶部95は、様々な情報を記憶する記憶装置である。記憶部95において、データベースが構成されていてもよい。
4.管理装置からのコンテンツの配信
管理装置90には、情報の配信対象である利用者に関する情報が登録されている。図3は、図1に示される管理装置90の記憶部95に記憶される利用者データのデータ構造例を示している。図3のように、管理装置90に記憶される利用者データは、データベースを構成しており、各々の利用者に対応付けてID、登録種類、利用者情報が記憶されている。IDは、各々の利用者を識別可能な情報であり、各々の利用者を特定し得る識別情報である。登録種類は、利用者が希望する情報や利用者に有意義な情報の種類を登録する情報である。利用者情報は、利用者に関する各種情報であり、氏名、生年月日、メールアドレス、趣味、健康に関する情報、居住地、過去のエピソード等の個人情報を含んでいてもよく、コンテンツの配信先を特定する配信先情報を含んでいてもよい。例えば、図3の利用者データでは、利用者のIDとしてID1が特定されれば、「ID1」で特定される利用者が希望する情報の種類が「登録種類1」の情報によって特定され、その利用者の個人情報等が「利用者情報1」の情報によって特定される。
管理装置90には、情報の配信対象である利用者に関する情報が登録されている。図3は、図1に示される管理装置90の記憶部95に記憶される利用者データのデータ構造例を示している。図3のように、管理装置90に記憶される利用者データは、データベースを構成しており、各々の利用者に対応付けてID、登録種類、利用者情報が記憶されている。IDは、各々の利用者を識別可能な情報であり、各々の利用者を特定し得る識別情報である。登録種類は、利用者が希望する情報や利用者に有意義な情報の種類を登録する情報である。利用者情報は、利用者に関する各種情報であり、氏名、生年月日、メールアドレス、趣味、健康に関する情報、居住地、過去のエピソード等の個人情報を含んでいてもよく、コンテンツの配信先を特定する配信先情報を含んでいてもよい。例えば、図3の利用者データでは、利用者のIDとしてID1が特定されれば、「ID1」で特定される利用者が希望する情報の種類が「登録種類1」の情報によって特定され、その利用者の個人情報等が「利用者情報1」の情報によって特定される。
本実施形態に係るシステム1では、「利用者が希望する情報の種類」や「利用者に有意義な情報」として、様々な種類が登録可能とされている。具体的には、「利用者が希望する情報の種類」や「利用者に有意義な情報」として、趣味又は生き甲斐に関する複数の種類が予め選定可能に用意され、それら複数の種類から選ばれるいずれか1以上の種類が登録情報に含まれていてもよい。趣味又は生き甲斐に関する種類としては、例えば、園芸、スポーツ、レクリエーション、体操、音楽、美術、料理、懐かしい写真、ショッピング情報など、様々な種類を用意しておくことができる。或いは、利用者が希望する情報の種類として、病気に関する複数の種類が予め選定可能に用意され、それら複数の種類から選ばれるいずれか1以上の種類が登録情報に含まれていてもよい。具体的には、老齢症候群の予防やリハビリテーションやリラクゼーションに関する複数の種類が予め選定可能に用意され、それら複数の種類から選ばれるいずれか1以上の種類が登録情報に含まれていてもよい。
例えば、図3の利用者データにおいて、ID1が「00001」の情報であり、登録種類1が「園芸、体操」を特定する情報であり、利用者情報1が、利用者名として「山田太郎」を特定し、配信先アドレスとして「アドレス情報1」を特定する情報であるとする。この場合、制御装置91は、利用者データを参照すれば、「00001」のIDで特定される利用者の氏名が「山田太郎」であり、配信先アドレスが「アドレス情報1」であり、この利用者が希望する種類が「園芸、体操」であることを特定することができる。
管理装置90は、コンテンツの登録及び配信を行うことが可能とされている。図4は、図4は、図1に示される管理装置90の記憶部95に記憶されるコンテンツ関連データのデータ構造例を示している。図4のように、管理装置90に記憶されるコンテンツ関連データは、データベースを構成しており、コンテンツ毎に、コンテンツ識別情報、コンテンツデータ、配信日時、コンテンツの種類が互いに対応付けられて記憶されている。本明細書では、コンテンツデータは、コンテンツ情報の一例に相当し、単にコンテンツとも称される。
コンテンツ識別情報は、各々のコンテンツを識別可能且つ特定可能な情報であればよく、識別番号であってもよく、具体的な名称であってもよい。コンテンツデータは、コンテンツの具体的なデータであり、動画データ、静止画データ、音声データなどを含んでいてもよく、その他のデータ(例えば、プログラムデータ等)を含んでいてもよい。配信日時は、対応付けられたコンテンツ(コンテンツデータ)が配信される日時を特定する情報である。種類情報は、対応付けられたコンテンツ(コンテンツデータ)の種類を特定する情報である。種類情報で特定されるコンテンツの種類は、1種類であってもよく、複数種類であってもよい。
管理装置90は、各識別情報で特定される各コンテンツ(コンテンツデータ)を、各コンテンツを配信すべき利用者(各コンテンツの種類を登録している利用者)のバーチャルアシスタント装置10に対し、各コンテンツに対応付けられた各配信日時に配信する。なお、図1では、一の利用者が所持する一のバーチャルアシスタント装置10のみが例示されているが、システム1では、多数の利用者がバーチャルアシスタント装置10を所持することができ、図1では、他の利用者が所持するバーチャルアシスタント装置10の図示は省略されている。管理装置90は、コンテンツを配信する場合において、そのコンテンツの配信対象の利用者が複数存在する場合、いずれの利用者のバーチャルアシスタント装置10に対してもコンテンツを配信することができる。
例えば、図4のコンテンツ関連データにおいて、「識別情報1」が「0000A」の情報であり、「データ1」が「園芸に関する所定の動画データ」であり、「日時情報1」が「2021年1月1日10:00」であり、「種類情報1」が「園芸」を特定する情報であるとする。この場合、制御装置91は、図4のコンテンツ関連データを参照すれば、「0000A」に対応付けられたコンテンツデータ(データ1の「園芸に関する所定の動画データ」)を、「園芸」の種類のデータとして、「2021年1月1日10:00」に配信すべきことを特定することができる。この場合、管理装置90は、識別情報1(0000A)で特定されるコンテンツデータ(データ1の「園芸に関する所定の動画データ」)を、「園芸」の種類のデータを登録する利用者(図3の利用者データにおいて、登録種類として「園芸」を含む利用者)のバーチャルアシスタント装置10に対し「2021年1月1日10:00」に配信する。
5.バーチャルアシスタント装置の受信制御
5-1.基本制御
バーチャルアシスタント装置10には、アプリケーションプログラムが記憶されている。このアプリケーションプログラムは、バーチャルアシスタント装置10にインストールされている。このアプリケーションプログラムは、記憶部14に記憶され、制御部11によって読み出されて実行される。
5-1.基本制御
バーチャルアシスタント装置10には、アプリケーションプログラムが記憶されている。このアプリケーションプログラムは、バーチャルアシスタント装置10にインストールされている。このアプリケーションプログラムは、記憶部14に記憶され、制御部11によって読み出されて実行される。
上述されたように、管理装置90は、バーチャルアシスタント装置10に対してコンテンツ(コンテンツデータ)を配信する。管理装置90からバーチャルアシスタント装置10に配信されるコンテンツは、バーチャルアシスタント装置10を所持する利用者が予め登録した種類に属するコンテンツであってもよく、利用者による登録に関係なく管理装置90が選定したコンテンツであってもよい。バーチャルアシスタント装置10は、管理装置90から自身に対して配信されるコンテンツを通信部12によって受信する。制御部11は、外部(管理装置90)から配信されるコンテンツ(コンテンツデータ)を通信部12が受けた場合に、そのコンテンツデータを記憶部14に記憶し、インタフェース13を介して「所定の報知」を行う制御を実行する。なお、「所定の報知」は、コンテンツデータを記憶部14に記憶する前に行ってもよい。
具体的には、上記アプリケーションプログラムは、図5のような流れで制御部11に制御を行わせる。制御部11は、所定の開始条件が成立した場合(例えば、操作部17に対して所定の開始操作がなされた場合)に上記アプリケーションプログラムを実行し、ステップS1において、画像によって具現化されたキャラクタ70を表示部15に表示させる。
図2には、ステップS1でなされる表示の具体例が示される。図2において、キャラクタ70は、一般人を模したバーチャルアシスタント(擬人)である。図2に表示されるキャラクタ70は、あくまで一例であり、例えば、介護福祉士、看護師、医師などの特定の職業の者を模したバーチャルアシスタントであってもよい。また、人に限らず動物やロボット等を模したバーチャルアシスタントであってもよい。上記アプリケーションプログラムは、図2に表示されるキャラクタ70が自動的に会話を行うようにチャットボットの機能を実現するプログラムが備えられていてもよい。自動的に行う会話の内容は、利用者が事前に登録した属性(男女、家族構成、住宅環境、誕生日、趣味など)に合わせて、変更、選択することができる。図2に示されるキャラクタ70の画像は、静止画や動画などによって実現することができ、後述されるステップS3,S8の処理が実行されていない期間には、時間経過に応じて図6、図7,図8のようにキャラクタ70の表情、姿勢、動作、行為などを様々に変化させてもよい。
制御部11は、ステップS1、S3、S4、S8等において、図2、図6~図8のようにキャラクタ70を表示させ、その場合には、表示部15に、季節、暦、日付、時刻等を表示してもよく、朝・昼・夕方・夜の時間帯をイメージするイラストレーション、写真、コンピューターグラフィック、その他の画像等を表示してもよい。例えば、図6は、予め定められた昼の時間帯の画像を示しており、この画像では、昼の時間帯であることを示すようにキャラクタ70の外側の背景の色を明るい色(具体的には予め定められた明色)で示している。一方、図8は、予め定められた夜の時間帯の画像を示しており、この画像では、夜の時間帯であることを示すようにキャラクタ70の外側の背景の色を暗い色(予め定められた暗色)で示している。
制御部11は、ステップS1の後、ステップS2において、会話開始条件が成立したか否かを判定する。会話開始条件は、バーチャルアシスタント装置10から会話を発する条件として予め定められた条件である。会話開始条件は、音声入力部18に対して所定の音声が入力されたこと(例えば、予め定められたウエイクワードが入力されたこと)であってもよい。図15の例では、キャラクタ70の名前がウエイクワードとされており、このウエイクワードが音声入力されることが会話開始条件の一つとされている。図16の例では、予め定められた挨拶(例えば「こんにちは」の言葉)がウエイクワードとされており、このウエイクワードが音声入力されることが会話開始条件の一つとされている。会話開始条件は、これらの例に限定されず、例えば、操作部17に対して所定の操作がなされたこと(例えば、表示部15近傍をタップする操作がなされたこと)であってもよい。会話開始条件は、予め設定された予約時刻が到来したことであってもよい。
制御部11は、ステップS2において会話開始条件が成立した判定した場合、ステップS3に進んで会話又はコンテンツの提供を開始する。ステップS3での会話やコンテンツの提供は、後述されるステップS8と同様に行うことができる。一方、ステップS2において会話開始条件が成立していないと判定した場合、ステップS4に進んで通常表示を継続する。なお、ステップS2でのNo判定及びステップS5でのNo判定が繰り返される間は、図2、図6~図8のようなキャラクタ表示を継続させ、継続中には、キャラクタ70の表情、姿勢、動作、行為などを様々に変化させる。
制御部11は、ステップS3又はステップS4の後、ステップS5において、新たな配信があったか否かの判定を行う。制御部11は、ステップS5において、通信部12が管理装置90から配信されたコンテンツ(コンテンツデータ)を受けていない判定した場合、ステップS5においてNoと判定するとともにステップS2に処理を戻し、ステップS2以降の処理を再び行う。制御部11は、ステップS5において新たな配信があったと判定した場合、ステップS5においてYesと判定し、ステップS6以降の処理を行う。
5-2.新たな配信があった場合
制御部11は、ステップS5において、通信部12が管理装置90から配信されたコンテンツ(コンテンツデータ)を受けたか否かを判定し、受けたと判定した場合、ステップS6において、インタフェース13に「所定の報知」を行わせる。「所定の報知」は、「バーチャルアシスタント装置10が外部から新たなコンテンツの配信を受けたことを伝える伝達情報」の表示や音声出力などである。上記伝達情報の表示や音声出力は、メッセージの表示や音声出力などであってもよく、新たなコンテンツの配信を受けたことを伝える記号や絵柄などの画像表示であってもよく、新たなコンテンツの配信を受けたことを伝える報知音(アラーム音やブザー音などの発生)の出力であってもよい。報知音としては、例えば日常生活で聴きなれた電話のベル音やチャーム音が好ましい。例えば、図9には、「所定の報知」の一例が示されている。図9の例では、「所定の報知」として、配信名で特定される配信が届いた旨のメッセージの画像72を表示部15に表示させているが、このようなメッセージ表示に代えて又はメッセージ表示と併用して音声によるメッセージ報知、絵柄等の画像表示、報知音の出力などを行ってもよい。例えば、キャラクタの会話により報知してもよい。
制御部11は、ステップS5において、通信部12が管理装置90から配信されたコンテンツ(コンテンツデータ)を受けたか否かを判定し、受けたと判定した場合、ステップS6において、インタフェース13に「所定の報知」を行わせる。「所定の報知」は、「バーチャルアシスタント装置10が外部から新たなコンテンツの配信を受けたことを伝える伝達情報」の表示や音声出力などである。上記伝達情報の表示や音声出力は、メッセージの表示や音声出力などであってもよく、新たなコンテンツの配信を受けたことを伝える記号や絵柄などの画像表示であってもよく、新たなコンテンツの配信を受けたことを伝える報知音(アラーム音やブザー音などの発生)の出力であってもよい。報知音としては、例えば日常生活で聴きなれた電話のベル音やチャーム音が好ましい。例えば、図9には、「所定の報知」の一例が示されている。図9の例では、「所定の報知」として、配信名で特定される配信が届いた旨のメッセージの画像72を表示部15に表示させているが、このようなメッセージ表示に代えて又はメッセージ表示と併用して音声によるメッセージ報知、絵柄等の画像表示、報知音の出力などを行ってもよい。例えば、キャラクタの会話により報知してもよい。
このように、上記のアプリケーションプログラムは、外部(管理装置90)から配信されるコンテンツデータ(コンテンツ情報)を通信部12が受けた場合に、ステップS6において、「インタフェース13を介して所定の報知を行う制御」を制御部11に実行させる。
制御部11は、ステップS6において、インタフェース13に「所定の報知」を行わせた後、ステップS7において、提供指示があったか否かを判定する。具体的には、制御部11は、ステップS7において、「インタフェース13を介してコンテンツの提供を指示する入力を受けたか否か」を判定する。
「コンテンツの提供を指示する入力」は、例えば、操作部17に対する所定操作であってもよく、所定の音声入力であってもよい。例えば、ステップS6の処理によって図9のような「所定の報知」がなされる例では、「所定の報知」のメッセージと共に2つの選択ボタン(「見ない」「見る」のボタン画像)が表示される。この場合、それら選択ボタンのうちの「見る」を選択する操作(例えば、「見る」の画像72をクリックする操作)が「コンテンツの提供を指示する入力」の一例に相当する。従って、ステップS6において図9のような表示が行われた後、「見る」を選択する操作がなされた場合、ステップS7では、コンテンツの提供を指示する入力を受けたと判定し、ステップS8の処理を実行する。
制御部11は、ステップS7において「コンテンツの提供を指示する入力」を受けなかった判定した場合、ステップS9において新たに配信されたコンテンツデータを記憶部14に蓄積する。例えば、制御部11は、ステップS6において「所定の報知」を行った後、所定時間を経過するまで「コンテンツの提供を指示する入力」がなされない場合、図10のように、コンテンツデータ(コンテンツ情報)の配信があったことを示す報知情報の表示を表示部15に行わせる。例えば、管理装置90から新たに2つのコンテンツデータが配信され、ステップS6において図9のように「所定の報知」が行われた場合に、「所定の報知」の開始から所定時間を経過しても「見る」のボタンが押されなかった場合には、ステップS9に進み、新たに配信されてきたコンテンツデータを蓄積するとともに、図10のような画像を表示する。図10の画像では、報知情報として、新たに配信されたコンテンツのうち未提供となっているコンテンツの数を画像74によって表示している。なお、ステップS6において図9のように「所定の報知」が行われた場合に、「見ない」のボタンが選択された場合(即ち、コンテンツの提供の保留を指示する入力がなされた場合)にも、ステップS9に進んで同様の処理を行う。
制御部11は、ステップS7において「コンテンツの提供を指示する入力」を受けたと判定した場合、ステップS8において、会話やコンテンツを提供する表示を表示部15に行わせる。制御部11は、ステップS7でYesと判定してステップS8の処理を行う場合、管理装置90から新たに配信されたコンテンツデータ(コンテンツ情報)に基づくコンテンツの出力(例えば、新たに配信されたコンテンツデータに含まれる動画の再生や静止画の表示、音声の出力等)を表示部15や音声出力部16に行わせる。
ステップS7でYesに進んだ場合にステップS8で行う制御は、「通信部12が受けたコンテンツに関する会話」を、インタフェース13を介して出力する制御である。図11~図14は、ステップS7でYesに進んだ場合に、制御部11がステップS8で行う制御の一例を示している。図11~図14は、管理装置90から「園芸」に関する「いきいき配信」というコンテンツが新たに配信された場合においてステップS8でこのコンテンツを提供する例であり、この例では、配信されたコンテンツデータに「園芸」に関する動画や会話データが含まれている。この場合、制御部11は、ステップS8において動作を再生しつつ会話のために音声を発するように制御を行う。例えば、図13の例では、ひまわり畑が表示されたタイミングで「夏の花、ひまわりは元気なイメージですね」という会話を発している。この会話を発する際には、キャラクタ70を表示させておくことで、キャラクタ70が話しかけている印象を与えることができる。なお、制御部11は、会話を発する場合、予め登録された利用者のニックネームで発話をしてもよい。
制御部11は、ステップS8にてコンテンツの提供を行い、図13のように利用者に対して会話を発した場合には、その後、動作検出部が検出する動作又は音声入力部に入力される音声の少なくともいずれかに基づいて「利用者からの応答の認識」を試みる。例えば、操作部17に対する所定の応答操作(例えば、キャラクタ70やその他のデザインをタップする操作)や音声入力部18に対する所定の音声入力(例えば、言葉の入力)が「利用者からの応答」と定められている。制御部11は、インタフェース13において「利用者からの応答」があった場合に、この応答に対する更なる会話を、インタフェース13を介して出力するように制御を行う。「応答に対する更なる会話」は、提供されているコンテンツの種類の話題であってもよく、その種類とは異なる話題であってもよい。「応答に対する更なる会話」は、文字表示と音声出力を併用することが望ましいが、いずれか一方であってもよい。なお、制御部11が「応答に対する更なる会話」を発するように制御を行った場合、再び、「利用者からの応答の認識」を試みることが望ましい。そして、「利用者からの応答」があった場合には、この応答に対する更なる会話を、インタフェース13を介して出力することが望ましい。このように、「応答に対する更なる会話」と「利用者からの応答の認識」を繰り返すことで、会話を継続させることができる。
このように、制御部11は、インタフェース13を介して「コンテンツに関する会話」を出力した後、インタフェース13を介して「利用者からの応答」を認識した場合に、インタフェース13を介して「応答に対する会話」を出力するように制御を行う。ステップS8は、このような制御を制御部11に行わせるステップである。
なお、制御部11は、ステップS8にて会話を行う場合、音声の入出力と併用して、音声入力部18を介して音声入力された発話内容(利用者の発話内容)やバーチャルアシスタント装置10の発話内容(例えば、キャラクタ70の発話内容)を表示部15に文字で表示してもよい。
なお、図11~図14は、バーチャルアシスタント装置10と対応付けて登録されている種類(利用者が希望する種類)のコンテンツを提供する例が示されるが、ステップS8で提供するコンテンツや会話はこの例に限定されない。例えば、管理装置90から新たな配信として「明日の天気」に関するコンテンツの配信があった場合に、ステップS8において、このコンテンツに関する会話を図17のように開始してもよい。或いは、ステップS2において会話開始条件が成立したと判定した場合に、ステップS3において「明日の天気」に関する会話及びコンテンツを図17のように開始してもよい。制御部11は、ステップS8において図17のように会話を開始した場合であっても、その開始後、動作検出部が検出する動作又は音声入力部に入力される音声の少なくともいずれかに基づいて「利用者からの応答の認識」を試みる。そして、制御部11は、インタフェース13において上述された「利用者からの応答」があった場合(例えば、キャラクタ70の近傍のタップがあった場合)、この応答に対する更なる会話を、図18のように、インタフェース13を介して出力するように制御を行う。
制御部11がインタフェース13を介して会話を行う場合、コンテンツに関する会話又は応答に対する会話の少なくともいずれかにおいて、キャラクタの表情、キャラクタの動作、テロップ、効果音、アイコンのいずれかの表示又は音声出力を発生又は変化させてもよい。例えば、図18の例では、図17の例から「新たにハートマークの絵柄(アイコン)」や「ワクワクの文字(テロップ)」を発生させ、キャラクタ70の気分が良好であることを視覚的に示している。制御部11は、図18のような表示と併せて効果音を音声出力させてもよい。制御部11は、図18の表示において、キャラクタ70の表情を笑顔にしたり、キャラクタ70に対してジャンプやスキップ等の動作を行わせたりしてもよい。図18は、キャラクタ70が良好な気分の例を示しているが、キャラクタ70を、沈んだ表情、怒った表情、悲しんだ表情などに変化させてもよく、キャラクタ70に喜んだ動作や泣く動作などを行わせてもよい。また、テロップ、効果音、アイコンの種類は図18の例に限定されず、様々に変更することができる。
図5の制御では、ステップS1、S3、S4、S8が「キャラクタ70を表示部15に表示させる動作」を制御部11に行わせるステップの一例に相当する。ステップS8は、「インタフェース13を介してコンテンツに関する会話を出力する制御」を制御部11に行わせるステップの一例に相当する。ステップS8は、「コンテンツ情報に基づくコンテンツの表示を表示部に行わせる制御」を制御部11に行わせるステップの一例に相当する。
なお、図5のフローチャートでは制御を省略したが、蓄積されたコンテンツの提供を指示する所定の入力がなされた場合に、蓄積されたコンテンツの提供及びそのコンテンツに関する会話を開始してもよい。例えば、ステップS2でのNo判定及びステップS5でのNo判定が繰り返される間(通常表示が継続している間)において図10のように上述の報知情報(図10では、画像74)が表示されている場合、所定操作(例えば、報知情報を示す画像74又はその近傍を選択する操作)がなされたときには、図19のように、報知情報が蓄積を示すコンテンツのリスト(配信履歴(着信履歴))を表示させてもよい。そして、そのリストにおいて、いずれかのコンテンツを選択する操作がなされた場合に、その選択されたコンテンツを提供するとともに当該コンテンツに関する会話を開始させてもよい。このようにコンテンツが選択された場合のコンテンツや会話は、図11~図14の例と同様に行ってもよく、図17、図18の例と同様に行ってもよい。
5-3.新たな配信が無い期間の通常動作の詳細
次の説明は、新たな配信が無い期間(ステップS5のNoと判定される期間)になされる通常動作の詳細に関する。この期間、制御部11は、主に、待機モードと会話モードとに切り替わる。本実施形態では、新たな配信が無い期間(ステップS5のNoと判定される期間)において、ステップS4の処理を継続するモードが待機モードの一例である。また、上記期間において、ステップS3の処理を継続するモードが会話モードの一例である。
次の説明は、新たな配信が無い期間(ステップS5のNoと判定される期間)になされる通常動作の詳細に関する。この期間、制御部11は、主に、待機モードと会話モードとに切り替わる。本実施形態では、新たな配信が無い期間(ステップS5のNoと判定される期間)において、ステップS4の処理を継続するモードが待機モードの一例である。また、上記期間において、ステップS3の処理を継続するモードが会話モードの一例である。
会話モードは、ステップS2でYesと判定されてから、会話モードの終了条件が成立するまでのモードである。会話モードの終了条件は、会話モードで実行されたコンテンツが終了したことであってもよく、一定時間以上インタフェースに所定入力(例えば、音声入力やタッチパネルに対する操作等)がなされなかったことであってもよく、利用者からインタフェースに対して終了を指示する入力(終了を指示する音声入力や接触操作等)がなされたことであってもよい。会話モードは、具体的には、制御部11がウェイクワード以外の言葉を検出するモードである。制御部11は、会話モード中にインタフェースに音声が入力された場合、インタフェースに入力された音声を解析し、その音声が意味する言葉を公知の方法で認識する。
待機モードは、ステップS2でNoと判定される期間のモードであり、会話モードが解除されているときのモードである。待機モードは、上記インタフェースにウェイクワードが入力されたか否かを制御部11が監視するモードである。制御部11は、待機モード中にインタフェースに音声が入力された場合、その音声がウェイクワードであるか否かを公知の方法で判定する。但し、制御部11は、待機モード中にインタフェースに入力される音声からウェイクワード以外の音声は認識しない。つまり、制御部11は、待機モードのときには、ウェイクワード以外の音声認識する必要が無く、ウェイクワードであるか否かの判定を行うだけで済むため、会話モードのときよりも音声の認識を簡略化することができる。
図5のフローチャートで示されるように、制御部11は、ステップS2、S5でNoの判定が繰り返される期間は待機モードに設定され、待機モード中には、ウェイクワードの検出を継続的に試みる。制御部11は、待機モード中にインタフェース13にウェイクワードが音声入力されたことを検出した場合、ステップS2にてYesと判定するとともに会話モードに切り替わり、処理をステップS3に進める。そして、会話モードの終了条件が成立するまで、会話モードを継続する。制御部11は、会話モードの終了条件が成立した場合、待機モードに切り替わり、待機モードを継続する。
制御部11は、待機モード中に、キャラクタが待機動作を行う画像を表示部15に表示させることもできる。図20は、キャラクタ70が待機動作を行う画像の一例であり、制御部11は、待機モード中に図20のような待機画像を表示部15に表示させるように動作する。なお、図20の画像はあくまで一例であり、待機画像はこの例に限定されない。例えば、図22のような待機画像であってもよく、他の種類の待機画像であってもよい。利用者の属性に合わせて選定した待機画像でもよい。このキャラクタが待機動作を行う画像を表示部15に表示させることは、一定時間ごとに行ってもよく、また予め設定された特定の時刻に行ってもよく、あるいはランダムな間隔をおいて行ってもよい。
制御部11は、待機モード中に、図20のような待機画像を表示させるだけでなく、待機画像に含まれるキャラクタ70が発する会話をインタフェース13に音声出力させるように動作する。待機画像に含まれるキャラクタ70が発する会話は、キャラクタ70が行っている待機動作に関連する話、利用者にとって有益な情報を含む話、利用者への質問を含む話、であることが望ましい。例えば、図20のような待機画像を表示しながら、或いは、待機画像の表示直後に、「愛犬のポチです。犬と触れ合うことで今日の仕事の疲れも忘れて、優しい気持ちになれます。動物と触れ合うことで人の心に癒しを与える効果をアニマルセラピーというそうです。利用者様はご存知でしたか。」といった話(待機画像の動作に関連する話、利用者にとって有益な情報を含む話、利用者に質問する話)を発するように上記会話を音声出力してもよい。なお、上述の会話例はあくまで一例であり、例えば、図20のような待機画像を表示しながら、或いは、待機画像の表示直後に、「私の愛犬は小型のトイプードルです。50年前は欧米のテレビ番組の影響でシェパードやコリーなど大型犬が人気があったそうですね。」といった話を発するように上記会話を音声出力してもよい。
このような動作により、待機動作を行っているキャラクタ70から会話の誘いを受けたような印象を利用者に与えることができる。そして、制御部11は、上記会話(待機動作を行うキャラクタ70が発した会話)が出力されてから所定時間が経過するまでの間、一時的に会話モードに切り替わる。つまり、制御部11は、上記会話が出力されてから上記所定時間が経過するまでの間、インタフェース13に入力された音声からウェイクワード以外の言葉を検出する。上記所定時間は、予め定められた固定時間であってもよく、変更可能な設定時間であってもよい。
制御部11は、上記会話(待機モード中にキャラクタ70から発せられる会話)が出力されてから上記所定時間が経過するまでの間にウェイクワード以外の言葉を検出した場合、会話モードを継続する。この場合、制御部11は、継続した会話モードを、例えば、上述の会話モードの終了条件が成立するまで維持する。
一方、制御部11は、上記会話(待機モード中にキャラクタ70から発せられる会話)が出力されてから上記所定時間が経過するまでの間にウェイクワード以外の言葉を検出しなかった場合、待機モードに切り替わるように動作する。このバーチャルアシスタント装置10は、例えば、キャラクタ70が自発的に会話を発した後の会話モード中に利用者が近くにいなかったり、利用者が会話を望まずに応答しない状況であった場合には、自動的に待機モードに戻すことで、会話モードが不要な状況下で会話モードが継続しすぎることを抑えることができる。
制御部11は、上記会話(待機モード中にキャラクタ70から発せられる会話)が出力されてから上記所定時間が経過するまでの間の上記会話モード中に、図21のように、上記待機動作の画像を解除してキャラクタ70が正面を向く基本画像を表示しつつインタフェース13に入力されるウェイクワード以外の言葉を検出するように動作してもよい。この例では、バーチャルアシスタント装置10は、上記所定時間が経過するまでの間の会話モード中に、キャラクタ70が正面を向いた状態で利用者からの応答を受けることができるため、キャラクタ70が利用者に注目した状態で利用者からの話を待つような印象を利用者に与えることができる。
或いは、制御部11は、上記会話(待機モード中にキャラクタ70から発せられる会話)が出力されてから上記所定時間が経過するまでの間の上記会話モード中に、図22のように、上記待機動作の画像を表示させつつウェイクワード以外の言葉を検出するように動作してもよい。図22の例で会話を発する場合、例えば、「最近、生け花を習い始めました。日本では700年も前から独自に発展した技術なんですよ。ユーザ様は生け花のご経験はありますか。」といった話(待機画像の動作に関連する話、利用者にとって有益な情報を含む話、利用者への質問を含む話)を発するように上記会話を音声出力してもよい。このような会話を発した後、待機動作(生け花を行っている動作)の画像表示を継続しながら、インタフェース13に入力されるウェイクワード以外の言葉を検出するように動作してもよい。この例では、バーチャルアシスタント装置10は、会話モード中に、キャラクタ70が待機動作を行いながら利用者からの話を待つような印象を利用者に与えることができる。
6.効果の例示
例えば、特許文献1の装置は、利用者が発話をしなければ会話の機会を十分に確保できないため、積極的な行為を行いにくい利用者にとっては、コンテンツの提供を受ける機会を十分に確保しにくい。しかも、特許文献1の装置は、利用者が最初に発したメッセージの話題で会話を進めるため、利用者は、相手が決めた話題でコンテンツの提供を受けることができない。
例えば、特許文献1の装置は、利用者が発話をしなければ会話の機会を十分に確保できないため、積極的な行為を行いにくい利用者にとっては、コンテンツの提供を受ける機会を十分に確保しにくい。しかも、特許文献1の装置は、利用者が最初に発したメッセージの話題で会話を進めるため、利用者は、相手が決めた話題でコンテンツの提供を受けることができない。
これに対し、バーチャルアシスタント装置10は、外部から配信されるコンテンツ情報を通信部12が受けた場合にインタフェース13を介して所定の報知を行うため、利用者にコンテンツ配信があったことを知らせることができる。従って、この装置は、利用者に対しコンテンツの提供を受けるきっかけを能動的に与えることができ、利用者がコンテンツの提供を受ける機会を確保しやすい。しかも、この装置は、上記報知の後、「コンテンツの提供を指示する入力」を受けた場合に、配信されたコンテンツ情報に基づくコンテンツの表示を行うことができるため、利用者は、希望する時期に話題の提供を受けやすい。
バーチャルアシスタント装置10は、『配信を知らせる報知に対して「コンテンツの提供を指示する入力」があったか否か』を、動作検出又は音声検出によってより正確に確認することができる。
バーチャルアシスタント装置10は、利用者が報知に気付かなかったり、報知の際にコンテンツの提供を希望しない場合には、コンテンツ情報の配信があったこと報知情報によって知らせることができ、事後的な対応を行いやすくすることができる。なお、報知する手段としては表示部への表示の他、キャラクタの発話による報知であってもよい。また、表示部への表示およびキャラクタの発話による報知の両方であってもよい。
バーチャルアシスタント装置10は、利用者が希望する種類のコンテンツを選定して提供することができるため、利用者が興味を持ちやすくなり、利用者の満足度が高まりやすい。
バーチャルアシスタント装置10は、図20のように、待機モード中にキャラクタ70が待機動作を行うため、待機モード中であってもキャラクタ70の行動が利用者の印象に残りやすくなる。更に、待機モード中には、自発的に会話を開始するようにキャラクタ70を動作させることができるため、キャラクタ70が待機動作を行いながら利用者を会話に誘うような状況を発生させることができる。しかも、バーチャルアシスタント装置10は、ウェイクワードの検出によって会話モードに切り替わることを前提とする一方で、キャラクタ70から会話が発せられた後には、所定時間が経過するまでの間、自動的に会話モードに切り替えることができるため、利用者は、ウェイクワードを発することなく会話に入ることができ、より自然な流れで会話を進めることができる。
例えば、特許文献1の装置は、利用者が発話をしなければ、会話の機会を十分に確保できない。しかも、特許文献1の装置は、利用者が最初に発したメッセージの話題で会話を進めるため、利用者は相手が決めた話題で会話の誘いを受けることができない。上述のバーチャルアシスタント装置10は、このような問題をより効果的に解消することができる。
<他の実施形態>
本発明は上記記述及び図面によって説明した実施形態に限定されるものではなく、例えば次のような実施形態も本発明の技術的範囲に含まれる。また、上述した実施形態や後述する実施形態の様々な特徴は、矛盾しない組み合わせであればどのように組み合わされてもよい。
本発明は上記記述及び図面によって説明した実施形態に限定されるものではなく、例えば次のような実施形態も本発明の技術的範囲に含まれる。また、上述した実施形態や後述する実施形態の様々な特徴は、矛盾しない組み合わせであればどのように組み合わされてもよい。
上述された実施形態では、動作検出部の一例に相当する操作部17がタッチパネルとして構成される、がこの例に限定されない。操作部17は、その他の公知の入力デバイス(キーボード、マウス、タッチペン等)であってもよい。或いは、動作検出部は、操作部17に代えて又は操作部17に加えて他の入力デバイス(例えば、非接触方式での入力操作が可能とされた入力デバイス)を備えていてもよい。具体的には、動作検出部は、撮像部やモーションセンサなどの非接触センサを有していてもよい。この場合、その非接触センサと制御部11とが協働し、利用者の動きやジェスチャーなどを検知してもよい。
上述された実施形態では、表示部15は、静止画や動画を二次元で表示する表示装置として構成されるが、この例に限定されない。表示部15は、三次元表示を行い得る三次元ディスプレイであってもよい。
上述されたシステム1では、バーチャルアシスタント装置10の外部に設けられた登録部(記憶部95)に利用者が希望する情報の種類が登録され、そして、制御部11は、登録部に登録される種類のコンテンツに関する会話をインタフェース13を介して出力する制御を行うようになっていた。しかし、この例に限定されない。例えば、バーチャルアシスタント装置10に登録部が設けられ、利用者が希望する種類の情報が登録されてもよい。例えば、バーチャルアシスタント装置10は、バーチャルアシスタント装置10に登録された種類(利用者が希望する種類)のコンテンツのみを管理装置90から受信してもよい。或いは、バーチャルアシスタント装置10は、管理装置90からコンテンツを受信した場合において、バーチャルアシスタント装置10に登録された種類(利用者が希望する種類)のコンテンツを受信した場合にステップS2において新たな配信があったと判定してもよい。そして、ステップS7では、バーチャルアシスタント装置10に登録された種類(利用者が希望する種類)のコンテンツのみを提供してもよい。
上述された実施形態に加え、表示部15に過去の対話の履歴を表示できるようにしてもよい。例えば、ステップS7の会話が行われる毎にその会話の日時を記録しておき、会話の履歴を記憶部14に蓄積しておいてもよい。そして、操作部17において会話の履歴の表示を指示する所定操作がなされた場合に、記憶部14に蓄積された会話の履歴の一部又は全部を表示するようにしてもよい。
上述された実施形態では、コンテンツの一例を示したが、コンテンツとしては様々な種類のコンテンツを採用することができる。例えば、図23は、レクリエーションに関するコンテンツ(例えば、簡易体操を表示するコンテンツ)の例であり、図24は、回想法に関するコンテンツ(例えば、昔の画像を表示するコンテンツ)の例であり、図25は、自然の音に関するコンテンツ(例えば、焚火の画像及び音を出力するコンテンツ)の例である。ステップS7では、図23~図25のようなコンテンツを提供してもよく、このようなコンテンツの提供時又は提供の前後に、キャラクタ70によって会話を行うようにしてもよい。例えば、提供する前にコンテンツの目的や内容に関する会話を行ったり、提供後に、コンテンツを体験した感想や意見について問いかける質問をしたり、他の話題へと繋げる会話を行うようにしてもよい。
上述された実施形態では、バーチャルアシスタント装置10が、主に高齢者向けのバーチャルアシスタント装置として構成された例を示したが、この例に限定されない。例えば、子供などの他のカテゴリの対象者を対象としてもよい。
上述された実施形態では、バーチャルアシスタント装置10は、管理装置90から新たな配信を受けた場合に、新たな配信があった直後に図9のような情報を表示するが、この例に限定されない。例えば、バーチャルアシスタント装置10は、管理装置90から新たな配信を受けた場合に、配信されるコンテンツをバックグラウンドでダウンロードし、記憶部14に記憶しておいてもよい。このように、配信されるコンテンツバックグラウンドでダウンロードした場合、所定の報知条件の成立に応じて、新たな配信がダウンロードされたことを図9のように報知してもよい。この場合の所定の報知条件は、予め設定された時刻になったことであってもよく、バックグラウンドでダウンロードしている最中に実行されていたコンテンツ(例えば、動画表示など)が終了したことであってもよく、その他の条件であってもよい。
管理装置90からバーチャルアシスタント装置10に送信される情報は、上述の例に限定されない。例えば、管理装置90は、利用者の誕生日の当日になった場合に、当該利用者のバーチャルアシスタント装置10に対して利用者の誕生日であることを知らせる情報や誕生日に関するコンテンツなどを配信してもよい。バーチャルアシスタント装置10は、利用者の誕生日であることを知らせる情報を受信した場合に、利用者の誕生日を祝うメッセージや画像などを表示させてもよい。或いは、管理装置90は、コンテンツ配信のスケジュールを知らせる情報をバーチャルアシスタント装置10に送信してもよい。コンテンツ配信のスケジュールを知らせる情報は、例えば、コンテンツの内容とそのコンテンツが配信される日時とを対応付けたスケジュール情報や、そのスケジュール情報のリストなどが挙げられる。
上述の実施形態では、コンテンツの終了時に図14のような画像を表示するようにバーチャルアシスタント装置10が動作したが、この例に限定しない。例えば、制御部11は、図14に代えて図26のような画像を表示するように表示部15を制御してもよい。図26の例では、制御部11は、所定条件が成立した場合に、表示部15に複数の選択肢を表示し、複数の選択肢の表示後の上記インタフェースへの入力結果に基づいていずれの選択肢が選択されたかを判定するように動作する。所定条件は、例えば、図14,図26の例のように、コンテンツが終了したことであってもよく、その他の条件(利用者に対する質問が音声出力されたこと等)であってもよい。図26の例は、コンテンツの終了の際に利用者に対する質問(具体的にはアンケート)を音声出力及び画像表示する場合の例であり、その質問に対する回答の候補を複数の選択肢として示している。制御部11は、図26のように複数の選択肢を画像81,82,83,84として表示するように表示部15を動作させ、このように複数の選択肢が表示された後、インタフェース13への入力結果に基づいていずれの選択肢が選択されたかを判定するように動作する。例えば、図26のように複数の選択肢の画像81,82,83,84が表示された状態で、画像81,82,83,84のいずれかを選択する接触操作又は音声指示がインタフェース13に対してなされた場合に、その入力に基づいていずれの選択肢が選択されたのかを特定する。このバーチャルアシスタント装置10は、選択肢の提示により回答の候補を単純化することで、回答の容易化を図ることができ、利用者がいずれの選択肢を選択したのかを判定することで、利用者の意思を誤認しにくい形で利用することができる。図26の仕組みを用いることで、アンケートに限らず、クイズの回答選択、各種調査を目的とした情報収集にも活用できる。選択された情報をもとに、提供する会話の内容を変更・選択したり、今後のサービス内容の向上を図ることに利用したり、集計した結果を利用者にフィードバックすることで、利用者の参加意識やモチベーションを高める効果も期待できる。
上述の実施形態の説明では、待機モードから会話モードに切り替わる条件の一例が説明されたが、この例に限定されない。例えば、待機モードから会話モードに切り替わる条件は、「動作検出部によって所定動作が検出されたこと」であってもよい。所定動作は、例えば、「タッチパネル20(図2等)に対する接触」であってもよく、「タッチパネル20に対する予め定められた操作」であってもよく、その他の動作であってもよい。上記実施形態をこのように変更する場合、「待機モードでのウェイクワードの監視」に代えて「待機モードでの所定動作の監視」に変更すればよく、その他の構成及び制御は、上記実施形態と同様にすることができる。そして、この例では、制御部11及び操作部17が協働して動作検出部として機能することができる。具体的には、制御部11は、図5の制御において、待機モード中に所定動作(例えば、タッチパネル20(図2等)に対する接触)の監視を継続的に試み、待機モード中に上記所定動作がなされたことを検出した場合、ステップS2にてYesと判定するとともに会話モードに切り替わり、処理をステップS3に進めるように動作すればよい。
なお、今回開示された実施の形態は全ての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、今回開示された実施の形態に限定されるものではなく、特許請求の範囲によって示された範囲内又は特許請求の範囲と均等の範囲内での全ての変更が含まれることが意図される。
1…バーチャルアシスタントシステム
10…バーチャルアシスタント装置
11…制御部
12…通信部
13…インタフェース
15…表示部
17…操作部(動作検出部)
18…音声入力部
10…バーチャルアシスタント装置
11…制御部
12…通信部
13…インタフェース
15…表示部
17…操作部(動作検出部)
18…音声入力部
Claims (12)
- 利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、前記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置であって、
前記制御部は、外部から配信されるコンテンツ情報を前記通信部が受けた場合に、前記インタフェースを介して所定の報知を行う制御を行い、前記報知を行った後、前記インタフェースを介してコンテンツの提供を指示する入力を受けた場合に、前記コンテンツ情報に基づくコンテンツの表示を前記表示部に行わせる
バーチャルアシスタント装置。 - 前記インタフェースは、接触又は非接触による前記利用者からの入力動作を検出する動作検出部又は前記利用者の音声を示す音声信号を取得する音声入力部の少なくともいずれかを有し、
前記制御部は、前記報知を行った後、前記動作検出部が検出する動作又は前記音声入力部が取得した音声の少なくともいずれかに基づいて前記指示する入力を受けたか否かを判定する
請求項1に記載のバーチャルアシスタント装置。 - 前記制御部は、前記報知を行った後、所定時間を経過しても前記指示する入力がなされない場合に、前記コンテンツ情報の配信があったことを示す報知情報の表示を前記表示部に行わせる
請求項1又は請求項2に記載のバーチャルアシスタント装置。 - 前記バーチャルアシスタント装置又は前記バーチャルアシスタント装置の外部に設けられた登録部に前記利用者が希望する情報の種類が登録され、
前記制御部は、前記登録部に登録される前記種類の前記コンテンツを前記インタフェースを介して出力する制御を行う
請求項1から請求項3のいずれか一項に記載のバーチャルアシスタント装置。 - 前記制御部は、
前記インタフェースにウェイクワードが入力されたか否かを監視することおよび動作検出部によって動作が検出されたか否かを監視することの少なくとも一方を行う待機モードと、少なくとも前記ウェイクワード以外の言葉を検出する会話モードと、に切り替わり、前記待機モード中に前記ウェイクワードの入力を検出した場合に前記会話モードに切り替わり、
前記待機モード中に、前記キャラクタが待機動作を行う画像を前記表示部に表示させつつ前記キャラクタが発する会話を前記インタフェースに音声出力させ、
前記会話が出力されてから所定時間が経過するまでの間、前記会話モードに切り替わる
請求項1から請求項4のいずれか一項に記載のバーチャルアシスタント装置。 - 利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、前記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置であって、
前記制御部は、
前記インタフェースにウェイクワードが入力されたか否かを監視することおよび動作検出部によって動作が検出されたか否かを監視することの少なくとも一方を行う待機モードと、少なくとも前記ウェイクワード以外の言葉を検出する会話モードと、に切り替わり、前記待機モード中に前記ウェイクワードの入力を検出した場合に前記会話モードに切り替わり、
前記待機モード中に、前記キャラクタが待機動作を行う画像を前記表示部に表示させつつ前記キャラクタが発する会話を前記インタフェースに音声出力させ、
前記会話が出力されてから所定時間が経過するまでの間、前記会話モードに切り替わる
バーチャルアシスタント装置。 - 前記制御部は、前記所定時間が経過するまでの間の前記会話モード中に前記ウェイクワード以外の言葉を検出しなかった場合、前記待機モードに切り替わる
請求項5又は請求項6に記載のバーチャルアシスタント装置。 - 前記制御部は、前記所定時間が経過するまでの間の前記会話モード中に、前記待機動作の画像を解除して前記キャラクタが正面を向く基本画像を表示しつつ前記インタフェースに入力される前記ウェイクワード以外の言葉を検出する
請求項5から請求項7のいずれか一項に記載のバーチャルアシスタント装置。 - 前記制御部は、前記所定時間が経過するまでの間の前記会話モード中に、前記待機動作の画像を表示させつつ前記ウェイクワード以外の言葉を検出する
請求項5から請求項7のいずれか一項に記載のバーチャルアシスタント装置。 - 前記制御部は、所定条件が成立した場合に、前記表示部に複数の選択肢を表示し、前記複数の選択肢の表示後の前記インタフェースへの入力結果に基づいていずれの選択肢が選択されたかを判定する
請求項1から請求項9のいずれか一項に記載のバーチャルアシスタント装置。 - 利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、前記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置に用いられるプログラムであって、
外部から配信されるコンテンツ情報を前記通信部が受けた場合に、前記インタフェースを介して所定の報知を行う制御を実行させるステップと、
前記報知が行われた後、コンテンツの提供を指示する入力が前記インタフェースを介してなされた場合に、前記コンテンツ情報に基づくコンテンツの表示を前記表示部に行わせる制御を実行させるステップと、
を含むバーチャルアシスタント装置用のプログラム。 - 利用者からの入力の受入れおよび出力を行うインタフェースと、外部の装置と通信する通信部と、前記インタフェースを構成する表示部に具現化されたキャラクタを表示させる制御部と、を備えたバーチャルアシスタント装置に用いられるプログラムであって、
前記制御部を、前記インタフェースにウェイクワードが入力されたか否かを監視することおよび動作検出部によって動作が検出されたか否かを監視することの少なくとも一方を行う待機モードと、少なくとも前記ウェイクワード以外の言葉を検出する会話モードと、に切り替え、前記待機モード中に前記ウェイクワードの入力を検出した場合に前記会話モードに切り替えるステップと、
前記待機モード中に前記キャラクタが待機動作を行う画像を前記表示部に表示させつつ前記キャラクタが発する会話を前記インタフェースに音声出力させるように前記制御部を動作させるステップと、
前記会話が出力されてから所定時間が経過するまでの間、前記制御部を前記会話モードに切り替えるステップと、
を含むバーチャルアシスタント装置用のプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021099363 | 2021-06-15 | ||
JP2021099363 | 2021-06-15 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022191125A true JP2022191125A (ja) | 2022-12-27 |
Family
ID=84612675
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021163806A Pending JP2022191125A (ja) | 2021-06-15 | 2021-10-05 | バーチャルアシスタント装置及びバーチャルアシスタント装置用のプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2022191125A (ja) |
-
2021
- 2021-10-05 JP JP2021163806A patent/JP2022191125A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Heitmayer et al. | Why are smartphones disruptive? An empirical study of smartphone use in real-life contexts | |
Hunsaker et al. | “He explained it to me and I also did it myself”: How older adults get support with their technology uses | |
CN105345818B (zh) | 带有情绪及表情模块的3d视频互动机器人 | |
Blain-Moraes et al. | Barriers to and mediators of brain–computer interface user acceptance: focus group findings | |
Khosla et al. | Engagement and experience of older people with socially assistive robots in home care | |
Cornejo et al. | Ambient awareness to strengthen the family social network of older adults | |
Goggin | Disability and haptic mobile media | |
Boll et al. | Development of a multimodal reminder system for older persons in their residential home | |
CN110472130A (zh) | 降低对手动开始/结束点和触发短语的需求 | |
WO2015089336A2 (en) | Computer control of online social interactions based on conversation processing | |
WO2017168907A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US10140882B2 (en) | Configuring a virtual companion | |
Wei et al. | Understanding user perceptions of proactive smart speakers | |
Hooper et al. | Smart-device environmental control systems: experiences of people with cervical spinal cord injuries | |
Lancioni et al. | Technology-based programs to support forms of leisure engagement and communication for persons with multiple disabilities: Two single-case studies | |
Paay et al. | Digital ethnography of home use of digital personal assistants | |
JP2006235772A (ja) | データ収集解析表示システム | |
Garg | Understanding Families' Non-/Use Practices and Choices: The Case of Smart Speakers and Smart Interactive Toys | |
JPWO2018179745A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP2022191125A (ja) | バーチャルアシスタント装置及びバーチャルアシスタント装置用のプログラム | |
JP2020113186A (ja) | メンタルトレーニングシステム及びプログラム | |
Syeda et al. | Photo Alive!: elderly oriented social communication service | |
JP2022190870A (ja) | バーチャルアシスタント装置及びバーチャルアシスタント装置用のプログラム | |
CN115335898A (zh) | 信息处理设备、交互式机器人、控制方法 | |
JP2023176404A (ja) | バーチャルアシスタント装置及びバーチャルアシスタント装置用のプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240226 |