WO2018193717A1 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

Abstract

【解決手段】情報処理装置は、取得部と、オーダー情報生成部と、通信部と、提案情報生成部とを具備する。前記取得部は、ユーザーから提示されるユーザー提示情報を取得するように構成される。前記オーダー情報生成部は、前記取得されたユーザー提示情報のうち外部装置への提供が許可されない共有不許可情報を省略するかまたは代替情報に変換し、前記ユーザー提示情報に基づきオーダー情報を生成するように構成される。前記通信部は、前記オーダー情報を前記外部装置に送信するように構成され、前記外部装置により前記オーダー情報に基づき生成されて送信された外部提案情報を受信するように構成される。前記提案情報生成部は、前記外部提案情報に基づき提案情報を生成するように構成される。

Description

情報処理装置、情報処理方法、およびプログラム

　本技術は、ユーザーから提示される音声等の情報を認識し、認識した内容に基づくフィードバックを行う情報処理の技術に関する。

　特許文献１には、ユーザーの発話やジェスチャーにより、情報処理装置に様々な処理を実行させる装置が開示されている。この装置は、ユーザーの発話の音声解析処理や、ユーザーの動作（ジェスチャー）の画像解析を実行し、例えばその解析結果を含む情報をフィードバック情報として表示する。また、この装置は、ユーザーからの要求に対する応答や、情報処理装置の処理状況を、情報処理装置の代理であるアバターを介して表示、出力する（例えば、明細書段落［００３３］、［００３６］、［００４２］、図２、３参照）。

　特許文献２には、音声情報をテキスト情報に変換する音声認識手段を用いて議事録情報を生成するシステムが開示されている。このシステムは、ユーザーを識別する情報（ユーザー情報）を予め記憶し、ユーザーが利用する音声入力手段とその識別情報とを対応付けて記憶する。システムは、そのユーザ情報と、そのユーザーの音声情報が変換されたテキスト情報とを対応付けた議事録情報を生成する（例えば、明細書段落［００２７］、［００２９］、図１参照）。

特開2011-209786号公報 特開2009-86207号公報

　これらのような、ユーザーから出力される情報を認識するための技術は、今後、ますます発展することが予想される。そのため、当該技術の改良や利便性の向上が求められる。

　本開示の目的は、ユーザーにとって利便性の高い情報処理装置、情報処理方法、およびそのプログラムを提供することにある。

　上記目的を達成するため、一形態に係る情報処理装置は、取得部と、オーダー情報生成部と、通信部と、提案情報生成部とを具備する。
　前記取得部は、ユーザーから提示されるユーザー提示情報を取得するように構成される。
　前記オーダー情報生成部は、前記取得されたユーザー提示情報のうち外部装置への提供が許可されない共有不許可情報を省略するかまたは代替情報に変換し、前記ユーザー提示情報に基づきオーダー情報を生成するように構成される。
　前記通信部は、前記オーダー情報を前記外部装置に送信するように構成され、前記外部装置により前記オーダー情報に基づき生成されて送信された外部提案情報を受信するように構成される。
　前記提案情報生成部は、前記外部提案情報に基づき提案情報を生成するように構成される。

　この情報処理装置では、オーダー情報生成部が、共有不許可情報を省略するかまたは代替情報に変換してオーダー情報を生成する。これにより、外部装置へ出力すべき情報の選別性が向上するため、ユーザーにとって利便性の高いサービスを提供することができる。

　前記オーダー情報生成部は、前記共有不許可情報を代替情報に変換し、前記ユーザー提示情報に基づき、前記代替情報を含むオーダー情報を生成するように構成されていてもよい。

　前記共有不許可情報を前記代替情報への変換する処理は、共有不許可情報に含まれる情報を上位概念化する処理、または、個人情報を特定可能な情報を個人情報を特定困難な情報に置き換える処理を含んでいてもよい。

　前記オーダー情報生成部は、前記共有不許可情報を含むオーダー確認情報をさらに生成するように構成されていてもよい。
　これにより、ユーザーによる自身のオーダー情報を容易に確認することができる。

　前記提案情報生成部は、さらに前記共有不許可情報に基づき前記提案情報を生成するように構成されていてもよい。
　この提案情報は共有不許可情報に基づく情報であるので、ユーザーにとって理解しやすい提案情報を生成することができる。

　前記提案情報生成部は、前記提案情報内の複数の提案項目のうち、前記特定領域に対応する提案項目の情報を、前記共有不許可情報に基づいて生成するように構成されいてもよい。

　前記提案情報生成部は、前記提案情報の少なくとも一部を画像として生成し、前記提案情報内の特定領域を強調表示する画像を生成するように構成されていてもよい。
　これにより、ユーザーはその特定領域を容易に認識することができる。

　前記外部装置との通信の接続を制御するように構成された接続制御部をさらに具備し、
　前記接続制御部は、前記オーダー情報生成部により前記オーダー情報が生成された後、前記外部装置との接続を開始するように構成されていてもよい。
　これにより、外部装置との接続が開始される前に、ユーザーは生成されたオーダー情報を確認することができる。

　前記情報処理装置は、前記提案情報生成部により生成された前記提案情報を提示するように構成された提示部をさらに具備してもよい。

　前記提示部は、前記オーダー情報生成部で生成された前記オーダー情報をさらに提示するように構成されていてもよい。
　これによりユーザーは、例えば外部装置にオーダー情報が送信される前に、そのオーダー情報を確認することができる。

　前記提案情報生成部は、前記提案情報の少なくとも一部を画像として生成するように構成されていてもよい。その場合、前記提案情報生成部は、前記提案情報を画像および音声として生成するように構成されていてもよい。

　他の形態に係る情報処理装置は、取得部と、オーダー情報生成部と、通信部とを有する。
　前記取得部は、ユーザーから提示されるユーザー提示情報を取得するように構成される。
　前記オーダー情報生成部は、前記取得されたユーザー提示情報のうち、第２情報処理装置との共有が許可されない共有不許可情報を省略するかまたは代替情報に変換し、前記ユーザー提示情報に基づきオーダー情報を生成するように構成される。
　前記通信部は、前記オーダー情報を前記第２情報処理装置に送信するように構成される。
　前記オーダー情報を受信した前記第２情報処理装置は、前記外部提案情報を生成するように構成された外部提案情報生成部を有する。

　この情報処理装置では、オーダー情報生成部が、共有不許可情報を省略するかまたは代替情報に変換してオーダー情報を生成する。これにより、第２情報処理装置が取得すべき情報の選別性が向上するため、ユーザーに好都合な利便性の高いサービスを提供することができる。

　一形態に係る情報処理方法は、外部装置と接続可能に構成された情報処理装置による情報処理方法である。
　ユーザーから提示されるユーザー提示情報が取得される。
　前記取得されたユーザー提示情報のうち前記外部装置への提供が許可されない共有不許可情報が省略されるかまたは代替情報に変換される。
　前記ユーザー提示情報に基づきオーダー情報が生成される。
　前記オーダー情報が前記外部装置に送信される。
　前記外部装置により前記オーダー情報に基づき生成されて送信された外部提案情報が受信される。
　前記外部提案情報に基づき提案情報が生成される。

　前記オーダー情報が生成された後、前記外部装置との接続が開始されてもよい。

　前記共有不許可情報は、機械学習技術により前記代替情報に変換されてもよい。

　一形態に係るプログラムは、上記情報処理方法を上記情報処理装置に実行させるプログラムである。

　以上、本技術によれば、ユーザーは利便性の高いサービスの提供を受けることができる。

　なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。

図１は、本技術の実施形態１に係る情報処理装置を含む情報処理システムを示す図である。 図２は、アシスタントデバイスの構成を示すブロック図である。 図３は、情報処理システムの動作を示すシーケンス図である。 図４は、具体例１におけるデータベース部が記憶している情報を示す。 図５Ａはオーダー情報の例、図５Ｂはオーダー確認情報の例を示す。 図６は、提案情報の提供を待っているときに提示されるオーダー情報を示す。 図７は、提案情報の例を示す。 図８は、具体例２におけるデータベース部に記憶される情報を示す。 図９は、具体例１、２における、共有許可情報および共有不許可情報をまとめて示す表である。 図１０は、実施形態２に係る情報処理装置を含む情報処理システムの構成を示す。 図１１は、情報処理装置の動作を示すシーケンス図である。 図１２は、図１１に示すシーケンスの変形例である。 図１３Ａは、第１アシスタントデバイスにより提示されるオーダー情報である。図１３Ｂは、第２アシスタントデバイスにより提示される外部提案情報である。

　以下、本技術に係る実施形態を、図面を参照しながら説明する。

　１．実施形態１

　１．１）情報処理システムの構成

　図１は、本技術の実施形態１に係る情報処理装置を含む情報処理システムを示す図である。この情報処理システムは、クラウド上の外部装置８０と、この外部装置８０に接続可能に構成された情報処理装置としてのアシスタントデバイス１０とを含む。

　ユーザーＰは、このアシスタントデバイス１０を利用することで、外部装置８０によるサービスに関連する情報を取得できる。例えば外部装置８０を所有する組織、団体、または会社がユーザーＰにサービスを提供する場合に、外部装置８０はそのサービスに関連するユーザーＰからのオーダーを、アシスタントデバイス１０を介して受信する。

　図２は、アシスタントデバイス１０の構成を示すブロック図である。外部装置８０は、クラウド上のサーバーコンピュータである。クラウドを構成するネットワークとしては、例えばＩＰ（Internet Protocol）で規定されるインターネットが挙げられる。

　アシスタントデバイス１０は、プロジェクタ１１、スピーカー１２、カメラ１３、およびマイクロフォン１４等のハードウェアを備え、また、プロジェクタ制御部１１ａ、スピーカー制御部１２ａ、カメラ制御部１３ａ、およびマイクロフォン制御部１４ａを備える。これらの制御部１１ａ、１２ａ、１３ａ、および１４ａは、それらのハードウェアの駆動制御、Ａ／Ｄ変換、あるいはＤ／Ａ変換等を行う。

　アシスタントデバイス１０は、通信部１８、解析／認識部１５、情報生成／制御部２５、発話制御部１６、映像信号処理部１７、データベース部２０、データベース管理部１９を備える。

　通信部１８は、外部装置８０との通信の接続を可能にするネットワークインターフェースである。

　解析／認識部１５は、ユーザーから提示される情報であるユーザー提示情報を解析することでその意味を認識する機能を有する。ユーザー提示情報は、カメラ１３およびマイクロフォン１４のうち少なくとも一方から入力される。カメラ１３、マイクロフォン１４、および解析／認識部１５のうち少なくとも１つは、ユーザー提示情報を取得する「取得部」として機能する。

　情報生成／制御部２５は、解析／認識部１５で解析されたユーザー提示情報に基づき、オーダー情報を生成する機能を有する。オーダー情報は、ユーザー提示情報に含まれる１以上のオーダーをまとめた情報である。また、情報生成／制御部２５は、後述するように外部装置８０から提案される外部提案情報に基づき提案情報を生成する機能を有する。この場合、情報生成／制御部２５は、「オーダー情報生成部」および「提案情報生成部」として機能する。

　発話制御部１６は、情報生成／制御部２５により生成された情報を、スピーカー１２を介して出力する（発話する）ための制御を実行するように構成される。

　データベース部２０は、２つのデータ記憶領域を有する。１つは、外部装置８０への提供が許可される（外部装置８０との共有が許可される）共有許可情報を記憶する共有許可情報領域２１である。他の１つは、外部装置８０への提供が許可されない（外部装置８０との共有が許可されない）共有不許可情報を記憶する共有不許可情報領域２３である。データベース管理部１９は、解析／認識部１５および情報生成／制御部２５によるデータベース部２０へのアクセスを管理するインターフェースである。

　映像信号処理部１７は、情報生成／制御部２５により生成された情報を、映像（画像）としてプロジェクタ１１を介して出力（提示）する機能を有する。スピーカー１２、プロジェクタ１１、スピーカー制御部１２ａ、プロジェクタ制御部１１ａ、および情報生成／制御部２５のうち少なくとも１つは、ユーザーに情報を提示する「提示部」として機能する。

　情報生成／制御部２５、解析／認識部１５、発話制御部１６、映像信号処理部１７、データベース管理部１９、その他、プロジェクタ制御部１１ａ等は、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）等のハードウェア、また、それらＲＡＭやＲＯＭに記憶されたソフトウェアにより実現される。ＣＰＵに代えて、またはこれに加えて、ＦＰＧＡ（Field Programmable Gate Array）等のＰＬＤ(Programmable Logic Device)が用いられてもよい。

　映像信号処理部１７は、通信部１８、プロジェクタ制御部１１ａ等のうち少なくとも１つは、モジュール化されたハードウェアで構成されていてもよい。データベース部２０は、半導体記憶デバイス、あるいは磁気記録デバイス等により構成される。

　１．２）情報処理システムの動作

　１．２．１）具体例１

　図３は、この情報処理システムの動作を示すシーケンス図である。例えば外部装置８０を旅行会社が所有する場合において、ユーザーがその旅行会社の旅行プランの提案サービスを受ける場合の具体例（具体例１）と合わせて、この情報処理システムの動作を説明する。

　まず、ユーザーがユーザー提示情報としてのオーダーをアシスタントデバイス１０に提示する。例えばユーザーの発話による音声情報がマイクロフォン１４に入力される（ステップ１０１）。ユーザー提示情報には、共有許可情報および共有不許可情報が混在している。

　具体例として、ユーザーは娘（長女）を持つ家族の父親とする。ユーザー提示情報としては、例えば、以下のような例が挙げられる。

　「長女の夏休みの間に、家族で３泊４日でオアフ島に行きたい」
　「予算は３０万位」、
　「長女はビーチで遊びたい」、
　「以前にオアフ島に行った時、ＸＸホテルは汚かったから今回は避けたい」

　解析／認識部１５がその音声を解析し、その内容を認識する（ステップ１０２）。そうすると、解析／認識部１５は、そのデータをデータ管理部および情報生成／制御部２５へ出力する。データ管理部は、そのデータをデータベース部２０に記憶する。そのデータは、共有許可情報および共有不許可情報に分けられて、共有許可情報領域２１および共有不許可情報領域２３にそれぞれ記憶される。

　ユーザー提示情報を共有許可情報と共有不許可情報とに分ける方法としては、以下のような方法が挙げられる。

　例えば、ユーザーにより予め設定された情報を共有不許可情報とする方法である。この場合、例えばユーザーは予めキーワードを設定してこれを共有不許可情報領域２３に記憶しておく。ユーザーの操作によりそのキーワードが更新されていくようにしてもよい。

　あるいは、ステップ１０２の後、ステップ１０３の前、アシスタントデバイス１０が、音声または画像を用いて、そのユーザー提示情報が共有不許可情報であるか否かをユーザーに一括で問い合わせるようにしてもよい。アシスタントデバイス１０は、その作業過程で、共有許可情報および共有不許可情報をデータベースを構築してくようにしてもよい。

　図４は、データベース部２０（共有許可情報領域２１および共有不許可情報領域２３）が記憶している情報を示す。具体例として、共有許可情報領域２１には、以下の情報が記憶されている。

　今回の依頼として、
　「長女の夏休みの間に、家族で３泊４日でオアフ島に行きたい」、
　「予算は３０万位」
が記憶されている。

　また、前回までのデータとして、家族構成、家族の夏休み期間中の決定済みの予定等の情報が記憶されている。

　一方、共有不許可情報領域２３には、例えば以下の情報が記憶されている。

　今回の依頼として、
　「長女はビーチで遊びたい」、
　「ＸＸホテルは汚かったから今回は避けたい」
が記憶されている。

　また、前回までのデータとして、
　「妻はカーペットアレルギー」、
　「妻はショッピング好き（特に〇〇ブランド）」、
　「長女は泳げない」、
　その他、家族のハワイ旅行履歴やその時の感想、外部からのオアフ島情報（例えばＳＮＳ（Social Networking Service）等からの情報）
が記憶されている。

　図３を参照して、情報生成／制御部２５は、上記のようなユーザー提示情報に基づきオーダー情報を生成する（ステップ１０３）。この場合、情報生成／制御部２５は、ユーザー提示情報のうち共有不許可情報を省略するかまたは代替情報に変換する。そして、共有不許可情報が代替情報に変換された場合は、情報生成／制御部２５はその代替情報を含むオーダー情報を生成する。また、情報生成／制御部２５は、その共有不許可情報を含むオーダー確認情報を生成することもできる。

　ここで、ユーザー提示情報のうち共有不許可情報を省略する処理は、例えば共有不許可情報を削除やＮＵＬＬ値等無効な情報で置き換える処理等を含む。一方、ユーザー提示情報のうち共有不許可情報を代替情報に変換する処理は、ユーザーが外部装置に情報を共有したくない情報を共有可能な情報に変換する処理である。例えば当該変換処理は、共有不許可情報に含まれる情報を上位概念化する処理、個人情報を特定可能な情報を個人情報を特定困難な情報に置き換える処理（匿名化処理）等を含む。

　図５Ａはオーダー情報の例、図５Ｂはオーダー確認情報の例を示す。情報生成／制御部２５は、これらの情報を例えば画像としてプロジェクタ１１を使用して提示する。オーダー情報は、ステップ１０６で外部装置８０に送信される情報である。オーダー確認情報は、共有不許可情報を含むので、外部装置８０には送信されない。

　アシスタントデバイス１０は、これらオーダー情報およびオーダー確認情報のうち少なくとも一方を、アシスタントデバイス１０が外部装置８０への通信の接続を開始する前に提示する（ステップ１０４）。すなわち、情報生成／制御部２５は、オーダー情報を生成した後、通信の接続を開始する。

　図５Ａに示すように、オーダー情報には少なくとも共有許可情報を含み、代替情報を含む場合もある。一方、図５Ｂに示すように、オーダー確認情報には、共有許可情報および共有不許可情報の両方が含まれる。これらの例では、共有許可情報が代替情報として示されている。したがって、図５Ｂに示すオーダー確認情報は、代替情報および共有不許可情報の両方を含む。

　共有許可情報として、例えば以下の情報が示されている。
　「御家族３名様で３泊４日のオアフ島旅行、御予算：３０万円まで」、
　「日程：○月○日～○月Ｘ日」

　代替情報としては、例えば以下の情報が示されている。
　「ＸＸホテル以外」、
　「部屋はフローリング」、
　「ホテルの近くに遠浅でビーチアクティビティが充実している海がある」、
　「ホテルの近くにショッピングモールがある」

　そして、共有不許可情報として、（）内に以下の情報が示されている。
　（今回のご要望からです）
　（奥様のアレルギー対策です）
　（お嬢様が泳ぎが苦手であることと、今回のご要望からです）
　（奥様がショッピングがお好きだからです）

　ユーザーは、オーダー情報を見ることにより、オーダー情報に共有不許可情報が含まれていないかを確認することができる。ユーザーは、特に、共有不許可情報が代替情報に適切に変換されているかを確認することができる。適切に変換されていない場合は、ユーザーはその修正をアシスタントデバイス１０に要求することができる。

　一方、ユーザーは、共有不許可情報も含むオーダー確認情報を見ることにより、共有不許可情報およびその代替情報の両方を容易に確認することができる。

　共有不許可情報から代替情報への変換処理の手段としては、例えば機械学習技術が用いられる。機械学習としては、上位概念抽出、クラスタリング、ニューラルネットワーク、ＳＶＭ（Support Vector Machine）、遺伝的プログラミング等の様々な公知の技術が挙げられる。あるいは、変換処理の手段は、これらのうち少なくとも２つの組合せの技術であってもよい。

　共有不許可情報から代替情報への変換処理の他の手段として、予め生成された変換用のルックアップテーブルが挙げられる。例えば、ユーザーがルックアップテーブル内の情報を入力して生成すればよい。

　図３を参照して、ユーザーがオーダー情報および／またはオーダー確認情報を確認した後、アシスタントデバイス１０は、このアシスタントデバイス１０が外部装置８０に接続したことを報告する（ステップ１０５）。すなわち、これにより通信部１８による通信が開始される。そして、情報生成／制御部２５は、生成したオーダー情報を通信部１８を介して外部装置８０に送信する（ステップ１０６）。ここでは、情報生成／制御部２５は「通信制御部」として機能する。

　情報生成／制御部２５は、例えば「この内容でオーダーしてよろしいですか？」等の問い合わせを、ユーザーに行ってもよい。この問い合せは、例えば音声で行われるが、画像により行われてもよい。この場合、その問い合せの後、ユーザーからの承認の返答があった場合、通信部１８による接続が開始される。

　このように、ステップ１０４でオーダー情報が送信される前に、オーダー情報および／またはオーダー確認情報が提示されることにより、ユーザーは、共有不許可情報が省略され、または代替情報に変換されているかを確実に確認することができる。

　外部装置８０は、オーダー情報を受信すると、それに基づき外部提案情報を生成する（ステップ１０７）。この時、例えばアシスタントデバイス１０は、図６のような、現在がプランの提案の待ち状態であることを示す画像を提示することもできる。この画像内の情報は、図５Ａに示したオーダー情報の実質内容と同じである。外部装置８０は、外部提案情報を生成すると、これをアシスタントデバイス１０に送信する（ステップ１０８）。

　アシスタントデバイス１０は、受信した外部提案情報に基づき提案情報を生成し（ステップ１０９）、これをユーザーに提示する（ステップ１１０）。典型的には、提案情報は外部提案情報を含む。

　図７は、提案情報の例を示す。図７の左は、その提案情報のうちの画像を示し、右は音声による情報の内容を示す。

　画像の提案情報（図７左参照）に示すように、この提案情報は、複数の提案項目を含む。これらの提案項目は、外部装置８０から提案された外部提案情報に含まれる３つのプラン（Ｘ、Ｙ、Ｚ）に対応する。情報生成／制御部２５は、共有不許可情報に基づき提案情報を生成することができる。

　共有不許可情報に基づく提案情報の生成方法の１つとして、例えば、外部提案情報内の特定領域を強調表示する画像を生成し、生成された画像を提案情報の一部または全部とする方法がある。例えば共有不可情報を含めて最も条件が合致するプランを強調表示するように画像が生成されればよい。

　外部提案情報はそれら３つのプランに優劣をつけないが、提案情報は、それら３つのプランのうちお勧めのプラン（Ｚプラン）を強調表示している。図７では、特定領域（Ｚプランの情報が示される領域）を四角の線で囲む例が示されている。これにより、ユーザーはその特定領域を容易に認識することができる。

　強調表示の対象となる「特定領域」は、領域に限られず、テキストそのものであってもよい。例えば強調表示の例としては、特定領域の色、線種、線幅、フォント、大きさ等を変える、あるいは、特定のオブジェクト画像やアニメーションを加える、などが挙げられる。

　強調表示による提案情報は、必ずしも共有不許可情報に基づき生成されてなくてもよく、他の所定のアルゴリズムにしたがって生成されてもよい。

　共有不許可情報に基づく提案情報の生成方法の他の１つは、外部提案情報に共有不許可情報を含ませる方法である。具体的には、図７の右に示すように、情報生成／制御部２５は、共有不許可情報を含む情報を音声により提示する。もちろん、その音声情報の内容が、図７左と並んで画像により提示されていもよい。例えば、以下の情報は、共有不許可情報、またはこれをを含む情報である。

　「ＸＸホテルは避けて、最近ＳＮＳで清潔感が評判の」、
　「泳ぎの苦手なお嬢様」、
　「奥様が好きな○○ブランド」

　このように、情報生成／制御部２５は、外部提案情報および共有不許可情報に基づき提案情報を生成するので、ユーザーにとって理解しやすい提案情報を生成することができる。

　共有不許可情報に基づく提案情報の生成方法のさらに別の例として、次のような例を挙げることができる。情報生成／制御部２５は、提案情報内の複数の提案項目のうち、特定領域に対応する提案項目の情報を、共有不許可情報に基づいて生成することができる。すなわち、情報生成／制御部２５は、提案情報内の複数の提案項目のうち１つの提案項目（図７で示す例では、強調表示された「Ｚプラン」の情報）に、図７右に示した共有不許可情報の内容の少なくとも一部を加えて表示する。

　提案情報が提示される前に、アシスタントデバイス１０は、外部装置８０との通信の接続を切断するようにしてもよい。

　図３を参照して、ユーザーは、選択したプラン（例えばＺプラン）に決定することをアシスタントデバイス１０に伝える（ステップ１１１）。アシスタントデバイス１０は、その決定されたプランの予約を要求する（ステップ１１２）。外部装置８０はその予約を受け付ける（ステップ１１３）。

　以上の説明では、ユーザーは音声により情報をアシスタントデバイス１０に入力した。しかし、ユーザーは、入力デバイス（キーボード、ペン、マウス、あるいはタッチ操作）を用いて情報を入力してもよいし、ジェスチャー等の身体の動きにより入力してもよい。あるいは、音声入力と、それらの入力のうち少なくとも１つとの組み合わせであってもよい。これ以降に説明する他の具体例について同様である。

　アシスタントデバイス１０は、オーダー情報、オーダー確認情報、提案情報を画像で提示したが、音声のみで提示してもよいし、音声と画像の両方で提示してもよい。これ以降に説明する他の具体例について同様である。

　以上のように、実施形態１では、アシスタントデバイス１０が、共有不許可情報を省略するかまたは代替情報に変換してオーダー情報を生成する。これにより、外部装置８０へ出力すべき情報の選別性が向上するため、ユーザーに利便性の高いサービスを提供することができる。

　本実施形態１では、情報生成／制御部２５は、外部提案情報に基づきこれを加工したり、共有不許可情報を含ませたりして、これを提案情報として提示した。しかし、情報生成／制御部２５は、外部提案情報の実質的内容をそのまま提案情報として提示するようにしてもよい。

　１．２．２）具体例２

　次に、ユーザーが娘（長女）を持つ父親とし、外部装置８０から、長女の学習塾のプランの提案サービスを受ける具体例２について説明する。具体例２の処理のシーケンスは、図３に示したものと同様である。また、具体例２において、アシスタントデバイス１０や外部装置８０の動作について同様の動作の説明は省略する。

　図８は、データベース部２０に記憶される情報を示す。図８に示すように、ユーザー提示情報としては、例えば、以下のような例が挙げられる。

　共有許可情報のうち今回の依頼を以下に示す。
　「数学と国語を強化したい」
　「塾に使える時間は、土日以外」

　共有許可情報のうち前回までのデータは、
　「長女は中学2年生」
である。

　共有不許可情報のうち今回の依頼を以下に示す。
　「長女はZ社はテストが毎日あって嫌い」
　「学校の次のテストは5月24日、目標点数は○×点以上、出題範囲は○△」

　共有不許可情報のうち前回までのデータは、
「水曜は長女は部活動で帰りが遅い」
である。その他、共有不許可情報として、学校と学習塾のテスト結果/内容、ＳＮＳ等の外部からの学習塾情報がある。

　情報生成／制御部２５は、上記のようなユーザー提示情報に基づきオーダー情報を生成する（ステップ１０３）（図３参照）。

　オーダー情報の具体例は、図示しないが、以下のような内容である。（）内の情報は、そのオーダーの理由であり、上記共有不許可情報を含む。

　学習塾は「Ｙ社」：（共有不許可情報の「長女はZ社はテストが毎日あって嫌い」、「ＳＮＳでのＹ社の評判が良かった」）
　期間は「5月23日までの間」：（共有不許可情報の「学校の次のテストは5月24日」）、
　対象教科は「中学２年生の数学と国語」：（共有許可情報の「数学と国語を強化したい」および「長女は中学２年生」）、
　強化したい対象の学習分野は〇△：（共有不許可情報の出題範囲は○△）
　通塾可能曜日は「水曜と土日以外」：（共有不許可情報の「水曜は長女は部活で帰りが遅い」）

　図３においてステップ１０４～１０６の後、外部装置８０は外部提案情報を生成する（ステップ１０７）。アシスタントデバイス１０は、外部装置８０から送信されたその外部提案情報に基づき、提案情報を生成する（ステップ１０８、１０９）。そして、その提案情報がユーザーに提示される（ステップ１１０）。

　提案情報は、上述したように外部提案情報が強調表示などで加工された情報、共有不許可情報を含ませた情報、または、外部提案情報が実質そのまま示された情報である。

　提案情報の具体例は図示しないが、例えば学習塾としてＸ社、Ｙ社の２社のプランが提案されるとする。その中でも、情報生成／制御部２５は、共有不許可情報に基づき、Ｙ社をお勧めに指定して提案情報を生成する。以下は、提案情報の内容の例である。［］内の情報は、共有不許可情報に基づく情報である。

　「Ｙ社の○○プラン、数学＆国語コースのレベルＢはいかがでしょうか。Ｙ社のテストは週に１回のみです。この○○プランは、［各生徒のレベルに応じた個別授業が評判］のようです。［次回のテストが5月24日］ですので、本プランその前日までのスケジュールで［お嬢様が部活で帰りが遅い水曜］と、ご要望の土日を避け、［出題範囲〇△］に合わせたプランです。レベルについては、［次回の目標点数○×点］をクリアするためには、この○○プランのレベルＢが最適と考えられます」

　その後、ステップ１１１～１１３が実行される。

　図９に、上記具体例１、２における、共有許可情報および共有不許可情報をまとめて示した。

　２．実施形態２

　２．１）情報処理システムの構成

　図１０は、実施形態２に係る情報処理装置を含む情報処理システムの構成を示す。これ以降の説明では、上記実施形態１に係る情報処理システムや情報処理装置が含む機能や動作等について実質的に同様の要素については、その説明を簡略化または省略し、異なる点を中心に説明する。

　実施形態２に係る情報処理システム１００は、ユーザーが所有する第１アシスタントデバイス１０（情報処理装置）と、サービスを提供する会社等が所有する第２アシスタントデバイス５０（第２情報処理装置）とを備える。このシステムは、その会社等が第２アシスタントデバイス５０をユーザーにレンタルする形態であってもよい。ユーザーは、第１アシスタントデバイス１０および第２アシスタントデバイス５０を、同一の屋内、または同一の部屋内に設置することができる。

　第１アシスタントデバイス１０は、上記実施形態１に係るアシスタントデバイス１０の構成と実質的に同じである。第２アシスタントデバイス５０は、第１アシスタントデバイス１０の構成と実質的に同じであり、データベース部３０の中身が異なる。第２アシスタントデバイス５０のデータベース部３０には、例えば顧客情報や、サービスに必要なデータが記憶されている。

　２．２）情報処理システムの動作

　図１１は、情報処理システム１００の動作を示すシーケンス図である。以下では、上記実施形態１と異なる動作について説明する。

　ステップ２０４で、オーダー情報（例えば図５Ａ参照）および／またはオーダー確認情報（例えば図５Ｂ参照）が提示された後、ステップ２０５では、第１アシスタントデバイス１０は、第２アシスタントデバイス５０に接続するか否かをユーザーに問い合わせる。ユーザーがその接続を承認した場合（ステップ２０６）、第１アシスタントデバイス１０は接続処理を行う（ステップ２０７）。

　第１アシスタントデバイス１０は、生成したオーダー情報を第２アシスタントデバイス５０に送信する（ステップ２０９）。第１アシスタントデバイス１０は、ステップ２０９と同時、またはその前後に、共有不許可情報を含むオーダー確認情報ではなく、共有不許可情報を含まないオーダー情報を提示するようにしてもよい（ステップ２０９'）。本実施形態では、第１アシスタントデバイス１０のプロジェクタ１１による画像の投影位置が、例えば第２アシスタントデバイス５０のカメラ１３の撮像範囲内にある場合がある。したがって、第１アシスタントデバイス１０は、第２アシスタントデバイス５０に取得されてもかまわない画像として、共有不許可情報を含まない（例えば代替情報を含む）オーダー情報（図５Ａ参照）を提示する。

　第１アシスタントデバイス１０は、第２アシスタントデバイス５０との接続を切断するかどうかを問い合わせる（ステップ２１３）。ユーザーにより切断が承認されると（ステップ２１４）、第１アシスタントデバイス１０は接続を切断する（ステップ２１５）。そして、第１アシスタントデバイス１０は、ステップ２１２で生成した提案情報を提示する（ステップ２１６）。

　ステップ２１６の後は、図３に示す処理と同様に、ステップ１１１～１１３の処理が実行される。この場合、第１アシスタントデバイス１０は、第２アシスタントデバイス５０と通信の接続処理を再度実行して、ステップ１１２を実行すればよい。

　ここで、ステップ２１５の後、第１アシスタントデバイス１０は、ステップ２０３で生成したオーダー情報および／またはオーダー確認情報を提示してもよい（ステップ３１６）（図１２参照）。そして、第２アシスタントデバイス５０は、外部提案情報を提示してもよい（ステップ３１７）。例えば、オーダー情報（またはオーダー確認情報）が画像で提示され、外部提案情報も画像で提示される場合、第１アシスタントデバイス１０および第２アシスタントデバイス５０は、各プロジェクタ１１によりそれらを同時に提示してもよい。

　この場合、第１アシスタントデバイス１０のプロジェクタ１１、プロジェクタ制御部１１ａ、スピーカー１２、スピーカー制御部１２ａ、および情報生成／制御部２５のうち少なくとも１つは、「第１提示部」として機能する。また、第２アシスタントデバイス５０のプロジェクタ１１、プロジェクタ制御部１１ａ、スピーカー１２、スピーカー制御部１２ａ、および情報生成／制御部２５のうち少なくとも１つは、「第２提示部」として機能する。

　図１３Ａ、Ｂは、そのように同時に提示されたそれらの画像を示す例である。図１３Ａは、第１アシスタントデバイス１０により提示されるオーダー情報である。図１３Ｂは、第２アシスタントデバイス５０により提示される外部提案情報である。

　なお、図１３Ａに示すオーダー情報の内容は図５Ａと同じである。図１３Ｂに示す外部提案情報は、図７Ａに示す提案情報が加工される前の外部提案情報（つまり強調表示がない）と同じである。

　このように、両方の画像が同時に表示される場合、それらが第１アシスタントデバイス１０および第２アシスタントデバイス５０のどちらにより提示されている情報かを区別するための処理が施されてもよい。例えば図１３Ａに示すように、画像の背景の色を特定の色にすることができる。あるいは、画像内にそれらアシスタントデバイス１０の名前を挿入する、または、一方の画像を点滅させる等が挙げられる。その他、それぞれ画像の提示の開始時に、その画像を提示したアシスタントデバイスの名前を音声で名乗る、などが挙げられる。

　図１３に示した両画像は同時に提示されなくてもよい。その場合、第１アシスタントデバイス１０および第２アシスタントデバイス５０のうちいずれか一方により、それらの両画像が順に提示されてもよい。

　第１アシスタントデバイス１０が、第２アシスタントデバイス５０の所定の処理を制御する信号を、第２アシスタントデバイス５０に出力する制御信号出力部（図示せず）を備えていてもよい。

　所定の処理とは、例えば、第２アシスタントデバイス５０のカメラ１３やマイクロフォン１４の機能をオフ（信号の入力を停止）、あるいは、プロジェクタ１１やスピーカー１２の機能をオフ（信号の出力を停止）にする処理である。あるいは、第１アシスタントデバイス１０が、第２アシスタントデバイス５０による情報の提示内容（表示内容および／または音声内容）を制御するようにしてもよい。あるいは、第１アシスタントデバイス１０は、通信部１８における通信の接続（の開始および切断）を制御するようにしてもよい。

　３．他の種々の実施形態

　本技術は、以上説明した実施形態に限定されず、他の種々の実施形態を実現することができる。

　上記各実施形態におけるアシスタントデバイス１０（第１アシスタントデバイス１０）、第２アシスタントデバイス５０は、それぞれカメラ１３、マイクロフォン１４、プロジェクタ１１、スピーカー１２を備えていた。それらカメラ１３、マイクロフォン１４、プロジェクタ１１、スピーカー１２のうち少なくとも１つが独立して存在するデバイスであり、そのデバイスがアシスタントデバイスに接続される構成であってもよい。

　上記実施形態２に係る情報処理システム１００は、物理的に２つのアシスタントデバイスを備えていた。しかし、情報処理装置は物理的に１つのデバイスにより構成され、その１つのデバイスが、機能的、論理的にそれら２つのアシスタントデバイスを切り替えながら処理を実行するように構成されていてもよい。

　上記実施形態２のステップ２０５～２０７（図１１参照）の処理が、実施形態１においてステップ１０４と１０５の間に実行されてもよい。

　本技術は、医療分野にも適用可能である。例えばユーザーは医療機関が所有する外部装置８０（または第２アシスタントデバイス５０）に接続可能なアシスタントデバイス１０（または第１アシスタントデバイス１０）を介して、当該外部装置８０（または第２アシスタントデバイス５０）にオーダーや相談をすることができる。

　以上説明した各形態の特徴部分のうち、少なくとも２つの特徴部分を組み合わせることも可能である。

　なお、本技術は以下のような構成もとることができる。
（１）
　ユーザーから提示されるユーザー提示情報を取得するように構成された取得部と、
　前記取得されたユーザー提示情報のうち外部装置への提供が許可されない共有不許可情報を省略するかまたは代替情報に変換し、前記ユーザー提示情報に基づきオーダー情報を生成するように構成されたオーダー情報生成部と、
　前記オーダー情報を前記外部装置に送信するように構成され、前記外部装置により前記オーダー情報に基づき生成されて送信された外部提案情報を受信するように構成された通信部と、
　前記外部提案情報に基づき提案情報を生成するように構成された提案情報生成部と
　を具備する情報処理装置。
（２）
　前記（１）に記載の情報処理装置であって、
　前記オーダー情報生成部は、前記共有不許可情報を代替情報に変換し、前記ユーザー提示情報に基づき、前記代替情報を含むオーダー情報を生成するように構成される
　情報処理装置。
（３）
　前記（２）に記載の情報処理装置であって、
　前記共有不許可情報を前記代替情報への変換する処理は、共有不許可情報に含まれる情報を上位概念化する処理、または、個人情報を特定可能な情報を個人情報を特定困難な情報に置き換える処理を含む
　情報処理装置。
（４）
　前記（２）または（３）に記載の情報処理装置であって、
　前記オーダー情報生成部は、前記共有不許可情報を含むオーダー確認情報をさらに生成するように構成される
　情報処理装置。
（５）
　前記（１）から（３）のうちいずれか１つに記載の情報処理装置であって、
　前記提案情報生成部は、さらに前記共有不許可情報に基づき前記提案情報を生成するように構成される
　情報処理装置。
（６）
　前記（５）に記載の情報処理装置であって、
　前記提案情報生成部は、前記提案情報の少なくとも一部を画像として生成し、前記提案情報内の特定領域を強調表示する画像を生成するように構成される
　情報処理装置。
（７）
　前記（６）に記載の情報処理装置であって、
　前記提案情報生成部は、前記提案情報内の複数の提案項目のうち、前記特定領域に対応する提案項目の情報を、前記共有不許可情報に基づいて生成するように構成される
　情報処理装置。
（８）
　前記（１）から（７）のうちいずれか１つに記載の情報処理装置であって、
　前記外部装置との通信の接続を制御するように構成された接続制御部をさらに具備し、
　前記接続制御部は、前記オーダー情報生成部により前記オーダー情報が生成された後、前記外部装置との接続を開始するように構成される
　情報処理装置。
（９）
　前記（１）から（８）のうちいずれか１つに記載の情報処理装置であって、
　前記提案情報生成部により生成された前記提案情報を提示するように構成された提示部をさらに具備する情報処理装置。
（１０）
　前記（９）に記載の情報処理装置であって、
　前記提示部は、前記オーダー情報生成部で生成された前記オーダー情報をさらに提示するように構成される
　情報処理装置。
（１１）
　前記（１）に記載の情報処理装置であって、
　前記提案情報生成部は、前記提案情報の少なくとも一部を画像として生成するように構成される
　情報処理装置。
（１２）
　前記（１１）に記載の情報処理装置であって、
　前記提案情報生成部は、前記提案情報を画像および音声として生成するように構成される
　情報処理装置。
（１３）
　ユーザーから提示されるユーザー提示情報を取得するように構成された取得部と、
　前記取得されたユーザー提示情報のうち、第２情報処理装置との共有が許可されない共有不許可情報を省略するかまたは代替情報に変換し、前記ユーザー提示情報に基づきオーダー情報を生成するように構成されたオーダー情報生成部と、
　前記オーダー情報を前記第２情報処理装置に送信するように構成された通信部とを有し、
　前記オーダー情報を受信した前記第２情報処理装置は、前記外部提案情報を生成するように構成された外部提案情報生成部を有する
　情報処理装置。
（１４）
　前記（１３）に記載の情報処理装置であって、
　前記第２情報処理装置との通信の接続を制御するように構成された通信制御部をさらに具備し、
　前記通信制御部は、前記オーダー情報生成部により前記オーダー情報が生成された後、前記第２情報処理装置との接続を開始するように構成される
　情報処理装置。
（１５）
　前記（１３）または（１４）に記載の情報処理装置であって、
　前記オーダー情報を提示するように構成された第１提示部をさらに具備する
　情報処理装置。
（１６）
　前記（１５）に記載の情報処理装置であって、
　前記第２情報処理装置は、前記外部提案情報を提示するように構成された第２提示部をさらに有する
　情報処理装置。
（１７）
　前記（１６）に記載の情報処理装置であって、
　前記第１提示部は、前記オーダー情報の少なくとも一部を画像として表示するように構成され、
　前記第２提示部は、前記外部提案情報の少なくとも一部を画像として表示するように構成される
　情報処理装置。
（１８）
　前記（１３）から（１７）のうちいずれか１つに記載の情報処理装置であって、
　第２情報処理装置による所定の処理を制御する信号を前記第２情報処理装置に出力するように構成される制御信号出力部をさらに具備する情報処理装置。
（１９）
　外部装置と接続可能に構成された情報処理装置による情報処理方法であって、
　ユーザーから提示されるユーザー提示情報を取得し、
　前記取得されたユーザー提示情報のうち前記外部装置への提供が許可されない共有不許可情報を省略するかまたは代替情報に変換し、
　前記ユーザー提示情報に基づきオーダー情報を生成し、
　前記オーダー情報を前記外部装置に送信し、
　前記外部装置により前記オーダー情報に基づき生成されて送信された外部提案情報を受信し、
　前記外部提案情報に基づき提案情報を生成する
　情報処理方法。
（２０）
　外部装置と接続可能に構成された情報処理装置に実行させるプログラムであって、
　ユーザーから提示されるユーザー提示情報を取得し、
　前記取得されたユーザー提示情報のうち前記外部装置への提供が許可されない共有不許可情報を省略するかまたは代替情報に変換し、
　前記ユーザー提示情報に基づきオーダー情報を生成し、
　前記オーダー情報を前記外部装置に送信し、
　前記外部装置により前記オーダー情報に基づき生成されて送信された外部提案情報を受信し、
　前記外部提案情報に基づき提案情報を生成する
　プログラム。

　１０…アシスタントデバイス、第１アシスタントデバイス
　１１…各プロジェクタ
　１２…スピーカー
　１３…カメラ
　１４…マイクロフォン
　１８…通信部
　２０、３０…データベース部
　２１…共有許可情報領域
　２３…共有不許可情報領域
　２５…制御部
　５０…第２アシスタントデバイス
　８０…外部装置

Claims (20)

1. 　ユーザーから提示されるユーザー提示情報を取得するように構成された取得部と、
   　前記取得されたユーザー提示情報のうち外部装置への提供が許可されない共有不許可情報を省略するかまたは代替情報に変換し、前記ユーザー提示情報に基づきオーダー情報を生成するように構成されたオーダー情報生成部と、
   　前記オーダー情報を前記外部装置に送信するように構成され、前記外部装置により前記オーダー情報に基づき生成されて送信された外部提案情報を受信するように構成された通信部と、
   　前記外部提案情報に基づき提案情報を生成するように構成された提案情報生成部と
   　を具備する情報処理装置。
2. 　請求項１に記載の情報処理装置であって、
   　前記オーダー情報生成部は、前記共有不許可情報を代替情報に変換し、前記ユーザー提示情報に基づき、前記代替情報を含むオーダー情報を生成するように構成される
   　情報処理装置。
3. 　請求項２に記載の情報処理装置であって、
   　前記共有不許可情報を前記代替情報への変換する処理は、共有不許可情報に含まれる情報を上位概念化する処理、または、個人情報を特定可能な情報を個人情報を特定困難な情報に置き換える処理を含む
   　情報処理装置。
4. 　請求項２に記載の情報処理装置であって、
   　前記オーダー情報生成部は、前記共有不許可情報を含むオーダー確認情報をさらに生成するように構成される
   　情報処理装置。
5. 　請求項１に記載の情報処理装置であって、
   　前記提案情報生成部は、さらに前記共有不許可情報に基づき前記提案情報を生成するように構成される
   　情報処理装置。
6. 　請求項５に記載の情報処理装置であって、
   　前記提案情報生成部は、前記提案情報の少なくとも一部を画像として生成し、前記提案情報内の特定領域を強調表示する画像を生成するように構成される
   　情報処理装置。
7. 　請求項６に記載の情報処理装置であって、
   　前記提案情報生成部は、前記提案情報内の複数の提案項目のうち、前記特定領域に対応する提案項目の情報を、前記共有不許可情報に基づいて生成するように構成される
   　情報処理装置。
8. 　請求項１に記載の情報処理装置であって、
   　前記外部装置との通信の接続を制御するように構成された接続制御部をさらに具備し、
   　前記接続制御部は、前記オーダー情報生成部により前記オーダー情報が生成された後、前記外部装置との接続を開始するように構成される
   　情報処理装置。
9. 　請求項１に記載の情報処理装置であって、
   　前記提案情報生成部により生成された前記提案情報を提示するように構成された提示部をさらに具備する情報処理装置。
10. 　請求項９に記載の情報処理装置であって、
    　前記提示部は、前記オーダー情報生成部で生成された前記オーダー情報をさらに提示するように構成される
    　情報処理装置。
11. 　請求項１に記載の情報処理装置であって、
    　前記提案情報生成部は、前記提案情報の少なくとも一部を画像として生成するように構成される
    　情報処理装置。
12. 　請求項１１に記載の情報処理装置であって、
    　前記提案情報生成部は、前記提案情報を画像および音声として生成するように構成される
    　情報処理装置。
13. 　ユーザーから提示されるユーザー提示情報を取得するように構成された取得部と、
    　前記取得されたユーザー提示情報のうち、第２情報処理装置との共有が許可されない共有不許可情報を省略するかまたは代替情報に変換し、前記ユーザー提示情報に基づきオーダー情報を生成するように構成されたオーダー情報生成部と、
    　前記オーダー情報を前記第２情報処理装置に送信するように構成された通信部とを有し、
    　前記オーダー情報を受信した前記第２情報処理装置は、前記外部提案情報を生成するように構成された外部提案情報生成部を有する
    　情報処理装置。
14. 　請求項１３に記載の情報処理装置であって、
    　前記第２情報処理装置との通信の接続を制御するように構成された通信制御部をさらに具備し、
    　前記通信制御部は、前記オーダー情報生成部により前記オーダー情報が生成された後、前記第２情報処理装置との接続を開始するように構成される
    　情報処理装置。
15. 　請求項１３に記載の情報処理装置であって、
    　前記オーダー情報を提示するように構成された第１提示部をさらに具備する
    　情報処理装置。
16. 　請求項１５に記載の情報処理装置であって、
    　前記第２情報処理装置は、前記外部提案情報を提示するように構成された第２提示部をさらに有する
    　情報処理装置。
17. 　請求項１６に記載の情報処理装置であって、
    　前記第１提示部は、前記オーダー情報の少なくとも一部を画像として表示するように構成され、
    　前記第２提示部は、前記外部提案情報の少なくとも一部を画像として表示するように構成される
    　情報処理装置。
18. 　請求項１３に記載の情報処理装置であって、
    　第２情報処理装置による所定の処理を制御する信号を前記第２情報処理装置に出力するように構成される制御信号出力部をさらに具備する情報処理装置。
19. 　外部装置と接続可能に構成された情報処理装置による情報処理方法であって、
    　ユーザーから提示されるユーザー提示情報を取得し、
    　前記取得されたユーザー提示情報のうち前記外部装置への提供が許可されない共有不許可情報を省略するかまたは代替情報に変換し、
    　前記ユーザー提示情報に基づきオーダー情報を生成し、
    　前記オーダー情報を前記外部装置に送信し、
    　前記外部装置により前記オーダー情報に基づき生成されて送信された外部提案情報を受信し、
    　前記外部提案情報に基づき提案情報を生成する
    　情報処理方法。
20. 　外部装置と接続可能に構成された情報処理装置に実行させるプログラムであって、
    　ユーザーから提示されるユーザー提示情報を取得し、
    　前記取得されたユーザー提示情報のうち前記外部装置への提供が許可されない共有不許可情報を省略するかまたは代替情報に変換し、
    　前記ユーザー提示情報に基づきオーダー情報を生成し、
    　前記オーダー情報を前記外部装置に送信し、
    　前記外部装置により前記オーダー情報に基づき生成されて送信された外部提案情報を受信し、
    　前記外部提案情報に基づき提案情報を生成する
    　プログラム。

Images