JP7212766B2 - コミュニケーションロボットおよびその制御方法、情報処理サーバならびに情報処理方法 - Google Patents
コミュニケーションロボットおよびその制御方法、情報処理サーバならびに情報処理方法 Download PDFInfo
- Publication number
- JP7212766B2 JP7212766B2 JP2021511727A JP2021511727A JP7212766B2 JP 7212766 B2 JP7212766 B2 JP 7212766B2 JP 2021511727 A JP2021511727 A JP 2021511727A JP 2021511727 A JP2021511727 A JP 2021511727A JP 7212766 B2 JP7212766 B2 JP 7212766B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- communication
- state
- robot
- call
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004891 communication Methods 0.000 title claims description 280
- 230000010365 information processing Effects 0.000 title claims description 73
- 238000000034 method Methods 0.000 title claims description 27
- 238000003672 processing method Methods 0.000 title claims description 6
- 206010011469 Crying Diseases 0.000 claims description 4
- 230000003542 behavioural effect Effects 0.000 claims description 2
- 238000012545 processing Methods 0.000 description 47
- 230000004044 response Effects 0.000 description 25
- 230000009471 action Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 15
- 230000008859 change Effects 0.000 description 12
- 238000003384 imaging method Methods 0.000 description 9
- 230000006399 behavior Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 3
- 206010037180 Psychiatric symptoms Diseases 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000001680 brushing effect Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 230000008451 emotion Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000000977 initiatory effect Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000003287 bathing Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Telephone Function (AREA)
- Manipulator (AREA)
Description
コミュニケーションロボットであって、
第1ユーザの状態を識別する識別手段と、
遠隔から前記第1ユーザとコミュニケーションをとる第2ユーザの状態を示す状態情報を外部装置から受信する受信手段と、
前記第1ユーザの状態と前記第2ユーザの状態とに基づいて前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であるかを判定する判定手段と、
前記第1ユーザの状態に応じて、前記第1ユーザが前記コミュニケーションロボットを介してコミュニケーションを行う場所を決定する決定手段と、
前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であると判定された場合に、決定した前記コミュニケーションを行う場所において、前記第2ユーザの用いる装置と前記コミュニケーションロボットとを介した通話を提供する通話制御手段と、を有し、
前記通話制御手段は、前記第1ユーザを撮影した画像の少なくとも一部を、決定した前記コミュニケーションを行う場所に応じて変更した画像を用いて通話を行う
ことを特徴とするコミュニケーションロボットが提供される。
[システム概要]
本実施形態では、対人用の可動式コミュニケーションロボット(以下、単に「ロボット」)が、ユーザと遠隔にいるユーザとがコミュニケーションを行えるように、ユーザの状態に応じてユーザに介入する形態について説明する。ここでロボットがインタラクションを行うユーザ(単に対象ユーザともいう)は、育児の対象となる児童(子供)である場合を例に説明する。また、遠隔にいるユーザ(単に遠隔ユーザともいう)は、対象ユーザとは離れた家・場所にいる祖父母である場合を例に説明する。しかし、本実施形態はこれに限定されるものではなく、対象ユーザと遠隔ユーザとが友人同士である場合など他の人物のコミュニケーションにも適用可能である。また、本実施形態では、ロボットと児童とのコミュニケーションが行われる場所を所定の空間(例えば、子供部屋や共有スペースなどの家庭内の空間)を想定して説明する。また、遠隔ユーザが滞在する場所を所定の遠隔の空間(例えば、祖父母の家庭内の共有スペースや滞在先の空間)として説明する。
図2は、本実施形態に係るロボット100の機能構成例を示すブロック図である。ロボット100が備える制御部210は、1つ以上のCPU(Central Processing Unit)211と、HDD(Hard Disc Drive)212と、RAM(Random Access Memory)213とを含んで構成される。CPU211は、HDD212に格納されたプログラムを読み出して実行することにより、以下に示す各種処理を制御する。HDD212は、不揮発性の記憶領域であり、各種処理に対応するプログラムが格納される。なお、HDDの代わりに半導体メモリが用いられてもよい。RAM213は、揮発性の記憶領域であり、例えば、ワークメモリなどとして利用される。なお、制御部210は、GPU(Graphics Processing Unit)やASIC(Application Specific Integrated Circuit)、あるいは専用回路などから構成されてもよい。
図3は、本実施形態に係るロボット100のソフトウェア構成の例を示す図である。本実施形態において、各処理部はCPU211がHDD212等に格納されたプログラムを読み出して実行することにより実現される。また、各DB(データベース)は、HDD212に構成される。なお、ソフトウェア構成は本実施形態の例示的な構成例を示しており、ファームウェア、OS、ミドルウェア、フレームワークなどの各ソフトウェア構成は省略している。
上述のように、本実施形態のロボットは、対象ユーザと遠隔ユーザとがコミュニケーションを行うことができるように、対象ユーザが所定のユーザ状態である場合にユーザに介入し、遠隔ユーザとのコミュニケーションを提案する。ロボットが対象ユーザに介入するために考慮するユーザ状態の一例について説明する。
本実施形態では、ロボット100は、上述した対象ユーザのユーザ状態を識別した場合に、遠隔ユーザのユーザ状態を取得して、遠隔ユーザのユーザ状態を考慮する。本実施形態では、説明を簡単にするために、遠隔ユーザのユーザ状態は、コミュニケーション可能な状態、または所定の時間帯にコミュニケーション可能な状態のみであるものとする。このようなユーザ状態は、遠隔ユーザの用いる装置150上で図7に示す操作画面と同様の操作画面によって設定される。もちろん、遠隔ユーザ側にロボット100と同様のロボットが存在し、当該ロボットによって遠隔ユーザのユーザ状態が識別されてもよい。この場合、例えば遠隔ユーザのテレビを視聴している状態を識別している場合には遠隔ユーザがコミュニケーション可能である。
本実施形態に係るロボット100は、対象ユーザのユーザ状態と、遠隔ユーザのユーザ状態とを考慮して、コミュニケーション可能であると判定した場合に、対象ユーザに遠隔ユーザとのコミュニケーションを提案する情報を提供する。コミュニケーションを提案する情報の提供は、音声、画像の提示によりなされてよい。これらの音声や画像には、コミュニケーションを行う相手方の名前や、コミュニケーション内容を表す情報を含んでよい。コミュニケーション内容を表す情報は、ユーザ状態が「出かける直前」であれば、例えば「おばあさんから挨拶があるよ」との情報を含む。また、ユーザ状態が「強い感情が表れている」であれば、「おばあさんが声をかけてくれるよ」などと、ユーザ状態に応じて異なる内容を含む。
ロボット100のマップ管理部303は、撮像部215、センサ部222等にて取得された周辺情報を用いて、動作する空間のマップを作成する。例えば、一定時間が経過するごとに、これらの周辺情報を再収集し、マップを更新するようにしてもよい。例えば、家具の配置が変更になった場合には、その変更後の状態に応じて、マップ情報を更新してよい。更に、マップ管理部303は、通信部223を介して外部からの情報(地図情報や位置情報など)を取得してマッピングを行うようにしてもよい。また、マップ管理部303は、各領域に存在する物体を検知して、その領域の用途を対応付けるような構成であってもよい。例えば、ベッドが存在する領域であればその領域を寝室として対応付けてもよく、おもちゃや机がある領域は子供部屋として対応付けてもよい。領域の用途が特定できない場合には、ユーザにより設定を受け付けるような構成であってもよい。
図5は、本実施形態に係るロボット100のコミュニケーション制御処理の一連の動作を示すフローチャートである。本実施形態において、本処理は、ロボット100のCPU211がHDD212に記憶されたプログラムを読み出して実行することにより実現される。各処理工程は、例えば、図2の部位や図3の処理部が協働して実現されるが、ここでは説明を簡略化するために、処理主体をロボット100として包括的に説明する。
図6は、本実施形態のロボット100における履歴処理を示すフローチャートである。本実施形態において、本処理は、ロボット100のCPU211がHDD212に記憶されたプログラムを読み出して実行することにより実現される。各処理工程は、例えば、図2の部位や図3の処理部が協働して実現されるが、ここでは説明を簡略化するために、処理主体をロボット100として包括的に説明する。
以下、本発明に係る実施形態2について説明する。実施形態1では、識別した対象ユーザのユーザ状態と、遠隔ユーザのユーザ状態とに基づいて両者のコミュニケーションが可能であるかの判定を、ロボット100が判定する例について説明した。これに対し、実施形態2では、上記両者のコミュニケーションが可能であるかの判定を情報処理サーバで行う例について説明する。なお、実施形態の説明では、同一の参照番号は同一または実質的に同一の機能を果たすものとし、重複する説明は省略して相違点について重点的に説明する。
本実施形態のロボット100の機能構成例は、実施形態1と同様である。図10は、情報処理サーバ900の機能構成例を示すブロック図である。制御部1010は、1つ以上のCPU(Central Processing Unit)1011と、HDD(Hard Disc Drive)1012と、RAM(Random Access Memory)1013とを含んで構成される。CPU1011は、HDD1012に格納されたプログラムを読み出して実行することにより、以下に示す各種処理を制御する。HDD1012は、不揮発性の記憶領域であり、各種処理に対応するプログラムが格納される。なお、HDDの代わりに半導体メモリが用いられてもよい。RAM1013は、揮発性の記憶領域であり、例えば、ワークメモリなどとして利用される。なお、制御部1010は、GPU(Graphics Processing Unit)やASIC(Application Specific Integrated Circuit)、あるいは専用回路などから構成されてもよい。また、制御部1010の各構成要素が仮想化された構成であってもよい。
図11は、本実施形態に係るロボット100のソフトウェア構成の例を示す図である。本実施形態において、各処理部はCPU211がHDD212等に格納されたプログラムを読み出して実行することにより実現される。また、各DB(データベース)は、HDD212に構成される。なお、ソフトウェア構成は本実施形態の実施に必要な構成例のみを示しており、ファームウェア、OS、ミドルウェア、フレームワークなどの各ソフトウェア構成は省略している。
図12は、本実施形態に係る情報処理サーバ900のソフトウェア構成の例を示す図である。本実施形態において、各処理部はCPU1011がHDD1012等に格納されたプログラムを読み出して実行することにより実現される。また、各DB(データベース)は、HDD1012に構成される。なお、ソフトウェア構成は本実施形態の実施に必要な構成例のみを示しており、ファームウェア、OS、ミドルウェア、フレームワークなどの各ソフトウェア構成は省略している。
上述のように、本実施形態では、情報処理サーバ900が、対象ユーザと遠隔ユーザとがコミュニケーションを行うことが可能であるかを判定したうえで、ロボット100に対象ユーザに介入させて、遠隔ユーザとのコミュニケーションを提案する。しかしながら、ロボット100が識別する対象ユーザのユーザ状態は実施形態1と同様である。
本実施形態では、情報処理サーバ900は、対象ユーザの所定のユーザ状態が識別された場合に、遠隔ユーザのユーザ状態を取得して、遠隔ユーザのユーザ状態を考慮する。本実施形態では、実施形態1と同様、遠隔ユーザのユーザ状態は、コミュニケーション可能な状態、または所定の時間帯にコミュニケーション可能な状態のみであるものとする。このようなユーザ状態は、遠隔ユーザの用いる装置150上で図7に示す操作画面と同様の操作画面によって設定される。もちろん、遠隔ユーザ側にロボット100と同様のロボットが存在し、当該ロボットによって遠隔ユーザのユーザ状態が識別されてもよい。
本実施形態に係る情報処理サーバ900は、対象ユーザのユーザ状態と、遠隔ユーザのユーザ状態とを考慮して、コミュニケーション可能であると判定した場合に、ロボット100に、対象ユーザに遠隔ユーザとのコミュニケーションを提案する情報を送信する。ロボット100は、情報処理サーバ900から受信した情報に基づいて、対象ユーザに遠隔ユーザとのコミュニケーションを提案する情報を提供する。コミュニケーションを提案する情報は、実施形態1と同様に提供される。
図13は、本実施形態に係る情報処理サーバ900におけるコミュニケーション制御処理の一連の動作を示すフローチャートである。本実施形態において、本処理は、情報処理サーバ900のCPU1011がHDD1012に記憶されたプログラムを読み出して実行することにより実現される。各処理工程は、例えば、図10の部位や図12の処理部が協働して実現されるが、ここでは説明を簡略化するために、処理主体を情報処理サーバ900として包括的に説明する。
図14は、本実施形態に係るロボット100における簡易コミュニケーション制御処理の一連の動作を示すフローチャートである。本実施形態において、本処理は、ロボット100のCPU211がHDD212に記憶されたプログラムを読み出して実行することにより実現される。各処理工程は、例えば、図2の部位や図3の処理部が協働して実現されるが、ここでは説明を簡略化するために、処理主体をロボット100として包括的に説明する。
1.上記実施形態のコミュニケーションロボット(例えば100)は、
第1ユーザの状態を識別する識別手段(例えば301)と、
遠隔から前記第1ユーザとコミュニケーションをとる第2ユーザの状態を示す状態情報を外部装置から受信する受信手段(例えば304、305)と、
前記第1ユーザの状態と前記第2ユーザの状態とに基づいて前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であるかを判定する判定手段(例えば306)と、
前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であると判定された場合に、前記第2ユーザの用いる装置と前記コミュニケーションロボットとを介した通話を提供する通話制御手段(例えば306)と、を有し、
前記通話制御手段は、前記第1ユーザまたは前記第2ユーザを撮影した画像の少なくとも一部を変更した画像、または、前記第1ユーザまたは前記第2ユーザのために収音された音声の少なくとも一部を変更した音声を用いて通話を行う。
前記通話制御手段は、前記第1ユーザを撮影した画像の背景を変更した画像を用いて通話を行う(例えば306)。
前記通話制御手段は、前記第1ユーザのために収音された音声の周囲音を変更した音声を用いて通話を行う(例えば306)。
前記第1ユーザと前記第2ユーザとのコミュニケーションは、前記第2ユーザによって前記第1ユーザの帰宅を迎える、あるいは前記第1ユーザの送り出すコミュニケーションである(図4)。
前記第1ユーザと前記第2ユーザとのコミュニケーションは、前記第2ユーザが泣いている前記第1ユーザに話しかけるコミュニケーションである(図4)。
前記第1ユーザと前記第2ユーザとのコミュニケーションは、前記第1ユーザが行う動きまたは発話を前記第2ユーザが確認するコミュニケーションである(図4)。
前記第1ユーザと前記第2ユーザとのコミュニケーションは、前記第2ユーザによる発話を前記第1ユーザが聞くコミュニケーションである(図4)。
前記第1ユーザが前記コミュニケーションロボットを介してコミュニケーションを行う場所に前記コミュニケーションロボットを移動させる移動制御手段(例えば308)を更に有し、
前記移動制御手段は、前記第1ユーザの現在位置または行動パターンに基づいて、前記コミュニケーションロボットを前記場所に移動させる。
周期的に収集される前記第1ユーザの状態に関する情報を記憶する記憶手段と、
前記周期的に収集される前記第1ユーザの状態に関する情報に基づいて前記第1ユーザの行動パターンを識別するパターン識別手段(例えば307)と、を更に有し、
前記移動制御手段は、識別された前記第1ユーザの状態のパターンに基づいて、前記コミュニケーションロボットを前記場所に移動させる。
前記第1ユーザは子供である。
前記第2ユーザは、前記第1ユーザの祖父母である。
前記第2ユーザの用いる装置は、前記第2ユーザの状態を識別することが可能なロボットである。
第1ユーザの状態を識別する識別工程(例えばS502)と、
遠隔から前記第1ユーザとコミュニケーションをとる第2ユーザの状態を示す状態情報を外部装置から受信する受信工程(例えばS503)と、
前記第1ユーザの状態と前記第2ユーザの状態とに基づいて前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であるかを判定する判定工程(例えばS504)と、
前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であると判定された場合に、前記第2ユーザの用いる装置と前記コミュニケーションロボットとを介した通話を提供する通話制御工程(例えばS506)と、を有し、
前記通話制御工程では、前記第1ユーザまたは前記第2ユーザを撮影した画像の少なくとも一部を変更した画像、または、前記第1ユーザまたは前記第2ユーザのために収音された音声の少なくとも一部を変更した音声を用いて通話を行う。
撮像可能なコミュニケーションロボットからの第1ユーザの状態に関する情報を取得する第1取得手段(例えば1201)と、
遠隔から前記第1ユーザとコミュニケーションをとる第2ユーザの用いる装置からの、前記第2ユーザの状態に関する情報を取得する第2取得手段(例えば1205)と、
前記第1ユーザの状態と前記第2ユーザの状態とに基づいて前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であるかを判定する判定手段(例えば1206)と、
前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であると判定された場合に、前記第2ユーザの用いる装置と前記コミュニケーションロボットとを介した通話を提供する通話制御手段(例えば1204)と、を有し、
前記通話制御手段は、前記第1ユーザまたは前記第2ユーザを撮影した画像の少なくとも一部を変更した画像、または、前記第1ユーザまたは前記第2ユーザのために収音された音声の少なくとも一部を変更した音声を用いて通話を行う。
撮像可能なコミュニケーションロボットからの第1ユーザの状態に関する情報を取得する第1取得工程(例えばS1301)と、
遠隔から前記第1ユーザとコミュニケーションをとる第2ユーザの用いる装置からの、前記第2ユーザの状態に関する情報を取得する第2取得工程(例えばS1303)と、
前記第1ユーザの状態と前記第2ユーザの状態とに基づいて前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であるかを判定する判定工程(例えばS1304)と、
前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であると判定された場合に、前記第2ユーザの用いる装置と前記コミュニケーションロボットとを介した通話を提供する通話制御工程(例えばS1309)と、を有し、
前記通話制御工程では、前記第1ユーザまたは前記第2ユーザを撮影した画像の少なくとも一部を変更した画像、または、前記第1ユーザまたは前記第2ユーザのために収音された音声の少なくとも一部を変更した音声を用いて通話を行う。
Claims (15)
- コミュニケーションロボットであって、
第1ユーザの状態を識別する識別手段と、
遠隔から前記第1ユーザとコミュニケーションをとる第2ユーザの状態を示す状態情報を外部装置から受信する受信手段と、
前記第1ユーザの状態と前記第2ユーザの状態とに基づいて前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であるかを判定する判定手段と、
前記第1ユーザの状態に応じて、前記第1ユーザが前記コミュニケーションロボットを介してコミュニケーションを行う場所を決定する決定手段と、
前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であると判定された場合に、決定した前記コミュニケーションを行う場所において、前記第2ユーザの用いる装置と前記コミュニケーションロボットとを介した通話を提供する通話制御手段と、を有し、
前記通話制御手段は、前記第1ユーザを撮影した画像の少なくとも一部を、決定した前記コミュニケーションを行う場所に応じて変更した画像を用いて通話を行う、ことを特徴とするコミュニケーションロボット。 - 前記通話制御手段は、前記第1ユーザを撮影した画像の背景を、決定した前記コミュニケーションを行う場所に応じて変更した画像を用いて通話を行う、ことを特徴とする請求項1に記載のコミュニケーションロボット。
- 前記通話制御手段は、更に、前記第1ユーザのために収音された音声の周囲音を変更した音声を用いて通話を行う、ことを特徴とする請求項1に記載のコミュニケーションロボット。
- 前記第1ユーザと前記第2ユーザとのコミュニケーションは、前記第2ユーザによって前記第1ユーザの帰宅を迎える、あるいは前記第1ユーザの送り出すコミュニケーションである、ことを特徴とする請求項1から3のいずれか1項に記載のコミュニケーションロボット。
- 前記第1ユーザと前記第2ユーザとのコミュニケーションは、前記第2ユーザが泣いている前記第1ユーザに話しかけるコミュニケーションである、ことを特徴とする請求項1から3のいずれか1項に記載のコミュニケーションロボット。
- 前記第1ユーザと前記第2ユーザとのコミュニケーションは、前記第1ユーザが行う動きまたは発話を前記第2ユーザが確認するコミュニケーションである、ことを特徴とする請求項1から3のいずれか1項に記載のコミュニケーションロボット。
- 前記第1ユーザと前記第2ユーザとのコミュニケーションは、前記第2ユーザによる発話を前記第1ユーザが聞くコミュニケーションである、ことを特徴とする請求項1から3のいずれか1項に記載のコミュニケーションロボット。
- 決定された前記コミュニケーションを行う場所に前記コミュニケーションロボットを移動させる移動制御手段を更に有する、ことを特徴とする請求項1から7のいずれか1項に記載のコミュニケーションロボット。
- 周期的に収集される前記第1ユーザの状態に関する情報を記憶する記憶手段と、
前記周期的に収集される前記第1ユーザの状態に関する情報に基づいて前記第1ユーザの行動パターンを識別するパターン識別手段と、を更に有し、
前記移動制御手段は、識別された前記第1ユーザの状態のパターンに基づいて決定されるコミュニケーションを行う場所に、前記コミュニケーションロボットを移動させる、ことを特徴とする請求項8に記載のコミュニケーションロボット。 - 前記第1ユーザは子供である、ことを特徴とする請求項1から9のいずれか1項に記載のコミュニケーションロボット。
- 前記第2ユーザは、前記第1ユーザの祖父母である、ことを特徴とする請求項1から10のいずれか1項に記載のコミュニケーションロボット。
- 前記第2ユーザの用いる装置は、前記第2ユーザの状態を識別することが可能なロボットである、ことを特徴とする請求項1から11のいずれか1項に記載のコミュニケーションロボット。
- コミュニケーションロボットの制御方法であって、
第1ユーザの状態を識別する識別工程と、
遠隔から前記第1ユーザとコミュニケーションをとる第2ユーザの状態を示す状態情報を外部装置から受信する受信工程と、
前記第1ユーザの状態と前記第2ユーザの状態とに基づいて前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であるかを判定する判定工程と、
前記第1ユーザの状態に応じて、前記第1ユーザが前記コミュニケーションロボットを介してコミュニケーションを行う場所を決定する決定工程と、
前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であると判定された場合に、決定した前記コミュニケーションを行う場所において、前記第2ユーザの用いる装置と前記コミュニケーションロボットとを介した通話を提供する通話制御工程と、を有し、
前記通話制御工程では、前記第1ユーザを撮影した画像の少なくとも一部を、決定した前記コミュニケーションを行う場所に応じて変更した画像を用いて通話を行う、ことを特徴とするコミュニケーションロボットの制御方法。 - 情報処理サーバであって、
撮像可能なコミュニケーションロボットからの第1ユーザの状態に関する情報を取得する第1取得手段と、
遠隔から前記第1ユーザとコミュニケーションをとる第2ユーザの用いる装置からの、前記第2ユーザの状態に関する情報を取得する第2取得手段と、
前記第1ユーザの状態と前記第2ユーザの状態とに基づいて前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であるかを判定する判定手段と、
前記第1ユーザの状態に応じて、前記第1ユーザが前記コミュニケーションロボットを介してコミュニケーションを行う場所を決定する決定手段と、
前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であると判定された場合に、決定した前記コミュニケーションを行う場所における、前記第2ユーザの用いる装置と前記コミュニケーションロボットとを介した通話を提供する通話制御手段と、を有し、
前記通話制御手段は、前記第1ユーザを撮影した画像の少なくとも一部を、決定した前記コミュニケーションを行う場所に応じて変更した画像を用いて通話を行う、ことを特徴とする情報処理サーバ。 - 情報処理サーバによって実行される情報処理方法であって、
撮像可能なコミュニケーションロボットからの第1ユーザの状態に関する情報を取得する第1取得工程と、
遠隔から前記第1ユーザとコミュニケーションをとる第2ユーザの用いる装置からの、前記第2ユーザの状態に関する情報を取得する第2取得工程と、
前記第1ユーザの状態と前記第2ユーザの状態とに基づいて前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であるかを判定する判定工程と、
前記第1ユーザの状態に応じて、前記第1ユーザが前記コミュニケーションロボットを介してコミュニケーションを行う場所を決定する決定工程と、
前記第1ユーザと前記第2ユーザとのコミュニケーションが可能であると判定された場合に、決定した前記コミュニケーションを行う場所における、前記第2ユーザの用いる装置と前記コミュニケーションロボットとを介した通話を提供する通話制御工程と、を有し、
前記通話制御工程では、前記第1ユーザを撮影した画像の少なくとも一部を、決定した前記コミュニケーションを行う場所に応じて変更した画像を用いて通話を行う、ことを特徴とする情報処理方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/014262 WO2020202353A1 (ja) | 2019-03-29 | 2019-03-29 | コミュニケーションロボットおよびその制御方法、情報処理サーバならびに情報処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020202353A1 JPWO2020202353A1 (ja) | 2021-12-09 |
JP7212766B2 true JP7212766B2 (ja) | 2023-01-25 |
Family
ID=72666637
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021511727A Active JP7212766B2 (ja) | 2019-03-29 | 2019-03-29 | コミュニケーションロボットおよびその制御方法、情報処理サーバならびに情報処理方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7212766B2 (ja) |
WO (1) | WO2020202353A1 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013141246A (ja) | 2011-12-29 | 2013-07-18 | Samsung Electronics Co Ltd | 映像装置及びその制御方法 |
JP2018092528A (ja) | 2016-12-07 | 2018-06-14 | 国立大学法人電気通信大学 | チャットシステム、管理装置、端末装置、宛先選択支援方法および宛先選択支援プログラム |
WO2018163356A1 (ja) | 2017-03-09 | 2018-09-13 | 株式会社 資生堂 | 情報処理装置、プログラム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2921936B2 (ja) * | 1990-07-13 | 1999-07-19 | 株式会社東芝 | 画像監視装置 |
CN1146491C (zh) * | 1998-06-23 | 2004-04-21 | 索尼公司 | 机器人装置及信息处理系统 |
JP6432566B2 (ja) * | 2016-07-26 | 2018-12-05 | カシオ計算機株式会社 | 通信装置およびプログラム |
-
2019
- 2019-03-29 JP JP2021511727A patent/JP7212766B2/ja active Active
- 2019-03-29 WO PCT/JP2019/014262 patent/WO2020202353A1/ja active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013141246A (ja) | 2011-12-29 | 2013-07-18 | Samsung Electronics Co Ltd | 映像装置及びその制御方法 |
JP2018092528A (ja) | 2016-12-07 | 2018-06-14 | 国立大学法人電気通信大学 | チャットシステム、管理装置、端末装置、宛先選択支援方法および宛先選択支援プログラム |
WO2018163356A1 (ja) | 2017-03-09 | 2018-09-13 | 株式会社 資生堂 | 情報処理装置、プログラム |
Also Published As
Publication number | Publication date |
---|---|
WO2020202353A1 (ja) | 2020-10-08 |
JPWO2020202353A1 (ja) | 2021-12-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10776070B2 (en) | Information processing device, control method, and program | |
AU2014236686B2 (en) | Apparatus and methods for providing a persistent companion device | |
JP4595436B2 (ja) | ロボット、その制御方法及び制御用プログラム | |
JP7056055B2 (ja) | 情報処理装置、情報処理システム及びプログラム | |
US20200410739A1 (en) | Robot and method for operating same | |
KR102463806B1 (ko) | 이동이 가능한 전자 장치 및 그 동작 방법 | |
US20220224735A1 (en) | Information processing apparatus, non-transitory computer readable medium storing program, and method | |
JPWO2017130486A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
WO2017141530A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
WO2020116233A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN110178159A (zh) | 具有集成式投影仪的音频/视频可穿戴式计算机系统 | |
WO2016206646A1 (zh) | 使机器装置产生动作的方法及系统 | |
JP7212766B2 (ja) | コミュニケーションロボットおよびその制御方法、情報処理サーバならびに情報処理方法 | |
WO2024001799A1 (zh) | 虚拟现实vr设备的防碰撞方法和电子设备 | |
JP7208361B2 (ja) | コミュニケーションロボットおよびその制御方法、情報処理サーバならびに情報処理方法 | |
JP6675136B1 (ja) | 仮想空間提供システム、仮想空間提供方法及びプログラム | |
JP2019208167A (ja) | テレプレゼンスシステム | |
JPWO2018168247A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
CN112034986A (zh) | 基于ar的交互方法、终端设备以及可读存储介质 | |
KR20210131324A (ko) | 정보 처리 장치 및 정보 처리 방법 | |
US20200151796A1 (en) | Information processing device, information processing method, and program | |
WO2024154626A1 (ja) | 電子機器及びプログラム | |
US20240281203A1 (en) | Information processing device, information processing method, and storage medium | |
JP2015060380A (ja) | 情報端末および情報処理システム | |
US11928253B2 (en) | Virtual space control system, method for controlling the same, and control program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220826 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221025 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221216 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230113 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7212766 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |