JP6892928B2 - 情報提供システム、情報提供方法および情報提供システム用管理装置 - Google Patents

情報提供システム、情報提供方法および情報提供システム用管理装置 Download PDF

Info

Publication number
JP6892928B2
JP6892928B2 JP2019544587A JP2019544587A JP6892928B2 JP 6892928 B2 JP6892928 B2 JP 6892928B2 JP 2019544587 A JP2019544587 A JP 2019544587A JP 2019544587 A JP2019544587 A JP 2019544587A JP 6892928 B2 JP6892928 B2 JP 6892928B2
Authority
JP
Japan
Prior art keywords
robot
image data
user
unit
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019544587A
Other languages
English (en)
Other versions
JPWO2019065305A1 (ja
Inventor
茂憲 蛭田
茂憲 蛭田
大輔 村松
大輔 村松
史郎 北村
史郎 北村
修司 仲山
修司 仲山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of JPWO2019065305A1 publication Critical patent/JPWO2019065305A1/ja
Application granted granted Critical
Publication of JP6892928B2 publication Critical patent/JP6892928B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63H—TOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H11/00—Self-movable toy figures
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00—Controls for manipulators
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00—Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02—Sensing devices
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0038—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/587—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/903—Querying
    • G06F16/9035—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/907—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/909—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25841—Management of client data involving the geographical location of the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Library & Information Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Remote Sensing (AREA)
  • Computational Linguistics (AREA)
  • Computer Graphics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Manipulator (AREA)
  • Toys (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は、ロボットを介して取得した情報をユーザに提供する情報提供システム、情報提供方法および情報提供システム用管理装置に関する。
この種のシステムとして、従来、旅行者が携帯するロボットを介して旅行者が見た映像や会話のデータを取得するとともに、これら取得したデータをサーバに保存するようにしたシステムが知られている（例えば特許文献１参照）。このシステムによれば、旅行先での映像や会話のデータがロボットを介してサーバに保存されるので、ユーザ（旅行者）が後でそのデータを再生することができる。
特許文献１：特開２０１７−１０４５３２号公報
しかしながら、上記特許文献１記載のシステムでは、何らかの理由によりロボットが映像や会話のデータを取得し損ねると、ユーザに再生可能なデータを提供することができない。
本発明の一態様である情報提供システムは、画像データを取得する撮影部を有し、ユーザとともに移動するロボットと、ユーザまたはロボットの位置情報を時刻情報とともに取得する情報取得部と、撮影部により取得された画像データを、情報取得部により取得された位置情報および時刻情報に関連付けて記憶する記憶部と、記憶部に記憶された画像データの中から、ユーザにより指令された時刻および位置に対応する画像データを抽出するデータ抽出部と、データ抽出部で抽出された画像データに基づき画像を表示する表示部と、を備える。ロボットは、第１ユーザとともに移動する第１ロボットと、第２ユーザとともに移動する第２ロボットとを含み、記憶部は、第１ロボットの前記撮影部により取得された画像データと第２ロボットの前記撮影部により取得された画像データとを記憶し、データ抽出部は、記憶部に記憶された第１ロボットの撮影部により取得された画像データの中に、第１ユーザにより指令された時刻および位置に対応する画像データが存在しないとき、記憶部に記憶された第２ロボットの撮影部により取得された画像データの中から、第１ユーザにより指令された時刻および位置に対応する画像データを抽出する。
本発明の他の態様は、画像データを取得する撮影部を有するとともにユーザとともに移動するロボットを介して情報を提供する情報提供方法であり、ユーザまたはロボットの位置情報を時刻情報とともに取得し、撮影部により取得された画像データを、取得された位置情報および時刻情報に関連付けて記憶部に記憶し、記憶部に記憶された画像データの中から、ユーザにより指令された時刻および場所に対応する画像データを抽出し、抽出された画像データに基づき画像を表示することを含む。ロボットは、第１ユーザとともに移動する第１ロボットと、第２ユーザとともに移動する第２ロボットとを含み、画像データを記憶することは、第１ロボットの撮影部により取得された画像データと第２ロボットの撮影部により取得された画像データとを記憶することを含み、画像データを抽出することは、記憶部に記憶された第１ロボットの撮影部により取得された画像データの中に、第１ユーザにより指令された時刻および位置に対応する画像データが存在しないとき、記憶部に記憶された第２ロボットの撮影部により取得された画像データの中から、第１ユーザにより指令された時刻および位置に対応する画像データを抽出することを含む。
本発明のさらなる他の態様である情報提供システム用管理装置は、ユーザとともに移動するロボットにより取得された画像データと位置情報とを時刻情報とともに取得する情報取得部と、情報取得部により取得された画像データを、位置情報および時刻情報に関連付けて記憶する記憶部と、ユーザにより指令が入力される入力部と、記憶部に記憶された画像データの中から、入力部により指令された時刻および位置に対応する画像データを抽出するデータ抽出部と、データ抽出部で抽出された画像データに基づき画像を表示する表示部と、を備える。ロボットは、第１ユーザとともに移動する第１ロボットと、第２ユーザとともに移動する第２ロボットとを含み、記憶部は、第１ロボットにより取得された画像データと第２ロボットにより取得された画像データとを記憶し、データ抽出部は、記憶部に記憶された第１ロボットにより取得された画像データの中に、第１ユーザにより指令された時刻および位置に対応する画像データが存在しないとき、記憶部に記憶された第２ロボットにより取得された画像データの中から、第１ユーザにより指令された時刻および位置に対応する画像データを抽出する。
本発明によれば、何らかの理由によりロボットが画像データを取得し損ねた場合であっても、ロボットを介してユーザに十分な再生可能な画像データを提供することができる。
本発明の実施形態に係る情報提供システムの全体構成を概略的に示す図。 図１のユーザ機器の構成を示す図。 図１のロボットの構成を示す図。 図１の管理サーバの概略構成を示すブロック図。 図４の演算部で実行される処理の一例を示すフローチャート。 本発明の実施形態に係る情報提供システムの動作の一例を示す図。
以下、図１〜図６を参照して本発明の実施形態について説明する。本発明の実施形態に係る情報提供システムは、ユーザと行動を共にするロボットにより取得された情報を、管理サーバに保存するとともに、管理サーバに保存された情報をユーザに提供可能とするものである。
図１は、本発明の実施形態に係る情報提供システム１００の全体構成を概略的に示す図である。図１に示すように、本実施形態に係る情報提供システム１００は、Ａ地点に位置するユーザ１Ａに装着されたユーザ機器１０と、Ｂ地点に位置するユーザ１Ｂと行動を共にする第１ロボット２０Ａと、Ｃ地点に位置するユーザ１Ｃと行動を共にする第２ロボット２０Ｂと、管理サーバ３０とを含んで構成される。
これらユーザ機器１０と、第１ロボット２０Ａと、第２ロボット２０Ｂと、管理サーバ３０とは、インターネット回線等の無線通信網を含むネットワーク２で通信可能に接続される。なお、第１ロボット２０Ａと第２ロボット２０Ｂとは互いに同一構成であり、以下ではこれらロボット２０Ａ，２０Ｂを共通の符号２０で表すこともある。
Ｂ地点はＡ地点から見て遠隔地である。すなわち、Ａ地点とＢ地点とは互いに離れた地点、例えば互いに異なる地域、あるいは互いに異なる国である。Ｂ地点の第１ロボット２０Ａは、Ａ地点のユーザ１Ａにより遠隔操作される。ユーザ１Ａとユーザ１Ｂとは例えば家族であり、ユーザ１Ａがユーザ１Ｂと一緒に外出（例えば旅行）することが困難な場合に、ユーザ１Ａの代わりに第１ロボット２０Ａがユーザ１Ｂとともに旅行し、そのときに第１ロボット２０Ａが得た情報を、ユーザ１Ａに提供するように情報提供システム１００を構成する。これによりユーザ１Ａは、例えば自宅にいながら、あたかもユーザ１Ｂと一緒に旅行している気分を味わうことができる。なお、Ｃ地点のユーザ１Ｃとともに行動する第２ロボット２０Ｂも、図示しない他のユーザ（例えばユーザ１Ｃの家族）により遠隔操作される。
Ｂ地点とＣ地点とは、同一地域内、例えば同一の観光地域内に位置する。したがって、Ｂ地点とＣ地点との間の距離は所定距離内である。なお、所定距離は、例えば数ｍ〜数十ｍでもよく、数ｋｍ程度であってもよい。
第１ロボット２０Ａは、Ｂ地点またはＢ地点の近傍の店舗３からレンタルされる。すなわち、第１ロボット２０Ａは、店舗３に赴いたユーザ１Ｂによりレンタルされ、Ｂ地点でユーザ１Ｂとともに行動する。第２ロボット２０Ｂは、Ｃ地点またはＣ地点の近傍の店舗（例えばＢ地点の店舗３）からレンタルされる。すなわち、第２ロボット２０Ｂは、ユーザ１Ｃによりレンタルされ、Ｃ地点でユーザ１Ｃとともに行動する。各ロボット２０Ａ，２０Ｂは、各地点での旅行が終了するとユーザ１Ｂ，１Ｃにより店舗３に返却される。
店舗３の各ロボット２０には、予め固有の識別ＩＤ（ロボットＩＤ）が付される。ロボット２０をレンタルするユーザには、ユーザを識別するためのユーザＩＤが付される。ロボットＩＤにユーザＩＤが対応付けられて、ロボット２０のレンタル情報、すなわちどのロボット２０がどの期間にどのユーザにレンタルされるかの情報が管理サーバ３０に記憶される。
図２は、ユーザ機器１０の構成を示す図である。図２に示すようにユーザ機器１０は、例えば全体が略ヘルメット形状を呈するウェアラブルコンピュータであり、ユーザの頭部に装着される。ユーザ機器１０は、ユーザの脳波や脳磁波、脳血流の状態等の脳活動を検出する複数のセンサ１１を備える。すなわち、ユーザ機器１０は、ユーザの思考ないし意図を脳活動信号から検出し、身体を使うことなく機械操作を実現する、いわゆるブレインマシンインタフェース（ＢＭＩ）を備える。
さらにユーザ機器１０は、ディスプレイ１２と、マイク１３と、スピーカ１４と、入力装置１５と、コントローラ１６と、無線ユニット１７とを有する。ディスプレイ１２は、例えば非透過型のヘッドマウントディスプレイであり、ユーザの顔面を覆うように配置され、ロボット２０により取得されたカメラ画像が表示される。表示されるカメラ画像には、ロボット２０により現在取得された現時点のカメラ画像と、ロボット２０により過去に取得された過去時点のカメラ画像とが含まれる。
マイク１３は、ユーザの口元に配置され、ユーザの発話による音声信号を入力する。スピーカ１４は、ユーザの耳元に配置され、音声を出力する。入力装置１５は、ユーザにより操作されるスイッチやタッチパネル等により構成され、入力装置１５を介して各種情報を入力することができる。例えば、ディスプレイ１２に表示するカメラ画像を特定するための情報、すなわち撮影の日時と場所とを入力することができる。
コントローラ１６は、ＣＰＵ，ＲＯＭ，ＲＡＭ等を有するマイクロコンピュータを含み、無線ユニット１７を制御して管理サーバ３０との間で通信する。例えばコントローラ１６は、センサ１１とマイク１３とからの信号を管理サーバ３０に送信するとともに、管理サーバ３０からの信号に基づきディスプレイ１２やスピーカ１４などに制御信号を出力する。
さらにコントローラ１６は、入力装置１５を介して入力された指令に応じて、管理サーバ３０に記憶された画像データを読み込み、この画像データに基づきディスプレイ１２に制御信号を出力して、画像を表示させる。すなわち、コントローラ１６は、過去にロボット２０により取得されたカメラ画像を再生する機能を有する。
図３は、ロボット２０の構成を示す図である。図３に示すようにロボット２０は、頭、胴体、２つの腕部、２つの脚部を有する人型ロボットであり、二足歩行によりロボット自身で移動することができる。ロボット２０の高さは、成人の身長に近く、例えば１４０〜１６０ｃｍ程度である。
ロボット２０は、外界を感知するための人の感覚機能である五感に対応した検出機能を有する複数のセンサ、すなわち視覚センサ２１１と、聴覚センサ２１２と、触覚センサ２１３と、臭覚センサ２１４と、味覚センサ２１５とを有する。これらセンサ２１１〜２１５は、人の五感に対応した信号（五感信号）を検出信号として出力する。
より具体的には、視覚センサ２１１はカメラにより構成され、ロボット２０の目の位置に設けられたＣＭＯＳセンサやＣＣＤセンサ等の画像センサとレンズとを有する撮影部と、撮影部を上下左右に駆動する駆動部と、被写体を拡大縮小するズーム機構とを有し、ロボット２０の周囲の画像（動画）を取得する。聴覚センサ２１２は、例えばロボット２０の耳の位置に設けられたマイクにより構成され、ロボット２０の周囲の音声を取得する。触覚センサ２１３は、例えばロボット２０のハンドの位置等に設けられた力覚センサにより構成され、ロボット２０のハンドに作用する外力を検出する。臭覚センサ２１４は、ロボット２０の鼻の位置に設けられ、臭いを検出する。味覚センサ２１５は、ロボット２０の口の位置に設けられ、味を検出する。
さらにロボット２０は、アクチュエータ２２と、スピーカ２３と、入力装置２４と、ＧＰＳセンサ２５と、コントローラ２６と、無線ユニット２７とを有する。アクチュエータ２２は、例えばロボット２０の関節部に設けられた複数のサーボモータ等により構成され、アクチュエータ２２の駆動によりロボット２０が動作する。スピーカ２３は、ロボット２０の口の位置に設けられ、音声を出力する。入力装置２４は、電源スイッチ等の各種スイッチを備える。ＧＰＳセンサ２５は、ＧＰＳ衛星からのＧＰＳ信号を受信する。ＧＰＳセンサ２５が受信した信号に基づきロボット２０の位置を検出することができる。
コントローラ２６は、ＣＰＵ，ＲＯＭ，ＲＡＭ等を有するマイクロコンピュータを含み、無線ユニット２７を制御して管理サーバ３０との間で通信する。例えばコントローラ２６は、五感信号を出力するセンサ２１１〜２１５とＧＰＳセンサ２５とからの信号を管理サーバ３０に送信する。さらにコントローラ２６は、管理サーバ３０からの信号に基づきアクチュエータ２２やスピーカ２３などに制御信号を出力する。
図４は、管理サーバ３０の概略構成の一例を示すブロック図である。図４に示すように、管理サーバ３０は、入力装置３１と、表示装置３２と、無線ユニット３３と、コントローラ３４とを有する。なお、入力装置３１と表示装置３２とは、省略することができる。なお、無線ユニット３３はユーザ機器１０とロボット２０とを通信接続される構成（通信接続部）であれば良い。
コントローラ３４は、ＣＰＵ等の演算部３５と、ＲＯＭ，ＲＡＭ，ハードディスク等の記憶部３６と、その他の周辺回路とを有し、無線ユニット３３を制御してユーザ機器１０およびロボット２０との間で通信する。演算部３５は、機能的構成として、情報取得部３７と、データ抽出部３８と、ロボット制御部３９と、ユーザ機器制御部４０とを有する。なお、以下では、便宜上、複数のユーザと複数のロボットとを、必要に応じて図１に示すように区別して説明する。
情報取得部３７は、ユーザ機器１０（図２のセンサ１１やマイク１３や入力装置１５等）から送信されたデータおよび第１ロボット２０Ａ（図３のセンサ２１１〜２１５やＧＰＳセンサ２５等）から送信されたデータを、無線ユニット３３を介して取得する。第１ロボット２０Ａから送信されたデータのうち、視覚センサ２１１により取得された画像データと聴覚センサ２１２により取得された音声データは、第１ロボット２０ＡのロボットＩＤ、および第１ロボット２０Ａと行動を共にするユーザ１ＢのユーザＩＤを付して、記憶部３６に記憶される。
記憶部３６は、機能的構成として自己データ記憶部３６１と他者データ記憶部３６２とを有する。自己データ記憶部３６１には、自己（ユーザ１Ｂ）のユーザＩＤが付された画像データと音声データとが記憶される。他者データ記憶部３６２には、他者（ユーザ１Ｃ）のユーザＩＤが付された画像データと音声データとが記憶される。なお、他者データ記憶部３６２には、ユーザ１Ａ〜１Ｃ以外の複数のユーザのユーザＩＤが付された画像データと音声データも記憶される。自己データ記憶部３６１には、ＧＰＳセンサ２５により取得された第１ロボット２０Ａの位置情報も、その位置情報に対応する時刻情報とともに記憶される。他者データ記憶部３６２には、ＧＰＳセンサ２５により取得された第２ロボット２０Ｂの位置情報も、その位置情報に対応する時刻情報とともに記憶される。
データ抽出部３８は、自己データ記憶部３６１に記憶された自己（ユーザ１Ｂ）のユーザＩＤに対応する画像データおよび音声データの中から、ユーザ機器１０の入力装置１５を介して入力された時刻（目標時刻）および位置（目標位置）に対応するデータを抽出する。つまりユーザ１Ｂが再生を欲する目標時刻および目標位置の画像データと音声データとを抽出する。なお、目標時刻は、例えば○月○日○時〜△月△日△時等、所定の時間的範囲を含んで入力装置１５により指定することができる。目標位置も、番地を含む厳密な住所で指定するのではなく、単に地名等、所定の地理的範囲を含んで入力装置１５により指定することができる。
データ抽出部３８は、ユーザ機器１０の入力装置１５を介して入力された目標時刻および目標位置に対応するデータが自己データ記憶部３６１に保存されていないとき、自己データ記憶部３６１に記憶された自己（ユーザ１Ｂ）のユーザＩＤが付された第１ロボット２０Ａの位置情報と時刻情報とに基づき、目標時刻における第１ロボット２０Ａの実位置（目標位置とは異なる位置）を特定する。そして、入力装置１５を介して入力された目標位置が、第１ロボット２０Ａの実位置から所定距離内であるか否かを判定する。この判定は、目標位置と第１ロボット２０Ａの実位置とが、互いに同一の地域（例えば同一の観光地）内にあるか否かの判定であり、所定距離は、例えば数十ｍ〜数ｋｍ程度に設定される。
データ抽出部３８は、入力装置１５を介して入力された目標位置が第１ロボット２０Ａの実位置から所定距離内にあると判定すると、他者データ記憶部３６２に記憶された他者（ユーザ１Ｃ）のユーザＩＤに対応する画像データおよび音声データ（第２ロボット２０Ｂにより取得された画像データおよび音声データ）の中から、入力装置１５を介して入力された時刻および位置に対応するデータを抽出する。一方、データ抽出部３８は、入力装置１５を介して入力された目標位置が第１ロボット２０Ａの実位置から所定距離内にないと判定すると、データ抽出不可の信号を出力する。
ロボット制御部３９は、ユーザ機器１０から送信された第１ロボット２０Ａに対する動作指令、すなわちユーザ１Ａの脳活動による動作指令に基づいて、第１ロボット２０Ａのアクチュエータ２２に対する動作信号を生成する。そして、この動作信号を、無線ユニット３３を介して第１ロボット２０Ａに送信する。第１ロボット２０Ａのコントローラ２６は、この動作信号に応じてアクチュエータ２２に制御信号を出力する。これにより、ユーザ１Ａの意図に従い、ユーザ１Ａの身代わりとして第１ロボット２０Ａを動作させることができる。ロボット制御部３９は、ユーザ機器１０のマイク１３からの信号に基づく音声を、第１ロボット２０Ａのスピーカ２３から出力させることもできる。
ユーザ機器制御部４０は、第１ロボット２０Ａのセンサ２１１〜２１５からの信号（五感信号）に基づいて、ユーザ機器１０に対する動作信号を生成する。そして、この動作信号を、無線ユニット３３を介してユーザ機器１０に送信する。例えば視覚センサ２１１により検出された信号に基づき画像信号を送信する。ユーザ機器１０のコントローラ１６は、この画像信号に応じてディスプレイ１２に制御信号を出力し、ディスプレイ１２に視覚センサ２１１から得られた三次元画像を表示させる。これによりユーザ１Ａはロボット２０の周囲の状況をリアルタイムで的確に把握できる。ユーザ機器制御部４０は、聴覚センサ２１２からの信号に基づく音声を、ユーザ機器１０のスピーカ１４から出力させることもできる。
さらにユーザ機器制御部４０は、データ抽出部３８により抽出された画像データと音声データとを、無線ユニット３３を介してユーザ機器１０に送信する。
図５は、予め記憶部３６に記憶されたプログラムに従い演算部３５で実行される処理、特にユーザ機器１０の画像表示に係る処理の一例を示すフローチャートである。このフローチャートに示す処理は、例えばユーザ１Ｂが自宅にてユーザ機器１０（入力装置１５）を介して画像再生の指令を入力すると開始される。
まずＳ１（Ｓ：処理ステップ）で、入力装置１５を介して入力された指令、すなわち再生画像を特定する目標時刻と目標位置の指令を読み込む。次いで、Ｓ２で、自己データ記憶部３６１に記憶された自己のユーザＩＤに対応する画像データおよび音声データの中に、目標時刻と目標位置に対応するデータが存在するか否か、すなわち自己データ記憶部３６１からデータ抽出が可能か否かを判定する。Ｓ２で肯定されるとＳ３に進み、自己データ記憶部３６１から目標時刻と目標位置に対応した画像データと音声データとを抽出する。次いで、Ｓ８で、抽出したデータをユーザ機器１０に送信する。
一方、Ｓ２で否定されるとＳ４に進み、自己データ記憶部３６１に記憶された時刻情報と位置情報とに基づき、目標時刻における自己のユーザＩＤが付された第１ロボット２０Ａの実位置を特定する。次いで、Ｓ５で、目標位置が第１ロボット２０Ａの実位置から所定距離内であるか否かを判定する。Ｓ５で肯定されるとＳ６に進み、他者データ記憶部３６２に記憶された他者（ユーザ１Ｃ）のユーザＩＤに対応する画像データおよび音声データの中に、目標時刻と目標位置に対応するデータが存在するか否か、すなわち他者データ記憶部３６２からデータ抽出が可能か否かを判定する。Ｓ６で肯定されるとＳ７に進み、他者データ記憶部３６２から目標時刻と目標位置に対応した画像データと音声データとを抽出する。次いで、Ｓ８で、抽出したデータをユーザ機器１０に送信する。
Ｓ５で否定、またはＳ６で否定されるとＳ９に進む。Ｓ９では、記憶部３６から目標時刻と目標位置とに対応したデータを抽出することが不可能であることを示す信号（抽出不可信号）をユーザ機器１０に送信する。
本実施形態に係る情報提供システム１００の主要な動作をより具体的に説明する。例えば図１に示すように第１ロボット２０Ａと行動を共にしていたユーザ１Ｂが、外出先から帰宅後に、第１ロボット２０Ａにより取得された画像および音声のデータを、ユーザ機器１０を用いて再生する場合を想定する。このとき、ユーザ１Ｂは、入力装置１５を介して目標時刻と目標位置とを指令する。
目標位置および目標時刻として、例えばユーザ１Ｂが過去に旅行した地点Ｂとそのときの時刻とが指定されると、データ抽出部３８は、自己データ記憶部３６１から対応する画像データと音声データとを抽出し（Ｓ３）、ユーザ機器制御部４０は、これらのデータをユーザ機器１０に送信する（Ｓ８）。これにより図６に示すように、ユーザ１Ｂが装着するユーザ機器１０のディスプレイ１２に、地点Ｂの過去の画像５１が表示される。その結果、ユーザ１Ｂは、過去に旅行した地点Ｂのシーンを回想して楽しむことができる。
何らかの理由（例えばトラブル）により、過去に旅行したＢ地点のデータが自己データ記憶部３６１に記憶されていないとき、データ抽出部３８は、他者データ記憶部３６２から対応する画像データと音声データとを抽出し（Ｓ７）、ユーザ機器制御部４０は、これらのデータをユーザ機器１０に送信する（Ｓ８）。これにより、第１ロボット２０Ａがカメラ画像を取得し損なった場合であっても、ユーザ１Ｂは過去に旅行した地点Ｂのシーンを回想して楽しむことができる。
一方、目標位置として、例えばユーザ１Ｂが過去に地点Ｂを旅行したときに訪れることのできなかった地点Ｂの近傍の地点Ｃが指定されると、データ抽出部３８は、他者データ記憶部３６２から対応する画像データと音声データとを抽出し（Ｓ７）、ユーザ機器制御部４０は、これらのデータをユーザ機器１０に送信する（Ｓ８）。これにより図６に示すように、ユーザ１Ｂが装着するユーザ機器１０のディスプレイ１２に、地点Ｃの過去の画像５２が表示される。この場合、ユーザ１Ｂが実際に訪れた地点Ｂと訪れることのできなかった地点Ｃとは、所定距離内にあって同一地域内に位置する。このため、Ｃ地点の画像データをユーザ１Ｂにとっての補完データとして用いることができ、ユーザ１ＢはＢ地点の旅行に関連付けてＣ地点の再生画像を楽しむことができる。
本実施形態によれば以下のような作用効果を奏することができる。
（１）本実施形態に係る情報提供システム１００は、画像データを取得する視覚センサ２１１を有し、ユーザとともに移動するロボット２０と、ロボット２０の位置情報を時刻情報とともに取得する情報取得部３７と、視覚センサ２１１により取得された画像データを、情報取得部３７により取得された位置情報および時刻情報に関連付けて記憶する記憶部３６と、記憶部３６に記憶された画像データの中から、ユーザにより指令された目標時刻および目標位置に対応する画像データを抽出するデータ抽出部３８と、データ抽出部３８で抽出された画像データに基づき画像を表示するディスプレイ１２と、を備える（図１〜４）。ロボット２０は、ユーザ１Ｂとともに移動する第１ロボット２０Ａと、ユーザ１Ｃとともに移動する第２ロボット２０Ｂとを含む（図１）。記憶部３６は、第１ロボット２０Ａの視覚センサ２１１により取得された画像データを記憶する自己データ記憶部３６１と、第２ロボット２０Ｂの視覚センサ２１１により取得された画像データを記憶する他者データ記憶部３６２とを有する（図４）。データ抽出部３８は、自己データ記憶部３６１に記憶された第１ロボット２０Ａの視覚センサ２１１により取得された画像データの中に、ユーザ１Ｂにより指令された目標時刻および目標位置に対応する画像データが存在しないとき、他者データ記憶部３６２に記憶された第２ロボット２０Ｂの視覚センサ２１１により取得された画像データの中から、ユーザ１Ｂにより指令された目標時刻および目標位置に対応する画像データを抽出する（図５）。このように、自己データ記憶部３６１に目標時刻および目標位置に対応する画像データが存在しないとき、他者データ記憶部３６２に記憶された画像データの中から目標時刻および目標位置に対応する画像データを抽出するので、何らかの理由により第１ロボット２０Ａが画像データを取得し損ねた場合であっても、ユーザに再生可能な所望の画像データを提供することができる。
（２）データ抽出部３８は、ユーザ１Ｂにより指令された目標時刻および目標位置に対応する第１ロボット２０Ａの位置情報および時刻情報が自己データ記憶部３６１に記憶されていないとき、すなわち、ユーザ１Ｂが目標時刻に目標位置を訪れなかったとき、他者データ記憶部３６２に記憶された第２ロボット２０Ｂの視覚センサ２１１により取得された画像データの中から、目標時刻および目標位置に対応する画像データを抽出する（図５）。これにより、ユーザ１Ｂが訪れることのできなった場所の画像データを、ユーザ１Ｂに対し提供することができる。
（３）データ抽出部３８は、ユーザ１Ｂにより指令された目標時刻における自己データ記憶部３６１に記憶された第１ロボット２０Ａの実位置が、ユーザ１Ｂにより指令された目標位置から所定距離内であることを条件として、他者データ記憶部３６２に記憶された第２ロボット２０Ｂの視覚センサ２１１により取得された画像データの中から、ユーザ１Ｂにより指令された目標時刻および目標位置に対応する画像データを抽出する（図５）。このため、ユーザ２Ｂが第１ロボット２０Ａと共に訪れたことのある場所と同一地域の場所の画像データが抽出されるため、抽出された画像データを画像再生時の補完データとして用いることができ、ユーザ１Ｂにとって有用な情報を提供できる。
（４）ロボット２０は、歩行可能に構成される（図３）。これによりロボット２０は、ユーザ１Ｂが携帯しなくてもユーザ１Ｂと共に行動することができ、ユーザ１Ｂの周囲の画像データを容易に取得することができる。
（５）本実施形態に係る情報提供方法は、画像データを取得する視覚センサ２１１を有するとともにユーザとともに移動するロボット２０を介して情報を提供するものであり、ロボット２０の位置情報を時刻情報とともに取得し、視覚センサ２１１により取得された画像データを、取得された位置情報および時刻情報に関連付けて記憶部３６に記憶し、記憶部３６に記憶された画像データの中から、ユーザにより指令された時刻および場所に対応する画像データを抽出し、抽出された画像データに基づき画像を表示することを含む（図５）。ロボット２０は、ユーザ１Ｂとともに移動する第１ロボット２０Ａと、ユーザ１Ｃとともに移動する第２ロボット２０Ｂとを含む（図１）。画像データを記憶することは、第１ロボット２０Ａの視覚センサ２１１により取得された画像データと第２ロボット２０Ｂの視覚センサ２１１により取得された画像データとを記憶することを含む。画像データを抽出することは、記憶部３６に記憶された第１ロボット２０Ａの視覚センサ２１１により取得された画像データの中に、ユーザ１Ｂにより指令された目標時刻および目標位置に対応する画像データが存在しないとき、記憶部３６に記憶された第２ロボット２０Ｂの視覚センサ２１１により取得された画像データの中から、目標時刻および目標位置に対応する画像データを抽出することを含む（Ｓ７）。これにより第１ロボット２０Ａが画像データを取得し損ねた場合であっても、ユーザに目標時刻および目標位置に対応する画像データを提供することができる。
上記実施形態は種々の変形が可能である。以下、変形例について説明する。上記実施形態では、二足歩行可能な人型ロボット２０を用いたが、画像データを取得する視覚センサ２１１等の撮影部を有するとともに、ユーザとともに移動するのであれば、ロボットの構成は上述したものに限らない。上記実施形態では、ユーザ１Ａからの指令によりロボット２０を移動させるようにしたが、例えばロボット自身が周囲の状況を判断してユーザ１Ｂに追従するようにロボットを構成してもよい。上記実施形態では、第１ロボット２０Ａと第２ロボット２０Ｂとを含んで情報提供システム１００を構成したが、これより多くのロボットが情報提供システムに含まれてもよい。これらのロボットには、ユーザが指定した目標位置から所定距離内に位置するロボットだけでなく、所定距離を越えて位置するロボットが含まれてもよい。
上記実施形態では、情報取得部３７がＧＰＳセンサ２５からの信号を取得することでロボット２０の位置情報と時刻情報とを取得するようにしたが、ロボット２０とユーザ１Ｂとは一緒に行動するので、ロボット２０の位置情報と時刻情報に代えて、ユーザ１Ｂの位置情報と時刻情報とを取得するようにしてもよい。例えば、ＧＰＳセンサ等の位置情報取得機能を有するユーザ１Ｂが携帯する携帯端末からの信号を、情報取得部３７が取得するようにしてもよい。上記実施形態では、データ抽出部３８が、目標位置と目標時刻とに対応する画像データと音声データとを記憶部３６から抽出するようにしたが、少なくとも画像データを抽出するのであれば抽出するデータはいかなるものでもよく、データ抽出部の構成は上述したものに限らない。上記実施形態では、ヘッドマウントディスプレイとしてのユーザ機器１０のディスプレイ１２に画像を表示するようにしたが、表示部の構成はこれに限らない。
上記実施形態におけるユーザ機器１０およびロボット２０のコントローラ１６，２６の機能の一部を、管理サーバ３０が担うようにしてもよく、管理サーバ３０の機能の一部をコントローラ１６，２６が担うようにしてもよい。上記実施形態では、ユーザ機器１０およびロボット２０が、管理サーバ３０を介して互いに通信するようにしたが、管理サーバ３０を介さずに直接通信するようにしてもよい。
上記実施形態では、ロボット２０を店舗３でレンタルするようにしたが、例えばユーザが自宅に所有するロボットを用いても、本発明は、同様に構成することができる。管理サーバ３０と店舗３の端末とを通信可能に構成し、ロボット２０のレンタル予約の申し込み、レンタル料金の支払い等を、管理サーバ３０を介して行うようにしてもよい。
以上の説明はあくまで一例であり、本発明の特徴を損なわない限り、上述した実施形態および変形例により本発明が限定されるものではない。上記実施形態と変形例の１つまたは複数を任意に組み合わせることも可能であり、変形例同士を組み合わせることも可能である。
１０ ユーザ機器、１２ ディスプレイ、１６ コントローラ、２０ ロボット、２０Ａ 第１ロボット、２０Ｂ 第２ロボット、２６ コントローラ、３０ 管理サーバ、３６ 記憶部、３７ 情報取得部、３８ データ抽出部、４０ ユーザ機器制御部、１００ 情報提供システム、２１１ 視覚センサ

Claims (6)

  1. 画像データを取得する撮影部を有し、ユーザとともに移動するロボットと、
    前記ユーザまたは前記ロボットの位置情報を時刻情報とともに取得する情報取得部と、
    前記撮影部により取得された画像データを、前記情報取得部により取得された位置情報および時刻情報に関連付けて記憶する記憶部と、
    前記記憶部に記憶された画像データの中から、前記ユーザにより指令された時刻および位置に対応する画像データを抽出するデータ抽出部と、
    前記データ抽出部で抽出された画像データに基づき画像を表示する表示部と、を備え、
    前記ロボットは、第１ユーザとともに移動する第１ロボットと、第２ユーザとともに移動する第２ロボットとを含み、
    前記記憶部は、前記第１ロボットの前記撮影部により取得された画像データと前記第２ロボットの前記撮影部により取得された画像データとを記憶し、
    前記データ抽出部は、前記記憶部に記憶された前記第１ロボットの前記撮影部により取得された画像データの中に、前記第１ユーザにより指令された時刻および位置に対応する画像データが存在しないとき、前記記憶部に記憶された前記第２ロボットの前記撮影部により取得された画像データの中から、前記第１ユーザにより指令された時刻および位置に対応する画像データを抽出することを特徴とする情報提供システム。
  2. 請求項１に記載の情報提供システムにおいて、
    前記データ抽出部は、前記第１ユーザにより指令された時刻および位置に対応する前記第１ユーザまたは前記第１ロボットの位置情報および時刻情報が前記記憶部に記憶されていないとき、前記記憶部に記憶された前記第２ロボットの前記撮影部により取得された画像データの中から、前記第１ユーザにより指令された時刻および位置に対応する画像データを抽出することを特徴とする情報提供システム。
  3. 請求項２に記載の情報提供システムにおいて、
    前記データ抽出部は、前記第１ユーザにより指令された時刻における前記記憶部に記憶された前記第１ユーザまたは前記第１ロボットの位置が、前記第１ユーザにより指令された位置から所定距離内であることを条件として、前記記憶部に記憶された前記第２ロボットの前記撮影部により取得された画像データの中から、前記第１ユーザにより指令された時刻および位置に対応する画像データを抽出することを特徴とする情報提供システム。
  4. 請求項１〜３のいずれか１項に記載の情報提供システムにおいて、
    前記ロボットは、歩行可能に構成されることを特徴とする情報提供システム。
  5. 画像データを取得する撮影部を有するとともにユーザとともに移動するロボットを介して情報を提供する情報提供方法であって、
    前記ユーザまたは前記ロボットの位置情報を時刻情報とともに取得し、
    前記撮影部により取得された画像データを、取得された位置情報および時刻情報に関連付けて記憶部に記憶し、
    前記記憶部に記憶された画像データの中から、前記ユーザにより指令された時刻および場所に対応する画像データを抽出し、
    抽出された画像データに基づき画像を表示することを含み、
    前記ロボットは、第１ユーザとともに移動する第１ロボットと、第２ユーザとともに移動する第２ロボットとを含み、
    前記画像データを記憶することは、前記第１ロボットの前記撮影部により取得された画像データと前記第２ロボットの前記撮影部により取得された画像データとを記憶することを含み、
    前記画像データを抽出することは、前記記憶部に記憶された前記第１ロボットの前記撮影部により取得された画像データの中に、前記第１ユーザにより指令された時刻および位置に対応する画像データが存在しないとき、前記記憶部に記憶された前記第２ロボットの前記撮影部により取得された画像データの中から、前記第１ユーザにより指令された時刻および位置に対応する画像データを抽出することを含むことを特徴とする情報提供方法。
  6. ユーザとともに移動するロボットにより取得された画像データと位置情報とを時刻情報とともに取得する情報取得部と、
    前記情報取得部により取得された画像データを、位置情報および時刻情報に関連付けて記憶する記憶部と、
    前記ユーザにより指令が入力される入力部と、
    前記記憶部に記憶された画像データの中から、前記入力部により指令された時刻および位置に対応する画像データを抽出するデータ抽出部と、
    前記データ抽出部で抽出された画像データに基づき画像を表示する表示部と、を備え、
    前記ロボットは、第１ユーザとともに移動する第１ロボットと、第２ユーザとともに移動する第２ロボットとを含み、
    前記記憶部は、前記第１ロボットにより取得された画像データと前記第２ロボットにより取得された画像データとを記憶し、
    前記データ抽出部は、前記記憶部に記憶された前記第１ロボットにより取得された画像データの中に、前記第１ユーザにより指令された時刻および位置に対応する画像データが存在しないとき、前記記憶部に記憶された前記第２ロボットにより取得された画像データの中から、前記第１ユーザにより指令された時刻および位置に対応する画像データを抽出することを特徴とする情報提供システム用管理装置。
JP2019544587A 2017-09-29 2018-09-14 情報提供システム、情報提供方法および情報提供システム用管理装置 Active JP6892928B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017189799 2017-09-29
JP2017189799 2017-09-29
PCT/JP2018/034163 WO2019065305A1 (ja) 2017-09-29 2018-09-14 情報提供システム、情報提供方法および情報提供システム用管理装置

Publications (2)

Publication Number Publication Date
JPWO2019065305A1 JPWO2019065305A1 (ja) 2020-11-26
JP6892928B2 true JP6892928B2 (ja) 2021-06-23

Family

ID=65902358

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019544587A Active JP6892928B2 (ja) 2017-09-29 2018-09-14 情報提供システム、情報提供方法および情報提供システム用管理装置

Country Status (4)

Country Link
US (1) US11792484B2 (ja)
JP (1) JP6892928B2 (ja)
CN (1) CN111133762B (ja)
WO (1) WO2019065305A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11227007B2 (en) * 2019-07-23 2022-01-18 Obayashi Corporation System, method, and computer-readable medium for managing image

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE524784T1 (de) * 2005-09-30 2011-09-15 Irobot Corp Begleitroboter für persönliche interaktion
JP5130421B2 (ja) * 2006-06-18 2013-01-30 雅英 田中 通信機能を有するデジタルカメラ
US8635192B2 (en) * 2008-02-28 2014-01-21 Blackberry Limited Method of automatically geotagging data
JP2010019641A (ja) * 2008-07-09 2010-01-28 Fujifilm Corp 情報提供装置、方法およびプログラムならびにアルバム作成装置、方法およびプログラム
US8406925B2 (en) * 2009-07-01 2013-03-26 Honda Motor Co., Ltd. Panoramic attention for humanoid robots
US8316046B2 (en) * 2010-04-07 2012-11-20 Apple Inc. Journaling on mobile devices
US9172938B2 (en) * 2012-04-27 2015-10-27 Panasonic Intellectual Property Management Co., Ltd. Content reproduction method, content reproduction system, and content imaging device
JP2014090386A (ja) * 2012-10-31 2014-05-15 Sony Corp 情報処理システム、情報処理装置、およびプログラム
WO2015017691A1 (en) * 2013-08-02 2015-02-05 Irobot Corporation Time-dependent navigation of telepresence robots
US9183303B1 (en) * 2015-01-30 2015-11-10 Dropbox, Inc. Personal content item searching system and method
JP2016200909A (ja) * 2015-04-08 2016-12-01 日本電信電話株式会社 アルバム作成支援装置、アルバム作成支援システム、および、アルバム作成支援方法
JP2017104532A (ja) * 2015-12-01 2017-06-15 株式会社タスカケル 交流支援システム
US10679058B2 (en) * 2016-01-06 2020-06-09 Orcam Technologies Ltd. Wearable apparatus and methods for processing images to identify contextual situations
CN106572344A (zh) * 2016-09-29 2017-04-19 宇龙计算机通信科技(深圳)有限公司 虚拟现实直播方法、系统以及云服务器
CN107145758A (zh) * 2017-05-31 2017-09-08 上海思依暄机器人科技股份有限公司 一种基于家用机器人的外出陪护服务方法和装置

Also Published As

Publication number Publication date
JPWO2019065305A1 (ja) 2020-11-26
WO2019065305A1 (ja) 2019-04-04
CN111133762A (zh) 2020-05-08
US20200234046A1 (en) 2020-07-23
US11792484B2 (en) 2023-10-17
CN111133762B (zh) 2021-08-10

Similar Documents

Publication Publication Date Title
JP4838499B2 (ja) ユーザ支援装置
KR101850028B1 (ko) 가상 여행 체험 장치 및 그 방법
US20060009702A1 (en) User support apparatus
WO2018121283A1 (zh) 服务提供方法及装置、移动服务设备及存储介质
WO2012081194A1 (ja) 医療支援装置、医療支援方法および医療支援システム
US11364441B2 (en) Method for operating an electronic display device wearable on the head and display system for displaying virtual content
WO2020012955A1 (ja) 情報処理装置、情報処理方法、およびプログラム
WO2017126433A1 (ja) 情報処理装置およびユーザガイド提示方法
JP7059934B2 (ja) 情報処理装置、情報処理方法、及びプログラム
JP7287257B2 (ja) 画像処理装置、表示システム、プログラムおよび画像処理方法
JP6822413B2 (ja) サーバ装置及び情報処理方法、並びにコンピュータ・プログラム
US20220343795A1 (en) Orientation assistance system
CN108028906A (zh) 信息处理系统和信息处理方法
KR20200100059A (ko) 정보 처리 장치, 정보 처리 방법, 및 프로그램
JP7375770B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP6892928B2 (ja) 情報提供システム、情報提供方法および情報提供システム用管理装置
JP2009238251A (ja) ユーザ支援装置
JP7040521B2 (ja) 情報処理装置、情報処理方法、及びプログラム
KR101842210B1 (ko) 시선 추적 기반 콘텐츠 제공 방법 및 장치
JP7023971B2 (ja) サービス提供システム、サービス提供方法およびサービス提供システム用管理装置
CN103480152A (zh) 一种可遥控的摇距临境移动系统
JP6992799B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP6719776B2 (ja) 仮想現実システム
JP6564484B1 (ja) 同室感コミュニケーションシステム
JP6559096B2 (ja) 情報出力システム及び情報出力方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200325

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210525

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210528

R150 Certificate of patent or registration of utility model

Ref document number: 6892928

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150