JP5177136B2 - 遠隔操作システム、サーバ、被遠隔操作装置、遠隔操作サービス提供方法 - Google Patents
遠隔操作システム、サーバ、被遠隔操作装置、遠隔操作サービス提供方法 Download PDFInfo
- Publication number
- JP5177136B2 JP5177136B2 JP2009514135A JP2009514135A JP5177136B2 JP 5177136 B2 JP5177136 B2 JP 5177136B2 JP 2009514135 A JP2009514135 A JP 2009514135A JP 2009514135 A JP2009514135 A JP 2009514135A JP 5177136 B2 JP5177136 B2 JP 5177136B2
- Authority
- JP
- Japan
- Prior art keywords
- task
- information
- terminal
- operated device
- operated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 24
- 238000011156 evaluation Methods 0.000 claims description 36
- 230000006854 communication Effects 0.000 claims description 25
- 238000004891 communication Methods 0.000 claims description 25
- 230000001133 acceleration Effects 0.000 claims description 5
- 238000012545 processing Methods 0.000 description 19
- 238000004851 dishwashing Methods 0.000 description 14
- 238000012790 confirmation Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 7
- 230000035876 healing Effects 0.000 description 4
- 238000004140 cleaning Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000001356 surgical procedure Methods 0.000 description 3
- 241000282412 Homo Species 0.000 description 2
- 230000007175 bidirectional communication Effects 0.000 description 2
- 238000007688 edging Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
- 239000003643 water by type Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
Landscapes
- Business, Economics & Management (AREA)
- Finance (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Economics (AREA)
- Development Economics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Selective Calling Equipment (AREA)
- Manipulator (AREA)
- Telephonic Communication Services (AREA)
Description
【0001】
本発明は、操作端末から被操作装置を遠隔操作するシステムに関し、特にネットワークを介して被操作装置を遠隔操作するシステムに関する。
【背景技術】
【0002】
ロボット研究の分野では家事などの面倒なタスクをロボットに行なわせることで人間の負担を軽減することが考えられている。タスクの例としては、ペットへのえさやり、ペットの散歩、掃除、食器洗い、力仕事、手術、癒し的仕草、自己充電などが考えられる。しかし、家事などの複雑なタスクをロボットが自律的に行なうためには認識技術や制御技術の更なる発達が必要であり、現時点では現実的とは言いがたい。このような認識技術や制御技術の不足は人間による操作で補うことができる。人間が操作することによりロボットは比較的複雑なタスクを行なうことが可能になる。
【0003】
これまでロボットの遠隔操作に対して様々な研究がされ、多数の技術が提唱されている(特許文献1〜5参照)。特許文献1には、マスタとなる操作ロボットから、スレーブとなる被操作ロボットを、インターネットを介して遠隔より操作するシステムが開示されている。特許文献2には、操作端末とロボットとの双方向通信により、ロボットが、ペットへの餌やり、植木の水やりをするシステムが開示されている。特許文献3には、遠隔操作部からロボットを、予め蓄積されたユーザ情報を参照して作成された操作情報に基づいて遠隔操作するシステムが開示されている。特許文献4には、双方向通信によりインタラクティブにロボットを制御するシステムが開示されている。特許文献5には、専門医がマスタ・マニピュレータを操作することでスレーブ・マニピュレータを遠隔から動作させ、スレーブ・マニピュレータによって患者を診断するシステムが開示されている。
【特許文献1】
特開2004−017186号公報
【特許文献2】
特開2003−006532号公報
特許文献3:特開2002−354551号公報
特許文献4:特開2002−101333号公報
特許文献5:特開2002−085353号公報
発明の開示
発明が解決しようとする課題
[0004]
しかし、遠隔操作でロボットに家事を行なわせるとき、その操作は、人間が自分自身で直接家事を行なうのと同等かあるいはそれ以上の負担になる可能性がある。それでは人間の負担を軽減するという目的を果たすことができない。
[0005]
それに対してロボットの遠隔操作を業者がビジネスとして請け負うということも考えられる。これによれば業者が利用者本人に代わってロボットを操作するので利用者の負担は軽減される。しかし遠隔操作を請け負う業者の採算性を考えると、ロボットを遠隔で操作してもらうために利用者が支払う料金が高額になったり、業者に依頼できるタスクのバリエーションが限られてしまったりする可能性がある。また、その結果として遠隔操作のサービスを利用する機会が限られてしまう可能性がある。
[0006]
家事のような比較的複雑で利用頻度の高いタスクをロボットに遂行させる場合、サービスのバリエーションやコストの問題は致命的であり、家政婦的なロボットを実現するためにはクリアしなければならない問題である。
[0007]
これらの理由から、これまで遠隔操作ロボットは家事のような利用頻度が高く負担軽減の効果が大きいタスクではメリットがなく、外出時にロボットを遠隔から操作して留守番程度の簡単なタスクを行なわせるものに限られ、日常的に利用できるような、装置利用者にとって利用しやすいシステムではなかった。
[0008]
本発明の目的は、装置利用者による利用しやすさを改善した遠隔操作システムを提供することである。
課題を解決するための手段
【0009】
上記目的を達成するために、本発明の遠隔操作システムは、遠隔操作によりロボットにタスクを実行させる遠隔操作ロボットシステムであって、
通信ネットワークに接続され、遠隔からの前記ネットワークを介した操作に従って動作し、タスクを実行する被操作装置と、
前記通信ネットワークに接続され、前記ネットワークを介して前記被操作装置を操作する操作端末と、
前記被操作装置の操作利用者による、タスクを実行してもらう要求に関する被操作側情報と、前記操作端末の端末操作者による、タスクを実行する要求に関する操作側情報とを保持し、前記被操作側情報と前記操作側情報とから、被操作装置とそれを操作する操作端末との組み合わせを定めて、それを前記被操作装置及び前記操作端末に通知するサーバとを有し、
前記被操作装置は、少なくともカメラ、マイク、加速度センサ、超音波センサ、赤外線センサ、RFIDタグセンサのいずれかの入力デバイスにより測定された装置状態を取得する装置状態取得部を有し、タスクの自律的な実行と遠隔操作による実行のいずれかで動作を実行するか否かを動的に判断し、遠隔操作による実行を行うと判断した場合には、前記サーバに被操作側情報を通知して、前記タスクを実行する操作端末の決定を依頼し、前記タスクを実行する操作端末に前記装置状態取得部で取得された装置状態の情報を送信するものであることを特徴とする。
発明の効果
[0010]
本発明によれば、被操作装置と、その被操作装置を遠隔から操作する操作端末とを通信ネットワーク上のサーバでマッチングすることができるので、広く一般から端末操作者を決定することにより、装置利用者による利用しやすさを改善することができる。
発明を実施するための最良の形態
[0011]
本発明を実施するための形態について図面を参照して詳細に説明する。
[0012]
(第1の実施形態)
図1は、第1の実施形態による遠隔操作ロボットシステムの構成を示すブロック図である。図1を参照すると、遠隔操作ロボットシステムは、複数の被操作装置11、複数の操作端末12、およびサーバ13を有している。被操作装置11はインターネットなどの通信ネットワーク(不図示)を介してサーバ13に接続している。同様に、操作端末12も通信ネットワークを介してサーバ13に接続している。
[0013]
被操作装置11は、通信ネットワーク経由で遠隔から操作することのできる装置であり、例えばロボットである。被操作装置11は、操作端末12による遠隔からの操作を受けてタスクを実行する。被操作装置11を遠隔操作する操作端末12はサーバ13上で決定される。タスクは人間(装置利用者)の代わりにロボットが実行する作業であり、例えば、ペットへのえさやり、ペットの散歩、掃除、食器洗い、力仕事、手術、癒し的仕草、自己充電などである。
【0014】
タスクを実行するために、被操作装置11は、まず被操作装置11が実行すべきタスクの情報(以下、被操作要求情報という)をサーバ13に通知する。例えば、装置利用者が被操作装置11に行なって欲しいタスクを入力すると、被操作装置11は、そのタスクに関する被操作要求情報をサーバ13に通知することにしてもよい。被操作要求情報には、遠隔操作してもらうことを希望するタスクを示す情報が含まれている。
【0015】
被操作装置11は、サーバ13上で、その被操作装置11を操作する操作端末12が決まると、その操作端末12からの操作を受けてタスクを実行する。サーバ13上で決定した被操作装置11とそれを操作する操作端末12との組み合わせは、サーバ13からマッチング情報として通知されるので、操作端末12はそれに従えばよい。
【0016】
操作端末12は、通信ネットワーク経由で遠隔から被操作装置11を操作する端末である。操作端末12は、被操作装置11を遠隔から操作してタスクを実行させる。操作端末12が操作する被操作装置11はサーバ13上で決定される。
【0017】
タスクを実行するために、操作端末12は、まず操作端末12から操作したいタスクの情報(以下、操作要求情報という)をサーバ13に通知する。例えば、端末操作者が操作したいタスクを入力すると、操作端末12は、そのタスクに関する操作要求情報をサーバ13に通知することにしてもよい。操作要求情報には、遠隔操作することを希望するタスクを示す情報が含まれている。
【0018】
操作端末12は、サーバ13上で、その操作端末12から操作する被操作装置11が決まると、端末操作者の指示入力に従ってその被操作装置11を操作してタスクを実行させる。サーバ13上で決定した被操作装置11とそれを操作する操作端末12との組み合わせは、サーバ13からマッチング情報として通知されるので、操作端末12はそれに従えばよい。
【0019】
サーバ13は、遠隔操作することを希望する端末操作者の操作端末12から操作要求情報を受信し、遠隔操作を受けることを希望する装置利用者の被操作装置11から被操作要求情報を受信し、操作要求情報と被操作要求情報とに基づき、操作端末12とその操作端末12から遠隔操作する被操作装置11との組み合わせを決定し、決定結果をマッチング情報として、その操作端末12と被操作装置11の双方に通知する。
【0020】
図2は、サーバ13の構成を示すブロック図である。図2を参照すると、サーバ13は、被操作側情報記録部21、操作側情報記録部22、およびマッチング部23を有している。
【0021】
被操作側情報記録部21は、被操作装置11から被操作要求情報を受信して保持する。
【0022】
操作側情報記録部22は、操作端末12から操作要求情報を受信して保持する。
【0023】
マッチング部23は、操作側情報記録部22の保持している操作要求情報と、被操作側情報記録部21の保持している被操作要求情報とに基づき、操作端末12とその操作端末12から遠隔操作する被操作装置11との組み合わせを決定する。そして、マッチング部23は、決定結果をマッチング情報として操作端末12と被操作装置11の双方に通知する。
【0024】
図3は、第1の実施形態による遠隔操作ロボットシステムの動作を説明するための模式図である。
【0025】
本実施形態では、被操作装置11と操作端末12の組み合わせをオークション形式で決定する。
【0026】
装置利用者が遠隔操作してもらうことを希望するタスクの情報が被操作要求情報として被操作装置11からサーバ13に送られる。その被操作要求情報に示されたタスクの情報は、図3に示したように、サーバ13のタスク情報プール31に登録され、サーバ13上で公開される。端末操作者は操作端末12でサーバ13にアクセスして公開されているタスク情報プール31を閲覧することができる。さらに端末操作者は操作したいタスクがあれば、そのタスクを指定して入札することができる。端末操作者があるタスクを指定して入札すると、操作端末12からサーバ13に、そのタスクへの入札を示す操作要求情報が通知される。
【0027】
サーバ13は、被操作要求情報としてタスク情報プール31に登録されているタスク毎に入札された操作要求情報を記録しておき、被操作要求情報と操作要求情報とに基づいて、タスク毎に被操作装置11と操作端末12の組み合わせを決定する。
【0028】
図4は、第1の実施形態による遠隔操作ロボットシステムの動作を示すフローチャートである。図4を参照して遠隔操作ロボットシステムの具体的な動作について説明する。
【0029】
まず、被操作装置11は、実行すべきタスクを示す被操作要求情報をサーバ13に通知する(タスク登録ステップ101)。サーバ13は、被操作装置11から通知された被操作要求情報をタスク情報プール31に登録して公開する(ステップ201)。タスクの例としては、自己充電、ペットのえさやり、ペットの散歩、掃除、食器洗い、力仕事、手術、癒し的仕草、などが考えられる。
【0030】
例えば、自己充電タスクは、被操作装置11のバッテリ残量が一定割合以下に減少した場合に発動し、不図示のバッテリ充電ステーションまで移動してステーションにドッキングするタスクである。
【0031】
自己充電タスクは比較的単純なタスクなので、完全に遠隔操作に頼るのでなく、自律的な実行と遠隔操作による実行を併用することにしてもよい。例えば、基本的には被操作装置11自身が自律的に実行することにし、想定外の障害物などにより自己のアルゴリズムによる自律的な実行が不可能となったときに遠隔操作を依頼すればよい。
【0032】
図5は、自律的な実行と遠隔操作による実行を併用するときの被操作装置の動作の一例を示すフローチャートである。図5を参照すると、被操作装置11は、まずタスクを自律的に実行する(ステップ401)。続いて被操作装置11はタスクを遠隔操作で実行する必要があるか否か判定する(ステップ402)。遠隔操作の必要がなければ、被操作装置11はステップ401に戻って自律的な実行を継続する。
【0033】
遠隔操作が必要であれば、被操作装置11は操作端末マッチング処理を行う(ステップ403)。操作端末マッチング処理では、被操作装置11は被操作要求情報をサーバ13に送って、タスクを遠隔操作する操作端末12の決定をサーバ13に依頼する。自身のタスクを実行してくれる操作端末12の情報を含むマッチング情報をサーバ13から受信すると、被操作装置11は、その操作端末12からの操作を受けてタスクを実行する(ステップ404)。
【0034】
なお、被操作装置11は、通信ネットワーク上の他の被操作装置11におけるタスクの自律的な実行の可否判定の結果を自身の判定に利用してもよい。例えば、他の被操作装置11が自己充電タスクの自律的な実行が不可と判定していれば、同じ環境に配備された被操作装置11は自己充電タスクの自立的な実行を不可と判定することにしてもよい。
【0035】
他の例として、食器洗いタスクは、キッチンにたまった食器をスポンジや水圧を利用して洗うタスクでもよく、またキッチンにたまった食器を食器洗い機へ入れて食器洗い機を始動させるという2次的なタスクであってもよい。この場合、腕や指のようなアクチュエータを備えた被操作装置11が用いられる。
【0036】
また、他の例として、癒し的仕草のタスクは、ペット型ロボットがかわいい振る舞いをしたり、装置利用者の話し相手になったりすることが考えられる。その中には音声認識、文章解析、常識データベースなど高度な技術を要求するものもあり、これらの技術の現状を考慮すれば、遠隔で人間(端末操作者)が操作することでこれらの技術をカバーする態様が現実的な場合がある。
【0037】
これには、目、口、手足などを模して仕草を表現することのできる構成を備えた遠隔操作装置11が用いられる。例えば、表情や仕草の画像を表示するLEDモジュールやディスプレイ、仕草を表現する機構およびそれを駆動するモータなどの構成を備えればよい。
【0038】
また、被操作装置11が実行すべきタスクは、例えば装置利用者が被操作装置11に入力する。その場合、被操作装置11は入力された情報を被操作要求情報としてサーバ13に通知すればよい。
【0039】
装置利用者が被操作装置11に入力する情報は、一例として、課題、匿名化レベル、制約条件、および報酬の各項目を含んでいる。課題は、タスクの内容を示す情報である。匿名化レベルは、被操作装置11の装置利用者や所有者のプライバシーを守るための情報であり、被操作装置11によって測定される情報をどれだけ匿名化するかというレベルを示す。制約条件は、遠隔操作による被操作装置11の動作を制約する情報である。例えば移動範囲を制約することができる。制約によって、装置利用者の安全、利便性、プライバシー等を守ることができる。報酬は、被操作装置11を遠隔操作してくれた端末操作者に対して支払う報酬額の情報である。
【0040】
食器洗いタスクについて、装置利用者が、例えば課題として「食器洗い」、匿名化レベルとして「エッジ化画像」、制約条件として「移動半径1m」、報酬として「100円」を入力すると、これらの情報を含む被操作要求情報がサーバ13に通知され、サーバ13のタスク情報プール31に登録される。匿名化レベルの「エッジ化画像」は、被操作装置11で撮影される画像を生のままではなく、画像処理によってエッジのみの画像に変換して操作端末12に転送することを意味する。
【0041】
タスク情報プール31に登録された被操作要求情報はサーバ13上で公開される。このときサーバ13は装置利用者が入力した情報に加えて、過去の利用に対する評価の情報を追加して公開してもよい。追加する情報は、例えば、装置利用者評価、評価者コメントを含む。上述の食器洗いタスクの例において、装置利用者評価として「84/92」というような、過去の利用回数に対するポジティブな評価が得られた回数の情報を追加してもよい。また、評価者コメントとして「部屋がきれいで移動しやすいです」や「正当な報酬をいただきました」などの過去の端末操作者によるコメントを追加してもよい。評価軸として食器洗いタスクだけでなく他の種類のタスクを含めてもよい。例えば、その装置利用者が過去に依頼した全てのタスクを評価軸とした評価の情報を被操作要求情報に追加して公開してもよい。また、過去にタスクの遠隔操作を依頼した回数でなく、評価を受けた回数を基準にしてもよい。
【0042】
また、装置利用者がタスクの実行を1回ずつ入力するのではなく、複数回分の実行をまとめて入力できてもよい。例えば、食器洗いのようなタスクの1ヶ月間の継続的な実行を依頼する被操作要求情報をサーバ13に登録できるようにしてもよい。また、本格的な実行の他にお試し期間を付けて登録できるようにしてもよい。
【0043】
図4に戻って、次に、端末操作者が操作端末12からサーバ13上に公開されたタスク情報プール31を閲覧し、その中から自分の操作したいタスクを選んで入札する。そうすると、操作端末12はサーバ13へ操作要求情報を通知する(ステップ301)。
【0044】
サーバ13は、端末操作者の入札により操作端末12から通知された操作要求情報を、タスク情報プール31に登録されているタスク毎にまとめて格納する(操作端末入札ステップ202)。
【0045】
続いてサーバ13は、ある被操作装置11を遠隔操作するタスクに入札した操作端末12の中から、そのタスクを実行する操作端末12を決定し(ステップ203)、決定結果のマッチング情報を被操作装置11および操作端末12に通知する。
【0046】
例えばタスク情報プール31に登録されているタスクには入札できる期間が設定されていれば、サーバ13は、その期間が経過した後、そのタスクを実行する操作端末12を決定すればよい。
【0047】
ある被操作装置11のタスクを実行する操作端末12(端末操作者)を決定する方法としては、一般的なオークションと同様に価格をもとに決定する方法がある。端末操作者が操作端末12からタスクの実行の代金として希望する報酬の金額を入力することにし、操作端末12からサーバ13に通知する操作要求情報に含めて通知することにすればよい。サーバ13は、例えば最も安い報酬を提示した端末操作者を落札者とすればよい。
【0048】
また、他の決定方法として、最も早く入札した端末操作者を落札者としてもよい。また、最もスキルの高い端末操作者、最も経験のある端末操作者、最も評価の高い端末操作者、最も信頼度の高い端末操作者、あるいは予め契約している端末操作者を落札者としてもよい。その場合、サーバ13は、過去に遠隔操作を行なってもらった装置利用者による各端末操作者に対する評価の情報を蓄積しておき、その情報から落札者を決定すればよい。また、上述した様々な決定方法を組み合わせて用いることにしてもよい。
【0049】
また、サーバ13は、被操作装置11を操作する操作端末12を確定する前に、タスクを割り当てようとする操作端末12および端末操作者や請負条件の情報を被操作装置11に通知して装置利用者に確認を求めてもよい。金銭の流通が発生する可能性があることを考えると最終的な確定の前に装置利用者に確認を求めるのが好ましい。ただし、装置利用者の利便性を考慮すると被操作装置11に一定範囲内での決定権を与えてもよい。サーバ13から確定の前に操作端末12や端末操作者や請負条件の情報を通知されると、被操作装置11は請負条件等が一定範囲内であれば、装置利用者に確認を求めることなく、サーバ13に確定を許可する応答をする。
【0050】
被操作装置11と装置利用者との間の確認の方法は、画面表示とボタン操作の組み合わせで実現してもよく、またタッチパネル上でのUI(User Interface)対話や、音声再生あるいは音声合成と音声認識の組み合わせによる音声対話で実現してもよい。
【0051】
図4に戻って、被操作装置11は、タスクを実行してもらう操作端末12の決定を待ち受けている状態(操作端末決定待ちステップ102)で、サーバ13からのマッチング情報を受信すると、それを装置利用者に提示する。また、操作端末12は、サーバ13による判断で自身がタスクの落札者となったとき、サーバ13からマッチング情報を受信する(ステップ302)。
【0052】
被操作装置11とそれを遠隔操作する操作端末12の組み合わせが決定されると、端末操作者が操作端末12から被操作装置11を操作してタスクを実行する(ステップ303、103)。
【0053】
上述した遠隔操作によって生じる報酬は電子決済によって流通させてもよい。また、電子決済によって報酬を流通させる時期は、サーバ13が被操作装置11と操作端末12の組み合わせを決定したとき、あるいはタスクの実行が完了したときに行なうことにしてもよい。また、タスクの実行毎に報酬を流通させるのでなく、複数回分をまとめて、一定期間に生じた報酬を一時に、あるいは報酬の積算額が一定金額に達したときに、報酬を流通させてもよい。
【0054】
図4には示していないが、最後に、装置利用者が操作端末12または端末操作者による遠隔操作の遂行を評価し、評価結果を被操作装置11に入力することにしてもよい。その評価結果は被操作装置11からサーバ13に通知される。例えば、無事にタスクを遂行できたか否か評価したり、タスク遂行の程度を5段階評価のように定量的に評価したりする。
【0055】
また、評価結果に応じて端末操作者に支払う報酬を可変にしてもよい。例えば、成功したときには報酬を全額支払い、失敗したときには報酬を支払わないまたは一部のみ支払うというようにすることができる。
【0056】
また、評価項目として、正確性、所要時間、値段設定、態度などを個別に評価することにしてもよい。これにより操作者のスキル、経験、信頼度等の正確な情報が得られる。
【0057】
また、装置利用者は、被操作装置11から端末操作者に対する評価コメントを入力することにしてもよい。その評価コメントは被操作装置11からサーバ13に通知される。コメントは例えば「すぐに対応していただきました」「食器洗い中、ワイングラスを割りました」のような定性的評価である。
【0058】
また逆に、端末操作者が装置利用者や被操作装置11に対する評価を操作端末12に入力することにしてもよい。被操作装置11の周辺環境による操作のしやすさ、報酬の金額設定、依頼の態度等を評価する。例えば、タスクの実行がしやすかったか、報酬が正当な金額設定であったかなどを評価すればよい。
【0059】
また、端末操作者は、操作端末12から装置利用者に対する評価コメントを入力することにしてもよい。その評価コメントは操作端末12からサーバ13に通知される。
コメントは例えば、「部屋がきれいで移動しやすいです」「正当な報酬をいただきました」のようなものである。サーバ13は、この評価結果や評価コメントを、それ以降に被操作装置11から受けた被操作要求情報に付加する情報として利用することができる。それにより、装置利用者の過去の利用における正確な情報が公開され、公正なシステム運営が可能となる。
【0060】
図6は、被操作装置11および操作端末12の構成を示すブロック図である。図6を参照すると、被操作装置11は、装置状態取得部41、装置状態匿名化処理部42、遠隔操作制約処理部43、装置駆動部44を有している。
【0061】
装置状態取得部41は、装置状態を測定する不図示の入力デバイスを備え、入力デバイスで測定された装置状態を取得する。入力デバイスは、例えば、カメラ、マイク、加速度センサ、超音波センサ、赤外線センサ、RFIDタグセンサなどである。
【0062】
装置状態匿名化処理部42は、装置状態取得部41で取得された装置状態の情報を、装置利用者が入力した匿名化レベルに応じて匿名化処理してから操作端末12に送信する。匿名化処理は、装置利用者のプライバシーを守るために行なう処理であり、例えば画像や音声の加工により装置状態情報から遠隔操作に不要な情報を除去して必要な情報を残す処理である。匿名化レベルには、被操作装置要求情報として入力された情報を用いることができる。この匿名化処理により装置利用者のプライバシーに関わる情報が操作端末12にて端末操作者に過剰に提示されるのが防止される。匿名化処理の一例であるエッジ化は、装置状態取得部41のカメラで撮影された画像をエッジのみの画像に変換する処理である。
【0063】
遠隔操作制約処理部43は、操作端末12から操作指示情報を受信し、その操作指示情報に対して、装置利用者が入力した制約条件に応じた制約を加える。制約は、装置利用者の安全、利便性、プライバシー等を守るための処理であり、遠隔操作における被操作装置11の動作に制約を加える。例えば、被操作装置11の移動範囲や移動量を制約したり、被操作装置11の発生する音声の音量を制約したり、被操作装置11の発する光の明るさを制約したりなどがある。また、被操作装置11の消費電力が一定以下となるように動作を制約してもよい。
【0064】
装置駆動部44は、タスクを実行するための不図示のタスク実行デバイスを備え、遠隔操作制約処理部43で制約された操作指示情報に従って駆動デバイス(タスク実行デバイス)を駆動する。タスク実行デバイスは、例えば、アクチュエータおよびそれを駆動するモータ、スピーカ、モニタ画面、発光装置などである。
【0065】
一方、操作端末12は、装置状態提示部45および操作制御部46を有している。
【0066】
装置状態提示部45は、不図示の出力デバイスを備え、被操作装置11から受信した装置状態の情報を出力デバイスに出力することで端末操作者に提示する。例えば、装置状態提示部45は被操作装置11からの画像をモニタ画面に表示する。また例えば、装置状態提示部45は被操作装置11からの音声をスピーカから出力する。
【0067】
操作制御部46は、被操作装置11を操作するための不図示の入力デバイスを備えており、端末操作者により入力デバイスに入力された操作指示の情報を被操作装置11に送信する。入力デバイスは、例えば、ゲームパッドやジョイスティック等のコントローラ、マウス、キーボード、タッチパネル、加速度センサ、RFIDタグ、マイク、カメラ等である。
【0068】
端末操作者は、操作端末12の装置状態提示部45の備える出力デバイスに出力される、被操作装置11の装置状態情報を基に、操作制御部46の備える入力デバイスから操作指示を入力する。
【0069】
このとき、被操作装置11では装置状態取得部41で取得された装置状態が装置状態匿名化処理部42で匿名化処理されるので、装置利用者のプライバシーに関わる情報が過剰に端末操作者に提示されるのを防止できる。画像の加工による匿名化処理の例として、エッジ化、抽象化、色加工、特定部分の抽象化、等が考えられる。抽象化は、例えば、低画素化、モザイク化などである。特定部分は、例えば、顔、遠距離、特定範囲などである。
【0070】
また、このとき、操作端末12からの操作指示の情報に対して遠隔操作制約処理部43で制約が加えられるので、装置利用者の安全や利便性やプライバシー等を確保することができる。
【0071】
操作指示による移動に制約を加える処理の例として、移動を許可しない、カメラ向きの変更のみに許可する、その場での回転のみ許可する、移動半径1m以内での移動のみ許可する等がある。
【0072】
以上説明したように、本実施形態によれば、被操作装置と、その被操作装置を遠隔から操作する操作端末とを通信ネットワーク上のサーバでマッチングし、そのマッチングに従って操作端末から被操作装置を遠隔操作してタスクを実行するので、広く一般から端末操作者を決定することにより、装置利用者による利用しやすさを改善することができる。
【0073】
例えば、広く一般の端末操作者からの選択が可能となることにより、競争原理が働き、装置利用者が支払う報酬の削減が見込まれる。特に、SOHOやネットゲーム、バーチャル生活の人口増加という社会環境を下地として、学生や定職を持たない人、発展途上国の人など、低賃金でも依頼を引き受けられる端末操作者が多数参加するようになれば、その効果は顕著になると考えられる。
【0074】
また、広く一般の端末操作者からの選択が可能となることにより、遠隔操作サービスで実行できるタスクのバリエーションが増えることが見込まれる。一般にブログやソーシャルネットワーキングシステムなどユーザ参加型のシステムにおいては多様性が自然発生するが、本実施形態のシステムもユーザ参加型のシステムとなるので、タスクの多様性が自然発生すると考えられる。
【0075】
また、広く一般の端末操作者からの選択が可能となることにより、装置利用者によるサービスの利用機会の拡大が見込まれる。遠隔操作を事業者が行う場合、事業者における端末操作者の人数不足や事業者の都合によるサービス時間帯の制限などにより、装置利用者の利用機会が制限されるが、本実施形態では、広く一般の端末操作者から端末操作者を選択するので、需給の原理に従って端末操作者の絶対数が保たれ、装置利用者によるサービスの利用機会が拡大する可能性がある。
【0076】
(第2の実施形態)
第1の実施形態では、サーバは、まず装置利用者の実行してもらいたいタスクを被操作装置から受け付けて公開し、公開したタスクを実行したい端末操作者からの入札を受け付け、被操作装置と操作端末の組み合わせを決定した。
【0077】
これに対して、第2の実施形態では、サーバは、まず端末操作者に関するタスク実行の経験や過去の評価等の操作端末情報を登録しておく。この操作端末情報は、装置利用者が、端末操作者にタスクを依頼するときの判断材料となる。次に、サーバは、被操作装置から装置利用者のタスクを実行してもらうための希望条件を示す被操作条件情報を受け付ける。そして、サーバは、登録しておいた操作端末情報を検索して希望条件を満たす操作端末を抽出して装置利用者に通知する。その後、サーバは、装置利用者による選択または確認を経て被操作装置と操作端末の組み合わせを決定する。
【0078】
第2の実施形態による遠隔操作ロボットシステムの構成は図1に示した第1の実施形態のものと同様である。また、第2の実施形態によるサーバの構成は図2に示した第1の実施形態のものと同様である。
【0079】
ただし、第2の実施形態によるサーバ13において、操作側情報記録部22は、操作端末12の端末操作者に関する情報を操作端末情報として保持し、被操作側情報記録部21は、被操作装置11からの被操作条件情報を受け付けて保持する。マッチング部23は、操作側情報記録部22の保持している操作端末情報と、被操作側情報記録部21の保持している被操作条件情報とに基づき、操作端末12とその操作端末12から遠隔操作する被操作装置11との組み合わせを決定する。その際、マッチング部23は、被操作条件情報に含まれている希望条件を満たす操作端末12を抽出し、装置利用者による選択あるいは確認を経て、操作端末12と被操作装置11の組み合わせを決定する。
【0080】
図7は、第2の実施形態による遠隔操作ロボットシステムの動作を説明するための模式図である。図8は、第2の実施形態による遠隔操作ロボットシステムの動作を示すフローチャートである。
【0081】
図8を参照すると、まず例えば各操作端末12からの通知(ステップ501)により、サーバ13は、操作端末12の端末操作者に関する操作端末情報を、図7に示したように操作端末情報プール51に登録する(操作端末情報登録ステップ601)。
【0082】
その後、被操作装置11は、装置利用者の希望に基づく被操作条件情報をサーバ13に通知して、自身のタスクを実行してもらう端末装置12の検索をサーバ13に要求する(操作端末情報検索ステップ701)。サーバ13は、被操作装置11から通知された被操作条件情報に含まれている希望条件を満たす操作端末12を操作端末情報プール51から見つけて被操作装置11に通知する(操作者情報検索ステップ602)。
【0083】
装置利用者が被操作装置11から操作端末を選択あるいは確認すると、被操作装置11からサーバ13に、選択あるいは確認により決定された操作端末がサーバ13に通知される(操作端末決定ステップ702)。サーバ13は、被操作装置11からの通知を受けると、操作端末12と被操作装置11の組み合わせを確定して操作端末情報を更新すると共に、その操作端末12に遠隔操作すべき被操作装置11を通知する(操作者情報更新ステップ603)。操作端末12は、その通知を受けてタスク実行の請負を認識する(ステップ502)。
【0084】
被操作装置11とそれを遠隔操作する操作端末12の組み合わせが決定されると、端末操作者が操作端末12から被操作装置11を操作してタスクを実行する(ステップ503、703)。また、サーバ13は、操作端末12が被操作装置11を遠隔操作してタスクを実行した後、装置利用者による端末操作者に対する評価の情報を被操作装置11から受けて、操作端末情報プール51の評価に関する情報を更新する。
【0085】
本実施形態において操作端末12から被操作装置11を遠隔操作してタスクを実行する構成は図6に示した第1の実施形態と同様である。
【0086】
操作端末情報は、一例として経験タスクおよび評価者コメントの情報を含んでいる。経験タスクの情報には、過去に実行したタスクの種類と、そのタスクを実行した回数および良い評価を受けた回数を含めてもよい。例えば、ある操作端末情報に、タスクの種類とそのタスクを過去に実行した回数に対する評価を受けた回数として「自己充電(評価:120/123)」、「ペットのえさやり(評価:12/15)」、「食器洗い(評価:28/40)」のような情報が含まれているとする。この例では、端末操作者は、過去に自己充電タスクを123回実行したことがあり、そのうち120回で良い評価を得たことが示されている。また、端末操作者はペットのえさやりを15回実行したことがあり、そのうち12回で良い評価を得たことが示されている。また、端末操作者は食器洗いを40回実行したことがあり、そのうち28回で良い評価を得たことが示されている。
【0087】
またその操作端末情報に、タスクを依頼した装置利用者からのコメントも含まれていてもよい。例えば、操作端末情報に、装置利用者による端末操作者に対する評価者(依頼者)コメントとして「すぐに対応していただきました」や「食器洗い中、ワイングラスを割りました」のようなコメントが含まれているとする。装置利用者は、このコメントを基に操作端末12や端末操作者を選択できる。
【0088】
(第3の実施形態)
第3の実施形態では、サーバは、被操作装置から、装置利用者の実行してもらいたいタスクを被操作要求情報として被操作装置から受け付けてタスク情報プールに保持し、また端末操作者に関するタスク実行の経験や過去の評価等の操作端末情報を操作端末情報プールに保持する。そして、サーバは、タスク情報プールと操作端末情報プールを基にし、装置利用者による選択または確認を経て、被操作装置と操作端末の組み合わせを決定する。
【0089】
第3の実施形態による遠隔操作ロボットシステムの構成は図1に示した第1の実施形態のものと同様である。また、第2の実施形態によるサーバの構成は図2に示した第1の実施形態のものと同様である。
【0090】
ただし、第3の実施形態によるサーバ13において、被操作側情報記録部21は、被操作装置11から被操作要求情報を受け付けて保持し、操作側情報記録部22は、操作端末12の端末操作者に関する情報を操作端末情報として保持する。マッチング部23は、操作側情報記録部22の保持している操作端末情報と、被操作側情報記録部21の保持している被操作要求情報とに基づき、操作端末12とその操作端末12から遠隔操作する被操作装置11との組み合わせを決定する。
【0091】
図9は、第3の実施形態による遠隔操作ロボットシステムの動作を説明するための模式図である。図10は、第3の実施形態による遠隔操作ロボットシステムの動作を示すフローチャートである。
【0092】
図10を参照すると、まず被操作装置11は、実行すべきタスクを示す被操作要求情報をサーバ13に通知する(タスク登録ステップ801)。サーバ13は、被操作装置11から通知された被操作要求情報を、図9に示すようにタスク情報プール61に登録して公開する(ステップ1001)。また、例えば各操作端末12からの通知(ステップ901)により、サーバ13は、操作端末12の端末操作者に関する操作端末情報を、図9に示したように操作端末情報プール62に登録する(操作端末情報登録ステップ1002)。
【0093】
続いて、サーバ13は、タスク情報プール61と操作端末情報プール62を参照して、被操作要求情報と操作端末情報とが互いに条件を満たすように、操作端末12とその操作端末12から遠隔操作する被操作装置11との組み合わせを決定する(操作端末候補決定ステップ1003)。サーバ13は、操作端末12と被操作装置11の組み合わせを決定すると、その組み合わせを示すマッチング情報を被操作装置11および操作端末12の双方に通知する。
【0094】
被操作装置11は、タスクを実行してもらう操作端末12の決定を待ち受けている状態(操作端末決定待ちステップ802)で、サーバ13からのマッチング情報を受信すると、それを装置利用者に提示する。また、操作端末12は、サーバ13からマッチング情報を受信すると、タスク実行の請負を認識する(ステップ902)。
【0095】
被操作装置11とそれを遠隔操作する操作端末12の組み合わせが決定されると、端末操作者が操作端末12から被操作装置11を操作してタスクを実行する(ステップ903、803)。また、サーバ13は、操作端末12が被操作装置11を遠隔操作してタスクを実行した後、装置利用者による端末操作者に対する評価の情報を被操作装置11から受けて、操作端末情報プール62の評価に関する情報を更新する。
【0096】
本実施形態において操作端末12から被操作装置11を遠隔操作してタスクを実行する構成は図6に示した第1の実施形態と同様である。
【0097】
本実施形態のサーバ13によるマッッチングは、例えば、端末操作者に関する操作端末情報に含まれている提示報酬額に基づいて行なうことにしてもよい。また、操作端末情報プール62への操作端末情報の登録時期、端末操作者のスキル、経験、あるいは評価に基づいてマッチングを行なってもよい。また、ある被操作装置11のタスクに対して予め契約している端末操作者を割り当てるようにマッチングを行なってもよい。
【0098】
また、装置利用者による被操作要求情報に含まれている提示報酬額に基づいてマッチングを行なってもよい。また、タスク情報プール61への被操作要求情報の登録時期、タスクの難易度、過去の実行された実績、評価、あるいは信頼度に基づいてマッチングを行なってもよい。また、ある被操作装置11のタスクに対して予め契約している操作端末12を割り当てるようにマッチングを行なってもよい。
【0099】
また、上述した各項目の一部あるいは全てを組み合わせてマッチングを行なってもよい。
【0100】
図11は、第3の実施形態による遠隔操作ロボットシステムの他の動作を示すフローチャートである。本実施形態の遠隔操作ロボットシステムにおいて、サーバ13は、装置利用者による選択または確認を経て、被操作装置11と操作端末12の組み合わせを決定する例が図11に示されている。
【0101】
図11を参照すると、サーバ13は、ステップ1001およびステップ1002の後、被操作要求情報と操作端末情報とが互いに条件を満たすように、操作端末12とその操作端末12から遠隔操作する被操作装置11との組み合わせの候補を決定し、マッチング候補情報として被操作装置11に通知する(操作端末候補決定ステップ1004)。このマッチング候補情報には、被操作装置11を遠隔操作する操作端末12の候補を複数含んでいてもよい。
【0102】
被操作装置11は、タスクを実行してもらう操作端末12の決定を待ち受けている状態(操作端末決定待ちステップ804)で、サーバ13からのマッチング候補情報を受信すると、それを装置利用者に提示する。そして、被操作装置11は、装置利用者による選択または確認に従って、被操作装置11と操作端末12の組み合わせを確定した旨をサーバ13に通知する(ステップ805)。
【0103】
サーバ13は、被操作装置11から、組み合わせを確定した旨の通知を受けると、その通知に従って、操作端末情報プール62の操作端末情報を更新すると共に、確定した組み合わせをマッチング情報として操作端末12に通知する(操作端末情報更新ステップ1005)。操作端末12は、サーバ13からマッチング情報を受信すると、タスク実行の請負を認識する(ステップ902)。
【0104】
被操作装置11とそれを遠隔操作する操作端末12の組み合わせが決定されると、端末操作者が操作端末12から被操作装置11を操作してタスクを実行する(ステップ903、806)。
【0105】
本発明の他の実施形態に係る遠隔操作システムは、遠隔操作によりタスクを実行する遠隔操作システムであって、
通信ネットワークに接続され、遠隔からの前記通信ネットワークを介した操作に従って動作し、タスクを実行する被操作装置と、
前記通信ネットワークに接続され、前記通信ネットワークを介して前記被操作装置を操作する操作端末と、
前記被操作装置の装置利用者による、タスクを実行してもらう要求に関する被操作側情報と、前記操作端末の端末操作者による、タスクを実行する要求に関する操作側情報を保持し、前記被操作側情報と前記操作側情報とから、被操作装置とそれを操作する操作端末との組み合わせを定めて、該被操作装置および該操作端末に通知するサーバと、を有する構成としてもよい。
【0106】
前記被操作装置は、前記装置利用者が実行して欲しいタスクを示す前記被操作側情報を前記サーバに通知し、
前記サーバは、前記被操作装置から通知された前記被操作側情報をタスク情報プールに登録し、被操作装置とそれを操作する操作端末との組み合わせを定めるとき、前記タスク情報プールに登録されている前記被操作側情報を利用する構成としてもよい。
【0107】
前記サーバは、前記操作端末による過去のタスクの実行に関する前記操作側情報を、操作端末情報プールに登録しており、被操作装置とそれを操作する操作端末との組み合わせを定めるとき、前記操作端末情報プールに登録されている前記操作側情報を利用する構成としてもよい。
【0108】
前記操作側情報には、前記操作端末の端末操作者が過去にタスクを実行した経験に関する情報が含まれている構成としてもよい。
【0109】
前記操作側情報には、前記操作端末の端末操作者が過去にタスクを実行したときに得た評価の情報が含まれている構成としてもよい。
【0110】
前記サーバは、被操作装置とそれを操作する操作端末との組み合わせの候補を抽出して前記被操作装置に通知し、該被操作装置からの応答に従って、被操作装置とそれを操作する操作端末との組み合わせを確定する構成としてもよい。
【0111】
前記被操作装置は、タスクを遠隔から実行してもらうか否かを判断し、遠隔から実行してもらうと判断したときのみ、前記サーバに被操作側情報を通知して、該タスクを実行する操作端末の決定を依頼する構成としてもよい。
【0112】
前記被操作装置は、予め定められたタスクを、遠隔から実行してもらうか否かの判断対象とする構成としてもよい。
【0113】
前記被操作装置は、前記タスクの自律的な実行が不可能なとき、遠隔から実行してもらうことを決定する構成としてもよい。
【0114】
前記被操作装置は、他の被操作装置における、タスクを遠隔から実行してもらうか否かの判断結果を利用して、自身のタスクを遠隔から実行してもらうか否かを判断する構成としてもよい。
【0115】
前記被操作装置は、前記操作端末から遠隔操作を受けるとき、取得した装置状態情報を匿名化してから前記操作端末に送信する構成としてもよい。
【0116】
前記被操作装置は、前記操作端末から遠隔操作を受けるとき、前記操作端末から受信した操作指示情報に対して制約を加えてからタスクの実行に用いる構成としてもよい。
【0117】
本発明の他の実施形態に係るサーバは、操作端末からの通信ネットワークを介した遠隔操作により被操作装置にタスクを実行させる遠隔操作サービスを提供するサーバであって、
遠隔からの前記通信ネットワークを介した操作に従って動作してタスクを実行することのできる被操作装置の装置利用者による、タスクを実行してもらう要求に関する被操作側情報を保持する被操作側情報記録部と、
前記通信ネットワークを介して前記被操作装置を操作することのできる操作端末の端末操作者による、タスクを実行する要求に関する操作側情報を保持する操作側情報記録部と、
前記被操作側情報記録部に保持されている前記被操作側情報と、前記操作側情報記録部に保持されている前記操作側情報とから、被操作装置とそれを操作する操作端末との組み合わせを定めて、前記通信ネットワークを介して該被操作装置および該操作端末に通知するマッチング部と、を有する構成としてもよい。
【0118】
本発明の他の実施形態に係る被遠隔操作装置は、マッチングにより決定された操作端末から通信ネットワークを介した遠隔操作によってタスクを実行する被遠隔操作装置であって、
自装置に関する装置状態情報を取得する装置状態取得部と、
前記装置状態取得部で取得された装置状態情報を匿名化してから前記操作端末に送信する装置情報匿名化処理部と、
前記操作端末から受信した操作指示情報に対して制約を加える遠隔操作制約処理部と、 前記遠隔操作制約処理部によって制約が加えられた前記操作指示情報に従って駆動デバイスを駆動する装置駆動部と、を有する構成としてもよい。
【0119】
本発明の他の実施形態に係る遠隔操作サービス提供方法は、操作端末からの通信ネットワークを介した遠隔操作により被操作装置にタスクを実行させるための遠隔操作サービス提供方法であって、
サーバが、遠隔からの前記通信ネットワークを介した操作に従って動作してタスクを実行することのできる被操作装置の装置利用者による、タスクを実行してもらう要求に関する被操作側情報を保持し、
前記サーバが、前記通信ネットワークを介して前記被操作装置を操作することのできる操作端末の端末操作者による、タスクを実行する要求に関する操作側情報を保持し、
前記サーバが、前記被操作側情報と前記操作側情報とから、被操作装置とそれを操作する操作端末との組み合わせを定めて、前記通信ネットワークを介して該被操作装置および該操作端末に通知する構成としてもよい。
【0120】
以上、実施形態(及び実施例)を参照して本願発明を説明したが、本願発明は上記実施形態(及び実施例)に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
【0121】
この出願は2007年5月9日に出願された日本出願特願2007−124400を基礎とする優先権を主張し、その開示の全てをここに取り込む。
【図面の簡単な説明】
【0122】
【図1】第1の実施形態による遠隔操作ロボットシステムの構成を示すブロック図である。
【図2】サーバの構成を示すブロック図である。
【図3】第1の実施形態による遠隔操作ロボットシステムの動作を説明するための模式図である。
【図4】第1の実施形態による遠隔操作ロボットシステムの動作を示すフローチャートである。
【図5】自律的な実行と遠隔操作による実行を併用するときの被操作装置の動作の一例を示すフローチャートである。
【図6】被操作装置および操作端末の構成を示すブロック図である。
【図7】第2の実施形態による遠隔操作ロボットシステムの動作を説明するための模式図である。
【図8】第2の実施形態による遠隔操作ロボットシステムの動作を示すフローチャートである。
【図9】第3の実施形態による遠隔操作ロボットシステムの動作を説明するための模式図である。
【図10】第3の実施形態による遠隔操作ロボットシステムの動作を説明するための模式図である。
【図11】第3の実施形態による遠隔操作ロボットシステムの他の動作を示すフローチャートである。
【符号の説明】
【0123】
11 被操作装置
12 操作端末
13 サーバ
21 被操作側情報記録部
22 操作側情報記録部
23 マッチング部
31 タスク情報プール
41 装置状態取得部
42 装置状態匿名化処理部
43 遠隔操作制約処理部
44 装置駆動部
45 装置状態提示部
46 操作制御部
Claims (13)
- 遠隔操作によりロボットにタスクを実行させる遠隔操作ロボットシステムであって、
通信ネットワークに接続され、遠隔からの前記ネットワークを介した操作に従って動作し、タスクを実行する被操作装置と、
前記通信ネットワークに接続され、前記ネットワークを介して前記被操作装置を操作する操作端末と、
前記被操作装置の操作利用者による、タスクを実行してもらう要求に関する被操作側情報と、前記操作端末の端末操作者による、タスクを実行する要求に関する操作側情報とを保持し、前記被操作側情報と前記操作側情報とから、被操作装置とそれを操作する操作端末との組み合わせを定めて、それを前記被操作装置及び前記操作端末に通知するサーバとを有し、
前記被操作装置は、少なくともカメラ、マイク、加速度センサ、超音波センサ、赤外線センサ、RFIDタグセンサのいずれかの入力デバイスにより測定された装置状態を取得する装置状態取得部を有し、タスクの自律的な実行と遠隔操作による実行のいずれかで動作を実行するか否かを動的に判断し、遠隔操作による実行を行うと判断した場合には、前記サーバに被操作側情報を通知して、前記タスクを実行する操作端末の決定を依頼し、前記タスクを実行する操作端末に前記装置状態取得部で取得された装置状態の情報を送信するものであることを特徴とする遠隔操作ロボットシステム。 - 前記被操作装置は、前記タスクの自律的な実行が不可能なとき、遠隔から実行してもらうことを決定する、請求項1に記載の遠隔操作システム。
- 前記被操作装置は、他の被操作装置における、タスクを遠隔から実行してもらうか否かの判断結果を利用して、自身のタスクを遠隔から実行してもらうか否かを判断する、請求項1に記載の遠隔操作システム。
- 前記サーバは、前記被操作装置から発信された前記被操作側情報をタスク情報プールに登録し、被操作装置と操作端末との組み合わせを定めるとき、前記タスク情報プールに登録されている前記情報を利用する請求項2または3に記載の遠隔操作システム。
- 前記サーバは、前記操作端末による過去のタスクの実行に関する情報を操作端末情報プールに登録しており、被操作装置と操作端末との組み合わせを定める際に、前記操作端末情報プールに登録されている前記情報を利用する請求項2または3に記載の遠隔操作システム。
- 前記操作側情報には、前記操作端末の端末操作者が過去にタスクを実行した経験に関する情報が含まれている請求項5に記載の遠隔操作システム。
- 前記操作側情報には、前記操作端末の端末操作者が過去にタスクを実行したときに得た評価の情報が含まれている請求項6に記載の遠隔操作システム。
- 前記被操作装置は、予め定められたタスクを、遠隔から実行してもらうか否かの判断対象とする、請求項2または3に記載の遠隔操作システム。
- 前記被操作装置は、前記操作端末から遠隔操作を受けるとき、取得した装置状態情報を匿名化してから前記操作端末に送信する、請求項2または3に記載の遠隔操作システム。
- 前記被操作装置は、前記操作端末から遠隔操作を受けるとき、前記操作端末から受信した操作指示情報に対して制約を加えてからタスクの実行に用いる、請求項2または3に記載の遠隔操作システム。
- 遠隔操作によりロボットにタスクを実行させる遠隔操作ロボットサービス方法であって、
2以上の操作端末と2以上の被操作装置とを前記通信ネットワークを介してサーバにアクセス可能に配置し、
前記被操作装置は、少なくともカメラ、マイク、加速度センサ、超音波センサ、赤外線センサ、RFIDタグセンサのいずれかの入力デバイスにより測定された装置状態を取得する装置状態取得部を有し、タスクの自律的な実行と遠隔操作による実行のいずれかで動作を実行するか否かを動的に判断し、
前記操作端末から、前記被操作装置のタスクを実行する要求を前記サーバとの間に発信し、
前記被操作装置から、自装置のタスク実行を要求する情報を前記サーバとの間に発信し、
前記被操作装置が遠隔操作による実行を行うと判断した場合、前記被操作装置から、前記サーバに被操作側情報を通知して、該タスクを実行する操作端末の決定を依頼し、該タスクを実行する操作端末に前記装置状態取得部で取得された装置状態の情報を送信し、
前記サーバに、前記2以上の被操作装置と前記2以上の操作端末とからそれぞれ発信された情報を管理させ、その情報に基づいて適合する前記一の被操作装置と前記一の操作端末との組み合わせを前記サーバに選定させて、それらを中継することを特徴とする遠隔操作ロボットサービス方法。 - 前記被操作装置に、前記タスクの自律的な実行が不可能なとき、遠隔から実行してもらうことを決定させる請求項11に記載の遠隔操作サービス方法。
- 前記被操作装置に、他の被操作装置における、タスクを遠隔から実行してもらうか否かの判断結果を利用して、自身のタスクを遠隔から実行してもらうか否かを判断させる請求項12に記載の遠隔操作サービス方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009514135A JP5177136B2 (ja) | 2007-05-09 | 2008-05-08 | 遠隔操作システム、サーバ、被遠隔操作装置、遠隔操作サービス提供方法 |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007124400 | 2007-05-09 | ||
JP2007124400 | 2007-05-09 | ||
JP2009514135A JP5177136B2 (ja) | 2007-05-09 | 2008-05-08 | 遠隔操作システム、サーバ、被遠隔操作装置、遠隔操作サービス提供方法 |
PCT/JP2008/058533 WO2008140011A1 (ja) | 2007-05-09 | 2008-05-08 | 遠隔操作システム、サーバ、被遠隔操作装置、遠隔操作サービス提供方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2008140011A1 JPWO2008140011A1 (ja) | 2010-08-05 |
JP5177136B2 true JP5177136B2 (ja) | 2013-04-03 |
Family
ID=40002211
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009514135A Expired - Fee Related JP5177136B2 (ja) | 2007-05-09 | 2008-05-08 | 遠隔操作システム、サーバ、被遠隔操作装置、遠隔操作サービス提供方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US7991885B2 (ja) |
JP (1) | JP5177136B2 (ja) |
WO (1) | WO2008140011A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018212234A1 (ja) | 2017-05-19 | 2018-11-22 | 川崎重工業株式会社 | ロボットシステム |
KR20210043621A (ko) * | 2018-08-10 | 2021-04-21 | 카와사키 주코교 카부시키 카이샤 | 정보 처리 장치, 중개 장치, 시뮬레이트 시스템 및 정보 처리 방법 |
Families Citing this family (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012140655A2 (en) * | 2011-04-12 | 2012-10-18 | Baryakar Dan | Robotic system controlled by multi participants, considering administrator's criteria |
JP5720398B2 (ja) | 2011-04-25 | 2015-05-20 | ソニー株式会社 | 評価装置及び評価方法、サービス提供システム、並びにコンピューター・プログラム |
US8321364B1 (en) | 2012-02-08 | 2012-11-27 | Google Inc. | Method and system for including robots into social networks |
JP5928921B2 (ja) * | 2012-04-02 | 2016-06-01 | 株式会社安川電機 | ロボットシステム及びロボット制御装置 |
AU2013204965B2 (en) | 2012-11-12 | 2016-07-28 | C2 Systems Limited | A system, method, computer program and data signal for the registration, monitoring and control of machines and devices |
CN104181880B (zh) * | 2014-08-01 | 2017-06-09 | 李博 | 基于移动终端的通信遥控系统与方法 |
US10350757B2 (en) | 2015-08-31 | 2019-07-16 | Avaya Inc. | Service robot assessment and operation |
US10124491B2 (en) | 2015-08-31 | 2018-11-13 | Avaya Inc. | Operational parameters |
US10032137B2 (en) | 2015-08-31 | 2018-07-24 | Avaya Inc. | Communication systems for multi-source robot control |
US10040201B2 (en) * | 2015-08-31 | 2018-08-07 | Avaya Inc. | Service robot communication systems and system self-configuration |
JP6882914B2 (ja) * | 2017-03-15 | 2021-06-02 | 株式会社オカムラ | 管理システム、管理方法及びプログラム |
US10464212B2 (en) * | 2017-03-28 | 2019-11-05 | Amazon Technologies, Inc. | Method and system for tele-operated inventory management system |
JP6816612B2 (ja) * | 2017-03-31 | 2021-01-20 | 富士通株式会社 | 評価処理プログラム、装置、及び方法 |
EP3691839A1 (en) * | 2017-10-04 | 2020-08-12 | Telefonaktiebolaget LM Ericsson (publ) | Method and arrangement for determination of a trajectory for a robot device in a cloud |
JP6368418B1 (ja) * | 2017-10-25 | 2018-08-01 | 尚紀 北村 | 情報提供システム |
WO2019116823A1 (ja) * | 2017-12-15 | 2019-06-20 | 株式会社Nttドコモ | 情報処理装置 |
JP6992666B2 (ja) * | 2018-04-20 | 2022-01-13 | コベルコ建機株式会社 | 作業選択システム及び作業選択方法 |
CN108762060B (zh) * | 2018-05-07 | 2021-02-02 | 中国科学院力学研究所 | 一种远程操作任务制定的优化方法及系统 |
JP2019079491A (ja) * | 2018-07-06 | 2019-05-23 | 尚紀 北村 | 情報提供システム |
JP7015604B1 (ja) | 2018-07-06 | 2022-02-15 | 株式会社インキュビット | 情報提供システム |
JP7015603B1 (ja) | 2018-07-06 | 2022-02-15 | 株式会社インキュビット | 情報提供システム |
JP6982875B2 (ja) * | 2018-07-30 | 2021-12-17 | 株式会社インキュビット | 情報提供システム |
CN112512759B (zh) * | 2018-08-10 | 2024-06-11 | 川崎重工业株式会社 | 中介装置及使用该中介装置的中介方法 |
KR102518767B1 (ko) * | 2018-08-10 | 2023-04-06 | 카와사키 주코교 카부시키 카이샤 | 중개 장치 및 이를 이용한 중개 방법 |
JP7325173B2 (ja) * | 2018-10-06 | 2023-08-14 | シスメックス株式会社 | 手術支援ロボットの遠隔支援方法、および遠隔支援システム |
JP7159797B2 (ja) * | 2018-11-09 | 2022-10-25 | コベルコ建機株式会社 | 作業選択システム及び作業選択方法 |
US11052541B1 (en) * | 2018-12-05 | 2021-07-06 | Facebook, Inc. | Autonomous robot telerobotic interface |
JP6978453B2 (ja) * | 2019-02-19 | 2021-12-08 | Telexistence株式会社 | 管理装置、管理方法及び管理システム |
US20220014476A1 (en) * | 2020-07-09 | 2022-01-13 | Gerald Brantner | Facilitating human intervention in an autonomous device |
US20240165817A1 (en) * | 2021-04-09 | 2024-05-23 | Nec Corporation | Robot management device, control method, and recording medium |
WO2023053521A1 (ja) * | 2021-09-30 | 2023-04-06 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、及び、情報処理システム |
JPWO2023053520A1 (ja) * | 2021-09-30 | 2023-04-06 | ||
JP7079541B2 (ja) * | 2021-12-03 | 2022-06-02 | 株式会社インキュビット | 情報提供システム |
US11877058B1 (en) * | 2022-08-25 | 2024-01-16 | Benjamin Slotznick | Computer program product and automated method for auto-focusing a camera on a person in a venue who is wearing, or carrying, or holding, or speaking into a microphone at the venue |
US11889187B1 (en) | 2022-08-25 | 2024-01-30 | Benjamin Slotznick | Computer program product and method for auto-focusing one or more lighting fixtures on selected persons in a venue who are performers of a performance occurring at the venue |
US11902659B1 (en) | 2022-08-25 | 2024-02-13 | Benjamin Slotznick | Computer program product and method for auto-focusing a lighting fixture on a person in a venue who is wearing, or carrying, or holding, or speaking into a microphone at the venue |
US11889188B1 (en) | 2022-08-25 | 2024-01-30 | Benjamin Slotznick | Computer program product and method for auto-focusing one or more cameras on selected persons in a venue who are performers of a performance occurring at the venue |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11259566A (ja) * | 1998-03-11 | 1999-09-24 | Fujitsu Ltd | 仕事仲介装置及び記録媒体 |
JP2003030480A (ja) * | 2001-07-18 | 2003-01-31 | Fujitsu Ltd | 請負者仲介方法および装置、記憶媒体、プログラム |
JP2003058618A (ja) * | 2001-08-09 | 2003-02-28 | Ricoh Co Ltd | It環境フルサポートサービスのメンテナンスシステム、該システムの機能を実現するためのプログラム及び記録媒体 |
JP2004013275A (ja) * | 2002-06-04 | 2004-01-15 | Hitachi Instruments Service Co Ltd | 機器及び人材の効率的利用が可能なコラボレーションシステム |
WO2005043433A1 (ja) * | 2003-10-31 | 2005-05-12 | Komatsu Ltd. | 作業機械の管理システム及び作業機械 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001222316A (ja) * | 2000-02-09 | 2001-08-17 | Sony Corp | ロボットの管理システム及びロボットの管理方法 |
JP2002085353A (ja) | 2000-09-11 | 2002-03-26 | Mamoru Mitsuishi | 遠隔診断システム |
JP2002101333A (ja) | 2000-09-26 | 2002-04-05 | Casio Comput Co Ltd | 遠隔制御装置および遠隔操作サービスシステム並びにそれらのプログラム記録媒体 |
JP2002354551A (ja) | 2001-05-25 | 2002-12-06 | Mitsubishi Heavy Ind Ltd | ロボットサービス提供方法およびロボットサービス提供システム |
JP2003006532A (ja) | 2001-06-27 | 2003-01-10 | Fujitsu Ltd | 移動ロボットとその獲得画像を用いたサーバ経由のサービス提供方式 |
KR20030075084A (ko) * | 2002-03-15 | 2003-09-22 | 엘지전자 주식회사 | 로봇을 이용한 네트워크 게임 시스템 |
JP2004017186A (ja) | 2002-06-13 | 2004-01-22 | Mitsubishi Heavy Ind Ltd | ロボットの遠隔操作システム |
US20070150104A1 (en) * | 2005-12-08 | 2007-06-28 | Jang Choul S | Apparatus and method for controlling network-based robot |
-
2008
- 2008-05-08 US US12/599,320 patent/US7991885B2/en active Active
- 2008-05-08 WO PCT/JP2008/058533 patent/WO2008140011A1/ja active Application Filing
- 2008-05-08 JP JP2009514135A patent/JP5177136B2/ja not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11259566A (ja) * | 1998-03-11 | 1999-09-24 | Fujitsu Ltd | 仕事仲介装置及び記録媒体 |
JP2003030480A (ja) * | 2001-07-18 | 2003-01-31 | Fujitsu Ltd | 請負者仲介方法および装置、記憶媒体、プログラム |
JP2003058618A (ja) * | 2001-08-09 | 2003-02-28 | Ricoh Co Ltd | It環境フルサポートサービスのメンテナンスシステム、該システムの機能を実現するためのプログラム及び記録媒体 |
JP2004013275A (ja) * | 2002-06-04 | 2004-01-15 | Hitachi Instruments Service Co Ltd | 機器及び人材の効率的利用が可能なコラボレーションシステム |
WO2005043433A1 (ja) * | 2003-10-31 | 2005-05-12 | Komatsu Ltd. | 作業機械の管理システム及び作業機械 |
Non-Patent Citations (2)
Title |
---|
CSNG200400602013; 加藤 博光 HIROMITSU KATO: '制御系ファイアウォールのためのセキュア遠隔操作プロトコルSTP Secure Tele-operation Protocol for t' 情報処理学会論文誌 第43巻 第8号 IPSJ Journal 第43巻, 20020815, 第2552-2561頁, 社団法人情報処理学会 Information Processing Socie * |
JPN6012048797; 加藤 博光 HIROMITSU KATO: '制御系ファイアウォールのためのセキュア遠隔操作プロトコルSTP Secure Tele-operation Protocol for t' 情報処理学会論文誌 第43巻 第8号 IPSJ Journal 第43巻, 20020815, 第2552-2561頁, 社団法人情報処理学会 Information Processing Socie * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018212234A1 (ja) | 2017-05-19 | 2018-11-22 | 川崎重工業株式会社 | ロボットシステム |
US11738468B2 (en) | 2017-05-19 | 2023-08-29 | Kawasaki Jukogyo Kabushiki Kaisha | Robot system |
KR20210043621A (ko) * | 2018-08-10 | 2021-04-21 | 카와사키 주코교 카부시키 카이샤 | 정보 처리 장치, 중개 장치, 시뮬레이트 시스템 및 정보 처리 방법 |
KR102571997B1 (ko) | 2018-08-10 | 2023-08-29 | 카와사키 주코교 카부시키 카이샤 | 정보 처리 장치, 중개 장치, 시뮬레이트 시스템 및 정보 처리 방법 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2008140011A1 (ja) | 2010-08-05 |
US20100241693A1 (en) | 2010-09-23 |
WO2008140011A1 (ja) | 2008-11-20 |
US7991885B2 (en) | 2011-08-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5177136B2 (ja) | 遠隔操作システム、サーバ、被遠隔操作装置、遠隔操作サービス提供方法 | |
Fiorini et al. | Assistive robots to improve the independent living of older persons: results from a needs study | |
JP6972325B2 (ja) | ユーザ用の人工知能(ai)モデルに基づく可動式の自律型パーソナルコンパニオン | |
KR102407595B1 (ko) | 메타버스 기반 와이너리 체험 서비스 제공 방법, 장치 및 시스템 | |
JP2020531999A (ja) | 自律パーソナルコンパニオンによってユーザの人工知能モデルが実行するためのユーザのコンテクスト環境を記述する識別タグに基づくシナリオの継続的選択 | |
CN101681494A (zh) | 便携式电子设备、程序及信息存储介质 | |
CN101795830A (zh) | 机器人控制系统、机器人、程序以及信息存储介质 | |
Jorge | Adaptive tools for the elderly: new devices to cope with age-induced cognitive disabilities | |
Zhang et al. | Decentralized cyber-physical systems: A paradigm for cloud-based smart factory of Industry 4.0 | |
Payr et al. | Potential of robotics for ambient assisted living | |
JP2019021139A (ja) | 順番待ちシステム、順番待ち管理装置、順番待ち行列の制御方法、及びプログラム | |
CA2982494A1 (en) | Systems and methods for facilitating remote care services | |
KR102509538B1 (ko) | 센서를 구비한 휴대용 비대면 진단 장치 | |
CN112513920B (zh) | 中介装置以及使用该中介装置的中介方法 | |
JP5005574B2 (ja) | 仮想空間提供サーバ、仮想空間提供方法及びコンピュータプログラム | |
Bandeira et al. | Using gesture-based interfaces to control robots | |
JP2024528995A (ja) | タスク委任制御を有効化するためのユーザインターフェースのためのシステムおよび方法 | |
Wang et al. | Motivated learning agent model for distributed collaborative systems | |
JP4379131B2 (ja) | バーチャルコンパニオンシステム | |
CN112947752A (zh) | 一种基于智能设备的协同式人机交互控制方法 | |
WO2016172665A1 (en) | Systems and methods for facilitating remote care services | |
JP2021060846A (ja) | コミュニケーションシステム及びロボット | |
Fischer-Janzen et al. | Requirements of People with Disabilities and Caregivers for Robotics: A Case Study | |
JP7548970B2 (ja) | ドッペルゲンガー遠隔ロボットシステム | |
KR102619388B1 (ko) | 별자리 기반 메타버스 추모관 서비스 관련 접속에 따른 시각적 효과 구현 인터페이스 제공 방법, 장치 및 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110413 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120918 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121108 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121211 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121224 |
|
LAPS | Cancellation because of no payment of annual fees |