JP2003256105A - 力覚提示装置および力覚提示方法 - Google Patents

力覚提示装置および力覚提示方法

Info

Publication number
JP2003256105A
JP2003256105A JP2002055213A JP2002055213A JP2003256105A JP 2003256105 A JP2003256105 A JP 2003256105A JP 2002055213 A JP2002055213 A JP 2002055213A JP 2002055213 A JP2002055213 A JP 2002055213A JP 2003256105 A JP2003256105 A JP 2003256105A
Authority
JP
Japan
Prior art keywords
calculation
virtual space
virtual
contact
procedure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002055213A
Other languages
English (en)
Inventor
Yuriko Suzuki
由里子 鈴木
Minoru Kobayashi
稔 小林
Satoshi Ishibashi
聡 石橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2002055213A priority Critical patent/JP2003256105A/ja
Publication of JP2003256105A publication Critical patent/JP2003256105A/ja
Pending legal-status Critical Current

Links

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

(57)【要約】 【課題】 現実の送風噴出による力覚提示タイミングの
ずれに対して、視覚的イベントに同期させて力覚イベン
トを発生させる。また、衝突の速さや、やわらかさ等に
ついて異なる衝突感覚として錯覚させる力覚表現の制御
を可能とする。 【解決手段】 送風受信手段3は受けた風圧を操作者に
圧力として提示し、送風受信部検出手段は送風受信手段
の位置や向き等を検出し、その情報に応じて送風受信部
投影手段は送風受信手段を仮想空間に接触判定オブジェ
クトとして投影する。仮想接触力計算手段4は仮想空間
内での接触判定オブジェクトと仮想オブジェクトとの接
触力を計算し、視覚的接触タイミング計算手段5は両者
の位置および時間に対する位置の変化に応じて、両者の
仮想空間内における接触タイミングを計算する。送風噴
出計算手段6は仮想接触力計算結果と視覚的接触タイミ
ング計算結果に応じて噴出する風を計算し、これを制御
手段7が制御し、送風噴出手段2が送風受信手段に対し
風を噴出する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、操作者が自分の意
志で自由に動作(操作)できる二次元又は三次元の仮想
空間を表現する画像表示端末装置、および仮想オブジェ
クトと接触判定オブジェクトの状態に応じて仮想空間を
制御する仮想空間制御手段を有する仮想空間システムに
おいて、仮想空間において任意に表示した仮想オブジェ
クトと操作者の分身(操作者又はその操作者の所持する
もの等)として表示した接触判定オブジェクトとの仮想
接触により与えられる力覚を、風圧として操作者に与え
る場合の風の噴出制御に関するものである。
【0002】
【従来の技術】仮想空間において力覚を提示する方法と
して、風圧により力覚を提示する方法がある(特願平1
1−190638号公報)。この力覚提示方式では、風
圧を利用し軽量で簡単な風を受ける物体を操作者の身体
や所持物に取り付けるだけで、ユーザは自由に動きまわ
り腕を動かすことができる。
【0003】この送風の噴出のための従来の計算方法と
しては、仮想空間内の仮想オブジェクトと接触判定オブ
ジェクトとの接触等の状態に応じて仮想接触状態を計算
し、算出された仮想接触状態に応じて、噴出する送風の
オン/オフや強さ、位置や向き等の噴出する風を計算
し、送風の噴出を制御する方法がある。
【0004】
【発明が解決しようとする課題】従来の送風の噴出計算
方法は、仮想空間内の仮想オブジェクトと接触判定オブ
ジェクトの接触等の視覚的に生じたイベントに対して、
その接触状態を計算し、送風の噴出計算と噴出制御を行
って、力覚イベントである風圧により力覚提示を行って
いた。
【0005】しかし、視覚的なイベントが発生するタイ
ミングがあらかじめ分からないため、噴出装置の遅れや
立ち上がり時間に対応するためには、操作者への視覚的
イベントに対する力覚イベントの発生タイミングを制御
することが困難であった。
【0006】さらに、従来の風圧による力覚表現に関す
る噴出計算は、送風のオン/オフや強さ等があるが、力
覚提示タイミングや提示している時間を制御すること
で、力覚表現を行うことが必要である。
【0007】本発明はこのような問題点を解決するため
になされたもので、仮想空間内の仮想オブジェクトと接
触判定オブジェクトの位置等から視覚的イベントである
仮想空間内の接触タイミングや接触位置、現実空間で力
覚提示を受ける位置等を予測計算することで、視覚的イ
ベントに対して、現実の送風噴出による力覚提示タイミ
ングのずれに対して、視覚的イベントに同期させて力覚
イベントを発生させることができる力覚提示装置および
方法を提供することを目的とする。
【0008】さらに、本発明は、視覚的イベントに対す
る風圧提示の発生のタイミング制御や提示時間の制御を
行うことで、衝突の速さや、やわらかさ等について異な
る衝突感覚として錯覚させる等、豊かな力覚表現の制御
を可能とする力覚提示装置および方法を提供することを
目的とする。
【0009】
【課題を解決するための手段】上記課題を解決するため
の本発明は、以下の力覚提示装置および力覚提示方法を
特徴とする。
【0010】(装置の発明) (1)仮想オブジェクトと接触判定オブジェクトを仮想
空間に表現する画像表示端末装置、および前記仮想オブ
ジェクトと前記接触判定オブジェクトの状態に応じて前
記仮想空間を制御する仮想空間制御手段を有する仮想空
間システムにおいて、風を受け止める送風受信部、およ
び前記送風受信部が受けた風圧を操作者に圧力として提
示する圧力提示部を有する送風受信手段と、前記送風受
信部に対し風を噴出する送風噴出手段と、前記送風受信
手段の位置や向き等を検出する送風受信部検出手段と、
前記送風受信部検出手段により検出された前記送風受信
手段の位置や向き等の情報に応じて、前記送風受信手段
を取り付けた又はそれを一部とする物体を前記仮想空間
に前記接触判定オブジェクトとして投影する送風受信部
投影手段と、前記仮想空間内での前記接触判定オブジェ
クトと仮想オブジェクトとの状態に応じて、前記仮想空
間での両者の接触力を計算する仮想接触力計算手段と、
前記仮想空間内での前記接触判定オブジェクトと前記仮
想オブジェクトの位置および時間に対する位置の変化に
応じて、前記仮想空間内での前記両者の仮想空間内にお
ける接触タイミングを計算する視覚的接触タイミング計
算手段と、前記仮想接触力計算手段の計算結果と、前記
視覚的接触タイミング計算手段の計算結果に応じて、前
記送風噴出手段が噴出する風を計算する送風噴出計算手
段と、前記送風噴出計算手段の計算結果に応じて、前記
送風噴出手段が噴出する風を制御する送風噴出制御手段
とを備えたことを特徴とする。
【0011】(2)前記(1)において、前記仮想空間
内での前記接触判定オブジェクトと前記仮想オブジェク
トの位置および時間に対する位置の変化に応じて、前記
仮想空間内での前記両者の仮想空間内における仮想接触
位置を計算する視覚的接触位置計算手段と、前記視覚的
接触位置計算手段の計算結果に応じて、前記送風受信手
段が風を受ける現実空間の力覚提示位置を計算する力覚
提示位置計算手段と、前記力覚提示位置計算手段の計算
結果に応じて、前記送風噴出手段から噴出した送風が前
記力覚提示位置に到達するまでの時間を計算する送風到
達時間計算手段とを備え、前記送風噴出計算手段が、前
記仮想接触力計算手段の計算結果と、前記視覚的接触タ
イミング計算手段の計算結果と、前記送風到達時間計算
手段の計算結果に応じて、前記送風噴出手段が噴出する
風を計算することを特徴とする。
【0012】(3)前記(2)において、前記仮想接触
力計算手段の計算結果に応じて、前記送風受信手段が風
を受ける力覚提示タイミングをシフトさせる時間を計算
する力覚提示タイミングシフト計算手段と、前記力覚提
示タイミングシフト計算手段の計算結果と、前記視覚的
接触タイミング計算手段の計算結果に応じて、前記送風
噴出手段から力覚提示するタイミングを計算する力覚提
示タイミング計算手段とを備え、前記送風噴出計算手段
が、前記仮想接触力計算手段の計算結果と、前記力覚提
示タイミング計算手段の計算結果と、前記送風到達時間
計算手段の計算結果に応じて、前記送風噴出手段が噴出
する風を計算することを特徴とする。
【0013】(4)前記(1)〜(3)のいずれか1項
において、前記仮想空間内での前記接触判定オブジェク
トと前記仮想オブジェクトの位置および時間に対する位
置の変化に応じて、前記仮想空間内での前記両者の仮想
空間内における接触している時間の長さを計算する視覚
的接触時間計算手段と、前記視覚的接触時間計算手段の
計算結果と、前記仮想接触力計算手段の計算結果に応じ
て、前記送風噴出手段からの風を受ける現実空間の力覚
提示する間の時間を計算する力覚提示時間計算手段を備
え、前記送風噴出計算手段が、前記力覚提示時間計算手
段の計算結果と、前記仮想接触力計算手段の計算結果
と、前記視覚的接触タイミング計算手段または前記力覚
提示タイミング計算手段の計算結果に応じて、前記送風
噴出手段が噴出する風を計算することを特徴とする。
【0014】(5)前記(1)〜(4)のいずれか1項
において、前記仮想空間は遠隔仮想空間反映手段を備
え、前記遠隔仮想空間反映手段が通信ネットワークを介
して他の仮想空間システムから送られてくる前記仮想オ
ブジェクトを前記仮想空間に表現すると共に、仮想オブ
ジェクトを前記通信ネットワークを介して前記他の仮想
空間システムに送信することを特徴とする。
【0015】(6)前記(1)〜(5)のいずれか1項
において、前記仮想空間は遠隔仮想空間反映手段を備
え、前記遠隔仮想空間反映手段が通信ネットワークを介
して他の仮想空間システムから送られてくる前記仮想オ
ブジェクトを前記仮想空間に表現すると共に、前記接触
判定オブジェクトを前記通信ネットワークを介して前記
他の仮想空間システムに仮想オブジェクトとして送信す
ることを特徴とする。
【0016】(方法の発明) (7)仮想オブジェクトと接触判定オブジェクトを仮想
空間に表現する画像表示端末装置、および前記仮想オブ
ジェクトと前記接触判定オブジェクトの状態に応じて前
記仮想空間を制御する仮想空間制御手段を有する仮想空
間システムにおいて、風を受け止める送風受信部、およ
び前記送風受信部が受けた風圧を操作者に圧力として提
示する圧力提示部を有する送風受信手順と、前記送風受
信部に対し風を噴出する送風噴出手順と、前記送風受信
手順の位置や向き等を検出する送風受信部検出手順と、
前記送風受信部検出手順により検出された前記送風受信
手順の位置や向き等の情報に応じて、前記送風受信手順
を取り付けた又はそれを一部とする物体を前記仮想空間
に前記接触判定オブジェクトとして投影する送風受信部
投影手順と、前記仮想空間内での前記接触判定オブジェ
クトと仮想オブジェクトとの状態に応じて、前記仮想空
間での両者の接触力を計算する仮想接触力計算手順と、
前記仮想空間内での前記接触判定オブジェクトと前記仮
想オブジェクトの位置および時間に対する位置の変化に
応じて、前記仮想空間内での前記両者の仮想空間内にお
ける接触タイミングを計算する視覚的接触タイミング計
算手順と、前記仮想接触力計算手順の計算結果と、前記
視覚的接触タイミング計算手順の計算結果に応じて、前
記送風噴出手順が噴出する風を計算する送風噴出計算手
順と、前記送風噴出計算手順の計算結果に応じて、前記
送風噴出手順が噴出する風を制御する送風噴出制御手順
とを備えたことを特徴とする。
【0017】(8)前記(7)において、前記仮想空間
内での前記接触判定オブジェクトと前記仮想オブジェク
トの位置および時間に対する位置の変化に応じて、前記
仮想空間内での前記両者の仮想空間内における仮想接触
位置を計算する視覚的接触位置計算手順と、前記視覚的
接触位置計算手順の計算結果に応じて、前記送風受信手
順が風を受ける現実空間の力覚提示位置を計算する力覚
提示位置計算手順と、前記力覚提示位置計算手順の計算
結果に応じて、前記送風噴出手順から噴出した送風が前
記力覚提示位置に到達するまでの時間を計算する送風到
達時間計算手順とを備え、前記送風噴出計算手順が、前
記仮想接触力計算手順の計算結果と、前記視覚的接触タ
イミング計算手順の計算結果と、前記送風到達時間計算
手順の計算結果に応じて、前記送風噴出手順が噴出する
風を計算することを特徴とする。
【0018】(9)前記(8)において、前記仮想接触
力計算手順の計算結果に応じて、前記送風受信手順が風
を受ける力覚提示タイミングをシフトさせる時間を計算
する力覚提示タイミングシフト計算手順と、前記力覚提
示タイミングシフト計算手順の計算結果と、前記視覚的
接触タイミング計算手順の計算結果に応じて、前記送風
噴出手順から力覚提示するタイミングを計算する力覚提
示タイミング計算手順とを備え、前記送風噴出計算手順
が、前記仮想接触力計算手順の計算結果と、前記力覚提
示タイミング計算手順の計算結果と、前記送風到達時間
計算手順の計算結果に応じて、前記送風噴出手順が噴出
する風を計算することを特徴とする。
【0019】(10)前記(7)〜(9)のいずれか1
項において、前記仮想空間内での前記接触判定オブジェ
クトと前記仮想オブジェクトの位置および時間に対する
位置の変化に応じて、前記仮想空間内での前記両者の仮
想空間内における接触している時間の長さを計算する視
覚的接触時間計算手順と、前記視覚的接触時間計算手順
の計算結果と、前記仮想接触力計算手順の計算結果に応
じて、前記送風噴出手順からの風を受ける現実空間の力
覚提示する間の時間を計算する力覚提示時間計算手順を
備え、前記送風噴出計算手順が、前記力覚提示時間計算
手順の計算結果と、前記仮想接触力計算手順の計算結果
と、前記視覚的接触タイミング計算手順または前記力覚
提示タイミング計算手順の計算結果に応じて、前記送風
噴出手順が噴出する風を計算することを特徴とする。
【0020】(11)前記(7)〜(10)のいずれか
1項において、前記仮想空間は遠隔仮想空間反映手順を
備え、前記遠隔仮想空間反映手順が通信ネットワークを
介して他の仮想空間システムから送られてくる前記仮想
オブジェクトを前記仮想空間に表現すると共に、仮想オ
ブジェクトを前記通信ネットワークを介して前記他の仮
想空間システムに送信することを特徴とする。
【0021】(12)前記(7)〜(11)のいずれか
1項において、前記仮想空間は遠隔仮想空間反映手順を
備え、前記遠隔仮想空間反映手順が通信ネットワークを
介して他の仮想空間システムから送られてくる前記仮想
オブジェクトを前記仮想空間に表現すると共に、前記接
触判定オブジェクトを前記通信ネットワークを介して前
記他の仮想空間システムに仮想オブジェクトとして送信
することを特徴とする。
【0022】
【発明の実施の形態】(実施形態1)図1は本発明にお
ける力覚提示装置の外観構成図である。図1の(a)に
示す力覚提示装置は、画像表示端末装置1で表現される
三次元の仮想空間内(図1のb)における操作者の分身
(操作者又はその操作者の所持するもの等)として表示
した接触判定オブジェクトと仮想オブジェクトとの仮想
接触時の力覚を提示するとき、送風噴出手段2より操作
者の身体や所持物に風を与え、その風を送風受信手段3
で受け、操作者の身体や所持物に圧力として力覚提示す
る。
【0023】図2は本実施形態の力覚提示装置のシステ
ム構成図である。また、図3は図2の各部に対応した処
理(S1〜S8)の流れを示す図である。
【0024】(S1)送風受信手段3は、送風噴出手段
2から噴出される風を受け止める送風受信部3Aと、そ
の送風受信部3Aが風を受けたときの風圧を操作者の身
体や所持物に圧力として提示する圧力提示部3Bとを有
する。この送風受信手段3は、風を受けたときのその風
圧を受け止められる面を有しその風圧を圧力として操作
者に伝えることができる構成であればよい。この面の形
状は、単なる平面や、効率的に風圧を受け止められ回転
の力がかかりにくい凹形の面を使用することが考えられ
る。
【0025】送風受信手段3は、仮想オブジェクトによ
る仮想接触を受け取らせたい部分(操作者の身体や所持
物等)に1個以上取り付け、そこに風圧を与えて圧力と
して伝えさせる。また、所持物自体の面や操作者の衣服
など、送風受信手段として利用可能な面が既に備わって
いる場合はそれを利用し、それら所持物等に風圧を与え
ることで、所持している操作者に圧力を提示するように
してもよい。その場合の送風受信手段の位置は、既に備
わっているその部分の位置等になる。
【0026】(S2)送風受信部検出手段3Cは、送風
受信手段3の位置、向きを検出する。この送風受信部検
出手段3Cとしては、磁気センサーや赤外線を利用した
検出手段、マーキングによる映像解析を利用する検出手
段などがある。また、送風受信部検出手段より検出する
位置情報、向き情報を使用して、移動速度、移動方向、
加速度などを算出し送風受信部3Aの状態値として利用
することもできる。
【0027】(S3)送風受信部投影手段3Dは、送風
受信部検出手段3Cで検出した送風受信手段の位置情
報、向き情報に応じて、送風受信手段3を取り付けた又
はそれを一部とする物体を仮想空間に接触判定オブジェ
クトとして投影する。
【0028】(S4)仮想接触力計算手段4は、仮想空
間における接触判定オブジェクトと仮想空間に生成され
た仮想オブジェクトとの状態に応じて、仮想空間内での
両者の接触状態である接触力を計算する。すなわち、仮
想空間における接触判定オブジェクトと仮想オブジェク
トとのそれぞれの位置または時間に対する位置の変化、
移動軌道、移動速度、移動方向、加速度から接触を予測
算出し、またあらかじめ与えられた両者オブジェクトの
属性(大きさ、形、重さ、材質、跳ね返り係数)、また
は両者オブジェクトの属性などから決められた衝突時の
属性(接触力の大きさ、または時間に対する接触力の変
化または衝突時間、衝突時の硬さ・やわらかさ、弾力性
等の衝突感覚など、衝突時に発生する力に関する係数)
より、現在の接触判定、接触した時の力の向き、大き
さ、強さ、硬さまたは柔らかさ、弾力さなどの衝突感覚
等、接触状態を予測または計算する。
【0029】(S5)視覚的接触タイミング計算手段5
は、仮想空間内での接触判定オブジェクトと仮想オブジ
ェクトの位置および時間に対する位置の変化に応じて、
仮想空間内での両者の仮想空間内における接触タイミン
グを計算する。すなわち、仮想空間における接触判定オ
ブジェクトと仮想オブジェクトそれぞれの位置または時
間に対する位置の変化、移動軌道、移動速度、移動方
向、加速度から接触タイミングを予測算出する。また、
予測した接触タイミングに対して、その際過去の情報を
フィードバックし計算することもある。
【0030】(S6)送風噴出計算手段6は、仮想接触
力計算手段4の計算結果と、視覚的接触タイミング計算
手段5の計算結果に応じて、送風噴出手段2が噴出する
風を計算する。すなわち、送風噴出手段2が噴出する風
の位置、向き、強さ、噴出タイミング、噴出時間などを
計算する。さらにその際、装置自体の特質を考慮して計
算する。例えば、噴出開始遅れや、噴出の立ち上がりが
遅いとき、噴出したいタイミングに噴出したい力になる
ように計算する。
【0031】(S7)送風噴出制御手段7は、送風噴出
計算手段6の計算結果に応じて、送風噴出手段2が噴出
する風を制御する。すなわち、送風噴出手段2が噴出す
る風の位置、向き、強さ、噴出タイミング、噴出時間な
どを制御するため、送風の強さや、一つ以上の送風噴出
部分の切り替え、角度・位置などの制御による送風の位
置・向きの制御を行う。送風の強さ制御の具体的方法と
しては、その送風噴出手段2に供給する電圧や周波数を
制御することで送風のオン/オフや単位時間あたりの風
量を変化させて送風の強さを制御したり、また送風噴出
手段2の送風噴出口の面積を制御することで単位面積あ
たりの風量を変化させ送風の強さを制御する方法等があ
る。
【0032】送風噴出手段2は送風受信部に対し風を噴
出する。具体的方法としては、ファンやエアーポンプ、
エアーコンプレッサーによる送風がある。
【0033】(S8)仮想空間システム8は、仮想オブ
ジェクトと接触判定オブジェクトを仮想空間に表現する
画像表示端末装置1、および仮想オブジェクトと接触判
定オブジェクトの状態に応じて仮想空間を制御する仮想
空間制御手段8Aを有する。画像表示端末装置1として
は、標準的大きさのまたは等身大のディスプレイや、H
MD等に映し出すものが利用でき、単眼視や多眼視(立
体視)するものも利用できる。
【0034】仮想空間制御手段8Aは、仮想空間システ
ムにより表現された仮想オブジェクトまたは投影した接
触判定オブジェクトの状態に応じて、仮想空間システム
8が表現する仮想空間の変化や仮想オブジェクトなどの
変化を制御する。さらに、仮想空間システム8は表現さ
れた仮想空間に応じて、再度イベントを処理するなら
ば、再びそれらが繰り返される。
【0035】(実施形態2)図4は本実施形態の力覚提
示装置のシステム構成図である。また、図5は図4の各
部に対応した処理(S1〜S11)の流れを示す図であ
る。なお、図4および図5のうち、図2および図3と同
等の構成および処理は同一符号で示す。
【0036】(S9)視覚的接触位置計算手段9は、仮
想空間内での接触判定オブジェクトと前記仮想オブジェ
クトの位置および時間に対する位置の変化に応じて、仮
想空間内での前記両者の仮想空間内における仮想接触位
置を計算する。すなわち、仮想空間における接触判定オ
ブジェクトと仮想オブジェクトそれぞれの位置または時
間に対する位置の変化、移動軌道、移動速度、移動方
向、加速度から仮想空間内の接触位置を予測算出する。
また、予測した接触位置に対して、その際過去の情報を
フィードバックし計算することもある。
【0037】(S10)力覚提示位置計算手段10は、
視覚的接触位置計算手段9の計算結果に応じて、送風受
信手段3が風を受ける現実空間の力覚提示位置を計算す
る。つまり、視覚的接触位置計算手段9で計算した仮想
空間内の接触位置に対応する現実の位置を計算すること
で、現実空間で接触判定オブジェクトの投影元である送
風受信手段が風圧からの力を受けるであろう位置を予測
計算する。また、予測した接触位置に対して、その際過
去の情報をフィードバックし計算することもある。
【0038】(S11)送風到達時間計算手段11は、
力覚提示位置計算手段10の計算結果に応じて、送風噴
出手段2から噴出した送風が力覚提示位置に到達するま
での時間を計算する。すなわち、力覚提示位置計算手段
10の計算結果に対し、送風噴出手段2の位置から、送
風噴出手段からの送風の速度に応じて、送風噴出手段か
ら噴出した送風が力覚提示位置に到達するまでの時間を
計算する。
【0039】本実施形態においては、送風噴出計算手段
6は、仮想接触力計算手段4の計算結果と、視覚的接触
タイミング計算手段5の計算結果と、送風到達時間計算
手段11の計算結果に応じて、送風噴出手段2が噴出す
る風を計算する。すなわち、送風噴出手段が噴出する風
の位置、向き、強さ、噴出タイミング、噴出時間などを
計算する。
【0040】このとき、装置自体の特質を考慮して計算
する。その際、噴出開始遅れや、噴出の立ち上がりが遅
いとき、噴出したいタイミングに噴出したい力になるよ
うに計算する。また、噴出タイミングに関しては、視覚
的接触タイミング計算手段5の計算結果に対して、送風
到達時間計算手段11の計算結果を考慮したタイミング
値を算出する。例えば、視覚的接触タイミング計算手段
の計算結果から送風到達時間計算手段の計算結果を引い
た値、またはその値の近似値とすることで、視覚的接触
タイミングに同期して、またはある程度送れないように
送風噴出手段から噴出した送風が力覚提示位置に到達さ
せることが考えられる。
【0041】(実施形態3)図6は本実施形態の力覚提
示装置のシステム構成図である。また、図7は図6の各
部に対応した処理(S1〜S13)の流れを示す図であ
る。なお、図6および図7のうち、図4および図5と同
等の構成および処理は同一符号で示す。
【0042】(S12)力覚提示タイミングシフト計算
手段12は、仮想接触力計算手段4の計算結果に応じ
て、送風受信手段3が風を受ける力覚提示タイミングを
シフトさせる時間を計算する。すなわち、仮想接触力計
算結果である接触した時の力の向き、大きさ、強さ、硬
さまたは柔らかさ、弾力さなどの衝突感覚などに応じ
て、視覚的接触タイミングに対して実際に力覚を提示す
るタイミングを変える。
【0043】視覚的に接触しているタイミングに対し
て、現実に接触したと感じる力覚提示のタイミングを早
めたり遅くすることで、衝突の速さや、やわらかさ等に
ついて異なる衝突感覚として錯覚させる。
【0044】(S13)力覚提示タイミング計算手段1
3は、力覚提示タイミングシフト計算手段12の計算結
果と、視覚的接触タイミング計算手段5の計算結果に応
じて、力覚提示するタイミングを計算する。力覚提示タ
イミングシフト計算手段12の計算結果、タイミングを
早めるとしたとき、予測した視覚的接触タイミングに対
して、利用者が風による力を受ける力覚提示するタイミ
ングを算出する。
【0045】本実施形態においては、送風噴出計算手段
6は、仮想接触力計算手段4の計算結果と、力覚提示タ
イミング計算手段13の計算結果と、送風到達時間計算
手段11の計算結果に応じて、送風噴出手段2が噴出す
る風を計算する。
【0046】(実施形態4)図8は本実施形態の力覚提
示装置のシステム構成図である。また、図9は図8の各
部に対応した処理(S1〜S8、S14,S15)の流
れを示す図である。なお、図8および図9のうち、図2
および図3と同等の構成および処理は同一符号で示す。
【0047】(S14)視覚的接触時間計算手段14
は、仮想空間内での接触判定オブジェクトと仮想オブジ
ェクトの位置および時間に対する位置の変化に応じて、
仮想空間内での両者の仮想空間内における接触している
時間の長さを計算する。すなわち、仮想空間における接
触判定オブジェクトと仮想オブジェクトそれぞれの位置
または時間に対する位置の変化、移動軌道、移動速度、
移動方向、加速度から接触している間の時間を予測算出
する。また、あらかじめ与えられた両者オブジェクトの
属性(大きさ、形、重さ、材質、跳ね返り係数)、また
は両者オブジェクトの属性などから決められた衝突時の
衝突時間に関する属性より算出する。
【0048】(S15)力覚提示時間計算手段15は、
視覚的接触時間計算手段14の計算結果と、仮想接触力
計算手段4の計算結果に応じて、送風噴出手段2からの
風を受ける現実空間の力覚提示する間の時間を計算す
る。すなわち、仮想接触力計算結果である接触した時の
力の向き、大きさ、強さ、硬さまたは柔らかさ、弾力さ
などの衝突感覚などに応じて、視覚的接触時間に対し
て、実際に力覚を提示している間の時間を変えることで
ある。視覚的に接触している時間に対して、現実に接触
していると感じる力覚提示時間を長くしたり短くするこ
とで、衝突の速さや、やわらかさ等について異なる衝突
感覚として錯覚させる。
【0049】本実施形態において、送風噴出計算手段6
は、力覚提示時間計算手段15の計算結果と、仮想接触
力計算手段4の計算結果と、視覚的接触タイミング計算
手段5または力覚提示タイミング計算手段13の計算結
果に応じて、送風噴出手段が噴出する風を制御する。
【0050】(実施形態5)図10は本実施形態の力覚
提示装置のシステム構成図である。また、図11は図1
0の各部に対応した処理(S1〜S8、S16、S1
7)の流れを示す図である。なお、図10および図11
のうち、図2および図3などと同等の構成および処理は
同一符号で示す。
【0051】(S16)遠隔仮想空間反映手段8Bは、
通信ネットワークを介して他の仮想空間システムから送
られてくる仮想オブジェクトを仮想空間に表現すると共
に、仮想オブジェクトまたは接触判定オブジェクトを通
信ネットワークを介して他の仮想空間システムに送信す
る。
【0052】(S17)対向する他の遠隔仮想空間反映
手段8Bは、遠隔から送信されてきた仮想オブジェクト
の位置情報、向き情報を、仮想空間システムに反映させ
る。
【0053】本実施形態において、ネットワーク上でや
り取りされる仮想空間オブジェクトの状態にも応じて
も、実施形態1から4までの計算手段を適用することが
考えられる。
【0054】
【発明の効果】以上から、本発明によれば、視覚的イベ
ントに対して、現実の送風噴出による力覚提示タイミン
グの遅れが生じても、視覚的イベントに同期させて力覚
イベントを発生させることができる。さらに、風圧提示
の発生のタイミング制御や噴出時間の制御を行うこと
で、衝突の速さや、やわらかさ等について異なる衝突感
覚として錯覚させる等、力覚表現の制御を行うことがで
きる。
【図面の簡単な説明】
【図1】本発明における力覚提示装置の外観構成図。
【図2】実施形態1における力覚提示装置のシステム構
成図。
【図3】実施形態1における力覚提示装置の処理手順
図。
【図4】実施形態2における力覚提示装置のシステム構
成図。
【図5】実施形態2における力覚提示装置の処理手順
図。
【図6】実施形態3における力覚提示装置のシステム構
成図。
【図7】実施形態3における力覚提示装置の処理手順
図。
【図8】実施形態4における力覚提示装置のシステム構
成図。
【図9】実施形態4における力覚提示装置の処理手順
図。
【図10】実施形態5における力覚提示装置のシステム
構成図。
【図11】実施形態5における力覚提示装置の処理手順
図。
【符号の説明】
1…画像表示端末装置 2…送風噴出手段 3…送風受信手段 4…仮想接触力計算手段 5…視覚的接触タイミング計算手段 6…送風噴出計算手段 7…送風噴出制御手段 8…仮想システム 8A…仮想空間制御手段 8B…遠隔仮想空間反映手段 9…視覚的接触位置計算手段 10…力覚提示位置計算手段 11…送風到達時間計算手段 12…力覚提示タイミングシフト計算手段 13…力覚提示タイミング計算手段 14…視覚的接触時間計算手段 15…力覚提示時間計算手段
───────────────────────────────────────────────────── フロントページの続き (72)発明者 石橋 聡 東京都千代田区大手町二丁目3番1号 日 本電信電話株式会社内 Fターム(参考) 5E501 AC37 CA02 CC20 FA14 FA36

Claims (12)

    【特許請求の範囲】
  1. 【請求項1】 仮想オブジェクトと接触判定オブジェク
    トを仮想空間に表現する画像表示端末装置、および前記
    仮想オブジェクトと前記接触判定オブジェクトの状態に
    応じて前記仮想空間を制御する仮想空間制御手段を有す
    る仮想空間システムにおいて、 風を受け止める送風受信部、および前記送風受信部が受
    けた風圧を操作者に圧力として提示する圧力提示部を有
    する送風受信手段と、 前記送風受信部に対し風を噴出する送風噴出手段と、 前記送風受信手段の位置や向き等を検出する送風受信部
    検出手段と、 前記送風受信部検出手段により検出された前記送風受信
    手段の位置や向き等の情報に応じて、前記送風受信手段
    を取り付けた又はそれを一部とする物体を前記仮想空間
    に前記接触判定オブジェクトとして投影する送風受信部
    投影手段と、 前記仮想空間内での前記接触判定オブジェクトと仮想オ
    ブジェクトとの状態に応じて、前記仮想空間での両者の
    接触力を計算する仮想接触力計算手段と、 前記仮想空間内での前記接触判定オブジェクトと前記仮
    想オブジェクトの位置および時間に対する位置の変化に
    応じて、前記仮想空間内での前記両者の仮想空間内にお
    ける接触タイミングを計算する視覚的接触タイミング計
    算手段と、 前記仮想接触力計算手段の計算結果と、前記視覚的接触
    タイミング計算手段の計算結果に応じて、前記送風噴出
    手段が噴出する風を計算する送風噴出計算手段と、 前記送風噴出計算手段の計算結果に応じて、前記送風噴
    出手段が噴出する風を制御する送風噴出制御手段と、を
    備えたことを特徴とする力覚提示装置。
  2. 【請求項2】 請求項1において、 前記仮想空間内での前記接触判定オブジェクトと前記仮
    想オブジェクトの位置および時間に対する位置の変化に
    応じて、前記仮想空間内での前記両者の仮想空間内にお
    ける仮想接触位置を計算する視覚的接触位置計算手段
    と、 前記視覚的接触位置計算手段の計算結果に応じて、前記
    送風受信手段が風を受ける現実空間の力覚提示位置を計
    算する力覚提示位置計算手段と、 前記力覚提示位置計算手段の計算結果に応じて、前記送
    風噴出手段から噴出した送風が前記力覚提示位置に到達
    するまでの時間を計算する送風到達時間計算手段とを備
    え、 前記送風噴出計算手段が、前記仮想接触力計算手段の計
    算結果と、前記視覚的接触タイミング計算手段の計算結
    果と、前記送風到達時間計算手段の計算結果に応じて、
    前記送風噴出手段が噴出する風を計算することを特徴と
    する力覚提示装置。
  3. 【請求項3】 請求項2において、 前記仮想接触力計算手段の計算結果に応じて、前記送風
    受信手段が風を受ける力覚提示タイミングをシフトさせ
    る時間を計算する力覚提示タイミングシフト計算手段
    と、 前記力覚提示タイミングシフト計算手段の計算結果と、
    前記視覚的接触タイミング計算手段の計算結果に応じ
    て、前記送風噴出手段から力覚提示するタイミングを計
    算する力覚提示タイミング計算手段とを備え、 前記送風噴出計算手段が、前記仮想接触力計算手段の計
    算結果と、前記力覚提示タイミング計算手段の計算結果
    と、前記送風到達時間計算手段の計算結果に応じて、前
    記送風噴出手段が噴出する風を計算することを特徴とす
    る力覚提示装置。
  4. 【請求項4】 請求項1〜3のいずれか1項において、 前記仮想空間内での前記接触判定オブジェクトと前記仮
    想オブジェクトの位置および時間に対する位置の変化に
    応じて、前記仮想空間内での前記両者の仮想空間内にお
    ける接触している時間の長さを計算する視覚的接触時間
    計算手段と、 前記視覚的接触時間計算手段の計算結果と、前記仮想接
    触力計算手段の計算結果に応じて、前記送風噴出手段か
    らの風を受ける現実空間の力覚提示する間の時間を計算
    する力覚提示時間計算手段を備え、 前記送風噴出計算手段が、前記力覚提示時間計算手段の
    計算結果と、前記仮想接触力計算手段の計算結果と、前
    記視覚的接触タイミング計算手段または前記力覚提示タ
    イミング計算手段の計算結果に応じて、前記送風噴出手
    段が噴出する風を計算することを特徴とする力覚提示装
    置。
  5. 【請求項5】 請求項1〜4のいずれか1項において、 前記仮想空間は遠隔仮想空間反映手段を備え、 前記遠隔仮想空間反映手段が通信ネットワークを介して
    他の仮想空間システムから送られてくる前記仮想オブジ
    ェクトを前記仮想空間に表現すると共に、仮想オブジェ
    クトを前記通信ネットワークを介して前記他の仮想空間
    システムに送信することを特徴とする力覚提示装置。
  6. 【請求項6】 請求項1〜5のいずれか1項において、 前記仮想空間は遠隔仮想空間反映手段を備え、 前記遠隔仮想空間反映手段が通信ネットワークを介して
    他の仮想空間システムから送られてくる前記仮想オブジ
    ェクトを前記仮想空間に表現すると共に、前記接触判定
    オブジェクトを前記通信ネットワークを介して前記他の
    仮想空間システムに仮想オブジェクトとして送信するこ
    とを特徴とする力覚提示装置。
  7. 【請求項7】 仮想オブジェクトと接触判定オブジェク
    トを仮想空間に表現する画像表示端末装置、および前記
    仮想オブジェクトと前記接触判定オブジェクトの状態に
    応じて前記仮想空間を制御する仮想空間制御手段を有す
    る仮想空間システムにおいて、 風を受け止める送風受信部、および前記送風受信部が受
    けた風圧を操作者に圧力として提示する圧力提示部を有
    する送風受信手順と、 前記送風受信部に対し風を噴出する送風噴出手順と、 前記送風受信手順の位置や向き等を検出する送風受信部
    検出手順と、 前記送風受信部検出手順により検出された前記送風受信
    手順の位置や向き等の情報に応じて、前記送風受信手順
    を取り付けた又はそれを一部とする物体を前記仮想空間
    に前記接触判定オブジェクトとして投影する送風受信部
    投影手順と、 前記仮想空間内での前記接触判定オブジェクトと仮想オ
    ブジェクトとの状態に応じて、前記仮想空間での両者の
    接触力を計算する仮想接触力計算手順と、 前記仮想空間内での前記接触判定オブジェクトと前記仮
    想オブジェクトの位置および時間に対する位置の変化に
    応じて、前記仮想空間内での前記両者の仮想空間内にお
    ける接触タイミングを計算する視覚的接触タイミング計
    算手順と、 前記仮想接触力計算手順の計算結果と、前記視覚的接触
    タイミング計算手順の計算結果に応じて、前記送風噴出
    手順が噴出する風を計算する送風噴出計算手順と、 前記送風噴出計算手順の計算結果に応じて、前記送風噴
    出手順が噴出する風を制御する送風噴出制御手順と、を
    備えたことを特徴とする力覚提示方法。
  8. 【請求項8】 請求項7において、 前記仮想空間内での前記接触判定オブジェクトと前記仮
    想オブジェクトの位置および時間に対する位置の変化に
    応じて、前記仮想空間内での前記両者の仮想空間内にお
    ける仮想接触位置を計算する視覚的接触位置計算手順
    と、 前記視覚的接触位置計算手順の計算結果に応じて、前記
    送風受信手順が風を受ける現実空間の力覚提示位置を計
    算する力覚提示位置計算手順と、 前記力覚提示位置計算手順の計算結果に応じて、前記送
    風噴出手順から噴出した送風が前記力覚提示位置に到達
    するまでの時間を計算する送風到達時間計算手順とを備
    え、 前記送風噴出計算手順が、前記仮想接触力計算手順の計
    算結果と、前記視覚的接触タイミング計算手順の計算結
    果と、前記送風到達時間計算手順の計算結果に応じて、
    前記送風噴出手順が噴出する風を計算することを特徴と
    する力覚提示方法。
  9. 【請求項9】 請求項8において、 前記仮想接触力計算手順の計算結果に応じて、前記送風
    受信手順が風を受ける力覚提示タイミングをシフトさせ
    る時間を計算する力覚提示タイミングシフト計算手順
    と、 前記力覚提示タイミングシフト計算手順の計算結果と、
    前記視覚的接触タイミング計算手順の計算結果に応じ
    て、前記送風噴出手順から力覚提示するタイミングを計
    算する力覚提示タイミング計算手順とを備え、 前記送風噴出計算手順が、前記仮想接触力計算手順の計
    算結果と、前記力覚提示タイミング計算手順の計算結果
    と、前記送風到達時間計算手順の計算結果に応じて、前
    記送風噴出手順が噴出する風を計算することを特徴とす
    る力覚提示方法。
  10. 【請求項10】 請求項7〜9のいずれか1項におい
    て、 前記仮想空間内での前記接触判定オブジェクトと前記仮
    想オブジェクトの位置および時間に対する位置の変化に
    応じて、前記仮想空間内での前記両者の仮想空間内にお
    ける接触している時間の長さを計算する視覚的接触時間
    計算手順と、 前記視覚的接触時間計算手順の計算結果と、前記仮想接
    触力計算手順の計算結果に応じて、前記送風噴出手順か
    らの風を受ける現実空間の力覚提示する間の時間を計算
    する力覚提示時間計算手順を備え、 前記送風噴出計算手順が、前記力覚提示時間計算手順の
    計算結果と、前記仮想接触力計算手順の計算結果と、前
    記視覚的接触タイミング計算手順または前記力覚提示タ
    イミング計算手順の計算結果に応じて、前記送風噴出手
    順が噴出する風を計算することを特徴とする力覚提示方
    法。
  11. 【請求項11】 請求項7〜10のいずれか1項におい
    て、 前記仮想空間は遠隔仮想空間反映手順を備え、 前記遠隔仮想空間反映手順が通信ネットワークを介して
    他の仮想空間システムから送られてくる前記仮想オブジ
    ェクトを前記仮想空間に表現すると共に、仮想オブジェ
    クトを前記通信ネットワークを介して前記他の仮想空間
    システムに送信することを特徴とする力覚提示方法。
  12. 【請求項12】 請求項7〜11のいずれか1項におい
    て、 前記仮想空間は遠隔仮想空間反映手順を備え、 前記遠隔仮想空間反映手順が通信ネットワークを介して
    他の仮想空間システムから送られてくる前記仮想オブジ
    ェクトを前記仮想空間に表現すると共に、前記接触判定
    オブジェクトを前記通信ネットワークを介して前記他の
    仮想空間システムに仮想オブジェクトとして送信するこ
    とを特徴とする力覚提示方法。
JP2002055213A 2002-03-01 2002-03-01 力覚提示装置および力覚提示方法 Pending JP2003256105A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002055213A JP2003256105A (ja) 2002-03-01 2002-03-01 力覚提示装置および力覚提示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002055213A JP2003256105A (ja) 2002-03-01 2002-03-01 力覚提示装置および力覚提示方法

Publications (1)

Publication Number Publication Date
JP2003256105A true JP2003256105A (ja) 2003-09-10

Family

ID=28666102

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002055213A Pending JP2003256105A (ja) 2002-03-01 2002-03-01 力覚提示装置および力覚提示方法

Country Status (1)

Country Link
JP (1) JP2003256105A (ja)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1768011A1 (en) * 2004-07-15 2007-03-28 Nippon Telegraph and Telephone Corporation Inner force sense presentation device, inner force sense presentation method, and inner force sense presentation program
JP2008305208A (ja) * 2007-06-07 2008-12-18 Nippon Telegr & Teleph Corp <Ntt> 力覚提示装置及び力覚提示方法
CN100472406C (zh) * 2004-07-15 2009-03-25 日本电信电话株式会社 力觉提示装置以及力觉提示方法
US8239145B2 (en) 2004-12-13 2012-08-07 Nippon Telegraph And Telephone Corporation Method, device and program for presenting inner force sense and program
JP2013011960A (ja) * 2011-06-28 2013-01-17 Kyocera Corp 表示機器
JP2013539570A (ja) * 2010-07-21 2013-10-24 サムスン エレクトロニクス カンパニー リミテッド データ送信装置及び方法
KR101557025B1 (ko) 2008-11-14 2015-10-05 삼성전자주식회사 3차원 인터페이스 장치 및 이를 이용한 인터페이스 방법
JP2017224324A (ja) * 2009-03-12 2017-12-21 イマージョン コーポレーションImmersion Corporation 摩擦ディスプレイシステム及び方法、並びに付加的な触覚効果
JP2018110005A (ja) * 2009-03-12 2018-07-12 イマージョン コーポレーションImmersion Corporation 摩擦ディスプレイ中に特徴を提供するためのシステムと方法
JP2018124859A (ja) * 2017-02-02 2018-08-09 日本電信電話株式会社 体感装置、その方法、およびデータ構造

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100472406C (zh) * 2004-07-15 2009-03-25 日本电信电话株式会社 力觉提示装置以及力觉提示方法
EP1768011A4 (en) * 2004-07-15 2011-01-12 Nippon Telegraph & Telephone INTERNAL STRENGTH DISPLAY DEVICE, METHOD, AND PROGRAM
US7889170B2 (en) 2004-07-15 2011-02-15 Nippon Telegraph And Telephone Corporation Inner force sense presentation device, inner force sense presentation method, and inner force sense presentation program
EP1768011A1 (en) * 2004-07-15 2007-03-28 Nippon Telegraph and Telephone Corporation Inner force sense presentation device, inner force sense presentation method, and inner force sense presentation program
US8239145B2 (en) 2004-12-13 2012-08-07 Nippon Telegraph And Telephone Corporation Method, device and program for presenting inner force sense and program
JP2008305208A (ja) * 2007-06-07 2008-12-18 Nippon Telegr & Teleph Corp <Ntt> 力覚提示装置及び力覚提示方法
KR101557025B1 (ko) 2008-11-14 2015-10-05 삼성전자주식회사 3차원 인터페이스 장치 및 이를 이용한 인터페이스 방법
JP2018110005A (ja) * 2009-03-12 2018-07-12 イマージョン コーポレーションImmersion Corporation 摩擦ディスプレイ中に特徴を提供するためのシステムと方法
US10466792B2 (en) 2009-03-12 2019-11-05 Immersion Corporation Systems and methods for friction displays and additional haptic effects
US10073526B2 (en) 2009-03-12 2018-09-11 Immersion Corporation Systems and methods for friction displays and additional haptic effects
JP2017224324A (ja) * 2009-03-12 2017-12-21 イマージョン コーポレーションImmersion Corporation 摩擦ディスプレイシステム及び方法、並びに付加的な触覚効果
US9753940B2 (en) 2010-07-21 2017-09-05 Samsung Electronics Co., Ltd. Apparatus and method for transmitting data
JP2013539570A (ja) * 2010-07-21 2013-10-24 サムスン エレクトロニクス カンパニー リミテッド データ送信装置及び方法
JP2013011960A (ja) * 2011-06-28 2013-01-17 Kyocera Corp 表示機器
JP2018124859A (ja) * 2017-02-02 2018-08-09 日本電信電話株式会社 体感装置、その方法、およびデータ構造

Similar Documents

Publication Publication Date Title
EP3425481B1 (en) Control device
US10860105B2 (en) Haptically enabled flexible devices
JP7338626B2 (ja) 情報処理装置、情報処理方法及びプログラム
KR101678880B1 (ko) 가상 키보드 출력 장치 및 제어 방법
KR101639066B1 (ko) 가상 공간에 형성된 가상 모델을 제어하는 방법 및 시스템
US9906856B2 (en) Hand-held information processing apparatus
EP3009914A1 (en) Haptically-enabled deformable device with rigid component
US10474238B2 (en) Systems and methods for virtual affective touch
US8847883B2 (en) Input apparatus, input method, and control system
JP2003256105A (ja) 力覚提示装置および力覚提示方法
US20100245238A1 (en) Input device and method, information processing device and method, information processing system, and program
US20150015607A1 (en) Using vortices to provide tactile sensations corresponding to a visual presentation
US20180164885A1 (en) Systems and Methods For Compliance Illusions With Haptics
TW202019532A (zh) 應用於虛擬實境之電競座艙
EP3367216A1 (en) Systems and methods for virtual affective touch
JPWO2008111245A1 (ja) 仮想感覚提示装置
JPH0816137A (ja) 3次元座標入力装置及びカーソル表示制御方式
KR102559138B1 (ko) 차량용 비 접촉식 제어 시스템
CN111868667A (zh) 信息处理装置、信息处理方法和程序
US20210200301A1 (en) Information processing apparatus, display control method, and program
US20200286298A1 (en) Systems and methods for a user interaction proxy
JP2003067107A (ja) 触覚提示装置
JP7344354B2 (ja) 情報処理プログラム、情報処理装置、情報処理方法、および情報処理システム
JP2001022499A (ja) 仮想空間における風圧による力覚提示装置
WO2021193421A1 (ja) 情報処理装置、情報処理方法、プログラム及び情報処理システム