JP2019075096A - 複数の周辺機器によるハプティック効果 - Google Patents

複数の周辺機器によるハプティック効果 Download PDF

Info

Publication number
JP2019075096A
JP2019075096A JP2018171298A JP2018171298A JP2019075096A JP 2019075096 A JP2019075096 A JP 2019075096A JP 2018171298 A JP2018171298 A JP 2018171298A JP 2018171298 A JP2018171298 A JP 2018171298A JP 2019075096 A JP2019075096 A JP 2019075096A
Authority
JP
Japan
Prior art keywords
haptic
devices
force
enabled
effect
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018171298A
Other languages
English (en)
Inventor
ダニー グラント
Danny Grant
ダニー グラント
ウィリアム エス. リーン
S Rihn William
ウィリアム エス. リーン
レオナルド ソスキン
Soskin Leonard
レオナルド ソスキン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of JP2019075096A publication Critical patent/JP2019075096A/ja
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • A63F13/28Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • A63F13/285Generating tactile feedback signals via the game input device, e.g. force feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/24Constructional details thereof, e.g. game controllers with detachable joystick handles
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】複数の周辺機器を使用して触覚を表現する。【解決手段】ハプティック可能システム100は、ハプティック可能装置135、137の動きを検出する検出器110を含む。ハプティック可能システムはさらに、再生するハプティック効果を符号化するハプティック信号を生成するハプティックレンダラ130と、ハプティック信号を受信し、それぞれのハプティック効果を適用するハプティック可能装置135、137とを含む。ハプティック可能システムは、予め設計されたハプティック効果データベース125を含み、このデータベースから、予め設計されたハプティック効果を得る。【選択図】図1

Description

例示的な実施形態は位置感知でハプティック効果を提供することに関し、より詳細には、複数の周辺機器を使用してハプティック効果を提供することに関する。
従来のゲームシステムおよび仮想現実(「VR」)/拡張現実(「AR」)システムにおける新たな傾向は、複数の周辺機器を使用することである。より現実的な経験を提供するために、これらのシステムのいくつかは、複数の周辺機器の6自由度(「6DoF」)の動きを検出する。これらのシステムはまた、一般に、周辺機器自体の動きまたは周辺機器によって表される物体の動きのみに基づいて、運動感覚または触覚フィードバック(「ハプティックフィードバック」と一般に呼ばれる)を提供する。
一実施形態は2つのハプティック可能装置のそれぞれの位置を感知し、それぞれの位置の感知に基づいて2つのハプティック可能装置のうちの少なくとも1つにハプティック効果を適用することによって、複数の周辺機器を使用して触覚を表現する。
例示的な実施形態は、添付の図面と併せて以下の詳細な説明からより明確に理解されるのであろう。図1〜5Bは、本明細書に記載される非限定的な例示的な実施形態を表す。
図1は、例示的な実施形態によるハプティック可能システムのブロック図である。 図2Aは、例示的な実施形態によるハプティック可能装置の図である。 図2Bは、例示的な実施形態によるハプティック可能装置の図である。 図2Cは、例示的な実施形態によるハプティック可能装置の図である。 図3は、例示的な実施形態による、ハプティック可能装置におけるシステムのブロック図である。 図4は、例示的な実施形態による、位置感知を伴う触覚の表現のフローチャートである。 図5Aは、例示的な実施形態による標準的な磁石によって生成される磁場の画像である。図5Bは、例示的な実施形態によるプログラマブル磁石によって生成される磁場の画像である。
例示的な実施形態は、位置感知を伴うハプティック効果を提供することを対象とする。
例示的な実施形態は複数の周辺機器間に力を及ぼすことによってハプティック効果を提供し、それにより、より没入的な体験をもたらすことを対象とする。
触覚(ハプティクス)は、触覚フィードバック技術および/または運動感覚フィードバック技術であり、個人の触覚を使用する個人に対して、力、振動、および動きなどのハプティックフィードバック効果(「ハプティックフィードバック」または「ハプティック効果」としても知られる)を生成する。ハプティック可能装置は、ハプティック効果を適用するように構成された埋め込みハードウェア(例えば、アクチュエータまたは他の出力機構)を含み得る。埋め込まれたハードウェアは、一般に、ハプティック効果の特定のセットを適用する(または再生する)ようにプログラムされる。どのハプティック効果を再生するかを指定する信号がハプティック可能装置によって受信されると、ハプティック可能装置は、指定されたハプティック効果を表現する。例えば、個人がハプティックイベントを経験しようとする場合、ハプティック可能装置の埋め込みハードウェアは、制御回路を介して再生コマンドを受信する。次いで、埋め込まれたハードウェアは、適切なハプティック効果を適用する。
例示的な実施形態は、互いに力を及ぼす少なくとも2つのハプティック可能装置によるハプティック効果の適用を対象とする。それらの間に及ぼされる力を使用してハプティック効果を適用することによって、例示的な実施形態は、より没入的な体験を提供する。
例えば、ビデオゲームをプレイする個人が2つの交互の円のジェスチャベースのパターンで彼女/彼の手を動かすことによって「呪文を唱える」ために手の空間追跡を使用するとき、振動ハプティック効果は、コントローラの各々に力を及ぼすことによって、彼女/彼の手の各々のコントローラに適用される。力の大きさは、コントローラ間の距離に比例する、または反比例することができる。
図1は、例示的な実施形態によるハプティック可能システムのブロック図である。
図1を参照すると、ハプティック可能システム100は、ハプティック可能装置135、137の動きを検出する検出器110を含む。ハプティック可能システム100はさらに、再生するハプティック効果を符号化するハプティック信号を生成するハプティックレンダラ130と、ハプティック信号を受信し、それぞれのハプティック効果を適用するハプティック可能装置135、137とを含む。ハプティック可能システム100は、予め設計されたハプティック効果データベース125を含むことができ、このデータベースから、予め設計されたハプティック効果が得られる。
検出器110、予め設計されたハプティック効果データベース125、およびハプティックレンダラ130は、ハプティックホストシステム105内にあってもよい。ハプティックホストシステム105は、個人によって保持されるハプティック可能装置135、137に電気的かつ無線で接続することができる。ハプティックホストシステム105は、ゲーム・コンソールまたはホスト・コンピュータとすることができ、ハプティック可能装置135、137は、ハンドヘルド・ゲーム・コントローラまたはVRコントローラとすることができる。
しかし、例示的な実施形態は、これに限定されない。例えば、検出器110は、ハプティックホストシステム105から分離することができる。
一実施形態例では、ハプティック可能システム100がVRシステムまたはARシステムで使用することができる。別の例として、ハプティック可能システム100は、ゲーム、スポーツイベント放送、手術、またはユーザナビゲーションを含む環境のために使用され得る。
検出器110は、ハプティック可能装置135、137の動きを検出し、検出された動き情報をハプティック可能装置135、137内のセンサ141に送信するように構成される。あるいは、センサ141は、ハプティック可能装置135、137の動きを検出することができる。
図2A、2B、および2Cは、例示的な実施形態による、ハプティック可能な、接地されていない装置の図である。
図2A、図2Bおよび図2Cを参照すると、ハプティック可能装置235、237は、それぞれ、例えば、ゲームシステム用の別個の周辺機器(例えば、ハンドヘルドコントローラ、ゲームパッド、コンピュータマウス、トラックボール、キーボード、タブレット、マイクロフォン、およびヘッドセットなどのインターフェース装置、またはベストなどのウェアラブル)とすることができる。代替的に、ハプティック可能装置235、237は、単一の周辺装置(例えば、単一のコントローラ)を集合的に形成することができる。例えば、ハプティック可能装置235は、ハプティック可能装置235、237が一緒にされたときに、単一の人間工学的制御装置がゲームシステムのために形成されるように、ハプティック可能装置237の形状に一致または組み合う形状であり得る。例えば、「L」形状に置かれた場合、ハプティック可能装置235、237は、ハンドガンを形成するためにインターロックすることができる。例示的な実施形態では、ハプティック可能装置235、237の収容部は、装置をインターロックさせるように変形することができる。
ハプティック可能装置235、237は、入力構成要素242a、242b(例えば、サムスティック(thumbstick)、トリガボタン(trigger button)、および/またはプッシュボタン(push button))を含み得る。
一部の例示的実施形態によれば、ハプティック可能装置235、237は、1つまたは複数の取り付け領域240a、240bおよび/または244a、244bを含むことができる。力出力装置238a、238bおよび/または246a、246bは、取り付け領域240a、240bおよび/または244a、244b内にあり得る。力出力装置238a、238bおよび/または246a、246bは、それぞれ、力場を生成することができる。ハプティック可能装置235内の力出力装置238aまたは246aのうちの1つまたは複数によって生成される力場がハプティック可能装置237内の力出力装置238b、246bのうちの1つまたは複数によって生成される力場と相互作用する場合、力は、ハプティック可能装置235、237に及ぼされる。力は、ハプティック可能装置235、237内の内部センサ(図1の要素141)および/またはハプティック可能装置235、237に結合された外部センサ(図1の要素143)によって感知される。
力出力装置238a、238bおよび/または246a、264bは、図2Bに示されるように、磁気的であり得る。しかし、例示的な実施形態は、これに限定されず、ハプティック可能装置235、237に力を加える他の手段を使用することができる。
例えば、図2Bに示されるように、ハプティック可能装置235に取り付けられたテザー245は、テザー245、247の端部に取り付けられた磁石249を介して、ハプティック可能装置237に取り付けられたテザー247に磁気的に結合することができる。テザー245、247は、ハプティック可能装置235、237間の一時的または永久的な結合を提供することができる。
別の例示的な実施形態では、テザー245、247は、ハプティック可能装置235、237を一緒に引っ張るために作動され得る。
さらに別の例示的な実施形態では、ハプティック可能装置235のみが、ハプティック可能装置237の取り付け領域に結合する、および/またはハプティック可能装置235、237を一緒に引っ張るように作動されるテザーを含むことができる。
図2Cに示されるように、ハプティック可能装置235、237は、それぞれ、個人が着用するストラップ248に取り付けることができる。
例示的な実施形態は、テザーに限定されず、したがって、ハプティック可能装置235、237を一緒に引っ張るために使用される他の機構が使用され得る。
例えば、他の例示的実施形態によれば、ハプティック可能装置235、237の間に及ぼされる力は、ハプティック可能装置235、237の一方または両方によって放出される強制空気によって引き起こされ得る。強制空気は、例えば、ハプティック可能装置235、237上の力出力装置(図1の要素139および140)によって放出することができる。例えば、力出力装置は、空気のパフを放出する空気ジェットとすることができる。
他の例示的な実施形態によれば、音波の乱れは、ハプティック可能装置235、237の間に及ぼされる力を引き起こし得る。音波は、ハプティック可能装置235、237のそれぞれにおいて、位相調整されたまたは位相調整されていない超音波アレイによって生成され得る。例えば、ハプティック可能装置235上の第1の超音波アレイは、ハプティック可能装置237に向かって第1のビームを放射することができる。同様に、ハプティック可能装置237上の第2の超音波アレイは、ハプティック可能装置235に向かって第2のビームを放射することができる。
位相超音波アレイでは、超音波アレイの1つまたは複数のプローブから放出されたビーム(複数可)が移動せずに集束され、電子的に掃引される。
非位相超音波アレイでは、ビームはプローブから固定された方向に放射される。
例示的な実施形態では、ハプティック可能装置235、237は、両方とも、1人の個人の制御下にあり得る。別の例示的な実施形態では、ハプティック可能装置235、237は、それぞれ、異なる個人の制御下にあり得る。
再び図1を参照すると、ハプティック可能装置135、137の各々の位置が検知される。例示的実施形態によれば、ハプティック可能装置135、137の絶対位置または相対位置を感知することができる。絶対位置は、測定システムの基準フレームに対するハプティック可能装置の相対位置である。相対位置は、ハプティック可能装置135、137の互いに対する位置である。
ハプティック可能装置135、137の位置は、ハプティック可能装置135、137内のセンサ141を使用して感知することができる。センサ141は、ハプティック可能装置135、137の慣性の変化を検出する慣性センサとすることができる。慣性センサのいくつかの例は、加速度計およびジャイロスコープを含む。
別の例示的な実施形態では、ハプティック可能装置135、137の位置は、外部センサ143から得られたハプティック可能装置135、137の画像を分析することによって感知することができる。外部センサ143は、ハプティック可能装置135、137の画像を取り込む光学記録機器(例えば、カメラ)であり得る。
センサ141および/または143は、ハプティック可能装置135、137の絶対位置または相対位置を感知し、感知された位置に基づいて感知された位置情報を生成する。センサ141および/または143は、感知された位置情報をハプティックレンダラ130に送信する。
ハプティックレンダラ130は、ハプティック表現アルゴリズムを使用して、感知された位置情報の機能としてハプティックコマンドを計算し、ハプティック可能装置135、137のためのハプティックコマンドを符号化する触覚信号を生成する。したがって、センサ141および/または143によって感知されるハプティック可能装置135、137の位置は、ハプティック表現アルゴリズムにおいて変数として考慮される。例えば、ハプティック効果が連続的な周期である場合、周期の大きさは、ハプティック可能装置135、137間の相対距離に正比例する。
例示的な実施形態によれば、ハプティックレンダラ130は、予め設計されたハプティック効果データベース125に格納された予め設計された効果のルックアップテーブルから予め設計された効果を選択することができる。選択の際に、予め設計されたハプティック効果は、ハプティック効果を追加すること、使用不可能なハプティック効果を除去すること、または予め設計されたハプティック効果の少なくとも1つのパラメータ(例えば、位置、大きさ(または強度)、周波数、持続時間など)を変更すること(または編集すること)によって、感知された位置情報に基づいて修正され得る。
例示的な実施形態によれば、特定のハプティック効果を定義する高レベルパラメータは、位置、大きさ、頻度、および持続時間を含む。ストリーミング・モータ・コマンドなどの低レベル・パラメータを使用してハプティック効果を表現することもできる。これらのパラメータのいくつかの変化量は、ハプティック効果の感触を変化させることができ、および/またはさらに、ハプティック効果を「動的」とみなすことができる。
ハプティックレンダラ130は、ハプティック可能装置135、137にハプティック信号を送信する。
ハプティック効果は、ハプティック可能装置135、137によって適用される。ハプティック効果は、互いの間または互いに及ぼされる力を与えるハプティック可能装置135、137によって適用される。ハプティック可能装置135は、ハプティック可能装置137にフォースフィードバック感覚を提供し、その逆も同様である。
例示的な実施形態では、ハプティック可能装置135、137の間に及ぼされる力は、ハプティック可能装置135の力出力装置139によって生成される力場と、ハプティック可能装置137の力出力装置140によって生成される力場との相互作用から生成することができる。したがって、ハプティック可能装置135によって生成される力場は、ハプティック可能装置137上にフォースフィードバック感覚を提供し、その逆も同様である。
力出力装置139、140は、標準的な磁石、プログラム可能な磁石、または力場を生成することが知られている他の装置であり得る。電磁石は、ハプティック可能装置135、137が互いに通過するときに、触覚戻り止めを作り出すために使用することができる。例えば、弓と矢の相互作用に関して、ハプティック可能装置135、137(一方は弓を表し、他方は矢を表す)を共に結合し、ハプティック可能装置135、137を共に配置して矢をノッチングする、短いハプティック効果が表現され得る。ハプティック可能装置135、137が引き離されると、抵抗ハプティック効果が適用されて、矢の引き絞りをシミュレートする。触覚コマンドは、ハプティック可能装置135、137の間に加えられる力の強度に基づいて、再生されるハプティック効果の大きさを指定することができる。
図5Aは、例示的な実施形態による標準的な磁石によって生成される磁場の画像である。
図5Bは、例示的な実施形態によるプログラマブル磁石によって生成される磁場の画像である。
図5Aにおいて、単一の極性および強度の磁場を有する単一のまたは個々の磁気要素を含む標準的な磁石(例えば、電磁石)によって生成される磁場505Aの画像が示される。
例示的な実施形態によれば、プログラマブル磁石を使用して、ハプティック可能装置135、137が互いに対して移動するときに、所望の挙動でハプティック可能装置135、137の間のハプティック効果を表現することができる。
図5Bには、複数の磁気素子(各ピーク507によって表される)を含むプログラマブル磁石によって生成される磁界505Bの画像が示される。複数の磁気素子の各々は、各種強度および極性の磁界を有する。一対のプログラマブル磁石がその上の磁気素子が互いに向かい合うまたは対向するように互いに向かい合うまたは対向するとき、対応する向かい合う磁気素子は、所望の挙動を達成するように設計された予めプログラムされた相関パターンを形成する。プログラム可能な挙動は、様々なサイズ、位置、配向、および飽和の複数の磁気素子を含む多極構造を作り出すことによって達成される。図5Bは、単一のまたは個々の表面または基板上に66個の磁気素子(それぞれピーク507の1つによって表される)を有するプログラマブル磁石を示すが、特定の数の磁気素子は例示的であり、例示のみのために使用される。磁気素子の数は、用途に応じて変えることができる。図5Bにおいて、各磁気素子は、同じ強度および極性を有するが、任意の磁気素子の磁気強度および極性は所望の挙動を達成するためにそれぞれ変化させることができる。したがって、プログラマブル磁石は、任意の磁気素子の磁気強度および極性が所望の挙動を達成するために設計または選択されるという意味でプログラマブルである。しかし、磁石のプログラマブルな態様または性質はプログラマブル磁石が各種強度および極性の複数の磁気素子で形成された後に完成し、したがって、プログラマブル磁石は、「ワンタイム」プログラマブル磁石とみなすことができる。
力出力装置139、140は、前述の磁石以外に、ハプティック可能装置135、137に力を及ぼす形態で例示することができる。例えば、力出力装置139、140は、テザー、超音波アレイ、および/または強制空気の形態であり得る。
振動触覚ハプティック効果、変形ハプティック効果、超音波ハプティック効果、および/または静電摩擦ハプティック効果など、及ぼされる力の結果として適用されるハプティック効果以外のハプティック効果を適用することができる。ハプティック効果の適用は、触覚源、変形源、超音波源および/または静電気源を使用して振動を適用することを含むことができる。
例示的な実施形態によれば、ハプティック効果(複数可)の大きさは、ハプティック可能装置135、137間の距離に比例することができる。例えば、ビデオゲームをプレイする個人が「呪文」を唱えるために手の空間追跡を使用する必要がある場合、個人は、2つの交互の円のジェスチャベースのパターンで、自分の手の中でハプティック可能装置を動かすことができる。個人の右手の第1のハプティック可能装置が個人の左手の第2のハプティック可能装置の近くに移動される場合、第1のハプティック可能装置によって適用されるハプティック効果の大きさは、増加し得る。第1のハプティック可能装置が第2のハプティック可能装置から離れて移動される場合、第1のハプティック可能装置によって適用されるハプティック効果の大きさは、減少し得る。逆に、第2のハプティック可能装置が第1のハプティック可能装置の近くに移動される場合、第2のハプティック可能装置によって適用されるハプティック効果の大きさは増加し得る。第2のハプティック可能装置が第1のハプティック可能装置から離れて移動される場合、第2のハプティック可能装置によって適用されるハプティック効果の大きさは、減少し得る。
代替の例示的な実施形態によれば、ハプティック効果の大きさは、ハプティック可能装置135、137間の距離に反比例することができる。例えば、個人の右手の第1のハプティック可能装置が個人の左手の第2のハプティック可能装置の近くに移動される場合、第1の可能装置によって適用されるハプティック効果の大きさは、減少し得る。第1のハプティック可能装置が第2のハプティック可能装置から離れて移動される場合、第1のハプティック可能装置によって適用されるハプティック効果の大きさは増加し得る。逆に、第2のハプティック可能装置が第1のハプティック可能装置の近くに移動される場合、第2のハプティック可能装置によって適用されるハプティック効果の大きさは減少し得る。第2のハプティック可能装置が第1のハプティック可能装置から離れて移動される場合、第2のハプティック可能装置によって適用されるハプティック効果の大きさは、増加し得る。
例示的実施形態によるハプティック可能装置135、137の各々は、触覚出力装置142も含むことができる。触覚出力装置142は、触覚駆動信号に応答して、振動触覚ハプティック効果、静電摩擦ハプティック効果、変形ハプティック効果、超音波ハプティック効果などの任意の形態のハプティック効果を出力するように構成された機構を含む装置である。
触覚出力装置142は、ハプティック効果を適用するために、圧電アクチュエータまたは電気活性ポリマー(「EAP」)アクチュエータなどの電気機械アクチュエータとすることができる。例示的な実施形態では、圧電アクチュエータがセラミックアクチュエータまたはマクロファイバ複合材(「MFC」)アクチュエータとすることができる。しかし、例示的な実施形態は、これに限定されない。例えば、触覚出力装置142および力出力装置139、140に加えて、電気モータ、電磁アクチュエータ、ボイスコイル、形状記憶合金、ソレノイド、偏心回転質量モータ(「ERM」)、直線状共振アクチュエータ(「LRA」)、または高帯域幅アクチュエータを使用することができる。
代替的な例示的実施形態では、直流(「DC」)モータを、触覚出力装置142の代わりに、またはそれに加えて、使用して、振動を加えることができる。
他の例示的な実施形態ではハプティック可能装置135、137は、ハプティック効果を適用するための非機械的装置を含むことができる。非機械的装置は実際の(または自然の)動きを生成する感覚刺激と同じ速度で発射する電流を使用して筋紡錘を励起するためにユーザの筋紡錘の近くに埋め込まれた電極、静電摩擦(「ESF」)または超音波表面摩擦(「USF」)を使用するデバイス、超音波触覚トランスデューサで音響放射圧力を誘導するデバイス、触覚基板および可撓性または変形可能な表面または形状変更デバイスを使用し、個人の身体に取り付けることができるデバイス、強制空気(例えば、空気ジェットを使用する空気のパフ)、レーザベース発射体、音響ベース発射体などの投射触覚出力を提供するデバイスを含むことができる。
例示的な実施形態によれば、レーザベースの発射体は、レーザエネルギーを使用して、プラズマ(正および負の粒子の濃縮された混合物)を提供するように、空気の中央の濃縮領域内の空気分子をイオン化する。レーザは、非常に速く非常に強いペースでパルスを放射するフェムト秒レーザとすることができる。レーザーが速ければ速いほど、人間はより安全に触れる。レーザベースの発射体は、触覚的で相互作用的なホログラムとして見えることができる。プラズマが個体の皮膚と接触すると、個体は、集中した領域内の活性化された空気分子の振動を感知することができる。個々の皮膚上の感覚は、個体が中空のプラズマと相互作用するときに発生する波によって引き起こされる。したがって、個人をプラズマ濃縮領域に曝すことによって、個体にハプティック効果を提供することができる。あるいはまたはさらに、ハプティック効果は、指向性音エネルギーによって生成される振動に個人をさらすことによって、個人に提供され得る。
例示的な実施形態によれば、ハプティック可能システム100は、ハプティック可能装置135、137の各々の6自由度(「6DoF」)の動きを検出するように構成され得る。6Dofは、並進(例えば、前方/後方、上/下、および/または左/右)および配向(例えば、法線軸(ヨー)、横軸(ピッチ)および縦軸(ロール)に沿った)における位置を変化させることによる、3次元空間における身体の移動の自由を指す。
ハプティック可能システム100は、ハプティック効果を表現するときに個人にイベントを表示する視覚ディスプレイ150を含むことができる。視覚ディスプレイ150は、ゲームシステム、仮想現実/拡張現実システム、スポーツ放送システム、または類似のシステムの一部とすることができる。
図3は、例示的な実施形態による、ハプティック可能装置におけるシステムのブロック図である。図3の構成要素のいくつかまたはすべては、図1の要素のいずれかを実施するために使用することもできる。
図3を参照すると、例示的な実施形態によるハプティック可能装置内のシステム300は、装置に触覚機能を提供する。
単一のシステムとして示されているが、システム300の機能は、分散システムとして実装することができる。システム300は、情報を通信するためのバス304または他の通信機構と、情報を処理するためにバス304に結合されたプロセッサ314とを含む。プロセッサ314は、任意のタイプの汎用または特定目的のプロセッサとすることができる。システム300はさらに、プロセッサ314によって実行される情報および命令を記憶するためのメモリ302を含む。メモリ302は、ランダムアクセスメモリ(「RAM」)、リードオンリーメモリ(「ROM」)、磁気または光ディスクなどの静的記憶装置、または任意の他のタイプの非一時的コンピュータ可読媒体の任意の組合せから構成することができる。
非一時的なコンピュータ可読媒体は、プロセッサ314によってアクセスされ得る任意の利用可能な媒体であり得、揮発性および不揮発性媒体、リムーバブルおよび非リムーバブルメディア、通信媒体、および記憶媒体の両方を含み得る。通信媒体は、コンピュータ可読命令、データ構造、プログラムモジュール、または搬送波もしくは他の伝達機構などの変調データ信号内の他のデータを含むことができ、当技術分野で知られている任意の他の形態の情報配信媒体を含むことができる。記憶媒体は、RAM、フラッシュメモリ、ROM、消去可能プログラマブルリードオンリメモリ(「EPROM」)、電気的消去可能プログラマブルリードオンリメモリ(「EEPROM」)、レジスタ、ハードディスク、リムーバブルディスク、コンパクトディスクリードオンリメモリ(「CD−ROM」)、または当技術分野で知られている任意の他の形態の記憶媒体を含むことができる。
例示的な実施形態によれば、メモリ302は、プロセッサ314によって実行されると機能を提供するソフトウェアモジュールを記憶する。ソフトウェアモジュールは、システム300のオペレーティングシステム機能を提供するオペレーティングシステム306、ならびにハプティック可能装置の残りを含む。ソフトウェアモジュールはまた、触覚システム305を含むことができ、触覚システム305は、2つのハプティック可能装置の位置を感知し、2つのハプティック可能装置が互いに力を及ぼすことによってハプティック機能を提供する。しかし、例示的な実施形態は、これに限定されない。例えば、ハプティックシステム305は、例えば、2つ以上のハプティック可能装置と通信する中央ゲームコンソールにおいて、ハプティック可能装置の外部にあり得る。ソフトウェアモジュールはさらに、オーディオ−ハプティック変換アルゴリズムなどの他のアプリケーション308を含む。
システム300は、赤外線、無線、Wi−Fi、またはセルラーネットワーク通信のための無線ネットワーク通信を提供する通信装置312(例えば、ネットワークインターフェースカード)をさらに含むことができる。あるいは、通信装置312は、有線ネットワーク接続(例えば、ケーブル/イーサネット(登録商標)/光ファイバ接続、またはモデム)を提供することができる。
プロセッサ314はさらに、バス304を介して、グラフィカル表現またはユーザインターフェースをエンドユーザに表示するための視覚ディスプレイ340(例えば、発光ディスプレイ(「LED」)または液晶ディスプレイ(「LCD」))に結合される。視覚ディスプレイ340は、プロセッサ314から信号を送受信するように構成されたタッチ感知入力装置(すなわち、タッチスクリーン)とすることができ、マルチタッチタッチスクリーン(multi−touch touch screen)とすることができる。
システム300は、ハプティック出力装置342をさらに含む。プロセッサ314は、ハプティック効果に関連するハプティック信号をハプティック出力装置342に送信することができ、ハプティック出力装置342は、ハプティック効果(例えば、振動ハプティックハプティック効果または変形ハプティック効果)を出力する。
図4は、例示的な実施形態による触覚(ハプティクス)の表現のフローチャートである。
図4を参照すると、例による触覚の表現は、450において、2つのハプティック可能装置のうちの少なくとも1つの動きを検出することと、460において、2つのハプティック可能装置のそれぞれの位置を感知することとを含む。
2つのハプティック可能装置のそれぞれの位置の感知は、慣性センサまたは光学記録機器のうちの少なくとも1つを使用することを含むことができる。慣性センサは、2つのハプティック可能装置内にそれぞれ配置することができる。光学記録機器は、2つのハプティック可能装置の外部に配置することができる。
470において、ハプティック効果は、2つのハプティック可能装置の感知された位置を変数として有するハプティック表現アルゴリズムを使用して計算され得る。
ハプティック効果の計算は、ハプティック効果を適用する位置、大きさ、周波数、持続時間などのような1つ以上のパラメータを決定することを含むことができる。
例示的な実施形態によれば、検出された動き全体ではなく、検出された動きのある部分のみを感知し、触覚化することができる。
代替または追加の例示的な実施形態では、ハプティック効果の計算が事前に設計されたハプティック効果データベースから(例えば、事前に設計されたハプティック効果データベースに格納された事前に設計された効果のルックアップテーブルに基づいて)事前に設計されたハプティック効果を選択することを含むことができる。選択の際に、事前に設計されたハプティック効果は、2つのハプティック可能装置の感知された位置に基づいて、ハプティック効果の少なくとも1つのパラメータを変更(または編集)することによって、修正または調整され得る。修正またはチューニングは、ハプティックエディタ(ハプティックメタデータに対して編集を行う人)、ハプティック修正ツール(ハプティックレンダラなど)などによって実行することができる。
480において、ハプティック効果は、位置の感知に基づいて、2つのハプティック可能装置のうちの少なくとも1つによって適用される。ハプティック効果は、互いに力を及ぼす2つのハプティック可能装置によって適用される。2つのハプティック可能装置間に及ぼされる力は、第1のハプティック可能装置内の力出力装置によって生成される力場と、第2のハプティック可能装置内の力出力装置によって生成される力場との相互作用から生成され得る。力出力装置は、標準的な磁石、プログラム可能な磁石、または力場を生成することが知られている他の装置であり得る。あるいは、上記でさらに詳細に説明したように、テザー、強制空気、または超音波アレイを使用して、2つのハプティック可能装置間に力を及ぼすことができる。
ハプティック可能装置に及ぼされる力の大きさは、ハプティック効果の所望の大きさに対応することができる。
ハプティック効果は、2つのハプティック可能装置に力が及ぼされたときに抵抗力を加えることによって適用されることができる。例えば、個人が仮想物体を圧迫しているときに抵抗力を加えることができる。別の例示的な実施形態として、例えば、車両の動きにおける外乱を表すために、押圧力を2つのハプティック可能装置に及ぼすことができる。さらに別の例として、引っ張り力を、例えば、上述した弓と矢の相互作用において、2つのハプティック可能装置に及ぼすことができる。ハプティックコマンドは再生されるべきハプティック効果の所望の大きさを指定することができ、2つのハプティック可能装置間に及ぼされる力の強度は、所望の大きさに対応する。
ハプティック効果の大きさは、2つのハプティック可能装置間の距離に比例する、または反比例することができる。例えば、抵抗力(2つのハプティック可能装置間に力が及ぼされるときに加えられる)は、2つのハプティック可能装置間の距離が増加することにつれて増加することができ、抵抗力は、2つのハプティック可能装置間の距離が減少することにつれて減少することができる。あるいは抵抗力は、2つのハプティック可能装置間の距離が増加することにつれて減少し得、抵抗力は、2つのハプティック可能装置間の距離が減少することにつれて増加し得る。
例示的な実施形態によれば、ハプティック効果を表現することは、2つのハプティック可能装置の位置感知と、2つのハプティック可能装置間に力を及ぼすことによって、2つのハプティック可能装置の感知された位置に基づいてハプティック効果を適用することとを含み、それによって、空間認識追跡を使用して、2つのハプティック可能装置上に触覚を表現する。
上記は各種例示的な実施形態を例示するものであり、それらを限定するものとして解釈されるべきではない。したがって、そのような修正はすべて、特許請求の範囲に定義される本開示の範囲内に含まれることが意図される。

Claims (20)

  1. ハプティック可能システムにおいて触覚を表現する方法であって、
    2つのハプティック可能装置の各位置を検知するステップと、
    前記各位置の検知に基づいて、前記2つのハプティック可能装置の少なくとも1つにハプティック効果を適用するステップと、
    を備える方法。
  2. 前記2つのハプティック可能装置の各位置を検知するステップは、(i)前記2つのハプティック可能装置内にそれぞれ位置決めされる慣性センサ、又は(ii)前記2つのハプティック可能装置の外部に位置決めされる光学記録機器のうちの少なくとも1つを用いることを含む、請求項1に記載の方法。
  3. 前記ハプティック効果の大きさは、前記2つのハプティック可能装置間の距離に比例する又は反比例する、請求項1に記載の方法。
  4. 前記ハプティック効果を適用するステップは、前記2つのハプティック可能装置間に力を及ぼすことを含み、
    前記力は、(i)前記2つのハプティック可能装置のうちの第2のハプティック可能装置に第1のフォースフィードバック感覚を提供する前記2つのハプティック可能装置のうちの第1のハプティック可能装置、又は(ii)前記第1のハプティック可能装置に第2のフォースフィードバック感覚を提供する前記第2のハプティック可能装置、の少なくとも1つによって発生される、請求項1に記載の方法。
  5. 前記ハプティック効果を適用するステップは、前記2つのハプティック可能装置間に力を及ぼすために、マグネット、テザー、強制空気又は超音波アレイのうちの少なくとも1つを用いることを含む、
    請求項1に記載の方法。
  6. 前記ハプティック効果を適用するステップは、押圧力又は引張力が前記2つのハプティック可能装置に及ぼされるときに、抵抗力を適用することを含む、
    請求項1に記載の方法。
  7. 前記ハプティック可能システムは、前記2つのハプティック可能装置の6自由度(6DoF)移動を検出するように構成される、請求項1に記載の方法。
  8. 前記ハプティック効果を適用するステップは、前記2つのハプティック可能装置間に力を及ぼすことを含み、
    前記ハプティック可能装置に及ぼされる前記力の大きさは、前記ハプティック効果の所望の大きさに対応する、請求項7に記載の方法。
  9. ハプティック可能システムであって、少なくとも2つのハプティック可能装置の各位置に基づいてハプティック効果を適用するように各々が構成される前記少なくとも2つのハプティック可能装置を備えるハプティック可能システム。
  10. (i)前記2つのハプティック可能装置内にそれぞれ位置決めされる慣性センサ、又は(ii)前記2つのハプティック可能装置の外部に位置決めされる光学記録機器のうちの少なくとも1つを更に備え、
    前記2つのハプティック可能装置の各位置は、前記慣性センサ又は前記光学記録機器のうちの少なくとも1つを用いて検知される、請求項9に記載のハプティック可能システム。
  11. 前記ハプティック効果の大きさは、前記2つのハプティック可能装置間の距離に比例する又は反比例する、請求項9に記載のハプティック可能システム。
  12. 前記少なくとも2つのハプティック可能装置は、(i)前記2つのハプティック可能装置のうちの第2のハプティック可能装置に第1のフォースフィードバック感覚を提供するように構成される前記2つのハプティック可能装置のうちの第1のハプティック可能装置、又は(ii)前記第1のハプティック可能装置に第2のフォースフィードバック感覚を提供するように構成される前記第2のハプティック可能装置、の少なくとも1つによって前記ハプティック効果を適用するように各々が構成される、請求項9に記載のハプティック可能システム。
  13. 前記第1のフォースフィードバック感覚の大きさは、前記第1のハプティック可能装置によって適用される第1のハプティック効果の所望の大きさに対応し、
    前記第2のフォースフィードバック感覚の大きさは、前記第2のハプティック可能装置によって適用される第2のハプティック効果の所望の大きさに対応する、
    請求項12に記載のハプティック可能システム。
  14. 前記少なくとも2つのハプティック可能装置のうちの少なくとも1つの上の力出力装置であって、前記少なくとも2つのハプティック可能装置間に力を及ぼすように構成される、力出力装置を更に備え、
    前記力出力装置は、マグネット、テザー、強制空気又は超音波アレイのうちの少なくとも1つである、請求項9に記載のハプティック可能システム。
  15. 前記少なくとも2つのハプティック可能装置は、押圧力又は引張力が前記2つのハプティック可能装置に及ぼされるときに、抵抗力の形態で前記ハプティック効果を適用するように各々が構成される、請求項9に記載のハプティック可能システム。
  16. 前記ハプティック可能システムは、前記2つのハプティック可能装置の6自由度(6DoF)移動を検出するように構成される、請求項9に記載のハプティック可能システム。
  17. プロセッサによって実行されるときに、前記プロセッサに、
    2つのハプティック可能装置の各位置を検知することと、
    前記各位置の検知に基づいて、前記2つのハプティック可能装置の少なくとも1つにハプティック効果を適用することと、
    を備える動作を実行させる、格納された命令を有する非一時的コンピュータ可読媒体。
  18. 前記ハプティック効果を適用することは、前記2つのハプティック可能装置間に力を及ぼすことを含み、
    前記力は、(i)前記2つのハプティック可能装置のうちの第2のハプティック可能装置に第1のフォースフィードバック感覚を提供する前記2つのハプティック可能装置のうちの第1のハプティック可能装置、又は(ii)前記第1のハプティック可能装置に第2のフォースフィードバック感覚を提供する前記第2のハプティック可能装置、の少なくとも1つによって発生される、請求項17に記載の非一時的コンピュータ可読媒体。
  19. 前記ハプティック効果を適用することは、前記2つのハプティック可能装置間に力を及ぼすことを含み、
    前記ハプティック可能装置に及ぼされる前記力の大きさは、前記ハプティック効果の所望の大きさに対応し、
    前記ハプティック効果の所望の大きさは、前記2つのハプティック可能装置間の距離に比例する又は反比例する、請求項17に記載の非一時的コンピュータ可読媒体。
  20. 前記ハプティック効果を適用することは、前記2つのハプティック可能装置間に力を及ぼすために、マグネット、テザー、強制空気又は超音波アレイのうちの少なくとも1つを用いることを含む、請求項17に記載の非一時的コンピュータ可読媒体。

JP2018171298A 2017-10-11 2018-09-13 複数の周辺機器によるハプティック効果 Pending JP2019075096A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/730,154 2017-10-11
US15/730,154 US20190105562A1 (en) 2017-10-11 2017-10-11 Haptic effects with multiple peripheral devices

Publications (1)

Publication Number Publication Date
JP2019075096A true JP2019075096A (ja) 2019-05-16

Family

ID=63722263

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018171298A Pending JP2019075096A (ja) 2017-10-11 2018-09-13 複数の周辺機器によるハプティック効果

Country Status (5)

Country Link
US (1) US20190105562A1 (ja)
EP (1) EP3470960A1 (ja)
JP (1) JP2019075096A (ja)
KR (1) KR20190040897A (ja)
CN (1) CN109656353A (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018159854A1 (ja) * 2017-03-03 2018-09-07 日本電信電話株式会社 力覚提示物および力覚提示方法
WO2020217230A1 (ru) * 2019-04-25 2020-10-29 Константин БОРИСОВ Универсальное беспроводное управляющее устройство
US10951951B2 (en) * 2019-07-30 2021-03-16 Sony Interactive Entertainment Inc. Haptics metadata in a spectating stream
CN110720982B (zh) * 2019-10-29 2021-08-06 京东方科技集团股份有限公司 增强现实系统、基于增强现实的控制方法以及装置
KR102251308B1 (ko) * 2020-08-05 2021-05-12 플레이스비 주식회사 햅틱 컨트롤러 및 이를 이용한 햅틱 피드백 제공 시스템 및 방법
KR102394769B1 (ko) * 2020-10-27 2022-05-06 플레이스비 주식회사 햅틱 컨트롤러와 근전도 센서를 이용한 햅틱 피드백 제공 시스템 및 방법

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0322489D0 (en) * 2003-09-25 2003-10-29 British Telecomm Haptics transmission systems
US7890863B2 (en) * 2006-10-04 2011-02-15 Immersion Corporation Haptic effects with proximity sensing
US20140320392A1 (en) * 2013-01-24 2014-10-30 University Of Washington Through Its Center For Commercialization Virtual Fixtures for Improved Performance in Human/Autonomous Manipulation Tasks
US9207764B2 (en) * 2013-09-18 2015-12-08 Immersion Corporation Orientation adjustable multi-channel haptic device
US20150187188A1 (en) * 2013-12-30 2015-07-02 Aliphcom Communications using tactile stimuli on wearable devices
US9588586B2 (en) * 2014-06-09 2017-03-07 Immersion Corporation Programmable haptic devices and methods for modifying haptic strength based on perspective and/or proximity
US10449445B2 (en) * 2014-12-11 2019-10-22 Elwha Llc Feedback for enhanced situational awareness
US9646471B2 (en) * 2015-09-30 2017-05-09 Apple Inc. User interface using tactile output
US10198074B2 (en) * 2016-02-18 2019-02-05 Immersion Corporation Haptically-enabled modular peripheral device assembly
US10709975B2 (en) * 2016-06-29 2020-07-14 Intel Corporation Systems and methods for manipulating a virtual object
EP3340012A1 (en) * 2016-12-26 2018-06-27 CaptoGlove International Limited Haptic interaction method, tool and system

Also Published As

Publication number Publication date
CN109656353A (zh) 2019-04-19
KR20190040897A (ko) 2019-04-19
EP3470960A1 (en) 2019-04-17
US20190105562A1 (en) 2019-04-11

Similar Documents

Publication Publication Date Title
JP2019075096A (ja) 複数の周辺機器によるハプティック効果
US10509468B2 (en) Providing fingertip tactile feedback from virtual objects
US10466791B2 (en) Interactivity model for shared feedback on mobile devices
JP6141474B2 (ja) モバイルデバイス上での共有されたフィードバックのための双方向性モデル
US10416767B2 (en) Haptic information presentation system and method
EP2778855B1 (en) User interface device
JP6612522B2 (ja) 没入型環境における非コロケートな触覚キュー
KR20200000803A (ko) 가상 현실 사용자를 위한 실세계 햅틱 상호작용
US20120223880A1 (en) Method and apparatus for producing a dynamic haptic effect
EP3364272A1 (en) Automatic localized haptics generation system
Emgin et al. Haptable: An interactive tabletop providing online haptic feedback for touch gestures
JP2007331066A (ja) 接触提示装置及び方法
KR20180066865A (ko) 햅틱들을 가지는 컴플라이언스 착시들을 위한 시스템들 및 방법
JP2019121368A (ja) 直観的な触覚設計
Arafsha et al. Contactless haptic feedback: State of the art
Shinoda The University of Tokyo, 5-1-5 Kashiwano-Ha, Kashiwa 277-8561, Chiba, Japan hiroyuki_shinoda@ ku-tokyo. ac. jp