JP6906580B6 - ビューポートベースの拡張現実触覚効果のシステム、方法及び非一時的コンピュータ可読媒体 - Google Patents
ビューポートベースの拡張現実触覚効果のシステム、方法及び非一時的コンピュータ可読媒体 Download PDFInfo
- Publication number
- JP6906580B6 JP6906580B6 JP2019181221A JP2019181221A JP6906580B6 JP 6906580 B6 JP6906580 B6 JP 6906580B6 JP 2019181221 A JP2019181221 A JP 2019181221A JP 2019181221 A JP2019181221 A JP 2019181221A JP 6906580 B6 JP6906580 B6 JP 6906580B6
- Authority
- JP
- Japan
- Prior art keywords
- virtual
- physical object
- tactile
- user
- augmented reality
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Description
本発明の開示の一例示実施形態はスマートフォン等の携帯デバイスを含む。携帯デバイスはタッチスクリーンディスプレイ、メモリ、カメラ、及びこれらの要素のそれぞれと通信するプロセッサを含む。タッチスクリーンディスプレイはビューポートを含む。ビューポートはスクリーンの領域から構成され、ここでデータ(例えば、テキスト又は画像)が表示される。いくつかの実施形態では、ビューポートはスクリーンの全領域から構成されてもよい。
図1は、1つの実施形態によるビューポートベースの拡張現実触覚効果のためのシステム100を示すブロック図である。図示される実施形態では、システム100はバス106を介して他のハードウェアと通信するプロセッサ102を備えるコンピュータデバイス101を含む。コンピュータデバイス101には、例えば、スマートフォン、タブレット、電子書籍リーダ、ラップトップコンピュータ、携帯ゲームデバイス、頭部に装着するディスプレイ、又は眼鏡が挙げられる。
図6は、1つの実施形態によるビューポートベースの拡張現実触覚効果を提供するための方法を実行するためのステップのフローチャートである。いくつかの実施形態では、図6のステップは、例えば、汎用目的コンピュータ、携帯デバイス、又はサーバのプロセッサであるであるプロセッサによって実行されるプログラムコードによって実装されることができる。いくつかの実施形態では、これらのステップは一群のプロセッサによって実装されてもよい。いくつかの実施形態では、図6に示される1つ以上のステップは省略、又は、異なる順番で実行されてもよい。同様に、いくつかの実施形態では、図6に図示しない追加のステップが実行されてもよい。以下のステップは図1に示されるシステム100に関連して上述されたコンポーネントを参照して記述される。
図7は別の実施形態によるビューポートベースの拡張現実触覚効果のためのシステムを示す。この実施例では、システム700は表面706(例えば、床)に位置したコンピュータデバイス702を含む。コンピュータデバイス702はディスプレイ708及びカメラ710を備える。この実施例では、コンピュータデバイス702はキオスクを含む。
ビューポートベースの拡張現実触覚効果を持つことは非常に有利である。ユーザが仮想オブジェクトと相互作用する場合に拡張現実アプリケーションによって触覚フィードバックを提供すると、ユーザは仮想オブジェクトのさまざまな態様をより現実味を帯びて知覚することができるので、ユーザの総合的な満足感が増大する。例えば、いくつかの実施形態では、拡張現実アプリケーションはカメラデータにオーバレイさせた仮想のトラを出力することができる。仮想のトラに関連するタッチスクリーンディスプレイ領域をユーザが指で移動させる等のイベントが発生すると、コンピュータデバイスは毛をシミュレートする肌触りを出力することができる。結果として、ユーザは仮想のトラをより現実的に知覚することができる。
上記で論じた方法、システム、及びデバイスは一例である。適切に、さまざまな構成を省略、代替でき、又は、さまざまな手順又はコンポーネントを追加できる。たとえば、代替構成では、方法は記載された順番と異なる順番で実施でき、及び/又は、多様なステージが追加、省略、及び/又は組み合わされることができる。また、特定の構成に関して記載された特徴は、さまざまな他の構成と組み合わせられてもよい。構成の異なる態様及び要素が同様に組み合わされてもよい。また、技術は発達するので、多くの要素が実施例となり、及び、それらが本発明の範囲又は請求の範囲を制限するものではない。
Claims (20)
- システムであって、
画像撮像デバイスと通信するプロセッサと、
プログラムコードを含むメモリと
を含み、
前記プログラムコードは、前記プロセッサにより実行されると前記プロセッサに、
画像撮像デバイスから物理的オブジェクトの画像を受信することと、
前記画像において前記物理的オブジェクトを特定することと、
前記物理的オブジェクトについての情報を決定することと、
前記物理的オブジェクトについての情報に基づいて、前記物理的オブジェクトの仮想表現とは異なる仮想オブジェクトを決定することと、
前記仮想オブジェクトを有する拡張現実環境をディスプレイデバイスに表示させることと、
前記拡張現実環境におけるイベントを検出することであって、前記イベントは前記仮想オブジェクトに関連付けられることと、
前記イベントに基づいて触覚出力デバイスに一の触覚効果を出力させることと
を行わせる、システム。 - 前記物理的オブジェクトについての情報は、前記物理的オブジェクトの型式、モデル、製造業者又はコンテンツを含む、請求項1のシステム。
- 前記物理的オブジェクトについての情報は、前記物理的オブジェクトのコンテンツを含み、
前記仮想オブジェクトは、前記物理的オブジェクトのコンテンツの仮想表現である、請求項2のシステム。 - 前記物理的オブジェクトについての情報は、前記物理的オブジェクトに関連する会社を含む、請求項1のシステム。
- 前記仮想オブジェクトは、前記物理的オブジェクトに関連する会社のロゴを含む、請求項4のシステム。
- 前記メモリはさらに、前記プロセッサにより実行されると前記プロセッサに、前記物理的オブジェクトについての情報を示す他の触覚効果を出力させるプログラムコードを含む、請求項1のシステム。
- 前記拡張現実環境は、前記仮想オブジェクトを、身体部分の仮想表現上に配置させるべく構成される、請求項1のシステム。
- 前記イベントは、前記拡張現実環境において前記身体部分の仮想表現に沿った前記仮想オブジェクトの動きを含む、請求項7のシステム。
- 方法であって、
プロセッサによって、画像撮像デバイスから物理的オブジェクトの画像を受信することと、
前記プロセッサによって、前記画像において前記物理的オブジェクトを特定することと、
前記プロセッサによって、前記物理的オブジェクトについての情報を決定することと、
前記プロセッサによって、前記物理的オブジェクトについての情報に基づいて、前記物理的オブジェクトの仮想表現とは異なる仮想オブジェクトを決定することと、
前記プロセッサによって、前記仮想オブジェクトを有する拡張現実環境をディスプレイデバイスに表示させることと、
前記プロセッサによって、前記拡張現実環境におけるイベントを検出することであって、前記イベントは前記仮想オブジェクトに関連付けられることと、
前記プロセッサによって、前記イベントに基づいて触覚出力デバイスに一の触覚効果を出力させることと
を含む、方法。 - 前記物理的オブジェクトについての情報は、前記物理的オブジェクトの型式、モデル、製造業者又はコンテンツを含む、請求項9の方法。
- 前記物理的オブジェクトについての情報は、前記物理的オブジェクトのコンテンツを含み、
前記仮想オブジェクトは、前記物理的オブジェクトのコンテンツの仮想表現である、請求項10の方法。 - 前記物理的オブジェクトについての情報は、前記物理的オブジェクトに関連する会社を含み、
前記仮想オブジェクトは、前記物理的オブジェクトに関連する会社のロゴを含む、請求項9の方法。 - 前記物理的オブジェクトについての情報を示す他の触覚効果を出力することをさらに含む、請求項9の方法。
- 前記拡張現実環境は、前記仮想オブジェクトを、身体部分の仮想表現上に配置させるべく構成され、
前記イベントは、前記拡張現実環境において前記身体部分の仮想表現に沿った前記仮想オブジェクトの動きを含む、請求項9の方法。 - 前記触覚出力デバイスは、ユーザが装着するように構成される物品に結合される、請求項9の方法。
- プログラムコードを含む非一時的コンピュータ可読媒体であって、
前記プログラムコードは、プロセッサにより実行されると前記プロセッサに、
画像撮像デバイスから物理的オブジェクトの画像を受信することと、
前記画像において前記物理的オブジェクトを特定することと、
前記物理的オブジェクトについての情報を決定することと、
前記物理的オブジェクトについての情報に基づいて、前記物理的オブジェクトの仮想表現とは異なる仮想オブジェクトを決定することと、
前記仮想オブジェクトを有する拡張現実環境をディスプレイデバイスに表示させることと、
前記拡張現実環境におけるイベントを検出することであって、前記イベントは前記仮想オブジェクトに関連付けられることと、
前記イベントに基づいて触覚出力デバイスに一の触覚効果を出力させることと
を行わせる、非一時的コンピュータ可読媒体。 - 前記物理的オブジェクトについての情報は、前記物理的オブジェクトの型式、モデル、製造業者又はコンテンツを含む、請求項16の非一時的コンピュータ可読媒体。
- 前記物理的オブジェクトについての情報は、前記物理的オブジェクトのコンテンツを含み、
前記仮想オブジェクトは、前記物理的オブジェクトのコンテンツの仮想表現である、請求項16の非一時的コンピュータ可読媒体。 - 前記物理的オブジェクトについての情報は、前記物理的オブジェクトに関連する会社を含み、
前記仮想オブジェクトは、前記物理的オブジェクトに関連する会社のロゴを含む、請求項16の非一時的コンピュータ可読媒体。 - 前記拡張現実環境は、前記仮想オブジェクトを、身体部分の仮想表現上に配置させるべく構成され、
前記イベントは、前記拡張現実環境において前記身体部分の仮想表現に沿った前記仮想オブジェクトの動きを含む、請求項16の非一時的コンピュータ可読媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/269,357 | 2014-05-05 | ||
US14/269,357 US9690370B2 (en) | 2014-05-05 | 2014-05-05 | Systems and methods for viewport-based augmented reality haptic effects |
JP2015092512A JP6598500B2 (ja) | 2014-05-05 | 2015-04-30 | ビューポートベースの拡張現実感触覚効果のシステム、方法及び非一時的コンピュータ可読媒体 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015092512A Division JP6598500B2 (ja) | 2014-05-05 | 2015-04-30 | ビューポートベースの拡張現実感触覚効果のシステム、方法及び非一時的コンピュータ可読媒体 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020042827A JP2020042827A (ja) | 2020-03-19 |
JP6906580B2 JP6906580B2 (ja) | 2021-07-21 |
JP6906580B6 true JP6906580B6 (ja) | 2021-08-25 |
Family
ID=53274362
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015092512A Active JP6598500B2 (ja) | 2014-05-05 | 2015-04-30 | ビューポートベースの拡張現実感触覚効果のシステム、方法及び非一時的コンピュータ可読媒体 |
JP2019181221A Active JP6906580B6 (ja) | 2014-05-05 | 2019-10-01 | ビューポートベースの拡張現実触覚効果のシステム、方法及び非一時的コンピュータ可読媒体 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015092512A Active JP6598500B2 (ja) | 2014-05-05 | 2015-04-30 | ビューポートベースの拡張現実感触覚効果のシステム、方法及び非一時的コンピュータ可読媒体 |
Country Status (5)
Country | Link |
---|---|
US (3) | US9690370B2 (ja) |
EP (2) | EP3540561A1 (ja) |
JP (2) | JP6598500B2 (ja) |
KR (1) | KR20150126780A (ja) |
CN (1) | CN105094311B (ja) |
Families Citing this family (77)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9690370B2 (en) | 2014-05-05 | 2017-06-27 | Immersion Corporation | Systems and methods for viewport-based augmented reality haptic effects |
DE102014106960A1 (de) * | 2014-05-16 | 2015-11-19 | Faindu Gmbh | Verfahren zur Darstellung einer virtuellen Interaktion auf zumindest einem Bildschirm und Eingabevorrichtung, System und Verfahren für eine virtuelle Anwendung mittels einer Recheneinheit |
CN106663365B (zh) * | 2014-07-17 | 2019-12-10 | 飞利浦灯具控股公司 | 基于用户输入获得控制系统的手势区域定义数据的方法 |
US9753539B2 (en) | 2014-10-02 | 2017-09-05 | Futureplay Inc. | Method, device, system and non-transitory computer-readable recording medium for providing user interface |
WO2016061267A1 (en) | 2014-10-15 | 2016-04-21 | Dirtt Environmental Solutions, Inc. | Virtual reality immersion with an architectural design software application |
US9733790B2 (en) | 2014-10-30 | 2017-08-15 | Disney Enterprises, Inc. | Haptic interface for population of a three-dimensional virtual environment |
US20160189427A1 (en) * | 2014-12-31 | 2016-06-30 | Immersion Corporation | Systems and methods for generating haptically enhanced objects for augmented and virtual reality applications |
US9763628B2 (en) | 2014-12-31 | 2017-09-19 | Immersion Corporation | Systems and methods for providing enhanced haptic feedback |
US20170061700A1 (en) * | 2015-02-13 | 2017-03-02 | Julian Michael Urbach | Intercommunication between a head mounted display and a real world object |
US10768704B2 (en) * | 2015-03-17 | 2020-09-08 | Whirlwind VR, Inc. | System and method for modulating a peripheral device based on an unscripted feed using computer vision |
JP6367166B2 (ja) * | 2015-09-01 | 2018-08-01 | 株式会社東芝 | 電子機器及び方法 |
KR101678455B1 (ko) * | 2015-10-14 | 2016-11-23 | 한국과학기술연구원 | 질감인지공간을 이용한 햅틱 속성 적용 장치 및 방법 |
CN106371574B (zh) * | 2015-12-04 | 2019-03-12 | 北京智谷睿拓技术服务有限公司 | 触觉反馈的方法、装置和虚拟现实交互系统 |
US9990078B2 (en) * | 2015-12-11 | 2018-06-05 | Immersion Corporation | Systems and methods for position-based haptic effects |
US10031580B2 (en) | 2016-01-13 | 2018-07-24 | Immersion Corporation | Systems and methods for haptically-enabled neural interfaces |
US20170285863A1 (en) * | 2016-03-31 | 2017-10-05 | Google Inc. | Conductive contacts for alignment of portable user device in vr viewer |
CN106020468A (zh) * | 2016-05-18 | 2016-10-12 | 翁明辉 | 一种手套控制的增强现实系统 |
CA3000008A1 (en) | 2016-06-10 | 2017-12-14 | Dirtt Environmental Solutions, Inc. | Mixed-reality and cad architectural design environment |
US10095311B2 (en) | 2016-06-15 | 2018-10-09 | Immersion Corporation | Systems and methods for providing haptic feedback via a case |
CN106155322A (zh) * | 2016-06-30 | 2016-11-23 | 联想(北京)有限公司 | 信息处理方法、电子设备以及控制系统 |
DE102016215481A1 (de) * | 2016-08-18 | 2018-02-22 | Technische Universität Dresden | System und Verfahren zur haptischen Interaktion mit virtuellen Objekten |
CN106371584B (zh) * | 2016-08-19 | 2020-02-21 | 联想(北京)有限公司 | 信息处理方法、电子设备及系统 |
CN106373086A (zh) * | 2016-09-29 | 2017-02-01 | 福州大学 | 一种基于增强现实的戒指2d在线实时试戴方法及系统 |
CN106485572A (zh) * | 2016-10-12 | 2017-03-08 | 大连文森特软件科技有限公司 | 一种基于视频图像特征点识别技术和虚拟现实技术的网上购物系统 |
US10593116B2 (en) | 2016-10-24 | 2020-03-17 | Snap Inc. | Augmented reality object manipulation |
EP3319361A1 (en) * | 2016-11-03 | 2018-05-09 | Alcatel Lucent | Method and apparatus for a radio communication network |
KR20180052330A (ko) * | 2016-11-10 | 2018-05-18 | 삼성전자주식회사 | 햅틱 효과를 제공하기 위한 방법 및 그 전자 장치 |
US20180138831A1 (en) * | 2016-11-17 | 2018-05-17 | Immersion Corporation | Control of Contact Conditions For Static ESF |
JP6754678B2 (ja) * | 2016-11-18 | 2020-09-16 | 株式会社バンダイナムコエンターテインメント | シミュレーションシステム及びプログラム |
US20180164885A1 (en) * | 2016-12-09 | 2018-06-14 | Immersion Corporation | Systems and Methods For Compliance Illusions With Haptics |
US10324531B2 (en) * | 2016-12-27 | 2019-06-18 | Immersion Corporation | Haptic feedback using a field of view |
US10511892B2 (en) * | 2016-12-30 | 2019-12-17 | DISH Technologies L.L.C. | Systems and methods for facilitating content discovery based on augmented context |
US20180232051A1 (en) * | 2017-02-16 | 2018-08-16 | Immersion Corporation | Automatic localized haptics generation system |
GB2560003B (en) * | 2017-02-24 | 2021-08-18 | Sony Interactive Entertainment Inc | Virtual reality |
GB2560004B (en) * | 2017-02-24 | 2020-11-25 | Sony Interactive Entertainment Inc | Virtual reality |
US10049276B1 (en) | 2017-02-28 | 2018-08-14 | DISH Technologies L.L.C. | Augmented reality installation/troubleshooting assistance |
US10639510B2 (en) * | 2017-03-20 | 2020-05-05 | The Trustees Of Columbia University In The City Of New York | Human musculoskeletal support and training system methods and devices |
US10984493B1 (en) | 2017-05-05 | 2021-04-20 | Wells Fargo Bank, N.A. | Augmented or virtual reality to scenario plan property purchase or renovation |
US10317990B2 (en) | 2017-05-25 | 2019-06-11 | International Business Machines Corporation | Augmented reality to facilitate accessibility |
US11158101B2 (en) | 2017-06-07 | 2021-10-26 | Sony Interactive Entertainment Inc. | Information processing system, information processing device, server device, image providing method and image generation method |
US10194078B2 (en) * | 2017-06-09 | 2019-01-29 | Immersion Corporation | Haptic enabled device with multi-image capturing abilities |
KR102364678B1 (ko) * | 2017-06-20 | 2022-02-18 | 엘지전자 주식회사 | 이동 단말기 |
US20190007726A1 (en) * | 2017-06-30 | 2019-01-03 | Intel Corporation | Audio, video, and actuation (a/v/a) synchronization for mixed reality |
DK180470B1 (en) * | 2017-08-31 | 2021-05-06 | Apple Inc | Systems, procedures, and graphical user interfaces for interacting with augmented and virtual reality environments |
US10607082B2 (en) * | 2017-09-09 | 2020-03-31 | Google Llc | Systems, methods, and apparatus for image-responsive automated assistants |
US10509962B2 (en) * | 2017-09-14 | 2019-12-17 | Ebay Inc. | Camera platform incorporating schedule and stature |
US11120515B1 (en) | 2017-11-03 | 2021-09-14 | Wells Fargo Bank, N.A. | Property enhancement analysis |
KR102029906B1 (ko) * | 2017-11-10 | 2019-11-08 | 전자부품연구원 | 이동수단의 가상현실 콘텐츠 제공 장치 및 방법 |
CN108182730B (zh) * | 2018-01-12 | 2022-08-12 | 北京小米移动软件有限公司 | 虚实对象合成方法及装置 |
DK201870347A1 (en) | 2018-01-24 | 2019-10-08 | Apple Inc. | Devices, Methods, and Graphical User Interfaces for System-Wide Behavior for 3D Models |
JP2019139403A (ja) * | 2018-02-08 | 2019-08-22 | 東京瓦斯株式会社 | 試着装置、サーバ装置および試着システム |
KR102499354B1 (ko) | 2018-02-23 | 2023-02-13 | 삼성전자주식회사 | 디스플레이를 통해 표시된 제 1 콘텐트에 대해 제 2 콘텐트를 외부 객체의 움직임에 따라 제공하기 위한 전자 장치 및 그의 동작 방법 |
US10572017B2 (en) * | 2018-04-20 | 2020-02-25 | Immersion Corporation | Systems and methods for providing dynamic haptic playback for an augmented or virtual reality environments |
US10977871B2 (en) | 2018-04-25 | 2021-04-13 | International Business Machines Corporation | Delivery of a time-dependent virtual reality environment in a computing system |
FR3080935B1 (fr) * | 2018-05-02 | 2020-05-22 | Argo | Procede et systeme de generation a la volee d'un contenu de realite augmentee sur un appareil utilisateur. |
CN108896156A (zh) * | 2018-05-11 | 2018-11-27 | 北京旷视科技有限公司 | 物品监控方法、装置及系统 |
US10818093B2 (en) | 2018-05-25 | 2020-10-27 | Tiff's Treats Holdings, Inc. | Apparatus, method, and system for presentation of multimedia content including augmented reality content |
US10984600B2 (en) | 2018-05-25 | 2021-04-20 | Tiff's Treats Holdings, Inc. | Apparatus, method, and system for presentation of multimedia content including augmented reality content |
KR20190140657A (ko) * | 2018-06-12 | 2019-12-20 | 삼성전자주식회사 | 오브젝트를 생성하는 전자장치 및 시스템 |
US11144113B2 (en) * | 2018-08-02 | 2021-10-12 | Firefly Dimension, Inc. | System and method for human interaction with virtual objects using reference device with fiducial pattern |
US11288733B2 (en) * | 2018-11-14 | 2022-03-29 | Mastercard International Incorporated | Interactive 3D image projection systems and methods |
US10845894B2 (en) | 2018-11-29 | 2020-11-24 | Apple Inc. | Computer systems with finger devices for sampling object attributes |
KR20200084586A (ko) * | 2019-01-03 | 2020-07-13 | 주식회사 웨이브컴퍼니 | 가상현실 공간의 감각 인지 시스템 및 방법 |
AU2019437374B2 (en) * | 2019-03-26 | 2023-08-31 | Telefonaktiebolaget Lm Ericsson (Publ) | Determining a transformation between coordinate systems in an ultrasonic haptic device and a visual sensor device |
GB2586060B (en) * | 2019-08-01 | 2022-09-21 | Sony Interactive Entertainment Inc | Surface characterisation apparatus and system |
US11503256B2 (en) | 2019-09-04 | 2022-11-15 | Material Technologies Corporation | Object feature visualization apparatus and methods |
KR20220007672A (ko) | 2019-09-04 | 2022-01-18 | 머티리얼 테크놀로지스 코포레이션 | 객체 특징부 시각화 장치 및 방법들 |
US11132850B1 (en) | 2020-03-24 | 2021-09-28 | International Business Machines Corporation | Augmented reality diagnostic interface |
WO2021193421A1 (ja) * | 2020-03-27 | 2021-09-30 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、プログラム及び情報処理システム |
KR102332318B1 (ko) * | 2020-07-22 | 2021-12-01 | 이화여자대학교 산학협력단 | 시공간 인코딩을 사용하여 가상 객체의 거칠기 촉각을 제공하기 위한 방법 및 시스템 |
EP4268053A4 (en) * | 2020-12-22 | 2024-01-31 | Telefonaktiebolaget LM Ericsson (publ) | MODERATION OF A USER'S SENSORY EXPERIENCE IN RELATION TO AN EXTENDED REALITY |
US12007561B2 (en) | 2020-12-22 | 2024-06-11 | Telefonaktiebolaget Lm Ericsson (Publ) | Methods and devices related to extended reality |
WO2023063161A1 (ja) * | 2021-10-12 | 2023-04-20 | ソニーグループ株式会社 | 情報処理システム、制御方法及び制御プログラム |
US11734929B2 (en) * | 2021-12-07 | 2023-08-22 | Marxent Labs Llc | Enhanced product visualization technology with web-based augmented reality user interface features |
US11790573B2 (en) | 2021-12-27 | 2023-10-17 | Dish Network Technologies India Private Limited | Systems and methods for using augmented reality for antenna adjustment |
CN114281195B (zh) * | 2021-12-27 | 2022-08-05 | 广东景龙建设集团有限公司 | 一种基于虚拟触觉手套的装配石材的选择方法及系统 |
KR102496927B1 (ko) | 2022-11-01 | 2023-02-07 | 김태원 | 촉감을 제공하는 성인 콘텐츠용 vr 장치 |
Family Cites Families (48)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS6271256A (ja) | 1985-09-25 | 1987-04-01 | Toshiba Corp | 化合物半導体集積回路 |
US8508469B1 (en) * | 1995-12-01 | 2013-08-13 | Immersion Corporation | Networked applications including haptic feedback |
US6211848B1 (en) * | 1998-05-15 | 2001-04-03 | Massachusetts Institute Of Technology | Dynamic holographic video with haptic interaction |
JP2002082751A (ja) | 2000-09-08 | 2002-03-22 | Mitsubishi Electric Corp | 仮想空間とのインタラクション装置およびこれを応用した仮想空間システム |
JP2002304246A (ja) * | 2001-04-04 | 2002-10-18 | Nippon Telegr & Teleph Corp <Ntt> | 力覚提示装置及び仮想空間システム |
KR20090096559A (ko) | 2001-11-01 | 2009-09-10 | 임머숀 코퍼레이션 | 촉각을 제공하기 위한 방법 및 장치 |
JP2003316493A (ja) | 2002-04-19 | 2003-11-07 | Seiko Epson Corp | 触覚提示装置 |
SE0203908D0 (sv) | 2002-12-30 | 2002-12-30 | Abb Research Ltd | An augmented reality system and method |
WO2006004894A2 (en) * | 2004-06-29 | 2006-01-12 | Sensable Technologies, Inc. | Apparatus and methods for haptic rendering using data in a graphics pipeline |
US7376903B2 (en) * | 2004-06-29 | 2008-05-20 | Ge Medical Systems Information Technologies | 3D display system and method |
US20060017654A1 (en) | 2004-07-23 | 2006-01-26 | Romo Justin R | Virtual reality interactivity system and method |
JP2006146803A (ja) * | 2004-11-24 | 2006-06-08 | Olympus Corp | 操作装置及び遠隔操作システム |
WO2006081198A2 (en) | 2005-01-25 | 2006-08-03 | The Board Of Trustees Of The University Of Illinois | Compact haptic and augmented virtual reality system |
US7920124B2 (en) * | 2006-08-29 | 2011-04-05 | Canon Kabushiki Kaisha | Force sense presentation device, mixed reality system, information processing method, and information processing apparatus |
JP4926799B2 (ja) | 2006-10-23 | 2012-05-09 | キヤノン株式会社 | 情報処理装置、情報処理方法 |
KR20100072198A (ko) | 2007-08-19 | 2010-06-30 | 링보우 리미티드 | 반지형 장치와 그 사용방법 |
JP4989383B2 (ja) | 2007-09-10 | 2012-08-01 | キヤノン株式会社 | 情報処理装置、情報処理方法 |
KR100927009B1 (ko) | 2008-02-04 | 2009-11-16 | 광주과학기술원 | 증강 현실에서의 햅틱 상호 작용 방법 및 그 시스템 |
JP2009276996A (ja) * | 2008-05-14 | 2009-11-26 | Canon Inc | 情報処理装置、情報処理方法 |
JP5344388B2 (ja) | 2008-07-10 | 2013-11-20 | 学校法人立命館 | 操作システム |
US8747116B2 (en) | 2008-08-21 | 2014-06-10 | Lincoln Global, Inc. | System and method providing arc welding training in a real-time simulated virtual reality environment using real-time weld puddle feedback |
US20100053151A1 (en) | 2008-09-02 | 2010-03-04 | Samsung Electronics Co., Ltd | In-line mediation for manipulating three-dimensional content on a display device |
US8344863B2 (en) * | 2008-12-10 | 2013-01-01 | Postech Academy-Industry Foundation | Apparatus and method for providing haptic augmented reality |
US9978288B2 (en) | 2009-02-13 | 2018-05-22 | University Of Florida Research Foundation, Inc. | Communication and skills training using interactive virtual humans |
US8009022B2 (en) | 2009-05-29 | 2011-08-30 | Microsoft Corporation | Systems and methods for immersive interaction with virtual objects |
US8542105B2 (en) | 2009-11-24 | 2013-09-24 | Immersion Corporation | Handheld computer interface with haptic feedback |
US8633916B2 (en) | 2009-12-10 | 2014-01-21 | Apple, Inc. | Touch pad with force sensors and actuator feedback |
WO2011106798A1 (en) * | 2010-02-28 | 2011-09-01 | Osterhout Group, Inc. | Local advertising content on an interactive head-mounted eyepiece |
US20130314303A1 (en) | 2010-02-28 | 2013-11-28 | Osterhout Group, Inc. | Ar glasses with user action control of and between internal and external applications with feedback |
CN101819462B (zh) | 2010-03-12 | 2011-07-20 | 东南大学 | 基于力/触觉交互设备的图像纹理的力触觉再现系统 |
US20110310227A1 (en) | 2010-06-17 | 2011-12-22 | Qualcomm Incorporated | Mobile device based content mapping for augmented reality environment |
KR101390383B1 (ko) * | 2010-11-16 | 2014-04-29 | 한국전자통신연구원 | 가상현실 기반 훈련 시뮬레이터를 위한 가변형 플랫폼 관리 장치 |
WO2012096666A1 (en) * | 2011-01-13 | 2012-07-19 | 2Empire Technology Development Llc | Haptic feedback device using electro-rheological fluid |
CA3035118C (en) * | 2011-05-06 | 2022-01-04 | Magic Leap, Inc. | Massive simultaneous remote digital presence world |
US20130002425A1 (en) | 2011-07-01 | 2013-01-03 | General Electric Company | Augmented reality excessive noise display and warning system |
US20130265300A1 (en) * | 2011-07-03 | 2013-10-10 | Neorai Vardi | Computer device in form of wearable glasses and user interface thereof |
US20130100008A1 (en) | 2011-10-19 | 2013-04-25 | Stefan J. Marti | Haptic Response Module |
RU2621633C2 (ru) | 2011-10-28 | 2017-06-06 | Мэджик Лип, Инк. | Система и способ для дополненной и виртуальной реальности |
US9323330B2 (en) * | 2011-12-15 | 2016-04-26 | Industry-University Cooperation Foundation Hanyang University | Apparatus and method for providing tactile sensation for virtual image |
WO2013118373A1 (ja) * | 2012-02-10 | 2013-08-15 | ソニー株式会社 | 画像処理装置、画像処理方法及びプログラム |
US9041622B2 (en) * | 2012-06-12 | 2015-05-26 | Microsoft Technology Licensing, Llc | Controlling a virtual object with a real controller device |
US20140198130A1 (en) | 2013-01-15 | 2014-07-17 | Immersion Corporation | Augmented reality user interface with haptic feedback |
US9854014B2 (en) * | 2013-03-14 | 2017-12-26 | Google Inc. | Motion data sharing |
US9092954B2 (en) | 2013-03-15 | 2015-07-28 | Immersion Corporation | Wearable haptic device |
US9619027B2 (en) * | 2013-07-12 | 2017-04-11 | Disney Enterprises, Inc. | Using vortices to provide tactile sensations corresponding to a visual presentation |
US10345903B2 (en) * | 2013-07-30 | 2019-07-09 | Microsoft Technology Licensing, Llc | Feedback for optic positioning in display devices |
US20150262428A1 (en) | 2014-03-17 | 2015-09-17 | Qualcomm Incorporated | Hierarchical clustering for view management augmented reality |
US9690370B2 (en) | 2014-05-05 | 2017-06-27 | Immersion Corporation | Systems and methods for viewport-based augmented reality haptic effects |
-
2014
- 2014-05-05 US US14/269,357 patent/US9690370B2/en active Active
-
2015
- 2015-04-29 KR KR1020150060499A patent/KR20150126780A/ko not_active Application Discontinuation
- 2015-04-30 JP JP2015092512A patent/JP6598500B2/ja active Active
- 2015-05-01 EP EP19170814.8A patent/EP3540561A1/en not_active Ceased
- 2015-05-01 EP EP15166146.9A patent/EP2942693B1/en active Active
- 2015-05-05 CN CN201510224738.0A patent/CN105094311B/zh not_active Expired - Fee Related
-
2017
- 2017-05-19 US US15/600,141 patent/US9946336B2/en active Active
-
2018
- 2018-03-13 US US15/919,260 patent/US10444829B2/en not_active Expired - Fee Related
-
2019
- 2019-10-01 JP JP2019181221A patent/JP6906580B6/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US20180239418A1 (en) | 2018-08-23 |
JP6906580B2 (ja) | 2021-07-21 |
JP6598500B2 (ja) | 2019-10-30 |
EP2942693A1 (en) | 2015-11-11 |
US10444829B2 (en) | 2019-10-15 |
EP2942693B1 (en) | 2019-07-10 |
US20170255255A1 (en) | 2017-09-07 |
CN105094311B (zh) | 2020-06-12 |
CN105094311A (zh) | 2015-11-25 |
KR20150126780A (ko) | 2015-11-13 |
US9690370B2 (en) | 2017-06-27 |
JP2015212946A (ja) | 2015-11-26 |
US9946336B2 (en) | 2018-04-17 |
US20150316985A1 (en) | 2015-11-05 |
JP2020042827A (ja) | 2020-03-19 |
EP3540561A1 (en) | 2019-09-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6906580B6 (ja) | ビューポートベースの拡張現実触覚効果のシステム、方法及び非一時的コンピュータ可読媒体 | |
US10248210B2 (en) | Systems and methods for haptically-enabled conformed and multifaceted displays | |
KR102285180B1 (ko) | 시야를 이용하는 햅틱 피드백 | |
US10203757B2 (en) | Systems and methods for shape input and output for a haptically-enabled deformable surface | |
US10732721B1 (en) | Mixed reality glasses used to operate a device touch freely | |
JP6591805B2 (ja) | 静電触覚効果を提供する表面要素のためのシステム及び方法 | |
CN105556423B (zh) | 用于基于压力的触觉效果的系统和方法 | |
US10341642B2 (en) | Display device, control method, and control program for stereoscopically displaying objects | |
US20150356787A1 (en) | Information processing device, client device, information processing method, and program | |
US20150356788A1 (en) | Information processing device, client device, information processing method, and program | |
KR102201678B1 (ko) | 증강 현실에서 햅틱 오버레이를 통합하는 시스템들 및 방법들 | |
US20200286298A1 (en) | Systems and methods for a user interaction proxy |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191015 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191015 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201112 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201124 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210601 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210629 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6906580 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |