JP5813983B2 - メディアトランスポートストリームにおけるハプティック効果データの同期 - Google Patents
メディアトランスポートストリームにおけるハプティック効果データの同期 Download PDFInfo
- Publication number
- JP5813983B2 JP5813983B2 JP2011091656A JP2011091656A JP5813983B2 JP 5813983 B2 JP5813983 B2 JP 5813983B2 JP 2011091656 A JP2011091656 A JP 2011091656A JP 2011091656 A JP2011091656 A JP 2011091656A JP 5813983 B2 JP5813983 B2 JP 5813983B2
- Authority
- JP
- Japan
- Prior art keywords
- haptic
- component
- transport stream
- information
- media transport
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000000694 effects Effects 0.000 title claims description 138
- 238000000034 method Methods 0.000 claims description 37
- 239000012092 media component Substances 0.000 claims description 26
- 230000004044 response Effects 0.000 claims description 6
- 230000001360 synchronised effect Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 15
- 238000012545 processing Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 230000000875 corresponding effect Effects 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F15/00—Digital computers in general; Data processing equipment in general
- G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Description
Claims (28)
- オーディオコンポーネント及びハプティックコンポーネントが少なくとも含まれるメディアトランスポートストリームの一以上のフレームに対応する一以上のハプティックフレームを識別するステップであって、一以上のハプティックフレームの少なくとも一つは、少なくとも一つのハプティック効果を表現させるハプティック情報を含むステップと、
前記メディアトランスポートストリームに含まれる前記オーディオコンポーネントを、前記オーディオコンポーネントと前記ハプティックコンポーネントとを同期するためのマスタータイムコードとして用い、当該マスタータイムコードに従ってタイムスタンプを決定するステップと、
ハプティック情報に応じて、少なくとも一つのアクチュエータを作動するように前記タイムスタンプを前記一以上のハプティックフレームに割り当てるステップと、
前記一以上のフレームの前記ハプティック情報に応じて、ハプティック効果の各々について効果情報を定義するステップであって、前記効果情報は、前記ハプティック効果の強度を定義する情報として、前記ハプティック効果の開始時のアタックレベルと、前記ハプティック効果の終了時のフェードレベルと、前記ハプティック効果の開始時と終了時との間の規模レベルとを含むステップと、を含むハプティック効果を同期する方法。 - 前記効果情報に応じてアクチュエータを作動するステップと、
関連するタイムスタンプに従ってそれぞれのハプティック効果を維持するステップと、をさらに含む、請求項1記載の方法。 - メディアトランスポートストリームの一以上のフレームからハプティック情報を識別するステップはさらに、
画像情報を含む一連のビデオフレームを識別するステップと、
音声情報を含む一連のオーディオフレームを識別するステップと、を含む、請求項1記載の方法。 - 前記一以上のハプティックフレームを識別するステップはさらに、様々な時間の長さ又はほぼ同一の時間の長さのハプティックフレームを識別するステップを含む、請求項1記載の方法。
- メディアトランスポートストリームの一以上のハプティックフレームを識別するステップは、MPEG4プロトコルに従って、前記メディアトランスポートストリームを分析するステップを含む、請求項1記載の方法。
- 前記ハプティック情報に関する前記メディアトランスポートストリームの前記一以上のフレームを符号化するステップと、
前記メディアトランスポートストリームをネットワークを介して転送するステップと、をさらに含む、請求項1記載の方法。 - 前記メディアトランスポートストリームをネットワークを介して受信するステップと、
メディアコンポーネントとハプティック情報に関連するハプティックコンポーネントを抽出するステップと、
前記メディアコンポーネントを再生するステップと、
再生用に割り当てられたタイムスタンプで各フレームを再生することによって、前記ハプティックコンポーネントを前記メディアコンポーネントと同期させるステップと、をさらに含む、請求項6記載の方法。 - ハプティック信号を、ほぼ固定の時間長を有する連続するフレームに解析するステップであって、フレームには各々、メディアトランスポートストリームを再生するマスタータイムコードに従って再生すべき初期時間が割り当てられ、少なくとも一のフレームは、当該少なくとも一のフレームに対応する複数のハプティック効果を表現するハプティック情報を含み、前記ハプティック効果には、前記ハプティック効果の強度を定義する情報として、前記ハプティック効果の開始時のアタックレベルと、前記ハプティック効果の終了時のフェードレベルと、前記ハプティック効果の開始時と終了時との間の規模レベルとが含まれるステップと、
フレームの各々について、前記フレームのタイムスパンの中で再生するハプティック効果の各々について効果情報を定義するステップと、
前記フレームを前記メディアトランスポートストリームのハプティックコンポーネントとして符号化するステップと、
前記メディアトランスポートストリームを転送するステップと、
前記メディアトランスポートストリームを再生機器で受信するステップと、
メディアコンポーネントと前記ハプティックコンポーネントを抽出するステップと、
前記メディアコンポーネントを再生するステップと、
前記マスタータイムコードに従って割り当てられた初期時間で各フレームを再生することによって、前記ハプティックコンポーネントを前記メディアコンポーネントと同期させるステップと、を含み、
前記メディアトランスポートストリームには、オーディオコンポーネント及びハプティックコンポーネントが少なくとも含まれ、
前記メディアトランスポートストリームに含まれる前記オーディオコンポーネントを、前記オーディオコンポーネントと前記ハプティックコンポーネントとを同期するための前記マスタータイムコードとして用いる
メディアトランスポートストリームに埋め込まれたハプティック信号を送信して再生する方法。 - 前記効果情報が開始時間、規模,周波数、エンベロープ(envelope)又は期間を含む、請求項8記載の方法。
- 前記メディアコンポーネントがオーディオコンポーネント、ビデオコンポーネント又はオーディオコンポーネントとビデオコンポーネントである、請求項8記載の方法。
- 前記メディアトランスポートストリームが前記再生機器で受信される前に格納される、請求項8記載の方法。
- 前記フレームに効果情報が存在しない場合、前記フレームを前記メディアトランスポートストリームに符号化しない、請求項8記載の方法。
- 前記時間長は、前記マスタータイムコードに従ってメディア効果との同期に対応した値となるように選択されている、請求項8記載の方法。
- 前記ハプティック効果の情報は、ノンパラメトリック符号化を用いる、請求項8記載の方法。
- 前記ハプティック信号は圧縮されている、請求項8記載の方法。
- 前記ハプティック信号は暗号化されている、請求項8記載の方法。
- オーディオコンポーネント及びハプティックコンポーネントが少なくとも含まれるメディアトランスポートストリームの一以上のフレームに対応する一以上のハプティックフレームを識別する手段であって、一以上のハプティックフレームの少なくとも一つは、少なくとも一つのハプティック効果を表現させるハプティック情報を含む手段と、
前記メディアトランスポートストリームに含まれる前記オーディオコンポーネントを、前記オーディオコンポーネントと前記ハプティックコンポーネントとを同期するためのマスタータイムコードとして用い、当該マスタータイムコードに従ってタイムスタンプを決定する手段と、
ハプティック情報に応じて、少なくとも一つのアクチュエータを作動するように前記タイムスタンプを前記一以上のハプティックフレームに割り当てる手段と、
前記一以上のフレームの前記ハプティック情報に応じて、ハプティック効果の各々について効果情報を定義する手段であって、前記効果情報は、前記ハプティック効果の強度を定義する情報として、前記ハプティック効果の開始時のアタックレベルと、前記ハプティック効果の終了時のフェードレベルと、前記ハプティック効果の開始時と終了時との間の規模レベルとを含む手段と、を含むハプティック効果を同期する装置。 - 前記効果情報に応じてアクチュエータを作動する手段と、
関連するタイムスタンプに従ってそれぞれのハプティック効果を維持する手段と、を含む請求項17記載の装置。 - メディアトランスポートストリームの一以上のフレームからハプティック情報を識別する手段はさらに、
画像情報を含む一連のビデオフレームを識別する手段と、
音声情報を含む一連のオーディオフレームを識別する手段と、を含む、請求項17記載の装置。 - 前記一以上のハプティックフレームを識別する手段はさらに、様々な時間の長さ又はほぼ同一の時間の長さのハプティックフレームを識別する手段を含む、請求項17記載の装置。
- メディアトランスポートストリームの一以上のハプティックフレームを識別する手段は、MPEG4プロトコルに従って、前記メディアトランスポートストリームを分析する手段を含む、請求項17記載の装置。
- 前記ハプティック情報に関する前記メディアトランスポートストリームの前記一以上のフレームを符号化する手段と、
前記メディアトランスポートストリームをネットワークを介して転送する手段と、をさらに含む、請求項17記載の装置。 - 前記メディアトランスポートストリームをネットワークを介して受信する手段と、
メディアコンポーネントとハプティック情報に関連するハプティックコンポーネントを抽出する手段と、
前記メディアコンポーネントを再生する手段と、
再生用に割り当てられたタイムスタンプで各フレームを再生することによって、前記ハプティックコンポーネントを前記メディアコンポーネントと同期させる手段と、をさらに含む、請求項17記載の装置。 - ハプティック信号を、ほぼ同一の時間長を有する一以上のフレームに解析する手段であって、少なくとも一のフレームは、当該少なくとも一のフレームに対応する複数のハプティック効果を表現するハプティック情報を含む手段と、
前記フレームに再生する初期時間を割り当てる手段であって、該再生する初期時間は、メディアトランスポートストリームのマスタータイムコードに関連付けられている、手段と、
フレームの各々のタイムスパンの中で再生するハプティック効果の各々について効果情報を定義する手段であって、前記効果情報は、前記ハプティック効果の強度を定義する情報として、前記ハプティック効果の開始時のアタックレベルと、前記ハプティック効果の終了時のフェードレベルと、前記ハプティック効果の開始時と終了時との間の規模レベルとが含まれる手段と、を含み、
前記メディアトランスポートストリームには、オーディオコンポーネント及びハプティックコンポーネントが少なくとも含まれ、
前記メディアトランスポートストリームに含まれる前記オーディオコンポーネントを、前記オーディオコンポーネントと前記ハプティックコンポーネントとを同期するための前記マスタータイムコードとして用いる
ハプティック信号をメディアトランスポートストリームに埋め込む装置。 - 前記フレームを前記メディアトランスポートストリームのハプティックコンポーネントとして符号化する手段と、
前記メディアトランスポートストリームを転送する手段と、
前記メディアトランスポートストリームを再生機器で受信する手段と、
メディアコンポーネントと前記ハプティックコンポーネントとを抽出する手段と、
前記メディアコンポーネントを再生する手段と、
再生用に割り当てられた初期時間で各フレームを再生することによって、前記ハプティックコンポーネントを前記メディアコンポーネントと同期させる手段と、を含む請求項24記載の装置。 - ハプティック信号を、固定の時間長を有する連続するフレームに解析する手段であって、フレームには各々、メディアトランスポートストリームを再生するマスタータイムコードに従って再生すべき初期時間が割り当てられる手段であって、少なくとも一のフレームは、当該少なくとも一のフレームに対応する複数のハプティック効果を表現するハプティック情報を含み、前記ハプティック効果には、前記ハプティック効果の強度を定義する情報として、前記ハプティック効果の開始時のアタックレベルと、前記ハプティック効果の終了時のフェードレベルと、前記ハプティック効果の開始時と終了時との間の規模レベルとが含まれる手段と、
フレームの各々について、前記フレームのタイムスパンの中で再生するハプティック効果の各々について効果情報を定義する手段と、
前記フレームを前記メディアトランスポートストリームのハプティックコンポーネントとして符号化する手段と、
前記メディアトランスポートストリームを転送する手段と、
前記メディアトランスポートストリームを再生機器で受信する手段と、
メディアコンポーネントと前記ハプティックコンポーネントを抽出する手段と、
前記メディアコンポーネントを再生する手段と、
前記マスタータイムコードに従って割り当てられた初期時間で各フレームを再生することによって、前記ハプティックコンポーネントを前記メディアコンポーネントと同期させる手段と、を含み、
前記メディアトランスポートストリームには、オーディオコンポーネント及びハプティックコンポーネントが少なくとも含まれ、
前記メディアトランスポートストリームに含まれる前記オーディオコンポーネントを、前記オーディオコンポーネントと前記ハプティックコンポーネントとを同期するための前記マスタータイムコードとして用いる
メディアトランスポートストリームに埋め込まれたハプティック信号を送信して再生する装置。 - それぞれのハプティックフレームは、少なくとも一つのハプティック効果の期間を含むハプティック効果の定義と、前記ハプティック効果の定義を規定し、少なくとも一つのハプティック効果のタイミングオフセットを含むハプティック効果の命令と、を含む、
請求項1に記載の方法。 - それぞれのハプティックフレームのサイズは、少なくとも一つのハプティック効果の複雑性に基づいて可変である、
請求項1に記載の方法。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US72855105P | 2005-10-19 | 2005-10-19 | |
US60/728,551 | 2005-10-19 | ||
US11/583,483 US8700791B2 (en) | 2005-10-19 | 2006-10-18 | Synchronization of haptic effect data in a media transport stream |
US11/583,483 | 2006-10-18 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008536835A Division JP5279502B2 (ja) | 2005-10-19 | 2006-10-19 | メディアトランスポートストリームにおけるハプティック効果データの同期 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015121968A Division JP6290829B2 (ja) | 2005-10-19 | 2015-06-17 | メディアトランスポートストリームにおけるハプティック効果データの同期 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011188508A JP2011188508A (ja) | 2011-09-22 |
JP5813983B2 true JP5813983B2 (ja) | 2015-11-17 |
Family
ID=37963332
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008536835A Active JP5279502B2 (ja) | 2005-10-19 | 2006-10-19 | メディアトランスポートストリームにおけるハプティック効果データの同期 |
JP2011091656A Active JP5813983B2 (ja) | 2005-10-19 | 2011-04-18 | メディアトランスポートストリームにおけるハプティック効果データの同期 |
JP2015121968A Expired - Fee Related JP6290829B2 (ja) | 2005-10-19 | 2015-06-17 | メディアトランスポートストリームにおけるハプティック効果データの同期 |
JP2017195175A Pending JP2018033155A (ja) | 2005-10-19 | 2017-10-05 | メディアトランスポートストリームにおけるハプティック効果データの同期 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008536835A Active JP5279502B2 (ja) | 2005-10-19 | 2006-10-19 | メディアトランスポートストリームにおけるハプティック効果データの同期 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015121968A Expired - Fee Related JP6290829B2 (ja) | 2005-10-19 | 2015-06-17 | メディアトランスポートストリームにおけるハプティック効果データの同期 |
JP2017195175A Pending JP2018033155A (ja) | 2005-10-19 | 2017-10-05 | メディアトランスポートストリームにおけるハプティック効果データの同期 |
Country Status (6)
Country | Link |
---|---|
US (4) | US8700791B2 (ja) |
EP (1) | EP1952377A4 (ja) |
JP (4) | JP5279502B2 (ja) |
KR (1) | KR100939623B1 (ja) |
CN (2) | CN102184012A (ja) |
WO (1) | WO2007047960A2 (ja) |
Families Citing this family (103)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007030603A2 (en) | 2005-09-08 | 2007-03-15 | Wms Gaming Inc. | Gaming machine having display with sensory feedback |
WO2007117418A2 (en) | 2006-03-31 | 2007-10-18 | Wms Gaming Inc. | Portable wagering game with vibrational cues and feedback mechanism |
CN101094469A (zh) * | 2007-07-17 | 2007-12-26 | 华为技术有限公司 | 移动终端提示信息的生成方法和装置 |
US7936790B2 (en) * | 2007-08-30 | 2011-05-03 | Silicon Image, Inc. | Synchronizing related data streams in interconnection networks |
US8201188B2 (en) | 2007-09-20 | 2012-06-12 | Microsoft Corporation | Device-hosted services over media transfer protocol |
US9019087B2 (en) * | 2007-10-16 | 2015-04-28 | Immersion Corporation | Synchronization of haptic effect data in a media stream |
US8577203B2 (en) * | 2007-10-16 | 2013-11-05 | Electronics And Telecommunications Research Institute | Sensory effect media generating and consuming method and apparatus thereof |
US7911328B2 (en) * | 2007-11-21 | 2011-03-22 | The Guitammer Company | Capture and remote reproduction of haptic events in synchronous association with the video and audio capture and reproduction of those events |
US7839269B2 (en) * | 2007-12-12 | 2010-11-23 | Immersion Corporation | Method and apparatus for distributing haptic synchronous signals |
WO2010008232A2 (ko) * | 2008-07-16 | 2010-01-21 | 한국전자통신연구원 | 실감 효과 표현 방법 및 그 장치 및 실감 효과 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체 |
US8749495B2 (en) * | 2008-09-24 | 2014-06-10 | Immersion Corporation | Multiple actuation handheld device |
US9400555B2 (en) | 2008-10-10 | 2016-07-26 | Internet Services, Llc | System and method for synchronization of haptic data and media data |
KR101324687B1 (ko) * | 2009-08-10 | 2013-11-04 | 한국과학기술원 | 이미지에 햅틱 정보를 인코딩하는 방법, 이미지로부터 햅틱 정보를 디코딩하는 방법 및 이를 위한 햅틱 정보 처리 장치 |
KR101493884B1 (ko) * | 2010-11-19 | 2015-02-17 | 한국전자통신연구원 | 4d 방송 서비스를 위한 방송 네트워크와 홈 네트워크의 제어 방법 및 장치 |
US8700406B2 (en) * | 2011-05-23 | 2014-04-15 | Qualcomm Incorporated | Preserving audio data collection privacy in mobile devices |
US20120302323A1 (en) | 2011-05-23 | 2012-11-29 | Wms Gaming Inc. | Haptic gaming chairs and wagering game systems and machines with a haptic gaming chair |
US9449456B2 (en) | 2011-06-13 | 2016-09-20 | Bally Gaming, Inc. | Automated gaming chairs and wagering game systems and machines with an automated gaming chair |
US9762719B2 (en) * | 2011-09-09 | 2017-09-12 | Qualcomm Incorporated | Systems and methods to enhance electronic communications with emotional context |
US10013857B2 (en) * | 2011-12-21 | 2018-07-03 | Qualcomm Incorporated | Using haptic technologies to provide enhanced media experiences |
KR101154122B1 (ko) * | 2012-02-20 | 2012-06-11 | 씨제이포디플렉스 주식회사 | 영상과 모션 간의 시간 동기화를 이용한 모션 제어 시스템 및 그 방법 |
CA2890399A1 (en) * | 2012-10-01 | 2014-04-10 | Internet Services, Llc | System and method for synchronization of haptic data and media data |
US8947216B2 (en) | 2012-11-02 | 2015-02-03 | Immersion Corporation | Encoding dynamic haptic effects |
US9898084B2 (en) * | 2012-12-10 | 2018-02-20 | Immersion Corporation | Enhanced dynamic haptic effects |
US9261960B2 (en) | 2013-01-24 | 2016-02-16 | Immersion Corporation | Haptic sensation recording and playback |
WO2014132104A1 (en) * | 2013-03-01 | 2014-09-04 | Nokia Corporation | Control apparatus for a tactile audio display |
US9189098B2 (en) * | 2013-03-14 | 2015-11-17 | Immersion Corporation | Systems and methods for syncing haptic feedback calls |
US9098984B2 (en) * | 2013-03-14 | 2015-08-04 | Immersion Corporation | Haptic effects broadcasting during a group event |
US9064385B2 (en) * | 2013-03-15 | 2015-06-23 | Immersion Corporation | Method and apparatus to generate haptic feedback from video content analysis |
US9992491B2 (en) * | 2013-03-15 | 2018-06-05 | Immersion Corporation | Method and apparatus for encoding and decoding haptic information in multi-media files |
US10248205B2 (en) | 2013-04-02 | 2019-04-02 | Nokia Technologies Oy | Apparatus for recording audio and vibration content of event |
KR101580237B1 (ko) * | 2013-05-15 | 2015-12-28 | 씨제이포디플렉스 주식회사 | 4d 컨텐츠 제작 서비스 제공 방법 및 시스템, 이를 위한 컨텐츠 제작 장치 |
US9703379B2 (en) * | 2013-08-20 | 2017-07-11 | Xsync Technologies Llc | Systems and methods for multimedia tactile augmentation |
US10248206B2 (en) | 2013-08-20 | 2019-04-02 | Xsync Technologies Llc | Systems and methods for multimedia tactile augmentation |
US20150054727A1 (en) * | 2013-08-23 | 2015-02-26 | Immersion Corporation | Haptically enabled viewing of sporting events |
US9652945B2 (en) | 2013-09-06 | 2017-05-16 | Immersion Corporation | Method and system for providing haptic effects based on information complementary to multimedia content |
US9619980B2 (en) | 2013-09-06 | 2017-04-11 | Immersion Corporation | Systems and methods for generating haptic effects associated with audio signals |
US9711014B2 (en) | 2013-09-06 | 2017-07-18 | Immersion Corporation | Systems and methods for generating haptic effects associated with transitions in audio signals |
US9576445B2 (en) | 2013-09-06 | 2017-02-21 | Immersion Corp. | Systems and methods for generating haptic effects associated with an envelope in audio signals |
US9213408B2 (en) | 2013-10-08 | 2015-12-15 | Immersion Corporation | Generating haptic effects while minimizing cascading |
US9619029B2 (en) | 2013-11-14 | 2017-04-11 | Immersion Corporation | Haptic trigger control system |
US9164587B2 (en) | 2013-11-14 | 2015-10-20 | Immersion Corporation | Haptic spatialization system |
CN103607395A (zh) * | 2013-11-20 | 2014-02-26 | 深圳先进技术研究院 | 一种传输触觉数据的方法及装置 |
CN103607596B (zh) * | 2013-11-22 | 2017-11-24 | 北京星网锐捷网络技术有限公司 | 时钟校准处理方法及装置 |
US10437341B2 (en) * | 2014-01-16 | 2019-10-08 | Immersion Corporation | Systems and methods for user generated content authoring |
PT3100244T (pt) * | 2014-01-29 | 2020-10-15 | The Guitammer Company | Sistema e conjunto de convsersão de sinal háptico-táctil, de deslocamento ou movimento |
KR20150110356A (ko) | 2014-03-21 | 2015-10-02 | 임머숀 코퍼레이션 | 센서의 데이터를 햅틱 효과들로 변환하는 시스템들 및 방법들 |
US10139907B2 (en) * | 2014-06-16 | 2018-11-27 | Immersion Corporation | Systems and methods for foley-style haptic content creation |
US9635440B2 (en) | 2014-07-07 | 2017-04-25 | Immersion Corporation | Second screen haptics |
US9174134B1 (en) | 2014-11-12 | 2015-11-03 | Immersion Corporation | Peripheral device with haptic diminishment prevention component |
US10185396B2 (en) | 2014-11-12 | 2019-01-22 | Immersion Corporation | Haptic trigger modification system |
US9919208B2 (en) * | 2014-12-11 | 2018-03-20 | Immersion Corporation | Video gameplay haptics |
US9812165B2 (en) * | 2014-12-19 | 2017-11-07 | Immersion Corporation | Systems and methods for recording haptic data for use with multi-media data |
DE102015200037A1 (de) * | 2015-01-05 | 2016-07-07 | Volkswagen Aktiengesellschaft | Bedienvorrichtung mit verbesserter haptischer Rückmeldung |
US10269392B2 (en) * | 2015-02-11 | 2019-04-23 | Immersion Corporation | Automated haptic effect accompaniment |
US10216277B2 (en) | 2015-02-25 | 2019-02-26 | Immersion Corporation | Modifying haptic effects for slow motion |
US9838571B2 (en) * | 2015-04-10 | 2017-12-05 | Gvbb Holdings S.A.R.L. | Precision timing for broadcast network |
US10261582B2 (en) * | 2015-04-28 | 2019-04-16 | Immersion Corporation | Haptic playback adjustment system |
JP6523038B2 (ja) * | 2015-05-08 | 2019-05-29 | 日本放送協会 | 感覚提示装置 |
EP3099030A1 (en) * | 2015-05-26 | 2016-11-30 | Thomson Licensing | Method and device for encoding/decoding a packet comprising data representative of a haptic effect |
EP3121685A1 (en) * | 2015-07-21 | 2017-01-25 | Thomson Licensing | Signal for carrying washout request in haptic audiovisual content, related method and device |
US9847000B2 (en) * | 2015-10-29 | 2017-12-19 | Immersion Corporation | Ambient triggered notifications for rendering haptic effects |
US9947305B2 (en) * | 2016-07-01 | 2018-04-17 | Intel Corporation | Bi-directional music synchronization using haptic devices |
US10101813B2 (en) * | 2016-12-14 | 2018-10-16 | Immersion Corporation | Automatic haptic generation based on color features and motion analysis |
US10075251B2 (en) * | 2017-02-08 | 2018-09-11 | Immersion Corporation | Haptic broadcast with select haptic metadata based on haptic playback capability |
US10732714B2 (en) | 2017-05-08 | 2020-08-04 | Cirrus Logic, Inc. | Integrated haptic system |
US10541005B2 (en) * | 2017-05-17 | 2020-01-21 | Cypress Semiconductor Corporation | Distributed and synchronized control system for environmental signals in multimedia playback |
US10194128B2 (en) | 2017-06-12 | 2019-01-29 | Amazon Technologies, Inc. | Systems and processes for generating a digital content item |
US11259121B2 (en) | 2017-07-21 | 2022-02-22 | Cirrus Logic, Inc. | Surface speaker |
US20190041987A1 (en) * | 2017-08-03 | 2019-02-07 | Immersion Corporation | Haptic effect encoding and rendering system |
US10620704B2 (en) * | 2018-01-19 | 2020-04-14 | Cirrus Logic, Inc. | Haptic output systems |
JP2019160026A (ja) * | 2018-03-15 | 2019-09-19 | 株式会社東海理化電機製作所 | 操作装置 |
US11139767B2 (en) | 2018-03-22 | 2021-10-05 | Cirrus Logic, Inc. | Methods and apparatus for driving a transducer |
US10832537B2 (en) | 2018-04-04 | 2020-11-10 | Cirrus Logic, Inc. | Methods and apparatus for outputting a haptic signal to a haptic transducer |
US11069206B2 (en) | 2018-05-04 | 2021-07-20 | Cirrus Logic, Inc. | Methods and apparatus for outputting a haptic signal to a haptic transducer |
US11269415B2 (en) | 2018-08-14 | 2022-03-08 | Cirrus Logic, Inc. | Haptic output systems |
JP7439758B2 (ja) * | 2018-08-30 | 2024-02-28 | ソニーグループ株式会社 | 送信装置、送信方法、受信装置および受信方法 |
EP3869300A4 (en) * | 2018-10-19 | 2021-12-15 | Sony Group Corporation | INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD AND PROGRAM |
WO2020080433A1 (ja) * | 2018-10-19 | 2020-04-23 | ソニー株式会社 | 情報処理装置、情報処理方法、および、プログラム |
GB201817495D0 (en) | 2018-10-26 | 2018-12-12 | Cirrus Logic Int Semiconductor Ltd | A force sensing system and method |
US11483611B2 (en) | 2018-11-19 | 2022-10-25 | Roku, Inc. | Non-television experience triggers |
US11644370B2 (en) | 2019-03-29 | 2023-05-09 | Cirrus Logic, Inc. | Force sensing with an electromagnetic load |
US10992297B2 (en) | 2019-03-29 | 2021-04-27 | Cirrus Logic, Inc. | Device comprising force sensors |
US10955955B2 (en) | 2019-03-29 | 2021-03-23 | Cirrus Logic, Inc. | Controller for use in a device comprising force sensors |
US10726683B1 (en) | 2019-03-29 | 2020-07-28 | Cirrus Logic, Inc. | Identifying mechanical impedance of an electromagnetic load using a two-tone stimulus |
US11509292B2 (en) | 2019-03-29 | 2022-11-22 | Cirrus Logic, Inc. | Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter |
US10828672B2 (en) | 2019-03-29 | 2020-11-10 | Cirrus Logic, Inc. | Driver circuitry |
US20200313529A1 (en) | 2019-03-29 | 2020-10-01 | Cirrus Logic International Semiconductor Ltd. | Methods and systems for estimating transducer parameters |
US11150733B2 (en) | 2019-06-07 | 2021-10-19 | Cirrus Logic, Inc. | Methods and apparatuses for providing a haptic output signal to a haptic actuator |
US10976825B2 (en) | 2019-06-07 | 2021-04-13 | Cirrus Logic, Inc. | Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system |
KR20220024091A (ko) | 2019-06-21 | 2022-03-03 | 시러스 로직 인터내셔널 세미컨덕터 리미티드 | 디바이스 상에 복수의 가상 버튼을 구성하기 위한 방법 및 장치 |
DE112020004160T5 (de) * | 2019-09-03 | 2022-05-25 | Sony Group Corporation | Steuerungseinrichtung, lautsprechereinrichtung und audioausgabeverfahren |
US11408787B2 (en) | 2019-10-15 | 2022-08-09 | Cirrus Logic, Inc. | Control methods for a force sensor system |
US11380175B2 (en) | 2019-10-24 | 2022-07-05 | Cirrus Logic, Inc. | Reproducibility of haptic waveform |
US11545951B2 (en) | 2019-12-06 | 2023-01-03 | Cirrus Logic, Inc. | Methods and systems for detecting and managing amplifier instability |
CN111291677B (zh) * | 2020-02-05 | 2022-09-09 | 吉林大学 | 一种动态视频触觉特征提取及渲染的方法 |
US11662821B2 (en) | 2020-04-16 | 2023-05-30 | Cirrus Logic, Inc. | In-situ monitoring, calibration, and testing of a haptic actuator |
KR102402370B1 (ko) | 2020-04-17 | 2022-05-26 | 최지선 | 원격지 연출 시스템 및 원격지 연출 방법 |
US11933822B2 (en) | 2021-06-16 | 2024-03-19 | Cirrus Logic Inc. | Methods and systems for in-system estimation of actuator parameters |
US11908310B2 (en) | 2021-06-22 | 2024-02-20 | Cirrus Logic Inc. | Methods and systems for detecting and managing unexpected spectral content in an amplifier system |
US11765499B2 (en) | 2021-06-22 | 2023-09-19 | Cirrus Logic Inc. | Methods and systems for managing mixed mode electromechanical actuator drive |
WO2023062802A1 (ja) * | 2021-10-15 | 2023-04-20 | 豊田合成株式会社 | コンテンツ配信方法、及びコンテンツ配信システム |
US11552649B1 (en) | 2021-12-03 | 2023-01-10 | Cirrus Logic, Inc. | Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths |
CN116185172A (zh) * | 2022-12-08 | 2023-05-30 | 瑞声开泰声学科技(上海)有限公司 | 触觉效果数据的压缩和加密方法、系统和相关设备 |
Family Cites Families (47)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4334280A (en) * | 1980-06-09 | 1982-06-08 | Texas Instruments Incorporated | System and method for providing an audible sound and a tactile feedback in an electronic data processing system |
US4355348A (en) * | 1980-07-30 | 1982-10-19 | Williams Theodore R | Audio signal responsive optical display |
US5388992A (en) * | 1991-06-19 | 1995-02-14 | Audiological Engineering Corporation | Method and apparatus for tactile transduction of acoustic signals from television receivers |
US5281754A (en) * | 1992-04-13 | 1994-01-25 | International Business Machines Corporation | Melody composer and arranger |
US5629594A (en) * | 1992-12-02 | 1997-05-13 | Cybernet Systems Corporation | Force feedback system |
US5526480A (en) * | 1992-12-28 | 1996-06-11 | International Business Machines Corporation | Time domain scroll bar for multimedia presentations in a data processing system |
US5461711A (en) * | 1993-12-22 | 1995-10-24 | Interval Research Corporation | Method and system for spatial accessing of time-based information |
US5586257A (en) * | 1994-05-05 | 1996-12-17 | Perlman; Stephen G. | Network architecture to support multiple site real-time video games |
US6004134A (en) * | 1994-05-19 | 1999-12-21 | Exos, Inc. | Interactive simulation including force feedback |
US6160489A (en) * | 1994-06-23 | 2000-12-12 | Motorola, Inc. | Wireless communication device adapted to generate a plurality of distinctive tactile alert patterns |
ATE189539T1 (de) * | 1994-08-18 | 2000-02-15 | Interval Research Corp | Eingabevorrichtung für video mit taktilem feedback, das von dem inhalt des videos abhängt |
US5684722A (en) * | 1994-09-21 | 1997-11-04 | Thorner; Craig | Apparatus and method for generating a control signal for a tactile sensation generator |
US5669818A (en) * | 1995-03-23 | 1997-09-23 | Thorner; Craig | Seat-based tactile sensation generator |
US5956484A (en) * | 1995-12-13 | 1999-09-21 | Immersion Corporation | Method and apparatus for providing force feedback over a computer network |
US6147674A (en) * | 1995-12-01 | 2000-11-14 | Immersion Corporation | Method and apparatus for designing force sensations in force feedback computer applications |
US6161126A (en) * | 1995-12-13 | 2000-12-12 | Immersion Corporation | Implementing force feedback over the World Wide Web and other computer networks |
US6859819B1 (en) * | 1995-12-13 | 2005-02-22 | Immersion Corporation | Force feedback enabled over a computer network |
CA2247364C (en) * | 1996-03-08 | 2002-05-14 | Motorola, Inc. | Method and recognizer for recognizing a sampled sound signal in noise |
US5884029A (en) * | 1996-11-14 | 1999-03-16 | International Business Machines Corporation | User interaction with intelligent virtual objects, avatars, which interact with other avatars controlled by different users |
US6111562A (en) * | 1997-01-06 | 2000-08-29 | Intel Corporation | System for generating an audible cue indicating the status of a display object |
JPH1146230A (ja) * | 1997-03-20 | 1999-02-16 | Northern Telecom Ltd | 個人用通信装置および呼出処理状態を合図する方法 |
US6285351B1 (en) * | 1997-04-25 | 2001-09-04 | Immersion Corporation | Designing force sensations for computer applications including sounds |
US6252583B1 (en) * | 1997-11-14 | 2001-06-26 | Immersion Corporation | Memory and force output management for a force feedback system |
US6121532A (en) * | 1998-01-28 | 2000-09-19 | Kay; Stephen R. | Method and apparatus for creating a melodic repeated effect |
US6659773B2 (en) | 1998-03-04 | 2003-12-09 | D-Box Technology Inc. | Motion transducer system |
WO2000038117A1 (en) * | 1998-12-23 | 2000-06-29 | Washington State University Research Foundation | Method and system for a virtual assembly design environment |
US6292776B1 (en) * | 1999-03-12 | 2001-09-18 | Lucent Technologies Inc. | Hierarchial subband linear predictive cepstral features for HMM-based speech recognition |
US6424356B2 (en) * | 1999-05-05 | 2002-07-23 | Immersion Corporation | Command of force sensations in a forceback system using force effect suites |
JP3620409B2 (ja) * | 2000-05-25 | 2005-02-16 | ヤマハ株式会社 | 携帯通信端末装置 |
US7567232B2 (en) * | 2001-03-09 | 2009-07-28 | Immersion Corporation | Method of using tactile feedback to deliver silent status information to a user of an electronic device |
US6885876B2 (en) * | 2001-03-12 | 2005-04-26 | Nokia Mobile Phones Ltd. | Mobile phone featuring audio-modulated vibrotactile module |
US6963762B2 (en) * | 2001-05-23 | 2005-11-08 | Nokia Corporation | Mobile phone using tactile icons |
GB0114458D0 (en) * | 2001-06-14 | 2001-08-08 | Lucas Industries Ltd | An in-vehicle display system |
JP2003086384A (ja) | 2001-06-28 | 2003-03-20 | Matsushita Electric Ind Co Ltd | 照明サービスを提供する方法、照明装置、記録媒体および再生装置 |
US7356245B2 (en) * | 2001-06-29 | 2008-04-08 | International Business Machines Corporation | Methods to facilitate efficient transmission and playback of digital information |
US7623114B2 (en) * | 2001-10-09 | 2009-11-24 | Immersion Corporation | Haptic feedback sensations based on audio output from computer devices |
US6703550B2 (en) * | 2001-10-10 | 2004-03-09 | Immersion Corporation | Sound data output and manipulation using haptic feedback |
EP1499406A1 (en) | 2002-04-22 | 2005-01-26 | Intellocity USA, Inc. | Method and apparatus for data receiver and controller |
JP4052556B2 (ja) | 2002-05-07 | 2008-02-27 | 日本放送協会 | 外部機器連動型コンテンツ生成装置、その方法及びそのプログラム |
JP2004081357A (ja) | 2002-08-23 | 2004-03-18 | Toshiba Eng Co Ltd | 体感型映像音響システム |
US7169996B2 (en) * | 2002-11-12 | 2007-01-30 | Medialab Solutions Llc | Systems and methods for generating music using data/music data file transmitted/received via a network |
JP2004229039A (ja) | 2003-01-24 | 2004-08-12 | Toshiba Corp | 情報処理装置及び情報処理方法 |
KR100581060B1 (ko) | 2003-11-12 | 2006-05-22 | 한국전자통신연구원 | 오감 데이터 동기화 전송 장치 및 그 방법과 그를 이용한실감형 멀티미디어 데이터 제공 시스템 및 그 방법 |
US7112737B2 (en) * | 2003-12-31 | 2006-09-26 | Immersion Corporation | System and method for providing a haptic effect to a musical instrument |
JP2005229168A (ja) | 2004-02-10 | 2005-08-25 | Nippon Telegr & Teleph Corp <Ntt> | メディア出力システムとその同期誤差制御方法およびプログラム |
US7669056B2 (en) * | 2005-03-29 | 2010-02-23 | Microsoft Corporation | Method and apparatus for measuring presentation data exposure |
WO2006113999A1 (en) * | 2005-04-26 | 2006-11-02 | D-Box Technologies Inc. | Method and apparatus for providing a motion signal with a sound signal using an existing sound signal encoding format |
-
2006
- 2006-10-18 US US11/583,483 patent/US8700791B2/en active Active
- 2006-10-19 WO PCT/US2006/041095 patent/WO2007047960A2/en active Application Filing
- 2006-10-19 CN CN2011101178309A patent/CN102184012A/zh active Pending
- 2006-10-19 KR KR1020087011244A patent/KR100939623B1/ko active IP Right Grant
- 2006-10-19 JP JP2008536835A patent/JP5279502B2/ja active Active
- 2006-10-19 EP EP06826378A patent/EP1952377A4/en not_active Ceased
- 2006-10-19 CN CN2006800391028A patent/CN101292211B/zh not_active Expired - Fee Related
-
2011
- 2011-04-18 JP JP2011091656A patent/JP5813983B2/ja active Active
-
2014
- 2014-04-14 US US14/252,391 patent/US9615002B2/en active Active
-
2015
- 2015-06-17 JP JP2015121968A patent/JP6290829B2/ja not_active Expired - Fee Related
-
2017
- 2017-02-03 US US15/423,960 patent/US9912842B2/en active Active
- 2017-10-05 JP JP2017195175A patent/JP2018033155A/ja active Pending
-
2018
- 2018-03-01 US US15/909,007 patent/US10440238B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP1952377A2 (en) | 2008-08-06 |
JP6290829B2 (ja) | 2018-03-07 |
CN101292211A (zh) | 2008-10-22 |
JP5279502B2 (ja) | 2013-09-04 |
CN101292211B (zh) | 2011-11-09 |
WO2007047960A2 (en) | 2007-04-26 |
US9615002B2 (en) | 2017-04-04 |
JP2018033155A (ja) | 2018-03-01 |
US10440238B2 (en) | 2019-10-08 |
US20180191927A1 (en) | 2018-07-05 |
US20080223627A1 (en) | 2008-09-18 |
US9912842B2 (en) | 2018-03-06 |
WO2007047960A3 (en) | 2008-01-17 |
JP2011188508A (ja) | 2011-09-22 |
EP1952377A4 (en) | 2012-10-03 |
JP2009513077A (ja) | 2009-03-26 |
KR20080071560A (ko) | 2008-08-04 |
US8700791B2 (en) | 2014-04-15 |
JP2015208027A (ja) | 2015-11-19 |
US20170150013A1 (en) | 2017-05-25 |
US20140226068A1 (en) | 2014-08-14 |
CN102184012A (zh) | 2011-09-14 |
KR100939623B1 (ko) | 2010-01-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6290829B2 (ja) | メディアトランスポートストリームにおけるハプティック効果データの同期 | |
EP2605499B1 (en) | Synchronization of Haptic Effect Data in a Media Transport Stream | |
JP3739609B2 (ja) | マルチメディアの再生システムにおけるディジタルのビデオおよびオーディオの再生の適応型同期化のための方法および装置 | |
KR101384434B1 (ko) | 햅틱 효과 개선을 위한 시스템들 및 방법들, 및 기록 매체 | |
RU2408158C2 (ru) | Синхронизация звука и видео | |
CN101364941A (zh) | 内容重放设备、方法、系统和计算机可读存储介质 | |
CN103403794A (zh) | 自动演奏装置 | |
JP2006190213A (ja) | メディア再生装置 | |
CN114422840A (zh) | 音轨切换的方法及装置 | |
CN112188256B (zh) | 信息处理方法、信息提供方法、装置、电子设备及存储介质 | |
CN105187862B (zh) | 一种分布式播放器流量控制方法及系统 | |
CN115798439A (zh) | 一种音频数据采集方法及电子设备 | |
KR20130095243A (ko) | 실시간 컨텐츠 스트리밍 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110705 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130319 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20130619 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20130624 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130719 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140304 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20140603 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20140606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140703 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20150217 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150617 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20150625 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150901 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150917 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5813983 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |