JP2014194765A - 動画コンテンツの分析に基づいて触覚フィードバックを生成する方法及び装置 - Google Patents
動画コンテンツの分析に基づいて触覚フィードバックを生成する方法及び装置 Download PDFInfo
- Publication number
- JP2014194765A JP2014194765A JP2014044872A JP2014044872A JP2014194765A JP 2014194765 A JP2014194765 A JP 2014194765A JP 2014044872 A JP2014044872 A JP 2014044872A JP 2014044872 A JP2014044872 A JP 2014044872A JP 2014194765 A JP2014194765 A JP 2014194765A
- Authority
- JP
- Japan
- Prior art keywords
- motion
- estimate
- computer
- videos
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B6/00—Tactile signalling systems, e.g. personal calling systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/144—Movement detection
- H04N5/145—Movement estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】動画コンテンツ分析は、当該動画の画像処理を含む。システムは、当該画像処理に基づいて一又は複数のイベントを特定し、一又は複数のイベントに基づいて触覚フィードバックを発生させる。触覚フィードバックは、画像処理に基づいて定められる、動画のシーンのオブジェクトの推定加速度に基づいて変化する。推定加速度は、高速ではセンサ情報を用いることにより高精度となり、センサ情報に基づく推定加速度は低速では上記の画像処理に基づいて高精度にすることができる。
【選択図】図5
Description
”には複数のものへの言及が含まれる。ただし、文脈によって別に解すべきことが明白
な場合はこの限りでない。
Claims (24)
- コンピュータプログラムモジュールでプログラムされるプロセッサを備えるコンピュータ装置で実行される、動画画像処理に基づいて触覚フィードバックを提供するコンピュータ実行可能な方法であって、
一又は複数の画像フレームを含む一又は複数の動画を読み込む工程と、
当該一又は複数の画像フレームに画像処理を実行する工程と、
当該画像処理に基づいてイベントを検出する工程と、
検出されたイベントに基づいて、触覚出力を発生させるように構成された制御信号を提供する工程と、
を備える方法。 - 前記イベントを検出する工程は、画像キャプチャ装置の動き、オブジェクトの外観、体の部分の外観、爆発、移動中のオブジェクト、特定の認識可能な画像の特徴、顔の表情、ジェスチャ、またはシーンのテーマを含む一又は複数の種類のイベントを検出する工程を含む、請求項1に記載のコンピュータ実行可能な方法。
- 検出されたときに制御信号が提供される少なくとも1種類のイベントを指定する一又は複数のユーザ選択を受信する工程をさらに備え、
前記制御信号を提供することには、前記一又は複数のユーザ選択によって指定された前記少なくとも1種類のイベントが検出されたときに、前記制御信号を提供することが含まれる、
請求項2に記載のコンピュータ実行可能な方法。 - 前記制御信号に基づいて触覚出力装置によって前記触覚フィードバックを生成する工程をさらに含む、請求項1に記載のコンピュータ実行可能な方法。
- 前記一又は複数の動画が前記触覚フィードバックと協調して表示されるようにする工程をさらに備える、請求項3に記載のコンピュータ実行可能な方法。
- 前記制御信号が前記一又は複数の動画に埋め込まれるように前記イベントをリアルタイムで検出する工程をさらに備える、請求項1に記載のコンピュータ実行可能な方法。
- 前記一又は複数の動画に前記制御信号を埋め込む工程と、前記一又は複数の動画を遠隔の装置に送信する工程と、をさらに備え、
前記一又は複数の動画および前記触覚フィードバックは、前記遠隔の装置において提供される、
請求項1に記載のコンピュータ実行可能な方法。 - 前記一又は複数の画像フレームに関連付けられたセンサ情報を取得する工程をさらに備え、前記制御信号は、さらに前記センサ情報に基づくものである、請求項1に記載のコンピュータ実行可能な方法。
- 前記一又は複数の画像フレームは前記一又は複数の画像フレームにキャプチャされたオブジェクトを含み、前記センサ情報は、前記オブジェクトのモーションの一又は複数のセンサ測定結果に関連する、請求項7に記載のコンピュータ実行可能な方法。
- 前記一又は複数の画像フレームに基づいて前記オブジェクトの前記モーションの第1推定値を生成し、前記一又は複数のセンサ情報の測定結果に基づいて前記オブジェクトの前記モーションの第2推定値を生成する工程と、
前記オブジェクトの前記モーションの前記第1推定値を前記オブジェクトの前記モーションの前記第2推定値で更新し、または、前記オブジェクトの前記モーションの前記第2推定値を前記オブジェクトの前記モーションの前記第1推定値で更新する工程と、をさらに備える、
請求項8に記載のコンピュータ実行可能な方法。 - 取得された前記センサ情報は、前記一又は複数の画像をキャプチャするために用いられる画像キャプチャ装置のモーションの一又は複数のセンサ測定結果に関するものである、請求項7に記載のコンピュータ実行可能な方法。
- 前記一又は複数の画像フレームに基づいて前記画像キャプチャ装置の前記モーションの第1推定値を生成し、前記一又は複数のセンサ情報の測定結果に基づいて前記画像キャプチャ装置の前記モーションの第2推定値を生成する工程と、
前記画像キャプチャ装置の前記モーションの前記第1推定値を前記画像キャプチャ装置の前記モーションの前記第2推定値で更新し、または、前記画像キャプチャ装置の前記モーションの前記第2推定値を前記画像キャプチャ装置の前記モーションの前記第1推定値で更新する工程と、をさらに備える、
請求項10に記載のコンピュータ実行可能な方法。 - 取得された前記センサ情報は、前記一又は複数の動画に出現するオブジェクトのモーションの一又は複数の第1センサ測定結果および前記一又は複数の動画をキャプチャするために用いられる画像キャプチャ装置のモーションの一又は複数の第2センサ測定結果を含む、請求項7に記載のコンピュータ実行可能な方法。
- 前記一又は複数の画像フレームおよび前記一又は複数の第1センサ測定結果に基づいて前記画像キャプチャ装置の前記モーションの推定値を生成する工程と、
前記一又は複数の画像フレームおよび前記一又は複数の第2センサ測定結果に基づいて前記オブジェクトの前記モーションの推定値を生成する工程と、
前記画像キャプチャ装置の前記モーションの前記推定値および前記オブジェクトの前記モーションの前記推定値に基づいて、前記オブジェクトの前記モーションの前記推定値を更新する工程と、
をさらに備える、請求項12に記載のコンピュータ実行可能な方法。 - 前記一又は複数の画像フレームに関連付けられたセンサ情報を取得する工程と、
前記センサ情報に基づいて第2の制御信号を提供する工程と、
をさらに備える、請求項1に記載のコンピュータ実行可能な方法。 - コンピュータプログラムモジュールでプログラムされるプロセッサを備えるコンピュータ装置で実行される、動画と関連付けられたセンサ情報に基づいて触覚フィードバックを提供するコンピュータ実行可能な方法であって、
前記一又は複数の動画に関連付けてキャプチャされたモーションの一又は複数の測定結果を含み、一又は複数の動画および当該一又は複数の動画に対応付けられたセンサ情報を読み取る工程と、
前記センサ情報に基づいて、触覚出力を発生させるように構成された制御信号を提供する工程と、
前記一又は複数の動画と関連付けてキャプチャされた前記モーションと同期させて前記制御信号を提供する工程と、
を備える方法。 - 前記一又は複数の動画は、当該一又は複数の動画にキャプチャされたオブジェクトを含む一又は複数の画像フレームを有し、前記モーションは、前記オブジェクトのモーションを含む、請求項15に記載のコンピュータ実行可能な方法。
- 前記一又は複数の画像フレームに基づいて前記オブジェクトの前記モーションの第1推定値を生成し、前記一又は複数のセンサ情報の測定結果に基づいて前記オブジェクトの前記モーションの第2推定値を生成する工程と、
前記オブジェクトの前記モーションの前記第1推定値を前記オブジェクトの前記モーションの前記第2推定値で更新し、または、前記オブジェクトの前記モーションの前記第2推定値を前記オブジェクトの前記モーションの前記第1推定値で更新する工程と、
をさらに備える、請求項16に記載のコンピュータ実行可能な方法。 - 前記モーションは、前記一又は複数の動画をキャプチャするために用いられる画像キャプチャ装置のモーションを含む、請求項15に記載のコンピュータ実行可能な方法。
- 前記一又は複数の画像フレームに基づいて前記画像キャプチャ装置の前記モーションの第1推定値を生成し、前記一又は複数のセンサ情報の測定結果に基づいて前記画像キャプチャ装置の前記モーションの第2推定値を生成する工程と、
前記画像キャプチャ装置の前記モーションの前記第1推定値を前記画像キャプチャ装置の前記モーションの前記第2推定値で更新し、または、前記画像キャプチャ装置の前記モーションの前記第2推定値を前記画像キャプチャ装置の前記モーションの前記第1推定値で更新する工程と、
をさらに備える、請求項18に記載のコンピュータ実行可能な方法。 - 取得された前記センサ情報は、前記一又は複数の動画に出現するオブジェクトのモーションの一又は複数の第1センサ測定結果および前記一又は複数の動画をキャプチャするために用いられる画像キャプチャ装置のモーションの一又は複数の第2センサ測定結果を含む、請求項15に記載のコンピュータ実行可能な方法。
- 前記一又は複数の動画は、当該一又は複数の動画にキャプチャされたオブジェクトを含む一又は複数の画像フレームを有し、
前記方法は、
前記一又は複数の画像フレームおよび前記一又は複数の第1センサ測定結果に基づいて前記画像キャプチャ装置の前記モーションの推定値を生成する工程と、
前記一又は複数の画像フレームおよび前記一又は複数の第2センサ測定結果に基づいて前記オブジェクトの前記モーションの推定値を生成する工程と、
前記画像キャプチャ装置の前記モーションの前記推定値および前記オブジェクトの前記モーションの前記推定値に基づいて、前記オブジェクトの前記モーションの前記推定値を更新する工程と、
をさらに備える、請求項20に記載のコンピュータ実行可能な方法。 - 動画画像処理に基づいて触覚フィードバックを提供するシステムであって、当該システムはプロセッサを備え、当該プロセッサは、
一又は複数の画像フレームを含む一又は複数の動画を読み込み、
当該一又は複数の画像フレームに画像処理を実行し、
当該画像処理に基づいてイベントを検出し、
検出された前記イベントに基づいて触覚出力を発生させるように構成された制御信号を提供する、
ように構成される、システム。 - 動画画像処理に基づいて触覚フィードバックを提供するシステムであって、当該システムはプロセッサを備え、当該プロセッサは、
前記一又は複数の動画に関連付けてキャプチャされたモーションの一又は複数の測定結果を含み、一又は複数の動画および当該一又は複数の動画に対応付けられたセンサ情報を読み取り、
前記センサ情報に基づいて、触覚出力を発生させるように構成された制御信号を提供し、
前記一又は複数の動画と関連付けてキャプチャされた前記モーションと同期させて前記制御信号を提供する、
ように構成される、システム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/843,092 US9064385B2 (en) | 2013-03-15 | 2013-03-15 | Method and apparatus to generate haptic feedback from video content analysis |
US13/843,092 | 2013-03-15 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018206818A Division JP6559316B2 (ja) | 2013-03-15 | 2018-11-01 | 動画コンテンツの分析に基づいて触覚フィードバックを生成する方法及び装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2014194765A true JP2014194765A (ja) | 2014-10-09 |
JP2014194765A5 JP2014194765A5 (ja) | 2017-03-23 |
JP6456593B2 JP6456593B2 (ja) | 2019-01-23 |
Family
ID=50478171
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014044872A Expired - Fee Related JP6456593B2 (ja) | 2013-03-15 | 2014-03-07 | 動画コンテンツの分析に基づいて触覚フィードバックを生成する方法及び装置 |
JP2018206818A Active JP6559316B2 (ja) | 2013-03-15 | 2018-11-01 | 動画コンテンツの分析に基づいて触覚フィードバックを生成する方法及び装置 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018206818A Active JP6559316B2 (ja) | 2013-03-15 | 2018-11-01 | 動画コンテンツの分析に基づいて触覚フィードバックを生成する方法及び装置 |
Country Status (5)
Country | Link |
---|---|
US (3) | US9064385B2 (ja) |
EP (2) | EP2779675B1 (ja) |
JP (2) | JP6456593B2 (ja) |
KR (1) | KR20140113495A (ja) |
CN (2) | CN110536162A (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018513430A (ja) * | 2015-02-25 | 2018-05-24 | イマージョン コーポレーションImmersion Corporation | スローモーションのためのハプティック効果の修正 |
WO2020153194A1 (ja) * | 2019-01-23 | 2020-07-30 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
US11842502B2 (en) | 2018-05-11 | 2023-12-12 | Mitsubishi Electric Corporation | Data synchronization device, data synchronization method, and computer readable medium |
Families Citing this family (56)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014183559A (ja) * | 2013-03-21 | 2014-09-29 | Casio Comput Co Ltd | 報知制御装置、報知制御方法及びプログラム |
US10248206B2 (en) | 2013-08-20 | 2019-04-02 | Xsync Technologies Llc | Systems and methods for multimedia tactile augmentation |
US9703379B2 (en) | 2013-08-20 | 2017-07-11 | Xsync Technologies Llc | Systems and methods for multimedia tactile augmentation |
US9652945B2 (en) * | 2013-09-06 | 2017-05-16 | Immersion Corporation | Method and system for providing haptic effects based on information complementary to multimedia content |
US9576445B2 (en) | 2013-09-06 | 2017-02-21 | Immersion Corp. | Systems and methods for generating haptic effects associated with an envelope in audio signals |
WO2015033810A1 (ja) * | 2013-09-06 | 2015-03-12 | ソニー株式会社 | 撮像装置および方法、並びにプログラム |
US9619980B2 (en) | 2013-09-06 | 2017-04-11 | Immersion Corporation | Systems and methods for generating haptic effects associated with audio signals |
US9426539B2 (en) * | 2013-09-11 | 2016-08-23 | Intel Corporation | Integrated presentation of secondary content |
US9112940B2 (en) * | 2013-11-25 | 2015-08-18 | VideoGorillas LLC | Correlating sensor inputs with content stream intervals and selectively requesting and transmitting content streams |
KR20170030510A (ko) | 2014-07-07 | 2017-03-17 | 임머숀 코퍼레이션 | 제2 스크린 햅틱 |
US9879958B2 (en) | 2014-09-19 | 2018-01-30 | ARC Technology, LLC | Haptic feedback spark device for simulator |
US9719759B2 (en) * | 2014-09-19 | 2017-08-01 | ARC Technology, LLC | Haptic feedback device for simulator |
KR102254705B1 (ko) * | 2014-09-19 | 2021-05-24 | 삼성전자주식회사 | 단말 장치 및 그 제어방법 |
US10166466B2 (en) | 2014-12-11 | 2019-01-01 | Elwha Llc | Feedback for enhanced situational awareness |
US10449445B2 (en) * | 2014-12-11 | 2019-10-22 | Elwha Llc | Feedback for enhanced situational awareness |
US9919208B2 (en) * | 2014-12-11 | 2018-03-20 | Immersion Corporation | Video gameplay haptics |
US9600076B2 (en) * | 2014-12-19 | 2017-03-21 | Immersion Corporation | Systems and methods for object manipulation with haptic feedback |
US9658693B2 (en) | 2014-12-19 | 2017-05-23 | Immersion Corporation | Systems and methods for haptically-enabled interactions with objects |
US10225442B2 (en) * | 2015-02-16 | 2019-03-05 | Mediatek Inc. | Electronic device and method for sensing air quality |
KR20160135552A (ko) * | 2015-05-18 | 2016-11-28 | 삼성전자주식회사 | 가상 현실 장치 및 피드백 장치, 실감형 서비스 제공 시스템 및 방법 |
JP6641731B2 (ja) * | 2015-06-05 | 2020-02-05 | ソニー株式会社 | 送信装置及び送信方法、並びに受信装置及び受信方法 |
KR102414356B1 (ko) | 2015-06-26 | 2022-06-29 | 삼성전자 주식회사 | 전자 장치 및 그의 햅틱 피드백 제공 방법 |
US9734866B2 (en) | 2015-09-25 | 2017-08-15 | Intel Corporation | Perceptual computing input to determine post-production effects |
WO2017053761A1 (en) * | 2015-09-25 | 2017-03-30 | Immersion Corporation | Haptic effects design system |
US20180046250A1 (en) * | 2016-08-09 | 2018-02-15 | Wipro Limited | System and method for providing and modulating haptic feedback |
US20180067335A1 (en) * | 2016-09-07 | 2018-03-08 | Google Inc. | Optical image stabilization for folded optics camera modules |
US10102723B2 (en) | 2016-10-31 | 2018-10-16 | Immersion Corporation | Dynamic haptic generation based on detected video events |
CN106534142B (zh) * | 2016-11-22 | 2018-04-20 | 包磊 | 多媒体数据的实时传输方法及装置 |
CN106454365B (zh) * | 2016-11-22 | 2018-07-10 | 包磊 | 多媒体数据的编码、解码方法及编码、解码装置 |
US10101813B2 (en) * | 2016-12-14 | 2018-10-16 | Immersion Corporation | Automatic haptic generation based on color features and motion analysis |
US10600290B2 (en) * | 2016-12-14 | 2020-03-24 | Immersion Corporation | Automatic haptic generation based on visual odometry |
US11337456B2 (en) * | 2017-07-17 | 2022-05-24 | Rai Strategic Holdings, Inc. | Video analytics camera system for an aerosol delivery device |
US10281983B2 (en) * | 2017-09-20 | 2019-05-07 | Alex Hamid Mani | Haptic feedback device and method for providing haptic sensation based on video |
US11726571B2 (en) | 2017-09-20 | 2023-08-15 | Niki Mani | Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user |
US10503310B2 (en) | 2017-09-20 | 2019-12-10 | Alex Hamid Mani | Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user |
US10275083B2 (en) | 2017-09-20 | 2019-04-30 | Alex Hamid Mani | Assistive device with a refreshable haptic feedback interface |
US11561619B2 (en) | 2017-09-20 | 2023-01-24 | Niki Mani | Haptic feedback device and method for providing haptic sensation based on video |
US11513627B2 (en) | 2017-09-20 | 2022-11-29 | Niki Mani | Assistive device with a refreshable haptic feedback interface |
NL2020023B1 (en) * | 2017-12-05 | 2019-06-13 | Feel Robotics B V | Method and apparatus for adding a control signal for an auxiliary device to a sexually arousing video movie |
CN108399642B (zh) * | 2018-01-26 | 2021-07-27 | 上海深视信息科技有限公司 | 一种融合旋翼无人机imu数据的通用目标跟随方法和系统 |
US20200012347A1 (en) * | 2018-07-09 | 2020-01-09 | Immersion Corporation | Systems and Methods for Providing Automatic Haptic Generation for Video Content |
US11656683B2 (en) * | 2018-08-10 | 2023-05-23 | Sony Corporation | Signal generation device, signal generation method, and reproduction device |
US10638174B2 (en) * | 2018-09-24 | 2020-04-28 | Brian Sloan | Synchronized video control system for sexual stimulation devices |
US11185465B2 (en) * | 2018-09-24 | 2021-11-30 | Brian Sloan | Automated generation of control signals for sexual stimulation devices |
US11197074B2 (en) * | 2018-09-24 | 2021-12-07 | Brian Sloan | Synchronized video annotation and control system for sexual stimulation devices |
CN113841107A (zh) * | 2019-04-26 | 2021-12-24 | 惠普发展公司,有限责任合伙企业 | 空间音频和触觉 |
WO2020258319A1 (zh) * | 2019-06-28 | 2020-12-30 | 瑞声声学科技(深圳)有限公司 | 触感信号生成方法、装置和计算机设备 |
AU2020417826A1 (en) | 2019-12-31 | 2022-06-16 | Human Mode, LLC | Proxy controller suit with optional dual range kinematics |
CN111610856B (zh) * | 2020-04-30 | 2024-04-26 | 北京小米移动软件有限公司 | 震动反馈方法、震动反馈装置及存储介质 |
US11755643B2 (en) | 2020-07-06 | 2023-09-12 | Microsoft Technology Licensing, Llc | Metadata generation for video indexing |
JP6839783B1 (ja) * | 2020-09-29 | 2021-03-10 | Dmg森精機株式会社 | 回転速度判定装置 |
CN114694545B (zh) * | 2020-12-30 | 2023-11-24 | 成都极米科技股份有限公司 | 图像显示方法、装置、投影仪及存储介质 |
CN113436261B (zh) * | 2021-06-24 | 2022-04-29 | 湖南大学 | 一种面向封闭园区自动驾驶的单目视觉惯性定位方法 |
KR102505225B1 (ko) * | 2021-10-22 | 2023-03-02 | (주)인티그리트 | 시각화된 가상 안내 정보를 제공하는 자율주행장치 및 이의 동작방법 |
CN115758107B (zh) * | 2022-10-28 | 2023-11-14 | 中国电信股份有限公司 | 触觉信号传输方法及装置、存储介质及电子设备 |
WO2024101688A1 (ko) * | 2022-11-10 | 2024-05-16 | 삼성전자주식회사 | 미디어 콘텐트로부터 햅틱 정보를 획득하기 위한 전자 장치 및 그 방법 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003099177A (ja) * | 2001-09-21 | 2003-04-04 | Fuji Xerox Co Ltd | 触覚情報作成方法、触覚情報提示方法および触覚情報提示装置 |
JP2011501575A (ja) * | 2007-10-16 | 2011-01-06 | イマージョン コーポレイション | 媒体トランスポートストリームにおける触覚効果データの同期化 |
WO2011007289A2 (en) * | 2009-07-17 | 2011-01-20 | Koninklijke Philips Electronics N.V. | A method and a system for a generation of an excitation effect |
JP2013500544A (ja) * | 2009-07-24 | 2013-01-07 | ディジマーク コーポレイション | 改善された音声/映像の方法及びシステム |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003009177A (ja) * | 2001-06-21 | 2003-01-10 | For-A Co Ltd | 画像合成システム |
JP4078365B2 (ja) * | 2005-07-13 | 2008-04-23 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
US8700791B2 (en) * | 2005-10-19 | 2014-04-15 | Immersion Corporation | Synchronization of haptic effect data in a media transport stream |
CN104063056B (zh) * | 2006-04-06 | 2018-04-20 | 意美森公司 | 用于增强的触觉效果的系统和方法 |
US7979146B2 (en) * | 2006-04-13 | 2011-07-12 | Immersion Corporation | System and method for automatically producing haptic events from a digital audio signal |
US20090189748A1 (en) * | 2006-08-24 | 2009-07-30 | Koninklijke Philips Electronics N.V. | Device for and method of processing an audio signal and/or a video signal to generate haptic excitation |
KR20080048308A (ko) * | 2006-11-28 | 2008-06-02 | 삼성전자주식회사 | 기본 장치와 확장 장치의 연동 장치 및 방법 |
US9170649B2 (en) * | 2007-12-28 | 2015-10-27 | Nokia Technologies Oy | Audio and tactile feedback based on visual environment |
US8300117B2 (en) * | 2008-03-28 | 2012-10-30 | Fuji Xerox Co., Ltd. | System and method for exposing video-taking heuristics at point of capture |
US9400555B2 (en) * | 2008-10-10 | 2016-07-26 | Internet Services, Llc | System and method for synchronization of haptic data and media data |
CN102227694A (zh) * | 2008-10-10 | 2011-10-26 | 因特网服务有限责任公司 | 供触觉编码的媒体使用的触觉输出装置 |
ES2364999B1 (es) * | 2009-09-07 | 2012-08-07 | Juan Zarza Goyenechea | Dispositivo publicitario y probador de visionado con perspectiva. |
JP2013047878A (ja) * | 2011-08-29 | 2013-03-07 | Toshiba Corp | 道路状況把握装置 |
-
2013
- 2013-03-15 US US13/843,092 patent/US9064385B2/en active Active
-
2014
- 2014-03-07 JP JP2014044872A patent/JP6456593B2/ja not_active Expired - Fee Related
- 2014-03-14 EP EP14159961.3A patent/EP2779675B1/en active Active
- 2014-03-14 KR KR1020140030098A patent/KR20140113495A/ko not_active Application Discontinuation
- 2014-03-14 EP EP19177773.9A patent/EP3570553B1/en active Active
- 2014-03-14 CN CN201910795127.XA patent/CN110536162A/zh active Pending
- 2014-03-14 CN CN201410190360.2A patent/CN104049749B/zh active Active
-
2015
- 2015-05-22 US US14/719,491 patent/US9911196B2/en active Active
-
2018
- 2018-01-18 US US15/874,131 patent/US10482608B2/en not_active Expired - Fee Related
- 2018-11-01 JP JP2018206818A patent/JP6559316B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003099177A (ja) * | 2001-09-21 | 2003-04-04 | Fuji Xerox Co Ltd | 触覚情報作成方法、触覚情報提示方法および触覚情報提示装置 |
JP2011501575A (ja) * | 2007-10-16 | 2011-01-06 | イマージョン コーポレイション | 媒体トランスポートストリームにおける触覚効果データの同期化 |
WO2011007289A2 (en) * | 2009-07-17 | 2011-01-20 | Koninklijke Philips Electronics N.V. | A method and a system for a generation of an excitation effect |
JP2013500544A (ja) * | 2009-07-24 | 2013-01-07 | ディジマーク コーポレイション | 改善された音声/映像の方法及びシステム |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018513430A (ja) * | 2015-02-25 | 2018-05-24 | イマージョン コーポレーションImmersion Corporation | スローモーションのためのハプティック効果の修正 |
US11842502B2 (en) | 2018-05-11 | 2023-12-12 | Mitsubishi Electric Corporation | Data synchronization device, data synchronization method, and computer readable medium |
WO2020153194A1 (ja) * | 2019-01-23 | 2020-07-30 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP7480710B2 (ja) | 2019-01-23 | 2024-05-10 | ソニーグループ株式会社 | 情報処理装置、情報処理方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6456593B2 (ja) | 2019-01-23 |
EP2779675B1 (en) | 2019-07-10 |
EP3570553B1 (en) | 2021-05-19 |
US20150262376A1 (en) | 2015-09-17 |
US9911196B2 (en) | 2018-03-06 |
EP2779675A3 (en) | 2015-03-04 |
EP3570553A1 (en) | 2019-11-20 |
US20140267904A1 (en) | 2014-09-18 |
KR20140113495A (ko) | 2014-09-24 |
US9064385B2 (en) | 2015-06-23 |
US10482608B2 (en) | 2019-11-19 |
EP2779675A2 (en) | 2014-09-17 |
US20180144480A1 (en) | 2018-05-24 |
JP6559316B2 (ja) | 2019-08-14 |
JP2019036351A (ja) | 2019-03-07 |
CN110536162A (zh) | 2019-12-03 |
CN104049749B (zh) | 2019-09-20 |
CN104049749A (zh) | 2014-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6559316B2 (ja) | 動画コンテンツの分析に基づいて触覚フィードバックを生成する方法及び装置 | |
CN112738408B (zh) | 图像修改器的选择性识别和排序 | |
US10488195B2 (en) | Curated photogrammetry | |
US9336602B1 (en) | Estimating features of occluded objects | |
CN109154862B (zh) | 用于处理虚拟现实内容的装置、方法和计算机可读介质 | |
US20160227868A1 (en) | Removable face shield for augmented reality device | |
US20190155465A1 (en) | Augmented media | |
US11836847B2 (en) | Systems and methods for creating and displaying interactive 3D representations of real objects | |
JP7293362B2 (ja) | 撮影方法、装置、電子機器及び記憶媒体 | |
JP2014170367A (ja) | 物体検出装置、物体検出方法、物体検出システム及びプログラム | |
US20230386202A1 (en) | Creation and usage of multidimensional reality capture | |
JP2019045211A (ja) | 情報処理装置、情報処理方法及びコンピュータプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170210 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161208 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170920 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171017 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180112 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20180703 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181101 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20181108 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181219 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6456593 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: R3D03 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: R3D04 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |