JP2014526725A - 視線に基づくオーディオビジュアル再生の位置選択 - Google Patents
視線に基づくオーディオビジュアル再生の位置選択 Download PDFInfo
- Publication number
- JP2014526725A JP2014526725A JP2014529655A JP2014529655A JP2014526725A JP 2014526725 A JP2014526725 A JP 2014526725A JP 2014529655 A JP2014529655 A JP 2014529655A JP 2014529655 A JP2014529655 A JP 2014529655A JP 2014526725 A JP2014526725 A JP 2014526725A
- Authority
- JP
- Japan
- Prior art keywords
- user
- area
- display screen
- video
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000000007 visual effect Effects 0.000 title claims abstract description 8
- 230000004044 response Effects 0.000 claims abstract description 12
- 238000001514 detection method Methods 0.000 claims description 32
- 238000000034 method Methods 0.000 claims description 24
- 238000010191 image analysis Methods 0.000 claims description 15
- 238000003384 imaging method Methods 0.000 claims description 8
- 230000008859 change Effects 0.000 claims description 5
- 239000013589 supplement Substances 0.000 claims description 3
- 230000001502 supplementing effect Effects 0.000 claims description 3
- 210000001747 pupil Anatomy 0.000 description 6
- 210000003128 head Anatomy 0.000 description 5
- 239000002131 composite material Substances 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/87—Regeneration of colour television signals
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Social Psychology (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computer Networks & Wireless Communication (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Position Input By Displaying (AREA)
Abstract
【選択図】図1
Description
(項目1)
視線検出を用いてディスプレイ画面上の何をユーザーが見ているかを識別することと、
上記ユーザーが上記ディスプレイ画面上の何を見ているかに基づいて、オーディオ/ビジュアルメディアの再生を変更することと、を含む、方法。
(項目2)
上記ユーザーが上記ディスプレイ画面の一の領域を見ていることの検出に応答して、上記一の領域でビデオを再生することを含む、項目1に記載の方法。
(項目3)
ユーザーが見ている上記ディスプレイ画面の一の領域におけるオブジェクトの動きの速度を増大させることを含む、項目1に記載の方法。
(項目4)
上記ユーザーが見ている上記ディスプレイ画面上の一の領域に関連付けられたオーディオを開始すること又は停止することを含む、項目1に記載の方法。
(項目5)
上記ユーザーが見ている上記ディスプレイ画面上の一の領域を、静止画像から動画ピクチャに切り替えることを含む、項目1に記載の方法。
(項目6)
アイトラッカーを用いて、上記ディスプレイ画面上で何が見られているかを特定することを含む、項目1に記載の方法。
(項目7)
ビデオ画像解析を用いて、上記アイトラッカーを補足することを含む、項目6に記載の方法。
(項目8)
上記ユーザーが空白の画面領域を見ていることを上記アイトラッカーが示すか否かを判断することと、
上記ユーザーが空白の画面領域を見ていることを上記アイトラッカーが示す場合、ビデオ画像解析を用いて、上記ユーザーが見ていると上記アイトラッカーが特定したものの近傍にある撮像オブジェクトを識別することとを含む、項目7に記載の方法。
(項目9)
上記ディスプレイ画面の領域にリンクされたビーム形成オーディオを提供することと、
上記領域にリンクされたマイクロホンからのオーディオを再生することとを含む、項目1に記載の方法。
(項目10)
命令を記憶する非一時的なコンピューター可読媒体であって、上記命令は、コンピューターが、
ユーザーがディスプレイ画面上の何を見ているかに基づいて、オーディオ/ビジュアルメディアの再生を変更することを行えるようにする、命令を記憶する非一時的なコンピューター可読媒体。
(項目11)
上記ユーザーが一の領域を見ていることの検出に応答して、上記ユーザーが見ている上記一の領域でビデオを再生する命令を更に記憶する、項目10に記載の媒体。
(項目12)
上記ユーザーが見ている領域に示されるオブジェクトの動きの速度を増大させる命令を更に記憶する、項目10に記載の媒体。
(項目13)
上記ユーザーが見ている上記ディスプレイ画面の一の領域に関連付けられたオーディオを開始する又は停止する命令を更に記憶する、項目10に記載の媒体。
(項目14)
上記ユーザーが見ている一の領域を、静止画像から動画ピクチャに切り替える命令を更に記憶する、項目10に記載の媒体。
(項目15)
視線検出を用いて、上記ディスプレイ画面上で何が見られているのかを特定する命令を更に記憶する、項目10に記載の媒体。
(項目16)
ビデオ画像解析を用いて、上記視線検出を補足する命令を更に記憶する、項目15に記載の媒体。
(項目17)
上記視線検出により、上記ユーザーが空白の画面領域を見ていることが示さているか否かを判断し、
上記視線検出により、上記ユーザーが空白の画面領域を見ていることが示されている場合、ビデオ画像解析を用いて、近傍の撮像オブジェクトを識別する命令を更に記憶する、項目16に記載の媒体。
(項目18)
上記ディスプレイ画面の領域にリンクされたビーム形成オーディオを提供する命令と、
識別された一の領域にリンクされたマイクロホンからの上記オーディオを再生する命令と、を更に記憶する、項目10に記載の媒体。
(項目19)
プロセッサと、
コンピューターシステムのユーザーのビデオを受信するビデオインターフェースと、を備え、
上記プロセッサは、上記ビデオを用いて、ユーザーがディスプレイ画面上で何を見ているのかを識別し、上記ユーザーが何を見ているかに基づいてオーディオメディア又はビジュアルメディアの再生を変更する、装置。
(項目20)
上記プロセッサに結合されるビデオディスプレイを備える、項目19に記載の装置。
(項目21)
上記ビデオディスプレイに搭載され、上記ビデオインターフェースに結合されるカメラを備える、項目20に記載の装置。
(項目22)
上記プロセッサは、上記ユーザーが上記ディスプレイ画面の一の領域を見ていることの検出に応答して、上記一の領域でビデオを再生する、項目19に記載の装置。
(項目23)
上記プロセッサは、上記ユーザーが見ているオブジェクトの動きの速度を増大させる、項目19に記載の装置。
(項目24)
上記プロセッサは、上記ユーザーが見ているものに関連付けられたオーディオを開始する又は停止する、項目19に記載の装置。
(項目25)
上記プロセッサは、上記ユーザーが見ている一の領域を、静止画像から動画ピクチャに切り替える、項目19に記載の装置。
(項目26)
上記プロセッサは、視線検出を用いて、上記ディスプレイ画面上で何が見られているかを特定する、項目19に記載の装置。
(項目27)
上記プロセッサは、ビデオ画像解析を用いて上記視線検出を補足する、項目26に記載の装置。
(項目28)
上記プロセッサは、視線検出により、上記ユーザーが空白の画面領域を見ていることが示されているか否かを判断し、
上記視線検出により、上記ユーザーが空白の画面領域を見ていることが示されている場合、ビデオ画像解析を用いて、上記視線検出に基づいて識別された位置の近傍の撮像オブジェクトを識別する、項目27に記載の装置。
(項目29)
上記プロセッサは、上記近傍の撮像オブジェクトに基づいて上記視線検出を補正する、項目28に記載の装置。
(項目30)
上記プロセッサは、上記ディスプレイ画面の領域にリンクされたビーム形成オーディオを提供し、上記識別された領域にリンクされたマイクロホンからのオーディオを再生する、項目19に記載の装置。
Claims (30)
- 視線検出を用いてディスプレイ画面上の何をユーザーが見ているかを識別することと、
前記ユーザーが前記ディスプレイ画面上の何を見ているかに基づいて、オーディオ/ビジュアルメディアの再生を変更することと、を含む、方法。 - 前記ユーザーが前記ディスプレイ画面の一の領域を見ていることの検出に応答して、前記一の領域でビデオを再生することを含む、請求項1に記載の方法。
- ユーザーが見ている前記ディスプレイ画面の一の領域におけるオブジェクトの動きの速度を増大させることを含む、請求項1に記載の方法。
- 前記ユーザーが見ている前記ディスプレイ画面上の一の領域に関連付けられたオーディオを開始すること又は停止することを含む、請求項1に記載の方法。
- 前記ユーザーが見ている前記ディスプレイ画面上の一の領域を、静止画像から動画ピクチャに切り替えることを含む、請求項1に記載の方法。
- アイトラッカーを用いて、前記ディスプレイ画面上で何が見られているかを特定することを含む、請求項1に記載の方法。
- ビデオ画像解析を用いて、前記アイトラッカーを補足することを含む、請求項6に記載の方法。
- 前記ユーザーが空白の画面領域を見ていることを前記アイトラッカーが示すか否かを判断することと、
前記ユーザーが空白の画面領域を見ていることを前記アイトラッカーが示す場合、ビデオ画像解析を用いて、前記ユーザーが見ていると前記アイトラッカーが特定したものの近傍にある撮像オブジェクトを識別することとを含む、請求項7に記載の方法。 - 前記ディスプレイ画面の領域にリンクされたビーム形成オーディオを提供することと、
前記領域にリンクされたマイクロホンからのオーディオを再生することとを含む、請求項1に記載の方法。 - 命令を記憶する非一時的なコンピューター可読媒体であって、前記命令は、コンピューターが、
ユーザーがディスプレイ画面上の何を見ているかに基づいて、オーディオ/ビジュアルメディアの再生を変更することを行えるようにする、命令を記憶する非一時的なコンピューター可読媒体。 - 前記ユーザーが一の領域を見ていることの検出に応答して、前記ユーザーが見ている前記一の領域でビデオを再生する命令を更に記憶する、請求項10に記載の媒体。
- 前記ユーザーが見ている領域に示されるオブジェクトの動きの速度を増大させる命令を更に記憶する、請求項10に記載の媒体。
- 前記ユーザーが見ている前記ディスプレイ画面の一の領域に関連付けられたオーディオを開始する又は停止する命令を更に記憶する、請求項10に記載の媒体。
- 前記ユーザーが見ている一の領域を、静止画像から動画ピクチャに切り替える命令を更に記憶する、請求項10に記載の媒体。
- 視線検出を用いて、前記ディスプレイ画面上で何が見られているのかを特定する命令を更に記憶する、請求項10に記載の媒体。
- ビデオ画像解析を用いて、前記視線検出を補足する命令を更に記憶する、請求項15に記載の媒体。
- 前記視線検出により、前記ユーザーが空白の画面領域を見ていることが示さているか否かを判断し、
前記視線検出により、前記ユーザーが空白の画面領域を見ていることが示されている場合、ビデオ画像解析を用いて、近傍の撮像オブジェクトを識別する命令を更に記憶する、請求項16に記載の媒体。 - 前記ディスプレイ画面の領域にリンクされたビーム形成オーディオを提供する命令と、
識別された一の領域にリンクされたマイクロホンからの前記オーディオを再生する命令と、を更に記憶する、請求項10に記載の媒体。 - プロセッサと、
コンピューターシステムのユーザーのビデオを受信するビデオインターフェースと、を備え、
前記プロセッサは、前記ビデオを用いて、ユーザーがディスプレイ画面上で何を見ているのかを識別し、前記ユーザーが何を見ているかに基づいてオーディオメディア又はビジュアルメディアの再生を変更する、装置。 - 前記プロセッサに結合されるビデオディスプレイを備える、請求項19に記載の装置。
- 前記ビデオディスプレイに搭載され、前記ビデオインターフェースに結合されるカメラを備える、請求項20に記載の装置。
- 前記プロセッサは、前記ユーザーが前記ディスプレイ画面の一の領域を見ていることの検出に応答して、前記一の領域でビデオを再生する、請求項19に記載の装置。
- 前記プロセッサは、前記ユーザーが見ているオブジェクトの動きの速度を増大させる、請求項19に記載の装置。
- 前記プロセッサは、前記ユーザーが見ているものに関連付けられたオーディオを開始する又は停止する、請求項19に記載の装置。
- 前記プロセッサは、前記ユーザーが見ている一の領域を、静止画像から動画ピクチャに切り替える、請求項19に記載の装置。
- 前記プロセッサは、視線検出を用いて、前記ディスプレイ画面上で何が見られているかを特定する、請求項19に記載の装置。
- 前記プロセッサは、ビデオ画像解析を用いて前記視線検出を補足する、請求項26に記載の装置。
- 前記プロセッサは、視線検出により、前記ユーザーが空白の画面領域を見ていることが示されているか否かを判断し、
前記視線検出により、前記ユーザーが空白の画面領域を見ていることが示されている場合、ビデオ画像解析を用いて、前記視線検出に基づいて識別された位置の近傍の撮像オブジェクトを識別する、請求項27に記載の装置。 - 前記プロセッサは、前記近傍の撮像オブジェクトに基づいて前記視線検出を補正する、請求項28に記載の装置。
- 前記プロセッサは、前記ディスプレイ画面の領域にリンクされたビーム形成オーディオを提供し、前記識別された領域にリンクされたマイクロホンからのオーディオを再生する、請求項19に記載の装置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/US2011/050895 WO2013036237A1 (en) | 2011-09-08 | 2011-09-08 | Eye gaze based location selection for audio visual playback |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014526725A true JP2014526725A (ja) | 2014-10-06 |
JP5868507B2 JP5868507B2 (ja) | 2016-02-24 |
Family
ID=47832475
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014529655A Expired - Fee Related JP5868507B2 (ja) | 2011-09-08 | 2011-09-08 | 視線に基づくオーディオビジュアル再生の位置選択 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20130259312A1 (ja) |
EP (1) | EP2754005A4 (ja) |
JP (1) | JP5868507B2 (ja) |
KR (1) | KR101605276B1 (ja) |
CN (1) | CN103765346B (ja) |
WO (1) | WO2013036237A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018506205A (ja) * | 2014-12-23 | 2018-03-01 | ノキア テクノロジーズ オーユー | バーチャルリアリティコンテンツの制御 |
JP2022064987A (ja) * | 2016-03-14 | 2022-04-26 | ロバート エル リッチモンド、 | デジタル媒体と観察者の相互作用の構成及び実現 |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9131266B2 (en) | 2012-08-10 | 2015-09-08 | Qualcomm Incorporated | Ad-hoc media presentation based upon dynamic discovery of media output devices that are proximate to one or more users |
US20140316543A1 (en) | 2013-04-19 | 2014-10-23 | Qualcomm Incorporated | Configuring audio for a coordinated display session between a plurality of proximate client devices |
WO2015025186A1 (en) * | 2013-08-21 | 2015-02-26 | Thomson Licensing | Video display having audio controlled by viewing direction |
US9342147B2 (en) * | 2014-04-10 | 2016-05-17 | Microsoft Technology Licensing, Llc | Non-visual feedback of visual change |
US9318121B2 (en) | 2014-04-21 | 2016-04-19 | Sony Corporation | Method and system for processing audio data of video content |
GB2527306A (en) * | 2014-06-16 | 2015-12-23 | Guillaume Couche | System and method for using eye gaze or head orientation information to create and play interactive movies |
US9606622B1 (en) * | 2014-06-26 | 2017-03-28 | Audible, Inc. | Gaze-based modification to content presentation |
US20160035063A1 (en) * | 2014-07-30 | 2016-02-04 | Lenovo (Singapore) Pte. Ltd. | Scaling data automatically |
CN104731335B (zh) * | 2015-03-26 | 2018-03-23 | 联想(北京)有限公司 | 一种播放内容调整方法及电子设备 |
US11269403B2 (en) | 2015-05-04 | 2022-03-08 | Disney Enterprises, Inc. | Adaptive multi-window configuration based upon gaze tracking |
US9774907B1 (en) | 2016-04-05 | 2017-09-26 | International Business Machines Corporation | Tailored audio content delivery |
US10153002B2 (en) * | 2016-04-15 | 2018-12-11 | Intel Corporation | Selection of an audio stream of a video for enhancement using images of the video |
FR3050895A1 (fr) | 2016-04-29 | 2017-11-03 | Orange | Procede de composition contextuelle d'une representation video intermediaire |
CN106569598A (zh) * | 2016-10-31 | 2017-04-19 | 努比亚技术有限公司 | 菜单栏的管理装置及方法 |
EP3470976A1 (en) * | 2017-10-12 | 2019-04-17 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Method and apparatus for efficient delivery and usage of audio messages for high quality of experience |
US10481856B2 (en) | 2017-05-15 | 2019-11-19 | Microsoft Technology Licensing, Llc | Volume adjustment on hinged multi-screen device |
JP2019066618A (ja) * | 2017-09-29 | 2019-04-25 | フォーブ インコーポレーテッド | 画像表示システム、画像表示方法及び画像表示プログラム |
CN111078166A (zh) * | 2018-10-18 | 2020-04-28 | 三星电子株式会社 | 显示设备及其控制方法 |
EP3940687A4 (en) * | 2019-03-12 | 2022-05-04 | Sony Group Corporation | INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD AND PROGRAM |
CN113906368A (zh) * | 2019-04-05 | 2022-01-07 | 惠普发展公司,有限责任合伙企业 | 基于生理观察修改音频 |
JP7285967B2 (ja) * | 2019-05-31 | 2023-06-02 | ディーティーエス・インコーポレイテッド | フォービエイテッドオーディオレンダリング |
CN112135201B (zh) * | 2020-08-29 | 2022-08-26 | 北京市商汤科技开发有限公司 | 视频制作方法及相关装置 |
US11743670B2 (en) | 2020-12-18 | 2023-08-29 | Qualcomm Incorporated | Correlation-based rendering with multiple distributed streams accounting for an occlusion for six degree of freedom applications |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000138872A (ja) * | 1998-10-30 | 2000-05-16 | Sony Corp | 情報処理装置および方法、並びに提供媒体 |
JP2001008232A (ja) * | 1999-06-25 | 2001-01-12 | Matsushita Electric Ind Co Ltd | 全方位映像出力方法と装置 |
JP2005091571A (ja) * | 2003-09-16 | 2005-04-07 | Fuji Photo Film Co Ltd | 表示制御装置、及び表示システム |
JP2006126965A (ja) * | 2004-10-26 | 2006-05-18 | Sharp Corp | 合成映像生成システム,方法,プログラム,及び、記録媒体 |
JP2006155238A (ja) * | 2004-11-29 | 2006-06-15 | Hiroshima Univ | 情報処理装置、携帯端末、情報処理方法、情報処理プログラム、およびコンピュータ読取可能な記録媒体 |
US20060256133A1 (en) * | 2005-11-05 | 2006-11-16 | Outland Research | Gaze-responsive video advertisment display |
JP2007036846A (ja) * | 2005-07-28 | 2007-02-08 | Nippon Telegr & Teleph Corp <Ntt> | 動画再生装置およびその制御方法 |
JP2008071162A (ja) * | 2006-09-14 | 2008-03-27 | Toyota Motor Corp | 視線先推定装置 |
US20110109880A1 (en) * | 2006-01-26 | 2011-05-12 | Ville Nummela | Eye Tracker Device |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6195640B1 (en) * | 1999-01-29 | 2001-02-27 | International Business Machines Corporation | Audio reader |
US6577329B1 (en) * | 1999-02-25 | 2003-06-10 | International Business Machines Corporation | Method and system for relevance feedback through gaze tracking and ticker interfaces |
US6456262B1 (en) * | 2000-05-09 | 2002-09-24 | Intel Corporation | Microdisplay with eye gaze detection |
US20050047629A1 (en) * | 2003-08-25 | 2005-03-03 | International Business Machines Corporation | System and method for selectively expanding or contracting a portion of a display using eye-gaze tracking |
US7500752B2 (en) * | 2004-04-28 | 2009-03-10 | Natus Medical Incorporated | Diagnosing and training the gaze stabilization system |
EP1968006B1 (en) * | 2005-12-27 | 2020-03-25 | Panasonic Intellectual Property Corporation of America | Image processing apparatus |
US20100231504A1 (en) * | 2006-03-23 | 2010-09-16 | Koninklijke Philips Electronics N.V. | Hotspots for eye track control of image manipulation |
US8494215B2 (en) * | 2009-03-05 | 2013-07-23 | Microsoft Corporation | Augmenting a field of view in connection with vision-tracking |
US20120105486A1 (en) * | 2009-04-09 | 2012-05-03 | Dynavox Systems Llc | Calibration free, motion tolerent eye-gaze direction detector with contextually aware computer interaction and communication methods |
CN102073435A (zh) * | 2009-11-23 | 2011-05-25 | 英业达股份有限公司 | 画面操作方法及应用该方法的电子装置 |
US20110228051A1 (en) * | 2010-03-17 | 2011-09-22 | Goksel Dedeoglu | Stereoscopic Viewing Comfort Through Gaze Estimation |
US8670019B2 (en) * | 2011-04-28 | 2014-03-11 | Cisco Technology, Inc. | System and method for providing enhanced eye gaze in a video conferencing environment |
-
2011
- 2011-09-08 CN CN201180073321.9A patent/CN103765346B/zh active Active
- 2011-09-08 US US13/993,245 patent/US20130259312A1/en not_active Abandoned
- 2011-09-08 JP JP2014529655A patent/JP5868507B2/ja not_active Expired - Fee Related
- 2011-09-08 WO PCT/US2011/050895 patent/WO2013036237A1/en active Application Filing
- 2011-09-08 EP EP11872027.5A patent/EP2754005A4/en not_active Withdrawn
- 2011-09-08 KR KR1020147006266A patent/KR101605276B1/ko active IP Right Grant
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000138872A (ja) * | 1998-10-30 | 2000-05-16 | Sony Corp | 情報処理装置および方法、並びに提供媒体 |
JP2001008232A (ja) * | 1999-06-25 | 2001-01-12 | Matsushita Electric Ind Co Ltd | 全方位映像出力方法と装置 |
JP2005091571A (ja) * | 2003-09-16 | 2005-04-07 | Fuji Photo Film Co Ltd | 表示制御装置、及び表示システム |
JP2006126965A (ja) * | 2004-10-26 | 2006-05-18 | Sharp Corp | 合成映像生成システム,方法,プログラム,及び、記録媒体 |
JP2006155238A (ja) * | 2004-11-29 | 2006-06-15 | Hiroshima Univ | 情報処理装置、携帯端末、情報処理方法、情報処理プログラム、およびコンピュータ読取可能な記録媒体 |
JP2007036846A (ja) * | 2005-07-28 | 2007-02-08 | Nippon Telegr & Teleph Corp <Ntt> | 動画再生装置およびその制御方法 |
US20060256133A1 (en) * | 2005-11-05 | 2006-11-16 | Outland Research | Gaze-responsive video advertisment display |
US20110109880A1 (en) * | 2006-01-26 | 2011-05-12 | Ville Nummela | Eye Tracker Device |
JP2008071162A (ja) * | 2006-09-14 | 2008-03-27 | Toyota Motor Corp | 視線先推定装置 |
Non-Patent Citations (1)
Title |
---|
呂山 他1名, 第54回(平成9年前期)全国大会講演論文集(4) インタフェース コンピュータと人間社会, JPN6015013010, 12 March 1997 (1997-03-12), pages 4 - 117, ISSN: 0003209698 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018506205A (ja) * | 2014-12-23 | 2018-03-01 | ノキア テクノロジーズ オーユー | バーチャルリアリティコンテンツの制御 |
JP2022064987A (ja) * | 2016-03-14 | 2022-04-26 | ロバート エル リッチモンド、 | デジタル媒体と観察者の相互作用の構成及び実現 |
US11782507B2 (en) | 2016-03-14 | 2023-10-10 | Jeffrey T. Haley | Image changes based on facial appearance |
US11816257B2 (en) | 2016-03-14 | 2023-11-14 | Jeffrey T. Haley | Image changes based on gaze location |
Also Published As
Publication number | Publication date |
---|---|
EP2754005A1 (en) | 2014-07-16 |
KR101605276B1 (ko) | 2016-03-21 |
WO2013036237A1 (en) | 2013-03-14 |
US20130259312A1 (en) | 2013-10-03 |
CN103765346B (zh) | 2018-01-26 |
CN103765346A (zh) | 2014-04-30 |
JP5868507B2 (ja) | 2016-02-24 |
EP2754005A4 (en) | 2015-04-22 |
KR20140057595A (ko) | 2014-05-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5868507B2 (ja) | 視線に基づくオーディオビジュアル再生の位置選択 | |
JP6944564B2 (ja) | 注視追跡のための装置及び方法 | |
KR102087690B1 (ko) | 임의의 위치 및 임의의 시간으로부터 비디오 컨텐츠를 재생하기 위한 방법 및 장치 | |
US8964008B2 (en) | Volumetric video presentation | |
EP3369038B1 (en) | Tracking object of interest in an omnidirectional video | |
JP6165846B2 (ja) | 目のトラッキングに基づくディスプレイの一部の選択的強調 | |
US9684435B2 (en) | Camera selection interface for producing a media presentation | |
US20150036999A1 (en) | Viewer Attention Controlled Video Playback | |
CN109154862B (zh) | 用于处理虚拟现实内容的装置、方法和计算机可读介质 | |
KR102176598B1 (ko) | 비디오 데이터를 위한 궤적 데이터 생성 방법 | |
US20190026951A1 (en) | An Apparatus and Associated Methods | |
WO2018004933A1 (en) | Apparatus and method for gaze tracking | |
WO2017144778A1 (en) | An apparatus and associated methods | |
US12022231B2 (en) | Video recording and playback systems and methods | |
US11778155B2 (en) | Image processing apparatus, image processing method, and storage medium | |
US20230010078A1 (en) | Object or region of interest video processing system and method | |
RAI | Document Image Quality Assessment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150330 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150407 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150601 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160105 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5868507 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |