CN103765374A - 交互式屏幕观看 - Google Patents

交互式屏幕观看 Download PDF

Info

Publication number
CN103765374A
CN103765374A CN201180073357.7A CN201180073357A CN103765374A CN 103765374 A CN103765374 A CN 103765374A CN 201180073357 A CN201180073357 A CN 201180073357A CN 103765374 A CN103765374 A CN 103765374A
Authority
CN
China
Prior art keywords
user
region
equipment
outward appearance
described user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201180073357.7A
Other languages
English (en)
Inventor
K.M.里昂斯
J.J.拉特克利夫
H.W.豪泽克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN103765374A publication Critical patent/CN103765374A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • G06F3/04897—Special input arrangements or commands for improving display capability
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0606—Manual adjustment
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/066—Adjustment of display parameters for control of contrast
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0686—Adjustment of display parameters with two or more screen areas displaying information with different brightness or colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Focusing (AREA)
  • Details Of Cameras Including Film Mechanisms (AREA)
  • Automatic Focus Adjustment (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

计算机显示器的呈现可基于用户正观看显示器上的对象来修改。在一个实施例中，凝视检测技术可用来确定用户正注视的对象。基于用户正注视的对象，可改变显示器，以使用户正注视的区域处的显示得到改进或降级。

Description

交互式屏幕观看
背景技术
一般来说，本公开涉及计算机系统，以及具体来说，涉及那些计算机系统的显示器和图形处理。
计算机系统通常能够显示多种不同的图像。例如，它可显示文本、图片，例如静止图像或视频图像，或者它能够显示动画图形，只列举几个示例。
以静物照片为例，一般来说，多个设定用来捕获图像。一旦由捕获图像的人进行了这些设定，则所产生的绘图的性质是固定的。在一些情况下，可应用后处理，以跨图像改变绘图。例如，可应用对比度增强，可进行照度变化，以及在完成图片中可进行其它变更。
附图说明
图1是本发明的一个实施例的系统图示；
图2是按照本发明的一个实施例的拍摄装置的流程图；
图3是按照本发明的一个实施例的图像显示系统的流程图；
图4是按照本发明的一个实施例、图3所示实施例的建立序列；以及
图5是按照本发明的一个实施例的拍摄装置的示意图示。
具体实施方式
按照本发明的一些实施例，任何类型的计算机显示图像的绘图可在图像已经显示之后局部改变。在一些实施例中，局部变化可以是整个绘图中的特定区域的用户选择的结果。然后可重新显示这些区域，以增强其特性。例如，当用户查看计算机绘图的特定区域时，可调整那个区域的各种特性，作为示例包括分辨率、焦深、曝光和视差。因此，图像可在当前感兴趣区域中局部增强。
在许多情况下，不可能优化跨图像的任何计算机显示绘图的全部可调整特性。图像的不同区域中所示的对象可能离图像捕获装置(或者图形绘图的视点)不同的距离，并且因此可能不同程度地离焦。基于捕获绘图的方式，视差跨绘图可能是不同的。类似地，照度可受到各种局部照明效果影响。最后曝光在绘图的不同位置可能是不同的。
因此，实现当前更感兴趣区域中的选择性增强会是有利的。这一点可通过确定哪些区域是用户感兴趣的，例如通过经过输入/输出装置的用户选择，或者通过使用凝视检测以确定用户实际上正注视的对象，来进行。然后，这些区域可重新渲染，以增强如用户所预期的各种特性。在一些实施例中，这可自动发生。
参照图1，计算机系统10可包括显示器12，其上安装了拍摄装置14。作为示例，计算机系统10可以是固定或有线系统、例如台式计算机，或者是移动或电池供电系统、例如膝上型、移动因特网装置、蜂窝电话、电视机、成像装置或者娱乐系统。
在一些实施例中，拍摄装置14是用于用户凝视检测的摄像机。如本文所使用的“凝视检测”表示确定用户在任何时刻正注视显示器12的哪一部分。“凝视检测”包含头部、脸部和/或眼睛跟踪。凝视检测系统还可包括红外光源，其采用红外光照射用户的眼睛。这种照射造成“红眼”效应，其可改进眼睛跟踪。可使用轴上红外光源，其定位成接近拍摄装置14。另外，能够改为使用轴外光源，其与拍摄装置间隔开。显示器14可耦合到包括感兴趣区域识别模块18的处理器16，感兴趣区域识别模块18在一个实施例中使用来自凝视检测器的输入，来确定用户正注视显示器的哪一个区域。
感兴趣区域识别模块18可采用硬件、软件或固件来实现。作为使用凝视检测的补充或替代，可接收采取光标输入的形式的用户输入、或者在显示器12是触摸屏的情况下基于与显示屏幕的用户接触的用户输入。还可应用指示感兴趣区域的其它方式。
感兴趣区域识别模块18耦合到图像变换模块20中，其在一个实施例中也包含在处理器16中。作为示例，模块20可变换静止或运动图像或者动画。在一个实施例中，照片变换模块20可依靠图片24的数据库，来变换感兴趣区域。感兴趣区域可根据曝光、景深、视差、分辨率或者任何其它特性来变换。在一些实施例中，数据库24可包括采用变化特性所捕获的同一画面的多个绘图。例如，曝光、景深、视差、照度或分辨率中的任一个或多个可以改变，并且因此特定感兴趣区域可通过选择图片数据库24中的绘图的不同版本，来使其特性经过调整。经变换的图像则可驱动到显示器驱动器22，其又提供给显示器12供修改当前显示。
在一些实施例中，应用于感兴趣区域的变化的性质可预先编程。因此，用户可对于在感兴趣区域可改变哪些特性进行精确编程。另外，用户能够提供实时命令以指示用户如何想要改变特定感兴趣区域。这些可由任何输入装置来提供，甚至可通过语音命令或手势命令来指示，这只给出附加示例。
作为又一备选方案，系统可确定在特定区域中可增强特性的哪些。在一些实施例中，系统可自动增强那些可增强特性的任一个或全部。
参照图2，序列26可由包括拍摄装置14的基于处理器的系统10来实现。因此，基于处理器的系统可以是照相机或摄像机或者具有成像能力的任何类型的计算机。它可通过硬件、软件和/或固件来实现。在软件和固件实施例中，该序列可通过诸如半导体、磁或光存储介质之类的非暂时计算机可读介质上存储的计算机可读指令来实现。
在一些实施例中，该序列可开始于确定是否接收到捕获图像(例如帧或者帧序列，其组成影片)的命令，如菱形框28所示。如果是的话，则多个图片可采用不同焦点、照度和/或立体对应性以及其它特性来自动捕获，如框30所示。然后，这些图片可存储在数据库24中，如框32所示。在一些实施例中，图片可按照使得已知哪些图片对应于哪些效果的方式来组织或者加标签。
随后来看图3，通过可采用软件、硬件和/或固件所实现的序列，来示范计算机控制显示器。在软件和固件应用中，该序列可通过非暂时计算机可读介质上存储的指令来实现。
最初，识别感兴趣区域，如菱形框34所示。感兴趣区域可再次按照多种不同方式来识别，包括接收来自凝视检测模块的用户输入、用户触摸屏输入或者光标输入，这只列举几个示例。
在一些情况下，感兴趣区域可使用某个预先编程序列来确定。例如，可预期使用户注视显示器中的各种区域。因此，感兴趣区域可通过内容或者通过将系统编程为要实现的某个图案来管理。因此，在一些实施例中，可经过屏幕上的绘图逐个区域来引导用户。例如，可改变绘图，以鼓励用户按照给定方式来查看图片。相反，可改变绘图，以便例如通过使某个对象的外观降级，来使观众的注意力离开画面中用户正注视的那个对象。例如，可使对象模糊，而更清晰地示出另一个对象。
然后，在框36，可实现图像选择、变换和组合。这一点可通过选择数据库中对应于预期增强的图像，并且然后将那些图像组合为显示器12上显示的一个图片，来进行。
在一些实施例中，可使用动态照片渲染，如框38所示。动态渲染可涉及选择(一个或多个)所捕获帧来取代现有帧，以改变用户正注视的对象的外观。
在一种方式中，绘图的不同版本可取代当前绘图，以便在用户感兴趣或注视的区域提供预期效果。在另一种方式中，感兴趣区域可使用计算机图形技术来重新渲染，以提供预期效果。例如，可提供被成像对象的马赛克，以组成整个画面。这些马赛克的每个可采用经修改的计算机渲染绘图来取代。另外，在一些实施例中，可结合计算机渲染变化以及通过采用不同拍摄装置设定捕获图像的不同版本所产生的变化的组合。最后，在框40，将显示器变换成示出具有预期增强的所选区域。
在一些实施例中，基于用户凝视检测的画面的变化可按照模拟相对于肉眼工作的方式观看画面的方式来实现。这可能表示模拟肉眼工作的方式，或者特意提供与肉眼工作的方式相反的效果。作为示例，当用户注视强光时，亮度随着眼睛调整而逐渐减小，并且将较少光发射到眼睛中。
人眼具有某个适应率。该同样的适应可电子地应用来当画面中的照明发生变化时改变用户观看画面的方式。例如，当用户改变他或她的焦点以注视画面中的强光时，例如使用计算机渲染技术，光线最初可看来亮，并且然后可逐渐暗淡。这一点发生的速率可对应于肉眼适应光线的速率，或者能够按照与该适应不同的速率发生，以便产生预期效果。
虽然描述了绘图源是成像装置、例如拍摄装置的实施例，但是在其它实施例中，该源可以是任何可观看媒体源，包括诸如广播、有线或卫星源之类的电视源以及诸如DVD光盘或其它存储介质之类的数字媒体。在一个实施例中，例如，使用电视，响应用户正注视的对象，发送给用户接收器的内容可从头端来改变。因此，本文所述的基于凝视检测的变化可通过按照用户当前注视的对象从头端发送绘图的不同版本来实现。
在一些实施例中，眼睛凝视检测可能不太准确。在这种情况下，计算机视觉技术可用来增强系统的操作。作为示例，假定用户正注视画面中所描绘的人的头部。但是眼睛凝视检测可能出错，并且实际上可能确定焦点是接近但不是对应于被成像人的头部的空白区。可提供计算机内容分析，以搜索使用眼睛跟踪所定位的区域附近的区域，以及确定实际焦点必须是对用户的头部，因为一般来说，人不会注视屏幕的空白区。因此，响应关于用户凝视聚焦在空白区的眼睛跟踪器指示，可搜索被成像画面，以查找接近对象，以及确定用户凝视的更可能对象。这样，所检测凝视方向可使用内容分析来调整。
在一个实施例中，图3的序列可使用图4所示的建立序列42来实现。在系统的实际使用之前，图3的序列可通过为那个序列提供输入数据来实现。建立序列42还可通过硬件、软件和/或固件来实现，以及软件和固件实施例可通过非暂时计算机可读介质中存储的计算机可执行指令来实现。
最初，在框44，接收感兴趣区域大小的选择。因此，用户能够指示，当识别屏幕上的特定区域时，应当修改围绕准确凝视目标的周围区域有多大。因此，以输入像素为中心的诸如圆形、正方形或矩形区域之类的给定几何区域可基于用户选择自动地应用。可接收的其它输入是焦点、照度和立体对应性灵敏度设定的粒度。因此，图像可以以一系列增加或降低的分辨率、焦点、照度和立体对应性来捕获。这些设定之间的范围或者各连续捕获的图像之间的变化量可由用户在框46来设置。
将要记录的多个曝光设定可由用户在框48来设置。所有这种信息可与拍摄装置或系统10的任一个关联地存储，如情况可以是这样。在一些实施例中，建立序列可在拍摄装置和计算机10中单独实现。
最后，参照图5，示出拍摄装置14的一个示例。在一个实施例中，拍摄装置14可以是全光照相机50，其能够同时以不同设定(即，焦深)拍摄多个图片。另一个实施例可以简单地使用对焦包围（focus bracketing）、以不同拍摄装置设定来拍摄同一画面的一系列快照。在又一实施例中，自动包围可用来以不同设定自动捕获同一画面的一系列快照。
拍摄装置50可包括处理器52，其耦合到存储装置60。存储装置60可从建立序列42接收数据，并且包括软件或固件实现的实施例中的序列26。在一个实施例中，处理器52可运行这种序列。图像传感器54也耦合到处理器52，图像传感器54可用来实际捕获静止或运动图像。透镜系统56可由处理器52来控制。透镜系统可通过处理器52对一系列快速曝光的每个以电子方式自动连续改变分辨率、景深或焦点中的一个或多个。最后，照射系统或照明58可由处理器52动态地调整。
本文所述的图形处理技术可通过各种硬件架构来实现。例如，图形功能性可集成在芯片组中。备选地，可使用分立图形处理器。作为又一个实施例，图形功能可通过包括多核处理器的通用处理器来实现。
本说明书中提到“一个实施例”或“实施例”表示结合该实施例所述的具体特征、结构或特性包含在本发明所包含的至少一个实现中。因此，词语“一个实施例”或者“在实施例中”的出现不一定都表示同一个实施例。此外，具体特征、结构或特性可通过与所示具体实施例不同的其它适当形式来创立，并且所有这类形式均可包含在本申请的权利要求书中。
虽然针对有限数量的实施例描述了本发明，但是本领域的技术人员将会从中知道大量修改和变更。预计所附权利要求书涵盖落入本发明的真实精神和范围之内的所有这类修改和变更。

Claims (30)

1. 一种方法，包括：
基于用户正在观看计算机显示器的方式来改变计算机显示器的呈现。
2. 如权利要求1所述的方法，包括使用采用不同成像装置设定所拍摄的同一画面的多个所存储绘图来改变所述呈现。
3. 如权利要求1所述的方法，包括使用计算机渲染来改变所述呈现。
4. 如权利要求1所述的方法，包括使用眼睛凝视检测来确定所述用户正注视的对象，以及改变检测到用户凝视的位置处的区域的呈现。
5. 如权利要求4所述的方法，包括改变检测到用户凝视的位置处的区域中的焦点、照度或立体对应性中的一个或多个。
6. 如权利要求4所述的方法，包括改变与所述用户正注视的区域间隔开的区域中的所述显示器的呈现，以便将所述用户的注意力吸引到另一个区域。
7. 如权利要求5所述的方法，包括改进所述用户正注视的区域的外观。
8. 如权利要求5所述的方法，包括使所述用户正注视的区域的外观降级。
9. 如权利要求5所述的方法，包括使用凝视检测技术来确定所述用户正注视的位置，以及使用视频分析来调整所述凝视检测技术的结果。
10. 一种存储指令的非暂时计算机可读介质，所述指令由计算机运行以用于：
响应所述用户正观看该计算机显示器的方式的检测，而改变计算机显示器上所描绘的对象的外观。
11. 如权利要求10所述的介质，还存储用于使用采用不同成像装置设定所拍摄的同一画面的多个所存储绘图的指令。
12. 如权利要求10所述的介质，还存储用于使用计算机渲染来改变所述计算机显示器上的被成像对象的绘图的指令。
13. 如权利要求10所述的介质，还存储用于使用眼睛凝视检测来确定所述用户正注视的对象以及改变作为所述用户的眼睛凝视的目标的区域的外观的指令。
14. 如权利要求13所述的介质，还存储用于改变所述区域中的焦点、照度或立体对应性中的一个或多个的指令。
15. 如权利要求14所述的介质，还存储用于改变与所述区域间隔开的被成像对象的外观、以便将所述用户的注意力吸引到所述被成像对象的指令。
16. 如权利要求15所述的介质，还存储用于改进所述区域的外观的指令。
17. 如权利要求16所述的介质，还存储用于使所述区域的外观降级的指令。
18. 如权利要求10所述的介质，还存储用于使用凝视检测技术来确定所述用户正注视的位置以及使用视频分析来调整所述凝视检测技术的结果的指令。
19. 一种设备，包括：
处理器，响应所述用户正注视所述显示器上的对象的检测而改变计算机显示器上所描绘的对象的外观；以及
成像装置，耦合到所述计算机显示器。
20. 如权利要求19所述的设备，包括耦合到所述处理器的计算机显示器。
21. 如权利要求20所述的设备，其中，所述成像装置安装在所述计算机显示器上。
22. 如权利要求19所述的设备，其中，所述处理器改变所述用户正注视所述显示器上的对象的外观。
23. 如权利要求19所述的设备，其中，所述成像装置是全光照相机。
24. 如权利要求23所述的设备，所述拍摄装置采用不同成像装置设定来自动捕获同一画面的多个所存储绘图。
25. 如权利要求19所述的设备，所述处理器改变所述用户正注视的区域中的焦点、照度或立体对应性中的一个或多个。
26. 如权利要求25所述的设备，所述处理器改变离所述用户正注视的对象间隔开的被成像对象的外观。
27. 如权利要求26所述的设备，所述处理器改进所述用户正注视的对象的外观。
28. 如权利要求27所述的设备，所述处理器使所述用户正注视的对象的外观降级。
29. 如权利要求19所述的设备，所述处理器使用凝视检测技术来确定所述用户正注视的位置以及使用视频分析来调整所述凝视检测技术的结果。
30. 如权利要求29所述的设备，所述处理器通过分析所述凝视检测技术的确定，并且将它与显示器屏幕上的接近对象进行比较，以确定所述凝视技术是否不正确地确定所述用户凝视，来校正所述凝视检测技术。
CN201180073357.7A 2011-09-08 2011-09-08 交互式屏幕观看 Pending CN103765374A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2011/050893 WO2013036236A1 (en) 2011-09-08 2011-09-08 Interactive screen viewing

Publications (1)

Publication Number Publication Date
CN103765374A true CN103765374A (zh) 2014-04-30

Family

ID=47832474

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180073357.7A Pending CN103765374A (zh) 2011-09-08 2011-09-08 交互式屏幕观看

Country Status (6)

Country Link
US (1) US9361718B2 (zh)
EP (1) EP2754028A4 (zh)
JP (1) JP5934363B2 (zh)
KR (2) KR101754750B1 (zh)
CN (1) CN103765374A (zh)
WO (1) WO2013036236A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104635933A (zh) * 2015-02-26 2015-05-20 华为技术有限公司 一种图像切换的方法和装置
WO2016008354A1 (en) * 2014-07-14 2016-01-21 Huawei Technologies Co., Ltd. System and method for display enhancement
WO2016065913A1 (zh) * 2014-10-27 2016-05-06 华为技术有限公司 视频图像的处理方法、设备及系统
CN107077212A (zh) * 2015-01-30 2017-08-18 惠普发展公司，有限责任合伙企业 电子显示器照明
CN109791431A (zh) * 2016-07-18 2019-05-21 托比股份公司 视点渲染
CN112445339A (zh) * 2016-09-20 2021-03-05 托比股份公司 基于注视和扫视的图形操纵
US11417296B2 (en) 2018-03-13 2022-08-16 Sony Corporation Information processing device, information processing method, and recording medium

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140040474A (ko) * 2012-09-26 2014-04-03 한국전자통신연구원 비디오 요약 장치, 방법 및 시스템
US9367117B2 (en) 2013-08-29 2016-06-14 Sony Interactive Entertainment America Llc Attention-based rendering and fidelity
EP2924540B1 (de) * 2014-03-27 2019-04-24 SensoMotoric Instruments Gesellschaft für innovative Sensorik mbH Verfahren und System zum Betreiben einer Anzeigevorrichtung
KR20160071242A (ko) * 2014-12-11 2016-06-21 삼성전자주식회사 안구 움직임에 기반한 컴퓨터 보조 진단 장치 및 방법
JP6553418B2 (ja) * 2015-06-12 2019-07-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 表示制御方法、表示制御装置及び制御プログラム
US10218968B2 (en) * 2016-03-05 2019-02-26 Maximilian Ralph Peter von und zu Liechtenstein Gaze-contingent display technique
US9990035B2 (en) * 2016-03-14 2018-06-05 Robert L. Richmond Image changes based on viewer's gaze
WO2017208351A1 (ja) * 2016-05-31 2017-12-07 株式会社オプティム 撮像画像共有システム、撮像画像共有方法及びプログラム
WO2017221509A1 (ja) 2016-06-20 2017-12-28 シャープ株式会社 画像処理装置、表示装置、画像処理装置の制御方法、および制御プログラム
US11093834B2 (en) * 2016-07-06 2021-08-17 Palo Alto Research Center Incorporated Computer-implemented system and method for predicting activity outcome based on user attention
US10885478B2 (en) 2016-07-06 2021-01-05 Palo Alto Research Center Incorporated Computer-implemented system and method for providing contextually relevant task recommendations to qualified users
US11477302B2 (en) * 2016-07-06 2022-10-18 Palo Alto Research Center Incorporated Computer-implemented system and method for distributed activity detection
US10209772B2 (en) 2016-09-19 2019-02-19 International Business Machines Corporation Hands-free time series or chart-based data investigation
US10623723B2 (en) * 2016-09-29 2020-04-14 Intel Corporation Hybrid stereo rendering for depth extension in dynamic light field displays
KR20240046291A (ko) 2017-03-22 2024-04-08 매직 립, 인코포레이티드 디스플레이 시스템들을 위한 깊이 기반 포비티드 렌더링
US20190124313A1 (en) 2017-10-19 2019-04-25 Intel Corporation Three dimensional glasses free light field display using eye location
CN112136094A (zh) 2018-03-16 2020-12-25 奇跃公司 用于显示系统的基于深度的凹式渲染
KR20220167427A (ko) * 2021-06-11 2022-12-21 삼성디스플레이 주식회사 표시 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1496110A (zh) * 2002-08-09 2004-05-12 ������������ʽ���� Roi设置方法和设备、电子照相机设备、程序和记录介质
US20080062383A1 (en) * 2004-11-22 2008-03-13 Serguei Endrikhovski Diagnostic system having gaze tracking
CN101943982A (zh) * 2009-07-10 2011-01-12 北京大学 基于被跟踪的眼睛运动的图像操作
US20110128412A1 (en) * 2009-11-25 2011-06-02 Milnes Thomas B Actively Addressable Aperture Light Field Camera
US20110206283A1 (en) * 2010-02-23 2011-08-25 Pernilla Quarfordt System and method for improved image analysis through gaze data feedback

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6351273B1 (en) * 1997-04-30 2002-02-26 Jerome H. Lemelson System and methods for controlling automatic scrolling of information on a display or screen
JP2001228848A (ja) * 2000-02-15 2001-08-24 Matsushita Electric Ind Co Ltd 視線検出機能を有する表示素子
US6795806B1 (en) * 2000-09-20 2004-09-21 International Business Machines Corporation Method for enhancing dictation and command discrimination
US20030067476A1 (en) * 2001-10-04 2003-04-10 Eastman Kodak Company Method and system for displaying an image
EP1426919A1 (en) * 2002-12-02 2004-06-09 Sony International (Europe) GmbH Method for operating a display device
JP2004213486A (ja) * 2003-01-07 2004-07-29 Sony Corp 画像処理装置および方法、記録媒体、並びにプログラム
JP3959354B2 (ja) * 2003-01-10 2007-08-15 株式会社東芝 画像生成装置、画像生成方法、及び画像生成プログラム
US7574016B2 (en) * 2003-06-26 2009-08-11 Fotonation Vision Limited Digital image processing using face detection information
WO2005010739A1 (en) 2003-07-29 2005-02-03 Philips Intellectual Property & Standards Gmbh System and method for controlling the display of an image
US9030532B2 (en) * 2004-08-19 2015-05-12 Microsoft Technology Licensing, Llc Stereoscopic image display
US7501995B2 (en) * 2004-11-24 2009-03-10 General Electric Company System and method for presentation of enterprise, clinical, and decision support information utilizing eye tracking navigation
US20070011609A1 (en) * 2005-07-07 2007-01-11 Florida International University Board Of Trustees Configurable, multimodal human-computer interface system and method
EP1943583B1 (en) * 2005-10-28 2019-04-10 Tobii AB Eye tracker with visual feedback
US7694226B2 (en) * 2006-01-03 2010-04-06 Eastman Kodak Company System and method for generating a work of communication with supplemental context
JP2009530731A (ja) * 2006-03-23 2009-08-27 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 画像操作の眼球追跡制御のためのホットスポット
JP2008003816A (ja) * 2006-06-21 2008-01-10 Matsushita Electric Ind Co Ltd 操作誘導装置及び操作誘導方法
US8213734B2 (en) * 2006-07-07 2012-07-03 Sony Ericsson Mobile Communications Ab Active autofocus window
JP4420002B2 (ja) 2006-09-14 2010-02-24 トヨタ自動車株式会社 視線先推定装置
US7860382B2 (en) * 2006-10-02 2010-12-28 Sony Ericsson Mobile Communications Ab Selecting autofocus area in an image
US8341022B2 (en) * 2006-12-30 2012-12-25 Red Dot Square Solutions Ltd. Virtual reality system for environment building
US20100045596A1 (en) * 2008-08-21 2010-02-25 Sony Ericsson Mobile Communications Ab Discreet feature highlighting
WO2010024782A1 (en) 2008-08-26 2010-03-04 Agency For Science, Technology And Research A method and system for displaying an hdr image on a ldr display device
CN101394487B (zh) * 2008-10-27 2011-09-14 华为技术有限公司 一种合成图像的方法与系统
US8780251B2 (en) * 2010-09-20 2014-07-15 Canon Kabushiki Kaisha Image capture with focus adjustment

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1496110A (zh) * 2002-08-09 2004-05-12 ������������ʽ���� Roi设置方法和设备、电子照相机设备、程序和记录介质
US20080062383A1 (en) * 2004-11-22 2008-03-13 Serguei Endrikhovski Diagnostic system having gaze tracking
CN101943982A (zh) * 2009-07-10 2011-01-12 北京大学 基于被跟踪的眼睛运动的图像操作
US20110128412A1 (en) * 2009-11-25 2011-06-02 Milnes Thomas B Actively Addressable Aperture Light Field Camera
US20110206283A1 (en) * 2010-02-23 2011-08-25 Pernilla Quarfordt System and method for improved image analysis through gaze data feedback

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107077593A (zh) * 2014-07-14 2017-08-18 华为技术有限公司 用于显示屏增强的系统和方法
WO2016008354A1 (en) * 2014-07-14 2016-01-21 Huawei Technologies Co., Ltd. System and method for display enhancement
WO2016065913A1 (zh) * 2014-10-27 2016-05-06 华为技术有限公司 视频图像的处理方法、设备及系统
CN107077212B (zh) * 2015-01-30 2020-03-24 惠普发展公司，有限责任合伙企业 电子显示器照明
CN107077212A (zh) * 2015-01-30 2017-08-18 惠普发展公司，有限责任合伙企业 电子显示器照明
US10585474B2 (en) 2015-01-30 2020-03-10 Hewlett-Packard Development Company, L.P. Electronic display illumination
US10032248B2 (en) 2015-02-26 2018-07-24 Huawei Technologies Co., Ltd. Image switching method and apparatus
CN104635933B (zh) * 2015-02-26 2018-10-30 华为技术有限公司 一种图像切换的方法和装置
CN104635933A (zh) * 2015-02-26 2015-05-20 华为技术有限公司 一种图像切换的方法和装置
CN109791431A (zh) * 2016-07-18 2019-05-21 托比股份公司 视点渲染
CN109791431B (zh) * 2016-07-18 2022-06-24 托比股份公司 视点渲染
CN112445339A (zh) * 2016-09-20 2021-03-05 托比股份公司 基于注视和扫视的图形操纵
US11417296B2 (en) 2018-03-13 2022-08-16 Sony Corporation Information processing device, information processing method, and recording medium

Also Published As

Publication number Publication date
JP2014532206A (ja) 2014-12-04
US20130271454A1 (en) 2013-10-17
KR101754750B1 (ko) 2017-07-10
WO2013036236A1 (en) 2013-03-14
KR20140057594A (ko) 2014-05-13
EP2754028A1 (en) 2014-07-16
EP2754028A4 (en) 2015-08-12
US9361718B2 (en) 2016-06-07
KR20160045927A (ko) 2016-04-27
JP5934363B2 (ja) 2016-06-15

Similar Documents

Publication Publication Date Title
CN103765374A (zh) 交互式屏幕观看
US10536661B2 (en) Tracking object of interest in an omnidirectional video
RU2693329C2 (ru) Способ и устройство отображения с оптимизацией перераспределения пикселей
US11200752B1 (en) Color correction for immersive content production systems
US9191661B2 (en) Virtual image display device
US11816257B2 (en) Image changes based on gaze location
KR20190015573A (ko) 시선 추적에 기초하여 자동 초점 조정하는 이미지 포착 시스템, 장치 및 방법
CN103973978A (zh) 一种实现重对焦的方法和电子设备
CN103765346A (zh) 基于眼睛凝视的用于音频视觉回放的位置选择
Vázquez et al. An assisted photography framework to help visually impaired users properly aim a camera
WO2021184341A1 (en) Autofocus method and camera system thereof
Grogorick et al. Comparison of unobtrusive visual guidance methods in an immersive dome environment
CN104969547A (zh) 用于3d视觉内容的自动化评估的技术
KR20190120106A (ko) 동영상의 대표 이미지를 결정하는 방법 및 그 방법을 처리하는 전자 장치
CN115083354A (zh) 背光调节方法、装置、介质以及交互平板
CN111142660A (zh) 一种显示装置、画面显示方法和存储介质
US11989345B1 (en) Machine learning based forecasting of human gaze
TWI622901B (zh) 使用媒體中參考圖框之目光檢測裝置及相關方法與電腦可讀儲存媒體
JP2009100371A (ja) 画像表示装置及び記録再生装置
US10609311B2 (en) Method and device for increasing resolution of an image sensor
KR20190130397A (ko) 포커스 설정 모듈 및 방법, 그것을 포함하는 버추얼 영상 재생 시스템
KR20190027081A (ko) 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
EP4366323A1 (en) Method and apparatus with hyperlapse video generation
WO2024076617A1 (en) Methods for determining regions of interest for camera auto-focus

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20140430

RJ01 Rejection of invention patent application after publication