CN103079114A - 用于诸如tv之类的音频视频显示设备的3d用户界面 - Google Patents

用于诸如tv之类的音频视频显示设备的3d用户界面 Download PDF

Info

Publication number
CN103079114A
CN103079114A CN2012104072527A CN201210407252A CN103079114A CN 103079114 A CN103079114 A CN 103079114A CN 2012104072527 A CN2012104072527 A CN 2012104072527A CN 201210407252 A CN201210407252 A CN 201210407252A CN 103079114 A CN103079114 A CN 103079114A
Authority
CN
China
Prior art keywords
display
image
adnexa
official
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012104072527A
Other languages
English (en)
Inventor
彼得·施恩塔尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN103079114A publication Critical patent/CN103079114A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明提供了用于诸如TV之类的音频视频显示设备的3D用户界面。三维AVDD显示技术可被用于显示用户界面或用户界面的元件，并且，可被用于与一个或多个相机协作以使得AVDD的观看者能够“触摸”呈现在三维空间中的用户界面或用户界面的一部分。

Description

用于诸如TV之类的音频视频显示设备的3D用户界面
技术领域
本申请一般涉及用于诸如电视机(TV)之类的音频视频显示设备(AVDD)的用户界面(UI)。
背景技术
已经提供了诸如TV之类的AVDD的用户界面，其中，用户可选择UI上的元件来导致某些动作被执行。例如，用户界面可呈现有音量和频道变更选择器元件，利用遥控器(RC)的人可利用RC的点选和点击能力来选择这些元件。或者，可提供触摸屏，并且，人可触摸所希望的UI元件上的屏幕来选择它。
如此处所理解的，通过最小化导致所希望的动作被执行的复杂度并向与UI交互的人提供愉悦的体验二者，UI可以是重要的娱乐助手。
发明内容
根据以下所进一步提出的原理，音频视频显示设备(ACDD)包括处理器；视频显示器；以及计算机可读存储介质，所述计算机可读存储介质承载可由所述处理器执行的指令。通过利用存储在计算机可读介质中的指令，处理器可在所述视频显示器上于该显示器的图像前景中呈现三维(3D)用户界面(UI)。至少所述3D UI的第一元件可具有如下模拟元件位置，该模拟元件位置使得所述第一元件看起来在垂直于呈现在所述显示器上的图像的维度中比所述图像更加靠近所述显示器的观看者。处理器还可在所述第一元件附近检测人的附器官；以及可响应于确定所述人的附器官与所述模拟元件位置基本位于同一位置。处理器对附器官与第一元件位于同一位置的响应可以是执行与所述第一元件相关联的第一功能。
所述模拟元件位置可在垂直于呈现在所述显示器上的图像的维度中与显示器相距开。所述3D UI可包括多个元件，所述多个元件中的至少一些看起来在垂直于呈现在所述显示器上的图像的维度中比图像更加靠近所述显示器的观看者。可替换地，所述3D UI可包括多个元件，所有所述多个元件都看起来在垂直于呈现在所述显示器上的图像的维度中比图像更加靠近所述显示器的观看者。
AVDD可包括至少一个相机，所述至少一个相机对所述人的附器官进行成像并与所述处理器通信。AVDD可包括至少两个相机，或可替换地至少三个相机，它们对所述人的附器官进行成像并与所述处理器通信。在所有情形中，处理器可利用多个相机(至少一个、至少两个或至少三个)呈现的图像来确定所述附器官相对于所述显示器的位置。处理器可确定所述人的附器官正向所述模拟元件位置移动，并且，作为响应，可对所述第一元件进行动画，使得所述第一元件在垂直于呈现在所述显示器上的图像的维度中向所述人的附器官移动。
在另一实施例中，一种音频视频设备AVDD可包括：处理器；视频显示器；以及计算机可读存储介质。所述计算机可读存储介质承载可由所述处理器执行的指令，以在所述显示器上呈现3D UI，所述3D UI的至少一部分看起来在所述显示器的前面并与所述显示器相距开。
在另一方面，一种方法可包括：在3D视频显示器上呈现图像；以及在所述图像前面并与所述图像相距开的模拟空间中呈现用户界面UI，所述UI包括可由观看者选择的至少一个元件。该元件可以通过观看者将附器官定位在所述3D视频显示器前面并与所述视频显示器的前面相距开的位置上来选择。
通过参照附图，可最佳地理解本发明的细节(其结构和操作二者)，其中，相同的参考标号指相同的部件，并且其中：
附图说明
图1是根据本原理的非限制性示例系统的框图；
图2是根据本原理的示例逻辑的流程图；以及
图3是3D UI的示意图。
具体实施方式
首先参照图1中所示的非限制性示例实施例，系统10包括诸如TV之类的音频视频显示设备(AVDD)12，其包括TV调谐器16，该TV调谐器16与TV处理器18通信，该TV处理器18访问诸如基于磁盘或固态存储器之类的有形计算机可读存储介质20。AVDD12可以在一个或多个扬声器22上输出音频。AVDD12可利用内嵌的有线或无线网络接口24(诸如，调制解调器或路由器)来从因特网接收流化视频，该网络接口24与可执行软件实现的浏览器的处理器12进行通信。
在TV显示器28上的TV处理器18的控制下，视频被呈现，该TV显示器28诸如但不限于高清TV(HDTV)平板显示器，并且，其优选为三维(3D)TV显示器，该三维TV显示器向戴有3D眼镜或例如利用全息图(hologram)或其他3D技术来观看TV的人呈现模拟的3D图像。例如，显示器28可以是自由立体显示器，或还可构想观看者佩戴的用以观看顺序显示器28的主动快门3D眼镜。如果使用了3D显示器，则可将UI的图像或元件布置在前景中，从而消除身体触摸显示器的表面的必要。因此，极大地减少了显示器28的活动区域上的指纹和污点。换言之，利用z轴(垂直于显示器所定义的x-y平面的维度)允许更易理解的图像呈现在显示器28上，因为UI元件被更容易地区分。
对处理器18的用户命令可例如利用rf(红外)从遥控器(RC)30以及从以下所描述的3D UI无线地接收。可使用除了TV以外的音频视频显示设备，例如，智能电话、游戏机、个人数字管理器、笔记本电脑和其他类型的计算机等。
来自一个或多个陆地TV广播源的TV节目可被呈现在显示器28和扬声器22上，所述TV节目由与AVDD12进行通信的陆地广播天线接收。陆地广播节目可遵从数字ATSC标准并可在其中承载陆地广播EPG，但是陆地广播EPG可经由以太网、或电缆通信链路、或卫星通信链路从例如因特网的可替换源接收。
来自电缆TV头端的TV节目还可在TV处被接收，以用于在显示器28和扬声器22上呈现TV信号。当仅希望基本的电缆时，来自墙的电缆通常以QAM或NTSC格式承载TV信号并被直接插入到美国的TV机座上的“F-类型连接器”中，但是出于该目的所使用的连接器在其他国家中可能不同。与此不同，例如当用户具有扩展的电缆订购时，来自头端的信号通常通过STB发送，该STB可独立于TV机座或集成在TV机座内，但是，在任意情形中，当源在TV外部时，该STB将HDMI基带信号发送到TV。可使用其他类型的连接，例如，MOCA、USB、1394协议、DLNA。
类似地，从TV广播信号的卫星源发送的HDMI基带信号可被输入到AVDD12，以用于呈现在显示器28和扬声器22上，该TV广播信号由与家用碟形卫星天线相关联的集成接收机/解码器(IRD)接收。还可从因特网接收流化视频，以用于呈现在显示器28和扬声器22上。可在网络接口24处接收流化视频，或可在家用的调制解调器处接收该流化视频，该家用的调制解调器在AVDD12外部，该流化视频通过有线或无线以太网链路被传递到AVDD12并在TV机座上的RJ45或802.11x天线处被接收。
在某些实施例中，一个或多个相机50还可被连接至处理器18，以向处理器18提供观看显示器28的观看者的视频图像，该相机50可以是集成在机座中的(如果希望的话)或单独安装并电连接的摄像机。一个或多个相机50可被布置在AVDD的机座顶部，在显示器背部并穿过显示器查看，或嵌入在显示器中。由于希望相机50检测人的附器官，诸如手或手指，因此，其可是内嵌在显示器背部的红外(IR)相机。
使用两个或多个相机50可使得通过处理器18来在3D空间中定位手或手指的位置更加容易。相机50可以是两个类似的相机，即，一个传统相机和一个IR相机。由于通过训练可学习手或输入物体的大小，处理器已知相机的位置，因此，可容易地确定距离。再次，如果使用了三个相机，则不需要训练，因为XYZ可由三角测量来求解。使用相机50的可替换选项是邻近技术(proximity technology)，以使能对虚拟控制ICON的重新定位。通过引用被结合于此的以下专利文献公开了这种技术：USPP2008/0122798、2010/0127970、2010/0127989、2010/0090948、2010/0090982。
处理器16还可与用于向HDMI的源54传输信令的红外(IR)或射频(RF)收发机52进行通信。处理器16可通过HDMI端口56从源54接收HDMI音频视频信号和消费者电子控制(CEC)信号。因此，源54可包括源处理器58，其访问计算机可读存储介质60并与HDMI端口62和/或IR或IP收发机64传递信号。
转而参照图2，流程图在框70处开始，其中，3D UI可被呈现在AVDD12的显示器28上，并且，显示在前景中的距离显示器28较远的点处，其垂直于显示器28。至少一个相机50可对观看者的附器官进行成像并将该图像传输给处理器18。在框72处，处理器18可确定或“感知”观看者的手的位置。在判决菱形框74处，由相机50所拍摄并发送至处理器18的图像序列可被用于确定观看者的手是否正向UI元件移动。在框76处，如果确定手正向UI元件移近，则处理器18可对该元件进行动画，以使其进一步向观看者的手平移至前景中。在另一方面，在判决菱形框74处，处理器18确定手未向UI元件移动将导致逻辑移动到判决菱形框78处，在该步骤中，处理器18可利用(一个或多个)相机50所拍摄的图像来确定手是位于AVDD12前面还是位于投影到前景中的元件中。判定手不位于AVDD12的前面或UI元件中将终止逻辑流。但是，如果手实际上在UI元件前面的位置中，则在框80处，处理器18执行与UI元件相关联的功能。
现参照图3，3D UI的示意图包括带有3D显示器28的AVDD设备12，此处为自动立体显示器。一个或多个2D UI元件82可由处理器18呈现在显示器28上。
另外，一个或多个3D UI元件84可被呈现在显示器28的前面的位置中，该位置距离观看者比距离显示器平面更近，即，该位置位于沿着垂直于显示器28的轴(惯常为z-轴)比显示器平面更靠近观看者的位置处。也就是说，在垂直于显示器的维度中，UI元件84表现为比显示器平面更靠近观看者，但是注意，UI元件84自身还可从显示器左侧或右侧或上面或下面(即，在x和y维度中)偏移以及在z-维上偏移。
涵盖整个显示器28、整个显示器28的区域、或仅UI元件82、84的图像可以以3D呈现。处理器18对3D UI元件84的呈现可允许元件84之间有更大的距离，并且因此，这使得用户更容易地观看并选择合适的元件84。观看者的手86的位置可通过(一个或多个)相机50所拍摄的图像由处理器18所确定。
虽然此处示出并详细描述了具体的用于诸如TV之类的音频视频显示设备的3D用户界面，但是将理解，本发明所涵盖的主题仅由权利要求限定。

Claims (13)

1.一种音频视频显示设备AVDD，包括：
处理器；
视频显示器；以及
计算机可读存储介质，所述计算机可读存储介质承载可由所述处理器执行的指令，所述指令执行如下操作：
在所述视频显示器上呈现三维3D用户界面UI，该3D UI显示在所述显示器的图像前景中，以使得至少所述3D UI的第一元件具有如下模拟元件位置，该模拟元件位置使得所述第一元件看起来在垂直于呈现在所述显示器上的图像的维度中比所述图像更加靠近所述显示器；
在所述第一元件附近检测人的附器官；以及
响应于确定所述人的附器官与所述模拟元件位置基本位于同一位置，执行与所述第一元件相关联的第一功能。
2.一种音频视频设备AVDD，包括：
处理器；
视频显示器；以及
计算机可读存储介质，所述计算机可读存储介质承载可由所述处理器执行的指令，所述指令操作为在所述显示器上呈现3D UI，所述3D UI的至少一部分出现在所述显示器的前面并与所述显示器相距开。
3.根据权利要求2所述的AVDD，其中，所述3D UI的第一元件具有如下模拟元件位置，该模拟元件位置使得所述第一元件看起来在垂直于呈现在所述显示器上的图像的维度中比所述图像更加靠近所述显示器的观看者，并且，所述处理器：
在所述第一元件附近检测人的附器官；以及
响应于确定所述人的附器官与所述模拟元件位置基本位于同一位置，执行与所述第一元件相关联的第一功能。
4.根据权利要求1或3所述的AVDD，其中，所述模拟元件位置在垂直于呈现在所述显示器上的图像的维度中与所述显示器相距开。
5.根据权利要求1或2所述的AVDD，其中，所述3D UI包括多个元件，所述多个元件中的至少一些看起来在垂直于呈现在所述显示器上的图像的维度中比所述图像更加靠近所述显示器的观看者。
6.根据权利要求1或2所述的AVDD，其中，所述3D UI包括多个元件，所有所述多个元件都看起来在垂直于呈现在所述显示器上的图像的维度中比所述图像更加靠近所述显示器的观看者。
7.根据权利要求1或2所述的AVDD，包括至少一个相机，所述至少一个相机对所述人的附器官进行成像并与所述处理器通信，所述处理器利用所述图像来确定所述附器官相对于所述显示器的位置。
8.根据权利要求7所述的AVDD，包括至少两个相机，所述至少两个相机对所述人的附器官进行成像并与所述处理器通信，所述处理器利用来自两个相机的图像来确定所述附器官相对于所述显示器的位置。
9.根据权利要求7所述的AVDD，包括三个相机，所述三个相机对所述人的附器官进行成像并与所述处理器通信，所述处理器利用来自所有三个相机的图像来确定所述附器官相对于所述显示器的位置。
10.根据权利要求1或3所述的AVDD，其中，响应于确定所述人的附器官正向所述模拟元件位置移动，所述处理器对所述第一元件进行动画，使得所述第一元件在垂直于呈现在所述显示器上的图像的维度中向所述人的附器官移动。
11.一种方法，包括：
在3D视频显示器上呈现图像；以及
在所述图像前面的模拟空间中并与所述图像相距开呈现用户界面UI，所述UI包括至少一个元件，所述至少一个元件可通过人将附器官定位在所述3D视频显示器前面并与所述3D视频显示器相距开的位置上来由该人选择。
12.根据权利要求11所述的方法，包括当所述人的附器官位于所述3D视频显示器前面并与所述3D视频显示器相距开的、对应于所述元件的模拟位置的位置上时，执行与所述元件相关联的功能。
13.根据权利要求11所述的方法，包括利用相机来确定所述附器官的位置。
CN2012104072527A 2011-10-26 2012-10-17 用于诸如tv之类的音频视频显示设备的3d用户界面 Pending CN103079114A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/281,610 2011-10-26
US13/281,610 US20130107022A1 (en) 2011-10-26 2011-10-26 3d user interface for audio video display device such as tv

Publications (1)

Publication Number Publication Date
CN103079114A true CN103079114A (zh) 2013-05-01

Family

ID=48155502

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012104072527A Pending CN103079114A (zh) 2011-10-26 2012-10-17 用于诸如tv之类的音频视频显示设备的3d用户界面

Country Status (3)

Country Link
US (1) US20130107022A1 (zh)
CN (1) CN103079114A (zh)
TW (1) TWI544790B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107734385A (zh) * 2017-09-11 2018-02-23 广东欧珀移动通信有限公司 视频播放方法、装置及电子装置

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10282979B2 (en) * 2016-12-30 2019-05-07 Caavo Inc Transmission of infrared signals over a high-definition multimedia interface cable
KR102417418B1 (ko) 2017-12-12 2022-07-07 삼성전자 주식회사 디스플레이장치, 그 제어방법 및 기록매체

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100315413A1 (en) * 2009-06-16 2010-12-16 Microsoft Corporation Surface Computer User Interaction
CN101952818A (zh) * 2007-09-14 2011-01-19 智慧投资控股67有限责任公司 基于姿态的用户交互的处理
US20110107216A1 (en) * 2009-11-03 2011-05-05 Qualcomm Incorporated Gesture-based user interface

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9030532B2 (en) * 2004-08-19 2015-05-12 Microsoft Technology Licensing, Llc Stereoscopic image display
US7843449B2 (en) * 2006-09-20 2010-11-30 Apple Inc. Three-dimensional display system
US20090189858A1 (en) * 2008-01-30 2009-07-30 Jeff Lev Gesture Identification Using A Structured Light Pattern
US8717417B2 (en) * 2009-04-16 2014-05-06 Primesense Ltd. Three-dimensional mapping and imaging
US8370873B2 (en) * 2010-03-09 2013-02-05 Sony Corporation 3D TV glasses with TV mode control
US20120050154A1 (en) * 2010-08-31 2012-03-01 Adil Jagmag Method and system for providing 3d user interface in 3d televisions
US20120218395A1 (en) * 2011-02-25 2012-08-30 Microsoft Corporation User interface presentation and interactions

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101952818A (zh) * 2007-09-14 2011-01-19 智慧投资控股67有限责任公司 基于姿态的用户交互的处理
US20100315413A1 (en) * 2009-06-16 2010-12-16 Microsoft Corporation Surface Computer User Interaction
US20110107216A1 (en) * 2009-11-03 2011-05-05 Qualcomm Incorporated Gesture-based user interface

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107734385A (zh) * 2017-09-11 2018-02-23 广东欧珀移动通信有限公司 视频播放方法、装置及电子装置
CN107734385B (zh) * 2017-09-11 2021-01-12 Oppo广东移动通信有限公司 视频播放方法、装置及电子装置

Also Published As

Publication number Publication date
TWI544790B (zh) 2016-08-01
TW201332345A (zh) 2013-08-01
US20130107022A1 (en) 2013-05-02

Similar Documents

Publication Publication Date Title
CN102223555B (zh) 图像显示装置及其控制方法
EP2384010B1 (en) Method for controlling operations of image display apparatus and shutter glasses used for the image display apparatus
CN107071532A (zh) 图像显示装置
CN103152644A (zh) 使用移动装置控制显示设置
KR20150116302A (ko) 영상표시장치, 및 그 동작방법
CN102447861A (zh) 按照3d图像来显示图形用户界面的电子设备及方法
WO2020248680A1 (zh) 视频数据处理方法、装置及显示设备
US11310441B2 (en) Electronic device for generating a background image for a display apparatus and operation method thereof
CN103024410B (zh) 图像显示设备及其操作方法
US20130027396A1 (en) Device and method for 2d to 3d conversion
JP6667981B2 (ja) 不均衡設定方法及び対応する装置
CN103079114A (zh) 用于诸如tv之类的音频视频显示设备的3d用户界面
WO2021031608A1 (zh) 一种摄像头物理开关锁定状态显示方法及显示设备
US8760587B2 (en) Remote control device for 3D video system
CN103024424B (zh) 图像显示装置及其操作方法
US20150077530A1 (en) Display apparatus and method and control method thereof
CN103782603B (zh) 用户界面显示的系统和方法
US20120281073A1 (en) Customization of 3DTV User Interface Position
CN107979773A (zh) 电子设备及其控制方法
CN104980784B (zh) 多媒体装置及其光标控制方法
KR102295970B1 (ko) 영상표시장치,
US20130047186A1 (en) Method to Enable Proper Representation of Scaled 3D Video
US9547933B2 (en) Display apparatus and display method thereof
CN112399223B (zh) 一种改善莫尔条纹现象的方法及显示设备
KR101668245B1 (ko) 원격제어장치로 제어할 수 있는 영상표시장치 및 그 동작 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130501