CN114935971A - 显示驱动芯片、显示装置和显示驱动方法 - Google Patents
显示驱动芯片、显示装置和显示驱动方法 Download PDFInfo
- Publication number
- CN114935971A CN114935971A CN202110163827.4A CN202110163827A CN114935971A CN 114935971 A CN114935971 A CN 114935971A CN 202110163827 A CN202110163827 A CN 202110163827A CN 114935971 A CN114935971 A CN 114935971A
- Authority
- CN
- China
- Prior art keywords
- image
- unit
- image data
- driving
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 25
- 210000001508 eye Anatomy 0.000 claims abstract description 136
- 238000010191 image analysis Methods 0.000 claims abstract description 34
- 230000006835 compression Effects 0.000 claims abstract description 23
- 238000007906 compression Methods 0.000 claims abstract description 23
- 238000004364 calculation method Methods 0.000 claims abstract description 13
- 210000001747 pupil Anatomy 0.000 claims description 87
- 238000001514 detection method Methods 0.000 claims description 13
- 238000007781 pre-processing Methods 0.000 claims description 9
- 238000004458 analytical method Methods 0.000 claims description 7
- 230000001360 synchronised effect Effects 0.000 claims description 4
- 238000009877 rendering Methods 0.000 abstract description 14
- 230000006870 function Effects 0.000 abstract description 12
- 238000005516 engineering process Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 230000006837 decompression Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000005192 partition Methods 0.000 description 3
- 230000011664 signaling Effects 0.000 description 3
- 210000005252 bulbus oculi Anatomy 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/2092—Details of a display terminals using a flat panel, the details relating to the control arrangement of the display terminal and to the interfaces thereto
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
- G09G5/006—Details of the interface to the display terminal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1407—General aspects irrespective of display type, e.g. determination of decimal point position, display with fixed or driving decimal point, suppression of non-significant zeros
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/363—Graphics controllers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2310/00—Command of the display device
- G09G2310/02—Addressing, scanning or driving the display screen or processing steps related thereto
- G09G2310/0264—Details of driving circuits
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/12—Use of DVI or HDMI protocol in interfaces along the display data pipeline
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/14—Use of low voltage differential signaling [LVDS] for display data communication
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Display Devices Of Pinball Game Machines (AREA)
Abstract
一种显示驱动芯片、显示装置和显示驱动方法,显示驱动芯片包括:视线追踪单元、图像接收单元、图像解析单元和图像驱动单元,视线追踪单元用于实现人眼瞳孔中心的实时定位以及注视点坐标的实时计算,并将人眼的注视点坐标输出至图像解析单元;图像接收单元用于通过第一图像接口接收待播放的图像数据,将待播放的图像数据输入至图像解析单元;图像解析单元用于根据人眼的注视点坐标,对待播放的图像数据进行压缩或解压缩处理并输出至图像驱动单元;图像驱动单元根据图像数据的压缩模式与注视点坐标,控制连接的显示面板进行实时驱动显示。本公开实现了智能显示,简化了播放系统端的功能,有效缓解了播放系统端的实时渲染的压力。
Description
技术领域
本公开涉及但不限于智能显示技术领域,尤其涉及一种显示驱动芯片、显示装置和显示驱动方法。
背景技术
智能显示(Smartview)技术在画面渲染过程中,对人眼注视区域进行高清渲染,对周边视野区域进行低清渲染。眼球转动,即人眼注视区域发生变化,高清渲染区域也随着发生变化,Smartview技术在一定程度上解决了单眼高分辨率图像在硬件传输和软件渲染方面的瓶颈。
目前,Smartview技术通常基于播放系统端的中央处理器(central processingunit,CPU)或图形处理器(Graphics Processing Unit,GPU)实现,播放系统端集成了眼球追踪、注视点计算、Smartview图像实时渲染等众多技术,导致播放系统端的功能过于复杂,且实时渲染的压力较大,实时驱动效率较低。
发明内容
本公开实施例提供了一种显示驱动芯片、显示装置和显示驱动方法,能够实现智能显示,并有效缓解播放系统端的实时渲染的压力。
本公开实施例提供了一种显示驱动芯片,包括:视线追踪单元、图像接收单元、图像解析单元和图像驱动单元,其中:所述视线追踪单元,用于实现人眼瞳孔中心的实时定位以及注视点坐标的实时计算,将人眼的注视点坐标输出至所述图像解析单元;所述图像接收单元,用于通过第一图像接口接收待播放的图像数据,将待播放的图像数据输入至所述图像解析单元;所述图像解析单元,用于根据人眼的注视点坐标,对待播放的图像数据进行压缩或解压缩处理,并将压缩或解压缩处理后的图像数据输出至所述图像驱动单元;所述图像驱动单元,用于接收所述图像解析单元输出的图像数据,根据图像数据的压缩模式与注视点坐标,控制连接的显示面板进行实时驱动显示。
在示例性实施例中,所述视线追踪单元包括:模式解析单元、人眼检测单元、瞳孔定位单元和注视点计算单元,其中:
所述模式解析单元,用于确定外部的瞳孔图像采集组件的工作模式,当所述工作模式为人脸模式时,将所述瞳孔图像采集组件采集的人脸图像输入至所述人眼检测单元;当所述工作模式为人眼模式时,将所述瞳孔图像采集组件采集的人眼图像输入至所述瞳孔定位单元;
所述人眼检测单元,用于对所述瞳孔图像采集组件采集的人脸图像进行人眼检测,并将检测到的人眼图像输出至所述瞳孔定位单元;
所述瞳孔定位单元,用于计算人眼瞳孔在所述人眼图像中的位置坐标;
所述注视点计算单元,用于根据人眼瞳孔在所述人眼图像中的位置坐标,计算人眼的注视点坐标,并将人眼的注视点坐标输出至所述图像解析单元。
在示例性实施例中,所述瞳孔定位单元包括:图像预处理模块、瞳孔边缘坐标获取模块和瞳孔中心坐标获取模块,其中:
所述图像预处理模块,用于去除所述人眼图像中的噪声信息,确定瞳孔目标区域;
所述瞳孔边缘坐标获取模块,用于根据瞳孔目标区域,确定瞳孔边缘坐标;
所述瞳孔中心坐标获取模块,用于根据瞳孔边缘坐标,确定瞳孔中心坐标。
在示例性实施例中,所述视线追踪单元通过两线式串行总线IIC、高速同步串行接口SPI总线或通用异步接收/发送装置UART总线,将人眼的注视点坐标输出至所述图像解析单元。
在示例性实施例中,所述第一图像接口包括:高清多媒体接口HDMI、显示接口DP、移动产业处理器接口MIPI或者低电压差分信号LVDS。
在示例性实施例中,所述图像解析单元具体用于:
当所述待播放的图像数据为压缩图像数据时,检测是否需要对压缩图像数据进行解压缩处理,如果需要,则根据人眼的注视点坐标,对压缩图像数据进行解压缩处理并输出至所述驱动单元;如果不需要,则将压缩图像数据输出至所述驱动单元;
当所述待播放的图像数据为原始图像数据时,将所述原始图像数据存储至第一缓存区,读出第一缓存区的数据,根据人眼的注视点坐标,对读出的数据进行压缩处理并输出至所述驱动单元。
在示例性实施例中,所述图像驱动单元控制连接的显示面板进行实时驱动显示,包括:
根据所述人眼的注视点坐标,将所述显示面板对应的显示区域划分成高清区域和低清区域;
对于所述高清区域和低清区域,分别采用不同的驱动时序进行驱动。
在示例性实施例中,所述对于所述高清区域和低清区域,分别采用不同的驱动时序进行驱动,包括:
对于所述高清区域,采用以下方式驱动:栅线逐条分别驱动、数据线逐条分别驱动;
对于所述低清区域,采用以下一种或多种方式驱动:多行栅线合并为一行驱动、多列数据线合并为一列驱动。
在示例性实施例中,所述对于所述高清区域和低清区域,分别采用不同的驱动时序进行驱动,包括:
当所述驱动单元接收的图像数据为所述图像解析单元针对原始图像数据进行压缩处理得到的数据时,先驱动所述低清区域的图像显示,再多次驱动所述高清区域的图像显示;
当所述驱动单元接收的图像数据为外部的图像播放单元针对原始图像数据进行压缩处理得到的数据时,先驱动所述高清区域的图像显示,再驱动所述低清区域的图像显示。
本公开实施例还提供了一种显示装置,包括:瞳孔图像采集组件、图像播放单元、显示面板以及如前任一项所述的显示驱动芯片,其中:所述瞳孔图像采集组件,用于采集用户图像,并将采集的用户图像输出至所述视线追踪单元;所述图像播放单元,用于生成待播放的图像数据,并输出至所述图像接收单元;所述显示面板,用于显示图像数据。
在示例性实施例中,所述视线追踪单元还用于,将人眼的注视点坐标输出至所述图像播放单元;
所述图像播放单元还用于,接收所述人眼的注视点坐标,根据所述人眼的注视点坐标,对所述待播放的图像数据进行压缩处理。
本公开实施例还提供了一种显示驱动方法,包括:
视线追踪单元实现人眼瞳孔中心的实时定位以及注视点坐标的实时计算,将人眼的注视点坐标输出至图像解析单元;
图像接收单元通过第一图像接口接收待播放的图像数据,将待播放的图像数据输入至所述图像解析单元;
所述图像解析单元根据人眼的注视点坐标,对待播放的图像数据进行压缩或解压缩处理,并将压缩或解压缩处理后的图像数据输出至图像驱动单元;
所述图像驱动单元接收所述图像解析单元输出的图像数据,根据图像数据的压缩模式与注视点坐标,控制连接的显示面板进行实时驱动显示。
本公开实施例的显示驱动芯片、显示装置和显示驱动方法,通过在显示驱动芯片中集成视线追踪单元、图像接收单元、图像解析单元和驱动单元,简化了播放系统端的功能,有效缓解了播放系统端的实时渲染的压力,提高了播放系统端的驱动效率,从而进一步提升了显示产品的附加值。
本公开的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本公开而了解。本公开的其他优点可通过在说明书以及附图中所描述的方案来实现和获得。
附图说明
附图用来提供对本公开技术方案的理解,并且构成说明书的一部分,与本公开的实施例一起用于解释本公开的技术方案,并不构成对本公开技术方案的限制。
图1为本公开实施例的显示驱动芯片的结构示意图;
图2为本公开实施例显示驱动芯片的一种驱动流程示意图;
图3为本公开实施例的显示驱动芯片的架构示意图;
图4为本公开实施例的视线追踪单元的瞳孔定位流程示意图;
图5为本公开实施例的图像解析单元的图像解析流程示意图;
图6为本公开实施例的显示面板的分区结构示意图;
图7为本公开实施例的图像驱动单元的图像驱动流程示意图;
图8为本公开实施例的一种显示装置的结构示意图;
图9为本公开实施例的一种显示驱动方法的流程示意图。
具体实施方式
下面结合附图和实施例对本公开的具体实施方式作进一步详细描述。以下实施例用于说明本公开,但不用来限制本公开的范围。需要说明的是,在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互任意组合。
目前,Smartview技术主要是依托于播放系统端(其技术核心依托于CPU/GPU)实现的,其技术架构采用诸如眼动仪或者个人计算机(Personal Computer,PC)之类的人眼定位设备,实现人眼图像的采集、瞳孔定位、注视点计算等环节,在获得注视点坐标之后,播放系统端再基于CPU/GPU将原始图像渲染成具有Smartview效果的图像,后续再提供给时序控制器(Timer Control Register,TCON)完成最终的驱动显示环节。目前的Smartview技术所依托的播放系统非常复杂,在播放系统端不但要完成眼球追踪(Eye tracking)、注视点计算等复杂环节,还要根据注视点坐标实时渲染Smartview图像,因此播放系统端存在渲染压力大、驱动带宽高等缺点。
如图1和图2所示,本公开实施例提供了一种显示驱动芯片,其主要组成部分包括:视线追踪单元110、图像接收单元120、图像解析单元130和图像驱动单元140,其中:
视线追踪单元110,用于获取外部的瞳孔图像采集组件采集的用户图像,并对采集的用户图像实现人眼瞳孔中心的实时定位以及注视点坐标的实时计算,实时获得人眼的注视点坐标,并将人眼的注视点坐标输出至图像解析单元130;
图像接收单元120,用于通过第一图像接口接收待播放的图像数据,将待播放的图像数据输入至图像解析单元130;
图像解析单元130,用于根据人眼的注视点坐标,对待播放的图像数据进行压缩或解压缩处理,并将压缩或解压缩处理后的图像数据输出至图像驱动单元140;
图像驱动单元140,用于接收图像解析单元130输出的图像数据,根据图像数据的压缩模式与注视点坐标,控制连接的显示面板实现实时驱动显示。
本公开实施例提供的显示驱动芯片,集成视线追踪单元110、图像接收单元120、图像解析单元130和驱动单元140于一体,其中,视线追踪单元110用于实现人眼相对于显示屏的注视位置的实时定位功能,图像接收单元120用于接收待播放的图像数据,图像解析单元130用于根据人眼的注视位置,对待播放的图像数据进行压缩或解压缩处理,图像驱动单元140用于驱动显示面板进行实时显示,实现了智能显示功能,兼顾了播放系统端和显示驱动端的结构,简化了播放系统端的功能,有效缓解了播放系统端的实时渲染的压力,提高了显示驱动系统的刷新效率,从而进一步提升了显示产品的附加值。
在一种示例性实施例中,如图3所示,视线追踪单元110包括:模式解析单元1101、人眼检测单元1102、瞳孔定位单元1103和注视点计算单元1104,其中:
模式解析单元1101,用于确定外部的瞳孔图像采集组件的工作模式,当工作模式为人脸模式时,将瞳孔图像采集组件采集的人脸图像输入至人眼检测单元1102;当工作模式为人眼模式时,将瞳孔图像采集组件采集的人眼图像输入至瞳孔定位单元1103,如图4所示;
人眼检测单元1102,用于对瞳孔图像采集组件采集的人脸图像进行人眼检测,并将检测到的人眼图像输出至瞳孔定位单元1103;
瞳孔定位单元1103,用于计算人眼瞳孔在人眼图像中的位置坐标;
注视点计算单元1104,用于根据人眼瞳孔在人眼图像中的位置坐标,计算人眼的注视点坐标,并将人眼的注视点坐标输出至图像解析单元130。
在一种示例性实施例中,外部的瞳孔图像采集组件可以为红外摄像头,通过瞳孔图像采集组件为显示驱动芯片实时提供人脸或人眼的图像。
在一种示例性实施例中,当外部的瞳孔图像采集组件采用人脸模式时,模式解析单元1101将瞳孔图像采集组件采集的人脸图像输入至人眼检测单元1102,通过人眼检测单元1102对人脸图像进行人眼检测,获得人眼图像。
在一种示例性实施例中,视线追踪单元110(注视点计算单元1104)将人眼的注视点坐标输出至图像解析单元130的同时,也可以将人眼的注视点坐标输出至外部的图像播放单元(即播放系统端),以用于图像播放单元根据人眼的注视点坐标对待播放的图像数据进行压缩。
在一种示例性实施例中,模式解析单元1101、人眼检测单元1102、瞳孔定位单元1103和注视点计算单元1104中的一个或多个都可以通过集成的IP(IntellectualProperty)硬核实现。
本实施例中,通过硬件化专用集成电路设计(Application Specific IntegratedCircuit,ASIC)的视线追踪单元110,可以利用其并行计算的优势,具有实时响应快、定位精度高等特点,在降低播放系统端的驱动压力的同时,也确保了显示装置具备更加流畅的显示效果。
在一种示例性实施例中,如图3所示,瞳孔定位单元1103可以包括:图像预处理模块、瞳孔边缘坐标获取模块和瞳孔中心坐标获取模块,其中:
图像预处理模块,用于去除人眼图像中的噪声信息,确定瞳孔目标区域;
瞳孔边缘坐标获取模块,用于根据瞳孔目标区域,确定瞳孔边缘坐标;
瞳孔中心坐标获取模块,用于根据瞳孔边缘坐标,确定瞳孔中心坐标。
本公开实施例中,瞳孔定位单元1103实时计算人眼瞳孔在人眼图像中的具体位置坐标,瞳孔定位单元1103内部包括但不限于以下几个核心处理模块:图像预处理模块、瞳孔边缘坐标获取模块和瞳孔中心坐标获取模块。
在一种示例性实施例中,视线追踪单元110可以通过两线式串行总线(Inter-Integrated Circuit,IIC)、高速同步串行接口(Serial Peripheral Interface,SPI)总线或通用异步接收/发送装置(Universal Asynchronous Receiver/Transmitter,UART)总线等,将人眼的注视点坐标输出至图像解析单元130。
在一种示例性实施例中,图像播放单元生成待播放的图像数据,通过第一图像接口输出至图像接收单元120。示例性的,图像播放单元可以为图像渲染系统或图像播放器,位于显示驱动芯片外部,为显示驱动芯片提供待播放的图像数据。
在一种示例性实施例中,第一图像接口包括但不限于:高清多媒体接口(HighDefinition Multimedia Interface,HDMI)、显示接口(Display Port,DP)、移动产业处理器接口(Mobile Industry Processor Interface,MIPI)或低电压差分信号(Low-VoltageDifferential Signaling,LVDS)等。
在一种示例性实施例中,图像播放单元生成的待播放的图像数据可以为压缩图像数据(压缩图像数据中的图像的压缩位置,可以基于显示驱动芯片反馈的注视点坐标确定),也可以为未压缩的原始图像数据。
本公开实施例的待播放的图像数据可以在图像播放单元(即播放系统端)进行压缩处理,也可以在显示驱动芯片端进行压缩处理,在降低了对播放系统端的性能要求的同时,也确保了整个系统的智能显示方案的实施灵活性。
在一种示例性实施例中,如图5所示,图像解析单元130具体用于:
当待播放的图像数据为压缩图像数据时,检测是否需要对压缩图像数据进行解压缩处理(根据实际工作模式选择是否需要进行解压缩处理),如果需要,则根据人眼的注视点坐标,对压缩图像数据进行解压缩处理并输出至图像驱动单元;如果不需要,则将压缩图像数据输出至图像驱动单元;
当待播放的图像数据为原始图像数据时,将原始图像数据存储至第一缓存区,以实现帧缓存,读出第一缓存区的数据,根据人眼的注视点坐标,对读出的数据进行压缩处理并输出至图像驱动单元。
在一种示例性实施例中,第一缓存区可以为DDR3(Double Data Rate 3)缓存,也可以为SRAM(Static Random Access Memory)。
在一种示例性实施例中,如图3所示,图像驱动单元140可以包括源极驱动单元和栅极驱动单元,其中,源极驱动单元用于根据图像解析单元130输出的图像数据,为显示面板中的数据线提供源极驱动信号;栅极驱动单元用于根据图像解析单元130输出的图像数据,为显示面板中的栅线提供栅极驱动信号。
在一种示例性实施例中,图像驱动单元140控制连接的显示面板实现实时驱动显示,包括:
根据人眼的注视点坐标,将显示面板对应的显示区域划分成高清区域和低清区域,示例性的,人眼注视区域为高清区域,人眼未注视区域为低清区域;
对于高清区域和低清区域,分别采用不同的驱动时序进行驱动。
目前Smartview技术所基于的TCON的驱动方式比较单一,没有针对人眼注视区域与非注视区域实现差异化的驱动显示,即非注视区域的显示刷新率与注视区域的显示刷新率完全等同,并且,通常注视区域的面积往往会小于非注视区,这意味着在TCON驱动端存在严重的带宽浪费现象,因此,常规的Smartview技术的实现方案存在的问题是一个系统性的问题,这也是制约传统Smartview技术显示刷新率进一步提升的最主要原因。
如图6所示,本公开实施例提供的显示驱动芯片,则基于以下方式实现智能显示功能:通过图像驱动单元140针对显示面板中的高清区域(注视区)和低清区域(非注视区),分别采用不同的驱动时序进行驱动,不但有效地减轻了播放系统端的驱动压力,增加了显示面板端的有效带宽利用率,而且在实现了智能显示功能的前提下也达到了显著提升显示面板端的显示刷新率的效果。
在一种示例性实施例中,图像驱动单元140对于高清区域和低清区域,分别采用不同的驱动时序进行驱动,包括:
对于高清区域,采用以下方式驱动:栅线逐行分别驱动、复用数据线逐列分别驱动;
对于低清区域,采用以下任意一种方式驱动:多行栅线合并为一行驱动且复用数据线逐列分别驱动、栅线逐行分别驱动且多列复用数据线合并为一列驱动、多行栅线合并为一行驱动且多列复用数据线合并为一列驱动。
示例性的,图像驱动单元140针对高清区域,采用的驱动方式为:高清区域的复用数据线逐列分别驱动,栅线逐行正常驱动;针对低清区域,采用的驱动方式为:低清区域的复用数据线逐列分别驱动,栅线采用若干行同开方式(即多行栅线合并为一行驱动,示例性的,可以每四行栅线合并为一行进行驱动),以显示低清图像(即压缩图像)。本公开实施例对合并的栅线行数或复用数据线列数不作限制。
在一种示例性实施例中,如图7所示,对于高清区域和低清区域,分别采用不同的驱动时序进行驱动,包括:
当图像驱动单元140接收的图像数据为图像解析单元130针对原始图像数据进行压缩处理得到的数据时,先驱动低清区域的图像显示,而后再多次驱动高清区域的图像显示;
当图像驱动单元140接收的图像数据为图像播放单元针对原始图像数据进行压缩处理得到的数据时,先驱动高清区域的图像显示,而后再驱动低清区域的图像显示。
本公开实施例考虑到前端图像播放单元提供给图像解析单元130的待显示图像包括两种可能:
第一种可能:原始的未压缩图像,在这种情况下,图像解析单元130需要根据注视点坐标,来解析高清区域、低清区域的划分,然后再将原始图像实现压缩处理,压缩的原则就是:注视点及周围有限的区域为高清区域因此不压缩,但离注视点比较远的区域为低清区域,将其压缩即可;然后将压缩后的图像传给图像驱动单元140;
第二种可能:已经压缩过的图像,在这种情况下,图像解析单元130就已经不需要再做压缩操作了,直接将图像传给图像驱动单元140即可。
如图8所示,本公开实施例还提供了一种显示装置,包括:瞳孔图像采集组件20、图像播放单元30、显示面板40以及如前任一项所述的显示驱动芯片10,其中:
瞳孔图像采集组件20,用于采集用户瞳孔图像,并将采集的用户图像输出至视线追踪单元110;
图像播放单元30,用于生成待播放的图像数据,并输出至图像接收单元120;
显示面板40,用于显示图像数据。
在一种示例性实施例中,显示驱动芯片包括:视线追踪单元110、图像接收单元120、图像解析单元130和驱动单元140,其中:
视线追踪单元110,用于获取外部的图像采集组件采集的用户图像,对获取的用户图像进行处理,得到人眼的注视点坐标,将人眼的注视点坐标输出至图像解析单元130;
图像接收单元120,用于通过第一图像接口接收待播放的图像数据,将待播放的图像数据输入至图像解析单元130;
图像解析单元130,用于根据人眼的注视点坐标,对待播放的图像数据进行压缩或解压缩处理,并将压缩或解压缩处理后的图像数据输出至图像驱动单元140;
图像驱动单元140,用于接收图像解析单元130输出的图像数据,根据图像数据的压缩模式与注视点坐标,控制连接的显示面板进行实时驱动显示。
在一种示例性实施例中,视线追踪单元110还用于,将人眼的注视点坐标输出至图像播放单元30;
图像播放单元30还用于,接收人眼的注视点坐标,根据人眼的注视点坐标,对待播放的图像数据进行压缩处理。
在一种示例性实施例中,图像播放单元30在对待播放的图像数据进行压缩时,可以根据人眼的注视点坐标,划分高清区域与低清区域,进而得到高清区域位于显示面板40的哪几个分区;对于高清区域与低清区域的图像数据的压缩处理方式分别如下:
(1)针对于高清区域的图像数据不进行压缩处理;
(2)针对于非高清的区域的图像数据,可以采用行压缩方式、列压缩方式或者行列结合压缩方式,进行压缩处理;
a)行压缩方式:采用若干行压缩,例如4行合并为1行,显示时4行栅线同开驱动;
b)列压缩方式:采用若干列压缩,例如4列合并为1列,显示时4列数据线同开驱动;
c)行列结合压缩方式:4行*4列区域合并为1行1列,显示时4行栅线同开且4列数据线同开驱动。
在一种示例性实施例中,显示面板40包括N*M个分区,N为行方向上的分区数,M为列方向上的分区数,N和M均可以为任意的自然数。示例性的,如图6所示,N=8,M=8,高清区域为其中的N1*M1个分区,N1为小于N的自然数,M1为小于M的自然数,示例性的,如图6所示,N1=3,M1=4。
本公开实施例的显示装置,通过在显示驱动芯片中集成视线追踪单元、图像接收单元、图像解析单元和图像驱动单元,简化了播放系统端的功能,有效缓解了播放系统端的实时渲染的压力,提高了播放系统端的驱动效率,从而进一步提升了显示产品的附加值。
如图9所示,本公开实施例还提供了一种显示驱动方法,包括如下步骤:
步骤10、视线追踪单元实现人眼瞳孔中心的实时定位以及注视点坐标的实时计算,将人眼的注视点坐标输出至图像解析单元;
步骤20、图像接收单元通过第一图像接口接收待播放的图像数据,将待播放的图像数据输入至图像解析单元;
步骤30、图像解析单元根据人眼的注视点坐标,对待播放的图像数据进行压缩或解压缩处理,并将压缩或解压缩处理后的图像数据输出至图像驱动单元;
步骤40、图像驱动单元接收图像解析单元输出的图像数据,根据图像数据的压缩模式与注视点坐标,控制连接的显示面板进行实时驱动显示。
在一种示例性实施例中,视线追踪单元包括:模式解析单元、人眼检测单元、瞳孔定位单元和注视点计算单元,视线追踪单元获取外部的图像采集组件采集的用户图像,对获取的用户图像进行处理,得到人眼的注视点坐标,包括:
模式解析单元确定外部的图像采集组件的工作模式,当工作模式为人脸模式时,将图像采集组件采集的人脸图像输入至人眼检测单元;当工作模式为人眼模式时,将图像采集组件采集的人眼图像输入至瞳孔定位单元;
人眼检测单元对图像采集组件采集的人脸图像进行人眼检测,并将检测到的人眼图像输出至瞳孔定位单元;
瞳孔定位单元计算人眼瞳孔在人眼图像中的位置坐标;
注视点计算单元根据人眼瞳孔在人眼图像中的位置坐标,计算人眼的注视点坐标,并将人眼的注视点坐标输出至图像解析单元。
在一种示例性实施例中,瞳孔定位单元包括:图像预处理模块、瞳孔边缘坐标获取模块和瞳孔中心坐标获取模块,瞳孔定位单元计算人眼瞳孔在人眼图像中的位置坐标,包括:
图像预处理模块去除人眼图像中的噪声信息,确定瞳孔目标区域;
瞳孔边缘坐标获取模块根据瞳孔目标区域,确定瞳孔边缘坐标;
瞳孔中心坐标获取模块根据瞳孔边缘坐标,确定瞳孔中心坐标。
在一种示例性实施例中,视线追踪单元通过IIC总线、高速同步串行接口SPI总线或通用异步接收/发送装置UART总线,将人眼的注视点坐标输出至图像解析单元。
在一种示例性实施例中,第一图像接口包括:高清多媒体接口HDMI、显示接口DP、移动产业处理器接口MIPI或者低电压差分信号LVDS。
在一种示例性实施例中,步骤30包括:
当待播放的图像数据为压缩图像数据时,检测是否需要对压缩图像数据进行解压缩处理,如果需要,则根据人眼的注视点坐标,对压缩图像数据进行解压缩处理并输出至驱动单元;如果不需要,则将压缩图像数据输出至驱动单元;
当待播放的图像数据为原始图像数据时,将原始图像数据存储至第一缓存区,读出第一缓存区的数据,根据人眼的注视点坐标,对读出的数据进行压缩处理并输出至驱动单元。
在一种示例性实施例中,步骤40包括:
驱动单元接收图像解析单元输出的图像数据,根据人眼的注视点坐标,将显示面板对应的显示区域划分成高清区域和低清区域;
对于高清区域和低清区域,驱动单元分别采用不同的驱动时序进行驱动。
在一种示例性实施例中,对于高清区域和低清区域,驱动单元分别采用不同的驱动时序进行驱动,包括:
对于高清区域,采用以下方式驱动:栅线逐条分别驱动、数据线逐条分别驱动;
对于低清区域,采用以下一种或多种方式驱动:多行栅线合并为一行驱动、多列数据线合并为一列驱动。
在一种示例性实施例中,对于高清区域和低清区域,驱动单元分别采用不同的驱动时序进行驱动,包括:
当驱动单元接收的图像数据为图像解析单元针对原始图像数据进行压缩处理得到的数据时,先驱动低清区域的图像显示,在保持低清区域显示的图像的同时,多次驱动高清区域的图像显示;
当驱动单元接收的图像数据为外部的图像播放单元针对原始图像数据进行压缩处理得到的数据时,先驱动高清区域的图像显示,在保持高清区域显示的图像的同时,驱动低清区域的图像显示。
本公开实施例的显示驱动方法,通过在显示驱动芯片中集成视线追踪单元、图像接收单元、图像解析单元和驱动单元,简化了播放系统端的功能,有效缓解了播放系统端的实时渲染的压力,提高了播放系统端的驱动效率,从而进一步提升了显示产品的附加值。
进一步地,通过驱动单元针对显示面板中的高清区域(注视区)和低清区域(非注视区),分别采用不同的驱动时序进行驱动,不但有效地减轻了播放系统端的驱动压力,增加了显示面板端的有效带宽利用率,而且达到了显著提升显示面板端的显示刷新率的效果。
在本公开实施例的描述中,需要理解的是,术语“中部”、“上”、“下”、“前”、“后”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本公开和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本公开的限制。
在本公开实施例的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以根据理解上述术语在本公开中的含义。
本领域普通技术人员可以理解,上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。在硬件实施方式中,在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分;例如,一个物理组件可以具有多个功能,或者一个功能或步骤可以由若干物理组件合作执行。某些组件或所有组件可以被实施为由处理器,如数字信号处理器或微处理器执行的软件,或者被实施为硬件,或者被实施为集成电路,如专用集成电路。这样的软件可以分布在计算机可读介质上,计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的,术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据,并且可包括任何信息递送介质。
虽然本公开所揭露的实施方式如上,但所述的内容仅为便于理解本公开而采用的实施方式,并非用以限定本公开。任何本公开所属领域内的技术人员,在不脱离本公开所揭露的精神和范围的前提下,可以在实施的形式及细节上进行任何的修改与变化,但本公开的保护范围,仍须以所附的权利要求书所界定的范围为准。
Claims (12)
1.一种显示驱动芯片,其特征在于,包括:视线追踪单元、图像接收单元、图像解析单元和图像驱动单元,其中:
所述视线追踪单元,用于实现人眼瞳孔中心的实时定位以及注视点坐标的实时计算,并将人眼的注视点坐标输出至图像解析单元;
所述图像接收单元,用于通过第一图像接口接收待播放的图像数据,将待播放的图像数据输入至所述图像解析单元;
所述图像解析单元,用于根据人眼的注视点坐标,对待播放的图像数据进行压缩或解压缩处理,并将压缩或解压缩处理后的图像数据输出至所述图像驱动单元;
所述图像驱动单元,用于接收所述图像解析单元输出的图像数据,根据图像数据的压缩模式与注视点坐标,控制连接的显示面板进行实时驱动显示。
2.根据权利要求1所述的显示驱动芯片,其特征在于,所述视线追踪单元包括:模式解析单元、人眼检测单元、瞳孔定位单元和注视点计算单元,其中:
所述模式解析单元,用于确定外部的瞳孔图像采集组件的工作模式,当所述工作模式为人脸模式时,将所述瞳孔图像采集组件采集的人脸图像输入至所述人眼检测单元;当所述工作模式为人眼模式时,将所述瞳孔图像采集组件采集的人眼图像输入至所述瞳孔定位单元;
所述人眼检测单元,用于对所述瞳孔图像采集组件采集的人脸图像进行人眼检测,并将检测到的人眼图像输出至所述瞳孔定位单元;
所述瞳孔定位单元,用于计算人眼瞳孔在所述人眼图像中的位置坐标;
所述注视点计算单元,用于根据人眼瞳孔在所述人眼图像中的位置坐标,计算人眼的注视点坐标,并将人眼的注视点坐标输出至所述图像解析单元。
3.根据权利要求2所述的显示驱动芯片,其特征在于,所述瞳孔定位单元包括:图像预处理模块、瞳孔边缘坐标获取模块和瞳孔中心坐标获取模块,其中:
所述图像预处理模块,用于去除所述人眼图像中的噪声信息,确定瞳孔目标区域;
所述瞳孔边缘坐标获取模块,用于根据瞳孔目标区域,确定瞳孔边缘坐标;
所述瞳孔中心坐标获取模块,用于根据瞳孔边缘坐标,确定瞳孔中心坐标。
4.根据权利要求1所述的显示驱动芯片,其特征在于,所述视线追踪单元通过两线式串行总线IIC、高速同步串行接口SPI总线或通用异步接收/发送装置UART总线,将人眼的注视点坐标输出至所述图像解析单元。
5.根据权利要求1所述的显示驱动芯片,其特征在于,所述第一图像接口包括:高清多媒体接口HDMI、显示接口DP、移动产业处理器接口MIPI或者低电压差分信号LVDS。
6.根据权利要求1所述的显示驱动芯片,其特征在于,所述图像解析单元具体用于:
当所述待播放的图像数据为压缩图像数据时,检测是否需要对压缩图像数据进行解压缩处理,如果需要,则根据人眼的注视点坐标,对压缩图像数据进行解压缩处理并输出至所述驱动单元;如果不需要,则将压缩图像数据输出至所述驱动单元;
当所述待播放的图像数据为原始图像数据时,将所述原始图像数据存储至第一缓存区,读出第一缓存区的数据,根据人眼的注视点坐标,对读出的数据进行压缩处理并输出至所述驱动单元。
7.根据权利要求1所述的显示驱动芯片,其特征在于,所述图像驱动单元控制连接的显示面板进行实时驱动显示,包括:
根据所述人眼的注视点坐标,将所述显示面板对应的显示区域划分成高清区域和低清区域;
对于所述高清区域和低清区域,分别采用不同的驱动时序进行驱动。
8.根据权利要求7所述的显示驱动芯片,其特征在于,所述对于所述高清区域和低清区域,分别采用不同的驱动时序进行驱动,包括:
对于所述高清区域,采用以下方式驱动:栅线逐条分别驱动、数据线逐条分别驱动;
对于所述低清区域,采用以下一种或多种方式驱动:多行栅线合并为一行驱动、多列数据线合并为一列驱动。
9.根据权利要求7所述的显示驱动芯片,其特征在于,所述对于所述高清区域和低清区域,分别采用不同的驱动时序进行驱动,包括:
当所述驱动单元接收的图像数据为所述图像解析单元针对原始图像数据进行压缩处理得到的数据时,先驱动所述低清区域的图像显示,再多次驱动所述高清区域的图像显示;
当所述驱动单元接收的图像数据为外部的图像播放单元针对原始图像数据进行压缩处理得到的数据时,先驱动所述高清区域的图像显示,再驱动所述低清区域的图像显示。
10.一种显示装置,其特征在于,包括:瞳孔图像采集组件、图像播放单元、显示面板以及如权利要求1-9中任一项所述的显示驱动芯片,其中:
所述瞳孔图像采集组件,用于采集用户图像,并将采集的用户图像输出至所述视线追踪单元;
所述图像播放单元,用于生成待播放的图像数据,并输出至所述图像接收单元;
所述显示面板,用于显示图像数据。
11.根据权利要求10所述的显示装置,其特征在于,所述视线追踪单元还用于,将人眼的注视点坐标输出至所述图像播放单元;
所述图像播放单元还用于,接收所述人眼的注视点坐标,根据所述人眼的注视点坐标,对所述待播放的图像数据进行压缩处理。
12.一种显示驱动方法,其特征在于,包括:
视线追踪单元实现人眼瞳孔中心的实时定位以及注视点坐标的实时计算,将人眼的注视点坐标输出至图像解析单元;
图像接收单元通过第一图像接口接收待播放的图像数据,将待播放的图像数据输入至所述图像解析单元;
所述图像解析单元根据人眼的注视点坐标,对待播放的图像数据进行压缩或解压缩处理,并将压缩或解压缩处理后的图像数据输出至图像驱动单元;
所述图像驱动单元接收所述图像解析单元输出的图像数据,根据图像数据的压缩模式与注视点坐标,控制连接的显示面板进行实时驱动显示。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110163827.4A CN114935971A (zh) | 2021-02-05 | 2021-02-05 | 显示驱动芯片、显示装置和显示驱动方法 |
US17/472,710 US11657751B2 (en) | 2021-02-05 | 2021-09-13 | Display driving chip, display apparatus and display driving method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110163827.4A CN114935971A (zh) | 2021-02-05 | 2021-02-05 | 显示驱动芯片、显示装置和显示驱动方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114935971A true CN114935971A (zh) | 2022-08-23 |
Family
ID=82703946
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110163827.4A Pending CN114935971A (zh) | 2021-02-05 | 2021-02-05 | 显示驱动芯片、显示装置和显示驱动方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11657751B2 (zh) |
CN (1) | CN114935971A (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11955054B1 (en) | 2022-09-20 | 2024-04-09 | Apple Inc. | Foveated display burn-in statistics and burn-in compensation systems and methods |
US11735147B1 (en) * | 2022-09-20 | 2023-08-22 | Apple Inc. | Foveated display burn-in statistics and burn-in compensation systems and methods |
WO2024064105A1 (en) * | 2022-09-20 | 2024-03-28 | Apple Inc. | Foveated display burn-in statistics and burn-in compensation systems and methods |
CN116149591B (zh) * | 2023-04-04 | 2023-08-18 | 深圳曦华科技有限公司 | 一种命令模式码片数据流传输时序控制方法及装置 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1732503A (zh) * | 2003-01-08 | 2006-02-08 | 东芝松下显示技术有限公司 | 显示设备及其控制方法 |
CN105979224A (zh) * | 2016-06-23 | 2016-09-28 | 青岛歌尔声学科技有限公司 | 一种头戴显示器、视频输出设备和视频处理方法、系统 |
CN106531073A (zh) * | 2017-01-03 | 2017-03-22 | 京东方科技集团股份有限公司 | 显示屏的处理电路、显示方法及显示器件 |
CN107742512A (zh) * | 2017-11-07 | 2018-02-27 | 北京京东方光电科技有限公司 | 一种显示驱动电路、其驱动方法及显示装置 |
CN107809641A (zh) * | 2017-11-13 | 2018-03-16 | 北京京东方光电科技有限公司 | 图像数据传输方法、处理方法及图像处理设备、显示设备 |
US20180090052A1 (en) * | 2016-09-01 | 2018-03-29 | Innovega Inc. | Non-Uniform Resolution, Large Field-of-View Headworn Display |
CN108919958A (zh) * | 2018-07-16 | 2018-11-30 | 北京七鑫易维信息技术有限公司 | 一种图像传输方法、装置、终端设备及存储介质 |
CN109509150A (zh) * | 2018-11-23 | 2019-03-22 | 京东方科技集团股份有限公司 | 图像处理方法和装置、显示装置、虚拟现实显示系统 |
US20200014904A1 (en) * | 2018-07-03 | 2020-01-09 | Raxium, Inc. | Display processing circuitry |
Family Cites Families (40)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7499594B2 (en) * | 2002-04-15 | 2009-03-03 | At&T Intellectual Property 1, L.P. | Multi-resolution predictive foveation for bandwidth reduction of moving images |
US8493390B2 (en) * | 2010-12-08 | 2013-07-23 | Sony Computer Entertainment America, Inc. | Adaptive displays using gaze tracking |
US8184069B1 (en) * | 2011-06-20 | 2012-05-22 | Google Inc. | Systems and methods for adaptive transmission of data |
JP5958303B2 (ja) * | 2012-11-27 | 2016-07-27 | 株式会社デンソー | テキスト読み上げ装置 |
US11010956B2 (en) * | 2015-12-09 | 2021-05-18 | Imagination Technologies Limited | Foveated rendering |
US10475370B2 (en) * | 2016-02-17 | 2019-11-12 | Google Llc | Foveally-rendered display |
US10401952B2 (en) * | 2016-03-31 | 2019-09-03 | Sony Interactive Entertainment Inc. | Reducing rendering computation and power consumption by detecting saccades and blinks |
US9965899B2 (en) * | 2016-04-28 | 2018-05-08 | Verizon Patent And Licensing Inc. | Methods and systems for minimizing pixel data transmission in a network-based virtual reality media delivery configuration |
US20210344991A1 (en) * | 2016-10-13 | 2021-11-04 | Skreens Entertainment Technologies, Inc. | Systems, methods, apparatus for the integration of mobile applications and an interactive content layer on a display |
KR102623391B1 (ko) * | 2017-01-10 | 2024-01-11 | 삼성전자주식회사 | 영상 출력 방법 및 이를 지원하는 전자 장치 |
US20180262758A1 (en) * | 2017-03-08 | 2018-09-13 | Ostendo Technologies, Inc. | Compression Methods and Systems for Near-Eye Displays |
US10424097B2 (en) * | 2017-04-01 | 2019-09-24 | Intel Corporation | Predictive viewport renderer and foveated color compressor |
US10914957B1 (en) * | 2017-05-30 | 2021-02-09 | Apple Inc. | Video compression methods and apparatus |
DE102017129795A1 (de) * | 2017-06-30 | 2019-01-03 | Lg Display Co., Ltd. | Anzeigevorrichtung und gate-treiberschaltkreis davon, ansteuerungsungsverfahren und virtuelle-realität-vorrichtung |
EP3714602A4 (en) * | 2017-11-21 | 2021-07-28 | Immersive Robotics Pty Ltd | IMAGE COMPRESSION FOR DIGITAL REALITY |
US11216974B2 (en) * | 2017-12-14 | 2022-01-04 | Samsung Electronics Co., Ltd. | Staring distance determination method and device |
US11335303B2 (en) * | 2017-12-19 | 2022-05-17 | Nokia Technologies Oy | Gaze dependent foveated rendering apparatus, method, computer program and system |
US10650791B2 (en) * | 2017-12-28 | 2020-05-12 | Texas Instruments Incorporated | Display system |
US10949947B2 (en) * | 2017-12-29 | 2021-03-16 | Intel Corporation | Foveated image rendering for head-mounted display devices |
US10694170B2 (en) * | 2018-03-05 | 2020-06-23 | Valve Corporation | Controlling image display via real-time compression in peripheral image regions |
US11836885B2 (en) * | 2018-05-07 | 2023-12-05 | Apple Inc. | Dynamic foveated pipeline |
US10796407B2 (en) * | 2018-05-11 | 2020-10-06 | Samsung Electronics Co., Ltd. | Foveated domain storage and processing |
WO2019229816A1 (ja) * | 2018-05-28 | 2019-12-05 | 株式会社ソニー・インタラクティブエンタテインメント | 画像生成装置、画像生成方法、およびプログラム |
US10943115B2 (en) * | 2018-07-24 | 2021-03-09 | Apical Ltd. | Processing image data to perform object detection |
US10671161B2 (en) * | 2018-08-08 | 2020-06-02 | Dell Products L.P. | Multi display eye tracking |
US10650568B2 (en) * | 2018-09-13 | 2020-05-12 | Qualcomm Incorporated | In-flight adaptive foveated rendering |
KR20200063777A (ko) * | 2018-11-28 | 2020-06-05 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
US11960086B2 (en) * | 2019-02-22 | 2024-04-16 | Sony Interactive Entertainment Inc. | Image generation device, head-mounted display, and image generation method |
US10852828B1 (en) * | 2019-07-17 | 2020-12-01 | Dell Products, L.P. | Automatic peripheral pairing with hand assignments in virtual, augmented, and mixed reality (xR) applications |
US11009944B1 (en) * | 2019-07-24 | 2021-05-18 | Facebook Technologies, Llc | Systems and methods for displaying foveated images |
JP6717477B1 (ja) * | 2019-09-13 | 2020-07-01 | 株式会社スワローインキュベート | 画像処理方法、画像処理装置、及び画像処理プログラム |
US11506888B2 (en) * | 2019-09-20 | 2022-11-22 | Nvidia Corp. | Driver gaze tracking system for use in vehicles |
US11735612B2 (en) * | 2019-09-26 | 2023-08-22 | Apple Inc. | Display panel optical cross-talk compensation systems and methods |
KR20210044506A (ko) * | 2019-10-15 | 2021-04-23 | 삼성전자주식회사 | 증강 현실 객체를 표시하는 장치 및 그 동작 방법 |
CN111274928B (zh) * | 2020-01-17 | 2023-04-07 | 腾讯科技(深圳)有限公司 | 一种活体检测方法、装置、电子设备和存储介质 |
US11301047B2 (en) * | 2020-04-24 | 2022-04-12 | Sony Interactive Entertainment Inc. | Hybrid wireless streaming solution, switching from 2D to 3D based on an intuitive hand gesture in virtual reality or augmented reality (AR) head-mounted displays (HMD) |
GB2599900B (en) * | 2020-10-09 | 2023-01-11 | Sony Interactive Entertainment Inc | Data processing system and method for image enhancement |
US11567567B2 (en) * | 2020-11-12 | 2023-01-31 | Varjo Technologies Oy | Encoders, methods and display apparatuses incorporating gaze-directed compression ratios |
US20220206571A1 (en) * | 2020-12-29 | 2022-06-30 | Blink O.G Ltd. | Personalized calibration-independent regional fixation prediction for simultaneous users of a digital display |
US11947717B2 (en) * | 2021-01-22 | 2024-04-02 | Blink Technologies Inc. | Gaze estimation systems and methods using relative points of regard |
-
2021
- 2021-02-05 CN CN202110163827.4A patent/CN114935971A/zh active Pending
- 2021-09-13 US US17/472,710 patent/US11657751B2/en active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1732503A (zh) * | 2003-01-08 | 2006-02-08 | 东芝松下显示技术有限公司 | 显示设备及其控制方法 |
CN105979224A (zh) * | 2016-06-23 | 2016-09-28 | 青岛歌尔声学科技有限公司 | 一种头戴显示器、视频输出设备和视频处理方法、系统 |
WO2017219652A1 (zh) * | 2016-06-23 | 2017-12-28 | 青岛歌尔声学科技有限公司 | 一种头戴显示器、视频输出设备和视频处理方法、系统 |
US20180090052A1 (en) * | 2016-09-01 | 2018-03-29 | Innovega Inc. | Non-Uniform Resolution, Large Field-of-View Headworn Display |
CN106531073A (zh) * | 2017-01-03 | 2017-03-22 | 京东方科技集团股份有限公司 | 显示屏的处理电路、显示方法及显示器件 |
US20200218340A1 (en) * | 2017-01-03 | 2020-07-09 | Boe Technology Group Co., Ltd. | Processing circuit of display panel, display method, and display device |
CN107742512A (zh) * | 2017-11-07 | 2018-02-27 | 北京京东方光电科技有限公司 | 一种显示驱动电路、其驱动方法及显示装置 |
US20190138089A1 (en) * | 2017-11-07 | 2019-05-09 | Boe Technology Group Co., Ltd. | Display driving circuit, driving method thereof and display device |
CN107809641A (zh) * | 2017-11-13 | 2018-03-16 | 北京京东方光电科技有限公司 | 图像数据传输方法、处理方法及图像处理设备、显示设备 |
US20200014904A1 (en) * | 2018-07-03 | 2020-01-09 | Raxium, Inc. | Display processing circuitry |
CN108919958A (zh) * | 2018-07-16 | 2018-11-30 | 北京七鑫易维信息技术有限公司 | 一种图像传输方法、装置、终端设备及存储介质 |
CN109509150A (zh) * | 2018-11-23 | 2019-03-22 | 京东方科技集团股份有限公司 | 图像处理方法和装置、显示装置、虚拟现实显示系统 |
Also Published As
Publication number | Publication date |
---|---|
US20220254297A1 (en) | 2022-08-11 |
US11657751B2 (en) | 2023-05-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114935971A (zh) | 显示驱动芯片、显示装置和显示驱动方法 | |
US10235964B2 (en) | Splicing display system and display method thereof | |
US6549641B2 (en) | Screen image observing device and method | |
CN110460831B (zh) | 显示方法、装置、设备及计算机可读存储介质 | |
US10078922B2 (en) | Eye tracking for display resolution adjustment in a virtual reality system | |
US10699117B2 (en) | Pupil positioning device and method and display driver of virtual reality device | |
CN106652972B (zh) | 显示屏的处理电路、显示方法及显示器件 | |
US10802287B2 (en) | Dynamic render time targeting based on eye tracking | |
WO2018213812A2 (en) | Display interface with foveal compression | |
US10621902B2 (en) | Driving circuit for display screen with adjustable color depth bit value, display method and display device | |
CN107742512B (zh) | 一种显示驱动电路、其驱动方法及显示装置 | |
EP3804347B1 (en) | A method for processing image data with reduced transmission bandwidth for display | |
CN101329759A (zh) | 立体图形系统以及处理方法 | |
CN112102172A (zh) | 图像处理方法、设备、显示系统及存储介质 | |
US11615509B2 (en) | Picture processing method and device | |
WO2023202216A9 (zh) | 图像处理方法、装置及存储介质 | |
CN112822438A (zh) | 一种实时控制多路视频管理器 | |
WO2022166712A1 (zh) | 图像的显示方法、装置、可读介质和电子设备 | |
US11917167B2 (en) | Image compression method and apparatus, image display method and apparatus, and medium | |
US10209523B1 (en) | Apparatus, system, and method for blur reduction for head-mounted displays | |
US20180150999A1 (en) | Image display apparatus, image display method, and system | |
CN109194944B (zh) | 图像处理方法、装置及系统、显示装置 | |
CN106126148B (zh) | 显示控制方法及电子设备 | |
US20180356886A1 (en) | Virtual reality display system and display driving apparatus | |
CN113315964B (zh) | 一种3d图像的显示方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |