CN117378002A - 显示装置、显示系统及显示驱动方法 - Google Patents
显示装置、显示系统及显示驱动方法 Download PDFInfo
- Publication number
- CN117378002A CN117378002A CN202280037924.1A CN202280037924A CN117378002A CN 117378002 A CN117378002 A CN 117378002A CN 202280037924 A CN202280037924 A CN 202280037924A CN 117378002 A CN117378002 A CN 117378002A
- Authority
- CN
- China
- Prior art keywords
- image
- image data
- display
- pixels
- partial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 14
- 238000001514 detection method Methods 0.000 claims description 67
- 230000006835 compression Effects 0.000 claims description 17
- 238000007906 compression Methods 0.000 claims description 17
- 230000008859 change Effects 0.000 claims description 7
- 230000006837 decompression Effects 0.000 claims description 7
- 239000003990 capacitor Substances 0.000 description 73
- 230000004048 modification Effects 0.000 description 63
- 238000012986 modification Methods 0.000 description 63
- 238000010586 diagram Methods 0.000 description 48
- 230000005540 biological transmission Effects 0.000 description 31
- 230000001133 acceleration Effects 0.000 description 24
- 101100153525 Homo sapiens TNFRSF25 gene Proteins 0.000 description 20
- 102100022203 Tumor necrosis factor receptor superfamily member 25 Human genes 0.000 description 20
- 238000005516 engineering process Methods 0.000 description 13
- 108010063993 lens intrinsic protein MP 64 Proteins 0.000 description 9
- 108700032832 MP-33 Proteins 0.000 description 8
- 230000036541 health Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 101001128833 Xenopus laevis Nuclear distribution protein nudE homolog 1-A Proteins 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 210000003128 head Anatomy 0.000 description 6
- 101000588145 Homo sapiens Microtubule-associated tumor suppressor 1 Proteins 0.000 description 5
- 101001139122 Homo sapiens Nucleoporin NUP35 Proteins 0.000 description 5
- 102100037224 Noncompact myelin-associated protein Human genes 0.000 description 5
- 101710184695 Noncompact myelin-associated protein Proteins 0.000 description 5
- 102100020682 Nucleoporin NUP35 Human genes 0.000 description 5
- 101100208365 Trypanosoma brucei brucei KRET2 gene Proteins 0.000 description 5
- 238000009877 rendering Methods 0.000 description 5
- 101100472152 Trypanosoma brucei brucei (strain 927/4 GUTat10.1) REL1 gene Proteins 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 239000002184 metal Substances 0.000 description 3
- 238000004378 air conditioning Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 206010028813 Nausea Diseases 0.000 description 1
- 206010041349 Somnolence Diseases 0.000 description 1
- 101150010989 VCATH gene Proteins 0.000 description 1
- -1 WSL2 Proteins 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000005669 field effect Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000012212 insulator Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000008693 nausea Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Abstract
该显示装置包括:接收器电路,能够接收第一图像数据和第二图像数据,第一图像数据指示具有第一分辨率的完整图像,第二图像数据与一部分完整图像对应并且指示具有比第一分辨率高的第二分辨率的第一部分图像;显示单元,具有多个像素;以及显示驱动电路,能够执行第一驱动和第二驱动,在第一驱动中,基于第一图像数据以第一数量的像素为单位驱动多个像素,在第二驱动中,基于第二图像数据以小于第一数量的第二数量的像素为单位驱动多个像素中的设置到与第一部分图像对应的区域的两个或更多个像素。
Description
技术领域
本公开涉及显示图像的显示装置、显示系统和显示驱动方法。
背景技术
例如,存在基于具有低分辨率的整体图像和具有高分辨率的部分图像生成帧图像,并且显示生成的帧图像的显示装置(例如,专利文献1)。
引用列表
专利文献
专利文献1:日本未经审查专利申请公开第2019-197224号
发明内容
在显示装置中,期望高图像质量,并且期望图像质量的进一步提高。
期望提供一种能够提高图像质量的显示装置、显示系统和显示驱动方法。
根据本公开内容的实施方式的显示装置包括接收电路、显示部和显示驱动电路。接收电路被配置为能够接收第一图像数据和第二图像数据。该第一图像数据表示具有第一分辨率的整体图像。该第二图像数据表示具有比第一分辨率高的第二分辨率的第一部分图像。第一部分图像与一部分整体图像对应。显示部包括多个像素。显示驱动电路被配置为能够执行第一驱动和第二驱动。在第一驱动中,基于第一图像数据以第一数量的像素为单位驱动多个像素,并且在第二驱动中,基于第二图像数据以小于第一数量的第二数量的像素为单位驱动多个像素中的设置在与第一部分图像对应的区域中的两个或更多个像素。该第二数量小于该第一数量。
根据本公开内容的实施方式的显示系统包括图像生成装置和显示装置。图像生成装置被配置为能够发送第一图像数据和第二图像数据。该第一图像数据表示具有第一分辨率的整体图像。该第二图像数据表示具有比第一分辨率高的第二分辨率的第一部分图像。第一部分图像与一部分整体图像对应。显示装置包括接收电路、显示部和显示驱动电路。接收电路被配置为能够接收该第一图像数据和该第二图像数据。显示部包括多个像素。显示驱动电路被配置为能够执行第一驱动和第二驱动。在第一驱动中,基于第一图像数据以第一数量的像素为单位驱动多个像素。在第二驱动中,基于第二图像数据以第二数量的像素为单位驱动多个像素中的设置在与第一部分图像对应的区域中的两个或更多个像素。该第二数量小于该第一数量。
根据本公开内容的实施方式的显示驱动方法包括:发送第一图像数据和第二图像数据,该第一图像数据表示具有第一分辨率的整体图像,该第二图像数据表示具有高于第一分辨率的第二分辨率的第一部分图像,第一部分图像与一部分整体图像对应;接收该第一图像数据和该第二图像数据;执行第一驱动,在该第一驱动中,基于第一图像数据以第一数量的像素为单位驱动多个像素;以及执行第二驱动,在该第二驱动中基于该第二图像数据以第二数量的像素为单位驱动多个像素中的设置在与第一部分图像对应的区域中的两个或更多个像素,该第二数量小于该第一数量。
在根据本公开内容的实施方式的显示装置、显示系统和显示驱动方法中,接收电路接收第一图像数据和第二图像数据。该第一图像数据是表示具有第一分辨率的整体图像的数据。该第二图像数据是表示具有比第一分辨率高的第二分辨率的第一部分图像的数据。第一部分图像与一部分整体图像对应。执行第一驱动,该第一驱动基于第一图像数据以第一数量的像素为单位驱动多个像素。此外,执行第二驱动,该第二驱动基于该第二图像数据以第二数量的像素为单位驱动多个像素中的设置在与第一部分图像相对应的区域中的两个或更多个像素。该第二数量小于该第一数量。
附图说明
[图1]是示出根据本公开内容的实施方式的显示系统的配置示例的框图。
[图2]是示出图1中所示的头戴式显示器的显示图像的示例的说明图。
[图3]是示出通过图1中所示的图像生成装置生成的整体图像和部分图像的示例的说明图。
[图4A]是示出根据参考例的整体图像的图像数据的示例的说明图。
[图4B]是示出整体图像和部分图像的多个图像数据的示例的说明图。
[图5]是示出通过图1中所示的图像生成装置发送的多个图像数据的示例的说明图。
[图6]是示出在图1中所示的显示面板的配置示例的框图。
[图7]是示出在图1中所示的显示系统中的显示操作的示例的说明图。
[图8]是示出在图1中所示的头戴式显示器中的显示操作的示例的说明图。
[图9]是示出像素的驱动示例的说明图。
[图10]是示出像素的驱动示例的另一说明图。
[图11]是示出在图1中所示的头戴式显示器中的显示操作的示例的另一说明图。
[图12]是示出根据变形例的显示系统的配置示例的示例的框图。
[图13]是示出图12中所示的头戴式显示器的显示图像的示例的说明图。
[图14]是示出根据另一变形例的显示系统的配置示例的框图。
[图15]是示出根据另一变形例的像素的驱动示例的说明图。
[图16]是示出根据另一变形例的显示系统的特征示例的表格。
[图17]是示出根据另一变形例的整体图像和部分图像的示例的说明图。
[图18]是示出根据另一变形例的显示系统的特征示例的表格。
[图19]是示出根据另一变形例的整体图像和部分图像的示例的说明图。
[图20]是示出根据另一变形例的整体图像和部分图像的多个图像数据的示例的说明图。
[图21]是示出根据另一变形例的头戴式显示器中的显示操作的示例的说明图。
[图22]是示出根据另一变形例的整体图像和部分图像的示例的说明图。
[图23]是示出根据另一变形例的整体图像和部分图像的多个图像数据的示例的说明图。
[图24]是示出根据另一变形例的头戴式显示器中的显示操作的示例的说明图。
[图25]是示出根据另一变形例的整体图像和部分图像的示例的说明图。
[图26]是示出根据另一变形例的显示系统的特征示例的表格。
[图27]是示出根据另一变形例的整体图像和部分图像的多个图像数据的示例的说明图。
[图28]是示出根据另一变形例的头戴式显示器中的显示操作的示例的说明图。
[图29]是示出根据另一变形例的像素的驱动示例的说明图。
[图30]是示出根据另一变形例的显示系统的操作示例的说明图。
[图31]是示出根据另一变形例的头戴式显示器中的显示操作的示例的说明图。
[图32]是示出根据另一变形例的头戴式显示器中的显示操作的示例的说明图。
[图33]是示出根据另一变形例的头戴式显示器的显示图像的示例的说明图。
[图34]是示出根据另一变形例的由图像生成装置生成的整体图像和部分图像的示例的说明图。
[图35]是示出根据另一变形例的整体图像和部分图像的多个图像数据的示例的说明图。
[图36]是示出根据另一变形例的显示系统中的显示操作的示例的说明图。
[图37]是示出根据另一变形例的头戴式显示器中的显示操作的示例的说明图。
[图38]是示出根据另一变形例的显示系统的特征示例的表。
[图39]是示出根据另一变形例的显示系统的配置示例的框图。
[图40]是示出根据另一变形例的整体图像和部分图像的多个图像数据的示例的说明图。
[图41]是示出根据另一变形例的显示系统的配置示例的框图。
[图42A]是示出根据另一变形例的显示系统的操作示例的表格。
[图42B]是示出根据另一变形例的显示系统的操作示例的另一表格。
[图42C]是示出根据另一变形例的显示系统的操作示例的另一表。
[图43]是示出根据另一变形例的显示面板的配置示例的框图。
[图44]是示出在图43中所示的像素的配置示例的电路图。
[图45]是示出在图43中所示的像素的另一配置示例的电路图。
[图46]是示出在图43中所示的像素的另一配置示例的电路图。
[图47]是示出在图43中所示的像素的另一配置示例的电路图。
[图48]是示出在图43中所示的像素的另一配置示例的电路图。
[图49]是示出在图43中所示的像素的另一配置示例的电路图。
[图50]是示出在图43中所示的像素的另一配置示例的电路图。
[图51]是根据应用示例的头戴式显示器的外观配置的透视图。
[图52]是根据应用示例的另一头戴式显示器的外观配置的透视图。
[图53A]是根据另一应用示例的数码静态相机的外观配置的正视图。
[图53B]是根据另一应用示例的数码静态相机的外观配置的后视图。
[图54]是根据另一应用示例的电视设备的外观配置的后视图。
[图55]是根据另一应用示例的智能电话的外观配置的后视图。
[图56A]是示出根据另一应用示例的车辆的配置示例的说明图。
[图56B]是示出根据另一应用示例的车辆的配置示例的说明图。
具体实施方式
下面参考附图详细描述本披露的一些实施方式。应注意,按照下列顺序进行描述。
1.实施方式
2.应用示例
<1.实施方式>
[配置示例]
图1示出根据实施方式的显示系统(显示系统1)的配置示例。应注意,根据本公开内容的实施方式的显示装置和显示驱动方法通过本实施方式体现,并且因此一起描述。
显示系统1包括图像生成装置10和头戴式显示器20。显示系统1用于增强现实(AR)或虚拟现实(VR)。显示系统1被配置为执行中央凹渲染(Foveated Rendering),其中,在生成图像时,以高分辨率渲染正被注视的区域,并且以低分辨率渲染另一区域。在该示例中,显示系统1使用诸如HDMI(注册商标)(高清晰度多媒体接口)或MIPI(注册商标)(移动行业处理器接口)的接口来执行图像生成装置10与头戴式显示器20之间的通信。要注意的是,在该示例中,通过有线通信执行该通信;然而,该通信不限于此,并且可以通过无线通信来执行。
在显示系统1中,头戴式显示器20基于从图像生成装置10发送的图像信号SP显示图像。头戴式显示器20的加速度传感器22(稍后描述)检测诸如头戴式显示器20的方向的运动。此外,头戴式显示器20的眼睛跟踪传感器23(稍后描述)检测佩戴头戴式显示器20的用户的眼睛的方向,从而检测用户正在观看显示图像的哪个部分。头戴式显示器20将包括这种检测结果的检测信号SD提供至图像生成装置10。图像生成装置10基于加速度传感器22的检测结果生成对应于头戴式显示器20的方向的图像(整体图像P1)。此外,图像生成装置10基于眼睛跟踪传感器23的检测结果生成包括用户正在观看的一部分整体图像P1的图像(部分图像P2)。在头戴式显示器20上显示部分图像P2的情况下,部分图像P2的分辨率高于整体图像P1的分辨率。此外,图像生成装置10将包括表示整体图像P1的图像数据DT1和表示部分图像P2的图像数据DT2的图像信号SP发送至头戴式显示器20。
图像生成装置10被配置为用于生成将要显示在头戴式显示器20上的图像。图像生成装置10包括图像生成电路11、发送电路12和接收电路13。
例如,图像生成电路11被配置为通过执行预定处理(诸如渲染处理)来生成要在头戴式显示器20上显示的图像。基于包括在从接收电路13提供的数据中的加速度传感器22的检测结果,图像生成电路11生成表示对应于虚拟空间中的头戴式显示器20的方向的场景的整体图像P1。此外,基于包括在从接收电路13提供的数据中的眼睛跟踪传感器23的检测结果,图像生成电路11生成表示与虚拟空间中头戴式显示器20的方向对应的、用户正在观看的一部分场景的部分图像P2。
图2示出了将要显示在头戴式显示器20上的显示图像P20的示例。显示图像P20包含人物9的图像。在该示例中,佩戴头戴式显示器20的用户正在观看人物9的图像。头戴式显示器20的眼睛跟踪传感器23检测用户的眼睛的方向以由此检测用户正观看显示图像P20的哪个部分。基于包含在从接收电路13提供的数据中的眼睛跟踪传感器23的检测结果,图像生成电路11确定包括显示图像P20的整体区域R1中的用户正在观看的部分的部分区域R2。在该示例中,部分区域R2在水平方向(图2中的横向方向)上的尺寸是整体区域R1在水平方向上的尺寸的一半,并且部分区域R2在垂直方向(图2中的纵向方向)上的尺寸是整体区域R1在垂直方向上的尺寸的一半。换言之,部分区域R2的面积是整体区域R1的面积的1/4。然后,图像生成电路11生成与整体区域R1相关的整体图像P1,并且生成与部分区域R2相关的部分图像P2。
图3示出由图像生成电路11生成的整体图像P1和部分图像P2的示例。在图3中,正方形表示图像数据中的像素。整体图像P1是具有整体区域R1的低分辨率的图像(图2)。部分图像P2是整体图像P1中的局部区域R2的图像被转换成的具有高分辨率的图像。在该示例中,整体图像P1中的每个像素对应于头戴式显示器20中的四个像素PIX(稍后描述),并且部分图像P2中的每个像素对应于头戴式显示器20中的一个像素PIX。在该示例中,整体图像P1中的像素的数量和部分图像P2中的像素的数量彼此相等。整体图像P1和部分图像P2中的每个还被称为子帧图像。
图4A示意性地示出在没有执行中央凹渲染的情况下仅显示整体图像的情况下的图像数据。该图像数据表示在多个像素值中的每一个被写入头戴式显示器20中的多个像素PIX中的对应一个的情况下可用的具有高分辨率的整体图像的图像数据。图4B示意性地示出根据本技术的整体图像P1和部分图像P2的多个图像数据。
如上所述,整体图像P1中的每个像素对应于四个像素PIX;因此,整体图像P1(图4B)在水平方向上的像素数(水平像素数)是图4A中所示的具有高分辨率的整体图像的水平像素数的50%,并且整体图像P1在垂直方向上的像素数(垂直像素数)是具有高分辨率的整体图像的垂直像素数的50%。换言之,整体图像P1的水平像素数量比是50%,并且整体图像P1的垂直像素数量比是50%。因此,整体图像P1的图像数据量是具有高分辨率的整体图像的图像数据量的1/4。
此外,如上所述,部分区域R2的面积是整体区域R1的面积的1/4;因此,部分图像P2(图4B)在水平方向上的像素数(水平像素数)是图4A中示出的具有高分辨率的整体图像的水平像素数的50%,并且部分图像P2在垂直方向上的像素数(垂直像素数)是具有高分辨率的整体图像的垂直像素数的50%。换言之,部分图像P2的水平像素数量比是50%,并且部分图像P2的垂直像素数量比是50%。因此,部分区域R2的图像数据量是具有高分辨率的整体图像的图像数据量的1/4。
因此,在该示例中,整体图像P1和部分图像P2的水平像素数量比彼此相等,并且整体图像P1和部分图像P2的垂直像素数量比彼此相等。此外,整体图像P1和部分图像P2的总数据量是具有高分辨率的整体图像的数据量的一半。
图像生成电路11生成这种整体图像P1和这种部分图像P2。图像生成电路11然后将生成的整体图像P1的图像数据、部分图像P2的图像数据和关于部分图像P2在整体图像P1中的位置的数据提供至发送电路12。
发送电路12(图1)被配置为基于从图像生成电路11提供的多个数据来生成图像信号SP并且将该图像信号SP发送至头戴式显示器20。具体地,发送电路12基于整体图像P1的图像数据生成表示整体图像P1的图像数据TD1,并且基于部分图像P2的图像数据和关于部分图像P2的位置的数据生成表示部分图像P2的图像数据DT2。发送电路12然后将包括图像数据DT1和图像数据DT2的图像信号SP发送至头戴式显示器20。
图5示意性地示出图像信号SP的示例。发送电路12以时分方式发送图像数据DT1和图像数据DT2。具体而言,发送电路12交替地发送表示整体图像P1的图像数据DT1和表示部分图像P2的图像数据DT2。
接收电路13(图1)被配置为用于接收从头戴式显示器20发送的检测信号SD。接收电路13然后将关于加速度传感器22的检测结果和眼睛跟踪传感器23的检测结果的数据提供至图像生成电路11。该数据包括在该检测信号SD中。
头戴式显示器20包括接收电路21、加速度传感器22、眼睛跟踪传感器23、处理器24、发送电路25、显示控制器26和显示面板27。
接收电路21被配置为接收从图像生成装置10发送的图像信号SP。然后,接收电路21将包含在该图像信号SP中的表示整体图像P1的图像数据DT1和表示部分图像P2的图像数据DT2提供至处理器24。
加速度传感器22被配置为检测诸如头戴式显示器20的方向的运动。加速度传感器22例如可以使用6轴惯性传感器。因此,在显示系统1中,可以在虚拟空间中生成对应于头戴式显示器20的方向的整体图像P1。
眼睛跟踪传感器23被配置为用于检测佩戴头戴式显示器20的用户的眼睛的方向。因此,在显示系统1中,可以检测用户正在观看显示图像的哪个部分,并且可以生成具有高分辨率的部分图像P2。部分图像P2包括用户正在观看的部分。
处理器24被配置为控制头戴式显示器20的操作,并且包括例如CPU(中央处理单元)、GPU(图形处理单元)等。具体而言,处理器24例如基于从接收电路21提供的多个图像数据DT1和DT2执行预定的图像处理,并且将包括在该图像数据DT1中的整体图像P1的图像数据、包括在该图像数据DT2中的部分图像P2的图像数据以及关于包括在图像数据DT2中的部分图像P2的位置的数据提供至显示控制器26。另外,处理器24将加速度传感器22的检测结果和眼睛跟踪传感器23的检测结果提供至发送电路25,并且使发送电路25发送这些检测结果。
发送电路25被配置为将检测信号SD发送至图像生成装置10,检测信号SD包括从处理器24提供的加速度传感器22的检测结果和眼睛跟踪传感器23的检测结果。
显示控制器26被配置为基于从处理器24提供的整体图像P1的图像数据、部分图像P2的图像数据和关于部分图像P2的位置的数据,来控制显示面板27的操作。
显示面板27被配置为基于由显示控制器26的控制来显示图像。在该示例中,显示面板27是有机电致发光(EL,Electro Luminescence)显示面板。应注意,显示面板27不限于此,并且例如可以是液晶显示面板。
图6示出显示面板27的配置示例。显示面板27包括像素阵列31、像素信号生成电路32和扫描电路33。
像素阵列31包括多个信号线SGL、多个控制线CTL和多个像素PIX。
多个信号线SGL在垂直方向(图6中的纵向方向)上延伸并且在水平方向(图6中的横向方向)上并排设置。多个信号线SGL各自将由像素信号生成电路32生成的像素信号提供至像素PIX。
多个控制线CTL在水平方向(图6中的横向方向)上延伸,并且在垂直方向(图6中的纵向方向)上并排设置。多个控制线CTL各自将由扫描电路33生成的控制信号提供至像素PIX。
多个像素PIX在像素阵列31中布置成矩阵。基于通过控制线CTL提供的控制信号控制多个像素PIX的每一个,并且通过信号线SGL提供的像素信号被写入至多个像素PIX的每一个。因此,多个像素PIX的每一个被配置为发射具有与写入的像素信号对应的亮度的光。在水平方向上并排布置的一行像素PIX构成像素线L。
像素信号生成电路32被配置为基于将要显示的图像数据生成像素信号,并将所生成的像素信号施加至多个信号线SGL中的每一个。
扫描电路33被配置为通过生成控制信号并且将生成的控制信号施加至多个控制线CTL中的每一个来以一个或多个像素线L为单位作为扫描单位来扫描多个像素PIX。
在本文中,接收电路21对应于本公开内容中的“接收电路”的具体示例。整体图像P1对应于本公开内容中的“整体图像”的具体示例。该图像数据DT1对应于本公开内容中的“第一图像数据”的具体示例。部分图像P2对应于本公开内容中的“部分图像”的具体示例。图像数据DT2对应于本公开内容中的“第二图像数据”的具体示例。像素阵列31对应于本公开内容中的“显示部”的具体示例。显示控制器26、像素信号生成电路32和扫描电路33对应于本公开内容中的“显示驱动电路”的具体示例。眼睛跟踪传感器23对应于本公开内容中的“第一传感器”的具体示例。加速度传感器22对应于本公开内容中的“第二传感器”的具体示例。发送电路25对应于本公开内容中的“发送电路”的具体示例。
[操作和作用]
接下来,描述根据本实施方式的显示系统1的操作和作用。
(整体操作的概述)
首先,参考图1给出显示系统1的整体操作的概况的描述。图像生成装置10的接收电路13接收从头戴式显示器20发送的检测信号SD,并且将关于加速度传感器22的检测结果和眼睛跟踪传感器23的检测结果的数据提供至图像生成电路11。该数据包括在检测信号SD中。图像生成电路11基于包括在从接收电路13提供的数据中的加速度传感器22的检测结果,生成表示对应于虚拟空间中的头戴式显示器20的方向的场景的整体图像P1。此外,图像生成电路11基于包括在从接收电路13提供的数据中的眼睛跟踪传感器23的检测结果,生成表示用户正在观看对应于头戴式显示器20的方向的一部分场景的部分图像P2。发送电路12基于整体图像P1的图像数据来生成表示整体图像P1的图像数据DT1,并且基于部分图像P2的图像数据和关于部分图像P2的位置的数据来生成表示部分图像P2的图像数据DT2。发送电路12然后将包括图像数据DT1和图像数据DT2的图像信号SP发送至头戴式显示器20。
头戴式显示器20的接收电路21接收从图像生成装置10发送的图像信号SP,并且将包括在图像信号SP中的表示整体图像P1的图像数据DT1和表示部分图像P2的图像数据DT2提供至处理器24。处理器24基于从接收电路21提供的多个图像数据DT1和DT2执行预定的图像处理,并且将包括在该图像数据DT1中的整体图像P1的图像数据、包括在该图像数据DT2中的部分图像P2的图像数据以及关于部分图像P2的位置的数据提供至显示控制器26。显示控制器26基于从处理器24提供的整体图像P1的图像数据、部分图像P2的图像数据和关于部分图像P2的位置的数据来控制显示面板27的操作。显示面板27基于显示控制器26的控制来显示图像。
加速度传感器22检测诸如头戴式显示器20的方向的运动。眼睛跟踪传感器23检测佩戴头戴式显示器20的用户的眼睛的方向。处理器24将加速度传感器22的检测结果和眼睛跟踪传感器23的检测结果提供至发送电路25。发送电路25将包括从处理器24提供的加速度传感器22的检测结果和眼睛跟踪传感器23的检测结果的检测信号SD发送至图像生成装置10。
(详细操作)
头戴式显示器20基于以时分方式提供的图像数据DT1和图像数据DT2生成显示图像P20。
图7示出头戴式显示器20中的显示操作的示例。头戴式显示器20交替地接收表示整体图像P1的图像数据DT1和表示部分图像P2的图像数据DT2。
在头戴式显示器20接收图像数据DT1的情况下,显示控制器26执行控制以基于包括在该图像数据DT1中的整体图像P1的图像数据以四个像素PIX为单位驱动显示面板27中的多个像素PIX。因此,显示面板27显示包括具有低分辨率的整体图像P2的显示图像P21。
在头戴式显示器20接收到图像数据DT2的情况下,显示控制器26执行控制以基于图像数据DT2中包括的部分图像P2的图像数据和关于部分图像P2的位置的数据,以一个像素PIX为单位驱动布置在显示面板27中与多个像素PIX中的部分图像P2对应的区域中的多个像素PIX。在这种情况下,在显示面板27中的多个像素PIX中,与部分图像P2对应的区域以外的区域中的多个像素PIX保持显示。因此,显示面板27显示包括具有高分辨率的部分图像P2的显示图像P22。
头戴式显示器20在接收图像数据DT1的情况下重复该操作,并且在接收图像数据DT2的情况下重复该操作。
图8示出了头戴式显示器20中的更具体的显示操作的示例,其中(A)指示同步信号Vsync的波形,(B)指示输入图像,(C)指示显示面板27的操作,以及(D)指示将要显示在显示面板27上的显示图像。
在周期T中提供一对整体图像P1和部分图像P2。在该示例中,周期T例如为8.3[毫秒(msec.)](=1/120[Hz])。以周期Ts提供整体图像P1和部分图像P2中的每一个。周期Ts例如为4.2[msec.](=1/240[Hz])。
在定时t11,生成同步信号Vsync的脉冲(图8的(A))。在从定时t11到定时t12的时间段中,头戴式显示器20的接收电路21接收表示整体图像P1的图像数据DT1(图8的(B))。输入图像是整体图像P1;因此,显示控制器26进行控制以基于整体图像P1的图像数据以四个像素PIX为单位驱动显示面板27中的多个像素PIX。
图9示出了驱动像素PIX的操作。在显示面板27中,扫描电路33以两个像素线L的扫描单位US对多个像素PIX进行扫描。此外,像素信号生成电路32将相同的像素信号施加至彼此相邻的两个信号线SGL。因此,相同的像素信号被写入所选择的两个像素线L中的四个像素PIX。由此,显示面板27以四个像素PIX的单位UD驱动多个像素PIX。
如图8的(C)中的粗线所指示的,在该示例中,扫描电路33从像素阵列31的底部至顶部以两个像素线L的扫描单位顺序地执行扫描。这使得可以将操作频率降低至在以一个像素线L为单位连续执行扫描的情况下的操作频率的一半,并且可以降低功耗。然后,如图8的(C)中的阴影部分所指示的,在该示例中,在像素信号被写入之后,已经被写入像素信号的像素PIX在预定的时间段中发光。因此,显示面板27显示该显示图像P21(图8的(D))。
接下来,在定时t12,生成同步信号Vsync的脉冲(图8的(A))。在从定时t12到定时t13的时间段中,头戴式显示器20的接收电路21接收表示部分图像P2的图像数据DT2(图8的(B))。输入图像是部分图像P2;因此,显示控制器26进行控制以基于部分图像P2的图像数据和关于部分图像P2的位置的数据,以一个像素PIX为单位驱动布置在与显示面板27中的多个像素PIX的部分图像P2对应的区域中的多个像素PIX。
图10示出驱动像素PIX的操作。在显示面板27中,扫描电路33以一个像素线L的扫描单位US扫描多个像素PIX。此外,像素信号生成电路32将多个像素信号中的每一个施加至与对应于多个信号线SGL的部分图像P2的区域相关的多个信号线SGL中对应的一个。因此,多个像素信号中的每一个被写至与所选择的一个像素线L中的部分图像P2对应的区域相关的多个像素PIX中的对应的一个像素。同时,像素信号不写入与除了与部分图像P2对应的区域之外的区域相关的多个像素PIX。由此,显示面板27以一个像素PIX的单位UD驱动多个像素PIX。
如图8的(C)中的粗线所指示的,扫描电路33以一个像素线L的扫描单位US顺序地在对应于像素阵列31中的部分图像P2的区域中执行扫描。不同于从定时t11至定时t12的时间段,在该时间段中,以一个像素线L的扫描单位US依次进行扫描;因此,扫描速度是从定时t11到定时t12的时间段中的扫描速度的一半。这使得例如在从像素阵列31的底部到顶部顺序地执行扫描的情况下可以将操作频率降低到的操作频率的一半,并且降低功耗。然后,如图8的(C)中的阴影部分所指示的,在该示例中,在像素信号被写入之后,包含像素信号被写入的像素PIX的像素线L中的像素PIX在预定的时间段中发光。此外,在像素信号未被写入的底部附近的像素线L中的像素PIX在与像素信号被首先写入的像素PIX发光的时间段相同的时间段中发光,并且在像素信号未被写入的顶部附近的像素线L中的像素PIX在与像素信号被最后写入的像素PIX发光的时间段相同的时间段中发光。因此,显示面板27显示该显示图像P22(图8的(D))。在显示图像P22中,从定时t11至定时t12写入部分区域R2以外的区域的图像,并且在定时t12至定时t13的时间段中写入部分区域R2的图像。
因此,在从定时t11到定时t13的时间段中,头戴式显示器20基于包含在图像数据DT1和图像数据DT2中的一对整体图像P1和部分图像P2来显示图像。头戴式显示器20首先基于整体图像P1显示该显示图像P21,并且通过重新显示在对应于显示图像P21中的部分图像P2的区域中的图像来基于部分图像P2显示该显示图像P22。用户通过观察显示图像P21来掌握图像的整体,并且通过观察显示图像P22来掌握局部区域中的图像的细节。在延迟方面,由用户掌握整体图像的定时是重要的。在这种情况下,头戴式显示器20的等待时间是例如从图像数据DT1的输入开始的定时t11直至显示面板27的向上/向下方向中间位置的像素PIX开始发光的时间Δt。在该示例中,该时间Δt大约是对应于周期Ts的时间的一半。具体地,例如,在周期Ts为4.2[msec.](=1/240[Hz]))的情况下,可以将时间Δt设置为大约2[msec.]。
即使在此之后,显示系统1也重复从定时tt至定时t13的操作。例如,在从定时t13到定时t14的时间段中,头戴式显示器20的接收电路21接收表示整体图像P1的图像数据DT1(图8的(B))。头戴式显示器20以类似于在从定时t11到定时t12的时间段中的操作的方式,基于图像数据DT1显示该显示图像P21(图8的(C)和(D))。此外,在从定时t14到定时t15的时间段中,头戴式显示器20的接收电路21接收表示部分图像P2的图像数据DT2(图8的(B))。头戴式显示器20基于图像数据DT2以类似于在从定时t12到定时t13的时间段中的操作的方式,显示该显示图像P22(图8的(C)和(D))。
图11示出在头戴式显示器20中的另一显示操作的示例。在这个示例中,由图11的(C)中的阴影部分表示的发光操作不同于图8中的示例。换言之,在图8的示例中,显示面板27根据线顺序扫描定时来发光;然而,在该示例中,整体区域中的像素PIX在相同的定时发光。
例如,在从定时t21到定时t22的时间段中,头戴式显示器20的接收电路21接收表示整体图像P1的图像数据DT1(图11的(B))。输入图像是整体图像P1;因此,显示控制器26进行控制以基于整体图像P1的图像数据以四个像素PIX为单位驱动显示面板27中的多个像素PIX。
在该示例中(图11的(C)),扫描电路33从像素阵列31的底部到顶部以两个像素线L的扫描单位US顺序地执行扫描。然后,如图11的(C)中的阴影部分所指示的,在像素信号被写入到显示面板27中的所有像素PIX的定时,多个像素PIX在预定的时间段中在相同的定时发光。因此,显示面板27显示该显示图像P21(图11的(D))。
例如,在从定时t22到定时t23的时间段中,头戴式显示器20的接收电路21接收表示部分图像P2的图像数据DT2(图11的(B))。输入图像是部分图像P2;因此,显示控制器26进行控制以基于部分图像P2的图像数据和关于部分图像P2的位置的数据,以一个像素PIX为单位驱动布置在与显示面板27中的多个像素PIX的部分图像P2对应的区域中的多个像素PIX。
扫描电路33以一个像素线L的扫描单位US顺序扫描与对应于多个像素PIX的部分图像P2的区域相关的多个像素PIX(图11的(C))。然后,如图11的(C)中的阴影部分所指示的,从像素信号被写入显示面板27中的所有像素PIX的定时起,多个像素PIX在预定的时间段中在相同的定时发光。因此,显示面板27显示该显示图像P22(图11的(D))。
因此,在从定时t21到定时t23的时间段中,头戴式显示器20基于包含在该图像数据DT1和该图像数据DT2中的一对整体图像P1和部分图像P2显示图像。在这种情况下,头戴式显示器20的等待时间是例如从图像数据DT1的输入开始的定时t11直至显示面板27的一半被扫描的时间Δt。这个示例中的时间Δt与对应于周期Ts的时间大约相同。具体地,例如,在周期Ts为4.2[msec.](=1/240[Hz]))的情况下。可以将时间Δt设置为大约4[msec.]。
如上所述,显示系统1接收表示具有低分辨率的整体图像P1的第一图像数据(图像数据DT1)和表示与一部分整体图像P1对应的具有高分辨率的部分图像P2的第二图像数据(图像数据DT2)。然后,执行第一驱动和第二驱动。在第一驱动中,基于第一图像数据(图像数据DT1),以四个像素PIX为单位驱动多个像素PIX。在第二驱动中,基于第二图像数据(图像数据DT2),以一个像素PIX为单位驱动多个像素PIX中的设置在与部分图像P2对应的区域中的两个或更多个像素。因此,显示系统1可以首先基于整体图像P1显示该显示图像P21,并且通过在对应于显示图像P21的部分图像P22的区域中重新显示图像来基于部分图像P2显示该显示图像P22。用户通过观察显示图像P21掌握图像的整体,并且通过观察显示图像P22掌握部分区域P2中的图像的细节。这使得例如可以缩短从图像数据DT1的输入开始的定时到显示面板27的向上/向下方向的中间位置的像素PIX开始发光为止的时间Δt,这使得可以缩短延迟。因此,可以提高显示系统1中的图像质量。
此外,显示系统1基于第二图像数据(图像数据DT2)执行第二驱动,在第二驱动中,以一个像素PIX为单位驱动多个像素PIX中的设置在与部分图像P2对应的区域中的两个或更多个像素。这使得可以在显示系统1中以高分辨率显示用户正在观看的部分,这使得可以提高图像质量。
此外,显示系统1接收表示具有低分辨率的整体图像P1的第一图像数据(图像数据DT1)和表示与一部分整体图像P1对应的具有高分辨率的部分图像P2的第二图像数据(图像数据DT2)。因此,在显示系统1中,如图4B中所示,可以使该图像数据DT1的图像数据量和该图像数据DT2的图像数据量小于具有高分辨率的整体图像的图像数据量。在显示系统1中,这使得可以减小从图像生成装置10至头戴式显示器20的图像信号SP的信号发送中的发送频带。
此外,在显示系统1中,可以以这种方式减小发送频带,使得可以在短时间内发送图像数据DT1和图像数据DT2。因此,在显示系统1中,可以增加帧速率,这使得可以提高图像质量。
另外,显示系统1执行第一驱动和第二驱动,在该第一驱动中,基于第一图像数据(图像数据DT1)以四个像素PIX为单位驱动多个像素PIX;在该第二驱动中,基于第二图像数据(图像数据DT2)以一个像素PIX为单位驱动多个像素PIX中的设置在与部分图像P2对应的区域中的两个或更多个像素。因此,与将整体图像P1和部分图像P2进行预先组合并且显示组合图像的情况不同,不必在显示系统1中设置帧存储器。在以这种方式不设置帧存储器的情况下,例如,可以简化电路配置,并且例如,可以降低成本。
[效果]
如上所述,在本实施方式中,接收表示具有低分辨率的整体图像的第一图像数据和表示与一部分整体图像对应的具有高分辨率的部分图像的第二图像数据。然后,执行第一驱动和第二驱动。在第一驱动中,基于第一图像数据以四个像素为单位驱动多个像素。在第二驱动中,基于第二图像数据,以一个像素为单位驱动多个像素中的设置在与部分图像对应的区域中的两个或更多个像素。这使得可以提高图像质量。
在本实施方式中,执行第二驱动,在该第二驱动中,基于该第二图像数据,以一个像素为单位驱动多个像素中的设置在与部分图像对应的区域中的两个或更多个像素,这使得可以提高图像质量。
在本实施方式中,接收表示具有低分辨率的整体图像的第一图像数据和表示与一部分整体图像对应的具有高分辨率的部分图像的第二图像数据,这使得可以提高图像质量。
[变形例1]
在本实施方式中,图像生成电路11基于眼睛跟踪传感器23的检测结果生成部分图像P2,但这不是限制性的。以下详细描述本变形例。
图12示出显示系统1A的配置示例。显示系统1A包括图像生成装置10A和头戴式显示器20A。
图像生成装置10A包括图像生成电路11A。图像生成电路11A基于包括在从接收电路13提供的数据中的加速度传感器22的检测结果,生成表示对应于虚拟空间中的头戴式显示器20的方向的场景的整体图像P1。此外,图像生成电路11A生成包括图像在整体图像P1中改变的部分的部分图像P2。
图13示出了整体图像P1的示例。在该示例中,人物9的图像在整体图像P1中移动。图像生成电路11A基于整体图像P1确定包括变化图像的部分区域R2。然后,图像生成电路11A生成与部分区域R2相关的部分图像P2。换言之,用户很可能观看显示图像的改变部分;因此,图像生成电路11A生成关于改变部分的部分图像P2。图像生成电路11A然后将生成的整体图像P1的图像数据、部分图像P2的图像数据和关于部分图像P2在整体图像P1中的位置的数据提供至发送电路12。
头戴式显示器20A(图12)包括接收电路21、加速度传感器22、处理器24A、发送电路25、显示控制器26和显示面板27。换言之,在根据本变形例的头戴式显示器20A中,眼睛跟踪传感器23被省略,并且处理器24被改变成处理器24A。处理器24A例如基于从接收电路21提供的多个图像数据DT1和DT2来执行预定的图像处理,并且将包括在该图像数据DT1中的整体图像P1的图像数据、包括在该图像数据DT2中的部分图像P2的图像数据以及与包括在该图像数据DT2中的部分图像P2的位置相关的数据提供至显示控制器26。另外,处理器24A将加速度传感器22的检测结果提供至发送电路25,并且使发送电路25发送这些检测结果。
[变形例2]
在上述实施方式中,显示了由图像生成电路11生成的图像,但这不是限制性的。例如,如在图14中示出的显示系统1B,可以通过同时显示由图像传感器28B捕获的图像来实现所谓的视频透视。显示系统1B包括头戴式显示器20B。头戴式显示器20B包括图像传感器28B和处理器24B。
图像传感器28B被配置为用于捕获例如佩戴头戴式显示器20B的用户的前侧的图像。处理器24B基于从接收电路21提供的多个图像数据DT1和DT2以及由图像传感器28B生成的捕获图像来执行预定的图像处理,并且将整体图像的图像数据、部分图像的图像数据以及关于部分图像的位置的数据提供至显示控制器26。
[变形例3]
在上述实施方式中,在显示整体图像P1的情况下,以四个像素PIX为单位驱动显示面板27中的多个像素PIX,但这不是限制性的。替代地,例如,如图15和图16中所示,可以以任意不同数量的像素PIX为单位驱动多个像素PIX。例如,可以以在水平方向上并排设置的两个(2×1)像素PIX为单位来驱动像素PIX,可以以在水平方向上包括四个像素PIX并且在垂直方向上包括两个像素PIX的八个(4×2)像素为单位来驱动像素PIX,或者可以以在水平方向上包括八个像素PIX并且在垂直方向上包括四个像素的32(8×4)个像素PIX为单位来驱动像素PIX。可替代地,例如,可以以在垂直方向上并排布置的两个(1×2)像素PIX为单位来驱动像素PIX,可以以在水平方向上包括两个像素并且在垂直方向上包括四个像素PIX的八个(2×4)像素PIX为单位来驱动像素PIX,或者可以以在水平方向上包括四个像素PIX并且在垂直方向上包括八个像素PIX的32(4×8)个像素为单位来驱动像素PIX。可替代地,例如,可以以在水平方向上包括两个像素PIX并且在垂直方向上包括两个像素PIX的四(2×2)个像素PIX为单位来驱动像素PIX,可以以在水平方向上包括四个像素PIX并且在垂直方向上包括四个像素PIX的16(4×4)个像素PIX为单位来驱动像素PIX,或者可以以在水平方向上的八个像素PIX以及在垂直方向上的八个像素PIX中以64(8×8)个像素PIX为单位来驱动像素PIX。应注意,在该示例中,以偶数个像素PIX为单位来驱动像素PIX,但是这不是限制性的。例如,可以以奇数个像素PIX为单位来驱动像素PIX。
以这种方式,以多个像素PIX为单位驱动像素PIX使得可以减小发送频带。换句话说,假设在以一个像素PIX为单位驱动像素PIX的情况下的频带使用率为100%,例如,与上述实施方式一样,在以四(2×2)个像素PIX为单位驱动像素PIX的情况下,整体图像P1中的像素的数量变为1/4,这使得频带使用率变为25%。此外,例如,在以16(4×4)个像素PIX为单位驱动像素PIX的情况下,整体图像P1中的像素的数量变为1/16,这使得频带使用率变为6.25%。
用户通过观察显示图像P21来掌握图像的整体,并且通过观察显示图像P22来掌握正在注视的部分区域R2中的图像的细节。以这种方式,用户不注视整体图像P1;因此,即使以多个像素PIX为单位驱动像素PIX,也难以感知图像质量的下降。因此,在根据本变形例的显示系统中,例如,适当地设置像素PIX的数量作为驱动单位使得可以在抑制图像质量下降的同时减小发送频带。
[变形例4]
在上述实施方式中,如图4B中所示,部分图像P2的水平像素数量比是50%,并且部分图像P2的垂直像素数量比是50%,但这不是限制性的。替代地,可以将部分图像P2的水平像素数量比和垂直像素数量比设置为任意的各种值。
例如,如图17和图18中所示,考虑到人的视野在横向方向上较宽,部分图像P2的水平像素数量比可以大于垂直像素数量比。
图19至图21示出了部分图像P2的水平像素数量比是100%并且垂直像素数量比是50%的示例。图19示出整体图像P1和部分图像P2。图20示意性地示出整体图像P1和部分图像P2的多个图像数据。图21示出显示操作的示例。
如图20中所示,部分图像P2在水平方向上的像素数(水平像素数)是具有高分辨率的整体图像的水平像素数的100%,并且部分图像P2在垂直方向上的像素数(垂直像素数)是具有高分辨率的整体图像的垂直像素数的50%。同时,整体图像P1类似于上述实施方式(图4B)中的图像。
如图21中所示,在从定时t31到定时t32的时间段中,头戴式显示器20的接收电路21接收如图20中所示的表示整体图像P1的图像数据DT1(图21的(B))。与上述实施方式(图8和图9)的情况一样,该头戴式显示器20基于图像数据DT1显示该显示图像P21(图21的(C)和(D))。此外,在从定时t32到定时t33的时间段中,接收电路21接收如图20中所示的表示部分图像P2的图像数据DT2(图21的(B))。如同上述实施方式的情况(图8和图10),该头戴式显示器20基于该图像数据DT2显示该显示图像P22(图21的(C)和(D))。
如图21中所示,在显示系统中,在从定时t31到定时t32的时间段中,发送表示整体图像P1的图像数据DT1,并且在从定时t32到定时t33的时间段中,发送表示部分图像P2的图像数据DT2。如图20中所示,部分图像P2的图像数据量大于整体图像P1的图像数据量;因此,发送频带由表示部分图像P2的图像数据DT2确定。因此,如图18中所示,以这种方式,在部分图像P2的水平像素数量比是100%并且垂直像素数量比是50%的情况下,频带使用率是100%。
图22至图24示出部分图像P2的水平像素数量比是75%并且垂直像素数量比是50%的示例。图19示出整体图像P1和部分图像P2。图20示意性地示出整体图像P1和部分图像P2的多个图像数据。图21示出显示操作的示例。
如图23中所示,部分图像P2的水平方向上的像素数(水平像素数)是具有高分辨率的整体图像的水平像素数的75%,并且部分图像P2的垂直方向上的像素数(垂直像素数)是具有高分辨率的整体图像的垂直像素数的50%。同时,整体图像P1类似于上述实施方式(图4B)中的图像。
如图24中所示,在从定时t41到定时t42的时间段中,头戴式显示器20的接收电路21接收如图23中所示的表示整体图像P1的图像数据DT1(图24的(B))。与上述实施方式(图8和图9)的情况一样,该头戴式显示器20基于图像数据DT1显示该显示图像P21(图24的(C)和(D))。此外,在从定时t42到定时t43的时间段中,接收电路21接收如图23中所示的表示部分图像P2的图像数据DT2(图24的(B))。如同上述实施方式的情况(图8和图10),该头戴式显示器20基于该图像数据DT2显示该显示图像P22(图24的(C)和(D))。
即使在该示例中,如图23中所示,部分图像P2的图像数据量大于整体图像P1的图像数据量;因此,发送频带由表示部分图像P2的图像数据DT2确定。因此,如图18中所示,在以这种方式部分图像P2的水平像素数量比是75%并且垂直像素数量比是50%的情况下,频带使用率是75%。在该示例中,可以减小发送频带。
在以上示例中,部分图像P2的水平像素数量比大于垂直像素数量比,但这不是限制性的。替代地,例如,部分图像P2的垂直像素数量比可以大于水平像素数量比。
此外,例如,如图25和图26中所示,例如,当部分图像P2的水平像素数量比和垂直像素数量比彼此相等时,可以改变水平像素数量比和垂直像素数量比。
应注意,在图19至图21中示出的示例中,在从定时t31到定时t32的时间段中,存在剩余发送频带。在从定时t31到定时t32的时间段中,可以有效地使用这种剩余发送频带,并且可以提高整体图像P1的分辨率,如下所述。
图27至图29示出在部分图像P2的水平像素数量比是100%并且垂直像素数量比是50%的情况下对整体图像P1的分辨率进行提高的示例。图27示意性地示出整体图像P1和部分图像P2的多个图像数据。图28示出显示操作的示例。图29示出驱动像素PIX的操作。
如图27中所示,整体图像P1在水平方向上的像素数(水平像素数)是具有高分辨率的整体图像的水平像素数的100%,并且整体图像P1在垂直方向上的像素数(垂直像素数)是具有高分辨率的整体图像的垂直像素数的50%。在该示例中,整体图像P1在水平方向上的分辨率提高至图20中的示例中的分辨率的两倍。
如图28中所示,在从定时t51到定时t52的时间段中,头戴式显示器20的接收电路21接收如图27中所示的表示整体图像P1的图像数据DT1(图28的(B))。输入图像是整体图像P1;因此,显示控制器26进行控制以基于整体图像P1的图像数据以两个像素PIX为单位驱动显示面板27中的多个像素PIX。
如图29中所示,在显示面板27中,扫描电路33以两个像素线L的扫描单位US扫描多个像素PIX。此外,像素信号生成电路32将多个像素信号中的每一个施加至多个信号线SGL中对应的一个。因此,相同的像素信号被写入所选择的两个像素线L中的两个像素PIX。由此,显示面板27以两个像素PIX的单位UD驱动多个像素PIX。
如由图28的(C)中的粗线所指示的,在该示例中,扫描电路33从像素阵列31的底部到顶部以两个像素线L的扫描单位顺序地执行扫描。然后,如图28的(C)中的阴影部分所指示的,在该示例中,在像素信号被写入之后,像素信号被写入的像素PIX在预定的时间段中发光。因此,显示面板27显示该显示图像P21(图28的(D))。
此外,在从定时t52到定时t53的时间段中,接收电路21接收如图27中所示的表示部分图像P2的图像数据DT2(图28的(B))。与上述实施方式的情况(图8和图10)一样,头戴式显示器20基于该图像数据DT2显示该显示图像P22(图28的(C)和(D))。
[变形例5]
在上述实施方式中,交替地发送表示整体图像P1的图像数据DT1和表示部分图像P2的图像数据DT2,但是这不是限制性的。例如,如图30中所示,要发送的图像数据可以基于加速度传感器22的检测结果和眼睛跟踪传感器23的检测结果而改变。在该显示系统1中,基本上交替发送表示整体图像P1的图像数据DT1和表示部分图像P2的图像数据DT2。在该示例中,在时间段Tmotion中,用户显著改变头部方向。加速度传感器22检测诸如头戴式显示器20的方向的运动。然后,头戴式显示器20的发送电路25将包括加速度传感器22的检测结果的检测信号SD发送至图像生成装置10。图像生成装置10的接收电路13接收该检测信号SD,并且图像生成电路11基于加速度传感器22的检测结果在头戴式显示器20的方向继续改变的时间段Tmotion中继续重复地生成整体图像P1。发送电路12基于整体图像P1的图像数据来生成表示整体图像P1的图像数据DT1,并发送包含该图像数据DT1的图像信号SP。即,图像生成装置10的发送电路12在时间段Tmotion中继续重复发送表示图像P1整体的图像数据DT1。头戴式显示器20的接收电路21接收图像数据DT1。然后,头戴式显示器20基于图像数据DT1显示包括整体图像P1的显示图像P21。换言之,头戴式显示器20在时间段Tmotion中继续重复显示包括整体图像P1的显示图像P21。然后,在用户停止头部方向的情况下,时间段Tmotion结束,并且显示系统1交替地发送表示整体图像P1的图像数据DT1和表示部分图像P2的图像数据DT2。因此,在用户移动其头部的情况下,可以以低延迟观看包括对应于头部的运动的整体图像P1的显示图像P21,这使得可以降低用户感到恶心的可能性。
要注意的是,在该示例中,在用户大幅改变头部方向的情况下,显示系统1重复发送表示整体图像P1的图像数据DT1,但是这并非限制性的。替代地,例如,在用户明显改变用户观看显示图像的部分的情况下,可以重复发送表示整体图像P1的图像数据DT1。在这种情况下,显示系统1基于眼睛跟踪传感器23的检测结果重复发送表示整体图像P1的图像数据DT1。
[变形例6]
在上述实施方式中,交替地发送一个图像数据DT1和一个图像数据DT2,但是这不是限制性的。例如,可以交替地发送一个图像数据DT1和多个图像数据DT2。此外,图像数据DT2的个数可以是可变的。以下,详细说明交替发送1个图像数据DT1和三个图像数据DT2的示例。
图31示出根据本变形例的头戴式显示器20中的显示操作的示例,其中(A)指示同步信号Vsync的波形,(B)指示输入图像,(C)指示显示面板27的操作,以及(D)指示将要显示在显示面板27上的显示图像。在周期Ts中提供整体图像P1和部分图像P2中的每一个。周期Ts例如为4.2[msec.](=1/240[Hz])。
在从定时t61到定时t62的时间段中,头戴式显示器20的接收电路21接收表示整体图像P1的图像数据DT1(图31的(B))。与上述实施方式(图8和图9)的情况一样,头戴式显示器20基于图像数据DT1显示该显示图像P21(图31的(C)和(D))。此外,在从定时t62到定时t63的时间段中,接收电路21接收表示部分图像P2的图像数据DT2(图31的(B))。与上述实施方式的情况(图8和图10)一样,头戴式显示器20基于该图像数据DT2(图31的(C)和(D))来显示该显示图像P22。此外,在从定时t63到定时t64的时间段中,接收电路21接收表示部分图像P2的图像数据DT2(图31的(B))。与上述实施方式的情况(图8和图10)一样,头戴式显示器20基于该图像数据DT2显示该显示图像P22(图31的(C)和(D))。此外,在从定时t64到定时t65的时间段中,接收电路21接收表示部分图像P2的图像数据DT2(图31的(B))。与上述实施方式的情况(图8和图10)一样,头戴式显示器20基于该图像数据DT2显示该显示图像P22(图31的(C)和(D))。
图32示出根据本变形例的头戴式显示器20中的另一显示操作的示例。在该示例中,与图11中的示例一样,在显示面板27中,整体区域中的像素PIX在相同的定时发光。
在本变形例中,与其中交替地生成整体图像P1和部分图像P2的上述实施方式的情况相比,部分图像P2的生成频率高。图像生成电路11在生成部分图像P2时不必对部分图像P2外部的图像执行渲染处理。因此,在本变形例中,可以进一步降低功耗。此外,例如,在三个部分图像P2被制成同一图像的情况下,图像生成电路11可以减少部分图像P2的生成次数,这使得可以降低功耗。
[变形例7]
在上述实施方式中,提供了两个子帧(整体图像P1和部分图像P2),但这不是限制性的。替代地,可以提供三个或更多个子帧。下面详细描述提供三个子帧的示例。
根据本变形例的图像生成电路11基于包含在从接收电路13提供的数据中的加速度传感器22的检测结果,生成表示对应于虚拟空间中的头戴式显示器20的方向的场景的整体图像P1。此外,图像生成电路11基于包括在从接收电路13提供的数据中的眼睛跟踪传感器23的检测结果,生成各自表示用户正在观看与虚拟空间中的头戴式显示器20的方向对应的一部分场景的部分图像P2和P3。
图33示出在头戴式显示器20上显示的显示图像P20的示例。图像生成电路11基于包含在从接收电路13提供的数据中的眼睛跟踪传感器23的检测结果,确定包括显示图像P20的整体区域R1中的用户正在观看的部分的部分区域R2和R3。在该示例中,部分区域R2在水平方向(图33中的横向方向)上的尺寸是整体区域R1在水平方向上的尺寸的一半,并且部分区域R2在垂直方向(图33中的纵向方向)上的尺寸是整体区域R1在垂直方向上的尺寸的一半。换言之,部分区域R2的面积是整体区域R1的面积的1/4。此外,在该示例中,部分区域R3在水平方向上的尺寸是部分区域R2在水平方向上的尺寸的一半,并且部分区域R3在垂直方向上的尺寸是部分区域R2在垂直方向上的尺寸的一半。换言之,部分区域R3的面积是部分区域R2的面积的1/4。在该示例中,部分区域R3的中心位置与部分区域R2的中心位置相同。
图34示出由图像生成电路11生成的整体图像P1以及部分图像P2和P3的示例。整体图像P1是具有低分辨率的整体区域R1的图像(图33)。部分图像P2是具有中等分辨率的部分区域R2的图像。部分图像P3是具有高分辨率的部分区域R3的图像。在该示例中,整体图像P1中的每个像素对应于头戴式显示器20中的16个像素PIX。部分图像P2中的每个像素对应于头戴式显示器20中的四个像素PIX。部分图像P3中的每个像素对应于头戴式显示器20中的一个像素PIX。在该示例中,整体图像P1中的像素的数量、部分图像P2中的像素的数量以及部分图像P3中的像素的数量彼此相等。
图35示意性地示出整体图像P1以及部分图像P2和P3的多个图像数据。图35中表示整体的图像数据指示在多个像素值中的每个像素值被写入头戴式显示器20中的多个像素PIX中的对应像素的情况下可用的具有高分辨率的整体图像的图像数据。
整体图像P1的水平方向上的像素的数量(水平像素数)是图35中示出的具有高分辨率的整体图像的水平像素数的25%,并且整体图像P1的垂直方向上的像素的数量(垂直像素数)是具有高分辨率的整体图像的垂直像素数的25%。换言之,整体图像P1的水平像素数量比是25%,并且整体图像P1的垂直像素数量比是25%。
部分图像P2在水平方向上的像素数(水平像素数)是具有高分辨率的整体图像的水平像素数的25%,并且部分图像P2在垂直方向上的像素数(垂直像素数)是具有高分辨率的整体图像的垂直像素数的25%。换言之,部分图像P2的水平像素数量比是25%,并且部分图像P2的垂直像素数量比是25%。
部分图像P3在水平方向上的像素数(水平像素数)是具有高分辨率的整体图像的水平像素数的25%,并且部分图像P3在垂直方向上的像素数(垂直像素数)是具有高分辨率的整体图像的垂直像素数的25%。换言之,部分图像P3的水平像素数量比是25%并且部分图像P3的垂直像素数量比是25%。
因此,在该示例中,整体图像P1以及部分图像P2和P3的水平像素数量比彼此相等,并且整体图像P1以及部分图像P2和P3的垂直像素数量比彼此相等。此外,整体图像P1以及部分图像P2和P3的总数据量是具有高分辨率的整体图像的数据量的3/16。
图36示出根据本变形例的头戴式显示器20中的显示操作的示例。头戴式显示器20依次循环接收表示整体图像P1的图像数据DT1、表示部分图像P2的图像数据DT2以及表示部分图像P3的图像数据DT3。
在头戴式显示器20接收该图像数据DT1的情况下,显示控制器26执行控制以基于该图像数据DT1中包括的整体图像P1的图像数据以16个像素PIX为单位驱动显示面板27中的多个像素PIX。因此,显示面板27显示包括具有低分辨率的整体图像P1的显示图像P21。
在头戴式显示器20接收图像数据DT2的情况下,显示控制器26执行控制以基于图像数据DT2中包括的部分图像P2的图像数据和关于部分图像P2的位置的数据,以四个像素PIX为单位驱动布置在显示面板27中与多个像素PIX中的部分图像P2对应的区域中的多个像素PIX。在这种情况下,除了对应于显示面板27中的多个像素PIX的部分图像P2的区域之外的区域中的多个像素PIX保持显示。因此,显示面板27显示包括具有中等分辨率的部分图像P2的显示图像P22。
在头戴式显示器20接收该图像数据DT3的情况下,显示控制器26执行控制以基于包含在该图像数据DT3中的部分图像P3的图像数据和关于部分图像P3的位置的数据,以一个像素PIX为单位驱动布置在对应于显示面板27中的多个像素PIX的部分图像P3的区域中的多个像素PIX。在这种情况下,在显示面板27中的多个像素PIX的除了与部分图像P3对应的区域以外的区域中的多个像素PIX保持显示。因此,显示面板27显示包括具有低分辨率的部分图像P3的显示图像P23。
图37示出头戴式显示器20中的更具体的显示操作的示例。
在从定时t71到定时t72的时间段中,头戴式显示器20的接收电路21接收表示整体图像P1的图像数据DT1(图37的(B))。输入图像是整体图像P1;因此,显示控制器26执行控制以基于整体图像P1的图像数据以16个像素PIX为单位驱动显示面板27中的多个像素PIX。
在显示面板27中,扫描电路33以四个像素线L的扫描单位扫描多个像素PIX。此外,像素信号生成电路32将相同的像素信号施加至四条信号线SGL。因此,相同的像素信号被写入所选择的四个像素线L中的16个像素PIX。由此,显示面板27以16个像素PIX为单位驱动多个像素PIX。
如图37的(C)中的粗线所指示的,在该示例中,扫描电路33从像素阵列31的底部至顶部以八个像素线L的扫描单位顺序地执行扫描。然后,如图37的(C)中的阴影部分所指示的,在将像素信号写入到显示面板27中的所有像素PIX的定时,多个像素PIX在预定的时间段中以相同的定时发光。因此,显示面板27显示该显示图像P21(图37的(D))。
接下来,在从定时t72到定时t73的时间段中,头戴式显示器20的接收电路21接收表示部分图像P2的图像数据DT2(图37的(B))。输入图像是部分图像P2;因此,显示控制器26基于部分图像P2的图像数据和关于部分图像P2的位置的数据,以四个像素PIX为单位,对布置在与显示面板27中的多个像素PIX的部分图像P2对应的区域中的多个像素PIX进行驱动。
在显示面板27中,扫描电路33以两个像素线L的扫描单位扫描多个像素PIX。此外,像素信号生成电路32将相同的像素信号施加至与对应于多个信号线SGL的部分图像P2的区域相关的多个信号线SGL中的两个信号线SGL。因此,相同的像素信号被写入所选择的两个像素线L中的四个像素PIX。由此,显示面板27以四个像素PIX为单位驱动多个像素PIX。
如图37的(C)中的粗线所指示的,扫描电路33以两个像素线L的扫描单位在对应于像素阵列31的部分图像P2的区域中依次执行扫描。然后,如图37的(C)中的阴影部分所指示的,在将像素信号写入到显示面板27中的所有像素PIX的定时,多个像素PIX在预定的时间段中以相同的定时发光。因此,显示面板27显示该显示图像P22(图37的(D))。
接下来,在从定时t73到定时t74的时间段中,头戴式显示器20的接收电路21接收表示部分图像P2的图像数据DT3(图37的(B))。输入图像是部分图像P3;因此,显示控制器26进行控制以基于部分图像P3的图像数据和关于部分图像P3的位置的数据,以一个像素PIX为单位驱动布置在与显示面板27中的多个像素PIX的部分图像P2对应的区域中的多个像素PIX。
在显示面板27中,扫描电路33以一个像素线L的扫描单位扫描多个像素PIX。此外,像素信号生成电路32将多个像素信号的每一个施加至与对应于多个信号线SGL的部分图像P3的区域相关的多个信号线SGL中对应的一个。由此,显示面板27以一个像素PIX为单位驱动多个像素PIX。
如由图37的(C)中的粗线所指示的,扫描电路33以一个像素线L的扫描单位在对应于像素阵列31的部分图像P3的区域中顺序地执行扫描。然后,如图37的(C)中的阴影部分所指示的,在像素信号被写入到显示面板27中的所有像素PIX的定时,多个像素PIX在预定的时间段中以相同的定时发光。因此,显示面板27显示该显示图像P23(图37的(D))。
图38示出根据上述实施方式的显示系统1和根据本变形例的显示系统1中的频带使用率。在如同上述实施方式的子帧数为2的情况下,如图4B中所示,整体图像P1和部分图像P2的总数据量是具有高分辨率的整体图像的数据量的50%;因此,频带使用率是50%。同时,在如同本变形例的子帧数为3的情况下,如图35中所示,整体图像P1以及部分图像P2和P3的总数据量是具有高分辨率的整体图像的数据量的3/16;因此,频带使用率为19%。因此,在本变形例中,可以降低频带使用率。此外,可以降低操作频率,这使得可以降低功耗。
[变形例8]
在上述实施方式中,在不压缩的情况下发送整体图像P1的图像数据和部分图像P2的图像数据,但是这不是限制性的。例如,可以压缩整体图像P1的图像数据和部分图像P2的图像数据。以下详细描述根据本变形例的显示系统C1。
图39示出显示系统1C的配置示例。显示系统1C包括图像生成装置10C和头戴式显示器20C。
图像生成装置10C包括图像生成电路11C。图像生成电路11C包括图像压缩电路19C。图像压缩电路19C例如对整体图像P1和部分图像P2中的一者或两者进行压缩。图像压缩电路19C能够设定是否以子帧为单位进行压缩。另外,在执行压缩的情况下,图像压缩电路19C能够以子帧为单位设定压缩比。例如,在MIPI用于通信的情况下,可以在MIPI中使用VESA(视频电子标准协会)-DSC(显示流压缩)。
头戴式显示器20C包括处理器24C。处理器24C包括图像解压缩电路29C。图像解压缩电路29C被配置为对由图像压缩电路19C进行压缩的图像进行解压缩。
例如,如图20中所示,在部分图像P2的水平像素数量比是100%并且垂直像素数量比是50%的情况下,部分图像P2的数据量大于整体图像P1的数据量。在这种情况下,在发送频带中出现浪费。因此,在显示系统1C中,图像压缩电路19C压缩部分图像P2,这使得与图20中的情况相比可以减少部分图像P2的图像数据的数据量,如图40中所示。在图40中,阴影部分指示压缩图像。在该示例中,图像压缩电路19C以50%的压缩率压缩部分图像P2。结果,可以减小发送频带。通过图像解压缩电路29C对经压缩的部分图像P2进行解压缩。头戴式显示器20C基于解压的部分图像P2显示与图20中的情况相似的图像。
[变形例8]
在上述实施方式中,在头戴式显示器20C中设置加速度传感器22和眼睛跟踪传感器23,但是这不是限制性的。例如,如图41中所示的显示系统1D,可以不设置这些传感器。显示系统1D包括图像生成装置10D和头戴式显示器20D。图像生成器件10D包括图像生成电路11D。图像生成电路11D生成要在头戴式显示器20D上显示的整体图像P1。此外,图像生成电路11D生成包括在整体图像P1中改变的图像的一部分的部分图像P2。头戴式显示器20D包括处理器24D。处理器24D基于从接收电路21提供的多个图像数据DT1和DT2来执行例如预定的图像处理,并且将包括在该图像数据DT1中的整体图像P1的图像数据、包括在该图像数据DT2中的部分图像P2的图像数据以及关于包括在该图像数据DT2中的部分图像P2的位置的数据提供至显示控制器26。
[变形例9]
上述实施方式可应用于如图42A至图42C中所示的不同颜色系统。
例如,如在情况C1(图42A)中所示出的,可以应用到RGB系统。在该示例中,整体图像P1的红色图像(R)、绿色图像(G)和蓝色图像(B)是具有低分辨率的图像。显示面板27基于这些图像以布置成两行和两列的四个像素PIX为单位执行与整体图像P1相关的显示驱动操作。此外,部分图像P2的红色图像(R)、绿色图像(G)和蓝色图像(B)是具有高分辨率的图像。显示面板27基于这些图像以一个像素PIX为单位执行与整体图像P2有关的显示驱动操作。在这种情况下,频带使用率是50%,如上述实施方式的情况(图4)。
此外,例如,如情况C2至情况C5所示,可以应用到使用亮度信号和色差信号的YUV系统。
例如,在情况C2(图42A)中所示的示例中,整体图像P1的亮度图像(Y)、第一色差图像(U)和第二色差图像(V)是具有低分辨率的图像。显示控制器26基于这些图像生成各自具有低分辨率的红色图像(R)、绿色图像(G)和蓝色图像(B),并且显示面板27基于所生成的图像以布置成两行和两列的四个像素PIX为单位执行与整体图像P1相关的显示驱动操作。此外,部分图像P2的亮度图像(Y)、第一色差图像(U)和第二色差图像(V)是具有高分辨率的图像。显示控制器26基于这些图像生成各自具有高分辨率的红色图像(R)、绿色图像(G)和蓝色图像(B),并且显示面板27基于所生成的图像以一个像素PIX为单位执行与部分图像P2有关的显示驱动操作。在这种情况下,频带使用率是50%,与上述实施方式的情况(图4)一样。
例如,在情况C3(图42B)中示出的示例中,整体图像P1的亮度图像(Y)、第一色差图像(U)和第二色差图像(V)是具有低分辨率的图像。显示控制器26基于这些图像生成各自具有低分辨率的红色图像(R)、绿色图像(G)和蓝色图像(B),并且显示面板27基于所生成的图像以布置成两行和两列的四个像素PIX为单位执行与整体图像P1相关的显示驱动操作。此外,部分图像P2的亮度图像(Y)是具有高分辨率的图像,并且第一色差图像(U)和第二色差图像(V)是具有低分辨率的图像。换言之,亮度对人的可见度较高,但色差对人的可见度较低;因此,亮度图像具有高分辨率,并且色差图像具有低分辨率。显示控制器26基于这些图像生成各自具有高分辨率的红色图像(R)、绿色图像(G)和蓝色图像(B),并且显示面板27基于所生成的图像以一个像素PIX为单位执行与部分图像P2有关的显示驱动操作。这种情况下的频带使用率是37.5%。
例如,在情况C4(图42B)中所示的示例中,整体图像P1的亮度图像(Y)是具有低分辨率的图像,并且第一色差图像(U)和第二色差图像(V)是具有更低分辨率的图像。在该示例中,第一色差图像(U)和第二色差图像(V)中的每一个的像素对应于八个(4×2)像素PIX。显示控制器26基于这些图像生成均具有低分辨率的红色图像(R)、绿色图像(G)和蓝色图像(B),并且显示面板27基于所生成的图像以布置成两行和两列的四个像素PIX为单位执行与整体图像P1相关的显示驱动操作。此外,部分图像P2的亮度图像(Y)是具有高分辨率的图像,并且第一色差图像(U)和第二色差图像(V)是具有中等分辨率的图像。在该示例中,第一色差图像(U)和第二色差图像(V)中的每一个的像素对应于两个(2×1)像素PIX。显示控制器26基于这些图像生成均具有高分辨率的红色图像(R)、绿色图像(G)和蓝色图像(B),并且显示面板27基于所生成的图像以一个像素PIX为单位执行与部分图像P2有关的显示驱动操作。这种情况下的频带使用率为33.3%。
例如,在情况C5(图42C)中示出的示例中,整体图像P1的亮度图像(Y)是具有低分辨率的图像,并且第一色差图像(U)和第二色差图像(V)是具有更低分辨率的图像。在该示例中,第一色差图像(U)和第二色差图像(V)中的每一个的像素对应于16(4×4)个像素PIX。显示控制器26基于这些图像生成均具有低分辨率的红色图像(R)、绿色图像(G)和蓝色图像(B),并且显示面板27基于所生成的图像以布置成两行和两列的四个像素PIX为单位执行与整体图像P1相关的显示驱动操作。此外,部分图像P2的亮度图像(Y)是具有高分辨率的图像,并且第一色差图像(U)和第二色差图像(V)是具有中等分辨率的图像。显示控制器26基于这些图像生成均具有高分辨率的红色图像(R)、绿色图像(G)和蓝色图像(B),并且显示面板27基于所生成的图像以一个像素PIX为单位执行与部分图像P2有关的显示驱动操作。这种情况下的频带使用率为25%。
[变形例10]
在上述实施方式中,使用图6中所示的显示面板27,但这不是限制性的。以下详细描述根据本变形例的显示面板27E。
图43示出显示面板27E的配置示例。显示面板27E包括像素阵列31E、像素信号生成电路32、扫描电路33以及驱动电路34E。
像素阵列31E包括多个信号线SGL、多个控制线CTL、多个控制线WSEN和多个像素PIX。多个控制线WSEN在垂直方向(图43中的纵向方向)上延伸,并且在水平方向(图43中的横向方向)上并排设置。多个控制线WSEN各自将由驱动电路34E生成的控制信号提供至像素PIX。
驱动电路34E被配置为生成控制信号并且将生成的控制信号施加至多个控制线WSEN,从而对由像素信号生成电路32生成的像素信号将要被写入的像素PIX执行控制以确定像素信号将要被写入多个像素PIX中的哪个像素PIX。
图44示出像素PIX的配置示例。包括该像素PIX的像素阵列包括控制线WSL。图43中所示的控制线CTL包括该控制线WSL。像素PIX包括晶体管MN01至MN03、电容器C01和发光元件EL。晶体管MN01至MN03是N型MOSFET(金属氧化物半导体场效应晶体管)。晶体管MN01具有耦接至控制线WSEN的栅极、耦接至信号线SGL的漏极、以及耦接至晶体管MN02的漏极的源极。晶体管MN02具有耦接至控制线WSL的栅极、耦接至晶体管MN01的源极的漏极、以及耦接至晶体管MN03的栅极和电容器C01的源极。电容器C01的一端耦接至晶体管MN02的源极和晶体管MN03的栅极,并且另一端耦接至晶体管MN03的源极和发光元件EL的阳极。晶体管MN03具有耦接至晶体管MN02的源极和电容器C01的一端的栅极、耦接至电源线VCCP的漏极、以及耦接至电容器C01的另一端和发光元件EL的阳极的源极。例如,发光元件EL是有机EL发光元件,并且具有耦接至晶体管MN03的源极和电容器C01的另一端的阳极以及耦接至电源线Vcath的阴极。
利用该配置,在像素PIX中,晶体管MN01和MN02导通,从而基于从信号线SGL提供的像素信号来设置电容器C01的两端之间的电压。晶体管MN03使与电容器C01的两端之间的电压对应的电流流入发光元件EL。发光元件EL基于从晶体管MN03提供的电流而发光。因此,像素PIX发射具有与像素信号对应的亮度的光。
如图8中所示,在从定时t11到定时t12的时间段中,头戴式显示器20的接收电路21接收表示整体图像P1的图像数据DT1(图8的(B))。输入图像是整体图像P1;因此,显示控制器26进行控制以基于整体图像P1的图像数据以四个像素PIX为单位驱动显示面板27E中的多个像素PIX。如图9中所示,从定时t11至定时t12,显示面板27的扫描电路33以两个像素线L的扫描单位US扫描多个像素PIX。驱动电路34E将所有控制线WSEN设置为有效(高电平)。像素信号生成电路32将相同的像素信号施加至彼此相邻的两个信号线SGL。因此,相同的像素信号被写入所选择的两个像素线L中的四个像素PIX。由此,显示面板27E以四个像素PIX的单位UD驱动多个像素PIX。
此外,如图8中所示,在从定时t12到定时t13的时间段中,头戴式显示器20的接收电路21接收表示部分图像P2的图像数据DT2(图8的(B))。输入图像是部分图像P2;因此,显示控制器26执行控制以基于部分图像P2的图像数据和关于部分图像P2的位置的数据,以一个像素PIX为单位驱动配置在与显示面板27E中的多个像素PIX中的部分图像P2对应的区域中的多个像素PIX。如图10中所示,从定时t12至定时t13,显示面板27E的扫描电路33以一个像素线L的扫描单位US扫描多个像素PIX。驱动电路34E将与对应于部分图像P2的区域相关的多个控制线WSEN设置为有效(高电平),并且将多个其他控制线WSEN设置为无效(低电平)。像素信号生成电路32将多个像素信号的每一个施加至与对应于多个信号线SGL的部分图像P2的区域相关的多个信号线SGL中对应的一个。因此,多个像素信号中的每一个被写至与对应于所选择的一个像素线L中的部分图像P2的区域相关的多个像素PIX中对应的一个像素。同时,像素信号不被写入与除了与部分图像P2对应的区域之外的区域相关的多个像素PIX。由此,显示面板27E以一个像素PIX的单位UD驱动多个像素PIX。
像素PIX的配置不限于图44中的示例。下面描述像素PIX的配置的一些示例。
图45示出像素PIX的另一个配置示例。包括该像素PIX的像素阵列包括控制线WSL、控制线DSL和控制线AZSL。图43中所示的控制线CTL包括控制线WSL、DSL和AZSL。该像素PIX包括晶体管MP11和MP12、电容器C11和C12、晶体管MP13至MP15以及发光元件EL。晶体管MP11至MP15是P型MOSFET。晶体管MP11具有耦接至控制线WSEN的栅极、耦接至信号线SGL的源极、以及耦接至晶体管MP12的源极的漏极。晶体管MP12具有耦接至控制线WSL的栅极、耦接至晶体管MP11的漏极的源极、以及耦接至晶体管MP14的栅极和电容器C12的漏极。电容器C11的一端耦接至电源线VCCP,另一端耦接至电容器C12、晶体管MP13的漏极和晶体管MP14的源极。电容器C12的一端耦接至电容器C11的另一端、晶体管MP13的漏极和晶体管MP14的源极,并且另一端耦接至晶体管MP12的漏极和晶体管MP14的栅极。晶体管MP13具有耦接至控制线DSL的栅极、耦接至电源线VCCP的源极、以及耦接至晶体管MP14的源极和电容器C11的另一端以及电容器C12的一端的漏极。晶体管MP14的栅极耦接至晶体管MP12的漏极和电容器C12的另一端,源极耦接至晶体管MP13的漏极、电容器C11的另一端和电容器C12的一端,并且漏极耦接至发光元件EL的阳极和晶体管MP15的源极。晶体管MP15具有耦接至控制线AZSL的栅极、耦接至晶体管MP14的漏极和发光元件EL的阳极的源极、以及耦接至电源线VSS的漏极。
利用该配置,在像素PIX中,晶体管MP11和MP12导通,从而基于从信号线SGL提供的像素信号来设置电容器C12的两端之间的电压。晶体管MP13基于控制线DSL的信号导通或截止。在晶体管MP13导通的时间段中,晶体管MP14使得对应于电容器C12两端之间的电压的电流流入发光元件EL。发光元件EL基于从晶体管MP14提供的电流发光。因此,像素PIX发射具有与像素信号对应的亮度的光。晶体管MP15基于控制线AZSL的信号导通或截止。在晶体管MP15导通的时间段中,发光元件EL的阳极的电压被设置为电源线VSS的电压,从而进行初始化。
图46示出像素PIX的另一个配置示例。包括该像素PIX的像素阵列包括控制线WSL、控制线DSL和控制线AZSL。图43中所示的控制线CTL包括控制线WSL、DSL和AZSL。该像素PIX包括晶体管MN21和MN22、电容器C21、晶体管MN23至MN25以及发光元件EL。晶体管MN21至MN25是N型MOSFET。晶体管MN21具有耦接至控制线WSEN的栅极、耦接至信号线SGL的漏极、以及耦接至晶体管MN22的漏极的源极。晶体管MN22具有耦接至控制线WSL的栅极、耦接至晶体管MN21的源极的漏极、以及耦接至晶体管MN24的栅极和电容器C21的源极。电容器C21的一端耦接至晶体管MN22的源极和晶体管MN24的栅极,另一端耦接至晶体管MN24的源极和晶体管MN25的漏极,以及发光元件EL的阳极。晶体管MN23具有耦接至控制线DSL的栅极、耦接至电源线VCCP的漏极、以及耦接至晶体管MN24的漏极的源极。晶体管MN24具有耦接至晶体管MN22的源极和电容器C21的一端的栅极、耦接至晶体管MN23的源极的漏极以及耦接至电容器C21的另一端和晶体管MN25的漏极以及发光元件EL的阳极的源极。晶体管MN25具有耦接至控制线AZSL的栅极、耦接至晶体管MN24的源极和电容器C21的另一端以及发光元件EL的阳极的漏极、以及耦接至电源线VSS的源极。
利用该配置,在像素PIX中,晶体管MN21和MN22导通,从而基于从信号线SGL提供的像素信号设置电容器C21的两端之间的电压。晶体管MN23基于控制线DSL的信号导通或截止。在晶体管MN23导通的时间段中,晶体管MN24使得与电容器C21的两端之间的电压相对应的电流流入发光元件EL。发光元件EL基于从晶体管MP24提供的电流发光。因此,像素PIX发射具有与像素信号对应的亮度的光。晶体管MN25基于控制线AZSL的信号导通或截止。在晶体管MN25导通的时间段中,发光元件EL的阳极的电压设定为电源线VSS的电压,从而进行初始化。
图47示出像素PIX的另一个配置示例。包括该像素PIX的像素阵列包括控制线WSL、控制线DSL、以及控制线AZSL1和AZSL2。图43中所示的控制线CTL包括控制线WSL、DSL、AZSL1和AZSL2。该像素PIX包括晶体管MP31和MP32、电容器C31、晶体管MP33至MP36以及发光元件EL。晶体管MP31至MP36是P型MOSFET。晶体管MP31具有耦接至控制线WSEN的栅极、耦接至信号线SGL的源极、以及耦接至晶体管MP32的源极的漏极。晶体管MP32具有耦接至控制线WSL的栅极、耦接至晶体管MP31的漏极的源极、以及耦接至晶体管MP33的栅极和晶体管MP34的源极以及电容器C31的漏极。电容器C31的一端耦接至电源线VCCP,并且另一端耦接至晶体管MP32的漏极、晶体管MP33的栅极、以及晶体管MP34的源极。晶体管MP34具有耦接至控制线AZSL1的栅极、耦接至晶体管MP32的漏极和晶体管MP33的栅极以及电容器C31的另一端的源极、以及耦接至晶体管MP33的漏极和晶体管MP35的源极的漏极。晶体管MP35具有耦接至控制线DSL的栅极、耦接至晶体管MP33和MP34的漏极的源极、以及耦接至晶体管MP36的源极和发光元件EL的阳极的漏极。晶体管MP36具有耦接至控制线AZSL2的栅极、耦接至晶体管MP35的漏极和发光元件EL的阳极的源极、以及耦接至电源线VSS的漏极。
利用该配置,在像素PIX中,晶体管MP31和MP32导通,从而基于从信号线SGL提供的像素信号来设置电容器C31的两端之间的电压。晶体管MP35根据控制线DSL的信号导通或截止。晶体管MP33在晶体管MP35导通的时间段中使得与电容器C31的两端之间的电压相对应的电流流入发光元件EL。发光元件EL基于从晶体管MP33提供的电流发光。因此,像素PIX发射具有与像素信号对应的亮度的光。晶体管MP34基于控制线AZSL1的信号而导通或截止。在晶体管MP34导通的阶段中,晶体管MP33的漏极和栅极彼此耦接。晶体管MP36基于控制线AZSL2的信号而导通或截止。在晶体管MP36导通的时间段中,将发光元件EL的阳极的电压设定为电源线VSS的电压,从而进行初始化。
图48示出像素PIX的另一个配置示例。包括该像素PIX的像素阵列包括控制线WSL1和WSL2、控制线DSL、控制线AZSL1和AZSL2、信号线SGL1和SGL2、电容器C48和C49以及晶体管MP49。图43中所示的控制线CTL包括控制线WSL1、WSL2、DSL、AZSL1和AZSL2。图43中所示的信号线SGL包括信号线SGL1和SGL2。电容器C48的一端耦接至信号线SGL1,并且另一端耦接至电源线VSS。电容器C49的一端耦接至信号线SGL1,并且另一端耦接至信号线SGL2。晶体管MP49是P型MOSFET,并且具有耦接至控制线WSL2的栅极、耦接至信号线SGL1的源极以及耦接至信号线SGL2的漏极。
像素PIX包括晶体管MP41和MP42、电容器C41、晶体管MP43至MP46、以及发光元件EL。晶体管MP41至MP46是P型MOSFET。晶体管MP41具有耦接至控制线WSEN的栅极、耦接至信号线SGL2的源极、以及耦接至晶体管MP42的源极的漏极。晶体管MP42具有耦接至控制线WSL1的栅极、耦接至晶体管MP41的漏极的源极、以及耦接至晶体管MP43的栅极和电容器C41的漏极。电容器C41的一端耦接至电源线VCCP,并且另一端耦接至晶体管MP42的漏极和晶体管MP43的栅极。晶体管MP43具有耦接至晶体管MP42的漏极和电容器C41的另一端的栅极、耦接至电源线VCCP的源极、以及耦接至晶体管MP44和MP45的源极的漏极。晶体管MP44具有耦接至控制线AZSL1的栅极、耦接至晶体管MP43的漏极和晶体管MP45的源极的源极、以及耦接至信号线SGL2的漏极。晶体管MP45具有耦接至控制线DSL的栅极、耦接至晶体管MP43的漏极和晶体管MP44的源极的源极、以及耦接至晶体管MP46的源极和发光元件EL的阳极的漏极。晶体管MP46具有耦接至控制线AZSL2的栅极、耦接至晶体管MP45的漏极和发光元件EL的阳极的源极、以及耦接至电源线VSS的漏极。
利用该配置,在像素PIX中,晶体管MP41和MP42导通,从而基于通过电容器C49从信号线SGL1提供的像素信号来设置电容器C41的两端之间的电压。晶体管MP45基于控制线DSL的信号导通或截止。在晶体管MP45导通的时间段中,晶体管MP43使得对应于电容器C41的两端之间的电压的电流流入发光元件EL。发光元件EL基于从晶体管MP43提供的电流而发光。因此,像素PIX发射具有与像素信号对应的亮度的光。晶体管MP44基于控制线AZSL1的信号而导通或截止。在晶体管MP44导通的时间段中,晶体管MP43的漏极和信号线SGL2彼此耦接。晶体管MP46基于控制线AZSL2导通或截止。在晶体管MP46导通的时间段中,发光元件EL的阳极的电压被设置为电源线VSS的电压,从而进行初始化。
图49示出像素PIX的另一个配置示例。包括该像素PIX的像素阵列包括控制线WSL、控制线DSL、以及控制线AZSL1和AZSL2。图43中所示的控制线CTL包括控制线WSL、DSL、AZSL1和AZSL2。该像素PIX包括晶体管MP51至MP54、电容器C51、晶体管MP55至MP60以及发光元件EL。晶体管MP51至MP60是P型MOSFET。晶体管MP51具有耦接至控制线WSEN的栅极、耦接至信号线SGL的源极、以及耦接至晶体管MP52的源极的漏极。晶体管MP52具有耦接至控制线WSL的栅极、耦接至晶体管MP51的漏极的源极、以及耦接至晶体管MP53的漏极和晶体管MP54的源极的漏极。晶体管MP53具有耦接至控制线DSL的栅极、耦接至电源线VCCP的源极、以及耦接至晶体管MP52的漏极和晶体管MP54的源极的漏极。晶体管MP54具有耦接至晶体管MP55的源极和晶体管MP57的漏极以及电容器C51的栅极、耦接至晶体管MP52和MP53的漏极的源极、以及耦接至晶体管MP58和MP59的源极的漏极。电容器C51的一端耦接至电源线VCCP,并且另一端耦接至晶体管MP54的栅极、晶体管MP55的源极和晶体管MP57的漏极。电容器C51可包括彼此并联耦接的两个电容器。晶体管MP55具有耦接至控制线AZSL1的栅极、耦接至晶体管MP54的栅极和晶体管MP57的漏极以及电容器C51的另一端的源极、以及耦接至晶体管MP56的源极的漏极。晶体管MP56具有耦接至控制线AZSL1的栅极、耦接至晶体管MP55的漏极的源极、耦接至电源线VSS的漏极。晶体管MP57具有耦接至控制线WSL的栅极、耦接至晶体管MP54的栅极和晶体管MP55的源极以及电容器C51的另一端的漏极、以及耦接至晶体管MP58的漏极的源极。晶体管MP58具有耦接至控制线WSL的栅极、耦接至晶体管MP57的漏极的漏极、以及耦接至晶体管MP54的漏极和晶体管MP59的源极的源极。晶体管59具有耦接至控制线DSL的栅极、耦接至晶体管MP54的漏极和晶体管MP58的源极的源极、以及耦接至晶体管MP60的源极和发光元件EL的阳极的漏极。晶体管MP60具有耦接至控制线AZSL2的栅极、耦接至晶体管MP59的漏极和发光元件EL的阳极的源极、以及耦接至电源线VSS的漏极。
利用该配置,在像素PIX中,晶体管MP51、MP52、MP54、MP58和MP57导通,从而基于从信号线SGL提供的像素信号来设置电容器C51的两端之间的电压。晶体管MP53和MP59基于控制线DSL的信号导通或截止。在晶体管MP53和MP59导通的时间段中,晶体管MP54使得对应于电容器C51的两端之间的电压的电流流入发光元件EL。发光元件EL基于从晶体管MP54提供的电流发光。因此,像素PIX发射具有与像素信号对应的亮度的光。晶体管MP55和MP56基于控制线AZSL1的信号而导通或截止。在晶体管MP55和MP56导通的时间段中,将晶体管MP54的栅极电压设定为电源线VSS的电压,从而进行初始化。晶体管MP60基于控制线AZSL2的信号而导通或截止。在晶体管MP60导通的时间段中,发光元件EL的阳极的电压被设置为电源线VSS的电压,从而进行初始化。
图50示出像素PIX的另一个配置示例。包括该像素PIX的像素阵列包括控制线WSENN和WSENP、控制线WSNL和WSPL、控制线AZL、以及控制线DSL。图43中所示的控制线WSEN包括控制线WSENN和WSENP。图43中所示的控制线CTL包括控制线WSNL、WSPL、AZL和DSL。控制线WSENN的信号和控制线WSENP的信号是彼此反相的信号。控制线WSNL的信号和控制线WSPL的信号是彼此反相的信号。
像素PIX包括晶体管MN61、MP62、MN63和MP64、电容器C61和C62、晶体管MN65至MN67、以及发光元件EL。晶体管MN61、MN63和MN65至MN67是N型MOSFET,并且晶体管MP62和MP64是P型MOSFET。晶体管MN61具有耦接至控制线WSENN的栅极、耦接至信号线SGL和晶体管MP62的源极的漏极、以及耦接至晶体管MP62的漏极和晶体管MN63的漏极以及晶体管MP64的源极的源极。晶体管MP62具有耦接至控制线WSENP的栅极、耦接至信号线SGL和晶体管MN61的漏极的源极、以及耦接至晶体管MN61的源极和晶体管MN63的漏极以及晶体管MP64的源极的漏极。晶体管MN63具有耦接至控制线WSNL的栅极、耦接至晶体管MN61的源极和晶体管MP62的漏极以及晶体管MP64的源极的漏极、以及耦接至晶体管MP64的漏极以及电容器C61和C62以及晶体管MN65的栅极的源极。晶体管MP64具有耦接至控制线WSPL的栅极、耦接至晶体管MN61的源极和晶体管MP62的漏极以及晶体管MN63的漏极的源极、以及耦接至晶体管MN63的源极以及电容器C61和C62以及晶体管MN65的栅极的漏极。电容器C61使用例如MOM(金属氧化物金属)电容器来配置,并且一端耦接至晶体管MN63的源极、晶体管MP64的漏极、电容器C62和晶体管MN65的栅极,并且另一端耦接至电源线VSS2。应注意,例如,可以使用MOS电容器或者MIM(金属绝缘体金属)电容器配置电容器C61。电容器C62被配置为使用例如MOS电容器,并且一端耦接至晶体管MN63的源极、晶体管MP64的漏极、电容器C61、以及晶体管MN65的栅极,并且另一端耦接至电源线VSS2。应注意,电容器C62可使用例如MOM电容器或MIM电容器来配置。晶体管MN65具有耦接至晶体管MN63的源极以及晶体管MP64的漏极以及电容器C61和C62的一端的栅极、耦接至电源线VCCP的漏极、以及耦接至晶体管MN66和MN67的漏极的源极。晶体管MN66具有耦接至控制线AZL的栅极、耦接至晶体管MN65的源极和晶体管MN67的漏极的漏极、以及耦接至电源线VSS1的源极。晶体管MN67具有耦接至控制线DSL的栅极、耦接至晶体管MN65的源极和晶体管MN66的漏极的漏极、以及耦接至发光元件EL的阳极的源极。
利用该配置,在像素PIX中,晶体管MN61或MP62中的至少一个导通,并且晶体管MN63或MP64中的至少一个导通,从而基于从信号线SGL提供的像素信号来设置电容器C61和电容器C62的两端之间的电压。晶体管MN67根据控制线DSL的信号导通或截止。晶体管MN65在晶体管MN67导通的时间段中,使得与电容C61、C62两端的电压对应的电流流入发光元件EL。发光元件EL基于从晶体管MP65提供的电流发光。因此,像素PIX发射具有与像素信号对应的亮度的光。晶体管MN66可以基于控制线AZL的信号导通或截止。此外,晶体管MN66可以用作具有对应于控制线AZL的信号的电阻值的电阻器。在这种情况下,晶体管MN65和晶体管MN66构成所谓的源极跟随器电路。
[其他变形例]
此外,可以组合这些变形例中的两个或更多个。
<2.应用示例>
接下来,给出在上述实施方式中描述的显示系统的应用示例和变形例的描述。
(应用示例1)
图51示出头戴式显示器110的外观的示例。头戴式显示器110包括耳挂部112,耳挂部112用于将眼镜形显示部111佩戴在用户头部的两侧上。根据上述实施方式的技术等可应用于这种头戴式显示器110。
(应用示例2)
图52示出另一头戴式显示器120的外观的示例。头戴式显示器120是包括主体部121、臂部122和镜筒部123的透视头戴式显示器。头戴式显示器120安装在眼镜128上。主体部121包括用于控制头戴式显示器120的操作的控制基板、以及显示部。该显示部输出显示图像的图像光。臂部122将主体部121和镜筒部123彼此耦接,并且支撑镜筒部123。镜筒部123通过臂部122将从主体部121提供的图像光通过眼镜128的透镜129朝向用户的眼睛投射。根据上述实施方式的技术等可应用于这种头戴式显示器120。
应注意,头戴式显示器120是所谓的导光板系统头戴式显示器,但不限于此。例如,头戴式显示器120可以是例如所谓的鸟浴(birdbath)系统头戴式显示器。鸟浴系统头戴式显示器包括例如分束器和部分透明的反射镜。分束器朝向反射镜输出利用图像信息编码的光,并且反射镜朝向用户的眼睛反射光。分束器和部分透明反射镜都是部分透明的。这使来自周围环境的光到达用户的眼睛。
(应用示例3)
图53A和图53B示出了数码静态相机(digital still camera)130的外观的示例。图53A示出正视图,并且图53B示出后视图。数码静态相机130是可更换镜头单镜头反射型相机,并且包括相机主体部(相机主体)131、拍摄镜头单元132、握持部133、监视器134和电子取景器135。拍摄镜头单元312是可更换镜头单元,并且几乎被设置在相机主体部311的前表面的中间附近。握持部133设置在相机主体部311的前表面的左侧,并且拍摄者握住握持部133。监视器134设置在相机主体部131的后表面的大致中央的左侧。电子取景器135在相机主体部131的背面,设置在监视器14的上方。摄影师观察电子取景器135,从而使得可以可视地识别从拍摄镜头单元132引导的对象的光图像并且确定构图。根据上述实施方式的技术等可应用于电子取景器135。
(应用示例4)
图54示出电视设备140的外观的示例。电视设备140包括图像显示屏部141,图像显示屏部141包括前面板142和滤光玻璃143。根据上述实施方式的技术等可应用于图像显示屏部141。
(应用示例5)
图55示出智能电话150的外观的示例。智能电话150包括显示各种类型的信息的显示部151和包括接收用户的操作输入的按钮等的操作部152。根据上述实施方式的技术等可应用于显示部151。
(应用示例6)
图56A和图56B示出应用了本公开内容的技术的车辆的配置示例。图56A表示从车辆200的后方观察到的车辆内部的示例,图56B表示从车辆200的左后方观察到的车辆内部。
图56A和图56B中的车辆包括中央显示器201、控制台显示器202、平视显示器203、数字后视镜204、方向盘显示器205、以及后部娱乐显示器106。
中央显示器201设置在与仪表板261中的驾驶员座位262和乘客座位263相对的位置处。图56A示出从驾驶员座位262的侧面延伸到乘客座位263的侧面的水平长形的中央显示器201的示例,但是中央显示器201的屏幕尺寸和安装位置不限于此。允许中央显示器201显示由各种传感器检测的信息。作为具体示例,允许中央显示器201显示由图像传感器捕获的拍摄图像、由ToF传感器测量的距车辆前方或车辆侧面的障碍物的距离图像、由红外传感器检测的乘客的温度等。例如,可以使用中央显示器201显示安全相关信息、操作相关信息、行车日志(lifelog)、健康相关信息、认证/识别相关信息或娱乐相关信息中的至少一个。
安全相关信息包括基于传感器的检测结果的信息,如困倦检测、目光移开检测、车辆中儿童干预检测、座位安全带是否扣紧检测、以及乘员遗留检测。操作相关信息包括关于与使用传感器检测的乘员的操作相关的手势的信息。手势可包括车辆中的各种设施的操作,并且包括例如空调设施、导航装置、AV(视听)装置、照明装置等的操作。行车日志包括所有乘员的行车日志。例如,行车日志包括每个乘客的行为记录。获得并存储行车日志使得可以确认乘客在发生事故时的状况。健康相关信息包括关于使用温度传感器检测的乘客的温度和基于所检测的温度推断的乘员的健康状况的信息。可替换地,关于乘员的健康状况的信息可基于由图像传感器捕获的乘员的面部的图像来推断。此外,可基于通过使用自动语音与乘员执行谈话而获得的乘员的回答内容来推断关于乘员的健康状况的信息。认证/识别相关信息包括关于利用传感器执行面部识别的无钥匙进入功能、通过面部识别自动调节座位的高度和位置的功能等的信息。娱乐相关信息包括关于由传感器检测的乘员对AV装置的操作的信息和关于适合于由传感器检测和识别的乘员的待显示的内容的信息。
例如,可以使用控制台显示器202来显示行车日志信息。控制台显示器202布置在驾驶员座位262与乘客座位263之间的中控台264中的变速杆265附近。还允许控制台显示器202显示由不同传感器检测的信息。此外,控制台显示器202可以显示由图像传感器捕获的车辆周围的图像,或者可以显示距车辆周围的障碍物的距离图像。
平视显示器203虚拟地显示在驾驶员座位262前方的挡风玻璃266的后部。例如,可以使用平视显示器203显示安全相关信息、操作相关信息、行车日志、健康相关信息、认证/识别相关信息或娱乐相关信息中的至少一个。平视显示器203通常虚拟地设置在驾驶员座位262的前方,并且因此适合于显示直接与车辆的操作相关的信息,诸如车辆的速度、燃料水平以及剩余电池寿命。
数字后视镜204不仅允许显示车辆的后侧,还允许显示后座上的乘客的状态;因此,可以使用数字后视镜204,例如用于在后座上显示关于乘客的行车日志信息。
方向盘显示器205围绕车辆的方向盘267的中心布置。例如,可以使用方向盘显示器205显示安全相关信息、操作相关信息、行车日志、健康相关信息、认证/识别相关信息或娱乐相关信息中的至少一个。具体地,方向盘显示器205布置在驾驶员的手附近,并且因此适合于显示诸如驾驶员的温度的行车日志信息或者适合于显示与AV装置、空调装置等的操作相关的信息。
后部娱乐显示器206安装在驾驶员座位262或乘客座位263的后表面侧上,并且用于由后座上的乘客观看。后置娱乐显示器206可用于显示例如安全相关信息、操作相关信息、行车日志、健康相关信息、认证/识别相关信息或娱乐相关信息中的至少一个。具体地,后部娱乐显示器206设置在后座上的乘客的前方,并且因此在后座上显示与乘客相关的信息。后部娱乐显示器206可以显示例如与AV装置和空调装置的操作相关的信息,或者可以显示通过由温度传感器5测量后座上的乘员的温度等获得的结果。
根据上述实施方式等的技术可应用于中央显示器201、控制台显示器202、平视显示器203、数字后视镜204、方向盘显示器205以及后部娱乐显示器206。
上面已经参照实施方式、变形例和电子设备的应用示例描述了本技术,但是本技术不限于实施方式等,并且可以各种方式进行修改。
在上述实施方式等中,本技术应用于头戴式显示器,但并不局限于此。例如,本技术可应用于使得可以显示图像的各种电子设备,诸如监视器和投影仪。
本技术不仅可以应用于在上述实施方式中描述的封闭系统,还可应用于视频透视(see-through)系统和混合现实系统。
此外,本技术可以应用于各种模拟器,诸如飞行模拟器,以及用于游戏、投影映射等的应用。
应注意的是,在此所描述的效果仅是说明性的而非限制性的,并且可以提供其他效果。
应注意,本技术可以具有以下配置。根据具有以下配置的本技术,可以提高图像质量。
(1)一种显示装置,包括:
接收电路,被配置为接收第一图像数据和第二图像数据,第一图像数据表示具有第一分辨率的整体图像,第二图像数据表示具有比第一分辨率高的第二分辨率的第一部分图像,并且第一部分图像与一部分整体图像对应;
显示部,包括多个像素;以及
显示驱动电路,被配置为执行第一驱动和第二驱动,第一驱动基于第一图像数据以第一数量的像素为单位驱动多个像素,第二驱动基于第二图像数据以小于第一数量的第二数量的像素为单位驱动多个像素中的设置在与第一部分图像对应的区域中的两个或更多个像素。
(2)根据(1)所述的显示装置,其中,
接收电路被配置为在接收第一图像数据之后接收第二图像数据,并且
显示驱动电路被配置为在执行第一驱动之后执行第二驱动。
(3)根据(1)或(2)所述的显示装置,其中,
显示装置还包括:
第一传感器,被配置为检测用户正在观察显示部的显示区域中的哪个部分;以及
发送电路,被配置为将第一传感器的检测结果发送到图像生成装置,图像生成装置被配置为生成第一图像数据和第二图像数据,以及
第一部分图像包括与第一传感器的检测结果对应的图像。
(4)根据(1)或(2)所述的显示装置,其中,
接收电路被配置为接收多个第二图像数据,并且
各自由多个第二图像数据中的对应的一个第二图像数据表示的多个第一部分图像彼此不同。
(5)根据(1)至(4)中任一项所述的显示装置,其中,接收电路被配置为交替地接收第一图像数据和一个或多个第二图像数据。
(6)根据(1)至(4)中任一项所述的显示装置,其中,接收电路被配置为在第一时间段中交替地接收第一图像数据和第二图像数据,并且被配置为在第二时间段中继续接收第一图像数据和第二图像数据中的第一图像数据。
(7)根据(6)所述的显示装置,其中,
显示装置还包括:
第二传感器,被配置为检测显示装置的姿势的变化;以及
发送电路,被配置为将第二传感器的检测结果发送到图像生成装置,图像生成装置被配置为生成第一图像数据和第二图像数据,以及
第二时间段与显示装置的姿势变化的时间段对应。
(8)根据(1)至(7)中任一项所述的显示装置,其中,第二数量为1。
(9)根据(1)至(7)中任一项所述的显示装置,其中,
接收电路被配置为进一步接收表示具有比第二分辨率高的第三分辨率的第二部分图像的第三图像数据,第二部分图像与一部分第一部分图像对应,以及
显示驱动电路被配置为执行第三驱动,第三驱动基于第三图像数据以小于第二数量的第三数量的像素为单位驱动多个图像中的设置在与第二部分图像对应的区域中的两个或更多个像素。
(10)根据(1)至(9)中任一项所述的显示装置,其中,第一图像数据的数据量和第二图像数据的数据量彼此相等。
(11)根据(1)至(10)中任一项所述的显示装置,还包括:解压缩电路,被配置为分解第一图像数据和第二图像数据的压缩图像数据,其中,
压缩第一图像数据和第二图像数据中的至少一者。
(12)根据(1)至(10)中任一项所述的显示装置,还包括:解压缩电路,被配置为分解第一图像数据和第二图像数据的压缩图像数据,其中,
压缩第一图像数据和第二图像数据两者,并且第一图像数据的压缩比和第二图像数据的压缩比彼此不同。
(13)一种显示系统,包括:
图像生成装置,被配置为发送第一图像数据和第二图像数据,第一图像数据表示具有第一分辨率的整体图像,第二图像数据表示具有比第一分辨率高的第二分辨率的第一部分图像,并且第一部分图像与一部分整体图像对应;以及
显示装置,
显示装置包括:
接收电路,被配置为接收第一图像数据和第二图像数据;
显示部,包括多个像素,以及
显示驱动电路,被配置为执行第一驱动和第二驱动,第一驱动基于第一图像数据以第一数量的像素为单位驱动多个像素,第二驱动基于第二图像数据以小于第一数量的第二数量的像素为单位驱动多个像素中的设置在与第一部分图像对应的区域中的两个或更多个像素。
(14)根据(13)所述的显示系统,其中,
显示装置还包括:
第一传感器,被配置为检测用户正在观察显示部的显示区域中的哪个部分;以及
发送电路,被配置为将第一传感器的检测结果发送到图像生成装置,其中,
图像生成装置被配置为接收从发送电路发送的第一传感器的检测结果,被配置为基于第一传感器的检测结果生成第一部分图像,并且被配置为生成表示第一部分图像的第二图像数据。
(15)根据(13)所述的显示系统,其中,图像生成装置被配置为通过检测整体图像的图像变化的部分来生成第一部分图像,并且被配置为生成表示第一部分图像的第二图像数据。
(16)根据(13)至(15)中任一项所述的显示系统,其中,
显示装置还包括:
第二传感器,被配置为检测显示装置的姿势的变化;以及
发送电路,被配置为将第二传感器的检测结果发送到图像生成装置,其中,
图像生成装置被配置为接收从发送电路发送的第二传感器的检测结果,并且被配置为基于第二传感器的检测结果确定要发送第一图像数据和第二图像数据中的哪一者。
(17)一种显示驱动方法,包括:
发送第一图像数据和第二图像数据,第一图像数据表示具有第一分辨率的整体图像,第二图像数据表示具有比第一分辨率高的第二分辨率的第一部分图像,第一部分图像与一部分整体图像对应;
接收第一图像数据和第二图像数据;
执行第一驱动,第一驱动基于第一图像数据以第一数量的像素为单位驱动多个像素;以及
执行第二驱动,该第二驱动基于第二图像数据以小于第一数量的第二数量的像素为单位驱动多个像素中的设置在与第一部分图像对应的区域中的两个或更多个像素。
本申请要求基于2021年6月3日向日本专利局提交的日本专利申请第2021-093716号的优先权,其全部内容通过引用结合于此。
本领域技术人员应理解,只要在所附权利要求或其等同物的范围内,根据设计需求和其他因素,可以出现各种修改、组合、子组合和变更。
Claims (17)
1.一种显示装置,包括:
接收电路,被配置为接收第一图像数据和第二图像数据,所述第一图像数据表示具有第一分辨率的整体图像,所述第二图像数据表示具有比所述第一分辨率高的第二分辨率的第一部分图像,并且所述第一部分图像与一部分所述整体图像对应;
显示部,包括多个像素;以及
显示驱动电路,被配置为执行第一驱动和第二驱动,所述第一驱动基于所述第一图像数据以第一数量的像素为单位驱动所述多个像素,所述第二驱动基于所述第二图像数据以小于所述第一数量的第二数量的像素为单位驱动所述多个像素中的设置在与所述第一部分图像对应的区域中的两个或更多个像素。
2.根据权利要求1所述的显示装置,其中,
所述接收电路被配置为在接收所述第一图像数据之后接收所述第二图像数据,并且
所述显示驱动电路被配置为在执行所述第一驱动之后执行所述第二驱动。
3.根据权利要求1所述的显示装置,其中,
所述显示装置还包括:
第一传感器,被配置为检测用户正在观察所述显示部的显示区域中的哪个部分;以及
发送电路,被配置为将所述第一传感器的检测结果发送到图像生成装置,所述图像生成装置被配置为生成所述第一图像数据和所述第二图像数据,以及
所述第一部分图像包括与所述第一传感器的检测结果对应的图像。
4.根据权利要求1所述的显示装置,其中,
所述接收电路被配置为接收多个所述第二图像数据,并且
各自由多个所述第二图像数据中的对应的一个所述第二图像数据表示的多个所述第一部分图像彼此不同。
5.根据权利要求1所述的显示装置,其中,所述接收电路被配置为交替地接收所述第一图像数据和一个或多个所述第二图像数据。
6.根据权利要求1所述的显示装置,其中,所述接收电路被配置为在第一时间段中交替地接收所述第一图像数据和所述第二图像数据,并且所述接收电路被配置为在第二时间段中继续接收所述第一图像数据和所述第二图像数据中的所述第一图像数据。
7.根据权利要求6所述的显示装置,其中,
所述显示装置还包括:
第二传感器,被配置为检测所述显示装置的姿势的变化;以及
发送电路,被配置为将所述第二传感器的检测结果发送到图像生成装置,所述图像生成装置被配置为生成所述第一图像数据和所述第二图像数据,以及
所述第二时间段与所述显示装置的姿势变化的时间段对应。
8.根据权利要求1所述的显示装置,其中,所述第二数量为1。
9.根据权利要求1所述的显示装置,其中,
所述接收电路被配置为进一步接收表示具有比所述第二分辨率高的第三分辨率的第二部分图像的第三图像数据,所述第二部分图像与一部分所述第一部分图像对应,以及
所述显示驱动电路被配置为执行第三驱动,所述第三驱动基于所述第三图像数据以小于所述第二数量的第三数量的像素为单位驱动所述多个图像中的设置在与所述第二部分图像对应的区域中的两个或更多个像素。
10.根据权利要求1所述的显示装置,其中,所述第一图像数据的数据量和所述第二图像数据的数据量彼此相等。
11.根据权利要求1所述的显示装置,还包括:解压缩电路,被配置为对所述第一图像数据和所述第二图像数据的压缩图像数据进行解压缩,其中,
压缩所述第一图像数据和所述第二图像数据中的至少一者。
12.根据权利要求1所述的显示装置,还包括:解压缩电路,被配置为对所述第一图像数据和所述第二图像数据的压缩图像数据进行解压缩,其中,
压缩所述第一图像数据和所述第二图像数据两者,并且所述第一图像数据的压缩比和所述第二图像数据的压缩比彼此不同。
13.一种显示系统,包括:
图像生成装置,被配置为发送第一图像数据和第二图像数据,所述第一图像数据表示具有第一分辨率的整体图像,所述第二图像数据表示具有比所述第一分辨率高的第二分辨率的第一部分图像,并且所述第一部分图像与一部分所述整体图像对应;以及
显示装置,
所述显示装置包括:
接收电路,被配置为接收所述第一图像数据和所述第二图像数据;
显示部,包括多个像素,以及
显示驱动电路,被配置为执行第一驱动和第二驱动,所述第一驱动基于所述第一图像数据以第一数量的像素为单位驱动所述多个像素,所述第二驱动基于所述第二图像数据以小于所述第一数量的第二数量的像素为单位驱动所述多个像素中的设置在与所述第一部分图像对应的区域中的两个或更多个像素。
14.根据权利要求13所述的显示系统,其中,
所述显示装置还包括:
第一传感器,被配置为检测用户正在观察所述显示部的显示区域中的哪个部分;以及
发送电路,被配置为将所述第一传感器的检测结果发送到图像生成装置,其中,
所述图像生成装置被配置为接收从所述发送电路发送的所述第一传感器的检测结果,被配置为基于所述第一传感器的检测结果生成所述第一部分图像,并且被配置为生成表示所述第一部分图像的所述第二图像数据。
15.根据权利要求13所述的显示系统,其中,所述图像生成装置被配置为通过检测所述整体图像的图像变化的部分来生成所述第一部分图像,并且所述图像生成装置被配置为生成表示所述第一部分图像的所述第二图像数据。
16.根据权利要求13所述的显示系统,其中,
所述显示装置还包括:
第二传感器,被配置为检测所述显示装置的姿势的变化;以及
发送电路,被配置为将所述第二传感器的检测结果发送到图像生成装置,其中,
所述图像生成装置被配置为接收从所述发送电路发送的所述第二传感器的检测结果,并且所述图像生成装置被配置为基于所述第二传感器的检测结果确定要发送所述第一图像数据和所述第二图像数据中的哪一者。
17.一种显示驱动方法,包括:
发送第一图像数据和第二图像数据,所述第一图像数据表示具有第一分辨率的整体图像,所述第二图像数据表示具有比所述第一分辨率高的第二分辨率的第一部分图像,所述第一部分图像与一部分所述整体图像对应;
接收所述第一图像数据和所述第二图像数据;
执行第一驱动,所述第一驱动基于所述第一图像数据以第一数量的像素为单位驱动多个像素;以及
执行第二驱动,所述第二驱动基于所述第二图像数据以小于所述第一数量的第二数量的像素为单位驱动所述多个像素中的设置在与所述第一部分图像对应的区域中的两个或更多个像素。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021093716 | 2021-06-03 | ||
JP2021-093716 | 2021-06-03 | ||
PCT/JP2022/021117 WO2022255147A1 (ja) | 2021-06-03 | 2022-05-23 | 表示装置、表示システム、および表示駆動方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117378002A true CN117378002A (zh) | 2024-01-09 |
Family
ID=84323314
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280037924.1A Pending CN117378002A (zh) | 2021-06-03 | 2022-05-23 | 显示装置、显示系统及显示驱动方法 |
Country Status (5)
Country | Link |
---|---|
EP (1) | EP4350682A1 (zh) |
JP (1) | JPWO2022255147A1 (zh) |
KR (1) | KR20240015633A (zh) |
CN (1) | CN117378002A (zh) |
WO (1) | WO2022255147A1 (zh) |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5644862B2 (ja) * | 2010-12-10 | 2014-12-24 | 富士通株式会社 | 立体視動画像生成装置、立体視動画像生成方法、立体視動画像生成プログラム |
US20140347363A1 (en) * | 2013-05-22 | 2014-11-27 | Nikos Kaburlasos | Localized Graphics Processing Based on User Interest |
US10810701B2 (en) | 2016-02-09 | 2020-10-20 | Sony Interactive Entertainment Inc. | Video display system |
EP3548987A4 (en) * | 2016-12-01 | 2020-05-20 | Shanghai Yunyinggu Technology Co., Ltd. | ZONE-BASED DISPLAY DATA PROCESSING AND TRANSMISSION |
US10713752B2 (en) * | 2017-06-09 | 2020-07-14 | Sony Interactive Entertainment Inc. | Temporal supersampling for foveated rendering systems |
DE102017129795A1 (de) * | 2017-06-30 | 2019-01-03 | Lg Display Co., Ltd. | Anzeigevorrichtung und gate-treiberschaltkreis davon, ansteuerungsungsverfahren und virtuelle-realität-vorrichtung |
JP7381482B2 (ja) * | 2018-03-16 | 2023-11-15 | マジック リープ, インコーポレイテッド | ディスプレイシステムのための深度ベースの中心窩化レンダリング |
JP7414731B2 (ja) * | 2018-12-04 | 2024-01-16 | 株式会社ソニー・インタラクティブエンタテインメント | 画像処理装置、画像処理システム、画像処理方法、及びプログラム |
JP2021093716A (ja) | 2019-09-26 | 2021-06-17 | パナソニック株式会社 | 端末、基地局、及び、制御方法 |
-
2022
- 2022-05-23 EP EP22815897.8A patent/EP4350682A1/en active Pending
- 2022-05-23 KR KR1020237039160A patent/KR20240015633A/ko unknown
- 2022-05-23 CN CN202280037924.1A patent/CN117378002A/zh active Pending
- 2022-05-23 WO PCT/JP2022/021117 patent/WO2022255147A1/ja active Application Filing
- 2022-05-23 JP JP2023525737A patent/JPWO2022255147A1/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
EP4350682A1 (en) | 2024-04-10 |
JPWO2022255147A1 (zh) | 2022-12-08 |
KR20240015633A (ko) | 2024-02-05 |
WO2022255147A1 (ja) | 2022-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107797280B (zh) | 个人沉浸式显示装置及其驱动方法 | |
US8711139B2 (en) | Method of driving stereoscopic display apparatus and stereoscopic display apparatus | |
US8456519B2 (en) | Video display system, video display method and display apparatus | |
US10699673B2 (en) | Apparatus, systems, and methods for local dimming in brightness-controlled environments | |
KR20180039224A (ko) | 머리 장착형 표시장치 | |
EP4350682A1 (en) | Display device, display system, and display drive method | |
WO2023100468A1 (ja) | 表示装置、表示システム、および表示方法 | |
KR102422036B1 (ko) | 낮은 레이턴시 가상 현실을 구동 및 보상하는 표시장치 | |
WO2023084950A1 (ja) | 表示装置、表示システム、および表示駆動方法 | |
WO2024048268A1 (ja) | 表示装置、電子機器及び表示装置の駆動方法 | |
WO2024101213A1 (ja) | 表示装置 | |
WO2023182097A1 (ja) | 表示装置及びその駆動方法 | |
WO2024048221A1 (ja) | 表示装置 | |
US9137522B2 (en) | Device and method for 3-D display control | |
WO2023176166A1 (ja) | 表示装置及び電子機器 | |
WO2023181652A1 (ja) | 表示装置 | |
WO2023243474A1 (ja) | 表示装置 | |
EP4310821A1 (en) | Display device and electronic apparatus | |
US11972718B2 (en) | Display device, electronic apparatus, and moving body | |
WO2023007819A1 (ja) | 表示装置 | |
WO2023013247A1 (ja) | 表示装置、電子機器、及び表示制御方法 | |
WO2023176138A1 (ja) | 表示装置 | |
WO2023189312A1 (ja) | 表示装置 | |
US10529276B2 (en) | Apparatus, systems, and methods for preventing display flicker | |
WO2022230578A1 (ja) | 表示装置及び電子機器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |