CN109074685A - 用于调整图像的方法、设备、系统和计算机可读存储介质 - Google Patents
用于调整图像的方法、设备、系统和计算机可读存储介质 Download PDFInfo
- Publication number
- CN109074685A CN109074685A CN201780023521.0A CN201780023521A CN109074685A CN 109074685 A CN109074685 A CN 109074685A CN 201780023521 A CN201780023521 A CN 201780023521A CN 109074685 A CN109074685 A CN 109074685A
- Authority
- CN
- China
- Prior art keywords
- image
- background
- subgraph
- foreground
- observer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 210000003128 head Anatomy 0.000 claims description 24
- 238000003384 imaging method Methods 0.000 claims description 22
- 239000011521 glass Substances 0.000 claims description 16
- 238000012545 processing Methods 0.000 claims description 7
- 239000004033 plastic Substances 0.000 claims description 6
- 229920003023 plastic Polymers 0.000 claims description 6
- 238000004891 communication Methods 0.000 claims description 4
- 238000004590 computer program Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 230000008901 benefit Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 210000001747 pupil Anatomy 0.000 description 3
- 238000009434 installation Methods 0.000 description 2
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 241000287181 Sturnus vulgaris Species 0.000 description 1
- 230000002929 anti-fatigue Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 229910052793 cadmium Inorganic materials 0.000 description 1
- BDOSMKKIYDKNTQ-UHFFFAOYSA-N cadmium atom Chemical compound [Cd] BDOSMKKIYDKNTQ-UHFFFAOYSA-N 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 239000002826 coolant Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 238000010977 unit operation Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/14—Display of multiple viewports
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C5/00—Registering or indicating the working of vehicles
- G07C5/08—Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
- G07C5/0816—Indicating performance data, e.g. occurrence of a malfunction
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
- G09G5/026—Control of mixing and/or overlay of colours in general
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/02—Improving the quality of display appearance
- G09G2320/0261—Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/10—Automotive applications
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开提供了一种用于调整图像的方法、设备、系统和计算机可读存储介质。该方法包括:确定背景图像中的背景子图像,所述背景子图像与前景图像的第一范围内的前景子图像相对应;确定背景子图像的第一图像属性;以及至少基于第一图像属性来调整前景子图像;其中,所述背景图像为外部环境的图像,所述前景图像为显示设备生成的图像。本公开的用于调整图像的方法、设备、系统和可读存储介质,通过判断显示设备生成的图像的图像属性与外部环境图像的图像属性的接近程度,来相应调整显示设备生成图像的图像属性,从而保证显示设备生成的图像不会和外部环境混淆。
Description
版权申明
本专利文件披露的内容包含受版权保护的材料。该版权为版权所有人所有。版权所有人不反对任何人复制专利与商标局的官方记录和档案中所存在的该专利文件或者专利披露。
技术领域
本公开涉及图像处理领域,更具体地涉及用于调整图像的方法、设备、系统和计算机可读存储介质。
背景技术
随着技术的发展,在现代汽车中引入了类似于飞机驾驶员所使用的抬头显示(Head-Up Display或简称为HUD)技术。HUD技术是可以向驾驶员呈现所需数据(例如,速度、时间等)而不要求驾驶员低头查看仪表盘的技术。该技术可以使得驾驶员在查看前方路况或空域的同时,能够看到自己所需要的数据,这样可以避免由于低头导致一段时间不能查看路况或空域所造成的潜在危险,并降低了眼睛需要调整焦距所造成的不适。常见的HUD设备通常包括一个投影部,该投影部可以将需要显示的信息投影在车辆或飞行器的前挡风玻璃上,以在玻璃上形成肉眼可见的、叠加在外部图像上的画面。
HUD设备可以将需要显示的信息显示在车辆或飞行器的驾驶员的平视方向上,以形成肉眼可见的、叠加在外部图像上的画面。然而,由于所显示的图像的颜色固定,因此容易和车外具有相近颜色的实际物体背景混在一起,反而干扰驾驶员的视线。例如,当HUD设备在前挡风玻璃上用例如灰色来显示信息时,此时从驾驶员的角度看出去如果在车辆外部存在的灰色或接近灰色的物体与该灰色信息重叠时,驾驶员难以判断该灰色物体是否存在和/或与本车相对距离多远。又例如,当HUD设备的投影部在投影时的亮度不够大时,如果外界图像明亮,则可能导致驾驶者无法看清该投影。
发明内容
因此,有必要提供一种能够根据前景图像(例如,前景HUD投影图像)与背景图像(例如,背景车外物体的图像)的图像属性来自动调整前景图像以避免视觉混淆的用于调整图像的方法、设备、系统和计算机可读存储介质。
根据本公开的第一方面,提出了一种用于调整图像的方法。该方法包括:确定背景图像中的背景子图像,所述背景子图像与前景图像的第一范围内的前景子图像相对应;确定所述背景子图像的第一图像属性;以及至少基于所述第一图像属性来调整所述前景子图像;其中,所述背景图像为外部环境的图像,所述前景图像为显示设备生成的图像。
根据本公开的第二方面,提出了一种用于调整图像的设备。该设备包括:处理器;存储器,存储指令,所述指令在由所述处理器执行时使得所述处理器:确定背景图像中的背景子图像,所述背景子图像与前景图像的第一范围内的前景子图像相对应;确定所述背景子图像的第一图像属性;以及至少基于所述第一图像属性来调整所述前景子图像;其中,所述背景图像为外部环境的图像,所述前景图像为显示设备生成的图像。
根据本公开的第三方面,提出了一种用于调整图像的系统。该系统包括:处理器;第一图像传感器和/或第二图像传感器,与所述处理器通信耦接;存储器,存储指令,所述指令在由所述处理器执行时使得所述处理器:确定背景图像中的背景子图像,所述背景子图像与前景图像的第一范围内的前景子图像相对应;确定所述背景子图像的第一图像属性;以及至少基于所述第一图像属性来调整所述前景子图像;其中,所述背景图像为外部环境的图像,所述前景图像为显示设备生成的图像。
根据本公开的第四方面,提出了一种存储指令的计算机可读存储介质,所述指令在由处理器执行时使得所述处理器执行根据本公开第一方面所述的方法。
本公开的用于调整图像的方法、设备、系统和可读存储介质,通过判断显示设备生成的图像的图像属性与外部环境图像的图像属性的接近程度,来相应调整显示设备生成图像的图像属性,从而保证显示设备生成的图像不会和外部环境混淆。
附图说明
为了更完整地理解本公开实施例及其优势,现在将参考结合附图的以下描述,其中:
图1A和1B是示出了根据本公开实施例的用于辅助驾驶员驾驶的示例HUD系统的示例应用场景。
图2是示出了根据本公开实施例的用于调整观察者观察到的HUD图像的方法的示例原理说明图。
图3是示出了根据本公开实施例的用于调整图像的示例方法的流程图。
图4是示出了根据本公开实施例的用于调整图像的示例设备的硬件布置图。
此外,各附图并不一定按比例来绘制,而是仅以不影响读者理解的示意性方式示出。
具体实施方式
根据结合附图对本公开示例性实施例的以下详细描述,本公开的其它方面、优势和突出特征对于本领域技术人员将变得显而易见。
在本公开中,术语“包括”和“含有”及其派生词意为包括而非限制。
在本说明书中,下述用于描述本公开原理的各种实施例只是说明,不应该以任何方式解释为限制公开的范围。参照附图的下述描述用于帮助全面理解由权利要求及其等同物限定的本公开的示例性实施例。下述描述包括多种具体细节来帮助理解,但这些细节应认为仅仅是示例性的。因此,本领域普通技术人员应认识到,在不脱离本公开的范围和精神的情况下,可以对本文中描述的实施例进行多种改变和修改。此外,为了清楚和简洁起见,省略了公知功能和结构的描述。此外,贯穿附图,相同附图标记用于相同或相似的功能和操作。此外,尽管可能在不同实施例中描述了具有不同特征的方案,但是本领域技术人员应当意识到:可以将不同实施例的全部或部分特征相结合,以形成不脱离本公开的精神和范围的新的实施例。
为了至少部分解决或减轻上述问题,提出了根据本公开一些实施例的用于调整图像的方法、设备、系统和/或计算机可读存储介质。大体上,在本公开的一些实施例中,通过判断HUD(Head Up Display)投影(或更一般地,前景图像)的颜色与外部背景(或更一般地,背景图像)的颜色的接近程度,来相应调整HUD投影的颜色,从而保证HUD投影的内容不会和车外所重叠的物体颜色混淆。例如,如果混叠的背景是灰色,则根据本公开一些实施例的方案,可以实时计算出这个背景颜色值并例如找出其对比色(例如,红色),把此信息传递给HUD显示系统,HUD系统可根据此信息来调整自己的显示效果。
然而,需要注意的是:尽管在本公开下述实施例中以车载HUD设备为例来说明本公开一些实施例的技术方案,然而本公开不限于此。事实上,本公开同样适用于其它需要调整前景图像和/或背景图像之一或全部两者以避免混淆的领域,包括(但不限于):虚拟现实(VR)显示(例如,VR头盔等)、增强现实(AR)显示(例如,诸如谷歌眼镜之类的智能可穿戴设备等)、飞行器HUD设备等等。此外,同样需要注意的是:尽管在本公开下述实施例中以“颜色”为例来描述需要调整的图像属性,然而本公开不限于此。事实上,可以调整的图像属性可以包括(但不限于)以下至少一项:颜色(或色相)、色调、饱和度、亮度以及对比度。
此外,同样需要注意的是,尽管在本公开下述实施例中以投影时HUD设备为例来说明本公开一些实施例的技术方案,然而本公开不限于此。事实上,本公开同样适用于采用其它方式来生成前景图像和/或背景图像的情况。例如,在采用透明显示器(例如,透明OLED显示器)来代替前述前挡风玻璃的情况下,前景图像可以由透明显示器生成。又例如,在采用VR头盔来代替前述前挡风玻璃的情况下,前景图像和背景图像均可以由VR头盔中的显示器生成。
以下,将参考图1A和1B来详细描述根据本公开实施例的HUD系统的应用场景和实际布置。
图1A和1B是示出了根据本公开实施例的用于辅助驾驶员驾驶的示例HUD系统10的示例应用场景。如图1A和1B所示,系统10可以包括:HUD设备100、内部摄像头110(或更一般地,第一图像传感器110)、以及外部摄像头120(或更一般地,第二图像传感器120)。这些设备的功能可以合并或进一步拆分。例如,在一些实施例中,可以将HUD设备100、内部摄像头110和外部摄像头120集成为同一个装置,例如汽车的中央智能后视镜。该中央智能后视镜朝向驾驶员的一侧可以集成有内部摄像头110,而另一侧可以集成有用于向前挡风玻璃上投影的投影部和外部摄像头120。又例如,在另一些实施例中,可以不包括HUD设备100,而是采用作为前挡风的透明显示器(例如,OLED显示器)或附加的透明显示器来替代投影式的HUD设备100,并通过前挡风或附加的透明显示器来显示所需的前景信息。
此外,系统10也可以不包括例如HUD设备100、内部摄像头110、以及外部摄像头120中的一个或多个。例如,在车辆本身已具有外部摄像头的情况下,系统10可以仅包括内部摄像头110和HUD设备100,并通过有线或无线方式从车辆自身的外部摄像头获取其捕捉到外部图像。同样地,系统10也可以不具有内部摄像头110和/或HUD设备100。这种情况可能出现在例如车辆本身具有行车用的摄像头(例如,行车记录仪、防疲劳系统等)和/或车载HUD设备等。在这些情况下,可以将具备前述系统10部分功能的组件与已有的车载设备组合执行下述操作。
回到图1所示实施例,HUD设备100、内部摄像头110和/或外部摄像头120之间可以通过各种方式彼此通信(例如,有线和/或无线),以在其间传递指令和/或数据。例如,在图1所示实施例中,内部摄像头110和外部摄像头120之间可以通过有线方式(例如,I2C、车载总线等)连接并进行通信,而它们与HUD设备100之间可以通过无线方式(例如,Wi-Fi、蓝牙等)连接并进行通信。本公开对此不加以特别限制。
此外,尽管在图1的实施例中,将内部摄像头110和外部摄像头120都布置在中央后视镜上(分别布置在中央后视镜的两侧)且将HUD设备100布置在车内的中控台(例如,车载信息娱乐系统)上方,然而本公开不限于此。事实上,可以将它们布置在任何恰当的位置上。例如,可以将外部摄像头120布置在汽车外部,例如车顶、前保险杠等位置;可以将内部摄像头布置在方向盘上、驾驶位的遮阳板上等位置;HUD设备100可以布置在中央后视镜远离驾驶员的一侧、车内顶灯附近、汽车前机盖上等位置。此外,尽管图1示出了将系统10安装在右舵车内,但本公开同样适用于其他形式的交通工具(例如,左舵车、飞机、头戴式显示器、智能眼镜等)。
如图1B所示,HUD设备100可以在前挡风上投影出HUD信息105。尽管图1B中仅示出了投影出的HUD信息105包括时间和车速,但本公开不限于此。HUD信息105可以包括(但不限于):各种车况参数(例如,平均/最高/实时车速、里程、发动机转速、冷却液温度、油量等)、各种环境信息(例如,时间、气温、路况等)、各种导航信息、和/或其它图像和/或视频信息。
此外,HUD信息105的投影位置和范围也不限于如图1B所示的前挡风玻璃的中下部,而是可以投影在任何恰当位置处,且范围也不限于如图1B所示的较小范围,而是可以投影到任何恰当范围处。例如,在采用透明显示器作为前挡风的一些实施例中,甚至可以在整个前挡风上显示HUD信息,例如针对驾驶员通过前挡风所可能看到的每个物体,在相应物体旁边标出辅助信息,例如相对本车的距离、物体类别等。
以下,将结合图2并参考图1A、1B来详细描述根据本公开一些实施例的用于调整图像的方案。
图2是示出了根据本公开实施例的用于调整观察者观察到的HUD图像的系统20的示例原理说明图。如图2所示,驾驶员可以坐在车内驾驶位上驾驶,其眼部230可以对外部的物体进行观察。例如,在图2所示实施例中,存在观察对象240(例如,交通标志)。同时,HUD设备200可以在前挡风玻璃250上投影出所需的图像(下文中可称为前景图像)205。在图2所示实施例中,由于观察对象240所在的位置与驾驶员眼部230的连线与前挡风玻璃250正好相交于前景图像205的范围内,因此驾驶员此时观察到:前景图像205将观察对象240加以遮挡。并且,由于外部摄像头220与内部摄像头210的位置、HUD设备200生成的前景图像205的位置以及驾驶员的眼部230的位置均已知,因此可以据此得出在背景图像中的观察对象240的具体范围。可以理解的是,内部摄像头210还可以识别驾驶员的视线215,并且通过视线215替换眼部230的位置来进行计算,同样可以得到与前景图像205相对应的背景图像中的观察对象240。因此,在确定了具体的前景图像205与相对应的观察对象240后,HUD设备中的处理器可以对二者进行对比甄别,判断二者颜色上的相近程度。如前所述,如果观察对象240与前景图像205的颜色相同或接近,则此时驾驶员将难以准确识别前景图像205。当前景图像205与观察对象240相混淆时,可能导致驾驶员不能准确的识别HUD设备200所投影显示的内容,从而导致HUD设备200在一段时间内失去了其功能,驾驶员也可能因此失去了一些车辆的信息,并且导致可能的驾驶风险。如前所述,如果观察对象240与前景图像205的颜色相同或接近,还可能导致驾驶员难以准确识别观察对象240。在图2所示实施例中,驾驶员因前景图像205与观察对象240相混淆而导致无法准确识别交通标志时,可能导致驾驶员违反交通规则(例如,违章调头)。更一般地,在驾驶员难以准确识别观察对象240的情况下,还有可能导致其他各种潜在的危险,例如交通事故。
为了至少部分解决或减轻上述问题,可以采用如图1所示的系统10。在图2中,内部摄像头210(对应于图1B中的内部摄像头110)可以捕捉包括观察者的眼部在内的眼部图像(或更一般地,包括观察者的观察位置在内的观察者图像)215,并根据捕捉到的眼部图像215来确定眼部230的实际位置。例如,在一些实施例中,可以根据图像识别算法来确定眼部230在眼部图像215中的位置,并可根据预定的内部摄像头210的位置和/或预先设置的对应关系表,来确定眼部230在车内的实际位置。此外,也可以根据其他方式来确定眼部230在车内的实际位置。例如,可以由驾驶员通过交互界面来手动输入其“坐高”的位置,或通过视线跟踪器来判断其实际位置。在一些实施例中,由于驾驶员的位置和身高比较固定,因此该检测眼部位置过程可以是在驾驶员进入驾驶舱后一次性执行的。然而,在另一些实施例中,由于驾驶员在驾驶时不可能完全静止,为了更好地根据驾驶员的眼部230所在位置来如下文所述调整前景图像的图像属性,因此可以对驾驶员的眼部230的位置进行多次检测,例如周期性地、不定时地、实时地、或响应于某些特定触发事件地。
此外,尽管在图2中将观察者示出为人类,然而本公开不限于此。事实上,观察者也可以是诸如摄像头之类的可见光或红外图像传感器等。例如,在无人驾驶或遥控驾驶的情况下,可以采用其它非人类观察者类替代人类或使得人类观察者可以通过非人类观察者来遥控车辆。
与内部摄像头210的操作同时或在这之前或之后,或与内部摄像头210的操作相独立地,外部摄像头220(对应于图1A中的外部摄像头120)可以捕捉车外部的图像(下文中可称为“背景图像”)225。根据以下已知参数中的一项或多项可以确定背景图像225中与前景图像205的至少一部分(例如,第一范围内的前景子图像)相对应的背景子图像(例如,包括观察对象240在内的背景子图像):外部摄像头220的安装位置和/或拍摄角度;眼部230的位置、前景子图像的实际位置和/或与外部摄像头220的位置关系等。如前所述,在一些实施例中,由于HUD设备200投影或生成的前景图像205可能遍布整个前挡风,因此驾驶员可能仅关心其中一定范围内的前景子图像。例如,在图1B所示实施例中,尽管可能在前挡风上显示的HUD信息包括除了HUD信息105以外的在其他位置处的HUD信息(例如,与一些观察对象相关联的附加信息,诸如相对距离、对象类型等),然而这些HUD信息可能是在前景图像中添加的在相应观察对象旁边的附加信息,因此其并不会与观察对象重叠并导致混淆,因此可能只需对固定显示的HUD信息105加以调整。换言之,仅需要关注前景图像中的第一范围内的前景子图像(例如,HUD信息105)以及背景图像中与该前景子图像相对应的背景子图像。
回到图2所示实施例,根据前述内部摄像头210所捕捉到的眼部230的眼部图像215,可以确定眼部230的实际位置。根据HUD设备200的位置和投影方向以及前挡风角度和/或位置,可以确定前景图像205的具体范围。此外,考虑到前景图像205中并不是所有部分都会遮挡驾驶员视线,因此可以确定其中的第一范围(例如,显示有色字体的部分,或者在极端情况下,全部显示部分)内的前景子图像的范围。接下来,可以根据外部摄像头220的安装位置、拍摄角度、和/或前述第一范围等来确定背景图像225所拍摄的范围与前景图像205的第一范围(即,前景子图像)之间的对应关系,并确定背景图像225中与前景子图像相对应的第二范围内的背景子图像(例如,图2所示的包括观察对象240在内的背景子图像)。
此外,在一些实施例中,由于内部摄像头210和外部摄像头220、驾驶员位置、前挡风角度、位置等数据相对固定,因此可以通过预先校准过程来简化上述这些操作。例如,当驾驶员初次安装HUD设备200时或每次驾驶员上车后初次启动HUD设备200时,可以要求驾驶员通过例如指示背景图像中被前景子图像所遮挡的范围来直接确定背景子图像。
在确定了背景子图像之后,系统20可以确定背景子图像的一个或多个图像属性,包括(但不限于):颜色(或色相)、色调、饱和度、亮度、和/或对比度。该确定可以是根据背景子图像的各像素的相应图像属性的平均值或最大值或任何其它恰当值来进行的。例如,可以根据背景子图像中所有像素的颜色的平均值(例如,在图像的RGB格式下)来确定其颜色图像属性。类似地,可以确定前景子图像所采用的相应图像属性。
接下来,当系统20确定前景子图像与背景子图像的上述图像属性中的一个或多个相同或相近时,可以调整前景子图像的相应图像属性。例如,当这二者的上述颜色平均值之差不大于预定阈值时(例如,在RGB格式中取值范围0~255的情况下小于55时),可以将前景子图像的相应图像属性调整为使得这二者的差值不小于该预定阈值。在一个具体示例中,例如前景子图像的颜色为(255,0,0)(即,纯红色)且背景子图像的颜色为(227,23,13)(即,镉红色)时,则可以调整前景子图像的颜色为(0,255,0)(即,纯绿色),从而避免与背景子图像的颜色相同或相近。类似地,也可以对其它图像属性进行修改,从而避免背景子图像的颜色相同或相近。对于其他图像属性,也可以类似地进行相应调整。
此外,考虑到驾驶员的视线不一定始终盯着前景图像205的位置在看,更常见的是偶尔扫一眼前景图像205。在这种情况下,可以不必始终根据背景子图像的图像属性来改变前景图像205/前景子图像的图像属性。因此,在一些实施例中,当系统20根据内部摄像头210拍摄驾驶员的眼部图像215后,可以根据眼部图像215来确定驾驶员的视线。例如,在一些实施例中,可以在驾驶员眼部图像215中确定驾驶员的瞳孔位置,并根据所捕捉到的瞳孔位置在预先设置的视线查找表中找到与该瞳孔位置相对应的视线。在另一些实施例中,可以采用更精准的视线跟踪器来确定驾驶员的视线。然而本公开对确定驾驶员的视线的方式不做具体限定。
接下来,系统20可以确定驾驶员的视线是否与前景子图像所在的第一范围相交。如果相交,则可以如前所述的进行后续的其他操作,可以包括(但不限于):确定背景子图像、确定背景子图像的图像属性、和/或根据该图像属性来调整前景子图像的相应图像属性。另一方面,如果不相交,则系统20可以返回前面监视驾驶员视线的操作,而不执行对前景子图像的调整。从而,可以避免由于车外景象的变动过快导致前景子图像同样变化过快引起的驾驶员不适或分心的问题。
此外,如前所述,根据本公开一些实施例的图像调整方案同样也可以应用于其他场景,例如智能眼镜等。在智能眼镜的场景中,HUD设备200可被眼睛镜片所替代,而外部摄像头220可被智能眼镜的摄像头所取代。此外,由于眼睛相对于用户的眼部的位置关系固定,因此无需使用内部摄像头210。此时,从用户的角度出发,可以根据前述方式来相应调整用户通过智能眼镜看到的叠加在背景(子)图像上的前景(子)图像,从而避免用户混淆背景(子)图像和前景(子)图像。此外,在例如VR头盔之类的应用场景中,也可以调整背景(子)图像的图像属性,从而同样可以避免背景(子)图像和前景(子)图像混淆。
此外,除了调整图像属性之外,也可以调整背景(子)图像和前景(子)图像的其它属性。例如,可以调整前景子图像的位置,以使其避开与背景子图像颜色接近的位置。
这样,通过采用根据本公开上述实施例的图像调整方法、设备、系统等,可以杜绝或至少减少HUD显示内容和外部背景混淆的现象,提升了用户体验,减少了驾驶员的危险。
此外,尽管上面主要以系统20为前述执行主体来描述,然而前述操作可以在系统20中的任何一个或多个设备(例如,HUD设备200、内部摄像头210、和/或外部摄像头220)中执行,或甚至在这些设备之外的一个或多个设备中执行。
接下来,以下将结合图1A、1B和图2,对根据本公开实施例的在如例如图4所示的硬件布置400上执行的用于调整图像的方法300进行详细的描述。
方法300可以开始于步骤S310,在步骤S310中,可以由硬件布置400的处理器406确定背景图像中与前景图像的第一范围内的前景子图像相对应的背景子图像。
在步骤S320中,可以由硬件布置400的处理器406确定背景子图像的第一图像属性。
在步骤S330中,可以由硬件布置400的处理器406至少基于该第一图像属性来调整前景子图像。
在一些实施例中,第一图像属性可以包括以下至少一项:颜色、色调、饱和度、亮度、以及对比度。在一些实施例中,步骤S310可以包括:确定观察背景图像和前景图像的观察者的观察位置;以及基于第一范围和观察位置,将背景图像的第二范围内的图像确定为背景子图像。在一些实施例中,确定观察背景图像和前景图像的观察者的观察位置可以包括:使用第一图像传感器来获取包括观察者的观察位置在内的观察者图像;根据观察者图像来确定观察位置。在一些实施例中,步骤S310可以包括:确定观察背景图像和前景图像的观察者的视线;以及如果视线与前景子图像相交,则基于第一范围和视线,将背景图像的第二范围内的图像确定为背景子图像。在一些实施例中,确定观察背景图像和前景图像的观察者的视线可以包括:使用第一图像传感器来获取观察者的眼部图像;根据眼部图像来确定观察者的视线。
在一些实施例中,背景图像可以是使用第二图像传感器来捕捉的。在一些实施例中,前景图像可以是在透明或半透明介质上投影产生的图像。在一些实施例中,透明或半透明介质可以是玻璃或塑料,且前景图像可以是由抬头显示器投影在玻璃或塑料上产生的图像。在一些实施例中,前景图像可以是在透明或半透明介质上直接生成的图像。在一些实施例中,透明或半透明介质可以是透明显示器,且前景图像可以是由透明显示器生成的图像。在一些实施例中,步骤S330可以包括:如果前景子图像的第二图像属性与第一图像属性的差值小于预定阈值,则可以将第二图像属性的值调整为具有与第一图像属性的差值大于预定阈值的值。在一些实施例中,步骤S330可以包括:如果前景子图像的第二图像属性与第一图像属性的差值小于预定阈值,且如果前景子图像的第一范围的面积大于预定阈值,则可以将第二图像属性的值调整为具有与第一图像属性的差值大于预定阈值的值。在一些实施例中,步骤S330可以包括:至少基于第一图像属性来调整前景子图像在前景图像中的范围。
图4是示出了根据本公开实施例的示例硬件布置400的框图。硬件布置400可包括处理器406(例如,中央处理器(CPU)、数字信号处理器(DSP)、微控制器单元(MCU)、神经网络处理器/加速器等)。处理器406可以是用于执行本文描述的流程的不同动作的单一处理单元或者是多个处理单元。布置400还可以包括用于从其他实体接收信号的输入单元402、以及用于向其他实体提供信号的输出单元404。输入单元402和输出单元404可以被布置为单一实体或者是分离的实体。在一些实施例中,硬件布置400可以对应于图1A和1B所示的HUD设备100和/或图2所示的HUD设备200.在另一些实施例中,硬件布置400也可以对应于其它一个或多个设备。
此外,布置400还可以包括可选的第一图像传感器420(例如,对应于前述内部摄像头110或210)和/或第二图像传感器430(例如,对应于前述外部摄像头120或220)。如前所述,第一图像传感器420和/或第二图像传感器430可以作为硬件布置400的一部分或硬件布置400之外的外接设备。
此外,布置400可以包括具有非易失性或易失性存储器形式的至少一个可读存储介质408,例如是电可擦除可编程只读存储器(EEPROM)、闪存、和/或硬盘驱动器。可读存储介质408包括计算机程序指令410,该计算机程序指令410包括代码/计算机可读指令,其在由布置400中的处理器406执行时使得硬件布置400和/或包括硬件布置400在内的电子设备可以执行例如上面结合图1~3所描述的流程及其任何变形。
计算机程序指令410可被配置为具有例如计算机程序指令模块410A~410C架构的计算机程序指令代码。因此,在例如电子设备中使用硬件布置400时的示例实施例中,布置400的计算机程序指令中的代码包括:模块410A,用于确定背景图像中与前景图像的第一范围内的前景子图像相对应的背景子图像。计算机程序指令中的代码还包括:模块410B,用于确定背景子图像的第一图像属性。计算机程序指令中的代码还包括:模块410C,用于至少基于该第一图像属性来调整前景子图像。
计算机程序指令模块实质上可以执行图1~3中所示出的流程中的各个动作,以模拟相应的硬件模块。换言之,当在处理器406中执行不同计算机程序指令模块时,它们可以对应于电子设备中的相同和/或不同硬件模块。
尽管上面结合图4所公开的实施例中的代码手段被实现为计算机程序指令模块,其在处理器406中执行时使得硬件布置400执行上面结合图1~3所描述的动作,然而在备选实施例中,该代码手段中的至少一项可以至少被部分地实现为硬件电路。
处理器可以是单个CPU(中央处理单元),但也可以包括两个或更多个处理单元。例如,处理器可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC))。处理器还可以包括用于缓存用途的板载存储器。计算机程序指令可以由连接到处理器的计算机程序指令产品来承载。计算机程序指令产品可以包括其上存储有计算机程序指令的计算机可读介质。例如,计算机程序指令产品可以是闪存、随机存取存储器(RAM)、只读存储器(ROM)、EEPROM,且上述计算机程序指令模块在备选实施例中可以用UE内的存储器的形式被分布到不同计算机程序指令产品中。
需要注意的是,在本文中被描述为通过纯硬件、纯软件和/或固件来实现的功能,也可以通过专用硬件、通用硬件与软件的结合等方式来实现。例如,被描述为通过专用硬件(例如,现场可编程门阵列(FPGA)、专用集成电路(ASIC)等)来实现的功能,可以由通用硬件(例如,中央处理单元(CPU)、数字信号处理器(DSP))与软件的结合的方式来实现,反之亦然。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。
Claims (43)
1.一种用于调整图像的方法,包括:
确定背景图像中的背景子图像,所述背景子图像与前景图像的第一范围内的前景子图像相对应;
确定所述背景子图像的第一图像属性;以及
至少基于所述第一图像属性来调整所述前景子图像;
其中,所述背景图像为外部环境的图像,所述前景图像为显示设备生成的图像。
2.根据权利要求1所述的方法,其中,所述第一图像属性包括以下至少一项:颜色、色调、饱和度、亮度、以及对比度。
3.根据权利要求1所述的方法,其中,确定背景图像中与前景图像的第一范围内的前景子图像相对应的背景子图像的步骤包括:
确定观察所述背景图像和所述前景图像的观察者的观察位置;以及
基于所述第一范围和所述观察位置,将所述背景图像的第二范围内的图像确定为所述背景子图像。
4.根据权利要求3所述的方法,其中,确定观察所述背景图像和所述前景图像的观察者的观察位置包括:
使用第一图像传感器来获取包括所述观察者的观察位置在内的观察者图像;
根据所述观察者图像来确定所述观察位置。
5.根据权利要求1所述的方法,其中,确定背景图像中与前景图像的第一范围内的前景子图像相对应的背景子图像的步骤包括:
确定观察所述背景图像和所述前景图像的观察者的视线;以及
如果所述视线与所述前景子图像相交,则基于所述第一范围和所述视线,将所述背景图像的第二范围内的图像确定为所述背景子图像。
6.根据权利要求5所述的方法,其中,确定观察所述背景图像和所述前景图像的观察者的视线包括:
使用第一图像传感器来获取所述观察者的眼部图像;
根据所述眼部图像来确定所述观察者的视线。
7.根据权利要求1所述的方法,其中,所述背景图像是使用第二图像传感器来捕捉的。
8.根据权利要求1所述的方法,其中,所述前景图像是在透明或半透明介质上投影产生的图像。
9.根据权利要求8所述的方法,其中,所述透明或半透明介质是玻璃或塑料,且所述前景图像是由所述显示设备投影在玻璃或塑料上产生的图像。
10.根据权利要求1所述的方法,其中,所述前景图像是在透明或半透明介质上直接生成的图像。
11.根据权利要求10所述的方法,其中,所述透明或半透明介质是透明显示器,且所述前景图像是由所述透明显示器生成的图像。
12.根据权利要求1所述的方法,其中,至少基于所述第一图像属性来调整所述前景子图像的步骤包括:
如果所述前景子图像的第二图像属性与所述第一图像属性的差值不大于预定阈值,则将所述第二图像属性的值调整为与所述第一图像属性的差值不小于所述预定阈值的值。
13.根据权利要求1所述的方法,其中,至少基于所述第一图像属性来调整所述前景子图像的步骤包括:
如果所述第一图像属性与所述前景图像的预设图像属性的差值不大于预定阈值,则将所述第二图像属性的值调整为与所述第一图像属性的差值不小于所述预定阈值的值。
14.根据权利要求1所述的方法,其中,至少基于所述第一图像属性来调整所述前景子图像的步骤包括:
至少基于所述第一图像属性来调整所述前景子图像在所述前景图像中的位置。
15.一种用于调整图像的设备,包括:
处理器;
存储器,存储指令,所述指令在由所述处理器执行时使得所述处理器:
确定背景图像中的背景子图像,所述背景子图像与前景图像的第一范围内的前景子图像相对应;
确定所述背景子图像的第一图像属性;以及
至少基于所述第一图像属性来调整所述前景子图像;
其中,所述背景图像为外部环境的图像,所述前景图像为显示设备生成的图像。
16.根据权利要求15所述的设备,其中,所述第一图像属性包括以下至少一项:颜色、色调、饱和度、亮度、以及对比度。
17.根据权利要求15所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
确定观察所述背景图像和所述前景图像的观察者的观察位置;以及
基于所述第一范围和所述观察位置,将所述背景图像的第二范围内的图像确定为所述背景子图像。
18.根据权利要求17所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
从第一图像传感器接收由所述第一图像传感器获取的包括所述观察者的观察位置在内的观察者图像;
根据所述观察者图像来确定所述观察位置。
19.根据权利要求15所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
确定观察所述背景图像和所述前景图像的观察者的视线;以及
如果所述视线与所述前景子图像相交,则基于所述第一范围和所述视线,将所述背景图像的第二范围内的图像确定为所述背景子图像。
20.根据权利要求19所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
从第一图像传感器接收由所述第一图像传感器获取的所述观察者的眼部图像;
根据所述眼部图像来确定所述观察者的视线。
21.根据权利要求15所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
从第二图像传感器接收由所述第二图像传感器获取的所述背景图像。
22.根据权利要求15所述的设备,其中,所述前景图像是在透明或半透明介质上投影产生的图像。
23.根据权利要求22所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
指示抬头显示器向作为所述透明或半透明介质的玻璃或塑料上进行投影以产生所述前景图像。
24.根据权利要求15所述的设备,其中,所述前景图像是在透明或半透明介质上直接生成的图像。
25.根据权利要求24所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
向作为所述透明或半透明介质工作的透明显示器输出指令,以使得所述透明显示器生成所述前景图像。
26.根据权利要求15所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
如果所述前景子图像的第二图像属性与所述第一图像属性的差值不大于预定阈值,则将所述第二图像属性的值调整为与所述第一图像属性的差值不小于所述预定阈值的值。
27.根据权利要求15所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
如果所述第一图像属性与所述前景图像的预设图像属性的差值不大于预定阈值,则将所述第二图像属性的值调整为具有与所述第一图像属性的差值不小于所述预定阈值的值。
28.根据权利要求15所述的设备,其中,所述指令在由所述处理器执行时还使得所述处理器:
至少基于所述第一图像属性来调整所述前景子图像在所述前景图像中的位置。
29.一种用于调整图像的系统,包括:
处理器;
第一图像传感器和第二图像传感器,与所述处理器通信耦接;
存储器,存储指令,所述指令在由所述处理器执行时使得所述处理器:
确定背景图像中的背景子图像,所述背景子图像与前景图像的第一范围内的前景子图像相对应;
确定所述背景子图像的第一图像属性;以及
至少基于所述第一图像属性来调整所述前景子图像;
其中,所述背景图像为外部环境的图像,所述前景图像为显示设备生成的图像。
30.根据权利要求29所述的系统,其中,所述第一图像属性包括以下至少一项:颜色、色调、饱和度、亮度、以及对比度。
31.根据权利要求29所述的系统,其中,所述指令在由所述处理器执行时还使得所述处理器:
确定观察所述背景图像和所述前景图像的观察者的观察位置;以及
基于所述第一范围和所述观察位置,将所述背景图像的第二范围内的图像确定为所述背景子图像。
32.根据权利要求31所述的系统,其中,所述指令在由所述处理器执行时还使得所述处理器:
从所述第一图像传感器接收由所述第一图像传感器获取的包括所述观察者的观察位置在内的观察者图像;
根据所述观察者图像来确定所述观察位置。
33.根据权利要求29所述的系统,其中,所述指令在由所述处理器执行时还使得所述处理器:
确定观察所述背景图像和所述前景图像的观察者的视线;以及
如果所述视线与所述前景子图像相交,则基于所述第一范围和所述视线,将所述背景图像的第二范围内的图像确定为所述背景子图像。
34.根据权利要求33所述的系统,其中,所述指令在由所述处理器执行时还使得所述处理器:
从所述第一图像传感器接收由所述第一图像传感器获取的所述观察者的眼部图像;
根据所述眼部图像来确定所述观察者的视线。
35.根据权利要求29所述的系统,其中,所述指令在由所述处理器执行时还使得所述处理器:
从所述第二图像传感器接收由所述第二图像传感器获取的所述背景图像。
36.根据权利要求29所述的系统,其中,所述前景图像是在透明或半透明介质上投影产生的图像。
37.根据权利要求36所述的系统,还包括:
抬头显示器,与所述处理器通信耦接,并被配置为在作为所述透明或半透明介质的玻璃或塑料上根据来自所述处理器的指令来产生所述前景图像。
38.根据权利要求29所述的系统,其中,所述前景图像是在透明或半透明介质上直接生成的图像。
39.根据权利要求38所述的系统,还包括:
透明显示器,与所述处理器通信耦接,并被配置为作为所述透明或半透明介质工作并根据所述处理器的指令来生成所述前景图像。
40.根据权利要求29所述的系统,其中,所述指令在由所述处理器执行时还使得所述处理器:
如果所述前景子图像的第二图像属性与所述第一图像属性的差值不大于预定阈值,则将所述第二图像属性的值调整为与所述第一图像属性的差值不小于所述预定阈值的值。
41.根据权利要求29所述的系统,其中,所述指令在由所述处理器执行时还使得所述处理器:
如果所述第一图像属性于所述前景图像的预设图像属性的差值不大于预定阈值,则将所述第二图像属性的值调整为与所述第一图像属性的差值不小于所述预定阈值的值。
42.根据权利要求29所述的系统,其中,所述指令在由所述处理器执行时还使得所述处理器:
至少基于所述第一图像属性来调整所述前景子图像在所述前景图像中的位置。
43.一种存储指令的计算机可读存储介质,所述指令在由处理器执行时使得所述处理器执行根据权利要求1~14中任一项所述的方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2017/116179 WO2019113887A1 (zh) | 2017-12-14 | 2017-12-14 | 用于调整图像的方法、设备、系统和计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109074685A true CN109074685A (zh) | 2018-12-21 |
CN109074685B CN109074685B (zh) | 2021-02-26 |
Family
ID=64831280
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780023521.0A Expired - Fee Related CN109074685B (zh) | 2017-12-14 | 2017-12-14 | 用于调整图像的方法、设备、系统和计算机可读存储介质 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11238834B2 (zh) |
CN (1) | CN109074685B (zh) |
WO (1) | WO2019113887A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110675527A (zh) * | 2019-09-28 | 2020-01-10 | 孔华 | 碰瓷行为现场预防装置 |
CN111683237A (zh) * | 2020-04-17 | 2020-09-18 | 中国航空无线电电子研究所 | 一种具有色彩自调节功能的平视显示界面颜色处理方法 |
CN115657372A (zh) * | 2022-11-04 | 2023-01-31 | 武汉华星光电技术有限公司 | 显示装置及电子设备 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113840087B (zh) * | 2021-09-09 | 2023-06-16 | Oppo广东移动通信有限公司 | 声音处理方法、装置、电子设备和计算机可读存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103561223A (zh) * | 2013-09-05 | 2014-02-05 | 苏州佳世达光电有限公司 | 根据显示背景进行投影的方法及系统 |
CN104635338A (zh) * | 2013-11-07 | 2015-05-20 | 柯尼卡美能达株式会社 | 具有透过型hmd的信息显示系统以及显示控制方法 |
US20150175068A1 (en) * | 2013-12-20 | 2015-06-25 | Dalila Szostak | Systems and methods for augmented reality in a head-up display |
US20160109701A1 (en) * | 2014-10-15 | 2016-04-21 | GM Global Technology Operations LLC | Systems and methods for adjusting features within a head-up display |
US20170148216A1 (en) * | 2015-11-25 | 2017-05-25 | Continental Automotive Systems, Inc. | Display system adjustable based on background |
US20170230628A1 (en) * | 2016-02-10 | 2017-08-10 | Yoichi Ichikawa | Image display apparatus and image display method |
CN107250728A (zh) * | 2014-12-14 | 2017-10-13 | 埃尔比特系统公司 | 所显示彩色符号表示的视觉感知加强 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140375541A1 (en) * | 2013-06-25 | 2014-12-25 | David Nister | Eye tracking via depth camera |
US10564714B2 (en) * | 2014-05-09 | 2020-02-18 | Google Llc | Systems and methods for biomechanically-based eye signals for interacting with real and virtual objects |
JP2016202716A (ja) * | 2015-04-24 | 2016-12-08 | 株式会社コーエーテクモゲームス | プログラム及び記録媒体 |
CN107085306B (zh) * | 2017-06-15 | 2023-07-04 | 优奈柯恩(北京)科技有限公司 | 增强现实设备的显示装置、增强现实设备及平视显示器 |
CN107102442B (zh) * | 2017-06-23 | 2020-04-07 | 江苏泽景汽车电子股份有限公司 | 一种hud的亮度自动调节装置的调节方法 |
CN107462994A (zh) * | 2017-09-04 | 2017-12-12 | 浙江大学 | 沉浸式虚拟现实头戴显示装置和沉浸式虚拟现实显示方法 |
-
2017
- 2017-12-14 CN CN201780023521.0A patent/CN109074685B/zh not_active Expired - Fee Related
- 2017-12-14 WO PCT/CN2017/116179 patent/WO2019113887A1/zh active Application Filing
-
2020
- 2020-01-09 US US16/738,324 patent/US11238834B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103561223A (zh) * | 2013-09-05 | 2014-02-05 | 苏州佳世达光电有限公司 | 根据显示背景进行投影的方法及系统 |
CN104635338A (zh) * | 2013-11-07 | 2015-05-20 | 柯尼卡美能达株式会社 | 具有透过型hmd的信息显示系统以及显示控制方法 |
US20150175068A1 (en) * | 2013-12-20 | 2015-06-25 | Dalila Szostak | Systems and methods for augmented reality in a head-up display |
US20160109701A1 (en) * | 2014-10-15 | 2016-04-21 | GM Global Technology Operations LLC | Systems and methods for adjusting features within a head-up display |
CN107250728A (zh) * | 2014-12-14 | 2017-10-13 | 埃尔比特系统公司 | 所显示彩色符号表示的视觉感知加强 |
US20170148216A1 (en) * | 2015-11-25 | 2017-05-25 | Continental Automotive Systems, Inc. | Display system adjustable based on background |
US20170230628A1 (en) * | 2016-02-10 | 2017-08-10 | Yoichi Ichikawa | Image display apparatus and image display method |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110675527A (zh) * | 2019-09-28 | 2020-01-10 | 孔华 | 碰瓷行为现场预防装置 |
CN111683237A (zh) * | 2020-04-17 | 2020-09-18 | 中国航空无线电电子研究所 | 一种具有色彩自调节功能的平视显示界面颜色处理方法 |
CN115657372A (zh) * | 2022-11-04 | 2023-01-31 | 武汉华星光电技术有限公司 | 显示装置及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN109074685B (zh) | 2021-02-26 |
WO2019113887A1 (zh) | 2019-06-20 |
US20200152156A1 (en) | 2020-05-14 |
US11238834B2 (en) | 2022-02-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108020923B (zh) | 车用显示装置 | |
CN206031079U (zh) | 一种增强现实车载平视显示器ar‑hud | |
US20210070176A1 (en) | Enhanced augmented reality experience on heads up display | |
CN108196366B (zh) | 一种调节显示亮度的方法和装置 | |
US11238834B2 (en) | Method, device and system for adjusting image, and computer readable storage medium | |
JP6669053B2 (ja) | ヘッドアップディスプレイシステム | |
US20170060235A1 (en) | Method of operating a vehicle head-up display | |
US11176749B2 (en) | In-vehicle display device three-dimensional image generation | |
JP5488303B2 (ja) | 車両用表示装置 | |
US20150124097A1 (en) | Optical reproduction and detection system in a vehicle | |
US20180334101A1 (en) | Simulated mirror or remote view display via transparent display system and method | |
CN113866983A (zh) | 抬头显示装置、抬头显示装置的显示方法 | |
JP2008285105A (ja) | 情報表示装置 | |
US11106045B2 (en) | Display system, movable object, and design method | |
CN206002774U (zh) | 带显示图像颜色自适应功能的抬头显示器 | |
JP7268526B2 (ja) | 車両用表示制御装置、及び車両用表示システム | |
CN111923835A (zh) | 一种基于车辆后视显示方法 | |
CN112026652A (zh) | 一种基于眼球识别激光成像的后视图像抬头显示系统 | |
US11828947B2 (en) | Vehicle and control method thereof | |
JP2019159216A (ja) | 車載表示装置、車載表示装置を制御する方法及びコンピュータプログラム | |
CN111086518B (zh) | 显示方法、装置、车载平视显示设备及存储介质 | |
JP6607128B2 (ja) | 虚像表示装置、虚像表示方法および制御プログラム | |
WO2017110014A1 (ja) | 画像表示装置、画像表示方法および制御プログラム | |
WO2024070204A1 (ja) | 虚像表示装置、移動体、虚像表示装置の駆動方法、及びプログラム | |
US20230234442A1 (en) | Method For Displaying Augmented Reality Information In Vehicles |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210226 |
|
CF01 | Termination of patent right due to non-payment of annual fee |