CN118138846A - 字幕亮度调整方法及相关设备 - Google Patents
字幕亮度调整方法及相关设备 Download PDFInfo
- Publication number
- CN118138846A CN118138846A CN202410559334.6A CN202410559334A CN118138846A CN 118138846 A CN118138846 A CN 118138846A CN 202410559334 A CN202410559334 A CN 202410559334A CN 118138846 A CN118138846 A CN 118138846A
- Authority
- CN
- China
- Prior art keywords
- brightness
- caption
- hdr video
- subtitle
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 62
- 230000006978 adaptation Effects 0.000 claims description 32
- 230000015654 memory Effects 0.000 claims description 30
- 230000000875 corresponding effect Effects 0.000 claims description 28
- 230000002596 correlated effect Effects 0.000 claims description 9
- 230000008569 process Effects 0.000 abstract description 9
- 230000006870 function Effects 0.000 description 24
- 238000004891 communication Methods 0.000 description 22
- 230000003044 adaptive effect Effects 0.000 description 13
- 238000010295 mobile communication Methods 0.000 description 13
- 238000012545 processing Methods 0.000 description 13
- 230000003247 decreasing effect Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 10
- 238000007726 management method Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 6
- 208000003464 asthenopia Diseases 0.000 description 5
- 230000003190 augmentative effect Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010606 normalization Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 229920001621 AMOLED Polymers 0.000 description 2
- 241001270131 Agaricus moelleri Species 0.000 description 2
- 241001085205 Prenanthella exigua Species 0.000 description 2
- 230000003416 augmentation Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000004313 glare Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000035772 mutation Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 210000001260 vocal cord Anatomy 0.000 description 1
Landscapes
- Controls And Circuits For Display Device (AREA)
Abstract
本申请涉及计算机技术领域,提供一种字幕亮度调整方法以及相关设备,字幕亮度调整方法可应用于包含显示屏的终端设备,字幕亮度调整方法可包括:获取高动态范围(HDR)视频中的字幕的亮度等级,以及获取在播放HDR视频前显示屏的屏幕背光亮度;基于屏幕背光亮度确定字幕亮度调整参数;基于字幕亮度调整参数更新字幕的亮度等级,以及基于更新后的亮度等级显示字幕。利用上述方法,基于终端设备在播放HDR视频前的屏幕背光亮度对HDR视频中的字幕亮度进行调整,可以解决在播放HDR视频过程中,字幕亮度过高给用户带来刺眼的问题,提升用户的观看体验。
Description
技术领域
本申请涉及计算机技术领域,特别涉及一种字幕亮度调整方法及相关设备。
背景技术
相比于传统的标准动态范围(standard dynamic range,SDR),高动态范围(highdynamic range,HDR)技术能够表达出更丰富的亮度细节和暗部细节,使得整个画面更丰富,呈现出更佳的画质。
相关技术中,在播放HDR视频时,可以通过提升画面亮度和扩展动态范围的方式对画面进行处理,从而提升影像播放效果。然而,在对画面亮度进行调整时,字幕亮度会一并进行调整。由于视频中的字幕通常为白色,亮度过高的字幕较容易产生刺眼的感觉,影响用户的观看体验。
发明内容
鉴于以上内容,有必要提供一种字幕亮度调整方法及相关设备,可以解决HDR视频字幕亮度过高给用户带来刺眼的问题。
第一方面,本申请提供一种字幕亮度调整方法,应用于终端设备,终端设备包括显示屏,字幕亮度调整方法包括:获取HDR视频中的字幕的亮度等级,以及获取在播放所述HDR视频前显示屏的屏幕背光亮度;基于屏幕背光亮度确定字幕亮度调整参数;基于字幕亮度调整参数更新字幕的亮度等级,以及基于更新后的亮度等级显示字幕。
采用上述技术方案,在播放的HDR视频时,基于终端设备在播放HDR视频前的屏幕背光亮度对HDR视频中的字幕亮度进行调整,使得字幕亮度可与播放HDR视频前的屏幕背光亮度相适配,字幕的颜色一般为白色,可避免过亮的白色字幕对用户眼睛产生刺眼的感觉,且由于HDR字幕亮度降低,还可以降低显示屏功耗,增加终端设备的续航能力。
在一种可能的实现方式中,基于屏幕背光亮度确定字幕亮度调整参数,包括:获取用户的观看时长,观看时长基于终端设备的亮屏时长、HDR视频的播放时长、以及终端设备中的视频应用的运行时长中的一者确定;基于观看时长以及屏幕背光亮度确定字幕亮度调整参数。
采用上述技术方案,由于人眼长时间观看高亮字幕亦会较容易引起视觉疲劳,通过进一步设定基于终端设备在播放HDR视频前的屏幕背光亮度以及用户的观看时长对HDR视频中的字幕亮度进行调整,使得字幕亮度可与播放HDR视频前的屏幕背光亮度相适配以及与观看时长相匹配,可实现字幕亮度随着观看时长的增加,HDR字幕亮度降低。本申请还可根据终端设备的亮屏时长、HDR视频的播放时长或者终端设备中的视频应用的运行时长确定用户的观看时长,例如,将终端设备当天的亮屏时长,或者HDR视频的播放时长,或者终端设备中的视频应用当天的运行时长作为用户的观看时长。视频应用的运行时长可以是指播放该HDR视频的应用的运行时长,或者是终端设备安装的所有视频类应用的总运行时长。终端设备的亮屏时长、HDR视频的播放时长、终端设备中的视频应用的运行时长可以通过获取设备或应用运行记录得到。
在一种可能的实现方式中,观看时长根据预设重置时长进行重新确定。
采用上述技术方案,预设重置时长可以是以天为单位或以预设灭屏时长为单位,通过设定用户的观看时长以天为单位或以预设灭屏时长为单位进行清零并重新确定,实现字幕的亮度调整与人眼疲劳度/设备使用习惯相关联,进一步提升用户的观看体验。
在一种可能的实现方式中,获取用户的观看时长,包括:在播放HDR视频的情形下,每间隔第一预设时长获取观看时长。
采用上述技术方案,由于设定了字幕的亮度适配值与观看时长相关,为了避免基于观看时长频繁更新字幕的亮度适配值,通过设定终端设备在播放该HDR视频之后,每隔第一预设时长进行一次字幕的亮度值更新,避免终端设备频繁改变HDR视频字幕的亮度,可进一步提升用户的观看体验,降低屏幕功耗。第一预设时长可以根据实际需求进行设定,例如,第一预设时长为0.5h、0.6h等等。
在一种可能的实现方式中,字幕亮度调整参数包括字幕的亮度适配值,基于字幕亮度调整参数更新字幕的亮度等级,包括:将字幕的亮度等级更新为与亮度适配值对应的亮度等级,其中字幕的亮度适配值与在播放HDR视频前的屏幕背光亮度的亮度值成正相关,以及与用户的观看时长成负相关。
采用上述技术方案,基于在播放HDR视频前的屏幕背光亮度以及用户的观看时长,确定字幕的亮度适配值,且字幕的亮度适配值与在播放HDR视频前的屏幕背光亮度的亮度值成正相关,以及与用户的观看时长成负相关,即播放HDR视频前的屏幕背光亮度越高,字幕亮度越高,避免播放HDR视频前后,亮度较高的白色字幕对用户眼睛产生刺眼的感觉,且随着观看时长的增加,HDR字幕亮度降低,避免长时间观看高亮度字幕引起视觉疲劳。
在一种可能的实现方式中,字幕亮度调整参数包括字幕的亮度调整值或者亮度调整率,基于字幕亮度调整参数更新字幕的亮度等级,包括:基于字幕的亮度等级,确定字幕的亮度设定值;基于字幕的亮度调整值或者亮度调整率更新字幕的亮度设定值;基于更新后的亮度设定值,确定字幕的第一目标亮度等级;将字幕的亮度等级更新为第一目标亮度等级,其中字幕的亮度调整值或者亮度调整率与在播放HDR视频前的屏幕背光亮度的亮度值成负相关,以及与观看时长成正相关。
采用上述技术方案,基于在播放HDR视频前的屏幕背光亮度以及用户的观看时长,确定字幕的亮度调整值或者亮度调整率(例如,百分率、千分率等),且设定字幕的亮度调整值或者亮度调整率与在播放HDR视频前的屏幕背光亮度的亮度值成负相关,以及与用户的观看时长成正相关,实现在播放HDR视频前的屏幕背光亮度越高,亮度调整值或者亮度调整率越低,避免播放HDR视频前后,亮度较高的白色字幕对用户眼睛产生刺眼的感觉,且随着观看时长的增加,HDR字幕亮度降低,避免长时间观看高亮度字幕引起视觉疲劳。
在一种可能的实现方式中,基于更新后的亮度等级显示字幕,包括:获取在播放HDR视频时的屏幕背光亮度,及基于播放HDR视频时的屏幕背光亮度和更新后的亮度等级显示字幕。
采用上述技术方案,在基于在播放HDR视频前的屏幕背光亮度,或者基于在播放HDR视频前的屏幕背光亮度和用户的观看时长更新字幕的亮度等级之后,还可以基于播放HDR视频时的屏幕背光亮度进一步对字幕的亮度等级进行更新,实现字幕亮度还可以随着用户手动调整屏幕背光亮度而进行调整,进一步提升用户的观看体验。
在一种可能的实现方式中,基于播放HDR视频时的屏幕背光亮度和更新后的亮度等级显示字幕,包括:确定播放HDR视频时的屏幕背光亮度与HDR视频对应的基准背光亮度的差值;基于差值和更新后的亮度等级,确定字幕的第二目标亮度等级;基于第二目标亮度等级显示字幕。
采用上述技术方案,可以将设备正常播放HDR视频时的屏幕背光亮度作为基准背光亮度,基于当前播放HDR视频时的屏幕背光亮度与HDR视频对应的基准背光亮度的差值对更新后的亮度等级再次进行调整,差值越大,调整幅度越大,实现字幕亮度还可以随着用户手动调整屏幕背光亮度而进行调整。基准背光亮度还可以根据实际需求进行设定,例如,由开发者进行预先定义。
在一种可能的实现方式中,终端设备包括亮度传感器,基于更新后的亮度等级显示字幕,包括:在播放HDR视频时,每间隔第二预设时长利用亮度传感器采集到的亮度数据确定环境亮度;基于环境亮度和更新后的亮度等级显示字幕。
采用上述技术方案,在基于在播放HDR视频前的屏幕背光亮度以及用户的观看时长调整字幕的亮度等级之后,还可以基于当前播放HDR视频时的环境亮度进一步对字幕的亮度等级进行调整,实现字幕亮度还可以随着环境亮度的改变而进行调整,进一步提升用户的观看体验。
在一种可能的实现方式中,基于环境亮度和更新后的亮度等级显示字幕,包括:确定环境亮度与HDR视频对应的基准环境亮度的差值;基于差值和更新后的亮度等级,确定字幕的第三目标亮度等级;基于第三目标亮度等级显示字幕。
采用上述技术方案,可以根据实际需求设定与HDR视频对应的基准环境亮度并存储于终端设备中,终端设备还可基于当前播放HDR视频时的环境亮度与HDR视频对应的基准环境亮度的差值再次对更新后的亮度等级进行调整,差值越大,调整幅度越大,实现字幕亮度还可以随着环境亮度进行调整。
在一种可能的实现方式中,获取在播放HDR视频前的屏幕背光亮度,包括:获取在播放HDR视频前计预设时长内显示屏的多个屏幕背光亮度值;基于多个屏幕背光亮度值确定在播放HDR视频前显示屏的屏幕背光亮度。
采用上述技术方案,可以以播放HDR视频的时刻为当前时刻,获取当前时刻向前计预设时长内的多个屏幕背光亮度值,例如,将多个屏幕背光亮度值的均值、中值等作为在播放HDR视频前的屏幕背光亮度,以实现较准确地表征在播放HDR视频前的屏幕背光亮度,设定字幕亮度与播放HDR视频前的屏幕背光亮度相适配,避免播放HDR视频前后,亮度较大的白色字幕对用户眼睛产生刺眼的感觉。
在一种可能的实现方式中,获取在播放HDR视频前显示屏的屏幕背光亮度,包括:获取在播放HDR视频前播放的SDR视频的屏幕背光亮度;基于SDR视频的屏幕背光亮度,确定在播放HDR视频前显示屏的屏幕背光亮度。
采用上述技术方案,可以将播放HDR视频前播放的SDR视频的屏幕背光亮度作为在播放HDR视频前显示屏的屏幕背光亮度,例如,将播放SDR视频过程中的屏幕背光亮度的均值、中值等作为在播放HDR视频前的屏幕背光亮度,以实现较准确地表征在播放HDR视频前的屏幕背光亮度,设定字幕亮度与播放HDR视频前的屏幕背光亮度相适配,避免播放HDR视频前后,亮度较大的白色字幕对用户眼睛产生刺眼的感觉。
第二方面,本申请实施例提供一种终端设备,包括存储器和处理器,其中,存储器用于存储计算机可读指令;处理器用于读取计算机可读指令并实现第一方面及其可选的实现方式提供的方法。
第三方面,本申请实施例提供一种计算机存储介质,存储有计算机可读指令,且计算机可读指令在被处理器执行时实现第一方面及其可选的实现方式提供的方法。
第四方面,本申请实施例提供一种计算机程序产品,计算机程序产品中包含计算机可读指令,当该计算机可读指令被处理器执行时实现第一方面及其可选的实现方式提供的方法。
上述第二方面、第三方面及第四方面所获得的技术效果与第一方面或第二方面中对应的技术手段获得的技术效果近似,在这里不再赘述。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的SDR光电转换曲线的示意图;
图2为本申请实施例提供的HDR光电转换曲线的示意图;
图3为本申请实施例提供的字幕亮度调整方法的应用场景示意图;
图4为本申请实施例提供的终端设备播放SDR视频的字幕显示效果示意图;
图5为本申请实施例提供的终端设备播放HDR视频的字幕显示效果示意图;
图6为本申请实施例提供的终端设备对HDR视频的字幕亮度进行调整的流程示意图;
图7为本申请实施例提供的终端设备对HDR视频中的字幕的亮度等级进行调整的流程示意图;
图8为本申请实施例提供的终端设备对HDR视频的字幕亮度进行调整的流程示意图;
图9为本申请实施例提供的字幕亮度调整方法的流程示意图;
图10为本申请实施例提供的终端设备的软件架构图;
图11为本申请实施例提供的终端设备实现HDR视频的画面与字幕的亮度设定的软件架构图;
图12为本申请实施例提供的终端设备的一种结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述,显然,所描述的实施例仅仅是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本申请实施例的描述中,“示例性”、“或者”、“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性”、“或者”、“例如”等词旨在以具体方式呈现相关概念。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请中的技术领域的技术人员通常理解的含义相同。本申请的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本申请。应理解,本申请中除非另有说明,“/”表示或的意思。例如,A/B可以表示A或B。本申请中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系。例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B三种情况。“至少一个”是指一个或者多个。“多个”是指两个或多于两个。例如,a、b或c中的至少一个,可以表示:a,b,c,a和b,a和c,b和c,a、b和c七种情况。应当理解的是,本文的流程图中所示步骤的顺序可以改变,某些也可以省略。
动态范围可以用于描述一帧图像的亮度变化范围,其可以表示图像中最大亮度与最小亮度之间的差异,动态范围越大,图像的亮度变化范围越大。
通常地,动态范围可以包括标准动态范围(Standard Dynamic Range,SDR)和高动态范围(High Dynamic Range,HDR)。其中,对于SDR,图像的最高亮度一般仅能达到100尼特,最低亮度一般仅能达到0.1尼特。一般而言,室内照明的亮度为100~300尼特,室外多云天气时的亮度为500尼特,室外晴天时的亮度为2000尼特,在采用SDR显示技术进行图像显示时,由于图像中光线较强的部分像素点的亮度值最大仅为100尼特,低于场景中的实际亮度值,无法表达图像中的亮部细节,显示效果较差。相比于SDR,HDR具有更大的曝光范围,在采用HDR显示技术进行图像显示时,图像的最低亮度可达到0.001,最高亮度可达到1000尼特,甚至可达到10000尼特。对于HDR,由于一帧图像中不同像素点的亮度变化范围较大,图像中的光线较强的像素点和光线较暗的像素点对应的亮度均能与场景中的实际亮度相匹配,使得图像能够表达出更丰富的亮度细节和暗部细节,整个画面更丰富,能够呈现出更佳的画质。
在终端设备播放HDR视频时,终端设备会对HDR视频的视频帧进行处理,使得HDR视频的视频帧的亮部的像素点的亮度值更高,而暗部的像素点的亮度值更低,进而能够表达出更丰富的亮度细节和暗部细节,呈现出更佳的画质。但是,由于视频中的字幕通常为白色,在提升图像的亮部的像素点的亮度值的同时,字幕的亮度值也会一并提升,导致字幕亮度过高,产生刺眼的感觉,影响用户的观看体验。
例如,在用户通过应用软件观看HDR视频时,视频帧的亮度值会明显提升,终端设备的屏幕背光亮度会明显变亮,随之字幕的亮度也会明显提升,而字幕的颜色一般为白色,过亮的白色字幕可能会产生刺眼的感觉,导致用户眼部的不适,影响用户的观看体验。
又例如,在用户通过应用软件观看视频时,如果当前播放的视频为SDR视频,视频帧的亮度值最高可达到100尼特。在用户切换为下一视频时,如果下一视频为HDR视频,视频帧的亮部对应的像素点的亮度值会明显升高(例如,从100尼特升高至1000尼特),字幕的亮度也会明显提升,进而可能产生刺眼的感觉,影响用户的观看体验。
针对上述技术问题,本申请实施例提供了一种字幕亮度调整方法,该字幕亮度调整方法可应用于终端设备,该方法可在终端设备播放HDR视频、且HDR视频包括字幕的情形下,根据终端设备在播放HDR视频前的屏幕背光亮度以及用户的观看时长(例如,基于设备的亮屏时长或者视频应用的运行时长确定观看时长)对HDR视频中的字幕亮度进行调整,以解决相关技术在播放HDR视频时,由于HDR视频中的字幕亮度过亮产生刺眼的问题,进而可以提升用户的观看体验。
在一些实施例中,终端设备可以是指包括显示屏的电子设备。终端设备包括但不限于手机、平板电脑、桌面型、膝上型、手持计算机、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、增强现实(augmented reality,AR)\虚拟现实(virtual reality,VR)设备、智能电视、智慧屏等包括显示屏的设备,本申请实施例对电子设备的具体形态不作特殊限制。
目前大部分的彩色数字图像中,红色(R)、绿色(G)和蓝色(B)三个通道的灰度分别使用一个字节来存储,亦即R、G、B三个通道的灰度范围分别是0~255。由于终端设备的存储方式并不能达到真实世界的高亮度,因此需要光电转换函数(optical-electro transferfunction,OETF)将真实世界中的亮度表示为终端设备的存储方式对应的亮度。例如,真实世界中的亮度为10000尼特,终端设备用8比特存储亮度信息,该存储方式下可存储的最大值为255,因此,此种情形下,可以将10000尼特表示为255。又例如,真实世界中的亮度为10000尼特,终端设备用10比特存储亮度信息,该存储方式下可存储的最大值为1023,因此,此种情形下,可以将10000尼特表示为1023。
对于SDR,一般使用Gamma 函数作为电光转换函数(electro-optical transferfunction,EOTF),该EOTF可以表示为:
f(x)=x2.2;
其中,x为对画面/字幕的亮度等级进行归一化处理得到的值,x也可以称为非线性RGB值,x的取值范围为[0,1],例如,画面/字幕的亮度等级的取值范围为0~255,即x可以表示为对0~255进行归一化处理得到的值。f(x)为光信号值,f(x)的范围为[0,1]。
在计算得到f(x)的值,可以根据图1所示的Gamma曲线查找得到对应的亮度值。在图1中,横坐标为亮度值,纵坐标为光信号值。由图1可知,Gamma曲线对高亮部分进行了截断,可以表达的亮度动态范围有限,最大亮度只有100尼特。
对于HDR,为了实现存储更大范围的亮度,一般使用混合对数(hybrid log-gamma,HLG)曲线或者感知量化(perceptual quantization,PQ)曲线来表征光信号值与亮度值之间的映射关系。
以PQ函数作为EOTF为例,该EOTF可以表示为:
;
其中,FD表示显示的亮度值,E’为非线性RGB值,E’的取值范围为[0,1],例如,画面/字幕的亮度等级的取值范围为0~1023,即E’可表示为对0~1023进行归一化处理得到的值。m1、m2、c1、c2、c3均为PO光电转移系数。例如,m1=0.1593017578125,m2=78.84375,c1= c3-c2+1,c2=18.8515625,c3=18.6875。
如图2所示,为PQ曲线的示意图,横坐标为非线性RGB值(E’),纵坐标为显示的亮度值(FD)。
如图3所示,为本申请实施例适用的一种场景示意图。该场景中包括终端设备100和服务器200,图3中以终端设备100为手机为例进行说明。
终端设备100与服务器200可以通过多种通信方式进行数据通信,例如,终端设备100可以通过有线方式或者无线方式和服务器200进行通信连接,无线方式可以是移动通信网络、无线局域网(wireless local area network,WLAN)等。服务器200可以向终端设备100提供各种视频内容,视频内容可以是SDR视频或者HDR视频,以使得用户可以使用终端设备100播放服务器200提供的视频内容。
在一些实施例中,服务器200可以是指单个服务器设备、一个服务器集群、或者多个服务器集群,本申请实施例对此不作限定。
在一些实施例中,终端设备100也可以播放本地保存的视频内容,即终端设备在未与服务器200连接的情形下,亦可进行视频内容的播放。
在视频内容播放时,为了便于用户准确理解视频内容,一般会将视频内容中的语音内容以字幕方式进行显示,用户通过字幕文字和音频语音相结合方式来观看。另外,字幕也能用于翻译外语视频,让不懂该外语的观众,既能听见原作的声带,同时理解视频内容。
如图4所示,假设终端设备100在第一时刻播放的视频内容为SDR视频,在用户观看到的显示界面中,字幕111具有第一字体亮度。如图5所示,假设终端设备100在第一时刻之后的第二时刻播放的视频内容为HDR视频,在用户观看到的显示界面中,字幕112具有第二字体亮度。
从图4及图5中可以看出,字幕111的字体亮度小于字幕112的字体亮度。对于字幕112的字体亮度,在用户处于光线较暗的环境下使用终端设备100播放HDR视频的情形下,较容易给用户带来刺眼的体验。
为了进一步理解本申请的终端设备可解决相关技术在提升HDR视频帧的亮度值时,HDR视频帧中的字幕亮度值随之大幅度增大,而导致用户眼部不适的问题,结合图6对本申请一实施例提供的终端设备对HDR视频的字幕亮度进行调整的步骤流程进行详细描述。
S61,获取HDR视频中的字幕的第一亮度等级。
在一些实施例中,终端设备可以通过对HDR视频的数据流进行解码,及对解码得到的视频数据、音频数据、字幕数据进行显示与播放,从而使得用户可以通过终端设备的显示屏观看到HDR视频的画面与字幕,通过终端设备的扬声器收听到HDR视频的声音。
在一些实施例中,HDR视频的数据流可以是传输流(transport stream,TS)格式的数据流,也可以是其他类似格式的数据流。例如数据流也可以使用音频视频交织(audiovideo interleaved,AVI)格式来封装音频数据、视频数据和字幕数据,本申请对HDR视频的数据流的传输格式不做限定。
在一些实施例中,字幕数据中可以包括:字幕的字体、大小、位置、亮度等级以及字幕的文本内容等信息。终端设备可以通过解析字幕数据包,得到字幕的第一亮度等级。对于一个HDR视频而言,初始配置的字幕的亮度等级一般为一个固定值,即显示于不同的HDR视频帧上的字幕的第一亮度等级相同。
在一些实施例中,对于具备自动亮度调整功能的终端设备而言,在自动亮度调整功能处于关闭的情形下,终端设备可以基于画面的亮度等级进行画面内容的亮度设定,以及基于字幕的第一亮度等级进行字幕的亮度设定。例如,若终端设备存储的HDR亮度曲线为图2所示的PQ曲线,第一亮度等级以10字节进行存储,终端设备可以先对第一亮度等级进行归一化处理,再基于归一化处理得到的值查找PQ曲线,得到与该亮度等级对应的亮度值,以进行亮度设置。又例如,终端设备对第一亮度等级进行归一化处理之后,可以基于预存的EOTF得到与该第一亮度等级对应的亮度值。
在一些实施例中,在自动亮度调整功能处于关闭的情形下,终端设备还可以获取当前的屏幕背光亮度,基于当前的屏幕背光亮度调整画面的亮度等级与字幕的第一亮度等级(例如,屏幕背光亮度相对于基准背光亮度提升/降低第一百分率,画面的亮度等级与字幕的第一亮度等级对应提升/降低第二百分率,基准背光亮度可以根据实际需求进行设定,或者根据HDR视频初始配置的画面/字幕的亮度进行设定),实现在屏幕背光亮度大时,画面与字幕的亮度也相应增大,在屏幕背光亮度小时,画面与字幕的亮度也相应减小。
在一些实施例中,在自动亮度调整功能处于开启的情形下,终端设备可以通过亮度传感器检测当前环境的亮度,基于当前环境的亮度调整画面的亮度等级与字幕的第一亮度等级(例如,环境亮度相对于基准环境亮度提升/降低第三百分率,画面的亮度等级与字幕的第一亮度等级对应提升/降低第四百分率,基准环境亮度可以根据实际需求进行设定,或者根据HDR视频初始配置的画面/字幕的亮度进行设定),实现基于当前环境的亮度自动调整画面与字幕的亮度。例如,在当前环境的亮度大时,画面与字幕的亮度也相应增大,在当前环境的亮度小时,画面与字幕的亮度也相应减小。
在一些实施例中,字幕的第一亮度等级可以是指字幕文本的亮度等级,也可以是指字幕区域的亮度等级,字幕区域为围绕字幕文本的矩形边框部分。
S62,获取在播放HDR视频前的屏幕背光亮度以及用户的观看时长。
在一些实施例中,终端设备包括显示屏,获取在播放HDR视频前的屏幕背光亮度可以是指获取在播放HDR视频前显示屏的屏幕背光亮度。
例如,以终端设备开始播放HDR视频的时刻为当前时刻,终端设备在播放HDR视频前的屏幕背光亮度可以是指当前时刻往前计预设时长,在该预设时长内的屏幕背光亮度的均值、中值等。预设时长可以根据实际需求进行设定,本申请实施例对此不作限定,例如,预设时长可以为1分钟、10分钟等。
在一些实施例中,若在播放该HDR视频前播放过SDR视频,也可以将在播放该HDR视频前播放的SDR视频的屏幕背光亮度作为在播放该HDR视频前显示屏的屏幕背光亮度。
在一些实施例中,用户的观看时长可以是指终端设备的亮屏时长、HDR视频的播放时长、或者终端设备中视频播放类应用的运行时长。用户的观看时长可以以天为单位进行清零并重新统计,或者以预设灭屏时长为单位进行清零并重新统计。预设灭屏时长可以根据实际需求进行设定,本申请实施例对此不作限定,例如,预设灭屏时长可以设定为2h、3h等。
在一些实施例中,终端设备可以记录显示屏的灭屏时段,通过遍历各个灭屏时段,实现获取相邻的两个灭屏时段之间的时间间隔,若时间间隔小于第一时长,可以认为相邻的两个灭屏时段是属于同一个灭屏时段,此种情形下,可以将相邻的该两个灭屏时段进行合并,得到一个新的灭屏时段,即该相邻的该两个灭屏时段构成一个灭屏时长。第一时长可以根据实际需求进行设定,本申请实施例对此不作限定,第一时长可选为5分钟、10分钟等。
S63,基于在播放HDR视频前的屏幕背光亮度以及用户的观看时长,确定字幕的亮度适配值。
在一些实施例中,在获取到终端设备在播放HDR视频前的屏幕背光亮度以及用户的观看时长之后,可以基于在播放HDR视频前的屏幕背光亮度以及用户的观看时长确定字幕的亮度适配值,以使得字幕的亮度与终端设备在播放HDR内容前的亮度进行适配,同时与观看时长相适配,可以减轻终端设备由显示低动态范围(low dynamic range, LDR)或SDR画面切换至显示HDR画面引起的亮度突变产生的高亮白色字幕刺眼的感觉(相比于突变的高亮画面,突变的高亮白色字幕更容易产生刺眼的感觉),且可以减轻用户长时间观看高亮度字幕引起的视觉疲劳。
在一些实施例中,字幕的亮度适配值可以与播放HDR视频前的屏幕背光亮度成正相关,且与用户的观看时长成负相关。
例如,可以预先构建一个有关字幕的亮度适配值与播放HDR视频前的屏幕背光亮度和用户的观看时长的函数关系式,基于该函数关系式确定字幕的亮度适配值。例如,该函数关系式可以表示为:Brightness_H = (k*Brightness_S)/T。其中,Brightness_H为字幕的亮度适配值,Brightness_S为在播放HDR视频前的屏幕背光亮度,T为用户的观看时长,k为预设系数值。k的值可以根据实际需求进行设定,本申请实施例对此不作限定。
在一些实施例中,由于参数Brightness_S与T存在数量级特征差异,还可以先对参数Brightness_S与T进行标准化处理之后,再代入上述函数关系式计算得到对应的Brightness_H。
在一些实施例中,k的值还可以HDR视频中的字幕的初始的亮度等级进行调整,使得在播放不同的HDR视频时,即使具有在播放该HDR视频前相同的屏幕背光亮度以及用户的观看时长,仍然可以对应不同的字幕亮度适配值。即调整后的字幕的亮度适配值与HDR视频初始配置的字幕的亮度等级相关联。
作为一种可选的实施例,终端设备也可以仅基于在播放HDR视频前的屏幕背光亮度确定字幕的亮度适配值。
作为一种可选的实施例,终端设备也可以基于在播放HDR视频前的屏幕背光亮度以及字幕的第一亮度等级,确定字幕的亮度适配值。
S64,基于字幕的亮度适配值确定字幕的第二亮度等级,及将字幕的亮度等级由第一亮度等级更新为第二亮度等级。
在一些实例中,在确定字幕的亮度适配值,可以基于终端设备预存的OETF(OETF可以视为是对应的EOTF的逆函数)或者EOTF换算得到与该亮度适配值对应的第二亮度等级的归一化值,再将归一化值换算成第二亮度等级即可。
在得到字幕的第二亮度等级之后,可以将字幕的亮度等级由第一亮度等级更新为第二亮度等级,一般而言,由于播放HDR视频会导致画面变亮,第二亮度等级一般会小于第一亮度等级,且随着观看时长的增加,第二亮度等级会进一步降低,终端设备在播放该HDR视频的情形下,基于字幕的第二亮度等级进行字幕的亮度设定,可以降低用户观看HDR视频由于白色高亮字幕带来的刺眼感觉,且可降低终端设备的功耗,提升终端设备(包含电池的终端设备)的续航能力。
在一些实例中,在将字幕的亮度等级由第一亮度等级更新为第二亮度等级之后,终端设备同样可以基于屏幕背光亮度或者环境亮度对字幕的第二亮度等级进行调整,实现字幕亮度还可以随着屏幕背光亮度或者周围环境亮度进行调整。例如,在自动亮度调整功能处于关闭的情形下,终端设备可以获取当前的屏幕背光亮度,基于当前的屏幕背光亮度调整画面的亮度等级与字幕的第二亮度等级(例如,屏幕背光亮度提升/降低第五百分率,画面的亮度等级与字幕的第二亮度等级对应提升/降低第六百分率),实现在屏幕背光亮度大时,画面与字幕的亮度也相应增大,在屏幕背光亮度小时,画面与字幕的亮度也相应减小。又例如,在自动亮度调整功能处于开启的情形下,终端设备可以基于当前环境的亮度调整画面的亮度等级与字幕的第二亮度等级(例如,当前环境亮度提升/降低第七百分率,画面的亮度等级与字幕的第二亮度等级对应提升/降低第八百分率),实现基于当前环境的亮度自动调整画面与字幕的亮度,实现在当前环境的亮度大时,画面与字幕的亮度也相应增大,在当前环境的亮度小时,画面与字幕的亮度也相应减小。
在一些实施例中,由于设定了字幕的亮度适配值与观看时长成负相关,为了避免基于观看时长频繁更新字幕的亮度适配值,可以设定终端设备在播放该HDR视频之后,每隔预设时间进行一次字幕的亮度适配值的更新。预设时间可以根据实际需求进行设定,本申请实施例对此不作限定,例如,预设时间为0.5h。
在一些实施例中,在更新字幕的亮度适配值之前,还可以将当前确定的亮度适配值与上一次确定的亮度适配值(若亮度适配值是第一次更新,将当前确定的亮度适配值与初始的亮度设定值)进行比对,若比对得到两者的差值小于预设阈值,表明并未达到调整字幕的亮度适配值的条件,此时,可以不进行字幕的亮度适配值的更新,若比对得到两者的差值大于或等于预设阈值,表明需要将上一次确定的亮度适配值更新为当前确定的亮度适配值。
如图7所示,终端设备可以响应于用户操作播放某一HDR视频,终端设备在播放该HDR视频时,可以开始播放该HDR视频的时刻为起始时刻,每隔预设时间进行一次字幕的亮度等级的更新,例如,可以通过执行以下流程来实现对字幕的亮度等级的更新:
i. 获取HDR视频中的字幕的当前亮度等级Gray_A,当前亮度等级Gray_A可以是初始设定的亮度等级或者上一次确定的亮度等级;
ii. 基于当前亮度等级Gray_A确定字幕的当前亮度设定值Brightness_A;
在一些实施例中,在获取到字幕的当前亮度等级Gray_A之后,可以基于终端设备预存的EOTF换算得到与该当前亮度等级Gray_A对应的当前亮度设定值Brightness_A。
iii. 获取在播放该HDR视频前的屏幕背光亮度Brightness_S以及用户的观看时长T;
iv. 基于在播放该HDR视频前的屏幕背光亮度Brightness_S以及用户的观看时长T,确定字幕的亮度适配值Brightness_H;
v. 在字幕的当前亮度设定值Brightness_A与亮度适配值Brightness_H的差值大于或等于预设阈值的情形下,基于亮度适配值Brightness_H确定字幕的目标亮度等级Gray_B;
在一些实施例中,可以基于终端设备预存的OETF换算得到与该亮度适配值Brightness_H对应的目标亮度等级Gray_B。
vi. 将字幕的亮度等级由当前亮度等级Gray_A更新为目标亮度等级Gray_B。
在一些实施例中,若字幕的当前亮度设定值Brightness_A与亮度适配值Brightness_H的差值小于预设阈值,不进行目标亮度等级Gray_B的计算,本次更新流程结束,此种情形下,由于未对当前亮度等级Gray_A进行更新,终端设备可以仍然按照当前亮度等级Gray_A显示字幕。
为了进一步理解本申请的终端设备可解决相关技术在提升HDR视频帧的亮度值时,HDR视频帧中的字幕亮度值随之大幅度增大,而导致用户眼部不适的问题,下面结合图8对本申请另一实施例提供的终端设备对HDR视频的字幕亮度进行调整的步骤流程进行详细描述。
S81,获取HDR视频中的字幕的亮度等级。
本申请实施例的步骤流程S81与前述实施例的步骤流程S61类似,为了避免重复,此处不再赘述。
S82,获取在播放HDR视频前的屏幕背光亮度以及用户的观看时长。
本申请实施例的步骤流程S82与前述实施例的步骤流程S62类似,为了避免重复,此处不再赘述。
S83,基于在播放HDR视频前的屏幕背光亮度以及用户的观看时长,确定字幕的亮度调整系数。
在一些实施例中,字幕的亮度调整系数可以是字幕的亮度调整值,或者字幕的亮度调整百分率/千分率等。由于本申请是为解决HDR视频帧中的字幕亮度可能存在刺眼的问题,因此,终端设备可以是基于确定的亮度调整系数,降低字幕的亮度。
在一些实施例中,可以根据实际字幕亮度调整需求设定字幕的亮度调整系数与在播放HDR视频前的屏幕背光亮度和用户的观看时长的函数关系式。字幕的亮度调整系数与在播放HDR视频前的屏幕背光亮度成负相关,以及与用户的观看时长成正相关。即随着用户的观看时长的增加,字幕的亮度调整系数越大,在播放HDR视频前的屏幕背光亮度越大,字幕的亮度调整系数越小。
例如,可以设定函数关系式为Coefficient_B = (m*T)/Brightness_S。其中,Coefficient_B为字幕的亮度调整系数,Brightness_S为在播放HDR视频前的屏幕背光亮度,T为用户的观看时长,m为预设系数值。m的值可以根据实际需求进行设定,本申请实施例对此不作限定。
在一些实施例中,由于参数Brightness_S与T存在数量级特征差异,还可以先对参数Brightness_S与T进行标准化处理之后,再代入上述函数关系式计算得到对应的Coefficient_B。
作为一种可选的实施例,终端设备也可以仅基于在播放HDR视频前的屏幕背光亮度确定字幕的亮度调整系数。
S84,基于字幕的亮度调整系数更新字幕的亮度等级。
在一些实施例中,在确定字幕的亮度调整系数之后,终端设备可以基于字幕的亮度调整系数对字幕的亮度等级进行更新。假设字幕的亮度调整系数为字幕的亮度调整值,基于字幕的亮度调整系数对字幕的亮度等级进行调整可以包括:将字幕的亮度等级Gray_1通过EOTF换算为对应的亮度设定值Value_1;将亮度设定值Value_1降低该亮度调整值Value_0,得到调整后的亮度设定值Value_2(Value_2=Value_1 -Value_0);将调整后的亮度设定值Value_2通过OETF换算成调整后的亮度等级Gray_2;将字幕的亮度等级由Gray_1更新为Gray_2。
假设字幕的亮度调整系数为字幕的亮度调整百分率,基于字幕的亮度调整系数对字幕的亮度等级进行调整可以包括:将字幕的亮度等级Gray_1通过EOTF换算为对应的亮度设定值Value_1;将亮度设定值Value_1降低该亮度调整百分率Value_p,得到调整后的亮度设定值Value_2(Value_2=Value_1*(1-Value_p);将调整后的亮度设定值Value_2通过OETF换算成调整后的亮度等级Gray_2;将字幕的亮度等级由Gray_1更新为Gray_2。
在一些实施例中,由于设定了字幕的亮度调整系数与观看时长成正相关,为了避免基于观看时长频繁调整字幕的亮度,可以设定终端设备在播放该HDR视频之后,每隔预设时间执行一次字幕的亮度调整流程,基于当次亮度调整流程确定的亮度调整系数对字幕的亮度等级进行调整。预设时间可以根据实际需求进行设定,本申请实施例对此不作限定,例如,预设时间为0.5h。
在一些实施例中,在基于字幕的亮度调整系数对字幕的亮度等级进行更新之后,终端设备同样可以基于屏幕背光亮度或者环境亮度对字幕的亮度等级进行调整,即以基于亮度调整系数更新得到的亮度等级为基准随着屏幕背光亮度或者环境亮度进行调整,实现字幕亮度还可以随着屏幕背光亮度或者周围环境亮度进行调整。
参阅图9所示,为本申请一实施例提供的字幕亮度调整方法。字幕亮度调整方法可应用于终端设备,终端设备包括显示屏。字幕亮度调整方法可包括:
S91,获取HDR视频中的字幕的亮度等级,以及在播放HDR视频前显示屏的屏幕背光亮度。
在一些实施例中,终端设备可通过对HDR视频的传输流进行解析,以实现获取该HDR视频中的字幕的亮度等级。
在一些实施例中,获取在播放HDR视频前的屏幕背光亮度可包括:获取在播放HDR视频前的预设时长内的多个屏幕背光亮度值;基于多个屏幕背光亮度值确定在播放HDR视频前的屏幕背光亮度。
在一些实施例中,获取在播放HDR视频前的屏幕背光亮度可包括:若在播放该HDR视频前播放过SDR视频,可以将在播放该HDR视频前播放的SDR视频的屏幕背光亮度作为在播放该HDR视频前显示屏的屏幕背光亮度。
S92,基于在播放HDR视频前的屏幕背光亮度,确定字幕亮度调整参数。
在一些实施例中,字幕亮度调整参数可包括字幕的亮度适配值,即基于在播放HDR视频前的屏幕背光亮度,确定字幕的亮度适配值,再将字幕的亮度等级更新为与亮度适配值对应的亮度等级。
在一些实施例中,字幕亮度调整参数还可包括字幕的亮度调整值或者亮度调整率,即基于在播放HDR视频前的屏幕背光亮度,确定字幕的亮度调整值或者亮度调整率(例如,百分率、千分率等),再基于字幕的亮度调整值或者亮度调整率对字幕的亮度等级进行更新。
在一些实施例中,终端设备也可以基于在播放HDR视频前的屏幕背光亮度以及用户的观看时长,确定字幕亮度调整参数。
在一些实施例中,可在播放HDR视频的情形下,每间隔第一预设时长获取用户的观看时长。第一预设时长可以根据实际需求进行设定,本申请实施例对此不作限定。对于该HDR视频而言,第一次获取用户的观看时长可以是在做好HDR视频播放准备时或准确前完成,以使得HDR视频的字幕均是基于更新后的亮度等级显示。
在一些实施例中,获取用户的观看时长可包括:获取终端设备的亮屏时长、该HDR视频的播放时长、或者终端设备中的视频应用的运行时长,视频应用包括播放HDR视频的应用;基于亮屏时长、该HDR视频的播放时长或者视频应用的运行时长确定用户的观看时长。例如,将终端设备当天的亮屏时长、或者终端设备中的视频应用当天的运行时长作为用户的观看时长、或者将该HDR视频的播放时长作为用户的观看时长。视频应用的运行时长可以是指播放该HDR视频的应用的运行时长,或者是终端设备安装的所有视频类应用的总运行时长。终端设备的亮屏时长、该HDR视频的播放时长或者终端设备中的视频应用的运行时长可以通过获取设备或应用运行记录得到,即可以采用现有方式来获取终端设备的亮屏时长、该HDR视频的播放时长或者终端设备中的视频应用的运行时长。
在一些实施例中,用户的观看时长可以预设重置时长进行重新确定,例如预设重置时长以天为单位或以预设灭屏时长为单位,即用户的观看时长可以以天为单位或以预设灭屏时长为单位进行清零并重新计算。
S93,基于字幕亮度调整参数更新字幕的亮度等级,以及基于更新后的亮度等级显示字幕。
在一些实施例中,在基于字幕亮度调整参数对字幕的亮度等级进行更新之后,还可以基于当前播放HDR视频时的环境亮度或屏幕背光亮度进一步对字幕的亮度等级进行调整,实现字幕亮度还可以随着环境亮度或屏幕背光亮度的改变而进行调整。
参阅图10所示,为本申请实施例提供的终端设备的软件架构图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。以下以终端设备安装的操作系统为安卓系统为例进行说明,但本申请并不以此为限制,终端设备也可以安装其他类型的操作系统。
例如,将安卓系统分为四层,从上至下分别为应用程序层101,框架层102,安卓运行时(Android runtime)和系统库103,内核层104以及硬件层105。
应用程序层可以包括一系列应用程序包。例如,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息,设备控制服务等应用程序。
框架层为应用程序层的应用程序提供应用编程接口(Application ProgrammingInterface,API)和编程框架。应用程序框架层包括一些预先定义的函数。例如,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器、亮度设定框架等。
其中,窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。电话管理器用于提供终端设备的通信功能。资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等。通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,终端设备振动,指示灯闪烁等。亮度设定框架可用于进行显示屏背光亮度、画面亮度、字幕亮度的设置。亮度设定框架进行画面亮度、字幕亮度的设置可以是指调整画面的亮度等级、调整字幕的亮度等级。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和框架层运行在虚拟机中。虚拟机将应用程序层和框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如,表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如SGL)等。
其中,表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如: MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层可至少包含显示驱动,音频驱动等。内核层是终端设备的操作系统的核心,是基于硬件的第一层软件扩充,提供操作系统最基本的功能,是操作系统工作的基础,负责管理系统的进程、内存、设备驱动程序、文件和网络系统,决定了系统的性能和稳定性。例如,内核可以决定一个应用程序对某部分硬件的操作时间。
内核层包括与硬件紧密相关的程序,例如中断处理程序、设备驱动程序等,还包括基本的、公共的、运行频率较高的模块,例如时钟管理模块、进程调度模块等,还包括关键性的数据结构。内核层可以设置于处理器中,或固化在内部存储器。
硬件层为终端设备的硬件,硬件层可至少包括显示屏。
参阅图11所示,为本申请一实施例提供的终端设备的软件架构图。
在应用程序层101,视频应用可响应于用户操作播放HDR视频。
在框架层102,亮度设定框架可以获取该HDR视频的画面的亮度等级和字幕的亮度等级。
在内核层104,显示驱动可基于亮度设定框架获取的画面的亮度等级和字幕的亮度等级驱动硬件层的显示屏进行显示。
在硬件层105,显示屏显示的HDR视频的画面亮度为基于画面的亮度等级设置的亮度,显示屏显示的HDR视频的字幕亮度为基于字幕的亮度等级设置的亮度。
参阅图12所示,下面对本申请实施例涉及的终端设备100进行介绍。本申请实施例中的终端设备可以是手机、平板电脑、桌面型、膝上型、手持计算机、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本,以及蜂窝电话、个人数字助理(personal digital assistant,PDA)、增强现实(augmented reality,AR)\虚拟现实(virtual reality,VR)设备、智能电视、智慧屏等包括显示屏的设备,本申请实施例对该终端设备的具体形态不作特殊限制。请参阅图12,图12是本申请实施例提供的终端设备100的结构示意图。
终端设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触控传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对终端设备100的具体限定。在本申请另一些实施例中,终端设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。所述存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用所述指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
终端设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。终端设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在终端设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在终端设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,终端设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得终端设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC ,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system ,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
终端设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode,AMOLED),柔性发光二极管(flexible light-emittingdiode,FLED),Miniled,MicroLed,Micro-oled,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,终端设备100可以包括1个或N个显示屏194,N为大于1的正整数。其中,本申请实施例中的显示屏194可以是触控屏。即该显示屏194中集成了触控传感器180K。
视频编解码器用于对数字视频压缩或解压缩。终端设备100可以支持一种或多种视频编解码器。这样,终端设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
内部存储器121可以包括一个或多个随机存取存储器(random access memory,RAM)和一个或多个非易失性存储器(non-volatile memory,NVM)。非易失性存储器可以包括磁盘存储器件、快闪存储器(flash memory)。随机存取存储器可以由处理器110直接进行读写,可以用于存储操作系统或其他正在运行中的程序的可执行程序(例如机器指令),还可以用于存储用户及应用程序的数据等。
非易失性存储器也可以存储可执行程序和存储用户及应用程序的数据等,可以提前加载到随机存取存储器中,用于处理器110直接进行读写。
外部存储器接口120可以用于连接外部的非易失性存储器,实现扩展终端设备100的存储能力。外部的非易失性存储器通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部的非易失性存储器中。
终端设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如媒体数据播放,录音等。
上述实施例中的字幕亮度调整方法均可以在具有上述硬件结构的终端设备100中实现。
本实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机指令,当该计算机指令在终端设备100上运行时,使得终端设备100执行上述相关方法步骤实现上述实施例中的字幕亮度调整方法。
本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的字幕亮度调整方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的字幕亮度调整方法。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,该模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
该作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
该集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
Claims (14)
1.一种字幕亮度调整方法,应用于终端设备,其特征在于,所述终端设备包括显示屏,所述字幕亮度调整方法包括:
获取高动态范围HDR视频中的字幕的亮度等级,以及获取在播放所述HDR视频前所述显示屏的屏幕背光亮度;
基于所述屏幕背光亮度确定字幕亮度调整参数;
基于所述字幕亮度调整参数更新所述字幕的亮度等级,以及基于更新后的亮度等级显示所述字幕。
2.如权利要求1所述的方法,其特征在于,所述基于所述屏幕背光亮度确定字幕亮度调整参数,包括:
获取用户的观看时长,所述观看时长基于所述终端设备的亮屏时长、所述HDR视频的播放时长、以及所述终端设备中的视频应用的运行时长中的一者确定;
基于所述观看时长以及所述屏幕背光亮度确定所述字幕亮度调整参数。
3.如权利要求2所述的方法,其特征在于,所述观看时长根据预设重置时长进行重新确定。
4.如权利要求2所述的方法,其特征在于,所述获取用户的观看时长,包括:
在播放所述HDR视频的情形下,每间隔第一预设时长获取所述观看时长。
5.如权利要求2所述的方法,其特征在于,所述字幕亮度调整参数包括所述字幕的亮度适配值,所述基于所述字幕亮度调整参数更新所述字幕的亮度等级,包括:
将所述字幕的亮度等级更新为与所述亮度适配值对应的亮度等级,其中所述字幕的亮度适配值与在播放所述HDR视频前的屏幕背光亮度的亮度值成正相关,以及与所述观看时长成负相关。
6.如权利要求2所述的方法,其特征在于,所述字幕亮度调整参数包括所述字幕的亮度调整值或者亮度调整率,所述基于所述字幕亮度调整参数更新所述字幕的亮度等级,包括:
基于所述字幕的亮度等级,确定所述字幕的亮度设定值;
基于所述字幕的亮度调整值或者亮度调整率更新所述字幕的亮度设定值;
基于更新后的亮度设定值,确定所述字幕的第一目标亮度等级;
将所述字幕的亮度等级更新为所述第一目标亮度等级,其中所述字幕的亮度调整值或者亮度调整率与在播放所述HDR视频前的屏幕背光亮度的亮度值成负相关,以及与所述观看时长成正相关。
7.如权利要求1至6中任一项所述的方法,其特征在于,所述基于更新后的亮度等级显示所述字幕,包括:
获取在播放所述HDR视频时的屏幕背光亮度,及基于播放所述HDR视频时的屏幕背光亮度和所述更新后的亮度等级显示所述字幕。
8.如权利要求7所述的方法,其特征在于,所述基于播放所述HDR视频时的屏幕背光亮度和所述更新后的亮度等级显示所述字幕,包括:
确定播放所述HDR视频时的屏幕背光亮度与所述HDR视频对应的基准背光亮度的差值;
基于所述差值和所述更新后的亮度等级,确定所述字幕的第二目标亮度等级;
基于所述第二目标亮度等级显示所述字幕。
9.如权利要求1至6中任一项所述的方法,其特征在于,所述终端设备包括亮度传感器,所述基于更新后的亮度等级显示所述字幕,包括:
在播放所述HDR视频时,每间隔第二预设时长利用所述亮度传感器采集到的亮度数据确定环境亮度;
基于所述环境亮度和所述更新后的亮度等级显示所述字幕。
10.如权利要求9所述的方法,其特征在于,所述基于所述环境亮度和所述更新后的亮度等级显示所述字幕,包括:
确定所述环境亮度与所述HDR视频对应的基准环境亮度的差值;
基于所述差值和所述更新后的亮度等级,确定所述字幕的第三目标亮度等级;
基于所述第三目标亮度等级显示所述字幕。
11.如权利要求1所述的方法,其特征在于,所述获取在播放所述HDR视频前所述显示屏的屏幕背光亮度,包括:
获取在播放所述HDR视频前计预设时长内所述显示屏的多个屏幕背光亮度值;
基于所述多个屏幕背光亮度值,确定在播放所述HDR视频前所述显示屏的屏幕背光亮度。
12.如权利要求1所述的方法,其特征在于,所述获取在播放所述HDR视频前所述显示屏的屏幕背光亮度,包括:
获取在播放所述HDR视频前播放的标准动态范围SDR视频的屏幕背光亮度;
基于所述SDR视频的屏幕背光亮度,确定在播放所述HDR视频前所述显示屏的屏幕背光亮度。
13.一种终端设备,其特征在于,包括存储器和处理器,其中,所述存储器用于存储计算机可读指令;所述处理器用于读取所述计算机可读指令并实现如权利要求1至12中任一项所述的字幕亮度调整方法。
14.一种计算机存储介质,其特征在于,存储有计算机可读指令,且所述计算机可读指令在被处理器执行时实现如权利要求1至12中任一项所述的字幕亮度调整方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410559334.6A CN118138846A (zh) | 2024-05-08 | 2024-05-08 | 字幕亮度调整方法及相关设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410559334.6A CN118138846A (zh) | 2024-05-08 | 2024-05-08 | 字幕亮度调整方法及相关设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118138846A true CN118138846A (zh) | 2024-06-04 |
Family
ID=91244334
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410559334.6A Pending CN118138846A (zh) | 2024-05-08 | 2024-05-08 | 字幕亮度调整方法及相关设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN118138846A (zh) |
-
2024
- 2024-05-08 CN CN202410559334.6A patent/CN118138846A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115473957B (zh) | 一种图像处理方法和电子设备 | |
EP4199523A1 (en) | Multi-window screen projection method and electronic device | |
US20230042923A1 (en) | Method and appartus for obtaining a mapping curve parameter | |
CN114897745B (zh) | 一种扩展图像动态范围的方法及电子设备 | |
US20230162317A1 (en) | Picture Loading Method and Related Apparatus | |
WO2022242487A1 (zh) | 显示方法及相关装置 | |
CN114463191B (zh) | 一种图像处理方法及电子设备 | |
CN114827696B (zh) | 一种跨设备的音视频数据同步播放的方法和电子设备 | |
WO2023160295A1 (zh) | 视频处理方法和装置 | |
WO2023071482A1 (zh) | 视频编辑方法和电子设备 | |
CN118138846A (zh) | 字幕亮度调整方法及相关设备 | |
CN113760191B (zh) | 数据读取方法、装置、存储介质和程序产品 | |
CN115691370A (zh) | 显示控制方法及相关装置 | |
CN114793283A (zh) | 图像编码方法、图像解码方法、终端设备及可读存储介质 | |
CN116708889B (zh) | 音视频同步方法、设备及存储介质 | |
CN115460343B (zh) | 图像处理方法、设备及存储介质 | |
CN116664630B (zh) | 一种图像处理方法和电子设备 | |
CN116450363B (zh) | 一种资源调度方法及电子设备 | |
CN117170560B (zh) | 一种图像变换方法、电子设备和存储介质 | |
US20240112298A1 (en) | Image processing method, electronic device, and storage medium | |
CN116055738B (zh) | 视频压缩方法及电子设备 | |
CN115633219B (zh) | 一种界面识别方法、设备及计算机可读存储介质 | |
CN116347217B (zh) | 图像处理方法、设备及存储介质 | |
CN117707449A (zh) | 显示控制方法及相关设备 | |
CN116704075A (zh) | 图像处理方法、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination |