CN114286172A - 数据处理方法及装置 - Google Patents

数据处理方法及装置 Download PDF

Info

Publication number
CN114286172A
CN114286172A CN202110971601.7A CN202110971601A CN114286172A CN 114286172 A CN114286172 A CN 114286172A CN 202110971601 A CN202110971601 A CN 202110971601A CN 114286172 A CN114286172 A CN 114286172A
Authority
CN
China
Prior art keywords
brightness
value
luminance
mapping information
values
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110971601.7A
Other languages
English (en)
Other versions
CN114286172B (zh
Inventor
邓朔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202110971601.7A priority Critical patent/CN114286172B/zh
Publication of CN114286172A publication Critical patent/CN114286172A/zh
Application granted granted Critical
Publication of CN114286172B publication Critical patent/CN114286172B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请实施例涉及计算机技术领域,公开了一种数据处理方法及装置,该方法包括:对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示多媒体数据中各个像素点的目标亮度值;获取亮度映射信息,其中,亮度映射信息用于指示像素点的编码值和亮度值的映射关系;基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据;基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。采用本申请实施例,可做到在不同的终端设备中多媒体数据的播放质量都保持相对一致。

Description

数据处理方法及装置
技术领域
本申请涉及计算机技术领域,尤其涉及一种数据处理方法及装置。
背景技术
随着多媒体技术的发展,多媒体数据的呈现形式越来越丰富,使得消费者得到了更好的用户体验。但当多媒体数据的呈现形式更丰富、展现细节更逼真的同时,对于手机等终端设备的硬件和系统也提出了更高的要求。以多媒体数据为HDR Video(High-DynamicRangeVideo,高动态范围视频)为例,HDR Video相比于SDRVideo(Standard Dynamic RangeVideo,标准动态范围视频),能够记录并展示更多细节,并以更丰富的色彩展示至消费者。近年来,越来越多的移动设备可以支持高动态范围视频的播放,但相同的高动态范围视频在不同的终端设备上往往会呈现出不同的显示效果。因此,如何确保相同的多媒体数据在不同的设备上的播放质量保持相对一致,是目前亟需解决的技术问题。
发明内容
本申请实施例提供一种数据处理方法及装置,可以使相同的多媒体数据在不同的设备上的播放质量保持相对一致。
一方面,本申请实施例提供了一种数据处理方法,包括:
对多媒体数据进行亮度分析处理,得到所述多媒体数据的目标亮度参数,所述目标亮度参数用于指示所述多媒体数据中各个像素点的目标亮度值;
获取亮度映射信息,其中,所述亮度映射信息用于指示像素点的编码值和亮度值的映射关系,所述亮度映射信息中任一编码值对应的亮度值指的是:控制终端设备的显示屏幕中的像素点的编码值为所述任一编码值时,获取到的所述像素点在所述任一编码值下的亮度值,不同设备参数对应的终端设备的显示屏幕中的像素点在所述任一编码值下的亮度值不同;
基于所述亮度映射信息和所述目标亮度参数,确定所述多媒体数据的渲染数据,所述渲染数据包括所述各个像素点的目标编码值;
基于所述渲染数据对所述多媒体数据进行渲染处理,得到渲染图像,并输出所述渲染图像。
一方面,本申请实施例提供了一种数据处理装置,所述数据处理装置包括处理单元以及输出单元,所述处理单元以及所述输出单元用于执行上述数据处理方法。
一方面,本申请实施例提供了一种电子设备,所述电子设备包括输入接口和输出接口,还包括:
处理器,适于实现一条或多条指令;以及,
计算机存储介质,所述计算机存储介质存储有一条或多条指令,所述一条或多条指令适于由所述处理器加载并执行上述数据处理方法。
一方面,本申请实施例提供了一种计算机存储介质,所述计算机存储介质中存储有计算机程序指令,所述计算机程序指令被处理器执行时,用于执行上述数据处理方法。
一方面,本申请实施例提供了一种计算机程序产品或计算机程序,所述计算机程序产品或所述计算机程序包括计算机指令,所述计算机指令存储在计算机可读存储介质中;电子设备的处理器从所述计算机可读存储介质中读取所述计算机指令,所述处理器执行所述计算机指令,所述计算机指令被处理器执行时,用于执行上述数据处理方法。
本申请实施例中,对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示所述多媒体数据中各个像素点的目标亮度值;获取亮度映射信息,其中,亮度映射信息用于指示像素点的编码值和亮度值的映射关系;基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括各个像素点的目标编码值;基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。本申请实施例在分析出多媒体数据的目标亮度参数,以及获取到亮度映射信息后,通过目标亮度参数中的目标亮度值,以及亮度映射信息中指示的像素点的编码值和亮度值的亮度映射关系,得到目标亮度值对应的目标编码值,从而在只依托多媒体数据的性质,以及终端设备自身的设备性质,而不依靠硬件或手机厂商,以及不依靠手机系统的情况下,得到多媒体数据的渲染数据,并对多媒体数据进行渲染处理,得到渲染图像,进而做到在不同的终端设备输出多媒体数据时,多媒体数据的播放质量都保持相对一致。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a是本申请实施例提供的一种数据处理系统的结构示意图;
图1b是本申请实施例提供的第一种数据处理系统交互的示意图;
图1c是本申请实施例提供的第二种数据处理系统交互的示意图;
图2是本申请实施例提供的第一种数据处理方法的流程示意图;
图3是本申请实施例提供的第二种数据处理方法的流程示意图;
图4是本申请实施例提供的一种亮度探测阈值与背景亮度关系的示意图;
图5a是本申请实施例提供的一种划分亮度区域的界面示意图;
图5b是本申请实施例提供的一种低亮度区域的像素点的界面示意图;
图5c是本申请实施例提供的一种高亮度区域的像素点的界面示意图;
图6是本申请实施例提供的一种HDR模式的界面和交互示意图;
图7是本申请实施例提供的第三种数据处理方法的流程示意图;
图8是本申请实施例提供的灰度值的界面示意图;
图9是本申请实施例提供的第四种数据处理方法的流程示意图;
图10是本申请实施例提供的一种应用场景的示意图;
图11是本申请实施例提供的第五种数据处理方法的流程示意图;
图12是本申请实施例提供的一种数据处理装置的结构示意图;
图13是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
以多媒体数据为高动态范围视频为例,高动态范围视频的正确播放不仅需要视频遵循HDR的标准,同时也需硬件支持高动态范围视频的解码,因此高动态范围视频的视频效果与设备参数有着很强的关联性,所以软件开发者通常采用与硬件厂商合作的模式,由软件开发者输入视频,而视频的处理,以及显示效果均由厂商控制。但是各大硬件以及手机厂商均有着自己的技术,因此相同的高动态范围视频在不同的平台上往往会呈现出不同的显示效果;同时现有的手机系统(如Android和iOS)没有向软件开发者开放高动态范围视频渲染功能;所以目前软件开发者无法使相同的高动态范围视频在不同的设备上的播放质量保持相对一致,从而无法做到普及高动态范围视频。因此,相同的如高动态范围视频之类的多媒体数据不同的设备上的播放质量往往不稳定,难以做到对此类多媒体数据的应用普及。
为了使相同的多媒体数据在不同的设备上的播放质量保持相对一致,本申请实施例提供了一种数据处理方案,对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示多媒体数据中各个像素点的目标亮度值;然后获取亮度映射信息,其中,亮度映射信息用于指示像素点的编码值和亮度值的映射关系,亮度映射信息中任一编码值对应的亮度值指的是:控制终端设备的显示屏幕中的像素点的编码值为任一编码值时,获取到的像素点在任一编码值下的亮度值,不同设备参数对应的终端设备的显示屏幕中的像素点在任一编码值下的亮度值不同;基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括各个像素点的目标编码值;最后基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。
基于上述数据处理方案,本申请实施例提供了一种数据处理系统。参见图1a,为本申请实施例提供的一种数据处理系统的结构示意图。图1a所示的数据处理系统可以包括终端设备101以及服务器102。其中,终端设备101可以包括智能手机、平板电脑、笔记本电脑、台式计算机、智能车载以及智能可穿戴设备中的任意一种或多种。服务器102可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content Delivery Network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。终端设备101以及服务器102之间可以通过有线或无线通信方式进行直接或间接地通信连接,本申请在此不做限制。
在一个实施例中,终端设备101中可以运行多个客户端,例如可以运行社交客户端、电子支付客户端、音乐播放客户端、视频播放客户端以及游戏客户端等;如果终端设备101中某个客户端存在通过终端设备101的显示屏幕显示多媒体数据的需求时,服务器102可以为该客户端提供服务支持,例如对高动态范围图像进行处理以使高动态范围图像能够在终端设备101上稳定显示等。其中,服务器102可以为该客户端对应的服务器,终端设备101中运行的不同客户端可以对应不同服务器。优选地,还可以是终端设备101存在通过终端设备101的显示屏幕显示多媒体数据的需求时,直接通过服务器102获得服务支持。
在一个实施例中,请参见图1b,用户在通过终端设备101中的视频播放客户端播放视频时,选择了“4K HDR”去播放视频,则终端设备101会通过视频播放客户端103向服务器102发送获取高动态范围图像的请求;在终端设备101通过视频播放客户端103接收到服务器102返回的高动态范围图像后,终端设备101则开始通过视频播放客户端103对高动态范围图像进行处理,最终在视频播放客户端103中输出高动态范围图像的渲染图像;此外,还可以是服务器102根据所获取的取高动态范围图像的请求,可以直接找到对应的亮度映射信息,并对高动态范围图像进行处理,最终向终端设备101发送高动态范围图像的渲染图像。
在一个实施例中,请参见图1c,用户通过终端设备101中运行的社交客户端104收到用户A传来的图片时,通过点击该图片去进行放大,放大后用户选择了HDR模式去查看图片,则终端设备101中运行的社交客户端104会向服务器105发送获取高动态范围图像的请求;在终端设备101通过社交客户端104接收到服务器105返回的高动态范围图像后,终端设备101通过社交客户端104开始对高动态范围图像进行处理,最终在社交客户端104中输出高动态范围图像的渲染图像。
基于上述数据处理方案以及数据处理系统,本申请实施例提供了一种数据处理方法。参见图2,为本申请实施例提供的一种数据处理方法的流程示意图。图2所示的数据处理方法可由终端设备执行。图2所示的数据处理方法可包括如下步骤:
S201,对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示多媒体数据中各个像素点的目标亮度值。
在一个实施例中,多媒体数据可以是高动态范围图片,也可以是由多帧高动态范围图片所构成的高动态范围视频。优选地,多媒体数据还可以是其他图像形式的多媒体数据,在此不作限定。
在一个实施例中,亮度分析处理指的是终端设备对多媒体数据进行解码,得到解码后的多媒体数据的各个像素点的编码值,然后可以采用电光转换函数(EOTF)或者电光转换标准算法等方式对解码后的多媒体数据的各个像素点的编码值进行转换,得到多媒体数据的各个像素点的目标亮度值。其中,终端设备对多媒体数据进行解码的方式可以是通过例如HEVC、Lav Filters和madVR等软件去解码,也可以直接利用终端设备中的应用软件中自带的解码器进行解码,还可以是直接利用终端设备中支持硬件解码的芯片去进行解码。优选地,也可以通过其他方式对多媒体数据进行解码,在此不做限定。
具体实现中,以多媒体数据为高动态范围图像为例,对高动态范围图像进行亮度分析处理的过程可以如下:
1)获取到高动态范围图像;
2)利用解码器对高动态范围图像进行解码,得到高动态范围图像各个像素点的编码值di,其中,i用于表示高动态范围图像的像素点;
3)可以采用PQ(perceptual quantizer)转换函数对高动态范围图像各个像素点的编码值di进行处理,得到高动态范围图像各个像素点的目标亮度值l′i,其公式如下:l′i=PQ(di),其中,i用于表示高动态范围图像的像素点,PQ表示PQ转换函数,为本领域技术人员所所惯用的技术手段,在此不赘述。
可选地,还可以采用色调映射(Tone Mapping)转换函数,并借助终端设备的屏幕的显示参数,对高动态范围图像各个像素点的编码值di进行色调映射处理,得到高动态范围图像各个像素点的目标亮度值l′i,其公式如下:l′i=TM(di),其中,i用于表示高动态范围图像的像素点,TM表示色调映射转换函数,常用的色调映射转换函数有自适应dodging-and-burning等,为本领域技术人员所惯用的技术手段,在此不赘述。
S202,获取亮度映射信息,其中,亮度映射信息用于指示像素点的编码值和亮度值的映射关系。
在本申请实施例中,亮度映射信息中任一编码值对应的亮度值指的是:控制终端设备的显示屏幕中的像素点的编码值为任一编码值时,获取到的像素点在任一编码值下的亮度值,不同设备参数对应的终端设备的显示屏幕中的像素点在任一编码值下的亮度值不同。
在本申请实施例中,所述像素点的编码值可以由人为设定,也可以根据终端设备的显示屏幕的参数来确定。举例来说,若像素点的显示屏幕的色深为8bit,那么终端设备的显示屏幕的像素点的编码值可以每个像素点对应的灰度值,此时编码值为0~255。所述像素点的亮度值指的是在该像素点上显示屏幕的发光光强与光源之比,也就是该像素点上的发光强度,用于表示色彩的明暗程度。
在一个实施例中,终端设备的设备参数指的是能够表示该终端设备的型号、性能、以及显示屏幕等信息的参数。例如终端设备的名称、终端设备的版本型号、终端设备的CPU、终端设备的内存等信息。其中,不同设备参数对应的终端设备的显示屏幕中的像素点在任一编码值下的亮度值不同,也就是说,设备参数不同的话,终端设备的显示屏幕中的像素点的编码值与亮度值的映射关系会不同,例如,终端设备1是A牌plus系列的手机,终端设备2是A牌pro系列的手机,因为终端设备1和终端设备2是同一品牌不同系列的手机,那么终端设备1和终端设备2的设备参数会不同,因此终端设备1和终端设备2的显示屏幕中的像素点的编码值与亮度值的映射关系不同,也就是终端设备1和终端设备2获取到亮度映射信息会不同。
在一个实施例中,获取亮度映射信息的方式可以是从终端设备自身的预设数据库中获取该终端设备的亮度映射信息,也可以是终端设备向其他设备或者服务器发送请求,去获取该终端设备的设备参数对应的亮度映射信息。优选地,还可以是其他方式去获取设备参数对应的亮度映射信息,在此不作限定。
S203,基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括各个像素点的目标编码值。
在一个实施例中,渲染数据指的是多媒体数据在终端设备上进行显示时,所述多媒体数据所需要进行的数据转换的相关数据。示例性地,以多媒体数据为高动态范围图像为例,渲染数据可以是对高动态范围图像在色彩、亮度等方面进行转换的数据,也可以是其他维度对高动态范围图像进行转换的数据。在本申请实施例中,渲染数据为各个像素点的目标编码值,也就是为了使多媒体数据能够适应在所述终端设备上进行显示,对多媒体数据的编码值进行了转换。
在一个实施例中,所述终端设备基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,是通过在确定多媒体数据的目标亮度值,以及确定终端设备的亮度值和编码值的亮度映射关系之后,通过该亮度映射关系去确定多媒体数据的目标亮度值在终端设备上所对应的目标编码值。
S204,基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。
在一个实施例中,渲染图像指的是在终端设备上以稳定的播放质量显示的多媒体数据。举例来说,当在不同的终端设备上播放多媒体数据时,往往会由于不同终端设备的显示屏幕的性能的不同,导致在不同的终端设备上所显示的多媒体数据也会不同,以多媒体数据为高动态范围图像为例,同一高动态范围图像在有些终端设备上进行显示时会出现过曝或者颜色衔接不流畅等情况;而通过终端设备对高动态范围图像的渲染处理得到渲染图像,使终端设备能够对高动态范围图像在该终端设备上的图像显示效果进行控制和调整,从而能够使高动态范围图像在不同终端设备上都能以稳定的播放质量呈现。
在一个实施例中,基于渲染数据对高动态范围图像进行渲染处理,指的是根据渲染数据中包括的高动态范围图像的各个像素点的目标编码值,以及终端设备的设备参数对应的亮度映射信息,去确定各个像素点的输出亮度值;由于高动态范围图像是基于终端设备的设备参数对应的亮度映射信息去确定各个像素点的输出亮度值的,所以渲染图像能够在终端设备上以稳定的播放质量呈现,不会出现过曝或者颜色衔接不流畅等情况,有利于提升观看高动态范围图像时的用户体验。
本申请实施例中,对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示所述多媒体数据中各个像素点的目标亮度值;获取亮度映射信息,其中,亮度映射信息用于指示像素点的编码值和亮度值的映射关系,亮度映射信息中任一编码值对应的亮度值指的是:控制终端设备的显示屏幕中的像素点的编码值为任一编码值时,获取到的像素点在任一编码值下的亮度值,不同设备参数对应的终端设备的显示屏幕中的像素点在任一编码值下的亮度值不同;然后基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括所述各个像素点的目标编码值;最后基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。本申请实施例通过亮度映射信息,以及多媒体数据的目标亮度参数,可以得到多媒体数据针对该终端设备的渲染数据,通过渲染数据对多媒体数据进行渲染,可以做到在不同的终端设备输出多媒体数据时,多媒体数据的播放质量都保持相对一致。此外,本申请实施例中通过目标亮度参数中的目标亮度值,以及亮度映射信息中指示的像素点的编码值和亮度值的亮度映射关系,就可以得到目标亮度值对应的目标编码值,从而可以做到在只依托多媒体数据的性质,以及终端设备自身的设备性质,而不依靠硬件或手机厂商,以及不依靠手机系统的情况下,得到多媒体数据的渲染数据,有利于多媒体数据的普及。
基于上述数据处理系统实施例以及数据处理方法实施例,本申请实施例提供了另一种数据处理方法。参见图3,为本申请实施例提供的另一种数据处理方法的流程示意图。图3所示的数据处理方法可由终端设备执行。图3所示的数据处理方法可包括如下步骤:
S301,将终端设备的显示屏幕划分为多个亮度区域,不同亮度区域中像素点的编码值和亮度值的数学分布不相同。
在一个实施例中,可以综合终端设备的设备参数等终端设备自身的硬件情况,将显示屏幕划分为多个亮度区域。举例来说,当终端设备的GPU的数据处理能力和计算能力较强,且终端设备的显示屏幕的色深大于或等于10bit时,为了使高动态范围图像在终端设备上的渲染效果达到最佳,可以选择划分三个及以上的亮度区域。优选地,也可以基于其他标准划分终端设备的显示屏幕的亮度区域,在此不作限定。
在一个实施例中,可以基于人眼对于亮度的响应在不同的区域会呈现不同的特征,将终端设备的显示屏幕划分为多个亮度区域。具体来说,在一般情况下,人的视力会随着亮度的增加而增加,也就是亮度越高,人眼对于图像色彩、形状等特征能够分辨得更清晰;但当亮度到达了一定数值后,亮度的增加对于人的视力的影响就会变化。
举例来说,请参见图4,图4反映了亮度探测阈值ΔBT与背景亮度B之间的关系,在亮度较低的区域,比如暗区域和低亮度区域,人眼的分辨能力与亮度的响应关系更接近于线性关系;在亮度较高的区域,如高亮度区域,人眼的分辨能力与亮度的响应关系不再是线性关系,而更接近与非线性关系,如在sRGB(standard Red Green Blue)这一色彩标准中常用到的伽马校正(Gamma)就是基于人眼的特性进行设计的。优选地,还可以基于人眼特性将显示屏幕划分为更多个亮度区域,在此不作限定。
S302,控制目标亮度区域中的像素点的编码值为预设编码值,并获取像素点在预设编码值下的亮度值,以得到至少两个参数对,至少两个参数对中每个参数对包括预设编码值和预设编码值下的亮度值,不同参数对包括的预设编码值不相同,目标亮度区域为多个亮度区域中的任一亮度区域。
在本申请实施例中,所述预设编码值的取值范围可以由终端设备的显示屏幕的参数,以及所处的目标亮度区域来确定。具体来说,通过终端设备的显示屏幕的参数确定像素点的编码值的取值范围,也就是显示屏幕中像素点的最大编码值和最小编码值,而终端设备的显示屏幕在划分亮度区域时,也确定了不同的亮度区域的编码值的取值范围,也就是不同亮度区域的像素点的最大编码值和最小编码值。
举例来说,如果终端设备的显示屏幕的色深为8bit,那么像素点的编码值的取值范围为0~255;终端设备基于人眼特性将显示屏幕划分为低亮度区域和高亮度区域,并设定低亮度区域的像素点的编码值的取值范围为0至max_code*5%,高亮度区域的像素点的编码值的取值范围max_code*5%至max_code*100%,其中max_code为像素点的最大编码值255。那么低亮度区域的像素点的预设编码值的取值范围为0至max_code*5%,高亮度区域的像素点的预设编码值的取值范围为max_code*5%至max_code*100%。
在一个实施例中,所述不同参数对包括的预设编码值不相同指的是在控制目标亮度区域中的像素点的编码值为预设编码值时,不同像素点的预设编码值不同。举例来说,控制低亮度区域的像素点A和像素点B的编码值分别为0和12,然后终端设备获取到像素点A的亮度值为210nit,像素点B的亮度值为235nit,那么像素点A的参数对为(0,210),像素点B的参数对为(12,235),其中,像素点A和像素点B的参数对中的预设编码值不同。
在一个实施例中,所述控制目标亮度区域中的像素点的编码值为预设编码值的方法可以是终端设备将终端设备的显示屏幕中的目标亮度区域的像素点设置为预设编码值,例如,设置低亮度区域的像素点A和像素点B的编码值分别为0和12。优选地,还可以是终端设备显示一个或多个测试多媒体数据,所述测试多媒体数据中像素点的编码值是预设编码值,所述测试多媒体数据可以只在目标亮度区域显示,也可以在所有亮度区域显示;当测试多媒体数据只在目标亮度区域显示时,所述测试多媒体数据的预设编码值的范围应当在所述目标亮度区域的预设编码值的取值范围内;当测试多媒体数据在所有亮度区域显示时,所述测试多媒体数据的各个像素点的预设编码值应当在各个像素点对应的亮度区域的预设编码值的取值范围内。示例性地,低亮度区域为目标亮度区域,低亮度区域的预设编码值的取值范围为0~12,那么当测试多媒体数据只在低亮度区域显示时,所述测试多媒体数据中的预设编码值的取值范围也应当在0~12。
在一个实施例中,所述获取像素点在预设编码值下的亮度值的方式包括以下至少一种:亮度测量设备测量亮度值、亮度传感器计算亮度值、从存储器中获取亮度值。具体来说,亮度测量设备测量亮度值可以是人工利用亮度测量仪等精密的亮度测量设备测量像素点的亮度值,将该亮度值输入终端设备,作为该像素点在预设编码值下的亮度值。所述亮度传感器计算亮度值可以是终端设备的显示屏幕中设有亮度传感器,然后亮度传感器采集该像素点的亮度值,将采集到的亮度值作为该像素点在预设编码值下的亮度值;此外,还可以是亮度传感器采集多次该像素点的亮度值,得到一个平均亮度值,将该平均亮度值作为该像素点在预设编码值下的亮度值。所述从存储器中获取亮度值可以是预先与不同终端设备的硬件厂商进行协商,由终端设备的厂商将预设编码值下的亮度值存储在终端设备的存储器中;示例性地,终端设备A的显示屏幕的色深为8bit,因此可以确定终端设备A的预设编码值为0~255,终端设备A的厂商预先测量终端设备A的显示屏幕在各个预设编码值下的亮度值,并存储在终端设备A的存储器中。优选地,还可以是其他方式测量像素点在预设编码值下的亮度值,在此不作限定。
S303,根据至少两个参数对,以及目标亮度区域中像素点的编码值和亮度值的数学分布,生成目标亮度区域的亮度映射函数。
具体来说,由于划分亮度区域时,是根据人眼特性或者终端设备的性能特性进行划分的,所以每个亮度区域中像素点的编码值和亮度值的数学分布都呈现一定的规律,因此可以通过多个包括预设编码值和预设编码值下的亮度值的参数对,去确定目标亮度区域中像素点的编码值和亮度值的数学分布规律,从而生成目标亮度区域的亮度映射函数。
举例来说,所述生成目标亮度区域的亮度映射函数的过程如下:
1)参见图5a,基于人眼特性,将终端设备的显示屏幕划分为高亮度区域和低亮度区域。
2)终端设备的显示屏幕的色深为8bit,因此确定终端设备的显示屏幕的像素点的编码值的取值范围为0~255,举例来说,可以设置低亮度区域的像素点的编码值的取值范围为0至max_code*5%,高亮度区域的像素点的编码值的取值范围max_code*5%至max_code*100%,其中max_code为像素点的最大编码值255。
3)将低亮度区域设定为目标亮度区域,低亮度区域中像素点的编码值和亮度值的数学分布接近于线性关系,所以可以通过确定低亮度区域中的两对参数对来得到低亮度区域的亮度映射关系。
4)确定低亮度区域的2对参数对:参见图5b,设置低亮度区域中的像素点A501的编码值为12,像素点B502的编码值为0;通过终端设备测量得到像素点A501的亮度值为236nit,像素点B502的亮度值为200nit,因此确定低亮度区域的2对参数对分别为(12,236)和(0,200)。
5)计算低亮度区域的亮度映射函数θ(x):利用参数对(12,236)和(0,200),计算出低亮度区域的亮度映射函数θ(x)的斜率k为12、偏移为3,得到低亮度区域的亮度映射函数θ(x)=12x+3,其中x的取值范围为0至max_code*5%,max_code为255。
6)将高亮度区域设定为目标亮度区域,高亮度区域中像素点的编码值和亮度值的数学分布接近于类似幂函数的非线性关系,所以可以通过采集高亮度区域中的多对参数对,以及利用三次样条插值的方法来得到高亮度区域的亮度映射关系,举例来说,可以将高亮度区域的4个像素点的编码值分别确定为max_code*5%、max_code*10%、max_code*50%和max_code*100%,然后采集这个4个像素点对应的亮度值,所述四个像素点的编码值和亮度值构成4个参数对。
7)确定高亮度区域的4对参数对:参见图5c,设置高亮度区域中的像素点C 503的编码值为12,像素点D 504的编码值为25,像素点E 505的编码值为127,像素点F 506的编码值为255;通过终端设备测量得到像素点C 503的亮度值为240nit,像素点D 504的亮度值为316nit,像素点E 505的亮度值为350nit,像素点F 506的亮度值为400nit,因此确定高亮度区域的4对参数对分别为(12,240)、(25,316)、(127,350)和(255,400)。
8)计算高亮度区域的亮度映射函数
Figure BDA0003224751270000131
Figure BDA0003224751270000132
为三次样条插值函数,将12~25、25~127、127~255这三个区间作为
Figure BDA0003224751270000133
的给定区间,将12、25、127、255作为
Figure BDA0003224751270000134
的给定节点,将240、316、350和400作为其对应的给定节点的给定函数值,然后引入边界条件对
Figure BDA0003224751270000135
进行计算,三次样条插值函数的计算过程为本领域技术人员的公知常识,在此不赘述;最终得到能够表示高亮度区域的编码值与亮度值之间的亮度映射关系的亮度映射函数
Figure BDA0003224751270000136
其中x的取值范围为max_code*5%至max_code*100%,max_code为255。优选地,所述计算高亮度区域的亮度映射函数的方法还可以是其他数学方法,在此不作限定。
在一个实施例中,还可以基于如图4所示的人眼特性,将终端设备的显示屏幕划分为高亮度区域、中亮度区域和低亮度区域。其中低亮度区域和中亮度区域中像素点的编码值和亮度值的数学分布接近于线性关系,可采用上述3)~5)的方法确定低亮度区域和中亮度区域的亮度映射函数;高亮度区域中像素点的编码值和亮度值的数学分布接近于类似幂函数的非线性关系,可采用上述6)~8)的方法确定高亮度区域的亮度映射函数。优选地,还可以采用其他划分亮度区域的方式,在此不作限定。
S304,生成终端设备的设备参数对应的亮度映射信息,亮度映射信息包括多个亮度区域的亮度映射函数。
在一个实施例中,生成设备参数对应的亮度映射信息之后,存储所述亮度映射信息的方法包括终端设备预设数据库存储、在线存储中的一种或多种。优选地,亮度映射信息可以包括终端设备的设备参数的标识,以使得不同的终端设备可以快速、准确识别出该终端设备的设备参数对应的亮度映射信息。
在一个实施例中,亮度映射信息中还可以包括加密信息,以使得亮度映射信息能够准确应用到用户设定的目标应用中。参见图6,在界面601中,用户设置了视频APP和社交APP可以开启HDR模式,音乐APP和网课APP没有开启HDR模式;因此在界面602中,当用户在社交APP中选择HDR模式查看图片时,可以从服务器604中获取亮度映射信息,从而可以以HDR模式查看图片;当用户在音乐APP中想要选择以HDR观看MV时,无法从服务器604中获取亮度映射信息,从而无法实现以HDR的播放质量播放MV。
S305,对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示多媒体数据中各个像素点的目标亮度值。
S306,获取亮度映射信息,其中,亮度映射信息用于指示像素点的编码值和亮度值的映射关系。
其中,步骤S305至步骤S306与上述步骤S201至步骤S202一致,在此不再赘述。
S307,确定多媒体数据中各个像素点所属的亮度区域。
具体来说,确定多媒体数据中各个像素点所属的亮度区域的方法可以是根据多媒体数据的目标亮度参数中的各个像素点的目标亮度值,确定各个像素点属于设备参数对应的亮度映射信息中的哪一个亮度映射函数。举例来说,多媒体数据中的像素点M的目标亮度值为100,亮度映射信息中的低亮度区域的亮度值的范围为0nit~120nit,中亮度区域的亮度值的范围为120nit~300nit,高亮度区域的亮度值的取值范围为300nit~500nit,所以可以确定高动态范围图像中的像素点M所属的亮度区域为中亮度区域。
S308,根据各个像素点所属的亮度区域的亮度映射函数以及各个像素点的目标亮度值,确定各个像素点的目标编码值。
具体来说,确定了各个像素点所属的亮度区域后,就可以确定各个像素点所属的亮度区域的亮度映射函数,将各个像素点的目标亮度值代入其所属的亮度区域的亮度映射函数,进行一个逆映射,可以确定各个像素点的目标编码值。
举例来说,多媒体数据中的像素点X的目标亮度值为246nit,像素点Y的目标亮度值为340nit。亮度映射信息中的低亮度区域的亮度值的取值范围为0nit~250nit,高亮度区域的亮度值的取值范围为250nit~600nit,那么像素点X属于低亮度区域,对应低亮度区域的亮度映射函数θ(x),像素点Y属于高亮度区域,对应高亮度区域的亮度映射函数
Figure BDA0003224751270000141
将像素点X的目标亮度值276nit输入到低亮度区域的亮度映射函数θ(x)中,得到像素点X的目标编码值为12;将像素点Y的目标亮度值390nit输入到高亮度区域的亮度映射函数
Figure BDA0003224751270000142
中,得到像素点Y的目标编码值为127。
S309,生成包含各个像素点的目标编码值的渲染数据,将生成的渲染数据作为多媒体数据的渲染数据。
S310,基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。
其中,步骤S309至步骤S310与上述步骤S203至步骤S204一致,在此不再赘述。
本申请实施例中,将终端设备的显示屏幕划分为多个亮度区域,并将目标亮度区域中的像素点的编码值设置为预设编码值,同时测量像素点在预设编码值下的亮度值,以得到至少两个参数对,然后根据至少两个参数对,以及目标亮度区域中像素点的编码值和亮度值的数学分布,生成目标亮度区域的亮度映射函数;然后可以根据分析得到的多媒体数据的目标亮度参数中的目标亮度值去确定多媒体数据的各个像素点所属的亮度区域及亮度映射函数,从而确定各个像素点的目标编码值;最后生成包含各个像素点的目标编码值的渲染数据,并基于渲染数据对多媒体数据进行渲染处理,得到并输出渲染图像。本申请实施例通过对终端设备的显示屏幕划分亮度区域的方式,可以快速、简便地测量出终端设备的显示屏幕的编码值和亮度值之间的亮度映射关系,操作难度不高;并且还通过确定各个像素点所属的亮度区域及亮度映射函数的方式,可以快速确定各个像素点的目标编码值,从而得到渲染数据,输出渲染图像;进而可以做到在不同的终端设备输出多媒体数据时,多媒体数据的播放质量都保持相对一致。
基于上述数据处理系统实施例以及数据处理方法实施例,本申请实施例提供了另一种数据处理方法。参见图7,为本申请实施例提供的另一种数据处理方法的流程示意图。图7所示的数据处理方法可由终端设备执行。图7所示的数据处理方法可包括如下步骤:
S701,控制终端设备的显示屏幕中的像素点的编码值为不同编码值,并获取像素点在不同编码值下的亮度值。
在一个实施例中,所述控制终端设备的显示屏幕中的像素点的编码值为不同编码值指的是用不同的标识去标识显示屏幕中的不同的像素点。举例来说,终端设备的显示屏幕的色深为8bit时,参见图8,可以将终端设备的显示屏幕的像素点的编码值对应为灰度值,为0~255,图8中不同的四个像素点的编码值不同,分别是0、170、95和255;终端设备的显示屏幕的色深为10bit时,可以将终端设备的显示屏幕的像素点的编码值对应为灰度值,为0~1023。
所述控制终端设备的显示屏幕中的像素点的编码值为不同编码值的控制方式,以及获取像素点在不同编码值下的亮度值的获取方式与步骤S302的实施方式一致,在此不赘述。
S702,生成设备参数对应的亮度映射信息,亮度映射信息包括多个编码值以及获取到的多个编码值中各个编码值下的亮度值。
具体来说,所述亮度映射信息就是将各个像素点的编码值和亮度值进行一一对应。举例来说,当终端设备的显示屏幕的色深为8bit时,所述终端设备的显示屏幕的像素点的编码值对应为灰度值,分别为0~255,可以利用亮度测量仪、亮度传感器等测量得到各个像素点在编码值下的亮度值,如表1所示,编码值为0~255,亮度值为20nit~400nit。
表1
编码值(code value) 亮度值(lum)
0 20
1 35
255 400
其中,所述亮度映射信息中各个像素点的编码值和亮度值可以是以数组的形式进行存储,也可以是分布式存储、顺序存储等多种存储方式,在此不作限定。
S703,对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示多媒体数据中各个像素点的目标亮度值。
S704,获取亮度映射信息,其中,亮度映射信息用于指示像素点的编码值和亮度值的映射关系。
其中,步骤S703至步骤S704的实施方式与上述步骤S201至步骤S202的实施方式一致,在此不赘述。
S705,根据设备参数对应的亮度映射信息以及各个像素点的目标亮度值,确定各个像素点的目标编码值。
在本申请实施例中,在亮度映射信息是将各个像素点的编码值和亮度值进行一一对应的情况下,所述终端设备根据亮度映射信息以及目标亮度值确定各个像素点的目标编码值的方式可以是根据设备参数对应的亮度映射信息以及各个像素点的目标亮度值,直接确定各个像素点的目标编码值。举例来说,如果像素点Y的目标亮度值为35,那么像素点Y的目标编码值就为1。
S706,生成包含各个像素点的目标编码值的渲染数据,将生成的渲染数据作为多媒体数据的渲染数据。
在一个实施例中,所述确定多媒体数据的渲染数据的方式可以是找到目标亮度参数中各个目标亮度值所属的亮度值区间,然后利用插值函数对各个目标亮度值所属的亮度值区间进行插值,然后得到各个目标亮度值对应的目标编码值。优选地,所述插值函数可以是线性插值、代数插值、拉格朗日多项式插值等插值方法的插值函数,在此不限定。
举例来说,假设像素点Z的目标亮度值为200nit,亮度映射信息中编码值为120的像素点的亮度值为195nit,编码值为121的像素点的亮度值为198nit,编码值为122的像素点的亮度值为203nit,那么像素点Z的目标亮度值所属的亮度值区间为[198,203],其中,所述亮度区间为闭区间。然后利用线性插值函数对[(121,198),(122,203)]进行插值,最终得到像素点Z的目标编码值,其中,利用线性插值函数对一个数据区间进行插值的方式为本领域技术人员惯用技术手段,在此不赘述。
S707,基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。
其中,步骤S707的实施方式与上述步骤S204的实施方式一致,在此不赘述。
本申请实施例中,将终端设备的显示屏幕中的像素点的编码值设置为不同编码值,并测量像素点在不同编码值下的亮度值,然后可以根据分析得到的多媒体数据的目标亮度参数中的目标亮度值去确定多媒体数据的确定各个像素点的目标编码值;最后终端设备生成包含各个像素点的目标编码值的渲染数据,并基于渲染数据对多媒体数据进行渲染处理,得到并输出渲染图像。本申请实施例通过确定终端设备的显示屏幕的编码值和亮度值之间的亮度映射关系,以及对多媒体数据进行分析所得到的各个像素点的目标亮度值,可以以一个非常简单的方式去快速确定各个像素点的目标编码值,从而得到渲染数据,输出渲染图像;进而可以做到在不同的终端设备输出多媒体数据时,多媒体数据的播放质量都保持相对一致。
基于上述数据处理系统实施例以及数据处理方法实施例,本申请实施例提供了另一种数据处理方法。参见图9,为本申请实施例提供的另一种数据处理方法的流程示意图。图9所示的数据处理方法可由终端设备和服务器执行。图9所示的数据处理方法可包括如下步骤:
S901,对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示多媒体数据中各个像素点的目标亮度值。
其中,步骤S901的实施方式与上述步骤S21的实施方式一致,在此不赘述。
S902,终端设备向服务器发送亮度映射信息获取请求,亮度映射信息获取请求携带终端设备的设备参数。
举例来说,亮度映射信息获取请求中携带的终端设备的设备参数可以是手机型号,例如A牌手机plus系列、B牌手机pro系列等。
在一个实施例中,所述亮度映射信息获取请求中可以携带终端设备的设备参数的标识,通过标识去指明亮度映射信息获取请求想要获取的亮度映射信息是所述终端设备的设备参数对应的亮度映射信息。优选地,亮度映射信息获取请求中也可以携带加密数据包,不同的终端设备的亮度映射信息获取请求的加密数据包不同,通过与亮度映射信息获取请求的加密数据包匹配的亮度映射信息才是最终终端设备获取到的亮度映射信息。
S903,服务器查找终端设备的设备参数对应的亮度映射信息,并返回设备参数对应的亮度映射信息。
在一个实施例中,服务器中存储有不同终端设备的设备参数对应的不同亮度映射信息,所述服务器中存储的不同的亮度映射信息可以是不同终端设备对自身进行测量后,将得到的亮度映射信息发送至服务器进行存储;也可以是通过拷贝、输入等多种方式存储至服务器中;还可以是服务器对不同终端设备进行测量得到的。
具体来说,服务器对不同终端设备进行测量得到的亮度映射信息的方式有两种:
1)服务器将终端设备的显示屏幕划分为多个亮度区域,不同亮度区域中像素点的编码值和亮度值的数学分布不相同;服务器控制目标亮度区域中的像素点的编码值为预设编码值,并获取所述像素点在所述预设编码值下的亮度值,以得到至少两个参数对,并将所述至少两个参数对发送至服务器;服务器根据至少两个参数对,以及目标亮度区域中像素点的编码值和亮度值的数学分布,生成目标亮度区域的亮度映射函数,并设备参数对应的亮度映射信息,亮度映射信息包括所述多个亮度区域的亮度映射函数。其中,服务器生成目标亮度区域的亮度映射函数的具体方式与S303的实施方式相同,在此不赘述。
2)服务器控制终端设备的显示屏幕中的像素点的编码值为不同编码值,并获取所述像素点在不同编码值下的亮度值;服务器根据各个像素点的编码值以及获取到的各个像素点在各个编码值下的亮度值,得到设备参数对应的亮度映射信息。
其中,服务器控制终端设备的显示屏幕中的像素点的编码值为不同编码值的方式可以是服务器确定目标亮度区域的预设编码值,然后将所述预设编码值发送至终端设备,终端设备将终端设备的显示屏幕中的目标亮度区域的像素点设置为预设编码值;还可以是,服务器向终端设备发送一个或多个测试多媒体数据,测试多媒体数据中像素点的编码值是预设编码值,最后由终端设备显示所述测试多媒体数据。
此外,服务器获取到的各个像素点在各个编码值下的亮度值的具体方式包括以下至少一种:亮度测量设备测量亮度值、亮度传感器计算亮度值、从存储器中获取亮度值。具体来说,亮度测量设备测量亮度值可以是人工利用亮度测量仪等精密的亮度测量设备测量像素点的亮度值,将该亮度值输入服务器,作为该像素点在预设编码值下的亮度值。所述亮度传感器计算亮度值可以是终端设备的显示屏幕中设有亮度传感器,然后亮度传感器采集该像素点的亮度值,将采集到的亮度值作为该像素点在预设编码值下的亮度值;此外,还可以是亮度传感器采集多次该像素点的亮度值,得到一个平均亮度值,将该平均亮度值作为该像素点在预设编码值下的亮度值。所述从存储器中获取亮度值可以是预先与不同终端设备的硬件厂商进行协商,由终端设备的厂商将预设编码值下的亮度值存储服务器的存储器中。优选地,还可以是其他获取方式,在此不限定。
在一个实施例中,所述服务器查找亮度映射信息的方式包括关键字查找、有序查找、模糊查找中的至少一种。所述关键字查找可以是,如终端设备的设备参数中包括A牌plus系列的手机,那就将“A牌plus系列”和“手机”作为关键字在服务器中进行查找。优选地,服务器查找亮度映射信息的方式还可以是其他方式,在此不作限定。
S904,终端设备基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括各个像素点的目标编码值。
S905,终端设备基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。
其中,步骤S904至步骤S905的实施方式与上述步骤S203至步骤S204的实施方式一致,在此不赘述。
请参见图10,在一个应用场景中,终端设备对多媒体数据进行亮度分析处理后,在终端设备对多媒体数据渲染处理的过程中,会向服务器发送亮度映射信息获取请求,服务器数据接口对亮度映射信息获取请求进行解析后,得到了终端设备的设备参数;服务器数据库中存储有多个设备参数,以及所述多个设备参数对应的亮度映射信息,因此服务器数据库可以根据该设备参数,查找到该设备参数对应的亮度映射信息,最后通过服务器数据接口发送至终端设备;终端设备根据亮度映射信息,以及对多媒体数据进行亮度分析处理后得到的目标亮度参数,得到渲染数据;最后根据渲染数据对多媒体数据进行渲染处理,得到并输出渲染图像。
本申请实施例中,终端设备对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示多媒体数据中各个像素点的目标亮度值;终端设备向服务器发送亮度映射信息获取请求,亮度映射信息获取请求携带终端设备的设备参数;服务器查找终端设备的设备参数对应的亮度映射信息,并返回设备参数对应的亮度映射信息;终端设备基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括各个像素点的目标编码值;终端设备基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。本申请实施例通过终端设备与服务器的交互,可以快速得到终端设备的设备参数对应的亮度映射信息,从而可以得到渲染数据,最后通过基于渲染数据对多媒体数据进行渲染处理,输出渲染图像;可以做到在不同的终端设备输出多媒体数据时,多媒体数据的播放质量都保持相对一致。
基于上述数据处理系统实施例以及数据处理方法实施例,本申请实施例提供了另一种数据处理方法。参见图11,为本申请实施例提供的另一种数据处理方法的流程示意图。图11所示的数据处理方法可由中央处理器和服务器执行。图11所示的数据处理方法可包括如下步骤:
S1101,中央处理器获取多媒体数据,并将多媒体数据发送至图形处理器。
在一个实施例中,所述中央处理器获取多媒体数据的方法可以是从服务器获取,也可以是从终端设备的预存数据库中获取。优选地,还可以是其他获取多媒体数据的方法,在此不限定。
S1102,图形处理器对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数。
S1103,中央处理器获取亮度映射信息,并将亮度映射信息发送至图形处理器。
S1104,图形处理器基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括各个像素点的目标编码值。
S1105,图形处理器基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。
其中,步骤S1102至步骤S1105的实施方式与上述步骤S201至步骤S204的实施方式一致,在此不赘述。
本申请实施例中,由中央处理器负责获取多媒体数据和获取亮度映射信息,由图形处理器对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,以及基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括各个像素点的目标编码值,最后图形处理器基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。本申请实施例通过中央处理器和图形处理器的交互,可以利用图形处理器对多媒体数据做亮度分析处理、渲染等工作,在减少中央处理器的计算量的同时可以提高对多媒体数据的处理速度。
基于上述数据处理了方法实施例,本申请实施例提供了一种数据处理装置。参见图12,为本申请实施例提供的一种数据处理装置的结构示意图,该数据处理装置可包括处理单元1201以及输出单元1202。图12所示的数据处理装置可运行如下单元:
所述处理单元1201,用于对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示多媒体数据中各个像素点的目标亮度值;
所述处理单元1201,还用于获取亮度映射信息,其中,亮度映射信息用于指示像素点的编码值和亮度值的映射关系,亮度映射信息中任一编码值对应的亮度值指的是:控制终端设备的显示屏幕中的像素点的编码值为任一编码值时,获取到的像素点在任一编码值下的亮度值,不同设备参数对应的终端设备的显示屏幕中的像素点在任一编码值下的亮度值不同;
所述处理单元1201,还用于基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括各个像素点的目标编码值;
所述输出单元1202,用于基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。
在一个实施例中,所述处理单元1201,还用于向服务器发送亮度映射信息获取请求,亮度映射信息获取请求携带终端设备的设备参数,服务器存储有一个或者多个设备参数对应的亮度映射信息,其中,不同设备参数对应不同亮度映射信息;
所述处理单元1201,还用于接收服务器发送的设备参数对应的亮度映射信息。
在一个实施例中,亮度映射信息包括多个亮度区域的亮度映射函数,多个亮度区域中各个亮度区域的亮度映射函数是服务器根据至少两个参数对,以及各个亮度区域中像素点的编码值和亮度值的数学分布生成的,至少两个参数对中每个参数对包括预设编码值和预设编码值下的亮度值,不同参数对包括的预设编码值不相同,预设编码值下的亮度值是服务器控制设备参数对应的终端设备的各个亮度区域中的像素点的编码值为预设编码值时,获取到的像素点在预设编码值下的亮度值。
在一个实施例中,亮度映射信息包括多个编码值以及测量得到的多个编码值中各个编码值下的亮度值,各个编码值下的亮度值指的是:服务器控制设备参数对应的终端设备的显示屏幕中的像素点的编码值为不同编码值时,获取到的像素点在不同编码值下的亮度值。
在一个实施例中,所述处理单元1201,还用于将终端设备的显示屏幕划分为多个亮度区域,不同亮度区域中像素点的编码值和亮度值的数学分布不相同;控制目标亮度区域中的像素点的编码值为预设编码值,并获取像素点在预设编码值下的亮度值,以得到至少两个参数对,至少两个参数对中每个参数对包括预设编码值和预设编码值下的亮度值,不同参数对包括的预设编码值不相同,目标亮度区域为多个亮度区域中的任一亮度区域;根据至少两个参数对,以及目标亮度区域中像素点的编码值和亮度值的数学分布,生成目标亮度区域的亮度映射函数;生成终端设备的设备参数对应的亮度映射信息,亮度映射信息包括多个亮度区域的亮度映射函数。
在一个实施例中,所述处理单元1201,还用于确定多媒体数据中各个像素点所属的亮度区域;根据各个像素点所属的亮度区域的亮度映射函数以及各个像素点的目标亮度值,确定各个像素点的目标编码值;生成包含各个像素点的目标编码值的渲染数据,将生成的渲染数据作为多媒体数据的渲染数据。
在一个实施例中,所述处理单元1201,还用于控制终端设备的显示屏幕中的像素点的编码值为不同编码值,并获取像素点在不同编码值下的亮度值;生成设备参数对应的亮度映射信息,亮度映射信息包括多个编码值以及获取到的多个编码值中各个编码值下的亮度值。
在一个实施例中,所述处理单元1201,还用于根据设备参数对应的亮度映射信息以及各个像素点的目标亮度值,确定各个像素点的目标编码值;生成包含各个像素点的目标编码值的渲染数据,将生成的渲染数据作为多媒体数据的渲染数据。
根据本申请的一个实施例,图2、图3以及图7所示的数据处理方法所涉及的各个步骤可以是由图12所示的数据处理装置中的各个单元来执行的。
根据本申请的另一个实施例,图12所示的数据处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本申请的其它实施例中,基于逻辑功能划分的数据处理装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。
根据本申请的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算设备上运行能够执行如图2、图3以及图7所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图12中所示的数据处理装置,以及来实现本申请实施例数据处理方法。所述计算机程序可以记载于例如计算机可读存储介质上,并通过计算机可读存储介质装载于上述计算设备中,并在其中运行。
本申请实施例中,处理单元1201对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示所述多媒体数据中各个像素点的目标亮度值;并且,处理单元1201获取亮度映射信息,其中,所述亮度映射信息用于指示像素点的编码值和亮度值的映射关系,亮度映射信息中任一编码值对应的亮度值指的是:控制终端设备的显示屏幕中的像素点的编码值为任一编码值时,获取到的像素点在任一编码值下的亮度值,不同设备参数对应的终端设备的显示屏幕中的像素点在任一编码值下的亮度值不同;然后处理单元1201基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括所述各个像素点的目标编码值;最后输出单元1202基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。本申请实施例通过处理单元1201和输出单元1202,可以做到在不同的终端设备输出多媒体数据时,多媒体数据的播放质量都保持相对一致。
基于上述的方法实施例以及装置实施例,本申请还提供了一种电子设备。参见图13,为本申请实施例提供的一种电子设备的结构示意图。图13所示的电子设备可至少包括处理器1301、输入接口1302、输出接口1303以及计算机存储介质1304。其中,处理器1301、输入接口1302、输出接口1303以及计算机存储介质1304可通过总线或其他方式连接。
计算机存储介质1304可以存储在电子设备的存储器中,计算机存储介质1304用于存储计算机程序,计算机程序包括程序指令,处理器1301用于执行计算机存储介质1304存储的程序指令。处理器1301(或称CPU(Central Processing Unit,中央处理器))是电子设备的计算核心以及控制核心,其适于实现一条或多条指令,具体适于加载并执行一条或多条指令从而实现上述数据处理方法流程或相应功能。
本申请实施例还提供了一种计算机存储介质(Memory),计算机存储介质是电子设备中的记忆设备,用于存放程序和数据。可以理解的是,此处的计算机存储介质既可以包括终端中的内置存储介质,当然也可以包括终端所支持的扩展存储介质。计算机存储介质提供存储空间,该存储空间存储了终端的操作系统。并且,在该存储空间中还存放了适于被处理器1301加载并执行的一条或多条的指令,这些指令可以是一个或一个以上的计算机程序(包括程序代码)。需要说明的是,此处的计算机存储介质可以是高速随机存取存储器(random access memory,RAM)存储器,也可以是非不稳定的存储器(non-volatilememory),例如至少一个磁盘存储器;可选的还可以是至少一个位于远离前述处理器的计算机存储介质。
在一个实施例中,可由处理器1301加载并执行计算机存储介质中存放的一条或多条指令,以实现上述有关图2、图3以及图7的数据处理方法实施例中的方法的相应步骤,具体实现中,计算机存储介质中的一条或多条指令由处理器1301加载并执行如下步骤:
处理器1301对多媒体数据进行亮度分析处理,得到多媒体数据的目标亮度参数,目标亮度参数用于指示多媒体数据中各个像素点的目标亮度值;
处理器1301获取亮度映射信息,其中,亮度映射信息用于指示像素点的编码值和亮度值的映射关系,亮度映射信息中任一编码值对应的亮度值指的是:控制终端设备的显示屏幕中的像素点的编码值为任一编码值时,获取到的像素点在任一编码值下的亮度值,不同设备参数对应的终端设备的显示屏幕中的像素点在任一编码值下的亮度值不同;
处理器1301基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,渲染数据包括各个像素点的目标编码值;
处理器1301基于渲染数据对多媒体数据进行渲染处理,得到渲染图像,并输出渲染图像。
在一个实施例中,所述处理器1301根据终端设备的设备参数,获取设备参数对应的亮度映射信息,包括:
处理器1301向服务器发送亮度映射信息获取请求,亮度映射信息获取请求携带终端设备的设备参数,服务器存储有一个或者多个设备参数对应的亮度映射信息,其中,不同设备参数对应不同亮度映射信息;
处理器1301接收服务器发送的设备参数对应的亮度映射信息。
在一个实施例中,亮度映射信息包括多个亮度区域的亮度映射函数,多个亮度区域中各个亮度区域的亮度映射函数是服务器根据至少两个参数对,以及各个亮度区域中像素点的编码值和亮度值的数学分布生成的,至少两个参数对中每个参数对包括预设编码值和预设编码值下的亮度值,不同参数对包括的预设编码值不相同,预设编码值下的亮度值是服务器控制设备参数对应的终端设备的各个亮度区域中的像素点的编码值为预设编码值时,获取到的像素点在预设编码值下的亮度值。
在一个实施例中,亮度映射信息包括多个编码值以及测量得到的多个编码值中各个编码值下的亮度值,各个编码值下的亮度值指的是:服务器控制设备参数对应的终端设备的显示屏幕中的像素点的编码值为不同编码值时,获取到的像素点在不同编码值下的亮度值。
在一个实施例中,还包括:
处理器1301将终端设备的显示屏幕划分为多个亮度区域,不同亮度区域中像素点的编码值和亮度值的数学分布不相同;
处理器1301控制目标亮度区域中的像素点的编码值为预设编码值,并获取像素点在预设编码值下的亮度值,以得到至少两个参数对,至少两个参数对中每个参数对包括预设编码值和预设编码值下的亮度值,不同参数对包括的预设编码值不相同,目标亮度区域为多个亮度区域中的任一亮度区域;
处理器1301根据至少两个参数对,以及目标亮度区域中像素点的编码值和亮度值的数学分布,生成目标亮度区域的亮度映射函数;
处理器1301生成终端设备的设备参数对应的亮度映射信息,亮度映射信息包括多个亮度区域的亮度映射函数。
在一个实施例中,所述处理器1301基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,包括:
处理器1301确定多媒体数据中各个像素点所属的亮度区域;
处理器1301根据各个像素点所属的亮度区域的亮度映射函数以及各个像素点的目标亮度值,确定各个像素点的目标编码值;
处理器1301生成包含各个像素点的目标编码值的渲染数据,将生成的渲染数据作为多媒体数据的渲染数据。
在一个实施例中,还包括:
处理器1301控制终端设备的显示屏幕中的像素点的编码值为不同编码值,并获取像素点在不同编码值下的亮度值;
处理器1301生成设备参数对应的亮度映射信息,亮度映射信息包括多个编码值以及获取到的多个编码值中各个编码值下的亮度值。
在一个实施例中,所述处理器1301基于亮度映射信息和目标亮度参数,确定多媒体数据的渲染数据,包括:
处理器1301根据设备参数对应的亮度映射信息以及各个像素点的目标亮度值,确定各个像素点的目标编码值;
处理器1301生成包含各个像素点的目标编码值的渲染数据,将生成的渲染数据作为多媒体数据的渲染数据。
本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该电子设备执行上述如图2、图3以及图7所示的方法实施例。其中,计算机可读存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种数据处理方法,其特征在于,包括:
对多媒体数据进行亮度分析处理,得到所述多媒体数据的目标亮度参数,所述目标亮度参数用于指示所述多媒体数据中各个像素点的目标亮度值;
获取亮度映射信息,其中,所述亮度映射信息用于指示像素点的编码值和亮度值的映射关系,所述亮度映射信息中任一编码值对应的亮度值指的是:控制终端设备的显示屏幕中的像素点的编码值为所述任一编码值时,获取到的所述像素点在所述任一编码值下的亮度值,不同设备参数对应的终端设备的显示屏幕中的像素点在所述任一编码值下的亮度值不同;
基于所述亮度映射信息和所述目标亮度参数,确定所述多媒体数据的渲染数据,所述渲染数据包括所述各个像素点的目标编码值;
基于所述渲染数据对所述多媒体数据进行渲染处理,得到渲染图像,并输出所述渲染图像。
2.根据权利要求1所述的方法,其特征在于,所述获取亮度映射信息,包括:
向服务器发送亮度映射信息获取请求,所述亮度映射信息获取请求携带所述终端设备的设备参数,所述服务器存储有一个或者多个设备参数对应的亮度映射信息,其中,不同设备参数对应不同亮度映射信息;
接收所述服务器发送的所述设备参数对应的亮度映射信息。
3.根据权利要求2所述的方法,其特征在于,所述亮度映射信息包括多个亮度区域的亮度映射函数,所述多个亮度区域中各个亮度区域的亮度映射函数是所述服务器根据至少两个参数对,以及所述各个亮度区域中像素点的编码值和亮度值的数学分布生成的,所述至少两个参数对中每个参数对包括预设编码值和所述预设编码值下的亮度值,不同参数对包括的预设编码值不相同,所述预设编码值下的亮度值是所述服务器控制所述终端设备的所述各个亮度区域中的像素点的编码值为预设编码值时,获取到的所述像素点在所述预设编码值下的亮度值。
4.根据权利要求2所述的方法,其特征在于,所述亮度映射信息包括多个编码值以及测量得到的所述多个编码值中各个编码值下的亮度值,所述各个编码值下的亮度值指的是:所述服务器控制所述终端设备的显示屏幕中的像素点的编码值为不同编码值时,获取到的所述像素点在不同编码值下的亮度值。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将终端设备的显示屏幕划分为多个亮度区域,不同亮度区域中像素点的编码值和亮度值的数学分布不相同;
控制目标亮度区域中的像素点的编码值为预设编码值,并获取所述像素点在所述预设编码值下的亮度值,以得到至少两个参数对,所述至少两个参数对中每个参数对包括预设编码值和所述预设编码值下的亮度值,不同参数对包括的预设编码值不相同,所述目标亮度区域为所述多个亮度区域中的任一亮度区域;
根据所述至少两个参数对,以及所述目标亮度区域中像素点的编码值和亮度值的数学分布,生成所述目标亮度区域的亮度映射函数;
生成所述终端设备的设备参数对应的亮度映射信息,所述亮度映射信息包括所述多个亮度区域的亮度映射函数。
6.根据权利要求3或5所述的方法,其特征在于,所述基于所述亮度映射信息和所述目标亮度参数,确定所述多媒体数据的渲染数据,包括:
确定所述多媒体数据中各个像素点所属的亮度区域;
根据所述各个像素点所属的亮度区域的亮度映射函数以及所述各个像素点的目标亮度值,确定所述各个像素点的目标编码值;
生成包含所述各个像素点的目标编码值的渲染数据,将生成的渲染数据作为所述多媒体数据的渲染数据。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
控制所述终端设备的显示屏幕中的像素点的编码值为不同编码值,并获取所述像素点在不同编码值下的亮度值;
生成所述设备参数对应的亮度映射信息,所述亮度映射信息包括多个编码值以及获取到的所述多个编码值中各个编码值下的亮度值。
8.根据权利要求4或7所述的方法,其特征在于,所述基于所述亮度映射信息和所述目标亮度参数,确定所述多媒体数据的渲染数据,包括:
根据所述设备参数对应的亮度映射信息以及所述各个像素点的目标亮度值,确定所述各个像素点的目标编码值;
生成包含所述各个像素点的目标编码值的渲染数据,将生成的渲染数据作为所述多媒体数据的渲染数据。
9.根据权利要求1所述的方法,其特征在于,所述方法还包括:
通过中央处理器获取多媒体数据,并将所述多媒体数据发送至图形处理器;
通过所述图形处理器对所述多媒体数据进行亮度分析处理,得到所述多媒体数据的目标亮度参数;
通过所述中央处理器获取亮度映射信息,并将所述亮度映射信息发送至所述图形处理器;
通过所述图形处理器,基于所述亮度映射信息和所述目标亮度参数,确定所述多媒体数据的渲染数据,所述渲染数据包括所述各个像素点的目标编码值;
通过所述图形处理器,基于所述渲染数据对所述多媒体数据进行渲染处理,得到渲染图像,并输出所述渲染图像。
10.一种数据处理装置,其特征在于,所述数据处理装置包括处理单元以及输出单元,所述处理单元以及所述输出单元用于执行如权利要求1-9任一项所述的数据处理方法。
CN202110971601.7A 2021-08-23 2021-08-23 数据处理方法及装置 Active CN114286172B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110971601.7A CN114286172B (zh) 2021-08-23 2021-08-23 数据处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110971601.7A CN114286172B (zh) 2021-08-23 2021-08-23 数据处理方法及装置

Publications (2)

Publication Number Publication Date
CN114286172A true CN114286172A (zh) 2022-04-05
CN114286172B CN114286172B (zh) 2024-04-09

Family

ID=80868447

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110971601.7A Active CN114286172B (zh) 2021-08-23 2021-08-23 数据处理方法及装置

Country Status (1)

Country Link
CN (1) CN114286172B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116129816A (zh) * 2023-02-06 2023-05-16 格兰菲智能科技有限公司 像素渲染方法、装置、计算机设备和存储介质
CN117241145A (zh) * 2022-06-15 2023-12-15 荣耀终端有限公司 终端设备及创建/显示hdr图像的方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015007510A1 (en) * 2013-07-16 2015-01-22 Koninklijke Philips N.V. Method and apparatus to create an eotf function for a universal code mapping for an hdr image, method and process to use these images
US20160307602A1 (en) * 2010-03-03 2016-10-20 Koninklijke Philips N.V. Methods and apparatuses for processing or defining luminance/color regimes
CN109364486A (zh) * 2018-10-30 2019-02-22 网易(杭州)网络有限公司 游戏中hdr渲染的方法及装置、电子设备、存储介质
CN112750086A (zh) * 2020-08-31 2021-05-04 腾讯科技(深圳)有限公司 一种图像处理方法、装置、电子设备及存储介质
CN112929625A (zh) * 2021-02-08 2021-06-08 北京奇艺世纪科技有限公司 一种显示素材渲染方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160307602A1 (en) * 2010-03-03 2016-10-20 Koninklijke Philips N.V. Methods and apparatuses for processing or defining luminance/color regimes
WO2015007510A1 (en) * 2013-07-16 2015-01-22 Koninklijke Philips N.V. Method and apparatus to create an eotf function for a universal code mapping for an hdr image, method and process to use these images
CN109364486A (zh) * 2018-10-30 2019-02-22 网易(杭州)网络有限公司 游戏中hdr渲染的方法及装置、电子设备、存储介质
CN112750086A (zh) * 2020-08-31 2021-05-04 腾讯科技(深圳)有限公司 一种图像处理方法、装置、电子设备及存储介质
CN112929625A (zh) * 2021-02-08 2021-06-08 北京奇艺世纪科技有限公司 一种显示素材渲染方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117241145A (zh) * 2022-06-15 2023-12-15 荣耀终端有限公司 终端设备及创建/显示hdr图像的方法
CN116129816A (zh) * 2023-02-06 2023-05-16 格兰菲智能科技有限公司 像素渲染方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
CN114286172B (zh) 2024-04-09

Similar Documents

Publication Publication Date Title
US20180189980A1 (en) Method and System for Providing Virtual Reality (VR) Video Transcoding and Broadcasting
CN114286172B (zh) 数据处理方法及装置
CN112449169B (zh) 色调映射的方法和装置
CN110865862B (zh) 一种页面背景设置方法、装置及电子设备
US11741292B2 (en) Adaptive content delivery
KR20160102438A (ko) 하이 다이내믹 레인지 이미지를 톤-매핑하기 위한 방법 및 장치
EP4150583A1 (en) Machine learning techniques to create higher resolution data structures representing textures from lower resolution data structures
CN109102484B (zh) 用于处理图像的方法和装置
CN113742025A (zh) 页面生成方法、装置、设备和存储介质
JP2019087844A (ja) 画像処理装置、表示装置、および画像処理方法
CN112565887B (zh) 一种视频处理方法、装置、终端及存储介质
WO2024067461A1 (zh) 图像处理方法、装置、计算机设备和存储介质
CN111696034B (zh) 图像处理方法、装置及电子设备
CN116843566A (zh) 色调映射方法、装置、显示设备和存储介质
KR20160015136A (ko) 클라우드 스트리밍 서비스 시스템, 스틸 이미지 압축 기법을 이용한 클라우드 스트리밍 서비스 방법 및 이를 위한 장치
US11388348B2 (en) Systems and methods for dynamic range compression in multi-frame processing
CN115546036A (zh) 一种图像增强方法、装置、设备及计算机可读存储介质
CN111510622B (zh) 图像处理方法、装置、终端及存储介质
WO2020233536A1 (zh) Vr视频质量评估方法及装置
CN111405349B (zh) 基于视频内容的信息植入方法、装置及存储介质
CN115393524B (zh) 一种基于三维游戏引擎的三维模型渲染方法及系统
EP4217967A1 (en) Machine learning techniques to create higher resolution data structures representing textures from lower resolution data structures
Al-Juboori et al. Impact of tone-mapping operators and viewing devices on visual quality of experience
CN116739936A (zh) 色调映射方法、装置、显示设备和存储介质
CN116805292A (zh) 色调映射方法、装置和显示设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant