CN116668773A - 增强视频画质的方法与电子设备 - Google Patents

增强视频画质的方法与电子设备 Download PDF

Info

Publication number
CN116668773A
CN116668773A CN202211468041.4A CN202211468041A CN116668773A CN 116668773 A CN116668773 A CN 116668773A CN 202211468041 A CN202211468041 A CN 202211468041A CN 116668773 A CN116668773 A CN 116668773A
Authority
CN
China
Prior art keywords
video
played
parameter
value
enhancement processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211468041.4A
Other languages
English (en)
Other versions
CN116668773B (zh
Inventor
降伟帅
卜彦云
雷财华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202211468041.4A priority Critical patent/CN116668773B/zh
Priority to PCT/CN2023/114086 priority patent/WO2024109202A1/zh
Publication of CN116668773A publication Critical patent/CN116668773A/zh
Application granted granted Critical
Publication of CN116668773B publication Critical patent/CN116668773B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Image Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

本申请涉及图像处理领域,提供了一种增强视频画质的方法与电子设备,该方法应用于播放视频的电子设备,包括:获取待播放视频;显示第一显示界面,第一显示界面包括待播放视频;检测到对待播放视频的播放操作;响应于播放操作,确定待播放视频的第一参数是否小于第一预设阈值;若第一参数小于第一预设阈值,确定待播放视频的第二参数是否满足第一预设条件;基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频;显示或者保存增强处理后的视频。基于本申请的方案,能够智能化的分析待播放视频的视频质量较差的原因,针对性地对待播放视频进行画质增强处理,提高待播放视频的视频质量。

Description

增强视频画质的方法与电子设备
技术领域
本申请涉及图像处理领域,具体地,涉及一种增强视频画质的方法与电子设备。
背景技术
随着电子设备与无线网络的普及,视频应用程序的使用越来越广泛;用户通常可以通过电子设备采集视频并上传至视频应用程序进行视频共享;目前,由于采集视频的电子设备的处理能力较差;或者,采集视频的用户的拍摄技术较差;或者,视频的网络传输环境较差等因素,导致播放视频的电子设备中视频质量较差,使得用户的观看视频的体验较差。
因此,如何对待播放视频的视频画质进行增强处理,提高视频质量成为一个亟需解决的问题。
发明内容
本申请提供了一种增强视频画质的方法与电子设备,能够智能化的分析待播放视频的视频质量较差的原因;从而针对性地对待播放视频进行画质增强处理,提高待播放视频的视频质量。
第一方面,提供了一种增强视频画质的方法,应用于电子设备,包括:
获取待播放视频;
显示第一显示界面,所述第一显示界面包括所述待播放视频;
检测到对所述待播放视频的播放操作;
响应于所述播放操作,确定所述待播放视频的第一参数是否小于第一预设阈值,所述第一参数包括分辨率;
若所述第一参数小于第一预设阈值,确定所述待播放视频的第二参数是否满足第一预设条件;所述第二参数包括动态范围的数值与高频信息的数值,所述第一预设条件包括所述待播放视频的动态范围的数值小于第二预设阈值,和/或,所述待播放视频的高频信息的数值于第三预设阈值,所述高频信息的数值为所述待播放视频的频域图像中高频信息的累计值,所述高频信息包括所述待播放视频中图像的边缘信息与细节信息;
基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频;
显示或者保存所述增强处理后的视频。
基于本申请的方案,通过获取待播放视频;显示第一显示界面,第一显示界面包括待播放视频与第一控件,第一控件用于指示对待播放视频进行增强处理;检测到对第一控件的播放操作;先确定待播放视频的第一参数是否小于第一预设阈值,第一参数包括分辨率;若第一参数小于第一预设阈值,再确定待播放视频的第二参数是否满足第一预设条件;基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频;显示或者保存增强处理后的视频;可以理解为,在本申请的实施例中,在对待播放视频进行画质增强处理之前,可以先对待播放视频进行分析;确定影响待播放视频的视频质量的因素;在确定影响待播放视频的视频质量的因素的情况下,再针对性地对待播放视频进行画质增强处理,从而能够提高待播放视频的视频质量;与现有方式中,直接对待播放视频的某一方面进行增强处理相比,本申请的实施例中的方案,能够智能化的分析待播放视频的视频质量较差的原因;从而针对性地对待播放视频进行画质增强处理,提高待播放视频的视频质量。
在一种可能的实现方式中,基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述第一参数小于第一预设阈值,基于所述第一参数所述待播放视频的亮度通道数据进行所述增强处理,生成所述增强处理后的视频;
若所述第一参数小于第一预设阈值,且待播放视频的第二参数满足第一预设条件,基于所述第一参数与所述第二参数所述待播放视频的亮度通道数据进行所述增强处理,生成所述增强处理后的视频。
结合第一方面,在第一方面的某些实现方式中,所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
基于所述第一参数和/或所述第二参数对所述待播放视频的亮度通道数据进行所述增强处理,生成所述增强处理后的视频。
在本申请的方案中,在对待播放视频进行增强时,可以仅对待播放视频的Y通道数据进行增强处理;一方面,由于本申请实施例提供的增强视频画质的方法可以应用于实时处理,因此仅对待播放视频的Y通道数据进行增强处理能够提高电子设备执行增强视频画质的处理效率;另一方面,由于用户的眼部通常对亮度更敏感,因此仅对待播放视频的Y通道数据进行增强处理,能够使得用户对视频的观看体验明显提升。
结合第一方面,在第一方面的某些实现方式中,所述若所述第一参数小于第一预设阈值时,确定所述待播放视频的第二参数是否满足第一预设条件还包括,包括:
若所述分辨率的数值大于或者等于所述第一预设阈值,获取所述待播放视频的分类标签;
确定所述分类标签是否属于预设标签,所述预设标签包括第一标签与第二标签;
若所述分类标签属于所述第一标签,确定所述待播放视频的动态范围的数值是否小于所述第二预设阈值是否满足第二预设条件,所述动态范围的数值第二预设条件用于指示为基于所述待播放视频的直方图中第一灰度区间的像素数量的占比值得到的大于第二预设阈值;
所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述动态范围的数值小于所述第二预设阈值满足所述第二预设条件,确定所述动态范围为所述第二参数基于所述动态范围的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频。
应理解,第一标签可以是指存在亮光区域与暗光区域的拍摄场景的标签;例如,第一标签可以包括:室内光源拍摄场景的标签、夜景拍摄场景的标签、天空拍摄场景的标签,或者,玻璃墙的标签(例如,饱和度较高的玻璃墙)。
在本申请的方案中,第一标签是指需要进行动态范围增强的拍摄场景的标签;若待播放视频属于第一标签,则可以进一步判断待播放视频是否需要进行动态范围增强处理;从而提高待播放视频中的动态范围。
在本申请的实施例中,可以先确定待播放视频的分辨率的数值是否小于第一预设阈值;若待播放视频的分辨率大于或者第一预设阈值,则可以表示分辨率不是影响待播放视频的视频质量的因素;进一步,可以确定待播放视频是否属于预设场景(例如,第一标签);若待播放视频的标签为第一标签,可以判断动态范围是否为影响待播放视频的视频质量的因素;例如,若分类标签属于第一标签,确定动态范围的数值是否满足第二预设条件;可以理解为,确定待播放视频中第一灰度区间的像素数目的占比值是否大于第二预设阈值(例如,0.6);若待播放视频中第一灰度区间(例如,中间灰度区域;比如,灰度值为[[100,155]]的区间)的像素数目的占比值是否大于第二预设阈值,则表示待播放视频中中间灰度像素的占比值较大;此时,待播放视频中存在画面整体发灰、通透感不足的问题;可以确定动态范围为影响待播放视频的视频质量的因素。
结合第一方面,在第一方面的某些实现方式中,所述确定所述待播放视频的动态范围的数值是否小于所述第二预设阈值,包括:
确定所述待播放视频的直方图中第一灰度区间的像素数量的占比值是否大于第四预设阈值。
结合第一方面,在第一方面的某些实现方式中,所述基于所述动态范围的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频,包括:
获取所述第一灰度区间的像素数量的占比值;
基于所述第一灰度区间的像素数量的占比值,得到第一数值与第二数值;
基于所述第一数值、所述第二数据与预设坐标数据,得到映射关系,所述映射关系用于指示输入灰度值与输出灰度值之间的关联关系;
基于所述映射关系对所述待播放视频的进行所述增强处理,生成所述增强处理后的视频。
在一种可能的实现方式中,映射关系也可以为折线,或者,表格,或者,函数等;本申请对此不作任何限定。
结合第一方面,在第一方面的某些实现方式中,所述基于所述映射关系对所述待播放视频的进行所述增强处理,生成所述增强处理后的视频,包括:
基于所述映射关系对所述待播放视频的亮度通道进行所述增强处理,生成所述增强处理后的视频。
结合第一方面,在第一方面的某些实现方式中,所述映射关系为映射曲线;若所述第一灰度区间的像素数量的占比值与所述映射曲线的曲率之间成正比。
结合第一方面,在第一方面的某些实现方式中,还包括:
若所述分类标签属于所述第二标签,确定所述待播放视频的高频信息的占比值数值是否小于第三预设阈值;
所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述高频信息的占比值小于第三预设阈值,基于所述高频信息的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频确定所述高频信息为所述第二参数。
应理解,第二标签可以是指纹理信息丰富的场景的标签。例如,第二标签可以包括:风景的标签、建筑的标签、陶艺品的标签、工艺品的标签、手工编织品的吧标签等。
还应理解,第二标签是指需要进行细节增强的拍摄场景的标签;若待播放视频属于第二标签,则可以进一步判断待播放视频是否需要进行细节增强处理;从而提高待播放视频中的细节信息。
在本申请的方案中,对于待播放视频的分辨率大于或者等于第一预设阈值的情况下,可以理解为影响视频质量的原因不是分辨率的问题的情况下;若待播放视频的标签为第二标签;此时,可以判断影响视频质量的原因是否高频信息(例如,高频信息较少导致细节模糊);若待播放视频的高频信息的占比小于第三预设阈值,则可以确定影响待播放视频的视频质量的因素为高频信息。
结合第一方面,在第一方面的某些实现方式中,
所述基于所述高频信息的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频基于所述第二参数对所述待播放视频的亮度通道数据进行所述增强处理,生成所述增强处理后的视频,包括:
通过对所述待播放视频的亮度通道数据进行傅里叶变换处理,生成所述待播放视频的频率图;
基于所述频率图确定所述频率图中高频区域的累计值,所述高频区域的累积值为遍历所述高频区域的每个像素点得到的数值;
基于所述高频区域的累计值、预设斜率值与预设截距值,得到拉普拉斯锐化系数;
基于所述拉普拉斯锐化系数与所述待播放视频的二阶梯度图像,得到第一视频;
对所述待播放视频与所述第一视频进行融合处理,生成所述增强处理后的视频。
结合第一方面,在第一方面的某些实现方式中,所述确定所述待播放视频的第一参数是否小于第一预设阈值,包括:
确定所述待播放视频中每一帧数据的所述第一参数是否小于所述第一预设阈值。
结合第一方面,在第一方面的某些实现方式中,所述确定所述待播放视频的第一参数是否小于第一预设阈值,包括:
确定所述待播放视频中预设帧数据的所述第一参数是否小于所述第一预设阈值。
结合第一方面,在第一方面的某些实现方式中,所述确定所述待播放视频的第二参数是否满足第一预设条件,包括:
确定所述待播放视频中每一帧数据的所述第二参数是否满足所述第一预设条件。
结合第一方面,在第一方面的某些实现方式中,所述确定所述待播放视频的第二参数是否满足第一预设条件,包括:
确定所述待播放视频中预设帧数据的所述第二参数是否满足所述第一预设条件。
结合第一方面,在第一方面的某些实现方式中,所述检测到对所述待播放视频的播放操作,包括:
显示第二显示界面,所述第二显示界面中包括第一提示框,所述第一提示框用于提示是否对所述待播放视频进行所述增强处理,所述第一提示框中包括第一控件,所述第一控件用于指示对所述待播放视频进行所述增强处理;
响应于所述播放操作,确定所述待播放视频的第一参数中是否小于第一预设阈值,包括:
检测到对所述第一控件的第一操作;
响应于所述第一操作,确定所述待播放视频的所述第一参数中是否小于所述第一预设阈值。
结合第一方面,在第一方面的某些实现方式中,在保存所述增强处理后的视频的情况下,还包括:
显示第二提示框,所述第二提示框用于提示所述增强处理后的视频的存储方式;其中,所述存储方式包括:第一存储方式与第二存储方式,所述第一存储方式是指所述增强处理后的视频替换所述待播放的视频,所述第二存储方式是指将所述增强处理后的视频存储至第一存储区域,所述第一存储区域与存储所述待播放视频的存储区域不同。
结合第一方面,在第一方面的某些实现方式中,所述获取待播放视频,包括:
获取所述电子设备中的所述待播放视频;或者,
接收第一电子设备发送的所述待播放视频,所述第一电子设备为所述待播放视频的采集设备。
在一种可能的实现方式中,第一电子设备可以采集待播放视频,第一电子设备可以向电子设备发送待播放视频;例如,第一电子设备可以是待播放视频的采集设备;电子设备可以是待播放视频的接收设备;第一电子设备可以通过第三方聊天软件向电子设备发送待播放视频。
在一种可能的实现方式中,电子设备可以在本地获取待播放视频。
在一种可能的实现方式中,电子设备可以从服务器获取待播放视频。
第二方面,提供了一种电子设备,包括用于执行第一方面或者第一方面中任一种增强视频画质的方法的模块/单元。
第三方面,提供了一种电子设备,所述电子设备包括一个或多个处理器与存储器;所述存储器与所述一个或多个处理器耦合,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
获取待播放视频;
显示第一显示界面,所述第一显示界面包括所述待播放视频;
检测到对所述待播放视频的播放操作;
响应于所述播放操作,确定所述待播放视频的第一参数是否小于第一预设阈值,所述第一参数包括分辨率;
若所述第一参数小于第一预设阈值,确定所述待播放视频的第二参数是否满足第一预设条件;所述第二参数包括动态范围的数值与高频信息的数值,所述第一预设条件包括所述待播放视频的动态范围的数值小于第二预设阈值,和/或,所述待播放视频的高频信息的数值于第三预设阈值,所述高频信息的数值为所述待播放视频的频域图像中高频信息的累计值,所述高频信息包括所述待播放视频中图像的边缘信息与细节信息;
基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频;
显示或者保存所述增强处理后的视频。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
基于所述第一参数和/或所述第二参数对所述待播放视频的亮度通道数据进行所述增强处理,生成所述增强处理后的视频。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
获取所述待播放视频的分类标签;
确定所述分类标签是否属于预设标签,所述预设标签包括第一标签与第二标签;
若所述分类标签属于所述第一标签,确定所述待播放视频的动态范围的数值是否小于所述第二预设阈值,所述动态范围的数值为基于所述待播放视频的直方图中第一灰度区间的像素数量的占比值得到的;
所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述动态范围的数值小于所述第二预设阈值,基于所述动态范围的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
确定所述待播放视频的直方图中第一灰度区间的像素数量的占比值是否大于第四预设阈值。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
获取所述第一灰度区间的像素数量的占比值;
基于所述第一灰度区间的像素数量的占比值,得到第一数值与第二数值;
基于所述第一数值、所述第二数据与预设坐标数据,得到映射关系,所述映射关系用于指示输入灰度值与输出灰度值之间的关联关系;
基于所述映射关系对所述待播放视频的进行所述增强处理,生成所述增强处理后的视频。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
基于所述映射关系对所述待播放视频的亮度通道进行所述增强处理,生成所述增强处理后的视频。
结合第三方面,在第三方面的某些实现方式中,所述映射关系为映射曲线,所述第一灰度区间的像素数量的占比值与所述映射曲线的曲率之间成正比。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
若所述分类标签属于所述第二标签,确定所述待播放视频的高频信息的数值是否小于第三预设阈值;
所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述高频信息的占比值小于第三预设阈值,基于所述高频信息的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
通过对所述待播放视频的亮度通道数据进行傅里叶变换处理,生成所述待播放视频的频率图;
基于所述频率图确定所述频率图中高频区域的累计值,所述高频区域的累积值为遍历所述高频区域的每个像素点得到的数值;
基于所述高频区域的累计值、预设斜率值与预设截距值,得到拉普拉斯锐化系数;
基于所述拉普拉斯锐化系数与所述待播放视频的二阶梯度图像,得到第一视频;
对所述待播放视频与所述第一视频进行融合处理,生成所述增强处理后的视频。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
确定所述待播放视频中每一帧数据的所述第一参数是否小于所述第一预设阈值。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
确定所述待播放视频中预设帧数据的所述第一参数是否小于所述第一预设阈值。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
确定所述待播放视频中每一帧数据的所述第二参数是否满足所述第一预设条件。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
确定所述待播放视频中预设帧数据的所述第二参数是否满足所述第一预设条件。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
显示第二显示界面,所述第二显示界面中包括第一提示框,所述第一提示框用于提示是否对所述待播放视频进行所述增强处理,所述第一提示框中包括第一控件,所述第一控件用于指示对所述待播放视频进行所述增强处理;
响应于所述播放操作,确定所述待播放视频的第一参数中是否小于第一预设阈值,包括:
检测到对所述第一控件的第一操作;
响应于所述第一操作,确定所述待播放视频的所述第一参数中是否小于所述第一预设阈值。
结合第三方面,在第三方面的某些实现方式中,在保存所述增强处理后的视频的情况下,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
显示第二提示框,所述第二提示框用于提示所述增强处理后的视频的存储方式;
其中,所述存储方式包括:第一存储方式与第二存储方式,所述第一存储方式为通过所述增强处理后的视频对所述待播放的视频进行替换的存储方式,所述第二存储方式为将所述增强处理后的视频存储至第一存储区域的存储,所述第一存储区域与存储所述待播放视频的存储区域不同。
结合第三方面,在第三方面的某些实现方式中,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行:
获取所述电子设备中的所述待播放视频;或者,
接收第一电子设备发送的所述待播放视频,所述第一电子设备为所述待播放视频的采集设备。
第四方面,提供一种电子设备,所述电子设备包括一个或多个处理器、存储器;所述存储器与所述一个或多个处理器耦合,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行第一方面或者第一方面中的任一种方法。
第五方面,提供了一种芯片系统,所述芯片系统应用于电子设备,所述芯片系统包括一个或多个处理器,所述处理器用于调用计算机指令以使得所述电子设备执行第一方面或第一方面中的任一种方法。
第六方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序代码,当所述计算机程序代码被电子设备运行时,使得该电子设备执行第一方面或第一方面中的任一种方法。
第七方面,提供了一种计算机程序产品,所述计算机程序产品包括:计算机程序代码,当所述计算机程序代码被电子设备运行时,使得该电子设备执行第一方面或第一面中的任一种方法。
基于本申请的方案,通过获取待播放视频;显示第一显示界面,第一显示界面包括待播放视频与第一控件,第一控件用于指示对待播放视频进行增强处理;检测到对第一控件的第一播放操作;先确定待播放视频的第一参数是否小于第一预设阈值,第一参数包括分辨率确定待播放视频的第一参数中满足第一预设条件的第二参数,第一参数包括分辨率、动态范围和高频信息中的至少两种;若第一参数小于第一预设阈值,再确定待播放视频的第二参数是否满足第一预设条件;基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频;显示或者保存增强处理后的视频;可以理解为,在本申请的实施例中,在对待播放视频进行画质增强处理之前,可以先对待播放视频进行分析;确定影响待播放视频的视频质量的因素;在确定影响待播放视频的视频质量的因素的情况下,再针对性地对待播放视频进行画质增强处理,从而能够提高待播放视频的视频质量;与现有方式中,直接对待播放视频的某一方面进行增强处理相比,本申请的实施例中的方案,能够智能化的分析待播放视频的视频质量较差的原因;从而针对性地对待播放视频进行画质增强处理,提高待播放视频的视频质量。
附图说明
图1是一种适用于本申请的电子设备的硬件系统的示意图;
图2是一种适用于本申请的电子设备的软件系统的示意图;
图3是一种适用于本申请实施例的应用场景的示意图;
图4是本申请实施例提供的一种增强视频画质的方法的示意性流程图;
图5是本申请实施例提供的另一种增强视频画质的方法的示意性流程图;
图6是本申请实施例提供的一种对比度增强算法处理的示意图;
图7是本申请实施例提供的一种用于映射处理的曲线示意图;
图8是本申请实施例提供的一种自适应锐度算法处理的示意图;
图9是本申请实施例提供的一种原始数据与原始数据对应的频域图的示意图;
图10是本申请实施例提供的一种生成细节增强图像的示意图;
图11是本申请实施例提供的又一种增强视频画质的方法的交互性流程图;
图12是本申请实施例提供的一种图形用户界面的示意图;
图13是本申请实施例提供的另一种图形用户界面的示意图;
图14是本申请实施例提供的又一种图形用户界面的示意图;
图15是本申请实施例提供的又一种图形用户界面的示意图;
图16是本申请实施例提供的又一种图形用户界面的示意图;
图17是本申请实施例提供的又一种图形用户界面的示意图;
图18是本申请实施例提供的又一种图形用户界面的示意图;
图19是本申请实施例提供的又一种图形用户界面的示意图;
图20是本申请实施例提供的又一种图形用户界面的示意图;
图21是本申请实施例提供的又一种图形用户界面的示意图;
图22是本申请实施例提供的又一种图形用户界面的示意图;
图23是本申请实施例提供的一种电子设备的结构示意图;
图24是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
在本申请的实施例中,以下术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
为了便于对本申请实施例的理解,首先对本申请实施例中涉及的相关概念进行简要说明。
1.动态范围
动态范围用于相机可以在多大范围内捕捉图像的影调细节信息,通常指由最低值到最高溢出值之间的范围。简单地说,动态范围可以描述相机在单帧内记录的最亮和最暗影调之间的比率。
2.直方图
直方图可以用于描述整幅图像的灰度分布;其中,直方图横轴可以表示灰度值(0~255);直方图的纵轴可以表示图像中同一种灰度值的像素点的数目;通过直方图可以直观的显示图像的亮度、灰度分布与对比度。
3.超分辨率处理(image super resolution,SR)
超分辨率处理是指从低分辨率(low resolution,LR)图像中恢复高分辨率(highresolution,HR)图像的过程。
4.傅里叶变换
傅里叶变换是指将满足一定条件的某个函数表示成三角函数(正弦和/或余弦函数)或者它们的积分的线性组合的算法。
5.快速傅立叶变换(Fast Fourier Transform,FFT)
快速傅立叶变换表示利用电子设备计算离散傅里叶变换的高效、快速计算方法。
6.离散余弦变换(Discrete Cosine Transform,DCT)
离散余弦变换是指以一组不同频率和幅值的余弦函数和来近似一幅图像,实际上是傅里叶变换的实数部分的算法。
7.拉普拉斯锐化算法
拉普拉斯锐化算法是指利用拉普拉斯算子对图像进行边缘增强的一种算法。
其中,拉普拉斯算子是以图像邻域内像素灰度查分计算为基础,通过二阶微分推导出的一种图像邻域增强算法。基本思想是:当邻域内的中心像素灰度低于它所在的邻域内的其他像素的平均灰度时,此中心像素的灰度应被进一步降低。当邻域内的中心像素灰度高于它所在的邻域内的其他像素的平均灰度时,此中心像素的灰度应被进一步提高。
下面将结合附图,对本申请实施例中的增强视频画质的方法与电子设备进行描述。
图1示出了一种适用于本申请的电子设备的硬件系统。
电子设备100可以是手机、智慧屏、平板电脑、可穿戴电子设备、车载电子设备、增强现实(augmented reality,AR)设备、虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)、投影仪等等,本申请实施例对电子设备100的具体类型不作任何限制。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
需要说明的是,图1所示的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图1所示的部件更多或更少的部件,或者,电子设备100可以包括图1所示的部件中某些部件的组合,或者,电子设备100可以包括图1所示的部件中某些部件的子部件。图1示的部件可以以硬件、软件、或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元。例如,处理器110可以包括以下处理单元中的至少一个:应用处理器(application processor,AP)、调制解调处理器、图形处理器(graphics processing unit,GPU)、图像信号处理器(image signal processor,ISP)、控制器、视频编解码器、数字信号处理器(digital signal processor,DSP)、基带处理器、神经网络处理器(neural-network processing unit,NPU)。其中,不同的处理单元可以是独立的器件,也可以是集成的器件。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
示例性地,处理器110可以用于执行本申请实施例的增强视频画质的方法;例如,获取待播放视频;显示第一显示界面,第一显示界面包括待播放视频;检测到对待播放视频的播放操作;响应于播放操作,确定待播放视频的第一参数是否小于第一预设阈值,第一参数包括分辨率;若第一参数小于第一预设阈值,确定待播放视频的第二参数是否满足第一预设条件;第二参数包括动态范围的数值与高频信息的数值,第一预设条件包括待播放视频的动态范围的数值小于第二预设阈值,和/或,待播放视频的高频信息的数值于第三预设阈值,高频信息的数值为待播放视频的频域图像中高频信息的累计值,高频信息包括待播放视频中图像的边缘信息与细节信息;基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频;显示或者保存增强处理后的视频。
图1所示的各模块间的连接关系只是示意性说明,并不构成对电子设备100的各模块间的连接关系的限定。可选地,电子设备100的各模块也可以采用上述实施例中多种连接方式的组合。
电子设备100的无线通信功能可以通过天线1、天线2、移动通信模块150、无线通信模块160、调制解调处理器以及基带处理器等器件实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
电子设备100可以通过GPU、显示屏194以及应用处理器实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194可以用于显示图像或视频。
示例性地,在本申请的实施例中,显示屏194可以用于显示第二图像。
电子设备100可以通过ISP、摄像头193、视频编解码器、GPU、显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过摄像头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP可以对图像的噪点、亮度和色彩进行算法优化,ISP还可以优化拍摄场景的曝光和色温等参数。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193(也可以称为镜头)用于捕获静态图像或视频。可以通过应用程序指令触发开启,实现拍照功能,如拍摄获取任意场景的图像。摄像头可以包括成像镜头、滤光片、图像传感器等部件。物体发出或反射的光线进入成像镜头,通过滤光片,最终汇聚在图像传感器上。成像镜头主要是用于对拍照视角中的所有物体(也可以称为待拍摄场景、目标场景,也可以理解为用户期待拍摄的场景图像)发出或反射的光汇聚成像;滤光片主要是用于将光线中的多余光波(例如除可见光外的光波,如红外)滤去;图像传感器可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。图像传感器主要是用于对接收到的光信号进行光电转换,转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。
在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
其中,摄像头193可以位于电子设备100的前面,也可以位于电子设备100的背面,摄像头的具体个数以及排布方式可以根据需求设置,本申请不做任何限制。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1、MPEG2、MPEG3和MPEG4。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x轴、y轴和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。例如,当快门被按下时,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航和体感游戏等场景。
加速度传感器180E可检测电子设备100在各个方向上(一般为x轴、y轴和z轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。加速度传感器180E还可以用于识别电子设备100的姿态,作为横竖屏切换和计步器等应用程序的输入参数。
距离传感器180F用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,例如在拍摄场景中,电子设备100可以利用距离传感器180F测距以实现快速对焦。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现解锁、访问应用锁、拍照和接听来电等功能。
触摸传感器180K,也称为触控器件。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,触摸屏也称为触控屏。触摸传感器180K用于检测作用于其上或其附近的触摸操作。触摸传感器180K可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,并且与显示屏194设置于不同的位置。
上文详细描述了电子设备100的硬件系统,下面介绍电子设备100的软件系统。
图2是本申请实施例提供的电子设备的软件系统的示意图。
如图2所示,系统架构中可以包括应用层210、应用框架层220、硬件抽象层230、驱动层240以及硬件层250。
示例性地,应用层210可以包括图库应用程序与视频播放应用程序。
可选地,应用层210中还可以包括相机应用程序、日历、通话、地图、导航、WLAN、蓝牙、音乐、视频、短信息等应用程序。
示例性地,应用框架层220为应用层的应用程序提供应用程序编程接口(application programming interface,API)和编程框架;应用框架层可以包括一些预定义的函数。
例如,应用框架层220中包括窗口管理器、内容提供器、视图系统、资源管理器和通知管理器。
其中,窗口管理器用于管理窗口程序;窗口管理器可以获取显示屏大小,判断是否有状态栏、锁定屏幕和截取屏幕。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。数据可以包括视频、图像、音频、拨打和接听的电话、浏览历史和书签、以及电话簿。
视图系统包括可视控件,例如显示文字的控件和显示图片的控件。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成,例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
资源管理器为应用程序提供各种资源,比如本地化字符串、图标、图片、布局文件和视频文件。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于下载完成告知和消息提醒。通知管理器还可以管理以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知。通知管理器还可以管理以对话窗口形式出现在屏幕上的通知,例如在状态栏提示文本信息、发出提示音、电子设备振动以及指示灯闪烁。
示例性地,硬件抽象层230用于将硬件抽象化。
例如,硬件抽象层230中包括视频解码后处理模块,视频解码后处理模块用于执行本申请实施例中增强视频画质的方法。
示例性地,驱动层240用于为不同硬件设备提供驱动。
例如,驱动层可以包括显示屏驱动、解码器驱动、中央处理器驱动或者神经网络处理器驱动。
示例性地,硬件层250位于软件系统的最底层。
例如,硬件层250可以包括显示屏、解码器、中央处理器与神经网络处理器;其中,显示屏用于显示视频;解码器用于对视频数据进行解压处理;中央处理器可以用于执行增强视频画质的方法中对视频数据的具体算法处理;神经网络处理器用于执行增强视频画质的方法中与神经网络模型相关的算法。
目前,由于采集视频的电子设备的处理能力较差;或者,采集视频的用户的拍摄技术较差;或者,传输视频时的网络传输环境较差等因素,导致播放视频的电子设备中视频质量较差,使得用户的观看视频的体验较差。
示例性地,在受限于采集视频的电子设备的拍摄能力时,即使视频中的用户生成内容(User-generated content,UGC)的视频中图像的分辨率较高,但是若视频中图像中动态范围小,即对比度角低,则无法播放高动态范围的视频,影响用户的观感体验。
示例性地,在受限于采集视频的电子设备的拍摄能力,或者,受限于用户的拍摄技术时,视频中的UGC视频中图像中可能存在细节模糊等问题,影响用户的观感体验。
例如,对于采集的视频中包括人像时,可能存在人像的发丝区域或者眉毛区域的边缘细模糊等问题;或者,对于采集的视频中包括博物馆展览品或者手工艺品时,展览品或者工艺品中的纹理细节模糊。
示例性地,在受限于网络传输环境时,为了保证视频的流畅度,服务器通常会优先传输压缩比例较高的低清晰度视频;由于视频清晰度较低,影响用户的观感体验。
例如,如图3所示,第一电子设备260为原始视频采集设备;由于拍摄技术较差,或者,第一电子设备260的处理能力较差,导致采集的原始视频质量较差,如图3中的(a)所示;第一电子设备260通过通信网络,将采集到的原始视频发送至一个或者多个电子设备100;电子设备100为原始视频的播放端;例如,通过聊天应用程序将原始视频发送至家庭群中,如图3中的(b)所示;电子设备100检测到点击播放原始视频的操作,如图3中的(c);在电子设备检测到点击播放原始视频的操作之后,电子设备显示播放显示界面,播放显示界面中显示的视频质量较差,如图3中的(d)所示;从而导致用户观看视频的体验感较差。
有鉴于此,本申请实施例提供了一种增强视频画质的方法与电子设备;在本申请的实施例中,通过获取待播放视频;显示第一显示界面,第一显示界面包括待播放视频与第一控件,第一控件用于指示对待播放视频进行增强处理;检测到对第一控件的第一操作;确定待播放视频的第一参数中满足第一预设条件的第二参数,第一参数包括分辨率、动态范围和高频信息中的至少两种;基于第二参数对待播放视频进行增强处理,生成增强处理后的视频;显示或者保存增强处理后的视频;可以理解为,在本申请的实施例中,在对待播放视频进行画质增强处理之前,可以先对待播放视频进行分析;确定影响待播放视频的视频质量的因素;在确定影响待播放视频的视频质量的因素的情况下,再针对性地对待播放视频进行画质增强处理,从而能够提高待播放视频的视频质量;与现有方式中,直接对待播放视频的某一方面进行增强处理相比,本申请的实施例中的方案,能够智能化的分析待播放视频的视频质量较差的原因;从而针对性地对待播放视频进行画质增强处理,提高待播放视频的视频质量。
下面对本申请实施例提供的增强视频画质的方法的应用场景进行举例说明。
本申请实施例中增强视频画质的方法可以应用于在本地电子设备中播放视频;例如,可以适用于电子设备播放本地视频;或者,电子设备播放接收到的其他电子设备传输的视频;或者,电子设备播放直播视频。
可选地,本申请实施例提供的增强视频画质的方法可以应用于电子设备实时播放的视频;可以理解为,在电子设备中播放视频时,实时对播放的视频进行画质增强处理;使得电子设备中显示的视频为画质增强处理后的视频。
可选地,本申请实施例中强视频画质的方法还可以应用于视频通话场景中,其中,视频通话场景可以包括但不限于以下场景中:
视频通话、视频会议应用、长短视频应用、视频直播类应用、视频网课应用、人像智能运镜应用场景、系统相机录像功能录制视频、视频监控,或者智能猫眼等人像拍摄类场景等。
应理解,上述为对应用场景的举例说明,并不对本申请的应用场景作任何限定。
下面结合图4至图22对本申请实施例提供的增强视频画质的方法进行详细说明。
图4是本申请实施例提供的增强视频画质的方法的示意性流程图。该方法可以由图1所示的电子设备执行;该方法300包括S310至S370,下面分别对S310至S370进行详细的描述。
S310、获取待播放视频。
可选地,获取待播放视频,包括:
获取电子设备中的待播放视频;或者,
接收第一电子设备发送的待播放视频,第一电子设备为待播放视频的采集设备。
示例性地,第一电子设备可以采集待播放视频,第一电子设备可以向电子设备发送待播放视频;例如,第一电子设备可以是待播放视频的采集设备;电子设备可以是待播放视频的接收设备;第一电子设备可以通过第三方聊天软件向电子设备发送待播放视频。
示例性地,电子设备可以在本地获取待播放视频。
示例性地,电子设备可以从服务器获取待播放视频。
S320、显示第一显示界面。
其中,第一显示界面中包括待播放视频。
可选地,第一显示界面可以如图3中的(b)所示,第一显示界面中包括待播放视频。
S330、检测到对待播放视频的播放操作。
可选地,如图3中的(c)所示,播放操作可以为点击待播放视频的播放控件的操作。
可选地,播放操作还可以是指语音指示播放待播放视频的操作;或者,播放操作可以是指通过其他指示方式指示播放待播放视频的操作;本申请对此不作任何显示。
S340、响应于播放操作,确定待播放视频的第一参数是否小于第一预设阈值。
其中,第一参数包括分辨率。
可选地,第一预设阈值可以为360P。
在本申请的实施例中,在对待播放视频进行画质增强处理之前,可以先对待播放视频进行分析;例如,可以先确定待播放视频的分辨率是否小于第一预设阈值;然后再对待播放视频的其他因素进行分析。
示例性地,在本申请的实施例中,可以先确定待播放视频的分辨率的数值是否小于第一预设阈值;若待播放视频的分辨率小于第一预设阈值,再执行S350;可以理解为,在对待播放视频进行增强处理之前,分析待播放视频的分辨率的优先级大于分析待播放视频的高频信息或者动态范围的优先级。
在本申请的实施例中,在对待播放视频进行分析时,可以优先对待播放视频的分辨率进行判断;由于分辨率对图像画质的影响通常较大,因此在本申请的实施例中确定影响待播放视频的视频质量的因素时,可以优先判断分辨率是否影响为影响视频质量的因素;若待播放视频的分辨率小于第一预设阈值,则表示分辨率为影响视频质量的因素。
可选地,在确定影响待播放视频的视频质量的因素为分辨率时,可以对待播放视频进行超分辨率处理,得到超分辨率处理后的视频;即增强处理后的视频。可选地,实现方式可以参见图5中S403的相关描述,此处不再赘述。
示例性地,超分辨率算法可以包括:基于插值的方法、基于重建的方法或者基于学习的方法。
示例性地,基于重建的方法的超分辨率算法可以包括:基于单幅图像的超分辨率重建与基于图像序列的超分辨率重建。
示例性地,可以采用基于卷积神经网络(GAN),或者,生成对抗网络(GAN)实现对待播放视频的超分辨率处理;该实现方式还可以参见专利申请号为202210599727.0中的超分辨率算法处理的相关描述。
可选地,确定待播放视频的第一参数是否小于第一预设阈值,包括:
确定待播放视频中每一帧数据的第一参数是否小于第一预设阈值。
示例性地,以基于待播放视频中的逐帧数据进行判断;可以理解为,基于待播放视频中的逐帧数据,确定待播放视频中每一帧数据的第一参数中小于第一预设阈值;例如,假设待播放视频中包括10帧数据,即第1帧数据至第10帧数据;可以分别判断第1帧数据至第10帧数据中的每一帧数据的第一参数是否小于第一预设阈值。
可选地,确定待播放视频的第一参数是否小于第一预设阈值,包括:
确定待播放视频中预设帧数据的第一参数是否小于第一预设阈值。
示例性地,以基于待播放视频中的预设帧数据进行判断;例如,假设待播放视频中包括20帧数据,可以基于第1帧数据的第一参数确定是否小于第一预设阈值,若第1帧数据的第一参数小于第一预设阈值,则可以认为第1帧数据至第10帧数据中的第一参数小于第一预设阈值;类似地,可以基于第11帧数据的第一参数是否小于第一预设阈值,若第11帧数据的第一参数小于第一预设阈值,则可以认为第11帧数据至第20帧数据中的第一参数均为小于第一预设阈值。
S350、若第一参数小于第一预设阈值,确定待播放视频的第二参数是否满足第一预设条件。
其中,第二参数包括动态范围的数值与高频信息的数值,第一预设条件包括待播放视频的动态范围的数值小于第二预设阈值,和/或,待播放视频的高频信息的数值于第三预设阈值,高频信息的数值为待播放视频的频域图像中高频信息的累计值,高频信息包括待播放视频中图像的边缘信息与细节信息。
可选地,确定待播放视频的第二参数是否满足第一预设条件,包括:
确定待播放视频中每一帧数据的第二参数是否满足第一预设条件。
可选地,确定待播放视频的第二参数是否满足第一预设条件,包括:
确定待播放视频中预设帧数据的第二参数是否满足第一预设条件。
S360、基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频。
可选地,基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述第一参数小于第一预设阈值,基于所述第一参数所述待播放视频的亮度通道数据进行所述增强处理,生成所述增强处理后的视频;
若所述第一参数小于第一预设阈值,且待播放视频的第二参数满足第一预设条件,基于所述第一参数与所述第二参数所述待播放视频的亮度通道数据进行所述增强处理,生成所述增强处理后的视频。
在本申请的实施例中,在对待播放视频进行画质增强处理之前,可以先对待播放视频进行分析;确定影响待播放视频的视频质量的因素;在确定影响待播放视频的视频质量的因素的情况下,再针对性地对待播放视频进行画质增强处理,从而能够提高待播放视频的视频质量;与现有方式中,直接对待播放视频的某一方面进行增强处理相比,本申请的实施例中的方案,能够智能化的分析待播放视频的视频质量较差的原因;从而针对性地对待播放视频进行画质增强处理,提高待播放视频的视频质量。
可选地,基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频,包括:
基于第一参数和/或第二参数对待播放视频的亮度通道数据进行增强处理,生成增强处理后的视频。
在本申请的实施例中,在对待播放视频进行增强时,可以仅对待播放视频的Y通道数据进行增强处理;一方面,由于本申请实施例提供的增强视频画质的方法可以应用于实时处理,因此仅对待播放视频的Y通道数据进行增强处理能够提高电子设备执行增强视频画质的处理效率;另一方面,由于用户的眼部通常对亮度更敏感,因此仅对待播放视频的Y通道数据进行增强处理,能够使得用户对视频的观看体验明显提升。
可选地,若第一参数小于第一预设阈值时,确定待播放视频的第二参数是否满足第一预设条件,包括:
获取待播放视频的分类标签;
确定分类标签是否属于预设标签,预设标签包括第一标签与第二标签;
若分类标签属于第一标签,确定待播放视频的动态范围的数值是否小于第二预设阈值,动态范围的数值为基于待播放视频的直方图中第一灰度区间的像素数量的占比值得到的;
基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频,包括:
若动态范围的数值小于第二预设阈值,基于动态范围的数值对待播放视频进行增强处理,生成增强处理后的视频。
示例性地,第一标签可以是指存在亮光区域与暗光区域的拍摄场景的标签;例如,第一标签可以包括:室内光源拍摄场景的标签、夜景拍摄场景的标签、天空拍摄场景的标签,或者,玻璃墙的标签(例如,饱和度较高的玻璃墙)。
应理解,第一标签是指需要进行动态范围增强的拍摄场景的标签;若待播放视频属于第一标签,则可以进一步判断待播放视频是否需要进行动态范围增强处理;从而提高待播放视频中的动态范围。
可选地,确定待播放视频的动态范围的数值是否小于第二预设阈值,包括:
确定待播放视频的直方图中第一灰度区间的像素数量的占比值是否大于第四预设阈值。
可选地,基于动态范围的数值对待播放视频进行增强处理,生成增强处理后的视频,包括:
获取第一灰度区间的像素数量的占比值;
基于第一灰度区间的像素数量的占比值,得到第一数值与第二数值;
基于第一数值、第二数据与预设坐标数据,得到映射关系,映射关系用于指示输入灰度值与输出灰度值之间的关联关系;
基于映射关系对待播放视频的进行增强处理,生成增强处理后的视频。
基于映射关系对待播放视频的进行增强处理,生成增强处理后的视频,包括:
基于映射关系对待播放视频的亮度通道进行增强处理,生成增强处理后的视频。
应理解,若待播放视频的直方图中较低灰度区域的像素数目越少,则表示在亮度空间中较暗的像素点数越少;若待播放视频的直方图中较高灰度区域的像素数目越少,则表示在亮度空间中较亮的像素点数越少;在待播放视频的中较暗的像素点数与较亮的像素点数均较少的情况下,则待播放视频的中对比度较低;可以理解为,待播放视频的中呈现灰蒙蒙的显示状态,无法显示出较亮的图像区域与较暗的图像区域。
在本申请的实施例中,可以先确定待播放视频的分辨率的数值是否小于第一预设阈值;若待播放视频的分辨率大于或者第一预设阈值,则可以表示分辨率不是影响待播放视频的视频质量的因素;进一步,可以确定待播放视频是否属于预设场景(例如,第一标签,或者,第二标签);若待播放视频的标签为第一标签,可以判断动态范围是否为影响待播放视频的视频质量的因素;例如,若分类标签属于第一标签,确定动态范围的数值是否小于第二预设阈值;可以理解为,确定待播放视频中第一灰度区间的像素数目的占比值是否大于第四预设阈值(例如,0.6);若待播放视频中第一灰度区间(例如,中间灰度区域;比如,灰度值为[100,155]的区间)的像素数目的占比值是否大于第四预设阈值,则表示待播放视频中中间灰度像素的占比值较大;此时,待播放视频中存在画面整体发灰、通透感不足的问题;可以确定动态范围为影响待播放视频的视频质量的因素。
可选地,实现方式可以参见图5中S407的相关描述,此处不再赘述。
可选地,映射关系为映射曲线,第一灰度区间的像素数量的占比值与映射曲线的曲率之间成正比。
可选地,还包括:
若分类标签属于第二标签,确定待播放视频的高频信息的数值是否小于第三预设阈值;
基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频,包括:
若高频信息的占比值小于第三预设阈值,基于高频信息的数值对待播放视频进行增强处理,生成增强处理后的视频。
示例性地,第二标签可以是指纹理信息丰富的场景的标签。
例如,第二标签可以包括:风景的标签、建筑的标签、陶艺品的标签、工艺品的标签、手工编织品的吧标签等。
应理解,第二标签是指需要进行细节增强的拍摄场景的标签;若待播放视频属于第二标签,则可以进一步判断待播放视频是否需要进行细节增强处理;从而提高待播放视频中的细节信息。
可选地,基于高频信息的数值对待播放视频进行增强处理,生成增强处理后的视频,包括:
通过对待播放视频的亮度通道数据进行傅里叶变换处理,生成待播放视频的频率图;
基于频率图确定频率图中高频区域的累计值,高频区域的累积值为遍历高频区域的每个像素点得到的数值;
基于高频区域的累计值、预设斜率值与预设截距值,得到拉普拉斯锐化系数;
基于拉普拉斯锐化系数与待播放视频的二阶梯度图像,得到第一视频;
对待播放视频与第一视频进行融合处理,生成增强处理后的视频。
可选地,在本申请的实施例中,用户可以无需手动调整待播放视频的第一参数和/或第二参数;电子设备可以自动分析待播放视频的视频质量;基于分析结果自动执行基于第一参数和/或第二参数对待播放视频进行视频增强处理。
S370、显示或者保存所述增强处理后的视频。
可选地,可以实时对待播放视频进行增强处理,则可以播放增强处理后的视频。
可选地,可以在对待播放视频进行增强处理后,保存增强处理后的视频;在后续需要播放时,播放增强处理后的视频。
可选地,在本申请的实施例中,分析待播放视频的分辨率的优先级高于分析待播放视频的动态范围的优先级;分析待播放视频的动态范围的优先级高于分析待播放视频的高频信息的优先级。可选地,在保存增强处理后的视频的情况下,还包括:
显示第二提示框,第二提示框用于提示增强处理后的视频的存储方式;其中,存储方式包括:第一存储方式与第二存储方式,第一存储方式是指增强处理后的视频替换待播放的视频,第二存储方式是指将增强处理后的视频存储至第一存储区域,第一存储区域与存储待播放视频的存储区域不同。
示例性地,第二提示框为可以如图16中的(c)所示的提示框720;第一存储方式可以是指“覆盖原图”的存储方式;第二存储方式可以是指“另存为”的存储方式。
可选地,实现方式可以参见后续图16中的(c)的相关描述,此处不再赘述。
可选地,检测到对待播放视频的播放操作,包括:
显示第二显示界面,第二显示界面中包括第一提示框,第一提示框用于提示是否对待播放视频进行增强处理,第一提示框中包括第一控件,第一控件用于指示对待播放视频进行增强处理;
响应于播放操作,确定待播放视频的第一参数中是否小于第一预设阈值,包括:
检测到对第一控件的第一操作;
响应于第一操作,确定待播放视频的第一参数中是否小于第一预设阈值。
示例性地,第二显示界面可以如图21中的(d)所示,第一提示框可以如图21中的(d)所示的740;第一控件可以为提示框740中的控件741。
基于本申请的方案,通过获取待播放视频;显示第一显示界面,第一显示界面包括待播放视频与第一控件,第一控件用于指示对待播放视频进行增强处理;检测到对第一控件的第一播放操作;先确定待播放视频的第一参数是否小于第一预设阈值,第一参数包括分辨率确定待播放视频的第一参数中满足第一预设条件的第二参数,第一参数包括分辨率、动态范围和高频信息中的至少两种;若第一参数小于第一预设阈值,再确定待播放视频的第二参数是否满足第一预设条件;基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频;显示或者保存增强处理后的视频;可以理解为,在本申请的实施例中,在对待播放视频进行画质增强处理之前,可以先对待播放视频进行分析;确定影响待播放视频的视频质量的因素;在确定影响待播放视频的视频质量的因素的情况下,再针对性地对待播放视频进行画质增强处理,从而能够提高待播放视频的视频质量;与现有方式中,直接对待播放视频的某一方面进行增强处理相比,本申请的实施例中的方案,能够智能化的分析待播放视频的视频质量较差的原因;从而针对性地对待播放视频进行画质增强处理,提高待播放视频的视频质量。
图5是本申请实施例提供的增强视频画质的方法的示意性流程图。该方法可以由图1所示的电子设备执行;该方法400包括S401至S413,下面分别对S401至S413进行详细的描述。
S401、获取视频数据。
可选地,在播放视频的电子设备获取视频数据时,可以获取存储于视频服务器中的视频数据;或者,也可以获取存储在本地设备中的视频数据;本申请对此不作任何限定。
S402、对视频数据进行解析。
可选地,在对视频数据进行解析时,可以对获取的视频数据逐帧进行解析。
示例性地,可以调用解码器,解码器可以用于对数字视频进行解压缩。
S403、判断分辨率是否小于第一预设阈值;若是,则执行S404;若否,则执行S406。
可选地,可以基于解析后的原始数据逐帧进行判断;判断每一帧原始数据的分别率是否小于第一预设阈值;若一帧原始数据的分辨率小于第一预设阈值,则执行S404;若一帧原始数据的分辨率大于或者等于第一预设阈值,则执行S406。
可选地,第一预设阈值可以为360P。
在本申请的实施例中,在对视频数据进行解析后可以优先对视频中原始数据的分辨率进行判断;由于分辨率对图像画质的影响通常较大,因此在本申请的实施例中判断影响视频质量的因素中分辨率的优先级可以较高。
S404、超分辨率算法处理。
可选地,若一帧原始数据的分辨率小于第一预设阈值,则对一帧原始数据进行超分辨率算法处理;通过对一帧原始数据进行超分辨率算法处理后,可以得到超分辨率处理后的数据;从而提升视频中图像的分辨率。
可选地,超分辨率算法可以包括:基于插值的方法、基于重建的方法或者基于学习的方法。
其中,基于插值的方法是指首先估计各帧图像之间的相对运动信息,获得高分辨率图像在非均匀间距采样点上的象素值,接着通过非均匀插值得到高分辨率栅格上的象素值,最后采用图像恢复技术来去除模糊和降低噪声;基于重建的方法是指通过研究图像的高分辨率细节在低分辨率下的表现形式,建立两者之间的对应关系;根据模型来刻画这种映射关系;基于学习的方法是指根据训练样本来计算得到高分辨率、低分辨率之间的先验知识的,并建立两者之间的映射模型。
可选地,基于重建的方法的超分辨率算法可以包括:基于单幅图像的超分辨率重建与基于图像序列的超分辨率重建。
其中,基于单幅图像的超分辨率重建是指通过某种先验模型或者匹配机制,从给定的外部资源中寻求待处理图像匹配的细节内容,并将其增加到原图当中,实现分辨率的提升;基于图像序列的超分辨率重建是指利用多幅低分辨率图像之间相互的交叠信息,经过彼此补充估计出图像的细节内容。
可选地,可以基于卷积神经网络(CNN),或者,生成对抗网络(GAN)网络实现对原始数据的超分辨率处理;该实现方式还可以参见专利申请号为202210599727.0中的超分辨率算法处理的相关描述。
S405、在显示屏进行显示。
示例性地,在显示屏中显示基于超分辨率处理后的数据,即显示超分辨率处理后的视频。
在本申请的实施例中,播放视频的电子设备可以在播放视频时,实时对视频进行画质增强处理,使得电子设备中播放的视频为画质增强处理后的视频;提高视频质量,从而提高用户的观看体验。
S406、判断是否属于预设场景;若属于预设场景,则执行S407或者S410;若不属于预设场景,则执行S413。
应理解,预设场景中可以包括场景1与场景2;通过S406在确定一帧原始数据属于预设场景的情况下,若属于预设场景中的场景1,则执行S407;若属于预设场景中的场景2,则执行S410。
需要说明的是,场景1是指存在亮光区域与暗光区域的拍摄场景。
示例性地,场景1包括:室内光源拍摄场景、夜景拍摄场景、天空拍摄场景,或者,玻璃墙(例如,饱和度较高的玻璃墙)。
例如,夜景拍摄场景包括:夜景中的光源广告牌。
例如,天空拍摄场景包括:阳光灿烂的晴天、夕阳。
应理解,场景1是指需要进行对比度增强的拍摄场景;若一帧原始数据属于场景1,则可以对这一帧原始数据进行对比度增强处理;从而提升原始数据的动态范围。
需要说明的是,场景2是指纹理信息丰富的场景;可以理解为,场景2中高频信息丰富。
示例性地,场景2包括:风景、建筑、陶艺品、工艺品、手工编织品等;其中,风景可以包括绿植、绿地、森林等;陶艺品可以包括具有丰富纹理细节的展览品等;工艺品可以包括具体精细装饰的发饰等。
应理解,场景2是指需要进行细节增强的拍摄场景;若一帧原始数据属于场景2,则可以对这一帧原始数据进行细节增强处理;从而提升原始数据的细节信息。
可选地,可以通过场景识别,识别每帧原始数据的标签;基于原始数据的标签,确定一帧原始数据是否属于第一预设场景。
例如,若原始数据的标签与第一预设场景的标签相同,则表示该原始数据属于第一预设场景;若原始数据的标签与第一预设场景的标签不相同,则表示该原始数据不属于第一预设场景。
S407、判断直方图是否满足第一条件;若直方图满足第一条件,则执行S408;若直方图不满足第一条件,则执行S409。
可选地,对于原始数据的分辨率大于或者等于第一预设阈值的情况下,可以理解为影响视频质量的原因不是分辨率的问题的情况下;首先,对原始数据进行场景识别,若原始数据的图像标签为场景1的标签;例如,场景标签是灯光或者天空等,则影响视频质量的原因可能是动态范围:此时,可以对原始数据对应的图像进行直方图统计,通过直方图统计结果判断影响图像质量的原因是否为动态范围;若是,则执行S408,执行对比度增强算法处理,提升视频中图像的对比度后传输至显示屏进行显示;若否,则执行S409,则不对原始数据对应的图像做任何处理,直接将原始数据传输至显示屏进行显示。
示例性地,可以基于原始数据得到直方图;基于该直方图确定是否满足第一条件。
应理解,直方图可以用于描述整幅图像的灰度分布;例如,直方图的x轴可以表示灰度值(0~255);直方图的y轴可以表示图像中同一种灰度值的像素点的数目;因此,通过直方图可以直观的显示图像的亮度、灰度分布与对比度。
可选地,第一条件可以为指直方图的中间值区域[X1,X2]的占比大于阈值1。
示例性地,第一条件为可以是指直方图中间区域[100,155]的占比大于0.6。
例如,原始数据的直方图可以如图6中的(c)所示,其中,灰度区域420表示直方图中较低灰度区域的像素数目;灰度区域430表示直方图中较高灰度区域的像素数目;灰度区域440表示直方图中中间灰度区域的像素数目;第一条件可以是指灰度区域440中像素点的总数与总像素数目的比值大于0.6。
需要说明的是,通常情况下灰度值越小,表示亮度空间中像素点越暗;灰度值越大,表示亮度空间中像素点越亮。
应理解,通常情况下一帧图像的直方图中灰度值的中间区域的占比越大,表示整张图像中处于中间灰度的像素数目越多;即整张图像中处于过低灰度或者过高灰度的像素数目较小,此时图像中会出现画面整体发灰、通透感不足的问题;因此,需要对图像进行对比度增强处理。
S408、对比度增强算法处理。
应理解,若原始数据的直方图中较低灰度区域的像素数目越少,则表示在亮度空间中较暗的像素点数越少;若原始数据的直方图中较高灰度区域的像素数目越少,则表示在亮度空间中较亮的像素点数越少;在原始数据中较暗的像素点数与较亮的像素点数均较少的情况下,则原始数据对应的图像中对比度较低;可以理解为,图像中呈现灰蒙蒙的显示状态,无法显示出较亮的图像区域与较暗的图像区域;例如,如图6中的(a)所示;通过对原始数据进行对比度增强算法处理,可以得到对比度增加处理后的数据,即动态范围增强的数据;使得图像中能够显示出较亮区域与较暗区域,如图6中的(b)所示。
可选地,可以通过一维查找表对原始数据进行映射处理,得到动态范围增强的数据。
示例性地,一维查找表可以为曲线,或者折线,或者,表格,或者,函数等;可以通过一维曲线对原始数据的Y通道数据进行映射处理,即对原始数据的Y通道数据进行转换处理,得到动态范围增强的Y通道数据。
例如,以一维查找表为曲线进行举例说明;例如,如图6所示,可以通过对原始数据的Y通道数据进行映射处理,得到对比度增强处理后的数据;其中,图6中的(a)表示原始数据对应的图像,图6中的(b)表示对比度增加处理后的数据对应的图像;图6中的(c)表示原始数据的直方图;图6中的(d)表示用于映射处理的曲线450;图6中的(e)表示对比度增加处理后的数据的直方图;通过曲线450对原始数据的Y通道数据表示的像素进行相乘,得到对比度增加处理后的数据。
应理解,曲线450的作用在于使得原始数据中Y通道数据较暗的区域变得更暗,使得原始数据中Y通道数据较亮的区域变得更量。从而实现提升原始数据的Y通道数据的对比度。
在本申请的实施例中,在对原始数据进行对比度增强算法处理时,可以仅对原始数据的Y通道数据进行对比度增强算法处理;一方面,由于本申请实施例提供的增强视频画质的方法可以应用于实时处理,因此仅对原始数据的Y通道数据进行对比度增强算法处理能够提高电子设备执行增强视频画质的处理效率;另一方面,由于用户的眼部通常对亮度更敏感,因此仅对原始数据的Y通道数据进行对比度增强算法处理,能够使得用户对视频的观看体验明显提升。
示例性地,如图6中的(d)所示,曲线450中包括A点、B点、C点、D点以及E点;其中,A点坐标为(0,0);B点坐标为(127,127);C点坐标为(255,255);D点坐标为(50,d);E点坐标为(200,e);其中,d=50*(1-0.5*R);e=200+55*0.5*R;R表示原始数据的直方图中间灰度值区间[100,155]所占比例;根据d、e、R之间的关系可以看出,R与d成反比例关系正比例关系;通过折线或者二次函数拟合ADB三点,以及拟合BEC三点;得到曲线450。
可选地,结合图6中的(c)与图7所示,若直方图中较低灰度区域的像素数目420越少和/或直方图中较低灰度区域的像素数目430越少,则用于进行对比度增强算法处理的曲线的曲率越大;可以理解为,若较低灰度区间的像素数目越小,和/或若较高灰度区间的像素数目越小,则需要对原始数据进行对比度增强的系数越大(或者,程度越高),则对应映射曲线的曲率越大;如图7中所示的曲线450与曲线451;曲线451的曲率大于曲线450的曲率。
可选地,对比度增强算法处理可以为色调映射处理(Tone mapping);色调映射处理用于将颜色从原始色调(例如,低动态范围)映射到目标色调(例如,高动态范围)。
在本申请的实施例中,在视频中原始数据的分辨率大于或者等于第一分辨率阈值,且拍摄场景属于预设场景中的场景1的情况下,即原始数据的拍摄场景中包括亮光区域与暗光区域,可以对原始数据进行直方图分布判断;在直方图分布满足第一条件时,即直方图中中间灰度区域的像素数目大于阈值1的情况下,对原始数据进行对比度增强算法处理,从而增强原始数据的对比度,提高原始数据的动态范围。
在本申请的实施例中,在对原始数据进行对比度增强算法处理时,可以基于原始数据对应的图像分类标签(例如,场景1)与原始数据对应的图像的直方图分布(例如,直方图满足第一条件),确定对原始数据进行比度增强算法处理的程度(例如,确定映射去除);增强原始数据对应图像中的动态范围。
可选地,可以对比度增强算法处理后的YUV颜色空间的数据转换至RGB颜色空间,并传输至显示屏进行显示。
可选地,可以对比度增强算法处理后的YUV颜色空间的数据转换至存储格式在电子设备中存储;在播放时,可以对存储格式的数据进行解码,将解码后的YUV颜色空间的数据转换至RGB颜色空间,并传输至显示屏进行显示。
示例性地,存储格式包括但不限于:mp4、mkv、wmv、avi等。
可选地,存储对比度增强算法处理后的数据时,可以在电子设备的本地存储;或者,可以将自适应锐度算法处理后的数据发送至云服务器,并定期进行自动更新删除处理。
S409、输出原始数据。
示例性地,在一帧原始数据的分辨率大于或者等于第一预设阈值,且属于预设场景中的场景1,且直方图分布不满足第一条件的情况下,可以将原始数据传输至显示屏进行显示。
应理解,原始数据可以是指S402中对视频数据进行解析后得到的数据;例如,原始数据可以是指视频数据对应的YUV颜色空间的数据。
S410、判断频率分布是否满足第二条件;若频率分布满足第二条件,则执行S411;若频率分布不满足第二条件,则执行S412。
可选地,对于原始数据的分辨率大于或者等于第一预设阈值的情况下,可以理解为影响视频质量的原因不是分辨率的问题的情况下;首先,对原始数据进行场景识别,若原始数据的图像标签为场景2的标签;例如,场景标签是风景或者建筑等,则影响视频质量的原因可能是图像中的细节模糊:此时,可以对原始数据进行时频转换,得到频域图;通过频域图判断影响图像质量的原因是否为细节模糊;若是,则执行S411,执行自适应锐度算法处理,提升视频中图像的细节信息后传输至显示屏进行显示;若否,则执行S412,则不对原始数据对应的图像做任何处理,直接将原始数据传输至显示屏进行显示。
可选地,在原始数据的分辨率大于或者等于第一预设阈值,且属于预设场景中的场景2的情况下,判断原始数据的频率分布是否满足第二条件。
应理解,通常情况下一帧图像的频域图中的高频信息越少,则表示整张图像中细节信息越少;由于高频信息较少时,图像中会出现细节信息模糊的问题;因此,需要对图像进行细节信息增强处理(例如,自适应锐化算法处理)。
可选地,第二条件可以为频域图中高频部分的累计值小于阈值2。
示例性地,第二条件可以为频域图中高频部分的累计值小于7000000。
例如,可以在频域图中确定第一区域与第二区域,第一区域为低频部分,即频域图中心的1/16的图像区域;可以理解为,假设频域图的大小为L*S,则第一区域的中心与频域图的中心相同,第一区域为1/4L*1/4S的图像区域;频域图中除第一区域之外的部分为第二区域;在第二区域中,遍历每个像素的像素值,并将所有值相加得到高频部分的累计值;sumFFT=sum(pixel Value);其中,sumFFT表示高频部分的累计值。
S411、自适应锐度算法处理。
可选地,在一帧原始数据的分辨率大于或者等于第一预设阈值,且属于预设场景中的场景2,且频率分布满足第二条件的情况下,可以对原始数据进行自适应锐度算法处理,得到细节增加的数据。
应理解,自适应锐度算法处理是为增强图像中的细节信息;由于在原始数据属于预设场景中的场景2时,在该拍摄场景中通常包括丰富的细节信息;通过对原始数据进行自适应锐度算法处理,能够提升视频中图像的细节信息。
可选地,可以通过拉普拉斯锐化算法对画面细节部分进行锐化处理,得到细节增强后的图像;其中,拉普拉斯锐化算法的增强系数可以由频域统计结果确定。
S412、输出原始数据。
示例性地,在一帧原始数据的分辨率大于或者等于第一预设阈值,且属于预设场景中的场景2,且频率分布不满足第二条件的情况下,可以将原始数据传输至显示屏进行显示。
应理解,原始数据可以是指S402中对视频数据进行解析后得到的数据;例如,原始数据可以是指视频数据对应的YUV颜色空间的数据。
S413、输出原始数据。
示例性地,在一帧原始数据的分辨率大于或者等于第一预设阈值,且不属于预设场景中情况下,可以将原始数据传输至显示屏进行显示。
应理解,原始数据可以是指S402中对视频数据进行解析后得到的数据;例如,原始数据可以是指视频数据对应的YUV颜色空间的数据。
在本申请的实施例中,在对视频的原始数据进行画质增强处理之前,可以先对视频的原始数据进行分析;确定影响视频的原始数据的视频质量的因素;在确定影响视频的原始数据的视频质量的因素的情况下,再针对性地对视频的原始数据进行画质增强处理,从而能够提高视频的原始数据的视频质量;与现有方式中,直接对视频的原始数据进行某一方面进行增强处理相比,本申请的实施例中的方案,能够智能化的分析视频的原始数据的视频质量较差的原因;从而针对性地对待视频的原始数据进行画质增强处理,提高视频的视频质量。
图8是本申请实施例提供的一种自适应锐度算法处理方法的示意性流程图;该方法500中包括S510至S540;下面分别对S510至S540进行详细的描述。
S510、对原始数据进行时频转换处理,得到频域图。
可选地,时频转换处理是指从时域转换至频域的处理过程;其中,时频转换处理可以包括:余弦变换、傅立叶变换或者快速傅立叶变换等。
例如,原始数据可以为YUV颜色空间的数据,对YUV颜色空间的数据可以进行时频转换处理,得到原始数据对应的频域图。
例如,图9中的(a)所示的为原始数据对应的图像;图9中的(b)所示的为原始数据对应的频域图。
S520、确定频域图像中的高频信息区域。
示例性地,可以确定频域图的中心,以频域图的中心为高频信息区域的中心,确定长度和宽度分变为频域图的1/4的图像区域为低频信息区域;如图9中的(b)所示的区域541为低频信息区域;频域图中除低频信息区域部分之外为高频信息区域。
应理解,对于频域图而言,越接近中心点频域越低;白色中心点的越亮,表示对应频域的占比份量越大。
S530、统计高频信息区域的累计值。
示例性地,高频信息区域中,遍历每个像素的像素值,并将所有值相加得到高频信息的累计值;sumFFT=sum(pixel Value);其中,sumFFT表示高频信息的累计值。
S540、基于锐化系数得到细节增强的图像数据。
示例性地,拉普拉斯锐化系数R1=-K*sumFFT+b;其中,K与b为预设阈值;例如,K可以是指FFTslope;b可以是指FFTintercept。
例如,FFTslope取值可以为:1/4000000;FFTintercept取值可以为2。
可选地,可以将拉普拉斯锐化系数R1限制在预设范围[K1,K2];若R1的取值超出预设范围,则取最大值K1;或者,最小值K2;例如,若R1小于K1,则R1的取值为K1;若R1大于K2,则R1的取值为K2。
在本申请的实施例中,可以将拉普拉斯锐化系数R1限制在一个预设范围[K1,K2]中,从而避免拉普拉斯锐化系数R1较大,导致的锐化程度较强;或者,拉普拉斯锐化系数R1较小,导致的锐化程度较弱;基于拉普拉斯锐化系数R1对视频的原始数据进行锐度处理,从而提升视频质量。
可选地,可以基于原始数据、锐化系数R1与原始数据的二阶梯度图像,得到锐化处理后的图像数据,即细节增强的图像数据。
应理解,原始数据的二阶梯度图像是指求原始数据对应的图像的灰度变化的求导,能够突出图像中的边缘细节信息;基于原始数据的二阶梯度图像能够获取更多的边缘细节信息;通过边缘细节信息可以对原始数据进行细节增强处理,提升原始数据中的细节信息。
可选地,如图10所示,图像550为原始数据对象的图像;图像560为原始数据的二阶梯度图像;图像570为细节增强的图像数据对应的图像;通过将拉普拉斯锐化系数R1与图像560相乘,并与图像550进行融合处理,得到图像570。
例如,细节增强的图像数据=原始数据+R1*原始数据的二阶梯度图像。
在本申请的实施例中,在对原始数据进行对比自适应锐度算法处理时,可以仅对原始数据的Y通道数据进行自适应锐度算法处理;一方面,由于本申请实施例提供的增强视频画质的方法可以应用于实时处理,因此仅对原始数据的Y通道数据进行自适应锐度算法处理能够提高电子设备执行增强视频画质的处理效率;另一方面,由于用户的眼部通常对亮度更敏感,因此仅对原始数据的Y通道数据进行自适应锐度算法处理,能够使得用户对视频的观看体验明显提升。
可选地,可以将自适应锐度算法处理后的细节增强数据传输至显示屏进行显示,显示细节增强的图像。
例如,可以自适应锐度算法处理后的YUV颜色空间的数据转换至RGB颜色空间,并传输至显示屏进行显示。
可选地,可以自适应锐度算法处理的YUV颜色空间的数据转换至存储格式在电子设备中存储;在播放时,可以对存储格式的数据进行解码,将解码后的YUV颜色空间的数据转换至RGB颜色空间,并传输至显示屏进行显示。
示例性地,存储格式包括但不限于:mp4、mkv、wmv、avi等。
可选地,存储自适应锐度算法处理后的数据时,可以在电子设备的本地存储;或者,可以将自适应锐度算法处理后的数据发送至云服务器,并定期进行自动更新删除处理。
在本申请的实施例中,在对原始数据进行自适应锐度算法处理时,可以基于原始数据对应的图像分类标签(例如,场景2)与原始数据对应的图像的高频信息分布(例如,频率分布满足第二条件),确定对原始数据进行自适应锐度算法处理的程度;增强原始数据对应图像中的细节信息。
S412、输出原始数据。
示例性地,在一帧原始数据的分辨率大于或者等于第一预设阈值,且属于预设场景中的场景2,且频率分布不满足第二条件的情况下,可以将原始数据传输至显示屏进行显示。
应理解,原始数据可以是指S402中对视频数据进行解析后得到的数据;例如,原始数据可以是指视频数据对应的YUV颜色空间的数据。
S413、输出原始数据。
示例性地,在一帧原始数据的分辨率大于或者等于第一预设阈值,且不属于预设场景的情况下,可以将原始数据传输至显示屏进行显示。
应理解,原始数据可以是指S402中对视频数据进行解析后得到的数据;例如,原始数据可以是指视频数据对应的YUV颜色空间的数据。
可选地,上述判断步骤可以基于逐帧数据进行判断;判断步骤包括:S403、S406、S407或者S410。
示例性地,以基于逐帧数据执行S403进行举例说明;例如,假设对视频数据进行解析后得到10帧原始数据,即第1帧原始数据至第10帧原始数据;可以分别判断第1帧原始数据至第10帧原始数据中的每一帧原始数据的分辨率是否小于第一预设阈值;若某一帧原始数据的分辨率小于第一预设阈值,则对该一帧原始数据执行S404;若某一帧原始数据的分辨率大于或者等于第一预设阈值,则对该一帧原始数据执行S406。
可选地,上述判断步骤可以基于预设帧数对原始数据进行判断;可以理解为,间隔预设时长对原始数据进行判断;其中,判断步骤包括:S403、S406、S407或者S410。
示例性地,以基于逐帧数据执行S403进行举例说明;例如,假设对视频数据进行解析后得到20帧数据,可以基于第1帧原始数据判断分辨率是否小于第一预设阈值;若第1帧原始数据的分辨率小于第一预设阈值,则对第1帧原始数据至第10帧原始数据均执行S404;若第1帧原始数据的分辨率大于或者等于第一预设阈值,则对第1帧原始数据至第10帧原始数据均执行S406;类似地,可以基于第11帧原始数据判断分辨率是否小于第一预设阈值;若第11帧原始数据的分辨率小于第一预设阈值,则对第11帧原始数据至第20帧原始数据均执行S404;若第11帧原始数据的分辨率大于或者等于第一预设阈值,则对第11帧原始数据至第20帧原始数据均执行S406。
可选地,在S401至S413中影响视频质量的因素的优先级顺序从高到低可以为:视频清晰度(例如,原始数据的分辨率)、视频动态范围、视频细节模糊。
可选地,电子设备中可以包括视频播放应用程序、解码器、视频解码后处理模块、神经网络处理器、中央处理器或者显示屏;下面结合图11对本申请实施例提供的增强视频画质的方法的交互性流程图进行描述;该方法可以由图1所示的电子设备执行;该方法包括S601至S627,下面分别对S601至S627进行详细的描述。
S601、视频播放应用程序获取视频数据。
可选地,视频播放应用程序可以是指图库应用程序;或者,视频播放应用程序可以是指第三方视频播放应用程序;本申请对此不作任何限定。
S602、视频播放应用程序调用解码器运行。
示例性地,视频播放应用程序可以向解码器发送第一指令,第一指示用于运行解码器。
S603、解码器用于解码视频数据,得到YUV颜色空间的原始数据。
可选地,解码器可以用于对数字视频进行解压缩。
可选地,解码器可以将原始数据发送至视频解码后处理模块。
S604、视频解码后处理模块用于判断原始数据的分辨率是否小于第一预设阈值;若是,则执行S605;若否,则执行S609。
应理解,S604的实现方式可以参见图5中S403的相关描述,此处不再赘述。
可选地,视频解码后处理模块可以位于电子设备中的相机应用抽象层,如图2所示。
S605、视频解码后处理模块用于向中央处理器发送第一控制指令。
可选地,在原始视频的分辨率小于第一预设阈值的情况下,视频解码后处理模块用于向中央处理器发送第一控制指令;第一控制指令用于指示中央处理器运行超分辨率处理算法。
可选地,在一种可能的实现方式中,若超分辨率处理算法时采用神经网络模型,则视频解码后处理模块可以用于向神经网络处理器发送控制指令,使得神经网络控制器执行超分辨率处理算法;本申请对此不作任何限定。
S606、中央处理器用于调用超分辨率算法进行处理,得到超分辨率处理后的数据。
可选地,中央处理器可以用于对原始数据进行超分辨率算法处理,具体实现方式可以参见图5中S404的相关描述,此处不再赘述。
S607、中央处理器用于将超分辨率处理后的数据发送至视频播放应用程序。
S608、视频播放应用程序用于控制显示屏显示超分辨率处理后的数据。
示例性地,视频播放应用程序可以用于向显示屏发送控制指令,控制指示用于指示显示屏显示超分辨率处理后的数据;即显示超分辨率处理后的视频。
S609、视频解码后处理模块用于向神经网络处理器发送第二控制指令。
可选地,在原始视频的分辨率大于或者等于第一预设阈值的情况下,视频解码后处理模块用于向神经网络处理器发送第二控制指令;第二控制指令用于指示神经网络控制器识别原始数据的场景标签。
S610、神经网络处理器用于调用场景识别模型,得到原始数据的标签。
示例性地,场景识别模型可以是分类模型;将原始数据输入至分类模型,可以得到原始数据的场景分类标签。
S611、神经网络处理器用于将原始数据的标签发送至视频解码后处理模块。
S612、视频解码后处理模块用于判断是否属于预设场景;若是,则执行S613或者S621;若否,则执行S622。
示例性地,预设场景中可以包括场景1与场景2;若基于原始数据的标签确定原始数据属于场景1,则执行S613;若基于原始数据的标签确定原始数据属于场景2,则执行S621。可选地,实现方式可以参见图5中S406的相关描述,此处不再赘述。
S613、视频解码后处理模块用于向中央处理器发送第三控制指令。
示例性地,在原始数据的分辨率大于或者等于第一预设阈值,且原始数据的标签属于预设场景中的场景1的情况下,视频解码后处理模块用于向中央处理器发送第三控制指令;其中,第三控制指令用于指示中央处理器计算原始数据的直方图。
S614、中央处理器用于计算原始数据的直方图。
S615、中央处理器用于将直方图发送至视频解码后处理模块。
S616、视频解码后处理模块用于判断直方图分布是否满足第一条件;若满足第一条件,则执行S617;若不满足第一条件,则执行S622。
可选地,S616的实现方式可以参见图5中S407的相关描述,此处不再赘述。
S617、视频解码后处理模块用于向中央处理器发送第四控制指令。
其中,第四控制指令用于指示中央处理器对原始数据进行对比度增强算法处理。
示例性地,在原始数据的分辨率大于或者等于第一预设阈值,且原始数据的标签属于预设场景中的场景1,且直方图的分布满足第一条件的情况下,视频解码后处理模块用于向中央处理器发送第四控制指令。
S618、中央处理器用于调用对比度增强算法进行处理,得到对比度增强处理后的数据。
可选地,中央处理器可以用于对原始数据进行对比度增强算法处理,具体实现方式可以参见图5中S408的相关描述,此处不再赘述。
S619、中央处理器用于将对比度增强处理后的数据发送至视频播放应用程序。
S620、视频播放应用程序用于控制显示屏显示对比度增强处理后的数据。
示例性地,视频播放应用程序可以用于向显示屏发送控制指令,控制指示用于指示显示屏显示对比度增强处理后的数据;即显示高动态范围的视频。
S621、视频解码后处理模块用于判断频率分布是否满足第二条件;若满足第二条件,则执行S624;若不满足第二条件,则执行S622。
可选地,S621的实现方式可以参见图5中S410的相关描述,此处不再赘述。
S622、视频解码后处理模块用于向视频播放应用程序发送第一通知消息。
示例性地,在原始数据的分辨率大于或者等于第一预设阈值,且原始数据的标签属于预设场景中的场景2,且频率分布不满足第二条件的情况下,视频解码后处理模块用于视频播放应用程序发送第一通知消息;其中,第一通知消息用于指示视频播放应用程序控制显示屏显示原始数据;可以理解为,视频播放应用程序控制显示屏显示未经过处理的视频。
S623、视频播放应用程序控制显示屏显示原始数据。
S624、视频解码后处理模块用于向中央处理器发送第五控制指令。
其中,第五控制指令用于指示中央处理器对原始数据执行自适应锐度算法处理。
示例性地,在原始数据的分辨率大于或者等于第一预设阈值,且原始数据的标签属于预设场景中的场景2,且频率分布满足第二条件的情况下,视频解码后处理模块用于向中央处理器发送第五控制指令。
S625、中央处理器用于调用自适应锐度算法进行处理,得到锐度处理后的数据。
可选地,中央处理器可以用于对原始数据进行自适应锐度算法处理,具体实现方式可以参见图5中S411的相关描述,此处不再赘述。
S626、中央处理器用于将锐度处理后的数据发送至视频播放应用程序。
S627、视频播放应用程序用于控制显示屏显示锐度处理后的数据。
示例性地,视频播放应用程序可以用于向显示屏发送控制指令,控制指令用于指示在显示屏显示锐度处理后的数据;即显示细节增强的视频。
可选地,上述S601至S627中与图5中相同的部分适用于图5至图10中的相关描述,此处不再赘述。
在本申请的实施例中,在对视频的原始数据进行画质增强处理之前,可以先对视频的原始数据进行分析;确定影响视频的原始数据的视频质量的因素;在确定影响视频的原始数据的视频质量的因素的情况下,再针对性地对视频的原始数据进行画质增强处理,从而能够提高视频的原始数据的视频质量;与现有方式中,直接对视频的原始数据进行某一方面进行增强处理相比,本申请的实施例中的方案,能够智能化的分析视频的原始数据的视频质量较差的原因;从而针对性地对待视频的原始数据进行画质增强处理,提高视频的视频质量。
下面结合图12至图22对本申请实施例提供的界面示意图进行举例描述。
示例性地,如图12所示,图12中的(a)所示的图形用户界面(graphical userinterface,GUI)为电子设备的桌面701;电子设备检测到用户点击桌面上的图库应用程序的控件702的操作,如图12中的(b)所示;在电子设备检测到用户点击桌面上的图库应用程序的控件702之后,显示如图12中的(c)所示的图库显示界面703;图库显示界面703中包括所有照片图标与视频图标,电子设备检测到用户点击视频图标704的操作,如图12中的(d)所示;在电子设备检测到用户点击视频图标704的之后,显示视频显示界面705,如图13中的(a)所示;在视频显示界面705中视频的图标706;电子设备检测到用户点视频的图标706的操作,如图13中的(b)所示;在电子设备检测到点击视频的图标706的操作之后,显示播放显示界面707,播放显示界面707中包括编辑控件708,如图13中的(c)所示;电子设备检测到点击编辑控件708的操作,如图13中的(d)所示;在电子设备检测到点击编辑控件708之后,显示编辑显示界面709;编辑显示界面709中包括增强处理控件710;增强处理控件710用于进行视频增强处理,如图14中的(a)所示;电子设备检测到点击增强处理控件710的操作,如图14中的(b)所示;在电子设备检测到点击增强处理控件710的操作之后,显示增强编辑界面711;增强编辑界面711中包括分辨率调整控件712与帧率调整控件,如图14中的(c)所示;电子设备检测到点击分辨率调整控件712的操作,如图14中的(d)所示;例如,电子设备检测到分辨率调整控件712从720P移动至1080P的操作,显示增强编辑显示界面713,如图15中的(a)所示;在编辑完成后,电子设备检测到点击返回控件的操作,如图15中的(b)所示;在电子设备检测到点击返回控件的操作之后,显示增强编辑界面714;增强编辑界面714中包括提示框715,提示框715用于提醒用户“是否放弃当前变焦”;提示框715中还包括取消选项716与放弃选项717,如图15中的(c)所示;可选地,若电子设备检测到点击取消选项716的操作,则电子设备返回增强编辑显示界面713;若电子设备检测到点击放弃选项717的操作,则电子设备返回至编辑显示界面709。
可选地,在增强编辑显示界面中还包括导出控件718,如图16中的(a)所示;电子设备检测到点击导出控件718的操作,如图16中的(b)所示;在电子设备检测到点击导出控件718的操作之后,显示显示界面719;显示界面719中包括提示框720;提示框720用于提示如何导出视频;例如,提示框720中包括提示信息“请选择保持方式”与提示信息“选择“覆盖原图”后,您可在“最近删除”中找到对应原件”;提示框720中还包括取消选项、覆盖原图选项与另存选项,如图16中的(b)所示;可选地,若电子设备检测到点击取消选项得操作,则电子设备取消导出增强处理后的视频;若电子设备检测到点击覆盖原图选项的操作,则电子设备将增强处理后的视频存储在原始视频的存储区域,即通过增强处理后的视频替换原始视频;若电子设备检测到另存选项的操作,则电子设备可以显示可选择的另存的存储区域信息。
可选地,如图12至图16所示的界面图,用户可以通过播放显示界面中的编辑控件实现视频的画质增强,即触发电子设备执行本申请实施例提供的增强视频画质的方法。
示例性地,如图17所示,图17中的(a)所示的图形用户界面(graphical userinterface,GUI)为电子设备的桌面721;电子设备检测到用户点击桌面上的图库应用程序的控件722的操作,如图17中的(b)所示;在电子设备检测到用户点击桌面上的图库应用程序的控件722之后,显示如图17中的(c)所示的图库显示界面723;图库显示界面723中包括所有照片图标与视频图标,电子设备检测到用户点击视频图标724的操作,如图17中的(d)所示;在电子设备检测到用户点击视频图标724的之后,显示视频显示界面725,显示如图18中的(a)所示;在视频显示界面725中视频的图标726;电子设备检测到点击视频的图标726的操作,如图18中的(b)所示;在电子设备检测到点击视频的图标726的操作之后,显示播放显示界面727,播放显示界面727中包括增强处理控件728,如18中的(c)所示;电子设备检测到点击增强处理控件728的操作,如图18中的(d)所示;可选地,在电子设备检测到点击增强处理控件728的操作之后,电子设备可以显示编辑显示界面,如图14中的(a)所示;后续对原始视频的编辑操作,可以参加图14至图16的相关描述,此处不再赘述;或者,在电子设备检测到点击增强处理控件728的操作之后,电子设备可以自动执行本申请实施例提供的增强视频画质的方法。
可选地,如图18所示的界面图,用户可以通过播放显示界面中的增强控件实现视频的画质增强,即触发电子设备执行本申请实施例提供的增强视频画质的方法。
示例性地,电子设备检测到点击图库中视频的图标的操作,显示播放显示界面729;播放显示界面729中包括更多控件730,如图19中的(a)所示;电子设备检测到点击更多控件730的操作,如图19中的(b)所示;在电子设备检测到点击更多控件730的操作之后,显示显示界面731;显示界面731中包括提示框732,提示框732中包括视频增强选项,如图19中的(c)所示;电子设备检测到点击提示框732中视频增强选项的操作,如图19中的(d)所示;可选地,在电子设备检测到点击增强选项的操作之后,电子设备可以显示编辑显示界面,如图14中的(a)所示;后续对原始视频的编辑操作,可以参加图14至图16的相关描述,此处不再赘述;或者,在电子设备检测到点击增强选项的操作之后,电子设备可以自动执行本申请实施例提供的增强视频画质的方法。
可选地,如图19所示的界面图,用户可以通过播放显示界面中的更多控件中的视频增强选项实现视频的画质增强,即触发电子设备执行本申请实施例提供的增强视频画质的方法。
示例性地,在电子设备检测到点击更多控件的操作之后,显示提示框733;提示框733中包括设置选项,如图20中的(a)所示;电子设备检测到点击提示框733中设置选项的操作,如图20中的(b)所示;在电子设备检测到点击提示框733中设置选项的操作之后,显示设置显示界面734,设置显示界面中包括视频增强的控件735,如图20中的(c)所示;电子设备检测到点击视频增强的控件735的操作,如图20中的(d)所示;可选地,在电子设备检测到点击视频增强的控件735的操作之后,电子设备可以显示编辑显示界面,如图14中的(a)所示;后续对原始视频的编辑操作,可以参加图14至图16的相关描述,此处不再赘述;或者,在电子设备检测到点击视频增强的控件735的操作之后,电子设备可以自动执行本申请实施例提供的增强视频画质的方法。
可选地,如图20所示的界面图,用户可以通过播放显示界面中的更多控件中的设置控件实现视频的画质增强,即触发电子设备执行本申请实施例提供的增强视频画质的方法。
在本申请的实施例中,在电子设备播放视频之前(例如,播放本地存储的视频或者播放接收到的视频),电子设备可以显示提示信息;提示用于是否进行视频增强处理。
示例性地,电子设备显示视频显示界面736,视频显示界面736中包括视频的图标737;电子设备检测到点击视频的图标737的操作,如图21中的(a)所示;在电子设备检测到点击视频的图标737的操作之后,显示播放显示界面738;播放显示界面738中包括播放控件739,如图21中的(b)所示;电子设备检测到点击播放控件739的操作,如图21中的(c)所示;在电子设备检测到点击播放控件739的操作之后,电子设备显示提示框740,提示框740用于提示是否进行视频增强;提示框740中包括是选项741与否选项742,如图21中的(d)所示;可选地,若电子设备检测到点击是选项741的操作,则电子设备执行本申请实施例提供的增强视频画质的方法,即电子设备播放视频画质增强处理后的视频;若电子设备检测到点击否选项742的操作,则电子设备播放原始视频,即未经过处理的视频。
示例性地,在聊天界面743中包括视频744,如图22中的(a)所示;电子设备检测到点击视频744中播放控件的操作,如图22中的(b)所示;在电子设备检测到点击视频744中播放控件的操作之后,显示播放显示界面;播放显示界面中包括提示框745,提示框745用于提示是否进行视频增强;提示框745中包括是选项746与否选项747,如图22中的(c)所示;可选地,若电子设备检测到点击是选项745的操作,则电子设备执行本申请实施例提供的增强视频画质的方法,即电子设备播放视频画质增强处理后的视频;若电子设备检测到点击否选项747的操作,则电子设备播放原始视频,即未经过处理的视频。
在本申请的实施例中,在对待播放视频进行画质增强处理之前,可以先对待播放视频进行分析;确定影响待播放视频的视频质量的因素;在确定影响待播放视频的视频质量的因素的情况下,再针对性地对待播放视频进行画质增强处理,从而能够提高待播放视频的视频质量;与现有方式中,直接对待播放视频的某一方面进行增强处理相比,本申请的实施例中的方案,能够智能化的分析待播放视频的视频质量较差的原因;从而针对性地对待播放视频进行画质增强处理,提高待播放视频的视频质量。
应理解,上述举例说明是为了帮助本领域技术人员理解本申请实施例,而非要将本申请实施例限于所例示的具体数值或具体场景。本领域技术人员根据所给出的上述举例说明,显然可以进行各种等价的修改或变化,这样的修改或变化也落入本申请实施例的范围内。
上文结合图1至图22详细描述了本申请实施例提供的增强视频的画质方法;下面将结合图23至图24详细描述本申请的装置实施例。应理解,本申请实施例中的装置可以执行前述本申请实施例的各种方法,即以下各种产品的具体工作过程,可以参考前述方法实施例中的对应过程。
图23是本申请实施例提供的一种电子设备的结构示意图。该电子设备800包括处理模块810与显示模块820。
其中,处理模块810用于获取待播放视频;显示模块820用于显示第一显示界面,所述第一显示界面包括所述待播放视频;处理模块810还用于检测到对所述待播放视频的播放操作;响应于所述播放操作,确定所述待播放视频的第一参数是否小于第一预设阈值,所述第一参数包括分辨率;若所述第一参数小于第一预设阈值,确定所述待播放视频的第二参数是否满足第一预设条件;所述第二参数包括动态范围的数值与高频信息的数值,所述第一预设条件包括所述待播放视频的动态范围的数值小于第二预设阈值,和/或,所述待播放视频的高频信息的数值于第三预设阈值,所述高频信息的数值为所述待播放视频的频域图像中高频信息的累计值,所述高频信息包括所述待播放视频中图像的边缘信息与细节信息;基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频;显示或者保存所述增强处理后的视频。
可选地,作为一个实施例,处理模块810具体用于:
基于所述第一参数和/或所述第二参数对所述待播放视频的亮度通道数据进行所述增强处理,生成所述增强处理后的视频。
可选地,作为一个实施例,处理模块810具体用于:
获取所述待播放视频的分类标签;
确定所述分类标签是否属于预设标签,所述预设标签包括第一标签与第二标签;
若所述分类标签属于所述第一标签,确定所述待播放视频的动态范围的数值是否小于所述第二预设阈值,所述动态范围的数值为基于所述待播放视频的直方图中第一灰度区间的像素数量的占比值得到的;
所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述动态范围的数值小于所述第二预设阈值,基于所述动态范围的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频。
可选地,作为一个实施例,处理模块810具体用于:
确定所述待播放视频的直方图中第一灰度区间的像素数量的占比值是否大于第四预设阈值。
可选地,作为一个实施例,处理模块810具体用于:
获取所述第一灰度区间的像素数量的占比值;
基于所述第一灰度区间的像素数量的占比值,得到第一数值与第二数值;
基于所述第一数值、所述第二数据与预设坐标数据,得到映射关系,所述映射关系用于指示输入灰度值与输出灰度值之间的关联关系;
基于所述映射关系对所述待播放视频的进行所述增强处理,生成所述增强处理后的视频。
可选地,作为一个实施例,处理模块810具体用于:
基于所述映射关系对所述待播放视频的亮度通道进行所述增强处理,生成所述增强处理后的视频。
可选地,作为一个实施例,所述映射关系为映射曲线,所述第一灰度区间的像素数量的占比值与所述映射曲线的曲率之间成正比。
可选地,作为一个实施例,处理模块810还用于:
若所述分类标签属于所述第二标签,确定所述待播放视频的高频信息的数值是否小于第三预设阈值;
所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述高频信息的占比值小于第三预设阈值,基于所述高频信息的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频。
可选地,作为一个实施例,处理模块810具体用于:
通过对所述待播放视频的亮度通道数据进行傅里叶变换处理,生成所述待播放视频的频率图;
基于所述频率图确定所述频率图中高频区域的累计值,所述高频区域的累积值为遍历所述高频区域的每个像素点得到的数值;
基于所述高频区域的累计值、预设斜率值与预设截距值,得到拉普拉斯锐化系数;
基于所述拉普拉斯锐化系数与所述待播放视频的二阶梯度图像,得到第一视频;
对所述待播放视频与所述第一视频进行融合处理,生成所述增强处理后的视频。
可选地,作为一个实施例,处理模块810具体用于:
确定所述待播放视频中每一帧数据的所述第一参数是否小于所述第一预设阈值。
可选地,作为一个实施例,处理模块810具体用于:
确定所述待播放视频中预设帧数据的所述第一参数是否小于所述第一预设阈值。
可选地,作为一个实施例,处理模块810具体用于:
确定所述待播放视频中每一帧数据的所述第二参数是否满足所述第一预设条件。
可选地,作为一个实施例,处理模块810具体用于:
确定所述待播放视频中预设帧数据的所述第二参数是否满足所述第一预设条件。
可选地,作为一个实施例,所述检测到对所述待播放视频的播放操作,包括:
显示第二显示界面,所述第二显示界面中包括第一提示框,所述第一提示框用于提示是否对所述待播放视频进行所述增强处理,所述第一提示框中包括第一控件,所述第一控件用于指示对所述待播放视频进行所述增强处理;
响应于所述播放操作,确定所述待播放视频的第一参数中是否小于第一预设阈值,包括:
检测到对所述第一控件的第一操作;
响应于所述第一操作,确定所述待播放视频的所述第一参数中是否小于所述第一预设阈值。
可选地,作为一个实施例,在保存所述增强处理后的视频的情况下,处理模块810还用于:
显示第二提示框,所述第二提示框用于提示所述增强处理后的视频的存储方式;
其中,所述存储方式包括:第一存储方式与第二存储方式,所述第一存储方式为通过所述增强处理后的视频对所述待播放的视频进行替换的存储方式,所述第二存储方式为将所述增强处理后的视频存储至第一存储区域的存储,所述第一存储区域与存储所述待播放视频的存储区域不同。
可选地,作为一个实施例,处理模块810具体用于:
获取所述电子设备中的所述待播放视频;或者,
接收第一电子设备发送的所述待播放视频,所述第一电子设备为所述待播放视频的采集设备。
需要说明的是,上述电子设备800以功能模块的形式体现。这里的术语“模块”可以通过软件和/或硬件形式实现,对此不作具体限定。
例如,“模块”可以是实现上述功能的软件程序、硬件电路或二者结合。所述硬件电路可能包括应用特有集成电路(application specific integrated circuit,ASIC)、电子电路、用于执行一个或多个软件或固件程序的处理器(例如共享处理器、专有处理器或组处理器等)和存储器、合并逻辑电路和/或其它支持所描述的功能的合适组件。
因此,在本申请的实施例中描述的各示例的单元,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
图24示出了本申请提供的一种电子设备的结构示意图。图24中的虚线表示该单元或该模块为可选的;电子设备900可以用于实现上述方法实施例中描述的方法。
电子设备900包括一个或多个处理器901,该一个或多个处理器901可支持电子设备900实现方法实施例中的增强视频画质的方法。处理器901可以是通用处理器或者专用处理器。例如,处理器901可以是中央处理器(central processing unit,CPU)、数字信号处理器(digital signal processor,DSP)、专用集成电路(application specific integratedcircuit,ASIC)、现场可编程门阵列(field programmable gate array,FPGA)或者其它可编程逻辑器件,如分立门、晶体管逻辑器件或分立硬件组件。
处理器901可以用于对电子设备900进行控制,执行软件程序,处理软件程序的数据。电子设备900还可以包括通信单元905,用以实现信号的输入(接收)和输出(发送)。
例如,电子设备900可以是芯片,通信单元905可以是该芯片的输入和/或输出电路,或者,通信单元905可以是该芯片的通信接口,该芯片可以作为终端设备或其它电子设备的组成部分。
又例如,电子设备900可以是终端设备,通信单元905可以是该终端设备的收发器,或者,通信单元905可以是该终端设备的收发电路。
电子设备900中可以包括一个或多个存储器902,其上存有程序904,程序904可被处理器901运行,生成指令903,使得处理器901根据指令903执行上述方法实施例中描述的增强视频画质的方法。
可选地,存储器902中还可以存储有数据。
可选地,处理器901还可以读取存储器902中存储的数据,该数据可以与程序904存储在相同的存储地址,该数据也可以与程序904存储在不同的存储地址。
处理器901和存储器902可以单独设置,也可以集成在一起,例如,集成在终端设备的系统级芯片(system on chip,SOC)上。
示例性地,存储器902可以用于存储本申请实施例中提供的增强视频画质的方法的相关程序904,处理器901可以用于在执行增强视频画质的方法时调用存储器902中存储的增强视频画质的方法的相关程序904,执行本申请实施例的增强视频画质的方法;例如,获取待播放视频;显示第一显示界面,第一显示界面包括待播放视频;检测到对待播放视频的播放操作;响应于播放操作,确定待播放视频的第一参数是否小于第一预设阈值,第一参数包括分辨率;若第一参数小于第一预设阈值,确定待播放视频的第二参数是否满足第一预设条件;第二参数包括动态范围的数值与高频信息的数值,第一预设条件包括待播放视频的动态范围的数值小于第二预设阈值,和/或,待播放视频的高频信息的数值于第三预设阈值,高频信息的数值为待播放视频的频域图像中高频信息的累计值,高频信息包括待播放视频中图像的边缘信息与细节信息;基于第一参数和/或第二参数对待播放视频进行增强处理,生成增强处理后的视频;显示或者保存增强处理后的视频。
本申请还提供了一种计算机程序产品,该计算机程序产品被处理器901执行时实现本申请中任一方法实施例的增强视频画质的方法。
该计算机程序产品可以存储在存储器902中,例如是程序904,程序904经过预处理、编译、汇编和链接等处理过程最终被转换为能够被处理器901执行的可执行目标文件。
本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被计算机执行时实现本申请中任一方法实施例所述的增强视频画质的方法。该计算机程序可以是高级语言程序,也可以是可执行目标程序。
该计算机可读存储介质例如是存储器902。存储器902可以是易失性存储器或非易失性存储器,或者,存储器902可以同时包括易失性存储器和非易失性存储器。其中,非易失性存储器可以是只读存储器(read-only memory,ROM)、可编程只读存储器(programmableROM,PROM)、可擦除可编程只读存储器(erasable PROM,EPROM)、电可擦除可编程只读存储器(electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(randomaccess memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(static RAM,SRAM)、动态随机存取存储器(dynamicRAM,DRAM)、同步动态随机存取存储器(synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(double data rate SDRAM,DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM,SLDRAM)和直接内存总线随机存取存储器(direct rambus RAM,DR RAM)。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的电子设备的实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
应理解,在本申请的各种实施例中,各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请的实施例的实施过程构成任何限定。
另外,本文中的术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准总之,以上所述仅为本申请技术方案的较佳实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (19)

1.一种增强视频画质的方法,其特征在于,应用于播放视频的电子设备,包括:
获取待播放视频;
显示第一显示界面,所述第一显示界面包括所述待播放视频;
检测到对所述待播放视频的播放操作;
响应于所述播放操作,确定所述待播放视频的第一参数是否小于第一预设阈值,所述第一参数包括分辨率;
若所述第一参数小于第一预设阈值,确定所述待播放视频的第二参数是否满足第一预设条件;所述第二参数包括动态范围的数值与高频信息的数值,所述第一预设条件包括所述待播放视频的动态范围的数值小于第二预设阈值,和/或,所述待播放视频的高频信息的数值于第三预设阈值,所述高频信息的数值为所述待播放视频的频域图像中高频信息的累计值,所述高频信息包括所述待播放视频中图像的边缘信息与细节信息;
基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频;
显示或者保存所述增强处理后的视频。
2.如权利要求1所述的方法,其特征在于,所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
基于所述第一参数和/或所述第二参数对所述待播放视频的亮度通道数据进行所述增强处理,生成所述增强处理后的视频。
3.如权利要求1或2所述的方法,其特征在于,所述若所述第一参数小于第一预设阈值时,确定所述待播放视频的第二参数是否满足第一预设条件,包括:
获取所述待播放视频的分类标签;
确定所述分类标签是否属于预设标签,所述预设标签包括第一标签与第二标签;
若所述分类标签属于所述第一标签,确定所述待播放视频的动态范围的数值是否小于所述第二预设阈值,所述动态范围的数值为基于所述待播放视频的直方图中第一灰度区间的像素数量的占比值得到的;
所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述动态范围的数值小于所述第二预设阈值,基于所述动态范围的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频。
4.如权利要求3所述的方法,其特征在于,所述确定所述待播放视频的动态范围的数值是否小于所述第二预设阈值,包括:
确定所述待播放视频的直方图中第一灰度区间的像素数量的占比值是否大于第四预设阈值。
5.如权利要求3或4所述的方法,其特征在于,所述基于所述动态范围的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频,包括:
获取所述第一灰度区间的像素数量的占比值;
基于所述第一灰度区间的像素数量的占比值,得到第一数值与第二数值;
基于所述第一数值、所述第二数据与预设坐标数据,得到映射关系,所述映射关系用于指示输入灰度值与输出灰度值之间的关联关系;
基于所述映射关系对所述待播放视频的进行所述增强处理,生成所述增强处理后的视频。
6.如权利要求5所述的方法,其特征在于,所述基于所述映射关系对所述待播放视频的进行所述增强处理,生成所述增强处理后的视频,包括:
基于所述映射关系对所述待播放视频的亮度通道进行所述增强处理,生成所述增强处理后的视频。
7.如权利要求5或6所述的方法,其特征在于,所述映射关系为映射曲线,所述第一灰度区间的像素数量的占比值与所述映射曲线的曲率之间成正比。
8.如权利要求3至6中任一项所述的方法,其特征在于,还包括:
若所述分类标签属于所述第二标签,确定所述待播放视频的高频信息的数值是否小于第三预设阈值;
所述基于所述第一参数和/或所述第二参数对所述待播放视频进行增强处理,生成增强处理后的视频,包括:
若所述高频信息的占比值小于第三预设阈值,基于所述高频信息的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频。
9.如权利要求7所述的方法,其特征在于,所述基于所述高频信息的数值对所述待播放视频进行增强处理,生成所述增强处理后的视频,包括:
通过对所述待播放视频的亮度通道数据进行傅里叶变换处理,生成所述待播放视频的频率图;
基于所述频率图确定所述频率图中高频区域的累计值,所述高频区域的累积值为遍历所述高频区域的每个像素点得到的数值;
基于所述高频区域的累计值、预设斜率值与预设截距值,得到拉普拉斯锐化系数;
基于所述拉普拉斯锐化系数与所述待播放视频的二阶梯度图像,得到第一视频;
对所述待播放视频与所述第一视频进行融合处理,生成所述增强处理后的视频。
10.如权利要求1至9中任一项所述的方法,其特征在于,所述确定所述待播放视频的第一参数是否小于第一预设阈值,包括:
确定所述待播放视频中每一帧数据的所述第一参数是否小于所述第一预设阈值。
11.如权利要求1至9中任一项所述的方法,其特征在于,所述确定所述待播放视频的第一参数是否小于第一预设阈值,包括:
确定所述待播放视频中预设帧数据的所述第一参数是否小于所述第一预设阈值。
12.如权利要求1至11中任一项所述的方法,其特征在于,所述确定所述待播放视频的第二参数是否满足第一预设条件,包括:
确定所述待播放视频中每一帧数据的所述第二参数是否满足所述第一预设条件。
13.如权利要求1至11中任一项所述的方法,其特征在于,所述确定所述待播放视频的第二参数是否满足第一预设条件,包括:
确定所述待播放视频中预设帧数据的所述第二参数是否满足所述第一预设条件。
14.如权利要求1至13中任一项所述的方法,其特征在于,所述检测到对所述待播放视频的播放操作,包括:
显示第二显示界面,所述第二显示界面中包括第一提示框,所述第一提示框用于提示是否对所述待播放视频进行所述增强处理,所述第一提示框中包括第一控件,所述第一控件用于指示对所述待播放视频进行所述增强处理;
响应于所述播放操作,确定所述待播放视频的第一参数中是否小于第一预设阈值,包括:
检测到对所述第一控件的第一操作;
响应于所述第一操作,确定所述待播放视频的所述第一参数中是否小于所述第一预设阈值。
15.如权利要求1至14中任一项所述的方法,其特征在于,在保存所述增强处理后的视频的情况下,还包括:
显示第二提示框,所述第二提示框用于提示所述增强处理后的视频的存储方式;
其中,所述存储方式包括:第一存储方式与第二存储方式,所述第一存储方式为通过所述增强处理后的视频对所述待播放的视频进行替换的存储方式,所述第二存储方式为将所述增强处理后的视频存储至第一存储区域的存储,所述第一存储区域与存储所述待播放视频的存储区域不同。
16.如权利要求1至15中任一项所述的方法,其特征在于,所述获取待播放视频,包括:
获取所述电子设备中的所述待播放视频;或者,
接收第一电子设备发送的所述待播放视频,所述第一电子设备为所述待播放视频的采集设备。
17.一种电子设备,其特征在于,包括:
一个或多个处理器和存储器;
所述存储器与所述一个或多个处理器耦合,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行如权利要求1至16中任一项所述的方法。
18.一种芯片系统,其特征在于,所述芯片系统应用于电子设备,所述芯片系统包括一个或多个处理器,所述处理器用于调用计算机指令以使得所述电子设备执行如权利要求1至16中任一项所述的方法。
19.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储了计算机程序,当所述计算机程序被处理器执行时,使得处理器执行权利要求1至16中任一项所述的方法。
CN202211468041.4A 2022-11-22 2022-11-22 增强视频画质的方法与电子设备 Active CN116668773B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202211468041.4A CN116668773B (zh) 2022-11-22 2022-11-22 增强视频画质的方法与电子设备
PCT/CN2023/114086 WO2024109202A1 (zh) 2022-11-22 2023-08-21 增强视频画质的方法与电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211468041.4A CN116668773B (zh) 2022-11-22 2022-11-22 增强视频画质的方法与电子设备

Publications (2)

Publication Number Publication Date
CN116668773A true CN116668773A (zh) 2023-08-29
CN116668773B CN116668773B (zh) 2023-12-22

Family

ID=87712377

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211468041.4A Active CN116668773B (zh) 2022-11-22 2022-11-22 增强视频画质的方法与电子设备

Country Status (2)

Country Link
CN (1) CN116668773B (zh)
WO (1) WO2024109202A1 (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102811354A (zh) * 2011-05-30 2012-12-05 深圳市快播科技有限公司 一种视频画质增强播放方法及点播终端
CN103959758A (zh) * 2011-11-21 2014-07-30 松下电器产业株式会社 分辨率判定装置、图像处理装置以及图像显示装置
CN105872843A (zh) * 2016-04-18 2016-08-17 青岛海信电器股份有限公司 一种播放视频的方法及装置
WO2017185609A1 (zh) * 2016-04-28 2017-11-02 乐视控股(北京)有限公司 一种视频处理方法及设备
CN109361949A (zh) * 2018-11-27 2019-02-19 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备以及存储介质
CN109587561A (zh) * 2018-11-27 2019-04-05 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备及存储介质
CN109587560A (zh) * 2018-11-27 2019-04-05 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备以及存储介质
WO2021218364A1 (zh) * 2020-04-27 2021-11-04 华为技术有限公司 一种图像增强方法及电子设备
WO2021233008A1 (zh) * 2020-05-21 2021-11-25 腾讯科技(深圳)有限公司 一种超分辨率重建方法和相关装置
WO2022105445A1 (zh) * 2020-11-19 2022-05-27 Oppo广东移动通信有限公司 基于浏览器的应用投屏方法及相关装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5600649B2 (ja) * 2011-08-26 2014-10-01 日本電信電話株式会社 映像処理装置及び方法及びプログラム
CN109379628B (zh) * 2018-11-27 2021-02-02 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备及计算机可读介质
WO2022231643A1 (en) * 2021-04-26 2022-11-03 Google Llc Compression-informed video super-resolution

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102811354A (zh) * 2011-05-30 2012-12-05 深圳市快播科技有限公司 一种视频画质增强播放方法及点播终端
CN103959758A (zh) * 2011-11-21 2014-07-30 松下电器产业株式会社 分辨率判定装置、图像处理装置以及图像显示装置
CN105872843A (zh) * 2016-04-18 2016-08-17 青岛海信电器股份有限公司 一种播放视频的方法及装置
WO2017185609A1 (zh) * 2016-04-28 2017-11-02 乐视控股(北京)有限公司 一种视频处理方法及设备
CN109361949A (zh) * 2018-11-27 2019-02-19 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备以及存储介质
CN109587561A (zh) * 2018-11-27 2019-04-05 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备及存储介质
CN109587560A (zh) * 2018-11-27 2019-04-05 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备以及存储介质
WO2021218364A1 (zh) * 2020-04-27 2021-11-04 华为技术有限公司 一种图像增强方法及电子设备
WO2021233008A1 (zh) * 2020-05-21 2021-11-25 腾讯科技(深圳)有限公司 一种超分辨率重建方法和相关装置
WO2022105445A1 (zh) * 2020-11-19 2022-05-27 Oppo广东移动通信有限公司 基于浏览器的应用投屏方法及相关装置

Also Published As

Publication number Publication date
WO2024109202A1 (zh) 2024-05-30
WO2024109202A9 (zh) 2024-08-02
CN116668773B (zh) 2023-12-22

Similar Documents

Publication Publication Date Title
CN108322646B (zh) 图像处理方法、装置、存储介质及电子设备
CN113706414B (zh) 视频优化模型的训练方法和电子设备
CN107690804B (zh) 一种图像处理方法及用户终端
CN112950499B (zh) 图像处理方法、装置、电子设备及存储介质
CN109618102B (zh) 对焦处理方法、装置、电子设备及存储介质
CN113705665B (zh) 图像变换网络模型的训练方法和电子设备
CN115633262B (zh) 图像处理方法和电子设备
CN115689963B (zh) 一种图像处理方法及电子设备
CN109784327B (zh) 边界框确定方法、装置、电子设备及存储介质
CN114096994A (zh) 图像对齐方法及装置、电子设备、存储介质
CN115359105A (zh) 景深扩展图像生成方法、设备及存储介质
CN117201930B (zh) 一种拍照方法和电子设备
CN112822413B (zh) 拍摄预览方法、装置、终端和计算机可读存储介质
CN116916151B (zh) 拍摄方法、电子设备和存储介质
CN116055895B (zh) 图像处理方法及其装置、芯片系统和存储介质
CN116668862B (zh) 图像处理方法与电子设备
CN112508820A (zh) 图像处理方法、装置及电子设备
CN111447360A (zh) 应用程序控制方法及装置、存储介质、电子设备
CN115460343B (zh) 图像处理方法、设备及存储介质
CN116668773B (zh) 增强视频画质的方法与电子设备
CN116709042B (zh) 一种图像处理方法和电子设备
CN115883958A (zh) 一种人像拍摄方法
CN113891008B (zh) 一种曝光强度调节方法及相关设备
CN107451972A (zh) 图像增强方法、装置及计算机可读存储介质
CN111353929A (zh) 图像处理方法、装置和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant