CN115623215B - 一种播放视频的方法、电子设备和计算机可读存储介质 - Google Patents

一种播放视频的方法、电子设备和计算机可读存储介质 Download PDF

Info

Publication number
CN115623215B
CN115623215B CN202211636351.2A CN202211636351A CN115623215B CN 115623215 B CN115623215 B CN 115623215B CN 202211636351 A CN202211636351 A CN 202211636351A CN 115623215 B CN115623215 B CN 115623215B
Authority
CN
China
Prior art keywords
frame
image
ith
ith frame
frame image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211636351.2A
Other languages
English (en)
Other versions
CN115623215A (zh
Inventor
许集润
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202211636351.2A priority Critical patent/CN115623215B/zh
Publication of CN115623215A publication Critical patent/CN115623215A/zh
Application granted granted Critical
Publication of CN115623215B publication Critical patent/CN115623215B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请提供一种播放视频的方法、电子设备和计算机可读存储介质,涉及图像处理领域。本方案中,电子设备不需要对视频的每帧图像做检测,时延降低,性能变好。该方法包括:电子设备响应于第一播放操作,获取第一视频中第i帧图像的编码信息;第一视频包括N帧图像,N≥2,N为整数;i依次在{1,2,……,N}中取值,第i帧图像的编码信息包括第i帧图像的帧类型;若第i帧图像的帧类型为I帧,则检测第i帧图像的亮度信息;若第i帧图像的帧类型为P帧或者B帧,则将第i帧图像的参考帧的亮度信息作为第i帧图像的亮度信息;根据第i帧图像的亮度信息,对第i帧图像的亮度信息进行图像增强;播放第一视频中经过图像增强后的第i帧图像。

Description

一种播放视频的方法、电子设备和计算机可读存储介质
技术领域
本申请涉及图像处理领域,尤其涉及一种播放视频的方法、电子设备和计算机可读存储介质。
背景技术
由于网络传输的省流或年代久远的原因,存在很多显示效果较差的低质量视频。为了提高用户的观感体验,在播放这些视频时,会加入视频增强技术,即对这些视频的亮度、对比度等显示参数进行调整,以使得视频有更好的显示效果。
通常,电子设备可以将视频中每帧图像的亮度,作为对视频中这一帧图像进行图像增强的依据。具体的,电子设备可以对视频中的每帧图像进行亮度检测,若一帧图像的平均亮度过小,可以对这一帧图像进行图像增强。这样,电子设备需要对视频的每帧图像做检测,时延大,性能差。
发明内容
本申请实施例提供一种播放视频的方法、电子设备和计算机可读存储介质,用于解决电子设备需要对视频的每帧图像做检测,时延大,性能差的问题。
为达到上述目的,本申请的实施例采用如下技术方案:
第一方面,提供了一种播放视频的方法,该方法包括:接收第一播放操作;其中,第一播放操作用于触发电子设备播放第一视频,第一视频包括N帧图像,N≥2,N为整数;响应于第一播放操作,获取第一视频中第i帧图像的编码信息;其中,i依次在{1,2,……,N}中取值,第i帧图像的编码信息包括第i帧图像的帧类型,帧类型为I帧、P帧或者B帧中的任一种;第i帧图像的帧类型为P帧或者B帧的情况下,第i帧图像的编码信息还包括第i帧图像的参考帧信息;若第i帧图像的帧类型为I帧,则检测第i帧图像的亮度信息;若第i帧图像的帧类型为P帧或者B帧,则将第i帧图像的参考帧的亮度信息作为第i帧图像的亮度信息;根据第i帧图像的亮度信息,对第i帧图像的亮度信息进行图像增强;播放第一视频中经过图像增强后的第i帧图像。
本方案中,电子设备可以针对不同帧类型的图像,进行不同的亮度检测。如果图像的帧类型是I帧,则按照现有的亮度检测方法,对该图像进行亮度检测。如果图像的帧类型是P帧或B帧,则利用该图像的参考帧的亮度信息作为亮度检测的结果,具体的,电子设备可以直接将该图像的参考帧的亮度信息作为这一帧的亮度信息。这样,电子设备便不需要对视频的每帧图像进行亮度检测。因此,可以减少电子设备对视频中每帧图像都进行亮度检测的时间,降低亮度检测的时延,并且电子设备仅对I帧图像进行亮度检测,可以降低电子设备的功耗,提升电子设备的性能。
在第一方面的一种可能的实现方式中,第i帧图像包括多个宏块;第i帧图像的参考帧信息包括:第i帧图像中每个宏块的宏块信息,宏块的宏块信息包括宏块的编码类型,宏块的编码类型为帧内编码或者帧间编码;其中,若第i帧图像的帧类型为P帧或者B帧,则将第i帧图像的参考帧的亮度信息作为第i帧图像的亮度信息,包括:若第i帧图像的帧类型为P帧或者B帧,计算第一占比;其中,第一占比为第i帧图像中编码类型为帧间编码的宏块的数量在多个宏块总数中的占比;若第一占比大于预设占比阈值,则将第i帧图像的参考帧的亮度信息作为第i帧图像的亮度信息。
若图像的帧间编码的宏块过多,则表明图像参考其他图像的信息过多,则可以将这一帧图像的参考帧的亮度信息作为这一帧图像的亮度信息,若图像的帧间编码的宏块过少,则表明图像参考其他图像的信息过少,自身信息过多,则需要检测这一帧图像的亮度信息。如此,既可以提高电子设备得到图像的亮度信息的速度,又能较准确的得到图像的亮度信息。
在第一方面的一种可能的实现方式中,该方法还包括:若第一占比小于预设占比阈值,则检测第i帧图像的亮度信息。在第一方面的一种可能的实现方式中,第i帧图像包括多个参考帧,多个参考帧是第i帧图像的多个宏块的参考帧,多个宏块中部分或全部宏块的参考帧不同;将第i帧图像的参考帧的亮度信息作为第i帧图像的亮度信息,包括:计算多个第二占比;其中,多个第二占比与多个参考帧一一对应,每个第二占比为多个参考帧中一个参考帧对应第i帧图像中宏块的数量在多个宏块总数中的占比;将多个第二占比中最大的第二占比所对应的参考帧的亮度信息作为第i帧图像的亮度信息。
在一些情况下,图像在编码的过程需要参考其他多帧图像,且图像可以包括多个不同的参考帧,该图像不同宏块的参考帧可以不同。若图像的某一个参考帧对应的该图像中宏块的数量在该图像所有宏块总数的占比最大,则表明该图像参考该图像的信息过多,则可以将这一帧图像的参考帧的亮度信息作为这一帧图像的亮度信息。如此,既可以提高电子设备得到图像的亮度信息的速度,又能较准确的得到图像的亮度信息。
在第一方面的一种可能的实现方式中,在宏块的编码类型为帧间编码的情况下,宏块的宏块信息还包括:宏块的参考帧标识和参考宏块标识;第i帧图像包括多个参考帧,多个参考帧是第i帧图像的多个宏块的参考帧,多个宏块中部分或全部宏块的参考帧不同;将第i帧图像的参考帧的亮度信息作为第i帧图像的亮度信息,包括:将第i帧图像中编码类型为帧间编码的宏块的参考帧中参考宏块的亮度信息,以及第i帧图像中编码类型为帧内编码的宏块的亮度信息,组成第i帧图像的亮度信息。
若图像既具有帧间编码的宏块,又具有帧内编码的宏块,则电子设备可以将图像的帧间编码的宏块对应的参考帧中的宏块的亮度信息,以及帧内编码的宏块对应的参考帧中的宏块的亮度信息结合,得到这一帧图像的亮度信息。如此,既可以提高电子设备得到图像的亮度信息的速度,又能较准确的得到图像的亮度信息。而且,电子设备可以仅对一帧图像中帧内编码的宏块的亮度信息进行亮度检测,不对这一帧图像中帧间编码的宏块的亮度信息进行亮度检测,而是直接将图像的帧间编码的宏块对应的参考帧中的宏块的亮度信息作为这一帧图像部分宏块的亮度信息。即不需要做全图图像进行亮度信息扫描。如此,不需要电子设备访问内存进行整帧图像各个宏块的亮度检测,降低电子设备的内存被频繁访问,降低电子设备的功耗,提升电子设备的性能。
在第一方面的一种可能的实现方式中,第i帧图像包括多个参考帧,多个参考帧是第i帧图像的多个宏块的参考帧,多个宏块中部分或全部宏块的参考帧不同;将第i帧图像的参考帧的亮度信息作为第i帧图像的亮度信息,包括:将第i帧图像的多个参考帧的亮度信息的平均值,作为第i帧图像的亮度信息。
在第一方面的一种可能的实现方式中,根据第i帧图像的亮度信息,对第i帧图像的亮度信息进行图像增强,包括:若第i帧图像的亮度信息小于预设亮度阈值,则对第i帧图像的亮度信息进行图像增强。
对于显示效果较差的低质量视频,例如,画面较暗沉,用户观感较差。为了提高用户的观感体验,在播放这些视频时,会加入视频增强技术,以使得视频有更好的显示效果。
在第一方面的一种可能的实现方式中,该方法还包括:获取到第i帧图像的亮度信息后,将第i帧图像的亮度信息保存在图像信息库中;根据第i帧图像的亮度信息,对第i帧图像的亮度信息进行图像增强,包括:从图像信息库获取第i帧图像的亮度信息,并根据第i帧图像的亮度信息,对第i帧图像的亮度信息进行图像增强。
在第一方面的一种可能的实现方式中,在根据第i帧图像的亮度信息,对第i帧图像的亮度信息进行图像增强之后,该方法还包括:基于第i帧图像的亮度信息和第i帧图像的相邻帧的亮度信息,对第i帧图像的亮度进行平滑处理。
可以理解,在电子设备对某一图像进行图像增强后,还可以根据相邻一帧或者多帧图像的亮度信息,对该图像的亮度信息做平滑处理,以避免该图像的亮度与其他相邻帧图像的亮度相差太多,用户观感较差的问题出现。
在第一方面的一种可能的实现方式中,该方法还包括:采用N帧图像中经过图像增强后的前n帧图像,替换第一视频中的前n帧图像,得到保存替换后的第一视频。
本申请中,电子设备若是缓存全部经过图像增强的图像,则会占用电子设备中大量的存储空间。为了节省电子设备的存储空间,电子设备可以仅存储视频中前几帧经过视频增强的图像。这样,电子设备便可以在播放前几帧经过视频增强的图像的同时,利用本申请实施例提供的播放视频的方法,对后续要播放的图像进行图像增强,降低电子设备处理图像与播放视频之间的时间延迟,提高视频播放的流畅度,提升用户的观感体验。
第二方面,提供了一种电子设备,该电子设备包括存储器和一个或多个处理器;该存储器用于存储代码指令;该处理器用于运行该代码指令,使得该电子设备执行如第一方面中任一种可能的设计方式中的播放视频的方法。
第三方面,提供了一种计算机可读存储介质,该计算机可读存储介质包括计算机指令,当该计算机指令在电子设备上运行时,使得该电子设备执行如第一方面中任一种可能的设计方式中的播放视频的方法。
第四方面,提供了一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现第一方面中任一种可能的设计方式中的播放视频的方法。
其中,第二方面、第三方面和第四方面中任一种设计方式所带来的技术效果可参见第一方面中不同设计方式所带来的技术效果,此处不再赘述。
附图说明
图1示出了一种I帧、P帧、B帧之间的关系示意图;
图2示出了一种视频结构的示意图;
图3示出了一种播放视频的场景;
图4示出了又一种播放视频的场景;
图5示出了一种手机100的结构示意图;
图6示出了一种播放视频的方法的流程示意图;
图7示出了一种手机界面的示意图;
图8示出了一种图像增强前的图像序列以及图像增强后的图像序列的对比示意图;
图9示出了又一种播放视频的方法的流程示意图;
图10示出了一种P1帧图像和P2帧图像划分宏块的示意图;
图11示出了一种P1帧图像、P2帧图像和P3帧图像划分宏块的示意图;
图12示出了一种P4帧图像和P5帧图像划分宏块的示意图;
图13示出了一种本申请实施例提供的播放视频的流程图。
具体实施方式
本申请实施例包括但不限于一种播放视频的方法、电子设备和计算机可读存储介质。
下面结合附图,对本申请的实施例进行描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。本领域普通技术人员可知,随着技术的发展和新场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
为了便于更好的说明本申请的技术方案,下面对本申请涉及到的术语I帧、P帧、B帧做简要概述。
(1)I帧:帧内编码帧(intra picture),I帧是一个全帧压缩编码帧,它将全帧图像信息进行压缩编码。解码时仅用I帧的图像数据就可重构完整图像。
例如,图1示出了一种I帧、P帧、B帧之间的关系示意图。如图1所示,以I帧图像中包含的画面内容为三角形,B帧图像中包含的画面内容为三角形、椭圆形和长方形,P帧图像中包含的画面内容为三角形和长方形为例来说明I帧、P帧、B帧图像之间的关系。I帧的图像数据包含I帧图像的全部画面信息:三角形,电子设备可以基于I帧图像数据解码出包含三角形的I帧图像。
(2)P帧:前向预测编码帧(predictive-frame),也称为预测帧。P帧的图像数据不包括P帧图像的全部画面信息,仅仅有区别于前一帧图像画面内容的数据,解码时需要用之前缓存的前帧图像,叠加上P帧图像数据生成的图像,生成P帧图像。
例如,如图1所示,P帧图像与I帧图像画面内容的区别为P帧图像中画面内容相比于I帧图像中画面内容多了长方形,P帧图像数据包含了该画面内容区别数据。解码时,电子设备需要用之前缓存的只包含三角形的I帧图像,叠加上P帧图像数据生成的包含长方形的图像,得到包含三角形和长方形的P帧图像。
(3)B帧:双向预测内插编码帧(bi-directional interpolated predictionframe),B帧图像数据记录的是本帧图像区别于前后帧图像画面内容的数据。解码时,电子设备不仅要取得之前缓存的前帧图像数据生成的前帧图像,还要得到后帧图像数据生成的后帧图像,将前帧图像数据生成的图像和后帧图像数据生成的后帧图像与B帧图像数据生成的图像叠加,取得B帧的图像。
例如,如图1所示,P帧图像与I帧图像画面内容的区别为P帧图像中画面内容相比于I帧图像中画面内容多了长方形,P帧图像数据包含了该画面内容区别数据;B帧图像与P帧图像画面内容的区别为B帧图像中画面内容相比于P帧图像中画面内容多了椭圆形,B帧图像数据包含了该画面内容区别数据。解码时, 电子设备不仅要取得之前缓存的I帧图像数据生成的包含三角形的前帧图像,还要得到P帧图像数据生成的包含长方形的后帧图像,将前帧图像和后帧图像与B帧图像数据生成的包含椭圆形的图像叠加,得到包含三角形、长方形和椭圆形的B帧的图像。
如前文背景技术所述,通常,电子设备可以将视频中每帧图像的亮度,作为对视频中这一帧图像进行图像增强的依据。具体的,电子设备可以对视频中的每帧图像进行亮度检测,若一帧图像的平均亮度过小,可以对这一帧图像进行图像增强。这样,电子设备需要对视频的每帧图像做检测,时延大,性能差。
例如,图2示出了一种视频的多帧图像结构的示意图。如图2所示,图2中的视频由P1帧图像至图像PN组成,其中,N为大于等于2的整数。电子设备对该视频进行图像增强时,需要对视频中的P1帧图像至图像PN进行亮度检测,若一帧图像的平均亮度过小,例如P4帧图像的亮度较小,可以对这一帧图像进行图像增强。这样,电子设备需要对P1帧图像至PN均做检测,时延大,性能差。
需要说明的是,视频是连续的图像序列,由连续的多帧图像构成。由于人眼的视觉暂留效应,当图像序列以一定的速率播放时,用户看到的就是动作连续的视频。由于连续的图像之间相似性极高,为便于储存传输,电子设备需要对原始的视频进行编码压缩,以去除空间、时间维度的冗余。其中,由于连续的图像之间相似性极高,电子设备可以将一个图像或者多个图像作为关键帧图像,其他图像以此关键帧图像和/或其他图像作为参考帧,记录与参考帧不同的信息,以对原始的视频进行编码压缩。因此,图像的帧类型可以分为作为关键帧图像的I帧、可以参考关键帧图像和/或其他图像的P帧或者B帧。
综上所述,P帧或者B帧在编码的过程需要参考其他图像,为帧间编码,而I帧不需要参考其他图像,帧内编码即可。
于是,为了解决上述技术问题,电子设备在对视频中的图像帧进行亮度检测时,可以针对视频中的I帧、P帧和B帧做不同的处理。具体的,如果视频中的一帧图像的帧类型为I帧,即这一帧图像采用帧内编码的方式,则电子设备需要检测这一帧图像的亮度信息。如果视频中的一帧图像的帧类型为P帧或者B帧,即这一帧图像采用帧间编码(或者帧间编码+帧内编码)的方式,则电子设备可以将这一帧图像的参考帧的亮度信息作为这一帧图像的亮度信息。之后,电子设备可以基于每一帧图像的亮度信息对对应图像进行图像增强,播放增强后的图像。
本方案中,电子设备可以针对不同帧类型的图像,进行不同的亮度检测。如果图像的帧类型是I帧,则按照现有的亮度检测方法,对该图像进行亮度检测。如果图像的帧类型是P帧或B帧,则利用该图像的参考帧的亮度信息作为亮度检测的结果,具体的,电子设备可以直接将该图像的参考帧的亮度信息作为这一帧的亮度信息。这样,电子设备便不需要对视频的每帧图像进行亮度检测。因此,可以减少电子设备对视频中每帧图像都进行亮度检测的时间,降低亮度检测的时延,并且电子设备仅对I帧的图像进行亮度检测可以降低电子设备的功耗,提升电子设备的性能。
示例性的,本申请实施例中的电子设备可以为手机、平板电脑、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、个人数字助理 (personaldigital assistant,PDA)、电视、投影仪等设备。例如,图3示出了一种播放视频的场景。如图3所示,手机100利用本申请实施例提供的播放视频的方法播放视频。又如,图4示出了又一种播放视频的场景。如图4所示,电视200利用本申请实施例提供的播放视频的方法播放视频。本申请实施例对电子设备的具体形态不做特殊限制。
本申请实施例以电子设备为手机为例进行说明。图5示出了一种手机100的结构示意图。
如图5所示,手机100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏(触摸屏)194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。
可以理解的是,本实施例示意的结构并不构成对手机100的具体限定。在另一些实施例中,手机100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。本申请实施例中,在手机100播放视频的情况下,若图像为帧内编码的I帧,则处理器110需要检测该图像的亮度信息。而若图像为帧间编码的P帧或者B帧,则处理器110可以将该图像的参考帧的亮度信息作为这一帧的亮度信息。
控制器可以是手机100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传播器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
可以理解的是,本实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对手机100的结构限定。在另一些实施例中,手机100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。在一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
手机100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。在一些实施例中,手机100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得手机100可以通过无线通信技术与网络以及其他设备通信。
天线1和天线2用于发射和接收电磁波信号。手机100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如,可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在手机100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(lownoise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。
移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
无线通信模块160可以提供应用在手机100上的包括WLAN(如无线保真(wirelessfidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigationsatellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(nearfield communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。
无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
手机100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。ISP用于处理摄像头193反馈的数据。摄像头193用于捕获静态图像或视频。在一些实施例中,手机100可以包括1个或N个摄像头193,N为大于等于1的正整数。
手机100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。该显示屏194包括显示面板。本申请实施例中,手机100可以基于图像的亮度信息对图像进行图像增强,通过显示屏194播放增强后的图像。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展手机100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行手机100的各种功能应用以及数据处理。例如,在本申请实施例中,处理器110可以通过执行存储在内部存储器121中的指令,内部存储器121可以包括存储程序区和存储数据区。内部存储器121可以预先存储待图像增强的连续的图像序列。
其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,业务抢占功能等)等。存储数据区可存储手机100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flashstorage,UFS)等。
手机100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和手机100的接触和分离。手机100可以支持1个或N个SIM卡接口,N为大于等于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。
本申请实施例提供一种播放视频的方法,该方法可以应用于具有上述硬件结构的电子设备(如手机100)中。图6示出了一种播放视频的方法的流程示意图。如图6所示,本申请实施例提供的播放视频的方法可以包括如下步骤:
601:手机100接收第一播放操作;其中,第一播放操作用于触发手机100播放第一视频,第一视频包括N帧图像,N≥2,N为整数。
手机100中设置第一应用,第一播放操作可以是用户对第一应用中的视频的播放操作。其中,第一应用可以是视频应用,浏览器应用等各种可以播放视频的应用。
例如,第一播放操作可以是用户对视频应用中的视频的点击操作。图7示出了一种视频应用的界面。如图7所示,第一播放操作可以是用户对视频应用中的视频A的点击操作。第一播放操作也可以是用户在浏览浏览器应用中的网页时,对网页中的某个视频的点击操作。本申请对第一应用中的视频的播放操作并不限于此,还可以是其他播放方式。
视频是连续的图像序列,由连续的多帧图像构成。例如,第一视频可以包括N帧图像,N≥2,N为整数。
需要说明的是,由于网络传输的省流或年代久远的原因,存在很多显示效果较差的低质量视频。为了提高用户的观感体验,在播放这些视频时,会加入视频增强技术,即对这些视频的亮度、对比度、颜色饱和度、纹理等显示参数进行调整,以使得视频有更好的显示效果。具体参见下文中的步骤602至607。
602:手机100响应于第一播放操作,获取第一视频中第i帧图像的编码信息;其中,i依次在{1,2,……,N}中取值,第i帧图像的编码信息包括第i帧图像的帧类型,帧类型为I帧、P帧或者B帧中的任一种;第i帧图像的帧类型为P帧或者B帧的情况下,第i帧图像的编码信息还包括第i帧图像的参考帧信息。
上述实施例中介绍第一视频包括N帧图像。手机100播放视频的过程中,依次播放N帧图像中的每帧图像。因此,本申请实施例中,以N帧图像中的第i帧图像为例,介绍手机100对第一视频中的图像进行图像增强的方法。其中,i依次在{1,2,……,N}中取值,用以表示手机100针对第一视频中的每一帧图像均执行类似的操作。
在第i帧图像的帧类型为I帧的情况下,第i帧图像的编码信息可以包括第i帧图像的帧类型,该帧类型为I帧。在第i帧图像的帧类型为P帧或者B帧的情况下,第i帧图像的编码信息不仅包括第i帧图像的帧类型(该帧类型为P帧或者B帧),还可以包括第i帧图像的参考帧信息。例如,第i帧图像的参考帧信息可以包括第i帧图像的参考帧的标识。
603:手机100判断第i帧图像的帧类型是I帧还是P帧或B帧。
具体的,步骤603之后,若第i帧图像的帧类型是I帧,则手机100可以执行步骤604。若第i帧图像的帧类型是P帧或B帧,则手机100可以执行步骤605。
604:手机100检测第i帧图像的亮度信息。
可以理解,虽然手机100进行图像增强时涉及多个显示参数(如图像的亮度、对比度,颜色饱和度,纹理抽象度),但是,相比于其他参数,图像的亮度信息较显性,因此,本申请实施例将图像的亮度信息作为图像增强的一个考虑因素。
在一些实施例中,若第i帧图像的帧类型是I帧,则手机100需要检测第i帧图像所有像素点的亮度信息。例如,假设图2所示的P1帧图像的帧类型是I帧,则手机100需要检测P1帧图像所有像素点的亮度信息。
605:手机100将第i帧图像的参考帧的亮度信息作为第i帧图像的亮度信息。
若第i帧图像的帧类型为帧间编码的P帧或者B帧,则手机100可以将该图像的参考帧的亮度信息作为这一帧的亮度信息。如此,手机100便不需要对视频的每帧图像进行亮度检测。因此,可以减少手机100对视频中每帧图像都进行亮度检测的时间,降低亮度检测的时延,并且手机100仅对I帧图像进行亮度检测,可以降低手机100的功耗,提升手机100的性能。
606:手机100根据第i帧图像的亮度信息,对第i帧图像的亮度信息进行图像增强。
对于显示效果较差的低质量视频,例如,画面较暗沉,用户观感较差。为了提高用户的观感体验,在播放这些视频时,会加入视频增强技术,以使得视频有更好的显示效果。具体的,在一些实施例中,若第i帧图像的亮度信息小于预设亮度阈值,则手机100会对第i帧图像的亮度信息进行图像增强。例如,图8示出了一种图像增强前的图像序列以及图像增强后的图像序列的对比示意图。如图8所示,若P4帧图像的亮度信息小于预设亮度阈值,则手机100会对P4帧图像的亮度信息进行图像增强。
图像增强可以是对图像的亮度、对比度,颜色饱和度,纹理抽象度等显示参数进行增强。在一些实施例中,手机100可以基于第i帧图像的最高亮度、平均亮度、最低亮度,对图像进行增强。
607:手机100播放第一视频中经过图像增强后的第i帧图像。
手机100播放第一视频中经过图像增强后的第i帧图像,以提高用户的观感体验。
例如,如图8所示,手机100会对P4帧图像的亮度信息进行图像增强,播放图像增强后的P4’帧图像。
综上所述,本方案中,手机100不需要对视频的每帧图像做检测,时延降低,性能变好。
宏块( Macroblock)是视频编码技术中的一个基本概念。在视频编码中,一帧图像通常划分成若干宏块。有些宏块在编码的过程需要参考其他图像(该图像可以称为参考帧)的宏块,为帧间编码宏块,而有些宏块在编码的过程不需要参考其他图像(该图像可以称为参考帧)的宏块,帧内编码即可。因此,帧类型为P帧或B帧的图像的参考帧信息可以包括:图像中每个宏块的宏块信息。一个宏块的宏块信息可以包括该宏块的编码类型,宏块的编码类型为帧内编码或者帧间编码。
若图像的帧间编码的宏块较多,则表明图像参考其他图像的信息较多,则可以将这一帧图像的参考帧的亮度信息作为这一帧图像的亮度信息;若图像的帧间编码的宏块较少,则表明图像参考其他图像的信息较少,自身信息较多,则可以检测这一帧图像的亮度信息。如此,既可以提高手机100得到图像的亮度信息的速度,又能较准确的得到图像的亮度信息。
具体的,在第i帧图像的帧类型为P帧或者B帧的情况下,如图9所示,在S605之前,本申请实施例的方法还可以包括步骤605a至605b。
605a:手机100计算第一占比;其中,第一占比为第i帧图像中编码类型为帧间编码的宏块的数量在多个宏块总数中的占比。
例如,假设图2所示的P1帧图像的帧类型为I帧,P2帧图像的帧类型为P帧。图10示出了一种P1帧图像和P2帧图像划分宏块的示意图。如图10所示,P1帧图像编码时被划分为6个宏块,如宏块1-1、宏块1-2、宏块1-3、宏块1-4、宏块1-5和宏块1-6; P2帧图像编码时被划分为6个宏块,如宏块2-1、宏块2-2、宏块2-3、宏块2-4、宏块2-5和宏块2-6。
图2所示的P2帧图像的参考帧为P1帧图像。具体的,P2帧图像的宏块2-1的参考宏块为宏块1-1、宏块2-2的参考宏块为宏块1-2、宏块2-3的参考宏块为宏块1-3、宏块2-4的参考宏块为宏块1-4、宏块2-5的参考宏块为宏块1-5、宏块2-6的参考宏块为宏块1-6。由此可知,P2帧图像中所有宏块的编码类型均为帧间编码。以P3帧图像是第i帧图像为例。手机可以计算得到P2帧图像的第一占比为100%。
605b:手机100判断第一占比是否大于预设占比阈值。
例如,该预设占比阈值可以是80%、85%或者90%等。该预设占比阈值可以预先配置在手机100中,或者该预设占比阈值可以由用户在手机100中设置。
具体的,在605b之后,若第一占比大于预设占比阈值,则表示第i帧图像参考其他图像的信息较多,手机100可以执行605;若第一占比小于预设占比阈值,则表示第i帧图像参考其他图像的信息较少,自身信息较多,手机100可以执行604。
综上所述,本方案既可以提高手机100得到图像的亮度信息的速度,又能较准确的得到图像的亮度信息。
在一些情况下,一帧图像在编码的过程需要参考其他多帧图像,且这一帧图像中不同宏块的参考帧可以不同。例如,假设图2所示的P1帧图像和P2帧图像的帧类型均为I帧,P3帧图像的帧类型为P帧。图11示出了一种P1帧图像、P2帧图像和P3帧图像划分宏块的示意图。如图11所示,P1帧图像编码时被划分为6个宏块,如宏块1-1、宏块1-2、宏块1-3、宏块1-4、宏块1-5和宏块1-6;P2帧图像编码时被划分为6个宏块,如宏块2-1、宏块2-2、宏块2-3、宏块2-4、宏块2-5和宏块2-6。P3帧图像编码时被划分为6个宏块,如宏块3-1、宏块3-2、宏块3-3、宏块3-4、宏块3-5和宏块3-6。P3帧图像在编码的过程需要参考P1帧图像和P2帧图像。具体的,P3帧图像的宏块3-1的参考宏块为宏块1-1、宏块3-3的参考宏块为宏块1-3、宏块3-4的参考宏块为宏块1-4、宏块3-5的参考宏块为宏块1-5。P3帧图像的宏块3-2的参考宏块为宏块2-2、宏块3-6的参考宏块为宏块2-6。
在一种实现方式中,若图像的某一个参考帧对应的该图像中宏块的数量在该图像所有宏块总数的占比最大,则表明该图像参考该图像的信息过多,则可以将这一帧图像的参考帧的亮度信息作为这一帧图像的亮度信息。如此,既可以提高手机100得到图像的亮度信息的速度,又能较准确的得到图像的亮度信息。
具体的,手机100计算多个第二占比;其中,多个第二占比与多个参考帧一一对应,每个第二占比为多个参考帧中一个参考帧对应第i帧图像中宏块的数量在多个宏块总数中的占比;手机100可以将多个第二占比中最大的第二占比所对应的参考帧的亮度信息作为第i帧图像的亮度信息。
例如,如图11所示,P1帧图像对应P3帧图像中的宏块数量是4,P2帧图像对应P3帧图像中的宏块数量是2。因此,P1帧图像对应的第二占比为4/6,P2帧图像对应的第二占比为2/6。由于第二占比4/6大于第二占比2/6。则手机100可以将P1帧图像的亮度信息作为图像P3的亮度信息。
在另一种实现方式中,针对上述情况,若图像既具有帧间编码的宏块,又具有帧内编码的宏块,则手机100可以将图像的帧间编码的宏块对应的参考帧中的宏块的亮度信息,以及帧内编码的宏块的亮度信息结合,得到这一帧图像的亮度信息。如此,既可以提高手机100得到图像的亮度信息的速度,又能较准确的得到图像的亮度信息。
具体的,在宏块的编码类型为帧间编码的情况下,宏块的宏块信息还包括:宏块的参考帧标识和参考宏块标识;第i帧图像包括多个参考帧,多个参考帧是第i帧图像的多个宏块的参考帧,多个宏块中部分或全部宏块的参考帧不同;手机100可以将第i帧图像中编码类型为帧间编码的宏块的参考帧中参考宏块的亮度信息,以及第i帧图像中编码类型为帧内编码的宏块的亮度信息,组成第i帧图像的亮度信息。
例如,图12示出了一种P4帧图像和P5帧图像划分宏块的示意图。如图12所示,假设图2所示的P4帧图像的帧类型为I帧, P5帧图像的帧类型为P帧。P5帧图像编码时被划分为6个宏块,如宏块5-1、宏块5-2、宏块5-3、宏块5-4、宏块5-5和宏块5-6; P4帧图像编码时被划分为6个宏块,如宏块4-1、宏块4-2、宏块4-3、宏块4-4、宏块4-5和宏块4-6。P5帧图像在编码的过程需要参考P4帧图像。具体的,P5帧图像的宏块5-1的参考宏块为宏块4-1、宏块5-2的参考宏块为宏块4-2、宏块5-3的参考宏块为宏块4-3。宏块5-4、宏块5-5和宏块5-6无参考宏块。手机100可以将宏块4-1、宏块4-2和宏块4-3的亮度信息,以及宏块5-4、宏块5-5和宏块5-6的亮度信息,组成P5帧图像的亮度信息。
本方案中,若图像既具有帧间编码的宏块,又具有帧内编码的宏块,则手机100可以仅对一帧图像中帧内编码的宏块的亮度信息进行亮度检测,不对这一帧图像中帧间编码的宏块的亮度信息进行亮度检测,而是直接将图像的帧间编码的宏块对应的参考帧中的宏块的亮度信息作为这一帧图像部分宏块的亮度信息,即不需要做全图图像进行亮度信息扫描。如此,不需要手机100访问内存进行整帧图像各个宏块的亮度检测,降低手机100的内存被频繁访问,降低手机100的功耗,提升手机100的性能。
在其他一些实施例中,手机100还可以将第i帧图像的多个参考帧的亮度信息的平均值,作为第i帧图像的亮度信息。
手机100得到第i帧图像的亮度信息后,会将第i帧图像的亮度信息保存在图像信息库中,以便于手机100对视频进行图像增强时,从图像信息库获取第i帧图像的亮度信息,并根据第i帧图像的亮度信息,对第i帧图像的亮度信息进行图像增强。
在另一些实施例中,为了提升视频的流畅度,提升用户视觉体验,在手机100对某一图像进行图像增强后,还可以根据相邻一帧或者多帧图像的亮度信息,对该图像的亮度信息做平滑处理。这样,可以避免该图像的亮度与其他相邻帧图像的亮度相差太多,用户观感较差的问题。
手机100可以基于图像的亮度信息判断相邻帧图像的变化情况,对图像的亮度进行平滑处理。具体的,手机100在根据第i帧图像的亮度信息,对第i帧图像的亮度信息进行图像增强之后,还会基于第i帧图像的亮度信息和第i帧图像的相邻帧的亮度信息,对第i帧图像的亮度进行平滑处理。第i帧图像的相邻帧可以指第i帧图像前序的预设帧图像。
又由于相邻帧图像的亮度变化与相邻帧图像的颜色的锐度、饱和度同步。因此,判断相邻帧图像的亮度变化情况也可以用其他的参数,例如,颜色的锐度和饱和度。
在一些实施例中,手机100若是缓存全部经过图像增强的图像,则会占用手机100中大量的存储空间。为了节省手机100的存储空间,手机100可以仅存储视频中前几帧经过视频增强的图像。这样,手机100便可以在播放前几帧经过视频增强的图像的同时,利用本申请实施例提供的播放视频的方法,对后续要播放的图像进行图像增强,进一步降低手机100处理图像与播放视频之间的时间延迟,提高视频播放的流畅度,提升用户的观感体验。具体的,手机100采用N帧图像中经过图像增强后的前n帧图像,替换第一视频中的前n帧图像,得到保存替换后的第一视频。
可以理解,第一应用一般对应第一应用服务器,第一应用服务器若是缓存全部经过图像增强的图像,则会占用第一应用服务器中大量的存储空间。为了节省第一应用服务器的存储空间,第一应用服务器可以预先存储视频中前几帧经过视频增强的图像。手机100可以从第一应用服务器中获取视频中前几帧经过视频增强的图像并存储。
图13示出了一种本申请实施例提供的播放视频的流程图。如图13所示,该方法可以包括:
1.响应于第一播放操作,获取第一视频中第i帧图像的编码信息;其中,i依次在{1,2,……,N}中取值,第i帧图像的编码信息包括第i帧图像的帧类型,帧类型为I帧、P帧或者B帧中的任一种;第i帧图像的帧类型为P帧或者B帧的情况下,第i帧图像的编码信息还包括第i帧图像的参考帧信息。
2.若第i帧图像的帧类型为I帧,将第i帧图像送入亮度检测模块,亮度检测模块检测第i帧图像的最高亮度、最低亮度、平均亮度等亮度信息,然后将第i帧图像的编码信息和亮度信息存到图像信息库中。若亮度信息小于亮度阈值,转至7。
3.若第i帧图像的帧类型为P帧或者B帧,则将第i帧图像的参考帧的亮度信息作为第i帧图像的亮度信息。
4.亮度预测模块根据编码信息,快速判断第i帧图像的亮度是否变化。
5.若第i帧图像度变化,则将第i帧图像送入亮度检测模块,重新检测亮度信息。
6.亮度检测模块检测完成后,更新亮度信息到图像信息库中。
7. 图像增强模块获取亮度检测模块的信息,准备进行图像增强。
8.图像增强模块获取信息库中前序帧的亮度信息,对亮度调整范围进行平滑。
9.将调整完成的图像送入显示。本申请另一实施例提供了一种电子设备,该电子设备包括:存储器和一个或多个处理器。该存储器与处理器耦合。其中,上述存储器中还存储有计算机程序代码,该计算机程序代码包括计算机指令。当计算机指令被处理器执行时,电子设备可执行上述方法实施例中手机100执行的各个功能或者步骤。该电子设备的结构可以参考图5所示的手机100的结构。
本申请实施例还提供一种计算机可读存储介质,该计算机存储介质包括计算机指令,当所述计算机指令在上述电子设备上运行时,使得该电子设备执行上述方法实施例中手机100执行的各个功能或者步骤。
本申请实施例还提供一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行上述方法实施例中手机100执行的各个功能或者步骤。该计算机可以是上述电子设备(如手机100)。
本申请公开的机制的各实施例可以被实现在硬件、软件、固件或这些实现方法的组合中。本申请的实施例可实现为在可编程系统上执行的计算机程序或程序代码,该可编程系统包括至少一个处理器、存储系统(包括易失性和非易失性存储器和/或存储元件)、至少一个输入设备以及至少一个输出设备。
可将程序代码应用于输入指令,以执行本申请描述的各功能并生成输出信息。可以按已知方式将输出信息应用于一个或多个输出设备。为了本申请的目的,处理系统包括具有诸如例如数字信号处理器(Digital Signal Processor,DSP)、微控制器、专用集成电路(Application Specific Integrated Circuit,ASIC)或微处理器之类的处理器的任何系统。
程序代码可以用高级程序化语言或面向对象的编程语言来实现,以便与处理系统通信。在需要时,也可用汇编语言或机器语言来实现程序代码。事实上,本申请中描述的机制不限于任何特定编程语言的范围。在任一情形下,该语言可以是编译语言或解释语言。
在一些情况下,所公开的实施例可以以硬件、固件、软件或其任何组合来实现。所公开的实施例还可以被实现为由一个或多个暂时或非暂时性机器可读(例如,计算机可读)存储介质承载或存储在其上的指令,其可以由一个或多个处理器读取和执行。例如,指令可以通过网络或通过其他计算机可读存储介质分发。因此,机器可读存储介质可以包括用于以机器(例如,计算机)可读的形式存储或传播信息的任何机制,包括但不限于,软盘、光盘、光碟、只读存储器(CD-ROMs)、磁光盘、只读存储器(Read Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、可擦除可编程只读存储器(Erasable ProgrammableRead Only Memory,EPROM)、电可擦除可编程只读存储器(Electrically ErasableProgrammable Read-Only Memory,EEPROM)、磁卡或光卡、闪存、或用于基于因特网以电、光、声或其他形式的传播信号来传播信息(例如,载波、红外信号数字信号等)的有形的机器可读存储器。因此,机器可读存储介质包括适合于以机器(例如计算机)可读的形式存储或传播电子指令或信息的任何类型的机器可读存储介质。
在附图中,可以以特定布置和/或顺序示出一些结构或方法特征。 然而,应该理解,可能不需要这样的特定布置和/或排序。而是,在一些实施例中,这些特征可以以不同于说明性附图中所示的方式和/或顺序来布置。另外,在特定图中包括结构或方法特征并不意味着暗示在所有实施例中都需要这样的特征,并且在一些实施例中,可以不包括这些特征或者可以与其他特征组合。
需要说明的是,本申请各设备实施例中提到的各单元/模块都是逻辑单元/模块,在物理上,一个逻辑单元/模块可以是一个物理单元/模块,也可以是一个物理单元/模块的一部分,还可以以多个物理单元/模块的组合实现,这些逻辑单元/模块本身的物理实现方式并不是最重要的,这些逻辑单元/模块所实现的功能的组合才是解决本申请所提出的技术问题的关键。此外,为了突出本申请的创新部分,本申请上述各设备实施例并没有将与解决本申请所提出的技术问题关系不太密切的单元/模块引入,这并不表明上述设备实施例并不存在其它的单元/模块。
需要说明的是,在本专利的示例和说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
虽然通过参照本申请的某些优选实施例,已经对本申请进行了图示和描述,但本领域的普通技术人员应该明白,可以在形式上和细节上对其作各种改变,而不偏离本申请的精神和范围。

Claims (12)

1.一种播放视频的方法,其特征在于,所述方法包括:
接收第一播放操作;其中,所述第一播放操作用于触发电子设备播放第一视频,所述第一视频包括N帧图像,N≥2,N为整数;
响应于所述第一播放操作,获取所述第一视频中第i帧图像的编码信息;其中,i依次在{1,2,……,N}中取值,所述第i帧图像的编码信息包括所述第i帧图像的帧类型,所述帧类型为I帧、P帧或者B帧中的任一种;所述第i帧图像的帧类型为所述P帧或者所述B帧的情况下,所述第i帧图像的编码信息还包括所述第i帧图像的参考帧信息;
若所述第i帧图像的帧类型为所述I帧,则检测所述第i帧图像的亮度信息;
若所述第i帧图像的帧类型为所述P帧或者所述B帧,则将所述第i帧图像的参考帧的亮度信息作为所述第i帧图像的亮度信息;
根据所述第i帧图像的亮度信息,对所述第i帧图像的亮度信息进行图像增强;
播放所述第一视频中经过图像增强后的第i帧图像。
2.根据权利要求1所述的方法,其特征在于,所述第i帧图像包括多个宏块;所述第i帧图像的参考帧信息包括:所述第i帧图像中每个宏块的宏块信息,所述宏块的宏块信息包括所述宏块的编码类型,所述宏块的编码类型为帧内编码或者帧间编码;
其中,所述若所述第i帧图像的帧类型为所述P帧或者所述B帧,则将所述第i帧图像的参考帧的亮度信息作为所述第i帧图像的亮度信息,包括:
若所述第i帧图像的帧类型为所述P帧或者所述B帧,计算第一占比;其中,所述第一占比为所述第i帧图像中编码类型为所述帧间编码的宏块的数量在所述多个宏块总数中的占比;
若所述第一占比大于预设占比阈值,则将所述第i帧图像的参考帧的亮度信息作为所述第i帧图像的亮度信息。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
若所述第一占比小于所述预设占比阈值,则检测所述第i帧图像的亮度信息。
4.根据权利要求2或3所述的方法,其特征在于,所述第i帧图像包括多个参考帧,所述多个参考帧是所述第i帧图像的多个宏块的参考帧,所述多个宏块中部分或全部宏块的参考帧不同;
所述将所述第i帧图像的参考帧的亮度信息作为所述第i帧图像的亮度信息,包括:
计算多个第二占比;其中,所述多个第二占比与所述多个参考帧一一对应,每个第二占比为所述多个参考帧中一个参考帧对应所述第i帧图像中宏块的数量在所述多个宏块总数中的占比;
将所述多个第二占比中最大的第二占比所对应的参考帧的亮度信息作为所述第i帧图像的亮度信息。
5.根据权利要求2或3所述的方法,其特征在于,在所述宏块的编码类型为所述帧间编码的情况下,所述宏块的宏块信息还包括:所述宏块的参考帧标识和参考宏块标识;
所述第i帧图像包括多个参考帧,所述多个参考帧是所述第i帧图像的多个宏块的参考帧,所述多个宏块中部分或全部宏块的参考帧不同;
所述将所述第i帧图像的参考帧的亮度信息作为所述第i帧图像的亮度信息,包括:
将所述第i帧图像中编码类型为所述帧间编码的宏块的参考帧中参考宏块的亮度信息,以及所述第i帧图像中编码类型为所述帧内编码的宏块的亮度信息,组成所述第i帧图像的亮度信息。
6.根据权利要求2或3所述的方法,其特征在于,所述第i帧图像包括多个参考帧,所述多个参考帧是所述第i帧图像的多个宏块的参考帧,所述多个宏块中部分或全部宏块的参考帧不同;
所述将所述第i帧图像的参考帧的亮度信息作为所述第i帧图像的亮度信息,包括:
将所述第i帧图像的多个参考帧的亮度信息的平均值,作为所述第i帧图像的亮度信息。
7.根据权利要求1所述的方法,其特征在于,所述根据所述第i帧图像的亮度信息,对所述第i帧图像的亮度信息进行图像增强,包括:
若所述第i帧图像的亮度信息小于预设亮度阈值,则对所述第i帧图像的亮度信息进行图像增强。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取到所述第i帧图像的亮度信息后,将所述第i帧图像的亮度信息保存在图像信息库中;
所述根据所述第i帧图像的亮度信息,对所述第i帧图像的亮度信息进行图像增强,包括:
从所述图像信息库获取第i帧图像的亮度信息,并根据所述第i帧图像的亮度信息,对所述第i帧图像的亮度信息进行图像增强。
9.根据权利要求1所述的方法,其特征在于,在所述根据所述第i帧图像的亮度信息,对所述第i帧图像的亮度信息进行图像增强之后,所述方法还包括:
基于所述第i帧图像的亮度信息和所述第i帧图像的相邻帧的亮度信息,对所述第i帧图像的亮度进行平滑处理。
10.根据权利要求1所述的方法,其特征在于,所述方法还包括:
采用所述N帧图像中经过图像增强后的前n帧图像,替换所述第一视频中的前n帧图像,得到保存替换后的第一视频。
11.一种电子设备,其特征在于,包括存储器和一个或多个处理器;所述存储器用于存储代码指令;所述处理器用于运行所述代码指令,使得所述电子设备执行如权利要求1-10中任一项所述的方法。
12.一种计算机可读存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1-10中任一项所述的方法。
CN202211636351.2A 2022-12-20 2022-12-20 一种播放视频的方法、电子设备和计算机可读存储介质 Active CN115623215B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211636351.2A CN115623215B (zh) 2022-12-20 2022-12-20 一种播放视频的方法、电子设备和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211636351.2A CN115623215B (zh) 2022-12-20 2022-12-20 一种播放视频的方法、电子设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN115623215A CN115623215A (zh) 2023-01-17
CN115623215B true CN115623215B (zh) 2023-04-18

Family

ID=84880706

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211636351.2A Active CN115623215B (zh) 2022-12-20 2022-12-20 一种播放视频的方法、电子设备和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN115623215B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103226822A (zh) * 2013-05-15 2013-07-31 清华大学 医疗影像拼接方法
CN104602028A (zh) * 2015-01-19 2015-05-06 宁波大学 一种立体视频b帧整帧丢失错误隐藏方法
CN106713640A (zh) * 2016-12-27 2017-05-24 努比亚技术有限公司 一种亮度调节方法和设备
CN108234914A (zh) * 2016-12-22 2018-06-29 中科创达软件股份有限公司 一种录像视频文件生成方法和装置
CN111182351A (zh) * 2020-03-17 2020-05-19 惠州Tcl移动通信有限公司 一种视频播放处理方法、装置、存储介质及终端
CN113395599A (zh) * 2020-12-03 2021-09-14 腾讯科技(深圳)有限公司 一种视频处理方法、装置、电子设备及介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2187337A1 (en) * 2008-11-12 2010-05-19 Sony Corporation Extracting a moving mean luminance variance from a sequence of video frames
KR101468418B1 (ko) * 2012-01-13 2014-12-03 삼성메디슨 주식회사 초음파 영상 처리 방법 및 장치

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103226822A (zh) * 2013-05-15 2013-07-31 清华大学 医疗影像拼接方法
CN104602028A (zh) * 2015-01-19 2015-05-06 宁波大学 一种立体视频b帧整帧丢失错误隐藏方法
CN108234914A (zh) * 2016-12-22 2018-06-29 中科创达软件股份有限公司 一种录像视频文件生成方法和装置
CN106713640A (zh) * 2016-12-27 2017-05-24 努比亚技术有限公司 一种亮度调节方法和设备
CN111182351A (zh) * 2020-03-17 2020-05-19 惠州Tcl移动通信有限公司 一种视频播放处理方法、装置、存储介质及终端
CN113395599A (zh) * 2020-12-03 2021-09-14 腾讯科技(深圳)有限公司 一种视频处理方法、装置、电子设备及介质

Also Published As

Publication number Publication date
CN115623215A (zh) 2023-01-17

Similar Documents

Publication Publication Date Title
US10855984B2 (en) Image processing apparatus and method
WO2020097888A1 (zh) 视频处理方法、装置、电子设备及计算机可读存储介质
US10587874B2 (en) Real-time video denoising method and terminal during coding, and non-volatile computer readable storage medium
KR101836027B1 (ko) 일정 품질 비디오 코딩
TWI723849B (zh) 圖像解碼裝置、方法及電腦可讀取記錄媒體
US20110026591A1 (en) System and method of compressing video content
EP2534643A1 (en) Method and apparatus for providing multi-threaded video decoding
TW201907722A (zh) 圖像處理裝置及方法
US11039145B2 (en) Image prediction method and apparatus
US8705627B2 (en) Image processing apparatus and method
KR102534443B1 (ko) 비디오 증강 제어 방법, 장치, 전자 기기 및 저장 매체
CN112714320B (zh) 一种解码方法、解码设备及计算机可读存储介质
CN113099233A (zh) 视频编码方法、装置、视频编码设备及存储介质
KR20230039723A (ko) 프로젝션 데이터 프로세싱 방법 및 장치
CN113709504B (zh) 图像处理方法、智能终端及可读存储介质
US20130058416A1 (en) Image processing apparatus and method
CN115623215B (zh) 一种播放视频的方法、电子设备和计算机可读存储介质
CN113542739A (zh) 图像编码方法及装置、图像解码方法及装置、介质、设备
WO2020181540A1 (zh) 一种视频处理方法、装置、编码设备及解码设备
CN117939313A (zh) Hdr视频生成方法以及装置
CN117061773A (zh) 一种视频编码的预分析处理方法、系统、设备及存储介质
JPH11234638A (ja) 画像符号化装置及び方法並びに記憶媒体
CN116489352A (zh) 视频编码方法、装置、电子设备及存储介质
CN114697658A (zh) 编解码方法、电子设备、通信系统以及存储介质
JPWO2014122708A1 (ja) 画面符号化装置、画面復号装置、画面符号化伝送システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant