CN115442554A - 一种录像机、视频数据处理方法、装置 - Google Patents
一种录像机、视频数据处理方法、装置 Download PDFInfo
- Publication number
- CN115442554A CN115442554A CN202211038980.5A CN202211038980A CN115442554A CN 115442554 A CN115442554 A CN 115442554A CN 202211038980 A CN202211038980 A CN 202211038980A CN 115442554 A CN115442554 A CN 115442554A
- Authority
- CN
- China
- Prior art keywords
- video data
- size
- display window
- window
- image size
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0125—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards being a high definition standard
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本申请实施例提供了一种录像机、视频数据处理方法、装置,应用于解码显示技术领域。该录像机包括:包括解码模块和缩放模块;解码模块,用于在接收到视频流信号后,利用视频流信号,解码生成第一视频数据和第二视频数据,并将第一视频数据写入预设的第一存储位置,以及将第二视频数据写入预设的第二存储位置;缩放模块,用于基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,选择从第一存储位置或第二存储位置进行视频数据读取;基于所读取的视频数据,确定图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据;将第三视频数据写入第三存储位置。通过本方案,可以提升预览显示效果。
Description
技术领域
本申请涉及解码显示技术领域,特别是涉及一种录像机、视频数据处理方法、装置。
背景技术
预览显示业务是DVR(Digital Video Recorder,硬盘录像机)、NVR(NetworkVideo Recorder,网络视频录像机)等录像机提供的功能业务,用于在显示窗口中实时显示摄像机所采集视频流信号对应的视频数据。
相关技术中,利用录像机中解码模块对摄像机采集的视频流信号进行解码处理,得到全尺寸的视频数据,进而录像机中的缩放模块,例如VPE(Video Processing Engine,视频处理引擎),将全尺寸的视频数据缩放至窗口尺寸的视频数据,进而在显示窗口中播放缩放后的视频数据。其中,上述窗口尺寸为显示窗口的尺寸。
由于缩放模块需要针对全尺寸的视频数据进行缩放,而缩放模块的性能及带宽有限,导致预览显示容易出现卡顿、丢帧等情况,预览显示效果不佳。
发明内容
本申请实施例的目的在于提供一种录像机、视频数据处理方法、装置,以提升预览显示效果。具体技术方案如下:
第一方面,本申请实施例提供一种录像机,所述录像机包括解码模块和缩放模块;
所述解码模块,用于在接收到视频流信号后,利用所述视频流信号,解码生成第一视频数据和第二视频数据,并将所述第一视频数据写入预设的第一存储位置,以及将所述第二视频数据写入预设的第二存储位置;其中,所述第一视频数据为具有指定图像尺寸的视频数据,所述第二视频数据为具有目标图像尺寸的视频数据,所述指定图像尺寸小于所述目标图像尺寸,所述目标图像尺寸为所述视频流信号对应的原始图像尺寸;
所述缩放模块,用于基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,选择从所述第一存储位置或所述第二存储位置进行视频数据读取,其中,所述指定显示窗口为针对所述视频流信号所配置的、用于预览显示的显示窗口;基于所读取的视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据;将所述第三视频数据写入第三存储位置,其中,所述第三存储位置为用于存储所述指定显示窗口待显示的视频数据的存储位置。
可选的,所述缩放模块基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,选择从所述第一存储位置或所述第二存储位置进行视频数据读取,包括:
确定所述指定显示窗口的窗口尺寸与所述原始图像尺寸的第一比值;
若所述第一比值小于第一比例阈值,则从所述第一存储位置中读取所述第一视频数据,反之,从所述第二存储位置中读取所述第二视频数据。
可选的,所述解码模块,还用于获取针对所述视频流信号的目标压缩倍数;
所述解码模块,具体用于基于所述目标压缩倍数,将所述视频流信号解码为第一视频数据。
可选的,所述目标压缩倍数为基于第二比值所确定的,所述第二比值为所述窗口尺寸与所述原始图像尺寸之间的比值。
可选的,所述目标压缩倍数为基于预先建立的比例阈值区间与压缩倍数的对应关系,所确定的与目标比例阈值区间对应的压缩倍数;所述目标比例阈值区间为预先划分的多个比例阈值区间中,所述第二比值所在的比例阈值区间。
可选的,所述比例阈值区间与压缩倍数的对应关系中,每一比例阈值区间对应的压缩倍数为:大于该比例阈值区间的最小比例阈值,且小于或等于该比例阈值区间的最大比例阈值的比例阈值。
可选的,所述多个比例阈值区间包括:
小于或等于第二比例阈值的比例阈值区间;
大于所述第二比例阈值,且小于或等于第三比例阈值的比例阈值区间,其中,所述第二比例阈值小于所述第三比例阈值;
大于所述第三比例阈值的比例阈值区间。
可选的,所述目标压缩倍数为在所述指定显示窗口满足指定条件时所获取的;
其中,所述指定条件包括:
所述指定显示窗口为小尺寸显示窗口,其中,所述小尺寸显示窗口为与全屏窗口的窗口尺寸的第三比值小于第四比例阈值的显示窗口;和/或,
所述指定显示窗口为指定尺寸的显示窗口。
可选的,所述缩放模块基于所读取的视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,包括:
若所读取的视频数据的图像尺寸与所述指定显示窗口的窗口尺寸相匹配,则将所读取的视频数据,作为第三视频数据;
若所读取的视频数据的图像尺寸与所述指定显示窗口的窗口尺寸不匹配,对所读取的视频数据进行缩放处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据。
可选的,所述若所读取的视频数据的图像尺寸与所述指定显示窗口的窗口尺寸不匹配,对所读取的视频数据进行缩放处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,包括:
若所读取的视频数据的图像尺寸大于所述指定显示窗口的窗口尺寸,对所读取的视频数据进行压缩处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据;
若所读取的视频数据的图像尺寸小于所述指定显示窗口的窗口尺寸,对所读取的视频数据进行放大处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据。第二方面,本申请实施例提供一种视频数据处理方法,所述方法包括:
在接收到视频流信号后,利用所述视频流信号,解码生成第一视频数据和第二视频数据,其中,所述第一视频数据为具有指定图像尺寸的视频数据,所述第二视频数据为具有目标图像尺寸的视频数据,所述指定图像尺寸小于所述目标图像尺寸,所述目标图像尺寸为所述视频流信号对应的原始图像尺寸;
基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,从所述第一视频数据和所述第二视频数据中,确定出目标视频数据;
基于所述目标视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,其中,所述指定显示窗口为针对所述视频流信号所配置的、用于预览显示的显示窗口;
将所述第三视频数据写入第三存储位置,其中,所述第三存储位置为用于存储所述指定显示窗口待显示的视频数据的存储位置。
可选的,所述基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,从所述第一视频数据和所述第二视频数据中,确定出目标视频数据,包括:
确定所述指定显示窗口的窗口尺寸与所述原始图像尺寸的第一比值;
若所述第一比值小于第一比例阈值,则确定所述第一视频数据为目标视频数据,反之,确定所述第二视频数据为目标视频数据。
可选的,在所述利用所述视频流信号,解码生成第一视频数据之前,所述方法还包括:
获取针对所述视频流信号的目标压缩倍数;
所述利用所述视频流信号,解码生成第一视频数据,包括:
基于所述目标压缩倍数,将所述视频流信号解码为第一视频数据。
可选的,所述目标压缩倍数为基于第二比值所确定的,所述第二比值为所述窗口尺寸与所述原始图像尺寸之间的比值。
可选的,所述目标压缩倍数为基于预先建立的比例阈值区间与压缩倍数的对应关系,所确定的与目标比例阈值区间对应的压缩倍数;所述目标比例阈值区间为预先划分的多个比例阈值区间中,所述第二比值所在的比例阈值区间。
可选的,所述比例阈值区间与压缩倍数的对应关系中,每一比例阈值区间对应的压缩倍数为:大于该比例阈值区间的最小比例阈值,且小于或等于该比例阈值区间的最大比例阈值的比例阈值。
可选的,所述多个比例阈值区间包括:
小于或等于第二比例阈值的比例阈值区间;
大于所述第二比例阈值,且小于或等于第三比例阈值的比例阈值区间,其中,所述第二比例阈值小于所述第三比例阈值;
大于所述第三比例阈值的比例阈值区间。
可选的,所述目标压缩倍数为在所述指定显示窗口满足指定条件时所获取的;
其中,所述指定条件包括:
所述指定显示窗口为小尺寸显示窗口,其中,所述小尺寸显示窗口为与全屏窗口的窗口尺寸的第三比值小于第四比例阈值的显示窗口;和/或,
所述指定显示窗口为指定尺寸的显示窗口。
可选的,所述基于所述目标视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,包括:
若所述目标视频数据的图像尺寸与所述指定显示窗口的窗口尺寸相匹配,则将所述目标视频数据,作为第三视频数据;
若所述目标视频数据的图像尺寸与所述指定显示窗口的窗口尺寸不匹配,对所述目标视频数据进行缩放处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据。
可选的,所述若所述目标视频数据的图像尺寸与所述指定显示窗口的窗口尺寸不匹配,对所述目标视频数据进行缩放处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,包括:
若所述目标视频数据的图像尺寸大于所述指定显示窗口的窗口尺寸,对所述目标视频数据进行压缩处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据;
若所述目标视频数据的图像尺寸小于所述指定显示窗口的窗口尺寸,对所述目标视频数据进行放大处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据。
第三方面,本申请实施例提供一种视频数据处理装置,所述装置包括:
数据解码模块,用于在接收到视频流信号后,利用所述视频流信号,解码生成第一视频数据和第二视频数据,其中,所述第一视频数据为具有指定图像尺寸的视频数据,所述第二视频数据为具有目标图像尺寸的视频数据,所述指定图像尺寸小于所述目标图像尺寸,所述目标图像尺寸为所述视频流信号对应的原始图像尺寸;
数据确定模块,用于基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,从所述第一视频数据和所述第二视频数据中,确定出目标视频数据;
数据缩放模块,用于基于所述目标视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,其中,所述指定显示窗口为针对所述视频流信号所配置的、用于预览显示的显示窗口;
数据写入模块,用于将所述第三视频数据写入第三存储位置,其中,所述第三存储位置为用于存储所述指定显示窗口待显示的视频数据的存储位置。
第四方面,本申请实施例提供一种录像机,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,所述处理器被所述机器可执行指令促使:实现第二方面任一所述的方法步骤。
第五方面,本申请实施例提供一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现第二方面任一所述的方法步骤。
本申请实施例有益效果:
本申请实施例提供的一种录像机,在进行预览显示的过程中,解码模块可以利用视频流信号同时解码生成第一视频数据和第二视频数据,同时缩放模块可以基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,选择从第一存储位置或第二存储位置进行视频数据读取,即缩放模块可以基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,从第一视频数据和第二视频数据中动态地选择一个视频数据作为后续用于缩放的视频数据。这样,在缩放模块选择了第一视频数据的情况下,由于第一视频数据的图像尺寸小于第二视频数据的图像尺寸,即第一视频数据的数据量小于全尺寸的视频数据,从而减小了缩放模块从第一存储位置读取视频数据时所需消耗的带宽,且由于第一视频数据的数据量更小,使得缩放模块处理第一视频数据时所需消耗的性能资源更少,从而可以减少预览显示时出现的卡顿、丢帧等情况,提高了预览显示效果。
当然,实施本申请的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的实施例。
图1为传统解码预览策略的示意图;
图2为本申请实施例所提供的一种录像机的结构示意图;
图3为本申请实施例所提供的一种解码模块输出视频数据的示意图;
图4为本申请实施例所提供的一种缩放模块读取视频数据的示意图;
图5a为本申请实施例所提供的一种6画面分屏示意图;
图5b为本申请实施例所提供的一种8画面分屏示意图;
图6为本申请实施例所提供的一种视频数据处理方法的流程图;
图7为本申请实施例所提供的一种视频数据处理装置的结构示意图;
图8为本申请实施例所提供的另一种录像机的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员基于本申请所获得的所有其他实施例,都属于本申请保护的范围。
在安防等行业中,往往需要在目标场所内部署多路摄像机,并将各路摄像机接入录像机,以利用录像机对每一路摄像机所采集的视频数据信号进行处理,得到用于存储、传输或预览显示的视频数据。其中,预览显示指可以在显示器的显示窗口中实时显示摄像机所采集视频流信号(也称码流信号或码流数据)对应的视频数据。
具体而言,针对任意一路摄像机,当针对该路摄像机采集的视频流信号配置预览显示时,录像机中的解码模块可以将摄像机采集的视频流信号解码为视频数据,进而利用录像机中的缩放模块对视频数据进行缩放处理,得到图像尺寸(也称图像分辨率)与显示窗口的窗口尺寸(也称窗口分辨率)一致的视频数据,从而可以在显示窗口中播放缩放处理后的视频数据。
相关预览显示的技术中,用于缩放显示的图像尺寸都是视频流信号对应的原始图像尺寸,也就是说,解码模块对视频流信号解码得到视频数据的图像尺寸为原始图像尺寸(也称全尺寸),进而缩放模块需要将原始图像尺寸的视频数据缩放到显示窗口的窗口尺寸的视频数据。对于录像机而言,其包含的缩放模块的性能以及带宽有限,因此,当缩放模块对原始图像尺寸的视频数据进行处理时,需要占用较多的带宽和缩放模块的性能,进而导致预览显示出现卡顿、丢帧等情况,使得预览显示的效果较差。
上述缩放模块所占用的带宽可以利用缩放模块输入及输出的视频数据的图像尺寸的和表示,例如缩放模块输入的视频数据的图像尺寸为1920×1080,输出的视频数据的图像尺寸为640×360,则缩放模块所占用的带宽为:1920×1080+640×360。缩放模块所消耗的性能可以利用缩放模块输入及输出的视频数据中,图像尺寸最大的视频数据所具有的图像尺寸作为缩放模块的性能消耗,仍以前述示例说明,缩放模块所消耗的性能为处理1920×1080的图像尺寸的视频数据所需的性能。
示例性,如图1所示,为传统解码预览策略的示意图,包括单画面分屏显示窗口场景和多画面分屏显示窗口场景。其中,该多画面分屏显示窗口为9画面分屏显示窗口。
上述单画面分屏显示窗口指在显示器中仅预览显示一路视频数据,单画面分屏显示窗口场景下,显示器中仅有包含单个显示窗口,其窗口尺寸为1920×1080。解码模块输入的视频流信号对应的原始图像尺寸为2560×1440,解码模块对视频流信号进行解码处理后,得到图像尺寸仍为2560×1440的视频数据,进而缩放模块获取该图像尺寸为2560×1440的视频数据,并对该视频数据进行缩放处理,得到图像尺寸为1920×1080的视频数据,以供显示窗口进行播放。此时,缩放模块所占用的带宽为2560×1440+1920×1080,所消耗的性能为处理2560×1440的图像尺寸的视频数据所需的性能。
上述9画面分屏显示窗口指显示器中同时预览显示9路视频数据,9画面分屏显示窗口场景下,显示器中包含9个显示窗口,每一个显示窗口用于显示一路视频数据,其中9个显示窗口中每一个显示窗口的窗口尺寸为640×360。针对任一显示窗口,解码模块输入的该显示窗口对应的视频流信号所对应的原始图像尺寸为2560×1440,解码模块对视频流信号进行解码处理后,得到图像尺寸仍为2560×1440的视频数据,进而缩放模块获取该图像尺寸为2560×1440的视频数据,并对该视频数据进行缩放处理,得到图像尺寸为640×360的视频数据,以供该显示窗口进行播放。此时,针对每一路视频数据,缩放模块所占用的带宽为2560×1440+640×360,所消耗的性能为处理2560×1440的图像尺寸的视频数据所需的性能。由于9个显示窗口中,针对每一显示窗口所需显示的视频数据,缩放模块所占用的带宽均为2560×1440+640×360,所消耗的性能均为处理2560×1440的图像尺寸的视频数据所需的性能,从而针对9个显示窗口对应的视频数据,缩放模块所消耗的缩放模块性能以及所占用的缩放模块的带宽往往大于缩放模块最大承受能力,从而导致不能有效地对于各路视频数据进行处理,导致预先显示出现丢帧、显示卡顿、异常等情况,预览显示的效果较差。
为了提升预览显示效果,本申请实施例提供了一种录像机、视频数据处理方法、装置。
其中,本申请实施例所提供的录像机可以为DVR(Digital Video Recorder,硬盘录像机)、NVR(Network Video Recorder,网络视频录像机)等任意能够实现预览显示的电子设备。其中,DVR是一套进行图像存储处理的计算机系统,具有对图像/语音进行长时间录像、录音、远程监视和控制的功能。NVR多用于安防行业后端产品,其能够接入多路网络摄像机(IP Camera,简称IPC),并对各路网络摄像机传输过来的视频流信号进行解码显示、录像存储、网传发送等。
本申请实施例所提供的录像机,可以包括解码模块和缩放模块;
解码模块,用于在接收到视频流信号后,利用视频流信号,解码生成第一视频数据和第二视频数据,并将第一视频数据写入预设的第一存储位置,以及将第二视频数据写入预设的第二存储位置;其中,第一视频数据为具有指定图像尺寸的视频数据,第二视频数据为具有目标图像尺寸的视频数据,指定图像尺寸小于目标图像尺寸,目标图像尺寸为视频流信号对应的原始图像尺寸;
缩放模块,用于基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,选择从第一存储位置或第二存储位置进行视频数据读取,其中,指定显示窗口为针对视频流信号所配置的、用于预览显示的显示窗口;基于所读取的视频数据,确定图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据;将第三视频数据写入第三存储位置,其中,第三存储位置为用于存储指定显示窗口待显示的视频数据的存储位置。
本申请上述方案中,在进行预览显示的过程中,解码模块可以基于视频流信号同时解码生成第一视频数据和第二视频数据,同时缩放模块可以基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,选择从第一存储位置或第二存储位置进行视频数据读取,即缩放模块可以基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,从第一视频数据和第二视频数据中动态地选择一个视频数据作为后续用于缩放的视频数据。这样,在缩放模块选择了第一视频数据的情况下,由于第一视频数据的图像尺寸小于第二视频数据的图像尺寸,即第一视频数据的数据量小于全尺寸的视频数据,从而减小了缩放模块从第一存储位置读取视频数据时所需消耗的带宽,且由于第一视频数据的数据量更小,使得缩放模块处理第一视频数据时所需消耗的性能资源更少,从而可以减少预览显示时出现的卡顿、丢帧等情况,提高了预览显示效果。
下面将结合说明书附图,对本申请实施例所提供的录像机进行详尽的阐述。
如图2所示,本申请实施例提供一种录像机,该录像机包括解码模块201和缩放模块202;
解码模块201,用于在接收到视频流信号后,利用视频流信号,解码生成第一视频数据和第二视频数据,并将第一视频数据写入预设的第一存储位置,以及将第二视频数据写入预设的第二存储位置;其中,第一视频数据为具有指定图像尺寸的视频数据,第二视频数据为具有目标图像尺寸的视频数据,指定图像尺寸小于目标图像尺寸,目标图像尺寸为视频流信号对应的原始图像尺寸;
缩放模块202,用于基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,选择从第一存储位置或第二存储位置进行视频数据读取,其中,指定显示窗口为针对视频流信号所配置的、用于预览显示的显示窗口;基于所读取的视频数据,确定图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据;将第三视频数据写入第三存储位置,其中,第三存储位置为用于存储指定显示窗口待显示的视频数据的存储位置。
其中,解码模块201可以是用于实现解码功能的功能的软件、硬件或者软硬件的结合,一种实现方式中,上述解码模块201可以为VDEC(Video Decoder,视频解码)单元,缩放模块202可以是用于实现缩放功能的软件、硬件或者软硬件的结合,一种实现方式中,上述缩放模块202可以为VPE(Video Processing Engine,视频处理引擎),其中,VPE可以具有视频或者图像缩放功能。
与相关技术中解码模块仅将视频流信号解码为全尺寸的视频数据不同的是,本申请实施例中,解码模块201在接收到视频流信号之后,可以利用视频流信号,解码生成第一视频数据和第二视频数据,例如解码模块201在接收到视频流信号之后,可以对视频流信号进行解码处理,得到第一视频数据和第二视频数据,可见本申请实施例中,解码模块201可以解码得到两路视频数据,分别为具有指定图像尺寸的第一视频数据,以及具有目标图像尺寸的第二视频数据。
其中,目标图像尺寸为视频流信号对应的原始图像尺寸,指定图像尺寸小于目标图像尺寸,也就是说,本申请实施例中,指定图像尺寸可以为小于目标图像尺寸的任意图像尺寸。本申请实施例中,解码模块201解码所得到的第二视频数据为全尺寸的视频数据,解码模块201解码所得到的第一视频数据是图像尺寸比全尺寸的视频数据小的视频数据,其意味着,在对第一视频数据进行传输、处理过程中,所占用的带宽以及所消耗的性能更小。
可选的,为了确保指定显示窗口内视频显示的效果,一种实现方式中,上述指定图像尺寸还可以大于或等于指定显示窗口的窗口尺寸。
示例性的,如图3所示,本申请实施例提供一种解码模块输出视频数据的示意图。解码模块201所接收的视频流信号对应的图像尺寸为2560×1440,解码模块201对其进行解码处理后,分别得到图像尺寸为1280×720的第一视频数据,以及图像尺寸为2560×1440的第二视频数据。此示例中指定图像尺寸为1280×720,目标图像尺寸为2560×1440,指定显示窗口的窗口尺寸小于或等于1280×720。
需要说明的是,上述视频流信号可以是一种类型的数字信号,视频流信号可以是模拟信号经模数转换后得到的数字视频流,例如BT656视频流或BT1120视频流。其中,BT656定义了一个并行的硬件接口,其用于传送一路4:2:2的YCbCr的数字视频流,YCbCr是色彩空间的一种,通常用于影片中的影像连续处理,或是数字摄影系统中,Y为亮度(luminance),而Cb和Cr则为蓝色和红色的浓度偏移量成份。而BT1120是HDTV(High DefinitionTelevision,高清晰度电视)演播室信号数字接口,能够把4:4:4和4:4:2的视频数据编码成内嵌有同步定时基准码的视频数据流。上述第一视频数据或第二视频数据可以为为YUV(明亮度、色度和浓度)类型的视频数据,例如YUV420格式的数据、YUV422格式的数据等,或者,第一视频数据或第二视频数据也可以为RGB(红绿蓝)格式的视频数据。当然,第一视频数据或第二视频数据并不局限于YUV类型或RGB格式。
在解码模块201解码得到第一视频数据以及第二视频数据之后,解码模块201可以将第一视频数据写入预设的第一存储位置,以及将第二视频数据写入预设的第二存储位置。其中,第一存储位置可以为预先指定的第一内存区域,同理,第二存储位置可以为预先指定的第二内存区域,其中内存区域可以为DDR(Double Data Rate,双倍数据速率)存储器等内存存储器的存储区域。
由于解码模块201解码得到了两路视频数据,而进行预览显示时仅需要一路视频数据即可,因此,本申请实施例中,缩放模块202需要从上述第一视频数据以及第二视频数据中选取一路视频数据进行缩放处理。具体的,缩放模块202可以基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,选择从第一存储位置或第二存储位置进行视频数据读取。
其中,指定显示窗口为针对视频流信号所配置的、用于预览显示的显示窗口,简单而言,该显示窗口即为用于播放对该视频流信号进行解码、缩放处理后所得到视频数据的显示窗口,该显示窗口即可以为单画面分屏显示窗口场景下的单个显示窗口,与可以为多画面显示窗口场景下的多个显示窗口中的一个显示窗口,例如9画面显示窗口场景下9个显示窗口中的一个显示窗口。
由于指定显示窗口为最终用于播放视频数据的显示窗口,因此指定显示窗口的窗口尺寸即为缩放模块202对输入的视频数据进行缩放处理后所得到的视频数据的图像尺寸。例如,指定显示窗口的窗口尺寸为1280×720,则缩放模块202对输入的视频数据进行缩放处理后所得到的视频数据的图像尺寸应当也为1280×720。
而原始图像尺寸即为第二视频数据的目标图像尺寸,因此,当指定显示窗口的窗口尺寸与原始图像尺寸差异较小时,缩放模块202可以选用第二视频数据进行后续的处理,即缩放模块202可以从第二存储位置读取第二视频数据,并对第二视频数据进行缩放处理,以得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据。而当指定显示窗口的窗口尺寸与原始图像尺寸差异较大时,缩放模块202可以选用第一视频数据进行后续的处理,即缩放模块202可以从第一存储位置读取第一视频数据,并对第一视频数据进行缩放处理,以得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据。
可选的,上述指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系可以为指定显示窗口的窗口尺寸与原始图像尺寸之间的差值或比值。
若指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系为指定显示窗口的窗口尺寸与原始图像尺寸之间的差值,由于图像尺寸或窗口尺寸包括长和宽两个参数,指定显示窗口的窗口尺寸与原始图像尺寸之间的差值可以为指定显示窗口的长与原始图像尺寸的长之间的第一差值,或者指定显示窗口的宽与原始图像尺寸的宽之间的第二差值,或者第一差值与第二差值的均值、和值等,其中,第一差值与第二差值的和值为第一差值与第二差值之和。
此时,当指定显示窗口的窗口尺寸与原始图像尺寸之间的差值小于预设的差值阈值时,缩放模块202可以从第二存储位置读取第二视频数据,并对第二视频数据进行缩放处理,以得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据。反之,当指定显示窗口的窗口尺寸与原始图像尺寸之间的差值大于或等于预设的差值阈值时,缩放模块202可以从第一存储位置读取第一视频数据,并对第一视频数据进行缩放处理,以得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据。其中,预设的差值阈值可以基于实际需求和经验所确定。
若指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系为指定显示窗口的窗口尺寸与原始图像尺寸之间的比值,则缩放模块202可以确定指定显示窗口的窗口尺寸与原始图像尺寸的第一比值,若第一比值小于第一比例阈值,则从第一存储位置中读取第一视频数据,反之,从第二存储位置中读取第二视频数据。其中,第一比例阈值可以基于实际需求和经验所确定,例如1/2、1/4或1/6等。
其中,第一比值可以为指定显示窗口的长与原始图像尺寸的长之间的长度比值,或者指定显示窗口的宽与原始图像尺寸的宽之间的宽度比值,或者长度比值与宽度比值的均值、和值等,其中,长度比值与宽度比值的和值为长度比值与宽度比值之和。其中,预设的差值阈值可以基于实际需求和经验所确定。
缩放模块202在读取视频数据之后,需要将所读取的视频数据转为尺寸与播放窗口尺寸相同的第三视频数据。一种实现方式中,若所读取的视频数据的图像尺寸与指定显示窗口的窗口尺寸相匹配,则缩放模块202可以将所读取的视频数据,作为第三视频数据。在此情况下,意味着解码模块201解码生成的第一视频数据或第二视频数据的图像尺寸与指定显示窗口的窗口尺寸相同,此时,缩放模块202可以将所读取的视频数据直接作为第三视频数据,不需要对所读取的视频数据做进一步的缩放处理,可以减少所需消耗的性能资源。
另一种实现方式中,若所读取的视频数据的图像尺寸与指定显示窗口的窗口尺寸不匹配,则缩放模块202可以对所读取的视频数据进行缩放处理,得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据。由于所读取的视频数据的图像尺寸与指定显示窗口的窗口尺寸不匹配,为了确保正常显示,缩放模块需要对所读取的视频数据做进一步的缩放处理,在此情况下,若所读取的视频数据的图像尺寸大于指定显示窗口的窗口尺寸,对所读取的视频数据进行压缩处理,得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据,示例性的,所读取的视频数据的图像尺寸为1280×720,显示窗口的窗口尺寸为720×360,则缩放模块202需要对所读取的视频数据进行压缩处理,得到图像尺寸为720×360的第三视频数据。若所读取的视频数据的图像尺寸小于指定显示窗口的窗口尺寸,对所读取的视频数据进行放大处理,得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据,示例性的,所读取的视频数据的图像尺寸为1280×720,显示窗口的窗口尺寸为2560×1440,则缩放模块202需要对所读取的视频数据进行放大处理,得到图像尺寸为2560×1440的第三视频数据。
如图4所示,本申请实施例提供一种缩放模块读取视频数据的示意图。解码模块201解码得到两路图像数据,分别为图像尺寸为1280×720(指定图像尺寸)的第一视频数据,以及图像尺寸为2560×1440(即目标图像尺寸、原始图像尺寸)的第二视频数据。当指定显示窗口为单画面分屏显示窗口,则指定显示窗口的窗口尺寸为1920×1080,与原始图像尺寸(2560×1440)差异较小,则缩放模块202可以从第二存储位置读取第二视频数据,进而将第二视频数据缩放为窗口尺寸为1920×1080的视频数据,供单画面分屏显示窗口进行视频播放。当指定显示窗口为9画面分屏显示窗口,则指定显示窗口为9个显示窗口中任一显示窗口,其窗口尺寸为640×360,与原始图像尺寸(2560×1440)差异较大,则缩放模块202可以从第一存储位置读取图像尺寸为1280×720的第一视频数据,进而将第一视频数据缩放为窗口尺寸为640×360的视频数据,供为9画面分屏显示窗口进行视频播放。从而在9画面分屏显示窗口场景下,针对每一显示窗口所需播放的视频数据,缩放模块所占用的带宽为1280×720+640×360,所消耗的性能为处理1280×720的图像尺寸的视频数据所需的性能,相比于相关技术中缩放模块所占用带宽2560×1440+640×360,以及所消耗处理2560×1440的图像尺寸的视频数据所需的性能,在预览显示的显示效果不变的情况下,缩放模块202无论是所消耗的性能,还是所占用的带宽均大大减少,从而可以减少预览显示时出现的卡顿、丢帧等情况,提高了预览显示效果。
本申请上述方案中,在进行预览显示的过程中,由于第一视频数据的图像尺寸小于第二视频数据的图像尺寸,即第一视频数据的数据量小于全尺寸的视频数据,从而减小了缩放模块从第一存储位置读取视频数据时所需消耗的带宽,且由于第一视频数据的数据量更小,使得缩放模块处理第一视频数据时所需消耗的性能资源更少,从而可以减少预览显示时出现的卡顿、丢帧等情况,提高了预览显示效果。
可选地,在本申请的另一实施例中,上述解码模块201,还用于获取针对视频流信号的解码配置信息,该解码配置信息可以为开启解码模块201出小图模式的开启指令,该开启指令可以为上层应用在确定预览显示的分屏模式后向解码模块201所发送的。该解码配置信息用于指示解码模块201解码得到具有指定图像尺寸的第一视频数据。解码配置信息可以包括指示指定图像尺寸的尺寸信息,该尺寸信息可以为指定图像尺寸本身,例如1280×720。一种实现方式中,为了使得解码模块更准确的对视频流信号进行解码处理,上述解码配置信息可以包括针对视频流信号所配置的目标压缩倍数,在此情况下,解码模块201还可以获取针对视频流信号的目标压缩倍数,进而基于目标压缩倍数,将视频流信号解码为第一视频数据,其意味着,解码模块201在获取目标压缩倍数后,可以按照该目标压缩倍数,对视频流信号进行解码,其解码所得到的视频数据的图像尺寸是解码模块201基于所获取的目标压缩倍数,以及视频流信号对应的原始图像尺寸所确定的,具体的指定图像尺寸为原始图像尺寸按照目标压缩倍数缩放后的尺寸。
一种实现方式中,上述目标压缩倍数可以为基于第二比值所确定的,该第二比值可以为窗口尺寸与原始图像尺寸之间的比值。可选的,上述目标压缩倍数可以大于或等于窗口尺寸与原始图像尺寸之间的第二比值。此时,在满足该条件下,目标压缩倍数的确定可以采用多种实现方式,可选的,至少包括如下三种方式中的至少一种方式:
第一种目标压缩倍数的确定方式,可以在确定出第二比值之后,可以随机确定一大于或等于第二比值的比值,作为目标压缩倍数。需要说明的,该缩放比值应当始终小于1,例如1/2、1/3等。
第二种目标压缩倍数的确定方式,可以采用预先建立的比例阈值区间与压缩倍数的对应关系,确定目标压缩倍数。
可选的,目标压缩倍数可以为基于预先建立的比例阈值区间与压缩倍数的对应关系,所确定的与目标比例阈值区间对应的压缩倍数,其中,目标比例阈值区间为预先划分的多个比例阈值区间中,第二比值所在的比例阈值区间。
在此情况下,可以预先划分多个比例阈值区间,进而构建出比例阈值区间与压缩倍数的对应关系,在确定出第二比值之后,可以先从多个比例阈值区间中确定出第二比值所在的比例阈值区间,作为目标比例阈值区间,进而按照比例阈值区间与压缩倍数的对应关系,确定出与目标比例阈值区间对应的压缩倍数,作为目标压缩倍数。
上述多个比例阈值区间可以根据所需划分比例阈值区间的数量进行划分,例如需要划分三个比例阈值区间,则可以将指定阈值范围划分为三个比例阈值区间,其中,指定阈值范围最大为0~1。另一种实现方式中,还可以预设至少一个比例阈值,进而按照至少一个比例阈值,划分出多个比例阈值区间,例如,可以预先设定一比例阈值,进而可以根据该比例阈值,划分出大于该比例阈值的比例阈值区间,以及小于或等于该比例阈值的比例阈值区间。若第二比值小于或等于该比例阈值,则确定目标压缩倍数为预设的第一压缩倍数,反之,确定目标压缩倍数为预设的第二压缩倍数,其中,第一压缩倍数可以小于第二压缩倍数。上述多个比例阈值可以包括:第二比例阈值、第三比例阈值,其中,第二比例阈值小于第三比例阈值,此时,多个比例阈值区间包括:小于或等于第二比例阈值的比例阈值区、大于第二比例阈值,且小于或等于第三比例阈值的比例阈值区间,以及大于第三比例阈值的比例阈值区间。
在得到多个比例阈值区间之后,需要构建比例阈值区间与压缩倍数的对应关系,一种实现方式中,上述比例阈值区间与压缩倍数的对应关系中,每一比例阈值区间对应的压缩倍数为:大于该比例阈值区间的最小比例阈值,且小于或等于该比例阈值区间的最大比例阈值的比例阈值。以上述基于第二比例阈值与第三比例阈值所划分的多个比例阈值区间为例,上述小于或等于第二比例阈值的比例阈值区对应的压缩倍数可以为第二比例阈值。例如1/4;上述大于第二比例阈值,且小于或等于第三比例阈值的比例阈值区间,对应的压缩倍数可以为第三比例阈值,例如1/3;上述大于第三比例阈值的比例阈值区间,对应的压缩倍数可以为大于第三比例阈值的比例阈值,例如1/2。
由于比例阈值区间的划分是由其端点的比例阈值所确定的,因此,在此情况下,为方便计算,还可以仅采用第二比值与比例阈值区间端点的比例阈值对比的方式,确定目标压缩倍数。如上述基于第二比例阈值、第三比例阈值划分的多个比例阈值区间,为例方便计算,可以仅确定第二比值与第二比例阈值、第三比例阈值的大小关系,进而确定出对应的压缩倍数,此时,在确定出第二比值之后,若第二比值小于第二比例阈值,则目标压缩倍数为第二比例阈值;若第二比值大于或等于第二比例阈值,且小于第三比例阈值,则目标压缩倍数为第三比例阈值;若第二比值大于或等于第三比例阈值,则目标压缩倍数为大于第三比例阈值的比例阈值。在此情况下,为进一步的降低计算量,在确定出第二比值之后,可以先判断第二比值与第二比例阈值的大小关系,若第二比值小于第二比例阈值,则确定目标压缩倍数为第二比例阈值;若第二比值大于或等于第二比例阈值,则可以判断第二比值与第三比例阈值的大小关系,若第二比值小于第三比例阈值,则确定目标压缩倍数为第三比例阈值;若第二比值大于或等于第三比例阈值,则确定目标压缩倍数为大于第三比例阈值的比例阈值。上述大于第三比例阈值的比例阈值可以为预设的比第三比例阈值大的比例阈值,例如第三比例阈值为1/3,则大于第三比例阈值的比例阈值可以为1/2。
一种实现方式中,为了节约解码模块201的性能和带宽资源,上述目标压缩倍数可以为在指定显示窗口满足指定条件时所获取的,上述指定条件可以包括以下两种条件中的至少一种:
第一种条件,指定显示窗口为小尺寸显示窗口,其中,小尺寸显示窗口为与全屏窗口的窗口尺寸的第三比值小于第四比例阈值的显示窗口;
简单而言,为了保证最终预览显示的显示窗口中播放的视频数据的画面质量,避免缩放模块202在选取第一视频数据及第二视频数据时,在某些特定的场景出现偏差,上层应用可以仅在指定显示窗口的窗口尺寸与全屏窗口的窗口尺寸的第三比值小于第四比例阈值时,才配置解码配置信息,其意味着解码模块201可以在指定显示窗口为小尺寸显示窗口时,才可能获取到目标压缩倍数。在指定显示窗口的窗口尺寸与全屏窗口的窗口尺寸的第三比值不小于第四比例阈值,可以不配置解码配置信息,其意味着解码模块201在指定显示窗口不是小尺寸显示窗口的情况下,不会开启出小图模式,进而解码模块201仅需要解码生成第二视频数据即可,而无需生成第一视频数据。其中,上述第四比例阈值可以为基于实际场景和需求所确定的,例如可以为1/4、1/6等。
上述特定的场景可以为单画面、2画面、4画面、6画面大窗口以及8画面大窗口场景。其中,单画面、2画面、4画面、6画面以及8画面是指显示器的分屏模式,其指示显示器中包含的显示窗口的数量,单画面指仅包含单个显示窗口,2画面指包含2个显示窗口,4画面指包含4个显示窗口、6画面指包含6个显示窗口、8画面指包含8个显示窗口。如图5a所示,本申请实施例提供一种6画面分屏示意图,6个显示窗口中存在一个窗口尺寸较大的显示窗口,即为6画面大窗口。如图5b所示,本申请实施例提供一种8画面分屏示意图,8个显示窗口中存在一个窗口尺寸较大的显示窗口,即为8画面大窗口。
在上述特定的场景下出现偏差,原始图像尺寸为2560×1440,指定显示窗口的窗口尺寸为1552×934,指定图像尺寸为1280×720,此时,利用第一视频数据进行缩放处理得到的视频数据的画面质量,没有利用第二视频数据进行缩放处理的视频数据的画面质量好,因此,在上述特定的场景下,为了保证画面质量,解码模块201可以不用解码生成第一视频数据,仅解码生成第二视频数据即可。
第二种条件,指定显示窗口为指定尺寸的显示窗口;
其中,指定尺寸可以根据自身的需求和场景来确定,例如可以为2560×1440、1552×934等,其意味着,当指定显示窗口为2560×1440、1552×934的显示窗口时,不需要获取目标压缩倍数,当指定显示窗口未非2560×1440、1552×934的显示窗口时,可以获取目标压缩倍数。通过指定尺寸的方式,可以更快的确定是否需要让解码模块201开启出小图模式,即解码生成第一视频数据。
需要强调的是,本申请实施例中,解码模块201可以在上述两种条件中至少一种条件被满足的情况下,获取到目标压缩倍数。
如图6所示,本申请实施例提供一种视频数据处理方法,包括步骤S601-S604,其中:
S601,在接收到视频流信号后,利用视频流信号,解码生成第一视频数据和第二视频数据。
其中,第一视频数据为具有指定图像尺寸的视频数据,第二视频数据为具有目标图像尺寸的视频数据,指定图像尺寸小于目标图像尺寸,目标图像尺寸为视频流信号对应的原始图像尺寸,上述指定图像尺寸可以大于指定显示窗口的窗口尺寸。
S602,基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,从第一视频数据和第二视频数据中,确定出目标视频数据;
一种实现方式中,可以确定指定显示窗口的窗口尺寸与原始图像尺寸的第一比值;若第一比值小于第一比例阈值,则确定第一视频数据为目标视频数据,反之,确定第二视频数据为目标视频数据。
S603,基于目标视频数据,确定对图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据,其中,指定显示窗口为针对视频流信号所配置的、用于预览显示的显示窗口;
一种实现方式中,若目标视频数据的图像尺寸与指定显示窗口的窗口尺寸相匹配,则将目标视频数据,作为第三视频数据;若目标视频数据的图像尺寸与指定显示窗口的窗口尺寸不匹配,对目标视频数据进行缩放处理,得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据。
一种实现方式中,目标视频数据的图像尺寸与指定显示窗口的窗口尺寸不匹配的情况包括目标视频数据的图像尺寸大于指定显示窗口的窗口尺寸,或目标视频数据的图像尺寸小于指定显示窗口的窗口尺寸两种情况,若目标视频数据的图像尺寸大于指定显示窗口的窗口尺寸,对目标视频数据进行压缩处理,得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据;若目标视频数据的图像尺寸小于指定显示窗口的窗口尺寸,对目标视频数据进行放大处理,得到图像尺寸与指定显示窗口的窗口尺寸相匹配的第三视频数据。
S604,将第三视频数据写入第三存储位置,其中,第三存储位置为用于存储指定显示窗口待显示的视频数据的存储位置。
本申请上述方案中,在进行预览显示的过程中,可以针对视频流信号同时解码出第一视频数据和第二视频数据,同时可以基于指定显示窗口的窗口尺寸与原始图像尺寸之间的差异关系,从第一视频数据和第二视频数据中动态地选择一个视频数据作为后续用于缩放的视频数据。这样,在选择了第一视频数据的情况下,由于第一视频数据的图像尺寸小于第二视频数据的图像尺寸,即第一视频数据的数据量小于全尺寸的视频数据,从而减小了处理第一视频数据时所需消耗的性能资源,从而可以减少预览显示时出现的卡顿、丢帧等情况,提高了预览显示效果。
一种实施例中,本申请实施例提供另一种视频数据处理方法,在利用视频流信号,解码生成第一视频数据之前,还可以获取针对视频流信号的目标压缩倍数。此时,上述利用视频流信号,解码生成第一视频数据,可以包括:
基于目标压缩倍数,将视频流信号解码为第一视频数据。
上述目标压缩倍数为基于第二比值所确定的,第二比值为窗口尺寸与原始图像尺寸之间的比值。一种实现方式中,目标压缩倍数为基于预先建立的比例阈值区间与压缩倍数的对应关系,所确定的与目标比例阈值区间对应的压缩倍数;目标比例阈值区间为预先划分的多个比例阈值区间中,第二比值所在的比例阈值区间。在比例阈值区间与压缩倍数的对应关系中,每一比例阈值区间对应的压缩倍数为:大于该比例阈值区间的最小比例阈值,且小于或等于该比例阈值区间的最大比例阈值的比例阈值。
一种实现方式中,上述多个比例阈值区间可以包括:小于或等于第二比例阈值的比例阈值区间;大于第二比例阈值,且小于或等于第三比例阈值的比例阈值区间,其中,第二比例阈值小于第三比例阈值;大于第三比例阈值的比例阈值区间。
一种实现方式中,上述目标压缩倍数为在指定显示窗口满足指定条件时所获取的;其中,指定条件包括:指定显示窗口为小尺寸显示窗口,其中,小尺寸显示窗口为与全屏窗口的窗口尺寸的第三比值小于第四比例阈值的显示窗口;和/或,指定显示窗口为指定尺寸的显示窗口。
本申请上述方案中,可以提高预览显示效果,同时通过获取目标压缩倍数,可以基于目标压缩倍数,将视频流信号解码为第一视频数据,从而为本申请实施例提高预览显示效果提供了实现基础。
上述各个步骤的具体实现方式以及相关介绍,可以参见上述系统实施例,在此不做赘述。
相应于本申请上述实施例所提供的视频数据处理方法,如图7所示,本申请实施例还提供了一种视频数据处理装置,所述装置包括:
数据解码模块701,用于在接收到视频流信号后,利用所述视频流信号,解码生成第一视频数据和第二视频数据,其中,所述第一视频数据为具有指定图像尺寸的视频数据,所述第二视频数据为具有目标图像尺寸的视频数据,所述指定图像尺寸小于所述目标图像尺寸,所述目标图像尺寸为所述视频流信号对应的原始图像尺寸;
数据确定模块702,用于基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,从所述第一视频数据和所述第二视频数据中,确定出目标视频数据;
数据缩放模块703,用于基于所述目标视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,其中,所述指定显示窗口为针对所述视频流信号所配置的、用于预览显示的显示窗口;
数据写入模块704,用于将所述第三视频数据写入第三存储位置,其中,所述第三存储位置为用于存储所述指定显示窗口待显示的视频数据的存储位置。
可选的,所述数据缩放模块,具体用于确定所述指定显示窗口的窗口尺寸与所述原始图像尺寸的第一比值;若所述第一比值小于第一比例阈值,则确定所述第一视频数据为目标视频数据,反之,确定所述第二视频数据为目标视频数据。
可选的,所述数据解码模块,还用于在所述利用所述视频流信号,解码生成第一视频数据之前,获取针对所述视频流信号的目标压缩倍数;
所述数据解码模块,具体用于基于所述目标压缩倍数,将所述视频流信号解码为第一视频数据。
可选的,所述目标压缩倍数为基于第二比值所确定的,所述第二比值为所述窗口尺寸与所述原始图像尺寸之间的比值。
可选的,所述目标压缩倍数为基于预先建立的比例阈值区间与压缩倍数的对应关系,所确定的与目标比例阈值区间对应的压缩倍数;所述目标比例阈值区间为预先划分的多个比例阈值区间中,所述第二比值所在的比例阈值区间。
可选的,所述比例阈值区间与压缩倍数的对应关系中,每一比例阈值区间对应的压缩倍数为:大于该比例阈值区间的最小比例阈值,且小于或等于该比例阈值区间的最大比例阈值的比例阈值。
可选的,所述多个比例阈值区间包括:小于或等于第二比例阈值的比例阈值区间;大于所述第二比例阈值,且小于或等于第三比例阈值的比例阈值区间,其中,所述第二比例阈值小于所述第三比例阈值;大于所述第三比例阈值的比例阈值区间。
可选的,所述目标压缩倍数为在所述指定显示窗口满足指定条件时所获取的;其中,所述指定条件包括:所述指定显示窗口为小尺寸显示窗口,其中,所述小尺寸显示窗口为与全屏窗口的窗口尺寸的第三比值小于第四比例阈值的显示窗口;和/或,所述指定显示窗口为指定尺寸的显示窗口。
可选的,所述数据缩放模块,包括:
第一处理子模块,用于若所述目标视频数据的图像尺寸与所述指定显示窗口的窗口尺寸相匹配,则将所述目标视频数据,作为第三视频数据;
第二处理子模块,用于若所述目标视频数据的图像尺寸与所述指定显示窗口的窗口尺寸不匹配,对所述目标视频数据进行缩放处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据。
可选的,所述第二处理子模块,具体用于若所述目标视频数据的图像尺寸大于所述指定显示窗口的窗口尺寸,对所述目标视频数据进行压缩处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据;若所述目标视频数据的图像尺寸小于所述指定显示窗口的窗口尺寸,对所述目标视频数据进行放大处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据。
本申请上述方案中,在进行预览显示的过程中,第一视频数据的图像尺寸小于第二视频数据的图像尺寸,即第一视频数据的数据量小于全尺寸的视频数据,从而减小了处理第一视频数据时所需消耗的性能资源,从而可以减少预览显示时出现的卡顿、丢帧等情况,提高了预览显示效果。
本申请实施例还提供了一种录像机,如图8所示,包括处理器801和机器可读存储介质802,所述机器可读存储介质802存储有能够被所述处理器801执行的机器可执行指令,所述处理器801被所述机器可执行指令促使:实现如下步骤:
在接收到视频流信号后,利用所述视频流信号,解码生成第一视频数据和第二视频数据,其中,所述第一视频数据为具有指定图像尺寸的视频数据,所述第二视频数据为具有目标图像尺寸的视频数据,所述指定图像尺寸小于所述目标图像尺寸,所述目标图像尺寸为所述视频流信号对应的原始图像尺寸;
基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,从所述第一视频数据和所述第二视频数据中,确定出目标视频数据;
基于所述目标视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,其中,所述指定显示窗口为针对所述视频流信号所配置的、用于预览显示的显示窗口;
将所述第三视频数据写入第三存储位置,其中,所述第三存储位置为用于存储所述指定显示窗口待显示的视频数据的存储位置。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本申请提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一视频数据处理方法的步骤。
在本申请提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一视频数据处理方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于方法、装置、计算机可读存储介质、计算机程序产品实施例而言,由于其基本相似于录像机实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的较佳实施例,并非用于限定本申请的保护范围。凡在本申请的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本申请的保护范围内。
Claims (15)
1.一种录像机,其特征在于,所述录像机包括解码模块和缩放模块;
所述解码模块,用于在接收到视频流信号后,利用所述视频流信号,解码生成第一视频数据和第二视频数据,并将所述第一视频数据写入预设的第一存储位置,以及将所述第二视频数据写入预设的第二存储位置;其中,所述第一视频数据为具有指定图像尺寸的视频数据,所述第二视频数据为具有目标图像尺寸的视频数据,所述指定图像尺寸小于所述目标图像尺寸,所述目标图像尺寸为所述视频流信号对应的原始图像尺寸;
所述缩放模块,用于基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,选择从所述第一存储位置或所述第二存储位置进行视频数据读取,其中,所述指定显示窗口为针对所述视频流信号所配置的、用于预览显示的显示窗口;基于所读取的视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据;将所述第三视频数据写入第三存储位置,其中,所述第三存储位置为用于存储所述指定显示窗口待显示的视频数据的存储位置。
2.根据权利要求1所述的录像机,其特征在于,所述缩放模块基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,选择从所述第一存储位置或所述第二存储位置进行视频数据读取,包括:
确定所述指定显示窗口的窗口尺寸与所述原始图像尺寸的第一比值;
若所述第一比值小于第一比例阈值,则从所述第一存储位置中读取所述第一视频数据,反之,从所述第二存储位置中读取所述第二视频数据。
3.根据权利要求1或2所述的录像机,其特征在于,所述解码模块,还用于获取针对所述视频流信号的目标压缩倍数;
所述解码模块,具体用于基于所述目标压缩倍数,将所述视频流信号解码为第一视频数据。
4.根据权利要求3所述的录像机,其特征在于,所述目标压缩倍数为基于第二比值所确定的,所述第二比值为所述窗口尺寸与所述原始图像尺寸之间的比值。
5.根据权利要求4所述的录像机,其特征在于,所述目标压缩倍数为基于预先建立的比例阈值区间与压缩倍数的对应关系,所确定的与目标比例阈值区间对应的压缩倍数;所述目标比例阈值区间为预先划分的多个比例阈值区间中,所述第二比值所在的比例阈值区间。
6.根据权利要求5所述的录像机,其特征在于,所述比例阈值区间与压缩倍数的对应关系中,每一比例阈值区间对应的压缩倍数为:大于该比例阈值区间的最小比例阈值,且小于或等于该比例阈值区间的最大比例阈值的比例阈值。
7.根据权利要求5或6所述的录像机,其特征在于,所述多个比例阈值区间包括:
小于或等于第二比例阈值的比例阈值区间;
大于所述第二比例阈值,且小于或等于第三比例阈值的比例阈值区间,其中,所述第二比例阈值小于所述第三比例阈值;
大于所述第三比例阈值的比例阈值区间。
8.根据权利要求3所述的录像机,其特征在于,所述目标压缩倍数为在所述指定显示窗口满足指定条件时所获取的;
其中,所述指定条件包括:
所述指定显示窗口为小尺寸显示窗口,其中,所述小尺寸显示窗口为与全屏窗口的窗口尺寸的第三比值小于第四比例阈值的显示窗口;和/或,
所述指定显示窗口为指定尺寸的显示窗口。
9.根据权利要求1或2所述的录像机,其特征在于,所述缩放模块基于所读取的视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,包括:
若所读取的视频数据的图像尺寸与所述指定显示窗口的窗口尺寸相匹配,则将所读取的视频数据,作为第三视频数据;
若所读取的视频数据的图像尺寸与所述指定显示窗口的窗口尺寸不匹配,对所读取的视频数据进行缩放处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据。
10.根据权利要求9所述的录像机,其特征在于,所述若所读取的视频数据的图像尺寸与所述指定显示窗口的窗口尺寸不匹配,对所读取的视频数据进行缩放处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,包括:
若所读取的视频数据的图像尺寸大于所述指定显示窗口的窗口尺寸,对所读取的视频数据进行压缩处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据;
若所读取的视频数据的图像尺寸小于所述指定显示窗口的窗口尺寸,对所读取的视频数据进行放大处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据。
11.一种视频数据处理方法,其特征在于,所述方法包括:
在接收到视频流信号后,利用所述视频流信号,解码生成第一视频数据和第二视频数据,其中,所述第一视频数据为具有指定图像尺寸的视频数据,所述第二视频数据为具有目标图像尺寸的视频数据,所述指定图像尺寸小于所述目标图像尺寸,所述目标图像尺寸为所述视频流信号对应的原始图像尺寸;
基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,从所述第一视频数据和所述第二视频数据中,确定出目标视频数据;
基于所述目标视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,其中,所述指定显示窗口为针对所述视频流信号所配置的、用于预览显示的显示窗口;
将所述第三视频数据写入第三存储位置,其中,所述第三存储位置为用于存储所述指定显示窗口待显示的视频数据的存储位置。
12.根据权利要求11所述的方法,其特征在于,所述基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,从所述第一视频数据和所述第二视频数据中,确定出目标视频数据,包括:
确定所述指定显示窗口的窗口尺寸与所述原始图像尺寸的第一比值;
若所述第一比值小于第一比例阈值,则确定所述第一视频数据为目标视频数据,反之,确定所述第二视频数据为目标视频数据;
和/或,在所述利用所述视频流信号,解码生成第一视频数据之前,所述方法还包括:
获取针对所述视频流信号的目标压缩倍数;
所述利用所述视频流信号,解码生成第一视频数据,包括:
基于所述目标压缩倍数,将所述视频流信号解码为第一视频数据;
和/或,所述目标压缩倍数为基于第二比值所确定的,所述第二比值为所述窗口尺寸与所述原始图像尺寸之间的比值;
和/或,所述目标压缩倍数为基于预先建立的比例阈值区间与压缩倍数的对应关系,所确定的与目标比例阈值区间对应的压缩倍数;所述目标比例阈值区间为预先划分的多个比例阈值区间中,所述第二比值所在的比例阈值区间;
和/或,所述比例阈值区间与压缩倍数的对应关系中,每一比例阈值区间对应的压缩倍数为:大于该比例阈值区间的最小比例阈值,且小于或等于该比例阈值区间的最大比例阈值的比例阈值;
和/或,所述多个比例阈值区间包括:
小于或等于第二比例阈值的比例阈值区间;
大于所述第二比例阈值,且小于或等于第三比例阈值的比例阈值区间,其中,所述第二比例阈值小于所述第三比例阈值;
大于所述第三比例阈值的比例阈值区间;
和/或,所述目标压缩倍数为在所述指定显示窗口满足指定条件时所获取的;
其中,所述指定条件包括:
所述指定显示窗口为小尺寸显示窗口,其中,所述小尺寸显示窗口为与全屏窗口的窗口尺寸的第三比值小于第四比例阈值的显示窗口;和/或,
所述指定显示窗口为指定尺寸的显示窗口;
和/或,所述基于所述目标视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,包括:
若所述目标视频数据的图像尺寸与所述指定显示窗口的窗口尺寸相匹配,则将所述目标视频数据,作为第三视频数据;
若所述目标视频数据的图像尺寸与所述指定显示窗口的窗口尺寸不匹配,对所述目标视频数据进行缩放处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据;
和/或,所述若所述目标视频数据的图像尺寸与所述指定显示窗口的窗口尺寸不匹配,对所述目标视频数据进行缩放处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,包括:
若所述目标视频数据的图像尺寸大于所述指定显示窗口的窗口尺寸,对所述目标视频数据进行压缩处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据;
若所述目标视频数据的图像尺寸小于所述指定显示窗口的窗口尺寸,对所述目标视频数据进行放大处理,得到图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据。
13.一种视频数据处理装置,其特征在于,所述装置包括:
数据解码模块,用于在接收到视频流信号后,利用所述视频流信号,解码生成第一视频数据和第二视频数据,其中,所述第一视频数据为具有指定图像尺寸的视频数据,所述第二视频数据为具有目标图像尺寸的视频数据,所述指定图像尺寸小于所述目标图像尺寸,所述目标图像尺寸为所述视频流信号对应的原始图像尺寸;
数据确定模块,用于基于指定显示窗口的窗口尺寸与所述原始图像尺寸之间的差异关系,从所述第一视频数据和所述第二视频数据中,确定出目标视频数据;
数据缩放模块,用于基于所述目标视频数据,确定图像尺寸与所述指定显示窗口的窗口尺寸相匹配的第三视频数据,其中,所述指定显示窗口为针对所述视频流信号所配置的、用于预览显示的显示窗口;
数据写入模块,用于将所述第三视频数据写入第三存储位置,其中,所述第三存储位置为用于存储所述指定显示窗口待显示的视频数据的存储位置。
14.一种录像机,其特征在于,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,所述处理器被所述机器可执行指令促使:实现权利要求11-12任一所述的方法步骤。
15.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求11-12任一所述的方法步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211038980.5A CN115442554A (zh) | 2022-08-29 | 2022-08-29 | 一种录像机、视频数据处理方法、装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211038980.5A CN115442554A (zh) | 2022-08-29 | 2022-08-29 | 一种录像机、视频数据处理方法、装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115442554A true CN115442554A (zh) | 2022-12-06 |
Family
ID=84243929
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211038980.5A Pending CN115442554A (zh) | 2022-08-29 | 2022-08-29 | 一种录像机、视频数据处理方法、装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115442554A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116055784A (zh) * | 2022-12-30 | 2023-05-02 | 深圳创维-Rgb电子有限公司 | 小窗口播放方法、系统、计算机设备及可读存储介质 |
-
2022
- 2022-08-29 CN CN202211038980.5A patent/CN115442554A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116055784A (zh) * | 2022-12-30 | 2023-05-02 | 深圳创维-Rgb电子有限公司 | 小窗口播放方法、系统、计算机设备及可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9124858B2 (en) | Content processing apparatus for processing high resolution content and content processing method thereof | |
US9674516B2 (en) | Systems and methods for picture quality monitoring | |
US9565479B2 (en) | Methods and apparatus for seeking within a media stream using scene detection | |
US8275247B2 (en) | Method and apparatus for normal reverse playback | |
US10574933B2 (en) | System and method for converting live action alpha-numeric text to re-rendered and embedded pixel information for video overlay | |
US9001272B2 (en) | Image synthesizing device, coding device, program, and recording medium | |
US20150350565A1 (en) | Techniques for magnifying a high resolution image | |
US8340494B2 (en) | Image converter, image reproducer, image conversion/reproduction system, and recording medium | |
JP2006254366A (ja) | 画像処理装置、カメラシステム、ビデオシステム、ネットワークデータシステム、並びに、画像処理方法 | |
US9161030B1 (en) | Graphics overlay system for multiple displays using compressed video | |
US20140294100A1 (en) | Dual channel encoding and detection | |
US9053752B1 (en) | Architecture for multiple graphics planes | |
CN115442554A (zh) | 一种录像机、视频数据处理方法、装置 | |
JPH11284948A (ja) | サムネイル作成方法及びサムネイル表示方法 | |
US8483389B1 (en) | Graphics overlay system for multiple displays using compressed video | |
EP3522525B1 (en) | Method and apparatus for processing video playing | |
CN114710707B (zh) | 显示设备及视频缩略图获取方法 | |
CN114422735A (zh) | 一种录像机、视频数据处理方法、装置及电子设备 | |
KR20100135131A (ko) | 디스플레이 장치에서 영상 처리 방법 및 디스플레이 장치 | |
JP2009027430A (ja) | 動画再生装置 | |
JP2006324941A (ja) | 画像処理装置および方法、並びにプログラム | |
JP4413661B2 (ja) | 録画再生装置、画像再生システムおよび端末装置 | |
US11908340B2 (en) | Magnification enhancement of video for visually impaired viewers | |
CN111699530B (zh) | 记录装置及记录方法 | |
KR100808184B1 (ko) | 영상 데이터의 사진 목록을 디스플레이하는 영상표시장치및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |