CN115580750A - 视频处理方法、装置、设备、存储介质及程序产品 - Google Patents

视频处理方法、装置、设备、存储介质及程序产品 Download PDF

Info

Publication number
CN115580750A
CN115580750A CN202110688896.7A CN202110688896A CN115580750A CN 115580750 A CN115580750 A CN 115580750A CN 202110688896 A CN202110688896 A CN 202110688896A CN 115580750 A CN115580750 A CN 115580750A
Authority
CN
China
Prior art keywords
resolution
window
video
determining
constant
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110688896.7A
Other languages
English (en)
Inventor
殷时友
周鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Longxin Zhongke Hefei Technology Co ltd
Original Assignee
Longxin Zhongke Hefei Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Longxin Zhongke Hefei Technology Co ltd filed Critical Longxin Zhongke Hefei Technology Co ltd
Priority to CN202110688896.7A priority Critical patent/CN115580750A/zh
Publication of CN115580750A publication Critical patent/CN115580750A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Image Processing (AREA)

Abstract

本申请实施例提供一种视频处理方法、装置、设备、存储介质及程序产品,该方法包括:接收用户输入的第一指令;获取初始视频的第一分辨率;根据第一分辨率、第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸;第三分辨率为用于播放初始视频的播放窗口的分辨率,常量S为SIMD指令一次能处理的像素个数,目标滤波器尺寸为S的n倍,n为1/2或正整数;根据第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对初始视频进行缩放处理,得到目标视频。本申请实施例提供的视频处理方法、装置、设备、存储介质及程序产品能够提高对视频的缩放效率。

Description

视频处理方法、装置、设备、存储介质及程序产品
技术领域
本申请涉及视频处理技术领域,尤其涉及一种视频处理方法、装置、设备、存储介质及程序产品。
背景技术
电子设备(例如手机、电脑等)中通常包括视频播放器,视频播放器的播放窗口可以播放视频。在用户观看视频过程中,可以调节播放窗口的分辨率(即尺寸)。
目前,视频的初始分辨率是固定值,在用户调节播放窗口的分辨率之后,通常需要对视频进行缩放处理,得到目标视频,目标视频的分辨率与播放窗口的分辨率匹配,进而在用户调节后的播放窗口内播放目标视频。在相关技术中,通过初始分辨率和调节后的播放窗口的分辨率,计算滤波器尺寸,并根据滤波器尺寸,通过单指令多数据(SingleInstruction Multiple Data,SMID)指令控制视频缩放模型对视频进行缩放处理,得到目标视频。
在上述相关技术中,由于用户可以随机调整播放窗口的分辨率,因此可能无法通过初始分辨和调节后的播放窗口的分辨率,计算出较为合适的滤波器尺寸,使得通过SMID指令控制视频缩放模型对视频进行缩放的处理次数较多,导致对视频缩放的处理效率较低。
发明内容
本申请实施例提供一种视频处理方法、装置、设备、存储介质及程序产品,用于提高对视频的缩放效率。
第一方面,本申请实施例提供一种视频处理方法,包括:
获取初始视频的第一分辨率;
接收用户输入的第一指令,所述第一指令中包括第二分辨率;
根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸;所述第三分辨率为用于播放所述初始视频的播放窗口的分辨率,所述常量S为SIMD指令一次能处理的像素个数,所述目标滤波器尺寸为S的n倍,n为1/2或正整数;
根据所述第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频进行缩放处理,得到目标视频。
在一种可能的设计中,所述根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸,包括:
根据所述第一分辨率和所述第二分辨率,生成初始滤波器尺寸;
根据所述初始滤波器尺寸和所述常量S,确定所述目标滤波器尺寸;
根据所述目标滤波器尺寸和所述第一分辨率,生成所述第三分辨率。
在一种可能的设计中,所述根据所述初始滤波器尺寸和所述常量S,确定所述目标滤波器尺寸,包括:
根据所述常量S,对所述初始滤波器尺寸进行取余数操作,得到余数;
若所述余数大于或等于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向上取整数操作,得到第一正整数,并将所述常量S和所述第一正整数的乘积确定为所述目标滤波器尺寸;
若所述余数小于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向下取整数操作,得到第二正整数,并将所述常量S和所述第二正整数的乘积确定为所述目标滤波器尺寸。
在一种可能的设计中,所述根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸,包括:
根据第一分辨率和所述常量S,确定多个窗口分辨率;
根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率;
根据所述第三分辨率,确定所述目标滤波器尺寸。
在一种可能的设计中,所述根据第一分辨率和所述常量S,确定多个窗口分辨率,包括:
分别确定所述常量S与所述n的多个取值各自对应的乘积;
针对每个乘积,根据所述乘积、所述视频缩放模型的缩放因子以及所述第一分辨率的第一宽度,对第一预设模型进行求解处理,得到所述乘积对应的窗口分辨率的窗口宽度;
将所述第一分辨率的第一高度和所述窗口宽度的乘积、与所述第一宽度的比值,确定为所述乘积对应的窗口分辨率的窗口高度。
在一种可能的设计中,根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率,包括:
将所述多个窗口分辨率中与所述第二分辨率的差值最小的窗口分辨率,确定为所述第三分辨率。
在一种可能的设计中,所述根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率,包括:
分别获取所述第二分辨率与所述多个窗口分辨率中的每个窗口分辨率的匹配度;
将所述多个窗口分辨率中匹配度最大时对应的窗口分辨率,确定为所述第三分辨率。
在一种可能的设计中,所述分别获取所述第二分辨率与所述多个窗口分辨率中的每个窗口分辨率的匹配度,包括:
针对所述每个窗口分辨率,对所述窗口分辨率的窗口宽度和窗口高度进行组合,得到第一向量;
对所述第二分辨率的第二宽度和第二高度进行组合,得到第二向量;
将所述第一向量和所述第二向量的余弦相似度,确定为所述第二分辨率与所述窗口分辨率的匹配度。
在一种可能的设计中,所述根据所述第三分辨率,确定所述目标滤波器尺寸,包括:
将第三分辨率对应的乘积,确定为所述目标滤波器尺寸。
在一种可能的设计中,所述根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸,包括:
根据所述第一分辨率,在预设列表中确定与所述第一分辨率对应的多个窗口分辨率;所述预设列表包括多个视频分辨率、每个视频分辨率对应多个可选滤波器尺寸,每个可选滤波器尺寸对应一个窗口分辨率,所述可选滤波器尺寸为所述常量S和所述n的取值对应的乘积;
根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率;
根据所述第三分辨率,确定所述目标滤波器尺寸。
在一种可能的设计中,该方法还包括:
通过具有第三分辨率的播放窗口,播放目标视频。
第二方面,本申请实施例提供一种视频处理装置,包括:获取模块、接收模块、确定模块和处理模块;其中,
所述获取模块,用于获取初始视频的第一分辨率;
所述接收模块,用于接收用户输入的第一指令,所述第一指令中包括第二分辨率;
所述确定模块,用于根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸;所述第三分辨率为用于播放所述初始视频的播放窗口的分辨率,所述常量S为SIMD指令一次能处理的像素个数,所述目标滤波器尺寸为S的n倍,n为1/2或正整数;
所述处理模块,用于根据所述第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频进行缩放处理,得到目标视频。
在一种可能的设计中,确定模块具体用于:
根据所述第一分辨率和所述第二分辨率,生成初始滤波器尺寸;
根据所述初始滤波器尺寸和所述常量S,确定所述目标滤波器尺寸;
根据所述目标滤波器尺寸和所述第一分辨率,生成所述第三分辨率。
在一种可能的设计中,确定模块具体用于:
根据所述常量S,对所述初始滤波器尺寸进行取余数操作,得到余数;
若所述余数大于或等于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向上取整数操作,得到第一正整数,并将所述常量S和所述第一正整数的乘积确定为所述目标滤波器尺寸;
若所述余数小于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向下取整数操作,得到第二正整数,并将所述常量S和所述第二正整数的乘积确定为所述目标滤波器尺寸。
在一种可能的设计中,确定模块具体用于:
根据第一分辨率和所述常量S,确定多个窗口分辨率;
根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率;
根据所述第三分辨率,确定所述目标滤波器尺寸。
在一种可能的设计中,确定模块具体用于:
分别确定所述常量S与所述n的多个取值各自对应的乘积;
针对每个乘积,根据所述乘积、所述视频缩放模型的缩放因子以及所述第一分辨率的第一宽度,对第一预设模型进行求解处理,得到所述乘积对应的窗口分辨率的窗口宽度;
将所述第一分辨率的第一高度和所述窗口宽度的乘积、与所述第一宽度的比值,确定为所述乘积对应的窗口分辨率的窗口高度。
在一种可能的设计中,确定模块具体用于:
将所述多个窗口分辨率中与所述第二分辨率的差值最小的窗口分辨率,确定为所述第三分辨率。
在一种可能的设计中,确定模块具体用于:
分别获取所述第二分辨率与所述多个窗口分辨率中的每个窗口分辨率的匹配度;
将所述多个窗口分辨率中匹配度最大时对应的窗口分辨率,确定为所述第三分辨率。
在一种可能的设计中,确定模块具体用于:
针对所述每个窗口分辨率,对所述窗口分辨率的窗口宽度和窗口高度进行组合,得到第一向量;
对所述第二分辨率的第二宽度和第二高度进行组合,得到第二向量;
将所述第一向量和所述第二向量的余弦相似度,确定为所述第二分辨率与所述窗口分辨率的匹配度。
在一种可能的设计中,确定模块具体用于:
将第三分辨率对应的乘积,确定为所述目标滤波器尺寸。
在一种可能的设计中,确定模块具体用于:
根据所述第一分辨率,在预设列表中确定与所述第一分辨率对应的多个窗口分辨率;所述预设列表包括多个视频分辨率、每个视频分辨率对应的多个可选滤波器尺寸、每个可选滤波器尺寸对应的一个窗口分辨率,所述可选滤波器尺寸为所述常量S和所述n的取值对应的乘积;
根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率;
根据所述第三分辨率,确定所述目标滤波器尺寸。
在一种可能的设计中,该装置还包括:播放模块;其中,放模块用于:过具有第三分辨率的播放窗口,播放目标视频。
第三方面,本申请实施例提供一种电子设备,包括:处理器和存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器执行如上第一方面中任一项所述的视频处理方法。
第四方面,本申请实施例提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如上第一方面中任一项所述的视频处理方法。
第五方面,本申请实施例提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上第一方面中任一项所述的视频处理方法。
本申请实施例提供一种视频处理方法、装置、设备、存储介质及程序产品,该方法包括:获取初始视频的第一分辨率;接收用户输入的第一指令,所述第一指令中包括第二分辨率;根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸;所述第三分辨率为用于播放所述初始视频的播放窗口的分辨率,所述常量S为SIMD指令一次能处理的像素个数,所述目标滤波器尺寸为S的n倍,n为1/2或正整数;根据所述第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频进行缩放处理,得到目标视频。在上述方法中第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸,使得目标滤波器尺寸为能够为合适的滤波器尺寸,避免了现有技术中根据随机调整后的播放窗口的分辨率无法计算出较为合适的滤波器尺寸的问题,进一步地根据所述第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频进行缩放处理,得到目标视频,可以减少通过SIMD指令控制视频缩放模型对初始视频进行缩放的处理次数,提高对视频的缩放效率。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
图1为本申请实施例提供的视频处理方法的应用场景示意图;
图2为本申请实施例提供的视频处理方法的流程示意图一;
图3为本申请实施例提供的视频处理方法的流程示意图二;
图4为本申请实施例提供的视频处理方法的流程示意图三;
图5为本申请实施例提供的视频处理装置的结构示意图一;
图6为本申请实施例提供的视频处理装置的结构示意图二;
图7为本申请实施例提供的电子设备的硬件结构示意图。
通过上述附图,已示出本申请明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围,而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
下面先对本申请中涉及的关键名称进行解释:
视频缩放:是指对视频中包括的多帧图像中的每帧图像的宽和高(通常也就是分辨率)进行缩放。
播放窗口的分辨率:是指播放窗口的宽和高。
视频的分辨率:是指视频中每帧图像的宽和高。
滤波器尺寸:是视频缩放模型过程中的一个关键因子,与缩放之前视频的分辨率和缩放之后视频的分辨率相关。
在现有技术中,通过如下方法得到目标视频:通过视频的初始分辨率和调节后的播放窗口的分辨率,计算滤波器尺寸;根据滤波器尺寸,通过SMID指令,控制视频缩放模型根据初始分辨率和调节后的播放窗口的分辨率,对视频进行缩放处理,得到目标视频,目标视频的分辨率与调节后的播放窗口的分辨率匹配。其中,SMID指令具体对应的常量S,常量S为SIMD指令一次能处理的像素个数。
在实际应用中,滤波器尺寸越大,在得到目标视频的过程中,视频缩放模型对视频进行缩放处理的执行次数越多。由于在通过上述现有技术得到目标视频的过程中,用户可以随机调整播放窗口的分辨率,因此可能无法通过初始分辨和调节后的播放窗口的分辨率,计算出较为合适的滤波器尺寸(通常,较为合适的滤波器尺寸为Sn),从而使得通过SMID指令控制视频缩放模型对视频进行缩放处理的执行次数较多,导致对视频的缩放效率较低。在Sn中,S为上述的常量S,n等于1/2或正整数(例如1、2、3等)。
在本申请中,为了提高对视频的缩放效率,发明人想到:在用户随机调整播放窗口的分辨率之后,根据随机调整后的播放窗口的分辨率,确定第三分辨率以及合适的滤波器尺寸,进而根据第三分辨率以及合适的滤波器尺寸,通过SMID指令控制视频缩放模型对初始视频进行处理,得到目标视频,从而减少通过SMID指令控制视频缩放模型对视频进行缩放处理的执行次数,进而提高对视频的缩放效率。
图1为本申请实施例提供的视频处理方法的应用场景示意图。如图1所示,包括:界面101和界面102。
请参见界面101,界面101中显示播放器的播放窗口1011,播放窗口1011内播放初始视频。在界面101中,播放窗口1011的分辨率和和初始视频的分辨率均等于第一分辨率。
示例性的,在播放窗口1011中播放初始视频过程中,若检测到用户随机将播放窗口1011的第一分辨率调整为第一分辨率,则电子设备根据播放窗口1011的第二分辨率和初始视频的第一分辨率,得到播放窗口的第三分辨率、以及目标滤波器尺寸,并根据第三分辨率和目标滤波器尺寸,控制视频缩放模型对初始视频进行缩放处理,得到目标视频,并在界面102中显示具有第三分辨率的播放窗口、在具有第三分辨率的播放窗口内播放目标视频。请参见界面102。
请参见界面102,显示具有第三分辨率的播放窗口1012,并在播放窗口1012内播放目标图像。
在上述显示过程中,得到目标滤波器尺寸是较为合适的滤波器尺寸,因此在根据第三分辨率和目标滤波器尺寸,控制视频缩放模型对初始视频进行缩放处理的过程中,能够减少视频缩放模型对初始视频的进行缩放处理的执行次数,从而提高提高对视频的缩放效率。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。
图2为本申请实施例提供的视频处理方法的流程示意图一。如图2所示,该方法包括:
S201、获取初始视频的第一分辨率。
本申请实施例的执行主体可以为电子设备,也可以为设置在电子设备上的视频处理装置,该视频处理装置可以通过软件和/或硬件的结合来实现,软件可以包括但不限于播放器,硬件包括但不限于处理器。
电子设备为包括显示屏、且具有显示播放音视频或者视频功能的设备。示例性的,电子设备可以为手机(mobile phone)、平板电脑(Pad)、笔记本电脑、台式电脑等。
电子设备中可以安装播放器,电子设备通过播放器能够在显示屏上显示播放初始视频。
示例性的,播放器可以为设置在电子设备中的Deepin Movie播放器、mplayer播放器、mpv播放器、vlc播放器等,还可以为集成在其他应用程序或者网页中的视频播放控件或者插件。
初始视频中包括多帧图像。多帧图像的分辨率相同,均为第一分辨率。
S202、接收用户输入的第一指令,第一指令中包括第二分辨率。
第一指令为电子设备根据用户对播放器的播放窗口的分辨率进行调整的第一操作生成的。
第二分辨率为用户希望的播放窗口具有的分辨率。
当上述显示屏为触摸屏时,用户可以触摸、并拖拽播放器上的缩放控件进行缩放,实现向电子设备中输入第一操作,进而使得电子设备根据第一操作生成第一指令。
当电子设备的显示屏为非触摸屏时,用户可以通过外设(例如鼠标)拖拽播放器上的缩放控件,实现向电子设备中输入第一操作,进而使得电子设备根据第一操作生成第一指令。
S203、根据第一分辨率、第二分辨率和常量S,确定第三分辨率以及目标滤波器尺寸。
第三分辨率为用于播放初始视频的播放窗口的分辨率
常量S为SIMD指令一次能处理的像素个数,所述目标滤波器尺寸为S的n倍,n为1/2或正整数。
具体的,根据第一分辨率,在预设列表中确定与第一分辨率对应的多个窗口分辨率;预设列表包括多个视频分辨率、每个视频分辨率对应的多个可选滤波器尺寸、每个可选滤波器尺寸对应的一个窗口分辨率,可选滤波器尺寸为常量S和n的取值对应的乘积;
根据第二分辨率,在多个窗口分辨率中确定第三分辨率;
根据第三分辨率,确定目标滤波器尺寸。
示例性的,当常量S等于8时,预设列表具有如下表1所示的格式。
表1
Figure BDA0003125524880000101
视频分辨率指示视频的分辨率,窗口分辨率指示播放窗口的分辨率。
根据初始视频的第一分辨率在表1中查找第一分辨率对应的视频分辨率,进而根据第一分辨率对应的视频分辨率在表1中确定与第一分辨率对应的多个窗口分辨率。第一分辨率与第一分辨率对应的视频分辨率相同。
示例性的,第一分辨率为A1*B1时,第一分辨率对应的视频分辨率为A1*B1,因此可以在表1中确定与第一分辨率对应的多个窗口分辨率分别为A11*B11、A12*B12、A13*B13。
可选地,可以通过如下3种方式根据第二分辨率在多个窗口分辨率中确定第三分辨率。
方式1、针对多个窗口分辨率中的每个窗口分辨率;获取第二分辨率与窗口分辨率的差值;
将第二分辨率分别与多个窗口分辨率中的每个窗口分辨率的差值中最小差值对应的窗口分辨率,确定为第三分辨率。
针对每个窗口分辨率,第二分辨率与窗口分辨率的差值可以为第二分辨率的宽度与窗口分辨率的宽度的差值,也可以为第二分辨率的高度与窗口分辨率的高度的差值,还可以为第二分辨率的宽度与窗口分辨率的宽度的差值和第二分辨率的高度与窗口分辨率的高度的差值之和。
示例性的,当第二分辨率与窗口分辨率的差值为第二分辨率的宽度与窗口分辨率的宽度的差值和第二分辨率的高度与窗口分辨率的高度的差值之和时,以第二分辨率为A0*B0、窗口分辨率为A11*B11为例,对第二分辨率和窗口分辨率的差值进行说明。
确定第二分辨率A0*B0的宽度A0与窗口分辨率A11*B11的宽度A11的差值|A0-A11|;
确定高度B0与窗口分辨率A11*B11的高度B11的差值|B0-B11|;
将差值|A0-A11|与差值|B0-B11|的和值,确定为第二分辨率A0*B0与窗口分辨率A11*B11的差值;其中,||为取绝对值运算。
方式2,获取宽度对应的第一预设权重值和高度对应额第二预设权重值;
针对多个窗口分辨率中的每个窗口分辨率率,确定第二分辨率的宽度与窗口分辨率的宽度的差值与第一预设权重值的第一乘积、以及第二分辨率的高度与窗口分辨率的高度的差值与第二预设权重值的第二乘积;将第一乘积与第二乘积之和,确定为第二分辨率与窗口分辨率的差值;
将第二分辨率分别与多个窗口分辨率的差值中的最小值对应的窗口分辨率,确定为第三分辨率。
以第二分辨率为A0*B0,窗口分辨率为A11*B11为例,对第二分辨率与窗口分辨率的差值进行说明。
确定第二分辨率A0*B0的宽度A0与窗口分辨率A11*B11的宽度A11的差值|A0-A11|与第一预设权重值a的第一乘积a*|A0-A11|;
确定第二分辨率A0*B0的高度B0与窗口分辨率A11*B11的高度B11的差值|B0-B11|与第二预设权重值b的第二乘积b*|B0-B11|;
将第一乘积a*|A0-A11|与第二乘积b*|B0-B11|之和,确定为第二分辨率A0*B0与窗口分辨率A11*B11的差值。
其中,a大于b。示例性的,a=0.9,b=0.1,a、b还可以为其他,此处不再进行限定。
进一步地,在得到第三分辨率之后,可以将第三分辨率对应的可选滤波器尺寸,确定为目标滤波器尺寸。示例性的,第三分辨率为A12*B12时,可选滤波器尺寸为8。
需要说明的是,上述预设列表可以为实时得到,也可以为预先得到、并存储在电子设备中。
下面对实时得到预设列进行说明。
获取i个视频分辨率和j个可选滤波器尺寸,i和j为大于或等于1的整数;
针对每个视频分辨率,根据视频分辨率和j个可选滤波器尺寸中的每个可选滤波器尺寸,确定每个可选滤波器尺寸对应的窗口分辨率;
建立i个视频分辨率、j个可选滤波器尺寸、每个可选滤波器尺寸对应的窗口分辨率之间的映射关系,得到预设列表。
其中,i个视频分辨率互不相同,j个可选滤波器尺寸互不相同。
i个视频分辨率可以为对当前市场中存在的视频分辨率进行统计得到的。
j个可选滤波器尺寸可以为在实际应用中常用的滤波器尺寸。
可选地,i个视频分辨率可以为预设服务器发送的,j个可选滤波器尺寸可以为预先存储在电子设备中的。
需要说明的是,根据视频分辨率和j个可选滤波器尺寸中的每个可选滤波器尺寸,确定每个可选滤波器尺寸对应的窗口分辨率的方法,可以参见图3实施例中的S305,此处不再赘述。
S204、根据第三分辨率和目标滤波器尺寸,通过SIMD指令控制视频缩放模型对初始视频进行缩放处理,得到目标视频。
进一步地,可以通过具有第三分辨率的播放窗口,播放目标视频。
具体的,可以通过如下2种方式,得到目标视频。
方式1,根据第三分辨率和目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频中未播放的图像进行缩放处理,得到目标视频。
方式2,根据第三分辨率和目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频中的所有图像进行缩放处理,得到目标视频。
进一步地,在上述方式2的基础上,获取初始视频的第一索引,所述第一索引为当前正在播放的图像;
在目标视频包括的多个图像中确定具有第一索引的第一图像;第一图像为对当前正在播放的图像进行缩放处理之后的图像;
通过具有第三分辨率的播放窗口,依次播放目标视频中的第一图像以第一图像之后的其他图像。
在图2实施例提供的视频处理中,根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸,使得目标滤波器尺寸为能够为合适的滤波器尺寸,避免了现有技术中根据随机调整后的播放窗口的分辨率无法计算出较为合适的滤波器尺寸的问题,进一步地根据所述第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频进行缩放处理,得到目标视频,可以减少通过SIMD指令控制视频缩放模型对初始视频进行缩放的处理次数,提高对视频的缩放效率。
进一步地,在现有技术中,由于对视频缩放的处理效率较低,因此降低播放目标视频的流畅性,使得用户的观感体验较差。而在本申请中,由于提高了对视频的缩放效率,因此提高播放目标视频的流畅性,进而提高用户的观感体验。
与现有技术不同,在现有技术中,由于用户可以随机调整播放窗口的分辨率,因此可能无法计算出较为合适的滤波器尺寸(即尺寸不是S的n倍),使得通过SMID指令控制视频缩放模型对视频进行缩放的处理次数较多,导致对CPU(包括在电子设备中)的资源占用率较大,进而导致CPU可能无法正常处理其他进程的数据。而在申请中,由于目标滤波器尺寸为S的n倍,因此在根据第三分辨率和目标滤波器尺寸,通过SIMD指令控制视频缩放模型对初始视频进行缩放处理,可以减少通过SMID指令控制视频缩放模型对视频进行缩放的处理次数,降低对CPU的资源占用率,能够保障CPU正常处理其他进程的数据。
在上述实施例的基础上,下面结合图3对本申请实施例提供的视频处理方法做进一步地说明,具体的,请参见图3实施例。
图3为本申请实施例提供的视频处理方法的流程示意图二。如图3所示,该方法包括:
S301、获取初始视频的第一分辨率。
S302、接收用户输入的第一指令,第一指令中包括第二分辨率。
具体的,S301~S302的执行方法与S201~S202的执行方法相同,此处不再赘述S301~S302的执行过程。
S303、根据第一分辨率和第二分辨率,生成初始滤波器尺寸。
可选地,可以根据第一分辨率和第二分辨率的宽度,生成初始滤波器尺寸;也可以根据第一分辨率和第二分辨率的高度,生成初始滤波器尺寸。
示例性的,下面以根据第一分辨率和第二分辨率的宽度生成初始滤波器尺寸为例宽度方向为例,对生成初始滤波器尺寸的方法进行说明。
当第一分辨率的宽度为M、第二分辨率的宽度为X、视频缩放模型对应的缩放因子为C(不同视频缩放模型的C通常不同),若M>X,则滤波器尺寸F=1+((C×M)+X-1)/X;如果M<X(视频分辨率沿着水平方向放大),则滤波器尺寸F=1+C。
需要说明的是,M>X表示第一分辨率沿着水平方向缩小,M<X表示第一分辨率沿着水平方向放大。且,在实际的工程应用中,往往还需要考虑到滤波器的系数,这些系数由这些系数由高斯模糊方差、图像锐化、图像冗余等等参数来确定。本实施例中的滤波器尺寸的获取是理想状态下的简化处理,仅作为示例供本领域技术人员参考。
S304、根据初始滤波器尺寸和所述常量S,确定目标滤波器尺寸。
在一种可能的设计中,根据常量S,对初始滤波器尺寸进行取余数操作,得到余数;
若所述余数大于或等于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向上取整数操作,得到第一正整数,并将所述常量S和所述第一正整数的乘积确定为所述目标滤波器尺寸;
若所述余数小于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向下取整数操作,得到第二正整数,并将所述常量S和所述第二正整数的乘积确定为所述目标滤波器尺寸。
示例性的,当常量S等于8、初始滤波器尺寸等于15时,根据8对15进行取余数操作,得到余数7。
可选地,预设阈值为大于或等于2、且小于常量S的正整数。示例性的,当常量S等于8时,预设阈值可以为4。
示例性的,当预设阈值为4、常量S等于8、初始滤波器尺寸等于15时,余数7大于预设阈值4,因此将对15与8的比值15/8进行向上取整数操作
Figure BDA0003125524880000151
得到第一正整数等于2,其中,
Figure BDA0003125524880000152
为向上取整数操作。进一步地,将8与2的乘积,确定为目标滤波器尺寸(16)。
示例性的,当预设阈值为4、常量S等于8、初始滤波器尺寸等于9时,余数1小于预设阈值4,因此将对9与8的比值9/8进行向上取整数操作
Figure BDA0003125524880000153
得到第二正整数等于1,其中,
Figure BDA0003125524880000154
为向下取整数操作。进一步地,将8与1的乘积,确定为目标滤波器尺寸(9)。
S305、根据目标滤波器尺寸和第一分辨率,生成第三分辨率。
具体的,对滤波器尺寸F=1+((C×M)+X-1)/X,进行反向推倒,得到如下公式1:
X=(C×M-1)/(F-2) 公式1。
将F=目标滤波器尺寸、M=第一分辨率的宽度、C=视频缩放模型的缩放因子,代入上述公式1中,得到第三分辨率的宽度(即X的值)。
进一步地,根据如下公式2确定第三分辨率的高度:
M/N=X/Y 公式2。
将M=第一分辨率的宽度、N=第一分辨率的高度、X=第三分辨率的宽度,代入上述公式2中,得到第三分辨率的宽度(即Y的值)。
S306、根据第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对初始视频进行缩放处理,得到目标视频。
S307、通过具有第三分辨率的播放窗口,播放目标视频。
具体的,S306~S307的执行方法与S203~S204的执行方法相同,此处不再赘述S306~S307的执行过程。
在上述图3实施例中,首先结合第二分辨率,生成初始滤波器尺寸,进而根据初始滤波器尺寸和常量S,确定目标滤波器尺寸,使得目标滤波器尺寸为常量S的n倍,因此在通过SIMD指令控制视频缩放模型对初始视频进行缩放处理,得到目标视频的过程中,可以减少通过SIMD指令控制视频缩放模型对初始视频进行缩放的处理次数,提高对视频的缩放效率,降低对CPU的资源占用率,能够保障CPU正常处理其他进程的数据。
在实际应用中,电子设备可以实时检测是否接收到用户输入的分辨率,若检测到用户输入的分辨率,则可以执行本申请实施例所示的视频处理方法。或者若多次检测到用户输入的不同分辨率,针对每次检测到的用户输入的不同分辨率,在执行本申请实施例所示的视频处理方法之后,可以保存目标视频,当再次检测到用户输入的分辨率与上述多个不同分辨率中的一个相同,则直接从多个目标视频中获取与用户输入的分辨率对应的目标视频,从而避免再次对初始视频进行缩放,得到目标视频。
在上述实施例的基础上,下面结合图4对本申请实施例提供的视频处理方法做进一步地详细说明,具体的,请参见图4实施例。
图4为本申请实施例提供的视频处理方法的流程示意图三。如图4所示,该方法包括:
S401、获取初始视频的第一分辨率。
S402、接收用户输入的第一指令,第一指令中包括第二分辨率。
具体的,S401~S402的执行方法与S201~S202的执行方法相同,此处不再赘述S401~S402的执行过程。
S403、根据第一分辨率和所述常量S,确定多个窗口分辨率。
在一种可能的设计中,分别确定常量S与n的多个取值各自对应的乘积;
针对每个乘积,根据乘积、视频缩放模型的缩放因子以及第一分辨率的第一宽度,对第一预设模型进行求解处理,得到乘积对应的窗口分辨率的窗口宽度;
将第一分辨率的第一高度和所述窗口宽度的乘积、与第一宽度的比值,确定为乘积对应的窗口分辨率的窗口高度。
示例性的,当n等于1/2、1、2时,若S=8,则分别确定8与1/2、1、2对应的乘积依次为4(1/2)、8(8*1)、16(8*2)。
可选地,第一预设模型可以为上述公式1。
示例性的,为了得到乘积=8时对饮改的窗口分辨率,可以将F=8、M=第一分辨率的宽度、C=视频缩放模型的缩放因子,代入上述公式1中,得到乘积8对应的窗口分辨率的窗口宽度(即X的值)。
进一步地,将M=第一分辨率的宽度、N=第一高度、X=乘积8对应的窗口分辨率的窗口宽度,代入上述公式2中,得到乘积8对应的窗口分辨率的窗口高度(即Y的值)。
需要说明的是,将M=第一分辨率的宽度、N=第一高度、X=乘积8对应的窗口分辨率的窗口宽度,代入上述公式2之后,对公式2进行形变,可以得到:Y=X*N/M,即乘积对应的窗口分辨率的窗口高度等于第一分辨率的第一高度和所述窗口宽度的乘积与第一宽度的比值。
S404、根据第二分辨率,在多个窗口分辨率中确定第三分辨率。
可选地,可以通过如下2种方式根据第二分辨率在多个窗口分辨率中确定第三分辨率。
方式1,将多个窗口分辨率中与第二分辨率的差值最小的窗口分辨率,确定为。
针对方式1,可以根据图2实施例中的S203中所示的方式1和方式2,确定第三分辨率。
方式2,分别获取第二分辨率与多个窗口分辨率中的每个窗口分辨率的匹配度;将多个窗口分辨率中匹配度最大时对应的窗口分辨率,确定为第三分辨率。
针对方式2,针对每个窗口分辨率,对所述窗口分辨率的窗口宽度和窗口高度进行组合,得到第一向量;
对所述第二分辨率的第二宽度和第二高度进行组合,得到第二向量;
将所述第一向量和所述第二向量的余弦相似度,确定为所述第二分辨率与所述窗口分辨率的匹配度。
可选地,还可以将第一向量和第二向量的皮尔森相关系数(或者Jaccard相似系数等),确定为第二分辨率与窗口分辨率的匹配度。
S405、根据第三分辨率,确定所述目标滤波器尺寸。
将第三分辨率对应的乘积,确定为目标滤波器尺寸。
根据上述S404可知多个窗口分辨率中包括第三分辨率,根据上述S404可知多个窗口分辨率中的每个窗口分辨率具有对应的乘积,因此将第三分辨率对应的乘积,确定为目标滤波器尺寸。
可选地,在执行S403之后,可以创建多个乘积与多个窗口分辨率的映射关系。进一步地,在执行S405时,还可以根据映射关系,将多个窗口分辨率中的第三分辨率对应的乘积,确定为目标滤波器尺寸。
S406、根据第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对初始视频进行缩放处理,得到目标视频。
S407、通过具有第三分辨率的播放窗口,播放目标视频。
具体的,S406~S407的执行方法与S203~S204的执行方法相同,此处不再赘述S406~S407的执行过程。
在图4实施例中,可以根据第一分辨率和常量S,确定多个窗口分辨率,根据第二分辨率,在多个窗口分辨率中确定第三分辨率,根据第三分辨率,确定目标滤波器尺寸,可以也可以使得目标滤波器尺寸为常量S的n倍,提高了确定目标滤波器尺寸的灵活性,进一步地,在通过SIMD指令控制视频缩放模型对初始视频进行缩放处理,得到目标视频的过程中,可以减少通过SIMD指令控制视频缩放模型对初始视频进行缩放的处理次数,提高对视频的缩放效率,降低对CPU的资源占用率,能够保障CPU正常处理其他进程的数据。
在上述实施例中,初始视频可以为任意播放器,任意应用程序或者网页中的视频播放控件或者插件,因此可以对任意视频进行处理。而且由于对视频的缩放效率较高、对CPU的资源占用率降低,因此本可以应用于低端芯片中。
图5为为本申请实施例提供的视频处理装置的结构示意图一。如图4所示,视频处理装置10包括:获取模块11、接收模块12、确定模块13和处理模块14;其中,
获取模块11,用于获取初始视频的第一分辨率;
接收模块12,用于接收用户输入的第一指令,第一指令中包括第二分辨率;
确定模块13,用于根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸;所述第三分辨率为用于播放所述初始视频的播放窗口的分辨率,所述常量S为SIMD指令一次能处理的像素个数,所述目标滤波器尺寸为S的n倍,n为1/2或正整数;
处理模块14,用于根据所述第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频进行缩放处理,得到目标视频。
本申请实施例提供的视频处理装置可以执行上述方法实施例所示的技术方案,其实现原理以及有益效果类似,此处不再进行赘述。
图6为本申请实施例提供的视频处理装置的结构示意图二。如图6所示,视频处理装置10还包括:播放模块15;其中,
播放模块15,用于过具有第三分辨率的播放窗口,播放目标视频。
在一种可能的设计中,确定模块13具体用于:
根据所述第一分辨率和所述第二分辨率,生成初始滤波器尺寸;
根据所述初始滤波器尺寸和所述常量S,确定所述目标滤波器尺寸;
根据所述目标滤波器尺寸和所述第一分辨率,生成所述第三分辨率。
在一种可能的设计中,确定模块13具体用于:
根据所述常量S,对所述初始滤波器尺寸进行取余数操作,得到余数;
若所述余数大于或等于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向上取整数操作,得到第一正整数,并将所述常量S和所述第一正整数的乘积确定为所述目标滤波器尺寸;
若所述余数小于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向下取整数操作,得到第二正整数,并将所述常量S和所述第二正整数的乘积确定为所述目标滤波器尺寸。
在一种可能的设计中,确定模块13具体用于:
根据第一分辨率和所述常量S,确定多个窗口分辨率;
根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率;
根据所述第三分辨率,确定所述目标滤波器尺寸。
在一种可能的设计中,确定模块13具体用于:
分别确定所述常量S与所述n的多个取值各自对应的乘积;
针对每个乘积,根据所述乘积、所述视频缩放模型的缩放因子以及所述第一分辨率的第一宽度,对第一预设模型进行求解处理,得到所述乘积对应的窗口分辨率的窗口宽度;
将所述第一分辨率的第一高度和所述窗口宽度的乘积、与所述第一宽度的比值,确定为所述乘积对应的窗口分辨率的窗口高度。
在一种可能的设计中,确定模块13具体用于:
将所述多个窗口分辨率中与所述第二分辨率的差值最小的窗口分辨率,确定为所述第三分辨率。
在一种可能的设计中,确定模块13具体用于:
分别获取所述第二分辨率与所述多个窗口分辨率中的每个窗口分辨率的匹配度;
将所述多个窗口分辨率中匹配度最大时对应的窗口分辨率,确定为所述第三分辨率。
在一种可能的设计中,确定模块13具体用于:
针对所述每个窗口分辨率,对所述窗口分辨率的窗口宽度和窗口高度进行组合,得到第一向量;
对所述第二分辨率的第二宽度和第二高度进行组合,得到第二向量;
将所述第一向量和所述第二向量的余弦相似度,确定为所述第二分辨率与所述窗口分辨率的匹配度。
在一种可能的设计中,确定模块13具体用于:
将第三分辨率对应的乘积,确定为所述目标滤波器尺寸。
在一种可能的设计中,确定模块13具体用于:
根据所述第一分辨率,在预设列表中确定与所述第一分辨率对应的多个窗口分辨率;所述预设列表包括多个视频分辨率、每个视频分辨率对应的多个可选滤波器尺寸、每个可选滤波器尺寸对应的一个窗口分辨率,所述可选滤波器尺寸为所述常量S和所述n的取值对应的乘积;
根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率;
根据所述第三分辨率,确定所述目标滤波器尺寸。
本申请实施例提供的视频处理装置可以执行上述方法实施例所示的技术方案,其实现原理以及有益效果类似,此处不再进行赘述。
图7为本申请实施例提供的电子设备的硬件结构示意图。如图7所示,该电子设备20包括:收发器21、存储器22、处理器23,收发器21可以包括:发射器和/或接收器。该发射器还可称为发送器、发射机、发送端口或发送接口等类似描述,接收器还可称为接收器、接收机、接收端口或接收接口等类似描述。收发器21用于接收其他设备发送的数据或者向其他设备发送数据。示例性地,收发器21、存储器22、处理器23各部分之间通过总线24相互连接。
存储器22用于存储计算机执行指令。处理器23用于执行该存储器22所存储的计算机执行指令,使得处理器23执行上述任一方法实施例中所示的视频处理方法。处理器23的具体实现过程可参见上述方法实施例,其实现原理和技术效果类似,本实施例此处不再赘述。
在上述图7所示的实施例中,应理解,处理器可以是中央处理单元(CentralProcessing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital SignalProcessor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合申请所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。
存储器可能包含高速RAM存储器,也可能还包括非易失性存储NVM,例如磁盘存储器。
总线可以是工业标准体系结构(Industry Standard Architecture,ISA)总线、外部设备互连(Peripheral Component,PCI)总线或扩展工业标准体系结构(ExtendedIndustry Standard Architecture,EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示,本申请附图中的总线并不限定仅有一根总线或一种类型的总线。
本申请还提供一种计算机可读存储介质,计算机可读存储介质中存储有计算机执行指令,当处理器执行计算机执行指令时,实现如上的视频处理方法。
本申请还提供一种计算机程序产品,包括计算机程序,计算机程序被处理器执行时实现如上的视频处理方法。
实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一可读取存储器中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储器(存储介质)包括:只读存储器(read-only memory,ROM)、RAM、快闪存储器、硬盘、固态硬盘、磁带(magnetic tape)、软盘(floppy disk)、光盘(optical disc)及其任意组合。
本申请实施例是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理单元以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理单元执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,本领域的技术人员可以对本申请实施例进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请实施例的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
在本申请中,术语“包括”及其变形可以指非限制性的包括;术语“或”及其变形可以指“和/或”。本本申请中术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。本申请中,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

Claims (15)

1.一种视频处理方法,其特征在于,包括:
获取初始视频的第一分辨率;
接收用户输入的第一指令,所述第一指令中包括第二分辨率;
根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸;所述第三分辨率为用于播放所述初始视频的播放窗口的分辨率,所述常量S为SIMD指令一次能处理的像素个数,所述目标滤波器尺寸为S的n倍,n为1/2或正整数;
根据所述第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频进行缩放处理,得到目标视频。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸,包括:
根据所述第一分辨率和所述第二分辨率,生成初始滤波器尺寸;
根据所述初始滤波器尺寸和所述常量S,确定所述目标滤波器尺寸;
根据所述目标滤波器尺寸和所述第一分辨率,生成所述第三分辨率。
3.根据权利要求2所述的方法,其特征在于,所述根据所述初始滤波器尺寸和所述常量S,确定所述目标滤波器尺寸,包括:
根据所述常量S,对所述初始滤波器尺寸进行取余数操作,得到余数;
若所述余数大于或等于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向上取整数操作,得到第一正整数,并将所述常量S和所述第一正整数的乘积确定为所述目标滤波器尺寸;
若所述余数小于预设阈值,则对所述初始滤波器尺寸与所述常量S的比值进行向下取整数操作,得到第二正整数,并将所述常量S和所述第二正整数的乘积确定为所述目标滤波器尺寸。
4.根据权利要求1所述的方法,其特征在于,所述根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸,包括:
根据第一分辨率和所述常量S,确定多个窗口分辨率;
根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率;
根据所述第三分辨率,确定所述目标滤波器尺寸。
5.根据权利要求4所述的方法,其特征在于,所述根据第一分辨率和所述常量S,确定多个窗口分辨率,包括:
分别确定所述常量S与所述n的多个取值各自对应的乘积;
针对每个乘积,根据所述乘积、所述视频缩放模型的缩放因子以及所述第一分辨率的第一宽度,对第一预设模型进行求解处理,得到所述乘积对应的窗口分辨率的窗口宽度;
将所述第一分辨率的第一高度和所述窗口宽度的乘积、与所述第一宽度的比值,确定为所述乘积对应的窗口分辨率的窗口高度。
6.根据权利要求5所述的方法,其特征在于,根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率,包括:
将所述多个窗口分辨率中与所述第二分辨率的差值最小的窗口分辨率,确定为所述第三分辨率。
7.根据权利要求5所述的方法,其特征在于,所述根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率,包括:
分别获取所述第二分辨率与所述多个窗口分辨率中的每个窗口分辨率的匹配度;
将所述多个窗口分辨率中匹配度最大时对应的窗口分辨率,确定为所述第三分辨率。
8.根据权利要求7所述的方法,其特征在于,所述分别获取所述第二分辨率与所述多个窗口分辨率中的每个窗口分辨率的匹配度,包括:
针对所述每个窗口分辨率,对所述窗口分辨率的窗口宽度和窗口高度进行组合,得到第一向量;
对所述第二分辨率的第二宽度和第二高度进行组合,得到第二向量;
将所述第一向量和所述第二向量的余弦相似度,确定为所述第二分辨率与所述窗口分辨率的匹配度。
9.根据权利要求5-8中任一项所述的方法,其特征在于,所述根据所述第三分辨率,确定所述目标滤波器尺寸,包括:
将第三分辨率对应的乘积,确定为所述目标滤波器尺寸。
10.根据权利要求1所述的方法,其特征在于,所述根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸,包括:
根据所述第一分辨率,在预设列表中确定与所述第一分辨率对应的多个窗口分辨率;所述预设列表包括多个视频分辨率、每个视频分辨率对应的多个可选滤波器尺寸、每个可选滤波器尺寸对应的一个窗口分辨率,所述可选滤波器尺寸为所述常量S和所述n的取值对应的乘积;
根据所述第二分辨率,在所述多个窗口分辨率中确定所述第三分辨率;
根据所述第三分辨率,确定所述目标滤波器尺寸。
11.根据权利要求1-10任一项所述的方法,其特征在于,所述方法还包括:
通过具有所述第三分辨率的播放窗口,播放所述目标视频。
12.一种视频处理装置,其特征在于,包括:获取模块、接收模块、确定模块和处理模块;其中,
所述获取模块,用于获取初始视频的第一分辨率;
所述接收模块,用于接收用户输入的第一指令,所述第一指令中包括第二分辨率;
所述确定模块,用于根据所述第一分辨率、所述第二分辨率以及常量S,确定第三分辨率以及目标滤波器尺寸;所述第三分辨率为用于播放所述初始视频的播放窗口的分辨率,所述常量S为SIMD指令一次能处理的像素个数,所述目标滤波器尺寸为S的n倍,n为1/2或正整数;
所述处理模块,用于根据所述第三分辨率和所述目标滤波器尺寸,通过SIMD指令控制视频缩放模型对所述初始视频进行缩放处理,得到目标视频。
13.一种电子设备,其特征在于,包括:处理器和存储器;
所述存储器存储计算机执行指令;
所述处理器执行所述存储器存储的计算机执行指令,使得所述处理器执行如权利要求1至11任一项所述的视频处理方法。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如权利要求1至11任一项所述的视频处理方法。
15.一种计算机程序产品,其特征在于,包括计算机程序,所述计算机程序被处理器执行时实现如权利要求1至11任一项所述的视频处理方法。
CN202110688896.7A 2021-06-21 2021-06-21 视频处理方法、装置、设备、存储介质及程序产品 Pending CN115580750A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110688896.7A CN115580750A (zh) 2021-06-21 2021-06-21 视频处理方法、装置、设备、存储介质及程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110688896.7A CN115580750A (zh) 2021-06-21 2021-06-21 视频处理方法、装置、设备、存储介质及程序产品

Publications (1)

Publication Number Publication Date
CN115580750A true CN115580750A (zh) 2023-01-06

Family

ID=84579268

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110688896.7A Pending CN115580750A (zh) 2021-06-21 2021-06-21 视频处理方法、装置、设备、存储介质及程序产品

Country Status (1)

Country Link
CN (1) CN115580750A (zh)

Similar Documents

Publication Publication Date Title
CN110377264B (zh) 图层合成方法、装置、电子设备及存储介质
WO2017193576A1 (zh) 一种视频分辨率的适应方法、装置及虚拟现实终端
US9591237B2 (en) Automated generation of panning shots
CN110100251B (zh) 用于处理文档的设备、方法和计算机可读存储介质
US9373154B2 (en) Image processing apparatus having reduced line buffer size and associated method
JP2021021925A (ja) ミラーリング画面表示方法及びミラーリング画面回転方法
EP3232669A1 (en) Video frame processing method, video processing chip, motion estimation and motion compensation chip
EP3534616A1 (en) Method, device and system for playing 360 degree panoramic video
CN113126937B (zh) 一种显示终端调整方法及显示终端
CN108416722B (zh) 一种图像显示方法、存储介质及终端设备
CN103702032A (zh) 图像处理方法、装置和终端设备
CN112399123B (zh) 视频清晰度的调整方法、装置、电子设备及存储介质
CN110084765B (zh) 一种图像处理方法、图像处理装置及终端设备
US20170161871A1 (en) Method and electronic device for previewing picture on intelligent terminal
CN112019891A (zh) 一种多媒体内容的显示方法及装置、终端、存储介质
CN105228002A (zh) 显示设备及其控制方法
CN112464301A (zh) 一种图像显示方法及装置
CN115580750A (zh) 视频处理方法、装置、设备、存储介质及程序产品
CN109308690B (zh) 一种图像亮度均衡方法及终端
CN113810755B (zh) 全景视频预览的方法、装置、电子设备及存储介质
CN105094614A (zh) 图像显示方法及装置
US20150215602A1 (en) Method for ajdusting stereo image and image processing device using the same
CN111045576A (zh) 显示控制方法、显示控制装置、终端设备和电子设备
CN114302209A (zh) 视频处理方法、装置、电子设备及介质
CN113741845A (zh) 一种处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination