CN114007077A - 多媒体资源的处理方法、装置、电子设备和存储介质 - Google Patents
多媒体资源的处理方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN114007077A CN114007077A CN202111363859.5A CN202111363859A CN114007077A CN 114007077 A CN114007077 A CN 114007077A CN 202111363859 A CN202111363859 A CN 202111363859A CN 114007077 A CN114007077 A CN 114007077A
- Authority
- CN
- China
- Prior art keywords
- target
- resource
- processing
- multimedia
- processed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本公开提供了一种多媒体资源的处理方法、装置、电子设备及存储介质,涉及计算机处理技术领域,进一步涉及直播或智能家居技术领域,以至少解决相关技术中由于设备存在兼容性问题,从而导致难以实施对多媒体资源的处理的技术问题。具体实现方案为:获取第一资源包,其中,第一资源包中至少包括:待处理多媒体资源;选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源,其中,目标设备上的解码资源至少包括移植到目标设备中的目标处理程序;利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源;基于目标处理程序对目标多媒体资源进行编码,生成第二资源包。
Description
技术领域
本公开涉及计算机处理技术领域,进一步涉及直播或智能家居技术领域,尤其涉及一种多媒体资源的处理方法、装置、电子设备和存储介质。
背景技术
目前的MediaCodec(视频编解码工具)的缺点是一定程度上会依赖于设备,由于MediaCodec的硬解码是由厂商提供的,而不同厂商安卓设备的硬件之间差异很大,导致在硬解码上也会存在差异,即一样的程序,一些设备上可以正常跑,而在另一些设备上则会出现问题,此时就需要自行提供兼容性上的支持,否则难以实现对多媒体资源的处理。
发明内容
本公开提供了一种多媒体资源的处理方法、装置、电子设备和存储介质,以至少解决相关技术中由于设备存在兼容性问题,从而导致难以实施对多媒体资源的处理的技术问题。
根据本公开的一方面,提供了一种多媒体资源的处理方法,包括:获取第一资源包,其中,第一资源包中至少包括:待处理多媒体资源;选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源,其中,目标设备上的解码资源至少包括移植到目标设备中的目标处理程序;利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源;基于目标处理程序对目标多媒体资源进行编码,生成第二资源包。
根据本公开的又一方面,提供了一种多媒体资源的处理装置,包括:获取模块,用于获取第一资源包,其中,第一资源包中至少包括:待处理多媒体资源;解码模块,用于选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源,其中,目标设备上的解码资源至少包括移植到目标设备中的目标处理程序;处理模块,用于利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源;编码模块,用于基于目标处理程序对待处理多媒体资源进行编码,生成第二资源包。
根据本公开的又一方面,提供了一种电子设备,包括:至少一个处理器;以及与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行本公开提出的多媒体资源的处理方法。
根据本公开的又一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,计算机指令用于使计算机执行本公开提出的多媒体资源的处理方法。
根据本公开的又一方面,提供了一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行本公开提出的多媒体资源的处理方法。
在本公开中,首先获取第一资源包,其中,第一资源包中至少包括:待处理多媒体资源,然后选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源,其中,目标设备上的解码资源包括移植到目标设备中的目标处理程序,利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源,基于目标处理程序对目标多媒体资源进行编码,生成第二资源包,实现了对不同的设备提供兼容性以便实施对多媒体资源的处理。容易注意到的是,通过将目标处理程序移植到目标设备,可以在对第一资源包进行解码时,根据目标设备上的解码资源来对第一资源包进行解码,由于目标处理程序可以对任意的资源进行解码,因此,可以在目标设备上不存在能够快速进行解码的目标硬件时,利用目标处理程序对第一资源包进行解码,从而对解码后的待处理多媒体资源进行处理,进而解决相关技术中由于设备存在兼容性问题,从而导致难以实施对多媒体资源的处理的技术问题。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
图1是根据本公开实施例的一种用于实现多媒体资源的处理方法的计算机终端(或移动设备)的硬件结构框图;
图2是根据本公开实施例的一种多媒体资源的处理方法流程图;
图3是根据本公开实施例的另一种多媒体资源的处理方法流程图;
图4是根据本公开实施例的一种多媒体资源的处理装置的结构框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本公开实施例,提供了一种多媒体资源的处理方法,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
本公开实施例所提供的方法实施例可以在移动终端、计算机终端或者类似的电子设备中执行。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。图1示出了一种用于实现多媒体资源的处理方法的计算机终端(或移动设备)的硬件结构框图。
如图1所示,计算机终端100包括计算单元101,其可以根据存储在只读存储器(ROM)102中的计算机程序或者从存储单元108加载到随机访问存储器(RAM)103中的计算机程序,来执行各种适当的动作和处理。在RAM 103中,还可存储计算机终端100操作所需的各种程序和数据。计算单元101、ROM 102以及RAM 103通过总线104彼此相连。输入/输出(I/O)接口105也连接至总线104。
计算机终端100中的多个部件连接至I/O接口105,包括:输入单元106,例如键盘、鼠标等;输出单元107,例如各种类型的显示器、扬声器等;存储单元108,例如磁盘、光盘等;以及通信单元109,例如网卡、调制解调器、无线通信收发机等。通信单元109允许计算机终端100通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元101可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元101的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元101执行本文所描述的多媒体资源的处理方法。例如,在一些实施例中,多媒体资源的处理方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元108。在一些实施例中,计算机程序的部分或者全部可以经由ROM 102和/或通信单元109而被载入和/或安装到计算机终端100上。当计算机程序加载到RAM 103并由计算单元101执行时,可以执行本文描述的多媒体资源的处理方法的一个或多个步骤。备选地,在其他实施例中,计算单元101可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行多媒体资源的处理方法。
本文中描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
此处需要说明的是,在一些可选实施例中,上述图1所示的电子设备可以包括硬件元件(包括电路)、软件元件(包括存储在计算机可读介质上的计算机代码)、或硬件元件和软件元件两者的结合。应当指出的是,图1仅为特定具体实例的一个实例,并且旨在示出可存在于上述电子设备中的部件的类型。
在上述运行环境下,本公开提供了如图2所示的多媒体资源的处理方法,该方法可以由图1所示的计算机终端或者类似的电子设备执行。图2是根据本公开实施例提供的一种多媒体资源的处理方法流程图。如图2所示,该方法可以包括如下步骤:
步骤S202,获取第一资源包。
其中,第一资源包中至少包括:待处理多媒体资源。
上述的待处理多媒体资源可以是音频、视频等多媒体类型的资源。
在一种可选的实施例中,在处理待处理多媒体资源时,一般会将待处理多媒体资源打包传送给处理的设备中,也即,将待处理多媒体资源打包成上述的第一资源包传送至目标设备中进行处理。
在另一种可选的实施例中,可以利用FFmpeg(快速的音视频转化工具)来对待处理的多媒体资源进行编码,还可以利用发送设备上的硬件资源来对待处理多媒体资源进行编码。
步骤S204,选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源。
其中,目标设备上的解码资源至少包括移植到目标设备中的目标处理程序。
上述的目标设备为处理待处理多媒体资源的设备,目标设备中的解码资源可以是硬件也可以是软件。具体选择什么解码方式对第一资源包进行解码取决于目标设备上存在的解码资源。
上述的目标处理程序可以是对开源处理程序进行处理得到的,其中,开源处理程序可以为FFmpeg,目标处理程序可以为删除了FFmpeg中用不到的库和无用的编解码器以及混合器之后得到的。
在一种可选的实施例中,可以根据目标设备上存在的解码资源来对第一资源包进行解码,生成待处理多媒体资源,具体的,由于通过硬件解码比通过软件解码的速度更快,因此,在目标设备上存在用于解码的硬件资源时,可以优先使用硬件资源进行解码,若目标设备上不存在硬件资源,则可以使用软件资源进行解码。这样就可以使得各个设备都能够对第一资源包进行解码,能够有效的解决由于目标设备中不兼容用于解码的硬件资源从而导致难以对第一资源包进行解码并处理的技术问题。
步骤S206,利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源。
在一种可选的实施例中,在对第一资源包进行解码,得到待处理多媒体资源之后,可以利用目标处理程序对待处理多媒体资源进行处理,具体的,对待处理多媒体资源进行处理包括且不限于音视频的剪辑,裁剪,旋转,镜像,滤镜,加速,减速,获取关键帧图像,贴图,字幕添加等功能。
步骤S208,基于目标处理程序对目标多媒体资源进行编码,生成第二资源包。
在一种可选的实施例中,在生成目标多媒体资源之后,可以利用目标处理程序对目标多媒体资源进行编码,生成第二资源包,以便将第二资源包发送至其他设备,由于目标处理程序对应的目标开源程序所适用的范围较广,因此,通过目标处理程序对目标多媒体资源进行编码,能够提高生成的第二资源包在不同设备上的兼容性和通用性,以便不同的设备能够很快的第二资源包进行解码。
通过上述步骤,首先获取第一资源包,其中,第一资源包中至少包括:待处理多媒体资源,然后选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源,其中,目标设备上的解码资源包括移植到目标设备中的目标处理程序,利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源,基于目标处理程序对目标多媒体资源进行编码,生成第二资源包,实现了对不同的设备提供兼容性以便实施对多媒体资源的处理。容易注意到的是,通过将目标处理程序移植到目标设备,可以在对第一资源包进行解码时,根据目标设备上的解码资源来对第一资源包进行解码,由于目标处理程序可以对任意的资源进行解码,因此,可以在目标设备上不存在能够快速进行解码的目标硬件时,利用目标处理程序对第一资源包进行解码,从而对解码后的待处理多媒体资源进行处理,进而解决相关技术中由于设备存在兼容性问题,从而导致难以实施对多媒体资源的处理的技术问题。
可选地,解码资源还包括:目标硬件,选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源,包括:检测目标设备上是否存在目标硬件;响应于目标设备上存在目标硬件,利用目标硬件对第一资源包进行解码,生成待处理多媒体资源;响应于目标设备上不存在目标硬件,利用目标处理程序对第一资源包进行解码,生成待处理多媒体资源。
上述的目标硬件可以是目标设备上设置的用于对第一资源包进行解码的硬件,其中,目标硬件可以为MediaCodec、GPU(图像处理芯片)、DPU(深度学习处理单元)等硬件资源。
在一种可选的实施例中,可以先检测目标设备上是否存在目标硬件,若目标设备上存在目标硬件,则利用目标硬件对第一资源包进行解码,能够提高解码的速度,若目标设备上不存在目标硬件,则通过移植到目标设备上的目标处理程序对第一资源包进行解码,使得目标设备在不兼容目标硬件时,还可以通过目标处理程序实现对第一资源包的解码,生成待处理多媒体资源,从而实现在任意的设备上对多媒体资源进行处理的目的。进而实现保证在解码速度的同时兼容一些不支持目标硬件的设备,解决了存在设备对目标硬件不兼容的问题。
可选地,利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源,包括:获取目标处理任务,其中,目标处理任务包括:至少一个多媒体资源的处理类型;判断目标处理程序是否能够执行目标处理任务;响应于目标处理程序能够执行目标处理任务,利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源;响应于目标处理程序不能执行目标处理任务,基于目标处理任务确定目标接口,并利用目标接口处理目标处理任务。
上述的目标处理任务中对至少一个多媒体资源的处理类型至少包括:音视频倍速、水平反转、裁剪、加方框、叠加文字等功能。
在一种可选的实施例中,可以先获取目标处理任务,并根据目标处理任务中至少一个多媒体资源的处理类型判断目标处理程序是否能够执行目标处理任务,在目标处理任务中的至少一个多媒体资源的处理类型是目标处理程序能够处理的多媒体资源的处理类型时,可以直接利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源。在目标处理任务中的至少一个多媒体资源的处理类型中存在有目标处理程序不能处理的类型,则说明目标处理程序不能执行目标处理任务,此时,可以根据目标处理任务确定目标接口,并利用目标接口处理目标处理任务。
在另一种可选的实施例中,在利用目标处理程序对待处理多媒体资源进行处理时,可以使用目标处理程序的LibAVFilter(滤波器类)对待处理多媒体资源进行处理,生成目标多媒体资源。
上述的目标接口可以为OpenGL(软件接口)提供的额外的接口。
在另一种可选的实施例中,当目标处理程序无法完成自定义的处理时,可以使用OpenGL提供额外的接口,此时,可以通过该接口从外部传入自定义好的文件,就可以利用自定义好的文件对多媒体资源进行自定义的处理,从而完成对目标处理任务的处理。
在又一种可选的实施例中,若目标处理程序只能对目标处理任务的部分处理类型进行处理,则可以利用目标处理程序对部分处理类型处理完之后,通过目标接口接收剩余处理类型的文件,并利用该文件对剩余的处理类型进行处理。
可选地,响应于目标处理程序不能执行目标处理任务,基于目标处理任务确定目标接口,并利用目标接口处理目标处理任务,包括:响应于目标处理程序不能执行目标处理任务,基于目标处理任务中每个多媒体资源的处理类型确定目标接口;基于目标接口获取目标文件;利用目标文件处理目标处理任务。
上述的目标文件可以根据多媒体资源的处理类型确定。例如,多媒体资源的处理类型为通过自定义的滤镜效果,那么其对应的目标文件就可以为滤镜文件。
在一种可选的实施例中,在目标处理程序不能执行目标处理任务的情况下,可以根据每个多媒体资源的处理类型确定与该处理类型对应的目标接口,若处理类型为对多媒体资源进行自定义的滤镜处理,则可以使用OpenGL提供额外的接口,外部只需要传入Shadow(渲染)滤镜文件就可以实现自定义的滤镜效果。
可选地,该方法还包括:获取目标开源程序,其中,目标开源程序的内存占用资源大于目标处理程序的内存占用资源;获取目标设备对应的目标功能,其中,目标功能为目标设备待提供的功能;基于目标功能从目标开源程序中获取目标处理程序,并将目标处理程序安装至目标设备上。
上述的目标开源程序可以为FFmpeg。
在一种可选的实施例中,由于目标开源程序的内存占用资源较多,因此,在将目标开源程序移植到目标设备时,可以删除目标开源程序中的不用的库和无用的编码器、解码器以及混合器等,只保留目标设备常用格式的编码器和解码器以及混合器。
在另一种可选的实施例中,可以先获取目标开源程序,并获取目标设备所要实现的功能,例如,目标设备需要对音频处理而不需要对视频进行处理,则可以将目标开源程序中对视频进行处理的程序进行删除,从而减少目标开源程序所占用的内存,并生成删减之后的版本,即目标处理程序,然后将获取到的目标处理程序安装至目标设备中,以便在目标设备上通过目标处理程序对多媒体资源进行处理。
可选地,在利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源之后,该方法还包括:响应于目标设备上存在目标硬件,利用目标硬件对目标多媒体资源进行编码,生成第三资源包,其中,第三资源包由目标硬件进行解码。
在一种可选的实施例中,在获取到目标多媒体资源后,若用户需要将编码后的资源包应用在与目标设备型号相同的其他设备时,可以先检测目标设备上是否存在目标硬件,若是存在目标硬件,则可以利用目标硬件对目标多媒体资源进行编码,生成第三资源包,从而提高多媒体资源的编码速度,以便在与目标设备型号相同的其他设备上进行应用,由于相同型号的目标设备中的硬件资源基本相同,因此,在编码和解码时可以采用同一类型的硬件资源进行解码,从而提高编码和解码的效率。
下面结合示意图对本公开实施例提供的多媒体资源的处理方法进行介绍。
图3是根据本公开实施例的一种多媒体资源的处理方法的流程图,如图3所示,该方法包括如下步骤:
步骤S301,对目标开源程序进行预处理,生成目标处理程序;
上述的预处理可以为对目标开源程序进行裁剪包体积等。
步骤S302,将目标处理程序移植到目标设备中;
上述的目标设备可以为Android设备(安卓)。
步骤S303,获取第一资源包;
步骤S304,检测目标设备上是否存在目标硬件,若是,执行步骤S305,若否,执行步骤S306;
上述的目标硬件可以为MediaCodec。
步骤S305,利用目标硬件对第一资源包进行硬解码,生成待处理多媒体资源;
步骤S306,利用目标处理程序对第一资源包进行软解码,生成待处理多媒体资源;
步骤S307,利用目标处理程序对待处理多媒体资源进行处理;
步骤S308,判断是否需要对待处理多媒体资源进行自定义滤镜,若是,执行步骤S309,若否,执行步骤S310;
步骤S309,利用目标接口获取滤镜文件对待处理多媒体资源进行自定义滤镜,生成目标多媒体资源;
步骤S310,利用目标处理程序的滤波器类对待处理多媒体资源进行处理,生成目标多媒体资源;
步骤S311,利用目标处理程序对待处理多媒体资源进行编码,生成第二资源包。
进一步地,在生成第二资源包之后,可以将第二资源包发送至不同的设备进行使用。
通过上述步骤,该方案能显著降低Android开发音视频编辑需求的开发难度,并且在不同设备上的表现良好,兼容性高,减少适配设备的工作量,提高作效率,给智能家具设备团队以及各种需要短视频编辑能力的团队提供一种切实可行的方案。
本公开的技术方案中,所涉及的用户个人信息的收集、存储、使用、加工、传输、提供和公开等处理,均符合相关法律法规的规定,且不违背公序良俗。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本公开各个实施例的方法。
在本公开中还提供了一种多媒体资源的处理装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图4是根据本公开其中一实施例的一种多媒体资源的处理装置的结构框图,如图4所示,一种多媒体资源的处理装置400包括:
获取模块402,用于获取第一资源包,其中,第一资源包中至少包括:待处理多媒体资源;
解码模块404,用于选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源,其中,目标设备上的解码资源至少包括移植到目标设备中的目标处理程序;处理模块,用于利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源;
编码模块406,用于述目标处理程序对待处理多媒体资源进行编码,生成第二资源包。
可选地,解码资源还包括:目标硬件,解码模块还用于检测目标设备上是否存在目标硬件;响应于目标设备上存在目标硬件,利用目标硬件对第一资源包进行解码,生成待处理多媒体资源;响应于目标设备上不存在目标硬件,利用目标处理程序对第一资源包进行解码,生成待处理多媒体资源。
可选地,处理模块还用于获取目标处理任务,其中,目标处理任务包括:至少一个多媒体资源的处理类型;判断目标处理程序是否能够执行目标处理任务;响应于目标处理程序能够执行目标处理任务,利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源;响应于目标处理程序不能执行目标处理任务,基于目标处理任务确定目标接口,并利用目标接口处理目标处理任务。
可选地,处理模块还用于响应于目标处理程序不能执行目标处理任务,基于目标处理任务中每个多媒体资源的处理类型确定目标接口;基于目标接口获取目标文件;利用目标文件处理目标处理任务。
可选地,该装置还用于获取目标开源程序,其中,目标开源程序的内存占用资源大于目标处理程序的内存占用资源;获取目标设备对应的目标功能,其中,目标功能为目标设备待提供的功能;基于目标功能从目标开源程序中获取目标处理程序,并将目标处理程序安装至目标设备上。
可选地,该装置还用于响应于目标设备上存在目标硬件,利用目标硬件对待处理多媒体资源进行编码,生成第三资源包,其中,第三资源包由目标硬件进行解码。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,对于后者,可以通过以下方式实现,但不限于此:上述模块均位于同一处理器中;或者,上述各个模块以任意组合的形式分别位于不同的处理器中。
根据本公开的实施例,本公开还提供了一种电子设备,包括存储器和至少一个处理器,该存储器中存储有计算机指令,该处理器被设置为运行计算机指令以执行上述任一项方法实施例中的步骤。
可选地,上述电子设备还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
可选地,在本公开中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,获取第一资源包,其中,第一资源包中至少包括:待处理多媒体资源;
S2,选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源,其中,目标设备上的解码资源至少包括移植到目标设备中的目标处理程序;
S3,利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源;
S4,基于目标处理程序对目标多媒体资源进行编码,生成第二资源包。
可选地,本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例,本实施例在此不再赘述。
根据本公开的实施例,本公开还提供了一种存储有计算机指令的非瞬时计算机可读存储介质,该非瞬时计算机可读存储介质中存储有计算机指令,其中,该计算机指令被设置为运行时执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,上述非易失性存储介质可以被设置为存储用于执行以下步骤的计算机程序:
S1,获取第一资源包,其中,第一资源包中至少包括:待处理多媒体资源;
S2,选择目标设备上对应的解码资源对第一资源包进行解码,生成待处理多媒体资源,其中,目标设备上的解码资源至少包括移植到目标设备中的目标处理程序;
S3,利用目标处理程序对待处理多媒体资源进行处理,生成目标多媒体资源;
S4,基于目标处理程序对目标多媒体资源进行编码,生成第二资源包。
可选地,在本实施例中,上述非瞬时计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
根据本公开的实施例,本公开还提供了一种计算机程序产品。用于实施本公开的音频处理方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本公开所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM)、随机存取存储器(RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本公开的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本公开原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本公开的保护范围。
Claims (10)
1.一种多媒体资源的处理方法,包括:
获取第一资源包,其中,所述第一资源包中至少包括:待处理多媒体资源;
选择目标设备上对应的解码资源对所述第一资源包进行解码,生成所述待处理多媒体资源,其中,所述目标设备上的所述解码资源至少包括移植到所述目标设备中的目标处理程序;
利用所述目标处理程序对所述待处理多媒体资源进行处理,生成目标多媒体资源;
基于所述目标处理程序对所述目标多媒体资源进行编码,生成第二资源包。
2.根据权利要求1所述的方法,其中,所述解码资源还包括:目标硬件,选择目标设备上对应的解码资源对所述第一资源包进行解码,生成所述待处理多媒体资源,包括:
检测所述目标设备上是否存在目标硬件;
响应于所述目标设备上存在所述目标硬件,利用所述目标硬件对所述第一资源包进行解码,生成所述待处理多媒体资源;
响应于所述目标设备上不存在所述目标硬件,利用所述目标处理程序对所述第一资源包进行解码,生成所述待处理多媒体资源。
3.根据权利要求1所述的方法,其中,利用所述目标处理程序对所述待处理多媒体资源进行处理,生成目标多媒体资源,包括:
获取目标处理任务,其中,所述目标处理任务包括:至少一个多媒体资源的处理类型;
判断所述目标处理程序是否能够执行所述目标处理任务;
响应于所述目标处理程序能够执行所述目标处理任务,利用所述目标处理程序对所述待处理多媒体资源进行处理,生成所述目标多媒体资源;
响应于所述目标处理程序不能执行所述目标处理任务,基于所述目标处理任务确定目标接口,并利用所述目标接口处理所述目标处理任务。
4.根据权利要求3所述的方法,其中,响应于所述目标处理程序不能执行所述目标处理任务,基于所述目标处理任务确定目标接口,并利用所述目标接口处理所述目标处理任务,包括:
响应于所述目标处理程序不能执行所述目标处理任务,基于所述目标处理任务中每个多媒体资源的处理类型确定所述目标接口;
基于所述目标接口获取目标文件;
利用所述目标文件处理所述目标处理任务。
5.根据权利要求1所述的方法,其中,所述方法还包括:
获取目标开源程序,其中,所述目标开源程序的内存占用资源大于所述目标处理程序的内存占用资源;
获取所述目标设备对应的目标功能,其中,所述目标功能为所述目标设备待提供的功能;
基于所述目标功能从所述目标开源程序中获取所述目标处理程序,并将所述目标处理程序安装至所述目标设备上。
6.根据权利要求2所述的方法,其中,在利用所述目标处理程序对所述待处理多媒体资源进行处理,生成目标多媒体资源之后,所述方法还包括:
响应于所述目标设备上存在所述目标硬件,利用所述目标硬件对所述待处理多媒体资源进行编码,生成第三资源包,其中,所述第三资源包由所述目标硬件进行解码。
7.一种多媒体资源的处理装置,包括:
获取模块,用于获取第一资源包,其中,所述第一资源包中至少包括:待处理多媒体资源;
解码模块,用于选择目标设备上对应的解码资源对所述第一资源包进行解码,生成所述待处理多媒体资源,其中,所述目标设备上的所述解码资源至少包括移植到所述目标设备中的目标处理程序;处理模块,用于利用所述目标处理程序对所述待处理多媒体资源进行处理,生成目标多媒体资源;
编码模块,用于基于所述目标处理程序对所述待处理多媒体资源进行编码,生成第二资源包。
8.一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-6中任一项所述的方法。
9.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据权利要求1-6中任一项所述的方法。
10.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1-6中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111363859.5A CN114007077B (zh) | 2021-11-17 | 2021-11-17 | 多媒体资源的处理方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111363859.5A CN114007077B (zh) | 2021-11-17 | 2021-11-17 | 多媒体资源的处理方法、装置、电子设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114007077A true CN114007077A (zh) | 2022-02-01 |
CN114007077B CN114007077B (zh) | 2023-09-01 |
Family
ID=79929479
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111363859.5A Active CN114007077B (zh) | 2021-11-17 | 2021-11-17 | 多媒体资源的处理方法、装置、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114007077B (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110248986A1 (en) * | 2010-04-07 | 2011-10-13 | Apple Inc. | Intelligent media decoding |
CN103916678A (zh) * | 2012-12-31 | 2014-07-09 | 中国移动通信集团广东有限公司 | 多媒体数据转码方法、转码设备及多媒体数据播放系统 |
US20160295256A1 (en) * | 2015-03-31 | 2016-10-06 | Microsoft Technology Licensing, Llc | Digital content streaming from digital tv broadcast |
CN106792124A (zh) * | 2016-12-30 | 2017-05-31 | 合网络技术(北京)有限公司 | 多媒体资源解码播放方法及装置 |
CN107241646A (zh) * | 2017-07-12 | 2017-10-10 | 北京奇虎科技有限公司 | 多媒体视频的编辑方法及装置 |
WO2018121014A1 (zh) * | 2016-12-30 | 2018-07-05 | 广州虎牙信息科技有限公司 | 视频播放控制方法、装置及终端设备 |
CN109672893A (zh) * | 2018-11-30 | 2019-04-23 | 广州市百果园信息技术有限公司 | 一种视频解码方法、装置、设备和存储介质 |
CN109803146A (zh) * | 2019-04-04 | 2019-05-24 | 网易(杭州)网络有限公司 | 视频的二次压缩方法和装置 |
CN110505478A (zh) * | 2018-05-17 | 2019-11-26 | 阿里巴巴集团控股有限公司 | 解码资源的管理方法、装置、设备和介质 |
CN112087633A (zh) * | 2019-06-12 | 2020-12-15 | 腾讯科技(深圳)有限公司 | 视频解码方法、装置及存储介质 |
CN112422978A (zh) * | 2020-11-16 | 2021-02-26 | 浙江宇视科技有限公司 | 一种智能转码方法、装置、电子设备和存储介质 |
-
2021
- 2021-11-17 CN CN202111363859.5A patent/CN114007077B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110248986A1 (en) * | 2010-04-07 | 2011-10-13 | Apple Inc. | Intelligent media decoding |
CN103916678A (zh) * | 2012-12-31 | 2014-07-09 | 中国移动通信集团广东有限公司 | 多媒体数据转码方法、转码设备及多媒体数据播放系统 |
US20160295256A1 (en) * | 2015-03-31 | 2016-10-06 | Microsoft Technology Licensing, Llc | Digital content streaming from digital tv broadcast |
CN106792124A (zh) * | 2016-12-30 | 2017-05-31 | 合网络技术(北京)有限公司 | 多媒体资源解码播放方法及装置 |
WO2018121014A1 (zh) * | 2016-12-30 | 2018-07-05 | 广州虎牙信息科技有限公司 | 视频播放控制方法、装置及终端设备 |
CN107241646A (zh) * | 2017-07-12 | 2017-10-10 | 北京奇虎科技有限公司 | 多媒体视频的编辑方法及装置 |
CN110505478A (zh) * | 2018-05-17 | 2019-11-26 | 阿里巴巴集团控股有限公司 | 解码资源的管理方法、装置、设备和介质 |
CN109672893A (zh) * | 2018-11-30 | 2019-04-23 | 广州市百果园信息技术有限公司 | 一种视频解码方法、装置、设备和存储介质 |
CN109803146A (zh) * | 2019-04-04 | 2019-05-24 | 网易(杭州)网络有限公司 | 视频的二次压缩方法和装置 |
CN112087633A (zh) * | 2019-06-12 | 2020-12-15 | 腾讯科技(深圳)有限公司 | 视频解码方法、装置及存储介质 |
CN112422978A (zh) * | 2020-11-16 | 2021-02-26 | 浙江宇视科技有限公司 | 一种智能转码方法、装置、电子设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114007077B (zh) | 2023-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110908697B (zh) | 一种资源打包方法、装置、服务器及存储介质 | |
CN107404418B (zh) | 互联网产品测试方法、装置、设备及存储介质 | |
CN110908707B (zh) | 一种资源打包方法、装置、服务器及存储介质 | |
CN113990354B (zh) | 基于Linux的音频控制方法、装置、设备和存储介质 | |
CN103327021B (zh) | 一种多设备互动方法及相关设备、系统 | |
CN111061489B (zh) | 一种多平台编译检测方法、装置、设备及介质 | |
CN109218393B (zh) | 一种推送的实现方法、装置、设备和计算机存储介质 | |
CN111158690A (zh) | 桌面应用框架、构建方法、桌面应用运行方法及存储介质 | |
CN110888862A (zh) | 数据存储、查询方法、装置、服务器和存储介质 | |
CN113127050A (zh) | 一种应用资源打包过程监控方法、装置、设备和介质 | |
CN114244821B (zh) | 数据处理方法、装置、设备、电子设备和存储介质 | |
CN112288841B (zh) | 一种渲染框架图的创建方法和装置 | |
CN112835632A (zh) | 一种端能力的调用方法、设备和计算机存储介质 | |
CN114503438A (zh) | 用于视频编解码的半解耦分区 | |
CN109743643B (zh) | 楼宇对讲系统的处理方法及装置 | |
CN114007077B (zh) | 多媒体资源的处理方法、装置、电子设备和存储介质 | |
CN110548285B (zh) | 游戏通信控制方法及装置、介质及电子设备 | |
CN114095781A (zh) | 多媒体数据处理方法、装置、电子设备及存储介质 | |
CN112084099A (zh) | 基于主机获取报警状态值的方法、装置、设备及存储介质 | |
US8495033B2 (en) | Data processing | |
CN112764828B (zh) | 业务逻辑管理方法及装置、计算机设备和介质 | |
CN113691813B (zh) | 一种转码卡使用方法、系统、存储介质及设备 | |
CN113127051B (zh) | 一种应用资源打包过程监控方法、装置、设备和介质 | |
CN109388536B (zh) | 一种数据收集的方法和装置 | |
CN115543149A (zh) | 应用程序窗口投屏方法、投屏装置、智能设备、投屏系统及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |