CN114625891A - 多媒体数据处理方法、装置和系统 - Google Patents

多媒体数据处理方法、装置和系统 Download PDF

Info

Publication number
CN114625891A
CN114625891A CN202011453197.6A CN202011453197A CN114625891A CN 114625891 A CN114625891 A CN 114625891A CN 202011453197 A CN202011453197 A CN 202011453197A CN 114625891 A CN114625891 A CN 114625891A
Authority
CN
China
Prior art keywords
multimedia data
input
processing
data processing
cache
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011453197.6A
Other languages
English (en)
Inventor
吴郎
葛敏锋
周晶晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Novastar Electronic Technology Co Ltd
Original Assignee
Xian Novastar Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Novastar Electronic Technology Co Ltd filed Critical Xian Novastar Electronic Technology Co Ltd
Priority to CN202011453197.6A priority Critical patent/CN114625891A/zh
Publication of CN114625891A publication Critical patent/CN114625891A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/41Indexing; Data structures therefor; Storage structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Memory System Of A Hierarchy Structure (AREA)

Abstract

本发明公开了一种多媒体数据处理方法、装置和系统。其中,该方法包括:接收至少两个多媒体数据源设备发送的多媒体数据;对每个多媒体数据源发送的多媒体数据分配对应的输入缓存;分时调用上述多媒体数据进行处理,并输出处理后的多媒体数据。本发明解决了由于现有技术在处理多输入源时需要分别分配对应的Scaler模块,导致Scaler模块资源浪费的技术问题。

Description

多媒体数据处理方法、装置和系统
技术领域
本发明涉及显示控制领域,具体而言,涉及一种多媒体数据处理方法、装置和系统。
背景技术
在视频显示领域的各种设备中,将视频源信息做缩放处理是大多设备的必备功能之一。通常设备是将视频输入源信息以行列为单位缩放后分多次存入双倍速率同步动态随机存储器(Double Data Rate SDRAM,DDR SDRAM,简称DDR)内,等待一帧源信息完全缩放存入DDR后,后续的功能模块再将DDR中的信息统一读出再处理。同时,一般视频设备的输入源都不止一个,通常都在6、7个左右,甚至输入视频源多的可达十几个或几十个。
在相关技术中,现有的设备,有将视频源缩放后在处理的功能时,常用的处理框架如图1所示,图1是现有技术的一种视频缩放处理的框架示意图。其中,视频源输入信息后进入定标器Scaler模块内进行缩放,缩放后再以视频流信息输出,后面添加一个缓存Buf用于缓存Scaler模块缩放后的数据,当数据达到预定数量时,写入DDR中。
其中,视频输入的源可以来自外部直接输入的视频源,也可以是外部输入源经过其他处理(如色温调整等)或内部产生的视频源。Scaler模块包括ScaleIn Buf和Scaler核两部分,Scaler核是缩放的核心模块,用于视频的缩放计算处理;ScalerIn Buf根据Scaler核处理算法的需要缓存几行输入源数据(一般2~6行)。Scaler模块处理完成后将数据写入DDR中,写入时由于Scaler模块输出的数据较慢,不能长时间占用DDR,所以先将Scaler模块输出的数据写入输出缓存,当缓存中存够预定量的数据,例如写入一行数据时,将缓存中的已有的数据一次性全部写入DDR,然后Scaler模块处理输出的数据继续往输出缓存中存储,如此循环直到帧数据处理完成。
该系统框架中,常用的视频源输入像素频率不超过165MHz,Scaler模块的处理像素速度一般不低于200MHz,DDR的写入像素的速度为3G以上。
当需要处理的视频输入多于一个的时候,常用的处理框架就是依照输入源的个数,每个输入源使用一个Scaler处理模块和一个输出缓存Buf,然后分时占用DDR,将各自的数据写入DDR。如图2所示,图2是相关技术中多输入视频缩放处理框架的示意图。
但是上述相关技术中由于每个输入源的速率都低于Scaler模块的处理能力,浪费Scaler模块的处理性能。多个输入源时也会使用多个Scaler核,浪费Scaler核资源。
每个通道都需要一个输出缓存作为缓存,对接写入DDR中,多通道时,多个输出缓存会消耗很多设计资源。在FPGA等器件实现时,由于DDR接口位宽一般为512bit,每个Buf都会使用一个512bit的Buf会消耗8个BRAM,N个输入源就消耗8*N个BRAM。
针对上述由于现有技术在处理多输入源时需要分别分配对应的Scaler模块,导致Scaler模块资源浪费的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种多媒体数据处理方法、装置和系统,以至少解决由于现有技术在处理多输入源时需要分别分配对应的Scaler模块,导致Scaler模块资源浪费的技术问题。
根据本发明实施例的另一方面,还提供了一种多媒体数据处理方法,包括:接收至少两个多媒体数据源设备发送的多媒体数据;对每个多媒体数据源发送的多媒体数据分配对应的输入缓存;分时调用上述多媒体数据进行处理,并输出处理后的多媒体数据。
可选的,上述对每个多媒体数据源设备发送的多媒体数据分配对应的输入缓存包括:依据上述多媒体数据源设备的个数确定对应的输入缓存的个数;依据数据处理核的速率与每个多媒体数据源设备的输入数据速率的比值,确定上述数据处理核的输入通道数;依据上述输入通道数对应的通道将上述多媒体数据分别发送至对应的输入缓存。
可选的,上述分时调用上述多媒体数据进行处理包括:通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至输出缓存。
可选的,上述输出处理后的多媒体数据包括:将处理后的每个输入缓存中缓存的多媒体数据输出至上述输出缓存;缓存上述数据处理核输出的处理后的多媒体数据;向外接设备发送上述多媒体数据。
根据本发明实施例的一个方面,提供了一种多媒体数据处理装置,包括:第一存储模块,用于缓存对应的多媒体数据源设备输出的多媒体数据;数据处理模块,用于通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至第二存储模块;第二存储模块,用于缓存上述数据处理模块输出的处理后的多媒体数据,以使得上述外接设备根据当前处理进程调用上述数据处理模块的多媒体数据。
根据本发明实施例的另一方面,还提供了一种多媒体数据处理系统,包括:至少两个多媒体数据源设备,多媒体数据处理装置和外接设备,其中,上述至少两个多媒体数据源设备与上述多媒体数据处理装置连接,用于将每个多媒体数据源设备的多媒体数据发送至上述多媒体数据处理设备;上述多媒体数据处理装置的一端与上述至少两个多媒体数据源设备连接,上述多媒体数据处理装置的另一端与上述外接设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至上述外接设备;上述外接设备,用于调用上述多媒体数据处理装置输出的上述多媒体数据。
可选的,上述多媒体数据处理装置包括:至少两个输入缓存,数据处理核和输出缓存,其中,上述至少两个输入缓存与对应的多媒体数据源设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;上述数据处理核与上述至少两个输入缓存连接,用于通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至上述输出缓存;上述输出缓存的一端与上述数据处理核连接,上述输出缓存的另一端与外接设备连接,用于缓存上述数据处理核输出的处理后的多媒体数据,以使得上述外接设备根据当前处理进程调用上述数据处理核的多媒体数据。
可选的,外接设备包括:存储设备、通信设备或显示设备中至少一种。
根据本发明实施例的另一方面,还提供了一种非易失性存储介质,上述非易失性存储介质包括存储的程序,其中,在上述程序运行时控制上述非易失性存储介质所在设备执行上述的多媒体数据处理方法。
根据本发明实施例的另一方面,还提供了一种处理器,上述处理器用于运行程序,其中,上述程序运行时执行上述的多媒体数据处理方法。
在本发明实施例中,通过至少两个输入缓存与对应的多媒体数据源设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;上述数据处理核与上述至少两个输入缓存连接,用于通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至上述输出缓存;上述输出缓存的一端与上述数据处理核连接,上述输出缓存的另一端与外接设备连接,用于缓存上述数据处理核输出的处理后的多媒体数据,以使得上述外接设备根据当前处理进程调用上述数据处理核的多媒体数据,本申请实施例通过使用高速的数据处理核作为多个多媒体数据的处理通道,达到了提升单通道处理多个多媒体数据的处理性能的目的,从而实现了降低处理资源的使用浪费的技术效果,进而解决了由于现有技术在处理多输入源时需要分别分配对应的Scaler模块,导致Scaler模块资源浪费的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是现有技术的一种视频缩放处理的框架示意图;
图2是相关技术的一种多输入视频缩放处理框架的示意图;
图3是根据本发明实施例的一种多媒体数据处理装置的结构示意图;
图4是根据本发明实施例的一种可选的多媒体数据处理装置的结构示意图;
图5是根据本发明实施例的一种多媒体数据处理系统的结构示意图;
图6是根据本发明实施例的一种多媒体数据处理方法的流程图;
图7是根据本发明实施例的一种多媒体数据处理装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
现场可编辑逻辑门阵列(FPGA,Field Programmable Gate Array)是一种可编程器件。
双倍速率同步动态随机存储器(DDR SDRAM):是内存的一种。
nPPC(n Pixel Per Clock):是指每时钟下n个(显示器或者电视机图像的)像素点。
定标器(scaler),也称为缩放器,用于平板显示系统的一种高度集成的图像处理芯片,负责将不同分辨率将输入图像进行缩放并在缩放后再以视频流信息输。
实施例1
根据本发明实施例,提供了一种多媒体数据处理装置的实施例,该装置包括:第一存储模块,用于缓存对应的多媒体数据源设备输出的多媒体数据;数据处理模块,用于通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至第二存储模块;第二存储模块,用于缓存上述数据处理模块输出的处理后的多媒体数据,以使得上述外接设备根据当前处理进程调用上述数据处理模块的多媒体数据。
具体的,图3是根据本发明实施例的一种多媒体数据处理装置的结构示意图,如图3所示,至少两个输入缓存100(即如图3所示出的输入缓存100a、输入缓存100b、……输入缓存100n,本申请实施例中的第一存储模块),数据处理核102(即,本申请实施例中的数据处理模块)和输出缓存104(即,本申请实施例中的第二存储模块),本申请实施例中的多媒体数据处理装置可以适用于FPGA中,其中:
上述至少两个输入缓存100与对应的多媒体数据源设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;上述数据处理核102与上述至少两个输入缓存100连接,用于通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至上述输出缓存;上述输出缓存104的一端与上述数据处理核102连接,上述输出缓存104的另一端与外接设备连接,用于缓存上述数据处理核输出的处理后的多媒体数据,以使得上述外接设备根据当前处理进程调用上述数据处理核的多媒体数据。
在本发明实施例中,通过至少两个输入缓存与对应的多媒体数据源设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;上述数据处理核与上述至少两个输入缓存连接,用于通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至上述输出缓存;上述输出缓存的一端与上述数据处理核连接,上述输出缓存的另一端与外接设备连接,用于缓存上述数据处理核输出的处理后的多媒体数据,以使得上述外接设备根据当前处理进程调用上述数据处理核的多媒体数据,本申请实施例通过使用高速的数据处理核作为多个多媒体数据的处理通道,达到了提升单通道处理多个多媒体数据的处理性能的目的,从而实现了降低处理资源的使用浪费的技术效果,进而解决了由于现有技术在处理多输入源时需要分别分配对应的Scaler模块,导致Scaler模块资源浪费的技术问题。
需要说明的是,本申请实施例可以但不限于应用于显示控制领域,例如,媒体播放领域等。
在本申请实施例中,多媒体数据处理装置中设置有数据处理核,与至少两个输入缓存连接,可以通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至输出缓存,进而外接设备根据当前处理进程确定是否调用缓存在输出缓存中的多媒体数据。
可选的,本申请实施例只需要通过局部提升数据处理核(例如,Scaler核)的数据处理速度,以及数据处理核的数据处理性能,多视频输入源设备通过对应的输入缓存公用数据处理核的方式,实现使用1个高速处理通道即可实现处理多个视频源设备输入的多媒体数据的技术效果,减少了处理资源的使用。
并且,本申请实施例中由于同时减少处理通道的数据继而减少后续输出缓存中的缓存数据,从而减少存储资源的使用。最终使实现在针对相同数据视频输入源的缩放处理功能时,很大程度上减少了计算资源和存储资源的浪费。
作为一种可选的实施例,如图4所示,本申请实施例可以但不限于基于DDR+Scaler的高速通道的多视频输入处理框架实现,在多个多媒体数据源设备(例如图4所示的video1、video2……videoN)输入的多媒体数据(例如,视频数据、音频数据等)进行缩放处理时,通过局部提升数据处理核的处理带宽性能,使之具有同时处理多个多媒体数据源设备的多媒体数据的能力,然后各输入源输入数据先缓存入各自的输入缓存(例如,ScalerInBuf)进行缓存,高速的数据处理核作为数据处理通道分时循环的处理每个输入缓存中的缓存数据,并在高速处理完成后统一将缓存数据输出至一个输出缓存(例如,ScalerOut Buf)中并最终写入DDR,通过本申请实施例,减少了DDR的访问接口数量,从而减少输出缓存的个数和存储资源的使用量。
作为一种可选的实施例,每个Scaler核最多能处理输入通道的个数,取决于Scaler核处理数据的速率与各视频输入源输入数据的速率的比值。
例如,当前1PPC的视频输入源,最高输入频率不超过165MHz;FPGA中使用局部高速设计,使Scaler核的处理带宽达到660MHz,则每个高速Scaler处理通道就可以同时处理660/165=4个视频输入源并将其存储至DDR中。同理,将本申请实施例所提供方案应用到专用集成电路ASIC设计中,可以将Scaler核的处理速度提升到2.4GHz以上,该高速处理通道将能处理14个以上的视频输入源。
需要说明的是,将高速通道处理图像性能从每时钟处理1PPC像素改为nPPC,或者直接使用n个高速图像处理通道,以达到增加处理输入源个数或带宽规格的方案,也应视为属于本发明方案(高速处理架构)内容的应用。
仍需要说明的是,简单的将该发明方案中高速处理通道用于缩放的Scaler核心模块替换为其他功能的模块以实现其他功能,如缩放功能改为高速抠图功能,每个通道实现多个视频输入的抠图能力,也应视为属于本发明方案(高速处理架构)内容的应用。
可选的,外接设备包括:存储设备、通信设备或显示设备中至少一种。
还需要说明的是,将当前框架做部分删除,如删除高速处理通道后面写入DDR的功能,改为其他写入存储结构,或者改为直接以其他接口形式输出,也应视为属于本发明方案(高速处理架构)内容的应用。
实施例2
根据本发明实施例,提供了一种多媒体数据处理系统的实施例,图5是根据本发明实施例的一种多媒体数据处理系统的结构示意图,如图5所示,该装置包括:至少两个多媒体数据源设备500(图5仅示意性绘制),多媒体数据处理装置502和外接设备504,其中:
上述至少两个多媒体数据源设备与上述多媒体数据处理装置连接,用于将每个多媒体数据源设备的多媒体数据发送至上述多媒体数据处理设备;上述多媒体数据处理装置的一端与上述至少两个多媒体数据源设备连接,上述多媒体数据处理装置的另一端与上述外接设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至上述外接设备;上述外接设备,用于调用上述多媒体数据处理装置输出的上述多媒体数据。
在本发明实施例中,通过至少两个多媒体数据源设备与上述多媒体数据处理装置连接,用于将每个多媒体数据源设备的多媒体数据发送至上述多媒体数据处理设备;上述多媒体数据处理装置的一端与上述至少两个多媒体数据源设备连接,上述多媒体数据处理装置的另一端与上述外接设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至上述外接设备;上述外接设备,用于调用上述多媒体数据处理装置输出的上述多媒体数据,本申请实施例通过使用高速的数据处理核作为多个多媒体数据的处理通道,达到了提升单通道处理多个多媒体数据的处理性能的目的,从而实现了降低处理资源的使用浪费的技术效果,进而解决了由于现有技术在处理多输入源时需要分别分配对应的Scaler模块,导致Scaler模块资源浪费的技术问题。
在一种可选的实施例中,上述多媒体数据处理装置包括:至少两个输入缓存,数据处理核和输出缓存,其中,
上述至少两个输入缓存与对应的多媒体数据源设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;上述数据处理核与上述至少两个输入缓存连接,用于通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至上述输出缓存;上述输出缓存的一端与上述数据处理核连接,上述输出缓存的另一端与外接设备连接,用于缓存上述数据处理核输出的处理后的多媒体数据,以使得上述外接设备根据当前处理进程调用上述数据处理核的多媒体数据。
需要说明的是,该多媒体数据处理系统实施例的可选或优选实施方式可以参见上述多媒体数据处理装置实施例中的相关描述,此处不再赘述。
实施例3
根据本发明实施例,提供了一种多媒体数据处理方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图6是根据本发明实施例的一种多媒体数据处理方法的流程图,如图6所示,该方法包括如下步骤:
步骤S602,接收至少两个多媒体数据源设备发送的多媒体数据;
步骤S604,对每个多媒体数据源发送的多媒体数据分配对应的输入缓存;
步骤S606,分时调用上述多媒体数据进行处理,并输出处理后的多媒体数据。
在本发明实施例中,通过接收至少两个多媒体数据源设备发送的多媒体数据;对每个多媒体数据源发送的多媒体数据分配对应的输入缓存;分别调用上述多媒体数据进行处理,并输出处理后的多媒体数据,本申请实施例通过使用高速的数据处理核作为多个多媒体数据的处理通道,达到了提升单通道处理多个多媒体数据的处理性能的目的,从而实现了降低处理资源的使用浪费的技术效果,进而解决了由于现有技术在处理多输入源时需要分别分配对应的Scaler模块,导致Scaler模块资源浪费的技术问题。
需要说明的是,本申请实施例可以但不限于应用于显示控制领域,例如,媒体播放领域等,本申请实施例所提供的多媒体数据处理方法应用于任意一项上述的多媒体数据处理系统中。
在本申请实施例中,多媒体数据处理装置中设置有数据处理核,与至少两个输入缓存连接,可以通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至输出缓存,进而外接设备根据当前处理进程确定是否调用缓存在输出缓存中的多媒体数据。
在一种可选的实施例中,上述对每个多媒体数据源设备发送的多媒体数据分配对应的输入缓存包括:
步骤S202,依据上述多媒体数据源设备的个数确定对应的输入缓存的个数;
步骤S204,依据数据处理核的速率与每个多媒体数据源设备的输入数据速率的比值,确定上述数据处理核的输入通道数;
步骤S206,依据上述输入通道数对应的通道将上述多媒体数据分别发送至对应的输入缓存。
在本申请实施例中,在接收到多个多媒体数据源设备发送的多媒体数据时,可以依据上述多媒体数据源设备的个数确定对应的输入缓存的个数;再依据数据处理核的速率与每个多媒体数据源设备的输入数据速率的比值,确定上述数据处理核的输入通道数,进而依据上述输入通道数对应的通道将上述多媒体数据分别发送至对应的输入缓存。
在一种可选的实施例中,上述分时调用上述多媒体数据进行处理包括:
步骤S302,通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至输出缓存。
通过本申请实施例,只需要通过局部提升数据处理核(例如,Scaler核)的数据处理速度,以及数据处理核的数据处理性能,多视频输入源设备通过对应的输入缓存公用数据处理核的方式,实现使用1个高速处理通道即可实现处理多个视频源设备输入的多媒体数据的技术效果,减少了处理资源的使用。
在一种可选的实施例中,上述输出处理后的多媒体数据包括:
步骤S402,将处理后的每个输入缓存中缓存的多媒体数据输出至上述输出缓存;
步骤S404,缓存上述数据处理核输出的处理后的多媒体数据;
步骤S406,向外接设备发送上述多媒体数据。
作为一种可选的实施例,在将处理后的每个输入缓存中缓存的多媒体数据输出至输出缓存之后,通过将处理后的每个输入缓存中缓存的多媒体数据输出至上述输出缓存;再将缓存的数据处理核输出的处理后的多媒体数据发送至外接设备。
通过本申请实施例,由于同时减少处理通道的数据继而减少后续输出缓存中的缓存数据,从而减少存储资源的使用。最终使实现在针对相同数据视频输入源的缩放处理功能时,很大程度上减少了计算资源和存储资源的浪费。
需要说明的是,本实施例的可选或优选实施方式可以参见实施例1中的相关描述,此处不再赘述。
实施例4
根据本发明实施例,还提供了一种用于实施多媒体数据处理方法的装置实施例,图7是根据本发明实施例的一种多媒体数据处理装置的结构示意图,如图7所示,上述多媒体数据处理装置,包括:接收模块700、分配模块702和处理模块704,其中:
接收模块700,用于接收至少两个多媒体数据源设备发送的多媒体数据;分配模块702,用于对每个多媒体数据源发送的多媒体数据分配对应的输入缓存;处理模块704,用于分时调用上述多媒体数据进行处理,并输出处理后的多媒体数据。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,例如,对于后者,可以通过以下方式实现:上述各个模块可以位于同一处理器中;或者,上述各个模块以任意组合的方式位于不同的处理器中。
此处需要说明的是,上述接收模块700、分配模块702和处理模块704对应于实施例3中的步骤S602至步骤S606,上述模块与对应的步骤所实现的实例和应用场景相同,但不限于上述实施例1-3中任意一个示例所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在计算机终端中。
需要说明的是,本实施例的可选或优选实施方式可以参见实施例1中的相关描述,此处不再赘述。
上述的多媒体数据处理装置还可以包括处理器和存储器,上述接收模块700、分配模块702和处理模块704等均作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核,由内核去存储器中调取相应的程序单元,上述内核可以设置一个或以上。存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
实施例5
根据本申请实施例,还提供了一种非易失性存储介质的实施例。可选地,在本实施例中,上述非易失性存储介质包括存储的程序,其中,在上述程序运行时控制上述非易失性存储介质所在设备执行上述任意一种多媒体数据处理方法。
可选地,在本实施例中,上述非易失性存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中,或者位于移动终端群中的任意一个移动终端中,上述非易失性存储介质包括存储的程序。
可选地,在程序运行时控制非易失性存储介质所在设备执行以下功能:接收至少两个多媒体数据源设备发送的多媒体数据;对每个多媒体数据源发送的多媒体数据分配对应的输入缓存;分时调用上述多媒体数据进行处理,并输出处理后的多媒体数据。
可选地,在程序运行时控制非易失性存储介质所在设备执行以下功能:依据上述多媒体数据源设备的个数确定对应的输入缓存的个数;依据数据处理核的速率与每个多媒体数据源设备的输入数据速率的比值,确定上述数据处理核的输入通道数;依据上述输入通道数对应的通道将上述多媒体数据分别发送至对应的输入缓存。
可选地,在程序运行时控制非易失性存储介质所在设备执行以下功能:通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至输出缓存。
可选地,在程序运行时控制非易失性存储介质所在设备执行以下功能:将处理后的每个输入缓存中缓存的多媒体数据输出至上述输出缓存;缓存上述数据处理核输出的处理后的多媒体数据;向外接设备发送上述多媒体数据。
实施例6
根据本申请实施例,还提供了一种处理器的实施例。可选地,在本实施例中,处理器用于运行程序,其中,上述程序运行时执行上述任意一种多媒体数据处理方法。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取非易失性存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个非易失性存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的非易失性存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种多媒体数据处理方法,其特征在于,包括:
接收至少两个多媒体数据源设备发送的多媒体数据;
对每个多媒体数据源发送的多媒体数据分配对应的输入缓存;
分时调用所述多媒体数据进行处理,并输出处理后的多媒体数据。
2.根据权利要求1所述的方法,其特征在于,所述对每个多媒体数据源设备发送的多媒体数据分配对应的输入缓存包括:
依据所述多媒体数据源设备的个数确定对应的输入缓存的个数;
依据数据处理核的速率与每个多媒体数据源设备的输入数据速率的比值,确定所述数据处理核的输入通道数;
依据所述输入通道数对应的通道将所述多媒体数据分别发送至对应的输入缓存。
3.根据权利要求2所述的方法,其特征在于,所述分时调用所述多媒体数据进行处理包括:
通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至输出缓存。
4.根据权利要求3所述的方法,其特征在于,所述输出处理后的多媒体数据包括:
将处理后的每个输入缓存中缓存的多媒体数据输出至所述输出缓存;
缓存所述数据处理核输出的处理后的多媒体数据;
向外接设备发送所述多媒体数据。
5.一种多媒体数据处理装置,其特征在于,包括:
第一存储模块,用于缓存对应的多媒体数据源设备输出的多媒体数据;
数据处理模块,用于通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至第二存储模块;
所述第二存储模块,用于缓存所述数据处理模块输出的处理后的多媒体数据,以使得外接设备根据当前处理进程调用所述数据处理模块的多媒体数据。
6.一种多媒体数据处理系统,其特征在于,包括:至少两个多媒体数据源设备,多媒体数据处理装置和外接设备,其中,
所述至少两个多媒体数据源设备与所述多媒体数据处理装置连接,用于将每个多媒体数据源设备的多媒体数据发送至所述多媒体数据处理设备;
所述多媒体数据处理装置的一端与所述至少两个多媒体数据源设备连接,所述多媒体数据处理装置的另一端与所述外接设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至所述外接设备;
所述外接设备,用于调用所述多媒体数据处理装置输出的所述多媒体数据。
7.根据权利要求6所述的系统,其特征在于,所述多媒体数据处理装置包括:至少两个输入缓存,数据处理核和输出缓存,其中,
所述至少两个输入缓存与对应的多媒体数据源设备连接,用于缓存对应的多媒体数据源设备输出的多媒体数据;
所述数据处理核与所述至少两个输入缓存连接,用于通过分时复用循环处理每个输入缓存中缓存的多媒体数据,并将处理后的每个输入缓存中缓存的多媒体数据输出至所述输出缓存;
所述输出缓存的一端与所述数据处理核连接,所述输出缓存的另一端与外接设备连接,用于缓存所述数据处理核输出的处理后的多媒体数据,以使得所述外接设备根据当前处理进程调用所述数据处理核的多媒体数据。
8.根据权利要求7所述的系统,其特征在于,所述外接设备包括:存储设备、通信设备或显示设备中至少一种。
9.一种非易失性存储介质,其特征在于,所述非易失性存储介质包括存储的程序,其中,在所述程序运行时控制所述非易失性存储介质所在设备执行权利要求1所述的多媒体数据处理方法。
10.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求1所述的多媒体数据处理方法。
CN202011453197.6A 2020-12-11 2020-12-11 多媒体数据处理方法、装置和系统 Pending CN114625891A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011453197.6A CN114625891A (zh) 2020-12-11 2020-12-11 多媒体数据处理方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011453197.6A CN114625891A (zh) 2020-12-11 2020-12-11 多媒体数据处理方法、装置和系统

Publications (1)

Publication Number Publication Date
CN114625891A true CN114625891A (zh) 2022-06-14

Family

ID=81894941

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011453197.6A Pending CN114625891A (zh) 2020-12-11 2020-12-11 多媒体数据处理方法、装置和系统

Country Status (1)

Country Link
CN (1) CN114625891A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116456144A (zh) * 2023-06-14 2023-07-18 合肥六角形半导体有限公司 一种无帧缓存视频流处置输出装置和方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116456144A (zh) * 2023-06-14 2023-07-18 合肥六角形半导体有限公司 一种无帧缓存视频流处置输出装置和方法
CN116456144B (zh) * 2023-06-14 2023-09-26 合肥六角形半导体有限公司 一种无帧缓存视频流处置输出装置和方法

Similar Documents

Publication Publication Date Title
CN110377257B (zh) 图层合成方法、装置、电子设备及存储介质
EP4002281A1 (en) Layer composition method and apparatus, electronic device, and storage medium
CN112422873B (zh) 插帧方法、装置、电子设备及存储介质
US8665947B2 (en) Method and device for video-stream frame rate adaptation, and field programmable gate array chip and video stream processing apparatus
CN109992347B (zh) 界面显示方法、装置、终端及存储介质
US20110317763A1 (en) Information processing apparatus and information processing method
CN112235579B (zh) 视频处理方法、计算机可读存储介质及电子设备
US7313031B2 (en) Information processing apparatus and method, memory control device and method, recording medium, and program
CN116204308A (zh) 音视频算力动态调节方法和装置、电子设备
CN114625891A (zh) 多媒体数据处理方法、装置和系统
CN113573111A (zh) 一种8k超高清视频转换点屏系统及点屏方法
CN112866609A (zh) 视频处理设备
CN108259779B (zh) 一种利用部分幅面数据实现快速处理大幅面视频图像的方法
CN115567754A (zh) 视频播放方法、装置、设备及存储介质
CN115396674A (zh) 用于处理至少一个图像帧的方法、装置、介质及计算装置
US10026149B2 (en) Image processing system and image processing method
KR102247741B1 (ko) 이미지 프로세서, 상기 이미지 프로세서의 동작 방법, 및 상기 이미지 프로세서를 포함하는 애플리케이션 프로세서
CN113658049A (zh) 一种图像转置的方法、设备和计算机可读存储介质
CN101556789B (zh) 一种图像缩放控制系统及方法
CN107241601B (zh) 图像数据传输方法、装置及终端
CN113766315A (zh) 显示设备及视频信息处理方法
US10025550B2 (en) Fast keyboard for screen mirroring
CN115053525A (zh) 用于分配视频缩放所需资源的方法和系统
US20240048727A1 (en) Method and system of low latency video coding with interactive applications
CN113542805B (zh) 视频传输方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination