CN106792070A - 一种音视频数据dma传输方法及装置 - Google Patents

一种音视频数据dma传输方法及装置 Download PDF

Info

Publication number
CN106792070A
CN106792070A CN201611178339.6A CN201611178339A CN106792070A CN 106792070 A CN106792070 A CN 106792070A CN 201611178339 A CN201611178339 A CN 201611178339A CN 106792070 A CN106792070 A CN 106792070A
Authority
CN
China
Prior art keywords
dma
video
audio
video data
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201611178339.6A
Other languages
English (en)
Other versions
CN106792070B (zh
Inventor
杜焕勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vtron Technologies Ltd
Original Assignee
Vtron Technologies Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vtron Technologies Ltd filed Critical Vtron Technologies Ltd
Priority to CN201611178339.6A priority Critical patent/CN106792070B/zh
Publication of CN106792070A publication Critical patent/CN106792070A/zh
Application granted granted Critical
Publication of CN106792070B publication Critical patent/CN106792070B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4392—Processing of audio elementary streams involving audio buffer management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer

Abstract

本发明实施例公开了一种音视频数据DMA传输方法及装置，解决了目前面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生的同步出错的技术问题。本发明实施例音视频数据DMA传输方法包括：获取音视频数据；将视频数据和音频数据分别存入对应的指定存储空间；根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放。

Description

一种音视频数据DMA传输方法及装置
技术领域
本发明涉及数据处理技术领域，尤其涉及一种音视频数据DMA传输方法及装置。
背景技术
DMA(Direct Memory Access，直接内存存取)是所有现代电脑的重要特色，它允许不同速度的硬件装置来沟通，而不需要依赖于CPU的大量中断负载。否则，CPU需要从来源把每一片段的资料复制到暂存器，然后把它们再次写回到新的地方。在这个时间中，CPU对于其他的工作来说就无法使用。
传统的音视频数据传输方式有将音频数据编码到视频数据中，或传输当将部分音频数据与一帧视频数据进行合并传输。这两种方式当面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生问题。实际应用中，由于视频数据要经过多级帧率变换，例如源端为1080P,60Hz，但输出需要1080P，30Hz。这就需要将视频数据帧率降低一倍。但音频数据要保持其连续性，不能丢音频帧，且要求与视频数据同步，这就需要对音频视频数据进行特殊处理，保证视听效果。
上述提及的面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生的同步出错的技术问题成为了本领域技术人员亟待解决的技术问题。
发明内容
本发明实施例提供的一种音视频数据DMA传输方法及装置，解决了目前面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生的同步出错的技术问题。
本发明实施例提供的一种音视频数据DMA传输方法，包括：
获取音视频数据；
将视频数据和音频数据分别存入对应的指定存储空间；
根据响应的DMA请求对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理；
将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据所述DMA视频数据进行对应播放。
优选地，获取音视频数据具体包括：
获取所述视频数据和所述音频数据；
将所述视频数据转换成DDR存储格式，并将所述音频数据转换成FIFO存储格式。
优选地，将视频数据和音频数据分别存入对应的指定存储空间具体包括：
将所述视频数据进行多帧缓存处理，并存入外部DDR存储空间；
将所述音频数据存入内部FIFO存储空间；
同时，根据所述视频数据的视频帧号与所述音频数据的音频帧号插入到音频帧号状态寄存器和视频帧号状态寄存器中。
优选地，根据响应的DMA请求对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理具体包括：
接收并响应处理器发出的所述DMA请求；
当请求所述视频数据时，同时读取所述视频帧号状态寄存器；
当请求音频数据时，同时读取音频长度与所述音频帧号状态寄存器；
对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理。
优选地，将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据所述DMA视频数据进行对应播放具体包括：
将所述DMA视频数据DMA到显存中通过显卡显示；
将所述DMA音频数据DMA到内存中，并将所述音频帧号状态寄存器和所述视频帧号状态寄存器中的帧号信息一一对应；
当获取同步指令时，根据所述视频帧号搜索对应相同的所述音频帧号。
本发明实施例提供的一种音视频数据DMA传输装置，包括：
获取单元，用于获取音视频数据；
存储处理单元，用于将视频数据和音频数据分别存入对应的指定存储空间；
DMA响应单元，用于根据响应的DMA请求对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理；
DMA传输单元，用于将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据所述DMA视频数据进行对应播放。
优选地，获取单元具体包括：
获取子单元，用于获取所述视频数据和所述音频数据；
转换子单元，用于将所述视频数据转换成DDR存储格式，并将所述音频数据转换成FIFO存储格式。
优选地，存储处理单元具体包括：
第一存储子单元，用于将所述视频数据进行多帧缓存处理，并存入外部DDR存储空间；
第二存储子单元，用于将所述音频数据存入内部FIFO存储空间；
加入同步标志子单元，用于根据所述视频数据的视频帧号与所述音频数据的音频帧号插入到音频帧号状态寄存器和视频帧号状态寄存器中。
优选地，DMA响应单元具体包括：
DMA响应子单元，接收并响应处理器发出的所述DMA请求；
第一读取子单元，用于当请求所述视频数据时，同时读取所述视频帧号状态寄存器；
第二读取子单元，用于当请求音频数据时，同时读取音频长度与所述音频帧号状态寄存器；
DMA处理子单元，用于对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理。
优选地，DMA传输单元具体包括：
第一DMA传输子单元，用于将所述DMA视频数据DMA到显存中通过显卡显示；
第二DMA传输子单元，用于将所述DMA音频数据DMA到内存中，并将所述音频帧号状态寄存器和所述视频帧号状态寄存器中的帧号信息一一对应；
DMA同步传输子单元，用于当获取同步指令时，根据所述视频帧号搜索对应相同的所述音频帧号。
从以上技术方案可以看出，本发明实施例具有以下优点：
本发明实施例提供的一种音视频数据DMA传输方法及装置，其中，音视频数据DMA传输方法包括：获取音视频数据；将视频数据和音频数据分别存入对应的指定存储空间；根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放。本实施例中，通过将视频数据和音频数据分别存入对应的指定存储空间；根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放，解决了目前面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生的同步出错的技术问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。
图1为本发明实施例提供的一种音视频数据DMA传输方法的一个实施例的流程示意图；
图2为本发明实施例提供的一种音视频数据DMA传输方法的另一个实施例的流程示意图；
图3为本发明实施例提供的一种音视频数据DMA传输装置的一个实施例的结构示意图；
图4为本发明实施例提供的一种音视频数据DMA传输装置的另一个实施例的结构示意图；
图5和图6为图2的应用例示意图。
具体实施方式
本发明实施例提供的一种音视频数据DMA传输方法及装置，解决了目前面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生的同步出错的技术问题。
为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
请参阅图1，本发明实施例提供的一种音视频数据DMA传输方法的一个实施例包括：
101、获取音视频数据；
本实施例中，当需要传输音视频数据时，首先需要获取音视频数据。
102、将视频数据和音频数据分别存入对应的指定存储空间；
当获取音视频数据之后，需要将视频数据和音频数据分别存入对应的指定存储空间。
103、根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；
当将视频数据和音频数据分别存入对应的指定存储空间之后，需要根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理。
104、将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放。
当根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理之后，需要将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放。
本实施例中，通过将视频数据和音频数据分别存入对应的指定存储空间；根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放，解决了目前面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生的同步出错的技术问题。
上面是对音视频数据DMA传输方法的过程进行的描述，下面将对详细的过程进行详细的描述，请参阅图2，本发明实施例提供的一种音视频数据DMA传输方法的另一个实施例包括：
201、获取视频数据和音频数据；
本实施例中，当需要传输音视频数据时，首先需要获取视频数据和音频数据。
202、将视频数据转换成DDR存储格式，并将音频数据转换成FIFO存储格式；
当获取视频数据和音频数据之后，需要将视频数据转换成DDR存储格式，并将音频数据转换成FIFO存储格式。
203、将视频数据进行多帧缓存处理，并存入外部DDR存储空间；
当将视频数据转换成DDR存储格式，并将音频数据转换成FIFO存储格式之后，需要将视频数据进行多帧缓存处理，并存入外部DDR存储空间。
204、将音频数据存入内部FIFO存储空间；
当将视频数据进行多帧缓存处理，并存入外部DDR存储空间的同时，需要将音频数据存入内部FIFO存储空间。
205、根据视频数据的视频帧号与音频数据的音频帧号插入到音频帧号状态寄存器和视频帧号状态寄存器中；
当步骤203和204的同时，需要根据视频数据的视频帧号与音频数据的音频帧号插入到音频帧号状态寄存器和视频帧号状态寄存器中。
206、接收并响应处理器发出的DMA请求；
当步骤203至205之后，需要接收并响应处理器发出的DMA请求。
207、当请求视频数据时，同时读取视频帧号状态寄存器，当请求音频数据时，同时读取音频长度与音频帧号状态寄存器；
当接收并响应处理器发出的DMA请求之后，需要当请求视频数据时，同时读取视频帧号状态寄存器，当请求音频数据时，同时读取音频长度与音频帧号状态寄存器。
208、对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；
当请求视频数据时，同时读取视频帧号状态寄存器，当请求音频数据时，同时读取音频长度与音频帧号状态寄存器之后，需要对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理。
209、将DMA视频数据DMA到显存中通过显卡显示；
当对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理之后，需要将DMA视频数据DMA到显存中通过显卡显示。
210、将DMA音频数据DMA到内存中，并将音频帧号状态寄存器和视频帧号状态寄存器中的帧号信息一一对应；
当将DMA视频数据DMA到显存中通过显卡显示的同时，需要将DMA音频数据DMA到内存中，并将音频帧号状态寄存器和视频帧号状态寄存器中的帧号信息一一对应。
211、当获取同步指令时，根据视频帧号搜索对应相同的音频帧号。
当步骤209和210之后，需要当获取同步指令时，根据视频帧号搜索对应相同的音频帧号。
下面以一具体应用场景进行描述，如图5和图6所示，应用例包括：
传输过程可分为如图6：
1接收音视频数据
2将音视频数据存入指定存储空间
3接收并响应DMA请求
4DMA音视频数据到处理器端
具体过程中还包括：
过程1中包括：视频数据接收，检测视频分辨率，并转换成DDR存储所需格式(vs+hs+data_valid+data)。音频数据接收，检测音频格式(采样率，声道信息等)，并转换成FIFO存储所需格式(data+data_valid)。音频与视频接收独立进行。
过程2中包括：将过程1中的音视数据存入到指定空间。由于视频，数据庞大，同时由于按帧传输的特殊性，同步性要求读写帧不能重叠，且需要进行帧率变换，所以视频多帧缓存，存入外部DDR存储空间。但音频数据数据量小，要求保持其连续性，不可间断，所以存入内部FIFO空间。在存储音视频数据的过程中，同时加入同步标志，具体方法是，在视频的帧开始，产生一个帧号，用两个字节表示，将这个帧号，插入到音频帧号状态和视频帧号状态寄存器中。
过程3中包括：接收并响应处理器发出的DMA请求。当请求视频数据时，同时读取视频帧号状态寄存器。当请求音频数据时，同时读取音频长度与音频帧号状态寄存器。视频数据按帧大小进行DMA，音频数据按FIFO存储的数据个数数量进行DMA。
过程4中包括：DMA音视频数据到处理器端，视频数据需要用显卡显示，固将视频数据DMA到显存中，直接显示。音频数据DMA到内存中，且根据音频帧号状态和视频帧号状态寄存器中帧号信息一一对应，当需要校准对齐时，根据视频帧号去搜索对应相同的音频帧号。对齐方式可手动也可定时自动。
本实施例中，通过将视频数据和音频数据分别存入对应的指定存储空间；根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放，解决了目前面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生的同步出错的技术问题。
实现了通过PCI-E接口传到处理器的存储空间，对音频数据与视频数据区别对待，可以响应各自处理要求，如接受不同的帧率变换请求，DMA到不同的存储空间显存或内存。同时加入精确对齐机制，使音视频间的延迟小于1帧。
请参阅图3，本发明实施例提供的一种音视频数据DMA传输装置的一个实施例包括：
获取单元301，用于获取音视频数据；
存储处理单元302，用于将视频数据和音频数据分别存入对应的指定存储空间；
DMA响应单元303，用于根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；
DMA传输单元304，用于将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放。
本实施例中，通过将视频数据和音频数据分别存入对应的指定存储空间；根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放，解决了目前面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生的同步出错的技术问题。
上面是对音视频数据DMA传输装置的各单元进行的描述，下面将对子单元进行面试，请参阅图4，本发明实施例提供的一种音视频数据DMA传输装置的另一个实施例包括：
获取单元401，用于获取音视频数据；
获取单元401具体包括：
获取子单元4011，用于获取视频数据和音频数据；
转换子单元4012，用于将视频数据转换成DDR存储格式，并将音频数据转换成FIFO存储格式。
存储处理单元402，用于将视频数据和音频数据分别存入对应的指定存储空间；
存储处理单元402具体包括：
第一存储子单元4021，用于将视频数据进行多帧缓存处理，并存入外部DDR存储空间；
第二存储子单元4022，用于将音频数据存入内部FIFO存储空间；
加入同步标志子单元4023，用于根据视频数据的视频帧号与音频数据的音频帧号插入到音频帧号状态寄存器和视频帧号状态寄存器中。
DMA响应单元403，用于根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；
DMA响应单元403具体包括：
DMA响应子单元4031，接收并响应处理器发出的DMA请求；
第一读取子单元4032，用于当请求视频数据时，同时读取视频帧号状态寄存器；
第二读取子单元4033，用于当请求音频数据时，同时读取音频长度与音频帧号状态寄存器；
DMA处理子单元4034，用于对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理。
DMA传输单元404，用于将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放。
DMA传输单元404具体包括：
第一DMA传输子单元4041，用于将DMA视频数据DMA到显存中通过显卡显示；
第二DMA传输子单元4042，用于将DMA音频数据DMA到内存中，并将音频帧号状态寄存器和视频帧号状态寄存器中的帧号信息一一对应；
DMA同步传输子单元4043，用于当获取同步指令时，根据视频帧号搜索对应相同的音频帧号。
本实施例中，通过将视频数据和音频数据分别存入对应的指定存储空间；根据响应的DMA请求对视频数据根据帧大小进行DMA处理，对音频数据根据存储的数据个数数量进行DMA处理；将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据DMA视频数据进行对应播放，解决了目前面临音频数据与视频数据在不同的存储空间时和处理音视频同步时会产生的同步出错的技术问题。
实现了通过PCI-E接口传到处理器的存储空间，对音频数据与视频数据区别对待，可以响应各自处理要求，如接受不同的帧率变换请求，DMA到不同的存储空间显存或内存。同时加入精确对齐机制，使音视频间的延迟小于1帧。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种音视频数据DMA传输方法，其特征在于，包括：
获取音视频数据；
将视频数据和音频数据分别存入对应的指定存储空间；
根据响应的DMA请求对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理；
将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据所述DMA视频数据进行对应播放。
2.根据权利要求1所述的音视频数据DMA传输方法，其特征在于，获取音视频数据具体包括：
获取所述视频数据和所述音频数据；
将所述视频数据转换成DDR存储格式，并将所述音频数据转换成FIFO存储格式。
3.根据权利要求2所述的音视频数据DMA传输方法，其特征在于，将视频数据和音频数据分别存入对应的指定存储空间具体包括：
将所述视频数据进行多帧缓存处理，并存入外部DDR存储空间；
将所述音频数据存入内部FIFO存储空间；
同时，根据所述视频数据的视频帧号与所述音频数据的音频帧号插入到音频帧号状态寄存器和视频帧号状态寄存器中。
4.根据权利要求3所述的音视频数据DMA传输方法，其特征在于，根据响应的DMA请求对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理具体包括：
接收并响应处理器发出的所述DMA请求；
当请求所述视频数据时，同时读取所述视频帧号状态寄存器；
当请求音频数据时，同时读取音频长度与所述音频帧号状态寄存器；
对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理。
5.根据权利要求4所述的音视频数据DMA传输方法，其特征在于，将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据所述DMA视频数据进行对应播放具体包括：
将所述DMA视频数据DMA到显存中通过显卡显示；
将所述DMA音频数据DMA到内存中，并将所述音频帧号状态寄存器和所述视频帧号状态寄存器中的帧号信息一一对应；
当获取同步指令时，根据所述视频帧号搜索对应相同的所述音频帧号。
6.一种音视频数据DMA传输装置，其特征在于，包括：
获取单元，用于获取音视频数据；
存储处理单元，用于将视频数据和音频数据分别存入对应的指定存储空间；
DMA响应单元，用于根据响应的DMA请求对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理；
DMA传输单元，用于将DMA处理后的DMA视频数据通过显卡显示，将DMA音频数据根据所述DMA视频数据进行对应播放。
7.根据权利要求6所述的音视频数据DMA传输装置，其特征在于，获取单元具体包括：
获取子单元，用于获取所述视频数据和所述音频数据；
转换子单元，用于将所述视频数据转换成DDR存储格式，并将所述音频数据转换成FIFO存储格式。
8.根据权利要求7所述的音视频数据DMA传输装置，其特征在于，存储处理单元具体包括：
第一存储子单元，用于将所述视频数据进行多帧缓存处理，并存入外部DDR存储空间；
第二存储子单元，用于将所述音频数据存入内部FIFO存储空间；
加入同步标志子单元，用于根据所述视频数据的视频帧号与所述音频数据的音频帧号插入到音频帧号状态寄存器和视频帧号状态寄存器中。
9.根据权利要求8所述的音视频数据DMA传输装置，其特征在于，DMA响应单元具体包括：
DMA响应子单元，接收并响应处理器发出的所述DMA请求；
第一读取子单元，用于当请求所述视频数据时，同时读取所述视频帧号状态寄存器；
第二读取子单元，用于当请求音频数据时，同时读取音频长度与所述音频帧号状态寄存器；
DMA处理子单元，用于对所述视频数据根据帧大小进行DMA处理，对所述音频数据根据存储的数据个数数量进行DMA处理。
10.根据权利要求9所述的音视频数据DMA传输装置，其特征在于，DMA传输单元具体包括：
第一DMA传输子单元，用于将所述DMA视频数据DMA到显存中通过显卡显示；
第二DMA传输子单元，用于将所述DMA音频数据DMA到内存中，并将所述音频帧号状态寄存器和所述视频帧号状态寄存器中的帧号信息一一对应；
DMA同步传输子单元，用于当获取同步指令时，根据所述视频帧号搜索对应相同的所述音频帧号。
CN201611178339.6A 2016-12-19 2016-12-19 一种音视频数据dma传输方法及装置 Active CN106792070B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611178339.6A CN106792070B (zh) 2016-12-19 2016-12-19 一种音视频数据dma传输方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611178339.6A CN106792070B (zh) 2016-12-19 2016-12-19 一种音视频数据dma传输方法及装置

Publications (2)

Publication Number Publication Date
CN106792070A true CN106792070A (zh) 2017-05-31
CN106792070B CN106792070B (zh) 2020-06-23

Family

ID=58890525

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611178339.6A Active CN106792070B (zh) 2016-12-19 2016-12-19 一种音视频数据dma传输方法及装置

Country Status (1)

Country Link
CN (1) CN106792070B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111093109A (zh) * 2018-10-24 2020-05-01 杭州海康威视数字技术股份有限公司 媒体数据播放处理方法、媒体播放设备
CN112689194A (zh) * 2020-12-21 2021-04-20 展讯半导体(成都)有限公司 功能机视频配乐方法、装置、终端设备及存储介质
CN114339345A (zh) * 2020-09-29 2022-04-12 京东方科技集团股份有限公司 一种应用于音视频信号的源端同步装置及同步方法
CN115658572A (zh) * 2022-12-12 2023-01-31 北京象帝先计算技术有限公司 任务处理方法、装置、电子设备和计算机可读存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101303880A (zh) * 2008-06-30 2008-11-12 北京中星微电子有限公司 录制、播放音视频文件的方法及装置
CN101640058A (zh) * 2009-07-24 2010-02-03 王祐凡 多媒体同步方法、播放器以及多媒体数据制作设备
CN101674486A (zh) * 2009-09-29 2010-03-17 深圳市融创天下科技发展有限公司 一种流媒体音视频同步方法及系统
US20120081567A1 (en) * 2010-09-30 2012-04-05 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
CN103559900A (zh) * 2007-03-26 2014-02-05 踏途音乐公司 具有关联的视频服务器的自动唱片点唱机
US20150036695A1 (en) * 2013-07-31 2015-02-05 Nvidia Corporation Real time network adaptive low latency transport stream muxing of audio/video streams for miracast
CN104618786A (zh) * 2014-12-22 2015-05-13 深圳市腾讯计算机系统有限公司 音视频同步方法和装置
CN105744334A (zh) * 2016-02-18 2016-07-06 海信集团有限公司 一种音视频同步和同步播放的方法及设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103559900A (zh) * 2007-03-26 2014-02-05 踏途音乐公司 具有关联的视频服务器的自动唱片点唱机
CN101303880A (zh) * 2008-06-30 2008-11-12 北京中星微电子有限公司 录制、播放音视频文件的方法及装置
CN101640058A (zh) * 2009-07-24 2010-02-03 王祐凡 多媒体同步方法、播放器以及多媒体数据制作设备
CN101674486A (zh) * 2009-09-29 2010-03-17 深圳市融创天下科技发展有限公司 一种流媒体音视频同步方法及系统
US20120081567A1 (en) * 2010-09-30 2012-04-05 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
US20150036695A1 (en) * 2013-07-31 2015-02-05 Nvidia Corporation Real time network adaptive low latency transport stream muxing of audio/video streams for miracast
CN104618786A (zh) * 2014-12-22 2015-05-13 深圳市腾讯计算机系统有限公司 音视频同步方法和装置
CN105744334A (zh) * 2016-02-18 2016-07-06 海信集团有限公司 一种音视频同步和同步播放的方法及设备

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111093109A (zh) * 2018-10-24 2020-05-01 杭州海康威视数字技术股份有限公司 媒体数据播放处理方法、媒体播放设备
CN114339345A (zh) * 2020-09-29 2022-04-12 京东方科技集团股份有限公司 一种应用于音视频信号的源端同步装置及同步方法
CN112689194A (zh) * 2020-12-21 2021-04-20 展讯半导体(成都)有限公司 功能机视频配乐方法、装置、终端设备及存储介质
CN112689194B (zh) * 2020-12-21 2023-02-10 展讯半导体(成都)有限公司 功能机视频配乐方法、装置、终端设备及存储介质
CN115658572A (zh) * 2022-12-12 2023-01-31 北京象帝先计算技术有限公司 任务处理方法、装置、电子设备和计算机可读存储介质

Also Published As

Publication number Publication date
CN106792070B (zh) 2020-06-23

Similar Documents

Publication Publication Date Title
CN106792070A (zh) 一种音视频数据dma传输方法及装置
CN103530268B (zh) 通用串行总线传输转译器及微帧同步方法
CN102685159B (zh) 文件传输方法及装置
CN101516015B (zh) 多路视频数据采集处理和传输的方法
CN109597782B (zh) 用于通过扩展介质来扩展usb 3.0兼容通信的方法和设备
CN105898506A (zh) 媒体文件的多屏播放方法和系统
CN102566958B (zh) 一种基于sgdma的图像分割处理装置
CN109933554A (zh) 一种基于GPU服务器的NVMe硬盘扩展装置
CN106293578A (zh) 显卡、图像显示装置、图像显示方法和系统
CN109240607A (zh) 一种文件读取方法和装置
US20060236001A1 (en) Direct memory access controller
WO2018099014A1 (zh) 一种基带中频交互方法、系统及存储介质
CN103501353B (zh) 一种数据中继传输方法、装置及系统
US6363076B1 (en) Phantom buffer for interfacing between buses of differing speeds
US8793410B2 (en) Data rate throttling in an internal packet-based interface
CN103442091B (zh) 一种数据传输方法及装置
CN1136693C (zh) 传送数字音频和视频数据的设备和方法
CN201957164U (zh) 摄像机图像传输装置
CN103685191A (zh) 数据同步系统及其方法
CN105681222A (zh) 一种数据接收缓存方法、装置及通信系统
CN115905067A (zh) 数据传输控制方法、芯片、装置及存储介质
CN102647413B (zh) 一种经由传输链路发送无窗视频数据包的方法和系统
CN209690899U (zh) 基于usb的fpga通信控制装置及fpga
CN102469290A (zh) 摄像机图像传输装置
KR100315310B1 (ko) 다중 데이터 동기화 방법 및 그를 이용한 다중 멀티미디어 데이터 스트리밍 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant