CN102307179A - 基于龙芯的流媒体解码方法 - Google Patents

基于龙芯的流媒体解码方法 Download PDF

Info

Publication number
CN102307179A
CN102307179A CN201110101093A CN201110101093A CN102307179A CN 102307179 A CN102307179 A CN 102307179A CN 201110101093 A CN201110101093 A CN 201110101093A CN 201110101093 A CN201110101093 A CN 201110101093A CN 102307179 A CN102307179 A CN 102307179A
Authority
CN
China
Prior art keywords
module
media stream
media
video
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201110101093A
Other languages
English (en)
Inventor
杨松
岳强
莫展鹏
肖翱
季统凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Computing Technology of CAS
Original Assignee
Institute of Computing Technology of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Computing Technology of CAS filed Critical Institute of Computing Technology of CAS
Priority to CN201110101093A priority Critical patent/CN102307179A/zh
Publication of CN102307179A publication Critical patent/CN102307179A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及通信技术领域,尤其涉及一种基于龙芯的流媒体解码方法。由用于流媒体播放系统应用客户端的媒体流接收模块、媒体流处理模块、视频解码模块、音频解码模块、视频输出模块、音频输出模块、视频输出驱动模块和音频输出驱动模块完成解码。具体而言,包括在流媒体接收模块对媒体传输流进行初始化、摘取、解复、标记用等操作;流媒体处理模块对摘取出的媒体传输流进行标记识别、存储、分发等操作。本发明可提升龙芯针对媒体传输流的处理及解码速度、效率以及媒体传输流数据复用性;可以广泛应用于基于龙芯的流媒体解码中。

Description

基于龙芯的流媒体解码方法
技术领域
本发明涉及通信技术领域,尤其涉及一种基于龙芯的流媒体解码方法。
背景技术
在网络上传输音/视频等多媒体信息,目前主要有下载和流式传输两种方案。A/V文件一般都较大,所以需要的存储容量也较大;同时由于网络带宽的限制,下载常常要花数分钟甚至数小时,所以这种处理方法延迟也很大。流式传输时,声音、影像或动画等时基媒体由音视频服务器向用户计算机的连续、实时传送,用户不必等到整个文件全部下载完毕,而只需经过几秒或十数秒的启动延时即可进行观看。当声音等时基媒体在客户机上播放时,文件的剩余部分将在后台从服务器内继续下载。流式不仅使启动延时成十倍、百倍地缩短,而且不需要太大的缓存容量。流式传输避免了用户必须等待整个文件全部从Internet上下载才能观看的缺点。
流媒体指在Internet/Intranet中使用流式传输技术的连续时基媒体,如:音频、视频或多媒体文件。流式媒体在播放前并不下载整个文件,只将开始部分内容存入内存,流式媒体的数据流随时传送随时播放,只是在开始时有一些延迟。流媒体实现的关键技术就是流式传输。
流式传输定义很广泛,现在主要指通过网络传送媒体(如视频、音频)的技术总称。其特定含义为通过Internet将影视节目传送到PC机。实现流式传输有两种方法:实时流式传输(Realtime streaming)和顺序流式传输(progressivestreaming)。一般说来,如视频为实时广播,或使用流式传输媒体服务器,或应用如RTSP的实时协议,即为实时流式传输。如使用HTTP服务器,文件即通过顺序流发送。采用哪种传输方法依赖你的需求。当然,流式文件也支持在播放前完全下载到硬盘。
随着流媒体技术的不断成熟,流媒体在龙芯上的应用也不断展开,为保证流媒体应用在龙芯上流畅运行,需要一种机制,既能够保留流媒体的诸多特性,又能够支持龙芯应用。
发明内容
本发明解决的技术问题在于提供一种基于龙芯的流媒体解码方法,该方法充分利用流媒体即时即地的特征,可以提升龙芯针对媒体传输流的处理及解码速度、效率以及媒体传输流数据复用性。
本发明解决前述技术问题的技术方案是:由用于流媒体播放系统应用客户端的媒体流接收模块、媒体流处理模块、视频解码模块、音频解码模块、视频输出模块、音频输出模块、视频输出驱动模块和音频输出驱动模块完成解码。
所述的媒体流接收模块通过特定的方式对媒体传输流进行接收,接收后的媒体传输流片段传递给媒体流处理模块;
所述的媒体流处理模块使用特定的标记识别方式对媒体流数据接收模块的输出进行处理,识别之后的媒体流数据以时间轴排序,摘取出正在播放的媒体流数据传分别传送到视频解码模块和音频解码模块;
所述的视频解码模块从媒体流处理模块中接收的排序视频数据分帧进行解码,作为输入输入到视频输出模块;
所述的音频解码模块从媒体流处理模块中接收的排序音频数据分片进行解码,作为输入输入到音频输出模块;
所述的视频输出模块从视频解码模块中接收到解码后的视频帧数据并找到指定的视频输出设备,调用该视频输出设备驱动,将视频帧数据输出到指定视频输出设备上;
所述的音频输出模块从音频解码模块中接收到解码后的音频数据并找到指定的音频输出设备,调用该音频输出设备驱动,将音频数据输出到指定的音频输出设备上;
所述的视频输出驱动模块是一组视频输出设备的驱动集,支持龙芯所支持的多种视频输出设备;
所述的音频输出驱动模块是一组音频输出设备的驱动集,支持龙芯所支持的多种音频输出设备。
所述媒体流处理模块对媒体流初始化、摘取和解复用操作外,还执行选择性存储,即将排序媒体流文件保存在临时目录下。
在媒体流接收阶段包括以下步骤:A、与流媒体服务器建立连接;B、开始接收媒体传输流;C、将接收到的媒体传输流保存到指定缓冲区。
在媒体流处理阶段包括以下步骤:A、使用特定的标记识别方式对媒体流接收模块的输出进行处理,B、识别特定标记的媒体流数据以时间轴排序,C、摘取出正在播放的媒体流数据传分别传送到视频解码模块和音频解码模块。
本发明可提升龙芯针对媒体传输流的处理及解码速度、效率以及媒体传输流数据复用性。
附图说明
下面结合附图对本发明进一步说明:
图1是本发明流媒体解码功能模块框图;
图2是本发明中媒体流接收阶段的示意图。
具体实施方式
见图1所示,由用于流媒体播放系统应用客户端的媒体流接收模块1、媒体流处理模块2、视频解码模块3、音频解码模块4、视频输出模块5、音频输出模块6、视频输出驱动模块7和音频输出驱动模块8完成解码。具体而言,媒体流接收模块1通过特定的方式对媒体传输流进行接收,接收后的媒体传输流片段传递给媒体流处理模块2;媒体流处理模块2使用特定的标记识别方式对媒体流数据接收模块的输出进行处理,识别之后的媒体流数据以时间轴排序,摘取出正在播放的媒体流数据传分别传送到视频解码模块3和音频解码模块4;视频解码模块3从媒体流处理模块2中接收的排序视频数据分帧进行解码,作为输入输入到视频输出模块5;音频解码模块4从媒体流处理模块2中接收的排序音频数据分片进行解码,作为输入输入到音频输出模块6;视频输出模块5从视频解码模块3中接收到解码后的视频帧数据并找到指定的视频输出设备,调用该视频输出设备驱动,将视频帧数据输出到指定视频输出设备上;音频输出模块6从音频解码模块4中接收到解码后的音频数据并找到指定的音频输出设备,调用该音频输出设备驱动,将音频数据输出到指定的音频输出设备上;视频输出驱动模块7是一组视频输出设备的驱动集,支持龙芯所支持的多种视频输出设备;音频输出驱动模块8是一组音频输出设备的驱动集,支持龙芯所支持的多种音频输出设备。
所述媒体流处理模块2对媒体流初始化、摘取和解复用操作外,还执行选择性存储,即将排序媒体流文件保存在临时目录下。
如图2所示,在媒体流接收阶段包括以下步骤:A、与流媒体服务器建立连接;B、开始接收媒体传输流;C、将接收到的媒体传输流保存到指定缓冲区。
在媒体流处理阶段包括以下步骤:A、使用特定的标记识别方式对媒体流接收模块1的输出进行处理,B、识别特定标记的媒体流数据以时间轴排序,C、摘取出正在播放的媒体流数据传分别传送到视频解码模块3和音频解码模块4。
在视频解码阶段包括以下步骤:A、从媒体流处理模块中接收的排序视频数据分帧进行解码,B、输入到视频输出模块。
在音频解码阶段包括以下步骤:A、从媒体流处理模块中接收的排序音频数据分片进行解码,B、输入到音频输出模块。
在视频输出阶段包括以下步骤:A、从视频解码模块中接收到解码后的视频帧数据并找到指定的视频输出设备,B、调用该视频输出设备驱动,将视频帧数据输出到指定视频输出设备上。
在音频输出阶段包括以下步骤:A、从音频解码模块中接收到解码后的音频数据并找到指定的音频输出设备,B、调用该音频输出设备驱动,将音频数据输出到指定的音频输出设备上。
在视频驱动阶段包括以下步骤:准备好一组视频输出设备的驱动集,支持龙芯所支持的多种视频输出设备
在音频驱动阶段包括以下步骤:准备好一组音频输出设备的驱动集,支持龙芯所支持的多种音频输出设备。

Claims (9)

1.一种基于龙芯的流媒体解码方法,其特征在于:由用于流媒体播放系统应用客户端的媒体流接收模块(1)、媒体流处理模块(2)、视频解码模块(3)、音频解码模块(4)、视频输出模块(5)、音频输出模块(6)、视频输出驱动模块(7)和音频输出驱动模块(8)完成解码。
2.根据权利要求1所述的流媒体解码方法,其特征在于:
所述的媒体流接收模块(1)通过特定的方式对媒体传输流进行接收,接收后的媒体传输流片段传递给媒体流处理模块(2);
所述的媒体流处理模块(2)使用特定的标记识别方式对媒体流数据接收模块的输出进行处理,识别之后的媒体流数据以时间轴排序,摘取出正在播放的媒体流数据传分别传送到视频解码模块(3)和音频解码模块(4);
所述的视频解码模块(3)从媒体流处理模块(2)中接收的排序视频数据分帧进行解码,作为输入输入到视频输出模块(5);
所述的音频解码模块(4)从媒体流处理模块(2)中接收的排序音频数据分片进行解码,作为输入输入到音频输出模块(6);
所述的视频输出模块(5)从视频解码模块(3)中接收到解码后的视频帧数据并找到指定的视频输出设备,调用该视频输出设备驱动,将视频帧数据输出到指定视频输出设备上;
所述的音频输出模块(6)从音频解码模块(4)中接收到解码后的音频数据并找到指定的音频输出设备,调用该音频输出设备驱动,将音频数据输出到指定的音频输出设备上;
所述的视频输出驱动模块(7)是一组视频输出设备的驱动集,支持龙芯所支持的多种视频输出设备;
所述的音频输出驱动模块(8)是一组音频输出设备的驱动集,支持龙芯所支持的多种音频输出设备。
3.根据权利要求1或2所述的流媒体解码方法,其特征在于:所述媒体流处理模块(2)对媒体流初始化、摘取和解复用操作外,还执行选择性存储,即将排序媒体流文件保存在临时目录下。
4.根据权利要求1或2所述的流媒体解码方法,其特征在于:在媒体流接收阶段包括以下步骤:A、与流媒体服务器建立连接;B、开始接收媒体传输流;C、将接收到的媒体传输流保存到指定缓冲区。
5.根据权利要求3所述的流媒体解码方法,其特征在于:在媒体流接收阶段包括以下步骤:A、与流媒体服务器建立连接B、开始接收媒体传输流C、将接收到的媒体传输流保存到指定缓冲区。
6.根据权利要求1或2所述的流媒体解码方法,其特征在于:在媒体流处理阶段包括以下步骤:A、使用特定的标记识别方式对媒体流接收模块(1)的输出进行处理,B、识别特定标记的媒体流数据以时间轴排序,C、摘取出正在播放的媒体流数据传分别传送到视频解码模块(3)和音频解码模块(4)。
7.根据权利要求3所述的流媒体解码方法,其特征在于:在媒体流处理阶段包括以下步骤:A、使用特定的标记识别方式对媒体流接收模块(1)的输出进行处理,B、识别特定标记的媒体流数据以时间轴排序,C、摘取出正在播放的媒体流数据传分别传送到视频解码模块(3)和音频解码模块(4)。
8.根据权利要求4所述的流媒体解码方法,其特征在于:在媒体流处理阶段包括以下步骤:A、使用特定的标记识别方式对媒体流接收模块(1)的输出进行处理,B、识别特定标记的媒体流数据以时间轴排序,C、摘取出正在播放的媒体流数据传分别传送到视频解码模块(3)和音频解码模块(4)。
9.根据权利要求5所述的流媒体解码方法,其特征在于:在媒体流处理阶段包括以下步骤:A、使用特定的标记识别方式对媒体流接收模块(1)的输出进行处理,B、识别特定标记的媒体流数据以时间轴排序,C、摘取出正在播放的媒体流数据传分别传送到视频解码模块(3)和音频解码模块(4)。
CN201110101093A 2011-04-21 2011-04-21 基于龙芯的流媒体解码方法 Pending CN102307179A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110101093A CN102307179A (zh) 2011-04-21 2011-04-21 基于龙芯的流媒体解码方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110101093A CN102307179A (zh) 2011-04-21 2011-04-21 基于龙芯的流媒体解码方法

Publications (1)

Publication Number Publication Date
CN102307179A true CN102307179A (zh) 2012-01-04

Family

ID=45380988

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110101093A Pending CN102307179A (zh) 2011-04-21 2011-04-21 基于龙芯的流媒体解码方法

Country Status (1)

Country Link
CN (1) CN102307179A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104202650A (zh) * 2014-09-28 2014-12-10 西安诺瓦电子科技有限公司 流媒体播放系统及方法、led显示屏系统
CN110505204A (zh) * 2019-07-17 2019-11-26 视联动力信息技术股份有限公司 一种即时语音通信方法、装置、电子设备及可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201118857Y (zh) * 2007-10-17 2008-09-17 北京竞业达数码科技有限公司 基于wmv9的网络视音频解码器
CN101272499A (zh) * 2008-05-13 2008-09-24 中兴通讯股份有限公司 一种视音频同流传输的方法及系统
CN101394469A (zh) * 2008-10-29 2009-03-25 北京创毅视讯科技有限公司 一种音视频同步方法、装置及一种数字电视芯片

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201118857Y (zh) * 2007-10-17 2008-09-17 北京竞业达数码科技有限公司 基于wmv9的网络视音频解码器
CN101272499A (zh) * 2008-05-13 2008-09-24 中兴通讯股份有限公司 一种视音频同流传输的方法及系统
CN101394469A (zh) * 2008-10-29 2009-03-25 北京创毅视讯科技有限公司 一种音视频同步方法、装置及一种数字电视芯片

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104202650A (zh) * 2014-09-28 2014-12-10 西安诺瓦电子科技有限公司 流媒体播放系统及方法、led显示屏系统
CN104202650B (zh) * 2014-09-28 2017-11-17 西安诺瓦电子科技有限公司 流媒体播放系统及方法、led显示屏系统
CN110505204A (zh) * 2019-07-17 2019-11-26 视联动力信息技术股份有限公司 一种即时语音通信方法、装置、电子设备及可读存储介质

Similar Documents

Publication Publication Date Title
US9332048B2 (en) Key frame detection and synchronization
US11375258B2 (en) Transitioning between broadcast and unicast streams
US20150256600A1 (en) Systems and methods for media format substitution
WO2014204366A1 (en) Arrangements and method thereof for a channel change during streaming
CN109792545A (zh) 观众重要性自适应比特率传送
WO2018103696A1 (zh) 媒体文件的播放方法、服务端、客户端及系统
WO2007117089A2 (en) Method and apparatus for providing internet protocol datacasting service in digital audio broadcasting system
EP1483914A1 (en) Multicasting of interactive data
JP6908168B2 (ja) 受信装置、受信方法、送信装置および送信方法
WO2010030533A1 (en) Remote fast forward and rewind functionality for client devices
JP7294472B2 (ja) 受信装置および受信方法
WO2008143493A2 (en) Media stream system and method thereof
CN104053026A (zh) 一种数字电视机顶盒开机视频广告的接收及播放方法及系统
WO2013155766A1 (zh) 一种多媒体视频数据的发送、接收方法及对应装置
CN102378001A (zh) 支持图片直播模式的移动终端、视频直播方法及系统
CN109151614B (zh) 一种降低hls直播播放延迟的方法及装置
CN105430510A (zh) 一种视频点播方法、网关、智能终端及视频点播系统
CN101800894B (zh) 多媒体影音的转换方法以及系统
KR101668283B1 (ko) 레이턴시를 고려한 영상 출력 방법, 이를 수행하는 장치 및 클라우드 스트리밍 서비스 시스템
KR101214167B1 (ko) Vod 서비스 방법, vod 수신기 및 vod 서버
CN102307179A (zh) 基于龙芯的流媒体解码方法
EP1993289A1 (en) System having improved switching times between broadcast/multicast bearers
CN111526390B (zh) 发送mmt包的方法及装置、接收mmt包的方法
CN101753789A (zh) 接收装置、通信系统、接收装置控制方法及程序
JP2009290868A (ja) 送信機と電子装置間の信号ストリームの簡略化された伝送方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120104