CN101917412A - 一种提高流媒体连接缓冲速度的方法及客户端 - Google Patents

一种提高流媒体连接缓冲速度的方法及客户端 Download PDF

Info

Publication number
CN101917412A
CN101917412A CN2010102398373A CN201010239837A CN101917412A CN 101917412 A CN101917412 A CN 101917412A CN 2010102398373 A CN2010102398373 A CN 2010102398373A CN 201010239837 A CN201010239837 A CN 201010239837A CN 101917412 A CN101917412 A CN 101917412A
Authority
CN
China
Prior art keywords
video
data
streaming media
processing unit
regulon
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010102398373A
Other languages
English (en)
Inventor
赵发杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN2010102398373A priority Critical patent/CN101917412A/zh
Publication of CN101917412A publication Critical patent/CN101917412A/zh
Priority to PCT/CN2011/070056 priority patent/WO2012013024A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/23805—Controlling the feeding rate to the network, e.g. by controlling the video pump

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及一种提高流媒体连接缓冲速度的方法及客户端，包括流媒体客户端通过连接管理单元建立与服务器的连接，并通过协议交互及数据接收单元开始接收流媒体音视频数据；流媒体客户端对于接收到的音频数据，通过音频处理单元解码输出，减少缓冲等待时间；流媒体客户端对于接收到的视频数据，由视频调节单元控制视频处理单元解码显示，控制降低视频每秒的播放帧数。本发明利用了现有的流媒体技术标准和硬件设备，通过软件技术改造，实现流媒体连接缓冲速度的提高，通过引入本发明中的视频调节单元，可以提高启动播放流媒体时的速度，增强用户体验。

Description

一种提高流媒体连接缓冲速度的方法及客户端
技术领域
本发明涉及移动流媒体技术领域，更具体地，涉及一种提高流媒体连接缓冲速度的方法及客户端。
背景技术
随着3G技术的进一步发展和三网融合的实现，有越来越多的用户通过流媒体、手机电视、IPTV等各种在线视频与世界交互。
虽然流媒体技术的广泛应用可以使用户以身临其境的感觉随时了解到世界各地的情景，但为了播放的连续性和流畅性，每次在启动播放流媒体时，流媒体客户端都会有一个较长时间的数据缓冲等待时间。
图1所示为现有的流媒体客户端数据处理流程示意图。如图所示，流媒体客户端在连接成功后，会进行一段时间的数据缓冲，然后再开始播放。
流媒体客户端在连接成功后的数据缓冲时间，造成了用户较长时间等待时间，影响播放流媒体视频时的用户体验。
发明内容
本发明的目的是在不改变现有流媒体协议标准的前提下，通过流媒体客户端的软件技术改造，提高流媒体的连接缓冲速度，增强用户体验。
为实现上述目的，本发明提出一种提高流媒体连接缓冲速度的客户端，其包括连接管理单元、协议交互及数据接收单元、音频数据缓冲单元、音频数据处理单元、音频输出单元、视频数据缓冲单元、视频调节单元、视频数据处理单元及视频输出单元；所述连接管理单元用于客户端建立与流媒体服务器的连接；所述协议交互及数据接收单元用于通过协议与流媒体服务器交互并接收服务器发送的数据；所述音频数据缓冲单元用于缓冲接收到的音频数据；所述音频数据处理单元用于解码处理缓冲的音频数据；所述音频输出单元用于输出音频数据；所述视频数据缓冲单元用于缓冲视频数据；所述视频调节单元用于调节控制视频处理单元的处理速度，以控制视频每秒的播放帧数降低；所述视频数据处理单元用于解码处理缓冲的音频数据；所述视频输出单元用于输出视频数据。
进一步地，所述视频调节单元控制视频处理单元解码显示，在接收数据初期，数据缓冲不足的情况下，视频调节单元减慢视频处理单元解码显示的速度，以便连续的播放视频数据。
进一步地，所述视频调节单元控制视频处理单元从所述视频缓冲区中取数据进行解码处理；在缓冲2-5秒钟后，视频调节单元开始以每秒5-10帧的速率控制视频处理单元处理视频，在缓冲5-10秒钟后，视频调节单元调节视频处理单元以正常的帧速率播放视频，并且以视频时间戳为准，通过间隔的丢弃与音频时间不同步的视频帧，恢复音视频同步播放。
进一步地，所述协议交互及数据接收单元用于通过rtsp协议与流媒体服务器交互，并接收服务器发送的数据。
本发明还提出一种提高流媒体连接缓冲速度的方法，包括流媒体客户端通过连接管理单元建立与服务器的连接，并通过协议交互及数据接收单元开始接收流媒体音视频数据；流媒体客户端对于接收到的音频数据，通过音频处理单元解码输出，减少缓冲等待时间；流媒体客户端对于接收到的视频数据，由视频调节单元控制视频处理单元解码显示，控制视频每秒的播放帧数降低。
进一步地，所述流媒体客户端建立与服务器的数据链路连接并通过rtsp控制协议与服务器交互，开始接收数据。
进一步地，所述流媒体客户端接收服务器发送的音频数据到音频数据缓冲；将音频数据缓冲区中的数据的通过音频处理单元解码输出。
进一步地，所述由视频调节单元控制视频处理单元解码显示，控制视频每秒的播放帧数降低是指，流媒体客户端接收服务器发送的视频数据到视频数据缓冲；由视频调节单元控制视频处理单元解码显示，在接收数据初期，数据缓冲不足的情况下，视频调节单元减慢视频处理单元解码显示的速度，以便连续的播放视频数据；在数据缓冲正常后，流媒体客户端的视频调节单元恢复正常，控制视频处理单元正常解码显示。
进一步地，所述视频调节单元控制视频处理单元从所述视频缓冲区中取数据进行解码处理；在缓冲2-5秒钟后，视频调节单元开始以每秒5-10帧的速率控制视频处理单元处理视频，在缓冲5-10秒钟后，视频调节单元调节视频处理单元以正常的帧速率播放视频，并且以视频时间戳为准，通过间隔的丢弃与音频时间不同步的视频帧，恢复音视频同步播放。
综上所述，本发明利用了现有的流媒体技术标准和硬件设备，通过软件技术改造，实现流媒体连接缓冲速度的提高，通过引入本发明中的视频调节单元，可以提高启动播放流媒体时的速度，增强用户体验。
附图说明
图1是现有的流媒体客户端数据处理流程示意图；
图2是本发明实施例提高流媒体连接缓冲速度的客户端结构示意图；
图3是本发明实施例提高流媒体连接缓冲速度流程示意图。
具体实施方式
本发明在不改变现有流媒体协议标准的前提下，通过流媒体客户端的软件技术改造，提高流媒体的连接缓冲速度，增强用户体验。
本发明提高流媒体连接缓冲速度的方法主要包括如下特征：
流媒体客户端通过连接管理单元建立与服务器的连接，并通过协议交互及数据接收单元开始接收流媒体音视频数据；
流媒体客户端对于接收到的音频数据，通过音频处理单元解码输出，减少缓冲等待时间；
流媒体客户端对于接收到的视频数据，由视频调节单元控制视频处理单元解码显示，在接收数据初期，数据缓冲不足的情况下，视频调节单元减慢视频处理单元解码显示的速度，以便连续的播放视频数据；
在数据缓冲正常后，流媒体客户端的视频调节单元恢复正常，控制视频处理单元正常解码显示。
下面结合附图详述描述本发明的具体实施方式。
如图2所示，是本发明实施例提高流媒体连接缓冲速度的客户端结构示意图，其包括：连接管理单元、协议交互及数据接收单元、音频数据缓冲单元、音频数据处理单元、音频输出单元、视频数据缓冲单元、视频调节单元、视频数据处理单元及视频输出单元。
所述连接管理单元用于流媒体客户端建立与流媒体服务器的连接；
所述协议交互及数据接收单元用于通过rtsp协议与流媒体服务器交互，并接收服务器发送的数据；
所述音频数据缓冲单元用于缓冲协议交互及数据接收单元接收到的音频数据；
所述音频数据处理单元用于解码处理由音频数据缓冲单元缓冲的音频数据；
所述音频输出单元用于输出由音频数据处理单元解码后的音频数据；
所述视频数据缓冲单元，用于缓冲协议交互及数据接收单元接收到的视频数据；
所述视频调节单元用于调节控制视频处理单元的处理速度，以控制视频帧的播放速度；
所述视频数据处理单元用于解码处理由视频数据缓冲单元缓冲的音频数据；
所述视频输出单元用于输出由视频数据处理单元解码后的视频数据。
请参考图3所示，是本发明实施例提高流媒体连接缓冲速度流程示意图，其包括如下步骤：
S301：通过连接管理单元，流媒体客户端建立与服务器的数据链路；
S302：通过协议交互及数据接收单元，开始从流媒体服务器接收数据；
协议交互及数据接收单元利用步骤S301中建立起来的数据链路，通过rtsp协议交互，开始从服务器接收音视频数据。
S303：音频和视频数据缓冲单元开始接收缓冲数据；
音频数据缓冲单元缓冲步骤S302中接收的音频数据，视频数据缓冲单元缓冲步骤S302中接收的视频数据；
S304：音频数据处理单元解码音频数据；
音频处理单元处理步骤S303中缓冲的音频数据，在音频缓冲2秒钟后，即通过音频处理单元处理音频数据；
S305：由视频调节单元控制视频处理单元，进行视频数据的解码；
视频调节单元控制视频处理单元从步骤S303中的视频缓冲区中取数据进行解码处理；在缓冲2-5秒钟后，视频调节单元开始以每秒5-10帧的速率控制视频处理单元处理视频，在缓冲5-10秒钟后，视频调节单元调节视频处理单元以正常的帧速率播放视频，并且以视频时间戳为准，通过间隔的丢弃与音频时间不同步的视频帧，恢复音视频同步播放。
S306：音频输出单元和视频输出单元开始输出音视频；
音频输出单元输出步骤S304中音频处理单元解码后的数据，视频输出单元输出步骤S305由视频处理单元解码后的视频数据，开始音视频数据的播放。
本发明利用现有的流媒体技术标准和硬件设备实现了提高流媒体连接缓冲速度的功能。流媒体连接缓冲速度的提高与现有的流媒体技术和设备兼容。并且流媒体连接缓冲速度的提高不会影响正常的流媒体播放功能，数据缓冲正常后，视频调节单元恢复正常，音视频数据都正常的播放输出。
通过上述实施例可知，在开启播放流媒体时，音视频数据经过很少缓冲，音频输出单元会及时的输出音频数据，而视频调节单元会减慢视频输出单元视频帧的处理速度。由于人眼视觉的延迟性，视频调节单元的调节不会使用户明显的感觉到视频播放的延迟。因此，可以明显的提高流媒体开启后连接缓冲的速度，提高用户体验。
本发明实现方便，利用了现有的流媒体技术标准和硬件设备，通过软件技术改造，实现流媒体连接缓冲速度的提高，通过引入本发明中的视频调节单元，可以提高启动播放流媒体时的速度，增强用户体验。
当然，本发明还可有多种实施方式，在不背离本发明精神及其实质的情况，熟悉本领域的技术人员当可根据本发明做出各种相应的更改或变化，但凡在本发明的精神和原则之内所作的任何修改、等同替换、改进，均应包含在本发明的保护范围之内。

Claims (9)

1.一种提高流媒体连接缓冲速度的客户端，其包括连接管理单元、协议交互及数据接收单元、音频数据缓冲单元、音频数据处理单元、音频输出单元、视频数据缓冲单元、视频调节单元、视频数据处理单元及视频输出单元；所述连接管理单元用于客户端建立与流媒体服务器的连接；所述协议交互及数据接收单元用于通过协议与流媒体服务器交互并接收服务器发送的数据；所述音频数据缓冲单元用于缓冲接收到的音频数据；所述音频数据处理单元用于解码处理缓冲的音频数据；所述音频输出单元用于输出音频数据；所述视频数据缓冲单元用于缓冲视频数据；所述视频调节单元用于调节控制视频处理单元的处理速度，以控制视频每秒的播放帧数降低；所述视频数据处理单元用于解码处理缓冲的音频数据；所述视频输出单元用于输出视频数据。
2.如权利要求1所述的客户端，其特征在于：所述视频调节单元控制视频处理单元解码显示，在接收数据初期，数据缓冲不足的情况下，视频调节单元减慢视频处理单元解码显示的速度，以便连续的播放视频数据。
3.如权利要求2所述的客户端，其特征在于：所述视频调节单元控制视频处理单元从所述视频缓冲区中取数据进行解码处理；在缓冲2-5秒钟后，视频调节单元开始以每秒5-10帧的速率控制视频处理单元处理视频，在缓冲5-10秒钟后，视频调节单元调节视频处理单元以正常的帧速率播放视频，并且以视频时间戳为准，通过间隔的丢弃与音频时间不同步的视频帧，恢复音视频同步播放。
4.如权利要求1所述的客户端，其特征在于：所述协议交互及数据接收单元用于通过rtsp协议与流媒体服务器交互，并接收服务器发送的数据。
5.一种提高流媒体连接缓冲速度的方法，包括流媒体客户端通过连接管理单元建立与服务器的连接，并通过协议交互及数据接收单元开始接收流媒体音视频数据；流媒体客户端对于接收到的音频数据，通过音频处理单元解码输出，减少缓冲等待时间；流媒体客户端对于接收到的视频数据，由视频调节单元控制视频处理单元解码显示，控制视频每秒的播放帧数降低。
6.如权利要求5所述的方法，其特征在于：所述流媒体客户端建立与服务器的数据链路连接并通过rtsp控制协议与服务器交互，开始接收数据。
7.如权利要求5所述的方法，其特征在于：所述流媒体客户端接收服务器发送的音频数据到音频数据缓冲；将音频数据缓冲区中的数据的通过音频处理单元解码输出。
8.如权利要求5所述的方法，其特征在于：所述由视频调节单元控制视频处理单元解码显示，控制视频每秒的播放帧数降低是指，流媒体客户端接收服务器发送的视频数据到视频数据缓冲；由视频调节单元控制视频处理单元解码显示，在接收数据初期，数据缓冲不足的情况下，视频调节单元减慢视频处理单元解码显示的速度，以便连续的播放视频数据；在数据缓冲正常后，流媒体客户端的视频调节单元恢复正常，控制视频处理单元正常解码显示。
9.如权利要求8所述的方法，其特征在于：所述视频调节单元控制视频处理单元从所述视频缓冲区中取数据进行解码处理；在缓冲2-5秒钟后，视频调节单元开始以每秒5-10帧的速率控制视频处理单元处理视频，在缓冲5-10秒钟后，视频调节单元调节视频处理单元以正常的帧速率播放视频，并且以视频时间戳为准，通过间隔的丢弃与音频时间不同步的视频帧，恢复音视频同步播放。
CN2010102398373A 2010-07-28 2010-07-28 一种提高流媒体连接缓冲速度的方法及客户端 Pending CN101917412A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2010102398373A CN101917412A (zh) 2010-07-28 2010-07-28 一种提高流媒体连接缓冲速度的方法及客户端
PCT/CN2011/070056 WO2012013024A1 (zh) 2010-07-28 2011-01-06 一种实现流媒体连接缓冲的方法及客户端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2010102398373A CN101917412A (zh) 2010-07-28 2010-07-28 一种提高流媒体连接缓冲速度的方法及客户端

Publications (1)

Publication Number Publication Date
CN101917412A true CN101917412A (zh) 2010-12-15

Family

ID=43324798

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010102398373A Pending CN101917412A (zh) 2010-07-28 2010-07-28 一种提高流媒体连接缓冲速度的方法及客户端

Country Status (2)

Country Link
CN (1) CN101917412A (zh)
WO (1) WO2012013024A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102176317A (zh) * 2011-01-14 2011-09-07 东软集团股份有限公司 用于实现旅客向导系统多屏播放帧级同步的方法及系统
WO2012013024A1 (zh) * 2010-07-28 2012-02-02 中兴通讯股份有限公司 一种实现流媒体连接缓冲的方法及客户端
TWI507022B (zh) * 2012-12-05 2015-11-01 Ind Tech Res Inst 多媒體串流的緩存輸出方法以及多媒體串流緩存模組

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101193269A (zh) * 2006-11-22 2008-06-04 中兴通讯股份有限公司 一种提高客户端vcr操作的响应速度的方法
CN101296158A (zh) * 2007-04-26 2008-10-29 深圳市同洲电子股份有限公司 一种流媒体数据传输方法及其数据传输装置
US20090138614A1 (en) * 2007-11-28 2009-05-28 Motorola, Inc. Method and apparatus for streaming media in a communication network
CN101583025A (zh) * 2009-06-11 2009-11-18 中兴通讯股份有限公司 一种流媒体播放方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100608715B1 (ko) * 2003-09-27 2006-08-04 엘지전자 주식회사 ＱｏＳ보장형 멀티미디어 스트리밍 서비스 시스템 및 방법
CN101075949A (zh) * 2006-05-15 2007-11-21 中兴通讯股份有限公司 一种改变流媒体文件播放速度的方法
CN101917412A (zh) * 2010-07-28 2010-12-15 中兴通讯股份有限公司 一种提高流媒体连接缓冲速度的方法及客户端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101193269A (zh) * 2006-11-22 2008-06-04 中兴通讯股份有限公司 一种提高客户端vcr操作的响应速度的方法
CN101296158A (zh) * 2007-04-26 2008-10-29 深圳市同洲电子股份有限公司 一种流媒体数据传输方法及其数据传输装置
US20090138614A1 (en) * 2007-11-28 2009-05-28 Motorola, Inc. Method and apparatus for streaming media in a communication network
CN101583025A (zh) * 2009-06-11 2009-11-18 中兴通讯股份有限公司 一种流媒体播放方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012013024A1 (zh) * 2010-07-28 2012-02-02 中兴通讯股份有限公司 一种实现流媒体连接缓冲的方法及客户端
CN102176317A (zh) * 2011-01-14 2011-09-07 东软集团股份有限公司 用于实现旅客向导系统多屏播放帧级同步的方法及系统
CN102176317B (zh) * 2011-01-14 2014-10-15 东软集团股份有限公司 用于实现旅客向导系统多屏播放帧级同步的方法及系统
TWI507022B (zh) * 2012-12-05 2015-11-01 Ind Tech Res Inst 多媒體串流的緩存輸出方法以及多媒體串流緩存模組

Also Published As

Publication number Publication date
WO2012013024A1 (zh) 2012-02-02

Similar Documents

Publication Publication Date Title
CN102802075B (zh) 一种在线播放缓冲系统和方法
CN106488265A (zh) 一种发送媒体流的方法和装置
CN104618786A (zh) 音视频同步方法和装置
WO2014155377A1 (en) Method and system for automatically adding subtitles to streaming media content
WO2017101312A1 (zh) 双画面下的音量自动调节方法、装置及智能设备
CN107770600A (zh) 流媒体数据的传输方法、装置、设备和存储介质
CN101710997A (zh) 基于mpeg-2系统实现视、音频同步的方法及系统
CN111372138A (zh) 一种播放器端的直播低延迟技术方案
CN103517153A (zh) 一种实现多屏幕同屏播放视频的方法及系统
CN106385620A (zh) 一种基于流媒体的数据平滑输出方法
CN102185835A (zh) 一种实时网络信号播放方法及装置
CN112291498B (zh) 音视频数据传输的方法、装置和存储介质
WO2014054325A1 (ja) 符号化制御装置および符号化制御方法
CN108810656B (zh) 一种实时直播ts流的去抖处理方法及处理系统
CN103051864A (zh) 移动视频会议方法及其系统
CN101715046A (zh) 电子设备、内容再现方法和程序
CN105791735A (zh) 用于视频通话码流动态调整的方法和系统
CN104202615A (zh) 一种基于云计算的视频重定向方法
CN112367542A (zh) 一种镜像投屏的终端播放系统及方法
US20130166769A1 (en) Receiving device, screen frame transmission system and method
EP2079233A3 (en) Digital broadcast receiver and digital broadcast receiving method
WO2009094841A1 (fr) Procédé pour le saut de chaîne rapide et continu dans un décodeur iptv
CN102067595B (zh) 图像声音通信装置以及其通信方法
CN101917412A (zh) 一种提高流媒体连接缓冲速度的方法及客户端
CN104038808A (zh) 增强机动载体视频流畅的图像解码装置及系统及解码方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20101215