CN101321275B - 视频流的处理系统和处理方法 - Google Patents

视频流的处理系统和处理方法 Download PDF

Info

Publication number
CN101321275B
CN101321275B CN2007101107398A CN200710110739A CN101321275B CN 101321275 B CN101321275 B CN 101321275B CN 2007101107398 A CN2007101107398 A CN 2007101107398A CN 200710110739 A CN200710110739 A CN 200710110739A CN 101321275 B CN101321275 B CN 101321275B
Authority
CN
China
Prior art keywords
user
channel program
program
son stream
stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2007101107398A
Other languages
English (en)
Other versions
CN101321275A (zh
Inventor
戴险峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN2007101107398A priority Critical patent/CN101321275B/zh
Priority to PCT/CN2008/071065 priority patent/WO2008148333A1/zh
Publication of CN101321275A publication Critical patent/CN101321275A/zh
Application granted granted Critical
Publication of CN101321275B publication Critical patent/CN101321275B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/631Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H04N21/4383Accessing a communication channel
    • H04N21/4384Accessing a communication channel involving operations to reduce the access time, e.g. fast-tuning for reducing channel switching latency
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Abstract

本发明实施例涉及一种视频流的处理系统,包括节目源服务器,用于将频道节目的视频流分解为第一子流和第二子流,并发送第一子流给合法用户,当频道节目被点播时,发送第二子流;终端设备,用于将接收到的第一子流和用户点播频道的第二子流解码播放。本发明实施例还涉及一种视频流的处理方法,包括将频道节目的视频流分解为第一子流和第二子流,并发送第一子流;申请接收该用户点播频道的第二子流的同时将用户点播频道的第一子流解码播放;节目源服务器发送用户点播频道的第二子流;终端设备将接收到的第一子流和用户点播频道的第二子流解码播放。因此本发明实施例视频流的处理系统和处理方法,能实现直播节目间的立即切换,即零延时频道切换时间。

Description

视频流的处理系统和处理方法
技术领域
本发明涉及视频处理领域,尤其是一种视频流的处理系统和处理方法。 
背景技术
在网络电视(Internet Protocol Television,IPTV)网络中,频道切换时间是一个十分重要的指标,直接影响到用户满意度。但是现有技术的频道切换时间在秒级。如图1所示,为现有技术中一个抽象的IPTV网络直播业务的视频流处理系统的结构示意图,其中包括节目源91、组播复制点92、终端设备93(例如机顶盒+电视机、或个人计算机等,包括合法的用户和非法的用户)。节目源91负责电视节目的存储和视频流的编码与发送;组播复制点92根据不同的组播组及其成员,复制上行来的相应的电视视频流到不同的终端设备93;终端设备93向外部指定的设备申请授权,身份认证通过后成为合法用户,即可申请加入某个组播组(一个电视频道节目通常为一个组播组),从而接收到某个电视频道的视频流,终端设备93对接收到的视频流解码后播放;切换频道时终端设备93向外部指定设备发出申请,离开原来的组播组,申请加入新的组播组,申请通过后,组播复制点停止对该终端设备93发送原频道的视频流,改为发送新频道节目的视频流,终端设备93接收到新频道视频流后即可收看到新频道节目的图像。 
分级编码(Scalable Coding)是现代视频编码技术之一,它使得视频编码过程的灵活性更好,让多媒体信息自适应地在网络间进行传输。主要解决网络传输视频流的路径中传输带宽有限的问题,在视频的分级编码技术中,视频信息流被分解成多个子流,包括一个基本层子流和一个增强层子流,其中 基本层子流包含了视频流最重要的基本信息,在接收端可以单独解码,解码后可得到一个最基本的图象;增强层子流不能单独解码,必须与基本层子流一起解码,得到更高质量的图象。目前支持分级编码技术的视频编码标准有MPEG-2、MPEG-4、H.263+等。因此该方法使得视频流具有可分级性,在网络带宽较小的时候,传输基本层子流,并根据实际的网络环境决定是否传输增强层子流,以使得图像质量得到加强,由此实现自适应。 
精细可分级视频编码(fine granularity scalability,FGS)是MPEG-4编码标准的一部分,它比普通的分级编码技术具有更好的灵活性。普通的可分级编码分为三种:时域可分级性(Temporal Scalability),空域可分级性(Spatial Scalability),质量可分级性(SNR Scalability)。它们的增强层的速率是一个或几个固定的速率,而在FGS编码中,增强层的速率可以根据带宽的实际情况精细调节。 
频道切换的时间是指从按下遥控器控制按钮到屏幕显示下一个频道的第一帧视频图像的时间。假如在MPEG-2图像编码方式下,视频流的传输速度是每秒25帧,每一个图像组(Group Of Pictures,GOP)为15帧,GOP由I帧、B帧和P帧组成,其中只有一个I帧和多个B帧和P帧。因为只有I帧可以单独进行解码后显示图像,而B帧和P帧则不能单独进行解码,因此必须依赖于同一个GOP中的I帧才能解码后得到一帧图像。所以终端设备只有接收到频道的第一个I帧后才能开始显示该频道的视频图像。如果频道切换时刻正好发生在某个I帧之后,则需要等待整个GOP的传输时间才能接收到下一个I帧,即15帧的传输时间,大约600ms之后才能显示出该频道的视频图像。 
如图2所示,为现有技术的频道切换时间的组成示意图,图中描述了整个频道切换过程中的各个阶段,以及它们占用的时间。从按下遥控器控制按钮开始,分别经历了机顶盒处理,发送互联网组管理协议(Internet GroupManagement Protocol,IGMP)离开和IGMP成员报告消息,接入节点IGMP消息处理,汇聚节点IGMP消息处理,视频数据包进入队列,调制到数字用户线 路(Digital Subscriber Line,DSL),接收到新频道的第一个I帧,解码并显示图像等环节。从图中可以看到,整个时间大约700ms,而其中大部分时间是等待接收第一个I帧所花的时间约600ms。 
为了减小整个频道切换时间,现有的处理系统的处理方法是减小两个相邻I帧的时间间距,也就是说减小GOP的大小,增加I帧出现的数量,例如将GOP减小到9帧的情况下,则相邻I帧的间距就可以从600ms减小到约360ms。 
但是,现有技术虽然从一定程度上减小了频道切换时间,但因为是通过减小GOP的大小来增加了I帧的数量来实现的,因此牺牲了图像编码的效率,从而使得图像压缩比下降,增加了传输视频信号占用的带宽。并且,现有技术计算得到的频道切换时间还不包括接收到新频道视频信号后进行缓存的时间,因此这个时间至少要大于一个GOP的时间即约600ms,因此现有技术不能从根本上解决频道切换时间过长的问题。 
发明内容
本发明实施例提供一种视频流的处理方法和处理系统,以实现零延时切换频道。 
本发明实施例一方面提供了一种视频流的处理系统,包括: 
节目源,用于分别提供n个电视频道节目的视频流分解出的第一子流和至少一条第二子流,将n个电视频道节目的第一子流发送给合法用户的终端设备,当频道节目被点播时,向点播频道节目的用户的终端设备发送第二子流; 
所述终端设备,用于接收节目源发送的所述n个电视频道节目的第一子流,申请接收用户点播频道节目的第二子流,并将接收到的用户点播频道节目的第一子流和第二子流解码播放;在频道切换时,所述终端设备始终在接收所述n个电视频道节目的第一子流,并将接收到的所述用户点播的新频道节目的第一子流解码播放,其中所述用户点播的所述新频道节目为所述n个电视频道节目之一;当接收到节目源发送的上述用户点播的所述新频道节目的第二子流时,所述终端设备将接收到的所述用户点播的所述新频道节目的第一子流和第二子流合并解码播放。 
本发明实施例另一方面提供了一种视频流的处理方法,包括以下步骤: 
节目源分别将n个电视频道节目的视频流分解为第一子流和第二子流,并将n个电视频道节目的第一子流发送给合法用户; 
终端设备频道切换时,始终接收所述n个电视频道节目的第一子流,并 当用户从所述n个电视频道节目中点播一个新频道的电视节目时,终端设备申请接收用户点播的所述新频道的第二子流;同时,将用户点播的所述新频道的第一子流解码播放。 
节目源发送用户点播的所述新频道的第二子流; 
终端设备将接收到的用户点播的所述新频道的第一子流和第二子流解码播放。 
本发明实施例再一方面提供了一种视频流的处理方法,包括以下步骤: 
终端设备接收n个电视频道节目的第一子流; 
所述终端设备接收到用户点播频道节目的请求时,申请接收所述用户点播频道节目的第二子流,其中,所述用户点播频道节目为所述n个电视频道节目之一; 
所述终端设备若已接收到所述用户点播频道节目的第一子流,则将所述用户点播频道节目的第一子流解码播放; 
所述终端设备接收到所述用户点播频道节目的第二子流时,将接收到的所述用户点播频道节目的第一子流和第二子流合并解码播放; 
在频道切换时,所述终端设备始终在接收所述n个电视频道节目的第一子流,并将接收到的所述用户点播的新频道节目的第一子流解码播放,其中所述用户点播的所述新频道节目为所述n个电视频道节目之一; 
当接收到节目源发送的所述用户点播的所述新频道节目的第二子流时,所述终端设备将接收到的所述用户点播的所述新频道节目的第一子流和第二子流合并解码播放。 
因此,本发明视频流的处理系统和处理方法,将视频流分解为第一子流和第二子流,而合法的终端设备始终在接收各个电视频道节目的第一子流,所以可以在任何时间同时显示各个电视频道节目的基本图像,实现多画面显示功能和画中画,并且当终端设备接收到新频道节目的第二子流后,与对应频道节目的第一子流合并,解码后得到新频道完整的图像,能实现直播节目间的立即切换,即零延时频道切换时间。 
附图说明
图1为现有技术中一个抽象的IPTV网络直播业务的视频流处理系统的结构示意图; 
图2为现有技术的频道切换时间的组成示意图; 
图3为本发明实施例视频流的处理系统的结构示意图; 
图4为本发明实施例视频流的处理系统的节目源服务器的结构示意图; 
图5为本发明实施例视频流的处理系统中的终端设备内部实现之一; 
图6为本发明实施例视频流的处理系统中的终端设备内部实现之二; 
图7所示为本发明实施例预处理模块的工作原理图; 
图8所示为本发明实施例视频流的处理方法的流程图。 
具体实施方式
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。 
本发明实施例方案是在利用图像分级编码技术,实现零延时的频道切换和多画面的显示功能。 
如图3所示,为本发明实施例视频流的处理系统的结构示意图,包括节 
目源服务器1,用于将频道节目的视频流分解为第一子流和第二子流,并将第一子流发送给合法用户,当频道节目被点播时,发送第二子流;终端设备3,通过网络与节目源服务器1相连接,用于申请接收该用户点播频道的第二子流,和接收第一子流和用户点播频道的第二子流解码播放。 
节目源服务器可以采用分级视频编码技术将电视频道节目的视频流分解成第一子流和第二子流,向外发送,第二子流可以为一条或多条子流。第一子流占用尽量小的带宽,如32kbps,即需要终端设备单独接收到后可以解码输出用户能接受的基本图像质量。在终端设备向外申请授权成为合法用户后,即可接收到n个电视频道的第一子流,n可以是全部的也可以是部分的电视频道节目数量。对于组播复制点,如果下挂有合法注册用户,并申请了直播电视节目,就可以将n个电视频道的第一子流进行复制,送给下挂的各个合法的终端设备。节目源服务器也会同时将n个电视频道的第一子流发送给组播复制点。 
当用户点播某个频道的电视节目时,终端设备申请接收该频道节目的第二子流,即申请加入与该第二子流相关的一个组播组。终端设备接收到该频道节目的第二子流后,将该频道节目的第一子流和第二子流合并,解码后显示该频道完整的图像。 
当终端设备切换频道时,只需离开原第二子流的组播组,加入新频道节目的第二子流组播组即可。当终端设备接收到新频道节目的第二子流后,与对应频道节目的第一子流合并,解码后得到新频道完整的图像。终端设备从离开原频道节目第二子流组播组开始,到接收到新频道节目第二子流,到在终端显示图像,仍需要秒级以上的切换时间。但是,在这个切换过程中,终端设备始终在接收各个电视频道节目的第一子流,因此终端设备从频道切换开始就可以将新频道节目的第一子流进行单独解码,立即显示出新频道节目的基本图像,从而实现了零延时的快速频道切换。因此第一子流可以是IPTV视频流的基本层子流,而第二子流可以为增强层子流。 
并且,因为终端设备始终在接收各个电视频道节目的第一子流,所以可以在任何时间同时显示各个电视频道节目的基本图像,在电视机终端上实现多画面显示功能,例如在电脑终端实现多窗口多画面显示,在显示终端还可以实现画中画和九画面等功能。用户选择节目时也可以在多个画面中滚动浏览,选择自己喜爱的节目。 
当电视频道节目总数比较大时,如100个,如果每个第一子流速率为32kbps,则总的第一子流将占用约3.2Mbps的较大带宽。为了保证总的第一子流占用更小的带宽,n的取值可根据不同终端用户总的下行带宽适当调整,如取值范围缩小为20~30个,或者在用户能接受图像质量的情况下,减小每个频道节目的第一子流的速率,如从32kbps减小到16kbps。在这n套频道节目中包括用户收藏夹中喜爱的频道和热门频道,从而可以保证在这些频道之间的快速切换和浏览。随着今后技术的发展,终端用户总的下行带宽随着不断增加,如ADSL2+达到40Mbps甚至更多时,n的取值将可适当进一步扩大,保证在更多的频道节目间实现快速切换和浏览。 
如图4所示,为本发明实施例视频流的处理系统的节目源服务器的结构示意图,包括第一子流发生器11,用于根据分级编码方式产生各个频道节目的独立解码的第一子流信号;第二子流发生器12,用于根据分级编码方式产生各个频道节目的需在第一个子流的基础上解码得到完整质量图像的第二子流信号。 
它们采用分级编码方式,产生各个频道节目的第一子流信号(CH1、CH2、......CHn)和第二子流信号(CH1`、CH2`、......CHn`)。第二子流可以为一条或多条子流。为了使子流所占的带宽更为灵活地调整,可采用精细可分级视频编码方式。第一子流信号和第二子流信号的产生可采用实时编码方式,也可采用预先编码方式,即预先编码之后存放在本地,当被点播时直接读取已编码好的数据,以减轻节目源服务器处理的负担。在一般情况下,一个频道节目对应一个组播组。在这里,每个频道节目的第二子流对应不同 的组播组。对于第一子流来说,n个频道的第一子流(CH1、CH2、......CHn)可以对应同一个组播组,也可以分别对于n个不同的组播组。 
终端设备可采用两种方式来实现。 
如图5所示,为本发明实施例视频流的处理系统中的终端设备内部实现之一,包括数个第一分级解码器30,用于分别解码接收到的每一个频道的第一子流;第一开关(S1)31,用于将用户点播频道的第二子流输入对应频道的第一分级解码器,以便与该用户点播频道的第一子流合并解码播放;第二开关(S2)32,与每一个第一分级解码器30均连接,用于切换输出由所述第一分级解码器解码后得到的用户点播频道的解码信号。 
再如图5所示,还可以包括第一画中画功能模块34,与每一个第一分级解码器30均连接,用于根据各分级解码器输出的各频道的解码信号生成的画中画图像信号;第三开关(S3)33,与第二开关32和第一画中画功能模块34相连接,用于输出用户点播频道的图像信号或画中画图像信号。 
本终端设备n个第一分级解码器30同时工作,对n个频道节目进行实时解码。对于被点播的频道x,终端设备会同时接收到其第一子流CHx和第二子流CHx`,第一开关(S1)31会根据被选的频道编号将CHx`切换到第x个第一分级解码器-x,第一分级解码器-x将CHx和CHx`解码得到完整的图像节目,送到第二开关(S2)32。S2根据被选的频道编号将开关切换到第x路端子,将视频信号继续送往第三开关(S3)33。S3是播放模式开关,在单一频道播放模式和画中画播放模式之间切换。当选择单一频道播放模式时,S3会将S2送来的频道信号送往显示器显示被点播频道x的图像节目;当选择画中画播放模式时,S3会将画中画功能模块送来的视频信号送往显示器显示多频道画面图像。 
对于没有被点播的频道,因为没有相应的第二子流信号送给终端设备,相应的第一分级解码器30只能对第一子流信号进行单独解码,输出一个基本的图像质量信号。当这些频道没有被选中时,这些信号不会被最终输出。但 如果被用户要求切换到其中的一个频道y,S2会立即切换到第y路端子,选中第一分级解码器-y的输出,将它送给S3,从而最终送到显示器上。与此同时,S1输入端等待接收CHy`第二子流信号,当收到信号后,立即切换到第y路端子,将CHy`信号送给第一分级解码器-y,使得第一分级解码器-y输出增强的图像质量信号,从而在最终的显示器上显示完整质量的图像节目。 
第一画中画功能模块34始终接收n个频道的视频信号,可根据用户的要求选择出相应的频道视频信号,进行多画面的视频融合,然后通过S3输出到最终的终端上,实现画中画和多画面显示功能。 
如图6所示,为本发明实施例视频流的处理系统中的终端设备内部实现之二,包括预处理模块41,用于从频道节目的第一子流中,选择出用户点播频道的第一子流并发送;延时处理模块42,用于将接收到的用户点播频道的第二子流延时并发送;第二分级解码器43,与预处理模块41和延时处理模块42相连接,用于将从预处理模块41发送的用户点播频道的第一子流,和从延时处理模块42发送的用户点播频道的第二子流合并解码输出。 
再如图6所示,还可以包括第二画中画功能模块44,与预处理模块41和第二分级解码器43相连接,用于根据各频道的第一子流信号和用户点播频道解码信号生成画中画图像信号;第四开关(S4)45,与第二分级解码器43和第二画中画功能模块44相连接,用于切换输出用户点播频道的图像信号或画中画图像信号。 
本终端设备这里共用一个第二分级解码器43来实现各个频道的视频解码。预处理模块41从n个第一子流信号中选择出被点播频道x的CHx信号,送给第二分级解码器43,同时频道x的第二信号CHx、经延迟处理后送给第二分级编码器43,第二分级编码器43将两路视频信号进行解码,得到完整质量的图像信号,送给开关第四开关(S4)45。S4为播放模式开关,在单一频道播放模式和画中画播放模式之间切换。在单一频道播放模式下,S4将第二分级解码器的视频输出送给外部显示器。第二画中画功能模块一路接被点播 频道x的视频信号,另外一路接其他频道的第一子流信号,进行处理后完成多频道的视频融合,经S4输出给外部终端设备,实现画中画和多画面显示功能。 
为了保证频道的零延迟切换,预处理模块41需要对第一子流信号做一定的处理。工作原理如图7所示,为本发明实施例预处理模块的工作原理图,第一子流的GOP由一个I帧和若干个P帧组成。在该图中,第一子流从左向右输入预处理模块。预处理模块可抽象为一个先入先出缓存器(FirstinFirstOut,FIFO),FIFO的长度可以保证至少有一个I帧保存在FIFO队列中。当发生频道切换并使用该第一子流时,预处理模块如果将频道切换时刻后的子流直接送给后面的第二分级解码器,则需要传输若干个P帧后才能获得第一个I帧。在图7中,要等待P4帧和P5帧过后,才能接收到第一个I帧。也就是说,从频道切换时刻开始要经过一定的延时才能在显示器上显示新频道的图像。为了保证切换后立即显示新频道图像,预处理模块需要寻找频道切换时刻往前的第一个I帧,即图7中的I0帧,并从I0帧开始传输后面的子流,顺序依次是I0、P1、P2、P3、P4、P5、I......。这样做的结果会导致节目图像的显示整体上有一个较小的延时t,但由于时间t非常短,并不影响节目观看。同时,图6中的延时处理模块需要相应地对新频道节目的第二子流进行时间t的延时,延时模块与预处理模块之间的时间t是一致的,具体可采用上面预处理模块FIFO队列的方法,以保证第一子流和第二子流在时间上的同步。 
本发明实施例的视频流的处理方法,包括: 
步骤1,节目源服务器将频道节目的视频流分解为第一子流和第二子流,并将第一子流发送给合法用户; 
步骤2,当用户点播一个频道的电视节目时,终端设备申请接收该用户点播频道的第二子流;同时,将用户点播频道的第一子流解码播放; 
步骤3,节目源发送用户点播频道的第二子流;
步骤4,终端设备将接收到的第一子流和用户点播频道的第二子流解码播放。 
以上步骤的序号并非限定各步骤之间的先后顺序。 
如图8所示,为本发明实施例视频流的处理方法的流程图,具体步骤如下: 
步骤101,节目源服务器将频道节目的视频流分解为第一子流和第二子流,并将第一子流发送给合法用户; 
节目源服务器可以采用分级视频编码方式或者精细可分级视频编码方式将频道节目的视频流分解为第一子流和第二子流,第二子流可以为一条或多条子流; 
第一子流包含了视频流最重要的基本信息,在接收端可以单独解码,解码后可得到一个最基本的图象;第二子流不能单独解码,必须与第一子流一起解码,得到更高质量的图象; 
步骤102,当用户点播一个频道的电视节目时,终端设备申请接收该用户点播频道的第二子流;同时,将用户点播频道的第一子流解码播放; 
步骤103,节目源服务器发送用户点播频道的第二子流; 
步骤104,终端设备将接收到的第一子流和用户点播频道的第二子流解码播放。 
步骤104的实现方式有很多,例如终端设备将接收到的第一子流和用户点播频道的第二子流解码播放具体为:所述终端设备将接收到的用户点播频道的第二子流和用户点播频道的第一子流合并解码播放;或者终端设备将接收到的用户点播频道的第二子流和用户点播频道的第一子流合并解码播放的同时,将其他频道的第一子流解码播放。 
再有的方法就是终端设备从频道节目的第一子流中,选择出用户点播频道的第一子流,与经延迟处理后的该户点播频道的第二子流合并解码播放;或者终端设备从频道节目的第一子流中,选择出用户点播频道的第一子流, 与经延迟处理后的该户点播频道的第二子流合并解码播放的同时,将其他频道的第一子流解码播放;在这种条件下,需要选择出该用户点播频道的第一子流后对该用户点播频道的第一子流进行预处理,而预处理可以具体为终端设备找到频道切换时刻前的该用户点播频道的第一子流第一个I帧,从该I帧后开始传输后面的该用户点播频道的第一子流。因此第一子流可以是IPTV视频流的基本层子流,而第二子流可以为增强层子流,增强层子流可以为一条或多条子流。 
在端对端(peer to peer,P2P)网络中,在存在节目源和终端设备的情况下,以上方法也同样适用。因此本发明视频流的处理系统和视频流的处理方法具有以下有益效果: 
1、能实现IPTV直播节目间的立即切换,实现零延时频道切换时间; 
2、在终端实现多画面显示功能和画中画功能,用户可以在同一时刻浏览多套电视直播节目; 
3、节目源采用分级视频编码技术,将电视视频流分解为第一子流和第二子流,这有利于针对这两种不同的子流采用不同的服务质量(Quality ofService,QoS)策略,如将第一子流的QoS优先等级设置比第二子流的QoS优先等级高,当IPTV网络发生拥塞时,仍可保证第一子流优先通过,终端用户仍可接收到一定质量的图像信号,减小节目被中断的几率,从而提高了整个系统的抗干扰能力。 
可以理解的是,在实现本发明实施例的全部或部分步骤是可以通过程序来指令相关的硬件来完成的,所述的程序可以存储于一计算机可读取存储介质中,所述的存储介质,如:ROM/RAM、磁盘、光盘等。 
最后所应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的精神和范围。

Claims (22)

1.一种视频流的处理系统,其特征在于包括:
节目源,用于分别提供n个电视频道节目的视频流分解出的第一子流和至少一条第二子流,将n个电视频道节目的第一子流发送给合法用户的终端设备,当频道节目被点播时,向点播频道节目的用户的终端设备发送第二子流;
所述终端设备,用于接收节目源发送的所述n个电视频道节目的第一子流,申请接收用户点播频道节目的第二子流,并将接收到的用户点播频道节目的第一子流和第二子流解码播放;在频道切换时,所述终端设备始终在接收所述n个电视频道节目的第一子流,并将接收到的所述用户点播的新频道节目的第一子流解码播放,其中所述用户点播的所述新频道节目为所述n个电视频道节目之一;当接收到节目源发送的所述用户点播的所述新频道节目的第二子流时,所述终端设备将接收到的所述用户点播的所述新频道节目的第一子流和第二子流合并解码播放。
2.根据权利要求1所述的视频流的处理系统,其特征在于所述节目源包括:
第一子流发生器,用于根据分级编码方式产生各个频道节目的独立解码的第一子流;
第二子流发生器,用于根据分级编码方式,产生各个频道节目的需在第一个子流的基础上解码得到完整质量图像的第二子流。
3.根据权利要求1所述的视频流的处理系统,其特征在于所述终端设备包括:
数个第一分级解码器,用于分别解码接收到的每一个频道节目的第一子流;
第一开关,用于将用户点播频道节目的第二子流输入对应频道的第一分级解码器,与该用户点播频道的第一子流合并解码播放;
第二开关,用于切换输出由所述第一分级解码器解码后得到的用户点播频道节目的解码信号。
4.根据权利要求3所述的视频流的处理系统,其特征在于所述终端设备还包括:
第一画中画功能模块,用于根据各分级解码器输出的各频道节目的解码信号生成的画中画图像信号;
第三开关,用于输出用户点播频道节目的图像信号或画中画图像信号。
5.根据权利要求1所述的视频流的处理系统,其特征在于所述终端设备包括:
预处理模块,用于从频道节目的第一子流中,选择出用户点播频道节目的第一子流并发送;
延时处理模块,用于将接收到的用户点播频道节目的第二子流延时并发送;
第二分级解码器,用于将从预处理模块发送的用户点播频道节目的第一子流,和从延时处理模块发送的用户点播频道节目的第二子流合并解码输出。
6.根据权利要求5所述的视频流的处理系统,其特征在于所述终端设备还包括:
第二画中画功能模块,用于根据各频道节目的第一子流信号和用户点播频道节目解码信号生成画中画图像信号;
第四开关,用于切换输出用户点播频道节目的图像信号或画中画图像信号。
7.根据权利要求1所述的视频流的处理系统,其特征在于所述视频流为网络电视视频流。
8.一种视频流的处理方法,其特征在于包括以下步骤:
节目源分别将n个电视频道节目的视频流分解为第一子流和第二子流,并将n个电视频道节目的第一子流发送给合法用户的终端设备;
终端设备频道切换时,始终接收所述n个电视频道节目的第一子流,并当用户从所述n个电视频道节目中点播一个新频道的电视节目时,终端设备申请接收用户点播的所述新频道的第二子流;同时,将用户点播的所述新频道的第一子流解码播放;
节目源发送用户点播的所述新频道的第二子流;
终端设备将接收到的用户点播的所述新频道的第一子流和第二子流解码播放。
9.根据权利要求8所述的视频流的处理方法,其特征在于还包括:所述节目源采用分级视频编码方式将频道节目的视频流分解为第一子流和第二子流。
10.根据权利要求8所述的视频流的处理方法,其特征在于所述终端设备将接收到的用户点播频道节目的第一子流和第二子流解码播放具体为:所述终端设备将接收到的用户点播频道节目的第二子流和用户点播频道节目的第一子流合并解码播放。
11.根据权利要求8所述的视频流的处理方法,其特征在于:所述终端设备将接收到的用户点播频道节目的第一子流和第二子流解码播放的同时,将其他频道节目的第一子流解码播放。
12.根据权利要求8所述的视频流的处理方法,其特征在于所述终端设备将接收到的用户点播频道节目的第一子流和第二子流解码播放具体为:所述终端设备从频道节目的第一子流中,选择出用户点播频道节目的第一子流,与经延迟处理后的所述用户点播频道节目的第二子流合并解码播放。
13.根据权利要求12所述的视频流的处理方法,其特征在于所述终端设备从频道节目的第一子流中,选择出用户点播频道节目的第一子流,与经延迟处理后的所述用户点播频道节目的第二子流合并解码播放的同时,将其他频道节目的第一子流解码播放。
14.根据权利要求12所述的视频流的处理方法,其特征在于所述终端设备从频道节目的第一子流中,选择出所述用户点播频道节目的第一子流后对所述用户点播频道节目的第一子流进行预处理。
15.根据权利要求8所述的视频流的处理方法,其特征在于所述将用户点播频道节目的第一子流解码播放具体为:从频道节目的第一子流中,选择出用户点播频道节目的第一子流,对所述用户点播频道节目的第一子流进行预处理后进行解码播放。
16.根据权利要求14或15所述的视频流的处理方法,其特征在于所述进行预处理具体为:所述终端设备找到频道切换时刻前的所述用户点播频道节目的第一子流第一个I帧,从所述I帧后开始传输后面的所述用户点播频道的第一子流。
17.根据权利要求8所述的视频流的处理方法,其特征在于所述视频流为网络电视视频流。
18.一种视频流的处理方法,其特征在于包括以下步骤:
终端设备接收n个电视频道节目的第一子流;
所述终端设备接收到用户点播频道节目的请求时,申请接收所述用户点播频道节目的第二子流,其中,所述用户点播频道节目为所述n个电视频道节目之一;
所述终端设备若已接收到所述用户点播频道节目的第一子流,则将所述用户点播频道节目的第一子流解码播放;
所述终端设备接收到所述用户点播频道节目的第二子流时,将接收到的所述用户点播频道节目的第一子流和第二子流合并解码播放;
在频道切换时,所述终端设备始终在接收所述n个电视频道节目的第一子流,并将接收到的所述用户点播的新频道节目的第一子流解码播放,其中所述用户点播的所述新频道节目为所述n个电视频道节目之一;
当接收到节目源发送的所述用户点播的所述新频道节目的第二子流时,所述终端设备将接收到的所述用户点播的所述新频道节目的第一子流和第二子流合并解码播放。
19.根据权利要求18所述的视频流的处理方法,其特征在于所述终端设备将接收到的所述用户点播频道节目的第一子流和第二子流合并解码播放具体为:所述终端设备从所述n个电视频道节目的第一子流中,选择出用户点播频道节目的第一子流,与经延迟处理后的所述用户点播频道节目的第二子流合并解码播放。
20.根据权利要求19所述的视频流的处理方法,其特征在于所述终端设备从所述n个电视频道节目的第一子流中,选择出用户点播频道节目的第一子流,与经延迟处理后的所述用户点播频道节目的第二子流合并解码播放的同时,将其他频道节目的第一子流解码播放。
21.根据权利要求19所述的视频流的处理方法,其特征在于所述终端设备从所述n个电视频道节目的第一子流中,选择出所述用户点播频道节目的第一子流后对所述用户点播频道节目的第一子流进行预处理。
22.根据权利要求18所述的视频流的处理方法,其特征在于所述终端设备将用户点播频道节目的第一子流解码播放具体为:所述终端设备从所述n个电视频道节目的第一子流中,选择出用户点播频道节目的第一子流,对所述用户点播频道节目的第一子流进行预处理后进行解码播放。
CN2007101107398A 2007-06-06 2007-06-06 视频流的处理系统和处理方法 Expired - Fee Related CN101321275B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2007101107398A CN101321275B (zh) 2007-06-06 2007-06-06 视频流的处理系统和处理方法
PCT/CN2008/071065 WO2008148333A1 (fr) 2007-06-06 2008-05-23 Système et procédé de traitement d'un flux vidéo

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2007101107398A CN101321275B (zh) 2007-06-06 2007-06-06 视频流的处理系统和处理方法

Publications (2)

Publication Number Publication Date
CN101321275A CN101321275A (zh) 2008-12-10
CN101321275B true CN101321275B (zh) 2012-08-08

Family

ID=40093184

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007101107398A Expired - Fee Related CN101321275B (zh) 2007-06-06 2007-06-06 视频流的处理系统和处理方法

Country Status (2)

Country Link
CN (1) CN101321275B (zh)
WO (1) WO2008148333A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101710966B (zh) * 2009-11-05 2011-09-07 华数数字电视传媒集团有限公司 多画面综合视频导航系统
CN103308330B (zh) * 2012-03-14 2017-08-01 富泰华工业(深圳)有限公司 电子产品性能的测试装置及测试方法
CN102780916B (zh) * 2012-04-12 2015-03-18 天脉聚源(北京)传媒科技有限公司 一种视频直播流汇聚分发方法
US8752112B2 (en) * 2012-04-12 2014-06-10 Google Inc. Live streaming video processing
US20150089073A1 (en) * 2013-09-25 2015-03-26 Ericsson Television Inc System and method for effectuating fast channel change in an adpative streaming environment
US9537779B2 (en) 2013-10-11 2017-01-03 Huawei Technologies Co., Ltd. System and method for real-time traffic delivery
CN104202676A (zh) * 2014-09-12 2014-12-10 北京赛科世纪数码科技有限公司 一种频道切换方法和系统
CN104301714A (zh) * 2014-10-09 2015-01-21 青岛海信电器股份有限公司 一种检测电视设备频道切换响应时间的方法及装置
CN106303682B (zh) * 2016-08-09 2019-09-20 华为技术有限公司 频道切换的方法、装置、终端及服务器
CN108881935A (zh) * 2018-07-16 2018-11-23 安徽国通亿创科技股份有限公司 一种在线互动直播低延时优化方法
CN112995649B (zh) * 2019-12-13 2024-04-16 青岛海信宽带多媒体技术有限公司 网络终端及网络终端评测方法
CN112188222A (zh) * 2020-09-25 2021-01-05 吕庆新 信息采集处理设备及其应用、信息转制方法、计算机可读介质、信息采集处理方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7237032B2 (en) * 2001-02-16 2007-06-26 Microsoft Corporation Progressive streaming media rendering
US20060023748A1 (en) * 2004-07-09 2006-02-02 Chandhok Ravinder P System for layering content for scheduled delivery in a data network

Also Published As

Publication number Publication date
WO2008148333A1 (fr) 2008-12-11
CN101321275A (zh) 2008-12-10

Similar Documents

Publication Publication Date Title
CN101321275B (zh) 视频流的处理系统和处理方法
US9344470B2 (en) Methods and systems for data transmission
CN102177691B (zh) 减少媒体流延迟的系统和方法
CN103843301B (zh) 经译码多媒体数据的网络串流期间的表示之间的切换
EP2070325B1 (en) Multimedia management
CN100518311C (zh) 一种减少直播频道切换响应时间的方法
US7817672B2 (en) Method and device for providing programs to multiple end user devices
US20090293093A1 (en) Content server, information processing apparatus, network device, content distribution method, information processing method, and content distribution system
US20070250890A1 (en) Method and system for reducing switching delays between digital video feeds using multicast slotted transmission technique
CN100515056C (zh) 在同一画面中显示多个频道信息的方法、系统、装置及机顶盒
CN102422577A (zh) 用于数字视频分配系统中的瞬时多频道视频内容浏览的系统、方法和计算机可读介质
CN101917389A (zh) 一种网络电视直播系统
EP1856911A1 (en) Multimedia channel switching
CN110278474A (zh) 接收方法、发送方法、接收装置及发送装置
WO2007067568A2 (en) Internet protocol (ip) television
CN101595730A (zh) Iptv网络中的方法和节点
US20120284421A1 (en) Picture in picture for mobile tv
WO2008000114A1 (fr) Procédé de fusion d'un système de conférence télévisuelle avec un système iptv et appareil correspondant
KR101419021B1 (ko) 방송 프로그램 전송 요청 방법 및 이에 대한 방송 프로그램 전송 방법
US11470140B2 (en) Method and system for multi-channel viewing
KR20080081407A (ko) 하이브리드 다시점 및 계층화 비디오 코딩 방법과 장치
Dong et al. Ultra-low latency, stable, and scalable video transmission for free-viewpoint video services
US10637904B2 (en) Multimedia streaming service presentation method, related apparatus, and related system
Adeliyi et al. Reducing zapping delay in internet protocol television using a hybrid modular method
CN109756774A (zh) 一种ott组播频道切换的方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120808

Termination date: 20170606