CN1682206A - 以改变流式约束为基础的动态质量调节 - Google Patents

以改变流式约束为基础的动态质量调节 Download PDF

Info

Publication number
CN1682206A
CN1682206A CNA018150438A CN01815043A CN1682206A CN 1682206 A CN1682206 A CN 1682206A CN A018150438 A CNA018150438 A CN A018150438A CN 01815043 A CN01815043 A CN 01815043A CN 1682206 A CN1682206 A CN 1682206A
Authority
CN
China
Prior art keywords
information
video information
client computer
signal
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA018150438A
Other languages
English (en)
Inventor
D·J·波森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AMERICAL ANCO CORP
NCube Corp
Original Assignee
AMERICAL ANCO CORP
NCube Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US09/653,039 external-priority patent/US7512698B1/en
Application filed by AMERICAL ANCO CORP, NCube Corp filed Critical AMERICAL ANCO CORP
Publication of CN1682206A publication Critical patent/CN1682206A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17336—Handling of requests in head-ends
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/752—Media network packet handling adapting media to network capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2385—Channel allocation; Bandwidth allocation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

提供了一种在改变流式约束的基础上对数字媒体进行动态质量调节的方法和装置。数字媒体服务器根据一组流式约束将数字媒体流传送给请求客户机。客户机经过一个控制网络将一个请求(400)传送给数字媒体服务器以指出特定信息类型不再需要。响应该信号的接收，视频服务器中断向信令客户机传送那个特定信息类型(430)，然后，放宽流式约束(440)。当观众发出命令指出不再需要一个特定信息类型时，那个特定信息类型将不被传送给所述客户机，借此减少在一个视频流服务上的流式约束，以及使用预先分配给所述信令客户机的带宽的闲置部分可以将改进质量的数字媒体信息(450)传送给任何一个客户机。

Description

以改变流式约束为基础的动态质量调节
相关的申请数据
本申请是申请日为1998年8月3日的美国未决专利申请No.09/128,244的分案申请，上述美国未决专利申请No.09/128,244是申请日为1997年5月21日的美国未决专利申请No.08/859,860的分案申请，上述美国未决专利申请No.08/859,860是申请日为1995年7月14日、申请号为08/502,480并且现在已经被授予专利权、专利号为No.5,659,539的后续申请。被提及的上述文件在此被全部具体表现出来。
发明领域
本发明涉及一种用于对视听信息进行处理的方法和装置，具体地说，本发明涉及一种响应不严格的流式约束而提供改进质量的数字媒体的方法和装置。
发明背景
近年来，媒体产业已经远远超过了传统模拟技术的水平。声音、照片、甚至是长片现在都可以被记录或转换成数字格式。由于它提供了超越模拟片的许多优点，所以，在当今社会中数字媒体占越来越大的比重不是没有正当理由的。作为公知流行DVD格式的用户，数字媒体不会因为重复使用而降低质量。当利用DVD播放机引导时，数字媒体可以被以整体的形式立即传送，或者当数字媒体服务器需要时以数据流的形式传送。
可以想象，数字媒体的观众希望从数字媒体的提供者处获得至少与他们在磁带录象机上观看模拟录像带时所能欣赏的相同的功能。例如，一个数字媒体图像的观众也许希望能像使用模拟录像带和录象机一样屏蔽音频。目前，这种功能是通过调节观众的音量控制执行的。但是，所述服务器并没有察觉到音频信息是所述观众所不需要的。所述服务器仍然继续将音频信息传送给所述观众。在分布式数字媒体环境中，在所述数字媒体服务器上的可用带宽中的生成损耗是相当大的。
发明概述
提供了当用户不希望接收一种特定数据类型时消除数字媒体服务器上带宽中损耗的技术。利用预先分配给客户机用于传送改进质量图象的带宽或诸如闭路字幕信息的附加信息将额外的值提供给观众。根据本发明的一个方面，一个数字媒体流根据一组流式约束被传送给一个客户机。在一个实施例中，所述数字媒体流包含音频和视频信息。根据另一个实施例，所述数字媒体流仅仅包含可视信息，独立的音频流被传送给包含音频信息的所述客户机。随后，接收一个表示放宽流式约束的信号，该信号对应于所述数字媒体流中的一种特定数据类型。在一个实施例中，该信号指出所述客户机不再接受音频信息。在另一个实施例中，该信号指出所述客户机不再接受一个特定磁带的信息。响应这个信号，一组改进质量的媒体信息被传送给所述客户机。
根据一个实施例，可以使用预先分配给所述客户机的所述带宽的闲置(freed-up)部分传送一组改进质量的媒体信息。根据另一个实施例，可以使用预先分配给第二客户机的带宽的闲置部分将一组改进质量的媒体信息传送给第一客户机。根据再一个实施例，所述一组改进质量的媒体信息包括闭路字幕信息。
作为这里所述技术的结果，一个客户机可以连续获得改进质量的数字媒体流，从而，当一个观众请求中止不希望的流式视频图像部分时，不希望的信息将不再被传送给所述客户机，借此减少了对视频流服务的流式约束，并可以使用预先分配给请求客户机的所述带宽的闲置部分传送改进质量的媒体信息。
附图简述
本发明以借助于不作为限制的举例方式来说明的，在附图中，相同的标号表示类似的元件。其中：
图1的框图示出了根据本发明一个实施例的一个视听信息传送系统；
图2示出了根据本发明一个实施例的数字媒体文件的各个层；
图3示出了根据本发明一个实施例的一个多路复用器的操作；
图4的流程示出了根据本发明一个实施例的动态质量调节的步骤；和
图5示出了根据本发明一个实施例的经过修改的多路复用器的操作。
最佳实施例的详细描述
披露了一种以改变流式约束为基础进行动态质量调节的方法和装置。在下面的描述中，为解释的目的，将出现很多特定的细节以便提供对本发明的完整理解。但是，对于本领域内的普通技术人员来说很明显，没有这些特定的细节也可以实现本发明。在另一些实例中，在所述框图中示出了公知的结构和设备以免不必要的使本发明变得不清楚。
在下面的描述中，将按照标题的下述顺序对本发明的各种特征进行论述：
I.系统概述
II.数字音频/视频文件结构
III.多路复用器的操作
IV.功能操作
I.系统概述
图1的框图示出了根据本发明一个实施例的视听信息传送系统100。视听信息传送系统100包含多个(1-n)客户机160、170和180。客户机(1-n)160、170和180通常表示被设定为对包含在数字视听数据流中的视听信息进行译码的设备。例如，客户机(1-n)160、170和180可以是诸如电视机的耦合到输出显示器上的置顶转换器盒。
如图1所示，所述视听信息传送系统100还包括耦合到控制网络120上的流服务器110。控制网络120可以是允许在两个或多个设备之间通信的任一网络。例如，控制网络120可以是一个高带宽网络、一个X.25电路或电子工业联合会(EIA)232(RS-232)串行线或一个IP网络。
也耦合到控制网络120上的所述客户机(1-n)160、170和180经过控制网络120与所述流服务器110通信。例如，客户机160、170和180可以传送一个请求以便启动视听数据流的转送，传送控制信息以影响正在进行的数字视听传送的播放，或者转送与信息相关的请求。这种请求可以包括例如与服务器当前可以获得的视听数据流相关信息的请求。
所述视听信息传送系统100还包括视频泵130、海量存储设备140和高带宽网络150。所述视频泵130被耦合到流服务器110上并从所述视频泵110接收命令。视频泵130被耦合到所述海量存储设备140上，从而使得所述视频泵130从所述海量存储设备140中检索数据。所述海量存储设备140可以是任何一种用于存储大量数据的设备。例如，所述海量存储设备140可以是一个磁存储设备、一个光存储设备或这种设备的结合。所述海量存储设备140试图表示广泛种类的用于存储数字数据的非易失存储设备，这种非易失存储设备是公知的，这里不再讨论。在为解释的目的将网络120和150表示为不同的网络时，网络120和150可以在一个单独的网络上实现。
在数字媒体数据流实时传送期间执行的任务分布在流服务器110和视频泵130之间。因此，所述流服务器110和视频泵130可以工作在所述网络的不同部分而不会不利影响系统100的效率。
除了与流服务器110通信，客户机(1-n)160、170和180经过高带宽网络150从所述视频泵130中接收信息。高带宽网络150可以是诸如IP网络的任何一种能够传送大量数据的电路形式的网络链接。
本发明的视听信息传送系统100允许诸如视频泵130的一个服务器在所述高带宽网络150上以最小的开销将大量数据从所述海量存储设备140传送给客户机(1-n)160、170和180。另外，视听信息传送系统100允许客户机(1-n)160、170和180使用标准网络协议经过控制网络120向流服务器110传送一个请求。在一个实施例中，用于所述高带宽网络150和所述控制网络120的基础协议是相同的。流服务器110可以由单个的计算机系统组成，或者可以由构成服务器的多个计算设备组成。类似的，所述视频泵130可以由单个的服务器设备组成，或者可以包括多个这种服务器。
为了从一个特定的数字视听文件中接收数字视听数据流，客户机(1-n)160、170或180向所述流服务器110传送一个请求。为响应这个请求，流服务器110向视频泵130传送多个命令以使得视频泵130将所请求的数字视听数据流传送给请求所述数字视听数据流的所述客户机。
从流服务器110传送给视频泵130的命令包括所述客户机请求特有的控制信息。例如，所述控制信息识别所希望的数字视听文件、在所述数字视听文件中所希望数据的起始偏移以及所述客户机的地址。为了在规定的偏移处创建一个有效的数字视听流，流服务器110还可以将“词头数据”传送给视频泵130并可以请求视频泵130将所述词头数据传送给所述客户机。所述词头数据是用于使所述客户机准备从所述数字视听文件中的规定位置接收数字视听数据的数据。
在从流服务器110接收所述命令和控制信息之后，视频泵130开始从海量存储设备140上规定的数字视听文件中的所规定位置检索数字视听数据。
视频泵130将向所述客户机传送任一词头数据，然后，经过所述高带宽网络150将从所述海量存储设备140中规定位置开始检索的数字视听数据传送给所述客户机。
所述请求客户机接收从任一词头数据开始的数字视听数据流。该客户机译码所述数字视听数据流以重现编码的视听序列。
II.数字视听文件的结构
已经描述了所述视听信息传送系统100的系统概述，下面将描述所述数字媒体的格式或视听文件的结构。无论是压缩还是未压缩，数字视听存储格式都使用了各种结构的状态机和信息包。这里所描述的技术被应用到所有这种存储格式中。在本发明没有被限制在任何特定数字视听格式的同时，为说明的目的，将描述MPEG-2传输文件结构。
参看图2，该图比较详细地示出了MPEG-2传输文件104的结构。MPEG文件104中的数据被打包成三层；程序基本流(“PES”)层、传输层和视频层。这些层在所述MPEG-2说明书中有详细的描述。在所述PES层，MPEG文件104由一系列的PES包组成。在所述传输层，所述MPEG文件104由一系列的传输包组成。在所述视频层，MPEG文件104由一系列的图象包组成。每个图象包包含用于一个视频帧的数据。
每个PES包具有一个用于识别所述PES包长度和内容的标题。在所示的例子中，PES包250包含后面跟随一系列传输包251-262的标题248。PES包的边界与有效传输包的边界相符。每个传输包包含专用的一种数据。在所示的例子中，传输包251、256、259、260和262包含视频数据。传输包252、257和261包含音频数据。传输包253包含控制信息。传输包254包含定时数据。传输包255是一个填充(padding)包。
每个传输包都具有一个标题。所述标题包括用于所述包的程序标识符(“PID”)。被指定为PID 0的包是控制包。例如，包253可以被指定为PID0。控制包包含表明在所述数字视听数据流中存在哪种程序的信息。控制包使每个程序与一个或多个PMT包的PID号相关，所述PMT包包含一个程序映像表。程序映像表表示在一个程序中存在什么数据类型，并指出载有每种数据类型的所述包的PID号。所示在PMT包中可以识别什么数据类型的例子包括但不局限于英文MPEG2视频和MPEG2音频，以及法文MPEG2音频。
在所述视频层中，MPEG文件104根据帧数据的边界被划分。如上所述，在表示视频帧的数据边界和传输包边界之间没有相关性。在所示的例子中，用于一个视频帧“F”的帧数据被定位为如括号270所示。具体地说，用于帧“F”的帧数据在视频包256中被定位在从视频包251内的点280到所述视频包251的终点，以及从视频包258的起点到视频包258内的点282。因此，点280和282表示与用于帧“F”的所述图象包相关的边界。用于第二视频帧“G”的所述帧数据被定位如括号272所示。与用于帧“G”的所述图象包相关的边界由括号276指出。
与上述用于MPEG-2传输流类似的许多结构也存在于诸如MPEG-1、Quictime以及AVI之类的其他数字视听存储格式中。在一个实施例中，存储视频访问点、时间标记、文件位置等的标志，从而使得可以使用相同的服务器访问多个数字视听存储格式以便同步服务于存储格式大范围变化的不同客户机。所有这些格式规定信息和技术最好被插入到所述流服务器中。所述服务器的所有其他元件的格式都是独立的。
III.多路复用器的操作
经常希望将多个数字媒体显示(每个在一个独立的数字媒体流中)合并成包含组合数字媒体显示的一个信息流。这种合并允许一个用户选择不同的数字媒体显示以观看一个单一的数字媒体流。图3示出了多路复用器310，该多路复用器310是一个用于执行将多个数字媒体流合并成一个单一数字媒体流的合并操作的数字媒体部件。正如对现有技术中的多路复用器的理解一样，本章的描述将被限定在这样一个便于理解的在多路复用信息流环境中最佳静音操作中使用的范围中，在以下细节中将进行详细描述。
如图3所示，多路复用器310具有多个输入端和一个输出端。标记为320、322和324的所述多路复用器的输入端被单个程序传输流(“SPTS”)调用，其输出端被标记为330的多程序传输流(“MPTS”)调用。所述的单个程序传输流320、322和324是利用一个音频表示的音频和视频数据进行编码的数字媒体流。另外，多程序传输流330是一个利用多个视频显示的音频和视频数据进行编码的数字媒体流。由此，所述单程序传送流320、322和324与电视机上的一个单一信道类似，同时，多程序传输流330类似于一个电缆网络。
当单个的SPTS(单程序传送流)320、322和324被相互组合时，多路复用器310检查每个传输包中的PID以保证在所述控制包中参考的每个PID是唯一的。在来自不同的SPTS 320、322和324使用相同的PID的情况下，多路复用器310再次将所述PID映像到所述唯一的号上以保证每个包能够被很容易地识别为属于特定的单个程序传输流320、322和324。当每个音频和视频包都保证具有一个唯一的PID时，通过检查在MPTS330中的所述PID 0控制包可以很容易地识别与所述包对应的视频显示。由此，当多路复用器310必须检查所述PID 0控制包中的每个表和在所述PID 0控制包中的所有包参考的表以保证所有被参考的包都具有一个唯一的PID时，它也就能够很容易地识别与特定SPTS 320、322和324对应的所有音频包。
IV.功能操作
一个客户机可以减少包含在所接收的数字媒体显示中的特定类型信息量。在一个实施例中，作为诸如当减少视频分辨率或者将来自立体声的声音转换成单一声音时的将所述表示特征转换为没有特定类型信息的状态请求的结果，所述客户机需要的特定类型信息量被减少。在另一个实施例中，诸如当一个客户机屏蔽一个显示的音频部分时根本就不需要所述特定信息类型。对于所述流服务器110来讲，恢复使用在先分配的所述带宽以便将那个特定信息类型传输给所述客户机是有利的。这个额外的带宽可以被用于改进所述数字媒体显示的质量，或者被用于传送诸如闭路字幕信息的附加信息。
下面参考图4提供范例性的描述以说明恢复使用未使用带宽的处理，其中，所述客户机屏蔽数字媒体显示中的音频。所述客户机160经过控制网络120将一个信号传送给流服务器110以便指出音频数据将不被传送给所述客户机。使用诸如实时流协议(“RTSP”)协议的现有通信协议传送所述信号。
在一个实施例中，流服务器110工作于多路复用环境，或者其中音频和视频数据被以诸如MPEG的单一流的形式传送给所述客户机的环境。响应所述信号的接收，多路复用器被用于检查和识别与正被屏蔽的特定SPTS相关的包。然后，所述多路复用器抛弃与被屏蔽的SPTS相关的经过识别的音频包，并不将它们组合在所述输出流中。
在另一个实施例中，所述流服务器110仍然工作于多路复用环境，但是响应所接收的信号，经过修改的多路复用器510被用于检查和识别与正在被屏蔽的特定SPTS相关的包，如图5所示。除了它仅仅利用一个输入SPTS520工作以外，经过修改的多路复用器510基本上以与上述相同的方式工作。然后，经过修改的多路复用器510滤波和抛弃与输入端SPTS 520相关的经过识别的音频包。来自经过修改的多路复用器510的生成输出流530包含来自输入端SPTS 520的原始媒体显示，但不包括任何音频包。
仍然是在另一个实施例中，所述流服务器110工作于分流环境中，或者其中音频和视频数据被传送给分流中的所述客户机的环境中。响应所接收的信号，所述流服务器110继续传送所述视频流，但暂停或停止将所述音频流传送给所述信令客户机。当在音频之后将所述视频在不同的流中传送给所述信令客户机时，音频流的停止将不中断将所述视频显示传送给所述信令客户机。
当与正在被屏蔽的数字视频流相关的音频包不再传送给所述客户机时，在先分配给所述信令客户机的带宽可以被恢复使用。因此，减少了对流服务器110的流式约束。
如上所述，作为一个客户机指令不再继续传送特定类型信息的结果的恢复使用的带宽不局限于音频信息。一个客户机可以发出信号以指出包含在所述数字媒体流中的特定信息类型不再被传送给那个客户机。例如，所述客户机发出一个信号以指出可视信息不再被传送。因此，在所述流服务器110上恢复使用的带宽可以被用于传送包含在所述数字媒体流中其余类型信息的改进质量的信息，或传送附加信息。例如，如果一个客户机发出信号指出没有传送所述可视信息，则可以传送改进质量的音频信息。改进质量的音频信息的例子包括但不局限于以诸如THX或Dolby的格式传送音频信息、传送附加声轨，或者以环绕声传送信息。
在一个实施例中，所述流服务器110的任何一个客户机都可以利用来自一个客户机的在所述流服务器110上恢复使用的带宽。在另一个实施例中，来自一个客户机并在所述流服务器110上恢复使用的带宽只可以被那个客户机使用。
如上所述，恢复使用带宽的一种使用是提供改进的质量。通过改进一个或多个视频特征可以改进所述视频的质量。改进视频质量的例子包括但不局限于增加帧传输的速率、增加色度和增加像素密度。除了或代替增加视频的质量以外，恢复使用的带宽可以被用于传送或改进与视频相关的其它数据。例如，所述恢复使用的带宽可以被用于传送闭路信息、附加信息，否则在某种形式上改变所述视频的外观。
在其它的实施例中，可以通过改进的量化来改进所述视频的质量。所述改进的量化是通过将类似的状态压缩成为单一的状态借此以允许一个更加独特的状态被识别来实现的。例如，假设在一个数字视频显示中使用的每个颜色被指定为24比特数。通过将类似的颜色分组到一起和将它们指定为相同的24比特数，可以识别更加独特的颜色以用于具有24比特的数字视频。
在前面的说明中，已经参考特定的实施例对本发明进行了描述。但是，很明显，可以在不脱离本发明的广泛精神和范围的情况下做出各种修改和变化。因此，本发明的说明书和附图仅仅被认为是说明而不是限制。

Claims (52)

1.一种将来自一个服务器的数字视频传送给一个客户机的方法，包括下述步骤：
将一个或多个数字流传送给所述客户机，所述一个或多个数字流至少包括一个视频和音频信息的部分，其中，在所述服务器和所述客户机之间传送所述一个或多个数字流消耗带宽；
接收一个信号，该信号表示所述音频信息将不再传送给所述客户机；
响应所述信号，所述服务器中断到所述客户机的所述音频信息的传送，并且不同于过去那样使用带宽将所述音频信息传送到所述客户机，而是使用带宽将其它信息传送到所述客户机。
2.根据权利要求1所述的方法，其特征在于，使用至少某个带宽传送其它信息的步骤包括传送比在接收所述信号之前传送的所述视频信息具有更高质量的视频信息。
3.根据权利要求2所述的方法，其特征在于，用于传送比在接收所述信号之前传送的视频信息具有更高质量的视频信息的步骤包括以增加的频率将所述视频帧传送给所述客户机。
4.根据权利要求2所述的方法，其特征在于，用于传送比在接收所述信号之前传送的视频信息具有更高质量的视频信息的步骤包括传送比在接收所述信号之前传送的视频信息具有增加的色度的视频信息。
5.根据权利要求2所述的方法，其特征在于，用于传送比在接收所述信号之前传送的视频信息具有更高质量的视频信息的步骤包括传送比在接收所述信号之前传送的视频信息具有增加的像素密度的视频信息。
6.根据权利要求2所述的方法，其特征在于，用于传送比在接收所述信号之前传送的视频信息具有更高质量的视频信息的步骤包括传送比在接收所述信号之前传送的视频信息具有改进量化的视频信息。
7.根据权利要求1所述的方法，其特征在于，使用至少某个带宽传送信息的所述步骤包括将闭路字幕信息传送给所述客户机。
8.根据权利要求1所述的方法，其特征在于，视频和音频信息以单一数字流的形式传送给所述客户机。
9.根据权利要求1所述的方法，其特征在于，视频和音频信息以不同数字流的形式传送给所述客户机。
10.一种用于将来自一个服务器的数字视频传送给一个客户机的方法，包括如下步骤：
将一个或多个数字流传送给所述客户机，所述一个或多个数字流包括多种信息的类型，其中，在所述服务器和所述客户机之间传送所述一个或多个数字流消耗带宽；
接收一个信号，该信号请求一个变化，该变化将减少所述多种信息类型的一个特定信息类型的带宽需要；
响应所述信号，对正在被传送给所述客户机的所述一个或多个数字流执行所述变化以减少所述特定信息类型的带宽需要，并且不同于过去那样使用带宽预先要求传送所述特定的信息类型到所述客户机，而是使用带宽传送其它信息到包括所述客户机的一组客户机中的一个或多个客户机。
11.根据权利要求10所述的方法，其特征在于，所述多种信息类型包括一种希望的信息类型，使用至少某个带宽传送其它信息的步骤包括传送比在接收所述信号之前传送的希望的信息类型具有更高质量的所述希望的信息类型。
12.根据权利要求10所述的方法，其特征在于，所述多种信息类型不包括希望的信息类型，使用至少某个带宽传送其它信息的步骤包括传送所述希望的信息类型。
13.根据权利要求11所述的方法，其特征在于，使用至少某个带宽传送其它信息的步骤包括传送比在接收所述信号之前传送的视频信息具有更高质量的视频信息。
14.根据权利要求13所述的方法，其特征在于，传送比在接收所述信号之前传送的视频信息具有更高质量的视频信息的所述步骤包括以增加的频率向所述客户机传送视频帧。
15.根据权利要求13所述的方法，其特征在于，传送比在接收所述信号之前传送的视频信息具有更高质量的视频信息的所述步骤包括传送具有比在接收所述信号之前传送的视频信息增加了色度的视频信息。
16.根据权利要求13所述的方法，其特征在于，传送比在接收所述信号之前传送的视频信息具有更高质量的视频信息的所述步骤包括传送具有比在接收所述信号之前传送的视频信息增加了像素密度的视频信息。
17.根据权利要求13所述的方法，其特征在于，传送比在接收所述信号之前传送的视频信息具有更高质量的视频信息的所述步骤包括传送具有比在接收所述信号之前传送的视频信息改进量化的视频信息。
18.根据权利要求11所述的方法，其特征在于，传送具有比在接收所述信号之前传送的希望信息具有更高质量的希望信息的所述步骤包括传送增强的音频信息。
19.根据权利要求18所述的方法，其特征在于，所述传送增强音频信息的步骤是通过传送以较高采样速率记录的音频信息实现的。
20.根据权利要求12所述的方法，其特征在于，所述使用至少某个带宽传送其它信息的步骤包括将闭路字幕信息传送给所述客户机。
21.根据权利要求10所述的方法，其特征在于，所述多种信息类型被以单一数字流的形式传输给所述客户机。
22.根据权利要求10所述的方法，其特征在于，所述多种信息类型被以不同数字流的形式传输给所述客户机。
23.根据权利要求10所述的方法，其特征在于，所述信号请求减少所述特定信息类型的质量。
24.根据权利要求10所述的方法，其特征在于，所述信号请求停止传送所述特定信息类型。
25.根据权利要求10所述的方法，其特征在于，所述其它信息只被传送给所述客户机。
26.根据权利要求10所述的方法，其特征在于，所述其它信息被传送给除所述客户机以外的至少一个客户机。
27.一种载有用于将来自服务器的数字视频传送给客户机的一个或多个指令序列的计算机可读媒体，其中，利用一个或多个处理器执行所述一个或多个指令序列使得所述一个或多个处理器执行如下步骤：
向所述客户机传送一个或多个数字流，所述一个或多个数字流包括至少视频和音频信息的部分，其中在所述服务器和客户机之间传送所述一个或多个数字流消耗带宽；
接收一个表示音频信息不传送给所述客户机的信号；
响应所述信号，所述服务器中断向所述客户机传送所述音频信息，并且不同于过去那样使用带宽将所述音频信息传送到所述客户机，而是使用带宽将其它信息传送到所述客户机。
28.根据权利要求27所述的计算机可读媒体，其特征在于，使用至少某个带宽传送其它信息的步骤包括传送具有比接收所述信号之前传送的视频信息更高质量的视频信息。
29.根据权利要求28所述的计算机可读媒体，其特征在于，传送具有比接收所述信号之前传送的视频信息更高质量的视频信息的步骤包括以增加的频率向所述客户机传送视频帧。
30.根据权利要求28所述的计算机可读媒体，其特征在于，传送具有比接收所述信号之前传送的视频信息更高质量的视频信息的步骤包括传送具有比接收所述信号之前传送的视频信息增加了色度的信息。
31.根据权利要求28所述的计算机可读媒体，其特征在于，传送具有比接收所述信号之前传送的视频信息更高质量的视频信息的步骤包括传送具有比在接收所述信号之前传送的视频信息增加了像素密度的视频信息。
32.根据权利要求28所述的计算机可读媒体，其特征在于，传送具有比接收所述信号之前传送的视频信息更高质量的视频信息的步骤包括传送具有比在接收所述信号之前传送的视频信息改进了量化的视频信息。
33.根据权利要求27所述的计算机可读媒体，其特征在于，使用至少某个带宽传送其它信息的步骤包括向所述客户机传送闭路字幕信息。
34.根据权利要求27所述的计算机可读媒体，其特征在于，所述音频和视频信息以单一数字流的形式传送给所述客户机。
35.根据权利要求27所述的计算机可读媒体，其特征在于，所述音频和视频信息以不同数字流的形式传送给所述客户机。
36.一种载有用于将来自服务器的数字视频传送给客户机的一个或多个指令序列的计算机可读媒体，其中，一个或多个处理器对所述一个或多个指令序列的执行使得所述一个或多个处理器执行如下步骤：
将一个或多个数字流传送给所述客户机，所述一个或多个数字流包括多种信息类型，其中，在所述服务器和客户机之间传送所述一个或多个数字流消耗带宽；
接收一个信号，所述信号请求一个变化，该变化将减少所述多种信息类型的特定信息类型的带宽需要；
响应所述信号，对正在被传送给所述客户机的所述一个或多个数字流执行所述变化以减少所述特定信息类型的带宽需要，并且不同于过去那样使用带宽预先要求传送所述特定的信息类型到所述客户机，而是使用带宽传送其它信息到包括所述客户机的一组客户机中的一个或多个客户机。
37.根据权利要求36所述的计算机可读媒体，其特征在于，所述多种信息类型包括希望的信息类型，使用至少某个带宽传送其它信息的步骤包括以比在接收所述信号之前传送的希望的信息类型更高的质量传送所述所希望的信息类型。
38.根据权利要求36所述的计算机可读媒体，其特征在于，所述多种信息类型不包括希望的信息类型，使用至少某个带宽传送其它信息的步骤包括传送所述希望的信息类型。
39.根据权利要求37所述的计算机可读媒体，其特征在于，使用至少某个带宽传送其它信息的步骤包括传送具有比在接收所述信号之前传送的视频信号更高质量的视频信息。
40.根据权利要求39所述的计算机可读媒体，其特征在于，所述传送具有比在接收所述信号之前传送的视频信息更高质量的视频信息的步骤包括将增加频率的视频帧传送给所述客户机。
41.根据权利要求39所述的计算机可读媒体，其特征在于，所述传送具有比在接收所述信号之前传送的视频信息更高质量的视频信息的步骤包括传送具有比接收所述信号之前传送的视频信息增加了色度的视频信息。
42.根据权利要求39所述的计算机可读媒体，其特征在于，所述传送具有比在接收所述信号之前传送的视频信息更高质量的视频信息的步骤包括传送具有比在接收所述信号之前传送的视频信息增加了像素密度的视频信息。
43.根据权利要求39所述的计算机可读媒体，其特征在于，所述传送具有比在接收所述信号之前传送的视频信息更高质量的视频信息的步骤包括传送具有比在接收所述信号之前传送的视频信息改进量化的视频信息。
44.根据权利要求37所述的计算机可读媒体，其特征在于，所述传送具有比在接收所述信号之前传送的视频信息更高质量的视频信息的步骤包括传送增强的音频信息。
45.根据权利要求44所述的计算机可读媒体，其特征在于，所述传送增强音频信息的步骤是通过传送以较高采样频率记录的音频信息实现的。
46.根据权利要求38所述的计算机可读媒体，其特征在于，所述使用至少某个带宽传送其它信息的步骤包括传送闭路字幕信息给所述客户机。
47.根据权利要求36所述的计算机可读媒体，其特征在于，所述多种信息类型被以单一数字流的形式传送给所述客户机。
48.根据权利要求36所述的计算机可读媒体，其特征在于，所述多种信息类型被以不同数字流的形式传送给所述客户机。
49.根据权利要求36所述的计算机可读媒体，其特征在于，所述信号请求减少所述特定信息类型的质量。
50.根据权利要求36所述的计算机可读媒体，其特征在于，所述信号请求停止传送所述特定信息类型。
51.根据权利要求36所述的计算机可读媒体，其特征在于，所述其它信息只被传送给所述客户机。
52.根据权利要求36所述的计算机可读媒体，其特征在于，所述其它信息被传送给除了所述客户机以外的至少一个客户机。
CNA018150438A 2000-09-01 2001-08-30 以改变流式约束为基础的动态质量调节 Pending CN1682206A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/653,039 US7512698B1 (en) 1995-07-14 2000-09-01 Dynamic quality adjustment based on changing streaming constraints
US09/653,039 2000-09-01

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN200910208259A Division CN101873304A (zh) 2000-09-01 2001-08-30 一种流服务器及操作该流服务器的方法

Publications (1)

Publication Number Publication Date
CN1682206A true CN1682206A (zh) 2005-10-12

Family

ID=24619251

Family Applications (2)

Application Number Title Priority Date Filing Date
CN200910208259A Pending CN101873304A (zh) 2000-09-01 2001-08-30 一种流服务器及操作该流服务器的方法
CNA018150438A Pending CN1682206A (zh) 2000-09-01 2001-08-30 以改变流式约束为基础的动态质量调节

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN200910208259A Pending CN101873304A (zh) 2000-09-01 2001-08-30 一种流服务器及操作该流服务器的方法

Country Status (13)

Country Link
EP (1) EP1323055B1 (zh)
JP (2) JP2004507958A (zh)
KR (1) KR20030040424A (zh)
CN (2) CN101873304A (zh)
AU (2) AU2001288592B2 (zh)
BR (1) BR0113648A (zh)
CA (1) CA2419609C (zh)
IL (2) IL154410A0 (zh)
MX (1) MXPA03001820A (zh)
NZ (1) NZ524460A (zh)
RU (1) RU2003109436A (zh)
TW (1) TW541838B (zh)
WO (1) WO2002019130A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8813161B2 (en) 2008-11-25 2014-08-19 Zte Corporation Method for transmitting and receiving service data of handset TV

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100532278B1 (ko) * 2003-07-31 2005-11-29 삼성전자주식회사 Ｍｐｔｓ-ｓｐｔｓ 분리 장치
US8239521B2 (en) 2003-09-02 2012-08-07 Core Wireless Licensing S.A.R.L. Transmission of information relating to a quality of service
US7881335B2 (en) 2007-04-30 2011-02-01 Sharp Laboratories Of America, Inc. Client-side bandwidth allocation for continuous and discrete media
FR2948842B1 (fr) * 2009-07-28 2015-08-28 Samy Benhellal Procede de transmission en temps reel de flux audio et video
CN102761530A (zh) * 2011-04-29 2012-10-31 华为终端有限公司 媒体码流传输方法、装置及系统
WO2012172795A1 (ja) * 2011-06-16 2012-12-20 パナソニック株式会社 送信装置、送信方法、集積回路及びそのプログラム
JP2015507407A (ja) * 2011-12-28 2015-03-05 インテル コーポレイション ビデオエンコーディングシステムにおける集積メタデータ挿入システム及び方法
US9558787B2 (en) 2014-01-29 2017-01-31 Google Inc. Media application backgrounding
JP6520242B2 (ja) * 2015-03-12 2019-05-29 ソニー株式会社 情報処理装置、通信システム、情報処理方法およびプログラム
US11923981B2 (en) 2020-10-08 2024-03-05 Samsung Electronics Co., Ltd. Electronic device for transmitting packets via wireless communication connection and method of operating the same

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5579239A (en) * 1994-02-16 1996-11-26 Freeman; Mitchael C. Remote video transmission system
JPH08316953A (ja) * 1995-05-16 1996-11-29 Toshiba Corp 電子会議システム
JP3407838B2 (ja) * 1995-09-05 2003-05-19 ソニー株式会社 ビデオオンデマンドシステム
JP3918951B2 (ja) 1995-10-18 2007-05-23 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 種々の異なる資源レベルを持つハードウェアプラットフォーム上でマルチメディア・アプリケーションを実行可能とする方法、そのようなアプリケーションを含む物理的記録媒体、及びそのようなアプリケーションを実行するプラットフォームシステム
US6075768A (en) * 1995-11-09 2000-06-13 At&T Corporation Fair bandwidth sharing for video traffic sources using distributed feedback control
US5864557A (en) * 1996-09-25 1999-01-26 Thomson Multimedia S.A. Method and apparatus for opportunistically transferring data in a packet stream encoder
US5995490A (en) * 1996-12-13 1999-11-30 Siemens Information And Communication Networks, Inc. Method and system for integrating video and data transfers in a multimedia session
US5953506A (en) * 1996-12-17 1999-09-14 Adaptive Media Technologies Method and apparatus that provides a scalable media delivery system
US6172672B1 (en) * 1996-12-18 2001-01-09 Seeltfirst.Com Method and system for providing snapshots from a compressed digital video stream
US6038257A (en) * 1997-03-12 2000-03-14 Telefonaktiebolaget L M Ericsson Motion and still video picture transmission and display
JP2000092006A (ja) * 1998-09-14 2000-03-31 Toshiba Corp デジタル放送番組送出システムとデジタル放送番組受信装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8813161B2 (en) 2008-11-25 2014-08-19 Zte Corporation Method for transmitting and receiving service data of handset TV

Also Published As

Publication number Publication date
NZ524460A (en) 2004-11-26
IL154410A (en) 2008-11-03
MXPA03001820A (es) 2004-12-03
IL154410A0 (en) 2003-09-17
CA2419609A1 (en) 2002-03-07
KR20030040424A (ko) 2003-05-22
CN101873304A (zh) 2010-10-27
JP5175375B2 (ja) 2013-04-03
EP1323055B1 (en) 2014-04-30
AU8859201A (en) 2002-03-13
CA2419609C (en) 2011-11-29
JP2004507958A (ja) 2004-03-11
BR0113648A (pt) 2003-07-22
AU2001288592B2 (en) 2008-03-13
EP1323055A1 (en) 2003-07-02
JP2011250476A (ja) 2011-12-08
RU2003109436A (ru) 2004-09-20
EP1323055A4 (en) 2007-02-14
WO2002019130A1 (en) 2002-03-07
TW541838B (en) 2003-07-11

Similar Documents

Publication Publication Date Title
RU2652099C2 (ru) Устройство передачи, способ передачи, устройство приема и способ приема
CN1242625C (zh) 数字视频广播
US6463445B1 (en) Multimedia information retrieval system and method including format conversion system and method
CN1254952C (zh) 数字信息的高效传输和重放
US6580756B1 (en) Data transmission method, data transmission system, data receiving method, and data receiving apparatus
CN1802858A (zh) 基于运动图像专家组－4的立体视频因特网广播系统和方法
JP5175375B2 (ja) ストリーミング制約の変更に基づく動的品質調整
CN1171158C (zh) 视频点播系统中活动图象的流动方法
CN1764974A (zh) 存储多媒体数据的存储介质和再现多媒体数据的方法和设备
US20050193138A1 (en) Storage medium storing multimedia data, and method and apparatus for reproducing the multimedia data
CN105681912A (zh) 一种视频播放方法和装置
CN1490980A (zh) 用于流式传输多媒体数据的装置和方法
CN113330751B (zh) 用于媒体片段大小和优先级排名的存储和信令的方法和装置
CN103843301A (zh) 经译码多媒体数据的网络串流期间的表示之间的切换
CN1372666A (zh) 通用机顶盒结构和控制方法
US6292805B1 (en) System and method for processing object-based audiovisual information
US9832244B2 (en) Dynamic quality adjustment based on changing streaming constraints
CN111629283A (zh) 一种多流媒体网关服务系统及方法
AU2001288592A1 (en) Dynamic quality adjustment based on changing streaming constraints
CN1155199C (zh) 万维网浏览器中顺序链接的热对象及连续流视频浏览方法
CN101652931A (zh) 用于将覆盖内容插入到具有转换速率能力的视频信号中的方法、设备和系统
JP4600875B2 (ja) マルチメディア情報処理装置及び方法
CN117099375A (zh) 通过实时传输协议传输经heif格式化的图像
KR100776681B1 (ko) 정지영상 스케쥴 정보를 이용한 멀티미디어 콘텐츠스트리밍 장치 및 그 방법
CN1947423A (zh) 用于分层视频的盘分配/调度

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20051012