CN101512948A - 内容自适应多媒体编码及物理层调制 - Google Patents

内容自适应多媒体编码及物理层调制 Download PDF

Info

Publication number
CN101512948A
CN101512948A CNA2007800319053A CN200780031905A CN101512948A CN 101512948 A CN101512948 A CN 101512948A CN A2007800319053 A CNA2007800319053 A CN A2007800319053A CN 200780031905 A CN200780031905 A CN 200780031905A CN 101512948 A CN101512948 A CN 101512948A
Authority
CN
China
Prior art keywords
physical layer
modulation schemes
medium data
layer modulation
multimedia coding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007800319053A
Other languages
English (en)
Other versions
CN101512948B (zh
Inventor
戈登·肯特·沃克
凌福云
维贾雅拉克希米·R·拉温德朗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN101512948A publication Critical patent/CN101512948A/zh
Application granted granted Critical
Publication of CN101512948B publication Critical patent/CN101512948B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/86—Arrangements characterised by the broadcast information itself
    • H04H20/95—Arrangements characterised by the broadcast information itself characterised by a specific format, e.g. MP3 (MPEG-1 Audio Layer 3)
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/65—Arrangements characterised by transmission systems for broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot

Abstract

本发明描述内容自适应编码及调制技术。特定来说，本发明描述其中基于多媒体序列的内容自适应地选择多媒体编码模式及物理层调制方案两者的技术。当内容改变以便可改善所述编码或所述调制方案时，可改变所述编码及/或调制以更好地优化到所改变的内容。在一个方面中，本发明提供一种处理多媒体数据的方法，所述方法包括基于所述多媒体数据的内容为编码器选择多媒体编码模式以对所述多媒体数据进行编码且选择物理层调制方案以用于传输所述多媒体数据。

Description

内容自适应多媒体编码及物理层调制
相关申请案交叉参考
本申请案请求对2006年8月28日提出申请的第60/840,837号(代理档案号为061806P1)美国临时申请案的权益，其整体内容以引用方式并入本文中。
技术领域
本发明涉及用于对多媒体数据进行编码的多媒体编码及用于传输多媒体数据的物理层调制方案。
背景技术
多媒体能力可包含在各种各样的装置中，其中包含数字电视、数字直接广播系统、无线通信装置、个人数字助理(PDA)、膝上型计算机、桌上型计算机、数码相机、数字记录装置、蜂窝电话或卫星无线电电话等等。数字多媒体编码可在创建、修改、传输、存储、记录及播放全运动视频序列方面提供优于常规模拟系统的显著改善。例如，广播网络可使用多媒体编码来促进一个或一个以上信道的多媒体序列向无线订户装置的广播。此类广播网络中使用的广播技术包含称作唯正向链路(FLO)、数字多媒体广播(DMB)及手持式数字视频广播(DVB-H)的技术。
数字多媒体广播通常依赖于一种或一种以上数字多媒体编码标准。已建立若干不同多媒体编码标准以用于对数字多媒体序列进行编码。例如，运动图像专家组(MPEG)已研发出若干标准，其中包含MPEG-1、MPEG-2及MPEG-4。其它标准包含：国际电信联盟(ITU)H.263标准、由位于加利福尼亚州库珀蒂诺市(Cupertino，California)的苹果计算机公司(Apple Computer)开发的QuickTimeTM技术、由位于华盛顿州雷蒙德市(Redmond，Washington)的微软公司(Microsoft Corporation)开发的Video forWindowsTM、由英特尔公司(Intel Corporation)开发的IndeoTM、来自位于华盛顿州西雅图市(Seattle，Washington)的真实网络公司(RealNetworks Inc.)的RealVideoTM及由起超级麦克公司(SuperMac Inc.)开发的CinepakTM。此外，新标准继续涌现及演进，其中包含ITU H.264标准以及若干专属标准。所述ITU H.264标准还阐述于名称为“高级视频编码”的MPEG-4第10部分中。
已开发出各种其它编码技术。例如，已开发出内插技术(有时称为帧速率上变频(FRUC)技术)以在所传输的多媒体帧之间内插额外的帧，从而增大解码器侧的多媒体序列的有效帧速率。同样，已开发出其中多媒体帧作为基础层及一个或一个以上增强层而传输的可缩放编码方法。可使用可缩放编码来提供多媒体压缩应用中的信噪比(SNR)可缩放性、时间可缩放性及/或空间可缩放性。所述基础层载携多媒体解码所必要的最少量的数据并提供基础质量等级。所述增强层载携可增强所解码的多媒体序列的质量的额外数据，但可具有比基础层更高的包差错率且/或实现相同包差错率需要较高的信噪比(SNR)。可在顺应于或不顺应于上文所列的编码标准的情况下使用这些技术，其中包含内插技术及/或可缩放视频编码技术。
发明内容
本发明描述内容自适应编码及调制技术。特定来说，本发明描述其中基于多媒体序列的内容自适应地选择多媒体编码模式及物理层调制方案两者的技术。当内容改变以改善所述编码或所述调制方案时，可改变编码及/或调制以改善所改变的内容的编码及传输。当高速运动内容改变到低速运动时(例如，当在电视广播期间商业广告中断体育事件时)，所述编码及/或调制改变可是有用的。所描述的技术在无线装置的多播广播系统中尤为有用，尽管所述技术可应用于其中在两个或两个以上装置之间传输经编码的视频信息的其它多媒体编码上下文中。
在一个方面中，本发明提供一种处理多媒体数据的方法。所述方法包括：基于多媒体数据的内容从多个可能的多媒体编码模式中为编码器选择一多媒体编码模式以对所述多媒体数据进行编码；基于多媒体数据的内容从多个可能的物理层调制方案中选择一物理层调制方案以用于传输所述多媒体数据；根据选定的多媒体编码模式对多媒体数据进行编码；及根据选定的物理层调制方案传输经编码多媒体数据。
在另一方面中，本发明提供一种处理多媒体数据的方法，所述方法包括：接收与多媒体序列相关联的第一多媒体数据；接收第一信息，其识别由编码装置用于第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案；基于选定的物理层调制方案及选定的多媒体编码模式对第一多媒体数据进行解调及解码；接收与所述多媒体序列相关联的第二多媒体数据；接收第二信息，其识别由编码装置用于第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案；及基于所述第二选定的物理层调制方案及所述第二选定的多媒体编码模式对第二多媒体数据进行解调及解码。
在另一方面中，本发明提供一种处理多媒体数据的设备，所述设备包括：控制器，其基于多媒体数据的内容为多媒体数据从多个多媒体编码模式中选择一多媒体编码模式且从多个物理层调制方案中选择一物理层调制方案；编码器，其应用选定的多媒体编码模式以对多媒体数据进行编码；及传输模块，其应用选定的物理层调制方案以调制经编码的多媒体数据以用于通过无线信道传输。
在另一方面中，本发明提供一种处理多媒体数据的设备，所述设备包括：接收模块，其接收与多媒体序列相关联的第一多媒体数据且接收第一信息，所述第一信息识别由编码装置用于第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案；解调器，其基于选定的物理层调制方案解调第一多媒体数据；及解码器，其基于选定的多媒体编码模式对第一多媒体数据进行解码，其中所述接收模块接收与所述多媒体序列相关联的第二多媒体数据且接收第二信息，所述第二信息识别由编码装置用于第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案，所述解调器基于第二选定的物理层调制方案解调第二多媒体数据，且所述解码器基于第二选定的多媒体编码模式对第二多媒体数据进行解码。
在另一方面中，本发明提供一种处理多媒体数据的设备，所述设备包括：用于选择的装置，其基于多媒体数据的内容为多媒体数据从多个可能的多媒体编码模式中选择一多媒体编码模式且从多个可能的物理层调制方案中选择一物理层调制方案；用于编码的装置，其基于选定的多媒体编码模式对多媒体数据进行编码；及用于传输的装置，其根据选定的物理层调制方案传输经编码多媒体数据。
在另一方面中，本发明提供一种处理多媒体数据的设备，所述设备包括：用于接收的装置，其接收与多媒体序列相关联的第一多媒体数据；用于接收的装置，其接收第一信息，所述第一信息识别由编码装置用于第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案；用于解调的装置，其基于选定的物理层调制方案解调第一多媒体数据；用于解码的装置，其基于选定的多媒体编码模式对第一多媒体数据进行解码；用于接收的装置，其接收与所述多媒体序列相关联的第二多媒体数据；用于接收的装置，其接收第二信息，所述第二信息识别由编码装置用于第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案；用于解调的装置，其基于第二选定的物理层调制方案解调第二多媒体数据；及用于解码的装置，其基于第二选定的多媒体编码模式对第二多媒体数据进行解码。
在另一方面中，本发明提供一种处理多媒体数据的处理器，所述处理器经配置以：基于多媒体数据的内容从多个可能的多媒体编码模式中为编码器选择一多媒体编码模式以对多媒体数据进行编码；基于多媒体数据的内容从多个可能的物理层调制方案中选择一物理层调制方案以用于传输多媒体数据；根据选定的多媒体编码模式对多媒体数据进行编码；及将经编码的多媒体数据转发给传输模块以用于根据选定的物理层调制方案进行传输。
在另一方面中，本发明提供一种处理多媒体数据的处理器，所述处理器经配置以：接收与多媒体序列相关联的第一多媒体数据；接收第一信息，所述第一信息识别由编码装置用于第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案；基于选定的物理层调制方案及选定的多媒体编码模式对第一多媒体数据进行解调及解码；接收与所述多媒体序列相关联的第二多媒体数据；接收第二信息，所述第二信息识别由编码装置用于第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案；及基于第二选定的物理层调制方案及第二选定的多媒体编码模式对第二多媒体数据进行解调及解码。
本发明中所描述的技术可实施于硬件、软件、固件或其任一组合中。如果实施于软件中，则可在计算机中执行所述软件。所述软件可首先存储为指令、程序代码等等。因此，本发明还预期用于处理多媒体数据且包括计算机可读媒体的计算机程序产品，其中所述计算机可读媒体包括用于致使计算机执行根据本发明的技术及功能的指令。或者，如果实施于硬件中，则此类硬件实施方案可以是数字的、模拟的或此二者。本发明的各方面可实施于计算机可读媒体或包括计算机可读媒体的计算机程序产品中。所述计算机程序产品可包含封装材料。
因此，在另一方面中，本发明提供一种包括计算机可读媒体的计算机程序产品，所述计算机可读媒体包括在执行时致使计算机进行如下操作的指令：基于多媒体数据的内容从多个可能的多媒体编码模式中为编码器选择一多媒体编码模式以对多媒体数据进行编码；基于多媒体数据的内容从多个可能的物理层调制方案中选择一物理层调制方案以用于传输多媒体数据；根据选定的多媒体编码模式对多媒体数据进行编码；及根据选定的物理层调制方案传输经编码多媒体数据。
同样，在另一方面中，本发明提供一种包括计算机可读媒体的计算机程序产品，所述计算机可读媒体包括在执行时致使计算机进行如下操作的指令：接收与多媒体序列相关联的第一多媒体数据；接收第一信息，所述第一信息识别由编码装置用于第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案；基于选定的物理层调制方案及选定的多媒体编码模式对第一多媒体数据进行解调及解码；接收与所述多媒体序列相关联的第二多媒体数据；接收第二信息，所述第二信息识别由编码装置用于第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案；及基于第二选定的物理层调制方案及第二选定的多媒体编码模式对第二多媒体数据进行解调及解码。
在附图及下文说明中阐述各实例的额外细节。根据所述说明及图式且根据权利要求书，本发明的其它特征、目的、优点及实例将变得明显。
附图说明
图1是图解说明根据本发明的例示性多播广播系统的方块图。
图2及3是根据本发明的流程图。
图4是图解说明根据本发明的例示性系统的另一方块图。
图5是图解说明根据本发明处理传输侧的多媒体数据的例示性设备的方块图。
图6是图解说明根据本发明处理接收侧的多媒体数据的例示性设备的方块图。
具体实施方式
下文描述本发明的各种方面。显而易见，本文中的教示可实施为各种各样的形式，且本文中所揭示的任何特定结构及/或功能均仅为代表性。基于本文中的教示，所属技术领域的技术人员应了解，本文中所揭示的方面可独立于任何其它方面来实施且可以各种方式来组合这些方面中的两个或两个以上方面。例如，可使用本文所阐述方面中任何数目的方面来实施一种设备及/或实践一种方法。另外，还可使用除本文所阐述方面中的一者或一者以上之外或不同于本文所阐述方面中的一者或一者以上的其它结构及/或功能来实施一种设备及/或实践一种方法。作为一实例，针对传达多个信道的多媒体数据的广播系统来描述本文中所描述的众多方法、装置、系统及设备。所属技术领域的技术人员应了解，类似的技术可适于传输单个数据信道的系统或以非广播方式传输数据的系统。
本发明描述内容自适应多媒体编码及调制技术。特定来说，本发明描述其中基于正被编码的多媒体序列的内容自适应地选择一多媒体编码模式及一物理层调制方案两者的技术。在对所述内容进行编码时，编码装置不仅选择多媒体编码模式，而且选择数据的传输中所使用的调制方案。所述编码模式可选自多个可能的编码模式，且所述调制方案可选自多个可能的调制方案。最期望的多媒体编码模式及调制方案两者均可受正被编码的内容影响。
某些广播技术(例如称作唯正向链路(FLO)的广播技术)允许为每一多播信道选择一种调制方案。例如，所述FLO技术描述于唯正向链路(FLO)空中接口规范“用于陆地移动多媒体多播的唯正向链路空中接口规范(Forward Link Only AirInterface Specification for Terrestrial Mobile Multimedia Multicast)”中，其将被公布为技术标准TIA-1099(“FLO规范”)。本发明的技术可适用于此类FLO技术，或可能适用于其它技术，例如数字多媒体广播(DMB)及手持式数字视频广播(DVB-H)。
可在依赖于解码器处的帧内插(例如帧速率上变频)的第一多媒体编码模式与不依赖于帧内插的第二多媒体编码模式之间选择多媒体编码模式。作为另一实例，可在使用可缩放编码的第一多媒体编码模式与不使用可缩放编码的第二多媒体编码模式之间选择多媒体编码模式。在又一实例中，可选择多媒体编码模式以在两个或两个以上可能的帧速率中间界定帧速率。以此方式，使多媒体编码模式成为经选定以可能地改善多媒体序列的编码的变量。
作为一实例，为进行调制，第一物理层调制方案可使用正交相移键控(QPSK)且第二物理层调制方案可使用正交调幅(QAM)。根据本发明，还可使用众多其它类型的调制方案或多媒体编码模式，只要所述调制方案及所述多媒体编码模式两者均被允许基于内容而自适应地改变。调制方案的改变可改变格局、差错校正码或此二者。根据本发明，在任何情况下，至少两个变量(多媒体编码模式及物理层调制方案)均为内容自适应性以协助确保采用了一种有效的信息传送总体方法。
不同调制方案的一种特定情况可包括使用分层调制(其中两个层均使用QPSK映射)的第一方案，且第二方案为“16QAM”方案。通过合适地选择编码速率，在此情况下将所述QPSK映射方案的基础层的所需信噪比(SNR)匹配到所述QAM调制方案的基础层的信噪比是可能的。以这一方式，这两个方案的差错率可极为类似且同时提供不同频谱效率，这可是合乎需要的。
与多媒体序列相关联的多媒体内容可逐帧地改变，或甚至有可能逐片地改变，其中一个帧被分为若干片。此外，对于将信道的多播传输给订户装置的广播系统来说，不同的多播信道具有不同的内容。因此，在某些情况下，本发明预期可相对于多播的众多信道中的每一者逐帧地改变自适应多媒体编码模式及自适应调制方案。对于其它情况，例如对于使用不同帧速率的多媒体编码模式，多媒体编码模式可相对于以既定的帧速率编码的帧组而改变。在这些或其它情况下，不同多媒体编码模式及不同物理层调制方案的选择可周期性地发生，例如以周期性的时间间隔发生。
一个或一个以上接收装置接收多播且接收识别不同信道的多媒体编码模式及调制方案的信息。当接收装置调谐到特定信道时，其使用识别多媒体编码模式及调制方案的信息来选择检索经编码及经调制的多媒体序列所需要的适当解码及解调技术。
图1是图解说明根据本发明的例示性多播广播系统2的方块图。系统2仅为例示性，因为本发明的技术可实施于其中带宽有限或其中可需要全体地改善编码及调制的任何环境中。在系统2中，多媒体编码装置4将内容作为一系列信道转发到众多装置。然而，出于图解说明的目的，图1中图解说明单个多媒体解码装置6。在某些情况下，数个类似装置(如装置6)将从装置4接收相同广播，但可个别地调谐到不同信道。系统2允许以提供类似于常规电视的用户体验的方式向装置6递送多媒体内容。
多媒体编码装置4可形成用于向无线订户装置广播一个或一个以上信道的视频的广播网络组件的一部分。多播编码装置4是能够广播多播的多播装置的一个实例。然而，许多其它类型的编码装置也可从本发明的教示中获益。
以实例的方式，可将接收多播的多媒体解码装置6实施为数字电视、无线通信装置、便携式数字助理(PDA)、膝上型计算机或桌上型计算机、数字音乐及视频装置(例如以商标“iPod”销售的装置)或无线电电话(例如蜂窝式、卫星或基于陆地的无线电电话)的一部分。在以下大多数实例中，假定解码装置是无线无线电电话，但本发明不限于此方面。
可将多媒体编码装置4及多媒体解码装置6实施为一个或一个以上处理器、数字信号处理器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合。可将所图解说明的装置4及装置6的组件包含在一个或一个以上编码器或解码器中，可将两者中的任一者集成为编码器/解码器(CODEC)的一部分。还可包含其它组件(未图解说明)。在某些情况下，装置4的传输模块16可形成于不同于装置4的其它组件的组件或芯片上，且类似地，装置6的接收模块17及解调器单元18可形成于不同于装置6的其它组件的组件或芯片上。
如上所述，多媒体编码装置4可形成用于广播视频数据的一个或一个以上信道的广播网络组件的一部分。此类组件的实例包含用于广播经编码的多媒体数据的无线基站或任何基础设施节点。如图1中所示，多媒体编码装置4包含多个编码器单元12A-12N(统称为“编码器单元12”)。这些编码器单元12中的每一者可包括单独一组编码器或可由一个共用编码器调用的若干组编码过程。编码器单元12可遵从ITUH.264标准，但本发明不限于此方面。编码器单元12中的每一者对用于不同信道的多媒体内容进行编码。不同的信道可包括不同节目内容，例如新闻广播、体育事件、电视节目、电影等等。此外，不同信道可以不同画面呈现类似内容，例如来自不同摄影机角度的相同体育事件。如本文中所描述，编码器单元12中的每一者都是内容自适应的，这意味着多媒体内容的改变可改变编码器单元12中的不同单元所使用的相应编码过程。
装置6的控制器15可包括选择所使用的编码过程及调制方案的单元或过程。特定来说，对于每一信道，控制器可基于多媒体数据的内容为相应编码器单元选择多媒体编码模式以对多媒体数据进行编码，且还可选择物理层调制方案以用于传输多媒体数据。当内容针对信道而改变时，控制器15可响应于多媒体数据的此类内容改变来选择不同的多媒体编码模式及不同的物理层调制方案。以此方式，控制器15以可协助总体地改善既定内容的这些因素的方式为每一相应信道选择多媒体编码模式及物理层调制方案。
在某些情况下，多媒体编码模式选择(基于内容)本身也可影响调制方案选择(同样基于内容)。以此方式，且在某些情况下，可将多媒体编码模式选择及调制方案选择视为由控制器15做出的相互关连的决策。在某些情况下，控制器15选择既定内容的最佳多媒体编码模式，且接着选择所述选定的多媒体编码模式及所述既定内容的最佳调制方案。在某些情况下，控制器15大致同时地选择多媒体编码模式及调制方案。
调制方案的选择可基于装置4可支持的容量。在此情况下，容量是指与信号业务相关的物理层可用的RF能量的百分比。不同信道的调制方案的选择可允许装置4使可在目标质量等级下递送的服务(音频及视频)的数目最大化。为确保在一覆盖区中维持覆盖，可需要选择具有类似SNR要求且同时保持期望的差错率的不同模式。例如，在FLO中，分层调制模式7的基础层需要SNR类似于模式2(即称为“16QAM速率1/3”的模式)，以获得类似的包差错率。
一旦已对内容进行编码，多路复用单元14即将所述内容组合为多播。此多播通常包含多个数据信道。如果需要，则多路复用单元14可与编码器单元12通信以调整编码器单元12中的不同单元所应用的编码速率以(例如)满足通信信道19的带宽要求。此又可致使对多媒体编码模式或调制方案的另一调整。
一旦多路复用单元14将内容组合为多播，即可将数据转发给传输模块16。传输模块16接着基于不同信道的选定的调制方案调制并传输所述多播。特定来说，根据本发明，由不同的多播信道使用的物理层调制方案由此类信道的内容界定，如在编码过程期间所确定。控制器15将所述调制选择提供给不同信道的传输模块16。传输模块16接着根据不同信道中的每一者的物理层调制选择来调制所述信道，所述选择是基于相应信道的内容而做出的。在调制不同信道之后，传输模块16通过通信信道19传输所述多播。在一个实例中，单元12、14及15可实施为将多媒体序列的多播转发给用于传输的传输模块16的处理器。
所传输的多播包含众多不同信道的经编码的多媒体内容，所述通道各自由选定的多媒体编码模式及选定的调制方案界定。所述多播可被同时递送到众多解码装置，所述解码装置可调谐到特定信道。同样，出于图解说明的目的，图1显示单个多媒体解码装置6。然而，在实践中，众多类似的多媒体解码装置(如装置6)可从多媒体编码装置4接收相同的多播。
对于经编码的多媒体数据的每一信道，除经编码的多媒体数据之外，多媒体编码装置4还传输指示用于对相应多媒体数据进行编码及调制的多媒体编码模式及物理层调制方案的信息。此允许多媒体解码装置6合适地选择适当的多媒体解码模式及解调方案。由于多媒体编码模式及调制方案均为动态的，因此需要向装置6传达信息以识别多媒体编码模式或调制方案的任何改变何时发生。
同样，可为编码单元12中的每一者在依赖于解码器所做出的帧内插(例如帧速率上变频)的第一多媒体编码模式与不依赖于帧内插的第二多媒体编码模式之间选择用于每一信道的多媒体编码模式。作为另一实例，可为编码器单元12中的每一者在实施可缩放编码的第一多媒体编码模式与不实施可缩放编码的第二多媒体编码模式之间选择多媒体编码模式。在此情况下，所述可缩放编码可提供信噪比可缩放性、时间可缩放性、空间可缩放性或这些或其它类型的可缩放性的任何组合。
在又一实例中，可为编码单元12中的每一者选择多媒体编码模式以在两个或两个以上可能的帧速率中间界定帧速率。还可实施这些实例的各种组合。可区别多媒体编码模式的其它因素包含帧类型节拍或自适应结构的使用或不使用。基于小波的编码也是一个可能的选择，其可用于多媒体编码模式而不是基于时钟的编码。在任何情况下，可使多媒体编码模式成为可经选定以改善多媒体序列的编码的变量。控制器15作出这些多媒体编码模式选择以及基于内容的调制方案选择。
对于传输模块16为每一相应信道应用的调制，控制器15可在实施正交相移键控(QPSK)的第一物理层调制方案与实施正交调幅(QAM)的第二物理层调制方案之间进行选择。作为另一实例，所述物理层调制方案可以是第一物理层调制方案或第二物理层调制方案，其中所述第一物理层调制方案每秒钟比所述第二物理层调制方案编码更多的位。作为另一实例，所述物理层调制方案可包括实施码分多址(CDMA)的第一物理层调制方案或实施正交频分多路复用(OFDM)的第二物理层调制方案。还可界定这些或其它调制方案的各种组合。
此外，根据本发明，还可使用众多其它类型的调制方案或多媒体编码模式，只要所述调制方案及所述多媒体编码模式两者均被允许基于内容自适应地改变。因此，根据本发明，至少两个变量(多媒体编码模式及物理层调制方案)均为内容自适应性以协助确保采用了一种有效的信息传送总体方法。每一信道的识别所使用的多媒体编码模式及调制方案的信息均作为多播的一部分被传送到多媒体解码装置6。识别所使用的多媒体编码模式及调制方案的此信息可在每一相应信道中递送，例如作为多媒体帧的标头文件、开销信息服务(OIS)来递送，或可能地在经设计以传达此信息的专用媒体逻辑信道(MLC)中来递送。
当内容在任何既定的信道中改变时，所述信道的物理层调制方案及/或多媒体编码模式可同样地改变。当调制方案及/或多媒体编码模式发生改变时，可将此类改变的信息作为多播的一部分而传达。以此方式，总是将自适应多媒体编码模式及调制方案传达给解码装置，例如装置6。由于多媒体编码模式本身可影响采用哪一调制方案的决策，因此这些决策可相互关连。此外，可在类似的时间(例如大致同时地)做出所述选择，但所述技术不一定限定于此方面。
通信信道19通常为无线信道，但并不受任何特定无线通信技术限制。以实例的方式，可经由码分多址(CDMA)技术、频分多址(FDMA)技术、时分多址(TDMA)技术、正交频分多路复用(OFDM)、其它技术或此类技术的各种组合通过信道19来传送多播数据。对于多播，还可使用众多其它技术，例如调幅(AM)、调频(FM)、本文中所列举的技术的组合或其它类型的调制或编码。所述调制方案基于内容而选择，且可随所述内容的改变而改变。
多媒体解码装置6的接收模块17通过无线信道19接收多播。解调单元18可接着调谐到所关注的特定信道(例如，响应于用户选择)且可解调所述信道的内容。将用于解调所述信道的内容的解调方案可作为多播的一部分而传达，例如，作为所述相应信道中的数据或作为经设计以传达用于不同多播信道的调制方案及多媒体编码模式的专用MLC中的信息而传达。
多媒体解码装置6可需要在其可正确地解调数据信道之前接收编码速率及解调模式信息并将其解码。此外，可需要在发送数据信道之前发送此信息并将其解码。如果多媒体编码模式与调制方案信息是通过同一数据信道而发送，则每当使用新的多媒体编码模式及/或调制方案时，即可需要在先前的数据信道包中(例如在数据包之前)发送此信息。
解码器单元20可对由解调器单元18解调的信道的内容进行解码。将用于对所述信道的内容进行解码的多媒体解码模式(例如解调方案)可作为多播的一部分而传达，例如作为所述相应信道中的数据或作为专用MLC中的信息而传达。以此方式，在多播中传达编码器侧使用的选定的多媒体编码模式及调制方案以便可在解码器侧应用适当的解调方案及多媒体解码模式。
同样，某些广播技术(例如FLO)可允许为每一信道选择调制方案。另外，众多编码器允许使用不同的多媒体编码模式。本发明建议可基于正被编码的内容来选择这两个因素，从而提供优于常规系统的改善。同样，调制方案决策可受选择哪一多媒体编码模式影响。在任何情况下，可将识别每一信道的多媒体编码模式及物理层调制方案的信息作为多播的一部分而传输，以使得解码装置可选择及应用正确的解调方案及多媒体解码模式。
本发明的技术可允许编码器单元12控制物理层的传输模式以改善总体传输效率。在一个实施方案中，编码器单元12通过所有可能的可用编码技术依照特定度量(例如平均主观评估结果(MOS)或峰值信噪比(PSNR))对多媒体序列进行编码，且在考虑关于所述技术中的每一者的容量计算的所有元素之后，编码器单元12为每一既定的内容选择物理层模式与视频编码配置的最佳组合。因此，编码器单元12可各自包含多个编码器或还包含编码器的单个变量的多个配置。
编码器单元12可知晓对音频的影响，例如，如果在用于经缩放编码操作的单独MLC中操作音频，则在所述实施方案中可考虑与音频所需要的额外MLC相关的信道容量影响。为便于实施，如果认为跟踪动态地通过MLC的数据流对于编码器单元12来说太复杂，则所述计算可排除单独的音频MLC的任何影响。
可经由开销信息服务(OIS)通过物理层向多媒体解码装置6通知任何即将发生的多媒体编码模式调制方案改变。可使用这些或其它类型的标头或文件来传达调制方案及多媒体编码模式的改变，此视实施所述技术的系统而定。在某些情况下，可存在界定数个所允许的交替调制模式的规定，在这种情况下，多媒体解码装置6可尝试多次解码并丢弃无效的模式。
在一个实施方案中，多媒体编码模式及调制方案的调适时间为一秒，即所谓的“超帧”边界。换句话说，可周期性地(例如每一秒)做出多媒体编码模式及调制方案选择。然而，其它物理层可具有不同的物理层调制速率，且本发明的技术不限于任何特定的调适速率。
编码器单元12可具有映射到特定信道配置的一组有限的模式。因此，在解决方案、位速率范围及链路预算目标特定的情况下，编码器单元12可映射到满足所需参数的一组特定的调制模式。
图2及图3是根据本发明的流程图。图2显示可由例如图1的装置4的多媒体编码器装置应用的技术。如图2中所示，装置4的控制器15基于内容为编码器单元12A选择多媒体编码模式(21)。另外，控制器还基于与编码器单元12A相关联的信道的内容选择所述信道的物理层调制方案(22)。每一编码器单元12A接着对多媒体数据进行编码(23)。如果对多个信道进行编码，则多路复用单元14可将所述信道组合为多播。
传输模块16传输根据选定的多媒体编码模式(由控制器15提供)而编码的多媒体数据，并传输识别所述信道所使用的多媒体编码模式及物理层调制方案的信息(24)。一旦内容改变(分支“是”25)，即可选择不同的多媒体编码模式(21)且/或可选择不同的物理层调制方案(22)。图2的过程可针对每一多播信道而发生。此外，还可在其中对多媒体信息的单个信道进行编码并经由调制方案进行传输的情况中应用图2的技术。
图3显示可由多媒体解码器装置(例如图1的装置6)应用的技术。如图3中所示，装置6的接收模块17接收与多媒体序列相关联的第一经编码多媒体数据(31)。出于图3的目的，所述第一经编码多媒体数据可指与多播的一个信道相关联的经编码多媒体数据。除第一多媒体数据之外，装置6的接收模块17还接收识别用于第一经编码多媒体数据的经编码模式及物理层调制方案的第一信息(32)。例如，此第一信息可包含在相应的多播信道中，或可包含在别处，例如包含在经特别界定以传达每一信道的此信息的多播的专用MLC中。
解调单元18基于第一信息解调第一经编码多媒体数据，且解码器单元20基于第一信息对第一经编码多媒体数据进行解码(33)。以此方式，将第一信息作为多播的一部分而传达以允许解调单元18及解码器单元20应用与装置4应用于第一多媒体数据的编码及调制相当的适当解调及解码技术。
接下来，装置6的接收模块17接收与多媒体序列相关联的第二经编码多媒体数据(34)。所述第二经编码多媒体数据可以是与第一经编码多媒体数据在同一信道中的数据，但其内容可不同。作为一实例，第一经编码多媒体数据可包括实时体育事件的帧，且第二经编码多媒体数据可包括体育事件中的商业广告的帧。作为一实例，第一经编码多媒体数据可包括事件或节目的帧，且第二经编码多媒体数据可包括在场景变化之后同一事件或节目的随后帧。因此，本发明预期随着多媒体序列的内容改变多媒体序列过程中的自适应编码及调制。存在众多其它实例，且以上实例仅为例示性。在某些情况下，允许多媒体编码模式及物理层调制方案逐帧地改变。
除第二多媒体数据之外，装置6的接收模块17还接收识别用于第二经编码多媒体数据的经编码模式及物理层调制方案的第二信息(35)。与第一信息相似，此第二信息可包含在相应的多播信道中，或可包含在别处，例如包含在经特别界定以传达每一信道的此信息的多播的专用MLC中。识别经编码模式及物理层调制方案的信息可由控制器15形成并从传输模块16传输到接收模块17。
解调单元18基于第二信息解调第二经编码多媒体数据，且解码器单元20基于第二信息对第二经编码多媒体数据进行解码(33)。以此方式，将第二信息作为多播的一部分而传达以允许解调单元18及解码器单元20应用与装置4应用于第二多媒体数据的编码及调制相当的适当解调及解码技术。因此，在第一经编码多媒体序列改变到第二经编码多媒体序列时的场景改变之后，第一信息可改变到第二信息以识别用于多媒体数据的编码及调制中的多媒体编码模式及/或物理层调制方案的任何改变。
图4是图解说明可实施本文中描述的技术中的一者或一者以上的系统102的另一方块图。如图4中所示，用于多媒体编码的装置104包含用于对112A-112N进行编码的多个模块(统称为“模块12”)。这些用于编码的模块112中的每一者可包括单独的编码器或编码过程。模块112中的每一者对不同信道的多媒体内容进行编码。一旦经编码，来自用于编码的模块112的内容即被提供到用于多路复用的模块114，其将所述内容组合为多播。
用于调制及传输的模块116接着调制所述信道并通过通信信道119传输所述多播，所述通信信道通常是无线信道，但不受任何特定无线通信技术的限制。用于多媒体解码的若干装置可接收所述多播，但装置106是所图解说明的唯一接收装置。
根据本发明，用于控制的模块115选择用于每一相应信道的多媒体编码模式及物理层调制方案。特定来说，用于控制的模块115基于不同信道的内容选择多媒体编码模式及物理层调制方案。以此方式，使多媒体编码模式及物理层调制方案成为内容自适性。识别选定的多媒体编码模式及物理层调制方案的信息也以多播来传输以促进解调及解码。
用于接收的模块117通过无线信道19接收多播。用于解调的模块可接着调谐到所关注的特定信道(例如响应于用户选择)，且可解调所述信道的内容。用于解码的模块120接着对经解调信道的内容进行解码。用于解调的模块118及用于解码的模块120使用识别用于编码及调制的多媒体编码模式及物理调制方案的所传送信息以选择待应用的合适解调技术及解码技术。
根据本发明，用于编码的装置可包括编码器单元12(图1)或用于编码的模块112(图4)。用于多路复用的装置可包括多路复用器单元14(图1)或用于多路复用的模块114(图4)。用于调制及/或传输的装置可包括传输模块16(图1)或用于调制及传输的模块116(图4)。用于选择多媒体编码模式及物理层调制方案的装置可包括控制器15(图1)或用于控制器115的装置(图4)。调制器或传输器可以是单独的单元，或可如图1所图解说明集成为共用传输模块。
在接收侧上，用于接收的装置可包括接收模块17(图1)或用于接收的模块117(图4)。用于解调的装置可包括解调单元18(图1)或用于解调的模块118(图4)。用于解码的装置可包括解码单元20(图1)或用于解码的模块120(图4)。
图5是图解说明根据本发明处理传输侧上的多媒体数据的例示性设备504的方块图。设备504包含用于选择的模块515，所述模块可包括用于基于多媒体数据的内容为多媒体数据从多个可能的多媒体编码模式中选择一多媒体编码模式且从多个可能的物理层调制方案中选择一物理层调制方案的装置。设备504还包含用于编码的模块512，所述模块可包括用于基于选定的多媒体编码模式对多媒体数据进行编码的装置。设备504还包含用于传输的模块516，所述模块可包括用于根据选定的物理层调制方案传输经编码多媒体数据的装置。
图6是图解说明根据本发明处理接收侧上的多媒体数据的例示性设备606的方块图。设备606包含用于接收的模块617，所述模块可包括用于接收与多媒体序列相关联的第一多媒体数据的装置。用于接收的模块617还可包括用于接收识别由编码装置用于第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案的第一信息的装置。
设备606还包含用于解调的模块618，所述模块可包括用于基于选定的物理层解调方案解调第一多媒体数据的装置。设备606还包含用于解码的模块620，所述模块可包括用于基于选定的多媒体编码模式对第一多媒体数据进行解码的装置。
在图6中，用于接收的模块617还可包括用于接收与多媒体序列相关联的第二多媒体数据的装置及用于接收识别由编码装置用于第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案的第二信息的装置。用于解调的模块618还可包括用于基于第二选定的物理层调制方案解调第二多媒体数据的装置。用于解码的模块620还可包括用于基于第二选定的多媒体编码模式对第二多媒体数据进行解码的装置。
已描述若干实例。本发明的技术可改善多媒体信息的传送，尤其是在无线移动装置环境中。本文中所描述的技术可实施于硬件、软件、固件或其任何组合中。如果实施于软件中，则所述技术可至少部分地通过计算机程序产品的计算机可读媒体上的一个或一个以上所存储或所传输的指令或代码来实现。计算机可读媒体可包含计算机存储媒体、通信媒体或此两者，且可包含促进计算机程序从一个位置到另一位置的传送的任何媒体。存储媒体可以是可由计算机存取的任何可用媒体。计算机程序产品可包含封装材料。
例如而非限制，此计算机可读媒体可包括RAM(例如，同步动态随机存取存储器(SDRAM))、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、ROM、电可擦除可编程只读存储器(EEPROM)、EEPROM、快闪存储器、CD-ROM或其它光学磁盘存储装置、磁性磁盘存储装置或其它磁性存储装置，或可用于载携或存储呈指令或数据结构形式且可由计算机存取的期望的程序代码的任何其它媒体。
而且，任何连接均适当地称为计算机可读媒体。例如，如果使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)或例如红外线、无线电及微波等无线技术从网站、服务器或其它远程源传输软件，则同轴电缆、光纤电缆、双绞线、DSL或例如红外线、无线电及微波等无线技术均包含在媒体的定义内。本文中使用的磁盘及光盘包含：压缩光盘(CD)、激光盘、光学光盘、数字通用光盘(DVD)、软磁盘及蓝光光盘，其中磁盘通常以磁性方式来复制数据，而光盘以光学方式(例如，使用激光)来复制数据。上述物项的组合还应包含在计算机可读媒体的范围内。
与计算机程序产品的计算机可读媒体相关联的代码可由计算机来执行，例如由一个或一个以上处理器(例如一个或一个以上数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或其它等效集成或离散逻辑电路)来执行。在某些方面中，可在经配置以用于编码及解码的专用软件模块或硬件模块内提供本文中所描述的功能，或将本文中所描述的功能并入在组合式视频编码器-解码器(CODEC)中。
然而，可在不背离以上权利要求书的范围的情况下对所描述的技术做出各种修改。

Claims (52)

1、一种处理多媒体数据的方法，所述方法包括：
基于所述多媒体数据的内容从多个可能的多媒体编码模式中为编码器选择一多媒体编码模式以对所述多媒体数据进行编码；
基于所述多媒体数据的内容从多个可能的物理层调制方案中选择一物理层调制方案以用于传输所述多媒体数据；
根据所述选定的多媒体编码模式对所述多媒体数据进行编码；及
根据所述选定的物理层调制方案传输所述经编码的多媒体数据。
2、如权利要求1所述的方法，其进一步包括向解码装置传输信息，所述信息识别所述选定的多媒体编码模式及所述选定的物理层调制方案。
3、如权利要求1所述的方法，其进一步包括响应于所述多媒体数据的所述内容的改变选择不同的多媒体编码模式及不同的物理层调制方案。
4、如权利要求3所述的方法，其进一步包括：
根据所述不同的多媒体编码模式用所述内容的所述改变对所述多媒体数据进行编码；及
根据所述不同的物理层调制方案传输所述用所述内容的所述改变编码的多媒体数据。
5、如权利要求1所述的方法，其进一步包括以周期性的时间间隔选择不同的多媒体编码模式及不同的物理层调制方案。
6、如权利要求1所述的方法，其中大致同时地执行选择所述多媒体编码模式及选择所述物理层调制方案。
7、如权利要求1所述的方法，其中所述选定的多媒体编码模式是依赖于解码器处的帧内插的第一多媒体编码模式或不依赖于帧内插的第二多媒体编码模式。
8、如权利要求1所述的方法，其中所述选定的多媒体编码模式是实施可缩放编码的第一多媒体编码模式或不实施可缩放编码的第二多媒体编码模式。
9、如权利要求8所述的方法，其中所述可缩放编码提供信噪比可缩放性。
10、如权利要求8所述的方法，其中所述可缩放编码提供时间可缩放性。
11、如权利要求8所述的方法，其中所述可缩放编码提供空间可缩放性。
12、如权利要求1所述的方法，其中所述物理层调制方案是实施正交相移键控(QPSK)的第一物理层调制方案或实施正交调幅(QAM)的第二物理层调制方案。
13、如权利要求1所述的方法，物理层调制方案是第一物理层调制方案或第二物理层调制方案，其中所述第一物理层调制方案每秒钟比所述第二物理层调制方案编码更多的位。
14、如权利要求1所述的方法，其中所述物理层调制方案是实施码分多址(CDMA)的第一物理层调制方案或实施正交频分多路复用(OFDM)的第二物理层调制方案。
15、一种处理多媒体数据的方法，所述方法包括：
接收与多媒体序列相关联的第一多媒体数据；
接收识别由编码装置用于所述第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案的第一信息；
基于所述选定的物理层调制方案及所述选定的多媒体编码模式对所述第一多媒体数据进行解调及解码；
接收与所述多媒体序列相关联的第二多媒体数据；
接收识别由编码装置用于所述第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案的第二信息；及
基于所述第二选定的物理层调制方案及所述第二选定的多媒体编码模式对所述第二多媒体数据进行解调及解码。
16、如权利要求15所述的方法，其中：
所述第一与第二选定的多媒体编码模式彼此不相同且各自包括依赖于解码器处的帧内插的多媒体编码模式或不依赖于帧内插的多媒体编码模式；且
所述第一与第二物理层调制方案彼此不相同且各自包括实施正交相移键控(QPSK)的物理层调制方案或实施正交调幅(QAM)的物理层调制方案。
17、一种处理多媒体数据的设备，所述设备包括：
控制器，其基于所述多媒体数据的内容为所述多媒体数据从多个可能的多媒体编码模式中选择一多媒体编码模式且从多个可能的物理层调制方案中选择一物理层调制方案；
编码器，其应用所述选定的多媒体编码模式来对所述多媒体数据进行编码；及
传输模块，其应用所述选定的物理层调制方案来调制所述经编码的多媒体数据以供通过无线信道传输。
18、如权利要求17所述的设备，其中所述传输模块向解码装置传输信息，所述信息识别所述选定的多媒体编码模式及所述选定的物理层调制方案。
19、如权利要求17所述的设备，其中所述控制器响应于所述多媒体数据的所述内容的改变而选择不同的多媒体编码模式及不同的物理层调制方案。
20、如权利要求19所述的设备，其中：
所述编码器根据所述不同的多媒体编码模式用所述内容的所述改变编码所述多媒体数据；且
所述传输模块根据所述不同的物理层调制方案传输所述用所述内容的所述改变编码的多媒体数据。
21、如权利要求17所述的设备，其中所述控制器以周期性的时间间隔选择不同的多媒体编码模式及不同的物理层调制方案。
22、如权利要求17所述的设备，其中所述控制器大致同时地选择所述多媒体编码模式及所述物理层调制方案。
23、如权利要求17所述的设备，其中所述选定的多媒体编码模式是依赖于解码器处的帧内插的第一多媒体编码模式或不依赖于帧内插的第二多媒体编码模式。
24、如权利要求17所述的设备，其中所述选定的多媒体编码模式是实施可缩放编码的第一多媒体编码模式或不实施可缩放编码的第二多媒体编码模式。
25、如权利要求24所述的设备，其中所述可缩放编码提供信噪比可缩放性。
26、如权利要求24所述的设备，其中所述可缩放编码提供时间可缩放性。
27、如权利要求24所述的设备，其中所述可缩放性编码提供空间可缩放性。
28、如权利要求17所述的设备，其中所述物理层调制方案是实施正交相移键控(QPSK)的第一物理层调制方案或实施正交调幅(QAM)的第二物理层调制方案。
29、如权利要求17所述的设备，物理层调制方案是第一物理层调制方案或第二物理层调制方案，其中所述第一物理层调制方案每秒钟比所述第二物理层调制方案编码更多的位。
30、如权利要求17所述的设备，其中所述物理层调制方案是实施码分多址(CDMA)的第一物理层调制方案或实施正交频分多路复用(OFDM)的第二物理层调制方案。
31、一种处理多媒体数据的设备，所述设备包括：
接收模块，其接收与多媒体序列相关联的第一多媒体数据且接收识别由编码装置用于所述第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案的第一信息；
解调器，其基于所述选定的物理层调制方案解调所述第一多媒体数据；及
解码器，其基于所述选定的多媒体编码模式对所述第一多媒体数据进行解码，
其中所述接收模块接收与所述多媒体序列相关联的第二多媒体数据且接收识别由编码装置用于所述第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案的第二信息，
所述解调器基于所述第二选定的物理层调制方案解调所述第二多媒体数据；且
所述解码器基于所述第二选定的多媒体编码模式对所述第二多媒体数据进行解码。
32、如权利要求31所述的设备，其中：
所述第一与第二选定的多媒体编码模式彼此不相同且各自包括依赖于解码器处的帧内插的多媒体编码模式或不依赖于帧内插的多媒体编码模式；且
所述第一与第二物理层调制方案彼此不相同且各自包括实施正交相移键控(QPSK)的物理层调制方案或实施正交调幅(QAM)的物理层调制方案。
33、一种处理多媒体数据的设备，所述设备包括：
选择装置，其用于基于所述多媒体数据的内容为所述多媒体数据从多个可能的多媒体编码模式中选择一多媒体编码模式且从多个可能的物理层调制方案中选择一物理层调制方案；
编码装置，其用于基于所述选定的多媒体编码模式对所述多媒体数据进行编码；及
传输装置，其用于根据所述选定的物理层调制方案传输所述经编码的多媒体数据。
34、如权利要求33所述的设备，其中所述传输装置向解码装置传输信息，所述信息识别所述选定的多媒体编码模式及所述选定的物理层调制方案。
35、如权利要求33所述的设备，其中所述选择装置响应于所述多媒体数据的所述内容的改变选择不同的多媒体编码模式及不同的物理层调制方案。
36、如权利要求35所述的设备，其中：
所述编码装置根据所述不同的多媒体编码模式用所述内容的所述改变对所述多媒体数据进行编码；且
所述传输装置根据所述不同的物理层调制方案传输所述用所述内容的所述改变编码的多媒体数据。
37、如权利要求33所述的设备，其中所述选择装置以周期性的时间间隔选择不同的多媒体编码模式及不同的物理层调制方案。
38、如权利要求33所述的设备，其中所述选择装置大致同时地选择所述多媒体编码模式及所述物理层调制方案。
39、如权利要求33所述的设备，其中所述选定的多媒体编码模式是依赖于解码器处的帧内插的第一多媒体编码模式或不依赖于帧内插的第二多媒体编码模式。
40、如权利要求33所述的设备，其中所述选定的多媒体编码模式是实施可缩放编码的第一多媒体编码模式或不实施可缩放编码的第二多媒体编码模式。
41、如权利要求40所述的设备，其中所述可缩放编码提供信噪比可缩放性。
42、如权利要求40所述的设备，其中所述可缩放编码提供时间可缩放性。
43、如权利要求40所述的设备，其中所述可缩放编码提供空间可缩放性。
44、如权利要求33所述的设备，其中所述物理层调制方案是实施正交相移键控(QPSK)的第一物理层调制方案或实施正交调幅(QAM)的第二物理层调制方案。
45、如权利要求33所述的设备，物理层调制方案是第一物理层调制方案或第二物理层调制方案，其中所述第一物理层调制方案每秒钟比所述第二物理层调制方案编码更多的位。
46、如权利要求33所述的设备，其中所述物理层调制方案是实施码分多址(CDMA)的第一物理层调制方案或实施正交频分多路复用(OFDM)的第二物理层调制方案。
47、一种处理多媒体数据的设备，所述设备包括：
接收装置，其用于接收与多媒体序列相关联的第一多媒体数据；
接收装置，其用于接收识别由编码装置用于所述第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案的第一信息；
解调装置，其用于基于所述选定的物理层调制方案解调所述第一多媒体数据；
解码装置，其用于基于所述选定的多媒体编码模式对所述第一多媒体数据进行解码；
接收装置，其用于接收与所述多媒体序列相关联的第二多媒体数据；
接收装置，其用于接收识别由编码装置用于所述第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案的第二信息；
解调装置，其用于基于所述第二选定的物理层调制方案解调所述第二多媒体数据；及
解码装置，其用于基于所述第二选定的多媒体编码模式对所述第二多媒体数据进行解码。
48、如权利要求47所述的设备，其中：
所述第一与第二选定的多媒体编码模式彼此不同且各自包括依赖于解码器处的帧内插的多媒体编码模式或不依赖于帧内插的多媒体编码模式；且
所述第一与第二物理层调制方案彼此不同且各自包括实施正交相移键控(QPSK)的物理层调制方案或实施正交调幅(QAM)的物理层调制方案。
49、一种计算机程序产品，其包括：
计算机可读媒体，其包括在执行时致使计算机进行以下操作的指令：
基于所述多媒体数据的内容从多个可能的多媒体编码模式中为编码器选择一多媒体编码模式以对所述多媒体数据进行编码；
基于所述多媒体数据的内容从多个可能的物理层调制方案中选择一物理层调制方案以用于传输所述多媒体数据；
根据所述选定的多媒体编码模式对所述多媒体数据进行编码；及
根据所述选定的物理层调制方案传输所述经编码的多媒体数据。
50、一种计算机程序产品，其包括：
计算机可读媒体，其包括在执行时致使计算机进行以下操作的指令：
接收与多媒体序列相关联的第一多媒体数据；
接收识别由编码装置用于所述第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案的第一信息；
基于所述选定的物理层调制方案及所述选定的多媒体编码模式对所述第一多媒体数据进行解调及解码；
接收与所述多媒体序列相关联的第二多媒体数据；
接收识别由编码装置用于所述第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案的第二信息；及
基于所述第二选定的物理层调制方案及所述第二选定的多媒体编码模式对所述第二多媒体数据进行解调及解码。
51、一种处理多媒体数据的处理器，所述处理器经配置以：
基于所述多媒体数据的内容从多个可能的多媒体编码模式中为编码器选择一多媒体编码模式以对所述多媒体数据进行编码；
基于所述多媒体数据的内容从多个可能的物理层调制方案中选择一物理层调制方案以用于传输所述多媒体数据；
根据所述选定的多媒体编码模式对所述多媒体数据进行编码；及
根据所述选定的物理层调制方案将所述经编码的多媒体数据转发给传输模块以供传输。
52、一种处理多媒体数据的处理器，所述处理器经配置以：
接收与多媒体序列相关联的第一多媒体数据；
接收识别由编码装置用于所述第一多媒体数据的第一选定的多媒体编码模式及第一选定的物理层调制方案的第一信息；
基于所述选定的物理层调制方案及所述选定的多媒体编码模式对所述第一多媒体数据进行解调及解码；
接收与所述多媒体序列相关联的第二多媒体数据；
接收识别由编码装置用于所述第二多媒体数据的第二选定的多媒体编码模式及第二选定的物理层调制方案的第二信息；及
基于所述第二选定的物理层调制方案及所述第二选定的多媒体编码模式对所述第二多媒体数据进行解调及解码。
CN2007800319053A 2006-08-28 2007-08-27 内容自适应多媒体编码及物理层调制 Expired - Fee Related CN101512948B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US84083706P 2006-08-28 2006-08-28
US60/840,837 2006-08-28
US11/622,912 2007-01-12
US11/622,912 US8493834B2 (en) 2006-08-28 2007-01-12 Content-adaptive multimedia coding and physical layer modulation
PCT/US2007/076845 WO2008027815A2 (en) 2006-08-28 2007-08-27 Content-adaptive multimedia coding and physical layer modulation

Publications (2)

Publication Number Publication Date
CN101512948A true CN101512948A (zh) 2009-08-19
CN101512948B CN101512948B (zh) 2013-09-25

Family

ID=38996738

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800319053A Expired - Fee Related CN101512948B (zh) 2006-08-28 2007-08-27 内容自适应多媒体编码及物理层调制

Country Status (6)

Country Link
US (1) US8493834B2 (zh)
EP (1) EP2070235A2 (zh)
JP (1) JP2010503284A (zh)
KR (1) KR101033433B1 (zh)
CN (1) CN101512948B (zh)
WO (1) WO2008027815A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103957072A (zh) * 2012-09-13 2014-07-30 联发科技（新加坡）私人有限公司 毫米波网络的数据传输装置和方法

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4883091B2 (ja) * 2006-11-22 2012-02-22 富士通株式会社 Ｍｉｍｏ−ｏｆｄｍ通信システム及びｍｉｍｏ−ｏｆｄｍ通信方法
US8411572B2 (en) * 2006-12-13 2013-04-02 Viasat, Inc. ACM and fixed coding and modulation of hierarchical layers
US7944872B2 (en) * 2006-12-13 2011-05-17 Viasat, Inc. Adaptive coding and modulation aware network load balancing
US7961665B2 (en) 2006-12-13 2011-06-14 Viasat, Inc. Terminal aware multicasting
US8576858B2 (en) * 2006-12-13 2013-11-05 Viasat, Inc. Multiple transmission paths for hierarchical layers
US8411571B2 (en) 2006-12-13 2013-04-02 Viasat, Inc. Video and data network load balancing with video drop
US8358690B2 (en) * 2006-12-13 2013-01-22 Viasat, Inc. Predictive adaptive coding and modulation
EP2122882A2 (en) * 2006-12-13 2009-11-25 ViaSat, Inc. Acm aware encoding systems and methods
US20090041100A1 (en) 2006-12-13 2009-02-12 Viasat, Inc. Link aware mobile data network
US8456986B2 (en) * 2006-12-13 2013-06-04 Viasat, Inc. Video and data network load balancing
US8395993B2 (en) * 2006-12-13 2013-03-12 Viasat, Inc. Video and data network load balancing with video placeholder
AU2008205021B2 (en) 2007-01-04 2011-07-07 Qualcomm Incorporated Method and apparatus for distributed spectrum sensing for wireless communication
US20090128708A1 (en) * 2007-11-21 2009-05-21 At&T Knowledge Ventures, L.P. Monitoring unit for use in a system for multimedia content distribution
US8902995B2 (en) 2009-07-02 2014-12-02 Qualcomm Incorporated Transmitter quieting and reduced rate encoding
US9112618B2 (en) * 2009-07-02 2015-08-18 Qualcomm Incorporated Coding latency reductions during transmitter quieting
US8958475B2 (en) * 2009-07-02 2015-02-17 Qualcomm Incorporated Transmitter quieting and null data encoding
KR101308252B1 (ko) * 2009-12-16 2013-09-13 한국전자통신연구원 물리계층의 제어 신호를 이용한 다중 레인 제어 모듈장치 및 방법
US20110182257A1 (en) * 2010-01-26 2011-07-28 Qualcomm Incorporated White space spectrum commmunciation device with multiplexing capabilties
US9036567B2 (en) * 2010-02-03 2015-05-19 Qualcomm Incorporated Logical channel mapping for increased utilization of transmission resources
US8385666B2 (en) 2010-03-31 2013-02-26 Microsoft Corporation Classification and encoder selection based on content
JP2013526795A (ja) * 2010-05-10 2013-06-24 サムスン エレクトロニクス カンパニー リミテッド レイヤーコーディングビデオを送受信する方法及び装置
KR101978811B1 (ko) * 2012-01-02 2019-08-29 삼성전자주식회사 계층 변조 및 복조 장치 및 이의 방법
US10090962B2 (en) * 2013-10-01 2018-10-02 Zte Corporation In-band signaling for reconfiguring software defined optics
KR102208226B1 (ko) 2014-03-25 2021-01-27 한국전자통신연구원 송수신 방법 및 장치
CA2967236A1 (en) * 2014-11-21 2016-05-26 Sony Corporation Transmitting apparatus, transmitting method, receiving apparatus, and receiving method
US10693929B2 (en) * 2017-10-23 2020-06-23 Avid Technology, Inc. Modular video blade with separate physical layer module

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5671319A (en) * 1992-07-31 1997-09-23 Nec Corporation Compression of video and audio signals and expansion of a compressed signal in accordance with an image hf component compression factor
JP3253524B2 (ja) 1996-05-28 2002-02-04 日本放送協会 ディジタル伝送方法および送信、受信装置
GB2362531A (en) * 2000-05-15 2001-11-21 Nokia Mobile Phones Ltd Indicating the temporal order of reference frames in a video sequence
US6947490B1 (en) * 2000-06-22 2005-09-20 Nortel Networks Limited Cellular radio communications system
DE60215207T2 (de) 2001-09-26 2007-08-30 Koninklijke Philips Electronics N.V. Verfahren und vorrichtung für ein rekonfigurierbares multimedia-system
US6909753B2 (en) * 2001-12-05 2005-06-21 Koninklijke Philips Electronics, N.V. Combined MPEG-4 FGS and modulation algorithm for wireless video transmission
US6975650B2 (en) * 2002-02-13 2005-12-13 Interdigital Technology Corporation Transport block set segmentation
US20040081075A1 (en) * 2002-10-18 2004-04-29 Kazuaki Tsukakoshi Code modulation adaptive and variable multiplexing transmission method and code modulation adaptive and variable multiplexing transmission apparatus
US8107885B2 (en) * 2002-10-30 2012-01-31 Motorola Mobility, Inc. Method and apparatus for providing a distributed architecture digital wireless communication system
EP1634460B1 (en) * 2003-06-19 2014-08-06 Thomson Licensing Method and apparatus for low-complexity spatial scalable encoding
WO2005072337A2 (en) * 2004-01-23 2005-08-11 Sarnoff Corporation Method and apparatus for digital video reconstruction
US7525988B2 (en) * 2005-01-17 2009-04-28 Broadcom Corporation Method and system for rate selection algorithm to maximize throughput in closed loop multiple input multiple output (MIMO) wireless local area network (WLAN) system
US7539463B2 (en) * 2005-03-30 2009-05-26 Intel Corporation Techniques to enhance diversity for a wireless system
US7764743B2 (en) * 2005-08-05 2010-07-27 Alcatel-Lucent Usa Inc. Methods of channel coding for communication systems
US20070133449A1 (en) * 2005-12-12 2007-06-14 Mirko Schacht Method for associating multiple users with a shared downlink channel

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103957072A (zh) * 2012-09-13 2014-07-30 联发科技（新加坡）私人有限公司 毫米波网络的数据传输装置和方法
CN103957072B (zh) * 2012-09-13 2019-02-01 联发科技（新加坡）私人有限公司 毫米波网络的数据传输装置和方法

Also Published As

Publication number Publication date
US8493834B2 (en) 2013-07-23
EP2070235A2 (en) 2009-06-17
KR101033433B1 (ko) 2011-05-09
JP2010503284A (ja) 2010-01-28
US20080049597A1 (en) 2008-02-28
WO2008027815A2 (en) 2008-03-06
KR20090045952A (ko) 2009-05-08
CN101512948B (zh) 2013-09-25
WO2008027815A3 (en) 2008-05-08

Similar Documents

Publication Publication Date Title
CN101512948B (zh) 内容自适应多媒体编码及物理层调制
US8576858B2 (en) Multiple transmission paths for hierarchical layers
US7961665B2 (en) Terminal aware multicasting
US8411572B2 (en) ACM and fixed coding and modulation of hierarchical layers
US8456986B2 (en) Video and data network load balancing
US7944872B2 (en) Adaptive coding and modulation aware network load balancing
US20080144713A1 (en) Acm aware encoding systems and methods
US6798838B1 (en) System and method for improving video transmission over a wireless network
US8358690B2 (en) Predictive adaptive coding and modulation
US8411571B2 (en) Video and data network load balancing with video drop
US8395993B2 (en) Video and data network load balancing with video placeholder
US20120076204A1 (en) Method and apparatus for scalable multimedia broadcast using a multi-carrier communication system
US8934529B2 (en) Method and apparatus for providing robust reception in a wireless communications system
US8839310B2 (en) Method and apparatus for improving reception of wireless signals using spartial redundancy
Lee et al. IP-based cooperative services using ATSC 3.0 broadcast and broadband
US8861326B2 (en) Method and apparatus for transmitting/receiving audio/video contents in wireless access networks
WO2011130685A2 (en) Acm of hierarchical layers
US8302148B2 (en) Transmission of composite digital broadcast information
US7471640B2 (en) Scalable QAM system and method
Kou et al. Next generation broadcast wireless systems: Challenges and trends
Schafer Terrestrial transmission of DTVB signals-the European specification
Zare et al. A 2-level FEC mechanism joint with cross-layer superposition coded multicast for robust IPTV service over WiMAX

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130925

Termination date: 20210827

CF01 Termination of patent right due to non-payment of annual fee