CN102292958B - 用于多媒体内容移动的链路管理 - Google Patents

用于多媒体内容移动的链路管理 Download PDF

Info

Publication number
CN102292958B
CN102292958B CN201080005631.2A CN201080005631A CN102292958B CN 102292958 B CN102292958 B CN 102292958B CN 201080005631 A CN201080005631 A CN 201080005631A CN 102292958 B CN102292958 B CN 102292958B
Authority
CN
China
Prior art keywords
multimedia
content
channel data
determining
channel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201080005631.2A
Other languages
English (en)
Other versions
CN102292958A (zh
Inventor
维雅拉克什米·R·拉温德朗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN102292958A publication Critical patent/CN102292958A/zh
Application granted granted Critical
Publication of CN102292958B publication Critical patent/CN102292958B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/765Media network packet handling intermediate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/756Media network packet handling adapting media to device capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08Protocols for interworking; Protocol conversion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/565Conversion or adaptation of application format or content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/18Multiprotocol handlers, e.g. single devices capable of handling multiple protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/18Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Communication Control (AREA)
  • Telephone Function (AREA)

Abstract

一般来说,本发明描述用于链路管理以实现多媒体内容移动的技术。更具体地说,一种设备可实施这些技术。所述设备可包含一个或一个以上无线调制解调器及一控制单元。所述一个或一个以上无线调制解调器经由第一无线通信信道从第一应用程序接收多媒体内容,且建立第二无线通信信道以用于与第二应用程序通信。所述控制单元接着确定对应于与所述第二无线通信信道相关联的一个或一个以上特性的信道数据,且基于所述信道数据配置所述无线调制解调器中的至少一者。所述无线调制解调器中的所述经配置的至少一者将所述所接收的多媒体内容转发到所述第二应用程序以促进多媒体内容移动。

Description

用于多媒体内容移动的链路管理
本申请案主张2009年1月29日申请的第61/148,152号美国临时申请案的优先权,所述美国临时申请案的全部内容以引用的方式并入本文中。
本申请案与在同本申请案相同的日期申请的标题为“用于多媒体内容移动的多媒体管理系统(Multimedia Management System for Multimedia Content Mobility)”(暂时地以代理人案号081268U1进行参考)的美国专利申请案有关,所述美国专利申请案转让给本申请案的受让人且其全文以引用的方式并入本文中。
技术领域
本发明涉及多媒体内容,且更明确地说,涉及用于在装置之间传送多媒体内容的技术。
背景技术
多媒体生态系统可包含使用特定多媒体文件格式集合在彼此之间传送多媒体内容的众多多媒体装置。随着无线网络的新近增长,多媒体文件格式中的许多格式已发生演进以促进经由这些无线网络进行通信。各自实施相同多媒体文件格式集合以用于经由无线网络在彼此之间传送多媒体内容的多媒体装置可形成可被称作无线多媒体生态系统的物体。无线多媒体生态系统的这些多媒体装置可包括用以经由一个或一个以上无线网络通信的特定类型的无线调制解调器。
存在众多不同类型的调制解调器(通过其以无线方式传送多媒体内容)。实例无线调制解调器包括无线个人局域网络(WPAN)调制解调器(例如,BluetoothTM调制解调器)、蜂窝式调制解调器(例如,通用移动电信系统或UMTS调制解调器、全球移动通信系统或GSM调制解调器、高速下行链路包接入或HSDPA调制解调器及高速上行链路包接入或HSUPA调制解调器)、无线广域网络(WWAN)调制解调器(例如,微波接入全球互通或WiMax调制解调器)及无线局域网络(WLAN)调制解调器(例如,Wi-FiTM调制解调器或符合电气电子工程师学会或IEEE 802.11标准集合的其它调制解调器)。这些不同调制解调器中的每一者可实施不同形式及等级的前向错误校正(FEC),经由不同无线通信信道通信,且消耗不同功率电平。
另外,存在用于对多媒体内容进行分段和包封的众多不同多媒体文件格式。多媒体文件格式可包含用以对多媒体内容进行编码的特定输送及/或应用层协议或特定容器或包装器文件格式。常常,这些不同文件格式可特定针对于特定应用(例如,对多媒体内容进行串流)。举例来说,桌上型计算机可存储根据由运动图片专家组(MPEG)4第14部分针对这些串流应用所定义的容器格式(通常称作“MP4”)格式化的数字视频多媒体内容。用于经由公用网络(例如,因特网)对多媒体内容进行串流的其它文件格式包括被称作实时输送协议(RTP)的应用层协议。
假定存在多种多样的两种类型的无线调制解调器及文件格式,则多媒体生态系统常常针对非常特定的多媒体应用或(在一些例子中)相关多媒体应用的群组而形成。因此,一个多媒体生态系统的多媒体装置通常仅与位于同一多媒体生态系统中的多媒体装置通信。此外,虽然多媒体装置可属于一个或一个以上多媒体生态系统,但生态系统间通信通常受多媒体内容提供者限制或禁止以防止多媒体内容的免费的广泛数字传播。因此,多媒体内容可倾向于变得固定于特定多媒体生态系统内。
发明内容
本发明涉及用于实施提供无缝多媒体内容移动的实时多媒体管理系统(MMS)的技术。MMS提供促进多媒体内容在两个或两个以上多媒体装置之间的传送的多媒体路由器、网关或桥接器(而不管由这些装置实施的调制解调器及多媒体格式的基础类型),而非将多媒体内容移动限于仅支持一个或一个以上所支持的多媒体格式的选定多媒体生态系统。
MMS可通过配置在这些多媒体装置之间执行此调解所必需的硬件(例如,处理器及其它计算逻辑)且提供有效存储器结构以补充由这些各种装置支持的格式之间的转换来提供此实时传送。MMS可在装置之间提供此实时调解,同时需要MMS的用户的极少(如果存在的话)干预。在此意义上,MMS可实现多媒体内容从第一装置到第二装置的无缝实时传送,其中第一及第二装置可包括不同类型的无线调制解调器且实施不同文件格式。
在一个方面中,一种方法包含:经由针对第一应用程序使用一个或一个以上无线调制解调器所建立的第一无线通信信道接收多媒体内容;及借助所述一个或一个以上无线调制解调器建立第二无线通信信道以用于实现针对第二应用程序的通信。所述方法还包含:确定对应于与第二无线通信信道相关联的一个或一个以上特性的信道数据;基于所述信道数据配置无线调制解调器中的至少一者;及借助所述无线调制解调器中的所述经配置的一者将所接收的多媒体内容转发到第二应用程序。
在另一方面中,一种设备包含:一个或一个以上无线调制解调器,其经由第一无线通信信道从第一应用程序接收多媒体内容且建立第二无线通信信道以用于与第二应用程序通信;及控制单元,其确定对应于与第二无线通信信道相关联的一个或一个以上特性的信道数据且基于所述信道数据配置所述无线调制解调器中的至少一者。所述无线调制解调器中的所述经配置的至少一者将所接收的多媒体内容转发到第二应用程序。
在另一方面中,一种设备包含:用于经由第一无线通信信道从第一应用程序接收多媒体内容且建立第二无线通信信道以用于与第二应用程序通信的通信装置;用于确定对应于与第二无线通信信道相关联的一个或一个以上特性的信道数据的装置;及用于基于所述信道数据配置通信装置的装置。所述经配置的通信装置进一步包含用于将所接收的多媒体内容转发到第二应用程序的装置。
在另一方面中,一种计算机可读存储媒体,其包含致使处理器进行以下操作的指令:经由由一个或一个以上无线调制解调器建立的第一无线通信信道从第一应用程序接收多媒体内容;借助所述一个或一个以上无线调制解调器建立第二无线通信信道以用于与第二应用程序通信;确定对应于与第二无线通信信道相关联的一个或一个以上特性的信道数据;基于所述信道数据配置所述无线调制解调器中的至少一者;及借助所述无线调制解调器中的所述经配置的一者将所接收的多媒体内容转发到第二应用程序。
在另一方面中,一种方法包含:借助一个或一个以上无线调制解调器经由第一无线通信信道从第一应用程序接收呈第一格式的多媒体内容;及借助所述一个或一个以上无线调制解调器确定对应于与经建立以与第二应用程序通信的第二无线通信信道相关联的特性集合的信道数据。所述方法还包含:基于所述信道数据配置所述一个或一个以上无线调制解调器以提供多媒体桥接器的较低层级;及配置控制单元以提供多媒体桥接器的较高层以将多媒体内容从第一格式转换为由第二应用程序实施的第二格式。
在另一方面中,一种设备包含:一个或一个以上无线调制解调器,其经由第一无线通信信道从第一应用程序接收呈第一格式的多媒体内容;及包含多媒体管理系统(MMS)的控制单元,其中所述MMS包括链路管理协议(LMP)模块及多媒体交换协议(MEP)模块。LMP模块确定定义与经建立以与第二应用程序通信的第二无线通信信道相关联的特性集合的信道数据,且基于所述信道数据配置所述一个或一个以上无线调制解调器中的至少一者以提供多媒体桥接器的较低层级。MEP模块配置控制单元以提供多媒体桥接器的较高层,以将多媒体内容从第一格式转换为由第二应用程序实施的第二格式。
在另一方面中,一种设备包含:用于经由第一无线通信信道从第一应用程序接收呈第一格式的多媒体内容的通信装置;用于确定定义与经建立以与第二应用程序通信的第二无线通信信道相关联的特性集合的信道数据的装置;用于基于所述信道数据配置通信装置以提供多媒体桥接器的较低层级的装置;及用于配置多媒体桥接器的较高层以将多媒体内容从第一格式转换为由第二应用程序实施的第二格式的装置。
在另一方面中,一种计算机可读存储媒体,其包含用于致使处理器进行以下操作的指令:借助一个或一个以上无线调制解调器经由第一无线通信信道从第一应用程序接收呈第一格式的多媒体内容;借助所述一个或一个以上无线调制解调器确定定义与经建立以与第二应用程序通信的第二无线通信信道相关联的特性集合的信道数据;基于所述信道数据配置所述一个或一个以上无线调制解调器以提供多媒体桥接器的较低层级;及配置控制单元以提供多媒体桥接器的较高层以将多媒体内容从第一格式转换为由第二应用程序实施的第二格式。
在附图及以下描述中阐述本发明的一个或一个以上实例的细节。本发明的其它特征、目标及优点将从描述及图式中以及从权利要求书中显而易见。
附图说明
图1为说明其中移动装置实施本发明中所描述的技术的实例系统的框图。
图2A及图2B为更详细说明有利于实施本发明中所描述的技术的实例移动装置的框图。
图3为说明根据本发明中所描述的技术实施多媒体管理系统(MMS)以配置较低层桥接器的装置的实例操作的流程图。
图4为说明根据本发明中所描述的技术实施多媒体管理系统(MMS)以配置较高层桥接器的装置的实例操作的流程图。
图5为说明实施本发明中所描述的技术的移动装置的示范性实施方案的框图。
图6为说明其中MMS实施本发明中所描述的技术以将呈第一示范性格式的媒体转换为第二示范性格式的系统的概念图的框图。
图7为说明根据OSI模型的协议层布置的实例MMS的功能的框图。
图8为说明其中移动装置根据本发明中所描述的技术来实施MMS的实例系统的框图。
图9为说明其中移动装置根据本发明中所描述的技术来实施MMS的另一实例系统的框图。
具体实施方式
本发明针对于用于实施提供无缝多媒体内容移动的实时多媒体管理系统(MMS)的技术。MMS可提供促进多媒体内容在两个或两个以上多媒体装置之间的传送的多媒体路由器、网关或桥接器(而不管由这些装置实施的无线调制解调器及多媒体文件格式的基础类型),而非将多媒体内容移动限于仅支持一个或一个以上所支持的多媒体内容文件格式的多媒体生态系统。MMS可通过配置在这些多媒体装置之间执行此调解所必需的硬件(例如,处理器)且提供有效存储器结构以补充在由这些各种装置支持的文件格式之间的转换或格式转换来提供此实时传送。MMS可在装置之间提供此实时调解,同时需要MMS的用户的极少(如果存在的话)干预。在此意义上,MMS可实现多媒体内容从第一装置到第二装置的无缝实时传送,其中第一及第二装置可经由不同类型的无线调制解调器传送多媒体内容且实施不同文件格式(通过其对多媒体内容进行编码及解码)。
在一个方面中,所述技术针对于MMS内的控制多媒体内容经由无线调制解调器的递送的链路管理协议(LMP)的实施。在另一方面中,所述技术针对于MMS内的控制多媒体内容在文件格式之间的转换的多媒体交换协议(MEP)的实施。虽然所述技术的以上方面中的每一者大体上在本发明中相对于彼此进行描述,但这些方面中的每一者可经单独实施或独立于彼此或在单独及相异的上下文中以另外方式执行。
针对于LMP的实施的技术可涉及监视定义与在MMS与另一装置之间所建立的无线通信信道相关联的特性集合的信道数据。举例来说,MMS可经由第一无线通信信道从第一装置接收多媒体内容。此第一装置可被称作“源”装置,因为所述第一装置为多媒体内容的来源。MMS可接着与第二装置建立第二无线通信信道。此第二装置可被称作“目的地”装置,因为所述第二装置为多媒体内容的既定目的地。MMS可实施LMP以确定定义与在MMS与目的地装置之间所建立的无线通信信道相关联的特性集合的目的地信道数据。
基于经确定的目的地信道数据,LMP模块可接着用以配置用以建立第二无线通信信道的无线调制解调器,以促进所接收的多媒体内容传送到目的地装置。更明确地说,LMP单元可基于经确定的目的地信道数据选择用于配置逻辑信道、物理层信道、带宽分配及服务质量(QoS)的适当参数组合。举例来说,MMS可向LMP模块通知目的地多媒体应用(例如,对多媒体内容进行串流),所述LMP单元可使用其来在给定经确定的目的地信道数据的情况下确定任选的参数值。LMP单元可接着将此参数配置或组合提供到无线调制解调器(例如,无线调制解调器的基带处理器),且进而最佳地配置无线调制解调器以适于特定多媒体应用。此配置可涉及相对于给定多媒体应用及信道特性选择适当参数,以最大化消费多媒体内容的消费者的所谓的体验质量(QoE)。
所述技术的此LMP方面可通过促进针对给定多媒体应用经由无线信道传送多媒体内容来推动内容移动。所述技术的此方面可实际上使装置能够充当驻留于单独多媒体生态系统中且包括不同类型的无线调制解调器的两个多媒体装置之间的物理/数据链路层桥接器。在此意义上,根据本发明实施LMP的装置可动态地调适不同类型的无线调制解调器以创建不同多媒体生态系统的多媒体装置之间的桥接器。此外,由于可在极少(如果存在的话)需要用户输入的情况下发生动态调适,所以从装置的用户的角度看可无缝地发生所述技术的此LMP方面。因此,LMP在根据本发明的技术来实施时可促进多媒体内容的无缝移动。
所述技术的针对于MEP的MMS实施的方面也可促进多媒体内容的无缝移动。此方面涉及配置控制单元以提供多媒体桥接器,通过所述多媒体桥接器将内容从第一格式转换为第二格式。举例来说,MMS可经由多个无线调制解调器中的一者在第一无线通信信道上接收来自源装置的呈第一格式的多媒体内容。响应于接收到多媒体内容,MEP可配置控制单元以提供第一文件格式与第二文件格式之间的多媒体桥接器。
在一些例子中,MMS可经由无线协议的发现协议或发现方面自动识别所接收多媒体内容的目的地装置。在其它例子中,MMS可经由发现协议定位或以其它方式识别可能目的地装置集合,且经由用户接口呈现此装置集合。用户可与用户接口交互以从列表中选择或识别目的地装置。无论如何,MEP单元可存储针对每一类型的多媒体装置定义多个多媒体装置简档的数据。所述简档可定义用于在控制单元内配置多媒体桥接器的参数。MEP可确定与源装置相关联的简档(其可被称作源简档)及与目的地装置相关联的简档(其可被称作目的地简档)。
在一些例子中,MEP单元可分析经存储于多媒体内容被包装到的第一文件格式内的标头信息以提取标头参数。MEP单元可(例如)分析包装多媒体内容的文件格式的输送及/或应用层标头以提取这些标头参数,例如多媒体内容经编码到的编解码器、多媒体内容的分辨率、多媒体内容的每秒帧数(fps)及其类似者。基于目的地简档及经提取的参数,MEP可接着确定(作为一组实例)是否重新包封多媒体内容、对多媒体内容进行速率转换或对多媒体内容进行代码转换,其每一者涉及多媒体内容在各种程度上的从第一文件格式到第二文件格式的转换或重新格式化。
另外,在一些例子中,MEP单元还可在MMS根据本发明中所描述的技术来实施LMP及MEP两者的情况下将此确定基于由LMP模块确定的配置参数。在其它例子中,MEP单元可与资源管理器通信以确定资源参数。MEP单元还可进一步将转换的确定基于这些资源参数。在每一例子中,MEP单元可确定桥接器配置参数以影响经确定的转换。MEP单元可确定这些桥接器配置参数以便最小化功率消耗或至少减少功率消耗。这可在移动装置或其它功率受限装置实施在本发明中所描述的技术时尤其有益。MEP单元还可确定这些桥接器参数以促进多媒体内容从源装置到目的地装置的实时传送。
MEP单元可接着根据桥接器配置参数在控制单元内配置多媒体桥接器。在配置多媒体桥接器之后,可能地在接收多媒体内容的同时,控制单元借助所述经配置的多媒体桥接器将多媒体内容从第一格式转换为第二格式。在此意义上,所述技术的MEP方面可使装置能够动态地调适控制单元以在来自两个不同多媒体生态系统的两个不同多媒体装置之间提供多媒体桥接器。此多媒体桥接器可包含在存在极少(如果存在的话)用户输入的情况下将多媒体内容从一个文件格式动态地转换为另一文件格式的输送/应用层桥接器。因此,所述技术的针对于MEP的MMS实施的方面可(与所述技术的LMP方面很相似)促进多媒体内容的无缝移动。
值得注意的是,下文相对于包括具有LMP及MEP两者的实施的MMS的单一移动装置来描述所述技术的LMP及MEP方面。此MMS可因此形成横跨移动装置的物理及数据链路层中的一者或一者以上以及输送及应用层中的一者或一者以上的多媒体桥接器。如本发明中所使用,层指代开放系统互连(OSI)模型的层。物理、数据链路、输送及应用层还可分别被称作层一、层二、层四及层七(或L1、L2、L4及L7),其中数字表示所述层在OSI模型的七个层内的次序。通过组合所述技术的LMP方面及MEP方面两者,MMS可提供横跨多个层的桥接器,且其工作以通过将特性或参数从LMP传递到MEP而建置从下层(例如,L1及L2)到上层(例如,L4及L7)的桥接器,使得MEP可进一步优化用于配置多媒体桥接器的上层的桥接器配置参数。但,如上文所说明,这些方面中的每一者可彼此单独地实施以形成仅横跨(例如)OSI模型的下层或上层的多媒体桥接器。所述技术因此不应被视为限于本发明中所描述的特定示范性实施方案。
图1为说明其中移动装置12实施本发明中所描述的技术的实例系统10的框图。虽然相对于特定类型的装置(例如,移动装置12)来描述,但能够使用至少一个类型的无线调制解调器而在两个或两个以上装置之间传送多媒体内容及/或将多媒体内容从一个文件格式转换为另一文件格式的任何类型的装置可实施本发明中所描述的技术。在此方面,移动装置12大体上表示能够执行无线通信及以上转换两者的此类装置的一个实例。
如图1的实例中所示,系统10包括源装置14及目的地应用程序16,其两者分别经由无线通信信道13及15而与移动装置12通信。装置14、16中的每一者可包括通用多媒体装置,例如个人计算机、工作站、个人数字助理(PDA)、移动电话(包括所谓的“智能电话”)或包含能够执行软件且特定来说多媒体软件的通用处理器的任何其它类型的装置。装置14、16中的每一者可替代地包含专用多媒体装置,例如视频摄录像机、数字视频光盘(DVD)播放器、电视、机顶盒(STB)、压缩光盘(CD)播放器、数字媒体播放器(例如,所谓的“MP3”播放器或组合MP3/MP4播放器)、数字视频记录器(DVR)、全球定位系统(GPS)装置或专用于一个或一个以上多媒体应用的集合且通常并不实现对多媒体软件加载及执行的用户控制的任何其它装置。
不管是代表通用装置还是专用多媒体装置,源装置14产生用于发射到目的地装置16的呈第一格式的视频数据。源装置14包括源应用程序18及调制解调器22。源装置14的源应用程序18可(作为一个实例)包括视频捕获装置,例如摄影机、含有先前捕获的视频的视频档案库(archive)或来自视频内容提供者的视频馈送。作为另一替代方案,源应用程序18可(作为另一实例)产生基于计算机图形的数据作为视频,或产生实况播送或经存档的视频及计算机所产生的视频的组合。在一些情况下,如果源应用程序18为摄影机,则源装置14可形成所谓的相机电话或视频电话,或任何其它类型的装备有相机的计算或通信装置(包括移动电话或其它装置)。在其它方面中,源应用程序18可耦合到源装置14或与源装置14集成。在一些例子中,经捕获、经预捕获及/或计算机所产生的视频可由视频编码器(未在图1中展示)编码,以用于在无线通信信道13上经由调制解调器22从源装置14发射到移动装置12。
此视频编码器可从源应用程序18接收视频数据。可在包含一系列视频数据单元(例如,视频帧)的视频序列中布置从源应用程序18接收的视频数据。可将帧中的一些或全部划分成例如视频切片等较小视频数据单元。视频编码器可对个别视频帧或切片内的像素块(本文中称作视频块)进行操作以便对视频数据进行编码。帧或切片可含有多个视频块。视频块可具有固定或变化的大小,且可根据指定的译码标准而在大小上不同。通常被称作宏块(MB)的16×16像素视频块可经布置成子块。
作为实例,国际电信联盟标准化部门(ITU-T)H.264/MPEG-4第10部分、高级视频译码(AVC)(在下文中,“H.264/MPEG-4 AVC”标准)支持呈各种块大小的帧内预测(例如,针对亮度分量的16×16、8×8或4×4及针对色度分量的8×8)以及呈各种块大小的帧间预测(例如,针对亮度分量的16×16、16×8、8×16、8×8、8×4、4×8及4×4及针对色度分量的对应按比例缩放的大小)。一般来说,MB及各种子块可被视为视频块。因此,MB可被视为视频块,且如果经分割或子分割,则MB可自身被视为定义视频块集合。在一些方面中,邻近可用性检查技术可基于视频块(例如,MB或子块)的宽度指导可用性确定。
虽然在本发明中相对于多种视频数据单元(例如,视频帧或视频切片)来描述所述技术,但所述技术可大体上适用于视频及/或音频数据的任何编码及解码。此外,在本发明中相对于根据H.264/MPEG-4 AVC标准编码及解码的视频数据来描述所述技术。然而,出于说明的目的,参考此标准来描述所述技术。在各种方面中,然而,所述技术可容易地应用于多种其它视频译码标准中的任一者,例如由呈MPEG-1、MPEG-2及MPEG-4的形式的运动图片专家组(MPEG)定义的标准、ITU-T H.263标准、电影及电视工程师协会(SMPTE)421M视频编解码器标准(通常被称作“VC-1”)、由中国音频视频译码标准工作组(通常被称作“AVS”)定义的标准,以及由标准团体定义或由组织发展为专有标准的任何其它视频及/或音频译码标准。
出于说明而非限制的目的,将参考H.264/MPEG-4 AVC译码来描述各种译码技术的应用。视频编码器可根据(例如)如在H.264/MPEG-4 AVC标准中所阐述的帧内译码及帧间译码预测方案而对每一块(例如,宏块(MB))进行编码。在视频块的基于帧内或帧间的预测之后,视频编码器可对视频块执行众多其它操作。这些额外操作可包括转换操作(例如,用于H.264/MPEG-4第10部分AVC或离散余弦转换DCT中的4×4或8×8整数变换)、量化操作、熵译码操作及滤波操作。视频编码器可接着对视频帧序列的块中的每一者进行编码且输出经编码的视频数据,其可被称作“经编码的位流”。
源装置14的调制解调器22可管理多媒体内容的下层发射(例如,在物理及数据链路层上的发射)。如上文所描述,层可指代开放系统互连(OSI)模型的各种层。调制解调器22可(例如)配置并建立与移动装置12的通信信道13以用于经编码视频数据的通信。调制解调器22可接着在信道13上将经编码的视频数据发射到移动装置12。
同样地,不管是代表通用装置还是专用多媒体装置,目的地装置16经由无线通信信道15从移动装置12接收经编码的视频数据。目的地装置14可包括无线调制解调器28及目的地应用程序32。在一些例子中,目的地装置14可包括视频解码器,所述视频解码器可对经编码的视频数据进行解码以获得原始视频数据以用于在显示装置上重放。目的地应用程序32可包含利用视频数据(而不管视频数据是否经解码)的任何应用程序。
调制解调器28可(与源装置14的调制解调器22相似)管理多媒体内容的下层发射(例如,在物理及数据链路层上的发射)。调制解调器28可(例如)配置并建立与移动装置12的通信信道15以用于经格式化的视频数据的通信。调制解调器28可接着经由无线通信信道15接收经格式化的视频数据。调制解调器22及28可各自包含一个或一个以上类型的无线调制解调器,包括无线个人局域网络(WPAN)调制解调器(例如,BluetoothTM调制解调器)、蜂窝式调制解调器(例如,通用移动电信系统或UMTS调制解调器、全球移动通信系统或GSM调制解调器、高速下行链路包接入或HSDPA调制解调器及高速上行链路包接入或HSUPA调制解调器)、无线广域网络(WWAN)调制解调器(例如,微波接入全球互通或WiMax调制解调器)及无线局域网络(WLAN)调制解调器(例如,Wi-FiTM调制解调器或符合电气电子工程师学会或IEEE 802.11标准集合的其它调制解调器)。这些不同调制解调器中的每一者可实施不同形式及等级的前向错误校正(FEC),经由不同无线通信信道进行通信,且消耗不同功率电平。
出于说明的目的,假定源装置14及目的地装置16驻留于单独多媒体生态系统内。换句话说,假定源装置14包括与目的地装置16的调制解调器28不同的调制解调器22,且因此,源装置14可不直接与目的地装置16通信。另外,假定源装置14实施与由目的地装置16实施的文件格式不同的文件格式。即,源应用程序18可产生呈目的地应用程序32并不支持的格式的视频数据,因为目的地应用程序32仅可支持不同格式的视频数据(例如,具有解码或解译不同格式的视频数据的能力)。
如在本发明中所使用,在一个方面中,格式可指代多媒体内容的促进所述多媒体内容从源装置发射到目的地装置的编码。实例格式可包括由运动图片专家组(MPEG)4第14部分定义的MP4文件格式。MP4文件格式为通常用以存储数字音频及数字视频流的容器文件格式。其它容器文件格式包含MP4文件格式的称作3GP的简化版本、高级系统格式(ASF)、高级视频交错(AVI)文件格式、DivX媒体格式(DMF)、增强型视频对象(EVO)文件格式及快闪(Flash)视频文件格式。在此方面或其它方面中,格式还可指代相对于特定输送及/或应用层协议所使用的格式,例如实时输送协议(RTP)及流控制传输协议(SCTP)。大体上,格式指代多媒体内容或数据的任何描述或特性,例如视频例子中的分辨率、用以对多媒体数据进行编码的编解码器及其类似者。
源应用程序18可大体上指代提供多媒体内容的硬件或硬件与软件两者。在一些例子中,源应用程序18可在源装置14内操作,而在其它例子中,源应用程序18及源装置14可包含相同装置。在图1的实例中将源应用程序18展示成与源装置14分离,以指示源应用程序18在源装置14内执行(例如,作为在处理器上执行的软件过程)的那些例子。本发明中所描述的技术不应限于图1的实例。
同样地,目的地应用程序32可大体上指代作为多媒体内容的目标或消费者的硬件或硬件与软件两者。在一些例子中,目的地应用程序32可在目的地装置16内操作,而在其它例子中,目的地应用程序32及目的地装置16可包含相同装置。在图1的实例中将目的地应用程序32展示成与目的地装置16分离以指示目的地应用程序32在目的地装置16内执行(例如,作为在处理器上执行的软件过程)的那些例子。本发明中所描述的技术不应限于图1的实例。
此外,如本文中所使用的应用程序不应限于上文所描述的任一例子,而是可包括专用装置(例如,显示装置)及/或在处理器上执行的软件过程。
根据本发明中所描述的技术,移动装置12包括多媒体管理系统34(“MMS 34”),其动态地配置多媒体桥接器36以将视频数据从源应用程序18所实施的第一格式转换为目的地应用程序32所实施的第二文件格式。在图1中将多媒体桥接器36展示为虚线框以反映多媒体桥接器36为逻辑桥接器且未在永久性基础上经静态地硬译码或以其它方式配置。此外,在图1中将多媒体桥接器36展示成横跨视频编码器/解码器38(“视频编解码器38”)及调制解调器40两者以反映多媒体桥接器36跨越移动装置12的视频编解码器38及调制解调器40两者而经动态地配置。在此方面,多媒体桥接器36可提供不同文件格式和不同类型的无线调制解调器之间的桥接器。
如本发明中所使用,转换大体上指代对视频数据的任何修改。实例转换因此可包含部分或全部地重新包封视频数据。另一实例转换可包含通过丢弃帧或对经编码的视频数据的重新量化而对同一编解码器内的视频数据进行速率转换。又一实例转换可包含通过在具有或不具有按比例缩放的情况下改变译码格式而对视频数据进行代码转换。下文中更详细地描述这些各种转换中的每一者。
除了MMS 34之外,移动装置12包括视频编解码器38及调制解调器40。视频编解码器38可包含视频编码器与视频解码器两者的组合。常常,视频编码器包括用于解码由视频编码器编码的内容的经集成的视频解码器。具有经集成的视频解码器的这些视频编码器通常被称作视频编解码器或CODEC。常常,图形处理单元(GPU)或其它类型的处理单元、多媒体处理器或专用硬件(例如,专用集成电路(ASIC))实施视频编解码器。或者,例如中央处理单元(CPU)等通用处理单元可执行软件以实施视频编解码器。在此意义上,视频编解码器38可表示实施多个视频编解码器的硬件及/或硬件与软件的组合。
调制解调器40可包含多个无线调制解调器40,其每一者可包括上文相对于调制解调器22及28所列出的无线调制解调器的类型中的不同一者。通常,这些不同类型的无线调制解调器中的每一者可包括管理数据在OSI模型的下级层上的发射的专用基带处理器或其它处理元件。然而,在一些例子中,单一基带处理器可实施一个或一个以上类型的无线调制解调器。不管怎样,调制解调器40大体上表示实施至少一个类型的无线调制解调器的至少一个基带处理器。
最初,MMS 34可经由无线通信协议内的发现协议或某种其它发现机制而发现或以其它方式检测源装置12。通常,MMS 34可与调制解调器40交互以使调制解调器40中的一者或一者以上检测在这些调制解调器40中的每一者的无线通信范围内的任何装置。具体地说,MMS 34包括与调制解调器40通信以检测在移动装置12的调制解调器40的无线通信范围内的任何装置的链路管理协议(LMP)模块44(“LMP 44”)。LMP可指代在本发明中经详细描述的协议,LMP模块44可借此与调制解调器40通信以确定用以配置多媒体桥接器36的下层的参数。
虽然未在图1中展示,但MMS 34可包括呈现用户接口的用户接口模块。用户接口可列出经检测的装置。移动装置12的用户或其他操作者可与所呈现的用户接口交互以选择源装置(例如,源装置14)。用户接口模块可在接收到此选择后即刻还呈现列出除了所述选定装置以外的经检测的装置的另一用户接口。此用户接口可提示用户选择目的地装置。用户可接着与此第二用户接口交互以从此第二列表中选择目的地装置(例如,目的地装置16)。在此方面,MMS 34可识别至少一个源装置14及至少一个目的地装置16。或者,MMS 34可从所述列表中自动选择源装置及目的地装置,而不提示或以其它方式请求来自用户的干预。
基于选定(自动地或经由用户干预)的目的地装置16,LMP模块44可确定调制解调器40中的哪一者应当用以与目的地装置16通信,且借助无线调制解调器40中的所述一者来建立与目的地装置16的无线通信信道15。无线调制解调器40中的所述一者可被称作目的地调制解调器。LMP模块44可与此目的地调制解调器通信以确定定义与无线通信信道15相关联的特性集合的目的地信道数据。这些特性可包含位错误比(BER)、包错误率(PER)、信噪比(SNR)、前向错误校正(FEC)强度、与信道译码相关联的频率或时间分集,及错误分布特性(例如,深与平衰退)。LMP模块44可接着基于目的地信道数据配置无线调制解调器中的所述一者,以便促进(如果不优化的话)从源装置14所接收的多媒体内容的经由无线通信信道15的发射。
在一些例子中,LMP模块44可与无线调制解调器40中的管理无线通信信道13(移动装置12通过其与源装置14通信)的另一无线调制解调器介接。无线调制解调器40中的此另一者可被称作源调制解调器。LMP模块44可与此源调制解调器介接以确定定义与由目的地信道数据所定义的特性集合类似的特性集合的源信道数据。LMP模块44可接着配置此源调制解调器以促进(如果不优化的话)多媒体内容的从经由无线通信信道13所发送的无线信号的恢复。以此方式,LMP模块44可与调制解调器40介接以构造横跨无线调制解调器40的多媒体桥接器36。
值得注意的是,源调制解调器及目的地调制解调器可包含无线调制解调器40中的同一者。在此情况下,仅源调制解调器涉及无线调制解调器40中的此同一者的接收侧,而目的地调制解调器涉及无线调制解调器40中的此同一者的发射侧。接收侧及发射侧中的每一者可出于本发明中所描述的技术的目的表示单独调制解调器,且这些侧中的每一者可由LMP模块44个别地配置以促进(如果不优化的话)多媒体内容的从经由相应无线通信信道13及15所发送的无线信号的恢复。
MMS 34可进一步包括构造多媒体桥接器36的上层的多媒体交换协议(MEP)模块46(“MEP 46”)。换句话说,MEP模块46确定桥接器配置参数,通过其以促进根据第一格式编码的多媒体内容转换为根据第二格式编码的多媒体内容的方式来配置视频编解码器38。在此方面,MEP模块46在移动装置12的控制单元(例如,视频编解码器38及任何其它所支持的处理单元的集合)内配置多媒体桥接器36,使得多媒体桥接器36横跨多个视频编解码器38。
为了以此方式配置多媒体桥接器36,MEP模块46可确定众多不同类型的数据(用于多媒体桥接器36的上层的配置参数以其为基础)。首先,MEP模块46可从LMP模块44接收源信道数据或目的地信道数据或源信道数据与目的地信道数据两者。此信道数据可定义MEP模块46可使用以用于识别可接受类型的文件格式的特性集合。LMP模块44还可将选定源装置12及目的地装置16转发到MEP模块46。基于选定的源装置12及目的地装置16,MEP模块46可选择简档48中的一者或一者以上。简档48中的每一者可表示定义描绘由相应多媒体装置及/或应用程序所支持的文件格式以及那些所支持的文件格式的特性的数据的多媒体装置及/或应用程序简档。MEP模块46可(例如)确定简档48中的对应于源应用程序18的一个简档(例如,源简档)及简档48中的对应于目的地应用程序32的另一简档(例如,目的地简档)。在一些例子中,MEP模块46可与管理移动装置12内的资源的利用的资源管理器模块(未在图1中展示)通信,以确定描绘移动装置12内的资源的当前利用的资源数据。在其它例子中,MEP模块46可从对所接收的多媒体内容进行包装或编码的文件格式标头提取标头数据。
基于这些数据集合(例如,信道数据、装置及/或应用程序数据、资源数据及/或标头数据)中的一者或一者以上,MEP模块46可确定定义多媒体桥接器36的上层的配置的桥接器配置参数。在一个方面中,MEP模块46可选择这些桥接器配置参数以配置多媒体桥接器36,使得其提供多媒体内容的从第一文件格式到第二文件格式的实时或低等待时间(但未必瞬时)转换。在另一方面中,MEP模块46可选择这些桥接器配置参数以配置多媒体桥接器36,使得由多媒体桥接器36执行的转换节省功率或以其它方式减少功率消耗。
各种技术可用以配置多媒体桥接器36以节省或以其它方式优化功率消耗。举例来说,可通过“智能”代码转换来改进功率消耗。在智能代码转换中,根据可用于H.264/MPEG-4 AVC视频编解码器的被称作上下文自适应二进制算术译码(CABAC)的熵译码形式而编码的多媒体内容可经代码转换为上下文自适应可变长度代码(CAVLC)。智能代码转换可承认CABAC可能会引起显著等待时间及相互依赖性(例如,数据相依性),其引起不能够并行地被实行或执行的串行操作。归因于编解码器的宏块/切片解码回路内的上下文节省及多级解码而发生此串行化。
在任何情况下,相互依赖性还增加了增加处理器(其可被称作核心)的使用或利用的众多条件(例如,译码决策的分支)。此增加的利用可增加功率消耗。通过将多媒体内容代码转换为CAVLC,可通过减少数据相依性而减小此功率利用。在此方面,此形式的代码转换可为“智能”的,因为所述代码转换可调适代码转换以便避免已知问题。另外,智能代码转换可涉及将B切片代码转换为P切片以通过提供主简档到基线简档代码转换的净效应而推动有效功率利用(例如,其在一个具有MMS的移动装置正服务此第一移动装置的用户群组中的其它移动装置时可为有用的)。
而且,智能代码转换可涉及从所接收的多媒体内容解码参数且在重新编码过程中重新使用(而非重新计算)这些参数。举例来说,例如运动向量等运动信息可经解码且接着经重新使用以在将多媒体内容递送到目的地装置之前对所述内容进行重新编码。这可通过参数信息的重新使用或再循环而减少功率消耗。智能代码转换可进一步包括基于由LMP模块(例如,LMP模块44)提供的带宽数据而确定给定信道可支持的众多宏块行(其允许并行化)。此数据可通过使MEP 48能够配置视频编解码器38以便实现最大量的并行化(其如上文所描述可减少功率消耗)而减少功率消耗。实际上,智能代码转换指代MMS 34借此选择桥接器配置参数64以便配置多媒体桥接器36(其较多地为了等待时间及功率且为了确保源应用程序18与目的地应用程序32之间的最佳对准而非为了压缩效率而经优化)的过程。
MEP模块46可接着与视频编解码器38介接以根据经确定的桥接器配置参数配置视频编解码器38中的一者或一者以上。MEP模块46可经由视频编解码器38中的每一者所提供的应用程序编程者接口(API)而与视频编解码器38介接。MEP 48可基于从源应用程序18所接收的多媒体内容经格式化到的文件格式及由目的地应用程序32支持的文件格式中的选定一者(如在简档48中的对应一者中所阐述)而确定API中的哪一者进行调用且因此视频编解码器38中的哪一者进行配置。在此方面,视频编解码器38中的每一者可对应于一个或一个以上文件格式。
值得注意的是,MEP 48可仅配置视频编解码器38中的单一一者,且与在上文的无线调制解调器40中的仅一者经配置的例子中很相似,配置视频编解码器38中的所述一者的接收侧(例如,解码器)及发射侧(例如,编码器)。在此例子中,转换可包含多媒体内容的从第一格式到第二格式的部分或全部重新包封。或者,转换可包含同一编解码器内的多媒体内容的速率转换,其可涉及丢弃多媒体内容的帧或对多媒体内容的重新量化以从第一文件格式产生第二文件格式。在此方面,文件格式指代多媒体内容的格式。第一文件格式可因此在多媒体内容的格式方面与所得第二文件格式不同。在转换涉及视频编解码器38中的两者或两者以上时,所述转换可包含编码的类型及多媒体内容的格式两者借此可从第一文件格式改变到第二文件格式的代码转换。
MMS 34的LMP模块44可动态地配置多媒体桥接器36以经由无线调制解调器40中的第一无线调制解调器接收多媒体内容,且经由无线调制解调器40中的第二无线调制解调器有效地发射此多媒体内容。MMS 34的MEP模块46还可动态地配置多媒体桥接器36以将经由无线调制解调器40中的第一无线调制解调器所接收的多媒体内容从第一文件格式转换为第二文件格式。经组合的配置可因此跨越OSI模型的各种层来配置多媒体桥接器36,以促进(如果不优化的话)多媒体内容的从第一多媒体生态系统的源应用程序18到第二不同多媒体生态系统的目的地应用程序32的递送,其中这些装置中的每一者包括不同类型的无线调制解调器且支持非重叠及因此不同多媒体文件格式集合。此外,所述配置可导致推动有效功率利用及/或多媒体内容的无缝实时递送及转换的多媒体桥接器36。
作为说明,在配置多媒体桥接器36之后,移动装置12可经由调制解调器40中的一者在无线通信信道13上从源装置14接收多媒体内容。多媒体桥接器36可经由无线调制解调器40中的第一无线调制解调器接收此内容且提供错误校正及其它下层功能性,以从无线(通常无线电)信号恢复根据源应用程序18所支持的第一文件格式所编码的多媒体内容。可由LMP模块44基于上文所描述的源信道数据来配置多媒体桥接器36的此源调制解调器,以提供更稳健的错误校正及其它下层功能性以改进恢复且/或推动有效能量消耗。
多媒体桥接器36的此源调制解调器可接着将经恢复的以第一文件格式来格式化的多媒体内容转发到多媒体桥接器36的视频编解码器38中的一者(其可被称作源视频编解码器)。MEP模块46可配置此源视频编解码器以推动有效功率消耗及/或多媒体内容的实时解码。视频编解码器38的源视频编解码器可对第一文件格式进行解码以产生未经格式化的多媒体内容,且将此未经格式化的多媒体内容转发到视频编解码器38中的符合由目的地装置16的目的地应用程序32所支持的文件格式的另一视频编解码器(其可被称作多媒体桥接器36的目的地视频编解码器)。MEP模块46可配置此目的地视频编解码器以推动有效功率消耗及/或多媒体内容的实时编码。
此外,MEP模块46可配置源视频编解码器及目的地视频编解码器两者以优化多媒体内容的从第一文件格式到第二文件格式的并行解码及编码,以推动有效功率消耗及/或多媒体内容的实时转换。关于多媒体内容的实时转换,在一些方面中,MMS 34可配置多媒体桥接器36以在从源应用程序18接收多媒体内容的同时转换多媒体内容。
视频编解码器38的经译码的目的地视频可接着将根据第二文件格式所编码的多媒体内容转发到目的地调制解调器多媒体桥接器36。与源调制解调器相似,LMP模块44可配置多媒体桥接器36的目的地调制解调器,以改进多媒体内容的由目的地装置16进行的恢复且/或推动由移动装置12进行的有效能量消耗。此目的地调制解调器可接着经由无线通信信道15将经格式化的多媒体内容发射到目的地装置16。
以此方式,所述技术可促进装置(例如,移动装置12)内的多媒体桥接器36的动态配置,以提供实现两个装置(例如,源装置14与目的地装置16)之间的通信的桥接器。多媒体桥接器36可借助于配置无线调制解调器40中的一者或一者以上的LMP模块44而横跨OSI模型的下层(例如,层1及层2或L1及L2)以建立无线通信信道13及15。多媒体桥接器36可借助于配置视频编解码器38中的一者或一者以上的MEP模块46而横跨OSI模型的较高层(例如,层4及层7),以促进多媒体内容的从一个文件格式到另一文件格式的转换。考虑到多媒体桥接器36实现多媒体从一个应用程序到另一应用程序的通信,其中所述应用程序中的第一者(例如,源应用程序18)驻留于一个多媒体生态系统内,且另一应用程序(例如,装置应用程序32)驻留于另一多媒体生态系统内,则多媒体桥接器36可被称作多媒体网关,因为多媒体桥接器36充当用于多媒体在两个不同多媒体生态系统之间流动的网关。
虽然经描述为促进从源应用程序18到目的地应用程序32的单一通信方向,但所述技术可使移动装置12能够提供促进从源应用程序18到目的地应用程序32及从目的地应用程序32到源应用程序18两者的通信的多媒体桥接器36。在此方面,所述技术可使移动装置12能够提供“双工通用平台”,因为多媒体桥接器36提供通用平台,通过所述通用平台以同时促进两个或两个以上应用程序之间的通信(其被称作双工通信)。
图2A及图2B为更详细说明在实施本发明中所描述的技术方面的移动装置12的框图。明确地说,图2A为说明在实施本发明中所描述的技术的链路管理协议(LMP)方面的方面的移动装置12的框图。图2B为说明在实施本发明中所描述的技术的多媒体交换协议方面的方面的移动装置12的框图。
如图2A的实例中所示,移动装置12包括实施本发明中所描述的技术的控制单元50。控制单元50可包含执行软件指令(例如,用以定义软件或计算机程序的软件指令)的一个或一个以上处理器(图2A中未展示),所述软件指令经存储到计算机可读存储媒体(再次,图2A中未展示)(例如,存储装置(例如,磁盘驱动器或光学驱动器)或存储器(例如,快闪存储器、随机存取存储器或RAM)或存储用以致使可编程处理器执行本发明中所描述的技术的指令(例如,呈计算机程序或其它可执行码的形式)的任何其它类型的易失性或非易失性存储器)。或者,控制单元50可包含用于执行本发明中所描述的技术的专用硬件,例如一个或一个以上集成电路、一个或一个以上专用集成电路(ASIC)、一个或一个以上专用特殊处理器(ASSP)、一个或一个以上现场可编程门阵列(FPGA)或专用硬件的前述实例的任何组合。
明确地说,控制单元50实施包括LMP模块44及MEP模块46的MMS 34,如上文所描述。MMS 34可进一步包括呈现用户接口(例如,图形用户接口(GUI)或命令行接口(CLI))的用户接口(UI)模块52,用户可与其交互以选择一个或一个以上经检测的装置,借助所述装置以形成桥接器(如上文所描述)。虽然未在图2A中展示,但移动装置12可包含显示器,用户接口模块52在其内进行交互以呈现上文所描述的用户接口。
调制解调器40包括多个不同类型的无线调制解调器40A到40N(“无线调制解调器40”或“调制解调器40”)。调制解调器40中的每一者分别包括射频前端(RFFE)单元54A到54N(“RFFE单元54”)中的一者、基带处理器56A到56N(“基带处理器56”)中的一者、媒体接入控制(MAC)单元58A到58N(“MAC单元58”)中的一者及输送单元60A到60N(“输送单元60”)中的一者。RFFE单元54中的每一者可包含用以促进无线射频(RF)信号的发射及接收两者的收发器。通常,RFFE单元54中的每一者包含用以与天线(图2A中未展示)介接以便接收及发射RF信号的各种组件,例如匹配电路、带通滤波器、低噪声放大器(LNA)及混频器。RFFE单元54可对所接收的RF信号进行解调以从经调制的载波提取原始信息承载信号。
基带处理器56可各自包含专用处理器或用于执行及控制无线电通信的其它执行单元。基带处理器56可大体上基于经嵌入于信息承载信号中的信道代码而对所接收的信息承载信号进行解码。明确地说,基带处理器56可基于经嵌入于信息承载信号中的被称作外部代码的信道代码而对所接收的此信号进行解码。基带处理器56还可在将信息承载信号发送到RFFE单元54中的相应一者之前将这些外部代码嵌入或编码于此信号中。MAC单元58可包含对信道译码的内部代码进行编码及解码的模块或其它单元。输送单元60可包含实施一个或一个以上输送协议(例如,通用数据报协议(UDP)及传输控制协议(TCP))及/或应用层协议(例如,上文所描述的RTP)的模块或其它单元。
信道代码通常包含外部代码(如上文所描述)及内部代码,且调制解调器40可实施信道代码以确保信息承载信号的精确递送。这些代码可用以执行错误校正,例如前向错误校正(FEC)。因此,在基带处理器56及MAC单元58对信息承载信号进行解码及编码时,这些处理器56可大体上执行错误校正且(在各种方面中)特定来说执行FEC。
可基于针对给定无线通信信道所确定的信噪比(SNR)及/或位错误比(BER)而确定将这些代码嵌入于信息承载信号中的频率。SNR指代破坏信号的噪声功率对信号功率的比。BER指代经错误地接收的位或其它信息单元的数目对在指定时间间隔期间所接收的位或其它信息单元的总数目的比。较高SNR或BER可通常需要信息承载信号内对这些代码的较频繁编码,这可减小信道带宽(因为归因于经嵌入代码的增加而在设定时间间隔期间发送较少信息承载信号)。较低SNR或BER可通常需要信息承载信号内对这些代码的较不频繁编码,这可增加信道带宽(因为归因于经嵌入代码的减少而在设定时间间隔期间发送更多信息承载信号)。因此,通常以信道带宽为代价而发生错误校正。
根据本发明中所描述的技术,LMP模块44配置多媒体桥接器36(其在图2A中经展示为较低层桥接器36A)的下层,以促进(如果不优化的话)多媒体内容从源装置14到目的地装置16的通信。即,LMP模块44可配置用以建立桥接器的调制解调器40,以便在给定所接收的多媒体所对应的应用程序的情况下执行适当等级的错误校正。
举例来说,多媒体内容可与信道代码一起编码,以确保多媒体内容的跨越无线通信信道13的精确实时递送。LMP模块44可在与调制解调器40中的一者(例如,调制解调器40N)介接以建立无线通信信道15之后,与此调制解调器40N介接以确定定义与无线通信信道15相关联的特性集合的目的地信道数据62。LMP模块44可确定BER及FEC强度,其两者为与目的地信道15相关联的实例特性。基于这些特性,LMP模块44可大体上配置调制解调器40N,且更明确地说,配置调制解调器40N的基带处理器56N及MAC单元58N以确保经由信道15的精确实时递送。
为了配置基带处理器56N及MAC单元58N,LMP模块44可基于目的地信道数据62确定桥接器配置参数64A(“桥接器配置参数64A”)。这些桥接器配置参数64A可定义MAC单元58N及基带处理器56N对从输送单元60N所接收的多媒体内容或数据内的信道代码进行编码的频率。桥接器配置参数64A还可定义FEC的类型以执行或以其它方式识别确保具有可容许错误率的给定等级的信道带宽的选项或参数。错误率可为“可容许的”,因为多媒体内容的一些应用或使用可比其它者容许更多错误。换句话说,一些应用可容许错误及由错误引起的迟滞,而其它应用可需要严格错误控制以减少迟滞。在任何情况下,LMP模块44可基于实时目的地信道数据62动态地选择桥接器配置参数64A以适于多媒体内容经编码所针对的特定应用。在以上例子中,为了确保多媒体内容的精确、实时或串流应用,LMP模块44可选择提供最佳带宽错误率比的参数64A。
LMP模块44还可与调制解调器40中的建立无线通信信道13的一个调制解调器(例如,调制解调器40A)介接,以确定定义与无线通信信道13相关联的另一特性集合的源信道数据66。源信道数据66可包括与相对于目的地信道数据62所描述的特性类似(如果并非大体上相同的话)的特性。LMP模块44可以类似于上文相对于目的地信道数据62所描述的方式的方式基于源信道数据66确定桥接器配置参数64A。LMP模块44可使用根据源信道数据66所确定的这些桥接器配置参数64A来配置调制解调器40A的基带处理器56A及MAC单元58A。LMP模块44可以此方式配置调制解调器40A,以便促进(如果不优化的话)多媒体内容的从经由无线通信信道13所发送的对应无线RF信号的恢复。举例来说,LMP可配置调制解调器40A,以便在一个实例中,优化由基带处理器56A与MAC单元58A两者所执行的FEC。
因此,LMP模块44可动态地配置较低层桥接器36A以横跨调制解调器40中的多者(例如,调制解调器40A及40N),以便以上文所描述的方式促进(如果不优化的话)多媒体内容的经由无线通信信道13及15的接收及发射。此优化可涉及选择桥接器配置参数64A以使得基带处理器56A、56N及MAC单元58A、58N定制FEC以适于多媒体内容正经递送所针对的特定应用(例如,串流应用)。虽然相对于多个调制解调器40A及40N进行描述,但所述技术的LMP方面可相对于单一调制解调器来实施以促进(如果不优化的话)多媒体内容的通过单一调制解调器的接收及发射。
参看图2B的实例,移动装置12的控制单元50进一步包括资源管理器模块70、后处理单元72A(“后处理单元72A”)、预处理单元72B(“预处理单元72B”)、编辑器单元74及共享存储单元76。资源管理器模块70可表示监视移动装置12内的各种资源(例如,处理器、存储器、存储装置、寄存器及其类似者)的利用及其它特性的硬件及/或软件模块。可被共同地称作“处理单元72”的后处理单元72A及预处理单元72B可表示可对定义多媒体内容的基础数据进行重新格式化以用于替代应用程序及/或装置的一个或一个以上处理单元。单一处理单元可实施后处理单元72A与预处理单元72B两者。编辑器单元74可表示从多媒体内容添加及/或移除内容以为不同应用程序及/或装置准备多媒体内容的硬件及/或软件模块。共享存储单元76可表示促进数据的到及从存储器或存储装置的同时或并行写入及读取进而实现存储于共享存储单元76内的数据的“共享”的存储器模块或存储装置。
出于说明的目的,视频编解码器38在图2B的实例中经展示为多个视频编解码器38A到38N。视频编解码器38可各自实施不同类型或形式的视频编解码器。如上文所提及,所述技术可相对于其它种类的编解码器来实施,包括图像编解码器、音频编解码器、经组合的视频及音频编解码器及其任何组合。因此,所述技术不应限于图2B的实例。
如上文相对于图2A的实例所描述,输送单元60可实施输送及/或应用层协议。输送单元60可实施这些协议中的一者或一者以上以根据从基础MAC单元58所接收的多个相异数据单元或包重新构造所接收的多媒体内容。输送单元60还可实施这些协议中的一者或一者以上以将从视频编解码器38接收的多媒体内容分段为一个或一个以上相异数据单元或包。常常,输送单元60将内容分段为相异数据单元以促进多媒体内容的经由特定通信媒体的发射。输送单元60还可将内容分段为相异数据单元以促进特定多媒体应用,例如多媒体内容的实时串流。
在任何情况下,输送单元60可将多媒体内容分段为相异部分且将标头附加到所述相异部分,以便促进多媒体内容的根据所述相异部分的重新构造。在多媒体内容的相异部分经包装于标头内时,多媒体内容的相异部分可被称作有效负载或有效负载数据。为了重新构造多媒体内容,输送单元60剖析每一相异数据单元的标头、提取有效负载数据且基于经存储到经剖析的标头的标头信息而重新构造多媒体内容。输送单元60可将经重新构造的多媒体内容发射到控制单元50。此多媒体内容在图2B中经展示为经格式化的多媒体内容78A(“经格式化的MM内容78A”)。多媒体内容78A为“经格式化的”,因为多媒体内容78A是根据第一文件格式来格式化的。
根据本发明中所描述的技术,MEP模块46可大体上配置控制单元50以提供在由源应用程序16实施的第一格式与由目的地应用程序32实施的第二格式之间的较高层多媒体桥接器36B。为了配置较高层多媒体桥接器36B,MEP模块46可首先收集各种数据集合以便确定桥接器配置参数64B(“桥接器配置参数64B”)。
在一个方面中,MEP模块46可分析经格式化的多媒体内容78A以识别此多媒体内容78A经格式化到的格式,且将经格式化的多媒体内容78A导引到视频编解码器38中的支持此格式的一者(例如,视频编解码器38A)。视频编解码器38A可分析经编码的多媒体编解码器38A以识别与多媒体内容的部分相关联的标头。举例来说,可根据H.264/MPEG-4 AVC标准对多媒体内容进行编码,其可将标头插入于多媒体内容内以识别帧、切片、宏块及/或块。这些类型的编码标头中的一者或一者以上可存储与以下各者有关的参数:编解码器类型或版本、分辨率、每秒帧数(FPS)、位率、译码层的数目、经译码的帧类型分布(例如,I帧对P帧比、I帧对B帧比及/或P帧对B帧比)、图片群组(GOP)长度及/或结构、显示参数或多媒体应用。MEP模块46可与视频编解码器38A介接以确定这些参数,因此视频编解码器38A将从经编码的多媒体编解码器38A的一个或一个以上标头提取的这些参数作为标头数据80发送到MEP模块46。
在另一方面中,LMP模块44可将源信道数据66及目的地信道数据62作为信道数据82转发到MEP模块46。在另一方面中,LMP模块44可(除了转发信道数据82之外)转发源装置14及目的地装置16的选择。再次,如上文所描述,UI模块52可呈现列出在调制解调器40的范围内的那些装置的用户接口,且用户可与此用户接口交互以选择源装置14及目的地装置16。UI模块52可接收这些选择且将所述选择转发到LMP模块44,LMP模块44可以上文所描述的方式建立较低层桥接器36A。LMP模块44可接着将信道数据82以及源装置14及目的地装置16的选择转发到MEP模块46。MEP模块46可接着基于这些选择识别简档48中的对应于选定装置14、16的一个或一个以上简档,且基于这些源及目的地简档识别装置数据。
在又一方面中,MEP模块46可与资源管理器模块70介接以确定资源数据84。资源数据84可识别与移动装置12的资源有关的利用及其它特性,例如剩余电池功率、剩余操作时间、控制单元利用、存储器利用、存储装置利用、当前总功率消耗或与移动装置12的资源有关的任何其它度量或特性。
在任何情况下,MEP模块46可接收各种数据集合80、82及84,以及从简档48中的一者或一者以上检索装置数据。在收集或以其它方式确定这些数据集合之后,MEP模块46可基于这些数据集合中的一者或一者以上确定桥接器配置参数64B。举例来说,在资源数据84指示资源的较高当前利用时,MEP模块46可基于资源数据84选择桥接器配置参数64B以优化控制单元50内的资源消耗。
为了说明,MEP模块46可协调或以其它方式与资源管理器模块70通信,以确定指示转换多媒体内容的最佳时钟频率的资源数据84。此时钟频率可指示源视频编解码器38A及目的地视频编解码器38N操作以实现实时操作的目标等待时间及/或最小化功率(例如,快速运行源编解码器与目的地编解码器且接着关闭,进而管理接通/关断工作循环)的时钟频率。
作为另一实例,MEP模块46可协调或以其它方式与资源管理器模块70通信,以确定多媒体处理系统中的每一硬件核心可经驱动以实现功率减少的核心电压。此形式的自适应电压更新被称作“动态电压按比例缩放”。MEP模块46可指令资源管理器模块70改变这些元件(例如,实施源及目的地视频编解码器的一个或一个以上核心)中的每一者被供电的电压。可基于从MMS 34且更明确地说MEP模块46到资源管理器模块70的输入而动态地调适时钟频率及核心电压两者。虽然在上文经描述为直接配置多媒体桥接器36,但MMS 34也可通过指定经转发到资源管理器模块70的桥接器配置参数64而间接地配置多媒体桥接器36,资源管理器模块70接着更新多媒体桥接器36。
MEP模块46可借助可(例如)指示多媒体内容所对应的应用为实时串流应用的标头数据80来平衡桥接器配置参数64B的此选择。MEP模块46可接着指定桥接器配置参数46B以提供实时串流支持的基线等级但牺牲质量以减少解码及编码开销,进而同时限制或减少较高层桥接器36B可消耗的资源量。
MEP模块46还可存取目的地装置16的简档48以确定由目的地装置16支持的格式。MEP模块46可接着选择这些文件格式中的一者以满足上文所确定的目标(例如,提供实时输送的目标),且指定桥接器配置参数64B以配置经格式化的MM内容78A的从第一格式到此第二格式的转换,其由MEP模块46选择以满足上文的实时及资源有效目标。
MEP模块46可在指定桥接器配置参数64B时进一步利用信道数据82,使得较高层桥接器36B以足够弹性重新编码MM内容以适应特定信道特性(例如,有噪声信道)。作为一个实例,MEP模块46可通过指定特定编码参数来限制多媒体内容的经依赖译码区段的大小而确定桥接器配置参数64B以克服由信道数据82指示的有噪声信道。较小大小可促进经由有噪声信道的发射,因为损耗经依赖译码区段的一部分可禁止对所述部分的解码。然而,由于所述区段被有目的地设定为较小大小,所以此部分的损耗可表示对经解码的多媒体内容的检视的可忽略影响。
虽然上文出于说明的目的而仅论述少数实例,但所述技术可经实施以使得MEP模块46指定桥接器配置参数64B以满足多种多样的目标。MEP模块46可指定桥接器配置参数64B以优化功率利用或消耗、适合于特定装置或处理器能力、适应实时传送或任何其它多媒体应用,且提供多媒体数据或内容从源应用程序到目的地应用程序的无缝(例如,以至于需要极少(如果存在的话)的用户交互)转变。
为了进一步说明,MEP 48还可选择桥接器配置参数64B以便相对于存储器进一步优化功率消耗。这些存储器优化可依赖于芯片上存储器与芯片外存储器之间的差异,所述芯片外存储器由共享存储装置76表示。例如高速缓冲存储器等芯片上存储器可消耗大量功率,因为这些芯片上存储器通常是需要频繁更新或刷新的动态存储器且每一次刷新均消耗功率。芯片外存储器可归因于其缺乏刷新或刷新速率低而不消耗几乎一样多的功率。
MEP 48可选择桥接器配置参数64B以便优化对可用高速缓冲存储器的运动估计,使得确定性数据量从参考图片经存储所在的外部存储器横贯到用于每个宏块或宏块群组的芯片上高速缓冲存储器。MEP 48可接着选择桥接器配置参数48B以减少高速缓冲存储器的使用,且进而减少功率消耗。MEP 48还可选择桥接器配置参数64B使得图片缓冲器中的帧数据存储于存储器组中,在所述存储器组中每当检索数据以用于处理(例如,用于运动估计)时打开较少数目的页。
作为另一说明,MEP 48还可选择桥接器配置参数64B以通过限制作为功率消耗的主要来源的存储器总线带宽利用而提供存储器优化。通常,数据经由存储器总线横贯于处理元件(例如,CPU、硬件编码器、解码器、显示处理器、DSP等等)之间。MEP 48可选择桥接器配置参数64B以使得优化在处理元件之间所传送的包的大小(例如,突发大小)及频率(例如,突发数目)。举例来说,MEP 48可确定这些总线参数的最佳值以减少功率消耗。MEP 48可接着选择桥接器配置参数64B以配置源及目的地编解码器内的运动估计,使得对应于每一搜索区域的数据量与同存储器总线(此数据经由所述存储器总线而横贯)相关联的最佳总线参数对准。MEP 48可根据资源管理器模块70确定移动装置12的每一总线的总线特性。
作为又一说明,MEP 48可通过选择桥接器配置参数64B以使得以前后紧接的方式将由源编解码器解码的视频单元或宏块导引到目的地编解码器中的高速缓冲存储器而提供整体存储器优化。换句话说,MEP 48可选择桥接器配置参数64B以使得源编解码器以时间约束的方式(其使解码与由目的地编解码器执行的后续编码同步)对多媒体内容进行解码。在此方面,多媒体桥接器36可经配置以通过将源编解码器时间耦合到目的地编解码器而实施代码转换管线。
MEP 48还可配置此管线以用于任何转换过程且不限于代码转换管线。在此方面,MEP 48可选择桥接器配置参数46B以配置包括任何数目的硬件核心、固件(例如,DSP)及/或计算机处理单元(CPU)的处理器管线。MEP 48可选择桥接器配置参数46B以定义各种元件之间的各种接口及/或输入/输出操作,其中所述接口及/或输入/输出操作可经数据驱动、寄存器驱动或中断驱动。MEP 48可基于应用及给定转换的其它要求来确定选择哪个接口。
在任何情况下,在指定桥接器配置参数64B之后,MEP模块46可通过使用一个或一个以上应用程序编程接口(API)与视频编解码器38A、视频编解码器38N、后处理器单元72及编辑器单元74介接来配置较高层桥接器36B。即,这些各种编解码器及单元中的每一者可提供相应API,MEP模块46可通过其与这些编解码器及单元介接。MEP模块46可接着将桥接器配置参数64B加载到这些编解码器及单元中以配置较高层桥接器36B。
一旦以此方式配置,较高层桥接器36B便可在接收经格式化的多媒体内容78A的同时将经格式化的多媒体内容78A从第一格式转换为第二格式。在图2B的实例中,较高层桥接器36B经展示成经配置以执行高度相关的转换,所述转换要求将对应于第一格式的经格式化的多媒体内容78A代码转换为对应于第二格式的经格式化的多媒体内容78B,其中使用不同视频编解码器对第一及第二格式进行编码。在代码转换之后接着进行内容的重新格式化及多媒体内容自身的编辑。此类型的转换可促进在具有已知限制的特定装置上检视多媒体内容,所述限制可在装置简档48中的对应一者中定义。
为了执行此代码转换操作,较高层桥接器36B的视频编解码器38A可从调制解调器40中的一者接收经格式化的多媒体内容78A,且对经格式化的多媒体内容78A进行解码。MEP 46可配置较高层桥接器36B以基于指示用以对经格式化的多媒体内容78A进行编码的编解码器的标头数据80而选择视频编解码器38A中的一者。在任何情况下,视频编解码器38A可将此经解码的视频内容传递到后处理单元72A,后处理单元72A可针对替代应用程序及装置对经解码的多媒体内容进行重新格式化。
作为一个实例,多媒体内容可原始地经编码以用于经由因特网的实时发射,其中可通常在个人计算机上的相对较小窗口中检视所述内容。然而,目的地装置16可包含无线电视显示器而非计算机,且MEP模块46可指定桥接器配置参数64B以使得后处理单元72A对经解码的多媒体内容调整大小且以其它方式执行图形操作以改进较大屏幕上的重放清晰度。在此方面,后处理单元72A可(例如)通过将多媒体帧调整大小到用于较大显示屏幕的较大大小格式而重新格式化或以其它方式修改经解码的多媒体内容。后处理单元72A可接着将经修改的多媒体内容转发到编辑器单元74。
编辑器单元74可通过合并来自其它应用程序的内容而进一步修改或编辑经修改的多媒体内容。通常,在两个或两个以上源应用程序正同时提供多媒体内容以用于转换且随后转发到一个或一个以上目的地装置时利用编辑器单元74。编辑器单元74可将此单独内容合并成单一多媒体内容,使得一个或一个以上目的地装置可同时呈现所述单独内容。编辑器单元74可接着将此经编辑的多媒体内容存储到共享存储单元76。共享存储单元76可由给定较高层桥接器(例如,较高层桥接器36B)内的所有组件(例如,编辑器单元74、后处理器单元72及视频编解码器38)“共享”。可通过使用共享存储单元76来实现特定益处(包括更有效功率消耗及更快速写入及读取时间),这可改进(如果不实现的话)移动装置12以提供多媒体内容的从第一格式到第二格式的实时转换。
预处理器单元72B可接着从共享存储单元76检索此经编辑的多媒体内容,且对此经编辑的内容执行预处理以再次促进显示或以其它方式调适经编辑的多媒体内容以适于特定应用及/或目的地装置。预处理器单元72B将此内容转发到视频编解码器38N,视频编解码器38N对所述多媒体内容进行重新编码以产生经格式化的多媒体内容78B。视频编解码器38N将经格式化的多媒体内容78B转发到调制解调器40中的同一或另一调制解调器,其进行以将经格式化的多媒体内容78B经由目的地无线通信信道15发射到目的地装置16。
虽然上文相对于此高度相关形式的转换来描述,但MEP模块46可配置其它类型的较小相关形式的转换。举例来说,MEP模块46可指定桥接器配置参数64B以配置较高层桥接器36B,所述较高层桥接器36B通过部分或全部地重新包封经格式化的多媒体内容78A而转换经格式化的多媒体内容78A。重新包封内容78A可仅涉及在不另外改变内容78A的格式的情况下更新经附加到多媒体内容78A的部分的标头。在此实例中,MEP40可配置视频编解码器38中的单一视频编解码器以执行此重新包封。
作为另一实例,MEP模块46可指定桥接器配置参数64B以配置较高层桥接器36B,所述较高层桥接器36B通过将经格式化的多媒体内容78A进行速率转换而转换经格式化的多媒体内容78A。对内容78A进行速率转换可仅涉及视频编解码器38中的单一一者,其中视频编解码器38中的所述一者通过在不另外编辑内容78A的格式的情况下丢弃帧或重新量化视频内容78A而对内容78A进行速率转换。
在又一实例中,MEP模块46可指定桥接器配置参数64B以配置较高层桥接器36B,所述较高层桥接器36B通过对经格式化的多媒体内容78A进行代码转换而转换经格式化的多媒体内容78A。对内容78A进行代码转换可涉及视频编解码器38中的至少两个视频编解码器,其中这两个视频编解码器中的一者根据一个译码技术/格式(例如,MPEG2)对经译码的内容78A进行解码,且这两个视频编解码器中的另一者根据不同译码技术/格式(例如,H.264)对经解码的内容进行重新编码。此代码转换可进一步涉及(例如)针对不同格式大小将多媒体内容按比例缩放,如上文所描述。
这些各种形式的转换中的每一者可消耗不同等级的资源且提供特定益处。重新包封可为本发明中所描述的转换中的最具功率效益(相对于移动装置12来说)的转换,但重新包封可能不为特定应用程序及/或装置提供极高体验质量(QoE)。在与重新包封相比时,速率转换可改进QoE,但也消耗较多功率及其它资源。代码转换可进一步改进借助于速率转换所获得的QoE,但与由速率转换所消耗的资源相比,消耗甚至更多资源。具有额外后处理及预处理以及(可能地)内容编辑的代码转换(如上文相对于图2B所描述)可提供相对于本文中所描述的转换的最佳QoE,但可进一步增加资源利用。MEP模块46可因此选择且指定桥接器配置参数64B以在给定以上数据集合80、82及84以及从简档48所确定的数据的情况下执行合适转换。
图3为说明根据本发明中所描述的技术实施多媒体管理系统(MMS)以配置较低层桥接器的装置的实例操作的流程图。出于说明所述技术的此方面的目的,相对于如图2A所示的移动装置12来描述此方面。虽然相对于此特定装置12来描述,但所述技术可由能够与两个或两个以上装置进行无线通信的任何装置来实施。
最初,移动装置12的控制单元50(且更明确地说,控制单元50内的MMS 34)可使用UI模块52以向移动装置12的用户呈现用户接口(86)。用户接口可提示用户确定用户是否想要建立源装置/应用程序(例如,图1的源装置14)与目的地装置/应用程序(例如,目的地装置16)之间的较低层桥接器。假定用户输入指示用户想要建立所述桥接器的输入,则UI模块52可将此响应转发到MMS 34的LMP模块44。LMP模块44可接着与调制解调器40介接以确定支持由调制解调器40中的每一者所支持的无线通信形式的任何装置。实际上,LMP模块44可发现在无线调制解调器40的范围内的装置。
值得注意的是,这些装置中的一些装置可包含到较大网络(例如,因特网)的接入点,在所述较大网络中驻留其它更多远程装置。常常,通过发现这些接入点装置,移动装置12可从驻留于无线调制解调器40的直接范围外部的装置存取内容及/或将内容递送到驻留于无线调制解调器40的直接范围外部的装置。举例来说,调制解调器40中的一者可发现提供到公用网络(例如,因特网)的有线或无线连接的无线接入点(WAP)。LMP 40可通过经由WAP接入因特网而发现例如视频服务器等额外装置。因此,所述技术不应限于在无线调制解调器40的范围内的那些装置,而是可包括可经由在无线调制解调器40中的一者或一者以上的范围内的一个或一个以上装置接入的任何装置。
在任何情况下,在发现这些装置之后,LMP模块44可即刻将装置列表返回到UI模块52,UI模块52可经由同一或另一用户接口呈现所述装置列表。用户可接着从所述列表选择装置中的一者作为源装置(例如,多媒体内容的提供者或来源)且选择列表的装置中的另一者作为目的地装置(例如,由选定源装置提供的多媒体内容的目标或目的地)。UI模块52可经由所呈现的用户接口接收源装置及目的地装置的这些选择,且将这些选择转发到LMP模块44(88)。LMP模块44可接着选择调制解调器40中的一者或一者以上(通过其与源装置及目的地装置通信)且以上文所描述的方式建立与选定源装置(例如,源装置14)的源无线通信信道13(89)。
无线调制解调器40中的一者可经由源通信信道13从源应用程序18接收代表多媒体内容的RF信号(90)。在图2A的实例中,无线调制解调器40A接收代表多媒体内容的RF信号,其中RFFE单元54A根据所述RF信号重新构造多媒体内容且将此经重新构造的多媒体内容传递到基带处理器56A,基带处理器56A对嵌入于多媒体内容中的信道/内部代码进行解码,如上文所描述。基带处理器56A可接着将此经部分解码的多媒体内容转发到MAC单元58A,MAC单元58A对嵌入于多媒体内容中的外部代码进行解码且根据所述经部分解码的多媒体内容重新构造多媒体内容。
LMP模块44可与此无线调制解调器40A(且更具体地说,基带处理器56A及MAC单元58A)通信以确定源信道数据66,如上文所描述。在一些方面中,LMP模块44可确定一个或一个以上桥接器配置参数64A以调适无线调制解调器40A以依据由源信道数据66定义的特定信道特性来优化多媒体内容的接收,如上文所描述。
LMP模块44可同时与无线调制解调器40中的建立目的地通信信道15的一个调制解调器(例如,图2A中的调制解调器40N)通信以建立目的地通信信道15,如上文所描述(92)。LMP模块44(如上文所描述)可进一步与此调制解调器40N通信以确定目的地信道数据62(94)。至少基于此目的地信道数据62,LMP模块44可确定桥接器配置参数64A中的一者或一者以上以调适无线调制解调器40N以依据由目的地信道数据62定义的特定信道特性而克服或以其它方式优化多媒体内容的递送,再次如上文所描述(95)。LMP模块44可不仅选择桥接器配置参数64A以优化调制解调器40N或调制解调器40A与40N两者以克服特定信道特性,而且推动有效功率消耗或以其它方式促进移动装置12的有效操作。
在任何情况下,LMP模块44可与调制解调器40N或调制解调器40A与40N两者介接以使用桥接器配置参数64A配置这一个或一个以上调制解调器,如上文所描述(96)。在配置调制解调器40中的一者或一者以上(且明确地说,调制解调器40N)之后,以此方式,此经配置的调制解调器40N可将所接收的多媒体内容经由目的地通信信道15转发到目的地装置16(98)。如本文中所使用的术语“转发”不应被解释为严格地以此内容被接收的格式转发所接收的多媒体内容,而是还可涉及以不同于此内容被接收的格式的格式转发所接收的多媒体内容。可在如上文所描述的多媒体桥接器的高层级部分中发生此转换。因此,“转发”所接收的多媒体内容可包含转发所接收的多媒体内容的经转换版本以及以此内容被接收的同一格式转发所接收的多媒体内容。
在MMS 34仅包括LMP模块44以配置较低层桥接器36A的例子中,LMP模块44可配置调制解调器44A以将经解码的多媒体内容通过开关或其它硬件机构直接传送到调制解调器40N。在一些例子中,控制单元50可以硬件方式或作为硬件与软件的组合提供切换机构。在这些例子中,图1所示的多媒体桥接器36可包含较低层桥接器36A而不包括较高层桥接器36B。
或者,在MMS 34包括LMP模块44与MEP模块46两者的例子中(如图1、图2A及图2B所示),LMP模块44可配置调制解调器40N以将信道经解码的多媒体内容转发到控制单元50以用于进一步转换。MEP模块46可配置较高层桥接器36B以执行此进一步转换,如上文所描述。在这些例子中,多媒体桥接器36可包含较低层桥接器36A与较高层桥接器36B两者。但是,由于MMS 34可包括LMP模块44而不包括MEP模块46,所以MMS 34也可包括MEP模块46而不包括LMP模块44。在此例子中,多媒体桥接器36可仅包含较高层桥接器36B,如下文所描述。
图4为说明根据本发明中所描述的技术实施多媒体管理系统(MMS)以配置较高层桥接器的装置的实例操作的流程图。出于说明所述技术的此方面的目的,相对于如图2B所示的移动装置12来描述此方面。虽然相对于此特定装置12来描述,但所述技术可由能够与两个或两个以上装置进行无线通信的任何装置来实施。
最初,移动装置12的控制单元50(且更明确地说,控制单元50内的MMS 34)可使用UI模块52以向移动装置12的用户呈现用户接口(100)。用户接口可提示用户确定用户是否想要建立源应用程序(例如,图1的源应用程序16)与目的地应用程序(例如,目的地应用程序32)之间的较高层桥接器。假定用户输入用信号通知用户想要建立所述桥接器的输入,则UI模块52可将此响应转发到MMS 34的MEP模块46(未在图2B中展示)。LMP模块44可接着与调制解调器40介接以确定支持由调制解调器40中的每一者所支持的无线通信形式的任何装置。实际上,LMP模块44可发现在无线调制解调器40的范围内的装置。
再次,这些装置中的一些装置可包含到较大网络(例如,因特网)的接入点,在所述较大网络中驻留其它更多远程装置。常常,通过发现这些接入点装置,移动装置12可从驻留于无线调制解调器40的直接范围外部的装置存取内容及/或将内容递送到驻留于无线调制解调器40的直接范围外部的装置。举例来说,调制解调器40中的一者可发现提供到公用网络(例如,因特网)的有线或无线连接的无线接入点(WAP)。MEP模块46可通过经由WAP接入因特网而发现例如视频服务器等额外装置。因此,所述技术不应限于在无线调制解调器40的范围内的那些装置,而是可包括可经由在无线调制解调器40中的一者或一者以上的范围内的一个或一个以上装置接入的任何装置。
在任何情况下,在发现这些装置之后,MEP模块46可即刻将装置列表返回到UI模块52,UI模块52可经由同一或另一用户接口呈现所述装置列表。用户可接着选择所述列表的装置中的一者作为源装置(例如,多媒体内容的提供者或来源)且选择列表的装置中的另一者作为目的地装置(例如,由选定源装置提供的多媒体内容的目标或目的地)。UI模块52可经由所呈现的用户接口接收源装置及目的地装置的这些选择,且将这些选择转发到MEP模块46(102)。MEP模块46可接着选择调制解调器40中的一者或一者以上(通过其与源装置及目的地装置通信),且致使调制解调器40中的这一者或一者以上以上文所描述的方式建立与选定源装置(例如,源装置14)的源通信信道13并建立与选定目的地装置(例如,目的地装置16)的目的地通信信道15(104)。
在建立这些信道13、15之后或在建立这些信道13、15的同时,MEP模块46可确定一个或一个以上数据集合82、84、86以及来自简档48中的一者或一者以上的数据,其每一者与经格式化的多媒体内容78A的到目的地装置16的递送有关(106)。即,标头数据80可包含与经由源通信信道13所接收的多媒体内容有关的数据,其指示(例如)多媒体内容的既定应用且进而影响此所接收的多媒体内容的递送。信道数据82可描述目的地通信信道15的特性,且进而影响此内容的经由目的地信道15的递送或与此内容的经由目的地信道15的递送有关。资源数据84可包含描述移动装置12内的资源利用的数据,且进而影响移动装置12的递送所接收内容的能力或与移动装置12的递送所接收内容的能力有关。从简档48中的一者或一者以上提取的数据也可影响递送或与递送有关,因为这可指示可由目的地装置16接受的格式。
基于这一个或一个以上数据集合82、84、86及从一个或一个以上简档48中提取的数据集合,MEP模块46可确定桥接器配置参数64B以便优化多媒体内容到目的地装置16的递送,如上文所描述(108)。MEP模块46可接下来与视频编解码器38、后处理器单元72A及预处理器单元72B以及编辑器单元74中的一者或一者以上介接,以使用桥接器配置参数64B配置较高层桥接器36B,如上文所描述(110)。常常,MEP模块46经由由这些组件中的每一者所呈现的API而与这些组件介接。
经由源通信信道13,无线调制解调器40中的建立源通信信道13的一个调制解调器(例如,源调制解调器40A)可从源应用程序16接收根据第一格式编码的经格式化的多媒体内容,且将此内容作为经格式化的多媒体内容78A转发到控制单元50,如上文所描述(112)。值得注意的是,所述数据集合中的一些数据集合(例如,标头数据80)可从此所接收的多媒体内容78A中提取,且因此,如图4中所示的步骤不应被解释为用于本发明中所阐述的技术的每一实例的连续步骤。而是,所述步骤可以与本发明中所描述的各种方面一致的任何可构想的次序发生。因此,所述技术不应限于相对于图4A所描述的实例。
配置于控制单元50内的较高层桥接器36B可接收经格式化的多媒体内容78A,且将经格式化的多媒体内容78A从第一格式转换为第二不同格式,如上文所描述(114)。一旦经转换,较高层桥接器36B便可将此经转换的多媒体内容作为经格式化的多媒体内容78B输出到调制解调器40N,调制解调器40N可接着将此经转换的多媒体内容经由目的地通信信道15转发到目的地装置16(116)。以此方式,所述技术可促进从源装置或应用程序所接收的根据第一格式编码的多媒体内容到不支持第一格式但支持第二格式的目的地装置或应用程序的实时及/或具功率效益的传送。
虽然描述为配置多媒体桥接器36一次且接着执行多媒体内容从第一格式到第二格式的转换,但MMS 34可连续地定义及重新定义新与旧桥接器配置参数64两者。在此方面,MMS 34可实时监视转换且自适应地调整桥接器配置参数,以便动态地优化多媒体桥接器36以适于特定上下文(例如,应用程序、信道、内容编码、装置资源利用及与提供实时桥接器相关联的其它变量)。因此,所述技术不应限于本发明中所提供的实例。
图5为说明实施本发明中所描述的技术的移动装置118的示范性实施方案的框图。如图5的实例中所示,移动装置118包括调制解调器处理器120及媒体处理器122。调制解调器处理器120可包含共同地实施调制解调器124及调制解调器控制器126的一个或一个以上处理器或协处理器。调制解调器124可包含多个调制解调器124A到124N,而调制解调器控制器126可包含多个输送单元128A到128N(“输送单元128”)。调制解调器124中的一者可以图5所示的方式耦合到输送单元128中的相应一者。在经组合的情况下,这些经耦合的调制解调器124及输送单元128中的每一者可包含在图1、图2A及图2B中经展示为调制解调器40的物体。因此,调制解调器处理器120可表示实施多个调制解调器的一个或一个以上处理器。
媒体处理器122可实施可大体上类似于MMS 34的MMS 130。MMS 130(类似于MMS 34)包括LMP模块132(“LMP 132”)及MEP模块134(“MEP 134”)。MEP 134进一步包括类似于简档48的多个简档136A到136N(“简档136”)。媒体处理器122还可包括多媒体控制器138(“MM控制器138”)、应用程序处理单元140及多媒体硬件142(“MM硬件142”)。
多媒体控制器138可向MM硬件142提供一个或一个以上接口(例如,API)。多媒体控制器138可(例如)包括语音编码器或“声码器”单元144、音频信号单元146、视频信号单元148以及向各种多媒体硬件142提供接口的额外单元。多媒体控制器138通常包括提供多媒体内容的高等级处理且与较低层多媒体硬件142介接的一个或一个以上数字信号处理器(DSP)。应用程序处理单元140可包含实施或以其它方式表示后处理器/预处理器(例如,图2A的后处理器单元/预处理器单元72A)及编辑器单元(例如,编辑器单元74)的一个或一个以上处理单元。多媒体硬件142可包含经设计以提供许多多媒体操作的专用硬件。多媒体硬件142可(例如)包含音频编码器硬件150(“音频编码器150”)、视频编解码器硬件152(“视频编解码器152”)、图像编解码器硬件154(“图像编解码器154”)、图形处理单元156(“GPU 156”)及显示单元硬件158(“显示单元158”),以及用于对音频、视频、图像、语音或其它形式或类型的多媒体内容进行编码或解码的任何其它类型或形式的多媒体硬件。
根据本发明中所描述的技术的各种方面,LMP 132可与调制解调器处理器120(且更明确地说,调制解调器处理器120的调制解调器控制器126)通信。LMP 132可包括API或其它接口(“未在图5中展示”),通过其与调制解调器控制器126通信以收集与源信道及目的地信道有关的数据(例如,图2A的源信道数据66及目的地信道数据62)。LMP 132可利用此接口以接着至少基于目的地信道数据经由调制解调器控制器126配置调制解调器124中的一者或一者以上。通过如此配置调制解调器124中的这一者或一者以上,LMP 132可配置较低层桥接器(例如,较低层桥接器36A),如上文所描述。
MEP 134可确定上文所描述的数据集合(包括从简档136提取的数据集合),且确定桥接器配置参数(例如,图2B的桥接器配置参数36B)。简档136及之前所描述的简档48可包含列出装置特性及/或特定多媒体应用或生态系统的简档。作为说明,简档136A可包含定义无线显示器或WD的标准化及/或(在一些例子中)制造商特定特性的WD简档。实例制造商特定特性可包括分辨率定标器参数及显示器参数,例如色域、对比度、色深及二维能力对三维能力(或立体能力)。简档136B可包含定义广泛使用的社会网络的特性的社会网络简档。简档136C可包含定义媒体捕获装置(例如,摄录像机)的标准化及/或(在一些例子中)制造商特定特性的媒体捕获装置简档。简档136D可包含定义个人媒体播放器或PMP装置(例如,MP3播放器)的标准化及/或(在一些例子中)制造商特定特性的PMP简档。简档136N可包含定义游戏装置(例如,手持式游戏装置)的标准化及/或(在一些例子中)制造商特定特性的游戏简档。
MEP 134可接着基于上文所描述的一个或一个以上数据集合确定除由LMP 132确定的那些桥接器配置参数之外的桥接器配置参数。MEP 134可调用多媒体控制器138中的一者或一者以上以用经确定的桥接器配置参数配置MM硬件142。MEP 134还可将桥接器配置参数中的一者或一者以上加载到MM控制器138中,且另外,可与应用程序处理单元140介接以使用桥接器配置参数以上文所描述的方式配置应用程序处理单元140及/或基础多媒体硬件142。以此方式,MEP 134可配置移动装置118的控制单元(例如,媒体处理器122)内的较高层桥接器。
图6为说明其中MMS 162实施本发明中所描述的技术以将呈第一示范性格式的媒体转换为第二示范性格式的系统160的概念图的框图。在图6的实例中,起源或源装置164及目的地或目标装置166按功能性经分段成OSI模型的三层。这三层为(从上到下)应用层、输送层及数据链路层。在起源装置164内的应用层中执行的是起源应用程序168。起源应用程序168可实施存储多媒体的多媒体应用,且这在图6中由在起源装置164上方的“经存储的媒体”标签描绘。在目标装置166内的应用层中执行的是目标应用程序170。目标应用程序可实施对多媒体内容进行串流的多媒体应用,且这在图6中由在目标装置166上方的“串流媒体”标签描绘。
分别在起源装置164及目标装置166内的起源应用程序168及目标应用程序170下方的分别是视频及音频解码器及编码器。这些解码器及编码器可分别处理来自起源应用程序168及目标应用程序170的信息,以促进起源装置164及目标装置166中的每一者专用于的存储及串流应用。在此方面,起源装置164及目标装置166可表示各自提供专用或固定功能或操作集合的专用多媒体装置。起源装置164可(例如)包含存储多媒体的摄录像机或数字媒体播放器。目标装置166可包含用于对多媒体进行串流的专用装置,例如卫星无线电装置、无线电视及IP语音(VoIP)装置或电话。
关于输送层,起源装置164支持上文所描述的MP4文件格式,而目标装置166支持RTP、UDP及IP输送。在此实例中,起源装置164支持与由目标装置166支持的输送不重叠的不同输送集合。因此,起源装置164可被视为与目标装置166不同的多媒体生态系统的一部分。在输送层下方的是数据链路层。虽然相对于此数据链路层未明确指定调制解调器的类型,但起源装置164及目标装置166中的每一者可同样支持或以其它方式包括不同类型的调制解调器,从而进一步区分这些装置164、166所属的两个全异多媒体生态系统。
如上文所描述,MMS 162可提供驻留于全异多媒体生态系统中的这两个装置之间的多媒体桥接器。MMS 162可包括MEP 172,其执行上文所描述的操作以构造(在相对于图6所展示的实例中)桥接不同输送层格式的较高层桥接器。MMS 162还可包括LMP174,其执行上文所描述的操作以构造(在图6所示的实例中)桥接不同数据链路层协议的较低层桥接器。较高层桥接器因此相对于OSI模型的层来说“高”于较低层桥接器。虽然相对于OSI模型的输送及数据链路层来描述,但所述技术可相对于OSI模型的任何两个或两个以上层来实施。
图7为说明根据OSI模型的协议层来布置的实例MMS的功能的框图。如图7的实例的左侧所示,将OSI模型的七个层列为层176A到176G(“层176”)。在图7的实例的右侧,实施MMS的移动装置的功能经展示为划分成层176中的相应一者。
层176A包含七个层中的最低层且被称作物理层176A。通常,驻留于物理层176A中的操作包括为与通信媒体介接作准备的调制及信道译码。层176B直接在层176A上方且被称作数据链路层176B。为了遵守数据链路层176B,通常执行用以处置媒体接入且实施FEC的操作。层176C在OSI模型中直接在层176B上方且被称作网络层176C。为了遵守网络层176C,通常执行用以实现或以其它方式促进路由、转发、寻址、网际互连、错误处置、拥挤控制及包定序的操作。在层176C上方的是层176D,其可被称作输送层176D。
输送层176D内所包括的操作包含透明数据传送(例如,对层176D上方的操作透明)以及端到端错误恢复及流动控制。在层176D上方的是层176E,其可被称作会话层176E。会话层176E可包括用以实现或以其它方式促进连接协调的操作。层176F在OSI模型中在层176E上方,其中层176F可被称作呈现或语法层176F。语法层176F可包括用以实现或以其它方式促进加密、同步以及译码及解码的操作。在层176F上方可驻留最高层(层176G),其可被称作应用层176G。在应用层176G内可驻留应用程序。
关于这些层176,在这些层的右侧展示各种操作或功能。这些功能可对应于由根据本发明中所描述的技术实施MMS的移动装置(例如,图1到图2的移动装置12及/或图5的移动装置118)执行的功能。为了说明,在物理层176A内可驻留通常由各种广播调谐器、无线接入网络(WAN)接口、无线局域网络(WLAN)接口、无线个人局域网络(WPAN)接口及外围接口执行的操作。在数据链路层176B内可驻留由广播标准、WAN接口、WLAN接口及WPAN接口执行的功能。在网络层176C内可驻留由因特网协议(IP)、MPEG-2输送流(TS)的部分及串流协议(包括实时传送协议(RTP)控制协议(RTCP)及实时串流协议(RTSP))执行的功能。在层176D内可驻留由RTP/UDP、MPEG-2TS的部分及广播输送协议(包括仅前向链路(FLO)输送协议(其为非MPEG-2输送协议))执行的功能。下文相对于由MMS实施的功能来描述会话层176E与语法层176F两者内的功能。在应用层176G内驻留由多个应用程序(例如,平台软件、web服务及因特网工具、内容管理、用户接口及应用程序编程者接口(API))执行的功能。
值得注意的是,MMS功能由图7所示的虚线框表示为协议桥接器及合作式QoS功能178A(“MMS功能178A”)。额外MMS功能也在图7中经展示为也由虚线框表示的MMS功能178B到178D。MMS功能178A横跨层176B到176D及178F,且可表示由根据本发明中所描述的技术实施MEP与LMP两者的MMS执行的功能。如上文所解释,所述技术不应限于此实例,因此MMS可实施MEP及LMP中的仅一者。
MMS功能178A包括驻留于数据链路层176B中的功能(例如,WPAN功能)、网络层176C中的功能(例如,上层协议的允入控制及带宽保留功能)、输送层176D中的功能(例如,输送辅助多层错误管理功能)及语法层176F中的功能(例如,多媒体编解码器的速率控制/调适、错误隐蔽及数字权利管理(DRM)功能)。MMS功能178B包括通常由web/因特网服务器执行的功能。MMS功能178C可包括通常为促进机器到机器通信所需要的功能,例如加密、授权及验证。MMS功能178D可包括涉及装置管理的功能。
MMS(例如,图6的MMS 162)可实施这些各种功能以提供协议桥接器与合作式QoS以促进多媒体生态系统间通信。MMS 162可在这些各种层内操作以提供内聚桥接器,其以上文所描述的方式横跨层176以便优化多媒体内容在多媒体生态系统之间的递送。如上文所描述,此优化可涉及针对实现多媒体内容在全异多媒体生态系统的装置之间的有效实时传送的优化。另外或替代地,再次如上文所描述,此优化可涉及针对装置资源(例如,可用功率)的有效利用的优化。此功率有效优化可相对于实施MMS的移动装置来说尤其有益。
图8为说明其中移动装置182根据本发明中所描述的技术来实施MMS 184的实例系统180的框图。通过实施MMS 184,移动装置182可实际上充当用以促进多媒体内容在第一装置集合186A到186D中的一者或一者以上与第二装置集合186E到186G中的一者或一者以上之间的通信的多媒体路由器。MMS 184还可促进与连接性模块188及传感器模块190以及公用网络192(例如,因特网)的通信。
图8的实例表示系统180的概念图,其中这些装置186A到186D经展示成经由互连性模块194耦合到装置186E到186G、连接性模块188、传感器模块190及公用网络192。这是概念表示,因为移动装置182可提供互连性模块194,MMS 184可根据本文中所描述的技术配置所述互连性模块194以提供经由概念互连性模块194的优化形式的互连性。
MMS 184可提供在第一装置集合186A到186D中的一者或一者以上与第二装置集合186E到186G中的一者或一者以上之间的互连性。装置186A到186G(“装置186”)可分别包含便携式装置、计算装置、游戏装置、独立接收器/解码器(IRD)、存储装置、显示装置及外围装置。存储装置186E及外围装置186G中的一者或一者以上可包含无线对接模块,其为按照惯例借助于有线接口接入的装置提供无线接口(通过其与这些装置186E、186G交互)。显示装置186F还可包含无线适配器,通过其提供无线而非有线接口(通过所述接口与其它装置介接)。
连接性模块188可包含提供两个装置之间的连接性的模块,且因此表示提供在互连性模块194与图8中未展示的另一装置之间的连接性的模块。传感器模块190可表示包括传感器的模块,例如摄录像机及/或麦克风(作为两个实例)。在任何情况下,MMS 184可提供互连性模块194以借助于有线接口或无线接口以上文所描述的方式将第一及第二装置集合186中的每一者中的任何一者或一者以上互连。
举例来说,MMS 184可经由互连性模块194发现装置186、连接性模块188及传感器模块190中的每一者。MMS 184可进一步经配置以检测公用网络192,且提示移动装置182的用户或其他操作者以获得公用网络192内的多媒体服务器的地址(例如,呈统一资源定位符(URL)或HTTP地址的形式的web或因特网地址)。或者,MMS 184可经预配置以接入公用网络192内的选定多媒体服务器,例如视频或数据服务器。在任何情况下,移动装置182可呈现用户接口,用户可与所述用户接口交互以从列表选择这些装置中的两者或两者以上。
假定用户选择计算装置186B中的一者及显示装置186F中的一者,则MMS 184可在这两个装置之间建立上文所描述的多媒体桥接器,且优化此桥接器以便促进特定应用(例如,实时串流)并减少功率消耗。在此方面,MMS 184可无缝地配置桥接器,因为用户不需要与MMS 184进一步交互来配置桥接器。然而,用户可继续与移动装置182交互以选择源内容且以其它方式提示计算装置186B中的所述一者开始发射多媒体内容。
在一些例子中,多媒体内容可包含由计算装置186B中的选定一者显示的当前接口。MMS184可配置所述多媒体桥接器以有效地转换此接口以用于在显示装置186F中的选定一者上显示。此外,MMS 184可配置桥接器以执行此转换以改进显示装置(例如,高清晰度电视(HDTV))上的此接口的视觉呈现。
在此方面,MMS 184可配置多媒体桥接器以“优化”在第一多媒体生态系统中所产生的接口在不同的第二多媒体生态系统的装置上的显示。举例来说,MMS 184可以上文所描述的方式选择桥接器配置参数,以在给定源及目的地装置及/或应用程序的类型及/或特性、无线信道的特性及媒体所既定用于的应用的类型的情况下提供最佳转换。在此意义上,MMS 184可“优化”桥接器。MMS 184还可配置多媒体桥接器以在给定当前经确定的信道特性的情况下以有效方式转发此接口(例如,用户接口)。在两个方面中,MMS 184可通过改进来自不同多媒体生态系统的装置上的接口的显示且以可能减少错误的方式优化显示的递送来改进享受质量。
此外,MMS 184可使移动装置182能够以多种交互式方式提供三个或三个以上装置之间的复杂桥接。如上文所描述,用户可经由用户接口选择这三个或三个以上装置,且在选择三个或三个以上装置之后,MMS 184可即刻经由所述用户接口提示用户指定用户所要的这些装置的交互。替代地或结合以上主动选择,MMS 184可在给定内容的类型或特定装置的其它特性的情况下借助于上下文或间接地确定所述交互。
将上文的实例进行扩展,其中计算装置186B中的一者提供用于在显示装置186F中的一者上显示的接口,假定用户还又选择便携式装置186A中的一者。假定用户作出此选择,则MMS 184可经由用户接口提示用户指定交互或以其它方式间接确定交互的类型。
举例来说,如果便携式装置186A中的选定一者包含MP3播放器,则MMS 184可配置桥接器以将来自MP3播放器的音频多媒体内容与来自计算装置186B中的选定一者的接口多媒体内容组合。在此例子中,MMS 184可不提示用户以获得交互的类型,因为MMS 184可从源内容的差异(例如,一者为音频且另一者为视频)认识到交互的类型。MMS 184可将这些一起编码于一个流中或将这些单独作为两个或两个以上流来发送。单独或一起编码的此决策可部分地取决于选定目标或源装置及/或应用程序(例如,显示装置186F中的选定一者),MMS 184可针对其维持简档。实际上,MMS 184可将音频多媒体内容分层于接口多媒体内容上方。
作为另一实例,然而,如果便携式装置186A中的选定一者包含不同于仅重放音频的MP3播放器的能够重放视频及音频的个人媒体播放器,且用户选择视频多媒体内容以桥接到显示装置186F中的选定一者,则MMS 184可提示用户以获得交互的类型。即,MMS 184可提示用户以获得如何在单一显示装置上显示这些多媒体内容两者。在一个方面中,MMS 184可提供显示选项的列表,例如在由显示装置186F中的选定一者支持的情况下的画中画(PIP)、使用户能够非常像在常规计算机上在当前执行的程序之间改变那样在两者之间进行交换的“二选一(either-or)”显示选项或任何其它显示选项(例如,水平或垂直分割屏幕及上覆/下伏)。
在另一实例中,用户可选择两个或两个以上显示装置186F作为目标且选择计算装置186B中的单一一者作为来源。MMS 184可接着向用户提示关于如何在显示装置186F中的两个或两个以上选定显示装置上显示源多媒体内容。MMS 184可(例如)将内容多播到显示装置186F中的两个或两个以上选定显示装置以用于源多媒体内容的同时显示。MMS 184可替代地在一个显示器上显示源内容的一半且在另一显示器上显示源内容的一半。在此例子中,MMS 184可优化每一半以用于在显示装置186F中的不同选定显示装置上显示。
虽然上文中描述众多实例以用于说明各种类型及形式的连接性,但所述技术不应限于这些实例中的任一者。而是,所述技术可使移动装置(例如,移动装置182)能够提供多媒体桥接器,通过其转换从一个或一个以上选定源多媒体装置及/或应用程序所接收的源内容,且将此经转换的源内容转发到一个或一个以上选定目的地或目标多媒体装置及/或应用程序。
此外,移动装置182可自身包含显示装置且(在一些方面中)作为外围装置。举例来说,移动装置182可接收源内容,且在转换此内容且将此内容转发到显示装置186F中的选定一者的同时,转换此源内容以用于在移动装置182上显示。移动装置182可接着经由触摸屏或其它接口从用户接收输入,且借助(作为一个实例)光标或其它位置识别符更新从源装置/应用程序所接收的内容两者。关于图2B的移动装置12,编辑器单元74可引入此识别符以产生经更新的多媒体内容。此经更新的多媒体内容可接着经转换且经转发到目的地装置/应用程序,其可接着呈现经更新的多媒体内容。这可使移动装置(例如,移动装置182)能够提供可接入接口,用户可借助所述可接入接口与正显示于具有繁复接口的装置(例如,显示装置186F)上的内容交互。
另外,由MMS 184建立的多媒体桥接器可将返回信道或其它通信会话提供到源装置/应用程序以与由用户进行的源装置/应用程序选择进行通信,或提供与源装置/应用程序的其它交互以更新、更改或改变当前正递送的源内容。这可在移动装置184向具有繁复接口的装置/应用程序提供接口的例子中尤其有用,因为MMS 184可提供充分起作用的接口(用户可通过其与源内容交互)。
举例来说,用户可经由公用网络及“端口”接入计算装置,或以其它方式将此接口多媒体内容经由移动装置182的MMS 184转发到此类型的有限接口显示装置。此接口多媒体内容可包含通常由操作系统产生的用户接口。MMS 184可以上文所描述的方式建立多媒体桥接器以经由显示装置(例如,显示装置186F中的一者)呈现此接口多媒体内容。MMS 184可并入在多媒体桥接器移动装置182内以使移动装置182能够作为接口(用户可通过所述接口与经由显示器所呈现的接口多媒体内容交互)。如上文所描述,MMS 184可配置桥接器以借助位置或定位识别符(例如,光标)更新接口多媒体内容。
用户还可选择接口的若干部分(例如,用户接口多媒体内容的桌面上的图标),于是MMS 184可使用返回信道通信将所述选择发射回到源装置/应用程序。响应于此选择,计算装置可更新源内容(其在此实例中包含接口多媒体内容),以(例如)通过响应于执行由图标表示的选定程序而更新接口多媒体内容来反映由用户进行的选择。在此意义上,MMS 184可配置桥接器以促进多媒体内容的转换及发射以及提供接口(借助所述接口在经由目标装置/应用程序显示时与此多媒体内容交互)。
虽然上文相对于源或提供者装置及目的地或目标装置来描述,但所述技术可在各种方面中实施,使得源装置及/或目的地装置各自包含实施本发明中所描述的技术的另一移动装置或其它装置。换句话说,实施所述技术的一个或一个以上装置(例如,包括MMS)可以每一MMS借以实施转换的一部分的方式以一对一或甚至一对多的形式链接在一起。
举例来说,包括于第一移动装置内的第一MMS可与源装置通信,于是第一MMS可接着与包括于第二移动装置内的第二MMS通信。此第二MMS可接着与目的地装置通信。关于第一MMS,第二移动装置可表示目的地装置,因此第一MMS可实施所述技术以在真正源装置与第二移动装置之间提供多媒体桥接器。关于第二MMS,第一MMS可表示源装置,因此第二MMS可实施所述技术以在第一移动装置与真正目的地装置之间提供多媒体桥接器。因此,上文对源及目的地装置的参考可不仅指代上文经描述为源及目的地装置的那些装置,而且指代实施本发明中所描述的技术的其它装置。
此形式的链接可实现多种益处。在一个例子中,参考以上实例,第一MMS及第二MMS可形成链以便将转换分成两个步骤,进而在资源利用方面共享负载。此外,如果这两个MMS中的一者驻留于移动装置内,而另一MMS驻留于固定装置内,则这些MMS可配置多媒体桥接器以便将转换的若干功率消耗部分卸载到MMS中的为固定的一者。
在另一例子中,再次参考以上实例,第一MMS及第二MMS可形成链以便实现MMS中的单一一者无法单独执行的转换。一个MMS可能不包括足以(例如)实时提供最佳转换的资源。然而,通过链接,这两个MMS可能够分割负载,且进而实现最佳转换。作为另一说明,第一MMS可能不支持特定格式,但第二MMS可支持此特定格式,而第二MMS可能不在范围内或不能够接入源装置或不支持源装置提供多媒体内容所用的格式。第一MMS可接着与第二MMS形成链以便提供多媒体桥接器以将多媒体内容转换为目的地装置所接受的格式。在此方面,MMS的链接可对提供转换且常常最佳转换为有益的。
虽然本文中贯穿本发明相对于源装置及目的地装置来描述,但所述技术可大体上(如上文所描述)适用于第一及第二应用程序。应用程序可包括源装置及目的地装置,以及提供源内容或消耗多媒体内容的以硬件或硬件与软件的组合来实施的任何其它应用程序。出于论述的目的,提供源内容的应用程序被称作源应用程序,且消耗源内容的应用程序被称作目的地应用程序。然而,这些术语不应被解释为限于如上文所主张的技术。
本文中所描述的技术可以硬件、软件、固件或其任何组合来实施。经描述为模块、单元或组件的任何特征可一起实施于集成逻辑装置中或单独实施为离散但可共同操作的逻辑装置。在一些情况下,各种特征可经实施为例如集成电路芯片或芯片组等集成电路装置。如果以软件实施,则所述技术可至少部分地由计算机可读媒体来实现,所述计算机可读媒体包含在经执行时致使处理器执行上文中所描述的方法中的一者或一者以上的指令。
计算机可读媒体可形成计算机程序产品的一部分,所述计算机程序产品可包括封装材料。计算机可读媒体可包含计算机数据存储媒体,例如随机存取存储器(RAM)、同步动态随机存取存储器(SDRAM)、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、电可擦除可编程只读存储器(EEPROM)、快闪存储器、磁性或光学数据存储媒体及其类似者。另外或替代地,所述技术可至少部分地由以指令或数据结构的形式携载或传送代码且可由计算机存取、读取及/或执行的计算机可读通信媒体来实现。
所述代码或指令可由一个或一个以上处理器执行,例如一个或一个以上DSP、通用微处理器、ASIC、现场可编程逻辑阵列(FPGA)或其它等效集成或离散逻辑电路。因此,如本文中所使用,术语“处理器”可指代前述结构或适于实施本文中所描述的技术的任何其它结构中的任一者。另外,在一些方面中,本文中所描述的功能性可提供于专用软件模块或硬件模块内。本发明还预期包括用以实施本发明中所描述的技术中的一者或一者以上的电路的多种集成电路装置中的任一者。所述电路可提供于单一集成电路芯片中或所谓的芯片组中的多个可共同操作的集成电路芯片中。所述集成电路装置可用于多种应用中,其中一些可包括用于无线通信装置(例如,移动电话手持机)中。
已描述了本发明的各种实例。这些及其它实例属于所附权利要求书的范围内。

Claims (31)

1.一种由移动装置执行的方法,其包含:
检测多个装置;
接收来自多个经检测的装置的源装置的选定;
接收来自多个经检测的装置的目的地装置的选定;
经由第一无线通信信道接收多媒体内容,该第一无线通信信道通过来自所述源装置的第一应用程序的一个或多个无线调制解调器被建立;
借助所述一个或多个无线调制解调器建立第二无线通信信道以用于实现针对所述目的地装置的第二应用程序的通信;
确定对应于与所述第二无线通信信道相关联的一个或多个特性的信道数据,其中确定所述信道数据包括确定经由所述第二无线通信信道转发所述多媒体内容所需的带宽等级;
基于所述信道数据配置所述无线调制解调器中的至少一者;
基于所述移动装置的资源数据将所接收的多媒体内容从第一格式转换为第二格式,其中所述资源数据包括剩余电池功率,剩余操作时间、存储器利用、存储装置利用和当前总功率消耗中的一个或多个;以及
借助所述无线调制解调器中的所述经配置的一者将所转换的多媒体内容转发到所述第二应用程序。
2.根据权利要求1所述的方法,其中转发所述所转换的多媒体内容包含借助所述无线调制解调器中的所述经配置的一者将所述所转换的多媒体内容大体上实时转发到所述第二应用程序。
3.根据权利要求1所述的方法,其中所述信道数据包含位错误比(BER)、包错误比(PER)、信噪比(SNR)及前向错误校正(FEC)强度中的一者或多者。
4.根据权利要求1所述的方法,
其中确定所述信道数据进一步包含确定在经由所述第二无线通信信道转发所转换的多媒体内容时的最大错误率,且
所述方法进一步包含基于所述信道数据确定提供所述经确定的带宽等级与所述经确定的错误率的配置参数,
其中配置所述无线调制解调器中的所述至少一者包括与所述无线调制解调器中的所述至少一者介接以根据所述配置参数配置所述无线调制解调器中的所述至少一者。
5.根据权利要求4所述的方法,
其中确定所述信道数据进一步包含在所述所转换的多媒体内容的所述转发期间动态地确定所述信道数据,
其中确定所述配置参数包含基于所述经动态确定的信道数据而动态地确定所述配置参数,且
其中与所述无线调制解调器中的所述至少一者介接包含与所述无线调制解调器中的所述至少一者介接以在所述所转换的多媒体内容的所述转发期间根据所述经动态确定的配置参数来配置所述无线调制解调器中的所述至少一者。
6.根据权利要求1所述的方法,
其中所述信道数据包含第一信道数据,且
其中所述方法进一步包含:
确定定义与所述第一无线通信信道相关联的另外一个或多个特性的第二信道数据,其中所述第二信道数据包含位错误比(BER)、信噪比(SNR)及前向错误校正(FEC)强度中的一者或多者;
确定经由所述第一无线通信信道接收所述多媒体内容所需的带宽;
确定在经由所述第一无线通信信道接收所述多媒体内容时可容许的错误率;
基于所述第二信道数据确定满足所述经确定的带宽与所述经确定的错误率的配置参数;及
与所述无线调制解调器中的至少一者介接以根据所述经确定的配置参数配置所述无线调制解调器中的所述至少一者。
7.根据权利要求6所述的方法,
其中确定所述第二信道数据包含在接收所述多媒体内容的同时动态地确定所述第二信道数据;
其中确定所述配置参数包含基于所述经动态确定的第二信道数据而动态地确定所述配置参数,且
其中与所述无线调制解调器中的所述至少一者介接包含与所述无线调制解调器中的所述至少一者介接以在接收所述多媒体内容的同时根据所述经动态确定的配置参数来配置所述无线调制解调器中的所述至少一者。
8.根据权利要求1所述的方法,
其中所述一个或多个无线调制解调器包括于移动装置内,且
其中配置所述无线调制解调器中的所述至少一者包含借助包括于所述移动装置内的多媒体管理系统(MMS)的链路管理协议(LMP)模块基于所述信道数据来配置所述无线调制解调器中的所述至少一者。
9.一种用于在装置之间传送多媒体内容的设备,其包含:
一个或多个无线调制解调器,其经由第一无线通信信道从源装置的第一应用程序接收多媒体内容,且建立第二无线通信信道以用于与目的地装置的第二应用程序通信;及
控制单元,其检测多个装置,接收来自多个经检测的装置的所述源装置的选定,接收来自多个经检测的装置的所述目的地装置的选定,确定对应于与所述第二无线通信信道相关联的一个或多个特性的信道数据,且基于所述信道数据配置所述无线调制解调器中的至少一者,以及基于所述设备的资源数据将所接收的多媒体内容从第一格式转换为第二格式,其中所述资源数据包括剩余电池功率,剩余操作时间、存储器利用、存储装置利用和当前总功率消耗中的一个或多个;
其中所述无线调制解调器中的所述经配置的至少一者将所转换的多媒体内容转发到所述第二应用程序,以及其中所述控制单元确定经由所述第二无线通信信道转发所转换的多媒体内容所需的带宽等级。
10.根据权利要求9所述的设备,其中所述无线调制解调器中的所述经配置的至少一者将所述所转换的多媒体内容大体上实时转发到所述第二应用程序。
11.根据权利要求9所述的设备,其中所述信道数据包含位错误比(BER)、信噪比(SNR)及前向错误校正(FEC)强度中的一者或多者。
12.根据权利要求9所述的设备,其中所述控制单元确定在经由所述第二无线通信信道转发所转换的多媒体内容时的最大错误率;基于所述信道数据确定提供所述经确定的带宽等级与所述经确定的错误率的配置参数;及与所述无线调制解调器中的所述至少一者介接以根据所述配置参数配置所述无线调制解调器中的所述至少一者。
13.根据权利要求12所述的设备,
其中所述控制单元在所述所转换的多媒体内容的所述转发期间动态地确定所述信道数据;基于所述经动态确定的信道数据而动态地确定所述配置参数;及与所述无线调制解调器中的所述至少一者介接以在所述所转换的多媒体内容的所述转发期间根据所述经动态确定的配置参数来配置所述无线调制解调器中的所述至少一者。
14.根据权利要求9所述的设备,
其中所述信道数据包含第一信道数据,且
其中所述控制单元进一步确定定义与所述第一无线通信信道相关联的另外一个或多个特性的第二信道数据,其中所述第二信道数据包含位错误比(BER)、信噪比(SNR)及前向错误校正(FEC)强度中的一者或多者;确定经由所述第一无线通信信道接收所述多媒体内容所需的带宽等级;确定在经由所述第一无线通信信道接收所述多媒体内容时可容许的错误率;基于所述第二信道数据确定提供所述经确定的带宽等级与所述经确定的错误率的配置参数;及与所述无线调制解调器中的至少一者介接以根据所述经确定的配置参数配置所述无线调制解调器中的所述至少一者。
15.根据权利要求14所述的设备,
其中所述控制单元在接收所述多媒体内容的同时动态地确定所述第二信道数据;基于所述经动态确定的第二信道数据而动态地确定所述配置参数;及与所述无线调制解调器中的所述至少一者介接以在接收所述多媒体内容的同时根据所述经动态确定的配置参数来配置所述无线调制解调器中的所述至少一者。
16.根据权利要求9所述的设备,
其中所述设备包含移动装置,且
其中所述控制单元包括多媒体管理系统(MMS),所述多媒体管理系统(MMS)包含基于所述信道数据配置所述无线调制解调器中的所述至少一者的链路管理协议(LMP)模块。
17.一种用于在装置之间传送多媒体内容的设备,其包含:
用于检测多个装置的装置;
用于接收来自多个经检测的装置的源装置的选定的装置;
用于接收来自多个经检测的装置的目的地装置的选定的装置;
用于经由第一无线通信信道从所述源装置的第一应用程序接收多媒体内容且建立第二无线通信信道以用于与所述目的地装置的第二应用程序通信的通信装置;
用于确定对应于与所述第二无线通信信道相关联的一个或多个特性的信道数据的装置,其中用于确定信道数据的装置进一步确定经由所述第二无线通信信道转发所述多媒体内容所需的带宽等级;
用于基于所述信道数据配置所述通信装置的装置;及
用于基于所述设备的资源数据将所接收的多媒体内容从第一格式转换为第二格式的装置,其中所述资源数据包括剩余电池功率,剩余操作时间、存储器利用、存储装置利用和当前总功率消耗中的一个或多个;
其中所述经配置的通信装置进一步包含用于将所转换的多媒体内容转发到所述第二应用程序的装置。
18.根据权利要求17所述的设备,其中所述用于转发的装置包含用于将所述所转换的多媒体内容大体上实时转发到所述第二应用程序的装置。
19.根据权利要求17所述的设备,其中所述信道数据包含位错误比(BER)、信噪比(SNR)及前向错误校正(FEC)强度中的一者或多者。
20.根据权利要求17所述的设备,
其中所述用于确定信道数据的装置包含:
用于确定在经由所述第二无线通信信道转发所转换的多媒体内容时的最大错误率的装置,
其中所述设备进一步包含:
用于基于所述信道数据确定提供所述经确定的带宽等级与所述经确定的错误率的配置参数的装置;及
用于与所述通信装置介接以根据所述配置参数配置所述通信装置的装置。
21.根据权利要求20所述的设备,
其中所述用于确定所述信道数据的装置包含用于在所述所转换的多媒体内容的所述转发期间动态地确定所述信道数据的装置,
其中所述用于确定配置参数的装置包含用于基于所述经动态确定的信道数据而动态地确定所述配置参数的装置,且
其中所述用于介接的装置包含用于与所述通信装置介接以在所述所转换的多媒体内容的所述转发期间根据所述经动态确定的配置参数来配置所述通信装置的装置。
22.根据权利要求17所述的设备,
其中所述信道数据包含第一信道数据,且
其中所述设备进一步包含:
用于确定定义与所述第一无线通信信道相关联的另外一个或多个特性的第二信道数据的装置,其中所述第二信道数据包含位错误比(BER)、信噪比(SNR)及前向错误校正(FEC)强度中的一者或多者;
用于确定经由所述第一无线通信信道接收所述多媒体内容所需的带宽等级的装置;
用于确定在经由所述第一无线通信信道接收所述多媒体内容时可容许的错误率的装置;
用于基于所述第二信道数据确定提供所述经确定的带宽等级与所述经确定的错误率的配置参数的装置;及
用于与所述通信装置介接以根据所述经确定的配置参数配置所述通信装置的装置。
23.根据权利要求22所述的设备,
其中所述用于确定所述第二信道数据的装置包含用于在接收所述多媒体内容的同时动态地确定所述第二信道数据的装置;
其中所述用于确定所述配置参数的装置包含用于基于所述经动态确定的第二信道数据而动态地确定所述配置参数的装置,且
其中所述用于介接的装置包含用于与所述通信装置介接以在接收所述多媒体内容的同时根据所述经动态确定的配置参数来配置所述通信装置的装置。
24.根据权利要求17所述的设备,
其中所述设备包含移动装置,
其中所述通信装置包含一个或多个无线调制解调器,且
其中所述用于确定的装置及所述用于配置的装置包括包含多媒体管理系统(MMS)的控制单元,其中所述MMS包括基于所述信道数据配置所述无线调制解调器中的至少一者的链路管理协议(LMP)模块。
25.一种由移动装置执行的方法,其包含:
检测多个装置;
接收来自多个经检测的装置的源装置的选定;
接收来自多个经检测的装置的目的地装置的选定;
借助一个或多个无线调制解调器经由第一无线通信信道从所述源装置的第一应用程序接收呈第一格式的多媒体内容;
借助所述一个或多个无线调制解调器确定对应于与经建立以与所述目的地装置的第二应用程序通信的第二无线通信信道相关联的特性集合的信道数据,其中确定所述信道数据包括确定经由所述第二无线通信信道转发所述多媒体内容所需的带宽等级;
基于所述信道数据配置所述一个或多个无线调制解调器以提供多媒体桥接器的较低层级;及
配置控制单元以提供所述多媒体桥接器的较高层以基于所述移动装置的资源数据将所述多媒体内容从所述第一格式转换为由所述第二应用程序实施的第二格式,其中所述资源数据包括剩余电池功率,剩余操作时间、存储器利用、存储装置利用和当前总功率消耗中的一个或多个。
26.根据权利要求25所述的方法,其进一步包含借助所述一个或多个无线调制解调器建立所述第二无线通信信道以用于与所述第二应用程序通信。
27.根据权利要求25所述的方法,其进一步包含:
在接收呈所述第一格式的所述多媒体内容的同时,借助所述控制单元的所述经配置的多媒体桥接器将所述多媒体内容从所述第一格式转换为所述第二格式;及
借助所述经配置的一个或多个无线调制解调器将所述经转换的多媒体内容转发到所述第二应用程序。
28.一种用于在装置之间传送多媒体内容的设备,其包含:
一个或多个无线调制解调器,其经由第一无线通信信道从源装置的第一应用程序接收呈第一格式的多媒体内容;及
包含多媒体管理系统(MMS)的控制单元,其中所述MMS包括链路管理协议(LMP)模块及多媒体交换协议(MEP)模块,
其中所述LMP模块:
检测多个装置;
接收来自多个经检测的装置的所述源装置的选定;
接收来自多个经检测的装置的目的地装置的选定;
确定定义与经建立以与所述目的地装置的第二应用程序通信的第二无线通信信道相关联的特性集合的信道数据,且基于所述信道数据配置所述一个或多个无线调制解调器中的至少一者以提供多媒体桥接器的较低层级,其中确定所述信道数据包括确定经由所述第二无线通信信道转发所述多媒体内容所需的带宽等级,且
其中所述MEP模块配置所述控制单元以提供所述多媒体桥接器的较高层以基于所述设备的资源数据将所述多媒体内容从所述第一格式转换为由所述第二应用程序实施的第二格式,其中所述资源数据包括剩余电池功率,剩余操作时间、存储器利用、存储装置利用和当前总功率消耗中的一个或多个。
29.根据权利要求28所述的设备,
其中所述经配置的多媒体桥接器在接收呈所述第一格式的所述多媒体内容的同时将所述多媒体内容从所述第一格式转换为所述第二格式,且
其中所述一个或多个无线调制解调器中的所述经配置的至少一者将所述经转换的多媒体内容转发到所述第二应用程序。
30.根据权利要求28所述的设备,
其中所述控制单元包括编码器/解码器(编解码器)模块、内容编辑器模块、预处理器模块及后处理器模块,且
其中所述MEP模块配置所述控制单元的所述编码器/解码器(编解码器)模块、所述内容编辑器模块、所述预处理器模块及所述后处理器模块中的一者或多者,以提供所述第一格式与第二格式之间的所述多媒体桥接器。
31.一种用于在装置之间传送多媒体内容的设备,其包含:
用于检测多个装置的装置;
用于接收来自多个经检测的装置的源装置的选定的装置;
用于接收来自多个经检测的装置的目的地装置的选定的装置;
用于经由第一无线通信信道从所述源装置的第一应用程序接收呈第一格式的多媒体内容的通信装置;
用于确定定义与经建立以与所述目的地装置的第二应用程序通信的第二无线通信信道相关联的特性集合的信道数据的装置,其中用于确定所述信道数据的装置进一步确定经由所述第二无线通信信道转发所述多媒体内容所需的带宽等级;
用于基于所述信道数据配置所述通信装置以提供多媒体桥接器的较低层级的装置;及
用于配置所述多媒体桥接器的较高层以基于所述设备的资源数据将所述多媒体内容从所述第一格式转换为由所述第二应用程序实施的第二格式的装置,其中所述资源数据包括剩余电池功率,剩余操作时间、存储器利用、存储装置利用和当前总功率消耗中的一个或多个。
CN201080005631.2A 2009-01-29 2010-01-29 用于多媒体内容移动的链路管理 Active CN102292958B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US14815209P 2009-01-29 2009-01-29
US61/148,152 2009-01-29
US12/688,992 2010-01-18
US12/688,992 US8774048B2 (en) 2009-01-29 2010-01-18 Link management for multimedia content mobility
PCT/US2010/022596 WO2010088526A1 (en) 2009-01-29 2010-01-29 Link management for multimedia content mobility

Publications (2)

Publication Number Publication Date
CN102292958A CN102292958A (zh) 2011-12-21
CN102292958B true CN102292958B (zh) 2015-07-01

Family

ID=42354095

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201080005625.7A Active CN102292957B (zh) 2009-01-29 2010-01-29 用于无缝多媒体内容移动的多媒体管理系统
CN201080005631.2A Active CN102292958B (zh) 2009-01-29 2010-01-29 用于多媒体内容移动的链路管理

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201080005625.7A Active CN102292957B (zh) 2009-01-29 2010-01-29 用于无缝多媒体内容移动的多媒体管理系统

Country Status (10)

Country Link
US (2) US8774048B2 (zh)
EP (3) EP3618397B1 (zh)
JP (2) JP5448106B2 (zh)
KR (2) KR101345003B1 (zh)
CN (2) CN102292957B (zh)
BR (1) BRPI1007438A2 (zh)
ES (1) ES2796527T3 (zh)
HU (1) HUE048760T2 (zh)
TW (2) TW201116009A (zh)
WO (2) WO2010088530A1 (zh)

Families Citing this family (59)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9154942B2 (en) * 2008-11-26 2015-10-06 Free Stream Media Corp. Zero configuration communication between a browser and a networked media device
US8774048B2 (en) * 2009-01-29 2014-07-08 Qualcomm Incorporated Link management for multimedia content mobility
US9350799B2 (en) 2009-10-03 2016-05-24 Frank C. Wang Enhanced content continuation system and method
US8412798B1 (en) 2009-10-03 2013-04-02 Frank C. Wang Content delivery system and method
US8938497B1 (en) * 2009-10-03 2015-01-20 Frank C. Wang Content delivery system and method spanning multiple data processing systems
US20110138018A1 (en) * 2009-12-04 2011-06-09 Qualcomm Incorporated Mobile media server
US8799362B2 (en) * 2010-03-09 2014-08-05 Avistar Communications Corporation Scalable high-performance interactive real-time media architectures for virtual desktop environments
US8755444B2 (en) * 2010-08-06 2014-06-17 Qualcomm Incorporated Two-stage entropy decoding
US9172979B2 (en) 2010-08-12 2015-10-27 Net Power And Light, Inc. Experience or “sentio” codecs, and methods and systems for improving QoE and encoding based on QoE experiences
WO2012021173A2 (en) * 2010-08-12 2012-02-16 Net Power And Light Inc. System architecture and methods for experiential computing
WO2012021902A2 (en) 2010-08-13 2012-02-16 Net Power And Light Inc. Methods and systems for interaction through gestures
US20120044371A1 (en) * 2010-08-18 2012-02-23 King Kevin J Wireless camera system bridging methods and apparatus
US8943380B2 (en) * 2010-11-29 2015-01-27 Empire Technology Development Llc Forward error correction for a data flow associated with a connectionless packet network service
JP2014509120A (ja) * 2011-01-21 2014-04-10 トムソン ライセンシング コンテンツプロファイルを用いる高度化された遠隔トランスコーディングのためのシステム及び方法
US8787381B2 (en) * 2011-06-08 2014-07-22 Broadcom Corporation Quality of service, battery lifetime, and latency in wireless communication devices
TWI492148B (zh) * 2011-07-08 2015-07-11 Tpv Display Technology Xiamen Wireless Playback System and Its Method
US9351028B2 (en) 2011-07-14 2016-05-24 Qualcomm Incorporated Wireless 3D streaming server
US11974295B2 (en) 2011-07-25 2024-04-30 Nec Corporation Communication system
GB2493154A (en) * 2011-07-25 2013-01-30 Nec Corp Communicating control channel reference signal patterns in the control region of a sub-frame in a cellular communication system
TWI449430B (zh) * 2011-08-01 2014-08-11 Hides Inc High - bandwidth audio and video transmission processing system
US9053346B2 (en) * 2011-12-28 2015-06-09 Intel Corporation Low-overhead cryptographic method and apparatus for providing memory confidentiality, integrity and replay protection
US9819717B2 (en) * 2011-12-28 2017-11-14 Intel Corporation Video adaptation for content-aware wireless streaming
KR101914635B1 (ko) * 2012-03-16 2018-12-28 삼성전자주식회사 컨텐츠 공유 시스템에서 소스 기기를 결정하기 위한 장치 및 방법
KR102001215B1 (ko) 2012-07-20 2019-07-17 삼성전자주식회사 컨텐트 공유 방법 및 시스템, 그 기기 및 기록 매체
US9344720B2 (en) * 2012-08-07 2016-05-17 Apple Inc. Entropy coding techniques and protocol to support parallel processing with low latency
TR201802287T4 (tr) 2012-10-11 2018-03-21 Koninklijke Philips Nv Birden fazla istemci için bir dinamik çevrede kablosuz yerleştirme için ana sistem cihazı, istemci cihazı ve yöntem.
US20140105273A1 (en) * 2012-10-15 2014-04-17 Broadcom Corporation Adaptive power management within media delivery system
FR3000336A1 (fr) * 2012-12-20 2014-06-27 France Telecom Mecanisme de gestion d'une session de communication
US9907114B2 (en) 2013-03-14 2018-02-27 Qualcomm Incorporated Devices, systems, and methods implementing a front end partition of a wireless modem
US20140300758A1 (en) * 2013-04-04 2014-10-09 Bao Tran Video processing systems and methods
US9736055B2 (en) 2013-05-31 2017-08-15 Metanoia Communications Inc. Inter-medium bridging with inter-domain routing and multi-medium domain coordination
US9191309B2 (en) * 2013-05-31 2015-11-17 Metanoia Communications Inc. Inter-medium bridging with inter-domain routing and multi-medium domain coordination
US9043850B2 (en) 2013-06-17 2015-05-26 Spotify Ab System and method for switching between media streams while providing a seamless user experience
US9465763B2 (en) * 2013-06-17 2016-10-11 Altera Corporation Bridge circuitry for communications with dynamically reconfigurable circuits
US9654531B2 (en) 2013-08-01 2017-05-16 Spotify Ab System and method for transitioning between receiving different compressed media streams
US9716733B2 (en) * 2013-09-23 2017-07-25 Spotify Ab System and method for reusing file portions between different file formats
US9529888B2 (en) 2013-09-23 2016-12-27 Spotify Ab System and method for efficiently providing media and associated metadata
US9063640B2 (en) 2013-10-17 2015-06-23 Spotify Ab System and method for switching between media items in a plurality of sequences of media items
CN104754426B (zh) * 2013-12-25 2018-11-16 华为终端有限公司 一种媒体处理方法、设备及系统
US9442864B2 (en) 2013-12-27 2016-09-13 Intel Corporation Bridging circuitry between a memory controller and request agents in a system having multiple system memory protection schemes
US9684465B2 (en) 2014-03-28 2017-06-20 International Business Machines Corporation Memory power management and data consolidation
US9787751B2 (en) 2014-08-06 2017-10-10 At&T Intellectual Property I, L.P. Method and apparatus for delivering media content utilizing segment and packaging information
US10141974B2 (en) 2015-03-17 2018-11-27 Shai Waxman High-capacity FHSS-MA devices and methods
US10185842B2 (en) 2015-03-18 2019-01-22 Intel Corporation Cache and data organization for memory protection
US9798900B2 (en) 2015-03-26 2017-10-24 Intel Corporation Flexible counter system for memory protection
KR20160128184A (ko) 2015-04-28 2016-11-07 삼성전자주식회사 무선 통신 시스템에서 그룹 통신 방법 및 장치
US10277921B2 (en) * 2015-11-20 2019-04-30 Nvidia Corporation Hybrid parallel decoder techniques
CN108702683B (zh) 2015-12-28 2022-02-15 皇家Kpn公司 用于控制用户装备对本地设备的访问的方法和系统
CN108702315B (zh) 2015-12-28 2021-05-28 皇家Kpn公司 在连接到不同网络的两个本地设备之间建立连接
US10528485B2 (en) 2016-09-30 2020-01-07 Intel Corporation Method and apparatus for sharing security metadata memory space
US11543967B2 (en) * 2017-02-23 2023-01-03 Samsung Electronics Co., Ltd. Method for controlling BW SLA in NVME-of ethernet SSD storage systems
US10783149B2 (en) * 2017-08-02 2020-09-22 Microsoft Technology Licensing, Llc Dynamic productivity content rendering based upon user interaction patterns
KR102381036B1 (ko) * 2017-11-09 2022-03-31 삼성전자주식회사 무선 통신 시스템에서 데이터 패킷을 처리하기 위한 장치 및 방법
CN108712405B (zh) * 2018-05-07 2020-11-24 上海市地质勘查技术研究院 基于物联网的桥梁隧道监测信息远程发送方法
CN110740383B (zh) * 2018-07-20 2021-10-08 宏碁股份有限公司 多媒体文件管理方法、终端装置、服务装置及文件管理系统
KR102128904B1 (ko) * 2018-09-03 2020-07-01 주식회사 님버스 HEVC 트랜스코더 기술을 이용하여 Wi-Fi 무선망과 LTE/5G 공중무선망에 동시 적용이 가능한 변환시스템 및 방법
TWI699103B (zh) * 2019-04-22 2020-07-11 圓展科技股份有限公司 無線攝影機與影像串流方法
CN110427094B (zh) * 2019-07-17 2021-08-17 Oppo广东移动通信有限公司 显示方法、装置、电子设备及计算机可读介质
CN110719254A (zh) * 2019-08-29 2020-01-21 北斗航天卫星应用科技集团有限公司 多协议集成的北斗位置服务系统及服务方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101194491A (zh) * 2005-04-21 2008-06-04 高通股份有限公司 使用基于ip的接口在te2装置上支持无线数据业务的方法和设备

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6081513A (en) * 1997-02-10 2000-06-27 At&T Corp. Providing multimedia conferencing services over a wide area network interconnecting nonguaranteed quality of services LANs
WO1999003440A1 (de) 1997-07-16 1999-01-28 Alexander Stohr Pneumatische bewegungsschienen und -orthesen
JP2000232406A (ja) 1999-02-10 2000-08-22 Sony Corp 携帯型情報処理装置、情報処理方法、中継装置、中継方法、情報提供システム、情報提供方法、並びに提供媒体
ATE314770T1 (de) 2000-08-11 2006-01-15 Mitsubishi Electric Inf Tech Adaptive entzerrung und dekodierung für gespreizte kanalverzögerung
JP2002198926A (ja) * 2000-12-27 2002-07-12 Mitsubishi Electric Corp 多地点通信方式
JP2002297478A (ja) * 2001-03-29 2002-10-11 Toshiba Corp マルチメディアデータ中継システム、マルチメディアデータ中継装置及びマルチメディアデータ中継方法
JP2003178023A (ja) 2001-09-07 2003-06-27 Xerox Corp モバイルコンピュータデバイスにおけるドキュメントサービス要求の制御方法
US6731947B2 (en) * 2001-10-23 2004-05-04 Qualcomm Incorporated Method and apparatus for controlling data rate on a forward channel in a wireless communication system
US20030211848A1 (en) * 2002-05-09 2003-11-13 Samsung Electronics Co., Ltd. System and method for providing service negotiation during a hard handoff of a mobile station in a wireless communication system
JP2004297381A (ja) 2003-03-26 2004-10-21 Sony Corp 無線通信方法及び無線通信中継装置
US7257407B2 (en) * 2003-03-26 2007-08-14 Sony Corporation System and method for dynamically allocating data rates and channels to clients in a wireless network
US20050037740A1 (en) * 2003-07-25 2005-02-17 Smith Sunny P. System and method for delivery of multimedia content into end-user devices
JP2005341231A (ja) 2004-05-27 2005-12-08 Sanyo Electric Co Ltd ルーティング方法およびそれを利用した無線装置
KR100584217B1 (ko) 2004-05-29 2006-05-26 전자부품연구원 하드웨어 트랜스코더를 이용한 이동형 디바이스의멀티미디어 서비스
JP2006025372A (ja) 2004-07-09 2006-01-26 Sanyo Electric Co Ltd 通信方法ならびにそれを利用した無線装置および通信システム
JP4548057B2 (ja) 2004-09-15 2010-09-22 ソニー株式会社 情報処理装置および方法、並びにプログラム
US7853221B2 (en) 2004-11-12 2010-12-14 Homerun Holdings Corp. Network bridge device and methods for programming and using the same
US8098582B2 (en) * 2005-03-31 2012-01-17 At&T Intellectual Property I, L.P. Methods, systems, and computer program products for implementing bandwidth control services
US20070011604A1 (en) 2005-07-05 2007-01-11 Fu-Sheng Chiu Content integration with format and protocol conversion system
US7707485B2 (en) * 2005-09-28 2010-04-27 Vixs Systems, Inc. System and method for dynamic transrating based on content
US7907213B1 (en) 2006-03-13 2011-03-15 Sprint Communications Company L.P. Wireless multimedia content at television host device
US8553882B2 (en) * 2006-03-16 2013-10-08 Time Warner Cable Enterprises Llc Methods and apparatus for connecting a cable network to other network and/or devices
JP4545707B2 (ja) 2006-04-06 2010-09-15 シャープ株式会社 サービス制御装置及びプログラム
US7765599B2 (en) * 2006-06-13 2010-07-27 Intel Corporation Multimedia transmitter, multimedia receiver, multimedia transmission system, and method for securely transmitting multimedia content over a wireless link
TWI323119B (en) * 2006-06-30 2010-04-01 Univ Yuan Ze A multimedia-messaging-service (mms) system and the service method thereof
US8239559B2 (en) 2006-07-15 2012-08-07 Blackfire Research Corp. Provisioning and streaming media to wireless speakers from fixed and mobile media sources and clients
US8364850B2 (en) 2006-07-20 2013-01-29 Qualcomm Incorporated Utility service in multi-processor environment
US20080086550A1 (en) * 2006-10-06 2008-04-10 Cingular Wireless Ii, Llc Integration of data between devices
US9295003B2 (en) 2007-03-19 2016-03-22 Apple Inc. Resource allocation in a communication system
US8131311B2 (en) 2007-03-26 2012-03-06 Bandemar Networks, Llc Just-in-time training of deployed skill support personnel via cell phone multimedia
US7912098B2 (en) 2007-03-29 2011-03-22 Alcatel Lucent System, method, and device using a singly encapsulated bundle and a tagger for re-encapsulation
US20080305834A1 (en) 2007-06-07 2008-12-11 Thomas John Janiszewski Method and apparatus for providing local multimedia content at a mobile wireless base station using a satellite receiver
US8224303B2 (en) * 2008-05-27 2012-07-17 Motorola Mobility, Inc. Method, device and system for session mobility of multimedia content delivered to mobile communication devices
US8774048B2 (en) 2009-01-29 2014-07-08 Qualcomm Incorporated Link management for multimedia content mobility

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101194491A (zh) * 2005-04-21 2008-06-04 高通股份有限公司 使用基于ip的接口在te2装置上支持无线数据业务的方法和设备

Also Published As

Publication number Publication date
US20100189064A1 (en) 2010-07-29
TW201112853A (en) 2011-04-01
EP3618397C0 (en) 2023-08-16
EP2392116B1 (en) 2019-07-24
WO2010088530A1 (en) 2010-08-05
ES2796527T3 (es) 2020-11-27
HUE048760T2 (hu) 2020-08-28
CN102292958A (zh) 2011-12-21
CN102292957B (zh) 2014-09-17
JP5448106B2 (ja) 2014-03-19
BRPI1007438A2 (pt) 2018-06-12
EP2392117B1 (en) 2020-04-08
CN102292957A (zh) 2011-12-21
EP2392117A1 (en) 2011-12-07
KR20110110850A (ko) 2011-10-07
KR101345003B1 (ko) 2014-01-15
KR101344105B1 (ko) 2013-12-20
KR20110110849A (ko) 2011-10-07
WO2010088526A1 (en) 2010-08-05
EP2392116A1 (en) 2011-12-07
JP2012516660A (ja) 2012-07-19
US20100191859A1 (en) 2010-07-29
JP5456065B2 (ja) 2014-03-26
EP3618397A1 (en) 2020-03-04
EP3618397B1 (en) 2023-08-16
US8774048B2 (en) 2014-07-08
TW201116009A (en) 2011-05-01
US8572271B2 (en) 2013-10-29
JP2012516661A (ja) 2012-07-19

Similar Documents

Publication Publication Date Title
CN102292958B (zh) 用于多媒体内容移动的链路管理
CN105191326B (zh) 无线通信系统中的视频流送
CN102480618B (zh) 实现h264视频编码格式播放优化的方法及系统
CN110022297A (zh) 一种高清视频直播系统
CN104683863A (zh) 一种多媒体数据传输方法及设备
CN102802024A (zh) 在服务器端实现的转码方法以及转码系统
CN110290384A (zh) 图像滤波方法、装置及视频编解码器
US10750247B2 (en) Facilitating mixed service use of bonded satellite transponders
CN111093082A (zh) 一种流媒体直播的方法及系统
TWI526078B (zh) 視頻傳輸中對發送靜態指示的功率優化
CN105027576A (zh) 用于无线传送mpeg2-ts兼容数据流的传送布置
WO2023112007A1 (en) Video codec importance indication and radio access network awareness configuration
CN105578193A (zh) 一种基于数字视频变换盒的数据转码系统和方法
CN116830588A (zh) 用于基于视觉体积视频(v3c)媒体和基于几何的点云(g-pcc)媒体的流式传输的mmt信令

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant