CN1659536A - 用于在便携设备中再现多媒体的系统 - Google Patents

用于在便携设备中再现多媒体的系统 Download PDF

Info

Publication number
CN1659536A
CN1659536A CN038130858A CN03813085A CN1659536A CN 1659536 A CN1659536 A CN 1659536A CN 038130858 A CN038130858 A CN 038130858A CN 03813085 A CN03813085 A CN 03813085A CN 1659536 A CN1659536 A CN 1659536A
Authority
CN
China
Prior art keywords
multimedia
content
analysis processing
format analysis
processing program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN038130858A
Other languages
English (en)
Other versions
CN100401281C (zh
Inventor
斯里尼瓦斯·帕特沃里
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US10/453,091 external-priority patent/US20040083015A1/en
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN1659536A publication Critical patent/CN1659536A/zh
Application granted granted Critical
Publication of CN100401281C publication Critical patent/CN100401281C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G06F15/163Interprocessor communication
    • G06F15/167Interprocessor communication using a common memory, e.g. mailbox
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72406User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by software upgrading or downloading
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages

Abstract

一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统。便携设备包括一种或多种再现资源。提供了一种执行以下操作的方法:根据多媒体内容生成多媒体对象,将格式处理程序和多媒体对象进行关联,以及利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。

Description

用于在便携设备中再现多媒体的系统
相关申请的交叉参考
本申请要求2002年6月4日提交的、名为“Mutlimedia Processing(多媒体处理)”的待审美国临时专利申请60/385,942的优先权。同时,本申请还要求2003年4月25日提交的、名为“多媒体处理”的待审美国临时专利申请的优先权。通过在本文中全文引用以上临时申请的公开,将其引入本申请。
技术领域
本发明总体上涉及多媒体处理,并且尤其涉及在具有嵌入式控制器的便携设备中再现多媒体的系统。
背景技术
技术的进步已经产生了更小并且功能更强的个人计算设备。例如,目前存在各种各样小、重量轻、便于用户携带的便携式蜂窝电话、个人数字助理(PDA)以及寻呼设备。通常,这些设备包括具有有限存储资源的嵌入式控制器。例如,可用存储量受到设备的小尺寸的限制。
然而,要求此类设备处理更大量数据并且执行更复杂的程序的需求日益增加。例如,用户需要远程访问诸如游戏程序之类的交互程序,这些程序要求便携设备快速并且有效地再现多媒体应用和内容。例如,用户可能希望使用其便携设备观看或收听诸如视频剪辑、动画、电影之类的多媒体内容,以及诸如以MP3格式提供的音乐内容之类的音频。
为了在便携设备上再现多媒体内容,需要控制设备的再现资源。例如,一种类型的便携设备可以包括一个低分辨率的显示屏或音频扬声器,而另一种类型的便携设备可以包括更大并且分辨率更高的显示屏和双扬声器立体声功能。因此,每种类型的便携设备可以具有不同的用其再现多媒体内容的多媒体再现资源。因此,当提供多媒体内容以便在具有不同配置和再现资源的各种便携设备上使用时,必须克服兼容问题。
用于克服兼容问题的一种技术要求多媒体内容处于一种与便携设备上可用的再现资源具体相兼容的格式。例如,如果内容开发商希望制作用于在特定便携设备上使用的视频内容,则开发商需要剪裁视频内容,以便与便携设备上可用的视频再现资源精确地兼容。
不幸的是,为了将在其上再现多媒体内容的每个便携设备制作剪裁的多媒体内容是昂贵而且效率低的。例如,内容开发商需要针对不同的便携设备修改内容,并且由此生成相同内容的多个版本。同时,当新的再现资源变得可用时,内容开发商必须不断地更新其内容。
因此,需要一种无需为每种设备上可用的不同再现资源而剪裁内容就能在各种便携设备上再现多媒体内容的系统。该系统在运行时应允许再现所有类型的多媒体内容,并且提供一种允许再现新开发的多媒体格式的可扩展的结构。
发明内容
在一种或多种实施方式中,提供了一种在便携设备上再现多媒体内容的多媒体系统,包括方法和装置。例如,便携设备可以是具有嵌入式控制器和有限存储资源的蜂窝电话,它执行程序指令,以便使用该设备的可用再现资源对多媒体内容进行再现。在一种或多种实施方式中,多媒体系统是一种小的并且有效的实现方式,它使用较少资源,并且特别适合于在包括具有有限存储资源的嵌入式控制器的便携设备中使用。
在一种实施方式中,该系统包括用于对设备的再现资源进行控制的一组格式处理程序(handler)。每个格式处理程序被设计用来处理具有特定格式的多媒体内容,从而对设备的再现资源进行控制以再现该内容。例如,每个格式处理程序再现(一种特定格式的)多媒体音频或视频文件(播放和理解它)。格式处理程序确定该内容所需的资源,读取文件,并且调用正确的资源。便携设备包括高级应用编程接口(API),格式处理程序使用API执行任务。可以在制造时将每个格式处理程序作为多媒体系统的一部分包括在便携设备中,或者可以动态地下载格式处理程序。因此,多媒体系统的一种或多种实施方式能够利用一组格式处理程序,从而无需根据在每个设备处可用的再现资源对内容进行剪裁,就可以在各种便携设备中再现多媒体内容。另外,多媒体系统提供了一种可扩展的结构,它允许通过添加用于再现新开发内容类型的新的格式处理程序,对系统进行扩展。
多媒体系统的结构对于多媒体用户和开发商来说都是有利的。例如,它允许开发商编写自己的用于在无线平台上使用的格式处理程序。并且,由于该系统提供了一种无需了解再现设备的精确配置就允许再现所有类型内容的简单接口,所以多媒体用户也能从中获利。
在一种实施方式中,提供了一种在具有嵌入式处理器的便携设备中再现多媒体内容的方法。便携设备还包括一种或多种再现资源。该方法包括:根据多媒体内容生成多媒体对象,将格式处理程序和多媒体对象进行关联,以及利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。
在另一种实施方式中,提供了一种在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统。便携设备包括一种或多种再现资源。多媒体系统包括创建媒体逻辑,媒体逻辑在运行时根据多媒体内容生成多媒体对象。该系统还包括选择逻辑,选择逻辑在运行时将格式处理程序与多媒体对象进行关联。该系统还包括格式处理逻辑,格式处理逻辑在运行时控制选定的再现资源来从多媒体对象再现多媒体内容。
在另一种实施方式中,提供了一种计算机可读介质,它包括用于在具有嵌入式处理器的便携设备中再现多媒体内容的计算机可执行指令。便携设备还包括一种或多种再现资源。该指令在执行时会执行以下方法,它包括:根据多媒体内容生成多媒体对象,将格式处理程序与多媒体对象进行关联,以及利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。
在另一种实施方式中,提供了一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统。便携设备还包括一种或多种再现资源。多媒体系统包括用于根据多媒体内容生成多媒体对象的装置。该系统还包括用于将格式处理程序与多媒体对象进行关联的装置。该系统还包括用于利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容的装置。
通过阅读以下阐述的附图简要说明、本发明的详细说明和权利要求书,本发明的其它方面、优点和特征将变得明显。
附图说明
通过结合附图参考以下详细描述,在此描述的实施方式的上述各个方面和附加优点将变得更加明显,其中:
图1表示包括便携无线设备的数据网络,该便携无线设备包括适于实现多媒体系统的一种实施方式以再现多媒体内容的嵌入式控制器;
图2为表示图1中的便携设备的一种实施方式的功能方框图,其中包括将其运行以再现多媒体内容的多媒体系统的一种实施方式;
图3表示图2中的多媒体系统的一种实施方式的详细方框图;
图4表示通过格式处理程序管理以再现多媒体内容的状态机的一种实施方式;以及
图5表示用于在便携设备中再现多媒体内容的方法的一种实施方式。
具体实施方式
以下详细说明描述了用于在便携设备中再现多媒体内容的多媒体系统,包括方法和装置。在一种或多种实施方式中,便携设备具有嵌入式控制器和有限的资源(即有限的存储容量),并且该系统在运行时利用设备的可用再现资源再现多媒体内容。
在一种或多种实施方式中,多媒体系统例如通过提供对设备特有资源的通用调用,与在该设备上运行的、用于简化设备操作的运行环境进行交互。一种这样的运行环境是由加利福尼亚州圣地亚哥的高通公司开发的无线二进制运行环境(BREWTM)软件平台。在以下描述中,假定多媒体系统是在执行诸如BREW软件平台之类的运行环境的便携设备上实现的。然而,多媒体系统的一种或多种实施方式适合于与其它类型的运行环境一起使用以在便携设备上再现多媒体内容。
图1表示包括便携无线设备102的数据网络100,其中便携无线设备102具有适合于实现多媒体系统的一种实施方式以再现多媒体内容的嵌入式控制器。例如,设备102包括以下称为“IMedia”的多媒体系统104的一种实施方式。在网络100中,无线设备102利用无线通信信道110经由无线网络108与网络服务器106进行通信。
在一种实施方式中,设备102包括可以经由无线网络108发射和/或接收语音信息的蜂窝电话。然而,所述多媒体系统的一种或多种实施方式适合于与其它类型的便携设备一起使用。例如,其它合适的便携设备包括但不限于:PDA、电子邮件设备、寻呼机、平板计算机、移动电话、或者包括多媒体再现资源的任何其它类型的便携设备。
设备102还可以经由无线网络108接收多媒体应用或内容。例如,可以将多媒体应用112和114从网络服务器106下载到设备102上。另外,也可以将多媒体内容116从网络服务器106下载到设备102上。将多媒体应用或内容从与无线网络108相连的其它任何网络实体中下载到设备102上,也是可能的。
在一种实施方式中,设备102也可以经由直接链路120直接与诸如本地工作站118之类的本地系统连接。在一种实施方式中,本地工作站118使用直接链路120将多媒体应用或内容下载到设备102上。例如,使用链路120,将多媒体应用122从工作站118下载到设备102上。
可以将IMedia系统104从服务器106下载到设备102上,并且将其在设备102上运行以便再现多媒体应用或内容。在另一种实施方式中,可以经由链路120将IMedia系统104从工作站118下载到设备102上,或者在制造期间将其安装到设备中。
在一种实施方式中,在诸如软盘之类的计算机可读介质上提供IMedia系统104,然后将其加载到系统118上用于向设备102进行传送。在另一种实施方式中,可以在诸如存储卡(未示出)之类的计算机可读存储设备上存储IMedia系统104,然后将其直接插入到设备102中,以便使IMedia系统104可以在设备102上运行。因此,设备102可以接收以无线方式发射或者以有线方式传送的IMedia系统104,或者通过直接从存储设备中获得IMedia系统104。
网络100还可以包括其它类型的便携设备,例如其它类型的无线或有线便携设备,并且这些设备可以与服务器106或采用各种网络类型和通信结构的任何其它网络实体进行通信,其中网络实体包括无线和有线网络、专用和公用网络、交换和非交换网络、直接链路以及它们的任意组合,以便下载IMedia系统104的一种或多种实施方式来再现多媒体内容。
图2为表示便携设备102的一种实施方式的功能方框图,其中包括将其运行以再现多媒体内容的IMedia系统104的一种实施方式。设备102包括与内部数据总线204和堆栈存储器216连接的处理逻辑202。与内部数据总线204连接的还有指令存储器206、多媒体应用/内容存储器208、堆存储器210、用户接口212、显示逻辑216、音频逻辑218以及输入/输出(I/O)接口214。
在设备102运行期间,处理逻辑202执行指令存储器206中存储的程序指令,以生成运行环境220。运行环境220可以是BREW环境或其它适合的运行环境。为了辅助指令执行,处理逻辑202利用堆栈存储器216临时存储程序数据或指令。例如,处理逻辑202可以在堆栈存储器216中存储常数、变量、程序地址、指针、指令和其它信息项。在另一种实施方式中,处理逻辑202可以在堆存储器210中临时存储信息。实际上,堆存储器包括适于由处理逻辑202存储和获取信息的任何类型的存储器。
在一种或多种实施方式中,处理逻辑202包括CPU、门阵列、硬件逻辑、软件,或者硬件和软件的组合。因此,处理逻辑202通常包括执行机器可读指令的逻辑。
指令存储器206包括RAM、ROM、FLASH、EEROM,或者其它任何合适类型的存储器,或者它们的组合。在一种实施方式中,指令存储器206位于设备102的内部,而在另一种实施方式中,指令存储器206包括可拆装的存储卡或存储设备,它可与设备102选择性地连接,并由此与内部总线204相连。因此,实际上,指令存储器206可以包括能够存储可由处理逻辑202执行的指令的任何类型的存储器。
用户接口212接收例如来自键盘、指示设备、触摸板或其它输入机制的用户输入,以允许用户与设备102进行交互。显示逻辑216包括向设备显示器输出信息的逻辑。例如,该设备可以包括LCD、LED或者其它类型的显示资源。音频逻辑218包括向设备扬声器、远程扬声器或音频系统、或者其它类型的声音资源输出音频信息的逻辑。例如,一对远程扬声器可以接收音频逻辑218的输出,以便为设备用户再现音频信息。因此,显示逻辑216和音频逻辑218可以包括硬件和/或软件的任意组合,以便允许设备102向设备用户再现可视信息或音频信息。
I/O接口214在运行时在设备102和外部设备、系统和/或网络之间发送和接收信息。例如,在一种实施方式中,I/O接口214包括无线收发机电路(未示出),该电路在运行时使用例如通信链路106经由无线数据网络发射和接收信息。例如,该收发机包括对从处理逻辑202接收的信息进行调制并将调制的信息转换为适于无线传输的高频信号的电路。类似地,该收发机还包括将接收的高频通信信号转换为适于由处理逻辑202进行解调和后续处理的信号的电路。
在另一种实施方式中,I/O接口214包括一个收发机,该收发机在运行时经由诸如电话线之类的硬布线的通信链路发送和接收信息,以便与诸如因特网之类的公用数据网中的远程系统进行通信。
在另一种实施方式中,I/O接口214包括将其运行以便利用链路120与诸如本地工作站116之类的本地设备进行通信的电路。I/O接口214还可以包括与打印机或其它本地计算机或诸如软盘或存储卡之类的设备进行通信的电路(例如串行或并行端口逻辑)。因此,I/O接口214可以包括任何类型的硬件、软件或它们的组合,从而允许设备102与其它本地或远程设备或者系统进行通信。
在设备102工作期间,由处理逻辑202执行程序指令使得生成IMedia系统104。例如,在执行时生成IMedia系统104的IMedia指令可以存储在指令存储器206中。IMedia系统104与运行环境220进行交互,以便在设备102上再现多媒体应用和内容。例如,可以经由无线网络108将多媒体应用和内容下载到设备102上,并且将其存储在存储器208中。在一种实施方式中,IMedia系统104经由内部总线204获取存储器208中存储的多媒体内容,并且通过经由运行环境220与该设备的再现资源(即显示逻辑、音频逻辑等)进行交互来对该内容进行处理,以便在设备102上再现该内容。同时,IMedia系统104在运行时处理并再现流式多媒体内容。例如,利用IMedia系统104在设备102上再现从网络108下载到设备102上的流式多媒体内容。
应当注意到,设备102的配置仅是适于实现用来再现多媒体应用和内容的IMedia系统104的一种实施方式的配置。在本发明的范围内使用其它设备或设备配置实现IMedia系统104,也是可能的。
图3表示用于在设备102中使用的IMedia系统104的一种实施方式的详细方框图。设备102包括其中包括处理逻辑202的本机硬件302,并且设备102可以选择性地包括特别为处理多媒体信息而设计的多媒体处理器304。没有进一步描述的情况下,假设本机硬件302包括用于操作该设备的再现资源(即,显示逻辑216等)的逻辑,并且假设可以运行处理逻辑202和多媒体处理器304来控制这些资源。
设备102还包括本机多媒体软件306,它包括音频1 308、音频2310和视频312模块。这些模块代表用于直接与本机硬件302进行通信以便控制选定的再现资源的低层软件模块。例如,视频模块312与多媒体处理器304进行通信,以控制视频再现资源。尽管示出了一种实施方式,但是也有可能有更少或更多的多媒体软件模块306,并且这些模块可以与所有类型的本机硬件302进行通信。因此,在本发明的范围内其它的本机硬件302和软件306配置也是可能的。
在操作期间,设备102执行程序指令以生成运行环境220,在一种实施方式中,该运行环境是BREW环境。然后有可能执行IMedia指令以生成IMedia系统104,以便与运行环境一起再现多媒体内容。例如,可以经由无线网络108将IMedia指令下载到设备上,并且将其存储到指令存储器206中。
IMedia系统104在运行时抽象出多媒体内容处理,并且在运行时定义多媒体接口的框架。在一种实施方式中,IMedia系统104在运行时提供以下特征:
1.提供对于设备多媒体特征和性能的通用和简便的访问。
2.屏蔽复杂的专用集成电路(ASIC)层的多媒体API和资源管理。
3.提供用以开发复杂的多媒体应用的创建块。
4.基于文件扩展、文件内容或者文件中的签名选择性地导出媒体类型。
IMedia系统104包括创建媒体工具324、媒体数据结构326、以及格式处理程序314、316、318和320。同时,示出了作为IMedia系统104一部分的IMedia抽象328,它表示在IMedia系统104运行期间创建的基本IMedia对象。提供IMedia系统组件的详细描述如下。
IMedia抽象
IMedia抽象328是能够注册和处理多媒体内容类型的抽象接口。
IMedia抽象328保留了对媒体数据结构326中的媒体数据的引用。媒体数据结构
媒体数据结构326在运行时封装媒体数据源或宿。这允许IMedia系统104对来自各个数据源或到达各个目的地的媒体数据进行流处理。在一种实施方式中,媒体数据结构326是从数据结构逻辑形成的,其中数据结构逻辑包括执行程序指令以生成存储器210中的媒体数据结构326的处理逻辑202。
创建媒体工具
创建媒体工具324执行几种功能。首先,创建媒体工具324在运行时接收用于再现的多媒体应用或内容。例如,多媒体应用或内容可以存储在存储器208中,并且该内容包括对创建媒体工具324的函数调用。其次,创建媒体工具324处理多媒体内容,以便根据媒体数据结构326中包含的信息创建IMedia对象328。在创建IMedia对象之后,创建媒体工具设置媒体数据并将IMedia对象置于预备状态中。在一种实施方式中,创建媒体工具324是从创建媒体逻辑形成的,其中创建媒体逻辑包括执行程序指令以便创建存储器210中的IMedia对象328并执行上述创建媒体工具的功能的处理逻辑202。
在一种实施方式中,创建媒体工具324包括选择逻辑,它包括执行程序指令以选择一个格式处理程序与IMedia对象328相关联并且执行其它上述功能的处理逻辑202。例如,选择逻辑对与媒体内容相关的数据结构326进行估计,以确定选择哪一个格式处理程序。
格式处理程序
在一种实施方式中,IMedia系统104包括一组格式处理程序(FH)。例如,IMedia系统104包括MIDI 314、MP3 316、MPEG4 318和ADCPM 320格式处理程序。这些格式处理程序在IMedia对象328和设备102的多媒体再现硬件和软件之间提供接口322。在一种实施方式中,格式处理程序对公用指令集进行解释,从而使多媒体应用或内容可以利用相同的指令来指示格式处理程序执行诸如播放、停止、倒带等类似任务。可以使用任意数目的格式处理程序,并且可以添加新的格式处理程序,以便再现新类型的多媒体内容。在一种实施方式中,格式处理程序是从格式处理逻辑形成的,其中格式处理逻辑包括执行程序指令以执行上述格式处理程序的功能的处理逻辑202。
在一种实施方式中,公用指令集指示格式处理程序再现多媒体内容,并且提供用于传递参数和状态的机制。公用指令集中包括的指令的示例如下:
1.IMedia_SetMediaParm()      ;设置FH的参数
2.IMedia_GetMediaParm()      ;从FH获取参数
3.IMedia_SetMediaData()      ;设置媒体数据
4.IMedia_GetMediaData()      ;获取媒体数据
5.IMedia_GetClassID()        ;获取类ID
6.IMedia_GetState()          ;获取状态
7.IMedia_RegisterNotify()    ;向FH注册回叫
8.IMedia_Play()              ;向FH发送播放命令
9.IMedia_Stop()              ;向FH发送停止命令
10.IMedia_SetRect()          ;设置视频参数
例如,IMedia对象中可以包括IMedia_SetMediaParm()指令,以便指示格式处理程序设置特定的参数、设置或与格式处理程序相关的变量。例如,利用IMedia_SetMediaParm()指令,能够设置与设计用来再现MPEG视频的格式处理程序相关的参数。在其它实施方式中,特定格式处理程序也可以对附加指令(未示出)进行解释,其中附加指令可以包括在IMedia对象328中,并且使用附加指令控制受控资源的特定功能。
在一种实施方式中,格式处理程序是在便携设备上运行的作为IMedia系统104一部分的软件。在另一种实施方式中,格式处理程序可以是硬件和软件的组合。另外,当格式处理程序变得可用时,可以将其添加到IMedia系统中,从而使得IMedia系统是可扩展的,并且当其变得可用时能够再现新类型的多媒体内容。
在运行期间,格式处理程序将其自身(其MIME类型)向运行环境进行注册,并且通过查询MIME类型或枚举该系统支持(注册)的格式处理程序的列表,多媒体应用可以检测格式处理程序。每个格式处理程序提供功能选择,它包括但不限于:
1.提供应用编程接口(API),该接口:
a.执行多媒体内容的重放和录制,包括诸如搜索、暂停、重新开始之类的控制功能;
b.设置和/或获取音频和视频控制参数;
c.处理来自IMedia对象的异步事件。
2.经由注册的回叫函数发送异步媒体事件。
3.管理设备多媒体再现资源。
4.管理可通过导出类扩展的状态机。
图4表示通过诸如格式处理程序318的格式处理程序管理以再现多媒体内容的状态机400的一种实施方式。格式处理程序的初始状态是空闲402。一旦将格式处理程序和IMedia对象进行关联之后,格式处理程序的状态就转到预备404。根据与多媒体内容相关的命令,格式处理程序可以从预备状态404进入到播放状态406或录制状态408。格式处理程序可以从播放状态406和录制状态408转到播放暂停状态410或录制暂停状态412。也有可能从这些状态重新开始相应的播放状态406和录制状态408。格式处理程序还可以停止414,然后返回到预备状态404。
因此,利用状态机400,每个格式处理程序能够控制设备的再现资源,以便再现与该格式处理程序关联的多媒体应用或内容(IMedia对象)。在另一种实施方式中,格式处理程序也能够实现与图4所示的状态机不同的状态机。另外,在其它实施方式中,能够定义可以在再现处理期间使用的附加状态。
图5表示在便携设备中再现多媒体内容的方法500的一种实施方式。
在框502中,通过使用IMedia构造创建多媒体应用或内容,使得可以将其再现在便携设备上。例如,应用开发商使用创建媒体工具324创建IMedia对象。IMedia对象数目和诸如同时播放或录制之类的性能是依赖于设备的。所有的IMedia对象均遵循如图4所示的基本状态机。在一种实施方式中,可以使用以下步骤创建并使用IMedia对象。
1.基于媒体数据源/宿创建媒体数据结构并且对其进行初始化。按以下方式定义AEEMediaData:
typedef struct
{
     AEECLSID clsData;  //媒体数据的类型
     void*pData;       //上下文敏感的数据(见表格)
     unit32 dwSize;     //上下文敏感的数据(见表格)
}AEEMediaData;
2.基于下表中的信息初始化以上结构的成员。
   clsStream    pData    dwSize 注释
MMD_FILE_NAME 文件名 0 用于重放和录制。文件不是由IMedia打开的,而是把文件名传递到ASIC层的API,由API打开该文件。
MMD_BUFFER 缓冲器指针 缓冲器的大小 用于重放和录制。缓冲器必须包括完整的媒体数据。
  MMS_Source   ISource 总的数据大小或为0 实时流处理
在框504中,将多媒体内容下载到用于再现的便携设备。例如,可以经由无线数据网络108将应用或内容下载到设备上。可以按流内容的方式再现内容,或者将其存储到存储器中并且稍后再进行再现。
在框506中,基于所接收的内容中包括的媒体源或宿的特性,创建并初始化媒体数据结构。例如,将媒体数据结构存储在媒体数据结构326中。在一种实施方式中,基于文件扩展、文件内容或文件中包括的签名,导出媒体类型。
在框508中,使用相关的数据结构创建IMedia对象。例如,使用创建媒体工具324创建IMedia对象。在预备状态404中返回IMedia对象。
在框510中,如果需要从IMedia对象接收异步事件,则执行可选的步骤以注册通知函数。
在框512中,将IMedia对象与格式处理程序进行关联,并且在便携设备上再现多媒体应用或内容。例如,格式处理程序可以提供状态机400的任意功能,以便再现多媒体内容。
在框514中,在已经对该内容进行再现之后并且不再需要IMedia对象时,释放该对象。
实现示例
以下是表示在一种实施方式中如何创建IMedia对象的一个实现示例。该示例包括对图5所示方法的相应框的引用,并且假设便携设备102使用的运行环境是BREW环境。因此,“CApp”是BREW小应用程序全局结构的实例。
    static void App_PlayMedia(CApp*pme)

    {

    int nRet;

    AEEMediaData md;

    //创建媒体数据结构(图5中的框506)

    md.clsData=MMD_FILE_NAME;

    md.pData=(void*)“media/midi_fmt1.mid”;
        <!-- SIPO <DP n="14"> -->
        <dp n="d14"/>
  md.dwSize=0;

  //创建IMedia对象并进入预备状态(图5中的框508)

  nRet=AEEMediaUtil_CreateMedia(pme->a.pIShell,&md,
pme->m_pIMedia);

  //如果成功,则将App_MediaNotify()注册作为IMedia事件的注册
回叫函数(图5中的块510)

  if(SUCCESS!=nRet)

      DisplayErrorDlg(pme,IDS_ERR_CREATEMEDIA);

  else if(SUCCESS!=IMEDAI_RegisterNotify(pme->pIMedia,

  App_mediaNotify,pme))

      DisplayErrorDlg(pme,IDS_ERR_REGISTERNOTIFY);

  else if(SUCCESS!=IMEDIA_Play(pme->m_pIMedia))  //开始重

  放(图5中的框512)

  DisplayErrorDlg(pme,IDS_ERR_PLAY);
在本发明包括的一种或多种实施方式中,运行包括方法和装置的多媒体系统,以便在具有嵌入式控制器的有限资源的便携设备上再现多媒体应用和内容。因此,尽管在此已经举例说明并且指出了该方法和装置的一种或多种实施方式,但是应该理解到,能够对各实施方式作出各种改变而并不背离其精神或实质特征。因此,在此的公开和说明只是说明而不是限制在所附权利要求书中阐述的本发明的范围。

Claims (14)

1.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的方法,该便携设备还包括一种或多种再现资源,并且该方法包括:
根据多媒体内容生成多媒体对象;
将格式处理程序和多媒体对象进行关联;以及
利用格式处理程序控制选定的再现资源,以便从多媒体对象再现多媒体内容。
2.根据权利要求1的方法,还包括:根据多媒体内容生成多媒体数据结构。
3.根据权利要求1的方法,其中控制步骤包括:
在格式处理程序中实现状态机,以便控制选定的再现资源;以及
利用格式处理程序中的状态机再现多媒体内容。
4.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统,该便携设备还包括一种或多种再现资源,并且该多媒体系统包括:
创建媒体逻辑,其在运行时根据多媒体内容生成多媒体对象;
选择逻辑,其在运行时将格式处理程序和多媒体对象进行关联;以及
格式处理逻辑,其在运行时控制选定的再现资源以从多媒体对象再现多媒体内容。
5.根据权利要求4的系统,进一步包括:用于根据多媒体内容生成多媒体数据结构的数据结构逻辑。
6.根据权利要求5的系统,其中格式处理逻辑包括:
在格式处理程序中实现状态机以便控制选定的再现资源的逻辑;以及
利用格式处理程序中的状态机对多媒体内容进行再现的逻辑。
7.一种包括用于在具有嵌入式处理器的便携设备中再现多媒体内容的计算机可执行指令的计算机可读介质,该便携设备还包括一种或多种再现资源,当执行指令时,该指令执行包括以下步骤的方法:
根据多媒体内容生成多媒体对象;
将格式处理程序和多媒体对象进行关联;以及
利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。
8.根据权利要求7的计算机可读介质,进一步包括根据多媒体内容生成多媒体数据结构。
9.根据权利要求7的计算机可读介质,其中控制步骤包括:
在格式处理程序中实现状态机以便控制选定的再现资源;以及
利用格式处理程序中的状态机再现多媒体内容。
10.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统,该便携设备还包括一种或多种再现资源,并且该多媒体系统包括:
用于根据多媒体内容生成多媒体对象的装置;
用于将格式处理程序和多媒体对象进行关联的装置;以及
用于利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容的装置。
11.根据权利要求10的系统,进一步包括:用于根据多媒体内容生成多媒体数据结构的装置。
12.根据权利要求10的系统,其中用于控制选定的再现资源的装置包括:
用于在格式处理程序中实现状态机以便控制选定的再现资源的装置;以及
用于利用格式处理程序中的状态机再现多媒体内容的装置。
13.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统,该便携设备还包括一种或多种再现资源,并且该多媒体系统包括:
一个或多个格式处理程序,其在运行时控制便携设备中的一种或多种再现资源;以及
创建工具,其在运行时从多媒体内容创建多媒体对象,并且将选定的格式处理程序和多媒体对象进行关联,其中选定的格式处理程序从多媒体对象再现多媒体内容。
14.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的方法,该便携设备还包括一种或多种再现资源,并且该方法包括:
利用媒体构造对多媒体内容进行编码;
向便携设备传送多媒体内容;
根据媒体构造生成多媒体对象;
将格式处理程序和多媒体对象进行关联;以及
利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。
CNB038130858A 2002-06-04 2003-06-04 用于在便携设备中再现多媒体的方法和系统 Expired - Fee Related CN100401281C (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
US38594202P 2002-06-04 2002-06-04
US60/385,942 2002-06-04
US46553303P 2003-04-25 2003-04-25
US60/465,533 2003-04-25
US10/453,091 2003-06-02
US10/453,091 US20040083015A1 (en) 2002-06-04 2003-06-02 System for multimedia rendering in a portable device

Publications (2)

Publication Number Publication Date
CN1659536A true CN1659536A (zh) 2005-08-24
CN100401281C CN100401281C (zh) 2008-07-09

Family

ID=29716141

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB038130858A Expired - Fee Related CN100401281C (zh) 2002-06-04 2003-06-04 用于在便携设备中再现多媒体的方法和系统

Country Status (12)

Country Link
EP (1) EP1522024A4 (zh)
JP (2) JP4943650B2 (zh)
KR (1) KR20050010851A (zh)
CN (1) CN100401281C (zh)
AU (1) AU2003251399C1 (zh)
BR (1) BR0311545A (zh)
CA (1) CA2488470A1 (zh)
HK (1) HK1075521A1 (zh)
IL (1) IL165278A0 (zh)
MX (1) MXPA04012143A (zh)
NZ (1) NZ536703A (zh)
WO (1) WO2003103212A2 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102647629A (zh) * 2012-04-27 2012-08-22 北京人民广播电台 内容播放方法和装置
CN109154947A (zh) * 2016-05-25 2019-01-04 三星电子株式会社 用于呈现定制和交互的方法和设备

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4591279B2 (ja) * 2005-08-19 2010-12-01 ソニー株式会社 情報処理装置および情報処理方法、記録媒体、並びに、プログラム
KR100630123B1 (ko) 2005-08-31 2006-09-28 삼성전자주식회사 디지털 멀티미디어 방송 데이터를 수신 및 재생하기 위한이동 단말기 액세서리 장치 및 방법
US9380096B2 (en) 2006-06-09 2016-06-28 Qualcomm Incorporated Enhanced block-request streaming system for handling low-latency streaming
US9209934B2 (en) 2006-06-09 2015-12-08 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US9432433B2 (en) 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
US9386064B2 (en) 2006-06-09 2016-07-05 Qualcomm Incorporated Enhanced block-request streaming using URL templates and construction rules
EP2257040A1 (en) * 2009-05-29 2010-12-01 Thomson Licensing Method and apparatus for distributing a multimedia content
US9917874B2 (en) 2009-09-22 2018-03-13 Qualcomm Incorporated Enhanced block-request streaming using block partitioning or request controls for improved client-side handling
US9319448B2 (en) 2010-08-10 2016-04-19 Qualcomm Incorporated Trick modes for network streaming of coded multimedia data
US10135900B2 (en) 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US9413803B2 (en) 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US9787725B2 (en) 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US20130013318A1 (en) 2011-01-21 2013-01-10 Qualcomm Incorporated User input back channel for wireless displays
CN103777938A (zh) * 2012-10-25 2014-05-07 百度在线网络技术(北京)有限公司 支持多浏览器的播放方法及装置
CN104618817B (zh) * 2015-02-26 2018-07-17 北京奇艺世纪科技有限公司 一种播放网站视频的控制方法及装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6505160B1 (en) * 1995-07-27 2003-01-07 Digimarc Corporation Connected audio and other media objects
US6181713B1 (en) * 1997-10-27 2001-01-30 Sun Microsystems, Inc. Selectable depacketizer architecture
US6216152B1 (en) * 1997-10-27 2001-04-10 Sun Microsystems, Inc. Method and apparatus for providing plug in media decoders
DE69902292T2 (de) * 1998-10-26 2003-03-27 Sony Electronics Inc Digitales videodaten-spezialwiedergabe-management
US6356529B1 (en) * 1999-08-12 2002-03-12 Converse, Ltd. System and method for rapid wireless application protocol translation
KR100340169B1 (ko) * 1999-09-27 2002-06-10 서성철 자바를 이용한 동적 멀티미디어 웹 카타로깅 시스템 및 그 방법
KR20020064888A (ko) * 1999-10-22 2002-08-10 액티브스카이 인코포레이티드 객체 지향형 비디오 시스템
JP2001125920A (ja) * 1999-10-29 2001-05-11 Nippon Telegr & Teleph Corp <Ntt> メディア情報の通信システムおよびメディア情報の通信方法並びにこの方法を記録した記録媒体
JP2001168923A (ja) * 1999-12-08 2001-06-22 Toshiba Corp マルチメディア提供システム、マルチメディア変換サーバ、およびマルチメディア端末
US20010052933A1 (en) * 2000-01-12 2001-12-20 Nybo Larry Carl System and method for image capture, storage and retrieval
US6684088B1 (en) * 2000-03-01 2004-01-27 Axi Mobile Ltd. System and method for displaying electronic mail messages on a low bandwidth device
US20010037404A1 (en) * 2000-04-04 2001-11-01 Gudmundur Hafsteinsson System for wireless communication of data between a WEB server and a device using a wireless application protocol
US6891893B2 (en) * 2000-04-21 2005-05-10 Microsoft Corp. Extensible multimedia application program interface and related methods
US6438575B1 (en) * 2000-06-07 2002-08-20 Clickmarks, Inc. System, method, and article of manufacture for wireless enablement of the world wide web using a wireless gateway
US20020080143A1 (en) * 2000-11-08 2002-06-27 Morgan David L. Rendering non-interactive three-dimensional content
US20020103920A1 (en) * 2000-11-21 2002-08-01 Berkun Ken Alan Interpretive stream metadata extraction
US7139470B2 (en) * 2001-08-17 2006-11-21 Intel Corporation Navigation for MPEG streams
US20030156131A1 (en) * 2002-02-21 2003-08-21 Samir Khazaka Method and apparatus for emulating a mobile device

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102647629A (zh) * 2012-04-27 2012-08-22 北京人民广播电台 内容播放方法和装置
CN109154947A (zh) * 2016-05-25 2019-01-04 三星电子株式会社 用于呈现定制和交互的方法和设备
CN109154947B (zh) * 2016-05-25 2023-03-21 三星电子株式会社 用于播放呈现的方法和用户设备以及服务器

Also Published As

Publication number Publication date
IL165278A0 (en) 2005-12-18
HK1075521A1 (en) 2005-12-16
WO2003103212A3 (en) 2004-06-17
CN100401281C (zh) 2008-07-09
KR20050010851A (ko) 2005-01-28
MXPA04012143A (es) 2005-04-19
JP2010288301A (ja) 2010-12-24
EP1522024A2 (en) 2005-04-13
BR0311545A (pt) 2007-04-27
WO2003103212A2 (en) 2003-12-11
AU2003251399C1 (en) 2009-12-17
EP1522024A4 (en) 2007-03-28
CA2488470A1 (en) 2003-12-11
AU2003251399B2 (en) 2009-07-23
NZ536703A (en) 2007-11-30
JP4943650B2 (ja) 2012-05-30
JP2005528849A (ja) 2005-09-22
AU2003251399A1 (en) 2003-12-19

Similar Documents

Publication Publication Date Title
CN1659536A (zh) 用于在便携设备中再现多媒体的系统
US20040083015A1 (en) System for multimedia rendering in a portable device
CN1973531A (zh) 用于控制便携式装置中的照相机资源的系统
WO2022199111A1 (zh) 应用程序中功能的实现方法、装置、电子设备和存储介质
CN1573743A (zh) 优朋媒体服务器的媒体内容可见性以及启动显示
WO2020173391A1 (zh) 一种歌曲录制方法、修音方法及电子设备
CN101268446B (zh) 具有多个处理器的通信终端及该通信终端的操作方法
CN101065945A (zh) 媒体播放器与主机设备之间的无线同步
CN1902965A (zh) 灵活的消息传送系统
CN1682183A (zh) 在客户机-服务器通信中处理增量数据的方法和计算机系统
CN1677418A (zh) 电子邮件创建装置及其方法、程序和便携式终端
CN1658609A (zh) 定制应用内容供应的系统和方法
CN1653421A (zh) 用于向应用提供事件的方法以及使用该方法的电子设备
JP2007514993A (ja) 計算装置においてデバイスを動的にシミュレートするためのシステム及び方法
CN102959934A (zh) 用于共享图像的方法和装置
CN1925685A (zh) 电子设备、数据处理系统、数据处理方法和记录介质
JP2005518116A (ja) 移動体マルチメディアエンジン
RU2316907C2 (ru) Система воспроизведения мультимедиа в портативном устройстве
CN1294491C (zh) 在多个程序之间的数据共享的管理的方法
US20090315488A1 (en) Method and system for providing different vibration outputs
CN1992943A (zh) 便携式终端的高速数据传送和多任务处理方法
CN1535064A (zh) 通信装置及程序
RU2352977C2 (ru) Система для управления ресурсом камеры в портативном устройстве
CN1816800A (zh) 程序处理系统、程序处理方法以及计算机程序
CN1535063A (zh) 信息处理装置和程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1075521

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1075521

Country of ref document: HK

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20080709

Termination date: 20190604