CN1659536A - 用于在便携设备中再现多媒体的系统 - Google Patents
用于在便携设备中再现多媒体的系统 Download PDFInfo
- Publication number
- CN1659536A CN1659536A CN038130858A CN03813085A CN1659536A CN 1659536 A CN1659536 A CN 1659536A CN 038130858 A CN038130858 A CN 038130858A CN 03813085 A CN03813085 A CN 03813085A CN 1659536 A CN1659536 A CN 1659536A
- Authority
- CN
- China
- Prior art keywords
- multimedia
- content
- analysis processing
- format analysis
- processing program
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F15/00—Digital computers in general; Data processing equipment in general
- G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F15/00—Digital computers in general; Data processing equipment in general
- G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
- G06F15/163—Interprocessor communication
- G06F15/167—Interprocessor communication using a common memory, e.g. mailbox
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72406—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by software upgrading or downloading
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
- H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
Abstract
一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统。便携设备包括一种或多种再现资源。提供了一种执行以下操作的方法:根据多媒体内容生成多媒体对象,将格式处理程序和多媒体对象进行关联,以及利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。
Description
相关申请的交叉参考
本申请要求2002年6月4日提交的、名为“Mutlimedia Processing(多媒体处理)”的待审美国临时专利申请60/385,942的优先权。同时,本申请还要求2003年4月25日提交的、名为“多媒体处理”的待审美国临时专利申请的优先权。通过在本文中全文引用以上临时申请的公开,将其引入本申请。
技术领域
本发明总体上涉及多媒体处理,并且尤其涉及在具有嵌入式控制器的便携设备中再现多媒体的系统。
背景技术
技术的进步已经产生了更小并且功能更强的个人计算设备。例如,目前存在各种各样小、重量轻、便于用户携带的便携式蜂窝电话、个人数字助理(PDA)以及寻呼设备。通常,这些设备包括具有有限存储资源的嵌入式控制器。例如,可用存储量受到设备的小尺寸的限制。
然而,要求此类设备处理更大量数据并且执行更复杂的程序的需求日益增加。例如,用户需要远程访问诸如游戏程序之类的交互程序,这些程序要求便携设备快速并且有效地再现多媒体应用和内容。例如,用户可能希望使用其便携设备观看或收听诸如视频剪辑、动画、电影之类的多媒体内容,以及诸如以MP3格式提供的音乐内容之类的音频。
为了在便携设备上再现多媒体内容,需要控制设备的再现资源。例如,一种类型的便携设备可以包括一个低分辨率的显示屏或音频扬声器,而另一种类型的便携设备可以包括更大并且分辨率更高的显示屏和双扬声器立体声功能。因此,每种类型的便携设备可以具有不同的用其再现多媒体内容的多媒体再现资源。因此,当提供多媒体内容以便在具有不同配置和再现资源的各种便携设备上使用时,必须克服兼容问题。
用于克服兼容问题的一种技术要求多媒体内容处于一种与便携设备上可用的再现资源具体相兼容的格式。例如,如果内容开发商希望制作用于在特定便携设备上使用的视频内容,则开发商需要剪裁视频内容,以便与便携设备上可用的视频再现资源精确地兼容。
不幸的是,为了将在其上再现多媒体内容的每个便携设备制作剪裁的多媒体内容是昂贵而且效率低的。例如,内容开发商需要针对不同的便携设备修改内容,并且由此生成相同内容的多个版本。同时,当新的再现资源变得可用时,内容开发商必须不断地更新其内容。
因此,需要一种无需为每种设备上可用的不同再现资源而剪裁内容就能在各种便携设备上再现多媒体内容的系统。该系统在运行时应允许再现所有类型的多媒体内容,并且提供一种允许再现新开发的多媒体格式的可扩展的结构。
发明内容
在一种或多种实施方式中,提供了一种在便携设备上再现多媒体内容的多媒体系统,包括方法和装置。例如,便携设备可以是具有嵌入式控制器和有限存储资源的蜂窝电话,它执行程序指令,以便使用该设备的可用再现资源对多媒体内容进行再现。在一种或多种实施方式中,多媒体系统是一种小的并且有效的实现方式,它使用较少资源,并且特别适合于在包括具有有限存储资源的嵌入式控制器的便携设备中使用。
在一种实施方式中,该系统包括用于对设备的再现资源进行控制的一组格式处理程序(handler)。每个格式处理程序被设计用来处理具有特定格式的多媒体内容,从而对设备的再现资源进行控制以再现该内容。例如,每个格式处理程序再现(一种特定格式的)多媒体音频或视频文件(播放和理解它)。格式处理程序确定该内容所需的资源,读取文件,并且调用正确的资源。便携设备包括高级应用编程接口(API),格式处理程序使用API执行任务。可以在制造时将每个格式处理程序作为多媒体系统的一部分包括在便携设备中,或者可以动态地下载格式处理程序。因此,多媒体系统的一种或多种实施方式能够利用一组格式处理程序,从而无需根据在每个设备处可用的再现资源对内容进行剪裁,就可以在各种便携设备中再现多媒体内容。另外,多媒体系统提供了一种可扩展的结构,它允许通过添加用于再现新开发内容类型的新的格式处理程序,对系统进行扩展。
多媒体系统的结构对于多媒体用户和开发商来说都是有利的。例如,它允许开发商编写自己的用于在无线平台上使用的格式处理程序。并且,由于该系统提供了一种无需了解再现设备的精确配置就允许再现所有类型内容的简单接口,所以多媒体用户也能从中获利。
在一种实施方式中,提供了一种在具有嵌入式处理器的便携设备中再现多媒体内容的方法。便携设备还包括一种或多种再现资源。该方法包括:根据多媒体内容生成多媒体对象,将格式处理程序和多媒体对象进行关联,以及利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。
在另一种实施方式中,提供了一种在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统。便携设备包括一种或多种再现资源。多媒体系统包括创建媒体逻辑,媒体逻辑在运行时根据多媒体内容生成多媒体对象。该系统还包括选择逻辑,选择逻辑在运行时将格式处理程序与多媒体对象进行关联。该系统还包括格式处理逻辑,格式处理逻辑在运行时控制选定的再现资源来从多媒体对象再现多媒体内容。
在另一种实施方式中,提供了一种计算机可读介质,它包括用于在具有嵌入式处理器的便携设备中再现多媒体内容的计算机可执行指令。便携设备还包括一种或多种再现资源。该指令在执行时会执行以下方法,它包括:根据多媒体内容生成多媒体对象,将格式处理程序与多媒体对象进行关联,以及利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。
在另一种实施方式中,提供了一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统。便携设备还包括一种或多种再现资源。多媒体系统包括用于根据多媒体内容生成多媒体对象的装置。该系统还包括用于将格式处理程序与多媒体对象进行关联的装置。该系统还包括用于利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容的装置。
通过阅读以下阐述的附图简要说明、本发明的详细说明和权利要求书,本发明的其它方面、优点和特征将变得明显。
附图说明
通过结合附图参考以下详细描述,在此描述的实施方式的上述各个方面和附加优点将变得更加明显,其中:
图1表示包括便携无线设备的数据网络,该便携无线设备包括适于实现多媒体系统的一种实施方式以再现多媒体内容的嵌入式控制器;
图2为表示图1中的便携设备的一种实施方式的功能方框图,其中包括将其运行以再现多媒体内容的多媒体系统的一种实施方式;
图3表示图2中的多媒体系统的一种实施方式的详细方框图;
图4表示通过格式处理程序管理以再现多媒体内容的状态机的一种实施方式;以及
图5表示用于在便携设备中再现多媒体内容的方法的一种实施方式。
具体实施方式
以下详细说明描述了用于在便携设备中再现多媒体内容的多媒体系统,包括方法和装置。在一种或多种实施方式中,便携设备具有嵌入式控制器和有限的资源(即有限的存储容量),并且该系统在运行时利用设备的可用再现资源再现多媒体内容。
在一种或多种实施方式中,多媒体系统例如通过提供对设备特有资源的通用调用,与在该设备上运行的、用于简化设备操作的运行环境进行交互。一种这样的运行环境是由加利福尼亚州圣地亚哥的高通公司开发的无线二进制运行环境(BREWTM)软件平台。在以下描述中,假定多媒体系统是在执行诸如BREW软件平台之类的运行环境的便携设备上实现的。然而,多媒体系统的一种或多种实施方式适合于与其它类型的运行环境一起使用以在便携设备上再现多媒体内容。
图1表示包括便携无线设备102的数据网络100,其中便携无线设备102具有适合于实现多媒体系统的一种实施方式以再现多媒体内容的嵌入式控制器。例如,设备102包括以下称为“IMedia”的多媒体系统104的一种实施方式。在网络100中,无线设备102利用无线通信信道110经由无线网络108与网络服务器106进行通信。
在一种实施方式中,设备102包括可以经由无线网络108发射和/或接收语音信息的蜂窝电话。然而,所述多媒体系统的一种或多种实施方式适合于与其它类型的便携设备一起使用。例如,其它合适的便携设备包括但不限于:PDA、电子邮件设备、寻呼机、平板计算机、移动电话、或者包括多媒体再现资源的任何其它类型的便携设备。
设备102还可以经由无线网络108接收多媒体应用或内容。例如,可以将多媒体应用112和114从网络服务器106下载到设备102上。另外,也可以将多媒体内容116从网络服务器106下载到设备102上。将多媒体应用或内容从与无线网络108相连的其它任何网络实体中下载到设备102上,也是可能的。
在一种实施方式中,设备102也可以经由直接链路120直接与诸如本地工作站118之类的本地系统连接。在一种实施方式中,本地工作站118使用直接链路120将多媒体应用或内容下载到设备102上。例如,使用链路120,将多媒体应用122从工作站118下载到设备102上。
可以将IMedia系统104从服务器106下载到设备102上,并且将其在设备102上运行以便再现多媒体应用或内容。在另一种实施方式中,可以经由链路120将IMedia系统104从工作站118下载到设备102上,或者在制造期间将其安装到设备中。
在一种实施方式中,在诸如软盘之类的计算机可读介质上提供IMedia系统104,然后将其加载到系统118上用于向设备102进行传送。在另一种实施方式中,可以在诸如存储卡(未示出)之类的计算机可读存储设备上存储IMedia系统104,然后将其直接插入到设备102中,以便使IMedia系统104可以在设备102上运行。因此,设备102可以接收以无线方式发射或者以有线方式传送的IMedia系统104,或者通过直接从存储设备中获得IMedia系统104。
网络100还可以包括其它类型的便携设备,例如其它类型的无线或有线便携设备,并且这些设备可以与服务器106或采用各种网络类型和通信结构的任何其它网络实体进行通信,其中网络实体包括无线和有线网络、专用和公用网络、交换和非交换网络、直接链路以及它们的任意组合,以便下载IMedia系统104的一种或多种实施方式来再现多媒体内容。
图2为表示便携设备102的一种实施方式的功能方框图,其中包括将其运行以再现多媒体内容的IMedia系统104的一种实施方式。设备102包括与内部数据总线204和堆栈存储器216连接的处理逻辑202。与内部数据总线204连接的还有指令存储器206、多媒体应用/内容存储器208、堆存储器210、用户接口212、显示逻辑216、音频逻辑218以及输入/输出(I/O)接口214。
在设备102运行期间,处理逻辑202执行指令存储器206中存储的程序指令,以生成运行环境220。运行环境220可以是BREW环境或其它适合的运行环境。为了辅助指令执行,处理逻辑202利用堆栈存储器216临时存储程序数据或指令。例如,处理逻辑202可以在堆栈存储器216中存储常数、变量、程序地址、指针、指令和其它信息项。在另一种实施方式中,处理逻辑202可以在堆存储器210中临时存储信息。实际上,堆存储器包括适于由处理逻辑202存储和获取信息的任何类型的存储器。
在一种或多种实施方式中,处理逻辑202包括CPU、门阵列、硬件逻辑、软件,或者硬件和软件的组合。因此,处理逻辑202通常包括执行机器可读指令的逻辑。
指令存储器206包括RAM、ROM、FLASH、EEROM,或者其它任何合适类型的存储器,或者它们的组合。在一种实施方式中,指令存储器206位于设备102的内部,而在另一种实施方式中,指令存储器206包括可拆装的存储卡或存储设备,它可与设备102选择性地连接,并由此与内部总线204相连。因此,实际上,指令存储器206可以包括能够存储可由处理逻辑202执行的指令的任何类型的存储器。
用户接口212接收例如来自键盘、指示设备、触摸板或其它输入机制的用户输入,以允许用户与设备102进行交互。显示逻辑216包括向设备显示器输出信息的逻辑。例如,该设备可以包括LCD、LED或者其它类型的显示资源。音频逻辑218包括向设备扬声器、远程扬声器或音频系统、或者其它类型的声音资源输出音频信息的逻辑。例如,一对远程扬声器可以接收音频逻辑218的输出,以便为设备用户再现音频信息。因此,显示逻辑216和音频逻辑218可以包括硬件和/或软件的任意组合,以便允许设备102向设备用户再现可视信息或音频信息。
I/O接口214在运行时在设备102和外部设备、系统和/或网络之间发送和接收信息。例如,在一种实施方式中,I/O接口214包括无线收发机电路(未示出),该电路在运行时使用例如通信链路106经由无线数据网络发射和接收信息。例如,该收发机包括对从处理逻辑202接收的信息进行调制并将调制的信息转换为适于无线传输的高频信号的电路。类似地,该收发机还包括将接收的高频通信信号转换为适于由处理逻辑202进行解调和后续处理的信号的电路。
在另一种实施方式中,I/O接口214包括一个收发机,该收发机在运行时经由诸如电话线之类的硬布线的通信链路发送和接收信息,以便与诸如因特网之类的公用数据网中的远程系统进行通信。
在另一种实施方式中,I/O接口214包括将其运行以便利用链路120与诸如本地工作站116之类的本地设备进行通信的电路。I/O接口214还可以包括与打印机或其它本地计算机或诸如软盘或存储卡之类的设备进行通信的电路(例如串行或并行端口逻辑)。因此,I/O接口214可以包括任何类型的硬件、软件或它们的组合,从而允许设备102与其它本地或远程设备或者系统进行通信。
在设备102工作期间,由处理逻辑202执行程序指令使得生成IMedia系统104。例如,在执行时生成IMedia系统104的IMedia指令可以存储在指令存储器206中。IMedia系统104与运行环境220进行交互,以便在设备102上再现多媒体应用和内容。例如,可以经由无线网络108将多媒体应用和内容下载到设备102上,并且将其存储在存储器208中。在一种实施方式中,IMedia系统104经由内部总线204获取存储器208中存储的多媒体内容,并且通过经由运行环境220与该设备的再现资源(即显示逻辑、音频逻辑等)进行交互来对该内容进行处理,以便在设备102上再现该内容。同时,IMedia系统104在运行时处理并再现流式多媒体内容。例如,利用IMedia系统104在设备102上再现从网络108下载到设备102上的流式多媒体内容。
应当注意到,设备102的配置仅是适于实现用来再现多媒体应用和内容的IMedia系统104的一种实施方式的配置。在本发明的范围内使用其它设备或设备配置实现IMedia系统104,也是可能的。
图3表示用于在设备102中使用的IMedia系统104的一种实施方式的详细方框图。设备102包括其中包括处理逻辑202的本机硬件302,并且设备102可以选择性地包括特别为处理多媒体信息而设计的多媒体处理器304。没有进一步描述的情况下,假设本机硬件302包括用于操作该设备的再现资源(即,显示逻辑216等)的逻辑,并且假设可以运行处理逻辑202和多媒体处理器304来控制这些资源。
设备102还包括本机多媒体软件306,它包括音频1 308、音频2310和视频312模块。这些模块代表用于直接与本机硬件302进行通信以便控制选定的再现资源的低层软件模块。例如,视频模块312与多媒体处理器304进行通信,以控制视频再现资源。尽管示出了一种实施方式,但是也有可能有更少或更多的多媒体软件模块306,并且这些模块可以与所有类型的本机硬件302进行通信。因此,在本发明的范围内其它的本机硬件302和软件306配置也是可能的。
在操作期间,设备102执行程序指令以生成运行环境220,在一种实施方式中,该运行环境是BREW环境。然后有可能执行IMedia指令以生成IMedia系统104,以便与运行环境一起再现多媒体内容。例如,可以经由无线网络108将IMedia指令下载到设备上,并且将其存储到指令存储器206中。
IMedia系统104在运行时抽象出多媒体内容处理,并且在运行时定义多媒体接口的框架。在一种实施方式中,IMedia系统104在运行时提供以下特征:
1.提供对于设备多媒体特征和性能的通用和简便的访问。
2.屏蔽复杂的专用集成电路(ASIC)层的多媒体API和资源管理。
3.提供用以开发复杂的多媒体应用的创建块。
4.基于文件扩展、文件内容或者文件中的签名选择性地导出媒体类型。
IMedia系统104包括创建媒体工具324、媒体数据结构326、以及格式处理程序314、316、318和320。同时,示出了作为IMedia系统104一部分的IMedia抽象328,它表示在IMedia系统104运行期间创建的基本IMedia对象。提供IMedia系统组件的详细描述如下。
IMedia抽象
IMedia抽象328是能够注册和处理多媒体内容类型的抽象接口。
IMedia抽象328保留了对媒体数据结构326中的媒体数据的引用。媒体数据结构
媒体数据结构326在运行时封装媒体数据源或宿。这允许IMedia系统104对来自各个数据源或到达各个目的地的媒体数据进行流处理。在一种实施方式中,媒体数据结构326是从数据结构逻辑形成的,其中数据结构逻辑包括执行程序指令以生成存储器210中的媒体数据结构326的处理逻辑202。
创建媒体工具
创建媒体工具324执行几种功能。首先,创建媒体工具324在运行时接收用于再现的多媒体应用或内容。例如,多媒体应用或内容可以存储在存储器208中,并且该内容包括对创建媒体工具324的函数调用。其次,创建媒体工具324处理多媒体内容,以便根据媒体数据结构326中包含的信息创建IMedia对象328。在创建IMedia对象之后,创建媒体工具设置媒体数据并将IMedia对象置于预备状态中。在一种实施方式中,创建媒体工具324是从创建媒体逻辑形成的,其中创建媒体逻辑包括执行程序指令以便创建存储器210中的IMedia对象328并执行上述创建媒体工具的功能的处理逻辑202。
在一种实施方式中,创建媒体工具324包括选择逻辑,它包括执行程序指令以选择一个格式处理程序与IMedia对象328相关联并且执行其它上述功能的处理逻辑202。例如,选择逻辑对与媒体内容相关的数据结构326进行估计,以确定选择哪一个格式处理程序。
格式处理程序
在一种实施方式中,IMedia系统104包括一组格式处理程序(FH)。例如,IMedia系统104包括MIDI 314、MP3 316、MPEG4 318和ADCPM 320格式处理程序。这些格式处理程序在IMedia对象328和设备102的多媒体再现硬件和软件之间提供接口322。在一种实施方式中,格式处理程序对公用指令集进行解释,从而使多媒体应用或内容可以利用相同的指令来指示格式处理程序执行诸如播放、停止、倒带等类似任务。可以使用任意数目的格式处理程序,并且可以添加新的格式处理程序,以便再现新类型的多媒体内容。在一种实施方式中,格式处理程序是从格式处理逻辑形成的,其中格式处理逻辑包括执行程序指令以执行上述格式处理程序的功能的处理逻辑202。
在一种实施方式中,公用指令集指示格式处理程序再现多媒体内容,并且提供用于传递参数和状态的机制。公用指令集中包括的指令的示例如下:
1.IMedia_SetMediaParm() ;设置FH的参数
2.IMedia_GetMediaParm() ;从FH获取参数
3.IMedia_SetMediaData() ;设置媒体数据
4.IMedia_GetMediaData() ;获取媒体数据
5.IMedia_GetClassID() ;获取类ID
6.IMedia_GetState() ;获取状态
7.IMedia_RegisterNotify() ;向FH注册回叫
8.IMedia_Play() ;向FH发送播放命令
9.IMedia_Stop() ;向FH发送停止命令
10.IMedia_SetRect() ;设置视频参数
例如,IMedia对象中可以包括IMedia_SetMediaParm()指令,以便指示格式处理程序设置特定的参数、设置或与格式处理程序相关的变量。例如,利用IMedia_SetMediaParm()指令,能够设置与设计用来再现MPEG视频的格式处理程序相关的参数。在其它实施方式中,特定格式处理程序也可以对附加指令(未示出)进行解释,其中附加指令可以包括在IMedia对象328中,并且使用附加指令控制受控资源的特定功能。
在一种实施方式中,格式处理程序是在便携设备上运行的作为IMedia系统104一部分的软件。在另一种实施方式中,格式处理程序可以是硬件和软件的组合。另外,当格式处理程序变得可用时,可以将其添加到IMedia系统中,从而使得IMedia系统是可扩展的,并且当其变得可用时能够再现新类型的多媒体内容。
在运行期间,格式处理程序将其自身(其MIME类型)向运行环境进行注册,并且通过查询MIME类型或枚举该系统支持(注册)的格式处理程序的列表,多媒体应用可以检测格式处理程序。每个格式处理程序提供功能选择,它包括但不限于:
1.提供应用编程接口(API),该接口:
a.执行多媒体内容的重放和录制,包括诸如搜索、暂停、重新开始之类的控制功能;
b.设置和/或获取音频和视频控制参数;
c.处理来自IMedia对象的异步事件。
2.经由注册的回叫函数发送异步媒体事件。
3.管理设备多媒体再现资源。
4.管理可通过导出类扩展的状态机。
图4表示通过诸如格式处理程序318的格式处理程序管理以再现多媒体内容的状态机400的一种实施方式。格式处理程序的初始状态是空闲402。一旦将格式处理程序和IMedia对象进行关联之后,格式处理程序的状态就转到预备404。根据与多媒体内容相关的命令,格式处理程序可以从预备状态404进入到播放状态406或录制状态408。格式处理程序可以从播放状态406和录制状态408转到播放暂停状态410或录制暂停状态412。也有可能从这些状态重新开始相应的播放状态406和录制状态408。格式处理程序还可以停止414,然后返回到预备状态404。
因此,利用状态机400,每个格式处理程序能够控制设备的再现资源,以便再现与该格式处理程序关联的多媒体应用或内容(IMedia对象)。在另一种实施方式中,格式处理程序也能够实现与图4所示的状态机不同的状态机。另外,在其它实施方式中,能够定义可以在再现处理期间使用的附加状态。
图5表示在便携设备中再现多媒体内容的方法500的一种实施方式。
在框502中,通过使用IMedia构造创建多媒体应用或内容,使得可以将其再现在便携设备上。例如,应用开发商使用创建媒体工具324创建IMedia对象。IMedia对象数目和诸如同时播放或录制之类的性能是依赖于设备的。所有的IMedia对象均遵循如图4所示的基本状态机。在一种实施方式中,可以使用以下步骤创建并使用IMedia对象。
1.基于媒体数据源/宿创建媒体数据结构并且对其进行初始化。按以下方式定义AEEMediaData:
typedef struct
{
AEECLSID clsData; //媒体数据的类型
void*pData; //上下文敏感的数据(见表格)
unit32 dwSize; //上下文敏感的数据(见表格)
}AEEMediaData;
2.基于下表中的信息初始化以上结构的成员。
clsStream | pData | dwSize | 注释 |
MMD_FILE_NAME | 文件名 | 0 | 用于重放和录制。文件不是由IMedia打开的,而是把文件名传递到ASIC层的API,由API打开该文件。 |
MMD_BUFFER | 缓冲器指针 | 缓冲器的大小 | 用于重放和录制。缓冲器必须包括完整的媒体数据。 |
MMS_Source | ISource | 总的数据大小或为0 | 实时流处理 |
在框504中,将多媒体内容下载到用于再现的便携设备。例如,可以经由无线数据网络108将应用或内容下载到设备上。可以按流内容的方式再现内容,或者将其存储到存储器中并且稍后再进行再现。
在框506中,基于所接收的内容中包括的媒体源或宿的特性,创建并初始化媒体数据结构。例如,将媒体数据结构存储在媒体数据结构326中。在一种实施方式中,基于文件扩展、文件内容或文件中包括的签名,导出媒体类型。
在框508中,使用相关的数据结构创建IMedia对象。例如,使用创建媒体工具324创建IMedia对象。在预备状态404中返回IMedia对象。
在框510中,如果需要从IMedia对象接收异步事件,则执行可选的步骤以注册通知函数。
在框512中,将IMedia对象与格式处理程序进行关联,并且在便携设备上再现多媒体应用或内容。例如,格式处理程序可以提供状态机400的任意功能,以便再现多媒体内容。
在框514中,在已经对该内容进行再现之后并且不再需要IMedia对象时,释放该对象。
实现示例
以下是表示在一种实施方式中如何创建IMedia对象的一个实现示例。该示例包括对图5所示方法的相应框的引用,并且假设便携设备102使用的运行环境是BREW环境。因此,“CApp”是BREW小应用程序全局结构的实例。
static void App_PlayMedia(CApp*pme) { int nRet; AEEMediaData md; //创建媒体数据结构(图5中的框506) md.clsData=MMD_FILE_NAME; md.pData=(void*)“media/midi_fmt1.mid”; <!-- SIPO <DP n="14"> --> <dp n="d14"/> md.dwSize=0; //创建IMedia对象并进入预备状态(图5中的框508) nRet=AEEMediaUtil_CreateMedia(pme->a.pIShell,&md, pme->m_pIMedia); //如果成功,则将App_MediaNotify()注册作为IMedia事件的注册 回叫函数(图5中的块510) if(SUCCESS!=nRet) DisplayErrorDlg(pme,IDS_ERR_CREATEMEDIA); else if(SUCCESS!=IMEDAI_RegisterNotify(pme->pIMedia, App_mediaNotify,pme)) DisplayErrorDlg(pme,IDS_ERR_REGISTERNOTIFY); else if(SUCCESS!=IMEDIA_Play(pme->m_pIMedia)) //开始重 放(图5中的框512) DisplayErrorDlg(pme,IDS_ERR_PLAY);
在本发明包括的一种或多种实施方式中,运行包括方法和装置的多媒体系统,以便在具有嵌入式控制器的有限资源的便携设备上再现多媒体应用和内容。因此,尽管在此已经举例说明并且指出了该方法和装置的一种或多种实施方式,但是应该理解到,能够对各实施方式作出各种改变而并不背离其精神或实质特征。因此,在此的公开和说明只是说明而不是限制在所附权利要求书中阐述的本发明的范围。
Claims (14)
1.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的方法,该便携设备还包括一种或多种再现资源,并且该方法包括:
根据多媒体内容生成多媒体对象;
将格式处理程序和多媒体对象进行关联;以及
利用格式处理程序控制选定的再现资源,以便从多媒体对象再现多媒体内容。
2.根据权利要求1的方法,还包括:根据多媒体内容生成多媒体数据结构。
3.根据权利要求1的方法,其中控制步骤包括:
在格式处理程序中实现状态机,以便控制选定的再现资源;以及
利用格式处理程序中的状态机再现多媒体内容。
4.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统,该便携设备还包括一种或多种再现资源,并且该多媒体系统包括:
创建媒体逻辑,其在运行时根据多媒体内容生成多媒体对象;
选择逻辑,其在运行时将格式处理程序和多媒体对象进行关联;以及
格式处理逻辑,其在运行时控制选定的再现资源以从多媒体对象再现多媒体内容。
5.根据权利要求4的系统,进一步包括:用于根据多媒体内容生成多媒体数据结构的数据结构逻辑。
6.根据权利要求5的系统,其中格式处理逻辑包括:
在格式处理程序中实现状态机以便控制选定的再现资源的逻辑;以及
利用格式处理程序中的状态机对多媒体内容进行再现的逻辑。
7.一种包括用于在具有嵌入式处理器的便携设备中再现多媒体内容的计算机可执行指令的计算机可读介质,该便携设备还包括一种或多种再现资源,当执行指令时,该指令执行包括以下步骤的方法:
根据多媒体内容生成多媒体对象;
将格式处理程序和多媒体对象进行关联;以及
利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。
8.根据权利要求7的计算机可读介质,进一步包括根据多媒体内容生成多媒体数据结构。
9.根据权利要求7的计算机可读介质,其中控制步骤包括:
在格式处理程序中实现状态机以便控制选定的再现资源;以及
利用格式处理程序中的状态机再现多媒体内容。
10.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统,该便携设备还包括一种或多种再现资源,并且该多媒体系统包括:
用于根据多媒体内容生成多媒体对象的装置;
用于将格式处理程序和多媒体对象进行关联的装置;以及
用于利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容的装置。
11.根据权利要求10的系统,进一步包括:用于根据多媒体内容生成多媒体数据结构的装置。
12.根据权利要求10的系统,其中用于控制选定的再现资源的装置包括:
用于在格式处理程序中实现状态机以便控制选定的再现资源的装置;以及
用于利用格式处理程序中的状态机再现多媒体内容的装置。
13.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的多媒体系统,该便携设备还包括一种或多种再现资源,并且该多媒体系统包括:
一个或多个格式处理程序,其在运行时控制便携设备中的一种或多种再现资源;以及
创建工具,其在运行时从多媒体内容创建多媒体对象,并且将选定的格式处理程序和多媒体对象进行关联,其中选定的格式处理程序从多媒体对象再现多媒体内容。
14.一种用于在具有嵌入式处理器的便携设备中再现多媒体内容的方法,该便携设备还包括一种或多种再现资源,并且该方法包括:
利用媒体构造对多媒体内容进行编码;
向便携设备传送多媒体内容;
根据媒体构造生成多媒体对象;
将格式处理程序和多媒体对象进行关联;以及
利用格式处理程序控制选定的再现资源以便从多媒体对象再现多媒体内容。
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US38594202P | 2002-06-04 | 2002-06-04 | |
US60/385,942 | 2002-06-04 | ||
US46553303P | 2003-04-25 | 2003-04-25 | |
US60/465,533 | 2003-04-25 | ||
US10/453,091 | 2003-06-02 | ||
US10/453,091 US20040083015A1 (en) | 2002-06-04 | 2003-06-02 | System for multimedia rendering in a portable device |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1659536A true CN1659536A (zh) | 2005-08-24 |
CN100401281C CN100401281C (zh) | 2008-07-09 |
Family
ID=29716141
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB038130858A Expired - Fee Related CN100401281C (zh) | 2002-06-04 | 2003-06-04 | 用于在便携设备中再现多媒体的方法和系统 |
Country Status (12)
Country | Link |
---|---|
EP (1) | EP1522024A4 (zh) |
JP (2) | JP4943650B2 (zh) |
KR (1) | KR20050010851A (zh) |
CN (1) | CN100401281C (zh) |
AU (1) | AU2003251399C1 (zh) |
BR (1) | BR0311545A (zh) |
CA (1) | CA2488470A1 (zh) |
HK (1) | HK1075521A1 (zh) |
IL (1) | IL165278A0 (zh) |
MX (1) | MXPA04012143A (zh) |
NZ (1) | NZ536703A (zh) |
WO (1) | WO2003103212A2 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102647629A (zh) * | 2012-04-27 | 2012-08-22 | 北京人民广播电台 | 内容播放方法和装置 |
CN109154947A (zh) * | 2016-05-25 | 2019-01-04 | 三星电子株式会社 | 用于呈现定制和交互的方法和设备 |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4591279B2 (ja) * | 2005-08-19 | 2010-12-01 | ソニー株式会社 | 情報処理装置および情報処理方法、記録媒体、並びに、プログラム |
KR100630123B1 (ko) | 2005-08-31 | 2006-09-28 | 삼성전자주식회사 | 디지털 멀티미디어 방송 데이터를 수신 및 재생하기 위한이동 단말기 액세서리 장치 및 방법 |
US9380096B2 (en) | 2006-06-09 | 2016-06-28 | Qualcomm Incorporated | Enhanced block-request streaming system for handling low-latency streaming |
US9209934B2 (en) | 2006-06-09 | 2015-12-08 | Qualcomm Incorporated | Enhanced block-request streaming using cooperative parallel HTTP and forward error correction |
US9432433B2 (en) | 2006-06-09 | 2016-08-30 | Qualcomm Incorporated | Enhanced block-request streaming system using signaling or block creation |
US9386064B2 (en) | 2006-06-09 | 2016-07-05 | Qualcomm Incorporated | Enhanced block-request streaming using URL templates and construction rules |
EP2257040A1 (en) * | 2009-05-29 | 2010-12-01 | Thomson Licensing | Method and apparatus for distributing a multimedia content |
US9917874B2 (en) | 2009-09-22 | 2018-03-13 | Qualcomm Incorporated | Enhanced block-request streaming using block partitioning or request controls for improved client-side handling |
US9319448B2 (en) | 2010-08-10 | 2016-04-19 | Qualcomm Incorporated | Trick modes for network streaming of coded multimedia data |
US10135900B2 (en) | 2011-01-21 | 2018-11-20 | Qualcomm Incorporated | User input back channel for wireless displays |
US9413803B2 (en) | 2011-01-21 | 2016-08-09 | Qualcomm Incorporated | User input back channel for wireless displays |
US9787725B2 (en) | 2011-01-21 | 2017-10-10 | Qualcomm Incorporated | User input back channel for wireless displays |
US20130013318A1 (en) | 2011-01-21 | 2013-01-10 | Qualcomm Incorporated | User input back channel for wireless displays |
CN103777938A (zh) * | 2012-10-25 | 2014-05-07 | 百度在线网络技术(北京)有限公司 | 支持多浏览器的播放方法及装置 |
CN104618817B (zh) * | 2015-02-26 | 2018-07-17 | 北京奇艺世纪科技有限公司 | 一种播放网站视频的控制方法及装置 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6505160B1 (en) * | 1995-07-27 | 2003-01-07 | Digimarc Corporation | Connected audio and other media objects |
US6181713B1 (en) * | 1997-10-27 | 2001-01-30 | Sun Microsystems, Inc. | Selectable depacketizer architecture |
US6216152B1 (en) * | 1997-10-27 | 2001-04-10 | Sun Microsystems, Inc. | Method and apparatus for providing plug in media decoders |
DE69902292T2 (de) * | 1998-10-26 | 2003-03-27 | Sony Electronics Inc | Digitales videodaten-spezialwiedergabe-management |
US6356529B1 (en) * | 1999-08-12 | 2002-03-12 | Converse, Ltd. | System and method for rapid wireless application protocol translation |
KR100340169B1 (ko) * | 1999-09-27 | 2002-06-10 | 서성철 | 자바를 이용한 동적 멀티미디어 웹 카타로깅 시스템 및 그 방법 |
KR20020064888A (ko) * | 1999-10-22 | 2002-08-10 | 액티브스카이 인코포레이티드 | 객체 지향형 비디오 시스템 |
JP2001125920A (ja) * | 1999-10-29 | 2001-05-11 | Nippon Telegr & Teleph Corp <Ntt> | メディア情報の通信システムおよびメディア情報の通信方法並びにこの方法を記録した記録媒体 |
JP2001168923A (ja) * | 1999-12-08 | 2001-06-22 | Toshiba Corp | マルチメディア提供システム、マルチメディア変換サーバ、およびマルチメディア端末 |
US20010052933A1 (en) * | 2000-01-12 | 2001-12-20 | Nybo Larry Carl | System and method for image capture, storage and retrieval |
US6684088B1 (en) * | 2000-03-01 | 2004-01-27 | Axi Mobile Ltd. | System and method for displaying electronic mail messages on a low bandwidth device |
US20010037404A1 (en) * | 2000-04-04 | 2001-11-01 | Gudmundur Hafsteinsson | System for wireless communication of data between a WEB server and a device using a wireless application protocol |
US6891893B2 (en) * | 2000-04-21 | 2005-05-10 | Microsoft Corp. | Extensible multimedia application program interface and related methods |
US6438575B1 (en) * | 2000-06-07 | 2002-08-20 | Clickmarks, Inc. | System, method, and article of manufacture for wireless enablement of the world wide web using a wireless gateway |
US20020080143A1 (en) * | 2000-11-08 | 2002-06-27 | Morgan David L. | Rendering non-interactive three-dimensional content |
US20020103920A1 (en) * | 2000-11-21 | 2002-08-01 | Berkun Ken Alan | Interpretive stream metadata extraction |
US7139470B2 (en) * | 2001-08-17 | 2006-11-21 | Intel Corporation | Navigation for MPEG streams |
US20030156131A1 (en) * | 2002-02-21 | 2003-08-21 | Samir Khazaka | Method and apparatus for emulating a mobile device |
-
2003
- 2003-06-04 WO PCT/US2003/017690 patent/WO2003103212A2/en active Application Filing
- 2003-06-04 JP JP2004510169A patent/JP4943650B2/ja not_active Expired - Fee Related
- 2003-06-04 BR BRPI0311545-3A patent/BR0311545A/pt not_active IP Right Cessation
- 2003-06-04 AU AU2003251399A patent/AU2003251399C1/en not_active Ceased
- 2003-06-04 IL IL16527803A patent/IL165278A0/xx unknown
- 2003-06-04 CA CA002488470A patent/CA2488470A1/en not_active Abandoned
- 2003-06-04 KR KR10-2004-7019567A patent/KR20050010851A/ko not_active IP Right Cessation
- 2003-06-04 NZ NZ536703A patent/NZ536703A/en not_active IP Right Cessation
- 2003-06-04 MX MXPA04012143A patent/MXPA04012143A/es active IP Right Grant
- 2003-06-04 EP EP03756403A patent/EP1522024A4/en not_active Withdrawn
- 2003-06-04 CN CNB038130858A patent/CN100401281C/zh not_active Expired - Fee Related
-
2005
- 2005-11-01 HK HK05109690.9A patent/HK1075521A1/xx not_active IP Right Cessation
-
2010
- 2010-07-23 JP JP2010166237A patent/JP2010288301A/ja active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102647629A (zh) * | 2012-04-27 | 2012-08-22 | 北京人民广播电台 | 内容播放方法和装置 |
CN109154947A (zh) * | 2016-05-25 | 2019-01-04 | 三星电子株式会社 | 用于呈现定制和交互的方法和设备 |
CN109154947B (zh) * | 2016-05-25 | 2023-03-21 | 三星电子株式会社 | 用于播放呈现的方法和用户设备以及服务器 |
Also Published As
Publication number | Publication date |
---|---|
IL165278A0 (en) | 2005-12-18 |
HK1075521A1 (en) | 2005-12-16 |
WO2003103212A3 (en) | 2004-06-17 |
CN100401281C (zh) | 2008-07-09 |
KR20050010851A (ko) | 2005-01-28 |
MXPA04012143A (es) | 2005-04-19 |
JP2010288301A (ja) | 2010-12-24 |
EP1522024A2 (en) | 2005-04-13 |
BR0311545A (pt) | 2007-04-27 |
WO2003103212A2 (en) | 2003-12-11 |
AU2003251399C1 (en) | 2009-12-17 |
EP1522024A4 (en) | 2007-03-28 |
CA2488470A1 (en) | 2003-12-11 |
AU2003251399B2 (en) | 2009-07-23 |
NZ536703A (en) | 2007-11-30 |
JP4943650B2 (ja) | 2012-05-30 |
JP2005528849A (ja) | 2005-09-22 |
AU2003251399A1 (en) | 2003-12-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1659536A (zh) | 用于在便携设备中再现多媒体的系统 | |
US20040083015A1 (en) | System for multimedia rendering in a portable device | |
CN1973531A (zh) | 用于控制便携式装置中的照相机资源的系统 | |
WO2022199111A1 (zh) | 应用程序中功能的实现方法、装置、电子设备和存储介质 | |
CN1573743A (zh) | 优朋媒体服务器的媒体内容可见性以及启动显示 | |
WO2020173391A1 (zh) | 一种歌曲录制方法、修音方法及电子设备 | |
CN101268446B (zh) | 具有多个处理器的通信终端及该通信终端的操作方法 | |
CN101065945A (zh) | 媒体播放器与主机设备之间的无线同步 | |
CN1902965A (zh) | 灵活的消息传送系统 | |
CN1682183A (zh) | 在客户机-服务器通信中处理增量数据的方法和计算机系统 | |
CN1677418A (zh) | 电子邮件创建装置及其方法、程序和便携式终端 | |
CN1658609A (zh) | 定制应用内容供应的系统和方法 | |
CN1653421A (zh) | 用于向应用提供事件的方法以及使用该方法的电子设备 | |
JP2007514993A (ja) | 計算装置においてデバイスを動的にシミュレートするためのシステム及び方法 | |
CN102959934A (zh) | 用于共享图像的方法和装置 | |
CN1925685A (zh) | 电子设备、数据处理系统、数据处理方法和记录介质 | |
JP2005518116A (ja) | 移動体マルチメディアエンジン | |
RU2316907C2 (ru) | Система воспроизведения мультимедиа в портативном устройстве | |
CN1294491C (zh) | 在多个程序之间的数据共享的管理的方法 | |
US20090315488A1 (en) | Method and system for providing different vibration outputs | |
CN1992943A (zh) | 便携式终端的高速数据传送和多任务处理方法 | |
CN1535064A (zh) | 通信装置及程序 | |
RU2352977C2 (ru) | Система для управления ресурсом камеры в портативном устройстве | |
CN1816800A (zh) | 程序处理系统、程序处理方法以及计算机程序 | |
CN1535063A (zh) | 信息处理装置和程序 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 1075521 Country of ref document: HK |
|
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: GR Ref document number: 1075521 Country of ref document: HK |
|
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20080709 Termination date: 20190604 |