CN102017651A - 使用富媒体内容组成场景的装置和方法 - Google Patents
使用富媒体内容组成场景的装置和方法 Download PDFInfo
- Publication number
- CN102017651A CN102017651A CN2009801139998A CN200980113999A CN102017651A CN 102017651 A CN102017651 A CN 102017651A CN 2009801139998 A CN2009801139998 A CN 2009801139998A CN 200980113999 A CN200980113999 A CN 200980113999A CN 102017651 A CN102017651 A CN 102017651A
- Authority
- CN
- China
- Prior art keywords
- information
- user interface
- scene
- terminal
- stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 70
- 230000006978 adaptation Effects 0.000 claims abstract description 30
- 230000003044 adaptive effect Effects 0.000 claims description 46
- 238000001914 filtration Methods 0.000 claims description 10
- 239000012634 fragment Substances 0.000 claims description 7
- 238000006116 polymerization reaction Methods 0.000 claims 1
- 239000000470 constituent Substances 0.000 description 20
- 230000008569 process Effects 0.000 description 16
- 230000005039 memory span Effects 0.000 description 9
- 230000008859 change Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000007689 inspection Methods 0.000 description 3
- 230000001195 anabolic effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008521 reorganization Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4348—Demultiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
- H04N21/4382—Demodulation or channel decoding, e.g. QPSK demodulation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8543—Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Computer Security & Cryptography (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
- Circuits Of Receivers In General (AREA)
Abstract
一种在终端中用于富媒体服务的用户界面方法和装置。解码器将所接收的流解码以检查所接收的流的首标。渲染器根据由解码器检查的首标中的适配信息,使用所接收的流的场景组成元素自适应地组成场景,而且显示器显示所述自适应地组成的场景。
Description
技术领域
本发明一般涉及支持富媒体服务(Rich Media Service)的终端的内容组成技术。更具体地,本发明涉及使用富媒体服务内容自适应地组成(compose)场景的装置和方法。
背景技术
通信市场需要不断地通过现有技术的重组和/或整合来产生新服务。为此,今天,通信和广播技术正在发展以通过诸如TV之类的广播终端以及通信设备(以下称为“终端”)来提供富媒体服务。
轻型应用场景表现(以下称为“LASeR”)已被采用作为用于提供富媒体服务的国际标准。LASeR可以使用诸如场景描述、视频、音频、图像、字体、和元数据之类的各种元素来提供使得能够自由表现各种多媒体和与用户的交互的服务。此外,LASeR技术可以多路复用和同步各种媒体的元素流(ES)并使用简单聚合格式(SAF)来最小化其复杂度。
发明内容
技术问题
随着通信技术的近期趋势,这样的网络模型是可能的,其中通过例如具有网络的融合的单个网络来连接不同类型的终端,诸如数字视频广播-广播与移动服务的融合(DVB-CBMS)或互联网协议TV(IPTV)。在单个整合服务供应商管理由有线/无线融合形成的网络的服务模型中,可以向终端提供相同的服务而不管它们的类型如何。
在该商业模型中,特别是在广播服务模型中,将单个广播流同时发送到具有不同的显示尺寸、性能、和特性的终端。因而,当向具有不同特性的多个终端提供相同的富媒体服务时。结果,当接收广播内容时,向从具有大屏幕的终端(例如,TV)到具有小屏幕的终端(例如,移动电话机)的终端提供相同的LASeR内容。
然而,已经接收为诸如TV之类的大屏幕尺寸而优化的场景的具有小屏幕的终端可能难以确保用于广播服务内容的可用资源,并且例如应当组成与该终端的实际屏幕尺寸相比较来说过于复杂的场景。
技术方案
本发明已被设计为解决至少以上问题和/或缺点并且提供至少下述优点。因此,本发明的一个方面在于提供用于组成多媒体服务的场景的装置和方法。
本发明的另一个方面在于提供使用多媒体服务内容组成自适应场景的装置和方法。
本发明的另一个方面在于提供通过过滤单个多媒体服务内容来自适应地组成场景的装置和方法。
本发明的另一个方面在于提供使用富媒体(例如,LASeR)内容自适应地组成场景的装置和方法。
本发明的另一个方面在于提供考虑特定条件或接收终端的性能组成LASeR场景的装置和方法。
根据本发明的一个方面,提供一种用于富媒体服务的终端的用户界面方法。该用户界面方法包括:检查所接收的流的首标;当该首标中包含适配信息时,使用所接收的流的场景组成元素来组成自适应场景;以及显示所组成的自适应场景。
根据本发明的另一个方面,提供一种用于富媒体服务的终端的用户界面装置。该用户界面装置包括:解码器,用于解码所接收的流以检查所接收的流的首标;渲染器,用于根据由解码器检查的首标中的适配信息,使用所接收的流的场景组成元素来自适应地组成场景;以及显示器,用于显示所组成的场景。
有益效果
从前面的描述中显然可知,本发明可以考虑特定条件或终端的属性以及与终端的性能有关的特定事件,诸如显示尺寸、CPU处理能力、存储器、电池状态、输入/输出设备等等,降低在不具有足够的可用资源的终端处支持LASeR服务的负担,和/或在具有足够的可用资源的终端处提供更富的IASeR服务。
附图说明
通过下面结合附图的描述,本发明的特定示范性实施例的上述和其他方面、特征、和优点将变得更加显而易见,其中:
图1示出用于接收LASeR数据流的终端的操作;
图2示出根据本发明的实施例的用于接收LASeR数据流的终端的操作;
图3示出根据本发明的实施例的用于接收通过在LASeR服务中多路复用数据流而服务的LASeR数据流的终端的操作;
图4示出根据本发明的实施例的用于接收LASeR数据流的终端的操作;
图5是示出根据本发明的实施例的服务LASeR内容的操作;
图6是示出根据本发明的实施例的发送器的结构的框图;以及
图7是示出根据本发明的实施例的接收器的结构的框图。
具体实施方式
提供参考附图的以下描述以帮助全面地理解本发明的特定实施例。因此,它包括各种细节来帮助该理解。然而,这些细节将被认为仅仅是示范性的。此外,本领域普通技术人员将认识到,可以对这里描述的实施例进行各种变化和修改而不背离本发明的范围和精神。此外,为了清楚和简洁起见,略去公知的功能和结构的描述。
以下说明书和权利要求书中使用的术语和词语不限于书面意义,而是仅仅被发明人使用来使得能够清楚且一致地理解本发明。本领域技术人员应当显然可知,提供本发明的实施例的以下说明仅仅是为了例示的目的,而不是为了限制本发明的目的,本发明将由所附的权利要求书及其等效物限定。
在下面的描述中,给出基于作为一种类型的富媒体引擎(RME)的LASeR引擎的终端作为示例。同时,基于LASeR引擎的终端的示例可以同样应用于基于其他RME引擎的终端。然而,当应用于终端的RME或系统发生变化时,构成其引擎、系统和数据的组元的名称将很可能使用唯一地用于其他RME引擎或系统中的不同的名称。
本发明的实施例提供用于发送和接收LASeR服务中的适合于特定条件或终端的性能的LASeR内容的方法和装置。这里使用的术语“终端”可以包括便携式通信设备和有线/无线通信设备,包括电话机(包括移动电话机、无线电话机、有线电话机)、个人数字助理(PDA)、膝上型计算机、笔记本型计算机等等。
特别地,本发明的特定实施例提供用于接收LASeR服务的终端的场景表现和组成技术,并且还提供用于在提供服务的自适应场景时根据特定条件或与终端的特性(特征)有关的属性、根据特定事件的发生、以及根据终端的性能提供LASeR内容的方法和装置。
图1示出用于接收LASeR内容的终端的操作。
参考图1,终端在步骤100接收LASeR服务内容,并在步骤110解码所接收的LASeR内容。在步骤120,终端检查LASeR命令并相应地执行该命令。其后,终端在步骤130基于LASeR内容处理所有事件,并在步骤140通过执行场景组成命令来显示场景。
这里,数据流除了包括提供LASeR服务所必需的基本元素之外,还可以包括复杂的场景组成元素,或者可以包括适合于高端终端(通信设备)的场景组成元素、或添加到基本场景的数据。此外,这里描述的LASeR数据流包括包含与每个终端的特性有关的组元的数据流。所述特性可以包括接收数据流的终端的特征和性能。
图2示出根据本发明的实施例的用于接收LASeR内容的终端的操作。更具体地说,图2示出了当LASeR数据流包括用于具有丰富的可用资源的终端的场景组成数据、或包括适合于终端的性能的场景组成数据时,即当LASeR数据流包括指示“自适应场景组元(adaptive scene component)”的信息时,用于组成场景的终端的操作。
参考图2,终端在步骤200接收LASeR流,并在步骤210解码所接收的LASeR流。在步骤220,终端确定所解码的LASeR流是否包括首标。如果LASeR流包括首标,则该终端在步骤230检查首标信息。在步骤250如果检查的首标信息中指示“自适应场景组元”的信息,即“AdaptiveSceneIndicator”字段的值,是FALSE(假),则终端在步骤280在其屏幕上显示所接收的数据流。然而,如果检查的“AdaptiveSceneIndicator”字段的值是TRUE(真),则终端在步骤260检查其性能。
在步骤260,如果该性能不足以服务“自适应场景组元”,则终端在步骤265将用于数据丢弃的设置信息设置为ON以丢弃所接收的LASeR流。通过丢弃待解码的LASeR流而不进行解码,终端避免在屏幕上显示数据流。即便要被丢弃的LASeR流已经被解码,终端也可以通过立即从存储器中删除数据来执行丢弃过程。
然而,如果在步骤260该性能足以服务“自适应场景组元”,则在步骤290,终端将用于数据丢弃的设置信息设置为OFF以便不丢弃LASeR流。其后,在步骤280,终端通过在屏幕上显示数据流来提供LASeR服务。步骤280的实际显示过程虽然没有在这里详细描述,但是还可以包括服务要被服务的内容而不丢弃的进一步的技术步骤。
此外,如果在步骤220,解码的LASeR流没有首标,则终端在步骤270检查LASeR流中的用于数据丢弃的设置信息。如果用于数据丢弃的设置信息被设置为ON,则终端在步骤275丢弃LASeR流而不进一步处理,即不在存储器中组成或渲染它。然而,如果用于数据丢弃的设置信息被设置为OFF,则终端在步骤280在屏幕上显示LASeR流。
在上述实施例中,除接收流(步骤200)、解码所接收的流(步骤210)、和参考“AdaptiveSceneIndicator”字段的值(步骤250)在屏幕上显示所接收的流(步骤280)、以及通过参考“AdaptiveSceneIndicator”字段的值(步骤250)避免处理流直到接收到具有“AdaptiveSceneIndicator”字段的数据的一系列过程之外,所有其他的过程可以根据终端的类型或设计而改变顺序或省略。
此外,如果可以使用“AdaptiveSceneIndicator”字段或在本发明中新定义的其他字段和属性来提供与本发明的服务相同的服务,则本领域技术人员显然可知,可以对这里描述的实施例进行各种变化和修改而不背离本发明的范围和精神。
现在将详细描述LASeR首标中的信息,其指示所接收的LASeR流是“自适应场景组元”。
在下面的描述中,给出LASeR作为示例,用于指示“自适应场景组元”的新字段和属性也可以被用作数据的字段和属性,所述数据不仅包括首标类型的数据,而且包括命令、元素、字段、单元、和有效载荷。
“AdaptiveSceneIndicator”字段可以用各种方式来表示,例如,用布尔代数表示,用诸如1、2、3和4的整数表示,或用诸如基本和增强的符号级来表示。然而,当用除了布尔代数之外的其他值表示“AdaptiveSceneIndicator”字段时,应当必然能够表示其属性的特定值以区分“自适应场景组元”。
例如,当“AdaptiveSceneIndicator”字段的属性被表示为整数时,0可以指示该数据是用于自适应服务。即,如果所接收的LASeR首标中的字段的属性是0,其意味着AdaptiveSceneIndicator=FALSE,则所接收的数据必须被显示在屏幕上。
包括这里描述的字段或属性的自适应数据可以用富媒体内容中可用的各种数据类型来表示,包括整数类型、字符串类型、小数类型、固定小数类型、不固定小数类型、列表类型等等,诸如string(字符串)、Boolean(布尔型)、decimal(小数)、precisionDecimal(精度小数)、float(浮点型)、double(双精度型)、duration(持续时间)、dateTime(日期时间)、time(时间)、date(日期)、gYearMonth、gYear、gMonthDay、gDay、gMonth、hexBinary、base64Binary、anyURI、QName、NOTATION、normalizedString(标准化字符串)、token(记号)、language(语言)、NMTOKEN、NMTOKENS、Name(名称)、NCName、ID、IDREF、IDREFS、ENTITY、ENTITIES、integer(整数)、nonPositiveInteger(非正整数)、negativeInteger(负整数)、long(长整型)、int(整型)、short(短整型)、byte(字节)、nonNegativeInteger(非负整数)、unsignedLong(无符号长整型)、unsignedInt(无符号整型)、unsignedShort(无符号短整型)、unsignedByte(无符号字节)、positiveInteger(正整数)、yearMonthDuration、和enumeration(枚举)。此外,可以参考终端和服务内/外的信息。这可以类似地应用于本发明的所有实施例。
下表1示出了适合于终端的性能的LASeR数据流的适配判据,即“AdaptationType”。
作为“AdaptationType”,可以使用与特定条件或终端的状态或状况有关的各种因素,包括终端处理数据所需的分辨率、屏幕尺寸、服务场景中的使用频率、与数据处理容量消耗的终端资源有关的占有比、存储器尺寸、功耗容量、数据传输需要的资源信息、与提供服务所需的输入/输出容量有关的终端的性能和结构等等。
例如,可以进一步添加各种因素,包括与终端的计算容量有关的信息和诸如最小存储器尺寸之类的终端的存储器相关信息,例如图形点的数目、字体数据的尺寸或数目、文本的数目、视频处理所需的存储器容量、用于视频/音频数据处理的终端的处理能力等等。
这里,图形点的数目表示用于指示创建图形元素所需的存储器容量等等的信息,并且该信息可以包括关于构成该图形元素的点、线、网孔(mesh)、多边形等等的信息。可以使用与每一个图形元素的特性有关的必要信息作为“AdaptationType”。
字体数据的尺寸或数目是用于指示关于使用该字体创建数据所需的存储器容量等等的信息的信息。该信息可以进一步包括使用字体文件创建数据所需的存储器容量,包括字体文件的尺寸和用于加载字体文件的信息。该信息也可以被用作“AdaptationType”。
文本的数目表示用于指示创建文本数据所需的存储器容量等等的信息。该信息可以指示关于文本数据的尺寸的信息,并且可以进一步包括创建文本数据所需的存储器容量。此外,该信息可以用作“AdaptationType”。
视频处理所需的存储器容量或用于视频处理的终端的处理能力表示用于指示创建诸如图像或视频之类的图片数据所需的存储器容量的信息。当创建诸如图像或视频之类的图片数据所需的存储器容量越多时,可以定义越多的属性来指示该信息,并且用包括该信息的值来表示。
例如,如果在处理图像/视频数据文件时需要用于输入视频缓冲器、解码的参数、和输出视频缓冲器的存储器,则需要用于输出视频缓冲器的存储器和用于解码图像或视频数据的参数的存储器,来用于大于图像文件的尺寸的输入视频缓冲器的尺寸,并且用于当表示与颜色格式有关的1像素数据时所需的字节数目。因此,该适配判据包括用于检查输入视频缓冲器的尺寸的图像文件的尺寸、用于检查输出视频缓冲器的尺寸的图像的垂直和水平长度、颜色格式信息、编解码器信息和用于解码图像或视频数据的参数的存储器信息。同样,该信息可以被用作“AdaptationType”。
此外,作为终端的适配判据,可以使用与接收终揣的性能和服务条件有关的各种因素,包括构成内容的各种元素、与诸如图像、字体、视频和音频之类的媒体有关的信息、输入/输出能力或设备、与反应有关的信息等等。此外,关于与媒体有关的信息和文本、图形、和与反应有关的信息、关于数据本身的信息,包括数据的尺寸、重放时间、帧速率(指示每秒应当处理的数据量)、色表、和更新速率,可以用作适配判据。此外,可以根据外部定义的信息来使用适配判据。
表1
值 | 适配判据的类型 |
0x01 | 显示尺寸 |
0x02 | CPU状态 |
0x03 | 电池状态 |
0x04 | 存储器尺寸 |
0x05 | 保留字段 |
~ | ~ |
表1示出根据本发明的实施例的适配判据,即,每个“AdaptationType”可以具有判据。
例如,假定显示尺寸成为适配判据,如果特定的场景数据或场景段包含其“显示尺寸(DisplaySize)”被分类为LARGE(大)的终端的场景信息,则适配判据的值是可以被表示为“AdaptationTypeValue”=LARGE的值。
可以根据每个适配判据以多种不同的方式来表示“AdaptationTypeValue”属性的值。即,如果用于“AdaptationTypeValue”的描述方法根据每个“AdaptationType”而不同,则可以定义关于每个“AdaptationType”的每个“AdaptationTypeValue”用于其描述。
下表2A示出使用图式(schema)的语法来描述指示“自适应场景组元”的信息的示例。这里,图式被用作描述属性和元素的示例。
这里使用的“图式”表示其中预定义数据的结构的一种模型文档。这里使用的图式遵循XML图式语法,并且可以使用其元素来定义。具体来说,有多种可能的定义属性和元素的结构的方法。因此,可以理解,即便是不使用图式的方法,如果其具有相同的含义,则也将落入本发明的范围。
可以描述这里以示例方式定义的元素和属性的值,以使得属性值限于一种表示方法,或者可以通过扩展现有类型来定义。
表2A
表2B示出将“AdapatationType”和“AdaptationTypeValue”一起表示在一个字段中的示例。
当将“AdapatationType”和“AdaptationTypeValue”一起表示在一个字段中时,它们可以被表示为例如<LASeRHeader...........AdapatationType Value=″DisplaySize LARGE″/>。
表2B
此外,可以使用“AdaptiveSceneIndicator”、“AdapatationType”、和“AdaptationTypeValue”将指示“自适应场景组元”的信息表示为如表和表3B所示。
表3A
表3A示出其显示尺寸被分类为LARGE的终端的数据(参考表1。在AdapatationType的判据中‘0x01’指示显示尺寸(观察窗尺寸))。
当其显示尺寸不被分类为LARGE的终端接收具有表3A的LASeR首标作为其首标的数据时,它们可以过滤所接收的数据而不解码或渲染它。
虽然例如在表3A中将显示尺寸设置为诸如SMALL和LARGE之类的符号值,但是可以将“AdaptationTypeValue”设置为表示显示尺寸的任何值,包括以英寸给定的物理尺寸(参见表9)、相对标记和屏幕的分辨率。
表3B
表3B具有与表3A相同的意思,并且以不同的方式表示执行相同的操作的信息。可以被用作“AdaptationType”字段的属性值的值,例如显示尺寸、CPU状态、存储器状态、和电池尺寸,被定义为替换“AdaptationType”的新的属性字段,并且“AdaptationTypeValue”的值被定义为其属性字段的值。
根据一个实施例,可以独立地或共同地使用“AdaptiveSceneIndicator”、“AdapatationType”、和“AdaptationTypeValue”。
在“AdaptiveSceneIndicator”的情况下,虽然不使用该字段,但是如果使用指示指示本发明中描述的“自适应场景组元”的信息的字段,则意味着“AdaptiveSceneIndicator”=True(真)。
因为一个场景数据或场景段不应该必然具有一个适配判据,所以可以使用几个适配判据。例如,当使用诸如终端的场景尺寸和终端的存储器尺寸之类的几个因素作为场景的适配判据时,要被过滤的数据可以具有几个适配判据。此外,可以预期,即便基于指示这些适配判据的其他信息来表示数据的方法也指示与本发明的示例相同的意思。
还可以提出用于定义新的元素和属性并且参考它们的方法,所述新的元素和属性可以呈现并参考由该新的属性意味着的适配判据。例如,提出一种能够提供根据LASeR首标之内或特定位置来描述适配判据的适配判据列表的方法,并且对适配判据列表的参考可以被用作用于定义和过滤新的属性的方法。
表4示出提供适配判据的列表的LASeR首标的示例。如上所述,可以参考列表中的一个或多个适配判据。即使这些属性和字段的表示有所修改或变化,当它们用于执行过滤以用于自适应数据表示时,其将落入本发明的范围。
表4
本发明的另一个实施例提供一种当适配判据以LASeR命令为单位而不同时对“自适应场景组元”信息执行过滤(即,以命令为单位执行过滤)的方法。
参考下表5,诸如NewScene(新场景)和Insert(插入)之类的LASeR命令用于场景组成。表5示出包括4个场景命令的内容。
表5
下表6A和6B示出一种用于将自适应场景组元信息定义为LASeR命令的新属性并且表示它以便基于逐个命令过滤它的方法。
表6A
参考表6A,用于将新的场景组成元素“polyline”插入到具有“Dictionary”作为ID属性的元素的Insert命令的场景指示其显示尺寸被分类为MEDIUM(中等)的终端的数据。
此外,用于将新的属性点插入到具有“Shape4”作为ID属性的元素的“Insert”命令的场景指示其显示尺寸被分类为LARGE的终端的数据。
已经接收到如表6A所示的数据的终端可以根据适配判据以及与其值有关的其自己的特征和条件,来执行过滤过程,包括执行指定的命令、解码数据直到它接收到下一个场景、组成场景、或丢弃数据而不渲染。
下表6B示出用于将新的字段添加到LASeR命令上并且基于逐个命令根据适配信息执行过滤或切换的方法的示例。用于逐命令过滤或切换的新的字段可以用作一个或多个命令的组。
表6B
如上述示例中所述,适合于终端的性能的LASeR数据流的适配判据、以及用于指示它们关联的值的字段和属性可以根据提供适配相关数据的数据单元(即根据过滤的目标和范围)而在它们的位置和呈现上有所变化。
例如,当基于逐文件提供适配信息时,其可以位于文件首标中。当基于逐场景命令提供适配信息时,其可以利用LASeR命令中的属性来表示,可以通过添加可以担当新的群组节点或父节点及其首标的字段来表示,或者可以利用场景组成元素中的新的元素或用于场景组成元素的属性来表示。
因此,当已经接收到LASeR数据流的适配判据和用于指示它们的相关值的字段和属性的终端接收到它不能处理的数据时,该终端执行包括丢弃过程的过滤,该丢弃过程包括丢弃与该字段和属性有关的数据而不解码、或者从存储器中删除已经解码的数据(如果有的话)而不渲染。
接着,作为本发明的另一个示范性实施例,将利用被定义为用于过滤的判据的用于场景描述的数据集来描述过滤或切换方法。用于场景描述的数据集可以用场景段或存取单元(AU)来表示。在下面的描述中,假定用于场景描述的数据集或它的首标具有适配信息。
首先,将描述如下方法,其中当用于描述预定时间的场景的数据集被分成几个流然后递送时,即,当用于描述相同时间的场景的数据集被分成几个流然后递送时,终端仅仅选择与它自己的性能和状况相一致的流,并且使用它们作为用于组成场景的数据。
终端接收数据,检查所接收的数据中的首标信息,从首标信息中检测适配信息,根据其检查终端条件,并仅仅过滤包括适合于它自己的性能和状况的数据集的流,从而提供服务。如上所述,可以执行诸如丢弃数据之类的过滤操作而不执行在提供服务的过程中应当执行的解码过程或场景组成过程。
当用于描述预定时间的场景的数据集由连续的数据组成并且在一个流中递送时,另一种方法通过检查首标信息来检测适配信息,根据其检查终端状态,并仅仅过滤适合于它自己的性能和状况的数据集,从而提供服务。当数据集由连续的数据组成时,用于表示预定时间的场景的信息的场景组成时间信息可以具有相同的值,并且此信息也可以用于过滤和切换。除了上述方法之外,还可以通过将用于描述场景的数据集定义为用于利用本发明描述的适配相关信息进行过滤的判据。
表7
表7中的“SceneUnit”可以在其中包括诸如NewScene和Refresh(刷新)之类的命令,它们包括在一个存取单元中,并且“SceneUnit”可以具有由本发明定义的适配信息作为属性。作为另一个用途,可以在与其他命令相同的级别上在SceneUnit中定义用于适配的新的命令(例如,Add(添加)、Delete(删除)...)。此新的命令包括作为命令并且具有相同的适配判据的场景。例如,可以如下使用它。
表8
在表8中,‘adaptationConstraint’属性包括‘AdapatationType’和‘AdaptationTypeValue’信息,或指代该信息。‘AdapatationType’和‘AdaptationTypeValue’可以以列表类型提供各种适配判据。在这种情况下,终端接收数据,检查它的命令组的‘AdaptiveSceneIndicator’、‘AdapatationType’、和‘AdaptationTypeValue’信息,根据其检查终端状态,并仅仅过滤适合于它自己的性能和条件的数据,从而提供服务。
如上所述,可以执行诸如丢弃数据之类的过滤和切换操作而不执行在提供服务的过程中应当执行的解码过程或场景组成过程。
除了上述方法之外,还可以基于AU执行过滤,其是指示应当利用在本发明中定义的适配信息在单位时间内表示的数据的最小单位。
图3示出根据本发明的实施例的用于接收通过将几个逻辑流多路复用为一个物理流而服务的LASeR流的终端的操作。
参考图3,终端在步骤300接收LASeR流,并且在步骤310检查所接收的流中的每个AU的首标。终端在步骤320解码用于组成场景的数据,并且在步骤330在场景组成时间处显示数据。
图4示出根据本发明的实施例的用于接收通过将几个逻辑流多路复用为一个物理流而服务的LASeR服务的终端的操作。LASeR数据流可以包括包含与每个接收终端的特性有关的组元的数据流。在通过将几个逻辑流多路复用成一个物理流来服务的LASeR流的情况下,分别构造包含首标信息的AU和包含构成实际场景的数据的AU。
参考图4,终端在步骤400接收LASeR流,并在步骤410检查所接收的LASeR流中的AU首标。在步骤425,终端确定所接收的AU是否包含首标信息。如果所接收的AU包含首标信息,则终端在步骤430检查用于AU的设置信息。该设置信息包括LASeR流的首标信息。
终端在步骤445确定“AdaptiveSceneIndicator”的值。如果“AdaptiveSceneIndicator”字段的值是FALSE,则终端在步骤440将用于数据丢弃的设置信息设置为OFF以便不丢弃LASeR流,然后解码稍后将接收的包含所接收的首标信息的实际数据(即用于组成实际场景的数据)的AU。
如果“AdaptiveSceneIndicator”字段的值是TRUE,则终端在步骤450检查它的性能。如果它的性能不足够服务“自适应场景组元”,则终端在步骤460将用于数据丢弃的设置信息设置成ON,以丢弃稍后将接收的首标信息的实际数据,而不进一步处理包含用于组成实际场景的数据的接收的AU,即,不解码数据和组成或渲染存储器中的场景。然而,如果它的性能足以服务自适应场景组元,则终端在步骤440不丢弃LASeR流。
然而,如果在步骤425确定所接收的AU不包含首标信息,则终端在步骤465确定是否丢弃包含用于组成与包含图4描述的首标信息的AU有关的实际场景的数据的AU,直到稍后接收到包含首标信息的新的AU。
如果终端在步骤465确定不丢弃接收的AU,则终端检查设置信息。基于设置信息,终端在步骤480解码接收的数据,并在步骤490在屏幕上显示解码的数据。然而,如果终端在步骤465确定丢弃接收的数据,则终端在步骤470丢弃接收的LASeR流而不解码数据和在存储器中组成或渲染它。
在上述实施例中,除接收流(步骤400)、检查AU的首标(步骤410)、检查设置信息(步骤430)、解码包含用于组成与包含终端稍后接收的首标信息的AU有关的实际场景的数据的AU(步骤480)、基于‘AdaptiveSceneIndicator’字段的值(步骤445)、以及在屏幕上显示解码的数据(步骤490)、或丢弃数据而没有解码过程和它的所有后续过程之外,任何附加过程可以根据特定终端的类型和设计而改变次序或被省略。
如果可以使用“AdaptiveSceneIndicator”字段和本发明中新定义的字段和属性提供与本发明的服务相同的服务,则本领域技术人员显然可知,可以对这里描述的实施例进行各种变化和修改而不脱离本发明的范围和精神。
当如第二示范性实施例所述通过将几个逻辑流多路复用成一个物理流来提供LASeR数据时,可以在提供用于发送首标类型的数据的SAF的AU上承载LASeR首标。“AdaptiveSceneIndicator”字段以及在本发明中新定义的字段和属性可以被表示为表9所示,并且也可以添加到saf:sceneHeader中。
表9
下表10作为本发明的另一个实施例示出一种用于将1比特的presenceOfDTS字段分配给这里描述的AdaptiveSceneFlag的方法,因为SAF的分组首标中的presenceOfDTS字段目前被预置为0且未使用。该实施例中,已经接收到具有表10中的“AdaptiveSceneFlag”=True(真)的SAF分组的终端可以通过在检查AU之前检查分组首标,认识到数据流包括用于自适应数据服务的数据,其包含与每个终端的特性有关的元素。
表10
作为本发明的另一个实施例,SAF_AdaptiveScene_Unit被定义为SAF的新的AU类型,以指示适配判据和它们在适合于终端的特性的LASeR数据流中的值。SAF_Adaptive_Unit可以指示适配判据和它们的稍后将接收的SAF AU的值。
下表11指定新的SAF类型的SAF_AdaptiveScene_Unit。Stop_AdaptiveScene_Unit指示不再接收包含与适配判据和它们在先前接收的SAF_AdaptiveScene_Unit中的值有关的数据的SAF AU。
表11
‘SAF_AdaptiveScene_Unit’可以包括上述适配信息作为它的字段。在这种情况下,可以添加‘adaptiveSceneIndicatorFlag’,并且其指示可以在该字段中表示并且稍后将接收到的SAF AU数据流是‘自适应场景组元’。
当‘SAF_AdaptiveScene_Unit’的存在本身指示此字段的值是“SAF_AdaptiveScene_Unit”=True时,可以不使用‘adaptiveSceneIndicatorFlag’。AdaptationType字段指示数据流的适配判据。可以根据属性值的类型以多种方式表示“AdaptationType”的属性值,并且分配的比特的数目可以根据表示的方式而变化。
此外,当在表示“AdaptationType”的各种方法当中使用通过参考来表示“AdaptationType”的方法时,可以新添加用于url类型、urlLengh(url长度)等的新字段。
“AdaptationTypeValue”是表示数据流的适配判据值的字段。当存在适合于数据流的两个或更多个适配判据时,可以添加‘numOfAdaptationType’字段等。可以根据信息表示方法来添加用于提供“AdaptationType”的数据节点的长度信息的字段。
作为本发明的又一个实施例,以新的SAF AU类型定义‘SAF AU’、‘AdaptiveSceneAU’、‘AdaptiveSceneCacheUnit’、‘AdaptiveSceneFFU’、和‘AdaptiveSceneFU’,它们都可以包含适合于终端的特性的数据流。
“AdaptiveSceneAU”表示可以包含适合于终端的特性的数据流的一类AU,而“AdaptiveSceneCacheUnit”表示可以包含适合于终端的特性的高速缓存数据的一类AU。当适合于终端的特性的数据流的尺寸大于AU的尺寸时,可以在将数据分段之后提供数据。经分段的数据的第一AU可以包含在“AdaptiveSceneFFU”中,其余数据段可以包含在“AdaptiveSceneFU”中。
下表12指定新的SAF类型的“SAF_AdaptiveScene_Unit”。
表12
值 | 存取单元有效载荷的类型 | 有效载荷中的数据 |
0x00 | 保留 | |
0x01 | TransientStreamHeader | SimpleDecoderConfigDescriptor |
0x02 | NonTransientStreamHeader | SimpleDecoderConfigDescriptor |
0x03 | EndofStream | (无数据) |
0x04 | AccessUnit | 存取单元 |
0x05 | EndOfSAFSession | (无数据) |
0x06 | CacheUnit | 缓存对象 |
0x07 | RemoteStreamHeader | url和SimpleDecoderConfigDescriptor |
0x08 | GroupDescriptor | - |
0x09 | FirstFragmentUnit | 存取单元的第一个片段 |
0x0A | FragmentUnit | 存取单元的片段(非第一个片段) |
0x0B | SAFConfiguration | safConfiguration对象 |
0x0C | StopCache | - |
0x0D | AdaptiveSceneAU | 存取单元 |
0x0E | AdaptiveSceneCacheUnit | 缓存对象 |
0x0F | AdaptiveSceneFFU | 存取单元的第一个片段 |
0x10 | AdaptiveSceneFU | 存取单元的片段(非第一个片段) |
0x11~ | 保留 | - |
用于表示适配判据和它们的包含在甚至‘AdaptiveSceneCacheUnit’、‘AdaptiveSceneFFU’、‘AdaptiveSceneFU’以及‘AdaptiveSceneAU’中的数据值的方法等同于如上所述的方法。
此外,虽然没有定义新的SAF的单元类型,但是可以将诸如AdaptiveSceneIndicator、AdaptiveType和AdaptiveValue之类的指示适配判据的字段添加到现有SAF的每个单元中,包括SAF的首标单元类型(0x01、0x02、0x07)和AU单元类型(0x04、0x06)。此外,可以根据信息的数据类型不同地分配或表示关于在定义适配判据的字段时分配的数据的尺寸的信息。
图5示出根据本发明的实施例的服务LASeR内容的示例。
参考图5,AU 500包括首标。根据本发明的实施例,AU 500和530可以是用于指示适配判据和它们的数据流的值的字段和AU,不仅包括首标类型而且包括“SAF_AdaptiveScene_Unit”。当在首标510中将“AdaptiveSceneIndicator”设置为TRUE时,终端检查它自己的当前状态。这里,终端检查可用资源,或者考虑事件状态和诸如CPU处理能力、存储器状态、和电池状态之类的条件。如果终端的当前状态足以处理自适应场景组元,则终端解码和显示稍后接收的数据520。
根据本发明的实施例,数据520的范围可以是可用的直到终端接收到具有与适配判据和它们的下一个适配数据的值有关的字段的数据或首标。当接收到“Stop_AdaptiveScene_Unit”时,其表示与数据有关的适配判据和它们的值不再可用,则其可以指示数据520已被完全接收到。
其后,已经接收到包括首标530的AU的终端通过检查首标信息540来确定“AdaptiveSceneIndicator”是否为TRUE。如果终端不足以处理自适应场景组元,则终端丢弃稍后接收的包含场景组成的实际数据的所有AU 550而不解码。
根据本发明的实施例,即便对于已经经历了解码过程的数据,终端也执行数据丢弃,包括根据在本发明中描述的与适配判据和它们的值对应的过滤机制来从存储器中删除数据。
即使在根据本发明的示范性实施例中提供的方法服务LASeR内容的同时终端的性能变化时,也可以考虑特定条件或终端的性能来更灵活地组成场景。当本发明的实施例中定义的元素或属性具有相同的意思时,可以使用不同名称或类型的元素和属性或属性值。此外,可以独立地或共同地使用本发明的实施例中描述的字段或属性。
图6是示出根据本发明的示范性实施例的发送器的结构的框图。
参考图6,创建器600可以创建场景组成元素,其包括可以指示或标识特定条件或终端的特性和性能的场景组成元素和属性,上面已经在本发明的实施例中对其进行了描述。在做成场景组成元素时,创建器600还可以创建与事件的使用或事件的发生对应的操作的细节场景内容。创建器600将所创建的LASeR内容递送给编码器610。编码器610编码LASeR内容并将经编码的LASeR内容递送给多路复用器620。多路复用器620将经编码的LASeR内容与几个逻辑流多路复用,输出一个物理流。发送器630将经多路复用的流发送到接收器。
可以无需多路复用过程来发送经编码的LASeR内容。这可以如在本发明的上述实施例中的一个那样省略。
图7是示出根据本发明的实施例的接收器的结构的框图。
参考图7,多路分解器700将所接收的流分离或多路分解成逻辑流。对于没有经过多路复用的流,显然可以省略多路分解过程。
解码器710将经多路分解的流解码并将经解码的流递送到渲染器720。具体来说,根据本发明,解码器710解码所接收的流以检查流的首标。
渲染器720接收经解码的数据,并基于场景组成元素渲染该场景,根据本发明的示范性实施例该场景组成元素包括可以指示或标识特定条件或终端的特性和性能的场景组成元素和属性。即,渲染器720根据由解码器710检查的首标的适配信息来确定是否使用所接收的流的场景组成元素自适应地组成场景。显示器730在终端的屏幕上显示每个场景。
依赖于本发明中新定义的元素和属性来定义信息的方法可以变化。根据每种数据定义格式,新定义的元素和属性信息可以由首标信息组成,包括用于初始场景组成的信息、以及用于场景更新、场景更新数据组、场景段和、存取单元的信令信息,或者可以由存取单元或首标信息组成,该存取单元或首标信息与用于场景组成的实际场景信息分开以用于信号发送。当以用于信号发送的数据格式形成时,新定义的元素和属性信息可以由用于表示信息的字段组成。
可以参考LASeR内容内/外的其他数据、文件、应用、服务等来使用用作本发明中新定义的属性的值的信息。在这种情况下,可以在LASeR内容中定义属性以仅仅指代属性值,并且甚至也可以使用具有参考功能的元素和属性来指代被定义为其他数据、文件、程序、服务等等的属性。即使当使用具有参考功能的元素和属性指代属性和属性值时,如果它们用于与在本发明中描述的属性的功能相同的目的,则其将落入本发明的范围。
本本发明的示范性实施例也可以被具体化为计算机可读记录介质上的计算机可读代码。计算机可读记录介质是可以储存其后可以被计算机系统读取的数据的任何数据存储设备。计算机可读记录介质的示例包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光数据存储器件和载波(诸如经由有线或无线传输路径通过互联网的数据传输),而不限于此。计算机可读记录介质也可以被分布在网络耦合的计算机系统之上以使得计算机可读代码以分布式被存储和执行。此外,用于实现本发明的功能性程序、代码和代码段可被本发明所属领域的程序员容易地构造,而落入本发明的范围。
虽然已经参考其特定示范性的实施例展示和描述了本发明,但是本领域技术人员应当理解,可以对本发明进行形式和细节上的各种修改而不脱离由所附权利要求书及其等效物所定义的本发明的精神和范围。
Claims (16)
1.一种用于富媒体服务的终端的用户界面方法,包括:
检查所接收的流的首标;
根据该首标中的适配信息,使用所接收的流的场景组成元素自适应地组成场景;以及
显示所述自适应地组成的场景。
2.一种用于富媒体服务的终端的用户界面装置,包括:
解码器,用于解码所接收的流以检查所接收的流的首标;
渲染器,用于根据由解码器检查的首标中的适配信息,使用所接收的流的场景组成元素自适应地组成场景;以及
显示器,用于显示所述自适应地组成的场景。
3.如权利要求1所述的用户界面方法或如权利要求2所述的用户界面装置,其中该适配信息包括指示用于过滤所接收的流的自适应场景组成元素的信息和指示用于切换所接收的流的自适应场景组成元素的信息中的任意一个。
4.如权利要求1所述的用户界面方法或如权利要求2所述的用户界面装置,其中该适配信息还包括用于组成自适应场景的指示符、用于定义用于组成该自适应场景的判据的适配类型、和适配类型值中的至少一个。
5.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中该适配信息还包括指示将要应用于流的适配判据的数目的信息。
6.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中该适配信息还包括将要根据流应用的适配判据的范围信息。
7.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中基于逐个命令设置该适配信息。
8.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中基于逐个场景单元设置该适配信息,该场景单元是至少一个流的集合并且用于在预定时间内组成场景。
9.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中基于逐个存取单元设置该适配信息,该存取单元是最小的流单元并且用于在时间单元内组成场景。
10.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中以简单聚合格式(SAF)的存取单元为单位设置该适配信息,简单聚合格式是音频流和视频流的聚合。
11.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中基于逐个片段单元设置该适配信息,该片段单元是存取单元的片段并且用于在时间单元内组成场景。
12.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中该适配信息包括指示用于显示富媒体服务的内容的终端的特性的性能信息。
13.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中该适配信息还包括处理流所需的设备的显示尺寸、计算容量、功耗容量、存储器信息、和输入/输出容量中的至少一个。
14.如前述权利要求中的任意一个所述的用户界面方法或如前述权利要求中的任意一个所述的用户界面装置,其中该适配信息还包括用于图形元素的信息、用于字体元素的信息、用于文本元素的信息、和用于图像或视频数据的信息中的至少一个,这些信息中的每一个用于自适应地组成场景。
15.如权利要求1所述的用户界面方法,还包括:
检查该适配信息;以及
当终端不能支持指示用于显示富媒体服务的内容的终端的特性的性能信息时,丢弃所接收的流。
16.如权利要求2所述的用户界面装置,其中该渲染器检查该适配信息,并且当该终端不能支持指示用于显示富媒体服务的内容的终端的特性的性能信息时,丢弃所接收的流。
Applications Claiming Priority (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20080036891 | 2008-04-21 | ||
KR10-2008-0036891 | 2008-04-21 | ||
KR20080040315 | 2008-04-30 | ||
KR10-2008-0040315 | 2008-04-30 | ||
KR10-2008-0083007 | 2008-08-25 | ||
KR1020080083007A KR20090111253A (ko) | 2008-04-21 | 2008-08-25 | 리치미디어 콘텐츠의 장면 구성을 위한 장치 및 방법 |
KR1020080099765A KR101516020B1 (ko) | 2008-04-21 | 2008-10-10 | 리치미디어 콘텐츠의 장면 구성장치 및 방법 |
KR10-2008-0099765 | 2008-10-10 | ||
PCT/KR2009/002078 WO2009131359A2 (en) | 2008-04-21 | 2009-04-21 | Apparatus and method for composing scenes using rich media contents |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102017651A true CN102017651A (zh) | 2011-04-13 |
CN102017651B CN102017651B (zh) | 2014-01-29 |
Family
ID=41078150
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200980113999.8A Expired - Fee Related CN102017651B (zh) | 2008-04-21 | 2009-04-21 | 使用富媒体内容组成场景的装置和方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8707151B2 (zh) |
EP (1) | EP2114076B1 (zh) |
JP (1) | JP5512657B2 (zh) |
CN (1) | CN102017651B (zh) |
WO (1) | WO2009131359A2 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104246866A (zh) * | 2012-04-20 | 2014-12-24 | 三星电子株式会社 | 利用辅助增强信息的显示功率降低 |
CN104246867A (zh) * | 2012-04-20 | 2014-12-24 | 三星电子株式会社 | 感知无损失的显示功率降低 |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102017651B (zh) * | 2008-04-21 | 2014-01-29 | 三星电子株式会社 | 使用富媒体内容组成场景的装置和方法 |
CN101968887A (zh) * | 2010-09-08 | 2011-02-09 | 东莞电子科技大学电子信息工程研究院 | 一种富媒体场景的局部渲染方法 |
CN102279752B (zh) * | 2011-08-31 | 2014-03-12 | 北京华电万通科技有限公司 | 一种基于Web3D的超大场景实时渲染装置和方法 |
US9444700B2 (en) | 2011-11-02 | 2016-09-13 | Imagine Communications Corp. | Network analysis device and method |
KR101903443B1 (ko) * | 2012-02-02 | 2018-10-02 | 삼성전자주식회사 | 멀티미디어 통신 시스템에서 장면 구성 정보 송수신 장치 및 방법 |
KR20140002447A (ko) * | 2012-06-29 | 2014-01-08 | 삼성전자주식회사 | 멀티미디어 시스템에서 적응적 미디어 구조 송수신 방법 및 장치 |
KR102069538B1 (ko) * | 2012-07-12 | 2020-03-23 | 삼성전자주식회사 | 멀티미디어 요소의 배치를 위한 마크업을 구성하는 방법 |
KR101959820B1 (ko) * | 2012-10-12 | 2019-03-20 | 삼성전자주식회사 | 멀티미디어 통신 시스템에서 구성 정보 송수신 방법 및 장치 |
KR101956111B1 (ko) * | 2018-09-21 | 2019-03-11 | 삼성전자주식회사 | 멀티미디어 통신 시스템에서 장면 구성 정보 송수신 장치 및 방법 |
CN111327865B (zh) * | 2019-11-05 | 2021-12-28 | 杭州海康威视系统技术有限公司 | 视频传输方法、装置及设备 |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5734589A (en) * | 1995-01-31 | 1998-03-31 | Bell Atlantic Network Services, Inc. | Digital entertainment terminal with channel mapping |
WO1997035393A1 (fr) * | 1996-03-15 | 1997-09-25 | Hitachi, Ltd. | Dispositif de separation de donnees |
US6317131B2 (en) * | 1997-07-15 | 2001-11-13 | At&T Corp. | Interaction modalities for multimedia delivery and presentation using nodes |
US6751623B1 (en) * | 1998-01-26 | 2004-06-15 | At&T Corp. | Flexible interchange of coded multimedia facilitating access and streaming |
JP2000032393A (ja) * | 1998-07-09 | 2000-01-28 | Sony Corp | 画像情報処理装置および方法、並びに提供媒体 |
FR2795272B1 (fr) * | 1999-06-18 | 2001-07-20 | Thomson Multimedia Sa | Procede de commutation de flux mpeg |
JP3956549B2 (ja) * | 1999-09-30 | 2007-08-08 | ソニー株式会社 | 記録装置および方法、再生装置および方法並びに記録媒体 |
US6848004B1 (en) * | 1999-11-23 | 2005-01-25 | International Business Machines Corporation | System and method for adaptive delivery of rich media content to a user in a network based on real time bandwidth measurement & prediction according to available user bandwidth |
US7134073B1 (en) * | 2000-06-15 | 2006-11-07 | International Business Machines Corporation | Apparatus and method for enabling composite style sheet application to multi-part electronic documents |
JP2002064802A (ja) * | 2000-08-21 | 2002-02-28 | Sony Corp | データ伝送システム、データ伝送装置及び方法、シーン記述処理装置及び方法 |
EP1346294A2 (en) * | 2000-12-18 | 2003-09-24 | Kargo, Inc. | A system and method for delivering content to mobile devices |
US20040110490A1 (en) * | 2001-12-20 | 2004-06-10 | Steele Jay D. | Method and apparatus for providing content to media devices |
ATE363809T1 (de) * | 2002-03-27 | 2007-06-15 | British Telecomm | Datenstruktur für ein datenübertragungssystem |
JP2004013823A (ja) * | 2002-06-11 | 2004-01-15 | Hitachi Ltd | コンテンツ配信システム及びプログラム |
US8244895B2 (en) * | 2002-07-15 | 2012-08-14 | Hewlett-Packard Development Company, L.P. | Method and apparatus for applying receiving attributes using constraints |
SE0302778D0 (sv) * | 2003-10-17 | 2003-10-17 | Ericsson Telefon Ab L M | Container format for multimedia presentations |
NO318868B1 (no) * | 2003-10-24 | 2005-05-18 | Tandberg Telecom As | Videokonferanse med forbedrede multimediakapabiliteter |
US20050207657A1 (en) * | 2004-02-02 | 2005-09-22 | Clark Adam L | System and method for encoding and decoding video |
US7808900B2 (en) * | 2004-04-12 | 2010-10-05 | Samsung Electronics Co., Ltd. | Method, apparatus, and medium for providing multimedia service considering terminal capability |
CN101023637B (zh) * | 2004-07-22 | 2010-12-29 | 韩国电子通信研究院 | 简单聚合格式同步层分组结构及其服务器系统 |
US8199781B2 (en) * | 2004-12-14 | 2012-06-12 | Samsung Electronics Co., Ltd | Device and method for demultiplexing received transport stream in digital broadcasting receiver |
KR100685124B1 (ko) | 2005-02-15 | 2007-02-22 | 에스케이 텔레콤주식회사 | 위성 dmb 시스템에서의 계층적 전송 시스템 및 그 방법 |
WO2007000649A1 (en) | 2005-06-27 | 2007-01-04 | Nokia Corporation | Transport mechanisms for dynamic rich media scenes |
EP1932315A4 (en) | 2005-09-01 | 2012-05-09 | Nokia Corp | METHOD FOR INTEGRATING SVG CONTENT INTO ISO MULTIMEDIA FILE FORMAT FOR PROGRESSIVE DOWNLOAD AND CONTINUOUS TRANSMISSION OF RICH MULTIMEDIA CONTENT |
FR2898707B1 (fr) | 2006-03-17 | 2009-05-15 | Streamezzo Sa | Procede, dispositif et systeme de gestion d'informations structurees au sein d'une scene graphique |
KR100934674B1 (ko) * | 2006-03-30 | 2009-12-31 | 엘지전자 주식회사 | 비디오 신호를 디코딩/인코딩하기 위한 방법 및 장치 |
AU2007309759B2 (en) * | 2006-10-25 | 2011-04-07 | Telefonaktiebolaget L M Ericsson (Publ) | Rich media stream management |
CN102017651B (zh) * | 2008-04-21 | 2014-01-29 | 三星电子株式会社 | 使用富媒体内容组成场景的装置和方法 |
-
2009
- 2009-04-21 CN CN200980113999.8A patent/CN102017651B/zh not_active Expired - Fee Related
- 2009-04-21 WO PCT/KR2009/002078 patent/WO2009131359A2/en active Application Filing
- 2009-04-21 EP EP09158349.2A patent/EP2114076B1/en not_active Not-in-force
- 2009-04-21 JP JP2011506191A patent/JP5512657B2/ja active Active
- 2009-04-21 US US12/427,306 patent/US8707151B2/en active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104246866A (zh) * | 2012-04-20 | 2014-12-24 | 三星电子株式会社 | 利用辅助增强信息的显示功率降低 |
CN104246867A (zh) * | 2012-04-20 | 2014-12-24 | 三星电子株式会社 | 感知无损失的显示功率降低 |
Also Published As
Publication number | Publication date |
---|---|
CN102017651B (zh) | 2014-01-29 |
WO2009131359A3 (en) | 2010-01-14 |
EP2114076B1 (en) | 2013-09-11 |
US8707151B2 (en) | 2014-04-22 |
JP5512657B2 (ja) | 2014-06-04 |
US20090265603A1 (en) | 2009-10-22 |
WO2009131359A2 (en) | 2009-10-29 |
EP2114076A2 (en) | 2009-11-04 |
JP2011518526A (ja) | 2011-06-23 |
EP2114076A3 (en) | 2011-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102017651B (zh) | 使用富媒体内容组成场景的装置和方法 | |
KR100484181B1 (ko) | 멀티미디어 문서 저작 장치 및 방법 | |
CN100589552C (zh) | 网络电视系统中发送多媒体消息的系统和方法 | |
CN1372207A (zh) | 在便携终端上提供多媒体电子邮件服务的系统和方法 | |
CN104917764A (zh) | 一种基于二维码的多媒体业务推送方法及系统 | |
CN101127869B (zh) | 一种电子业务指南内容信息的更新和传输方法 | |
CN100488252C (zh) | 一种电子业务指南的数据信息的传输方法 | |
CN109547860A (zh) | 一种点播的视频断网续播的方法和iptv播放装置 | |
CN100571315C (zh) | 一种电子业务指南表元数据的传输方法 | |
US20100023530A1 (en) | Method and apparatus for providing rich media service | |
WO2011003231A1 (zh) | 一种可伸缩视频编码文件的传输方法、接收方法及装置 | |
CN104010279B (zh) | 一种彩信浏览方法、系统及用户终端 | |
US8537678B2 (en) | MMS (multimedia messaging service) decoding method, MMS decoder and mobile terminal | |
CN101316259B (zh) | 内容过滤的方法、装置及系统 | |
KR101295377B1 (ko) | 파일 포맷을 구성하는 방법과 상기 파일 포맷을 가지는파일을 포함한 방송 신호를 처리하는 장치 및 방법 | |
US20090304351A1 (en) | Systems and methods for determining behaviors for live and playback consumption | |
CN100589535C (zh) | 一种电子业务指南表元数据的传输方法 | |
KR101516020B1 (ko) | 리치미디어 콘텐츠의 장면 구성장치 및 방법 | |
CN101527884B (zh) | 实现直接播放电子邮件附带的多媒体信息的终端和方法 | |
US8014403B2 (en) | Method of processing multimedia content description data sets, and corresponding apparatus | |
KR100765690B1 (ko) | Dmb망에서의 방송데이터 채널의 mime 타입 정의에따른 콘텐츠 필터링방법 | |
CN103957453A (zh) | 一种实现移动终端与液晶电视间数据链接的方法及系统 | |
CN101692703B (zh) | 一种实现数字电视中图文电子节目指南信息的方法及装置 | |
CN100551003C (zh) | 一种电子业务指南的节目提示信息的传输方法 | |
Kovačević et al. | Wireless Image Applications and Formats for Image Processing in the Field of Transport |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20140129 Termination date: 20200421 |
|
CF01 | Termination of patent right due to non-payment of annual fee |