CN102017651B - 使用富媒体内容组成场景的装置和方法 - Google Patents

使用富媒体内容组成场景的装置和方法 Download PDF

Info

Publication number
CN102017651B
CN102017651B CN200980113999.8A CN200980113999A CN102017651B CN 102017651 B CN102017651 B CN 102017651B CN 200980113999 A CN200980113999 A CN 200980113999A CN 102017651 B CN102017651 B CN 102017651B
Authority
CN
China
Prior art keywords
scene
information
terminal
laser
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200980113999.8A
Other languages
English (en)
Other versions
CN102017651A (zh
Inventor
黄棲煐
宋在涓
李国熙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020080083007A external-priority patent/KR20090111253A/ko
Priority claimed from KR1020080099765A external-priority patent/KR101516020B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN102017651A publication Critical patent/CN102017651A/zh
Application granted granted Critical
Publication of CN102017651B publication Critical patent/CN102017651B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/24Systems for the transmission of television signals using pulse code modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4382Demodulation or channel decoding, e.g. QPSK demodulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Circuits Of Receivers In General (AREA)

Abstract

一种在终端中用于富媒体服务的用户界面方法和装置。解码器将所接收的流解码以检查所接收的流的首标。渲染器根据由解码器检查的首标中的适配信息,使用所接收的流的场景组成元素自适应地组成场景,而且显示器显示所述自适应地组成的场景。

Description

使用富媒体内容组成场景的装置和方法
技术领域
本发明一般涉及支持富媒体服务(Rich Media Service)的终端的内容组成技术。更具体地,本发明涉及使用富媒体服务内容自适应地组成(compose)场景的装置和方法。
背景技术
通信市场需要不断地通过现有技术的重组和/或整合来产生新服务。为此,今天,通信和广播技术正在发展以通过诸如TV之类的广播终端以及通信设备(以下称为“终端”)来提供富媒体服务。
轻型应用场景表现(以下称为“LASeR”)已被采用作为用于提供富媒体服务的国际标准。LASeR可以使用诸如场景描述、视频、音频、图像、字体、和元数据之类的各种元素来提供使得能够自由表现各种多媒体和与用户的交互的服务。此外,LASeR技术可以多路复用和同步各种媒体的元素流(ES)并使用简单聚合格式(SAF)来最小化其复杂度。
发明内容
技术问题
随着通信技术的近期趋势,这样的网络模型是可能的,其中通过例如具有网络的融合的单个网络来连接不同类型的终端,诸如数字视频广播-广播与移动服务的融合(DVB-CBMS)或互联网协议TV(IPTV)。在单个整合服务供应商管理由有线/无线融合形成的网络的服务模型中,可以向终端提供相同的服务而不管它们的类型如何。
在该商业模型中,特别是在广播服务模型中,将单个广播流同时发送到具有不同的显示尺寸、性能、和特性的终端。因而,当向具有不同特性的多个终端提供相同的富媒体服务时。结果,当接收广播内容时,向从具有大屏幕的终端(例如,TV)到具有小屏幕的终端(例如,移动电话机)的终端提供相同的LASeR内容。
然而,已经接收为诸如TV之类的大屏幕尺寸而优化的场景的具有小屏幕的终端可能难以确保用于广播服务内容的可用资源,并且例如应当组成与该终端的实际屏幕尺寸相比较来说过于复杂的场景。
技术方案
本发明已被设计为解决至少以上问题和/或缺点并且提供至少下述优点。因此,本发明的一个方面在于提供用于组成多媒体服务的场景的装置和方法。
本发明的另一个方面在于提供使用多媒体服务内容组成自适应场景的装置和方法。
本发明的另一个方面在于提供通过过滤单个多媒体服务内容来自适应地组成场景的装置和方法。
本发明的另一个方面在于提供使用富媒体(例如,LASeR)内容自适应地组成场景的装置和方法。
本发明的另一个方面在于提供考虑特定条件或接收终端的性能组成LASeR场景的装置和方法。
根据本发明的一个方面,提供一种用于富媒体服务的终端的用户界面方法。该用户界面方法包括:检查所接收的流的首标;当该首标中包含适配信息时,使用所接收的流的场景组成元素来组成自适应场景;以及显示所组成的自适应场景。
根据本发明的另一个方面,提供一种用于富媒体服务的终端的用户界面装置。该用户界面装置包括:解码器,用于解码所接收的流以检查所接收的流的首标;渲染器,用于根据由解码器检查的首标中的适配信息,使用所接收的流的场景组成元素来自适应地组成场景;以及显示器,用于显示所组成的场景。
有益效果
从前面的描述中显然可知,本发明可以考虑特定条件或终端的属性以及与终端的性能有关的特定事件,诸如显示尺寸、CPU处理能力、存储器、电池状态、输入/输出设备等等,降低在不具有足够的可用资源的终端处支持LASeR服务的负担,和/或在具有足够的可用资源的终端处提供更富的IASeR服务。
附图说明
通过下面结合附图的描述,本发明的特定示范性实施例的上述和其他方面、特征、和优点将变得更加显而易见,其中:
图1示出用于接收LASeR数据流的终端的操作;
图2示出根据本发明的实施例的用于接收LASeR数据流的终端的操作;
图3示出根据本发明的实施例的用于接收通过在LASeR服务中多路复用数据流而服务的LASeR数据流的终端的操作;
图4示出根据本发明的实施例的用于接收LASeR数据流的终端的操作;
图5是示出根据本发明的实施例的服务LASeR内容的操作;
图6是示出根据本发明的实施例的发送器的结构的框图;以及
图7是示出根据本发明的实施例的接收器的结构的框图。
具体实施方式
提供参考附图的以下描述以帮助全面地理解本发明的特定实施例。因此,它包括各种细节来帮助该理解。然而,这些细节将被认为仅仅是示范性的。此外,本领域普通技术人员将认识到,可以对这里描述的实施例进行各种变化和修改而不背离本发明的范围和精神。此外,为了清楚和简洁起见,略去公知的功能和结构的描述。
以下说明书和权利要求书中使用的术语和词语不限于书面意义,而是仅仅被发明人使用来使得能够清楚且一致地理解本发明。本领域技术人员应当显然可知,提供本发明的实施例的以下说明仅仅是为了例示的目的,而不是为了限制本发明的目的,本发明将由所附的权利要求书及其等效物限定。
在下面的描述中,给出基于作为一种类型的富媒体引擎(RME)的LASeR引擎的终端作为示例。同时,基于LASeR引擎的终端的示例可以同样应用于基于其他RME引擎的终端。然而,当应用于终端的RME或系统发生变化时,构成其引擎、系统和数据的组元的名称将很可能使用唯一地用于其他RME引擎或系统中的不同的名称。
本发明的实施例提供用于发送和接收LASeR服务中的适合于特定条件或终端的性能的LASeR内容的方法和装置。这里使用的术语“终端”可以包括便携式通信设备和有线/无线通信设备,包括电话机(包括移动电话机、无线电话机、有线电话机)、个人数字助理(PDA)、膝上型计算机、笔记本型计算机等等。
特别地,本发明的特定实施例提供用于接收LASeR服务的终端的场景表现和组成技术,并且还提供用于在提供服务的自适应场景时根据特定条件或与终端的特性(特征)有关的属性、根据特定事件的发生、以及根据终端的性能提供LASeR内容的方法和装置。
图1示出用于接收LASeR内容的终端的操作。
参考图1,终端在步骤100接收LASeR服务内容,并在步骤110解码所接收的LASeR内容。在步骤120,终端检查LASeR命令并相应地执行该命令。其后,终端在步骤130基于LASeR内容处理所有事件,并在步骤140通过执行场景组成命令来显示场景。
这里,数据流除了包括提供LASeR服务所必需的基本元素之外,还可以包括复杂的场景组成元素,或者可以包括适合于高端终端(通信设备)的场景组成元素、或添加到基本场景的数据。此外,这里描述的LASeR数据流包括包含与每个终端的特性有关的组元的数据流。所述特性可以包括接收数据流的终端的特征和性能。
图2示出根据本发明的实施例的用于接收LASeR内容的终端的操作。更具体地说,图2示出了当LASeR数据流包括用于具有丰富的可用资源的终端的场景组成数据、或包括适合于终端的性能的场景组成数据时,即当LASeR数据流包括指示“自适应场景组元(adaptive scene component)”的信息时,用于组成场景的终端的操作。
参考图2,终端在步骤200接收LASeR流,并在步骤210解码所接收的LASeR流。在步骤220,终端确定所解码的LASeR流是否包括首标。如果LASeR流包括首标,则该终端在步骤230检查首标信息。在步骤250如果检查的首标信息中指示“自适应场景组元”的信息,即“AdaptiveSceneIndicator”字段的值,是FALSE(假),则终端在步骤280在其屏幕上显示所接收的数据流。然而,如果检查的“AdaptiveSceneIndicator”字段的值是TRUE(真),则终端在步骤260检查其性能。
在步骤260,如果该性能不足以服务“自适应场景组元”,则终端在步骤265将用于数据丢弃的设置信息设置为ON以丢弃所接收的LASeR流。通过丢弃待解码的LASeR流而不进行解码,终端避免在屏幕上显示数据流。即便要被丢弃的LASeR流已经被解码,终端也可以通过立即从存储器中删除数据来执行丢弃过程。
然而,如果在步骤260该性能足以服务“自适应场景组元”,则在步骤290,终端将用于数据丢弃的设置信息设置为OFF以便不丢弃LASeR流。其后,在步骤280,终端通过在屏幕上显示数据流来提供LASeR服务。步骤280的实际显示过程虽然没有在这里详细描述,但是还可以包括服务要被服务的内容而不丢弃的进一步的技术步骤。
此外,如果在步骤220,解码的LASeR流没有首标,则终端在步骤270检查LASeR流中的用于数据丢弃的设置信息。如果用于数据丢弃的设置信息被设置为ON,则终端在步骤275丢弃LASeR流而不进一步处理,即不在存储器中组成或渲染它。然而,如果用于数据丢弃的设置信息被设置为OFF,则终端在步骤280在屏幕上显示LASeR流。
在上述实施例中,除接收流(步骤200)、解码所接收的流(步骤210)、和参考“AdaptiveSceneIndicator”字段的值(步骤250)在屏幕上显示所接收的流(步骤280)、以及通过参考“AdaptiveSceneIndicator”字段的值(步骤250)避免处理流直到接收到具有“AdaptiveSceneIndicator”字段的数据的一系列过程之外,所有其他的过程可以根据终端的类型或设计而改变顺序或省略。
此外,如果可以使用“AdaptiveSceneIndicator”字段或在本发明中新定义的其他字段和属性来提供与本发明的服务相同的服务,则本领域技术人员显然可知,可以对这里描述的实施例进行各种变化和修改而不背离本发明的范围和精神。
现在将详细描述LASeR首标中的信息,其指示所接收的LASeR流是“自适应场景组元”。
在下面的描述中,给出LASeR作为示例,用于指示“自适应场景组元”的新字段和属性也可以被用作数据的字段和属性,所述数据不仅包括首标类型的数据,而且包括命令、元素、字段、单元、和有效载荷。
“AdaptiveSceneIndicator”字段可以用各种方式来表示,例如,用布尔代数表示,用诸如1、2、3和4的整数表示,或用诸如基本和增强的符号级来表示。然而,当用除了布尔代数之外的其他值表示“AdaptiveSceneIndicator”字段时,应当必然能够表示其属性的特定值以区分“自适应场景组元”。
例如,当“AdaptiveSceneIndicator”字段的属性被表示为整数时,0可以指示该数据是用于自适应服务。即,如果所接收的LASeR首标中的字段的属性是0,其意味着AdaptiveSceneIndicator=FALSE,则所接收的数据必须被显示在屏幕上。
包括这里描述的字段或属性的自适应数据可以用富媒体内容中可用的各种数据类型来表示,包括整数类型、字符串类型、小数类型、固定小数类型、不固定小数类型、列表类型等等,诸如string(字符串)、Boolean(布尔型)、decimal(小数)、precisionDecimal(精度小数)、float(浮点型)、double(双精度型)、duration(持续时间)、dateTime(日期时间)、time(时间)、date(日期)、gYearMonth、gYear、gMonthDay、gDay、gMonth、hexBinary、base64Binary、anyURI、QName、NOTATION、normalizedString(标准化字符串)、token(记号)、language(语言)、NMTOKEN、NMTOKENS、Name(名称)、NCName、ID、IDREF、IDREFS、ENTITY、ENTITIES、integer(整数)、nonPositiveInteger(非正整数)、negativeInteger(负整数)、long(长整型)、int(整型)、short(短整型)、byte(字节)、nonNegativeInteger(非负整数)、unsignedLong(无符号长整型)、unsignedInt(无符号整型)、unsignedShort(无符号短整型)、unsignedByte(无符号字节)、positiveInteger(正整数)、yearMonthDuration、和enumeration(枚举)。此外,可以参考终端和服务内/外的信息。这可以类似地应用于本发明的所有实施例。
下表1示出了适合于终端的性能的LASeR数据流的适配判据,即“AdaptationType”。
作为“AdaptationType”,可以使用与特定条件或终端的状态或状况有关的各种因素,包括终端处理数据所需的分辨率、屏幕尺寸、服务场景中的使用频率、与数据处理容量消耗的终端资源有关的占有比、存储器尺寸、功耗容量、数据传输需要的资源信息、与提供服务所需的输入/输出容量有关的终端的性能和结构等等。
例如,可以进一步添加各种因素,包括与终端的计算容量有关的信息和诸如最小存储器尺寸之类的终端的存储器相关信息,例如图形点的数目、字体数据的尺寸或数目、文本的数目、视频处理所需的存储器容量、用于视频/音频数据处理的终端的处理能力等等。
这里,图形点的数目表示用于指示创建图形元素所需的存储器容量等等的信息,并且该信息可以包括关于构成该图形元素的点、线、网孔(mesh)、多边形等等的信息。可以使用与每一个图形元素的特性有关的必要信息作为“AdaptationType”。
字体数据的尺寸或数目是用于指示关于使用该字体创建数据所需的存储器容量等等的信息的信息。该信息可以进一步包括使用字体文件创建数据所需的存储器容量,包括字体文件的尺寸和用于加载字体文件的信息。该信息也可以被用作“AdaptationType”。
文本的数目表示用于指示创建文本数据所需的存储器容量等等的信息。该信息可以指示关于文本数据的尺寸的信息,并且可以进一步包括创建文本数据所需的存储器容量。此外,该信息可以用作“AdaptationType”。
视频处理所需的存储器容量或用于视频处理的终端的处理能力表示用于指示创建诸如图像或视频之类的图片数据所需的存储器容量的信息。当创建诸如图像或视频之类的图片数据所需的存储器容量越多时,可以定义越多的属性来指示该信息,并且用包括该信息的值来表示。
例如,如果在处理图像/视频数据文件时需要用于输入视频缓冲器、解码的参数、和输出视频缓冲器的存储器,则需要用于输出视频缓冲器的存储器和用于解码图像或视频数据的参数的存储器,来用于大于图像文件的尺寸的输入视频缓冲器的尺寸,并且用于当表示与颜色格式有关的1像素数据时所需的字节数目。因此,该适配判据包括用于检查输入视频缓冲器的尺寸的图像文件的尺寸、用于检查输出视频缓冲器的尺寸的图像的垂直和水平长度、颜色格式信息、编解码器信息和用于解码图像或视频数据的参数的存储器信息。同样,该信息可以被用作“AdaptationType”。
此外,作为终端的适配判据,可以使用与接收终揣的性能和服务条件有关的各种因素,包括构成内容的各种元素、与诸如图像、字体、视频和音频之类的媒体有关的信息、输入/输出能力或设备、与反应有关的信息等等。此外,关于与媒体有关的信息和文本、图形、和与反应有关的信息、关于数据本身的信息,包括数据的尺寸、重放时间、帧速率(指示每秒应当处理的数据量)、色表、和更新速率,可以用作适配判据。此外,可以根据外部定义的信息来使用适配判据。
表1
  值   适配判据的类型
  0x01   显示尺寸
  0x02   CPU状态
  0x03   电池状态
  0x04   存储器尺寸
  0x05   保留字段
  ~   ~
表1示出根据本发明的实施例的适配判据,即,每个“AdaptationType”可以具有判据。
例如,假定显示尺寸成为适配判据,如果特定的场景数据或场景段包含其“显示尺寸(DisplaySize)”被分类为LARGE(大)的终端的场景信息,则适配判据的值是可以被表示为“AdaptationTypeValue”=LARGE的值。
可以根据每个适配判据以多种不同的方式来表示“AdaptationTypeValue”属性的值。即,如果用于“AdaptationTypeValue”的描述方法根据每个“AdaptationType”而不同,则可以定义关于每个“AdaptationType”的每个“AdaptationTypeValue”用于其描述。
下表2A示出使用图式(schema)的语法来描述指示“自适应场景组元”的信息的示例。这里,图式被用作描述属性和元素的示例。
这里使用的“图式”表示其中预定义数据的结构的一种模型文档。这里使用的图式遵循XML图式语法,并且可以使用其元素来定义。具体来说,有多种可能的定义属性和元素的结构的方法。因此,可以理解,即便是不使用图式的方法,如果其具有相同的含义,则也将落入本发明的范围。
可以描述这里以示例方式定义的元素和属性的值,以使得属性值限于一种表示方法,或者可以通过扩展现有类型来定义。
表2A
表2B示出将“AdapatationType”和“AdaptationTypeValue”一起表示在一个字段中的示例。
当将“AdapatationType”和“AdaptationTypeValue”一起表示在一个字段中时,它们可以被表示为例如<LASeRHeader...........AdapatationType Value=″DisplaySize LARGE″/>。
表2B
此外,可以使用“AdaptiveSceneIndicator”、“AdapatationType”、和“AdaptationTypeValue”将指示“自适应场景组元”的信息表示为如表和表3B所示。
表3A
Figure BPA00001248988100101
表3A示出其显示尺寸被分类为LARGE的终端的数据(参考表1。在AdapatationType的判据中‘0x01’指示显示尺寸(观察窗尺寸))。
当其显示尺寸不被分类为LARGE的终端接收具有表3A的LASeR首标作为其首标的数据时,它们可以过滤所接收的数据而不解码或渲染它。
虽然例如在表3A中将显示尺寸设置为诸如SMALL和LARGE之类的符号值,但是可以将“AdaptationTypeValue”设置为表示显示尺寸的任何值,包括以英寸给定的物理尺寸(参见表9)、相对标记和屏幕的分辨率。
表3B
Figure BPA00001248988100102
表3B具有与表3A相同的意思,并且以不同的方式表示执行相同的操作的信息。可以被用作“AdaptationType”字段的属性值的值,例如显示尺寸、CPU状态、存储器状态、和电池尺寸,被定义为替换“AdaptationType”的新的属性字段,并且“AdaptationTypeValue”的值被定义为其属性字段的值。
根据一个实施例,可以独立地或共同地使用“AdaptiveSceneIndicator”、“AdapatationType”、和“AdaptationTypeValue”。
在“AdaptiveSceneIndicator”的情况下,虽然不使用该字段,但是如果使用指示指示本发明中描述的“自适应场景组元”的信息的字段,则意味着“AdaptiveSceneIndicator”=True(真)。
因为一个场景数据或场景段不应该必然具有一个适配判据,所以可以使用几个适配判据。例如,当使用诸如终端的场景尺寸和终端的存储器尺寸之类的几个因素作为场景的适配判据时,要被过滤的数据可以具有几个适配判据。此外,可以预期,即便基于指示这些适配判据的其他信息来表示数据的方法也指示与本发明的示例相同的意思。
还可以提出用于定义新的元素和属性并且参考它们的方法,所述新的元素和属性可以呈现并参考由该新的属性意味着的适配判据。例如,提出一种能够提供根据LASeR首标之内或特定位置来描述适配判据的适配判据列表的方法,并且对适配判据列表的参考可以被用作用于定义和过滤新的属性的方法。
表4示出提供适配判据的列表的LASeR首标的示例。如上所述,可以参考列表中的一个或多个适配判据。即使这些属性和字段的表示有所修改或变化,当它们用于执行过滤以用于自适应数据表示时,其将落入本发明的范围。
表4
Figure BPA00001248988100111
本发明的另一个实施例提供一种当适配判据以LASeR命令为单位而不同时对“自适应场景组元”信息执行过滤(即,以命令为单位执行过滤)的方法。
参考下表5,诸如NewScene(新场景)和Insert(插入)之类的LASeR命令用于场景组成。表5示出包括4个场景命令的内容。
表5
Figure BPA00001248988100121
下表6A和6B示出一种用于将自适应场景组元信息定义为LASeR命令的新属性并且表示它以便基于逐个命令过滤它的方法。
表6A
Figure BPA00001248988100122
参考表6A,用于将新的场景组成元素“polyline”插入到具有“Dictionary”作为ID属性的元素的Insert命令的场景指示其显示尺寸被分类为MEDIUM(中等)的终端的数据。
此外,用于将新的属性点插入到具有“Shape4”作为ID属性的元素的“Insert”命令的场景指示其显示尺寸被分类为LARGE的终端的数据。
已经接收到如表6A所示的数据的终端可以根据适配判据以及与其值有关的其自己的特征和条件,来执行过滤过程,包括执行指定的命令、解码数据直到它接收到下一个场景、组成场景、或丢弃数据而不渲染。
下表6B示出用于将新的字段添加到LASeR命令上并且基于逐个命令根据适配信息执行过滤或切换的方法的示例。用于逐命令过滤或切换的新的字段可以用作一个或多个命令的组。
表6B
Figure BPA00001248988100131
如上述示例中所述,适合于终端的性能的LASeR数据流的适配判据、以及用于指示它们关联的值的字段和属性可以根据提供适配相关数据的数据单元(即根据过滤的目标和范围)而在它们的位置和呈现上有所变化。
例如,当基于逐文件提供适配信息时,其可以位于文件首标中。当基于逐场景命令提供适配信息时,其可以利用LASeR命令中的属性来表示,可以通过添加可以担当新的群组节点或父节点及其首标的字段来表示,或者可以利用场景组成元素中的新的元素或用于场景组成元素的属性来表示。
因此,当已经接收到LASeR数据流的适配判据和用于指示它们的相关值的字段和属性的终端接收到它不能处理的数据时,该终端执行包括丢弃过程的过滤,该丢弃过程包括丢弃与该字段和属性有关的数据而不解码、或者从存储器中删除已经解码的数据(如果有的话)而不渲染。
接着,作为本发明的另一个示范性实施例,将利用被定义为用于过滤的判据的用于场景描述的数据集来描述过滤或切换方法。用于场景描述的数据集可以用场景段或存取单元(AU)来表示。在下面的描述中,假定用于场景描述的数据集或它的首标具有适配信息。
首先,将描述如下方法,其中当用于描述预定时间的场景的数据集被分成几个流然后递送时,即,当用于描述相同时间的场景的数据集被分成几个流然后递送时,终端仅仅选择与它自己的性能和状况相一致的流,并且使用它们作为用于组成场景的数据。
终端接收数据,检查所接收的数据中的首标信息,从首标信息中检测适配信息,根据其检查终端条件,并仅仅过滤包括适合于它自己的性能和状况的数据集的流,从而提供服务。如上所述,可以执行诸如丢弃数据之类的过滤操作而不执行在提供服务的过程中应当执行的解码过程或场景组成过程。
当用于描述预定时间的场景的数据集由连续的数据组成并且在一个流中递送时,另一种方法通过检查首标信息来检测适配信息,根据其检查终端状态,并仅仅过滤适合于它自己的性能和状况的数据集,从而提供服务。当数据集由连续的数据组成时,用于表示预定时间的场景的信息的场景组成时间信息可以具有相同的值,并且此信息也可以用于过滤和切换。除了上述方法之外,还可以通过将用于描述场景的数据集定义为用于利用本发明描述的适配相关信息进行过滤的判据。
表7
Figure BPA00001248988100141
表7中的“SceneUnit”可以在其中包括诸如NewScene和Refresh(刷新)之类的命令,它们包括在一个存取单元中,并且“SceneUnit”可以具有由本发明定义的适配信息作为属性。作为另一个用途,可以在与其他命令相同的级别上在SceneUnit中定义用于适配的新的命令(例如,Add(添加)、Delete(删除)...)。此新的命令包括作为命令并且具有相同的适配判据的场景。例如,可以如下使用它。
表8
Figure BPA00001248988100151
在表8中,‘adaptationConstraint’属性包括‘AdapatationType’和‘AdaptationTypeValue’信息,或指代该信息。‘AdapatationType’和‘AdaptationTypeValue’可以以列表类型提供各种适配判据。在这种情况下,终端接收数据,检查它的命令组的‘AdaptiveSceneIndicator’、‘AdapatationType’、和‘AdaptationTypeValue’信息,根据其检查终端状态,并仅仅过滤适合于它自己的性能和条件的数据,从而提供服务。
如上所述,可以执行诸如丢弃数据之类的过滤和切换操作而不执行在提供服务的过程中应当执行的解码过程或场景组成过程。
除了上述方法之外,还可以基于AU执行过滤,其是指示应当利用在本发明中定义的适配信息在单位时间内表示的数据的最小单位。
图3示出根据本发明的实施例的用于接收通过将几个逻辑流多路复用为一个物理流而服务的LASeR流的终端的操作。
参考图3,终端在步骤300接收LASeR流,并且在步骤310检查所接收的流中的每个AU的首标。终端在步骤320解码用于组成场景的数据,并且在步骤330在场景组成时间处显示数据。
图4示出根据本发明的实施例的用于接收通过将几个逻辑流多路复用为一个物理流而服务的LASeR服务的终端的操作。LASeR数据流可以包括包含与每个接收终端的特性有关的组元的数据流。在通过将几个逻辑流多路复用成一个物理流来服务的LASeR流的情况下,分别构造包含首标信息的AU和包含构成实际场景的数据的AU。
参考图4,终端在步骤400接收LASeR流,并在步骤410检查所接收的LASeR流中的AU首标。在步骤425,终端确定所接收的AU是否包含首标信息。如果所接收的AU包含首标信息,则终端在步骤430检查用于AU的设置信息。该设置信息包括LASeR流的首标信息。
终端在步骤445确定“AdaptiveSceneIndicator”的值。如果“AdaptiveSceneIndicator”字段的值是FALSE,则终端在步骤440将用于数据丢弃的设置信息设置为OFF以便不丢弃LASeR流,然后解码稍后将接收的包含所接收的首标信息的实际数据(即用于组成实际场景的数据)的AU。
如果“AdaptiveSceneIndicator”字段的值是TRUE,则终端在步骤450检查它的性能。如果它的性能不足够服务“自适应场景组元”,则终端在步骤460将用于数据丢弃的设置信息设置成ON,以丢弃稍后将接收的首标信息的实际数据,而不进一步处理包含用于组成实际场景的数据的接收的AU,即,不解码数据和组成或渲染存储器中的场景。然而,如果它的性能足以服务自适应场景组元,则终端在步骤440不丢弃LASeR流。
然而,如果在步骤425确定所接收的AU不包含首标信息,则终端在步骤465确定是否丢弃包含用于组成与包含图4描述的首标信息的AU有关的实际场景的数据的AU,直到稍后接收到包含首标信息的新的AU。
如果终端在步骤465确定不丢弃接收的AU,则终端检查设置信息。基于设置信息,终端在步骤480解码接收的数据,并在步骤490在屏幕上显示解码的数据。然而,如果终端在步骤465确定丢弃接收的数据,则终端在步骤470丢弃接收的LASeR流而不解码数据和在存储器中组成或渲染它。
在上述实施例中,除接收流(步骤400)、检查AU的首标(步骤410)、检查设置信息(步骤430)、解码包含用于组成与包含终端稍后接收的首标信息的AU有关的实际场景的数据的AU(步骤480)、基于‘AdaptiveSceneIndicator’字段的值(步骤445)、以及在屏幕上显示解码的数据(步骤490)、或丢弃数据而没有解码过程和它的所有后续过程之外,任何附加过程可以根据特定终端的类型和设计而改变次序或被省略。
如果可以使用“AdaptiveSceneIndicator”字段和本发明中新定义的字段和属性提供与本发明的服务相同的服务,则本领域技术人员显然可知,可以对这里描述的实施例进行各种变化和修改而不脱离本发明的范围和精神。
当如第二示范性实施例所述通过将几个逻辑流多路复用成一个物理流来提供LASeR数据时,可以在提供用于发送首标类型的数据的SAF的AU上承载LASeR首标。“AdaptiveSceneIndicator”字段以及在本发明中新定义的字段和属性可以被表示为表9所示,并且也可以添加到saf:sceneHeader中。
表9
下表10作为本发明的另一个实施例示出一种用于将1比特的presenceOfDTS字段分配给这里描述的AdaptiveSceneFlag的方法,因为SAF的分组首标中的presenceOfDTS字段目前被预置为0且未使用。该实施例中,已经接收到具有表10中的“AdaptiveSceneFlag”=True(真)的SAF分组的终端可以通过在检查AU之前检查分组首标,认识到数据流包括用于自适应数据服务的数据,其包含与每个终端的特性有关的元素。
表10
作为本发明的另一个实施例,SAF_AdaptiveScene_Unit被定义为SAF的新的AU类型,以指示适配判据和它们在适合于终端的特性的LASeR数据流中的值。SAF_Adaptive_Unit可以指示适配判据和它们的稍后将接收的SAF AU的值。
下表11指定新的SAF类型的SAF_AdaptiveScene_Unit。Stop_AdaptiveScene_Unit指示不再接收包含与适配判据和它们在先前接收的SAF_AdaptiveScene_Unit中的值有关的数据的SAF AU。
表11
Figure BPA00001248988100181
‘SAF_AdaptiveScene_Unit’可以包括上述适配信息作为它的字段。在这种情况下,可以添加‘adaptiveSceneIndicatorFlag’,并且其指示可以在该字段中表示并且稍后将接收到的SAF AU数据流是‘自适应场景组元’。
当‘SAF_AdaptiveScene_Unit’的存在本身指示此字段的值是“SAF_AdaptiveScene_Unit”=True时,可以不使用‘adaptiveSceneIndicatorFlag’。AdaptationType字段指示数据流的适配判据。可以根据属性值的类型以多种方式表示“AdaptationType”的属性值,并且分配的比特的数目可以根据表示的方式而变化。
此外,当在表示“AdaptationType”的各种方法当中使用通过参考来表示“AdaptationType”的方法时,可以新添加用于url类型、urlLengh(url长度)等的新字段。
“AdaptationTypeValue”是表示数据流的适配判据值的字段。当存在适合于数据流的两个或更多个适配判据时,可以添加‘numOfAdaptationType’字段等。可以根据信息表示方法来添加用于提供“AdaptationType”的数据节点的长度信息的字段。
作为本发明的又一个实施例,以新的SAF AU类型定义‘SAF AU’、‘AdaptiveSceneAU’、‘AdaptiveSceneCacheUnit’、‘AdaptiveSceneFFU’、和‘AdaptiveSceneFU’,它们都可以包含适合于终端的特性的数据流。
“AdaptiveSceneAU”表示可以包含适合于终端的特性的数据流的一类AU,而“AdaptiveSceneCacheUnit”表示可以包含适合于终端的特性的高速缓存数据的一类AU。当适合于终端的特性的数据流的尺寸大于AU的尺寸时,可以在将数据分段之后提供数据。经分段的数据的第一AU可以包含在“AdaptiveSceneFFU”中,其余数据段可以包含在“AdaptiveSceneFU”中。
下表12指定新的SAF类型的“SAF_AdaptiveScene_Unit”。
表12
  值   存取单元有效载荷的类型   有效载荷中的数据
  0x00   保留
  0x01   TransientStreamHeader   SimpleDecoderConfigDescriptor
  0x02   NonTransientStreamHeader   SimpleDecoderConfigDescriptor
  0x03   EndofStream   (无数据)
  0x04   AccessUnit   存取单元
  0x05   EndOfSAFSession   (无数据)
  0x06   CacheUnit   缓存对象
  0x07   RemoteStreamHeader   url和SimpleDecoderConfigDescriptor
  0x08   GroupDescriptor   -
  0x09   FirstFragmentUnit   存取单元的第一个片段
  0x0A   FragmentUnit   存取单元的片段(非第一个片段)
  0x0B   SAFConfiguration   safConfiguration对象
  0x0C   StopCache   -
  0x0D   AdaptiveSceneAU   存取单元
  0x0E   AdaptiveSceneCacheUnit   缓存对象
  0x0F   AdaptiveSceneFFU   存取单元的第一个片段
  0x10   AdaptiveSceneFU   存取单元的片段(非第一个片段)
  0x11~   保留   -
用于表示适配判据和它们的包含在甚至‘AdaptiveSceneCacheUnit’、‘AdaptiveSceneFFU’、‘AdaptiveSceneFU’以及‘AdaptiveSceneAU’中的数据值的方法等同于如上所述的方法。
此外,虽然没有定义新的SAF的单元类型,但是可以将诸如AdaptiveSceneIndicator、AdaptiveType和AdaptiveValue之类的指示适配判据的字段添加到现有SAF的每个单元中,包括SAF的首标单元类型(0x01、0x02、0x07)和AU单元类型(0x04、0x06)。此外,可以根据信息的数据类型不同地分配或表示关于在定义适配判据的字段时分配的数据的尺寸的信息。
图5示出根据本发明的实施例的服务LASeR内容的示例。
参考图5,AU 500包括首标。根据本发明的实施例,AU 500和530可以是用于指示适配判据和它们的数据流的值的字段和AU,不仅包括首标类型而且包括“SAF_AdaptiveScene_Unit”。当在首标510中将“AdaptiveSceneIndicator”设置为TRUE时,终端检查它自己的当前状态。这里,终端检查可用资源,或者考虑事件状态和诸如CPU处理能力、存储器状态、和电池状态之类的条件。如果终端的当前状态足以处理自适应场景组元,则终端解码和显示稍后接收的数据520。
根据本发明的实施例,数据520的范围可以是可用的直到终端接收到具有与适配判据和它们的下一个适配数据的值有关的字段的数据或首标。当接收到“Stop_AdaptiveScene_Unit”时,其表示与数据有关的适配判据和它们的值不再可用,则其可以指示数据520已被完全接收到。
其后,已经接收到包括首标530的AU的终端通过检查首标信息540来确定“AdaptiveSceneIndicator”是否为TRUE。如果终端不足以处理自适应场景组元,则终端丢弃稍后接收的包含场景组成的实际数据的所有AU 550而不解码。
根据本发明的实施例,即便对于已经经历了解码过程的数据,终端也执行数据丢弃,包括根据在本发明中描述的与适配判据和它们的值对应的过滤机制来从存储器中删除数据。
即使在根据本发明的示范性实施例中提供的方法服务LASeR内容的同时终端的性能变化时,也可以考虑特定条件或终端的性能来更灵活地组成场景。当本发明的实施例中定义的元素或属性具有相同的意思时,可以使用不同名称或类型的元素和属性或属性值。此外,可以独立地或共同地使用本发明的实施例中描述的字段或属性。
图6是示出根据本发明的示范性实施例的发送器的结构的框图。
参考图6,创建器600可以创建场景组成元素,其包括可以指示或标识特定条件或终端的特性和性能的场景组成元素和属性,上面已经在本发明的实施例中对其进行了描述。在做成场景组成元素时,创建器600还可以创建与事件的使用或事件的发生对应的操作的细节场景内容。创建器600将所创建的LASeR内容递送给编码器610。编码器610编码LASeR内容并将经编码的LASeR内容递送给多路复用器620。多路复用器620将经编码的LASeR内容与几个逻辑流多路复用,输出一个物理流。发送器630将经多路复用的流发送到接收器。
可以无需多路复用过程来发送经编码的LASeR内容。这可以如在本发明的上述实施例中的一个那样省略。
图7是示出根据本发明的实施例的接收器的结构的框图。
参考图7,多路分解器700将所接收的流分离或多路分解成逻辑流。对于没有经过多路复用的流,显然可以省略多路分解过程。
解码器710将经多路分解的流解码并将经解码的流递送到渲染器720。具体来说,根据本发明,解码器710解码所接收的流以检查流的首标。
渲染器720接收经解码的数据,并基于场景组成元素渲染该场景,根据本发明的示范性实施例该场景组成元素包括可以指示或标识特定条件或终端的特性和性能的场景组成元素和属性。即,渲染器720根据由解码器710检查的首标的适配信息来确定是否使用所接收的流的场景组成元素自适应地组成场景。显示器730在终端的屏幕上显示每个场景。
依赖于本发明中新定义的元素和属性来定义信息的方法可以变化。根据每种数据定义格式,新定义的元素和属性信息可以由首标信息组成,包括用于初始场景组成的信息、以及用于场景更新、场景更新数据组、场景段和、存取单元的信令信息,或者可以由存取单元或首标信息组成,该存取单元或首标信息与用于场景组成的实际场景信息分开以用于信号发送。当以用于信号发送的数据格式形成时,新定义的元素和属性信息可以由用于表示信息的字段组成。
可以参考LASeR内容内/外的其他数据、文件、应用、服务等来使用用作本发明中新定义的属性的值的信息。在这种情况下,可以在LASeR内容中定义属性以仅仅指代属性值,并且甚至也可以使用具有参考功能的元素和属性来指代被定义为其他数据、文件、程序、服务等等的属性。即使当使用具有参考功能的元素和属性指代属性和属性值时,如果它们用于与在本发明中描述的属性的功能相同的目的,则其将落入本发明的范围。
本本发明的示范性实施例也可以被具体化为计算机可读记录介质上的计算机可读代码。计算机可读记录介质是可以储存其后可以被计算机系统读取的数据的任何数据存储设备。计算机可读记录介质的示例包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光数据存储器件和载波(诸如经由有线或无线传输路径通过互联网的数据传输),而不限于此。计算机可读记录介质也可以被分布在网络耦合的计算机系统之上以使得计算机可读代码以分布式被存储和执行。此外,用于实现本发明的功能性程序、代码和代码段可被本发明所属领域的程序员容易地构造,而落入本发明的范围。
虽然已经参考其特定示范性的实施例展示和描述了本发明,但是本领域技术人员应当理解,可以对本发明进行形式和细节上的各种修改而不脱离由所附权利要求书及其等效物所定义的本发明的精神和范围。

Claims (16)

1.一种基于轻型应用场景表现LASeR引擎的操作终端的方法,包括:
检查所接收的包括用于场景描述的场景组成元素的LASeR流的首标中的适配信息;
根据该首标中的所述适配信息,使用所接收的LASeR流的所述场景组成元素自适应地组成场景;以及
显示所述自适应地组成的场景,
其中所述适配信息包括适配类型和适配类型值,
其中,所述适配类型指示LASeR流的适配判据并且适配类型值指示LASeR流的适配判据的值,
其中,所述适配判据包括处理LASeR流所需的终端的显示尺寸、计算容量、功耗容量、存储器信息、和输入/输出容量中的至少一个,以及
其中,所述自适应地组成场景包括根据适配类型和适配类型值检查终端状态并且如果终端状态不适合则丢弃场景组成元素。
2.如权利要求1所述的方法,其中该适配信息包括在适配约束的属性中。
3.如权利要求1或2所述的方法,其中基于逐个命令设置该适配信息,该命令与场景组成元素的插入有关。
4.如权利要求1或2所述的方法,其中基于逐个场景单元设置该适配信息,该场景单元是至少一个流的集合并且用于在预定时间内组成该场景。
5.如权利要求1或2所述的方法,其中基于逐个存取单元设置该适配信息,该存取单元是最小的流单元并且用于在时间单元内组成该场景。
6.如权利要求1或2所述的方法,其中以简单聚合格式(SAF)的存取单元为单位设置该适配信息,简单聚合格式是音频流和视频流的聚合。
7.如权利要求1或2所述的方法,其中基于逐个片段单元设置该适配信息,该片段单元是存取单元的片段并且用于在时间单元内组成该场景。
8.如权利要求1或2所述的方法,其中该适配类型包括用于图形元素的信息、用于字体元素的信息、用于文本元素的信息、和用于图像或视频数据的信息中的至少一个,这些信息中的每一个用于自适应地组成场景。
9.一种用于基于轻型应用场景表现LASeR引擎进行操作的终端,所述终端包括:
解码器,用于解码所接收的包括用于场景描述的场景组成元素的LASeR流,该解码器被配置为检查所接收的LASeR流的首标中的适配信息;
渲染器,用于根据由解码器检查的首标中的所述适配信息,使用所接收的LASeR流的所述场景组成元素自适应地组成场景;以及
显示器,用于显示所述自适应地组成的场景,
其中所述适配信息包括适配类型和适配类型值,
其中,所述适配类型指示LASeR流的适配判据并且适配类型值指示LASeR流的适配判据的值,
其中,所述适配判据包括处理LASeR流所需的终端的显示尺寸、计算容量、功耗容量、存储器信息、和输入/输出容量中的至少一个,以及
其中,所述自适应地组成场景包括根据适配类型和适配类型值检查终端状态并且如果终端状态不适合则丢弃场景组成元素。
10.如权利要求9所述的终端,其中该适配信息包括在适配约束的属性中。
11.如权利要求9或10所述的终端,其中基于逐个命令设置该适配信息,该命令与场景组成元素的插入有关。
12.如权利要求9或10所述的终端,其中基于逐个场景单元设置该适配信息,该场景单元是至少一个流的集合并且用于在预定时间内组成该场景。
13.如权利要求9或10所述的终端,其中基于逐个存取单元设置该适配信息,该存取单元是最小的流单元并且用于在时间单元内组成该场景。
14.如权利要求9或10所述的终端,其中以简单聚合格式(SAF)的存取单元为单位设置该适配信息,简单聚合格式是音频流和视频流的聚合。
15.如权利要求9或10所述的终端,其中基于逐个片段单元设置该适配信息,该片段单元是存取单元的片段并且用于在时间单元内组成该场景。
16.如权利要求9或10所述的终端,其中该适配类型包括用于图形元素的信息、用于字体元素的信息、用于文本元素的信息、和用于图像或视频数据的信息中的至少一个,这些信息中的每一个用于自适应地组成场景。
CN200980113999.8A 2008-04-21 2009-04-21 使用富媒体内容组成场景的装置和方法 Expired - Fee Related CN102017651B (zh)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
KR10-2008-0036891 2008-04-21
KR20080036891 2008-04-21
KR20080040315 2008-04-30
KR10-2008-0040315 2008-04-30
KR1020080083007A KR20090111253A (ko) 2008-04-21 2008-08-25 리치미디어 콘텐츠의 장면 구성을 위한 장치 및 방법
KR10-2008-0083007 2008-08-25
KR10-2008-0099765 2008-10-10
KR1020080099765A KR101516020B1 (ko) 2008-04-21 2008-10-10 리치미디어 콘텐츠의 장면 구성장치 및 방법
PCT/KR2009/002078 WO2009131359A2 (en) 2008-04-21 2009-04-21 Apparatus and method for composing scenes using rich media contents

Publications (2)

Publication Number Publication Date
CN102017651A CN102017651A (zh) 2011-04-13
CN102017651B true CN102017651B (zh) 2014-01-29

Family

ID=41078150

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980113999.8A Expired - Fee Related CN102017651B (zh) 2008-04-21 2009-04-21 使用富媒体内容组成场景的装置和方法

Country Status (5)

Country Link
US (1) US8707151B2 (zh)
EP (1) EP2114076B1 (zh)
JP (1) JP5512657B2 (zh)
CN (1) CN102017651B (zh)
WO (1) WO2009131359A2 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009131359A2 (en) * 2008-04-21 2009-10-29 Samsung Electronics Co., Ltd. Apparatus and method for composing scenes using rich media contents
CN101968887A (zh) * 2010-09-08 2011-02-09 东莞电子科技大学电子信息工程研究院 一种富媒体场景的局部渲染方法
CN102279752B (zh) * 2011-08-31 2014-03-12 北京华电万通科技有限公司 一种基于Web3D的超大场景实时渲染装置和方法
US9444700B2 (en) 2011-11-02 2016-09-13 Imagine Communications Corp. Network analysis device and method
KR101903443B1 (ko) * 2012-02-02 2018-10-02 삼성전자주식회사 멀티미디어 통신 시스템에서 장면 구성 정보 송수신 장치 및 방법
US20130278642A1 (en) * 2012-04-20 2013-10-24 Samsung Electronics Co., Ltd. Perceptual lossless display power reduction
JP2015520406A (ja) * 2012-04-20 2015-07-16 サムスン エレクトロニクス カンパニー リミテッド Sei情報を用いたディスプレイ電力低減
KR20140002447A (ko) * 2012-06-29 2014-01-08 삼성전자주식회사 멀티미디어 시스템에서 적응적 미디어 구조 송수신 방법 및 장치
KR102069538B1 (ko) * 2012-07-12 2020-03-23 삼성전자주식회사 멀티미디어 요소의 배치를 위한 마크업을 구성하는 방법
KR101959820B1 (ko) * 2012-10-12 2019-03-20 삼성전자주식회사 멀티미디어 통신 시스템에서 구성 정보 송수신 방법 및 장치
KR101956111B1 (ko) * 2018-09-21 2019-03-11 삼성전자주식회사 멀티미디어 통신 시스템에서 장면 구성 정보 송수신 장치 및 방법
CN111327865B (zh) * 2019-11-05 2021-12-28 杭州海康威视系统技术有限公司 视频传输方法、装置及设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1868184A (zh) * 2003-10-17 2006-11-22 艾利森电话股份有限公司 用于多媒体显示的容器格式
WO2007028137A2 (en) * 2005-09-01 2007-03-08 Nokia Corporation Method for embedding svg content into an iso base media file format for progressive downloading and streaming of rich media content
WO2007107534A1 (fr) * 2006-03-17 2007-09-27 Streamezzo Procédé, dispositif et système de gestion d'informations structurées au sein d'une scène graphique

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5734589A (en) * 1995-01-31 1998-03-31 Bell Atlantic Network Services, Inc. Digital entertainment terminal with channel mapping
WO1997035393A1 (fr) * 1996-03-15 1997-09-25 Hitachi, Ltd. Dispositif de separation de donnees
US6317131B2 (en) * 1997-07-15 2001-11-13 At&T Corp. Interaction modalities for multimedia delivery and presentation using nodes
US6751623B1 (en) * 1998-01-26 2004-06-15 At&T Corp. Flexible interchange of coded multimedia facilitating access and streaming
JP2000032393A (ja) * 1998-07-09 2000-01-28 Sony Corp 画像情報処理装置および方法、並びに提供媒体
FR2795272B1 (fr) * 1999-06-18 2001-07-20 Thomson Multimedia Sa Procede de commutation de flux mpeg
JP3956549B2 (ja) * 1999-09-30 2007-08-08 ソニー株式会社 記録装置および方法、再生装置および方法並びに記録媒体
US6848004B1 (en) * 1999-11-23 2005-01-25 International Business Machines Corporation System and method for adaptive delivery of rich media content to a user in a network based on real time bandwidth measurement & prediction according to available user bandwidth
US7134073B1 (en) * 2000-06-15 2006-11-07 International Business Machines Corporation Apparatus and method for enabling composite style sheet application to multi-part electronic documents
JP2002064802A (ja) 2000-08-21 2002-02-28 Sony Corp データ伝送システム、データ伝送装置及び方法、シーン記述処理装置及び方法
CA2431762C (en) * 2000-12-18 2011-11-01 Kargo, Inc. A system and method for delivering content to mobile devices
US20040110490A1 (en) * 2001-12-20 2004-06-10 Steele Jay D. Method and apparatus for providing content to media devices
JP4440651B2 (ja) * 2002-03-27 2010-03-24 ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー データストリーミングシステムのためのデータ構造
JP2004013823A (ja) * 2002-06-11 2004-01-15 Hitachi Ltd コンテンツ配信システム及びプログラム
US8244895B2 (en) * 2002-07-15 2012-08-14 Hewlett-Packard Development Company, L.P. Method and apparatus for applying receiving attributes using constraints
NO318868B1 (no) * 2003-10-24 2005-05-18 Tandberg Telecom As Videokonferanse med forbedrede multimediakapabiliteter
US20050207657A1 (en) * 2004-02-02 2005-09-22 Clark Adam L System and method for encoding and decoding video
ATE399429T1 (de) * 2004-04-12 2008-07-15 Ind Academic Coop Verfahren, vorrichtungen und speichermedien zur bereitstellung von multimedia-diensten unter berücksichtung der endeinrichtungsfähigkeiten
KR100937045B1 (ko) 2004-07-22 2010-01-15 한국전자통신연구원 Saf 동기화 계층 패킷 구조
US8199781B2 (en) * 2004-12-14 2012-06-12 Samsung Electronics Co., Ltd Device and method for demultiplexing received transport stream in digital broadcasting receiver
KR100685124B1 (ko) * 2005-02-15 2007-02-22 에스케이 텔레콤주식회사 위성 dmb 시스템에서의 계층적 전송 시스템 및 그 방법
ES2536546T3 (es) * 2005-06-27 2015-05-26 Core Wireless Licensing S.à.r.l. Mecanismos de transporte para escenas dinámicas de medios enriquecidos
DE202007019459U1 (de) * 2006-03-30 2012-09-13 Lg Electronics Inc. Vorrichtung zum Decodieren/Codieren eines Videosignals
EP2084895A1 (en) * 2006-10-25 2009-08-05 Telefonaktiebolaget LM Ericsson (PUBL) Rich media stream management
WO2009131359A2 (en) * 2008-04-21 2009-10-29 Samsung Electronics Co., Ltd. Apparatus and method for composing scenes using rich media contents

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1868184A (zh) * 2003-10-17 2006-11-22 艾利森电话股份有限公司 用于多媒体显示的容器格式
WO2007028137A2 (en) * 2005-09-01 2007-03-08 Nokia Corporation Method for embedding svg content into an iso base media file format for progressive downloading and streaming of rich media content
WO2007107534A1 (fr) * 2006-03-17 2007-09-27 Streamezzo Procédé, dispositif et système de gestion d'informations structurées au sein d'une scène graphique

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
DUFOURD J C ET AL.An MPEG standard for rich media services.《IEEE MULTMEDIA,IEEE SERVICE CENTER,NEWYORK,NY,US》.2005,第12卷(第4期),60-68. *
JEAN-CLAUDE DUFOURD ET AL.LASeR and SAF editor"s study.《URL:http://www.mpeg-laser.org/documents/LASeR_specification_july2005.pdf》.2005,1-12. *

Also Published As

Publication number Publication date
EP2114076A2 (en) 2009-11-04
JP2011518526A (ja) 2011-06-23
WO2009131359A3 (en) 2010-01-14
WO2009131359A2 (en) 2009-10-29
US8707151B2 (en) 2014-04-22
EP2114076B1 (en) 2013-09-11
EP2114076A3 (en) 2011-06-08
US20090265603A1 (en) 2009-10-22
CN102017651A (zh) 2011-04-13
JP5512657B2 (ja) 2014-06-04

Similar Documents

Publication Publication Date Title
CN102017651B (zh) 使用富媒体内容组成场景的装置和方法
KR100484181B1 (ko) 멀티미디어 문서 저작 장치 및 방법
CN104917764B (zh) 一种基于二维码的多媒体业务推送方法及系统
US9298601B2 (en) Conditional processing method and apparatus
CN108200447A (zh) 直播数据传输方法、装置、电子设备、服务器及存储介质
US20050195856A1 (en) Multimedia messaging service system and method thereof
JP2008160837A (ja) プレビュー機能を有するマルチメディアデータのエンコーディング/デコーディング方法及び装置
KR20130005406A (ko) 휴대용 단말기에서 메시지를 전송하기 위한 장치 및 방법
US8340440B2 (en) Apparatus and method for inserting additional data into image file in electronic device
CN100488252C (zh) 一种电子业务指南的数据信息的传输方法
CN109547860A (zh) 一种点播的视频断网续播的方法和iptv播放装置
CN102100020A (zh) 用于提供富媒体服务的方法和装置
US20080248782A1 (en) Providing Devices With Command Functionality in Content Streams
US8537678B2 (en) MMS (multimedia messaging service) decoding method, MMS decoder and mobile terminal
KR101295377B1 (ko) 파일 포맷을 구성하는 방법과 상기 파일 포맷을 가지는파일을 포함한 방송 신호를 처리하는 장치 및 방법
US20090304351A1 (en) Systems and methods for determining behaviors for live and playback consumption
CN104618875A (zh) 一种消息发送方法和电子设备
KR101516020B1 (ko) 리치미디어 콘텐츠의 장면 구성장치 및 방법
CN101527884B (zh) 实现直接播放电子邮件附带的多媒体信息的终端和方法
KR20120066461A (ko) 콘텐츠 변환 장치 및 방법
US20100332673A1 (en) Method and apparatus of referring to stream included in other saf session for laser service and apparatus for providing laser service
KR100640812B1 (ko) 동보 전송 기능을 갖는 이동통신 단말기 및 그 방법
KR20090111253A (ko) 리치미디어 콘텐츠의 장면 구성을 위한 장치 및 방법
KR20110089703A (ko) 스팸 메시지를 방지할 수 있는 필기 애니메이션 메시지를 전송하는 장치 및 방법
KR20080005727A (ko) 콘텐츠 송수신 장치 및 콘텐츠 송수신 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140129

Termination date: 20200421

CF01 Termination of patent right due to non-payment of annual fee