CN107071513B - 用于提供媒体内容的方法、客户机和服务器 - Google Patents

用于提供媒体内容的方法、客户机和服务器 Download PDF

Info

Publication number
CN107071513B
CN107071513B CN201710060188.2A CN201710060188A CN107071513B CN 107071513 B CN107071513 B CN 107071513B CN 201710060188 A CN201710060188 A CN 201710060188A CN 107071513 B CN107071513 B CN 107071513B
Authority
CN
China
Prior art keywords
media
media content
representation
attribute
adaptive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710060188.2A
Other languages
English (en)
Other versions
CN107071513A (zh
Inventor
张洪党
李振莹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sipco LLC
Original Assignee
Ideahub Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=47113237&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN107071513(B) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Ideahub Inc filed Critical Ideahub Inc
Publication of CN107071513A publication Critical patent/CN107071513A/zh
Application granted granted Critical
Publication of CN107071513B publication Critical patent/CN107071513B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/756Media network packet handling adapting media to device capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/762Media network packet handling at the source 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25825Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]

Abstract

提供了用于提供媒体内容的方法、客户机和服务器。一种由DASH(HTTP上的动态自适应流媒体)客户机执行的用于提供媒体内容的方法,该方法包括:接收媒体内容的元数据,该元数据包括一个或多个周期;基于所述元数据所提供的信息,存取所述媒体内容的段;以及解码和渲染所述段内所包含的所述媒体内容的数据,其中每一周期包括一个或多个自适应性集合,其中所述自适应性集合包括表示,其中单一自适应性集合中包括的所有表示代表相同媒体内容组件,并且包括被确定为感知上相同的一个或多个媒体流,其中一个或多个表示基于在所述表示中所呈现的媒体内容组件的性质在自适应性集合中排列。

Description

用于提供媒体内容的方法、客户机和服务器
本专利申请是下列发明专利申请的分案申请:
申请号:201280013527.7
申请日:2012年3月16日
发明名称:提供使用表示的流媒体内容的装置及方法
技术领域
本发明的技术领域涉及一种流媒体内容提供技术,特别是,涉及一种装置及方法,提供使用媒体内容的表示的媒体内容。
背景技术
流媒体(streaming),是用于传送和播放声音和影像等媒体内容的方式中的一个。客户端在通过流媒体接收内容的同时可播放上述内容。
自适应流媒体服务,表示通过以应答客户的请求和上述请求的服务构成的通信方式来提供流媒体服务。
客户端,可通过自适应流媒体服务来请求适合于自身环境(例如,自身的传送信道)的媒体序列,且服务器可提供自身所具备的多种质量的媒体序列中符合客户端请求的媒体序列。
自适应性流媒体服务可基于多种协议被提供。HTTP自适应流媒体服务表示基于HTTP协议所提供的自适应性流媒体服务。HTTP自适应流媒体的服务的客户端可使用HTTP协议从服务器接收内容,并可向服务器传送与流媒体服务有关的请求。
发明内容
技术课题
根据本发明的一个实施例,提供一种装置及方法,使用包含有存取信息的表示来播放媒体内容。
根据本发明的一个实施例,提供一种装置及方法,使用说明媒体内容的表示之间的关系的信息来播放媒体内容。
根据本发明的一个实施例,提供一种装置及方法,使用具不同显示位深的终端的不同表示的信息来播放媒体内容。
技术方案
根据一个侧面,可提供一种媒体提供方法,包括以下步骤:接收包含有一个以上周期的媒体内容的元数据;基于所述元数据所提供的信息,存取所述媒体的段;以及将所述段内所包含的所述媒体内容的数据解码及渲染,且各周期包括所述媒体的一个以上的表示,且各表示,包括用于支持在感知所述媒体内容时具不便性的残疾人的信息。
如所述的媒体提供方法,所述表示的媒体组件为解决残疾人问题被增大,所述增大是指明暗对比的增大和色彩调整的增大中的一个以上。
如所述的媒体提供方法,所述信息,显示出表示的意图使用,所述意图使用是指手语、字幕、标题、和说明中的一个以上。
所述信息可包括属性,用于提供外部MPEG-21数字项适配DIA(Digital ItemAdaptation)的参照。
根据另一个侧面,可提供一种媒体提供方法,包括以下步骤:接收包含有一个以上周期的媒体内容的元数据;基于所述元数据所提供的信息,存取所述媒体的段;以及将所述段内所包含的所述媒体内容的数据解码及渲染,且各周期包括所述媒体的一个以上的表示,且所述元数据,包括用于说明所述一个以上的表示之间的关系的属性。
所述一个以上的表示中,第1表示可包含用于指出所述一个以上的表示中一部分表示的目录的属性,且所述第1表示与所述一部分表示中的一个可一起使用。
所述第1表示可以是音频说明的表示。
所述一部分表示可分别为视频组件的表示。
所述一个以上的表示中,第1表示可包括用于指出所述一个以上的表示中一部分表示的目录的属性。
所述一部分表示中的一个表示可用来代替所述第1表示。
根据又另一个侧面,可提供一种媒体提供方法,包括以下步骤:接收包含有一个以上周期的媒体内容的元数据;基于所述元数据所提供的信息,存取所述媒体的段;以及将所述段内所包含的所述媒体内容的数据解码及渲染,且各周期包括所述媒体的一个以上的表示,且各表示,包括位深属性,用于选择具不同的显示位深的终端的互不相同的表示。
所述位深属性,可指出用于显示视觉性内容的亮度/色度取样的比特个数。
根据另一个侧面,可提供一种终端,包括:存取引擎,接收包含有一个以上周期的媒体内容的元数据,并基于所述元数据所提供的信息,接收所述媒体的段,并将所述段内所包含的所述媒体内容的数据解码;和媒体引擎,从所述存取引擎接收所述媒体的数据,并输出所述媒体,且各周期包括所述媒体的一个以上的表示,且各表示,包括用于支持在感知所述媒体内容时具不便性的残疾人的信息。
根据又另一个侧面,可提供一种终端,包括:存取引擎,接收包含有一个以上周期的媒体内容的元数据,并基于所述元数据所提供的信息,接收所述媒体的段,并将所述段内所包含的所述媒体内容的数据解码;和媒体引擎,从所述存取引擎接收所述媒体的数据,并输出所述媒体,且各周期包括所述媒体的一个以上的表示,且所述元数据,包括用于说明所述一个以上的表示之间的关系的属性。
根据又另一个侧面,可提供一种终端,包括:存取引擎,接收包含有一个以上周期的媒体内容的元数据,并基于所述元数据所提供的信息,存取所述媒体的段,并将所述段内所包含的所述媒体内容的数据解码;和媒体引擎,从所述存取引擎接收所述媒体的数据,并输出所述媒体,且各周期包括所述媒体的一个以上的表示,且各表示,包括位深属性,用于选择具不同的显示位深的终端的互不相同的表示。
本发明还提供了一种由DASH(HTTP上的动态自适应流媒体)客户机执行的用于提供媒体内容的方法,该方法包括:接收媒体内容的元数据,该元数据包括一个或多个周期;基于所述元数据所提供的信息,存取所述媒体内容的段;以及解码和渲染所述段内所包含的所述媒体内容的数据,其中每一周期包括一个或多个自适应性集合,其中所述自适应性集合包括表示,其中单一自适应性集合中包括的所有表示代表相同媒体内容组件,并且包括被确定为感知上相同的一个或多个媒体流,其中一个或多个表示基于在所述表示中所呈现的媒体内容组件的性质在自适应性集合中排列,其中所述媒体内容组件的性质包括以下的至少一个:1)与语言相关的属性,2)与媒体组件类型相关的属性,3)与图像宽高比例相关的属性,4)指定关于作用注释方案的信息的与作用性质相关的要素,5)指定关于存取性方案的信息的与存取性性质相关的要素,6)指定关于视点注释方案的信息的与视点性质相关的要素,7)指定关于等级方案的信息的与等级性质相关的要素。
本发明还提供了一种由服务器执行的用于提供媒体内容的方法,该方法包括:对DASH(HTTP上的动态自适应流媒体)段执行托管;和向客户机传送媒体内容的元数据,该元数据包括一个或多个周期,其中每一周期包括媒体内容的一个或多个表示,其中每一周期包括一个或多个自适应性集合,其中所述自适应性集合包括表示,其中单一自适应性集合中包括的所有表示代表相同媒体内容组件,并且包括被确定为感知上相同的一个或多个媒体流,其中一个或多个表示基于在所述表示中所呈现的媒体内容组件的性质在自适应性集合中排列,其中所述媒体内容组件的性质包括以下的至少一个:1)与语言相关的属性,2)与媒体组件类型相关的属性,3)与图像宽高比例相关的属性,4)指定关于作用注释方案的信息的与作用性质相关的要素,5)指定关于存取性方案的信息的与存取性性质相关的要素,6)指定关于视点注释方案的信息的与视点性质相关的要素,7)指定关于等级方案的信息的与等级性质相关的要素。
本发明还提供了一种DASH(HTTP上的动态自适应流媒体)客户机,包括:存取引擎,接收媒体内容的元数据,基于所述元数据所提供的信息来接收所述媒体内容的段,和解码所述段内所包含的所述媒体内容的数据,该元数据包括一个或多个周期;和媒体引擎,从所述存取引擎接收所述媒体内容的数据,并输出所述媒体内容,其中每一周期包括一个或多个自适应性集合,其中所述自适应性集合包括表示,其中单一自适应性集合中包括的所有表示代表相同媒体内容组件,并且包括被确定为感知上相同的一个或多个媒体流,其中一个或多个表示基于在所述表示中所呈现的媒体内容组件的性质在自适应性集合中排列,其中所述媒体内容组件的性质包括以下的至少一个:1)与语言相关的属性,2)与媒体组件类型相关的属性,3)与图像宽高比例相关的属性,4)指定关于作用注释方案的信息的与作用性质相关的要素,5)指定关于存取性方案的信息的与存取性性质相关的要素,6)指定关于视点注释方案的信息的与视点性质相关的要素,7)指定关于等级方案的信息的与等级性质相关的要素。
本发明还提供了一种服务器,包括:处理器,配置为:对DASH(HTTP上的动态自适应流媒体)段执行托管;和向客户机传送媒体内容的元数据,该元数据包括一个或多个周期,其中每一周期包括媒体内容的一个或多个表示,其中每一周期包括一个或多个自适应性集合,其中所述自适应性集合包括表示,其中单一自适应性集合中包括的所有表示代表相同媒体内容组件,并且包括被确定为感知上相同的一个或多个媒体流,其中一个或多个表示基于在所述表示中所呈现的媒体内容组件的性质在自适应性集合中排列,其中所述媒体内容组件的性质包括以下的至少一个:1)与语言相关的属性,2)与媒体组件类型相关的属性,3)与图像宽高比例相关的属性,4)指定关于作用注释方案的信息的与作用性质相关的要素,5)指定关于存取性方案的信息的与存取性性质相关的要素,6)指定关于视点注释方案的信息的与视点性质相关的要素,7)指定关于等级方案的信息的与等级性质相关的要素。
技术效果
根据本发明的一个实施例的方法及装置,可使用包含有存取信息的表示来播放媒体内容。
根据本发明的一个实施例的方法及装置,可使用说明媒体内容的表示之间的关系的信息来播放媒体内容。
根据本发明的一个实施例的方法及装置,可使用具不同显示位深的终端的不同表示的信息来播放媒体内容。
附图说明
图1是示出DASH的高级数据模型的示图。
图2是示出根据本发明的一个实施例的内容处理方法的信号流程图。
图3是示出根据本发明的一个实施例的信令信息的目录的示图。
图4是示出根据本发明的一个实施例的内容分割的阶层和信令信息的级别的示图。
图5是示出根据本发明的一个实施例的终端的结构图。
具体实施方式
2011年8月30号出刊的ISO/IEC DIS 23009-1的HTTP上的动态自适应流媒体(DASH)的第一部分:媒体演示说明和段格式,其整个文件在此作为本发明的参考文献被引用,在说明以下实施例时作为参照。
以下,参照附图对本发明进行详细地说明,但是,本发明并不局限于实施例,各附图所标明的相同符号表示相同的部件。
以下所述的“明确出”可与“显示”或“表示”作为相同的意思来使用。技术用语“统一资源定位符URL(Uniform Resource Locator)”及“统一资源标识符URI(UniformResource Identifier)”可作为相同的意思来使用,并可互相代替。
特定要素的索引为1-N或0-N时,上述的要素可为一个以上。N可表示0以上的整数。
以下,对实施例中所使用的技术用语进行举例说明。
-HTTP上的动态自适应流媒体(Dynamic Adaptive Streaming over HTTP;DASH):1)可从标准(standard)HTTP服务器将媒体内容传达至HTTP客户端;2)并可明确出(specifie)使标准HTTP缓存(cache)的内容缓冲(caching)的格式(format)。所述的格式可以是XML格式或二进制(binary)格式。
-媒体内容可以是一个媒体内容周期或媒体内容周期的持续(contiguous)序列(sequence),以下,媒体内容,媒体和内容之间可作为相同的意思被使用。媒体内容,例如,音频、视频、字幕等具有共同的(common)时间线(timeline)的媒体内容组件的集合。此外,媒体组件可具有程序或影视如何(例如,个别地)结合(jointly)或相互排斥(mutuallyexclusive)从而媒体组件被演示的关系(relationships)。媒体内容可以是根据请求(demand)的内容或现场(live)内容。
内容可分成一个以上的间隔(interval)。即,内容可包括一个以上的间隔。以下,间隔和周期(period)可作为相同的意思来使用。特别是,周期可以是3GPP(GenerationPartnership Project)自适应HTTP中使用的技术用语。周期可以是媒体演示的间隔。所有周期的持续性序列可构成媒体演示。
一个以上的间隔可以是基本的单元。一个以上的间隔可通过将元数据信令被说明。即,元数据可分别说明一个以上的间隔。上述的元数据可以是后述的MPD。
-媒体内容组件可以是具分配(assigned)的媒体组件类型(type)的媒体内容的连续性组件。媒体内容组件可作为个别的流媒体被编码。媒体组件(media component)可以是,例如,类似频宽(bandwidth)、语言(language)、或分辨率(resolution),类似具特定属性(attribute)的音频(audio)、视频(video)、或字幕(timed text)等个别(individual)的媒体类型(type)的被编码(encoded)的版本(version)。
-流媒体可以是媒体内容组件的编码版本。
-媒体组件类型可以是音频(audio)、视频(video)、或文本(text)
-媒体演示可以是创建(establish)媒体内容的有界(bounded)或无界(unbounded)演示的数据的聚集。媒体演示可以是为了向用户提供流媒体服务,DASH客户端可存取的数据的聚集。MPD可通过MPD被说明。媒体演示可以是为了向用户提供流媒体服务,DASH客户端可存取的数据的被结构化的聚集。
-媒体演示说明MPD(Media Presentation Description)可以是用于提供流媒体服务的媒体演示的被形式化的说明。MPD可以是,构成用于存取段的适当的HTTP-URL,并为了向用户提供流媒体服务,包含DASH客户端所要求的数据的文件。媒体演示可包括MPD的可用更新(possible updates),并通过MPD被说明。
MPD可以是,1)存取段,2)为了构成用于向用户提供流媒体服务的适当的(appropriate)HTTP-URL,包含DASH客户端所要求的数据的文件。HTTP-URL可以是相对性的或绝对性的。MPD可以是XML-文件。
MPD可定义用于告知段的资源标识符的格式。MPD可提供有关媒体演示内被识别的资源的上下文(context)。资源标识符可以是HTTP-URL。URL可通过字节范围(byte range)属性被定义。
-周期(period)可以是媒体演示的间隔(inverval)。所有周期的持续性序列可构成媒体演示。即,媒体演示可包括一个以上的周期。此外,媒体演示可通过一个以上的周期的序列被构成。
-表示(representation)可以是以传达格式(delivery format)形成的一个以上的流媒体聚集及压缩(encapsulation),可与说明性元数据相关联。表示可以是一个周期内一个以上的媒体组件的被结构化(structured)的聚集。即,表示可以是,构成定义的周期期间的媒体内容的媒体内容组件的完整集合或部分集合的替代性选择(alternativechoices)中的一个。表示可包括一个以上的流媒体。
表示可在周期(即,包含自身的周期)可开始点开始,并可持续至所述周期的结束点。
表示可以是,类似比特率(bitrate)、分辨率(resolution)、语言(language)、及编解码(codec)等编码(encoding)选择(choice)不同的媒体内容或媒体内容的部分集合的替代性(alternative)选择(choice)的中的一个。
MPD(或MPD要素)可提供使客户端可选择一个以上的表示的说明性信息。
以下,表示和媒体演示可作为相同的意思来使用。
当对应一个间隔的2个以上的段的集合存在时,所述集合被命名为表示或备选方案(alternative)。
-段(segment)可以是具定义的格式的MPD内的最小可存取的单元。以下,段和媒体段可作为相同的意思来使用。
各间隔可分成段(segment)。以下,段和片段可作为相同的意思来使用。段可以是3GPP(Generation Partnership Project)自适应HTTP流媒体的用语。
段可表示,例如在RFC2616中所定义的有关HTTP-URL的HTTP/1.1GET请求(或字节范围(range)内指出(indicated)的一部分的GET请求)的应答(response)的实体(entity)正文(body)。
终端可使用接收的字节(即,段)来播放内容。
-子段可表示,经段级别中的段索引的被索引的段内最小(smallest)的单元(unit)。
-子表示(sub-representation)可以是整个周期内呈现的MPD内被说明的表示的一部分。
-随机存取点RAP(Random Access Point;RAP)为媒体段内的特定位置。RAP只使用媒体段内所包含的信息,被识别为可从RAP的位置继续从而可开始回放(playback)的位置。
HTTP上的动态自适应性流媒体DASH(Dynamic Adaptive Streaming over HTTP)可提供用于传达媒体内容的流媒体模型。客户端可单独地控制上述的传达部分。客户端可使用HTTP协议,向不具DASH-特有性能的标准网络服务器请求数据。因此,DASH标准可与用来提供DASH媒体演示的数据格式相一致。
媒体内容的被编码的可传达的版本的聚集和有关该版本的适当说明可形成媒体演示。媒体内容可由根据时间被持续的一个以上的媒体内容周期来构成。各媒体内容周期可由一个以上的媒体内容组件来构成。例如,以多种语言构成的音频组件和视频组件可作为一个以上的媒体内容组件的例子。可将媒体内容组件类型分配给各媒体内容组件。
各媒体内容组件可具有一个以上的编码版本。媒体内容组件的编码版本可通过流媒体被命名。各流媒体可接收用于媒体内容、媒体内容周期、或流媒体的编码的媒体内容的属性。例如,类似子取样、编解码参数(parameter)、编码比特率等编码处理的属性。
图1是示出DASH的高级数据模型的示图。
DASH可基于如图1所示的阶层性数据模型。
DASH媒体演示可经MPD文件被说明。MPD可说明根据时间的周期的序列。周期的序列可形成媒体演示。一般,周期显示出媒体内容的编码版本的相容性集合(consistent)可用期间的媒体内容的周期。即,一个周期期间,比特率(bitrate)、语言(language)、标题(caption)、及字幕(subtitle)等不改变。
周期可包括一个以上的自适应性集合。自适应性集合可显示出一个以上的媒体内容组件的可替代的编码版本的集合。例如,主要视频组件的一个自适应性集合,也可以是主要音频组件的被分离的一个自适应性集合。例如,类似标题和音频说明的其他可用资料存在时,上述其他可用资料可具分离的自适应性集合。
自适应性集合可包括一个以上的表示。表示可说明一个以上的媒体组件的可传达的编码版本。表示可包括一个以上的流媒体。自适应性集合内的随机的单个表示可充分地将所包含的媒体内容渲染(render)。一般情况下,客户端在一个周期内,为适应(adapt)网络状态或其他因素,可从一个表示转换成另一个表示。客户端可忽略(ignore)不支持客户端自身或经其他理由不适当的编码或其他渲染技术的表示。
在表示中,内容可根据时间分成段。即,表示可包括一个以上的段。段可以是MPD中所显示的数据的基本单元。各段的URL可被提供。段的URL被提供可以是表示,段为经单个HTTP请求可被提取(retrieve)的数据的最大单元。此外,MPD与URL可包括URL的字节范围(byte range)。因此,段可包括在其他更大资源的字节范围内。
以下,对上述的数据模型的构成要素之间的关系进行说明。
-MPD可包括一个以上的周期的串接。
-各周期可包括一个以上的自适应性集合。当自适应性集合包括一个以上的媒体内容组件时,各媒体内容组件可个别地被定义。
-各自适应性集合可包括一个以上的表示。
-各表示可包括一个以上的子表示。
-各表示可包括一个以上的子表示。
-段可包括用于将媒体数据和/或被包含的媒体内容存取、解码、及呈现的元数据。
-自适应性集合、表示、及子表示可共享共同的属性及要素。
-各段可包括一个以上的子段。
显示MPD的MPD文件可包括MPD要素。
以下,表1可显示出根据一个实例的MPD的XML模式。
【表1】
Figure BDA0001218727760000101
Figure BDA0001218727760000111
表1可显示MPD的XML模式的初期部分。所述的初期部分可包括命名空间(namespace)和其他定义。
可从局部(local)MPD来定义引用远程(remote)要素的原理。1)具有限定的句法和语义,2)可定义具处理模式的W3C XLIM简易(simple)链接的部分集合。
作为ISO/IEC 23009的一部分使用的XLINK属性可如以下所述:
-xlink:type属性可定义使用的W3C XLINK的类型。
-xlink:href属性可如IETF RFC 3986中所定义的,使用URI来识别远程要素。
-xlink:show属性可如W3C XLINK中所定义的,定义MPD中远程要素被反引用(deference)时的所需(desired)动作(behavior)
-xlink:actuate属性可如W3C XLINK中所定义的,定义MPD中远程实体没有被引用的所需时间(timing)。
以下,表2显示出根据一个实例的XLINK的XML模式。
【表2】
Figure BDA0001218727760000112
Figure BDA0001218727760000121
在上述的模式中,各要素或各属性的命名空间、名称、类型、及默认值可被说明。此外,要素和属性之间的阶层关系可被说明。
xlink:href属性中,处理URI参照的规则可如下所述:
-不能被解析(resolve)的远程要素的URI参照可视为(treat)无效(invalid)参照,并可使MPD无效。
-不适于所提供的参照的目标(target)的远程要素的URI参照可视为无效参照,并可使MPD无效。
-直接或间接地进行自动参照的URI参照可视为无效循环参照,并可使MPD无效。
-远程要素的随机引用可以是HTTP-URL。
-当URI参照为相对的(relative),引用解析(reference resolution)被适用。
以下,对MPD要素的语义进行说明。
1)MPD要素可具有如下所述的属性:
-id属性可明确出媒体演示的标识符。id属性可以是被创建(publish)的媒体演示的范围内的固有标识符。
-type属性可明确出MPD被更新与否。
-mediaPresentationDuration属性可明确整个媒体演示的持续时间。当mediaPresentationDuration不存在时,媒体演示的持续时间可能未知(unknown)。
-maxSegmentDuration属性可明确出媒体演示的随机表示中随机段的最大持续时间。
2)MPD要素可具有如下所述的要素:
-ProgramInformation要素可具有0-N的索引,并可明确出程序的说明性信息。可具N的索引表示要素的索引的个数无限制。可具0的索引表示要素为选择性的(optional)。具最小1的索引显示出要素为强制性的(mandatory)。即,索引的范围可显示出出现次数(occurrence)或基数性(cardinality)。
-BaseURL要素具0-N的索引,并可明确出用于引用解析(reference resolution)和替代性(alternative)URL选择的基本URL。
-Location要素可具0-N的索引,并可明确出MPD可用位置。
-Period要素可具1-N的索引,并可明确出周期的信息。
-Metrics要素可具0-N的索引,并可明确出DASH度量(Metrics)。
以下,表3显示出根据一个实例的MPD要素的XML句法。
【表3】
Figure BDA0001218727760000131
Figure BDA0001218727760000141
媒体演示可包括一个以上的周期。周期可经MPD要素中的Period要素被定义。
周期可分成规则(regular)周期和早期可用(early available)周期。规则周期的PeriodStart时间可如下所述被定义。
-周期要素中存在start属性时,周期可为规则周期,且PeriodStart时间与start属性的值相同。
-周期要素中不存在start属性,且之前的Period要素包括duration属性时,周期可为规则属性。周期的开始时间PeriodStart可以是之前周期的开始时间和之前周期的duration属性的值的和。
-1)start属性不存在,2)Period要素为MPD中的第一个,且3)MPD的类型属性为静态(static)时,PeriodStart时间可为0。
-1)start属性不存在,2)之前的Period要素不包括duration属性,或是Period要素为MPD中的第一个,且3)MPD的类型属性为动态(dynamic)时,周期可为早期可用周期。
以下,对Period要素的语义进行说明。
1)Period要素可具有如下所述的属性:
-xlink:href属性可明确出作为外部的Period要素的参照。
-xlink:actuate属性可明确出处理命令。link:actuate属性的值可以是"onload"或"onRequest"。
-id属性可明确出周期的标识符。id属性可以是媒体演示的范围内的固有标识符。
-start属性可明确出周期的PeriodStart时间。PeriodStart时间可作为用于决定各媒体段的MPD开始时间的链接源头(anchor)来使用,用于决定媒体演示时间线中的各存取单元的演示时间。
-duration属性可明确出用于决定下一周期的PeriodStart时间的周期的持续时间。
2)Period要素可具有如下所述的要素:
-BaseURL要素可具有0-N的索引,并可用于引用解析和替代性URL选择。
-AdaptationSet要素可具有1-N的索引,并可明确出自适应性集合的信息。
-Subset要素可具有0-N的索引,并可明确出子集合。
以下,表4显示出根据一个实例的Period要素的XML句法。
【表4】
Figure BDA0001218727760000151
Figure BDA0001218727760000161
各周期可包括一个以上的自适应性集合。自适应性集合可经Period要素中所包含的AdaptationSet要素被说明。
自适应性集合可包括一个以上的媒体组件的替代性编码。各替代性编码可包含在表示中。一个自适应性集合中所包含的一个以上的表示可显示出相同的媒体内容组件,并可包括视为感知上(perceptually)相同的一个以上的流媒体。
一个以上的表示可根据上述的一个以上的表示中所呈现的媒体内容组件性质(property)在自适应性集合中被排列。媒体内容组件性质可包括:1)经lang属性被说明的语言;2)经contentType属性被说明的媒体内容类型;3)经par属性被说明的图像宽高比例(picture aspect ratio);4)经Role要素被说明的作用(role)性质;5)经Accessibility要素被说明的存取性质。6)经Rating要素被说明的等级属性。
AdaptationSet要素可包括与具子适应性集合的一个以上的表示相关联的要素和属性的基本值。以下,对AdaptationSet要素及Representation要素中共同的呈现(present)要素及属性的目录进行说明。
Adaptation要素可支持有关与具自适应性集合的一个以上的表示相关联的bandwidth属性、width属性、height属性、和framerate属性的范围的说明。所述说明可提供有关具自适应性集合的一个以上的表示的所有值得概要(summary)。包含有自适应性集合的一个以上的表示可能不具有自适应性集合内所定义的范围之外的值。
由于自适应性集合使用group属性,因此可分成组。
以下,对AdaptationSet要素的语义进行说明。
1)AdaptationSet要素可具有如下所述的属性:
-xlink:href属性可明确出外部AdaptationSet要素的参照。
-xlink:actuate属性可明确出处理命令。link:actuate属性的值可以是"onload"或"onRequest"。
-id属性可明确出周期的范围内自适应性标识符。id属性可以是包含周期的范围内固有标识符。id属性可存在于远程要素中。
-group属性可以是周期范围内固有的,有关组的标识符。
-lang属性可预示自适应性集合的语言码。可使用IETF RFC5646的句法和语义。
-contentType属性可明确出自适应性集合的媒体内容组件类型。最高级内容类型"type"的值可在RFC1521中被定义。
-par属性可明确出图像宽高比例。par属性可包括2个整数。当par属性存在时,表示的width属性和height属性也存在。
-minBandWidth属性可明确出自适应性集合内的所有表示的最小bandwidth属性值。
-maxBandWidth属性可明确出自适应性集合内的所有表示的最大bandwidth属性值。
-minWidth属性可明确出自适应性集合内的所有表示的最小width属性。
-maxWidth属性可明确出自适应性集合内的所有表示的最大width属性。
-minHeight属性可明确出自适应性集合内的所有表示的最小height属性。
-maxHeight属性可明确出自适应性集合内的所有表示的最大height属性。
-minFrameRate属性可明确出自适应性集合内的所有表示的最小frameRate属性。
-maxFrameRate属性可明确出自适应性集合内的所有表示的最大frameRate属性。
2)AdaptationSet要素可具有如下所述的要素:
-Accessbility要素可具0-N的索引,并可明确出有关存取模式的信息。
-Role要素可具0-N的索引,并可明确出有关注释(annotation)模式的信息。
-Rating要素可具0-N的索引,并可明确出有关等级(rating)模式的信息。
-Viewpoint要素可具0-N的索引,并可明确出有关视点注释模式的信息。
-ContentComponent要素可具0-N的索引,并可明确出包含有自适应性集合的媒体内容组件的性质。
-BaseURL要素可具0-N的索引,并可用于引用解析和替代性URL选择。
-Representation要素可具0-N的索引,并可明确出表示。各自适应性集合内可存在至少一个表示要素。Representation要素可以是远程要素的一部分。
以下,表5显示出根据一个实例的AdaptationSet要素的XML句法。
【表5】
Figure BDA0001218727760000181
Figure BDA0001218727760000191
Figure BDA0001218727760000201
自适应性集合可包括一个以上的媒体内容组件,各媒体内容组件的性质可通过ContentComponet要素被说明,当自适应性集合内存在一个媒体内容组件时,可通过AdaptationSet要素被直接说明。
以下,对要素的语义进行说明。
1)ContentComponent要素具有如下所述的属性:
-id属性可明确出媒体组件的标识符。id属性可在自适应性集合的范围内固有。
-lang属性可预示媒体组件的语言码。可使用IETF RFC5646的句法和语义。
-contentType属性可明确出媒体组件的类型。最高级别内容类型"type"的值可在RFC1521中被定义。
-par属性可明确出图像宽高比例。par属性可包括2个整数。par属性存在时,表示的width属性和height属性也存在。
2)ContentComponent要素可具有如下所述的要素:
-Accessbility要素可具0-N的索引,并可明确出有关存取模式的信息。
-Role要素可具0-N的索引,并可明确出有关注释(annotation)模式的信息。
-Rating要素可具0-N的索引,并可明确出有关等级(ration)模式的信息。
-Viewpoint要素可具0-N的索引,并可明确出有关视点注释模式的信息。
以下,表6显示出根据一个实例的ContentComponent要素的XML句法。
【表6】
Figure BDA0001218727760000202
Figure BDA0001218727760000211
表示可经Representation要素被说明。AdaptationSet要素可包括一个以上的Representation要素。
表示可以是,构成定义的周期期间的媒体内容的媒体内容组件的完整集合或子集合的替代性选择中的一个。
表示可在周期的PeriodStart的开始中开始,并可持续至周期的结束(end)为止。周期的结束可以是下一周期的开始或媒体演示的结束。
各表示可包括一个以上的流媒体。各流媒体可以是媒体内容组件的编码版本。
表示可包括一个以上的段。
以下,对Representation要素的语义进行说明。
1)Representation要素可具有如下所述的属性:
-id属性可明确出表示的标识符。当表示与同一周期内的其他表示性能上不一致时,id属性可在周期的范围内固有。id属性可不包括空格(whitespace)文字。
-bandwidth属性可明确出表示的数据比例及数据比例变化(variation)的界限。
-qualityRanking属性可明确出相同的自适应性集合内的其他表示中相对性表示的质量(quality)排名。
-dependencyID属性可明确出解码和/或演示处理中存在的所有的互补性(complementary)表示。dependencyID属性可以是被分离成id属性的值的空格的目录。
2)Representation要素可具有如下所述的要素:
-BaseURL要素可具0-N的索引,并可用于引用解析和替代性URL选择。
-SubRepresentation要素可具0-N的索引,并可明确出有关嵌入表示中的子表示的信息。可用于引用解析和替代性URL选择。
以下,表7显示出根据一个实例的AdaptationSet要素的XML句法。
【表7】
Figure BDA0001218727760000221
Figure BDA0001218727760000231
子表示可嵌入正规的表示中,并通过SubRepresentation要素被说明。Representation要素可包括SubRepresentation要素。SubRepresentation要素可说明被嵌入表示中的一个以上的媒体内容组件的性质。表示和子表示可共享共同的属性和要素。
以下,对SubRepresentation要素的语义进行说明。
SubRepresentation要素可具有如下所述的属性:
-level属性可明确出子表示的级别。
-dependency属性可明确出子表示将解码及演示处理中所存在的表示中的子表示的集合作为分离成level属性的值的空格的目录。
-bandwidth属性虽然与表示的bandwidth属性相一致,但可适用于子表示。
-contentComponet属性可明确出将子表示中所包含的所有媒体内容组件的集合作为分离成ContentComponent要素的id属性的值的空格的目录。
以下,表8显示出根据一个实例的SubRepresentation要素的XML句法。
【表8】
Figure BDA0001218727760000232
Figure BDA0001218727760000241
以下,对AdaptationSet要素、Representation要素、和SubRepresentation要素的共同属性及要素进行说明:
1)AdaptationSet要素、Representation要素、和SubRepresentation要素可具有如下所述的共同的属性。
-profile属性可明确出根据媒体演示属性相关的表示之间的属性。profile属性的值可以是阶层(表示、自适应性集合、和MPD)的随机的上位级别的值的部分集合。profile属性存在时,profile属性的值可视为与文件层的下一上位级别的值相同。例如,有关表示的profile属性存在时,自适应性集合的profile属性对于表示有效。
-width属性可明确出经sar属性被决定的网格(grid)上的视频媒体类型的水平视觉性表示的大小。当sar属性存在时,宽度和高度与sar属性值为“1:1”相同。
-height属性可明确出经sar属性被决定的网格上的视频媒体类型的视觉性表示的大小。
-sar属性可明确出视频媒体组件类型的示例性(sample)长度比例。sar属性可具包含有经":"被分离的2个整数的字符串(string)形式。第1整数可明确出以编码的视频像素的任意单位为基准的水平大小。第2整数可明确出以编码的视频像素的任意单位为基准的垂直大小。
-frameRate属性可明确出表示中的视频媒体类型的输出帧率。当帧或帧率变化时,frameRate属性的值可以是表示的整个持续时间的平均帧或平均帧率的绝对值。
-audioSampleRate属性可以是明确出音频媒体组件类型的取样比例的10进制整数值,并可以是分别显示出音频媒体组件类型的最小取样比例及最大取样比例的分离成空格的10进制整数值的对。audioSamplingRate属性的值可以是以秒为单位的取样。
-mimeType属性可明确出初期内容设置段的串接(concatenation)的MIME类型。
-codecs属性可明确出表示中的所呈现的编解码。
2)AdaptationSet要素、Representation要素、和SubRepresentation要素可具有如下所述的共同的要素。
-FramePacking属性可具0-N的索引,并可明确出视频媒体组件类型的帧(frame-packing)排列(arrangement)信息。
-AudioChannelConfiguration要素可具0-N的索引,并可明确出音频媒体组件类型的音频信道结构(configuration)。
-ContentProtection要素可具0-N的索引,并可明确出有关用于相关表示的内容保护(protection)模式的信息。
以下,表9显示出根据一个实例的AdaptationSet要素、Representation要素、和SubRepresentation要素的共同XML句法。
【表9】
Figure BDA0001218727760000251
Figure BDA0001218727760000261
Figure BDA0001218727760000271
段可以是具有定义的格式并通过MPD被说明的最小可寻址的(addressable)单元。
段可通过MPD内所包含的HTTP-URL被引用。在此,HTTP-URL可作为根据RFC 3986的<absolute-URI>被定义。HTTP-URL具有固定模式"http://"或"https://",当range属性被提供至URL时,可根据字节范围被限制。字节范围以识别字节的连续性范围的单一表现(expression)被限制。
表示可通过BaseURL要素、SegmentBase要素、SegmentTemplate要素、和/或SegmentList要素的存在(presence)接收信息分配。段信息可提供包含有表示的一个以上的段所有的位置、可用性、和性质的信息。特别是,可提供初期内容设置、媒体、索引、及比特流交换段的存在和位置。
SegmentBase要素、SegmentTemplate要素、和SegmentList要素可存在于Representation要素中。此外,SegmentBase要素、SegmentTemplate要素、和SegmentList要素为显示默认值,可存在于Period要素或AdaptationSet元素中。当阶层的一个级别中,SegmentTemplate要素或SegmentList要素存在时,可不呈现在更上位的阶层级别中。SegmentBase要素、SegmentTemplate要素、和SegmentList要素可接收到与更上位的级别相一致的要素的属性及要素。两个级别中存在相同的属性或要素时,更下位级别的属性或要素相比更上位级别的属性或要素具有优选权(precedence)。
SegmentBase要素每一个表示提供单一媒体段,且BaseURL要素中包含有媒体段URL时,可包括充分的信息。多个媒体段被呈现时,可使用共享多个段基本信息的SegmentList要素或Segment Template要素。
当表示包括一个以上的媒体段时,duration属性或SegmentTimeLine属性被呈现。
段目录可经一个以上的SegmentList要素被定义。各SegmentList要素可包括有关段URL的串接目录的SegmentURL要素的目录。各段可包括媒体段URL,并可包括字节范围。Segment URL要素可包括索引段。
段模板可经SegmentTemplate要素被定义。为生成段的目录可将经动态值取代(substituted)特定标识符分配给段。
段信息可提供以下信息:
-初期内容设置、索引、和比特流交换段信息的存在与不存在。
-各表示中的各可存取的段的HTTP-URL和字节范围。
-MPD中预示的所有有效段URL。
-有关MPD的类型属性"dynamic"服务的各周期的段可用性开始时间和段可用性结束时间。
-周期内的媒体表示时间线中的各媒体段的近似的媒体表示开始时间。
Segment要素或segment要素的子要素可包括以下的属性:
-duration要素可显示出固定的(constant)近似的(approximate)段持续时间。Representation要素内的所有段可具有相同的持续时间。但,周期内的最后段可具有不同的持续时间。
-sourceURL属性可明确出源URL的一部分。sourceURL可具有RFC 3986的<absolute-URI>形式。sourceURL可具有"http://"、"https://"、或RFC 3986的<relative-ref>的固定(fixed)模式。当sourceURL属性不存在时,随机的BaseURL要素可映射(mapped)在sourceURL属性中。此外,当sourceURL属性不存在时,可提供range属性。
-range属性可明确出HTTP-URL的字节范围的限制(restricting)。字节范围可根据RFC2616中定义的byte-range-spec被表现和格式化。当range属性不存在时,要素可参照sourceURL属性中被引用的整个资源。
以下,表10显示出根据一个实例的与段相关的信息的XML句法
【表10】
Figure BDA0001218727760000281
Figure BDA0001218727760000291
Figure BDA0001218727760000301
以下,基于用户和终端特性来对选择表示的附加结构进行说明。
根据用于DASH的上述解决方案,表示可经多种元数据被说明。表示的特性可基于大部分终端的特性,用来选择表示。例如,终端的特性可包括分辨率(resolution)和连接频宽(connection bandwidth)。
表示的存取特性,可用来帮助具不便性(difficulties)的残疾人(disableduser)感知媒体内容的信息。用于支持存取性的以下实施例可包括:1)MPEG-21数字项适配DIA(Digital Item Adaptation)存取性说明(description);和2)用于使(facilitate)内容组件的增大(enhancement)/替换(replacement)的一些指示。实质上,包含ISO/IEC21000-7的VisualImpairmentType(视觉障碍类型)和/或AuditoryImpairmentType(听觉障碍类型)要素的MPEG-21 DIA存取性说明可用于说明视觉性或听觉性障碍(impairment)的多种症状。用户的视觉性或听觉性障碍可包括色盲(colour deficiency)或弱视(lowvision)。
以下的规则可适用于识别特定存取模式的URI。例如,模式可包括在上述的Accessibility要素中。
包含有视频和/或音频内容的表示的URI可如下述的表11被定义。
【表11】
urn:mpeg:mpegB;dash:dash:mp21accessibility:<value>
上述的URI可以是指基于ISO/IEC 21000-7的存取性定义的存取模式。
当<value>为"s0"时,适当的表示预先被准备,相关的存取性说明经Accessibility元素被说明。为传达(convey)该说明可使用不同的方式。例如,存取性说明可经MP21Access要素被传达,并经以下定义的xlink:href属性被参照。
当<value>为"s1"时,提供者可以任何方式获取残疾人用户的存取性说明,并向残疾人用户提供适当的内容。
DASH的上下文中,当表示与存取信息相关时,所述表示可用于残疾人的特定症状经存取性说明被说明的所述残疾人。一般情况下,所述表示的媒体为处理(cope)残疾人的问题可被增大。在此,表示的增大可以是明暗对比(contrast)或色彩的调整(adjusting)。
如下所述,上述的Accessibility要素可被扩展。新子要素"MP21Access"可作为MPEG-21DIA存取性说明的容器被使用。此外,为引用包含有MPEG-21DIA存取性要素的外部(external)说明,可将附加的xlink:href属性添加至Accessibility要素中。
进一步,新属性"use"可作为客户端告知存取性目的的表示的意图使用的暗示而被采用(employ)。该新要素和属性可适用于表示组(或自适应性集合)、表示、和子表示中。
以下,对支持存取性的要素及属性的语义进行说明。
1)Group要素、Adaptation Set要素、Representation要素、或SubRepresentation要素为支持存取性,可进一步具有如下所述的属性。
-use属性可显示出表示的意图使用。use属性的值可以是signLang、subtitle、caption、description、或plusDes。signLang可以是指作为手语使用。subtitle可以是指作为字幕使用。caption可以是指作为标题使用。description可以是指作为类似影视的视频说明的说明来使用。plusDes可以是指相应表示的内容包括说明并被增大。例如,可以是指包括视频说明被增大的声道。
-xlink:href属性可提供包含有ISO/IEC IS21000-7要素的AuditoryImpairmentType和/或VisualImpairmentType要素的外部MPEG-21 DIA的参照。与该说明相关的所述表示或表示组可适用于具有经该说明被说明的问题的残疾人。
-xlink:actuate属性可提供处理命令。处理命令可以是"onLoad"或"onRequest"。当xlink:href属性不存在时,xlink:actuate属性不存在。
2)Group要素、Adaptation Set要素、Representation要素、或SubRepresentation要素为支持存取性,可进一步具有如下所述的要素。
-Accessibility要素可具有0-N的索引,并可提供存取性信息模式的信息。
-MP21Access要素可具有0-1的索引,并可与ISO/IEC21000-7的AuditoryImpairmentType和/或VisualImpairmentType要素一起包括MPEG-21 DIA的说明。与该说明相关的表示或表示组可适用于具有经该说明被说明的问题的残疾人
以下,表12显示出根据一个实例的用于支持Group要素、Adaptation Set要素、Representation要素、或SubRepresentation要素的存取性的XML句法。【表12】
Figure BDA0001218727760000321
Figure BDA0001218727760000331
以下,对用于说明表示之间的关系的元数据进行说明。
用于说明表示组之间的关系的元数据相对来说较少。例如,较难向客户端告知贵提供的音频说明与哪个视频流媒体相关联。在一些情况下,2个表示组概念上(semantically)相同,但可能只根据一个表示组的上下文进行选择。以下,提出2个单纯属性来用于上述的目的。以下所说明的元数据,不仅是存取性,还可用于一般的自适应性(adaptivity)。
Group要素、Adaptation Set要素、Representation要素、或SubRepresentation要素为说明表示之间的关系,可进一步具有如下所述的属性。
-usedWith属性可以是指一个以上的表示或表示组的目录。但是,在使用当前的表示或表示组时,usedWith属性可与上述目录的任意项一起使用。例如,用于音频说明的表示组可与视频组件的特定表示组一起使用。usedWith属性的值可以是分离成空格的(whitespace-separated)目录。分离成空格的目录的各项可以是一个表示组或一个表示的标识(identification)。表示组的标识可以是group属性或adaptationSet属性的值。表示的标识可具有repid属性的格式。Repid属性可以是表示的id属性的值。
-equivalentTo属性可以是指一个以上的表示或表示组的目录。当前的表示可代替上述目录的任意项被使用。例如,用于字幕的表示组可代替音频组件的特定表示组被使用。equivalentTo属性的格式可与usedWith属性的格式相同。
以下,表13显示出根据一个实例的用于说明Group要素、Adaptation Set要素、Representation要素、或SubRepresentation要素的表示之间的关系的XML句法。
【表13】
Figure BDA0001218727760000341
Figure BDA0001218727760000351
以下,对位深的元数据进行说明。
为选择具不同的显示位深的终端的不同的表示,可使用以下属性来用于表示和表示组。位深可表示为显示视觉性内容的亮度(luma)/色度(chroma)取样而被使用的比特的个数。
以下,对有关位深的属性的语义进行说明。
Group要素、Adaptation Set要素、Representation要素、或SubRepresentation要素为提供位深可进一步具有如下所述的属性。
-bitDepth属性可以是指用于显示视觉性内容的亮度/色度取样的比特的个数。当互不相同的视频图像中,位深变化时,bitDepth属性的值可为位深的最大值。
以下,表14显示出根据一个实例的用于支持Group要素、Adaptation Set要素、Representation要素、或SubRepresentation要素的位深的XML句法。
【表14】
Figure BDA0001218727760000361
Figure BDA0001218727760000371
为对应上述的说明,可在Representation Group要素或Adaptation Set要素中添加2个属性minBitDepth和maxBitDepth。
以下,对用于说明最大位深和最小位深的属性的语义进行说明。
Representation Group要素、Group要素、Adaptation Set要素为说明最大位深及最小位深可具有如下所述的属性。
-xlink:href属性可显示出外部的Group要素或Adaptation Set要素的参照。
-xlink:actuate属性可提供处理命令,处理命令可以是"onLoad"或"onRequest"。
-minBitDepth属性可显示出组或自适应性集合内的所有表示的最小位深值。
-maxBitDepth属性可显示出组或自适应性集合内的所有表示的最大位深值。
以下,表15显示出根据一个实例的用于支持Representation Group要素、Group要素、或Adaptation Set要素的最小位深值和最大位深值的XML句法。
【表15】
Figure BDA0001218727760000381
Figure BDA0001218727760000391
图2是示出根据本发明的一个实施例的内容处理方法的信号流程图。
终端200可以是上述的DASH的客户端。
DASH的客户端可与RFC 2616中所明确的客户端交互。
DASH的客户端为存取段或段的一部分,与RFC 2616中所明确的相同,一般可使用HTTP GET方式(method)或HTTP partial GET方式。
服务器210可托管(hosting)DASH的段。服务器210可与RFC 2616中所明确的服务器交互。
在步骤220中,终端200可从服务器210接收媒体内容的元数据。即,服务器210向终端200传送有关媒体的元数据。媒体内容可包括一个以上的周期。
元数据可以是MPD。
由于终端200通过定义的资源的模式中所明确的协议来存取段,因此,MPD在向用户提供流媒体服务时,可提供充分的信息。在此,明确地协议可以是HTTP/1.1。服务器210可提供MPD传达性功能。MPD可根据DASH媒体表示准备(preparation)被生成。
在步骤230,终端200可处理接收的元数据。在步骤230中,终端200可输出元数据所提供的信息或元数据中所包括的信息。
在步骤240至250中,终端200可基于元数据所提供的信息来存取(access)媒体内容的段。服务器210可以是用于提供DASH段传达功能(function)的HTTP服务器。
在此,各周期可包括一个以上的组,且各组可包括媒体内容的一个以上的表示。即,各周期可包括媒体内容的一个以上的表示。因此,各表示在包含自身的周期的开始点开始,并可持续至所述周期的结束点。各表示可包括一个以上的段。
在步骤240中,终端200可使用段的URL来向服务器210请求媒体内容的段。在此,URL可与上述的基本URL要素相关联从而被解析。例如,段的URL可基于URL要素被生成。
MPD,1)向服务器210请求段;2)由于将段中所包含的流媒体多路分解(demultiplexing)、解码、及渲染,因此,在向用户提供流媒体服务时,可向终端200提供充分的信息。
终端200基于上述的元数据处理,可向服务器210请求有关特定周期的合适的段。即,请求的段可基于元数据被选择。由于执行HTTP GET方式,因此,终端200可向服务器210请求段。
元数据可包括范围属性。所述的请求可以是,URL所指示的资源的范围属性所指定的字节的请求。
段的URL可以是绝对性URL或相对性URL。
终端200可使用上述元数据所包含的要素或属性,来选择周期、自适应性集合、和表示,并基于所选择的周期、自适应性集合、或表示的要素及属性,来选择将请求的段。
例如,周期所包含的一个以上的表示中,各表示可包括用来帮助具不便性的残疾人感知媒体内容的信息。表示的媒体组件可针对残疾人的问题被增大。增大可以是明暗对比和色彩调整的增大中的一个以上。此外,所述信息可显示出表示的意图使用。在此,意图使用是指手语、字幕、标题、和说明中的一个以上。此外,所述信息可包括属性,用于提供外部MPEG-21数字项适配DIA(Digital Item Adaptation)的参照。
例如,元数据可包括用于说明一个以上的表示之间的关系的属性。一个以上的表示中,第1表示可包括用于指出一个以上的表示中一部分表示的目录的属性,且第1表示可与所述一部分表示中的一个一起使用。在此,第1表示可以是用于音频说明的表示,且一部分表示分别为视频组件的表示。此外,一个以上的表示中,第2表示可包括用于指出一个以上的表示中一部分表示的目录的属性,且一部分属性中的一个表示可用来代替第2表示。
例如,在周期所包括的一个以上的表示中,各表示可包括:位深属性,其用来选择具有不同显示位深的终端的不同表示。
位深属性可以是指用于显示视觉性内容的亮度/色度取样的比特的个数。
在步骤245中,在一些情况下,服务器210须将媒体内容(例如,用于SVC的MP4文件)解析(parse),从而可提取适合于所述请求的段的数据部分。
在步骤250中,服务器210可将适合于终端200的各请求的段传送给终端200。终端200可从服务器210接收段。
在步骤260中,由于将段中所包含的媒体的数据解码及渲染,因此,终端200可重新播放
由于反复步骤220至260,因此,终端200可使用接收的段来重新播放媒体。
以上,参照图1所说明的根据本发明的一个实施例的技术性内容在本实施例中也同样适用。因此,在此省略详细的说明。
图3是示出根据本发明的一个实施例的信令信息的目录的示图。
信令信息(即,元数据)可分成以下1)至4):
1)一般信息(general information)310:一般信息可包括:类似持续时间(duration)和开始时间的内容的一般说明(description)和各间隔的一般说明。
2)服务的质量信息(QoS information)320:可说明类似比特率(bitrate)、分辨率(resolution)、质量(quality)等各替代的特性(characteristics)。即,服务的质量信息可说明内容的替代各自的特性。
替代可为物理性的(physical)(即预先生成的),并可以是虚拟(virtual)的(即,以飞速写入(on the fly)被生成。即,基于替代的信息,客户端可选择合适的替代的段。因此,可支持有关终端及网络的上下文(context)的自适应性(adaptivity)。
3)映射信息(Mapping Information)330:可说明将提取(retrieve)内容的位置(locations)。根据特定情况(cases),相同的替代可具有相同或不同的位置。
4)客户端请求(Client request)340:该种类的信令信息可按照(conform)HTTP1.1请求(request)消息的格式。经客户端被请求的参数可源于(derive)上述1)至3)项的信息。
图4是示出根据本发明的一个实施例的内容分割(division)的阶层和信令信息的级别(levels)的示图。
根据本发明的一个实施例的元数据的信令可分成(separated)内容级别信息410、间隔级别信息420、QoS信息430、和映射信息440。内容级别信息310、间隔级别信息420、QoS信息430、和映射信息440的相关部分的链接(linking)可通过参照(referencing)来实现。
信令信息的上述部分可通过支持灵活性的不同的方法(ways)被组合(combine)。
例如,只有内容级别信息410和间隔级别信息420被传送至客户端时,用于解决(resolve)所有替代的决定和位置的计算可通过服务器来执行。因此,只有内容级别信息310和间隔级别信息420被传送至客户端时,处理模型可为“基于服务器”。
当内容级别信息410、间隔级别信息420、和QoS信息430被传送至客户端时,用于解决(resolve)所有替代的决定和位置的计算可通过客户端和服务器分散来执行。因此,当内容级别信息410、间隔级别信息420、和QoS信息430被传送至客户端时,该模型为“分散”。
所有的信令信息(内容级别信息410、间隔级别信息320、QoS信息430、和映射信息440)被传送至客户端时,该模型中的大部分(或全部)的处理(即用于解析替代的决定和位置的计算)可在客户端中被执行,因此,该模型可为基于客户端(client-based)。
元数据部分的分离可在存储和传达中具效率性。例如,分割期间,内容级别信息410的元数据可发送1次,且只有间隔级别信息420被周期性地更新。与此相似,包含有QoS信息430的一个文件可用于不同的间隔和不同的内容。
图5是示出根据本发明的一个实施例的终端的结构图。
以下所说明的终端100的结构可概念性地显示出DASH客户端模型的逻辑性结构要素。
终端100可包括存取引擎510和媒体引擎520。
存取引擎510可以是DASH存取引擎。
存取引擎510可从服务器110接收元数据(例如,MPD)。
存取引擎510可构成请求(request),被构成的请求发送(issue)给服务器110。
存取引擎510可从服务器110接收内容(例如,段或段的一部分)。
存取引擎510可向媒体引擎520提供内容。
存取引擎510输出可包括MPEG容器(container)(例如,ISO/IEC14492-12ISO基本媒体文件格式或ISO/IEC 13818-2MPEG-2传输流)的媒体(或媒体的一部分)。此外,存取引擎510的输出可包括将所述媒体的内部(internal)定时映射(map)成媒体表示的时间线的定时信息。
此外,存取引擎510可执行参照图2所说明的步骤220至260中终端200所执行的功能。
媒体引擎520可播放所提供的内容。即,媒体引擎520可使用从存取引擎510输出的媒体及定时信息来输出媒体。
以上,参照图1至图4所说明的根据本发明的一个实施例的技术性内容在本实施例中也同样适用。因此,在此省略详细的说明。
根据本发明的实施例的方法可通过多种计算机手段以可执行的程序命令形式记录在计算机可读媒体中。该计算机可读媒体可包括独立的或结合的程序指令、数据文件、数据结构等。该媒体记录的程序指令可专门为本发明的目的设计和创建,或为计算机软件技术人员熟知而应用。计算机可读媒体的例子包括:磁媒体(magnetic media),如硬盘、软盘和磁带;光学媒体(optical media),如CD ROM、DVD;磁光媒体(magneto-optical media),如光盘(floptical disk);和专门配置为存储和执行程序指令的硬件设备,如只读存储器(ROM)、随机存取存储器(RAM)等。程序指令的例子,既包括机器代码,如由编译器产生的,也包括含有可由计算机使用解释程序执行的更高级代码的文件。所述硬件设备可配置为作为一个以上软件模块运行以执行上面所述的本发明的运作,反之亦然。
如上所示,本发明虽然已参照有限的实施例和附图进行了说明,但是本发明并不局限于所述实施例,在本发明所属领域中具备通常知识的人均可以从此记载中进行各种修改和变形。
因此,本发明的范围不受说明的实施例的局限或定义,而是由后附的权利要求范围以及权利要求范围等同内容定义。

Claims (22)

1.一种由DASH(HTTP上的动态自适应流媒体)客户机执行的用于提供媒体内容的方法,该方法包括:
接收所述媒体内容的元数据,该元数据包括媒体的一个或多个媒体演示说明MPD,
其中所述MPD包括一个或多个周期;
基于所述元数据所提供的信息,存取所述媒体内容的一个或多个段;以及
解码和渲染所述段内所包含的所述媒体内容的数据,
其中每一周期包括一个或多个自适应性集合,
其中所述自适应性集合包括一个或多个表示,
其中所述MPD、所述周期、所述自适应性集合、所述表示或所述段包括一个或多个属性或要素,并且
其中所述自适应性集合包括该自适应性集合的每个表示所共同的一个或多个属性或要素。
2.根据权利要求1所述的方法,其中,在MPD级别包括的属性是maxSegmentDuration,其中,所述maxSegmentDuration是所述表示中的段的最大持续时间。
3.根据权利要求1所述的方法,其中,在所述自适应性集合级别包括的要素是Accessibility,其中所述Accessibility指定关于存取性方案的信息。
4.根据权利要求1所述的方法,其中,在所述自适应性集合级别包括的属性是audioSamplingRate,其中,所述audioSamplingRate指定音频媒体组件类型的取样比例。
5.根据权利要求1所述的方法,其中,在所述自适应性集合级别包括的要素是AudioChannelConfiguration,其中,所述AudioChannelConfiguration指定音频媒体组件类型的音频信道结构。
6.根据权利要求1所述的方法,其中,在所述自适应性集合级别包括的属性是contentType,其中,所述contentType指定媒体内容组件的类型。
7.根据权利要求1所述的方法,其中,在所述自适应性集合级别包括的属性是视频媒体组件类型的示例性长度比例。
8.根据权利要求1所述的方法,其中,在所述表示级别包括的属性是audioSamplingRate,其中,所述audioSamplingRate指定音频媒体组件类型的取样比例。
9.根据权利要求1所述的方法,其中,在所述表示级别包括的要素是AudioChannelConfiguration,其中,所述AudioChannelConfiguration指定音频媒体组件类型的音频信道结构。
10.根据权利要求1所述的方法,其中,在所述表示级别包括的属性是视频媒体组件类型的示例性长度比例。
11.一种由服务器执行的用于提供媒体内容的方法,该方法包括:
向客户机传送所述媒体内容的元数据,该元数据包括媒体的一个或多个媒体演示说明MPD,其中所述MPD包括一个或多个周期;
基于所述元数据所提供的信息,从所述客户机接收对所述媒体的一个或多个段的请求,
向客户机传送一个或多个段,
其中每一周期包括媒体内容的一个或多个表示,
其中每一周期包括一个或多个自适应性集合,
其中所述自适应性集合包括一个或多个表示,
其中所述MPD、所述周期、所述自适应性集合、所述表示或所述段包括一个或多个属性或要素,并且
其中所述自适应性集合包括该自适应性集合的每个表示所共同的一个或多个属性或要素。
12.根据权利要求11所述的方法,其中,在MPD级别包括的属性是maxSegmentDuration,其中,所述maxSegmentDuration是所述表示中的段的最大持续时间。
13.根据权利要求11所述的方法,其中,在所述自适应性集合级别包括的要素是Accessibility,其中所述Accessibility指定关于存取性方案的信息。
14.根据权利要求11所述的方法,其中,在所述自适应性集合级别包括的属性是audioSamplingRate,其中,所述audioSamplingRate指定音频媒体组件类型的取样比例。
15.根据权利要求11所述的方法,其中,在所述自适应性集合级别包括的要素是AudioChannelConfiguration,其中,所述AudioChannelConfiguration指定音频媒体组件类型的音频信道结构。
16.根据权利要求11所述的方法,其中,在所述自适应性集合级别包括的属性是contentType,其中,所述contentType指定媒体内容组件的类型。
17.根据权利要求11所述的方法,其中,在所述自适应性集合级别包括的属性是视频媒体组件类型的示例性长度比例。
18.根据权利要求11所述的方法,其中,在所述表示级别包括的属性是audioSamplingRate,其中,所述audioSamplingRate指定音频媒体组件类型的取样比例。
19.根据权利要求11所述的方法,其中,在所述表示级别包括的要素是AudioChannelConfiguration,其中,所述AudioChannelConfiguration指定音频媒体组件类型的音频信道结构。
20.根据权利要求11所述的方法,其中,在所述表示级别包括的属性是视频媒体组件类型的示例性长度比例。
21.一种DASH(HTTP上的动态自适应流媒体)客户机,包括:
存取引擎,接收媒体内容的元数据,基于所述元数据所提供的信息来接收所述媒体内容的段,和解码所述段内所包含的所述媒体内容的数据,该元数据包括媒体的一个或多个媒体演示说明MPD,其中所述MPD包括一个或多个周期;和
媒体引擎,从所述存取引擎接收所述媒体内容的数据,并输出所述媒体内容,
其中每一周期包括一个或多个自适应性集合,
其中所述自适应性集合包括一个或多个表示,
其中所述MPD、所述周期、所述自适应性集合、所述表示或所述段包括一个或多个属性或要素,并且
其中所述自适应性集合包括该自适应性集合的每个表示所共同的一个或多个属性或要素。
22.一种服务器,包括:
处理器,配置为:
向客户机传送媒体内容的元数据,该元数据包括媒体的一个或多个媒体演示说明MPD,其中所述MPD包括一个或多个周期,
基于所述元数据所提供的信息,从所述客户机接收对所述媒体的一个或多个段的请求,
向客户机传送一个或多个段,
其中每一周期包括媒体内容的一个或多个表示,
其中每一周期包括一个或多个自适应性集合,
其中所述自适应性集合包括一个或多个表示,
其中所述MPD、所述周期、所述自适应性集合、所述表示或所述段包括一个或多个属性或要素,并且
其中所述自适应性集合包括该自适应性集合的每个表示所共同的一个或多个属性或要素。
CN201710060188.2A 2011-03-16 2012-03-16 用于提供媒体内容的方法、客户机和服务器 Active CN107071513B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR10-2011-0023271 2011-03-16
KR20110023271 2011-03-16
KR10-2012-0026862 2012-03-16
KR1020120026862A KR101854382B1 (ko) 2011-03-16 2012-03-16 레프리젠테이션을 사용하는 스트리밍 콘텐츠 제공 장치 및 방법
CN201280013527.7A CN103493499B (zh) 2011-03-16 2012-03-16 提供使用表示的流媒体内容的装置及方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201280013527.7A Division CN103493499B (zh) 2011-03-16 2012-03-16 提供使用表示的流媒体内容的装置及方法

Publications (2)

Publication Number Publication Date
CN107071513A CN107071513A (zh) 2017-08-18
CN107071513B true CN107071513B (zh) 2020-03-10

Family

ID=47113237

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201280013527.7A Active CN103493499B (zh) 2011-03-16 2012-03-16 提供使用表示的流媒体内容的装置及方法
CN201710060188.2A Active CN107071513B (zh) 2011-03-16 2012-03-16 用于提供媒体内容的方法、客户机和服务器
CN201810166428.1A Pending CN108366070A (zh) 2011-03-16 2012-03-16 用于提供媒体内容的方法和客户端

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201280013527.7A Active CN103493499B (zh) 2011-03-16 2012-03-16 提供使用表示的流媒体内容的装置及方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201810166428.1A Pending CN108366070A (zh) 2011-03-16 2012-03-16 用于提供媒体内容的方法和客户端

Country Status (5)

Country Link
US (6) US9860293B2 (zh)
EP (3) EP2924989A1 (zh)
KR (4) KR101854382B1 (zh)
CN (3) CN103493499B (zh)
WO (1) WO2012125006A2 (zh)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10057535B2 (en) 2010-12-09 2018-08-21 Comcast Cable Communications, Llc Data segment service
US9438883B2 (en) 2012-04-09 2016-09-06 Intel Corporation Quality of experience reporting for combined unicast-multicast/broadcast streaming of media content
JP6064249B2 (ja) 2012-07-09 2017-01-25 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 動的適応ストリーミングオーバーハイパーテキスト転送プロトコルクライアント挙動フレームワークおよびセッション管理の実装
GB2513140B (en) * 2013-04-16 2016-05-04 Canon Kk Methods, devices, and computer programs for streaming partitioned timed media data
WO2015009723A1 (en) * 2013-07-15 2015-01-22 Huawei Technologies Co., Ltd. Just-in-time dereferencing of remote elements in dynamic adaptive streaming over hypertext transfer protocol
US9628528B2 (en) * 2013-07-19 2017-04-18 Electronics And Telecommunications Research Institute Apparatus and method for providing content
EP3013064B1 (en) * 2013-07-19 2019-03-13 Sony Corporation Information processing device and method
KR20150012206A (ko) * 2013-07-24 2015-02-03 한국전자통신연구원 3차원 콘텐츠의 부호화 방법 및 장치
US9270721B2 (en) * 2013-10-08 2016-02-23 Qualcomm Incorporated Switching between adaptation sets during media streaming
JPWO2015060165A1 (ja) * 2013-10-22 2017-03-09 シャープ株式会社 表示処理装置、配信装置、および、メタデータ
WO2015061794A1 (en) * 2013-10-25 2015-04-30 Futurewei Technologies, Inc. Associating representations in adaptive streaming
EP3092811B1 (en) * 2014-01-07 2020-02-12 InterDigital VC Holdings, Inc. Method for providing a content part of a multimedia content to a client terminal, corresponding cache
WO2015105327A1 (ko) * 2014-01-08 2015-07-16 한국전자통신연구원 Dash를 사용하는 비디오 재생을 위한 비트 깊이 표현 방법
KR20150083429A (ko) * 2014-01-08 2015-07-17 한국전자통신연구원 Dash를 사용하는 비디오 재생을 위한 비트 깊이 표현 방법
GB2524531B (en) * 2014-03-25 2018-02-07 Canon Kk Methods, devices, and computer programs for improving streaming of partitioned timed media data
JP6340882B2 (ja) * 2014-04-04 2018-06-13 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
US9860612B2 (en) * 2014-04-10 2018-01-02 Wowza Media Systems, LLC Manifest generation and segment packetization
US10110657B2 (en) * 2014-07-03 2018-10-23 Telefonaktiebolaget Lm Ericsson (Publ) System and method for pushing live media content in an adaptive streaming environment
CN106134156B (zh) 2014-07-03 2019-06-28 华为技术有限公司 自适应流媒体的取证标记的信号发送和处理的方法及设备
KR101783618B1 (ko) * 2014-08-22 2017-10-10 엘지전자 주식회사 방송 신호 송신 방법, 방송 신호 송신 장치, 방송 신호 수신 방법 및 방송 신호 수신 장치
CN106537930B (zh) * 2015-02-12 2019-09-13 华为技术有限公司 一种用于实施多媒体流业务呈现方法的客户端
US10412132B2 (en) * 2015-02-16 2019-09-10 Lg Electronics Inc. Broadcasting signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method
WO2017068794A1 (en) * 2015-10-23 2017-04-27 Sharp Kabushiki Kaisha File recovery
US10593028B2 (en) * 2015-12-03 2020-03-17 Samsung Electronics Co., Ltd. Method and apparatus for view-dependent tone mapping of virtual reality images
US10565258B2 (en) * 2015-12-10 2020-02-18 Comcast Cable Communications, Llc Selecting and sharing content
US9780891B2 (en) * 2016-03-03 2017-10-03 Electronics And Telecommunications Research Institute Method and device for calibrating IQ imbalance and DC offset of RF tranceiver
CN106961612B (zh) * 2017-03-16 2021-02-02 Oppo广东移动通信有限公司 一种图像处理方法及设备
CN112771885B (zh) * 2018-09-18 2023-04-25 诺基亚技术有限公司 用于针对视频编码的非二进制简档约束信令的方法和装置
US10930284B2 (en) 2019-04-11 2021-02-23 Advanced New Technologies Co., Ltd. Information processing system, method, device and equipment
US11310303B2 (en) * 2019-10-01 2022-04-19 Tencent America LLC Methods and apparatuses for dynamic adaptive streaming over HTTP
US11930254B2 (en) * 2020-04-07 2024-03-12 Tencent America LLC Patchable remote element for data manipulation
US11445270B2 (en) 2020-04-15 2022-09-13 Comcast Cable Communications, Llc Content information for manifest determination

Family Cites Families (108)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6499060B1 (en) * 1999-03-12 2002-12-24 Microsoft Corporation Media coding for loss recovery with remotely predicted data units
JP4191932B2 (ja) 2001-03-08 2008-12-03 パナソニック株式会社 メディア配信装置およびメディア配信方法
EP1438669B1 (en) * 2001-06-27 2014-01-22 SKKY Incorporated Improved media delivery platform
US7231343B1 (en) * 2001-12-20 2007-06-12 Ianywhere Solutions, Inc. Synonyms mechanism for natural language systems
KR100486713B1 (ko) * 2002-09-17 2005-05-03 삼성전자주식회사 멀티미디어 스트리밍 장치 및 방법
US9740988B1 (en) * 2002-12-09 2017-08-22 Live Nation Entertainment, Inc. System and method for using unique device indentifiers to enhance security
US8964830B2 (en) * 2002-12-10 2015-02-24 Ol2, Inc. System and method for multi-stream video compression using multiple encoding formats
US10201760B2 (en) * 2002-12-10 2019-02-12 Sony Interactive Entertainment America Llc System and method for compressing video based on detected intraframe motion
US9314691B2 (en) * 2002-12-10 2016-04-19 Sony Computer Entertainment America Llc System and method for compressing video frames or portions thereof based on feedback information from a client device
US8655166B2 (en) * 2003-03-03 2014-02-18 Alexander I Soto System and method for performing in-service optical fiber network certification
US7171618B2 (en) * 2003-07-30 2007-01-30 Xerox Corporation Multi-versioned documents and method for creation and use thereof
US8472792B2 (en) * 2003-12-08 2013-06-25 Divx, Llc Multimedia distribution system
US7519274B2 (en) * 2003-12-08 2009-04-14 Divx, Inc. File format for multiple track digital data
KR101022471B1 (ko) * 2004-01-17 2011-03-16 삼성전자주식회사 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치
US8868772B2 (en) * 2004-04-30 2014-10-21 Echostar Technologies L.L.C. Apparatus, system, and method for adaptive-rate shifting of streaming content
US20080002776A1 (en) * 2004-04-30 2008-01-03 British Broadcasting Corporation (Bbc) Media Content and Enhancement Data Delivery
US20060047779A1 (en) 2004-07-12 2006-03-02 Sharp Laboratories Of America, Inc. HTTP agent-driven content negotiation for scalable video coding
KR100687730B1 (ko) 2004-08-04 2007-02-27 경북대학교 산학협력단 액티브 노드, 액티브 노드를 이용한 컨텐츠 전송 시스템및 그 방법
KR100819251B1 (ko) * 2005-01-31 2008-04-03 삼성전자주식회사 방송 통신 융합 시스템에서 수화 비디오 데이터를제공하는 시스템 및 방법
US8320499B2 (en) * 2005-03-18 2012-11-27 Qualcomm Incorporated Dynamic space-time coding for a communication system
US8683066B2 (en) * 2007-08-06 2014-03-25 DISH Digital L.L.C. Apparatus, system, and method for multi-bitrate content streaming
US8370514B2 (en) * 2005-04-28 2013-02-05 DISH Digital L.L.C. System and method of minimizing network bandwidth retrieved from an external network
EP1985021A4 (en) * 2006-02-13 2013-05-29 Digital Fountain Inc CONTINUOUS TRANSMISSION AND BUFFER DELIVERY USING CONTINUOUS MONITORING OVERVIEW AND PERIODS OF PROTECTION
US9432433B2 (en) * 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
US9176984B2 (en) * 2006-07-31 2015-11-03 Ricoh Co., Ltd Mixed media reality retrieval of differentially-weighted links
EP2084708A4 (en) * 2006-10-19 2010-11-24 Lg Electronics Inc METHOD AND DEVICE FOR ENCODING; METHOD AND DEVICE FOR DECODING
CN101589625B (zh) 2006-10-25 2011-09-21 弗劳恩霍夫应用研究促进协会 质量可缩放编码
GB0622823D0 (en) * 2006-11-15 2006-12-27 British Broadcasting Corp Accessing content
US20090041100A1 (en) * 2006-12-13 2009-02-12 Viasat, Inc. Link aware mobile data network
US8015581B2 (en) * 2007-01-05 2011-09-06 Verizon Patent And Licensing Inc. Resource data configuration for media content access systems and methods
US8812673B2 (en) * 2007-02-14 2014-08-19 Alcatel Lucent Content rate control for streaming media servers
US20100266042A1 (en) * 2007-03-02 2010-10-21 Han Suh Koo Method and an apparatus for decoding/encoding a video signal
US8935249B2 (en) * 2007-06-26 2015-01-13 Oracle Otc Subsidiary Llc Visualization of concepts within a collection of information
US8627509B2 (en) * 2007-07-02 2014-01-07 Rgb Networks, Inc. System and method for monitoring content
US8619569B2 (en) * 2007-07-23 2013-12-31 Telefonaktiebolaget Lm Ericsson (Publ) Method and apparatus for stream adaption in a packet switched network
US8462949B2 (en) * 2007-11-29 2013-06-11 Oculis Labs, Inc. Method and apparatus for secure display of visual content
US9060208B2 (en) * 2008-01-30 2015-06-16 Time Warner Cable Enterprises Llc Methods and apparatus for predictive delivery of content over a network
US20160239749A1 (en) * 2008-10-28 2016-08-18 Sas Institute Inc. Use of object group models and hierarchies for output predictions
US9154942B2 (en) * 2008-11-26 2015-10-06 Free Stream Media Corp. Zero configuration communication between a browser and a networked media device
US9961388B2 (en) * 2008-11-26 2018-05-01 David Harrison Exposure of public internet protocol addresses in an advertising exchange server to improve relevancy of advertisements
US9294789B2 (en) * 2008-12-09 2016-03-22 Adobe Systems Incorporated Enhanced live multibitrate video encoding
US9060187B2 (en) * 2008-12-22 2015-06-16 Netflix, Inc. Bit rate stream switching
US8099476B2 (en) * 2008-12-31 2012-01-17 Apple Inc. Updatable real-time or near real-time streaming
US20100179984A1 (en) * 2009-01-13 2010-07-15 Viasat, Inc. Return-link optimization for file-sharing traffic
KR20100084115A (ko) 2009-01-15 2010-07-23 한국전자통신연구원 방송 서비스 제공 방법 및 장치
US9043467B2 (en) * 2009-01-30 2015-05-26 Movik Networks Adaptive chunked and content-aware pacing of multi-media delivery over HTTP transport and network controlled bit rate selection
JP2010200087A (ja) 2009-02-26 2010-09-09 Funai Electric Co Ltd 映像機器
US9281847B2 (en) * 2009-02-27 2016-03-08 Qualcomm Incorporated Mobile reception of digital video broadcasting—terrestrial services
US9538220B2 (en) * 2009-06-12 2017-01-03 Wi-Lan Labs, Inc. Video streaming quality of experience degradation control using a video quality metric
US8903895B2 (en) * 2009-07-22 2014-12-02 Xinlab, Inc. Method of streaming media to heterogeneous client devices
GB2472264B (en) * 2009-07-31 2014-12-17 British Sky Broadcasting Ltd Media substitution system
JP2011053468A (ja) * 2009-09-02 2011-03-17 Sony Corp 映像/文字同時表示装置及び頭部装着型ディスプレイ
US9917874B2 (en) * 2009-09-22 2018-03-13 Qualcomm Incorporated Enhanced block-request streaming using block partitioning or request controls for improved client-side handling
US9237387B2 (en) * 2009-10-06 2016-01-12 Microsoft Technology Licensing, Llc Low latency cacheable media streaming
US8520983B2 (en) * 2009-10-07 2013-08-27 Google Inc. Gesture-based selective text recognition
US9124642B2 (en) * 2009-10-16 2015-09-01 Qualcomm Incorporated Adaptively streaming multimedia
US8914835B2 (en) * 2009-10-28 2014-12-16 Qualcomm Incorporated Streaming encoded video data
US9002881B2 (en) * 2009-10-29 2015-04-07 Microsoft Technology Licensing, Llc Assembling streamed content for on-demand presentation
CN107911332B (zh) * 2009-11-04 2021-01-08 阿莫泰克有限公司 媒体内容流播的方法、系统和计算机可读介质
KR101777347B1 (ko) * 2009-11-13 2017-09-11 삼성전자주식회사 부분화에 기초한 적응적인 스트리밍 방법 및 장치
KR101786051B1 (ko) * 2009-11-13 2017-10-16 삼성전자 주식회사 데이터 제공 방법 및 장치와 데이터 수신 방법 및 장치
KR101750049B1 (ko) * 2009-11-13 2017-06-22 삼성전자주식회사 적응적인 스트리밍 방법 및 장치
US8515185B2 (en) * 2009-11-25 2013-08-20 Google Inc. On-screen guideline-based selective text recognition
US8631436B2 (en) * 2009-11-25 2014-01-14 Nokia Corporation Method and apparatus for presenting media segments
KR101737084B1 (ko) * 2009-12-07 2017-05-17 삼성전자주식회사 메인 콘텐트에 다른 콘텐트를 삽입하여 스트리밍하는 방법 및 장치
US8510375B2 (en) * 2009-12-11 2013-08-13 Nokia Corporation Apparatus and methods for time mapping media segments in streaming media files
US9338523B2 (en) * 2009-12-21 2016-05-10 Echostar Technologies L.L.C. Audio splitting with codec-enforced frame sizes
DK2526671T3 (en) * 2010-01-18 2017-02-27 ERICSSON TELEFON AB L M (publ) METHODS AND DEVICES FOR HTTP MEDIA FLOW DISTRIBUTION
US20110179185A1 (en) * 2010-01-20 2011-07-21 Futurewei Technologies, Inc. System and Method for Adaptive Differentiated Streaming
US9607655B2 (en) * 2010-02-17 2017-03-28 JBF Interlude 2009 LTD System and method for seamless multimedia assembly
EP2537311A1 (en) * 2010-02-17 2012-12-26 Telefonaktiebolaget L M Ericsson (PUBL) Resource allocation for video on demand
EP2362651A1 (en) * 2010-02-19 2011-08-31 Thomson Licensing Multipath delivery for adaptive streaming
JP5996439B2 (ja) * 2010-02-19 2016-09-21 テレフオンアクチーボラゲット エルエム エリクソン(パブル) Httpストリーミングにおける表現切り替えのための方法及び装置
CA2786257C (en) * 2010-02-19 2018-03-06 Telefonaktiebolaget L M Ericsson (Publ) Method and arrangement for adaptation in http streaming
KR101777348B1 (ko) * 2010-02-23 2017-09-11 삼성전자주식회사 데이터 전송 방법 및 장치와 데이터 수신 방법 및 장치
GB201105502D0 (en) * 2010-04-01 2011-05-18 Apple Inc Real time or near real time streaming
CN102882845B (zh) * 2010-04-07 2016-07-13 苹果公司 实时或准实时流传输
KR101837687B1 (ko) * 2010-06-04 2018-03-12 삼성전자주식회사 콘텐트의 품질을 결정하는 복수의 인자에 기초한 적응적인 스트리밍 방법 및 장치
US9497290B2 (en) * 2010-06-14 2016-11-15 Blackberry Limited Media presentation description delta file for HTTP streaming
EP2583432B1 (en) * 2010-06-18 2019-02-20 Nokia Technologies Oy Method and apparatus for generating and handling streaming media quality-of-experience metrics
US9762639B2 (en) * 2010-06-30 2017-09-12 Brightcove Inc. Dynamic manifest generation based on client identity
JP5709418B2 (ja) 2010-06-30 2015-04-30 キヤノン株式会社 固体撮像装置
US9838450B2 (en) * 2010-06-30 2017-12-05 Brightcove, Inc. Dynamic chunking for delivery instances
US9131274B2 (en) * 2010-07-19 2015-09-08 Lg Electronics Inc. Method for transceiving media files and device for transmitting/receiving using same
WO2012010928A1 (en) * 2010-07-20 2012-01-26 Nokia Corporation A media streaming apparatus
KR20120034550A (ko) * 2010-07-20 2012-04-12 한국전자통신연구원 스트리밍 컨텐츠 제공 장치 및 방법
US8782268B2 (en) * 2010-07-20 2014-07-15 Microsoft Corporation Dynamic composition of media
US8930562B2 (en) * 2010-07-20 2015-01-06 Qualcomm Incorporated Arranging sub-track fragments for streaming video data
US9596447B2 (en) * 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
US9716920B2 (en) * 2010-08-05 2017-07-25 Qualcomm Incorporated Signaling attributes for network-streamed video data
US8806050B2 (en) * 2010-08-10 2014-08-12 Qualcomm Incorporated Manifest file updates for network streaming of coded multimedia data
RU2552176C2 (ru) * 2010-08-10 2015-06-10 Телефонактиеболагет Лм Эрикссон (Пабл) Управление сеансом связи для передачи медиапотока
US9794312B2 (en) * 2010-09-01 2017-10-17 Electronics And Telecommunications Research Institute Method and device for providing streaming content
US9467493B2 (en) * 2010-09-06 2016-10-11 Electronics And Telecommunication Research Institute Apparatus and method for providing streaming content
KR101206698B1 (ko) * 2010-10-06 2012-11-30 한국항공대학교산학협력단 스트리밍 콘텐츠 제공 장치 및 방법
US8922665B2 (en) * 2010-10-06 2014-12-30 Microsoft Corporation Rapidly initializing and dynamically adjusting media streams
WO2012060581A2 (ko) * 2010-11-02 2012-05-10 엘지전자 주식회사 미디어 콘텐트 송수신 방법 및 그를 이용한 송수신 장치
US8806615B2 (en) * 2010-11-04 2014-08-12 Mcafee, Inc. System and method for protecting specified data combinations
US9301020B2 (en) * 2010-11-30 2016-03-29 Google Technology Holdings LLC Method of targeted ad insertion using HTTP live streaming protocol
US9495713B2 (en) * 2010-12-10 2016-11-15 Quib, Inc. Comment delivery and filtering architecture
US9832540B2 (en) * 2010-12-15 2017-11-28 Hulu, LLC Method and apparatus for hybrid transcoding of a media program
WO2012093202A1 (en) * 2011-01-07 2012-07-12 Nokia Corporation Method and apparatus for signaling presentation
KR20120084252A (ko) * 2011-01-19 2012-07-27 삼성전자주식회사 복수의 실시간 전송 스트림을 수신하는 수신 장치와 그 송신 장치 및 멀티미디어 컨텐츠 재생 방법
US9661104B2 (en) * 2011-02-07 2017-05-23 Blackberry Limited Method and apparatus for receiving presentation metadata
US9646110B2 (en) * 2011-02-28 2017-05-09 International Business Machines Corporation Managing information assets using feedback re-enforced search and navigation
EP2695352A4 (en) * 2011-04-01 2014-12-31 Intel Corp ADAPTIVE BROADCASTING IN HTTP FLOW WITH OPTIMIZATION BETWEEN LAYERS
US9160779B2 (en) * 2011-06-30 2015-10-13 Qualcomm Incorporated Dynamic adaptive streaming proxy for unicast or broadcast/multicast services
US20130182643A1 (en) * 2012-01-16 2013-07-18 Qualcomm Incorporated Method and system for transitions of broadcast dash service receptions between unicast and broadcast

Also Published As

Publication number Publication date
US20190245904A1 (en) 2019-08-08
KR20200072454A (ko) 2020-06-22
KR101854382B1 (ko) 2018-05-04
KR20180048499A (ko) 2018-05-10
CN103493499B (zh) 2018-04-06
US20140006564A1 (en) 2014-01-02
KR102272836B1 (ko) 2021-07-05
US10122780B2 (en) 2018-11-06
KR20180129736A (ko) 2018-12-05
KR102122495B1 (ko) 2020-06-12
US20190132374A1 (en) 2019-05-02
EP2924989A1 (en) 2015-09-30
US9860293B2 (en) 2018-01-02
US20180109581A1 (en) 2018-04-19
US10313414B2 (en) 2019-06-04
KR101924987B1 (ko) 2018-12-04
CN107071513A (zh) 2017-08-18
EP2924990A1 (en) 2015-09-30
WO2012125006A2 (ko) 2012-09-20
WO2012125006A3 (ko) 2012-12-27
KR20120106631A (ko) 2012-09-26
US11082470B2 (en) 2021-08-03
CN108366070A (zh) 2018-08-03
EP2688297A4 (en) 2014-08-27
EP2688297A2 (en) 2014-01-22
CN103493499A (zh) 2014-01-01
US20190058746A1 (en) 2019-02-21
US20200322408A1 (en) 2020-10-08
US10645136B2 (en) 2020-05-05
US10270830B2 (en) 2019-04-23

Similar Documents

Publication Publication Date Title
CN107071513B (zh) 用于提供媒体内容的方法、客户机和服务器
US10375373B2 (en) Method and apparatus for encoding three-dimensional (3D) content
CN106850586B (zh) 媒体提供方法
CN106060102B (zh) 媒体提供方法和终端
US10863211B1 (en) Manifest data for server-side media fragment insertion
AU2018299983A1 (en) Processing media data using a generic descriptor for file format boxes
US20160337679A1 (en) Method for displaying bit depth for playing video using dash
CN110870323B (zh) 使用全向媒体格式处理媒体数据
KR102272853B1 (ko) 스트리밍 컨텐츠 제공 장치 및 방법
KR20120122994A (ko) 스트리밍 콘텐츠 제공 장치 및 방법
KR101710452B1 (ko) 멀티미디어 전송 시스템에서 서비스 발견 정보를 송수신하는 방법 및 장치와 이를 위한 파일 구조
Zhang et al. A MMT-based content classification scheme for VoD service

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20180821

Address after: Seoul, South Korea

Applicant after: Adil Habb Co., Ltd.

Address before: South Korea

Applicant before: KOREA ELECTRONICS AND TELECOMMUNICATIONS RESEARCH INSTITUTE

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220421

Address after: California, USA

Patentee after: Sipco LLC

Address before: Seoul City, Korea

Patentee before: IDEAHUB Inc.

TR01 Transfer of patent right