CN106797445B - 马赛克业务呈现/分发方法及装置 - Google Patents

马赛克业务呈现/分发方法及装置 Download PDF

Info

Publication number
CN106797445B
CN106797445B CN201480082424.5A CN201480082424A CN106797445B CN 106797445 B CN106797445 B CN 106797445B CN 201480082424 A CN201480082424 A CN 201480082424A CN 106797445 B CN106797445 B CN 106797445B
Authority
CN
China
Prior art keywords
mosaic
presentation
media
unit
logical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480082424.5A
Other languages
English (en)
Other versions
CN106797445A (zh
Inventor
唐廷芳
刘欣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN106797445A publication Critical patent/CN106797445A/zh
Application granted granted Critical
Publication of CN106797445B publication Critical patent/CN106797445B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division

Abstract

一种马赛克业务呈现方法,包括:接收描述马赛克业务的媒体呈现描述文件,所述媒体呈现描述文件描述了所述马赛克业务的逻辑呈现单元的呈现位置,以及所述逻辑呈现单元的马赛克媒体;根据所述媒体呈现描述文件对所述逻辑呈现单元的马赛克媒体的描述,从MBMS client获取所述逻辑呈现单元的马赛克媒体;根据所述媒体呈现描述文件对所述逻辑呈现单元的呈现位置的描述,在所述逻辑呈现单元的呈现位置呈现所述马赛克媒体。可以在降低马赛克业务服务器的计算量的同时提高马赛克业务的灵活性。

Description

马赛克业务呈现/分发方法及装置
技术领域
本发明涉及马赛克业务,具体涉及马赛克业务呈现/分发方法及装置。
背景技术
马赛克(Mosaic)业务是数字电视,互联网协议电视(IPTV:Internet ProtocolTelevision)中的一项很有吸引力的业务,所谓Mosaic就是将显示屏幕划分成多个逻辑呈现单元(Cell),每个逻辑呈现单元显示不同的内容,例如不同的频道的内容。
实现Mosaic的方案有两种,一种是基于模拟合成的方案,另外一种是基于数字合成的方案。模拟合成方案中各频道的模拟视频源由马赛克服务器按照空间布局拼合成一路画面(模拟视频),然后编码成数字信号传送到终端播放。数字合成方案中各频道的数字码流由马赛克服务器合成一路数字码流,再传送到终端播放。
使用上述的实现Mosaic业务的方案,马赛克服务器需要将Mosaic业务的各频道的数据合成一路码流,计算量较大。
发明内容
本发明提供了马赛克业务呈现/分发方法及装置,能够降低马赛克服务器的计算量。
本发明的第一方面提供了一种马赛克业务呈现方法,包括:
接收描述马赛克业务的媒体呈现描述文件,所述媒体呈现描述文件描述了所述马赛克业务的逻辑呈现单元的呈现位置,以及所述逻辑呈现单元的马赛克媒体;
根据所述媒体呈现描述文件对所述逻辑呈现单元的马赛克媒体的描述,从MBMSclient获取所述逻辑呈现单元的马赛克媒体;
根据所述媒体呈现描述文件对所述逻辑呈现单元的呈现位置的描述,在所述逻辑呈现单元的呈现位置呈现所述马赛克媒体。
结合本发明的第一方面的所有实现方式,所述马赛克媒体仅包括了视频;所述方法还包括:
根据所述媒体呈现描述文件对高亮逻辑呈现单元马赛克音频的描述,从所述MBMSclient获取所述高亮逻辑呈现单元的马赛克音频;
播放所述高亮逻辑呈现单元的马赛克音频。
结合本发明的第一方面的所有实现方式,所述逻辑呈现单元为至少两个,所述至少两个逻辑呈现单元包括逻辑呈现主单元,所述方法还包括:
根据所述媒体呈现描述文件对所述高亮逻辑呈现单元的原始媒体的描述,从所述MBMS client获取所述高亮逻辑呈现单元的原始媒体;
根据所述媒体呈现描述文件对所述逻辑呈现主单元的位置的描述,在所述逻辑呈现主单元的位置呈现所述高亮逻辑呈现单元的原始媒体。
结合本发明的第一方面的所有实现方式,所述方法还包括:
根据所述媒体呈现描述文件对被选择的逻辑呈现单元的原始媒体的描述,从所述MBMS client获取所述被选择的逻辑呈现单元的原始媒体;
呈现所述逻辑呈现单元的原始媒体。
本发明的第二方面提供了一种马赛克业务分发方法,包括:
接收描述马赛克业务的马赛克USD,所述马赛克USD描述了所述马赛克业务的逻辑呈现单元对应的马赛克媒体;
接收来自MBMS client的所述马赛克USD描述的马赛克业务的逻辑呈现单元对应的马赛克媒体;
接收来自广播多播服务器的用于获取马赛克媒体的马赛克媒体获取请求,所述马赛克媒体获取请求包括所述马赛克业务对应的媒体呈现描述文件描述的马赛克媒体获取地址;
根据所述马赛克媒体获取地址匹配出所述马赛克USD描述的马赛克媒体内容标识;
向所述DASH client发送与所述马赛克媒体内容标识对应的马赛克媒体。
结合本发明的第二方面的所有实现方式,所述方法还包括:
接收所述逻辑呈现单元对应的原始媒体USD,所述原始媒体USD描述对应的逻辑呈现单元的原始媒体,原始媒体USD和逻辑呈现单元一一对应;
接收来自广播多播服务器的所述原始USD描述的逻辑呈现单元的原始媒体;
接收来自所述DASH client的用于获取原始媒体的原始媒体获取请求,所述原始媒体获取请求包括媒体呈现描述文件描述的原始媒体获取地址;
根据所述原始媒体获取地址匹配出所述原始媒体USD描述的原始媒体标识;
向所述DASH client发送与所述原始媒体标识对应的原始媒体。
本发明的第三方面提供了一种马赛克业务呈现装置,包括:
接收单元,用于接收描述马赛克业务的媒体呈现描述文件,所述媒体呈现描述文件描述了所述马赛克业务的逻辑呈现单元的呈现位置,以及所述逻辑呈现单元的马赛克媒体;接收MBMS client发送的所述逻辑呈现单元的马赛克媒体;
发送单元,用于根据所述接收单元接收的媒体呈现描述文件对所述逻辑呈现单元的马赛克媒体的描述,向所述MBMS client发送获取所述逻辑呈现单元的马赛克媒体的马赛克媒体获取请求;
呈现单元,用于根据所述接收单元接收的媒体呈现描述文件对所述逻辑呈现单元的呈现位置的描述,在所述逻辑呈现单元的呈现位置呈现所述马赛克媒体。
结合本发明的第三方面的所有实现方式,所述接收单元接收的马赛克媒体仅包括了视频;
所述发送单元,还用于根据所述接收单元接收的媒体呈现描述文件对高亮逻辑呈现单元马赛克音频的描述,向所述MBMS client发送请求获取所述高亮逻辑呈现单元的马赛克音频的马赛克音频获取请求;
所述接收单元,还用于接收所述MBMS client发送的所述高亮逻辑呈现单元的马赛克音频;
所述呈现单元,还用于播放所述接收单元接收的所述高亮逻辑呈现单元的马赛克音频。
结合本发明的第三方面的所有实现方式,所述逻辑呈现单元为至少两个,所述至少两个逻辑呈现单元包括逻辑呈现主单元;
所述发送单元,还用于根据所述媒体呈现描述文件对所述高亮逻辑呈现单元的原始媒体的描述,向所述MBMS client发送请求获取所述高亮逻辑呈现单元的原始媒体的原始媒体获取请求;
所述接收单元,还用于接收所述MBMS client发送的所述高亮逻辑呈现单元的原始媒体;
所述呈现单元,还用于根据所述媒体呈现描述文件对所述逻辑呈现主单元的位置的描述,在所述逻辑呈现主单元的位置呈现所述接收单元接收的所述高亮逻辑呈现单元的原始媒体。
结合本发明的第三方面的所有实现方式,所述发送单元,还用于根据所述媒体呈现描述文件对被选择的逻辑呈现单元的原始媒体的描述,向所述MBMS client获取所述被选择的逻辑呈现单元的原始媒体的原始媒体获取请求;
所述接收单元,还用于接收所述MBMS client发送的所述被选择的逻辑呈现单元的原始媒体;
所述呈现单元,还用于呈现所述接收单元接收的所述被选择的逻辑呈现单元的原始媒体。
本发明的第四方面提供了一种马赛克业务分发装置,包括:
接收单元,用于接收描述马赛克业务的马赛克USD,所述马赛克USD描述了所述马赛克业务的逻辑呈现单元对应的马赛克媒体;接收来自广播多播服务器的所述马赛克USD描述的马赛克业务的逻辑呈现单元对应的马赛克媒体;接收来自DASH client的用于获取马赛克媒体的马赛克媒体获取请求,所述马赛克媒体获取请求包括所述马赛克业务对应的媒体呈现描述文件描述的马赛克媒体获取地址;
匹配单元,用于根据所述接收单元接收的马赛克媒体获取地址匹配出所述马赛克USD描述的马赛克媒体内容标识;
发送单元,用于向所述DASH client发送与所述匹配单元匹配出的马赛克媒体内容标识对应的马赛克媒体。
结合本发明的第四方面的所有实现方式,所述接收单元,还用于接收所述逻辑呈现单元对应的原始媒体USD,所述原始媒体USD描述对应的逻辑呈现单元的原始媒体,原始媒体USD和逻辑呈现单元一一对应;接收来自广播多播服务器的所述原始USD描述的逻辑呈现单元的原始媒体;接收来自所述DASH client的用于获取原始媒体的原始媒体获取请求,所述原始媒体获取请求包括媒体呈现描述文件描述的原始媒体获取地址;
所述匹配单元,还用于根据所述接收单元接收的原始媒体获取地址匹配出所述原始媒体USD描述的原始媒体标识;
所述发送单元,还用于向所述DASH client发送与所述匹配单元匹配出的原始媒体标识对应的原始媒体。
从本发明实施例提供的以上技术方案可以看出,由于本发明实施例中马赛克MPD文件描述了马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体,因此DASH client在获取了马赛克MPD后,可以根据马赛克MPD的描述获取逻辑呈现单元的马赛克媒体,并在马赛克MPD描述的呈现位置呈现对应的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体由马赛克MPD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一个实施例提供的马赛克业务呈现方法的流程图;
图2为马赛克业务的示意图;
图3为本发明一个实施例提供的马赛克业务分发方法的流程图;
图4为本发明一个实施例提供的马赛克业务呈现方法的流程图;
图5为本发明另一个实施例提供的马赛克业务呈现方法的流程图;
图6为本发明另一个实施例提供的马赛克业务呈现方法的流程图;
图7为本发明一个实施例提供的马赛克业务呈现装置的结构图;
图8为本发明一个实施例提供的马赛克业务分发装置的结构图;
图9为本发明另一个实施例提供的马赛克业务呈现装置的结构图;
图10为本发明另一个实施例提供的马赛克业务分发装置的结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例描述了超文本传输协议(HTTP:HyperText Transfer Protocol)动态自适应流媒体(DASH:Dynamic Adaptive Streaming over HTTP)over多媒体广播多播业务(MBMS:Multimedia Broadcast Multicast Service)的实现,具体描述的是DASH客户端(DASH client)和MBMS客户端(MBMS client)之间的交互过程,具体地,MBMS client可以在广播环境获取所有的媒体分片,DASH client可以通过HTTP接口向MBMS client请求媒体分片,马赛克业务的具体呈现和业务逻辑的实现都由DASH client处理。本发明中DASHclient获取的马赛克业务的媒体呈现描述(MPD:Media Presentation Description)文件是改进过的,以使得DASH client可以从MBMS client请求媒体分片,以及对马赛克业务进行呈现和实现马赛克业务的业务逻辑。同时,本发明中MBMS client获取的马赛克USD文件也是改进过的,以使得MBMS client可以识别马赛克业务,以及向DASH client发送DASHclient所请求的媒体分片。其中,DASH client可以是呈现马赛克业务的终端,如个人电脑,手机,平板电脑,电视机或机顶盒等;MBMS client可以是提供马赛克业务的任何设备,如个人电脑或手机等。
如下对本发明实施例进行具体地描述,图1描述了本发明一个实施例提供的马赛克业务呈现方法的流程,该实施例描述的是DASH client的处理流程,该方法包括:
101、接收描述马赛克业务的媒体呈现描述文件,该媒体呈现描述文件描述了马赛克业务的逻辑呈现单元的呈现位置,以及逻辑呈现单元的马赛克媒体。
其中,逻辑呈现单元的数量为至少两个,每一个逻辑呈现单元都有对应的马赛克媒体。一般来说,一个逻辑呈现单元对应一个马赛克业务的子频道,即逻辑呈现单元和子频道是一一对应的;但是也可以是两个或两个以上的逻辑呈现单元对应同一个子频道,例如在上述的至少两个逻辑呈现单元包括了逻辑呈现主单元时,逻辑呈现主单元可以与另一个逻辑呈现单元对应同一个子频道,逻辑呈现主单元也可以对应一个单独的子频道。
其中,DASH client可以根据MPD文件中的马赛克元素/属性来确定MPD描述的是马赛克业务,即马赛克业务由MPD文件的马赛克元素/属性来指定。例如,可以在MPD文件中增加一个马赛克描述子(Mosaic Descriptor)来在MPD文件描述中增加马赛克业务业务的描述,该马赛克描述子可以作为MPD文件的一个元素(element)。需要说明的是,本发明实施例中的元素/属性表示的是元素或属性,例如“马赛克元素/属性”表示的是“马赛克元素或马赛克属性”。
其中,马赛克业务的逻辑呈现单元的呈现位置可以由MPD文件中的逻辑呈现单元呈现位置属性/元素来描述,例如,可以预先约定好马赛克业务中各个逻辑呈现单元的编号及位置,则逻辑呈现单元呈现位置属性/元素只需要描述逻辑呈现单元的编号DASH client就可以确定逻辑呈现单元的位置。也可以预先约定好马赛克业务所划分的元素单元的数量以及编号,则逻辑呈现单元呈现位置属性/元素可以通过描述逻辑呈现单元所覆盖的元素单元的编号来描述逻辑呈现单元的呈现位置,可以理解的是,马赛克业务所划分的元素单元的数量也可以在MPD文件中指定。
其中,逻辑呈现单元的马赛克媒体可以由媒体呈现描述文件中的马赛克媒体链接属性/元素来描述;具体地,马赛克媒体链接属性/元素可以通过描述马赛克媒体对应的自适应马赛克媒体集合的标识来描述逻辑呈现单元的马赛克媒体,例如可以将马赛克媒体链接属性/元素的值取为AdaptationSet.representation@id或者包含多个AdaptationSet.representation@id的列表或者AdaptationSet@id,AdaptationSet是同一个节目的自适应内容的呈现码流集合,其中可以包括该节目对应的一个或者多个不同码率的马赛克媒体,AdaptationSet.representation@id表示的是一个自适应内容的呈现码流的标识,这个自适应内容的呈现码流是该该节目对应的某个码率的马赛克媒体。当然,马赛克媒体链接属性/元素也可以通过描述马赛克媒体的获取地址来描述逻辑呈现单元的马赛克媒体。其中,马赛克媒体可以是马赛克视频,或马赛克视频和音频,或马赛克文本等。
102、根据媒体呈现描述文件对逻辑呈现单元的马赛克媒体的描述,从MBMSclient获取逻辑呈现单元的马赛克媒体。
在马赛克媒体链接属性/元素描述的是马赛克媒体的获取地址时,DASH client可以在马赛克媒体获取请求中携带该马赛克媒体的获取地址,使得媒体服务器可以根据该马赛克媒体的获取地址确定以及向DASH client返回所对应的马赛克媒体,其中获取地址具体可以是segment URL。在马赛克媒体链接属性/元素描述的是AdaptationSet.@id或者多个AdaptationSet.representation@id构成的列表时,DASH client可以先根据硬件能力,系统设置和网络环境等因素从自适应呈现内容集合所包括的至少两个不同码率的马赛克媒体中选择一个适合的马赛克媒体,在马赛克媒体获取请求中携带该选择的马赛克媒体的获取地址,使得媒体服务器可以根据该马赛克媒体的获取地址确定以及向DASH client返回所对应的马赛克媒体。在马赛克媒体链接属性/元素描述的是AdaptationSet.representation@id时,DASH client在马赛克媒体获取请求中携带该马赛克媒体码流对应分片的获取地址,使得媒体服务器可以根据该马赛克媒体的获取地址确定以及向DASH client返回所对应的马赛克媒体。其中,DASH client从媒体服务器获取的马赛克媒体具体可以是马赛克媒体分片(segment)。
103、根据媒体呈现描述文件对逻辑呈现单元的呈现位置的描述,在逻辑呈现单元的呈现位置呈现马赛克媒体。
在逻辑呈现单元呈现位置属性/元素描述的是逻辑呈现单元的编号时,DASHclient可以将获取的马赛克媒体呈现在逻辑呈现单元的编号对应的位置;在逻辑呈现单元呈现位置属性/元素描述的是逻辑呈现单元所覆盖的元素单元的编号时,DASH client可以将获取的马赛克媒体呈现在元素单元的编号对应的位置。例如,元素单元以左上角单元为起点从左到右从上到下递增进行编号,左上角元素单元编号为0,一个逻辑呈现单元可以覆盖一个元素单元,也可以覆盖相邻的至少两个元素单元,并且不同的逻辑呈现单元所覆盖的元素单元的数量可以不一样。
从上可知,本实施例中马赛克MPD文件描述了马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体,因此DASH client在获取了马赛克MPD后,可以根据马赛克MPD的描述获取逻辑呈现单元的马赛克媒体,并在马赛克MPD描述的呈现位置呈现对应的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体由马赛克MPD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
可以理解的是,DASH client通过步骤102获取的逻辑呈现单元的马赛克媒体可以是视频,音频,视频和音频合一,文本等。
在一种可能的情况下,DASH client通过步骤102获取的逻辑呈现单元的马赛克媒体是视频和音频合一的,则DASH client可以直接播放至少两个逻辑呈现单元中的高亮(highlight)逻辑呈现单元的音频。其中,高亮逻辑呈现单元是指的在马赛克业务的呈现用户界面(UI:User Interface)上显示的多个逻辑呈现单元中被用户所选择的那一个逻辑呈现单元,在显示方式上,该高亮逻辑呈现单元采用与其余非高亮逻辑呈现单元不同的呈现方式,使得能够很轻易地看出来哪一个逻辑呈现单元是高亮逻辑呈现单元。
在另一种可能的情况下,DASH client通过步骤102获取的逻辑呈现单元的马赛克媒体可能仅包括了视频,则为了能够播放高亮逻辑呈现单元的音频,DASH client还需要获取高亮逻辑呈现单元的马赛克音频,即DASH client还可以执行如下的步骤:
根据MPD文件对高亮逻辑呈现单元马赛克音频的描述,从MBMS client获取高亮逻辑呈现单元的马赛克音频;播放高亮逻辑呈现单元的马赛克音频。
其中,高亮逻辑呈现单元的马赛克音频可以由MPD文件中的马赛克音频链接属性/元素来描述。具体地,马赛克音频链接属性/元素可以通过描述马赛克媒体对应的自适应马赛克音频集合的标识来描述逻辑呈现单元的马赛克音频,例如可以将马赛克音频链接属性/元素的值取为AdaptationSet@id,AdaptationSet@id表示的是一个自适应内容的呈现码流集合的标识,这个自适应内容的呈现码流集合中包括至少两个不同码率的马赛克音频,该至少两个不同码率的马赛克音频对应的是同一个节目。当然,马赛克媒体链接属性/元素也可以通过描述马赛克音频的获取地址来描述逻辑呈现单元的马赛克音频。例如,在马赛克业务的所有逻辑呈现单元的马赛克音频放在一个AdaptationSet中时,马赛克音频连接属性/元素的取值可以为AdaptationSet representation@id,即直接指定了一个逻辑呈现单元对应的是adaptationSet中的哪一个呈现码流,则DASH client可以根据AdaptationSet representation@id获取到对应的马赛克音频。
其中,在马赛克音频链接属性/元素描述的是马赛克音频的获取地址时,DASHclient可以在马赛克音频获取请求中携带该马赛克音频的获取地址,使得MBMS client可以根据该马赛克音频的获取地址确定以及向DASH client返回所对应的马赛克音频。在马赛克音频链接属性/元素描述的是AdaptationSet@id时,DASH client可以先根据硬件能力,系统设置和网络环境等因素从自适应内容的呈现码流集合所包括的至少两个不同码率的马赛克音频中选择一个适合的马赛克音频,在马赛克音频获取请求中携带该选择的马赛克音频的获取地址,使得MBMS client可以根据该马赛克音频的获取地址确定以及向DASHclient返回所对应的马赛克音频。其中,DASH client从MBMS client获取的马赛克音频具体可以是马赛克音频分片(segment)。可以理解的是,DASH client可以只从MBMS client获取高亮逻辑呈现单元对应的马赛克音频,从而减少从MBMS client获取的数据量;DASHclient也可以从MBMS client获取所有逻辑呈现单元的马赛克音频,从而避免在用户切换高亮逻辑呈现单元时可能会产生的音频播放的中断。
在马赛克音频链接属性/元素的取值为AdaptationSet representation@id时,则DASH client可以只获取高亮逻辑呈现单元对应的马赛克音频。
其中,高亮逻辑呈现单元的马赛克音频可以由MPD文件中的马赛克音频链接属性/元素来描述。具体地,马赛克音频链接属性/元素可以通过描述马赛克媒体对应的自适应马赛克音频集合的标识来描述逻辑呈现单元的马赛克音频,例如可以将马赛克音频链接属性/元素的值取为AdaptationSet.representation@id或者包含多个AdaptationSet.representation@id的列表,AdaptationSet.representation@id表示的是一个自适应内容的呈现码流的标识,当包含多个AdaptationSet.representation@id的列表时,表示该逻辑单元的音频内容包括至少两个不同的马赛克音频码流,该至少两个不同的马赛克音频对应的是同一个节目。当然,马赛克媒体链接属性/元素也可以通过描述马赛克音频的获取地址来描述逻辑呈现单元的马赛克音频。
其中,在马赛克音频链接属性/元素描述的是马赛克音频的获取地址时,DASHclient可以在马赛克音频获取请求中携带该马赛克音频的获取地址,使得媒体服务器可以根据该马赛克音频的获取地址确定以及向DASH client返回所对应的马赛克音频。在马赛克音频链接属性/元素描述的是AdaptationSet.representation@id列表时,DASH client可以先根据硬件能力,系统设置和网络环境等因素从自适应呈现内容集合所包括的至少两个不同的马赛克音频中选择一个适合的马赛克音频,在马赛克音频获取请求中携带该选择的马赛克音频的获取地址,使得媒体服务器可以根据该马赛克音频的获取地址确定以及向DASH client返回所对应的马赛克音频。在马赛克音频链接属性/元素描述的是AdaptationSet.representation@id时,DASH client在马赛克音频获取请求中携带该选择的马赛克音频的获取地址,使得媒体服务器可以根据该马赛克音频的获取地址确定以及向DASH client返回所对应的马赛克音频。其中,DASH client从媒体服务器获取的马赛克音频具体可以是马赛克音频分片(segment)。可以理解的是,DASH client可以只从媒体服务器获取高亮逻辑呈现单元对应的马赛克音频,从而减少从媒体服务器获取的数据量;DASHclient也可以从媒体服务器获取所有逻辑呈现单元的马赛克音频,从而避免在用户切换高亮逻辑呈现单元时可能会产生的音频播放的中断。
在本发明的另一个实施例中,马赛克业务的至少两个逻辑呈现单元包括了一个逻辑呈现主单元,该逻辑呈现主单元需要呈现高亮逻辑呈现单元的原始媒体,其中原始媒体可以是原始视频,或原始视频和音频,或原始文本等。例如,图2描述的是马赛克业务的示意图,在图2中,一共有9(3*3)个元素单元,其编号分别是0~8。该9个元素单元被6个逻辑呈现单元所覆盖,其中,5个逻辑呈现单元只覆盖一个元素单元,另一个逻辑呈现单元作为逻辑呈现主单元覆盖了4个元素单元,在图2中,除逻辑呈现主单元外的5个逻辑呈现单元覆盖了编号为0,1,2,3和6的5个元素单元,逻辑呈现主单元覆盖了编号为4,5,7和8的四个元素单元。其中,在覆盖了编号为0的元素单元的逻辑呈现单元201是高亮逻辑呈现单元时,覆盖了4个元素单元的逻辑呈现主单元202与逻辑呈现单元201呈现相同的节目内容,只是逻辑呈现单元201呈现的是马赛克媒体,而逻辑呈现主单元呈现的是原始媒体。可以理解的是,逻辑呈现主单元202与高亮逻辑呈现单元201也可以呈现不同的节目内容,例如可以将重点推荐的节目内容呈现在逻辑呈现主单元,以便于引起用户的关注。
为了在逻辑呈现主单元呈现高亮逻辑呈现单元的原始媒体,DASH client还可以执行如下的流程:
根据MPD文件对高亮逻辑呈现单元的原始媒体的描述,从MBMS client获取高亮逻辑呈现单元的原始媒体;
根据MPD文件对逻辑呈现主单元的位置的描述,在逻辑呈现主单元的位置呈现高亮逻辑呈现单元的原始媒体。
其中,逻辑呈现主单元可以由MPD文件中的呈现信息属性/元素来描述。例如,呈现信息属性/元素的取值为Main_video时表示对应的逻辑呈现单元为逻辑呈现主单元。可以理解的是,呈现信息属性/元素的取值是可以预先约定好的,例如还可以在呈现信息属性/元素的取值为Main时表示表示对应的逻辑呈现单元为逻辑呈现主单元。
在本发明的实施例中,如果逻辑呈现主单元呈现单独的节目内容,逻辑呈现主单元的马赛克媒体的获取过程与非逻辑呈现主单元的马赛克媒体的获取过程相同,不再赘述。
用户在浏览了马赛克业务的逻辑呈现单元后,如果对某个逻辑呈现单元比较感兴趣,则可以选择该逻辑呈现单元进行呈现,因此在本发明的另一个实施例中,DASH client还可以执行如下的流程:
根据MPD文件对被选择的逻辑呈现单元的原始媒体的描述,从MBMS client获取被选择的逻辑呈现单元的原始媒体;呈现被选择的逻辑呈现单元的原始媒体。
其中,被选择的逻辑呈现单元可以可以采用全屏呈现等方式进行呈现,同时退出马赛克业务。逻辑呈现单元的原始媒体可以由MPD文件中的原始媒体属性/元素来描述。具体地,该原始媒体属性/元素可以通过描述原始媒体的MPD获取地址来描述媒体呈现单元的原始媒体。
在本发明的实施例中,马赛克业务可以由MPD文件的马赛克元素/属性来指定。例如,只要MPD文件中包含了马赛克描述子DASH client就可以确定该MPD文件描述的是马赛克业务。
在本发明的实施例中,描述马赛克业务的MPD文件可以包括如下属性/元素中的至少一个:
用于描述逻辑呈现单元数量的逻辑呈现单元数量属性/元素;
用于描述水平元素单元数量的水平元素单元数量属性/元素;
用于描述垂直元素单元数量的垂直元素单元数量属性/元素;
用于描述逻辑呈现单元的信息的逻辑呈现单元属性/元素,所述媒体呈现描述文件中的逻辑呈现单元元素的数量可以等于所述逻辑呈现单元数量;例如,在逻辑呈现单元包括了逻辑呈现主单元时,逻辑呈现单元元素/属性的数量可以小于逻辑呈现单元数量,此时逻辑呈现主单元可以作为一个单独的描述子(Descriptor)来描述;在在逻辑呈现单元没有包括逻辑呈现主单元时或者包括了逻辑呈现主单元时,逻辑呈现单元元素的数量可以等于逻辑呈现单元数量;
用于描述逻辑呈现单元标识的逻辑呈现单元标识属性/元素;
用于描述逻辑呈现单元的呈现位置的逻辑呈现单元呈现位置属性/元素;
用于描述逻辑呈现单元的呈现类型的呈现信息属性/元素;
用于描述逻辑呈现单元的马赛克媒体的马赛克媒体链接属性/元素;用于描述逻辑呈现单元的马赛克音频的马赛克音频链接属性/元素;
用于描述逻辑呈现单元的马赛克视频的马赛克视频链接属性/元素;
用于描述逻辑呈现单元的原始媒体的原始媒体属性/元素。
可以理解的是,描述马赛克业务的MPD文件包括的属性/元素可以根据需要进行调整和组合。例如,在预先约定好元素单元的数量时,则MPD文件可以不包括用于描述水平元素单元数量的水平元素单元数量属性/元素和用于描述垂直元素单元数量的垂直元素单元数量属性/元素。所以上述MPD文件可以包含的属性/元素仅仅是用于举例,并不构成对MPD文件所包括的属性/元素的限制。对于服务器通过编码方式拼合成一路画面的情况下,所有的马赛克逻辑单元呈现内容通过编码方式拼合到一个码流中,此时马赛克子频道的视频码流集合只有一个,马赛克媒体链接属性/元素不需要进行赋值或者可以不包含该属性/元素。
本发明一个实施例提供的MPD文件所包含的元素/属性可以如表1所示。
表1
Figure GDA0002146502630000101
Figure GDA0002146502630000111
Figure GDA0002146502630000121
在表1中,元素Mosaic是马赛克描述子,DASH client可以根据该描述子确定该MPD文件描述的是马赛克业务。用于描述逻辑呈现单元数量的逻辑呈现单元数量属性是cellNum属性。用于描述水平元素单元数量的水平元素单元数量属性是helementaryCells属性。用于描述垂直元素单元数量的垂直元素单元数量属性/元素是velementaryCells属性。用于描述逻辑呈现单元的信息的逻辑呈现单元属性/元素是logicalCell元素,其中MPD文件中的逻辑呈现单元元素的数量可以等于所述逻辑呈现单元数量,也可以小于逻辑呈现单元数量。用于描述逻辑呈现单元标识的逻辑呈现单元标识属性/元素是id属性。用于描述逻辑呈现单元的呈现位置的逻辑呈现单元呈现位置属性/元素是elemtaryCells属性。用于描述逻辑呈现单元的呈现类型的呈现信息属性/元素是PresentationInfo属性。用于描述逻辑呈现单元的马赛克媒体的马赛克媒体链接属性/元素是videoRep属性。用于描述逻辑呈现单元的马赛克音频的马赛克音频链接属性/元素是voiceLink属性。用于描述逻辑呈现单元的马赛克视频的马赛克视频链接属性/元素是videoLink属性。用于描述逻辑呈现单元的原始媒体的原始媒体属性/元素是originalService属性。
在本发明的实施例中,对于Mosaic MPD,在DASH client的屏幕上需要同时呈现至少两个逻辑呈现单元的马赛克视频和高亮逻辑呈现单元的马赛克音频,其中各个逻辑呈现单元的马赛克视频放在单独的AdaptationSet中,即逻辑呈现单元的马赛克视频和AdaptationSet是一一对应的,一个逻辑呈现单元的马赛克视频可以有一个或者多个representation,该多个representation放在一个AdaptationSet中;各个逻辑呈现单元的马赛克音频也可以放在单独的AdaptationSet中,即逻辑呈现单元的马赛克音频和AdaptationSet是一一对应的,当然,马赛克业务所有逻辑呈现单元的马赛克音频也可以放在一个AdaptationSet中,此时所有的马赛克音频对应的是同一个AdaptationSet,在这种情况下,马赛克MPD文件可以使用AdaptationSet.representation@id来描述对应逻辑呈现单元的马赛克音频。
如果用户希望在屏幕中设置一个比较大的逻辑呈现单元来呈现高亮子频道单元对应的原始媒体,简称该逻辑呈现单元为逻辑呈现主单元,此时各个逻辑呈现单元对应的原始媒体符合播放条件的representation可以聚集到一个单独的AdaptationSet中。逻辑呈现主单元的id可以用一个指定的标识,例如可以用“main”来标识。逻辑呈现主单元呈现的音频对应于高亮逻辑呈现单元的音频,具体可以由高亮逻辑呈现单元的voiceLink属性来指定。逻辑呈现主单元呈现的视频对应于高亮逻辑呈现单元的原始视频,具体可以由高亮逻辑呈现单元的videoLink来指定。
其中,马赛克MPD描述逻辑呈现单元的原始媒体可以有两种实现方式:与逻辑呈现单元在相同MPD中描述的原始媒体的可以通过马赛克MPD中的videoLink属性来描述,与逻辑呈现单元在不同MPD中描述的原始媒体可以通过马赛克MPD中的originalService属性来描述。
在马赛克MPD中没有描述逻辑呈现单元对应原始媒体时,则可以不使用videoLink属性。可以理解的是,马赛克MPD中的videoLink属性和originalService属性可以合并成一个,具体是否合并取决于具体实现。
videoLink属性也可以用于描述逻辑呈现单元关联的其他视频媒体。
图3描述的是本发明一个实施例通过的马赛克业务分发方法的流程,该实施例描述的是MBMS client的处理流程包括:
301、接收描述马赛克业务的马赛克用户服务描述(USD:User ServiceDescription),该马赛克USD描述了马赛克业务的逻辑呈现单元对应的马赛克媒体。
马赛克USD可以包括各个逻辑呈现单元的对应马赛克媒体的描述。例如,在本发明的一个实施例中,马赛克USD可以包括有deliveryMethod元素,该元素包括一个或多个r12:broadcastAppService实例,一个r12:broadcastAppService实例代表一个广播流呈现(representation),一个r12:broadcastAppService实例就对应一个逻辑呈现单元。还可以包括一个或者多个r12:unicastAppService实例,一个r12:unicastAppService实例代表一个单播流显现(representation),一个r12:unicastAppService实例就对应一个逻辑呈现单元。
其中,马赛克业务可以由马赛克USD中的马赛克业务指示来指定。例如,在本发明的一个实施例中,马赛克USD包括有userServiceDescription元素,该元素的serviceclass属性的取值可以为mosaic,从而指示该USD是描述马赛克业务的马赛克USD。
302、接收来自广播多播服务器(BM-SC)的马赛克USD描述的马赛克业务的逻辑呈现单元对应的马赛克媒体。
MBMS client可以被动地接收马赛克业务的逻辑呈现单元对应的马赛克媒体,也可以根据马赛克USD主动地获取马赛克业务的逻辑呈现单元对应的马赛克媒体。
303、接收来自DASH client的用于获取马赛克媒体的马赛克媒体获取请求,该马赛克媒体获取请求包括马赛克业务对应的MPD文件描述的马赛克媒体获取地址。
马赛克媒体具体可以是马赛克视频,或马赛克音频,或马赛克视频和音频,或马赛克文本等。马赛克媒体获取地址具体可以是segment URL。
304、根据马赛克媒体获取地址匹配出马赛克USD描述的马赛克媒体内容标识。
MBMS client具体可以根据segment URL匹配出马赛克USD描述的马赛克媒体内容标识。例如,在本发明的一个实施例中,MBMS client可以根据segment URL匹配出r12:broadcastAppService实例或r12:unicastAppService实例中的basePattern属性,从而根据该basePattern属性确定对应的马赛克媒体。
305、向所述DASH client发送与马赛克媒体内容标识对应的马赛克媒体。
从上可知,本实施例中马赛克USD文件描述了马赛克业务的逻辑呈现单元的马赛克媒体,因此在接收到DASH client的马赛克媒体获取请求后,MBMS client可以根据马赛克USD文件匹配出DASH client请求获取的逻辑呈现单元的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的马赛克媒体由马赛克USD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
在本发明的另一个实施例中,MBMS client还可以执行如下流程:
接收逻辑呈现单元对应的原始媒体USD,该原始媒体USD描述对应的逻辑呈现单元的原始媒体,原始媒体USD和逻辑呈现单元是一一对应的;其中,原始媒体具体可以是原始视频,或原始音频,或原始视频和音频,或原始文本等。原始媒体获取地址具体可以是segment URL。
接收来自广播多播服务器的原始媒体USD所描述的逻辑呈现单元的原始媒体。
接收来自DASH client的用于获取原始媒体的原始媒体获取请求,该原始媒体获取请求包括MPD文件描述的原始媒体获取地址。
具体可以根据原始媒体获取地址匹配出原始媒体USD描述的原始媒体标识;其中,MBMS client具体可以根据segment URL匹配出原始媒体USD描述的原始媒体内容标识。例如,在本发明的一个实施例中,MBMS client可以根据segment URL匹配出r12:broadcastAppService实例或r12:unicastAppService实例中的basePattern属性,从而根据该basePattern属性确定对应的原始媒体。
向DASH client发送与原始媒体标识对应的原始媒体。
在本发明的一个实施例中,原始媒体USD和马赛克USD可以属于同一个USDbundle。可以理解的是,原始媒体USD和马赛克USD也可以属于不同的USD bundle。
在本发明的实施例中,DASH client获取的马赛克USD是从MBMS client获取的。在一种实现方式中,马赛克USD包括了对应的马赛克MPD文件的标识,则MBMS client可以根据该马赛克MPD文件的标识获取对应的马赛克MPD文件,并将获取到的马赛克MPD文件发送给DASH client。在另一种实现方式中,马赛克USD可以包括mediaPresentationDescription元素,该元素可以包括与MPD文件数据结构相同的Media Presentation Descriptionmetadata fragment的引用,即该Media Presentation Description metadata fragment的数据结构可以与对应的马赛克MPD文件相同,也就是说马赛克USD可以包括对应的马赛克MPD文件的所有的元素/属性,在这种情况下,MBMS client可以直接根据马赛克USD中mediaPresentationDescription元素/属性生成对应的马赛克MPD文件,并将生成的马赛克MPD文件发送给DASH client。可以理解的是,DASH client可以主动地向MBMS client请求马赛克MPD文件,此时MBMS client要在接收到DASH client的请求后才获取或生成马赛克MPD文件;当然,MBMS client也可以主动的生成或获取马赛克MPD文件,在接收到DASHclient的请求后可以直接发送。DASH client也可以被动地接收MBMS client发送的马赛克MPD文件。
图4描述了本发明一个实施例提供的马赛克业务呈现方法的流程,该实施例描述的是马赛克音频和马赛克视频存放在相同的representation中的情况。如图4所示,该实施例包括:
401、DASH client获取马赛克MPD文件,该马赛克MPD包括的参数可以如表2所示,其中各个logicalCell的PresentationInfo取值均为”video”表示没有逻辑呈现主单元。
表2
Figure GDA0002146502630000151
Figure GDA0002146502630000161
表2包括能够呈现逻辑呈现单元的数量及逻辑呈现单元的呈现位置的描述,还描述了各个逻辑呈现单元的呈现类型,各个逻辑呈现单元的马赛克视频,马赛克音音视频和原始媒体。
402、原始媒体和马赛克媒体传输流程。在该流程中,MBMS Client接收到USDbundle(包括原始媒体USD和Mosaic USD)的中deliveryMethod元素的所有r12:broadcastAppService实例描述的原始媒体和马赛克媒体被传输到MBMS Clinet,原始媒体和马赛克媒体的DASH分片可以作为FLUTE Object传输到MBMS client。
在这个流程中,涉及到的网元包括MBMS Client,E-UTRAN/UTRAN,MME/SGSN,MBMSGW,BM-SC&HTTP Server,具体过程可以参考现有的流程,本发明实施例不做详细描述。
403、马赛克媒体获取。DASH Client根据Mosaic MPD的描述信息,从MBMS Client获取Mosaic业务需要的马赛克媒体,马赛克媒体具体可以以DASH分片的方式从MBMSclient传输到DASH client。
404、马赛克业务呈现。DASH client可以根据mosaic MPD的描述在逻辑呈现单元的呈现位置呈现对应的马赛克媒体。其中,DASH client在呈现马赛克业务时,默认左上角的逻辑呈现单元为高亮逻辑呈现单元。
从上可知,本实施例中马赛克MPD文件描述了马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体,因此DASH client在获取了马赛克MPD后,可以根据马赛克MPD的描述获取逻辑呈现单元的马赛克媒体,并在马赛克MPD描述的呈现位置呈现对应的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体由马赛克MPD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
图5描述了本发明一个实施例提供的马赛克业务呈现方法的流程,该实施例描述的是马赛克音频和马赛克视频存放在不同的representation中的情况。如图5所示,该实施例包括:
501、DASH client获取马赛克MPD文件,该马赛克MPD包括的参数可以如表3所示,其中各个logicalCell的PresentationInfo取值均为”video”表示没有逻辑呈现主单元。
表3
Figure GDA0002146502630000171
如表3所示,videoRep元素的取值为逻辑呈现单元对应的视频representation,并通过voiceLink属性描述逻辑呈现单元对应的马赛克音频,通过originalService属性描述逻辑呈现单元对应的原始媒体。
502、原始媒体和马赛克媒体传输流程。在该流程中,MBMS Client接收到USDbundle(包括原始媒体USD和Mosaic USD)的中deliveryMethod元素的所有r12:broadcastAppService实例描述的原始媒体和马赛克媒体被传输到MBMS Clinet,原始媒体和马赛克媒体的DASH分片可以作为FLUTE Object传输到MBMS client。
在这个流程中,涉及到的网元包括MBMS Client,E-UTRAN/UTRAN,MME/SGSN,MBMSGW,BM-SC&HTTP Server,具体过程可以参考现有的流程,本发明实施例不做详细描述。
503、马赛克媒体获取。DASH Client根据Mosaic MPD的描述信息,从MBMS Client获取Mosaic业务需要的马赛克媒体,马赛克媒体具体可以以DASH分片的方式从MBMSclient传输到DASH client。
504、马赛克业务呈现。在呈现过程中,用户可以切换高亮逻辑呈现单元,DASHclient请求各个媒体呈现单元的马赛克媒体,并根据mosaicMPD对高亮逻辑呈现单元的马赛克音频的描述获取高亮逻辑呈现单元的马赛克音频。其中,在呈现过程中,始终播放高亮逻辑呈现单元的马赛克音频。
505、原始媒体和马赛克媒体获取。MBMS Client离开广播环境后停止获取马赛克业务的马赛克媒体,这种情况下DASH client获取到的马赛克媒体和原始媒体是直接从MBMS client获取的。
具体地,MBMS client可以通知DASH client当前网络传输方式变化,由DASHclient根据马赛克MPD和原始媒体MPD的描述直接从单播MBMS client(PSS Server&HTTPServer)获取马赛克媒体和原始媒体。当然,MBMS也可以不通知DASH client当前网络传输方式变化,只是在后续的过程中将接收到的马赛克媒体获取请求和原始媒体获取请求重定向到单播MBMS client。
506、原始媒体呈现。用户选择被选择的逻辑呈现单元。DASH Client根据MosaicMPD中逻辑呈现单元的描述信息中原始媒体属性的描述向MBMS client请求原始媒体MPD,并根据原始媒体MPD的描述从MBMS client获取原始媒体并呈现。
从上可知,本实施例中马赛克MPD文件描述了马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体,因此DASH client在获取了马赛克MPD后,可以根据马赛克MPD的描述获取逻辑呈现单元的马赛克媒体,并在马赛克MPD描述的呈现位置呈现对应的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体由马赛克MPD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
图6描述了本发明一个实施例提供的马赛克业务呈现方法的流程,该实施例描述的是马赛克音频和马赛克视频存放在不同的representation中的情况。如图6所示,该实施例包括:
601、DASH client获取马赛克MPD文件,该马赛克MPD包括的参数可以如表4所示。
表4
Figure GDA0002146502630000191
Figure GDA0002146502630000201
其中,逻辑呈现单元的logicalCell属性的PresentationInfo属性取值均为video,videoRep属性的取值为逻辑呈现单元呈现的马赛克视频representation;voiceLink属性的取值为逻辑呈现单元对应的马赛克音频,只有一个逻辑呈现单元是高亮逻辑呈现单元时,该逻辑呈现单元的马赛克音频才会被播放,videoLink属性为逻辑呈现单元的原始媒体representation,在一个逻辑呈现单元是高亮逻辑呈现单元时,逻辑呈现主单元呈现的是高亮逻辑呈现单元的原始媒体。
逻辑呈现主单元的logicalCell属性的PresentationInfo属性的取值均为main_video,videoRep属性的取值可以是预先谁的能够的特殊标识符,例如Main,逻辑呈现主单元呈现的是当前高亮逻辑呈现单元原始媒体;逻辑呈现主单元元素可以不包括voiceLink属性和videoLink属性。
602、原始媒体和马赛克媒体传输流程。在该流程中,MBMS Client接收到USDbundle(包括原始媒体USD和Mosaic USD)的中deliveryMethod元素的所有r12:broadcastAppService实例描述的原始媒体和马赛克媒体被传输到MBMS Clinet,原始媒体和马赛克媒体的DASH分片可以作为FLUTE Object传输到MBMS client。
在这个流程中,涉及到的网元包括MBMS Client,E-UTRAN/UTRAN,MME/SGSN,MBMSGW,BM-SC&HTTP Server,具体过程可以参考现有的流程,本发明实施例不做详细描述。
603、马赛克媒体获取。DASH Client根据Mosaic MPD的描述信息,从MBMS Client获取Mosaic业务需要的马赛克媒体,马赛克媒体具体可以以DASH分片的方式从MBMSclient传输到DASH client。
604、马赛克业务呈现。在呈现过程中,用户可以切换高亮逻辑呈现单元,DASHclient请求各个媒体呈现单元的马赛克媒体,并根据mosaicMPD对高亮逻辑呈现单元的马赛克音频的描述获取高亮逻辑呈现单元的马赛克音频。其中,在呈现过程中,始终播放高亮逻辑呈现单元的马赛克音频。
605、逻辑呈现主单元的呈现。DASH Clinet根据MosaicMPD的描述,获取高亮逻辑呈现单元的原始媒体,在逻辑呈现主单元的呈现位置呈现该高亮逻辑呈现单元的原始媒体。
可以理解的是,604和605在执行顺序上并没有先后,也可以同时执行。
606、原始媒体呈现。用户选择被选择的逻辑呈现单元。DASH Client根据MosaicMPD中逻辑呈现单元的描述信息中原始媒体属性的描述向MBMS client请求原始媒体MPD,并根据原始媒体MPD的描述从MBMS client获取原始媒体并呈现。
从上可知,本实施例中马赛克MPD文件描述了马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体,因此DASH client在获取了马赛克MPD后,可以根据马赛克MPD的描述获取逻辑呈现单元的马赛克媒体,并在马赛克MPD描述的呈现位置呈现对应的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体由马赛克MPD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
如下再描述本发明实施例提供的马赛克业务呈现装置和马赛克业务分发装置,其中马赛克业务呈现装置可以是DASH client,其具体可以是个人电脑,手机,平板电脑,电视机或机顶盒等可以作为DASH client的设备。马赛克业务分发设备可以是MBMS client,其具体可以是提供马赛克业务的任何设备,如个人电脑,手机或平板电脑等。
图7描述了本发明一个实施例提供的马赛克业务呈现装置的结构,如图1所示,该马赛克业务呈现装置700包括:
接收单元701,用于接收描述马赛克业务的媒体呈现描述文件,该媒体呈现描述文件描述了马赛克业务的逻辑呈现单元的呈现位置,以及逻辑呈现单元的马赛克媒体;接收MBMS client发送的逻辑呈现单元的马赛克媒体。
其中,逻辑呈现单元的数量为至少两个,每一个逻辑呈现单元都有对应的马赛克媒体。一般来说,一个逻辑呈现单元对应一个马赛克业务的子频道,即逻辑呈现单元和子频道是一一对应的;但是也可以是两个或两个以上的逻辑呈现单元对应同一个子频道,例如在上述的至少两个逻辑呈现单元包括了逻辑呈现主单元时,逻辑呈现主单元可以与另一个逻辑呈现单元对应同一个子频道。
马赛克业务呈现装置可以根据MPD文件中的马赛克元素/属性来确定MPD描述的是马赛克业务,即马赛克业务由MPD文件的马赛克元素/属性来指定。例如,可以在MPD文件中增加一个马赛克描述子(Mosaic Descriptor)来在MPD文件描述中增加马赛克业务业务的描述,该马赛克描述子可以作为MPD文件的一个元素(element)。需要说明的是,本发明实施例中的元素/属性表示的是元素或属性,例如“马赛克元素/属性”表示的是“马赛克元素或马赛克属性”。
马赛克业务的逻辑呈现单元的呈现位置可以由MPD文件中的逻辑呈现单元呈现位置属性/元素来描述,例如,可以预先约定好马赛克业务中各个逻辑呈现单元的编号及位置,则逻辑呈现单元呈现位置属性/元素只需要描述逻辑呈现单元的编号呈现单元703就可以确定逻辑呈现单元的位置。也可以预先约定好马赛克业务所划分的元素单元的数量以及编号,则逻辑呈现单元呈现位置属性/元素可以通过描述逻辑呈现单元所覆盖的元素单元的编号来描述逻辑呈现单元的呈现位置,可以理解的是,马赛克业务所划分的元素单元的数量也可以在MPD文件中指定。
其中,逻辑呈现单元的马赛克媒体可以由媒体呈现描述文件中的马赛克媒体链接属性/元素来描述;具体地,马赛克媒体链接属性/元素可以通过描述马赛克媒体对应的自适应马赛克媒体集合的标识来描述逻辑呈现单元的马赛克媒体,例如可以将马赛克媒体链接属性/元素的值取为AdaptationSet.representation@id或者包含多个AdaptationSet.representation@id的列表或者AdaptationSet@id,AdaptationSet是同一个节目的自适应内容的呈现码流集合,其中可以包括该节目对应的一个或者多个不同码率的马赛克媒体,AdaptationSet.representation@id表示的是一个自适应内容的呈现码流的标识,这个自适应内容的呈现码流是该节目对应的某个码率的马赛克媒体。当然,马赛克媒体链接属性/元素也可以通过描述马赛克媒体的获取地址来描述逻辑呈现单元的马赛克媒体。其中,马赛克媒体可以是马赛克视频,或马赛克视频和音频,或马赛克文本等。
发送单元702,用于根据接收单元701接收的媒体呈现描述文件对逻辑呈现单元的马赛克媒体的描述,向MBMS client发送获取逻辑呈现单元的马赛克媒体的马赛克媒体获取请求。
在马赛克媒体链接属性/元素描述的是马赛克媒体的获取地址时,DASH client可以在马赛克媒体获取请求中携带该马赛克媒体的获取地址,使得媒体服务器可以根据该马赛克媒体的获取地址确定以及向DASH client返回所对应的马赛克媒体,其中获取地址具体可以是segment URL。在马赛克媒体链接属性/元素描述的是AdaptationSet.@id或者多个AdaptationSet.representation@id构成的列表时,DASH client可以先根据硬件能力,系统设置和网络环境等因素从自适应呈现内容集合所包括的至少两个不同码率的马赛克媒体中选择一个适合的马赛克媒体,在马赛克媒体获取请求中携带该选择的马赛克媒体的获取地址,使得媒体服务器可以根据该马赛克媒体的获取地址确定以及向DASH client返回所对应的马赛克媒体。在马赛克媒体链接属性/元素描述的是AdaptationSet.representation@id时,DASH client在马赛克媒体获取请求中携带该马赛克媒体码流对应分片的获取地址,使得媒体服务器可以根据该马赛克媒体的获取地址确定以及向DASH client返回所对应的马赛克媒体。其中,DASH client从媒体服务器获取的马赛克媒体具体可以是马赛克媒体分片(segment)。
呈现单元703,用于根据接收单元701接收的媒体呈现描述文件对逻辑呈现单元的呈现位置的描述,在逻辑呈现单元的呈现位置呈现接收单元701接收的马赛克媒体。
在逻辑呈现单元呈现位置属性/元素描述的是逻辑呈现单元的编号时,呈现单元703可以将获取的马赛克媒体呈现在逻辑呈现单元的编号对应的位置;在逻辑呈现单元呈现位置属性/元素描述的是逻辑呈现单元所覆盖的元素单元的编号时,呈现单元703可以将获取的马赛克媒体呈现在元素单元的编号对应的位置。例如,元素单元以左上角单元为起点从左到右从上到下递增进行编号,左上角元素单元编号为0,一个逻辑呈现单元可以覆盖一个元素单元,也可以覆盖相邻的至少两个元素单元,并且不同的逻辑呈现单元所覆盖的元素单元的数量可以不一样。
从上可知,本实施例中马赛克MPD文件描述了马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体,因此DASH client在获取了马赛克MPD后,可以根据马赛克MPD的描述获取逻辑呈现单元的马赛克媒体,并在马赛克MPD描述的呈现位置呈现对应的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体由马赛克MPD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
可以理解的是,接收单元701接收的逻辑呈现单元的马赛克媒体可以是视频,音频,视频和音频合一,文本等。
在一种可能的情况下,接收单元701接收的逻辑呈现单元的马赛克媒体是视频和音频合一的,则呈现单元703可以直接播放至少两个逻辑呈现单元中的高亮(highlight)逻辑呈现单元的音频。其中,高亮逻辑呈现单元是指的在马赛克业务的呈现用户界面上显示的多个逻辑呈现单元中被用户所选择的那一个逻辑呈现单元,在显示方式上,该高亮逻辑呈现单元采用与其余非高亮逻辑呈现单元不同的呈现方式,使得能够很轻易地看出来哪一个逻辑呈现单元是高亮逻辑呈现单元。
在另一种可能的情况下,接收单元701接收的逻辑呈现单元的马赛克媒体可能仅包括了视频,则为了能够播放高亮逻辑呈现单元的音频,发送单元702,还可以用于根据接收单元701接收的媒体呈现描述文件对高亮逻辑呈现单元马赛克音频的描述,向MBMSclient发送请求获取高亮逻辑呈现单元的马赛克音频的马赛克音频获取请求;接收单元701,还用于接收MBMS client发送的高亮逻辑呈现单元的马赛克音频;呈现单元703,还用于播放接收单元701接收的高亮逻辑呈现单元的马赛克音频。
其中,高亮逻辑呈现单元的马赛克音频可以由MPD文件中的马赛克音频链接属性/元素来描述。具体地,马赛克音频链接属性/元素可以通过描述马赛克媒体对应的自适应马赛克音频集合的标识来描述逻辑呈现单元的马赛克音频,例如可以将马赛克音频链接属性/元素的值取为AdaptationSet.representation@id,AdaptationSet.representation@id表示的是一个自适应内容的呈现码流集合中一个呈现码流的标识,这个自适应内容的呈现码流集合中包括至少两个不同码率的马赛克音频,该至少两个不同码率的马赛克音频对应的是同一个节目,也可以对应对应不同的节目。当然,马赛克媒体链接属性/元素也可以通过描述马赛克音频的获取地址来描述逻辑呈现单元的马赛克音频。例如,在马赛克业务的所有逻辑呈现单元的马赛克音频放在一个AdaptationSet中时,马赛克音频连接属性/元素的取值可以为AdaptationSet representation@id,即直接指定了一个逻辑呈现单元对应的是adaptationSet中的哪一个呈现码流,则DASH client可以根据AdaptationSetrepresentation@id获取到对应的马赛克音频。
在马赛克音频链接属性/元素描述的是马赛克音频的获取地址时,发送单元702可以在马赛克音频获取请求中携带该马赛克音频的获取地址,使得MBMS client可以根据该马赛克音频的获取地址确定以及向马赛克业务呈现装置返回所对应的马赛克音频。在马赛克音频链接属性/元素描述的是AdaptationSet@id时,马赛克业务呈现装置可以先根据硬件能力,系统设置和网络环境等因素从自适应内容的呈现码流集合所包括的至少两个不同码率的马赛克音频中选择一个适合的马赛克音频,在马赛克音频获取请求中携带该选择的马赛克音频的获取地址,使得MBMS client可以根据该马赛克音频的获取地址确定以及向马赛克业务呈现装置返回所对应的马赛克音频。其中,接收单元701接收的马赛克音频具体可以是马赛克音频分片(segment)。可以理解的是,马赛克业务呈现装置可以只从MBMSclient获取高亮逻辑呈现单元对应的马赛克音频,从而减少从MBMS client获取的数据量;马赛克业务呈现装置也可以从MBMS client获取所有逻辑呈现单元的马赛克音频,从而避免在用户切换高亮逻辑呈现单元时可能会产生的音频播放的中断。
在马赛克音频链接属性/元素的取值为AdaptationSet representation@id时,则DASH client可以只获取高亮逻辑呈现单元对应的马赛克音频。
其中,高亮逻辑呈现单元的马赛克音频可以由MPD文件中的马赛克音频链接属性/元素来描述。具体地,马赛克音频链接属性/元素可以通过描述马赛克媒体对应的自适应马赛克音频集合的标识来描述逻辑呈现单元的马赛克音频,例如可以将马赛克音频链接属性/元素的值取为AdaptationSet.representation@id或者包含多个AdaptationSet.representation@id的列表,AdaptationSet.representation@id表示的是一个自适应内容的呈现码流的标识,当包含多个AdaptationSet.representation@id的列表时,表示该逻辑单元的音频内容包括至少两个不同的马赛克音频码流,该至少两个不同的马赛克音频对应的是同一个节目。当然,马赛克媒体链接属性/元素也可以通过描述马赛克音频的获取地址来描述逻辑呈现单元的马赛克音频。
其中,在马赛克音频链接属性/元素描述的是马赛克音频的获取地址时,DASHclient可以在马赛克音频获取请求中携带该马赛克音频的获取地址,使得媒体服务器可以根据该马赛克音频的获取地址确定以及向DASH client返回所对应的马赛克音频。在马赛克音频链接属性/元素描述的是AdaptationSet.representation@id列表时,DASH client可以先根据硬件能力,系统设置和网络环境等因素从自适应呈现内容集合所包括的至少两个不同的马赛克音频中选择一个适合的马赛克音频,在马赛克音频获取请求中携带该选择的马赛克音频的获取地址,使得媒体服务器可以根据该马赛克音频的获取地址确定以及向DASH client返回所对应的马赛克音频。在马赛克音频链接属性/元素描述的是AdaptationSet.representation@id时,DASH client在马赛克音频获取请求中携带该选择的马赛克音频的获取地址,使得媒体服务器可以根据该马赛克音频的获取地址确定以及向DASH client返回所对应的马赛克音频。其中,DASH client从媒体服务器获取的马赛克音频具体可以是马赛克音频分片(segment)。可以理解的是,DASH client可以只从媒体服务器获取高亮逻辑呈现单元对应的马赛克音频,从而减少从媒体服务器获取的数据量;DASHclient也可以从媒体服务器获取所有逻辑呈现单元的马赛克音频,从而避免在用户切换高亮逻辑呈现单元时可能会产生的音频播放的中断。
在本发明的另一个实施例中,马赛克业务的至少两个逻辑呈现单元包括了一个逻辑呈现主单元,该逻辑呈现主单元需要呈现高亮逻辑呈现单元的原始媒体,其中原始媒体可以是原始视频,或原始视频和音频,或原始文本等。其中,发送单元702,还可以用于根据媒体呈现描述文件对高亮逻辑呈现单元的原始媒体的描述,向MBMS client发送请求获取高亮逻辑呈现单元的原始媒体的原始媒体获取请求;接收单元701,还可以用于接收MBMSclient的所述高亮逻辑呈现单元的原始媒体;呈现单元703,还可以用于根据媒体呈现描述文件对逻辑呈现主单元的位置的描述,在逻辑呈现主单元的位置呈现接收单元701接收的高亮逻辑呈现单元的原始媒体。
其中,逻辑呈现主单元可以由MPD文件中的呈现信息属性/元素来描述。例如,呈现信息属性/元素的取值为Main_video时表示对应的逻辑呈现单元为逻辑呈现主单元。可以理解的是,呈现信息属性/元素的取值是可以预先约定好的,例如还可以在呈现信息属性/元素的取值为Main时表示表示对应的逻辑呈现单元为逻辑呈现主单元。
用户在浏览了马赛克业务的逻辑呈现单元后,如果对某个逻辑呈现单元比较感兴趣,则可以选择该逻辑呈现单元进行呈现,因此在本发明的另一个实施例中,发送单元702,还可以用于根据媒体呈现描述文件对被选择的逻辑呈现单元的原始媒体的描述,向MBMSclient获取被选择的逻辑呈现单元的原始媒体的原始媒体获取请求;接收单元701,还可以用于接收MBMS client发送的被选择的逻辑呈现单元的原始媒体;呈现单元703,还可以用于呈现接收单元接收的被选择的逻辑呈现单元的原始媒体。
其中,被选择的逻辑呈现单元的呈现可以可以采用全屏呈现等方式进行呈现,同时退出马赛克业务。逻辑呈现单元的原始媒体可以由MPD文件中的原始媒体属性/元素来描述。具体地,该原始媒体属性/元素可以通过描述原始媒体的MPD获取地址来描述媒体呈现单元的原始媒体。
在本发明的实施例中,马赛克业务可以由MPD文件的马赛克元素/属性来指定。例如,只要MPD文件中包含了马赛克描述子DASH client就可以确定该MPD文件描述的是马赛克业务。
在本发明的实施例中,描述马赛克业务的MPD文件可以包括如下属性/元素中的至少一个:
用于描述逻辑呈现单元数量的逻辑呈现单元数量属性/元素;
用于描述水平元素单元数量的水平元素单元数量属性/元素;
用于描述垂直元素单元数量的垂直元素单元数量属性/元素;
用于描述逻辑呈现单元的信息的逻辑呈现单元属性/元素,所述媒体呈现描述文件中的逻辑呈现单元元素的数量可以或小于等于所述逻辑呈现单元数量;例如,在逻辑呈现单元包括了逻辑呈现主单元时,逻辑呈现单元元素的数量可以小于逻辑呈现单元数量,此时逻辑呈现主单元可以通过单独的描述子来描述;
用于描述逻辑呈现单元标识的逻辑呈现单元标识属性/元素;
用于描述逻辑呈现单元的呈现位置的逻辑呈现单元呈现位置属性/元素;
用于描述逻辑呈现单元的呈现类型的呈现信息属性/元素;
用于描述逻辑呈现单元的马赛克媒体的马赛克媒体链接属性/元素;用于描述逻辑呈现单元的马赛克音频的马赛克音频链接属性/元素;
用于描述逻辑呈现单元的马赛克视频的马赛克视频链接属性/元素;
用于描述逻辑呈现单元的原始媒体的原始媒体属性/元素。
可以理解的是,描述马赛克业务的MPD文件包括的属性/元素可以根据需要进行调整和组合。例如,在预先约定好元素单元的数量时,则MPD文件可以不包括用于描述水平元素单元数量的水平元素单元数量属性/元素和用于描述垂直元素单元数量的垂直元素单元数量属性/元素。所以上述MPD文件可以包含的属性/元素仅仅是用于举例,并不构成对MPD文件所包括的属性/元素的限制。
本发明实施例中装置实施例的具体实现可以参考对应的方法实施例,有一些具体实现过程在装置实施例中不再赘述。
图8描述了本发明实施例提供的马赛克业务分发装置的结构,如图8所示,该装置包括:接收单元802,用于接收描述马赛克业务的马赛克USD,该马赛克USD描述了马赛克业务的逻辑呈现单元对应的马赛克媒体;接收来自广播多播服务器的马赛克USD描述的马赛克业务的逻辑呈现单元对应的马赛克媒体;接收来自DASH client的用于获取马赛克媒体的马赛克媒体获取请求,该马赛克媒体获取请求包括马赛克业务对应的媒体呈现描述文件描述的马赛克媒体获取地址。
马赛克USD可以包括各个逻辑呈现单元的对应马赛克媒体的描述。例如,在本发明的一个实施例中,马赛克USD可以包括有deliveryMethod元素,该元素包括一个或多个r12:broadcastAppService实例,一个r12:broadcastAppService实例代表一个广播流呈现(representation),一个r12:broadcastAppService实例就对应一个逻辑呈现单元。还可以包括一个或者多个r12:unicastAppService实例,一个r12:unicastAppService实例代表一个单播流显现(representation),一个r12:unicastAppService实例就对应一个逻辑呈现单元。
其中,马赛克业务可以由马赛克USD中的马赛克业务指示来指定。例如,在本发明的一个实施例中,马赛克USD包括有userServiceDescription元素,该元素的serviceclass属性的取值可以为mosaic,从而指示该USD是描述马赛克业务的马赛克USD。MBMS client可以被动地接收马赛克业务的逻辑呈现单元对应的马赛克媒体,也可以根据马赛克USD主动地获取马赛克业务的逻辑呈现单元对应的马赛克媒体。马赛克媒体具体可以是马赛克视频,或马赛克音频,或马赛克视频和音频,或马赛克文本等。马赛克媒体获取地址具体可以是segment URL。
匹配单元801,用于根据接收单元802接收的马赛克媒体获取地址匹配出马赛克USD描述的马赛克媒体内容标识。
MBMS client具体可以根据segment URL匹配出马赛克USD描述的马赛克媒体内容标识。例如,在本发明的一个实施例中,MBMS client可以根据segment URL匹配出r12:broadcastAppService实例或r12:unicastAppService实例中的basePattern属性,从而根据该basePattern属性确定对应的马赛克媒体。
发送单元803,用于向DASH client发送与匹配单元801匹配出的马赛克媒体内容标识对应的马赛克媒体。
从上可知,本实施例中马赛克USD文件描述了马赛克业务的逻辑呈现单元的马赛克媒体,因此在接收到DASH client的马赛克媒体获取请求后,MBMS client可以根据马赛克USD文件匹配出DASH client请求获取的逻辑呈现单元的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的马赛克媒体由马赛克USD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
在本发明的另一个马赛克业务分发装置实施例中,接收单元802,还可以用于接收逻辑呈现单元对应的原始媒体USD,该原始媒体USD描述对应的逻辑呈现单元的原始媒体,原始媒体USD和逻辑呈现单元一一对应;接收来自广播多播服务器的原始USD描述的逻辑呈现单元的原始媒体;接收来自DASH client的用于获取原始媒体的原始媒体获取请求,该原始媒体获取请求包括媒体呈现描述文件描述的原始媒体获取地址。匹配单元801,还可以用于根据接收单元802接收的原始媒体获取地址匹配出原始媒体USD描述的原始媒体标识。发送单元803,还可以用于向DASH client发送与匹配单元801匹配出的原始媒体标识对应的原始媒体。
其中,原始媒体具体可以是原始视频,或原始音频,或原始视频和音频,或原始文本等。原始媒体获取地址具体可以是segment URL。匹配单元801具体具体可以根据原始媒体获取地址匹配出原始媒体USD描述的原始媒体标识;其中,MBMS client具体可以根据segment URL匹配出原始媒体USD描述的原始媒体内容标识。例如,在本发明的一个实施例中,MBMS client可以根据segment URL匹配出r12:broadcastAppService实例或r12:unicastAppService实例中的basePattern属性,从而根据该basePattern属性确定对应的原始媒体。
在本发明的一个实施例中,原始媒体USD和马赛克USD可以属于同一个USDbundle。可以理解的是,原始媒体USD和马赛克USD也可以属于不同的USD bundle。
在本发明的一个实施例中,接收单元802接收的马赛克USD包括了媒体呈现描述文件的标识,则马赛克业务分发装置还可以包括获取单元,用于根据接收单元802接收的马赛克USD包括的媒体呈现描述文件的标识,获取媒体呈现描述文件;发送单元803,还可以用于将获取单元获取的媒体呈现描述文件发送给DASH client。
在本发明的一个实施例中,接收单元802接收的马赛克USD包括了媒体呈现描述文件的元素/属性,则马赛克业务分发装置还可以包括生成单元,用于根据接收单元802接收的马赛克USD所包括的媒体呈现描述文件的元素/属性,生成媒体呈现描述文件;发送单元803,还可以用于将生成单元生成的媒体呈现描述文件发送给DASH client。
图9描述了本发明另一个实施例提供的马赛克业务呈现装置的结构,包括至少一个处理器902(例如CPU),至少一个网络接口905或者其他通信接口,存储器906,和至少一个通信总线903,用于实现这些装置之间的连接通信。处理器902用于执行存储器906中存储的可执行模块,例如计算机程序。存储器906可能包含高速随机存取存储器(RAM:RandomAccess Memory),也可能还包括非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。通过至少一个网络接口905(可以是有线或者无线)实现该系统网关与至少一个其他网元之间的通信连接,可以使用互联网,广域网,本地网,城域网等。
在一些实施方式中,存储器906存储了程序9061,程序9061可以被处理器902执行,这个程序包括:接收描述马赛克业务的媒体呈现描述文件,所述媒体呈现描述文件描述了所述马赛克业务的逻辑呈现单元的呈现位置,以及所述逻辑呈现单元的马赛克媒体;根据所述媒体呈现描述文件对所述逻辑呈现单元的马赛克媒体的描述,从MBMS client获取所述逻辑呈现单元的马赛克媒体;根据所述媒体呈现描述文件对所述逻辑呈现单元的呈现位置的描述,在所述逻辑呈现单元的呈现位置呈现所述马赛克媒体。
从上可知,本实施例中马赛克MPD文件描述了马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体,因此DASH client在获取了马赛克MPD后,可以根据马赛克MPD的描述获取逻辑呈现单元的马赛克媒体,并在马赛克MPD描述的呈现位置呈现对应的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的呈现位置以及逻辑呈现单元的马赛克媒体由马赛克MPD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
在另一个实施例中,程序9061还可以包括:根据所述媒体呈现描述文件对高亮逻辑呈现单元马赛克音频的描述,从所述MBMS client获取所述高亮逻辑呈现单元的马赛克音频;播放所述高亮逻辑呈现单元的马赛克音频。
在另一个实施例中,程序9061还可以包括:根据所述媒体呈现描述文件对所述高亮逻辑呈现单元的原始媒体的描述,从所述MBMS client获取所述高亮逻辑呈现单元的原始媒体;根据所述媒体呈现描述文件对所述逻辑呈现主单元的位置的描述,在所述逻辑呈现主单元的位置呈现所述高亮逻辑呈现单元的原始媒体。
在另一个实施例中,程序9061还可以包括:根据所述媒体呈现描述文件对被选择的逻辑呈现单元的原始媒体的描述,从所述MBMS client获取所述被选择的逻辑呈现单元的原始媒体;呈现所述逻辑呈现单元的原始媒体。
图10描述了本发明另一个实施例提供的马赛克业务分发装置的结构,包括至少一个处理器1002(例如CPU),至少一个网络接口1005或者其他通信接口,存储器1006,和至少一个通信总线1003,用于实现这些装置之间的连接通信。处理器1002用于执行存储器1006中存储的可执行模块,例如计算机程序。存储器1006可能包含高速随机存取存储器(RAM:Random Access Memory),也可能还包括非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。通过至少一个网络接口1005(可以是有线或者无线)实现该系统网关与至少一个其他网元之间的通信连接,可以使用互联网,广域网,本地网,城域网等。
在一些实施方式中,存储器1006存储了程序10061,程序10061可以被处理器1002执行,这个程序包括:接收描述马赛克业务的马赛克USD,所述马赛克USD描述了所述马赛克业务的逻辑呈现单元对应的马赛克媒体;接收来自广播多播服务器的所述马赛克USD描述的马赛克业务的逻辑呈现单元对应的马赛克媒体;接收来自DASH client的用于获取马赛克媒体的马赛克媒体获取请求,所述马赛克媒体获取请求包括所述马赛克业务对应的媒体呈现描述文件描述的马赛克媒体获取地址;根据所述马赛克媒体获取地址匹配出所述马赛克USD描述的马赛克媒体内容标识;向所述DASH client发送与所述马赛克媒体内容标识对应的马赛克媒体。
从上可知,本实施例中马赛克USD文件描述了马赛克业务的逻辑呈现单元的马赛克媒体,因此在接收到DASH client的马赛克媒体获取请求后,MBMS client可以根据马赛克USD文件匹配出DASH client请求获取的逻辑呈现单元的马赛克媒体,因此马赛克服务器不需要对各个逻辑呈现单元的马赛克媒体进行合路处理,降低了马赛服务器的计算量,同时由于马赛克业务的逻辑呈现单元的马赛克媒体由马赛克USD进行描述,因此各个逻辑呈现单元需要呈现的内容可以根据需要灵活地进行调整,也提高了马赛克业务呈现的灵活性。
在另一个实施例中,程序10061还可以包括:接收所述逻辑呈现单元对应的原始媒体USD,所述原始媒体USD描述对应的逻辑呈现单元的原始媒体,原始媒体USD和逻辑呈现单元一一对应;接收来自广播多播服务器的所述原始USD描述的逻辑呈现单元的原始媒体;接收来自所述DASH client的用于获取原始媒体的原始媒体获取请求,所述原始媒体获取请求包括媒体呈现描述文件描述的原始媒体获取地址;根据所述原始媒体获取地址匹配出所述原始媒体USD描述的原始媒体标识;向所述DASH client发送与所述原始媒体标识对应的原始媒体。
上述装置和系统内的各模块之间的信息交互、执行过程等内容,由于与本发明方法实施例基于同一构思,具体内容可参见本发明方法实施例中的叙述,此处不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,上述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,上述的存储介质可为磁碟、光盘、只读存储记忆体(ROM:Read-Only Memory)或随机存储记忆体(RAM:RandomAccess Memory)等。
本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (46)

1.一种马赛克业务呈现方法,其特征在于,包括:
接收描述马赛克业务的媒体呈现描述文件,所述媒体呈现描述文件描述了所述马赛克业务的逻辑呈现单元的呈现位置,以及所述逻辑呈现单元的马赛克媒体;
根据所述媒体呈现描述文件对所述逻辑呈现单元的马赛克媒体的描述,从多媒体广播多播业务客户端MBMS client获取所述逻辑呈现单元的马赛克媒体;
根据所述媒体呈现描述文件对所述逻辑呈现单元的呈现位置的描述,在所述逻辑呈现单元的呈现位置呈现所述马赛克媒体。
2.如权利要求1所述的马赛克业务呈现方法,其特征在于,所述马赛克业务的逻辑呈现单元的呈现位置由所述媒体呈现描述文件中的逻辑呈现单元呈现位置属性/元素来描述。
3.如权利要求2所述的马赛克业务呈现方法,其特征在于,所述逻辑呈现单元呈现位置属性/元素通过描述所述逻辑呈现单元所覆盖的元素单元的编号来描述所述马赛克业务的逻辑呈现单元的呈现位置。
4.如权利要求1至3任一所述的马赛克业务呈现方法,其特征在于,所述逻辑呈现单元的马赛克媒体由所述媒体呈现描述文件中的马赛克媒体链接属性/元素来描述。
5.如权利要求4所述的马赛克业务呈现方法,其特征在于,所述马赛克媒体链接属性通过描述所述马赛克媒体对应的自适应马赛克媒体集合的标识来描述所述逻辑呈现单元的马赛克媒体。
6.如权利要求1至3任一所述的马赛克业务呈现方法,其特征在于,所述马赛克媒体仅包括了视频;所述方法还包括:
根据所述媒体呈现描述文件对高亮逻辑呈现单元马赛克音频的描述,从所述MBMSclient获取所述高亮逻辑呈现单元的马赛克音频;
播放所述高亮逻辑呈现单元的马赛克音频。
7.如权利要求6所述的马赛克业务呈现方法,其特征在于,所述高亮逻辑呈现单元的马赛克音频由所述媒体呈现描述文件中的马赛克音频链接属性/元素来描述。
8.如权利要求7所述的马赛克业务呈现方法,其特征在于,所述马赛克音频属性/元素通过描述高亮逻辑呈现单元对应的自适应马赛克音频集合的标识来描述所述高亮逻辑呈现单元的马赛克音频。
9.如权利要求6所述的马赛克业务呈现方法,其特征在于,所述逻辑呈现单元为至少两个,所述至少两个逻辑呈现单元包括逻辑呈现主单元,所述方法还包括:
根据所述媒体呈现描述文件对所述高亮逻辑呈现单元的原始媒体的描述,从所述MBMSclient获取所述高亮逻辑呈现单元的原始媒体;
根据所述媒体呈现描述文件对所述逻辑呈现主单元的位置的描述,在所述逻辑呈现主单元的位置呈现所述高亮逻辑呈现单元的原始媒体。
10.如权利要求9所述的马赛克业务呈现方法,其特征在于,所述逻辑呈现主单元由呈现信息属性/元素来描述。
11.如权利要求10所述的马赛克业务呈现方法,其特征在于,所述呈现信息属性/元素的取值为主视频Main_video时表示对应的逻辑呈现单元为逻辑呈现主单元。
12.如权利要求1至3任一所述的马赛克业务呈现方法,其特征在于,所述方法还包括:从所述MBMS client获取- 被选择的所述 逻辑呈现单元的原始媒体;呈现所述逻辑呈现单元的原始媒体。
13.如权利要求12所述的马赛克业务呈现方法,其特征在于,所述原始媒体由原始媒体属性/元素来描述。
14.如权利要求13所述的马赛克业务呈现方法,其特征在于,所述逻辑呈现单元原始媒体属性/元素通过描述所述原始媒体的媒体呈现描述MPD获取地址来描述所述原始媒体。
15.如权利要求1至3任一所述的马赛克业务呈现方法,其特征在于,所述马赛克业务由所述媒体呈现描述文件的马赛克元素/属性来指定。
16.如权利要求1至3任一所述的马赛克业务呈现方法,其特征在于,所述媒体呈现描述文件包括如下属性/元素中的至少一个:
用于描述逻辑呈现单元数量的逻辑呈现单元数量属性/元素;
用于描述水平元素单元数量的水平元素单元数量属性/元素;
用于描述垂直元素单元数量的垂直元素单元数量属性/元素;
用于描述逻辑呈现单元的信息的逻辑呈现单元属性/元素,所述媒体呈现描述文件中的逻辑呈现单元元素的数量小于或等于所述逻辑呈现单元数量;
用于描述逻辑呈现单元标识的逻辑呈现单元标识属性/元素;
用于描述逻辑呈现单元的呈现位置的逻辑呈现单元呈现位置属性/元素;
用于描述逻辑呈现单元的呈现类型的呈现信息属性/元素;
用于描述逻辑呈现单元的马赛克媒体的马赛克媒体链接属性/元素;用于描述逻辑呈现单元的马赛克音频的马赛克音频链接属性/元素;
用于描述逻辑呈现单元的马赛克视频的马赛克视频链接属性/元素;
用于描述逻辑呈现单元的原始媒体的原始媒体属性/元素。
17.一种马赛克业务分发方法,其特征在于,包括:
接收描述马赛克业务的马赛克用户服务描述USD,所述马赛克USD描述了所述马赛克业务的逻辑呈现单元对应的马赛克媒体;
接收来自广播多播服务器的所述马赛克USD描述的马赛克业务的逻辑呈现单元对应的马赛克媒体;
接收来自超文本传输协议动态自适应流媒体客户端DASH client的用于获取马赛克媒体的马赛克媒体获取请求,所述马赛克媒体获取请求包括所述马赛克业务对应的媒体呈现描述文件描述的马赛克媒体获取地址;
根据所述马赛克媒体获取地址匹配出所述马赛克USD描述的马赛克媒体内容标识;
向所述DASH client发送与所述马赛克媒体内容标识对应的马赛克媒体。
18.如权利要求17所述的马赛克业务分发方法,其特征在于,所述方法还包括:
接收所述逻辑呈现单元对应的原始媒体USD,所述原始媒体USD描述对应的逻辑呈现单元的原始媒体,原始媒体USD和逻辑呈现单元一一对应;
接收来自广播多播服务器的所述原始媒体USD描述的逻辑呈现单元的原始媒体;
接收来自所述DASH client的用于获取原始媒体的原始媒体获取请求,所述原始媒体获取请求包括媒体呈现描述文件描述的原始媒体获取地址;
根据所述原始媒体获取地址匹配出所述原始媒体USD描述的原始媒体标识;
向所述DASH client发送与所述原始媒体标识对应的原始媒体。
19.如权利要求18所述的马赛克业务分发方法,其特征在于,所述原始媒体USD和所述马赛克USD属于同一个用户服务描述包USD bundle。
20.如权利要求17至19任一所述的马赛克业务分发方法,其特征在于,所述马赛克业务由所述马赛克USD中的马赛克业务指示来指定。
21.如权利要求17至19任一所述的马赛克业务分发 方法,其特征在于,所述马赛克USD包括所述媒体呈现描述文件的标识;在接收来自DASH client的用于获取马赛克媒体的马赛克媒体获取请求前,所述方法还包括:
根据所述媒体呈现描述文件的标识获取所述媒体呈现描述文件。
22.如权利要求17至19任一所述的马赛克业务分发 方法,其特征在于,所述马赛克USD包括所述媒体呈现描述文件的元素/属性;在接收来自DASH client的用于获取马赛克媒体的马赛克媒体获取请求前,所述方法还包括:
根据所述马赛克USD包括的所述媒体呈现描述文件的元素/属性生成所述媒体呈现描述文件。
23.一种马赛克业务呈现装置,其特征在于,包括:
接收单元,用于接收描述马赛克业务的媒体呈现描述文件,所述媒体呈现描述文件描述了所述马赛克业务的逻辑呈现单元的呈现位置,以及所述逻辑呈现单元的马赛克媒体;接收多媒体广播多播业务客户端MBMS client发送的所述逻辑呈现单元的马赛克媒体;
发送单元,用于根据所述接收单元接收的媒体呈现描述文件对所述逻辑呈现单元的马赛克媒体的描述,向所述MBMS client发送获取所述逻辑呈现单元的马赛克媒体的马赛克媒体获取请求;
呈现单元,用于根据所述接收单元接收的媒体呈现描述文件对所述逻辑呈现单元的呈现位置的描述,在所述逻辑呈现单元的呈现位置呈现所述马赛克媒体。
24.如权利要求23所述的马赛克业务呈现装置,其特征在于,所述马赛克业务的逻辑呈现单元的呈现位置由所述媒体呈现描述文件中的逻辑呈现单元呈现位置属性/元素来描述。
25.如权利要求24所述的马赛克业务呈现装置,其特征在于,所述逻辑呈现单元呈现位置属性/元素通过描述所述逻辑呈现单元所覆盖的元素单元的编号来描述所述马赛克业务的逻辑呈现单元的呈现位置。
26.如权利要求23至25任一所述的马赛克业务呈现装置,其特征在于,所述逻辑呈现单元的马赛克媒体由所述媒体呈现描述文件中的马赛克媒体链接属性/元素来描述。
27.如权利要求26所述的马赛克业务呈现装置,其特征在于,所述马赛克媒体链接属性通过描述所述马赛克媒体对应的自适应马赛克媒体集合的标识来描述所述逻辑呈现单元的马赛克媒体。
28.如权利要求23至25任一所述的马赛克业务呈现装置,其特征在于,所述接收单元接收的马赛克媒体仅包括了视频;
所述发送单元,还用于根据所述接收单元接收的媒体呈现描述文件对高亮逻辑呈现单元马赛克音频的描述,向所述MBMS client发送请求获取所述高亮逻辑呈现单元的马赛克音频的马赛克音频获取请求;
所述接收单元,还用于接收所述MBMS client发送的所述高亮逻辑呈现单元的马赛克音频;
所述呈现单元,还用于播放所述接收单元接收的所述高亮逻辑呈现单元的马赛克音频。
29.如权利要求28所述的马赛克业务呈现装置,其特征在于,所述高亮逻辑呈现单元的马赛克音频由所述媒体呈现描述文件中的马赛克音频链接属性/元素来描述。
30.如权利要求29所述的马赛克业务呈现装置,其特征在于,所述马赛克音频属性/元素通过描述高亮逻辑呈现单元对应的自适应马赛克音频集合的标识来描述所述高亮逻辑呈现单元的马赛克音频。
31.如权利要求28所述的马赛克业务呈现装置,其特征在于,所述逻辑呈现单元为至少两个,所述至少两个逻辑呈现单元包括逻辑呈现主单元;
所述发送单元,还用于根据所述媒体呈现描述文件对所述高亮逻辑呈现单元的原始媒体的描述,向所述MBMS client发送请求获取所述高亮逻辑呈现单元的原始媒体的原始媒体获取请求;
所述接收单元,还用于接收所述MBMS client发送的所述高亮逻辑呈现单元的原始媒体;
所述呈现单元,还用于根据所述媒体呈现描述文件对所述逻辑呈现主单元的位置的描述,在所述逻辑呈现主单元的位置呈现所述接收单元接收的所述高亮逻辑呈现单元的原始媒体。
32.如权利要求31所述的马赛克业务呈现装置,其特征在于,所述逻辑呈现主单元由呈现信息属性/元素来描述。
33.如权利要求32所述的马赛克业务呈现装置,其特征在于,所述呈现信息属性/元素的取值为Main_video时表示对应的逻辑呈现单元为逻辑呈现主单元。
34.如权利要求23至25任一所述的马赛克业务呈现装置,其特征在于:
所述发送单元,还用于根据所述媒体呈现描述文件对被选择的逻辑呈现单元的原始媒体的描述,向所述MBMS client获取所述被选择的逻辑呈现单元的原始媒体的原始媒体获取请求;
所述接收单元,还用于接收所述MBMS client发送的所述被选择的逻辑呈现单元的原始媒体;
所述呈现单元,还用于呈现所述接收单元接收的所述被选择的逻辑呈现单元的原始媒体。
35.如权利要求34所述的马赛克业务呈现装置,其特征在于,所述原始媒体由原始媒体属性/元素来描述。
36.如权利要求35所述的马赛克业务呈现装置,其特征在于,所述逻辑呈现单元原始媒体属性/元素通过描述所述原始媒体的MPD获取地址来描述所述原始媒体。
37.如权利要求23至25任一所述的马赛克业务呈现装置,其特征在于,所述马赛克业务由所述媒体呈现描述文件的马赛克元素/属性来指定。
38.如权利要求23至25任一所述的马赛克业务呈现装置,其特征在于,所述媒体呈现描述文件包括如下属性/元素中的至少一个:
用于描述逻辑呈现单元数量的逻辑呈现单元数量属性/元素;
用于描述水平元素单元数量的水平元素单元数量属性/元素;
用于描述垂直元素单元数量的垂直元素单元数量属性/元素;
用于描述逻辑呈现单元的信息的逻辑呈现单元属性/元素,所述媒体呈现描述文件中的逻辑呈现单元元素的数量小于或等于所述逻辑呈现单元数量;
用于描述逻辑呈现单元标识的逻辑呈现单元标识属性/元素;
用于描述逻辑呈现单元的呈现位置的逻辑呈现单元呈现位置属性/元素;
用于描述逻辑呈现单元的呈现类型的呈现信息属性/元素;
用于描述逻辑呈现单元的马赛克媒体的马赛克媒体链接属性/元素;用于描述逻辑呈现单元的马赛克音频的马赛克音频链接属性/元素;
用于描述逻辑呈现单元的马赛克视频的马赛克视频链接属性/元素;
用于描述逻辑呈现单元的原始媒体的原始媒体属性/元素。
39.一种马赛克业务分发装置,其特征在于,包括:
接收单元,用于接收描述马赛克业务的马赛克用户服务描述USD,所述马赛克USD描述了所述马赛克业务的逻辑呈现单元对应的马赛克媒体;接收来自广播多播服务器的所述马赛克USD描述的马赛克业务的逻辑呈现单元对应的马赛克媒体;接收来自超文本传输协议动态自适应流媒体客户端DASH client的用于获取马赛克媒体的马赛克媒体获取请求,所述马赛克媒体获取请求包括所述马赛克业务对应的媒体呈现描述文件描述的马赛克媒体获取地址;
匹配单元,用于根据所述接收单元接收的马赛克媒体获取地址匹配出所述马赛克USD描述的马赛克媒体内容标识;
发送单元,用于向所述DASH client发送与所述匹配单元匹配出的马赛克媒体内容标识对应的马赛克媒体。
40.如权利要求39所述的马赛克业务分发装置,其特征在于:
所述接收单元,还用于接收所述逻辑呈现单元对应的原始媒体USD,所述原始媒体USD描述对应的逻辑呈现单元的原始媒体,原始媒体USD和逻辑呈现单元一一对应;接收来自广播多播服务器的所述原始媒体USD描述的逻辑呈现单元的原始媒体;接收来自所述DASHclient的用于获取原始媒体的原始媒体获取请求,所述原始媒体获取请求包括媒体呈现描述文件描述的原始媒体获取地址;
所述匹配单元,还用于根据所述接收单元接收的原始媒体获取地址匹配出所述原始媒体USD描述的原始媒体标识;
所述发送单元,还用于向所述DASH client发送与所述匹配单元匹配出的原始媒体标识对应的原始媒体。
41.如权利要求40所述的马赛克业务分发装置,其特征在于,所述原始媒体USD和所述马赛克USD属于同一个用户服务描述包USD bundle。
42.如权利要求39至41任一所述的马赛克业务分发装置,其特征在于,所述马赛克业务由所述马赛克USD中的马赛克业务指示来指定。
43.如权利要求39至41任一所述的马赛克业务分发装置,其特征在于,所述马赛克USD包括所述媒体呈现描述文件的标识;所述装置还包括:
获取单元,用于根据所述接收单元接收的马赛克USD包括的所述媒体呈现描述文件的标识,获取所述媒体呈现描述文件。
44.如权利要求39至41任一所述的马赛克业务分发装置,其特征在于,所述马赛克USD包括所述媒体呈现描述文件的元素/属性;所述装置还包括:
生成单元,用于根据所述接收单元接收的马赛克USD所包括的所述媒体呈现描述文件的元素/属性,生成媒体呈现描述文件。
45.一种计算机可读取存储介质,其特征在于,所述计算机可读取存储介质存储有计算机程序,其中,所述计算机程序被硬件执行时,能够实现权利要求1至16任意一项所述的方法。
46.一种计算机可读取存储介质,其特征在于,所述计算机可读取存储介质存储有计算机程序,其中,所述计算机程序被硬件执行时,能够实现权利要求17至22任意一项所述的方法。
CN201480082424.5A 2014-10-28 2014-10-28 马赛克业务呈现/分发方法及装置 Active CN106797445B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2014/089731 WO2016065540A1 (zh) 2014-10-28 2014-10-28 马赛克业务呈现/分发方法及装置

Publications (2)

Publication Number Publication Date
CN106797445A CN106797445A (zh) 2017-05-31
CN106797445B true CN106797445B (zh) 2020-04-21

Family

ID=55856360

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480082424.5A Active CN106797445B (zh) 2014-10-28 2014-10-28 马赛克业务呈现/分发方法及装置

Country Status (4)

Country Link
US (1) US20170223410A1 (zh)
EP (1) EP3197151B1 (zh)
CN (1) CN106797445B (zh)
WO (1) WO2016065540A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111050221A (zh) * 2019-12-16 2020-04-21 北京东方广视科技股份有限公司 一种用于获取机顶盒多画面导航界面焦点的方法及系统
US11683355B2 (en) * 2021-01-05 2023-06-20 Tencent America LLC Methods and apparatuses for dynamic adaptive streaming over HTTP

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101952852A (zh) * 2008-02-20 2011-01-19 微软公司 用于自动标识多媒体会议事件的参与者的技术
CN102421014A (zh) * 2011-11-22 2012-04-18 中兴通讯股份有限公司 实现自定义马赛克业务的方法、终端及系统
WO2013089437A1 (ko) * 2011-12-12 2013-06-20 엘지전자 주식회사 미디어 컨텐트를 수신하는 장치 및 방법
CN103748810A (zh) * 2011-08-11 2014-04-23 英特尔公司 用于ims网络上dash格式化内容在mbms下载与基于http的交付之间切换的方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040150748A1 (en) * 2003-01-31 2004-08-05 Qwest Communications International Inc. Systems and methods for providing and displaying picture-in-picture signals
US20080163059A1 (en) * 2006-12-28 2008-07-03 Guideworks, Llc Systems and methods for creating custom video mosaic pages with local content
JP4535150B2 (ja) * 2008-03-18 2010-09-01 ソニー株式会社 画像処理装置および方法、プログラム並びに記録媒体
CN102131114B (zh) * 2010-11-17 2013-04-24 华为技术有限公司 一种播放列表提供方法及系统
US9712891B2 (en) * 2011-11-01 2017-07-18 Nokia Technologies Oy Method and apparatus for selecting an access method for delivery of media
CN102843606A (zh) * 2012-08-07 2012-12-26 华为终端有限公司 马赛克业务的实现方法、设备及系统
EP3657806A1 (en) * 2012-10-12 2020-05-27 Canon Kabushiki Kaisha Method and corresponding device for streaming video data
RU2016115980A (ru) * 2013-10-30 2017-10-25 Сони Корпорейшн Устройство подачи контента, способ подачи контента, программа, оконечное устройство и система подачи контента
EP3065409A4 (en) * 2013-10-30 2017-08-09 Sony Corporation Transmission device, transmission method, reception device, and reception method
EP3138295A4 (en) * 2014-04-28 2017-09-20 ActiveVideo Networks, Inc. Systems and methods for generating a full-motion video mosaic interface for content discovery with user-configurable filters
US9247283B1 (en) * 2014-10-27 2016-01-26 Cisco Technology, Inc. Mosaic presentation screen production
US20160127790A1 (en) * 2014-11-05 2016-05-05 Sony Corporation Provision of a video mosaic service

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101952852A (zh) * 2008-02-20 2011-01-19 微软公司 用于自动标识多媒体会议事件的参与者的技术
CN103748810A (zh) * 2011-08-11 2014-04-23 英特尔公司 用于ims网络上dash格式化内容在mbms下载与基于http的交付之间切换的方法
CN102421014A (zh) * 2011-11-22 2012-04-18 中兴通讯股份有限公司 实现自定义马赛克业务的方法、终端及系统
WO2013089437A1 (ko) * 2011-12-12 2013-06-20 엘지전자 주식회사 미디어 컨텐트를 수신하는 장치 및 방법

Also Published As

Publication number Publication date
EP3197151A1 (en) 2017-07-26
EP3197151B1 (en) 2019-08-14
EP3197151A4 (en) 2017-07-26
US20170223410A1 (en) 2017-08-03
CN106797445A (zh) 2017-05-31
WO2016065540A1 (zh) 2016-05-06

Similar Documents

Publication Publication Date Title
US10257638B2 (en) Audio object processing based on spatial listener information
JP7059327B2 (ja) コンテンツフィンガープリンティングのためのフィンガープリントレイアウト
US8949912B2 (en) ABR live to VOD system and method
US20130283318A1 (en) Dynamic Mosaic for Creation of Video Rich User Interfaces
US20140196085A1 (en) Inserting advertisements into video content
US10237629B2 (en) Channel classification methods and devices
MX2015002326A (es) Acceso bajo demanda a contenido programado.
KR102147748B1 (ko) 증강현실 지원을 위한 데이터 처리 방법 및 장치
CA2651246A1 (en) Method and system for providing video content
CN103945258B (zh) 一种频道切换方法及电视接收装置
KR101629813B1 (ko) 디지털 방송 수신 장치 및 그것을 이용한 재핑 광고 제공 방법
EP2993908A1 (en) User-defined content streaming
US11729237B2 (en) Custom content insertion
EP2760215A1 (en) Image display apparatus, content recommendation information receiving method, server and content recommendation method
CN108810567B (zh) 一种音频与视频视角匹配的方法、客户端和服务器
EP3065408A1 (en) Transmission device, transmission method, reception device, and reception method
US10244276B2 (en) System and method for allocating bandwidth in a network
CN106797445B (zh) 马赛克业务呈现/分发方法及装置
CN105812961B (zh) 自适应流媒体处理方法及装置
US10637904B2 (en) Multimedia streaming service presentation method, related apparatus, and related system
US11317135B2 (en) Identifying user devices for interactive media broadcast participation
KR102184692B1 (ko) 지능형 방송 서비스를 제공하는 방법 및 그 장치
CN107018452B (zh) 多媒体服务中内容组件关系的描述及个性化显示方法
KR20150120800A (ko) 증강방송 서비스를 위한 방송 사업자 장치, 콘텐츠 사업자 장치, 수신 단말 및 증강방송 서비스 방법
WO2014097936A1 (ja) 情報処理装置、情報処理方法、プログラム、および情報処理システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant