CN105830456B - 传送和接收媒体数据的方法和装置 - Google Patents
传送和接收媒体数据的方法和装置 Download PDFInfo
- Publication number
- CN105830456B CN105830456B CN201480068646.1A CN201480068646A CN105830456B CN 105830456 B CN105830456 B CN 105830456B CN 201480068646 A CN201480068646 A CN 201480068646A CN 105830456 B CN105830456 B CN 105830456B
- Authority
- CN
- China
- Prior art keywords
- display
- district
- modification
- sub
- parameter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/12—Use of codes for handling textual entities
- G06F40/14—Tree-structured documents
- G06F40/143—Markup, e.g. Standard Generalized Markup Language [SGML] or Document Type Definition [DTD]
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/14—Display of multiple viewports
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23614—Multiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/654—Transmission by server directed to the client
- H04N21/6547—Transmission by server directed to the client comprising parameters, e.g. for client setup
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8543—Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
- H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Marketing (AREA)
- Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
- Information Transfer Between Computers (AREA)
- Image Processing (AREA)
Abstract
一种传送媒体数据以及用于在显示区上呈现媒体数据的显示组成数据的方法,其中显示组成数据定义媒体数据的一个或多个媒体实体之间的空间和/或时间关系,显示区包含一个或多个显示子区,该方法包括:传送相应的显示区和/或相应的显示子区的显示修改数据,显示修改数据指示用户可以如何修改相应的显示区或显示子区的视觉配置。
Description
技术领域
本发明涉及传送和接收媒体数据的方法和装置。具体但非排他性地,本发明涉及诸如MPEG类型数据这样的媒体数据的传送和接收以及在显示器上呈现媒体内容的方法和装置。
背景技术
诸如图像、文本、音频和视频数据或者它们的任意组合这样的媒体内容能够跨越通信网络而递送,并且在包括诸如多媒体播放器这样的媒体播放器的用户终端上再现。
多媒体服务提供诸如视频、音频、图像和文本数据这样的各种类型的媒体内容。多媒体播放器是呈现视频、音频或数据内容的组合供用户消费的设备。媒体内容的再现可以由可见显示、音频声音等执行。当以多媒体的形式将不同的媒体内容成分递送到用户终端时,确定媒体内容成分的再现定时和显示位置对于高效的消费和展示很重要。
MPEG-H第1部分标准(也称为MPEG多媒体传输或者MMT)定义用于诸如例如图像数据、音频数据、文本数据等时控和非时控的媒体内容的封装、传输和组成的完整解决方案。MMT当前在开发中,草拟的标准在“Text of ISO/IEC 2nd CD 23008-1MPEG MediaTransport,MPEG/N13293”(瑞士,日内瓦,2013年1月)(在下文“MMT_CD”)中描述。虽然MMT主要处理IP网络,但是它也支持内容在任何类型的基于包的网络上的递送。具体地,MMT可以用于视听服务在诸如地面网络、电缆网络或卫星网络这样的广播网络上的递送。
MMT-CI(其中CI指组成信息)控制在显示器上的媒体数据的内容的时间和空间布局。虽然MMT-CI对内容提供者提供描述媒体内容最初如何在显示器上组成以及组成布置如何能够随着时间演变的可能性,但是没有提供最终呈现的用户个性化。MMT终端可以允许用户通过“编辑”HTML5页面和CI元素的当前版本来更改显示。然而,在没有适当的约束的情况下,这样的编辑能够快速地导致媒体内容的呈现的破坏。而且,如果内容提供者不希望其媒体内容的最终呈现被用户修改,则MMT-CI没有提供防止不想要的修改的可能性。
考虑前述内容而设计了本发明。
发明内容
以一般形式,本发明涉及提供显示修改数据,用于一个或多个媒体内容成分或实体的媒体数据内容的显示。媒体数据与用于在至少一个显示区上呈现一个或多个媒体内容成分的显示组成数据相关联,其中显示组成数据定义媒体数据的一个或多个媒体内容成分之间的空间和/或时间关系。显示区包含一个或多个显示子区。该方法包括提供相应的显示区和/或相应的显示子区的显示修改数据,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由用户修改。显示修改数据可以包括:相应的显示区和/或显示子区的修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由用户修改;查看锁定,指示显示子区是否可以在另一个显示区上显示;和/或显示可见度参数,定义在显示区上的显示期间可见的显示的媒体实体或显示子区的最小比例。
术语媒体内容成分可以指媒体内容的成分、媒体对象、媒体数据实体,诸如例如MMT资产这样的媒体资产等。例如在MMT-CI中,显示区可以对应于视图,显示子区可以对应于视图内的区域。
根据本发明的第一方面,提供一种传送用于在至少一个显示区上呈现媒体数据的内容的显示组成数据的方法,显示区包含一个或多个显示子区,其中显示组成数据定义媒体数据的内容成分之间的空间关系和时间关系中的至少一个,该方法包括:针对相应的显示区和/或相应的显示子区,传送显示修改数据,一个或多个媒体内容成分可以在相应的显示区和/或相应的显示子区上呈现,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由用户修改。
在实施例中,显示修改数据包括:修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由用户修改。
在实施例中,显示修改数据包括:至少一个修改参数,指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束。
修改参数例如可以包括:查看锁定参数,与显示区的对应的显示子区相关联,并且指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现;和/或显示子区可见度参数,定义在显示区上的显示期间可见的相应的显示子区的最小比例。
显示修改数据可以包括特定显示区的修改锁定参数、若干显示区中的每个的锁定参数或者每个显示区的相应的修改锁定参数。
在实施例中,显示区的相应的修改锁定参数包括在显示组成数据的对应视图元素中。
显示修改数据可以包括特定显示子区的修改锁定参数、若干显示子区中的每个的锁定参数或者每个显示子区的相应的修改锁定参数。
在实施例中,显示子区的相应的修改锁定参数包括在与相应的显示子区相对应的显示组成数据的区域元素中。
在实施例中,所述至少一个修改参数包括:查看锁定参数,指示在相应的显示区上显示的媒体数据是否可以在与相应的显示区不同的另一个显示区上显示。
在实施例中,所述至少一个修改参数包括与显示区的对应的显示子区相关联的查看锁定参数,并且指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现。
在实施例中,查看锁定参数包括在与所述显示子区相对应的组成数据的区域元素中。
在实施例中,所述至少一个修改参数包括:显示子区可见度参数,定义在显示期间可见的相应的显示子区的最小比例。
显示修改数据可以包括特定显示子区的显示子区可见度参数、若干显示子区中的每个的显示子区可见度或者每个显示子区的相应的显示子区可见度参数。
在实施例中,显示子区可见度参数包括在与所述显示子区相对应的组成数据的区域元素中。
在实施例中,显示子区可见度参数基于显示子区的表面面积和与所述显示子区重叠的其他显示子区的总表面面积的比率。
在实施例中,子区AreaN的显示子区可见度参数Visibility(AreaN)根据下式确定:
其中Areai指与AreaN重叠的所有区域,并且Transparency对应于与对应的显示子区的透明度的量相对应的加权因子。
在实施例中,所述至少一个修改参数包括:显示可见度参数,定义在对应的显示区或显示子区上的显示期间可见的媒体内容成分的最小比例。
在实施例中,显示组成数据包括MMT组成信息。在实施例中,MMT组成信息表示为XML文件。
根据本发明的第二方面,提供一种在至少一个显示区上显示媒体数据的内容的方法,显示区包含一个或多个显示子区,该方法包括:
接收用于在至少一个显示区上呈现媒体数据的内容的显示组成数据以及相应的显示区和/或相应的显示子区的显示修改数据,其中显示组成数据定义媒体数据的内容成分之间的空间关系和时间关系中的至少一个,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由用户修改;
根据由显示组成数据所定义的第一显示配置,在显示区上呈现媒体数据的内容成分,其中显示区或显示子区可以由用户根据显示修改数据来修改。
在实施例中,显示修改数据包括:修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由用户修改。
在实施例中,显示修改数据包括:至少一个修改参数,指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束。
在实施例中,显示区的相应的修改锁定参数包括在显示组成数据的对应的视图元素中。
在实施例中,显示子区的相应的修改锁定参数包括在与相应的子区相对应的显示组成数据的区域元素中。
在实施例中,所述至少一个修改参数包括:查看锁定参数,指示在相应的显示区上显示的媒体数据是否可以在与相应的显示区不同的另一个显示区上显示。
在实施例中,所述至少一个修改参数包括与显示区的对应的显示子区相关联的查看锁定参数,指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现。
在实施例中,查看锁定参数包括在与所述显示子区相对应的组成数据的区域元素中。
在实施例中,所述至少一个修改参数包括:显示子区可见度参数,定义在显示期间可见的相应的显示子区的最小比例。
在实施例中,显示子区可见度参数包括在与所述显示子区相对应的显示组成数据的区域元素中。
在实施例中,显示子区可见度参数基于显示子区的表面面积和与所述显示子区重叠的其他显示子区的总表面面积的比率。
在实施例中,子区AreaN的显示子区可见度参数Visibility(AreaN)根据下式确定:
其中Areai指与AreaN重叠的所有区域,并且Transparency对应于与对应的显示子区的透明度的量相对应的加权因子。
在实施例中,所述至少一个修改参数包括:显示可见度参数,定义在对应的显示区或显示子区上的显示期间可见的媒体内容成分的最小比例。
在实施例中,显示组成数据包括MMT组成信息。在实施例中,MMT组成信息表示为XML文件。
根据本发明的第三方面,提供一种传送用于在至少一个显示区上呈现媒体数据的内容的显示组成数据的装置,显示区包含一个或多个显示子区,其中显示组成数据定义媒体数据的内容成分之间的空间关系和时间关系中的至少一个,该装置包括:
显示修改参数设置模块,用于设置显示区和/或显示子区的显示修改数据的参数,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由用户修改;以及
传送器,用于传送显示组成数据和显示修改数据。
在实施例中,修改参数设置模块被配置为设置修改锁定参数,修改锁定参数指示相应的显示区或显示子区的视觉配置是否可以由用户修改。
在实施例中,修改参数设置模块被配置为设置至少一个修改参数,所述至少一个修改参数指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束。
在实施例中,显示区的相应的修改锁定参数包括在显示组成数据的对应的视图元素中。
在实施例中,显示子区的相应的修改锁定参数包括在与相应的子区相对应的显示组成数据的区域元素中。
在实施例中,修改参数设置模块被配置为设置查看锁定参数,查看锁定参数指示在相应的显示区上显示的媒体数据是否可以在与相应的显示区不同的另一个显示区上显示。
在实施例中,修改参数设置模块被配置为设置查看锁定参数,查看锁定参数与显示区的对应的显示子区相关联并且指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现。
在实施例中,查看锁定参数包括在与所述显示子区相对应的组成数据的区域元素中。
在实施例中,修改参数设置模块被配置为设置显示子区可见度参数,显示子区可见度参数定义在显示期间可见的相应的显示子区的最小比例。
在实施例中,显示子区可见度参数包括在与所述显示子区相对应的显示组成数据的区域元素中。
在实施例中,显示子区可见度参数基于显示子区的表面面积和与所述显示子区重叠的其他显示子区的总表面面积的比率。
在实施例中,子区AreaN的显示子区可见度参数Visibility(AreaN)根据下式确定:
其中Areai指与AreaN重叠的所有区域,并且Transparency对应于与对应的显示子区的透明度的量相对应的加权因子。
在实施例中,修改参数设置模块被配置为设置显示可见度参数,显示可见度参数定义在对应的显示区或显示子区上的显示期间可见的媒体内容成分的最小比例。
根据本发明的第四方面,提供一种用于修改媒体数据的内容在至少一个显示区上的显示的终端设备,显示区包含一个或多个显示子区,该终端设备包括:
接收器,用于接收用于在至少一个显示区上呈现媒体数据的内容的显示组成数据以及相应的显示区和/或相应的显示子区的显示修改数据,其中显示组成数据定义媒体数据的内容成分之间的空间关系和时间关系中的至少一个,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由用户修改;
呈现引擎,用于根据显示组成数据,确定媒体数据的一个或多个内容成分之间的空间和/或时间关系;
显示器,用于根据由显示组成数据所定义的第一显示配置,在显示区上显示媒体数据的内容成分;以及
用户接口,用于根据显示修改数据,修改显示区或显示子区。
在实施例中,显示修改数据包括:修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由用户修改。
在实施例中,显示修改数据包括:至少一个修改参数,指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束。
在实施例中,显示区的相应的修改锁定参数包括在显示组成数据的对应的视图元素中。
在实施例中,显示子区的相应的修改锁定参数包括在与相应的子区相对应的显示组成数据的区域元素中。
在实施例中,所述至少一个修改参数包括:查看锁定参数,指示在相应的显示区上显示的媒体数据是否可以在与相应的显示区不同的另一个显示区上显示。
在实施例中,所述至少一个修改参数包括与显示区的对应的显示子区相关联的查看锁定参数,指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现。
在实施例中,查看锁定参数包括在与所述显示子区相对应的组成数据的区域元素中。
在实施例中,所述至少一个修改参数包括:显示子区可见度参数,定义在显示期间可见的相应的显示子区的最小比例。
在实施例中,显示子区可见度参数包括在与所述显示子区相对应的显示组成数据的区域元素中。
在实施例中,显示子区可见度参数基于显示子区的表面面积和与所述显示子区重叠的其他显示子区的总表面面积的比率。
在实施例中,子区AreaN的显示子区可见度参数Visibility(AreaN)根据下式确定:
其中Areai指与AreaN重叠的所有区域,并且Transparency对应于与对应的显示子区的透明度的量相对应的加权因子。
在实施例中,所述至少一个修改参数包括:显示可见度参数,定义在对应的显示区或显示子区上的显示期间可见的媒体内容成分的最小比例。
在实施例中,显示组成数据包括MMT组成信息。在实施例中,MMT组成信息表示为XML文件。
根据本发明的第五方面,提供一种数据包,包括:媒体数据,包括用于在显示区上呈现的媒体内容,显示区包含一个或多个显示子区;显示组成数据,用于控制媒体数据在显示区上的呈现,显示组成数据定义媒体数据的内容成分之间的空间关系和时间关系中的至少一个;以及相应的显示区和/或相应的显示子区的显示修改数据,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由用户修改。
在实施例中,显示修改数据包括:修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由用户修改。
在实施例中,显示修改数据包括:至少一个修改参数,指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束。
在实施例中,显示区的相应的修改锁定参数包括在显示组成数据的对应的视图元素中。
在实施例中,显示子区的相应的修改锁定参数包括在与相应的子区相对应的显示组成数据的区域元素中。
在实施例中,所述至少一个修改参数包括:查看锁定参数,指示在相应的显示区上显示的媒体数据是否可以在与相应的显示区不同的另一个显示区上显示。
在实施例中,所述至少一个修改参数包括与显示区的对应的显示子区相关联的查看锁定参数,指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现。
在实施例中,查看锁定参数包括在与所述显示子区相对应的组成数据的区域元素中。
在实施例中,所述至少一个修改参数包括:显示子区可见度参数,定义在显示期间可见的相应的显示子区的最小比例。
在实施例中,显示子区可见度参数包括在与所述显示子区相对应的显示组成数据的区域元素中。
在实施例中,显示子区可见度参数基于显示子区的表面面积和与所述显示子区重叠的其他显示子区的总表面面积的比率。
在实施例中,子区AreaN的显示子区可见度参数Visibility(AreaN)根据下式确定:
其中Areai指与AreaN重叠的所有区域,并且Transparency对应于与对应的显示子区的透明度的量相对应的加权因子。
在实施例中,所述至少一个修改参数包括:显示可见度参数,定义在对应的显示区或显示子区上的显示期间可见的媒体内容成分的最小比例。
在实施例中,显示组成数据包括MMT组成信息。在实施例中,MMT组成信息表示为XML文件。
在实施例中,显示修改数据包括在显示组成数据中。
本发明的另一个方面提供一种传送用于在显示器的至少一个视图上呈现媒体数据的一个或多个媒体资产的显示组成数据的方法,视图包含一个或多个区域,其中显示组成数据定义媒体数据的一个或多个媒体资产之间的空间关系和时间关系中的至少一个,该方法包括:传送相应的视图和/或相应的区域的显示修改数据,显示修改数据指示相应的视图或区域的视觉配置可以如何由用户修改。
本发明的另一个方面提供一种在显示器的至少一个视图上呈现媒体资产的方法,该方法包括接收用于在至少一个视图上呈现媒体数据的一个或多个媒体资产的显示组成数据,视图包含一个或多个区域,其中显示组成数据定义媒体数据的一个或多个媒体资产之间的空间关系和时间关系中的至少一个,该方法包括:接收相应的视图和/或相应的区域的显示修改数据,显示修改数据指示相应的视图或区域的视觉配置可以如何由用户修改;以及根据由显示组成数据所定义的第一显示配置在视图上呈现一个或多个媒体资产,其中视图或区域可以由用户根据显示修改数据来修改。
本发明的另一个方面提供传送用于在至少一个视图上呈现媒体数据的一个或多个媒体资产的显示组成数据的装置,视图包含一个或多个区域,其中显示组成数据定义媒体资产之间的空间关系和时间关系中的至少一个,该装置包括:显示修改参数设置模块,用于设置视图和/或区域的显示修改参数,显示修改参数指示相应的视图或区域的视觉配置可以如何由用户修改;以及传送器,用于传送显示组成数据和显示修改数据。
本发明的另一个方面提供一种用于修改媒体数据的一个或多个媒体资产在至少一个视图上的显示的终端设备,视图包含一个或多个区域,终端设备包括:接收器,用于接收用于在至少一个视图上呈现一个或多个媒体资产的显示组成数据以及相应的视图和/或相应的区域的显示修改数据,其中显示组成数据定义媒体数据的媒体资产之间的空间关系和时间关系中的至少一个,显示修改数据指示相应的视图或显示区域的视觉配置可以如何由用户修改;呈现引擎,用于根据显示组成数据,确定媒体数据的一个或多个媒体资产之间的空间和/或时间关系;显示器,用于根据由显示组成数据所定义的第一显示配置,在视图上显示媒体资产;以及用户接口,用于根据显示修改数据来修改视图或区域。
本发明的另一个方面提供一种数据包,包括:媒体数据,包括用于在视图上呈现的媒体资产,视图包含一个或多个区域;显示组成数据,用于控制媒体资产在视图上的呈现,显示组成数据定义媒体资产之间的空间关系和时间关系中的至少一个;以及相应的视图和/或相应的区域的显示修改数据,显示修改数据指示相应的视图或区域的视觉配置可以如何由用户修改。
在实施例中,显示修改数据包括:至少一个修改锁定参数,指示相应的视图或区域的视觉配置是否可以由用户修改;以及至少一个修改参数,指示强加在相应的视图或区域的视觉配置的用户修改上的修改约束。至少一个修改参数可以包括
本发明的又一个方面涉及一种传送用于在至少一个视图上呈现媒体数据的一个或多个媒体资产的显示组成数据的方法,视图包含一个或多个区域,其中显示组成数据定义媒体数据的一个或多个媒体资产之间的空间关系和时间关系中的至少一个,该方法包括传送相应的视图和/或相应的区域的显示修改数据,其中显示修改数据包括:至少一个修改锁定参数,指示相应的视图或区域的视觉配置是否可以由用户修改;以及至少一个修改参数,指示强加在相应的视图或区域的视觉配置的用户修改上的修改约束。
本发明的另一个方面提供一种传送用于在至少一个视图上呈现媒体数据的一个或多个媒体资产的显示组成数据的方法,视图包含一个或多个区域,其中显示组成数据定义媒体数据的一个或多个媒体资产之间的空间关系和时间关系中的至少一个,该方法包括传送相应的视图和/或相应的区域的显示修改数据,其中显示修改数据包括:至少一个修改锁定参数,指示相应的视图或区域的视觉配置是否可以由用户修改;与所述视图的区域相关联的至少一个查看锁定参数,查看锁定参数指示相应的区域是否可以在另一个视图上呈现;以及至少一个区域可见度参数,定义在显示期间可见的相应的区域在相应视图上的最小比例。
本发明的另一个方面提供一种在至少一个视图上显示媒体资产的方法,视图包含一个或多个区域,该方法包括:接收用于在至少一个视图上呈现媒体资产的显示组成数据,其中显示组成数据定义媒体数据的一个或多个媒体资产之间的空间关系和时间关系中的至少一个;接收相应的视图和/或相应的区域的显示修改数据,其中显示修改数据包括指示相应的视图或区域的视觉配置是否可以由用户修改的至少一个修改锁定参数、与所述视图的区域相关联的至少一个查看锁定参数(查看锁定参数指示相应的区域是否可以在另一个视图上呈现)以及定义在显示期间可见的相应的区域在相应视图上的最小比例的至少一个区域可见度参数;以及根据由显示组成数据所定义的第一显示配置在至少一个视图上呈现媒体资产,其中视图或区域可以由用户根据显示修改数据来修改。
本发明的另一个方面提供一种传送用于在至少一个视图上呈现媒体数据的一个或多个媒体资产的显示组成数据的装置,视图包含一个或多个区域,其中显示组成数据定义媒体数据的一个或多个媒体资产之间的空间关系和时间关系中的至少一个,该装置包括:显示修改参数设置模块,用于设置相应的视图和/或相应的区域的显示修改参数,其中显示修改参数包括指示相应的视图或区域的视觉配置是否可以由用户修改的至少一个修改锁定参数、与所述视图的区域相关联的至少一个查看锁定参数(查看锁定参数指示相应的区域是否可以在另一个视图上呈现)以及定义在显示期间可见的相应的区域在相应视图上的最小比例的至少一个区域可见度参数;以及传送器,用于传送显示组成数据和显示修改参数。
本发明的另一个方面提供一种用于修改媒体数据的媒体资产在至少一个视图上的显示的终端设备,视图包含一个或多个区域,终端设备包括:
接收器,用于接收用于在至少一个视图上呈现媒体资产的显示组成数据,其中显示组成数据定义媒体资产之间的空间关系和时间关系中的至少一个,以及用于接收相应的视图和/或相应的显示区域的显示修改数据,其中显示修改数据包括指示相应的视图或区域的视觉配置是否可以由用户修改的至少一个修改锁定参数、与所述视图的区域相关联的至少一个查看锁定参数(查看锁定参数指示相应的区域是否可以在另一个视图上呈现)以及定义在显示期间可见的相应的区域在相应视图上的最小比例的至少一个区域可见度参数;该设备还包括:
呈现引擎,用于根据显示组成数据,确定媒体资产之间的空间和/或时间关系;
显示器,用于根据由显示组成数据所定义的第一显示配置,在视图上显示媒体资产;以及
用户接口,用于根据显示修改数据来修改视图或区域。
本发明的一方面提供一种提供或处理显示修改数据的方法,显示修改数据用于修改媒体内容在包含显示子区的显示区上的显示,其中显示修改数据指示相应的显示区和/或显示子区的视觉配置可以如何由用户修改。
在本发明的实施例中,显示修改数据包括下面参数中的一个或多个:
修改锁定参数,指示相应的显示区或子区的视觉配置是否可以由用户修改;
与显示区的子区相关联的查看锁定参数,查看锁定参数指示相应的显示子区是否可以在另一个显示区上呈现;以及
区域可见度参数,定义在对应的视图上的显示期间可见的显示子区的最小比例。
根据本发明的另一个方面,提供一种传送一个或多个媒体实体的媒体数据以及用于在至少一个显示区上呈现一个或多个媒体实体的显示组成数据,其中显示组成数据定义媒体数据的一个或多个媒体实体之间的空间和/或时间关系,每个显示区包含一个或多个显示子区,该方法包括:传送显示区和/或显示子区的修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由用户修改。
在一个实施例中,修改锁定参数可以与媒体数据一起传送。在其他实施例中,修改锁定参数可以与媒体数据分开地传送。
在实施例中,传送视图锁定参数,视图锁定参数指示与显示区相关联的媒体实体的内容是否可以在与相应的显示区不同的另一个显示区上显示。
在实施例中,传送区域锁定参数,区域锁定参数指示与显示子区相关联的媒体实体的内容是否可以在与相应的显示子区不同的另一个显示子区上显示。
在实施例中,传送显示可见度参数,显示可见度参数定义在相应的显示区上的显示期间可见的媒体实体的最小比例。
在实施例中,传送显示可见度参数,显示可见度参数定义在相应的显示区上的显示期间可见的显示子区的最小比例。
本发明的另一个方面提供一种在相应的显示设备的至少一个显示区上显示一个或多个媒体实体的内容的方法,每个显示区包含一个或多个显示子区,该方法包括:接收一个或多个媒体实体的媒体数据、定义一个或多个媒体实体之间的空间和/或时间关系的显示组成数据以及显示区和/或显示子区的修改锁定参数,修改锁定参数指示相应的显示区或显示子区的视觉配置是否可以由用户修改;按照根据显示组成数据的第一预先定义的显示配置,在显示区上呈现一个或多个多媒体实体的内容,其中由对应的修改锁定参数指示为可修改的显示区或显示子区的任何一个可以由最终用户修改。
在实施例中,传送视图锁定参数,视图锁定参数指示与显示区相关联的媒体实体的内容是否可以在与相应的显示区不同的另一个显示区上显示。
在实施例中,接收区域锁定参数,区域锁定参数指示与显示子区相关联的媒体实体的内容是否可以在与相应的显示子区不同的另一个显示子区上显示。
在实施例中,接收显示可见度参数,显示可见度参数定义在相应的显示区上的显示期间可见的媒体实体的最小比例。
在实施例中,接收显示可见度参数,显示可见度参数定义在相应的显示区上的显示期间可见的显示子区的最小比例。
在实施例中,修改锁定参数、视图锁定参数、区域锁定参数和显示可见度参数中的一个或多个包括在显示组成数据中。在另一个实施例中,修改锁定参数、视图锁定参数、区域锁定参数和显示可见度参数中的一个或多个与显示组成数据分开。
在实施例中,显示组成数据包括MMT组成信息。
本发明的另一个方面提供一种传送媒体数据以及用于在显示区上呈现媒体数据的显示组成数据的装置,其中显示组成数据定义媒体数据的一个或多个媒体实体之间的空间和/或时间关系,显示区包含一个或多个显示子区,该装置包括:修改参数设置模块,用于设置显示区和/或显示子区的修改锁定参数,修改锁定参数指示相应的显示区或显示子区的视觉配置是否可以由用户修改;以及传送器,用于传送媒体数据、显示组成数据以及修改锁定参数。
在实施例中,修改参数设置模块还被配置为设置视图锁定参数,视图锁定参数指示与显示区相关联的媒体实体的内容是否可以在另一个显示区上显示。
在实施例中,修改参数设置模块还被配置为设置区域锁定参数,区域锁定参数指示与显示子区相关联的媒体实体的内容是否可以在另一个显示子区上显示。
在实施例中,修改参数设置模块还被配置为设置显示可见度参数,显示可见度参数定义在对应的显示区上的显示期间可见的相应的媒体实体的最小比例。
在实施例中,修改参数设置模块还被配置为设置显示可见度参数,显示可见度参数定义在显示区上的显示期间可见的相应的显示子区的最小比例。
本发明的另一个方面提供一种用于修改一个或多个媒体实体在显示设备的显示区上的显示的终端设备,显示区包含一个或多个显示子区,用户接口包括:
接收器,用于接收媒体数据、显示组成数据以及显示区和/或显示子区的修改锁定参数,修改锁定参数指示相应的显示区或显示子区的视觉配置是否可以由用户修改;
呈现引擎,用于根据显示组成数据,确定一个或多个媒体实体之间的空间和/或时间关系;
显示器,用于按照根据显示组成数据的第一预先定义的显示配置,在显示区上显示一个或多个多媒体实体的内容;以及
用户接口,用于修改由对应的修改锁定参数指示为可修改的显示区或显示子区中的任何一个。
在实施例中,用户接口被配置为根据视图锁定参数修改显示区,视图锁定参数指示与显示区相关联的媒体实体的内容是否可以在另一个显示区上显示。
在实施例中,用户接口被配置为根据区域锁定参数修改显示子区中的任何一个,区域锁定参数指示与显示子区相关联的媒体实体的内容是否可以在另一个显示子区上显示。
在实施例中,用户接口被配置为根据显示可见度参数修改显示子区中的任何一个,显示可见度参数定义在显示区上的显示期间可见的相应的媒体实体的最小比例。
本发明的又一个方面提供一种数据包,包括:
用于在至少一个显示区上呈现的一个或多个媒体实体的媒体数据,显示区由一个或多个子区组成;
组成数据,定义一个或多个媒体实体之间的空间和/或时间关系;以及
显示修改数据,包括下面中至少一个:每个显示区和/或显示子区的修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由用户修改;视图和/或区域锁定参数,指示与显示区或显示子区相关联的媒体实体的内容是否可以在另一个显示区或显示子区上显示;以及显示可见度参数,定义在显示区上的显示期间可见的媒体实体的最小比例。
在一个实施例中,显示修改数据包括在组成数据中。在替代的实施例中,显示修改数据与组成数据分开。
本发明的另一个方面提供一种电子设备,包括存储器、一个或多个处理器以及存储在存储器中并且被配置为由一个或多个处理器执行的一个或多个模块,所述一个或多个模块包括用于修改媒体数据的一个或多个媒体实体的内容在至少一个显示区上的显示的指令,显示区包含一个或多个显示子区,包括:接收定义媒体数据的一个或多个媒体实体之间的空间和/或时间关系的显示组成数据,以及呈现一个或多个媒体实体的相应的显示区和/或相应的显示子区的显示修改数据,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由用户修改,显示修改数据包括指示相应的显示区或显示子区的视觉配置是否可以由用户修改的修改锁定参数以及指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束的至少一个修改参数;按照根据显示组成数据的第一显示配置,在显示区上呈现一个或多个多媒体实体的内容,其中由对应的修改锁定参数指示为可修改的显示区或显示子区中的任何一个可以由最终用户在由至少一个修改参数所指示的约束内修改。
根据本发明的方法的至少部分可以由计算机实现。因此,本发明可以采取完全硬件的实施例、完全软件的实施例(包括固件、常驻软件、微码等)或者组合软件和硬件方面(其全部通常在这里可以被称为“电路”、“模块”或“系统”)的实施例形式。而且,本发明可以采取在任何有形的表达介质中实施的计算机程序产品的形式,在介质中实施有计算机可用程序代码。
因为本发明能够以软件实现,所以本发明能够实施为在任何适当的载体介质上以提供给可编程装置的计算机可读代码。有形的载体介质可以包括诸如软盘、CD-ROM、硬盘驱动器、磁带设备或者固态存储设备等存储介质。临时性载体介质可以包括诸如电信号、电子信号、光信号、声信号、磁信号、电磁信号(例如微波或者RE信号)这样的信号。
附图说明
现在将描述本发明的实施例,其仅作为示例并且参照下面的附图,附图中:
图1示意性地例示MMT-CI的视图的示例;
图2示意性地例示MMT-CI的基本结构的示例以及它与相应的HTLM文件的关系;
图3示意性地例示根据本发明的实施例的关于用户修改的视图的示例;
图4示意性地例示根据本发明的实施例的关于由用户修改的视图的另一个示例;
图5是可以实现本发明的一个或多个实施例的数据通信系统的示例的框图;
图6是可以实现本发明的一个或多个实施例的传送设备的示例的框图;
图7是可以实现本发明的一个或多个实施例的终端设备的示例的框图;以及
图8是可以实现本发明的一个或多个实施例的终端设备的另一个示例的框图。
具体实施方式
将在MMT(多媒体传输)的背景下,具体地,在MMT组成信息(CI)的背景下,描述本发明的实施例。组成信息定义多媒体数据的展示方面,并且被用于控制将在一个或多个显示器上呈现的媒体数据内容(例如MMT资产或者MPU)的各个成分的时间和空间布局。
在MMT中,术语“资产”指包含具有相同传输特性的数据并由具有相同资产ID的一个或多个MPU(媒体处理单元)组成的数据实体;术语“包”指数据的逻辑集合,其包含一个或多个资产以及它们相关的资产递送特性(亦即,关于对于资产的递送所需的服务质量的描述)和组成信息(IC)(亦即,资产之间的空间和时间关系的描述)。
MMT-CI指定用于消费和展示的诸如MMT资产或MPU这样的媒体内容成分之间的相关布置,并且定义下面:
-空间组成,亦即,在视图中呈现的每个媒体内容成分的位置;
-时间组成,亦即,媒体内容成分之间的定时同步;
-用于支持在一个或多个显示设备上的同时显示或虚拟显示的多个视图。
具体地,CI提供用于各种媒体内容成分的递送的同步信息。组成信息可以使用HTML5和XML来指定。HTML5文件提供关于媒体内容成分(例如MMT资产或者MPU)之间的空间关系的初始信息,而以XML定义的CI文件提供关于各种媒体内容成分之间的时间关系的信息以补充相关联的HTML文件。CI层是描述性语言,其扩展HTML5页面并且定义作为展示资源的MMT包的MMT成分(例如MMT资产)的关联、对于MMT成分的递送和消费次序所需的时间信息以及MMT成分到具体视图的映射。
为了支持媒体数据内容成分(诸如MMT资产或者MPU)之间的时间关系以及要在多个设备上消费的媒体数据的映射的描述性表示,组成层定义如下若干元素和属性:
·HTML5媒体元素与作为资源的媒体数据的关联;
·媒体数据的展示时间的时间信息;
·要在多屏幕环境中的具体屏幕上展示的媒体数据的某些成分的指派;
典型的MMT CI处理引擎首先处理与包含MMT-CI以及一个或多个MMT资产的MMT包相关联的HMTL5页面,以便定义MMT资产的初始空间组成,并且解析CI数据以控制在时间上的展示。
典型地,HTML5文件被解析成文件对象模型(DOM)树并且存储在存储器中。CI处理引擎在指定的时间,根据包含在CI文件中的信息,将改变应用到DOM。使用DOM节点/元素的标识符或者可能地使用(例如通过jQuery选择器提供的)某种模式来引用DOM节点/元素。
图1示意性地例示MMT-CI中的视图的示例。视图100代表可以包含一个或多个区域或显示子区的整个显示区。在所例示的示例中,视图被划分成三个子区110_1、110_2和110_3,分别被命名为区域1、区域2和区域3。在每个区域中呈现一个或多个MMT媒体资产120_1……120-5。
MMT-CI依据资产、区域和视图来描述MMT包中的空间和时间关系。图2示意性地例示CI的基本结构的示例。CI包括与MMT包相关联的CI文件10以及相关联的HTML5页面20。如所例示的那样,CI文件的基本结构源自HTML5文件的结构。
MMT-CI的根元素是HTML文件20。HTML文件20是包括可能是视频、音频、图像(img)或轨道元素中的任何一个的HTML5媒体元素以及它们相关联的空间信息的HTML5文件。对CI文件的引用可以包括在HTML5文件中,典型地作为启动CI解析器的Javascript的一部分。媒体元素的空间信息用于展示对应的媒体数据(诸如MMT资产)。如果允许在多个屏幕上的展示的部分消费,则HTML5文件的主体元素包括多于一个空间区域(亦即,div元素)。
在图2中所例示的示例中,HTML5文件20包含两个主要元素——首部元素21和主体元素22。首部元素21和主体元素22中的一些元素被扩展或添加,以便满足MMT-CI的需求。
首部元素21包含标题元素211以提供关于MMT包的信息。与视图相对应的视图元素11提供关于视图的空间和时间信息。与视图的区域相对应的divLocation元素111提供关于该区域的在时间上改变的特殊信息。主体元素22包括div元素221,其包含诸如视频、音频、图像、文本等MMT资产元素2211。div元素221提供关于区域的空间信息。MMT资产2211(视频、音频……)提供MMT资产的空间和时间信息。
CI文件10提供关于视图、区域和媒体数据的时间信息。CI文件10的根元素是CI元素,其可以包含诸如视图和MediaSync元素这样的元素。这些元素的作用如下:
·视图:提供与视图及其区域的空间改变有关的时间信息。
·MediaSync:提供关于媒体数据(例如MMT资产)的展示的时间信息。
区域元素——divLocation元素——是视图元素的子元素,并且提供在视图的相对应区域的时间中关于空间改变的信息。
能够由单个MMT显示器消费的视图中的初始区域由HTML页面20的div元素221生成,并且视图中的初始区域的时间中的空间改变能够由MMTCI文件的divLocation元素111获得。div元素221和divLocation元素111使视图的区域的空间位置能够动态地改变和更新,而不用重新加载整个HTML5页面。
基本上,HTML5页面使得能够描述初始的视图,并且CI文件使得能够更新视图和创建新的另外的视图。更新可以包括视图的空间或时间修改、新的视图的引入或者新的资产的引入。CI层中的MediaSync元素提供关于媒体资产的时间信息(通常为同步信息)。
将参考图3-图8描述用于提供媒体数据的显示修改数据的本发明的实施例,媒体数据的显示修改数据使得组成布置能够在约束内被修改。
使用CSS样式表或者CSS内联样式参数,将初始视图内的MMT包的图形媒体资产(例如图像或者视频或者文本)的初始位置和大小定义为与MMT包相关联的HTML5页面中的区域。
先前,如果内容提供者希望防止对那些已定义的区域的位置的任何修改,则由CSS样式表提供的唯一解决方案是,使用“位置:固定”作为样式并且使用相对于终端显示器的像素坐标来指定对象的位置。然而,这不是可行的解决方案,因为在创建HTML5页面的时候,终端显示器的实际大小(就每行和每列的像素的数量而言)是未知的。这样的解决方案将仅在终端显示器具有固定的公知的分辨率的环境下行得通。例如在电视机的情况下并非如此。
在本发明的实施例中,提供一个或多个修改参数,以便允许在创建视图时在预先定义的约束内进行修改。
在本发明的一个具体实施例中,为了指示是否允许视图的MMT资产的显示的修改,提供修改锁定参数作为修改参数。修改锁定参数例如可以采用布尔形式。修改锁定参数与视图或区域相关联,并且具有指示用户是否可以修改对应的视图或区域的值。在一般的实施例中,修改锁定参数包括在组成信息中。在一个特定具体的示例中,修改锁定参数可以包括在MMT包的组成信息的视图和divLocation元素中。视图的相应的修改锁定参数包括在CI文件的相应的视图元素中。区域的相应的修改锁定参数包括在CI文件的相应的区域元素(divLocation元素)中。在该示例中,修改锁定参数被称作“isLocked”,并且具有被设置为“真”的默认值,其对于接收媒体数据和组成数据的呈现浏览器,意味着由对应的视图或divLocation元素所引用的视图或区域不能被修改。为了允许显示的修改,在创建视图的时候,将修改锁定参数设置为“假”。在视图级别和区域级别两者提供修改锁定参数使得整个视图或者视图的仅某些区域能够是可修改的。在一个具体实施例中,MMT-CI XML概要的实际修改涉及包括在CI的“viewType”和“divLocationType”的定义内的诸如下面那样的行:
<xsd:attribute name="isLocked"type="xsd:boolean"use="optional"default="TRUE"/>
在本发明的另一个实施例中,可以对区域提供查看锁定参数,以指示视图的相对应区域不可以移动到另一个视图。例如,内容提供者可能希望指定区域中的MMT资产的特定媒体内容停留在一个特定视图中并且不能被移动到另一个视图(例如,主要AV内容不能被发送给辅助显示屏幕)。
在一个具体实施例中,通过修改MMT-CI的CI文件的divLocation元素以引入新的布尔参数,来提供视图锁定参数,其在该示例中被称作“isLockedToView”并且具有默认值“真”。当被设置为“真”时,查看锁定参数向呈现浏览器指示相应的区域不能被发送给另一个视图。可以例如通过在“divLocationType”的对应的定义内添加下面的行,来执行对MMT-CIXML概要的修改:
<xsd:attribute name="isLockedToView"type="xsd:boolean"use="optional"default="TRUE"/>
在本发明的另一个实施例中,可以提供区域锁定参数,以指示与区域相关联的媒体资产不可以被移动到另一个区域。
在本发明的实施例中,为了定义图形媒体对象在显示器上的最小可见度,提供最小可见度参数。与区域相关联的最小可见度参数定义在显示器上可见的区域的最小比例。在一个具体实施例中,最小可见度参数包括在相关联的MMT-CI中与区域相对应的divLocation元素中。最小可见度参数定义百分比属性“minVisibility”,其通知呈现浏览器应当总是确保相应区域(显示子区)的多少可见度。区域上“100”的“minVisibility”确保没有其他区域能够重叠那个区域。这个新的参数的默认值设置为“0”,以便与HTML5和CSS的默认行为相兼容。区域的可见度值能够通过计算区域的表面面积和与该区域重叠的所有其他区域的表面面积之间的比率来确定。假如使用透明度,则如下面的等式所示那样地用透明度的量对所有区域(主要区域和重叠区域)的表面面积进行加权:
其中Areai指与AreaN重叠的所有区域。
在一个具体实施例中,通过将百分比类型的参数引入到MMT-CI中,来提供最小可见度参数。
对MMT-CI XML概要的修改涉及在概要的类型创建部分内使用下面的行创建百分比类型:
虽然在上文中所描述的实施例中,显示修改参数(修改锁定参数、视图或区域锁定参数以及显示可见度参数)包括在CI中,但是应当意示到,在本发明的其他实施例中,显示修改参数可以单独地发送给CI。
通过引入如上所述的修改参数,MMT包上的一个或多个视图可以由用户进行个性化。由此,最终用户能够决定在由修改参数所强加的限制内的每个视图的区域的组成。可以提供上面修改参数的全部,或者可以提供修改参数中的一个或多个。
现在将描述根据本发明的实施例的、允许用户更改一个或多个媒体实体在显示器上的展示的用户接口的示例。用户接口可以在诸如平板电脑这样的触摸屏设备上实现,然而应当意示到,类似的功能也可以在配备有诸如键盘或控制杆这样的用户输入接口的传统屏幕上提供。
在一个实施例中,根据MMT-CI的分析,能够标识与MMT包相关联的所有不同的视图和所有不同的区域以及视图内的不同区域的初始空间组成。个性化用户接口可以提供在与原始呈现显示器不同的第二显示器上。MMT-CI信息可以发送给第二显示器的显示设备。用户能够根据如上文所描述的修改参数,在第二显示器上修改视图,并且将修改的视图发送给原始呈现设备用于更新的处理,使得媒体内容可以根据由用户做出的修改在显示器上呈现。
如果在MMT-CI XML片段中定义若干视图,则向用户提供关于他希望修改哪个视图的选择。例如,在触摸屏上,可以借助于物理的菜单按钮或者存在于用户接口上的配置按钮来提供选择手段。
当用户选择视图(或者如果仅存在一个视图)时,视图的不同区域以及在MMT-CIXML片段上所定义的它们的位置和大小被显示给用户。通过浏览CI的不同divLocation元素、选择开始属性被设置为0s的divLocation元素以及读取CSS样式参数,可以容易地访问这样的信息。图3示意性地例示当CI如图1的示例中那样地定义三个区域310_1、310_2和310_3时在显示设备350上展示给用户的视图300的示例。
通过使用在触摸屏上可用的传统的拖放(drag’n’drop)和捏缩放大(pinch’n’zoom)技术,用户能够在由修改参数强加的约束内,修改由对应的修改锁定参数指示为可修改的视图300的每个区域310的位置和大小。用户终端350的呈现引擎在允许区域被修改之前验证视图300和每个区域301的修改锁定参数“isLocked”属性。类似地,当重新调整区域的大小时,验证CSS样式,并且强制执行调整大小、最小宽度、最大宽度、最小高度和最大高度属性(如果这些属性存在)。如果用户希望使两个区域重叠,那么如果已经由对应的显示可见度参数对该区域设置了“minVisibility”属性,则验证重叠区域的最小可见度参数。
当在CI中定义了若干视图时,向用户提供在不同视图之间移动区域的手段。在一个示例中,借助于与每个区域相关联的上下文菜单来执行该操纵,上下文菜单提供使得能够将区域从一个视图发送到另一个视图的下面的动作。例如:“将区域发送到不同的视图”和“从不同的视图导入区域”。当选择了动作时,使用用户接口来选择将要导出到哪个视图或将从哪个视图导入。在触摸屏上,例如上下文菜单可以响应区域上的延长的触摸压力(保持手势)而获得。如果那个区域的视图锁定参数意味着区域无法从原始的视图移动(例如,“isLockedToView”被设置为真),则该区域保持固定在原始的视图中,并且被防止借助于用户接口从一个视图移动到另一个视图。
当用户已经完成组成的个性化时,能够触发通过物理的菜单按钮或者存在于接口上的配置按钮可访问的保存动作。然后,修改的CI片段能够被发送回到主显示器,以便处理。
在允许修改组成的用户接口的另一个实施例中,用户接口操作基于MMT-CI层和MMT包HTML5页面。
在与MMT包相关联的HTML5页面中描述关于在所有区域中存在的媒体资产的信息。因此,通过将CI XML片段和HTML5页面两者发送给第二显示设备以便进行个性化,能够提供与第一示例的接口相类似的用户接口,但是在该用户接口上,图形区域能够用相应的媒体实体的实际媒体内容充满。图4例示视图400包含区域410_1、410_2和410_3的这样的示例。视频内容存在于区域1 410_1中,文本数据存在于区域2 410_2中,而图像内容存在于区域3410_3中。
图5示意性地例示可以实现本发明的一个或多个实施例的数据通信系统。数据通信系统500包括传送设备(在该情况下为服务器510),传送设备可操作以将数据流的数据包经由数据通信网络530传送给接收设备(在该情况下为客户终端510)。数据通信网络530可以是广域网(WAN)或者局域网(LAN)。这样的网络可以是例如无线网络(Wifi 1 802.11a或b或g)、以太网网络、因特网网络或者由若干不同网络组成的混合网络。在本发明的具体实施例中,数据通信系统可以是数字电视广播系统,其中服务器510将相同的数据内容发送给多个客户端520。
由服务器510提供的数据流540包括代表以MMT包的形式传送的视频和音频数据的多媒体数据以及组成信息。多媒体数据包括诸如图像、音频和文本(字符串)这样的各种类型的媒体数据的数据。组成信息定义多媒体资产的时间/空间布置数据。时间/空间布置数据确定媒体数据的每个成分或媒体实体的再现定时和再现形式,亦即时间/空间布置,例如何时再现媒体数据和/或在何位置处显示媒体数据。
服务器510配备有编码器,以便对视频和音频流进行编码,特别是为了提供经压缩的位流以便传送,经压缩的位流是作为给编码器的输入而展示的数据的更紧凑的表示。服务器还配备有MMT设备550,以便提供如在前面的示例中定义的修改参数,以在预先定义的约束内修改如在组成信息中所定义的媒体内容的展示。
客户端520接收所传送的位流,并且对经重构的位流进行解码,以在客户终端上呈现多媒体数据。客户端520的用户可以根据由本发明的实施例的修改参数所设置的约束来修改多媒体内容的呈现。
图6例示根据本发明的实施例的传送装置600。输入媒体数据(例如音频和视频数据)在媒体编码器610处被编码。经编码的数据在多路复用器620处被多路复用,并且在传送器630处被传送。传送系统可以在典型的广播TV环境中使用,或者可以在提供视听服务的移动设备中使用。MMT CI模块640设置如在前面的示例中所定义的修改参数,以便修改如在组成信息中所定义的媒体内容的展示。
图7例示根据本发明的实施例的用户终端700。用户终端700的输入数据可以是传输位流,例如传送装置600的输出。数据在接收器710处被接收,在多路分配器720处被多路分配,然后在媒体解码器730处被解码。经解码的包能够被放置在多路分配器720的缓冲器中。呈现引擎740根据在MMT CI数据中定义的时间/空间关系以及修改参数来呈现媒体内容。呈现引擎配备有CI代理745,以便处理包括HTML5页面和CI文件的组成信息。
图8例示可以实现本发明的一个或多个实施例的接收系统800。总的来说,在图8的视频接收器系统中,使用携带代表广播节目内容的音频、视频和关联数据的信号进行调制的广播载波由天线10接收并且由输入处理器13处理。所得到的数字输出信号由解调器15进行解调。通过解码器17对来自单元15的经解调的输出进行格型解码(trellis decoded)、映射到字节长度的数据段、去交错以及Reed-Solomon纠错。来自单元17的输出数据是以包含节目代表性(program representative)的经多路复用的音频、视频和数据成分的MPEG兼容的传输数据流的形式。来自单元17的传输流通过单元22被多路分配成音频、视频和数据成分,其进一步由解码器100的其他元件处理。在一种模式下,解码器100提供经MPEG解码的数据,以便分别根据由对应的组成信息所定义的时间/空间关系以及根据本发明的实施例的修改参数所执行的修改,在单元50和55上进行显示和音频再现。在另一种模式下,来自单元17的传输流由解码器100处理,以提供MPEG兼容的数据流,以便经由存储设备90存储在存储介质105上。
用户通过使用远程控制单元70进行选择,以便观看TV信道或者诸如节目指南这样的屏幕上的菜单。处理器60使用从远程控制单元70经由接口65提供的选择信息来适当地配置图8的元件,以接收所期望的节目信道来观看。处理器60包括处理器62和控制器64。单元62处理(亦即解析、核对和装配)包括节目指南和系统信息的节目特定信息,控制器64执行在操作解码器100时所需的其他控制功能。虽然如图8所示,可以将单元60的功能实现为单独的元件62和64,但是它们可以替代地在单个处理器内实现。例如,单元62和64的功能可以合并在微处理器的编程指令内。处理器60配置处理器13、解调器15、解码器17和解码器系统100,以对输入信号格式和编码类型进行解调和解码。
详细地考虑图8,使用由天线10接收的、携带节目代表性音频、视频和关联数据的信号进行调制的载波由输入处理器13转换成数字形式并且进行处理。处理器13包括射频(RF)调谐器以及中频(IF)混合器和放大级,以便将输入信号向下变换(downconvert)成适合于进一步处理的较低频带。
为了示例性的目的,假设视频接收器用户使用远程控制单元70选择子信道(SC)进行观看。处理器60使用从远程控制单元70经由接口65提供的选择信息来适当地配置解码器100的元件,以接收与所选择的子信道sc相对应的物理信道。
提供给处理器22的输出数据是以包含通过若干子信道分发的许多节目的节目信道内容和节目具体信息的传输数据流的形式。
处理器22将由解码器17提供的进入包的包标识符(PID)与正在子信道sc上传送的视频、音频和子画面流的PID值进行匹配。这些PID值由处理器60预先加载到单元22内的控制寄存器中。处理器22捕获构成在子信道SC上传送的节目的包,并且将它们形成为MPEG兼容的视频、音频数据流,以分别输出给视频解码器25、音频解码器35。视频流和音频流包含代表所选择的子信道SC节目内容的经压缩的视频和音频数据。
解码器25对来自单元22的MPEG兼容的包化的(packetized)视频数据进行解码和解压缩,并且将经解压缩的节目代表性像素数据提供给设备50用于显示。类似地,音频处理器35对来自单元22的包化的音频数据进行解码,并且将与相关联的经解压缩的视频数据同步的、经解码的音频数据提供给设备55用于音频再现。
MPEG数据能够根据由对应的组成信息所定义的时间/空间关系以及根据本发明的实施例的修改参数所执行的修改来呈现。
在图8的系统的存储模式中,来自单元17的输出数据由解码器100处理,以提供MPEG兼容的数据流用于存储。在该模式下,由用户经由远程单元70和接口65选择节目以用于存储。
处理器60连同处理器22形成合成的MPEG兼容的数据流,其包含所选择的节目的包化的内容数据以及相关联的节目特定信息。合成的数据流输出到存储接口95。存储接口95缓冲合成的数据流,以减少数据中的间隙和位速率变化。所得到的缓冲数据由存储设备90处理,以适合于存储在介质105上。存储设备90使用诸如信道编码、交错以及Reed Solomon编码这样的已知的误差编码技术,对来自接口95的缓冲数据流进行编码,以产生适合于存储的经编码的数据流。单元90将合并有经压缩的节目特定信息的、所得到的经编码的数据流存储在介质105上。
在这里描述的本发明的实施例可以例如以方法、处理、装置、软件程序、数据流或者信号来实现。即使仅在单个形式的实现方式的背景下讨论(例如,仅作为方法讨论),所讨论的特征的实现方式也可以以其他形式(例如,装置或程序)来实现。例如,装置可以以适当的硬件、软件和固件来实现。例如,方法可以以诸如例如通常指处理设备的处理器这样的装置实现,处理设备包括例如计算机、微处理器、集成电路或者可编程逻辑设备。处理器也可以包括诸如例如计算机、平板、蜂窝电话、便携式/个人数字助理(“PDA”)这样的通信设备以及便于信息在最终用户之间通信的其他设备。
本原理对于“一个实施例”或者“实施例”或者“一种实现方式”或者“实现方式”的引用以及它们的其他变型,意思是结合该实施例描述的具体特征、结构、特性等包括在本原理的至少一个实施例中。因此,遍及说明书在不同位置处出现的短语“在一个实施例中”或者“在实施例中”或者“在一种实现方式中”或者“在实现方式中”以及任何其他变型的出现未必都指相同的实施例。
另外,本申请或者其权利要求书可以指“确定”各条信息。确定信息可以包括例如估计信息、计算信息、预测信息或者从存储器中取回信息中的一个或多个。
另外,本申请或者其权利要求书可以指“接收”各条信息。与“访问”一样,接收打算为广泛的术语。接收信息可以包括例如访问信息或者取回信息(例如,从存储器中)中的一个或多个。而且,在诸如例如存储信息、处理信息、传送信息、移动信息、复制信息、擦除信息、计算信息、确定信息、预测信息或者估计信息的操作期间典型地以各种方式涉及“接收”。
对本领域中的技术人员将显而易见的是,实现方式可以产生被格式化以携带例如可以被存储或传送的信息的各种信号。信息可以包括例如用于执行方法的指令或者由所描述的实现方式之一所产生的数据。例如,可以对信号进行格式化以携带所描述的实施例的位流。可以将这样的信号格式化成例如电磁波(例如,使用频谱的射频部分)或者格式化成基带信号。格式化可以包括例如对数据流进行编码以及使用经编码的数据流对载波进行调制。信号携带的信息例如可以是模拟或者数字信息。如所知的那样,信号可以在各种不同的有线或无线链路上传送。信号可以存储在处理器可读的介质上。
虽然已经在上文参照具体实施例描述了本发明,但是本发明不局限于具体实施例,在本发明的范围内的修改对于本领域技术人员将是显然的。
例如,虽然已经参照MMT资产描述了前述示例,但是应当意识到,本发明可以应用于其他形式的媒体实体或成分或者其他形式的数据。
当参照前述例示性实施例时,本领域技术人员将想到许多另外的修改和变型,前述例示性实施例仅作为示例给出而不打算限制本发明的范围,本发明的范围仅由所附权利要求书来确定。具体地,在适当的情况下,来自不同的实施例的不同特征可以互换。
Claims (24)
1.一种传送用于在至少一个显示区上呈现媒体数据的内容的显示组成数据的方法,显示区包含一个或多个显示子区,其中显示组成数据包括MPEG多媒体传输组成信息MMT-CI,该MPEG多媒体传输组成信息MMT-CI定义媒体数据的内容成分之间的空间关系和时间关系中的至少一个,该方法包括:
传送相应的显示区和/或相应的显示子区的显示修改数据,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由接收所述显示修改数据的设备的用户修改,其中显示修改数据包括:修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由所述用户修改,以及至少一个修改参数,指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束,
其中所述MMT-CI还定义用于支持在一个或多个显示设备上的同时显示的多个视图,并且所述修改参数包括查看锁定参数,指示显示设备中的视图的区域是否可以移动到另一个显示设备中的另一个视图。
2.根据权利要求1所述的方法,其中显示区的相应的修改锁定参数包括在显示组成数据的对应的视图元素中。
3.根据权利要求1至2中的任一项所述的方法,其中显示子区的相应的修改锁定参数包括在显示组成数据的对应的区域元素中。
4.根据权利要求1至2中的一项所述的方法,其中至少一个修改参数包括:查看锁定参数,指示在相应的显示区上显示的媒体数据是否可以在与相应的显示区不同的另一个显示区上显示。
5.根据权利要求1至2中的任一项所述的方法,其中至少一个修改参数包括与显示区的对应的显示子区相关联的查看锁定参数,并且指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现。
6.根据权利要求5所述的方法,其中查看锁定参数包括在与所述显示子区相对应的组成数据的区域元素中。
7.根据权利要求1至2中的任一项所述的方法,其中至少一个修改参数包括:显示子区可见度参数,定义在显示期间可见的相应的显示子区的最小比例。
8.根据权利要求7所述的方法,其中显示子区可见度参数包括在与所述显示子区相对应的显示组成数据的区域元素中。
9.根据权利要求7所述的方法,其中显示子区可见度参数基于显示子区的表面面积和与所述显示子区重叠的其他显示子区的总表面面积的比率。
10.根据权利要求8所述的方法,其中显示子区可见度参数基于显示子区的表面面积和与所述显示子区重叠的其他显示子区的总表面面积的比率。
11.根据权利要求9或10所述的方法,其中子区AreaN的显示子区可见度参数Visibility(AreaN)根据下式确定:
其中Areai指与AreaN重叠的所有区域,并且Transparency对应于与对应的显示子区的透明度的量相对应的加权因子。
12.根据权利要求1至2中的任一项所述的方法,其中至少一个修改参数包括:显示可见度参数,定义在对应的显示区或显示子区上的显示期间可见的媒体内容成分的最小比例。
13.根据权利要求1或2所述的方法,其中MMT组成信息包括XML文件。
14.一种在至少一个显示区上显示媒体数据的内容的方法,显示区包含一个或多个显示子区,该方法包括:
接收用于在至少一个显示区上呈现媒体数据的内容的显示组成数据以及相应的显示区和/或相应的显示子区的显示修改数据,其中显示组成数据包括MPEG多媒体传输组成信息MMT-CI,该MPEG多媒体传输组成信息MMT-CI定义媒体数据的内容成分之间的空间关系和时间关系中的至少一个,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由接收所述显示修改数据的设备的用户修改;
根据由显示组成数据所定义的第一显示配置,在显示区上呈现媒体数据的内容成分,其中显示区或显示子区可以由所述用户根据显示修改数据来修改,其中显示修改数据包括:修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由所述用户修改,以及至少一个修改参数,指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束,
其中所述MMT-CI还定义用于支持在一个或多个显示设备上的同时显示的多个视图,并且所述修改参数包括查看锁定参数,指示显示设备中的视图的区域是否可以移动到另一个显示设备中的另一个视图。
15.根据权利要求14所述的方法,其中至少一个修改参数包括与所述显示区的对应的显示子区相关联的查看锁定参数,并且指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现。
16.根据权利要求14或15所述的方法,其中至少一个修改参数包括:显示子区可见度参数,定义在显示期间可见的相应的显示子区的最小比例。
17.根据权利要求14或15所述的方法,其中MMT组成信息包括XML文件。
18.一种传送用于在至少一个显示区上呈现媒体数据的内容的显示组成数据的装置,显示区包含一个或多个显示子区,其中显示组成数据包括MPEG多媒体传输组成信息MMT-CI,该MPEG多媒体传输组成信息MMT-CI定义媒体数据的内容成分之间的空间关系和时间关系中的至少一个,该装置包括:
显示修改参数设置模块,用于设置显示区和/或显示子区的显示修改参数,显示修改参数指示相应的显示区或显示子区的视觉配置可以如何由接收所述显示修改数据的设备的用户修改;以及
传送器,用于传送显示组成数据和显示修改参数,其中显示修改参数设置模块被配置为设置修改锁定参数,修改锁定参数指示相应的显示区或显示子区的视觉配置是否可以由所述用户修改,以及设置至少一个修改约束参数,所述至少一个修改约束参数指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束,
其中所述MMT-CI还定义用于支持在一个或多个显示设备上的同时显示的多个视图,并且所述修改参数包括查看锁定参数,指示显示设备中的视图的区域是否可以移动到另一个显示设备中的另一个视图。
19.根据任何权利要求18所述的装置,其中显示修改参数设置模块被配置为设置查看锁定参数,查看锁定参数与所述显示区的对应的显示子区相关联,并且指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现。
20.根据权利要求18或19所述的装置,其中显示修改参数设置模块被配置为设置显示子区可见度参数,显示子区可见度参数定义在显示期间可见的相应的显示子区的最小比例。
21.一种用于修改媒体数据的内容在至少一个显示区上的显示的终端设备,显示区包含一个或多个显示子区,该终端设备包括:
接收器,用于接收用于在至少一个显示区上呈现媒体数据的内容的显示组成数据,其中显示组成数据包括MPEG多媒体传输组成信息MMT-CI,该MPEG多媒体传输组成信息MMT-CI定义媒体数据的内容成分之间的空间关系和时间关系中的至少一个;以及用于接收相应的显示区和/或相应的显示子区的显示修改数据,显示修改数据指示相应的显示区或显示子区的视觉配置可以如何由所述终端设备的用户修改;
呈现引擎,用于根据显示组成数据,确定媒体数据的一个或多个内容成分之间的空间和/或时间关系;
显示器,用于根据由显示组成数据所定义的第一显示配置,在显示区上显示媒体数据的内容成分;以及
用户接口,用于根据显示修改数据,修改显示区或显示子区,其中显示修改数据包括:修改锁定参数,指示相应的显示区或显示子区的视觉配置是否可以由所述用户修改,以及至少一个修改参数,指示强加在相应的显示区或子区的视觉配置的用户修改上的修改约束,
其中所述MMT-CI还定义用于支持在一个或多个显示设备上的同时显示的多个视图,并且所述修改参数包括查看锁定参数,指示显示设备中的视图的区域是否可以移动到另一个显示设备中的另一个视图。
22.根据权利要求21所述的终端设备,其中至少一个修改参数包括与显示区的对应的显示子区相关联的查看锁定参数,并且指示对应的显示子区是否可以在与所述显示区不同的另一个显示区上呈现。
23.根据权利要求21或22所述的终端设备,其中至少一个修改参数包括:显示子区可见度参数,定义在显示期间可见的相应的显示子区的最小比例。
24.一种计算机可读存储介质,其中存储有可编程装置的计算机程序,该计算机程序包括在被加载到可编程装置中并且由可编程装置执行时实现根据权利要求1至17中的任一项所述的方法的指令序列。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP20130306458 EP2866436A1 (en) | 2013-10-23 | 2013-10-23 | Method and apparatus for transmission and reception of media data |
EP13306458.4 | 2013-10-23 | ||
PCT/EP2014/072648 WO2015059189A1 (en) | 2013-10-23 | 2014-10-22 | Method and apparatus for transmission and reception of media data |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105830456A CN105830456A (zh) | 2016-08-03 |
CN105830456B true CN105830456B (zh) | 2019-09-06 |
Family
ID=49546362
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480068646.1A Active CN105830456B (zh) | 2013-10-23 | 2014-10-22 | 传送和接收媒体数据的方法和装置 |
Country Status (10)
Country | Link |
---|---|
US (1) | US10573274B2 (zh) |
EP (2) | EP2866436A1 (zh) |
JP (1) | JP6529493B2 (zh) |
KR (1) | KR102240784B1 (zh) |
CN (1) | CN105830456B (zh) |
BR (1) | BR112016009164B1 (zh) |
CA (1) | CA2928152C (zh) |
MX (1) | MX355764B (zh) |
TW (1) | TWI707582B (zh) |
WO (1) | WO2015059189A1 (zh) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014215859A (ja) * | 2013-04-26 | 2014-11-17 | ソニー株式会社 | 受信装置、受信装置における情報処理方法、送信装置、情報処理装置および情報処理方法 |
EP2963892A1 (en) * | 2014-06-30 | 2016-01-06 | Thomson Licensing | Method and apparatus for transmission and reception of media data |
JPWO2017038482A1 (ja) | 2015-09-01 | 2018-06-21 | ソニー株式会社 | 受信装置、送信装置、及び、データ処理方法 |
US20170344523A1 (en) * | 2016-05-25 | 2017-11-30 | Samsung Electronics Co., Ltd | Method and apparatus for presentation customization and interactivity |
US10602239B2 (en) * | 2017-03-23 | 2020-03-24 | Mediatek Inc. | Method and apparatus for track composition |
US10887645B2 (en) * | 2017-07-13 | 2021-01-05 | Qualcomm Incorporated | Processing media data using file tracks for web content |
US11321516B2 (en) | 2018-01-19 | 2022-05-03 | Qualcomm Incorporated | Processing dynamic web content of an ISO BMFF web resource track |
JP6813933B2 (ja) * | 2018-07-19 | 2021-01-13 | 日本電信電話株式会社 | 映像音声伝送システム、伝送方法、送信装置及び受信装置 |
US10897637B1 (en) * | 2018-09-20 | 2021-01-19 | Amazon Technologies, Inc. | Synchronize and present multiple live content streams |
US10863230B1 (en) | 2018-09-21 | 2020-12-08 | Amazon Technologies, Inc. | Content stream overlay positioning |
US11647259B2 (en) * | 2020-06-17 | 2023-05-09 | Yieldmo, Inc. | Method for serving interactive digital advertising content within a streaming platform |
CN112738610A (zh) * | 2020-12-25 | 2021-04-30 | 北京达佳互联信息技术有限公司 | 多媒体数据的显示控制方法、装置、电子设备及存储介质 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3760755B2 (ja) | 2000-10-11 | 2006-03-29 | 日産自動車株式会社 | 音声入力装置 |
WO2002052565A1 (en) * | 2000-12-22 | 2002-07-04 | Muvee Technologies Pte Ltd | System and method for media production |
WO2003041405A1 (en) | 2001-11-07 | 2003-05-15 | Sharp Kabushiki Kaisha | Data reception apparatus |
CN101286172B (zh) | 2002-09-13 | 2012-11-14 | 雅虎公司 | 改进的浏览器用户界面 |
EP1491990B1 (en) * | 2003-06-20 | 2010-02-17 | Apple Inc. | Graphical user interface system and method of displaying objects in a graphical user interface |
EP1714281A2 (en) * | 2004-02-10 | 2006-10-25 | LG Electronic Inc. | Recording medium and method and apparatus for decoding text subtitle streams |
US7788578B1 (en) | 2004-02-18 | 2010-08-31 | Microsoft Corporation | System and method for a tool pane within a markup language document |
US9489216B2 (en) * | 2007-07-26 | 2016-11-08 | Sap Se | Active tiled user interface |
US9619143B2 (en) | 2008-01-06 | 2017-04-11 | Apple Inc. | Device, method, and graphical user interface for viewing application launch icons |
ES2561404T3 (es) * | 2008-09-29 | 2016-02-26 | Koninklijke Philips N.V. | Sistema y método para redimensionamiento de ventana |
US8479117B2 (en) * | 2010-06-04 | 2013-07-02 | Lenovo (Singapore) Pte. Ltd. | Intelligent window sizing for graphical user interfaces |
US9864612B2 (en) * | 2010-12-23 | 2018-01-09 | Microsoft Technology Licensing, Llc | Techniques to customize a user interface for different displays |
WO2012173402A2 (ko) * | 2011-06-14 | 2012-12-20 | 삼성전자 주식회사 | 방송 시스템에서 컨텐트를 구성하는 방법 및 장치 |
EP2744196A1 (en) * | 2011-08-11 | 2014-06-18 | Panasonic Corporation | Hybrid broadcast and communication system, data generation device, and receiver |
TWI441075B (zh) * | 2011-09-02 | 2014-06-11 | Asustek Comp Inc | 資訊整合顯示方法及其應用之觸控顯示裝置 |
US9319721B2 (en) * | 2011-10-13 | 2016-04-19 | Electronics And Telecommunications Research Institute | Method of configuring and transmitting an MMT transport packet |
US20130111330A1 (en) * | 2011-11-01 | 2013-05-02 | Research In Motion Limited | Accelerated compositing of fixed position elements on an electronic device |
-
2013
- 2013-10-23 EP EP20130306458 patent/EP2866436A1/en not_active Withdrawn
-
2014
- 2014-10-22 US US15/030,585 patent/US10573274B2/en active Active
- 2014-10-22 CN CN201480068646.1A patent/CN105830456B/zh active Active
- 2014-10-22 JP JP2016525964A patent/JP6529493B2/ja active Active
- 2014-10-22 WO PCT/EP2014/072648 patent/WO2015059189A1/en active Application Filing
- 2014-10-22 CA CA2928152A patent/CA2928152C/en active Active
- 2014-10-22 BR BR112016009164-7A patent/BR112016009164B1/pt active IP Right Grant
- 2014-10-22 EP EP14808855.2A patent/EP3061240B1/en active Active
- 2014-10-22 MX MX2016005201A patent/MX355764B/es active IP Right Grant
- 2014-10-22 KR KR1020167010763A patent/KR102240784B1/ko active IP Right Grant
- 2014-10-23 TW TW103136557A patent/TWI707582B/zh active
Also Published As
Publication number | Publication date |
---|---|
TWI707582B (zh) | 2020-10-11 |
WO2015059189A8 (en) | 2016-01-14 |
BR112016009164B1 (pt) | 2023-04-04 |
CA2928152C (en) | 2022-04-26 |
KR102240784B1 (ko) | 2021-04-14 |
KR20160074511A (ko) | 2016-06-28 |
WO2015059189A1 (en) | 2015-04-30 |
MX355764B (es) | 2018-04-30 |
EP3061240B1 (en) | 2020-09-09 |
BR112016009164A2 (zh) | 2017-08-01 |
CN105830456A (zh) | 2016-08-03 |
JP2016540419A (ja) | 2016-12-22 |
EP2866436A1 (en) | 2015-04-29 |
JP6529493B2 (ja) | 2019-06-12 |
US20160267879A1 (en) | 2016-09-15 |
EP3061240A1 (en) | 2016-08-31 |
TW201521433A (zh) | 2015-06-01 |
MX2016005201A (es) | 2016-12-16 |
US10573274B2 (en) | 2020-02-25 |
CA2928152A1 (en) | 2015-04-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105830456B (zh) | 传送和接收媒体数据的方法和装置 | |
US20200236411A1 (en) | Multimedia device and control method therefor | |
EP3343939B1 (en) | Display device and control method therefor | |
CN104902290B (zh) | 管理多个时间源数据的显示装置及其控制方法 | |
US10306338B2 (en) | Personalized user interface for managing multimedia streams | |
KR101482795B1 (ko) | 레이저 콘텐츠 송수신 방법 및 장치 | |
EP1359750B1 (en) | Television receiver and method for providing information to the same | |
CN111277911B (zh) | 一种全景视频的图像处理方法、显示设备及服务器 | |
CN106605408B (zh) | 用于传送和接收媒体数据的方法和装置 | |
US20100281406A1 (en) | Information providing device, information display device, information providing system, information providing method, program, and computer-readable storage medium having program stored therein | |
KR20170018519A (ko) | 디스플레이 디바이스 및 그 제어 방법 | |
US20090161012A1 (en) | Dynamic multilayer video processing method | |
KR20190001601A (ko) | 프리젠테이션 커스터마이제이션 및 인터랙티비티를 위한 방법 및 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20190605 Address after: France Applicant after: Interactive Digital CE Patent Holding Company Address before: I Si Eli Murli Nor, France Applicant before: Thomson Licensing SA |
|
GR01 | Patent grant | ||
GR01 | Patent grant |