CN100481957C - 媒体同步方法 - Google Patents

Abstract

本发明公开了一种媒体同步方法，它把数据广播和视音频的绑定推迟到了播出时，提高了应用的灵活性，还可实现定时事件触发和即时事件触发。其技术内容为：该同步方法利用数字视频广播家庭多媒体平台规范中的流事件对象实现视音频和数据内容的同步，该同步方法包括将视音频服务和数据服务绑定为虚拟频道服务的系统配置、针对该虚拟频道服务的节目制作、对制作好的节目进行的封装和广播、广播节目在机顶盒端的传输以及广播节目在机顶盒端的接收和应用。本发明应用于数字视频广播领域。

Description

媒体同步方法

技术领域

本发明涉及一种媒体同步方法，尤其涉及一种在数字广播领域中实现视音频和数据内容同步的方法。

背景技术

在数字电视广播中，需要将视频音频的内容同数据内容绑定在一起并实现两者的同步。现有的实现方式是在数据广播的页面中加入特定的标签，标签中需要指定播出视音频的服务标识(Service ID)，也就意味着数据广播的页面在制作完成的时候就必须确定和哪个服务关联，通常情况下，必须要求视音频和数据广播内容位于同一个数据传输流中。显然，这样的做法会给运营商施加一定的限制，不但不可能随意指定和数据广播内容关联的视音频，而且不可能随意指定数据广播播出的数据传输流。

发明内容

本发明的目的在于解决上述问题，提供了一种媒体同步方法，它把数据广播和视音频的绑定推迟到了播出时，提高了应用的灵活性，还可实现定时类型的事件触发(Scheduled)和即时(Do_It_Now)类型的事件触发。

本发明的技术方案为：一种媒体同步方法，利用数字视频广播家庭多媒体平台规范中的流事件对象实现视音频和数据内容的同步，所述同步方法包括将视音频服务和数据服务绑定为虚拟频道服务的系统配置、针对所述虚拟频道服务的节目制作、对制作好的节目进行的封装和广播、广播节目在机顶盒端的传输以及广播节目在机顶盒端的接收和应用；

其中，所述系统配置包括在业务描述表部分将一视音频服务和一数据服务绑定为一虚拟频道服务，在应用信息表部分对每个数据服务配置对象轮播和数据视频广播-html应用，在节目映射表部分将描述符插入数据服务中；

所述节目制作包括编辑数据应用使用的广播用对象请求代理互连协议流对象，编辑数据应用使用的事件链接文件，编辑数据应用使用的事件工厂文件以及编辑html文件；

所述节目封装和广播是指将节目内容封装为对象轮播格式的数据广播后播出；

所述机顶盒端的传输包括应用信息表的解析、对象轮播的解析以及对象轮播码流的更新；

所述机顶盒端的接收和应用是指在数据节目启动时选择一数据服务进入应用，通过所述广播用对象请求代理互连协议流对象获得与之关联的视频节目的标签，在数据节目结束时触发预设的结束事件，更新替换全部数据，从而传送下一个节目的数据。

上述的媒体同步方法，其中，所述应用信息表部分采用静态应用信息表，且每个数据服务只包含一个对象轮播，每个对象轮播包含一个数据视频广播-html应用。

上述的媒体同步方法，其中，所述节目映射表部分插入的描述符是轮播标识描述符、关联标签描述符、递延关联标签描述符。

上述的媒体同步方法，其中，所述广播用对象请求代理互连协议流对象包含相关视音频节目的持续时间，节目是否携带音频、视频或数据，节目所在的标签。

上述的媒体同步方法，其中，所述事件链接文件用于为应用中的每个html文件指定对应的一个或多个事件工厂文件，所述事件链接文件中的主要元素是使用正则表达式的界限以及指定事件工厂文件的通用资源标志，所述界限用于指定所述元素对应的html文件的范围。

上述的媒体同步方法，其中，所述事件工厂文件指定数据应用中可能使用到的事件信息，定义的事件和文档对象模型中提供的事件绑定，从而使得机顶盒端应用层可以直接访问所述事件。

上述的媒体同步方法，其中，所述事件工厂文件可定义触发事件、系统事件和时间事件三种事件类型，所述触发事件可和对象轮播中的广播用对象请求代理互连协议的流事件对象绑定从而实现事件的即时触发，所述系统事件可实现和整个应用相关事件的触发，所述时间事件可触发定时触发的事件。

上述的媒体同步方法，其中，所述html文件直接引用事件流对象，所述事件流对象的内容在播出前确定，定时触发的事件和即时触发的事件是根据事件标识号的取值范围而区分的，对于定时触发的事件，编辑结束后保留相对节目开始播出的时间，此后机顶盒根据事件标识号监听指定事件的触发时刻正常播放时间，用该指定事件的触发时刻正常播放时间和流描述符基本流中的正常播放时间引用描述符中的正常播放时间比较，如果该指定事件的触发时刻正常播放时间大于该流描述符基本流中的正常播放时间引用描述符中的正常播放时间则触发；对于即时触发的事件，机顶盒根据事件标识号监听指定事件，一旦接收到该事件的流描述符，则立即触发，不用判断正常播放时间值。

上述的媒体同步方法，其中，所述节目制作中的广播用对象请求代理互连协议流对象是指从流对象的文件中提取出信息，编码为广播用对象请求代理互连协议流对象。

上述的媒体同步方法，其中，所述机顶盒端的接收和应用包括以下步骤：

(1)获取应用指定的事件链接文件，所述事件链接文件与应用信息表中指定的应用入口文件同名；

(2)根据事件链接文件的内容，获取html文件对应的事件工厂文件，若有多个事件工厂文件，则先把多个文件的内容合并后再查找；

(3)根据事件工厂文件中指定的事件类型，查找该事件工厂文件中对应的元素描述，所述元素描述包括事件名、事件类型以及包含流事件对象的通用资源标志；

(4)通过指定的事件名和通用资源标志，获得流事件对象的内容；

(5)根据流事件对象的内容解析出事件标志和对应的标识；

(6)接收对应流的正常播放事件信息，通过比较事件描述符包含的正常播放时间值和流的正常播放时间值来判断流事件对象是否满足触发条件，如果是即时触发的事件描述符，则立即触发；

(7)通过事件类型和事件描述符里包含的负载信息，启动文档对象模型中的事件处理过程。

本发明的媒体同步方法对比现有技术有如下的有益效果。本发明的方法通过数据广播内容中的特定类型对象携带相关联的视音频信息，把数据广播和视音频的绑定推迟到了播出时，提高了应用的灵活性。同时本发明的方法完全遵循数字视频广播家庭多媒体平台(DVB MHP，即Digital Video Broadcast Multimedia HomePlatform)相关规范及我国关于数字电视中间件的相关规范。根据流事件(StreamEvent)对象还可实现定时触发类型和即时触发类型的事件触发。

附图说明

图1是本发明媒体同步方法一个实施例的总流程图。

图2是图1所示实施例的步骤S1的子流程图。

图3是图1所示实施例的步骤S2的子流程图。

图4是图1所示实施例的步骤S3的子流程图。

图5是图1所示实施例的步骤S4的子流程图。

图6是图1所示实施例的步骤S5的子流程图。

图7是本发明即时触发类型的媒体同步方法实施例的示意图。

图8是本发明定时触发类型的媒体同步方法实施例的示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的描述。

图1示出了本发明媒体同步方法一个实施例的总流程。请参见图1，说明本发明的流程。

步骤S1：将视音频服务和数据服务绑定为虚拟频道服务的系统配置。主要是完成三个部分的配置：业务描述表(SDT，Service Description Table)、应用信息表(AIT，Application Information Table)、节目映射表(PMT，Program MapTable)。

请参见图2，系统配置包括步骤S11-S13：

步骤S11：在SDT部分，将某视频服务和某数据绑定为一特殊的虚拟频道服务，其中该视频服务的服务类型设置为自定义，以确保用户无法直接切换到该视频服务对应的频点收看视频节目。

步骤S12：在AIT部分，采用静态AIT，且每个数据服务只包含一个数据轮播，每个数据轮播包含一个数字视频广播-HTML(DVB-HTML)应用。

步骤S13：在PMT部分，在数据服务中插入轮播标识描述符(CarouselIdentifier Descriptor)、关联标签描述符(Association Tag Descriptor)、递延关联标签描述符(Deferred Association Tag Descriptor)。

上述步骤S11-S13均由EPG系统负责完成。

步骤S2：针对虚拟频道服务制作节目。主要是根据已有的视频节目(比如足球比赛录像)，使用图文资料制作对应的数据节目。

请参见图3，制作节目的流程包括步骤S21-S24：

步骤S21：编辑数据应用使用的广播用对象请求代理互连协议流(BIOPStream，Broadcast Inter ORB Protocol)对象。该对象可采用xml文件格式来实现，后缀名可使用“str”。该BIOP Stream对象包含相关视音频节目的持续时间，节目是否携带音频、视频或数据，节目所在的标签(tag)。该标签值用于数据应用对应PMT中的递延关联标签描述符中，用于指明该标签值对应的节目，而该节目必须和数据应用对应的节目位于同一个传输流中。

步骤S22：编辑数据应用使用的事件链接(Event Linkage)文件。该文件可使用后缀名“lnk”，用于为应用中的每一个html文件指定对应的一个或多个事件工厂(Event Factory)文件。文件中主要元素或属性为界限(boundary)和通用资源标志(URI)。界限使用正则表达式，指定该元素对应的html文件的范围。URI指定事件工厂文件的URI，其常用格式可能是：“dvb://<original-network_id>.[<transport_stream_id>][.<service_id>[.<component_tag>{&<component_tag>}][；<event_id>]]{/<path_segments>}”或者“dvb://′<textual-service_identifier>′[.<component_tag>{&<component_tag>}][；<event_id>]]{/<path_segments>}”。

步骤S23：编辑数据应用使用的事件工厂(Event Factory)文件。该文件使用后缀名“evt”，用于指定数据应用中可能使用到的event的信息，定义的event将和文档对象模型(Document Object Model，DOM)中提供的事件进行绑定，从而使得机顶盒端可以直接访问使用这些事件。

文件允许定义三种不同的事件：触发事件(trigger-event)、系统事件(system-event)、时间事件(time-event)。其中触发事件可以和数据轮播(0C)中的BIOP Stream Event对象绑定从而实现事件的即时触发。系统事件用于实现和整个应用相关事件的触发，例如事件类型为“dvb.s tart”用于触发AppStarting事件，而事件类型为“dvb.page”用于触发页面的跳转事件。时间事件用于触发定时触发的事件，即事件触发的时刻在广播前就是已知的。时间事件的主要属性有：类型(Type)、目标(Target)、时间(Time)、Bubbles和Cancelable。此外，还可以增加自定义属性，需要指定属性的名称及模式。而模式应该是一个正则表达式，用于指示如何从事件的有效载荷(payload)中提取信息并赋给DOM的事件作为初始值。模式的格式可以是“/pattern/flags:replacement”。举例来说，模式格式为“/(\d+)/g：$1$2$3”，如果payload是“box 12 in 34 by 567 for 248”，那么应用此模式后提取出来的信息就是“1234567”。

步骤S24：编辑html文件。在该文件中对于和数据应用绑定的视频应用的引用可使用BIOP Stream对象，即html文件内可以使用相对路径直接引用Stream对象，而Stream对象的内容可以在播出前决定。

上述步骤S21-S24中，步骤S21-S23可以是事先制作完毕可重复使用的模板。

步骤S3：将节目内容封装为OC格式的数据广播并在头端对其进行广播发送。主要是修改步骤S21中后缀名为“str”的文件，将视频真正对应的服务ID或PMT填入，修改步骤S23中后缀名为“evt”的文件，将相对时间转换成绝对时间。请参见图4，封装广播的流程包括步骤S31-S33。

步骤S31：将节目内容封装成OC格式。

步骤S32：根据流事件(Stream Event)对象创建携带流事件描述符(StreamEvent Descriptor)的时间基准(TimeBase)。这一步骤是可选的，仅当该事件为定时触发的事件时才需要。

步骤S33：用户通过播控操作触发Do_It_Now类型的流事件。

步骤S34：服务器端将触发后生成的流事件描述符(Stream Event Descriptor)广播出去，使之在码流中保持一定的时间以保证机顶盒肯定能接收到并实施触发。

步骤S4：广播节目在机顶盒端的传输。请参见图5，在机顶盒端的传输流程包括步骤S41-S43。

步骤S41：应用信息表(AIT)的解析。AIT中支持的描述符有应用描述符(Application descriptor)、传输协议描述符(Transport protocol descriptor)、确定此类应用为html应用的DVB-HTML应用描述符(DVB-HTML applicationdescriptor)、描述html应用的入口文件和入口参数的DVB-HTML应用位置描述符(DVB-HTML application location descriptor)以及应用名称描述符(Application name descriptor)。

步骤S42：对象轮播(0C)的解析。OC中的对象包括：网关、目录、文件、流、流事件几类。网站类纯数据应用只需要网关、目录、文件三种对象即可支持。而视频数据绑定应用则需要增加流、流事件对象才可以实现。

步骤S43：对象轮播(0C)码流的更新。OC码流的更新包括文件的更新以及流事件(Stream Event)相关信息的更新，即对流事件描述符(Stream EventDescriptor)的更新，它携带了定时触发类型(Scheduled)和即时触发(Do_It_Now)类型的流事件触发条件和负载的内容。

步骤S5：广播节目在机顶盒端的接收和应用。请参见图6，广播节目在机顶盒端的接收和应用包括步骤S51-S57。

步骤S51：机顶盒获取应用指定的事件链接文件，该事件链接文件与AIT中指定的应用入口文件同名。

步骤S52：根据事件链接文件的内容，获取html文件对应的事件工厂文件，若有多个事件工厂文件，则先把多个文件的内容合并后再查找。

步骤S53：根据事件工厂文件中指定的事件类型，查找该事件工厂文件中对应的元素描述，该元素描述包括事件名、事件类型以及包含流事件对象的通用资源标志。

步骤S54：通过指定的事件名和通用资源标志，获得流事件对象的内容。

步骤S55：根据流事件对象的内容解析出事件标志和对应的标识。

步骤S56：接收对应流的正常播放事件信息，通过比较事件描述符包含的正常播放时间值(NPT，Normal Play Time)和流的正常播放时间值(NPT，Normal PlayTime)来判断流事件对象是否满足触发条件，即如果该指定事件的触发时刻正常播放时间值大于该流描述符基本流中的正常播放时间引用描述符中的正常播放时间值则触发。如果是即时触发的事件描述符，则立即触发。

步骤S57：通过事件类型和事件描述符包含的负载(payload)信息，启动DOM中的事件处理过程。

下面结合图7和实例对即时触发事件进行说明。

即时触发事件的触发时间在节目播出之前是未知的，通常在现场直播类的应用中使用。当数据节目由制作软件71制作完毕之后，数据内容72包括html文件、图片文件、Stream Event对象(包含Stream Event的ID和Type)、Evt文件(定义Stream Event对象和指定Event Type的关联关系)，其中html文件中写好了对于指定类型的事件在触发时需要执行的动作，比如显示当前比分信息。

视频内容73通常是从其他系统获取，如现场直播的视音频信号。在播出控制软件74中，会加载当前播出数据节目中可供触发的即时事件。当视频的内容出现某种变化，如比分改变，则通过播出控制软件74选择可供选择的事件，设置其负载，比如比分信息“1:0”，并发出触发命令。播出服务器收到该命令则将这些内容以DSM-CC描述符的形式复用到播出的视频/数据混合码流中

机顶盒在收到DSM-CC描述符时，根据其事件的ID，关联到事件的类型，并触发HTML中定义好的和该类型相关的响应函数，同时即时触发事件的负载也作为响应函数的输入，这样通过响应函数可以在电视屏幕上显示当前比分信息“1:0”。

下面再结合图8和实例对定时触发事件进行说明。

定时触发事件的触发时间在节目播出之前是已知的，通常在非现场转播类的应用中使用，如远程教育。当数据节目由制作软件81制作完毕之后，数据内容82包括html文件、图片文件、Stream Event对象(包含Stream Event的ID和类型)、Evt文件(定义Stream Event对象和指定Event Type的关联关系)，其中html文件中写好了对于指定Type的Event在触发时需要执行的动作，比如切换当前显示的数据页面内容。

视频内容83通常是事先录制好的，如某一专业的课程讲解，此时数据内容82即为对应该课程的教材或参考资料等。假定课程分为3节，每节15分钟，每节的教材内容和参考资料内容都不一样，这样在制作数据节目的时候，可以设置定时触发的事件，在每节结束的时候触发定时触发事件不需要播出控制软件的参与。

当播出时间到达定时触发指定的时间点，如15分钟第一节结束，播出服务器根据定义的定时触发的条件自动触发定时事件。事件的负载也是制作数据节目时指定好的，以DSM-CC描述符的形式复用到播出的视频/数据混合码流中。

机顶盒在收到DSM-CC描述符时，根据其事件的ID，关联到事件的Type，并触发HTML中定义好的和该Type相关的响应函数，同时触发事件的负载也作为响应函数的输入，这样通过响应函数可以在电视屏幕上切换到第二节的教材内容和参考资料。

上述实施例是提供给本领域普通技术人员来实现或使用本发明的，本领域普通技术人员可在不脱离本发明的发明思想的情况下，对上述实施例做出种种修改或变化，因而本发明的保护范围并不被上述实施例所限，而应该是符合权利要求书提到的创新性特征的最大范围。

Claims (10)

1 一种媒体同步方法，其特征在于，利用数字视频广播家庭多媒体平台规范中的流事件对象实现视音频和数据内容的同步，所述同步方法包括将视音频服务和数据服务绑定为虚拟频道服务的系统配置、针对所述虚拟频道服务的节目制作、对制作好的节目进行的封装和广播、广播节目在机顶盒端的传输以及广播节目在机顶盒端的接收和应用；

其中，所述系统配置包括在业务描述表部分将一视音频服务和一数据服务绑定为一虚拟频道服务，在应用信息表部分对每个数据服务配置对象轮播和数据视频广播-html应用，在节目映射表部分将描述符插入数据服务中；

所述节目制作包括编辑数据应用使用的广播用对象请求代理互连协议流对象，编辑数据应用使用的事件链接文件，编辑数据应用使用的事件工厂文件以及编辑html文件；

所述节目封装和广播是指将节目内容封装为对象轮播格式的数据广播后播出；

所述机顶盒端的传输包括应用信息表的解析、对象轮播的解析以及对象轮播码流的更新；

所述机顶盒端的接收和应用是指在数据节目启动时选择一数据服务进入应用，通过所述广播用对象请求代理互连协议流对象获得与之关联的视频节目的标签，在数据节目结束时触发预设的结束事件，更新替换全部数据，从而传送下一个节目的数据。

2 根据权利要求1所述的媒体同步方法，其特征在于，所述应用信息表部分采用静态应用信息表，且每个数据服务只包含一个对象轮播，每个对象轮播包含一个数据视频广播-html应用。

3 根据权利要求2所述的媒体同步方法，其特征在于，所述节目映射表部分插入的描述符是轮播标识描述符、关联标签描述符、递延关联标签描述符。

4 根据权利要求1所述的媒体同步方法，其特征在于，所述广播用对象请求代理互连协议流对象包含相关视音频节目的持续时间，节目是否携带音频、视频或数据，节目所在的标签。

5 根据权利要求1所述的媒体同步方法，其特征在于，所述事件链接文件用于为应用中的每个html文件指定对应的一个或多个事件工厂文件，所述事件链接文件中的主要元素是使用正则表达式的界限以及指定事件工厂文件的通用资源标志，所述界限用于指定所述元素对应的html文件的范围。

6 根据权利要求1所述的媒体同步方法，其特征在于，所述事件工厂文件指定数据应用中可能使用到的事件信息，定义的事件和文档对象模型中提供的事件绑定，从而使得机顶盒端应用层可以直接访问所述事件。

7 根据权利要求1所述的媒体同步方法，其特征在于，所述事件工厂文件可定义触发事件、系统事件和时间事件三种事件类型，所述触发事件可和对象轮播中的广播用对象请求代理互连协议的流事件对象绑定从而实现事件的即时触发，所述系统事件可实现和整个应用相关事件的触发，所述时间事件可触发定时触发的事件。

8 根据权利要求1所述的媒体同步方法，其特征在于，所述html文件直接引用事件流对象，所述事件流对象的内容在播出前确定，定时触发的事件和即时触发的事件是根据事件标识号的取值范围而区分的，对于定时触发的事件，编辑结束后保留相对节目开始播出的时间，此后机顶盒根据事件标识号监听指定事件的触发时刻正常播放时间，用该指定事件的触发时刻正常播放时间和流描述符基本流中的正常播放时间引用描述符中的正常播放时间比较，如果该指定事件的触发时刻正常播放时间大于该流描述符基本流中的正常播放时间引用描述符中的正常播放时间则触发；对于即时触发的事件，机顶盒根据事件标识号监听指定事件，一旦接收到该事件的流描述符，则立即触发，不用判断正常播放时间值。

9 根据权利要求1所述的媒体同步方法，其特征在于，所述节目制作中的广播用对象请求代理互连协议流对象是指从流对象的文件中提取出信息，编码为广播用对象请求代理互连协议流对象。

10 根据权利要求1所述的媒体同步方法，其特征在于，所述机顶盒端的接收和应用包括以下步骤：

(1)获取应用指定的事件链接文件，所述事件链接文件与应用信息表中指定的应用入口文件同名；

(2)根据事件链接文件的内容，获取html文件对应的事件工厂文件，若有多个事件工厂文件，则先把多个文件的内容合并后再查找；

(3)根据事件工厂文件中指定的事件类型，查找该事件工厂文件中对应的元素描述，所述元素描述包括事件名、事件类型以及包含流事件对象的通用资源标志；

(4)通过指定的事件名和通用资源标志，获得流事件对象的内容；

(5)根据流事件对象的内容解析出事件标志和对应的标识；

(6)接收对应流的正常播放事件信息，通过比较事件描述符包含的正常播放时间值和流的正常播放时间值来判断流事件对象是否满足触发条件，如果是即时触发的事件描述符，则立即触发；

(7)通过事件类型和事件描述符里包含的负载信息，启动文档对象模型中的事件处理过程。

Images