CN101569192A - 使广播内容与补充信息同步的系统和方法 - Google Patents

Abstract

本发明公开了一种使广播内容与补充信息同步的系统和方法。本发明的补充信息同步系统检测同步信息，在所述同步信息中，通过对在广播网络上接收到的广播内容与从补充信息生成装置发送来的同步信息进行比较而考虑了内容供应商(CP)提供的广播内容与在广播网络上接收到的广播内容之间的时间偏移，并且该补充信息同步系统基于响应于来自集成终端的针对补充信息的请求而接收到的与补充信息被请求的时间点相对应的广播内容的当前时间戳(开始)(PTS)信息和考虑了时间偏移的同步信息，提取与补充信息被请求的时间点相对应画面信息。

Description

使广播内容与补充信息同步的系统和方法

技术领域

本发明一般地涉及使广播内容与补充信息同步的系统和方法，更具体地，涉及这样一种使广播内容与补充信息同步的系统和方法，其基于广播内容来提供补充信息同时在时间上准确地将所述补充信息与相应的实时变化的广播内容相匹配。

背景技术

目前，移动数据通信服务包括无线因特网服务、移动计算服务、无线数据通信服务、无线因特网接入服务以及卫星通信服务。

在移动数据通信服务中，用于将各种内容提供给个人信息终端的无线广播服务的领域已经将大部分注意力吸引到业务多样性、市场性以及技术先进性方面。数据广播服务目前主要由内容供应商(CP)、广播服务供应商和移动通信服务供应商来提供。

现有的数据广播服务使用这样一种方法，其中，通过广播网络来传送用于连接通信网络的补充信息(例如，URL)，用户使用该补充信息来访问通信网络，或者通过通信网络来传送将要显示在广播节目上的信息。

然而，在广播网络上传送补充信息的方法存在必须使用额外的广播频率资源的问题，由于即使观看者没有请求补充信息时也要传送信息而效率低下，并且因为将相同信息传送给所有用户而对服务有所限制。

另外，在通信网络上提供与广播相关联信息的服务存在这样的问题，即在实践中难以在时间上紧密地将广播信息与在通信网络上传送的补充信息关联起来。因此，服务不能基于广播节目的详细情况同时从时间上将其与广播节目相匹配来提供补充信息，而是仅使用一种提供针对每个节目而分组的信息片段的受到限制的方法。

发明内容

因此，本发明考虑到了现有技术中所存在的上述问题，本发明的目的在于提供一种使广播内容与补充信息同步的系统和方法，所述系统和方法基于广播内容来提供补充信息同时在时间上准确地将补充信息与相应的实时变化的广播内容相匹配。

为了实现上述目的，本发明提供了一种使广播内容与补充信息同步的系统，所述广播内容和所述补充信息被提供给集成终端，所述系统包括：补充信息生成装置，用于接收内容供应商(CP)提供的广播内容、生成同步信息和与所述广播内容相关联的补充信息，以及提供所述同步信息和补充信息，所述同步信息包括与所述广播内容上的特定节目的场景改变画面有关的信息以及与特定节目的场景改变画面和特定节目的初始画面之间的延时(time lag)有关的信息；同步服务器，用于检测同步信息，在该同步信息中，通过对在所述广播网络上接收到的广播内容和从所述补充信息生成装置发送来的同步信息进行比较而考虑了CP提供的广播内容与在广播网络上接收到的广播内容之间的时间偏移(timeoffset)，所述同步服务器还基于响应于来自所述集成终端的对与补充信息的请求而接收到的与补充信息被请求的时间点相对应的广播内容的当前时间戳(开始)(PTS)信息和其中考虑了时间偏移的同步信息，提取出与补充信息被请求的时间点相对应的画面信息，所述同步服务器还发送所提取的画面信息；补充信息服务器，用于接收和存储从补充信息生成装置发送来的补充信息，提取和发送响应于针对补充信息的请求而从所述同步服务器发送的、与所提取的画面信息相关联的补充信息；终端互动服务器，用于将响应于针对补充信息的请求在通信网络上从所述集成终端接收的PTS信息提供给所述同步服务器，并将所提取的、从补充信息服务器接收到的补充信息提供给所述集成终端；以及所述集成终端，用于显示相互同步的广播内容和补充信息。

优选地，所述同步服务器包括：第一同步设定单元，用于基于通过广播网络的电子节目指南(EPG)频道传送的节目信息来获得近似(coarse)同步信息，所述近似同步信息包括与从CP接收到的广播内容上的特定节目的开始时间有关的信息；第二同步设定单元，用于基于从补充信息生成装置接收的与在广播网络上接收的广播内容上的特定节目的场景改变画面有关的信息来提取出与该场景改变画面有关的信息，基于与在广播网络上接收到的广播内容的特定节目的场景改变画面和初始画面之间的延时有关的信息来获得与该特定节目的初始画面有关的信息，并且提取精确(fine)同步信息，所述精确同步信息包括编码在初始画面信息中的PTS信息；以及画面信息提取单元，用于基于近似同步信息和精确同步信息，使用响应于针对补充信息的请求而从所述集成终端接收到的相对于PTS信息的延时，提取出与补充信息被请求的时间相对应的画面信息，并且所述画面信息提取单元发送所提取的画面信息。

为了实现上述目的，本发明提供了一种使广播内容与补充信息同步的服务器，所述广播内容和所述补充信息被提供给集成终端，其中，所述同步服务器检测同步信息，在所述同步信息中，通过将在广播网络上接收到的广播内容的同步信息和CP提供的广播内容的同步信息进行比较而考虑了CP提供的广播内容与在广播网络上接收到的广播内容之间的时间偏移；所述同步服务器还基于响应于针对补充信息的请求而从所述集成终端接收的与补充信息被请求的时间点相对应的广播内容的PTS信息以及考虑了所述时间偏移的同步信息，来提取与补充信息被请求的时间点相对应的画面信息。

优选地，CP提供的广播内容的同步信息包括与CP提供的广播内容上特定节目的场景改变画面有关的信息，以及与特定节目的场景改变画面和初始画面之间的延时有关的信息。

优选地，所述同步服务器包括：第一同步设定单元，用于基于通过广播网络的电子节目指南(EPG)频道传送的节目信息来获得近似同步信息，所述近似同步信息包括与从CP接收到的广播内容上的特定节目的开始时间有关的信息；第二同步设定单元，用于基于与在广播网络上接收到的广播内容上的特定节目的场景改变画面有关的信息来提取与该场景改变画面有关的信息，基于与在广播网络上接收到的广播内容的特定节目的场景改变画面和初始画面之间的延时有关的信息来获得与该特定节目的初始画面有关的信息，并且提取出精确同步信息，所述精确同步信息包括编码在初始画面信息中的PTS信息；以及画面信息提取单元，用于基于近似同步信息和精确同步信息，使用响应于针对补充信息的请求而从所述集成终端接收到的相对于PTS信息的延时，提取出与补充信息被请求的时间相对应的画面信息，并且所述画面信息提取单元发送所提取的画面信息。

为了实现上述目的，本发明提供了一种使广播内容与补充信息同步的方法，同步的广播内容和补充信息被提供给集成终端，所述方法包括以下步骤：a)补充信息生成装置从CP接收广播内容，生成并发送与所述广播内容相关联的补充信息，以及同步信息；b)补充信息服务器接收并存储从所述补充信息生成装置发送来的补充信息；c)同步服务器检测同步信息，在所述同步信息中，通过对与步骤b)同时地在广播网络上接收到的广播内容和从所述补充信息生成装置发送来的同步信息进行比较而考虑了CP提供的广播内容与广播网络上接收到的广播内容之间的时间偏移；d)终端互动服务器响应于来自集成终端的针对补充信息的请求来接收与补充信息被请求的时间点相对应的广播内容的PTS信息，并将接收到的PTS信息提供给所述同步服务器；e)基于考虑了时间偏移的同步信息，使用从终端互动服务器接收到的相对于PTS信息的延时，提取出与补充信息被请求的时间点相对应的画面信息；f)补充信息服务器提取并发送与所提取的从同步服务器发送来的画面信息相关联的补充信息；以及g)终端互动服务器从补充信息服务器接收所提取的补充信息，并在通信网络上将所接收到的补充信息提供给所述集成终端。

优选地，步骤a)包括：生成并发送同步信息，所述同步信息包括与广播内容上特定节目的场景改变画面有关的信息，以及与特定节目的场景改变画面和初始画面之间的延时有关的信息。

优选地，步骤c)包括以下步骤：c-1)接收经过广播网络的EPG频道传送的节目信息；以及c-2)基于所接收的节目信息，检测近似同步信息，所述近似同步信息包括与从CP接收到的广播内容上的特定节目的开始时间有关的信息。

优选地，步骤c)包括以下步骤：c-1)基于与在广播网络上接收到的广播内容上的特定节目的场景改变画面有关的信息，提取出与该场景改变画面有关的信息；c-2)基于与在广播网络上接收到的广播内容的特定节目的场景改变画面和初始画面之间的延时有关的信息，获得与该特定节目的初始画面有关的信息；以及c-3)提取出精确同步信息，所述精确同步信息包括编码在所获得的初始画面信息中的PTS信息。

优选地，步骤e)包括：基于近似同步信息和精确同步信息，使用响应于来自所述集成终端的针对补充信息的请求而接收到的相对于PTS信息的延时，提取出与补充信息被请求的时间点相对应的画面信息，并发送所提取的画面信息。

为了实现上述目的，本发明提供了一种使广播内容与补充信息同步的方法，所述广播内容和所述补充信息被提供给集成终端，所述方法包括以下步骤：a)检测同步信息，在所述同步信息中，通过对在广播网络上接收到的广播内容与同步信息进行比较而考虑了CP提供的广播内容与在广播网络上接收到的广播内容之间的时间偏移，所述同步信息包括与CP提供的广播内容上特定节目的场景改变画面有关的信息以及与特定节目的场景改变画面和初始画面之间的延时有关的信息；b)响应于来自所述集成终端的针对补充信息的请求，接收与补充信息被请求的时间点相对应的广播内容的PTS信息；以及c)基于考虑了时间偏移的同步信息，使用响应于针对补充信息的请求而接收到的相对于PTS信息的延时，来提取与补充信息被请求的时间点相对应的画面信息。

优选地，步骤a)包括以下步骤：a-1)接收经过广播网络的EPG频道传送的节目信息；以及a-2)基于接收到的节目信息来检测近似同步信息，所述近似同步信息包括与从CP接收到的广播内容上特定节目的开始时间有关的信息。

优选地，步骤a)包括以下步骤：a-1)基于与在广播网络上接收到的广播内容上的特定节目的场景改变画面有关的信息，提取出与该场景改变画面有关的信息；a-2)基于与在广播网络上接收到的广播内容的特定节目的场景改变画面和初始画面之间的延时有关的信息，获得与该特定节目的初始画面有关的信息；以及a-3)提取出精确同步信息，所述精确同步信息包括编码在所获得的初始画面信息中的PTS信息。

优选地，步骤c)包括：基于近似同步信息和精确同步信息，使用响应于来自所述集成终端的针对补充信息的请求而接收到的相对于PTS信息的延时，提取出与补充信息被请求的时间点相对应的画面信息，并发送所提取的画面信息。

为了实现上述目的，本发明提供了一种使广播内容与补充信息同步的系统，该同步系统包括：广播站，用于提供能够以流的形式提供补充信息的广播节目；补充信息服务器，用于从广播站接收以流的形式广播的节目，通过画面比较来计算和设定广播开始时间点，并且检测和提供与所选画面的时间信息相对应的补充信息；通信网络，用于将广播站以流的形式提供的节目广播给多个集成终端，并且通过数据通信将补充信息服务器所提供的补充信息提供给特定的集成终端；以及集成终端，用于通过通信而与通信网络相连，观看广播节目，以及请求和接收所选画面的补充信息。

为了实现上述目的，本发明提供了一种使广播内容与补充信息同步的方法，所述方法包括以下步骤：A)补充信息服务器通过对广播站以流的形式提供的节目进行画面分析以及对补充信息生成装置生成的补充信息和同步信息进行画面分析，来检测同步画面并设定节目广播开始时间；B)将来自集成终端的针对双向广播通信的请求通知给补充信息服务器，并且在通信网络上传送广播站以流的形式提供的广播节目；以及C)当存在来自所述集成终端的提供补充信息的请求时，补充信息服务器计算该节目广播后所经过的时间，搜索所选画面的补充信息，并将找到的补充信息提供给所述集成终端。

为了实现上述目的，本发明提供了一种补充信息服务器，用于接收来自广播站的节目，从补充信息生成装置接收补充信息和同步信息，设定节目开始时间，以及提供所选时间的补充信息，所述补充信息服务器包括：广播接收单元，用于以流的形式从广播站接收节目；解码单元，用于将以流的形式接收到的节目信号解码为基于画面的信息；同步信息单元，用于记录补充信息生成装置所提供的补充信息和同步信息；视频比较单元，用于将来自解码单元的画面信息和来自同步信息单元的同步信息转换为向量，并且，当画面信息和同步信息之间的相似度大于特定临界值时，选择具有该相似度的流节目的画面作为节目开始画面，并且设定节目开始时间；以及开始时间单元，用于记录和管理视频比较单元所设定的开始时间，并且计算广播所指定画面的时间。

为了实现上述目的，本发明提供一种使广播内容与补充信息同步的方法，所述方法包括以下步骤：A)节目步骤，补充信息服务器从广播站以流的形式接收节目，对接收到的节目进行解码并且将解码后的节目转换为向量值；B)附加步骤，补充信息服务器从补充信息生成装置接收补充信息和同步信息，对补充信息和同步信息进行XML解析，根据编码类型对XML解析后的补充信息和同步信息进行解码，并将解码后的补充信息和同步信息转换为向量值；以及C)评估这些向量值之间的相似度，如果这些向量值之间的相似度大于特定的临界值，则将该节目的相应画面设定为同步视频，并且设定该节目的开始时间。

为了实现上述目的，本发明提供了一种利用补充信息服务器使广播内容与补充信息同步的方法，所述补充信息服务器在通信网络上与集成终端相连接，从广播站以流的形式接收节目，并且从补充信息生成装置接收补充信息和同步信息，所述方法包括以下步骤：A)确定所述集成终端是否在观看广播节目时选择了某个画面以及是否请求了该画面的补充信息；B)如果确定结果是所述集成终端请求了补充信息，则接收所选画面的时间信息以及所选点的坐标信息，并且计算所述节目所经过的时间；以及C)搜索与所选画面和坐标信息相对应的补充信息，并且将找到的补充信息提供给所述集成终端。

为了实现上述目的，本发明提供了一种使广播内容与补充信息同步的方法，所述方法包括以下步骤：A)集成终端确定是否接收到了双向广播通信信号；B)如果确定结果是接收到了广播通信信号，则所述集成终端接收并观看双向广播通信节目，并且确定是否要核对特定画面的补充信息；以及C)如果确定结果是所述集成终端要核对特定画面的补充信息，则所述集成终端将所选画面的时间信息和坐标信息提供给补充信息服务器，并且接收与所选画面的时间信息和坐标信息相对应的相应补充信息。

因为根据本发明的用于使广播内容和补充信息同步的系统和方法可以基于广播内容来提供补充信息而同时在时间上准确地将补充信息与相应的实时变化的广播内容相匹配，所以能够提高用户对于服务的满意度。

另外，由于将广播站所广播的节目的各个画面与补充信息生成装置所提供的同步信息进行了比较，所以具有可以容易地检测和设定节目的广播开始时间的优点。

另外，由于对节目的广播开始时间进行了检测，因此具有可以轻易地选择和搜索与节目和广播时间相关的补充信息的优点。另外，由于搜索和提供了与基于帧的节目相关的补充信息，所以能够提高便捷性。

附图说明

本发明的上述及其它目的、特征和优点将从下面结合附图所做的描述中得到更加清楚的理解，其中：

图1为根据本发明第一实施方式的使广播内容与补充信息同步的系统的构造图；

图2为示出根据本发明第一实施方式的使广播内容与补充信息同步的方法的信号流程图；

图3为根据本发明第一实施方式的使广播内容与补充信息同步的方法的概念图；

图4为示出节目广播开始时间和观看时选择画面的时间的视图；

图5为根据本发明第一实施方式的补充信息服务器的构造图；

图6为图5的视频比较单元的详细构造图；

图7为示出将画面信息转换为向量的方法的概念图；

图8为示出根据本发明第一实施方式的补充信息服务器的操作示例的流程图；

图9为示出根据本发明第一实施方式的补充信息服务器的另一个操作示例的流程图；

图10为示出根据本发明第一实施方式的集成终端的操作的流程图；

图11为根据本发明第二实施方式的使广播内容与补充信息同步的系统的示意性构造图；

图12为根据本发明第二实施方式的同步服务器的示意性构造图；而

图13为示出根据本发明第二实施方式的使广播内容与补充信息同步的方法的示意性流程图。

具体实施方式

现在参照附图，结合本发明的优选实施方式对本发明进行详细描述。

参照图1到10来描述本发明的第一实施方式。

图1为根据本发明第一实施方式的使广播内容与补充信息同步的系统的构造图。图2为示出根据本发明第一实施方式的使广播内容与补充信息同步的方法的信号流程图。图3为根据本发明第一实施方式的使广播内容与补充信息同步的方法的概念图。图4为示出节目广播开始时间和观看时选择画面的时间的视图。图5为根据本发明第一实施方式的补充信息服务器的构造图。图6为图5的视频比较单元的详细构造图。图7为示出将画面信息转换为向量的方法的概念图。图8为示出根据本发明第一实施方式的补充信息服务器的操作示例的流程图。图9为示出根据本发明第一实施方式的补充信息服务器的另一个操作示例的流程图。图10为示出根据本发明第一实施方式的集成终端的操作的流程图。

参照图1，根据本发明第一实施方式的同步系统包括：CP 10，用于生成和供应将要广播的多媒体内容节目；广播站20，用于以流的形式经由地面波来广播从所述CP接收的或者自己生成的节目，或者将该节目提供给特定的有线路径；补充信息生成装置30，用于生成和供应节目内容的每个画面所必需的补充信息以及用于节目开始的某一画面的同步信息；补充信息服务器40，用于接收所述广播站以流的形式广播的节目、所述补充信息生成装置所供应的补充信息和同步信息，通过画面比较来检测广播的开始时间点和开始时间，并且提供所选的补充信息；通信网络50，用于将所述广播站以流的形式广播的节目广播给多个集成终端，并且通过通信将所述补充信息服务器所提供的补充信息提供给特定集成终端；以及集成终端60，用于在通信状态下连接到所述通信网络、观看广播节目，以及请求和核对所选画面的补充信息。

参照图2，本发明的同步方法包括以下步骤：从广播站以流的形式接收节目，以可扩展标记语言(XML)形式从补充信息生成装置接收针对该节目的每个画面的补充信息和同步信息；比较画面的向量值，如果这些向量值之间的相似度大于临界值则将相应画面设定为同步画面并设定节目开始时间；当所述集成终端请求双向广播通信服务时，在所述通信网络上从所述广播站和所述补充信息服务器接收双向广播通信节目并将所接收的双向广播通信节目提供给所述集成终端；以及当所述集成终端请求所选画面的补充信息时，计算从节目的开始时间起经过的时间，搜索补充信息，并利用所述补充信息服务器将补充信息提供给所述集成终端。

下面将参照图1和图2更加详细地描述本发明的同步系统和方法。

CP 10生成具有各种内容的节目，包括音乐、消息、文本、图像和运动图像等，并将这些节目供应给广播站20和补充信息生成装置30。

广播站20在计划的指定时间经由地面波和指定的有线线路来广播所选节目。

补充信息生成装置30通过事先与广播站或CP进行沟通，来确认节目被广播的时间，生成相应内容的多条补充信息，并且生成与节目开始相关联的同步信息。

在一个实施方式中，补充信息可以包括出现在节目的每个画面上的表演者或演唱者的个人信息，以及与表演者或演唱者的服装或配饰、志趣相投的相关人群、后续演出、公演日程表、联系地址、商店、价格、数量等有关的信息，并且可以根据偏好以多种方式来使用。

由于补充信息被生成为对应于节目的每个相应画面，所以必须在节目被广播之后通过准确检测指定画面的位置和搜索相应补充信息才能提供。

如上所述，本发明使节目与补充信息相匹配，并且涉及一种准确检测节目被广播的时间、准确检测观看者选择画面的时间以及搜索和提供相应补充信息的技术。

在这种情况下，可以基于系统操作员选择的时间或帧来确认节目的每个画面和所选画面。

补充信息服务器40从补充信息生成装置接收节目的基于画面的补充信息以及与同步画面有关的信息，还以流的形式通过有线线路来接收广播站所广播的节目。

补充信息服务器40通过对补充信息生成装置30以XML格式提供的补充信息和同步信息进行XML解析来检测同步信息，并将根据检测到的同步信息的编码类型进行了解码的画面转换为向量值。

补充信息生成装置30供应给补充信息服务器40的补充信息可以具有下述类型的XML信息。

<INFO>

<SYNC encode Type＝″full″data＝″V1，V2，V3...，VN″/>

<PPL id＝″1″beginTime＝″20s″url＝″http://...aaa...″/>

<PPL id＝″2″beginTime＝″60s″url＝″http://...bbb...″/>

</INFO>

SYNC标签表示同步信息，PPL标签表示补充信息的URL。

补充信息服务器40针对各个画面，对广播站20以流的形式提供的广播节目进行解码，并将该广播节目转换为向量值。

补充信息服务器40通过评估如上所述被换为向量值的广播节目的每个画面与同步信息之间的相似度来检测广播开始的时间。

在评估相似度的过程中，使用例如欧几里德距离(Euclidean distance)方法或余弦距离法作为用于测量向量之间距离的方法。

利用这个方法来检测广播开始的时间(Present Time Stamp(Start)(PTS))并对之进行记录和管理，并且还与该时间相关地记录和管理相应的补充信息。

根据选择，可以将相应的补充信息与画面的帧数序列(frame numbersequence)相关联地，而不是与时间PTS相关联地，进行记录和管理。

通信网络50接收广播站20以流的方式广播的节目，并经由指定的无线频道将该节目广播给多个希望使用双向广播通信服务的集成终端60。

在这种情况下，通信网络50向补充信息服务器40提供与使用双向广播通信服务的集成终端60有关的信息。

当用户在观看广播节目时使用触摸屏选择了特定画面时，集成终端60确认相应的时间信息PTS(i)和坐标信息(x，y)并将这些信息通过通信网络50提供给补充信息服务器40。这时，还向补充信息服务器40提供了与正在观看的频道和节目有关的信息(事件信息)。

补充信息服务器40计算要广播已经开始的节目的开始时间PTS以及集成终端所选择的画面的时间PTS(i)，并且搜索与所计算的时间相对应的补充信息。同时，当使用PTS信息时，补充信息服务40还连同PTS信息一起来使用通用时间信息(例如12:30:9:05)，该通用时间信息与通信网络中的各个服务器或设备同步。这适用于使用PTS信息的所有服务器或设备，同样适用于以下描述。

在找到的信息中再次搜索与坐标信息相对应的信息，利用通信方法在通信网络上将这次找到的信息传送到相应的集成终端60。

补充信息包括文本、图像、运动图像、URL地址等等。

从图3中可以看到集成终端60和补充信息服务器40之间的信号流。

集成终端60提供与选择将针对其来确认补充信息的画面的时间PTS(i)有关的信息、坐标信息(x，y)、广播频道信息和节目信息(事件信息)，并且接收和确认文本、图像、运动图像、URL地址等相应的补充信息。在提供补充信息时，补充信息服务器40还提供PTS(s)信息。

图4示出了时间信息和广播节目之间的关系，以便搜索和提供补充信息。

节目包括开始时间TO和结束时间PTS(n)。补充信息服务器40搜索开始时间并将其设为广播开始时间PTS(s)。包括多个画面的节目以视频包为单位进行广播。集成终端60为了确认补充信息而选择特定画面的时间PTS(i)被显示为当前观看时间。

补充信息服务器40可以基于时间或帧来对与广播节目相关联的补充信息进行分类、记录和管理。

当基于帧来对与节目相关联的补充信息进行分类、记录和管理时，在以上描述中必须用术语“帧”来替代术语“时间”。

因此，集成终端60与通信网络相连，接收和观看广播站使用广播方法而广播的节目。对于所选画面的补充信息，集成终端60接收基于时间或帧信息从使用通信方法而连接的补充信息服务器40找到的补充信息。

下面参照图2来详细描述这个信号流。补充信息服务器40在步骤S100从补充信息生成装置30接收XML格式的广播节目的补充信息和同步信息，并在步骤S110接收广播站20以流的形式广播的节目。

在步骤S120，补充信息服务器40对从补充信息生成装置30接收到的同步信息进行解析、分离、解码和向量转换，对从广播站20以画面为单位接收到的节目进行解码和向量转换，搜索同步画面，并且设定、记录和管理广播开始时间PTS(s)。

当在步骤S130从集成终端60接收到请求双向广播通信服务的信号时，通信网络50在步骤S140向补充信息服务器40通知与集成终端60有关的信息，并同时请求广播站20提供广播节目。

通信网络50在步骤S150接收广播站20广播的节目，并且在步骤S160通过经由利用移动通信方法分配的一个指定无线频道将该节目传送到集成终端60来广播该节目。

在步骤S170，如上所述，经由双向广播通信而观看节目的集成终端60在通信网络50上向补充信息服务器40请求所选画面的补充信息。

在步骤S180，补充信息服务器40检测集成终端60针对其请求补充信息的画面的相应时间信息PTS(i)，通过利用所记录和管理的开始时间信息PTS(s)而进行的计算来检测节目被广播之后所经历的时间，并且搜索与如上所述计算出的经历时间相对应的补充信息。

在这种情况下，当需要坐标信息(x，y)时，补充信息服务器40可以搜索包括坐标信息的补充信息。补充信息包括文本、图像、运动图像、URL地址信息等等。

在步骤S190，在通信网络上将补充信息服务器40找到的补充信息提供给集成终端60。

因此，通过对广播站20所广播的节目的画面的向量值与补充信息生成装置30所提供的同步信息画面的向量值进行比较，来检测和设定广播开始画面和时间。

下面参照图5来描述根据本发明的实施方式的补充信息服务器。补充信息服务器40可以包括：广播接收单元41，用于接收广播站以流的形式广播的节目；解码单元42，用于将广播接收单元接收的节目解码为基于画面的视频信息；同步信息单元43，用于对补充信息生成装置30以XML格式提供的补充信息和同步信息进行记录和管理；视频比较单元44，用于从同步信息单元接收XML格式的同步画面信息，从解码单元接收基于画面的节目信息，对该信息进行向量转换，评估相似度，当相似度大于特定的临界值时，将该画面设定为广播开始画面并且同时检测广播开始时间PTS(s)；以及开始时间单元45，用于对视频比较单元提供的开始时间PTS(s)进行记录和管理。

下面参照图6更加详细地描述视频比较单元44。视频比较单元44可以包括：向量单元441，用于将从解码单元42接收的基于画面的信息信号以及从解析单元442接收到的同步画面的信息转换为根据编码类型进行了解码的画面信息信号；解析单元442，用于对同步信息单元43以XML格式提供的补充信息和同步信息进行解析，分离该同步信息，根据编码类型对该同步信息进行解码，并且提供被转换为向量值的同步信息；以及比较单元443，用于确定向量单元和解析单元提供的各个画面之间的向量信息相似度是否大于特定的临界值，丢弃具有较低值的画面，选择具有较高值的画面，并将相应的时间设为开始时间。

参照图8，一种操作本发明的补充信息服务器的方法可以包括以下步骤：以流的形式从广播站接收节目，对该节目进行解码，并将该节目转换为向量值；由补充信息服务器从补充信息生成装置接收补充信息和同步信息，对该信息进行XML解析，根据编码类型对解析后的信息进行解码，并将解码后的信息转换为向量值；以及评估向量值之间的相似度，如果向量值之间的相似度大于临界值，则设定该节目的同步画面和开始时间。

下面参照图5和图6来详细地描述本发明的补充信息服务器及其操作。

广播站20经由相应频率以无线方式来广播节目，并且同时经由指定的有线线路将该节目以流的形式广播到补充信息服务器40。

补充信息服务器40的广播接收单元41接收以流的形式广播的节目并将接收到的节目提供给解码单元42。解码单元42将节目解码为基于画面的视频数据信号并将解码后的信号提供给视频比较单元44。

另外，同步信息单元43接收和记录补充信息生成装置30以XML格式提供的节目的补充信息和同步信息，然后将该补充信息和同步信息提供给视频比较单元44。

视频比较单元44的向量单元441从解码单元42接收基于画面的视频信号并将这些信号转换为向量值。

另外，解析单元442对从同步信息单元43接收到的XML格式的信息进行解析，分离同步画面的数据信息，根据分离后的同步画面信息的编码类型对分离后的数据信息进行解码，并且将解码后的信息提供给向量单元441。

向量单元441将每个画面转换为向量值并将转换后的向量值提供给比较单元443。

参照图7，向量单元441获得每个画面的向量值的一种方法包括完全(FULL)法、交叉(CROSS)法和倾斜(OBLIQUE)法。完全法是最准确的方法，但是需要大量的数据和很长的时间。倾斜法需要少量的数据和很短的时间，但是准确性较低。

这些向量特性依据处理时间、存储空间、准确度等而发生变化。因此，基于相应的应用来选择适当的方法。

已经被向量单元441转换为向量值的广播节目和同步视频信息被提供给比较单元443。比较单元443确定向量值之间的相似度是否大于所设定的临界值，丢弃相似度小于临界值的节目画面，选择相似度大于临界值的节目画面，将所选节目画面设为广播开始画面，并且设定广播开始时间PTS(s)。

比较单元443测量相似度的方法是一种测量向量之间距离的方法，该方法包括欧几里德距离法和余弦距离法。

由包括向量单元441、解析单元442和比较单元443的视频比较单元44设定的与开始时间PTS(s)有关的信息被提供给开始时间单元45并由后者记录和管理。

下面参照图8更加详细地描述这个处理。

在步骤S200，补充信息服务器40确定广播站20是否正在以流的形式提供广播节目。

如果确定的结果是正在以流的形式提供广播节目，则广播接收单元41接收该广播节目并将该广播节目提供给解码单元42。在步骤S210，解码单元42执行解码处理，将该广播节目解调为基于画面的视频信号或画面信号。

在步骤S220，将解调后的节目的基于画面的信号提供给视频比较单元44并转换为基于画面的向量值。

进一步地，在步骤S230，补充信息服务器40确定是否从补充信息生成装置30以XML格式提供了补充信息和同步信息。如果确定的结果是以XML格式提供了补充信息和同步信息，则同步信息单元43接收补充信息和同步信息并将它们提供给视频比较单元44。

在步骤S240，视频比较单元44的解析单元442对XML格式的信息进行解析并分离同步画面的信息，并且在步骤S250根据编码类型对分离后的同步画面的信息进行解码。在步骤S260，向量单元441将解码后的信息转换为向量值。

在步骤S270，比较单元443通过评估前面所述的节目的向量值与同步画面信息的向量值之间的相似度来确定相似度是否大于特定的临界值。

如果评估的结果是节目画面的向量值与同步画面信息的向量值之间的相似度大于特定的临界值，则在步骤S280将相应的节目画面设定为广播开始画面，并将所设定画面被广播的时间设定为节目的广播开始时间PTS(s)。

因此，通过对广播站20所广播的节目的画面与补充信息生成装置30所提供的同步信息画面来检测和设定广播开始时间。

参照图9，根据本发明另一实施例的补充信息服务器的操作处理由补充信息服务器40来执行，并且包括以下步骤：确定集成终端60是否请求了所选画面的补充信息；从该集成终端接收所选画面的时间信息和坐标信息并且计算节目的广播经过时间；搜索与所选画面和坐标信息相对应的补充信息并且将该补充信息提供给该集成终端。

更具体来讲，在步骤S300，补充信息服务器40确定集成终端60是否请求了补充信息。当集成终端60的用户在观看广播节目时选择了画面并且请求供应补充信息时，在步骤S310，补充信息服务器40从集成终端60接收用于标识正在观看的频道的频道信息、用于标识正在观看的节目的事件信息，以及用户选择的画面的时间信息PTS(i)和坐标信息(x，y)。

在步骤S320，补充信息服务器40通过计算已经检测和设定的广播开始画面的广播开始时间PTS(s)以及集成终端60提供的所请求画面的时间信息PTS(i)，来检测节目开始广播之后经过的时间。

在步骤S330，补充信息服务器40搜索与所计算的时间值和坐标值有关的补充信息，在步骤S340，将相应的补充信息(文本、图像、运动图像等)以及PTS(s)信息提供给集成终端60。

参照图10，根据本发明的一个实施方式的集成终端的操作处理可以包括以下步骤：确定集成终端60是否接收到了广播通信信号；如果确定结果是集成终端60接收到了广播通信信号，则确定集成终端60是否将接收和观看节目并且核对补充信息；如果确定结果是集成终端60将核对补充信息，则向集成终端60提供画面的时间信息和坐标信息，并且接收和输出包括文本、图像、音频、运动图像和URL的补充信息。

更具体来讲，在步骤S400，集成终端60在通信状态下连接到通信网络50，并且确定是否将通过双向广播通信服务接收和观看广播站20广播的节目。

如果确定结果是集成终端60将接收双向广播通信，则在步骤S410集成终端60接收和观看经由指定的无线移动通信频道广播的节目。然后，在步骤S420确定集成终端60是否将在观看节目时指定特定画面并且接收相应的补充信息。

如果确定结果是集成终端60将指定特定画面并且接收相应的补充信息，则在步骤S430，集成终端60在通信网络50上将所指定画面的相应时间信息PTS(i)和坐标信息(x，y)提供给补充信息服务器40。

在步骤S440，集成终端60从补充信息服务器40接收包括文本、图像、音频、运动图像以及URL信息的补充信息，并通过相应的显示单元和/或音频单元输出该补充信息。

下面将参照图11到13A来描述本发明的第二实施方式。

图11为根据本发明第二实施方式的使广播内容与补充信息同步的系统的示意性构造图。

如图11所示，根据本发明第二实施方式的系统包括补充信息生成装置100、同步服务器200、补充信息服务器300、终端互动(terminalinterworking)服务器400以及集成终端500。

补充信息生成装置100从CP接收与广播网络上传输的广播内容相同的广播内容，并且生成和发送与该广播内容相关联的补充信息和同步信息。优选地，补充信息生成装置100生成补充信息，并且将该补充信息发送给补充信息服务器300，所述补充信息例如包括特定节目的故事信息、人物信息以及背景音乐信息，与节目中出现的产品相关的信息等。另外，补充信息生成装置100生成同步信息并将该同步信息发送给同步服务器200，所述同步信息例如是特定广播节目的初始画面、特定广播节目的场景改变画面、与相应节目开始之后场景发生改变的时间相关的信息、与特定节目的场景改变画面和初始画面之间的延时有关的信息以及与初始画面或场景改变画面的特性值有关的信息。

同步服务器200检测同步信息，并基于检测到的同步信息来提取与集成终端500请求补充信息的时间相对应的画面信息，在所述同步信息中，通过对在广播网络上接收到的广播内容和从补充信息生成装置100接收到的同步信息进行比较而考虑了CP提供的广播内容与广播网络上接收到的广播内容之间的时间偏移。

为了这个目的，图12中所示的同步服务器200包括：第一同步设定单元210，用于获得近似同步信息，所述近似同步信息相对于特定节目的开始时间具有几秒钟的偏移；第二同步设定单元220，用于对近似同步信息进行补充；以及画面信息提取单元230，用于基于通过第一同步设定单元210和第二同步设定单元220获得的同步信息来提取与集成终端500请求补充信息的时间相对应的画面信息。

第一同步设定单元210基于经由广播网络的电子节目指南(EPG)频道传送的节目信息来获得近似同步信息，该近似同步信息包括与从CP接收的广播内容上的特定节目的开始时间有关的信息。另选地，第一同步设定单元210可以从节目管理服务器(PMS)接收节目信息从而获得近似同步信息，所述节目信息除了包括在EPG频道中以外还包括在广播站中。

基于与从补充信息生成装置100接收的场景改变画面有关的信息，第二同步设定单元220提取出与在广播网络上接收到的广播内容上的特定节目的场景改变画面有关的信息。另外，基于与特定节目的场景改变画面和初始画面之间的延时有关的信息，第二同步设定单元220获得与在广播网络上接收到的广播内容上的特定节目的初始画面有关的信息，并且提取出精确同步信息，该精确同步信息包括编码在初始画面信息中的PTS信息。这里，PTS信息是指基于MPEG-2标准中的画面的当前时间信息。也可以使用节目时钟基准(PCR)来代替PTS信息。

基于近似同步信息和精确同步信息，画面信息提取单元230使用响应于针对补充信息的请求而从集成终端接收到的相对于PTS信息的延时来提取与请求补充信息的时间相对应的画面信息，并且将所提取的画面信息发送给补充信息服务器300。

补充信息服务器300响应于针对补充信息的请求，从补充信息生成装置100接收和存储补充信息，从同步服务器200(优选地从画面信息提取单元230)接收所提取的画面信息，从所接收的补充信息中提取与该画面信息相关联的补充信息，并且发送所提取的补充信息。

终端互动服务器400用于阻止集成终端500试图单独访问同步服务器200和补充信息服务器300，并使得集成终端500能够通过单个服务器来使用互动服务。终端互动服务器400将广播内容的与补充信息被请求的时间相对应且响应于针对补充信息的请求在通信网络上从集成终端500接收到PTS信息提供给同步服务器200，接收从补充信息服务器300提取出的特定补充信息，并且将所接收的特定补充信息提供给集成终端500。

集成终端500是指多种终端中的一种终端，包括用于同时实现广播服务和通信服务的移动通信终端，集成终端500显示在广播网络上接收的广播内容以及补充信息，所述补充信息与响应于请求在通信网络上从终端互动服务器400接收的广播内容是同步的。

下面参照图13来描述根据本发明优选实施方式的基于分类对象来分配访问授权的方法。图13为示出根据本发明第二实施方式的使广播内容与补充信息同步的方法的示意性流程图。

在步骤S1110至S1140，补充信息生成装置100首先接收CP提供的广播内容，并且生成和发送与该广播内容相关的补充信息和同步信息。优选地，补充信息生成装置100生成补充信息，并且将补充信息发送到补充信息服务器300，所述补充信息例如包括特定节目的故事信息、人物信息和背景音乐信息，以及与节目中出现的产品有关的信息。另外，补充信息生成装置100生成同步信息，并且将所生成的同步信息发送到同步服务器200，所述同步信息例如是特定广播节目的初始画面、特定广播节目的场景改变画面、与相应节目开始之后场景发生了改变的时间有关的信息、与特定节目的场景改变画面和初始画面之间的延时有关的信息，以及与初始画面或场景改变画面的特征值信息有关的信息。

然后，在步骤S1150，补充信息服务器300从补充信息生成装置100接收补充信息，并存储所接收的补充信息。

另外，同步服务器200检测同步信息，在该同步信息中，通过对在广播网络上跟步骤1130同时接收到的广播内容与从补充信息生成装置100接收到的同步信息进行比较而考虑了CP提供的广播内容与在广播网络上接收到的广播内容之间的时间偏移。更具体来讲，基于在步骤S1160和S1170所接收的节目信息，第一同步设定单元210接收经由广播网络的EPG频道传送的节目信息并且检测近似同步信息，该近似同步信息包括与从CP接收到的广播内容上的特定节目的开始时间有关的信息。同时，在步骤S1180至S1200，第二同步设定单元220基于与从补充信息生成装置100接收的场景改变画面有关的信息，提取出与在广播网络上接收的广播内容上的特定节目的场景改变画面有关的信息，以便对近似同步信息进行补充；基于与特定节目的场景改变画面和初始画面之间的延时有关的信息来获取与在广播网络上接收的广播内容上的特定节目的初始画面有关的信息；并且检测精确同步信息，包括编码在所获得的初始画面信息中的PTS信息。

然后，在步骤S1210和S1220，终端互动服务器400响应于集成终端500的请求在通信网络上接收广播内容的与集成终端500请求补充信息的时间相对应的PTS信息，并且将该PTS信息提供给同步服务器。

在步骤S1230至S1250，基于考虑了时间偏移的同步信息，接收到PTS信息的同步服务器200使用从终端互动服务器400接收到的相对于PTS信息的延时来提取与补充信息被请求的时间相对应的画面信息。更具体来讲，基于近似同步信息或精确同步信息，画面信息提取单元230使用响应于针对补充信息的请求而从集成终端接收的相对于PTS信息的延时来提取与补充信息被请求的时间相对应的画面信息，并且将所提取的画面信息发送给补充信息服务器300。

然后，在步骤S1260和S1270，补充信息服务器300提取与所提取的从同步服务器400发送来的画面信息相关联的补充信息，并且发送所提取的补充信息。

然后，终端互动服务器400从补充信息服务器300接收所提取的补充信息，并且在通信网络上将所提取的补充信息提供给集成终端500。在步骤S1280和S1290，接收到补充信息的集成终端500显示在广播网络上接收到的广播内容以及响应于请求在通信网络上从终端互动服务器400接收的并且与广播内容同步的补充信息。

虽然出于例示的目的公开了本发明的优选实施方式，但是本领域的技术人员应当理解，可以实现各种修改、添加和替代方案，这些方案不会脱离所附权利要求中所公开的本发明的范围和主旨。

根据本发明的使广播内容与补充信息同步的系统和方法，可以获得用户看到的广播节目的精确时间信息，并且基于该时间信息实现同步，因此所述系统和方法可以提供补充信息，例如广播内容的故事信息、人物信息和背景音乐信息以及与节目中出现的产品有关的信息，同时在时间上准确地将补充信息与相应的实时变化的广播内容相匹配。

Claims (45)

1.一种使广播内容与补充信息同步的系统，所述广播内容和所述补充信息被提供给集成终端，所述系统包括：

补充信息生成装置，用于接收内容供应商(CP)提供的广播内容、生成同步信息和与所述广播内容相关联的补充信息，以及提供所述同步信息和补充信息，所述同步信息包括与所述广播内容上的特定节目的场景改变画面有关的信息以及与特定节目的场景改变画面和初始画面之间的延时有关的信息；

同步服务器，用于检测同步信息，在该同步信息中，通过对在所述广播网络上接收到的广播内容和从所述补充信息生成装置发送来的同步信息进行比较而考虑了所述CP提供的广播内容与在所述广播网络上接收到的广播内容之间的时间偏移，所述同步服务器还基于响应于来自所述集成终端的对于所述补充信息的请求而接收到的与所述补充信息被请求的时间点相对应的广播内容的当前时间戳(开始)(PTS)信息和其中考虑了时间偏移的所述同步信息，提取出与所述补充信息被请求的时间点相对应的画面信息，所述同步服务器还发送所提取的画面信息；

补充信息服务器，用于接收和存储从所述补充信息生成装置发送来的补充信息，提取和发送响应于针对所述补充信息的请求而从所述同步服务器发送的、与所提取的画面信息相关联的补充信息；

终端互动服务器，用于将响应于针对所述补充信息的请求在所述通信网络上从所述集成终端接收的PTS信息提供给所述同步服务器，并将所提取的、从所述补充信息服务器接收到的补充信息提供给所述集成终端；以及

所述集成终端，用于显示相互同步的所述广播内容和所述补充信息。

2.根据权利要求1所述的系统，其中，所述同步服务器包括：

第一同步设定单元，用于基于经由所述广播网络的电子节目指南(EPG)频道传送的节目信息来获得近似同步信息，所述近似同步信息包括与从所述CP接收到的广播内容上的特定节目的开始时间有关的信息；

第二同步设定单元，用于基于从所述补充信息生成装置接收的与在所述广播网络上接收的广播内容上的特定节目的场景改变画面有关的信息来提取出与所述场景改变画面有关的信息，基于与在所述广播网络上接收到的所述广播内容的特定节目的所述场景改变画面和初始画面之间的延时有关的信息来获得与所述特定节目的初始画面有关的信息，并且提取精确同步信息，所述精确同步信息包括编码在所述初始画面信息中的PTS信息；以及

画面信息提取单元，用于基于所述近似同步信息和所述精确同步信息，使用响应于针对所述补充信息的请求而从所述集成终端接收到的相对于所述PTS信息的延时，提取出与所述补充信息被请求的时间相对应的画面信息，并且所述画面信息提取单元发送所提取的画面信息。

3.一种使广播内容与补充信息同步的服务器，所述广播内容和所述补充信息被提供给集成终端，其中，所述同步服务器检测同步信息，在所述同步信息中，通过将在广播网络上接收到的广播内容的同步信息和CP提供的广播内容的同步信息进行比较而考虑了所述CP提供的广播内容与在所述广播网络上接收到的广播内容之间的时间偏移；所述同步服务器还基于响应于针对所述补充信息的请求而从所述集成终端接收的与所述补充信息被请求的时间点相对应的广播内容的PTS信息以及考虑了所述时间偏移的同步信息，来提取与所述补充信息被请求的时间点相对应的画面信息。

4.根据权利要求3所述的同步服务器，其中，所述CP提供的广播内容的同步信息包括与所述CP提供的广播内容上的特定节目的场景改变画面有关的信息，以及与该特定节目的场景改变画面和初始画面之间的延时有关的信息。

5.根据权利要求4所述的同步服务器，其中，所述同步服务器包括：

第一同步设定单元，用于基于经由所述广播网络的电子节目指南(EPG)频道传送的节目信息来获得近似同步信息，所述近似同步信息包括与从所述CP接收到的广播内容上的特定节目的开始时间有关的信息；

第二同步设定单元，用于基于与在所述广播网络上接收到的广播内容上特定节目的场景改变画面有关的信息来提取与所述场景改变画面有关的信息，基于与在所述广播网络上接收到的广播内容的特定节目的场景改变画面和初始画面之间的延时有关的信息来获得与所述特定节目的初始画面有关的信息，并且提取出精确同步信息，所述精确同步信息包括编码在所述初始画面信息中的PTS信息；以及

画面信息提取单元，用于基于所述近似同步信息和所述精确同步信息，使用响应于针对所述补充信息的请求而从所述集成终端接收到的相对于所述PTS信息的延时，提取出与所述补充信息被请求的时间相对应的画面信息，并且所述画面信息提取单元发送所提取的画面信息。

6.一种使广播内容与补充信息同步的方法，同步的广播内容和补充信息被提供给集成终端，所述方法包括以下步骤：

a)补充信息生成装置从CP接收广播内容，生成并发送与所述广播内容相关联的补充信息，以及同步信息；

b)补充信息服务器接收并存储从所述补充信息生成装置发送来的补充信息；

c)同步服务器检测同步信息，在所述同步信息中，通过对与步骤b)同时地在广播网络上接收到的广播内容和从所述补充信息生成装置发送来的同步信息进行比较而考虑了所述CP提供的广播内容与在所述广播网络上接收到的广播内容之间的时间偏移；

d)终端互动服务器响应于来自所述集成终端的针对所述补充信息的请求来接收与所述补充信息被请求的时间点相对应的广播内容的PTS信息，并将接收到的PTS信息提供给所述同步服务器；

e)基于考虑了时间偏移的所述同步信息，使用从所述终端互动服务器接收到的相对于所述PTS信息的延时，提取出与所述补充信息被请求的时间点相对应的画面信息；

f)所述补充信息服务器提取并发送与所提取的从所述同步服务器发送来的画面信息相关联的补充信息；以及

g)所述终端互动服务器从所述补充信息服务器接收所提取的补充信息，并在通信网络上将所接收到的补充信息提供给所述集成终端。

7.根据权利要求6所述的方法，其中，步骤a)包括：生成并发送所述同步信息，所述同步信息包括与所述广播内容上特定节目的场景改变画面有关的信息，以及与该特定节目的所述场景改变画面和初始画面之间的延时有关的信息。

8.根据权利要求7所述的方法，其中，步骤c)包括以下步骤：

c-1)接收经由所述广播网络的EPG频道传送的节目信息；以及

c-2)基于所接收的节目信息，检测近似同步信息，所述近似同步信息包括与从所述CP接收到的广播内容上的特定节目的开始时间有关的信息。

9.根据权利要求7所述的方法，其中，步骤c)包括以下步骤：

c-1)基于与在所述广播网络上接收到的广播内容上的特定节目的场景改变画面有关的信息，提取出与所述场景改变画面有关的信息；

c-2)基于与在所述广播网络上接收到的广播内容的所述特定节目的场景改变画面和初始画面之间的延时有关的信息，获得与所述特定节目的初始画面有关的信息；以及

c-3)提取出精确同步信息，所述精确同步信息包括编码在所获得的初始画面信息中的PTS信息。

10.根据权利要求8所述的方法，其中，步骤e)包括：基于所述近似同步信息和所述精确同步信息，使用响应于来自所述集成终端的针对所述补充信息的请求而接收到的相对于所述PTS信息的延时，提取出与所述补充信息被请求的时间点相对应的画面信息，并发送所提取的画面信息。

11.一种使广播内容与补充信息同步的方法，所述广播内容和所述补充信息被提供给集成终端，所述方法包括以下步骤：

a)检测同步信息，在所述同步信息中，通过对在广播网络上接收到的广播内容与同步信息进行比较而考虑了CP提供的广播内容与在所述广播网络上接收到的广播内容之间的时间偏移，所述同步信息包括与所述CP提供的广播内容上的特定节目的场景改变画面有关的信息以及与该特定节目的场景改变画面和初始画面之间的延时有关的信息；

b)响应于来自所述集成终端的针对所述补充信息的请求，接收与所述补充信息被请求的时间点相对应的广播内容的PTS信息；以及

c)基于考虑了所述时间偏移的所述同步信息，使用响应于针对所述补充信息的请求而接收到的相对于所述PTS信息的延时，来提取与所述补充信息被请求的时间点相对应的画面信息。

12.根据权利要求11所述的方法，其中，步骤a)包括以下步骤：

a-1)接收经由所述广播网络的EPG频道传送的节目信息；以及

a-2)基于接收到的节目信息来检测近似同步信息，所述近似同步信息包括与从所述CP接收到的广播内容上的特定节目的开始时间有关的信息。

13.根据权利要求11所述的方法，其中，步骤a)包括以下步骤：

a-1)基于与在所述广播网络上接收到的广播内容上的特定节目的场景改变画面有关的信息，提取出与所述场景改变画面有关的信息；

a-2)基于与在所述广播网络上接收到的广播内容的特定节目的场景改变画面和初始画面之间的延时有关的信息，获得与所述特定节目的初始画面有关的信息；以及

a-3)提取出精确同步信息，所述精确同步信息包括编码在所获得的初始画面信息中的PTS信息。

14.根据权利要求12所述的方法，其中，步骤c)包括：基于所述近似同步信息和所述精确同步信息，使用响应于来自所述集成终端的针对所述补充信息的请求而接收到的相对于所述PTS信息的延时，提取出与所述补充信息被请求的时间点相对应的画面信息，并发送所提取的画面信息。

15.一种使广播内容与补充信息同步的系统，该同步系统包括：

广播站，用于提供能够以流的形式提供补充信息的广播节目；

补充信息服务器，用于从所述广播站接收以流的形式广播的节目，通过画面比较来计算和设定广播开始时间点，并且检测和提供与所选画面的时间信息相对应的补充信息；

通信网络，用于将所述广播站以流的形式提供的节目广播给多个集成终端，并且通过数据通信将所述补充信息服务器所提供的补充信息提供给特定的集成终端；以及

集成终端，用于通过通信而与所述通信网络相连，观看广播节目，以及请求和接收所选画面的补充信息。

16.根据权利要求15所述的系统，该系统还包括：

CP，用于生成和提供将由所述广播站广播的多媒体内容节目；以及

补充信息生成装置，用于在广播了所述内容节目之后与基于时间的画面相对应地生成所述同步信息和补充信息，所述同步信息指示了所述CP提供的内容节目的广播开始。

17.根据权利要求16所述的系统，其中，所述补充信息生成装置生成补充信息，使得该补充信息对应于所述广播节目的基于帧的画面。

18.根据权利要求15所述的系统，其中，所述补充信息服务器将所述广播站以流的形式提供的节目解码为画面，将解码后的节目转换为向量值，根据解码类型对所述补充信息生成装置提供的补充信息和同步信息进行解码，将解码后的信息转换为向量值，并且当转换后的向量值之间的相似度大于临界值时，将所述广播站提供的节目的初始画面的时间设定为开始时间PTS(s)。

19.根据权利要求16所述的系统，其中，所述补充信息生成装置将所述补充信息和所述同步信息以可扩展标记语言(XML)的格式提供给所述补充信息服务器。

20.根据权利要求15所述的系统，其中，所述补充信息服务器检测所述集成终端选择和请求的画面的时间信息，并且搜索和提供相应的补充信息。

21.根据权利要求15所述的系统，其中，所述通信网络将所述广播站以流的形式提供的广播节目同时广播给多个集成终端，并且，当所述集成终端选择某个画面并且请求补充信息时，将所选画面的时间信息提供给所述补充信息服务器，并且接收与所述时间信息相对应的相应补充信息，然后将相应补充信息传送给所述集成终端。

22.一种使广播内容与补充信息同步的方法，所述方法包括以下步骤：

A)补充信息服务器通过对广播站以流的形式提供的节目进行画面分析以及对补充信息生成装置生成的补充信息和同步信息进行画面分析，来检测同步画面并设定节目广播开始时间；

B)将来自集成终端的针对双向广播通信的请求通知给所述补充信息服务器，并且在通信网络上传送所述广播站以流的形式提供的广播节目；以及

C)当存在来自所述集成终端的提供所述补充信息的请求时，所述补充信息服务器计算所述节目被广播后所经过的时间，搜索所选画面的补充信息，并将找到的补充信息提供给所述集成终端。

23.根据权利要求22所述的方法，其中，步骤A)包括以下步骤：

A-1)所述补充信息服务器从所述补充信息生成装置接收节目的补充信息和同步信息；

A-2)所述补充信息服务器接收所述广播站以流的形式广播的节目；以及

A-3)将所述同步信息和所述广播节目转换为向量值，通过评估这些向量值之间的相似度来检测所述节目的同步画面，并设定开始时间。

24.根据权利要求23所述的方法，其中，所述补充信息生成装置提供的补充信息和同步信息为XML格式。

25.根据权利要求23所述的方法，其中，在步骤A-3)中对相似度的评估包括以下步骤：

通过对所述广播节目进行解码来检测向量值，通过对所述补充信息生成装置提供的信息进行解析来分离所述同步信息，检测根据分离后的同步信息的编码类型进行了解码的画面的向量值，将这些向量值之间的相似度大于特定临界值的画面检测为同步画面，并且设定所述节目的广播开始时间。

26.根据权利要求22所述的方法，其中，步骤B)包括以下步骤：

B-1)所述集成终端向以无线方式与其连接的通信网络请求双向广播通信服务；

B-2)所述通信网络将来自所述集成终端的针对广播通信的请求通知给所述补充信息服务器，并且请求所述广播站提供所述节目；

B-3)所述通信网络接收所述广播站以流的形式提供的广播节目；以及

B-4)将以流的形式提供的所述广播节目传送给所述集成终端。

27.根据权利要求26所述的方法，该方法还包括以下步骤：在所述通信网络上被通知了所述集成终端的内容请求的所述补充信息服务器监测所述集成终端使用所述服务的状态。

28.根据权利要求22所述的方法，其中，步骤C)包括以下步骤：

C-1)所述集成终端向所述补充信息服务器提供请求所选画面的补充信息的信号；

C-2)所述补充信息服务器计算所述节目的开始时间和所选时间；

C-3)所述补充信息服务器搜索与所计算的节目时间相对应的补充信息；

C-4)将搜索到的补充信息提供给所述集成终端。

29.根据权利要求28所述的方法，其中，针对所述广播节目的每个帧来执行步骤C-2)中节目开始时间的计算。

30.一种补充信息服务器，该补充信息服务器用于接收来自广播站的节目，从补充信息生成装置接收补充信息和同步信息，设定节目开始时间，以及提供所选时间的补充信息，该补充信息服务器包括：

广播接收单元，用于以流的形式从所述广播站接收节目；

解码单元，用于将以流的形式接收到的节目信号解码为基于画面的信息；

同步信息单元，用于记录所述补充信息生成装置所提供的补充信息和同步信息；

视频比较单元，用于将来自所述解码单元的画面信息和来自同步信息单元的同步信息转换为向量，并且，当所述画面信息和所述同步信息之间的相似度大于特定临界值时，选择具有该相似度的流节目的画面作为节目开始画面，并且设定节目开始时间；以及

开始时间单元，用于记录和管理所述视频比较单元所设定的开始时间，并且计算广播所指定画面的时间。

31.根据权利要求30所述的补充信息服务器，其中，所述视频比较单元包括：

向量单元，用于将所述解码单元提供的节目画面的信号转换为向量值；

解析单元，用于通过对所述同步信息单元提供的补充信息进行解析来分离同步信息，并且将根据所述同步信息的编码类型进行了解码的同步信息提供给所述向量单元；以及

比较单元，用于从所述向量单元接收每个画面的向量数据以及从所述解析单元接收同步信息的向量数据，确定画面的向量数据和同步信息的向量数据之间的相似度是否大于特定的临界值，并且，如果确定的结果是所述相似度大于所述特定的临界值，则将所述节目画面指定为开始画面并且设定开始时间。

32.根据权利要求30所述的补充信息服务器，其中，所述开始时间单元包括用于计算特定画面的帧序列的结构。

33.根据权利要求31所述的补充信息服务器，其中，所述向量单元使用全部法、交叉法和倾斜法中的一种来获得节目画面信号的向量值。

34.一种使广播内容与补充信息同步的方法，所述方法包括以下步骤：

A)节目步骤，补充信息服务器从广播站以流的形式接收节目，对接收到的节目进行解码，并且将解码后的节目转换为向量值；

B)附加步骤，所述补充信息服务器从补充信息生成装置接收节目的补充信息和同步信息，对所述补充信息和所述同步信息进行XML解析，根据编码类型对XML解析后的补充信息和同步信息进行解码，并将解码后的补充信息和同步信息转换为向量值；以及

C)评估这些向量值之间的相似度，如果这些向量值之间的相似度大于特定的临界值，则将所述节目的相应画面设定为同步视频，并且设定所述节目的开始时间。

35.根据权利要求34所述的方法，其中，所述节目步骤A)包括以下步骤：

A-1)所述补充信息服务器确定是否以流的形式接收到了所述广播站广播的节目；

A-2)如果确定结果是以流的形式接收到了所述广播节目，则所述补充信息服务器接收所述广播节目，并且通过对所述广播节目进行解码而基于画面对所述广播节目进行解密；以及

A-3)将解码后的广播节目转换为向量值。

36.根据权利要求34所述的方法，其中，所述附加步骤B)包括以下步骤：

B-1)所述补充信息服务器确定是否从所述补充信息生成装置接收到了所述补充信息和所述同步信息；

B-2)如果确定结果是从所述补充信息生成装置接收到了所述补充信息和所述同步信息，则所述补充信息服务器对所述补充信息和所述同步信息进行XML解析，并且基于画面来识别同步信息；

B-3)根据编码类型对解析后的同步信息的画面进行解码，并且对所述同步信息进行解密；以及

B-4)将解码后的同步信息的画面转换为向量值。

37.根据权利要求34所述的方法，其中，步骤C)包括以下步骤：

C-1)确定流形式的广播节目的基于画面的向量值与同步信息画面的向量值之间的相似度是否大于特定的临界值；以及

C-2)如果确定结果是所述相似度大于所述临界值，则将相应的画面选择为节目的同步视频，并且设定开始时间。

38.根据权利要求34所述的方法，其中，使用用于测量向量之间距离的欧几里德距离法或余弦距离法来执行步骤C)中对于向量值之间相似度的评估。

39.根据权利要求36所述的方法，其中，所述补充信息生成装置提供的补充信息和同步信息为XML格式。

40.一种利用补充信息服务器使广播内容与补充信息同步的方法，所述补充信息服务器在通信网络上与集成终端相连接，从广播站以流的形式接收节目，并且从补充信息生成装置接收补充信息和同步信息，所述方法包括以下步骤：

A)确定所述集成终端是否在观看广播节目时选择了某个画面以及是否请求了该画面的补充信息；

B)如果确定结果是所述集成终端请求了补充信息，则接收所选画面的时间信息以及所选点的坐标信息，并且计算所述节目所经过的时间；以及

C)搜索与所选画面和坐标信息相对应的补充信息，并且将找到的补充信息提供给所述集成终端。

41.根据权利要求40所述的方法，其中，步骤B)包括以下步骤：

在所述集成终端选择的节目画面被广播之后，接收当前时间信息和坐标信息；以及

通过计算所述当前时间信息和所述广播节目的开始时间信息来检测经过的时间。

42.根据权利要求41所述的方法，其中，所述节目画面的时间信息包括所述节目画面的帧号信息。

43.一种使广播内容与补充信息同步的方法，所述方法包括以下步骤：

A)集成终端确定是否接收到了双向广播通信信号；

B)如果确定结果是接收到了所述广播通信信号，则所述集成终端接收并观看双向广播通信节目，并且确定是否要核对特定画面的补充信息；以及

C)如果确定结果是所述集成终端要核对特定画面的补充信息，则所述集成终端将所选画面的时间信息和坐标信息提供给补充信息服务器，并且接收与所选画面的时间信息和坐标信息相对应的相应补充信息。

44.根据权利要求43所述的方法，其中，步骤C)包括以下步骤：

将所述集成终端选择的广播节目画面的时间信息和坐标信息提供给所述补充信息服务器；以及

从所述补充信息服务器接收所选画面的补充信息。

45.根据权利要求43所述的方法，其中，所述补充信息包括一个或更多个文本、图像和运动图像。

Images