CN103686256A - 一种显示互动信息的方法和系统 - Google Patents

Abstract

本发明提供一种显示互动信息的方法和系统，所述方法包括：输入步骤、所述移动终端启动摄像头模块，拍摄或录制电视节目当前播放的画面图像或视频流，并将所述图像或视频流上传至服务器端；信息处理步骤、所述服务器端对所述图像或视频流进行检测、整理，得到图文信息；识别检索步骤、所述服务器端依据所述图文信息进行识别，获得电视栏目信息，并检索出与所述电视栏目信息对应的互动信息。本发明通过移动终端设备采集图像和视频流，服务器端提取和分析电视节目中的图文信息，并利用该图文信息在服务器端进行搜索，识别到电视台的台标和对应的互动信息，通过这些信息用户能方便地与电视节目进行互动，并能与其他收视者交互。

Description

一种显示互动信息的方法和系统

技术领域

本发明属于移动终端技术领域，尤其涉及一种显示互动信息的方法和系统。

背景技术

对于传统的电视收看方式，人们能和电视节目进行互动的有效方式是，用户需要记忆记住或通过文字方式记录下电视节目中的相关信息，比如：记录电视节目的热线电话号码，然后再通过拨打该热线电话参与电视节目，完成互动，这种方式在信息快速传递的时代显示出极大的不便。现在随着手机的应用，各种信息融合在一起，使得人们能更好的利用从电视中获取到的信息，但是，如果用户需要通过手机参与问卷调查之类的电视互动节目，这时要利用电视节目中通讯地址等信息，如果人为记忆和手动输入地址信息，使得效率很低并且很不方便。

发明内容

有鉴于此，本发明的目的是提供一种显示互动信息的方法和系统，通过采集、提取和分析电视节目中的图文信息，并利用该图文信息进行搜索，找到对应的互动信息，完成用户与电视节目或其他收视者之间的互动。

本发明提供一种显示互动信息的方法，用于包含摄像头模块和显示模块的移动终端，该方法包括：

输入步骤，所述移动终端启动摄像头模块，拍摄或录制电视节目当前播放的画面图像或视频流，并将所述图像或视频流上传至服务器端；

信息处理步骤，所述服务器端对所述图像或视频流进行检测、整理，得到图文信息；

识别检索步骤，所述服务器端依据所述图文信息进行识别，获得电视栏目信息，并检索出与所述电视栏目信息对应的互动信息。

根据上述的方法，其中，所述摄像头模块包括前置摄像头和/或后置摄像头。

根据上述的方法，其中，所述信息处理步骤进一步包括：

从所述图像或视频流中检测出图标和文字图像信息；

依据所述图标和文字图像信息分别与图文库中的图集和文字集进行比对识别，对比对识别结果进行分类、整理后获得图文信息。

根据上述的方法，其中，所述图集包括电视台的台标，所述文字集包括汉字、字母、数字。

根据上述的方法，其中，所述识别检索步骤进一步包括：根据所述图文信息，在所述服务器端比对识别出与图文信息对应的电视栏目信息，并依据所述电视栏目信息检索出对应的互动信息；

所述互动信息包括：论坛地址、节目介绍、联系方式、问卷调查。

根据上述的方法，其中，所述识别检索步骤还包括，如果在所述服务器端没有识别到对应的电视栏目信息，则通过网络进行搜索，所述网络包括广播电视网、IP网络。

根据上述的方法，其中，所述方法进一步包括：

处理步骤，显示所述服务器端返回的所述互动信息，用户可对所述互动信息进行处理，所述处理包括：参与讨论、节目播报、联系互动、回复问卷。

本发明提供一种显示互动信息的系统，用于包含摄像头模块和显示模块的移动终端，该系统包括：移动终端、服务器端，

所述移动终端包括：输入模块、通讯模块，

所述输入模块，用于启动所述摄像头模块，拍摄或录制电视节目当前播放的画面图像或视频流；

所述通讯模块，用于将所述图像或视频流发送到所述服务器端，并接受所述服务器端返回的互动信息；

所述服务器端包括：通讯模块、信息处理模块、识别检索模块，

所述通讯模块，用于接收所述移动终端发送的图像或视频流数据，并将所述识别检索模块检索识别到的互动信息发送到所述移动终端；

所述信息处理模块，用于对所述图像或视频流进行检测、整理，得到图文信息；

所述识别检索模块，用于依据所述图文信息进行识别，获得电视栏目信息，并检索出与电视栏目信息对应的互动信息。

根据上述的系统，其中，所述摄像头模块包括前置摄像头和/或后置摄像头。

根据上述的系统，其中，所述信息处理模块进一步用于：

从所述图像或视频流中检测出图标和文字图像信息；

依据所述图标和文字图像信息分别与图文库中的图集和文字集进行比对识别，对比对识别结果进行分类、整理后获得图文信息。

根据上述的系统，其中，所述图集包括电视台的台标，所述文字集包括汉字、字母、数字。

根据上述的系统，其中，所述识别检索模块进一步用于，根据所述图文信息，在所述服务器端比对识别出与图文信息对应的电视栏目信息，并依据电视栏目信息检索出对应的互动信息；

所述互动信息包括：论坛地址、节目介绍、联系方式、问卷调查。

根据上述的系统，其中，所述识别检索模块还用于，如果在所述服务器端没有识别到对应的电视栏目信息，则通过网络进行搜索，所述网络包括广播电视网、IP网络。

根据上述的系统，其中，所述移动终端进一步包括处理模块，用于显示所述服务器端返回的所述互动信息，用户对所述互动信息进行处理，所述处理包括：参与讨论、节目播报、联系互动、回复问卷。

本发明提供的一种显示互动信息的方法和系统，通过移动终端设备采集图像和视频流，服务器端提取和分析电视节目中的图文信息，并利用该图文信息在服务器端进行搜索，识别到电视台的台标和对应的互动信息，通过这些信息用户能方便地与电视节目进行互动，并能与其他收视者交互。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍。显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域内普通技术人员来说，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：

图1是根据本发明实施例的一种显示互动信息的方法流程图；

图2是根据本发明实施例的显示互动信息的具体方法流程图；

图3是根据本发明实施例的服务器端获取互动信息的处理流程图；以及

图4是根据本发明实施例的显示互动信息的系统框图。

具体实施方式

为了使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。

参见图1，为本发明实施例中一种显示互动信息的方法流程图，包括以下步骤：

步骤S110、输入步骤，移动终端启动摄像头模块，拍摄或录制电视节目当前播放的画面图像或视频流，并将图像或视频流上传至服务器端。

步骤S120、信息处理步骤，服务器端对图像或视频流进行检测、整理，得到图文信息。

步骤S130、识别检索步骤，服务器端依据图文信息进行识别，获得电视栏目信息，并检索出与电视栏目信息对应的互动信息。

本发明的移动终端包括：手机、平板电脑等智能移动终端，具备有摄像头模块，并能进行基本拍摄或录制操作，在以下实施例中以手机为例对显示互动信息的方法进行详细描述。

参见图2，根据本发明实施例的显示互动信息的具体方法流程图，具体如下所述：

步骤210，启动手机客户端，同时启动手机的摄像头，拍摄或录制电视节目当前播放的画面图像或视频流。

在电视节目播放过程中，如果出现用户需要的重要信息，如：电视剧、实时新闻、联系电话和通讯地址等，用户想记录保存这些信息或是通过这些信息和电视节目进行互动的话，可以启动手机客户端，通过手机直接拍摄包含这些信息的电视画面，或是录取一段包含这些信息的电视视频流。其中，手机的摄像头包括：前置摄像头、后置摄像头。

步骤220，手机客户端对手机拍摄的图像或录制的视频流进行保存，完成信息的采集。

步骤230，手机客户端将图像或视频流上传到服务器端。

步骤240，服务器端对图像或视频流进行检测、整理、识别和检索操作，将获得的电视栏目信息对应的互动信息返回给移动终端。

服务器端对图像或视频流进行处理后获得互动信息的过程具体如图3，根据本发明实施例的服务器端获取互动信息的处理流程图，步骤进一步包括：

步骤310，服务器端接收手机上传的图像或视频流数据。

步骤320，服务器端从图像或视频中检测出图标和文字图像信息。

首先，从视频流中提取包含重要信息的关键帧，服务器端依据图像或关键帧按照一定方法（如基于颜色的连通分量方法）或算法（如基于纹理的分割算法）检测出其中包含的图标和文字区域；然后，将文字区域的文字图像从画面背景中分割出来得到文字图像信息。

步骤330，服务器端依据图标和文字图像信息与图文库进行比对识别，对比对识别结果进行分类、整理后获得图文信息。

服务器端依据图标和文字图像信息分别与图文库中的图集和文字集进行比对识别，其中，图集包括各电视台的台标，而文字集包括但不限于：汉字、字母、数字等，服务器端的图集和文字集还可以定期从网络上进行下载更新。通过将图标和图集中的最相似图形进行比对，判断出拍摄的图标对应的图形，同时，依据文字图像信息中文字的笔画特征与图文库中文字集进行比对，检索出最相似字形的文字。最后，对比对识别结果进行分类、整理后获得图文信息。

步骤340，根据图文信息，在服务器端比对识别出与图文信息对应的电视栏目信息，并依据电视栏目信息检索出对应的互动信息。

服务器端可以保存所有当前电视台的台标供比对识别用，通过比对可以识别出当前图文信息中的图标对应的电视台台标，并通过图文信息中的文字信息识别到台标对应的电视台节目的准确内容，从而能获取到准确有用的电视栏目信息，再依据电视栏目信息检索出对应的互动信息，该互动信息包括但不限于：论坛地址、节目介绍、联系方式、问卷调查等，具体可以包括：论坛地址链接、群地址、剧情介绍、节目时间表、节目热线电话、节目信箱地址、问卷内容等。

如果在服务器端没有识别到对应的电视栏目信息，可以通过网络进行搜索，网络包括广播电视网、IP网络等。

步骤350，服务器端将互动信息返回给移动终端。

需要说明的是，如果用户只是想要获取电视台台标，则获取电视栏目信息的处理步骤可以在移动终端中完成，移动终端事先将所有电视台的台标信息进行保存形成图集。

移动终端从图像或视频中检测出图标，依据图标与图集进行比对识别，其中，图集包括各电视台的台标，通过将图标和图集中的最相似电视台台标进行比对，判断出拍摄的图标对应的台标并形成电视栏目信息结果，最后，将结果整理显示给用户。

移动终端保存的图集可以定期通过网络进行下载更新，网络包括广播电视网、IP网络等。

步骤250，移动终端收到服务器端返回的互动信息。

收到返回的互动信息后，手机可通过显示屏进行显示，供用户进行查看以选择需要的信息。

步骤260，用户可对互动信息进行处理。

移动终端提供用户处理互动信息的功能，其中，处理方式包括但不限于：参与讨论、节目播报、联系互动、回复问卷等，用户可通过选择不同的处理方式来完成需要，具体可以是：

选择参与讨论，则提供以下选项供用户选择：相关论坛、相关群等，用户可以选择“相关论坛”或“相关群”，进入到与电视节目相关的论坛地址参与论坛讨论或加入到相应的群中来发表自己的观点；

选择节目播报，则提供以下选项供用户选择：查看剧情、节目时间表等，用户可以选择“查看剧情”来获取剧情列表链接进行电视剧情查看，而“节目时间表”可获取到电视节目的播放时间表；

选择联系互动，则提供以下选项供用户选择：发送短信、呼叫、存入通讯录等，通过“呼叫”节目热线电话参与现场讨论，或“发送短信”参与节目的投票，或“存入通讯录”保存节目热线电话或节目信箱地址，比如：如果用户正在参与电视节目投票活动，提取到电视节目的热线电话后直接编辑自己支持的人名或电视节目名并发送短信即可；

选择回复问卷，用户可直接回复问卷的答案，通过回答问卷调查来体现参与度。

参见图4，根据本发明实施例的显示互动信息的系统框图，该系统4 00用于包含摄像头模块41 0和显示模块420的移动终端，该系统400包括：移动终端400a、服务器端400b。

其中，移动终端400a包括：输入模块430，用于启动摄像头模块410，拍摄或录制电视节目当前播放的画面图像或视频流；通讯模块440，用于将图像或视频流发送到服务器端400b，并接受服务器端400b返回的互动信息；

服务器端400b包括：通讯模块460，用于接收移动终端400a发送的图像或视频流数据，并将识别检索模块480检索到的互动信息发送到移动终端400a；信息处理模块470，用于对移动终端400a上传的图像或视频流进行检测、整理，得到图文信息；识别检索模块480，用于依据图文信息进行识别，获得电视栏目信息，并检索出与电视栏目信息对应的互动信息。

信息处理模块470进一步用于从图像或视频流中检测出图标和文字图像信息；依据图标和文字图像信息分别与图文库中的图集和文字集进行比对识别，其中，图集包括各电视台的台标，而文字集包括但不限于：汉字、字母、数字等，服务器端的图集还可以定期从网络上进行下载更新。通过将图标和图集中的最相似图形进行比对，判断出拍摄的图标对应的图形，同时，依据文字图像信息中文字的笔画特征与图文库中文字集进行比对，检索出最相似字形的文字。最后，对比对识别结果进行分类、整理后获得图文信息。

识别检索模块480进一步用于根据图文信息，在服务器端400b比对识别出与图文信息对应的电视栏目信息，并检索出与电视栏目信息对应的互动信息。服务器端400b可以保存所有当前电视台的台标供比对识别用，通过比对可以识别出当前图文信息中的图标对应的电视台台标，并通过图文信息中的文字信息识别到台标对应的电视台节目的准确内容，从而能获取到准确有用的电视栏目信息，再依据电视栏目信息检索出对应的互动信息，该互动信息包括但不限于：论坛地址、节目介绍、联系方式、问卷调查等，具体可以包括：论坛地址链接、群地址、剧情介绍、节目时间表、节目热线电话、节目信箱地址、问卷内容等。

识别检索模块480还用于，如果在服务器端没有识别到对应的电视栏目信息，则通过网络进行搜索，其中，网络包括但不限于，广播电视网、IP网络。

移动终端400a进一步包括处理模块450，用于显示服务器端400b返回的互动信息后，用户对互动信息进行处理，其中，处理方式包括但不限于：参与讨论、节目播报、联系互动、回复问卷等。如果用户选择联系互动，则提供以下选项供用户选择：发送短信、呼叫、存入通讯录等，通过“呼叫”热线电话参与现场讨论，或“发送短信”参与节目的投票，或“存入通讯录”保存节目热线电话或节目信箱，比如：如果用户正在参与电视节目投票活动，提取到电视节目的热线电话后直接编辑自己支持的人名或电视节目名并发送短信即可。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (14)

1.一种显示互动信息的方法，用于包含摄像头模块和显示模块的移动终端，其特征在于，所述方法包括：

输入步骤，所述移动终端启动摄像头模块，拍摄或录制电视节目当前播放的画面图像或视频流，并将所述图像或视频流上传至服务器端；

信息处理步骤，所述服务器端对所述图像或视频流进行检测、整理，得到图文信息；

识别检索步骤，所述服务器端依据所述图文信息进行识别，获得电视栏目信息，并检索出与所述电视栏目信息对应的互动信息。

2.根据权利要求1所述的方法，其特征在于，所述摄像头模块包括前置摄像头和/或后置摄像头。

3.根据权利要求1所述的方法，其特征在于，所述信息处理步骤进一步包括：

从所述图像或视频流中检测出图标和文字图像信息；

依据所述图标和文字图像信息分别与图文库中的图集和文字集进行比对识别，对比对识别结果进行分类、整理后获得图文信息。

4.根据权利要求3所述的方法，其特征在于，所述图集包括电视台的台标，所述文字集包括汉字、字母、数字。

5.根据权利要求1所述的方法，其特征在于，所述识别检索步骤进一步包括：根据所述图文信息，在所述服务器端比对识别出与图文信息对应的电视栏目信息，并依据所述电视栏目信息检索出对应的互动信息；

所述互动信息包括：论坛地址、节目介绍、联系方式、问卷调查。

6.根据权利要求5所述的方法，其特征在于，所述识别检索步骤还包括，如果在所述服务器端没有识别到对应的电视栏目信息，则通过网络进行搜索，所述网络包括广播电视网、IP网络。

7.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：

处理步骤，显示所述服务器端返回的所述互动信息，用户可对所述互动信息进行处理，所述处理包括：参与讨论、节目播报、联系互动、回复问卷。

8.一种显示互动信息的系统，用于包含摄像头模块和显示模块的移动终端，其特征在于，所述系统包括：移动终端、服务器端，

所述移动终端包括：输入模块、通讯模块，

所述输入模块，用于启动所述摄像头模块，拍摄或录制电视节目当前播放的画面图像或视频流；

所述通讯模块，用于将所述图像或视频流发送到所述服务器端，并接受所述服务器端返回的互动信息；

所述服务器端包括：通讯模块、信息处理模块、识别检索模块，

所述通讯模块，用于接收所述移动终端发送的图像或视频流数据，并将所述识别检索模块检索识别到的互动信息发送到所述移动终端；

所述信息处理模块，用于对所述图像或视频流进行检测、整理，得到图文信息；

所述识别检索模块，用于依据所述图文信息进行识别，获得电视栏目信息，并检索出与电视栏目信息对应的互动信息。

9.根据权利要求8所述的系统，其特征在于，所述摄像头模块包括前置摄像头和/或后置摄像头。

10.根据权利要求8所述的系统，其特征在于，所述信息处理模块进一步用于：

从所述图像或视频流中检测出图标和文字图像信息；

依据所述图标和文字图像信息分别与图文库中的图集和文字集进行比对识别，对比对识别结果进行分类、整理后获得图文信息。

11.根据权利要求10所述的系统，其特征在于，所述图集包括电视台的台标，所述文字集包括汉字、字母、数字。

12.根据权利要求8所述的系统，其特征在于，所述识别检索模块进一步用于，根据所述图文信息，在所述服务器端比对识别出与图文信息对应的电视栏目信息，并依据电视栏目信息检索出对应的互动信息；

所述互动信息包括：论坛地址、节目介绍、联系方式、问卷调查。

13.根据权利要求12所述的系统，其特征在于，所述识别检索模块还用于，如果在所述服务器端没有识别到对应的电视栏目信息，则通过网络进行搜索，所述网络包括广播电视网、IP网络。

14.根据权利要求8所述的系统，其特征在于，所述移动终端进一步包括处理模块，用于显示所述服务器端返回的所述互动信息，用户对所述互动信息进行处理，所述处理包括：参与讨论、节目播报、联系互动、回复问卷。

Images