CN103514220A

CN103514220A - 基于多屏互动场景的视频画面检索方法、装置及系统

Info

Publication number: CN103514220A
Application number: CN201210222409.9A
Authority: CN
Inventors: 陈雯
Original assignee: Shenzhen QVOD Technology Co Ltd
Current assignee: Shenzhen QVOD Technology Co Ltd
Priority date: 2012-06-29
Filing date: 2012-06-29
Publication date: 2014-01-15
Anticipated expiration: 2032-06-29
Also published as: CN103514220B

Abstract

本发明提供一种基于多屏互动场景的视频画面检索方法、装置及系统，多屏互动场景中包括移动终端、适配器及显示器，其中，该方法包括：接收来自移动终端的截屏指令；适配器根据截屏指令截取显示器的当前视频画面；适配器将截取的当前视频画面发送至移动终端，以使移动终端根据当前视频画面中的信息进行检索。本发明可以由移动终端直接根据当前视频画面中的信息进行检索，提高了检索的有效性和效率，从而提高了用户的体验感。

Description

基于多屏互动场景的视频画面检索方法、装置及系统

技术领域

本发明涉及视频通信领域，具体地，涉及一种基于多屏互动场景的视频画面检索方法、装置及系统。

背景技术

传统的互联网应用使用场景中，当用户在收看电视、观看电影时，看到自己中意的图片、商品、感兴趣的事件、地方等，需要用户亲自在网络上通过启动搜索引擎以及关键字来查找相关资料，以获取相关信息。

这种传统的检索方式操作步骤繁琐，而且通过关键字的搜索也给用户带来较多的干扰信息，为了提高用户的体验感，如何对用户感兴趣的画面、或图片进行有效地检索，是亟待需要解决的问题。

发明内容

本发明实施例的主要目的在于提供一种基于多屏互动场景的视频画面检索方法、装置及系统，以解决用户在观看视频或图片过程中无法有效地进行检索视频或图片相关信息的问题。

为了实现上述目的，本发明实施例提供一种基于多屏互动场景的视频画面检索方法，该方法包括：接收来自所述移动终端的截屏指令；所述适配器根据所述的截屏指令截取显示器的当前视频画面；所述适配器将截取的当前视频画面发送至所述的移动终端，以使所述移动终端根据所述当前视频画面中的信息获得关联检索结果。

所述适配器将截取的当前视频画面发送至所述的移动终端，以使所述移动终端根据所述当前视频画面中的信息获得关联检索结果的步骤还包括：

所述移动终端根据视频附随的信息库和所述截取的当前视频画面提取关联检索关键字，并依据所述关联检索关键字向互联网发起关联检索请求和获取关联检索结果。

所述移动终端将截取的当前视频画面发送至关联检索服务器，所述关联检索服务器根据视频对应的信息库和所述截取的当前视频画面提取关联检索关键字，并依据所述关联检索关键字从互联网获取关联检索结果，并将所述关联检索结果反馈至移动终端显示。

接收来自移动终端的截屏指令之前，所述的方法还包括：接收来自所述移动终端播放的视频并在所述显示器播放。

接收来自移动终端的截屏指令之前，所述的方法还包括：所述适配器接收来自所述移动终端的进度控制指令，以控制所述显示器播放视频的进度；所述适配器将显示器播放视频的进度反馈至移动终端显示。

本发明实施例还提供一种基于多屏互动场景的视频画面检索装置，所述装置应用于包括移动终端、适配器及显示器的多屏互动场景中，所述装置包括：截屏指令接收单元，用于接收来自移动终端的截屏指令；截屏单元，用于所述适配器根据所述的截屏指令截取显示器的当前视频画面；画面发送单元，用于所述适配器将截取的当前视频画面发送至所述的移动终端，以使所述的移动终端根据所述当前视频画面中的信息获得关联检索结果。

所述的装置还包括：第一检索单元，用于所述移动终端根据视频附随的信息库和所述截取的当前视频画面提取关联检索关键字，并依据所述关联检索关键字向互联网发起关联检索请求和获取关联检索结果。

所述的装置还包括：第二检索单元，用于所述移动终端将截取的当前视频画面发送至关联检索服务器，所述关联检索服务器根据视频对应的信息库和所述截取的当前视频画面提取关联检索关键字，并依据所述关联检索关键字从互联网获取关联检索结果，并将所述关联检索结果反馈至移动终端显示。

所述的装置还包括：视频播放单元，用于接收来自所述移动终端播放的视频并在所述显示器播放。

所述的装置还包括：控制指令接收单元，用于所述适配器接收来自所述移动终端的进度控制指令，以控制所述显示器播放视频的进度；信息反馈单元，用于所述适配器将显示器播放视频的进度反馈至移动终端显示。

本发明实施例还提供一种视频画面的检索系统，该系统包括：基于多屏互动场景的视频画面检索装置、移动终端、适配器以及显示器，其中，所述的移动终端包括：视频播放单元，用于播放视频；视频信息发送单元，用于将播放的视频内容发送至所述适配器，以使所述视频在所述显示器播放；截屏指令发送单元，用于发送截屏指令至所述视频画面检索装置；画面接收单元，用于接收所述适配器截取的当前视频画面；检索单元，用于将所述截取的当前视频画面转换成关键字信息在网络或本地进行检索、并显示检索结果。

所述的检索单元包括：关键字转换模块，用于将所述截取的当前视频画面转换成关键字信息；检索模块，用于根据所述的关键字信息在网络或本地进行检索；检索结果显示单元，用于显示所述检索结果。

所述视频信息发送单元还用于：将播放的视频链接信息发送至所述视频画面检索装置，以使所述视频画面检索装置下载所述视频后在所述显示器播放。

借助于上述技术方案至少之一，通过根据移动终端的截屏指令进行截屏后，将截屏画面发送至移动终端，以使移动终端根据当前视频画面中的信息进行检索，可以由移动终端直接根据当前视频画面中的信息进行检索，提高了检索的有效性和效率，从而提高了用户的体验感。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是根据本发明实施例的基于多屏互动场景的视频画面检索方法的流程图；

图2是根据本发明实施例的视频画面的检索装置的结构框图；

图3是根据本发明实施例的视频画面的检索装置的具体结构框图；

图4是根据本发明实施例的视频画面的检索系统的结构框图；

图5是根据本发明实施例的检索单元的结构框图；

图6是根据本发明实施例的视频画面检索系统的同步播放流程图；

图7是根据本发明实施例的视频画面检索系统的检索流程图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

由于用户在观看视频或图片过程中，看到感兴趣的画面信息而无法有效地进行检索视频或图片相关信息，导致了用户体验感的降低。基于此，本发明实施例提供一种基于多屏互动场景的视频画面检索方法、装置及系统，其中，多屏互动场景中包括移动终端、适配器及显示器，以解决上述问题。以下结合附图对本发明进行详细说明。

实施例一

本发明实施例提供一种基于多屏互动场景的视频画面检索方法，如图1所示，该方法包括：

步骤101，接收来自移动终端的截屏指令；

步骤102，适配器根据截屏指令截取显示器的当前视频画面；

步骤103，适配器将截取的当前视频画面发送至移动终端，以使移动终端根据当前视频画面中的信息进行检索。

由以上描述可知，通过根据移动终端的截屏指令进行截屏后，适配器将截屏画面发送至移动终端，以使移动终端根据当前视频画面中的信息进行检索，相比于现有技术中需要用户根据关键字在网络上检索的方案，本发明实施例可以由移动终端直接根据当前视频画面中的信息进行检索，提高了检索的有效性和效率，从而提高了用户的体验感。

在接收来自移动终端的截屏指令之前，上述方法还包括：接收来自移动终端播放的视频并在显示器播放。这里接收的视频可以是视频内容、也可以是视频链接信息，当接收的是视频链接信息时，还需要根据视频链接信息从网络或本地下载视频，之后再由显示器播放。

在接收来自移动终端的截屏指令之前，上方法还包括：适配器接收来自移动终端的进度控制指令，以控制显示器播放视频的进度之后，适配器将显示器播放视频的进度反馈至移动终端显示。。也就是说，当视频在显示器播放后，移动终端可以当做遥控器控制播放进度，这方便了用户观看控制视频，提高了用户的体验感。

当将截取的当前视频画面发送至移动终端之后，移动终端将截取的当前视频画面转换成关键字信息在网络或本地进行检索、并显示检索结果。

具体地，移动终端根据视频附随的信息库和截取的当前视频画面提取关联检索关键字，并依据关联检索关键字向互联网发起关联检索请求和获取关联检索结果。或者，移动终端将截取的当前视频画面发送至关联检索服务器，关联检索服务器根据视频对应的信息库和截取的当前视频画面提取关联检索关键字，并依据关联检索关键字从互联网获取关联检索结果，并将关联检索结果反馈至移动终端显示。

相比于现有技术中需要用户根据关键字在网络上检索的方案，通过直接由移动终端根据当前视频画面中的信息进行检索，提高了检索的有效性和效率，从而提高了用户的体验感。

实施例二

本发明实施例提供一种视频画面的检索装置，优选地，用于实现上述实施例一中的方法。图2是该装置的结构框图，如图2所示，该装置包括：

截屏指令接收单元21，用于接收来自移动终端的截屏指令；

截屏单元22，用于适配器根据截屏指令截取显示器的当前视频画面；

画面发送单元23，用于适配器将截取的当前视频画面发送至移动终端，以使移动终端根据当前视频画面中的信息进行检索获得关联检索结果。

通过截屏单元根据移动终端的截屏指令进行截屏后，画面发送单元将截屏画面发送至移动终端，以使移动终端根据当前视频画面中的信息进行检索，相比于现有技术中需要用户根据关键字在网络上检索的方案，本发明实施例可以由移动终端直接根据当前视频画面中的信息进行检索，提高了检索的有效性和效率，从而提高了用户的体验感。

如图3所示，上述装置还可以包括：

视频播放单元24，用于接收来自移动终端播放的视频并在显示器播放；

控制指令接收单元25，用于接收来自移动终端的进度控制指令，以控制显示器播放视频的进度。

上述装置还可以包括：信息反馈单元，用于适配器将显示器播放视频的进度反馈至移动终端显示。

具体地，上述的装置还可以包括：

第一检索单元，用于移动终端根据视频附随的信息库和截取的当前视频画面提取关联检索关键字，并依据关联检索关键字向互联网发起关联检索请求和获取关联检索结果。或者，

上述的装置还可以包括：第二检索单元，用于移动终端将截取的当前视频画面发送至关联检索服务器，关联检索服务器根据视频对应的信息库和截取的当前视频画面提取关联检索关键字，并依据关联检索关键字从互联网获取关联检索结果，并将关联检索结果反馈至移动终端显示。

上述各单元的具体执行过程可以参见上述实施例一中的描述，此处不再赘述。

实施例三

本发明实施例还提供一种视频画面的检索系统，优选地包括上述实施例二中的视频画面检索装置，如图4所示，该系统包括：移动终端1、视频画面检索装置2以及显示器3，视频画面检索装置根据来自移动终端的截屏指令截取显示器的当前视频画面并发送至移动终端，移动终端根据当前视频画面中的信息进行检索。

在本实例中，实施例二中的视频画面检索装置与适配器是合一设置。在具体实施过程中，实施例二中的视频画面检索装置与适配器可以单一设置，具体设置可以根据实际情况设置在不同中的设备中，本发明不限于此。

其中，移动终端1包括：

视频播放单元11，用于播放视频；

视频信息发送单元12，用于将播放的视频内容发送至视频画面检索装置，以使视频在显示器播放；

截屏指令发送单元13，用于发送截屏指令至视频画面检索装置；

画面接收单元14，用于接收视频画面检索装置截取的当前视频画面；

检索单元15，用于将截取的当前视频画面转换成关键字信息在网络或本地进行检索、并显示检索结果。

通过截屏指令发送单元发送截屏指令至视频画面检索装置，视频画面检索装置截取显示器当前的视频画面，并返回给画面接收单元，检索单元将截取的当前视频画面转换成关键字信息在网络或本地进行检索、并显示检索结果，通过本发明实施例中的系统，可以由移动终端直接根据当前视频画面中的信息进行检索，相比于现有技术，提高了检索的有效性和效率，从而提高了用户的体验感。

如图5所示，检索单元15包括：

关键字转换模块151，用于将截取的当前视频画面转换成关键字信息；

检索模块152，用于根据关键字信息在网络或本地进行检索；

检索结果显示单元153，用于显示检索结果。

上视频信息发送单元还用于：将播放的视频链接信息发送至视频画面检索装置，以使视频画面检索装置下载视频后在显示器播放。

本发明实施例的系统主要基于多屏互动使用场景，在实际操作中，多设备之间正常连接且可以分屏使用，以下具体描述该系统的三个部分：

大屏幕显示终端：可以是各种高清电视、或大屏幕显示设备。

多屏互动适配器（即，上述的视频画面检索装置）：该设备可以作为外接设备插入显示终端，也可以是内置在显示终端中。适配器中内置andriod操作系统，内置多屏互动管理和服务软件。

智能终端（即，上述的移动终端）：具有各种操作系统的智能手机、智能PAD，该终端内置多屏互动管理和控制软件。

其中，智能终端与多屏互动适配器无线连接并进行数据通信。大屏幕显示终端用于输出多屏互动适配器从网络或者智能终端获取的音频和视频信号。

在实际操作中，智能终端可以设置信息库、截图关键字生成模块以及互联网截图关键字检索模块，通过这些模块智能可以实现关键字提取、并向互联网关联检索；也可以通过互联网的服务器分析和检索，智能终端通过关联检索服务器提供信息库、截图关键字生成模块以及互联网截图关键字检索模块，具体地，智能终端将收到的图片及相关信息发送至关联检索服务器，由关联检索服务器完成对图片的关键字提取和互联网关联检索，并将关联检索结果反馈至发起请求的智能终端。

图6是该系统的同步播放流程，如图6所示：

步骤601，大屏幕显示终端与适配器连接；

步骤602，智能终端通过WIFI、蓝牙、数据线或其他连接方式与多屏互动适配器建立数据连接；

步骤603，智能终端播放如：影片、图片、PPT、音乐等内容；

步骤604，智能终端将播放内容传送至多屏适配设备；或者，智能终端将播放链接信息传送给多屏适配器；

步骤605，多屏适配器通过无线网络访问和下载数据，并将视频以及音频输出至大屏幕播放；

步骤606，大屏幕与智能终端同步播放。

在大屏幕显示终端播放过程中，智能终端可以通过多屏适配进行远端控制，比如：控制影片快进、快退、截图等功能，影片播放过程中，智能终端可以正常使用其他应用且不影响大屏幕显示终端的播放。

图7是该系统的检索流程，如图7所示：

步骤701，移动终端触发截屏操作；

步骤702，适配器接收截屏指令，截取大屏幕显示设备正在播放中的的画面；

步骤703，适配器将截取的画面图片传送回移动终端；

步骤704，移动终端启动检索功能，进行截图信息检索，包括两种方法：

A、将截图信息转换成关键字信息，与移动终端的信息库比对，信息库为影片或是图片等预置的相关信息，比如关键词、商品信息、拍摄地点信息等，从而确定与截图关联的关联检索关键字，移动终端的控制模块根据关键字搜索互联网中与关键字相关的内容信息；

B、移动终端将截取的画面图片传送回关联检索服务器；关联检索服务器的截图关键字生成模块与信息库比对将截图信息转换成关键字信息，信息库为影片或是图片等预置的相关信息，比如关键词、商品信息、拍摄地点信息等，从而确定与截图关联的关联检索关键字。互联网截图关键字检索模块根据关键字搜索互联网中与关键字相关的内容信息。

步骤705，检索成功，显示截取画面中的检索信息；

步骤706，根据从截图画面而来的检索信息，进行相应的协同操作，如商品信息，链接至网购地址，等等。

以下给出一实例。

用户A使用多屏互动产品观看影片《穿prada的女魔头》,使用大屏电视机播放影片，而通过使用手机对影片进行播放/暂停、前进/后退、截图等控制。

当用户A在观看影片过程中，看到自己感兴趣的服装，于是可以使用截图功能。

从电视机上截取的图片传送回手机，用户A立即在手机上可以查看到刚才的截图。

截图上自动显示截图中商品信息（这部分内容可以是影片播放器是对于电影信息预置的一些商品信息）。

如果用户没有找到自己感兴趣服装的资料，截图上同样提供手动检索入口，点击手动检索，系统自动从互联网中匹配图片中商品或是相关信息。

查看到相关商品的信息，用户可以点击在线购买，跳转至网购商店。

通过上述由移动终端直接根据当前视频画面中的信息进行检索，可以提高检索的有效性和效率，从而提高用户的体验感。

综上所述，本发明实施例通过在多屏互动场景中，用户可以使用大屏幕显示终端，如：电视机、投影机、台式电脑等，不间断的观看影片，然后通过移动终端，如：手机、平板电脑，对播放内容进行控制、以及手动查找或是后台自动推送播放内容相关信息给用户，帮助用户快速找到、记录感兴趣的内容，相比于现有技术，本发明实施例可以提高检索的有效性和效率，从而提高用户的体验感。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读取存储介质中，比如ROM/RAM、磁碟、光盘等。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims

1.一种基于多屏互动场景的视频画面检索方法，其特征在于，所述多屏互动场景中包括移动终端、适配器及显示器，所述的方法包括：

接收来自所述移动终端的截屏指令；

所述适配器根据所述的截屏指令截取显示器的当前视频画面；

所述适配器将截取的当前视频画面发送至所述的移动终端，以使所述移动终端根据所述当前视频画面中的信息获得关联检索结果。

2.根据权利要求1所述的方法，其特征在于，所述适配器将截取的当前视频画面发送至所述的移动终端，以使所述移动终端根据所述当前视频画面中的信息获得关联检索结果的步骤还包括：

3.根据权利要求1所述的方法，其特征在于，所述适配器将截取的当前视频画面发送至所述的移动终端，以使所述移动终端根据所述当前视频画面中的信息获得关联检索结果的步骤还包括：

4.根据权利要求1至3中任意一项所述的方法，其特征在于，接收来自移动终端的截屏指令之前，所述的方法还包括：

接收来自所述移动终端播放的视频并在所述显示器播放。

5.根据权利要求1所述的方法，接收来自移动终端的截屏指令之前，所述的方法还包括：

所述适配器接收来自所述移动终端的进度控制指令，以控制所述显示器播放视频的进度；

所述适配器将显示器播放视频的进度反馈至移动终端显示。

6.一种基于多屏互动场景的视频画面检索装置，所述装置应用于包括移动终端、适配器及显示器的多屏互动场景中，其特征在于，所述的装置包括：

截屏指令接收单元，用于接收来自移动终端的截屏指令；

截屏单元，用于所述适配器根据所述的截屏指令截取显示器的当前视频画面；

画面发送单元，用于所述适配器将截取的当前视频画面发送至所述的移动终端，以使所述的移动终端根据所述当前视频画面中的信息获得关联检索结果。

7.根据权利要求6所述的装置，其特征在于，所述的装置还包括：

第一检索单元，用于所述移动终端根据视频附随的信息库和所述截取的当前视频画面提取关联检索关键字，并依据所述关联检索关键字向互联网发起关联检索请求和获取关联检索结果。

8.根据权利要求6所述的装置，其特征在于，所述的装置还包括：

第二检索单元，用于所述移动终端将截取的当前视频画面发送至关联检索服务器，所述关联检索服务器根据视频对应的信息库和所述截取的当前视频画面提取关联检索关键字，并依据所述关联检索关键字从互联网获取关联检索结果，并将所述关联检索结果反馈至移动终端显示。

9.根据权利要求6所述的装置，其特征在于，所述的装置还包括：

视频播放单元，用于接收来自所述移动终端播放的视频并在所述显示器播放。

10.根据权利要求6所述的装置，其特征在于，所述的装置还包括：

控制指令接收单元，用于所述适配器接收来自所述移动终端的进度控制指令，以控制所述显示器播放视频的进度；

信息反馈单元，用于所述适配器将显示器播放视频的进度反馈至移动终端显示。

11.一种基于多屏互动场景的视频画面检索系统，其特征在于，所述的系统包括如权利要求6至10中任一项所述的基于多屏互动场景的视频画面检索装置、移动终端、适配器以及显示器，其中，所述的移动终端包括：

视频播放单元，用于播放视频；

视频信息发送单元，用于将播放的视频内容发送至所述适配器，以使所述视频在所述显示器播放；

截屏指令发送单元，用于发送截屏指令至所述视频画面检索装置；

画面接收单元，用于接收所述适配器截取的当前视频画面；

检索单元，用于将所述截取的当前视频画面转换成关键字信息在网络或本地进行检索、并显示检索结果。

12.根据权利要求11所述的系统，其特征在于，所述的检索单元包括：

关键字转换模块，用于将所述截取的当前视频画面转换成关键字信息；

检索模块，用于根据所述的关键字信息在网络或本地进行检索；

检索结果显示单元，用于显示所述检索结果。

13.根据权利要求11所述的系统，其特征在于，所述视频信息发送单元还用于：将播放的视频链接信息发送至所述视频画面检索装置，以使所述视频画面检索装置下载所述视频后在所述显示器播放。