CN109597898A - 一种信息检索方法及装置 - Google Patents

Abstract

一种信息检索方法及装置，包括：检测用户输入的待检索信息，查询与待检索信息相匹配的目标文本流中的目标内容，目标文件包括音视频文件、第一文本流和第二文本流。第一文本流是由音视频文件录制过程采集声音信息得到，第二文本流是由音视频文件录制过程采集显示屏的屏体内容得到，第一文本流和第二文本流与音视频文件的录制时间轴相关联，目标文本流为第一文本流或者第二文本流；获取与目标内容相匹配的用于打开音视频文件的链接信息。实施本发明实施例，能够根据链接信息从录制时间轴上的目标内容对应的时间点开始播放音视频文件，实现了对音视频文件所包含内容的检索，能够全面地检索资料信息，从而提高信息资源库的利用率。

Description

一种信息检索方法及装置

技术领域

本发明涉及互联网技术领域，尤其涉及一种信息检索方法及装置。

背景技术

目前，许多高校往往会提供学习资源库供学生检索学习资料，学生可以在学习资源库中检索老师授课的视频和每门课程对应的文档资料等。通常地，学生可以根据授课内容的文件名称、授课内容的上传时间或者授课老师的简介等检索学习资料。例如，当学生需要检索有关“牛顿定理”的学习资料时，可以查询文件名称包含“牛顿定理”的文件，也可以查询指定物理老师对应的视频课程，但是这一过程无法查询到文件名称不包含“牛顿定理”的金融学习视频中包含牛顿定理的内容。可见，这种学习资料的检索方式不够全面，导致学习资源库的利用率较低。

发明内容

本发明实施例公开一种信息检索方法及装置，能够全面地检索资料信息，从而提高信息资源库的利用率。

本发明实施例第一方面公开一种信息检索方法，包括：

检测用户输入的待检索信息；

查询与所述待检索信息相匹配的目标文本流中的目标内容；所述目标文本流存储在目标文件中，其中，所述目标文件包括音视频文件、第一文本流和第二文本流，所述第一文本流在所述音视频文件录制时间轴的起始时间点开始采集声音信息以及在终止时间点停止采集声音信息所得到，所述第二文本流在所述音视频文件录制时间轴的起始时间点开始采集显示屏的屏体内容以及在终止时间点停止采集屏体内容所得到，并且所述第一文本流和所述第二文本流与所述音视频文件的录制时间轴相关联，所述目标文本流为所述第一文本流或者所述第二文本流；

获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件。

作为一种可选的实施方式，在本发明实施例第一方面中，所述第一文本流由多个第一点文本流组成，且所述第一点文本流的数量与所述音视频文件的录制时间轴上时间点的数量相同，每个所述第一点文本流对应一个时间点，任意两个所述第一点文本流所对应的时间点不相同，且所述第一点文本流与所述音视频文件的录制时间轴上的每一个时间点相关联；所述第二文本流由多个第二点文本流组成，且所述第二点文本流的数量与所述音视频文件的录制时间轴上时间点的数量相同，每个所述第二点文本流对应一个时间点，任意两个所述第二点文本流所对应的时间点不相同，且所述第二点文本流与所述音视频文件的录制时间轴上的每一个时间点相关联。

作为一种可选的实施方式，在本发明实施例第一方面中，所述查询与所述待检索信息相匹配的目标文本流中的目标内容，包括：

查询与所述待检索信息相匹配的目标文本流中的目标内容，所述目标内容为所述第一文本流中的某一第一点文本流对应的内容或者为所述第二文本流中某一第二点文本流对应的内容；

所述获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件，包括：

获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件，所述目标文本流中目标内容对应的时间点为所述第一文本流中的某一第一点文本流在所述录制时间轴上对应的时间点或者为所述第二文本流中某一第二点文本流在所述录制时间轴上对应的时间点。

作为一种可选的实施方式，在本发明实施例第一方面中，在所述获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息之后，所述方法还包括：

检测是否接收到用户针对所述链接信息输入的打开指令；

当检测到用户输入的所述打开指令时，跳转至所述音视频文件的录制时间轴上所述目标文本流中目标内容对应的时间点开始播放所述音视频文件。

作为一种可选的实施方式，在本发明实施例第一方面中，所述检测用户输入的待检索信息，包括：

输出语音提示，所述语音提示用于提示用户语音输入语音信息；

识别用户输入的所述语音信息，并将所述语音信息转化为文本内容以获得待检索信息。

本发明实施例第二方面公开一种信息检索装置，包括：

第一检测单元，用于检测用户输入的待检索信息；

查询单元，用于查询与所述第一检测单元检测到的所述待检索信息相匹配的目标文本流中的目标内容；所述目标文本流存储在目标文件中，其中，所述目标文件包括音视频文件、第一文本流和第二文本流，所述第一文本流在所述音视频文件录制时间轴的起始时间点开始采集声音信息以及在终止时间点停止采集声音信息所得到，所述第二文本流在所述音视频文件录制时间轴的起始时间点开始采集显示屏的屏体内容以及在终止时间点停止采集屏体内容所得到，并且所述第一文本流和所述第二文本流与所述音视频文件的录制时间轴相关联，所述目标文本流为所述第一文本流或者所述第二文本流；

获取单元，用于获取与所述查询单元查询到的所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件。

作为一种可选的实施方式，在本发明实施例第二方面中，所述第一文本流由多个第一点文本流组成，且所述第一点文本流的数量与所述音视频文件的录制时间轴上时间点的数量相同，每个所述第一点文本流对应一个时间点，任意两个所述第一点文本流所对应的时间点不相同，且所述第一点文本流与所述音视频文件的录制时间轴上的每一个时间点相关联；所述第二文本流由多个第二点文本流组成，且所述第二点文本流的数量与所述音视频文件的录制时间轴上时间点的数量相同，每个所述第二点文本流对应一个时间点，任意两个所述第二点文本流所对应的时间点不相同，且所述第二点文本流与所述音视频文件的录制时间轴上的每一个时间点相关联。

作为一种可选的实施方式，在本发明实施例第二方面中，所述查询单元包括：

查询子单元，用于查询与所述待检索信息相匹配的目标文本流中的目标内容，所述目标内容为所述第一文本流中的某一第一点文本流对应的内容或者为所述第二文本流中某一第二点文本流对应的内容；

所述获取单元包括：

获取子单元，用于获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件，所述目标文本流中目标内容对应的时间点为所述第一文本流中的某一第一点文本流在所述录制时间轴上对应的时间点或者为所述第二文本流中某一第二点文本流在所述录制时间轴上对应的时间点。

作为一种可选的实施方式，在本发明实施例第二方面中，所述装置还包括：

第二检测单元，用于在所述获取子单元获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息之后，检测是否接收到用户针对所述链接信息输入的打开指令；

播放单元，用于当所述第二检测单元检测到用户输入的所述打开指令时，跳转至所述音视频文件的录制时间轴上所述目标文本流中目标内容对应的时间点开始播放所述音视频文件。

作为一种可选的实施方式，在本发明实施例第二方面中，所述第一检测单元包括：

输出子单元，用于输出语音提示，所述语音提示用于提示用户语音输入语音信息；

识别子单元，用于识别用户输入的所述语音信息，并将所述语音信息转化为文本内容以获得待检索信息。

本发明实施例第三方面公开一种电子设备，包括：

本发明第二方面所介绍的信息检索装置。

本发明实施例第四方面公开了一种电子设备，可包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，执行本发明第一方面的任意一种方法的部分或全部步骤。

本发明实施例第五方面公开一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

本发明实施例第六方面公开一种应用发布平台，所述应用发布平台用于发布计算机程序产品，其中，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

与现有技术相比，本发明实施例具有以下有益效果：

本发明实施例中，检测用户输入的待检索信息，查询与待检索信息相匹配的目标文本流中的目标内容，其中，目标文本流存储在目标文件中，并且，目标文件包括音视频文件、第一文本流和第二文本流。第一文本流是在音视频文件录制时间轴的起始时间点开始采集声音信息以及在终止时间点停止采集声音信息所得到的，第二文本流是在音视频文件录制时间轴的起始时间点开始采集显示屏的屏体内容以及在终止时间点停止采集屏体内容所得到，并且第一文本流和第二文本流与音视频文件的录制时间轴相关联，目标文本流为第一文本流或者第二文本流；获取与目标内容相匹配的用于打开音视频文件的链接信息。这一过程通过与目标内容相匹配的链接信息，能够根据链接信息从录制时间轴上的目标内容对应的时间点开始播放音视频文件，实现了对音视频文件所包含内容的检索，能够全面地检索资料信息，从而提高信息资源库的利用率。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例公开的一种信息检索方法的流程示意图；

图2是本发明实施例公开的一种目标文件的组成示意图；

图3是本发明实施例公开的另一种信息检索方法的流程示意图；

图4是本发明实施例公开的一种信息检索装置的结构示意图；

图5是本发明实施例公开的另一种信息检索装置的结构示意图；

图6是本发明实施例公开的另一种信息检索装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开一种信息检索方法及装置，能够全面地检索学习资料，从而提高学习资源库的利用率。以下分别进行详细说明。

本发明实施例所描述的信息检索方法可以应用于学生在学习资源库检索学习资料，也可以应用于档案员在数据库中检索资料等。以学生在学习资源库检索学习资料为例，其中，学习资源库中可以包括针对老师上课内容的录制音视频。如学生需要检索有关“牛顿定理”的学习资料或者想重新温习老师对“牛顿定理”的授课时，学生通过输入“牛顿定理”，信息检索装置会查询包含“牛顿定理”的目标文本流，其中，目标文本流存储在目标文件中，目标文件包括录制老师上课的录制音视频，第一文本流和第二文本流。录制音视频中的音视频包括有老师授课用的电子设备屏体上的课件内容和配合课件讲课的声音，第一文本流是采集老师配合课件讲课的声音对应生成的文本流，第二文本流是采集电子设备屏体所展示的课件内容对应生成的文本流，目标文本流可以为第一文本流，也可以为第二文本流。例如，当老师讲课声音中提及“牛顿定理”，在第一文本流中查询到包含“牛顿定理”，此时，查询第一文本流中“牛顿定理”对应的时间轴上的时间点，获取从该时间点开始播放音视频的链接信息。学生能够根据链接信息直接从录制音视频中包含“牛顿定理”的时间点播放音视频。又或者，当电子设备屏体所展示的PPT中的某一页包含“牛顿定理”的字样时，在第二文本流中查询到包含“牛顿定理”，此时查询第二文本流中“牛顿定理”对应的时间轴上的时间点，获取从该时间点开始播放音视频的链接信息，学生能够根据链接信息直接从录制音视频中老师授课用的电子设备屏体上的课件内容包含“牛顿定理”的时间点播放音视频。实现了对录制音视频全方面内容的检索(包括某一时间点出现“牛顿定律”的视频和音频)，能够全面地检索学习资料，从而提高学习资源库的利用率。

需要说明的是，本发明提及的电子设备可以是多媒体设备、触摸会议一体机、触摸教学一体机等，在此不做限定。

结合上述所介绍的内容，下面将通过具体实施例对本发明技术方案进行详细说明。

实施例一

请一并参阅图1与图2，图1是本发明实施例公开的一种信息检索方法的流程示意图，图2是一种目标文件的组成示意图。如图1所示，该信息检索方法可以包括以下步骤：

101、检测用户输入的待检索信息。

本发明实施例中，执行主体可以为信息检索装置，其中，信息检索装置可以包括用户终端与后台服务器。用户终端可以检测用户输入的待检索信息，再将待检索信息发送至后台服务器，以使后台服务器执行步骤102～103，实现在庞大数据库中对待检索信息的检索操作；后台服务器也可以直接检测用户输入的待检索信息，并完成步骤102～步骤103；或者，用户终端在小型本地数据库中也可以完成步骤101～步骤103，本发明实施例中不做限定。其中，待检索信息可以为待检索关键词，也可以为待检索语音、待检索图片、待检索视频片段等，本发明实施例中不做限定。例如，待检索关键词可以为“质量守恒定律”，待检索语音可以为用户语音输入的“质量守恒定律”的语音信息，待检索图片可以为有关“质量守恒定律”的PPT截图，待检索视频片段可以为老师教授“质量守恒定律”课程的视频片段，其中，待检索视频片段可以为GIF动图，也可以为MP4、RMVB、MKV或者AVI等格式的视频片段，本发明实施例中不做限定。

需要说明的是，在本发明实施例中，在授课、培训或者会议过程中，可以对授课、培训或者会议过程进行音视频录制，以获得音视频文件。其中，当检测到音视频录制开始指令时，根据音视频的录制时间轴的起始时间点开始录制显示屏上播放的视频或文档或图片等、以及采集声音，在录制时间轴的终止时间点结束得到音视频文件。同时，在录制时间轴的起始时间点开始识别声音生成第一文本流和识别屏体内容生成第二文本流。结合音视频文件、第一文本流和第二文本流得到目标文件，并将目标文件保存起来，例如保存进预设数据库(资料数据库)等。

还需要说明的是，显示屏的屏体内容可以为显示屏上播放的视频或文档或图片等，若显示屏上播放的视频或文档中存在包含文字的图片，那么还可以识别出显示屏上图片的文字，因此，以下几种屏体内容都可以识别：若显示屏播放的是视频，那么屏体内容就包括视频所配的字幕、存在于视频中的图片所包含的文字信息等；若显示屏播放的为文档，那么屏体内容就包括文档中的文字信息、存在于文档中的图片所包含的文字信息等。当然，还有其它情况，本发明对此不做限定。

102、查询与待检索信息相匹配的目标文本流中的目标内容。

本发明实施例中，目标文本流存储在目标文件中，其中，目标文件包括音视频文件、第一文本流和第二文本流，第一文本流在音视频文件录制时间轴的起始时间点开始采集声音信息以及在终止时间点停止采集声音信息所得到，第二文本流在音视频文件录制时间轴的起始时间点开始采集显示屏的屏体内容以及在终止时间点停止采集屏体内容所得到，并且第一文本流和第二文本流与音视频文件的录制时间轴相关联，目标文本流为第一文本流或者第二文本流。

本发明实施例中，可选的，第一文本流由多个第一点文本流组成，且第一点文本流的数量与音视频文件的录制时间轴上时间点的数量相同，每个第一点文本流对应一个时间点，任意两个第一点文本流所对应的时间点不相同，且第一点文本流与音视频文件的录制时间轴上的每一个时间点相关联；第二文本流由多个第二点文本流组成，且第二点文本流的数量与音视频文件的录制时间轴上时间点的数量相同，每个第二点文本流对应一个时间点，任意两个第二点文本流所对应的时间点不相同，且第二点文本流与音视频文件的录制时间轴上的每一个时间点相关联。

本发明实施例中，目标内容为第一文本流中的某一第一点文本流对应的内容或者为第二文本流中某一第二点文本流对应的内容。

请一并参阅图2，图2所示的目标文件的组成示意图将第一文本流、第二文本流以及音视频与录制时间轴之间的关系分别用L1、L2以及L3来表示，其中，L1用于表示录制时间轴与音视频的关联，L2用于表示录制时间轴与第一文本流的关联，L3用于表示录制时间轴与第二文本流的关联。L1、L2和L3上都包含有多个时间点(1～n)，其中，1所在的时间点为第一时间点即音视频录制开始的时间点，n所在的时间点为第二时间点即音视频录制结束的时间点，m所在的时间点为1～n之间某一时间点，以m所在的时间点为例，L1上m所在的时间点上关联有音视频录制过程中处于该时间点的音视频画面，L2上m所在的时间点上关联有处于该时间点的第一点文本流，即该时间点识别出的声音信息内容，L3上m所在的时间点上关联有第二点文本流，即该时间点识别出的显示屏的屏体内容。

作为一种可选的实施方式，当后台服务器作为执行主体执行步骤101～步骤103时，在后台服务器检测到用户输入的待检索信息之后，并且在预设数据库中未查询到与待检索信息相关的搜索结果时，还可以执行以下步骤：

后台服务器跳转至网络搜索引擎搜索上述待检索信息，并接收网络搜索引擎返回的与上述待检索信息匹配的搜索结果，将上述待检索信息与该搜索结果对应存储生成反馈信息，并将反馈信息存储至本地，以使后台服务器的工作人员根据该反馈信息更新预设数据库。

通过实施这种可选的实施方式，当预设数据库中未搜索到与待检索信息相应的搜索结果时，跳转至网络搜索引擎获取更多搜索结果，并将得到的搜索结果与待检索信息对应存储生成反馈信息，以使工作人员更新数据库。这一过程能够及时更新数据库，填补缺少的数据，使得数据库的资料信息更加全面、覆盖面更广。

103、获取与目标文本流中目标内容相匹配的用于打开音视频文件的链接信息。

本发明实施例中，链接信息用于指示从录制时间轴上的目标文本流中目标内容对应的时间点开始播放音视频文件，目标文本流中目标内容对应的时间点为第一文本流中的某一第一点文本流在录制时间轴上对应的时间点或者为第二文本流中某一第二点文本流在录制时间轴上对应的时间点。

作为一种可选的实施方式，在本发明实施例中，当屏体内容为视频或者课件或者播放其它文档资料时，可以直接识别屏体内容生成第二文本流，并且在第二文本流中能够将屏体每一页的文本流内容与对应页码进行关联，然后将屏体内容原文档与第二文本流进行关联保存。后续通过第二文本流检索某一个词，给出该词出现在屏体内容原文档的位置信息(如页码)，可以通过该位置信息直接从屏体内容原文档的该位置信息对应的页码处打开原文档。举例来说，当用户需要在某一PPT中查询待检索信息时，先查询与待检索信息相匹配的目标文本流中的目标内容，可以包括：

在根据该PPT生成的对应第二文本流中查询与待检索信息相匹配的目标内容；其中，该PPT对应的第二文本流为从该PPT的第一页至最后一页识别得到的所有PPT内容，且该PPT每一页识别得到的第二文本流与该PPT的页数关联保存。进而后续查询时，通过待检索信息查询获取与该PPT对应的第二文本流中目标内容相匹配的页面链接信息，该页面链接信息能够跳转至包含待检索信息的PPT页面。

通过实施这种可选的实施方式，用户能够在PPT中搜索需要查找的信息，以此直接跳转至包含该信息的PPT页面，这种查找方式使得查找更加便捷、快速、有效，增加了获取信息的效率。

作为另一种可选的实施方式，获取与目标文本流中目标内容相匹配的用于打开音视频文件的链接信息可以包括：

在目标文本流对应的录制时间轴上查询与目标内容相匹配的至少一个时间点；

根据上述至少一个时间点生成与每一个时间点相匹配的链接信息，得到至少一个链接信息；其中，用户可以通过访问链接信息跳转至与该链接信息相匹配的时间点开始播放音视频文件。

通过实施这种可选的实施方式，当在目标文本流对应的录制时间轴上存在与目标内容相匹配至少一个时间点时，可以生成多个链接信息，以使用户选择某一链接信息访问，跳转至与该链接信息相匹配的时间点开始播放音视频文件。这一过程能够使得用户选择想要访问的链接信息进行访问，提高用户体验，满足用户的多种需求。

举例来说，在预置数据库中的某一视频中提及“牛顿定理”，获取能够打开该视频中提及“牛顿定理”时刻开始播放视频的链接信息。当用户打开该链接，即可从该视频提及“牛顿定理”的时刻播放该视频，这一过程能够实现对PPT、视频等媒体信息中所包含内容的全面检索，能够提高数据库中学习资源的利用率。

可见，通过实施图1所描述的信息检索方法，通过与目标内容相匹配的链接信息，能够根据链接信息从录制时间轴上的目标内容对应的时间点开始播放音视频文件，实现了对音视频文件所包含内容的检索，能够全面地检索学习资料，从而提高学习资源库的利用率。

实施例二

请参阅图3，图3是本发明实施例公开的另一种信息检索方法的流程示意图。如图3所示，该信息检索方法可以包括以下步骤：

301、输出语音提示。

本发明实施例中，语音提示用于提示用户语音输入语音信息。本发明实施例的执行主体可以为信息检索装置。

作为一种可选的实施方式，在输出语音提示之前，还可以执行以下步骤：

检测系统设置的语言类别；其中，语言类别可以包括粤语、普通话和英文等；

使用与该语言类别对应的语言输出语音提示。

通过实施这种可选的实施方式，能够以多种语言输出语音提示，满足不同用户的不同需求，更有针对性，受众面更广。

302、识别用户输入的语音信息，并将语音信息转化为文本内容以获得待检索信息。

作为一种可选的实施方式，识别用户输入的语音信息，并将语音信息转化为文本内容以获得待检索信息可以包括：

检测用户输入的语音信息对应的语言类别；其中，语言类别可以包括粤语、普通话和英文等；

采取与该语言类别对应的语义分析模式将上述语音信息转化为文本内容以获得待检索信息。

通过实施这种可选的实施方式，能够识别用户使用方言、普通话和英语等多种语言类别中任一种语言输入的语音信息，识别范围更广，识别语言的准确率更高。

303、查询与待检索信息相匹配的目标文本流中的目标内容。

本发明实施例中，目标内容为第一文本流中的某一第一点文本流对应的内容或者为第二文本流中某一第二点文本流对应的内容。

本发明实施例中，目标文本流存储在目标文件中，其中，目标文件包括音视频文件、第一文本流和第二文本流，第一文本流在音视频文件录制时间轴的起始时间点开始采集声音信息以及在终止时间点停止采集声音信息所得到，第二文本流在音视频文件录制时间轴的起始时间点开始采集显示屏的屏体内容以及在终止时间点停止采集屏体内容所得到，并且第一文本流和第二文本流与音视频文件的录制时间轴相关联，目标文本流为第一文本流或者第二文本流。

本发明实施例中，第一文本流由多个第一点文本流组成，且第一点文本流的数量与音视频文件的录制时间轴上时间点的数量相同，每个第一点文本流对应一个时间点，任意两个第一点文本流所对应的时间点不相同，且第一点文本流与音视频文件的录制时间轴上的每一个时间点相关联；第二文本流由多个第二点文本流组成，且第二点文本流的数量与音视频文件的录制时间轴上时间点的数量相同，每个第二点文本流对应一个时间点，任意两个第二点文本流所对应的时间点不相同，且第二点文本流与音视频文件的录制时间轴上的每一个时间点相关联。

304、获取与目标文本流中目标内容相匹配的用于打开音视频文件的链接信息。

本发明实施例中，链接信息用于指示从录制时间轴上的目标文本流中目标内容对应的时间点开始播放音视频文件，目标文本流中目标内容对应的时间点为第一文本流中的某一第一点文本流在录制时间轴上对应的时间点或者为第二文本流中某一第二点文本流在录制时间轴上对应的时间点。

305、检测是否接收到用户针对链接信息输入的打开指令，如果是，执行步骤306，如果否，结束本次流程。

306、跳转至音视频文件的录制时间轴上目标文本流中目标内容对应的时间点开始播放音视频文件。

举例来说，若数据库预先存储多个学习文件，每一学习文件的文件名格式为“日期-教授姓名-课程名称”，如某一学习文件的文件名为“2018.3.12-张三-污水净化”。其中，每一学习文件中包括音视频文件、第一文本流和第二文本流；当张三教授讲授有关污水净化课程中使用的授课电子设备为触摸一体机时，“2018.3.12-张三-污水净化”文件中包括张三教授讲授有关污水净化课程的音视频文件(既包括张三教授讲述的音视频，也包括触摸一体机显示屏播放讲座资料的音视频)、张三教授讲授课程过程中的声音信息对应的文本信息(第一文本流)以及触摸一体机显示屏所播放的张三教授讲述过程中用到的课件中的文本信息(第二文本流)，课件可以为视频文件或文档文件。信息检索装置可以输出语音提示，例如语音输出“请输入需要检索的内容”，识别用户输入的语音信息(如污水净化三级处理)，并将语音信息转化为文本内容以获得待搜索信息(文本形式的“污水净化三级处理”)，在数据库所有学习文件中查询与“污水净化三级处理”匹配的目标文本流；例如，在“2018.3.12-张三-污水净化”文件包含的张三教授讲授课程过程中的声音信息对应的文本信息(第一文本流)中出现了目标内容(“污水净化三级处理”)，其中，第一文本流中出现目标内容的时刻对应在录制时间轴上的至少一个时间点(如3分2秒)，获取与目标文本流(张三教授讲授课程过程中的声音信息对应的文本信息)中目标内容(“污水净化三级处理”)相匹配的用于打开音视频文件(张三教授讲授有关污水净化课程的音视频文件)的链接信息，用户点击该链接信息即可从3分2秒开始播放张三教授讲授有关污水净化课程的音视频文件。

可见，通过实施图3所描述的信息检索方法，通过与目标内容相匹配的链接信息，能够根据链接信息从录制时间轴上的目标内容对应的时间点开始播放音视频文件，实现了对音视频文件所包含内容的检索，能够全面地检索学习资料，从而提高学习资源库的利用率。

此外，通过实施图3所描述的信息检索方法，当接收到用户针对连接信息输入的打开指令时，能够跳转至音视频文件的录制时间轴上目标文本流中目标内容对应的时间点开始播放音视频文件，这一过程使得用户快速地进入想要搜索的目标内容对应的时间点播放视频，提高了查询学习资料的效率。

此外，通过实施图3所描述的信息检索方法，能够语音识别用户想要搜索的待搜索信息，使得用户不必手动输入，只需要语音输入即可完成搜索功能，节约了查询的时间，进一步提高效率。

实施例三

请参阅图4，图4是本发明实施例公开的一种信息检索装置的结构示意图。该信息检索装置可以包括用户终端与后台服务器。如图4所示，该信息检索装置可以包括：

第一检测单元401，用于检测用户输入的待检索信息。

查询单元402，用于查询与第一检测单元401检测到的待检索信息相匹配的目标文本流中的目标内容；目标文本流存储在目标文件中，其中，目标文件包括音视频文件、第一文本流和第二文本流，第一文本流在音视频文件录制时间轴的起始时间点开始采集声音信息以及在终止时间点停止采集声音信息所得到，第二文本流在音视频文件录制时间轴的起始时间点开始采集显示屏的屏体内容以及在终止时间点停止采集屏体内容所得到，并且第一文本流和第二文本流与音视频文件的录制时间轴相关联，目标文本流为第一文本流或者第二文本流。

本发明实施例中，第一文本流由多个第一点文本流组成，且第一点文本流的数量与音视频文件的录制时间轴上时间点的数量相同，每个第一点文本流对应一个时间点，任意两个第一点文本流所对应的时间点不相同，且第一点文本流与音视频文件的录制时间轴上的每一个时间点相关联；第二文本流由多个第二点文本流组成，且第二点文本流的数量与音视频文件的录制时间轴上时间点的数量相同，每个第二点文本流对应一个时间点，任意两个第二点文本流所对应的时间点不相同，且第二点文本流与音视频文件的录制时间轴上的每一个时间点相关联。

作为一种可选的实施方式，当查询单元402为后台服务器中的单元时，在第一检测单元401检测到用户输入的待检索信息之后，并且查询单元402在预设数据库中未查询到与待检索信息相关的搜索结果时，查询单元402还可以用于：

跳转至网络搜索引擎搜索上述待检索信息，并接收网络搜索引擎返回的与上述待检索信息匹配的搜索结果，将上述待检索信息与该搜索结果对应存储生成反馈信息，并将反馈信息存储至本地，以使后台服务器的工作人员根据该反馈信息更新预设数据库。

通过实施这种可选的实施方式，当预设数据库中未搜索到与待检索信息相应的搜索结果时，跳转至网络搜索引擎获取更多搜索结果，并将得到的搜索结果与待检索信息对应存储生成反馈信息，以使工作人员更新数据库。这一过程能够及时更新数据库，填补缺少的数据，使得数据库的资料信息更加全面、覆盖面更广。

获取单元403，用于获取与查询单元402查询到的目标文本流中目标内容相匹配的用于打开音视频文件的链接信息，链接信息用于指示从录制时间轴上的目标文本流中目标内容对应的时间点开始播放音视频文件。

作为一种可选的实施方式，在本发明实施例中，当屏体内容为视频或者课件或者播放其它文档资料时，可以直接识别屏体内容生成第二文本流，并且在第二文本流中能够将屏体每一页的文本流内容与对应页码进行关联，然后将屏体内容原文档与第二文本流进行关联保存。后续通过第二文本流检索某一个词，给出该词出现在屏体内容原文档的位置信息(如页码)，可以通过该位置信息直接从屏体内容原文档的该位置信息对应的页码处打开原文档。举例来说，当用户需要在某一PPT中查询待检索信息时，查询单元402先查询与待检索信息相匹配的目标文本流中的目标内容可以包括：

查询单元402在根据该PPT生成的对应第二文本流中查询与待检索信息相匹配的目标内容；其中，该PPT对应的第二文本流为从该PPT的第一页至最后一页识别得到的所有PPT内容，且该PPT每一页识别得到的第二文本流与该PPT的页数关联保存。进而后续查询时，通过待检索信息查询获取与该PPT对应的第二文本流中目标内容相匹配的页面链接信息，该页面链接信息能够跳转至包含待检索信息的PPT页面。

通过实施这种可选的实施方式，用户能够在PPT中搜索需要查找的信息，以此直接跳转至包含该信息的PPT页面，这种查找方式使得查找更加便捷、快速、有效，增加了获取信息的效率。

作为另一种可选的实施方式，获取单元403获取与目标文本流中目标内容相匹配的用于打开音视频文件的链接信息可以包括：

在目标文本流对应的录制时间轴上查询与目标内容相匹配的至少一个时间点；

根据上述至少一个时间点生成与每一个时间点相匹配的链接信息，得到至少一个链接信息；其中，用户可以通过访问链接信息跳转至与该链接信息相匹配的时间点开始播放音视频文件。

通过实施这种可选的实施方式，当在目标文本流对应的录制时间轴上存在与目标内容相匹配至少一个时间点时，可以生成多个链接信息，以使用户选择某一链接信息访问，跳转至与该链接信息相匹配的时间点开始播放音视频文件。这一过程能够使得用户选择想要访问的链接信息进行访问，提高用户体验，满足用户的多种需求。

可见，通过实施图4所描述的信息检索装置，通过与目标内容相匹配的链接信息，能够根据链接信息从录制时间轴上的目标内容对应的时间点开始播放音视频文件，实现了对音视频文件所包含内容的检索，能够全面地检索学习资料，从而提高学习资源库的利用率。

实施例五

请参阅图5，图5是本发明实施例公开的另一种信息检索装置的结构示意图。图5所示的信息检索装置是由图4所示的信息检索装置优化得到的，如图5所示，在该信息检索装置中：

查询单元402包括：

查询子单元4021，用于查询与待检索信息相匹配的目标文本流中的目标内容，目标内容为第一文本流中的某一第一点文本流对应的内容或者为第二文本流中某一第二点文本流对应的内容。

获取单元403包括：

获取子单元4031，用于获取与目标文本流中目标内容相匹配的用于打开音视频文件的链接信息，链接信息用于指示从录制时间轴上的目标文本流中目标内容对应的时间点开始播放音视频文件，目标文本流中目标内容对应的时间点为第一文本流中的某一第一点文本流在录制时间轴上对应的时间点或者为第二文本流中某一第二点文本流在录制时间轴上对应的时间点。

可选的，图5所示的信息检索装置还可以包括：

第二检测单元404，用于在获取子单元4031获取与目标文本流中目标内容相匹配的用于打开音视频文件的链接信息之后，检测是否接收到用户针对链接信息输入的打开指令。

具体的，在获取子单元4031获取与目标文本流中目标内容相匹配的用于打开音视频文件的链接信息之后，获取子单元4031向第二检测单元404发送触发指令，以触发第二检测单元404检测是否接收到用户针对链接信息输入的打开指令。

播放单元405，用于当第二检测单元404检测到用户输入的打开指令时，跳转至音视频文件的录制时间轴上目标文本流中目标内容对应的时间点开始播放音视频文件。

进一步可选的，在图5所示的信息检索装置中：

第一检测单元401包括：

输出子单元4011，用于输出语音提示，语音提示用于提示用户语音输入语音信息。

作为一种可选的实施方式，在输出子单元4011输出语音提示之前，输出子单元4011还可以用于：

检测系统设置的语言类别；其中，语言类别可以包括粤语、普通话和英文等；

使用与该语言类别对应的语言输出语音提示。

通过实施这种可选的实施方式，能够以多种语言输出语音提示，满足不同用户的不同需求，更有针对性，受众面更广。

识别子单元4012，用于识别用户输入的语音信息，并将语音信息转化为文本内容以获得待检索信息。

作为一种可选的实施方式，识别子单元4012识别用户输入的语音信息，并将语音信息转化为文本内容以获得待检索信息可以包括：

检测用户输入的语音信息对应的语言类别；其中，语言类别可以包括粤语、普通话和英文等；

采取与该语言类别对应的语义分析模式将上述语音信息转化为文本内容以获得待检索信息。

通过实施这种可选的实施方式，能够识别用户使用方言、普通话和英语等多种语言类别中任一种语言输入的语音信息，识别范围更广，识别语言的准确率更高。

可见，通过实施图5所描述的信息检索装置，通过与目标内容相匹配的链接信息，能够根据链接信息从录制时间轴上的目标内容对应的时间点开始播放音视频文件，实现了对音视频文件所包含内容的检索，能够全面地检索学习资料，从而提高学习资源库的利用率。

此外，通过实施图5所描述的信息检索装置，使得用户快速地进入想要搜索的目标内容对应的时间点播放视频，提高了查询学习资料的效率。

此外，通过实施图5所描述的信息检索装置，能够语音识别用户想要搜索的待搜索信息，使得用户不必手动输入，只需要语音输入即可完成搜索功能，节约了查询的时间，进一步提高效率。

实施例五

请参阅图6，图6是本发明实施例公开的一种电子设备的结构示意图，该电子设备还可以包括实施例三至实施例四中任一实施例所描述的信息检索装置。如图6所示，该电子设备可以包括：

存储有可执行程序代码的存储器601；

与存储器601耦合的处理器602；

其中，处理器602调用存储器601中存储的可执行程序代码，执行图1和图3中任意一种信息检索方法。

本发明实施例公开一种计算机可读存储介质，其存储计算机程序，其中，该计算机程序使得计算机执行图1和图3中任意一种信息检索方法。

本发明实施例还公开一种计算机程序产品，其中，当计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

本发明实施例还公开一种应用发布平台，其中，应用发布平台用于发布计算机程序产品，其中，当计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

在本发明的各种实施例中，应理解，上述各过程的序号的大小并不意味着执行顺序的必然先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

在本发明所提供的实施例中，应理解，“与A相应的B”表示B与A相关联，根据A可以确定B。但还应理解，根据A确定B并不意味着仅仅根据A确定B，还可以根据A和/或其他信息确定B。

另外，在本发明各实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可获取的存储器中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分，可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等，具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上对本发明实施例公开的一种信息检索方法及装置进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种信息检索方法，其特征在于，包括：

检测用户输入的待检索信息；

查询与所述待检索信息相匹配的目标文本流中的目标内容；所述目标文本流存储在目标文件中，其中，所述目标文件包括音视频文件、第一文本流和第二文本流，所述第一文本流在所述音视频文件录制时间轴的起始时间点开始采集声音信息以及在终止时间点停止采集声音信息所得到，所述第二文本流在所述音视频文件录制时间轴的起始时间点开始采集显示屏的屏体内容以及在终止时间点停止采集屏体内容所得到，并且所述第一文本流和所述第二文本流与所述音视频文件的录制时间轴相关联，所述目标文本流为所述第一文本流或者所述第二文本流；

获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件。

2.根据权利要求1所述的方法，其特征在于，所述第一文本流由多个第一点文本流组成，且所述第一点文本流的数量与所述音视频文件的录制时间轴上时间点的数量相同，每个所述第一点文本流对应一个时间点，任意两个所述第一点文本流所对应的时间点不相同，且所述第一点文本流与所述音视频文件的录制时间轴上的每一个时间点相关联；所述第二文本流由多个第二点文本流组成，且所述第二点文本流的数量与所述音视频文件的录制时间轴上时间点的数量相同，每个所述第二点文本流对应一个时间点，任意两个所述第二点文本流所对应的时间点不相同，且所述第二点文本流与所述音视频文件的录制时间轴上的每一个时间点相关联。

3.根据权利要求2所述的方法，其特征在于，所述查询与所述待检索信息相匹配的目标文本流中的目标内容，包括：

查询与所述待检索信息相匹配的目标文本流中的目标内容，所述目标内容为所述第一文本流中的某一第一点文本流对应的内容或者为所述第二文本流中某一第二点文本流对应的内容；

所述获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件，包括：

获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件，所述目标文本流中目标内容对应的时间点为所述第一文本流中的某一第一点文本流在所述录制时间轴上对应的时间点或者为所述第二文本流中某一第二点文本流在所述录制时间轴上对应的时间点。

4.根据权利要求3所述的方法，其特征在于，在所述获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息之后，所述方法还包括：

检测是否接收到用户针对所述链接信息输入的打开指令；

当检测到用户输入的所述打开指令时，跳转至所述音视频文件的录制时间轴上所述目标文本流中目标内容对应的时间点开始播放所述音视频文件。

5.根据权利要求1～4任一项所述的方法，其特征在于，所述检测用户输入的待检索信息，包括：

输出语音提示，所述语音提示用于提示用户语音输入语音信息；

识别用户输入的所述语音信息，并将所述语音信息转化为文本内容以获得待检索信息。

6.一种信息检索装置，其特征在于，包括：

第一检测单元，用于检测用户输入的待检索信息；

查询单元，用于查询与所述第一检测单元检测到的所述待检索信息相匹配的目标文本流中的目标内容；所述目标文本流存储在目标文件中，其中，所述目标文件包括音视频文件、第一文本流和第二文本流，所述第一文本流在所述音视频文件录制时间轴的起始时间点开始采集声音信息以及在终止时间点停止采集声音信息所得到，所述第二文本流在所述音视频文件录制时间轴的起始时间点开始采集显示屏的屏体内容以及在终止时间点停止采集屏体内容所得到，并且所述第一文本流和所述第二文本流与所述音视频文件的录制时间轴相关联，所述目标文本流为所述第一文本流或者所述第二文本流；

获取单元，用于获取与所述查询单元查询到的所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件。

7.根据权利要求6所述的装置，其特征在于，所述第一文本流由多个第一点文本流组成，且所述第一点文本流的数量与所述音视频文件的录制时间轴上时间点的数量相同，每个所述第一点文本流对应一个时间点，任意两个所述第一点文本流所对应的时间点不相同，且所述第一点文本流与所述音视频文件的录制时间轴上的每一个时间点相关联；所述第二文本流由多个第二点文本流组成，且所述第二点文本流的数量与所述音视频文件的录制时间轴上时间点的数量相同，每个所述第二点文本流对应一个时间点，任意两个所述第二点文本流所对应的时间点不相同，且所述第二点文本流与所述音视频文件的录制时间轴上的每一个时间点相关联。

8.根据权利要求7所述的装置，其特征在于，所述查询单元包括：

查询子单元，用于查询与所述待检索信息相匹配的目标文本流中的目标内容，所述目标内容为所述第一文本流中的某一第一点文本流对应的内容或者为所述第二文本流中某一第二点文本流对应的内容；

所述获取单元包括：

获取子单元，用于获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息，所述链接信息用于指示从所述录制时间轴上的所述目标文本流中目标内容对应的时间点开始播放所述音视频文件，所述目标文本流中目标内容对应的时间点为所述第一文本流中的某一第一点文本流在所述录制时间轴上对应的时间点或者为所述第二文本流中某一第二点文本流在所述录制时间轴上对应的时间点。

9.根据权利要求8所述的装置，其特征在于，所述装置还包括：

第二检测单元，用于在所述获取子单元获取与所述目标文本流中目标内容相匹配的用于打开所述音视频文件的链接信息之后，检测是否接收到用户针对所述链接信息输入的打开指令；

播放单元，用于当所述第二检测单元检测到用户输入的所述打开指令时，跳转至所述音视频文件的录制时间轴上所述目标文本流中目标内容对应的时间点开始播放所述音视频文件。

10.根据权利要求6～9任一项所述的装置，其特征在于，所述第一检测单元包括：

输出子单元，用于输出语音提示，所述语音提示用于提示用户语音输入语音信息；

识别子单元，用于识别用户输入的所述语音信息，并将所述语音信息转化为文本内容以获得待检索信息。