CN110941728B - 一种电子文件的处理方法及装置 - Google Patents

Abstract

本申请适用于多媒体信息技术领域，提供了一种电子文件的处理的方法，包括：根据预设的有效图片识别算法以及获取得到的电子文件，生成多个关于所述电子文件的有效图片；分别提取各个所述有效图片对应的特征点信息；根据所有所述有效图片以及与所述有效图片对应的所述特征点信息，生成所述电子文件的数据包；将所述数据包导入预设的多媒体生成程序中，用以生成所述电子文件对应的多媒体数据。本申请生成的数据包可以导入开发软件实现对电子文件进行再开发，可以解决电子文件再开发过程中需要手动在电子文件上挑选素材的问题，让电子文件再开发更加便捷，提高了电子文件的利用效率。

Description

一种电子文件的处理方法及装置

技术领域

本申请属于多媒体信息技术领域，尤其涉及一种电子文件的处理方法及装置。

背景技术

随着科技的进步，在教育领域，有使用电子教材代替传统纸质教材的趋势。

电子教材相较于传统纸质教材，有以下优点：获取和携带方便，很小的电子设备就能有大量的阅读资料；传输方便，可以通过网络传输；多元化呈现教材，可以通过直观的视、音、图、文展现教材；成本低，能降低传统纸质教材的用纸，环保；节省保存书本所需之空间；易于更新，易于纠正错误并增加信息；易于检索，在电子教材中你可以快速查找到任何信息。

尽管电子教材的使用日渐普遍，但是结合电子教材的教育模式还不太成熟，现有技术中为了电子将教材中的环境真实地展现在学生面前，让学生感同身受，提高电子教材与学生互动性，对电子教材进行了再开发，进一步呈现电子教材的内容。但是电子教材再开发过程中，一般需要人们在电子教材中手动挑选素材，用以配合开发软件进行开发。这样的方法操作复杂，不便使用，还存在在处理海量电子教材时，生产成本高，资源利用率低的问题。

发明内容

本申请实施例提供了一种电子文件的处理方法及装置，可以解决电子教材再开发过程中需要手动在电子教材上挑选素材的问题，让电子教材再开发更加便捷，对电子教材的利用率更高。

第一方面，本申请实施例提供了一种电子文件的处理方法，包括：

根据预设的有效图片识别算法以及获取得到的电子文件，生成多个关于所述电子文件的有效图片；

分别提取各个所述有效图片对应的特征点信息；

根据所有所述有效图片以及与所述有效图片对应的所述特征点信息，生成所述电子文件的数据包；

将所述数据包导入预设的多媒体生成程序中，用以生成所述电子文件对应的多媒体数据。

在第一方面的一种可能的实现方式中，所述电子文件的处理方法，还包括将所述数据包导入多媒体生成程序，指示所述多媒体生成程序生成多媒体数据。

示例性的，电子文件可以为电子教材，电子教材可以为便携式文档格式(PortableDocument Format，PDF)文件；多媒体生成程序可以为UNITY。

应理解，在根据预设的有效图片识别算法以及获取得到的电子文件，生成多个关于所述电子文件的有效图片后，将所述所有有效图片进行分类存储。

第二方面，本申请实施例提供了一种电子文件的处理装置，包括：

有效图片生成模块，根据预设的有效图片识别算法以及获取得到的电子文件，生成多个关于所述电子文件的有效图片；

特征点提取模块，用于分别提取各个所述有效图片对应的特征点信息；

数据包生成模块，用于根据所有所述有效图片以及与所述有效图片对应的所述特征点信息生成所述电子文件的数据包；

输出模块，用于将所述数据包导入预设的多媒体生成程序。

第三方面，本申请实施例提供了一种终端设备，包括：存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面中任一项所述的方法。

第四方面，本申请实施例提供了一种计算机可读存储介质，包括：所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面中任一项所述的方法。

第五方面，本申请实施例提供了一种计算机程序产品，当计算机程序产品在终端设备上运行时，使得终端设备执行上述第一方面中任一项所述的处理方法。

可以理解的是，上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述，在此不再赘述。

本申请实施例与现有技术相比存在的有益效果是：

通过有效图片识别算法来从电子教材中获取有效图片，提取有效图片的特征点信息，根据所有有效图片及其对应的特征点信息生成数据包，数据包可以用于电子教材的再开发，进一步呈现电子教材的内容，避免了需要人们通过手动在电子教材上挑选合适的素材，然后手动将素材截取到开发软件上，再进行开发这一繁琐的过程来实现电子教材的再开发，降低了生产成本，提高了资源利用率。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本申请第一实施例提供的一种电子文件的处理方法的流程示意图；

图2是本申请第一实施例提供的一种电子文件的处理方法S101的流程示意图；

图3是本申请一实施例提供的一种电子文件的处理方法的示例图；

图4是本申请第一实施例提供的一种电子文件的处理方法S102的流程示意图；

图5是本申请第二实施例提供的一种电子文件的处理方法的流程示意图；

图6是本申请一实施例提供的一种电子文件的处理方法的流程示意图；

图7是本申请另一实施例提供的一种电子文件的处理方法的流程示意图；

图8是本申请实施例提供的一种电子文件的处理装置的结构示意图；

图9是本申请实施例提供的终端设备的结构示意图。

图10是本申请一实施例提供的一种电子文件的处理方法所适用的具体应用的流程示意图；

图11是本申请一实施例提供的应用场景示意图；

具体实施方式

以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本申请实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本申请的描述。

应当理解，当在本申请说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

如在本申请说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。

另外，在本申请说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。

本申请实施例通过获取电子文件，根据预设有效图片识别算法，基于该电子文件生成有效图片，然后分别提取所有有效图片对应的特征点信息，根据上述所有有效图片及其对应的特征点信息，生成该电子文件的数据包，该数据包可用于生成多媒体数据。示例性的，电子文件为电子教材，该数据包即可用于对该电子教材进行再开发时的素材，通过本实施例得到数据包，可以实现自动获取对电子教材进行再开发所需的素材，使得对电子教材的再开发过程更加便捷。

在本申请实施例中，流程的执行主体为终端设备。该终端设备包括但不限于：智能手机、平板电脑、笔记本电脑、计算机等终端设备。

图1示出了本申请第一实施例提供的一种电子文件的处理方法的具体实现流程，详述如下：

在S101中，根据预设的有效图片识别算法以及获取得到的电子文件，生成多个关于所述电子文件的有效图片。

在本实施例中，获取电子文件，根据预设的有效图片识别算法，生成多个关于该电子文件的有效图片。其中，作为示例而非限定，电子文件可以是电子教材，电子教材可以是PDF文件。通过输入PDF文件，以及预设有的有效图片识别算法，输出多个关于所述电子文件的有效图片，避免了通过人工的方式在电子文件上以人工的观察判断进行挑选素材的繁琐手段，实现了自动截取有效图片，以便于后续生成数据包。

在S102中，分别提取各个所述有效图片对应的特征点信息。

在本实施例中，提取有效图片对应的特征点信息，作为示例而非限定，该特征点信息包括特征点或者基于各个特征点构成的特征向量，通过对有效图片遍历，提取有效图片中的特征点，例如有效图片中存在的轮廓曲线以及轮廓曲线所包含的区域。特征点信息可以用于图像比对，也可以用于图像识别，以便于后续生成数据包。

在S103中，根据所有所述有效图片以及与所述有效图片对应的所述特征点信息，生成所述电子文件的数据包，将所述数据包导入预设的多媒体生成程序。

在本实施例中，将所有有效图片及其对应的特征点信息，进行打包，生成该电子文件的数据包，该数据包可用于生成多媒体数据。作为示例而非限定，可以把生成的数据包导入UNTIY应用程序上进行开发，生成该电子文件对应的多媒体数据，该多媒体数据包括三维模型和视频等。通过生成数据包，导入该数据包到多媒体生成程序上，相当于对电子教材的再开发过程，使得该过程更加便捷，减少了人工手动导入数据包的繁琐操作，实现自动导入数据包到多媒体生成程序上。

图2示出了本申请第一实施例提供的一种电子文件的处理方法S101的具体实现流程图，参见图2，相对于图1所述实施例，本实施例提供的一种电子文件处理方式S101包括：S1011～S1013，具体详述如下：

进一步地，所述根据预设的有效图片识别算法以及获取得到的电子文件，生成多个关于所述电子文件的有效图片包括：

在S1011中，获取与所述电子文件的文件参量匹配的所述有效图片识别算法。

在本实施例中，作为示例而非限定，获取电子文件的文件参量，可以是获取电子教材的文件参量，文件参量包括电子教材的名称、电子教材的编号或著作信息，例如电子教材的名称可以是普通高中课程标准实验教科书化学必修1人教版。根据该电子教材的版本，设置有效识别图像算法。

在本实施例中，每一类电子文件适用的有效图片识别算法都有所差别，故需要根据电子文件的文件参量，设置与之匹配的有效图片识别算法，这样能避免该有效识别算法对该电子文件产生不到该有的效果。

在S1012中，通过所述有效识别算法分别对所述电子文件中的各个页面图像进行区域划分，得到关于所述页面图像的无效图像区域以及有效图像区域。

在本实施例中，通过该有效识别图像算法，将PDF文件中的各个页面图像进行区域划分，得到关于所述页面图像的无效图像区域以及有效图像区域。

可选地，在本实施例中，该有效识别图像算法可以为一与电子教材的名称相匹配的区域划分脚本。根据该电子教材的名称，可以确定该电子教材的各个页面的排版信息，该排版信息可以定义有每个页面内不同内容的显示信息，例如标题的所在的位置区间范围、标题字体大小等。终端设备可以根据该区域划分脚本，识别电子教材的页面图像中的各个页面内容，以及根据该页面内容在页面图像中的显示信息，确定该页面内容所对应的内容属性，继而根据内容属性判定该页面内容所在的显示区域属于有效图像区域或是无效图像区域，实现对页面图像内的区域划分。

具体地，上述无效图像区域可以包括：封面、著作信息、目录、引言、后记以及每个页面的页码部分等图像区域，有效图像区域可以包括各章、节、小节的标题以及每个不同标题下的图文区域，还有习题区域等图像区域。参见图3所示，图3示出了本申请一实施例中的普通高中课程标准实验教科书化学必修1人教版的电子教材(PDF文件)中的一个页面示意图，参见图3所示，终端设备可以通过有效图像识别算法将该页面图像划分为301、302、303、304、305共5个区域，根据各个区域的显示信息，识别各个区域的区域属性，例如301为第一章第一节的标题区域，302为该节的描述区域，303为第一章第一节第一小节的标题区域，304为该小节的图文区域，305为该页面的页码区域，而标题区域、描述区域以及图文区域均为有效区域，即上述301至304均属于有效图像区域，305属于无效图像区域。

即，通过上述有效识别图像算法，能将上述PDF文件中的每个页面图像进行区域划分。具体步骤如下：

1)遍历PDF文件中所有页面图像，确定每个页面图像所属章，并将该页面图像内的有效图像区域识别为该章对应的有效图像区域。

具体地，第一章对应的有效图像区域包括第一章对应的标题区域、第一章对应的描述区域、第一章每一节的对应有效图像区域、归纳与整理区域以及复习题区域。

2)遍历每一章内的所有有效图像区域，将该章划分为多个节，并确定该章内的各个有效图像区域所属节。

具体地，第一章第一节对应的有效图像区域包括第一章第一节对应的标题区域、第一章第一节对应的描述区域、第一章第一节每一小节的有效图像区域以及第一章第一节对应的习题区域。

3)遍历每一节内的所有有效图像区域，将该节划分为多个小节，并确定该节内的各个有效图像区域所属小节；

具体地，第一章第一节第一小节对应的有效图像区域包括第一章第一节第一小节对应的标题区域以及第一章第一节第一小节对应的图文区域。

在S1013中，根据各个所述页面图像的所有有效图像区域，生成所述有效图片。

在本实施例中，作为示例而非限定，截取该电子文件的有效图像区域，作为有效图片，然后将各个有效图片以其在电子文件中的位置信息进行级联存储。具体地，示例性地，创建关于第一章第一节第一小节的存储路径，并将第一章第一节里的第一小节的标题区域对应的有效图片以“1.1.1-0”为文件名，以及将第一章第一节里的第一小节的第一个页面的图文区域对应的有效图片以“1.1.1-1”为文件名，存储在该存储路径上，实现级联存储。应理解，关于该电子教材的每一章的每一节的每一小节的标题区域以及图文区域对应的有效图片都以类似的形式进行级联存储。例如，参见图3，将301以“1.1-0”为文件名存储在关于第一章第一节的存储路径上，将302以“1.1-1”存储在关于第一章第一节的存储路径上，将303以“1.1.1-0”为文件名存储在关于第一章第一节第一小节的存储路径，将304以“1.1.1-1”为文件名存储在关于第一章第一节第一小节的存储路径。通过有效图片识别算法能更加精确地将电子文件中的图像进行区域划分，获取所需要部分区域图像，更加精准地生成有效图片以便于后续生成数据包。

图4示出了本申请第一实施例提供的一种电子文件的处理方法S102的具体实现流程图。参见图4，相对于图1所示第一实施例，本实施例提供的一种电子文件的处理方法S102包括：S1021以及S1022，具体详述如下：

进一步地，所述分别提取各个所述有效图片对应的特征点信息，包括：

在S1021中，对所述有效图片进行灰度化处理，生成所述有效图片的灰度图。

在本实施例中，对有效图片进行灰度化处理，作为示例而非限定，具体地，包括以下步骤：获取有效图片的所有像素点矩阵对应的三个颜色向量矩阵，分别是红(Red，R)矩阵，绿(Green，G)矩阵，蓝(Blue，B)矩阵，通过公式

R'＝R*0.3+G*0.59+B*0.11；

G'＝R*0.3+G*0.59+B*0.11；

B'＝R*0.3+G*0.59+B*0.11；

得到灰度化后的灰度图的所有像素点矩阵对应的三个颜色向量矩阵，分别是R’矩阵，G’矩阵，B’矩阵，从而得到灰度图。

在本实施例中，通过上述公式得到的灰度图，即相较于其他公式得到的灰度图效果更好，因为人眼对绿色的敏感最高，对蓝色敏感最低，因此，按上述公式对RGB三分量进行加权平均能得到较合理的灰度图。

在S1022中，根据所述灰度图以及预设的特征点提取算法，提取所述特征点信息。

在本实施例中，提取有效图片的特征点信息，即在有效图片上查找各个特征点，并计算特征点的方向，这需要识别有效图片中的轮廓曲线。为了提高轮廓曲线的识别准确率，在执行S102之前，可以对有效图像进行灰度化处理，通过灰度化加强有效图片的轮廓曲线点与背景像素点之间的差异度，同时规避了颜色对边缘的影响，因为颜色易受光照影响，难以提供关键信息。即灰度化可以加快提取有效图片的特征点信息的速度。

图5示出了本申请第二实施例提供的一种电子文件的处理方法的流程示意图，参见图5所示，与图1所示第一实施例相比，本申请实施例提供的一种电子文件的处理方法在S103之后，还包括S501以及S502，具体详述如下：

在S501中，获取所述多媒体生成程序输出的所述电子文件对应的多媒体数据；建立所述数据包与所述数据包对应的所述多媒体数据之间的关联关系。

在本实施例中，作为示例而非限定，可以把生成的数据包导入UNTIY应用程序上进行开发，通过UNTIY开发得到该电子文件对应的多媒体数据，该多媒体数据包括三维模型、视频、图像、音频和/或文字等。

在本实施例中，获取到的多媒体数据可以用于增强该电子教材的现实展现质量，通过多媒体数据可以多维度、多角度、更立体地展现该电子教材，增加互动性，激发学生的兴趣，提高教学效果。建立数据包与该数据包对应的多媒体数据之间的关联关系，以便后续查询目标数据包对应的多媒体数据。

在S502中，获取显示请求；所述显示请求包含所需显示的目标文件的标识信息；基于所述标识信息从所有已存储的电子文件的数据包中查询与所述标识信息匹配的目标数据包；基于所述目标数据包响应所述显示请求。

在本实施例中，具体地，作为示例而非限定，上述显示请求可以是通过触发作为执行主体的终端上预设的操作获取的，也可以是其他终端发送至该终端上的，上述标识信息包括条形码或二维码或图片，上述标识信息可以是从该终端设备上获取的，也可以是从其他终端设备的摄像设备上经过对电子教材或纸质教材扫描或拍摄然后上传至该终端设备上的。若标识信息为条形码或二维码，则可以基于该标识信息，获取到显示请求所要求显示的上述电子文件的信息，从而查询到目标数据包；若标识信息为图片，可选的为电子文件内任一有效图像区域，则获取该标识信息的特征点信息，与已存储的数据包中有效图片的特征点信息进行比对，识别出该有效区域对应的电子文件的标识信息，并基于该标识信息查询与之对应的目标数据包。应理解，标识信息还可以为该终端或其他终端利用摄像设备对电子教材或纸质教材进行拍摄或扫描得到的图片。

在本实施例中，通过标识信息，可以对已存储的电子文件的数据包进行定位，从而实现对特定的电子文件的显示，增加了显示的准确性。

进一步地，作为本发明的另一实施例，S502还可以包括S5021和/或S5022：

在S5021中，将所述目标数据包中的所述有效图片进行显示。

在本实施例中，对目标数据包中的有效图片进行显示，可以通过上述显示的结果，来呈现电子文件的内容，示例性的，呈现电子教材的内容，进一步激发学生的兴趣，让学生影响深刻。

在S5022中，将所述目标数据包关联存储的所述多媒体数据进行显示。

在本实施例中，对目标数据包中关联存储的多媒体数据进行显示，则可以通过视、音、图、文、三维模型等多种形式对电子教材的内容进行呈现，可选的，在多媒体数据中增加对该电子教材的讲解内容，让学生结合该讲解内容学习，提高学生学习积极性，提高教学效果，提升教学质量。

图6示出了本申请一实施例提供的一种电子文件的处理方法的流程示意图，详述如下：

在S601中，获取电子文件以及所述电子文件参量。

在本实施例中，作为示例而非限定，电子文件可以是电子教材，电子教材可以是PDF文件；电子文件参量可以是电子教材的名称、电子教材的编号或著作信息。

在S602中，根据预设规则确定所述电子文件的待添加区域。

在本实施例中，作为示例而非限定，通过预设规则在电子文件上划分一个待添加区域。每个电子文档可以在规定的页面编号上，设置有一个待添加区域，用于显示与该电子文件一一对应的标识信息。在后续扫描或读取该电子文件的过程中，可以通过识别该待添加区域内的内容，对标识信息进行定向解析，从而快速获取得到该电子文件的标识信息，实现确定该电子文件的文件参数的目的，减少了对电子文件的数据解析量，提高了识别效率。

在S603中，获取所述电子文件参量对应的标识信息，将所述标识信息添加至所述待添加区域。

在本实施例中，作为示例而非限定，根据上述电子教材的名称，生成与该电子教材匹配的标识信息，该标识信息包括条形码或二维码或图片，将该标识信息添加至所述待添加区域，从而输出带标识信息的电子教材，该带标识信息的电子教材可作为本申请其他实施例提供的一种电子文件的处理方法的应用对象，通过扫描该带标识信息的电子教材，可以更加便捷快速地对该电子教材进行定位，更准确地对该电子教材以多媒体数据的方式进行呈现。

应理解，本实施例示出的添加标识信息到电子教材的方法，也可用于添加标识信息到纸质教材。

图7示出了本申请另一实施例提供的一种电子文件的处理方法的流程示意图，详述如下：

在S701中，根据预设的有效图片识别算法以及获取得到的电子文件，生成多个关于所述电子文件的有效图片，上传所述有效图片至服务器进行存储。

在本实施例中，获取电子文件，根据预设的有效图片识别算法，生成多个关于该电子文件的有效图片。其中，作为示例而非限定，电子文件可以是电子教材，电子教材可以是PDF文件。通过输入PDF文件，以及预设有的有效图片识别算法，输出多个关于所述电子文件的有效图片，避免了通过人工的方式在电子文件上以人工的观察判断进行挑选素材的繁琐手段，实现了自动截取有效图片，以便于后续生成数据包，上传上述有效图片至服务器进行存储，以便于后续查询目标有效图片。

进一步地，所述根据预设的有效图片识别算法以及获取得到的电子文件，生成多个关于所述电子文件的有效图片，包括：

在S7011中，获取与所述电子文件的文件参量，匹配的所述有效图片识别算法；通过所述有效识别算法分别对所述电子文件中的各个页面图像进行区域划分，得到关于所述页面图像的无效图像区域以及有效图像区域；根据各个所述页面图像的所述有效图像区域，生成所述有效图片。

具体实现过程与本申请第一实施例步骤S1011相同，具体阐述可参见上述步骤S1011的相关描述，在此不再赘述。

在S702中，分别提取各个所述有效图片对应的特征点信息。

具体实现过程与本申请第一实施例步骤S102相同，具体阐述可参见上述步骤S102的相关描述，在此不再赘述。

在S703中，根据所有所述有效图片以及与所述有效图片对应的所述特征点信息，生成所述电子文件的数据包，上传所述数据包至服务器，将所述数据包导入预设的多媒体生成程序；所述数据包包括所述电子文件的名称、所述有效图片、所述有效图片在所述电子文件中的位置信息以及所述有效图片对应的所述特征点信息。

在本实施例中，将所有有效图片及其对应的特征点信息，进行打包，生成该电子文件的数据包，上传上述数据包至服务器。该数据包包括电子文件的名称、有效图片、有效图片在电子文件中的位置信息以及有效图片对应的特征点信息。作为示例而非限定，可以把生成的数据包导入UNTIY应用程序上进行开发，生成上述各个有效图片对应的多媒体数据，该多媒体数据包括三维模型和视频等。

通过生成数据包，导入该数据包到多媒体生成程序上，相当于对电子教材的再开发过程，使得该过程更加便捷，减少了人工手动导入数据包的繁琐操作，实现自动导入数据包到多媒体生成程序上。

在S704中，获取所述多媒体生成程序输出的所述有效图片对应的多媒体数据；上传所述多媒体数据至服务器，指示服务器对所述有效图片与所述有效图片对应的所述多媒体数据进行关联存储。

在本实施例中，作为示例而非限定，可以把生成的数据包导入UNTIY应用程序上进行开发，通过UNTIY开发得到该电子文件对应的多媒体数据，该多媒体数据包括三维模型、视频、图像、音频和/或文字等。

在本实施例中，获取到的多媒体数据可以用于增强该电子教材的现实展现质量，通过多媒体数据可以多维度、多角度、更立体地展现该电子教材，增加互动性，激发学生的兴趣，提高教学效果。上传所述多媒体数据至服务器，指示服务器对所述有效图片与所述有效图片对应的所述多媒体数据进行关联存储，以便在后续查询目标有效图片对应的多媒体数据。

在S705中，获取显示请求，向服务器上传所述显示请求；所述显示请求包含所需显示的有效图片的标识信息；指示服务器基于所述标识信息从所有已存储的电子文件的数据包中查询与所述标识信息匹配的目标数据包；指示服务器基于所述目标数据包查询与所述标识信息匹配的目标有效图片；基于所述目标有效图片响应所述显示请求。

在本实施例中，获取显示请求，向服务器上传该显示请求，上述显示请求包含所需显示的目标文件的标识信息，指示服务器基于该标识信息在所有已存储电子文件的数据包中查询该标识信息匹配的目标数据包，指示服务器基于该目标数据包查询与上述标识信息匹配的目标有效图片；基于该目标有效图片响应所述显示请求。

具体地，作为示例而非限定，上述显示请求可以是通过触发作为执行主体的终端上预设的操作获取的，也可以是其他终端发送至该终端上的，上述标识信息包括条形码或二维码或图片，上述标识信息可以是从该终端设备上获取的，也可以是从其他终端设备的摄像设备上经过对电子教材或纸质教材扫描或拍摄然后上传至该终端设备上的。若标识信息为条形码或二维码，则可以基于该标识信息，获取到显示请求所要求显示的上述电子文件的信息，从而查询到目标数据包，进一步查询到目标有效图片；若标识信息为图片，可选的为电子文件内任一有效图像区域，则获取该标识信息的特征点信息，与已存储的数据包中有效图片的特征点信息进行比对，识别出该有效图片对应的标识信息，并基于该标识信息查询与之对应的目标数据包，并进一步基于该标识信息查询与之对应的目标有效图片。。应理解，标识信息还可以为该终端或其他终端利用摄像设备对电子教材或纸质教材进行拍摄或扫描得到的图片。

在本实施例中，由于多媒体数据与上述有效图片关联存储，可以显示特定的有效图片对应的多媒体数据，相较于步骤S202，更进一步地增加了显示的准确性；由于存储的各类数据都上传至服务器，减少作为执行主体的终端设备的存储负担，也可以实现用户终端的远程操控，作为示例而非限定，详情参见图6。

进一步地，所述基于所述目标有效图片响应所述显示请求，包括：

在S7051中，获取所述目标有效图片及所述有效图片对应的多媒体数据；将所述目标有效图片进行显示；和/或将所述有效图片关联存储的所述多媒体数据进行显示。

在本实施例中，获取目标有效图片及其对应的多媒体数据，对上述有效图片进行显示，可以通过上述显示的结果，来呈现电子文件的内容，示例性的，呈现电子教材的内容，进一步激发学生的兴趣，让学生影响深刻；对目标有效图片中关联存储的多媒体数据进行显示，则可以通过视、音、图、文、三维模型等多种形式对电子教材的内容进行呈现，可选的，在多媒体数据中增加对该电子教材的讲解内容，让学生结合该讲解内容学习，提高学生学习积极性，提高教学效果，提升教学质量。

应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。

对应于上文实施例所述的方法，图8示出了本申请实施例提供的一种电子文件的处理装置的结构框图，为了便于说明，仅示出了与本申请实施例相关的部分。

参照图8，该装置包括：

图片生成模块802，根据预设的有效图片识别算法以及获取得到的电子文件，生成多个关于所述电子文件的有效图片；

特征点模块803，用于分别提取各个所述有效图片对应的特征点信息；

数据包模块804，用于根据所有所述有效图片以及与所述有效图片对应的所述特征点信息生成所述电子文件的数据包；

输出模块805，用于将所述数据包导入预设的多媒体生成程序。

特别地，该装置还包括：

所述获取模块，还用于获取所述多媒体生成程序输出的所述电子文件对应的多媒体数据，建立所述数据包与所述数据包对应的所述多媒体数据之间的关联关系；还用于获取显示请求；所述显示请求包含所需显示的目标文件的标识信息；

识别模块，用于基于所述标识信息从所有已存储的电子文件的数据包中查询与所述标识信息匹配的目标数据包；

显示模块，用于基于所述目标数据包响应所述显示请求。

需要说明的是，上述装置/单元之间的信息交互、执行过程等内容，由于与本申请方法实施例基于同一构思，其具体功能及带来的技术效果，具体可参见方法实施例部分，此处不再赘述。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

图9为本申请一实施例提供的终端设备的结构示意图。如图9所示，该实施例的终端设备9包括：至少一个处理器90(图9中仅示出一个)处理器、存储器91以及存储在所述存储器91中并可在所述至少一个处理器90上运行的计算机程序92，所述处理器90执行所述计算机程序92时实现上述任意各个处理方法实施例中的步骤。

所述终端设备9可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。该终端设备可包括，但不仅限于，处理器90、存储器91。本领域技术人员可以理解，图9仅仅是终端设备9的举例，并不构成对终端设备9的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如还可以包括输入输出设备、网络接入设备等。

所称处理器90可以是中央处理单元(Central Processing Unit，CPU)，该处理器90还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述存储器91在一些实施例中可以是所述终端设备9的内部存储单元，例如终端设备9的硬盘或内存。所述存储器91在另一些实施例中也可以是所述终端设备9的外部存储设备，例如所述终端设备9上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器91还可以既包括所述终端设备9的内部存储单元也包括外部存储设备。所述存储器91用于存储操作系统、应用程序、引导装载程序(BootLoader)、数据以及其他程序等，例如所述计算机程序的程序代码等。所述存储器91还可以用于暂时地存储已经输出或者将要输出的数据。

图10示出了本申请一实施例提供的一种电子文件的处理方法所适用的具体应用流程，详述如下：

在本实施例中，作为示例而非限定，将PDF文件输入该终端设备，该终端设备执行本申请一实施例提供的电子文件的处理方法，输出带标识的PDF文件，即带标识信息的电子教材，以及该PDF文件对应的数据包，将数据包输入到UNTIY应用程序中，经过开发后，输出该PDF文件对应的多媒体数据。

在本实施例中，通过输入PDF文件，输出带标识的PDF文件，以及该PDF文件对应的多媒体数据，即得到了带标识信息的电子教材，以及该电子教材对应的多媒体数据，该带标识信息的电子教材可用于扫描然后通过本申请一实施例提供的电子文件的处理方法得到该电子教材对应的多媒体数据，实现信息采集定位。通过显示该电子教材的多媒体数据，包括播放视频音频，显示三维模型等，可以将电子教材中的内容真实的展现在学生面前，让学生感同身受，提高了教学活动的互动性、趣味性，让学生印象深刻，提高教学效果。

图11示出了本申请一实施例提供的应用场景，详述如下：

用户终端通过增强现实(Augmented Reality，AR)摄像头对教材进行照相或者扫描，该教材可以是纸质教材或电子教材，得到基于AR显示结果。该显示结果仍保留AR摄像头对教材的照相或者扫描结果，在此之上，通过AR技术，显示出该教材对应的教师三维模型或其他三维模型(例如教学内容的示图对应的三维模型)，以及该教材对应的教学内容，该教学内容包括板书或者(Microsoft Office PowerPoint，PPT)，以及该板书或者PPT对应的教学语音。

本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现可实现上述各个方法实施例中的步骤。

本申请实施例提供了一种计算机程序产品，当计算机程序产品在移动终端上运行时，使得移动终端执行时实现可实现上述各个方法实施例中的步骤。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括：能够将计算机程序代码携带到拍照装置/终端设备的任何实体或装置、记录介质、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，RandomAccess Memory)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区，根据立法和专利实践，计算机可读介质不可以是电载波信号和电信信号。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

在本申请所提供的实施例中，应该理解到，所揭露的装置/网络设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/网络设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

以上所述实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围，均应包含在本申请的保护范围之内。

Claims (9)

1.一种电子文件的处理方法，其特征在于，包括：

获取与电子文件的文件参量匹配的有效图片识别算法；

通过所述有效识别算法分别对所述电子文件中的各个页面图像进行区域划分，得到关于所述页面图像的无效图像区域以及有效图像区域；

根据各个所述页面图像的所述有效图像区域，生成有效图片；

分别提取各个所述有效图片对应的特征点信息；

根据所有所述有效图片以及与所述有效图片对应的所述特征点信息，生成所述电子文件的数据包；

将所述数据包导入预设的多媒体生成程序中，用以生成所述电子文件对应的多媒体数据。

2.如权利要求1所述的处理方法，其特征在于，所述分别提取各个所述有效图片对应的特征点信息，包括：

对所述有效图片进行灰度化处理，生成所述有效图片的灰度图；

根据所述灰度图以及预设的特征点提取算法，提取所述特征点信息。

3.如权利要求1-2任一项所述的处理方法，其特征在于，所述处理方法还包括：

获取所述多媒体生成程序输出的所述电子文件对应的多媒体数据；

建立所述数据包与所述数据包对应的所述多媒体数据之间的关联关系。

4.如权利要求3所述的处理方法，其特征在于，所述处理方法还包括：

获取显示请求；所述显示请求包含所需显示的目标文件的标识信息；

基于所述标识信息从所有已存储的电子文件的数据包中查询与所述标识信息匹配的目标数据包；

基于所述目标数据包响应所述显示请求。

5.如权利要求4所述的方法，其特征在于，所述基于所述目标数据包响应所述显示请求，包括：

将所述目标数据包中的所述有效图片进行显示；和/或

将所述目标数据包关联存储的所述多媒体数据进行显示。

6.如权利要求1所述的处理方法，其特征在于，所述数据包包括：

所述电子文件的名称、所述有效图片、所述有效图片在所述电子文件中的位置信息以及所述有效图片对应的所述特征点信息。

7.一种电子文件的处理装置，其特征在于，包括：

有效图片生成模块，获取与电子文件的文件参量匹配的有效图片识别算法；通过所述有效识别算法分别对所述电子文件中的各个页面图像进行区域划分，得到关于所述页面图像的无效图像区域以及有效图像区域；根据各个所述页面图像的所述有效图像区域，生成有效图片；

特征点提取模块，用于分别提取各个所述有效图片对应的特征点信息；

数据包生成模块，用于根据所有所述有效图片以及与所述有效图片对应的所述特征点信息生成所述电子文件的数据包；

输出模块，用于将所述数据包导入预设的多媒体生成程序。

8.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至6任一项所述的方法。

9.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至6任一项所述的方法。