CN108257198A - 一种将纸质绘本电子化的方法及系统 - Google Patents

Abstract

本申请公开了一种将纸质绘本电子化的方法及系统，该方法包括：终端设备对绘本页面拍摄照片和录制音频；所述终端设备将拍摄的照片和录制的音频上传至服务器；所述服务器提取所述拍摄的照片特征点构成模型。本申请实现了让用户自行制作电子版绘本并且让机器人阅读绘本的效果。

Description

一种将纸质绘本电子化的方法及系统

技术领域

本申请涉及人工智能技术领域，尤其是涉及一种将纸质绘本电子化的方法及系统。

背景技术

现有技术中，利用AI技术来实现绘本阅读、播放故事等功能。机器人可以阅读市面上的大量绘本，通过AI技术识别面前的绘本是哪一本书的哪一页，并读出其对应的音频。一般来讲，由专业团队对绘本的每一页进行拍照并对每一页进行录音。目前读的音频是通过官方录制并保存在服务端，机器人在识别到绘本时再去服务端去获取相关的音频并播放。普通用户只能等待专业团队将内容制作好之后才可以让机器人阅读某一本绘本。有可能内容制作团队的生产能力问题，导致用户手中的某一些绘本无法阅读。现有技术架构下，不能解决普通用户自己制作电子版绘本的问题。

发明内容

本申请实施例提供一种将纸质绘本电子化的方法及系统。解决了普通用户自己制作电子版绘本的问题。

本申请实施例提供了一种将纸质绘本电子化的方法，该方法包括：

终端设备对绘本页面拍摄照片和录制音频；

所述终端设备将拍摄的照片和录制的音频上传至服务器；

所述服务器提取所述拍摄的照片特征点构成模型。

进一步地，该方法还包括：

机器人下载所述模型和所述录制的音频；

所述机器人识别到绘本的页面，播放音频。

进一步地，所述终端设备将拍摄的照片和录制的音频上传至服务器包括：

所述终端设备将拍摄的照片和录制的音频压缩后上传至服务器。

进一步地，所述服务器提取所述拍摄的照片特征点构成模型包括：

所述服务器将压缩后的所述拍摄的照片和所述录制的音频解压缩并提取所述拍摄的照片特征点构成模型；

所述服务器将所述模型和所述录制的音频进行压缩。

进一步地，该方法还包括：在所述终端设备检测所述拍摄的照片里的绘本页面边框出现畸变的情况下，所述终端设备将所述绘本页面边框转换为矩形。

本申请实施例还提供了一种将纸质绘本电子化的系统，其特征在于，该系统包括：终端设备和服务器；

所述终端设备，用于对绘本页面拍摄照片和录制音频；将拍摄的照片和录制的音频上传至服务器；

所述服务器，用于提取所述拍摄的照片特征点构成模型。

进一步地，该系统还包括：机器人；

所述机器人，用于下载所述模型和所述录制的音频；识别绘本的页面；播放音频。

进一步地，该系统还包括：

所述终端设备，还用于将所述拍摄的照片和所述录制的音频压缩后上传至服务器。

进一步地，该系统还包括：

所述服务器，还用于将压缩后的所述拍摄的照片和所述录制的音频解压缩并提取所述拍摄的照片特征点构成模型；

所述服务器，还用于将所述模型和所述录制的音频进行压缩。

进一步地，该系统还包括：

所述终端设备，还用于在所述终端设备检测所述拍摄的照片里的绘本页面边框出现畸变的情况下，将所述绘本页面边框转换为矩形。

本申请实现了让用户自行制作电子版绘本并且让机器人阅读绘本的效果。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1为计算机组成结构框图；

图2为本申请实施例提供的一种将纸质绘本电子化的方法的流程图；

图3为本申请实施例提供的一种将纸质绘本电子化的方法的原理图；

图4为本申请实施例提供的一种将纸质绘本电子化的系统的结构图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

图1为计算机组成结构框图，其中示出了计算机的主要部件。图1中，处理器110、内部存储器105、总线桥120以及网络接口115接入系统总线140，总线桥120用于桥接系统总线140和I/O总线145，I/O接口接入I/O总线145，USB接口以及外部存储器与I/O接口连接。图1中，处理器110可以为一个或多个处理器，每个处理可以具有一个或者多个处理器内核；内部存储器105为易失性存储器，例如寄存器、缓存器、各种类型的随机存取存储器等；在计算机开机运行的时候，内部存储器105中的数据包括操作系统和应用程序；网络接口115可以为以太网接口、光纤接口等；系统总线140可以用来传送数据信息、地址信息、以及控制信息；总线桥120可以用来进行协议转换，将系统总线协议转换为I/O协议或者将I/O协议转换为系统总线协议以实现数据传输；I/O总线145用来数据信息和控制信息，还可以总线终结电阻或电路来降低信号反射干扰；I/O接口130主要与各种外部设备连接，例如键盘、鼠标、传感器等等，闪存可以通过USB接口接入I/O总线，外部存储器为非易失性存储器，例如硬盘、光盘等。在计算机开机之后，处理器可以将存储于外部存储其中的数据读取到内部存储器中，并对内部存储其中的计算机指令进行处理，完成操作系统以及应用程序的功能。该示例计算机可以为台式机、笔记本电脑、平板电脑、智能手机等。

图2为本申请实施例提供的一种将纸质绘本电子化的方法的流程图，该流程图包括：

步骤205，终端设备对绘本页面拍摄照片和录制音频；

以将绘本读物“生气的小熊”电子化为例。用户在终端设备手机或i pad上安装Luka app；打开Luka app，从绘本读物“生气的小熊”第一页开始，对每一页面进行录音并将每一页面置业摄像头下进行拍摄；当拍摄照片的界面出现绘本页面的四个边框时，尽量保持页面边框为矩形再进行拍摄；Luka app检测拍摄的照片里的绘本页面边框是否出现畸变；若出现畸变，Luka app自动校正照片，将绘本页面边框转换为矩形。

步骤210，所述终端设备将拍摄的照片和录制的音频上传至服务器；

用户触发上传操作，终端设备上的Luka app将校正后的绘本读物“生气的小熊”的所有照片和录制的所有音频压缩后通过WiFi上传到服务器。

步骤215，所述服务器提取拍摄的照片特征点构成模型；

服务器接收到校正后的绘本读物“生气的小熊”的所有照片和录制的所有音频后，先将其解压缩，再提取校正后的绘本读物“生气的小熊”的每一张照片特征点构成模型；最后将构成的模型和录制的音频进行压缩。

在本实施例中，还可以利用Luka app对绘本读物“生气的小熊”的某些页面拍摄照片和录制音频，再进行后续处理。

与现有技术相比，本申请实施例的有益效果在于，用户能够自行制作电子版绘本。

图3为本申请实施例提供的一种将纸质绘本电子化的方法的原理图；

以将绘本读物“哪吒闹海”电子化并让Luka绘本机器人阅读为例。Luka绘本机器人是一款利用AI技术来进行绘本阅读、播放故事等功能的机器人。它可以阅读市面上的大量绘本，通过AI技术识别面前的绘本是哪一本书的哪一页，并将其对应的音频读出来。用户在终端设备手机或ipad上安装Luka app；打开Luka app从绘本读物“哪吒闹海”第一页开始，对每一页面进行录音并将每一页面置业摄像头下进行拍摄；当拍摄照片的界面出现绘本页面的四个边框时，尽量保持页面边框为矩形再进行拍摄；Luka app检测拍摄的照片里的绘本页面边框是否出现畸变；若出现畸变，Luka app自动校正照片，将绘本页面边框转换为矩形。以绘本读物“哪吒闹海”的每一页的页码作为拍摄的对应页面的照片的名称和录制的对应页面的音频的名称；用户触发上传操作，Luka app通过蓝牙将校正后的的绘本读物“哪吒闹海”的所有照片和录制的所有音频压缩后上传到服务器；服务器接收到校正后的绘本读物“哪吒闹海”的所有照片和录制的所有音频后，将其解压缩；在服务器端提取校正后的绘本读物“哪吒闹海”的所有照片的特征点构成模型并将构成的的模型和录制的音频进行压缩；打开绘本读物“哪吒闹海”的第十页，并将第十页置于Luka绘本机器人面前；Luka绘本机器人自动下载构成的模型及录制的音频；将识别的绘本读物“哪吒闹海”的第十页与模型比对，找到相似度最高的模型的对应的页码；播放页码对应的音频。在本实施例中，构成模型后，服务器向Luka绘本机器人发送通知；Luka绘本机器人接收到通知后，下载构成的模型和录制的音频；Luka绘本机器人识别绘本读物“哪吒闹海”的某一页面；将识别的绘本读物“哪吒闹海”的某一页面与模型比对，找到相似度最高的照片的页码；播放所述页码对应的音频。

在本实施例中，在服务器没有用户自己制作的电子版绘本读物“哪吒闹海”的模型和录制的音频的情况下，Luka绘本机器人识别到绘本读物“哪吒闹海”的某一页面时，下载服务器上存储的原始的模型和原始的音频并播放原始的音频。

与现有技术相比，本申请实施例的有益效果在于，用户能够自行制作电子版绘本并让机器人阅读绘本。

图4为本申请实施例提供的一种将纸质绘本电子化的系统的结构图，该结构图包括：终端设备405和服务器410；

终端设备405，用于对绘本页面拍摄照片和录制音频；将拍摄的照片和录制的音频上传至服务器；

在具体应用本申请实施例的过程中，用户在终端设备手机或ipad上安装Lukaapp；打开Luka app，从绘本读物“聪明的刺猬”第一页开始，对每一页面进行录音并将每一页面置业摄像头下进行拍摄；当拍摄照片的界面出现绘本页面的四个边框时，尽量保持绘本页面边框为矩形再进行拍摄；Luka app检测拍摄的照片里的绘本页面边框是否出现畸变；若出现畸变，Luka app自动校正照片，将绘本页面边框转换为矩形。以绘本读物“聪明的刺猬”的每一页的页码作为拍摄的对应页面的照片的名称和录制的对应页面的音频的名称。用户触发上传操作，Luka app将校正后的绘本读物“聪明的刺猬”的照片和录制的音频压缩后通过无线WiFi上传到服务器。

服务器410，用于提取拍摄的照片特征点训练模型；

在本实施例中，将纸质绘本电子化的系统还包括机器人。以Luka绘本机器人为例。

在具体应用本申请实施例的过程中，服务器接收到压缩后的拍摄的绘本读物“聪明的刺猬”的照片和录制的音频后，将其解压缩；服务器提取拍摄的绘本读物“聪明的刺猬”的照片的特征点构成模型并将模型和录制的音频进行压缩；构成模型后，Luka绘本机器人识别纸质绘本读物“聪明的刺猬”的第一页时，Luka绘本机器人下载构成的模型及录制的音频；将识别的绘本读物“聪明的刺猬”的第一页与构成的模型比对，找到相似度最高的模型对应的页码；播放页码对应的音频。接下来将纸质绘本读物“聪明的刺猬”的第二页及后面的页面分别置于Luka绘本机器人面前，Luka绘本机器人会播放对应页面的音频；在服务器没有用户自己制作的电子版绘本读物“聪明的刺猬”的构成的模型和录制的音频的情况下，Luka绘本机器人识别到绘本读物“聪明的刺猬”的某一页面时，下载原始的模型和原始的音频并播放原始的音频。

本申请实现了让用户自行制作电子版绘本并且让机器人阅读绘本的效果。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。

以上所述仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种将纸质绘本电子化的方法，其特征在于，该方法包括：

终端设备对绘本页面拍摄照片和录制音频；

所述终端设备将拍摄的照片和录制的音频上传至服务器；

所述服务器提取所述拍摄的照片特征点构成模型。

2.根据权利要求1所述的将纸质绘本电子化的方法，其特征在于，该方法还包括：

机器人下载所述模型和所述录制的音频；

所述机器人识别到绘本的页面，播放音频。

3.根据权利要求1所述的将纸质绘本电子化的方法，其特征在于，所述终端设备将拍摄的照片和录制的音频上传至服务器包括：

所述终端设备将拍摄的照片和录制的音频压缩后上传至服务器。

4.根据权利要求1所述的将纸质绘本电子化的方法，其特征在于，所述服务器提取所述拍摄的照片特征点构成模型包括：

所述服务器将压缩后的所述拍摄的照片和所述录制的音频解压缩并提取所述拍摄的照片特征点构成模型；

所述服务器将所述模型和所述录制的音频进行压缩。

5.根据权利要求1所述的将纸质绘本电子化的方法，其特征在于，该方法还包括：在所述终端设备检测所述拍摄的照片里的绘本页面边框出现畸变的情况下，所述终端设备将所述绘本页面边框转换为矩形。

6.一种将纸质绘本电子化的系统，其特征在于，该系统包括：终端设备和服务器；

所述终端设备，用于对绘本页面拍摄照片和录制音频；将拍摄的照片和录制的音频上传至服务器；

所述服务器，用于提取所述拍摄的照片特征点构成模型。

7.根据权利要求5所述的将纸质绘本电子化的系统，其特征在于，该系统还包括：机器人；

所述机器人，用于下载所述模型和所述录制的音频；识别绘本的页面；播放音频。

8.根据权利要求5所述的将纸质绘本电子化的系统，其特征在于，该系统还包括：

所述终端设备，还用于将所述拍摄的照片和所述录制的音频压缩后上传至服务器。

9.根据权利要求5所述的将纸质绘本电子化的系统，其特征在于，该系统还包括：

所述服务器，还用于将压缩后的所述拍摄的照片和所述录制的音频解压缩并提取所述拍摄的照片特征点构成模型；

所述服务器，还用于将所述模型和所述录制的音频进行压缩。

10.根据权利要求5所述的将纸质绘本电子化的系统，其特征在于，该系统还包括：

所述终端设备，还用于在所述终端设备检测所述拍摄的照片里的绘本页面边框出现畸变的情况下，将所述绘本页面边框转换为矩形。