CN114115674A - 录音和文档内容的定位方法、电子设备及存储介质 - Google Patents

Abstract

本申请提供了一种录音和文档内容的定位方法电子设备及存储介质，该方法包括：显示编辑页面，所述编辑页面中显示有：录音播放进度条和目标文档；当录音播放进度条显示播放到目标音频的第一播放时刻时，突出显示第一播放时刻对应的第一文档内容；和/或，当检测到用户在第一界面中选中第二文档内容时，从所述第二文档内容对应的第二播放时刻开始继续播放目标音频。应用本申请的技术方案，在目标音频播放过程中，可以根据音频播放时刻自动定位到对应的文档内容；或者根据用户选择的文档内容自动定位到音频播放时刻。与现有技术完全手动对录音和文档内容进行定位的方式相比，操作更加方便，提高了用户体验。

Description

录音和文档内容的定位方法、电子设备及存储介质

技术领域

本申请涉及电子设备技术领域，尤其涉及录音和文档内容的定位方法、电子设备及存储介质。

背景技术

目前，很多手机、平板电脑等电子设备都会预装备忘录应用，备忘录应用可以实现语音录入、键盘输入、手写输入以及插入图片等功能。

通常，用户会利用备忘录应用来记笔记。例如：在讲座或会议过程中，用户可以利用备忘录对讲座或会议进行录音。在录音到需要重点记忆的时候，还可以在编辑区域输入一些文字或插入图片等生成文档内容，以便讲座后或会议后进行笔记查看。这种方式，为用户记笔记带来了便利。

然而，在用户利用备忘录应用记完笔记后，进行笔记查看时，如果笔记中的录音时间长且文档内容也比较多，用户需要通过拖拽播放进度条选择要播放的音频内容，并且通过滑动屏幕定位到播放的音频内容对应的文档内容。这种完全手动对录音和文档内容进行定位的方式，操作不够方便，用户体验不高。

发明内容

有鉴于此，本申请提供一种录音和文档内容的定位方法、系统、电子设备及存储介质，以利于解决现有技术中完全手动定位导致的操作不方便的问题。

第一方面，本申请实施例提供了一种录音和文档内容的定位方法，应用于电子设备，包括：

显示编辑页面，所述编辑页面中显示有：录音播放进度条和目标文档；

当录音播放进度条显示播放到目标音频的第一播放时刻时，突出显示第一播放时刻对应的第一文档内容；其中，第一文档内容属于所述目标文档，是在所述第一播放时刻对应的第一录音时间编辑的；和/或，

当检测到用户在编辑页面中选中第二文档内容时，从所述第二文档内容对应的第二播放时刻开始继续播放目标音频；其中，第二文档内容属于所述目标文档，是在所述第二播放时刻对应的第二录音时间编辑的。

在上述第一方面的一种可能的实现中，所述编辑页面中的目标文档初始时为模糊显示；

所述突出显示第一播放时刻对应的第一文档内容，包括：高亮显示第一播放时刻对应的第一文档内容。

在上述第一方面的一种可能的实现中，所述编辑页面中的目标文档内容初始按默认方式显示；

所述突出显示第一播放时刻对应的第一文档内容，包括：通过改变颜色或增加背景色的方式突出显示第一播放时刻对应的第一文档内容。

在上述第一方面的一种可能的实现中，该方法还包括：

当检测到用户在第一界面中选中第二文档内容时，突出显示第二文档内容。

在上述第一方面的一种可能的实现中，所述第一播放时刻为：顺序播放录音的当前播放时刻；或用户通过拖拽或点击所述录音播放进度条选中的位置对应的播放时刻。

在上述第一方面的一种可能的实现中，该方法还包括：

在所述目标音频的录制过程中，获得用户的一个或多个编辑操作，对文档内容进行编辑；

获得各个编辑操作对应的录音时间信息及文档内容，生成编辑记录进行保存；

所述当播放到目标音频的第一播放时刻时，突出显示第一播放时刻对应的第一文档内容的步骤，包括：

基于显示的录音播放进度条，获得用户选择的第一播放时刻；

基于保存的编辑记录，确定第一播放时刻对应的第一文档内容，突出显示所述第一文档内容；

所述当检测到用户在第一界面中选中第二文档内容时，从所述第二文档内容对应的第二播放时刻开始继续播放目标音频的步骤，包括：

获得用户选择的第二文档内容；基于所述编辑记录，确定第二文档内容对应的第二播放时刻，从所述第二播放时刻开始继续播放目标音频。

在上述第一方面的一种可能的实现中，所述获得各个编辑操作对应的录音时间信息及文档内容，生成编辑记录进行保存，包括：

获得各个编辑操作对应的录音时间信息、文档内容以及文档内容在编辑页面对应的画布中的位置信息，生成编辑记录进行保存；

所述基于保存的编辑记录，确定第一播放时刻对应的第一文档内容，突出显示所述第一文档内容，包括：

基于保存的编辑记录，确定第一播放时刻对应的第一文档内容及第一文档内容在编辑画布中的第一位置信息；

在编辑页面中所述第一位置信息对应的第一位置上，突出显示所述第一文档内容；

所述基于所述编辑记录，确定第二文档内容对应的第二播放时刻，从所述第二播放时刻开始继续播放音频，包括：

获得用户在编辑页面选择的第二文档内容在所述画布中的第二位置；

基于所述编辑记录，确定所述第二位置对应的录音时刻，作为第二播放时刻；

从所述第二播放时刻开始继续播放音频。

在上述第一方面的一种可能的实现中，采用如下步骤开启目标音频的录制：

在检测到编辑页面中的录音按钮被选中后，开始目标音频的录制并对录音进行计时；

所述编辑操作对应的录音时间信息为：该编辑操作对应的录音计时时刻；

所述获得各个编辑操作对应的录音时间信息、文档内容以及文档内容在编辑页面对应的画布中的位置信息，生成编辑记录进行保存的步骤，包括：

按预设的录音时间间隔，获得每一录音时间间隔的起始录音计时时刻、该录音时间间隔中检测到的一个或多个编辑操作、各个编辑操作对应的文档内容及各个文档内容在编辑页面对应的画布中的位置信息，分别生成编辑记录进行保存；每一条编辑记录与一个录音计时时刻相对应。

在上述第一方面的一种可能的实现中，所述录音计时时间间隔与所述录音计时的计时单位相同。

在上述第一方面的一种可能的实现中，所述编辑操作，包括：键盘输入、手写输入和图片插入中的一种或多种；

所述键盘输入操作对应的文档内容，包括：所述预设的录音时间间隔中，用户通过键盘输入的文本内容；所述手写输入操作对应的文档内容，包括：基于手写输入的轨迹生成的位图的存储路径信息；所述图片插入操作对应的文档内容，包括：插入的图片的存储路径信息；

所述键盘输入操作对应的录音时间信息为：用户通过键盘输入的文本内容中第一个文字对应的录音计时时刻；所述手写输入操作对应的录音时间信息为：笔画第一笔对应的录音计时时刻；所述图片插入操作对应的录音时间信息为：图片插入操作对应的录音计时时刻。

在上述第一方面的一种可能的实现中，在检测到编辑页面中的录音按钮被选中后，还包括：

在编辑页面中显示录音状态图标，该录音状态图标包括：停止录音按钮、录音状态显示条和录音计时时刻。

在上述第一方面的一种可能的实现中，所述基于显示的录音播放进度条，获得用户选择的第一播放时刻，包括：

接收用户对播放进度条的拖拽操作或点击操作；

获得拖拽操作结束时的播放进度条的目标位置或点击操作对应的目标位置，基于所述目标位置在整个播放进度条的占比和目标音频的总时长，计算出对应的录音计时时刻，作为第一播放时刻。

在上述第一方面的一种可能的实现中，所述基于保存的编辑记录，确定第一播放时刻对应的第一文档内容，突出显示所述第一文档内容，包括：

从保存的编辑记录中，获得第一播放时刻对应的第一文档内容在编辑页面对应的画布中的第一位置信息；

基于所述第一文档内容的第一位置信息，在屏幕上突出显示所述第一文档内容。

在上述第一方面的一种可能的实现中，所述从保存的编辑记录中，获得第一播放时刻对应的第一文档内容在编辑页面对应的画布中的第一位置信息，包括：

从已保存的编辑记录中查找与所述第一播放时刻相同的第一录音计时时刻，若查找到，则确定所述第一录音计时时刻对应的文档内容为第一文档内容，并从编辑记录中获得第一文档内容在编辑页面对应的画布中的第一位置信息。

在上述第一方面的一种可能的实现中，在拖拽播放进度条过程中，对已经播放的录音对应的文档内容进行高亮显示；对未播放的录音对应的文档内容进行模糊显示；

在用户拖拽操作结束时，高亮显示拖拽结束位置对应的播放时刻所对应的文档内容。

在上述第一方面的一种可能的实现中，在拖拽播放进度条过程中，对已经播放的录音对应的文档内容通过改变颜色或增加背景色的方式进行突出显示；对未播放的录音对应的文档内容按默认方式进行显示；

在用户拖拽操作结束时，对拖拽结束位置对应的播放时刻所对应的文档内容通过改变颜色或增加背景色的方式突出显示。

在上述第一方面的一种可能的实现中，在所述获得用户选择的第一播放时刻之前，还包括：

在编辑页面显示录音播放状态图标，该录音播放状态图标包括：结束播放按钮、播放按钮、用于表明播放进度的播放进度条和播放时刻，以及用于表明有扩展功能的扩展图标。

在上述第一方面的一种可能的实现中，所述基于所述编辑记录，确定第二文档内容对应的第二播放时刻，包括：

接收用户在编辑页面对文档内容的选择操作；

获得用户选择的第二文档内容在编辑页面对应的画布中的第二位置信息；

在所述编辑记录中查找所述第二位置信息，若查找到，则确定所述第二位置信息对应的第二录音计时时刻为第二播放时刻。

在上述第一方面的一种可能的实现中，所述方法还包括：在确定录音结束的情况下，停止录音并生成目标音频对应的录音文件存储至磁盘中；将所述录音文件的存储路径信息与所有保存的编辑记录对应存储至预设数据库中；

在所述获得用户选择的第一播放时刻之前，还包括：

基于所述预设数据库中存储的录音文件的存储路径信息将所述录音文件加载到内存中，并将编辑记录中键盘输入的文本内容加载到内存中，以及基于保存的编辑记录中手写输入对应的位图的存储路径信息和/或插入图片的存储路径信息，将手写输入对应的位图和/或插入图片加载到内存中。

在上述第一方面的一种可能的实现中，在所述获得用户选择的第一播放时刻之前，还包括：

基于录音播放指令，开始播放录音；

实时获得当前播放播放时刻；

从所述编辑记录中获得当前播放播放时刻对应的当前文档内容及当前位置信息；

基于所述当前文档内容的当前位置信息，在屏幕上突出显示所述当前文档内容。第二方面，本申请实施例提供了一种电子设备，包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器，其中，当该计算机程序指令被所述处理器执行时，触发所述电子设备执行第一方面任一项所述的方法。

第三方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质包括存储的程序，其中，在所述程序运行时控制所述计算机可读存储介质所在设备执行第一方面任意一项所述的方法。

第四方面，本申请实施例提供了一种计算机程序产品，所述计算机程序产品包含可执行指令，当所述可执行指令在计算机上执行时，使得计算机执行第一方面任意一项所述的方法。

应用本申请实施例提供的录音和文档内容的定位方法电子设备及存储介质，当录音播放进度条显示播放到目标音频的第一播放时刻时，突出显示第一播放时刻对应的第一文档内容；和/或，当检测到用户在第一界面中选中第二文档内容时，从所述第二文档内容对应的第二播放时刻开始继续播放目标音频。应用本申请的技术方案，在目标音频播放过程中，可以根据音频播放时刻自动定位到对应的文档内容；或者根据用户选择的文档内容自动定位到音频播放时刻。与现有技术完全手动对录音和文档内容进行定位的方式相比，操作更加方便，提高了用户体验。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。

图1为本申请实施例提供的一种电子设备的结构示意图；

图2为本申请实施例提供的一种电子设备的软件结构框图；

图3为本申请实施例提供的录音和文档内容的定位显示方法的一种流程示意图；

图4A为本申请实施例提供的第一定位场景的第一页面示例图；

图4B为图4A所示第一定位场景的第二页面示例图；

图5A为本申请实施例提供的第二定位场景的第一页面示例图；

图5B为图5A所示第二定位场景的第二页面示例图；

图6为本申请实施例提供的录音和文档内容的定位显示方法的另一种流程示意图；

图7A为本申请实施例提供的一种进入录音场景的第一页面示例图；

图7B为图7A所示进入录音场景的第二页面示例图；

图7C为图7A所示进入录音场景的第三页面示例图；

图7D为图7A所示进入录音场景的第四页面示例图；

图8为本申请实施例提供的一种录音流程示意图；

图9为本申请实施例提供的第一种录音场景页面图；

图10为本申请实施例提供的另一种录音流程示意图；

图11为本申请实施例提供的第二录音场景页面图；

图12A为本申请实施例提供的第三录音场景的第一页面示例图；

图12B为图12A所示第三录音场景的第二页面示例图；

图12C为图12A所示第三录音场景的第三页面示例图；

图13A为本申请实施例提供的第四录音场景的第一页面示例图；

图13B为图13A所示第四录音场景的第二页面示例图；

图13C为图13A所示第四录音场景的第三页面示例图；

图14为本申请实施例提供的第五录音场景页面图；

图15A为本申请实施例提供的一种进入录音播放场景的第一页面示例图；

图15B为图15A所示进入录音播放场景的第二页面示例图；

图16为本申请实施例提供的一种录音播放流程示意图；

图17A为本申请实施例提供的第三定位场景的第一页面示例图；

图17B为图17A所示第三定位场景的第二页面示例图；

图17C为图17A所示第三定位场景的第三页面示例图；

图17D为图17A所示第三定位场景的第四页面示例图；

图18为本申请实施例提供的另一种录音播放流程示意图；

图19为本申请实施例提供的录音和文档内容的定位显示方法的一种实现方式示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。

应当明确，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。

在本申请实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。

应当理解，本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，甲和/或乙，可以表示：单独存在甲，同时存在甲和乙，单独存在乙这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

参见图1，图1为本申请实施例提供的一种电子设备的结构示意图。该电子设备100可以包括处理器110、内部存储器接口120、内部存储器121、通用串行总线(UniversalSerial Bus，USB)接口130、充电管理模块140、电源管理模块141、电池142、天线1、天线2、移动通信模块150、无线通信模块160、音频模块170、扬声器170A，、受话器170B、麦克风170C、耳机接口170D、传感器模块180、按键190、马达191、指示器192、摄像头193、显示屏194、以及用户标识模块(Subscriber Identity Module Module，SIM)卡接口195等。

其中，传感器模块180可以包括压力传感器180A、陀螺仪传感器180B、气压传感器180C、磁传感器180D、加速度传感器180E、距离传感器180F、接近光传感器180G、指纹传感器180H、温度传感器180J、触摸传感器180K、环境光传感器180L、以及骨传导传感器180M等。

可以理解的是，本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中，电子设备100可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件、软件、或软件和硬件的组合实现。

处理器110可以包括一个或多个处理单元，例如：处理器110可以包括应用处理器(Application Processor，AP)、调制解调处理器(modem)、图形处理器(GraphicsProcessing Unit，GPU)、图像信号处理器(Image Signal Processor，ISP)、控制器、视频编解码器、数字信号处理器(Digital Signal Processor，DSP)，基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。

处理器110可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。

处理器110中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据，可从所述存储器中直接调用。避免了重复存取，减少了处理器110的等待时间，因而提高了系统的效率。

在一些实施例中，处理器110可以包括一个或多个接口。接口可以包括集成电路(Inter-Integrated Circuit，I2C)接口、集成电路内置音频(Inter-Integrated CircuitSound，I2S)接口、脉冲编码调制(Pulse Code Modulation，PCM)接口、通用异步收发传输器(Universal Asynchronous Receiver/Transmitter，UART)接口、移动产业处理器接口(Mobile Industry Processor Interface，MIPI)、通用输入输出(General-PurposeInput/Output，GPIO)接口、以及用户标识模块(Subscriber Identity Module，SIM)接口。

可以理解的是，本申请实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对电子设备100的结构限定。在本申请另一些实施例中，电子设备100也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。

充电管理模块140用于从充电器接收充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。在一些有线充电的实施例中，充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中，充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时，还可以通过电源管理模块141为电子设备供电。

电源管理模块141用于连接电池142，充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入，为处理器110，内部存储器121，显示屏194，摄像头193，和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量，电池循环次数，电池健康状态(漏电，阻抗)等参数。在其他一些实施例中，电源管理模块141也可以设置于处理器110中。在另一些实施例中，电源管理模块141和充电管理模块140也可以设置于同一个器件中。

电子设备100的无线通信功能可以通过天线1、天线2、移动通信模块150、无线通信模块160、调制解调处理器以及基带处理器等实现。

天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用，以提高天线的利用率。例如：可以将天线1复用为无线局域网的分集天线。在另外一些实施例中，天线可以和调谐开关结合使用。

移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器，开关，功率放大器，低噪声放大器(low noise amplifier，LNA)等。移动通信模块150可以由天线1接收电磁波，并对接收的电磁波进行滤波，放大等处理，传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大，经天线1转为电磁波辐射出去。在一些实施例中，移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中，移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。

调制解调处理器可以包括调制器和解调器。其中，调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后，被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A，受话器170B等)输出声音信号，或通过显示屏194显示图像或视频。在一些实施例中，调制解调处理器可以是独立的器件。在另一些实施例中，调制解调处理器可以独立于处理器110，与移动通信模块150或其他功能模块设置在同一个器件中。

无线通信模块160可以提供应用在电子设备100上的包括无线局域网(WirelessLocal Area Networks，WLAN)(如无线保真(Wireless Fidelity，Wi-Fi)网络)、蓝牙(Bluetooth，BT)、全球导航卫星系统(Global Navigation Satellite System，GNSS)、调频(Frequency Modulation，FM)、近距离无线通信技术(Near Field Communication，NFC)、以及红外技术(infrared，IR)等无线通信的解决方案。

无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号，对其进行调频，放大，经天线2转为电磁波辐射出去。

在一些实施例中，电子设备100的天线1和移动通信模块150耦合，天线2和无线通信模块160耦合，使得电子设备100可以通过无线通信技术与网络以及其他设备通信。在本申请的一个实施例中，电子设备100可以通过无线通信模块160实现与另一电子设备的局域网络连接。无线通信技术可以包括全球移动通讯系统(Global System for MobileCommunications，GSM)、通用分组无线服务(General Packet Radio Service，GPRS)、码分多址接入(Code Division Multiple Access，CDMA)、宽带码分多址(Wideband CodeDivision Multiple Access，WCDMA)、时分同步码分多址(Time-Division-SynchronousCode Division Multiple Access，TD-SCDMA)，长期演进(Long Term Evolution，LTE)、BT、GNSS、WLAN、NFC、FM、和/或IR技术等。GNSS可以包括全球卫星定位系统(GlobalPositioning System，GPS)、全球导航卫星系统(Global Navigation Satellite System，GLONASS)、北斗卫星导航系统(Beidou Navigation Satellite System，BDS)、准天顶卫星系统(Quasi-Zenith Satellite System，QZSS)、和/或星基增强系统(Satellite BasedAugmentation System，SBAS)等。

电子设备100通过GPU，显示屏194，以及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏194和应用处理器。GPU用于执行数学和几何计算，用于图形渲染。处理器110可包括一个或多个GPU，其执行程序指令以生成或改变显示信息。

显示屏194用于显示图像，视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-EmittingDiode，OLED)、有源矩阵有机发光二极体或主动矩阵有机发光二极体(Active-MatrixOrganic Light Emitting Diode的，AMOLED)、柔性发光二极管(Flex Light-EmittingDiode，FLED)、MiniLED、MicroLED、Micro-OLED、以及量子点发光二极管(Quantum dotLight Emitting Diode，QLED)等。在一些实施例中，电子设备100可以包括1个或N个显示屏194，N为大于1的正整数。

在一些实施例中，显示屏194可以显示应用主页面，各个应用的显示页面，如备忘录应用的各个页面。

摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device，CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor，CMOS)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB，YUV等格式的图像信号。在一些实施例中，电子设备100可以包括1个或N个摄像头193，N为大于1的正整数。

数字信号处理器用于处理数字信号，除了可以处理数字图像信号，还可以处理音频等其他数字信号。例如，当电子设备100在频点选择时，数字信号处理器用于对频点能量进行傅里叶变换等。

外部存储器接口120可以用于连接外部存储卡，例如Micro 安全数码（SecureDigital Memory，SD）卡，实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信，实现数据存储功能。例如将音乐、视频、录音文件等文件保存在外部存储卡中。

内部存储器121可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统、以及至少一个功能所需的应用程序(比如声音播放功能、图像播放功能和录音功能等)等。存储数据区可存储电子设备使用过程中所创建的数据(比如上行音频数据、下行音频数据和电话本等)等。此外，内部存储器121可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、通用闪存存储器(Universal FlashStorage，UFS)等。处理器110通过运行存储在内部存储器121的指令和/或存储在设置于处理器110中的存储器的指令，执行电子设备的各种功能应用以及数据处理。

电子设备100可以通过音频模块170、扬声器170A、受话器170B、麦克风170C、耳机接口170D、以及等实现音频功能。例如音乐播放，录音等。

音频模块170用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中，音频模块170可以设置于处理器110中，或将音频模块170的部分功能模块设置于处理器110中。

扬声器170A，也称“喇叭”，用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听下载的音乐、录制的音频或收听免提通话。

受话器170B，也称“听筒”，用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时，可以通过受话器170B接听语音。

麦克风170C，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，可以通过麦克风170C接收用户发声或需要录制的声音，将声音信号输入到麦克风170C，实现上行音频流的采集。

电子设备100可以设置至少一个麦克风170C。在另一些实施例中，电子设备100可以设置两个麦克风170C，除了采集声音信号，还可以实现降噪功能。在另一些实施例中，电子设备100还可以设置三个，四个或更多麦克风170C，实现采集声音信号，降噪，还可以识别声音来源，实现定向录音功能等。

耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130，也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform，OMTP)标准接口，美国蜂窝电信工业协会(cellular telecommunications industry association of the USA，CTIA)标准接口。

在一些实施例中，电子设备100还可以包括按键190、马达191、指示器192以及SIM卡接口195（或eSIM卡）等一项或多项，本申请实施例对此不作任何限制。

参见图2，图2为本申请实施例提供的一种电子设备的软件结构框图。

分层架构将软件分成若干个层，每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中，将Android系统分为四层，从上至下分别为从上至下分别为应用层、框架层、数据存储层和硬件抽象层。

如图2所示，应用层（Application，App）可以包括一系列应用程序包。例如，该应用程序包可以包括备忘录应用。应用层又可以分为视图层（UX）和业务层。

其中，针对备忘录应用，视图层（UX）可以包括：编辑页面和笔记编辑器等等。其中，编辑页面可以用于在录音过程中接收用户的各种编辑操作；笔记编辑器可以用于在笔记完成后，接收用户的针对笔记的各种编辑操作。

如图2所示，业务层可以包括基础业务层和基础业务扩展层。其中，基础业务层包括用于对图片和文字进行编辑的编辑模块，和用于实现音频录制和播放的多媒体模块等功能模块；基础业务扩展层包括：实现语音处理的语音处理模块、实现手写输入功能的手写模块和实现在录音的过程中接收用户的各种操作对页面的文本进行编辑的音文同步模块。

如图2所示，框架层可以包括：编辑引擎、界面绘制引擎、媒体引擎等。其中，编辑引擎可以由业务层的编辑模块调用，执行文本管理等处理。界面绘制引擎可以由视图层的编辑页面调用，执行手写笔笔刷或备忘录视图等内容的绘制和处理。媒体引擎可以由业务层的多媒体模块调用，执行音频录制和音频播放等功能。

如图2所示，数据存储层可以包括实现与其他模块进行通信的数据接口和用于存储数据的数据库。硬件抽象层可以包括显示屏、用于控制麦克风、扬声器等音频设备的音频模块及用于长期存储数据的磁盘。

相关技术中，在用户利用备忘录应用记完笔记后，进行笔记查看时，如果笔记中的录音时间长且文档内容也比较多，需要用户手动定位录音内容和文档内容才能对应显示，操作不够方便，用户体验不高。

针对该问题，本申请实施例提供了一种录音和文档内容的定位显示方法，能够在用户进行笔记查看的过程中，自动定位录音内容和文档内容进行对应显示。

参见图3，图3为本申请实施例提供的录音和文档内容的定位显示方法的一种流程示意图。该方法可应用于图1所示的电子设备，如图3所示，该方法主要包括如下步骤：

步骤S301，显示编辑页面。

本实施例中，所述编辑页面中显示有：录音播放进度条和目标文档。

本实施例中，在目标音频播放过程中，可以执行步骤S302和/或步骤S303。

步骤S302，当录音播放进度条显示播放到目标音频的第一播放时刻时，突出显示第一播放时刻对应的第一文档内容；其中，第一文档内容属于所述目标文档，是在所述第一播放时刻对应的第一录音时间编辑的。

本实施例中，所述第一播放时刻可以为：顺序播放录音的当前播放时刻；或用户通过拖拽或点击所述录音播放进度条选中的位置对应的播放时刻。

例如：按播放录音的顺序，当前播放时刻为00:00:12，则第一播放时刻为00:00:12；若用户将录音播放进度条拖拽到00:02:15，则第一播放时刻为00:02:15；若用户在录音播放进度条上单击或双击了00:02:15对应的位置，则第一播放时刻为00:02:15。

本实施例中，所述编辑中的目标文档至少可以有以下两种方式显示：

一、初始时目标文档模糊显示。

这样，可以通过高亮显示的方式来显示第一播放时刻对应的第一文档内容。

二、初始时目标文档按默认方式显示，例如：文档内容以黑白或无背景色等方式显示。

这样，通过改变颜色或增加背景色的方式突出显示第一播放时刻对应的第一文档内容。

下面以初始时目标文档模糊显示及用户拖拽录音播放进度条为例进行说明。

本申请实施例的一种定位场景参见图4A~图4B。

如图4A所示，图4A为本申请实施例提供的第一定位场景的第一页面示例图。在编辑页面400中，显示有录音播放状态图标410和文档内容420。该录音播放状态图标410包括：结束播放按钮411、播放按钮412、用于表明播放进度的播放进度条413和播放时刻414，以及用于表明有扩展功能的扩展图标415。其中，播放按钮412在录音播放过程中，可以被替换为暂停按钮。播放时刻414，可以以当前播放时刻/总录音时长的形式显示，例如：当前播放时刻是第36秒,总录音时长为2分58秒，则可以显示为00:00:36/00:02:58。另外，扩展功能415可以包括：可选的播放速率，如：0.5倍速率、1倍速率、1.5倍速率等等。

如图4A所示，播放进度条413上还设置有当前播放位置标识416和多个关键录音时刻标识417。在实际应用中，每个关键录音时刻标识417用于表明在该录音时刻用户执行了编辑操作。这样，就为用户选择播放时刻提供了清晰地提示，用户基于关键录音时刻标识417来选择播放时刻更能够有的放矢，减少了播放时刻选择的盲目性。

如图4A所示，本实施例中编辑页面400中的文档内容410可以包括：文字421/422/424、用户手写内容425/426（例如：用户在文字“二十”外手画的圈，用户在文字“和激进主义色”处手画的圈）、图片423等等。

如图4A所示，用户可以通过长按选中播放进度条410上的当前播放位置标识416，再对当前播放位置标识416进行拖拽，来实现拖拽播放进度条410。在拖拽播放进度条410过程中，对应已经播放的录音对应的文档内容421进行高亮显示；未播放的录音对应的文档内容422~426进行模糊显示。例如：用户将当前播放位置标识416从播放时刻00:00:36/00:02:58对应的位置拖拽到播放时刻00:02:10/00:02:58的对应的位置，拖拽后的编辑页面参见图4B。

如图4B所示，在用户拖拽操作结束时，高亮显示拖拽到结束位置对应的播放时刻所对应的文档内容422~426。

在其他实施例中，用户可以通过双击播放进度条413上的目标位置，使得当前播放位置标识416移动到目标位置，并高亮显示目标位置对应的播放时刻及之前所有对应的文档内容。

本实施例中，可以通过在文档内容上增加蒙层的方式对文档内容进行模糊显示，例如：图4A中文档内容422~426就是增加了蒙层的显示效果；在需要突出显示时，去掉蒙层即可 ，例如：图4B中文档内容422~426就是去掉蒙层后的显示效果。

如图3所示，步骤S303，当检测到用户在第一界面中选中第二文档内容时，从所述第二文档内容对应的第二播放时刻开始继续播放目标音频；其中，第二文档内容属于所述目标文档，是在所述第二播放时刻对应的第二录音时间编辑的。

本申请实施例的另一种定位场景参见图5A~图5B，其中，图5A是用户选择文档内容421时的情形；图5B是用户选择文档内容中的图片423时的情形。

如图5A所示，用户在编辑页面400中点击文档内容421后，当前播放位置标识416跳转至文档内容421对应的播放时刻00:00:36/00:02:58对应的位置。

如图5B所示，用户在编辑页面400中点击图片423后，当前播放位置标识416跳转至图片423对应的播放时刻00:01:10/00:02:58对应的位置。此时，图片423及其之前的文档内容均高亮显示。

由上述的实施例可见，应用本申请提供的录音和文档内容的定位方法，在目标音频播放过程中，可以根据音频播放时刻自动定位到对应的文档内容；或者根据用户选择的文档内容自动定位到音频播放时刻。与现有技术完全手动对录音和文档内容进行定位的方式相比，操作更加方便，提高了用户体验。

参见图6，图6为本申请实施例提供的录音和文档内容的定位显示方法的另一种流程示意图。该流程可以包括如下步骤：

步骤S601，在目标音频录制过程中，获得用户的一个或多个编辑操作，进行文档内容编辑。

在本实施例中，可以在备忘录应用中，开启音频录制后，电子设备在录音过程中可以接收用户的一个或多个编辑操作进行文档内容编辑。例如：在录音过程中，用户可以进行输入文字、图片或手写等编辑操作。

步骤S602，获得各个编辑操作对应的录音时间信息及文档内容，生成编辑记录进行保存。

具体的，在获得用户的一个编辑操作时，可以先记录这个编辑操作，然后，获得对应的录音时间，生成该编辑操作对应的包含录音时间信息及编辑的文档内容的编辑记录进行对应保存。

这里的录音时间信息可以是录音的计时时刻，例如：在录音至00:00:36（即第36秒）时，用户通过软键盘输入了文字“现代主义建筑是指二十世纪中叶，在西方建筑界居主导地位的一种建筑思想”，则将00:00:36与这段文字内容进行对应保存。或者，在录音至00:00:59用户进行了图片插入操作，则将00:00:59与插入图片的存储路径等信息对应保存。

在目标音频播放过程中，可以执行步骤S603和/或步骤S604。

步骤S603，在所述目标音频的播放过程中，获得用户选择的第一播放时刻；基于保存的编辑记录，确定第一播放时刻对应的第一文档内容，突出显示所述第一文档内容。

本步骤中，第一播放时刻可以是在检测到用户在播放进度条上拖动操作后，用户结束拖动操作时，播放进度条上位置对应的播放时刻。

在其他实施例中，第一播放时刻也可以是检测到的用户在播放进度条上的点击位置对应的播放时刻。

在得到第一播放时刻后，可以在已保存的编辑记录中查找与所述第一播放时刻相同的第一录音计时时刻。若查找到，则确定所述第一录音计时时刻对应的文档内容为第一文档内容，并在屏幕上突出显示所述第一文档内容。

步骤S604，在所述目标音频的播放过程中，获得用户选择的第二文档内容；基于所述编辑记录，确定第二文档内容对应的第二播放时刻，从所述第二播放时刻开始继续播放音频（即所述目标音频）。

本步骤中，第二文档内容可以是用户在编辑页面中输入点击、长按等操作对应的文档内容。

在得到第二文档内容后，可以在已保存的编辑记录中查找所述第二文档内容，若查找到，则确定所述第二文档内容对应的第二录音计时时刻为第二播放时刻，在屏幕上突出显示所述第二文档内容，并将播放进度条的当前播放时刻跳转至所述第二播放时刻，从所述第二播放时刻开始继续播放目标音频。

由上述的实施例可见，应用本实施例提供的录音和文档内容的定位方法，在目标音频录制过程中，可以保存编辑操作对应的录音时间信息及文档内容；这样，在目标音频播放过程中，可以基于录音时间信息及文档内容的对应关系，根据用户选择的音频播放时刻自动定位到对应的文档内容；或者根据用户选择的文档内容自动定位到音频播放时刻。与现有技术完全手动对录音和文档内容进行定位的方式相比，操作更加方便，提高了用户体验。

图6所示的录音和文档内容的定位显示方法的实施例可以在备忘录应用中实现，具体涉及音频录制过程和音频播放过程（即录音播放过程）。以下分别详细说明：

参见图7A~图7D所示的本申请实施例提供的一种进入录音场景的页面示例图。

如图7A所示，图7A为本申请实施例提供的一种进入录音场景的第一页面实例图，用户需要记笔记时，可以先从电子设备的主页面中点击“备忘录”图标，进入到备忘录的首页面。

如图7B所示，图7B为图7A所示进入录音场景的第二页面实例图，该备忘录首页面中可以显示最近的几条笔记以及笔记创建图标等，用户可以通过点击笔记创建图标，显示编辑页面。

如图7C所示，图7C为图7A所示进入录音场景的第三页面实例图，在创建笔记的情况下，显示编辑页面400，且在编辑页面400上层显示有软键盘710及多个编辑功能图标，包括：清单721、样式722、图片723、语音724和手写图标725。其中，编辑页面400是指显示笔记内容的区域；另外，软键盘710在不允许用户进行键盘输入的情况下可以被隐藏；用户需要录音时点击语音图标724，可以显示语音的可选功能；

如图7D所示，图7D为图7A所示进入录音场景的第四页面实例图，语音的可选功能包括：录音和语音速记。

如果用户选择录音功能，则开始录音，在编辑界面400中显示录音状态图标，且在录音过程中可以通过编辑功能图标选择编辑功能进行文本编辑。如果用户选择语音速记功能，则隐藏软键盘和编辑功能图标，开始录音并实时对录制的语言进行语音识别，将转换的文字显示在编辑页面400中。

在用户选择录音功能的情况下，进入本申请实施例提供的录音和文档内容的定位显示方法的音频录制过程，也就是录音过程。

参见图8，图8为本申请实施例提供的一种录音流程示意图。如图8所示，本流程主要涉及到图2所示软件结构框图中的下列部分：视图层的编辑页面；业务层中的音频录制模块和音文同步模块；数据存储层中的数据库；硬件抽象层中的磁盘等。

如图8所示，该流程主要包括如下步骤：

步骤S801，检测到用户点击编辑页面上录音按钮的操作。

步骤S802，编辑页面处理模块向音频录制模块发送录音指令。

本领域技术人员可以理解，编辑页面的显示及编辑功能可以由预设的编辑页面处理模块来实现。

步骤S803，音频录制模块开始录音。

本步骤中，音频录制模块还可以向编辑页面处理模块发送响应消息，通知编辑页面处理模块开始录音；编辑页面处理模块收到该通知后，开始对录音进行计时，例如：以秒为单位进行计时。

具体的，用户可以点击图7D中的录音功能按钮，开始录音。

参见图9，图9为本申请实施例提供的第一种录音场景页面图。此时，编辑页面400中可以显示录音状态图标900，并可以在编辑页面上层显示各个编辑功能图标，包括：清单、样式、图片、语音和手写图标，表明在录音的过程中可以进行编辑。如图9所示，该录音状态图标900包括停止录音按钮901、录音状态显示条902和录音计时时刻903。

步骤S804，检测到用户在编辑页面上的编辑操作。

步骤S805，编辑页面处理模块获得各个编辑操作对应的编辑信息。

本实施例中，编辑信息可以包括：录音时间信息、文档内容及文档内容在编辑页面对应的画布中的位置信息。

本实施例中，编辑操作可以包括：键盘输入、手写输入和图片插入中的一种或多种。这样，键盘输入对应的文档内容就是键盘输入的文本内容；手写输入对应的文档内容，可以是基于手写输入的轨迹生成的位图的存储路径信息或文件名称；图片插入对应的文档内容，可以是插入图片的存储路径信息或文件名称。这里的存储路径信息都指在磁盘中的存储路径。

本实施例中，可以在检测到编辑操作时，获得当前的录音计时时刻，作为该编辑操作对应的录音时间信息。

步骤S806a，编辑页面处理模块将所述编辑信息发送至音文同步模块。

在实际应用中，编辑页面处理模块可以按预设的录音时间间隔，获得每一录音时间间隔的起始录音计时时刻、该录音时间间隔中检测到的一个或多个编辑操作、各个编辑操作对应的文档内容及各个文档内容在编辑页面对应的画布中的位置信息，分别发送至音文同步模块，由音文同步模块进行保存；每一条编辑记录与一个录音计时时刻相对应。

例如，可以以1秒为预设时间间隔，将这1秒中检测到的一个或多个编辑操作的录音时间信息、文档内容以及文档内容在编辑页面对应的画布中的位置信息，作为一条编辑记录。

例如：在录音计时时刻00:00:36~00:00:37这1秒的时间内，通过键盘输入了 “现代主义建筑是指二十世纪中叶”的文字，并在文字“二十”的位置手写了一个圈用来做重点标记。编辑页面处理模块可以先根据用户手写的轨迹绘制出位图，并将该位图存储至磁盘中，得到该位图的存储路径信息。然后，将录音计时时刻00:00:36与“现代主义建筑是指二十世纪中叶”的文字以及这些文字在编辑页面对应的画布中的位置信息、该位图的存储路径信息及该位图在编辑页面对应的画布中的位置信息发送至音文同步模块。

本实施例中，可以按预设的时间间隔，将每一时间间隔中检测到的一个或多个编辑操作的录音计时时刻、文档内容以及文档内容在编辑页面对应的画布中的位置信息发送至音文同步模块。本实施例中的预设的时间间隔可以与录音计时单位相同，例如：1秒，以便于用户记忆。而且这种方式在保证所有编辑操作能够被保存的前提下，不会对录音过程造成过多的影响。

在其他实施例中，也可以基于用户编辑操作的触发时间，来确定录音计时时刻。例如：当前检测到用户的图片插入操作，则确定当前录音计时时刻为该图片插入操作对应的录音计时时刻。

实际应用中，编辑页面对应的画布中的位置信息，可以通过调用系统提供的API实现。

步骤S806b，音文同步模块基于接收到的编辑信息，生成编辑记录进行保存。

本步骤中，音文同步模块可以基于接收到的编辑信息，生成包含：录音时间信息、文档内容及文档内容在编辑页面对应的画布中的位置信息的编辑记录进行保存。

实际应用中，文档内容可以以元素的形式进行保存，比如：可以将1秒钟内容用户通过键盘输入的至少一个文字作为一个元素；将用户手写的内容，如用户通过手写工具画的一个圈作为一个元素；用户插入的一张图片作为一个元素；或者，清单功能对应的清单元素等。

在生成和保存编辑记录时，可以将各条编辑记录以键-值（key-value）的形式保存至一个预先设置的Map集合中。具体的，可以将每条编辑记录中的录音计时时刻作为key，该编辑记录中的各个编辑操作对应的元素，及各个元素在编辑页面对应的画布中的位置信息作为value，保存至Map集合中。在录音过程中，可以每生成一条编辑记录，就将其保存至Map集合中。本实施例中，将各个元素在编辑页面对应的画布中的位置信息作为value的一部分保存在了Map集合中。这样，在后续根据用户选择的文档内容自动定位到音频播放时刻时，可以直接基于编辑记录中文档内容的位置信息定位到音频播放时刻，无需将用户选择的文档内容与笔记中所有文档内容进行内容匹配，进一步加快了定位时间。在其他实施例中，如果对定位时间要求不高，也可以不在Map集合中保存各个元素在编辑页面对应的画布中的位置信息。

这样，Map集合中实际保存了基于固定时间间隔（如1秒）的录音计时时刻与1个或多个编辑操作的映射关系，具体可以包括：

1）键盘输入操作与输入第一个文字对应的录音计时时刻之间的映射关系；

2）图片插入操作与图片插入对应的录音计时时刻之间的映射关系；

3）手写输入操作与笔画第一笔对应的录音计时时刻之间的映射关系，该录音计时时刻可以是根据第一笔的落笔和抬笔的时间确定的，例如：可以是抬笔对应的录音计时时刻。

另外，对于文本元素，其存储的格式可以为：类型+文字编码；对于图片元素（包括用户手写工具绘制的图形和输入的图片），其存储格式可以为：类型+存储路径+图片文件名。

在本实施例中，如果当前编辑操作中包括手写输入操作，则编辑页面处理模块可以先将手写输入对应的位图存储至磁盘，得到该位图在磁盘中的存储路径信息。

这种情况下，编辑记录中的手写输入操作对应的录音时间信息，可以是手写笔画第一笔对应的录音计时时刻，编辑记录中的手写输入操作对应的文档内容，可以是手写输入对应的位图在磁盘中的存储路径信息。

如果当前编辑操作中包括图片插入操作，则编辑页面处理模块可以获得该图片在磁盘中的存储路径信息。

这种情况下，音文同步模块生成的编辑记录中的图片插入操作对应的录音时间信息，是该图片显示在编辑界面时对应的录音计时时刻，编辑记录中的图片插入操作对应的文档内容，可以是该图片在磁盘中的存储路径信息。

步骤S807，检测到用户点击停止录音按钮。

如图9所示，用户可以点击编辑页面400上显示的录音状态图标900上的停止录音按钮901。

步骤S808，编辑页面处理模块向音频录制模块发送停止录音指令。

步骤S809a，音频录制模块停止录音并生成录音文件。

步骤S809b，音频录制模块将录音文件存储至磁盘。

本步骤中，音频录制模块还可以向编辑页面处理模块发送响应消息，该响应消息中，可以包括录音文件的文件名称在磁盘中的存储路径信息。

编辑页面处理模块可以将录音文件的文件名称和在磁盘中的存储路径信息发送至音文同步模块。

步骤S810，用户点击笔记完成图标。

如图9所示，用户可以点击编辑页面400上显示的用于表明笔记完成的对勾图标910。

在其他实施例中，用户可以在未点击停止录音按钮的情况下，直接点击笔记完成图标。这种情况下，编辑页面处理模块先执行上述步骤S808~S809b，在步骤S808~S809b执行完后，执行步骤S811。

步骤S811，编辑页面处理模块向音文同步模块发送笔记完成指令。

本实施例中，编辑页面处理模块可以为本次笔记生成笔记标识，并将本次笔记的笔记内容发送至数据库进行存储。其中，笔记内容可以包括：所有用户输入的文本、所有插入图片的文件名称及存储路径信息、所有手写输入对应的位图的文件名称及存储路径信息，以及录音文件的文件名称及存储路径信息。

本步骤中，笔记完成指令中可以包括笔记标识。

步骤S812，音文同步模块将本次笔记的所有编辑记录发送至数据库与笔记内容对应存储。

本实施例中，音文同步模块将本次笔记的所有编辑记录生成一个编辑记录集合，用笔记标识来命名。这样，通过笔记标识实现了编辑记录集合与笔记内容的对应存储。

这样，用户查看笔记内容时，编辑页面处理模块可以从数据库获得笔记内容，从笔记内容中获得录音的存储路径进行录音播放，并从笔记内容中获得录音过程中编辑的文档内容进行显示；并根据编辑记录对当前播放时刻或用户选择的播放时刻对应的文档内容进行突出显示。

本实施例中进一步将文档内容在编辑页面对应的画布中的位置信息保存在编辑记录中。这样，在后续根据用户选择的文档内容自动定位到音频播放时刻时，可以直接基于编辑记录中文档内容的位置信息定位到音频播放时刻，无需将用户选择的文档内容与笔记中所有文档内容进行内容匹配，进一步加快了定位时间。

参见图10，图10为本申请实施例提供的另一种录音流程示意图。该流程在图8所示的录音流程基础上做了进一步细化，主要包括如下步骤：

步骤S1001~ 步骤S1003，可以与图8所示步骤S801~步骤S803相同，这里不再赘述。

步骤S1004，检测到用户在编辑页面上的输入文字操作。

参见图11，图11为本申请实施例提供的第二录音场景页面图。如图11所示，在录音过程中，用户可以通过软键盘710输入文本。这里，用户可以通过单击或双击图11所示的编辑页面400来显示软键盘710。

步骤S1005，编辑页面处理模块获得输入文字操作对应的录音时间信息、文档内容以及文档内容在编辑页面对应的画布中的位置信息，作为编辑信息。

与图8所示实施例一致，这里的录音时间信息可以是录音的计时时刻。

本步骤中，可以按预设时间间隔，如1秒时间间隔。将1秒钟内用户的输入操作作为一次输入操作，将这次操作输入的一个或多个文字，作为对应的文档内容，获得该文档内容在编辑页面对应的画布中的位置信息。具体的，如果输入的是一个文字，则获得该文字在编辑页面对应的画布中的位置信息；如果输入的是多个文字，则获得这几个文字中第一个文字在编辑页面对应的画布中的位置信息。

本领域技术人员可以理解，如果用户输入文字操作的总时长超过1秒钟（即预设时间间隔），则会生成多条编辑记录，每条编辑记录对应1秒钟。

步骤S1006a，编辑页面处理模块将所述编辑信息发送至音文同步模块。

步骤S1006b，音文同步模块基于接收到的编辑信息，生成编辑记录进行保存。

步骤S1007,检测到用户在编辑页面上的手写输入操作。

具体的，参见图12A~图12C所示的本申请实施例提供的第三录音场景页面示例图。如图12A所示，图12A为本申请实施例提供的第三录音场景的第一页面示例图，用户在录音计时时刻903为00:00:56时点击编辑页面400上的“手写”功能图标725。如图12B所示，图12B为图12A所示第三录音场景的第二页面示例图，“手写”功能图标被点击后，在录音计时时刻1203为00:00:57时显示手写工具图标1210，用户可以利用手写工具1210进行手写编辑。如图12C所示，图12C为图12A所示第三录音场景的第三页面示例图，经过用户手写编辑，在录音计时时刻903为00:00:58时完成了在编辑页面400中文字“二十”外画圈的操作。 编辑页面处理模块基于用户手写的轨迹信息绘制出文字“二十”外画的圈的位图，并将该位图存储至磁盘。

步骤S1008,编辑页面处理模块获得手写操作对应的录音时间信息、位图的存储路径信息及位图在编辑页面对应的画布中的位置信息，作为编辑信息。

本实施例中，录音时间可以是上述三个与手写输入操作相关的时间之一。例如：可以是图12A中用户点击编辑页面400上的“手写”功能图标725的录音计时时刻00:00:56；或者是图12B显示手写工具图标1210的录音计时时刻00:00:57；或者是用户在文字“二十”外画了圈完成时的录音计时时刻00:00:58。实际应用中，为了保证用户完成了手写操作，可以选择用户完成手写操作的录音计时时刻，作为对应的录音时间。

另外，在其他实施例中，用户在编辑页面400上的一次手写操作画了多个笔画，则录音时间可以是用户画完第一笔的录音计时时刻。

本步骤中，手写操作对应的录音时间信息可以是用户画第一笔时对应的录音计时时刻。

步骤S1009a, 编辑页面处理模块将所述编辑信息发送至音文同步模块。

步骤S1009b，音文同步模块基于接收到的编辑信息，生成编辑记录进行保存。

步骤S1010，检测到用户在编辑页面的图片插入操作。

如前所述，输入图片可以是用户从已存储在磁盘中的图片中选择，也可以通过摄像头拍摄。

具体的，参见图13A~图13C所示的本申请实施例提供的第四录音场景页面示例图。如图13A所示，图13A为本申请实施例提供的第四录音场景的第一页面示例图，用户在录音计时时刻903为00:01:01时点击编辑页面400上的“图片”功能图标723。如图13B所示，“图片”功能图标被点击后，如果在录音计时时刻903为00:01:02时显示图片插入工具图标1300，用户可以选择“拍照”、“文档扫描”、“卡证收藏”及“从图库中选择”几种方式来输入图片；图13B中，以用户选择“从图库中选择”的方式为例。如图13C所示, 图13C为图13A所示第四录音场景的第三页面示例图，在录音计时时刻903为00:01:10时完成了图片插入操作，用户选择的图片423显示在编辑页面400中。

步骤S1011，编辑页面处理模块获得图片插入操作对应的录音时间信息、插入的图片的存储路径信息及该图片在编辑页面对应的画布中的位置信息，作为编辑信息。

本实施例中，录音时间可以是上述三个与图片插入操作相关的时间之一。例如：可以是图13A中用户点击编辑页面400上的“图片”功能图标723的录音计时时刻00:01:01；或者是图13B显示图片插入工具图标1310的录音计时时刻00:01:02；或者是图片插入操作完成时的录音计时时刻00:01:10。实际应用中，为了保证用户完成了图片插入操作，可以选择用户完成图片插入操作的录音计时时刻，作为对应的录音时间。

本实施例中，如果用户选择“拍照”，则将用户通过电子设备的摄像头拍摄一张照片作为插入的图片，在拍摄完成后获得该照片的存储路径信息，作为文档内容；或者，如果用户选择“从图库中选择”，则将用户从已存储在磁盘中的图片中选择的一张图片作为插入的图片，获得该图片的存储路径信息，作为文档内容。

步骤S1012a, 编辑页面处理模块将所述编辑信息发送至音文同步模块。

步骤S1012b，音文同步模块基于接收到的编辑信息，生成编辑记录进行保存。

后续，用户还可以在编辑页面进行输入文字操作、手写操作和图片插入等操作。

参见图14，图14为本申请实施例提供的第五录音场景页面图。如图14所示，用户在输入图片后，通过输入文字操作输入了文本424和通过手写操作绘制了圈426。

后续，可以执行图8所示实施例中的步骤S807~步骤S812。这里不再重复。

本领域技术人员可以理解，图10所示仅为本申请实施例所列举的一种录音过程可能的实现方式，并不应当将其作为本申请保护范围的限制。

笔记完成后，用户可以进行笔记查看。在查看笔记时，用户可以播放笔记中的录音。

参见图15A~图15B所示的本申请实施例提供的一种进入录音播放场景的页面示例图。

如图15A所示，图15A为本申请实施例提供的一种进入录音播放场景的第一页面示例图，用户可以在备忘录首页面中显示的最近的几条笔记中，选择一个笔记（例如笔记1），可以显示编辑页面400；在用户选择的笔记包括录音和文档内容的情况下，如图15B所示，图15B为图15A所示进入录音播放场景的第二页面示例图。在编辑页面400中，显示有录音播放状态图标410和文档内容420。图15B为图4A所示编辑页面的初始状态。参见图4A，图15B与图4A所示编辑页面400的区别在于：图15B中录音尚未播放，所有文档内容420均为模糊显示，而图4A是录音已经播放，且文档内容421已经高亮显示。

本领域技术人员可以理解，在其他实施例中，在录音未播放的情况下，编辑页面400中的文档内容420可以正常显示，例如：黑白形式或无背景色显示。在录音播放过程中，可以根据当前的播放时刻或用户通过播放进度条410选择的播放时刻，将该播放时刻对应的文档内容420进行改变颜色或增加背景色等方式的突出显示。

本申请实施例中，用户在查看笔记过程中，可以有两种方式的定位：

方式一、通过用户选择的录音播放时刻来定位对应的文档内容；

方式二、通过用户选择的文档内容来定位对应的录音播放时刻。

本申请实施例中，用户在查看笔记过程中定位的方式和次数由用户自行确定，没有限定。

以下，对本申请实施例提供的录音和文档内容的定位方法中，具体的定位过程进行详细说明。

参见图16，图16为本申请实施例提供的一种录音播放流程示意图。

如图16所示，本流程主要涉及到图2所示软件结构框图中的下列部分：视图层的编辑页面；业务层中的音频播放模块和音文同步模块；数据存储层中的数据库；硬件抽象层中的磁盘等。

如图16所示，该流程主要包括如下步骤：

步骤S1601，检测到用户点击编辑页面上显示的播放按钮。

参见图15B和图4A，用户可以点击录音播放状态图标410中的播放按钮412。

本实施例中，可以在用户点击编辑页面400上显示的播放按钮412之前，在显示编辑页面400时，将用户选择的笔记的笔记内容和编辑记录从数据库和/或磁盘中加载至内存中。

本实施例中，笔记内容可以包括：所有用户输入的文本、所有插入图片的文件名称及存储路径信息、所有手写输入对应的位图的文件名称及存储路径信息，以及录音文件的文件名称及存储路径信息。每条编辑记录可以包含：录音时间信息、文档内容及文档内容在编辑页面对应的画布中的位置信息。

本实施例中，笔记内容可以包括用户记笔记过程中录制的音频文件的存储路径信息，以及在录音过程中保存的所有文档内容。

步骤S1602，编辑页面处理模块向音频播放模块发送录音播放指令。

步骤S1603，音频播放模块开始播放录音。

步骤S1604,接收用户对播放进度条进行拖拽操作。

步骤S1605,编辑页面处理模块获得拖拽结束的位置对应的录音时间信息，确定第一播放时刻。

本实施例中，编辑页面处理模块可以计算拖拽结束的位置占整个播放进度条的百分比，根据录音的总时长，计算出具体的录音计时时刻，作为第一播放时刻。本实施例中，录音时以秒为单元进行计时。相应的，具体的第一播放时刻也是以秒为单位。

在其他实施例中，可以获得用户在播放进度条上的点击位置，将点击位置对应的播放时刻作为第一播放时刻。

步骤S1606, 编辑页面处理模块将第一播放时刻发送至音文同步模块。

步骤S1607a, 音文同步模块从保存的编辑记录中获得第一播放时刻对应的第一文档内容在编辑页面对应的画布中的第一位置信息。

步骤S1607b，音文同步模块将第一文档内容在编辑页面对应的画布中的第一位置信息发送至编辑页面处理模块。

如前所述每条编辑记录中，都保存了录音计时时刻和其对应的文档内容以及文档内容在编辑页面对应的画布中的位置信息。

本步骤中，音文同步模块可以在所有的编辑记录中查找与所述第一播放时刻相同的第一录音计时时刻，若查找到，则确定所述第一录音计时时刻对应的文档内容为第一文档内容，将第一文档内容在编辑页面对应的画布中的第一位置信息发送至编辑页面处理模块。

步骤S1608, 编辑页面处理模块基于所述第一文档内容的第一位置信息，在屏幕上突出显示所述第一文档内容。

实际应用中，在录音未播放的情况下，如图15B所示，编辑页面400中的文档内容410可以模糊显示。在录音播放过程中，参见图4A~图4B,可以根据录音的播放时刻，将播放时刻对应的文档内容420进行高亮显示。

参见图17A~图17D所示本申请实施例提供的第三定位场景的页面示例图。该定位场景中，文档内容仅包括手写内容。

在笔记中包括录音，且文档内容仅有手写内容的情况下，如图17A~图17D所示，在拖拽播放进度条时，在录音过程中输入编辑页面400的手写内容可以按各个笔画的手写时间的先后顺序依次高亮显示。

例如：某个笔记中包括录音和文档内容，其中，录音总时长为30秒，文档内容仅包含3条手写笔画线条，3条手写笔画线条对应的录音计时时刻分别为第8秒、第9秒和第10秒。这样，如图17A所示，在播放时刻414为00:00:07/00:00:30时,手写笔画线条1、手写笔画线条2和手写笔画线条3，均进行模糊显示。如图17B所示，从播放时刻414为00:00:08/00:00:30开始,手写笔画线条1高亮显示，手写笔画线条2和手写笔画线条3仍为模糊显示。如图17C所示，从播放时刻414为00:00:09/00:00:30开始,手写笔画线条1和手写笔画线条2高亮显示，手写笔画线条3仍为模糊显示。如图17D所示，从播放时刻414为00:00:10/00:00:30开始, 手写笔画线条1、手写笔画线条2和手写笔画线条3，均进行高亮显示。

如图16所示，步骤S1609, 检测到用户点击编辑页面上显示的第二文档内容。

步骤S1610,编辑界面处理模块获得用户点击的第二文档内容在编辑页面对应的画布中的第二位置信息。

步骤S1611, 编辑界面处理模块将获得的第二位置信息发送至音文同步模块。

步骤S1612,音文同步模块从保存的笔记内容中获得该第二位置信息对应的第二播放时刻。

本实施例中，在得到第二文档内容后，可以在已保存的编辑记录中查找所述第二位置信息，若查找到，则确定所述第二位置信息对应的第二录音计时时刻为第二播放时刻。

步骤S1613, 音文同步模块将所述第二播放时刻发送至编辑页面处理模块。

步骤S1614,编辑页面处理模块在编辑页面上突出显示所述第二文档内容，并将播放进度条的当前播放时刻跳转至所述第二播放时刻，从所述第二播放时刻开始继续播放目标音频。

本实施例中，用户点击的第二文档内容可以是文本、手写内容或图片。

本领域技术人员可以理解，图16所示仅为本申请实施例所列举的一种录音播放过程可能的实现方式，并不应当将其作为本申请保护范围的限制。

参见图18，图18为本申请实施例提供的另一种录音播放流程示意图。

如图18所示，该流程主要包括如下步骤：

步骤S1801，用户在备忘录的首页面中点击选中的笔记。

如图15A所示，备忘录的首页面可以显示多个用户笔记。用户可以通过点击任一笔记的图标，来显示该笔记的具体内容（例如：图15A中的笔记1）。

步骤S1802，编辑页面处理模块生成针对选中笔记的加载指令发送至音文同步模块。

步骤S1803a，音文同步模块从数据库中获得选中笔记的笔记内容。

如前所述，笔记内容可以包括：所有用户输入的文本、所有插入图片的文件名称及存储路径信息、所有手写输入对应的位图的文件名称及存储路径信息，以及录音文件的文件名称及存储路径信息。每条编辑记录可以包含：录音时间信息、文档内容及文档内容在编辑页面对应的画布中的位置信息。

步骤S1803b，音文同步模块从磁盘中获得录音文件、手写内容及插入图片。

本步骤中，如果笔记内容中即包括录音又包括文档内容。音文同步模块可以基于笔记内容中音频文件的存储路径信息，从磁盘中获得录音文件。

如果文档内容中，除了文本还包括手写内容和插入图片，则进一步基于笔记内容中的各条编辑记录中，手写内容的位图对应的存储路径信息和插入图片对应的存储路径信息，获得手写内容和插入图片。

步骤S1804，音文同步模块将录音文件、文本内容、手写内容的位图及插入的图片加载至内存中。

本步骤中，可以将该录音文件、键盘输入的文本内容、手写内容和插入图片加载到内存中。

步骤S1805，编辑页面处理模块在笔记内容包含录音和文档内容的情况下，显示录音播放状态图标和文档内容。

如图15B所示，本步骤中可以显示录音播放状态图标410和文档内容第一页的内容；并且在录音未播放时，所有的文档内容420可以模糊显示。

本实施例中，在录音开始播放后，可以根据当前的播放时刻，高亮显示对应的文档内容。

步骤S1806，用户点击编辑页面上显示的播放按钮。

参见图15B，用户可以点击录音播放状态图标410中的播放按钮412。

步骤S1807，编辑页面处理模块向音频播放模块发送录音播放指令。

步骤S1808，音频播放模块开始播放录音。

步骤S1809，编辑页面处理模块实时获得当前播放时刻。

步骤S1810，编辑页面处理模块将当前播放时刻发送至音文同步模块。

步骤S1811, 音文同步模块从笔记内容中获得当前播放时刻对应的当前文档内容。

步骤S1812，音文同步模块将当前文档内容在编辑页面对应的画布中的当前位置信息发送至编辑页面处理模块。

本步骤中，具体可以从所述编辑记录中，查找与当前播放时刻相同的当前录音计时时刻，若查找到，则确定当前录音计时时刻对应的文档内容为当前文档内容，并从编辑记录中获得当前文档内容在编辑页面对应的画布中的当前位置信息。

步骤S1813，编辑页面处理基于所述当前文档内容的当前位置信息，在屏幕上突出显示所述当前文档内容。

实际应用中，上述步骤S1809~步骤S1813可以循环执行，可以呈现出逐一高亮显示文档内容的动态效果。

与图16所示实施例一致，本实施例中，在后续的录音播放过程中，编辑页面处理模块可以接收用户对播放进度条进行拖拽操作，进而执行图16中步骤S1605~步骤S1608。编辑页面处理也可以接收用户在编辑页面上对文档内容的点击操作，进而执行图16中步骤S1610~步骤S1614。这里不再重复说明。

本领域技术人员可以理解，图18所示仅为本申请实施例所列举的一种录音播放过程可能的实现方式，并不应当将其作为本申请保护范围的限制。

参见图19，图19为本申请实施例提供的录音和文档内容的定位显示方法的一种实现方式示意图。本申请实施例提供的录音和文档内容的定位显示方法可以通过对编辑页面（EditorFragment）和音文同步控制器（BeatsController）的代码进行改进的方式来实现。

具体的，如图19所示，本实施例通过编辑页面（EditorFragment）和音文同步控制器（BeatsController）之间的相互配合来实现录音和文档内容的定位；其中，音文同步控制器就是前述音文同步模块的一种具体的实现方式。

本实施例中，编辑页面（EditorFragment）可以是指编辑页面的实现代码，也就是前述的编辑页面处理模块的一种具体实现方式。

其中，编辑页面（EditorFragment）可以记录用户针对文档内容的不同元素的操作行为，可以称为操作动作(Step)。如图19所示，针对文本元素（TextNote），在每次输入时记录一个文本操作行为；针对清单元素（Bullet），在每次新建清单时记录一个清单动作；针对图片元素（Attachment），在每次新建图片（或插入图片）时记录一个图片动作；针对手写元素（HandWrite）,在书写时记录一个手写动作。

同时，编辑页面（EditorFragment）可以通过笔记编辑音频控制器（NoteEditorAudioController）对录音信息进行控制。具体可以通过播放进度条（TagSeekBar）、播放按钮及暂停按钮等，对录音和播放进行控制。这样，编辑页面（EditorFragment）可以按预设的时间间隔（如1秒钟），将该间隔中检测到的一个或多个编辑动作与录音的计时时刻（以秒为单位计时）进行映射；并将录音计时时刻、该编辑动作对应的文档内容以及文档内容在编辑页面对应的画布中的位置信息，作为一条编辑记录发送至音文同步控制器（BeatsController）。

如图19所示，音文同步控制器（BeatsController）中的音文同步执行器（PerformConductor），调用保存音文同步数据类（PerformDate），保存将从编辑页面（EditorFragment）接收的各个编辑记录保存至预设的Map集合中，并执行音文同步调度功能。

本实施例中，音文同步调度主要指上述的两种方式的定位：方式一、通过用户选择的录音播放时刻来定位对应的文档内容；方式二、通过用户选择的文档内容来定位对应的录音播放时刻。具体的，用户选择的录音播放时刻，从保存的Map集合中确定出对应的文档内容，通知给编辑页面（EditorFragment），编辑页面（EditorFragment）按通知将对应的文档内容进行高亮显示。对于方式二：音文同步控制器（BeatsController）接收编辑页面（EditorFragment）发送的用户选择的文档内容的位置信息，从保存的Map集合中确定出对应的录音播放时刻，通知给编辑页面（EditorFragment），编辑页面（EditorFragment）按通知从对应的录音播放时刻开始播放录音。

如图19所示，本实施例中，Map集合可以是以动作为索引的编辑记录列表（Map<int,List<Steps>>）。这样，音文同步控制器（BeatsController）进行音文同步调度的内容就是保存在Map集合中的各条编辑记录。其中，动作具体指备忘录应用常有的控件动作（ViewSteps）。控件动作（ViewSteps）具体可以包括：元素动作（ElementSteps）和手写动作（HandWriteSteps）；元素动作（ElementSteps）可以包括：生成输入数据（InputData）的索引数据的文本元素动作（TextNoteSteps）、清单元素动作（BulletSteps）以及图片元素动作（AttachmentSteps）。

本领域技术人员可以理解，图19所示仅为本申请实施例所列举的一种实现方式，并不应当将其作为本申请保护范围的限制。

具体实现中，本申请还提供一种计算机存储介质，其中，该计算机存储介质可存储有程序，其中，在所述程序运行时控制所述计算机可读存储介质所在设备执行上述实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体（英文：read-onlymemory，简称：ROM）或随机存储记忆体（英文：random access memory，简称：RAM）等。

具体实现中，本申请实施例还提供了一种计算机程序产品，所述计算机程序产品包含可执行指令，当所述可执行指令在计算机上执行时，使得计算机执行上述方法实施例中的部分或全部步骤。

本申请实施例中，“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示单独存在A、同时存在A和B、单独存在B的情况。其中A，B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项”及其类似表达，是指的这些项中的任意组合，包括单项或复数项的任意组合。例如，a，b和c中的至少一项可以表示：a, b, c, a-b,a-c, b-c,或a-b-c，其中a, b, c可以是单个，也可以是多个。

本领域普通技术人员可以意识到，本文中公开的实施例中描述的各单元及算法步骤，能够以电子硬件、计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本发明所提供的几个实施例中，任一功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（read-only memory，简称ROM）、随机存取存储器（random access memory，简称RAM）、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。本发明的保护范围应以所述权利要求的保护范围为准。

Claims (23)

1.一种录音和文档内容的定位方法，其特征在于，应用于电子设备，包括：

显示编辑页面，所述编辑页面中显示有：录音播放进度条和目标文档；

当录音播放进度条显示播放到目标音频的第一播放时刻时，突出显示第一播放时刻对应的第一文档内容；其中，第一文档内容属于所述目标文档，是在所述第一播放时刻对应的第一录音时间编辑的；和/或，

当检测到用户在编辑页面中选中第二文档内容时，从所述第二文档内容对应的第二播放时刻开始继续播放目标音频；其中，第二文档内容属于所述目标文档，是在所述第二播放时刻对应的第二录音时间编辑的。

2.根据权利要求1所述的方法，其特征在于，

所述编辑页面中的目标文档初始时为模糊显示；

所述突出显示第一播放时刻对应的第一文档内容，包括：高亮显示第一播放时刻对应的第一文档内容。

3.根据权利要求1所述的方法，其特征在于，

所述编辑页面中的目标文档内容初始按默认方式显示；

所述突出显示第一播放时刻对应的第一文档内容，包括：通过改变颜色或增加背景色的方式突出显示第一播放时刻对应的第一文档内容。

4.根据权利要求1所述的方法，其特征在于，该方法还包括：

当检测到用户在第一界面中选中第二文档内容时，突出显示第二文档内容。

5.根据权利要求1所述的方法，其特征在于，

所述第一播放时刻为：顺序播放录音的当前播放时刻；或用户通过拖拽或点击所述录音播放进度条选中的位置对应的播放时刻。

6.根据权利要求1所述的方法，其特征在于，该方法还包括：

在所述目标音频的录制过程中，获得用户的一个或多个编辑操作，对文档内容进行编辑；

获得各个编辑操作对应的录音时间信息及文档内容，生成编辑记录进行保存；

所述当播放到目标音频的第一播放时刻时，突出显示第一播放时刻对应的第一文档内容的步骤，包括：

基于显示的录音播放进度条，获得用户选择的第一播放时刻；

基于保存的编辑记录，确定第一播放时刻对应的第一文档内容，突出显示所述第一文档内容；

所述当检测到用户在第一界面中选中第二文档内容时，从所述第二文档内容对应的第二播放时刻开始继续播放目标音频的步骤，包括：

获得用户选择的第二文档内容；基于所述编辑记录，确定第二文档内容对应的第二播放时刻，从所述第二播放时刻开始继续播放目标音频。

7.根据权利要求6所述的方法，其特征在于，

所述获得各个编辑操作对应的录音时间信息及文档内容，生成编辑记录进行保存，包括：

获得各个编辑操作对应的录音时间信息、文档内容以及文档内容在编辑页面对应的画布中的位置信息，生成编辑记录进行保存；

所述基于保存的编辑记录，确定第一播放时刻对应的第一文档内容，突出显示所述第一文档内容，包括：

基于保存的编辑记录，确定第一播放时刻对应的第一文档内容及第一文档内容在编辑画布中的第一位置信息；

在编辑页面中所述第一位置信息对应的第一位置上，突出显示所述第一文档内容；

所述基于所述编辑记录，确定第二文档内容对应的第二播放时刻，从所述第二播放时刻开始继续播放音频，包括：

获得用户在编辑页面选择的第二文档内容在所述画布中的第二位置；

基于所述编辑记录，确定所述第二位置对应的录音时刻，作为第二播放时刻；

从所述第二播放时刻开始继续播放音频。

8.根据权利要求7所述的方法，其特征在于：

采用如下步骤开启目标音频的录制：

在检测到编辑页面中的录音按钮被选中后，开始目标音频的录制并对录音进行计时；

所述编辑操作对应的录音时间信息为：该编辑操作对应的录音计时时刻；

所述获得各个编辑操作对应的录音时间信息、文档内容以及文档内容在编辑页面对应的画布中的位置信息，生成编辑记录进行保存的步骤，包括：

按预设的录音时间间隔，获得每一录音时间间隔的起始录音计时时刻、该录音时间间隔中检测到的一个或多个编辑操作、各个编辑操作对应的文档内容及各个文档内容在编辑页面对应的画布中的位置信息，分别生成编辑记录进行保存；每一条编辑记录与一个录音计时时刻相对应。

9.根据权利要求8所述的方法，其特征在于：

所述录音时间间隔与所述录音计时的计时单位相同。

10.根据权利要求8所述的方法，其特征在于：

所述编辑操作，包括：键盘输入、手写输入和图片插入中的一种或多种；

所述键盘输入操作对应的文档内容，包括：所述预设的录音时间间隔中，用户通过键盘输入的文本内容；所述手写输入操作对应的文档内容，包括：基于手写输入的轨迹生成的位图的存储路径信息；所述图片插入操作对应的文档内容，包括：插入的图片的存储路径信息；

所述键盘输入操作对应的录音时间信息为：用户通过键盘输入的文本内容中第一个文字对应的录音计时时刻；所述手写输入操作对应的录音时间信息为：笔画第一笔对应的录音计时时刻；所述图片插入操作对应的录音时间信息为：图片插入操作对应的录音计时时刻。

11.根据权利要求8所述的方法，其特征在于，

在检测到编辑页面中的录音按钮被选中后，还包括：

在编辑页面中显示录音状态图标，该录音状态图标包括：停止录音按钮、录音状态显示条和录音计时时刻。

12.根据权利要求7所述的方法，其特征在于，

所述基于显示的录音播放进度条，获得用户选择的第一播放时刻，包括：

接收用户对播放进度条的拖拽操作或点击操作；

获得拖拽操作结束时的播放进度条的目标位置或点击操作对应的目标位置，基于所述目标位置在整个播放进度条的占比和目标音频的总时长，计算出对应的录音计时时刻，作为第一播放时刻。

13.根据权利要求12所述的方法，其特征在于，

所述基于保存的编辑记录，确定第一播放时刻对应的第一文档内容，突出显示所述第一文档内容，包括：

从保存的编辑记录中，获得第一播放时刻对应的第一文档内容在编辑页面对应的画布中的第一位置信息；

基于所述第一文档内容的第一位置信息，在屏幕上突出显示所述第一文档内容。

14.根据权利要求13所述的方法，其特征在于，

所述从保存的编辑记录中，获得第一播放时刻对应的第一文档内容在编辑页面对应的画布中的第一位置信息，包括：

从已保存的编辑记录中查找与所述第一播放时刻相同的第一录音计时时刻，若查找到，则确定所述第一录音计时时刻对应的文档内容为第一文档内容，并从编辑记录中获得第一文档内容在编辑页面对应的画布中的第一位置信息。

15.根据权利要求12所述的方法，其特征在于，

在拖拽播放进度条过程中，对已经播放的录音对应的文档内容进行高亮显示；对未播放的录音对应的文档内容进行模糊显示；

在用户拖拽操作结束时，高亮显示拖拽结束位置对应的播放时刻所对应的文档内容。

16.根据权利要求12所述的方法，其特征在于，

在拖拽播放进度条过程中，对已经播放的录音对应的文档内容通过改变颜色或增加背景色的方式进行突出显示；对未播放的录音对应的文档内容按默认方式进行显示；

在用户拖拽操作结束时，对拖拽结束位置对应的播放时刻所对应的文档内容通过改变颜色或增加背景色的方式突出显示。

17.根据权利要求12所述的方法，其特征在于，

在所述获得用户选择的第一播放时刻之前，还包括：

在编辑页面显示录音播放状态图标，该录音播放状态图标包括：结束播放按钮、播放按钮、用于表明播放进度的播放进度条和播放时刻，以及用于表明有扩展功能的扩展图标。

18.根据权利要求7所述的方法，其特征在于，

所述基于所述编辑记录，确定第二文档内容对应的第二播放时刻，包括：

接收用户在编辑页面对文档内容的选择操作；

获得用户选择的第二文档内容在编辑页面对应的画布中的第二位置信息；

在所述编辑记录中查找所述第二位置信息，若查找到，则确定所述第二位置信息对应的第二录音计时时刻为第二播放时刻。

19.根据权利要求7所述的方法，其特征在于，

所述方法还包括：在确定录音结束的情况下，停止录音并生成目标音频对应的录音文件存储至磁盘中；将所述录音文件的存储路径信息与所有保存的编辑记录对应存储至预设数据库中；

在所述获得用户选择的第一播放时刻之前，还包括：

基于所述预设数据库中存储的录音文件的存储路径信息将所述录音文件加载到内存中，并将编辑记录中键盘输入的文本内容加载到内存中，以及基于保存的编辑记录中手写输入对应的位图的存储路径信息和/或插入图片的存储路径信息，将手写输入对应的位图和/或插入图片加载到内存中。

20.根据权利要求7所述的方法，其特征在于，

在所述获得用户选择的第一播放时刻之前，还包括：

基于录音播放指令，开始播放录音；

实时获得当前播放播放时刻；

从所述编辑记录中获得当前播放播放时刻对应的当前文档内容及当前位置信息；

基于所述当前文档内容的当前位置信息，在屏幕上突出显示所述当前文档内容。

21.一种电子设备，其特征在于，包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器，其中，当该计算机程序指令被所述处理器执行时，触发所述电子设备执行权利要求1-20任一项所述的方法。

22.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的程序，其中，在所述程序运行时控制所述计算机可读存储介质所在设备执行权利要求1-20中任意一项所述的方法。

23.一种计算机程序产品，其特征在于，所述计算机程序产品包含可执行指令，当所述可执行指令在计算机上执行时，使得计算机执行权利要求1-20中任意一项所述的方法。

Images