CN103336663A

CN103336663A - 一种数据同步方法、装置和终端

Info

Publication number: CN103336663A
Application number: CN2013101924661A
Authority: CN
Inventors: 王庆山; 张薛民; 周飞; 韩冰
Original assignee: TVMining Beijing Media Technology Co Ltd
Current assignee: TVMining Beijing Media Technology Co Ltd
Priority date: 2013-05-22
Filing date: 2013-05-22
Publication date: 2013-10-02
Anticipated expiration: 2033-05-22
Also published as: CN103336663B

Abstract

本发明公开了一种数据同步方法。所述方法包括：采集来自手写装置的轨迹过程数据；同时采集来自录音装置的音频；根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。本发明同时采集轨迹过程数据和讲解音频，将轨迹过程数据和音频根据时间属性进行严格对应，实现书写轨迹与讲解音频的同步，极大的改善音频讲解与画面展示的一致性，提高了内容展示效果。本发明还公开了用于实现上述方法的装置和终端。

Description

一种数据同步方法、装置和终端

技术领域

本发明涉及手写录入技术领域，尤其涉及一种数据同步方法、装置和终端。

背景技术

随着技术的发展，电子终端被安装上触摸手写屏，以供使用者通过手写来输入内容，手指触摸方式盛行起来，深受年轻用户喜爱，掀起了一场无声的触控革命。而对于大多商务人士以及稍微年长的用户来说，他们更加倾向使用手写笔来进行点击操作以及内容输入。因此各厂商也相继推出了触控手写笔以满足用户需求。

随着智能手机、PAD、便携式电脑越来越普及，某些时候需要将一些手写内容及时录入计算机等电子终端，以用于会议、演讲、教学等活动，还诞生了可与手写笔配合使用的记录纸，以记录书写数据，特别是在远程现场教学过程中，可以将教师的手写内容与讲解录音提供给学员学习使用，由于书写过程中存在停顿、翻页等情况以及受网络条件影响，有时无法将展示的书写内容与录音完全同步的提供给用户。

发明内容

本发明实施例提供一种数据同步方法、装置和终端，实现了书写轨迹与录音的严格对应，将书写内容和录音完全同步的提供给用户。

为达上述目的，本发明采用以下技术方案：

一种数据同步方法，该方法包括：

采集来自手写装置的轨迹过程数据；

同时，采集来自录音装置的音频；

根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。

将同时采集的轨迹过程数据和音频根据时间属性进行严格对应，实现书写轨迹与讲解音频的同步，极大的改善音频讲解与画面展示的一致性，提高了内容展示效果。

优选的，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放之前，该方法还包括：接收选择指令；根据所述选择指令删除采集的部分音频。实现了强制删除录音文件中不需要的部分录音内容并保留原有时间戳，以节省数据存储空间并确保讲解内容与书写内容的相关性，

优选的，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放之前，该方法还包括：根据预定义背景噪音的频率特征，消除所述音频中的背景噪音。有效解决书写者所在地的背景噪音造成的音频不清晰的问题，

优选的，采集所述轨迹过程数据和音频时，该方法还包括：如果收到创建新页的指令，则中止所述轨迹过程数据和音频的采集。使书写者结束了当前页面的书写和讲解时，可通过翻页操作结束当前页的数据采集，创建新的空白页面用于记录新的书写内容和讲解音频；

优选的，所述接收创建新页的指令后，中止所述轨迹过程数据的采集，继续采集所述音频并保存在所述新页的数据中。使书写者也可以在进行讲解的同时进行翻页操作，此时对讲解音频的采集不会停止并将翻页后的音频保存至新页的数据中，便于书写者根据具体需要灵活录制讲解内容，保证了同时进行书写和讲解的连贯性。

优选的，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放，该方法还包括：如果收到创建新页的指令，则终止所述轨迹过程数据和音频的同步播放。在重点内容展示完毕后，使书写者可通过翻页操作直接进入后续书写和讲解内容的录制，而不必等全部内容播放完毕后再进入，从而保证了播放内容的灵活可控，有利于提高效率。

一种数据同步装置，包括：

轨迹采集模块，用于来自手写装置的轨迹过程数据；

音频采集模块，用于采集来自录音装置的音频；

同步播放模块，用于根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。

优选的，所述装置还包括：接收模块，用于接收选择指令；删除模块，用于根据所述选择指令删除采集的部分音频。

优选的，所述装置还包括：降噪模块，用于根据预定义背景噪音的频率特征，消除所述音频中的背景噪音。

优选的，所述装置还包括：中止模块，用于用于当采集所述轨迹过程数据和音频并收到创建新页的指令时，中止所述轨迹过程数据和音频的采集。

优选的，当收到创建新页的指令后，所述中止模块用于中止所述轨迹过程数据的采集，所述音频采集模块继续采集所述音频并与新页数据的时间戳同步。

优选的，所述装置还包括：终止模块，用于用于当根据所述轨迹过程数据的时间属性和所述音频的时间戳同步播放所述轨迹过程数据和音频并收到创建新页的指令时，终止所述轨迹过程数据和音频的同步播放。

一种数据同步终端，包括上述方案中任意一种同步装置。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1是本发明实施例一提供的一种数据同步方法的流程图；

图2是本发明实施例一提供的一种数据同步装置的结构示意图；

图3是本发明实施例二提供的一种数据同步方法的流程图；

图4是本发明实施例二提供的一种数据同步装置的结构示意图；

图5是本发明实施例三提供的一种数据同步方法的流程图；

图6是本发明实施例三提供的一种数据同步装置的结构示意图；

图7是本发明实施例四提供的一种数据同步方法的流程图；

图8是本发明实施例四提供的一种数据同步装置的结构示意图；

图9是本发明实施例五提供的一种数据同步方法的流程图；

图10是本发明实施例五提供的一种数据同步装置的结构示意图；

图11是本发明实施例六提供的一种数据同步方法的流程图；

图12是本发明实施例六提供的一种数据同步装置的结构示意图。

具体实施方式

以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。

图1是本发明实施例一提供的一种数据同步方法，该方法包括：

S101a，采集来自手写装置的轨迹过程数据。

采集来自手写装置的轨迹过程数据以确定书写轨迹，所述轨迹过程数据中包括位移数据和压力数据，分别来自所述手写装置的位移传感器和压力传感器。位移传感器记录的位移数据用于确定手写装置的书写轨迹，压力传感器记录的压力数据用于确定手写笔画的粗细以及每一笔画的开始和结束，所述位移数据和压力数据中均包括相应的时间属性，以便于确定每一时刻的书写压力以及每个书写笔画的相对位移。当压力传感器感应到的书写压力大于预设阈值时，即可判定开始书写动作，位移传感器开始记录位移数据，压力传感器根据各点的压力值确定书写笔画在各点的粗细，当书写压力小于所述预设阈值时，即可判定当前笔画的书写动作结束，位移传感器停止记录位移数据。

采集包括上述位移数据和压力数据的轨迹过程数据，即可确定书写轨迹和笔画粗细，用于向用户展示书写过程。

S101b，采集来自录音装置的音频。

书写者进行书写动作的同时，对书写过程进行相应的讲解，通过录音装置采集书写者的讲解音频，以用于向用户展示书写过程时同时进行讲解音频的播放。

S102，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。

根据所述轨迹过程数据的时间属性与所述音频的时间戳将所述轨迹过程数据和音频进行动态同步匹配，将具有相同时间的轨迹过程数据和音频同时播放，即可实现书写轨迹与讲解录音基于时间属性的同步展示。

相应的，本发明实施例一提供了一种数据同步装置，如图2所示，包括：

轨迹采集模块20，用于采集来自手写装置的轨迹过程数据；

音频采集模块21，用于采集来自录音装置的音频；

同步播放模块22，用于根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。

本发明实施例一同时采集轨迹过程数据和讲解音频，将轨迹过程数据和音频根据时间属性进行严格对应，实现书写轨迹与讲解音频的同步，极大的改善音频讲解与画面展示的一致性，提高了内容展示效果。

图3是本发明实施例二提供的一种数据同步方法，该方法包括：

S301a，采集来自手写装置的轨迹过程数据。与S101a所述相同，在此不做重复。

S301b，采集来自录音装置的音频。与S101b所述相同，在此不做重复。

S302，接收选择指令。

接收来自用户的选择指令，以确定需要删除的音频位置。

S303，根据选择指令删除部分音频。

在进行同步播放之前，根据用户的选择指令强制删除部分录音，即可以将完全不需要的录音剪切掉，剪切后的音频仍保留原有时间戳，以避免出现讲解内容与书写轨迹不相符的现象。例如，在音频采集过程中，书写者在讲解时出现内容错误或者讲述与书写文字完全无关的内容时，在进行同步之前，通过用户的选择指令将上述不需要的音频剪切掉并保留原有的音频时间戳，以节省数据存储空间并确保讲解内容与书写内容的相关性。

S304，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。S303中剪切掉不需要录音后，对于剩余的音频，仍要按照原有的音频时间戳与轨迹过程数据的时间属性去进行严格的对应，以确保剩余录音与书写轨迹的同步。

相应的，本发明实施例二提供了一种数据同步装置，如图4所示，包括：

轨迹采集模块20，用于采集来自手写装置的轨迹过程数据；

音频采集模块21，用于采集来自录音装置的音频；

接收模块23，用于接收选择指令；

删除模块24，用于根据所述选择指令删除部分音频；

本发明实施例二可强制删除录音文件中不需要的部分录音内容并保留原有时间戳，以节省数据存储空间并确保讲解内容与书写内容的相关性，将剩余录音的音频时间戳与轨迹过程数据的时间属性进行严格对应，实现书写轨迹与讲解音频的同步播放。

图5是本发明实施例三提供的一种数据同步方法，该方法包括：

S501a，采集来自手写装置的轨迹过程数据。与S101a所述相同，在此不做重复。

S501b，采集来自录音装置的音频。与S101b所述相同，在此不做重复。

S502，根据预定义背景噪音的频率特征，消除所述音频中的背景噪音。

如果书写者周围环境比较嘈杂，在书写者开始录音之前，对书写者所在地点进行音频采样，将采样音频预定义为背景噪音，获取书写者所在地点背景噪音的频率特征。在S501b采集的音频中，将符合上述频率特征的波形从所述音频中消除，从而达到消除音频中背景噪音的目的，使录音文件变得更加清晰，即使书写者周围环境嘈杂也能使用户听到效果较好的讲解录音。

S503，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。将S502中进行降噪处理后录音文件，按照音频时间戳与轨迹过程数据的时间属性去进行严格的对应，使降噪处理后的音频与书写轨迹同步。

相应的，本发明实施例三提供了一种数据同步装置，如图6所示，包括：

轨迹采集模块20，用于采集来自手写装置的轨迹过程数据；

音频采集模块21，用于采集来自录音装置的音频；

降噪模块25，用于根据预定义背景噪音的频率特征，消除所述音频中的背景噪音；

本发明实施例三可有效解决书写者所在地的背景噪音造成的录音文件不清晰的问题，将经过降噪处理后的录音的音频时间戳与轨迹过程数据的时间属性进行严格对应，实现书写轨迹与讲解音频的同步播放。

图7是本发明实施例四提供的一种数据同步方法，该方法包括：

S701a，采集来自手写装置的轨迹过程数据。与S101a所述相同，在此不做重复。

S701b，采集来自录音装置的音频。与S101b所述相同，在此不做重复。

S702，如果收到创建新页的指令，则中止所述轨迹过程数据和音频的采集。。

在采集轨迹过程数据和音频并生成书写文件和录音文件时，接收来自用户的创建新页的指令，所述新页是指新建的空白页，不包含任何轨迹过程数据和音频；所述创建新页的指令是书写者在数据采集过程中进行翻页操作时发出的，即书写者需要在新建的空白页面进行书写或者结束本页的书写和讲解。

收到创建新页指令后，中止当前页的轨迹过程数据和音频数据的采集。如果再次开始采集轨迹过程数据和音频，将采集到的轨迹过程数据和音频保存为所述新页的数据。

S703，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。

所有书写页面的数据采集完毕后，根据每个页面的轨迹过程数据的时间属性和音频时间戳将所述轨迹过程数据与音频进行同步匹配，将匹配后的轨迹过程数据与音频进行播放即可实现多页面书写轨迹与讲解录音的同步。

优选的，收到创建新页的指令后，如果书写者并没有停止讲解，则仅仅中止轨迹过程数据的采集，而继续采集书写者进行讲解的音频，采集的音频数据保存在新页的页数据中，并与新页数据的时间戳同步。当手写装置再次判定书写者开始书写动作时，则开始继续采集轨迹过程数据并与新页数据的时间戳同步。

相应的，本发明实施例四提供了一种数据同步装置，如图8所示，包括：

轨迹采集模块20，用于采集来自手写装置的轨迹过程数据；

音频采集模块21，用于采集来自录音装置的音频；

中止模块26，用于当采集所述轨迹过程数据和音频并收到创建新页的指令时，中止所述轨迹过程数据和音频的采集；

优选的，当收到创建新页的指令后，如果书写者并没有停止讲解，所述中止模块26用于中止所述轨迹过程数据的采集，所述音频采集模块21继续采集所述音频并与新页数据的时间戳同步。当手写装置再次判定书写者开始书写动作时，轨迹采集模块20再开始继续采集轨迹过程数据并与新页数据的时间戳同步。

本发明实施例四在采集轨迹过程数据和音频时，书写者结束了当前页面的书写和讲解时，可通过翻页操作结束当前页的数据采集，创建新的空白页面用于记录新的书写内容和讲解音频，书写者也可以在进行讲解的同时进行翻页操作，此时对讲解音频的采集不会停止并将翻页后的音频保存至新页的数据中与新页数据的时间戳同步，便于书写者根据具体需要灵活录制讲解内容，保证了同时进行书写和讲解的连贯性。

图9是本发明实施例五提供的一种数据同步方法，该方法包括：

S901a，采集来自手写装置的轨迹过程数据。与S101a所述相同，在此不做重复。

S901b，采集来自录音装置的音频。与S101b所述相同，在此不做重复。

S902，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。与S102所述相同，在此不做重复。

S903，如果收到创建新页的指令，则终止所述轨迹过程数据和音频的同步播放。

在同步播放所述轨迹过程数据和音频时，接收来自用户的创建新页的指令，书写者要结束当前同步播放并直接进入后续讲解而进行翻页操作时发出所述指令，即书写者要在新的空白页面开始新的书写和讲解，需要结束当前书写页面和讲解的播放。以便于在对当前页的重点内容进行展示并讲解后，对当前页的其他内容不再进行展示，终止所述书写文件和录音文件的同步播放，而直接进入新建的空白页面的数据采集过程。

相应的，本发明实施例五提供了一种数据同步装置，如图10所示，包括：

轨迹采集模块20，用于采集来自手写装置的轨迹过程数据；

音频采集模块21，用于采集来自录音装置的音频；

同步播放模块22，用于根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放；

终止模块27，用于当根据所述轨迹过程数据的时间属性和所述音频的时间戳同步播放所述轨迹过程数据和音频并收到创建新页的指令时，终止所述轨迹过程数据和音频的同步播放。

本发明实施例五同时采集轨迹过程数据和讲解音频，将所述轨迹过程数据和音频根据时间属性进行严格对应，实现书写轨迹与讲解音频的同步，极大的改善音频讲解与画面展示的一致性，提高了内容展示效果，在重点内容展示完毕后，书写者可通过翻页操作直接进入后续书写和讲解内容的录制，而不必等全部内容播放完毕后再进入，从而保证了播放内容的灵活可控，有利于提高效率。

图11是本发明实施例六提供的一种数据同步方法，该方法包括：

S1101a，采集来自手写装置的轨迹过程数据。与S101a所述相同，在此不做重复。

S1101b，采集来自录音装置的音频。与S101b所述相同，在此不做重复。

S1102，如果收到创建新页的指令，则中止所述轨迹过程数据和音频的采集。与S702所述相同，在此不做重复。优选的，如果书写者并没有停止讲解，则仅仅中止轨迹过程数据的采集，而继续采集书写者进行讲解的音频，采集的音频数据与新页数据的时间戳同步。

S1103，根据预定义背景噪音的频率特征，消除所述录音文件中的背景噪音。与S502所述相同，在此不做重复。

S1104，接收选择指令；

S1105，根据所述选择指令删除采集的部分音频。与S303所述相同，在此不做重复。

S1106，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放。与S703所述相同，在此不做重复。

S1107，如果收到创建新页的指令，则终止所述轨迹过程数据和音频的同步播放。与S903所述相同，在此不做重复。

相应的，本发明实施例六提供了一种数据同步装置，如图12所示，包括：

轨迹采集模块20，用于采集来自手写装置的轨迹过程数据；

音频采集模块21，用于采集来自录音装置的音频；

接收模块23，用于接收选择指令；

删除模块24，用于根据所述选择指令删除采集的部分音频；

本发明实施例六同时采集轨迹过程数据和讲解音频，将所述轨迹过程数据和音频根据时间属性进行严格对应，实现书写轨迹与讲解音频的同步，极大的改善音频讲解与画面展示的一致性，提高了内容展示效果；书写者也可以在进行讲解的同时进行翻页操作，此时对讲解音频的采集不会停止并将翻页后的音频保存至新页的数据中且与新页数据的时间戳同步，便于书写者根据具体需要灵活录制讲解内容，保证同时进行书写和讲解的连贯；可有效解决书写者所在地的背景噪音造成的录音文件不清晰的问题，并且可以强制删除录音文件中不需要的部分录音内容，以节省数据存储空间并确保讲解内容与书写内容的相关性；在重点内容展示完毕后，书写者可通过翻页操作直接进入后续书写和讲解内容的录制，而不必等全部内容播放完毕后再进入，从而保证了播放内容的灵活可控，有利于提高效率。

本发明实施例还提供了一种数据同步终端，所述终端包括上述任一实施例中所述的数据同步装置。所述终端可以是任何具备音视频采集与播放功能的电子终端，所述终端通过与手写装置建立通信连接来采集轨迹过程数据，通过本地的录音装置或者音频输入设备来采集音频。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器和光学存储器等）上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims

1.一种数据同步方法，其特征在于，该方法包括：

采集来自手写装置的轨迹过程数据；

同时，采集来自录音装置的音频；

2.如权利要求1所述的方法，其特征在于，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放之前，该方法还包括：

接收选择指令；

根据所述选择指令删除采集的部分音频。

3.如权利要求1所述的方法，其特征在于，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放之前，该方法还包括：

根据预定义背景噪音的频率特征，消除所述音频中的背景噪音。

4.如权利要求1所述的方法，其特征在于，采集所述轨迹过程数据和音频时，该方法还包括：

如果收到创建新页的指令，则中止所述轨迹过程数据和音频的采集。

5.如权利要求4所述的方法，其特征在于，所述收到创建新页的指令，中止所述轨迹过程数据的采集之后，所述方法还包括：继续采集所述音频并与新页数据的时间戳同步。

6.如权利要求1所述的方法，其特征在于，根据所述轨迹过程数据的时间属性和所述音频的时间戳同步所述轨迹过程数据和音频并进行播放时，该方法还包括：

如果收到创建新页的指令，则终止所述轨迹过程数据和音频的同步播放。

7.一种数据同步装置，其特征在于，包括：

轨迹采集模块，用于采集来自手写装置的轨迹过程数据；

音频采集模块，用于采集来自录音装置的音频；

8.如权利要求7所述的装置，其特征在于，还包括：

接收模块，用于接收选择指令；

删除模块，用于根据所述选择指令删除采集的部分音频。

9.如权利要求7所述的装置，其特征在于，还包括：

降噪模块，用于根据预定义背景噪音的频率特征，消除所述音频中的背景噪音。

10.如权利要求7所述的装置，其特征在于，还包括：

中止模块，用于当采集所述轨迹过程数据和音频并收到创建新页的指令时，中止所述轨迹过程数据和音频的采集。

11.如权利要求10所述的装置，其特征在于，当收到创建新页的指令后，所述中止模块用于中止所述轨迹过程数据的采集，所述音频采集模块继续采集所述音频并与新页数据的时间戳同步。

12.如权利要求7所述的装置，其特征在于，还包括：

终止模块，用于当根据所述轨迹过程数据的时间属性和所述音频的时间戳同步播放所述轨迹过程数据和音频并收到创建新页的指令时，终止所述轨迹过程数据和音频的同步播放。

13.一种数据同步终端，其特征在于，包括权利要求7-12任一所述的同步装置。