CN115759012B - 一种基于无线连接的投屏共享文档批注管理方法及装置 - Google Patents

Abstract

本发明公开了一种基于无线连接的投屏共享文档批注管理方法及装置；其中，所述方法包括：智能投屏终端与大屏接收终端建立投屏连接；智能投屏终端将用户选择的投屏文档数据实时投送至大屏接收终端；监听用户在大屏接收终端的显示屏幕上的批注调用操作；大屏接收端生成批注调用指令，并将批注调用指令发送至智能投屏终端；智能投屏终端在投屏文档数据的对应位置区域调出批注框，更新投送至大屏接收终端；大屏接收终端监听用户在批注框的批注编辑操作，并生成编辑操作指令；智能投屏终端基于编辑操作指令在批注框中生成批注编辑内容，并更新投送至大屏接收终端。在本发明实施例中，实现在投屏接收端对投屏文档数据的批注，实现更友好的投屏使用体验。

Description

一种基于无线连接的投屏共享文档批注管理方法及装置

技术领域

本发明涉及文档处理技术领域，尤其涉及一种基于无线连接的投屏共享文档批注管理方法及装置。

背景技术

在现有技术中，对投屏到投屏接收端上的文档数据无法进行任何的操作处理，在会议中，若用户想在大屏的投屏接收端上对智能终端所投送过来的投屏文档数据进行讲解或者审阅时，若对某些文档内容存在异议，或者需要进行批注或进行解锁时，无法在投屏接收端上进行，需要用户回到智能终端上进行相应的操作；这样导致用户的操作极不方便，同时使用体验不友好。

发明内容

本发明的目的在于克服现有技术的不足，本发明提供了一种基于无线连接的投屏共享文档批注管理方法及装置，实现在投屏接收端对投屏文档数据的批注，实现更友好的投屏使用体验。

为了解决上述技术问题，本发明实施例提供了一种基于无线连接的投屏共享文档批注管理方法，包括智能投屏终端和大屏接收终端，其中，所述智能投屏终端与所述大屏接收到通过无线投屏连接；所述方法包括：

所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接；

在所述智能投屏终端与所述大屏接收端建立投屏连接后，所述智能投屏终端基于用户的投屏操作将用户选择的投屏文档数据基于无线投屏连接实时投送至所述大屏接收终端；

所述大屏接收终端将接收到的投屏文档数据进行投屏显示，并监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作；

所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端；所述批注调用指令包括在批注调用操作中在所述投屏显示文档数据中的选中的文本内容；

所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端；

所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令；

所述大屏接收终端将所述编辑操作指令发送至所述智能投屏终端，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端。

可选的，所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接，包括：

所述智能投屏终端基于用户输入设置获得配对密码；

所述智能投屏终端基于所述配对密码生成超声波音频信息，并控制所述智能投屏终端自带的播放设备向所述大屏接收端循环播放所述超声波音频信息；

在所述大屏接收端接收到所述超声波音频信息后，基于频分技术对所述超声波音频信息进行解析识别处理，获得解析配对密码；

将所述解析配对密码与在所述大屏接收端内的接收端配对密码进行匹配，并在配对成功后与所述智能投屏终端建立投屏连接。

可选的，所述控制所述智能投屏终端自带的播放设备向所述大屏接收端循环播放所述超声波音频信息，包括：

控制所述智能投屏终端自带的播放设备按照预设播放规则向所述大屏接收端循环播放所述超声波音频信息；

其中所述预设播放规则为单次播放发送频率的时间长度，所述时间长度为一个最小发生单元和最小识别单元；所述最小发生单元包括发声段和缓冲段；所述最小识别单元用于调制所述播放设备播放的超声波音频信息的规律，所述规律包括占空比和频率。

可选的，所述基于频分技术对所述超声波音频信息进行解析识别处理，包括：

所述投屏接收终端在所述超声波音频信息中识别到标记周期开始的固定频率，并基于所述固定频率获得所述超声波音频信息中的一个完整的超声波音频周期；

基于频分方式对完整的超声波音频周期进行解析识别处理。

可选的，所述监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作，包括：

监听用户在所述大屏接收端的显示屏幕上所显示的投屏显示文档数据区域上的操作时，调用所述大屏接收端内置的截屏程序对投屏显示文档数据区域进行截屏，并获得用户所操作的区域在截屏图像上所对应的位置区域，同时调出所述大屏接收端内置的批注操作程序；

监听所述用户对所述大屏接收端内置的批注操作程序的批注调用操作。

可选的，所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端，包括：

在监听到用户基于所述批注操作程序进行批注调用操作时，对用户所操作的区域在所述截屏图像上所对应的位置区域内的文字信息进行识别处理，获得所述位置区域内的选中的文本内容；

基于所述位置区域内的选中的文本内容和所述批注调用操作生成批注调用指令；

将所述批注调用指令通过无线投屏连接发送至所述智能投屏终端。

可选的，所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端，包括：

所述智能投屏终端获得所述批注调用指令中的文本内容，并利用所述文本内容在所述投屏文档数据中匹配出对应位置区域；

基于所述批注调用指令在所述对应位置区域中调出批注框，并基于调出批注框对投屏文档数据的更新处理；

将更新的投屏文档数据投送至所述大屏接收终端。

可选的，所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令，包括：

所述大屏接收端确定更新的投屏显示文档数据中所调出的批注框的位置；

所述大屏接收端监听用户在所述批注框的位置上进行的批注编辑操作；

基于监听到的批注编辑操作生成批注编辑内容，并利用所述批注编辑内容生成编辑操作指令。

可选的，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端，包括：

所述智能投屏终端基于所述编辑操作指令获得批注编辑内容；

所述智能投屏终端基于所述编辑操作指令将所述批注编辑内容编辑至所述批注框中，对当前的投屏显示文档数据进行更新；

将更新的投屏文档数据投送至所述大屏接收终端。

另外，本发明实施例还提供了一种基于无线连接的投屏共享文档批注管理装置，包括智能投屏终端和大屏接收终端，其中，所述智能投屏终端与所述大屏接收到通过无线投屏连接；所述装置包括：

建立连接模块：用于所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接；

投屏模块：用于在所述智能投屏终端与所述大屏接收端建立投屏连接后，所述智能投屏终端基于用户的投屏操作将用户选择的投屏文档数据基于无线投屏连接实时投送至所述大屏接收终端；

第一监听模块：用于所述大屏接收终端将接收到的投屏文档数据进行投屏显示，并监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作；

第一指令生成模块：用于所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端；所述批注调用指令包括在批注调用操作中在所述投屏显示文档数据中的选中的文本内容；

第一更新投送模块：用于所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端；

第二指令生成模块：用于所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令；

第二更新投送模块：用于所述大屏接收终端将所述编辑操作指令发送至所述智能投屏终端，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端。

在本发明实施例中，智能投屏终端与大屏接收终端建立投屏连接；智能投屏终端将用户选择的投屏文档数据实时投送至大屏接收终端；监听用户在大屏接收终端的显示屏幕上的批注调用操作；大屏接收端生成批注调用指令，并将批注调用指令发送至智能投屏终端；智能投屏终端在投屏文档数据的对应位置区域调出批注框，更新投送至大屏接收终端；大屏接收终端监听用户在批注框的批注编辑操作，并生成编辑操作指令；智能投屏终端基于编辑操作指令在批注框中生成批注编辑内容，并更新投送至大屏接收终端；可以实现投屏接收端对投屏文档数据的批注，实现更友好的投屏使用体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见的，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1是本发明实施例中的基于无线连接的投屏共享文档批注管理方法的流程示意图；

图2是本发明实施例中的基于无线连接的投屏共享文档批注管理装置的结构组成示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

实施例一

请参阅图1，图1是本发明实施例中的基于无线连接的投屏共享文档批注管理方法的流程示意图。

如图1所示，一种基于无线连接的投屏共享文档批注管理方法，包括智能投屏终端和大屏接收终端，其中，所述智能投屏终端与所述大屏接收到通过无线投屏连接；所述方法包括：

S11：所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接；

在本发明具体实施过程中，所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接，包括：所述智能投屏终端基于用户输入设置获得配对密码；所述智能投屏终端基于所述配对密码生成超声波音频信息，并控制所述智能投屏终端自带的播放设备向所述大屏接收端循环播放所述超声波音频信息；在所述大屏接收端接收到所述超声波音频信息后，基于频分技术对所述超声波音频信息进行解析识别处理，获得解析配对密码；将所述解析配对密码与在所述大屏接收端内的接收端配对密码进行匹配，并在配对成功后与所述智能投屏终端建立投屏连接。

进一步的，所述控制所述智能投屏终端自带的播放设备向所述大屏接收端循环播放所述超声波音频信息，包括：控制所述智能投屏终端自带的播放设备按照预设播放规则向所述大屏接收端循环播放所述超声波音频信息；其中所述预设播放规则为单次播放发送频率的时间长度，所述时间长度为一个最小发生单元和最小识别单元；所述最小发生单元包括发声段和缓冲段；所述最小识别单元用于调制所述播放设备播放的超声波音频信息的规律，所述规律包括占空比和频率。

进一步的，所述基于频分技术对所述超声波音频信息进行解析识别处理，包括：所述投屏接收终端在所述超声波音频信息中识别到标记周期开始的固定频率，并基于所述固定频率获得所述超声波音频信息中的一个完整的超声波音频周期；基于频分方式对完整的超声波音频周期进行解析识别处理。

具体的，主要有智能投屏终端和智能接收终端；该智能投屏终端一般为PC等智能终端；智能接收终端一般为会议一体机等大屏智能终端，同时在智能投屏终端和智能接收终端上分别运行有相应的可以进行投屏控制的软件，并且可以控制智能投屏终端和智能接收终端之间的数据交互；通过用户分别在智能投屏终端和智能接收终端输入配对密码，方便后续智能投屏终端和智能接收终端之间利用该配对密码进行无线投屏连接；在智能投屏终端请求与智能接收端进行无线投屏连接的时候，首先通过将获得的配对密码按照特定的方式生成超声波音频信息，然后将该超声波音频信息发送至智能投屏终端设备自带的播放设备，然后控制播放设备向大屏接收端循环播放超声波音频信息；然后在大屏接收端接收到超声波音频信息后，即可通过频分技术的方式对该超声波音频信息进行解析识别处理，获得解析配对密码；最后即可将解析配对密码与在大屏接收端内的接收端配对密码进行匹配，并在配对成功后与智能投屏终端建立投屏连接。

在控制播放设备向大屏接收端循环播放超声波音频信息中，首先是控制智能投屏终端自带的播放设备按照预设播放规则向大屏接收端循环播放超声波音频信息；其中，预设播放规则为单次播放发送频率的时间长度，时间长度为一个最小发生单元和最小识别单元；最小发生单位包括发声段和缓冲段；最小识别单元用于调制所述播放设备播放的超声波音频信息的规律，规律包括占空比和频率；其中每个最小识别单元可以发出的频率有若干种；最小识别单元可以发出的频率有若干种中其中至少有一位做识别，这位发出的声音是一个固定频率，实际编码结果中不会出现这个频率，频率中至少包含一位用于作识别的识别频率，识别频率为固定频率且与待发送密码信息所对应的特定频率密码的频率不一致。

其中，发声段发出声音，缓冲段，不发声音，以解决墙壁或者遮挡的反射问题；混响会让声音变长，类似回声，所以要保证发出的声音的回声，不会影响到下一个发声单元的识别。

投屏接收端通过其自带的麦克风设备不断接收音频，在一个个循环过程中，将其中一个固有的频率作为起始频率，并且在检查到这个频率之后，即可将其作为一个周期的开始，并在识别到下一个周期开始之前的这一段时间段内的超声波音频信息作为一个完整的超声波音频周期；然后根据频分技术方式对完整的超声波音频周期进行解析识别处理。

S12：在所述智能投屏终端与所述大屏接收端建立投屏连接后，所述智能投屏终端基于用户的投屏操作将用户选择的投屏文档数据基于无线投屏连接实时投送至所述大屏接收终端；

在本发明具体实施过程中，在智能投屏终端与大屏接收端建立投屏连接后；用户可以在智能投屏终端上进行相应的投屏操作，并将需要进行投屏的文档、视频、图像等数据投屏至投屏接收端中；在建立投屏连接之后，用户可以在智能投屏终端上进行投屏操作，即将用户选择的投屏文档数据通过无线投屏连接实时投送至大屏接收终端；在此之前，一般需要获得大屏接收端的显示数据，及大屏接收端的显示屏大小；将能投屏终端投送的投屏文档数据按照相关比例在大屏接收端上进行显示。

S13：所述大屏接收终端将接收到的投屏文档数据进行投屏显示，并监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作；

在本发明具体实施过程中，所述监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作，包括：监听用户在所述大屏接收端的显示屏幕上所显示的投屏显示文档数据区域上的操作时，调用所述大屏接收端内置的截屏程序对投屏显示文档数据区域进行截屏，并获得用户所操作的区域在截屏图像上所对应的位置区域，同时调出所述大屏接收端内置的批注操作程序；监听所述用户对所述大屏接收端内置的批注操作程序的批注调用操作。

具体的，在大屏接收端中运行相应的软件程序，通过该软件程序实现对大屏接收端的监听，即监听用户在大屏接收端的显示屏幕上所显示的投屏显示文档数据区域上的操作，在监听用户在大屏接收端的显示屏幕上所显示的投屏显示文档数据区域上的操作时，通过调用大屏接收端内置的截屏程序对投屏显示文档数据区域进行截屏，同时获得用户所操作的区域在截屏图像上所对应的位置区域，然后再调出大屏接收端内置的批注操作程序；然后再监听用户对该大屏接收端内置的批注操作程序的批注调用操作。

S14：所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端；所述批注调用指令包括在批注调用操作中在所述投屏显示文档数据中的选中的文本内容；

在本发明具体实施过程中，所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端，包括：在监听到用户基于所述批注操作程序进行批注调用操作时，对用户所操作的区域在所述截屏图像上所对应的位置区域内的文字信息进行识别处理，获得所述位置区域内的选中的文本内容；基于所述位置区域内的选中的文本内容和所述批注调用操作生成批注调用指令；将所述批注调用指令通过无线投屏连接发送至所述智能投屏终端。

具体的，在监听到用户根据批注操作程序进行批注调用操作时，对用户所操作的区域在截屏图像上所对应的位置区域内的文字信息进行识别处理，在此采用图片文字识别技术进行，即可得到位置区域内的选中的文本内容；然后根据位置区域内的选中的文本内容和批注调用操作生成批注调用指令；并将批注调用指令通过无线投屏连接发送至智能投屏终端。

S15：所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端；

在本发明具体实施过程中，所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端，包括：所述智能投屏终端获得所述批注调用指令中的文本内容，并利用所述文本内容在所述投屏文档数据中匹配出对应位置区域；基于所述批注调用指令在所述对应位置区域中调出批注框，并基于调出批注框对投屏文档数据的更新处理；将更新的投屏文档数据投送至所述大屏接收终端。

具体的，在该智能投屏终端获得该批注调用指令中的文档内容时，即可利用该文本内容在智能投屏终端所投屏文档数据中进行匹配，并匹配出该文本内容在投屏文档数据中的对应位置区域，然后根据该批注调用指令在对应位置区域中调出批注框，并根据调出批注框对投屏文档数据的更新处理；最后将更新的投屏文档数据投送至大屏接收终端；这样即可实现对投屏文档数据的批注框的调出处理；由于需要指令在投屏接收端和智能投屏终端之间的传递，并且需要进行相应的交互；可能导致有一定的延时问题，但都是可接受范围内；在用户通过大屏接收端对投屏文档数据进行讲解或分享时，可随时在大屏接收端上进行批注框的调出操作。

S16：所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令；

在本发明具体实施过程中，所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令，包括：所述大屏接收端确定更新的投屏显示文档数据中所调出的批注框的位置；所述大屏接收端监听用户在所述批注框的位置上进行的批注编辑操作；基于监听到的批注编辑操作生成批注编辑内容，并利用所述批注编辑内容生成编辑操作指令。

具体的，该大屏接收端需要确定更新的投屏显示文档数据中所调出的批注框的位置；然后该大屏接收端通过监听用户在该批注框的位置上进行的批注编辑操作；在监听到用户在该批注框的批注编辑操作时，根据该批注编辑操作来获得批注编辑内容，然后利用批注编辑内容生成编辑操作指令。

S17：所述大屏接收终端将所述编辑操作指令发送至所述智能投屏终端，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端。

在本发明具体实施过程中，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端，包括：所述智能投屏终端基于所述编辑操作指令获得批注编辑内容；所述智能投屏终端基于所述编辑操作指令将所述批注编辑内容编辑至所述批注框中，对当前的投屏显示文档数据进行更新；将更新的投屏文档数据投送至所述大屏接收终端。

具体的，在大屏接收端生成编辑操作指令之后，将该编辑操作指令发送至智能投屏终端，然后该智能投屏终端根据该编辑操作指令获得批注编辑内容；在然后该智能投屏终端根据该编辑操作指令将批注编辑内容编辑至对应的批注框中，并对当前的投屏显示文档数据进行更新；最后将更新的投屏文档数据投送至大屏接收终端。

在本发明实施例中，智能投屏终端与大屏接收终端建立投屏连接；智能投屏终端将用户选择的投屏文档数据实时投送至大屏接收终端；监听用户在大屏接收终端的显示屏幕上的批注调用操作；大屏接收端生成批注调用指令，并将批注调用指令发送至智能投屏终端；智能投屏终端在投屏文档数据的对应位置区域调出批注框，更新投送至大屏接收终端；大屏接收终端监听用户在批注框的批注编辑操作，并生成编辑操作指令；智能投屏终端基于编辑操作指令在批注框中生成批注编辑内容，并更新投送至大屏接收终端；可以实现投屏接收端对投屏文档数据的批注，实现更友好的投屏使用体验。

实施例二

请参阅图2，图2是本发明实施例中的基于无线连接的投屏共享文档批注管理装置的结构组成示意图。

如图2所示，一种基于无线连接的投屏共享文档批注管理装置，包括智能投屏终端和大屏接收终端，其中，所述智能投屏终端与所述大屏接收到通过无线投屏连接；所述装置包括：

建立连接模块21：用于所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接；

在本发明具体实施过程中，所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接，包括：所述智能投屏终端基于用户输入设置获得配对密码；所述智能投屏终端基于所述配对密码生成超声波音频信息，并控制所述智能投屏终端自带的播放设备向所述大屏接收端循环播放所述超声波音频信息；在所述大屏接收端接收到所述超声波音频信息后，基于频分技术对所述超声波音频信息进行解析识别处理，获得解析配对密码；将所述解析配对密码与在所述大屏接收端内的接收端配对密码进行匹配，并在配对成功后与所述智能投屏终端建立投屏连接。

进一步的，所述控制所述智能投屏终端自带的播放设备向所述大屏接收端循环播放所述超声波音频信息，包括：控制所述智能投屏终端自带的播放设备按照预设播放规则向所述大屏接收端循环播放所述超声波音频信息；其中所述预设播放规则为单次播放发送频率的时间长度，所述时间长度为一个最小发生单元和最小识别单元；所述最小发生单元包括发声段和缓冲段；所述最小识别单元用于调制所述播放设备播放的超声波音频信息的规律，所述规律包括占空比和频率。

进一步的，所述基于频分技术对所述超声波音频信息进行解析识别处理，包括：所述投屏接收终端在所述超声波音频信息中识别到标记周期开始的固定频率，并基于所述固定频率获得所述超声波音频信息中的一个完整的超声波音频周期；基于频分方式对完整的超声波音频周期进行解析识别处理。

具体的，主要有智能投屏终端和智能接收终端；该智能投屏终端一般为PC等智能终端；智能接收终端一般为会议一体机等大屏智能终端，同时在智能投屏终端和智能接收终端上分别运行有相应的可以进行投屏控制的软件，并且可以控制智能投屏终端和智能接收终端之间的数据交互；通过用户分别在智能投屏终端和智能接收终端输入配对密码，方便后续智能投屏终端和智能接收终端之间利用该配对密码进行无线投屏连接；在智能投屏终端请求与智能接收端进行无线投屏连接的时候，首先通过将获得的配对密码按照特定的方式生成超声波音频信息，然后将该超声波音频信息发送至智能投屏终端设备自带的播放设备，然后控制播放设备向大屏接收端循环播放超声波音频信息；然后在大屏接收端接收到超声波音频信息后，即可通过频分技术的方式对该超声波音频信息进行解析识别处理，获得解析配对密码；最后即可将解析配对密码与在大屏接收端内的接收端配对密码进行匹配，并在配对成功后与智能投屏终端建立投屏连接。

在控制播放设备向大屏接收端循环播放超声波音频信息中，首先是控制智能投屏终端自带的播放设备按照预设播放规则向大屏接收端循环播放超声波音频信息；其中，预设播放规则为单次播放发送频率的时间长度，时间长度为一个最小发生单元和最小识别单元；最小发生单位包括发声段和缓冲段；最小识别单元用于调制所述播放设备播放的超声波音频信息的规律，规律包括占空比和频率；其中每个最小识别单元可以发出的频率有若干种；最小识别单元可以发出的频率有若干种中其中至少有一位做识别，这位发出的声音是一个固定频率，实际编码结果中不会出现这个频率，频率中至少包含一位用于作识别的识别频率，识别频率为固定频率且与待发送密码信息所对应的特定频率密码的频率不一致。

其中，发声段发出声音，缓冲段，不发声音，以解决墙壁或者遮挡的反射问题；混响会让声音变长，类似回声，所以要保证发出的声音的回声，不会影响到下一个发声单元的识别。

投屏接收端通过其自带的麦克风设备不断接收音频，在一个个循环过程中，将其中一个固有的频率作为起始频率，并且在检查到这个频率之后，即可将其作为一个周期的开始，并在识别到下一个周期开始之前的这一段时间段内的超声波音频信息作为一个完整的超声波音频周期；然后根据频分技术方式对完整的超声波音频周期进行解析识别处理。

投屏模块22：用于在所述智能投屏终端与所述大屏接收端建立投屏连接后，所述智能投屏终端基于用户的投屏操作将用户选择的投屏文档数据基于无线投屏连接实时投送至所述大屏接收终端；

在本发明具体实施过程中，在智能投屏终端与大屏接收端建立投屏连接后；用户可以在智能投屏终端上进行相应的投屏操作，并将需要进行投屏的文档、视频、图像等数据投屏至投屏接收端中；在建立投屏连接之后，用户可以在智能投屏终端上进行投屏操作，即将用户选择的投屏文档数据通过无线投屏连接实时投送至大屏接收终端；在此之前，一般需要获得大屏接收端的显示数据，及大屏接收端的显示屏大小；将能投屏终端投送的投屏文档数据按照相关比例在大屏接收端上进行显示。

第一监听模块23：用于所述大屏接收终端将接收到的投屏文档数据进行投屏显示，并监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作；

在本发明具体实施过程中，所述监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作，包括：监听用户在所述大屏接收端的显示屏幕上所显示的投屏显示文档数据区域上的操作时，调用所述大屏接收端内置的截屏程序对投屏显示文档数据区域进行截屏，并获得用户所操作的区域在截屏图像上所对应的位置区域，同时调出所述大屏接收端内置的批注操作程序；监听所述用户对所述大屏接收端内置的批注操作程序的批注调用操作。

具体的，在大屏接收端中运行相应的软件程序，通过该软件程序实现对大屏接收端的监听，即监听用户在大屏接收端的显示屏幕上所显示的投屏显示文档数据区域上的操作，在监听用户在大屏接收端的显示屏幕上所显示的投屏显示文档数据区域上的操作时，通过调用大屏接收端内置的截屏程序对投屏显示文档数据区域进行截屏，同时获得用户所操作的区域在截屏图像上所对应的位置区域，然后再调出大屏接收端内置的批注操作程序；然后再监听用户对该大屏接收端内置的批注操作程序的批注调用操作。

第一指令生成模块24：用于所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端；所述批注调用指令包括在批注调用操作中在所述投屏显示文档数据中的选中的文本内容；

在本发明具体实施过程中，所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端，包括：在监听到用户基于所述批注操作程序进行批注调用操作时，对用户所操作的区域在所述截屏图像上所对应的位置区域内的文字信息进行识别处理，获得所述位置区域内的选中的文本内容；基于所述位置区域内的选中的文本内容和所述批注调用操作生成批注调用指令；将所述批注调用指令通过无线投屏连接发送至所述智能投屏终端。

具体的，在监听到用户根据批注操作程序进行批注调用操作时，对用户所操作的区域在截屏图像上所对应的位置区域内的文字信息进行识别处理，在此采用图片文字识别技术进行，即可得到位置区域内的选中的文本内容；然后根据位置区域内的选中的文本内容和批注调用操作生成批注调用指令；并将批注调用指令通过无线投屏连接发送至智能投屏终端。

第一更新投送模块25：用于所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端；

在本发明具体实施过程中，所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端，包括：所述智能投屏终端获得所述批注调用指令中的文本内容，并利用所述文本内容在所述投屏文档数据中匹配出对应位置区域；基于所述批注调用指令在所述对应位置区域中调出批注框，并基于调出批注框对投屏文档数据的更新处理；将更新的投屏文档数据投送至所述大屏接收终端。

具体的，在该智能投屏终端获得该批注调用指令中的文档内容时，即可利用该文本内容在智能投屏终端所投屏文档数据中进行匹配，并匹配出该文本内容在投屏文档数据中的对应位置区域，然后根据该批注调用指令在对应位置区域中调出批注框，并根据调出批注框对投屏文档数据的更新处理；最后将更新的投屏文档数据投送至大屏接收终端；这样即可实现对投屏文档数据的批注框的调出处理；由于需要指令在投屏接收端和智能投屏终端之间的传递，并且需要进行相应的交互；可能导致有一定的延时问题，但都是可接受范围内；在用户通过大屏接收端对投屏文档数据进行讲解或分享时，可随时在大屏接收端上进行批注框的调出操作。

第二指令生成模块26：用于所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令；

在本发明具体实施过程中，所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令，包括：所述大屏接收端确定更新的投屏显示文档数据中所调出的批注框的位置；所述大屏接收端监听用户在所述批注框的位置上进行的批注编辑操作；基于监听到的批注编辑操作生成批注编辑内容，并利用所述批注编辑内容生成编辑操作指令。

具体的，该大屏接收端需要确定更新的投屏显示文档数据中所调出的批注框的位置；然后该大屏接收端通过监听用户在该批注框的位置上进行的批注编辑操作；在监听到用户在该批注框的批注编辑操作时，根据该批注编辑操作来获得批注编辑内容，然后利用批注编辑内容生成编辑操作指令。

第二更新投送模块27：用于所述大屏接收终端将所述编辑操作指令发送至所述智能投屏终端，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端。

在本发明具体实施过程中，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端，包括：所述智能投屏终端基于所述编辑操作指令获得批注编辑内容；所述智能投屏终端基于所述编辑操作指令将所述批注编辑内容编辑至所述批注框中，对当前的投屏显示文档数据进行更新；将更新的投屏文档数据投送至所述大屏接收终端。

具体的，在大屏接收端生成编辑操作指令之后，将该编辑操作指令发送至智能投屏终端，然后该智能投屏终端根据该编辑操作指令获得批注编辑内容；在然后该智能投屏终端根据该编辑操作指令将批注编辑内容编辑至对应的批注框中，并对当前的投屏显示文档数据进行更新；最后将更新的投屏文档数据投送至大屏接收终端。

在本发明实施例中，智能投屏终端与大屏接收终端建立投屏连接；智能投屏终端将用户选择的投屏文档数据实时投送至大屏接收终端；监听用户在大屏接收终端的显示屏幕上的批注调用操作；大屏接收端生成批注调用指令，并将批注调用指令发送至智能投屏终端；智能投屏终端在投屏文档数据的对应位置区域调出批注框，更新投送至大屏接收终端；大屏接收终端监听用户在批注框的批注编辑操作，并生成编辑操作指令；智能投屏终端基于编辑操作指令在批注框中生成批注编辑内容，并更新投送至大屏接收终端；可以实现投屏接收端对投屏文档数据的批注，实现更友好的投屏使用体验。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器（ROM，Read Only Memory）、随机存取存储器（RAM，RandomAccess Memory）、磁盘或光盘等。

另外，以上对本发明实施例所提供的一种基于无线连接的投屏共享文档批注管理方法及装置进行了详细介绍，本文中应采用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (9)

1.一种基于无线连接的投屏共享文档批注管理方法，其特征在于，包括智能投屏终端和大屏接收终端，其中，所述智能投屏终端与所述大屏接收到通过无线投屏连接；所述方法包括：

所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接；

在所述智能投屏终端与所述大屏接收端建立投屏连接后，所述智能投屏终端基于用户的投屏操作将用户选择的投屏文档数据基于无线投屏连接实时投送至所述大屏接收终端；

所述大屏接收终端将接收到的投屏文档数据进行投屏显示，并监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作；

所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端；所述批注调用指令包括在批注调用操作中在所述投屏显示文档数据中的选中的文本内容；

所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端；

所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令；

所述大屏接收终端将所述编辑操作指令发送至所述智能投屏终端，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端；

所述监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作，包括：

监听用户在所述大屏接收端的显示屏幕上所显示的投屏显示文档数据区域上的操作时，调用所述大屏接收端内置的截屏程序对投屏显示文档数据区域进行截屏，并获得用户所操作的区域在截屏图像上所对应的位置区域，同时调出所述大屏接收端内置的批注操作程序；

监听所述用户对所述大屏接收端内置的批注操作程序的批注调用操作。

2.根据权利要求1所述的投屏共享文档批注管理方法，其特征在于，所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接，包括：

所述智能投屏终端基于用户输入设置获得配对密码；

所述智能投屏终端基于所述配对密码生成超声波音频信息，并控制所述智能投屏终端自带的播放设备向所述大屏接收端循环播放所述超声波音频信息；

在所述大屏接收端接收到所述超声波音频信息后，基于频分技术对所述超声波音频信息进行解析识别处理，获得解析配对密码；

将所述解析配对密码与在所述大屏接收端内的接收端配对密码进行匹配，并在配对成功后与所述智能投屏终端建立投屏连接。

3.根据权利要求2所述的投屏共享文档批注管理方法，其特征在于，所述控制所述智能投屏终端自带的播放设备向所述大屏接收端循环播放所述超声波音频信息，包括：

控制所述智能投屏终端自带的播放设备按照预设播放规则向所述大屏接收端循环播放所述超声波音频信息；

其中所述预设播放规则为单次播放发送频率的时间长度，所述时间长度为一个最小发生单元和最小识别单元；所述最小发生单元包括发声段和缓冲段；所述最小识别单元用于调制所述播放设备播放的超声波音频信息的规律，所述规律包括占空比和频率。

4.根据权利要求2所述的投屏共享文档批注管理方法，其特征在于，所述基于频分技术对所述超声波音频信息进行解析识别处理，包括：

所述大屏接收端在所述超声波音频信息中识别到标记周期开始的固定频率，并基于所述固定频率获得所述超声波音频信息中的一个完整的超声波音频周期；

基于频分技术方式对完整的超声波音频周期进行解析识别处理。

5.根据权利要求1所述的投屏共享文档批注管理方法，其特征在于，所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端，包括：

在监听到用户基于所述批注操作程序进行批注调用操作时，对用户所操作的区域在所述截屏图像上所对应的位置区域内的文字信息进行识别处理，获得所述位置区域内的选中的文本内容；

基于所述位置区域内的选中的文本内容和所述批注调用操作生成批注调用指令；

将所述批注调用指令通过无线投屏连接发送至所述智能投屏终端。

6.根据权利要求1所述的投屏共享文档批注管理方法，其特征在于，所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端，包括：

所述智能投屏终端获得所述批注调用指令中的文本内容，并利用所述文本内容在所述投屏文档数据中匹配出对应位置区域；

基于所述批注调用指令在所述对应位置区域中调出批注框，并基于调出批注框对投屏文档数据的更新处理；

将更新的投屏文档数据投送至所述大屏接收终端。

7.根据权利要求1所述的投屏共享文档批注管理方法，其特征在于，所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令，包括：

所述大屏接收端确定更新的投屏显示文档数据中所调出的批注框的位置；

所述大屏接收端监听用户在所述批注框的位置上进行的批注编辑操作；

基于监听到的批注编辑操作生成批注编辑内容，并利用所述批注编辑内容生成编辑操作指令。

8.根据权利要求1所述的投屏共享文档批注管理方法，其特征在于，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端，包括：

所述智能投屏终端基于所述编辑操作指令获得批注编辑内容；

所述智能投屏终端基于所述编辑操作指令将所述批注编辑内容编辑至所述批注框中，对当前的投屏显示文档数据进行更新；

将更新的投屏文档数据投送至所述大屏接收终端。

9.一种基于无线连接的投屏共享文档批注管理装置，其特征在于，包括智能投屏终端和大屏接收终端，其中，所述智能投屏终端与所述大屏接收到通过无线投屏连接；所述装置包括：

建立连接模块：用于所述智能投屏终端基于配对密码与所述大屏接收终端建立投屏连接；

投屏模块：用于在所述智能投屏终端与所述大屏接收端建立投屏连接后，所述智能投屏终端基于用户的投屏操作将用户选择的投屏文档数据基于无线投屏连接实时投送至所述大屏接收终端；

第一监听模块：用于所述大屏接收终端将接收到的投屏文档数据进行投屏显示，并监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作；

第一指令生成模块：用于所述大屏接收端基于所述批注调用操作生成批注调用指令，并将所述批注调用指令发送至所述智能投屏终端；所述批注调用指令包括在批注调用操作中在所述投屏显示文档数据中的选中的文本内容；

第一更新投送模块：用于所述智能投屏终端基于所述批注调用指令在所述投屏文档数据的对应位置区域调出批注框，并更新投送至所述大屏接收终端；

第二指令生成模块：用于所述大屏接收终端监听用户在基于更新的投屏显示文档数据所调出的批注框的批注编辑操作，并基于所述批注编辑操作生成编辑操作指令；

第二更新投送模块：用于所述大屏接收终端将所述编辑操作指令发送至所述智能投屏终端，所述智能投屏终端基于所述编辑操作指令在所述批注框中生成批注编辑内容，并更新投送至所述大屏接收终端；

所述监听用户在所述大屏接收终端的显示屏幕上基于投屏显示文档数据的批注调用操作，包括：

监听用户在所述大屏接收端的显示屏幕上所显示的投屏显示文档数据区域上的操作时，调用所述大屏接收端内置的截屏程序对投屏显示文档数据区域进行截屏，并获得用户所操作的区域在截屏图像上所对应的位置区域，同时调出所述大屏接收端内置的批注操作程序；

监听所述用户对所述大屏接收端内置的批注操作程序的批注调用操作。

Images