CN109343733A - 一种扩展书写方法、装置及系统 - Google Patents

Abstract

本发明提出了一种扩展书写方法，涉及触摸技术。所述方法包括：获取第一设备的第一信息和第二设备的第一信息，根据所述第一设备的第一信息和第二设备的第一信息识别当前行为；当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息进行输出。本发明还提出了一种扩展书写装置及系统。本发明通过简单附加设备即可实现将触摸设备扩展为触摸书写设备，无需对现有的触摸设备进行任何的改变，成本低，安装方便，操作简单。

Description

一种扩展书写方法、装置及系统

技术领域

本申请涉及触摸技术，尤其涉及一种扩展书写方法、装置及系统。

背景技术

光学影像式电子白板主要应用于教育和办公，由于其互动性非常好，因此很受用户青睐，现有光学影像式触摸屏其中一个技术通常包括摄像头模块、光源和回归反射条，摄像头采集拍摄到的亮度信息，进行分析，因不透光的介质遮挡光路，因此可以识别遮挡物所在的角度方向，对触摸物进行位置识别。目前这种光学影像式触摸屏由于受到成本和实施的影响，只能够具有触控功能，但是没有书写功能。如果想要在光学影像式触摸屏中增加书写功能的话，要么就需要增加一个有完全功能的书写设备，其成本会非常高；或者移除已有的触摸设备并重新安装具有触摸书写设备，实施极为复杂，且成本与移除掉的触摸设备回收价值存在直接的关联。

发明内容

为解决上述技术问题之一，本发明提供了一种扩展书写方法、装置及系统

本发明实施例第一方面提供了一种扩展书写方法，所述方法包括：

获取第一设备的第一信息和第二设备的第一信息，根据所述第一设备的第一信息和第二设备的第一信息识别当前行为；

当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息进行输出。

优选地，当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息组合打包后进行输出。

优选地，当所述当前行为不为书写行为时，将所述第一设备的第一信息进行输出。

优选地，所述根据所述第一设备的第一信息和第一设备的第二信息识别当前行为的过程包括：

检测所述第一设备的第一信息和第二设备的第一信息的信息内容；

当所述第一设备的第一信息中包含触摸信息且所述第二设备的第一信息中包含压力信息时，识别当前行为为书写行为。

优选地，在所述获取第一设备的第一信息和第二设备的第一信息，根据所述第一设备的第一信息和第二设备的第一信息识别当前行为之前，所述方法还包括：识别所述第一设备的设备类型、设备信息和设备行为。

优选地，在当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息进行输出之后，所述方法还包括：根据所述第一设备的第一信息和所述第二设备的第一信息对当前行为的状态进行显示。

本发明实施例第二方面提供了一种扩展书写装置，所述装置包括第二设备和过滤驱动模块，所述第二设备包括书写单元、压力采集单元、处理模块和接口控制器；

压力采集单元，用于采集书写单元的压力信息，并将所述压力信息发送至处理模块；

处理模块，用于将所述压力信息经接口控制器进行格式转换后发送至过滤驱动模块；

过滤驱动模块，其内置有处理器，所述处理器内部配置有处理器可执行的操作指令，以执行如下操作：

获取第一设备的第一信息和第二设备的第一信息，根据所述第一设备的第一信息和第二设备的第一信息识别当前行为；

当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息进行输出。

优选地，所述过滤驱动模块内置有处理器，所述处理器内部配置有处理器可执行的操作指令，以执行如下操作：

当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息组合打包后进行输出。

优选地，所述过滤驱动模块内置有处理器，所述处理器内部配置有处理器可执行的操作指令，以执行如下操作：

当所述当前行为不为书写行为时，将所述第一设备的第一信息进行输出。

优选地，所述过滤驱动模块内置有处理器，所述处理器内部配置有处理器可执行的操作指令，以执行如下操作：

检测所述第一设备的第一信息和第二设备的第一信息的信息内容；

当所述第一设备的第一信息中包含触摸信息且所述第二设备的第一信息中包含压力信息时，识别当前行为为书写行为。

本发明实施例第三方面提供了一种扩展书写系统，所述系统包括第一设备、第三设备和如本发明实施例第二方面所述的扩展书写装置，所述过滤驱动模块设置在所述第三设备中。

优选地，所述第三设备还包括接口驱动模块、设备类驱动模块、设备驱动模块和显示交互模块；

接口驱动模块，用于识别所述第一设备的设备类型；

设备类驱动模块，用于识别所述第一设备的设备信息；

设备驱动模块，用于识别所述第一设备的设备行为；

显示交互模块，用于根据所述第一设备的第一信息和所述第二设备的第一信息对当前行为的状态进行显示。

本发明的有益效果如下：

本发明所述的扩展书写方法通过获取第一设备和第二设备的第一信息，对该第一设备和第二设备的第一信息进行分析后识别出当前的行为，如果当前的行为是书写行为，那么就将第一设备和第二设备的第一信息进行输出，然后由其他设备根据第一设备和第二设备的第一信息对书写轨迹进行进一步的识别和判断。本发明通过简单附加设备即可实现将触摸设备扩展为触摸书写设备，无需对现有的触摸设备进行任何的改变，成本低，安装方便，操作简单。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1为本发明实施例所述的扩展书写方法的流程图；

图2为本发明实施例所述的识别当前行为的流程图；

图3为本发明实施例所述的扩展书写装置的原理示意图；

图4为本发明实施例所述的扩展书写系统的原理示意图；

图5为本发明实施例所述的第三设备的原理示意图。

具体实施方式

为了使本申请实施例中的技术方案及优点更加清楚明白，以下结合附图对本申请的示例性实施例进行进一步详细的说明，显然，所描述的实施例仅是本申请的一部分实施例，而不是所有实施例的穷举。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

实施例1

如图1所示，本实施例提出了一种扩展书写方法，所述方法包括：

S101、获取第一设备的第一信息和第二设备的第一信息。

具体的，本实施例中，第一设备为常规且常见的触摸屏或其他触摸设备，第二设备为可以在触摸屏上执行书写操作的设备，例如书写笔等。本实施例所述的方法是为了实现扩展书写功能而实施的，能够将第一设备和第二设备所发送的信息进行接收，以便后续的识别分析所用。

S102、根据所述第一设备的第一信息和第二设备的第一信息识别当前行为。

具体的，在上述文字中提到，本实施例中的第一设备可以为常规的触摸设备，由于触摸设备在被触碰的时候会有触摸响应并能够生成当前触摸位置的坐标信息，而实际应用过程中，由于现有触摸设备的功能性的限制，即便产生了触摸的动作，也无法在触摸的同时实现书写操作。因此，本实施例在现有的触摸设备的基础上，引入了第二设备，即书写设备。同时，在第二设备中设置压力采集的功能，即，在第二设备与第一设备之间发生触摸时，第二设备本身会产生与第一设备之间的压力，进而通过在触摸的同时产生压力的特点来判断当前发生了书写行为，具体过程如图2所示：

S1021、检测所述第一设备的第一信息和第二设备的第一信息的信息内容；

S1022、当所述第一设备的第一信息中包含触摸信息且所述第二设备的第一信息中包含压力信息时，识别当前行为为书写行为。

更为具体的，在识别当前行为的过程中，触摸信息和压力信息的同时发生是书写行为产生的充要条件，在此基础上，还可以采用多种更为具体的判断依据来准确识别书写行为，例如：

(1)在检测到触摸信息和压力信息同时存在的前提下，再对触摸信息中包含的尺寸信息进行提取，该尺寸信息指的是第二设备或其他书写设备在对触摸设备进行触摸时，第二设备或其他书写设备与第一设备之间的接触面积。当该尺寸信息小于预设的阈值时，即可准确认定当前行为为书写行为。

一般来说，在进行教学演示或会议工作内容汇报时，常常用手指进行点击或选取，而书写往往还是用笔或其他书写工具来进行，这是人们工作的习惯性动作。而书写笔的笔尖与触摸设备之间的接触面积一般都是要小于人的手指与触摸设备之间的接触面积的，那么就可以将手指与触摸设备之间的接触面积作为阈值，一旦当前的接触面积小于这个阈值，那么就可以认为当前行为为书写行为。

(2)由于书写行为一般都是连续的，因此，如果通过分析前一帧的信息已经判定上一帧的行为是书写行为的话，一般来说，下一帧的信息所对应的行为也是书写行为，直至触摸信息或压力信息消失。

(3)除了检测第一设备的触摸信息和第二设备的压力信息以外，还可以在第二设备中增设运动传感器，可以检测第二设备的倾斜角度以及运动趋势等表现第二设备运动状态的数据信息，然后通过上述运动状态的数据信息进一步的判断当前的行为是否为书写行为。

(4)还可以在第二设备上设计按键，该按键的作用一方面可以用来提供判断是否为书写行为依据的压力信息，例如，当用户想要书写的时候，可以通过该按键向处理器发送一个压力信息，该压力信息就作为上述所述的第二设备的第一信息，然后由处理器进行后续的行为识别处理；另一方面，该按键还可以集成其他功能，通过按键的时间、频率等对不同按键功能进行切换。

上面只是列举了一部分可能实施的实施例，但是，在实际应用中，只要能够识别当前行为的方案都在本申请的保护范围之内。

S103、当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息进行输出。

具体的，本实施例中，当前行为如果是书写行为，那么就将第一设备中含有触摸信息的第一信息以及第二设备中含有压力信息的第一信息进行输出，其发送信息的方式可以是逐一发送，也可以是打包发送，本申请不作限制。输出的对象可以为任意形式的主机，其作用就是接收第一设备以及第二设备的信息，然后对接收到的信息进行后续分析处理。由于本实施例的目的仅在于提供能够扩展书写的依据，因此，不涉及主机的后续分析处理过程。

更为具体的，如果当前行为不是书写行为，是触摸行为或其他行为，那么仅仅将第一设备中含有触摸信息的第一信息进行输出即可。

进一步的，本实施例所述的扩展书写方法在识别当前行为之前，还包括对第一设备进行识别的过程，具体包括对第一设备的设备类型、信息和行为进行识别。以第一设备为Usb-Hid设备为例，首先通过Usb接口与第一设备通信，判断第一设备属于Hid设备类；然后，通过标准Hid协议通信，解析第一设备细节，判断第一设备属于触摸设备，获取第一设备报告描述符确定数据格式；接着，根据已知的数据协议解析第一设备的设备数据，如带坐标的触摸按下行为或者触摸抬起行为等。在识别当前行为之后，还会对当前行为的状态进行显示，例如显示鼠标指针、触摸效果或者书写笔迹等。

实施例2

如图3所示，本实施例提出了一种扩展书写装置，所述装置包括第二设备和过滤驱动模块，所述第二设备包括书写单元、压力采集单元、处理模块和接口控制器；

压力采集单元，用于采集书写单元的压力信息，并将所述压力信息发送至处理模块；

处理模块，用于将所述压力信息经接口控制器进行格式转换后发送至过滤驱动模块；

过滤驱动模块，其内置有处理器，所述处理器内部配置有处理器可执行的操作指令，以执行如下操作：

获取第一设备的第一信息和第二设备的第一信息，根据所述第一设备的第一信息和第二设备的第一信息识别当前行为；

当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息进行输出。

具体的，本实施例中，第一设备为常规且常见的触摸屏或其他触摸设备，第二设备为可以在触摸屏上执行书写操作的设备，例如书写笔等。本实施例所述的装置为了实现扩展书写功能而实施的，能够将第一设备和第二设备所发送的信息进行接收，以便其他设备进行后续的识别分析所用。

其中，处理模块和接口控制器可以采用微控制器实现，由于接收输出信息的设备的接口类型不同，所以，本实施例中处理模块和接口控制器所选取的型号也会相应的不同。例如：

(1)接收输出信息的接口为USB时，处理模块和接口控制器可以采用一个带有USB控制器的微控制器实现，例如St公司的Stm32F103，或Microchip公司的Sam3S等。

(2)接收输出信息的接口为USB时，处理模块可以采用一个微控制器实现，而接口控制器可以采用一个USB控制器实现。

(3)接收输出信息的接口为I2C或其兼容协议时，处理模块和接口控制器可以采用一个带有I2C或其兼容协议的微控制器实现，例如St公司的Stm32F103或Microchip公司的Sam3S等。

(4)接收输出信息的接口为I2C或其兼容协议时，处理模块和接口控制器还可以采用一个能够模拟I2C或其兼容协议的微控制器实现，例如St公司的Stm32F103或Microchip公司的Sam3S等。

(5)接收输出信息的接口为低功耗蓝牙时，处理模块和接口控制器可以采用一个带有低功耗蓝牙的微控制器实现，例如Nordic公司的nRF52840等。

(6)接收输出信息的接口为低功耗蓝牙时，接口控制器可以采用一个低功耗蓝牙控制器实现，例如Microchip公司的BTLC1000等，而处理模块可采用一个微控制器实现，例如St公司的Stm32F103等。

以上处理模块和接口控制器的选取只是列举了几种重要场景下的情况，另外，本实施例中所述的处理模块和接口控制器可以集成在一个芯片中。本实施例在此不做特殊限制。

常规的触摸设备在被触碰的时候会有触摸响应并能够生成当前触摸位置的坐标信息，而实际应用过程中，由于现有触摸设备的功能性的限制，即便产生了触摸的动作，也无法在触摸的同时实现书写操作。因此，本实施例在现有的触摸设备的基础上，引入了第二设备，即书写设备。同时，在第二设备中设置压力采集的功能，即，在第二设备与第一设备之间发生触摸时，第二设备本身会产生与第一设备之间的压力，进而通过在触摸的同时产生压力的特点来判断当前发生了书写行为。其中，采集压力信息的功能是由压力采集单元实现的。

本实施例所记载的压力采集单元可以内置在第二设备的内部，例如，如果第二设备是一支笔的话，那么可以将压力采集单元设置在笔尖的后部，当笔尖与触摸设备发生挤压时，压力采集单元就会采集到压力信息，然后发送至处理器中进行处理。

具体的，本实施例所述的压力采集单元包括力敏电阻、差分放大器和蓝牙芯片，其中，力敏电阻用于采集压力信号，并将该压力信号转换为电压信号；差分放大器用于将该电压信号进行增益放大；蓝牙芯片用于将增益放大后的电压信号发送至处理模块。

除此之外，本实施例所述的压力采集单元还可以采用力敏电容，通过特定电路传递与压力相关的波形模拟信号来实现；还可以采用任意具有压力采集功能的器件来实现；还可以由上述任意器件加上带模数转换功能的芯片，通过传递与压力相关的数字信号的方式来实现；还可以在数字信号的基础上增加无线通信器件，以无限方式传递与压力相关的数字信号的方式来实现，等等。本实施例中压力采集单元的目的在于检测第二设备的压力信息，以上是对于压力采集单元的实施方式列举几种情况，但是根据实际情况，其工作原理或器件组成也会相应的发生变化，本实施例不做特殊限定。

处理模块在接收到第一设备的第一信息和第二设备的第一信息之后，经接口控制器进行格式转换后发送至过滤驱动模块。过滤驱动模块检测所述第一设备的第一信息和第二设备的第一信息的信息内容；当所述第一设备的第一信息中包含触摸信息且所述第二设备的第一信息中包含压力信息时，识别当前行为为书写行为。

具体的，在识别当前行为的过程中，触摸信息和压力信息的同时发生是书写行为产生的充要条件，在此基础上，还可以采用多种更为具体的判断依据来准确识别书写行为，例如：

(1)在检测到触摸信息和压力信息同时存在的前提下，再对触摸信息中包含的尺寸信息进行提取，该尺寸信息指的是第二设备或其他书写设备在对触摸设备进行触摸时，第二设备或其他书写设备与第一设备之间的接触面积。当该尺寸信息小于预设的阈值时，即可准确认定当前行为为书写行为。

一般来说，在进行教学演示或会议工作内容汇报时，常常用手指进行点击或选取，而书写往往还是用笔或其他书写工具来进行，这是人们工作的习惯性动作。而书写笔的笔尖与触摸设备之间的接触面积一般都是要小于人的手指与触摸设备之间的接触面积的，那么就可以将手指与触摸设备之间的接触面积作为阈值，一旦当前的接触面积小于这个阈值，那么就可以认为当前行为为书写行为。

(2)由于书写行为一般都是连续的，因此，如果通过分析前一帧的信息已经判定上一帧的行为是书写行为的话，一般来说，下一帧的信息所对应的行为也是书写行为，直至触摸信息或压力信息消失。

(3)除了检测第一设备的触摸信息和第二设备的压力信息以外，还可以在第二设备中增设运动传感器，可以检测第二设备的倾斜角度以及运动趋势等表现第二设备运动状态的数据信息，然后通过上述运动状态的数据信息进一步的判断当前的行为是否为书写行为。

(4)还可以在第二设备上设计按键，该按键的作用一方面可以用来提供判断是否为书写行为依据的压力信息，例如，当用户想要书写的时候，可以通过该按键向处理器发送一个压力信息，该压力信息就作为上述所述的第二设备的第一信息，然后由处理器进行后续的行为识别处理；另一方面，该按键还可以集成其他功能，通过按键的时间、频率等对不同按键功能进行切换。

上面只是列举了一部分可能实施的实施例，但是，在实际应用中，只要能够识别当前行为的方案都在本申请的保护范围之内。

本实施例中，当前行为如果是书写行为，那么就将第一设备中含有触摸信息的第一信息以及第二设备中含有压力信息的第一信息进行输出，其发送信息的方式可以是逐一发送，也可以是打包发送，本申请不作限制。输出的对象可以为任意形式的主机，其作用就是接收第一设备以及第二设备的信息，然后对接收到的信息进行后续分析处理。由于本实施例的目的仅在于提供能够扩展书写的依据，因此，不涉及主机的后续分析处理过程。

如果当前行为不是书写行为，是触摸行为或其他行为，那么仅仅将第一设备中含有触摸信息的第一信息进行输出即可。

实施例3

如图4所示，本实施例提出了一种扩展书写系统，该系统包括第一设备、第三设备和扩展书写装置，其中扩展书写装置的具体内容可参照实施例2所述的内容，在此不再进行赘述。扩展书写装置中的过滤驱动模块设置在第三设备中。

本实施例中，第一设备可以为常规的触摸设备，第二设备为书写设备，例如书写笔等，第三设备为上位机或其他类型主机。扩展书写装置通过接口与第一设备和第三设备连接，并从第三设备取得电源，满足自身能耗。扩展书写装置中的过滤驱动模块设置在主机当中，能够有能力拦截、改写或传递数据。所述过滤驱动模块能依据书写判断逻辑，将第一设备识别到的触摸数据与第二设备的压力数据整理为书写数据进行输出，或将第一设备识别到的触摸数据直接进行输出。无需对第一设备进行任何改进即可将第一设备扩展为触摸书写设备。

进一步的，如图5所示，本实施例中的第三设备具体还包括：接口驱动模块、设备类驱动模块、设备驱动模块和显示交互模块；

接口驱动模块，用于识别所述第一设备的设备类型；

设备类驱动模块，用于识别所述第一设备的设备信息；

设备驱动模块，用于识别所述第一设备的设备行为；

显示交互模块，用于根据所述第一设备的第一信息和所述第二设备的第一信息对当前行为的状态进行显示。

具体的，以第一设备为Usb-Hid设备为例，首先通过接口驱动模块与第一设备通信，判断第一设备属于Hid设备类；然后，在设备类驱动模块中，通过标准Hid协议通信，解析第一设备细节，判断第一设备属于触摸设备，获取第一设备报告描述符确定数据格式；接着，设备驱动模块根据已知的数据协议解析第一设备的设备数据，如带坐标的触摸按下行为或者触摸抬起行为等。在识别当前行为之后，显示交互模块还会对当前行为的状态进行显示，例如显示鼠标指针、触摸效果或者书写笔迹等。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (12)

1.一种扩展书写方法，其特征在于，所述方法包括：

获取第一设备的第一信息和第二设备的第一信息，根据所述第一设备的第一信息和第二设备的第一信息识别当前行为；

当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息进行输出。

2.根据权利要求1所述的方法，其特征在于，当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息组合打包后进行输出。

3.根据权利要求1所述的方法，其特征在于，当所述当前行为不为书写行为时，将所述第一设备的第一信息进行输出。

4.根据权利要求1所述的方法，其特征在于，所述根据所述第一设备的第一信息和第一设备的第二信息识别当前行为的过程包括：

检测所述第一设备的第一信息和第二设备的第一信息的信息内容；

当所述第一设备的第一信息中包含触摸信息且所述第二设备的第一信息中包含压力信息时，识别当前行为为书写行为。

5.根据权利要求1所述的方法，其特征在于，在所述获取第一设备的第一信息和第二设备的第一信息，根据所述第一设备的第一信息和第二设备的第一信息识别当前行为之前，所述方法还包括：识别所述第一设备的设备类型、设备信息和设备行为。

6.根据权利要求5所述的方法，其特征在于，在当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息进行输出之后，所述方法还包括：根据所述第一设备的第一信息和所述第二设备的第一信息对当前行为的状态进行显示。

7.一种扩展书写装置，其特征在于，所述装置包括第二设备和过滤驱动模块，所述第二设备包括书写单元、压力采集单元、处理模块和接口控制器；

压力采集单元，用于采集书写单元的压力信息，并将所述压力信息发送至处理模块；

处理模块，用于将所述压力信息经接口控制器进行格式转换后发送至过滤驱动模块；

过滤驱动模块，其内置有处理器，所述处理器内部配置有处理器可执行的操作指令，以执行如下操作：

获取第一设备的第一信息和第二设备的第一信息，根据所述第一设备的第一信息和第二设备的第一信息识别当前行为；

当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息进行输出。

8.根据权利要求7所述的装置，其特征在于，所述过滤驱动模块内置有处理器，所述处理器内部配置有处理器可执行的操作指令，以执行如下操作：

当所述当前行为为书写行为时，将所述第一设备的第一信息和第二设备的第一信息组合打包后进行输出。

9.根据权利要求7所述的装置，其特征在于，所述过滤驱动模块内置有处理器，所述处理器内部配置有处理器可执行的操作指令，以执行如下操作：

当所述当前行为不为书写行为时，将所述第一设备的第一信息进行输出。

10.根据权利要求7所述的装置，其特征在于，所述过滤驱动模块内置有处理器，所述处理器内部配置有处理器可执行的操作指令，以执行如下操作：

检测所述第一设备的第一信息和第二设备的第一信息的信息内容；

当所述第一设备的第一信息中包含触摸信息且所述第二设备的第一信息中包含压力信息时，识别当前行为为书写行为。

11.一种扩展书写系统，其特征在于，所述系统包括第一设备、第三设备和权利要求7至10任一项所述的扩展书写装置，所述过滤驱动模块设置在所述第三设备中。

12.根据权利要求11所述的系统，其特征在于，所述第三设备还包括接口驱动模块、设备类驱动模块、设备驱动模块和显示交互模块；

接口驱动模块，用于识别所述第一设备的设备类型；

设备类驱动模块，用于识别所述第一设备的设备信息；

设备驱动模块，用于识别所述第一设备的设备行为；

显示交互模块，用于根据所述第一设备的第一信息和所述第二设备的第一信息对当前行为的状态进行显示。