CN111596856A - 一种基于副屏触摸的一种笔迹书写方法、系统及存储介质 - Google Patents

Abstract

本发明涉及一种基于副屏触摸的一种笔迹书写方法、智能设备和存储介质；包括便携式显示设备和智能设备，智能设备连接便携式显示设备时，获取便携式显示设备自身相关的属性参数数据，然后再返回给智能设备；在便携式显示装置是上设置有提供更加高效，速率更快，使操作更加方便的程序控制，通过以上方法，让智能设备通过一个迷你接口实现高速数据传输、音频传输、视频输出、电力供应等功能，使便捷显示器与其他设备进行连接通信、传输音频视频、传输数据，同时也能传输书写方式，书写笔迹等。使得智通产品操作、连接更加方便，速度更快，能够给用户不仅仅是体验上，在视觉上也能带来最佳的使用效果。

Description

一种基于副屏触摸的一种笔迹书写方法、系统及存储介质

技术领域

本发明涉及显示通信技术领域，具体涉及一种基于副屏触摸的一种笔迹书写方法、系统及存储介质。

背景技术

随着移动终端通信技术的发展，移动终端已经是市场上的主流设备，而随着移动智能设备发展，对应的应用也越来越多，对移动终端的屏幕要求要求也越来越高，即要求大屏幕又要求清晰，图像色彩艳丽。而目前通过移动智能设备直接进行办公的需求越来越多了；

但是如果直接通过智能手机操作又不方便，首先手机屏幕太小，办公书写不便，平板电脑或者笔记本电脑也是成本相比较贵，办公室移动相对也不够方便，而且屏幕不够大，在多人会议时展示也不够清晰，双人或者多人会议时需要更大的屏幕。现在办公会议多采用直接投屏方式：WiFi无线或者Type-c\HDMI连接，或者直接用投影仪；

但是以上方案还是不够方便，现实操作中，多少会给实践会议中带来一些各种各样的问题。例如投影不够清晰，分辨率不够，光线太亮显示不清，书写轨迹变形等；无线投屏又因为速度慢、帧率低以及掉帧原因影响使用感受，或者连接个显示屏的技术比较复杂，需要请专业的技术人员进行专业指导。同时在笔迹书写方面，存在着很多书写清晰度不高，集字功能便捷度不够，描字功能较单一，不具备分享浏览等。

随着现代科技的发展，现在出现了各种基于主屏副屏的各种设备；因通过无线或者有线连接一个较大的副屏展示各种文件内容更加清晰。但是目前的这种连接副屏的设备都是初步功能，有许多可以改善的空间，在副屏上书写也存在着很大的难点，容易出现断点，断线以及显示粗糙等。

发明内容

本发明提供了一种基于副屏触摸的一种笔迹书写方法、系统及存储介质；

首先是提供一种基于副屏触摸的一种笔迹书写方法，

包括便携式显示设备和智能设备，所述智能设备包括智能手机、平板电脑，所述便携式显示设备和智能设备通过连接装置连接，所述连接装置包括无线或者数据线连接，其特征在于：

智能设备连接便携式显示设备时，通过所述连接装置获取便携式显示设备自身相关的显示属性参数数据，详细解析显示设备的EDID，然后再返回给智能设备；

此时智能设备的系统提示有便携式显示设备接入，同时通过获取便携式显示设备上显示的属性参数数据，显示便携式显示设备所能承受的显示规格，如UD 3840像素*2160像素60Hz；

此时触摸屏也会同时连接到智能设备上，形成一个子输入系统外设，将便携式显示设备上的触摸区域、触摸坐标传给智能设备；

然后便携式显示设备便同时具有了显示和触摸的功能。

当触摸屏被感应触摸时，触摸感应的区域通过连接装置传送给智能设备，智能设备处理器根据相应的算法得出触摸点的坐标，通过系统层层传递到应用层接口，应用View监听触摸事件坐标变化差来绘制各种痕迹、图形，同时根据相应的算法将所获取的所有信息显示到便携式显示器上。

所述通过系统层包括通过驱动层中断响应触摸事件，此后传到HAL层进行坐标转换处理，再将转换后的坐标数据传递到应用层的活动模块来；

再经过活动模块的事件分发方法分发给智能设备窗口，再传到智能设备窗口的父类事件分发方法，其调用修饰视窗的父类事件分发方法，传递到父控件的事件分发触摸事件方法，最终传递到自定义View的事件分发触摸事件分发处理事件。

所述连接装置采用Type-c线，所述子输入外设为HUB USB子输入外设，

所述智能设备通过Type-c线感应到便携式显示设备上的控件的位置操作本身系统的文件接口，通过调用智能设备应用调用系统文件存储API,对图片进行永久保存。

所述智能设备通过Type-c线感应到便携式显示设备的应用加载操作数据，通过系统API调取底层硬件的接口读取图片，然后对图片进行渲染显示。

通过所述触摸屏操作间接调用系统自带的应用，通过应用的意图值调起系统应用API唤起对应的应用。

一种基于副屏触摸的一种笔迹书写系统，包括智能设备、便携式显示设备及连接装置，所述便携式显示设备为带有触摸功能的触摸屏，所述智能设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的应用程序；所述应用程序通过便携式显示设备的触摸屏输入调用所述处理器执行时实现如权利要求1至7中任一项所述的一种基于副屏触摸的一种笔迹书写方法的步骤。

所述智能设备通过WIFI或者4G或者5G通信传输书写内容到第三方通信设备上。

所述智能设备的可读存储介质上存储有执行基于副屏触摸的一种笔迹书写方法的程序数据，通过执行该方法程序，可以实现本申请提供的如权利要求1至7中任一项基于副屏触摸的一种笔迹书写方法的步骤。

所述智能设备的可读存储介质可以为集成的模块或单元，或者是独立的可读存储介质。

本发明的方案是将目前现有的智能设备，包括智能手机、电脑、平板等通过连接装置外接一个带有触摸功能的便携式显示装置，优选的采用Type-c线连接智能设备，在便携式显示装置是上设置有提供更加高效，速率更快，使操作更加方便的程序，通过以上方法，使用了DP交替模式，USB Type-c的实力将会大增，因为它让平板电脑、笔记本产品通过一个迷你接口实现高速数据传输、视频输出、电力供应等功能，带来类似Android设备那样的“单接口、多功能”的操作功能，这比竞争对手Thunderbolt似乎强力很多，更不用说目前通过USB接口输出视频信号的简单方案了。

综上Type-c有很多的功能优势，在本系统和操作方法中用作便捷显示器与其他设备进行连接通信、传输音频视频、传输数据等。使得操作、连接更加方便，速度更快，能够给用户带来最佳的使用效果。

附图说明

图1为本发明的系统硬件连接示意图；

图2为本发明的操作方法控制流程示意图；

图3为本发明方法及系统操作流程顺序示意图。

具体实施方式

下面结合附图及较佳实施例详细说明本发明的具体实施方式。

如图1所示，首先是提供一种基于副屏触摸的一种笔迹书写方法，

本发明的方法所使用的设备包括便携式显示设备和智能设备，所述智能设备包括智能手机、平板电脑或笔记本电脑等，所述便携式显示设备和智能设备通过连接装置连接，所述连接装置可以采用无线连接，例如蓝牙或者WIFI等，或者采用数据线连接，数据线连接一般采用Type-c或者HDMI数据线连接，本发明的最优实施例采用USB Type-c数据线连接。

当智能设备连接便携式显示设备时，通过所述连接装置获取便携式显示设备自身相关的属性参数数据，然后再返回给智能设备；同时智能设备的系统提示有便携式显示设备接入，同时在便携式显示设备上显示所获取的属性参数数据；此时触摸屏会同时连接到智能设备上，形成一个子输入外设，将便携式显示设备上的触摸区域、触摸坐标传给智能设备；此时便携式显示设备同时具有了显示和触摸的功能。

当触摸屏被感应触摸时，触摸感应的区域通过连接装置传送给智能设备，智能设备处理器根据相应的算法得出触摸点的坐标，通过系统层传递到应用层接口，应用View监听触摸事件坐标变化差来绘制各种痕迹、图形，同时根据相应的算法将所获取的所有信息显示到便携式显示器上。

本实施例采用智能手机连接为例，由以Android设备为例；如图2和图3所示，当显示器通过一根Type-c数据线连接手机时，此时手机便是整个系统的核心，负责处理采集过来的触摸事件数据，开始在显示屏上操作，里面包含用手机消费、画出的移动轨迹、多手指等判断处理，然后根据Type-c线传过来的数据解析获取的移动坐标差来绘制痕迹。

以下步骤可以说明整个副屏的笔迹书写方法和本系统的操作步骤；

1.1Android设备连接显示器时，通过Type-c线材获取显示器存储设备自身相关的属性参数数据，例如分辨率、显示器所属的公司、类型、序列号等，通过Type-c线返回给手机设备，同时Android设备系统提示有其他屏插入状态栏提示，这时显示器上会根据所获取的分辨率、显示器所属的公司、类型、序列号等参数将正确的信息显示到副屏上面(此处的显示器为带有触摸屏的便携式显示器)。

1.2当显示器正常使用后，触摸屏也会同时连接到手机上，形成一个HUB USB子输入外设，将显示器上的触摸区域、触摸坐标传给手机，此时显示器同时具有了显示和触摸的功能。

1.3开始通过触摸屏进行操作，当有手指或者其他(比如电容笔等)感应触摸屏时，把触摸感应的区域通过Type-c线传给Android设备，手机的处理器根据相应的算法得出触摸点的坐标，通过系统层层传递到应用层接口，应用View监听触摸事件坐标变化差来绘制各种痕迹、图形等，同时根据相应的算法将所获取的所有信息显示到便携式显示器上。

1.4Android设备得到的痕迹的图片保存到Android设备或者相应的存储介质上，调用底层的硬件存储接口，对图片进行持久化保存。其原理通过Type-c线感应到控件的位置操作系统的文件接口，类似于操作Android设备应用一样调用系统文件存储API.应用加载时或者更换背景是逆过程，通过系统API调取底层硬件的接口读取图片然后对图片进行渲染显示。

在本实施例中，由于采用Android系统手机设备上连接显示屏为副屏，即分屏是系统扩展过来，以在副屏上操作发送邮件为例：

1.5我们根据Android设备应用，一般间接调用系统自带的E-mail系统应用，根据E-mail的意图值，调起系统E-mail API唤起邮箱应用，此时启动了邮箱应用，而启动邮箱应用时已把图片的存储路径传过来，邮箱根据图片路径直接显示图片在邮箱应用里面。同理副屏上唤起其他的系统应用或者其他第三方应用类似，根据相应应用的包名及意图即可调起来。

1.6Android设备所调用起来的E-mail系统应用启动电子邮箱，并将最终保存的图片载入附件，通过Android设备的WIFI或者4G功能将笔迹书写的内容发送到用户指定的邮箱里面去。与此同时，笔迹书写软件会将用户书写的笔迹、图片、内容都保存到存储介质里面去，方便下次用户再次登陆笔迹书写软件时调用。

以上流程方案及系统采用的全功能Type-c线作为连接装置，下面对此最优方案进行说明：

关于Type-c线连接；通过一根USB Type-c数据线达成DisplayPort信号传输以及供电的目的。它是USB 3.1标准的其中一种，拥有4对差分信号，上/下行各2对，全双工通信，同样支持USB 3.1的Power Deliver 2.0(最高支持20V/5A也就是100W供电)。

后来USB-IF推出了一个Alternate Mode交替模式，支持将USB Type-c线缆转化为其他用途，而DP交替模式就是第一个应用，它可以将其中一些或者全部差分信号通道转化为DisplayPort信号通道，如果还有剩余的差分信号，则可以继续用于USB 3.1高速数据传输。DP交替模式让未来的转接线和转接器变得更加统一，像是VGA、DVI以及未来的HDMI 2.0也都可以通过USB Type-c转接而来。

此外，DP交替模式也会受到USB 3.1/Type-c的物理限制，譬如DisplayPort1.3HBR3模式要求线材在1米内，这样USB线材才能提供10Gbps足额带宽，同理，HBR2模式要求线材在2米内。此外，DP交替模式目前也只能在无源USB线材上使用。

有了DP交替模式，USB Type-c的实力将会大增，因为它让平板电脑、笔记本产品通过一个迷你接口实现高速数据传输、视频输出、电力供应等功能，带来类似Android设备那样的“单接口、多功能”的可能性，这比竞争对手Thunderbolt似乎强力不少，更不用说目前通过USB接口输出视频信号的简单方案了

综上Type-c有很多的功能优势，在本发明的系统中用作便捷显示器与其他智能设备进行连接通信、传输音频视频、传输数据等。

当触摸屏被感应触摸时，触摸感应的区域通过连接装置传送给智能设备，智能设备处理器根据相应的算法得出触摸点的坐标，通过驱动层中断响应触摸事件，此后传到HAL层进行坐标转换处理，系统层将转换后的坐标数据传递到应用层的活动模块来。经过活动模块的事件分发方法分发给手机窗口，再传到手机窗口的父类事件分发方法，其调用修饰视窗的父类事件分发方法，传递到父控件的事件分发触摸事件方法，最终传递到自定义View的事件分发触摸事件分发处理事件。

自定义控件View可以处理传过来的触摸事件及根据触摸点的按下、移动、抬起及绘画的图像类型和画笔颜色，调用系统的绘画方法痕迹后输送到显示系统显示出来。当应用进入绘画页面时，先测量该控件的宽高，布局控件在页面的感应触摸位置，然后创建一个新的白色位图调用系统的绘画方法绘制一张空的位图页面且初始化一个自定义控件，里面创建监听捕捉手指的手势，初始化各种画笔的类型、样式、颜色等。当有手指触摸按下时用成员数组变量记录手指触摸时的坐标及移动、抬起时的坐标，根据痕迹图像算法计算出痕迹的运动轨迹，调用系统的Canvas类的方法把计算好的路径图绘制出来，然后传给显示系统缓存中，等到下一个刷新周期到时刷新显示在界面上即画笔痕迹显示出来。

本申请实施例还包含了一种存储介质，用于存储书写软件轨迹描述，其包含用于执行本申请上述副屏信息显示书写笔迹描述方法实施例所设计的程序数据。通过执行该存储介质中存储的笔迹书写方法程序，可以实现本申请提供的副屏信息显示笔迹书写以及书写渲染。集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个智能设备可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，也可以通过书写软件来指令相关的硬件来完成，笔迹书写程序可存储于一计算机可读存储介质中，该笔迹书写程序在被智能设备执行时，可实现上述各个方法实施例的步骤。其中，笔迹书写程序包括笔迹书写程序代码，笔迹书写程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。智能设备可读介质可以包括：能够携带笔迹书写程序代码的任何实体或装置、记录介质、U盘、移动硬盘、emmc、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，智能设备可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，智能设备可读介质不包括是电载波信号和电信信号。

以上对发明的具体实施方式进行了详细说明，但其只作为范例，本发明并不限制与以上描述的具体实施方式。对于本领域的技术人员而言，任何对该发明进行的等同修改或替代也都在本发明的范畴之中，因此，在不脱离本发明的精神和原则范围下所作的均等变换和修改、改进等，都应涵盖在本发明的范围内。

虽然以上描述了本发明的具体实施方式，但是本领域的技术人员应当理解，这些仅是举例说明，在不背离本发明的原理和实质的前提下，可以对这些实施方式做出多种变更或修改，因此，本发明的保护范围由所附权利要求书限定。

Claims (10)

1.一种基于副屏触摸的一种笔迹书写方法，

包括便携式显示设备和智能设备，所述智能设备包括智能手机、平板电脑，所述便携式显示设备和智能设备通过连接装置连接，所述连接装置包括无线或者数据线连接，其特征在于：

智能设备连接便携式显示设备时，通过所述连接装置获取便携式显示设备自身相关的属性参数数据，然后再返回给智能设备；

同时智能设备的系统提示有便携式显示设备接入，同时在便携式显示设备上显示所获取的属性参数数据；

此时触摸屏会同时连接到智能设备上，形成一个子输入外设，将便携式显示设备上的触摸区域、触摸坐标传给智能设备；

此时便携式显示设备同时具有了显示和触摸的功能。

2.根据权利要求1所述的一种基于副屏触摸的一种笔迹书写方法，其特征是：当触摸屏被感应触摸时，触摸感应的区域通过连接装置传送给智能设备，智能设备处理器根据相应的算法得出触摸点的坐标，通过系统层层传递到应用层接口，应用View监听触摸事件坐标变化差来绘制各种痕迹、图形，同时根据相应的算法将所获取的所有信息显示到便携式显示器上。

3.根据权利要求2所述的一种基于副屏触摸的一种笔迹书写方法，其特征是：所述通过系统层包括通过驱动层中断响应触摸事件，此后传到HAL层进行坐标转换处理，再将转换后的坐标数据传递到应用层的活动模块来；

再经过活动模块的事件分发方法分发给智能设备窗口，再传到智能设备窗口的父类事件分发方法，其调用修饰视窗的父类事件分发方法，传递到父控件的事件分发触摸事件方法，最终传递到自定义View的事件分发触摸事件分发处理事件。

4.根据权利要求3所述的一种基于副屏触摸的一种笔迹书写方法，其特征是：所述连接装置采用Type-c线，所述子输入外设为HUB USB子输入外设，

所述智能设备通过Type-c线感应到便携式显示设备上的控件的位置操作本身系统的文件接口，通过调用智能设备应用调用系统文件存储API,对图片进行永久保存。

5.根据权利要求4所述的一种基于副屏触摸的一种笔迹书写方法，其特征是：所述智能设备通过Type-c线感应到便携式显示设备的应用加载操作数据，通过系统API调取底层硬件的接口读取图片，然后对图片进行渲染显示。

6.根据权利要求3所述的一种基于副屏触摸的一种笔迹书写方法，其特征是：通过所述触摸屏操作间接调用系统自带的应用，通过应用的意图值调起系统应用API唤起对应的应用。

7.一种基于副屏触摸的一种笔迹书写系统，其特征在于，包括智能设备、便携式显示设备及连接装置，所述便携式显示设备为带有触摸功能的触摸屏，所述智能设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的应用程序；所述应用程序通过便携式显示设备的触摸屏输入调用所述处理器执行时实现如权利要求1至7中任一项所述的一种基于副屏触摸的一种笔迹书写方法的步骤。

8.根据权利要求7所述的一种基于副屏触摸的一种笔迹书写系统，其特征在于，所述智能设备通过WIFI或者4G或者5G通信传输书写内容到第三方通信设备上。

9.一种智能设备的可读存储介质，其特征在于，所述智能设备的可读存储介质上存储有执行基于副屏触摸的一种笔迹书写方法的程序数据，通过执行该方法程序，可以实现本申请提供的如权利要求1至7中任一项基于副屏触摸的一种笔迹书写方法的步骤。

10.根据权利要求9所述的一种智能设备的可读存储介质，其特征在于，所述智能设备的可读存储介质可以为集成的模块或单元，或者是独立的可读存储介质。

Images