CN117724620A - 交互方法和交互平板 - Google Patents

交互方法和交互平板 Download PDF

Info

Publication number
CN117724620A
CN117724620A CN202311460056.0A CN202311460056A CN117724620A CN 117724620 A CN117724620 A CN 117724620A CN 202311460056 A CN202311460056 A CN 202311460056A CN 117724620 A CN117724620 A CN 117724620A
Authority
CN
China
Prior art keywords
writing
touch
elastic wave
display screen
infrared
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311460056.0A
Other languages
English (en)
Inventor
请求不公布姓名
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Chuangzhi Technology Co ltd
Original Assignee
Guangzhou Chuangzhi Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Chuangzhi Technology Co ltd filed Critical Guangzhou Chuangzhi Technology Co ltd
Priority to CN202311460056.0A priority Critical patent/CN117724620A/zh
Publication of CN117724620A publication Critical patent/CN117724620A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04162—Control or interface arrangements specially adapted for digitisers for exchanging data with external devices, e.g. smart pens, via the digitiser sensing hardware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/043—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/045—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using resistive elements, e.g. a single continuous surface or two parallel surfaces put in contact
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Acoustics & Sound (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了交互方法和交互平板，通过红外触摸框检测触摸物的操作时，通过弹性波检测装置检测触摸物与显示屏接触产生的弹性波信号，并以弹性波检测装置检测到弹性波信号为时间点，对红外触摸框在该时间点之后检测到的操作信号进行响应，并且响应过程与由弹性波信号确定的介质类型关联，尤其对于书写操作中，显示的书写笔迹的显示属性与进行操作的触摸物的介质类型关联。本实施例可以区分不同的触摸物并显示具有不同显示属性的书写笔迹，并且书写笔迹与触摸物和显示屏之间的实际触摸轨迹相对应，实现了书写笔迹的差异化显示和精准显示。

Description

交互方法和交互平板
技术领域
本申请实施例涉及交互设备技术领域，尤其涉及交互方法和交互平板。
背景技术
随着智能化技术的发展，日常生活中人们接触的电子产品种类日益丰富，其中基于触控技术实现的交互类电子产品，因为良好的人机交互体验呈现越来全面的功能集成趋势。交互平板是其中一种具有代表性的一体化设备，适应于会议、教学、商业展示等群体交互场合，这种设备集成了投影机、视频会议等多种功能。
发明人在使用现有的交互平板时发现，交互平板在使用过程中，对触控操作的响应基本只有基于触控轨迹的具体输入判断，例如基于触控轨迹的轨迹输入或简单指令接收，当要改变触控轨迹的输入效果或实现较为复杂的控制指令时，需要根据多个触控输入的组合才能实现目标控制，例如对于书写过程来说，进行书写笔迹的显示属性设置时，需要较为复杂的触控操作组合才能实现设置目标。另外，对于使用红外触摸框的交互平板来说，由于红外触摸框的检测高度，导致在使用过程，容易存在误触的问题，使得实际的触摸轨迹不能准确显示，显示的书写笔迹与实际的触摸轨迹存在偏差，无法准确显示书写笔迹。
发明内容
本发明提供了交互方法和交互平板，以解决现有技术书写笔迹的设置过程复杂以及无法准确显示书写笔迹的技术问题。
第一方面，本申请实施例提供了一种交互方法，用于交互平板，所述交互平板包括显示屏和红外触摸框，所述红外触摸框设置于所述显示屏的边框，所述交互平板还包括弹性波检测装置，所述交互方法包括：
所述显示屏显示白板应用的界面；
所述红外触摸框检测到触摸物对所述白板应用进行第一操作，所述第一操作用于选择所述白板应用的书写模式；
根据所述第一操作调用确定所述白板应用的第一书写模式；
所述红外触摸框检测到所述触摸物对所述白板应用进行第二操作；
所述弹性波检测装置检测到第一弹性波信号，所述第一弹性波信号由所述触摸物对所述白板应用进行第二操作时，所述触摸物接触所述显示屏时产生；
根据所述第一弹性波信号确定所述触摸物的介质类型；
在所述弹性波检测装置检测到所述第一弹性波信号之后，启动对所述第二操作的响应；
所述启动对所述第二操作的响应，包括：
当所述第二操作为书写操作时，基于所述触摸物的介质类型确定所述书写操作的显示属性；
根据所述显示属性，显示所述第二操作对应的书写笔迹。
第二方面，本申请实施例提供了一种交互方法，用于交互平板，所述交互平板包括显示屏和红外触摸框，所述红外触摸框设置于所述显示屏的边框，所述交互平板还包括弹性波检测装置，所述交互方法包括：
所述红外触摸框检测到触摸物进行书写操作；
所述弹性波检测装置检测到第一弹性波信号，所述第一弹性波信号由所述触摸物进行书写操作时，所述触摸物接触所述显示屏时产生；
根据所述第一弹性波信号确定所述触摸物的介质类型；
在所述弹性波检测装置检测到所述第一弹性波信号之后，启动对所述书写操作的响应；
所述启动对所述书写操作的响应，包括：
基于所述触摸物的介质类型确定所述书写操作的显示属性；
根据所述显示属性，显示所述书写操作对应的书写笔迹。
第三方面，本申请实施例一种交互方法，用于交互平板，所述交互平板包括显示屏和红外触摸框，所述红外触摸框设置于所述显示屏的边框，所述交互平板还包括弹性波检测装置，所述交互平板还配置有书写笔，所述书写笔包括笔尖和笔尾，所述笔尖和所述笔尾的介质类型不同，所述交互方法包括：
所述红外触摸框检测到所述笔尖进行第一操作；
所述弹性波检测装置检测到第一弹性波信号，所述第一弹性波信号由所述笔尖接触所述显示屏时产生；
根据所述第一弹性波信号确定所述笔尖接触所述显示屏后，确定所述第一操作为书写操作，并基于所述笔尖的介质类型，确定所述第一操作的显示属性，并根据所述显示属性，显示所述第一操作对应的书写笔迹；
所述红外触摸框检测到所述笔尾进行第二操作；
所述弹性波检测装置检测到第二弹性波信号，所述第二弹性波信号由所述笔尾接触所述显示屏产生；
根据所述第二弹性波信号确定所述笔尾接触所述显示屏后，确定所述第二操作为擦除操作，并将处于所述第二操作的操作轨迹上的书写笔迹进行擦除。
第四方面，本申请实施例还提供了一种交互平板，包括显示屏、红外触摸框和控制系统，所述红外触摸框设置于所述显示屏的边框，所述显示屏和红外触摸框均与所述控制系统连接，所述交互平板还包括弹性波检测装置，所述弹性波检测装置与所述控制系统连接；
所述显示屏，用于显示白板应用的界面；
所述红外触摸框，用于检测到触摸物对所述白板应用进行第一操作，所述第一操作用于选择所述白板应用的书写模式；
所述控制系统，用于根据所述第一操作调用所述白板应用的第一书写模式；
所述红外触摸框，还用于检测到所述触摸物对所述白板应用进行第二操作；
所述弹性波检测装置，用于检测到第一弹性波信号，所述第一弹性波信号由所述触摸物对所述白板应用进行第二操作时，所述触摸物接触所述显示屏时产生；
所述控制系统，还用于：
根据所述第一弹性波信号确定所述触摸物的介质类型；
在所述弹性波检测装置检测到所述第一弹性波信号之后，启动对所述第二操作的响应；
其中，所述启动对所述第二操作的响应，包括：
当所述第二操作为书写操作时，基于所述触摸物的介质类型确定所述书写操作的显示属性；以及
根据所述显示属性，在所述显示屏上显示所述第二操作对应的书写笔迹。
第五方面，本申请实施例还提供了一种交互平板，包括显示屏、红外触摸框和控制系统，所述红外触摸框设置于所述显示屏的边框，所述显示屏和红外触摸框均与所述控制系统连接，所述交互平板还包括弹性波检测装置，所述弹性波检测装置与所述控制系统连接；
所述红外触摸框，用于检测到触摸物进行书写操作；
所述弹性波检测装置，用于检测到第一弹性波信号，所述第一弹性波信号由所述触摸物进行书写操作时，所述触摸物接触所述显示屏时产生；
所述控制系统，用于：
根据所述第一弹性波信号确定所述触摸物的介质类型；
在所述弹性波检测装置检测到所述第一弹性波信号之后，启动对所述书写操作的响应；
其中，所述启动对所述书写操作的响应，包括：
基于所述触摸物的介质类型确定所述书写操作的显示属性；
根据所述显示属性，在所述显示屏上显示所述书写操作对应的书写笔迹。
上述交互方法和交互平板，通过红外触摸框检测触摸物的操作时，通过弹性波检测装置检测触摸物与显示屏接触产生的弹性波信号，并以弹性波检测装置检测到弹性波信号为时间点，对红外触摸框在该时间点之后检测到的操作进行响应，并且响应过程与由弹性波信号确定的介质类型关联，尤其对于书写操作中，显示的书写笔迹的显示属性与进行操作的触摸物的介质类型关联。本申请实施例可以区分不同的触摸物并显示具有不同显示属性的书写笔迹，并且书写笔迹与触摸物的实际触摸轨迹相对应，实现了书写笔迹的差异化显示和精准显示。
附图说明
图1为本申请实施例提供的一种交互平板的交互方法的方法流程图；
图2为本申请实施例提供的交互平板的一种交互界面示意图；
图3为本申请实施例提供的基于红外光的触控传感模组的示意图；
图4为本申请实施例提供的弹性波检测的示意图；
图5为本申请实施例提供的手指指腹的触控输入示意图；
图6为本申请实施例提供的书写笔的触控输入示意图；
图7为本申请实施例提供的第一种书写笔的结构示意图；
图8为本申请实施例提供的第二种书写笔的结构示意图；
图9为本申请实施例提供的两个手指指腹对应的触摸点的运动状态示意图；
图10为本申请实施例提供的一个手指指腹和一支书写笔对应的触摸点的运动状态示意图；
图11为本申请实施例提供的笔身对应的触摸点的运动状态示意图；
图12为本申请实施例提供的一种交互平板的交互方法的方法流程图；
图13为本申请实施例提供的一种交互平板的结构示意图；
图14为本申请实施例提供的一种交互平板的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
需要注意的是，由于篇幅所限，本申请说明书没有穷举所有可选的实施方式，本领域技术人员在阅读本申请说明书后，应该能够想到，只要技术特征不互相矛盾，那么技术特征的任意组合均可以构成可选的实施方式。
例如，在实施例的一个实施方式中，记载了一个技术特征：将所述弹性波信号输入预先训练得到的分类模型，根据所述分类模型输出的分类函数值，确认所述弹性波信号对应的介质类型，在实施例的另一个实施方式中，记载了一个技术特征：书写笔的显示属性可以通过书写笔在属性切换窗口的触控操作进行切换设置，本领域技术人员在阅读本申请说明书之后，应该能够想到，同时具有这两个特征的实施方式也是一种可选的实施方式，即在具体实施过程中，在属性切换窗口进行检测到触控操作时也能通过分类模型确认该触控操作对应的介质类型，并将该触控操作确认的目标显示属性关联到对应的介质类型。
下面对各实施例进行详细说明。
图1为本申请实施例提供的一种交互平板的交互方法的方法流程图，该交互平板的交互方法，用于交互平板，交互平板用于实现对人机交互过程中的内容显示和交互响应。
为了便于理解，实施例中示例性描述交互平板的交互方法实施时触控操作的检测、触控操作的判断和触控操作的响应显示的详细过程。交互平板可以是通过触控技术对显示在显示屏上的内容进行操控和实现人机交互操作的一体化设备，其集成了投影机、电子白板、幕布、音响、电视机以及视频会议终端等一种或多种功能。当然，交互平板并不包括对显示面的表面特征的限定，例如交互平板的表面特征可以是平面、曲面或多个平面的拼接等。
典型的，交互平板安装有至少一种操作系统，其中，操作系统包括但不限定于安卓系统、Linux系统、Windows系统和华为鸿蒙系统，其用于控制和协调交互平板及外部设备，使得交互平板中各种独立的硬件可以作为一个稳定的整体协调工作，操作系统所在的架构层级定义为系统层。在系统层的基础上，交互平板中安装有为满足用户不同领域、不同问题而开发的应用程序，其对应所在的架构层级为应用层。在本方案的具体实施例描述中，交互平板可以安装至少一个具有书写功能的应用程序。其中，该具有书写功能的应用程序可以为操作系统自带的应用程序，同时，也可以是从第三方设备或者服务器中下载的应用程序。可选的，应用程序除具备基于触控操作的书写功能外，还具有其他编辑功能，如删除功能、插入表格、插入图片、插图图形、绘制表格、绘制图形等功能。
交互平板的显示屏中显示的图形界面所覆盖的范围，可以是检测用户操作的触控检测区域，即图形界面和触控检测区域的范围基本重合，也可以不重合。在该触控检测区域进行触控操作时，如通过书写笔或手指接触具有触摸功能的显示屏进行书写时，显示屏的触控传感模组可以感应到红外光的变化、电流的变化、电压的变化、磁通量的变化或压力的变化(对应于红外显示屏、电容显示屏、电阻显示屏、电磁显示屏或压感显示屏的具体设置类型)，从而进行转换后得到含有触摸位置的坐标的触摸信号以及该触摸信号的触发时间，根据触摸位置的坐标以及触摸信号的触发时间，可以得到书写笔或用户手指每次按下书写至抬起停止书写过程中输入的书写轨迹的轨迹数据，根据轨迹数据在显示屏的图形界面实时显示用户输入的书写轨迹。当然，书写过程不限于写字，在交互平板的显示屏实现的任何用于显示操作轨迹的录入过程均可视为书写过程。此外根据触控操作的发生位置的显示元素的不同，触控操作可以响应为用户的点击、拖拽等操作。这些不同的响应方式在底层的坐标处理方式是相同的。基于触摸和显示等基本功能的硬件实现，可以实现交互平板的各种交互显示设计。需要说明的是，从用户交互的体验而言，交互平板的显示界面与触控检测区域一般为同一界面，而对于笔记本电脑，显示界面与触控检测区域可能完全相互独立，也可能部分独立部分重合。
如图2所示，交互平板1包括至少一块显示屏。例如，交互平板1配置有一块具有触摸功能的显示屏，该具有触摸功能的显示屏可以是红外显示屏、电容显示屏、电阻显示屏、电磁显示屏或压感显示屏等。在具有触摸功能的显示屏上，用户可以通过手指或书写笔触控显示屏的方式实现触控操作，相应的，交互平板检测触控位置，并根据触控位置进行响应，以实现触控功能。具有触摸功能的显示屏上所采用的触摸传感模组不同时，触摸传感模组采集的原始的触感信号不同，转换所得的触摸信号也不完全相同。
对于红外显示屏，触控传感模组为红外触摸框，其采集的触感信号可以包括表示红外线受阻的信号，转换所得的触摸信号可以包括位置触摸信号，该位置触摸信号可以包括触摸位置的X坐标和Y坐标。对于电容显示屏，触控传感模组为电容式触摸板，其采集的触感信号可以包括流经触摸屏的各电极的电流，转换所得的触摸信号可以包括位置触摸信号，该位置触摸信号可以包括触摸位置的X坐标和Y坐标。对于电阻显示屏，触控传感模组为电阻式触摸板，其采集的触感信号可以包括触摸位置的电压，转换所得的触摸信号可以包括位置触摸信号，该位置触摸信号可以包括触摸位置的X坐标和Y坐标。对于电磁显示屏，触控传感模组为电磁板，其采集的触感信号可以包括磁通量的变化量和接收的电磁信号的频率，转换所得的触摸信号可以包括与所述磁通变化量对应的位置触摸信号、与所述频率对应的压感信号，该位置触摸信号可以包括触摸位置的X坐标和Y坐标；压感信号可以包括压力值。对于压感显示屏，触控传感模组为压力传感器，其采集的触感信号可以包括压力信号，转换所得的触摸信号可以包括位置触摸信号，该位置触摸信号可以包括触摸位置的X坐标和Y坐标。
红外触摸框根据触摸物在显示屏表面对红外光束栅格的遮挡状态检测得到红外触摸信号，从而根据红外触摸框检测到的红外触摸信号可以识别到触摸物进行的第一操作。对于红外触摸信号的检测，以如图3所示基于红外光的触控传感模组12为例。图3所示的触控传感模组12包括两组红外发射器121和两组红外接收器122，每组红外接收器122分别与一组红外发射器121相对设置，并使得红外接收器122与红外发射器121按顺序一一对应排列。红外发射器121用于发射红外光信号，红外接收器122用于接收红外光信号，利用不同方向上密布的红外光信号形成横竖交叉的光束栅格来完成触摸位置的检测，获得红外触摸信号，并进一步可以确认触控位置信息。具体来说，当触摸物遮挡了红外光，对应的红外接收器122的光测量值发生变化，从而可以判断出触摸物在触控检测区域中的位置，即触控位置信息。
当不同的触摸物触碰或接近显示屏时，触摸物会完全或部分遮挡一个或多个垂直与水平方向的红外光。水平设置的红外发射器(共M个)和垂直设置的红外发射器(共N个)以一定的频率扫描，另一侧对应设置的红外接收器则以一定频率接收对侧发送的红外光。当全部垂直和水平的红外光扫描结束后，可以得到一张M*N的红外光强像素图。首先找到大于第一接触阈值I1的位置，该阈值代表一个真实有效的触碰，而非噪声或者物体接近而未完全触碰时半遮挡红外光路；按照顺序标记触碰位置(Xn,Yn),其中，X与Y代表该位置的坐标，下标中的n代表第几个真实有效的触碰区。从该位置开始，查看临近区域大于第二接触阈值I2的位置，该阈值代表一个大于噪声值的位置，可以作为真实触碰区的延伸，整个区域被标记为一个有效的触摸区域。通过触摸区域的大小，可以将触摸区域的几何形状Sn记录下来，可以为原始数据的几何边界，也可以为拟合后得到的几何图形，如椭圆的长短轴及旋转角度，或矩形的两个边长及旋转角度。
当触碰的物体远离屏幕盖板时，物体对于红外光的遮挡会变小，如果M*N的红外光强像素图中，上一帧被标记为有效触碰n的原本位置或邻近位置，均没有超过脱离阈值I3的像素，则该有效触摸n变为脱离触碰。对于同一个有效的触摸，内存会连续记录该触摸点的位置和触摸区域信息。通过上述信息，可以进而得出该有效触摸的速度vn、加速度an、角速度αn、角加速度βn等信息。
图2所示的交互平板1的边框为矩形，图3所示的触控传感模组安装于边框，通过边框内的电路板与交互平板1内部实现信息传递。当然，沿矩形边框设置的触控传感模组12只是适应于矩形的交互平板1的设计，在实际产品实现过程中，根据应用场景和使用需求的不同，交互平板1的形状也有所不同，如还可以是六边形、圆形等，边框的形状也对应可以是六边形、圆形等，针对不同形状的边框，各个触控传感模组12中红外发射器121和红外接收器122的设置也有所不同，但是整体上仍保持红外发射器121与红外接收器122一一对应设置通过横竖交叉的光束栅格完成触摸位置的检测的布置原则。
红外触摸框的红外发射器121和红外接收器122发射或接收光信号是存在一定高度范围的，从而在垂直方向上形成红外触摸框的触控区域，其具有一定高度，在触摸物按下、抬起的阶段，会存在触摸物位于该触控区域内、但并未接触到显示屏表面的情况，此时红外触摸框依然会产生红外触摸信号，交互平板会根据产生的红外触摸信号执行相应的操作，如显示触摸物的书写轨迹。也就是，通过红外触摸框来实现交互平板的触控功能，会存在一个书写高度，无法做到零书写高度。由于用户日常使用的触控设备多为手机、平板电脑，这些触控设备多应用电阻式或电容式的触控操作，使得用户多习惯使用电阻式或电容式的触控操作，即接触到显示屏时才会上报红外触摸信号、执行相应的操作。用户在维持使用电容式的触控操作的习惯的情况下，触发红外式的触控操作，在部分的场景下容易导致误操作。
以书写轨迹为例，用户在显示屏进行书写操作，当手指在红外触摸框的触控区域内，但并未接触到显示屏时，就显示笔迹，但用户此时可能是正在落笔，还未开始书写，但是显示屏上会显示书写笔迹，从而导致书写笔迹与手指的实际触摸轨迹并不对应，会存在偏差，现有技术方案无法实现零书写高度。
另外，在现有的触控方案中，检测触控操作获得的触控传感信息主要是触控位置信息，基于触控位置信息，可以实现触控轨迹的输入，或者基于触控轨迹的某种特征(时长、形状、触控目标、接触面积等)实现触控操作指令的输入。在仅基于触控位置信息的交互体系下，不管触控轨迹的输入还是触控操作指令的输入，都只能通过多次触控操作或者复杂的触控轨迹实现对比不同交互控制的精确满足，例如要输入与前一次显示属性不同的触控轨迹，需要在前一次触控轨迹输入之后通过显示属性的设置菜单进行显示属性的设置，在这个显示属性的设置过程，用户至少需要依次触发显示属性对应的菜单，触发选中显示属性，例如要设置书写笔迹的显示颜色时，需要依次触发显示颜色对应的菜单，然后进行颜色选择，才能设置书写笔迹的目标颜色。当需要频繁切换书写笔迹的显示属性时，需要多次重复上述设置过程，操作复杂，效率较低。
本申请实施例提供的交互方法所适用的交互平板，除了包括前文所述的显示屏和设置于显示屏的边框的红外触摸框，还包括弹性波检测装置。
在本方案中，交互平板对触控操作的检测不止有触控位置信息的检测，同时还有触控操作时触摸物与交互平板的显示界面接触时发生振动的信号的检测，即弹性波信号的获取。其中，音频以下的机械振动，音频范围的声音，超过音频的超声波，这些都是气体、液体、固体等介质的波动现象，相对于光和电磁波来说，这种波动现象叫做弹性波。
在本方案的实施过程中，如图4所示，对于弹性波信号的检测，通过弹性波检测装置中的弹性波传感器11完成，弹性波传感器11具体安装在可以传递显示屏发生的振动的位置，从而实现对显示屏上触摸物触碰到显示屏的事件的检测，而不一定安装在发生振动的位置。如图4所示可以在显示屏的4个角布置弹性波传感器11，当然也可以有其它的布置方式，例如在矩形边框每条边的中点处设置，数量也可以是其它数量，例如2个、5个，只要弹性波传感器11能够检测到触控操作过程中触摸物与显示屏接触时的振动，具体布置的数量可以根据显示屏的尺寸和检测精度进行针对性设置，一般来说，显示屏的尺寸越大，检测精度要求越高，弹性波传感器11设置的数量越多。弹性波传感器11可以直接安装在显示屏的表面，例如直接安装在显示屏的上表面或者显示屏的下表面，从而接收由显示屏传递的振动，提高触碰检测的精确度。弹性波传感器11还可以安装在显示屏的边框内，减少对内部结构的影响，同时减少来自显示屏的共模噪声干扰。当然，弹性波传感器11也可以安装在与显示屏相接触的其他部件上，通过其他部件的传递接收发生在显示屏的振动。
弹性波传感器可以是全部被动检测弹性波，也可以是其中的一个或多个可以主动向外激发弹性波，激发的弹性波能被所有的弹性波传感器检测到，当显示屏的盖板上有外部触碰发生时，会另外产生弹性波被所有弹性波传感器检测到，系统可以根据多个弹性波的综合作用产生的信号判断外部触碰对应的介质类型。
当物体在显示屏的盖板上触碰(包括点触、滑动)时，会产生具有特征的弹性波，该弹性波从接触点开始，沿着盖板向四周传播，或者向盖板内部传播。位于屏幕边框处或盖板内部的弹性波传感器根据检测方式的不同可以将振动信号转化为传感信号，传感信号传输到含有温度补偿的处理器中，进行放大处理，并转为数字的弹性波信号。这里，传感信号包括电压信号、电流信号或磁通量信号。弹性波传感器在检测到传感信号的过程中，根据传感信号的强度，判断是否有效触碰信号，并过滤噪声信号。
以电压信号为例，物体与显示屏的盖板接触过程中弹性波传感器得到的电压信号会以一定频率f被扫描，当电压值大于第一电压阈值V1时，该电压值会被记录为一个高于噪声的有效的压电值，反之则记录为零电压。在具体的判断过程中，第一电压阈值V1可以随着温度有相应的变化，原因是电路噪声会随着温度有变化，且压电材料的耦合系数亦会随着温度发生相应的改变。连续记录的K个电压信号，即为一个弹性波信号片段，该片段的时长为T0＝K/f。在该片段中，如果在该片段的K个信号均没有大于第一电压阈值V2，则表示信号的强度没有达到有效的触碰强度，判断为噪声信号，将其舍弃；反之，如果K个电压信号中，有一个信号大于第一电压阈值V2，则表示信号的强度达到有效的触碰强度，记录为一个有效的触碰信号。
当然，根据弹性波传感器检测方式的不同，弹性波转化的信号类型不同，例如还可以是磁通量的变化，然后根据磁通量的变化转变生成对应的数字信息，实现对弹性波的检测。
根据弹性波传感器检测到的传感信号，可以知道在时间为ti的时刻，触摸物的中心位置及接触形状。结合温度信息，可以得出不同弹性波在盖板中传播的速度，如表面波的波速为va(T)，这是一个关于温度T的函数，该波速可能是各向异性的(例如盖板材料的各向异性，或者内应力的不同导致的各向异性)。根据位置信息，可以得出该触摸物离一个弹性波传感器的距离为Sk，则触摸物的弹性波信号，于(ti+Sk/va)时刻到达该弹性波传感器；并且该弹性波的强度会随着距离衰减，到达该弹性波传感器的信号强度与原信号强度的比值为～1/(Sk^2)。具体衰减速率与显示屏的盖板温度以及弹性波本身的频率也有关系，整体而言，盖板温度越高，衰减速率越快；频率越高，衰减速度越快。同理可以得出，其他弹性波传感器的信号接收时间与信号强度关系。
弹性波传感器得到的所有弹性波信号，可以根据信号的时间、频率等特征量的不同，可以去除一些噪声信号。首先是来自于触碰行为之外的振动信号，如外部的振动、内部的扬声器或框架均会产生一些振动，而在弹性波传感器检测到的信号的帮助下，可以判断出有效信号出现的时间段，在其他时间段的弹性波信号均为非触碰导致的信号。将不同时间段的压电传感器中的非有效触碰信号去除，有利于后续步骤对于物体的识别和判断。其次是来自于触碰行为但是触摸物的特征在先没有记录的。对于用于交互的触摸手势或者其他物体触碰，均有已知的特征频率分布，如系统支持的手指与手写笔、橡皮擦点触或滑动时，特征频率在1kHz到20kHz之间，而其他频率的信号均为噪声或者不支持的信号；故对于电压信号可以做快速傅里叶变化，将不支持的频率区间过滤出信号区间。
需要说明的是，在同一个位置的弹性波传感器可以有一个或多个极化方向的传感器组合而成。例如两个为+/-Z方向的极化方向，可以用差分电路求两个压电信号的差值，可以放大信号并且减少因为温度等原因引起的压电系数变化。又例如一个或多个XY平面内极化方向的压电传感器，可以感应到多一个维度的弹性波信号，可以检测不同的弹性波的传播，可以增加信息量(便于多点的识别与判断)，且可以增加防水(利用水的切变模量较低，检测切向波的特征信号)或者其他污渍的功能。
至此，弹性波传感器可以输出一段有效的弹性波信号，弹性波信号以对应的电压信号的方式记录，其中可以确认振幅、频率和相位等信息。
从弹性波产生的源头而言，包括交互平板内各种产生噪声的元件(如马达、喇叭、风扇等)和交互平板外部产生噪声的设备(如室内空调、电视等)，这些元件在使用的过程中，会导致交互平板产生非用户控制本意的弹性波。通过元件的类别，可以确认该元件产生噪声的方式，例如，喇叭所产生的噪声主要来自于其发出声音时所导致的交互平板整体介质中产生弹性波，对于弹性波传感器而言，可以随时检测到各种弹性波信号，但是其中有很多并不是来自于触控操作本身。
针对这些元件或设备，可以预先采集不同驱动电压下在预设的时间周期内、该元件或设备产生的弹性波信号，并将该弹性波信号对应转换得到的电信号作为噪声信号。在将弹性波传感器检测到的所有信号进行噪声滤除，排除噪声干扰之后，即可得到有效的弹性波信号。在滤除噪声的过程中，考虑到噪声信号产生的干扰并不相同，可以参照噪声信号自适应地对触控操作本身产生的信号进行放大或缩小，以凸显噪声信号与触碰操作本身产生的信号的差别。
考虑到喇叭等噪源产生噪声较为轻微时，触摸物触碰时产生的弹性波信号明显会高于喇叭等噪源产生的弹性波信号(即噪声信号)，此时，两者之间区别并不明显，通过设定电压范围限定电压的阈值，可更为容易确认噪声所产生的弹性波波段并予以去除，以此降低计算量的情况，有效提高滤除噪声的效率，快速得到触控操作本身对应的信号，即弹性波信号。具体来说，在电压的阈值组成的范围内，将所有检测到的弹性波信号和噪声信号进行相位比对，去除其中与噪声信号相位一致的信号数据，降低实际计算时不必要的计算量，例如，当喇叭等噪源产生的噪声较为轻微时，用户操作触碰时产生的触碰信号明显会高于喇叭等噪源产生的噪声信号，此时，将两者相对比，其区别并不明显，而通过限定电压的阈值的方式，则可更为容易确认噪声所产生的波段并予以去除，以此有效提高噪声去除的效率。在滤除过程中，可将所有的弹性波信号和噪声信号进行相位比对，如果弹性波信号中与噪声信号相位一致，将弹性波信号中与噪声信号相位一致的信号数据予以删除，如果弹性波信号中与噪声信号相位相反，将弹性波信号中与噪声信号相位相反的信号数据予以保留，以此避免在噪声信号的波段与弹性波信号的波段相反的情况下直接相减带来的误差，保留弹性波信号中真实源自触控操作的信号。
在以上交互平板整体设计的基础上，该交互方法包括：
步骤S110：所述显示屏显示白板应用的界面。
界面指一个应用程序用于接收和/或展示信息的交互界面，例如视频播放类的应用，其交互界面主要用于展示变化的视频画面；实时通信类的应用，其交互界面主要用于接收近端用户输入的内容和展示远端用户输入的内容；文件编辑类的应用，其交互界面主要用于接收用户输入的内容并进行展示；浏览器类的应用，其交互界面主要用于接收用户输入的关键字并展示基于该关键字得到的网页内容。
在描述本方案的实现过程时，主要以在白板应用使用过程中呈现的用户界面，即白板应用的界面中进行的控制操作或书写操作为示例进行阐述。如前所述，白板应用指供用户进行书写、展示等操作的应用，可以用于根据用户在白板应用的界面的书写操作生成书写笔迹，也可以用于在白板应用的界面插入和显示多媒体元素，所述多媒体元素可以包括图形、图像、表格、文档、音频文件和/或视频文件。在白板应用的界面中，用户可以实现与实体黑板类似的写、画、擦除等操作，并进一步有更好的移动、保存、缩放、插入图片、颜色调整、笔画粗细设置等数字化功能。在实际应用中，白板应用也可以命名为书写应用、电子白板应用、协同白板应用等名称，不管名称如何改变，只要用于实现上述功能的应用，均等同于本申请的白板应用。
对于白板应用的界面中具体交互过程的实现，可以是对界面内的输入或控制的交互反馈，还可以有系统级的交互反馈，例如快速显示系统桌面、屏幕截图等，虽然交互对应的应用层级不同，但是整体上的交互反馈原理一致。更具体的交互相关操作可以通过单点的单次点击、长按、滑动、多次点击等实现，也可以通过多点的同时滑动、点击、长按、旋转等实现，还可以通过多点间距离变化趋势实现，这一类操作主要用于实现控制操作。而对于白板应用的界面中实质内容的变化，主要通过书写操作实现。
步骤S120：所述红外触摸框检测到触摸物对所述白板应用进行第一操作，所述第一操作用于选择所述白板应用的书写模式。
具体的，白板应用支持至少两种书写模式，且至少一种所述书写模式下，设定至少两种不同介质类型的触摸物的显示属性和/或操作属性，所述操作属性包括书写操作、移动操作、擦除操作、选择操作和/或鼠标操作。
本实施例中，根据触控位置信息可以确认触摸物在白板应用的界面的操作目标并进行对应响应，例如新建白板页面、白板页面翻页等，如果触摸物在白板应用的界面的操作目标是用于选择白板应用的书写模式，则确定接收到对白板应用进行的第一操作。
在具体实现过程中，步骤S120可以通过步骤S121-步骤S123实现：
步骤S121：所述红外触摸框检测到触摸物对所述白板应用进行第一点击操作，所述第一点击操作用于调用所述白板应用的书写模式设置界面。
步骤S122：根据所述第一点击操作，在所述白板应用的界面上显示书写模式设置界面。
步骤S123：所述红外触摸框检测到所述触摸物对所述白板应用进行第一操作，所述第一操作用于在所述书写模式设置界面上，选择所述白板应用的书写模式。
白板应用的界面显示有用于进入书写模式设置界面的操作控件，当根据触控位置信息确认有触摸物在该操作控件的显示区域进行触控操作，即确认检测到第一点击操作，对应触发该操作控件，在白板应用的界面上调用并显示书写模式设置界面，在书写模式设置界面中显示有多种书写模式，每种书写模式对应设置有开启按钮控件，当根据触控位置信息确认有触摸物在开启按钮控件的显示区域进行触控操作，即确认检测到第一操作，如果第一操作触发的开启按钮控件对应的书写模式本来处于禁用状态，则第一操作选择该书写模式，将会触发开启该书写模式。另外，如果本来已有书写模式启动，只是当前转为后台运行，则第一操作选择该书写模式，将会触发调用该后台运行的书写模式。第一操作可以是与预设轨迹匹配的触控操作，也可以是触发进入书写模式设置界面，然后退出书写模式设置界面的组合操作。这里，书写模式设置界面可以是比白板应用的界面尺寸小的界面，从而叠加显示在白板应用的界面上，也可以是覆盖显示在白板应用的界面上的。另外，在选择完白板应用的书写模式后，书写模式设置界面可以自动隐藏，或者基于用户的隐藏操作进行隐藏。
步骤S130：根据所述第一操作确定所述白板应用的第一书写模式。
将第一操作选择的书写模式确定为第一书写模式，开启或调用第一书写模式，后续的书写过程均根据第一书写模式支持的介质类型以及响应方式执行。
基于交互平板中弹性波检测装置检测到的弹性波信号，白板应用可以有多种书写模式，例如可以包括智能书写笔模式(仅支持书写笔书写)、多人书写模式(同时支持书写笔书写和手指指腹书写)、双色笔书写模式(支持两种颜色的笔迹书写)、文本识别模式(支持通过书写笔选中区域进行文字识别)等。至少一种上述书写模式下，设定至少两种不同介质类型的触摸物的显示属性和/或操作属性，操作属性包括书写操作、移动操作、擦除操作、选择操作和/或鼠标操作。具体的，在不同的书写模式下，基于介质类型的书写操作和控制操作的响应机制有所区别，从而使得书写操作的显示属性或者控制操作的操作属性有所区别。以书写操作的区别为例，当白板应用启用智能书写笔模式时，仅支持书写笔书写，不支持手指指腹书写功能，而开启多人书写模式，则需要同时支持书写笔书写和手指指腹书写，因此，智能笔书写模式跟多人书写模式为两种不同的模式，支持不同的触控功能，因此开启智能书写笔模式时，提示禁用多人书写模式，开启多人书写模式时，提示禁用智能书写笔模式，以提醒用户，白板应用已经实现了触控功能的切换。文本识别模式是通过书写笔选中区域进行文字识别，因此当开启文本识别模式时，同样也需要提醒用户禁用智能书写笔模式。因此，为便于用户确认当前的书写模式启用以及停用状态，因为某个书写模式的启用而导致其它书写模式停用时，可以进一步输出禁用提醒，通过启用提醒和禁用提醒，向用户明确当前启用和禁用的书写模式。在具体操作过程中，书写模式的切换，可以是通过在白板应用界面发生的选择操作来触发的，例如在白板应用界面显示多种书写模式的启用按钮，通过点击或者关闭启用按钮来实现书写模式的切换。例如，当点击开启第一书写模式按钮时，自动关闭第二书写模式按钮，实现将书写模式从第二书写模式切换到第一书写模式。
整体而言，如果将当前需要开启的书写模式为第一书写模式，对应需要禁用的书写模式定义为第二书写模式，那么根据当前开启的书写模式不同，第一书写模式和第二书写模式可以有如下对应关系：
对应关系一：所述第一书写模式为智能笔书写模式，所述智能笔书写模式对应的触控输入操作包括通过书写笔的触控输入操作和通过手指指腹的触控输入操作；所述第二书写模式包括多人书写模式和双色笔书写模式中的一种或多种。
对应关系二：所述第一书写模式为多人书写模式，所述多人书写模式对应的触控输入操作包括通过手指指腹的触控输入操作；所述第二书写模式包括智能笔书写模式、双色笔书写模式、图表绘制模式和文本识别选择模式中的一种或多种。在多人书写模式下，并不能对多个手指指腹进行准确区分，因此，多人书写模式下所有的书写笔迹的显示属性相同。
对应关系三：所述第一书写模式为双色笔书写模式，所述双色笔书写模式对应的触控输入操作包括通过书写笔的触控输入操作；所述第二书写模式包括智能笔书写模式、多人书写模式、图表绘制模式和文本识别选择模式中的一种或多种，在双色笔书写模式下，主要通过红外检测书写笔的触点的大小对书写笔进行区分，即在双色笔模式下，不同大小的书写笔对应显示不同颜色的书写笔迹。基于触点大小的书写笔的区分，主要是根据触点的大小来进行书写笔区分，既可能导致相同介质类型的书写笔呈现不同的显示属性(书写笔的笔头的大小不同)，也可能导致不同介质类型的书写笔呈现相同的显示属性(书写笔的笔头的大小相同)。
步骤S140：所述红外触摸框检测到所述触摸物对所述白板应用进行第二操作。
与第一操作是一个交互目标明确(用于选择白板应用的书写模式)的操作不同，第二操作并不是一个用于实现某个明确交互目标的具体操作，在白板应用的书写模式选择确认之后，红外触摸框检测到的对白板应用的任何操作，均视为第二操作，只是后续会根据检测到第二操作时获得的具体信息对应进行响应，如果根据第二操作最终完成的交互是重新选择白板应用的书写模式，那么该第二操作明确之后实质就是一个第一操作。在本方案中，红外触摸框检测到触摸物的存在即确认为检测到第二操作，是否对第二操作进行响应以及如何对第二操作进行响应，在后续步骤中再行确认。
步骤S150：所述弹性波检测装置检测到第一弹性波信号，所述第一弹性波信号由所述触摸物对所述白板应用进行第二操作时，所述触摸物接触所述显示屏时产生。
一个完整的触控操作，触摸物必然与显示屏接触，接触过程会在显示屏形成振动，这种振动以接触位置为中心在显示屏上扩散，并被弹性波检测装置检测得到弹性波信号。在本方案中，第二操作过程中检测到的弹性波信号定义为第一弹性波信号。
步骤S160：根据所述第一弹性波信号确定所述触摸物的介质类型。
具体而言，介质类型的识别通过如下的两种方式实现：
将所述第一弹性波信号与预存的介质分类信息进行比对，确认所述触摸物对应的介质类型；或，
将所述第一弹性波信号输入预先训练得到的分类模型，根据所述分类模型输出的分类函数值，确认所述触摸物对应的介质类型。
对于通过与预存的触碰介质分类信息进行比对的方式，直接对设定的一种或几种属性信息进行比对，例如通过对振幅、频率和相位中的一个或多个进行比对，当比对的属性信息匹配度达到设定阈值，则确认该弹性波信号为对应的介质类型，一种弹性波信号和多种弹性波信号的比对方式相同，即均与逐个与预存的触碰介质分类信息进行比对，直至匹配成功或者全部比对完均不匹配。
对于通过分类模型进行分类的方式，针对一个触摸点的情况，通过获取各个压电传感器接收到该触摸点的信号的时间，在不同的时段的电压信号，找出特征频率的强度、相位等信息。这些信息结合该触摸点的压力信息作为输入项，通过机器学习或/和深度学习的模型，输出分类函数值0,1,2,3,4...其中，0代表非支持的物体，1表示手指指腹，2表示书写笔A，3表示书写笔B，4表示橡皮擦，以此类推。分类函数值的具体设定情况可以根据实际模型任意设定格式活数值，例如本实施例中0,1,2,3,4..也可以设置为000,001,010,011,100..格式，或者设置为10,11,12,13,14..等其它数值。分类模型除了输出明确的分类结果，还可以进一步给出对各个分类的可能性大小，例如某次触控操作过程中检测到的弹性波信号进行介质类型判断得到书写笔A的可能性85％，书写笔B的可能性13％，手指指腹的可能性为2％，从而处理过程，根据可能性的高低，可以确定介质类型为书写笔A。
对于多个触摸点的情况，通过计算各个弹性波传感器接收到传感信号的时间，以电压信号为例，通过计算在不同的时段的电压信号，通过快速傅里叶变换，找出特征频率的强度、相位等信息。将所有的信息包作为输入项通过机器学习或深度学习的模型，对于每一个触摸点i，分别输出分类函数值0,1,2,3,4...其中，各个分类函数值表示不同的介质类型，例如0代表非支持的物体，1表示手指指腹，2表示书写笔A，3表示书写笔B，4表示橡皮擦，以此类推，当然，分类函数值与介质类型也可以有其他不同的对应方式。
需要说明的是，预先训练的分类模型并不是固定不变，其可以在交互平板的使用过程中根据用户的使用数据进行自我训练、自我强化和自我优化，从而使得分类判断结果更准确、更贴合用户的使用习惯。
根据第一弹性波信号确定出的介质类型可能有多个，对于多个介质类型的情况，步骤S160进一步可以通过步骤S161和步骤S162最终确认有效的介质类型。
步骤S161：根据所述第一弹性波信号确定当前识别到的触摸物的介质类型。
步骤S162：若所述介质类型的数量为多个，则根据预设的介质类型优先级排序对所述介质类型进行过滤，得到所述触摸物的有效的介质类型。
对于检测到多种介质类型同时触控的情况，现有技术一般只能视为误操作予以忽略，或者在不冲突的情况下同时显示。在本方案中，根据预设的优先级进行过滤，提高了操作的准确性。
例如两只书写笔有不同的笔头材质，书写笔A的笔头的介质类型为MatA，书写笔B的笔头的介质类型为MatB，两个笔头的介质类型均在内置的材料ID中，分别为分类2与分类3。预先设定书写笔B的优先级比书写笔A的优先级高，则当同时检测到书写笔B和书写笔A的情况，对书写笔A的触控操作数据进行过滤，得到有效的触控操作为书写笔B的触控操作。
当书写笔A在白板应用中滑动(如左右滑动)，此时记录为一个连续的触控事件，该连续事件中，材料ID始终为分类2。而在白板应用中，分类2的材质对应一种普通的书写笔，且有可设置的颜色C_2和笔迹粗细W_2。那么在书写笔A滑动的过程中，屏幕显示C_2颜色与W_2笔迹粗细的笔迹。
书写笔B亦可以在交互平板的显示屏上滑动，此操作记录为一个连续的触控事件，在该连续事件中，材料ID始终为分类3。在交互平板的属性设置中，分类3的材质对应用于批注的书写笔，且有可设置的颜色C_3和笔迹粗细W_3。那么在书写笔B滑动的过程中，屏幕显示C_3颜色与W_3笔迹粗细的笔迹。由于书写笔B有较高的优先级，因此，当检测到书写笔A和书写笔B同时书写时，将书写笔A的触控操作数据进行过滤，只保留书写笔B的触控操作数据。在系统设置中，可以设置书写笔B在书写时，其他书写笔不能留下书写笔迹，也可以设置书写笔B的批注笔迹永远置于其他笔迹之上(与之相对的，一般笔迹的显示顺序是后书写的覆盖之前存在的笔迹)。
步骤S170：在所述弹性波检测装置检测到所述第一弹性波信号之后，启动对所述第二操作的响应。
因为红外触摸框检测到的是触摸物对光束栅格中光路的遮挡，弹性波检测装置检测到的是触摸物与显示屏的接触，而红外触摸框需要在显示屏的表面形成光束栅格，即光束栅格与显示屏存在一定距离，在对触摸物的检测过程中，红外触摸框先于弹性波检测装置检测到触摸物的存在，在弹性波检测装置检测到第一弹性波信号后，表明触摸物已经与显示屏发生实际有效的接触，即此后红外触摸框检测到的第二操作表示已经有触摸物与显示屏发生实质上的接触，此时可以对第二操作进行响应。
在具体实现过程中，步骤S170中对第二操作的响应可以通过步骤S171-步骤S174实现：
步骤S171：在所述第二操作进行期间，持续获得基于所述第二操作生成的红外触摸信号及所述红外触摸信号的生成时间。
步骤S172：确定所述弹性波检测装置检测到所述第一弹性波信号的产生时间。
步骤S173：对所述生成时间在所述第一弹性波信号的产生时间之后的红外触摸信号进行响应。由于生成时间在所述第一弹性波信号的产生时间之后生成的红外触摸信号是在触摸物接触显示屏之后生成的，可确定此时触摸物已经接触显示屏，因此对所述第一弹性波信号的产生时间之后基于第二操作所生成的红外触摸信号进行响应，例如进行书写时，可以使得显示的书写轨迹与触摸物与显示屏触碰的实际触摸轨迹相对应，实现了书写操作的零书写高度，可以精准显示书写笔迹。
具体的，在一次第二操作过程中，触摸物根据其与显示屏的距离变化趋势可以分为靠近阶段、接触阶段和离开阶段。假设触摸物与显示屏的距离在H以内，光束栅格能检测到触摸物。在靠近阶段，触摸物正在接近但未接触到显示屏，即触摸物与显示屏的距离在H以内且大于0，在这个阶段，红外触摸框对应位置的红外发射器和红外接收器检测到触摸物对红外线的阻挡，可以检测到第二操作的存在，即对应检测到红外触摸信号，红外触摸框检测到红外触摸信号的时间为生成时间，此时弹性波检测装置尚未检测到弹性波信号。在接触阶段，触摸物接触到显示屏，即触摸物与显示屏的距离等于0或者小于0(即由于按压、玻璃产生了内向的形变)，在这个阶段，红外触摸框对应位置的红外发射器和红外接收器检测到触摸物对红外线的阻挡，可以检测到第二操作的存在，即对应检测到红外触摸信号，同时，弹性波检测装置也可以检测到弹性波信号，弹性波检测装置检测到弹性波信号的时间为产生时间。在离开阶段，触摸物与显示屏分离，即触摸物与显示屏的距离在H以内且大于0，在这个阶段，红外触摸框对应位置的红外发射器和红外接收器检测到触摸物对红外线的阻挡，即对应检测到红外触摸信号，此时弹性波检测装置已经不能检测到弹性波信号。
作为一个实现方式，在具体的检测过程中，红外触摸框持续扫描触摸检测区内是否有触摸物的存在，并以数据包的方式逐个生成红外触摸信号，本方案中所说的生成时间可以是指单个数据包的生成时间，具体的，在以数据包的方式逐个生成红外触摸信号时，数据包中特定的比特位可以携带该数据包生成的时间信息，该数据包可以发送至交互平板的处理器，便于处理器识别该数据包的生成时间；也可以是由处理器来记录红外触摸信号的生成时间，例如，当处理器接收到从红外触摸框发送过来的红外触摸信号的数据包时，以接收到该数据包的时间为红外触摸信号的生成时间。弹性波信号是触摸物接触显示屏时弹性波检测装置所检测到的信号，在触摸物与显示屏接触的过程中，弹性波检测装置将会产生持续的弹性波信号。对于同一个触摸物来说，其与显示屏接触的过程中，弹性波检测装置所检测到的弹性波信号实际上是一个持续的信号，且随着触摸物在显示屏上移动，该持续的信号的幅值将会发生变化，从而表征触摸物与显示屏之间的触碰强度的变化。本实施例中，可以记录检测到弹性波信号的起始时间，将该起始时间作为弹性波信号的产生时间，具体的，可以是由弹性波装置将其检测到弹性波信号的起始时间作为其产生时间，并将该产生时间与弹性波信号一起发送至交互平板的处理器，也可以是由弹性波检测装置将弹性波信号发送到处理器，由处理器记录接收到该弹性波信号的起始时间作为弹性波的产生时间。处理器根据弹性波信号的产生时间与红外触摸信号的生成时间是否满足设定的顺序关系，来确定是否响应红外触摸信号的操作。
触摸物在显示屏上移动的过程中，弹性波信号的幅值可能大于设定阈值，可能会小于设定阈值，这里，设定阈值是前述的用于区分弹性波信号是否有效触碰的阈值，如果某个时刻检测到的弹性波信号的幅值小于设定阈值，则可能判断该弹性波信号非有效触碰，这将会与实际不符。如果基于实时的弹性波信号来确定是否响应红外触摸信号，将会导致响应结果出错。本实现方式将检测到弹性波信号的起始时间作为弹性波信号的产生时间，对所述生成时间在所述第一弹性波信号的产生时间之后的红外触摸信号进行响应，可以避免弹性波检测装置所检测到的弹性波信号的幅值变化所带来的误差的影响。
例如，处理器可以判断生成时间和产生时间的先后顺序，具体的，可以将任意红外触摸信号的数据包的生成时间和前述弹性波信号的产生时间进行比较，判断先后顺序，若满足设定的顺序关系，即可响应数据包中的红外触摸信号，在本发明实施例中，可以选择对于生成时间在所述第一弹性波信号的产生时间同时或之后生成的红外触摸信号进行响应，因为此时可以确定触摸物已经接触显示屏，因此对所述第一弹性波信号的产生时间同时或之后基于第二操作所生成的红外触摸信号进行响应，例如进行书写时，可以使得书写轨迹与触摸物的实际触摸轨迹相对应，解决了现有技术书写过程中，触摸物未接触到显示屏，交互平板就会产生书写笔迹的问题，实现了书写操作的零书写高度，可以精准显示书写笔迹，提高了用户体验。
基于上述的检测时间的不同情况，可以对第二操作相关的检测时间和/或红外触摸信息进行进一步处理。
关于检测时间，该交互方法还包括：
步骤S175：确定所述红外触摸框持续检测到红外触摸信号，保持所述产生时间不变。
步骤S176：确定所述红外触摸框未检测到红外触摸信号，将所述产生时间清零。
如果第二操作持续处于接触阶段，那么红外触摸框持续检测到红外触摸信号，此时可以将开始检测到弹性波信号时对应的产生时间作为固定参考值，只要在该固定参考值之后属于该第二操作的红外触摸信号，均对应进行响应，后续也不需要对产生时间进行更新。对应的，当红外触摸框未检测到红外触摸信号，则表明第二操作结束，将产生时间清零。
关于红外触摸信息，该交互方法还包括：
步骤S177：确定所述红外触摸框检测到红外触摸信号，并且所述产生时间处于清零状态，丢弃所述红外触摸信号，避免出现提前响应第二操作的情况。
如果产生时间处于清零状态，表示未接收到弹性波信号，即触摸物尚未与显示屏接触，第二操作尚未真实发生，此时检测到的红外触摸信号予以丢弃，实现在触摸物未实际接触到显示屏时，不进行响应，可以解决零书写高度的问题。
启动对所述第二操作的响应，包括步骤S180和S190：
步骤S180：当所述第二操作为书写操作时，基于所述触摸物的介质类型确定所述书写操作的显示属性。
在具体实现过程中，可以将连续移动达到设定时长或设定长度的轨迹判断为用户需要输入的轨迹，即这一类触控位置信息要以可视的方式显示在显示界面，在现有技术中，根据触控传感信息只能获得相应的触控位置信息，在本方案中，基于弹性波传感器的检测，触控传感信息中记录了更丰富的信息，即弹性波信号，在显示时可以对应不同的介质类型呈现不同的显示属性，整体而言，显示属性用于指示书写笔迹在所述白板应用的界面上的显示方式。
步骤S190：根据所述显示属性，显示所述第二操作对应的书写笔迹。
例如图5中所示的手指指腹和图6中所示的书写笔，即使检测到的是相同的运动轨迹，在显示时也通过对应的显示属性呈现不同的效果，显示属性的不同可以是颜色的不同、粗细的不同或线型的不同(例如虚实线)等，也可以是多种显示属性的组合不同，例如同时包括颜色和线型。具体例如图5中的书写笔迹以红色的虚线进行显示，图6中的书写笔迹以绿色的实线进行显示。
在以上基于红外触摸框获得的触控位置信息和基于弹性波检测装置获得的弹性波信号之外，还可以包括由压力传感器检测得到的压力信息。压力传感器的原理是压力可以引起电阻变化，如果给压力传感器施加恒定的电压，则可以检测输出的电流值，进而可以得出压敏电阻的变化，实现压力传感器的压力变化检测。多个压力传感器设置于显示屏的下方，具体可以设置在边缘或靠近中心的位置，由于力的可叠加性，多个压力传感器可感知不同位置的压力信息，结合触控传感模组，可以计算出每个触摸点的压力。
基于压力传感器检测到的压力信息之后，对于在交互平板的触控检测区域发生的触控操作对应的触控传感信息，还可以进一步进行过滤。在触摸物从靠近显示屏、接触显示屏到离开显示屏的过程中，可能会检测到触控位置信息，但是从实际接触状态和触控目标上，这些触控位置信息并不能作为有效的触控传感信息，例如红外显示屏中触摸物在接触之前会有一段很小距离实际并没有接触到，但是红外显示屏能检测到触摸物；当然，离开的过程中也会有相同的状态，此时可以根据所述压力信息与预设压力阈值的比较结果对所述触控传感信息进行过滤，即如果某个时段的压力信息小于预设压力阈值，则将该时段对应的触控传感信息进行过滤，该时段内检测到的触控位置信息和弹性波信号都忽略不予响应。
在具体的实现上，可以在交互平板设置硬件开关，当硬件开关被触发时，弹性波传感器的切换为停用或启用，具体可以是通过对弹性波传感器使能状态的切换实现，也可以是通过对弹性波传感器检测到的弹性波触碰信号处理与否的状态切换实现。当然，该状态切换的实现还可以是在交互平板的系统设置层面提供弹性波设置控件，当弹性波设置控件被触发时，发生相同的状态切换。
具体的状态切换除了对弹性波信息的整体启用或停用，还可以是对基于弹性波的触控功能部分启用或停用。即提供交互平板上白板应用的界面显示有用于进入书写模式设置界面的操作控件特定接口，当根据红外触摸信号确认有触摸物在该操作控件的显示区域出现，则确认进入书写模式设置界页面，在书写模式设置界页面中设置有多个触控操作类型的设置按钮，基于该设置页面中的设置按钮，可以接收在交互平板的触控检测区域发生的触控功能开启指令，实现对一个或多个触控操作类型的启用或停用。在基于弹性波的触控功能实现中，可能存在某些不同的触控功能不能同时启用的情况，尤其这样的触控功能在同一交互页面中均有实现时，为保证操作的准确性，当根据相应的触控操作确认开启某一触控功能时，与该触控功能不能同时启用的其它触控功能，要对应进行禁用。
第二操作的操作属性在以上书写操作之外，还有控制操作，具体例如移动操作、擦除操作、选择操作或鼠标操作等，当第二操作是控制操作时，根据该控制操作的交互逻辑进行对应的显示变化。通常来说，控制操作会导致显示界面的切换，这种切换可能是一个应用界面的整体切换，例如最小化应用界面的控制操作会导致原有的应用界面中止显示，并显示之前出于显示状态的应用界面或显示系统桌面；又例如白板应用可以有多个白板页面，则在白板应用的界面中新建空白页面的控制操作，会导致新建一个没有显示内容的空白的白板页面，该空白的白板页面会覆盖已有的白板页面；白板应用的界面中检测到的翻页的控制操作，则会导致前一页白板页面或后一页白板页面替换当前显示的白板页面。
具体的控制操作可以是根据红外触摸信号确认的触控位置信息，对触控位置信息命中的功能控件进行响应完成目标控制操作，也可以是根据触控位置信息确认的轨迹特征确认目标控制操作。轨迹特征是基于触控位置信息对触摸物移动时的特征识别，例如触控操作的连续性、触控操作的持续时长、触控轨迹的轮廓形状特征、触控轨迹的大小尺寸、触控轨迹所属的特定区域等，以上信息单独或者共同作为判断该触控操作具体对应的操作目标的参考。常见的控制操作除了前文所述的移动操作、擦除操作、选择操作或鼠标操作，还可以有打开文件、文件翻页等。
在本方案中，所述触摸物的介质类型包括手指指腹、手指指甲、手指关节、手掌、手背或至少一种书写笔，所述书写笔包括笔尖和笔尾。各种介质类型可以单独完成书写操作和控制操作，也可以组合完成书写操作和控制操作。书写操作在前文已有描述，后面主要是对控制操作的实施方式的具体阐述。
作为基于介质类型的触控操作的判断具体应用，如图9所示，根据触控传感信息可以确认检测到介质类型为手指指腹的两个触摸点的靠近，可以从控制指令列表中确认为缩小操作，如图10所示，根据触控传感信息可以确认检测到一个介质类型为书写笔2的笔头和一个介质类型为手指指腹的两个触摸点的靠近，可以从控制指令列表中确认为截图操作。基于现有技术，图9和图10中的操作只能确认为同一操作，基于本方案，可以区分图10的两个触摸点的介质类型不同，因此可以确认图9和图10为两个不同的操作，通过介质类型的判断，以介质类型的组合区分触控指令，减少了基于功能控件或触控估计进行控制操作的操作步骤，提高了交互过程中的操作效率。在以上操作的基础上，还可以进步提供后续可选操作，例如截图后的预览、编辑、保存、发送邮件等。当然，具体的组合方式还可以有更进一步的实现，例如图10中根据触控位置信息和弹性波信号，可以确认手指指腹和书写笔2的笔头的相对位置关系，即手指指腹在左，书写笔笔头在右，只有满足该相对位置关系的介质类型的组合，以及对应的移动轨迹的变化趋势的触控操作，才确认为截图操作。如果手指指腹在右，书写笔笔头在左，则可以确认为其它触控操作。
具体如图5，手指指腹在显示屏中的触控操作对应如果为触控输入操作，那么该触控操作对应的轨迹以手指指腹对应的显示属性进行更新显示，如果为控制操作，那么该触控操作对应的白板应用的界面进行对应的应用布局或功能控件的更新显示。又具体如图6所示，检测到交互平板1专用的书写笔2的笔头从B2处移动到B1处，并获得如图6所示的移动轨迹，如果该书写笔2产生的移动轨迹对应的触控操作为触控输入操作，那么该触控操作对应的轨迹以书写笔2对应的显示属性进行更新显示，如果为控制操作，那么该触控操作对应的白板应用的界面进行对应的应用布局或功能控件的更新显示。
所述交互平板可以进一步配置书写笔，所述书写笔包括笔尖和笔尾，所述笔尖和所述笔尾的介质类型不同；所述第二操作由所述笔尖执行；基于该书写笔的笔尾，所述根据所述显示属性，显示所述第二操作对应的书写笔迹之后，所述交互方法还包括：
所述红外触摸框检测到笔尾对所述白板应用进行第三操作；
所述弹性波检测装置检测到第二弹性波信号，所述第二弹性波信号由所述笔尾接触所述显示屏产生；
根据所述第二弹性波信号确定所述笔尾接触所述显示屏后，启动对所述第三操作的响应；
根据所述第三操作在所述显示屏上的操作轨迹，对应擦除所述显示屏上显示的书写轨迹。
如图6所示，当前有用户使用一支书写笔2在白板应用的界面中进行触控操作，此时根据触控位置信息和弹性波信号，可以确认当前触控操作为：材料ID为1的书写笔2的触控书写操作，从而根据触控位置信息绘制书写笔迹，该书写笔迹的显示属性根据材料ID为1的触碰介质当前的显示属性确定。类似的，如果是用书写笔2的笔尾在白板应用的界面中滑动，根据触控位置信息和弹性波信号可以确认当前触控操作为第三操作，第三操作用于对已有书写笔迹的擦除操作，响应于该操作，擦除过程中在触点位置跟随显示橡皮擦标识，并将橡皮擦标识经过的区域中已有显示的书写笔迹擦除，从而无需去设置触控操作的属性，在识别到笔尾进行操作后，直接将笔尾所经过位置的书写笔迹进行擦除，操作方便、快捷。
对于擦除操作，可以通过书写笔的笔尾实现，还可以通过手掌等介质类型实现，在进行擦除时，对不同介质类型同时出现的擦除操作可以对应进行响应。具体来说，所述交互平板配置有书写笔，所述介质类型包括手掌；所述根据所述显示属性，显示所述第二操作对应的书写笔迹之后，所述交互方法还包括：
所述红外触摸框检测到触摸物对所述白板应用进行的第四操作以及在所述第四操作后的第五操作；其中，所述第四操作和所述第五操作由两种不同的触摸物所执行，且第四操作和第五操作的时间间隔少于设定时长；这里，设定时长是一个较短的时间，根据红外触摸框的响应速度来设定，可以是以ms为单位的时间；
所述弹性波检测装置检测到第三弹性波信号和第四弹性波信号，所述第三弹性波信号由执行所述第四操作的触摸物接触所述显示屏产生，所述第四弹性波信号由执行所述第五操作的触摸物接触所述显示屏产生；
根据所述第三弹性波信号确定执行所述第四操作的触摸物为第一介质类型，并根据所述第四弹性波信号确定执行所述第五操作的触摸物为第二介质类型；
在所述弹性波检测装置检测到所述第三弹性波信号和所述第四弹性波信号后，启动对所述第四操作的响应；
根据所述第四操作在所述显示屏上的移动轨迹，对应擦除所述显示屏上显示的书写轨迹，忽略所述第五操作；
其中，所述第一介质类型为所述书写笔的笔尾，所述第二介质类型为手掌，或
所述第一介质类型为手掌，所述第二介质类型为所述书写笔的笔尾。
除了将书写笔的笔尾的滑动操作识别为擦除操作，还可以将手掌(手心或手背)的滑动操作识别为擦除操作，对于手掌的滑动操作的检测，除了有对弹性波信号的判断，还有对触控位置信息的判断，即要根据弹性波信号确认为介质类型为手掌或手背，还要求根据触控位置信息确认接触面积达到设定大小才可以确认为手掌或手背。当同时存在不同介质类型的两个擦除操作时，可以根据两个擦除操作的先后顺序执行擦除操作，即根据先检测到的第四操作的触控位置信息进行擦除，对应忽略后检测到的第五操作对应的触控位置信息。如果第四操作为书写笔的笔尾的操作，第五操作为手掌的操作，则根据笔尾的触控位置信息进行删除，对应忽略手掌的触控位置信息；如果第四操作为手掌的操作，第五操作为笔尾的操作，则根据手掌的触控位置信息进行删除，对应忽略笔尾的触控位置信息。如果先接收到第一种介质类型的擦除操作后，在一个较短的设定时长内接收到第二种介质类型的擦除操作，则忽略第二种介质类型的擦除操作，避免存在误操作的情况。
又例如图11，当书写笔2的笔身在白板应用的界面中滑动时，根据触控位置信息和弹性波信号可以确认当前触控操作为：对白板应用显示内容的翻页操作，响应于该操作，根据移动方向对应将白板应用的显示内容向前或向后翻页。在具体的翻页过程中，可以在触点位置显示翻页动画，随着滑动距离的增加，翻页动画中的翻页角度对应增大，当滑动距离达到翻页阈值时，通过翻页动画显示当前已经完全翻页，当笔身继续滑动或者结束滑动，则确认执行翻页操作；如果滑动距离达到翻页阈值后反向滑动笔身，则翻页动画对应更新翻页角度。通过设定笔身的控制功能，可以实现便捷翻页。
对于手指指腹的操作，可以确认为控制操作的一种，对介质类型为手指指腹的操作，该交互方法还包括：
所述红外触摸框检测到手指指腹对所述白板应用进行的触控操作；
所述弹性波检测装置检测到第五弹性波信号，所述第五弹性波信号由所述手指指腹接触所述显示屏产生；
根据所述第五弹性波信号确定所述手指指腹接触所述显示屏后，启动对所述触控操作的响应；
将白板应用中，处于所述触控操作的操作轨迹上的显示元素切换为选中状态。
当用户使用一个手指指腹滑动形成闭合的几何形状，此时根据触控位置信息和弹性波信号，可以确认当前触控操作为：对目标的选中操作，响应于该操作，几何形状中的显示元素进入选中状态，并对应显示进一步的可选操作控件，例如拖动控件、删除控件、缩放控件等。基于可选操作控件可以进一步检测触控操作完成对应响应，在拖动控件检测到移动操作则跟随移动调整选中显示元素的显示位置，在删除控件检测到触发操作则删除选中显示元素，在缩放控件检测到移动操作则跟随移动缩小或放大选中显示元素。又例如基于触控时间判断也可以实现对显示元素的选中，即根据触控传感信息确认接收到手指指腹在一个触点范围内持续达到预设时长时，将该触控操作识别为显示元素选中操作，将该触控操作的触控位置信息对应的显示元素切换为选中状态。显示元素可以白板应用界面显示的任何用户输入元素，例如表格、图片、插入的形状、文字、手写的笔迹等。
具体基于介质类型和触控位置信息确认触控操作类型的方式，除了基于轨迹形状、时间等信息的确认方式，还可以有基于触控区域的确认方式，例如当手指指腹在左上角，从上向下滑动时，可以拉出下拉菜单，进行系统级的设置，如亮度、音量、WiFi等。当手指指腹在左侧边框中部，向右滑动时，可以拉出菜单，进行应用级的设置，如保存草稿、擦除全屏等。当指关节在最左侧区域快速双击，则执行撤销操作，可以撤销上一步的书写笔迹，也可以撤销上一步的擦除操作，甚至撤销上一步的设置操作。
除了一个手指指腹的触控操作的识别，还可以是多个手指指腹的识别，对于多个手指指腹的操作可以确认为控制操作的一种，该交互方法还包括：
所述红外触摸框检测到多个手指指腹对所述白板应用进行的触控操作；
所述弹性波检测装置检测到第六弹性波信号，所述第六弹性波信号由多个所述手指指腹接触所述显示屏产生；
根据所述第六弹性波信号确定多个所述手指指腹接触所述显示屏后，启动对所述触控操作的响应；
将所述白板应用中，处于所述触控操作的起点位置的显示元素，跟随所述触控操作的操作轨迹进行移动。
例如当根据触控传感信息确认接收到多个手指指腹向同一方向的移动，则将该触控操作的起点对应的显示元素确认选中状态，并该将显示元素跟随触控操作的触控轨迹进行移动。如果是在文档播放状态，也可以将触控操作识别为翻页操作。
需要说明的是，如果是电磁屏，只能识别不同手写笔的触控操作，而对于手指指腹的触控操作，只能识别出有触控操作的触碰发生，但是不能检测到触控位置信息。
对于本方案中的书写笔，如图7和图8所示，一个交互平板对应配置的多支书写笔2可以通过不同的外形进行区分，但是整体上的结构依然可以区分为笔头21、笔身22和笔尾23，在具体结构设计上，最好能保证任意两种不同的介质类型触控操作过程中不会同时与触控检测区域发生接触。当然，不同的书写笔2也可以通过文字、颜色、重量或重心等能被用户感知到的属性差异进行区分。
为进一步降低设备管理的复杂程度，每支书写笔可以进行多种显示属性的触控操作，为避免触控操作时的误触发，书写笔包括笔头切换机构和多个笔头，每个笔头分别由不同的介质类型对应的材料制成，所述笔头通过笔头切换机构切换到书写位置。每次只有一种介质类型的笔头能够在书写位置进行书写，具体多个笔头和对应的切换结构在现有其它笔类产品中已有实现，在此不做深入阐述。为便于用户明确当前书写得到的书写轨迹的显示属性，所述书写笔对应所述笔头设置有与对应所述介质类型关联的显示属性的标识。例如标识红色的笔头，其对应的介质类型记录关联的显示属性为红色。
适应于用户纸质书写时的操作习惯，在本方案中将所述笔头和笔尾的介质类型对应为触控输入操作，所述笔身的介质类型对应为控制操作(例如图11，将书写笔2的笔身水平滑动作为翻页指令的触发方式)。更具体来说，笔头的介质类型对应为笔迹同步输入的操作，笔尾为对已有笔迹进行修正的操作(例如擦除)。当然，通过特定轨迹的触控操作或对特定区域的触控操作，笔头和笔尾也可以对应为控制操作。
对于书写笔的对应的显示属性，可以进一步进行设置，具体来说，所述交互方法还包括：
所述红外触摸框检测到触摸物对所述白板应用进行的长按操作；所述长按操作用于设置所述触摸物的显示属性；
所述弹性波检测装置检测到第七弹性波信号，所述第七弹性波信号由所述触摸物接触所述显示屏产生；
根据所述弹性波信号确定所述触摸物的介质类型；
在所述弹性波检测装置检测到所述第七弹性波信号后，启动对所述长按操作的响应；
所述显示屏在所述白板应用的界面上显示属性切换窗口；
在所述属性切换窗口接收点击操作，根据所述点击操作切换所述介质类型的显示属性。
在具体使用过程中，可能出现多个用户需要输入且区别显示的情况，但是一台交互平板可能不会配置太多支书写笔，此时输入顺序靠后的用户可以对之前已经使用过的书写笔进行显示属性的切换。当用户需要进行书写笔的显示属性的切换时，通过触控操作激活对应的属性切换窗口，在属性切换窗口可以接收显示属性切换指令，并根据显示属性切换指令对任意书写笔的显示属性进行切换。另外考虑到交互平板在接收该触控操作时，也能获得产生该触控操作的书写笔的弹性波信号，并由此确认该书写笔的介质类型，在进一步接收到确认的目标显示属性时，将该介质类型对应的显示属性重置为目标显示属性，即显示属性切换指令只用于切换当前介质类型对应的显示属性。例如介质类型为A的书写笔当前的显示颜色为红色，当用该书写笔在属性切换窗口切换显示属性为绿色，则将介质类型为A的书写笔后续输入的书写笔迹均显示为绿色，基于弹性波信号的识别设置，使得这一显示属性的设置过程可以仅对介质类型为A的书写笔的显示属性的设置有效，从而避免某个用户设置显示属性对其它书写笔的影响，而且也方便通过采用多支书写笔来实现书写笔迹的不同的显示属性。
具体的显示属性设置方式例如通过在调色盘中选中目标颜色；又例如用参考色带的方式选中目标颜色，即在参考色带附近对应设置预览区域，当书写笔的笔头在预览区域移动时，根据参考色带的颜色变化对应绘制颜色变化的书写轨迹，移动结束时确认的颜色即为选中的目标的颜色。在显示属性设置过程中，除了颜色的显示，还可以有粗细的设置。对于笔尾对应的擦除操作的设置，可以设置橡皮擦标识的形状和大小，还可以设置一键擦除全屏，在具体实现时，擦除全屏的操作需要客户二次确认后再最终擦除。通过显示属性切换的方式，进一步提高了用以区分书写笔迹的显示属性的数量，减少了书写笔的配置成本和使用复杂度，也减少了区别显示书写轨迹时多支书写笔的交替轮换使用。
介质类型关联的显示属性可以调整变化，即同一介质类型的显示属性可以根据用户的设定进行对应的一种或多种显示效果(例如颜色、粗细等)的变化。显示属性与介质类型的关联对应可能是单独对应，例如触控笔迹输入可以是每种介质类型均对应不同的显示属性；也可能是批量对应，例如两个手指指腹的触摸点的靠近和两个书写笔的笔头的靠近，均确认为缩小操作，那么在该触控操作中不同的介质类型对应相同的显示属性。
对于书写笔使用过程中临时设定的显示属性，其不同显示属性的区别一般仅应用于当前输入操作中，因此，在退出当前输入场景(即切换应用窗口，包括主动切换或关机导致的自动结束)或该介质类型对应的书写笔长时间未使用，则认为已经结束临时设定时的需求状态，可以将该介质类型关联的显示属性恢复为默认显示属性。
在上述设计的基础上，不同介质类型的组合触控操作，同一介质类型在不同范围内的操作，均可以设计对应的控制操作，尤其对于使用率较高的控制操作，不同介质类型通过同一简单触控操作实现不同的控制目标，可以有效减少基于功能控件的触控操作实现的操作步骤，提高交互效率和流畅度。
综上，通过红外触摸框检测触摸物的操作时，通过弹性波检测装置检测触摸物与显示屏接触产生的弹性波信号，并以弹性波检测装置检测到弹性波信号为时间点，对红外触摸框在该时间点之后检测到的操作进行响应，并且响应过程与由弹性波信号确定的介质类型关联，尤其对于书写操作中，显示的书写笔迹与介质类型关联。本实施例可以区分不同的触摸物并显示具有不同显示属性的书写笔迹，并且书写笔迹与触摸物与显示屏之间的实际触摸轨迹相对应，不再存在偏差，实现了书写笔迹的差异化显示，在书写过程可以实现零书写高度。
图12是本申请实施例提供的一种交互方法的方法流程图，该交互方法用于交互平板，所述交互平板包括显示屏和红外触摸框，所述红外触摸框设置于所述显示屏的边框，所述交互平板还包括弹性波检测装置，所述交互方法包括步骤S210-步骤S260：
步骤S210：所述红外触摸框检测到触摸物进行书写操作。
步骤S220：所述弹性波检测装置检测到第一弹性波信号，所述第一弹性波信号由所述触摸物进行书写操作时，所述触摸物接触所述显示屏时产生。
步骤S230：根据所述第一弹性波信号确定所述触摸物的介质类型。
在具体实施过程中，可以记录的所述触摸物的介质类型包括手指指腹、手指指甲、手指关节、手掌、手背和至少一种书写笔，所述书写笔包括笔尖和笔尾。
步骤S230中在具体确认介质类型时，可以通过不同的方式实现，例如：
将所述第一弹性波信号与预存的介质分类信息进行比对，确认所述触摸物对应的介质类型；或，
将所述第一弹性波信号输入预先训练得到的分类模型，根据所述分类模型输出的分类函数值，确认所述触摸物对应的介质类型。
步骤S230中对第一弹性波信号进行识别时，可能识别到多种介质类型，步骤S230进一步可以通过步骤S231和步骤S232确认多种介质类型中有效的介质类型。
步骤S231：根据所述第一弹性波信号确定当前识别到的触摸物的介质类型。
步骤S232：若所述介质类型的数量为多个，则根据预设的介质类型优先级排序对所述介质类型进行过滤，得到所述触摸物的有效的介质类型。
步骤S240：在所述弹性波检测装置检测到所述第一弹性波信号之后，启动对所述书写操作的响应。
在具体实现过程中，步骤S240可以通过步骤S241-步骤S244实现：
步骤S241：在所述书写操作进行期间，持续获得基于所述书写操作生成的红外触摸信号及所述红外触摸信号的生成时间。
步骤S242：确定所述弹性波检测装置检测到所述第一弹性波信号的产生时间。
步骤S243：对所述生成时间在所述第一弹性波信号的产生时间之后的红外触摸信号进行响应。由于生成时间在所述第一弹性波信号的产生时间之后生成的红外触摸信号是在触摸物接触显示屏之后生成的，可确定此时触摸物已经接触显示屏，因此对所述第一弹性波信号的产生时间之后基于第二操作所生成的红外触摸信号进行响应，例如进行书写时，可以使得显示的书写轨迹与触摸物与显示屏触碰的实际触摸轨迹相对应，实现了书写操作的零书写高度，可以精准显示书写笔迹。
基于上述的检测时间的不同情况，可以对书写操作相关的检测时间和/或红外触摸信息进行进一步处理。
关于检测时间，该交互方法还包括：
步骤S245：确定所述红外触摸框持续检测到红外触摸信号，保持所述产生时间不变。
步骤S246：确定所述红外触摸框未检测到红外触摸信号，将所述产生时间清零。
关于红外触摸信息，该交互方法还包括：
步骤S247：确定所述红外触摸框检测到红外触摸信号，并且所述产生时间处于清零状态，丢弃所述红外触摸信号。
启动对所述书写操作的响应，包括步骤S250和S260：
步骤S250：基于所述触摸物的介质类型确定所述书写操作的显示属性。
所述显示属性用于指示书写笔迹在所述书写应用界面上的显示方式。
所述显示属性包括颜色和粗细中的至少一种。
步骤S260：根据所述显示属性，显示所述书写操作对应的书写笔迹。
本实施例通过红外触摸框检测触摸物的书写操作时，通过弹性波检测装置检测触摸物与显示屏接触产生的弹性波信号，并以弹性波检测装置检测到弹性波信号为时间点，对红外触摸框在该时间点之后检测到的书写操作进行响应，并且根据书写操作显示的书写笔迹与介质类型关联。本实施例区分不同的触摸物并显示具有不同显示属性的书写笔迹，并且书写笔迹与触摸物的实际触摸轨迹相对应，不再存在偏差，实现了书写笔迹的差异化显示和精准显示。
在具体设计的产品形态中，所述触摸物为书写笔，所述交互平板还包括书写笔状态检测装置，所述书写笔状态检测装置用于检测所述书写笔的状态，所述状态包括吸附状态或提起状态，所述红外触摸框检测到触摸物进行书写操作之前，所述交互方法还包括：
所述书写笔状态检测装置检测到所述书写笔的状态为提起状态；
所述显示屏显示书写应用界面，其中，所述书写应用界面用于接收所述书写操作，并显示所述书写操作对应的书写笔迹。
本实施例中，书写笔的状态主要是书写笔与交互平板之间的相对状态，书写笔的吸附状态是指书写笔通过吸附装置或者其它固定装置，设置于交互平板上，书写笔的提起状态是指，书写笔由设置于交互平板上变成被提起状态，此时，表示用于需要使用书写笔进行书写操作。因此，在检测到书写笔的状态为提起状态后，显示屏显示书写应用界面，从而用户可以使用书写笔在书写应用界面上进行书写操作，无需再通过多个操作步骤组合的方式来打开书写应用，操作较为方便。尤其是对于具有多个操作系统的交互平板来说，如果当前处于第一操作系统，书写应用处于第二操作系统，则在当前状态下，打开书写应用，还需要手动将交互平板从第一操作系统切换到第二操作系统后，再查找到书写应用并打开。本实施例可以在检测到书写笔的状态为提起状态后，直接打开或调用书写应用，从而显示屏直接显示书写应用界面，供用户进行书写操作，方便、快捷。
实现书写笔的吸附状态和提起状态这两种状态检测的书写笔状态检测装置具体可以采用霍尔传感器。书写笔的吸附通过磁性构件实现，即书写笔内设置铁芯，交互平板内设置磁性结构并与交互平板的控制系统连接，书写笔因为铁芯可以被磁性结构吸附于交互平板上。交互平板内还设置有霍尔传感器，霍尔传感器与磁性结构以及控制系统均连接，并用于检测磁性结构周围的磁场的变化，将变化的磁场转化为输出电压的变化并给到控制系统。带有铁芯的书写笔在交互平板上发生吸附状态的变化时，磁性结构周围的磁场发生变化，这种变化以电压变化的方式反馈到控制系统，控制系统可以由此确认书写笔当前处于吸附状态或提起状态。
所述书写应用界面为批注应用的界面或白板应用的界面，所述批注应用用于展示批注笔迹，所述白板应用用于展示书写笔迹和多媒体元素，所述多媒体元素包括图形、图像、表格、文档、音频文件和/或视频文件。
对于书写笔而言，其具体可以包括包括笔尖和笔尾，所述笔尖和所述笔尾的介质类型不同；所述书写操作由所述笔尖执行；所述根据所述显示属性，显示所述书写操作对应的书写笔迹之后，所述交互方法还包括：
所述红外触摸框检测到笔尾对所述白板应用进行触控操作；
所述弹性波检测装置检测到第二弹性波信号，所述第二弹性波信号由所述笔尾接触所述显示屏产生；
根据所述第二弹性波信号确定所述笔尾接触所述显示屏后，启动对所述触控操作的响应；
根据所述触控操作在所述显示屏上的操作轨迹，对应擦除所述显示屏上显示的书写轨迹。
该实施例中交互方法与前一实施例中交互方法基于同一设计思想实现，具备相应的功能和有益效果，该实施例中的细节在前一实施例中均有描述，在本实施例中未予详细描述的内容，可参考前一实施例。
请参考图13，其是本申请实施例提供的一种交互平板的结构示意图，如图所示，该交互平板，包括显示屏、红外触摸框和控制系统，所述红外触摸框设置于所述显示屏的边框，所述显示屏和红外触摸框均与所述控制系统连接，所述交互平板还包括弹性波检测装置，所述弹性波检测装置与所述控制系统连接；
所述显示屏，用于显示白板应用的界面；
所述红外触摸框，用于检测到触摸物对所述白板应用进行第一操作，所述第一操作用于选择所述白板应用的书写模式；
所述控制系统，用于根据所述第一操作调用所述白板应用的第一书写模式；
所述红外触摸框，还用于检测到所述触摸物对所述白板应用进行第二操作；
所述弹性波检测装置，用于检测到第一弹性波信号，所述第一弹性波信号由所述触摸物对所述白板应用进行第二操作时，所述触摸物接触所述显示屏时产生；
所述控制系统，还用于：
根据所述第一弹性波信号确定所述触摸物的介质类型；
在所述弹性波检测装置检测到所述第一弹性波信号之后，启动对所述第二操作的响应；
当所述第二操作为书写操作时，基于所述触摸物的介质类型确定所述书写操作的显示属性；以及
根据所述显示属性，在所述显示屏上显示所述第二操作对应的书写笔迹。
在上述实施例的基础上，所述红外触摸框包括红外发射器、红外接收器和红外控制板，所述红外发射器和红外接收器均通过所述红外控制板与所述控制系统连接，所述弹性波检测装置包括弹性波传感器和弹性波控制板，所述弹性波传感器通过所述弹性波控制板与所述控制系统连接；
所述红外发射器用于发射红外信号，所述红外接收器用于接收红外信号；
所述红外发射器安装在所述显示屏的边框的第一侧，所述红外接收器安装在所述显示屏的边框的第二侧，所述第一侧与所述第二侧相对设置；
所述红外控制板，用于当触摸物接近或触碰显示屏表面时，采集所述红外接收器输出的红外受阻信号，对所述红外受阻信号进行放大处理以及模数转换后得到红外触摸信号，其中，所述红外触摸信号用于表征所述触摸物的触摸操作；
所述弹性波控制板，用于当所述触摸物触碰到显示屏时，采集所述弹性波传感器生成的传感信号，对所述传感信号进行放大处理以及模数转换后得到弹性波信号。
在上述实施例的基础上，所述红外触摸框包括红外发射器、红外接收器和红外控制板，所述红外发射器和红外接收器均通过所述红外控制板与所述控制系统连接，所述弹性波检测装置包括弹性波传感器，所述弹性波传感器通过所述红外控制板与所述控制系统连接；
所述红外发射器用于发射红外信号，所述红外接收器用于接收红外信号；
所述红外发射器安装在所述显示屏的边框的第一侧，所述红外接收器安装在所述显示屏的边框的第二侧，所述第一侧与所述第二侧相对设置；
所述红外控制板，用于当触摸物接近或触碰显示屏表面时，采集所述红外接收器输出的红外受阻信号，对所述红外受阻信号进行放大处理以及模数转换后得到红外触摸信号，其中，所述红外触摸信号用于表征所述触摸物的触摸操作；
所述红外控制板，还用于当所述触摸物触碰到显示屏时，采集所述弹性波传感器生成的传感信号，对所述传感信号进行放大处理以及模数转换后得到弹性波信号。
在上述实施例的基础上，所述红外触摸框包括红外发射器、红外接收器和红外控制板，所述红外发射器和红外接收器均通过所述红外控制板与所述控制系统连接，所述弹性波检测装置包括弹性波传感器，所述弹性波传感器与所述控制系统连接；
所述红外发射器用于发射红外信号，所述红外接收器用于接收红外信号；
所述红外发射器安装在所述显示屏的边框的第一侧，所述红外接收器安装在所述显示屏的边框的第二侧，所述第一侧与所述第二侧相对设置；
所述红外控制板，用于当触摸物接近或触碰显示屏表面时，采集所述红外接收器输出的红外受阻信号，对所述红外受阻信号进行放大处理以及模数转换后得到红外触摸信号，其中，所述红外触摸信号用于表征所述触摸物的触摸操作；
所述控制系统，还用于当所述触摸物触碰到显示屏时，采集所述弹性波传感器生成的传感信号，对所述传感信号进行放大处理以及模数转换后得到弹性波信号。
本申请实施例中的交互平板用于实现前述实施例中所述的任意交互方法，具备相应的功能和有益效果。
请参考图14，其是本申请实施例提供的一种交互平板的结构示意图，如图所示，该交互平板，包括显示屏、红外触摸框和控制系统，所述红外触摸框设置于所述显示屏的边框，所述显示屏和红外触摸框均与所述控制系统连接，所述交互平板还包括弹性波检测装置，所述弹性波检测装置与所述控制系统连接；
所述红外触摸框，用于检测到触摸物进行书写操作；
所述弹性波检测装置，用于检测到第一弹性波信号，所述第一弹性波信号由所述触摸物进行书写操作时，所述触摸物接触所述显示屏时产生；
所述控制系统，用于：
根据所述第一弹性波信号确定所述触摸物的介质类型；
在所述弹性波检测装置检测到所述第一弹性波信号之后，启动对所述书写操作的响应；
基于所述触摸物的介质类型确定所述书写操作的显示属性；
根据所述显示属性，在所述显示屏上显示所述书写操作对应的书写笔迹。
在上述实施例的基础上，所述触摸物为书写笔，所述交互平板还包括书写笔状态检测装置，所述书写笔状态检测装置用于检测所述书写笔的状态，所述状态包括吸附状态或提起状态：
所述控制系统，还用于在所述书写笔状态检测装置检测到所述书写笔的状态为提起状态后，通过所述显示屏显示书写应用界面；
其中，所述书写应用界面用于接收所述书写操作，并显示所述书写操作对应的书写笔迹。
在上述实施例的基础上，所述红外触摸框包括红外发射器、红外接收器和红外控制板，所述红外发射器和红外接收器均通过所述红外控制板与所述控制系统连接，所述弹性波检测装置包括弹性波传感器和弹性波控制板，所述弹性波传感器通过所述弹性波控制板与所述控制系统连接；
所述红外发射器用于发射红外信号，所述红外接收器用于接收红外信号；
所述红外发射器安装在所述显示屏的边框的第一侧，所述红外接收器安装在所述显示屏的边框的第二侧，所述第一侧与所述第二侧相对设置；
所述红外控制板，用于当触摸物接近或触碰显示屏表面时，采集所述红外接收器输出的红外受阻信号，对所述红外受阻信号进行放大处理以及模数转换后得到红外触摸信号，其中，所述红外触摸信号用于表征所述触摸物的触摸操作；
所述弹性波控制板，用于当所述触摸物触碰到显示屏时，采集所述弹性波传感器生成的传感信号，对所述传感信号进行放大处理以及模数转换后得到弹性波信号。
在上述实施例的基础上，所述红外触摸框包括红外发射器、红外接收器和红外控制板，所述红外发射器和红外接收器均通过所述红外控制板与所述控制系统连接，所述弹性波检测装置包括弹性波传感器，所述弹性波传感器通过所述红外控制板与所述控制系统连接；
所述红外发射器用于发射红外信号，所述红外接收器用于接收红外信号；
所述红外发射器安装在所述显示屏的边框的第一侧，所述红外接收器安装在所述显示屏的边框的第二侧，所述第一侧与所述第二侧相对设置；
所述红外控制板，用于当触摸物接近或触碰显示屏表面时，采集所述红外接收器输出的红外受阻信号，对所述红外受阻信号进行放大处理以及模数转换后得到红外触摸信号，其中，所述红外触摸信号用于表征所述触摸物的触摸操作；
所述红外控制板，还用于当所述触摸物触碰到显示屏时，采集所述弹性波传感器生成的传感信号，对所述传感信号进行放大处理以及模数转换后得到弹性波信号。
在上述实施例的基础上，所述红外触摸框包括红外发射器、红外接收器和红外控制板，所述红外发射器和红外接收器均通过所述红外控制板与所述控制系统连接，所述弹性波检测装置包括弹性波传感器，所述弹性波传感器与所述控制系统连接；
所述红外发射器用于发射红外信号，所述红外接收器用于接收红外信号；
所述红外发射器安装在所述显示屏的边框的第一侧，所述红外接收器安装在所述显示屏的边框的第二侧，所述第一侧与所述第二侧相对设置；
所述红外控制板，用于当触摸物接近或触碰显示屏表面时，采集所述红外接收器输出的红外受阻信号，对所述红外受阻信号进行放大处理以及模数转换后得到红外触摸信号，其中，所述红外触摸信号用于表征所述触摸物的触摸操作；
所述控制系统，还用于当所述触摸物触碰到显示屏时，采集所述弹性波传感器生成的传感信号，对所述传感信号进行放大处理以及模数转换后得到弹性波信号。
本申请实施例中的交互平板用于实现前述实施例中所述的任意交互方法，具备相应的功能和有益效果。
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行本申请任意实施例中提供的交互方法中的相关操作，且具备相应的功能和有益效果。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。
因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种交互方法，用于交互平板，所述交互平板包括显示屏和红外触摸框，所述红外触摸框设置于所述显示屏的边框，其特征在于，所述交互平板还包括弹性波检测装置，所述交互方法包括：
所述红外触摸框检测到触摸物进行书写操作；
所述弹性波检测装置检测到第一弹性波信号，所述第一弹性波信号由所述触摸物进行书写操作时，所述触摸物接触所述显示屏时产生；
根据所述第一弹性波信号确定所述触摸物的介质类型；
在所述弹性波检测装置检测到所述第一弹性波信号之后，对所述书写操作进行响应；
所述对所述书写操作进行响应，包括：
基于所述触摸物的介质类型确定所述书写操作的显示属性；
根据所述显示属性，显示所述书写操作对应的书写笔迹。
2.根据权利要求1所述的交互方法，其特征在于，所述在所述弹性波检测装置检测到所述第一弹性波信号之后，对所述书写操作进行响应，具体为：
在所述书写操作进行期间，持续获得基于所述书写操作生成的红外触摸信号及所述红外触摸信号的生成时间；
确定所述弹性波检测装置检测到所述第一弹性波信号的产生时间；
对所述生成时间在所述第一弹性波信号的产生时间之后的红外触摸信号进行响应。
3.根据权利要求1所述的交互方法，其特征在于，所述触摸物为书写笔，所述交互平板还包括书写笔状态检测装置，所述书写笔状态检测装置用于检测所述书写笔的状态，所述状态包括吸附状态或提起状态，所述红外触摸框检测到触摸物进行书写操作之前，所述交互方法还包括：
所述书写笔状态检测装置检测到所述书写笔的状态为提起状态；
所述显示屏显示书写应用界面，其中，所述书写应用界面用于接收所述书写操作，并显示所述书写操作对应的书写笔迹。
4.根据权利要求3所述的交互方法，其特征在于，所述书写应用界面为批注应用的界面或白板应用的界面，所述批注应用用于展示批注笔迹，所述白板应用用于展示书写笔迹和多媒体元素，所述多媒体元素包括图形、图像、表格、文档、音频文件和/或视频文件。
5.根据权利要求3所述的交互方法，其特征在于，所述显示属性用于指示书写笔迹在所述书写应用界面上的显示方式。
6.根据权利要求5所述的交互方法，其特征在于，所述显示属性包括颜色和粗细中的至少一种。
7.根据权利要求1所述的交互方法，其特征在于，所述触摸物为书写笔，所述书写笔包括笔尖和笔尾，所述笔尖和所述笔尾的介质类型不同；所述书写操作由所述笔尖执行；所述根据所述显示属性，显示所述书写操作对应的书写笔迹之后，所述交互方法还包括：
所述红外触摸框检测到笔尾在所述显示屏上进行触控操作；
所述弹性波检测装置检测到第二弹性波信号，所述第二弹性波信号由所述笔尾接触所述显示屏产生；
根据所述第二弹性波信号确定所述笔尾接触所述显示屏后，启动对所述触控操作的响应；
根据所述触控操作在所述显示屏上的操作轨迹，对应擦除所述显示屏上显示的书写轨迹。
8.一种交互方法，用于交互平板，所述交互平板包括显示屏和红外触摸框，所述红外触摸框设置于所述显示屏的边框，其特征在于，所述交互平板还包括弹性波检测装置，所述交互平板还配置有第一书写工具和第二书写工具，所述第一书写工具和所述第二书写工具的介质类型不同，所述交互方法包括：
所述红外触摸框检测到所述第一书写工具进行第一书写操作；
所述弹性波检测装置检测到第一弹性波信号，所述第一弹性波信号由所述第一书写工具接触所述显示屏时产生；
根据所述第一弹性波信号确定所述第一书写工具接触所述显示屏后，基于所述第一书写工具的介质类型，确定所述第一书写操作的显示属性，并根据所述显示属性，显示所述第一书写操作对应的书写笔迹；
所述红外触摸框检测到所述第二书写工具进行第二操作；
所述弹性波检测装置检测到第二弹性波信号，所述第二弹性波信号由所述第二书写工具接触所述显示屏产生；
根据所述第二弹性波信号确定所述第二书写工具接触所述显示屏后，基于所述第二书写工具的介质类型，确定所述第二书写操作的显示属性，并根据所述显示属性，显示所述第二书写操作对应的书写笔迹。
9.根据权利要求8所述的交互方法，其特征在于，所述交互平板还配置有第三书写工具，所述交互方法还包括：
所述红外触摸框检测到所述第三书写工具进行滑动操作；
所述弹性波检测装置检测到第三弹性波信号，所述第三弹性波信号由所述第三书写工具接触所述显示屏时产生；
根据所述第三弹性波信号确定所述第三书写工具接触所述显示屏后，基于所述第三书写工具的介质类型，根据所述滑动操作，擦除所述显示屏上显示的书写笔迹。
10.一种交互平板，包括显示屏、红外触摸框和控制系统，所述红外触摸框设置于所述显示屏的边框，所述显示屏和红外触摸框均与所述控制系统连接，其特征在于，所述交互平板还包括弹性波检测装置，所述弹性波检测装置与所述控制系统连接；
所述红外触摸框，用于检测到触摸物进行书写操作；
所述弹性波检测装置，用于检测到第一弹性波信号，所述第一弹性波信号由所述触摸物进行书写操作时，所述触摸物接触所述显示屏时产生；
所述控制系统，用于：
根据所述第一弹性波信号确定所述触摸物的介质类型；
在所述弹性波检测装置检测到所述第一弹性波信号之后，对所述书写操作进行响应；
其中，所述对所述书写操作进行响应，包括：
基于所述触摸物的介质类型确定所述书写操作的显示属性；
根据所述显示属性，在所述显示屏上显示所述书写操作对应的书写笔迹。
CN202311460056.0A 2021-04-22 2021-04-22 交互方法和交互平板 Pending CN117724620A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311460056.0A CN117724620A (zh) 2021-04-22 2021-04-22 交互方法和交互平板

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202311460056.0A CN117724620A (zh) 2021-04-22 2021-04-22 交互方法和交互平板
CN202110436274.5A CN114690853B (zh) 2021-04-22 2021-04-22 交互方法和交互平板

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202110436274.5A Division CN114690853B (zh) 2021-04-22 2021-04-22 交互方法和交互平板

Publications (1)

Publication Number Publication Date
CN117724620A true CN117724620A (zh) 2024-03-19

Family

ID=82136534

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202311460056.0A Pending CN117724620A (zh) 2021-04-22 2021-04-22 交互方法和交互平板
CN202110436274.5A Active CN114690853B (zh) 2021-04-22 2021-04-22 交互方法和交互平板

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202110436274.5A Active CN114690853B (zh) 2021-04-22 2021-04-22 交互方法和交互平板

Country Status (1)

Country Link
CN (2) CN117724620A (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115097962B (zh) * 2022-07-06 2024-08-16 深圳市康冠商用科技有限公司 电子设备及其具有射频信号处理功能的红外触摸框
CN117873339A (zh) * 2022-10-12 2024-04-12 广州显创科技有限公司 压电传感器、弹性波传感器、交互平板及其生产方法
CN116149495B (zh) * 2022-12-05 2024-09-06 深圳市千分一智能技术有限公司 信号处理方法、装置、终端设备与介质
WO2024159370A1 (zh) * 2023-01-30 2024-08-08 广州视臻信息科技有限公司 快捷书写方法、交互平板及存储介质
CN115793893B (zh) * 2023-02-07 2023-05-19 广州众远智慧科技有限公司 触摸书写笔迹生成方法、装置、电子设备及存储介质
WO2024183075A1 (zh) * 2023-03-09 2024-09-12 广州视源电子科技股份有限公司 一种材质识别方法、交互平板以及存储介质
WO2024198260A1 (zh) * 2023-03-31 2024-10-03 广州显创科技有限公司 一种书写方法、装置、交互平板及存储介质
WO2024198261A1 (zh) * 2023-03-31 2024-10-03 广州显创科技有限公司 一种书写校验方法、装置、交互平板和存储介质
CN117555443B (zh) * 2024-01-12 2024-04-02 江苏纳帝电子科技有限公司 一种触摸屏书写检测分析方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5533127B2 (ja) * 2010-03-26 2014-06-25 セイコーエプソン株式会社 筆跡データ生成システム、筆跡データ生成方法、およびプログラム
JP5191070B2 (ja) * 2011-01-07 2013-04-24 シャープ株式会社 リモコン、表示装置、テレビ受像機、およびリモコン用プログラム
CN102520849B (zh) * 2011-11-28 2013-08-07 北京盛世宣合信息科技有限公司 电子毛笔书写方法及系统
CN104516566A (zh) * 2013-10-08 2015-04-15 广东国笔科技股份有限公司 一种手写输入方法及装置
US10324544B2 (en) * 2016-12-27 2019-06-18 Wacom Co., Ltd. Hand-written information process apparatus, hand-written information processing method and hand-written information processing program
US20190369935A1 (en) * 2018-05-29 2019-12-05 Coretronic Corporation Electronic whiteboard, electronic whiteboard system and control method thereof
EP3754537B1 (en) * 2019-06-20 2024-05-22 MyScript Processing text handwriting input in a free handwriting mode
CN111752419A (zh) * 2020-07-30 2020-10-09 广州创知科技有限公司 智能黑板的交互控制方法、装置、智能黑板及存储介质

Also Published As

Publication number Publication date
CN114690853B (zh) 2023-11-21
CN114690853A (zh) 2022-07-01

Similar Documents

Publication Publication Date Title
CN114690853B (zh) 交互方法和交互平板
CN110058782B (zh) 基于交互式电子白板的触摸操作方法及其系统
US8384744B2 (en) Information processing apparatus and information processing method
CN101315586B (zh) 一种用于交互式电子白板的电子笔及其交互控制方法
CN111752419A (zh) 智能黑板的交互控制方法、装置、智能黑板及存储介质
CN113791700B (zh) 基于弹性波的交互方法、装置、交互平板和存储介质
CN110716680A (zh) 智能交互平板的控制方法和装置
CN110941382B (zh) 智能交互平板的显示操作方法、装置、设备和存储介质
WO2021068366A1 (zh) 智能交互平板的书写操作方法、装置、设备和存储介质
WO2021068412A1 (zh) 智能交互平板的交互方法、装置、终端设备和存储介质
US10198177B2 (en) Image processing apparatus, image processing method, and recording medium
CN114690930A (zh) 一种书写笔迹处理方法、装置、交互平板及存储介质
CN111580903A (zh) 实时投票方法、装置、终端设备和存储介质
CN114690931A (zh) 基于触点跟踪的防误触方法、装置、交互平板和存储介质
US9323431B2 (en) User interface for drawing with electronic devices
CN110895440A (zh) 信息处理装置及记录介质
CN113608662A (zh) 触控响应方法、装置、终端设备和存储介质
JP2009116727A (ja) 画像入力表示装置
CN109144397B (zh) 擦除方法、装置以及智能交互平板
CN114692580A (zh) 批注控制方法和交互平板
WO2023231731A1 (zh) 书写模式切换方法、装置、交互平板和存储介质
WO2023230753A1 (zh) 快捷批注方法、装置、交互平板及存储介质
CN114690977B (zh) 一种基于弹性波的交互唤起方法及装置
CN115291787B (zh) 白板的控制方法和装置
JP2018018474A (ja) 画像処理装置、画像処理方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination