WO2023092527A1 - 一种人机交互的方法及智能显示设备 - Google Patents

Abstract

本公开提供了一种人机交互的方法及智能显示设备，用于避免用户在书写过程中对不同交互功能进行频繁切换，提高用户的使用体验。该方法应用于智能交互显示设备，包括：根据接收的触控信号的触控类型确定交互模式；其中，所述触控类型用于表征所述触控信号对应的触控体的类型；根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。

Description

一种人机交互的方法及智能显示设备 技术领域

本公开涉及智慧系统技术领域，特别涉及一种人机交互的方法及智能显示设备。

背景技术

目前，越来越多的无纸化、无尘化办公场景促进了电子白板、会议一体机等智能显示设备的发展，用户与智能显示设备的交互逻辑成为智能会议的关键。随着智能显示设备的尺寸越来越大，功能越来越多，在人机交互过程中，用户需要频繁操作菜单进行不同功能的切换，由于显示设备的尺寸较大，在进行不同功能的切换的过程中需要用户频繁来回移动，容易破坏书写的连贯性，极大的影响用户的使用体验。

发明内容

本公开提供一种人机交互的方法及智能显示设备，用于根据触控类型确定交互模式，并根据交互模式确定触控信号的响应内容，从而基于不同的触控类型实现不同的交互功能，避免用户在书写过程中对不同交互功能进行频繁切换，提高用户的使用体验。

第一方面，本公开实施例提供的一种人机交互的方法，包括：

根据接收的触控信号的触控类型确定交互模式；其中，所述触控类型用于表征所述触控信号对应的触控体的类型；

根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。

作为一种可选的实施方式，所述触控类型包括至少两种，所述交互模式包括至少两种模式，所述触控类型和所述交互模式具有对应关系。

作为一种可选的实施方式，所述交互模式和所述响应内容具有对应关系， 所述对应关系包括如下任意一种或任意多种：

任意两种交互模式对应不同的响应内容；

任意两种交互模式对应区分存储的响应内容；

任意两种交互模式对应区分显示的响应内容；

任意两种交互模式对应不同图层级别的响应内容。

作为一种可选的实施方式，所述触控类型包括触控笔的笔头类型；其中所述触控笔包括至少两个笔头，任意两个笔头的笔头类型不同。

作为一种可选的实施方式，

所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一端笔头类型和第二端笔头类型；或，

所述触控笔为两个以上笔头的触控笔，不同笔头之间通过按钮切换，所述触控类型包括各个笔头的笔头类型。

作为一种可选的实施方式，所述触控类型包括用户手指类型、触控笔的按钮类型中的至少一种。

作为一种可选的实施方式，若所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一笔头类型和第二笔头类型，则所述根据接收的触控信号的触控类型确定交互模式，包括：

根据所述第一端笔头类型，确定所述交互模式为标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式中的一种模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式中的另一种模式。

作为一种可选的实施方式，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

当所述交互模式为标准书写模式时，确定所述响应内容为所述触控信号 生成的轨迹信息，并在所述触控信号的触控位置直接显示所述轨迹信息；或，

当所述交互模式为非标准书写模式时，根据所述触控信号生成的轨迹信息确定响应内容，并在所述触控信号对应的触控位置显示所述响应内容。

作为一种可选的实施方式，所述非标准书写模式包括修改模式、对比类模式、图表绘制模式、计算模式、手写识别模式中的至少一种。

作为一种可选的实施方式，所述当所述交互模式为非标准书写模式时，根据所述触控信号生成的轨迹信息确定响应内容，并在所述触控信号对应的触控位置显示所述响应内容，包括：

当所述交互模式为修改模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述触控信号的触控位置上已有的内容替换为所述轨迹信息后显示，或，将所述轨迹信息与所述触控信号的位置上已有的内容重叠显示；或，

当所述交互模式为对比类模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述轨迹信息与已有内容进行对比显示；或，

当所述交互模式为图表绘制模式时，确定所述响应内容为所述触控信号触发生成的图表，并将所述图表进行显示；或，

当所述交互模式为计算模式时，确定所述响应内容为所述触控信号生成的轨迹信息，以及所述触控信号触发生成的计算结果，并将所述轨迹信息以及所述计算结果进行显示；或，

当所述交互模式为手写识别模式时，确定所述响应内容为识别所述触控信号生成的轨迹信息得到的识别内容，并将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，所述当所述交互模式为对比类模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述轨迹信息与已有内容进行对比显示，包括：

当所述交互模式为对比类模式中的表格对比模式时，将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容，其中所述新表格用 于与所述已有表格进行对比显示；或，

当所述交互模式为对比类模式中的文字对比模式时，将所述触控信号生成的轨迹信息作为与已有内容不同的新内容，并按与所述已有内容不同的显示方式显示所述新内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为已有表格的内容，并显示所述轨迹信息；

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为表格对比模式，则将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

若在图表区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为批注内容，在所述图表区进行显示；

若在图表区接收触控信号，且确定交互模式为图表绘制模式，则对所述触控信号生成的轨迹信息进行图表识别得到图表标识后，触发在所述图表区显示所述图表标识对应的图表。

作为一种可选的实施方式，当智能交互显示设备处于公式识别场景时，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为计算模式时，则对所述触控信号生成的轨迹信息进行 公式识别，对识别得到的算式进行计算确定计算结果，显示所述轨迹信息和所述计算结果。

作为一种可选的实施方式，当智能交互显示设备处于文字识别场景时，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为手写识别模式，则对所述触控信号生成的轨迹信息进行识别得到识别内容，将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，该方法还包括：

通过所述触控笔的按钮，在所述智能显示设备的显示屏上触发显示表征多种交互模式的菜单选项，以及通过所述按钮对所述触控类型对应的交互模式进行切换。

第二方面，本公开实施例提供的一种智能显示设备，包括显示屏、控制电路，其中：

所述显示屏用于进行内容的显示；

所述控制电路被配置为执行如下步骤：

根据接收的触控信号的触控类型确定交互模式；其中，所述触控类型用于表征所述触控信号对应的触控体的类型；

根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。

作为一种可选的实施方式，所述触控类型包括至少两种，所述交互模式包括至少两种模式，所述触控类型和所述交互模式具有对应关系。

作为一种可选的实施方式，所述交互模式和所述响应内容具有对应关系，所述对应关系包括如下任意一种或任意多种：

任意两种交互模式对应不同的响应内容；

任意两种交互模式对应区分存储的响应内容；

任意两种交互模式对应区分显示的响应内容；

任意两种交互模式对应不同图层级别的响应内容。

作为一种可选的实施方式，所述触控类型包括触控笔的笔头类型；其中所述触控笔包括至少两个笔头，任意两个笔头的笔头类型不同。

作为一种可选的实施方式，

所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一端笔头类型和第二端笔头类型；或，

所述触控笔为两个以上笔头的触控笔，不同笔头之间通过按钮切换，所述触控类型包括各个笔头的笔头类型。

作为一种可选的实施方式，所述触控类型包括用户手指类型、触控笔的按钮类型中的至少一种。

作为一种可选的实施方式，若所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一笔头类型和第二笔头类型，则所述控制电路具体被配置为执行：

根据所述第一端笔头类型，确定所述交互模式为标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式中的一种模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式中的另一种模式。

作为一种可选的实施方式，所述控制电路具体被配置为执行：

当所述交互模式为标准书写模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并在所述触控信号的触控位置直接显示所述轨迹信息；或，

当所述交互模式为非标准书写模式时，根据所述触控信号生成的轨迹信息确定响应内容，并在所述触控信号对应的触控位置显示所述响应内容。

作为一种可选的实施方式，所述非标准书写模式包括修改模式、对比类 模式、图表绘制模式、计算模式、手写识别模式中的至少一种。

作为一种可选的实施方式，所述当所述交互模式为非标准书写模式时，所述控制电路具体被配置为执行：

当所述交互模式为修改模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述触控信号的触控位置上已有的内容替换为所述轨迹信息后显示，或，将所述轨迹信息与所述触控信号的位置上已有的内容重叠显示；或，

当所述交互模式为对比类模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述轨迹信息与已有内容进行对比显示；或，

当所述交互模式为图表绘制模式时，确定所述响应内容为所述触控信号触发生成的图表，并将所述图表进行显示；或，

当所述交互模式为计算模式时，确定所述响应内容为所述触控信号生成的轨迹信息，以及所述触控信号触发生成的计算结果，并将所述轨迹信息以及所述计算结果进行显示；或，

当所述交互模式为手写识别模式时，确定所述响应内容为识别所述触控信号生成的轨迹信息得到的识别内容，并将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，所述当所述交互模式为对比类模式时，所述控制电路具体被配置为执行：

当所述交互模式为对比类模式中的表格对比模式时，将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容，其中所述新表格用于与所述已有表格进行对比显示；或，

当所述交互模式为对比类模式中的文字对比模式时，将所述触控信号生成的轨迹信息作为与已有内容不同的新内容，并按与所述已有内容不同的显示方式显示所述新内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时，所述控制电路具体被配置为执行：

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为已有表格的内容，并显示所述轨迹信息；

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为表格对比模式，则将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时，所述控制电路具体被配置为执行：

若在图表区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为批注内容，在所述图表区进行显示；

若在图表区接收触控信号，且确定交互模式为图表绘制模式，则对所述触控信号生成的轨迹信息进行图表识别得到图表标识后，触发在所述图表区显示所述图表标识对应的图表。

作为一种可选的实施方式，当智能交互显示设备处于公式识别场景时，所述控制电路具体被配置为执行：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为计算模式时，则对所述触控信号生成的轨迹信息进行公式识别，对识别得到的算式进行计算确定计算结果，显示所述轨迹信息和所述计算结果。

作为一种可选的实施方式，当智能交互显示设备处于文字识别场景时，所述控制电路具体被配置为执行：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为手写识别模式，则对所述触控信号生成的轨迹信息进行识别得到识别内容，将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，所述控制电路具体还被配置为执行：

通过所述触控笔的按钮，在所述智能显示设备的显示屏上触发显示表征多种交互模式的菜单选项，以及通过所述按钮对所述触控类型对应的交互模式进行切换。

第三方面，本公开实施例还提供一种人机交互的装置，包括：

确定交互模式单元，用于根据接收的触控信号的触控类型确定交互模式；其中，所述触控类型用于表征所述触控信号对应的触控体的类型；

显示响应内容单元，用于根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。

作为一种可选的实施方式，所述触控类型包括至少两种，所述交互模式包括至少两种模式，所述触控类型和所述交互模式具有对应关系。

作为一种可选的实施方式，所述交互模式和所述响应内容具有对应关系，所述对应关系包括如下任意一种或任意多种：

任意两种交互模式对应不同的响应内容；

任意两种交互模式对应区分存储的响应内容；

任意两种交互模式对应区分显示的响应内容；

任意两种交互模式对应不同图层级别的响应内容。

作为一种可选的实施方式，所述触控类型包括触控笔的笔头类型；其中所述触控笔包括至少两个笔头，任意两个笔头的笔头类型不同。

作为一种可选的实施方式，

所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一端笔头类型和第二端笔头类型；或，

所述触控笔为两个以上笔头的触控笔，不同笔头之间通过按钮切换，所述触控类型包括各个笔头的笔头类型。

作为一种可选的实施方式，所述触控类型包括用户手指类型、触控笔的按钮类型中的至少一种。

作为一种可选的实施方式，若所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一笔头类型和第 二笔头类型，则所述确定交互模式单元具体用于：

根据所述第一端笔头类型，确定所述交互模式为标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式中的一种模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式中的另一种模式。

作为一种可选的实施方式，所述显示响应内容单元具体用于：

当所述交互模式为标准书写模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并在所述触控信号的触控位置直接显示所述轨迹信息；或，

当所述交互模式为非标准书写模式时，根据所述触控信号生成的轨迹信息确定响应内容，并在所述触控信号对应的触控位置显示所述响应内容。

作为一种可选的实施方式，所述非标准书写模式包括修改模式、对比类模式、图表绘制模式、计算模式、手写识别模式中的至少一种。

作为一种可选的实施方式，所述当所述交互模式为非标准书写模式时，所述显示响应内容单元具体用于：

当所述交互模式为修改模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述触控信号的触控位置上已有的内容替换为所述轨迹信息后显示，或，将所述轨迹信息与所述触控信号的位置上已有的内容重叠显示；或，

当所述交互模式为对比类模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述轨迹信息与已有内容进行对比显示；或，

当所述交互模式为图表绘制模式时，确定所述响应内容为所述触控信号触发生成的图表，并将所述图表进行显示；或，

当所述交互模式为计算模式时，确定所述响应内容为所述触控信号生成的轨迹信息，以及所述触控信号触发生成的计算结果，并将所述轨迹信息以 及所述计算结果进行显示；或，

当所述交互模式为手写识别模式时，确定所述响应内容为识别所述触控信号生成的轨迹信息得到的识别内容，并将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，所述当所述交互模式为对比类模式时，所述显示响应内容单元具体用于：

当所述交互模式为对比类模式中的表格对比模式时，将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容，其中所述新表格用于与所述已有表格进行对比显示；或，

当所述交互模式为对比类模式中的文字对比模式时，将所述触控信号生成的轨迹信息作为与已有内容不同的新内容，并按与所述已有内容不同的显示方式显示所述新内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时，所述显示响应内容单元具体用于：

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为已有表格的内容，并显示所述轨迹信息；

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为表格对比模式，则将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时，所述显示响应内容单元具体用于：

若在图表区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为批注内容，在所述图表区进行显示；

若在图表区接收触控信号，且确定交互模式为图表绘制模式，则对所述触控信号生成的轨迹信息进行图表识别得到图表标识后，触发在所述图表区显示所述图表标识对应的图表。

作为一种可选的实施方式，当智能交互显示设备处于公式识别场景时，所述显示响应内容单元具体用于：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为计算模式时，则对所述触控信号生成的轨迹信息进行公式识别，对识别得到的算式进行计算确定计算结果，显示所述轨迹信息和所述计算结果。

作为一种可选的实施方式，当智能交互显示设备处于文字识别场景时，所述显示响应内容单元具体用于：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为手写识别模式，则对所述触控信号生成的轨迹信息进行识别得到识别内容，将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，还包括切换单元用于：

通过所述触控笔的按钮，在所述智能显示设备的显示屏上触发显示表征多种交互模式的菜单选项，以及通过所述按钮对所述触控类型对应的交互模式进行切换。

第四方面，本公开实施例还提供计算机存储介质，其上存储有计算机程序，该程序被处理器执行时用于实现上述第一方面所述方法的步骤。

本公开的这些方面或其他方面在以下的实施例的描述中会更加简明易懂。

附图说明

为了更清楚地说明本公开实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本公开实施例提供的一种人机交互的方法的实施流程图；

图2为本公开实施例提供的一种手写识别场景下的人机交互实施流程图；

图2A为本公开实施例提供的一种在手写识别场景下的书写示意图；

图2B为本公开实施例提供的一种在手写识别场景下的修改示意图；

图3为本公开实施例提供的一种表格识别场景下的人机交互实施流程图；

图3A为本公开实施例提供的一种表格识别场景下的新增表格列数示意图；

图3B为本公开实施例提供的一种表格识别场景下的新增对比表格示意图；

图4为本公开实施例提供的一种图形识别场景下的人机交互实施流程图；

图4A为本公开实施例提供的一种图形识别场景下的批注示意图；

图4B为本公开实施例提供的一种图形识别场景下的触发图表绘制示意图；

图5为本公开实施例提供的一种算式识别场景下的人机交互示意图；

图5A为本公开实施例提供的一种算式识别场景下的算式输入示意图；

图5B为本公开实施例提供的一种算式识别场景下的触发算式计算示意图；

图6为本公开实施例提供的一种手写识别场景下的人机交互实施流程图；

图6A为本公开实施例提供的一种手写识别场景下的手写输入示意图；

图6B为本公开实施例提供的一种手写识别场景下的手写识别示意图；

图7为本公开实施例提供的一种显示设备示意图；

图8为本公开实施例提供的一种人机交互的装置示意图。

具体实施方式

为了使本公开的目的、技术方案和优点更加清楚，下面将结合附图对本公开作进一步地详细描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本公开保护的 范围。

本公开实施例中术语“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

本公开实施例描述的应用场景是为了更加清楚的说明本公开实施例的技术方案，并不构成对于本公开实施例提供的技术方案的限定，本领域普通技术人员可知，随着新应用场景的出现，本公开实施例提供的技术方案对于类似的技术问题，同样适用。其中，在本公开的描述中，除非另有说明，“多个”的含义是两个或两个以上。

目前，越来越多的无纸化、无尘化办公场景促进了电子白板、会议一体机等智能显示设备的发展，用户与智能显示设备的交互逻辑成为智能会议的关键。随着智能显示设备的尺寸越来越大，功能越来越多，在人机交互过程中，用户需要频繁操作菜单进行不同功能的切换，由于显示设备的尺寸较大，在进行不同功能的切换的过程中需要用户频繁来回移动，容易破坏书写的连贯性，极大的影响用户的使用体验。

实施例1、本实施例提供的一种人机交互的方法，可以应用于智能显示设备，例如电子白板、会议一体机等。其中，本实施例中的电子白板并非是传统的利用记号笔或者粉笔书写的电子白板，而是指具有触控手写功能的大尺寸(一般为50寸以上)智能交互显示设备；在该智能交互显示设备上，安装有电子白板等书写程序，用户可以利用手指、主动笔或被动笔等在该显示设备上进行书写，该智能交互显示设备可以包含液晶显示器(Liquid Crystal Display，LCD)、有机发光半导体(Organic Electroluminescence Display，OLED)、电子墨水等显示模组，可以实时显示书写笔迹。

本实施例提供的人机交互方法，设计的核心思想是根据触控类型确定交互模式，根据交互模式确定响应内容，其中交互模式表示用户使用显示设备的功能模式，不同的触控类型对应不同的交互模式，不同的交互模式确定不同的响应内容，通过预先建立的触控类型和交互模式的对应关系，确定接收 的触控信号的触控类型的交互模式，从而通过接收的触控信号以及预先确定的对应关系，实现不同交互模式的切换，用户仅需要向智能显示设备输入不同触控类型的触控信号便可以实现不同交互模式的切换，不需要通过功能菜单实现不同功能模式的切换，从而有效降低用户点击菜单的频繁程度，提高会议的交互效率，提升用户的使用体验。

如图1所示，本实施例提供的一种人机交互的方法的实施流程如下所示：

步骤100、根据接收的触控信号的触控类型确定交互模式；

其中，所述触控类型用于表征所述触控信号对应的触控体的类型；实施中，通过触控体在触摸板上触摸操作实现触控，触摸板基于触控操作生成触控信号。触控体包括但不限于触控笔笔头、用户手指等。

在一些实施例中，本实施例中的触控类型包括至少两种，所述交互模式包括至少两种模式，所述触控类型和所述交互模式具有对应关系。可选的，本实施例中的触控类型与交互模式是一一对应的，或，两种或两种以上的触控类型也可以对应同一种交互模式，具体可以根据实际需求确定，本实施例对此不作过多限定。

在一些实施例中，本实施例中的触控类型包括但不限于：双头触控笔的第一端笔头类型、双头触控笔的第二端笔头类型、多头触控笔的任意一个笔头类型、用户手指类型、触控笔的按钮类型中的至少一种；其中，所述多头触控笔包括两个以上的触控笔头，所述多头触控笔可以通过按钮进行触控笔头的切换。

在一些实施例中，本实施例中的交互模式包括标准书写模式、非标准书写模式中的至少一种，其中所述非标准书写模式包括修改模式、对比类模式以及功能类模式中的至少一种；

所述标准书写模式用于表征将触控信号生成的轨迹信息直接显示的模式；实施中，在标注书写模式下，用户书写的轨迹信息能够不进行任何修改的直接显示，显示为手写轨迹。

所述修改模式用于表征将已有显示内容替换为触控信号生成的轨迹信息 后显示的模式；实施中，在修改模式下，用户书写的轨迹信息用于对已经存在的内容进行修改，因此会利用用户书写的轨迹信息替换掉已经存在的内容，例如，用户在已经存在的内容的位置上，写了新内容，那么将已经存在的内容替换成新内容后显示。

所述对比类模式用于表征将触控信号生成的轨迹信息与已有内容进行对比显示的模式；实施中，在该模式下，用户书写的轨迹信息是为了与已经存在的内容进行对比显示，从而进行不同内容之间的比对。

所述功能类模式用于表征将触控信号按对应功能进行操作后显示的模式。实施中，在该模式下，用户书写的轨迹信息或点击信号用于进行功能模式的触发，例如图表的绘制、算式的计算、书写轨迹的识别、触发菜单功能选择等，其中菜单功能选择包括但不限于：橡皮擦、笔画粗细、线条形状、字体颜色、字体、线条粗细中的至少一种。

步骤101、根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。

在一些实施例中，所述交互模式和所述响应内容具有对应关系，不同的触控类型的触控信号对应的响应内容是不同的，所述对应关系包括如下任意一种或任意多种：

第1种、任意两种交互模式对应不同的响应内容；

实施中，智能显示设备可以通过触控信号的触控类型对触控信号的响应内容进行区分，例如智能显示设备可以区分双头触控笔的第一端笔头生成的触控信号的响应内容，和双头触控笔的第二端笔头生成的触控信号的响应内容。

第2种、任意两种交互模式对应区分存储的响应内容；

实施中，本实施例中区分存储具体是指存储不同交互模式的响应内容时，对进行不同交互模式的响应内容区分，可以通过标签标记的方式区分，实际存储的存储区可以是相同的，也可以是不同的，本实施例对此不作过多限定。

第3种、任意两种交互模式对应区分显示的响应内容；

实施中，可以通过不同的颜色、线条粗细、线条格式(如实虚线等)对响应内容进行区分显示。例如将双头触控笔的第一端笔头生成的触控信号的响应内容显示为黑色，将双头触控笔的第二端笔头生成的触控信号的响应内容显示为红色。

第4种、任意两种交互模式对应不同图层级别的响应内容。

实施中，可以通过不同的图层级别对响应内容进行区分显示，其中显示时图层级别高的响应内容会覆盖图层级别低的响应内容。

本实施例通过对上述响应内容的区分，帮助用户对不同触控类型对应的响应内容进行区分显示，避免用户混淆。

在一些实施例中，本实施例提供多种触控类型、多种交互模式，其中触控类型和交互模式之间的对应关系可以根据用户需求定义，本实施例不作过多限定。需要说明的是，不同的交互模式，确定的触控信号的响应内容是不同的。

需要说明的是，本实施例确定交互模式之后，可以根据交互模式确定响应内容，并根据交互模式显示响应内容。其中，不同的交互模式，显示响应内容的方式可能是不同的，也可能是相同的，本实施例对此不作过多限定。在交互模式下，具体如何确定触控信号的响应内容以及如何显示响应内容都基于该交互模式定义的功能确定，本实施例对此不作过多限定。

在一些实施例中，本实施例提供如下任一或任多种显示响应内容的方式，具体包括：

方式1、在所述触控信号的位置上直接显示所述响应内容；

在该方式下，交互模式可以是标准书写模式、修改模式、对比类模式中的至少一种。

方式2、利用所述响应内容替换掉所述触控信号的位置上已有的内容后显示；

在该方式下，交互模式可以是修改模式。

方式3、将所述响应内容与所述触控信号的位置上已有的内容重叠显示。

在该方式下，交互模式可以是标准书写模式、修改模式、对比类模式中的至少一种。

需要说明的是，本实施例中响应内容的显示方式可以根据交互模式确定，交互模式的显示方式是预先定义的，本实施例不作过多限定。

在一些实施例中，所述触控类型包括触控笔的笔头类型；其中所述触控笔包括至少两个笔头，任意两个笔头的笔头类型不同。

所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一端笔头类型和第二端笔头类型；或，

所述触控笔为两个以上笔头的触控笔，不同笔头之间通过按钮切换，所述触控类型包括各个笔头的笔头类型。

在一些实施例中，所述触控类型包括用户手指类型、触控笔的按钮类型中的至少一种。

在一些实施例中，若所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一笔头类型和第二笔头类型，则通过如下任一种方式根据接收的触控信号的触控类型确定交互模式：

方式a、根据所述第一端笔头类型，确定所述交互模式为标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式；

方式b、根据所述第一端笔头类型，确定所述交互模式为非标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为标准书写模式；

方式c、根据所述第一端笔头类型，确定所述交互模式为非标准书写模式中的一种模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式中的另一种模式。

在一些实施例中，还可以预先定义多头触控笔的各个笔头对应的交互模式，从而使得用户在书写过程中，通过对不同触控笔头的切换实现对不同交互模式的切换；还可以预先定义触控笔的按钮对应的交互模式，通过用户点击触控笔的按钮实现对交互模式的切换；能够减少频繁点击菜单进行切换的过程，提高用户的交互体验。

需要说明的是，本实施例中确定交互模式的步骤仅为一种示例，基于上述原理确定的触控类型和交互模式的对应关系都属于本实施例的保护范围，本实施例对此不作过多限定。

在一些实施例中，本实施例通过如下任一或任多种方法根据交互模式确定响应内容：

方法1)根据所述标准书写模式，确定所述响应内容为所述触控信号生成的轨迹信息；

在标准书写模式下，响应内容即为触控信号生成的轨迹信息，用户书写的内容就是响应内容，实施中，可以直接显示该响应内容。

方法2)根据所述修改模式，确定所述响应内容为所述触控信号生成的轨迹信息；

在修改模式下，响应内容也是触控信号生成的轨迹信息，由于修改模式下用户的目的是为了对原有内容进行修改，因此用户在原有内容的位置上输入触控信号并生成轨迹信息，但是显示该响应内容的方式包括至少两种：一种是，保留原有内容和响应内容，并设置响应内容显示的图层级别高于原有内容的图层级别；另一种是，删除原有内容，将原有内容替换为响应内容后显示。

方法3)根据所述对比类模式，确定所述响应内容为根据所述触控信号生成的轨迹信息确定的内容；

在对比类模式下，根据触控信号生成的轨迹信息确定响应内容。可选的，对比类模式包括但不限于：表格对比模式、文字对比模式中的至少一种。

在一些实施例中，根据对比类模式中的表格对比模式，确定所述响应内容为根据所述触控信号生成的轨迹信息确定的区别于已有表格的新表格中的内容；实施中，用户输入触控信号的目的是为了与原有的表格进行对比，那么根据触控信号生成轨迹信息后，需要将该轨迹信息与原有表格中的内容进行区别，还可以对该轨迹信息确定的响应内容进行区别显示。例如原有表格显示为黑色，响应内容显示为红色。

在一些实施例中，根据对比类模式中的文字对比模式，确定所述响应内容为根据所述触控信号生成的轨迹信息确定的新内容，所述新内容使用的字体区别于已有内容使用的字体。实施中，用户输入触控信号的目的是为了与原有内容进行对比，那么根据触控信号生成轨迹信息后，需要将该轨迹信息确定的新内容的字体进行区别显示，例如，原有内容为手写字体，响应内容为宋体显示。

方法4)根据所述功能类模式，确定所述响应内容为识别所述触控信号生成的轨迹信息后得到的识别内容，以及对所述识别内容执行相关功能操作后得到的内容。

在一些实施例中，本实施例中的功能类模式包括但不限于图表绘制模式、计算模式、手写识别模式中的至少一种。

其中，图标绘制模式，用于在接收到图标标识后，触发对用户书写的内容进行识别，并将识别得到的表格内容绘制成对应的图表；计算模式，用于在接收到触控信号后触发进行算式识别，并对识别得到的算式进行自动计算，显示计算得到的结果；手写识别模式，用于在接收到触控信号后触发进行书写轨迹的识别，并将识别得到的识别内容转化为预设字体后显示。

在一些实施例中，本实施例在功能类模式下，通过如下任一或任多种方式确定响应内容：

方式a)根据功能类模式中的图表绘制模式，确定所述响应内容为识别所述触控信号生成的轨迹信息后得到的图表标识，以及根据所述图表标识绘制对应的图表；

实施中，在图表绘制模式下，用户输入的触控信息用于触发进行图表绘制显示，对触控信号生成的轨迹信息进行识别后得到图表标识，从而根据图表标识自动绘制与该图表标识对应的图表。

在一些实施例中，在图表绘制模式下，显示屏分为书写区和图表区，其中书写区用于接收用户书写的图表数据，图表区用于接收图表标识后显示对应的图表，其中图表标识包括但不限于直方图标识、饼图标识、折线图标识 等。

方式b)根据功能类模式中的计算模式，确定所述响应内容为识别所述触控信号生成的轨迹信息后得到的算式，以及计算所述算式得到的结果；

在一些实施例中，在计算模式下，接收到触控信号后会触发进行算式识别，并对识别的算式进行自动计算，将计算得到的结果进行显示。

方式c)根据功能类模式中的手写识别模式，确定所述响应内容为识别所述触控信号生成的轨迹信息后得到的识别内容，以及将所述识别内容中的字体转换为预设字体后得到的内容。

在一些实施例中，在手写识别模式下，接收到的触控信号会触发进行内容识别，从而将识别得到的识别内容中的字体转换为预设字体后显示。

在一些实施例中，本实施例可以基于不同的交互模式确定的响应内容，显示该响应内容，上述根据交互模式确定响应内容的方法和根据交互模式显示响应内容的方法可以进行结合，本实施例给出如下任一种结合的示例，根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，具体实施方式如下任意一种所示：

实施方式1、当所述交互模式为标准书写模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并在所述触控信号的触控位置直接显示所述轨迹信息；

实施方式2、当所述交互模式为非标准书写模式时，根据所述触控信号生成的轨迹信息确定响应内容，并在所述触控信号对应的触控位置显示所述响应内容。

在一些实施例中，非标准书写模式包括修改模式、对比类模式、图表绘制模式、计算模式、手写识别模式中的至少一种。

具体实施中，根据非标准书写模式还可以进一步确定在不同的非标准书写模式下如何确定响应内容并显示响应内容的方法，具体如下所示：

方式2a、当所述交互模式为修改模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述触控信号的触控位置上已有的内容替换为所 述轨迹信息后显示，或，将所述轨迹信息与所述触控信号的位置上已有的内容重叠显示；

方式2b、当所述交互模式为对比类模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述轨迹信息与已有内容进行对比显示；

在一些实施例中，在对比类模式时，还包括表格对比模式和文字对比模式，其中：

当所述交互模式为对比类模式中的表格对比模式时，将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容，其中所述新表格用于与所述已有表格进行对比显示；

当所述交互模式为对比类模式中的文字对比模式时，将所述触控信号生成的轨迹信息作为与已有内容不同的新内容，并按与所述已有内容不同的显示方式显示所述新内容。

方式2c、当所述交互模式为图表绘制模式时，确定所述响应内容为所述触控信号触发生成的图表，并将所述图表进行显示；

方式2d、当所述交互模式为计算模式时，确定所述响应内容为所述触控信号生成的轨迹信息，以及所述触控信号触发生成的计算结果，并将所述轨迹信息以及所述计算结果进行显示；

方式2e、当所述交互模式为手写识别模式时，确定所述响应内容为识别所述触控信号生成的轨迹信息得到的识别内容，并将所述识别内容的字体转换为预设字体后进行显示。

在一些实施例中，本实施例还提供了多种书写场景下，根据交互模式确定并显示响应内容的方法，具体如下所示：

场景1、智能交互显示设备处于图表识别场景。

实施中，若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为已有表格的内容，并显示所述轨迹信息；

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为表 格对比模式，则将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容。

场景2、智能交互显示设备处于图表识别场景。

若在图表区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为批注内容，在所述图表区进行显示；

若在图表区接收触控信号，且确定交互模式为图表绘制模式，则对所述触控信号生成的轨迹信息进行图表识别得到图表标识后，触发在所述图表区显示所述图表标识对应的图表。

场景3、智能交互显示设备处于公式识别场景。

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为计算模式时，则对所述触控信号生成的轨迹信息进行公式识别，对识别得到的算式进行计算确定计算结果，显示所述轨迹信息和所述计算结果。

场景4、智能交互显示设备处于文字识别场景。

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为手写识别模式，则对所述触控信号生成的轨迹信息进行识别得到识别内容，将所述识别内容的字体转换为预设字体后进行显示。

在一些实施例中，本实施例还可以通过所述触控笔的按钮，在所述智能显示设备的显示屏上触发显示表征多种交互模式的菜单选项，以及通过所述按钮对所述触控类型对应的交互模式进行切换。

在一些实施例中，本实施例可以通过触控笔的按钮切换，实现对不同触控类型的切换，具体包括：

根据对触控笔的按钮切换，确定对所述触控笔支持的触控类型进行切换，接收切换触控类型后的触控信号；根据切换后的触控类型确定交互模式；根据所述交互模式确定并显示所述切换触控类型后的触控信号对应的响应内容。

实施中，可以预先定义按钮和触控类型之间的对应关系，例如单击按钮对应一种触控类型，双击按钮对应另一种触控类型；再如，触控笔上包括多个按钮，那么第一按钮对应一种触控类型，第二按钮对应另一种触控类型，用户可以通过对触控笔的按钮切换，实现触控类型的切换。从而根据切换后的触控类型确定交互模式，根据交互模式确定切换触控类型后的触控信号对应的响应内容，并显示该响应内容。

在一些实施例中，本实施例还可以通过对触控笔的按钮切换，实现对交互模式的切换，具体包括：

根据对触控笔的按钮切换，确定对所述触控类型对应的交互模式进行切换；根据切换后的交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。

实施中，用户通过对触控笔的按钮进行切换，实现对交互模式的切换，在该情况下，可以预先定义切换按钮和交互模式之间的对应关系，从而在用户对按钮进行切换后，实现对交互模式的切换。

在一些实施例中，本实施例还可以对触控笔上按钮进行切换，在显示屏上触发显示菜单功能选项，例如橡皮擦、笔画粗细等。

在一些实施例中，本实施例还可以通过触控笔上的按钮，在智能显示设备支持的高级功能轮盘中进行选择，其中，可以通过对按钮的操作，在智能显示设备上显示高级功能轮盘，并通过对按钮的操作，实现高级功能轮盘中不同菜单功能选项的选择。

在一些实施例中，如图2所示，本实施例提供一种手写识别场景下的人机交互方法，实施中，以触控类型包括双头触控笔的第一端笔头类型、双头触控笔的第二端笔头类型为例进行说明，预先设置双头触控笔的第一端笔头类型对应手写识别模式，双头触控笔的第二端笔头类型对应修改模式。

该方法的具体实施方式如下所示：

步骤200、接收双头触控笔的第一端笔头生成的触控信号；

步骤201、对触控信号生成的轨迹信息进行识别，将得到的识别内容的字体转换为预设字体，在该触控信号的位置上实时显示转换字体后的识别内容；

步骤202、接收双头触控笔的第二端笔头生成的触控信号；

步骤203、对触控信号生成的轨迹信息进行识别得到识别内容，将识别内容的字体转换为预设字体，并将触控信号的位置上已有的内容替换为转换字体后的识别内容。

在手写识别场景下，如图2A所示，假设显示屏上已经存在用户书写的内容A，那么当用户使用双头触控笔的第一端笔头在该内容A上书写内容B时，会将新书写的内容B和内容A重叠显示，如图2B所示，当用户使用双头触控笔的第二端笔头在该内容A上书写内容B时，会将内容A替换掉内容B后显示。

在一些实施例中，如图3所示，本实施例提供一种表格识别场景下的人机交互方法，实施中，以触控类型包括双头触控笔的第一端笔头类型、双头触控笔的第二端笔头类型为例进行说明，预先设置双头触控笔的第一端笔头类型对应标准书写模式，双头触控笔的第二端笔头类型对应表格对比模式。

该方法的具体实施方式如下所示：

步骤300、接收双头触控笔的第一端笔头生成的触控信号；

步骤301、对触控信号生成的轨迹信息进行识别得到图表数据，在图表区显示所述图表数据对应的原始图表；

步骤302、接收双头触控笔的第二端笔头生成的触控信号；

步骤303、对触控信号生成的轨迹信息进行识别得到新图表数据，在图表区显示所述新图表数据对应的新图表。

在表格识别场景中，如图3A所示，如果当前在书写区已经存在一个2列的图表数据，在图表区已经显示该图表数据的原始图表；此时，如果用户继续使用双头触控笔的第一端笔头在书写区添加表格数据，例如新增一列或一行表格数据，那么在图表区会触发对原始图表的更新，通过用户书写的表格 数据对原始图表进行更新，得到更新后的原始图表，用户使用双头触控笔的第一端笔头在书写区书写的表格数据被认为是原始图表的表格数据。如图3B所示，如果用户使用双头触控笔的第二端笔头在书写区添加表格数据，那么会在图表区触发新表格的显示，此时图表区会同时显示两个图表，原始图表和新图表，此时用户书写的表格数据被认为是新图表的表格数据。

在一些实施例中，如图4所示，本实施例提供一种图形识别场景下的人机交互方法，实施中，以触控类型包括双头触控笔的第一端笔头类型、双头触控笔的第二端笔头类型为例进行说明，预先设置双头触控笔的第一端笔头类型对应标准书写模式，双头触控笔的第二端笔头类型对应图表绘制模式。

该方法的具体实施方式如下所示：

步骤400、接收双头触控笔的第一端笔头生成的触控信号；

步骤401、对触控信号生成的轨迹信息进行识别，显示识别得到的识别内容；

步骤402、接收双头触控笔的第二端笔头生成的触控信号；

步骤403、对触控信号生成的轨迹信息进行识别得到图表标识，根据所述图表标识绘制对应的图表，在图表区显示该图表。

在图形识别场景下，显示屏分为书写区和图表区，其中书写区用于接收用户的书写轨迹，图表区用于显示图表、批注、接收图表标识等功能。实施中，如图4A所示，如果用户使用双头触控笔的第一端笔头进行书写，则对用户书写的轨迹信息进行识别后，直接显示识别得到的识别内容，例如用户在图表区使用双头触控笔的第一端笔头进行书写，那么书写的内容作为该图表区的批注进行显示，如图4B所示，如果用户使用双头触控笔的第二端笔头进行书写，那么会对书写的轨迹信息进行识别，并触发图表绘制，根据识别得到的图表标识绘制图表，将绘制的图表在图表区进行显示。例如用户在图表区绘制坐标轴(图表标识)，则触发进行图表显示。

在一些实施例中，上述图形识别场景中的人机交互流程也适用于具有图 形识别功能的写字板，能够节省用户频繁点击按钮进行功能切换的步骤，提供用户的交互体验。

在一些实施例中，如图5所示，本实施例提供一种算式识别场景下的人机交互方法，实施中，以触控类型包括双头触控笔的第一端笔头类型、双头触控笔的第二端笔头类型为例进行说明，预先设置双头触控笔的第一端笔头类型对应标准书写模式，双头触控笔的第二端笔头类型对应计算模式。

该方法的具体实施方式如下所示：

步骤500、接收双头触控笔的第一端笔头生成的触控信号；

步骤501、对触控信号生成的轨迹信息进行识别，显示识别得到的识别内容；

步骤502、接收双头触控笔的第二端笔头生成的触控信号；

步骤503、对触控信号生成的轨迹信息进行识别得到算式，自动计算所述算式的结果，并显示所述结果。

在算式识别场景下，如图5A所示，如果用户使用双头触控笔的第一端笔头进行书写，那么会对用户书写的轨迹信息进行识别得到识别结果，直接显示该识别结果，例如用户写1+1＝，则显示1+1＝；如图5B所示，如果用户使用双头触控笔的第二端笔头进行书写，那么会对用户书写的轨迹信息进行识别得到算式，并自动计算所述算式得到该算式的结果，显示该结果，例如用于写1+1＝，则自动计算该算式的结果为2，并显示为1+1＝2。

在一些实施例中，如图6所示，本实施例提供一种手写识别场景下的人机交互方法，实施中，以触控类型包括双头触控笔的第一端笔头类型、双头触控笔的第二端笔头类型为例进行说明，预先设置双头触控笔的第一端笔头类型对应标准书写模式，双头触控笔的第二端笔头类型对应手写识别模式。

该方法的具体实施方式如下所示：

步骤600、接收双头触控笔的第一端笔头生成的触控信号；

步骤601、对触控信号生成的轨迹信息进行识别，显示识别得到的识别内容；

步骤602、接收双头触控笔的第二端笔头生成的触控信号；

步骤603、对触控信号生成的轨迹信息进行识别得到识别内容，将所述识别内容中的字体转换为预设字体，并显示转换后的识别内容。

在该手写识别场景下，如图6A所示，如果用户使用双头触控笔的第一端笔头进行书写，那么对用户书写的轨迹信息进行识别，将识别得到的手写字体原样进行显示，如图6B所示，如果用户使用双头触控笔的第二端笔头进行书写，那么对用户书写的轨迹信息进行识别，将识别内容中的字体转换为预设字体后显示，例如转换为宋体后显示。

实施例2、基于相同的发明构思，本公开实施例还提供了一种显示设备，由于该设备即是本公开实施例中的方法中的设备，并且该设备解决问题的原理与该方法相似，因此该设备的实施可以参见方法的实施，重复之处不再赘述。

如图7所示，该显示设备包括显示屏700、控制电路701，其中：

所述显示屏700用于进行内容的显示；

所述控制电路701被配置为执行如下步骤：

根据接收的触控信号的触控类型确定交互模式；其中，所述触控类型用于表征所述触控信号对应的触控体的类型；

根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。

作为一种可选的实施方式，所述触控类型包括至少两种，所述交互模式包括至少两种模式，所述触控类型和所述交互模式具有对应关系。

作为一种可选的实施方式，所述交互模式和所述响应内容具有对应关系，所述对应关系包括如下任意一种或任意多种：

任意两种交互模式对应不同的响应内容；

任意两种交互模式对应区分存储的响应内容；

任意两种交互模式对应区分显示的响应内容；

任意两种交互模式对应不同图层级别的响应内容。

作为一种可选的实施方式，所述触控类型包括触控笔的笔头类型；其中所述触控笔包括至少两个笔头，任意两个笔头的笔头类型不同。

作为一种可选的实施方式，

所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一端笔头类型和第二端笔头类型；或，

所述触控笔为两个以上笔头的触控笔，不同笔头之间通过按钮切换，所述触控类型包括各个笔头的笔头类型。

作为一种可选的实施方式，所述触控类型包括用户手指类型、触控笔的按钮类型中的至少一种。

作为一种可选的实施方式，若所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一笔头类型和第二笔头类型，则所述控制电路701具体被配置为执行：

根据所述第一端笔头类型，确定所述交互模式为标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式中的一种模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式中的另一种模式。

作为一种可选的实施方式，所述控制电路701具体被配置为执行：

当所述交互模式为标准书写模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并在所述触控信号的触控位置直接显示所述轨迹信息；或，

当所述交互模式为非标准书写模式时，根据所述触控信号生成的轨迹信息确定响应内容，并在所述触控信号对应的触控位置显示所述响应内容。

作为一种可选的实施方式，所述非标准书写模式包括修改模式、对比类模式、图表绘制模式、计算模式、手写识别模式中的至少一种。

作为一种可选的实施方式，所述当所述交互模式为非标准书写模式时，所述控制电路701具体被配置为执行：

当所述交互模式为修改模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述触控信号的触控位置上已有的内容替换为所述轨迹信息后显示，或，将所述轨迹信息与所述触控信号的位置上已有的内容重叠显示；或，

当所述交互模式为对比类模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述轨迹信息与已有内容进行对比显示；或，

当所述交互模式为图表绘制模式时，确定所述响应内容为所述触控信号触发生成的图表，并将所述图表进行显示；或，

当所述交互模式为计算模式时，确定所述响应内容为所述触控信号生成的轨迹信息，以及所述触控信号触发生成的计算结果，并将所述轨迹信息以及所述计算结果进行显示；或，

当所述交互模式为手写识别模式时，确定所述响应内容为识别所述触控信号生成的轨迹信息得到的识别内容，并将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，所述当所述交互模式为对比类模式时，所述控制电路701具体被配置为执行：

当所述交互模式为对比类模式中的表格对比模式时，将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容，其中所述新表格用于与所述已有表格进行对比显示；或，

当所述交互模式为对比类模式中的文字对比模式时，将所述触控信号生成的轨迹信息作为与已有内容不同的新内容，并按与所述已有内容不同的显示方式显示所述新内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时， 所述控制电路701具体被配置为执行：

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为已有表格的内容，并显示所述轨迹信息；

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为表格对比模式，则将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时，所述控制电路701具体被配置为执行：

若在图表区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为批注内容，在所述图表区进行显示；

若在图表区接收触控信号，且确定交互模式为图表绘制模式，则对所述触控信号生成的轨迹信息进行图表识别得到图表标识后，触发在所述图表区显示所述图表标识对应的图表。

作为一种可选的实施方式，当智能交互显示设备处于公式识别场景时，所述控制电路701具体被配置为执行：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为计算模式时，则对所述触控信号生成的轨迹信息进行公式识别，对识别得到的算式进行计算确定计算结果，显示所述轨迹信息和所述计算结果。

作为一种可选的实施方式，当智能交互显示设备处于文字识别场景时，所述控制电路701具体被配置为执行：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为手写识别模式，则对所述触控信号生成的轨迹信息进行识别得到识别内容，将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，所述控制电路701具体还被配置为执行：

通过所述触控笔的按钮，在所述智能显示设备的显示屏上触发显示表征多种交互模式的菜单选项，以及通过所述按钮对所述触控类型对应的交互模式进行切换。

实施例3、基于相同的发明构思，本公开实施例还提供了一种人机交互的装置，由于该装置即是本公开实施例中的方法中的装置，并且该装置解决问题的原理与该方法相似，因此该装置的实施可以参见方法的实施，重复之处不再赘述。

如图8所示，该装置包括：

确定交互模式单元800，用于根据接收的触控信号的触控类型确定交互模式；其中，所述触控类型用于表征所述触控信号对应的触控体的类型；

显示响应内容单元801，用于根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。

作为一种可选的实施方式，所述触控类型包括至少两种，所述交互模式包括至少两种模式，所述触控类型和所述交互模式具有对应关系。

作为一种可选的实施方式，所述交互模式和所述响应内容具有对应关系，所述对应关系包括如下任意一种或任意多种：

任意两种交互模式对应不同的响应内容；

任意两种交互模式对应区分存储的响应内容；

任意两种交互模式对应区分显示的响应内容；

任意两种交互模式对应不同图层级别的响应内容。

作为一种可选的实施方式，所述触控类型包括触控笔的笔头类型；其中所述触控笔包括至少两个笔头，任意两个笔头的笔头类型不同。

作为一种可选的实施方式，

所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一端笔头类型和第二端笔头类型；或，

所述触控笔为两个以上笔头的触控笔，不同笔头之间通过按钮切换，所述触控类型包括各个笔头的笔头类型。

作为一种可选的实施方式，所述触控类型包括用户手指类型、触控笔的按钮类型中的至少一种。

作为一种可选的实施方式，若所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一笔头类型和第二笔头类型，则所述确定交互模式单元800具体用于：

根据所述第一端笔头类型，确定所述交互模式为标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为标准书写模式；或，

根据所述第一端笔头类型，确定所述交互模式为非标准书写模式中的一种模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式中的另一种模式。

作为一种可选的实施方式，所述显示响应内容单元801具体用于：

当所述交互模式为标准书写模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并在所述触控信号的触控位置直接显示所述轨迹信息；或，

当所述交互模式为非标准书写模式时，根据所述触控信号生成的轨迹信息确定响应内容，并在所述触控信号对应的触控位置显示所述响应内容。

作为一种可选的实施方式，所述非标准书写模式包括修改模式、对比类模式、图表绘制模式、计算模式、手写识别模式中的至少一种。

作为一种可选的实施方式，所述当所述交互模式为非标准书写模式时，所述显示响应内容单元801具体用于：

当所述交互模式为修改模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述触控信号的触控位置上已有的内容替换为所述轨迹信息后显示，或，将所述轨迹信息与所述触控信号的位置上已有的内容重叠显示；或，

当所述交互模式为对比类模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述轨迹信息与已有内容进行对比显示；或，

当所述交互模式为图表绘制模式时，确定所述响应内容为所述触控信号触发生成的图表，并将所述图表进行显示；或，

当所述交互模式为计算模式时，确定所述响应内容为所述触控信号生成的轨迹信息，以及所述触控信号触发生成的计算结果，并将所述轨迹信息以及所述计算结果进行显示；或，

当所述交互模式为手写识别模式时，确定所述响应内容为识别所述触控信号生成的轨迹信息得到的识别内容，并将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，所述当所述交互模式为对比类模式时，所述显示响应内容单元801具体用于：

当所述交互模式为对比类模式中的表格对比模式时，将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容，其中所述新表格用于与所述已有表格进行对比显示；或，

当所述交互模式为对比类模式中的文字对比模式时，将所述触控信号生成的轨迹信息作为与已有内容不同的新内容，并按与所述已有内容不同的显示方式显示所述新内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时，所述显示响应内容单元801具体用于：

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为已有表格的内容，并显示所述轨迹信息；

若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为表格对比模式，则将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容。

作为一种可选的实施方式，当智能交互显示设备处于图表识别场景时， 所述显示响应内容单元801具体用于：

若在图表区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为批注内容，在所述图表区进行显示；

若在图表区接收触控信号，且确定交互模式为图表绘制模式，则对所述触控信号生成的轨迹信息进行图表识别得到图表标识后，触发在所述图表区显示所述图表标识对应的图表。

作为一种可选的实施方式，当智能交互显示设备处于公式识别场景时，所述显示响应内容单元801具体用于：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为计算模式时，则对所述触控信号生成的轨迹信息进行公式识别，对识别得到的算式进行计算确定计算结果，显示所述轨迹信息和所述计算结果。

作为一种可选的实施方式，当智能交互显示设备处于文字识别场景时，所述显示响应内容单元801具体用于：

若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

若确定交互模式为手写识别模式，则对所述触控信号生成的轨迹信息进行识别得到识别内容，将所述识别内容的字体转换为预设字体后进行显示。

作为一种可选的实施方式，还包括切换单元用于：

通过所述触控笔的按钮，在所述智能显示设备的显示屏上触发显示表征多种交互模式的菜单选项，以及通过所述按钮对所述触控类型对应的交互模式进行切换。

基于相同的发明构思，本公开实施例还提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现如下步骤：

根据接收的触控信号的触控类型确定交互模式；其中，所述触控类型用 于表征所述触控信号对应的触控体的类型；

根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。这样，倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (18)

1. 一种人机交互的方法，其中，应用于智能交互显示设备，该方法包括：

   根据接收的触控信号的触控类型确定交互模式；其中，所述触控类型用于表征所述触控信号对应的触控体的类型；

   根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容。
2. 根据权利要求1所述的方法，其中，所述触控类型包括至少两种，所述交互模式包括至少两种模式，所述触控类型和所述交互模式具有对应关系。
3. 根据权利要求2所述的方法，其中，所述交互模式和所述响应内容具有对应关系，所述对应关系包括如下任意一种或任意多种：

   任意两种交互模式对应不同的响应内容；

   任意两种交互模式对应区分存储的响应内容；

   任意两种交互模式对应区分显示的响应内容；

   任意两种交互模式对应不同图层级别的响应内容。
4. 根据权利要求1所述的方法，其中，所述触控类型包括触控笔的笔头类型；其中所述触控笔包括至少两个笔头，任意两个笔头的笔头类型不同。
5. 根据权利要求4所述的方法，其中，

   所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一端笔头类型和第二端笔头类型；或，

   所述触控笔为两个以上笔头的触控笔，不同笔头之间通过按钮切换，所述触控类型包括各个笔头的笔头类型。
6. 根据权利要求1所述的方法，其中，所述触控类型包括用户手指类型、触控笔的按钮类型中的至少一种。
7. 根据权利要求5所述的方法，其中，若所述触控笔为两个笔头的触控笔，所述两个笔头设置在所述触控笔的笔体两端，所述触控类型包括第一笔头类型和第二笔头类型，则所述根据接收的触控信号的触控类型确定交互模 式，包括：

   根据所述第一端笔头类型，确定所述交互模式为标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式；或，

   根据所述第一端笔头类型，确定所述交互模式为非标准书写模式；以及根据所述第二端笔头类型，确定所述交互模式为标准书写模式；或，

   根据所述第一端笔头类型，确定所述交互模式为非标准书写模式中的一种模式；以及根据所述第二端笔头类型，确定所述交互模式为非标准书写模式中的另一种模式。
8. 根据权利要求1～7任一所述的方法，其中，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

   当所述交互模式为标准书写模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并在所述触控信号的触控位置直接显示所述轨迹信息；或，

   当所述交互模式为非标准书写模式时，根据所述触控信号生成的轨迹信息确定响应内容，并在所述触控信号对应的触控位置显示所述响应内容。
9. 根据权利要求8所述的方法，其中，所述非标准书写模式包括修改模式、对比类模式、图表绘制模式、计算模式、手写识别模式中的至少一种。
10. 根据权利要求9所述的方法，其中，所述当所述交互模式为非标准书写模式时，根据所述触控信号生成的轨迹信息确定响应内容，并在所述触控信号对应的触控位置显示所述响应内容，包括：

    当所述交互模式为修改模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述触控信号的触控位置上已有的内容替换为所述轨迹信息后显示，或，将所述轨迹信息与所述触控信号的位置上已有的内容重叠显示；或，

    当所述交互模式为对比类模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述轨迹信息与已有内容进行对比显示；或，

    当所述交互模式为图表绘制模式时，确定所述响应内容为所述触控信号触发生成的图表，并将所述图表进行显示；或，

    当所述交互模式为计算模式时，确定所述响应内容为所述触控信号生成的轨迹信息，以及所述触控信号触发生成的计算结果，并将所述轨迹信息以及所述计算结果进行显示；或，

    当所述交互模式为手写识别模式时，确定所述响应内容为识别所述触控信号生成的轨迹信息得到的识别内容，并将所述识别内容的字体转换为预设字体后进行显示。
11. 根据权利要求10所述的方法，其中，所述当所述交互模式为对比类模式时，确定所述响应内容为所述触控信号生成的轨迹信息，并将所述轨迹信息与已有内容进行对比显示，包括：

    当所述交互模式为对比类模式中的表格对比模式时，将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容，其中所述新表格用于与所述已有表格进行对比显示；或，

    当所述交互模式为对比类模式中的文字对比模式时，将所述触控信号生成的轨迹信息作为与已有内容不同的新内容，并按与所述已有内容不同的显示方式显示所述新内容。
12. 根据权利要求11所述的方法，其中，当智能交互显示设备处于图表识别场景时，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

    若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为已有表格的内容，并显示所述轨迹信息；

    若书写区已有表格，在所述书写区接收触控信号，且确定交互模式为表格对比模式，则将所述触控信号生成的轨迹信息确定为与已有表格不同的新表格中的内容。
13. 根据权利要求10所述的方法，其中，当智能交互显示设备处于图表识别场景时，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

    若在图表区接收触控信号，且确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息作为批注内容，在所述图表区进行显示；

    若在图表区接收触控信号，且确定交互模式为图表绘制模式，则对所述触控信号生成的轨迹信息进行图表识别得到图表标识后，触发在所述图表区显示所述图表标识对应的图表。
14. 根据权利要求10所述的方法，其中，当智能交互显示设备处于公式识别场景时，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

    若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

    若确定交互模式为计算模式时，则对所述触控信号生成的轨迹信息进行公式识别，对识别得到的算式进行计算确定计算结果，显示所述轨迹信息和所述计算结果。
15. 根据权利要求10所述的方法，其中，当智能交互显示设备处于文字识别场景时，所述根据所述交互模式确定所述触控信号对应的响应内容，并显示所述响应内容，包括：

    若确定交互模式为标准书写模式，则将所述触控信号生成的轨迹信息进行显示；

    若确定交互模式为手写识别模式，则对所述触控信号生成的轨迹信息进行识别得到识别内容，将所述识别内容的字体转换为预设字体后进行显示。
16. 根据权利要求2～7、9～15任一所述的方法，其中，该方法还包括：

    通过所述触控笔的按钮，在所述智能显示设备的显示屏上触发显示表征多种交互模式的菜单选项，以及通过所述按钮对所述触控类型对应的交互模式进行切换。
17. 一种智能显示设备，其中，包括显示屏、控制电路，其中：

    所述显示屏用于进行内容的显示；

    所述控制电路被配置为执行如权利要求1～16任一所述方法的步骤。
18. 一种计算机存储介质，其上存储有计算机程序，其中，该程序被处理器执行时实现如权利要求1～16任一所述方法的步骤。

Images