CN110069198A - 一种用户交互平台及用户交互信息识别展示方法 - Google Patents

Abstract

本发明实施例提供了一种用户交互平台及用户交互信息识别展示方法，用户交互平台包括：用户输入工具、用户操作屏以及背光照射设备；所述用户输入工具用于在所述用户操作屏的第一面上输入信息；所述背光照射设备正对所述用户操作屏的第二面，用于感应所述输入信息并将所述输入信息转换为图像投影到所述用户操作屏上。本发明实施例提供的用户交互平台及用户交互信息识别展示方法，通过用户输入工具能够帮助用户自由在用户操作屏上进行相应操作，同时将操作信息解析为图像实时在用户操作屏上进行显示，从而使得用户交互性更强，提高用户的体验。

Description

一种用户交互平台及用户交互信息识别展示方法

技术领域

本发明实施例涉及电子设备技术领域，尤其涉及一种用户交互平台及用户交互信息识别展示方法。

背景技术

在目前市场上，对于新媒体用户交互平台的应用已经十分普遍，多应用于教学、会议等处。

现有技术中，通常是通过PPT的形式由用户将需要演示的内容预存到平台中再进行展示，也有一些将拍摄视频预存到平台中同时配合真人讲解的方式进行。

但现有技术所提供的用户交互平台在人机交互上仍有很大的缺点，交互形式非常枯燥，用户在进行交互时无法进行实时操作，导致用户体验感差。

发明内容

为了解决上述问题，本发明实施例提供一种克服上述问题或者至少部分地解决上述问题的一种用户交互平台及用户交互信息识别展示方法。

第一方面本发明实施例提供一种用户交互平台，包括：

用户输入工具、用户操作屏以及背光照射设备；

所述用户输入工具用于在所述用户操作屏的第一面上输入信息；

所述背光照射设备正对所述用户操作屏的第二面，用于感应所述输入信息并将所述输入信息转换为图像投影到所述用户操作屏上。

第二方面本发明实施例提供了一种用户交互信息识别展示方法，包括：

获取用户操作屏上的输入信息；

将所述输入信息解析为图像信息；

将所述图像信息投影到所述用户操作屏上。

第三方面本发明实施例提供了一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行上述用户交互信息识别展示方法。

本发明实施例提供的用户交互平台及用户交互信息识别展示方法，通过用户输入工具能够帮助用户自由在用户操作屏上进行相应操作，同时将操作信息解析为图像实时在用户操作屏上进行显示，从而使得用户交互性更强，提高用户的体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种用户交互平台结构示意图；

图2是本发明实施例提供的用户交互平台操作的用户交互信息识别展示方法流程示意图；

图3是本发明实施例提供的电子设备的结构框图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1是本发明实施例提供的一种用户交互平台结构示意图，如图1所示，包括：

用户输入工具1、用户操作屏2以及背光照射设备3；

所述用户输入工具1用于在所述用户操作屏2的第一面上输入信息；

所述背光照射设备3正对所述用户操作屏2的第二面，用于感应所述输入信息并将所述输入信息转换为图像投影到所述用户操作屏2上。

如图1所示，本发明实施例提供的用户交互平台主要包括三个部分，第一部分是用户输入工具1，用户可以操作用户输入工具1在用户操作屏2上进行信息输入。用户进行输入的界面即本发明实施例中的用户操作屏2的第一面，相对应的，第一面的背面即本发明实施例中的用户操作屏2的第二面。可以理解的是，该用户输入工具1可以为多个，当有多个用户输入工具1进行操作时，本发明实施例将根据用户输入工具的ID号来区分后再依次进行反馈。

进一步的，用户可以通过用户输入工具1输入想要表达的信息，该信息用户可以通过在用户操作屏2上的绘制动作进行呈现，呈现的结果即本发明实施例中的输入信息。在用户使用用户输入工具1在用户操作屏2上进行输入信息的同时，背光照射设备3会对该输入信息进行识别，通过预设的一些图像识别算法和动作识别算法，将输入信息解析为能直接呈现的图像。由于背光照射设备3正对所述用户操作屏2的第二面，那么背光照射设备3可以直接将图像向用户操作屏2的第二面放射该图像，用户操作屏2的第二面接收到图像后再在用户操作屏2的第一面上将该图像进行呈现，从而给予用户实时的交互视觉反馈，优选的，本发明实施例还可以设置有一个声响设备，伴随视觉的反馈同时播放预设的音乐，给予用户听觉上的反馈。

本发明实施例提供的用户交互平台，通过用户输入工具能够帮助用户自由在用户操作屏上进行相应操作，同时将操作信息解析为图像实时在用户操作屏上进行显示，从而使得用户交互性更强，提高用户的体验。

在上述实施例的基础上，所述用户操作屏为全息投影膜。

优选的，本发明实施例采用的用户操作屏为全息投影膜，可以理解的是，用户操作屏需要能够接收用户的输入信息，同时能够接收背光照射设备的投影图像并呈像，而全息投影膜拥有独一无二的透明特性，在保持清晰显像的同时，能让观众透过投影膜看见背后景物，能够给予观众最好的观感体验。

在上述实施例的基础上，所述背光照射设备包括：

远红外摄像机和投影仪，所述远红外摄像机连接所述投影仪，所述远红外摄像机的拍摄端以及所述投影仪的投影端正对所述用户操作屏的第二面；

所述远红外摄像机用于感应输入信息后所述全息投影膜上温度的变化，以解析出所述输入信息对应的图像信息；

所述投影仪将所述图像信息投影到所述全息投影膜上。

如图1所示，本发明实施例提供的背光照射设备主要包括远红外摄像机4和投影仪5。

由上述实施例的内容可知，本发明实施例提供的背光照射设备需要能够采集得到用户操作屏上的输入信息，同时还需要将输入信息解析成图像并投影到用户操作屏上。优选的，本发明实施例的用户操作屏选用了全息投影膜，由于全息投影膜是超薄型结构，那么在膜两面的温度变化将可以视为一致，通过本发明实施例提供的远红外摄像机4即能够实时透过全息投影膜捕捉到用户操作屏第一面上的输入信息。

然后根据本发明实施例预设的图像识别算法，能够实时的解析出用户完成交互的输入位置信息，输入的区域形状信息，并将这些信息以图像的形式进行呈现。需要说明的是，该图像识别解析过程由处理器完成，本发明实施例可以外设由处理器与远红外摄像机4连接，也可以在远红外摄像机4上直接设置处理器进行图像处理，对此本发明实施例不作具体限定。

进一步的，本发明实施例将图像识别算法解析出的图像由投影仪5向全息投影膜投射，使得用户能够实时感受到视觉交互反馈。

在上述实施例的基础上，所述用户输入工具包括：

手部触摸设备、液体喷涂设备以及电热式接触设备的一种或多种。

优选的，本发明实施例提供的用户输入方式可以采用三种形式。第一种是通过手部触摸设备，即用户直接通过手部与用户操作屏进行接触，完成信息输入。第二种是液体喷涂设备，即用户往用户操作屏上喷涂液体，完成信息输入。第三种是电热式接触设备，用户通过手持电热式接触设备在用户操作屏上进行发热传导。

优选的，可以将手部触摸设备、液体喷涂设备以及电热式接触设备生产成方便使用的造型，例如铲子、喷枪、毛刷等，从而方便用户使用。

在上述实施例的基础上，所述用户输入工具内设置有无线通讯模块，所述无线通讯模块用于与外界主机设备进行实时通信，所述用户输入工具内还设置有处理器模块，所述处理器模块内搭载多种传感器单元，所述处理器模块将传感器单元的采集数据发送给所述外界主机，以辅助进行决策。

优选的，本发明实施例设置的传感器单元可以包括多种传感器类型，例如触摸传感，用于检测用户是否持握工具、力度传感器，用于检测用户使用工具的力度等，用户输入工具中还可扩展搭载加速度计、按钮开关等模块，处理器模块可将相关传感数据通过无线传输给主机，辅助交互系统的决策。

在上述实施例的基础上，所述手部触摸设备与所述电热式接触设备中还设有电热模块；

所述电热模块与所述处理器模块的电热接口连接，所述处理器模块通过所述电热接口控制所述电热模块发热

由上述实施例的内容可知，本发明实施例是通过改变用户操作屏上的温度变化来使得背光照射设备能够识别出图像，优选的，本发明实施例提供的手部触摸设备与所述电热式接触设备中设置有电热模块来实现发热，从而改变用户操作屏上的温度。

需要说明的是，由于液体喷涂设备喷涂液体的过程本身已经会改变温度，故而液体喷涂设备无须设置电热模块。

具体的，本发明实施例选用有适合手部触摸设备与所述电热式接触设备外形的电热膜或电热块，将电热膜或电热块与处理器模块连接，当用户向处理器模块发出指示，例如：按下手部触摸设备与所述电热式接触设备的发热开关时，处理器模块即控制电热模块进行发热。

图2是本发明实施例提供的用户交互平台操作的用户交互信息识别展示方法流程示意图，如图2所示，包括：

201、获取用户操作屏上的输入信息；

202、将所述输入信息解析为图像信息；

203、将所述图像信息投影到所述用户操作屏上。

由图1所示的实施例可知，本发明实施例提供了一个用户交互平台，用户能够在用户交互平台上进行信息交互。那么在交互平台的具体操作时，在步骤201中，本发明实施例首先需要获取用户的输入信息，可以理解的是，该输入信息一般是用户根据当前用户操作屏上显示的内容进行的信息选择，也可以是用户自由进行的信息输入。例如用户操作屏上提供一种考古挖掘的小游戏，用户可以通过用户操作显示屏上的提示点击相应的区域进行挖掘，该点击的挖掘信息即用户的输入信息。

进一步的，在步骤202中，本发明实施例通过预设的图像识别算法解析用户的输入信息，并将其转换为对应的图像信息，最后在步骤203中，将图像信息投影到用户操作屏上进行信息反馈。需要说明的是，步骤201至步骤203的运算过程非常快，从而能够给用户提供一个实时的反馈。

本发明实施例提供的用户交互信息识别展示方法，能够快速的将用户输入到用户操作屏上的内容进行反馈，使得用户能够有更好的体验。

在上述实施例的基础上，所述获取用户操作屏上的输入信息包括：

确定所述用户操作屏上温度变化的目标区域；

采集所述目标区域对应的红外图像。

优选的，本发明实施例在进行输入信息获取时是根据用户操作屏上的温度变化情况进行识别的。本发明实施例预先将用户操作屏分为多个预设区域并记录每个预设区域的初始温度，当检测到有某一块区域温度发生变化时，即确定该区域为本发明实施例所需的目标区域。

该区域检测过程可以由远红外摄像机进行捕捉和感应，同时远红外摄像机会将该目标区域的红外图像进行拍摄以识别用户输入信息的内容。

在上述实施例的基础上，所述将所述输入信息解析为图像信息，包括：

将所述红外图像对应的图像序列与预设的缓存图像序列进行帧差值计算，得到目标图像序列；

对所述目标图像序列进行二值化处理和图像渲染，得到所述图像信息。

由上述实施例的内容可知，本发明实施例通过预设的图像识别算法，能够将用户的输入信息解析为图像信息。那么具体的，当远红外摄像机拍摄到目标区域的红外图像后，由于红外图像帧率很高，所以帧间差值效果并不明显，因此本发明实施例加入了一个预设容量的先入先出队列来缓存红外图像，即本发明实施例中的预设的缓存图像序列，优选的，该预设容量设为5，那么当有目标区域的红外图像采集到时，会将红外图像转换为对应的图像序列，然后每个新的一帧入队时，就将头部的帧缓存出对，二者求差值，进行帧差值计算，从而得到目标图像序列。

进一步的，对目标图像序列经过二值化处理再进行图形渲染即可得到最终的图像信息。需要说明的是，本发明实施例在解析时还可以进行一下轮廓查找，获取一些需要的参数，用于检测用户操作屏中显示界面中的一些button，例如开始游戏、重新开始等是否被触发，轮廓大小还决定了生成粒子的数量等。

本发明实施例提供一种电子设备，包括：至少一个处理器；以及与所述处理器通信连接的至少一个存储器，其中：

图3是本发明实施例提供的电子设备的结构框图，参照图3，所述电子设备，包括：处理器(processor)301、通信接口(Communications Interface)302、存储器(memory)303和总线304，其中，处理器301，通信接口302，存储器303通过总线304完成相互间的通信。处理器301可以调用存储器303中的逻辑指令，以执行如下方法：获取用户操作屏上的输入信息；将所述输入信息解析为图像信息；将所述图像信息投影到所述用户操作屏上。

本发明实施例公开一种计算机程序产品，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法实施例所提供的方法，例如包括：获取用户操作屏上的输入信息；将所述输入信息解析为图像信息；将所述图像信息投影到所述用户操作屏上。

本发明实施例提供一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行上述各方法实施例所提供的方法，例如包括：获取用户操作屏上的输入信息；将所述输入信息解析为图像信息；将所述图像信息投影到所述用户操作屏上。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行每个实施例或者实施例的某些部分所述的方法。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种用户交互平台，其特征在于，包括：

用户输入工具、用户操作屏以及背光照射设备；

所述用户输入工具用于在所述用户操作屏的第一面上输入信息；

所述背光照射设备正对所述用户操作屏的第二面，用于感应所述输入信息并将所述输入信息转换为图像投影到所述用户操作屏上。

2.根据权利要求1所述的用户交互平台，其特征在于，所述用户操作屏为全息投影膜。

3.根据权利要求2所述的用户交互平台，其特征在于，所述背光照射设备包括：

远红外摄像机和投影仪，所述远红外摄像机连接所述投影仪，所述远红外摄像机的拍摄端以及所述投影仪的投影端正对所述用户操作屏的第二面；

所述远红外摄像机用于感应输入信息后所述全息投影膜上温度的变化，以解析出所述输入信息对应的图像信息；

所述投影仪将所述图像信息投影到所述全息投影膜上。

4.根据权利要求1所述的用户交互平台，其特征在于，所述用户输入工具包括：

手部触摸设备、液体喷涂设备以及电热式接触设备的一种或多种。

5.根据权利要求4所述的用户交互平台，其特征在于，所述用户输入工具内设置有无线通讯模块，所述无线通讯模块用于与外界主机设备进行实时通信，所述用户输入工具内还设置有处理器模块，所述处理器模块内搭载多种传感器单元，所述处理器模块将传感器单元的采集数据发送给所述外界主机，以辅助进行决策。

6.根据权利要求5所述的用户交互平台，其特征在于，所述手部触摸设备与所述电热式接触设备中还设有电热模块；

所述电热模块与所述处理器模块的电热接口连接，所述处理器模块通过所述电热接口控制所述电热模块发热。

7.一种根据权利要求1-6任一所述的用户交互平台操作的用户交互信息识别展示方法，其特征在于，包括：

获取用户操作屏上的输入信息；

将所述输入信息解析为图像信息；

将所述图像信息投影到所述用户操作屏上。

8.根据权利要求7所述的方法，其特征在于，所述获取用户操作屏上的输入信息包括：

确定所述用户操作屏上温度变化的目标区域；

采集所述目标区域对应的红外图像。

9.根据权利要求8所述的方法，其特征在于，所述将所述输入信息解析为图像信息，包括：

将所述红外图像对应的图像序列与预设的缓存图像序列进行帧差值计算，得到目标图像序列；

对所述目标图像序列进行二值化处理和图像渲染，得到所述图像信息。

10.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求7至9任一项所述的方法。