CN103631380A - 一种人机交互数据的处理方法及其控制系统 - Google Patents
一种人机交互数据的处理方法及其控制系统 Download PDFInfo
- Publication number
- CN103631380A CN103631380A CN201310641969.2A CN201310641969A CN103631380A CN 103631380 A CN103631380 A CN 103631380A CN 201310641969 A CN201310641969 A CN 201310641969A CN 103631380 A CN103631380 A CN 103631380A
- Authority
- CN
- China
- Prior art keywords
- data
- instructions
- classes
- machine interaction
- human
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种人机交互数据的处理方法及其控制系统,包括:获取人机交互数据;将所获取的人机交互数据进行指令类别的分类;将经过指令类别分类后的所述人机交互数据进行混合控制的切换、过滤以及整合;将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令;将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令,并根据所接收的反馈指令进行响应提示;本发明实现了多途径同时获取多种人机交互数据,且通过将控制指令发送至目标终端以及接收目标终端的反馈指令达到了人机双向交互的目的。
Description
技术领域
本发明属于人机交互技术领域,特别涉及一种人机交互数据的处理方法及其控制系统。
背景技术
人机交互技术主要由人的因素、交互设备和交互软件三个方面组成,传统的人机交互设备是针对单一功能的,在人机交互方面功能相对比较单一,特别是对于信息数据的采集,使得采集信息量过窄、数据不完全;同时,单一通道的传送模式并未把人机交互的手段和方式多样化的整合起来,进而实现多通道多途径的交互,达到真正的自然交互。且单一通道的交互方式在成本上显然比多通道的要高很多,工程实施和后期维护上更困难。在用户体验上难以达到用户满意的程度,在这某种程度上对人机交互技术和产品的推广上增加了难度,在产业化方面也就形成了一定的瓶颈。
发明内容
本发明所要解决的技术问题是提供一种能够实现同时获取多种人机交互数据、达到人机双向交互的人机交互数据的处理方法及其控制系统。
为解决上述技术问题,依据本发明的一个方面,提供了一种人机交互数据的处理方法,包括:获取所述人机交互数据;所述人机交互数据包括语音交互数据、手势控制数据、指纹信息数据、人脸信息数据以及体温信息数据;将所获取的人机交互数据进行指令类别的分类;所述指令类别包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别;将经过指令类别分类后的所述人机交互数据进行混合控制的切换、过滤以及整合;将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令;将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令,并根据所接收的反馈指令进行响应提示。
进一步地,所述获取人机交互数据包括:通过多功能扩展接口获取所述人机交互数据;其中,所述多功能扩展接口支持同时接入多种人机交互模组,进而实现多路交互数据的实时采集。
进一步地,所述将人机交互数据进行混合控制的切换、过滤以及整合具体包括;切换步骤,用于针对若干个人机交互数据指令类别进行指令类别间的切换;所述指令类别间的切换包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别两两组合进行切换;过滤步骤,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤;整合步骤,用于将过滤后的每一指令类别的所述人机交互数据进行参数整合,进而获得标准的人机交互数据。
进一步地,所述过滤步骤,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤具体包括:对语音交互数据指令类别中的语音波形数据进行拟合过滤;用于针对人机交互功能的定位,对非支持语音及其指令进行过滤;对手势控制数据指令类别中的手势红外数据依据坐标定位信息进行过滤;用于针对人机交互功能的定位,对非支持手势及其指令进行过滤。
进一步地,所述将控制指令发送至目标终端,以及接收所述目标终端的反馈指令包括:通过多功能扩展接口传送所述控制指令;其中,所述多功能扩展接口能够实现对多种控制收发器的支持扩展。
进一步地,所述将控制指令发送至目标终端,以及接收所述目标终端的反馈指令包括:通过2.4G无线通讯技术将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令。
进一步地,所述根据所接收的反馈指令进行响应提示包括:将所述目标终端的反馈指令通过蜂鸣和/或亮灯的方式进行响应提示。
又一方面,提供了一种人机交互数据的控制系统,包括:数据采集模块,被配置为获取所述人机交互数据;所述人机交互数据至少包括语音交互数据、手势控制数据、指纹信息数据、人脸信息数据以及体温信息数据中的一种;分类模块,被配置为将所获取的人机交互数据进行指令类别的分类;所述指令类别包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别;数据转换模块,被配置为将经过指令类别分类后的所述人机交互数据进行混合控制的切换、过滤以及整合;指令生成模块,被配置为将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令;以及指令发送模块,被配置为将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令,并根据所接收的反馈指令进行响应提示。
进一步地,所述数据采集模块包括:语音交互数据采集单元,被配置为语音交互数据的采集;手势控制数据采集单元,被配置为手势控制数据的采集;指纹信息数据采集单元,被配置为指纹信息数据的采集;人脸信息数据采集单元,被配置为人脸信息数据的采集;以及体温信息数据采集单元,被配置为体温信息数据的采集。
进一步地,所述数据转换模块包括:切换步骤单元,用于针对若干个人机交互数据指令类别进行指令类别间的切换;所述指令类别间的切换包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别两两组合进行切换;过滤步骤单元,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤;整合步骤单元,用于将过滤后的每一指令类别的所述人机交互数据进行参数整合,进而获得标准的人机交互数据。
本发明提供的一种人机交互数据的处理方法,首先通过获取包括语音交互数据、手势控制数据、指纹信息数据、人脸信息数据以及体温信息数据;将所获取的人机交互数据进行指令类别的分类;然后将经过指令类别分类后的人机交互数据进行混合控制的切换、过滤以及整合;再将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令;最终将控制指令发送至目标终端,以及接收目标终端的反馈指令;实现了多途径同时获取多种人机交互数据,且通过将控制指令发送至目标终端以及接收目标终端的反馈指令达到了人机双向交互的目的。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的人机交互数据的处理方法的流程示意图;以及
图2为本发明实施例提供的针对人机交互数据进行切换、过滤以及整合的流程示意图;以及
图3为本发明实施例提供的人机交互数据的控制系统的原理框图;以及
图4为本发明实施例提供的人机交互数据的控制系统中数据转换模块的原理框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员所获得的所有其他实施例,都属于本发明保护的范围。
参见图1-2,本发明实施例提供的一种人机交互数据的处理方法,包括:
S101:获取人机交互数据;人机交互数据至少包括语音交互数据、手势控制数据、指纹信息数据、人脸信息数据以及体温信息数据中的一种;
S102:将所的人机交互数据进行指令类别的分类;所述指令类别包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别;
S103:将经过指令类别分类后的人机交互数据进行单一控制的过滤以及整合;和/或,将经过指令类别分类后的人机交互数据进行混合控制的切换、过滤以及整合;
S104:将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令;
S105:将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令,并依据所接收的反馈指令进行响应提示。
其中,步骤S102中,将人机交互数据进行单一控制的切换、过滤以及整合;和/或,将人机交互数据进行混合控制的切换、过滤以及整合具体包括:
S102a:切换步骤,用于针对若干个人机交互数据指令类别进行指令类别间的切换;指令类别间的切换具体包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别两两任意组合进行切换;即,切换步骤主要根据硬件中断类型和功能单元的指令类型进行分类切换,例如语音交互数据指令类别分别与手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别的切换;
S102b:过滤步骤,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤;即,过滤步骤主要对垃圾数据进行过滤(环境干扰信息数据的过滤等),而过滤规则根据不同的功能单元、指令类别则有所不同,例如语音功能模块主要对语音交互数据指令类别中的语音波形数据进行拟合过滤;根据语音模块的语音识别算法,针对人机交互功能的定位,对非支持语音及其指令进行过滤(拦阻或不转发),减小干扰指令对系统的负载和通信压力;手势功能模块主要对手势控制数据指令类别中的手势红外数据依据坐标定位信息进行过滤;根据手势控制模块的识别算法,针对人机交互功能的定位,对非支持手势及其指令进行过滤(拦阻或不转发),减小干扰指令对系统的负载和通信压力(对进度不高,方向和速度不明确的信息进行过滤)。
S102c:整合步骤,用于将过滤后的每一指令类别的所述人机交互数据进行参数整合,进而获得标准的人机交互数据;即,整合步骤根据具体交互方式的算法(如语音识别算法和手势控制算法等)进行参数整合优化,如进行降噪处理和格式转换等,进而匹配具体的功能单元、指令类别,提高识别精度,实现向下一级处理单元(逻辑控制单元)提供规范的交互数据。
具体而言,逻辑控制单元负责对所获取的标准的人机交互数据进行处理,依据预设的控制逻辑对人机交互数据进行运算并输出相应的控制指令,完成数据向指令的转换;其中,逻辑控制单元采用模块化设计原则,根据多功能扩展的定位设计要求,对控制器支持的交互功能单元、指令类别不同,扩展增加相应的指令和算法处理接口,多个专业算法的整合共同来支持控制器整体功能控制,如语音识别算法、手势控制算法、指纹识别算法、人脸识别算法和生理特征识别算法等。
本实施例中,对于S101中可通过多功能扩展接口获取人机交互数据;其中,多功能扩展接口支持同时接入多种人机交互模组,进而实现多路交互数据的实时采集(如语音交互数据的采集、手势控制数据的采集、指纹信息数据的采集、人脸信息数据采集、体温信息数据的采集、血压脉搏等生理信息数据的采集)。
本实施例中,对于S105中将控制指令发送至目标终端,以及接收所述目标终端的反馈指令也可通过多功能扩展接口来完成;其中,多功能扩展接口能够实现对多种控制收发器的支持扩展。同时,指令传送方式可通过2.4G无线通讯技术将控制指令发送至目标终端,以及接收目标终端的反馈指令;且通过2.4G无线通讯技术有效解决了有线链接在工程中安装布线困难以及红外通讯中障碍物遮挡失效的问题,抗干扰性强,更贴近实际应用场景需要。最后,目标终端的反馈指令通过蜂鸣和/或亮灯的方式进行响应提示。
与本发明实施例提供的一种人机交互数据的处理方法相对应,本发明实施例还提供了一种人机交互数据的控制系统,请参阅图3-4,该系统包括:
数据采集模块,被配置为获取所述人机交互数据;所述人机交互数据包括语音交互数据、手势控制数据、指纹信息数据、人脸信息数据以及体温信息数据301;
分类模块,被配置为将所获取的人机交互数据进行指令类别的分类;所述指令类别包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别302;
数据转换模块,被配置为将经过指令类别分类的所述人机交互数据进行混合控制的切换、过滤以及整合303;
指令生成模块,被配置为将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令304;以及
指令发送模块,被配置为将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令,并根据所述反馈指令进行响应提示305。
具体而言,数据采集模块301包括:语音交互数据采集单元,被配置为语音交互数据的采集;手势控制数据采集单元,被配置为手势控制数据的采集;指纹信息数据采集单元,被配置为指纹信息数据的采集;人脸信息数据采集单元,被配置为人脸信息数据的采集;以及体温信息数据采集单元,被配置为体温信息数据的采集。
具体而言,数据转换模块包括:切换步骤单元,用于针对若干个人机交互数据指令类别进行指令类别间的切换;所述指令类别间的切换包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别两两组合进行切换401;即切换步骤单元主要根据硬件中断类型和功能单元的指令类型进行分类切换,例如语音交互数据指令类别分别与手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别的切换;过滤步骤单元,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤402;即过滤步骤单元主要对垃圾数据进行过滤(环境干扰信息数据的过滤等),而过滤规则根据不同的功能单元、指令类别则有所不同,例如语音功能模块主要对语音交互数据指令类别中的语音波形数据进行拟合过滤,手势功能模块主要对手势控制数据指令类别中的手势红外数据依据坐标定位信息进行分类过滤(对进度不高,方向和速度不明确的信息进行过滤);整合步骤单元,用于将过滤后的每一指令类别的所述人机交互数据进行参数整合,进而获得标准的人机交互数据403;即整合步骤单元根据具体的算法进行参数整合,进而匹配具体的功能单元、指令类别,提高识别精度,实现向下一级处理单元(逻辑控制单元)提供规范的交互数据。。
具体而言,过滤步骤单元还包括:第一过滤步骤子单元,被配置为对语音交互数据指令类别中的语音波形数据进行拟合过滤;第二过滤步骤子单元,被配置为对手势控制数据指令类别中的手势红外数据依据坐标定位信息进行过滤。数据采集模块还包括:第一多功能扩展接口(ATA、Ultra ATA、DMA、Ultra DMA等接口),用于获取人机交互数据;其中,所述第一多功能扩展接口支持同时接入多种人机交互模组,进而实现多路交互数据的实时采集。指令发送模块还包括:第二多功能扩展接口(ATA、Ultra ATA、DMA、Ultra DMA等接口),用于传送所述控制指令;其中,所述多功能扩展接口能够实现对多种控制收发器的支持扩展。
需要说明的是,由于人机交互数据的处理系统的实施例与人机交互数据的处理方法的实施例是对应的,因此,系统实施例中未详述部分可以参见方法实施例中的介绍,这里不再赘述。
本发明提供的人机交互数据的处理方法及其控制系统,在双向交互方面解决了人机交互过程中指令控制的盲目性,尤其在目标终端没有作出预期动作和功能的时候,通过预先安装在目标终端上的发射器,根据指令的到达情况,从目标终端发射相应的状态指令给人机交互数据的处理系统,如发射001代表指令成功达到等,系统在收到目标终端反馈回来的信号后,通过Led指示灯或蜂鸣器提示指令发送情况,以便确认是否需要再次发送相关指令,这样能达到控制过程的调优和双向的交互,在特殊场景中能达到更佳的用途,如目标终端对指令发送要求比较高,在接收到重复指令时会导致控制流程混乱的情形:
1、简单情形如页面的跳转,重复指令输入将导致页面跳转多次后将不在是操作者希望看到的页面,导致控制精度和效率下降;
2、严重情形如高危作业场合,重复指令输入将导致目标终端出现偏差而造成不可预知的情况发生,尤其在没有明显的显示说明和动作提示的情况下。
本发明提供的人机交互数据的处理方法及其系统,采用多通道的交互方式支持多种人机交互方式的综合运用,如语音识别、人脸识别、眼部跟踪、手势控制等。本发明通过对多种硬件中断的捕获和多格式中断指令与数据的解析,运用专业的多功能控制技术实现了单一交互和多通道交互的切换、混合控制功能的延生支持;整合了多种人机交互方式的同时,更贴近自然的人机交互模型,也解决了一种交互方式一套设备的重复投入的问题,也大大简化了
此外,本发明的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的人机交互数据的处理方法及其控制系统中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
最后所应说明的是,以上具体实施方式仅用以说明本发明的技术方案而非限制,尽管参照实例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或者等同替换,而不脱离本发明技术方案的精神和范围,其均应涵盖在本发明的权利要求范围当中。
本发明还公开了A1、一种人机交互数据的处理方法,包括:
获取所述人机交互数据;所述人机交互数据包括语音交互数据、手势控制数据、指纹信息数据、人脸信息数据以及体温信息数据;
将所获取的人机交互数据进行指令类别的分类;所述指令类别包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别;
将经过指令类别分类处理后的所述人机交互数据进行混合控制的切换、过滤以及整合;
将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令;
将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令,并根据所接收的反馈指令进行响应提示。
A2、如A1所述的方法,所述获取人机交互数据包括:
通过多功能扩展接口获取所述人机交互数据;其中,
所述多功能扩展接口支持同时接入多种人机交互模组,进而实现多路交互数据的实时采集。
A3、如A1所述的方法,所述将人机交互数据进行混合控制的切换、过滤以及整合具体包括;
切换步骤,用于针对若干个人机交互数据指令类别进行指令类别间的切换;所述指令类别间的切换包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别两两组合进行切换;
过滤步骤,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤;
整合步骤,用于将过滤后的每一指令类别的所述人机交互数据进行参数整合,进而获得标准的人机交互数据。
A4、如A3所述的方法,所述过滤步骤,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤具体包括:
对语音交互数据指令类别中的语音波形数据进行拟合过滤;
对手势控制数据指令类别中的手势红外数据依据坐标定位信息进行过滤。
A5、如A3所述的方法,所述将控制指令发送至目标终端,以及接收所述目标终端的反馈指令包括:
通过多功能扩展接口传送所述控制指令;其中,
所述多功能扩展接口能够实现对多种控制收发器的支持扩展。
A6、如A1所述的方法,所述将控制指令发送至目标终端,以及接收所述目标终端的反馈指令包括:
通过2.4G无线通讯技术将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令。
A7、如A1所述的方法,还包括:
将所述目标终端的反馈指令通过蜂鸣和/或亮灯的方式进行响应提示。
B8、一种人机交互数据的控制系统,包括:
数据采集模块,被配置为获取所述人机交互数据;所述人机交互数据至少包括语音交互数据、手势控制数据、指纹信息数据、人脸信息数据以及体温信息数据中的一种;
分类模块,被配置为将所获取的人机交互数据进行指令类别的分类;所述指令类别包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别;
数据转换模块,被配置为将经过指令类别分类后的所述人机交互数据进行混合控制的切换、过滤以及整合;
指令生成模块,被配置为将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令;以及
指令发送模块,被配置为将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令,并根据所接收的反馈指令进行响应提示。
B9、如B8所述的系统,所述数据采集模块包括:
语音交互数据采集单元,被配置为语音交互数据的采集;
手势控制数据采集单元,被配置为手势控制数据的采集;
指纹信息数据采集单元,被配置为指纹信息数据的采集;
人脸信息数据采集单元,被配置为人脸信息数据的采集;以及
体温信息数据采集单元,被配置为体温信息数据的采集。
B10、如B8所述的系统,所述数据转换模块包括:
切换步骤单元,用于针对若干个人机交互数据指令类别进行指令类别间的切换;所述指令类别间的切换包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别两两组合进行切换;
过滤步骤单元,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤;
整合步骤单元,用于将过滤后的每一指令类别的所述人机交互数据进行参数整合,进而获得标准的人机交互数据。
B11、如B10所述的系统,所述过滤步骤单元包括:
第一过滤步骤子单元,被配置为对语音交互数据指令类别中的语音波形数据进行拟合过滤;
第二过滤步骤子单元,被配置为对手势控制数据指令类别中的手势红外数据依据坐标定位信息进行过滤。
B12、如B8所述的系统,还包括:
第一多功能扩展接口,用于获取人机交互数据;其中,
所述第一多功能扩展接口支持同时接入多种人机交互模组,进而实现多路交互数据的实时采集。
B13、如8所述的系统,还包括:
第二多功能扩展接口,用于传送所述控制指令;其中,
所述多功能扩展接口能够实现对多种控制收发器的支持扩展。
Claims (10)
1.一种人机交互数据的处理方法,其特征在于,包括:
获取所述人机交互数据;所述人机交互数据包括语音交互数据、手势控制数据、指纹信息数据、人脸信息数据以及体温信息数据;
将所获取的人机交互数据进行指令类别的分类;所述指令类别包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别;
将经过指令类别分类后的所述人机交互数据进行混合控制的切换、过滤以及整合;
将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令;
将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令,并根据所接收的反馈指令进行响应提示。
2.根据权利要求1所述的方法,其特征在于,所述获取人机交互数据包括:
通过多功能扩展接口获取所述人机交互数据;其中,
所述多功能扩展接口支持同时接入多种人机交互模组,进而实现多路交互数据的实时采集。
3.根据权利要求1所述的方法,其特征在于,所述将人机交互数据进行混合控制的切换、过滤以及整合具体包括;
切换步骤,用于针对若干个人机交互数据指令类别进行指令类别间的切换;所述指令类别间的切换包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别两两组合进行切换;
过滤步骤,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤;
整合步骤,用于将过滤后的每一指令类别的所述人机交互数据进行参数整合,进而获得标准的人机交互数据。
4.根据权利要求3所述的方法,其特征在于,所述过滤步骤,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤具体包括:
对语音交互数据指令类别中的语音波形数据进行拟合过滤;用于针对人机交互功能的定位,对非支持语音及其指令进行过滤;
对手势控制数据指令类别中的手势红外数据依据坐标定位信息进行过滤;用于针对人机交互功能的定位,对非支持手势及其指令进行过滤。
5.根据权利要求1所述的方法,其特征在于,所述将控制指令发送至目标终端,以及接收所述目标终端的反馈指令包括:
通过多功能扩展接口传送所述控制指令;其中,
所述多功能扩展接口能够实现对多种控制收发器的支持扩展。
6.根据权利要求1所述的方法,其特征在于,所述将控制指令发送至目标终端,以及接收所述目标终端的反馈指令包括:
通过2.4G无线通讯技术将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令。
7.根据权利要求1所述的方法,其特征在于,所述根据所接收的反馈指令进行响应提示包括:
将所述目标终端的反馈指令通过蜂鸣和/或亮灯的方式进行响应提示。
8.一种人机交互数据的控制系统,其特征在于,包括:
数据采集模块,被配置为获取所述人机交互数据;所述人机交互数据至少包括语音交互数据、手势控制数据、指纹信息数据、人脸信息数据以及体温信息数据中的一种;
分类模块,被配置为将所获取的人机交互数据进行指令类别的分类;所述指令类别包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别;
数据转换模块,被配置为将经过指令类别分类后的所述人机交互数据进行混合控制的切换、过滤以及整合;
指令生成模块,被配置为将经过切换、过滤以及整合处理后的人机交互数据依据逻辑控制单元进行运算并输出相应的控制指令;以及
指令发送模块,被配置为将所述控制指令发送至目标终端,以及接收所述目标终端的反馈指令,并根据所接收的反馈指令进行响应提示。
9.根据权利要求8所述的系统,其特征在于,所述数据采集模块包括:
语音交互数据采集单元,被配置为语音交互数据的采集;
手势控制数据采集单元,被配置为手势控制数据的采集;
指纹信息数据采集单元,被配置为指纹信息数据的采集;
人脸信息数据采集单元,被配置为人脸信息数据的采集;以及
体温信息数据采集单元,被配置为体温信息数据的采集。
10.根据权利要求8所述的系统,其特征在于,所述数据转换模块包括:
切换步骤单元,用于针对若干个人机交互数据指令类别进行指令类别间的切换;所述指令类别间的切换包括语音交互数据指令类别、手势控制数据指令类别、指纹信息数据指令类别、人脸信息数据指令类别以及体温信息数据指令类别两两组合进行切换;
过滤步骤单元,用于针对每一指令类别的所述人机交互数据进行对应指令类别的干扰信息数据的过滤;
整合步骤单元,用于将过滤后的每一指令类别的所述人机交互数据进行参数整合,进而获得标准的人机交互数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310641969.2A CN103631380A (zh) | 2013-12-03 | 2013-12-03 | 一种人机交互数据的处理方法及其控制系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310641969.2A CN103631380A (zh) | 2013-12-03 | 2013-12-03 | 一种人机交互数据的处理方法及其控制系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103631380A true CN103631380A (zh) | 2014-03-12 |
Family
ID=50212549
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310641969.2A Pending CN103631380A (zh) | 2013-12-03 | 2013-12-03 | 一种人机交互数据的处理方法及其控制系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103631380A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016127538A1 (zh) * | 2015-02-10 | 2016-08-18 | 百度在线网络技术(北京)有限公司 | 信息推送方法和装置 |
CN106022052A (zh) * | 2016-05-26 | 2016-10-12 | 哈尔滨商业大学 | 人机交互方法和用于服务器的电子邮件发送方法 |
CN108469767A (zh) * | 2018-04-09 | 2018-08-31 | 深圳市火乐科技发展有限公司 | 一种智能投影仪的控制方法及系统 |
CN111722779A (zh) * | 2019-03-22 | 2020-09-29 | 上海博泰悦臻网络技术服务有限公司 | 人机交互方法、终端及计算机可读存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101923857A (zh) * | 2009-06-17 | 2010-12-22 | 复旦大学 | 一种人机交互的可扩展语音识别方法 |
CN201955730U (zh) * | 2010-12-27 | 2011-08-31 | Tcl集团股份有限公司 | 一种人机交互系统 |
CN102298694A (zh) * | 2011-06-21 | 2011-12-28 | 广东爱科数字科技有限公司 | 一种应用于远程信息服务的人机交互识别系统 |
WO2012130186A1 (zh) * | 2011-04-01 | 2012-10-04 | 尼尔森网联媒介数据服务有限公司 | 数字电视收视数据采集方法、系统、设备及人机交互装置 |
CN102819403A (zh) * | 2012-08-28 | 2012-12-12 | 广东欧珀移动通信有限公司 | 一种终端设备的人机交互方法及其终端设备 |
CN102880288A (zh) * | 2012-08-20 | 2013-01-16 | 深圳市维尚视界立体显示技术有限公司 | 一种3d显示的人机交互的方法、装置以及设备 |
CN202929565U (zh) * | 2012-09-05 | 2013-05-08 | 王昕昱 | 用于实现人机交互的电子设备 |
-
2013
- 2013-12-03 CN CN201310641969.2A patent/CN103631380A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101923857A (zh) * | 2009-06-17 | 2010-12-22 | 复旦大学 | 一种人机交互的可扩展语音识别方法 |
CN201955730U (zh) * | 2010-12-27 | 2011-08-31 | Tcl集团股份有限公司 | 一种人机交互系统 |
WO2012130186A1 (zh) * | 2011-04-01 | 2012-10-04 | 尼尔森网联媒介数据服务有限公司 | 数字电视收视数据采集方法、系统、设备及人机交互装置 |
CN102298694A (zh) * | 2011-06-21 | 2011-12-28 | 广东爱科数字科技有限公司 | 一种应用于远程信息服务的人机交互识别系统 |
CN102880288A (zh) * | 2012-08-20 | 2013-01-16 | 深圳市维尚视界立体显示技术有限公司 | 一种3d显示的人机交互的方法、装置以及设备 |
CN102819403A (zh) * | 2012-08-28 | 2012-12-12 | 广东欧珀移动通信有限公司 | 一种终端设备的人机交互方法及其终端设备 |
CN202929565U (zh) * | 2012-09-05 | 2013-05-08 | 王昕昱 | 用于实现人机交互的电子设备 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016127538A1 (zh) * | 2015-02-10 | 2016-08-18 | 百度在线网络技术(北京)有限公司 | 信息推送方法和装置 |
CN106022052A (zh) * | 2016-05-26 | 2016-10-12 | 哈尔滨商业大学 | 人机交互方法和用于服务器的电子邮件发送方法 |
CN108469767A (zh) * | 2018-04-09 | 2018-08-31 | 深圳市火乐科技发展有限公司 | 一种智能投影仪的控制方法及系统 |
CN111722779A (zh) * | 2019-03-22 | 2020-09-29 | 上海博泰悦臻网络技术服务有限公司 | 人机交互方法、终端及计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103631380A (zh) | 一种人机交互数据的处理方法及其控制系统 | |
CN203038075U (zh) | 基于Android手机和电脑的远程语音智能控制系统 | |
CN106873596B (zh) | 一种车辆控制方法及装置 | |
CN106598342B (zh) | 智能白板电视的多系统同时使用一个触控框的设计方法 | |
CN106891895A (zh) | 一种车辆控制方法及装置 | |
CN104794214A (zh) | 一种设计大数据驱动云机器人的方法 | |
CN103412640A (zh) | 牙齿控制的字符或命令输入的装置及方法 | |
CN103217910A (zh) | 机器人及其控制系统 | |
CN109976338A (zh) | 一种多模态四足机器人人机交互系统及方法 | |
CN104968129A (zh) | 一种无线模式的节能照明控制系统 | |
CN1825784A (zh) | 一种通讯方法及装置 | |
CN109521746A (zh) | 一种基于容错设计的dcs外挂智能控制系统及方法 | |
CN107544295A (zh) | 一种汽车设备的控制方法 | |
CN102005126B (zh) | 一种多交叉口交通信号控制机 | |
CN107017915A (zh) | 一种实现多系统共用无线网络的设备及其工作方法 | |
CN204189450U (zh) | 一种车载语音操作系统人机互动装置 | |
CN205880569U (zh) | 一种多终端自适应通讯的智能机器人 | |
CN203070206U (zh) | 一种人眼控制鼠标 | |
CN205301981U (zh) | 一种集成化可配置工业信息监测分析管理系统 | |
CN205620741U (zh) | 一种手套机控制模块 | |
CN109933203A (zh) | 一种基于计算机视觉手势的液压挖掘机控制方法及系统 | |
CN202916668U (zh) | 基于Android系统的注塑机分离式HMI控制器和注塑机控制系统 | |
CN202404523U (zh) | 一种动作控制装置 | |
CN105236218A (zh) | 一种电梯控制系统及方法 | |
CN204719467U (zh) | 基于简单图形的多功能智能面板系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB03 | Change of inventor or designer information |
Inventor after: Jiang Yimin Inventor before: Fan Xianchang |
|
COR | Change of bibliographic data | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20140312 |