CN115686198A - 一种便捷的高精度的人机交互系统 - Google Patents
一种便捷的高精度的人机交互系统 Download PDFInfo
- Publication number
- CN115686198A CN115686198A CN202211183217.1A CN202211183217A CN115686198A CN 115686198 A CN115686198 A CN 115686198A CN 202211183217 A CN202211183217 A CN 202211183217A CN 115686198 A CN115686198 A CN 115686198A
- Authority
- CN
- China
- Prior art keywords
- module
- instruction
- information
- motion
- host server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及人机交互技术领域，具体公开了一种便捷的高精度的人机交互系统，包括系统主机服务器，所述系统主机服务器设置有动作捕捉模块、指令定义模块、指令识别模块以及身份识别模块；所述系统主机服务器连接有用户终端，所述用户终端供使用者使用；所述动作捕捉模块用于捕捉使用者的肢体动作或者手势动作，并将画面信息反馈到服务器中；所述系统主机服务器接收反馈的画面信息后，通过指令识别模块识别指令内容，转换为预先通过指令定义模块定义的指令内容，以达到交互的目的；所述身份识别模块对于用户终端的使用者进行身份识别；本发明所提供的交互系统，能够提供使用者以简单高效便捷的交互操作，提高交互效率，简化交互流程。
Description
技术领域
本发明涉及人机交互技术领域，具体为一种便捷的高精度的人机交互系统。
背景技术
人机交互是指人与系统之间使用某种对话语言，以一定的交互方式，为完成确定任务的人与系统之间的信息交换过程。系统可以是各种各样的机器，也可以是计算机化的系统和软件。人机交互界面通常是指用户可见的部分，用户通过人机交互界面与系统交流，并进行操作，小如收音机的播放按键，大至飞机上的仪表板或是发电厂的控制室。
现有的人机交互方式，在进行简单的交互时还比较方便；但是当指令变复杂后，交互过程就变得比较繁琐，影响效果。
发明内容
本发明的目的在于提供一种便捷的高精度的人机交互系统，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种便捷的高精度的人机交互系统，包括系统主机服务器，所述系统主机服务器设置有动作捕捉模块、指令定义模块、指令识别模块以及身份识别模块；所述系统主机服务器连接有用户终端，所述用户终端供使用者使用；所述动作捕捉模块用于捕捉使用者的肢体动作或者手势动作，并将画面信息反馈到系统主机服务器中；所述系统主机服务器接收反馈的画面信息后，通过指令识别模块识别指令内容，转换为预先通过指令定义模块定义的指令内容，以达到交互的目的；所述身份识别模块对于用户终端的使用者进行身份识别。
优选的，所述动作捕捉模块设置有多组摄像头以及传感器，其中摄像头根据拍摄内容的不同分为肢体采集摄像头以及手势采集摄像头；所述传感器类型包括但不限于红外传感器、红外热传感器、接近度传感器、环境光传感器。
优选的，所述系统主机服务器设置有动作追踪单元，所述动作追踪单元与动作捕捉模块配套设置，保证采集动作画面的整体与连贯。
优选的，所述指令定义模块建立交互信息与指令之间的映射关系，交互信息是动作信息、语音信息的任意一种或二者的组合；所述交互信息所映射的指令可以是单个的指令，也可以是多个指令组合起来的复合指令。
优选的，所述指令识别模块包括动作识别单元和语音识别单元，所述动作识别单元和语音识别单元分别针对画面信息、语音信息进行识别。
优选的，所述动作识别单元识别出来的动作信息为手势信息或肢体信息，所述语音识别单元识别出来的语音信息为单个的音节信息或多个音节组成的语句信息。
优选的，所述身份识别模块对用户终端的识别方式具体为账号密码识别、指纹识别、人脸识别中的任意一种。
优选的，所述系统主机服务器设置有云端同步模块，所述云端同步模块为设置在云端的数据库，云端同步模块对于不同使用者动作指令之间的映射信息、使用者的使用记录进行保存。
优选的，所述用户终端设置有多媒体输入模块以及显示屏，所述多媒体输入模块的输入设备包括但不限于鼠标、键盘、触控屏、麦克风。
与现有技术相比，本发明的有益效果是：本发明所提供的交互系统，通过识别动作以及语音信息，并将其转换成对应的指令内容，从而能够提供使用者以简单高效便捷的交互操作，提高交互效率，简化交互流程。
附图说明
图1为本发明的结构示意图；
图中标号：1、系统主机服务器；2、动作捕捉模块；3、指令定义模块；4、指令识别模块；5、动作识别单元；6、语音识别单元；7、动作追踪单元；8、身份识别模块；9、用户终端；10、多媒体输入模块；11、云端同步模块。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
请参阅图1，本发明提供一种技术方案：一种便捷的高精度的人机交互系统，包括系统主机服务器1，所述系统主机服务器1设置有动作捕捉模块2、指令定义模块3、指令识别模块4以及身份识别模块8；所述系统主机服务器1连接有用户终端9，所述用户终端9供使用者使用；所述动作捕捉模块2用于捕捉使用者的肢体动作或者手势动作，并将画面信息反馈到系统主机服务器1中；所述系统主机服务器1接收反馈的画面信息后，通过指令识别模块4识别指令内容，转换为预先通过指令定义模块3定义的指令内容，以达到交互的目的；所述身份识别模块8对于用户终端9的使用者进行身份识别。
进一步的，所述动作捕捉模块2设置有多组摄像头以及传感器，其中摄像头根据拍摄内容的不同分为肢体采集摄像头以及手势采集摄像头；所述传感器类型包括但不限于红外传感器、红外热传感器、接近度传感器、环境光传感器。
进一步的，所述系统主机服务器1设置有动作追踪单元7，所述动作追踪单元7与动作捕捉模块2配套设置，保证采集动作画面的整体与连贯。
进一步的，所述指令定义模块3建立交互信息与指令之间的映射关系，交互信息是动作信息、语音信息的任意一种或二者的组合；所述交互信息所映射的指令可以是单个的指令，也可以是多个指令组合起来的复合指令。
进一步的，所述指令识别模块4包括动作识别单元5和语音识别单元6，所述动作识别单元5和语音识别单元6分别针对画面信息、语音信息进行识别。
进一步的，所述动作识别单元5识别出来的动作信息为手势信息或肢体信息，所述语音识别单元6识别出来的语音信息为单个的音节信息或多个音节组成的语句信息。
进一步的，所述身份识别模块8对用户终端9的识别方式具体为账号密码识别、指纹识别、人脸识别中的任意一种。
进一步的，所述系统主机服务器1设置有云端同步模块11，所述云端同步模块11为设置在云端的数据库，云端同步模块11对于不同使用者动作指令之间的映射信息、使用者的使用记录进行保存。
进一步的，所述用户终端9设置有多媒体输入模块10以及显示屏，所述多媒体输入模块10的输入设备包括但不限于鼠标、键盘、触控屏、麦克风。
工作原理：在实际使用过程中，不同的使用者通过用户终端9接入系统主机服务器1，通过身份识别模块8来进行身份的确认。动作捕捉模块2来获取使用者的动作信息，通过不同的传感器以及摄像头，来保证动作捕捉的准确性；同时搭配动作追踪单元7使用，来保证动作的连贯与整体，从侧面保证了捕捉动作内容的准确与有效。使用者预先通过指令定义模块3设置不同的动作或者语音对应的指令内容，动作不限定手势信息或肢体信息，语音不限定单个的音节信息或多个音节组成的语句信息，同理指令也不限定是单个的指令，也可以是多个指令组合起来的复合指令；这样设置方式，能够有效提高映射的类型，有效提高交互的效率。指令识别模块4提供两种类型的指令识别方式，云端同步模块11则对不同的使用者保存其对应的使用信息，以便后续使用，简化后续的步骤。用户终端9通过多媒体输入模块10进行额外的信息输入，来提供更多的交互方式，增加系统的适用性。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。
Claims (9)
1.一种便捷的高精度的人机交互系统，其特征在于：包括系统主机服务器(1)，所述系统主机服务器(1)设置有动作捕捉模块(2)、指令定义模块(3)、指令识别模块(4)以及身份识别模块(8)；所述系统主机服务器(1)连接有用户终端(9)，所述用户终端(9)供使用者使用；所述动作捕捉模块(2)用于捕捉使用者的肢体动作或者手势动作，并将画面信息反馈到系统主机服务器(1)中；所述系统主机服务器(1)接收反馈的画面信息后，通过指令识别模块(4)识别指令内容，转换为预先通过指令定义模块(3)定义的指令内容，以达到交互的目的；所述身份识别模块(8)对于用户终端(9)的使用者进行身份识别。
2.根据权利要求1所述的一种便捷的高精度的人机交互系统，其特征在于：所述动作捕捉模块(2)设置有多组摄像头以及传感器，其中摄像头根据拍摄内容的不同分为肢体采集摄像头以及手势采集摄像头；所述传感器类型包括但不限于红外传感器、红外热传感器、接近度传感器、环境光传感器。
3.根据权利要求1所述的一种便捷的高精度的人机交互系统，其特征在于：所述系统主机服务器(1)设置有动作追踪单元(7)，所述动作追踪单元(7)与动作捕捉模块(2)配套设置，保证采集动作画面的整体与连贯。
4.根据权利要求1所述的一种便捷的高精度的人机交互系统，其特征在于：所述指令定义模块(3)建立交互信息与指令之间的映射关系，交互信息是动作信息、语音信息的任意一种或二者的组合；所述交互信息所映射的指令可以是单个的指令，也可以是多个指令组合起来的复合指令。
5.根据权利要求1所述的一种便捷的高精度的人机交互系统，其特征在于：所述指令识别模块(4)包括动作识别单元(5)和语音识别单元(6)，所述动作识别单元(5)和语音识别单元(6)分别针对画面信息、语音信息进行识别。
6.根据权利要求5所述的一种便捷的高精度的人机交互系统，其特征在于：所述动作识别单元(5)识别出来的动作信息为手势信息或肢体信息，所述语音识别单元(6)识别出来的语音信息为单个的音节信息或多个音节组成的语句信息。
7.根据权利要求1所述的一种便捷的高精度的人机交互系统，其特征在于：所述身份识别模块(8)对用户终端(9)的识别方式具体为账号密码识别、指纹识别、人脸识别中的任意一种。
8.根据权利要求1所述的一种便捷的高精度的人机交互系统，其特征在于：所述系统主机服务器(1)设置有云端同步模块(11)，所述云端同步模块(11)为设置在云端的数据库，云端同步模块(11)对于不同使用者动作指令之间的映射信息、使用者的使用记录进行保存。
9.根据权利要求1所述的一种便捷的高精度的人机交互系统，其特征在于：所述用户终端(9)设置有多媒体输入模块(10)以及显示屏，所述多媒体输入模块(10)的输入设备包括但不限于鼠标、键盘、触控屏、麦克风。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211183217.1A CN115686198A (zh) | 2022-09-27 | 2022-09-27 | 一种便捷的高精度的人机交互系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211183217.1A CN115686198A (zh) | 2022-09-27 | 2022-09-27 | 一种便捷的高精度的人机交互系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115686198A true CN115686198A (zh) | 2023-02-03 |
Family
ID=85061824
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211183217.1A Pending CN115686198A (zh) | 2022-09-27 | 2022-09-27 | 一种便捷的高精度的人机交互系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115686198A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116708943A (zh) * | 2023-07-10 | 2023-09-05 | 江苏黄河电子科技有限公司 | 智能电视机及基于智能电视机的用户交互方法 |
-
2022
- 2022-09-27 CN CN202211183217.1A patent/CN115686198A/zh active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116708943A (zh) * | 2023-07-10 | 2023-09-05 | 江苏黄河电子科技有限公司 | 智能电视机及基于智能电视机的用户交互方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN100587660C (zh) | 一种手写字符预测识别的方法和装置 | |
| CN104463152B (zh) | 一种手势识别方法、系统、终端设备及穿戴式设备 | |
| CN106569613A (zh) | 一种多模态人机交互系统及其控制方法 | |
| EP2650766A1 (en) | Multi-character continuous handwriting input method | |
| CN104090652A (zh) | 一种语音输入方法和装置 | |
| CN203012636U (zh) | 一种基于激光投影定位的人机交互系统 | |
| JP2021034003A (ja) | 人物識別方法、装置、電子デバイス、記憶媒体、及びプログラム | |
| CN112541957A (zh) | 动画生成方法、装置、电子设备以及计算机可读介质 | |
| Yin et al. | Toward natural interaction in the real world: Real-time gesture recognition | |
| CN111966212A (zh) | 基于多模态的交互方法、装置、存储介质及智能屏设备 | |
| CN115686198A (zh) | 一种便捷的高精度的人机交互系统 | |
| JPH11249773A (ja) | マルチモーダルインタフェース装置およびマルチモーダルインタフェース方法 | |
| CN111046148A (zh) | 智能交互系统及智能客服机器人 | |
| CN110766805A (zh) | 火力发电厂交互式三维及vr仿真交底系统 | |
| CN111103982A (zh) | 基于体感交互的数据处理方法以及装置、系统 | |
| CN103235697A (zh) | 一种手写输入方法及装置 | |
| CN110299138A (zh) | 一种增强现实装配工艺指导系统及方法 | |
| CN110058723A (zh) | 一种书写方法、装置及系统 | |
| CN112509569B (zh) | 语音数据的处理方法、装置、电子设备及存储介质 | |
| CN108681397A (zh) | 一种墙体艺术绘画互动投影系统及其工作方法 | |
| US20210357452A1 (en) | Method for obtaining online picture-book content and smart screen device | |
| Lu | Handwritten capital letter recognition based on OpenCV | |
| CN112686990A (zh) | 一种三维模型显示方法、装置、存储介质和计算机设备 | |
| CN111444791A (zh) | 一种基于计算机视觉的手语翻译系统 | |
| JP7315639B2 (ja) | 紙のデータのデジタル化方法及び装置、電子機器、記憶媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication |