CN106325501A - 一种基于面部表情识别技术的游戏控制方法及系统 - Google Patents

一种基于面部表情识别技术的游戏控制方法及系统 Download PDF

Info

Publication number
CN106325501A
CN106325501A CN201610652749.3A CN201610652749A CN106325501A CN 106325501 A CN106325501 A CN 106325501A CN 201610652749 A CN201610652749 A CN 201610652749A CN 106325501 A CN106325501 A CN 106325501A
Authority
CN
China
Prior art keywords
game
module
expression
data processing
processing module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610652749.3A
Other languages
English (en)
Inventor
卞连春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Mdt Infotech Ltd
Original Assignee
Hefei Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Mdt Infotech Ltd filed Critical Hefei Mdt Infotech Ltd
Priority to CN201610652749.3A priority Critical patent/CN106325501A/zh
Publication of CN106325501A publication Critical patent/CN106325501A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Abstract

本发明公开了一种基于面部表情识别技术的游戏控制方法,所述方法包括以下步骤:数据库编辑、表情特征比对、表情特征数据清除;本发明还公开了一种基于面部表情识别技术的游戏控制系统,包括数据处理模块、数据存储模块、调度模块、表情采集单元、信息识别单元、游戏控制模块、时钟模块、键盘输入模块、开关控制模块。本发明通过表情采集单元、信息识别单元、数据处理模块的配合处理,将游戏玩家的脸部信息巧妙的转换为数字信号并进行存储,并能够随时调取数据进行比对,实现对游戏角色的智能化控制,简化了游戏操作方式,提高游戏玩家的身心健康。

Description

一种基于面部表情识别技术的游戏控制方法及系统
技术领域
本发明属于网络游戏开发领域,尤其涉及一种基于面部表情识别技术的游戏控制方法及系统。
背景技术
目前游戏市场发展迅速,各种游戏主机层出不穷,并搭配有丰富多彩的游戏软件,以满足消费者的需求。游戏的交互方式,从早期的通过键盘与手柄来进行,游戏者静态的坐在屏幕前;渐渐的进化成需要更多的肢体动作,如:跳舞机、赛车等。早期的通过键盘和手柄来操作游戏的方式,互动性不强,而且容易使游戏者上瘾,游戏者往往是长时间不断的坐在屏幕前操作游戏,对游戏者的身体健康状况有很大的伤害。伴随计算机游戏种类与内容的不断扩展丰富,其操作复杂性剧增,仍然采用传统的交互方式,越来越难于控制。
发明内容
本发明的目的在于克服现有技术存在的以上问题,提供一种基于面部表情识别技术的游戏控制方法及系统,能够简化游戏操作方式,提高游戏玩家的身心健康。
为实现上述技术目的,达到上述技术效果,本发明通过以下技术方案实现:
一种基于面部表情识别技术的游戏控制方法,所述方法包括以下步骤:
步骤S1:首次启动游戏时,通过游戏终端采集游戏玩家的脸部表情特征,其中,将所述游戏玩家的脸部均分成十个区域进行分别表情特征采集,形成十个特征单元,并将采集后的十个特征单元整体作为一个特征存储单元寄存到游戏终端中,同时手动输入与特征存储单元相对应的游戏控制文本信息,且所述游戏控制文本信息与特征存储单元一起寄存到游戏终端中;
步骤S2:特征存储单元寄存到游戏终端中后,所述游戏终端将每隔一秒对游戏玩家进行面部表情特征采集,并将采集后的表情特征与游戏终端中的特征存储单元进行比对:
当采集后的表情特征与特征存储单元中各个特征单元的相似度平均值小于等于百分之六十,则游戏终端重新对游戏玩家进行面部表情特征采集;
当采集后的表情特征与特征存储单元中各个特征单元的相似度平均值大于百分之六十,则游戏终端则调取对应的游戏控制文本信息并控制游戏角色进行相应动作;
步骤S3:当游戏关闭后,所述游戏终端自动清除所寄存的特征存储单元与游戏控制文本信息。
进一步地,所述游戏控制文本信息包括上、下、左、右、旋转、跳跃、冲刺、后退、下蹲、飞行。
本发明还提供一种基于面部表情识别技术的游戏控制系统,包括数据处理模块、数据存储模块、调度模块、表情采集单元、信息识别单元、游戏控制模块、时钟模块、键盘输入模块、开关控制模块;
其中,所述表情采集单元用于采集游戏玩家的脸部表情特征,然后形成表情模拟信号并发送至信息识别单元;
所述信息识别单元用于接收表情采集单元的表情模拟信号,然后形成表情数字信号并发送至数据处理模块;
所述键盘输入模块用于输入文本信息并发送至数据处理模块;
所述开关控制模块用于控制数据处理模块的开启与关闭;
所述时钟模块每隔一秒发送时间信号至数据处理模块;
所述游戏控制模块用于控制游戏角色进行不同的动作;
所述数据存储模块用于寄存来自数据处理模块的数据信息;
所述调度模块用于调取数据存储模块中寄存的数据信息并发送至数据处理模块;
首次启动游戏时,所述表情采集单元将采集到的玩家脸部表情特征形成表情模拟信号并发送至信息识别单元,所述信息识别单元接收到表情模拟信号后形成表情数字信号并发送至数据处理模块,此时,键盘输入模块输入与特征存储单元相对应的游戏控制文本信息,所述数据处理模块接收到游戏控制文本信息后将游戏控制文本信息与表情数字信号一起寄存到数据存储模块中,此时,时钟模块每隔一秒发送时间信号至数据处理模块,当数据处理模块再次接收到来自信息识别单元的表情数字信号后,发送调度控制信号至调度模块,所述调度模块发送调度信号至数据存储模块,调取数据存储模块中寄存的游戏控制文本信息与表情数字信号,然后将游戏控制文本信息与表情数字信号传送至数据处理模块中进行比对,然后数据处理模块发送游戏控制信号至游戏控制模块,所述游戏控制模块则控制游戏角色进行相应的动作;
当游戏关闭时,开关控制模块发送关闭信号至数据处理模块,所述数据处理模块发送格式化信号至数据存储模块,所述数据存储模块接收到格式化信号后清除所有寄存的数据信息。
进一步地,所述键盘输入模块包括LED触摸屏。
本发明的有益效果是:
本发明通过表情采集单元、信息识别单元、数据处理模块的配合处理,将游戏玩家的脸部信息巧妙的转换为数字信号并进行存储,并能够随时调取数据进行比对,实现对游戏角色的智能化控制,简化了游戏操作方式,提高游戏玩家的身心健康。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明的系统结构框图。
具体实施方式
下面将参考附图并结合实施例,来详细说明本发明。
如图1所示的一种基于面部表情识别技术的游戏控制方法,方法包括以下步骤:
步骤S1:首次启动游戏时,通过游戏终端采集游戏玩家的脸部表情特征,其中,将游戏玩家的脸部均分成十个区域进行分别表情特征采集,形成十个特征单元,并将采集后的十个特征单元整体作为一个特征存储单元寄存到游戏终端中,同时手动输入与特征存储单元相对应的游戏控制文本信息,且游戏控制文本信息与特征存储单元一起寄存到游戏终端中;
步骤S2:特征存储单元寄存到游戏终端中后,游戏终端将每隔一秒对游戏玩家进行面部表情特征采集,并将采集后的表情特征与游戏终端中的特征存储单元进行比对:
当采集后的表情特征与特征存储单元中各个特征单元的相似度平均值小于等于百分之六十,则游戏终端重新对游戏玩家进行面部表情特征采集;
当采集后的表情特征与特征存储单元中各个特征单元的相似度平均值大于百分之六十,则游戏终端则调取对应的游戏控制文本信息并控制游戏角色进行相应动作;
步骤S3:当游戏关闭后,游戏终端自动清除所寄存的特征存储单元与游戏控制文本信息。
其中,游戏控制文本信息包括上、下、左、右、旋转、跳跃、冲刺、后退、下蹲、飞行。
本发明还提供一种基于面部表情识别技术的游戏控制系统,包括数据处理模块、数据存储模块、调度模块、表情采集单元、信息识别单元、游戏控制模块、时钟模块、键盘输入模块、开关控制模块;
其中,表情采集单元用于采集游戏玩家的脸部表情特征,然后形成表情模拟信号并发送至信息识别单元;
信息识别单元用于接收表情采集单元的表情模拟信号,然后形成表情数字信号并发送至数据处理模块;
键盘输入模块用于输入文本信息并发送至数据处理模块;
开关控制模块用于控制数据处理模块的开启与关闭;
时钟模块每隔一秒发送时间信号至数据处理模块;
游戏控制模块用于控制游戏角色进行不同的动作;
数据存储模块用于寄存来自数据处理模块的数据信息;
调度模块用于调取数据存储模块中寄存的数据信息并发送至数据处理模块;
首次启动游戏时,表情采集单元将采集到的玩家脸部表情特征形成表情模拟信号并发送至信息识别单元,信息识别单元接收到表情模拟信号后形成表情数字信号并发送至数据处理模块,此时,键盘输入模块输入与特征存储单元相对应的游戏控制文本信息,数据处理模块接收到游戏控制文本信息后将游戏控制文本信息与表情数字信号一起寄存到数据存储模块中,此时,时钟模块每隔一秒发送时间信号至数据处理模块,当数据处理模块再次接收到来自信息识别单元的表情数字信号后,发送调度控制信号至调度模块,调度模块发送调度信号至数据存储模块,调取数据存储模块中寄存的游戏控制文本信息与表情数字信号,然后将游戏控制文本信息与表情数字信号传送至数据处理模块中进行比对,然后数据处理模块发送游戏控制信号至游戏控制模块,游戏控制模块则控制游戏角色进行相应的动作;
当游戏关闭时,开关控制模块发送关闭信号至数据处理模块,数据处理模块发送格式化信号至数据存储模块,数据存储模块接收到格式化信号后清除所有寄存的数据信息。
其中,键盘输入模块包括LED触摸屏。
本发明通过表情采集单元、信息识别单元、数据处理模块的配合处理,将游戏玩家的脸部信息巧妙的转换为数字信号并进行存储,并能够随时调取数据进行比对,实现对游戏角色的智能化控制,简化了游戏操作方式,提高游戏玩家的身心健康。
以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。

Claims (4)

1.一种基于面部表情识别技术的游戏控制方法,其特征在于,所述方法包括以下步骤:
步骤S1:首次启动游戏时,通过游戏终端采集游戏玩家的脸部表情特征,其中,将所述游戏玩家的脸部均分成十个区域进行分别表情特征采集,形成十个特征单元,并将采集后的十个特征单元整体作为一个特征存储单元寄存到游戏终端中,同时手动输入与特征存储单元相对应的游戏控制文本信息,且所述游戏控制文本信息与特征存储单元一起寄存到游戏终端中;
步骤S2:特征存储单元寄存到游戏终端中后,所述游戏终端将每隔一秒对游戏玩家进行面部表情特征采集,并将采集后的表情特征与游戏终端中的特征存储单元进行比对:
当采集后的表情特征与特征存储单元中各个特征单元的相似度平均值小于等于百分之六十,则游戏终端重新对游戏玩家进行面部表情特征采集;
当采集后的表情特征与特征存储单元中各个特征单元的相似度平均值大于百分之六十,则游戏终端则调取对应的游戏控制文本信息并控制游戏角色进行相应动作;
步骤S3:当游戏关闭后,所述游戏终端自动清除所寄存的特征存储单元与游戏控制文本信息。
2.根据权利要求1所述的一种基于面部表情识别技术的游戏控制方法,其特征在于:所述游戏控制文本信息包括上、下、左、右、旋转、跳跃、冲刺、后退、下蹲、飞行。
3.根据权利要求1所述的一种基于面部表情识别技术的游戏控制系统,其特征在于:包括数据处理模块、数据存储模块、调度模块、表情采集单元、信息识别单元、游戏控制模块、时钟模块、键盘输入模块、开关控制模块;
其中,所述表情采集单元用于采集游戏玩家的脸部表情特征,然后形成表情模拟信号并发送至信息识别单元;
所述信息识别单元用于接收表情采集单元的表情模拟信号,然后形成表情数字信号并发送至数据处理模块;
所述键盘输入模块用于输入文本信息并发送至数据处理模块;
所述开关控制模块用于控制数据处理模块的开启与关闭;
所述时钟模块每隔一秒发送时间信号至数据处理模块;
所述游戏控制模块用于控制游戏角色进行不同的动作;
所述数据存储模块用于寄存来自数据处理模块的数据信息;
所述调度模块用于调取数据存储模块中寄存的数据信息并发送至数据处理模块;
首次启动游戏时,所述表情采集单元将采集到的玩家脸部表情特征形成表情模拟信号并发送至信息识别单元,所述信息识别单元接收到表情模拟信号后形成表情数字信号并发送至数据处理模块,此时,键盘输入模块输入与特征存储单元相对应的游戏控制文本信息,所述数据处理模块接收到游戏控制文本信息后将游戏控制文本信息与表情数字信号一起寄存到数据存储模块中,此时,时钟模块每隔一秒发送时间信号至数据处理模块,当数据处理模块再次接收到来自信息识别单元的表情数字信号后,发送调度控制信号至调度模块,所述调度模块发送调度信号至数据存储模块,调取数据存储模块中寄存的游戏控制文本信息与表情数字信号,然后将游戏控制文本信息与表情数字信号传送至数据处理模块中进行比对,然后数据处理模块发送游戏控制信号至游戏控制模块,所述游戏控制模块则控制游戏角色进行相应的动作;
当游戏关闭时,开关控制模块发送关闭信号至数据处理模块,所述数据处理模块发送格式化信号至数据存储模块,所述数据存储模块接收到格式化信号后清除所有寄存的数据信息。
4.根据权利要求3所述的一种基于面部表情识别技术的游戏控制系统,其特征在于:所述键盘输入模块包括LED触摸屏。
CN201610652749.3A 2016-08-10 2016-08-10 一种基于面部表情识别技术的游戏控制方法及系统 Pending CN106325501A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610652749.3A CN106325501A (zh) 2016-08-10 2016-08-10 一种基于面部表情识别技术的游戏控制方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610652749.3A CN106325501A (zh) 2016-08-10 2016-08-10 一种基于面部表情识别技术的游戏控制方法及系统

Publications (1)

Publication Number Publication Date
CN106325501A true CN106325501A (zh) 2017-01-11

Family

ID=57740780

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610652749.3A Pending CN106325501A (zh) 2016-08-10 2016-08-10 一种基于面部表情识别技术的游戏控制方法及系统

Country Status (1)

Country Link
CN (1) CN106325501A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108646920A (zh) * 2018-05-16 2018-10-12 Oppo广东移动通信有限公司 识别交互方法、装置、存储介质及终端设备
CN109718544A (zh) * 2018-12-14 2019-05-07 深圳壹账通智能科技有限公司 基于人脸辨识的游戏控制方法与使用该方法的电子装置
CN110308787A (zh) * 2019-01-16 2019-10-08 上海触派科技有限公司 一种多维交互识别与棋牌游戏结合的ar互动系统及方法
CN111860451A (zh) * 2020-08-03 2020-10-30 宿州小马电子商务有限公司 一种基于人脸表情识别的游戏交互方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101393599A (zh) * 2007-09-19 2009-03-25 中国科学院自动化研究所 一种基于人脸表情的游戏角色控制方法
US20100125816A1 (en) * 2008-11-20 2010-05-20 Bezos Jeffrey P Movement recognition as input mechanism
CN102955565A (zh) * 2011-08-31 2013-03-06 德信互动科技(北京)有限公司 人机互动系统和方法
CN103136321A (zh) * 2012-09-06 2013-06-05 北京天宇朗通通信设备股份有限公司 多媒体信息处理方法和装置及移动终端
CN103838366A (zh) * 2012-11-22 2014-06-04 纬创资通股份有限公司 脸部表情控制系统、表情控制的方法及其电脑系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101393599A (zh) * 2007-09-19 2009-03-25 中国科学院自动化研究所 一种基于人脸表情的游戏角色控制方法
US20100125816A1 (en) * 2008-11-20 2010-05-20 Bezos Jeffrey P Movement recognition as input mechanism
CN102955565A (zh) * 2011-08-31 2013-03-06 德信互动科技(北京)有限公司 人机互动系统和方法
CN103136321A (zh) * 2012-09-06 2013-06-05 北京天宇朗通通信设备股份有限公司 多媒体信息处理方法和装置及移动终端
CN103838366A (zh) * 2012-11-22 2014-06-04 纬创资通股份有限公司 脸部表情控制系统、表情控制的方法及其电脑系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108646920A (zh) * 2018-05-16 2018-10-12 Oppo广东移动通信有限公司 识别交互方法、装置、存储介质及终端设备
CN109718544A (zh) * 2018-12-14 2019-05-07 深圳壹账通智能科技有限公司 基于人脸辨识的游戏控制方法与使用该方法的电子装置
CN110308787A (zh) * 2019-01-16 2019-10-08 上海触派科技有限公司 一种多维交互识别与棋牌游戏结合的ar互动系统及方法
CN111860451A (zh) * 2020-08-03 2020-10-30 宿州小马电子商务有限公司 一种基于人脸表情识别的游戏交互方法

Similar Documents

Publication Publication Date Title
CN106325501A (zh) 一种基于面部表情识别技术的游戏控制方法及系统
CN100552688C (zh) 通过人脸识别防止沉迷网络游戏的方法
US9440152B2 (en) Fantasy sports integration with video content
CN107291232A (zh) 一种基于深度学习与大数据的体感游戏交互方法及系统
CN103083904B (zh) 游戏服务器、游戏装置、游戏程序
CN109176535A (zh) 基于智能机器人的交互方法及系统
CN105279148B (zh) 一种app软件用户评论一致性判断方法
CN111841018B (zh) 模型训练方法、模型使用方法、计算机设备及存储介质
CN101693143A (zh) 一种应用于网络游戏与玩具结合的方法
CN106489259A (zh) 目标达成在线快速问答游戏提供方法及系统
CN106844183A (zh) 控制儿童智能设备的方法、控制设备及儿童智能设备
CN107485826A (zh) 基于虚拟现实技术的手部康复训练系统
CN107185241A (zh) 基于互联网的麻将游戏操作提醒方法及装置
CN107251019A (zh) 信息处理装置、信息处理方法和程序
CN106178496A (zh) 一种基于体感和声音操作的游戏控制方法及系统
CN112464018A (zh) 一种智能情绪识别调节方法及系统
CN109413625A (zh) 一种电子烟数据的传输方法及终端、服务器
US20110183731A1 (en) System and method for providing a fantasy sports application
CN110393912A (zh) 一种抓娃娃游戏竞技系统及其游戏方法
CN114565050A (zh) 一种游戏人工智能行动规划方法及系统
CN107145230A (zh) 一种基于面部与语音识别的游戏控制系统及方法
CN105260489B (zh) 赛鸽比赛信息快速录入方法及其装置
CN103577705B (zh) 一种系统控制团体的数据处理方法和装置
CN106390444A (zh) 球类游戏系统及其控制方法
CN114343254B (zh) 辅助戒烟的方法、辅助戒烟平台及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170111