CN106267812A - 一种基于眼球转动和语音操作的游戏控制系统及方法 - Google Patents

一种基于眼球转动和语音操作的游戏控制系统及方法 Download PDF

Info

Publication number
CN106267812A
CN106267812A CN201610652708.4A CN201610652708A CN106267812A CN 106267812 A CN106267812 A CN 106267812A CN 201610652708 A CN201610652708 A CN 201610652708A CN 106267812 A CN106267812 A CN 106267812A
Authority
CN
China
Prior art keywords
module
eyeball
signal
terminal
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610652708.4A
Other languages
English (en)
Inventor
卞连春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Mdt Infotech Ltd
Original Assignee
Hefei Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Mdt Infotech Ltd filed Critical Hefei Mdt Infotech Ltd
Priority to CN201610652708.4A priority Critical patent/CN106267812A/zh
Publication of CN106267812A publication Critical patent/CN106267812A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/23—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • A63F13/235—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console using a wireless connection, e.g. infrared or piconet
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80—Special adaptations for executing a specific game genre or game mode
    • A63F13/822—Strategy games; Role-playing games
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/92—Video game devices specially adapted to be hand-held while playing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明公开了一种基于眼球转动和语音操作的游戏控制系统，包括移动终端与手机终端；其中，所述移动终端包括数据处理模块以及与数据处理模块相互连接的数据传输模块、数据库模块、眼球运动检测模块、语音采集模块、语音识别模块；所述手机终端包括终端处理器、游戏控制单元、键盘输入模块、终端通讯模块；本发明还公开了一种基于眼球转动和语音操作的游戏控制方法，所述方法包括以下步骤：数据库输入、信息识别、识别控制。本发明通过移动终端与手机终端的巧妙结合，将游戏控制由传统的手机控制改变成语音与眼球结合控制的方式，简化了操作方式，自动化程度高，摆脱了传统游戏控制方式的限制，有利于改善玩家的身心健康。

Description

一种基于眼球转动和语音操作的游戏控制系统及方法
技术领域
本发明属于网络游戏开发领域，尤其涉及一种基于眼球转动和语音操作的游戏控制系统及方法。
背景技术
现在用户不但可以在电脑上玩网络游戏，随着移动通信技术的不断发展，用户也可以在手机上玩网络游戏了，通过手机上网玩的网络游戏称为手机网络游戏。由于手机携带的便利性和使用的广泛性，手机网络游戏越来越受到欢迎和广泛使用。手机网络游戏一般是不同用户在各自的手机上运行同一个网络游戏，从而实现不同用户之间的交互对战，以及服务器数据的保存，获取。
传统的手机网络游戏控制方法单一，智能通过狭小的手机键盘的进行操作控制，长期下来不仅造成视力上的损伤，而且给玩家的身体机能也带来了一定的损害。
发明内容
本发明的目的在于克服现有技术存在的以上问题，提供一种基于眼球转动和语音操作的游戏控制系统及方法，能够摆脱传统游戏控制方式的限制，操作方便，有利于改善身心健康。
为实现上述技术目的，达到上述技术效果，本发明通过以下技术方案实现：
一种基于眼球转动和语音操作的游戏控制系统，包括移动终端与手机终端；
其中，所述移动终端包括数据处理模块以及与数据处理模块相互连接的数据传输模块、数据库模块、眼球运动检测模块、语音采集模块、语音识别模块；
所述数据传输模块用于建立移动终端与手机终端之间的数据通讯连接；
所述眼球运动检测模块用于收集游戏玩家的眼球转动轨迹并形成眼球控制信号发送至数据处理模块；
所述语音采集模块用于采集游戏玩家的语音命令并形成语音模拟信号并发送至语音识别模块；
所述语音识别模块用于接收来自的语音模拟信号并形成语音控制信号发送至数据处理模块；
所述数据处理模块用于接收眼球运动检测模块的眼球控制信号、语音识别模块的语音控制信号，形成存储眼球控制指令信号和语音控制指令信号并发送至数据库模块；
所述数据库模块用于存储眼球控制指令信号和语音控制指令信号；
所述手机终端包括终端处理器、游戏控制单元、键盘输入模块、终端通讯模块；
其中，所述终端通讯模块用于建立移动终端与手机终端之间的无线通讯连接；
所述键盘输入模块用于输入文字信息并进行确认；
所述游戏控制模块用于控制游戏中玩家角色的动作；
所述终端处理器用于发送数据信号至移动终端并接收处理来自移动终端的反馈信息。
进一步地，所述玩家角色的动作包括行走、奔跑、跳跃、加速奔跑、蹲下、飞行。
本发明还提供一种基于眼球转动和语音操作的游戏控制方法，所述方法包括以下步骤：
步骤S1：游戏玩家首次开启手机终端时，所述终端处理器发送终端存储信号至终端通讯模块，所述终端通讯模块将终端存储信号传送至数据传输模块，所述数据传输模块接收到终端存储信号后形成数据存储信号并传送至数据处理模块，此时：
所述眼球运动检测模块将收集到的眼球运动轨迹形成眼球控制信号并发送至数据处理模块，所述语音识别模块将来自的语音模拟信号并形成语音控制信号发送至数据处理模块，所述数据处理模块将眼球控制信号、语音控制信号依次通过数据传输模块、终端通讯模块发送至终端处理器，此时，键盘输入模块根据眼球控制信号、语音控制信号输入对应的眼球控制文本信号、语音控制文本信号并反馈至数据处理模块，所述数据处理模块接收到眼球控制文本信号、语音控制文本信号后寄存至数据库模块；
步骤S2：所述数据处理模块再次接收到来自眼球运动检测模块的眼球控制信号、语音识别模块的语音控制信号后形成调度信号，并将调度发送至数据库模块，从而提取数据库模块中寄存的眼球控制文本信号、语音控制文本信号，进行比对处理后形成最终的眼球遥控信号和语音遥控信号；
步骤S3：所述眼球遥控信号和语音遥控信号经数据传输模块、终端通讯模块发送至终端处理器，所述终端处理器接收到眼球遥控信号和语音遥控信号形成游戏控制信号并发送至游戏控制单元，所述游戏控制单元根据接收到的游戏控制信号控制玩家角色完成指定动作。
进一步地，所述键盘输入模块包括手机触摸屏。
本发明的有益效果是：
本发明通过移动终端与手机终端的巧妙结合，将游戏控制由传统的手机控制改变成语音与眼球结合控制的方式，简化了操作方式，自动化程度高，摆脱了传统游戏控制方式的限制，有利于改善玩家的身心健康。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是本发明的结构框图。
具体实施方式
下面将参考附图并结合实施例，来详细说明本发明。
如图1所示的一种基于眼球转动和语音操作的游戏控制系统，包括移动终端与手机终端；
其中，移动终端包括数据处理模块以及与数据处理模块相互连接的数据传输模块、数据库模块、眼球运动检测模块、语音采集模块、语音识别模块；
数据传输模块用于建立移动终端与手机终端之间的数据通讯连接；
眼球运动检测模块用于收集游戏玩家的眼球转动轨迹并形成眼球控制信号发送至数据处理模块；
语音采集模块用于采集游戏玩家的语音命令并形成语音模拟信号并发送至语音识别模块；
语音识别模块用于接收来自的语音模拟信号并形成语音控制信号发送至数据处理模块；
数据处理模块用于接收眼球运动检测模块的眼球控制信号、语音识别模块的语音控制信号，形成存储眼球控制指令信号和语音控制指令信号并发送至数据库模块；
数据库模块用于存储眼球控制指令信号和语音控制指令信号；
手机终端包括终端处理器、游戏控制单元、键盘输入模块、终端通讯模块；
其中，终端通讯模块用于建立移动终端与手机终端之间的无线通讯连接；
键盘输入模块用于输入文字信息并进行确认；
游戏控制模块用于控制游戏中玩家角色的动作；
终端处理器用于发送数据信号至移动终端并接收处理来自移动终端的反馈信息。
其中，玩家角色的动作包括行走、奔跑、跳跃、加速奔跑、蹲下、飞行。
本发明还提供一种基于眼球转动和语音操作的游戏控制方法，方法包括以下步骤：
步骤S1：游戏玩家首次开启手机终端时，终端处理器发送终端存储信号至终端通讯模块，终端通讯模块将终端存储信号传送至数据传输模块，数据传输模块接收到终端存储信号后形成数据存储信号并传送至数据处理模块，此时：
眼球运动检测模块将收集到的眼球运动轨迹形成眼球控制信号并发送至数据处理模块，语音识别模块将来自的语音模拟信号并形成语音控制信号发送至数据处理模块，数据处理模块将眼球控制信号、语音控制信号依次通过数据传输模块、终端通讯模块发送至终端处理器，此时，键盘输入模块根据眼球控制信号、语音控制信号输入对应的眼球控制文本信号、语音控制文本信号并反馈至数据处理模块，数据处理模块接收到眼球控制文本信号、语音控制文本信号后寄存至数据库模块；
步骤S2：数据处理模块再次接收到来自眼球运动检测模块的眼球控制信号、语音识别模块的语音控制信号后形成调度信号，并将调度发送至数据库模块，从而提取数据库模块中寄存的眼球控制文本信号、语音控制文本信号，进行比对处理后形成最终的眼球遥控信号和语音遥控信号；
步骤S3：眼球遥控信号和语音遥控信号经数据传输模块、终端通讯模块发送至终端处理器，终端处理器接收到眼球遥控信号和语音遥控信号形成游戏控制信号并发送至游戏控制单元，游戏控制单元根据接收到的游戏控制信号控制玩家角色完成指定动作。
其中，键盘输入模块包括手机触摸屏。
本发明通过移动终端与手机终端的巧妙结合，将游戏控制由传统的手机控制改变成语音与眼球结合控制的方式，简化了操作方式，自动化程度高，摆脱了传统游戏控制方式的限制，有利于改善玩家的身心健康。
以上显示和描述了本发明的基本原理、主要特征和本发明的优点。本行业的技术人员应该了解，本发明不受上述实施例的限制，上述实施例和说明书中描述的只是说明本发明的原理，在不脱离本发明精神和范围的前提下，本发明还会有各种变化和改进，这些变化和改进都落入要求保护的本发明范围内。

Claims (4)

1.一种基于眼球转动和语音操作的游戏控制系统，其特征在于：包括移动终端与手机终端；
其中，所述移动终端包括数据处理模块以及与数据处理模块相互连接的数据传输模块、数据库模块、眼球运动检测模块、语音采集模块、语音识别模块；
所述数据传输模块用于建立移动终端与手机终端之间的数据通讯连接；
所述眼球运动检测模块用于收集游戏玩家的眼球转动轨迹并形成眼球控制信号发送至数据处理模块；
所述语音采集模块用于采集游戏玩家的语音命令并形成语音模拟信号并发送至语音识别模块；
所述语音识别模块用于接收来自的语音模拟信号并形成语音控制信号发送至数据处理模块；
所述数据处理模块用于接收眼球运动检测模块的眼球控制信号、语音识别模块的语音控制信号，形成存储眼球控制指令信号和语音控制指令信号并发送至数据库模块；
所述数据库模块用于存储眼球控制指令信号和语音控制指令信号；
所述手机终端包括终端处理器、游戏控制单元、键盘输入模块、终端通讯模块；
其中，所述终端通讯模块用于建立移动终端与手机终端之间的无线通讯连接；
所述键盘输入模块用于输入文字信息并进行确认；
所述游戏控制模块用于控制游戏中玩家角色的动作；
所述终端处理器用于发送数据信号至移动终端并接收处理来自移动终端的反馈信息。
2.根据权利要求1所述的一种基于眼球转动和语音操作的游戏控制系统，其特征在于：所述玩家角色的动作包括行走、奔跑、跳跃、加速奔跑、蹲下、飞行。
3.根据权利要求1所述的一种基于眼球转动和语音操作的游戏控制方法，其特征在于，所述方法包括以下步骤：
步骤S1：游戏玩家首次开启手机终端时，所述终端处理器发送终端存储信号至终端通讯模块，所述终端通讯模块将终端存储信号传送至数据传输模块，所述数据传输模块接收到终端存储信号后形成数据存储信号并传送至数据处理模块，此时：
所述眼球运动检测模块将收集到的眼球运动轨迹形成眼球控制信号并发送至数据处理模块，所述语音识别模块将来自的语音模拟信号并形成语音控制信号发送至数据处理模块，所述数据处理模块将眼球控制信号、语音控制信号依次通过数据传输模块、终端通讯模块发送至终端处理器，此时，键盘输入模块根据眼球控制信号、语音控制信号输入对应的眼球控制文本信号、语音控制文本信号并反馈至数据处理模块，所述数据处理模块接收到眼球控制文本信号、语音控制文本信号后寄存至数据库模块；
步骤S2：所述数据处理模块再次接收到来自眼球运动检测模块的眼球控制信号、语音识别模块的语音控制信号后形成调度信号，并将调度发送至数据库模块，从而提取数据库模块中寄存的眼球控制文本信号、语音控制文本信号，进行比对处理后形成最终的眼球遥控信号和语音遥控信号；
步骤S3：所述眼球遥控信号和语音遥控信号经数据传输模块、终端通讯模块发送至终端处理器，所述终端处理器接收到眼球遥控信号和语音遥控信号形成游戏控制信号并发送至游戏控制单元，所述游戏控制单元根据接收到的游戏控制信号控制玩家角色完成指定动作。
4.根据权利要求3所述的一种基于眼球转动和语音操作的游戏控制方法，其特征在于：所述键盘输入模块包括手机触摸屏。
CN201610652708.4A 2016-08-10 2016-08-10 一种基于眼球转动和语音操作的游戏控制系统及方法 Pending CN106267812A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610652708.4A CN106267812A (zh) 2016-08-10 2016-08-10 一种基于眼球转动和语音操作的游戏控制系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610652708.4A CN106267812A (zh) 2016-08-10 2016-08-10 一种基于眼球转动和语音操作的游戏控制系统及方法

Publications (1)

Publication Number Publication Date
CN106267812A true CN106267812A (zh) 2017-01-04

Family

ID=57667975

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610652708.4A Pending CN106267812A (zh) 2016-08-10 2016-08-10 一种基于眼球转动和语音操作的游戏控制系统及方法

Country Status (1)

Country Link
CN (1) CN106267812A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107145230A (zh) * 2017-04-26 2017-09-08 合肥充盈信息科技有限公司 一种基于面部与语音识别的游戏控制系统及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101950200A (zh) * 2010-09-21 2011-01-19 浙江大学 基于摄像头的眼球控制游戏地图和角色移动的方法和装置
US20110221658A1 (en) * 2010-02-28 2011-09-15 Osterhout Group, Inc. Augmented reality eyepiece with waveguide having a mirrored surface
CN104348938A (zh) * 2013-07-23 2015-02-11 深圳市赛格导航科技股份有限公司 一种车载终端眼球识别自动拨号系统及方法
CN104409076A (zh) * 2014-12-02 2015-03-11 上海语知义信息技术有限公司 用于棋牌类游戏的语音操控系统及语音操控方法
CN105390135A (zh) * 2015-10-12 2016-03-09 四川长虹电器股份有限公司 游戏语音控制系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110221658A1 (en) * 2010-02-28 2011-09-15 Osterhout Group, Inc. Augmented reality eyepiece with waveguide having a mirrored surface
CN101950200A (zh) * 2010-09-21 2011-01-19 浙江大学 基于摄像头的眼球控制游戏地图和角色移动的方法和装置
CN104348938A (zh) * 2013-07-23 2015-02-11 深圳市赛格导航科技股份有限公司 一种车载终端眼球识别自动拨号系统及方法
CN104409076A (zh) * 2014-12-02 2015-03-11 上海语知义信息技术有限公司 用于棋牌类游戏的语音操控系统及语音操控方法
CN105390135A (zh) * 2015-10-12 2016-03-09 四川长虹电器股份有限公司 游戏语音控制系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107145230A (zh) * 2017-04-26 2017-09-08 合肥充盈信息科技有限公司 一种基于面部与语音识别的游戏控制系统及方法

Similar Documents

Publication Publication Date Title
US10223574B2 (en) Method for fingerprint template update and terminal device
CN111773696B (zh) 一种虚拟对象的展示方法、相关装置及存储介质
CN109379641B (zh) 一种字幕生成方法和装置
CN105431813B (zh) 基于生物计量身份归属用户动作
WO2019024750A1 (zh) 视频通信的方法、装置、终端及计算机可读存储介质
CN108024134B (zh) 一种基于直播的数据分析方法、装置和终端设备
CN104657203B (zh) 任务执行方法、装置和系统
CN108664329A (zh) 一种资源配置方法、终端及计算机可读存储介质
CN106178496B (zh) 一种基于体感和声音操作的游戏控制方法及系统
CN109271038A (zh) 候选词推荐方法、终端及计算机可读存储介质
CN109036420A (zh) 一种语音识别控制方法、终端及计算机可读存储介质
CN112774194B (zh) 一种虚拟对象的交互方法以及相关装置
CN109862433A (zh) 游戏视频的生成方法、装置、终端及计算机可读存储介质
CN104409076A (zh) 用于棋牌类游戏的语音操控系统及语音操控方法
CN113018848A (zh) 一种游戏画面的显示方法、相关装置、设备以及存储介质
CN109173250B (zh) 多角色控制方法、计算机存储介质和终端
CN110314375A (zh) 一种游戏场景的录制方法、终端及计算机可读存储介质
CN107786427A (zh) 一种信息交互方法、终端和计算机可读存储介质
CN109276881A (zh) 一种游戏控制方法、设备
CN109692474A (zh) 基于移动终端的游戏控制方法、移动终端及可读存储介质
CN109550256A (zh) 虚拟角色调整方法、装置和存储介质
CN108541116A (zh) 灯光控制方法、终端及计算机可读存储介质
CN112060080A (zh) 一种机器人的控制方法、装置、终端设备及存储介质
CN110339561A (zh) 一种射击类游戏优化方法、终端及计算机可读存储介质
CN106267812A (zh) 一种基于眼球转动和语音操作的游戏控制系统及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170104

RJ01 Rejection of invention patent application after publication