CN105500378A - 自动完成游戏节奏大师的机器人 - Google Patents

自动完成游戏节奏大师的机器人 Download PDF

Info

Publication number
CN105500378A
CN105500378A CN201610018564.7A CN201610018564A CN105500378A CN 105500378 A CN105500378 A CN 105500378A CN 201610018564 A CN201610018564 A CN 201610018564A CN 105500378 A CN105500378 A CN 105500378A
Authority
CN
China
Prior art keywords
robot
camera
slide block
electromagnet
guide rail
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610018564.7A
Other languages
English (en)
Other versions
CN105500378B (zh
Inventor
曾轩
李志�
罗磊
于波
周庆龙
王冰冰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN201610018564.7A priority Critical patent/CN105500378B/zh
Publication of CN105500378A publication Critical patent/CN105500378A/zh
Application granted granted Critical
Publication of CN105500378B publication Critical patent/CN105500378B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/003Manipulators for entertainment
    • B25J11/004Playing a music instrument

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Manipulator (AREA)
  • Toys (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供了一种自动完成游戏节奏大师的机器人,包括机械机构和控制系统;机械机构包括电磁铁、机械手、摄像头支架;控制系统包括步进电机、下位机、上位机、驱动器、摄像头;其中,摄像机设置在摄像头支架上,用于图像采集,上位机用于对采集的图像进行处理,分析图图像内容,获取游戏屏幕中滑块运动轨迹,进而将反映滑块运动轨迹的指令发送给下位机;下位机用于接收指令将机械手所在位置和目标位置进行比对,发出移动命令通过驱动器控制步进电机转动、通过电磁铁驱动机械手向下、向上运动实现游戏屏幕滑块点击、松开。本发明中将步进电机的转动转化为电磁铁的左右移动,电磁铁接受指令做出相应动作实现上下移动,以达到点击屏幕滑块的目的。

Description

自动完成游戏节奏大师的机器人
技术领域
本发明涉及机器人,具体地,涉及一种自动完成游戏节奏大师的机器人。
背景技术
网络游戏受到越来越多人的喜爱,但是目前市面上还没有出现智能化自动化完成游戏的机器人。相关的机械和控制技术虽然在工业上已成功运用,也有一些人基于个人爱好开发过一些游戏机器人,但是真正的游戏机器人的技术并不成熟,机械结构和控制装置之间的传递和配合不太协调,不具有较好的智能化和自动化。
经过对现有技术的检索,发现申请号为201410418779.9,名称为积木机器人游戏系统及方法的发明公开了一种积木机器人游戏系统,包括至少一个积木机器人,其特征在于:所述积木机器人游戏系统还包括至少一个具有插接结构的功能插件、至少一块游戏垫和至少一个玩具障碍,所述游戏垫上设有可让灰度探测器识别的路线,所述玩具障碍摆放在游戏垫上堵住路线,所述至少一个功能插件安装在积木机器人上,所述积木机器人在游戏垫表面运动。采用上述积木机器人游戏系统进行游戏的积木机器人游戏方法。但是该发明中的机器人无法完成节奏大师等类似的游戏。
发明内容
针对现有技术中的缺陷,本发明的目的是提供一种自动完成游戏节奏大师的机器人。
根据本发明提供的自动完成游戏节奏大师的机器人,包括机械机构和控制系统;
所述机械机构包括电磁铁、机械手以及摄像头支架;
所述控制系统包括步进电机、下位机、上位机、驱动器以及摄像头;
其中,所述摄像机设置在所述摄像头支架上,用于图像采集,
所述上位机用于对采集的图像进行处理,分析图图像内容,获取游戏屏幕中滑块运动轨迹,进而将反映滑块运动轨迹的指令发送给下位机;
所述下位机用于接收所述指令将机械手所在位置和目标位置进行比对,发出移动命令通过所述驱动器控制步进电机转动、带动电磁铁移动,电磁铁驱动所述机械手向下、向上运动实现游戏屏幕滑块点击、松开。
优选地,所述机械机构还包括机器人机架、转动连杆、滑块、滑槽、固定块以及导轨;
其中,电磁铁、机械手、摄像头支架、转动连杆、滑块、固定块以及导轨均设置在所述机器人机架;
所述导轨的一端设置在一固定块上,另一端设置在另一固定块上;所述滑块;所述滑槽设置在所述导轨,能够沿所述导轨滑动;所述滑块设置在所述滑槽上;所述步进电机通过所述转动连杆驱动所述滑块,进而带动所述滑槽沿所述导轨滑动。
优选地,所述摄像头支架采用三脚支撑架;所述机械手采用布头电容笔。
优选地,所述机器人机架包括U型基座和支撑板;所述支撑板的一端设置在一U型基座上,另一端设置在另一U型基座;
所述电磁铁、所述机械手、所述摄像头支架、所述转动连杆、所述滑块、所述固定块以及所述导轨均设置在支撑板。
优选地,所述摄像头采集图像为RGB图像;
所述上位机将所述RGB图像转换至灰度图,再进行图像识别。
优选地,所述下位机采用ARM开发板;
所述ARM开发板将所述移动命令通过串口通信的方式传送给所述驱动器和电磁铁的MOS管;
所述上位机与ARM开发板通过UART口的连接。
优选地,所述摄像头采用USB高速工业相机;
所述USB工业相机采集画面的RGB颜色信息并将颜色信息转换为灰度图后存储在所述上位机的内存中。
优选地,所述步进电机、所述转动连杆、所述滑块、所述滑槽以及所述机械手的数量为两个。
与现有技术相比,本发明具有如下的有益效果:
1、本发明中机械手依靠转动副和运动副将步进电机的转动转化为电磁铁的左右移动,电磁铁接受指令做出相应动作实现上下移动,以达到点击屏幕滑块的目的,实现游戏的完成;
2、本发明机械结构简单,易于实现且成本较低,可准确快速识别和点击屏幕上节奏大师的滑块,自动完成该游戏。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1为本发明的总体流程图;
图2为本发明的图片处理算法图;
图3为本发明的控制器代码流程图;
图4为本发明滑块及导轨结构图;
图5为本发明机构运动部分模型图;
图6为本发明摄像头支架模型图;
图7为本发明整体机构模型图。
图中:
1为滑块;
2为导轨;
3为滑槽;
4为固定块;
5为转动连杆;
6为步进电机;
7为电磁铁;
8为摄像头;
9为摄像头支架;
10为木板底座;
11为机器人支架;
12为U型基座。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进。这些都属于本发明的保护范围。
在本实施例中,本发明提供的自动完成游戏节奏大师的机器人,包括机械机构和控制系统;所述机械机构包括电磁铁7、机械手以及摄像头支架9;
所述控制系统包括步进电机6、下位机、上位机、驱动器以及摄像头;
其中,所述摄像机设置在所述摄像头支架9上,用于图像采集,
所述上位机用于对采集的图像进行处理,分析图图像内容,获取游戏屏幕中滑块运动轨迹,进而将反映滑块运动轨迹的指令发送给下位机;
所述下位机用于接受所述指令将机械手所在位置和目标位置进行比对,发出移动命令通过所述驱动器控制步进电机6转动、带动电磁铁7移动,电磁铁7驱动所述机械手向下、向上运动实现游戏屏幕滑块点击、松开。
所述机械机构还包括机器人机架11、转动连杆5、滑块1、滑槽3、固定块4以及导轨2;其中,电磁铁7、机械手、摄像头支架9、转动连杆5、滑块1、固定块4以及导轨2均设置在所述机器人机架11;所述导轨2的一端设置在一固定块4上,另一端设置在另一固定块4上;所述滑槽3设置在所述导轨2,能够沿所述导轨2滑动;所述滑块1设置在所述滑槽3上;所述步进电机6通过所述转动连杆5驱动所述滑块1,进而带动所述滑槽3沿所述导轨2滑动。
所述摄像头支架9采用三脚支撑架;所述机械手采用布头电容笔。所述机器人机架包括U型基座和支撑板;所述支撑板的一端设置在一U型基座上,另一端设置在另一U型基座;所述电磁铁7、所述机械手、所述摄像头支架9、所述转动连杆5、所述滑块1、所述固定块4以及所述导轨2均设置在支撑板。
所述摄像头采集图像为RGB图像;所述上位机将所述RGB图像转换至灰度图,再进行图像识别。所述下位机采用ARM3开发板;所述ARM3开发板将所述移动命令通过串口通信的方式传送给所述驱动器和电磁铁的MOS管;所述上位机与ARM3开发板通过UART口的连接。所述摄像头采用USB高速工业相机;所述USB工业相机采集画面的RGB颜色信息并将颜色信息转换为灰度图后存储在所述上位机的内存中。所述上位机采用windows操作系统。所述电磁铁与所述步进电机采用24V电源供电。
本发明提供的自动完成游戏节奏大师的机器人还包括三脚架,所述USB高速工业相机设置在所述三脚架上;
三脚架包括3根丝杆及底座连接部,底座为木板,摄像头固定在透明塑料板上,摄像头与进行游戏的平板电脑之间位置可调,角度可调。
所述步进电机6、所述转动连杆5、所述滑块1、所述滑槽3以及所述机械手的数量为两个。
其中,机器人图像识别算法与移动滑块识别算法在上位机中独立进行。所述机械手移动算法在ARM3开发板中独立进行。
当本发明提供的自动完成游戏节奏大师的机器人时,电磁铁7通过螺栓固定在滑槽3上,滑块1和导轨2可在依靠转动连杆5将步进电机6的转动转化为在导轨2上左右移动,导轨2通过固定块4固定在机器人支架11上,电磁铁7接收到驱动器的指令通断电实现上下移动。摄像头8通过透明塑料板固定在摄像头支架9上,位置可调。摄像头支架9和机器人支架11通过螺栓固定在木板底座10上。
本发明提供的自动完成游戏节奏大师的机器人,采用高速工业相机进行图像采集,然后使用上位机对采集的图片进行处理,分析图片内容,将反映滑块运动轨迹的指令发送给下位机。下位机)接受上位机指令,与原先手指所在位置和当前位置进行比对,发出移动命令,通过机械结构将控制电机的转动转化为电磁铁左右和上下移动,点击屏幕上滑块,完成游戏。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变形或修改,这并不影响本发明的实质内容。

Claims (8)

1.一种自动完成游戏节奏大师的机器人,其特征在于,包括机械机构和控制系统;
所述机械机构包括电磁铁(7)、机械手以及摄像头支架(9);
所述控制系统包括步进电机(6)、下位机、上位机、驱动器以及摄像头;
其中,所述摄像机设置在所述摄像头支架(9)上,用于图像采集,
所述上位机用于对采集的图像进行处理,分析图图像内容,获取游戏屏幕中滑块运动轨迹,进而将反映滑块运动轨迹的指令发送给下位机;
所述下位机用于接收所述指令将机械手所在位置和目标位置进行比对,发出移动命令通过所述驱动器控制步进电机(6)转动、带动电磁铁(7)移动,电磁铁(7)驱动所述机械手向下、向上运动实现游戏屏幕滑块点击、松开。
2.根据权利要求1所述的自动完成游戏节奏大师的机器人,其特征在于,所述机械机构还包括机器人机架(11)、转动连杆(5)、滑块(1)、滑槽(3)、固定块(4)以及导轨(2);
其中,电磁铁(7)、机械手、摄像头支架(9)、转动连杆(5)、滑块(1)、固定块(4)以及导轨(2)均设置在所述机器人机架(11);
所述导轨(2)的一端设置在一固定块(4)上,另一端设置在另一固定块(4)上;所述滑块(1);所述滑槽(3)设置在所述导轨(2),能够沿所述导轨(2)滑动;所述滑块(1)设置在所述滑槽(3)上;所述步进电机(6)通过所述转动连杆(5)驱动所述滑块(1),进而带动所述滑槽(3)沿所述导轨(2)滑动。
3.根据权利要求1所述的自动完成游戏节奏大师的机器人,其特征在于,所述摄像头支架(9)采用三脚支撑架;所述机械手采用布头电容笔。
4.根据权利要求2所述的自动完成游戏节奏大师的机器人,其特征在于,所述机器人机架包括U型基座和支撑板;所述支撑板的一端设置在一U型基座上,另一端设置在另一U型基座;
所述电磁铁(7)、所述机械手、所述摄像头支架(9)、所述转动连杆(5)、所述滑块(1)、所述固定块(4)以及所述导轨(2)均设置在支撑板。
5.根据权利要求1所述的自动完成游戏节奏大师的机器人,其特征在于,所述摄像头采集图像为RGB图像;
所述上位机将所述RGB图像转换至灰度图,再进行图像识别。
6.根据权利要求1所述的自动完成游戏节奏大师的机器人,其特征在于,所述下位机采用ARM3开发板;
所述ARM3开发板将所述移动命令通过串口通信的方式传送给所述驱动器和电磁铁的MOS管;
所述上位机与ARM3开发板通过UART口的连接。
7.根据权利要求1所述的自动完成游戏节奏大师的机器人,其特征在于,所述摄像头采用USB高速工业相机;
所述USB工业相机采集画面的RGB颜色信息并将颜色信息转换为灰度图后存储在所述上位机的内存中。
8.根据权利要求1所述的自动完成游戏节奏大师的机器人,其特征在于,所述步进电机(6)、所述转动连杆(5)、所述滑块(1)、所述滑槽(3)以及所述机械手的数量为两个。
CN201610018564.7A 2016-01-12 2016-01-12 自动完成游戏节奏大师的机器人 Active CN105500378B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610018564.7A CN105500378B (zh) 2016-01-12 2016-01-12 自动完成游戏节奏大师的机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610018564.7A CN105500378B (zh) 2016-01-12 2016-01-12 自动完成游戏节奏大师的机器人

Publications (2)

Publication Number Publication Date
CN105500378A true CN105500378A (zh) 2016-04-20
CN105500378B CN105500378B (zh) 2017-11-14

Family

ID=55708872

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610018564.7A Active CN105500378B (zh) 2016-01-12 2016-01-12 自动完成游戏节奏大师的机器人

Country Status (1)

Country Link
CN (1) CN105500378B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106625697A (zh) * 2016-11-15 2017-05-10 同济大学 一种基于机器视觉技术的智能桌面式机械臂系统
CN107953349A (zh) * 2018-01-04 2018-04-24 北京理工大学 智能终端触屏游戏机械手
CN108032313A (zh) * 2018-01-04 2018-05-15 北京理工大学 基于仿生原理自动完成智能终端触屏游戏的机械手
CN109955251A (zh) * 2019-03-15 2019-07-02 深圳前海达闼云端智能科技有限公司 控制器、屏幕机器人及其控制方法和计算机存储介质
CN112405553A (zh) * 2020-11-03 2021-02-26 马鞍山安慧智电子科技有限公司 一种游戏机器人
CN113232029A (zh) * 2021-05-07 2021-08-10 张伟杰 手机点击机器人

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4729563A (en) * 1984-12-28 1988-03-08 Nintendo Co., Ltd. Robot-like game apparatus
CN1686681A (zh) * 2005-05-20 2005-10-26 长沙市雅礼中学 博弈机器人
CN101264384A (zh) * 2007-03-13 2008-09-17 林其禹 盘式游戏系统及机器人装置
CN102350703A (zh) * 2011-09-22 2012-02-15 浙江工业大学 电磁铁驱动夹持机械手
CN103252077A (zh) * 2012-10-26 2013-08-21 上海未来伙伴机器人有限公司 下棋机器人

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4729563A (en) * 1984-12-28 1988-03-08 Nintendo Co., Ltd. Robot-like game apparatus
CN1686681A (zh) * 2005-05-20 2005-10-26 长沙市雅礼中学 博弈机器人
CN101264384A (zh) * 2007-03-13 2008-09-17 林其禹 盘式游戏系统及机器人装置
CN102350703A (zh) * 2011-09-22 2012-02-15 浙江工业大学 电磁铁驱动夹持机械手
CN103252077A (zh) * 2012-10-26 2013-08-21 上海未来伙伴机器人有限公司 下棋机器人

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106625697A (zh) * 2016-11-15 2017-05-10 同济大学 一种基于机器视觉技术的智能桌面式机械臂系统
CN107953349A (zh) * 2018-01-04 2018-04-24 北京理工大学 智能终端触屏游戏机械手
CN108032313A (zh) * 2018-01-04 2018-05-15 北京理工大学 基于仿生原理自动完成智能终端触屏游戏的机械手
CN108032313B (zh) * 2018-01-04 2019-05-03 北京理工大学 基于仿生原理自动完成智能终端触屏游戏的机械手
CN109955251A (zh) * 2019-03-15 2019-07-02 深圳前海达闼云端智能科技有限公司 控制器、屏幕机器人及其控制方法和计算机存储介质
CN109955251B (zh) * 2019-03-15 2021-08-03 达闼机器人有限公司 控制器、屏幕机器人及其控制方法和计算机存储介质
CN112405553A (zh) * 2020-11-03 2021-02-26 马鞍山安慧智电子科技有限公司 一种游戏机器人
CN112405553B (zh) * 2020-11-03 2021-11-30 马鞍山安慧智电子科技有限公司 一种游戏机器人
CN113232029A (zh) * 2021-05-07 2021-08-10 张伟杰 手机点击机器人

Also Published As

Publication number Publication date
CN105500378B (zh) 2017-11-14

Similar Documents

Publication Publication Date Title
CN105500378A (zh) 自动完成游戏节奏大师的机器人
CN100530273C (zh) 机器视觉教学创新实验平台
CN205055410U (zh) 一种基于手势控制的抓娃娃机
CN108237544B (zh) 一种人工智能的书法机器人
CN110355754A (zh) 机器人手眼系统、控制方法、设备及存储介质
CN109433627B (zh) 基于机器视觉处理的机械手物流分拣系统及其工作方法
CN201438178U (zh) 一种视觉检测系统的位移台装置
CN108247611A (zh) 一种三自由度并联机构控制方法
CN108305553A (zh) 一种基于视觉装配的教学实验装置
CN211294467U (zh) 一种基于机器视觉的三维机器人教学实验平台
CN209446480U (zh) 车辆漆面及外观瑕疵检测装置
CN111985420B (zh) 一种基于机器视觉的配电站无人化巡查方法
CN110142769B (zh) 基于人体姿态识别的ros平台在线机械臂示教系统
CN109048862A (zh) 一种基于机器视觉的零部件分拣机器人
CN109227537A (zh) 一种基于机器视觉的零部件分拣方法
CN209446017U (zh) 一种大型工程机械结构件的自动扫描检测装置
CN112775966A (zh) 一种基于机器视觉的分拣机械臂及其工作方法
CN105352544A (zh) 一种针对智能控制终端的测试系统及测试方法
CN108032313B (zh) 基于仿生原理自动完成智能终端触屏游戏的机械手
CN215868286U (zh) 一种线阵扫描型的机器视觉教学实验平台
CN115128387A (zh) 机器人末端触屏测试系统、触屏测试系统及触屏测试方法
CN108257220A (zh) 一种真实的人物作为虚拟形象植入虚拟世界的方法
CN206501118U (zh) 一种机器人抓取装置
CN113498952A (zh) 一种具有人机交互功能的模型展示装置
CN107068589A (zh) 一种基于图像识别的晶粒挑选系统及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant