CN107219849A - 一种多途径的捡球和发球机器人控制系统 - Google Patents
一种多途径的捡球和发球机器人控制系统 Download PDFInfo
- Publication number
- CN107219849A CN107219849A CN201710366647.XA CN201710366647A CN107219849A CN 107219849 A CN107219849 A CN 107219849A CN 201710366647 A CN201710366647 A CN 201710366647A CN 107219849 A CN107219849 A CN 107219849A
- Authority
- CN
- China
- Prior art keywords
- ball
- controller
- control
- module
- control instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000007246 mechanism Effects 0.000 claims abstract description 54
- 230000033001 locomotion Effects 0.000 claims abstract description 32
- 238000001514 detection method Methods 0.000 claims abstract description 20
- 230000003993 interaction Effects 0.000 claims abstract description 13
- 230000005540 biological transmission Effects 0.000 claims description 17
- 230000000875 corresponding effect Effects 0.000 claims description 13
- 230000015572 biosynthetic process Effects 0.000 claims description 8
- 238000003786 synthesis reaction Methods 0.000 claims description 8
- 238000001914 filtration Methods 0.000 claims description 6
- 239000000284 extract Substances 0.000 claims description 5
- 230000000694 effects Effects 0.000 claims description 4
- 238000000034 method Methods 0.000 claims description 4
- XUKUURHRXDUEBC-KAYWLYCHSA-N Atorvastatin Chemical compound C=1C=CC=CC=1C1=C(C=2C=CC(F)=CC=2)N(CC[C@@H](O)C[C@@H](O)CC(O)=O)C(C(C)C)=C1C(=O)NC1=CC=CC=C1 XUKUURHRXDUEBC-KAYWLYCHSA-N 0.000 claims description 3
- 238000004891 communication Methods 0.000 claims description 3
- 238000000605 extraction Methods 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 3
- 230000008569 process Effects 0.000 claims description 2
- 206010004542 Bezoar Diseases 0.000 claims 1
- 239000003086 colorant Substances 0.000 claims 1
- 230000008901 benefit Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 238000000465 moulding Methods 0.000 description 1
- 230000035772 mutation Effects 0.000 description 1
- 238000004886 process control Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0212—Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
- G05D1/0225—Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving docking at a fixed facility, e.g. base station or loading bay
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0276—Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
Abstract
本发明提供了一种多途径的捡球和发球机器人控制系统，通过多途径、全自动地完成捡球和发球任务，为人工带来了诸多便利；应用该系统的机器人包括移动机构、捡球机构以及发球机构，该系统包括网页控制模块、语音语义识别模块、机器视觉模块和控制器；网页控制模块包括网页服务器和人机交互页面；机器视觉模块包括摄像头和视觉检测部分；网页服务器和人机交互页面连接，基于网页控制模块、语音语义识别模块和机器视觉模块，控制器按照接收信息的优先级对机器人发送指令驱动机器人执行对应的运动。
Description
技术领域
本发明属于自动控制领域，具体设计一种多途径的捡球和发球机器人控制系统。
背景技术
目前尚无全自动捡球、发球机器人控制方案，现有捡球器材为辅助型器材，需要使用者走至球跟前使用该器械辅助捡球，相比手工捡球更加省力，但无法实现自主捡球；现有发球器材为固定位置式发球机，无法自主移动，可以实现一定范围内可调角度、可调力度的发球，但需要人工调整其位置和姿态，且具有笨重、响应慢且不易携带的特点。
基于此，目前急需设计一种多途径的捡球和发球一体化机器人，实现全自动、智能化的捡球和发球。
发明内容
有鉴于此，本发明提供了一种多途径的捡球和发球机器人控制系统，能够通过多途径完成捡球和发球任务，为人工带来了诸多便利。
实施本发明的具体方案如下：
一种多途径的捡球和发球机器人控制系统，该系统包括网页控制模块、语音语义识别模块、机器视觉模块和控制器；网页控制模块包括网页服务器和人机交互页面；机器视觉模块包括摄像头和视觉检测部分；网页服务器和人机交互页面连接，基于网页控制模块、语音语义识别模块和机器视觉模块，控制器按照接收信息的优先级对机器人发送指令驱动机器人执行对应的运动；
优先级从高到低为：网页控制模块、语音语义识别模块、机器视觉模块。
优选地，网页控制模块、语音语义识别模块、机器视觉模块的优先级从高到低具体为：若网页控制模块有信息传递进来时，则优先执行该命令，当实施网页控制模块作用时，通过人机交互页面将控制指令I经过网页服务器发送到控制器上，控制器接收控制指令I控制机器人的移动机构、发球机构或捡球机构执行控制指令I对应的动作；若网页控制模块无信息传递时，则判断语音语义识别模块是否有信息传递，当语音语义识别模块有信息传递进来时，则优先执行该命令，语音语义识别模块将监听到的语音信息解析为控制指令II，并将制指令II发送到控制器上，控制器接收控制指令II控制机器人的移动机构、发球机构或捡球机构执行控制指令II对应的动作；若网页控制模块和语音语义识别模块均无信息传递时，则机器视觉控制模块在控制器的控制下启动并利用摄像头捕获图像，摄像头将捕获到的图像信息传送到视觉检测部分，视觉检测部分分析所述图像信息获取目标位置并判断下一步机器人的走向信息，将目标位置和走向信息发送到控制器上，控制器接收目标位置和走向信息后发送控制指令III控制机器人的移动机构、发球机构或捡球机构执行控制指令III对应的动作。
优选地，该机器人包括移动机构、捡球机构和发球机构；移动机构包括运动电机、驱动机构、运动底盘和车轮；捡球机构包括传送带、减速电机、储球筐和传送机架；发球机构包括发球电机、摩擦轮和发球管道；其中，传送机架的顶端设有出球槽，传送机架的底端设有进球槽，运动电机与驱动机构连接并均置于运动底盘上，驱动机构与车轮连接，运动底盘的支撑架分别与捡球机构的传送机架、发球机构的发球管道和储球筐固联；传送带和减速电机均固定在传送机架上，减速电机与传送带连接；摩擦轮内置在发球管道上，并由固定在发球管道上的发球电机驱动，储球筐的出球口与发球管道的进球口固联，储球筐的进球口与传送机架的出球槽对接。
优选地，语音语义识别模块为讯飞开放平台。
优选地，控制器设有PID调速器，机器人通过无线协议WIFI与控制器通讯，若控制器接收的控制指令I、控制指令II或控制指令III为发球指令，控制器通过无线协议WIFI远程控制机器人的驱动机构驱动发球机构执行发球；若控制器接收的控制指令I、控制指令II或控制指令III为运动指令，控制器使用PID调速器对机器人的运动电机油门进行控制，控制器通过无线协议WIFI远程控制机器人运动到球的位置；若控制器接收的控制指令I、控制指令II或控制指令III为捡球指令，控制器通过无线协议WIFI远程控制机器人的驱动机构驱动捡球机构执行捡球。
优选地，视觉检测部分具体功能为：
捕获摄像头图像，并将图像的RGB色彩空间转换为HSV色彩空间；通过颜色阈值对HSV色彩空间进行色调分割，获得可能为目标的色块；对色块进行圆形轮廓检测，当目标轮廓为圆形；对确定为圆形的区域进行中值滤波，然后采用霍夫变换算法对滤波后的圆形进行高精度的圆形检测，检测到的轮廓即为所求目标；当目标轮廓为其他形状，重复捕获摄像头图像并处理，直到确定所求目标，然后将目标在摄像头中的位置信息换算为球相对机器人的位置，根据该位置判断出机器人下一步的行进方向信息，将该行进方向信息作为指令发送至控制器。
优选地，所述对色块进行圆形轮廓检测为：
提取目标轮廓色彩的掩码，对提取后的掩码再进行轮廓提取，对轮廓的周长C和面积进行检测，根据周长C和面积的关系判断提取的轮廓是否为圆形；
其中，若目标轮廓为圆形，则它的半径为：
然后根据此半径值得到该轮廓的面积理论值At：
At＝π×r2
根据面积理论值At和实际值As判断是否为圆形：当70％At<As<130％At，则该轮廓为圆形，当As<70％At或As>130％At，则该轮廓不是圆形。
优选地，网页服务器采用Flask搭建。
优选地，该系统进一步包括语音合成模块，当控制器收到控制指令I、控制指令II或控制指令III，由语音合成部分合成语音“收到指令”并播放；当控制器未收到控制指令I、控制指令II或控制指令III，由语音合成部分合成语音“指令无效”并播放。
有益效果：
1、本发明通过建立从高到低的优先级，使得该控制系统能够通过多途径完成捡球和发球任务，为人工带来了诸多便利。
2、本发明网页搭建的网页交互平台，使机器人的控制系统具有轻量级、响应速度快的优点。
3、应用在本发明的机器人，能够通过多途径、全自动完成捡球和发球任务。
4、本发明使用的讯飞开放平台，具有识别率高，转换速度快的优点。
5、本发明的控制器设有的PID调速器，能够使得机体运行速度平滑变化，防止突变和抖动。
附图说明
图1为本发明的总控制流程；
图2为本发明的机器人示意图；
图3为本发明的机器视觉算法流程；
图4为本发明的语音交互流程；
图5为本发明的网页交互流程。
其中，1-移动机构,2-捡球机构,3-发球机构,4-储球筐。
具体实施方式
下面结合附图并举实施例，对本发明进行详细描述。
本申请人同日提出了一件发明名称为“一种智能网球机器人”的专利申请，该机器人包括移动机构1、捡球机构2和发球机构3；移动机构1包括运动电机、驱动机构、运动底盘和车轮；捡球机构2包括传送带、减速电机、储球筐4和传送机架；发球机构3包括发球电机、摩擦轮和发球管道；其中，传送机架的顶端设有出球槽，传送机架的底端设有进球槽，运动电机与驱动机构连接并均置于运动底盘上，驱动机构与车轮连接，运动底盘的支撑架分别与捡球机构的传送机架、发球机构的发球管道和储球筐4固联；传送带和减速电机均固定在传送机架上，减速电机与传送带连接；摩擦轮内置在发球管道上，并由固定在发球管道上的发球电机驱动，储球筐的出球口与发球管道的进球口固联，储球筐的进球口与传送机架的出球槽对接。
为了实现上述智能网球机器人的有效控制，本发明提供了一种用于智能网球机器人的多途径控制系统，该系统包括网页控制模块、语音语义识别模块、机器视觉模块、控制器和机器人；网页控制模块包括网页服务器和人机交互页面；机器视觉模块包括摄像头和视觉检测部分；网页服务器和人机交互页面连接，基于网页控制模块、语音语义识别模块和机器视觉模块，控制器按照接收其发送信息的优先级对机器人发送指令驱动机器人执行对应的运动；
优先级从高到低为：网页控制模块、语音语义识别模块、机器视觉模块，若网页控制模块有信息传递进来时，则优先执行该命令，当实施网页控制模块作用时，通过人机交互页面将控制指令I经过网页服务器发送到控制器上，控制器接收控制指令I控制移动机构1、发球机构2或捡球机构3执行控制指令I对应的动作；若网页控制模块无信息传递时，则判断语音语义识别模块是否有信息传递，当语音语义识别模块有信息传递进来时，则优先执行该命令，语音语义识别模块将监听到的语音信息解析为控制指令II，并将制指令II发送到控制器上，控制器接收控制指令II控制移动机构1、发球机构2或捡球机构3执行控制指令II对应的动作；若语音语义识别模块无信息传递时，则机器视觉控制模块自动启动并利用摄像头捕获图像，摄像头将捕获到的图像信息传送到视觉检测部分，视觉检测部分分析所述图像信息并获取目标位置并判断下一步机器人的走向信息，将目标位置和走向信息发送到控制器上，控制器接收目标位置和走向信息后发送控制指令III控制移动机构1、捡球机构2或捡球机构3执行相关指令执行控制指令III对应的动作,如当收到有效指令之后，由语音合成部分合成语音“收到指令”并播放；收到无效指令后，由语音合成部分合成语音“指令无效”并播放。实现与用户交互的功能。
该系统可以加入语音合成模块，当控制器收到控制指令I、控制指令II或控制指令III，由语音合成部分合成语音“收到指令”并播放；当控制器未收到控制指令I、控制指令II或控制指令III，由语音合成部分合成语音“指令无效”并播放，实现与用户交互的功能。
上述的系统中各个部件的具体功能如下：
目前广泛使用的计算机视觉库为OpenCV，具有跨平台、效率高的特点，本发明使用将其作为平台实现网球识别；Flask是一个网络应用框架，具有轻量级、响应速度快的优点，本发明使用其搭建交互网页；讯飞开放平台是一个中文语音语义识别平台，识别率高，转换速度快，本发明使用其进行语音交互；ROS是一个控制器，本发明使用它来进行多节点的信息通讯；PID是一种闭环控制算法，将它用于运动控制可以使得机体运行速度平滑变化，防止突变和抖动，本发明使用它来进行速度调控。
本发明通过计算机视觉自主导航、网页端用户交互和语音用户交互的方式对机器人进行控制，如图1所示，通过控制器的PID调速控制电机机器人运动底盘上执行运动命令，控制捡球机构执行捡球指令，控制发球机构执行发球指令。该控制方式可用于网球、乒乓球、高尔夫球等运动当中，完成全自动并可随时人工干预的捡球发球控制方式。
一种控制流程，统筹自动导航、网页控制、语音控制三种控制方式进行机器人运动控制指令下达并使用PID进行指令执行。其中，自动导航使用计算机视觉技术实现，使用该技术处理出摄像头中网球的位置坐标，判断下一步机器人的前进方向，再将该信息打包给控制器；网页服务器监听用户的按键操作，当有控制键按下时，网页服务器将其转化为下一步机器人的前进方向，将该信息打包发送给控制器；语音识别节点随时通过麦克风收集声音，过滤掉背景噪音之后识别语义，转化为机器人前进方向信息发送给控制器。控制器按照一定的优先级对收集的机器人前进方向信息进行统筹，处理得到最终控制方式后发送给执行器执行该运动。执行器在接收到最终运动方式之后将目标速度、之前速度传递给PID调速器，由PID调速器计算出运动电机油门量，执行运动。若需要发球，则控制发球机构执行发球命令；若需要捡球，则控制捡球机构执行捡球命令。
机器人使用计算机视觉技术检测网球。如图2所示，使用的关键算法:HSV颜色空间阈值化、轮廓提取即圆形轮廓检测、霍夫(Hough)变换、中值滤波。机器人提取到摄像头图像信息后将图像由RGB色彩空间转化到HSV色彩空间，进行通道分离，并对三个通道分别进行阈值化操作，获得可能为目标的色块。下一步进行圆形轮廓检测。先将色彩提取后的掩码进行轮廓提取，并且对轮廓的面积、周长进行检测并判断是否为近似圆形，若为圆形则检测到网球并返回圆形圆心位置和大小，与真实网球大小作比较即可得到网球平面坐标和距离。根据提取出的轮廓的周长和面积，接下来根据周长和面积的关系判断提取的轮廓是否为圆形。
然后可以根据此半径值得到该轮廓的面积理论值At：
At＝π×r2
根据面积理论值和实际值判断是否为圆形：当70％At<As<130％At，则该轮廓为近似圆形，当As<70％At或As>130％At，则该轮廓不是圆形；由于轮廓边界可能存在锯齿或是不甚完整，因此若实际面积在理论面积。周围一定范围内即认定为是圆形。
进行完之后网球区块即被提取出来，但同时也会有一些小的噪点被误判提取，因此需要进行滤波，本发明选用中值滤波。在滤波结束之后，使用霍夫变换算法进行高精度的圆形检测，检测到的轮廓即为所求目标。将这一目标在摄像头中的位置信息换算为网球相对机器人的位置，即可判断出机器人下一步的行进方式，将该信息作为指令发布至控制器。
语音语义识别平台通过讯飞开放平台搭建，如图3所示，在识别到用户说出关键词，如“开始”、“停止”、“直行”等命令后，将其作为指令发布至控制器。
控制器设有PID调速器，机器人设有无线协议WIFI，无线协议WIFI与控制器连接，若控制器接收的控制指令I、控制指令II或控制指令III均为发球指令，控制器将发球命令通过无线协议WIFI远程控制机器人的驱动机构驱动发球机构执行发球；若控制器接收的控制指令I、控制指令II或控制指令III均为运动指令，控制器使用PID调控器对机器人的电机油门进行控制，控制器通过无线协议WIFI远程控制机器人运动到目标位置；若控制器接收的控制指令I、控制指令II或控制指令III均为捡球指令，控制器将发球命令通过无线协议WIFI远程控制机器人的驱动机构驱动捡球机构执行捡球。
直流电机通过油门百分比来控制电机的输出功率百分比，而电机的实际转速除了和油门有关外，也和当前机器的负重、道路的坡度等变量有关。这种电机在独立使用的情况下由于没有反馈，给定相应的油门百分比之后控制器无法得知电机的实际转速，在重心不匀，或是下坡、上坡等情况下可能出现运动方向不定、过快或是过慢的情况，因此需要引入当前速度测量值进行反馈。PID通过比例、积分、微分的方式进行速度调控，使得电机转速均匀变化。
网页控制器通过Flask搭建，如图4所示，该控制器同样接入控制器中，在监视到用户的按键行为后，将不同按键对应的运动方式同样作为指令发布至控制器。
通过这种方式，捡球机、发球机可以良好地配合工作，二者可以完成集自动和人工干预的捡球发球任务。
综上所述，以上仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (9)
1.一种多途径的捡球和发球机器人控制系统，其特征在于，该系统包括网页控制模块、语音语义识别模块、机器视觉模块和控制器；网页控制模块包括网页服务器和人机交互页面；机器视觉模块包括摄像头和视觉检测部分；网页服务器和人机交互页面连接，基于网页控制模块、语音语义识别模块和机器视觉模块，控制器按照接收信息的优先级对机器人发送指令驱动机器人执行对应的运动；
优先级从高到低为：网页控制模块、语音语义识别模块、机器视觉模块。
2.如权利要求1所述一种多途径的捡球和发球机器人控制系统，其特征在于，网页控制模块、语音语义识别模块、机器视觉模块的优先级从高到低具体为：若网页控制模块有信息传递进来时，则优先执行该命令，当实施网页控制模块作用时，通过人机交互页面将控制指令I经过网页服务器发送到控制器上，控制器接收控制指令I控制机器人的移动机构(1)、发球机构(2)或捡球机构(3)执行控制指令I对应的动作；若网页控制模块无信息传递时，则判断语音语义识别模块是否有信息传递，当语音语义识别模块有信息传递进来时，则优先执行该命令，语音语义识别模块将监听到的语音信息解析为控制指令II，并将控制指令II发送到控制器上，控制器接收控制指令II控制机器人的移动机构(1)、发球机构(2)或捡球机构(3)执行控制指令II对应的动作；若网页控制模块和语音语义识别模块均无信息传递时，则机器视觉控制模块在控制器的控制下启动并利用摄像头捕获图像，摄像头将捕获到的图像信息传送到视觉检测部分，视觉检测部分分析所述图像信息获取目标位置并判断下一步机器人的走向信息，将目标位置和走向信息发送到控制器上，控制器接收目标位置和走向信息后发送控制指令III控制机器人的移动机构(1)、发球机构(2)或捡球机构(3)执行控制指令III对应的动作。
3.如权利要求1或2所述一种多途径的捡球和发球机器人控制系统，其特征在于，该机器人包括移动机构(1)、捡球机构(2)和发球机构(3)；移动机构(1)包括运动电机、驱动机构、运动底盘和车轮；捡球机构(2)包括传送带、减速电机、储球筐(4)和传送机架；发球机构(3)包括发球电机、摩擦轮和发球管道；其中，传送机架的顶端设有出球槽，传送机架的底端设有进球槽，运动电机与驱动机构连接并均置于运动底盘上，驱动机构与车轮连接，运动底盘的支撑架分别与捡球机构的传送机架、发球机构的发球管道和储球筐固联；传送带和减速电机均固定在传送机架上，减速电机与传送带连接；摩擦轮内置在发球管道上，并由固定在发球管道上的发球电机驱动，储球筐(4)的出球口与发球管道的进球口固联，储球筐(4)的进球口与传送机架的出球槽对接。
4.如权利要求1所述一种多途径的捡球和发球机器人控制系统，其特征在于，语音语义识别模块为讯飞开放平台。
5.如权利要求3所述一种多途径的捡球和发球机器人控制系统，其特征在于，控制器设有PID调速器，机器人通过无线协议WIFI与控制器通讯，若控制器接收的控制指令I、控制指令II或控制指令III为发球指令，控制器通过无线协议WIFI远程控制机器人的驱动机构驱动发球机构执行发球；若控制器接收的控制指令I、控制指令II或控制指令III为运动指令，控制器使用PID调速器对机器人的运动电机油门进行控制，控制器通过无线协议WIFI远程控制机器人运动到球的位置；若控制器接收的控制指令I、控制指令II或控制指令III为捡球指令，控制器通过无线协议WIFI远程控制机器人的驱动机构驱动捡球机构执行捡球。
6.如权利要求1所述一种多途径的捡球和发球机器人控制系统，其特征在于，视觉检测部分具体功能为：
捕获摄像头图像，并将图像的RGB色彩空间转换为HSV色彩空间；通过颜色阈值对HSV色彩空间进行色调分割，获得可能为目标的色块；对色块进行圆形轮廓检测，当目标轮廓为圆形；对确定为圆形的区域进行中值滤波，然后采用霍夫变换算法对滤波后的圆形进行高精度的圆形检测，检测到的轮廓即为所求目标；当目标轮廓为其他形状，重复捕获摄像头图像并处理，直到确定所求目标，然后将目标在摄像头中的位置信息换算为球相对机器人的位置，根据该位置判断出机器人下一步的行进方向信息，将该行进方向信息作为指令发送至控制器。
7.如权利要求6所述一种多途径的捡球和发球机器人控制系统，其特征在于，所述对色块进行圆形轮廓检测为：
提取目标轮廓色彩的掩码，对提取后的掩码再进行轮廓提取，对轮廓的周长C和面积进行检测，根据周长C和面积的关系判断提取的轮廓是否为圆形；
其中，若目标轮廓为圆形，则它的半径为：
<mrow>
<mi>r</mi>
<mo>=</mo>
<mfrac>
<mi>C</mi>
<mrow>
<mn>2</mn>
<mo>&times;</mo>
<mi>&pi;</mi>
</mrow>
</mfrac>
</mrow>
然后根据此半径值得到该轮廓的面积理论值At：
At＝π×r2
根据面积理论值At和实际值As判断是否为圆形：当70％At<As<130％At，则该轮廓为圆形，当As<70％At或As>130％At，则该轮廓不是圆形。
8.如权利要求1所述一种多途径的捡球和发球机器人控制系统，其特征在于，网页服务器采用Flask搭建。
9.如权利要求1所述一种多途径的捡球和发球机器人控制系统，其特征在于，该系统进一步包括语音合成模块，当控制器收到控制指令I、控制指令II或控制指令III，由语音合成部分合成语音“收到指令”并播放；当控制器未收到控制指令I、控制指令II或控制指令III，由语音合成部分合成语音“指令无效”并播放。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710366647.XA CN107219849B (zh) | 2017-05-23 | 2017-05-23 | 一种多途径的捡球和发球机器人控制系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710366647.XA CN107219849B (zh) | 2017-05-23 | 2017-05-23 | 一种多途径的捡球和发球机器人控制系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107219849A true CN107219849A (zh) | 2017-09-29 |
| CN107219849B CN107219849B (zh) | 2020-04-07 |
Family
ID=59944380
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710366647.XA Active CN107219849B (zh) | 2017-05-23 | 2017-05-23 | 一种多途径的捡球和发球机器人控制系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107219849B (zh) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109213149A (zh) * | 2018-08-06 | 2019-01-15 | 珠海格力电器股份有限公司 | 一种自动导引运输车及其控制方法、装置和存储介质 |
| CN109821205A (zh) * | 2019-03-29 | 2019-05-31 | 武汉轻工大学 | 一种网球捡发设备和基于网球捡发设备的控制方法 |
| CN109976338A (zh) * | 2019-03-14 | 2019-07-05 | 山东大学 | 一种多模态四足机器人人机交互系统及方法 |
| CN111540017A (zh) * | 2020-04-27 | 2020-08-14 | 深圳市瑞立视多媒体科技有限公司 | 优化相机位置变量的方法、装置、设备及存储介质 |
| CN112992131A (zh) * | 2021-02-04 | 2021-06-18 | 南京邮电大学 | 一种在复杂场景下提取目标人声的乒乓球指令的方法 |
| CN113909743A (zh) * | 2021-09-30 | 2022-01-11 | 北京博清科技有限公司 | 焊接的控制方法、控制装置和焊接系统 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101694721A (zh) * | 2009-10-01 | 2010-04-14 | 厦门大学 | 一种对显微图像中圆形藻类定位的方法 |
| CN102614641A (zh) * | 2012-03-15 | 2012-08-01 | 上海电力学院 | 智能一体化捡网球机器人 |
| CN102944180A (zh) * | 2012-11-09 | 2013-02-27 | 上海理工大学 | 一种基于图像处理的乒乓球抛球高度检测系统及方法 |
| US20130218339A1 (en) * | 2010-07-23 | 2013-08-22 | Aldebaran Robotics | "humanoid robot equipped with a natural dialogue interface, method for controlling the robot and corresponding program" |
| CN106422223A (zh) * | 2016-08-31 | 2017-02-22 | 成都市和平科技有限责任公司 | 一种智能球形物体回收机器人系统及方法 |
| CN106581966A (zh) * | 2017-02-16 | 2017-04-26 | 蔡圣弘 | 一种乒乓球捡球装置及基于该装置的自动拍摄装置 |
| CN106669133A (zh) * | 2015-11-10 | 2017-05-17 | 西安发威电子科技有限公司 | 网球发球捡拾一体机 |
-
2017
- 2017-05-23 CN CN201710366647.XA patent/CN107219849B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101694721A (zh) * | 2009-10-01 | 2010-04-14 | 厦门大学 | 一种对显微图像中圆形藻类定位的方法 |
| US20130218339A1 (en) * | 2010-07-23 | 2013-08-22 | Aldebaran Robotics | "humanoid robot equipped with a natural dialogue interface, method for controlling the robot and corresponding program" |
| CN102614641A (zh) * | 2012-03-15 | 2012-08-01 | 上海电力学院 | 智能一体化捡网球机器人 |
| CN102944180A (zh) * | 2012-11-09 | 2013-02-27 | 上海理工大学 | 一种基于图像处理的乒乓球抛球高度检测系统及方法 |
| CN106669133A (zh) * | 2015-11-10 | 2017-05-17 | 西安发威电子科技有限公司 | 网球发球捡拾一体机 |
| CN106422223A (zh) * | 2016-08-31 | 2017-02-22 | 成都市和平科技有限责任公司 | 一种智能球形物体回收机器人系统及方法 |
| CN106581966A (zh) * | 2017-02-16 | 2017-04-26 | 蔡圣弘 | 一种乒乓球捡球装置及基于该装置的自动拍摄装置 |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109213149A (zh) * | 2018-08-06 | 2019-01-15 | 珠海格力电器股份有限公司 | 一种自动导引运输车及其控制方法、装置和存储介质 |
| CN109213149B (zh) * | 2018-08-06 | 2020-09-01 | 珠海格力电器股份有限公司 | 一种自动导引运输车及其控制方法、装置和存储介质 |
| CN109976338A (zh) * | 2019-03-14 | 2019-07-05 | 山东大学 | 一种多模态四足机器人人机交互系统及方法 |
| CN109821205A (zh) * | 2019-03-29 | 2019-05-31 | 武汉轻工大学 | 一种网球捡发设备和基于网球捡发设备的控制方法 |
| CN111540017A (zh) * | 2020-04-27 | 2020-08-14 | 深圳市瑞立视多媒体科技有限公司 | 优化相机位置变量的方法、装置、设备及存储介质 |
| CN111540017B (zh) * | 2020-04-27 | 2023-05-05 | 深圳市瑞立视多媒体科技有限公司 | 优化相机位置变量的方法、装置、设备及存储介质 |
| CN112992131A (zh) * | 2021-02-04 | 2021-06-18 | 南京邮电大学 | 一种在复杂场景下提取目标人声的乒乓球指令的方法 |
| CN113909743A (zh) * | 2021-09-30 | 2022-01-11 | 北京博清科技有限公司 | 焊接的控制方法、控制装置和焊接系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107219849B (zh) | 2020-04-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107219849A (zh) | 一种多途径的捡球和发球机器人控制系统 | |
| CN107139179B (zh) | 一种智能服务机器人及工作方法 | |
| CN104786865B (zh) | 一种基于单目视觉为电动汽车提供充电对接的方法 | |
| CN109571513B (zh) | 一种沉浸式移动抓取服务机器人系统 | |
| CN100360204C (zh) | 基于多处理器协作的智能表演机器人的控制系统 | |
| CN101947152B (zh) | 仿人形义肢的脑电-语音控制系统及工作方法 | |
| CN110516570A (zh) | 一种基于视觉的垃圾分类识别方法和装置 | |
| CN110040394A (zh) | 一种交互式智能垃圾机器人及其实现方法 | |
| CN102902271A (zh) | 基于双目视觉的机器人目标识别与抓取系统及方法 | |
| CN110314349B (zh) | 羽毛球捡拾机器人及其控制方法 | |
| CN105930775B (zh) | 基于灵敏度参数的人脸朝向识别方法 | |
| CN110744544B (zh) | 服务机器人视觉抓取方法及服务机器人 | |
| CN106625658A (zh) | 一种实时模仿人体上半身动作的人形机器人控制方法 | |
| CN109954254A (zh) | 基于全向来福轮的羽毛球场智能捡球机器人 | |
| CN109281071A (zh) | 智能缝纫工作站及其加工方法 | |
| CN105082137A (zh) | 一种新型机器人 | |
| Wengefeld et al. | May i be your personal coach? bringing together person tracking and visual re-identification on a mobile robot | |
| CN106325306A (zh) | 一种机器人的摄像头总成装置及其拍摄与跟踪方法 | |
| CN206200992U (zh) | 一种基于机器视觉的餐厅机器人 | |
| CN107512510A (zh) | 智能垃圾桶 | |
| Kim et al. | Experiments of vision guided walking of humanoid robot, KHR-2 | |
| CN102759953A (zh) | 一种自动摄像头 | |
| CN205816230U (zh) | 基于Kinect的新型苹果分拣系统及装置 | |
| JP2007156689A (ja) | 光源位置検出装置、これを用いた顔認識装置及び自走式ロボット | |
| JP2005111654A (ja) | ロボット装置及びロボット装置の歩行制御方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |