CN107696028B - 用于智能机器人的控制方法和装置及机器人 - Google Patents

用于智能机器人的控制方法和装置及机器人 Download PDF

Info

Publication number
CN107696028B
CN107696028B CN201610643386.7A CN201610643386A CN107696028B CN 107696028 B CN107696028 B CN 107696028B CN 201610643386 A CN201610643386 A CN 201610643386A CN 107696028 B CN107696028 B CN 107696028B
Authority
CN
China
Prior art keywords
control command
intelligent robot
target user
determining
needs
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610643386.7A
Other languages
English (en)
Other versions
CN107696028A (zh
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xinyi avatar Intelligent Technology Co., Ltd
Original Assignee
Xinyi Avatar Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xinyi Avatar Intelligent Technology Co Ltd filed Critical Xinyi Avatar Intelligent Technology Co Ltd
Priority to CN201610643386.7A priority Critical patent/CN107696028B/zh
Priority to PCT/CN2017/091972 priority patent/WO2018028360A1/zh
Publication of CN107696028A publication Critical patent/CN107696028A/zh
Application granted granted Critical
Publication of CN107696028B publication Critical patent/CN107696028B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Manipulator (AREA)

Abstract

本发明公开了一种用于智能机器人的控制方法和装置及机器人。该用于智能机器人的控制方法包括:检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,其中,第一控制命令为用于控制智能机器人执行第一操作的命令,目标用户为与智能机器人进行交互的对象;根据第一控制命令确定智能机器人需要执行的第一操作;响应于第一控制命令,执行第一操作。通过本发明,达到了智能机器人根据人们的命令做出响应的效果。

Description

用于智能机器人的控制方法和装置及机器人
技术领域
本发明涉及机器人领域,具体而言,涉及一种用于智能机器人的控制方法和装置及机器人。
背景技术
目前,随着人们生活质量提高和机器人技术的发展,人们对智能机器人的需求越来越多,各种功能的机器人应运而生,比如,扫地机器人,送餐机器人,陪护机器人等。但是,这些机器人只能提供特定的服务,跟人的交互量低,并且没有什么附加值,无法根据人们的需求做出相应的响应,无法使人们产生感情依赖。
现有的智能机器人大多功能单一,智能化程度低,都是偏向于服务型的,能够处理的外界信号也较少,所标榜的抓取物品等技术的实现与服务人类的要求还有很大的差距,基本上没有什么实际意义。陪护型的机器人也仅限于少量的语音和音频视频播放功能。
针对现有技术中的智能机器人无法根据人们的命令做出响应的问题,目前尚未提出有效的解决方案。
发明内容
本发明的主要目的在于提供一种用于智能机器人的控制方法和装置及机器人,以至少解决相关技术中智能机器人无法根据人们的命令做出响应问题。
为了实现上述目的,根据本发明的一个方面,提供了一种用于智能机器人的控制方法。该用于智能机器人的控制方法包括:检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,其中,第一控制命令为用于控制智能机器人执行第一操作的命令,目标用户为与智能机器人进行交互的对象;根据第一控制命令确定智能机器人需要执行的第一操作;响应于第一控制命令,执行第一操作。
进一步地,检测目标用户的行为并生成与目标用户的行为对应的第一控制命令包括:检测目标用户的动作并生成与目标用户的动作对应的动作控制命令,根据第一控制命令确定智能机器人需要执行的第一操作包括:根据动作控制命令确定智能机器人需要执行的第一操作,响应于第一控制命令,执行第一操作包括:根据动作控制命令对智能机器人的当前状态进行切换,响应于动作控制命令,执行第一操作。
进一步地,检测目标用户的动作并生成与目标用户的动作对应的动作控制命令包括:检测目标用户在智能机器人上产生的压力信号,得到压力数据,根据动作控制命令确定智能机器人需要执行的第一操作包括:根据压力数据确定智能机器人需要执行的第一操作。
进一步地,在根据第一控制命令确定智能机器人需要执行的第一操作之前,该用于智能机器人的控制方法还包括:检测智能机器人与周围物体之间产生的距离信号,得到距离数据,根据第一控制命令确定智能机器人需要执行的第一操作包括:根据距离数据确定智能机器人需要执行的第一操作。
进一步地,检测目标用户的行为并生成与目标用户的行为对应的第一控制命令包括:检测目标用户发出的语音并生成与目标用户发出的语音对应的语音控制命令,根据第一控制命令确定智能机器人需要执行的第一操作包括:根据语音控制命令确定智能机器人需要执行的第一操作,响应于第一控制命令,执行第一操作包括:响应于语音控制命令,执行第一操作。
进一步地,根据语音控制命令确定智能机器人需要执行的第一操作包括:获取语音控制命令中的图像采集命令;根据图像采集命令采集目标图像;根据图像处理算法对目标图像执行处理,得到处理结果;根据处理结果确定智能机器人需要执行的第一操作。
进一步地,响应于语音控制命令,执行第一操作包括:根据语音控制命令选择待播放的音频文件;对音频文件执行播放。
进一步地,在响应于第一控制命令,执行第一操作之后,该用于智能机器人的控制方法还包括:检测目标用户的行为并生成与目标用户的行为对应的第二控制命令,其中,第二控制命令为用于控制智能机器人执行第二操作的命令;判断第二控制命令与第一控制命令是否存在变化;如果判断出第二控制命令与第一控制命令存在变化,根据第一控制命令和第二控制命令调整第一操作,得到第二操作,响应于第二控制命令,执行第二操作;以及如果判断出第二控制命令与第一控制命令不存在变化,响应于第二控制命令执行第一操作。
为了实现上述目的,根据本发明的另一方面,还提供了一种用于智能机器人的控制装置。该用于智能机器人的控制装置包括:检测单元,用于检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,其中,第一控制命令为用于控制智能机器人执行第一操作的命令,目标用户为与智能机器人进行交互的对象;确定单元,用于根据第一控制命令确定智能机器人需要执行的第一操作;执行单元,用于响应于第一控制命令,执行第一操作。
进一步地,检测单元用于检测目标用户的动作并生成与目标用户的动作对应的动作控制命令,确定单元用于根据动作控制命令确定智能机器人需要执行的第一操作,执行单元用于根据动作控制命令对智能机器人的当前状态进行切换,响应于动作控制命令,执行第一操作。
进一步地,检测单元用于检测目标用户在智能机器人上产生的压力信号,得到压力数据,确定单元用于根据压力数据确定智能机器人需要执行的第一操作。
进一步地,检测单元还用于在根据第一控制命令确定智能机器人需要执行的第一操作之前,检测智能机器人与周围物体之间产生的距离信号,得到距离数据,确定单元还用于根据距离数据确定智能机器人需要执行的第一操作。
进一步地,检测单元用于检测目标用户发出的语音并生成与目标用户发出的语音对应的语音控制命令,确定单元用于根据语音控制命令确定智能机器人需要执行的第一操作,执行单元用于响应于语音控制命令,执行第一操作。
进一步地,获取模块,用于获取语音控制命令中的图像采集命令;采集模块,用于根据图像采集命令采集目标图像;处理模块,用于根据图像处理算法对目标图像执行处理,得到处理结果;确定模块,用于根据处理结果确定智能机器人需要执行的第一操作。
进一步地,执行单元包括:选择模块,用于根据语音控制命令选择待播放的音频文件;播放模块,用于对音频文件执行播放。
通过本发明,采用检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,其中,第一控制命令为用于控制智能机器人执行第一操作的命令,目标用户为与智能机器人进行交互的对象;根据第一控制命令确定智能机器人需要执行的第一操作;以及响应于第一控制命令,执行第一操作,解决了智能机器人无法根据人们的命令做出响应的问题,进而达到了智能机器人根据人们的命令做出响应的效果。
附图说明
构成本申请的一部分的附图用来提供对本发明的进一步理解,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明第一实施例的用于智能机器人的控制方法的流程图;
图2是根据本发明第二实施例的用于智能机器人的控制方法的流程图;
图3是根据本发明第三实施例的用于智能机器人的控制方法的流程图;
图4是根据本发明第一实施例的用于智能机器人的控制装置的示意图;
图5是根据本发明第二实施例的用于智能机器人的控制装置的示意图;以及
图6是根据本发明第三实施例的用于智能机器人的控制装置的示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例提供了一种用于智能机器人的控制方法。
图1是根据本发明第一实施例的用于智能机器人的控制方法的流程图。如图1所示,该用于智能机器人的控制方法包括以下步骤:
步骤S101,检测目标用户的行为并生成与目标用户的行为对应的第一控制命令。
目标用户为与智能机器人进行交互的对象,目标用户可以与智能机器人进行语音上的交互或者动作上的交互等。比如,目标用户呼唤智能机器人,智能机器人根据目标用户的语音朝向目标用户的方向运动,再比如,目标用户抚摸或者拍打机器人,机器人根据目标用户的动作做出回应。在目标用户与智能机器人交互时,对目标用户的行为进行检测,确定目标用户是否发出语音,或者是否有针对于智能机器人的行为动作。当检测到目标用户的行为时,生成与目标用户的行为对应的第一控制命令,该第一控制命令为用于控制智能机器人执行第一操作的命令,为实现目标用户的需求的命令,比如,目标用户对智能机器人发出语音,生成与目标用户发出的语音对应的第一控制命令,以控制智能机器人执行第一操作,满足目标用户的需求,目标用户对智能机器人施加动作,生成与目标用户施加的动作对应的第一控制命令,以控制智能机器人执行第一操作,满足目标用户的需求。
可选地,当目标用户的行为为发出语音时,通过语音模块接收语音数据,再将该语音数据通过UART串口传输至主控模块,主控模块对语音数据进一步处理;当目标用户的行为为发出动作时,采集目标用户的动作产生的动作数据,将该动作数据通过UART传输至主控模块,主控模块对动作数据进一步处理。
可选地,采集传感信号生成第一控制命令,可以同时采集多路传感信号生成该第一控制命令。
检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,实现了智能机器人接收外界信息。
步骤S102,根据第一控制命令确定智能机器人需要执行的第一操作。
在检测目标用户的行为并生成与目标用户的行为对应的第一控制命令之后,根据第一控制命令确定智能机器人需要执行的第一操作,也即,根据第一控制命令进行决策,进而确定智能机器人需要执行什么第一操作,比如,执行图像采集的第一操作,执行状态切换的第一操作,执行播放音频文件的第一操作,执行连续走动的第一操作,执行与运动控制模块进行通讯的第一操作等。该智能机器人可以为家庭智能机器人。
可选地,主控模块对第一控制命令进行处理,得到处理结果,比如,当第一控制命令中有图像采集命令时,对第一控制命令按照图像采集算法进行处理,得到处理结果,当第一控制命令为人们对智能机器人进行抚摸或者拍打产生的压力信号时,或者为智能机器人在行走过程中与周围物体的距离信号时,通过UART串口采集数据并传输至主控模块,主控模块对该数据进行转化,得到处理结果。根据处理结果确定家庭能够智能机器人需要执行的第一操作。
根据第一控制命令确定智能机器人需要执行的第一操作实现了智能机器人在接收外界信息之后,根据外界信息做出合理的决策。
步骤S103,响应于第一控制命令,执行第一操作。
在根据第一控制命令确定智能机器人需要执行的第一操作之后,响应于第一控制命令,执行根据第一控制命令确定的第一操作,提高了智能机器人跟目标用户的交互量,根据目标用户的需求做出相应的响应,达到了智能机器人根据人们的命令做出响应的效果。
该实施例通过检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,其中,第一控制命令为用于控制智能机器人执行第一操作的命令,目标用户为与智能机器人进行交互的对象;根据第一控制命令确定智能机器人需要执行的第一操作;响应于第一控制命令,执行第一操作,达到了智能机器人根据人们的命令做出响应的效果。
作为一种可选的实施方式,检测目标用户的行为并生成与目标用户的行为对应的第一控制命令包括:检测目标用户的动作并生成与目标用户的动作对应的动作控制命令,根据第一控制命令确定智能机器人需要执行的第一操作包括:根据动作控制命令确定智能机器人需要执行的第一操作,响应于第一控制命令,执行第一操作包括:根据动作控制命令对智能机器人的当前状态进行切换,响应于动作控制命令,执行第一操作。
检测目标用户的行为,可以检测目标用户的动作,比如,检测目标用户抚摸智能机器人或者拍打智能机器人的动作。生成与目标用户的动作对应的动作控制命令可以为当检测到目标用户抚摸智能机器人时,生成用于发出开心的叫声和舒服动作的动作控制命令,根据该动作控制命令确定智能机器人需要执行发出开心的叫声和舒服的动作的第一操作,根据该动作控制命令对智能机器人的当前状态进行切换,响应于该动作控制命令发出开心的叫声和舒服的动作的第一操作。在根据该动作控制命令对智能机器人的当前状态进行切换之后,还可以响应于第一控制命令执行连续走动的第一操作,或者在完成一个动作之后与运动控制模块进行通讯。
作为一种可选的实施方式,检测目标用户的动作并生成与目标用户的动作对应的动作控制命令包括:检测目标用户在智能机器人上产生的压力信号,得到压力数据,根据动作控制命令确定智能机器人需要执行的第一操作包括:根据压力数据确定智能机器人需要执行的第一操作。
目标用户在智能机器人上施加压力,产生压力信号,力敏模块会根据压力信号判断力度的大小从而产生不同的压力数据,比如,目标用户对智能机器人进行拍打,抚摸等动作时具有不同的力度,力敏模块会根据不同力度的动作检测出不同的压力数据。主控模块根据力敏模块检测到的压力数据确定目标用户对智能机器人进行拍打还是抚摸等动作,从而决策出智能机器人需要执行的第一操作。比如,当目标用户抚摸智能机器人时,力敏模块根据力度的大小产生压力数据,智能机器人会决策发出开心的叫声和舒服的动作,使人们感受到智能机器人的智能化,从而使人们对智能机器人产生喜欢和依赖的感情。
作为一种可选的实施方式,在根据第一控制命令确定智能机器人需要执行的第一操作之前,检测智能机器人与周围物体之间产生的距离信号,得到距离数据,根据第一控制命令确定智能机器人需要执行的第一操作包括:根据距离数据确定智能机器人需要执行的第一操作。
在根据第一控制命令确定智能机器人需要执行的第一操作之前,检测智能机器人与周围物体之间产生的距离信号,得到距离数据,可以通过测距模块测量距离信号得到距离数据。机器人在行走的过程中与周围物体之间产生距离信号,机器人根据该距离信号判断周围的障碍物进而确定避开障碍物的避障行为。可选地,目标用户呼唤智能机器人,智能机器人会朝着目标用户的方向前进,并且根据距离信号的变化判断障碍物的远近进而进行避障行为等操作。
作为一种可选的实施方式,检测目标用户的行为并生成与目标用户的行为对应的第一控制命令包括:检测目标用户发出的语音并生成与目标用户发出的语音对应的语音控制命令,根据第一控制命令确定智能机器人需要执行的第一操作包括:根据语音控制命令确定智能机器人需要执行的第一操作,响应于第一控制命令,执行第一操作包括:响应于语音控制命令,执行第一操作。
检测目标用户的行为可以为检测目标用户发出的语音,目标用户发出的语音可以为命令智能机器人执行第一操作的命令。根据语音控制命令确定智能机器人需要执行的第一操作,比如,目标用户呼唤智能机器人,检测目标用户呼唤智能机器人的语音,生成与目标用户发出的语音对应的语音控制命令,该语音控制命令可以为控制智能机器人朝向目标用户的方向前进的第一控制命令,智能机器人响应于该语音控制命令,执行朝向目标用户的方向前进的第一操作,从而满足目标用户的需求,提高了目标用户和智能机器人之间的交互量,使家庭智能机器人接收外界信息,并做出合适的决策,响应于目标用户的需求,使人们产生感情寄托。
作为一种可选的实施方式,根据语音控制命令确定智能机器人需要执行的第一操作包括:根据语音控制命令确定智能机器人需要执行的第一操作包括:获取语音控制命令中的图像采集命令;根据图像采集命令采集目标图像;根据图像处理算法对目标图像执行处理,得到处理结果;以及根据处理结果确定智能机器人需要执行的第一操作。
判断语音控制命令中是否有用于图像采集的图像采集命令;如果判断出语音控制中有图像采集命令,获取语音控制命令中的图像采集命令,可以调用图像采集模块采集目标图像,比如,采集人脸图像,物体图像,动态图像等,将采集的图像数据通过USB接口传入主控模块,经过图像处理算法得到处理结果,比如,得到人脸图像的处理结果,物体图像的处理结果,动态追踪图像的处理结果等,将处理结果放入主控决策队列中,根据处理结果确定智能机器人需要执行的第一操作,其中,图像采集模块可以为摄像头。可选地,如果判断出语音控制命令中没有用于图像采集的图像采集命令,则不调用图像采集模块采集图像。
作为一种可选的实施方式,响应于语音控制命令,执行第一操作包括:根据语音控制命令选择待播放的音频文件;对音频文件执行播放。
根据语音控制命令选择待播放的音频文件,对音频文件执行播放的第一操作在音频播放线程中完成。
作为一种可选的实施方式,在响应于第一控制命令,执行第一操作之后,检测目标用户的行为并生成与目标用户的行为对应的第二控制命令,其中,第二控制命令为用于控制智能机器人执行第二操作的命令;判断第二控制命令与第一控制命令是否存在变化;如果判断出第二控制命令与第一控制命令存在变化,根据第一控制命令和第二控制命令调整第一操作,得到第二操作,响应于第二控制命令,执行第二操作;以及如果判断出第二控制命令与第一控制命令不存在变化,响应于第二控制命令执行第一操作。
在该实施例中,不断检测机器人与目标用户的交互行为,并生成控制指令。在根据第一控制命令确定智能机器人需要执行的第一操作之后,检测当前机器人与目标用户的交互行为并生成第二控制命令,主控模块可以判断第二控制命令与第一控制命令是否存在变化,继而进行调整。如果判断出第二控制命令与第一控制命令存在变化,根据第一控制命令和第二控制命令调整第一操作,得到第二操作,响应于第二控制命令,执行第二操作,如果判断出第二控制命令与第一控制命令不存在变化,响应于第二控制命令,继续执行第一操作,从而实现根据第二控制命令的变化在决策中及时进行调整,做出播放音频或者不同的动作来响应于人们的不同操作,使人们对智能机器人感觉生动而不乏味。判断第一控制命令是否发生变化;如果判断出第一控制命令发生变化,调整第一控制命令,得到调整第一控制命令;根据调整第一控制命令进而确定智能机器人需要执行的第一操作,从而达到了智能机器人根据人们的命令做出响应的效果。
下面结合优选的实施例对本发明的技术方案进行说明。
图2是根据本发明第二实施例的用于智能机器人的控制方法的流程图。如图2所示,该用于智能机器人的控制方法包括以下步骤:
步骤S201,生成第一控制命令。
检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,采集与第一控制命令对应的控制数据,比如,运动控制数据,语音数据,图像数据,压力数据,距离数据,音频数据等,可以通过运动控制模块采集运动控制数据,通过语音模块采集语音数据,通过图像采集模块采集图像数据,通过力敏模块采集压力数据,通过测距模块采集距离数据,通过音频模块采集音频数据。运动控制模块,图像采集模块,语音模块,力敏模块,测距模块,音频模块通过UART接口和主控模块通信,音频播放模块通过audio接口与主控模块通信,图像采集模块通过USB接口与主控模块连接通信,主控模块通过UART和USB接口接收各类传感器采集的控制数据,根据控制数据生成第一控制命令。
步骤S202,对第一控制命令执行处理,得到处理结果。
在生成第一控制命令之后,对第一控制命令执行处理,比如,对通过图像采集模块采集的图像数据按照图像处理算法进行处理,得到处理结果,对通过力敏模块采集的压力数据进行数据转换,得到处理结果,将处理结果放入智能机器人的决策队列中。
步骤S203,确定智能机器人需要执行的第一操作。
在采集控制数据之后,可以直接通过控制数据确定智能机器人需要执行的第一操作,也可以在对控制数据执行处理,得到处理结果之后,确定智能机器人需要执行的第一操作。
步骤S204,响应于第一控制命令,执行第一操作。
在确定智能机器人需要执行的第一操作之后,响应于控制数据对应的第一控制命令,执行第一操作。
该实施例于提出一种智能机器人的决策模型,使机器人能够接收多种外界信息,并对多种外界信息进行处理、决策以做出合适的响应,使人们对机器人的感觉不再那么死板。该决策模型包括主控模块、运动控制模块、语音模块、图像采集模块、力敏模块、测距模块、音频播放模块和各类传感器的接口。语音模块、运动控制模块、力敏模块和测距模块通过UART接口与主控模块连接通信;音频播放模块通过audio接口与主控模块连接通信;图像采集模块通过USB接口与主控模块连接通信。主控模块通过UART和USB接口接收各类传感器采集的控制数据,然后控制数据进行处理,得到处理结果,再对处理结果进行决策,输出相应的动作和声音,达到了智能机器人根据人们的命令做出响应的效果。
图3是根据本发明第三实施例的用于智能机器人的控制方法的流程图。如图3所示,该用于智能机器人的控制方法包括以下步骤:
步骤S301,检测目标用户的行为并生成与目标用户的行为对应的第一控制命令。
检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,可以通过UART串口接收语音数据、压力数据、距离数据等,生成与目标用户的行为对应的第一控制命令。
步骤S302,根据第一控制命令确定智能机器人需要执行的第一操作。
在检测目标用户的行为并生成与目标用户的行为对应的第一控制命令之后,进行决策,通过第一控制命令确定智能机器人需要执行的第一操作。
步骤S303,图像采集。
在根据第一控制命令确定智能机器人需要执行的第一操作之后,当第一控制命令中涉及到图像采集命令时,启动图像采集功能,可以调用摄像头采集图像。图像采集在图像采集处理线程中进行处理。
步骤S304,对图像识别。
在图像采集之后,可以进行对图像进行识别。可选地,可以识别人脸,物体等。对图像识别在图像采集处理线程中进行处理。
步骤S305,根据第一控制命令选择播放音频文件。
在根据第一控制命令确定智能机器人需要执行的第一操作之后,当第一控制命令中涉及到语音命令时,根据第一控制命令选择播放音频文件。根据第一控制命令选择播放音频文件在音频播放线程中进行处理。
步骤S306,调用状态机实现状态切换。
在根据第一控制命令确定智能机器人需要执行的第一操作之后,调用状态机实现状态切换,比如,智能机器人的扭头,弯腰,跑步等状态切换等。
步骤S307,组合单步,实现连续走动。
在调用状态机实现状态切换之后,可以在走步状态机中组合单步,实现智能机器人连续走动。
步骤S308,完成一个动作,与运动控制模块执行通讯。
在调用状态机实现状态切换之后,完成一个动作,可以与运动控制模块执行通讯。与运动控制模块执行通讯在动作状态机中进行。
步骤S309,延时。
在调用状态机实现状态切换之后,进行延时,延时时间为毫秒级别。在延时时间到达之后,重新执行步骤S301,检测目标用户的行为并生成与目标用户的行为对应的第一控制命令。
目标用户对智能机器人的命令由语音模块接收,通过UART串口传入主控模块。如果命令中涉及到图像采集则会调用摄像头采集图像通过USB接口传入主控模块,经过图像处理算法得到处理结果放入主控决策队列中。人们对智能机器人抚摸或者拍打而产生的压力信号以及智能机器人在行走的过程中对周围物体的距离信号通过UART串口将采集到的数据传入主控模块,经过数据转换将转换结果放入决策队列中。主控模块根据当前输入数据的变化在决策中及时调整,做出播放音频或者不同的动作来响应人们的不同第一操作,使人们感觉到生动不会乏味,比如,人们轻轻地抚摸机器人,力敏模块会根据力度的大小产生不同的压力值,机器人会决策发出开心的叫声和舒服的动作,人们呼唤智能机器人,机器人会朝着人们的方向前进,并且根据距离信号的变化判断障碍物进行避障行为等,使人们感受到机器人智能而不死板,从而产生喜欢和依赖的感情,达到了智能机器人根据人们的命令做出响应的效果。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
本发明实施例还提供了一种用于智能机器人的控制装置。需要说明的是,该实施例的用于智能机器人的控制装置可以用于执行本发明实施例的用于智能机器人的控制方法。
图4是根据本发明第一实施例的用于智能机器人的控制装置的示意图。如图4所示,该用于智能机器人的控制装置包括:检测单元10,确定单元20和执行单元30。
检测单元10,用于检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,其中,第一控制命令为用于控制智能机器人执行第一操作的命令,目标用户为与智能机器人进行交互的对象。
确定单元20,用于根据第一控制命令确定智能机器人需要执行的第一操作。
执行单元30,用于响应于第一控制命令,执行第一操作。
可选地,检测单元10用于检测目标用户的动作并生成与目标用户的动作对应的动作控制命令,确定单元20用于根据动作控制命令确定智能机器人需要执行的第一操作,执行单元30用于根据动作控制命令对智能机器人的当前状态进行切换,响应于动作控制命令,执行第一操作。
可选地,检测单元10用于检测目标用户在智能机器人上产生的压力数据,确定单元20用于根据压力数据确定智能机器人需要执行的第一操作。
可选地,检测单元10还用于在根据第一控制命令确定智能机器人需要执行的第一操作之前,检测智能机器人与周围物体之间产生的距离信号,得到距离数据,确定单元20还用于根据距离数据确定智能机器人需要执行的第一操作。
可选地,检测单元10用于检测目标用户发出的语音并生成与目标用户发出的语音对应的语音控制命令,确定单元20用于根据语音控制命令确定智能机器人需要执行的第一操作,执行单元30用于响应于语音控制命令,执行第一操作。
图5是根据本发明第二实施例的用于智能机器人的控制装置的示意图。如图5所示,该用于智能机器人的控制装置包括:检测单元10,确定单元20和执行单元30。其中,确定单元20包括:获取模块21,采集模块22,处理模块23和确定模块24。
该实施例的检测单元10,确定单元20和执行单元30与本发明第一实施例的用于智能机器人的控制装置中的作用相同,此处不再赘述。
获取模块21,用于获取语音第一控制命令中的图像采集命令。
采集模块22,用于根据图像采集命令采集目标图像采集目标图像。
处理模块23,用于根据图像处理算法对目标图像执行处理,得到处理结果。
确定模块24,用于根据处理结果确定智能机器人需要执行的第一操作。
图6是根据本发明第三实施例的用于智能机器人的控制装置的示意图。如图6所示,该用于智能机器人的控制装置包括:检测单元10,确定单元20和执行单元30。其中,执行单元30包括:选择模块31和播放模块32。
该实施例的检测单元10,确定单元20和执行单元30与本发明第一实施例的用于智能机器人的控制装置中的作用相同,此处不再赘述。
选择模块31,用于根据语音控制命令选择待播放的音频文件。
播放模块32,用于对音频文件执行播放。
需要说明的是,该播放模块32可以用于执行上述用于智能机器人的控制方法实施例中的音频播放模块所执行的方法。
本发明实施例通过检测单元10检测目标用户的行为并生成与目标用户的行为对应的第一控制命令,第一控制命令为用于控制智能机器人执行第一操作的命令,目标用户为与智能机器人进行交互的对象,通过确定单元20根据第一控制命令确定智能机器人需要执行的第一操作,通过执行单元30响应于第一控制命令,执行第一操作,达到了智能机器人根据人们的命令做出响应的效果。
本发明是实施例还提供了一种机器人,包括本发明实施例的用于智能机器人的控制装置。
本发明实施例可以应用于其他领域机器人中的应用,与外界的智能设备的通信和控制可以扩展为其它的带有通讯模块的执行器或者执行装置。
本发明实施例的决策模型可以同时采集多路传感器信号,可以与人们交互,控制执行机构积极做出合适的响应,该控制决策模型可以适用于带有其它传感器设备的机器人、智能家居或者执行装置,该控制决策模型还可以外加其它传感器进行控制决策,达到了智能机器人根据人们的命令做出响应的效果。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (16)

1.一种用于智能机器人的控制方法,其特征在于,包括:
检测目标用户的行为并生成与所述目标用户的行为对应的第一控制命令,其中,所述第一控制命令为用于控制智能机器人执行第一操作的命令,所述目标用户为与所述智能机器人进行交互的对象;
根据所述第一控制命令确定所述智能机器人需要执行的第一操作;以及
响应于所述第一控制命令,执行所述第一操作;
其中,根据所述第一控制命令确定所述智能机器人需要执行的第一操作,包括:对所述第一控制命令进行与所述第一控制命令对应的处理,得到处理结果;将所述处理结果存储至所述智能机器人的决策队列中,并根据所述处理结果确定所述第一操作;
其中,响应于所述第一控制命令,执行所述第一操作,包括:响应于状态切换的命令,调用状态机实现所述状态切换,其中,所述状态切换包括所述智能机器人的扭头、弯腰、跑步中任意两者之间的状态切换;
所述方法还包括:在调用所述状态机实现所述状态切换之后,进行延时,在延时时间到达之后,再次检测所述目标用户的行为并生成与所述目标用户的行为对应的所述第一控制命令。
2.根据权利要求1所述的方法,其特征在于,
检测所述目标用户的行为并生成与所述目标用户的行为对应的第一控制命令包括:检测所述目标用户的动作并生成与所述目标用户的动作对应的动作控制命令,
根据所述第一控制命令确定所述智能机器人需要执行的第一操作包括:根据所述动作控制命令确定所述智能机器人需要执行的第一操作,
响应于所述第一控制命令,执行所述第一操作包括:根据所述动作控制命令对所述智能机器人的当前状态进行切换,响应于所述动作控制命令,执行所述第一操作。
3.根据权利要求2所述的方法,其特征在于,
检测所述目标用户的动作并生成与所述目标用户的动作对应的动作控制命令包括:检测所述目标用户在所述智能机器人上产生的压力信号,得到压力数据,
根据所述动作控制命令确定所述智能机器人需要执行的第一操作包括:根据所述压力数据确定所述智能机器人需要执行的第一操作。
4.根据权利要求1所述的方法,其特征在于,
在根据所述第一控制命令确定所述智能机器人需要执行的第一操作之前,所述方法还包括:检测所述智能机器人与周围物体之间产生的距离信号,得到距离数据,
根据所述第一控制命令确定所述智能机器人需要执行的第一操作包括:根据所述距离数据确定所述智能机器人需要执行的第一操作。
5.根据权利要求1所述的方法,其特征在于,
检测所述目标用户的行为并生成与所述目标用户的行为对应的第一控制命令包括:检测所述目标用户发出的语音并生成与所述目标用户发出的语音对应的语音控制命令,
根据所述第一控制命令确定所述智能机器人需要执行的第一操作包括:根据所述语音控制命令确定所述智能机器人需要执行的第一操作,
响应于所述第一控制命令,执行所述第一操作包括:响应于所述语音控制命令,执行所述第一操作。
6.根据权利要求5所述的方法,其特征在于,根据所述语音控制命令确定所述智能机器人需要执行的第一操作包括:
获取所述语音控制命令中的图像采集命令;
根据所述图像采集命令采集目标图像;
根据图像处理算法对所述目标图像执行处理,得到处理结果;以及
根据所述处理结果确定所述智能机器人需要执行的第一操作。
7.根据权利要求5所述的方法,其特征在于,响应于所述语音控制命令,执行所述第一操作包括:
根据所述语音控制命令选择待播放的音频文件;以及
对所述音频文件执行播放。
8.根据权利要求1所述的方法,其特征在于,在响应于所述第一控制命令,执行所述第一操作之后,所述方法还包括:
检测所述目标用户的行为并生成与所述目标用户的行为对应的第二控制命令,其中,所述第二控制命令为用于控制所述智能机器人执行第二操作的命令;
判断所述第二控制命令与所述第一控制命令是否存在变化;
如果判断出所述第二控制命令与所述第一控制命令存在变化,根据所述第一控制命令和所述第二控制命令调整所述第一操作,得到第二操作,响应于所述第二控制命令,执行所述第二操作;以及
如果判断出所述第二控制命令与所述第一控制命令不存在变化,响应于所述第二控制命令执行所述第一操作。
9.一种用于智能机器人的控制装置,其特征在于,包括:
检测单元,用于检测目标用户的行为并生成与所述目标用户的行为对应的第一控制命令,其中,所述第一控制命令为用于控制智能机器人执行第一操作的命令,所述目标用户为与所述智能机器人进行交互的对象;
确定单元,用于根据所述第一控制命令确定所述智能机器人需要执行的第一操作;以及
执行单元,用于响应于所述第一控制命令,执行所述第一操作;
所述确定单元用于通过以下步骤来根据所述第一控制命令确定所述智能机器人需要执行的第一操作:对所述第一控制命令进行与所述第一控制命令对应的处理,得到处理结果;将所述处理结果存储至所述智能机器人的决策队列中,并根据所述处理结果确定所述第一操作;
其中,所述装置还用于通过以下步骤来响应于所述第一控制命令,执行所述第一操作:响应于状态切换的命令,调用状态机实现所述状态切换,其中,所述状态切换包括所述智能机器人的扭头、弯腰、跑步中任意两者之间的状态切换;
所述装置还用于在调用所述状态机实现所述状态切换之后,进行延时,在延时时间到达之后,再次检测所述目标用户的行为并生成与所述目标用户的行为对应的所述第一控制命令。
10.根据权利要求9所述的装置,其特征在于,
所述检测单元用于检测所述目标用户的动作并生成与所述目标用户的动作对应的动作控制命令,
所述确定单元用于根据所述动作控制命令确定所述智能机器人需要执行的第一操作,
所述执行单元用于根据所述动作控制命令对所述智能机器人的当前状态进行切换,响应于所述动作控制命令,执行所述第一操作。
11.根据权利要求10所述的装置,其特征在于,
所述检测单元用于检测所述目标用户在所述智能机器人上产生的压力信号,得到压力数据,
所述确定单元用于根据所述压力数据确定所述智能机器人需要执行的第一操作。
12.根据权利要求9所述的装置,其特征在于,
所述检测单元还用于在根据所述第一控制命令确定所述智能机器人需要执行的第一操作之前,检测所述智能机器人与周围物体之间产生的距离信号,得到距离数据,
所述确定单元还用于根据所述距离数据确定所述智能机器人需要执行的第一操作。
13.根据权利要求9所述的装置,其特征在于,
所述检测单元用于检测所述目标用户发出的语音并生成与所述目标用户发出的语音对应的语音控制命令,
所述确定单元用于根据所述语音控制命令确定所述智能机器人需要执行的第一操作,
所述执行单元用于响应于所述语音控制命令,执行所述第一操作。
14.根据权利要求13所述的装置,其特征在于,所述确定单元包括:
获取模块,用于获取所述语音控制命令中的图像采集命令;
采集模块,用于根据所述图像采集命令采集目标图像;
处理模块,用于根据图像处理算法对所述目标图像执行处理,得到处理结果;以及
确定模块,用于根据所述处理结果确定所述智能机器人需要执行的第一操作。
15.根据权利要求13所述的装置,其特征在于,所述执行单元包括:
选择模块,用于根据所述语音控制命令选择待播放的音频文件;以及
播放模块,用于对所述音频文件执行播放。
16.一种机器人,其特征在于,包括权利要求9至15中任一项所述的用于智能机器人的控制装置。
CN201610643386.7A 2016-08-08 2016-08-08 用于智能机器人的控制方法和装置及机器人 Active CN107696028B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610643386.7A CN107696028B (zh) 2016-08-08 2016-08-08 用于智能机器人的控制方法和装置及机器人
PCT/CN2017/091972 WO2018028360A1 (zh) 2016-08-08 2017-07-06 用于智能机器人的控制方法和装置及机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610643386.7A CN107696028B (zh) 2016-08-08 2016-08-08 用于智能机器人的控制方法和装置及机器人

Publications (2)

Publication Number Publication Date
CN107696028A CN107696028A (zh) 2018-02-16
CN107696028B true CN107696028B (zh) 2021-11-02

Family

ID=61162670

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610643386.7A Active CN107696028B (zh) 2016-08-08 2016-08-08 用于智能机器人的控制方法和装置及机器人

Country Status (2)

Country Link
CN (1) CN107696028B (zh)
WO (1) WO2018028360A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108687768B (zh) * 2018-04-02 2022-08-05 深圳臻迪信息技术有限公司 一种涉水机器人以及涉水机器人信息输入方法
CN110575099B (zh) * 2018-06-07 2021-07-27 科沃斯机器人股份有限公司 定点清扫方法、扫地机器人及存储介质
CN110576433B (zh) * 2018-06-08 2021-05-18 香港商女娲创造股份有限公司 机器人动作生成方法
CN113766285A (zh) * 2020-06-02 2021-12-07 云米互联科技(广东)有限公司 音量控制方法、电视机和存储介质
CN114327056A (zh) * 2021-12-23 2022-04-12 新疆爱华盈通信息技术有限公司 目标对象控制方法、装置和存储介质
CN117435058B (zh) * 2023-12-21 2024-03-29 北京赛凡策划有限公司 一种智慧展厅的交互控制方法和系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104440925A (zh) * 2014-11-27 2015-03-25 国家康复辅具研究中心 一种宠物型陪护机器人及系统
CN104965426A (zh) * 2015-06-24 2015-10-07 百度在线网络技术(北京)有限公司 基于人工智能的智能机器人控制系统、方法和装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1146491C (zh) * 1998-06-23 2004-04-21 索尼公司 机器人装置及信息处理系统
JP4131392B2 (ja) * 2003-01-28 2008-08-13 ソニー株式会社 ロボット装置およびロボット制御方法、記録媒体、並びにプログラム
KR100701237B1 (ko) * 2005-08-12 2007-03-29 (주)테크노전자 인터넷 기반의 감성로봇
CN102323817A (zh) * 2011-06-07 2012-01-18 上海大学 一种服务机器人控制平台系统及其多模式智能交互与智能行为的实现方法
CN102500113A (zh) * 2011-11-11 2012-06-20 山东科技大学 基于智能手机交互的综合型迎宾机器人
CN205201537U (zh) * 2015-11-04 2016-05-04 上海拓趣信息技术有限公司 陪护机器人
CN205384783U (zh) * 2015-12-18 2016-07-13 深圳市中科睿成智能科技有限公司 一种用于互动学习的智能机器人
CN105785813A (zh) * 2016-03-18 2016-07-20 北京光年无限科技有限公司 用于智能机器人系统多模态输出的方法及装置
CN105787471B (zh) * 2016-03-25 2019-05-03 南京邮电大学 一种应用于助老助残移动服务机器人控制的手势识别方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104440925A (zh) * 2014-11-27 2015-03-25 国家康复辅具研究中心 一种宠物型陪护机器人及系统
CN104965426A (zh) * 2015-06-24 2015-10-07 百度在线网络技术(北京)有限公司 基于人工智能的智能机器人控制系统、方法和装置

Also Published As

Publication number Publication date
WO2018028360A1 (zh) 2018-02-15
CN107696028A (zh) 2018-02-16

Similar Documents

Publication Publication Date Title
CN107696028B (zh) 用于智能机器人的控制方法和装置及机器人
CN107135443B (zh) 一种信号处理方法及电子设备
CN107813306B (zh) 机器人及其动作控制方法和装置
CN108231079B (zh) 用于控制电子设备的方法、装置、设备以及计算机可读存储介质
CN106910500B (zh) 对带麦克风阵列的设备进行语音控制的方法及设备
CN102932212A (zh) 一种基于多通道交互方式的智能家居控制系统
US20200218356A1 (en) Systems and methods for providing dynamic haptic playback for an augmented or virtual reality environments
CN104881122A (zh) 一种体感交互系统激活方法、体感交互方法及系统
CN110166868B (zh) 一种与无线耳机通信的充电盒及充电系统
CN101362334A (zh) 一种智能机器人及其运作方法
CN105786245B (zh) 一种触摸屏操作控制方法和装置
CN107133368B (zh) 人机交互方法、系统及机器人
KR20200050235A (ko) 전자 장치 및 그의 지능형 인터랙션 방법
CN110201387A (zh) 对象控制方法和装置、存储介质及电子装置
US20210216143A1 (en) Method for capturing haptic content in multiple communication devices
CN109584878A (zh) 一种语音唤醒方法及系统
CN109640224A (zh) 一种拾音方法及装置
CN104915003A (zh) 一种体感控制参数调整的方法、体感交互系统及电子设备
CN104898839A (zh) 一种终端设备及其控制方法
JP2021077311A (ja) ヒューマン・コンピュータ・インタラクション・システム及びヒューマン・コンピュータ・インタラクションの方法
CN111792465B (zh) 一种电梯控制系统及方法
CN110691016B (zh) 一种基于音频设备实现的交互方法及音频设备
CN112882035A (zh) 一种检测方法、设备以及存储介质
CN112699731A (zh) 基于人体行为识别的空调音乐智能播放方法及装置、空调器
KR20190002069A (ko) 이어셋을 이용한 통역기능 제공 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20211018

Address after: 221400 No.09, south side of 311 National Road, Shuangtang industrial cluster, Xinyi City, Xuzhou City, Jiangsu Province

Applicant after: Xinyi avatar Intelligent Technology Co., Ltd

Address before: 518000 Guangdong, Shenzhen, Nanshan District, Nanhai Road, West Guangxi Temple Road North Sunshine Huayi Building 1 15D-02F

Applicant before: SHEN ZHEN KUANG-CHI HEZHONG TECHNOLOGY Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant