CN111633686B - 机器人的安全防护方法、装置与机器人 - Google Patents

机器人的安全防护方法、装置与机器人 Download PDF

Info

Publication number
CN111633686B
CN111633686B CN202010425990.9A CN202010425990A CN111633686B CN 111633686 B CN111633686 B CN 111633686B CN 202010425990 A CN202010425990 A CN 202010425990A CN 111633686 B CN111633686 B CN 111633686B
Authority
CN
China
Prior art keywords
motor
overload
current
motors
robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010425990.9A
Other languages
English (en)
Other versions
CN111633686A (zh
Inventor
戴正晨
许春晖
胡文
杨中欣
陶志东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202010425990.9A priority Critical patent/CN111633686B/zh
Publication of CN111633686A publication Critical patent/CN111633686A/zh
Priority to PCT/CN2021/082618 priority patent/WO2021232933A1/zh
Application granted granted Critical
Publication of CN111633686B publication Critical patent/CN111633686B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00—Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00—Manipulators not otherwise provided for
    • B25J11/0005—Manipulators having means for high-level communication with users, e.g. speech generator, face recognition means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00—Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/0095—Means or methods for testing manipulators
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00—Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/06—Safety devices

Abstract

本申请提供一种机器人的安全防护方法、装置与机器人，涉及机器人、人工智能技术领域，其中，该方法包括：获取机器人中各电机的运行数据；对每个电机进行过载检测，若检测到该电机过载，则根据该电机的运行数据和预先训练的该电机的过载分类模型，获取该电机的过载类别，并根据过载类别执行对应的过载安全处理策略。本申请提供的技术方案，可以应用于用来陪伴教育小孩或陪伴老人的家庭机器人等消费机器人，以及工业机器人、商用机器人和特种机器人等机器人，其可以提高所应用的机器人的拟人化表现能力。

Description

机器人的安全防护方法、装置与机器人
技术领域
本申请涉及机器人技术领域，尤其涉及一种机器人的安全防护方法、装置与机器人。
背景技术
随着计算机技术和机器人技术的发展，人与机器人交互(Human RobotInteraction，HRI)已经逐渐发展成为一个独立的研究领域。基于HRI的相关法则，机器人在人机交互过程中，应具有保护自己的能力。
目前，拥有人机交互能力的机器人多为商用机器人和消费机器人，尤其是消费机器人中用于陪伴教育小孩和陪伴老人的家庭机器人，在使用这类机器人的过程中，人类会与机器人频繁产生物理接触，比如握住机器人胳膊或抱起机器人等。在这些场景中，机器人的关节运动会被阻挡，如果是人，此时会因为感受到阻碍或过高反抗阻力而停下当前运动，并决策下一步如何处理，以保护自己。因此，如果机器人也可以拥有上述人类的反应能力，那么不仅可以保护自己，还可以使得机器人的表现更加拟人化。为了实现上述保护能力和拟人化表现能力，目前许多机器人都具有过载检测能力，通过该过载检测能力识别机器人各关节感受到的阻碍，在阻碍过大的情况下采取相关的安全处理策略。
但是，目前的机器人的过载检测能力有限，对应的安全处理策略也较为单一，因而导致机器人的拟人化表现能力有限。
发明内容
有鉴于此，本申请提供一种机器人的安全防护方法、装置与机器人，用于提高机器人的拟人化表现能力。
为了实现上述目的，第一方面，本申请实施例提供一种机器人的安全防护方法，包括：
获取机器人中各电机的运行数据；
对每个电机执行过载检测；
当检测到所述电机过载，则根据所述电机的运行数据和预先训练的所述电机的过载分类模型，获取所述电机的过载类别，并根据所述过载类别执行对应的过载安全处理策略。
本实施例提供的机器人的安全防护方法，在获取到电机的运行数据后，先对每个电机进行一阶过载检测，在检测到电机过载时，通过预先训练的过载分类模型对电机进行进一步的二阶过载检测，区分电机的过载类型，然后采用对应的过载安全处理策略，这样可以提升机器人的拟人化表现能力。
在第一方面的一种可能的实施方式中，所述对每个电机执行过载检测，包括：
对于每个电机，根据电机的速度确定电流过载阈值；
当电机的电流大于所述电流过载阈值，则确定所述电机处于预过载状态；
当所述电机处于预过载状态的持续时间超过第一预设时长，则确定所述电机过载。
上述实施方式中，基于变化的电流过载阈对电机进行一阶过载检测，可以提高一阶过载检测的准确性。
在第一方面的一种可能的实施方式中，所述根据所述电机的速度确定电流过载阈值，包括：
采用如下公式确定所述电机的电流过载阈值：
Figure BDA0002498744610000021
其中，IThres表示电流过载阈值，vMax表示所述电机的最大速度，v表示获取的所述电机的速度，ITh1表示在所述电机静止时触发过载的理想电流，ITh2表示在所述电机达到最大速度时触发过载的理想电流。
上述实施方式中，采用上述公式确定电机的电流过载阈值，可以提高确定的电流过载阈值的准确性。
在第一方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述电机的过载分类模型是基于训练样本集训练获得的，其中，所述训练样本集中包括多次外因过载对应的训练样本，每次外因过载对应的训练样本中包括在所述电机发生所述外因过载的情况下最近获取的M组电机运行数据，每组电机运行数据中包括所有电机的运行数据，M为正整数；
训练方法包括：根据每个训练样本中的各组电机运行数据提取每个训练样本的特征向量；采用各个训练样本的特征向量对待训练的单分类模型进行训练，得到所述电机的过载分类模型；
则所述根据所述电机的运行数据和预先训练的所述电机的过载分类模型，获取所述电机的过载类别，包括：
根据最近获取的M组电机运行数据提取待识别的特征向量；
将待识别的特征向量输入所述电机的过载分类模型进行识别，获取所述电机的过载类别。
通过采用单分类模型，可以降低训练复杂度。
在第一方面的一种可能的实施方式中，所述运行数据包括电机的电流和位置，所述特征向量包括每个电机的电流特征和位置特征，其中，所述电流特征包括电流的平均值、标准差和最大值中的多个，所述位置特征包括位置变化绝对值的平均值、标准差和最大值中的多个。上述特征向量中，电流和位置变化绝对值的平均值、标准差和最大值，可以较为全面的反映电机的电流和位置的整体变化情况，通过采用上述特征向量，可以提高训练的过载分类模型和获取的过载类别的准确性。
在第一方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述根据所述过载类别执行对应的过载安全处理策略，包括：
若所述过载类别为外因过载，则控制所有电机停止运动，并控制目标电机组中的所有电机处于脱机状态，所述目标电机组包括所述电机所属的串联运动链里的所有电机；
进行过载提示，并检测所述目标电机组的受力情况；
在检测到所述目标电机组未受力的情况下使能所述目标电机组中的所有电机，并控制所有电机恢复至初始位置。
通过控制所有电机停止运动，可以及时对人或物体进行保护；通过控制目标电机组中的所有电机处于脱机状态，可以使目标电机组自动活动而不至于被损坏；通过进行过载提示，可以提醒用户，并提升机器人的拟人化表现能力；通过检测所述目标电机组的受力情况，在检测到所述目标电机组未受力的情况下使能所述目标电机组中的所有电机，并控制所有电机恢复至初始位置，可以减少由于用户的继续掰动而引起二次过载的情况，节省进行二次过载检测所需的处理资源，同时可以减少过载安全处理频繁执行的情况，提升机器人的拟人化表现能力。
在第一方面的一种可能的实施方式中，在所述检测所述目标电机组的受力情况之前，所述方法还包括：
屏蔽所有电机的运动指令；
在所述控制所有电机恢复至初始位置之后，所述方法还包括：
解除对所有电机的运动指令的屏蔽。
通过屏蔽所有电机的运动指令，可以避免对机器人造成进一步伤害，并可以防止使能指令与运动指令发生冲突，从而可以提高机器人工作的稳定性。
在第一方面的一种可能的实施方式中，所述检测所述目标电机组的受力情况，包括：
对于所述目标电机组中的每个电机，根据最近获取的预设时间段内的所述电机的位置，确定所述电机的位置变化绝对值之和；
根据所述目标电机组中各电机的位置变化绝对值之和确定所述目标电机组的总位置变化量；
若所述总位置变化量大于等于预设位置阈值，则确定所述目标电机组受力；
若所述总位置变化量小于所述预设位置阈值，则确定所述目标电机组未受力。
在第一方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述根据所述过载类别执行对应的过载安全处理策略，包括：
若所述过载类别为内因过载，则记录过载信息，所述过载信息包括下列信息中的多种：所述电机的电机编号、电流、位置和过载发生时间。
通过上述内因过载安全处理过程，可以减少过多的内因过载保护对用户使用产生的影响，同时可以方便后期工程师进行回溯，优化内因过载情况。
在第一方面的一种可能的实施方式中，所述方法还包括：若所述电机在同一位置连续发生内因过载，则提示用户检查所述电机所在关节的结构是否异常。这样可以及时处理结构异常较重的情况，对机器人结构进行保护。
在第一方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述方法还包括：对于每个电机，在满足预设检测条件的情况下，若检测到所述电机的电流大于预设电流阈值，且持续时间超过第二预设时长，则执行目标安全处理策略，其中，所述预设电流阈值大于所述电机的最大速度对应的电流过载阈值，且小于所述电机的堵转电流；所述预设检测条件包括：未检测出所述电机过载，或者未获取到所述电机的过载类别，或者获取到所述电机的过载类别为内因过载。
上述实施方式中，采用高于最大电流过载阈值的预设电流阈值，对电机进行进一步的三阶过载检测，并在检测到电机过载时采用目标安全处理策略，这样可以应对一阶、二阶过载检测失效的情况和发生严重内因过载的情况，提升机器人的安全防护能力。
在第一方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述方法还包括：
对于每个电机，在满足预设检测条件的情况下，若接收到所述电机发送的过载报警消息，则执行目标安全处理策略，其中，所述过载报警消息是所述电机在检测到电流大于预设电流阈值，且持续时间超过第二预设时长的情况下发送的，其中，所述预设电流阈值大于所述电机的最大速度对应的电流过载阈值，且小于所述电机的堵转电流；所述预设检测条件包括：未检测出所述电机过载，或者未获取到所述电机的过载类别，或者获取到所述电机的过载类别为内因过载。
上述实施方式中，采用高于最大电流过载阈值的预设电流阈值，对电机进行进一步的三阶过载检测，并在检测到电机过载时采用目标安全处理策略，这样可以应对一阶、二阶过载检测失效的情况和发生严重内因过载的情况，提升机器人的安全防护能力；并且在电机中执行三阶过载检测，由于电机的运行环境稳定，难以被篡改程序，因而在电机中执行三阶过载检测可以提高三阶过载检测的安全性和稳定性。
在第一方面的一种可能的实施方式中，所述执行目标安全处理策略，包括：
执行外因过载对应的过载安全处理策略；
提示用户检查所述机器人的结构是否异常，并将故障数据上传至服务端。
第二方面，本申请实施例提供一种机器人的安全防护装置，包括：获取模块、一阶过载检测模块、二阶过载检测模块和过载安全处理模块，其中：
所述获取模块用于：获取机器人中各电机的运行数据；
所述一阶过载检测模块用于：对每个电机执行过载检测；
所述二阶过载检测模块用于：当一阶过载检测模块检测到所述电机过载时，根据所述电机的运行数据和预先训练的所述电机的过载分类模型，获取所述电机的过载类别；
所述过载安全处理模块用于：根据所述过载类别执行对应的过载安全处理策略。
在第二方面的一种可能的实施方式中，所述一阶过载检测模块具体用于：
对于每个电机，根据电机的速度确定电流过载阈值；
当电机的电流大于所述电流过载阈值，则确定所述电机处于预过载状态；
当所述电机处于预过载状态的持续时间超过第一预设时长，则确定所述电机过载。
在第二方面的一种可能的实施方式中，所述一阶过载检测模块具体用于：
采用如下公式确定所述电机的电流过载阈值：
Figure BDA0002498744610000041
其中，IThres表示电流过载阈值，vMax表示所述电机的最大速度，v表示获取的所述电机的速度，ITh1表示在所述电机静止时触发过载的理想电流，ITh2表示在所述电机达到最大速度时触发过载的理想电流。
在第二方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述电机的过载分类模型是基于训练样本集训练获得的，其中，所述训练样本集中包括多次外因过载对应的训练样本，每次外因过载对应的训练样本中包括在所述电机发生所述外因过载的情况下最近获取的M组电机运行数据，每组电机运行数据中包括所有电机的运行数据，M为正整数；
训练方法包括：根据每个训练样本中的各组电机运行数据提取每个训练样本的特征向量；采用各个训练样本的特征向量对待训练的单分类模型进行训练，得到所述电机的过载分类模型；
则所述二阶过载检测模块具体用于：
根据最近获取的M组电机运行数据提取待识别的特征向量；
将待识别的特征向量输入所述电机的过载分类模型进行识别，获取所述电机的过载类别。
在第二方面的一种可能的实施方式中，所述运行数据包括电机的电流和位置，所述特征向量包括每个电机的电流特征和位置特征，其中，所述电流特征包括电流的平均值、标准差和最大值中的多个，所述位置特征包括位置变化绝对值的平均值、标准差和最大值中的多个。
在第二方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述过载安全处理模块具体用于：
若所述过载类别为外因过载，则控制所有电机停止运动，并控制目标电机组中的所有电机处于脱机状态，所述目标电机组包括所述电机所属的串联运动链里的所有电机；
进行过载提示，并检测所述目标电机组的受力情况；
在检测到所述目标电机组未受力的情况下使能所述目标电机组中的所有电机，并控制所有电机恢复至初始位置。
在第二方面的一种可能的实施方式中，所述过载安全处理模块还用于：
在所述检测所述目标电机组的受力情况之前，屏蔽所有电机的运动指令；
在所述控制所有电机恢复至初始位置之后，解除对所有电机的运动指令的屏蔽。
在第二方面的一种可能的实施方式中，所述过载安全处理模块具体用于：
对于所述目标电机组中的每个电机，根据最近获取的预设时间段内的所述电机的位置，确定所述电机的位置变化绝对值之和；
根据所述目标电机组中各电机的位置变化绝对值之和确定所述目标电机组的总位置变化量；
若所述总位置变化量大于等于预设位置阈值，则确定所述目标电机组受力；
若所述总位置变化量小于所述预设位置阈值，则确定所述目标电机组未受力。
在第二方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述过载安全处理模块具体用于：
若所述过载类别为内因过载，则记录过载信息，所述过载信息包括下列信息中的多种：所述电机的电机编号、电流、位置和过载发生时间。
在第二方面的一种可能的实施方式中，所述过载安全处理模块还用于：若所述电机在同一位置连续发生内因过载，则提示用户检查所述电机所在关节的结构是否异常。
在第二方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述装置还包括：
三阶过载检测模块，用于对于每个电机，在满足预设检测条件的情况下，若检测到所述电机的电流大于预设电流阈值，且持续时间超过第二预设时长，则指示所述过载安全处理模块执行目标安全处理策略，其中，所述预设电流阈值大于所述电机的最大速度对应的电流过载阈值，且小于所述电机的堵转电流；所述预设检测条件包括：未检测出所述电机过载，或者未获取到所述电机的过载类别，或者获取到所述电机的过载类别为内因过载。
在第二方面的一种可能的实施方式中，所述过载类别为外因过载或内因过载，所述装置还包括：
三阶过载检测模块，用于对于每个电机，在满足预设检测条件的情况下，若接收到所述电机发送的过载报警消息，则指示所述过载安全处理模块执行目标安全处理策略，其中，所述过载报警消息是所述电机在检测到电流大于预设电流阈值，且持续时间超过第二预设时长的情况下发送的，其中，所述预设电流阈值大于所述电机的最大速度对应的电流过载阈值，且小于所述电机的堵转电流；所述预设检测条件包括：未检测出所述电机过载，或者未获取到所述电机的过载类别，或者获取到所述电机的过载类别为内因过载。
在第二方面的一种可能的实施方式中，所述过载安全处理模块具体用于：
执行外因过载对应的过载安全处理策略；
提示用户检查所述机器人的结构是否异常，并将故障数据上传至服务端。
第三方面，本申请实施例提供一种机器人，包括：存储器、处理器和电机，存储器用于存储计算机程序；处理器用于在调用计算机程序时执行上述第一方面或第一方面的任一实施方式所述的方法，所述电机用于向所述处理器反馈运行数据。
第四方面，本申请实施例提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述第一方面或第一方面的任一实施方式所述的方法。
第五方面，本申请实施例提供一种计算机程序产品，当计算机程序产品在机器人上运行时，使得机器人执行上述第一方面或第一方面的任一实施方式所述的方法。
第六方面，本申请实施例提供一种芯片系统，包括处理器，所述处理器与存储器耦合，所述处理器执行存储器中存储的计算机程序，以实现上述第一方面或第一方面的任一实施方式所述的方法。其中，所述芯片系统可以为单个芯片，或者多个芯片组成的芯片模组。
可以理解的是，上述第二方面至第六方面的有益效果可以参见上述第一方面中的相关描述，在此不再赘述。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为申请实施例提供的机器人的结构示意图；
图2为本申请实施例提供的机器人的硬件结构示意图；
图3为本申请实施例提供的机器人的安全防护方法的原理示意图；
图4为本申请实施例提供的机器人的安全防护方法的流程示意图；
图5为本申请实施例提供的过载检测时间窗的示意图；
图6为本申请实施例提供的电流过载阈值与速度的关系示意图；
图7为本申请实施例提供的过载分类模型的训练原理示意图；
图8为本申请实施例提供的外因过载安全处理过程的流程示意图；
图9为本申请实施例提供的机器人的安全防护装置的结构示意图。
具体实施方式
下面结合本申请实施例中的附图对本申请实施例进行描述。本申请实施例的实施方式部分使用的术语仅用于对本申请的具体实施例进行解释，而非旨在限定本申请。
下面先介绍本申请实施例涉及的机器人。本实施例涉及的机器人可以是商用机器人或消费机器人，也可以是工业机器人或特种机器人等机器人，本实施例中以消费机器人为例进行示例性说明。请参阅图1和图2，图1为本申请实施例提供的机器人的结构示意图，图2为本申请实施例提供的机器人的硬件结构示意图。
如图1所示，机器人可以包括躯体组件1、头部组件2、手臂组件3和腿部组件4，手臂组件3和腿部组件4均包括两个，头部组件2、手臂组件3和腿部组件4分别与躯体组件1连接，并且可以相对躯体组件1转动；每个组件可以包括多个关节，例如：手臂组件3可以包括上臂、下臂和手部三个关节，腿部组件4可以包括大腿、小腿和脚部三个关节，当然此处只是一种示例，手臂组件3和腿部组件4也可以包括更多或更少的关节，腿部组件4也可以增加或更改为驱动轮组件，每个驱动轮可以由电机驱动；每个关节的运动可以通过至少一个电机进行驱动。
如图2所示，机器人内部的电路模块可以包括如下电子器件：处理器110，电机120，外部存储器接口131，内部存储器132，通用串行总线(Universal Serial Bus，USB)接口140，充电管理模块150，电源管理模块151，电池152，无线通信模块160，音频模块170，扬声器171，麦克风172，传感器模块180，按键190，指示器191，摄像头192和显示屏193等。其中，传感器模块180可以包括压力传感器181，陀螺仪传感器182，加速度传感器183，接近光传感器184，环境光传感器185，指纹传感器186，温度传感器187，触摸传感器188等。其中，电机120包括多个，位于机器人的各个关节中；扬声器171、麦克风172、指示器191和摄像头192可以设置在头部组件2中；显示屏193可以包括多个，可以均设置在头部组件2中，也可以部分设置在躯体组件1中，例如可以在头部组件2中设置用于显示表情或用于触控交互的显示屏，在躯体组件1中设置用于显示图像和视频和/或用于触控交互的显示屏；其余的电子器件均可以设置在躯体组件1中。
可以理解的是，本发明实施例示意的结构并不构成对机器人的具体限定。在本申请另一些实施例中，机器人可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。
处理器110可以包括一个或多个处理单元，例如：处理器110可以包括中央控制器和电机控制器，还可以包括：应用处理器(Application Processor，AP)、图形处理器(Graphics Processing Unit，GPU)、图像信号处理器(Image Signal Processor，ISP)、视频编解码器、数字信号处理器(Digital Signal Processor，DSP)和/或神经网络处理器(Neural-network Processing Unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。
其中，中央控制器可以是机器人的神经中枢和指挥中心，其可以接收其他处理单元和外围电子器件反馈的数据，以及其他电子设备发送的数据，并生成对应的控制指令。其中，控制指令可以包括用于控制电机120运动的运动指令，例如前进指令、后退指令、左转指令和右转指令等；控制指令还可以包括用于控制其他外围电子器件(例如摄像头192和显示屏193等)的指令等。
电机控制器可以根据中央控制器发送的运动指令控制各电机运转，以带动所属的关节完成相应的运动；电机可以以预设的采样周期向电机控制器反馈电机的运行数据，电机控制器可以根据电机反馈的运行数据确定电机的运行状态，决策机器人下一步的动作。其中，电机的运行数据可以包括：电机的电流、速度和位置等数据。
为了提高机器人的安全防护能力，并提升机器人的拟人化表现能力，本实施例中，电机控制器获取到电机的运行数据后，可以根据电机的运行数据对电机进行安全防护处理。具体的安全防护处理过程可以参见后续的方法实施例，此处不再赘述。
在一些实施例中，处理器110可以包括一个或多个接口。接口可以包括集成电路(Inter-Integrated Circuit，I2C)接口，通用异步收发传输器(Universal AsynchronousReceiver/Transmitter，UART)接口，移动产业处理器接口(Mobile Industry ProcessorInterface，MIPI)，通用输入输出(General-Purpose Input/Output，GPIO)接口，和/或通用串行总线(Universal Serial Bus，USB)接口等。
处理器110可以通过不同的I2C总线接口分别耦合触摸传感器188，充电器，摄像头192等；通过UART接口与无线通信模块160通信；通过MIPI接口连显示屏193，摄像头192等外围器件。GPIO接口可以被配置为控制信号，也可被配置为数据信号。在一些实施例中，GPIO接口可以用于连接处理器110与摄像头192，显示屏193，无线通信模块160，音频模块170，传感器模块180等。
USB接口140是符合USB标准规范的接口，具体可以是Mini USB接口，Micro USB接口，USB Type C接口等。USB接口140可以用于连接充电器为机器人充电，也可以用于机器人与外围设备之间传输数据。
可以理解的是，本发明实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对机器人的结构限定。在本申请另一些实施例中，机器人也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。
充电管理模块150用于从充电器接收充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。在一些有线充电的实施例中，充电管理模块150可以通过USB接口140接收有线充电器的充电输入。在一些无线充电的实施例中，充电管理模块150可以通过机器人的无线充电线圈接收无线充电输入。充电管理模块150为电池152充电的同时，还可以通过电源管理模块151为电子设备供电。
电源管理模块151用于连接电池152，充电管理模块150与处理器110。电源管理模块151接收电池152和/或充电管理模块150的输入，为处理器110、内部存储器32、外部存储器、显示屏193、摄像头192和无线通信模块160等供电。电源管理模块151还可以用于监测电池容量，电池循环次数，电池健康状态(漏电，阻抗)等参数。在其他一些实施例中，电源管理模块151也可以设置于处理器110中。在另一些实施例中，电源管理模块151和充电管理模块150也可以设置于同一个器件中。
无线通信模块160可以提供应用在机器人上的包括无线局域网(Wireless LocalArea Networks，WLAN)(如无线保真(Wireless Fidelity，Wi-Fi)网络)、蓝牙(Bluetooth，BT)、全球导航卫星系统(Global Navigation Satellite System，GNSS)，调频(FrequencyModulation，FM)、近距离无线通信技术(Near Field Communication，NFC)、红外技术(Infrared，IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号，对其进行调频，放大，经天线转为电磁波辐射出去。
机器人可以通过GPU、显示屏193和应用处理器等实现显示功能，通过ISP、摄像头192、视频编解码器、GPU、显示屏193和应用处理器等实现拍摄功能。
外部存储器接口131可以用于连接外部存储卡，例如Micro SD卡，实现扩展机器人的存储能力。外部存储卡通过外部存储器接口131与处理器110通信，实现数据存储功能。例如将音乐，视频等文件保存在外部存储卡中。
内部存储器32可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器32的指令，从而执行机器人的各种功能应用以及数据处理。内部存储器32可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用程序(比如声音播放功能，图像播放功能等)等。存储数据区可存储机器人使用过程中所创建的数据(比如音频数据，电话本等)等。此外，内部存储器32可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(Universal Flash Storage，UFS)等。
机器人可以通过音频模块170，扬声器171，麦克风172，以及应用处理器等实现音频功能。例如音乐播放、语音识别和录音等。
压力传感器181用于感受压力信号，可以将压力信号转换成电信号。在一些实施例中，压力传感器181可以设置于显示屏193中。在一些实施例中，压力传感器181可以与陀螺仪传感器182和加速度传感器183一起，用于确定机器人的运动姿态。
接近光传感器184可以包括例如发光二极管(LED)和光检测器，例如光电二极管。发光二极管可以是红外发光二极管。机器人通过发光二极管向外发射红外光。机器人使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时，可以确定机器人附近有物体。当检测到不充分的反射光时，机器人可以确定机器人附近没有物体。
环境光传感器185用于感知环境光亮度。机器人可以根据感知的环境光亮度自适应调节显示屏193亮度。环境光传感器180L也可用于拍照时自动调节白平衡。
指纹传感器186用于获取指纹，机器人可以利用获取的指纹特性实现指纹解锁等。
温度传感器187用于检测温度。在一些实施例中，机器人利用温度传感器180J检测的温度，执行温度处理策略。
触摸传感器188，也称“触控面板”。触摸传感器188可以设置于显示屏193，由触摸传感器188与显示屏193组成触摸屏，也称“触控屏”。触摸传感器188用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器，以确定触摸事件类型。可以通过显示屏193提供与触摸操作相关的视觉输出。在另一些实施例中，触摸传感器188也可以设置于机器人的表面，与显示屏193所处的位置不同。
按键190包括开机键，音量键等。按键190可以是机械按键，也可以是触摸式按键。机器人可以接收按键输入，产生与机器人的用户设置以及功能控制有关的键信号输入。
指示器191可以是指示灯，可以用于指示充电状态，电量变化，也可以用于指示机器人工作状态和通知等。
以下实施例中所涉及的技术方案均可以在具有上述硬件结构的机器人中实现。
下面对本申请实施例提供的安全防护方法进行说明。其中，执行该安全防护方法的执行主体可以是机器人中的处理器，该处理器具体可以是电机控制器，也可以是集成有电机控制器的功能的其他处理单元，本实施例中以处理器为电机控制器为例进行示例性说明。
为了便于理解，下面先对本申请实施例提供的安全防护方法的原理进行简要说明。
图3为本申请实施例提供的机器人的安全防护方法的原理示意图，如图3所示，本申请实施例中，对于机器人中的每个电机来说，其过载检测过程可以包括如下几个阶段：一阶过载检测、二阶过载检测和三阶过载检测。
其中，一阶过载检测主要用于区分电机正常运动和受到较大阻力的情况，其通过变化的电流过载阈值检测电机是否过载，来初步筛选出过载事件(即电机受到较大阻力的情况)。
在实际应用中，使电机受到较大阻力(即电机过载)的原因可以包括外因和内因，其中，外因包括人为掰动电机关节或电机关节打到外在障碍物等，内因通常由内部结构异常引起，如结构老化摩擦增大、电线缠绕或坚硬异物进入机器人卡住传动结构等。对于不同原因引起的过载，若都归为一类过载，进行过载保护处理时采取同一过载安全处理策略，则在发生内因过载(即内因引起的过载)时容易出现用户不清楚为何触发过载保护的情况，从而会降低人机交互体验度和机器人的拟人化表现能力。基于此，本实施例中，通过二阶过载检测进一步对电机过载的情况进行区分。
具体的，二阶过载检测通过预先训练的过载分类模型，区分一阶过载检测的过载事件是内因过载还是外因过载，并针对不同的过载类别采取不同的过载安全处理策略，即在发生内因过载时，进行内因过载安全处理；在发生外因过载时，进行外因过载安全处理。当然，本实施例中只是以过载类别包括内因过载和外因过载为例进行示例性说明，其并非用于限定本申请；在具体实现时，也可以根据需要划分更多的过载类别，根据各种过载类别的电机运行数据预先训练出对应的过载分类模型，识别一阶过载检测的过载事件的过载类别，然后采用对应的过载安全处理策略。
考虑到一阶过载检测和二阶过载检测可能由于电机控制器发生故障或被篡改程序等原因而失效，内因过载也可能出现比较严重的情况，本实施例中，可以通过三阶过载检测来应对这些情况，以提升机器人的安全防护能力。
具体的，三阶过载检测可以运行在电机控制器或更为稳定的电机底层环境中，其作为最后一道保护屏障，在一阶过载检测失效时(即未检测出电机过载)或二阶过载检测失效时(即未获取到电机的过载类别)或出现严重的内因过载时触发。三阶过载检测通过高于一阶过载检测中电流过载阈值的预设电流阈值，检测电机是否过载，在检测到电机过载时进行三阶过载安全处理，即执行相应的过载安全处理策略(此处称为目标安全处理策略)，来应对一阶或二阶过载检测失效的情况和发生严重内因过载的情况，对电机进行进一步的保护。
基于上述安全防护原理，对于机器人中的电机，可以采用图4所示的方法进行安全防护处理，以提升机器人的安全防护能力。
图4为本申请实施例提供的机器人的安全防护方法的流程示意图，如图4所示，本实施例提供的安全防护方法可以包括如下步骤：
S110、获取机器人中各电机的运行数据。
本实施例中，针对机器人中的每个电机，电机控制器可以实时获取电机的运行数据，根据电机的运行数据确定电机的安全情况，以对电机进行安全保护。
具体的，如前所述，机器人中的每个电机可以以预设的采样周期(例如20ms)向电机控制器反馈运行数据，即对于每个电机，电机控制器可以每隔该采样周期获取一次该电机的运行数据；本实施例中，电机控制器可以在每次获取到该电机的运行数据后，采用后续步骤对电机进行安全检测和安全处理。
本实施例中，电机控制器从电机获取的运行数据可以包括：电机的电流、速度和位置等，为了提高检测结果的准确性，电机控制器在获取到电机的运行数据后，可以先对运行数据进行滤波处理，然后再进行安全检测。例如：可以根据电流的采样毛刺情况，采用滤波算法(如统计排序滤波算法)对电流进行数字滤波，过滤掉电流毛刺。
S120、对每个电机进行过载检测。
如图3所示，电机控制器获取到电机的运行数据后，可以据此先对电机进行一阶过载检测。在具体进行过载检测(即一阶过载检测)时，电机控制器可以根据电机的电流是否超过电流过载阈值，来确定电机是否过载；为了提升检测结果的准确性，本实施例中，可以将电机的电流超过电流过载阈值的情况称为预过载状态，电机控制器可以统计电机处于预过载状态的持续时间，根据该持续时间是否超过过载检测时间窗(此处称为第一预设时长)来确定电机是否过载。其中，第一预设时长可以根据需要设置，本实施例对此不做特别限定。
图5为本申请实施例提供的过载检测时间窗的示意图，如图5所示，为电机的电流变化示意图，假设t1时刻之前，电机的电流I小于等于电流过载阈值IThres，t1时刻电机的电流I超过电流过载阈值IThres，即电机处于预过载状态，则在t1时刻到t2时刻之间的过载检测时间窗T(即t2-t1)内，检测电机的电流I是否持续大于电流过载阈值IThres，即检测电机处于预过载状态的持续时间是否大于T，若是，则可以判定电机过载，否则可以认为电机未过载。
考虑到在负载相同的情况下，电机的电流与速度呈正相关，即速度越快，同样负载引起的电流越大，本实施例中，如图3所示，可以结合电机的运行数据中电机的电流和速度进行过载检测，以提高过载检测结果的准确性。
在具体实现时，可以根据电机的速度确定电流过载阈值，再据此进行过载检测。即电机控制器在每获取到一次电机的运行数据后，进行过载检测时，先根据运行数据中电机的速度确定电流过载阈值，再根据运行数据中电机的电流和实时确定的电流过载阈值，确定电机是否处于预过载状态；然后在确定电机处于预过载状态(即电机的电流大于电流过载阈值)的情况下，判断电机处于预过载状态的持续时间是否超过第一预设时长，若是，则可以确定电机过载，否则继续进行过载检测。
为了保证电机在任意速度下，触发过载的施加阻力基本相近，以进一步提高过载检测结果的准确性，本实施例中，如图6所示，可以将电流过载阈值设置为速度的一次函数，对应的公式可以表示为：
Figure BDA0002498744610000111
其中，IThres表示电流过载阈值，vMax表示电机的最大速度，v表示获取的电机的速度，ITh1表示在电机静止时触发过载的理想电流，ITh2表示在电机达到最大速度时触发过载的理想电流。
S130、若检测到电机过载，则根据电机的运行数据和预先训练的电机的过载分类模型，获取电机的过载类别。
如图3所示，对于每个电机，电机控制器在对电机进行一阶过载检测后，若检测到电机过载，则可以对电机进行二阶过载检测，以进一步区分电机过载情况。
本实施例中，对于每个电机，在进行二阶过载检测时，可以通过预先训练的该电机的过载分类模型来区分该电机的过载类别。为了便于理解，下面先对过载分类模型的训练过程进行说明。
本实施例中，各个电机的过载分类模型的训练过程类似，为了便于说明，下面以单个电机的过载分类模型的训练过程为例进行说明。
图7为本申请实施例提供的过载分类模型的训练原理示意图，如图7所示，对于某个电机，可以采集该电机发生过载时的过载数据作为训练样本，得到包含多个训练样本的训练样本集；对各个训练样本进行特征提取后，对待训练的初始过载分类模型进行训练，得到该电机的过载分类模型。
考虑到外因过载数据比较容易获取，内因过载数据获取较为困难，为了降低训练难度，本实施例中，可以采用机器学习中的异常点检测(Novelty Detection)方法进行模型训练，该方法对应的训练样本集中仅包含单一标签的训练样本，训练后的模型可以进行二分类识别。其中，异常点检测方法可以采用单分类算法或聚类算法等，本实施例中优选采用单分类算法，以降低训练复杂度。对应的，初始过载分类模型可以为单分类模型，电机的训练样本可以是外因过载对应的训练样本，即在电机发生外因过载情况下采集的样本数据。
其中，单分类模型采用的单分类算法可以是单分类支持向量机(One ClassSupport Vector Machine，OCSVM)算法或支持向量域描述(Support Vector DomainDescription，SVDD)等基于支持向量的单分类算法，也可以是孤立森林(IsolationForest)算法或基于神经网络的单分类算法等。
训练样本集中每次外因过载对应的训练样本中可以包括：在电机发生该次外因过载的情况下最近获取的M组电机运行数据，其中，每组电机运行数据中包括所有电机的运行数据，M为正整数。
在具体实现时，对于某个电机，可以人为触发该电机的外因过载，然后通过一阶过载检测方法可以检测到过载，假设检测到过载的时刻为t，则可以将t时刻前最近获取到的M次电机采样数据(包括所有电机的运行数据)作为训练样本。或者也可以将距离t时刻最近的一时间段内获取到的电机采样数据作为训练样本，该时间段可以根据采样周期和训练样本所需的电机运行数据的组数确定。其中，M的值可以根据需要选择，本实施例对此不做特别限定。
考虑到位置变化绝对值可以同时反映电机发生过载前的速度和位置变化情况，训练样本中电机的速度和位置可以用位置变化绝对值替换，其中，位置变化绝对值为当次获取的电机的位置与上一次获取的该电机的位置之差的绝对值。以机器人包括N个电机为例，如图7所示，每个训练样本可以用M×2N维的矩阵表示，具体如下所示：
Figure BDA0002498744610000131
其中，IMN表示第M组第N个电机的电流，|ΔPMN|表示第M组第N个电机的位置变化绝对值，N为正整数。
需要说明的是，确定位置变化绝对值也可以是在后面提取特征向量的过程中实现，对应的，矩阵中可以包括M-1组电机的位置变化绝对值数据，电机的电流数据可以选择M组或者M-1组；或者也可以在获取训练样本时获取M+1组电机运行数据，生成M组电机的位置变化绝对值数据，电机的电流数据可以选择M组或者M+1组。在具体实现时这些都可以根据需要选择，图7中只是以确定位置变化绝对值在获取训练样本的过程中实现，矩阵中包括M组电机的电流和位置变化绝对值数据为例进行示例性说明。
在获取到训练样本后，可以根据每个训练样本中的各组电机运行数据提取每个训练样本的特征向量，以降低数据维度。在具体实现时，如图7中所示的，可以提取每个电机的电流和位置变化绝对值的平均值、标准差和最大值，形成1×6N维的特征向量：
Figure BDA0002498744610000132
其中，INmean表示第N个电机的M组电流的平均值，INstd表示第N个电机的M组电流的标准差，INmax表示第N个电机的M组电流的最大值；|ΔP|Nmean表示第N个电机的M组位置变化绝对值的平均值，|ΔP|Nstd表示第N个电机的M组位置变化绝对值的标准差，|ΔP|Nmax表示第N个电机的M组位置变化绝对值的最大值。
上述特征向量中，电流和位置变化绝对值的平均值、标准差和最大值，可以较为全面的反映电机的电流和位置的整体变化情况，对应训练的过载分类模型也较为准确。当然，在提取特征向量时，也可以提取其他特征值，例如：电机电流和位置变化绝对值的最小值或方差等其他特征，电机电流和速度的特征向量，特征向量中可以包括比上述三种特征值更多或更少的特征值，本实施例对此不做特别限定。
在提取出各个训练样本的特征向量后，就可以采用这些特征向量对待训练的单分类模型进行训练，得到电机的过载分类模型。
具体的，可以在构建训练样本集的同时构建测试样本集，或者可以将训练样本集中的一部分训练样本作为测试样本集；在具体训练时，可以将训练样本集中训练样本的特征向量输入单分类模型进行训练，建立一个初步的过载分类模型；然后可以采用测试样本集和预设的损失函数对初步建立的过载分类模型进行模型评估，根据评估结果修改过载分类模型的参数，重复上述评估步骤，直至修改后的过载分类模型符合评估要求为止，该符合评估要求的过载分类模型即为最终训练的过载分类模型。
在训练好各个电机的过载分类模型后，就可以采用这些过载分类模型获取电机的过载类别。
与训练过程相对应，在具体实现时，对于某个电机，在通过一阶过载检测方法检测到电机过载时，可以根据最近获取的M组电机运行数据提取待识别的特征向量，然后将待识别的特征向量输入该电机的过载分类模型进行识别，确定该电机的过载类别是外因过载还是内因过载。
S140、根据过载类别执行对应的过载安全处理策略。
如图3所示，本实施例中，对于不同的过载类别，可以对电机进行不同的过载安全处理。其中，当过载类别为外因过载时，对电机进行外因过载安全处理，即执行外因过载对应的过载安全处理策略；当过载类别为内因过载时，对电机进行内因过载安全处理，即执行内因过载对应的过载安全处理策略。下面分别说明两种过载安全处理过程。
外因过载安全处理过程：
在具体实现时，可以采用图8所示的方法执行外因过载对应的过载安全处理策略，参见图8，图8为本申请实施例提供的外因过载安全处理过程的流程示意图，如图8所示，在获取到电机发生外因过载时，可以执行如下过载安全处理策略：
S141、控制所有电机停止运动，并屏蔽所有电机的运动指令。
具体的，在检测到电机过载时，可以先停止所有电机的运动，并可以暂时屏蔽所有电机的运动指令，以及时对人或物体进行保护，同时避免对机器人造成进一步伤害。
S142、控制目标电机组中的所有电机处于脱机状态。
在控制所有电机停止运动后，可以卸载目标电机组，即控制目标电机组中的所有电机处于脱机状态(free)，使目标电机组不再具有运动能力，可以被自由掰动，这样电机在持续受到外力时，可以自动活动而不至于被损坏。
其中，目标电机组包括该发生过载的电机所属的串联运动链里的所有电机，串联运动链是指把两个或两个以上的构件通过运动副的联接而构成的相对可动的系统，例如：人形机器人的一条手臂(即图1中所示的一个手臂组件3)即为一条串联运动链，若发生过载的电机是某条手臂中的某个电机，则目标电机组包括该条手臂中的所有电机。
需要说明的是，步骤S142中控制目标电机组中的所有电机处于脱机状态，与屏蔽所有电机的运动指令之间没有严格的时序执行关系，两者可以先后执行，也可以同时执行，本实施例对此不做特别限定。
S143、进行过载提示，并检测目标电机组的受力情况。
为了提醒用户，并进一步提升机器人的拟人化表现能力，本实施例中，在检测到电机过载后，可以进行过载提示，以提示用户电机发生过载。其中，过载提示可以包括语音提示和/或表情提示，例如，在右手臂中的电机发生过载时，可以语音提示“我的右胳膊好疼”，并可以显示难过的表情。
另外，在卸载目标电机组后，可以持续检测目标电机组的受力情况，以确定目标电机组有无继续发生过载的可能。比如：用户掰动目标电机组导致电机过载，在目标电机组卸载后，用户可能会继续掰动目标电机组，此时，目标电机组可以继续保持脱机状态，直到检测到目标电机组不再受力为止。这样可以减少由于用户的继续掰动而引起二次过载的情况，节省进行二次过载检测所需的处理资源，同时可以减少过载安全处理频繁执行的情况，提升机器人的拟人化表现能力。
具体的，可以通过目标电机组反馈的位置变化情况，来确定目标电机组的受力情况。在具体实现时，对于目标电机组中的每个电机，可以根据最近获取的预设时间段内的电机的位置，确定电机的位置变化绝对值之和；然后可以根据目标电机组中各电机的位置变化绝对值之和确定目标电机组的总位置变化量，最后根据总位置变化量与预设位置阈值之间的大小关系，确定目标电机组的受力情况，在总位置变化量大于等于预设位置阈值的情况下，确定目标电机组受力；在总位置变化量小于预设位置阈值的情况下，确定目标电机组未受力。
其中，预设时间段的具体值可以根据需要设置，例如可以是3s；同样的，预设位置阈值的大小也可以根据需要设置，本实施例对此均不做特别限定。对于最近获取的预设时间段内的某电机的位置，将后一次获取的位置与前一次获取的位置相减后取绝对值，可以得到该电机的一次位置变化绝对值，将该预设时间段内的该电机的各位置变化绝对值累加，即得到该电机的位置变化绝对值之和；将目标电机组中各电机的位置变化绝对值之和累加即可以得到目标电机组的总位置变化量。
S144、在目标电机组未受力的情况下使能目标电机组中的所有电机，并控制所有电机恢复至初始位置。
具体的，若检测到目标电机组受力，则说明目标电机组对应的关节还在被掰动，此时可以继续保持目标电机组的脱机状态；若检测到目标电机组未受力，则说明目标电机组对应的关节已停止被掰动，此时可以使能目标电机组中的所有电机，然后控制所有电机缓慢运动恢复至初始位置，以方便机器人重新开启正常工作。其中，在使能电机时，电机的运动指令处于被屏蔽状态，这样可以防止使能指令与运动指令发生冲突，从而可以提高机器人工作的稳定性。
S145、解除对所有电机的运动指令的屏蔽。
在控制所有电机恢复至初始位置后，可以解除对所有电机的运动指令的屏蔽，使机器人的各电机恢复正常运动。
需要说明的是，在电机控制器集成有中央控制器功能的情况下，电机的运动指令即由电机控制器生成，此时，在进行过载安全处理的过程中，电机控制器可以不执行运动指令的屏蔽和解除屏蔽操作，只需在使能电机前不生成其他运动指令即可。
内因过载安全处理过程：
内因过载一般是由内部结构异常引起的，例如结构老化摩擦增大，机器人使用久了之后，就会触发较多的内因过载保护，因此，为了减少过多的内因过载保护对用户使用产生的影响，在发生内因过载时可以继续保持机器人当前的各项运动；同时，为了方便后期工程师进行回溯，优化内因过载情况，在检测到电机发生内因过载时，可以将过载信息记录下来，其中，过载信息可以包括下列信息中的多种：电机的电机编号、电流、位置和过载发生时间等。
另外，考虑到电机有可能是被外物卡住而造成内因过载，本实施例中，如果检测到电机在同一位置连续发生内因过载，则可以提示用户检查该电机所在关节的结构是否异常，以便及时处理结构异常较重的情况，对机器人结构进行保护。
S150、对于每个电机，若电机的电流大于预设电流阈值，且持续时间超过第二预设时长，则执行目标安全处理策略。
如图3所示，本实施例中，在一阶过载检测或二阶过载检测失效时，或者发生比较严重的内因过载时，可以通过三阶过载检测来应对这些情况，以进一步提升机器人的安全防护能力。
具体的，对于每个电机来说，可以采用固定的预设电流阈值和三阶过载检测时间窗(即第二预设时长)来确定电机是否发生三阶过载，以降低算法复杂度，进而减少出现程序异常问题。
与一阶过载检测的检测过程类似，在具体进行三阶过载检测时，可以判断电机的电流是否大于预设电流阈值，在电机的电流大于预设电流阈值的情况下，判断电机的电流大于预设电流阈值的持续时间是否超过第二预设时长，若是，则可以确定电机发生三阶过载，此时可以进行三阶过载安全处理；否则继续进行三阶过载检测。
其中，第二预设时长与一阶过载检测中的第一预设时长可以相同，也可以不同，具体可以根据实际需要设置，本实施例对此不做特别限定。
预设电流阈值可以稍低于电机的堵转电流，以免引起误检测；同时，预设电流阈值可以大于电机的最大速度对应的电流过载阈值(即ITh2)，这样在正常情况下，在发生外因过载时会优先触发一阶过载检测和二阶过载检测；由于在触发了一阶过载检测和二阶过载检测后，会在进行外因过载安全处理时卸载电机，因而在正常情况下不会继续触发三阶过载检测，只有在一阶过载检测或二阶过载检测失效的情况下才进行三阶过载检测。也就是说，对于外因过载的情况，三阶过载检测可以在一阶过载检测或二阶过载检测失效的情况下检测出来，然后进行相关的安全处理，这样就可以提高机器人的安全防护能力。
另外，对于内因过载的情况，由于在进行内因过载安全处理时为了保证正常使用，不会卸载电机，因此在发生严重的内因过载时，可以触发三阶过载检测。也就是说，通过三阶过载检测可以及时的检测出严重的内因过载，这样就可以及时的进行相关的安全处理，降低电机因自身结构异常而导致的损坏。
本实施例中，在检测出三阶过载后执行的过载安全处理策略(此处称为目标安全处理策略)与外因过载对应的过载安全处理策略类似，不同之处在于，在执行外因过载对应的过载安全处理策略之外，可以提示用户检查机器人的结构是否异常，排除电线缠绕等引起的严重内因过载情况，并可以将故障数据上传至服务端，由工程师远程查看是否是由于系统问题导致的一阶过载检测和二阶过载检测失效。在上传故障数据之前，也可以先通过语音和/或文字方式询问用户是否同意上传故障数据至服务端，在接收到用户的同意指令时，再将故障数据上传至服务端，以提升人机交互体验度。
上述是以三阶过载检测运行在电机控制器中为例进行示例性说明，在具体实现时，三阶过载检测也可以运行在电机内，由于电机的运行环境稳定，难以被篡改程序，因而在电机中执行三阶过载检测可以提高三阶过载检测的安全性和稳定性。
其中，电机中执行的三阶过载检测过程与上述三阶过载检测过程一致，此处不再赘述。电机在检测到三阶过载时，可以向电机控制器发送过载报警消息，电机控制器接收到该过载报警消息后可以执行上述目标安全处理策略，对电机进行保护。
本领域技术人员可以理解，以上实施例是示例性的，并非用于限定本申请。在可能的情况下，以上步骤中的一个或者几个步骤的执行顺序可以进行调整，也可以进行选择性组合，得到一个或多个其他实施例。本领域技术人员可以根据需要从上述步骤中任意进行选择组合，凡是未脱离本申请方案实质的，都落入本申请的保护范围。
本实施例提供的机器人的安全防护方法，基于变化的电流过载阈对电机进行一阶过载检测，在检测到电机过载时，通过预先训练的过载分类模型对电机进行二阶过载检测，进一步区分电机的过载类型，然后采用对应的过载安全处理策略，这样可以提升机器人的拟人化表现能力；另外，该方法采用高于最大电流过载阈值的预设电流阈值，对电机进行进一步的三阶过载检测，并在检测到电机过载时采用目标安全处理策略，这样可以应对一阶和二阶过载检测失效的情况和发生严重内因过载的情况，提升机器人的安全防护能力。
基于同一发明构思，作为对上述方法的实现，本申请实施例提供了一种机器人的安全防护装置，该装置实施例与前述方法实施例对应，为便于阅读，本装置实施例不再对前述方法实施例中的细节内容进行逐一赘述，但应当明确，本实施例中的装置能够对应实现前述方法实施例中的全部内容。
图9为本申请实施例提供的机器人的安全防护装置的结构示意图，如图9所示，本实施例提供的装置可以包括：获取模块210、一阶过载检测模块220、二阶过载检测模块230、三阶过载检测模块240和过载安全处理模块250，其中：
获取模块210用于支持机器人执行上述实施例中的S110和/或本文所描述的技术的其它过程。
一阶过载检测模块220用于支持机器人执行上述实施例中的S120和/或本文所描述的技术的其它过程。
二阶过载检测模块230用于支持机器人执行上述实施例中的S130和/或本文所描述的技术的其它过程。
三阶过载检测模块240用于支持机器人执行上述实施例中的S150中检测电机的电流是否大于预设电流阈值，且持续时间超过第二预设时长的操作和/或本文所描述的技术的其它过程。
过载安全处理模块250用于支持机器人执行上述实施例中的S140、S150中执行目标安全处理策略的操作和/或本文所描述的技术的其它过程。
本实施例提供的装置可以执行上述方法实施例，其实现原理与技术效果类似，此处不再赘述。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
本申请实施例还提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述方法实施例所述的方法。
本申请实施例还提供一种计算机程序产品，当计算机程序产品在机器人上运行时，使得机器人执行时实现上述方法实施例所述的方法。
本申请实施例还提供一种芯片系统，包括处理器，处理器与存储器耦合，处理器执行存储器中存储的计算机程序，以实现上述方法实施例所述的方法。其中，芯片系统可以为单个芯片，或者多个芯片组成的芯片模组。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者通过所述计算机可读存储介质进行传输。所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如软盘、硬盘或磁带)、光介质(例如DVD)、或者半导体介质(例如固态硬盘(Solid State Disk，SSD))等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，该流程可以由计算机程序来指令相关的硬件完成，该程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法实施例的流程。而前述的存储介质可以包括：ROM或随机存储记忆体RAM、磁碟或者光盘等各种可存储程序代码的介质。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
在本申请所提供的实施例中，应该理解到，所揭露的装置/设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
应当理解，当在本申请说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
如在本申请说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
另外，在本申请说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。
最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (20)

1.一种机器人的安全防护方法，其特征在于，包括：
获取机器人中各电机的运行数据；
对每个电机执行过载检测；
当检测到所述电机过载，则根据所述电机的运行数据和预先训练的所述电机的过载分类模型，获取所述电机的过载类别，所述过载类别为外因过载或内因过载；
若所述过载类别为内因过载，则保持各所述电机的运行状态。
2.根据权利要求1所述的方法，其特征在于，所述对每个电机执行过载检测，包括：
对于每个电机，根据电机的速度确定电流过载阈值；
当电机的电流大于所述电流过载阈值，则确定所述电机处于预过载状态；
当所述电机处于预过载状态的持续时间超过第一预设时长，则确定所述电机过载。
3.根据权利要求2所述的方法，其特征在于，所述根据所述电机的速度确定电流过载阈值，包括：
采用如下公式确定所述电机的电流过载阈值：
Figure FDA0003344769690000011
其中，IThres表示电流过载阈值，vMax表示所述电机的最大速度，v表示获取的所述电机的速度，ITh1表示在所述电机静止时触发过载的理想电流，ITh2表示在所述电机达到最大速度时触发过载的理想电流。
4.根据权利要求1所述的方法，其特征在于，所述电机的过载分类模型是基于训练样本集训练获得的，其中，所述训练样本集中包括多次外因过载对应的训练样本，每次外因过载对应的训练样本中包括在所述电机发生所述外因过载的情况下最近获取的M组电机运行数据，每组电机运行数据中包括所有电机的运行数据，M为正整数；
训练方法包括：
根据每个训练样本中的各组电机运行数据提取每个训练样本的特征向量；
采用各个训练样本的特征向量对待训练的单分类模型进行训练，得到所述电机的过载分类模型；
则所述根据所述电机的运行数据和预先训练的所述电机的过载分类模型，获取所述电机的过载类别，包括：
根据最近获取的M组电机运行数据提取待识别的特征向量；
将待识别的特征向量输入所述电机的过载分类模型进行识别，获取所述电机的过载类别。
5.根据权利要求4所述的方法，其特征在于，所述运行数据包括电机的电流和位置，所述特征向量包括每个电机的电流特征和位置特征，其中，所述电流特征包括电流的平均值、标准差和最大值中的多个，所述位置特征包括位置变化绝对值的平均值、标准差和最大值中的多个。
6.根据权利要求1所述的方法，其特征在于，所述方法还包括：
若所述过载类别为外因过载，则控制所有电机停止运动，并控制目标电机组中的所有电机处于脱机状态，所述目标电机组包括所述电机所属的串联运动链里的所有电机；
进行过载提示，并检测所述目标电机组的受力情况；
在检测到所述目标电机组未受力的情况下使能所述目标电机组中的所有电机，并控制所有电机恢复至初始位置。
7.根据权利要求6所述的方法，其特征在于，在所述检测所述目标电机组的受力情况之前，所述方法还包括：
屏蔽所有电机的运动指令；
在所述控制所有电机恢复至初始位置之后，所述方法还包括：
解除对所有电机的运动指令的屏蔽。
8.根据权利要求6所述的方法，其特征在于，所述检测所述目标电机组的受力情况，包括：
对于所述目标电机组中的每个电机，根据最近获取的预设时间段内的所述电机的位置，确定所述电机的位置变化绝对值之和；
根据所述目标电机组中各电机的位置变化绝对值之和确定所述目标电机组的总位置变化量；
若所述总位置变化量大于等于预设位置阈值，则确定所述目标电机组受力；
若所述总位置变化量小于所述预设位置阈值，则确定所述目标电机组未受力。
9.根据权利要求1所述的方法，其特征在于，若所述过载类别为内因过载，所述方法还包括：
记录过载信息，所述过载信息包括下列信息中的多种：所述电机的电机编号、电流、位置和过载发生时间。
10.根据权利要求9所述的方法，其特征在于，所述方法还包括：
若所述电机在同一位置连续发生内因过载，则提示用户检查所述电机所在关节的结构是否异常。
11.根据权利要求2所述的方法，其特征在于，所述方法还包括：
对于每个电机，在满足预设检测条件的情况下，若检测到所述电机的电流大于预设电流阈值，且持续时间超过第二预设时长，则执行目标安全处理策略，其中，所述预设电流阈值大于所述电机的最大速度对应的电流过载阈值，且小于所述电机的堵转电流；所述预设检测条件包括：未检测出所述电机过载，或者未获取到所述电机的过载类别，或者获取到所述电机的过载类别为内因过载。
12.根据权利要求2所述的方法，其特征在于，所述方法还包括：
对于每个电机，在满足预设检测条件的情况下，若接收到所述电机发送的过载报警消息，则执行目标安全处理策略，其中，所述过载报警消息是所述电机在检测到电流大于预设电流阈值，且持续时间超过第二预设时长的情况下发送的；所述预设电流阈值大于所述电机的最大速度对应的电流过载阈值，且小于所述电机的堵转电流；所述预设检测条件包括：未检测出所述电机过载，或者未获取到所述电机的过载类别，或者获取到所述电机的过载类别为内因过载。
13.根据权利要求11或12所述的方法，其特征在于，所述执行目标安全处理策略，包括：
执行外因过载对应的过载安全处理策略；
提示用户检查所述机器人的结构是否异常，并将故障数据上传至服务端。
14.一种机器人的安全防护装置，其特征在于，包括：获取模块、一阶过载检测模块、二阶过载检测模块和过载安全处理模块，其中：
所述获取模块用于：获取机器人中各电机的运行数据；
所述一阶过载检测模块用于：对每个电机执行过载检测；
所述二阶过载检测模块用于：当一阶过载检测模块检测到所述电机过载时，根据所述电机的运行数据和预先训练的所述电机的过载分类模型，获取所述电机的过载类别，所述过载类别为外因过载或内因过载；
所述过载安全处理模块用于：在所述过载类别为内因过载的情况下，保持各所述电机的运行状态。
15.根据权利要求14所述的装置，其特征在于，所述一阶过载检测模块具体用于：
对于每个电机，根据电机的速度确定电流过载阈值；
当电机的电流大于所述电流过载阈值，则确定所述电机处于预过载状态；
当所述电机处于预过载状态的持续时间超过第一预设时长，则确定所述电机过载。
16.根据权利要求14所述的装置，其特征在于，所述电机的过载分类模型是基于训练样本集训练获得的，其中，所述训练样本集中包括多次外因过载对应的训练样本，每次外因过载对应的训练样本中包括在所述电机发生所述外因过载的情况下最近获取的M组电机运行数据，每组电机运行数据中包括所有电机的运行数据，M为正整数；
训练方法包括：
根据每个训练样本中的各组电机运行数据提取每个训练样本的特征向量；
采用各个训练样本的特征向量对待训练的单分类模型进行训练，得到所述电机的过载分类模型；
则所述二阶过载检测模块具体用于：
根据最近获取的M组电机运行数据提取待识别的特征向量；
将待识别的特征向量输入所述电机的过载分类模型进行识别，获取所述电机的过载类别。
17.根据权利要求14所述的装置，其特征在于，所述过载安全处理模块还用于：
若所述过载类别为外因过载，则控制所有电机停止运动，并控制目标电机组中的所有电机处于脱机状态，所述目标电机组包括所述电机所属的串联运动链里的所有电机；
进行过载提示，并检测所述目标电机组的受力情况；
在检测到所述目标电机组未受力的情况下使能所述目标电机组中的所有电机，并控制所有电机恢复至初始位置。
18.根据权利要求15-17任一项所述的装置，其特征在于，所述装置还包括：
三阶过载检测模块，用于对于每个电机，在满足预设检测条件的情况下，若接收到所述电机发送的过载报警消息，则指示所述过载安全处理模块执行目标安全处理策略，其中，所述过载报警消息是所述电机在检测到电流大于预设电流阈值，且持续时间超过第二预设时长的情况下发送的；所述预设电流阈值大于所述电机的最大速度对应的电流过载阈值，且小于所述电机的堵转电流；所述预设检测条件包括：未检测出所述电机过载，或者未获取到所述电机的过载类别，或者获取到所述电机的过载类别为内因过载。
19.一种机器人，其特征在于，包括：存储器、处理器和电机，所述存储器用于存储计算机程序；所述处理器用于在调用所述计算机程序时执行如权利要求1-13任一项所述的方法，所述电机用于向所述处理器反馈运行数据。
20.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-13任一项所述的方法。
CN202010425990.9A 2020-05-19 2020-05-19 机器人的安全防护方法、装置与机器人 Active CN111633686B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010425990.9A CN111633686B (zh) 2020-05-19 2020-05-19 机器人的安全防护方法、装置与机器人
PCT/CN2021/082618 WO2021232933A1 (zh) 2020-05-19 2021-03-24 机器人的安全防护方法、装置与机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010425990.9A CN111633686B (zh) 2020-05-19 2020-05-19 机器人的安全防护方法、装置与机器人

Publications (2)

Publication Number Publication Date
CN111633686A CN111633686A (zh) 2020-09-08
CN111633686B true CN111633686B (zh) 2022-04-12

Family

ID=72324642

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010425990.9A Active CN111633686B (zh) 2020-05-19 2020-05-19 机器人的安全防护方法、装置与机器人

Country Status (2)

Country Link
CN (1) CN111633686B (zh)
WO (1) WO2021232933A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111633686B (zh) * 2020-05-19 2022-04-12 华为技术有限公司 机器人的安全防护方法、装置与机器人
CN112828896B (zh) * 2021-03-15 2022-02-25 苏州工艺美术职业技术学院 一种家用智能陪伴机器人及其执行控制方法
CN113625648A (zh) * 2021-08-27 2021-11-09 刘纪荣 一种基于rfid识别的设备运行状态确定方法
CN114211486B (zh) * 2021-12-13 2024-03-22 中国科学院深圳先进技术研究院 一种机器人的控制方法、机器人及存储介质
CN114474149B (zh) * 2021-12-21 2024-04-05 深圳优地科技有限公司 自动化测试方法、装置、服务器及可读存储介质
CN115296592B (zh) * 2022-10-08 2023-02-03 东营金丰正阳科技发展有限公司 一种防止过压故障的潜油电泵控制柜
CN116421308A (zh) * 2023-03-06 2023-07-14 极限人工智能有限公司 一种柔性器械钳头运动的极限位置判断方法及系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000202794A (ja) * 1999-01-14 2000-07-25 Technol Res Assoc Of Medical & Welfare Apparatus ロボット駆動装置の安全保護装置
JP2005339181A (ja) * 2004-05-26 2005-12-08 Matsushita Electric Works Ltd 自律移動車
CN201559195U (zh) * 2009-12-11 2010-08-25 Abb技术有限公司 机器人
CN105738722A (zh) * 2016-01-27 2016-07-06 西北工业大学 一种航空机电作动器故障诊断方法
CN107196380A (zh) * 2017-07-18 2017-09-22 深圳诺欧博智能科技有限公司 一种机器人电源管理系统及机器人
EP3342549A1 (en) * 2015-08-25 2018-07-04 Kawasaki Jukogyo Kabushiki Kaisha Remote control robot system and operation method thereof
CN110370273A (zh) * 2019-06-27 2019-10-25 华为技术有限公司 一种机器人避障方法、装置和系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110826437A (zh) * 2019-10-23 2020-02-21 中国科学院自动化研究所 基于生物神经网络的智能机器人控制方法、系统、装置
CN111633686B (zh) * 2020-05-19 2022-04-12 华为技术有限公司 机器人的安全防护方法、装置与机器人

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000202794A (ja) * 1999-01-14 2000-07-25 Technol Res Assoc Of Medical & Welfare Apparatus ロボット駆動装置の安全保護装置
JP2005339181A (ja) * 2004-05-26 2005-12-08 Matsushita Electric Works Ltd 自律移動車
CN201559195U (zh) * 2009-12-11 2010-08-25 Abb技术有限公司 机器人
EP3342549A1 (en) * 2015-08-25 2018-07-04 Kawasaki Jukogyo Kabushiki Kaisha Remote control robot system and operation method thereof
CN105738722A (zh) * 2016-01-27 2016-07-06 西北工业大学 一种航空机电作动器故障诊断方法
CN107196380A (zh) * 2017-07-18 2017-09-22 深圳诺欧博智能科技有限公司 一种机器人电源管理系统及机器人
CN110370273A (zh) * 2019-06-27 2019-10-25 华为技术有限公司 一种机器人避障方法、装置和系统

Also Published As

Publication number Publication date
CN111633686A (zh) 2020-09-08
WO2021232933A1 (zh) 2021-11-25

Similar Documents

Publication Publication Date Title
CN111633686B (zh) 机器人的安全防护方法、装置与机器人
CN111645070B (zh) 机器人的安全防护方法、装置与机器人
JP6431017B2 (ja) 機械学習により外力の検出精度を向上させた人協調ロボットシステム
CN103002425B (zh) 自动触发紧急呼叫的方法和系统及其移动终端
US8554370B2 (en) Machine learning approach for predicting humanoid robot fall
US11495214B2 (en) Artificial intelligence device for providing voice recognition service and method of operating the same
CN104423586A (zh) 自动远程感测与触觉转换系统
CN110209281B (zh) 对运动信号进行处理的方法、电子设备和介质
KR20200050235A (ko) 전자 장치 및 그의 지능형 인터랙션 방법
KR20220080731A (ko) 영상 처리 장치 및 방법
EP3757878A1 (en) Head pose estimation
US9868213B2 (en) Incidental robot-human contact detection
CN110678821B (zh) 处理装置、处理方法和程序
US20220324115A1 (en) Systems, devices, and methods for developing robot autonomy
US20210018882A1 (en) Information processing device and information processing method
EP3115926A1 (en) Method for control using recognition of two-hand gestures
US9956688B2 (en) System and method for predicting robotic power disconnection
US20180126561A1 (en) Generation device, control method, robot device, call system, and computer-readable recording medium
CN114761185A (zh) 机器人和用于控制机器人的方法
KR20190140509A (ko) 재고 추적 방법 및 장치
KR102441746B1 (ko) 복수의 디스플레이를 이용하여 사용자 인터페이스를 제공하는 방법, 및 이를 위한 전자 장치
CN112985575A (zh) 敲击事件检测方法、装置、电子设备及检测系统
US20240017406A1 (en) Robot for acquiring learning data and method for controlling thereof
EP4009297A1 (en) Information processing device, method, and program
CN115898929A (zh) 一种风扇控制方法和装置、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant