CN112677981B - 用于作业机械安全驾驶的智能辅助方法及装置 - Google Patents
用于作业机械安全驾驶的智能辅助方法及装置 Download PDFInfo
- Publication number
- CN112677981B CN112677981B CN202110025489.8A CN202110025489A CN112677981B CN 112677981 B CN112677981 B CN 112677981B CN 202110025489 A CN202110025489 A CN 202110025489A CN 112677981 B CN112677981 B CN 112677981B
- Authority
- CN
- China
- Prior art keywords
- data stream
- generating
- auxiliary
- target acquisition
- acquiring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Traffic Control Systems (AREA)
Abstract
本发明涉及工程机械技术领域，提供一种用于作业机械安全驾驶的智能辅助方法及装置，包括：获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据所述信息数据流生成对应的多种辅助策略。本发明提供的一种用于作业机械安全驾驶的智能辅助方法及装置，通过对目标采集区域内的信息数据流进行采集，实现对应不同情况的不同辅助策略，实现了辅助作业机械的智能化安全驾驶，提升了作业的安全性。
Description
技术领域
本发明涉及工程机械技术领域，尤其涉及一种用于作业机械安全驾驶的智能辅助方法及装置。
背景技术
随着履带作业机械例如起重机等的应用规模越来越广泛以及操作人员年轻化的趋势，履带起重机的智能化水平在基础建设、港口建设、及城市建设中发挥的作用越来越大。因此，智能化的辅助驾驶功能成为作业机械竞争激烈的领域，智能化水平的高低体现了竞争产品水平的高低，而且智能化技术在施工过程中也发挥着举足轻重的作用。
发明内容
本发明提出一种用于作业机械安全驾驶的智能辅助方法，用以解决现有技术中作业机械智能化水平低，无法满足日益发展的建设需求的缺陷，通过对目标采集区域内的信息数据流进行采集，实现对应不同情况的不同辅助策略，实现了辅助作业机械的智能化安全驾驶，提升了作业的安全性。
本发明还提出一种用于作业机械安全驾驶的智能辅助装置，用以解决现有技术中作业机械智能化水平低，无法满足日益发展的建设需求的缺陷，通过对目标采集区域内的信息数据流进行采集，实现对应不同情况的不同辅助策略，实现了辅助作业机械的智能化安全驾驶，提升了作业的安全性。
根据本发明第一方面提供的一种用于作业机械安全驾驶的智能辅助方法，包括：获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据所述信息数据流生成对应的多种辅助策略。
根据本发明的一种实施方式，所述获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据所述信息数据流生成对应的多种辅助策略的步骤中，具体包括：
获取所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的人脸图像数据流；
根据每个连续时间节点的人脸图像数据流确定与所述目标采集区域对应的每个疑似人脸区域；
获取相邻两个所述第一预设时间段内所述疑似人脸区域的坐标信息，并根据相邻两个所述疑似人脸区域的坐标信息生成第一关联函数；
根据多个所述第一关联函数确定所述辅助策略。
具体来说，本实施例提供了一种生成辅助策略的实施方式，通过获取在目标采集区域内的人脸图像数据流，根据人脸图像数据流提取疑似人脸区域，并根据疑似人脸区域生成第一关联函数，进而确定所述辅助策略。
根据本发明的一种实施方式，所述根据多个所述第一关联函数确定所述辅助策略的步骤中，具体包括:
获取所述第一关联函数的偏移量，根据相邻两个所述偏移量生成偏移率；
若所述偏移率在预设偏移范围内，则生成至少携带预警提示信号的第一辅助策略；
否则，丢弃所述目标采集区域在该第一预设时间段内的每个连续时间节点采集到的人脸图像数据流。
具体来说，本实施例提供了一种根据多个所述第一关联函数确定所述辅助策略的实施方式，通过确定相邻两个疑似人脸区域，可以识别到人脸的面部表情，进而根据人脸的面部表情做出相应的辅助策略。
在一个应用场景中，通过获取人脸图像数据流可以获知操作人员是否处于疲劳、分神或者其他情感状态，特别的当相邻两个疑似人脸区域的偏移率在预设偏移范围内时，表面操作人员可能处于睡眠或者疲劳驾驶，此时通过预警提示信号对操作人员进行提示，相应的生成至少携带预警提示信的第一辅助策略。
根据本发明的一种实施方式，所述生成至少携带预警提示信号的第一辅助策略的步骤之后，还包括：
响应于所述预警提示信号，持续获取所述目标采集区域在第二预设时间段内的每个连续时间节点采集到的人脸图像数据流；
若在第二预设时间段内，所述偏移率脱离所述预设偏移范围，则丢弃所述第一辅助策略；
否则，生成至少限制作业机械作业功率的第二辅助策略。
具体来说，本实施例提供了另一种根据多个所述第一关联函数确定所述辅助策略的实施方式，通过对第一辅助策略执行之后的第二预设时间段内的人脸图像数据流进行采集，若在第二预设时间段内的偏移率依然没有脱离所述预设偏移范围，则表明此时操作人员可能依然处于睡眠或者疲劳驾驶状态，因此需要对作业机械的作业功率进行限制，进而保证作业机械的安全驾驶和安全作业。
根据本发明的一种实施方式，所述获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据所述信息数据流生成对应的多种辅助策略的步骤中，具体包括：
获取所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的动作图像数据流；
根据每个连续时间节点的动作图像数据流确定与所述目标采集区域对应的每个疑似动作区域；
获取相邻两个所述第一预设时间段内所述疑似动作区域的坐标信息，并根据相邻两个所述疑似动作区域的坐标信息生成第二关联函数；
根据多个所述第二关联函数确定所述辅助策略。
具体来说，本实施例提供了另一种生成辅助策略的实施方式，通过获取在目标采集区域内的动作图像数据流，根据动作图像数据流提取疑似动作区域，并根据疑似动作区域生成第二关联函数，进而确定所述辅助策略。
根据本发明的一种实施方式，所述根据多个所述第二关联函数确定所述辅助策略的步骤中，具体包括：
获取所述第二关联函数的偏移量，根据相邻两个所述偏移量生成疑似动作特征；
若所述疑似动作特征满足预设动作条件，则生成至少限制操作人员作业操作的第三辅助策略；
否则，丢弃所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的动作图像数据流。
具体来说，本实施例提供了一种根据多个所述第二关联函数确定所述辅助策略的实施方式，通过确定相邻两个疑似动作区域，可以识别到操作人员的动作信息，进而根据操作人员的动作信息做出相应的辅助策略。
在一个应用场景中，通过获取动作图像数据流可以获知操作人员是否正在接打电话或者进行不规范操作，当操作人员存在上述情况时，此时通过生成限制操作人员作业操作的第三辅助策略，实现对操作人员的安全驾驶的辅助，限制操作人员作业操作例如可以是限制操作人员对作业机械的加速、大幅度转弯等。
根据本发明的一种实施方式，所述获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据所述信息数据流生成对应的多种辅助策略的步骤中，具体包括：
获取所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的区域图像数据流；
根据每个连续时间节点的区域图像数据流确定与所述目标采集区域对应的每个疑似活体区域；
获取相邻两个所述第一预设时间段内所述疑似活体区域的坐标信息，并根据相邻两个所述疑似活体区域的坐标信息生成第三关联函数；
根据多个所述第三关联函数确定所述辅助策略。
具体来说，本实施例提供了又一种生成辅助策略的实施方式，通过获取在目标采集区域内的区域图像数据流，根据区域图像数据流提取疑似活体区域，并根据疑似活体区域生成第三关联函数，进而确定所述辅助策略。
根据本发明的一种实施方式，所述根据多个所述第三关联函数确定所述辅助策略的步骤中，具体包括：
获取所述第三关联函数的偏移量，根据相邻两个所述偏移量生成疑似活体特征；
若所述疑似活体特征在所述目标采集区域内的数量大于等于二，则生成限制作业机械动作的第四辅助策略；
否则，丢弃所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的区域图像数据流。
具体来说，本实施例提供了一种根据多个所述第三关联函数确定所述辅助策略的实施方式，通过确定相邻两个疑似活体区域，可以识别到目标采集区域内是否有除操作人员以外的其他人员或相应的活体进入，进而根据目标采集区域内的相应情况做出相应的辅助策略。
在一个应用场景中，通过获取区域图像数据流可以获知在目标采集区域内是否有除操作人员之外的其他活体进入，当有其他活体进入目标采集区域时，存在影响操作人员的操作，进而带来风险的情况，因此当目标采集区域内获取到两个及以上的活体时，证明有其他活体进入，此时生成限制作业机械动作的第四辅助策略，作业机械动作例如对作业机械俯仰等执行操作。
根据本发明的一种实施方式，所述根据多个所述第三关联函数确定所述辅助策略的步骤中，具体包括：
获取所述第三关联函数的偏移量，根据相邻两个所述偏移量生成疑似活体特征；
若所述疑似活体特征在所述目标采集区域内的数量小于一，则生成作业机械熄火的第五辅助策略。
具体来说，本实施例提供了又一种根据多个所述第三关联函数确定所述辅助策略的实施方式，通过确定相邻两个疑似活体区域，可以识别到目标采集区域内操作人员是否擅自离岗或者离开操作位置，进而根据目标采集区域内的相应情况做出相应的辅助策略。
在一个应用场景中，通过获取区域图像数据流可以获知在目标采集区域内操作人员是否擅自离岗或者离开操作位置，当操作人员离开操作位置或者目标采集区域时，存在影响操作人员的操作，进而带来风险的情况，因此当操作人员是否擅自离岗或者离开操作位置时，生成作业机械熄火的第五辅助策略，通过第五辅助策略的生成，实现了作业机械的熄火，避免危险事故的发生。
根据本发明第二方面提供的一种用于作业机械安全驾驶的智能辅助装置，执行作业机械安装驾驶的智能辅助时，采用上述的一种用于作业机械安全驾驶的智能辅助方法。
本发明中的上述一个或多个技术方案，至少具有如下技术效果之一：本发明提供的一种用于作业机械安全驾驶的智能辅助方法及装置，通过对目标采集区域内的信息数据流进行采集，实现对应不同情况的不同辅助策略，实现了辅助作业机械的智能化安全驾驶，提升了作业的安全性。
本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明提供的用于作业机械安全驾驶的智能辅助方法流程示意图之一；
图2是本发明提供的用于作业机械安全驾驶的智能辅助方法流程示意图之二。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本发明实施例的描述中，需要说明的是，术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明实施例和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明实施例的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。
在本发明的一些具体实施方案中，如图1和图2所示，本方案提供一种用于作业机械安全驾驶的智能辅助方法，包括：获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据信息数据流生成对应的多种辅助策略。
详细来说，本发明提出一种用于作业机械安全驾驶的智能辅助方法，用以解决现有技术中作业机械智能化水平低，无法满足日益发展的建设需求的缺陷，通过对目标采集区域内的信息数据流进行采集，实现对应不同情况的不同辅助策略，实现了辅助作业机械的智能化安全驾驶，提升了作业的安全性。
在本发明一些可能的实施例中，获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据信息数据流生成对应的多种辅助策略的步骤中，具体包括：
获取目标采集区域在第一预设时间段内的每个连续时间节点采集到的人脸图像数据流；
根据每个连续时间节点的人脸图像数据流确定与目标采集区域对应的每个疑似人脸区域；
获取相邻两个第一预设时间段内疑似人脸区域的坐标信息，并根据相邻两个疑似人脸区域的坐标信息生成第一关联函数；
根据多个第一关联函数确定辅助策略。
具体来说，本实施例提供了一种生成辅助策略的实施方式，通过获取在目标采集区域内的人脸图像数据流，根据人脸图像数据流提取疑似人脸区域，并根据疑似人脸区域生成第一关联函数，进而确定辅助策略。
在本发明一些可能的实施例中，根据多个第一关联函数确定辅助策略的步骤中，具体包括:
获取第一关联函数的偏移量，根据相邻两个偏移量生成偏移率；
若偏移率在预设偏移范围内，则生成至少携带预警提示信号的第一辅助策略；
否则，丢弃目标采集区域在该第一预设时间段内的每个连续时间节点采集到的人脸图像数据流。
具体来说，本实施例提供了一种根据多个第一关联函数确定辅助策略的实施方式，通过确定相邻两个疑似人脸区域，可以识别到人脸的面部表情，进而根据人脸的面部表情做出相应的辅助策略。
在一个应用场景中，通过获取人脸图像数据流可以获知操作人员是否处于疲劳、分神或者其他情感状态，特别的当相邻两个疑似人脸区域的偏移率在预设偏移范围内时，表面操作人员可能处于睡眠、疲劳驾驶，此时通过预警提示信号对操作人员进行提示，相应的生成至少携带预警提示信的第一辅助策略，需要说明的是，当识别到操作人员大笑等面部表情等表明操作人员处于清醒状态时，不会触发辅助策略的响应。
在本发明一些可能的实施例中，生成至少携带预警提示信号的第一辅助策略的步骤之后，还包括：
响应于预警提示信号，持续获取目标采集区域在第二预设时间段内的每个连续时间节点采集到的人脸图像数据流；
若在第二预设时间段内，偏移率脱离预设偏移范围，则丢弃第一辅助策略；
否则，生成至少限制作业机械作业功率的第二辅助策略。
具体来说，本实施例提供了另一种根据多个第一关联函数确定辅助策略的实施方式，通过对第一辅助策略执行之后的第二预设时间段内的人脸图像数据流进行采集，若在第二预设时间段内的偏移率依然没有脱离预设偏移范围，则表明此时操作人员可能依然处于睡眠或者疲劳驾驶状态，因此需要对作业机械的作业功率进行限制，进而保证作业机械的安全驾驶和安全作业。
在本发明一些可能的实施例中，获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据信息数据流生成对应的多种辅助策略的步骤中，具体包括：
获取目标采集区域在第一预设时间段内的每个连续时间节点采集到的动作图像数据流；
根据每个连续时间节点的动作图像数据流确定与目标采集区域对应的每个疑似动作区域；
获取相邻两个第一预设时间段内疑似动作区域的坐标信息，并根据相邻两个疑似动作区域的坐标信息生成第二关联函数；
根据多个第二关联函数确定辅助策略。
具体来说，本实施例提供了另一种生成辅助策略的实施方式，通过获取在目标采集区域内的动作图像数据流，根据动作图像数据流提取疑似动作区域，并根据疑似动作区域生成第二关联函数，进而确定辅助策略。
在本发明一些可能的实施例中，根据多个第二关联函数确定辅助策略的步骤中，具体包括：
获取第二关联函数的偏移量，根据相邻两个偏移量生成疑似动作特征；
若疑似动作特征满足预设动作条件，则生成至少限制操作人员作业操作的第三辅助策略；
否则，丢弃目标采集区域在第一预设时间段内的每个连续时间节点采集到的动作图像数据流。
具体来说，本实施例提供了一种根据多个第二关联函数确定辅助策略的实施方式，通过确定相邻两个疑似动作区域，可以识别到操作人员的动作信息，进而根据操作人员的动作信息做出相应的辅助策略。
在一个应用场景中，通过获取动作图像数据流可以获知操作人员是否正在接打电话或者进行不规范操作，当操作人员存在上述情况时，此时通过生成限制操作人员作业操作的第三辅助策略，实现对操作人员的安全驾驶的辅助，限制操作人员作业操作例如可以是限制操作人员对作业机械的加速、大幅度转弯等，需要说明的是，当操作人员由于长时间工作导致疲劳，发生伸懒腰、弯腰等情况时，不会触发辅助策略的响应。
在本发明一些可能的实施例中，获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据信息数据流生成对应的多种辅助策略的步骤中，具体包括：
获取目标采集区域在第一预设时间段内的每个连续时间节点采集到的区域图像数据流；
根据每个连续时间节点的区域图像数据流确定与目标采集区域对应的每个疑似活体区域；
获取相邻两个第一预设时间段内疑似活体区域的坐标信息，并根据相邻两个疑似活体区域的坐标信息生成第三关联函数；
根据多个第三关联函数确定辅助策略。
具体来说，本实施例提供了又一种生成辅助策略的实施方式，通过获取在目标采集区域内的区域图像数据流，根据区域图像数据流提取疑似活体区域，并根据疑似活体区域生成第三关联函数，进而确定辅助策略。
在本发明一些可能的实施例中，根据多个第三关联函数确定辅助策略的步骤中，具体包括：
获取第三关联函数的偏移量，根据相邻两个偏移量生成疑似活体特征；
若疑似活体特征在目标采集区域内的数量大于等于二，则生成限制作业机械动作的第四辅助策略；
否则，丢弃目标采集区域在第一预设时间段内的每个连续时间节点采集到的区域图像数据流。
具体来说，本实施例提供了一种根据多个第三关联函数确定辅助策略的实施方式，通过确定相邻两个疑似活体区域，可以识别到目标采集区域内是否有除操作人员以外的其他人员或相应的活体进入，进而根据目标采集区域内的相应情况做出相应的辅助策略。
在一个应用场景中，通过获取区域图像数据流可以获知在目标采集区域内是否有除操作人员之外的其他活体进入，当有其他活体进入目标采集区域时，存在影响操作人员的操作，进而带来风险的情况，因此当目标采集区域内获取到两个及以上的活体时，证明有其他活体进入，此时生成限制作业机械动作的第四辅助策略，作业机械动作例如对作业机械俯仰等执行操作。
在本发明一些可能的实施例中，根据多个第三关联函数确定辅助策略的步骤中，具体包括：
获取第三关联函数的偏移量，根据相邻两个偏移量生成疑似活体特征；
若疑似活体特征在目标采集区域内的数量小于一，则生成作业机械熄火的第五辅助策略。
具体来说，本实施例提供了又一种根据多个第三关联函数确定辅助策略的实施方式，通过确定相邻两个疑似活体区域，可以识别到目标采集区域内操作人员是否擅自离岗或者离开操作位置，进而根据目标采集区域内的相应情况做出相应的辅助策略。
在一个应用场景中，通过获取区域图像数据流可以获知在目标采集区域内操作人员是否擅自离岗或者离开操作位置，当操作人员离开操作位置或者目标采集区域时，存在影响操作人员的操作，进而带来风险的情况，因此当操作人员是否擅自离岗或者离开操作位置时，生成作业机械熄火的第五辅助策略，通过第五辅助策略的生成，实现了作业机械的熄火，避免危险事故的发生。
在本发明的一些具体实施方案中，本方案提供一种用于作业机械安全驾驶的智能辅助装置，执行作业机械安装驾驶的智能辅助时，采用上述的一种用于作业机械安全驾驶的智能辅助方法。
详细来说，本发明还提出一种用于作业机械安全驾驶的智能辅助装置，用以解决现有技术中作业机械智能化水平低，无法满足日益发展的建设需求的缺陷，通过对目标采集区域内的信息数据流进行采集，实现对应不同情况的不同辅助策略，实现了辅助作业机械的智能化安全驾驶，提升了作业的安全性。
在本发明实施例的描述中，需要说明的是，除非另有明确的规定和限定，术语“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明实施例中的具体含义。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明实施例的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
最后应说明的是：以上实施方式仅用于说明本发明，而非对本发明的限制。尽管参照实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，对本发明的技术方案进行各种组合、修改或者等同替换，都不脱离本发明技术方案的精神和范围，均应涵盖在本发明的权利要求范围中。
Claims (8)
1.一种用于作业机械安全驾驶的智能辅助方法，其特征在于，包括：获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据所述信息数据流生成对应的多种辅助策略；
其中，所述获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据所述信息数据流生成对应的多种辅助策略的步骤中，具体包括：
获取所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的人脸图像数据流；
根据每个连续时间节点的人脸图像数据流确定与所述目标采集区域对应的每个疑似人脸区域；
获取相邻两个所述第一预设时间段内所述疑似人脸区域的坐标信息，并根据相邻两个所述疑似人脸区域的坐标信息生成第一关联函数；
根据多个所述第一关联函数确定所述辅助策略；
其中，所述根据多个所述第一关联函数确定所述辅助策略的步骤中，具体包括:
获取所述第一关联函数的偏移量，根据相邻两个所述偏移量生成偏移率；
若所述偏移率在预设偏移范围内，则生成至少携带预警提示信号的第一辅助策略；
否则，丢弃所述目标采集区域在该第一预设时间段内的每个连续时间节点采集到的人脸图像数据流。
2.根据权利要求1所述的一种用于作业机械安全驾驶的智能辅助方法，其特征在于，所述生成至少携带预警提示信号的第一辅助策略的步骤之后，还包括：
响应于所述预警提示信号，持续获取所述目标采集区域在第二预设时间段内的每个连续时间节点采集到的人脸图像数据流；
若在第二预设时间段内，所述偏移率脱离所述预设偏移范围，则丢弃所述第一辅助策略；
否则，生成至少限制作业机械作业功率的第二辅助策略。
3.根据权利要求1所述的一种用于作业机械安全驾驶的智能辅助方法，其特征在于，所述获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据所述信息数据流生成对应的多种辅助策略的步骤中，具体包括：
获取所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的动作图像数据流；
根据每个连续时间节点的动作图像数据流确定与所述目标采集区域对应的每个疑似动作区域；
获取相邻两个所述第一预设时间段内所述疑似动作区域的坐标信息，并根据相邻两个所述疑似动作区域的坐标信息生成第二关联函数；
根据多个所述第二关联函数确定所述辅助策略。
4.根据权利要求3所述的一种用于作业机械安全驾驶的智能辅助方法，其特征在于，所述根据多个所述第二关联函数确定所述辅助策略的步骤中，具体包括：
获取所述第二关联函数的偏移量，根据相邻两个所述偏移量生成疑似动作特征；
若所述疑似动作特征满足预设动作条件，则生成至少限制操作人员作业操作的第三辅助策略；
否则，丢弃所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的动作图像数据流。
5.根据权利要求1所述的一种用于作业机械安全驾驶的智能辅助方法，其特征在于，所述获取目标采集区域在第一预设时间段内的每个连续时间节点所采集到的信息数据流，并根据所述信息数据流生成对应的多种辅助策略的步骤中，具体包括：
获取所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的区域图像数据流；
根据每个连续时间节点的区域图像数据流确定与所述目标采集区域对应的每个疑似活体区域；
获取相邻两个所述第一预设时间段内所述疑似活体区域的坐标信息，并根据相邻两个所述疑似活体区域的坐标信息生成第三关联函数；
根据多个所述第三关联函数确定所述辅助策略。
6.根据权利要求5所述的一种用于作业机械安全驾驶的智能辅助方法，其特征在于，所述根据多个所述第三关联函数确定所述辅助策略的步骤中，具体包括：
获取所述第三关联函数的偏移量，根据相邻两个所述偏移量生成疑似活体特征；
若所述疑似活体特征在所述目标采集区域内的数量大于等于二，则生成限制作业机械动作的第四辅助策略；
否则，丢弃所述目标采集区域在第一预设时间段内的每个连续时间节点采集到的区域图像数据流。
7.根据权利要求5所述的一种用于作业机械安全驾驶的智能辅助方法，其特征在于，所述根据多个所述第三关联函数确定所述辅助策略的步骤中，具体包括：
获取所述第三关联函数的偏移量，根据相邻两个所述偏移量生成疑似活体特征；
若所述疑似活体特征在所述目标采集区域内的数量小于一，则生成作业机械熄火的第五辅助策略。
8.一种用于作业机械安全驾驶的智能辅助装置，其特征在于，执行作业机械安装驾驶的智能辅助时，采用上述权利要求1至7任一所述的一种用于作业机械安全驾驶的智能辅助方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110025489.8A CN112677981B (zh) | 2021-01-08 | 2021-01-08 | 用于作业机械安全驾驶的智能辅助方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110025489.8A CN112677981B (zh) | 2021-01-08 | 2021-01-08 | 用于作业机械安全驾驶的智能辅助方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112677981A CN112677981A (zh) | 2021-04-20 |
| CN112677981B true CN112677981B (zh) | 2022-06-07 |
Family
ID=75456536
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110025489.8A Active CN112677981B (zh) | 2021-01-08 | 2021-01-08 | 用于作业机械安全驾驶的智能辅助方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112677981B (zh) |
Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2497670A1 (en) * | 2011-03-11 | 2012-09-12 | Johnson Controls Automotive Electronics GmbH | Method and apparatus for monitoring the alertness of the driver of a vehicle |
| KR20170017616A (ko) * | 2015-08-07 | 2017-02-15 | 현대모비스 주식회사 | 운전 보조 장치 및 방법 |
| CN107985199A (zh) * | 2017-12-29 | 2018-05-04 | 吉林大学 | 一种客车驾驶员工作状态检测与疲劳警示系统及方法 |
| CN108583279A (zh) * | 2018-04-02 | 2018-09-28 | 北汽福田汽车股份有限公司 | 车辆的熄火方法、熄火系统和车辆 |
| CN108860165A (zh) * | 2018-05-11 | 2018-11-23 | 深圳市图灵奇点智能科技有限公司 | 车辆辅助驾驶方法和系统 |
| CN109278753A (zh) * | 2018-09-27 | 2019-01-29 | 北京理工大学 | 一种基于驾驶员视觉可见信息的智能车辆辅助驾驶方法 |
| CN110246304A (zh) * | 2019-06-27 | 2019-09-17 | 北京三一智造科技有限公司 | 疲劳提醒系统及方法 |
| CN110765967A (zh) * | 2019-10-30 | 2020-02-07 | 腾讯科技（深圳）有限公司 | 一种基于人工智能的动作识别方法和相关装置 |
| CN110775825A (zh) * | 2019-10-31 | 2020-02-11 | 三一海洋重工有限公司 | 起重机大车防撞系统和方法 |
| CN110979180A (zh) * | 2019-12-25 | 2020-04-10 | 三一汽车制造有限公司 | 防止危险驾驶的控制方法、装置和车辆 |
| DE102018129801A1 (de) * | 2018-11-26 | 2020-05-28 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren und Vorrichtung zum Ermitteln einer erforderlichen Aufmerksamkeit eines Fahrers eines Fahrzeugs |
| CN111582167A (zh) * | 2020-05-08 | 2020-08-25 | 上海振华重工(集团)股份有限公司 | 集装箱起重机司机操作安全识别方法、系统、计算设备 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010006362A (ja) * | 2008-05-27 | 2010-01-14 | Tokai Rika Co Ltd | 乗員撮像装置及び居眠り防止装置 |
| US9460601B2 (en) * | 2009-09-20 | 2016-10-04 | Tibet MIMAR | Driver distraction and drowsiness warning and sleepiness reduction for accident avoidance |
| CN103047408B (zh) * | 2012-12-24 | 2015-12-02 | 三一重工股份有限公司 | 一种自动变速器换档方法及车辆 |
| RU2596062C1 (ru) * | 2015-03-20 | 2016-08-27 | Автономная Некоммерческая Образовательная Организация Высшего Профессионального Образования "Сколковский Институт Науки И Технологий" | Способ коррекции изображения глаз с использованием машинного обучения и способ машинного обучения |
| US9586591B1 (en) * | 2015-05-04 | 2017-03-07 | State Farm Mutual Automobile Insurance Company | Real-time driver observation and progress monitoring |
| JP6778872B2 (ja) * | 2016-06-28 | 2020-11-04 | パナソニックＩｐマネジメント株式会社 | 運転支援装置及び運転支援方法 |
| CN108009495A (zh) * | 2017-11-30 | 2018-05-08 | 西安科锐盛创新科技有限公司 | 疲劳驾驶预警方法 |
| CN110395260B (zh) * | 2018-04-20 | 2021-12-07 | 比亚迪股份有限公司 | 车辆、安全驾驶方法和装置 |
| CN111661059B (zh) * | 2019-03-08 | 2022-07-08 | 虹软科技股份有限公司 | 分心驾驶监测方法、系统及电子设备 |
| CN111274881A (zh) * | 2020-01-10 | 2020-06-12 | 中国平安财产保险股份有限公司 | 驾驶安全的监控方法、装置、计算机设备及存储介质 |
-
2021
- 2021-01-08 CN CN202110025489.8A patent/CN112677981B/zh active Active
Patent Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2497670A1 (en) * | 2011-03-11 | 2012-09-12 | Johnson Controls Automotive Electronics GmbH | Method and apparatus for monitoring the alertness of the driver of a vehicle |
| KR20170017616A (ko) * | 2015-08-07 | 2017-02-15 | 현대모비스 주식회사 | 운전 보조 장치 및 방법 |
| CN107985199A (zh) * | 2017-12-29 | 2018-05-04 | 吉林大学 | 一种客车驾驶员工作状态检测与疲劳警示系统及方法 |
| CN108583279A (zh) * | 2018-04-02 | 2018-09-28 | 北汽福田汽车股份有限公司 | 车辆的熄火方法、熄火系统和车辆 |
| CN108860165A (zh) * | 2018-05-11 | 2018-11-23 | 深圳市图灵奇点智能科技有限公司 | 车辆辅助驾驶方法和系统 |
| CN109278753A (zh) * | 2018-09-27 | 2019-01-29 | 北京理工大学 | 一种基于驾驶员视觉可见信息的智能车辆辅助驾驶方法 |
| DE102018129801A1 (de) * | 2018-11-26 | 2020-05-28 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren und Vorrichtung zum Ermitteln einer erforderlichen Aufmerksamkeit eines Fahrers eines Fahrzeugs |
| CN110246304A (zh) * | 2019-06-27 | 2019-09-17 | 北京三一智造科技有限公司 | 疲劳提醒系统及方法 |
| CN110765967A (zh) * | 2019-10-30 | 2020-02-07 | 腾讯科技（深圳）有限公司 | 一种基于人工智能的动作识别方法和相关装置 |
| CN110775825A (zh) * | 2019-10-31 | 2020-02-11 | 三一海洋重工有限公司 | 起重机大车防撞系统和方法 |
| CN110979180A (zh) * | 2019-12-25 | 2020-04-10 | 三一汽车制造有限公司 | 防止危险驾驶的控制方法、装置和车辆 |
| CN111582167A (zh) * | 2020-05-08 | 2020-08-25 | 上海振华重工(集团)股份有限公司 | 集装箱起重机司机操作安全识别方法、系统、计算设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112677981A (zh) | 2021-04-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112216049A (zh) | 一种基于图像识别的施工警戒区监测预警系统及方法 | |
| CN105979210A (zh) | 一种基于多枪多球摄像机阵列的行人识别系统 | |
| CN107798918A (zh) | 一种交通事故现场安全防护监测方法和装置 | |
| CN111242025B (zh) | 一种基于yolo的动作实时监测方法 | |
| CN107941273A (zh) | 一种带电作业安全预警方法和装置 | |
| CN110334592A (zh) | 一种司机异常行为监测和安全保障系统及其方法 | |
| CN108229245A (zh) | 基于面部视频特征的疲劳驾驶检测方法 | |
| CN113033503A (zh) | 一种多特征融合的危险驾驶行为检测方法及系统 | |
| CN111242004A (zh) | 一种基于电梯监控数据处理的自动告警方法及系统 | |
| JP2009045418A (ja) | 眠気判定装置，プログラムおよび眠気判定方法 | |
| CN112677981B (zh) | 用于作业机械安全驾驶的智能辅助方法及装置 | |
| CN112699802A (zh) | 一种驾驶员微表情检测装置及方法 | |
| CN107230391A (zh) | 桥梁主动防船撞系统及其使用方法 | |
| JP2021061903A (ja) | 運転者状態判定装置 | |
| CN205722310U (zh) | 一种基于视频序列的列车驾驶员行为识别系统 | |
| JP3312562B2 (ja) | 居眠り状態検出装置 | |
| CN206301463U (zh) | 交通安全监管系统 | |
| CN116789016B (zh) | 一种智慧工地塔机的运行隐患监控方法及设备 | |
| CN112153352A (zh) | 一种基于深度学习的无人机疫情监测辅助方法及其装置 | |
| CN116965781B (zh) | 一种驾驶员生命体征和驾驶行为监控方法及系统 | |
| CN106970630A (zh) | 一种机器人主动提供服务的方法及装置、机器人 | |
| CN106803937A (zh) | 一种具有文本日志的双摄像头视频监控方法及系统 | |
| CN111783717B (zh) | 一种生物特征运动模态智能识别方法及其应用 | |
| CN109344705A (zh) | 一种行人行为检测方法和系统 | |
| CN116030404A (zh) | 一种基于人工智能的作业区域电子警戒围栏架设和安全监控方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |