CN110705491A - 一种电力工人铁塔辅助作业的方法及系统 - Google Patents

一种电力工人铁塔辅助作业的方法及系统 Download PDF

Info

Publication number
CN110705491A
CN110705491A CN201910958093.1A CN201910958093A CN110705491A CN 110705491 A CN110705491 A CN 110705491A CN 201910958093 A CN201910958093 A CN 201910958093A CN 110705491 A CN110705491 A CN 110705491A
Authority
CN
China
Prior art keywords
data
attitude
computer
iron tower
video data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910958093.1A
Other languages
English (en)
Inventor
山炳强
任宝森
张睿
尹国慧
任艺飞
赵国栋
高树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao University
Original Assignee
Qingdao University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao University filed Critical Qingdao University
Priority to CN201910958093.1A priority Critical patent/CN110705491A/zh
Publication of CN110705491A publication Critical patent/CN110705491A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开一种电力工人铁塔辅助作业的方法及系统,包括姿态数据采集系统,用于采集作业人员的姿态数据;视频数据采集系统,用于采集作业人员周围全方位的视频数据;数据读取系统,用于读取姿态数据与视频数据;上位机,用于识别姿态数据;路由器,用于提供网络移动热点;计算机,用于显示人体运动姿态和视频信息;所述姿势数据采集系统、视频数据采集系统与数据读取系统的一端连接,数据读取系统的另一端与路由器的一端、计算机的一端连接,路由器的另一端与上位机的一端连接,上位机的另一端与计算机另一端连接;本发明能够全方位的采集作业人员周围的环境图像信息,实时多方位的对铁塔作业人员进行监护。

Description

一种电力工人铁塔辅助作业的方法及系统
技术领域
本发明涉及姿态识别及图像采集传输领域,特别是涉及一种电力工人铁塔辅助作业的方法及系统。
背景技术
随着特高压技术的快速发展,电力铁塔随着电压等级的增高而快速增高,因此电力作业人员在铁塔上工作时,由于距离及铁塔作业的特殊性,目前监护人只能使用望远镜或者登塔进行监护,该方式使得监护人员难以周密的监护电力工人在电力铁塔上作业,还会存在以下问题:
当监护人员塔下监护时,由于距离过于遥远,望远镜无法细致的观察到塔上作业人员具体作业情况,特别是进行细微操作时,监护难度更大;当监护人员在登塔监护作业时,由于塔身作业空间限制,无法实时多方位的对铁塔作业人员进行监护,存在监护不周密的风险,因此,如何实时的检测铁塔作业人员自身的工作状态,以及全方位的采集作业人员周围的环境图像信息就显得尤为重要。
发明内容
本发明的目的是提供一种电力工人铁塔辅助作业的方法及系统,以解决上述现有技术存在的问题,使电力工人铁塔辅助作业时的安全问题得到有效监护。
为实现上述目的,本发明提供了如下方案:本发明提供一种基于姿态识别和图像采集传输技术的电力工人铁塔辅助作业的系统,包括姿态数据采集系统,用于采集作业人员的姿态数据;视频数据采集系统,用于采集作业人员周围全方位的视频数据;数据读取系统,用于读取姿态数据与视频数据;上位机,用于识别姿态数据;路由器,用于提供网络移动热点;计算机,用于显示人体运动姿态和视频信息;所述姿势数据采集系统、视频数据采集系统与数据读取系统的一端连接,数据读取系统的另一端与路由器的一端、计算机的一端连接,路由器的另一端与上位机的一端连接,上位机的另一端与计算机另一端连接。
优选的,姿态数据采集系统为IMU系统,所述IMU系统通过14个九轴姿态传感器,分别采集人体的左右手的手部、前肘、后肘,头部,颈部,躯干上部分、下部分,左右下肢上部分、下部分、脚部的角度和角加速度数据。
优选的,所述视频采集系统采用三个USB式的高清摄像头,分别采集作业人员正前方、左后方和右后方的视频数据,两两摄像头之间相差120度。
优选的,所述数据读取系统为LINUX系统的ARM板。
优选的,每个所述九轴姿态传感器使用一个单片机进行数据采集,同时进行组网,将姿态数据传输到数据读取系统。
优选的,所述IMU系统采用的MSP430G2553单片机作为系统的核心。
优选的,还包括电源模块,用于为姿态数据采集系统、视频数据采集系统、数据读取系统、上位机、计算机供电。
一种电力工人铁塔辅助作业的方法,包括如下步骤:S1、使用IMU系统采集作业人员的姿态数据,通过14个九轴姿态传感器MPU9250,分别采集人体的左右手的手部、前肘、后肘,头部,颈部,躯干上部分、下部分,左右下肢上部分、下部分、脚部的角度和角加速度数据,每个所述九轴姿态传感器使用一个单片机进行数据采集,同时进行组网,将姿态数据传输到LINUX系统的 ARM板,将所述角度和角加速度数据,先经过通过四元数法进行四元数解算,得到所处方位的三轴姿态角,再经过卡尔曼滤波算法,融合计算出人体各部分姿态数据,再将长期采集的人体各部分姿态动作数据和各部分实际动作,通过神经网络算法,学习运算出各部分姿态的数据阈值;
S2、通过无线网卡访问路由器,将数据传输到云服务器中,用于供电网工作人员及时查取与调用作业工人的姿态情况、获取工作环境的视频数据等,从而更好地指导电力工人铁塔作业;
S3、运行LINUX系统的ARM板,读取IMU系统上传的姿态数据,同时读取三个高清摄像头拍摄的视频数据,分别采集作业人员正前方、左后方和右后方的视频数据,将所述视频数据进行H264压缩后,再将压缩后的视频数据与姿态数据通过无线网卡传输到服务器上;
S4、采用路由器,为作业时能够提供移动的网络热点;
S5、将传输来的姿态数据,输入计算机的上位机进行姿态识别,在计算机上显示出人体运动姿态;
S6、将步骤S3中压缩的视频数据,显示在计算机上,实现对作业人员周围全方位的图像数据采集。
本发明公开了以下技术效果:本发明提供一种能够对电力工人铁塔作业时的进行姿态识别和前方图像采集,即全方位的采集作业人员周围的环境图像信息,然后将姿态和图像进行压缩传输到上位机显示,通过采集电力工人铁塔作业时各类状态数据,创建电力工人铁塔作业的姿态数据库;采集现场电力工人作业时的状态数据,依据状态数据识别电力工人的工作形态,进而判断电力工人工作行为是否合规;本发明不受塔身作业空间限制,降低监护难度,能够实时多方位的对铁塔作业人员进行监护,监护更加周密,从而解决铁塔作业时专责监护人无法有效监护电力工人铁塔作业状况的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明结构示意图;
图2为本发明的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为使本发明的上述目的、特征及优点能够更加明显易懂,下面结合附图及具体实施方式对本发明作进一步详细的说明。
参照图1-2所示,本发明提供一种电力工人铁塔辅助作业的方法及系统,姿态数据采集系统,用于采集作业人员的姿态数据;视频数据采集系统,用于采集作业人员周围全方位的视频数据;数据读取系统,用于读取姿态数据与视频数据;上位机,用于识别姿态数据;路由器,用于提供网络移动热点;计算机,用于显示人体运动姿态和视频信息;所述姿势数据采集系统、视频数据采集系统与数据读取系统的一端连接,数据读取系统的另一端与路由器的一端连接,路由器的另一端与上位机的一端连接,上位机的另一端与计算机连接。
进一步地,姿态数据采集系统为IMU系统,所述IMU系统通过14个九轴姿态传感器,分别采集人体的左右手的手部、前肘、后肘,头部,颈部,躯干上部分、下部分,左右下肢上部分、下部分、脚部的角度和角加速度数据。
进一步地,所述视频采集系统采用三个USB式的高清摄像头,分别采集作业人员正前方、左后方和右后方的视频数据,两两摄像头之间相差120度。
进一步地,所述数据读取系统为LINUX系统的ARM板。
进一步地,每个所述九轴姿态传感器使用一个单片机进行数据采集,同时使用zigbee芯片进行组网,将姿态数据传输到数据读取系统。
进一步地,所述IMU系统采用的MSP430G2553单片机作为系统的核心。
进一步地,还包括电源模块,用于为姿态数据采集系统、视频数据采集系统、数据读取系统、上位机、计算机供电,所述电源模块为锂电池,所述锂电池电压经过电压升压芯片再降压,用于为姿态数据采集系统、视频数据采集系统、数据读取系统、上位机、路由器,当锂电池电压低于3.7V时,电压升压芯片输出3.7V;当电池电压高于3.7V时,电压升压芯片输出锂电池电压,进一步增加电池的电能输出能力。
一种基于姿态识别及图像采集传输技术的电力工人铁塔辅助作业的方法,包括如下步骤:
S1:使用IMU系统采集作业人员的姿态数据,通过14个九轴姿态传感器 MPU9250,分别采集人体的左右手的手部、前肘、后肘,头部,颈部,躯干上部分、下部分,左右下肢上部分、下部分、脚部的角度和角加速度数据,每个所述九轴姿态传感器使用一个单片机进行数据采集,同时使用zigbee芯片进行组网,将姿态数据传输到LINUX系统的ARM板,将所述角度和角加速度数据,先经过通过四元数法进行四元数解算,得到所处方位的三轴姿态角,再经过卡尔曼滤波算法,融合计算出人体各部分姿态数据,再将长期采集的人体各部分姿态动作数据和各部分实际动作,通过神经网络算法,学习运算出各部分姿态的数据阈值;
S2:通过无线网卡访问路由器,将数据传输到云服务器中,用于供电网工作人员及时查取与调用作业工人的姿态情况、获取工作环境的视频数据等,从而更好地指导电力工人铁塔作业;
S3、运行LINUX系统的ARM板,读取IMU系统上传的姿态数据,同时读取三个高清摄像头拍摄的视频数据,分别采集作业人员正前方、左后方和右后方的视频数据,将所述视频数据进行H264压缩后,再将压缩后的视频数据与姿态数据通过无线网卡传输到服务器上;
S4、采用路由器,为作业时能够提供移动的网络热点;
S5、将传输来的姿态数据,输入计算机的上位机进行姿态识别,在计算机上显示出人体运动姿态;
S6、将步骤S3中压缩的视频数据,显示在计算机上,实现对作业人员周围全方位的图像数据采集。
本发明提供一种能够对电力工人铁塔作业时的进行姿态识别和前方图像采集,即全方位的采集作业人员周围的环境图像信息,然后将姿态和图像进行压缩传输到上位机显示,通过采集电力工人铁塔作业时各类状态数据,创建电力工人铁塔作业的姿态数据库;采集现场电力工人作业时的状态数据,依据状态数据识别电力工人的工作形态,进而判断电力工人工作行为是否合规;本发明不受塔身作业空间限制,降低监护难度,能够实时多方位的对铁塔作业人员进行监护,监护更加周密,从而解决铁塔作业时专责监护人无法有效监护电力工人铁塔作业状况的问题。
在本发明的描述中,需要理解的是,术语“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造及操作,因此不能理解为对本发明的限制。
以上所述的实施例仅是对本发明的优选方式进行描述,并非对本发明的范围进行限定,在不脱离本发明设计精神的前提下,本领域普通技术人员对本发明的技术方案做出的各种变形及改进,均应落入本发明权利要求书确定的保护范围内。

Claims (8)

1.一种电力工人铁塔辅助作业的方法及系统,其特征在于:包括姿态数据采集系统,用于采集作业人员的姿态数据;视频数据采集系统,用于采集作业人员周围全方位的视频数据;数据读取系统,用于读取姿态数据与视频数据;上位机,用于识别姿态数据;路由器,用于提供网络移动热点;计算机,用于显示人体运动姿态和视频信息;所述姿势数据采集系统、视频数据采集系统与数据读取系统的一端连接,数据读取系统的另一端与路由器的一端、计算机的一端连接,路由器的另一端与上位机的一端连接,上位机的另一端与计算机另一端连接。
2.根据权利要求1所述的电力工人铁塔辅助作业的方法及系统,其特征在于:姿态数据采集系统为IMU系统,所述IMU系统通过14个九轴姿态传感器,分别采集人体的左右手的手部、前肘、后肘,头部,颈部,躯干上部分、下部分,左右下肢上部分、下部分、脚部的角度和角加速度数据。
3.根据权利要求1所述的电力工人铁塔辅助作业的方法及系统,其特征在于:所述视频采集系统采用三个USB式的高清摄像头,分别采集作业人员正前方、左后方和右后方的视频数据,两两摄像头之间相差120度。
4.根据权利要求1所述的电力工人铁塔辅助作业的方法及系统,其特征在于:所述数据读取系统为LINUX系统的ARM板。
5.根据权利要求2所述的电力工人铁塔辅助作业的方法及系统,其特征在于:每个所述九轴姿态传感器使用一个单片机进行数据采集,同时进行组网,将姿态数据传输到数据读取系统。
6.根据权利要求2所述的电力工人铁塔辅助作业的方法及系统,其特征在于:所述IMU系统采用的MSP430G2553单片机作为系统的核心。
7.根据权利要求1所述的电力工人铁塔辅助作业的方法及系统,其特征在于:还包括电源模块,用于为姿态数据采集系统、视频数据采集系统、数据读取系统、上位机、计算机供电。
8.一种电力工人铁塔辅助作业的方法,其特征在于:包括如下步骤
S1、使用IMU系统采集作业人员的姿态数据,通过14个九轴姿态传感器MPU9250,分别采集人体的左右手的手部、前肘、后肘,头部,颈部,躯干上部分、下部分,左右下肢上部分、下部分、脚部的角度和角加速度数据,每个所述九轴姿态传感器使用一个单片机进行数据采集,同时进行组网,将姿态数据传输到LINUX系统的ARM板,将所述角度和角加速度数据先经过通过四元数法进行四元数解算,得到所处方位的三轴姿态角,再经过卡尔曼滤波算法,融合计算出人体各部分姿态数据,再将长期采集的人体各部分姿态动作数据和各部分实际动作,通过神经网络算法,学习运算出各部分姿态的数据阈值;
S2、通过无线网卡访问路由器,将数据传输到云服务器中,用于供电网工作人员及时查取与调用作业工人的姿态情况、获取工作环境的视频数据等,从而更好地指导电力工人铁塔作业;
S3、运行LINUX系统的ARM板,读取IMU系统上传的姿态数据,同时读取三个高清摄像头拍摄的视频数据,分别采集作业人员正前方、左后方和右后方的视频数据,将所述视频数据进行H264压缩后,再将压缩后的视频数据与姿态数据通过无线网卡传输到云服务器上;
S4、采用路由器,为作业时能够提供移动的网络热点;
S5、将传输来的姿态数据,输入计算机的上位机进行姿态识别,在计算机上显示出人体运动姿态;
S6、将步骤S3中压缩的视频数据,显示在计算机上,实现对作业人员周围全方位的图像数据采集。
CN201910958093.1A 2019-10-10 2019-10-10 一种电力工人铁塔辅助作业的方法及系统 Pending CN110705491A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910958093.1A CN110705491A (zh) 2019-10-10 2019-10-10 一种电力工人铁塔辅助作业的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910958093.1A CN110705491A (zh) 2019-10-10 2019-10-10 一种电力工人铁塔辅助作业的方法及系统

Publications (1)

Publication Number Publication Date
CN110705491A true CN110705491A (zh) 2020-01-17

Family

ID=69199204

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910958093.1A Pending CN110705491A (zh) 2019-10-10 2019-10-10 一种电力工人铁塔辅助作业的方法及系统

Country Status (1)

Country Link
CN (1) CN110705491A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116058829A (zh) * 2022-12-26 2023-05-05 青岛大学 基于imu的实时显示人体下肢姿态的系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104461013A (zh) * 2014-12-25 2015-03-25 中国科学院合肥物质科学研究院 一种基于惯性传感单元的人体动作重构与分析系统及方法
US20180189466A1 (en) * 2016-12-29 2018-07-05 Qualcomm Incorporated Device authentication based on behavior classification using convolution neural network
CN108256433A (zh) * 2017-12-22 2018-07-06 银河水滴科技(北京)有限公司 一种运动姿态评估方法及系统
CN207589051U (zh) * 2017-12-21 2018-07-06 广州供电局有限公司 电网作业监控系统
CN208225253U (zh) * 2018-01-30 2018-12-11 国网陕西省电力公司安康水力发电公司 一种高空作业防坠可视化监测预警系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104461013A (zh) * 2014-12-25 2015-03-25 中国科学院合肥物质科学研究院 一种基于惯性传感单元的人体动作重构与分析系统及方法
US20180189466A1 (en) * 2016-12-29 2018-07-05 Qualcomm Incorporated Device authentication based on behavior classification using convolution neural network
CN207589051U (zh) * 2017-12-21 2018-07-06 广州供电局有限公司 电网作业监控系统
CN108256433A (zh) * 2017-12-22 2018-07-06 银河水滴科技(北京)有限公司 一种运动姿态评估方法及系统
CN208225253U (zh) * 2018-01-30 2018-12-11 国网陕西省电力公司安康水力发电公司 一种高空作业防坠可视化监测预警系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
胡佳佳: "基于MEMS-IMU与数据融合的自平衡机器人姿态测控系统研究与设计", 《中国优秀硕士学位论文全文数据库(电子期刊)》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116058829A (zh) * 2022-12-26 2023-05-05 青岛大学 基于imu的实时显示人体下肢姿态的系统

Similar Documents

Publication Publication Date Title
CN202218347U (zh) 一种动作姿态捕捉装置及系统
CN107357311B (zh) 一种基于混合控制技术的无人机侦察系统
CN104317403B (zh) 一种用于手语识别的可穿戴设备
CN104461013A (zh) 一种基于惯性传感单元的人体动作重构与分析系统及方法
CN103895022A (zh) 穿戴式体感控制机械手
CN206178668U (zh) 用于虚拟现实的动作捕捉装置
CN202908702U (zh) 微型无线三维空间姿态采集装置
CN105067630A (zh) 斜拉索pe保护层损伤检测装置及其控制电路、控制方法
CN204855400U (zh) 斜拉索pe保护层损伤检测装置及其控制电路
CN103399577A (zh) 一种远程操作救援机器人的探测感知系统
CN110223413A (zh) 智能巡检方法、装置、计算机存储介质和电子设备
CN214912972U (zh) 搭载于机械狗的ai的计算机视觉消防监测和识别系统
CN106390420B (zh) 一种运动数据的采集处理系统
JP3220534U (ja) 変電所点検の移動検査作業に用いられるウェアラブル装備
CN109015706A (zh) 电缆隧道巡检机器人头盔式虚拟控制终端
CN110705491A (zh) 一种电力工人铁塔辅助作业的方法及系统
CN203931065U (zh) 一种电力作业现场安全区域预警装置
CN104851253A (zh) 一种服装用智能系统
CN205968985U (zh) 一种基于智能移动终端控制的便携式侦查机器人
CN109567819A (zh) 一种基于pvdf传感器阵列的可穿戴式装置
CN111412952A (zh) 一种工业环境可穿戴式设备
CN106932688B (zh) 输电线检测仪及基于无人机的输电线检测系统
CN203012745U (zh) 一种基于动作识别的人体异常行为检测与预警系统
CN105187777A (zh) 一种侦测球及其摄像头回收方法、侦测系统
CN215706776U (zh) 一种基于Mesh组网的智能视频巡检小车

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200117

RJ01 Rejection of invention patent application after publication