CN112950524A - 一种铺贴操作监控方法及装置 - Google Patents

Abstract

本发明实施例提供了一种铺贴操作监控方法，包括：获取操作人员的操作图像信息；根据所述操作人员的操作图像信息确定操作质量结果；在操作质量结果不合格时生成警示信息并发送至人机交互显示屏以及报警设备。本发明实施例所提出的一种铺贴操作监控方法，可对于大部分手工铺贴成型的零件给予实时监控，适用范围广，监控方式简单方便且有效，可复制性强，通过对生产操作的监控，及时发现误操作情况，并且在发生误操作时给予提示和预警，避免操作人员疏忽导致产生不良品，提高质量把关能力，精准的对质量进行监测。

Description

一种铺贴操作监控方法及装置

技术领域

本发明实施例涉及复合材料加工领域，尤其涉及一种铺贴操作监控方法及装置。

背景技术

民用飞机对复合材料有着极为严苛的要求，不仅需要考虑复合材料的静力、疲劳和损伤容限、颤振和其他气动弹性不稳定性，而且还要考虑材料的耐撞损性，防火、可燃性和热问题，闪电防护，尤其是对于发生偏离零件的使用限制更加严格。

传统的铺贴工艺是通过大量人工完成，当操作人员完铺贴工序后，由质检人员对铺贴的成品进行质量检测，杜绝操作人员的误操作，保证产品的质量上乘。

通过质检人员对生产成品进行检测，虽然可以在一定程度上减少不合格产品率，但耗时巨大，所需质检人员也非常多，每个质检人员的工作量也会非常大，在质检人员在检测过程中，也会存在人为失误，漏检或者忽略成品中的一些缺陷，导致不合格产品没有被发现，并且大量的质检员对成品进行质检，效率较低，拉长了生产的周期，提高了生产成本。另外，如果质检人员对零部件的质检发生在零部件已经铺贴完成后，此时发现成品有问题时，往往造成材料的浪费，增加成本负担，同时也浪费了操作人员的劳动成果，使得生产效率低下，如果质检人员时时刻刻的对铺贴流程进行质检，无疑大大增加了质检人员的工作负担，无法保证质检的质量。

发明内容

本发明实施例的目的在于提出一种铺贴操作监控方法及装置，减少质检人员在加工过程中的工作量，提高对铺贴操作质量的把控，缩短生产加工周期，节省生产成本。

为达此目的，第一方面本发明实施例提供了一种铺贴操作监控方法，包括：

获取操作人员的操作图像信息；

根据所述操作人员的操作图像信息确定操作质量结果；

在操作质量结果不合格时生成警示信息并发送至人机交互显示屏以及报警设备。

可选地，还包括：

获取操作人员的人脸图像；

根据所述人脸图像确定所述操作人员的操作权限，并在所述操作人员的操作权项满足预设权限时，执行获取操作人员的操作图像信息。

可选地，还包括：

在操作质量结果不合格时生成警示信息之后，将警示信息发送至质检人员终端。

可选地，还包括：

实时获取操作场景图像信息。

可选地，在根据所述操作人员的操作图像信息确定操作质量结果之后，还包括：

将操作质量结果、所述操作图像信息以及所述操作场景图像信息生成监控报告。

第二方面本发明实施例还提供了一种铺贴操作监控装置，包括：

设备柜、材料准备台、支架、处理器、人机交互显示屏、第一图像采集设备以及报警设备；

所述材料准备台以及所述支架均设置在所述设备柜上；所述材料准备台用于放置待加工物料；所述处理器位于所述设备柜内，所述人机交互显示屏和所述第一图像采集设备均固定在所述支架上；

所述第一图像采集设备用于获取操作人员的操作图像信息并发送至所述处理器；

所述处理器用于根据所述操作人员的操作图像信息确定操作质量结果，在操作质量结果不合格时生成警示信息发送至所述人机交互显示屏；所述人机交互显示屏用于展示警示信息，所述报警设备用于在接收到所述警示信息进行警报提示。

可选地，还包括第二图像采集设备；

所述第二图像采集设备固定在所述支架上，用于获取操作人员的人脸图像并发送至所述处理器；所述处理器还用于根据所述人脸图像确定所述操作人员的操作权限，并在所述操作人员的操作权项满足预设权限时，执行获取操作人员的操作图像信息。

可选地，所述处理器还用于将警示信息发送至质检人员终端。

可选地，还包括第三图像采集设备；

所述第三图像采集设备固定在所述支架上，用于实时获取操作场景图像信息。

可选地，所述处理器还用于将操作质量结果、所述操作图像信息以及所述操作场景图像信息生成监控报告。

本发明实施例提供的一种铺贴操作监控方法及装置，通过获取操作人员的操作图像信息，判定操作人员的操作质量是否合格，通过实时的监控，保证铺贴误操作一经发现及时处理，不会再对出现错误的零部件进行下一步操作，缩减了加工的周期，提升加工的效率，节省了成产成本，在发现操作不合格时，产生警示信息并将该信息发送到人机交互显示屏，提示操作人员，代替了质检人员对铺贴过程的质检，节约人力资源，减少因质检人员的疏忽造成的质量问题，提高产品的质量，有效把控生产质量。

附图说明

图1是本发明实施例提供的一种铺贴操作监控方法流程图。

图2是本发明实施例提供的另一种铺贴操作监控方法流程图。

图3是本发明实施例提供的一种铺贴操作监控装置结构示意图。

图4是本发明实施例提供的一种铺贴操作指引装置三维示意图。

具体实施方式

为使发明实施例解决的技术问题、采用的技术方案和达到的技术效果更加清楚，下面结合附图并通过具体实施方式来进一步说明发明的技术方案。可以理解的是，此处所描述的具体实施例仅仅用于解释发明，而非对发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与发明相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。

图1是本发明实施例提供的一种铺贴操作监控方法流程图，如图1所示，一种铺贴操作监控方法，包括：

S101、获取操作人员的操作图像信息。

处理器获取操作人员对铺贴操作的图像信息，及时的判断出铺贴工艺进行的进度，为准确的生成相应的指引打好基础。

S102、根据操作人员的操作图像信息确定操作质量结果。

处理器通过分析操作人员的操作图像信息，比对操作的质量能否达到规定，准确的对操作的质量进行监控，避免了因操作完成后才发现操作质量不达标，对成产材料浪费的情况出现，提高生产加工的效率，节约成本。

S103、在操作质量结果不合格时生成警示信息并发送至人机交互显示屏以及报警设备。

根据操作人员操作的图像信息，处理器经过分析计算，得出操作质量能否达到合格的标准，当操作质量符合标准规范时，继续监控下一个操作，当操作质量不符合生产标准时，生成警示信息并将该信息发送到人机交互显示屏上，提示操作人员操作出现失误，通过将警示信息显示在人机交互显示屏上，及时的为操作人员提供警示，避免操作人员因为人为操作疏忽而遗漏操作步骤，造成零部件加工不符合规定，示例性的，操作人员输入零件号F0，获取到F0零件铺层操作信息，生成对操作员的操作引导步骤信息，获取对铺层零件F0的操作图像信息，并将操作图像信息与F0零件的铺层信息对比，当发现对比有误时，触发报警系统，提醒操作人员操作有误，在对比当前铺贴操作无误后，进行下一步的铺贴操作比对，逐步比对直至铺贴工序完成。。

处理器通过获取操作人员的操作图像信息，分析操作人员操作的铺贴的工序，及时的判断出操作人员的当前铺贴工序正确与否，当出现了不符合规定时，自动警示操作人员，减少操作人员的技术失误，将警示信息显示在人机交互显示屏上，及时醒目的提醒操作人员，防止放生不合格情况时任然继续进行下一步操作，同时，实时的质量监控保证了加工零部件的质量，减少了质检人员的工作量，减缓了铺贴工艺对质检人员的依赖度，节省了加工的成本。

图2是本发明实施例提供的另一种铺贴操作监控方法流程图，如图2所示，可选地，一种铺贴操作监控方法包括：

S201、获取操作人员的人脸图像。

对于飞机零部件的手工铺贴，属于精密器件的加工生产，操作人员需要经过严格培训后才能具备操作的能力，所以通过获取操作人员的人脸图像来确认操作人员的身份，保证对零部件加工的质量。

S202、根据人脸图像确定操作人员的操作权限，并在操作人员的操作权项满足预设权限时，执行获取操作人员的操作图像信息。

通过人脸识别系统，将获取的操作人员人脸图像与数据库中的信息进行比对，确认操作人员的可操作性权限，确保操作人员具备对零部件加工的能力，保证加工的零部件加工质量，并且做到对不合格的零部件有责可追，提升管理能力。

S203、获取操作人员的操作图像信息；

S204、根据操作人员的操作图像信息确定操作质量结果；

S205、在操作质量结果不合格时生成警示信息并发送至人机交互显示屏以及报警设备。

通过人脸识别系统确认操作人员的身份和权限，保证对零部件的加工操作只能由经过认证的操作人员操作，避免未经培训的操作人员对零部件进行加工操作，保证加工的质量。

可选地，还包括：

在操作质量结果不合格时生成警示信息之后，将警示信息发送至质检人员终端。

在操作质量结果不合格时，及时产生警示信息，并将警示信息发送给质检人员终端，对发生的质量信息进行记录和统计，方面质检人员对加工过程中的质量监管，以及方便对操作人员操作水平的考核，减少了质检人员的工作量，提升加工生产的便捷度。

可选地，还包括：

实时获取操作场景图像信息。

通过实时获取操作场景图像信息，及时监控操作人员对待加工物料的操作程度，一经发现错误操作，及时警示操作人员，保证生产加工的质量，提高生产加工的效率。

可选地，在根据操作人员的操作图像信息确定操作质量结果之后，还包括：

将操作质量结果、操作图像信息以及操作场景图像信息生成监控报告。

在完成操作质量的监控后，生成加工监控质量报告，提供给生产管理者进行数据统计，方便质检人员对工作的统计管理，直观的分析出在成产加工过程中的操作问题，研发人员也可以根据监控报告对生产工艺流程进行进一步优化，提高成产效率。

图3是本发明实施例提供的一种铺贴操作监控装置结构示意图，图4是本发明实施例提供的一种铺贴操作指引装置三维示意图，如图3和图4所示，一种铺贴操作监控装置包括：

设备柜1、材料准备台2、支架3、处理器4、人机交互显示屏5、第一图像采集设备6以及报警设备11；

材料准备台2以及支架3均设置在设备柜1上；材料准备台2用于放置待加工物料7；处理器4位于设备柜内1，人机交互显示屏5和第一图像采集设备6均固定在支架3上；

第一图像采集设备6用于获取操作人员的操作图像信息并发送至处理器4；

处理器4用于根据操作人员的操作图像信息确定操作质量结果，在操作质量结果不合格时生成警示信息发送至人机交互显示屏5；人机交互显示屏5用于展示警示信息，报警设备11用于在接收到警示信息进行警报提示。

通过支架3固定人机交互显示屏5，使得人机交互显示屏5正对操作人员，方便操作人员在进行加工操作时注意到警示信息，将第一图像采集设备6固定在支架3上，并将第一图像采集设备设置在对准待加工物料7处，便于捕捉操作人员对待加工物料7的铺贴过程，提供真实有效的铺贴图像，方便处理器4根据铺贴图像对比分析铺贴操作是否合格。示例性的第一图像采集设备6可以是视觉检测相机，视觉相机时刻监控。在待加工物料7的铺贴过程中，视觉相机可以识别待加工物料7上的文字信息，操作人员在进行铺贴操作时，本应铺贴第一层物料，当操作人员由于误操作拿成了第二层物料，视觉相机通过文字识别出物料上文字信息并非第一层物料的文字信息，将会控制警示灯闪烁，或者控制蜂鸣器报警，以提示操作人员操作有误，不要进行下一步的铺贴工序。

可选地，还包括第二图像采集设备8；

第二图像采集设备8固定在支架上，用于获取操作人员的人脸图像并发送至处理器4；处理器4还用于根据人脸图像确定操作人员的操作权限，并在操作人员的操作权项满足预设权限时，执行获取操作人员的操作图像信息。

通过将第二图像采集设备8固定在支架上，保证第二图像采集设备8有效准确的捕捉操作人员的脸部特征，准确的确认操作人员的操作权限，示例性的，第二图像采集设备可以是人脸拍照相机，可以将第二图像采集设备8固定在人机交互显示屏5上的支架3上，当操作人员进行操作时，面部对准人机交互显示屏5，正好可以捕捉到操作人员的面部特征。

可选地，处理器4还用于将警示信息发送至质检人员终端(图中未示出)。

处理器4可以将警示信息发送到质检人员的终端上，提醒质检人员发生了质量问题，便于质检人员进行记录统计。

可选地，还包括第三图像采集设备10；

第三图像采集设备10固定在支架上，用于实时获取操作场景图像信息。

第三图像采集设备10用于对操作人员操作过程进行监控，避免操作人员在操作过程中发生意外情况，保障操作人员的安全，同时保留加工监控，便于在出现质量问题时的问责，提高管理的效率。示例性的，将第三图像采集设备10可以是铺贴场景监控相机，通过支架3将第三图像采集设备10固定在操作空间上方，并对准操作人员以及待加工物料7，对整个操作过程进行记录监控。

可选地，处理器4还用于将操作质量结果、操作图像信息以及操作场景图像信息生成监控报告。

处理器4可以将操作的质量结果生成监控报告，提供给质检人员统计分析，以及研发人员对工艺的改进，促进生产的进步。

可选地，铺贴操作监控装置还包括照明设备9和环境特征采集传感器13，通过环境特征采集传感器13采集加工区域的环境特征，处理器4通过收集环境特征采集传感器13的数据，进行判断该加工区域的环境是否适合铺贴加工，当分析所收集的环境信息得出不适合铺贴加工时，控制警示灯11闪烁或者控制蜂鸣器报警，提示操作人员对加工区域进行环境清理，以达到加工的外界条件。对于飞机的零部件铺贴，由于是精密加工，不仅对操作有严格的要求，而且对生产的环境也有这严苛的要求，示例性的，通过环境特征采集传感器13获取生产环境中的湿度、尘埃粒子等，将获取的信息传送给处理器4，进行处理分析，检测是否达到可生产的要求，只有在生产环境达到要求的湿度、尘埃粒子密度时，才可以对零部件进行生产加工操作。通过将照明设备9设置在靠近待加工物料7附近，为第一图像采集设备6的采集图像增加光照，便于第一图像采集设备6捕捉铺贴工艺，增加光照提高了第一图像采集设备6采集信息的清晰度，提高判断铺贴操作的准确性。

注意，上述仅为发明的较佳实施例及所运用技术原理。本领域技术人员会理解，发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整、相互结合和替代而不会脱离发明的保护范围。因此，虽然通过以上实施例对发明进行了较为详细的说明，但是发明不仅仅限于以上实施例，在不脱离发明构思的情况下，还可以包括更多其他等效实施例，而发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种铺贴操作监控方法，其特征在于，包括：

获取操作人员的操作图像信息；

根据所述操作人员的操作图像信息确定操作质量结果；

在操作质量结果不合格时生成警示信息并发送至人机交互显示屏以及报警设备。

2.根据权利要求1所述的方法，其特征在于，还包括：

获取操作人员的人脸图像；

根据所述人脸图像确定所述操作人员的操作权限，并在所述操作人员的操作权项满足预设权限时，执行获取操作人员的操作图像信息。

3.根据权利要求1所述的方法，其特征在于，还包括：

在操作质量结果不合格时生成警示信息之后，将警示信息发送至质检人员终端。

4.根据权利要求1所述的方法，其特征在于，还包括：

实时获取操作场景图像信息。

5.根据权利要求4所述的方法，其特征在于，在根据所述操作人员的操作图像信息确定操作质量结果之后，还包括：

将操作质量结果、所述操作图像信息以及所述操作场景图像信息生成监控报告。

6.一种铺贴操作监控装置，其特征在于，包括：

设备柜、材料准备台、支架、处理器、人机交互显示屏、第一图像采集设备以及报警设备；

所述材料准备台以及所述支架均设置在所述设备柜上；所述材料准备台用于放置待加工物料；所述处理器位于所述设备柜内，所述人机交互显示屏和所述第一图像采集设备均固定在所述支架上；

所述第一图像采集设备用于获取操作人员的操作图像信息并发送至所述处理器；

所述处理器用于根据所述操作人员的操作图像信息确定操作质量结果，在操作质量结果不合格时生成警示信息发送至所述人机交互显示屏；所述人机交互显示屏用于展示警示信息，所述报警设备用于在接收到所述警示信息进行警报提示。

7.根据权利要求6所述的装置，其特征在于，还包括第二图像采集设备；

所述第二图像采集设备固定在所述支架上，用于获取操作人员的人脸图像并发送至所述处理器；所述处理器还用于根据所述人脸图像确定所述操作人员的操作权限，并在所述操作人员的操作权项满足预设权限时，执行获取操作人员的操作图像信息。

8.根据权利要求6所述的装置，其特征在于，所述处理器还用于将警示信息发送至质检人员终端。

9.根据权利要求6所述的装置，其特征在于，还包括第三图像采集设备；

所述第三图像采集设备固定在所述支架上，用于实时获取操作场景图像信息。

10.根据权利要求9所述的装置，其特征在于，所述处理器还用于将操作质量结果、所述操作图像信息以及所述操作场景图像信息生成监控报告。

Images