CN113489954A - 生产作业报告的生成方法、装置、电子设备及存储介质 - Google Patents

生产作业报告的生成方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN113489954A
CN113489954A CN202110763739.8A CN202110763739A CN113489954A CN 113489954 A CN113489954 A CN 113489954A CN 202110763739 A CN202110763739 A CN 202110763739A CN 113489954 A CN113489954 A CN 113489954A
Authority
CN
China
Prior art keywords
production
action
target
operator
sequence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202110763739.8A
Other languages
English (en)
Inventor
王飞
王磊
林君仪
周嘉明
白登峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sensetime Technology Development Co Ltd
Original Assignee
Beijing Sensetime Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sensetime Technology Development Co Ltd filed Critical Beijing Sensetime Technology Development Co Ltd
Priority to CN202110763739.8A priority Critical patent/CN113489954A/zh
Publication of CN113489954A publication Critical patent/CN113489954A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/243Classification techniques relating to the number of classes
    • G06F18/2431Multiple classes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/049Temporal neural networks, e.g. delay elements, oscillating neurons or pulsed inputs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/04Manufacturing
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Business, Economics & Management (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Molecular Biology (AREA)
  • Manufacturing & Machinery (AREA)
  • Marketing (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • General Factory Administration (AREA)

Abstract

本公开提供了一种生产作业报告的生成方法、装置、电子设备及存储介质,该生成方法包括:获取作业人员在目标生产工位的操作视频画面;通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,所述生产动作序列用于表征所述作业人员执行的生产动作;基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。

Description

生产作业报告的生成方法、装置、电子设备及存储介质
技术领域
本公开涉及深度学习技术领域,具体而言,涉及一种生产作业报告的生成方法、装置、电子设备及存储介质。
背景技术
随着科技的进步,生产行业快速发展。在生产行业中,生产行业的发展与产品的质量和生产速度等因素息息相关。其中,生产行业中作业人员的生产情况,在该生产行业中占据重要的作用。
一般的,可以通过人工计时的方式,评估生产线上作业人员的生产情况,但是该评估方式的效率和准确率较低。
发明内容
有鉴于此,本公开至少提供一种生产作业报告的生成方法、装置、电子设备及存储介质。
第一方面,本公开提供了一种生产作业报告的生成方法,包括:
获取作业人员在目标生产工位的操作视频画面;
通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,所述生产动作序列用于表征所述作业人员执行的生产动作;
基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
上述方法中,通过对获取的操作视频画面中作业人员进行生产动作识别,能够较为便捷和快速的得到用于表征作业人员执行的生产动作的生产动作序列,再基于生产动作序列以及与目标生产工位对应参考动作序列,得到作业人员的生产作业报告,实现对作业人员的生产动作的自动监测,与通过人工计时的方式评估作业人员的生产情况相比,提高了生产作业报告的生成效率和准确度。
一种可能的实施方式中,在所述得到所述作业人员的生产作业报告之后,所述生成方法还包括:
基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案。
这里,得到的生产作业报告能够包含生产动作序列和参考动作序列的信息,使得该生产作业报告的准确度较高,故基于该生产作业报告,能够生成较为精准的改进方案。
一种可能的实施方式中,所述基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案,包括:
基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,确定目标生产动作的平均时长;
基于所述目标生产动作的平均时长,对所述参考动作序列中包括的与所述目标生产动作对应的参考动作的参考时长进行调整,得到所述参考动作对应的调整后的参考时长。
本实施方式中,可以根据确定的目标生产动作的平均时长,对参考动作序列中包括的与目标生产动作对应的参考动作的参考时长进行调整,得到参考动作对应的调整后的参考时长,以便能够根据调整后的参考时长,较为准确的对作业人员的生产动作进行评判,比如能够较为准确的确定作业人员的工作效率。
一种可能的实施方式中,所述基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案,包括:
基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,对所述参考动作序列中包括的目标参考动作进行拆解,得到多个子动作;
将拆解后的各个子动作进行重组,生成重组后的目标参考动作,其中,重组后的目标参考动作与重组前的目标参考动作包括的各子动作的执行次序不同;
基于所述重组后的目标参考动作,得到所述目标生产工位对应的更新后的参考动作序列,所述更新后的参考动作序列包括所述重组后的目标参考动作。
这里,通过对目标参考动作进行拆解和重组,得到目标生产工位对应的更新后的参考动作序列,以便在改进目标生产工位对应的参考动作序列后,能够提高目标生产工位的生产效率。
一种可能的实施方式中,在得到所述作业人员的生产作业报告之后,所述生成方法还包括:
基于所述生产作业报告,确定所述作业人员在所述生产作业报告对应的总时间段内的第一局部时间段和第二局部时间段;其中,所述第一局部时间段对应的工作效率高于所述目标时间段内除所述第一局部时间段之外的第一其他时间段,所述第二局部时间段对应的工作效率低于所述目标时间段内除所述第二局部时间段之外的第二其他时间段;
基于所述第一局部时间段和所述第二局部时间段,对所述作业人员的作业内容和作业时间中的至少一项进行调整。
上述方法中,可以基于生产作业报告,确定作业人员在生产作业报告对应的总时间段内的第一局部时间段和第二局部时间段,并根据第一局部时间段和第二局部时间段,对作业人员的作业内容和/或作业时间进行调整,使得在调整作业内容和/或作业时间后,作业人员能够较为高效和准确的完成作业内容。
一种可能的实施方式中,在得到所述作业人员的生产作业报告之后,所述生成方法还包括如下至少一项:
基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员在所述目标生产工位执行与各个参考动作匹配的生产动作的工作效率;
基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员对应的包含至少一种作业质量指标的数据图表,其中,所述至少一种作业质量指标用于表征所述作业人员在所述目标生产工位执行的各个生产动作的作业质量。
这里,可以确定作业人员在目标生产工位执行与各个参考动作匹配的生产动作的工作效率,通过生成的工作效率,能够对作业人员的作业情况有准确的判断。和/或,确定作业人员对应的包含至少一种作业质量指标的数据图表,通过数据图表中包含的至少一种作业质量指标,较为全面和直观的确定作业人员的作业情况。
一种可能的实施方式中,在所述得到所述作业人员的生产作业报告之后,所述生成方法还包括:
在所述目标生产工位包括多个的情况下,确定各个目标生产工位下的作业人员的生产作业报告;
基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组;
其中,所述生产线包括所述目标生产工位,所述参考动作序列组包括多个参考动作序列,每个目标生产工位对应至少一个参考动作序列。
这里,还可以对生产线上的各个目标生产工位的参考动作序列进行调整,以提升生产线的整体生产效率。
一种可能的实施方式中,所述基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组,包括:
基于所述各个目标生产工位下的作业人员的生产作业报告,确定所述各个目标生产工位在同一时间段对应的所述生产动作序列的平均执行时长;
基于所述平均执行时长,对至少一个目标生产工位对应的参考动作序列进行调整,生成调整后的参考动作序列。
一种可能的实施方式中,在所述得到生产动作序列之后,还包括:
基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,确定所述生产动作序列包括的各个生产动作中是否存在异常动作;
在所述生产动作序列中存在异常动作的情况下,对所述生产动作序列进行筛选,生成筛选后的生产动作序列;
所述基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告,包括:
基于所述筛选后的生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
这里,在得到生产动作序列之后,可以判断生产动作序列包括的各个生产动作中是否存在异常动作,在存在异常动作时,对生产动作序列进行筛选,生成筛选后的生产动作序列,以便可以基于筛选后的生产动作序列,能够得到作业人员对应的较为准确的生产作业报告。
一种可能的实施方式中,所述通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,包括:
针对所述操作视频画面中的每个视频帧,对所述视频帧进行生产动作识别,确定所述生产动作的动作类别,其中,所述动作类别包括有效动作类别和无效动作类别,所述有效动作类别包括所述参考动作序列中各个参考动作的动作类别;
基于所述操作视频画面中多个视频帧分别对应的所述动作类别,确定每个所述生产动作对应的执行时长;
基于各个生产动作的动作类别和每个生产动作对应的所述执行时长,确定所述生产动作序列。
以下装置、电子设备等的效果描述参见上述方法的说明,这里不再赘述。
第二方面,本公开提供了一种生产作业报告的生成装置,包括:
获取模块,用于获取作业人员在目标生产工位的操作视频画面;
识别模块,用于通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,所述生产动作序列用于表征所述作业人员执行的生产动作;
第一生成模块,用于基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
一种可能的实施方式中,在所述得到所述作业人员的生产作业报告之后,所述生成装置还包括:第二生成模块,用于:
基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案。
一种可能的实施方式中,所述第二生成模块,在基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案时,用于:
基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,确定目标生产动作的平均时长;
基于所述目标生产动作的平均时长,对所述参考动作序列中包括的与所述目标生产动作对应的参考动作的参考时长进行调整,得到所述参考动作对应的调整后的参考时长。
一种可能的实施方式中,所述第二生成模块,在基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案时,用于:
基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,对所述参考动作序列中包括的目标参考动作进行拆解,得到多个子动作;
将拆解后的各个子动作进行重组,生成重组后的目标参考动作,其中,重组后的目标参考动作与重组前的目标参考动作包括的各子动作的执行次序不同;
基于所述重组后的目标参考动作,得到所述目标生产工位对应的更新后的参考动作序列,所述更新后的参考动作序列包括所述重组后的目标参考动作。
一种可能的实施方式中,在得到所述作业人员的生产作业报告之后,所述生成装置还包括:第一调整模块,用于:
基于所述生产作业报告,确定所述作业人员在所述生产作业报告对应的总时间段内的第一局部时间段和第二局部时间段;其中,所述第一局部时间段对应的工作效率高于所述目标时间段内除所述第一局部时间段之外的第一其他时间段,所述第二局部时间段对应的工作效率低于所述目标时间段内除所述第二局部时间段之外的第二其他时间段;
基于所述第一局部时间段和所述第二局部时间段,对所述作业人员的作业内容和作业时间中的至少一项进行调整。
一种可能的实施方式中,在得到所述作业人员的生产作业报告之后,所述生成装置还包括确定模块,所述确定模块用于执行如下至少一项:
基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员在所述目标生产工位执行与各个参考动作匹配的生产动作的工作效率;
基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员对应的包含至少一种作业质量指标的数据图表,其中,所述至少一种作业质量指标用于表征所述作业人员在所述目标生产工位执行的各个生产动作的作业质量。
一种可能的实施方式中,在所述得到所述作业人员的生产作业报告之后,所述生成装置还包括:第二调整模块,用于:
在所述目标生产工位包括多个的情况下,确定各个目标生产工位下的作业人员的生产作业报告;
基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组;
其中,所述生产线包括所述目标生产工位,所述参考动作序列组包括多个参考动作序列,每个目标生产工位对应至少一个参考动作序列。
一种可能的实施方式中,所述第二调整模块,在基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组时,用于:
基于所述各个目标生产工位下的每个作业人员的生产作业报告,确定所述各个目标生产工位在同一时间段对应的所述生产动作序列的平均执行时长;
基于所述平均执行时长,对至少一个目标生产工位对应的参考动作序列进行调整,生成调整后的参考动作序列。
一种可能的实施方式中,在得到生产动作序列之后,还包括:筛选模块,用于:
基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,确定所述生产动作序列包括的各个生产动作中是否存在异常动作;
在所述生产动作序列中存在异常动作的情况下,对所述生产动作序列进行筛选,生成筛选后的生产动作序列;
所述第一生成模块,在基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告时,用于:
基于所述筛选后的生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
一种可能的实施方式中,所述识别模块,在通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列时,用于:
针对所述操作视频画面中的每个视频帧,对所述视频帧进行生产动作识别,确定所述生产动作的动作类别,其中,所述动作类别包括有效动作类别和无效动作类别,所述有效动作类别包括所述参考动作序列中各个参考动作的动作类别;
基于所述操作视频画面中多个视频帧分别对应的所述动作类别,确定每个所述生产动作对应的执行时长;
基于各个生产动作的动作类别和每个生产动作对应的所述执行时长,确定所述生产动作序列。
第三方面,本公开提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述第一方面或任一实施方式所述的生产作业报告的生成方法的步骤。
第四方面,本公开提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如上述第一方面或任一实施方式所述的生产作业报告的生成方法的步骤。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种生产作业报告的生成方法的流程示意图;
图2示出了本公开实施例所提供的一种生产作业报告的生成方法中,展示生产作业报告的界面示意图;
图3示出了本公开实施例所提供的一种生产作业报告的生成方法中,展示数据图表的界面示意图;
图4示出了本公开实施例所提供的一种生产作业报告的生成装置的架构示意图;
图5示出了本公开实施例所提供的一种电子设备的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
随着科技的进步,生产行业快速发展。在生产行业中,生产行业的发展与产品的质量和生产速度等因素息息相关。其中,生产行业中作业人员的生产情况,在该生产行业中占据重要的作用。一般的,可以通过人工计时的方式,评估生产线上作业人员的生产情况,但是该评估方式的效率和准确率较低。为了缓解上述问题,本公开实施例提供了一种生产作业报告的生成方法、装置、电子设备及存储介质。
针对以上方案所存在的缺陷,均是发明人在经过实践并仔细研究后得出的结果,因此,上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案,都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
为便于对本公开实施例进行理解,首先对本公开实施例所公开的一种生产作业报告的生成方法进行详细介绍。本公开实施例所提供的生产作业报告的生成方法的执行主体一般为具有一定计算能力的计算机设备,该计算机设备例如包括:终端设备或服务器或其它处理设备,终端设备可以为用户设备(User Equipment,UE)、移动设备、用户终端、个人数字助理(Personal Digital Assistant,PDA)、手持设备等。在一些可能的实现方式中,该生产作业报告的生成方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
参见图1所示,为本公开实施例所提供的生产作业报告的生成方法的流程示意图,该生成方法包括S101-S103,其中:
S101,获取作业人员在目标生产工位的操作视频画面;
S102,通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,所述生产动作序列用于表征所述作业人员执行的生产动作;
S103,基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
上述方法中,通过对获取的操作视频画面中作业人员进行生产动作识别,能够较为便捷和快速的得到用于表征作业人员执行的生产动作的生产动作序列,再基于生产动作序列以及与目标生产工位对应参考动作序列,得到作业人员的生产作业报告,实现对作业人员的生产动作的自动监测,与通过人工计时的方式评估作业人员的生产情况相比,提高了生产作业报告的生成效率和准确度。
下述对S101-S103进行具体说明。
针对S101:
实施时,在生产线上可以包括多个目标生成工位,多个目标成产工位上的工作人员可以合作完成物品的生产、制造、或组装等工作。每个目标生产工位上可以对应多个作业人员,比如,多个作业人员可以在目标生产工位上轮流进行生成作业。
比如,可以在目标生产工位内部或在目标生产工位周围设置摄像头,通过该摄像头采集目标成产工位对应的视频画面,该视频画面中包括作业人员在目标生产工位上进行生产作业的操作视频画面。
针对S102:
示例性的,可以使用训练后的用于进行动作识别的神经网络,对操作视频画面中的作业人员进行生产动作识别,得到作业人员的生产动作序列。其中,生产动作序列用于表征作业人员执行的生产动作。比如,生产动作序列中可以包括作业人员执行的各个生产动作的动作类别,每个生成动作的执行时长,多个生产动作的执行顺序,生产动作序列的总执行时长等。
一种可选实施方式中,在S102中,所述通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,可以包括:
S1021,针对所述操作视频画面中的每个视频帧,对所述视频帧进行生产动作识别,确定所述生产动作的动作类别,其中,所述动作类别包括有效动作类别和无效动作类别,所述有效动作类别包括所述参考动作序列中各个参考动作的动作类别;
S1022,基于所述操作视频画面中多个视频帧分别对应的所述动作类别,确定每个所述生产动作对应的执行时长;
S1023,基于各个生产动作的动作类别和每个生产动作对应的执行时长,确定所述生产动作序列。
实施时,可以从操作视频画面中提取多个视频帧,利用训练后的神经网络,对每个视频帧进行生产动作识别,确定该视频帧中作业人员对应的生产动作的动作类别。其中,该动作类别可以包括有效动作类别和无效动作类别。有效动作类别包括参考动作序列中各个参考动作的动作类别。即神经网络可以将视频帧中作业人员的生产动作与各个参考动作进行比对,若生产动作与参考动作匹配,则该生产动作为有效动作类别,以及可以将该参考动作的动作类别确定为生产动作的动作类别;若生产动作与每个参考动作均不匹配,则确定该生产动作为无效动作类别。
通过S1021可以得到操作视频画面中各个视频帧分别对应的动作类别。在S1022中,可以根据多个视频帧分别对应的动作类别、以及每个视频帧对应的时间戳信息,确定每个生产动作对应的执行时长。在生产动作包括有效动作类别和无限动作类别时,可以得到每个有效动作类别的执行时长,和每个无效动作类别的执行时长。
在S1023中,示例性的,假设得到的各个生产动作的动作类别和每个生产动作的执行时长包括:
(一)、生产动作一:动作类别一、执行时长2秒;
(二)、生产动作二:无效动作类别、执行时长3秒;
(三)、生产动作三:动作类别二、执行时长5秒;
(四)、生产动作四:动作类别三、执行时长3.5秒;
(五)、生产动作五:无效动作类别、执行时长2秒;
(六)、生产动作六:动作类别四、执行时长4.2秒。
其中,在确定生产动作序列时,生产动作系列中可以只包括有效动作类别,即可以将无效动作类别的执行时长划分至前一有效生产动作或后一有效生产动作中。
比如,在上述(一)至(六)中的各个生产动作的执行顺序为生产动作一至生产动作六时,则得到的生产动作序列可以包括:
第一个生产动作:动作类别一的生产动作,节拍时长为5秒,该生产动作中包括有效动作时长2秒和无效动作时长3秒;
第二个生产动作:动作类别二的生产动作,节拍时长为5秒,该生产动作中包括有效动作时长5秒和无效动作时长0秒;
第三个生产动作:动作类别三的生产动作,节拍时长为5.5秒,该生产动作中包括有效动作时长3.5秒和无效动作时长2秒;
第四个生产动作:动作类别四的生产动作,节拍时长为4.2秒,该生产动作中包括有效动作时长4.2秒和无效动作时长0秒。
可知,上述生产动作序列的总执行时长为19.7秒,多个生产动作的执行顺序为:第一个生产动作、第二个生产动作、第三个生产动作、第四个生产动作。
一种可选实施方式中,在得到生产动作序列之后,还可以包括步骤A1和A2,其中:
步骤A1,基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,确定所述生产动作序列包括的各个生产动作中是否存在异常动作;
步骤A2,在所述生产动作序列中存在异常动作的情况下,对所述生产动作序列进行筛选,生成筛选后的生产动作序列。
目标生产工位对应的参考动作序列中可以包括至少一个参考动作的动作类别、多个参考动作的执行顺序、每个参考动作对应的参考时长等,其中,每个参考动作可以为作业人员在该目标生产工位进行的标准生产动作。
比如,若生产动作序列中包括的各个生产动作的执行顺序与参考动作序列中包括的各个参考动作的执行顺序不一致时,则确定生产动作序列包括的各个生产动作中存在异常动作。若参考动作序列中包括的各个参考动作中,存在生产动作序列中不包括的动作时,即生产动作序列中存在漏做的生产动作,则确定生产动作序列包括的各个生产动作中存在异常动作。若生产动作序列中包括的动作未在参考动作序列中出现,那么生产动作序列中存在额外的生产动作,则确定生产动作序列包括的各个生产动作中也存在异常动作。
在生产动作序列中存在异常动作时,可以对生产动作序列进行筛选,比如,可以将存在异常动作的生产动作序列删掉,得到目标生产工位对应的筛选后的生产动作序列。或者,也可以将生产动作序列中包括的各个生产动作进行筛选,生成筛选后的生产动作序列;比如,若生产动作一和生产动作二的执行顺序相反,则可以将生产动作一和生产动作二筛掉,生成筛选后的生产动作序列。
进一步的,在得到筛选后的生产动作序列之后,可以基于所述筛选后的生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
这里,在得到生产动作序列之后,可以判断生产动作序列包括的各个生产动作中是否存在异常动作,在存在异常动作时,对生产动作序列进行筛选,生成筛选后的生产动作序列,以便可以基于筛选后的生产动作序列,能够得到作业人员对应的较为准确的生产作业报告。
针对S103:
示例性的,生产作业报告中可以包括至少一个生产动作序列与对应的参考动作序列的对比结果。比如,若参考动作序列中包括参考动作一,参考时长5秒;参考动作二,参考时长3秒;生产动作序列中包括生产动作一(与参考动作一的动作类别相同),节拍时长为5.5秒;生产动作二(与参考动作二的动作类别相同),节拍时长为2.8秒;则生产作业报告中可以包括生产动作序列、参考动作序列,以及对比结果:生产动作一的执行效率较低,生产动作二的执行效率较高等。
参见图2所示,该界面图中视频操作画面,以及位于视频操作画面下方的生产作业报告,该生产作业报告中包括:作业人员的生产情况,比如,作业人员的生产情况可以包括:作业人员的姓名、当前动作时长(执行的当前生产动作的执行时长)、本次动作节拍(即39秒表示生产动作序列的总执行时长,+3秒表示生产动作序列比参考动作序列的总参考时长多了3秒)、本次总动作数;以及该生产作业报告中还包括作业人员执行的各个生成动作、每个生产动作对应的执行时长等,比如,作业人员执行生成动作二的执行时长为4.0秒,比对应的参考动作的参考时长少了2秒。
一种可选实施方式中,在所述得到所述作业人员的生产作业报告之后,所述生成方法还包括:基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案。
这里,得到的生产作业报告能够包含生产动作序列和参考动作序列的信息,使得该生产作业报告的准确度较高,故基于该生产作业报告,能够生成较为精准的改进方案。
实施时,可以根据生产作业报告,得到目标生产工位在不同时间段内的生产动作时长。比如,针对目标生产工位一,可以得到第一时间段内包括的至少一个生产动作序列的第一生产动作时长(即第一生产动作时长可以为至少一个生产动作序列的总执行时长的和),第二时间段内包括的至少一个生产动作序列的第二生产动作时长,第三时间段内包括的至少一个生产动作序列的第三生产动作时长。再可以根据得到的生产工位在不同时间段内的生产动作序列的生产动作时长,生成针对所述目标生产工位对应参考动作序列的改进方案。
示例性,可以对不同时间段内的作业人员的作业内容和/或作业时间进行调整;比如,可以将第一时间段对应的作业人员,调整至第三时间段。或者,可以将同一时间段内的生产动作的执行顺序进行调整,比如,若第一时间段内包括第一生成动作和第二生产动作,可以将第一生成动作和第二生产动作的执行顺序进行调换。或者,将不同时间段内包括的生产动作进行调整,比如,在第一时间段内,包括第一生产动作和第二生产动作,则可以将第二生产动作调换至第二时间段内进行执行。
或者,可以根据生产作业报告,确定目标生产工位中执行时长小于参考时长的第一目标生产动作,和/或,确定目标生产工位中执行时长大于参考时长的第二目标生产动作;再可以基于第一目标生产动作和/或第二目标生产动作,生成针对目标生产工位对应参考动作序列的改进方案。
比如,可以基于第一目标生产动作,对该第一目标生产动作的参考时长进行调整,或者,增加第一目标生产动作的动作内容,以提高第一目标生产动作的复杂度。再比如,可以基于第二目标生产动作,对该第二目标生产动作的参考时长进行调整,或者,将第二目标生产动作的动作内容进行拆解,分为多个生产动作,以减小第二目标生产动作的复杂度。再比如,可以将第一目标生产动作和第二目标生产动作的动作内容分别进行拆解和重组,生成重组后的多个生产动作。或者,可以对各个参考动作序列中包括的第一目标生产动作和第二目标生产动作的动作内容进行均衡,比如,可以控制参考动作序列一中包括5个第一目标生产动作和3个第二目标生产动作,参考动作序列二中包括5个第一目标生产动作和3个第二目标生产动等。
其中,所述基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案,可以包括下述两种方式:
方式一中包括步骤B1和步骤B2,其中:
步骤B1,基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,确定目标生产动作的平均时长;
步骤B2,基于所述目标生产动作的平均时长,对所述参考动作序列中包括的与所述目标生产动作对应的参考动作的参考时长进行调整,得到所述参考动作对应的调整后的参考时长。
在目标生产工位对应多个作业人员时,可以根据每个作业人员的生产作业报告指示的每个生产动作的节拍时长(或执行时长),确定执行目标生产动作的平均时长。其中,目标生产动作的数量可以为一个或多个,即目标生产动作可以为生产动作序列中的一个或多个生产动作,在目标生产动作为多个时,可以确定每个目标生产动作的平均时长。实施时,目标生产动作可以根据实际需要进行选择。
再可以根据目标生产动作的平均时长,对与目标生产动作对应的参考动作的参考时长进行调整,得到参考动作对应的调整后的参考时长。比如,若生产动作一的平均时长为5.3秒,与生产动作一对应的参考动作一的参考时长为3秒,则可以将参考动作一的参考时长调整为5秒;若生产动作二的平均时长为3.3秒,与生产动作二对应的参考动作二的参考时长为5秒,则可以将参考动作二的参考时长调整为3秒等。
本实施方式中,可以根据确定的目标生产动作的平均时长,对参考动作序列中包括的与目标生产动作对应的参考动作的参考时长进行调整,得到参考动作对应的调整后的参考时长,以便能够根据调整后的参考时长,较为准确的对作业人员的生产动作进行评判,比如能够较为准确的确定作业人员的工作效率。
方式二中包括步骤C1至步骤C3:
步骤C1,基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,对所述参考动作序列中包括的目标参考动作进行拆解,得到多个子动作;
步骤C2,将拆解后的各个子动作进行重组,生成重组后的目标参考动作,其中,重组后的目标参考动作与重组前的目标参考动作包括的各子动作的执行次序不同;
步骤C3,基于所述重组后的目标参考动作,得到所述目标生产工位对应的更新后的参考动作序列,所述更新后的参考动作序列包括所述重组后的目标参考动作。
示例性的,可以基于至少一个作业人员的生产作业报告,对目标参考动作进行拆解,得到该目标参考动作对应的多个子动作。其中,目标参考动作可以为参考动作序列包括的多个参考动作中的一个或多个。
在目标参考动作为多个时,可以对每个目标参考动作进行拆解,生成每个目标参考动作对应的多个子动作,再可以将一个或多个目标参考动作对应的多个子动作进行重组,得到重组后的目标参考动作。其中,重组后的目标参考动作与重组前的目标参考动作包括的各子动作的执行次序不同。或者,重组后的目标参考动作与重组前的目标参考动作包括不同的子动作。
比如,若生产作业报告指示参考动作一对应的生产动作一的执行时长(或节拍时长)为10秒,参考动作二对应的生产动作二的执行时长为2秒,则可以将参考动作一进行拆解,拆解为多个子动作,其中,拆解得到的子动作的数量和子动作的动作内容可以根据实际情况进行确定。再可以将多个子动作中的第一部分子动作与参考动作二进行重组,生成重组后的参考动作二,将多个子动作中除第一部分子动作之外的其他子动作进行重组,生成重组后的参考动作一。或者,也可以将多个子动作中的第一部分子动作进行重组,构成重组后的第一参考动作,将多个子动作中除第一部分子动作之外的其他子动作进行重组,生成重组后的参考动作三。
再可以基于重组后的参考动作,或者,基于重组后的参考动作和未进行重组的参考动作,得到目标生产工位对应的更新后的参考动作序列。比如,可以使用重组后的目标参考动作替换重组前的目标参考动作,生成目标生产工位对应的更新后的参考动作序列。
这里,通过对目标参考动作进行拆解和重组,得到目标生产工位对应的更新后的参考动作序列,以便在改进目标生产工位对应的参考动作序列后,能够提高目标生产工位的生产效率。
一种可选实施方式中,在得到所述作业人员的生产作业报告之后,所述生成方法还包括步骤D1和步骤D2:
步骤D1,基于所述生产作业报告,确定所述作业人员在所述生产作业报告对应的总时间段内的第一局部时间段和第二局部时间段;其中,所述第一局部时间段对应的工作效率高于所述目标时间段内除所述第一局部时间段之外的第一其他时间段,所述第二局部时间段对应的工作效率低于所述目标时间段内除所述第二局部时间段之外的第二其他时间段;
步骤D2,基于所述第一局部时间段和所述第二局部时间段,对所述作业人员的作业内容和作业时间中的至少一项进行调整。
上述方法中,可以基于生产作业报告,确定作业人员在生产作业报告对应的总时间段内的第一局部时间段和第二局部时间段,并根据第一局部时间段和第二局部时间段,对作业人员的作业内容和/或作业时间进行调整,使得在调整作业内容和/或作业时间后,作业人员能够较为高效和准确的完成作业内容。
实施时,可以基于生产作业报告,确定每个作业人员在生产作业报告对应的总时间段内的第一局部时间段和第二局部时间段,其中,第一局部时间段可以为工作效率最高的时间段,即第一局部时间段对应的工作效率高于目标时间段内除第一局部时间段之外的第一其他时间段;第二局部时间段可以为工作效率最低的时间段,即第二局部时间段对应的工作效率低于目标时间段内除第二局部时间段之外的第二其他时间段。
示例性的,可以基于生产作业报告指示的每个生产动作序列的总执行时长、和该生产动作序列对应的参考动作序列的总参考时长,确定执行该生产动作序列时对应的时间段的执行效率。比如,可以计算总参考时长与总执行时长的差值,并将该差值与总参考时长相除,将得到的商确定为执行该生产动作序列时对应的时间段的工作效率。进而,可以确定作业人员对应的工作效率最高的第一局部时间段,和工作效率最低的第二局部时间段。
进一步的,可以基于第一局部时间段和第二局部时间段,对作业人员的作业内容和/或作业时间进行调整,比如,可以将作业人员的作业时间调整到第一局部时间段内,将休息时间调整为第二局部时间段内,以提升作业人员的作业效率。和/或,针对作业人员的作业内容,可以增加第一局部时间段内的生产动作序列对应的生产内容,减少第二局部时间段内的生产动作序列对应的生产内容,以提升作业人员的作业效率。
实施时,还可以根据作业人员对应的各个时间段内的生产动作序列,确定生产动作序列中存在异常情况的频率较高的第三局部时间段,进而可以将作业人员的休息时间调整为该第三局部时间段。或者,可以根据作业人员对应的各个时间段内的生产动作序列,确定作业人员的工作有效时长,比如,若确定作业人员在工作2个小时之后,工作效率或生产动作的准确率下降的幅度较大,则可以将作业人员的工作间隔时间调整为2小时,比如每工作2小时可以休息20分钟等。通过上述调整方案,可以保障作业人员的作业准确度,降低作业人员的出错率。
一种可选实施方式中,在得到所述作业人员的生产作业报告之后,所述生成方法还包括如下至少一项:
方式一、基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员在所述目标生产工位执行与各个参考动作匹配的生产动作的工作效率;
方式二、基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员对应的包含至少一种作业质量指标的数据图表,其中,所述至少一种作业质量指标用于表征所述作业人员在所述目标生产工位执行的各个生产动作的作业质量。
方式一中,可以确定每个生产动作对应的工作效率,也可以确定生成动作序列对应的工作效率。比如,可以针对每个生产动作,根据作业人员的生产作业报告指示的生产动作的执行时长,和该生产动作对应的参考动作的参考时长,确定该生产动作的工作效率。例如,可以将参考时长与执行时长相减,再将得到的差值与参考时长相除,将得到的商值确定为该生产动作的动作效率。
比如,针对生产动作序列,可以根据该生产动作序列的总执行时长和对应的参考动作序列的总参考时长,确定该生产动作序列的工作效率。其中,生产动作序列对应的工作效率的确定过程,可以参考生产动作的动作效率的过程,这里不再详述。
方式二中,可以基于作业人员的生产作业报告、和参考动作序列中每个参考动作的参考时长,确定该作业人员对应的数据图表,该数据图表中可以包括至少一个作业质量指标,每个作业质量指标可以表征作业人员在目标生产工位执行的各个生产动作的作业质量。比如,作业质量指标可以包括多个维度的评分、执行多个生产动作的综合质量分、文字评价信息等。
参见图3所示,该展示界面中包括位于界面上方的视频操作画面,位于界面中间的人员情况,该人员情况可以包括作业人员的基本信息,比如,可以包括作业人员的工号、部门、工位(目标生产工位)、和作业人员的图像等,还包括位于界面下方的数据图表,该数据图表中包括各个作业质量指标的分值,比如,作业质量指标可以包括出勤情况(2.5分)、工作时长(3.2分)、工作效率(3.3分)、动作准确度(3.6分)、岗位匹配(4.8分),即通过岗位匹配的分值,可知该作业人员与该目标生产工位之间的匹配度较高。
这里,可以确定作业人员在目标生产工位执行与各个参考动作匹配的生产动作的工作效率,通过生成的工作效率,能够对作业人员的作业情况有准确的判断。和/或,确定作业人员对应的包含至少一种作业质量指标的数据图表,通过数据图表中包含的至少一种作业质量指标,较为全面和直观的确定作业人员的作业情况。
一种可选实施方式中,在所述得到所述作业人员的生产作业报告之后,所述生成方法还包括步骤E1和E2,其中:
步骤E1,在所述目标生产工位包括多个的情况下,确定各个目标生产工位下的作业人员的生产作业报告;
步骤E2,基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组。其中,所述生产线包括所述目标生产工位,所述参考动作序列组包括多个参考动作序列,每个目标生产工位对应至少一个参考动作序列。
这里,还可以对生产线上的各个目标生产工位的参考动作序列进行调整,以提升生产线的整体生产效率。
实施时,生产线上可以包括多个目标生产工位,每个目标生产工位对应至少一个参考动作序列,可知该生产线包括参考动作序列组,参考动作序列组中包括多个参考动作序列。可以针对每个目标生产工位,确定该目标生产工位下的作业人员的生产作业报告。在可以基于各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组。
比如,将目标生产工位对应的参考动作序列进行调整,比如,若调整前:在目标生产工位一上执行参考动作序列一,在目标生产工位二上执行参考动作序列二,调整后:在目标生产工位一上执行参考动作序列二,在目标生产工位二上执行参考动作序列一等。
再比如,若目标生产工位一对应的生产作业报告指示作业人员在目标生产工位一中执行的生产动作序列的总执行时长为60秒,目标生产工位二对应的生产作业报告指示作业人员在目标生产工位二中执行的生产动作序列的总执行时长为30秒,则可以将目标生产工位一对应的至少一个参考动作,调整至目标生产工位二上进行执行,以平衡各个目标生产工位执行各个生产动作时的总执行时长和/或平衡各个目标生产工位执行各个生产动作时的动作复杂程度,得到目标生产工位一和目标生产工位二分别对应的调整后的参考动作序列。
示例性的,还可以对目标生产工位的执行顺序,比如,在生产线中,调整前的各个目标生产的执行顺序为:目标生产工位一、目标生产工位二、目标生产工位三,调整后的各个目标生产的执行顺序为:目标生产工位三、目标生产工位二、目标生产工位一,即可以将目标生产工位三执行各个生产动作后得到的中间产品传送给目标生产工位二,以使得调整后的各个目标生产工位的执行顺序更加符合生产线的生产需求,进而可以提高目标生产工位的生产效率。
一种可选实施方式中,在步骤E2中,所述基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组,包括:
步骤E21,基于所述各个目标生产工位下的作业人员的生产作业报告,确定所述各个目标生产工位在同一时间段对应的所述生产动作序列的平均执行时长;
步骤E22,基于所述平均执行时长,对至少一个目标生产工位对应的参考动作序列进行调整,生成调整后的参考动作序列。
实施时,可以确定多个目标生产工位在同一时间段对应的生产动作序列的平均执行时长,比如,可以先确定第一时间段内,目标生产工位一对应的生产动作时长一(比如可以为第一时间段内包括的至少一个生产动作序列对应的总执行时长的和)、目标生产工位二对应的生产动作时长二、目标生产工位三对应的生产动作时长三,将生产动作时长一、生产动作时长二、生产动作时长三求平均,得到平均执行时长。
再可以基于平均执行时长,对至少一个目标生产工位对应的参考动作序列进行调整。比如,若目标生产工位一对应的生产动作时长一为60秒,目标生产工位一对应的生产动作时长一为30秒,目标生产工位一对应的生产动作时长一为30秒,平均执行时长为40秒,则可以将目标生产工位一、目标生产工位二、目标生产工位三分别对应的参考动作序列进行调整,生成调整后的参考动作序列,以便使得每个目标生产工位在特定时间段内的生产动作时长与平均执行时长之间的偏差小于设置的偏差阈值,以实现各个目标生产工位之间生产动作时长的均衡。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于相同的构思,本公开实施例还提供了一种生产作业报告的生成装置,参见图4所示,为本公开实施例提供的生产作业报告的生成装置的架构示意图,包括获取模块401、识别模块402、第一生成模块403,具体的:
获取模块401,用于获取作业人员在目标生产工位的操作视频画面;
识别模块402,用于通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,所述生产动作序列用于表征所述作业人员执行的生产动作;
第一生成模块403,用于基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
一种可能的实施方式中,在所述得到所述作业人员的生产作业报告之后,所述生成装置还包括:第二生成模块404,用于:
基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案。
一种可能的实施方式中,所述第二生成模块404,在基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案时,用于:
基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,确定目标生产动作的平均时长;
基于所述目标生产动作的平均时长,对所述参考动作序列中包括的与所述目标生产动作对应的参考动作的参考时长进行调整,得到所述参考动作对应的调整后的参考时长。
一种可能的实施方式中,所述第二生成模块404,在基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案时,用于:
基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,对所述参考动作序列中包括的目标参考动作进行拆解,得到多个子动作;
将拆解后的各个子动作进行重组,生成重组后的目标参考动作,其中,重组后的目标参考动作与重组前的目标参考动作包括的各子动作的执行次序不同;
基于所述重组后的目标参考动作,得到所述目标生产工位对应的更新后的参考动作序列,所述更新后的参考动作序列包括所述重组后的目标参考动作。
一种可能的实施方式中,在得到所述作业人员的生产作业报告之后,所述生成装置还包括:第一调整模块405,用于:
基于所述生产作业报告,确定所述作业人员在所述生产作业报告对应的总时间段内的第一局部时间段和第二局部时间段;其中,所述第一局部时间段对应的工作效率高于所述目标时间段内除所述第一局部时间段之外的第一其他时间段,所述第二局部时间段对应的工作效率低于所述目标时间段内除所述第二局部时间段之外的第二其他时间段;
基于所述第一局部时间段和所述第二局部时间段,对所述作业人员的作业内容和作业时间中的至少一项进行调整。
一种可能的实施方式中,在得到所述作业人员的生产作业报告之后,所述生成装置还包括确定模块406,所述确定模块406用于执行如下至少一项:
基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员在所述目标生产工位执行与各个参考动作匹配的生产动作的工作效率;
基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员对应的包含至少一种作业质量指标的数据图表,其中,所述至少一种作业质量指标用于表征所述作业人员在所述目标生产工位执行的各个生产动作的作业质量。
一种可能的实施方式中,在所述得到所述作业人员的生产作业报告之后,所述生成装置还包括:第二调整模块407,用于:
在所述目标生产工位包括多个的情况下,确定各个目标生产工位下的作业人员的生产作业报告;
基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组;
其中,所述生产线包括所述目标生产工位,所述参考动作序列组包括多个参考动作序列,每个目标生产工位对应至少一个参考动作序列。
一种可能的实施方式中,所述第二调整模块407,在基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组时,用于:
基于所述各个目标生产工位下的每个作业人员的生产作业报告,确定所述各个目标生产工位在同一时间段对应的所述生产动作序列的平均执行时长;
基于所述平均执行时长,对至少一个目标生产工位对应的参考动作序列进行调整,生成调整后的参考动作序列。
一种可能的实施方式中,在得到生产动作序列之后,还包括:筛选模块408,用于:
基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,确定所述生产动作序列包括的各个生产动作中是否存在异常动作;
在所述生产动作序列中存在异常动作的情况下,对所述生产动作序列进行筛选,生成筛选后的生产动作序列;
所述第一生成模块403,在基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告时,用于:
基于所述筛选后的生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
一种可能的实施方式中,所述识别模块402,在通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列时,用于:
针对所述操作视频画面中的每个视频帧,对所述视频帧进行生产动作识别,确定所述生产动作的动作类别,其中,所述动作类别包括有效动作类别和无效动作类别,所述有效动作类别包括所述参考动作序列中各个参考动作的动作类别;
基于所述操作视频画面中多个视频帧分别对应的所述动作类别,确定每个所述生产动作对应的执行时长;
基于各个生产动作的动作类别和每个生产动作对应的所述执行时长,确定所述生产动作序列。
在一些实施例中,本公开实施例提供的装置具有的功能或包含的模板可以用于执行上文方法实施例描述的方法,其具体实现可以参照上文方法实施例的描述,为了简洁,这里不再赘述。
基于同一技术构思,本公开实施例还提供了一种电子设备。参照图5所示,为本公开实施例提供的电子设备的结构示意图,包括处理器501、存储器502、和总线503。其中,存储器502用于存储执行指令,包括内存5021和外部存储器5022;这里的内存5021也称内存储器,用于暂时存放处理器501中的运算数据,以及与硬盘等外部存储器5022交换的数据,处理器501通过内存5021与外部存储器5022进行数据交换,当电子设备500运行时,处理器501与存储器502之间通过总线503通信,使得处理器501在执行以下指令:
获取作业人员在目标生产工位的操作视频画面;
通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,所述生产动作序列用于表征所述作业人员执行的生产动作;
基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
此外,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的生产作业报告的生成方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例还提供一种计算机程序产品,该计算机程序产品承载有程序代码,所述程序代码包括的指令可用于执行上述方法实施例中所述的生产作业报告的生成方法的步骤,具体可参见上述方法实施例,在此不再赘述。
其中,上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上仅为本公开的具体实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以权利要求的保护范围为准。

Claims (13)

1.一种生产作业报告的生成方法,其特征在于,包括:
获取作业人员在目标生产工位的操作视频画面;
通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,所述生产动作序列用于表征所述作业人员执行的生产动作;
基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
2.根据权利要求1所述的生成方法,其特征在于,在所述得到所述作业人员的生产作业报告之后,所述生成方法还包括:
基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案。
3.根据权利要求2所述的生成方法,其特征在于,所述基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案,包括:
基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,确定目标生产动作的平均时长;
基于所述目标生产动作的平均时长,对所述参考动作序列中包括的与所述目标生产动作对应的参考动作的参考时长进行调整,得到所述参考动作对应的调整后的参考时长。
4.根据权利要求2或3所述的生成方法,其特征在于,所述基于所述生产作业报告,生成针对所述目标生产工位对应参考动作序列的改进方案,包括:
基于所述目标生产工位对应的至少一个作业人员的所述生产作业报告,对所述参考动作序列中包括的目标参考动作进行拆解,得到多个子动作;
将拆解后的各个子动作进行重组,生成重组后的目标参考动作,其中,重组后的目标参考动作与重组前的目标参考动作包括的各子动作的执行次序不同;
基于所述重组后的目标参考动作,得到所述目标生产工位对应的更新后的参考动作序列,所述更新后的参考动作序列包括所述重组后的目标参考动作。
5.根据权利要求1~4任一所述的生成方法,其特征在于,在得到所述作业人员的生产作业报告之后,所述生成方法还包括:
基于所述生产作业报告,确定所述作业人员在所述生产作业报告对应的总时间段内的第一局部时间段和第二局部时间段;其中,所述第一局部时间段对应的工作效率高于所述目标时间段内除所述第一局部时间段之外的第一其他时间段,所述第二局部时间段对应的工作效率低于所述目标时间段内除所述第二局部时间段之外的第二其他时间段;
基于所述第一局部时间段和所述第二局部时间段,对所述作业人员的作业内容和作业时间中的至少一项进行调整。
6.根据权利要求1~5任一所述的生成方法,其特征在于,在得到所述作业人员的生产作业报告之后,所述生成方法还包括如下至少一项:
基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员在所述目标生产工位执行与各个参考动作匹配的生产动作的工作效率;
基于所述作业人员的所述生产作业报告、和所述参考动作序列中每个参考动作的参考时长,确定所述作业人员对应的包含至少一种作业质量指标的数据图表,其中,所述至少一种作业质量指标用于表征所述作业人员在所述目标生产工位执行的各个生产动作的作业质量。
7.根据权利要求1~6任一所述的生成方法,其特征在于,在所述得到所述作业人员的生产作业报告之后,所述生成方法还包括:
在所述目标生产工位包括多个的情况下,确定各个目标生产工位下的作业人员的生产作业报告;
基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组;
其中,所述生产线包括所述目标生产工位,所述参考动作序列组包括多个参考动作序列,每个目标生产工位对应至少一个参考动作序列。
8.根据权利要求7所述的生成方法,其特征在于,所述基于所述各个目标生产工位下的作业人员的生产作业报告,对生产线对应的参考动作序列组进行调整,生成调整后的参考动作序列组,包括:
基于所述各个目标生产工位下的作业人员的生产作业报告,确定所述各个目标生产工位在同一时间段对应的所述生产动作序列的平均执行时长;
基于所述平均执行时长,对至少一个目标生产工位对应的参考动作序列进行调整,生成调整后的参考动作序列。
9.根据权利要求1~8任一所述的生成方法,其特征在于,在所述得到生产动作序列之后,还包括:
基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,确定所述生产动作序列包括的各个生产动作中是否存在异常动作;
在所述生产动作序列中存在异常动作的情况下,对所述生产动作序列进行筛选,生成筛选后的生产动作序列;
所述基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告,包括:
基于所述筛选后的生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
10.根据权利要求1~9任一所述的生成方法,其特征在于,所述通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,包括:
针对所述操作视频画面中的每个视频帧,对所述视频帧进行生产动作识别,确定所述生产动作的动作类别,其中,所述动作类别包括有效动作类别和无效动作类别,所述有效动作类别包括所述参考动作序列中各个参考动作的动作类别;
基于所述操作视频画面中多个视频帧分别对应的所述动作类别,确定每个所述生产动作对应的执行时长;
基于各个生产动作的动作类别和每个生产动作对应的所述执行时长,确定所述生产动作序列。
11.一种生产作业报告的生成装置,其特征在于,包括:
获取模块,用于获取作业人员在目标生产工位的操作视频画面;
识别模块,用于通过对所述操作视频画面中所述作业人员进行生产动作识别,得到生产动作序列,所述生产动作序列用于表征所述作业人员执行的生产动作;
第一生成模块,用于基于所述生产动作序列以及与所述目标生产工位对应参考动作序列,得到所述作业人员的生产作业报告。
12.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至10任一所述的生产作业报告的生成方法的步骤。
13.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至10任一所述的生产作业报告的生成方法的步骤。
CN202110763739.8A 2021-07-06 2021-07-06 生产作业报告的生成方法、装置、电子设备及存储介质 Withdrawn CN113489954A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110763739.8A CN113489954A (zh) 2021-07-06 2021-07-06 生产作业报告的生成方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110763739.8A CN113489954A (zh) 2021-07-06 2021-07-06 生产作业报告的生成方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN113489954A true CN113489954A (zh) 2021-10-08

Family

ID=77940509

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110763739.8A Withdrawn CN113489954A (zh) 2021-07-06 2021-07-06 生产作业报告的生成方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN113489954A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060224434A1 (en) * 2005-03-29 2006-10-05 Zarpac, Inc. Human data acquisition and analysis for industrial processes
CN107194616A (zh) * 2017-06-29 2017-09-22 惠国征信服务股份有限公司 企业产能统计系统和方法
CN109413376A (zh) * 2017-08-16 2019-03-01 奥林巴斯株式会社 作业支援系统、可穿戴装置、摄像装置、作业支援方法
CN110516636A (zh) * 2019-08-30 2019-11-29 盈盛智创科技(广州)有限公司 一种工序的监测方法、装置、计算机设备和存储介质
CN110555349A (zh) * 2018-06-01 2019-12-10 杭州海康威视数字技术股份有限公司 一种工作时长统计方法和装置
WO2020087830A1 (zh) * 2018-11-02 2020-05-07 深圳壹账通智能科技有限公司 数据分析方法、装置、服务器及存储介质
CN111369170A (zh) * 2020-03-18 2020-07-03 浩云科技股份有限公司 银行文优服务评价系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060224434A1 (en) * 2005-03-29 2006-10-05 Zarpac, Inc. Human data acquisition and analysis for industrial processes
CN107194616A (zh) * 2017-06-29 2017-09-22 惠国征信服务股份有限公司 企业产能统计系统和方法
CN109413376A (zh) * 2017-08-16 2019-03-01 奥林巴斯株式会社 作业支援系统、可穿戴装置、摄像装置、作业支援方法
CN110555349A (zh) * 2018-06-01 2019-12-10 杭州海康威视数字技术股份有限公司 一种工作时长统计方法和装置
WO2020087830A1 (zh) * 2018-11-02 2020-05-07 深圳壹账通智能科技有限公司 数据分析方法、装置、服务器及存储介质
CN110516636A (zh) * 2019-08-30 2019-11-29 盈盛智创科技(广州)有限公司 一种工序的监测方法、装置、计算机设备和存储介质
CN111369170A (zh) * 2020-03-18 2020-07-03 浩云科技股份有限公司 银行文优服务评价系统

Similar Documents

Publication Publication Date Title
CN108376117B (zh) 交互响应的测试方法和设备
JPWO2016199405A1 (ja) 棚割支援装置、棚割支援システム、棚割支援方法、および、プログラム
US20180330226A1 (en) Question recommendation method and device
CN111401722B (zh) 智能决策方法和智能决策系统
CN110798709B (zh) 视频处理方法和装置、存储介质及电子装置
CN109783385B (zh) 一种产品测试方法和装置
US11144179B2 (en) Next user interaction prediction
CN109068150A (zh) 一种视频的精彩画面提取方法、终端及计算机可读介质
CN110889526A (zh) 一种用户升级投诉行为预测方法及系统
Dees et al. Events put into context (EPiC)
CN114416485A (zh) 数据处理方法及装置
CN113989531A (zh) 一种图像处理方法、装置、计算机设备和存储介质
CN113489954A (zh) 生产作业报告的生成方法、装置、电子设备及存储介质
CN115865528B (zh) 基于多设备的用户资料操作方法、系统和可读存储介质
CN112541688A (zh) 业务数据校验方法、装置、电子设备及计算机存储介质
CN113628077B (zh) 生成不重复考题的方法、终端及可读存储介质
JP2017194808A (ja) 行動特性分析装置及び行動特性分析システム
CN115375965A (zh) 一种目标场景识别的预处理方法、目标场景识别方法
US11749021B2 (en) Retrieval device, control method, and non-transitory storage medium
CN112084092B (zh) 一种诊断规则的确定方法、装置、设备及存储介质
CN112508518A (zh) 结合rpa和ai的rpa流程的生成方法以及相应的设备、可读存储介质
CN114005183A (zh) 动作识别方法、装置、设备及存储介质
CN113313615A (zh) 一种对企业司法风险进行量化评分定级的方法及装置
CN107609401A (zh) 自动测试方法及装置
CN112328894A (zh) 一种行为引导方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20211008

WW01 Invention patent application withdrawn after publication