CN110929666B - 生产线监控方法、装置、系统及计算机设备 - Google Patents
生产线监控方法、装置、系统及计算机设备 Download PDFInfo
- Publication number
- CN110929666B CN110929666B CN201911199984.XA CN201911199984A CN110929666B CN 110929666 B CN110929666 B CN 110929666B CN 201911199984 A CN201911199984 A CN 201911199984A CN 110929666 B CN110929666 B CN 110929666B
- Authority
- CN
- China
- Prior art keywords
- user
- job
- shipment
- production line
- target user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004519 manufacturing process Methods 0.000 title claims abstract description 103
- 238000000034 method Methods 0.000 title claims abstract description 101
- 238000012544 monitoring process Methods 0.000 title claims abstract description 45
- 238000001514 detection method Methods 0.000 claims description 78
- 238000012806 monitoring device Methods 0.000 claims description 2
- 230000008569 process Effects 0.000 abstract description 30
- 230000006870 function Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 6
- 230000009471 action Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 5
- 238000012545 processing Methods 0.000 description 4
- 238000010191 image analysis Methods 0.000 description 3
- 238000012216 screening Methods 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 238000011002 quantification Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000003245 working effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0633—Workflow analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Strategic Management (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Tourism & Hospitality (AREA)
- Quality & Reliability (AREA)
- General Business, Economics & Management (AREA)
- Operations Research (AREA)
- Marketing (AREA)
- Game Theory and Decision Science (AREA)
- Development Economics (AREA)
- General Factory Administration (AREA)
Abstract
本申请提供了一种生产线监控方法、装置、系统及计算机设备,用户在生产线的不同作业位置进行作业过程中,计算机设备通过对生产线上的作业对象进行追踪检测,利用追踪检测结果,检测不同作业位置的作业对象是否符合条件,从而在追踪检测结果表明第一作业位置对应的第一作业对象符合条件的情况下,将该第一作业位置对第一作业对象进行作业的用户确定为目标用户,之后,将该目标用户对第一作业对象作业的目标操作图像共享至显示设备进行展示,以辅助对第一作业对象作业的其他用户作业,提高生产效率及作业对象的良品率。
Description
技术领域
本申请主要涉及数据处理技术领域,更具体地说是涉及一种生产线监控方法、装置、系统及计算机设备。
背景技术
生产线是以一定类型的零件组为对象组织的一种多品种生产组织形式,其不像流水线那样严格按照节拍进行生成,不能大量采用专用高效设备和工具,具有极大的灵活性,能够适应多品种生产的需求。
在实际应用中,生产线作业工人的操作手法因人而异,熟练工通常比新手的操作手法娴熟,具有更高的生产效率,且能够得到更多优良产品。
发明内容
有鉴于此,本申请提供了以下技术方案:
一方面,本申请提出了一种生产线监控方法,所述方法包括:
对生产线上的作业对象进行追踪检测;
如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户;
将所述目标用户对所述第一作业对象作业的目标操作图像,共享至显示设备进行展示,以辅助对所述第一作业对象作业的用户进行作业。
在一些实施例中,所述对生产线上的作业对象进行追踪检测,包括:
获取生产线上的作业对象的图像信息,所述图像信息包括用户对所述作业对象作业的操作图像、所述作业对象的对象标识及作业位置;
依据所述作业对象的对象标识,对相应作业对象进行追踪检测。
在一些实施例中,所述依据所述作业对象的对象标识,对相应作业对象进行追踪检测,包括:
对所述生产线上的多个作业对象各自的对象标识进行追踪,获取所述多个作业对象各自的出货检测结果,所述出货检测结果能够表明相应作业对象是否为良品;
依据在第一时间段内出货的多个作业对象各自的对象标识和作业位置,获取在所述第一时间段内不同作业位置对应的出货数量;
利用所述不同作业位置对应的出货数量,以及所述出货检测结果确定的所述第一时间段内的出货良品量,得到不同作业位置对应的出货良品率;
所述如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户,包括:
如果第一作业位置对应的第一作业对象的出货良品率符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户。
在一些实施例中,所述如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户,还包括:
对同一作业位置上的多个作业对象各自的所述操作图像进行分析,得到所述作业位置对应的所述作业对象的出机速度;
检测不同作业位置对应的同类作业对象的所述出货良品率,及所述出机速度是否符合条件;
如果第一作业位置对应的第一作业对象的出货良品率及出机速度均符合所述条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户。
在一些实施例中,所述如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户,还包括:
对所述操作图像进行用户姿态检测,得到不同作业位置上的用户对作业对象作业的肢体运动轨迹信息;
比较同一作业位置上的用户对同类作业对象多次作业的肢体运动轨迹信息,得到所述作业位置上的用户对相应类型作业对象作业的一致性概率;
检测不同作业位置对应的同类作业对象的所述出货良品率,及所述一致性概率是否符合条件;
如果第一作业位置对应的第一作业对象的出货良品率及所述一致性概率符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户。
在一些实施例中,所述将所述目标用户对所述第一作业对象作业的目标操作图像,共享至显示设备进行展示,包括:
获取所述生产线上对所述第一作业对象作业的待辅助用户所在的第二作业位置;
将所述目标用户对所述第一作业对象作业的目标操作图像,发送至部署在所述第二作业位置的显示设备,由所述显示设备展示所述目标操作图像。
在一些实施例中,如果追踪检测结果表明多个第一作业位置对应的第一作业对象均符合所述条件,所述方法还包括:
获取多个第一作业位置对应的第一作业对象的追踪检测结果与所述条件的匹配度;
选择处于与所述条件的匹配度最高的追踪检测结果对应的第一作业位置的用户确定为目标用户。
又一方面,本申请还提出了一种生产线监控装置,所述装置包括:
追踪检测模块,用于对生产线上的作业对象进行追踪检测;
目标用户确定模块,用于如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户;
操作图像共享模块,用于将所述目标用户对所述第一作业对象作业的目标操作图像,共享至显示设备进行展示,以辅助对所述第一作业对象作业的用户进行作业。
又一方面,本申请还提出了一种计算机设备,所述计算机设备包括:至少一个存储器和至少一个处理器;
所述存储器,用于存储实现如上述的生产线监控方法的程序;
所述处理器,用于调用并执行所述存储器存储的程序,所述程序用于实现如上述的生产线监控方法的各步骤。
又一方面,本申请还提出了一种生产线监控系统,所述系统包括:
部署在生产线上的多个图像采集设备,所述图像采集设备用于采集至少一个作业位置上的作业对象的图像信息;
如上述的计算机设备;
以及,部署在所述生产线上的多个显示设备,用于显示所述计算机设备确定的目标用户对作业对象作业的目标操作图像。
由此可见,与现有技术相比,本申请提供了一种生产线监控方法、装置、系统及计算机设备,用户在生产线的不同作业位置进行作业过程中,计算机设备通过对生产线上的作业对象进行追踪检测,利用追踪检测结果,检测不同作业位置的作业对象是否符合条件,从而在追踪检测结果表明第一作业位置对应的第一作业对象符合条件的情况下,将该第一作业位置对第一作业对象进行作业的用户确定为目标用户,之后,将该目标用户对第一作业对象作业的目标操作图像共享至显示设备进行展示,以辅助对第一作业对象作业的其他用户作业,提高生产效率及作业对象的良品率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1示出了本申请提出的生产线监控系统的一可选实例的结构示意图;
图2示出了本申请提出的计算机设备的一可选实例的结构示意图;
图3示出了本申请提出的生产线监控方法的一可选实例的流程示意图;
图4示出了本申请提出的生产线监控方法的又一可选实例的流程示意图;
图5示出了本申请提出的生产线监控方法的又一可选实例的流程示意图;
图6示出了本申请提出的生产线监控方法的又一可选实例的流程示意图;
图7示出了本申请提出的生产线监控方法的又一可选实例的流程示意图;
图8示出了本申请提出的生产线监控装置的一可选实例的结构示意图;
图9示出了本申请提出的生产线监控装置的又一可选实例的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
应当理解,本申请中使用的“系统”、“装置”、“单元”和/或“模块”是用于区分不同级别的不同组件、元件、部件、部分或装配的一种方法。然而,如果其他词语可实现相同的目的,则可通过其他表达来替换该词语。
如本申请和权利要求书中所示,除非上下文明确提示例外情形,“一”、“一个”、“一种”和/或“该”等词并非特指单数,也可包括复数。一般说来,术语“包括”与“包含”仅提示包括已明确标识的步骤和元素,而这些步骤和元素不构成一个排它性的罗列,方法或者设备也可能包含其它的步骤或元素。由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,在本申请实施例的描述中,“多个”是指两个或多于两个。以下术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。
另外,本申请中使用了流程图用来说明根据本申请的实施例的系统所执行的操作。应当理解的是,前面或后面操作不一定按照顺序来精确地执行。相反,可以按照倒序或同时处理各个步骤。同时,也可以将其他操作添加到这些过程中,或从这些过程移除某一步或数步操作。
参照图1,示出了实现本申请提出的生产线监控方法的生产监控系统的一可选示例的结构图,该系统可以包括:多个图像采集设备100、多个显示设备200以及计算机设备300,其中:
多个图像采集设备100可以部署在生产线上,用于采集至少一个作业位置上的作业对象的图像信息。
需要说明,本申请对这多个图像采集设备100在生产线上的具体位置不作限定,通常需要这多个图像采集设备100的总拍摄范围,能够覆盖生产线上的所有作业对象,保证能够采集到每一个作业对象的图像信息,以实现对各作业对象的监控。
因此,系统中图像采集设备100的数量可以依据其布局方式确定,如可以针对每一个作业位置,配置一个图像采集设备,该图像采集设备主要对该作业位置上的作业对象进行图像采集,得到作业对象不同时刻的图像信息;当然,如上述分析,一个图像采集设备也可以对多个作业位置上的作业对象进行图像采集,本申请对图像采集设备100与生产线上各作业位置之间的对应关系不做限定,可以依据图像采集设备100的结构及其性能确定,本申请不做一一列举。
在一些实施例中,上述图像采集设备100可以是摄像头、摄像机等具有图像采集功能的电子设备,本申请对该图像采集设备100的产品类型不做限定;根据实际需要,其可以具有旋转镜头或旋转支架等旋转部件,以实现拍摄范围的调整,关于如何调整图像采集设备的拍摄范围的实现方式本申请不做限定。
显示设备200可以是具有图像显示功能的电子设备,如独立的显示器,或具有显示器的终端等,本申请对该显示设备200的结构不做限定,该显示器可以包含触摸式或非触摸式显示屏,可以根据具体场景需求确定。
在一些实施例中,上述显示设备200除了具有显示功能外,根据实际需要,还可以具有音频播放功能,各种输入功能等等,因此,该显示设备200还可以具有实现相应功能的硬件和/或软件结构,如麦克风、扬声器、拾音器、灯、传感器组件等等,具体可以依据该显示设备200的产品类型确定,本申请在此不做一一列举。
本实施例中,可以为每一个作业位置配置一个显示设备200,以便在相应作业位置进行作业的用户,能够在作业的同时,看到显示设备200所显示的视频,尤其是在当前作业对象需要学习作业或改进现有作业方式等场景下,系统可以通过显示设备200播放相应的学习视频,以使得需要学习的用户能够观看,并参照视频内容进行作业,提高了用户作业效率,得到更多优良产品。
应该理解的是,对于显示设备200在生产线上的布局方式,并不局限于上文描述的与作业位置的一一对应关系,可以是多个作业位置对应一个显示设备,需要保证在这多个作业位置上进行作业的用户,能够在作业期间观看到该显示设备所输出的视频,本申请对该显示设备以及各作业位置的具体布局方式不做限定。
计算机设备300能够实现本申请提出的生产线监控方法,具体可以是本地服务器或部署在云端的服务器,也可以是具有较强数据处理能力的电子设备,本申请对该计算机设备300的产品类型及其部署位置不做限定,可以依据具体场景的需求确定。
参照图2,示出了本申请提出的计算机设备300的一可选示例的硬件结构图,该计算机设备300可以包括至少一个存储器310和至少一个处理器320,其中:
存储器310可以用于存储实现本申请各实施例提出的生产线监控方法的程序。
在一些实施例中,该存储器310可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件或其他易失性固态存储器件。
在一些实施例中,存储器310可以包括程序存储区和数据存储区,该程序存储区可以存储操作系统、以及至少一个功能(如图像分析功能)所需的应用程序、实现本申请提出的生产线监控方法的程序等;数据存储区可以存储计算机设备使用过程中所产生的数据,如获取的作业对象的图像信息、用户对作业对象进行作业的图像信息等等。
处理器320可以用于加载并执行存储器310存储的程序,以实现本申请各实施例提出的生产线监控方法,具体实现过程可以参照下文实施例相应部分的描述。
在一些实施例中,上述处理器320可以为中央处理器(Central Processing Unit,CPU)、特定应用集成电路(application-specific integrated circuit,ASIC)、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件等。
应该理解的是,本申请提出的计算机设备300的组成结构,并不局限于上文给出的存储器310和处理器320,还可以包括各种类型的通信接口,以实现计算机设备内部不同器件之间的数据交互等等,具体可以依据该计算机设备的产品类型及其功能需求,来确定计算机设备的硬件结构,图2所示的计算机设备的结构并不构成对本申请实施例中计算机设备的限定,在实际应用中,计算机设备可以包括比图2所示的更多或更少的部件,或者组合某些部件,本申请在此不做一一列举。
参照图3,示出了本申请提出的生产线监控方法的一可选示例的流程图,该方法可以适用于计算机设备,该计算机设备的组成结构可以参照但并不局限于上文计算机设备实施例的描述,如图3所示,本实施例提出的生产线监控方法可以包括但并不局限于以下步骤:
步骤S11,对生产线上的作业对象进行追踪检测;
结合上文描述的系统结构,本申请对在生产线上步骤图像采集设备,实现对作业对象的图像采集,得到能够表明各作业位置上的作业对象的对象标识、作业状态等参数的图像信息,这样,计算机设备能够通过对各图像采集设备采集到的同一作业对象,在不同时刻对应的图像信息进行分析,得知该作业对象在生产线上被生产情况。
以多个用户均对同一类作业对象进行生产作业的场景为例进行说明,计算机设备可以得到每一个作业对象的图像信息,经过图像分析后,可以依据图像分析结果即追踪检测结果,得知该作业对象当前处于什么生产阶段(如生产中、已出库),作业对象是否为良品,用户对该作业对象进行作业的一致性是否满足要求(其可以表明该用户对作业对象的作业动作是否流畅、专业等)等生产情况,即实现对该作业对象的追踪检测,本申请对步骤S11的具体实现过程不做详述。
步骤S12,如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在第一作业位置对第一作业对象进行作业的用户为目标用户;
其中,第一作业位置可以是生产线上的任一作业位置,第一作业对象可以是该第一作业位置上当前用户正在操作的作业对象,本申请对第一作业对象的产品类型不做限定,且在不同时间,该第一作业位置上的作业对象可能不同,本申请对用户在作业位置上操作的作业对象的类型不做限定。
继上文描述,通过对作业对象的追踪检测,可以掌握各作业对象在生产线上的生产情况,所以,计算机设备对作业对象进行追踪检测,得到追踪检测结果表明第一作业位置对应的第一作业对象符合条件,也就是说,当前有一个用户在第一作业位置上操作的第一作业对象符合条件,该用户的对第一作业对象的操作流程可以作为参考,供其他用户学习,所以,本申请可以将该用户确定为目标用户。
需要说明,本申请对第一作业对象符合条件的具体内容不做限定,可以具体应用场景对标准操作的要求确定,对于不同类型的作业对象,对其符合条件的判断标准可能不同,本申请不做一一详述。
步骤S13,将目标用户对第一作业对象作业的目标操作图像,共享至显示设备进行展示,以辅助对第一作业对象作业的用户进行作业。
经过上述分析,计算机设备筛选出对作业对象的作业符合条件的目标用户后,为了提高其他用户作业的同类型的作业对象的工作效率、良品率,本申请可以获取该目标用户对第一作业对象作业的目标操作图像,即目标用户对第一作业对象的操作流程,共享至显示设备进行展示,这样,对同类型作业对象即第一作业对象进行作业的其他用户,可以观看显示设备展示的目标本用户对第一作业对象的操作图像进行学习,以提高其他用户工作效率以及所作业的第一作业对象的良品率等。
其中,对于目标操作图像的展示方式,可以依据显示设备的数量及其布局方式确定,而对于显示设备的数量及其布局方式可以参照上述系统实施例相应部分的描述。
综上,本实施例中,用户在生产线的不同作业位置进行作业过程中,计算机设备可以对生产线上的作业对象进行追踪检测,从而利用追踪检测结果,检测不同作业位置的作业对象是否符合条件,以便在追踪检测结果表明第一作业位置对应的第一作业对象符合条件的情况下,将该第一作业位置对第一作业对象进行作业的用户确定为目标用户,之后,将该目标用户对第一作业对象作业的目标操作图像共享至显示设备进行展示,以辅助对第一作业对象作业的其他用户作业,提高生产效率及作业对象的良品率。
参照图4,示出了本申请提出的生产线监控方法的一可选示例的流程图,本实施例可以是对上文实施例描述的生产线监控方法的一种细化实现方式,但并不局限于本实施例描述的这种细化实现方式,如图4所示,本实施例提供的生产线监控方法可以包括:
步骤S21,获取生产线上的作业对象的图像信息;
本实施例中,结合上文对系统中图像采集设备的描述,生产线上部署的图像采集设备可以对各作业位置上的作业对象进行监控,实时获取拍摄范围内的作业对象的图像信息,该图像信息可以包括但并不局限于:用户对该作业对象作业的操作图像、该作业对象的对象标识及作业位置等内容,可以依据实际监控需求确定。
其中,用户对作业对象作业的操作图像,其可以表明该用户对作业对象的操作流程,因此,通过对该操作图像的分析,可以得知用户对作业对象的操作是否标准、熟练等信息,据此作为选择目标用户的参考依据之一。
在实际应用中,生产线上通常会有多个用户对相同或不同类型的作业对象进行同时作业,所以说,同一时间,生产线上可能会存在多个作业对象,本实施例可以通过在作业对象上配置对象标识,来实现对不同作业对象的区分,甚至可以用于后续对作业对象的识别,因此,该对象标识可以具有唯一性,如条形码、二维码或其他编码等标识信息,本申请对各作业对象的对象标识的内容不做限定。
另外,由于图像采集设备可以对相应作业位置进行图像采集,利用采集到的信息,可以确定出该作业位置与作业对象的对应关系,以及用户与作业位置之间的对应关系,以便据此进一步确定各用户与各作业对象之间的对应关系,本申请对用户、作业位置、作业对象相互之间的对应关系的表示方式以及确定方式均不作限定。
在一些实施例中,如预先配置好各用户作业的作业位置的应用场景下,可以依据用户的考勤记录信息,来得到当前用户与各作业位置之间的对应关系,但并不局限于本申请给出的确定作业用户与作业位置之间的对应关系的确定方式。
步骤S22,依据作业对象的对象标识,对相应作业对象进行追踪检测;
在生产线的实际运行过程中,同一个作业对象可能需要一个或多个用户在不同阶段进行操作,完成作业对象的不同作业步骤直至出货。为了区别各作业对象,对象标识作为各作业对象的唯一标识信息,可以伴随着作业对象在生产线上的流动直至出货,以使得计算机设备能够利用对象标识,随时查看相应的作业对象在生产线上的位置,了解各作业对象的作业进度等。
需要说明的是,本申请对如何利用作业对象的对象标识,实现对该作业对象的追踪检测的方法不做限定,可以依据具体的追踪检测需求,来确定具体的追踪检测内容,可以参照但并不局限于下文相应实施例描述的实现方式。
步骤S23,获取多个第一作业位置对应的第一作业对象的追踪检测结果与条件的匹配度;
步骤S24,选择处于与条件的匹配度最高的追踪检测结果对应的第一作业位置的用户确定为目标用户;
继上述分析,本实施例按照上述方式,对生产线上的各作业对象进行追踪检测,得到相应的追踪检测结果后,如果该追踪检测结果表明多个第一作业位置对应的第一作业对象均符合条件的情况下,如当前均用来生产第一作业对象的多个第一作业位置上的用户,在对该第一作业对象的操作均达到预设参考标准,或者这多个用户生产的第一作业对象的良品率都很高等,这用户对第一作业对象的操作过程,能够辅助生产该第一作业对象的其他用户的作业,以提高生产效率及第一作业对象的出货良品率等,本申请希望能够从这多个第一作业位置上的用户中,挑选一个用户作为目标用户,从而将其对第一作业对象的操作图像共享至显示设备,以辅助对第一作业对象作业的其他用户进行作业。
基于上述分析,本实施例可以分别获取符合条件的多个第一作业对象的追踪检测结果,与该条件的匹配度,通常情况下,该匹配度越高,说明相应第一作业对象的良品率和/或出货量,和/或其所在的第一作业位置上的用户的作业流畅度、动作一致性等参数越高,相应第一作业位置上的用户被确定为目标用户的概率越大。因此,本实施例可以选择在匹配度最高的追踪检测结果对应的第一作业位置上的用户为目标用户,但并不局限于本实施例给出的这种选择目标用户的方法。
另外,本申请对如何获取不同追踪检测结果与条件的匹配度的具体实现方法不做限定,可以依据该条件的具体内容来确定,如该追踪检测结果包含的内容与该条件包含的内容的一致性越高,可以认为该追踪检测结果与该条件的匹配度越高,但并不局限于这种计算方式。
步骤S25,获取生产线上对第一作业对象作业的待辅助用户所在的第二作业位置;
步骤S26,将目标用户对第一作业对象作业的目标操作图像,发送至部署在第二作业位置的显示设备,由显示设备展示目标操作图像。
本实施例从当前作业的多个用户中确定出目标用户后,可以获取该目标用户对第一作业对象作业的目标操作图像,如该目标用户对第一作业对象进行作业的视频内容,如上述分析,该目标用户对第一作业对象的操作手法、流程等作业内容是规范、流畅且高效的,满足生产作业要求,而且,目标用户作业得到的第一作业对象出货速度、出货良品率等都比较高,所以,关于对第一作业对象的操作过程,可以将该目标用户的目标操作图像作为参考,供对同类型的该第一作业对象进行作业的其他用户学习,以辅助提升该其他用户的作业效率及出货良品率等。
基于此,本申请在确定目标用户及其作业的第一作业对象后,可以从在生产线上的多个作业位置中,筛选出同样对第一作业对象进行作业的第二作业位置,将此时处于第二作业位置上对第一作业对象进行作业的用户记为待辅助用户,本实施例对确定第二作业位置以及该待辅助用户的具体方法不做限定。
之后,由于将目标操作图像作为待辅助用户对第一作业对象进行作业的参考学习图像,本实施例确定部署在第二作业位置的显示设备后,可以直接将该目标操作图像发送至该显示设备进行展示,以使得待辅助用户在对第一作业对象进行作业过程中,能够随时观看该显示设备输出的目标操作图像,当然,待辅助用户也可以在对第一作业对象作业之前等其他时间,观看显示设备输出的目标操作图像,以提升其对第一作业对象进行作业的工作效率、出货良品率等。
其中,关于显示设备的部署及其对目标操作图像的展示方式,本申请不做限定,可以参照但并不局限于本申请上文相应部分的描述。
综上所述,本实施例利用生产线上的各作业对象的图像信息及其包含的作业对象的对象标识,实现对相应作业对象的追踪检测,监控对各作业对象进行作业的各用户的作业过程,尤其是在多个用户对同一类作业对象进行作业的情况下,可以利用追踪检测结果与预设的条件的匹配度,从这多个用户中筛选出目标用户,将其对该类作业对象的操作图像作为参考,共享至对该类作业对象进行作业的其他用户,辅助该其他用户对该类作业对象的作业,提升作业效率、出货良品率等。
参照图5,示出了本申请提出的生产线监控方法的又一可选示例的流程图,本实施例可以是对上文实施例描述的生产线监控方法的又一种细化实现方式,如图5所示,本实施例提供的生产线监控方法可以包括:
步骤S31,获取生产线上的作业对象的图像信息;
关于步骤S31的实现过程可以参照上述实施例的步骤S21相应部分的描述,不再赘述。
其中,步骤S31获取的上述图像信息中可以包括用户对作业对象作业的操作图像、作业对象的对象标识及作业位置等内容,但并不局限于此。
步骤S32,对生产线上的多个作业对象各自的对象标识进行追踪,获取多个作业对象各自的出货检测结果;
其中,该出货检测结果能够表明相应作业对象是否为良品,本实施例对该出货检测结果包含的具体内容不做限定。
继上文实施例相应部分的描述,上述对象标识可以是条形码、二维码等相应作业对象的唯一标识信息,在生产线上该对象标识会一直伴随对应的作业对象直至出货,所以,本实施例可以通过对该对象标识的追踪检测,来确定相应作业对象是否通过生产线上最终的检测环节,即具有该对象标识的作业对象是否为良品,关于如何检测该作业对象是否为良品的方式及实现过程,本申请不做详述。
步骤S33,依据在第一时间段内出货的多个作业对象各自的对象标识和作业位置,获取在该第一时间段内不同作业位置对应的出货数量;
步骤S34,利用不同作业位置对应的出货数量,以及出货检测结果确定的该第一时间段内的出货良品量,得到不同作业位置对应的出货良品率;
本申请通过对作业对象上的对象标识的追踪检测,可以确定出该作业对象是在哪个作业位置上完成组装,为了获取各作业位置的出货良品率,本申请可以监测第一时间段内各作业位置上对不同作业对象的出货数量,以及该时间段内出货良品量,再由此计算出不同作业位置上所作业的作业对象的出货良品率,如统计出不同作业位置所组装的单位时间(如一个小时)内作业对象总数(即出货数量),以及最终成为良品的数量(即出货良品量),通过两者的比值得到相应作业位置上出货的良品率,从而实现了对评价相应作业位置上用户作业情况的指标的量化,具体量化过程并不局限于本实施例描述的实现方法。
需要说明,本申请对上述第一时间段的具体时间不做限定,可以根据实际场景的需求确定。
步骤S35,如果第一作业位置对应的第一作业对象的出货良品率符合条件,确定在第一作业位置对第一作业对象进行作业的用户为目标用户;
本实施例可以按照上文描述的方式,获取不同作业位置上对不同作业对象的出货良品率,在一些实施例的实际应用中,可以将用户对作业对象的出货良品率,来作为判断该用户能否成为目标用户的条件,也就是说,步骤S35中的条件可以包括作业对象的出货良品率大于第一阈值,相应地,步骤S35具体可以包括检测第一作业位置对应的第一作业对象的出货良品率是否达到第一阈值,如果达到,可以将当前在该第一作业位置上对第一作业对象进行作业的用户确定为目标用户,这种情况下,所确定出的目标用户对第一作业对象的作业步骤是规范的,可供其他用户参考学习。
需要说明的是,本申请对上述第一阈值的具体数值不做限定,且关于判断目标用户所使用的条件包含的具体内容,并不局限于上文给出的出货良品率的判断,可以根据实际场景的需求确定。
步骤S36,将目标用户对第一作业对象作业的目标操作图像,共享至显示设备进行展示,以辅助对第一作业对象作业的用户进行作业。
关于步骤S36的具体实现过程,可以参照上述实施例相应部分的描述,本实施例不再赘述。
综上,本实施例可以通过追踪检测多个作业位置上不同作业对象的出货良品率,从在这多个作业位置上进行作业的用户中,筛选出对作业对象操作更加规范的目标用户的目标操作图像,将其共享至对同类作业对象进行作业的其他作业位置对应的显示设备进行展示,以辅助该其他作业位置上的用户对该类作业对象的作业操作,如改进这类用户对作业对象的作业操作手法,提高其出货良品率,还可以供新用户学习如何对这类作业对象进行作业等等,从而提高整个生产线所生产的各作业对象的出货良品率,进而提高作业对象的生产效率。
在又一些实施例中,在确定目标用户的过程中,本申请除了依据作业位置对作业对象的出货良品率,还可以依据出机速度、用户肢体运动轨迹的一致性等要素,来实现对目标用户的筛选,因此,本申请可以根据实际需要,利用上文列举的但并不局限于上文列举的一个或多个组合要素,预先获得用于筛选目标用户的条件内容,本申请仅给出其中的几种要素组合方式,来实现对目标用户的筛选,对于其他要素及其组合的实现方式类似,本申请不做一一详述。
参照图6,示出了本申请提出的生产线监控方法的又一可选示例的流程图,本实施例主要对目标用户的获取过程进行描述,关于该生产线监控方法中的其他步骤,可以参照上述实施例相应部分的描述,如图6所示,该方法可以包括:
步骤S41,获取生产线上的作业对象的图像信息;
其中,上述图像信息中可以包括用户对作业对象作业的操作图像、作业对象的对象标识及作业位置等内容,但并不局限于此。
步骤S42,对生产线上的多个作业对象各自的对象标识进行追踪,获取多个作业对象各自的出货检测结果;
步骤S43,依据在第一时间段内出货的多个作业对象各自的对象标识和作业位置,获取在该第一时间段内不同作业位置对应的出货数量;
步骤S44,利用不同作业位置对应的出货数量,以及出货检测结果确定的该第一时间段内的出货良品量,得到不同作业位置对应的出货良品率;
关于不同作业位置上的出货良品率的获取过程,可以参照上述实施例相应部分的描述。
步骤S45,对同一作业位置上的多个作业对象各自的操作图像进行分析,得到作业位置对应的该作业对象的出机速度;
本实施例中,出机速度可以是作业对象被某一作业位置上的用户拿起并放回生产线的过程,完成一次该过程可以表示该用户完成组装一次,单位时间(如一个小时等)内完成组装的次数,可以表示该用户的出机速度,即作为评价该用户是否能够作为目标用户的又一量化指标。
上述操作图像可以表示任一作业位置上,用户对作业对象的作业过程,其可以包含该用户何时拿起作业对象,何时又将该作业对象放回生产线上,根据需要还可以统计该用户对该作业对象的作业时间等参数信息,以便据此计算得到相应作业位置对不同作业对象的出机速度。
应该理解的是,同一用户对不同作业对象的出机速度可能不同,甚至同一用户对同一类作业对象在不同时间段的出机速度也可能会有差异,因此,在据此确定的目标用户随着时间推移是可能变动的,可以按照本实施例提供的确定方式,对目标用户进行实时或周期性更新。
另外,需要说明的是,本申请对作业对象的出机速度的获取过程,与上述出货良品率的获取过程的执行顺序不做限定,本实施例仅用来说明出机速度的一种获取方式,以及出货良品率的一种获取方式,并不限定执行顺序。
步骤S46,检测不同作业位置对应的同类作业对象的出货良品率,及出机速度是否符合条件;如果是,进入步骤S47;如果否,返回步骤S41继续监测;
步骤S47,确定在第一作业位置对第一作业对象进行作业的用户为目标用户;
本实施例中,可以检测同一作业位置对同一作业对象(即同类作业对象)的出货良品率、出机速度均符合条件,将在该作业位置对该作业对象进行作业的用户确定为目标用户,若仅出货良品率或出机速度符合条件中的相应内容,可以认为不符合条件,该用户不能确定为目标用户。
当然,根据实际场景的需求,也可以在出货良品率或出机速度符合条件中的相应内容,即将该用户确定为目标用户,本实施例是从更好地提高工作效率、出货良品率的角度,描述了确定目标用户的一可选确定方式,对于其他确定方式本申请不做一一详述。
基于此,本实施例中的上述条件可以包括:作业对象的出货良品率大于第一阈值、作业位置对作业对象的出机速度大于第二阈值等。应该理解的是,对于确定目标用户的不同实现方式,该条件所包含的具体内容可以相应改变,如作业对象的出货良品率大于第一阈值,或者作业位置对作业对象的出机速度大于第二阈值;作业对象的出货良品率大于第一阈值,且作业位置对作业对象的出机速度大于第二阈值等等,本申请对该第一阈值和第二阈值的具体数值不做限定。
步骤S48,将目标用户对第一作业对象作业的目标操作图像,共享至显示设备进行展示,以辅助对第一作业对象作业的用户进行作业。
关于步骤S48的具体实现过程,可以参照上述实施例相应部分的描述,本实施例不再赘述。
综上,本实施例通过对生产线上,不同作业位置上的各作业对象的出货良品率、出机速度进行追踪检测,从位于不同作业位置的多个用户中,筛选出机速度快、良品率高的用户为目标用户,将该目标用户对作业对象的操作手法,同步至生产线上对同类作业对象进行作业的作业位置对应的显示设备进行展示,供对同类作业对象进行作业的其他用户学习该目标用户的操作手法,提升出机效率。
在又一些实施例中,参照图7,示出了本申请提出的生产线监控方法的又一可选示例的流程图,本实施例主要对目标用户的获取过程进行描述,关于该生产线监控方法中的其他步骤,可以参照上述实施例相应部分的描述,如图7所示,该方法可以包括:
步骤S51,获取生产线上的作业对象的图像信息;
其中,上述图像信息中可以包括用户对作业对象作业的操作图像、作业对象的对象标识及作业位置等内容,但并不局限于此。
步骤S52,对生产线上的多个作业对象各自的对象标识进行追踪,获取多个作业对象各自的出货检测结果;
步骤S53,依据在第一时间段内出货的多个作业对象各自的对象标识和作业位置,获取在该第一时间段内不同作业位置对应的出货数量;
步骤S54,利用不同作业位置对应的出货数量,以及出货检测结果确定的该第一时间段内的出货良品量,得到不同作业位置对应的出货良品率;
关于不同作业位置上的出货良品率的获取过程,可以参照上述实施例相应部分的描述。
步骤S55,对该图像信息中的操作图像进行用户姿态检测,得到不同作业位置上的用户对作业对象作业的肢体运动轨迹信息;
步骤S56,比较同一作业位置上的用户对同类作业对象多次作业的肢体运动轨迹信息,得到该作业位置上的用户对相应类型作业对象作业的一致性概率;
本申请中,用户对作业对象进行作业过程中,动作一致性可以是指:该用户每一次组装作业对象的肢体运行轨迹相似度,相似度越高,说明该用户对该作业对象的操作手法一致性越好,即用户对同类作业对象作业的一致性概率越高,若动作完全一致,其一致性概率可以为100%;若每次组装作业对象的动作不一样,其一致性概率可以为0%,为了更好地量化指标,本实施例可以对0%~100%之间的一致性概率进行逐级量化,具体实现方法不做限定。
结合上述分析,本申请获取的操作图像可以包括用户对作业对象的作业流程,以及该用户对作业对象进行作业过程中的四肢躯干的运行轨迹等信息,所以,本实施例通过对该操作图像进行用户姿态检测,可以得到该用户对每一个作业对象进行作业过程中的肢体运行轨迹信息,之后,通过将同一类作业对象的不同个/次作业对象的作业过程中的肢体运行轨迹信息进行比对,来判断该用户对这类作业对象的每次作业动作的一致性程度。本申请对步骤S56的具体实现过程不做详述,可以依据肢体运动轨迹信息包含的具体内容确定。
另外,需要说明的是,本申请对获取作业对象的出货良品率,以及多次作业的一致性概率的执行顺序不做限定,也就是说,上述步骤S52~步骤S54,与步骤S55~步骤S56两部分的执行顺序,并不局限于本实施例给出的先后顺序,根据实际场景的需求,这两部分也可以同时执行,或者先执行步骤S55~步骤S56的一致性概率获取过程,再执行步骤S52~步骤S54描述的出货良品率获取过程等等。
步骤S57,检测不同作业位置对应的同类作业对象的所出货良品率,及一致性概率是否符合条件,如果是,进入步骤S58;如果否,返回步骤S51继续检测;
本实施例中,用于确定哪个用户为目标用户的条件可以包括:作业对象的出货良品率大于第一阈值、不同作业位置对同类作业对象的多次作业的一致性概率大于第三阈值等。在实际应用中,步骤S57具体可以是出货良品率大于第一阈值且所得一致性概率大于第三阈值,认为符合条件,可以执行后续步骤;反之,若出货良品率或一致性概率未达到相应阈值,可以认为不符合条件。
当然,根据实际场景的需求,在一些实施例中,也可以是出货良品率或一致性概率达到相应阈值,就认为符合条件,将相应作业位置上的用户确定为目标用户等等,本申请对上述条件的具体内容不做限定,在不同应用场景下,该条件内容可能不同,可以根据实际需求来确定。
步骤S58,确定在第一作业位置对第一作业对象进行作业的用户为目标用户;
步骤S59,将目标用户对第一作业对象作业的目标操作图像,共享至显示设备进行展示,以辅助对第一作业对象作业的用户进行作业。
关于步骤S59的具体实现过程,可以参照上述实施例相应部分的描述,本实施例不再赘述。
综上,本实施例通过对生产线上,不同作业位置上的各作业对象的出货良品率、多次作业的动作一致性进行追踪检测,从位于不同作业位置的多个用户中,筛选出良品率高、操作手法一致性好的用户为目标用户,将该目标用户对作业对象的操作手法,同步至生产线上对同类作业对象进行作业的作业位置对应的显示设备进行展示,供对同类作业对象进行作业的其他用户学习该目标用户的操作手法,提升出机效率。
在又一些实施例中,在获取各作业位置上的各作业对象的图像信息后,从不同作业位置上的用户中确定目标用户的过程中,还可以依据出机速度或动作一致性概率等要素;或者依据出机速度和动作一致性概率等要素;或者依据出货频率、出机速度和动作一致性概率等要素,综合考虑作业对象的出货良品率、用户对作业对象的出机速度、操作手法一致性等要素,来确定各作业位置上作业的多个用户中的目标用户,具体实现过程可以参照上述实施例相应部分的描述,本申请不再一一详述。
参照图8,示出了本申请提出的生产线监控装置的一可选示例的结构示意图,该装置可以适用于计算机设备,本申请对该计算机设备的产品类型不做限定,如图8所示,该装置可以包括:
追踪检测模块41,用于对生产线上的作业对象进行追踪检测;
在一些实施例中,如图9所示,上述追踪检测模块41可以包括:
图像信息获取单元411,用于获取生产线上的作业对象的图像信息,所述图像信息包括用户对所述作业对象作业的操作图像、所述作业对象的对象标识及作业位置;
追踪检测单元412,用于依据所述作业对象的对象标识,对相应作业对象进行追踪检测。
目标用户确定模块42,用于如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户;
操作图像共享模块43,用于将所述目标用户对所述第一作业对象作业的目标操作图像,共享至显示设备进行展示,以辅助对所述第一作业对象作业的用户进行作业。
在一些实施例中,上述追踪检测单元412可以包括:
出货检测结果获取单元,用于对所述生产线上的多个作业对象各自的对象标识进行追踪,获取所述多个作业对象各自的出货检测结果,所述出货检测结果能够表明相应作业对象是否为良品;
出货数量获取单元,用于依据在第一时间段内出货的多个作业对象各自的对象标识和作业位置,获取在所述第一时间段内不同作业位置对应的出货数量;
出货良品率获取单元,用于利用所述不同作业位置对应的出货数量,以及所述出货检测结果确定的所述第一时间段内的出货良品量,得到不同作业位置对应的出货良品率;
相应地,上述目标用户确定模块42可以包括:
第一确定单元,用于在第一作业位置对应的第一作业对象的出货良品率符合条件的情况下,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户。
在又一些实施例中,上述目标用户确定模块42还可以包括:
出机速度获取单元,用于对同一作业位置上的多个作业对象各自的所述操作图像进行分析,得到所述作业位置对应的所述作业对象的出机速度;
第一检测单元,用于检测不同作业位置对应的同类作业对象的所述出货良品率,及所述出机速度是否符合条件;
第二确定单元,用于在在第一检测单元的检测结果为是的情况下,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户。
在又一些实施例中,上述目标用户确定模块42还可以包括:
肢体运动轨迹获取单元,用于对所述操作图像进行用户姿态检测,得到不同作业位置上的用户对作业对象作业的肢体运动轨迹信息;
比较单元,用于比较同一作业位置上的用户对同类作业对象多次作业的肢体运动轨迹信息,得到所述作业位置上的用户对相应类型作业对象作业的一致性概率;
第二检测单元,用于检测不同作业位置对应的同类作业对象的所述出货良品率,及所述一致性概率是否符合条件;
第三确定单元,用于在第二检测单元的检测结果为是的情况下,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户。
在上述各实施例的基础上,如果追踪检测结果表明多个第一作业位置对应的第一作业对象均符合条件,如图9所示,上目标用户确定模块42可以包括:
匹配度获取单元421,用于获取多个第一作业位置对应的第一作业对象的追踪检测结果与所述条件的匹配度;
目标用户选择单元422,用于选择处于与所述条件的匹配度最高的追踪检测结果对应的第一作业位置的用户确定为目标用户。
在一些实施例中,如图9所示,上述操作图像共享模块43可以包括:
第二作业位置获取单元431,用于获取所述生产线上对所述第一作业对象作业的待辅助用户所在的第二作业位置;
目标操作图像共享单元432,用于将所述目标用户对所述第一作业对象作业的目标操作图像,发送至部署在所述第二作业位置的显示设备,由所述显示设备展示所述目标操作图像。
需要说明的是,关于上述各装置实施例中的各种模块、单元等,均可以作为程序模块存储在存储器中,由处理器执行存储在存储器中的上述程序模块,以实现相应的功能,关于各程序模块及其组合所实现的功能,以及达到的技术效果,可以参照上述方法实施例相应部分的描述,本实施例不再赘述。
本申请还提供了一种存储介质,其上可以存储计算机程序,该计算机程序可以被处理器调用并加载,以实现上述实施例描述的生产线监控方法的各个步骤。
本申请还提出了一种处理器,该处理器可以调用并加载存储器存储的程序,以实现上述实施例描述的生产线监控方法的各个步骤,具体实现过程可以参照上述方法实施例相应部分的描述。
最后,需要说明,本说明书中各个实施例采用递进或并列的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置、系统、计算机设备而言,由于其与实施例公开的方法对应,所以描述的比较简单,相关之处参见方法部分说明即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (9)
1.一种生产线监控方法,所述方法包括:
对生产线上的作业对象进行追踪检测,包括:获取生产线上的作业对象的图像信息,所述图像信息包括用户对所述作业对象作业的操作图像、所述作业对象的对象标识及作业位置;依据所述作业对象的对象标识,对相应作业对象进行追踪检测;
如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户,包括:如果第一作业位置对应的第一作业对象的出货良品率符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户;
将所述目标用户对所述第一作业对象作业的目标操作图像,共享至显示设备进行展示,以辅助对所述第一作业对象作业的用户进行作业。
2.根据权利要求1所述的方法,所述依据所述作业对象的对象标识,对相应作业对象进行追踪检测,包括:
对所述生产线上的多个作业对象各自的对象标识进行追踪,获取所述多个作业对象各自的出货检测结果,所述出货检测结果能够表明相应作业对象是否为良品;
依据在第一时间段内出货的多个作业对象各自的对象标识和作业位置,获取在所述第一时间段内不同作业位置对应的出货数量;
利用所述不同作业位置对应的出货数量,以及所述出货检测结果确定的所述第一时间段内的出货良品量,得到不同作业位置对应的出货良品率。
3.根据权利要求2所述的方法,所述如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户,还包括:
对同一作业位置上的多个作业对象各自的所述操作图像进行分析,得到所述作业位置对应的所述作业对象的出机速度;
检测不同作业位置对应的同类作业对象的所述出货良品率,及所述出机速度是否符合条件;
如果第一作业位置对应的第一作业对象的出货良品率及出机速度均符合所述条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户。
4.根据权利要求2所述的方法,所述如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户,还包括:
对所述操作图像进行用户姿态检测,得到不同作业位置上的用户对作业对象作业的肢体运动轨迹信息;
比较同一作业位置上的用户对同类作业对象多次作业的肢体运动轨迹信息,得到所述作业位置上的用户对相应类型作业对象作业的一致性概率;
检测不同作业位置对应的同类作业对象的所述出货良品率,及所述一致性概率是否符合条件;
如果第一作业位置对应的第一作业对象的出货良品率及所述一致性概率符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户。
5.根据权利要求1~4任意一项所述的方法,所述将所述目标用户对所述第一作业对象作业的目标操作图像,共享至显示设备进行展示,包括:
获取所述生产线上对所述第一作业对象作业的待辅助用户所在的第二作业位置;
将所述目标用户对所述第一作业对象作业的目标操作图像,发送至部署在所述第二作业位置的显示设备,由所述显示设备展示所述目标操作图像。
6.根据权利要求1~4任意一项所述的方法,如果追踪检测结果表明多个第一作业位置对应的第一作业对象均符合所述条件,所述确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户,包括:
获取多个第一作业位置对应的第一作业对象的追踪检测结果与所述条件的匹配度;
选择处于与所述条件的匹配度最高的追踪检测结果对应的第一作业位置的用户确定为目标用户。
7.一种生产线监控装置,所述装置包括:
追踪检测模块,用于对生产线上的作业对象进行追踪检测,所述追踪检测模块包括:图像信息获取单元,用于获取生产线上的作业对象的图像信息,所述图像信息包括用户对所述作业对象作业的操作图像、所述作业对象的对象标识及作业位置;追踪检测单元,用于依据所述作业对象的对象标识,对相应作业对象进行追踪检测;
目标用户确定模块,用于如果追踪检测结果表明第一作业位置对应的第一作业对象符合条件,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户;其中,所述目标用户确定模块包括:第一确定单元,用于在第一作业位置对应的第一作业对象的出货良品率符合条件的情况下,确定在所述第一作业位置对所述第一作业对象进行作业的用户为目标用户;
操作图像共享模块,用于将所述目标用户对所述第一作业对象作业的目标操作图像,共享至显示设备进行展示,以辅助对所述第一作业对象作业的用户进行作业。
8.一种计算机设备,所述计算机设备包括:至少一个存储器和至少一个处理器;
所述存储器,用于存储实现如权利要求1~6任一项所述的生产线监控方法的程序;
所述处理器,用于调用并执行所述存储器存储的程序,所述程序用于实现如权利要求1~6任一项所述的生产线监控方法的各步骤。
9.一种生产线监控系统,所述系统包括:
部署在生产线上的多个图像采集设备,所述图像采集设备用于采集至少一个作业位置上的作业对象的图像信息;
如权利要求8所述的计算机设备;
以及,部署在所述生产线上的多个显示设备,用于显示所述计算机设备确定的目标用户对作业对象作业的目标操作图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911199984.XA CN110929666B (zh) | 2019-11-29 | 2019-11-29 | 生产线监控方法、装置、系统及计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911199984.XA CN110929666B (zh) | 2019-11-29 | 2019-11-29 | 生产线监控方法、装置、系统及计算机设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110929666A CN110929666A (zh) | 2020-03-27 |
CN110929666B true CN110929666B (zh) | 2023-10-31 |
Family
ID=69847831
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911199984.XA Active CN110929666B (zh) | 2019-11-29 | 2019-11-29 | 生产线监控方法、装置、系统及计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110929666B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103797505A (zh) * | 2011-06-30 | 2014-05-14 | 日星株式会社 | 缝制设计生产管理装置及方法 |
CN109086999A (zh) * | 2018-08-02 | 2018-12-25 | 东南大学 | 灌装生产线远程数据采集分析系统及其异常分析方法 |
CN110245268A (zh) * | 2019-06-26 | 2019-09-17 | 银河水滴科技(北京)有限公司 | 一种路线确定、展示的方法及装置 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5823207B2 (ja) * | 2011-08-17 | 2015-11-25 | 株式会社日立国際電気 | 監視システム |
CN103971082A (zh) * | 2013-01-31 | 2014-08-06 | 威联通科技股份有限公司 | 基于区域转换的视频对象检测系统及相关方法 |
BR102013033291A2 (pt) * | 2013-12-23 | 2014-11-04 | Dirce Alves Da Silva | Sistema transferidor de linha de produção |
CN104966140B (zh) * | 2015-07-30 | 2019-01-22 | 广东电网有限责任公司佛山供电局 | 电网协同作业的移动工程师站 |
CN109564706B (zh) * | 2016-12-01 | 2023-03-10 | 英特吉姆股份有限公司 | 基于智能交互式增强现实的用户交互平台 |
CN107862931A (zh) * | 2017-12-12 | 2018-03-30 | 芜湖信诺教育设备有限公司 | 一种用于汽车冲压工艺打磨训练的实训器材及其实训方法 |
CN109542037A (zh) * | 2018-12-25 | 2019-03-29 | 南京熊猫电子股份有限公司 | 一种人工作业智能化生产系统及生产控制方法 |
-
2019
- 2019-11-29 CN CN201911199984.XA patent/CN110929666B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103797505A (zh) * | 2011-06-30 | 2014-05-14 | 日星株式会社 | 缝制设计生产管理装置及方法 |
CN109086999A (zh) * | 2018-08-02 | 2018-12-25 | 东南大学 | 灌装生产线远程数据采集分析系统及其异常分析方法 |
CN110245268A (zh) * | 2019-06-26 | 2019-09-17 | 银河水滴科技(北京)有限公司 | 一种路线确定、展示的方法及装置 |
Non-Patent Citations (4)
Title |
---|
"工厂自动化未来发展的思考";孙怀义等;《自动化与仪器仪表》;20190925(第9期);第92-96页 * |
"特殊物料包装生产线发展趋势及关键技术探讨";徐鹏等;《包装与食品机械》;20141231;第32卷(第6期);第44-48页 * |
Industry 4.0 and Video Monitoring: a Multidimensional Approach Based on MPEG-DASH;Vittorio Ghini et al.;《2019 16th IEEE Annual Consumer Communications & Networking Conference (CCNC)》;第1-6页 * |
基于MES的制丝线生产追踪系统的设计与实现;沙胜华等;《微计算机信息》;第26卷(第30期);第55-56页 * |
Also Published As
Publication number | Publication date |
---|---|
CN110929666A (zh) | 2020-03-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11055516B2 (en) | Behavior prediction method, behavior prediction system, and non-transitory recording medium | |
CN108924420B (zh) | 图像拍摄方法、装置、介质、电子设备及模型训练方法 | |
CN107395976B (zh) | 一种拍摄参数设置方法及移动终端 | |
US9477891B2 (en) | Surveillance system and method based on accumulated feature of object | |
CN111095939B (zh) | 识别媒体项目的先前流传输部分以避免重复重放 | |
EP3188034A1 (en) | Display terminal-based data processing method | |
JP6210234B2 (ja) | 画像処理システム、画像処理方法及びプログラム | |
US10360572B2 (en) | Image processing system, method and computer program product for evaluating level of interest based on direction of human action | |
WO2014050432A1 (ja) | 情報処理システム、情報処理方法及びプログラム | |
JP7043601B2 (ja) | 環境モデルを生成するための方法および装置ならびに記憶媒体 | |
CN107871000B (zh) | 音频播放方法、装置、存储介质及电子设备 | |
JP2013157984A (ja) | Ui提供方法およびそれを適用した映像受信装置 | |
AU2017208235A1 (en) | Relative position encoding based networks for action recognition | |
JP6910208B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP2014095979A (ja) | 電子機器、画像データ処理方法およびプログラム | |
JP2017162432A (ja) | 画像処理システム、情報処理装置、情報端末、プログラム | |
CN110929666B (zh) | 生产线监控方法、装置、系统及计算机设备 | |
CN114511622A (zh) | 全景图像采集方法、装置、电子终端及介质 | |
EP3543902A1 (en) | Image processing apparatus and method and storage medium storing instructions | |
CN115170157A (zh) | 一种门店审核方法、装置、设备及存储介质 | |
CN116188846A (zh) | 一种基于振动图像的设备故障检测方法及装置 | |
CN110677448A (zh) | 关联信息推送方法、装置和系统 | |
CN111683215B (zh) | 录像回放方法、装置、电子设备及计算机可读存储介质 | |
CN111625101B (zh) | 一种展示控制方法及装置 | |
CN112307882A (zh) | 图像判断装置及图像判断系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |