CN117121029A - 作业分析装置 - Google Patents
作业分析装置 Download PDFInfo
- Publication number
- CN117121029A CN117121029A CN202180096458.XA CN202180096458A CN117121029A CN 117121029 A CN117121029 A CN 117121029A CN 202180096458 A CN202180096458 A CN 202180096458A CN 117121029 A CN117121029 A CN 117121029A
- Authority
- CN
- China
- Prior art keywords
- job
- information
- operator
- probability
- work
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 204
- 238000000034 method Methods 0.000 claims abstract description 57
- 230000008569 process Effects 0.000 claims abstract description 49
- 238000003860 storage Methods 0.000 claims abstract description 43
- 230000009471 action Effects 0.000 claims description 38
- 238000004891 communication Methods 0.000 claims description 15
- 238000004364 calculation method Methods 0.000 abstract description 4
- 238000012937 correction Methods 0.000 description 39
- 230000000875 corresponding effect Effects 0.000 description 39
- 238000012545 processing Methods 0.000 description 39
- 238000002360 preparation method Methods 0.000 description 28
- 238000010586 diagram Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 12
- 238000012856 packing Methods 0.000 description 9
- 230000010365 information processing Effects 0.000 description 6
- 238000010606 normalization Methods 0.000 description 4
- 238000012800 visualization Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000011144 upstream manufacturing Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000011143 downstream manufacturing Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
- G06Q10/06398—Performance of employee with respect to a job function
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0633—Workflow analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
Landscapes
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Engineering & Computer Science (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Strategic Management (AREA)
- Development Economics (AREA)
- Educational Administration (AREA)
- Quality & Reliability (AREA)
- Operations Research (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Marketing (AREA)
- Game Theory and Decision Science (AREA)
- General Factory Administration (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
作业分析装置生成与在作业场中由一个以上的作业者进行的多个作业有关的信息。作业分析装置具备:存储部,保存表示在作业场中与各作业建立了对应的区域的地图信息;取得部,取得包括作业场中的每个时刻的作业者的位置的位置信息;以及控制部,基于位置信息以及地图信息,进行判别作业者的每个时刻的作业的运算处理(S3)。控制部基于位置信息生成概率信息,该概率信息表示在地图信息中与包括每个时刻的作业者的位置的区域建立对应的作业由该作业者进行的概率(S12、S13),根据表示在作业场中由作业者进行作业的倾向的作业倾向信息,校正概率信息(S14、S15)。
Description
技术领域
本公开涉及作业分析装置以及方法。
背景技术
专利文献1公开了一种对在纸加工机械的运转开始前的准备作业时间中的作业内容进行分析的分析装置。专利文献1的分析装置检测纸加工机械的操作员的作业位置,并基于检测结果制作操作员的动作线图。此外,专利文献1的分析装置基于作业工序数据以及纸加工机械运转数据,作为按项目表示准备作业时间中的作业内容的表,按分离了纸加工机械的动作内容和与其对应的操作员的作业内容的项目,制作表示作业时间的图表。在专利文献1的分析装置中,基于这些制作结果,针对准备作业时间中的作业工序,选定用于实现作业时间比标准的时间长这样的生产效率的提高的改善项目。
在先技术文献
专利文献
专利文献1:国际公开第2019/064398号
发明内容
-发明所要解决的课题-
本公开提供一种作业分析装置,在由一个以上的作业者进行多个作业时,能够推定作业者的实施作业。
-用于解决课题的手段-
本公开的一方式的作业分析装置生成与在作业场中由一个以上的作业者进行的多个作业有关的信息。作业分析装置具备存储部、取得部和控制部。存储部保存表示在作业场中与各作业建立对应的区域的地图信息。取得部取得包括作业场中的每个时刻的作业者的位置的位置信息。控制部基于位置信息以及地图信息,进行判别作业者的每个时刻的作业的运算处理。控制部基于位置信息,生成概率信息,该概率信息表示在地图信息中与包括每个时刻的作业者的位置的区域建立对应的作业由该作业者进行的概率,根据表示在作业场中由作业者进行作业的倾向的作业倾向信息,校正概率信息。
这些概括性和特定的方式也可以通过系统、方法及计算机程序、以及它们的组合来实现。
-发明效果-
根据本公开的作业分析装置以及方法,在由一个以上的作业者进行多个作业时,能够推定作业者的实施作业。
附图说明
图1是表示实施方式1所涉及的作业分析系统的概要的图。
图2是例示作业分析系统中的作业分析装置的结构的框图。
图3是用于说明作业分析装置中的地图数据的图。
图4是用于说明作业分析装置中的作业区域信息以及担当信息的图。
图5是用于说明与作业分析装置相关的课题的图。
图6是用于说明与作业分析装置相关的课题的图。
图7是用于说明作业分析装置的整体动作的流程图。
图8是例示作业判别处理的流程图。
图9是用于说明作业判别处理的图。
图10是例示每个作业者的校正的处理的流程图。
图11是例示作业者之间的校正的处理的流程图。
图12是表示实施方式2所涉及的作业分析系统的信息提示装置中的显示例的图。
图13是例示实施方式2的作业分析系统中的信息提示装置的结构的框图。
图14是用于说明实施方式2所涉及的作业分析装置的整体动作的流程图。
图15是例示信息提示装置的动作的流程图。
具体实施方式
以下,适当参照附图对实施方式进行详细说明。其中,有时省略必要以上的详细说明。例如,有时省略已经熟知的事项的详细说明、对实质上相同的结构的重复说明。这是为了避免以下的说明不必要地成为冗余,使本领域技术人员容易理解。另外,发明人(们)为了使本领域技术人员充分地理解本公开而提供附图以及以下的说明,并非意图通过它们来限定权利要求书所记载的主题。
(实施方式1)
1-1.构成
使用图1对实施方式1所涉及的作业分析系统进行说明。图1是表示本实施方式所涉及的作业分析系统1的概要的图。
1-1-1.系统的概要
如图1所示,本系统1具备相机2和作业分析装置5。本系统1在物流仓库等的作业场6中应用于分析进行多个作业的作业者W1、W2以及W3的效率等的用途。本系统1例如也可以对作业场6的管理者或者分析担当者这样的用户3设置用于提示与给定的分析期间相关的分析图表7的监视器4。分析期间是在本系统1中使用了相机2的图像识别等的分析对象的期间,例如预先设定为一天到几个月等。
在图1的例子中,在作业场6中设置有搬运线61和架62。在本例中,各作业者W1~W3在作业场6移动并进行的多个作业包括从架62取出商品的“收集”、在搬送线61中将商品装入箱中而流动的“装箱”、以及准备该箱的“箱准备”。
本系统1的分析图表7例如根据将各作业根据该作业的附加价值的大小分类为“主作业”、“副作业”以及“非作业”的项目,按作业者W1~W3表示分析期间中的各项目的比率。在图1的例子中,装箱为主作业,与主作业相关的收集、箱准备、朝向搬运线61或者架62的移动以及其他辅助作业等是副作业。与主作业无关的等待状态等被分类为非作业。这样,作业分析装置5中的分析对象的作业不局限于主作业以及副作业,也包括非作业。
根据这样的本实施方式所涉及的作业分析系统1,通过提示分析图表7,用户3例如为了研究作业场6的业务效率化,能够分析各作业者W1~W3的作业内容。
本系统1的相机2例如被配置为映出在作业场6中作业者W1~W3移动的范围整体。相机2例如在作业场6中以给定的周期反复进行摄像动作,生成表示摄像图像的图像数据。相机2与作业分析装置5连接,以向作业分析装置5发送例如图像数据。另外,在图1中例示了一个相机2,但本系统1所包括的相机2不局限于一个相机,也可以是2个以上的相机。
作业分析装置5例如由服务器装置等信息处理装置构成。作业分析装置5例如与包括监视器4的PC等外部的信息处理装置可通信地连接。使用图2对作业分析装置5的结构进行说明。
1-1-2.作业分析装置的结构
图2是例示作业分析装置5的结构的框图。图2所例示的作业分析装置5具备控制部50、存储部52、操作部53、设备接口54以及输出接口55。以下,将接口略记为“I/F”。
控制部50例如包括与软件协作而实现给定的功能的CPU或MPU,控制作业分析装置5的整体动作。控制部50读出保存于存储部52的数据以及程序并进行各种运算处理,实现各种功能。例如,控制部50作为功能性结构具备图像识别部51。
图像识别部51通过对图像数据应用各种图像识别技术,在图像数据表示的图像中,识别作业者W1~W3这样的预先设定的处理对象的位置,输出识别结果。识别结果例如也可以包括表示识别了处理对象的位置的时刻的信息。识别结果是本实施方式中的位置信息的一例。图像识别部51例如进行基于卷积神经网络等神经网络的学习完毕模型的图像识别处理。图像识别处理也可以通过各种图像识别算法来进行。
控制部50例如执行包括用于实现作业分析装置5的功能的命令组的程序。上述的程序可以由因特网等通信网络提供,也可以保存在具有可移动性的记录介质中。此外,控制部50也可以具备内部存储器作为保持各种数据以及程序的暂时的存储区域。
另外,控制部50也可以是被设计为实现给定的功能的专用的电子电路或者能够重构的电子电路等硬件电路。控制部50也可以由CPU、MPU、GPU、GPGPU、TPU、微型计算机、DSP、FPGA以及ASIC等各种半导体集成电路构成。
存储部52是存储为了实现作业分析装置5的功能所需的程序以及数据的存储介质。存储部52例如由硬盘驱动器(HDD)或半导体存储装置(SSD)构成。例如,存储部52保存上述程序、以及地图数据D1、作业区域信息D2以及担当信息D3等各种信息。
地图数据D1在给定的坐标系中表示作业场6中的搬运线61以及架62这样的各种设备的配置。作业区域信息D2是将作业场6中的位置与作业建立对应的信息。担当信息D3是表示作业场6中的各作业者W1~W3的担当范围的信息。地图数据D1以及作业区域信息D2是本实施方式的作业分析装置5中的地图信息的一例。担当信息D3是本实施方式的作业分析装置5中的作业倾向信息的一例。关于各信息的详细情况后述。
存储部52例如可以具备由DRAM或SRAM构成的暂时的存储元件,也可以作为控制部50的作业区域发挥功能。例如,存储部52也可以暂时存储从相机2接收到的图像数据以及图像识别部51的识别结果等。
操作部53是接受用户的操作的操作构件的总称。操作部53例如由键盘、鼠标、触控板、触摸板、按钮以及开关等中的任意一个或者它们的组合构成。操作部53取得通过用户的操作而输入的各信息。
设备I/F54是用于将相机2那样的外部设备连接于作业分析装置5的电路。设备I/F54按照给定的通信标准进行通信。给定的标准包括USB、HDMI(注册商标)、IEEE1395、IEEE802.11、Bluetooth(注册商标)等。设备I/F54是在作业分析装置5中从外部设备接收各信息的取得部的一例。在作业分析系统1中,作业分析装置5例如经由设备I/F54取得表示相机2拍摄到的动态图像的图像数据。
输出I/F55是用于输出信息的电路。输出I/F55例如根据HDMI标准等,向用于显示各种信息的监视器以及投影仪等外置的显示设备输出影像信号等。
以上那样的作业分析装置5的结构是一例,作业分析装置5的结构不局限于此。作业分析装置5也可以由包括PC(个人计算机)的各种计算机构成。作业分析装置5除了输出I/F55之外,或者取而代之,例如也可以具备由液晶显示器或有机EL显示器构成的显示部作为内置的显示设备。此外,本实施方式的作业分析方法也可以在分布式计算中执行。
此外,作业分析装置5除了上述的结构之外,或者取而代之,也可以具有经由通信网络与外部的信息处理装置进行通信的结构。例如,操作部53也可以是接受经由通信网络连接的外部的信息处理装置所进行的操作的结构。此外,输出I/F55也可以经由通信网络向外部的信息处理装置发送各种信息。
此外,作业分析装置5中的取得部也可以通过与控制部50等中的各种软件的协作来实现。作业分析装置5中的取得部也可以通过将保存于各种存储介质(例如存储部52)的各信息读出到控制部50的作业区域来进行各信息的取得。
1-1-3.关于各种数据构造
本实施方式的作业分析装置5如以上那样将地图数据D1、作业区域信息D2以以及担当信息D3保存于存储部52。使用图3以及图4对各种数据D1、D2、D3的构造的一例进行说明。
图3是用于说明地图数据D1的图。地图数据D1例如将后述的区划以及作业区域的配置与表示从上方俯瞰作业场6的各种设备的布局这样的地图的坐标系的数据建立关联地进行管理。以下,将在作业场6的水平面上相互正交的两个方向称为X方向以及Y方向。作业场6中的位置例如由表示X方向上的位置的X坐标和表示Y方向上的位置的Y坐标来规定。
在图3的地图数据D1中,与图1所示的作业场6对应地示出了在X方向上隔开间隔地配置的搬运线61以及架62。在图3的例子中,搬运线61在Y方向上延伸,在从Y方向的正朝向负的方向上搬运箱。本例的地图数据D1将作业场6在Y方向上区分为多个区划来进行管理。图3表示作业场6被区分为区划Z1和区划Z2的例子。各区划Z1、Z2例如预先设定为在作业场6中分配作业者的单位区划。
各区划Z1、Z2包括表示在作业场6中作业者W1~W3等进行作业的区域的作业区域。图3所示的区划Z1包括搬运线61附近的作业区域A1和架62附近的作业区域A2。各作业区域A1、A2被预先设定为考虑在作业场6中分别进行与搬运线61或者架62相关的作业的范围内的区域。
图4是用于说明本实施方式的作业分析装置5中的作业区域信息D2以及担当信息D3的图。
作业区域信息D2例如如图4的(A)所示,按作业场6中的每个“区划”将“作业区域”和在各作业区域中进行的“作业”建立关联地进行管理。例如,在区划Z1的搬运线61的附近的作业区域A1中进行“装箱”以及“箱准备”的作业,在区划Z1的架62的附近的作业区域A2中进行“收集”的作业。作业分析装置5能够通过作业区域信息D2将作业场6中的位置与作业建立对应地进行管理。
例如如图4的(B)所示,担当信息D3将“作业者”与各作业者主要进行作业的区划即“担当区划”建立关联地进行管理。在图4的(B)的例子中,作业者W1的担当区划为区划Z2,作业者W2的担当区划为区划Z1。担当信息D3例如也可以根据表示作业场6中的各日的作业计划表这样的作业者的分配的信息而被依次更新。此外,在担当信息D3中,例如也可以基于图像识别部51的过去的识别结果,按每个作业者将停留频度高的区划设定为担当区划。
另外,虽然省略图示,但本实施方式的作业分析装置5例如在存储部52中除了上述的担当信息D3之外,还保存与作业场6有关的作业倾向信息。作业倾向信息例如包括按各作业者的每个作业设定的标准作业期间、各作业区域中的每个作业的最大人数、以及表示作业的组合中的时间上或位置上的执行顺序的作业顺序等信息。作业倾向信息也可以包括表示在作业场6中由作为分析对象的作业者进行各种作业的各种倾向的信息。此外,作业倾向信息也可以包括表示分析图表7中的主作业以及副作业等的分类的信息。使用这些各种信息的作业分析装置5的动作将后述。
1-2.动作
以下,对如以上那样构成的作业分析系统1以及作业分析装置5的动作进行说明。
图1所例示的作业分析系统1通过图像识别处理来识别作业场6中的每个时刻的作业者W1~W3的位置,推定每个时刻的各作业者W1~W3实施的作业即实施作业。本系统1蓄积表示推定结果的信息,基于蓄积的信息,生成将分析期间中的每个作业者W1~W3的实施作业可视化的分析图表7。
本实施方式的作业分析装置5例如通过图像识别部51对相机2对作业场6的摄像图像进行图像识别,识别各作业者W1~W3的位置。例如,在图3所示的区划Z1中,作业分析装置5首先根据图像识别部51的识别结果所包括的各作业者的位置分别处于作业区域A1、A2或除此之外的区域这一情况,来判别各作业者的实施作业。
在此,例如在如图4的(A)的作业区域信息D2所示那样设想多个作业的作业区域A1中,即使能够通过基于来自相机2的摄像图像的图像识别处理来确定各作业者W1~W3,有时也难以判别各个实施作业。
在本实施方式中,在作业分析系统1中,除了图像识别处理之外,还提供例如能够基于预先存储的作业倾向信息来推定各作业者W1~W3的实施作业的作业分析装置5。根据本系统1的作业分析装置5,基于推定结果判别实施作业,由此生成分析图表7。
1-2-1.关于课题
本实施方式的在作业分析系统1中,使用图5以及图6对在判别各作业者的实施作业方面成为课题的场景进行说明。
图5以及图6是用于说明与作业分析装置5有关的课题的图,是从上方观察作业场6中的作业者W1、W2的图。图5以及图6表示在作业场6的区划Z1中作业者W1以及W2进行作业的情形。
图5的(A)表示作业者W1进行“移动”、作业者W2进行“收集”的场景。图5的(B)表示作业者W1从图5的(A)到达作业区域A2,各作业者W1、W2分别进行“收集”的场景。图5的(C)表示作业者W1从图5的(B)移动至作业区域A1,作业者W1进行“装箱”,作业者W2进行“收集”的场景。图5的(D)表示在图5的(C)之后,作业者W1进行“箱准备”,作业者W2进行“收集”的场景。
在图5的(A)的例子中,作业者W1位于作业区域A1与作业区域A2之间的区域,因此作业者W1的实施作业能够判别为移动。另一方面,作业者W2位于架62的附近的作业区域A2,因此该实施作业能够判别为收集。另外,在图5的(B)的例子中,作业者W1以及W2位于作业区域A2,因此任意的实施作业均能够判别为收集。
在图5的(C)的例子中,作业者W1在与收集对应的作业区域A2(图5的(B))之后位于搬运线61的附近的作业区域A1,因此实施作业能够判别为装箱。在图5的(D)的例子中,作业者W2位于作业区域A2,因此实施作业能够判别为收集。
然而,在图5的(D)的场景中,作业者W1实施与图5的(C)的场景的实施作业“装箱”不同的作业“箱准备”,即使能够识别出作业者W1与图5的(C)同样地位于作业区域A1,也难以判别。即,在设想多个作业的作业区域A1中,在从图5的(C)起经过了时间的图5的(D)的状态下,作业者W1继续装箱还是转移至箱准备根据作业者W1的位置的图像识别而难以判别。
此外,图6表示作业者W1进行“箱准备”、作业者W2进行“装箱”的场景。在图6的例子中,作业者W1以及W2位于作业区域A1。这样,即使在设想多个作业的作业区域A1中作业者W1以及W2并列地进行作业的场景下,也难以判别各个实施作业是装箱还是箱准备。
如上所述,认为仅根据作业者W1、W2的图像识别,可能产生难以判别在作业场6时时刻刻变化的各作业者W1、W2的实施作业的场景。
因而,在本实施方式的作业分析装置5中,除了作业者W1以及W2等的位置以外,还基于担当信息D3这样的作业倾向信息,执行用于推定每个作业者的实施作业的概率性的运算处理。由此,如图5的(D)以及图6那样,在作业区域A1这样的特定的区域进行多个作业,在仅基于各作业者W1、W2的位置的作业的判别困难的状况下,也能够根据推定结果来判别各作业者W1、W2的实施作业。
例如,在图5的(D)的状况下,通过使用与从图5的(C)起的经过时间有关的信息,能够进行作业者W1的作业从装箱转移至箱准备这样的推定。此外,在图6的状况下,例如基于各作业者W1、W2的担当区划,或者基于多个作业的组合中的上游工序与下游工序这样的作业位置的关系,能够进行各作业者W1、W2的实施作业分别为箱准备、装箱这样的推定。
1-2-2.整体动作
使用图7对作业分析系统1中的作业分析装置5的整体动作进行说明。
图7是用于说明作业分析装置5的整体动作的流程图。本流程图所示的处理例如由作业分析装置5的控制部50执行。
首先,控制部50例如经由设备I/F54从相机2取得图像数据(S1)。例如,在作业场6中,在作业者W1~W3的作业中,相机2拍摄动态图像,以动态图像的帧周期这样的给定的周期生成表示各时刻的摄像图像的图像数据并发送到作业分析装置5。
接下来,控制部50参照地图数据D1来选择作业场6中的一个区划(S2)。例如,从图3所示的区划Z1、Z2首先选择区划Z1。
控制部50在所取得的图像数据所表示的图像中,针对映在与在步骤S2中选择出的区划对应的区域的每个作业者,判别实施作业(S3)。在这样的作业判别处理(S3)中,控制部50进行用于概率性地推定多个作业由多个作业者进行时的实施作业的运算处理。在本实施方式中,控制部50除了基于图像的作业者的位置以外,还使用前述的担当信息D3等作业倾向信息来进行步骤S3的运算处理。作业判别处理(S3)的详细情况后述。
控制部50参照地图数据D1判断是否选择了作业场6中的全部区划(S4),反复步骤S2~S3直到每1帧选择了全部区划为止(S4:否)。例如,在图3的地图数据D1中,在选择了区划Z1之后,选择区划Z2。
在选择了全部区划的情况下(S4:是),控制部50判断是否判别出给定的帧数的作业(S5)。给定的帧数例如是在分析图表7中作为可视化的对象的分析期间由相机2拍摄的帧数。控制部50在判别出给定的帧数的作业之前(S5:否),反复步骤S1~S4。
若判别给定的帧数的作业(S5:是),则控制部50进行生成分析图表7的可视化处理(S6)。控制部50例如针对作业场6的各作业者,按每1帧的期间这样的时间间隔对通过作业判别处理(S3)判别出的作业的次数进行计数。这样,若按每个作业者计算出分析期间中的各作业的总次数,则控制部50计算每个作业者的各作业的比率,生成分析图表7。在分析图表7中,各作业的比率例如表示为各作业的时间相对于分析期间的比例。
控制部50例如将通过可视化处理(S6)生成的分析图表7保存于存储部52,结束本流程图所示的处理。
根据以上的处理,按作业场6的每个区划通过作业判别处理(S3)推定按作业者的实施作业(S3),基于全部区划的分析期间中的推定结果判别实施作业,由此生成分析图表7(S6)。根据本实施方式的作业判别处理(S3),例如即使在分析期间中的与图5的(D)以及图6所示的场景等对应的特定的时间间隔中实施作业的判别困难,也能够得到反映了分析期间中的全部时间间隔下的实施作业的分析图表7。
另外,在上述的步骤S1中,也可以从相机2取得分析期间中的录制的动态图像数据。例如,控制部50也可以在步骤S1之后选择各帧的图像数据并进行步骤S2以后的处理,代替步骤S5而反复进行这些处理,直到选择全部的帧为止。
1-2-3.关于作业判别处理(S3)
使用图8以及图9对图7的步骤S3中的作业判别处理的详细情况进行说明。
图8是例示本实施方式的作业分析装置5中的作业判别处理(图7的S3)的流程图。图8的流程图所示的处理例如在图7的步骤S2中选择了一个区划的状态下开始。以下,使用在图3中选择了表示地图数据D1那样的作业场6中的区划Z1的例子进行说明。
图9是用于说明作业判别处理(S3)的图。本实施方式的作业分析装置5在作业判别处理(S3)中,针对每个作业者生成用于保存与各作业相应的概率的作业概率表T1。图9的(A)例示与图6所示的场景的摄像图像对应地设定了项目的作业概率表T1。图9的(B)、(C)分别例示出值通过图8的流程图所示的处理而变化的作业概率表T1。作业概率表T1是本实施方式中的概率信息的一例。
本实施方式的作业分析装置5通过作业概率表T1,基于各作业者的位置的识别结果和作业区域信息D2,保持能够根据作业区域的判定计算出的各作业者的每个作业的概率。本实施方式的作业分析装置5还基于担当信息D3等的作业倾向信息,进行校正作业概率表T1的概率的运算处理,由此实现实施作业的推定。
在图8的流程图中,首先,控制部50作为图像识别部51发挥功能,在图7的步骤S1中取得的图像数据表示的图像中,识别作业者W1、W2等的位置,取得识别结果(S11)。此时,控制部50例如关于在图像中识别出的位置,基于地图数据D1运算用于变换为表示作业场6中的位置的坐标系的坐标变换。
接下来,控制部50根据在图7的步骤S2中选择出的区划来制作作业概率表T1(S12)。控制部50在作业概率表T1中,例如参照保存于存储部52的地图数据D1以及作业区域信息D2以及所取得的识别结果,设定所选择的区划中的作业以及作业者的项目。此外,控制部50例如设定预先保存于存储部52的每个作业的最大人数的值。
在图9的(A)的作业概率表T1中,基于图4的(A)的作业区域信息D2,作为区划Z1中的作业而设定“装箱”、“箱准备”以及“收集”,例如作为在全部区划中共同的作业而设定“移动”。此外,例如在图6的场景中,基于与区划Z1对应的图像的区域中的识别结果来设定“作业者W1”以及“作业者W2”。在图9的(A)的例子中,装箱以及箱准备的最大人数被设定为“1”。每个作业的最大人数例如根据各作业的作业区域中的空间上的制约或作业的性质而预先确定,并保存于存储部52。装箱以及箱准备是本实施方式中的第二作业的一例。
接下来,控制部50基于在步骤S11中识别出的作业者的位置,分配作业概率表T1中的概率(S13)。控制部50例如将表示作业者的位置的坐标与地图数据D1中的作业区域的坐标进行比较,判定包括各作业者的位置的作业区域。控制部50例如基于作业区域信息D2,针对各作业者,对判定出的作业区域的作业分配概率。
图9的(B)例示基于图6所示的场景的图像中的识别结果在步骤S13中分配了概率的作业概率表T1。在图6的例子中,在作业区域A1中,识别作业者W1以及W2的位置。此外,如图4的(A)的作业区域信息D2所示,装箱以及箱准备这两个作业对应于作业区域A1。因此,在图9的(B)的作业概率表T1中,对作业者W1的装箱以及箱准备分别分配视为等概率的“50%”的概率。作业者W2也与作业者W1同样地分配概率。
接下来,控制部50在从作业者的位置分配了概率的作业概率表T1中,进行每个作业者的校正(S14)。步骤S14的处理例如基于过去的作业的判别结果、每个作业者的各作业的标准作业期间以及时间上的作业顺序的信息来进行。在图5的(D)的例子中,控制部50例如若根据过去的判别结果判断为经过了作业者W1的装箱的标准作业期间,则在作业概率表T1中进行将作业者W1的装箱的概率仅减少给定值的校正。给定的值例如设定为比根据作业者的人数等分的概率小的范围的正值。每个作业者的校正的处理(S14)的详细情况后述。
接下来,控制部50在作业概率表T1中,进行与多个作业者之间的关系相应的作业者之间的校正(S15)。步骤S15的处理例如基于作业区域信息D2、担当信息D3、位置上的作业顺序以及由图像识别部51识别出各作业者的时刻的信息来进行。在图6的例子中,控制部50例如通过图4的(B)的担当信息D3,判断为作业者W2的担当区划是区划Z1,在作业概率表T1中进行使作业者W2的作业中的作为主作业的装箱的概率仅增加给定值的校正等。给定的值例如与步骤S14相同。图9的(C)表示在图9的(B)所示的校正前的作业概率表T1中进行了作业者之间的校正(S15)的例子。
接下来,控制部50基于校正后的作业概率表T1,判别各作业者的实施作业(S16)。在步骤S16中,控制部50针对每个作业者,将作业概率表T1中的多个作业中的最高概率的作业判别为实施作业。在作业者的最高概率未超过给定的阈值的情况下,控制部50判别为该作业者的实施作业是给定的作业(例如待机等)。控制部50将判别结果例如保存于存储部52。从除去例如符合各作业者的可能性低的作业的观点出发,给定的阈值设定充分大的值。
例如在步骤S16中,在图9的(C)的作业概率表T1中,将各作业者W1、W2的实施作业分别判别为箱准备、装箱。
控制部50在判别了各作业者的实施作业(S16)后,例如将校正了的作业概率表T1保存于存储部52,结束本流程图所示的处理。然后,进入图7的步骤S4。
根据以上的作业判别处理(S3),即使在从作业者的位置分配的概率(S13)中无法判别每个作业者的实施作业,也能够得到基于作业倾向信息校正了的作业概率表T1(S14、S15)。基于通过用于推定这样的每个作业者的实施作业的运算处理而校正的作业概率表T1,判别实施作业(S16),从而可靠地向各作业者分配一个作业。
1-2-4.每个作业者的校正的处理
使用图10对以上那样的作业判别处理(图8)中的步骤S14的处理进行说明。
图10是例示本实施方式的作业分析装置5中的每个作业者的校正的处理(图8的S14)的流程图。图10的流程图所示的处理例如在作业概率表T1中从作业者的位置分配了概率的状态下开始。
首先,控制部50选择作业概率表T1中的一个作业者(S140)。例如,在与图5的(D)的场景对应地设定的作业概率表T1中,选择作业者W1以及W2中的作业者W1。
控制部50针对所选择的作业者,例如参照保存于存储部52的标准作业期间的信息以及过去的作业的判别结果,进行基于标准作业期间的校正(S141)。控制部50判断是否存在超过标准作业期间而继续的作业,在有该作业的情况下,减少作业概率表T1中的该作业的概率。标准作业期间例如基于预先测量的每个作业者的各作业所需的期间来设定。
在图5的(D)的例子中,由于作业者W1位于作业区域A1,因此与图9的(A)同样地,对作业概率表T1中的作业者W1的装箱以及箱准备分别分配“50%”的概率(图8的S13)。例如在与图5的(C)的场景有关的作业判别处理中作业者W1的作业被判别为装箱,且在图5的(D)的时间点从图5的(C)经过作业者W1的装箱的标准作业期间时,作业者W1的装箱的概率减少(S141)。装箱是本实施方式中的第一作业的一例。
之后,控制部50在作业概率表T1中,例如针对所选择的作业者W1将多个作业的概率标准化。在上述的图5的(D)的例子中,在装箱以及箱准备的两个作业中,例如使作业者W1的箱准备的概率仅增加装箱的概率的减少量。此外,例如在对设定了最大人数的作业的概率进行了校正的情况下,也可以进行标准化以增加所选择的作业者以外的该作业的概率。
进而,控制部50例如从存储部52参照表示时间上的作业顺序的信息,进行基于时间顺序的校正(S142)。控制部50针对在步骤S140中选择出的作业者,减少在之前的作业判别处理(图8)中判别出的作业中不后续的作业的概率。
例如,关于图5的(C)的场景,与图5的(D)的例子同样地,作业概率表T1中的作业者W1的装箱以及箱准备的概率分别分配为“50%”(图8的S13)。例如在步骤S140中选择的作业者W1的之前不久的作业是收集的情况下,基于根据在收集中拿着货物的作业者进行装箱这样的见解而设定的时间上的作业顺序的信息,进行增加作业者W1的装箱的概率的校正(S142)。之后,例如与步骤S141同样地,在所选择的作业者W1中对多个作业的概率进行标准化。
控制部50反复步骤S140~S142的处理,直到作业概率表T1中的所有作业者被选择为止(S143:否)。若所有作业者被选择(S143:是),则控制部50结束每个作业者的校正处理(图8的S14)。
根据以上的处理,基于每个作业者的标准作业期间以及时间上的作业顺序的信息,校正作业概率表T1中的每个作业者的概率(S141~S142)。由此,例如即使在如图5的(D)那样作业者W1停留在进行多个作业的作业区域A1的场景下,也能够通过例如基于标准作业期间的信息的校正的处理(S141)来判别作业者W1的作业(图8的S16)。
另外,基于时间上的作业顺序的校正的处理(S142)例如不局限于图8的步骤S14,也可以在作业概率表T1中分配概率(图8的S13)时执行。此外,步骤S141中的标准作业期间例如也可以针对各作业者的每个作业,在多次测量从开始到完毕的期间后,在测量出的期间的频度分布中,计算为包括给定的比例(例如全部测量次数的95%)的次数的期间。
1-2-5.作业者之间的校正的处理
使用图11对图8的步骤S14的处理进行说明。
图11是例示本实施方式的作业分析装置5中的作业者间的校正的处理(图8的S15)的流程图。图11的流程图所示的处理例如在作业概率表T1中按每个作业者进行了校正(图8的S14)的状态下开始。
首先,控制部50选择作业概率表T1中的多个作业中的一个作业(S150)。例如在图9的(B)的作业概率表T1中,首先选择装箱。
接下来,控制部50判断所选择的作业是否符合给定的校正条件(S151)。给定的校正条件例如是为了针对特定的作业根据多个作业者间的关系来校正概率而设定的。例如,校正条件是在作业概率表T1中对所有作业中选择的作业为最高概率的作业者的人数进行计数时,该最高概率的人数超过该作业的最大人数。在所选择的作业不符合校正条件的情况下(S151:否),控制部50进入步骤S155。
在所选择的作业符合校正条件的情况下(S151:是),控制部50关于该作业进行基于担当信息D3的校正(S152)。例如在图9的(B)的作业概率表T1中,装箱为最高概率的作业者的人数是作业者W1以及W2这两个人,超过最大人数的“1”,因此关于装箱进行校正。
在步骤S152中,控制部50参照担当信息D3,针对在图7的步骤S2中选择出的区划、即作为作业判别处理(S3)的对象的区划是担当区划的作业者,使主作业的概率增加。在本实施方式中,例如与图1的分析图表7中的作业的分类对应,主作业是装箱。例如在图9的(B)的作业概率表T1中,在图4的(B)的担当信息D3中,作业者W2的担当区划是区划Z1,因此进行增加作为作业者W2的主作业的装箱的概率的校正。
之后,控制部50例如在进行了校正的作业者以及作业的各个中,即在作业概率表T1的行和列的各个中,进行将概率标准化的处理。在图9的(B)的例子中,在通过校正使作业者W2的装箱的概率增加之后,进行分别减少作业者W2的箱准备以及作业者W1的装箱的概率的标准化。进而,控制部50例如通过作业者W1的标准化而使作业者W1的箱准备的概率增加。
另外,在基于步骤S152的担当信息D3的校正中,例如也可以预先设定每个作业者的担当作业,代替上述例子的主作业而增加担当作业的概率。在这种情况下,也可以在担当信息D3中包括表示担当作业的信息。此外,例如也可以针对每个区划或每个作业区域预先设定主作业,在作业区域信息D2中包括表示主作业的信息。在这种情况下,在步骤S152中参照作业区域信息D2。
接下来,控制部50基于包括所选择的作业在内的多个作业的组合中的作业位置的关系,进行基于位置顺序的校正(S153)。控制部50例如通过参照保存在存储部52中的表示位置上的作业顺序的信息和在图8的步骤S11中取得的识别结果,进行步骤S153的处理。
例如,在与图9的作业概率表T1对应的图6的场景中,在与装箱以及箱准备的两个作业对应的作业区域A1中,作业者W1的位置在比作业者W2靠+Y方向、即搬运线61的上游侧被识别(图8的S11)。在这种情况下,控制部50例如基于在搬运线61的上游侧对应于箱准备、在下游侧对应于装箱这样的位置上的作业顺序的信息,针对校正对象的作业“装箱”,进行减少视为不符合该作业的作业者W1的概率的校正(S153)。之后,例如关于校正后的装箱以及作业者W1,与步骤S152同样地概率被标准化。
接下来,控制部50进行基于向与所选择的作业对应的作业区域的到达顺序的校正(S154)。控制部50例如基于作业区域信息D2和过去的图像识别部51的识别结果,对与所选择的作业对应的作业区域中的多个作业者,比较各作业者识别出的时刻。控制部50例如使不超过所选择的作业的标准作业期间的作业者中的、在该作业区域中最先被识别出的作业者、即向该作业区域的到达时刻最早且视为所选择的作业的开始时刻早的作业者的该作业的概率增加。之后,例如与步骤S152同样地进行校正后的作业以及与作业者有关的标准化。
控制部50反复步骤S150以后的处理,直到选择作业概率表T1中的全部作业为止(S155:否)。若选择了全部的作业(S155:是),则控制部50结束作业者之间的校正的处理(S15)。
根据以上的处理,基于担当信息D3、位置上的作业顺序的信息以及向作业区域的到达顺序,校正作业概率表T1中的每个作业的概率(S152~S154)。例如,在与多个作业对应的作业区域A1中多个作业者W1以及W2进行作业的图6的场景下,从图9的(B)的校正前的概率得到如图9的(C)那样进行了校正的作业概率表T1。由此,即使在根据从各作业者W1、W2的位置分配的概率难以判别作业的情况下,也能够基于校正后的作业概率表T1判别按作业者的实施作业(图8的S16)。
另外,在以上的处理中,步骤S152~S154的校正可以以与上述的例子不同的顺序进行,也可以仅进行步骤S152~S154中的一部分的校正。此外,在作业概率表T1中通过校正使概率增减的给定的值例如也可以使用作为比根据作业者的人数等分的概率小的范围的正数而生成的随机数。
1-3.效果等
如上所述,本实施方式中的作业分析装置5生成与在作为作业场的一例的作业场6中由一个以上的作业者的一例即作业者W1~W3进行的多个作业有关的信息。作业分析装置5具备存储部52、作为取得部的一例的设备I/F54以及控制部50。存储部52保存地图数据D1以及作业区域信息D2,作为表示在作业场6中与各作业建立对应的区域的一例的作业区域A1、A2等的地图信息的一例。设备I/F54例如作为包括作业场6中的每个时刻的作业者的位置的位置信息的一例,从相机2取得摄像图像的图像数据(S1)。控制部50基于位置信息以及地图信息,进行判别作业者的每个时刻的作业的运算处理(S3)。控制部50基于位置信息,生成作业概率表T1,该作业概率表T1是表示与地图信息中包括每个时刻的作业者的位置的区域建立对应的作业由该作业者进行的概率的概率信息的一例(S12、S13)。控制部50根据表示在作业场6中由作业者进行作业的倾向的作业倾向信息的一例即担当信息D3等,对作业概率表T1进行校正(S14、S15)。
根据以上的作业分析装置5,根据担当信息D3等作业倾向信息,校正基于位置信息生成的作业概率表T1。由此,在由一个以上的作业者进行多个作业时,能够推定作业者的实施作业。在作业分析装置5中,控制部50作为取得部发挥功能,由此作为位置信息的一例,也可以取得图像识别部51的识别结果。
在本实施方式中,控制部50在作业者的位置包括于地图信息中两个以上的作业建立对应的作业区域A1等特定的区域时,根据作业倾向信息校正作业概率表T1,以使与该两个以上的作业有关的概率互不相同(S14、S15)。由此,即使在作业概率表T1中基于位置信息对两个以上的作业分配等概率,也能够根据作为推定结果得到的校正后的作业概率表T1判别作业者的实施作业(参照图9的(B)、(C))。
在本实施方式中,控制部50在多个作业者的位置包括于地图信息中两个以上的作业建立了对应的作业区域A1等特定的区域时,根据作业倾向信息,在所述多个作业者之间校正与各作业者的作业有关的概率(S15)。由此,即使在例如图6的场景等无法从包括多个作业者的位置的作业区域判别各作业者的实施作业的情况下,也能够进行基于作业者之间的校正的实施作业的推定。
在本实施方式中,作业倾向信息包括表示在多个作业中的第一作业中设定的标准作业期间的信息。控制部50在作业者的位置包括于与第一作业建立了对应的区域的期间超过标准作业期间时,减少与第一作业有关的概率(S141)。由此,例如如图5的(C)、(D)那样,即使在作为与装箱(第一作业的一例)建立了对应的区域的一例的作业区域A1持续包括作业者W1的位置的情况下,也能够基于装箱的标准作业期间来推定作业者W1的实施作业。
在本实施方式中,作业倾向信息包括表示并行进行多个作业中的第二作业的作业者的最大人数的信息。控制部50在与第二作业建立了对应的区域所包括的位置的作业者的人数超过最大人数时(S151:是),使各作业者的与第二作业有关的概率变化(S152~S154)。由此,例如进行作业者之间的校正以使得能够以满足图9的作业概率表T1中的装箱以及箱准备(第二作业的一例)那样的各作业的最大人数。
在本实施方式中,作业倾向信息包括将作为与第二作业相关的区域的一例的区划Z1等与作业者建立了对应的担当信息D3(担当信息的一例)。控制部50在作业者的位置包括于在担当信息D3中建立了对应的区域时,对与该区域建立了对应的作业有关的概率进行校正(152)。由此,各作业者能够反映在担当信息D3中建立了对应的担当区划所包括的作业区域进行作业的可能性高的作业场6的倾向,来校正概率。另外,担当信息D3也可以基于作业者停留于区划的频度来生成。
在本实施方式中,图像识别部51的识别结果(位置信息的一例)包括表示多个作业者到达作为区域的一例的作业区域的时刻的信息。控制部50在与第二作业建立了对应的作业区域所包括的位置的作业者的人数超过最大人数时(S151:是),使多个作业者中到达该区域的时刻早的作业者的概率增加(S154)。由此,能够进行校正以使被视为早到达作业区域而与该作业区域对应的作业的开始时刻早的作业者的概率增加。
在本实施方式中,作业倾向信息包括表示多个作业中的两个以上的作业的组合中的顺序的信息。控制部50根据该顺序来校正与组合中的各作业有关的概率(S142、S153)。由此,例如如图5的(D)以及图6那样,即使在作业者的位置包括于与两个以上的作业对应的作业区域A1的情况下,也能够基于该顺序来推定作业者的实施作业。在本实施方式中,表示该顺序的信息例如包括时间上或位置上的作业顺序的信息。在图5的(D)的例子中,根据时间上的作业顺序推定作业者W1的实施作业,在图6的例子中,根据位置上的作业顺序推定各作业者W1、W2的实施作业。
在本实施方式中,控制部50基于分析期间(给定期间的一例)的量的作业概率表T1(概率信息的一例),针对每个作业者,生成表示遍及给定期间的多个作业的比率的信息的一例即分析图表7(S6)。由此,能够将遍及分析期间的每个作业者的实施作业的推定结果提示给例如作业分析系统1的用户3。
本实施方式的作业分析方法是生成与在作业场6中由一个以上的作业者进行的与多个作业有关的信息的方法。在作为计算机的一例的作业分析装置5的存储部52中,保存有表示在作业场6中与各作业建立对应的区域的地图数据D1以及作业区域信息D2(地图信息的一例)。本方法包括:计算机的控制部50取得包括作业场6中的每个时刻的作业者的位置的位置信息的步骤(S1、S11);基于位置信息,生成表示在地图信息中与包括每个时刻的作业者的位置的区域建立对应的作业由作业者进行的概率的作业概率表T1(概率信息的一例)的步骤(S12、S13);以及根据表示在作业场6中由作业者进行作业的倾向的担当信息D3等作业倾向信息,校正概率信息的步骤(S14、S15)。
在本实施方式中,提供一种用于使计算机的控制部执行以上那样的作业分析方法的程序。根据本实施方式的作业分析方法,在由一个以上的作业者进行多个作业时,能够推定作业者的实施作业。
(实施方式2)
以下,使用图12~图15对本公开的实施方式2进行说明。在实施方式1中,说明了在作业分析装置5中生成遍及分析期间的分析图表7的(图7的S6)作业分析系统1。在本实施方式中,对包括信息提示装置的作业分析系统1A进行说明,该信息提示装置能够根据进一步指定特定的时刻以及作业者W1~W3的用户操作来显示作业内容的分析结果。
以下,适当省略与实施方式1所涉及的作业分析系统1相同的结构、动作的说明,说明本实施方式所涉及的作业分析系统1A。
2-1.系统的概要
图12表示本实施方式的作业分析系统1A的信息提示装置中的显示例。作业分析系统1A中的信息提示装置例如由包括监视器4的PC等信息处理装置构成。
在图12的例子中,监视器4显示表示相机2拍摄到的作业场6的动态图像的图像40、表示动态图像的记录期间中的再现状况的进度条41、以及表示特定时刻的作业内容的分析结果的推定作业信息9。
在本系统1A中,例如在监视器4中再现作业场6的动态图像的过程中,通过指定作业者W1~W3以及动态图像中的时刻的用户操作,能够显示推定作业信息9。在图12的例子中,例如在进度条41中指定再现时刻,通过在图像40上选择作业者W1的用户操作,显示与指定的时刻的作业者W1有关的推定作业信息9。图12的推定作业信息9表示在时刻“13:54”的作业者W1的实施作业以“30%”的概率推定为装箱、以“70%”的概率推定为箱准备、以及以“0%”的概率推定为其他作业。
根据这样的推定作业信息9,例如本系统1A的用户能够针对特定的时刻的期望的作业者W1~W3确认实施作业的推定结果,能够详细地分析各作业者W1~W3的实施作业。
2-2.信息提示装置的结构
使用图13对包括能够显示以上那样的推定作业信息9的监视器4的信息提示装置的结构进行说明。图13是例示本实施方式的作业分析系统1A中的信息提示装置8的结构的框图。
图13所例示的信息提示装置8具备控制部80、存储部82、操作部83、设备I/F84以及监视器4。
控制部80例如包括与软件协作而实现给定的功能的CPU或MPU,控制信息提示装置8的整体动作。控制部80读出保存于存储部82的数据以及程序并进行各种运算处理,实现各种功能。上述的程序也可以由因特网等通信网络提供,也可以保存在具有可移动性的记录介质中。控制部80也可以具备内部存储器作为保持各种数据以及程序的临时存储区域。控制部80例如与作业分析装置5的控制部50同样地,不局限于CPU等,也可以由各种电路实现。
存储部82是存储实现信息提示装置8的功能所需的程序以及数据的存储介质。存储部82例如由HDD或SSD构成。例如,存储部82保存上述程序、以及如后述那样从作业分析装置5取得的相机2的图像数据以及作业概率表T1等各种信息。存储部82例如可以具备由DRAM或SRAM构成的暂时的存储元件,也可以作为控制部80的作业区域发挥功能。
操作部83是接受用户的操作的操作构件的总称。操作部83例如由键盘、鼠标、触控板、触摸板、按钮以及开关等中的任意一个或者它们的组合构成。操作部83取得通过用户的操作而输入的各信息。
设备I/F84是用于将作业分析装置5那样的外部设备与信息提示装置8连接的电路。设备I/F84例如与作业分析装置5的设备I/F54同样地按照给定的通信标准进行通信。设备I/F84是在信息提示装置8中从外部设备接收各信息的取得部的一例。在作业分析系统1中,信息提示装置8例如经由设备I/F84从作业分析装置5取得相机2的图像数据以及校正后的作业概率表T1。
监视器4是显示各种信息的显示部的一例。例如监视器4显示从作业分析装置5取得的图像数据所表示的图像。此外,监视器4例如显示用于作业分析系统1的用户进行各种设定的菜单画面等。监视器4例如能够由液晶显示设备或有机EL设备构成。
以上那样的信息提示装置8的结构是一例,信息提示装置8的结构不局限于此。信息提示装置8例如作业分析装置5除了上述的结构以外,或者取而代之,也可以具有经由通信网络与外部的信息提示装置进行通信的结构。此外,信息提示装置8中的取得部可以通过与控制部80等中的各种软件的协作来实现,也可以通过将保存于各种存储介质(例如存储部82)的各信息读出到控制部80的作业区域来进行各信息的取得。此外,信息提示装置8不局限于PC,也可以构成为平板终端或智能手机等。
2-3.作业分析装置的动作
使用图14对包括以上那样的信息提示装置8的作业分析系统1A中的作业分析装置5的整体动作进行说明。
图14是用于说明本实施方式所涉及的作业分析装置5的整体动作的流程图。本实施方式的作业分析装置5中的控制部50除了例如与实施方式1的图7同样的步骤S1~S6的处理以外,还在作业判别处理(S3)之后,将校正后的作业概率表T1(参照图9的(C))保存于存储部52等(S20)。
根据本实施方式的作业分析装置5,例如以给定的周期反复进行以上的处理,保存每个时刻的作业概率表T1,由此蓄积各时刻的每个作业者W1~W3的实施作业的推定结果。
2-4,信息提示装置的动作
在作业分析系统1A中,使用图15对基于以上那样的每个时刻的作业概率表T1来显示与用户的指定相应的推定作业信息9的信息提示装置8的动作进行说明。
图15是例示信息提示装置8的动作的流程图。本流程图例如遍及分析期间在作业分析装置5中执行了图14的处理之后,在信息提示装置8中输入了开始分析的给定的用户操作时开始。本流程图所示的各处理例如由信息提示装置8的控制部80执行。
首先,控制部80例如经由设备I/F84从作业分析装置5取得表示相机2所得到作业场6的动态图像的图像数据,使监视器4显示动态图像(S81)。例如,通过作业分析装置5的控制部50,经由设备I/F54发送应用了作业判别处理(图14的S3)的图像数据,在信息提示装置8中,再现基于接收到的图像数据的动态图像。在图12的例子中,监视器4显示表示再现中的动态图像的图像40。
接下来,控制部80例如判断在操作部83中是否输入了关于显示中的动态图像指定时刻和作业者W1~W3的用户操作(S82)。控制部80例如控制操作部83以及监视器4,以使得接受在图12所例示的动态图像的进度条41中指定时刻的用户操作、和在图像40上选择作业者W1~W3的1人的用户操作。
在没有输入指定时刻和作业者的用户操作时(S82:否),控制部80例如以给定的周期反复进行步骤S82的判断。
在输入了该用户操作时(S82:是),控制部80例如从作业分析装置5取得所指定的时刻的校正后的作业概率表T1,使与指定的作业者W1~W3有关的推定作业信息9显示于监视器4(S83)。例如,控制部80控制设备I/F54,以向作业分析装置5发送表示通过用户操作指定的时刻和作业者W1~W3的信息,接收该信息中的时刻的校正后的作业概率表T1。控制部80例如针对作业者W1~W3中的指定的作业者,提取所取得的作业概率表T1中的各实施作业的概率,生成推定作业信息9。
在图12的例子中,输入指定时刻“13:54”以及作业者W1的用户操作(S82:是),基于该时刻的作业者W1的各实施作业的概率,显示推定作业信息9(S83)。
在品示与用户操作的指定相应的推定作业信息9后(S83),控制部80结束本流程图的处理。
根据以上的处理,信息提示装置8在显示动态图像的过程中(S81),在输入了指定时刻和作业者W1~W3的用户操作时(S82:是),能够将与该用户操作所进行的指定相应的推定作业信息9显示于监视器4(S83)。
在上述的步骤S82中,说明了判断有无指定时刻以及作业者W1~W3双方的用户操作的例子。在步骤S82中,不局限于上述的例子,也可以判断有无指定时刻以及作业者W1~W3中的一方的用户操作。在这种情况下,信息提示装置8例如也可以在输入了指定时刻的用户操作时,在步骤S83中显示该时刻的各作业者W1~W3的推定作业信息9。此外,信息提示装置8例如也可以在输入了指定作业者W1~W3的用户操作时,在步骤S83中,显示在步骤S81中显示中的动态图像的时刻的所指定的作业者的推定作业信息9。
在上述的步骤S81中,说明了从作业分析装置5取得并显示遍及分析期间的动态图像的图像数据的例子。在步骤S81中,不局限于上述例子,例如也可以以动态图像的帧周期依次取得图像数据并显示各帧的图像数据。在这种情况下,在步骤S82中,例如可以判断是否输入了指定与显示中的帧对应的时刻以前的时刻的用户操作,在没有用户操作时(S82:否),也可以重复步骤S81以后的处理。此外,在步骤S81中,信息提示装置8例如也可以经由设备I/F84从相机2取得图像数据。
在上述的步骤S83中,说明了基于从作业分析装置5取得的作业概率表T1的推定作业信息9显示于监视器4的例子。在步骤S83中,监视器4不局限于图12所例示的推定作业信息9,例如也可以显示所取得的作业概率表T1。此外,在步骤S83中,例如也可以生成并显示与该作业概率表T1中的各实施作业的概率对应的热图。
2-5.效果等
如上所述,本实施方式中的作业分析系统1A具备作业分析装置5和从作业分析装置5取得校正后的作业概率表T1(概率信息的一例)并显示所取得的概率信息的(S83)信息提示装置8。根据这样的作业分析系统1A,在信息提示装置8中,能够基于所取得的作业概率表T1,将作业者W1~W3所进行实施作业的推定结果提示给用户。
在本实施方式的作业分析系统1A中,信息提示装置8具备设备I/F84(通信部的一例)、操作部83、控制部80以及监视器4(显示部的一例)。设备I/F84与作业分析装置5进行数据通信。操作部83接受输入表示作业场6中的时刻和作业者W1~W3中的至少一方的指定信息的用户操作(S82)。控制部80根据用户操作向作业分析装置5发送指定信息,控制设备I/F84,以使得接收作为与来自作业分析装置5的指定信息相应的概率信息的一例而由用户操作指定的时刻和/或与作业者W1~W3有关的校正后的作业概率表T1(S83)。作为与指定信息相应的概率信息的一例,监视器4显示基于该校正后的作业概率表T1的推定作业信息9(S83)。
如上所述,在本实施方式中,信息提示装置8从作业分析装置5取得校正后的作业概率表T1(概率信息的一例),并显示所取得的概率信息(S83)。根据这样的信息提示装置8,能够显示与用户操作对应的概率信息而容易进行实施作业的分析。
(其他实施方式)
如上所述,作为在本申请中公开的技术的例示,说明了实施方式1~实施方式2。然而,本公开中的技术并不限定于此,也能够应用于适当地进行了变更、置换、附加、省略等的实施方式。此外,也可以将上述各实施方式中说明的各结构要素组合,作为新的实施方式。因而,以下例示其他实施方式。
在上述的各实施方式中,说明了在可视化处理(图7的S6)中,针对各作业,基于每隔给定的时间间隔判别为是各作业者的作业的总次数来生成分析图表7的例子,但步骤S6不局限于此。例如,控制部50也可以基于所蓄积的校正后的作业概率表T1,计算遍及分析期间的每个时间间隔的各作业的概率的合计值,根据概率的合计值计算每个作业者的各作业的比率,由此生成分析图表7。
此外,在上述的各实施方式中,说明了在图7的步骤S1中经由设备I/F54取得相机2的摄像图像的图像数据的例子,但步骤S1不局限于此。例如,作业分析装置5也可以读出预先保存于存储部52的图像数据。此外,在步骤S1中,图像数据可以以多个帧为单位取得,也可以按每多个帧取得1I帧。
在上述的实施方式2中,说明了在遍及分析期间执行作业分析装置5中的图14的处理后,执行在信息提示装置8中显示推定作业信息9的图15的处理的例子。在本实施方式中,例如也可以在以动态图像的帧周期执行图14的处理的过程中,每当保存校正后的作业概率表T1时(S20)执行图15的处理。在这种情况下,在图15的步骤S81中,例如也可以取得各帧的图像数据,并显示于监视器4。由此,能够实时地进行与时刻以及作业者W1~W3的指定相应的推断作业信息9的显示(S83)。
此外,在上述的各实施方式中,说明了在图7的步骤S1中取得图像数据,在图8的步骤S11中通过图像识别处理来识别作业者的位置的例子,但步骤S1以及S11不局限于此。例如,作业分析装置5也可以经由设备I/F54取得基于信标或GPS的作业者的位置信息。
此外,在上述的各实施方式中,说明了作业分析系统1应用于物流仓库那样的作业场6的例子。在本实施方式中,应用作业分析系统1以及作业分析装置5的作业场即现场并不特别限定于上述的作业场6,例如也可以是工厂或者店铺的卖场等各种现场。此外,在作业分析系统1中判别的作业不局限于上述装箱等例子,也可以是与各种现场相应的各种作业。此外,作业分析系统1的分析对象的作业者不局限于作业者W1~W3等人物,只要是能够执行各种作业的移动体即可。例如,作业者可以是机器人,也可以是有人或者无人的各种车辆。
如上所述,作为本公开中的技术的例示,说明了实施方式。因此,提供了附图以及详细的说明。
因此,在附图以及详细说明中记载的结构要素中,不仅是为了解决课题所必须的结构要素,为了例示上述技术,也可以包括为了解决课题而不是必须的结构要素。因此,通过在附图、详细的说明中记载了这些并非必须的结构要素,不应该立即认定这些并非必须的结构要素是必须的。
工业上的可利用性
本公开能够应用于在物流现场或工厂等各种环境中分析每个作业者的作业的数据分析的用途。
Claims (14)
1.一种作业分析装置,生成与在作业场中由一个以上的作业者进行的多个作业有关的信息,所述作业分析装置具备:
存储部,保存表示在所述作业场中与各作业建立对应的区域的地图信息;
取得部,取得包括所述作业场中的每个时刻的所述作业者的位置的位置信息;以及
控制部,基于所述位置信息以及所述地图信息,进行判别所述作业者的每个时刻的作业的运算处理,
所述控制部基于所述位置信息生成概率信息,所述概率信息表示在所述地图信息中与包括每个所述时刻的作业者的位置的区域建立对应的作业由该作业者进行的概率,
根据表示在所述作业场中由所述作业者进行所述作业的倾向的作业倾向信息,校正所述概率信息。
2.根据权利要求1所述的作业分析装置,其中,
所述控制部在所述作业者的位置包括于在所述地图信息中两个以上的作业建立对应的特定的区域时,根据所述作业倾向信息校正所述概率信息,以使得与所述两个以上的作业有关的概率互不相同。
3.根据权利要求2所述的作业分析装置,其中,
所述控制部在多个作业者的位置包括于在所述地图信息中所述特定的区域时,根据所述作业倾向信息,在所述多个作业者之间校正与各作业者的作业有关的概率。
4.根据权利要求1至3中任一项所述的作业分析装置,其中,
所述作业倾向信息包括表示在所述多个作业中的第一作业中设定的标准作业期间的信息,
所述控制部在所述作业者的位置包括于与所述第一作业建立了对应的区域的期间超过了所述标准作业期间时,减少与所述第一作业有关的概率。
5.根据权利要求1至4中任一项所述的作业分析装置,其中,
所述作业倾向信息包括表示并行地进行所述多个作业中的第二作业的作业者的最大人数的信息,
所述控制部在与所述第二作业建立了对应的区域所包括的位置的作业者的人数超过所述最大人数时,使各作业者的与所述第二作业有关的概率变化。
6.根据权利要求5所述的作业分析装置,其中,
所述作业倾向信息包括将与所述第二作业关联的区域和所述作业者建立了对应的担当信息,
所述控制部在所述作业者的位置包括于在所述担当信息中建立了对应的区域时,对与该区域建立了对应的作业有关的概率进行校正。
7.根据权利要求5或者6所述的作业分析装置,其中,
所述位置信息包括表示多个作业者到达所述区域的时刻的信息,
所述控制部在与所述第二作业建立了对应的区域所包括的位置的作业者的人数超过所述最大人数时,使针对所述多个作业者中到达该区域的时刻早的作业者的概率增加。
8.根据权利要求1至7中任一项所述的作业分析装置,其中,
所述作业倾向信息包括表示所述多个作业中的两个以上的作业的组合中的顺序的信息,
所述控制部根据所述顺序,对与所述组合中的各作业有关的概率进行校正。
9.根据权利要求1至8中任一项所述的作业分析装置,其中,
所述控制部基于给定期间的所述概率信息,按每个所述作业者生成表示遍及所述给定期间的所述多个作业的比率的信息。
10.一种作业分析方法,生成与在作业场中由一个以上的作业者进行的多个作业有关的信息,
在计算机的存储部中保存表示在所述作业场中与各作业建立对应的区域的地图信息,
所述计算机的控制部包括以下步骤:
取得包括所述作业场中的每个时刻的作业者的位置的位置信息;
基于所述位置信息,生成表示在所述地图信息中与包括每个所述时刻的作业者的位置在内的区域建立对应的作业由该作业者进行的概率的概率信息;以及
根据表示在所述作业场中由所述作业者进行所述作业的倾向的作业倾向信息,校正所述概率信息。
11.一种程序,用于使计算机的控制部执行权利要求10所述的作业分析方法。
12.一种作业分析系统,具备:
权利要求1至9中任一项所述的作业分析装置;以及
信息提示装置,从所述作业分析装置取得所述概率信息,并显示所取得的概率信息。
13.根据权利要求12所述的作业分析系统,其中,
所述信息提示装置具备:
通信部,与所述作业分析装置进行数据通信;
操作部,接受将表示所述作业场中的时刻和所述作业者中的至少一方的指定信息进行输入的用户操作;
控制部,根据所述用户操作向所述作业分析装置发送所述指定信息,控制所述通信部以使得从所述作业分析装置接收与所述指定信息相应的概率信息;以及
显示部,显示与所述指定信息相应的概率信息。
14.一种信息提示装置,从权利要求1至9中任一项所述的作业分析装置取得所述概率信息,并显示所取得的概率信息,所述信息提示装置具备:
通信部,与所述作业分析装置进行数据通信;
操作部,接受将表示所述作业场中的时刻和所述作业者中的至少一方的指定信息进行输入的用户操作;
控制部,根据所述用户操作向所述作业分析装置发送所述指定信息,控制所述通信部以使得从所述作业分析装置接收与所述指定信息相应的概率信息;以及
显示部,显示与所述指定信息相应的概率信息。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021063604 | 2021-04-02 | ||
JP2021-063604 | 2021-04-02 | ||
PCT/JP2021/048251 WO2022209082A1 (ja) | 2021-04-02 | 2021-12-24 | 作業分析装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117121029A true CN117121029A (zh) | 2023-11-24 |
Family
ID=83455766
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180096458.XA Pending CN117121029A (zh) | 2021-04-02 | 2021-12-24 | 作业分析装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20240005256A1 (zh) |
JP (1) | JPWO2022209082A1 (zh) |
CN (1) | CN117121029A (zh) |
WO (1) | WO2022209082A1 (zh) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5830780B2 (ja) * | 2011-12-02 | 2015-12-09 | 株式会社日立製作所 | 業務分析装置、業務分析システム及び業務分析方法 |
WO2018042646A1 (ja) * | 2016-09-05 | 2018-03-08 | 株式会社日立物流 | 分析システム及び分析方法 |
JP2020052465A (ja) * | 2018-09-21 | 2020-04-02 | キヤノン株式会社 | 工程推定装置および工程推定方法 |
JP2020091801A (ja) * | 2018-12-07 | 2020-06-11 | コニカミノルタ株式会社 | 作業分析システムおよび作業分析方法 |
CN114365161A (zh) * | 2019-09-18 | 2022-04-15 | 三菱电机株式会社 | 作业要素分析装置和作业要素分析方法 |
-
2021
- 2021-12-24 JP JP2023510264A patent/JPWO2022209082A1/ja active Pending
- 2021-12-24 CN CN202180096458.XA patent/CN117121029A/zh active Pending
- 2021-12-24 WO PCT/JP2021/048251 patent/WO2022209082A1/ja active Application Filing
-
2023
- 2023-09-18 US US18/369,262 patent/US20240005256A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2022209082A1 (ja) | 2022-10-06 |
US20240005256A1 (en) | 2024-01-04 |
JPWO2022209082A1 (zh) | 2022-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3457341A1 (en) | Information processing apparatus, information processing method, and information processing system | |
US10334965B2 (en) | Monitoring device, monitoring system, and monitoring method | |
WO2019090268A1 (en) | Contextual training systems and methods | |
US11640709B2 (en) | Merchandise specification systems and programs | |
US11315294B2 (en) | Information processing device, display method, and program storage medium for monitoring object movement | |
US11922391B2 (en) | Article deduction apparatus, article deduction method, and program | |
CN111563493B (zh) | 基于图像识别的工作信息获取方法、设备及存储介质 | |
US10467745B2 (en) | Abnormality detection device, abnormality detection method and non-transitory computer-readable recording medium | |
JP6769554B2 (ja) | 物体識別装置、物体識別方法、計算装置、システムおよび記録媒体 | |
US11580721B2 (en) | Information processing apparatus, control method, and program | |
JP6305856B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
CN117121029A (zh) | 作业分析装置 | |
US20220319021A1 (en) | Trajectory analysis device and trajectory analysis method | |
JP2019120577A (ja) | 位置推定装置、位置推定方法及び位置推定用コンピュータプログラム | |
US11983242B2 (en) | Learning data generation device, learning data generation method, and learning data generation program | |
EP4383157A1 (en) | Layout analysis device and layout analysis method | |
US11568564B2 (en) | Mapping multiple views to an identity | |
JP6730091B2 (ja) | 積載手順決定装置、および積載手順決定プログラム | |
US20240112498A1 (en) | Image analysis device and method | |
JP6769555B2 (ja) | 物品識別装置、物品識別方法、計算装置、システムおよびプログラム | |
WO2023276332A1 (ja) | 作業分析装置及び方法 | |
CN111860070A (zh) | 识别发生改变的对象的方法和装置 | |
US20230267727A1 (en) | Image analysis apparatus, image analysis method, and storage medium | |
EP4231251A1 (en) | Setting program, detection program, setting method, detection method, setting apparatus, and detection appratus | |
US20220230333A1 (en) | Information processing system, information processing method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |