CN112703525A - 播放装置、分析辅助系统以及播放方法 - Google Patents

播放装置、分析辅助系统以及播放方法 Download PDF

Info

Publication number
CN112703525A
CN112703525A CN201980060278.9A CN201980060278A CN112703525A CN 112703525 A CN112703525 A CN 112703525A CN 201980060278 A CN201980060278 A CN 201980060278A CN 112703525 A CN112703525 A CN 112703525A
Authority
CN
China
Prior art keywords
work
playback
log information
time
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980060278.9A
Other languages
English (en)
Inventor
滨田真太郎
大西喜之
青木充广
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Komatsu Ltd
Original Assignee
Komatsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Komatsu Ltd filed Critical Komatsu Ltd
Publication of CN112703525A publication Critical patent/CN112703525A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C3/00—Registering or indicating the condition or the working of machines or other apparatus, other than vehicles
    • G07C3/08—Registering or indicating the production of the machine either with or without registering working or idle time
    • G07C3/12—Registering or indicating the production of the machine either with or without registering working or idle time in graphical form
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F3/00—Dredgers; Soil-shifting machines
    • E02F3/04—Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28—Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/36—Component parts
    • E02F3/42—Drives for dippers, buckets, dipper-arms or bucket-arms
    • E02F3/43—Control of dipper or bucket position; Control of sequence of drive operations
    • E02F3/435—Control of dipper or bucket position; Control of sequence of drive operations for dipper-arms, backhoes or the like
    • E02F3/438—Memorising movements for repetition, e.g. play-back capability
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20—Drives; Control devices
    • E02F9/2025—Particular purposes of control systems not otherwise provided for
    • E02F9/205—Remotely operated machines, e.g. unmanned vehicles
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20—Drives; Control devices
    • E02F9/2025—Particular purposes of control systems not otherwise provided for
    • E02F9/2054—Fleet management
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26—Indicating devices
    • E02F9/267—Diagnosing or detecting failure of vehicles
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/18—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
    • G05B19/406—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by monitoring or safety
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/08—Construction
    • E—FIXED CONSTRUCTIONS
    • E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02F—DREDGING; SOIL-SHIFTING
    • E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20—Drives; Control devices
    • E02F9/2004—Control mechanisms, e.g. control levers
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/26—Pc applications
    • G05B2219/2616—Earth moving, work machine

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Mining & Mineral Resources (AREA)
  • Civil Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Structural Engineering (AREA)
  • Human Resources & Organizations (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • Mechanical Engineering (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Educational Administration (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Manufacturing & Machinery (AREA)
  • Human Computer Interaction (AREA)
  • Primary Health Care (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Game Theory and Decision Science (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Component Parts Of Construction Machinery (AREA)
  • Operation Control Of Excavators (AREA)
  • Processing Or Creating Images (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

一种播放装置，具备：取得与时刻建立对应的工作装置的日志信息的取得部；接收所述工作装置的动作的播放指示的接收部；在接收到所述播放指示的情况下，将所述日志信息所包含的所述工作装置的角度信息依次应用于工作装置模型，从而播放所述工作装置的动作的播放部；基于所述日志信息推定所述工作装置的各时刻的作业内容的推定部。

Description

播放装置、分析辅助系统以及播放方法
技术领域
本发明涉及播放装置、分析辅助系统以及播放方法。
本申请基于2018年10月31日在日本申请的特愿2018-206069号主张优先权，并在此引用其内容。
背景技术
在专利文献1中，公开了专用的相机搭载车未配置在现场，能够辅助操作者的作业，并且生成包含工作装置与搬运车辆的相对位置信息的辅助图像的作业辅助图像生成装置以及具有该作业辅助图像生成装置的工作装置的远程操纵系统。
现有技术文献
专利文献
专利文献1：日本特开2016―089388号公报
发明内容
发明要解决的课题
在与工作装置的运转、操作相关的领域中，会有想回放自己的操作、向直到熟练操作者的动作，工作装置的故障时想知道工作装置的异常时的动作等需求。因此，需要开发出通过忠实地再现基于操作者的操作的工作装置的动作而能够详细分析工作装置的动作的工具。
鉴于上述课题，本发明的目的在于提供一种能够播放作为对象的工作装置的动作并且推定作业内容而事后地准确分析工作装置的动作的播放装置、分析辅助系统以及播放方法。
用于解决课题的手段
根据本发明的一方式，播放装置具备：取得与时刻建立对应的工作装置的日志信息的取得部；接收所述工作装置的动作的播放指示的接收部；在接收到所述播放指示的情况下，将所述日志信息所包含的所述工作装置的角度信息依次应用于工作装置模型，从而播放所述工作装置的动作的播放部；基于所述日志信息推定所述工作装置的各时刻的作业内容的推定部。。
发明效果
根据上述方式，能够播放作为对象的工作装置的动作，并且推定作业内容而准确地分析工作装置的动作。
附图说明
图1是表示第一实施方式的分析辅助系统的整体构成的图。
图2是表示第一实施方式的工作装置的构造的图。
图3是表示第一实施方式的工作装置的驾驶室的构成的图。
图4是表示第一实施方式的播放装置的功能构成的图。
图5是表示第一实施方式的播放装置的处理流程的图。
图6是表示第一实施方式的日志信息的例子的第一图。
图7是表示第一实施方式的日志信息的例子的第二图。
图8是表示第一实施方式的日志信息的例子的第三图。
图9是表示用于第一实施方式的作业内容的推定的热图的图。
图10是表示接收第一实施方式的播放场面指示的例子的图。
图11是表示第一实施方式的工作装置模型的例子的图。
图12是表示第一实施方式的显示图像的例子的图。
图13是表示第一其他实施方式的播放装置的处理流程的图。
图14是表示第二其他实施方式的播放装置的处理流程的图。
具体实施方式
＜第一实施方式>
以下，关于第一实施方式的播放装置以及该播放装置的分析辅助系统，参照图1～图10进行详细说明。
(分析辅助系统的整体构成)
图1是表示第一实施方式的分析辅助系统的整体构成的图。
分析辅助系统1具有：播放装置10、分别搭载于多个工作装置3的数据记录器20。
工作装置3为播放装置10的作业分析的对象。作为工作装置3的例子，可列举液压挖掘机、轮式装载机等。此外，在以下说明中，作为工作装置3的例子，以液压挖掘机为例进行说明。在各工作装置3设有多个传感器。数据记录器20将由该传感器取得的，表示工作装置3的状态的信息以时间序列记录、累积。以下，数据记录器20记录的，表示各时刻中的工作装置3的状态的信息也记载为日志信息。此外，在操作工作装置3的操作机构为在使用电操作信号来操作工作装置3的构成的情况下，也可以将工作装置3的操作信号的信息以时间序列记录、累积，并包含在日志信息。另外，数据记录器20将记录的日志信息以一定时间间隔，经由广域通信网向播放装置10发送。此外，一定时间间隔例如为5分间隔。播放装置10将从数据记录器20接收的日志信息记录在记录介质中。
关于播放装置10的功能将在之后进行叙述。
(工作装置的构造)
图2是表示第一实施方式的工作装置的构造的图。
作为液压挖掘机的工作装置3在作业现场等中对土砂等进行挖掘、平整。
如图2所示，作为液压挖掘机的工作装置3具有：用于行驶的下部行驶体31、设置于下部行驶体31的上部并能够旋转的上部旋转体32。另外，在上部旋转体32设有驾驶室32A、作业机32B以及两个GPS天线G1、G2。
下部行驶体31具有：左侧履带CL、右侧履带CR。工作装置3利用左侧履带CL以及右侧履带CR的旋转前进、旋转、后退。
驾驶室32A为供工作装置3的操作者搭乘，并进行操作的场所。驾驶室32A例如设置于上部旋转体32的前端部左侧部分。关于驾驶室32A内部的构成将在之后进行叙述。
作业机32B由大臂BM、小臂AR以及铲斗BK构成。大臂BM安装于上部旋转体32的前端部。另外，在大臂BM安装有小臂AR。另外，在小臂AR安装有铲斗BK。另外，在上部旋转体32与大臂BM之间安装有大臂缸SL1。通过驱动大臂缸SL1而能够使大臂BM相对于上部旋转体32动作。在大臂BM与小臂AR之间安装有小臂缸SL2。通过驱动小臂缸SL2，能够使小臂AR相对于大臂BM动作。在小臂AR与铲斗BK之间安装有铲斗缸SL3。通过驱动铲斗缸SL3而能够使铲斗BK相对于小臂AR动作。
作为液压挖掘机的工作装置3具备的上述上部旋转体32、大臂BM、小臂AR以及铲斗BK为工作装置3的可动部的一方式。
(驾驶室的构成)
图3是表示第一实施方式的工作装置的驾驶室的构成的图。
如图3所示，在驾驶室32A设有操作杆L1、L2、脚踏板F1、F2、行驶杆R1、R2。
操作杆L1以及操作杆L2配置在驾驶室32A内的座位ST的左右。另外，脚踏板F1以及脚踏板F2配置在驾驶室32A内、座位ST的前方、底面。
表示相对于操作杆L1、L2、行驶杆R1、R2的输入操作和作为液压挖掘机的工作装置3的动作的对应关系的操作模式的一个例子如下。
朝向驾驶室前方配置在左侧的操作杆L1为用于进行上部旋转体32的旋转动作以及小臂AR的挖掘/卸载动作的操作机构。具体而言，工作装置3的操作者使操作杆L1向前方倾倒时，小臂AR进行卸载动作。另外，工作装置3的操作者使操作杆L1向后方倾倒时，小臂AR进行挖掘动作。另外，在工作装置3的操作者使操作杆L1向右方向倾倒时，上部旋转体32进行右旋转。另外，工作装置3的操作者在使操作杆L1向左方向倾倒时，上部旋转体32进行左旋转。也可以使在操作杆L1向前后方向倾倒的情况下，上部旋转体32进行右旋转或左旋转，在操作杆L1向左右方向倾倒的情况下，小臂AR进行卸载动作或挖掘动作。
朝向驾驶室前方配置于右侧的操作杆L2为用于进行铲斗BK的挖掘/卸载动作以及大臂BM的抬升/下降动作的操作机构。具体而言，在工作装置3的操作者使操作杆L2向前方倾倒时，执行大臂BM的下降动作。另外，在工作装置3的操作者使操作杆L2向后方倾倒时，执行大臂BM的抬升动作。另外，在工作装置3的操作者使操作杆L2向右方向倾倒时，进行铲斗BK的卸载动作。另外，在工作装置3的操作者使操作杆L2向左方向倾倒时，进行铲斗BK的挖掘动作。
另外，行驶杆R1、R2是用于进行下部行驶体31的动作控制，即进行工作装置3的行驶控制的操作机构。朝向驾驶室前方配置于左侧的行驶杆R1与下部行驶体31的左侧履带CL的旋转驱动对应。具体而言，在工作装置3的操作者使行驶杆R1向前方倾倒时，左侧履带CL向前进方向旋转。另外，在工作装置3的操作者使行驶杆R1向后方倾倒时，左侧履带CL向后退方向旋转。
朝向驾驶室前方配置于右侧的行驶杆R2与下部行驶体31的右侧履带CR的旋转驱动。具体而言，在工作装置3的操作者使行驶杆R2向前方倾倒时，右侧履带CR向前进方向旋转。另外，在工作装置3的操作者使行驶杆R2向后方倾倒时，右侧履带CR向后退方向旋转。此外，脚踏板F1、F2分别与行驶杆R1、R2连动，能够利用脚踏板F1、F2进行行驶控制。
此外，上述操作模式只不过是一个例子，根据液压挖掘机的机种等不限于上述方式。
此外，根据实施方式，使用图2说明的工作装置3也可以不具备GPS天线G1、G2。
(播放装置的功能构成)
图4是表示第一实施方式的播放装置的功能构成的图。
以下，参照图4，对第一实施方式的播放装置10的功能进行说明。
如图4所示，播放装置10具备：CPU100、存储器101、显示部102、操作接收部103、通信接口104、储存部105。此外，CPU100也可以不是CPU而是FPGA，GPU等处理器。
CPU100是管理播放装置10的动作整体的控制的处理器。CPU100所具有的各种功能将在之后进行叙述。
存储器101是所谓的主存储装置。在存储器101中，CPU100基于程序，将动作所需的命令以及数据展开。
显示部102是能够目视确认信息地进行显示的显示装置，例如为液晶显示器、有机EL显示器等。
操作接收部103为输入装置，例如为通常的鼠标、键盘、触摸传感器等。
通信接口104是用于在与数据记录器20之间进行通信的通信接口。
储存部105是所谓的辅助存储装置，例如HDD(Hard Disk Drive)，SSD(SolidState Drive)等。在储存部105中记录有从数据记录器20接收的日志信息TL、针对工作装置3的车辆种类、机种而预先准备的工作装置模型TM等。此外，关于工作装置模型TM将后述。另外，在储存部105中记录有：在推定工作装置3的作业内容时使用的单位作业预测模型PM1、要素作业预测模型PM2、在推定过程中生成的热图(H1，H2)、推定的工作装置3的作业内容R等。此外，关于单位作业预测模型PM1、要素作业预测模型PM2、热图(H1，H2)将后述。
对第一实施方式的播放装置10的CPU100所具有的功能进行详细说明。通过基于CPU100预定的程序进行动作，发挥作为取得部1000、接收部1001、提取部1002、播放部1003以及推定部1004的功能。
此外，上述预定的程序也可以是用于实现在播放装置10发挥的功能的一部分的程序。例如程序也可以与在储存部105中已存储的其他程序的组合，或与安装于其他装置的其他程序的组合而发挥功能。此外，在其他实施方式中，除了播放装置10的上述构成以外，或代替上述构成而具备PLD(Programmable Logic Device)等定制LSI(Large ScaleIntegrated Circuit)。作为PLD的例子，可列举PAL(Programmable Array Logic)，GAL(Generic Array Logic)，CPLD(Complex Programmable Logic Device)，FPGA(FieldProgrammable Gate Array)。在这种情况下，利用处理器实现的功能的一部分或全部也可以通过该集成电路实现。
取得部1000从记录、累积在储存部105的多个日志信息TL之中取得作为播放的对象的日志信息TL。在此，多个日志信息TL在储存部105内，分别记录在以不同的文件名记录的文件中。
接收部1001从播放装置10的操作人员接收预定的播放指示。例如接收部1001从播放装置10的操作人员接收工作装置3的播放指示。另外，接收部1001接收指示播放场面的播放场面指示。
提取部1002从取得的日志信息TL提取用于工作装置3的播放的信息。
播放部1003将提取的工作装置3的角度信息应用于工作装置3所对应的工作装置模型TM而播放。
推定部1004从取得的日志信息TL推定工作装置3的各时刻中的作业内容。
(播放装置的处理流程)
图5是表示第一实施方式的播放装置的处理流程的图。
图6～图8是表示第一实施方式的日志信息的例子的第一～第三图。
图9是表示用于第一实施方式的作业内容的推定的热图的图。
图10是表示接收第一实施方式的播放场面指示的例子的图。
图11是表示第一实施方式的工作装置模型的例子的图。
以下，参照图5～图11，对播放装置10进行的具体处理的流程进行详细说明。
图5所示的处理流程从由播放装置10的操作人员使专用的应用程序起动的时刻开始。
通过操作人员的操作使专用的应用程序起动时，CPU100的取得部1000将作为播放的对象的全部日志信息TL在存储器101展开而取得(步骤S00)。
在此，关于日志信息TL，参照图6～图8进行说明。
如图6～图8所示，在日志信息TL中含有工作装置识别信息。工作装置识别信息具体而言为用于分别识别工作装置3的个体识别编号。在图6～图8中，工作装置识别信息以与表示液压挖掘机、轮式装载机等的工作装置3的车辆种类、机种、型式、机号等对应的方式分配。此外，除了工作装置识别信息编号以外，也可以是数字、英文字母、符号或这些组合等。
如图6所示，日志信息TL中包含表示各时刻中的工作装置3的位置、姿势的信息以及工作装置3的可动部的角度信息。具体而言，在日志信息TL中按照各时刻记录有工作装置的3的位置、机体的左右方向的倾角即工作装置3的侧偏角度、机体的前后方向的倾角即俯仰角度、旋转角度、大臂角度、小臂角度、铲斗角度。在此，搭载于工作装置3的数据记录器20基于例如接收GPS天线G1、G2而获得的信息，并且表示纬度、经度的测位信息，特定并记录工作装置3的位置。另外，数据记录器20基于搭载于工作装置3的IMU(Inertial MeasurementUnit)的计测结果计算并记录工作装置3的侧偏角度、俯仰角度。另外，数据记录器20基于分别从设于上部旋转体32的GPS天线G1、G2获得的测位信息，计算并记录上部旋转体32的旋转角度。进一步地，数据记录器20基于大臂缸SL1、小臂缸SL2以及铲斗缸SL3各自的伸缩度计算并记录大臂角度、小臂角度、铲斗角度。
此外，位置、侧偏角度以及俯仰角度为用于确定工作装置3本身的位置、姿势所需的信息。因此，例如仅动画播放工作装置3的可动部，即上部旋转体32、大臂BM、小臂AR以及铲斗BK的动作，而不再现工作装置3本身的位置、姿势的实施方式中，不需要将位置，侧偏角度以及俯仰角度的信息包含在日志信息中。
另外，如图7所示，在日志信息TL中，包含表示各时刻中的相对于操作者的操作杆L1、L2等的输入的程度，即，表示杆的倾倒程度、踏板的踩踏程度的先导液压(PPC压)。具体而言，在日志信息TL中，操作者的左/右旋转、小臂挖掘/卸载、大臂抬升/下降、铲斗挖掘/卸载、右履带前进/后退、左履带前进/后退的各动作种类所对应的操作杆L1、L2、行驶杆R1、R2或脚踏板F1、F2的PPC压按照各时刻记录。此外，图7所示的各时刻与图6的各时刻对应。
另外，如图8所示，在日志信息TL中，包含表示各时刻中的工作装置3的发动机、液压泵等主要驱动机构的状态的信息。具体而言，日志信息TL中，按照各时刻记录发动机冷却水温度、发动机输出、瞬时燃料消耗量、液压泵的油温度。此外，图8所示的各时刻与图6以及图7的各时刻对应。
返回图5，基于CPU100的推定部1004取得的日志信息TL推定工作装置3的各时刻中的作业内容(步骤S01)。
在此，参照图9对推定部1004根据日志信息TL推定工作装置3的作业内容的顺序进行说明。关于单位作业以及要素作业这两方对推定部1004工作装置3的作业内容进行推定。单位作业为进行一个作业目的的作业。要素作业是构成单位作业的要素，表示根据目的区分的一系列的动作或作业的作业。
作为单位作业的区分的例子，例如可列举“挖掘装载”，“挖沟”，“回填”，“锄地”，“法面(从上方)”，“法面(从下方)”，“负载收集”，“行驶”，“停车”。
挖掘装载是挖掘、刮取砂土或者岩石，并将刮取的砂土或者岩石装载运输车辆的平台的作业。挖掘装载是由挖掘、负载旋转、排土、空载旋转、待排土以及平台按压构成的单位作业。
挖沟是将底面细长地挖掘、刮取成沟状的作业。挖沟是由挖掘、负载旋转、排土以及空载旋转构成，并能够包括压均的单位作业。
回填是向地面，对已经挖空的沟或者洞填入砂土而平整地回填的作业。回填是由挖掘、负载旋转、排土、碾压以及空载旋转构成，能够包括压均以及扫均的单位作业。
锄地是为了使地面的多余起伏设定为规定的高度而平整地刮取的作业。锄地是由挖掘以及排土，或者挖掘、负载旋转、排土以及空载旋转构成，并能够包括压均以及扫均的单位作业。
法面(从上方)是利用位于对象位置的上方的工作装置3制作斜面的作业。法面(从上方)是由碾压、挖掘、负载旋转、排土、空载旋转构成，并能够包括压均的单位作业。
法面(从下方)是利用位于对象位置的下方的工作装置3制作斜面的作业。法面(从下方)是由碾压、挖掘、负载旋转、排土、空载旋转构成，并能够包括压均的单位作业。
负载收集是将由挖掘等铲出的砂土在向运输车辆装载前提前收集的作业。负载收集是由挖掘、负载旋转、排土、空载旋转构成，并且能够包括压均的单位作业。
行驶是使工作装置3移动的作业。作为单位作业的行驶是由作为要素作业的行驶构成的单位作业。
停车是在铲斗BK中没有砂土以及岩石，并且停止规定时间以上的状态。作为单位作业的停车是由作为要素作业的停车构成的单位作业。
作为要素作业的区分的例子，可列举“挖掘”、“负载旋转”、“排土”、“空载旋转”、“待排土”，“平台按压”，“碾压”，“压均”，“扫均”。
挖掘是利用铲斗BK挖掘、刮取砂土或者岩石的作业。
负载旋转是使刮取的砂土或者岩石由铲斗BK装载，并使上部旋转体32旋转的作业。
排土是将刮取的砂土或者岩石从铲斗BK向运输车辆或者规定的场所卸下的作业。
空载旋转是在铲斗BK中没有砂土以及岩石的状态下，使上部旋转体32旋转的作业。
待排土是保持刮取的砂土或者岩石由铲斗BK装载，并使用于装载的运输车辆待机的作业。
平台按压是从上方用铲斗BK压平向运输车辆的平台装载的砂土的作业。
碾压是对相对于不平的底面用铲斗BK压入砂土，使底面成形或者强化的作业。
压均是用铲斗BK的底面将砂土推均匀的作业。
扫均是用铲斗BK的侧面将砂土推均匀的作业。
推定部1004通过将日志信息TL按照时间序列依次输入到单位作业预测模型PM1获得单位作业的尤度的时间序列。单位作业预测模型PM1是通过使用了教师数据的学习，在输入日志信息TL时输出单位作业的尤度的模型，例如可以存储于储存部105。
另外，推定部1004通过按照时间序列依次将日志信息TL输入到要素作业预测模型PM2而获得要素作业的尤度的时间序列。要素作业预测模型PM2是通过使用了教师数据的学习，在输入日志信息TL时输出要素作业的尤度的模型，例如也可以存储于储存部105。
推定部1004通过将单位作业的尤度的时间序列以及要素作业的尤度的时间序列分别乘以时间平均过滤值，使尤度的时间序列平滑化，如图9所示，生成表示平滑化后的单位作业的尤度的时间序列的单位作业热图H1以及表示平滑化后的要素作业的尤度的时间序列的要素作业热图H2。热图H1以及H2是基于平滑化后的尤度的时间序列，在纵轴取作业的区分，横轴取时刻的平面，附上表示作业的区分的尤度的颜色的图。热图的颜色例如可以为，作业的区分的尤度越低越接近蓝色，作业的区分的尤度越高，越接近红色。推定部1004将热图H1以及H2存储于储存部105。
推定部1004基于平滑化后的尤度的时间序列，特定单位作业的尤度为支配性的时间段，并推定该时间段的工作装置3的作业内容。例如，作为单位作业的“挖掘装载”的尤度为支配性的时间段将工作装置3的作业内容推定为“挖掘装载”。同样，推定部1004基于平滑化后的尤度的时间序列，特定要素作业的尤度为支配性的时间段，并推定该时间段的工作装置3的作业内容。例如作为要素作业的“挖掘”的尤度为支配性的时间段将工作装置3的作业内容推定为“挖掘”。推定部1004将关于工作装置3推定的作业内容R的信息存储在储存部105中。
返回图5，接着，接收部1001接收播放指示(步骤S02)。作为播放指示的一方式，也可以是播放按钮的按下等操作。另外，也可以包含时刻、工作装置3的位置、在工作装置3产生异常等各种事件等作为播放的起点的信息而进行播放指示。
接着，CPU100的接收部1001接收指示播放场面的播放场面指示(步骤S03)。
在此，参照图10对接收部1001接收指示播放场面的播放场面指示的顺序进行说明。接收部1001在步骤S02中接收播放指示时，参照储存部105，取得关于工作装置3推定的作业内容R的信息。如图10所示，接收部1001基于推定的作业内容R的信息，使推定的作业内容R所含的单位作业的列表S1在显示画面弹出显示，使操作人员选择希望播放的单位作业。
例如在操作人员从列表S1选择“挖掘装载”时，接收部1001基于推定的作业内容R的信息，将推定的作业内容R所含的要素作业的列表S2在显示画面弹出显示，使操作人员选择希望播放的要素。例如在操作人员从列表S2选择“挖掘”时，接收部1001将输入作业日期和时间的输入画面S3在显示画面弹出显示，使操作人员输入希望播放的作业日期和时间。具体而言，如图10所示，操作人员将作业日期和时间以数值输入年月日以及时分秒。此外，在所选择的单位作业或要素作业在所输入的作业日期和时间中不存在等与推定的作业内容R矛盾的情况下，也可以接收部1001重复输入作业日期和时间，直至输入整合的作业日期，也可以将推定的作业内容R之中最接近的作业日期和时间作为输入的作业日期和时间。
在输入操作人员希望播放的作业日期和时间时，接收部1001将工作装置3的工作装置识别信息的列表S4在显示画面弹出显示，使操作人员选择希望播放的工作装置3的种类。在第一实施方式中，对工作装置3的种类为工作装置识别信息的情况进行说明，但工作装置3的种类也可以是车辆种类以及机种等能够识别工作装置3的其他信息。
在选择操作人员希望播放的工作装置3的种类时，接收部1001参照储存部105，将表示地图信息的2D图的输入画面S5在显示画面弹出显示，使操作人员指定希望播放的工作装置3的作业位置。例如操作人员通过点击输入画面S5的希望的位置等而输入希望播放的工作装置3的作业位置。
以上，接收部1001作为播放场面指示，接收工作装置3的种类、作业内容、作业日期和时间以及作业位置。也可以代替工作装置3的种类，而接收工作装置3的作业者的信息。在这种情况下，通过将使工作装置3的作业者的信息与工作装置3的种类关联的信息预先存储在储存部105，而能够根据接收到的作业者的信息确定工作装置3的种类。
此外，使用图10说明的接收部1001进行的播放场面指示的接收顺序为例示，接收部1001例如也可以按照其他顺序接收播放场面指示。例如在图10中，为使操作人员选择而将列表S1～S2、以及S4、输入画面S3以及S5弹出显示的情况进行了说明，也可以在图12后述的显示图像D上显示而使操作人员选择。另外，接收部1001也可以不接收工作装置3的种类、作业内容、作业日期和时间以及作业位置的全部的信息，而仅接收一部分信息，接收各信息的顺序也可以不是上述顺序。例如接收部1001也可以依次接收工作装置3的作业日期和时间、作业内容以及种类。
返回图5，CPU100的取得部1000基于接收部1001接收的作为工作装置3的种类的工作装置识别信息，从储存部105选择并读出与参照的工作装置识别信息对应的工作装置模型TM(步骤S04)。
在此，参照图11对工作装置模型TM进行说明。
如图11所示，工作装置模型TM为包含工作装置识别信息、该工作装置识别信息所示的工作装置3的外形3D模型M0、操作面板模型M1等的信息。外形3D模型M0为表示工作装置3的3D模型，针对下部行驶体、上部旋转体等工作装置3的每个局部构建。例如外形3D模型M0表示工作装置3的形状。例如外形3D模型M0通过表示工作装置3的下部行驶体31的下部行驶体外形模型M01、表示上部旋转体32的上部旋转体外形模型M02、表示大臂BM的大臂外形模型M03、表示小臂AR的小臂外形模型M04以及表示铲斗BK的铲斗外形模型M05构成。
操作面板模型M1是表示由工作装置识别信息特定的工作装置3的操作面板的模型，将工作装置3的操作者进行的，与操作杆L1、L2、行驶杆R1、R2对应的输入方向以及输入程度再现。在操作面板模型M1中包含表示工作装置3的动作种类(右/左旋转、小臂挖掘/卸载、大臂抬升/下降、铲斗挖掘/卸载、右履带前进/后退、左履带前进/后退(参照图7))与工作装置3的操作者的输入操作种类(操作杆L1前方，操作杆L2右方向，··)对应关系的信息。
返回图5，CPU100的提取部1002基于接收部1001接收的播放场面指示即工作装置3的种类(工作装置识别信息)以及作业内容，从接收的工作装置3的种类所对应的日志信息TL，提取用于播放的信息(步骤S05)。例如作为用于播放的信息，提取大臂角度、小臂角度，铲斗角度等的各种角度信息。此外，作为用于播放的信息，也可以提取图7所示的先导液压。
接着，参照CPU100日志信息TL所示的各时刻中的工作装置3的位置，在作业现场的俯瞰图像即2D图上，描绘工作装置3的移动轨迹。例如将日志信息TL所示的各时刻的工作装置3的位置从时戳早的开始，一边依次应用于作业现场的俯瞰图像即2D图上，一边描绘工作装置3的移动轨迹。
在此，CPU100中，在步骤S03中从作为播放场面指示接收的作业日期和时间以及作业位置所对应的日志信息TL所示的工作装置3的位置，按照时戳早晚的顺序，一边应用于作业现场的俯瞰图像即2D图上，一边描绘工作装置3的移动轨迹。
另外，提取部1002参照日志信息TL所示的各时刻的工作装置3的发动机、液压泵等驱动机构相关的状态(图8)，在工作装置3的移动轨迹上，提取在驱动机构产生异常的区间(以下，也记为异常产生区间)。CPU100将异常产生区间在移动轨迹上重叠并在显示部102描绘(步骤S06)。此外，在其他实施方式中，步骤S06的描绘处理也可以在后述步骤S07的定时或更靠后的步骤中进行。
接着，播放部1003执行工作装置模型TM的动画播放处理(步骤S07)。在此，播放部1003从由接收的播放场面指示特定的播放场面播放工作装置3的动作。具体而言，播放部1003将记录在日志信息TL的各种信息根据作为播放场面指示接收的作业日期和时间，按照时戳早晚的顺序，一边依次应用于工作装置模型TM，一边使工作装置3动画播放。此外，在步骤S02中，在包含各种事件而接收播放指示的情况下，将发生各种事件的时刻所对应的各种信息一边依次应用于工作装置模型TM，一边使工作装置3动画播放。
具体而言，播放部1003基于日志信息TL所示的，旋转角度、大臂角度等各种角度信息，变更外形3D模型M0的对应的部分的角度。例如，播放部1003使铲斗外形模型M05绕与小臂外形模型M04的连接位置规定的旋转轴，以日志信息TL所示的铲斗角度的方式倾斜，从而再现工作装置3的铲斗BK的位置、姿势。
同样，播放部1003通过使小臂外形模型M04绕与大臂外形模型M03的连接位置规定的旋转轴，以日志信息TL所示的小臂角度倾斜，从而再现工作装置3的小臂AR的位置、姿势。
同样，播放部1003通过使上部旋转体外形模型M02绕与下部行驶体外形模型M01的连接位置规定的旋转轴，以日志信息TL所示的旋转角度倾斜，从而再现工作装置3的上部旋转体32的位置、姿势。
同样，播放部1003通过使下部行驶体外形模型M01绕下部行驶体外形模型M01规定的侧偏旋转轴，以日志信息TL所示的侧偏角度倾斜，并且绕下部行驶体外形模型M01规定的俯仰旋转轴，以日志信息TL所示的俯仰角度倾斜，从而再现工作装置3的上部旋转体32的姿势。
另外，第一实施方式的播放装置10能够基于日志信息TL所含的，各时刻的右履带前进/后退、左履带前进/后退的PPC压，进行工作装置3的行驶的动画播放。
具体而言，基于右履带前进/后退、左履带前进/后退的PPC压，使外形3D模型M0前进、后退、左右前进、左右后退。例如基于右履带前进以及左履带前进的PPC压的数值，使外形3D模型M0向前方方向移动。也可以基于PPC压的数值，改变移动速度。
另外，基于右履带后退以及左履带后退的PPC压的数值，使外形3D模型M0向后方方向移动。另外，基于右履带前进与左履带前进的PPC压的数值之差，使外形3D模型M0向前方左右方向曲线移动。例如在右履带前进的PPC压的数值比左履带前进的PPC压的数值大的情况下，向前方左方向曲线移动。移动的速度，曲线的大小也可以根据各个PPC压的数值以及PPC压的数值之差变更。
同样，基于右履带后退与左履带后退的PPC压的数值之差，使外形3D模型M0向后方左右方向曲线移动。例如在右履带后退的PPC压的数值比左履带后退的PPC压的数值大的情况下，向后方左方向曲线移动。移动的速度，曲线的大小也可以根据各个PPC压的数值以及PPC压的数值之差变更。
此外，除了右履带前进/后退、左履带前进/后退的PPC压以外，通过使用位置信息而播放，能够更准确地形成工作装置3的行驶动画。在这种情况下，通过使用位置信息，能够更准确地表现工作装置3的移动的速度、位置。另外，除了右履带前进/后退、左履带前进/后退的PPC压以外，也可以基于侧偏角度，或俯仰角度，或侧偏角度与侧偏角度这两方，使工作装置3动画播放，从而能够播放行驶时的工作装置3的左右方向的倾角，或工作装置3的前后方向的倾角。
进一步地，播放部1003中，将日志信息TL所示的，针对每个动作种类的操作杆L1、L2、行驶杆R1、R2的PPC压，按照时戳早晚顺序，依次应用于工作装置模型TM的操作面板模型M1，将工作装置3的操作者的对各种操作杆、行驶杆的输入操作动画播放。播放部1003将外形3D模型M0以及操作面板模型M1的播放时刻集合在同一画面上同时动画播放。
播放部1003在工作装置3的动画播放处理中，判定是否终止动画播放(步骤S08)。例如在基于停止按钮的按下等的，接收到播放终止的指示的情况下，判定为终止动画播放。也可以在动画播放开始后，经过预定的期间后，判定终止动画播放。在动画播放未终止的情况下(步骤S08；NO)，播放部1003继续工作装置模型TM的动画播放。另一方面，在终止动画播放的情况下(步骤S08；YES)，播放部1003终止动画播放处理。
使用图5说明的各处理流程中的步骤S00，S04，S05，S06，以及S08不是播放装置10的必须构成，在其他实施方式中，也可以不具备这种步骤。
以上，对接收部1001接收播放指示，并在工作装置3的动画播放之前接收播放场面指示的例子进行了说明，但作为其他实施方式，也可以接收播放指示而在工作装置3的动画的播放中或播放后接收播放场面指示。
图13表示在工作装置3的动画的播放中接收播放场面指示的情况下的播放装置的处理流程。图13所示的第一其他实施方式的处理流程没有步骤S03，取而代之，在新的步骤S21存在于步骤S07以及S08之间这一方面与图5所示的处理流程不同。因此，以下，以与图5所示的处理流程不同的方面为主进行说明，对与图5所示的处理流程相同的处理省略详细说明。
在根据操作人员的操作使专用的应用程序起动时，CPU100的取得部1000将作为播放的对象的全部的日志信息TL在存储器101展开而取得(步骤S00)。CPU100的推定部1004基于取得的日志信息TL推定工作装置3的各时刻的作业内容(步骤S01)。
CPU100的接收部1001接收播放指示(步骤S02)。此时，CPU100的接收部1001接收作为播放的对象的日志信息TL的指定。播放装置10的操作人员例如通过输入日志信息TL的文件名等指定作为播放的对象的日志信息TL。此外，也可以将作为播放的对象的日志信息TL固定，而不指定日志信息TL。
接着，在步骤S02中从播放装置10的操作人员接收日志信息TL的指定时，CPU100的取得部1000从在储器101中展开的全部的日志信息TL之中取得指定的日志信息TL。接下来，取得部1000参照日志信息TL所含的工作装置识别信息。取得部1000从储存部105选择并读出参照的工作装置识别信息所对应的工作装置模型TM(步骤S04)。此外，也可以不选择工作装置模型TM，而固定工作装置模型TM的指定。
接着，从CPU100的提取部1002日志信息TL提取用于播放的信息(步骤S05)。参照CPU100日志信息TL所示的各时刻的工作装置3的位置，在作业现场的俯瞰图像即2D图上描绘工作装置3的移动轨迹。
另外，参照提取部1002日志信息TL所示的各时刻的工作装置3的发动机、液压泵等驱动机构相关的状态(图8)，在工作装置3的移动轨迹上，提取在驱动机构产生异常的区间(以下，也记为异常产生区间)。将CPU100异常产生区间在移动轨迹重叠而在显示部102描绘(步骤S06)。
接着，播放部1003执行工作装置模型TM的动画播放处理(步骤S07)。接收部1001判定在动画播放中是否接收了播放场面指示(步骤S21)。在接收部1001接收播放场面指示(步骤S21；YES)时，播放部1003的动画播放处理中断而使处理返回步骤S04。而且，基于接收的播放场面指示所含的工作装置3的种类、作业内容、作业日期和时间以及作业位置等，再次进行取得部1000的工作装置模型TM的读出(步骤S04)，用于提取部1002的播放的信息的提取(步骤S05)以及移动轨迹等的显示(步骤S07)。播放部1003执行工作装置模型TM的动画播放处理，根据由接收的播放场面指示特定的播放场面使工作装置3的动作播放(步骤S07)。
另一方面，在接收部1001未接收播放场面指示(步骤S21；NO)时，处理进入步骤S08，在播放部1003工作装置3的动画播放处理中，判定是否终止动画播放(步骤S08)。在未终止动画播放的情况下(步骤S08；NO)，播放部1003继续工作装置模型TM的动画播放。另一方面，在动画播放终止的情况下(步骤S08；YES)，播放部1003终止动画播放处理。
图14表示进行为了显示工作装置3的动画的播放、关于工作装置3推定的作业内容的必要最低限度的处理的第二其他实施方式的播放装置的处理流程。图14所示的处理流程没有步骤S01、S03～S04、S06以及S08，取而代之在新的步骤S31存在于步骤S05以及S07之间方面、新的步骤S32存在于步骤S07后方面与图5所示的处理流程不同。因此，以下，以与图5所示的处理流程不同的方面为主进行说明，对于与图5所示的处理流程相同的处理省略详细说明。
在利用操作人员的操作使专用的应用程序起动时，CPU100的取得部1000将作为播放的对象的全部的日志信息TL在存储器101展开而取得(步骤S00)。
CPU100的接收部1001接收播放指示(步骤S02)。此时，CPU100的接收部1001接收作为播放的对象的日志信息TL的指定。播放装置10的操作人员例如通过输入日志信息TL的文件名等而指定作为播放的对象的日志信息TL。此外，也可以将作为播放的对象的日志信息TL固定，而不指定日志信息TL。
接着，在步骤S02中从播放装置10的操作人员接收日志信息TL的指定时，CPU100的取得部1000从在存储器101展开的全部的日志信息TL之中取得被指定的日志信息TL。
接着，CPU100的提取部1002从日志信息TL提取用于播放的信息(步骤S05)。CPU100的推定部1004基于取得的日志信息TL推定工作装置3的各时刻的作业内容(步骤S31)。
接着，播放部1003执行工作装置模型TM的动画播放处理(步骤S07)。CPU100将推定的作业内容在显示图像D显示(步骤S32)。以上，终止图14所示的处理流程。此外，对图14所示的处理流程为在步骤S31进行工作装置3的作业内容的推定之后在步骤S07使动画播放的情况进行了说明，但作业内容的推定也可以是一边进行动画播放，一边在后台推定，并在推定完成后显示于显示画面D的构成。
(播放装置的显示画面)
图12是表示第一实施方式的播放装置的显示画面的例子的图。
第一实施方式的播放装置10的CPU100在显示部102显示例如图10所示的显示图像D。
显示图像D包括发动机信息图像D0、外形3D模型显示图像D1、信息一览图像D2、2D图图像D3、时间滚动条D4、操作模式图像D5、热图图像D6。
发动机信息图像D0为将与工作装置3的发动机相关的各种信息朝向播放装置10的操作人员提示的区域。发动机信息图像D0中包括例如由转速仪等模拟仪形式显示的发动机速度D01以及发动机输出扭矩D02等。
外形3D模型显示图像D1为外形3D模型M0进行动画播放的区域。外形3D模型显示图像D1中，描绘了在外形3D模型M0(图9)中应用了表示工作装置3的状态的大臂角度、小臂角度，铲斗角度等各种信息的工作装置图像D10。另外，在外形3D模型显示图像D1中描绘播放装置10的操作人员用于指示动画播放、暂时停止等的按钮图像D11。
信息一览图像D2为将与播放相关的各种信息向播放装置10的操作人员提示的区域。信息一览图像D2中包含播放日期和时间、播放的工作装置模型TM的车辆种类以及机种、推定的作业内容、推定的作业内容的尤度以及播放时刻的异常的有无等。推定的作业内容即作业分类以及作业状态的信息与在外形3D模型显示图像D1的动画播放连动而改变其文字。例如在图12所示的情况下，与动画播放连动而显示作业分类“挖掘装载”以及作业状态“挖掘”，但在工作装置3显示不同的作业内容的动画播放时，显示与该作业内容相当的作业分类以及作业状态。
2D图图像D3为描绘工作装置3的俯瞰图像的区域。在2D图图像D3中，除了作业现场的俯瞰图像即2D图图像以外，描绘工作装置图标D30、移动轨迹D31以及异常产生区间D32。另外，在2D图图像D3中推定的作业内容R也可以在每个作业内容所对应的作业位置区分颜色而描绘。
工作装置图标D30为表示播放中的工作装置3的2D图上的位置、朝向的图像。
移动轨迹D31示出了2D图中的工作装置3的移动的轨迹。工作装置图标D30以及移动轨迹D31基于日志信息TL所含的，各时刻的工作装置3的位置描绘。
另外，异常产生区间D32表示移动轨迹D31中的工作装置3的发动机，液压泵等驱动机构产生异常的区间。异常产生区间D32基于工作装置3的驱动机构的状态(图8)描绘。例如CPU100提取工作装置3的移动轨迹D31中的，发动机冷却水温度超过预先规定的异常判定阈值的区间，并将该区间描绘为异常产生区间D32。
播放装置10的操作人员例如也可以通过使用鼠标等操作接收部103，进行指定移动轨迹D31上的预定位置的点击等操作，从而能够对播放时刻进行所期望的变更。
时间滚动条D4是用于控制动画播放的滚动条。在时间滚动条D4描绘有：表示从开始时刻到终止时刻的时间轴的柱状图像D40、在柱状图像D40表示的时间轴中的播放中的时刻所对应的播放时刻图标D41、异常产生时间段D42。播放时刻图标D41显示于柱状图像D40中的，播放时刻所对应的位置。操作人员通过进行使播放时刻图标D41在柱状图像D40上滑动的操作，而能够对播放时刻进行所期望的变更。此外，在其他实施方式中，也可以是代替播放时刻图标D41，变更热图图像D6的播放时间所对应的位置的颜色而表示播放时刻的构成，也可以是在播放时刻所对应的位置显示线条的构成。
异常产生时间段D42为2D图图像D3的异常产生区间D32所对应的时间段，示出了从开始时刻到终止时刻中的，工作装置3的驱动机构产生异常的时间段。
播放装置10的操作人员通过使用操作接收部103，进行使柱状图像D40的播放时刻图标D41滑动的操作，而能够对播放时刻进行所期望的变更。
操作模式图像D5为工作装置3的操作者对操作杆、行驶杆的输入操作进行动画播放的区域。操作模式图像D5由操作图像D50、D51、D52、D53以及操作图标D501、D511、D521、D531构成。
具体而言，操作图像D50为向左侧的操作杆即操作杆L1的输入操作进行动画播放的区域。操作图像D50上的操作图标D501的位置示出了向操作杆L1的输入方向。另外，在操作图像D50上显示的操作图标D501的颜色示出了向操作杆L1的输入程度。例如在没有相对于操作杆L1的输入的情况下，图标D501以完全的“白色”显示，随着输入程度变大，从“白色”向“红色”变化地显示。此外，根据输入程度变化的颜色的组合并不限于该例。关于后述图标D511、D521、D531也同样。
操作图像D51为向右侧的操作杆即操作杆L2的输入操作动画播放的区域。操作图像D51上的操作图标D511的位置示出了向操作杆L2的输入方向。另外，在操作图像D51上显示的操作图标D511的颜色示出了向操作杆L2的输入程度。
操作图像D52是向左侧的行驶杆即行驶杆R1的输入操作动画播放的区域。操作图像D52上的操作图标D521的位置示出了向行驶杆R1的输入方向。另外，在操作图像D52上显示的操作图标D521的颜色示出了向行驶杆R1的输入程度。
操作图像D53是向右侧的行驶杆即行驶杆R2的输入操作动画播放的区域。操作图像D53上的操作图标D531的位置示出了向行驶杆R2的输入方向。另外，在操作图像D53上显示的操作图标D531的颜色示出了向行驶杆R2的输入程度。
热图图像D6是在纵轴取作业的区分，横轴取时刻的平面附加表示作业的区分的尤度的颜色的图，将推定部1004生成的单位作业热图H1在显示画面显示。热图图像D6的横轴的时刻与在时间滚动条D4显示的时间对应而显示。如图12所示，热图图像D6的左横示出了表示各行的作业的区分的“掘载”、“锄地”、“载集”、“行驶”以及“停车”。在此，“掘载”，“锄地”以及“载集”分别是“挖掘装载”、“锄地”以及“负载收集”的简略表示。热图图像D6的右横显示尤度与颜色的关系。
此外，在图12中，作为热图图像D6，显示了单位作业热图H1，但作为热图图像D6，也可以显示要素作业热图H2。另外，在图12中，热图图像D6为五行构成，但也可以根据显示的单位作业或要素而成为任意行构成。
此外，在图12中，对显示图像D包含发动机信息图像D0、显示动画的外形3D模型显示图像D1、显示与播放相关的各种信息的信息一览图像D2、2D图图像D3、时间滚动条D4、操作模式图像D5、热图图像D6而构成的情况进行了说明，但在其他实施方式中并不限定于此。例如显示图像D也可以是仅显示动画、作业分类或作业状态的文字的构成。另外，显示图像D也可以是仅显示动画、热图图像D6的构成。另外，显示图像D也可以是仅显示动画、热图图像D6、时间滚动条D4的构成。
另外，在图12中，对信息一览图像D2包括播放日期和时间、播放的工作装置模型TM的车辆种类以及机种、推定的作业内容、推定的作业内容的尤度以及播放时刻的异常的有无等而构成的情况进行了说明，但也可以在其他实施方式中使这些信息的一部分在信息一览图像D2显示。
另外，在图12中，对播放日期和时间、播放的工作装置模型TM的车辆种类以及机种、推定的作业内容、推定的作业内容的尤度以及播放时刻的异常的有无显示于信息一览图像D2的情况进行了说明，也可以将这些信息的一部分或全部显示于显示图像D1。例如推定的作业内容即作业分类以及作业状态的信息也可以不显示在信息一览图像D2，而在显示图像D1显示。另外，推定的作业内容即作业分类，或作业状态的信息的任一方也可以不显示在信息一览图像D2，而在显示图像D1显示。
(作用、效果)
如上所述，第一实施方式的播放装置10具备：取得与时刻建立对应关系的工作装置3的日志信息TL的取得部1000；接收工作装置3的动作的播放指示的接收部1001；在接收到播放指示的情况下，将日志信息TL所含的工作装置3的角度信息依次应用于工作装置模型TM，从而将工作装置3的动作播放的播放部1003；基于日志信息TL推定工作装置3的各时刻的作业内容的推定部1004。
如此，工作装置3在实际的作业现场进行的一系列的动作基于日志信息TL在工作装置模型TM再现，并且推定进行该一系列的动作的工作装置3的作业内容。因此，能够详细地进行工作装置3的操作者的作业的分析。
尤其是，推定部1004在推定作业内容时使用的日志信息TL包括表示工作装置3的状态的信息。由此，能够根据工作装置3的状态掌握工作装置3的动作，能够准确地推定工作装置3的作业内容。
尤其是，在推定部1004推定作业内容时使用的日志信息TL包括表示工作装置3的操作信号的信息。由此，能够根据工作装置3的操作信号掌握工作装置3的操作，并准确地推定工作装置3的作业内容。
另外，在第一实施方式的播放装置10中，接收部1001接收指示播放场面的播放场面指示，播放部1003根据由播放场面指示特定的播放场面播放工作装置3的动作。由此，能够详细地指定操作者希望播放的实际的作业现场中的工作装置3的动作，因此能够对工作装置3的操作者在作业现场进行的作业进行高效地分析。
另外，在第一实施方式的播放装置10中，播放场面指示至少包括工作装置3的种类、作业内容、作业日期和时间、作业位置以及作业者中的任一个信息。由此，能够将工作装置3的种类、作业内容、作业日期和时间、作业位置以及作业者中的任一个或这些组合进行分类而详细地分析工作装置3的操作者在作业现场进行的作业。另外，能够详细地指定操作者希望播放的实际的作业现场的工作装置3的动作，因此能够对工作装置3的操作者在作业现场进行的作业进行高效地分析。
另外，第一实施方式的播放装置10将由推定部1004推定的作业内容显示在显示部102。由此，能够分析工作装置3的作业内容与工作装置3的动作的对应关系。
尤其是，第一实施方式的播放装置10将由推定部1004推定的作业内容与播放中的时刻对应而显示。由此，能够使工作装置3的作业内容与工作装置3的动作的对应关系与时间经过关联而详细分析。
尤其是，第一实施方式的播放装置10仅显示由推定部1004推定的作业内容中的，尤度为预定的阈值以上的作业内容。由此，能够取出不准确的信息，而能够对工作装置3的操作者在作业现场进行的作业进行准确地分析。
进一步地，播放装置10将外形3D模型与操作面板模型M1一边使播放时刻集合一边同时播放，并且将该播放时刻的作业内容显示。如此，能够对关于预定的作业内容的操作者的输入操作和基于此的工作装置3的外观上的动作之间的对应关系进行分析。
进一步地，播放装置10利用外形3D模型显示图像D1播放工作装置3的动画，并且利用时间滚动条D4表示播放时刻，进而利用热图图像D6显示热图。如此，利用热图，不仅能够掌握当前播放的一系列的动作，将来还能掌握作业机3进行的一系列的动作的内容，因此能够在掌握作业机3要进行的一系列的动作的同时，确认工作装置3实际上在作业现场进行的一系列的动作。
另外，第一实施方式的播放装置10从日志信息TL提取表示工作装置3的状态异常的时间段的异常产生时间段，例如在时间滚动条D4上等显示，并且将与该异常产生时间段对应的作业内容利用热图图像D6显示。由此，播放装置10的操作人员能够容易地掌握在工作装置3产生异常的时间段与作业内容的关系。
另外，第一实施方式的播放装置10将二维图的工作装置3的位置的变化播放，并且显示与各时刻对应的作业内容。如此，能够详细地掌握作业现场的工作装置3的位置的变化与作业内容的对应。
另外，将在播放装置10工作装置3产生异常的区间在移动轨迹D31上显示。如此，能够分析在作业现场的哪个位置以及作业内容产生了异常。
其他实施方式的播放装置10接收播放指示并在工作装置3的动画的播放中或播放后，接收播放场面指示。如此，操作人员能够视觉确认在播放装置的显示画面上显示的显示图像D，因此指示希望播放的播放场面变得非常容易。
以上，对第一实施方式的播放装置10以及具备该播放装置10的分析辅助系统1进行了详细说明，但其他实施方式并不限于上述方式。
第一实施方式的日志信息TL的内容(图6～图8)在其他实施方式中并不限定于此。例如在工作装置3不是液压挖掘机而是其他车辆种类的情况下，记录与该车辆种类相应的日志信息TL。其他车辆种类例如为轮式装载机等。
同样，第一实施方式的工作装置模型TM也针对每个工作装置3的车辆种类、机种，备有表示该工作装置3的外形以及操作面板的结构。
另外，对第一实施方式的日志信息TL中包含各时刻的工作装置3的位置、各种可动部的角度(图6)、操作机构的PPC压(图7)以及工作装置3的驱动机构的状态(图8)进行了说明，但其他实施方式中并不限定于此。
其他实施方式的播放装置10作为日志信息TL，也可以仅取得图6的信息。在这种情况下，播放装置10基于该日志信息TL，仅将工作装置3的动作动画播放。另外，作为播放装置10日志信息TL，也可以仅取得图7的信息。在这种情况下，播放装置10能够基于该日志信息TL，使工作装置3的行驶、相对于工作装置3的各种操作杆、行驶杆的输入操作动画播放。
另外，第一实施方式的播放装置10作为工作装置模型TM，对包含外形3D模型M0以及操作面板模型M1这两方，并使两方播放的构成进行了说明，但其他实施方式中并不限于该方式。在其他实施方式的播放装置10在包含外形3D模型M0、操作面板模型M1中的任一方的工作装置模型TM中，也可以仅使外形3D模型M0、操作面板模型M1中的任一方播放。另外，播放装置10也可以是能够通过设定来变更对外形3D模型M0、操作面板模型M1的任一个进行播放的方式。
另外，对第一实施方式的播放装置10对2D图的工作装置3的位置的变化进行播放的构成进行了说明，但在其他实施方式中并不限定于该方式。其他实施方式的播放装置10也可以是不将2D图的工作装置3的位置的变化播放的方式。
另外，对第一实施方式的播放装置10将2D图上的异常产生区间以及时间滚动条上的异常产生时间段进行显示的构成进行了说明，但其他实施方式中并不限定于该方式。其他实施方式的播放装置10也可以是不将2D图上的异常产生区间或时间滚动条上的异常产生时间段显示的方式。
另外，其他实施方式的播放装置10不仅具有通常速度的播放功能，也可以还具有快进、慢放、重复、倒退功能。
例如在通常播放中使用每秒15个角度信息等来播放的情况下，播放部1003通过使用每秒30个角度信息等来播放，或者每秒跳过15个角度信息等来使用，从而实现两倍速的快进功能。3倍速等快进功能也能够通过同样的构成实现。
同样，在通常播放中使用每秒15个角度信息等来播放的情况下，播放部1003通过以两秒播放15个角度信息等而实现1/2倍速的慢放功能。尤其是，通过能够使操作模式图像D5(图12)慢放，而使训练者能够更详细地掌握熟练者的杆操作技术。
同样，在通常播放中，从时戳早开始依次应用于而播放的情况下，通过从时戳晚开始依次应用而播放，从而实现倒退播放。
另外，第一实施方式的操作杆L1、L2、行驶杆R1、R2等操作机构以相对于各操作机构的输入的程度由PPC压表示进行了说明，但在其他实施方式中，并不限于该方式。
例如在其他实施方式的操作机构中，也可以是电气方式的操作机构。在这种情况下，各种操作机构也可以具有电气杆那样的操作部件、电检测操作部件的倾倒量的电位倾斜计那样的工作量传感器。在该实施方式中，工作量传感器的检测数据记录在数据记录器20中。
另外，对第一实施方式的播放装置10利用外形3D模型M0表示工作装置3进行了说明，但在其他实施方式中，不限于该方式。其他实施方式的播放装置10例如也可以用2D模型表示工作装置3。
另外，对第一实施方式的播放装置10将操作者的操作机构的输入的程度通过操作模式D5内所示的图标D501等颜色的变化来表示进行了说明，但其他实施方式不限于该方式。例如其他实施方式的播放装置也可以在描绘图标D501等的位置表示输入的程度。例如在相对于播放装置10操作杆L1的输入的程度小的情况下，在靠近操作图像D50的中心的位置描绘，相对于操作杆L1的输入的程度越大，越在操作图像D50中的，离中心远的位置描绘。
另外，在其他实施方式中，也可以根据在操作图像D50内描绘的颜色的色调的强弱来表示输入程度。
另外，对第一实施方式的播放装置10设置在远离工作装置3的位置，并且经由广域通信网与搭载在工作装置3的数据记录器20连接进行了说明，但其他实施方式不限于该方式。
例如其他实施方式的播放装置10也可以是播放装置10的一部分或全部的构成设置于工作装置3的内部。在这种情况下，数据记录器20也可以不经由广域通信网，而经由工作装置3内部的网络等向播放装置10发送日志信息TL。如此，搭载在工作装置3的操作者能够将在其位置，操作者本身操作的工作装置3的动作进行动画播放来确认。另外，通过向工作装置3的操作者播放作为范本的工作装置3的移动，而能够作为指南使用。
此外，设置在工作装置3的内部的播放装置10也可以经由广域通信网等取得其他工作装置3的日志信息TL。如此，能够对搭载播放装置10的工作装置3以外的工作装置3的状态进行动画播放。
另外，其他实施方式的播放装置10也可以是设置在远离工作装置3的位置，并且将由动画播放处理生成的映像信息发送并显示在工作装置3搭载的监视器上的方式。
另外，其他实施方式中，作为从操作人员接收的播放指示的一方式，也可以指定2D图上的画面所示的工作装置3的位置。在这种情况下，播放装置10将工作装置3存在于由操作人员指定的位置的时刻作为播放开始时刻进行工作装置3的播放。
另外，在其他实施方式中，作为从操作人员接收的播放指示的一方式，例如也可以指定播放期间。例如播放期间也可以是播放开始时刻以及播放终止时刻。在这种情况下，播放装置10进行接收的播放期间的工作装置3的播放。另外，在其他实施方式中，播放终止时刻的指定并不是必须的。例如在其他实施方式中，作为操作人员的播放指示，也可以仅接收播放开始时刻，并从该播放开始时刻播放一定时间的方式，也可以是只要存在日志信息就继续播放的方式，也可以是伴随其他各种事件的产生而播放停止。
此外，取得的日志信息TL(图6～图8)不需要以时间序列依次并列。在这种情况下，播放部1003只要将日志信息TL中的，用于播放的信息按照时间序列应用于工作装置模型TM即可。
在第一实施方式的显示部中，将由推定部1004推定的作业内容作为热图图像D6显示，但在其他实施方式中并不限定于此。例如也可以将推定部1004推定的作业内容仅以文字信息显示。具体而言，也可以使由推定部1004推定的作业内容与播放中的时刻对应而仅以“挖掘装载：挖掘”等文字信息显示。
此外，上述播放装置10的各种处理的过程以程序的形式存储在计算机可读的记录介质中，通过计算机读出并执行该程序而进行上述各种处理。另外，计算机可读的记录介质表示磁盘、光盘、CD-ROM、DVD-ROM、半导体存储器等。另外，也可以将该计算机程序通过通信线路发送到计算机，并使接收该发送的计算机执行该程序。
上述程序也可以是用于实现上述功能的一部分的程序。进一步地，也可以是将上述功能与已记录在计算机系统的程序组合而能够实现的，所谓的差量文件，或差量程序等。
以上，对本发明的几个实施方式进行了说明，但这些实施方式例为提示，并不为了限定发明的范围。这些实施方式能够以其他各种方式实施，在不脱离发明的主旨的范围内能够进行各种省略、替换、变更。这些实施方式或变形包含在发明的范围、主旨内，同样包含在专利权利要求书所记载的发明和等同等范围内。
工业上的可利用性
利用上述播放装置，能够播放作为对象的工作装置的动作，并且能够推定作业内容而准确地分析工作装置的动作。
附图标记说明
1 分析辅助系统
10 播放装置
100 CPU
1000 取得部
1001 接收部
1002 提取部
1003 播放部
1004 推定部
101 存储器
102 显示部
103 操作接收部
104 通信接口
105 储存部
20 数据记录器
3 工作装置
H1～H2 热图
TM 工作装置模型
TL 日志信息
PM1 单位作业预测模型
PM2 要素作业预测模型
R 推定的作业内容

Claims (10)

1.一种播放装置，其特征在于，具备：
取得与时刻建立对应的工作装置的日志信息的取得部；
接收所述工作装置的动作的播放指示的接收部；
在接收到所述播放指示的情况下，将所述日志信息所包含的所述工作装置的角度信息依次应用于工作装置模型，从而播放所述工作装置的动作的播放部；
基于所述日志信息推定所述工作装置的各时刻的作业内容的推定部。
2.如权利请求1所述的播放装置，其特征在于，
所述日志信息包括表示所述工作装置的状态的信息。
3.如权利请求1或权利请求2所述的播放装置，其特征在于，
所述日志信息包括所述工作装置的操作信号的信息。
4.如权利请求1至权利请求3中任一项所述的播放装置，其特征在于，
所述接收部接收指示播放场面的播放场面指示，
所述播放部根据由所述播放场面指示特定的播放场面播放所述工作装置的动作。
5.如权利请求4所述的播放装置，其特征在于，
所述播放场面指示至少包括所述工作装置的种类、作业内容、作业日期和时间、作业位置以及作业者中的任一个信息。
6.如权利请求1至权利请求5中任一项所述的播放装置，其特征在于，
由所述推定部推定的作业内容显示在显示部上。
7.如权利请求6所述的播放装置，其特征在于，
将由所述推定部推定的作业内容与播放中的时刻对应而显示。
8.如权利请求6或权利请求7所述的播放装置，其特征在于，
仅显示由所述推定部推定的作业内容中的，尤度为预定的阈值以上的作业内容。
9.一种分析辅助系统，其特征在于，具备：
取得与时刻建立对应的工作装置的日志信息的取得部；
接收所述工作装置的动作的播放指示的接收部；
在接收到所述播放指示的情况下，根据所述日志信息播放所述工作装置的动作的播放部；
基于所述日志信息推定所述工作装置的各时刻的作业内容的推定部。
10.一种播放方法，其特征在于，具有：
取得与时刻建立对应的工作装置的日志信息的步骤；
接收所述工作装置的动作的播放指示的步骤；
在接收到所述播放指示的情况下，根据所述日志信息播放所述工作装置的动作的步骤；
基于所述日志信息推定所述工作装置的各时刻的作业内容的步骤。
CN201980060278.9A 2018-10-31 2019-10-31 播放装置、分析辅助系统以及播放方法 Pending CN112703525A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018-206069 2018-10-31
JP2018206069A JP7231380B2 (ja) 2018-10-31 2018-10-31 再生装置、分析支援システム及び再生方法
PCT/JP2019/042720 WO2020090954A1 (ja) 2018-10-31 2019-10-31 再生装置、分析支援システム及び再生方法

Publications (1)

Publication Number Publication Date
CN112703525A true CN112703525A (zh) 2021-04-23

Family

ID=70463289

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980060278.9A Pending CN112703525A (zh) 2018-10-31 2019-10-31 播放装置、分析辅助系统以及播放方法

Country Status (5)

Country Link
US (1) US20210312721A1 (zh)
JP (1) JP7231380B2 (zh)
CN (1) CN112703525A (zh)
DE (1) DE112019004086T5 (zh)
WO (1) WO2020090954A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220195704A1 (en) * 2019-04-04 2022-06-23 Komatsu Ltd. System including work machine, computer implemented method, method for producing trained posture estimation model, and training data
JP7276046B2 (ja) * 2019-09-26 2023-05-18 コベルコ建機株式会社 作業機械の動作教示システム

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004252024A (ja) * 2003-02-19 2004-09-09 Komatsu Forklift Co Ltd 作業車両の運転操作シミュレーション装置、及びそれを用いた作業車両の運転操作講習方法
JP2004355080A (ja) * 2003-05-27 2004-12-16 Matsushita Electric Ind Co Ltd 機器管理装置及び機器管理方法
CN1767610A (zh) * 2004-05-07 2006-05-03 索尼株式会社 信息处理装置，信息处理方法及其程序
US20070282577A1 (en) * 2006-05-31 2007-12-06 Caterpillar Inc. Simulation system implementing historical machine data
US20160078340A1 (en) * 2014-09-16 2016-03-17 Caterpillar Inc. Machine Operation Classifier
WO2017042873A1 (ja) * 2015-09-08 2017-03-16 株式会社日立製作所 遠隔操作システムおよび操作支援システム
CN107615278A (zh) * 2015-06-15 2018-01-19 东芝三菱电机产业系统株式会社 显示系统、数据处理装置以及显示用数据生成装置
CN107833406A (zh) * 2016-09-16 2018-03-23 东芝泰格有限公司 信息处理装置及控制方法、终端设备

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3537605B2 (ja) * 1996-08-21 2004-06-14 コベルコ建機株式会社 油圧ショベル
US5999872A (en) * 1996-02-15 1999-12-07 Kabushiki Kaisha Kobe Seiko Sho Control apparatus for hydraulic excavator
JP2017156972A (ja) 2016-03-01 2017-09-07 株式会社小松製作所 評価装置、管理装置、評価システム、及び評価方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004252024A (ja) * 2003-02-19 2004-09-09 Komatsu Forklift Co Ltd 作業車両の運転操作シミュレーション装置、及びそれを用いた作業車両の運転操作講習方法
JP2004355080A (ja) * 2003-05-27 2004-12-16 Matsushita Electric Ind Co Ltd 機器管理装置及び機器管理方法
CN1767610A (zh) * 2004-05-07 2006-05-03 索尼株式会社 信息处理装置，信息处理方法及其程序
US20070282577A1 (en) * 2006-05-31 2007-12-06 Caterpillar Inc. Simulation system implementing historical machine data
US20160078340A1 (en) * 2014-09-16 2016-03-17 Caterpillar Inc. Machine Operation Classifier
CN107615278A (zh) * 2015-06-15 2018-01-19 东芝三菱电机产业系统株式会社 显示系统、数据处理装置以及显示用数据生成装置
WO2017042873A1 (ja) * 2015-09-08 2017-03-16 株式会社日立製作所 遠隔操作システムおよび操作支援システム
CN107833406A (zh) * 2016-09-16 2018-03-23 东芝泰格有限公司 信息处理装置及控制方法、终端设备

Also Published As

Publication number Publication date
WO2020090954A1 (ja) 2020-05-07
DE112019004086T5 (de) 2021-05-20
US20210312721A1 (en) 2021-10-07
JP2020071742A (ja) 2020-05-07
JP7231380B2 (ja) 2023-03-01

Similar Documents

Publication Publication Date Title
US11591776B2 (en) Earth-moving machine sensing and control system
JP2018135681A (ja) 作業機械
JP2023130383A (ja) 再生装置、分析支援システム及び再生方法
CN112703525A (zh) 播放装置、分析辅助系统以及播放方法
WO2019017172A1 (ja) 施工現場管理装置、出力装置、および施工現場の管理方法
US11905685B2 (en) Index-value determination device and index-value determination method
CN111771035B (zh) 作业分析装置以及作业分析方法
CN113474521B (zh) 再生装置、分析支援系统以及再生方法
JP7286287B2 (ja) 作業機械の表示システムおよびその制御方法
JP7197315B2 (ja) ホイールローダの表示システムおよびその制御方法
JP7197314B2 (ja) 作業機械の表示システムおよびその制御方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination