WO2021085608A1 - ショベル管理システム、ショベル用携帯端末、およびショベル用携帯端末に用いられるプログラム - Google Patents

ショベル管理システム、ショベル用携帯端末、およびショベル用携帯端末に用いられるプログラム Download PDF

Info

Publication number
WO2021085608A1
WO2021085608A1 PCT/JP2020/040844 JP2020040844W WO2021085608A1 WO 2021085608 A1 WO2021085608 A1 WO 2021085608A1 JP 2020040844 W JP2020040844 W JP 2020040844W WO 2021085608 A1 WO2021085608 A1 WO 2021085608A1
Authority
WO
WIPO (PCT)
Prior art keywords
excavator
mobile terminal
state
screen
moving image
Prior art date
Application number
PCT/JP2020/040844
Other languages
English (en)
French (fr)
Inventor
壮太郎 尾藤
Original Assignee
住友建機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 住友建機株式会社 filed Critical 住友建機株式会社
Priority to EP20880891.5A priority Critical patent/EP4053347A4/en
Priority to CN202080076683.2A priority patent/CN114729522A/zh
Priority to KR1020227014924A priority patent/KR20220091495A/ko
Priority to JP2021553724A priority patent/JPWO2021085608A1/ja
Publication of WO2021085608A1 publication Critical patent/WO2021085608A1/ja
Priority to US17/660,893 priority patent/US20220251806A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/2025Particular purposes of control systems not otherwise provided for
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/36Component parts
    • E02F3/42Drives for dippers, buckets, dipper-arms or bucket-arms
    • E02F3/43Control of dipper or bucket position; Control of sequence of drive operations
    • E02F3/435Control of dipper or bucket position; Control of sequence of drive operations for dipper-arms, backhoes or the like
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/24Safety devices, e.g. for preventing overload
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/261Surveying the work-site to be treated
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/267Diagnosing or detecting failure of vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/02Agriculture; Fishing; Mining
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/08Construction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2200/00Type of vehicle
    • B60Y2200/40Special vehicles
    • B60Y2200/41Construction vehicles, e.g. graders, excavators
    • B60Y2200/412Excavators
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/2025Particular purposes of control systems not otherwise provided for
    • E02F9/205Remotely operated machines, e.g. unmanned vehicles
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/22Hydraulic or pneumatic drives
    • E02F9/2221Control of flow rate; Load sensing arrangements
    • E02F9/2225Control of flow rate; Load sensing arrangements using pressure-compensating valves
    • E02F9/2228Control of flow rate; Load sensing arrangements using pressure-compensating valves including an electronic controller
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/22Hydraulic or pneumatic drives
    • E02F9/2278Hydraulic circuits
    • E02F9/2285Pilot-operated systems
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/22Hydraulic or pneumatic drives
    • E02F9/2278Hydraulic circuits
    • E02F9/2292Systems with two or more pumps
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/22Hydraulic or pneumatic drives
    • E02F9/2278Hydraulic circuits
    • E02F9/2296Systems with a variable displacement pump

Definitions

  • This disclosure relates to an excavator management system, a mobile terminal for excavators, and a program used for the mobile terminal for excavators.
  • Patent Document 1 among the image data of the hydraulic excavator imaged by the image pickup device, the image data when the detection value detected by the sensor is determined to be abnormal is stored in the storage device. The technology that makes it possible to confirm with the output device is disclosed.
  • the prior art allows users such as operators and managers to check only the images in the period before and after the time when the abnormality is determined. That is, the prior art allows the user to check the image only when an abnormality occurs. Further, in the prior art, the user cannot confirm the operation data of the excavator on the mobile terminal at the work site.
  • the purpose of this disclosure is to make it possible to confirm the state when the excavator was operating.
  • the shovel management system includes a shovel for acquiring state quantity information representing the state quantity of the shovel detected by a plurality of sensors and a mobile terminal, and the mobile terminal requests transmission of the status quantity information. It is an excavator management system having a communication control unit for transmitting a request signal for the excavator to the excavator.
  • FIG. 2 is a second diagram showing an example of a playback screen of diagnostic moving image data.
  • FIG. 3 is a third diagram showing an example of a playback screen of diagnostic moving image data.
  • FIG. 4 is a fourth diagram showing an example of a playback screen of diagnostic moving image data. It is the first figure which shows an example of the display example of the evaluation result. It is a second figure which shows an example of the display example of the evaluation result. It is a third figure which shows an example of the display example of the evaluation result.
  • FIG. 1 is a schematic view showing a configuration example of an excavator management system according to an embodiment.
  • the excavator management system SYS shown in FIG. 1 is a system that manages the state amount of an excavator by using a mobile terminal 200 (an example of a “mobile terminal for excavator”).
  • the excavator management system SYS includes an excavator 100 and a mobile terminal 200.
  • the excavator 100 includes a lower traveling body 1, a swivel mechanism 2, an upper swivel body 3, a boom 4, an arm 5, a bucket 6, a boom cylinder 7, an arm cylinder 8, a bucket cylinder 9, a cabin 10, and an engine 11.
  • the upper swivel body 3 is mounted on the lower traveling body 1 so as to be swivelable via the swivel mechanism 2.
  • the boom 4 is attached to the upper swing body 3.
  • the arm 5 is attached to the tip of the boom 4.
  • the bucket 6 is attached to the tip of the arm 5.
  • the boom 4, arm 5, and bucket 6 form an excavation attachment.
  • the boom 4, arm 5, and bucket 6 are hydraulically driven by the boom cylinder 7, arm cylinder 8, and bucket cylinder 9, respectively.
  • the cabin 10 and the engine 11 are mounted on the upper swing body 3.
  • the excavator 100 includes a transmission device S1, a reception device S2, a positioning device S3, a posture detection device S4, a direction detection device S5, a camera S6, a microphone S7, an object detection device S8, and a display device 45.
  • the transmission device S1 transmits information to an external device of the excavator 100 by wireless communication.
  • the transmission device S1 transmits state quantity information representing the state quantity of the excavator 100 to the mobile terminal 200 in response to a request from the mobile terminal 200.
  • the state quantity information represents a plurality of state quantities continuously acquired by the sensor at regular time intervals in a time series. More specifically, the state quantity information of the present embodiment includes values output from each of the attitude detection device S4, the orientation detection device S5, the camera S6 as the peripheral management device, the microphone S8, and the object detection device S8.
  • the transmission device S1 of the present embodiment may transmit operation data including state quantity information to the mobile terminal 200.
  • the operation data includes state quantity information, setting condition information indicating various setting conditions set on the excavator 100, a machine number for specifying the excavator 100, and the like.
  • the receiving device S2 receives information from an external device of the excavator 100 by wireless communication. For example, the receiving device S2 receives a request signal transmitted from the mobile terminal 200 for requesting the state quantity information representing the state quantity of the excavator 100.
  • the positioning device S3 acquires information regarding the position of the excavator 100.
  • the positioning device S3 is a GNSS (GPS) receiver, and can measure the latitude, longitude, and altitude of the position where the excavator 100 exists.
  • GPS GNSS
  • the posture detection device S4 detects the posture of the excavation attachment included in the excavator 100.
  • the boom angle sensor that detects the boom angle the arm angle sensor that detects the arm angle
  • the bucket angle sensor that detects the bucket angle and the inclination angle of the upper swivel body 3 are detected.
  • An aircraft tilt sensor is used.
  • the boom angle sensor may include, for example, a rotary encoder, an acceleration sensor, a 6-axis sensor, an IMU (Inertial Measurement Unit), and the like, and the same applies to the arm angle sensor, bucket angle sensor, and body tilt sensor. is there.
  • the detection signal detected by the attitude detection device S4 is taken into the controller 30.
  • the orientation detection device S5 detects the orientation of the excavator 100.
  • the orientation detection device S5 for example, a geomagnetic sensor, a resolver or encoder related to the swivel shaft of the swivel mechanism 2, a gyro sensor, or the like is used. In this way, the toe position and the back position of the bucket can be calculated as the work part.
  • the reference coordinate system used for the position information of the work site for example, the world geodetic system may be used.
  • the camera S6 as a peripheral monitoring device is configured to detect an object existing within a predetermined distance around the excavator 100.
  • Objects include, for example, people, animals, vehicles, construction machinery, buildings, walls, fences, holes, and the like.
  • Peripheral monitoring devices include, for example, ultrasonic sensors, millimeter wave radars, stereo cameras, LIDAR, range image sensors, infrared sensors and the like.
  • the camera S6 is shown as a peripheral monitoring device.
  • the camera S6 is provided on the upper swivel body 3 and captures an image of the surroundings of the excavator 100.
  • the excavator 100 of the present embodiment includes a plurality of cameras S6, and the plurality of cameras S6 can capture images in a plurality of directions (for example, front, rear, right side, and left side) of the excavator 100.
  • the microphone S7 is provided on the upper swivel body 3 and acquires the operating sound emitted by the excavator 100.
  • the microphone S7 may be provided at each of a plurality of locations on the upper swing body 3.
  • the object detection device S8 is configured to detect an object existing around the excavator 100. Further, the object detection device S8 may be configured to calculate the distance from the object detection device S8 or the excavator 100 to the recognized object.
  • Objects include, for example, people, animals, vehicles, construction machinery, structures, holes and the like.
  • the object detection device S8 includes, for example, an ultrasonic sensor, a millimeter wave radar, a stereo camera, a LIDAR, a range image sensor, an infrared sensor, and the like.
  • the object detection device S8 is attached to the front end of the upper surface of the cabin 10, the rear end of the upper surface of the upper swivel body 3, the left end of the upper surface of the upper swivel body 3, and the right end of the upper surface of the upper swivel body 3.
  • the object detection device S8 may be configured to detect a predetermined object in a predetermined area set around the excavator 100. For example, it may be configured to distinguish between a person and a non-human object.
  • the display device 45 is arranged near the driver's seat in the cabin 10 and displays various information. For example, the display device 45 displays an image captured by the camera S6. The display device 45 can also display a composite image of a plurality of images captured by the plurality of cameras S6. In addition, the display device 45 can also display a composite image that has undergone various image processing such as viewpoint conversion processing.
  • the mobile terminal 200 is an electronic device carried by a user.
  • a smartphone for example, a smartphone, a video camera, a mobile phone, a notebook computer, a tablet terminal, smart glasses and the like are used.
  • a smartphone is used as the mobile terminal 200.
  • the mobile terminal 200 captures a moving image in a state where the excavator 100 is operating. Further, the mobile terminal 200 of the present embodiment transmits a request for acquiring state quantity information to the excavator 100, and receives the state quantity information from the excavator 100.
  • the mobile terminal 200 synchronizes the timing of starting the imaging of the moving image with the timing of receiving the state amount information from the excavator 100, and associates the moving image data indicating the captured moving image with the state amount information. Hold as status record data.
  • the mobile terminal 200 of the present embodiment may record the voice input at the same time as the imaging of the moving image by the voice input / output device 203. Further, the voice data indicating the recorded voice may be held in association with the moving image data and the state quantity information.
  • the state recording data includes operation data including state quantity information and design condition information of the excavator 100, moving image data of the operation of the excavator 100, and audio data recorded when the excavator 100 operates. including.
  • the state recording data includes the state quantity information, the moving image of the excavator 100, the sound during the acquisition of the moving image, and the image data indicating the image to be included.
  • the state recording data of the present embodiment is information including state amount information when the excavator 100 is operating, setting condition information, moving image data of the operating excavator 100, and audio data, and is information including the excavator 100. It can be said that it is information indicating the state when was operating.
  • the moving image data may include the audio data recorded by the audio input / output device 203.
  • the moving image data is data including the audio data input from the audio input / output device 203, but the moving image data and the audio data may be managed as separate data. Details of the mobile terminal 200 will be described later.
  • FIG. 2 is a diagram showing a configuration example of a hydraulic system mounted on an excavator.
  • FIG. 2 shows the mechanical power transmission system, hydraulic oil line, pilot line, and electrical control system as double lines, solid lines, broken lines, and dotted lines, respectively.
  • the hydraulic system of the excavator 100 mainly includes an engine 11, a regulator 13, a main pump 14, a pilot pump 15, a control valve 17, an operating device 26, a discharge pressure sensor 28, an operating pressure sensor 29, a controller 30, and the like.
  • the hydraulic system circulates hydraulic oil from the main pump 14 driven by the engine 11 to the hydraulic oil tank via the center bypass pipeline 40 or the parallel pipeline 42.
  • the engine 11 is a drive source for the excavator 100.
  • the engine 11 is, for example, a diesel engine that operates so as to maintain a predetermined rotation speed.
  • the output shaft of the engine 11 is connected to each input shaft of the main pump 14 and the pilot pump 15.
  • the main pump 14 is configured to supply hydraulic oil to the control valve 17 via the hydraulic oil line.
  • the main pump 14 is a swash plate type variable displacement hydraulic pump.
  • the regulator 13 is configured to control the discharge amount (push-out volume) of the main pump 14.
  • the regulator 13 controls the discharge amount (push-out volume) of the main pump 14 by adjusting the swash plate tilt angle of the main pump 14 in response to a control command from the controller 30.
  • the pilot pump 15 is configured to supply hydraulic oil to the flood control device including the operating device 26 via the pilot line.
  • the pilot pump 15 is a fixed-capacity hydraulic pump.
  • the pilot pump 15 may be omitted.
  • the function carried out by the pilot pump 15 may be realized by the main pump 14. That is, even if the main pump 14 has a function of supplying the hydraulic oil to the operating device 26 and the like after reducing the pressure of the hydraulic oil by a throttle or the like, in addition to the function of supplying the hydraulic oil to the control valve 17. Good.
  • the control valve 17 is configured to control the flow of hydraulic oil in the hydraulic system.
  • the control valve 17 includes control valves 171 to 176.
  • the control valve 175 includes a control valve 175L and a control valve 175R
  • the control valve 176 includes a control valve 176L and a control valve 176R.
  • the control valve 17 can selectively supply the hydraulic oil discharged from the main pump 14 to one or a plurality of hydraulic actuators through the control valves 171 to 176.
  • the control valves 171 to 176 control the flow rate of the hydraulic oil flowing from the main pump 14 to the hydraulic actuator and the flow rate of the hydraulic oil flowing from the hydraulic actuator to the hydraulic oil tank.
  • the hydraulic actuator includes a boom cylinder 7, an arm cylinder 8, a bucket cylinder 9, a left traveling hydraulic motor 2ML, a right traveling hydraulic motor 2MR, and a turning hydraulic motor 2A.
  • the operating device 26 is a device used by the operator to operate the actuator.
  • Actuators include at least one of a hydraulic actuator and an electric actuator.
  • the operating device 26 supplies the hydraulic oil discharged by the pilot pump 15 to the pilot port of the corresponding control valve in the control valve 17 via the pilot line.
  • the pressure of the hydraulic oil (pilot pressure) supplied to each of the pilot ports is a pressure corresponding to the operation direction and the operation amount of the lever or pedal (not shown) of the operation device 26 corresponding to each of the hydraulic actuators.
  • the operating device 26 may be an electrically controlled type instead of the pilot pressure type as described above.
  • the control valve in the control valve 17 may be an electromagnetic solenoid type spool valve.
  • the discharge pressure sensor 28 is configured to detect the discharge pressure of the main pump 14. In the present embodiment, the discharge pressure sensor 28 outputs the detected value to the controller 30.
  • the operating pressure sensor 29 is configured to detect the content of the operation of the operating device 26 by the operator.
  • the operation pressure sensor 29 detects the operation direction and operation amount of the lever or pedal of the operation device 26 corresponding to each of the actuators in the form of pressure (operation pressure), and the detected value is used as operation data for the controller. Output for 30.
  • the content of the operation of the operating device 26 may be detected by using a sensor other than the operating pressure sensor.
  • the main pump 14 includes a left main pump 14L and a right main pump 14R.
  • the left main pump 14L is configured to circulate hydraulic oil to the hydraulic oil tank via the left center bypass line 40L or the left parallel line 42L.
  • the right main pump 14R is configured to circulate hydraulic oil to the hydraulic oil tank via the right center bypass line 40R or the right parallel line 42R.
  • the left center bypass pipeline 40L is a hydraulic oil line that passes through the control valves 171, 173, 175L, and 176L arranged in the control valve 17.
  • the right center bypass line 40R is a hydraulic oil line passing through control valves 172, 174, 175R, and 176R arranged in the control valve 17.
  • the control valve 171 supplies the hydraulic oil discharged by the left main pump 14L to the left traveling hydraulic motor 2ML, and discharges the hydraulic oil discharged by the left traveling hydraulic motor 2ML to the hydraulic oil tank.
  • a spool valve that switches the flow.
  • the control valve 172 supplies the hydraulic oil discharged by the right main pump 14R to the right traveling hydraulic motor 2MR, and discharges the hydraulic oil discharged by the right traveling hydraulic motor 2MR to the hydraulic oil tank.
  • a spool valve that switches the flow.
  • the control valve 173 supplies the hydraulic oil discharged by the left main pump 14L to the swivel hydraulic motor 2A, and discharges the hydraulic oil discharged by the swivel hydraulic motor 2A to the hydraulic oil tank. It is a spool valve that switches.
  • the control valve 174 is a spool valve that supplies the hydraulic oil discharged by the right main pump 14R to the bucket cylinder 9 and switches the flow of the hydraulic oil in order to discharge the hydraulic oil in the bucket cylinder 9 to the hydraulic oil tank. ..
  • the control valve 175L is a spool valve that switches the flow of hydraulic oil in order to supply the hydraulic oil discharged by the left main pump 14L to the boom cylinder 7.
  • the control valve 175R is a spool valve that supplies the hydraulic oil discharged by the right main pump 14R to the boom cylinder 7 and switches the flow of the hydraulic oil in order to discharge the hydraulic oil in the boom cylinder 7 to the hydraulic oil tank. ..
  • the control valve 176L is a spool valve that supplies the hydraulic oil discharged by the left main pump 14L to the arm cylinder 8 and switches the flow of the hydraulic oil in order to discharge the hydraulic oil in the arm cylinder 8 to the hydraulic oil tank. ..
  • the control valve 176R is a spool valve that supplies the hydraulic oil discharged by the right main pump 14R to the arm cylinder 8 and switches the flow of the hydraulic oil in order to discharge the hydraulic oil in the arm cylinder 8 to the hydraulic oil tank. ..
  • the left parallel pipeline 42L is a hydraulic oil line parallel to the left center bypass pipeline 40L.
  • the left parallel pipeline 42L supplies hydraulic oil to the downstream control valve when the flow of hydraulic oil through the left center bypass pipeline 40L is restricted or blocked by any of the control valves 171, 173, or 175L. it can.
  • the right parallel pipeline 42R is a hydraulic oil line parallel to the right center bypass pipeline 40R.
  • the right parallel pipeline 42R supplies hydraulic oil to the control valve further downstream when the flow of hydraulic oil through the right center bypass pipeline 40R is restricted or blocked by any of the control valves 172, 174, or 175R. it can.
  • the regulator 13 includes a left regulator 13L and a right regulator 13R.
  • the left regulator 13L controls the discharge amount of the left main pump 14L by adjusting the swash plate tilt angle of the left main pump 14L according to the discharge pressure of the left main pump 14L.
  • the left regulator 13L reduces the discharge amount by adjusting the swash plate tilt angle of the left main pump 14L in response to an increase in the discharge pressure of the left main pump 14L, for example.
  • the operating device 26 includes a left operating lever 26L, a right operating lever 26R, and a traveling lever 26D.
  • the traveling lever 26D includes a left traveling lever 26DL and a right traveling lever 26DR.
  • the left operating lever 26L is used for turning and operating the arm 5.
  • the hydraulic oil discharged by the pilot pump 15 is used to apply a control pressure according to the lever operating amount to the pilot port of the control valve 176.
  • the hydraulic oil discharged from the pilot pump 15 is used to apply a control pressure according to the lever operation amount to the pilot port of the control valve 173.
  • the hydraulic oil is introduced into the right pilot port of the control valve 176L and the hydraulic oil is introduced into the left pilot port of the control valve 176R. ..
  • the hydraulic oil is introduced into the left pilot port of the control valve 176L and the hydraulic oil is introduced into the right pilot port of the control valve 176R.
  • the left operating lever 26L causes hydraulic oil to be introduced into the left pilot port of the control valve 173 when operated in the left turning direction, and the right pilot port of the control valve 173 when operated in the right turning direction. Introduce hydraulic oil.
  • the right operating lever 26R is used for operating the boom 4 and the bucket 6.
  • the hydraulic oil discharged by the pilot pump 15 is used to apply a control pressure according to the lever operating amount to the pilot port of the control valve 175.
  • the hydraulic oil discharged from the pilot pump 15 is used to apply a control pressure according to the lever operation amount to the pilot port of the control valve 174.
  • hydraulic oil is introduced into the right pilot port of the control valve 175R.
  • the hydraulic oil is introduced into the right pilot port of the control valve 175L and the hydraulic oil is introduced into the left pilot port of the control valve 175R.
  • the right operating lever 26R is operated in the bucket closing direction, hydraulic oil is introduced into the left pilot port of the control valve 174, and when operated in the bucket opening direction, the right operating lever 26R is introduced into the right pilot port of the control valve 174. Introduce hydraulic oil.
  • the traveling lever 26D is used to operate the crawler 1C.
  • the left traveling lever 26DL is used for operating the left crawler 1CL.
  • the left travel lever 26DL may be configured to interlock with the left travel pedal.
  • the hydraulic oil discharged by the pilot pump 15 is used to apply a control pressure according to the lever operating amount to the pilot port of the control valve 171.
  • the right traveling lever 26DR is used to operate the right crawler 1CR.
  • the right traveling lever 26DR may be configured to interlock with the right traveling pedal.
  • the hydraulic oil discharged by the pilot pump 15 is used to apply a control pressure according to the lever operating amount to the pilot port of the control valve 172.
  • the discharge pressure sensor 28 includes a discharge pressure sensor 28L and a discharge pressure sensor 28R.
  • the discharge pressure sensor 28L detects the discharge pressure of the left main pump 14L and outputs the detected value to the controller 30.
  • the discharge pressure sensor 28R detects the discharge pressure of the right main pump 14R and outputs the detected value to the controller 30.
  • the operating pressure sensor 29 includes the operating pressure sensors 29LA, 29LB, 29RA, 29RB, 29DL, and 29DR.
  • the operating pressure sensor 29LA detects the content of the operator's operation of the left operating lever 26L in the front-rear direction in the form of pressure, and outputs the detected value to the controller 30.
  • the contents of the operation are, for example, the lever operation direction and the lever operation amount (lever operation angle).
  • the operating pressure sensor 29LB detects the content of the operator's operation of the left operating lever 26L in the left-right direction in the form of pressure, and outputs the detected value to the controller 30.
  • the operating pressure sensor 29RA detects the content of the operator's operation of the right operating lever 26R in the front-rear direction in the form of pressure, and outputs the detected value to the controller 30.
  • the operating pressure sensor 29RB detects the content of the operator's operation of the right operating lever 26R in the left-right direction in the form of pressure, and outputs the detected value to the controller 30.
  • the operating pressure sensor 29DL detects the content of the operator's operation of the left traveling lever 26DL in the front-rear direction in the form of pressure, and outputs the detected value to the controller 30.
  • the operating pressure sensor 29DR detects the content of the operator's operation of the right traveling lever 26DR in the front-rear direction in the form of pressure, and outputs the detected value to the controller 30.
  • the controller 30 receives the output of the operating pressure sensor 29, outputs a control command to the regulator 13 as necessary, and changes the discharge amount of the main pump 14. Further, the controller 30 receives the output of the control pressure sensor 19 provided upstream of the throttle 18, outputs a control command to the regulator 13 as needed, and changes the discharge amount of the main pump 14.
  • the diaphragm 18 includes a left diaphragm 18L and a right diaphragm 18R, and the control pressure sensor 19 includes a left control pressure sensor 19L and a right control pressure sensor 19R.
  • a left throttle 18L is arranged between the most downstream control valve 176L and the hydraulic oil tank. Therefore, the flow of hydraulic oil discharged by the left main pump 14L is limited by the left throttle 18L. Then, the left throttle 18L generates a control pressure for controlling the left regulator 13L.
  • the left control pressure sensor 19L is a sensor for detecting this control pressure, and outputs the detected value to the controller 30.
  • the controller 30 controls the discharge amount of the left main pump 14L by adjusting the swash plate tilt angle of the left main pump 14L according to this control pressure. The controller 30 decreases the discharge amount of the left main pump 14L as the control pressure is larger, and increases the discharge amount of the left main pump 14L as the control pressure is smaller.
  • the discharge amount of the right main pump 14R is also controlled in the same manner.
  • the hydraulic oil discharged by the left main pump 14L passes through the left center bypass pipeline 40L to the left. Aperture reaches 18L. Then, the flow of hydraulic oil discharged by the left main pump 14L increases the control pressure generated upstream of the left throttle 18L. As a result, the controller 30 reduces the discharge amount of the left main pump 14L to the allowable minimum discharge amount, and the pressure loss (pumping loss) when the hydraulic oil discharged by the left main pump 14L passes through the left center bypass line 40L. Suppress.
  • the hydraulic oil discharged from the left main pump 14L flows into the hydraulic actuator to be operated via the control valve corresponding to the hydraulic actuator to be operated. Then, the flow of the hydraulic oil discharged by the left main pump 14L reduces or eliminates the amount reaching the left throttle 18L, and lowers the control pressure generated upstream of the left throttle 18L. As a result, the controller 30 increases the discharge amount of the left main pump 14L, causes sufficient hydraulic oil to flow into the operation target hydraulic actuator, and ensures the drive of the operation target hydraulic actuator. The controller 30 also controls the discharge amount of the right main pump 14R in the same manner.
  • the controller 30 includes a pressure sensor 7A that detects the pressure in the rod-side oil chamber of the boom cylinder 7, a pressure sensor 7B that detects the pressure in the bottom-side oil chamber of the boom cylinder 7, and a rod-side oil chamber of the arm cylinder 8.
  • the pressure sensor 8A for detecting the pressure of the arm cylinder 8, the pressure sensor 8B for detecting the pressure in the oil chamber on the bottom side of the arm cylinder 8, the pressure sensor 9A for detecting the pressure in the oil chamber on the rod side of the bucket cylinder 9, and the bucket cylinder 9.
  • Each detection value with the pressure sensor 9B that detects the pressure in the bottom oil chamber is received. Thereby, the controller 30 can detect the pressures in the rod side oil chamber and the bottom side oil chamber of each of the boom cylinder 7, the arm cylinder 8, and the bucket cylinder 9.
  • the controller 30 sets the detection values of the pressure sensor 2AA for detecting the oil pressure when the turning hydraulic motor 2A turns to the left and the pressure sensor 2AB for detecting the oil pressure when the turning hydraulic motor 2A turns to the right. Receive. As a result, the controller 30 can detect the hydraulic pressure of the turning hydraulic motor 2A when turning left and turning right.
  • the hydraulic system of FIG. 2 can suppress wasteful energy consumption related to the main pump 14 in the standby state. Wasted energy consumption includes pumping loss generated in the center bypass line 40 by the hydraulic oil discharged from the main pump 14. Further, in the hydraulic system of FIG. 2, when the hydraulic actuator is operated, the necessary and sufficient hydraulic oil can be reliably supplied from the main pump 14 to the hydraulic actuator to be operated.
  • the controller 30 includes an acquisition unit 31, a reception control unit 32, and a transmission control unit 33.
  • the acquisition unit 31 acquires the detection values of each of the plurality of sensors included in the excavator 100 as state quantity information representing the state quantity of the excavator 100.
  • the state amount information acquired by the acquisition unit 31 includes, for example, hydraulic oil temperature, engine water temperature, engine fuel injection amount, boom cylinder 7 oil pressure, arm cylinder 8 oil pressure, bucket cylinder 9 oil pressure, and turning hydraulic motor 2A.
  • the present invention is not limited to these, and the state quantity information acquired by the acquisition unit 31 may be other information as long as it is information detected by the sensor included in the excavator 100.
  • the acquisition unit 31 is realized by the memory included in the controller 30.
  • the acquisition unit 31 acquires setting condition information indicating various setting conditions set in the excavator 100, information indicating a machine number for specifying the excavator 100, and the like. That is, the acquisition unit 31 acquires the operation data of the excavator 100.
  • the reception control unit 32 receives a request signal (request signal for requesting transmission of state quantity information) transmitted from the mobile terminal 200 via wireless communication with the mobile terminal 200 by the receiving device S2.
  • a request signal (request signal for requesting transmission of state quantity information) transmitted from the mobile terminal 200 via wireless communication with the mobile terminal 200 by the receiving device S2.
  • the reception control unit 32 is realized by the CPU executing a program in the controller 30.
  • the transmission control unit 33 transmits the operation data acquired by the acquisition unit 31 to the mobile terminal 200 via wireless communication with the mobile terminal 200 by the transmission device S1.
  • the transmission control unit 33 is realized by the CPU executing a program in the controller 30.
  • FIG. 3 is a diagram schematically showing an example of the configuration of the electric operation system of the excavator.
  • a boom operation system for moving the boom 4 up and down will be described as an example.
  • the electric operation system includes a traveling operation system for moving the lower traveling body 1 forward and backward, a turning operation system for turning the upper turning body 3, an arm operating system for opening and closing the arm 5, and a bucket. Similarly, it can be applied to a bucket operation system for opening and closing 6.
  • the electric operation system shown in FIG. 3 includes a boom operation lever 26A as an electric operation lever, a pilot pump 15, a pilot pressure actuated control valve 17, a proportional valve 31AL for boom raising operation, and a boom lowering operation.
  • a proportional valve 31AR for use, a controller 30, a gate lock lever 60, and a gate lock valve 62 are provided.
  • the boom operation lever 26A (operation signal generator), which is an example of the operation device, is provided with sensors such as an encoder and a potentiometer that can detect the operation amount (tilt amount) and the tilt direction.
  • the operation signal (electrical signal) corresponding to the operation of the boom operation lever 26A detected by the sensor of the boom operation lever 26A is taken into the controller 30.
  • the proportional valve 31AL is provided in the pilot line that supplies hydraulic oil from the pilot pump 15 to the boom raising side pilot port of the control valve 17 (see the control valves 175L and 175R shown in FIG. 2).
  • the proportional valve 31AL is a solenoid valve whose opening degree can be adjusted, and the opening degree of the proportional valve 31AL is controlled according to a boom raising operation signal (electric signal) which is a control signal from the controller 30.
  • the proportional valve 31AL By controlling the opening degree of the proportional valve 31AL, the pilot pressure as a boom raising operation signal (pressure signal) acting on the boom raising side pilot port is controlled.
  • the proportional valve 31AR is provided in the pilot line that supplies hydraulic oil from the pilot pump 15 to the boom lowering side pilot port of the control valve 17 (see control valves 175L and 175R shown in FIG. 2).
  • the proportional valve 31AR is a solenoid valve whose opening degree can be adjusted, and the opening degree of the proportional valve 31AR is controlled according to a boom lowering operation signal (electric signal) which is a control signal from the controller 30.
  • the pilot pressure as a boom lowering operation signal (pressure signal) acting on the boom lowering side pilot port is controlled.
  • the controller 30 outputs a boom raising operation signal (electric signal) and a boom lowering operation signal (electric signal) that control the opening degree of the proportional valves 31AL and 31AR.
  • the controller 30 controls the flow rate and the flow direction of the hydraulic oil supplied from the main pumps 14L and 14R to the boom cylinder 7 via the proportional valves 31AL and 31AR and the control valves 17 (control valves 175L and 175R). Therefore, the operation of the boom 4 can be controlled.
  • the controller 30 when the excavator 100 is manually operated, the controller 30 generates a boom raising operation signal (electric signal) or a boom lowering operation signal (electric signal) according to the operation signal (electric signal) of the boom operation lever 26A. Output. Further, for example, when the excavator 100 is automatically controlled, the controller 30 generates and outputs a boom raising operation signal (electric signal) or a boom lowering operation signal (electric signal) based on a set program or the like.
  • the gate lock lever 60 is provided near the entrance / exit in the cabin 10.
  • the gate lock lever 60 is provided so as to be swingable between the unlocked state and the locked state. The operator pulls up the gate lock lever 60 to make it substantially horizontal to unlock the gate lock lever 60, and pushes down the gate lock lever 60 to lock the gate lock lever 60.
  • the gate lock lever 60 blocks the entrance / exit of the cabin 10 to restrict the operator from exiting the cabin 10.
  • the gate lock lever 60 opens the entrance / exit of the cabin 10 to allow the operator to exit the cabin 10.
  • the limit switch 61 is a switch that turns ON (energized) when the gate lock lever 60 is unlocked and turns OFF (cuts off) when the gate lock lever 60 is locked.
  • the gate lock valve 62 is an on-off valve provided in the pilot line between the pilot pump 15 and the proportional valve 31 (31AL, 31AR).
  • the gate lock valve 62 is, for example, a solenoid valve that opens when energized and closes when not energized.
  • a limit switch 61 is arranged in the power supply circuit of the gate lock valve 62. As a result, when the limit switch 61 is turned on, the gate lock valve 62 is opened. When the limit switch 61 is OFF, the gate lock valve 62 is closed. That is, the gate lock valve 62 opens when the gate lock lever 60 is in the unlocked state. On the other hand, when the gate lock lever 60 is locked, the gate lock valve 62 closes.
  • the lock state detection sensor 63 detects whether the gate lock lever 60 is in the unlocked state or the locked state.
  • the lock state detection sensor 63 is a voltage sensor (or current sensor) provided in an electric circuit connecting the gate lock valve 62 and the limit switch 61, and detects ON / OFF of the limit switch 61. Detects the unlocked / locked state of the gate lock lever 60. The detection result is output to the controller 30.
  • the lock state detection sensor 63 may be configured to detect the unlocked state / locked state of the gate lock lever 60 by directly detecting the position of the lever.
  • FIG. 4 is a diagram showing an example of the hardware configuration of the mobile terminal.
  • the mobile terminal 200 of the present embodiment includes an operation input device 201, a display device 202, a voice input / output device 203, an auxiliary storage device 204, a memory device 205, an arithmetic processing unit 206, a communication device 207, and an image pickup device 208, each of which includes an operation input device 201, a display device 202, a voice input / output device 203, an auxiliary storage device 204, a memory device 205, an arithmetic processing unit 206, a communication device 207, and an image pickup device 208. It is a computer connected by bus B or the like.
  • the operation input device 201 receives an operation input from the user.
  • the operation input device 201 accepts operation inputs such as video recording, recording stop, playback, playback stop, save, and transmission.
  • a touch panel provided on the display panel of the display device 202 may be used as an example of the operation input device 201.
  • the display device 202 displays various information.
  • a liquid crystal display, an organic EL display, or the like is used.
  • the display device 202 displays a moving image of the excavator 100 imaged by the image pickup device 208, state quantity information of the excavator 100 received by the communication device 207, and the like.
  • the audio input / output device 203 is realized by, for example, a microphone and a speaker.
  • the audio input / output device 203 outputs audio to the outside. For example, when the moving image of the excavator 100 is played back, the audio input / output device 203 outputs the sound synchronized with the moving image (that is, the operating sound of the excavator 100).
  • the voice input / output device 203 inputs voice from the outside.
  • the audio input / output device 203 acquires audio synchronized with the moving image (that is, the operating sound of the excavator 100) while the moving image of the excavator 100 is being imaged by the imaging device 208.
  • the auxiliary storage device 204 stores various programs (applications) installed in the mobile terminal 200, and also stores various necessary files, data, etc. by the mobile terminal 200.
  • the memory device 205 reads and stores a program for realizing the function of the mobile terminal 200, which will be described later, from the auxiliary storage device 204 when the program installed in the mobile terminal 200 is started.
  • the arithmetic processing unit 206 realizes various processes as described later by reading and executing the program stored in the memory device 205.
  • the communication device 207 is an example of a “transmitter” and a “receiver”, and is used between the mobile terminal 200 and an external device by a predetermined wireless communication method (for example, Wi-Fi, Bluetooth®, etc.). Send and receive information with.
  • a predetermined wireless communication method for example, Wi-Fi, Bluetooth®, etc.
  • the image pickup device 208 is a camera that captures an image. Since the image pickup device 208 is attached to the back surface of the mobile terminal 200, for example, the rear side of the mobile terminal 200 can be imaged.
  • the image pickup apparatus 208 can capture both still images and moving images. For example, the image pickup device 208 is used to capture a moving image of the excavator 100.
  • FIG. 5 is a diagram illustrating the function of the mobile terminal.
  • the mobile terminal 200 of the present embodiment has an input reception 210, a communication control unit 220, a display control unit 230, an image pickup control unit 240, a storage unit 250, a reproduction unit 260, and a storage unit 270.
  • the input reception 210, the communication control unit 220, the display control unit 230, the image pickup control unit 240, and the storage unit 250 read and execute the programs stored in the arithmetic processing unit 206, the auxiliary storage device 204, the memory device 206, and the like. It will be realized.
  • the function of the storage unit 270 is realized by a storage device such as the auxiliary storage device 204 or the memory device 205.
  • the input reception 210 receives various inputs to the mobile terminal 200. Specifically, the input reception 210 receives an input of a request signal requesting acquisition of operation data for the excavator 100 and an input of an operation instruction to the image pickup apparatus 208.
  • the communication control unit 220 controls the communication device 207 according to the input received by the input reception 210, and communicates with the external device. Specifically, the communication control unit 220 determines whether or not the excavator 100 and the mobile terminal 200 can communicate with each other according to the communication status of the communication device 207.
  • the display control unit 230 controls the display on the display device 202. Specifically, the display control unit 230 causes the display device 202 to display a screen corresponding to an operation instruction or the like received by the input reception 210.
  • the image pickup control unit 240 controls the image pickup device 208 according to the operation instruction received by the input reception 210. Specifically, the image pickup control unit 240 captures the moving image of the excavator 100 by the image pickup device 208 and acquires the moving image data.
  • the storage unit 250 stores the information received by the communication control unit 220 from the external device in the storage unit 270. Specifically, the storage unit 250 associates the moving image data acquired by the imaging control unit 240 with the operation data received from the excavator 100 by the communication control unit 220 to obtain state recording data 280, which is stored in the storage unit 270. Let me. In other words, the storage unit 250 stores the data in which the state quantity information received from the excavator 100 and the moving image data are associated with each other in the storage unit 270.
  • the reproduction unit 260 reproduces the state recording data 280 stored in the storage unit 270 and displays it on the display device 202.
  • the storage unit 270 stores data in response to an instruction from the storage unit 250.
  • FIG. 6 is a first flowchart illustrating the processing of the mobile terminal.
  • the predetermined application is started (step S601). For example, the mobile terminal 200 activates a predetermined application in response to the user selecting a predetermined icon on the home screen displayed on the display device 202.
  • the predetermined application is, for example, an application for realizing the functions of each part shown in FIG.
  • the mobile terminal 200 determines whether or not the connection with the excavator 100 has been confirmed by the communication control unit 220 (step S602). In other words, the communication control unit 220 determines the presence or absence of the excavator 100 capable of communicating with the communication device 207.
  • step S602 when the connection with the excavator 100 is not confirmed, that is, when the excavator 100 capable of communicating using the communication device 207 does not exist around the mobile terminal 200, the mobile terminal 200 confirms the connection. So wait.
  • the controller 30 of the excavator 100 whose connection with the mobile terminal 200 is not confirmed is in the off state. Further, at this time, the mobile terminal 200 may terminate the application if the connection is not confirmed for a predetermined time or more.
  • the mobile terminal 200 displays a list of the excavators 100 confirmed to be wireless communication with the mobile terminal 200 on the display device 202 by the display control unit 230. And accepts the selection of the excavator 100 for communication (step S603). Details of the list screen of the excavator 100 will be described later.
  • an item specification screen for designating an item of state quantity information to be displayed together with the moving image is displayed on the imaging screen when capturing the moving image of the selected excavator 100. May be done. Then, the mobile terminal 200 may proceed to step S604 when the item of the state quantity information is specified. Details of the item specification screen will be described later.
  • the item specified on the item specification screen may be stored in the storage unit 270 in association with the moving image data.
  • the mobile terminal 200 determines whether or not an operator (operator) will board the selected excavator 100 (step S604). Specifically, the mobile terminal 200 displays a selection screen on which the display control unit 230 selects whether to operate the excavator 100 by the operation of the operator or to operate the excavator 100 in an unmanned state where the operator does not board. Displayed on the device 202. Details of the selection screen will be described later.
  • step S604 it is determined whether the operation of the excavator 100 is a manned operation or an unmanned operation.
  • step S604 when the operator does not board, that is, when the operation of the excavator 100 is an unmanned operation, the mobile terminal 200 proceeds to step S613 described later.
  • step S604 when the operator is on board, that is, when the operation of the excavator 100 is a manned operation, the mobile terminal 200 sends a request signal requesting acquisition of operation data (state quantity information) by the communication control unit 220. It is transmitted to the excavator 100 (step S605).
  • the mobile terminal 200 causes the communication control unit 220 to display an imaging screen for capturing a moving image on the display device 202, and determines whether or not the input reception 210 has accepted an operation instructing the start of recording. (Step S606). If the corresponding operation is not accepted in step S606, the mobile terminal 200 waits until the corresponding operation is accepted.
  • step S606 the mobile terminal 200 starts recording the moving image of the excavator 100 and receiving the operation data by the image pickup control unit 240 (step S607).
  • the mobile terminal 200 receives the operation data including the design condition information from the excavator 100, but the present invention is not limited to this.
  • the mobile terminal 200 may receive only the state quantity information from the shovel 100 among the operation data acquired by the acquisition unit 31 of the shovel 100.
  • the excavator 100 continuously transmits the detected values as state quantity information to the mobile terminal 200 by a plurality of sensors at regular time intervals. That is, the transmission control unit 33 of the excavator 100 transmits the state quantity information including the detection values of the plurality of types of sensors to the mobile terminal 200 in real time.
  • step S605 and step S606 may be reversed. That is, the mobile terminal 200 may transmit the request signal to the excavator 100 after receiving the operation instructing the start of recording on the imaging screen.
  • steps S605 to S607 will be specifically described below.
  • the communication control unit 220 causes the display device 202 to display the image pickup screen of the moving image.
  • the mobile terminal 200 transmits a request signal to the excavator 100 by the display control unit 230, and starts capturing the moving image of the excavator 100. You may.
  • the moving image data indicating the moving image of the excavator 100 and the state amount information during the period synchronized with the imaging of the moving image of the excavator 100 can be obtained by simply performing the operation of instructing the recording of the moving image. It can be acquired, and the time and effort of the user of the mobile terminal 200 can be reduced.
  • the state quantity information may include the acquisition time zone of the state quantity information measured by the timekeeping function of the excavator 100.
  • the moving image data may include an imaging time zone of the moving image measured by the time measuring function of the mobile terminal 200.
  • the mobile terminal 200 of the present embodiment may associate the operation data (state quantity information) with the moving image data based on the acquisition time zone included in the state quantity information and the imaging time zone included in the moving image data.
  • the mobile terminal 200 determines whether or not the operation for instructing the stop of recording has been accepted on the imaging screen by the input reception 210 (step S608). If the corresponding operation is not accepted in step S608, the mobile terminal 200 returns to step S606.
  • step S608 the mobile terminal 200 stops receiving the operation data from the excavator 100 by the communication control unit 220 (step S609). Subsequently, the mobile terminal 200 stops the imaging of the moving image by the imaging device 208 by the imaging control unit 240 (step S610).
  • the mobile terminal 200 cuts off the connection (communication) with the excavator 100 by the communication control unit 220 (step S611). Subsequently, the mobile terminal 200 stores the operation data and the moving image data in the storage unit 270 as the state recording data 280 associated with the operation data by the storage unit 250 (step S612), and ends the process.
  • the storage unit 250 may store the display item of the state quantity information specified on the item designation screen in the storage unit 270 as a part of the state record data 280. Further, the mobile terminal 200 may transmit the state recording data 280 stored in the storage unit 270 to an external management device or the like.
  • the mobile terminal 200 When unmanned operation is selected in step S604, the mobile terminal 200 causes the display control unit 230 to display a confirmation screen on the display device 202 for confirming the presence or absence of obstacles around the excavator 100 (step S613).
  • the confirmation screen may display the detection result or the like by the object detection device S8 possessed by the excavator 100.
  • the mobile terminal 200 determines whether or not the input reception 210 has received an operation indicating that the presence or absence of an obstacle has been confirmed (step S614). If the corresponding operation is not accepted in step S614, the mobile terminal 200 accepts the corresponding operation and waits.
  • the mobile terminal 200 When the corresponding operation is received in step S614, the mobile terminal 200 causes the display control unit 230 to display a list screen showing a list of operations of the excavator 100 on the display device 202 (step S615). The details of the operation list screen will be described later.
  • the communication control unit 220 transmits a start instruction of the selected operation to the excavator 100 (step S616), and step S605. Proceed to.
  • the mobile terminal 200 of the present embodiment automatically records when the operation of instructing the stop of recording is not performed even after a predetermined time has elapsed after receiving the operation of instructing the start of recording. It may be stopped and the reception of operation data may be stopped. In the present embodiment, by mounting this function on the mobile terminal 200, state recording data not intended by the user, such as when recording is started by an erroneous operation or when the user forgets to stop recording. Acquisition of 280 can be prevented.
  • the mobile terminal 200 of the present embodiment may stop recording and reception of operation data, for example, when the image captured by the imaging device 208 does not include the image of the excavator 100.
  • the case where the image of the excavator 100 is not included in the captured image is the case where the image pickup device 208 is not pointed at the excavator 100, and there is a possibility that a moving image unintended by the user is recorded.
  • the mobile terminal 200 of the present embodiment may stop recording when the wireless communication connection with the excavator 100 is cut off.
  • this function can prevent only the moving image from being recorded without acquiring the operation data synchronized with the moving image.
  • FIG. 7 is a diagram showing an example of a shovel list screen.
  • the screen 71 shown in FIG. 7 is an example of a list screen of the excavator 100 displayed on the display device 202 in step S603 of FIG.
  • the screen 71 includes a display area 72 for displaying a list of excavators 100 confirmed to be connected to the mobile terminal 200, and an operation button 73.
  • the machine number of the excavator 100 whose connection with the mobile terminal 200 is confirmed and the selection field associated with the machine number of the shovel 100 are displayed in association with each other.
  • the excavator 100 specified by the machine number associated with the selection field is 100. Is selected as the excavator 100 for communication. Then, the mobile terminal 200 shifts the display of the display device 202 from the screen 71 to the item designation screen for designating the item of the state quantity information to be displayed on the image pickup screen of the moving image.
  • FIG. 8 is a diagram showing an example of an item designation screen for designating an item of state quantity information.
  • the screen 81 shown in FIG. 8 is displayed on the display device 202, for example, after the excavator 100 is selected on the screen 71.
  • the screen 81 has display areas 82 and 83 and operation buttons 84 and 85.
  • the display area 82 the machine number of the excavator 100 performing wireless communication is displayed.
  • the display area 83 displays a list of items of state quantity information to be displayed when the moving image of the excavator 100 specified from the machine number displayed in the display area 82 is captured.
  • the items displayed in the display area 83 are a list of items set as initial settings.
  • the operation button 84 is an operation button for setting the initial setting items displayed in the display area 83 to the items to be displayed on the imaging screen.
  • the operation button 84 when the operation button 84 is operated, the item of the state quantity information displayed in the display area 83 is saved as a part of the state record data 280, and the screen 81 is manned. Transition to the operation or unmanned operation selection screen.
  • the operation button 85 is an operation button for designating an item other than the initial setting item displayed in the display area 83.
  • the screen 81 may be changed to the list screen of the items included in the state quantity information.
  • FIG. 9 is a diagram showing an example of a selection screen for manned operation or unmanned operation.
  • the screen 91 shown in FIG. 9 is an example of the selection screen displayed in step S604 of FIG.
  • the screen 91 has a display area 92 and operation buttons 93 and 94.
  • a message prompting confirmation as to whether or not the operator is boarding the excavator 100 is displayed.
  • a message prompting the selection of either manned operation or unmanned operation is displayed.
  • the operation button 93 is an operation button for selecting a manned operation
  • the operation button 94 is an operation button for selecting an unmanned operation.
  • FIG. 10 is a diagram showing an example of a confirmation screen.
  • the screen 101 shown in FIG. 10 has a display area 102 and an operation button 103.
  • a message prompting the user of the mobile terminal 200 to confirm the presence or absence of an obstacle around the excavator 100 is displayed.
  • the mobile terminal 200 of the present embodiment transmits a request for acquiring the detection result by the object detection device S8 to the excavator 100, and displays a message based on the detection result in the display area 102. You may let me.
  • the mobile terminal 200 may display a message to that effect in the display area 102. ..
  • the mobile terminal 200 shifts the screen 101 to the operation list screen of the excavator 100 displayed in step S615 of FIG.
  • FIG. 11 is a diagram showing an example of a list screen of excavator operation.
  • the screen 111 shown in FIG. 11 is an example of a list screen showing a list of operations of the excavator 100 in an unmanned operation.
  • the screen 111 has a display area 112 and an operation button 113.
  • the specified operation name and the selection field associated with each specified operation name are displayed as a list of operations to be performed by the excavator 100.
  • the prescribed motion is an motion of shifting from a predetermined first prescribed posture to a predetermined second prescribed posture. Therefore, the specified operation is an operation that starts from the first specified posture and ends when the second specified posture is reached.
  • the first regulated posture and the second regulated posture may be different postures or the same posture. That is, the defined motion may be an motion of changing the posture from a certain prescribed posture to another prescribed posture, or an motion of performing a predetermined motion from a certain prescribed posture and returning to a certain prescribed posture again.
  • the operation button 113 is an operation button for transmitting the start instruction of the selected specified operation to the excavator 100.
  • the mobile terminal 200 transmits a predetermined operation start instruction corresponding to the selected selection field to the excavator 100, and displays the screen 111 on the screen 111.
  • the transition to the image pickup screen of the moving image displayed in step S606 is performed.
  • FIG. 12 is a first diagram showing an example of a moving image imaging screen.
  • the screen 121 shown in FIG. 12 is an example of an imaging screen displayed on the display device 202 after the wireless communication connection with the excavator 100 is established.
  • the screen 121 has display areas 122, 123, 124, and operation buttons 125.
  • the display area 122 displays an image captured by the image pickup device 208 of the mobile terminal 200. Further, the display area 122 has a display area 122a.
  • the display area 122a may display information for identifying the operator of the excavator 100. Further, in the display area 122a, when the unmanned operation is selected as the operation of the excavator 100, information indicating the unmanned operation may be displayed.
  • the item specified on the item specification screen is displayed.
  • the default items are displayed in the display area 123.
  • the information indicating the item displayed in the display area 123 is used as the display item information as a part of the state record data 280.
  • the items displayed in the display area 123 are a part of a large number of items included in the state quantity information. Further, in the display area 123, the item "common rail pressure (engine fuel injection pressure)" included in the state quantity information may be displayed instead of the item "engine fuel injection amount”.
  • the waveform indicating the value of the item of the state quantity information displayed in the display area 123 is not displayed.
  • the display area 124 information that is a bibliographic item for specifying the moving image data is displayed. Specifically, in the display area 124, the machine number of the excavator 100 for which the wireless communication connection is established, the date when the request signal for the operation data is transmitted, the time when the recording of the captured moving image is started, and the operation name of the excavator 100 Etc. are displayed.
  • the date and start time are blank, but the current date and time may be displayed in the date and start time.
  • the operation name of the excavator 100 displayed in the display area 124 may be input by the operator of the excavator 100. Further, the operation name of the excavator 100 may be selected from preset items such as excavation, leveling, turning, and boom raising by operating the operation input field, for example.
  • the operation input field may be, for example, a list of operations of the excavator 100 displayed in the display area 112 shown in FIG.
  • the operation name of the excavator 100 is not input to the operator, but may be the operation name specified by the controller 30 of the excavator 100 based on the detection value of the posture sensor or the like as the state quantity information.
  • the excavator 100 may transmit the operation name, which is the specified result, to the mobile terminal 200.
  • the operation name of the excavator 100 may be determined based on the moving image data captured by the mobile terminal 200.
  • the items of information displayed in the display area 124 are not limited to the example shown in FIG. Further, it may be possible to set the items to be displayed in the display area 124. Further, it may be possible to switch between displaying and hiding the display area 124 on the screen 121.
  • a part of the items of the design condition information of the excavator 100 included in the operation data may be displayed on the screen 121.
  • the item of the design condition information displayed on the screen 121 may be a predetermined item as an initial setting, or may be an item specified by the user of the mobile terminal 200.
  • the information displayed in the display area 124 may be expressed as bibliographic information of moving image data.
  • the bibliographic information of the moving image data is held together with the moving image data and the state amount information as a part of the state recording data 280.
  • the operation button 125 is an operation button for instructing the start of video recording.
  • the operation button 125 is operated on the screen 121, the mobile terminal 200 starts recording the moving image displayed in the display area 122.
  • FIG. 13 is a second diagram showing an example of a moving image imaging screen.
  • the screen 121A shown in FIG. 13 is an example of a recording screen during recording of a moving image.
  • the screen 121A has display areas 122A, 123A, 124A, and operation buttons 126.
  • the display area 122A has a display area 122a and a display area 122b. In the display area 122b, information indicating that the moving image displayed in the display area 122A is currently being recorded is displayed.
  • the display area 123A since the operation data including the state amount information is received at the start of recording the moving image, a waveform indicating the value of the item is displayed for each item of the state amount information.
  • the display area 124A the date when the recording was started and the start time are displayed.
  • the operation button 126 is an operation button for instructing the stop of video recording.
  • the mobile terminal 200 of the present embodiment stops the recording of the moving image and stores the state recording data 280 in the storage unit 270.
  • the mobile terminal 200 of the present embodiment may display a memo input screen regarding the state at the time of imaging on the screen 121A after the operation button 126 is operated.
  • the mobile terminal 200 stores the memo information indicating the content of the input memo in the storage unit 270 as a part of the state recording data 280.
  • the state recording data 280 of the present embodiment is displayed in the moving image data including the audio data, the operating data (including the state amount information and the setting condition information), the bibliographic information of the moving image data, and the display area 123 at the time of recording. Includes display item information and memo information indicating items of state quantity information.
  • the state record data 280 may not include all of this information.
  • the state recording data 280 may include at least moving image data including audio data and state quantity information.
  • FIG. 14 is a second flowchart illustrating the processing of the mobile terminal.
  • the predetermined application when the process of acquiring the state record data 280 is completed, the predetermined application may be terminated once. In that case, when the mobile terminal 200 reproduces the state recording data 280, the predetermined application is started again, and the reproduction screen of the state recording data 280 stored in the storage unit 270 is displayed on the display device 202. ..
  • the mobile terminal 200 determines whether or not the operation for instructing the reproduction of the state recording data 280 has been accepted on the reproduction screen (step S1401). If the corresponding operation is not accepted in step S1401, the mobile terminal 200 waits until the corresponding operation is accepted.
  • step S1401 When the corresponding operation is accepted in step S1401, the mobile terminal 200 accepts the selection of the state recording data 280 to be reproduced (step S1402).
  • the mobile terminal 200 determines whether or not the change of the display item of the state quantity information to be displayed at the time of reproducing the state record data 280 has been accepted (step S1403). Specifically, the mobile terminal 200 determines whether or not the operation for instructing the change of the display item of the state quantity information included in the selected state record data 280 has been accepted.
  • step S1403 If the change of the display item is not accepted in step S1403, the mobile terminal 200 proceeds to step S1405 described later.
  • the mobile terminal 200 acquires the waveform data which is the value of the item selected for the display item displayed after the change from the state quantity information included in the state record data 280. (Step S1404).
  • the mobile terminal 200 determines whether or not the operation for instructing the start of reproduction of the state recording data 280 has been accepted (step S1405). If the corresponding operation is not accepted in step S1405, the mobile terminal 200 waits until the corresponding operation is accepted.
  • step S1405 When the corresponding operation is received in step S1405, the mobile terminal 200 reads the state recording data 280 stored in the storage unit 270 by the playback unit 260 and starts playback (step S1406).
  • the mobile terminal 200 reads out the state recording data 280 and displays the state recording data 280 on the playback screen displayed on the display device 202.
  • the mobile terminal 200 determines whether or not the operation for instructing the stop of playback has been accepted (step S1407). If the corresponding operation is not accepted in step S1407, the mobile terminal 200 waits until the corresponding operation is accepted.
  • step S1407 When the corresponding operation is received in step S1407, the mobile terminal 200 stops the reproduction of the state recording data 280 (step S1408) and ends the process.
  • FIG. 15 is the first diagram showing an example of the playback screen.
  • the screen 151 shown in FIG. 15 is an example of the playback screen displayed on the display device 202 in step S1401 of FIG.
  • the screen 151 has display areas 152, 153, 154 and operation buttons 155.
  • the display area 152 the moving image data included in the state recording data 280 is displayed.
  • the state recording data 280 is selected and shows the state before the reproduction is started.
  • the display area 152 the first frame (still image) of the moving image data included in the selected state recording data 280 is displayed. Further, since the state record data 280 is acquired at the work site of the excavator 100, the state of the work site of the excavator 100 is also imaged together with the excavator 100. In the example of FIG. 15, it can be seen that the work site of the excavator 100 is a mountainous area.
  • the display area 152 has a display area 152a.
  • a part of the bibliographic information included in the state recording data 280 is displayed.
  • information indicating the operator of the excavator 100 when the moving image is captured is displayed as a part of the bibliographic information.
  • the item of the state quantity information indicated by the display item information included in the state record data 280 is displayed.
  • the waveform indicating the value of each item displayed in the display area 153 is not displayed.
  • the timing display bar 159 indicating the reproduction time of the moving image data is displayed at a position serving as a start point of the waveform because it is before reproduction.
  • the mobile terminal 200 of the present embodiment receives the operation of selecting the item displayed in the display area 153, it is assumed that the instruction to change the item of the state quantity information is received. Specifically, it is assumed that the mobile terminal 200 has received an instruction to change the selected item to another item.
  • the mobile terminal 200 When the mobile terminal 200 receives the item change instruction, the mobile terminal 200 displays a list of information items included in the state quantity information at the position where the selected item is displayed by a pull-down method or the like.
  • the mobile terminal 200 may add an item selected from the list as an item to be newly displayed in the display area 153.
  • the mobile terminal 200 When the mobile terminal 200 receives the change of the item, the mobile terminal 200 extracts the waveform data corresponding to this item as the state quantity information.
  • the display area 154 displays the bibliographic information included in the status record data 280.
  • the date, the start date and time of recording, and the operation name the end time when the recording of the moving image data is completed is displayed.
  • the operation button 155 is an operation button for instructing the reproduction of the state recording data 280.
  • the operation button 155 is operated on the screen 151, the mobile terminal 200 starts reproducing the state recording data 280.
  • FIG. 16 is a second diagram showing an example of the playback screen.
  • the screen 151A shown in FIG. 16 is an example of the reproduction screen displayed on the display device 202 in step S1406 of FIG.
  • the screen 151A has display areas 152A, 153A, 156, and operation buttons 157 and 158.
  • the moving image data being played is displayed. Further, the display area 152A has display areas 152b and 152c. In the display area 152b, information indicating that the moving image data included in the state recording data 280 is being reproduced is displayed. The bibliographic information of the moving image data being played is displayed in the display area 152c. A part of the bibliographic information of the moving image data may be displayed in the display area 152c.
  • the mobile terminal 200 of the present embodiment outputs the audio data included in the moving image data from the audio input / output device 203.
  • a waveform indicating the value of the displayed item among the state quantity information included in the state record data 280 is displayed. Further, in the display area 153A, the timing display bar 159 is displayed at a position indicating the reproduction time, and the waveform is displayed with the movement of the timing display bar 159.
  • the waveform data showing this waveform is data acquired in synchronization with the moving image data being played.
  • the memo information and the like input at the time of capturing the moving image data are displayed.
  • FIG. 16 it can be seen that a large bucket was attached to the excavator 100 when the moving image being played back was recorded.
  • the operation button 157 is an operation button for stopping the reproduction of the state recording data 280.
  • the operation button 158 is an operation button for transmitting the state recording data 280 to an external management device or the like.
  • the mobile terminal 200 stops the reproduction of the state recording data 280 when the operation button 157 is operated on the screen 151A. Further, when the operation button 158 is operated on the screen 151A, the mobile terminal 200 transmits the state recording data 280 during or stopped playing to the management device or the like. The mobile terminal 200 may erase the state recording data 280 held in the storage unit 270 after the state recording data 280 is transmitted to the management device or the like.
  • FIG. 17 is a third diagram showing an example of the reproduction screen.
  • the screen 151B shown in FIG. 17 is a modification of the screen 151A shown in FIG.
  • the moving image captured by the mobile terminal 200 and the moving image captured by the camera S6 of the excavator 100 among the state quantity information included in the state recording data 280 are displayed in the display area 152B. It is different from the screen 151A shown in 15.
  • the display area 152B has the display areas 152b, 152c, 152d, and 152e, and information indicating that the moving image data is being reproduced is displayed in the display area 152b.
  • bibliographic information included in the state recording data 280 is displayed in the display area 152c.
  • the moving image data included in the state recording data 280 is displayed.
  • the display area 152d displays the moving image data captured by the image pickup device 208 of the mobile terminal 200.
  • the moving image data captured by the camera S6 of the excavator 100 is displayed. More specifically, in the display area 152e, among the cameras S6 included in the excavator 100, a moving image captured by the camera that images the front of the excavator 100 is displayed.
  • the moving image of the excavator 100 captured by the mobile terminal 200 and the moving image captured by the camera S6 of the excavator 100 are simultaneously displayed, so that the user of the mobile terminal 200 can see the entire movement of the excavator 100. Can be easily grasped.
  • the moving image of the excavator 100 and the state quantity information acquired in synchronization with the moving image data (including the audio data) indicating the moving image are simultaneously transmitted to the user of the mobile terminal 200. You can browse it.
  • the state recording data 280 since the state recording data 280 is recorded and held, the operating state of the excavator 100 can be recorded in the state recording data 280 even at a place other than the work site where the excavator 100 is working. It can be understood by the viewer. Further, according to the present embodiment, since the moving image data captures the work site of the shovel 100 as well as the work site of the shovel 100 as a moving image, the user of the mobile terminal 200 can grasp the working environment of the shovel 100.
  • the operating sound of the excavator 100 can be heard by the user of the mobile terminal 200.
  • the user of the mobile terminal 200 can check the matters that cannot be determined only from the waveform of the state quantity information by browsing the state record data 280.
  • the matters that cannot be determined only from the waveform of the state quantity information are, specifically, whether or not the operation of the excavator 100 estimated from the waveform of the state quantity information matches the actual operation of the excavator 100, and the excavator 100. Whether or not the operating speed of the machine is different from the normal one, the color of the smoke emitted from the excavator 100, whether or not abnormal noise is generated during operation, and whether or not the aircraft is suitable for the work site environment. And so on.
  • the user of the mobile terminal 200 confirms the state recording data 280 of the excavator 100 currently being executed at the work site on the mobile terminal 200 even before the abnormality of the excavator 100 occurs. , You can grasp in detail how to move and use the excavator 100. Therefore, the user of the mobile terminal 200 can perform the evaluation in light of the working environment of the excavator 100.
  • the mobile terminal 200 may be possessed by each of a plurality of users (for example, an operator, a serviceman, an engineer, etc.). In this case, each of the plurality of users can confirm the state recording data 280 of the excavator 100 on their own mobile terminal 200 at the work site.
  • a plurality of users for example, an operator, a serviceman, an engineer, etc.
  • the moving image captured by the mobile terminal 200 is a moving image obtained by capturing the entire excavator 100 from the periphery of the excavator 100, but the present invention is not limited to this.
  • the moving image captured by the mobile terminal 200 may be, for example, a moving image captured by the mobile terminal 200 installed inside the cabin 10 of the excavator 100.
  • the captured moving image may be a moving image of the inside of the cabin 10 or a moving image of the outside of the cabin 10.
  • the mobile terminal 200 of the present embodiment may be, for example, a wearable terminal.
  • the mobile terminal 200 may be a glasses-type mobile terminal or a wristwatch-type mobile terminal.
  • the mobile terminal 200 may be in any form as long as it is a portable terminal capable of capturing a moving image and communicating with the excavator 100.
  • FIG. 18 is a schematic view showing a configuration example of an excavator management system according to another embodiment.
  • the excavator management system SYS1 shown in FIG. 18 is a system that manages one or a plurality of excavators 100.
  • the management system SYS1 mainly includes an excavator 100, a mobile terminal 200, and a management device 300.
  • each of the excavator 100, the mobile terminal 200, and the management device 300 may be one unit or a plurality of units.
  • the management system SYS1 includes one excavator 100, one mobile terminal 200, and one management device 300.
  • the management device 300 is typically a fixed terminal device, for example, a server computer installed in a management center or the like outside the work site.
  • the management device 300 may be, for example, a portable terminal device such as a notebook PC, a tablet PC, or a smartphone.
  • FIG. 19 is a diagram showing an example of the hardware configuration of the management device.
  • the management device 300 of the present embodiment includes an input device 301, an output device 302, a drive device 303, an auxiliary storage device 304, a memory device 305, an arithmetic processing unit 306, and an interface device 307, which are connected to each other by a bus B1, respectively. It is a computer.
  • the input device 301 is a device for inputting various types of information, and is realized by, for example, a touch panel or the like.
  • the output device 302 is for outputting various kinds of information, and is realized by, for example, a display or the like.
  • the interface device 307 is used to connect to the network.
  • the management program that realizes each function described later is at least a part of various programs that control the management device 300.
  • the management program is provided, for example, by distributing the storage medium 308, downloading from the network, or the like.
  • the storage medium 308 on which the management program is recorded includes various types of storage such as a storage medium for optically, electrically or magnetically recording information, a semiconductor memory for electrically recording information such as a ROM and a flash memory, and the like. A medium can be used.
  • the management program is installed in the auxiliary storage device 304 from the storage medium 308 via the drive device 303.
  • the management program downloaded from the network is installed in the auxiliary storage device 304 via the interface device 307.
  • the auxiliary storage device 304 that realizes the management information database 310 (see FIG. 20), which will be described later, is installed in the management device 300 and stores the management program, and also stores various necessary files, data, and the like by the management device 300.
  • the memory device 305 reads and stores the management program from the auxiliary storage device 304 when the management device 300 is started. Then, the arithmetic processing unit 306 realizes various processes as described later according to the management program stored in the memory device 305.
  • FIG. 20 is a diagram showing an example of the functional configuration of the management device.
  • the management device 300 of the present embodiment includes a management information database 310, a data acquisition unit 320, a data storage unit 330, a diagnosis unit 340, an operation evaluation unit 350, and a data output unit 360.
  • the management information database 310 is realized by a storage device such as an auxiliary storage device 304 and a memory device 305.
  • the data acquisition unit 320, the data storage unit 330, the diagnosis unit 340, the operation evaluation unit 350, and the data output unit 360 have the arithmetic processing unit 306 read and execute the programs stored in the auxiliary storage device 304, the memory device 305, and the like. It is realized by.
  • the management information database 310 stores various information used for managing the excavator 100.
  • the information stored in the management information database 310 includes, for example, diagnosis result information indicating the result of diagnosis such as the presence or absence of failure of the excavator 100 based on the state record data 280 and the state record data 280, and the evaluation result of the operation of the excavator 100. Includes the evaluation result information to be shown.
  • management information of this embodiment may be stored for each excavator 100. Further, the management information may include a plurality of state record data 280 acquired at different dates and times for each machine number of the excavator 100.
  • the data acquisition unit 320 acquires various types of information stored in the management information database 310. Specifically, the data acquisition unit 320 acquires the state recording data 280 transmitted from the mobile terminal 200.
  • the data storage unit 330 stores the information acquired by the data acquisition unit 320 and the information obtained as a result of the processing of the diagnosis unit 340 and the operation evaluation unit 350 in the management information database 310 as management information.
  • the diagnosis unit 340 When the diagnosis unit 340 receives a request for a diagnosis regarding the operation from the mobile terminal 200 to the excavator 100, the diagnosis unit 340 diagnoses the presence or absence of failure of the excavator 100, the degree of deterioration, and the like, and the diagnosis result is obtained from the mobile terminal 200. May be notified to.
  • the diagnosis result by the diagnosis unit 340 is stored in the management information database 310 as a part of the management information.
  • the diagnosis unit 340 analyzes the state quantity information, and if the value of a predetermined item among the items included in the state quantity information is equal to or higher than a predetermined threshold value, there is a failure. May be diagnosed (judged).
  • the diagnosis unit 340 may diagnose the degree of deterioration of the excavator 100 and the like by using a plurality of state record data 280 acquired at different dates and times for one excavator 100. At this time, the diagnosis unit 340 may convert the image of the excavator 100 in the moving image into a link model and diagnose the operation based on the link model.
  • the link model is a model suitable for comparing the postures of the excavator 100.
  • the link model of the present embodiment includes a link mechanism that connects the lower traveling body 1, the swivel mechanism 2, and the upper swivel body 3 in the image of the excavator 100, and the upper swivel body 3 and the boom 4.
  • the posture of the excavator 100 is simplified based on the points shown, the points indicating the link mechanism connecting the boom 4 and the arm 5, the points indicating the link mechanism connecting the arm 5 and the bucket 6, and the points indicating the tip of the bucket. It is a three-dimensional image drawn in.
  • the motion evaluation unit 350 evaluates the motion of the excavator 100 based on the state record data 280 acquired from the mobile terminal 200.
  • the motion evaluation unit 350 evaluates the motion of the shovel 100 based on, for example, the command value corresponding to the type of motion of the shovel 100, the value detected from the sensor, the posture of the shovel 100 in the moving image, and the like.
  • the motion evaluation unit 350 when the command value and the value detected from the sensor match, and the posture of the excavator 100 in the moving image deviates from the posture indicated by the command value. Outputs information indicating that the sensor needs to be calibrated as an evaluation result.
  • the evaluation result by the operation evaluation unit 350 is transmitted to the mobile terminal 200. Further, the evaluation result by the operation evaluation unit 350 is stored in the management information database 310 by the data storage unit 330 as a part of the management information.
  • the data output unit 360 outputs (transmits) various information from the management device 300 to an external device.
  • the external device is, for example, a mobile terminal 200.
  • the data output unit 360 receives the reproduction request of the state recording data 280 stored in the input reception 210 from the mobile terminal 200, the data output unit 360 transfers the state recording data 280 stored in the management information database 310 to the mobile terminal 200. Send.
  • FIG. 21 is a sequence diagram illustrating the operation of the management system.
  • the mobile terminal 200 receives an operation instructing the transmission of the status record data 280 and transmits the status record data 280 to the management device 300 (step S211).
  • the management device 300 acquires the state record data 280 by the data acquisition unit 320, and stores the state record data 280 in the management information database 310 by the data storage unit 330 (step S212).
  • the management system SYS1 transmits a playback request for the selected state recording data 280 to the management device 300. (Step S213).
  • the mobile terminal 200 may display a list screen of the state recording data 280 for selecting the state recording data 280 to be reproduced before the playback screen is displayed.
  • the management device 300 may transmit a list of state record data 280 stored in the management information database 310 to the mobile terminal 200 and display the list screen on the mobile terminal 200.
  • the data output unit 360 reads out the state record data 280 stored in the management information database 310 (step S214). Subsequently, the management device 300 transmits the read state recording data 280 to the mobile terminal 200 by the data output unit 360 (step S215).
  • the mobile terminal 200 receives the state recording data 280 and reproduces the received state recording data 280 (step S216).
  • the mobile terminal 200 when the mobile terminal 200 receives an operation requesting a diagnosis for the excavator 100, the mobile terminal 200 makes a diagnosis request to the management device 300 (step S217).
  • the diagnosis unit 340 When the management device 300 receives the diagnosis request by the data acquisition unit 320, the diagnosis unit 340 performs a diagnosis based on the state record data 280 (step S218). Subsequently, the management device 300 transmits the diagnosis result to the mobile terminal 200 (step S219).
  • moving image data obtained by converting the image of the excavator 100 into a link model may be transmitted to the mobile terminal 200.
  • moving image data obtained by converting the image of the excavator 100 into a link model may be reproduced.
  • the moving image data obtained by converting the excavator image into a link model is moving image data in which the link model is superimposed or replaced with the image of the shovel 100 in the moving image data captured by the imaging device 208.
  • the moving image data in which the link model is superimposed or replaced on the image of the excavator 100 may be referred to as diagnostic moving image data.
  • the operation evaluation unit 350 evaluates the operation of the excavator 100 based on the state recording data 280 (step S221). ). Subsequently, the management device 300 transmits information indicating the evaluation result to the mobile terminal 200 by the data output unit 360 (step S222). When the mobile terminal 200 receives the information indicating the evaluation result, the mobile terminal 200 displays the evaluation result screen showing the evaluation result.
  • the mobile terminal 200 of the present embodiment transmits an instruction for calibrating the sensor to the excavator 100 (step S223).
  • This instruction may include a sensor that needs to be calibrated and information needed to perform the calibration.
  • the excavator 100 calibrates the designated sensor (step S224).
  • step S211 to step S216, the operations from step S217 to step S219, and the operations from step S220 to step S224 may be performed at independent timings.
  • the reproduction request in step S213 of FIG. 21 may include a diagnosis request using the state recording data 280 to be reproduced and an evaluation request.
  • the mobile terminal 200 in step S216, from the reproduction of the state recording data 280 to the acquisition of the evaluation result in step S222 are executed as a series of processes.
  • FIG. 22 is a first diagram showing an example of a playback screen of diagnostic moving image data.
  • the screen 221 shown in FIG. 22 may be displayed on the display device 202 of the mobile terminal 200, for example, in step S219 of FIG.
  • the screen 221 has a display area 222, 223 and an operation button 224.
  • the image 222a of the excavator 100 imaged by the image pickup apparatus 208 and the link model 222b generated from the image 222a are superimposed and displayed.
  • the elapsed time display bar 222c is displayed in the display area 222.
  • the display area 223 displays the time elapsed from the start time of video recording.
  • the elapsed time display bar 222c and the time displayed in the display area 223 are synchronized.
  • the image displayed in the display area 222 is an image corresponding to the time indicated by the elapsed time display bar 222c and the display area 223 among the plurality of still images included in the moving image.
  • the operation button 224 is an operation button for converting the image displayed in the display area 222 into an image of only the link model 222b.
  • the mobile terminal 200 When the operation button 224 is operated on the screen 221 of the mobile terminal 200, the mobile terminal 200 shifts the screen 221 to a screen in which the image 222a of the excavator 100 is erased.
  • the operation button 224 When the operation button 224 is operated, the mobile terminal 200 stops the reproduction of the diagnostic moving image data, and the image of the excavator 100 is changed from the image displayed in the display area 222 when the operation button 224 is operated. 222a may be erased.
  • FIG. 23 is a second diagram showing an example of a playback screen of diagnostic moving image data.
  • the screen 221A shown in FIG. 23 is an example of a screen displayed on the display device 202 of the mobile terminal 200 after the operation button 224 is operated on the screen 221.
  • the screen 221A has display areas 222A and 223, and operation button groups 225 and 226.
  • the image 222a of the excavator 100 is erased, and only the link model 222b is displayed.
  • the operation button group 225 is an operation button group for switching the image displayed in the display area 222A to a plurality of different images, and includes the operation buttons 225a, 225b, and 225c.
  • the operation button 225a is an operation button for switching the image displayed in the display area 222A from the link model 222b to the captured image.
  • the operation button 225b is an operation button for switching the image displayed in the display area 222A from the link model 222b to the waveform of the state quantity information.
  • the operation button 225c is an operation button for switching the image displayed in the display area 222A from the link model 222b to the comparison image between the link models.
  • the operation button group 226 is an operation button group for switching the link model 222b displayed in the display area 222A to a link model when viewed from a plurality of different directions, and the operation buttons 226a, 226b, 226c, and 226d are used. Including.
  • the operation button 226a is an operation button for switching the link model 222b to the link model in the front view (front view).
  • the operation button 226b is an operation button for switching the link model 222b to the link model in a state viewed from the left side surface (left side view).
  • the operation button 226c is an operation button for switching the link model 222b to the link model in the state viewed from the right side (right side view).
  • the operation button 226d is an operation button for switching the link model 222b to the link model in a state viewed from the back (rear view). On the screen 221A shown in FIG. 22, the operation button 226c is selected.
  • FIG. 24 is a third diagram showing an example of a playback screen of diagnostic moving image data.
  • the screen 221B shown in FIG. 24 is an example of a screen displayed on the display device 202 of the mobile terminal 200 after the operation button 226c is operated on the screen 221A.
  • the screen 221B shown in FIG. 24 has a display area 222B, 223, and operation button groups 225 and 226. Further, in the display area 224B, the link model 222d with the link model 222b as the right side view is displayed. Further, on the screen 221B, the operation button 225c is selected.
  • FIG. 25 is a fourth diagram showing an example of a playback screen of diagnostic moving image data.
  • the screen 221C shown in FIG. 25 is an example of a screen displayed on the display device 202 of the mobile terminal 200 after the operation button 225c is operated on the screen 221B.
  • the screen 221C has a display area 222C, 223, and an operation button group 225, 226.
  • the display area 222C displays an image in which the link model 222d and the link model 222d'extracted from the diagnostic moving image data generated from the state recording data 280'acquired in the past are superimposed.
  • the link model is based on the elapsed time from the start of recording the moving image data included in the state recording data 280 to the appearance of the still image that is the source of the link model 222d, and the start of recording the moving image data included in the state recording data 280'. The elapsed time until the still image that is the source of 222d'appears is the same.
  • the excavator 100 when the operation performed by the excavator 100 is a specified operation, the excavator 100 operates based on the same command value at each time, so that the link model 222d and the link model 222d ′ match. Therefore, if the link model 222d and the link model 222d'do not match, it is presumed that some abnormality has occurred in the excavator 100 or that the aircraft is deteriorating.
  • the screen 221C may display a message indicating that the failure of the excavator 100 or the progress of deterioration of the airframe is presumed as the diagnosis result of the diagnosis unit 340.
  • the diagnostic unit 340 of the present embodiment diagnoses that the airframe has deteriorated when the deviation width between the link model 222d and the link model 222d'is less than a predetermined threshold value, and when it is equal to or more than the predetermined threshold value. May be diagnosed as having an abnormality in the aircraft.
  • the user of the mobile terminal 200 can see the difference in the operation speed, vibration, etc. of the excavator 100 at each time. Can be grasped against.
  • the diagnostic moving image data generated from the state recording data 280 acquired at different times it is possible to compare the diagnostic moving image data generated from the state recording data 280 acquired at different times. Therefore, for example, by comparing the state record data 280 acquired when the excavator 100 has an abnormality with the state record data 280 acquired after repairing the excavator 100, whether or not the repair is completed. This can be confirmed by the user of the mobile terminal 200.
  • waveform data of the same item of state quantity information may be acquired from each of the state record data 280 acquired at different times, and the waveform data may be superimposed and compared.
  • FIG. 26 is a first diagram showing an example of a display example of the evaluation result.
  • the screen 261 shown in FIG. 26 is an example of the evaluation result screen displayed on the display device 202 of the mobile terminal 200 in step S222 of FIG.
  • the screen 261 has display areas 262, 263, and 264.
  • a part of the bibliographic information of the excavator 100 that is the target of the evaluation of the operation and the diagnosis result by the diagnosis unit 340 are displayed.
  • the information displayed in the display area 262 is not limited to this.
  • the display area 262 may include at least the machine number of the excavator 100 among the bibliographic information included in the state recording data 280.
  • the display area 263 shows the waveform for each item of the state quantity information included in the state record data 280.
  • the item of the state quantity information displayed in the display area 263 may be an item indicated by the display item information included in the state record data 280.
  • the waveform displayed in the display area 263 may be a waveform of an average value calculated each time a sensor detection value is acquired.
  • the waveform of the item diagnosed as having an abnormality may be displayed on 263 as compared with the state quantity information acquired in the past normal state. In that case, a message indicating that the item is diagnosed as having an abnormality may be displayed in the display area 263.
  • an item having a different waveform may be specified by comparing with the state quantity information included in the past state recording data 280', and the waveform of the specified item may be displayed in the display area 263.
  • the display area 263 may display a message indicating that the item displayed in the display area 263 is an item to be confirmed with priority.
  • the item of the state quantity information diagnosed as having an abnormality and the item of the state quantity information to be confirmed preferentially are displayed. This makes it possible for the user of the mobile terminal 200 to grasp the items to be confirmed.
  • the display area 264 displays a radar chart centered on the items included in the state quantity information.
  • the item displayed in the display area 264 may be the same as the item in which the waveform is displayed in the display area 263. Further, the item displayed in the display area 264 may be an item indicated by the display item information.
  • the user of the mobile terminal 200 can easily grasp the balance of the operations of each part of the excavator 100.
  • FIG. 27 is a second diagram showing an example of a display example of the evaluation result.
  • the screen 271 shown in FIG. 27 is a display example of the evaluation result when the toe position at the start of the operation in the “horizontal pulling operation” and the position of the toe after the start of the operation are compared as one of the operation evaluations.
  • the "horizontal pulling operation” is one of the specified operations.
  • the screen 271 has display areas 272 and 273. In the display area 272, the image 272a of the excavator 100, the image 272b of the bucket 6, and the elapsed time display bar 272c are displayed.
  • the image 272b of the excavator 100 is a still image of the excavator 100 at the time indicated by the elapsed time display bar 272c, and the image 272b is an image showing the position of the bucket 6 in the still image of the excavator 100 at the start of reproduction of the moving image data. ..
  • the graph 273a and the information 273b indicating the type of the value shown in the graph are displayed.
  • the graph 273a is a graph in which the vertical axis represents a command value, the angle sensor detection value, and the image discrimination value, and the horizontal axis represents time.
  • the items whose values are shown in the graph are the command value, the detection value of the angle sensor, and the image discrimination value
  • the dotted line in the graph corresponds to the image discrimination value
  • the solid line corresponds to the detection value
  • the alternate long and short dash line Indicates that corresponds to the command value.
  • the image discrimination value of the present embodiment is a value indicating the difference between the position of the toe of the image 272a displayed in the display area 272 and the position of the toe of the image 272b. More specifically, the image discrimination value is a value indicating the difference between the height of the toe of the image 272a and the height of the toe of the image 272b.
  • the actual operation of the excavator 100 when the control to perform the specified operation is performed in the excavator 100 is performed.
  • the user of the mobile terminal 200 can be made to grasp. Further, in the present embodiment, it is possible to make the user of the mobile terminal 200 grasp a state in which the actual operation deviates from the specified operation even though the excavator 100 is controlled to perform the specified operation. ..
  • the excavator 100 controls the specified operation in the display area 273, the actual operation is different from the specified operation, and the angle sensor needs to be calibrated. A message or the like indicating that there is may be displayed.
  • the screen 271 may display an operation button for instructing the excavator 100 to calibrate the angle sensor.
  • the mobile terminal 200 may transmit the calibration instruction of the reference value of the angle sensor to the excavator 100 together with the information for identifying the angle sensor that needs to be calibrated. Good.
  • the mobile terminal 200 may calculate the deviation width of the reference value of the angle sensor based on the image discrimination value and transmit it to the excavator 100 together with the calibration instruction.
  • the excavator 100 calibrates the angle sensor in response to this calibration instruction.
  • the deviation width of the reference value may be calculated by the operation evaluation unit 350 of the management device 300.
  • the deviation width of the reference value is transmitted from the management device 300 to the mobile terminal 200 as a part of the evaluation result of the operation evaluation unit 350.
  • FIG. 28 is a third diagram showing an example of a display example of the evaluation result.
  • the screen 281 shown in FIG. 28 identifies the position of a predetermined portion of the excavator 100 from images of the excavator 100 in several postures and compares the positions of the predetermined portion for each posture as one of the motion evaluations. This is a display example of the evaluation result of the case.
  • the process described with reference to FIG. 28 may be mainly executed by the mobile terminal 200.
  • the screen 281 has display areas 282 and 283.
  • an image 282a of the excavator 100 in a certain posture and an image 282b of the bucket 6 of the excavator 100 in another posture are displayed.
  • the image of the excavator 100 in a certain posture may be extracted from the moving image data included in the state recording data 280.
  • Table 283a and operation buttons 283b and 283c are displayed in the display area 283.
  • Table 283a is a table in which coordinate values indicating the positions of predetermined parts of the excavator 100 in the image of the excavator 100 for each posture are displayed.
  • the operation button 283b is an operation button for acquiring coordinate values indicating the positions of predetermined parts from the image of the excavator 100 for each posture.
  • the operation button 283c is an operation button for transmitting the coordinate values displayed in Table 283a to the excavator 100.
  • Table 283a may be displayed in the display area 282.
  • Table 283a may include coordinate values indicating the positions of parts other than the parts of the excavator 100 displayed in the display area 282, and information about postures other than the postures displayed in the display area 282.
  • the coordinates of the part other than the part displayed in the display area 282 of FIG. 28 and the display of the part shown in FIG. 28 are displayed. Coordinate values can be confirmed for postures other than the posture displayed in the area 282.
  • the predetermined parts of the excavator 100 are the boom foot, the boom top, the arm foot, the arm top, the bucket pin, and the toe of the bucket.
  • the image 282b is an image showing the position of the bucket 6 when the posture indicated by the image of the excavator 100 displayed in the display area 282 is the “posture 1”.
  • the operation button 283b is operated when the posture indicated by the image of the excavator 100 displayed in the display area 282 is "posture 1"
  • the boom foot, boom top, arm foot, and arm foot in the image at this time
  • Coordinates indicating the positions of the arm top, the bucket pin, and the toe of the bucket are acquired and displayed in Table 284a.
  • Image 282a is an image of the excavator 100 when the posture of the excavator 100 is "posture 2".
  • the operation button 283b When the operation button 283b is operated in this state, coordinate values indicating the positions of the boom foot, boom top, arm foot, arm top, bucket pin, and toe of the bucket in the image 282a are acquired.
  • the posture of the excavator 100 such as "posture 1" and "posture 2" may be a predetermined posture. Further, in the present embodiment, the process of acquiring the coordinate values may be performed by the mobile terminal 200.
  • the mobile terminal 200 of the present embodiment acquires the coordinate values of each part for each posture, and when the operation button 283 is operated, it transmits information indicating the acquired coordinate values for each posture to the excavator 100.
  • the excavator 100 When the excavator 100 receives the information indicating the coordinate values of the predetermined parts for each posture, the excavator 100 calibrates various parameters based on this information.
  • the various parameters are, for example, the length and angle between predetermined parts in a certain posture.
  • the excavator 100 may send a notification indicating that the calibration is completed and each parameter and value after the calibration to the mobile terminal 200.
  • the calibrated parameter may be transmitted to the management device 300 and stored in the management information database 310.
  • the mobile terminal 200 of the present embodiment acquires the coordinate values of each part for each posture, it acquires the detected value of the sensor when the image of each posture is captured from the state quantity information, and obtains the coordinate values of each part.
  • a calibration instruction may be transmitted to the excavator 100 based on the detection value included in the state quantity information.
  • the image of the excavator 100 having a predetermined posture is acquired from the moving image data included in the state recording data 280, but the present invention is not limited to this.
  • the image pickup device 208 may capture an image of the shovel 100.
  • a signal indicating that an image is to be captured may be transmitted to the excavator 100.
  • the excavator 100 may receive this signal and maintain a certain posture.
  • a signal notifying the mobile terminal 200 may be transmitted.
  • the user of the mobile terminal 200 may take an image of the excavator 100 by the image pickup apparatus 208 after the mobile terminal 200 receives this notification.
  • the image of the excavator 100 (including the moving image and the still image) captured by the mobile terminal 200 and the operation data received from the excavator 100 during the period of capturing the image of the excavator 100 are combined.
  • the operation of the excavator 100 is diagnosed and evaluated using the associated state record data 280.
  • the mobile terminal 200 may have the functions of the diagnosis unit 340 and the operation evaluation unit 350 of the management device 300. In that case, the mobile terminal 200 may transmit the information indicating the diagnosis result and the information indicating the evaluation result to the management device 300 by the communication control unit 220 together with the state recording data 280.
  • the mobile terminal 200 has a function of transmitting a moving image of the excavator 100, but the present invention is not limited to this, and the mobile terminal 200 has a function of transmitting a moving image of the excavator 100. It doesn't have to be.
  • the mobile terminal 200 has a function of displaying the moving image of the excavator 100 and the state quantity information of the excavator 100 in synchronization with each other, but the present invention is not limited to this.
  • the 200 does not have to have a function of displaying the moving image of the excavator 100 and the state quantity information of the excavator 100 in synchronization with each other.
  • the mobile terminal 200 can display both the moving image of the excavator 100 and the state quantity information of the excavator 100, but the present invention is not limited to this, and the mobile terminal 200 starts the moving image.
  • the request signal may be transmitted to the excavator 100
  • the state quantity information may be acquired from the excavator 100
  • only the state quantity information may be displayed.
  • the excavator 100 transmits a plurality of types of state quantity information to the mobile terminal 200 in real time, but the excavator 100 is not limited to this, and the excavator 100 can be used at an arbitrary timing (for example, the excavator 100).
  • a plurality of types of state quantity information may be collectively transmitted to the mobile terminal 200 at the timing when the recording of the moving image is completed, the timing when the predetermined recording time has elapsed, the timing when the predetermined amount of state quantity information is acquired, etc.). ..
  • Controller 31 Acquisition unit 32 Reception control unit 33 Transmission control unit 100 Excavator 200 Mobile terminal (Mobile terminal for excavator) 210 Input reception 220 Communication control unit 230 Display control unit 240 Imaging control unit 250 Storage unit 260 Playback unit 270 Storage unit 280 Status recording data 300 Management device 310 Management information database 320 Data acquisition unit 330 Data storage unit 340 Diagnosis unit 350 Operation evaluation unit 360 data output unit SYS excavator management system

Abstract

複数のセンサによって検出されたショベルの状態量を表す状態量情報を取得するショベルと、携帯端末とを備え、前記携帯端末は、前記状態量情報の送信を要求するための要求信号を前記ショベルへ送信する通信制御部を有する、ショベル管理システムである。

Description

ショベル管理システム、ショベル用携帯端末、およびショベル用携帯端末に用いられるプログラム
 本開示は、ショベル管理システム、ショベル用携帯端末、およびショベル用携帯端末に用いられるプログラムに関する。
 特許文献1には、撮像装置によって撮像された油圧ショベルの画像データのうち、センサで検出された検出値が異常と判定されたときの画像データを、記憶装置に格納することにより、当該画像データを出力装置で確認できるようにした技術が開示されている。
国際公開第2012/157603号
 しかしながら、従来技術は、異常と判定された時点の前後の期間における画像のみを操作者、管理者等の利用者が確認できるようにしている。すなわち、従来技術は、異常が発生したときのみ利用者が画像を確認できるようにしている。また、従来技術では、利用者は、作業現場において、携帯端末でショベルの稼働データを確認できない。
 本開示は、ショベルが動作していたときの状態を確認できるようにすることを目的とする。
 実施形態に係るショベル管理システムは、複数のセンサによって検出されたショベルの状態量を表す状態量情報を取得するショベルと、携帯端末とを備え、前記携帯端末は、前記状態量情報の送信を要求するための要求信号を前記ショベルへ送信する通信制御部を有する、ショベル管理システムである。
 ショベルが動作していたときの状態を確認できる。
一実施形態に係るショベル管理システムの構成例を示す概略図である。 ショベルに搭載される油圧システムの構成例を示す図である。 ショベルの電気式操作システムの構成の一例を概略的に示す図である。 携帯端末のハードウェア構成の一例を示す図である。 携帯端末の機能を説明する図である。 携帯端末の処理を説明する第一のフローチャートである。 ショベルの一覧画面の一例を示す図である。 状態量情報の項目を指定する項目指定画面の一例を示す図である。 有人動作または無人動作の選択画面の一例を示す図である。 確認画面の一例を示す図である。 ショベルの動作の一覧画面の一例を示す図である。 動画の撮像画面の一例を示す第一の図である。 動画の撮像画面の一例を示す第二の図である。 携帯端末の処理を説明する第二のフローチャートである。 再生画面の一例を示す第一の図である。 再生画面の一例を示す第二の図である。 再生画面の一例を示す第三の図である。 他の実施形態に係るショベル管理システムの構成例を示す概略図である。 管理装置のハードウェア構成の一例を示す図である。 管理装置の機能構成の一例を示す図である。 管理システムの動作を説明するシーケンス図である。 診断用動画データの再生画面の一例を示す第一の図である。 診断用動画データの再生画面の一例を示す第二の図である。 診断用動画データの再生画面の一例を示す第三の図である。 診断用動画データの再生画面の一例を示す第四の図である。 評価結果の表示例の一例を示す第一の図である。 評価結果の表示例の一例を示す第二の図である。 評価結果の表示例の一例を示す第三の図である。
 以下、図面を参照して、一実施形態について説明する。
 (実施形態)
 図1は、一実施形態に係るショベル管理システムの構成例を示す概略図である。図1に示すショベル管理システムSYSは、携帯端末200(「ショベル用携帯端末」の一例)を利用してショベルの状態量を管理するシステムである。ショベル管理システムSYSは、ショベル100および携帯端末200を備える。
 ショベル100は、下部走行体1、旋回機構2、上部旋回体3、ブーム4、アーム5、バケット6、ブームシリンダ7、アームシリンダ8、バケットシリンダ9、キャビン10、およびエンジン11を備える。
 上部旋回体3は、旋回機構2を介して、下部走行体1に旋回可能に搭載されている。ブーム4は、上部旋回体3に取り付けられている。アーム5は、ブーム4の先端に取り付けられている。バケット6は、アーム5の先端に取り付けられている。
 ブーム4、アーム5、およびバケット6は、掘削アタッチメントを構成する。ブーム4、アーム5、およびバケット6は、それぞれ、ブームシリンダ7、アームシリンダ8、およびバケットシリンダ9により、油圧駆動される。キャビン10およびエンジン11は、上部旋回体3に搭載されている。
 また、ショベル100は、送信装置S1、受信装置S2、測位装置S3、姿勢検出装置S4、向き検出装置S5、カメラS6、マイクS7、物体検知装置S8および表示装置45を備える。
 送信装置S1は、無線通信により、ショベル100の外部の装置に対して、情報を送信する。例えば、送信装置S1は、携帯端末200からの要求に応じて、ショベル100の状態量を表す状態量情報を、携帯端末200に向けて発信する。状態量情報とは、センサによって一定の時間間隔で連続的に取得された複数の状態量を、時系列に表すものである。より具体的には、本実施形態の状態量情報は、姿勢検出装置S4、向き検出装置S5、周辺管理装置としてのカメラS6、マイクS8、物体検知装置S8のそれぞれから出力された値を含む。
 また、本実施形態の送信装置S1は、状態量情報を含む稼働データを携帯端末200に向けて発信してもよい。稼働データには、状態量情報、ショベル100に設定された各種の設定条件を示す設定条件情報、ショベル100を特定するための機番等が含まれる。
 受信装置S2は、無線通信により、ショベル100の外部の装置から、情報を受信する。例えば、受信装置S2は、携帯端末200から送信された、ショベル100の状態量を表す状態量情報を要求するための要求信号を受信する。
 測位装置S3は、ショベル100の位置に関する情報を取得する。本実施形態では、測位装置S3は、GNSS(GPS)受信機であり、ショベル100の存在位置の緯度、経度、高度を測定できる。
 姿勢検出装置S4は、ショベル100が備える掘削アタッチメントの姿勢を検出する。本実施形態では、姿勢検出装置S4として、ブーム角度を検出するブーム角度センサ、アーム角度を検出するアーム角度センサ、バケット角度を検出するバケット角度センサ、および、上部旋回体3の傾斜角度を検出する機体傾斜センサが用いられている。ブーム角度センサは、例えば、ロータリエンコーダ、加速度センサ、6軸センサ、IMU(Inertial Measurement Unit:慣性計測装置)等を含んでよく、以下、アーム角度センサ、バケット角度センサ、機体傾斜センサについても同様である。姿勢検出装置S4により検出される検出信号は、コントローラ30に取り込まれる。
 向き検出装置S5は、ショベル100の向きを検出する。向き検出装置S5としては、例えば、地磁気センサ、旋回機構2の旋回軸に関するレゾルバもしくはエンコーダ、または、ジャイロセンサ等が用いられる。このようにして、作業部位としてもバケットの爪先位置や背面位置を算出することができる。作業部位の位置情報に用いる基準座標系は、例えば、世界測地系を用いてもよい。
 周辺監視装置としてのカメラS6は、ショベル100の周囲の所定距離内に存在する物体を検知するように構成されている。物体は、例えば、人、動物、車両、建設機械、建造物、壁、柵、又は穴等を含むである。周辺監視装置は、例えば、超音波センサ、ミリ波レーダ、ステレオカメラ、LIDAR、距離画像センサ、又は赤外線センサ等を含む。本実施形態では、周辺監視装置としてカメラS6を示す。カメラS6は、上部旋回体3に設けられており、ショベル100の周囲の画像を撮像する。本実施形態のショベル100は、複数のカメラS6を備えており、当該複数のカメラS6により、ショベル100の複数方向(例えば、前方、後方、右側方、および左側方)の画像を撮像できる。
 マイクS7は、上部旋回体3に設けられており、ショベル100の発する動作音を取得する。マイクS7は、上部旋回体3における複数の個所の各々に設けられてもよい。
 物体検知装置S8は、ショベル100の周囲に存在する物体を検知するように構成されている。また、物体検知装置S8は、物体検知装置S8又はショベル100から認識された物体までの距離を算出するように構成されていてもよい。物体は、例えば、人、動物、車両、建設機械、建造物、穴等を含む。物体検知装置S8は、例えば、超音波センサ、ミリ波レーダ、ステレオカメラ、LIDAR、距離画像センサ、赤外線センサ等を含む。本実施形態では、物体検知装置S8は、キャビン10の上面前端、上部旋回体3の上面後端、上部旋回体3の上面左端、及び、上部旋回体3の上面右端に取り付けられる。
 物体検知装置S8は、ショベル100の周囲に設定された所定領域内の所定物体を検知するように構成されていてもよい。例えば、人と人以外の物体とを区別できるように構成されていてもよい。
 表示装置45は、キャビン10内の運転席の近傍に配置されており、各種情報を表示する。例えば、表示装置45は、カメラS6によって撮像された画像を表示する。表示装置45は、複数のカメラS6によって撮像された複数の画像の合成画像を表示することもできる。また、表示装置45は、視点変換処理等の各種画像処理が施された合成画像を表示することもできる。
 携帯端末200は、ユーザによって携帯される電子機器である。携帯端末200としては、例えば、スマートフォン、ビデオカメラ、携帯電話、ノートパソコン、タブレット端末、スマートグラス等が用いられる。本実施形態では、携帯端末200として、スマートフォンが用いられている。
 本実施形態のショベル管理システムSYSにおいて、携帯端末200は、ショベル100が動作している状態の動画を撮像する。また、本実施形態の携帯端末200は、ショベル100に対して状態量情報の取得要求を送信し、ショベル100から状態量情報を受信する。
 このとき、携帯端末200は、動画の撮像を開始するタイミングと、ショベル100からの状態量情報の受信するタイミングとを同期させ、撮像した動画を示す動画データと、状態量情報とを対応づけた状態記録データとして保持する。
 また、本実施形態の携帯端末200は、音声入出力装置203により、動画の撮像と同時に入力される音声を録音してもよい。また、録音された音声を示す音声データは、動画データと、状態量情報と対応づけられて、保持されてもよい。
 つまり、状態記録データは、ショベル100の状態量情報と設計条件情報とを含む稼働データと、ショベル100が動作する様子を撮像した動画データと、ショベル100が動作する際に録音された音声データとを含む。言い換えれば、状態記録データは、状態量情報と、ショベル100の動画と動画の撮像中の音声と含む映像を示す映像データとを含む。
 したがって、本実施形態の状態記録データとは、ショベル100が動作していたときの状態量情報、設定条件情報、動作中のショベル100を撮像した動画データ、音声データを含む情報であり、ショベル100の動作していたときの状態を示す情報と言える。
 なお、本実施形態では、動画データに、音声入出力装置203によって録音された音声データが含まれてもよい。以下の説明では、動画データは、音声入出力装置203から入力された音声データを含むデータとするが、動画データと音声データとは、個別のデータとして管理されてもよい。携帯端末200の詳細は後述する。
 次に、図2を参照し、ショベル100に搭載される油圧システムの構成例について説明する。図2は、ショベルに搭載される油圧システムの構成例を示す図である。図2は、機械的動力伝達系、作動油ライン、パイロットライン、および電気制御系を、それぞれ二重線、実線、破線、および点線で示している。
 ショベル100の油圧システムは、主に、エンジン11、レギュレータ13、メインポンプ14、パイロットポンプ15、コントロールバルブ17、操作装置26、吐出圧センサ28、操作圧センサ29、およびコントローラ30等を含む。
 図2において、油圧システムは、エンジン11によって駆動されるメインポンプ14から、センターバイパス管路40又はパラレル管路42を経て作動油タンクまで作動油を循環させている。
 エンジン11は、ショベル100の駆動源である。本実施形態では、エンジン11は、例えば、所定の回転数を維持するように動作するディーゼルエンジンである。エンジン11の出力軸は、メインポンプ14およびパイロットポンプ15のそれぞれの入力軸に連結されている。
 メインポンプ14は、作動油ラインを介して作動油をコントロールバルブ17に供給するように構成されている。本実施形態では、メインポンプ14は、斜板式可変容量型油圧ポンプである。
 レギュレータ13は、メインポンプ14の吐出量(押し退け容積)を制御するように構成されている。本実施形態では、レギュレータ13は、コントローラ30からの制御指令に応じてメインポンプ14の斜板傾転角を調節することによってメインポンプ14の吐出量(押し退け容積)を制御する。
 パイロットポンプ15は、パイロットラインを介して操作装置26を含む油圧制御機器に作動油を供給するように構成されている。本実施形態では、パイロットポンプ15は、固定容量型油圧ポンプである。但し、パイロットポンプ15は、省略されてもよい。この場合、パイロットポンプ15が担っていた機能は、メインポンプ14によって実現されてもよい。すなわち、メインポンプ14は、コントロールバルブ17に作動油を供給する機能とは別に、絞り等により作動油の圧力を低下させた後で操作装置26等に作動油を供給する機能を備えていてもよい。
 コントロールバルブ17は、油圧システムにおける作動油の流れを制御するように構成されている。本実施形態では、コントロールバルブ17は、制御弁171~176を含む。制御弁175は、制御弁175Lおよび制御弁175Rを含み、制御弁176は、制御弁176Lおよび制御弁176Rを含む。コントロールバルブ17は、制御弁171~176を通じ、メインポンプ14が吐出する作動油を1又は複数の油圧アクチュエータに選択的に供給できる。制御弁171~176は、メインポンプ14から油圧アクチュエータに流れる作動油の流量、および、油圧アクチュエータから作動油タンクに流れる作動油の流量を制御する。油圧アクチュエータは、ブームシリンダ7、アームシリンダ8、バケットシリンダ9、左走行用油圧モータ2ML、右走行用油圧モータ2MR、および旋回用油圧モータ2Aを含む。
 操作装置26は、操作者がアクチュエータの操作のために用いる装置である。アクチュエータは、油圧アクチュエータおよび電動アクチュエータの少なくとも一方を含む。本実施形態では、操作装置26は、パイロットラインを介して、パイロットポンプ15が吐出する作動油を、コントロールバルブ17内の対応する制御弁のパイロットポートに供給する。パイロットポートのそれぞれに供給される作動油の圧力(パイロット圧)は、油圧アクチュエータのそれぞれに対応する操作装置26のレバー又はペダル(図示せず)の操作方向および操作量に応じた圧力である。但し、操作装置26は、上述のようなパイロット圧式ではなく、電気制御式であってもよい。この場合、コントロールバルブ17内の制御弁は、電磁ソレノイド式スプール弁であってもよい。
 吐出圧センサ28は、メインポンプ14の吐出圧を検出するように構成されている。本実施形態では、吐出圧センサ28は、検出した値をコントローラ30に対して出力する。
 操作圧センサ29は、操作者による操作装置26の操作の内容を検出するように構成されている。本実施形態では、操作圧センサ29は、アクチュエータのそれぞれに対応する操作装置26のレバー又はペダルの操作方向および操作量を圧力(操作圧)の形で検出し、検出した値を操作データとしてコントローラ30に対して出力する。操作装置26の操作の内容は、操作圧センサ以外の他のセンサを用いて検出されてもよい。
 メインポンプ14は、左メインポンプ14Lおよび右メインポンプ14Rを含む。左メインポンプ14Lは、左センターバイパス管路40L又は左パラレル管路42Lを経て作動油タンクまで作動油を循環させるように構成されている。右メインポンプ14Rは、右センターバイパス管路40R又は右パラレル管路42Rを経て作動油タンクまで作動油を循環させるように構成されている。
 左センターバイパス管路40Lは、コントロールバルブ17内に配置された制御弁171、173、175L、および176Lを通る作動油ラインである。右センターバイパス管路40Rは、コントロールバルブ17内に配置された制御弁172、174、175R、および176Rを通る作動油ラインである。
 制御弁171は、左メインポンプ14Lが吐出する作動油を左走行用油圧モータ2MLへ供給し、且つ、左走行用油圧モータ2MLが吐出する作動油を作動油タンクへ排出するために作動油の流れを切り換えるスプール弁である。
 制御弁172は、右メインポンプ14Rが吐出する作動油を右走行用油圧モータ2MRへ供給し、且つ、右走行用油圧モータ2MRが吐出する作動油を作動油タンクへ排出するために作動油の流れを切り換えるスプール弁である。
 制御弁173は、左メインポンプ14Lが吐出する作動油を旋回用油圧モータ2Aへ供給し、且つ、旋回用油圧モータ2Aが吐出する作動油を作動油タンクへ排出するために作動油の流れを切り換えるスプール弁である。
 制御弁174は、右メインポンプ14Rが吐出する作動油をバケットシリンダ9へ供給し、且つ、バケットシリンダ9内の作動油を作動油タンクへ排出するために作動油の流れを切り換えるスプール弁である。
 制御弁175Lは、左メインポンプ14Lが吐出する作動油をブームシリンダ7へ供給するために作動油の流れを切り換えるスプール弁である。制御弁175Rは、右メインポンプ14Rが吐出する作動油をブームシリンダ7へ供給し、且つ、ブームシリンダ7内の作動油を作動油タンクへ排出するために作動油の流れを切り換えるスプール弁である。
 制御弁176Lは、左メインポンプ14Lが吐出する作動油をアームシリンダ8へ供給し、且つ、アームシリンダ8内の作動油を作動油タンクへ排出するために作動油の流れを切り換えるスプール弁である。
 制御弁176Rは、右メインポンプ14Rが吐出する作動油をアームシリンダ8へ供給し、且つ、アームシリンダ8内の作動油を作動油タンクへ排出するために作動油の流れを切り換えるスプール弁である。
 左パラレル管路42Lは、左センターバイパス管路40Lに並行する作動油ラインである。左パラレル管路42Lは、制御弁171、173、又は175Lの何れかによって左センターバイパス管路40Lを通る作動油の流れが制限或いは遮断された場合に、より下流の制御弁に作動油を供給できる。右パラレル管路42Rは、右センターバイパス管路40Rに並行する作動油ラインである。右パラレル管路42Rは、制御弁172、174、又は175Rの何れかによって右センターバイパス管路40Rを通る作動油の流れが制限或いは遮断された場合に、より下流の制御弁に作動油を供給できる。
 レギュレータ13は、左レギュレータ13Lおよび右レギュレータ13Rを含む。左レギュレータ13Lは、左メインポンプ14Lの吐出圧に応じて左メインポンプ14Lの斜板傾転角を調節することによって、左メインポンプ14Lの吐出量を制御する。具体的には、左レギュレータ13Lは、例えば、左メインポンプ14Lの吐出圧の増大に応じて左メインポンプ14Lの斜板傾転角を調節して吐出量を減少させる。右レギュレータ13Rについても同様である。これは、吐出圧と吐出量との積で表されるメインポンプ14の吸収馬力がエンジン11の出力馬力を超えないようにするためである。
 操作装置26は、左操作レバー26L、右操作レバー26R、および走行レバー26Dを含む。走行レバー26Dは、左走行レバー26DLおよび右走行レバー26DRを含む。
 左操作レバー26Lは、旋回操作とアーム5の操作に用いられる。左操作レバー26Lは、前後方向に操作されると、パイロットポンプ15が吐出する作動油を利用し、レバー操作量に応じた制御圧を制御弁176のパイロットポートに作用させる。また、左右方向に操作されると、パイロットポンプ15が吐出する作動油を利用し、レバー操作量に応じた制御圧を制御弁173のパイロットポートに作用させる。
 具体的には、左操作レバー26Lは、アーム閉じ方向に操作された場合に、制御弁176Lの右側パイロットポートに作動油を導入させ、且つ、制御弁176Rの左側パイロットポートに作動油を導入させる。また、左操作レバー26Lは、アーム開き方向に操作された場合には、制御弁176Lの左側パイロットポートに作動油を導入させ、且つ、制御弁176Rの右側パイロットポートに作動油を導入させる。また、左操作レバー26Lは、左旋回方向に操作された場合に、制御弁173の左側パイロットポートに作動油を導入させ、右旋回方向に操作された場合に、制御弁173の右側パイロットポートに作動油を導入させる。
 右操作レバー26Rは、ブーム4の操作とバケット6の操作に用いられる。右操作レバー26Rは、前後方向に操作されると、パイロットポンプ15が吐出する作動油を利用し、レバー操作量に応じた制御圧を制御弁175のパイロットポートに作用させる。また、左右方向に操作されると、パイロットポンプ15が吐出する作動油を利用し、レバー操作量に応じた制御圧を制御弁174のパイロットポートに作用させる。
 具体的には、右操作レバー26Rは、ブーム下げ方向に操作された場合に、制御弁175Rの右側パイロットポートに作動油を導入させる。また、右操作レバー26Rは、ブーム上げ方向に操作された場合には、制御弁175Lの右側パイロットポートに作動油を導入させ、且つ、制御弁175Rの左側パイロットポートに作動油を導入させる。また、右操作レバー26Rは、バケット閉じ方向に操作された場合に、制御弁174の左側パイロットポートに作動油を導入させ、バケット開き方向に操作された場合に、制御弁174の右側パイロットポートに作動油を導入させる。
 走行レバー26Dは、クローラ1Cの操作に用いられる。具体的には、左走行レバー26DLは、左クローラ1CLの操作に用いられる。左走行レバー26DLは、左走行ペダルと連動するように構成されていてもよい。左走行レバー26DLは、前後方向に操作されると、パイロットポンプ15が吐出する作動油を利用し、レバー操作量に応じた制御圧を制御弁171のパイロットポートに作用させる。右走行レバー26DRは、右クローラ1CRの操作に用いられる。右走行レバー26DRは、右走行ペダルと連動するように構成されていてもよい。右走行レバー26DRは、前後方向に操作されると、パイロットポンプ15が吐出する作動油を利用し、レバー操作量に応じた制御圧を制御弁172のパイロットポートに作用させる。
 吐出圧センサ28は、吐出圧センサ28Lおよび吐出圧センサ28Rを含む。吐出圧センサ28Lは、左メインポンプ14Lの吐出圧を検出し、検出した値をコントローラ30に対して出力する。吐出圧センサ28Rは、右メインポンプ14Rの吐出圧を検出し、検出した値をコントローラ30に対して出力する。
 操作圧センサ29は、操作圧センサ29LA、29LB、29RA、29RB、29DL、29DRを含む。操作圧センサ29LAは、操作者による左操作レバー26Lに対する前後方向への操作の内容を圧力の形で検出し、検出した値をコントローラ30に対して出力する。操作の内容は、例えば、レバー操作方向およびレバー操作量(レバー操作角度)等である。
 同様に、操作圧センサ29LBは、操作者による左操作レバー26Lに対する左右方向への操作の内容を圧力の形で検出し、検出した値をコントローラ30に対して出力する。操作圧センサ29RAは、操作者による右操作レバー26Rに対する前後方向への操作の内容を圧力の形で検出し、検出した値をコントローラ30に対して出力する。操作圧センサ29RBは、操作者による右操作レバー26Rに対する左右方向への操作の内容を圧力の形で検出し、検出した値をコントローラ30に対して出力する。操作圧センサ29DLは、操作者による左走行レバー26DLに対する前後方向への操作の内容を圧力の形で検出し、検出した値をコントローラ30に対して出力する。操作圧センサ29DRは、操作者による右走行レバー26DRに対する前後方向への操作の内容を圧力の形で検出し、検出した値をコントローラ30に対して出力する。
 コントローラ30は、操作圧センサ29の出力を受信し、必要に応じてレギュレータ13に対して制御指令を出力し、メインポンプ14の吐出量を変化させる。また、コントローラ30は、絞り18の上流に設けられた制御圧センサ19の出力を受信し、必要に応じてレギュレータ13に対して制御指令を出力し、メインポンプ14の吐出量を変化させる。絞り18は左絞り18Lおよび右絞り18Rを含み、制御圧センサ19は左制御圧センサ19Lおよび右制御圧センサ19Rを含む。
 左センターバイパス管路40Lには、最も下流にある制御弁176Lと作動油タンクとの間に左絞り18Lが配置されている。そのため、左メインポンプ14Lが吐出した作動油の流れは、左絞り18Lで制限される。そして、左絞り18Lは、左レギュレータ13Lを制御するための制御圧を発生させる。左制御圧センサ19Lは、この制御圧を検出するためのセンサであり、検出した値をコントローラ30に対して出力する。コントローラ30は、この制御圧に応じて左メインポンプ14Lの斜板傾転角を調節することによって、左メインポンプ14Lの吐出量を制御する。コントローラ30は、この制御圧が大きいほど左メインポンプ14Lの吐出量を減少させ、この制御圧が小さいほど左メインポンプ14Lの吐出量を増大させる。右メインポンプ14Rの吐出量も同様に制御される。
 具体的には、図2で示されるようにショベル100における油圧アクチュエータが何れも操作されていない待機状態の場合、左メインポンプ14Lが吐出する作動油は、左センターバイパス管路40Lを通って左絞り18Lに至る。そして、左メインポンプ14Lが吐出する作動油の流れは、左絞り18Lの上流で発生する制御圧を増大させる。その結果、コントローラ30は、左メインポンプ14Lの吐出量を許容最小吐出量まで減少させ、左メインポンプ14Lが吐出した作動油が左センターバイパス管路40Lを通過する際の圧力損失(ポンピングロス)を抑制する。
 一方、何れかの油圧アクチュエータが操作された場合、左メインポンプ14Lが吐出する作動油は、操作対象の油圧アクチュエータに対応する制御弁を介して、操作対象の油圧アクチュエータに流れ込む。そして、左メインポンプ14Lが吐出する作動油の流れは、左絞り18Lに至る量を減少或いは消失させ、左絞り18Lの上流で発生する制御圧を低下させる。その結果、コントローラ30は、左メインポンプ14Lの吐出量を増大させ、操作対象の油圧アクチュエータに十分な作動油を流入させ、操作対象の油圧アクチュエータの駆動を確かなものとする。なお、コントローラ30は、右メインポンプ14Rの吐出量も同様に制御する。
 なお、コントローラ30は、ブームシリンダ7のロッド側油室の圧力を検出する圧力センサ7Aと、ブームシリンダ7のボトム側油室の圧力を検出する圧力センサ7Bと、アームシリンダ8のロッド側油室の圧力を検出する圧力センサ8Aと、アームシリンダ8のボトム側油室の圧力を検出する圧力センサ8Bと、バケットシリンダ9のロッド側油室の圧力を検出する圧力センサ9Aと、バケットシリンダ9のボトム側油室の圧力を検出する圧力センサ9Bとの各々の検出値を受信する。これにより、コントローラ30は、ブームシリンダ7、アームシリンダ8、およびバケットシリンダ9の各々の、ロッド側油室およびボトム側油室の圧力を検知できる。
 また、コントローラ30は、旋回用油圧モータ2Aの左旋回時の油圧を検出する圧力センサ2AAと、旋回用油圧モータ2Aの右旋回時の油圧を検出する圧力センサ2ABとの各々の検出値を受信する。これにより、コントローラ30は、旋回用油圧モータ2Aの左旋回時および右旋回時の油圧を検知できる。
 上述のような構成により、図2の油圧システムは、待機状態においては、メインポンプ14に関する無駄なエネルギ消費を抑制できる。無駄なエネルギ消費は、メインポンプ14が吐出する作動油がセンターバイパス管路40で発生させるポンピングロスを含む。また、図2の油圧システムは、油圧アクチュエータを作動させる場合には、メインポンプ14から必要十分な作動油を作動対象の油圧アクチュエータに確実に供給できる。
 ここで、コントローラ30の機能について説明する。図2に示すように、コントローラ30は、取得部31、受信制御部32、および送信制御部33を備える。
 取得部31は、ショベル100が備える複数のセンサの各々の検出値を、ショベル100の状態量を表す状態量情報として取得する。取得部31によって取得される状態量情報としては、例えば、作動油温度、エンジン水温、エンジン燃料噴射量、ブームシリンダ7の油圧、アームシリンダ8の油圧、バケットシリンダ9の油圧、旋回用油圧モータ2Aの油圧、メインポンプ14の吐出圧、各操作レバーの操作圧、レギュレータ13の制御圧等が挙げられる。但し、これらに限らず、取得部31によって取得される状態量情報は、ショベル100が備えるセンサによって検出される情報であれば、その他の情報であってもよい。例えば、取得部31は、コントローラ30が備えるメモリによって実現される。
 また、取得部31は、ショベル100に設定されている各種の設定条件を示す設定条件情報や、ショベル100を特定するための機番を示す情報等を取得する。つまり、取得部31は、ショベル100の稼働データを取得する。
 受信制御部32は、受信装置S2による携帯端末200との無線通信を介して、携帯端末200から送信された要求信号(状態量情報の送信を要求するための要求信号)を受信する。例えば、受信制御部32は、コントローラ30においてCPUがプログラムを実行することによって実現される。
 送信制御部33は、受信制御部32によって要求信号が受信された場合、送信装置S1による携帯端末200との無線通信を介して、取得部31によって取得された稼働データを、携帯端末200へ送信する。例えば、送信制御部33は、コントローラ30においてCPUがプログラムを実行することによって実現される。
 次に、図3を参照して、ショベル100の電気式操作システムについて更に説明する。図3は、ショベルの電気式操作システムの構成の一例を概略的に示す図である。なお、図3では、電気式操作システムの一例として、ブーム4を上下させるブーム操作システムを例に説明する。
 また、電気式操作システムは、下部走行体1を前進・後進させるための走行操作システム、上部旋回体3を旋回させるための旋回操作システム、アーム5を開閉させるためのアーム操作システム、及び、バケット6を開閉させるためのバケット操作システム等にも同様に適用され得る。
 図3に示す電気式操作システムは、電気式操作レバーとしてのブーム操作レバー26Aと、パイロットポンプ15と、パイロット圧作動型のコントロールバルブ17と、ブーム上げ操作用の比例弁31ALと、ブーム下げ操作用の比例弁31ARと、コントローラ30と、ゲートロックレバー60と、ゲートロック弁62と、を備えている。
 操作装置の一例であるブーム操作レバー26A(操作信号生成部)には、操作量(傾倒量)や傾倒方向を検出可能なエンコーダやポテンショメータ等のセンサが設けられている。ブーム操作レバー26Aのセンサで検出されたブーム操作レバー26Aの操作に対応する操作信号(電気信号)は、コントローラ30に取り込まれる。
 比例弁31ALは、パイロットポンプ15からコントロールバルブ17(図2に示す制御弁175L、175R参照)のブーム上げ側パイロットポートに作動油を供給するパイロットラインに設けられている。比例弁31ALは、開度調整が可能な電磁弁であり、コントローラ30からの制御信号であるブーム上げ操作信号(電気信号)に応じて比例弁31ALの開度が制御される。
 比例弁31ALの開度を制御することにより、ブーム上げ側パイロットポートに作用する、ブーム上げ操作信号(圧力信号)としてのパイロット圧を制御する。同様に、比例弁31ARは、パイロットポンプ15からコントロールバルブ17(図2に示す制御弁175L、175R参照)のブーム下げ側パイロットポートに作動油を供給するパイロットラインに設けられている。比例弁31ARは、開度調整が可能な電磁弁であり、コントローラ30からの制御信号であるブーム下げ操作信号(電気信号)に応じて比例弁31ARの開度が制御される。比例弁31ARの開度を制御することにより、ブーム下げ側パイロットポートに作用する、ブーム下げ操作信号(圧力信号)としてのパイロット圧を制御する。
 コントローラ30は、比例弁31AL,31ARの開度を制御するブーム上げ操作信号(電気信号)、ブーム下げ操作信号(電気信号)を出力する。これにより、コントローラ30は、比例弁31AL、31AR、コントロールバルブ17(制御弁175L、175R)を介して、メインポンプ14L、14Rからブームシリンダ7に供給される作動油の流量及び流れる方向を制御して、ブーム4の動作を制御することができる。
 例えば、ショベル100の手動操作が行われる場合、コントローラ30は、ブーム操作レバー26Aの操作信号(電気信号)に応じてブーム上げ操作信号(電気信号)又はブーム下げ操作信号(電気信号)を生成し出力する。また、例えば、ショベル100の自動制御が行われる場合、コントローラ30は、設定されたプログラム等に基づいて、ブーム上げ操作信号(電気信号)又はブーム下げ操作信号(電気信号)を生成し出力する。
 ゲートロックレバー60は、キャビン10内の乗降口付近に設けられている。ゲートロックレバー60は、ロック解除状態とロック状態との間で揺動可能に設けられている。操作者は、ゲートロックレバー60を引き上げてほぼ水平にすることによりゲートロックレバー60をロック解除状態とし、ゲートロックレバー60を押し下げることによりゲートロックレバー60をロック状態とする。ロック解除状態において、ゲートロックレバー60は、キャビン10の乗降口を遮って操作者がキャビン10から退出するのを規制する。一方、ロック状態において、ゲートロックレバー60は、キャビン10の乗降口を開放して操作者がキャビン10から退出するのを許容する。
 リミットスイッチ61は、ゲートロックレバー60がロック解除状態においてON(通電)となり、ゲートロックレバー60がロック状態においてOFF(遮断)となるスイッチである。
 ゲートロック弁62は、パイロットポンプ15と比例弁31(31AL,31AR)との間のパイロットラインに設けられている開閉弁である。ゲートロック弁62は、例えば、通電時に開き、非通電時に閉じる電磁弁である。ゲートロック弁62の電源回路には、リミットスイッチ61が配置されている。これにより、リミットスイッチ61がONの際、ゲートロック弁62は開弁する。リミットスイッチ61がOFFの際、ゲートロック弁62は閉弁する。即ち、ゲートロックレバー60がロック解除状態において、ゲートロック弁62は開弁する。一方、ゲートロックレバー60がロック状態において、ゲートロック弁62は閉弁する。
 ロック状態検出センサ63は、ゲートロックレバー60がロック解除状態であるかロック状態であるかを検出する。例えば、ロック状態検出センサ63は、ゲートロック弁62とリミットスイッチ61とを接続する電気回路に設けられた電圧センサ(または、電流センサ)であって、リミットスイッチ61のON/OFFを検出することにより、ゲートロックレバー60のロック解除状態/ロック状態を検出する。検出結果は、コントローラ30に出力される。なお、ロック状態検出センサ63は、レバーの位置を直接検出することにより、ゲートロックレバー60のロック解除状態/ロック状態を検出する構成であってもよい。
 次に、図4および図5を参照して、本実施形態の携帯端末200について説明する。図4は、携帯端末のハードウェア構成の一例を示す図である。
 本実施形態の携帯端末200は、操作入力装置201、表示装置202、音声入出力装置203、補助記憶装置204、メモリ装置205、演算処理装置206、通信装置207、撮像装置208を含み、それぞれがバスB等で接続されたコンピュータである。
 操作入力装置201は、ユーザからの操作入力を受け付ける。例えば、操作入力装置201は、動画の録画、録画停止、再生、再生停止、保存、送信等の操作入力を受け付ける。
本実施形態では、操作入力装置201の一例として、表示装置202の表示パネル上に
重ねて設けられたタッチパネルが用いられてもよい。
 表示装置202は、各種情報を表示する。表示装置202としては、例えば、液晶ディスプレイ、有機ELディスプレイ等が用いられる。例えば、表示装置202は、撮像装置208によって撮像されたショベル100の動画、通信装置207によって受信されたショベル100の状態量情報等を表示する。
 音声入出力装置203は、例えば、マイクとスピーカ等によって実現される。音声入出力装置203は、外部に向けて音声を出力する。例えば、音声入出力装置203は、ショベル100の動画が再生された際に、当該動画と同期した音声(すなわち、ショベル100の動作音)を出力する。
 また、音声入出力装置203は、外部からの音声を入力する。例えば、音声入出力装置203は、撮像装置208によってショベル100の動画を撮像している間、当該動画と同期した音声(すなわち、ショベル100の動作音)を取得する。
 補助記憶装置204は、携帯端末200にインストールされた各種のプログラム(アプリケーション)を格納すると共に、携帯端末200による各種の必要なファイル、データ等を格納する。
プ メモリ装置205は、携帯端末200にインストールされたプログラムの起動時等に補助記憶装置204から、後述する携帯端末200の機能を実現するためのプログラムを読み出して格納する。
 演算処理装置206は、メモリ装置205に格納されたプログラムを読み出して実行することで、後述するような各種処理を実現する。
 通信装置207は、「送信部」および「受信部」の一例であり、所定の無線通信方式(例えば、Wi-Fi、BlueTooth(登録商標)等)により、携帯端末200と外部の装置との間で情報の送受信を行う。
 撮像装置208は、画像を撮像するカメラである。撮像装置208は、例えば、携帯端末200の背面に取り付けられているため、携帯端末200の後方を撮像できる。撮像装置208は、静止画および動画のいずれも撮像可能である。例えば、撮像装置208は、ショベル100の動画を撮像するために用いられる。
 次に、図5を参照して、本実施形態の携帯端末200の機能について説明する。図5は、携帯端末の機能を説明する図である。
 本実施形態の携帯端末200は、入力受付210、通信制御部220、表示制御部230、撮像制御部240、格納部250、再生部260、記憶部270を有する。入力受付210、通信制御部220、表示制御部230、撮像制御部240、格納部250は、演算処理装置206、補助記憶装置204、メモリ装置206等に格納されたプログラムを読み出して実行することで実現される。記憶部270の機能は、補助記憶装置204やメモリ装置205等の記憶装置によって実現される。
 入力受付210は、携帯端末200に対する各種の入力を受け付ける。具体的には、入力受付210は、ショベル100の対する稼働データの取得を要求する要求信号の入力や、撮像装置208に対する操作指示の入力を受け付ける。
 通信制御部220は、入力受付210が受け付けた入力に応じて、通信装置207を制御し、外部装置との通信を行う。具体的には、通信制御部220は、通信装置207による通信の状況に応じて、ショベル100と携帯端末200との通信の可否の判定等を行う。
 表示制御部230は、表示装置202に対する表示を制御する。具体的には、表示制御部230は、入力受付210が受け付けた操作指示等に応じた画面を表示装置202に表示させる。
 撮像制御部240は、入力受付210が受け付けた操作指示に応じて撮像装置208を制御する。具体的には、撮像制御部240は、撮像装置208により、ショベル100の動画を撮像し、動画データを取得する。
 格納部250は、通信制御部220が外部の装置から受信した情報を記憶部270に格納する。具体的には、格納部250は、撮像制御部240が取得した動画データと、通信制御部220がショベル100から受信した稼働データとを対応づけて、状態記録データ280とし、記憶部270に保持させる。言い換えれば、格納部250は、ショベル100から受信した状態量情報と、動画データとを対応付けたデータを記憶部270に格納する。
 再生部260は、記憶部270に格納された状態記録データ280を再生し、表示装置202に表示させる。記憶部270は、格納部250からの指示に応じてデータを格納する。
 次に、図6を参照して、本実施形態の携帯端末200の処理を説明する。図6は、携帯端末の処理を説明する第一のフローチャートである。
 本実施形態の携帯端末200は、入力受付210により、所定のアプリケーションの起動を指示する操作を受け付けると、所定のアプリケーションを起動させる(ステップS601)。例えば、携帯端末200は、表示装置202に表示されているホーム画面上の所定のアイコンがユーザによって選択されたことに応じて、所定のアプリケーションを起動する。なお、所定のアプリケーションとは、例えば、図5で示す各部の機能を実現するためのアプリケーションである。
 ステップS601に続いて、携帯端末200は、通信制御部220により、ショベル100との接続が確認されたか否かを判定する(ステップS602)。言い換えれば、通信制御部220は、通信装置207との通信が可能なショベル100の有無を判定している。
 ステップS602において、ショベル100との接続が確認されない場合、つまり、携帯端末200の周囲に、通信装置207を用いた通信が可能なショベル100が存在しない場合、携帯端末200は、接続が確認されるので待機する。
 なお、携帯端末200との接続が確認されないショベル100は、コントローラ30がオフの状態である。また、このとき、携帯端末200は、所定時間以上接続が確認されない場合には、アプリケーションを終了してもよい。
 ステップS602において、ショベル100との無線通信接続が確認された場合、携帯端末200は、表示制御部230により、携帯端末200との無線通信接続が確認されたショベル100の一覧を表示装置202に表示させ、通信を行うショベル100の選択を受け付ける(ステップS603)。ショベル100の一覧画面の詳細は後述する。
 また、本実施形態では、ショベル100が選択されると、選択されたショベル100の動画を撮像する際の撮像画面において、動画と共に表示させる状態量情報の項目を指定するための項目指定画面が表示されてもよい。そして、携帯端末200は、状態量情報の項目が指定されると、ステップS604に進んでもよい。項目指定画面の詳細は後述する。
 また、本実施形態では、項目指定画面において指定された項目を、動画データと対応づけて記憶部270に保持してもよい。
 続いて、携帯端末200は、選択されたショベル100に操作者(オペレータ)が搭乗するか否かを判定する(ステップS604)。具体的には、携帯端末200は、表示制御部230により、ショベル100を操作者の操作により動作させるか、又は、操作者が搭乗しない無人の状態で動作させるか、を選択させる選択画面を表示装置202に表示させる。選択画面の詳細は後述する。
 以下の説明では、操作者の操作によるショベル100の動作を有人動作と呼び、ショベル100を操作者が搭乗しない状態におけるショベル100の動作を無人動作と呼ぶ場合がある。したがって、ステップS604では、ショベル100の動作を有人動作とするか、又は、無人動作とするか否かを判定している。
 ステップS604において、操作者が搭乗しない場合、つまり、ショベル100の動作を無人動作とする場合、携帯端末200は、後述するステップS613へ進む。
 ステップS604において、操作者が搭乗する場合、つまり、ショベル100の動作を有人動作とする場合、携帯端末200は、通信制御部220により、稼働データ(状態量情報)の取得を要求する要求信号をショベル100へ送信する(ステップS605)。
 続いて、携帯端末200は、通信制御部220により、動画を撮像するための撮像画面を表示装置202に表示させ、入力受付210により、録画の開始を指示する操作を受け付けたか否かを判定する(ステップS606)。ステップS606において、該当する操作を受け付けない場合、携帯端末200は、該当する操作を受け付けるまで待機する。
 ステップS606において、該当する操作を受け付けると、携帯端末200は、撮像制御部240により、ショベル100の動画の録画と、稼働データの受信と、を開始する(ステップS607)。
 なお、本実施形態では、携帯端末200は、設計条件情報を含む稼働データをショベル100から受信するものとしたが、これに限定されない。携帯端末200は、例えば、ショベル100の取得部31が取得する稼働データのうち、状態量情報のみをショベル100から受信してもよい。
 ショベル100は、複数のセンサが一定の時間間隔で連続的に検出値を状態量情報として、携帯端末200に送信する。すなわち、ショベル100の送信制御部33は、複数種類のセンサの検出値を含む状態量情報を携帯端末200へリアルタイム送信する。
 尚、ステップS605とステップS606の処理は、順序が逆であってもよい。つまり、携帯端末200は、撮像画面において、録画の開始を指示する操作を受け付けてから、ショベル100に対して、要求信号を送信してもよい。
 以下に、ステップS605からステップS607の処理について、具体的に説明する。本実施形態の携帯端末200は、ショベル100の有人動作が選択されると、通信制御部220により、表示装置202に、動画の撮像画面を表示させる。
 そして、動画の撮像画面において、動画の録画を指示する操作を受け付けると、携帯端末200は、表示制御部230により、ショベル100に対して要求信号を送信し、ショベル100の動画の撮像を開始してもよい。
 つまり、本実施形態の携帯端末200では、動画の録画を指示する操作を行うだけで、ショベル100の動画を示す動画データと、ショベル100の動画の撮像と同期した期間の状態量情報と、を取得することができ、携帯端末200のユーザの操作の手間を削減できる。
 また、状態量情報には、ショベル100が有する計時機能により計測された状態量情報の取得時間帯が含まれても良い。また、動画データには、携帯端末200の計時機能により計測された動画の撮像時間帯が含まれてもよい。本実施形態の携帯端末200は、状態量情報に含まれる取得時間帯と、動画データに含まれる撮像時間帯とに基づき、稼働データ(状態量情報)と動画データとを対応付けてもよい。
 続いて、携帯端末200は、入力受付210により、撮像画面において、録画の停止を指示する操作を受け付けたか否かを判定する(ステップS608)。ステップS608において、該当する操作を受け付けていない場合、携帯端末200は、ステップS606へ戻る。
 ステップS608において、該当する操作を受け付けた場合、携帯端末200は、通信制御部220により、ショベル100からの稼働データの受信を停止する(ステップS609)。続いて、携帯端末200は、撮像制御部240により、撮像装置208による動画の撮像を停止する(ステップS610)。
 続いて、携帯端末200は、通信制御部220により、ショベル100との接続(通信)を遮断する(ステップS611)。続いて、携帯端末200は、格納部250により、稼働データと動画データとを対応づけた状態記録データ280として、記憶部270に格納し(ステップS612)、処理を終了する。
 なお、このとき、格納部250は、項目指定画面で指定された状態量情報の表示項目を、状態記録データ280の一部として記憶部270に格納してもよい。また、携帯端末200は、記憶部270に格納した状態記録データ280を、外部の管理装置等に送信してもよい。
 ステップS604において、無人動作が選択された場合、携帯端末200は、表示制御部230により、ショベル100の周囲に障害物の有無の確認を促す確認画面を表示装置202に表示させる(ステップS613)。尚、確認画面には、ショベル100の有する物体検知装置S8による検知結果等が表示されてもよい。
 続いて、携帯端末200は、入力受付210により、障害物の有無が確認済みであることを示す操作を受け付けたか否かを判定する(ステップS614)。ステップS614において、該当する操作を受け付けない場合、携帯端末200は、該当する操作を受け付けるので待機する。
 ステップS614において、該当する操作を受け付けた場合、携帯端末200は、表示制御部230により、ショベル100の動作の一覧を示す一覧画面を表示装置202に表示させる(ステップS615)。動作の一覧画面の詳細は後述する。
 続いて、携帯端末200は、入力受付210により、動作を選択する操作を受け付けると、通信制御部220により、選択された動作の開始指示をショベル100に対して送信し(ステップS616)、ステップS605へ進む。
 なお、図6の例では、撮像画面において、録画の停止を指示する操作を受け付けた場合に、撮像装置208による動画の撮像と稼働データの受信を停止するものとしたが、これに限定されない。
 本実施形態の携帯端末200は、録画の開始を指示する操作を受け付けてから、所定の時間が経過しても、録画の停止を指示する操作が行われない場合には、自動的に録画を停止し、稼働データの受信を停止してもよい。本実施形態では、この機能を携帯端末200に搭載することで、誤操作によって録画が開始された場合や、ユーザが録画を停止する操作を忘れた場合等のように、ユーザの意図しない状態記録データ280の取得を防止できる。
 また、本実施形態の携帯端末200は、例えば、撮像装置208の撮像画像にショベル100の画像が含まれない場合には、録画及び稼働データの受信を停止させてもよい。撮像画像にショベル100の画像が含まれない場合とは、撮像装置208がショベル100に向けられていない場合であり、ユーザが意図しない動画が録画されている可能性がある。本実施形態では、ユーザが意図しない動画の録画と、動画と対応しない稼働データの受信とを停止させることができる。
 また、本実施形態の携帯端末200は、ショベル100との無線通信接続が遮断された場合に、録画を停止してもよい。本実施形態では、この機能により、動画と同期した稼働データが取得されずに、動画のみが録画されることを防止できる。
 以下に、図7乃至図13を参照して、携帯端末200の表示例につい説明する。図7は、ショベルの一覧画面の一例を示す図である。図7に示す画面71は、図6のステップS603で表示装置202に表示されるショベル100の一覧画面の一例である。
 画面71には、携帯端末200との接続が確認されたショベル100の一覧が表示される表示領域72と、操作ボタン73とを含む。
 表示領域72では、携帯端末200との接続が確認されたショベル100の機番と、このショベル100の機番と対応づけられた選択欄とが、対応付けられて表示される。
 本実施形態の携帯端末20は、表示領域72に表示された選択欄の何れかが選択され、操作ボタン73が操作されると、この選択欄と対応付けられた機番で特定されるショベル100が、通信を行うショベル100として選択されたものとする。そして、携帯端末200は、表示装置202の表示を、画面71から、動画の撮像画面に表示させる状態量情報の項目を指定する項目指定画面に遷移させる。
 図8は、状態量情報の項目を指定する項目指定画面の一例を示す図である。図8に示す画面81は、例えば、画面71でショベル100が選択された後に、表示装置202に表示される。
 画面81は、表示領域82、83と、操作ボタン84、85と、を有する。表示領域82は、無線通信を行っているショベル100の機番が表示される。表示領域83は、表示領域82に表示された機番から特定されるショベル100の動画を撮像する際に、表示される状態量情報の項目の一覧が表示される。なお、表示領域83に表示される項目は、初期設定として設定された項目の一覧である。
 操作ボタン84は、表示領域83に表示された初期設定の項目を、撮像画面に表示させる項目に設定するための操作ボタンである。本実施形態の携帯端末200は、例えば、操作ボタン84が操作されると、表示領域83に表示された状態量情報の項目を、状態記録データ280の一部として保存し、画面81を、有人動作または無人動作の選択画面に遷移させる。
 操作ボタン85は、表示領域83に表示された初期設定の項目以外の項目を指定するための操作ボタンである。本実施形態では、操作ボタン85が操作されると、画面81を、状態量情報に含まれる項目の一覧画面に遷移させてもよい。
 図9は、有人動作または無人動作の選択画面の一例を示す図である。図9に示す画面91は、図6のステップS604で表示される選択画面の一例である。
 画面91は、表示領域92、操作ボタン93、94を有する。表示領域92には、ショベル100に操作者が搭乗するか否かの確認を促すメッセージが表示される。言い換えれば、表示領域92には、有人動作又は無人動作の何れかの選択を促すメッセージが表示される。
 操作ボタン93は、有人動作を選択するための操作ボタンであり、操作ボタン94は、無人動作を選択させるための操作ボタンである。携帯端末200は、操作ボタン93が操作されると、画面91をステップS606で表示される撮像画面に遷移させる。また、端末装置400は、操作ボタン94が操作されると、画面91を、ステップS613で表示される確認画面に遷移させる。
 図10は、確認画面の一例を示す図である。図10に示す画面101は、表示領域102と、操作ボタン103とを有する。
 表示領域102には、携帯端末200のユーザに対して、ショベル100の周囲に障害物の有無の確認を促すメッセージが表示される。なお、本実施形態の携帯端末200は、無人動作が選択された際に、ショベル100に対して物体検知装置S8による検知結果の取得要求を送信し、検知結果に基づくメッセージを表示領域102に表示させてもよい。
 具体的には、例えば、携帯端末200は、検知結果が、ショベル100の周辺に障害物が検知されていることを示す場合には、表示領域102にその旨を示すメッセージを表示させてもよい。
 画面91において、操作ボタン103が操作されると、携帯端末200は、画面101を、図6のステップS615で表示されるショベル100の動作の一覧画面に遷移させる。
 図11は、ショベルの動作の一覧画面の一例を示す図である。図11に示す画面111は、無人動作におけるショベル100の動作の一覧を示す一覧画面の一例である。
 画面111は、表示領域112と操作ボタン113とを有する。表示領域112には、規定動作名と、各規定動作名に対応付けられた選択欄とが、ショベル100に行わせる動作の一覧として表示される。
 規定動作とは、予め決められた第一の規定姿勢から、予め決められた第二の規定姿勢へ移行する動作である。したがって、規定動作は、第一の規定姿勢から開始し、第二の規定姿勢となったときに終了する動作である。第一の規定姿勢と第二の規定姿勢は、それぞれが異なる姿勢であっても良いし、同一の姿勢であってもよい。つまり、規定動作は、ある規定姿勢から他の規定姿勢へ姿勢を変える動作であってもよいし、ある規定姿勢から所定の動作をして、再びある規定姿勢に戻る動作であってもよい。
 操作ボタン113は、選択された規定動作の開始指示をショベル100へ送信させるための操作ボタンである。
 携帯端末200は、表示領域112において、ある選択欄が選択され、操作ボタン113が操作されると、選択された選択欄と対応する規定動作の開始指示をショベル100へ送信し、画面111を、ステップS606で表示される動画の撮像画面に遷移させる。
 図12は、動画の撮像画面の一例を示す第一の図である。図12に示す画面121は、ショベル100との無線通信接続が確立された後に、表示装置202に表示される撮像画面の一例である。
 画面121は、表示領域122、123、124、操作ボタン125を有する。表示領域122は、携帯端末200の撮像装置208により撮像されている画像が表示される。また、表示領域122は、表示領域122aを有する。表示領域122aには、ショベル100の動作として有人動作が選択されている場合には、ショベル100の操作者を特定する情報が表示されてもよい。また、表示領域122aには、ショベル100の動作として、無人動作が選択されている場合には、無人動作であることを示す情報が表示されてもよい。
 表示領域123は、ショベル100から受信した状態量情報のうち、項目指定画面において指定された項目が表示される。図12の例では、表示領域123には、初期設定されている項目が表示されている。
 具体的には、表示領域123には、状態量情報の項目として、作動油温度、エンジン水温、エンジン燃料噴射量、ポンプ圧(メインポンプ14の吐出圧)、およびレバー入力(各操作レバーの操作圧)が表示されている。
 本実施形態では、表示領域123に表示された項目を示す情報を、表示項目情報として、状態記録データ280の一部とする。なお、表示領域123に表示される項目は、状態量情報に含まれる多数の項目の一部である。また、表示領域123では、項目「エンジン燃料噴射量」の代わりに、状態量情報に含まれる項目「コモンレール圧(エンジン燃料噴射圧)」が表示されてもよい。
 また、図12の例では、状態量情報の受信が開始されていないため、表示領域123に表示された状態量情報の項目の値を示す波形は表示されていない。
 表示領域124は、動画データを特定するための書誌的事項となる情報が表示される。具体的には、表示領域124には、無線通信接続が確立されているショベル100の機番、稼働データの要求信号を送信した日付、撮像した動画の録画を開始した時刻、ショベル100の動作名等が表示される。
 なお、図12の例では、動画の録画の開始前であるため、日付と開始時刻は空欄となっているが、日付と開始時刻には、現在の日付と時刻が表示されてもよい。
 また、表示領域124に表示されるショベル100の動作名は、ショベル100の操作者によって入力されてもよい。また、ショベル100の動作名は、例えば、動作入力欄を操作すると、掘削、均し、旋回、ブーム上げ等の予め設定された項目から選択されてもよい。動作入力欄は、例えば、図11に示す表示領域112に表示されたショベル100の動作の一覧であってもよい。
 さらに、ショベル100の動作名は、操作者に入力されるものではなく、状態量情報としての姿勢センサ等の検出値に基づいて、ショベル100のコントローラ30が特定した動作名であってもよい。この場合、ショベル100は、自機の動作の種類を特定すると、特定した結果である動作名を携帯端末200へ送信してもよい。
 さらに、ショベル100の動作名は、携帯端末200において撮像された動画データに基づいて、判別されてもよい。
 また、表示領域124に表示される情報の項目は、図12に示す例に限定されない。また、表示領域124に表示させる項目の設定が可能であってもよい。また、画面121における表示領域124の表示と非表示の切り替えが可能であってもよい。
 さらに、本実施形態では、稼働データに含まれるショベル100の設計条件情報の項目の一部を画面121に表示させてもよい。その場合、画面121に表示される設計条件情報の項目は、初期設定として予め決められた項目であってもよいし、携帯端末200のユーザにより指定された項目であってもよい。
 以下の説明では、表示領域124に表示される情報を、動画データの書誌情報と表現する場合がある。動画データの書誌情報は、状態記録データ280の一部として、動画データ及び状態量情報と共に保持される。
 操作ボタン125は、動画の録画の開始を指示するための操作ボタンである。携帯端末200は、画面121において、操作ボタン125が操作されると、表示領域122に表示されている動画の録画を開始する。
 図13は、動画の撮像画面の一例を示す第二の図である。図13に示す画面121Aは、動画の録画中の録画画面の一例である。
 画面121Aは、表示領域122A、123A、124A、操作ボタン126を有する。表示領域122Aは、表示領域122aと、表示領域122bとを有する。表示領域122bには、現在、表示領域122Aに表示されている動画の録画中であることを示す情報が表示される。
 表示領域123Aでは、動画の録画の開始と共に、状態量情報を含む稼働データが受信されるため、状態量情報の項目毎に、項目の値を示す波形が表示される。表示領域124Aでは、録画が開始された日付と開始時刻とが表示される。
 また、操作ボタン126は、動画の録画の停止を指示するための操作ボタンである。本実施形態の携帯端末200は、画面121Aにおいて、操作ボタン126が操作されると、動画の録画を停止させ、状態記録データ280を記憶部270に格納する。
 また、本実施形態の携帯端末200は、画面121Aにおいて、操作ボタン126が操作された後に、撮像時の状態に関するメモの入力画面を表示させてもよい。この場合、携帯端末200は、入力画面において、メモが入力された場合には、入力されたメモの内容を示すメモ情報を状態記録データ280の一部として記憶部270に格納する。
 このように、本実施形態の状態記録データ280は、音声データを含む動画データ、稼働データ(状態量情報と設定条件情報を含む)、動画データの書誌情報、録画時に表示領域123に表示させた状態量情報の項目を示す表示項目情報、メモ情報を含む。なお、状態記録データ280には、これらの情報が全て含まれていなくてもよい。状態記録データ280には、少なくも、音声データを含む動画データと、状態量情報とが含まれていればよい。
 以上が、携帯端末200による状態記録データ280を取得する処理である。次に、図14を参照して、携帯端末200による状態記録データ280を再生する処理について説明する。図14は、携帯端末の処理を説明する第二のフローチャートである。
 なお、本実施形態では、状態記録データ280を取得する処理が終了すると、所定のアプリケーションは一度終了してもよい。その場合には、携帯端末200は、状態記録データ280を再生する際に、再度所定のアプリケーションを起動させ、記憶部270に格納されている状態記録データ280の再生画面を表示装置202に表示させる。
 携帯端末200は、再生画面において、状態記録データ280の再生を指示する操作を受け付けたか否かを判定する(ステップS1401)。ステップS1401において、該当する操作を受け付けない場合、携帯端末200は、該当する操作を受け付けるまで待機する。
 ステップS1401において、該当する操作を受け付けると、携帯端末200は、再生する状態記録データ280の選択を受け付ける(ステップS1402)。
 続いて、携帯端末200は、状態記録データ280の再生時に表示させる状態量情報の表示項目の変更を受け付けたか否かを判定する(ステップS1403)。具体的には、携帯端末200は、選択された状態記録データ280に含まれる状態量情報の表示項目の変更を指示する操作を受け付けたか否かを判定する。
 ステップS1403において、表示項目の変更を受け付けない場合、携帯端末200は、後述するステップS1405へ進む。
 ステップS1403において、表示項目の変更を受け付けた場合、携帯端末200は、状態記録データ280に含まれる状態量情報から、変更後に表示される表示項目に選択された項目の値である波形データを取得する(ステップS1404)。
 続いて、携帯端末200は、状態記録データ280の再生の開始を指示する操作を受け付けたか否かを判定する(ステップS1405)。ステップS1405において、該当する操作を受け付けない場合、携帯端末200は、該当する操作を受け付けるまで待機する。
 ステップS1405において、該当する操作を受け付けた場合、携帯端末200は、再生部260により、記憶部270に格納された状態記録データ280を読み出し、再生を開始する(ステップS1406)。
 言い換えれば、携帯端末200は、状態記録データ280を読み出して、表示装置202に表示された再生画面において、状態記録データ280を表示させる。
 続いて、携帯端末200は、再生の停止を指示する操作を受け付けたか否かを判定する(ステップS1407)。ステップS1407において、該当する操作を受け付けない場合、携帯端末200は、該当する操作を受け付けるまで待機する。
 ステップS1407において、該当する操作を受け付けると、携帯端末200は、状態記録データ280の再生を停止し(ステップS1408)、処理を終了する。
 以下に、図15および図16を参照して、状態記録データ280の再生時における携帯端末200の表示例について説明する。
 図15は、再生画面の一例を示す第一の図である。図15に示す画面151は、図14のステップS1401において、表示装置202に表示されている再生画面の一例である。
 画面151は、表示領域152、153、154と、操作ボタン155とを有する。表示領域152は、状態記録データ280に含まれる動画データが表示される。図15の例では、状態記録データ280が選択されており、再生が開始される前の状態を示している。
 したがって、表示領域152には、選択された状態記録データ280に含まれる動画データの最初のフレーム(静止画像)が表示される。また、状態記録データ280は、ショベル100の作業現場で取得されたものであるため、ショベル100の作業現場の様子もショベル100と共に撮像されている。図15の例では、ショベル100の作業現場が、山間部であることがわかる。
 また、表示領域152は、表示領域152aを有する。表示領域152aには、状態記録データ280に含まれる書誌情報の一部が表示される。図15の例では、表示領域152aに、書誌情報の一部として、動画を撮像したときのショベル100の操作者を示す情報が表示されている。
 表示領域153には、状態記録データ280に含まれる表示項目情報が示す状態量情報の項目が表示される。なお、図15の例では、状態記録データ280の再生前であるため、表示領域153に表示された各項目の値を示す波形は表示されていない。また、動画データの再生時間を示すタイミング表示バー159は、再生前であるため、波形の開始点となる位置に表示されている。
 また、本実施形態の携帯端末200は、表示領域153に表示された項目を選択する操作を受け付けると、状態量情報の項目の変更の指示を受け付けたものとする。具体的には、携帯端末200は、選択された項目の他の項目への変更指示を受け付けたものとする。
 携帯端末200は、項目の変更指示を受け付けると、選択された項目が表示されている位置に、状態量情報に含まれる情報の項目の一覧をプルダウン方式等により表示させる。
 そして、携帯端末200は、一覧から項目の選択を受け付けると、表示領域153において、変更を指示された項目の代わりに、一覧から選択された項目を表示領域153に表示させてもよい。また、携帯端末200は、一覧から選択された項目を、新たに表示領域153に表示させる項目として追加してもよい。
 携帯端末200は、項目の変更を受け付けると、この項目と対応する波形データを、状態量情報か抽出する。
 表示領域154は、状態記録データ280に含まれる書誌情報が表示される。図15の例では、機番、日付、録画の開始日時、動作名に加え、動画データの録画が終了した終了時刻が表示される。
 操作ボタン155は、状態記録データ280の再生を指示するための操作ボタンである。携帯端末200は、画面151において、操作ボタン155が操作されると、状態記録データ280の再生を開始する。
 図16は、再生画面の一例を示す第二の図である。図16に示す画面151Aは、図14のステップS1406において、表示装置202に表示されている再生画面の一例である。
 画面151Aは、表示領域152A、153A、156と、操作ボタン157、158と、を有する。
 表示領域152Aは、再生中の動画データが表示される。また、表示領域152Aは、表示領域152b、152cを有する。表示領域152bには、状態記録データ280に含まれる動画データの再生中であることを示す情報が表示される。表示領域152cには、再生中の動画データの書誌情報が表示される。なお、表示領域152cには、動画データの書誌情報の一部が表示されてもよい。
 また、本実施形態の携帯端末200は、動画データに含まれる音声データを、音声入出力装置203から出力させる。
 表示領域153Aには、状態記録データ280に含まれる状態量情報のうち、表示されている項目の値を示す波形が表示されている。また、表示領域153Aでは、タイミング表示バー159は、再生時間を示す位置に表示され、波形は、タイミング表示バー159の移動と共に表示される。この波形を示す波形データは、再生中の動画データと同期して取得されたデータである。
 表示領域156には、動画データの撮像時に入力されたメモ情報等が表示される。図16の例では、再生中の動画を録画した際のショベル100に大型バケットが装着されていたことがわかる。
 操作ボタン157は、状態記録データ280の再生を停止させるための操作ボタンである。操作ボタン158は、状態記録データ280を外部の管理装置等へ送信するための操作ボタンである。
 携帯端末200は、画面151Aにおいて、操作ボタン157が操作されると、状態記録データ280の再生を停止する。また、携帯端末200は、画面151Aにおいて、操作ボタン158が操作されると、再生中又は再生が停止された状態記録データ280を、管理装置等へ送信する。なお、携帯端末200は、状態記録データ280が管理装置等に送信された後に、記憶部270に保持された状態記録データ280を消去してもよい。
 次に、図17を参照して、携帯端末200に表示される再生画面の別の例について説明する。図17は、再生画面の一例を示す第三の図である。図17に示す画面151Bは、図16に示す画面151Aの変形例である。
 画面151Bは、表示領域152Bに、携帯端末200が撮像した動画と、状態記録データ280に含まれる状態量情報のうち、ショベル100のカメラS6が撮像した動画と、が表示される点か、図15に示す画面151Aと異なる。
 表示領域152Bは、表示領域152b、152c、152d、152eを有する表示領域152bには、動画データの再生中であることを示す情報が表示される。表示領域152cには、状態記録データ280に含まれる書誌情報が表示される。
 表示領域152dは、状態記録データ280に含まれる動画データが表示される。言い換えれば、表示領域152dは、携帯端末200の撮像装置208により撮像された動画データが表示される。
 表示領域152eは、状態記録データ280に含まれる状態量情報のうち、ショベル100のカメラS6により撮像された動画データが表示される。より具体的には、表示領域152eには、ショベル100の有するカメラS6のうち、ショベル100の前方を撮像するカメラによって撮像された動画が表示される。
 画面151Bでは、このように、携帯端末200が撮像したショベル100の動画と、ショベル100のカメラS6が撮像した動画とが同時に表示されるため、携帯端末200のユーザに、ショベル100の全体の動きを容易に把握させることができる。
 このように、本実施形態では、ショベル100の動作中の動画と、この動画を示す動画データ(音声データを含む)と同期して取得された状態量情報とを、同時に携帯端末200のユーザに閲覧させることができる。
 また、本実施形態では、状態記録データ280を記録して保持するため、ショベル100が作業を行っている作業現場以外の場所であっても、ショベル100の動作の状態を、状態記録データ280の閲覧者に把握させることができる。また、本実施形態によれば、動画データにショベル100と共にショベル100の作業現場も動画として撮像されるため、携帯端末200のユーザにショベル100の作業環境を把握させることができる。
 さらに、本実施形態では、動画データの再生時に、音声データも再生されるため、ショベル100の動作音を携帯端末200のユーザに聴かせることができる。
 このため、携帯端末200のユーザは、状態記録データ280を閲覧することで、状態量情報の波形のみからでは判断できない事項について、確認を行うことができる。状態量情報の波形のみからでは判断できない事項とは、具体的には、状態量情報の波形から推測されるショベル100の動作と実際のショベル100の動作とが一致しているか否か、ショベル100の動作速度が正常時と異なっているか否か、ショベル100から排出される煙の色、動作中に異音が発生しているか否か、作業現場の環境に適した機体であるか否か、等である。
 したがって、本実施形態によれば、携帯端末200のユーザは、ショベル100の異常発生前であっても、現在作業現場で実行されているショベル100の状態記録データ280を、携帯端末200で確認し、ショベル100の動かし方および使われ方を詳細に把握できる。したがって、携帯端末200のユーザは、ショベル100の作業環境と照らし合わせた評価を行うことができる。
 なお、携帯端末200は、複数のユーザ(例えば、オペレータ、サービスマン、技術者等)の各々によって所持されてもよい。この場合、複数のユーザの各々が、作業現場において、自身の携帯端末200でショベル100の状態記録データ280を確認できる。
 また、上述した実施形態では、携帯端末200によって撮像される動画は、ショベル100の周辺からショベル100全体を撮像した動画としたが、これに限定されない。携帯端末200によって撮像される動画は、例えば、ショベル100のキャビン10の内部に設置された携帯端末200によって撮像された動画であってもよい。この場合、撮像された動画は、キャビン10の内部の様子を撮像した動画であってもよいし、キャビン10の外部を撮像した動画であってもよい。
 また、本実施形態の携帯端末200は、例えば、ウェアラブル端末であってもよい。具体的には、携帯端末200は、眼鏡型の携帯端末であってもよいし、腕時計型の携帯端末であってもよい。携帯端末200は、可搬型であり、動画の撮像と、ショベル100との通信とが可能な端末であれば、どのような態様であってもよい。
 (他の実施形態)
 以下に、図面を参照して、他の実施形態について説明する。図18は、他の実施形態に係るショベル管理システムの構成例を示す概略図である。図18に示すショベル管理システムSYS1は、1台又は複数台のショベル100を管理するシステムである。
 本実施形態では、管理システムSYS1は、主に、ショベル100、携帯端末200、及び管理装置300を含む。管理システムSYS1において、ショベル100、携帯端末200、及び管理装置300のそれぞれは、1台であってもよく、複数台であってもよい。図18の例では、管理システムSYS1は、1台のショベル100と、1台の携帯端末200と、1台の管理装置300とを含む。
 管理装置300は、典型的には固定端末装置であり、例えば、作業現場外の管理センタ等に設置されるサーバコンピュータである。管理装置300は、例えば、ノートPC、タブレットPC、又はスマートフォン等の携帯端末装置であってもよい。
 以下に、本実施形態の管理装置300について説明する。図19は、管理装置のハードウェア構成の一例を示す図である。
 本実施形態の管理装置300は、それぞれバスB1で相互に接続されている入力装置301、出力装置302、ドライブ装置303、補助記憶装置304、メモリ装置305、演算処理装置306及びインターフェース装置307を含むコンピュータである。
 入力装置301は、各種の情報の入力を行うための装置であり、例えばタッチパネル等により実現される。出力装置302は、各種の情報の出力を行うためものであり、例えばディスプレイ等により実現される。インターフェース装置307は、ネットワークに接続する為に用いられる。
 後述する各機能を実現させる管理プログラムは、管理装置300を制御する各種プログラムの少なくとも一部である。管理プログラムは、例えば、記憶媒体308の配布やネットワークからのダウンロード等によって提供される。管理プログラムを記録した記憶媒体308は、情報を光学的、電気的或いは磁気的に記録する記憶媒体、ROM、フラッシュメモリ等の様に情報を電気的に記録する半導体メモリ等、様々なタイプの記憶媒体を用いることができる。
 また、管理プログラムは、管理プログラムを記録した記憶媒体308がドライブ装置303にセットされると、記憶媒体308からドライブ装置303を介して補助記憶装置304にインストールされる。ネットワークからダウンロードされた管理プログラムは、インターフェース装置307を介して補助記憶装置304にインストールされる。
 後述する管理情報データベース310(図20参照)を実現する補助記憶装置304は、管理装置300にインストールされ管理プログラムを格納すると共に、管理装置300による各種の必要なファイル、データ等を格納する。メモリ装置305は、管理装置300の起動時に補助記憶装置304から管理プログラムを読み出して格納する。そして、演算処理装置306はメモリ装置305に格納された管理プログラムに従って、後述するような各種処理を実現している。
 次に、図20を参照して、本実施形態の管理装置300の機能構成について説明する。図20は、管理装置の機能構成の一例を示す図である。
 本実施形態の管理装置300は、管理情報データベース310、データ取得部320、データ格納部330、診断部340、動作評価部350、データ出力部360を有する。
 管理情報データベース310は、補助記憶装置304、メモリ装置305等の記憶装置により実現される。データ取得部320、データ格納部330、診断部340、動作評価部350、データ出力部360は、演算処理装置306が補助記憶装置304、メモリ装置305等に格納されたプログラムを読み出して実行することで実現される。
 管理情報データベース310は、ショベル100の管理に用いられる各種の情報が格納される。管理情報データベース310に格納される情報とは、例えば、状態記録データ280、状態記録データ280に基づくショベル100の故障の有無等の診断の結果を示す診断結果情報、ショベル100の動作の評価結果を示す評価結果情報等を含む。
 なお、本実施形態の管理情報は、ショベル100毎に格納されてもよい。また、管理情報は、ショベル100の機番毎に、異なる日時に取得された複数の状態記録データ280を含んでいてもよい。
 データ取得部320は、管理情報データベース310に格納される各種の情報を取得する。具体的には、データ取得部320は、携帯端末200から送信される状態記録データ280を取得する。
 データ格納部330は、データ取得部320が取得した情報や、診断部340、動作評価部350の処理の結果として得られた情報を、管理情報として管理情報データベース310に格納する。
 診断部340は、携帯端末200から、ショベル100に動作に関する診断の要求を受け付けると、診断部340により、ショベル100の故障の有無や、劣化の度合い等の診断を行い、診断結果を携帯端末200へ通知してもよい。診断部340による診断結果は、管理情報の一部として管理情報データベース310に格納される。
 具体的には、診断部340は、例えば、状態量情報を分析し、状態量情報な含まれる項目のうち、所定の項目の値が、予め決められた閾値以上である場合等に、故障有りと診断(判定)してもよい。
 また、診断部340は、1台のショベル100について、異なる日時に取得された複数の状態記録データ280を用いて、ショベル100の劣化の度合い等を診断してもよい。この際に、診断部340は、動画におけるショベル100の画像を、リンクモデルに変換し、リンクモデルに基づき、動作の診断を行ってもよい。
 リンクモデルとは、ショベル100の姿勢を比較するために好適なモデルである。具体的には、本実施形態のリンクモデルは、ショベル100の画像における下部走行体1、旋回機構2、上部旋回体3を示す領域と、上部旋回体3とブーム4とを連結するリンク機構を示す点、ブーム4とアーム5とを連結するリンク機構を示す点、アーム5とバケット6とを連結するリンク機構を示す点、バケットの爪先を示す点とに基づき、ショベル100の姿勢を簡易的に描画した3次元の画像である。
 動作評価部350は、携帯端末200から取得した状態記録データ280に基づき、ショベル100の動作を評価する。
 動作評価部350は、例えば、ショベル100の動作の種類と対応した指令値と、センサからの検出値と、動画におけるショベル100の姿勢等に基づき、ショベル100の動作を評価する。
 具体的には、例えば、動作評価部350は、指令値と、センサからの検出値とが一致しており、且つ、動画におけるショベル100の姿勢が、指令値が示す姿勢と乖離している場合には、評価結果として、センサの較正が必要であることを示す情報を出力する。
 動作評価部350による評価結果は、携帯端末200に送信される。また、動作評価部350による評価結果は、データ格納部330により、管理情報の一部として、管理情報データベース310に格納される。
 データ出力部360は、管理装置300から外部の装置に対し、各種の情報を出力(送信)する。外部の装置とは、例えば、携帯端末200である。具体的には、データ出力部360は、入力受付210に格納された状態記録データ280の再生要求を携帯端末200から受け付けると、管理情報データベース310に格納された状態記録データ280を携帯端末200へ送信する。
 次に、図21を参照して、本実施形態の管理システムSYS1の動作について説明する。図21は、管理システムの動作を説明するシーケンス図である。
 管理システムSYS1において、携帯端末200は、状態記録データ280の送信を指示する操作を受け付けて、状態記録データ280を管理装置300へ送信する(ステップS211)。
 管理装置300は、データ取得部320により、状態記録データ280を取得し、データ格納部330により、状態記録データ280を管理情報データベース310へ格納する(ステップS212)。
 また、管理システムSYS1は、携帯端末200に表示された再生画面において、操作ボタン155が操作されると(図15参照)、管理装置300に対し、選択された状態記録データ280の再生要求を送信する(ステップS213)。
 なお、携帯端末200では、再生画面が表示される前に、再生する状態記録データ280を選択するための状態記録データ280の一覧画面が表示されてもよい。この場合、管理装置300は、管理情報データベース310に格納されている状態記録データ280の一覧を携帯端末200に送信し、携帯端末200に一覧画面を表示させてもよい。
 管理装置300は、携帯端末200から、状態記録データ280の再生要求を受け付けると、データ出力部360により、管理情報データベース310に格納された状態記録データ280を読み出す(ステップS214)。続いて、管理装置300は、データ出力部360により、読み出した状態記録データ280を携帯端末200へ送信する(ステップS215)。
 携帯端末200は、状態記録データ280を受信し、受信した状態記録データ280を再生する(ステップS216)。
 また、管理システムSYS1において、携帯端末200は、ショベル100に対する診断を要求する操作を受け付けると、管理装置300に対して診断要求を行う(ステップS217)。
 管理装置300は、データ取得部320により,診断要求を受け付けると、診断部340により、状態記録データ280に基づく診断を行う(ステップS218)。続いて、管理装置300は、携帯端末200に対し、診断結果を送信する(ステップS219)。
 本実施形態では、診断結果として、ショベル100の画像をリンクモデルに変換した動画データを携帯端末200に送信してもよい。携帯端末200では、ショベル100の画像をリンクモデルに変換した動画データが再生されてもよい。
 ショベルの画像をリンクモデルに変換した動画データとは、撮像装置208により撮像された動画データにおけるショベル100の画像に、リンクモデルを重畳した、又は、置き換えた動画データである。以下の説明では、ショベル100の画像に、リンクモデルを重畳した、又は、置き換えた動画データを、診断用動画データと呼ぶ場合がある。
 また、管理システムSYS1において、携帯端末200は、ショベル100の動作の評価要求を受け付けると(ステップS220)、動作評価部350は、状態記録データ280に基づくショベル100の動作の評価を行う(ステップS221)。続いて、管理装置300は、データ出力部360により、評価結果を示す情報を携帯端末200へ送信する(ステップS222)。携帯端末200は、評価結果を示す情報を受信すると、この評価結果を示す評価結果画面を表示させる。
 ここで、本実施形態の携帯端末200は、評価結果に、センサの較正が必要であることを示す情報が含まれる場合には、ショベル100に対してセンサの較正の指示を送信する(ステップS223)。この指示には、較正が必要なセンサと、較正を行うために必要な情報とが含まれてよい。ショベル100は、この指示を受けて、指定されたセンサの較正を行う(ステップS224)。
 なお、図21において、ステップS211からステップS216までの動作と、ステップS217からステップS219までの動作と、ステップS220からステップS224までの動作とは、それぞれが独立したタイミングで行われてよい。
 また、本実施形態では、例えば、図21のステップS213の再生要求に、再生される状態記録データ280を用いた診断要求と、評価要求とが含まれてもよい。この場合、携帯端末200では、ステップS216において、状態記録データ280の再生からステップS222の評価結果の取得までが、一連の処理として実行される。
 次に、図22乃至図25を参照して、本実施形態の管理装置300の診断部340の処理について説明する。
 図22は、診断用動画データの再生画面の一例を示す第一の図である。図22に示す画面221は、例えば、図21のステップS219において、携帯端末200の表示装置202に表示されてもよい。
 画面221は、表示領域222、223と、操作ボタン224とを有する。表示領域222には、撮像装置208により撮像されたショベル100の画像222aと、画像222aから生成されたリンクモデル222bとが重畳されて表示されている。
 表示領域222には、経過時間表示バー222cが表示されている。表示領域223は、動画の録画の開始時刻から経過した時間が表示される。画面221では、経過時間表示バー222cと、表示領域223に表示される時間とが同期する。また、表示領域222に表示される画像は、動画に含まれる複数の静止画像のうち、経過時間表示バー222c及び表示領域223が示す時刻と対応する画像である。
 図21の例では、表示領域222には、録画の開始時刻から35秒が経過したときの画像が表示されていることがわかる。
 操作ボタン224は、表示領域222に表示された画像を、リンクモデル222bのみの画像に変換するための操作ボタンである。
 携帯端末200は、画面221において、操作ボタン224が操作されると、画面221を、ショベル100の画像222aが消去された画面へ遷移させる。なお、携帯端末200は、操作ボタン224が操作されると、診断用動画データの再生を停止し、操作ボタン224が操作された時点で表示領域222に表示されていた画像から、ショベル100の画像222aを消去してもよい。
 図23は、診断用動画データの再生画面の一例を示す第二の図である。図23に示す画面221Aは、画面221において、操作ボタン224が操作された後に、携帯端末200の表示装置202に表示される画面の例である。
 画面221Aは、表示領域222A、223と、操作ボタン群225、226を有する。表示領域222Aでは、ショベル100の画像222aが消去されて、リンクモデル222bのみが表示されている。
 操作ボタン群225は、表示領域222Aに表示される画像を複数の異なる画像へ切り替えるための操作ボタン群であり、操作ボタン225a、225b、225cを含む。
 操作ボタン225aは、表示領域222Aに表示されている画像を、リンクモデル222bから撮像画像へ切り替えるための操作ボタンである。操作ボタン225bは、表示領域222Aに表示されている画像を、リンクモデル222bから状態量情報の波形へ切り替えるための操作ボタンである。
 操作ボタン225cは、表示領域222Aに表示されている画像を、リンクモデル222bから、リンクモデル同士の対比画像へ切り替えるための操作ボタンである。
 操作ボタン群226は、表示領域222Aに表示されているリンクモデル222bを、複数の異なる方向から見た場合のリンクモデルに切り替えるための操作ボタン群であり、操作ボタン226a、226b、226c、226dを含む。
 操作ボタン226aは、リンクモデル222bを、正面から見た状態(正面視)のリンクモデルへ切り替えるための操作ボタンである。操作ボタン226bは、リンクモデル222bを、左側面から見た状態(左側面視)のリンクモデルへ切り替えるための操作ボタンである。
 操作ボタン226cは、リンクモデル222bを、右側面から見た状態(右側面視)のリンクモデルへ切り替えるための操作ボタンである。操作ボタン226dは、リンクモデル222bを、背面から見た状態(背面視)のリンクモデルへ切り替えるための操作ボタンである。図22に示す画面221Aでは、操作ボタン226cが選択されている。
 図24は、診断用動画データの再生画面の一例を示す第三の図である。図24に示す画面221Bは、画面221Aにおいて、操作ボタン226cが操作された後に、携帯端末200の表示装置202に表示される画面の例である。
 図24に示す画面221Bは、表示領域222B、223、操作ボタン群225、226を有する。また、表示領域224Bでは、リンクモデル222bを右側面視としたリンクモデル222dが表示される。また、画面221Bでは、操作ボタン225cが選択されている。
 図25は、診断用動画データの再生画面の一例を示す第四の図である。図25に示す画面221Cは、画面221Bにおいて、操作ボタン225cが操作された後に、携帯端末200の表示装置202に表示される画面の例である。
 画面221Cは、表示領域222C、223、操作ボタン群225、226を有する。画面221Cにおいて、表示領域222Cには、リンクモデル222dと、過去に取得した状態記録データ280′から生成した診断用動画データから抽出したリンクモデル222d′とを重畳した画像が表示される。
 ここで、リンクモデル222dとリンクモデル222d′との関係について説明する。
 リンクモデル222d′の元となる過去の状態記録データ280′は、リンクモデル222dの元となる状態記録データ280よりも過去の取得されたものである。また、状態記録データ280を取得したときのショベル100の動作と、状態記録データ280′を取得したときのショベル100の動作は同じである。また、状態記録データ280に含まれる動画データの録画開始から、リンクモデル222dの元となる静止画像が現れるまでの経過時間と、状態記録データ280′に含まれる動画データの録画開始から、リンクモデル222d′の元となる静止画像が現れるまでの経過時間とは、同一である。
 つまり、リンクモデル222dとリンクモデル222d′とは、異なる時期に同じ動作をショベル100に行わせ、動作の開始から所定の時間が経過したときのそれぞれの時期におけるショベル100の姿勢を示している。
 ここで、ショベル100が行った動作が規定動作である場合、ショベル100は、それぞれの時期において、同一の指令値に基づき動作するため、リンクモデル222dとリンクモデル222d′とは一致する。したがって、リンクモデル222dとリンクモデル222d′とが一致しない場合には、ショベル100に何らかの異常が発生しているか、又は、機体の劣化が進行していることが推測される。
 図25の例では、リンクモデル222dとリンクモデル222d′とは一致していないため、携帯端末200のユーザに、ショベル100の故障や、機体の劣化の進行等が疑われることを把握させることができる。
 なお、画面221Cには、診断部340の診断結果として、ショベル100の故障や、機体の劣化の進行等が推測される旨を示すメッセージが表示されてもよい。
 また、本実施形態の診断部340は、例えば、リンクモデル222dと、リンクモデル222d′とのずれ幅と所定の閾値未満である場合には機体の劣化と診断し、所定の閾値以上である場合には、機体に異常があると診断してもよい。
 また、本実施形態では、表示領域222C内に、過去の状態記録データ280′に基づくリンクモデルの動画データを表示させる表示欄と、状態記録データ280に基づくリンクモデルの動画データを表示させる表示欄とを設け、2つの動画データを同時に再生してもよい。
 このように、異なる時期に取得された状態記録データ280に基づくリンクモデルの動画データを並べて再生することで、それぞれの時期におけるショベル100の動作の速度や、振動等の差を携帯端末200のユーザに対して把握させることができる。
 また、本実施形態では、異なる時期に取得された状態記録データ280から生成された診断用動画データを比較することができる。このため、例えば、ショベル100に異常が発生している状態で取得した状態記録データ280と、ショベル100を修理した後に取得した状態記録データ280とを比較することで、修理が完了しているか否かを、携帯端末200のユーザに確認させることができる。
 また、本実施形態では、異なる時期に取得された状態記録データ280の比較の方法として、動画データから生成した診断用動画データを用いる方法を説明したが、状態記録データ280の比較の方法は、これに限定されない。
 例えば、本実施形態では、異なる時期に取得された状態記録データ280のそれぞれから、状態量情報の同じ項目の波形データを取得し、波形データを重ね合わせて、比較を行ってもよい。
 次に、図26乃至図28を参照して、本実施形態の動作評価部350の処理について説明する。図26は、評価結果の表示例の一例を示す第一の図である。
 図26に示す画面261は、図21のステップS222で携帯端末200の表示装置202に表示される評価結果画面の一例である。
 画面261は、表示領域262、263、264を有する。表示領域262には、動作の評価の対象となったショベル100の書誌情報の一部と診断部340による診断結果とが表示される。なお、表示領域262に表示される情報は、これに限定されない。表示領域262には、少なくとも、状態記録データ280に含まれる書誌情報のうち、ショベル100の機番が含まればよい。
 表示領域263は、状態記録データ280に含まれる状態量情報の項目毎の波形を示す。なお、表示領域263に表示される状態量情報の項目は、状態記録データ280に含まれる表示項目情報が示す項目であってもよい。
 また、表示領域263に表示される波形は、センサの検出値を取得する度に算出される平均値の波形等であってもよい。
 また、本実施形態では、過去の正常な状態で取得した状態量情報と比較して、異常があると診断された項目の波形を263に表示させてもよい。その場合、表示領域263に、異常があると診断された項目である旨を示すメッセージが表示されてもよい。
 また、本実施形態では、過去の状態記録データ280′に含まれる状態量情報と比較し、波形が異なる項目を特定し、特定された項目の波形を、表示領域263に表示させてもよい。この場合、表示領域263には、表示領域263に表示されている項目が、優先的に確認すべき項目であることを示すメッセージが表示されてもよい。
 このように、本実施形態では、動作評価部350の評価結果を表示させる際に、異常があると診断された状態量情報の項目や、優先的に確認すべき状態量情報の項目を表示させることで、携帯端末200のユーザに、確認すべき項目を把握させることができる。
 表示領域264は、状態量情報に含まれる項目を軸としたレーダチャートが表示されている。表示領域264に表示される項目は、表示領域263に波形が表示された項目と同一であってもよい。また、表示領域264に表示される項目は、表示項目情報が示す項目であってもよい。
 本実施形態では、評価結果をレーダチャートとして表示させることで、ショベル100の各部の動作のバランスを、携帯端末200のユーザに容易に把握させることができる。
 図27は、評価結果の表示例の一例を示す第二の図である。図27に示す画面271は、動作評価の1つとして、「水平引き動作」における動作開始時と、動作開始後の爪先位置の比較を行った場合の評価結果の表示例である。「水平引き動作」とは、規定動作の1つである。
 画面271は、表示領域272、273を有する。表示領域272には、ショベル100の画像272aと、バケット6の画像272bと、経過時間表示バー272cとが表示されている。
 ショベル100の画像272bは、経過時間表示バー272cが示す時点のショベル100の静止画像であり、画像272bは、動画データの再生開始時のショベル100の静止画像におけるバケット6の位置を示す画像である。
 表示領域273は、グラフ273aと、グラフに示される値の種類を示す情報273bとが表示されている。グラフ273aは、縦軸を指令値、角度センサの検出値、画像判別値とし、横軸を時間としたグラフである。情報273bは、グラフで値が示される項目が、指令値、角度センサの検出値、画像判別値であること、グラフにおける点線が画像判別値に対応し、実線が検出値に対応し、一点鎖線が指令値に対応することを示している。
 本実施形態の画像判別値とは、表示領域272に表示された画像272aの爪先の位置と、画像272bの爪先の位置との差分を示す値である。より具体的には、画像判別値は、画像272aの爪先の高さと、画像272bの爪先の高さの差を示す値である。
 図27の例では、規定動作である「水平引き動作」を行っているため、ショベル100が正常な状態であれば、動作開始前と動作開始後のショベル100の爪先の高さは一定であり、画像判別値は変化しない。
 画面271の表示領域273に示すグラフ273aでは、「水平引き動作」を行わせるための指令値と、ショベル100の角度センサの検出値は一致しているが、画像判別値は変化している。この場合、角度センサの基準値がずれていることが想定される。
 本実施形態では、このように、ショベル100の動画と指令値及びセンサの検出値を比較することで、ショベル100において規定動作を行う制御が行われているときの、ショベル100の実際の動作を、携帯端末200のユーザに把握させることができる。また、本実施形態では、ショベル100が規定動作を行う制御が行われているにも関わらず、実際の動作が規定動作から乖離している状態を、携帯端末200のユーザに把握させることができる。
 なお、図27の例では、表示領域273に、ショベル100が規定動作を行う制御をしているにも関わらず、実際の動作が規定動作とは異なっていること、角度センサの較正が必要であること、を示すメッセージ等を表示させてもよい。
 また、本実施形態では、画面271に、ショベル100に対して角度センサの較正を指示するための操作ボタンが表示されていてもよい。携帯端末200は、この操作ボタンが操作されると、ショベル100に対して、較正が必要とされる角度センサを特定する情報と共に、角度センサの基準値の較正指示をショベル100に送信してもよい。このとき、携帯端末200は、画像判別値に基づき、角度センサの基準値のずれ幅を算出し、較正指示と共にショベル100に送信してもよい。ショベル100は、この較正指示に応じて、角度センサの較正を行う。
 なお、基準値のずれ幅は、管理装置300の動作評価部350において算出されてもよい。この場合、基準値のずれ幅は、動作評価部350の評価結果の一部として、管理装置300から携帯端末200へ送信される。
 このように、本実施形態によれば、ショベル100に規定動作を行わせているにも関わらず、動作が規定動作と異なっている場合に、ショベル100のセンサの較正を容易に行うことができる。
 図28は、評価結果の表示例の一例を示す第三の図である。図28に示す画面281は、動作評価の1つとして、いくつかの姿勢のショベル100の画像から、ショベル100の所定の部位の位置を特定し、姿勢毎の所定の部位の位置の比較を行う場合の評価結果の表示例である。なお、図28を参照して説明する処理は、主に携帯端末200で実行されてもよい。
 画面281は、表示領域282、283を有する。表示領域282には、ある姿勢のショベル100の画像282aと、他の姿勢におけるショベル100のバケット6の画像282bとが表示されている。なお、ある姿勢のショベル100の画像は、状態記録データ280に含まれる動画データから抽出されてもよい。
 表示領域283には、表283aと、操作ボタン283b、283cとが表示されている。表283aは、姿勢毎のショベル100の画像における、ショベル100の所定の部位の位置を示す座標値が表示される表である。操作ボタン283bは、姿勢毎のショベル100の画像から、所定の部位の位置を示す座標値を取得するための操作ボタンである。操作ボタン283cは、表283aに表示された座標値をショベル100送信するための操作ボタンである。
 本実施形態では、表示領域282にある姿勢のショベル100の画像が表示された状態で、操作ボタン283bが操作されると、その画像におけるショベル100の所定の部位の座標値が取得され、表283aに表示される。
 なお、表示領域282には、表283aの一部が表示されてもよい。また、表283aには、表示領域282に表示されたショベル100の部位以外の部位の位置を示す座標値や、表示領域282に表示された姿勢以外の姿勢についての情報が含まれてもよい。この場合、本実施形態では、表示領域282に対し、スワイプ、ピンチイン、ピンチアウト等の操作を行うことで、図28の表示領域282に表示された部位以外の部位の座標や、図28の表示領域282に表示された姿勢以外の姿勢について、座標値を確認することができる。
 本実施形態では、ショベル100の所定の部位を、ブームフート、ブームトップ、アームフート、アームトップ、バケットピン、バケットの爪先とした。
 図28の例では、画像282bは、表示領域282に表示されたショベル100の画像が示す姿勢が「姿勢1」であるときのバケット6の位置を示す画像である。本実施形態では、表示領域282に表示されたショベル100の画像が示す姿勢が「姿勢1」のときに、操作ボタン283bが操作されると、このときの、画像におけるブームフート、ブームトップ、アームフート、アームトップ、バケットピン、バケットの爪先の位置を示す座標が取得され、表284aに表示される。
 画像282aは、ショベル100の姿勢が「姿勢2」であるときのショベル100の画像である。この状態で、操作ボタン283bが操作されると、画像282aにおけるブームフート、ブームトップ、アームフート、アームトップ、バケットピン、バケットの爪先の位置を示す座標値が取得される。なお、「姿勢1」、「姿勢2」等のショベル100の姿勢は、予め定められた姿勢であってよい。また、本実施形態では、座標値を取得する処理は、携帯端末200によって行われてもよい。
 本実施形態の携帯端末200は、姿勢毎の各部位の座標値を取得し、操作ボタン283が操作されると、取得した姿勢毎の座標値を示す情報をショベル100へ送信する。
 ショベル100は、姿勢毎の所定の部位の座標値を示す情報を受信すると、この情報に基づき、各種のパラメータの較正を行う。各種のパラメータとは、例えば、ある姿勢における所定の部位間の長さや角度等である。ショベル100は、較正が完了すると、較正が完了したことを示す通知と、較正後の各パラメータと値とを携帯端末200に送信してもよい。
 携帯端末200は、較正後のパラメータを取得すると、この較正後のパラメータを管理装置300へ送信し、管理情報データベース310に格納させてもよい。
 また、本実施形態の携帯端末200は、姿勢毎の各部位の座標値を取得すると、状態量情報から、各姿勢の画像を撮像したときのセンサの検出値を取得し、各部位の座標値と、状態量情報に含まれる検出値とに基づき、ショベル100に対して較正指示を送信してもよい。
 また、本実施形態では、状態記録データ280に含まれる動画データから、予め定められた姿勢のショベル100の画像を取得するものとしたが、これに限定されない。本実施形態では、例えば、ショベル100がある姿勢となったときに、撮像装置208によりショベル100の画像を撮像してもよい。
 そのため、本実施形態では、例えば、画像の撮像を行うことを示す信号をショベル100に送信してもよい。ショベル100は、この信号を受けて、ある姿勢を維持するようにしてもよい。
 また、本実施形態では、ショベル100が、予め定められた姿勢となったときに、携帯端末200に対して、その旨を通知する信号を送信してもよい。この場合、携帯端末200のユーザは、携帯端末200がこの通知を受けた後に、撮像装置208によるショベル100の撮像を行えばよい。
 本実施形態では、このようにすることで、予め定められた姿勢のショベル100の画像を撮像することができる。
 このように、本実施形態では、携帯端末200で撮像したショベル100の画像(動画像、静止画像を含む)と、ショベル100の画像を撮像している期間にショベル100から受信した稼働データとを対応付けた状態記録データ280を用いて、ショベル100の動作の診断や評価を行う。
 したがって、本実施形態では、ショベル100のセンサの検出値と指令値との比較からは判断することができない事柄を、ショベル100の画像によって判断することができ、携帯端末200のユーザに、ショベル100の状態を把握させることができる。
 尚、本実施形態では、管理装置300の有する診断部340と動作評価部350の機能を携帯端末200が有してしてもよい。その場合、携帯端末200は、診断結果を示す情報と、評価結果を示す情報とを、状態記録データ280と共に、通信制御部220により、管理装置300に送信してもよい。
 以上、本発明の一実施形態について詳述したが、本発明はこれらの実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形又は変更が可能である。
 例えば、上記各実施形態では、携帯端末200が、ショベル100の動画を送信する機能を有しているが、これに限らず、携帯端末200は、ショベル100の動画を送信する機能を有していなくともよい。
 また、例えば、上記各実施形態では、携帯端末200が、ショベル100の動画とショベル100の状態量情報とを、互いに同期させて表示する機能を有しているが、これに限らず、携帯端末200は、ショベル100の動画とショベル100の状態量情報とを、互いに同期させて表示する機能を有していなくともよい。
 また、例えば、上記各実施形態では、携帯端末200が、ショベル100の動画とショベル100の状態量情報との双方を表示可能であるが、これに限らず、携帯端末200は、動画が開始されることなく、要求信号をショベル100へ送信し、ショベル100から状態量情報を取得して、当該状態量情報のみを表示可能であってもよい。
 また、例えば、上記各実施形態では、ショベル100が、複数種類の状態量情報を携帯端末200へリアルタイム送信しているが、これに限らず、ショベル100は、任意のタイミング(例えば、ショベル100の動画の録画が終了したタイミング、所定の録画時間が経過したタイミング、所定量の状態量情報が取得されたタイミング等)で、複数種類の状態量情報を携帯端末200へまとめて送信してもよい。
 また、本国際出願は、2019年10月31日に出願された日本国特許出願2019-199300に基づく優先権を主張するものであり、日本国特許出願2019-199300の全内容を本国際出願に援用する。
 30 コントローラ
 31 取得部
 32 受信制御部
 33 送信制御部
 100 ショベル
 200 携帯端末(ショベル用携帯端末)
 210 入力受付
 220 通信制御部
 230 表示制御部
 240 撮像制御部
 250 格納部
 260 再生部
 270 記憶部
 280 状態記録データ
 300 管理装置
 310 管理情報データベース
 320 データ取得部
 330 データ格納部
 340 診断部
 350 動作評価部
 360 データ出力部
 SYS ショベル管理システム

Claims (13)

  1.  複数のセンサによって検出されたショベルの状態量を表す状態量情報を取得するショベルと、
     携帯端末と、
     を備え、
     前記携帯端末は、
     前記状態量情報の送信を要求するための要求信号を前記ショベルへ送信する通信制御部を有する、
     ショベル管理システム。
  2.  前記携帯端末は、
     撮像装置を有し、
     前記ショベルから受信された前記状態量情報と、前記状態量情報を受信した期間と同期して、前記撮像装置により撮像された前記ショベルの動画と、を表示装置に表示する表示制御部を有する、
     請求項1に記載のショベル管理システム。
  3.  前記表示制御部は
     前記ショベルの動画の録画指示を受け付けて、前記表示装置に録画画面を表示させ、
     前記録画画面には、
     録画中の前記ショベルの動画と、前記状態量情報に含まれる情報の項目の一部の波形と、が表示される、請求項2記載のショベル管理システム。
  4.  前記録画画面には、
     前記ショベルを特定するための情報と、前記動画の録画を開始した日時を示す情報と、前記ショベルが行っている動作を示す情報とが表示される、請求項3記載のショベル管理システム。
  5.  前記表示制御部は、
     前記ショベルの規定動作の一覧画面を前記表示装置に表示させ、
     前記通信制御部は、
     前記一覧画面から選択された規定動作の動作指示を、前記ショベルへ送信し、
     前記ショベルの動画は、
     前記一覧画面から選択された規定動作を行っている前記ショベルを撮像した動画である、請求項2乃至4の何れか一項に記載のショベル管理システム。
  6.  前記表示制御部は、
     前記ショベルの動作を、操作者の操作による動作とするか、又は、無人動作とするかを選択する選択画面を前記表示装置に表示させ、
     前記無人動作が選択された場合に、前記ショベルの周囲における障害物の有無の確認を促す情報を含む確認画面を前記表示装置に表示させる、請求項2乃至5の何れか一項に記載のショベル管理システム。
  7.  前記携帯端末は、
     前記状態量情報と、前記状態量情報の受信している間に録画した前記ショベルの動画とを対応付けた状態記録データを格納する記憶部と、
     前記記憶部に格納された前記状態記録データを再生する再生部と、を有する、請求項2乃至6の何れか一項に記載のショベル管理システム。
  8.  前記表示制御部は、
     前記状態記録データの再生画面を前記表示装置に表示させ、
     前記再生部は、
     前記再生画面において、状態記録データの再生指示を受け付けて、前記記憶部に格納された状態記録データを再生する、請求項7記載のショベル管理システム。
  9.  前記再生画面には、
     前記状態記録データに含まれる動画データが示す動画と、前記状態記録データに含まれる状態量情報の項目の一部の波形とが表示される、請求項8記載のショベル管理システム。
  10.  前記再生画面には、
     前記動画及び前記波形と共に、前記ショベルが有するカメラにより撮像された動画を表示される、請求項9記載のショベル管理システム。
  11.  前記携帯端末と通信を行う管理装置を有し、
     前記管理装置は、
     前記携帯端末から前記状態記録データを取得するデータ取得部と、
     前記状態記録データに基づき、前記ショベルの状態の診断を行う診断部と、
     前記状態記録データに基づき、前記ショベルの動作を評価する動作評価部と、
     前記診断部による診断結果と、前記動作評価部による評価結果とを前記携帯端末へ出力するデータ出力部と、を有する、請求項7乃至10の何れか一項に記載のショベル管理システム。
  12.  複数のセンサによって検出されたショベルの状態量を表す状態量情報を取得するショベルへ、前記状態量情報の送信を要求するための要求信号を送信する通信制御部を備えるショベル用携帯端末。
  13.  ショベル用携帯端末のコンピュータを、
     複数のセンサによって検出されたショベルの状態量を表す状態量情報を取得するショベルへ、前記状態量情報の送信を要求するための要求信号を送信する通信制御部
     として機能させるためにショベル用携帯端末に用いられるプログラム。
PCT/JP2020/040844 2019-10-31 2020-10-30 ショベル管理システム、ショベル用携帯端末、およびショベル用携帯端末に用いられるプログラム WO2021085608A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
EP20880891.5A EP4053347A4 (en) 2019-10-31 2020-10-30 EXCAVATOR MANAGEMENT SYSTEM, PORTABLE TERMINAL FOR EXCAVATOR AND PROGRAM USED IN PORTABLE TERMINAL FOR EXCAVATOR
CN202080076683.2A CN114729522A (zh) 2019-10-31 2020-10-30 挖土机管理系统、挖土机用便携终端及用于挖土机用便携终端的程序
KR1020227014924A KR20220091495A (ko) 2019-10-31 2020-10-30 쇼벨관리시스템, 쇼벨용 휴대단말, 및 쇼벨용 휴대단말에 이용되는 프로그램
JP2021553724A JPWO2021085608A1 (ja) 2019-10-31 2020-10-30
US17/660,893 US20220251806A1 (en) 2019-10-31 2022-04-27 Excavator management system, mobile terminal for excavator, and recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-199300 2019-10-31
JP2019199300 2019-10-31

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/660,893 Continuation US20220251806A1 (en) 2019-10-31 2022-04-27 Excavator management system, mobile terminal for excavator, and recording medium

Publications (1)

Publication Number Publication Date
WO2021085608A1 true WO2021085608A1 (ja) 2021-05-06

Family

ID=75715202

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/040844 WO2021085608A1 (ja) 2019-10-31 2020-10-30 ショベル管理システム、ショベル用携帯端末、およびショベル用携帯端末に用いられるプログラム

Country Status (6)

Country Link
US (1) US20220251806A1 (ja)
EP (1) EP4053347A4 (ja)
JP (1) JPWO2021085608A1 (ja)
KR (1) KR20220091495A (ja)
CN (1) CN114729522A (ja)
WO (1) WO2021085608A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023286374A1 (ja) * 2021-07-13 2023-01-19 コベルコ建機株式会社 実機診断システム、実機診断複合システムおよび実機診断方法
JP2023012199A (ja) * 2021-07-13 2023-01-25 コベルコ建機株式会社 実機診断システム、実機診断複合システムおよび実機診断方法
WO2023120598A1 (ja) * 2021-12-22 2023-06-29 住友建機株式会社 情報処理システム、プログラム、及び情報処理方法
WO2023189216A1 (ja) * 2022-03-31 2023-10-05 日立建機株式会社 作業支援システム
WO2023249097A1 (ja) * 2022-06-23 2023-12-28 日立建機株式会社 機械性能診断装置、および建設機械診断システム
JP7414040B2 (ja) 2021-07-13 2024-01-16 コベルコ建機株式会社 実機診断システム、実機診断複合システムおよび実機診断方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220195704A1 (en) * 2019-04-04 2022-06-23 Komatsu Ltd. System including work machine, computer implemented method, method for producing trained posture estimation model, and training data

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007023527A (ja) * 2005-07-13 2007-02-01 Shin Caterpillar Mitsubishi Ltd 情報通信システム及びオペレータ用通信端末
WO2017099070A1 (ja) * 2015-12-08 2017-06-15 住友重機械工業株式会社 ショベルの通信システム、マルチコプタ、及びショベル
JP2017108429A (ja) * 2012-07-19 2017-06-15 住友建機株式会社 ショベル用の多機能型携帯情報端末
JP2017166232A (ja) * 2016-03-16 2017-09-21 住友重機械工業株式会社 ショベル
JP2019114861A (ja) * 2017-12-21 2019-07-11 株式会社クボタ 作業機の通信装置、携帯端末、作業機の通信システム及び作業機の通信処理方法
JP2019183646A (ja) * 2019-08-06 2019-10-24 住友重機械工業株式会社 ショベル支援装置
JP2019199300A (ja) 2018-05-14 2019-11-21 悟司 西口 茹で麺をほぐす携帯式の即席連結可能な容器

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2628008B2 (ja) * 1993-06-30 1997-07-09 株式会社フジタ 作業機械の動作状態視認方法
AU2005308302B2 (en) * 2004-11-25 2009-04-23 Hitachi Construction Machinery Co., Ltd. Device and method for protecting engine of construction machine
JP2007235270A (ja) * 2006-02-27 2007-09-13 Ricoh Co Ltd 撮像装置
JP5709986B2 (ja) * 2011-05-16 2015-04-30 住友重機械工業株式会社 ショベル、その監視装置及びショベルの出力装置
JP5758342B2 (ja) * 2012-04-16 2015-08-05 日立建機株式会社 建設機械の点検装置及びそれを用いた点検方法
JP2015063864A (ja) * 2013-09-26 2015-04-09 住友建機株式会社 ショベル、及びショベル用管理装置
CN104797463B (zh) * 2013-11-19 2017-03-15 株式会社小松制作所 作业车辆的显示装置及其显示方法
KR20170118831A (ko) * 2015-07-31 2017-10-25 가부시키가이샤 고마쓰 세이사쿠쇼 작업 기계의 표시 시스템, 및 작업 기계의 표시 방법
KR102584471B1 (ko) * 2016-01-13 2023-10-05 에이치디현대인프라코어 주식회사 건설기계의 미러링 제어 방법 및 미러링 시스템
DE112016000019T5 (de) * 2016-03-01 2016-12-01 Komatsu Ltd. Bewertungsvorrichtung und Bewertungsverfahren
AU2016224353B2 (en) * 2016-03-28 2019-10-31 Komatsu Ltd. Evaluation Device
US10144390B1 (en) * 2017-05-17 2018-12-04 Deere & Company Work vehicle start system and method with optical verification for authorizing remote start
JP7195729B2 (ja) * 2017-07-04 2022-12-26 コマツ産機株式会社 機械システムおよび制御方法
JP7073146B2 (ja) * 2018-03-12 2022-05-23 住友重機械工業株式会社 建設機械、建設機械の表示装置、及び、建設機械の管理装置
KR101944817B1 (ko) * 2018-04-11 2019-02-07 (주)영신디엔씨 휴대단말기를 이용한 굴삭 작업 검측 자동화 시스템
US11145123B1 (en) * 2018-04-27 2021-10-12 Splunk Inc. Generating extended reality overlays in an industrial environment
JP7064066B2 (ja) * 2018-08-28 2022-05-10 ヤンマーパワーテクノロジー株式会社 作業車両用の自動走行システム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007023527A (ja) * 2005-07-13 2007-02-01 Shin Caterpillar Mitsubishi Ltd 情報通信システム及びオペレータ用通信端末
JP2017108429A (ja) * 2012-07-19 2017-06-15 住友建機株式会社 ショベル用の多機能型携帯情報端末
WO2017099070A1 (ja) * 2015-12-08 2017-06-15 住友重機械工業株式会社 ショベルの通信システム、マルチコプタ、及びショベル
JP2017166232A (ja) * 2016-03-16 2017-09-21 住友重機械工業株式会社 ショベル
JP2019114861A (ja) * 2017-12-21 2019-07-11 株式会社クボタ 作業機の通信装置、携帯端末、作業機の通信システム及び作業機の通信処理方法
JP2019199300A (ja) 2018-05-14 2019-11-21 悟司 西口 茹で麺をほぐす携帯式の即席連結可能な容器
JP2019183646A (ja) * 2019-08-06 2019-10-24 住友重機械工業株式会社 ショベル支援装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023286374A1 (ja) * 2021-07-13 2023-01-19 コベルコ建機株式会社 実機診断システム、実機診断複合システムおよび実機診断方法
JP2023012199A (ja) * 2021-07-13 2023-01-25 コベルコ建機株式会社 実機診断システム、実機診断複合システムおよび実機診断方法
JP2023012198A (ja) * 2021-07-13 2023-01-25 コベルコ建機株式会社 実機診断システム、実機診断複合システムおよび実機診断方法
JP7414041B2 (ja) 2021-07-13 2024-01-16 コベルコ建機株式会社 実機診断システム、実機診断複合システムおよび実機診断方法
JP7414042B2 (ja) 2021-07-13 2024-01-16 コベルコ建機株式会社 実機診断システム、実機診断複合システムおよび実機診断方法
JP7414040B2 (ja) 2021-07-13 2024-01-16 コベルコ建機株式会社 実機診断システム、実機診断複合システムおよび実機診断方法
WO2023120598A1 (ja) * 2021-12-22 2023-06-29 住友建機株式会社 情報処理システム、プログラム、及び情報処理方法
WO2023189216A1 (ja) * 2022-03-31 2023-10-05 日立建機株式会社 作業支援システム
WO2023249097A1 (ja) * 2022-06-23 2023-12-28 日立建機株式会社 機械性能診断装置、および建設機械診断システム

Also Published As

Publication number Publication date
EP4053347A1 (en) 2022-09-07
CN114729522A (zh) 2022-07-08
KR20220091495A (ko) 2022-06-30
US20220251806A1 (en) 2022-08-11
EP4053347A4 (en) 2023-01-04
JPWO2021085608A1 (ja) 2021-05-06

Similar Documents

Publication Publication Date Title
WO2021085608A1 (ja) ショベル管理システム、ショベル用携帯端末、およびショベル用携帯端末に用いられるプログラム
US20210002851A1 (en) Shovel
JP6965160B2 (ja) ショベル
JPWO2019124549A1 (ja) ショベル及びショベルの管理システム
US11492782B2 (en) Display device for shovel displaying left and right mirror images and shovel including same
JP7439053B2 (ja) ショベル及びショベルの管理装置
JP7367001B2 (ja) ショベル及び施工システム
US20220010523A1 (en) Excavator and work system
JPWO2019151335A1 (ja) ショベル及びショベルの管理システム
US20210262196A1 (en) Excavator and control apparatus for excavator
US11377825B2 (en) Shovel, method for controlling shovel, and mobile information terminal
WO2021054417A1 (ja) ショベル、ショベルの管理装置、ショベルの管理システム、ショベルの支援装置
US11952741B2 (en) Shovel
JP2021008776A (ja) ショベル
US20210372079A1 (en) Shovel and system
WO2021054416A1 (ja) ショベル、ショベルの管理装置
JP7346061B2 (ja) ショベル
WO2023190843A1 (ja) 支援装置、作業機械、プログラム
US20230417023A1 (en) Support system, information processing device, and storage medium
WO2023190116A1 (ja) ショベル、ショベルの管理システム、ショベルの支援装置
JP2022152970A (ja) ショベル、ショベルの管理システム
US20240141618A1 (en) Shovel and shovel control system
WO2023188708A1 (ja) ショベルの管理システム、ショベルの管理方法
JP2023150920A (ja) 支援装置、作業機械、プログラム
JP2023151586A (ja) 建設機械の作業支援システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20880891

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021553724

Country of ref document: JP

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 20227014924

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2020880891

Country of ref document: EP

Effective date: 20220531