WO2022097570A1 - 制御装置、制御システム、及び制御方法 - Google Patents

制御装置、制御システム、及び制御方法 Download PDF

Info

Publication number
WO2022097570A1
WO2022097570A1 PCT/JP2021/039935 JP2021039935W WO2022097570A1 WO 2022097570 A1 WO2022097570 A1 WO 2022097570A1 JP 2021039935 W JP2021039935 W JP 2021039935W WO 2022097570 A1 WO2022097570 A1 WO 2022097570A1
Authority
WO
WIPO (PCT)
Prior art keywords
work machine
control
control device
distance
information
Prior art date
Application number
PCT/JP2021/039935
Other languages
English (en)
French (fr)
Inventor
大輔 太田
陽輔 角野
利行 豊嶋
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US18/034,861 priority Critical patent/US20230417018A1/en
Publication of WO2022097570A1 publication Critical patent/WO2022097570A1/ja

Links

Images

Classifications

    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/2025Particular purposes of control systems not otherwise provided for
    • E02F9/2033Limiting the movement of frames or implements, e.g. to avoid collision between implements and the cabin
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F3/00Dredgers; Soil-shifting machines
    • E02F3/04Dredgers; Soil-shifting machines mechanically-driven
    • E02F3/28Dredgers; Soil-shifting machines mechanically-driven with digging tools mounted on a dipper- or bucket-arm, i.e. there is either one arm or a pair of arms, e.g. dippers, buckets
    • E02F3/36Component parts
    • E02F3/42Drives for dippers, buckets, dipper-arms or bucket-arms
    • E02F3/43Control of dipper or bucket position; Control of sequence of drive operations
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/20Drives; Control devices
    • E02F9/2025Particular purposes of control systems not otherwise provided for
    • E02F9/205Remotely operated machines, e.g. unmanned vehicles
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/24Safety devices, e.g. for preventing overload
    • EFIXED CONSTRUCTIONS
    • E02HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
    • E02FDREDGING; SOIL-SHIFTING
    • E02F9/00Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
    • E02F9/26Indicating devices
    • E02F9/261Surveying the work-site to be treated
    • E02F9/262Surveying the work-site to be treated with follow-up actions to control the work tool, e.g. controller

Definitions

  • the present invention relates to a control device, a control system, and a control method.
  • Patent Document 1 describes a technique for decelerating or stopping the excavator when the excavator invades the inaccessible area set for an obstacle.
  • One aspect of the present invention has been made in view of the above problems, and one example of the present invention is to reduce accidental contact during operation of a work machine and suppress a decrease in the operation rate of the work machine. It is to provide a control device, a control system and a control method.
  • the control device is a control device that controls a work machine having a movable portion, and is a state information indicating the posture of the work machine, operation information indicating the operation of the work machine, and the work.
  • the safety distance set between the movable part and the surrounding object is specified based on the acquisition means for acquiring the peripheral information indicating the arrangement of the surrounding object of the machine and the state information and the motion information.
  • the specific means and the motion control means for controlling the motion of the work machine according to the safety distance and the peripheral information are provided.
  • the control system is a control system that controls a work machine having a movable portion, and includes a control device and a first sensor that acquires state information indicating the posture of the work machine.
  • the control device comprises a specific means for specifying a safety distance set between the movable portion and the surrounding object based on the state information and the operation information indicating the operation of the work machine, and the safety.
  • the operation control means for controlling the operation of the work machine is provided according to the distance and the peripheral information indicating the arrangement of the objects around the work machine.
  • the control method is a control method for controlling a work machine having a movable portion, in which at least one processor indicates a state information indicating the posture of the work machine and an operation indicating the operation of the work machine.
  • a control device a control system and a control method for a work machine, which can reduce accidental contact during operation of the work machine and suppress a decrease in the operation rate.
  • FIG. 1 is a block diagram showing a configuration of a control system 1 according to an exemplary embodiment 1.
  • the control system 1 is a control system that controls a work machine having a movable portion, and includes a control device 30 and a first sensor 40 that acquires state information indicating the posture of the work machine. Specifically, the control system 1 is between the movable part of the work machine and the surrounding object based on the state information and the operation information indicating the operation of the work machine, and the first sensor 40 for acquiring the state information.
  • a specific unit 35 for specifying a safety distance set in the above, and an operation control unit 36 for controlling the operation of the work machine according to the safety distance and peripheral information indicating the arrangement of objects around the work machine are provided.
  • the specific unit 35 is configured to realize the specific means in the present exemplary embodiment.
  • the motion control unit 36 is configured to realize the motion control means in this exemplary embodiment.
  • the safe distance is a distance that defines an area in which each part of the backhoe can move. Specifically, it is a target value for controlling the distance between each part of the backhoe and the object so as to be equal to or longer than the safe distance.
  • the first sensor 40 and the control device 30 (specific unit 35 and operation control unit 36) are connected by wire, as well as wirelessly such as 4G, 5G (including local 5G), WiFi (registered trademark), and LTE. You may connect and communicate with.
  • the specific unit 35 and the operation control unit 36 are described as being incorporated in one control device 30, but these do not necessarily have to be incorporated in one control device. ..
  • the specific unit 35 and the operation control unit 36 may be arranged in different devices. Then, these may be connected by wired communication or wireless communication. Further, the specific unit 35 and the operation control unit 36 may be arranged on the cloud.
  • FIG. 2 is a block diagram showing a configuration of the control device 30 according to the exemplary embodiment 1.
  • the control device 30 includes an acquisition unit 31, a safety distance specifying unit (specific unit) 35, and an operation control unit 36.
  • the acquisition unit 31 acquires state information indicating the posture of the work machine, operation information indicating the operation of the work machine, and peripheral information indicating the arrangement of objects around the work machine.
  • the safety distance specifying unit 35 specifies the safety distance set between the movable unit and the surrounding object based on the state information and the operation information.
  • the motion control unit 36 controls the motion of the work machine according to the safety distance and the peripheral information.
  • the acquisition unit 31 is configured to realize the acquisition means in this exemplary embodiment.
  • the safety distance specifying unit (specific unit) 35 is configured to realize the specifying means in this exemplary embodiment.
  • FIG. 3 is a flowchart of a control method of a work machine having a movable portion according to the first embodiment.
  • at least one processor acquires state information indicating the posture of the work machine, operation information indicating the operation of the work machine, and peripheral information indicating the arrangement of objects around the work machine.
  • step S12 the safety distance set between the movable portion and the surrounding object is specified based on the state information and the operation information.
  • step S14 the operation of the work machine is controlled according to the safety distance and the surrounding information.
  • control device control system, and control method
  • a control device, control system, and control method for a work machine that reduce accidental contact during operation of the work machine and suppress a decrease in the operation rate are provided. can do.
  • FIG. 4 is a diagram showing a configuration of a control system 2 according to an exemplary embodiment 2 of the present invention.
  • the control system 2 includes a control device 30A and a sensor 40 (first sensor 401, 402, 403, 404).
  • the control device 30 and the sensor 40 will be described in order, but before that, the backhoe 100 will be described.
  • the backhoe 100 operates based on a control instruction received from the control device 30A.
  • the backhoe 100 includes a traveling unit 10, a movable unit 20 attached to the traveling unit 10, and a controller 80.
  • the traveling unit 10 is a traveling device that enables the backhoe 100 to move forward, backward, turn right, and turn left.
  • the traveling unit 10 travels using, for example, an endless track belt.
  • the movable portion 20 includes a swivel portion 21, a boom 22 attached to the swivel portion, an arm 23 attached to the tip end portion of the boom 22, and a bucket 24 attached to the tip end portion of the arm 23.
  • the controller 80 controls the backhoe 100 according to the operation control signal received from the control device 30A.
  • the backhoe 100 operates according to the instruction of the control device 30A
  • remote control by the operator may be performed. Further, if the remote operation by the operator is different from the work program, or if there is an operation error or the like, the control device 30A may correct it.
  • the control device 30A may be mounted on the backhoe 100.
  • the swivel portion 21 can swivel on the traveling portion 10 in a plane perpendicular to the paper surface in the figure.
  • the plane perpendicular to the paper surface in FIG. 4 is a horizontal plane, and therefore, this plane is referred to as a “horizontal plane” for convenience below.
  • the boom 22 can reciprocate around the boom shaft 221 in a plane substantially perpendicular to the horizontal plane.
  • the arm 23 has the same turning surface as the boom 22, and can reciprocate around the arm shaft 231.
  • the bucket 24 has the same swivel surface as the swivel surface of the arm 23, and can reciprocate swivel around the bucket shaft 241.
  • the backhoe 100 is controlled by a controller 80 that receives an operation control signal from the control device 30A via the Internet N1.
  • the backhoe 100 is an unmanned operation in which a traveling unit 10 moves in a predetermined work range, operates a swivel unit 21, a boom 22, and an arm 23 to scoop up earth and sand with a bucket 24, and transports the earth and sand to a predetermined position. It is a machine.
  • the backhoe 100 may be operated by attaching an attachment to the operation lever and sending an operation control signal to the attachment.
  • the controller 80 is mounted on the backhoe 100 is described, but the operation method is not limited to this.
  • a server may be arranged in the work site, and an operation control signal may be transmitted from the server to operate the backhoe 100. Further, the server may be placed on the cloud instead of on the work site.
  • the control device 30A is a control device that controls a backhoe 100 having a movable portion 20, and is a acquisition unit 31, a safety distance specifying unit 35, an operation control unit 36, a storage unit 38, and a communication unit. Includes 39.
  • the acquisition unit 31, the safety distance specifying unit 35, the operation control unit 36, the storage unit 38, and the communication unit 39 are electrically connected to each other.
  • the acquisition unit 31, the safety distance specifying unit 35, the operation control unit 36, and the like are described as being incorporated in one control device 30A, but these are not necessarily one. It does not have to be built into the controller.
  • the acquisition unit 31, the safety distance specifying unit 35, the operation control unit 36, and the like may be arranged separately. Then, these may be connected by wired communication or wireless communication. Further, the acquisition unit 31, the safety distance specifying unit 35, the operation control unit 36, and the like may be on the cloud.
  • the acquisition unit 31 arranges the state information acquisition unit 32 for acquiring the state information indicating the posture of the backhoe 100, the operation information acquisition unit 33 for acquiring the operation information indicating the operation of the backhoe 100, and the object 60 around the backhoe 100.
  • the peripheral information acquisition unit 34 for acquiring the indicated peripheral information is included.
  • the state information acquisition unit 32 is configured to realize the state information acquisition means in this exemplary embodiment.
  • the operation information acquisition unit 33 is configured to realize the operation information acquisition means in this exemplary embodiment.
  • the peripheral information acquisition unit 34 is configured to realize the peripheral information acquisition means in this exemplary embodiment.
  • the state information acquisition unit 32 obtains detection values (state information) from sensors 401, 402, 403, and 404 (which are collectively referred to as “first sensor 40”), which will be described later, via the Internet N1. get. Specifically, the detected value of the first sensor 40 is sent to the controller 80, for example, and the controller 80 collectively sends the detected value to the control device 30A via the Internet N1. Alternatively, the detected value of the first sensor 40 may be transmitted directly to the control device 30A via the Internet N1 without going through the controller 80.
  • the state information acquisition unit 32 derives the shape of the movable unit 20 from the acquired state information.
  • the state information of the backhoe 100 is, for example, the turning angles of the turning portion 21, the boom 22, the arm 23, and the bucket 24, and the shape of the movable portion 20 can be derived from these.
  • the shape may be, for example, three-dimensional coordinates at a specific point of the movable portion 20.
  • the three-dimensional coordinates are the same coordinate system as the coordinate system of the three-dimensional map generated based on the peripheral information described later.
  • a specific point is a point that has a high possibility of colliding with an obstacle.
  • the specific point of the movable portion 20 may be, for example, the tip portion of the boom 22, the tip portion of the arm 23, the tip portion of the bucket 24, or the like.
  • the specific points of the traveling portion 10 may be, for example, the left and right front end portions and the left and right rear end portions of the traveling portion 10.
  • the state information of the backhoe 100 may include the position information and the orientation information of the backhoe 100.
  • the position information can be acquired by using, for example, GPS (Global Positioning System).
  • the orientation information is the orientation of the traveling unit 10.
  • the orientation information can be acquired using the orientation sensor.
  • the initial position and orientation which are the stop positions before the start of work, are stored in the peripheral information stored in the storage unit 38, and the movement direction is obtained from the operation information of the backhoe 100 after the start of work. And the movement distance may be derived, the position and orientation at the destination may be updated at any time, and used as position information and orientation information.
  • the operation information acquisition unit 33 acquires the operation information of the backhoe 100.
  • the operation information of the backhoe 100 is, for example, information indicating the dynamic characteristics of the backhoe 100.
  • the information indicating the dynamic characteristics includes information indicating the dynamic characteristics of the traveling unit 10 or information indicating the dynamic characteristics of the movable unit 20.
  • the information indicating the dynamic characteristics is information indicating the characteristics of the operation of each part of the backhoe 100. Specifically, for example, it is information on whether each part of the backhoe 100 is stopped, moving, or about to start moving. If it is moving or has begun to move, its speed or acceleration.
  • the dynamic characteristics include, for example, at least one of the velocity and acceleration of the movable portion 20.
  • the velocity includes an angular velocity
  • the acceleration includes an angular acceleration.
  • the speed or acceleration of the movement of each part of the backhoe 100 increases, the risk of collision with other objects increases.
  • the speed or acceleration is large, the impact at the time of collision becomes large and the degree of danger becomes high. That is, the dynamic characteristic is also an index showing the degree of danger, and the degree of danger can be estimated from the dynamic characteristic. Further, the operation of the backhoe 100 may be controlled according to the degree of danger.
  • Operation information such as speed and acceleration can be acquired from the detected values from the first sensor 40.
  • the first sensor 40 can detect the velocity and the acceleration like an acceleration sensor
  • the velocity and the acceleration can be directly derived from the detected value of the first sensor 40.
  • the distance of each part of the back hoe 100 and the nearest turning angle of each part of the back hoe 100 detected by the first sensor 40 are used per unit time. It is possible to calculate the moving distance of how much each part of the back ho 100 has moved, and to derive the velocity and acceleration from the moving distance and the unit time. Thereby, the velocity (or angular velocity) and the acceleration (or angular acceleration) of the specific point of the movable portion 20 including the traveling portion 10 in the three-dimensional coordinates can be derived.
  • the operation information may be acquired from, for example, an operation control signal output by the operation control unit 36.
  • the speed and acceleration of movement of each part of the traveling unit 10 and the movable part 20 based on the operation control signal can be stored in a database, and the speed and acceleration of movement of each part can be derived from the operation control signal by referring to the database. ..
  • This database may be created by observing in advance the speed and acceleration of the movements of the traveling unit 10 and the movable unit 20 based on the motion control signal.
  • a database may be created including state information indicating the posture of the backhoe 100.
  • the peripheral information acquisition unit 34 acquires the peripheral information stored in the storage unit 38 and generates a three-dimensional map.
  • the peripheral information is information obtained by three-dimensionally recording the position (surface) data of an object existing in the work place of the backhoe 100.
  • Peripheral information may include an intrusion prohibited area described later.
  • the safety distance specifying unit 35 specifies the safety distance set between the movable unit 20 and the surrounding object 60 based on the state information and the operation information.
  • the state information and the operation information are as described above.
  • the safety distance specifying unit 35 specifies the safety distance according to, for example, the speed or acceleration of the movable unit 20. Further, it is preferable that the safety distance specifying unit 35 specifies the safety distance according to the speed or acceleration of the movable unit 20 in consideration of the speed or acceleration of the traveling unit 10.
  • the safe distance is a distance that defines an area in which each part (for example, a specific point) of the backhoe 100 can move. Specifically, it is a target value for controlling the distance between each part of the backhoe 100 and the object so as to be equal to or greater than the safe distance.
  • the safety distance specifying unit 35 changes the safety distance according to the operation information of the backhoe 100. The specific method for deriving the safe distance will be described later.
  • the motion control unit 36 controls the movable unit 20 so as to avoid the object 60 when the distance between the object 60 indicated by the peripheral information and the movable unit 20 is less than the safe distance. Specifically, the motion control unit 36 moves the swivel unit 21, the boom 22, the arm 23, or the bucket 24 when the distance between the object 60 and the movable unit 20 is less than the safe distance. , Avoid collision with object 60. Further, the moving speed of each part of the backhoe 100 may be reduced. Finally, the motion control unit 36 may stop the backhoe 100.
  • Peripheral information is information indicating the three-dimensional arrangement of the object 60 existing at the work site where the backhoe 100 works.
  • the object 60 existing at the work site is also referred to as a "peripheral object".
  • the intrusion prohibition area 70 which will be described later, generated based on the position of the surrounding object 60 may also be a part of the peripheral information.
  • peripheral information is stored in advance in the storage unit 38. Specifically, the peripheral information is stored in the storage unit 38 before starting the work. For example, the peripheral information may be input by the operator before starting the work, or may be collected by the control device 30A from a server or the like that aggregates the facility information.
  • the storage unit 38 stores the state information acquisition unit 32, the operation information acquisition unit 33, the peripheral information acquisition unit 34, the safety distance specifying unit 35, and the ROM (Read Only Memory).
  • the program of the operation control unit 36 may be stored. Such a program may be expanded and executed in RAM by one or more processors of the control device 30A. As a result, each program can function as each part.
  • the sensor (first sensor) 40 is, for example, a sensor that detects the turning angles of the turning portion 21, the boom 22, the arm 23, and the bucket 24.
  • the sensor 401 is, for example, a gyro sensor that detects the turning angle of the turning portion 21.
  • the sensor 401 may be an encoder that detects the rotation speed of the motor that swivels the swivel portion 21.
  • the sensor 402 is a tilt sensor or a gyro sensor that detects the angle of the boom 22 from the horizontal plane.
  • the sensor 402 may be an encoder that detects the moving distance of the rod of the hydraulic cylinder that turns the boom 22.
  • the sensor 403 is, for example, a tilt sensor, a gyro sensor, or an encoder that detects the angle of the arm 23 with respect to the boom 22.
  • the sensor 404 is, for example, a tilt sensor, a gyro sensor, or an encoder that detects the angle of the bucket 24 with respect to the arm 23.
  • the sensors 402 to 404 may be installed outside the backhoe 100 or may be installed inside the backhoe 100, respectively. When installed externally, the sensors 402 to 404 are tilt sensors, acceleration sensors, gyro sensors, stroke sensors, encoders, and the like, respectively. When installed inside, the sensors 402 to 404 are a pressure sensor, a flow rate sensor, a cylinder sensor, a hydraulic pressure sensor, a stroke sensor, or the like, respectively.
  • the safety distance specifying unit 35 may be configured to generate an intrusion prohibited area 70 in advance based on the surrounding information.
  • the intrusion prohibition area 70 represents an object that the backhoe 100 should not touch or an area that the backhoe 100 should not invade.
  • the intrusion prohibition area 70 may be set as a surface having a predetermined shape surrounding the object 60.
  • an intrusion prohibition area 70A which is a rectangular surface
  • an intrusion prohibition area 70B which is a rectangular surface
  • the beam passed above It is not necessary to set the intrusion prohibition area 70B at a height higher than the maximum reachable height that the movable portion 20 can reach. That is, the upper limit for setting the intrusion prohibition area 70B may be the maximum reachable height that the movable portion 20 can reach.
  • an intrusion prohibition area 70C is provided in front of an area having a slope on which the backhoe 100 cannot work. The width and depth of the intrusion prohibition area 70C can be set according to the reach of the backhoe 100.
  • the intrusion prohibited areas 70A and 70B are restricted areas for the backhoe 100 not to come into contact with the material storage area and the object 60 such as a beam.
  • the intrusion prohibition area 70C is a restricted area that restricts the backhoe 100 from invading a slope on which it cannot work.
  • the amount of data in the intrusion prohibited area and the data amount in the intrusion prohibited area are compared with the case where the surface of the irregular object 60 is used as the intrusion prohibited area.
  • the amount of data and calculation required to set the safe distance can be reduced, and the calculation speed of the safe distance can be increased.
  • the safety distance specifying unit 35 specifies, for example, the safety distance of a specific point of the movable unit 20 based on the state information and the operation information. More specifically, the safety distance specifying unit 35 sets an ellipsoid having each axis radius corresponding to each component of the velocity vector of the movable unit 20, and specifies the safety distance as the radius of the ellipsoid.
  • the safety distance specifying unit 35 sets an ellipsoid having each axis radius corresponding to each component of the velocity vector of the movable unit 20, and specifies the safety distance as the radius of the ellipsoid.
  • FIG. 6 is a schematic view showing the shape of the movable portion 20.
  • the three-dimensional coordinates of the tip of the bucket 24 are (x, y, z).
  • This three-dimensional coordinate system is the same as the three-dimensional coordinate system that represents peripheral information.
  • the three-dimensional coordinates of the tip of the bucket 24 can be derived from the state information. For example, assuming that the midpoint of the boom axis 221 is the origin of the three-dimensional coordinates, each coordinate is expressed by the following equation (1).
  • ⁇ 0 indicates the direction of the backhoe 100
  • ⁇ 1 indicates the boom angle
  • ⁇ 2 indicates the arm angle
  • ⁇ 3 indicates the bucket angle.
  • the boom angle ⁇ 1 is the angle of the boom 22 from the reference surface (the swivel surface of the swivel portion 21), the arm angle ⁇ 2 is the angle of the arm 23 with respect to the boom 22, and the bucket angle ⁇ 3 is the angle of the bucket 24 with respect to the arm 23. Is.
  • the safe distance can be expressed as a variable length ellipsoid according to the operation of the backhoe 100 or the sensor characteristics. That is, whether or not an arbitrary point (x n , y n , z n ) of the object 60 collides with the tip end portion of the bucket 24 can be calculated by the following equation (2).
  • the moving speed can be derived from the operation information.
  • the fa (v x ) shown in the equation (3) is a function having a positive correlation that changes the variable number a according to the velocity v x in the x-axis direction. That is, the larger the velocity v x , the larger the variable number a.
  • f b (vy) is a function having a positive correlation that changes the variable number b according to the velocity v y in the y -axis direction.
  • f c (v z ) is a function having a positive correlation that changes the variable number c according to the velocity v z in the z-axis direction.
  • the radius of the ellipsoid can be changed according to the error characteristics of the sensor 40.
  • Equation (4) is a calculation equation for determining the radius in consideration of the error when the output from the sensor 404 contains an error. Specifically, when the detected bucket angle ⁇ 3 includes an angle error ⁇ 3x in the x-axis direction, an angle error ⁇ 3y in the y-axis direction, and an angle error ⁇ 3z in the z-axis direction, the equation is used. Replace the variable numbers a, b, c in (2) with a', b', c'. In equation (4), l is the distance from the bucket shaft 241 to the tip of the bucket 24. As a result, even if there is an error in the sensor 404, the safety distance can be set on the safe side in consideration of the error.
  • the safe distance is changed in a timely manner according to the state information and operation information of the backhoe 100. For example, when the speed of a part of the movable portion 20 changes, the safety distance specifying unit 35 may be set to recalculate the safety distance. As a result, when the backhoe 100 is in operation, the safety distance can be recalculated and updated in a short time.
  • the motion control unit 36 can control the motion of the backhoe 100 according to the set safety distance. For example, the motion control unit 36 controls the movable unit 20 so as to avoid the object 60 when the distance between the object 60 and the tip end portion of the bucket 24 is less than the safe distance. Further, the motion control unit 36 controls the movable unit 20 so as to avoid the intrusion prohibition area 70 when the distance between the intrusion prohibition area 70 and the tip end portion of the bucket 24 is less than the safe distance. You may.
  • the safe distance in consideration of the dynamic characteristics (for example, the moving speed vector) of the back ho 100, particularly the moving part 20, the safe distance is taken large in the direction of high speed, and the safe distance is taken in the direction of low speed.
  • the safety distance can be kept small. Therefore, the safe distance can be specified with the minimum necessary distance.
  • control device 30A of the work machine (backhoe 100) having the movable portion 20 and the first state information indicating the posture of the backhoe 100 are acquired.
  • the control device 30A including the sensor 40, identifies a safety distance set between the movable portion 20 and the surrounding object 60 based on the state information and the operation information of the backhoe 100, and the safety distance.
  • a configuration is adopted in which the operation of the backhoe 100 is controlled according to the peripheral information. Therefore, according to the control system 2 according to the second embodiment, it is possible to reduce accidental contact during operation of the backhoe 100 and suppress a decrease in the operating rate.
  • the motion control unit 36 may finally stop the backhoe 100 when the distance between the object 60 and the backhoe 100 is less than the safe distance. In that case, the motion control unit 36 folds the movable portion 20 of the backhoe 100, retracts it to a safe area where there is no risk of collision, and moves it to another place in the preset work area to perform the work. You may restart it.
  • control device 30A (Configuration and effect of control device 30A) Further, in the control device 30A according to the second embodiment, the acquisition unit for acquiring the state information of the backhoe 100, the operation information of the backhoe 100, and the peripheral information indicating the arrangement of the object 60 around the backhoe 100, and the acquisition unit. Based on the state information and the operation information, the operation of the backhoe 100 is controlled according to the specific part that specifies the safety distance set between the movable part 20 and the surrounding object 60, and the safety distance and the surrounding information. It is equipped with an operation control unit. Therefore, according to the control device 30A according to the second embodiment, it is possible to reduce accidental contact during operation of the backhoe 100 and suppress a decrease in the operating rate.
  • FIG. 7 is a flow chart showing the flow of the control method S2 of the backhoe 100.
  • the peripheral information acquisition unit (at least one processor) 34 acquires peripheral information indicating the arrangement of objects around the backhoe 100 from the storage unit 38.
  • the state information acquisition unit (at least one processor) 32 acquires state information indicating the posture of the backhoe 100 from the sensor 40.
  • the operation information acquisition unit (at least one processor) 33 acquires operation information indicating the operation of the backhoe 100 from the operation control unit 36.
  • the safety distance specifying unit 35 specifies the safety distance set between the movable portion 20 of the backhoe 100 and the surrounding object 60 based on the state information and the operation information.
  • step S24 the motion control unit 36 controls the motion of the backhoe 100 according to the safety distance and the peripheral information.
  • step S25 the motion control unit 36 determines whether or not the motion control is completed. When the operation control is completed (step S25: Y), the operation control is completed. If the operation control is not completed (step S25: N), the operation control returns to step S21.
  • the case where the operation control is completed is, for example, the case where the work of the backhoe 100 is completed, or the case where the control device 30A receives an instruction to end the operation control.
  • the operation information in step S22 may be information indicating the dynamic characteristics of the backhoe 100, and the dynamic characteristics include at least one of the speed and acceleration of the movable portion 20. be.
  • Specifying the safety distance in step S23 includes setting an ellipsoid having each axis radius corresponding to each component of the velocity vector of the movable portion 20, and specifying the safety distance as the radius of the ellipsoid. That is as described above.
  • Controlling the operation of the backhoe 100 in step S24 is such that when the distance between the object 60 indicated by the peripheral information and the movable portion 20 is less than the safe distance, the movable portion 60 is avoided.
  • the inclusion of controlling 20 is as described above.
  • the state information and motion information are newly acquired to specify the safe distance. It is preferable to fix it and control the operation according to the new safety distance and surrounding information.
  • FIG. 8 is a diagram showing a configuration of a control system 3 according to an exemplary embodiment 3 of the present invention.
  • the control system 3 according to the third embodiment includes a control device 30B and a distance sensor (second sensor) 50 for acquiring distance information. Since the backhoe 100 to be controlled has the same configuration as the backhoe 100 according to the exemplary embodiment 2, the description thereof will be omitted.
  • the distance sensor 50 is, for example, a 3D Dar (3D Laser Imaging Detection and Ringing) that measures the position to an object by a laser.
  • the 3D Dar is placed at a high place in the work place, emits a laser beam, and measures the time until the reflected wave returns from the surrounding object 60.
  • the distance sensor 50 is not limited to the 3D Dar, and may be any sensor that can acquire peripheral information, for example, a ToF (Time of Flight) camera or the like.
  • the ToF camera acquires peripheral information by measuring the time from emitting light to returning the reflected light and converting it into a distance.
  • Peripheral information may be acquired, for example, when the backhoe 100 is started. Further, the peripheral information may be acquired, for example, at regular times (7 o'clock, 12 o'clock, 20 o'clock, etc.), or periodically (every 3 hours, etc.) by the distance sensor 50 installed at the site. May be good.
  • the control device 30B includes an acquisition unit 31, a safety distance specifying unit 35, an operation control unit 36, a peripheral information generation unit 37, a storage unit 38, and a communication unit 39.
  • the difference between the control device 30B and the control device 30A of the second embodiment is that the control device 30B includes a peripheral information generation unit 37.
  • the peripheral information generation unit 37 generates a three-dimensional map including the backhoe 100 as peripheral information based on the value detected by the distance sensor 50. Specifically, the peripheral information acquisition unit 34 acquires the detected value from the distance sensor 50 and converts it into the distance to the peripheral object 60. Then, the distance information is transmitted to the peripheral information generation unit 37. The peripheral information generation unit 37 generates peripheral information from the distance information acquired from the peripheral information acquisition unit 34. The peripheral information to be generated is a three-dimensional map including the object 60 and the backhoe 100. The peripheral information generation unit 37 can specify the position and orientation of the backhoe 100 based on the distance information.
  • peripheral information is stored in the storage unit 38 in advance and cannot be updated immediately.
  • the peripheral information can be updated to the latest one in a timely manner.
  • the three-dimensional peripheral information can be quickly updated by using the distance sensor 50.
  • the position and orientation of the backhoe 100 can be updated quickly. Therefore, the position of the object 60 and the position and orientation of the backhoe 100 can be updated in response to the ever-changing situation of the object 60 and the movement of the backhoe 100.
  • the safety distance can be specified from the state information and the motion information, and the motion control can be performed so as not to come into contact with the newly constructed object 60. Therefore, it is possible to further reduce accidental contact during operation of the backhoe 100 and suppress a decrease in the operating rate.
  • control device 30B further includes a peripheral information generation unit 37 that generates a three-dimensional map including a backhoe 100 as peripheral information based on the detection value by the distance sensor 50. Therefore, it is possible to further reduce accidental contact during operation of the backhoe 100 and suppress a decrease in the operating rate.
  • FIG. 9 is a flow chart showing the flow of the control method S3 of the backhoe 100 according to the third embodiment.
  • step S30 the peripheral information generation unit 37 generates peripheral information from the distance information acquired from the distance sensor (second sensor) 50.
  • the state information acquisition unit 32 acquires the state information of the backhoe 100 from the sensor (first sensor) 40. Since the following steps S32 to S35 are the same as steps S22 to S25 described in the control method S2 of the second embodiment, the description thereof will be omitted.
  • a backhoe was described as an example as a work machine.
  • the working machine to which the present invention can be applied is not limited to this.
  • any machine having a moving part such as a construction machine, a civil engineering machine, a transport machine, a machine tool, or an assembly machine, can be applied.
  • it can be suitably applied to all work machines including robots that work while changing their positions.
  • control devices 30, 30A and 30B may be realized by hardware such as an integrated circuit (IC chip) or by software.
  • control devices 30, 30A and 30B are realized by, for example, a computer that executes a program instruction which is software that realizes each function.
  • a computer that executes a program instruction which is software that realizes each function.
  • FIG. 1 An example of such a computer (hereinafter referred to as computer C) is shown in FIG.
  • the computer C includes at least one processor C1 and at least one memory C2.
  • a program P for operating the computer C as the control devices 30, 30A, 30B is recorded.
  • the processor C1 reads the program P from the memory C2 and executes it, so that the functions of the control devices 30, 30A, and 30B are realized.
  • Examples of the processor C1 include CPU (Central Processing Unit), GPU (Graphic Processing Unit), DSP (Digital Signal Processor), MPU (Micro Processing Unit), FPU (Floating point number Processing Unit), and PPU (Physics Processing Unit). , Microcontrollers, or combinations thereof.
  • the memory C2 for example, a flash memory, an HDD (Hard Disk Drive), an SSD (Solid State Drive), or a combination thereof can be used.
  • the computer C may further include a RAM (RandomAccessMemory) for expanding the program P at the time of execution and temporarily storing various data. Further, the computer C may further include a communication interface for transmitting / receiving data to / from another device. Further, the computer C may further include an input / output interface for connecting an input / output device such as a keyboard, a mouse, a display, and a printer.
  • RAM RandomAccessMemory
  • the computer C may further include a communication interface for transmitting / receiving data to / from another device. Further, the computer C may further include an input / output interface for connecting an input / output device such as a keyboard, a mouse, a display, and a printer.
  • the program P can be recorded on a non-temporary tangible recording medium M that can be read by the computer C.
  • a recording medium M for example, a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used.
  • the computer C can acquire the program P via such a recording medium M.
  • the program P can be transmitted via a transmission medium.
  • a transmission medium for example, a communication network, a broadcast wave, or the like can be used.
  • the computer C can also acquire the program P via such a transmission medium.
  • a control device that controls a work machine having a movable portion, and is state information indicating the posture of the work machine, operation information indicating the operation of the work machine, and peripheral information indicating the arrangement of objects around the work machine.
  • a control device including an operation control means for controlling the operation of the work machine according to the above.
  • Appendix 2 The control device according to Appendix 1, wherein the operation information is information indicating the dynamic characteristics of the work machine.
  • the safety distance can be specified smaller.
  • Appendix 3 The control device according to Appendix 2, wherein the dynamic characteristics include at least one of the speed and acceleration of the movable portion.
  • the safety distance can be specified smaller.
  • Appendix 4 From Appendix 1, the specifying means sets an ellipsoid having each axis radius corresponding to each component of the velocity vector of the movable portion, and specifies the safety distance as the radius of the ellipsoid.
  • the control device according to any one of 3.
  • the safety distance can be changed according to each component of the velocity vector.
  • a control device further comprising a peripheral information generating means for generating a three-dimensional map including the working machine as the peripheral information based on a value detected by a distance sensor.
  • peripheral information including work machines can be updated in a timely manner.
  • the motion control means controls the movable portion so as to avoid the object when the distance between the object indicated by the peripheral information and the movable portion is less than the safe distance.
  • a control device characterized by.
  • a control system for controlling a work machine having a movable portion including a control device and a first sensor for acquiring state information indicating the posture of the work machine, wherein the control device includes the state information and the state information.
  • a control system comprising an operation control means for controlling the operation of the work machine according to the peripheral information indicating the above.
  • Appendix 8 The control system according to Appendix 7, wherein the operation information is information indicating the dynamic characteristics of the work machine.
  • the safety distance can be specified smaller.
  • Appendix 9 The control system according to Appendix 8, wherein the dynamic characteristics include at least one of the speed and acceleration of the movable portion.
  • the safety distance can be specified smaller.
  • the specific means sets an ellipsoid having each axis radius corresponding to each component of the velocity vector of the movable portion, and specifies the safety distance as the radius of the ellipsoid, any one of Supplementary note 7 to 9.
  • the safety distance can be changed according to each component of the velocity vector.
  • a second sensor for acquiring the peripheral information is further provided, and the control device further includes a peripheral information generating means for generating a three-dimensional map including the working machine based on the detection value by the second sensor.
  • the control system according to any one of Supplementary note 7 to 10.
  • peripheral information including work machines can be updated in a timely manner.
  • the motion control means controls the movable portion so as to avoid the object when the distance between the object indicated by the peripheral information and the movable portion is less than the safe distance.
  • the control system according to any one of 7 to 11.
  • Appendix 14 The control method according to Appendix 13, wherein the operation information is information indicating the dynamic characteristics of the work machine.
  • the safety distance can be specified smaller.
  • Appendix 15 The control method according to Appendix 14, wherein the dynamic characteristics include at least one of the speed and acceleration of the movable portion.
  • the safety distance can be specified smaller.
  • the safety distance can be changed according to each component of the velocity vector.
  • peripheral information including work machines can be updated in a timely manner.
  • Controlling the operation of the work machine means that when the distance between the object indicated by the peripheral information and the movable portion is less than the safe distance, the movable portion avoids the object.
  • Appendix 19 A program that causes a computer to function as a control device for controlling a work machine having a movable portion, wherein the computer has state information indicating the posture of the work machine, operation information indicating the operation of the work machine, and the work.
  • An acquisition means for acquiring peripheral information indicating the arrangement of objects around the machine, specifying a safety distance set between the movable part and the peripheral object based on the state information and the motion information.
  • Appendix 20 The program according to Appendix 19, wherein the operation information is information indicating the dynamic characteristics of the work machine.
  • Appendix 21 The program according to Appendix 20, wherein the dynamic characteristics include at least one of the velocity and acceleration of the movable portion.
  • the specifying means sets an ellipsoid having each axis radius corresponding to each component of the velocity vector of the movable portion, and specifies the safety distance as the radius of the ellipsoid.
  • the program according to any one of 21.
  • the motion control means controls the movable portion so as to avoid the object when the distance between the object indicated by the peripheral information and the movable portion is less than the safe distance.
  • the program according to any one of Supplementary note 19 to 23, which comprises.
  • Appendix 25 A program that causes a computer to function as a control device for controlling a work machine having a movable portion, wherein the computer has state information indicating the posture of the work machine, operation information indicating the operation of the work machine, and the work.
  • An acquisition means for acquiring peripheral information indicating the arrangement of objects around the machine, specifying a safety distance set between the movable part and the peripheral object based on the state information and the motion information.
  • a control device for controlling a work machine having a movable portion including at least one processor, the state information indicating the posture of the work machine, the operation information indicating the operation of the work machine, and the work machine.
  • the control device may further include a memory, and the memory may store a program for causing the processor to execute each of the processes.
  • Control system 10 ... Running part 20 ... Movable part 21 ... Turning part 22 ... Boom 23 ... Arm 24 ... Bucket 30, 30A, 30B ... ⁇ Control device 31 ⁇ ⁇ ⁇ Acquisition unit (acquisition means) 32 ... Status information acquisition unit (status information acquisition means) 33 ... Operation information acquisition unit (operation information acquisition means) 34 ... Peripheral information acquisition unit (peripheral information acquisition means) 35 ... Safety distance identification unit (safety distance identification means) 36 ... Motion control unit (motion control means) 37 ... Peripheral information generation unit (peripheral information generation means) 38 ... Memory 39 ... Communication means 40 (401, 402, 403, 404) ... Sensor (first sensor) 50 ... Distance sensor (second sensor) 60 ... Object 70 (70A, 70B, 70C) ... Intrusion prohibited area 80 ... Controller 100 ... Backhoe

Landscapes

  • Engineering & Computer Science (AREA)
  • Mining & Mineral Resources (AREA)
  • Civil Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Structural Engineering (AREA)
  • Mechanical Engineering (AREA)
  • Operation Control Of Excavators (AREA)
  • Component Parts Of Construction Machinery (AREA)

Abstract

作業機械の稼働時の不慮の接触を低減するとともに、稼働率の低下を抑制する、作業機械の制御装置、制御システム及び制御方法を提供する。可動部を有する作業機械を制御する制御装置(30A)は、作業機械の姿勢を示す状態情報、作業機械の動作を示す動作情報、及び、作業機械の周辺の物体の配置を示す周辺情報を取得する取得手段(31)と、状態情報と動作情報とに基づいて、可動部と周辺の物体との間に設定される安全距離を特定する特定手段(35)と、安全距離と周辺情報とに応じて、作業機械の動作を制御する動作制御手段(36)と、を備える。

Description

制御装置、制御システム、及び制御方法
 本発明は、制御装置、制御システム、及び制御方法に関する。
 近年、労働者人口の減少や労働力不足による作業負荷の増大への対応として、ロボットの活用が注目されている。例えば建設業界においては、現場作業員の高齢化、若手就業者の減少等による労働力不足と技能の継承のため、自律型の建設機械を用いた施工の自動化が求められている。しかし、建設機械は大型であり、他の建設機械や設備との接触は大事故に発展する虞があることから、自動運転による操作においては、目的外の構造物(例えばダンプや柱等)への接触を回避する必要がある。
 例えば、特許文献1には、障害物に対して設定された侵入不可領域にショベルが侵入した場合に、ショベルを減速または停止する技術が記載されている。
国際公開WO2019/189203号公報
 特許文献1に記載のショベルにおいては、ショベルが動作している最中に侵入不可領域に侵入した場合は、センサ情報を取得して解析後に制御するまでの間に、ショベルが障害物に接触する可能性がある。そのような可能性を低減するために、例えば侵入不可領域を実際よりも広く設定するということが考えられる。しかし、侵入不可領域を広く設定すれば接触の可能性は低減するものの、侵入不可領域に侵入する可能性は増大するため、ショベルを減速または停止する必要が生じやすく、稼働率が低下する虞がある。
 本発明の一態様は、上記の課題に鑑みてなされたものであり、その目的の一例は、作業機械の稼働時の不慮の接触を低減するとともに、稼働率の低下を抑制する、作業機械の制御装置、制御システム及び制御方法を提供することである。
 本発明の一態様に係る制御装置は、可動部を有する作業機械を制御する制御装置であって、前記作業機械の姿勢を示す状態情報、前記作業機械の動作を示す動作情報、及び、前記作業機械の周辺の物体の配置を示す周辺情報を取得する取得手段と、前記状態情報と前記動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定する特定手段と、前記安全距離と前記周辺情報とに応じて、前記作業機械の動作を制御する動作制御手段と、を備える。
 本発明の一態様に係る制御システムは、 可動部を有する作業機械を制御する制御システムであって、制御装置と、前記作業機械の姿勢を示す状態情報を取得する第1のセンサと、を含み、前記制御装置は、前記状態情報と前記作業機械の動作を示す動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定する特定手段と、前記安全距離と前記作業機械の周辺の物体の配置を示す周辺情報とに応じて、前記作業機械の動作を制御する動作制御手段と、を備える。
 本発明の一態様に係る制御方法は、可動部を有する作業機械を制御する制御方法であって、少なくとも1つのプロセッサが、前記作業機械の姿勢を示す状態情報、前記作業機械の動作を示す動作情報、及び、前記作業機械の周辺の物体の配置を示す周辺情報を取得すること、前記状態情報と前記動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定すること、及び前記安全距離と前記周辺情報とに応じて、前記作業機械の動作を制御すること、を含む。
 本発明の一態様によれば、作業機械の稼働時の不慮の接触を低減するとともに、稼働率の低下を抑制する、作業機械の制御装置、制御システム及び制御方法を提供することができる。
本発明の例示的実施形態1に係る制御システムの構成を示すブロック図である。 例示的実施形態1に係る制御装置の構成を示すブロック図である。 例示的実施形態1に係る作業機械の制御方法のフローチャートである。 本発明の例示的実施形態2に係る制御システムの構成を示す図である。 例示的実施形態2に係る作業場所における侵入禁止エリアの設定例である。 侵入禁止エリアを導出するための、可動部の形状を示す概略図である。 例示的実施形態2に係るバックホウの制御方法の流れを示すフロー図である。 本発明の例示的実施形態3に係る制御システムの構成を示す図である。 例示的実施形態3に係るバックホウの制御方法の流れを示すフロー図である。 ソフトウェアによって制御装置を実現するための構成図である。
 〔例示的実施形態1〕
 本発明の第1の例示的実施形態について、図面を参照して詳細に説明する。本例示的実施形態は、後述する例示的実施形態の基本となる形態である。
 (制御システムの構成)
 図1は、例示的実施形態1に係る制御システム1の構成を示すブロック図である。制御システム1は、可動部を有する作業機械を制御する制御システムであって、制御装置30と、作業機械の姿勢を示す状態情報を取得する第1のセンサ40と、を備える。具体的には、制御システム1は、状態情報を取得する第1のセンサ40と、状態情報と作業機械の動作を示す動作情報とに基づいて、作業機械の可動部と周辺の物体との間に設定される安全距離を特定する特定部35と、安全距離と作業機械の周辺の物体の配置を示す周辺情報とに応じて、作業機械の動作を制御する動作制御部36と、を備える。特定部35は、本例示的実施形態において特定手段を実現する構成である。動作制御部36は、本例示的実施形態において動作制御手段を実現する構成である。安全距離とは、バックホウの各部が、移動しうる領域を規定する距離である。具体的には、バックホウの各部と物体との距離がその安全距離以上となるように制御するための目標値である。なお、第1のセンサ40と制御装置30(特定部35と動作制御部36)とは、有線による接続のほか、4G、5G(ローカル5Gを含む)、WiFi(登録商標)、LTE等の無線により接続して通信してもよい。
 なお、図1に示す実施形態では、特定部35と動作制御部36が1つの制御装置30に組み込まれているように記載しているが、これらは必ずしも1つの制御装置に組み込まれる必要はない。例えば、特定部35と動作制御部36が異なる装置に配置されていてもよい。そして、これらが有線通信又は無線通信で接続されていてもよい。また、特定部35と動作制御部36がクラウド上に配置されていてもよい。
 (制御装置の構成)
 図2は、例示的実施形態1に係る制御装置30の構成を示すブロック図である。制御装置30は、取得部31と、安全距離特定部(特定部)35と、動作制御部36と、を備える。取得部31は、作業機械の姿勢を示す状態情報、作業機械の動作を示す動作情報、及び、作業機械の周辺の物体の配置を示す周辺情報を取得する。安全距離特定部35は、状態情報と動作情報とに基づいて、可動部と周辺の物体との間に設定される安全距離を特定する。動作制御部36は、安全距離と周辺情報とに応じて、作業機械の動作を制御する。取得部31は、本例示的実施形態において取得手段を実現する構成である。安全距離特定部(特定部)35は、本例示的実施形態において特定手段を実現する構成である。
 (制御方法の流れ)
 図3は、例示的実施形態1に係る可動部を有する作業機械の制御方法のフローチャートである。制御方法は、ステップS10において、少なくとも1つのプロセッサが、作業機械の姿勢を示す状態情報、作業機械の動作を示す動作情報、及び、作業機械の周辺の物体の配置を示す周辺情報を取得する。次に、ステップS12において、状態情報と動作情報とに基づいて、可動部と周辺の物体との間に設定される安全距離を特定する。次に、ステップS14において、安全距離と周辺情報とに応じて、作業機械の動作を制御する。
 上記の制御装置、制御システム、及び制御方法によれば、作業機械の稼働時の不慮の接触を低減するとともに、稼働率の低下を抑制する、作業機械の制御装置、制御システム及び制御方法を提供することができる。
 〔例示的実施形態2〕
 (制御システムの構成)
 次に、本例示的実施形態2に係る制御システム2の構成について、図面を参照して説明する。本実施形態2では、無人で作業するバックホウ100を制御対象とする制御システム2を例にとって説明する。図4は、本発明の例示的実施形態2に係る制御システム2の構成を示す図である。制御システム2は、制御装置30Aと、センサ40(第1のセンサ401,402,403,404)とを備える。以下、制御装置30とセンサ40について順に説明するが、その前に、バックホウ100について説明する。
 本実施形態に係るバックホウ100は、制御装置30Aから受信する制御指示に基づいて動作する。図4に示すように、バックホウ100は、走行部10と、走行部10に取り付けられた可動部20と、コントローラ80と、を含む。走行部10は、バックホウ100の前進、後進、右折、左折を可能とする走行装置である。走行部10は、例えば無限軌道ベルトを用いて走行する。可動部20は、旋回部21と、旋回部に取り付けられたブーム22と、ブーム22の先端部に取り付けられたアーム23と、アーム23の先端部に取り付けられたバケット24と、を含む。コントローラ80は、制御装置30Aから受信した動作制御信号に従って、バックホウ100を制御する。
 なお、以下の説明では、バックホウ100が制御装置30Aの指示に従って動作することを記載しているが、オペレータによる遠隔操作が行われてもよい。さらに、オペレータによる遠隔操作が作業プログラムとは異なる場合、又は操作ミス等の場合は、制御装置30Aが修正するようにしてもよい。なお、制御装置30Aは、バックホウ100に搭載されていてもよい。
 旋回部21は、走行部10の上で、図の紙面に垂直な平面内での旋回が可能である。なお、バックホウ100が水平な地面にある場合は、図4の紙面に垂直な平面は水平面となるため、以下ではこの面を便宜的に「水平面」と称する。ブーム22は、ブーム軸221を中心に、水平面に略垂直な平面内で往復旋回が可能である。アーム23は、ブーム22と同じ旋回面で、アーム軸231を中心に往復旋回が可能である。バケット24は、アーム23の旋回面と同じ旋回面で、バケット軸241を中心に往復旋回が可能である。
 バックホウ100は、制御装置30AからインターネットN1を介して動作制御信号を受けたコントローラ80によって制御される。バックホウ100は、無人で所定の作業範囲を走行部10で移動し、旋回部21とブーム22とアーム23とを操作してバケット24で土砂を掬い取り、その土砂を所定の位置まで運搬する作業機械である。
 なお、バックホウ100は、コントローラ80によって制御される場合のほか、操作レバーにアタッチメントを取り付けて、そのアタッチメントに動作制御信号を送ることで操作されてもよい。また、本実施形態では、コントローラ80がバックホウ100に搭載されている例を説明しているが、操作方法はこれに限らない。例えば、作業敷地内にサーバを配置して、サーバから動作制御信号を送信してバックホウ100を操作してもよい。また、サーバは、作業敷地内ではなく、クラウド上に配置してもよい。
 (制御装置の構成)
 次に、制御装置30Aの構成について説明する。図4に示すように、制御装置30Aは、可動部20を有するバックホウ100を制御する制御装置であって、取得部31、安全距離特定部35、動作制御部36、記憶部38、及び通信部39を含む。取得部31、安全距離特定部35、動作制御部36、記憶部38、及び通信部39は、互いに電気的に接続されている。
 なお、図4に示す実施形態では、取得部31、安全距離特定部35、及び動作制御部36等が1つの制御装置30Aに組み込まれているように記載しているが、これらは必ずしも1つの制御装置に組み込まれる必要はない。例えば、取得部31、安全距離特定部35、及び動作制御部36等が別々に配置されていてもよい。そして、これらが有線通信又は無線通信で接続されていてもよい。また、取得部31、安全距離特定部35、及び動作制御部36等がクラウド上にあってもよい。
 取得部31は、バックホウ100の姿勢を示す状態情報を取得する状態情報取得部32、バックホウ100の動作を示す動作情報を取得する動作情報取得部33、及びバックホウ100の周辺の物体60の配置を示す周辺情報を取得する周辺情報取得部34を含む。状態情報取得部32は、本例示的実施形態において状態情報取得手段を実現する構成である。動作情報取得部33は、本例示的実施形態において動作情報取得手段を実現する構成である。周辺情報取得部34は、本例示的実施形態において周辺情報取得手段を実現する構成である。以下、各部について順に説明する。
 状態情報取得部32は、後述のセンサ401,402,403,及び404(これらを総称して「第1のセンサ40」と称する。)からの検出値(状態情報)を、インターネットN1を介して取得する。具体的には、第1のセンサ40での検出値は、例えば、コントローラ80に送られ、コントローラ80が取りまとめてインターネットN1を介して制御装置30Aに送信される。又は、第1のセンサ40での検出値は、コントローラ80を介さずに直接インターネットN1を介して制御装置30Aに送信されてもよい。
 さらに、状態情報取得部32は、取得した状態情報から、可動部20の形状を導出する。バックホウ100の状態情報とは、例えば、旋回部21、ブーム22、アーム23、及びバケット24のそれぞれの旋回角度であり、これらから可動部20の形状を導出することができる。形状とは、例えば、可動部20の特定点における3次元座標であってもよい。3次元座標は、後述する周辺情報に基づき生成される3次元マップの座標系と同じ座標系である。
 特定点とは、障害物に衝突する可能性が高い点である。可動部20の特定点は、例えば、ブーム22の先端部、アーム23の先端部、及びバケット24の先端部等としてもよい。また、走行部10の特定点は、例えば走行部10の左右の前端部及び左右の後端部としてもよい。
 なお、バックホウ100の状態情報として、バックホウ100の位置情報と向き情報を含めてもよい。位置情報は、例えばGPS(Global Positioning System)を用いて取得することができる。向き情報とは、走行部10の向きである。向き情報は、方位センサを用いて取得することができる。又は、バックホウ100の位置情報と向き情報は、作業開始前の停止位置である初期位置と向きを、記憶部38に記憶した周辺情報に記憶させ、作業開始後のバックホウ100の動作情報から移動方向と移動距離を導出し、移動先での位置と向きを随時更新し、位置情報と向き情報として利用してもよい。
 動作情報取得部33は、バックホウ100の動作情報を取得する。バックホウ100の動作情報は、例えば、バックホウ100の動特性を示す情報である。動特性を示す情報には、走行部10の動特性を示す情報又は可動部20の動特性を示す情報が含まれる。動特性を示す情報とは、バックホウ100の各部の動作の特性を示す情報である。具体的には、例えば、バックホウ100の各部が停止しているか、動いているか、又は動き始めようとしているか、の情報である。また、動いている、又は動き始めている場合は、その速度又は加速度等である。動特性には、例えば、可動部20の速度及び加速度のうちの少なくとも1つが含まれる。なお、速度には、角速度が含まれ、加速度には角加速度が含まれる。
 バックホウ100の各部の動作の速度又は加速度が大きくなると、他の物体に衝突する危険度が大きくなる。また、速度又は加速度が大きいと、衝突時の衝撃が大きくなり、危険度も高くなる。つまり、動特性は、危険度を示す指標でもあり、動特性により危険度を推定することができる。また、このような危険度に応じて、バックホウ100の動作を制御してもよい。
 速度、加速度等の動作情報は、第1のセンサ40からの検出値から取得することができる。例えば、第1のセンサ40が、加速度センサなどのように、速度及び加速度を検出できる場合は、第1のセンサ40の検出値から速度及び加速度を直接導出することができる。また、第1のセンサ40が速度及び加速度を検出できない場合でも、バックホウ100の各部位の距離と第1のセンサ40が検出するバックホウ100の各部位の直近の旋回角度とから、単位時間あたりにバックホウ100の各部位がそれぞれどの程度動いたかの移動距離を計算し、その移動距離と単位時間とから速度や加速度を導出することができる。これにより、3次元座標における、走行部10を含めた可動部20の特定点の速度(又は角速度)、及び加速度(又は角加速度)を導出することができる。
 なお、動作情報は、例えば、動作制御部36が出力する動作制御信号から取得してもよい。例えば、動作制御信号に基づく走行部10と可動部20の各部の動きの速度及び加速度をデータベース化しておき、データベースを参照して動作制御信号から各部の動きの速度及び加速度を導出することができる。このデータベースは、動作制御信号に基づく走行部10と可動部20の各部の動きの速度及び加速度を予め観測して作成してもよい。また、動作制御信号に加え、バックホウ100の姿勢を示す状態情報も含めてデータベース化してもよい。
 周辺情報取得部34は、記憶部38に記憶された周辺情報を取得し、3次元マップを生成する。具体的には、周辺情報は、バックホウ100の作業場所に存在する物体の位置(表面)データを3次元的に記録した情報である。周辺情報は、後述する侵入禁止エリアを含んでもよい。
 安全距離特定部35は、状態情報と動作情報とに基づいて、可動部20と周辺の物体60との間に設定される安全距離を特定する。状態情報と動作情報は前述したとおりである。安全距離特定部35は、例えば、可動部20の速度又は加速度に応じて、安全距離を特定する。また、安全距離特定部35は、走行部10の速度又は加速度を加味した可動部20の速度又は加速度に応じて、安全距離を特定することが好ましい。
 安全距離とは、バックホウ100の各部(例えば、特定点)が、移動しうる領域を規定する距離である。具体的には、バックホウ100の各部と物体との距離がその安全距離以上となるように制御するための目標値である。安全距離特定部35は、バックホウ100の動作情報に応じて、安全距離を変化させる。安全距離の具体的な導出方法については後述する。
 動作制御部36は、周辺情報が示す物体60と、可動部20との間の距離が、安全距離未満となった場合に、当該物体60を回避するように可動部20を制御する。具体的には、動作制御部36は、物体60と、可動部20との間の距離が、安全距離未満となった場合に、旋回部21、ブーム22、アーム23、又はバケット24を移動させ、物体60との衝突を回避する。また、バックホウ100の各部の移動速度を低減してもよい。最終的には、動作制御部36は、バックホウ100を停止させてもよい。
 周辺情報は、バックホウ100が作業を行う作業現場に存在する物体60の3次元的配置を示す情報である。作業現場に存在する物体60は、「周辺の物体」とも称する。なお、周辺の物体60の位置に基づいて生成された、後述する侵入禁止エリア70も周辺情報の一部であってもよい。本実施形態においては、周辺情報は、記憶部38に予め記憶されている。具体的には、周辺情報は、作業を開始する前に記憶部38に記憶される。例えば、周辺情報は、作業を開始する前に、オペレータが入力してもよいし、制御装置30Aが、施設情報を集約するサーバ等から収集しても良い。
 記憶部38は、上述の周辺情報を予め記憶しているほか、ROM(Read Only Memory)に、状態情報取得部32、動作情報取得部33、周辺情報取得部34、安全距離特定部35、及び動作制御部36のプログラムを記憶していてもよい。このようなプログラムは、制御装置30Aの1又は複数のプロセッサにより、RAMに展開され、実行されてもよい。これにより、各プログラムを各部として機能させることができる。
 センサ(第1のセンサ)40は、例えば、旋回部21、ブーム22、アーム23、及びバケット24のそれぞれの旋回角度を検出するセンサである。具体的には、センサ401は、旋回部21の旋回角度を検出する、例えばジャイロセンサである。また、センサ401は、旋回部21を旋回させるモータの回転数を検出するエンコーダでもよい。センサ402は、ブーム22の水平面からの角度を検出する傾斜センサ又はジャイロセンサである。センサ402は、ブーム22を旋回させる油圧シリンダのロッドの移動距離を検出するエンコーダでもよい。センサ403は、アーム23の、ブーム22に対する角度を検出する、例えば傾斜センサ、ジャイロセンサ、又はエンコーダである。センサ404は、バケット24の、アーム23に対する角度を検出する、例えば傾斜センサ、ジャイロセンサ、又はエンコーダである。なお、センサ402~404は、それぞれ、バックホウ100の外部に設置されてもよいし、内部に設置されてもよい。外部に設置される場合、センサ402~404は、それぞれ、傾斜センサ、加速度センサ、ジャイロセンサ、ストロークセンサ、又はエンコーダ等である。また、内部に設置される場合、センサ402~404は、それぞれ、圧力センサ、流量センサ、シリンダセンサ、油圧センサ、又はストロークセンサ等である。
 (安全距離の設定)
 次に、安全距離特定部35による安全距離の設定方法について説明する。まず、安全距離特定部35は、周辺情報に基づいて、侵入禁止エリア70を予め生成しておく構成としてもよい。侵入禁止エリア70は、バックホウ100が接触してはいけない物体、又は侵入してはいけないエリアを面で表したものである。
 侵入禁止エリア70は、物体60を取り囲む、所定の形状の面として設定してもよい。例えば、図5に示すように、作業場所にある資材置場の周囲に矩形状の面である侵入禁止エリア70Aを設ける。また、上方に通された梁の周囲に矩形状の面である侵入禁止エリア70Bを設ける。なお、可動部20が到達できる最大到達高さ以上の高さには、侵入禁止エリア70Bを設定する必要はない。つまり、侵入禁止エリア70Bを設定する上限は、可動部20が到達できる最大到達高さまででよい。また、バックホウ100が作業できない斜面がある領域の手前に、侵入禁止エリア70Cを設ける。侵入禁止エリア70Cの幅及び奥行はバックホウ100の到達範囲に合わせて設定可能である。
 侵入禁止エリア70A、70Bは、バックホウ100が資材置場及び梁等の物体60に接触しないための制限エリアである。一方、侵入禁止エリア70Cは、バックホウ100が作業できない斜面に侵入しないように規制する制限エリアである。このように、所定の面を設定することにより、接触防止のためだけでなく、転落防止のための侵入禁止エリアを設けることができる。
 以上のように、物体60を取り囲む規則的な形状の面を侵入禁止エリアとすることにより、不規則な物体60の表面を侵入禁止エリアとする場合に比べて、侵入禁止エリアのデータ量、及び安全距離の設定に必要なデータ量と計算量を低減でき、安全距離の演算速度を速めることができる。
 安全距離特定部35は、状態情報と、動作情報と、に基づいて、例えば可動部20の特定点の安全距離を特定する。より具体的には、安全距離特定部35は、可動部20の速度ベクトルの各成分に応じた各軸半径を有する楕円体を設定し、安全距離を、楕円体の半径として特定する。以下では、バケット24の先端部から物体60までの間の安全距離を特定する一例を説明する。
 図6は、可動部20の形状を示す概略図である。図6に示すように、バケット24の先端部の3次元座標を(x、y、z)とする。この3次元座標系は、周辺情報を表す3次元座標系と同じである。バケット24の先端部の3次元座標は、状態情報から導出することができる。例えば、ブーム軸221の中点を3次元座標の原点とすると、各座標は、下記式(1)のように表される。ここで、θはバックホウ100の向き、θはブーム角、θはアーム角、θはバケット角を示す。ブーム角θは、基準面(旋回部21の旋回面)からのブーム22の角度、アーム角θは、ブーム22に対するアーム23の角度、バケット角θは、アーム23に対するバケット24の角度である。
Figure JPOXMLDOC01-appb-M000001
 安全距離は、バックホウ100の動作又はセンサ特性に合わせて、可変長の楕円体として表すことができる。つまり、物体60の任意の点(x、y、z)がバケット24の先端部に衝突するか否かは、以下の式(2)で算出することができる。
Figure JPOXMLDOC01-appb-M000002
 上記式(2)の等号が成り立つ(x、y、z)は、楕円体を形成し、それより外部の点であればバケット24の先端部に衝突しないと判定される。上記式(2)において、a,b,cは可変数であり、これらを変えることにより、それぞれ楕円体の3軸方向(x軸方向、y軸方向、z軸方向)の半径距離を変えることができる。
 例えば、可動部20の移動速度ベクトルが大きい軸方向には大きく安全距離を取るべきであることから、下記式(3)に示す移動速度ベクトルに合わせて楕円体の各軸半径を決定することができる。移動速度は、動作情報から導出することができる。
Figure JPOXMLDOC01-appb-M000003
 式(3)に示すf(v)は、可変数aを、x軸方向の速度vに応じて変化させる正の相関を有する関数である。つまり、速度vが大きいほど、可変数aは大きくなる。同様に、f(v)は、可変数bを、y軸方向の速度vに応じて変化させる正の相関を有する関数である。また、f(v)は、可変数cを、z軸方向の速度vに応じて変化させる正の相関を有する関数である。これにより、移動速度が大きい軸方向には大きい安全距離を取ることができる。
 また、例えば、下記式(4)に示すように、センサ40の誤差特性に合わせて楕円体の半径を変えることができる。
Figure JPOXMLDOC01-appb-M000004
 式(4)は、センサ404からの出力に誤差が含まれている場合に、その誤差を考慮して半径を決めるための計算式である。具体的には、検出されたバケット角θに、x軸方向の角度誤差Δθ3x、y軸方向の角度誤差Δθ3y、及びz軸方向の角度誤差Δθ3zが含まれている場合に、式(2)における可変数a,b,cをa’,b’,c’に置き換える。式(4)中のlは、バケット軸241からバケット24の先端部までの距離である。これにより、センサ404に誤差があっても、その誤差を考慮して安全側に安全距離を設定することができる。
 安全距離は、バックホウ100の状態情報と動作情報に応じて適時に変更される。例えば、可動部20の一部の速度が変化した場合は、安全距離特定部35が安全距離を再計算するように設定してもよい。これにより、バックホウ100が稼働中の場合は、短時間で安全距離が再計算され、更新されうる。
 以上のようにして3次元方向の安全距離が設定されると、動作制御部36は、設定された安全距離に応じて、バックホウ100の動作を制御することができる。例えば、動作制御部36は、物体60と、バケット24の先端部との間の距離が、安全距離未満となった場合に、当該物体60を回避するように可動部20を制御する。また、動作制御部36は、侵入禁止エリア70と、バケット24の先端部との間の距離が、安全距離未満となった場合に、当該侵入禁止エリア70を回避するように可動部20を制御してもよい。
 上述の安全距離の特定方法においては、バックホウ100、特に可動部20の動特性(例えば、移動速度ベクトル)を考慮して、速度が大きい方向については安全距離を大きく取り、速度が小さい方向については安全距離を小さく取ることができる。従って、安全距離を必要最小限の距離で特定することができる。
 (制御システム2の構成及び効果)
 以上のように、本例示的実施形態2に係る制御システム2においては、可動部20を有する作業機械(バックホウ100)の制御装置30Aと、バックホウ100の姿勢を示す状態情報を取得する第1のセンサ40と、を含み、制御装置30Aは、状態情報と、バックホウ100の動作情報と、に基づいて、可動部20と周辺の物体60との間に設定される安全距離を特定し、安全距離と周辺情報に応じて、バックホウ100の動作を制御する構成が採用されている。このため、本例示的実施形態2に係る制御システム2によれば、バックホウ100の稼働時の不慮の接触を低減するとともに、稼働率の低下を抑制することができる。
 なお、動作制御部36は、物体60とバックホウ100との間の距離が安全距離未満となった場合に、最終的にバックホウ100を停止させる場合がある。その場合は、動作制御部36は、バックホウ100の可動部20を折り畳んで衝突の虞がない安全な領域まで退避させ、予め設定されていた作業領域の別な場所に向けて移動させ、作業を再開させてもよい。
 (制御装置30Aの構成及び効果)
 また、本例示的実施形態2に係る制御装置30Aにおいては、バックホウ100の状態情報、バックホウ100の動作情報、及び、バックホウ100の周辺の物体60の配置を示す周辺情報を取得する取得部と、状態情報と動作情報とに基づいて、可動部20と周辺の物体60との間に設定される安全距離を特定する特定部と、安全距離と周辺情報とに応じて、バックホウ100の動作を制御する動作制御部と、を備えている。このため、本例示的実施形態2に係る制御装置30Aによれば、バックホウ100の稼働時の不慮の接触を低減するとともに、稼働率の低下を抑制することができる。
 (制御方法の流れ)
 本例示的実施形態に係る制御方法S2の流れについて、図7を参照して説明する。図7は、バックホウ100の制御方法S2の流れを示すフロー図である。
 まず、ステップS20において、周辺情報取得部(少なくとも1つのプロセッサ)34は、記憶部38からバックホウ100の周辺の物体の配置を示す周辺情報を取得する。次に、ステップS21において、状態情報取得部(少なくとも1つのプロセッサ)32は、センサ40からバックホウ100の姿勢を示す状態情報を取得する。次に、ステップS22において、動作情報取得部(少なくとも1つのプロセッサ)33は、動作制御部36からバックホウ100の動作を示す動作情報を取得する。次に、ステップS23において、安全距離特定部35は、状態情報と動作情報とに基づいて、バックホウ100の可動部20と周辺の物体60との間に設定される安全距離を特定する。次に、ステップS24において、動作制御部36は、安全距離と周辺情報とに応じてバックホウ100の動作を制御する。次に、ステップS25において、動作制御部36は、動作制御が終了したか否かを判定する。動作制御が終了した場合(ステップS25:Y)は、動作制御は終了する。動作制御が終了していない場合(ステップS25:N)は、動作制御はステップS21に戻る。動作制御が終了した場合とは、例えば、バックホウ100の作業が終了した場合、又は制御装置30Aが動作制御終了の指示を受信した場合等である。
 なお、ステップS22の動作情報はバックホウ100の動特性を示す情報であってもよいこと、動特性には、可動部20の速度及び加速度のうちの少なくとも1つが含まれることは、前述のとおりである。ステップS23の安全距離を特定することは、可動部20の速度ベクトルの各成分に応じた各軸半径を有する楕円体を設定すること、及び安全距離を、楕円体の半径として特定することを含むことは、前述のとおりである。ステップS24のバックホウ100の動作を制御することは、周辺情報が示す物体60と、可動部20との間の距離が、安全距離未満となった場合に、当該物体60を回避するように可動部20を制御することを含むことは、前述のとおりである。
 なお、バックホウ100の形状又は移動状態(移動又は旋回の有無、移動速度、加速度、角速度、角加速度等)が変わった場合は、新たに状態情報と動作情報を取得して、安全距離を特定し直し、新たな安全距離と周辺情報に応じて動作制御を行うことが好ましい。
 (制御方法S2の効果)
 以上のように、本例示的実施形態に係る制御方法S2においては、状態情報と動作情報と周辺情報とを取得し、状態情報と動作情報とに基づいて安全距離を特定し、その安全距離と周辺情報とに応じてバックホウ100の動作を制御する、という構成が採用されている。このため、本例示的実施形態に係る制御方法S2によれば、バックホウ100の稼働時の不慮の接触を低減するとともに、稼働率の低下を抑制することができる。
 〔例示的実施形態3〕
 次に、本発明の第3の例示的実施形態について、図面を参照して詳細に説明する。なお、例示的実施形態2にて説明した構成要素と同じ機能を有する構成要素については、同じ符号を付し、その説明を適宜省略する。
 図8は、本発明の例示的実施形態3に係る制御システム3の構成を示す図である。本実施形態3に係る制御システム3は、制御装置30Bと、距離情報を取得する距離センサ(第2のセンサ)50を備えている。制御対象であるバックホウ100は、例示的実施形態2に係るバックホウ100と同じ構成であるので、説明は省略する。
 距離センサ50は、例えば、レーザによって物体までの位置を計測する3DLidar(3D Laser Imaging Detection and Ranging)である。3DLidarは、作業場所の高所に配置され、レーザ光を出射して、周辺の物体60から反射波が戻ってくるまでの時間を計測する。なお、距離センサ50は3DLidarに限られず、周辺情報を取得可能なセンサであればよく、例えばToF(Time of Flight)カメラ等でもよい。ToFカメラは、光を出射してその反射光が戻ってくるまでの時間を計測して距離に換算することにより、周辺情報を取得する。周辺情報は、例えば、バックホウ100の起動時に取得されてもよい。また、周辺情報は、例えば、定時(7時、12時、20時等)に取得されてもよく、又は定期的(3時間毎等)に、現場に設置された距離センサ50によって取得されてもよい。
 図8に示すように、本実施形態3に係る制御装置30Bは、取得部31、安全距離特定部35、動作制御部36、周辺情報生成部37、記憶部38、及び通信部39を含む。制御装置30Bが実施形態2の制御装置30Aと異なる点は、制御装置30Bは周辺情報生成部37を備えていることである。
 周辺情報生成部37は、距離センサ50による検出値に基づいて、周辺情報としてバックホウ100を含む3次元マップを生成する。具体的には、周辺情報取得部34は、距離センサ50から検出値を取得して、周辺の物体60までの距離に換算する。そして、距離情報を周辺情報生成部37に送信する。周辺情報生成部37は、周辺情報取得部34から取得した距離情報から、周辺情報を生成する。生成する周辺情報は、物体60とバックホウ100を含む3次元マップである。周辺情報生成部37は、距離情報に基づいて、バックホウ100の位置と向きを特定することができる。
 バックホウ100の作業場所は、資材の搬入、搬出が頻繁に行われる。また、トラック等の他の作業車又は作業装置が頻繁に出入りする。そのため、障害物となる物体60の位置が刻々と変化する。つまり、周辺情報が刻々と変化する。前述の例示的実施形態2に係る制御システム2では、周辺情報は予め記憶部38に記憶されており、すぐには更新することができない。それに対して、本実施形態では、適時に周辺情報を最新のものに更新することができる。
 (制御システム3の構成及び効果)
 以上のように、本実施形態3に係る制御システム3においては、距離センサ50を用いることにより、3次元の周辺情報を迅速に更新することができる。また、バックホウ100の位置と向きも迅速に更新することができる。従って、時々刻々と変化する物体60の状況、及びバックホウ100の移動に素早く対応して物体60の位置とバックホウ100の位置及び向きを更新することができる。そして、状態情報、及び動作情報から、安全距離を特定して、新たに構築された物体60に接触しないように動作制御を行うことができる。このため、バックホウ100の稼働時の不慮の接触をさらに低減するとともに、稼働率の低下を抑制することができる。
 (制御装置30Bの構成及び効果)
 また、本例示的実施形態3に係る制御装置30Bは、距離センサ50による検出値に基づいて、周辺情報としてバックホウ100を含む3次元マップを生成する周辺情報生成部37を更に備えている。従って、バックホウ100の稼働時の不慮の接触をさらに低減するとともに、稼働率の低下を抑制することができる。
 (制御方法S3の流れ)
 次に、制御システム3におけるバックホウ100の動作を制御する制御方法S3について、図面を参照して説明する。図9は、本実施形態3に係るバックホウ100の制御方法S3の流れを示すフロー図である。
 まず、ステップS30において、周辺情報生成部37は、距離センサ(第2のセンサ)50から取得した距離情報から周辺情報を生成する。次に、ステップS31において、状態情報取得部32は、センサ(第1のセンサ)40からバックホウ100の状態情報を取得する。次のステップS32からステップS35までは、実施形態2の制御方法S2で説明したステップS22からステップS25までと同様であるので、説明は省略する。
 (制御方法S3の効果)
 制御方法S3においても、バックホウ100の稼働時の不慮の接触をさらに低減するとともに、稼働率の低下を抑制することができる。
 上記の例示的実施形態2及び3では、作業機械としてバックホウを例にとって説明した。しかし、本発明を適用できる作業機械はこれに限られない。例えば、建設機械、土木機械、運搬機械、工作機械、組立機械等の、可動部を有する機械であれば適用可能である。特に、位置を変えながら作業する、ロボットを含む作業機械全般に好適に適用可能である。
 〔ソフトウェアによる実現例〕
 制御装置30,30A,30Bの一部又は全部の機能は、集積回路(ICチップ)等のハードウェアによって実現してもよいし、ソフトウェアによって実現してもよい。
 後者の場合、制御装置30,30A,30Bは、例えば、各機能を実現するソフトウェアであるプログラムの命令を実行するコンピュータによって実現される。このようなコンピュータの一例(以下、コンピュータCと記載する)を図10に示す。コンピュータCは、少なくとも1つのプロセッサC1と、少なくとも1つのメモリC2と、を備えている。メモリC2には、コンピュータCを制御装置30,30A,30Bとして動作させるためのプログラムPが記録されている。コンピュータCにおいて、プロセッサC1は、プログラムPをメモリC2から読み取って実行することにより、制御装置30,30A,30Bの各機能が実現される。
 プロセッサC1としては、例えば、CPU(Central Processing Unit)、GPU(Graphic Processing Unit)、DSP(Digital Signal Processor)、MPU(Micro Processing Unit)、FPU(Floating point number Processing Unit)、PPU(Physics Processing Unit)、マイクロコントローラ、又は、これらの組み合わせなどを用いることができる。メモリC2としては、例えば、フラッシュメモリ、HDD(Hard Disk Drive)、SSD(Solid State Drive)、又は、これらの組み合わせなどを用いることができる。
 なお、コンピュータCは、プログラムPを実行時に展開したり、各種データを一時的に記憶したりするためのRAM(Random Access Memory)を更に備えていてもよい。また、コンピュータCは、他の装置との間でデータを送受信するための通信インタフェースを更に備えていてもよい。また、コンピュータCは、キーボードやマウス、ディスプレイやプリンタなどの入出力機器を接続するための入出力インタフェースを更に備えていてもよい。
 また、プログラムPは、コンピュータCが読み取り可能な、一時的でない有形の記録媒体Mに記録することができる。このような記録媒体Mとしては、例えば、テープ、ディスク、カード、半導体メモリ、又はプログラマブルな論理回路などを用いることができる。コンピュータCは、このような記録媒体Mを介してプログラムPを取得することができる。また、プログラムPは、伝送媒体を介して伝送することができる。このような伝送媒体としては、例えば、通信ネットワーク、又は放送波などを用いることができる。コンピュータCは、このような伝送媒体を介してプログラムPを取得することもできる。
 〔付記事項1〕
 本発明は、上述した実施形態に限定されるものでなく、請求項に示した範囲で種々の変更が可能である。例えば、上述した実施形態に開示された技術的手段を適宜組み合わせて得られる実施形態についても、本発明の技術的範囲に含まれる。
 〔付記事項2〕
 上述した実施形態の一部又は全部は、以下のようにも記載され得る。ただし、本発明は、以下の記載する態様に限定されるものではない。
 (付記1)
 可動部を有する作業機械を制御する制御装置であって、前記作業機械の姿勢を示す状態情報、前記作業機械の動作を示す動作情報、及び、前記作業機械の周辺の物体の配置を示す周辺情報を取得する取得手段と、前記状態情報と前記動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定する特定手段と、前記安全距離と前記周辺情報とに応じて、前記作業機械の動作を制御する動作制御手段と、を備えている制御装置。
 上記の構成によれば、作業機械の稼働時の不慮の接触を低減するとともに、稼働率の低下を抑制することができる。
 (付記2)
 前記動作情報は、前記作業機械の動特性を示す情報である、ことを特徴とする付記1に記載の制御装置。
 上記の構成によれば、安全距離をより小さく特定することができる。
 (付記3)
 前記動特性には、前記可動部の速度及び加速度のうちの少なくとも1つが含まれる、ことを特徴とする付記2に記載の制御装置。
 上記の構成によれば、安全距離をより小さく特定することができる。
 (付記4)
 前記特定手段は、前記可動部の速度ベクトルの各成分に応じた各軸半径を有する楕円体を設定し、前記安全距離を、前記楕円体の半径として特定する、ことを特徴とする付記1から3のいずれか1つに記載の制御装置。
 上記の構成によれば、速度ベクトルの各成分に応じて安全距離を変更することができる。
 (付記5)
 距離センサによる検出値に基づいて、前記周辺情報として前記作業機械を含む3次元マップを生成する周辺情報生成手段を更に備えている、ことを特徴とする制御装置。
 上記の構成によれば、作業機械を含む周辺情報を適時に更新することができる。
 (付記6)
 前記動作制御手段は、前記周辺情報が示す前記物体と、前記可動部との間の距離が、前記安全距離未満となった場合に、当該物体を回避するように前記可動部を制御する、ことを特徴とする制御装置。
 上記の構成によれば、作業機械の稼働時の不慮の接触を低減することができる。
 (付記7)
 可動部を有する作業機械を制御する制御システムであって、制御装置と、前記作業機械の姿勢を示す状態情報を取得する第1のセンサと、を含み、前記制御装置は、前記状態情報と前記作業機械の動作を示す動作情報とに基づいて、前記可動部と周辺の物体との間に設定される安全距離を特定する特定手段と、前記安全距離と前記作業機械の前記周辺の物体の配置を示す周辺情報とに応じて、前記作業機械の動作を制御する動作制御手段と、を備えている、制御システム。
 上記の構成によれば、作業機械の稼働時の不慮の接触を低減することができる。
 (付記8)
 前記動作情報は、前記作業機械の動特性を示す情報である、付記7に記載の制御システム。
 上記の構成によれば、安全距離をより小さく特定することができる。
 (付記9)
 前記動特性には、前記可動部の速度及び加速度のうちの少なくとも1つが含まれる、付記8に記載の制御システム。
 上記の構成によれば、安全距離をより小さく特定することができる。
 (付記10)
 前記特定手段は、前記可動部の速度ベクトルの各成分に応じた各軸半径を有する楕円体を設定し、前記安全距離を、前記楕円体の半径として特定する、付記7から9のいずれか1つに記載の制御システム。
 上記の構成によれば、速度ベクトルの各成分に応じて安全距離を変更することができる。
 (付記11)
 前記周辺情報を取得する第2のセンサを更に備え、前記制御装置は、前記第2のセンサによる検出値に基づいて、前記作業機械を含む3次元マップを生成する周辺情報生成手段を更に備えている、付記7から10のいずれか1つに記載の制御システム。
 上記の構成によれば、作業機械を含む周辺情報を適時に更新することができる。
 (付記12)
 前記動作制御手段は、前記周辺情報が示す前記物体と、前記可動部との間の距離が、前記安全距離未満となった場合に、当該物体を回避するように前記可動部を制御する、付記7から11のいずれか1つに記載の制御システム。
 上記の構成によれば、作業機械の稼働時の不慮の接触を低減することができる。
 (付記13)
 可動部を有する作業機械を制御する制御方法であって、少なくとも1つのプロセッサが、前記作業機械の姿勢を示す状態情報、前記作業機械の動作を示す動作情報、及び、前記作業機械の周辺の物体の配置を示す周辺情報を取得すること、前記状態情報と前記動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定すること、及び前記安全距離と前記周辺情報とに応じて、前記作業機械の動作を制御すること、を含む制御方法。
 上記の方法によれば、作業機械の稼働時の不慮の接触を低減するとともに、稼働率の低下を抑制することができる。
 (付記14)
 前記動作情報は、前記作業機械の動特性を示す情報である、ことを特徴とする付記13に記載の制御方法。
 上記の方法によれば、安全距離をより小さく特定することができる。
 (付記15)
 前記動特性には、前記可動部の速度及び加速度のうちの少なくとも1つが含まれる、ことを特徴とする付記14に記載の制御方法。
 上記の方法によれば、安全距離をより小さく特定することができる。
 (付記16)
 前記安全距離を特定することは、前記可動部の速度ベクトルの各成分に応じた各軸半径を有する楕円体を設定すること、及び前記安全距離を、前記楕円体の半径として特定すること、を含む付記13から15のいずれか1つに記載の制御方法。
 上記の方法によれば、速度ベクトルの各成分に応じて安全距離を変更することができる。
 (付記17)
 前記周辺情報を取得することは、距離センサによる検出値に基づいて、前記周辺情報として前記作業機械を含む3次元マップを生成すること、を含む付記13から16のいずれか1つに記載の制御方法。
 上記の方法によれば、作業機械を含む周辺情報を適時に更新することができる。
 (付記18)
 前記作業機械の動作を制御することは、前記周辺情報が示す前記物体と、前記可動部との間の距離が、前記安全距離未満となった場合に、当該物体を回避するように前記可動部を制御すること、を含む付記13から17のいずれか1つに記載の制御方法。
 上記の方法によれば、作業機械の稼働時の不慮の接触を低減することができる。
 (付記19)
 コンピュータを、可動部を有する作業機械を制御する制御装置として機能させるプログラムであって、前記コンピュータを、前記作業機械の姿勢を示す状態情報、前記作業機械の動作を示す動作情報、及び、前記作業機械の周辺の物体の配置を示す周辺情報を取得する取得手段、前記状態情報と前記動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定する特定手段、及び前記安全距離と前記周辺情報とに応じて、前記作業機械の動作を制御する動作制御手段、として機能させるためのプログラム。
 上記の構成によれば、付記1と同様の効果を奏する。
 (付記20)
 前記動作情報は、前記作業機械の動特性を示す情報である、ことを特徴とする付記19に記載のプログラム。
 上記の構成によれば、付記2と同様の効果を奏する。
 (付記21)
 前記動特性には、前記可動部の速度及び加速度のうちの少なくとも1つが含まれる、ことを特徴とする付記20に記載のプログラム。
 上記の構成によれば、付記3と同様の効果を奏する。
 (付記22)
 前記特定手段は、前記可動部の速度ベクトルの各成分に応じた各軸半径を有する楕円体を設定し、前記安全距離を、前記楕円体の半径として特定する、ことを特徴とする付記19から21のいずれか1つに記載のプログラム。
 上記の構成によれば、付記4と同様の効果を奏する。
 (付記23)
 距離センサによる検出値に基づいて、前記周辺情報として前記作業機械を含む3次元マップを生成する周辺情報生成手段を更に備えている、ことを特徴とする付記19から22のいずれか1つに記載のプログラム。
 上記の構成によれば、付記5と同様の効果を奏する。
 (付記24)
 前記動作制御手段は、前記周辺情報が示す前記物体と、前記可動部との間の距離が、前記安全距離未満となった場合に、当該物体を回避するように前記可動部を制御する、ことを特徴とする付記19から23のいずれか1つに記載のプログラム。
 上記の構成によれば、付記6と同様の効果を奏する。
 (付記25)
 コンピュータを、可動部を有する作業機械を制御する制御装置として機能させるプログラムであって、前記コンピュータを、前記作業機械の姿勢を示す状態情報、前記作業機械の動作を示す動作情報、及び、前記作業機械の周辺の物体の配置を示す周辺情報を取得する取得手段、前記状態情報と前記動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定する特定手段、及び前記安全距離と前記周辺情報とに応じて、前記作業機械の動作を制御する動作制御手段、として機能させるためのプログラムを記録した、コンピュータ読み取り可能な一時的でない有形の記録媒体。
 (付記26)
 可動部を有する作業機械を制御する制御装置であって、少なくとも1つのプロセッサを備え、前記プロセッサは、作業機械の姿勢を示す状態情報、前記作業機械の動作を示す動作情報、及び、前記作業機械の周辺の物体の配置を示す周辺情報を取得する処理と、前記状態情報と前記動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定する処理と、前記安全距離と前記周辺情報とに応じて、前記作業機械の動作を制御する処理とを実行する制御装置。
 なお、この制御装置は、更にメモリを備えていてもよく、このメモリには、前記各処理を前記プロセッサに実行させるためのプログラムが記憶されていてもよい。
 1,2,3・・・制御システム
 10・・・走行部
 20・・・可動部
 21・・・旋回部
 22・・・ブーム
 23・・・アーム
 24・・・バケット
 30,30A,30B・・・制御装置
 31・・・取得部(取得手段)
 32・・・状態情報取得部(状態情報取得手段)
 33・・・動作情報取得部(動作情報取得手段)
 34・・・周辺情報取得部(周辺情報取得手段)
 35・・・安全距離特定部(安全距離特定手段)
 36・・・動作制御部(動作制御手段)
 37・・・周辺情報生成部(周辺情報生成手段)
 38・・・メモリ
 39・・・通信手段
 40(401,402,403,404)・・・センサ(第1のセンサ)
 50・・・距離センサ(第2のセンサ)
 60・・・物体
 70(70A,70B,70C)・・・侵入禁止エリア
 80・・・コントローラ
 100・・・バックホウ

Claims (18)

  1.  可動部を有する作業機械を制御する制御装置であって、
     前記作業機械の姿勢を示す状態情報、前記作業機械の動作を示す動作情報、及び、前記作業機械の周辺の物体の配置を示す周辺情報を取得する取得手段と、
     前記状態情報と前記動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定する特定手段と、
     前記安全距離と前記周辺情報とに応じて、前記作業機械の動作を制御する動作制御手段と、
    を備えている制御装置。
  2.  前記動作情報は、前記作業機械の動特性を示す情報である、
    請求項1に記載の制御装置。
  3.  前記動特性には、前記可動部の速度及び加速度のうちの少なくとも1つが含まれる、
    請求項2に記載の制御装置。
  4.  前記特定手段は、前記可動部の速度ベクトルの各成分に応じた各軸半径を有する楕円体を設定し、前記安全距離を、前記楕円体の半径として特定する、
    請求項1から3のいずれか1項に記載の制御装置。
  5.  距離センサによる検出値に基づいて、前記周辺情報として前記作業機械を含む3次元マップを生成する周辺情報生成手段を更に備えている、
    請求項1から4の何れか1項に記載の制御装置。
  6.  前記動作制御手段は、前記周辺情報が示す前記物体と、前記可動部との間の距離が、前記安全距離未満となった場合に、当該物体を回避するように前記可動部を制御する、
    請求項1から5の何れか1項に記載の制御装置。
  7.  可動部を有する作業機械を制御する制御システムであって、
     制御装置と、
     前記作業機械の姿勢を示す状態情報を取得する第1のセンサと、
    を含み、
     前記制御装置は、
     前記状態情報と前記作業機械の動作を示す動作情報とに基づいて、前記可動部と周辺の物体との間に設定される安全距離を特定する特定手段と、
     前記安全距離と前記作業機械の前記周辺の物体の配置を示す周辺情報とに応じて、前記作業機械の動作を制御する動作制御手段と、
    を備えている、
    制御システム。
  8.  前記動作情報は、前記作業機械の動特性を示す情報である、
    請求項7に記載の制御システム。
  9.  前記動特性には、前記可動部の速度及び加速度のうちの少なくとも1つが含まれる、
    請求項8に記載の制御システム。
  10.  前記特定手段は、前記可動部の速度ベクトルの各成分に応じた各軸半径を有する楕円体を設定し、前記安全距離を、前記楕円体の半径として特定する、
    請求項7から9のいずれか1項に記載の制御システム。
  11.  前記周辺情報を取得する第2のセンサを更に備え、前記制御装置は、前記第2のセンサによる検出値に基づいて、前記作業機械を含む3次元マップを生成する周辺情報生成手段を更に備えている、
    請求項7から10のいずれか1項に記載の制御システム。
  12.  前記動作制御手段は、前記周辺情報が示す前記物体と、前記可動部との間の距離が、前記安全距離未満となった場合に、当該物体を回避するように前記可動部を制御する、
    請求項7から11のいずれか1項に記載の制御システム。
  13.  可動部を有する作業機械を制御する制御方法であって、
     少なくとも1つのプロセッサが、
      前記作業機械の姿勢を示す状態情報、前記作業機械の動作を示す動作情報、及び、前記作業機械の周辺の物体の配置を示す周辺情報を取得すること、
      前記状態情報と前記動作情報とに基づいて、前記可動部と前記周辺の物体との間に設定される安全距離を特定すること、及び
      前記安全距離と前記周辺情報とに応じて、前記作業機械の動作を制御すること、
    を含む制御方法。
  14.  前記動作情報は、前記作業機械の動特性を示す情報である、
    ことを特徴とする請求項13に記載の制御方法。
  15.  前記動特性には、前記可動部の速度及び加速度のうちの少なくとも1つが含まれる、
    ことを特徴とする請求項14に記載の制御方法。
  16.  前記安全距離を特定することは、
     前記可動部の速度ベクトルの各成分に応じた各軸半径を有する楕円体を設定すること、及び
     前記安全距離を、前記楕円体の半径として特定すること、を含む、
    請求項13から15のいずれか1項に記載の制御方法。
  17.  前記周辺情報を取得することは、
     距離センサによる検出値に基づいて、前記周辺情報として前記作業機械を含む3次元マップを生成すること、を含む、
    請求項13から16のいずれか1項に記載の制御方法。
  18.  前記作業機械の動作を制御することは、
     前記周辺情報が示す前記物体と、前記可動部との間の距離が、前記安全距離未満となった場合に、当該物体を回避するように前記可動部を制御すること、を含む、
    請求項13から17のいずれか1項に記載の制御方法。
     
PCT/JP2021/039935 2020-11-09 2021-10-29 制御装置、制御システム、及び制御方法 WO2022097570A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US18/034,861 US20230417018A1 (en) 2020-11-09 2021-10-29 Control device, control system, and control method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020186817A JP2022076406A (ja) 2020-11-09 2020-11-09 制御装置、制御システム、及び制御方法
JP2020-186817 2020-11-09

Publications (1)

Publication Number Publication Date
WO2022097570A1 true WO2022097570A1 (ja) 2022-05-12

Family

ID=81457901

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/039935 WO2022097570A1 (ja) 2020-11-09 2021-10-29 制御装置、制御システム、及び制御方法

Country Status (3)

Country Link
US (1) US20230417018A1 (ja)
JP (1) JP2022076406A (ja)
WO (1) WO2022097570A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230265640A1 (en) * 2022-02-24 2023-08-24 Caterpillar Inc. Work machine 3d exclusion zone

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006257724A (ja) * 2005-03-16 2006-09-28 Hitachi Constr Mach Co Ltd 作業機械の安全装置
JP2006307436A (ja) * 2005-04-26 2006-11-09 Shin Caterpillar Mitsubishi Ltd 旋回系作業機械
JP2007023486A (ja) * 2005-07-12 2007-02-01 Shin Caterpillar Mitsubishi Ltd 作業機械における接触回避制御装置
JP2010198519A (ja) * 2009-02-27 2010-09-09 Hitachi Constr Mach Co Ltd 周囲監視装置
WO2012053105A1 (ja) * 2010-10-22 2012-04-26 日立建機株式会社 作業機械の周辺監視装置
JP2016176289A (ja) * 2015-03-20 2016-10-06 住友建機株式会社 建設機械
JP2019108722A (ja) * 2017-12-18 2019-07-04 住友重機械工業株式会社 建設機械
WO2019189203A1 (ja) * 2018-03-26 2019-10-03 住友建機株式会社 ショベル

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006257724A (ja) * 2005-03-16 2006-09-28 Hitachi Constr Mach Co Ltd 作業機械の安全装置
JP2006307436A (ja) * 2005-04-26 2006-11-09 Shin Caterpillar Mitsubishi Ltd 旋回系作業機械
JP2007023486A (ja) * 2005-07-12 2007-02-01 Shin Caterpillar Mitsubishi Ltd 作業機械における接触回避制御装置
JP2010198519A (ja) * 2009-02-27 2010-09-09 Hitachi Constr Mach Co Ltd 周囲監視装置
WO2012053105A1 (ja) * 2010-10-22 2012-04-26 日立建機株式会社 作業機械の周辺監視装置
JP2016176289A (ja) * 2015-03-20 2016-10-06 住友建機株式会社 建設機械
JP2019108722A (ja) * 2017-12-18 2019-07-04 住友重機械工業株式会社 建設機械
WO2019189203A1 (ja) * 2018-03-26 2019-10-03 住友建機株式会社 ショベル

Also Published As

Publication number Publication date
US20230417018A1 (en) 2023-12-28
JP2022076406A (ja) 2022-05-19

Similar Documents

Publication Publication Date Title
JP6824830B2 (ja) 転倒防止装置及び作業機械
AU2017276225B2 (en) Systems and methods for preparing a worksite for additive construction
EP3385494A1 (en) Apparatus and method for controlling boom of mine vehicle
JP7071203B2 (ja) 作業機械
CN107109819B (zh) 工作装置控制装置以及作业机械
JP6289731B2 (ja) 作業機械の制御システム、作業機械の制御方法、及びナビゲーションコントローラ
US9305364B2 (en) Motion estimation systems and methods
JP7203616B2 (ja) 作業機械
JP7143252B2 (ja) 作業機械
US9790695B1 (en) Operation resume functions for implement control systems and methods utilizing relative positioning
WO2022097570A1 (ja) 制御装置、制御システム、及び制御方法
JP2022159504A (ja) 付加的建設動作のための機械配置を最適化するための制御システムおよび方法
WO2021192655A1 (ja) 作業機械
KR20210095681A (ko) 건설 기계의 제어 시스템, 건설 기계, 및 건설 기계의 제어 방법
KR102579791B1 (ko) 건설 기계
EP3913146B1 (en) Work machine with collision mitigation system
WO2022102429A1 (ja) 制御装置、制御システム、および制御方法
WO2022230880A1 (ja) 制御方法、制御システム、及び制御装置
JP6987808B2 (ja) ショベル
CN114402111B (zh) 侵入监视控制系统以及作业机械
WO2021210427A1 (ja) 施工方法及び施工システム
KR20240027119A (ko) 제어 시스템, 제어 방법 및 제어 프로그램
JP2023012254A (ja) 異常動作検出システム
JP2021149475A (ja) 施工履歴情報管理システム
CN117836489A (zh) 用于控制作业机械的系统以及方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21889123

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 18034861

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21889123

Country of ref document: EP

Kind code of ref document: A1