WO2018173651A1 - 車載装置、荷役機、制御回路、制御方法、及びプログラム - Google Patents
車載装置、荷役機、制御回路、制御方法、及びプログラム Download PDFInfo
- Publication number
- WO2018173651A1 WO2018173651A1 PCT/JP2018/007258 JP2018007258W WO2018173651A1 WO 2018173651 A1 WO2018173651 A1 WO 2018173651A1 JP 2018007258 W JP2018007258 W JP 2018007258W WO 2018173651 A1 WO2018173651 A1 WO 2018173651A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- work management
- container
- management apparatus
- deviation determination
- control unit
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 27
- 238000003780 insertion Methods 0.000 claims abstract description 76
- 230000037431 insertion Effects 0.000 claims abstract description 76
- 238000004458 analytical method Methods 0.000 claims abstract description 29
- 210000000078 claw Anatomy 0.000 claims description 7
- 238000007726 management method Methods 0.000 description 172
- 238000010586 diagram Methods 0.000 description 25
- 230000032258 transport Effects 0.000 description 17
- 230000008569 process Effects 0.000 description 16
- 238000004891 communication Methods 0.000 description 15
- 230000004048 modification Effects 0.000 description 11
- 238000012986 modification Methods 0.000 description 11
- 238000001514 detection method Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 238000003708 edge detection Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 5
- 238000006073 displacement reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000001678 irradiating effect Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
- B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
- B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
- B66F9/075—Constructional features or details
- B66F9/0755—Position control; Position detectors
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
- B66F17/00—Safety devices, e.g. for limiting or indicating lifting force
- B66F17/003—Safety devices, e.g. for limiting or indicating lifting force for fork-lift trucks
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
- B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
- B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
- B66F9/075—Constructional features or details
- B66F9/08—Masts; Guides; Chains
- B66F9/082—Masts; Guides; Chains inclinable
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66F—HOISTING, LIFTING, HAULING OR PUSHING, NOT OTHERWISE PROVIDED FOR, e.g. DEVICES WHICH APPLY A LIFTING OR PUSHING FORCE DIRECTLY TO THE SURFACE OF A LOAD
- B66F9/00—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes
- B66F9/06—Devices for lifting or lowering bulky or heavy goods for loading or unloading purposes movable, with their loads, on wheels or the like, e.g. fork-lift trucks
- B66F9/075—Constructional features or details
- B66F9/20—Means for actuating or controlling masts, platforms, or forks
- B66F9/24—Electrical devices or systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L2200/00—Type of vehicles
- B60L2200/40—Working vehicles
- B60L2200/42—Fork lift trucks
Definitions
- the present invention relates to an in-vehicle device, a cargo handling machine, a control circuit, a control method, and a program.
- Patent Document 1 detects a displacement of a load loaded on a forklift, and loads (transportation) loaded on a delivery destination other than the forklift (for example, a loading platform of a transport vehicle or a container stored in the storage). The deviation of the target) cannot be detected.
- a delivery destination other than the forklift for example, a loading platform of a transport vehicle or a container stored in the storage.
- the deviation of the target cannot be detected.
- the transport target loaded at the carry-out destination is deviated, there is a problem that the transport target falls or falls after the transport target is loaded (in the case of a transport vehicle, including during transport).
- the technique described in Patent Document 1 has a problem that it cannot prevent the transportation object from being overturned or dropped, and the transportation object cannot be appropriately loaded.
- an object of one embodiment of the present invention is to provide an in-vehicle device, a cargo handling machine, a control circuit, a control method, and a program that can appropriately load a transportation target.
- One aspect of the present invention is made to solve the above-described problem. Based on sensing information acquired from a space recognition device, an analysis unit that detects an insertion object into which an insertion nail can be inserted, and the sensing And a control unit that performs loading deviation determination to determine whether or not the insertion target loaded at the carry-out destination is deviated from the carry-out destination based on the information.
- one embodiment of the present invention is a cargo handling machine including the above-described on-vehicle device.
- One embodiment of the present invention is based on the sensing information acquired from the space recognition device, and whether or not the insertion target into which the insertion claw can be inserted is shifted with respect to the loading destination on which the insertion target is loaded. Is a control circuit for determining
- the analysis unit detects an insertion target into which the insertion nail can be inserted based on the sensing information acquired from the space recognition device, and the control unit carries out the removal based on the sensing information.
- This is a control method for performing a loading deviation determination for determining whether or not the insertion target loaded first is shifted with respect to the carry-out destination.
- the computer detects the insertion target into which the insertion claw can be inserted based on the sensing information acquired from the space recognition device, and is loaded on the carry-out destination based on the sensing information. It is a program for performing a loading deviation determination for determining whether or not the insertion target is shifted with respect to the carry-out destination.
- the effect that the object to be transported can be appropriately loaded is obtained.
- FIG. 1 is an explanatory view for explaining a transport operation according to an embodiment of the present invention.
- the forklift F1 is an example of a cargo handling machine.
- the forklift F1 is provided with forks F101 and F102.
- Forks F101 and F102 are examples of insertion claws.
- the forklift F1 grips and transports the transport object by inserting the forks F101 and F102 into the transport object such as a load or a pallet. That is, the loading / unloading machine is provided with an insertion claw for gripping the transportation object by being inserted into the transportation object.
- the container 20 is an example of a transport object or an insertion object.
- the container 20 is a container for storing luggage or the like inside.
- the container 20 is provided with openings (insertions; may be recesses) of the fork pockets 201 and 202.
- the fork pockets 201 and 202 are holes or recesses into which the forks F101 and F102 can be inserted, respectively.
- the fork pockets 201 and 202 are examples of insertion objects.
- a surface facing the forklift F1 during insertion or transportation also referred to as “insertion surface 211”) has fork pockets 201 and 202.
- the fork pockets 201 and 202 are holes or holes for inserting the forks F101 and F102 from the front (insertion surface 211) to the back of the object to be transported (in the positive direction of the Y-axis in FIG. 1), respectively, and projecting the tips from the back. It is a recess.
- the fork pockets 201 and 202 are holes that extend straight in the normal direction of the insertion surface 211 at the lower part of the insertion surface 211.
- the forklift F1 can grip and transport the container 20 appropriately (with good balance and stability).
- the dimensions of the container 20 and the fork pockets 201 and 202 are defined by a standard (for example, JIS).
- the object to be transported is not limited to the container 20, and may be a pallet, or both a pallet and a load placed on the pallet.
- the pallet refers to a loading table for loading luggage.
- the pallet is provided with a fork pocket. Further, there may be three or more (for example, four) fork pockets.
- the loading platform L1 is an example of a carry-out destination.
- the carry-out destination is a destination where the container 20 is transported and loaded by the forklift F1.
- the loading platform L1 is a loading platform for trucks and trailers, a freight train freight car, and the like.
- the loading platform L1 is provided with tightening devices L11 to L14.
- the tightening device is an instrument used to connect and fix the container 20.
- the container 20 is gripped and transported by the forklift F1, placed on the loading platform L1, and fixed to the loading platform L1 by the fastening devices L11 to L14.
- the carry-out destination is not limited to a transportation vehicle such as a freight car or a freight train, but may be another container, a support, a table, a warehouse, or a container yard (ground or floor).
- the work management device 1 is attached and fixed to a material handling machine.
- the work management apparatus 1 includes a space recognition sensor such as a laser sensor.
- a space recognition sensor such as a laser sensor.
- the work management apparatus 1 senses the distance R from the own apparatus to each object by irradiating the laser beam and receiving the reflected light.
- the work management device 1 repeats this for the sensing target range.
- the work management apparatus 1 recognizes the space based on, for example, the irradiation direction of the laser light and the distance R to each object (see FIGS. 3 to 6).
- the work management device 1 detects the container 20 (or the insertion surface 211) based on the sensing information obtained from the space recognition sensor. Based on the sensing information, the work management device 1 determines whether or not the container 20 loaded on the loading platform L1 is displaced with respect to the loading platform L1 (hereinafter, also simply referred to as “deviation” or “not deviation”). A load deviation determination is performed. For example, when the container 20 is not fastened to the fastening devices L11 to L14 to be fastened, the container 20 is displaced with respect to the loading platform L1. The work management apparatus 1 can determine whether or not the tightening devices L11 to L14 are tightened. The work management apparatus 1 outputs a determination result. For example, when the work management device 1 determines that there is a shift, the work management device 1 outputs a warning (for example, warning sound, warning light, warning image, guidance, etc.).
- a warning for example, warning sound, warning light, warning image, guidance, etc.
- the work management apparatus 1 can notify an operator or the like, for example, whether or not the container 20 is displaced with respect to the loading platform L1. That is, the operator or the like can reload the container 20 in response to the warning, and can load the container 20 without any deviation.
- the container 20 is unloaded after being loaded (in the case of a transportation vehicle, including during transportation), or the tightening function of the tightening devices L11 to L14 does not act, so that the container 20 can be removed from the loading platform L1. There is a possibility of falling or falling. In other words, the transport object cannot be properly loaded.
- the work management apparatus 1 determines whether or not the container 20 is displaced, the work target can be appropriately loaded based on the determination result.
- the work management apparatus 1 may perform an output indicating that.
- “Loaded” means that part or all of the container 20 is loaded. That is, in the case of “loaded”, a part of the container 20 is in contact with the loading platform L1, and other portions are not in contact with the loading platform L1 (for example, when the forks F101 and F102 are gripping other portions). included.
- the coordinate axes X, Y, and Z shown in FIG. 1 are coordinate axes that are common in the drawings of the present embodiment and its modifications.
- FIG. 2 is a schematic diagram illustrating an example of a fixed position of the work management apparatus 1 according to the present embodiment.
- FIG. 2 is a front view of the forklift F1.
- Fork rails F11 and F12 are rails to which the forks F101 and F102 are attached.
- the fork F101 or the fork F102 can be adjusted along the fork rails F11 and F12 to adjust the distance between the fork F101 and the fork F102.
- the backrest F13 is attached to the fork rails F11 and F12.
- the backrest F13 is a mechanism that prevents the grasped container 20 from collapsing or falling to the forklift F1 side.
- the mast F14 is a rail for moving the forks F101 and F102 up and down. As the fork rails F11 and F12 are moved up and down along the mast F14, the forks F101 and F102 are moved up and down.
- the work management device 1 is a central portion (in the X-axis direction) of the fork rail F11 and is fixed to the lower surface side (lower side) of the fork rail F11. However, the work management device 1 may be attached to the upper surface side (upper side) of the fork rail F11 or the like. Moreover, the work management apparatus 1 may be attached to the vehicle body of the fork rail F12, the backrest F13, the mast F14, or the forklift F1. A plurality of work management devices 1 or space recognition sensors may be attached.
- the container 20 can be irradiated without being blocked by the laser light emitted by the space recognition apparatus.
- the fork rail F11, the fork rail F12, and the backrest F13 move up and down together with the forks F101, F102 and the container 20, the relative positional relationship between them and the work management apparatus 1 can be fixed.
- FIG. 3 is a schematic diagram illustrating an example of sensing according to the present embodiment. This figure is a figure when the irradiated laser beam is viewed from the upper surface side of the forklift F1.
- an angle polar coordinate declination
- An axis parallel to the Y axis and passing through the work management apparatus 1 (irradiation port) (initial optical axis described later) is set to ⁇ 0.
- the work management apparatus 1 performs scanning in the horizontal direction by sequentially irradiating laser light in the horizontal direction (while keeping the other deflection angle ⁇ constant). More specifically, the work management apparatus 1 sequentially irradiates laser light toward the positive direction of the declination angle ⁇ (for example, every equal angle ⁇ ). The work management apparatus 1 irradiates a laser beam (also referred to as “horizontal scanning”) to a specific range in the horizontal direction (a range in which the deviation angle projected onto the XY plane is ⁇ max ⁇ ⁇ ⁇ ⁇ max), and then laser beam in the vertical direction. The laser beam is irradiated toward the negative direction of the deviation angle ⁇ . When the horizontal scanning in the negative direction of the deflection angle ⁇ is completed, the work management apparatus 1 further shifts the laser light irradiation direction in the vertical direction and performs horizontal scanning in the positive direction of the X axis again.
- a laser beam also referred to as “horizontal scanning”
- FIG. 4 is another schematic diagram illustrating an example of sensing according to the present embodiment. This figure is a figure when the irradiated laser beam is viewed from the side surface side of the forklift F1.
- the angle (polar angle of polar coordinates) when projected onto the YZ plane in the laser light projection direction is ⁇ .
- the work management apparatus 1 When the vertical scanning in the negative direction of the deflection angle ⁇ is completed, the work management apparatus 1 further shifts the irradiation direction of the laser light in the vertical direction, and performs vertical scanning again in the positive direction of the deflection angle ⁇ . .
- the work management apparatus 1 may perform either or both of the sensing in FIG. 3 or FIG.
- the work management apparatus 1 may irradiate the laser beam in another order or another coordinate system.
- FIG. 5 is a schematic diagram illustrating an example of a sensing result according to the present embodiment.
- FIG. 5 shows sensing information indicating a sensing result for the example of sensing in FIGS. 3 and 4.
- the sensing information is, for example, spatial coordinates.
- the work management apparatus 1 calculates the spatial coordinates based on the laser light irradiation direction (deflection angle ⁇ and deviation angle ⁇ ) and the distance R between the reflection source (object).
- the spatial coordinates are coordinates representing the position of the reflection source in the sensing range.
- FIG. 5 is a diagram schematically showing the spatial coordinates.
- the work management apparatus 1 detects the container 20, its fork pockets 201 and 202, and forks F101 and F102.
- symbol G is the road surface G.
- FIG. The work management apparatus 1 detects the container 20 (at least a part of the insertion surface 211) and the fork pockets 201 and 202 by the first detection process.
- the work management apparatus 1 detects a flat or substantially flat surface (including a surface having unevenness) as a flat surface.
- the work management apparatus 1 determines that the plane is the insertion surface 211 of the container 20.
- the work management device 1 detects, as the fork pockets 201 and 202, a portion where the reflected light of the laser beam is not detected and a portion where the reception level of the reflected light of the laser beam is low in the detected plane or the lower portion of the plane. To do.
- the work management apparatus 1 may detect, as the fork pockets 201 and 202, the detected plane or a lower portion of the plane where a distance that is a predetermined value or more changes (distant) with respect to the distance to the plane. . Further, the work management apparatus 1 may detect the fork pockets 201 and 202 from the detected plane using the sensing information and the pocket position information.
- the pocket position information is information indicating a combination of the dimensions of the container 20 and the positions or dimensions (shapes) of the fork pockets 201 and 202 in the container 20, or information indicating a pattern of this combination.
- the work management device 1 determines that the pocket position when the fork pockets 201 and 202 exist based on the pocket position information, for example, when a portion having a low reception level of the reflected light of the laser beam exists at a predetermined ratio or more. It may be determined that the fork pockets 201 and 202 based on the information exist.
- the work management device 1 may detect the forks F101 and F102 by the second detection process.
- the work management device 1 is a plane extending a specific length or more in the Y-axis direction among the planes parallel or substantially parallel to the XY plane, and is specified in the X-axis direction. Portions smaller than the width are detected as forks F101 and F102.
- the work management apparatus 1 may store in advance the positions and shapes of the forks F101 and F102.
- FIG. 6 is a schematic diagram illustrating an example of a stacking error according to the present embodiment. This figure is a figure when the container 20 is inclined in the depth direction (to the forklift F1 side), and is a figure when viewed from the side surface side of the forklift F1.
- the orientation of the insertion surface 211 (or the back surface) of the container 20 is shifted from the orientation of the side surface (the surface facing the forklift F ⁇ b> 1) of the loading platform L ⁇ b> 1.
- the direction (or angle) between the surfaces is “deviation” means that the surfaces are not parallel or substantially parallel, or the normal directions of the surfaces are not the same or substantially the same.
- the orientation of the bottom surface (or top surface) of the container 20 is deviated from the orientation of the top surface (the surface on which the transportation target is placed or the surface facing the transportation target) of the loading platform L1.
- a part of the side surface and the upper surface of the loading platform L1 may be a space.
- the upper surface (or upper surface) of the loading platform L1 may be a surface including three or more support portions that support the load of the container 20 or a surface parallel to the surface.
- each surface of the container 20 corresponds to a direction determined in advance by the loading platform L1.
- the work management device 1 stores the orientation of the side surface of the loading platform L1 in association with the orientation of the insertion surface 211 or the back surface of the container 20.
- the work management device 1 stores the orientation of the top surface of the loading platform L1 in correspondence with the orientation of the bottom surface or top surface of the container 20.
- the insertion surface 211 of the container 20 is not a vertical surface (a surface perpendicular to the horizontal plane).
- the insertion surface 211 is shifted from the side surface of the loading platform L1.
- the work management apparatus 1 determines that the container 20 is shifted in the load shift determination.
- FIG. 7A and 7B are schematic diagrams illustrating an example of stacking deviation determination according to the present embodiment.
- FIG. 7A is a diagram when the container 20 is not displaced.
- FIG. 7A is a diagram obtained by projecting the sensing information described with reference to FIG. 5 onto the XY plane.
- FIG. 7B is a diagram when the container 20 is displaced.
- FIG. 7B is a diagram obtained by projecting the sensing information described with reference to FIG. 6 onto the XY plane.
- the solid line represents the laser beam.
- 7A and 7B, the projections of the container 20 (fork pockets 201 and 202), the forks F101 and F102, and the work management device 1 are indicated by broken lines for convenience.
- the work management device 1 performs a load deviation determination for determining whether or not the container 20 is shifted.
- the work management apparatus 1 performs the stacking deviation determination by determining whether or not the insertion surface 211 is parallel to the reference surface B1 (whether or not tilted).
- the reference plane B1 is a plane parallel to the XZ plane, and is a plane perpendicular to the traveling direction when the forklift F1 travels straight.
- the reference plane B1 is a plane including the work management device 1 (projection port) among such planes.
- the work management device 1 determines the distance L t (from the reference surface B1 of the forklift F1 to the insertion surface 211 based on the distance R t from the work management device 1 to the object (reflection source). (Also referred to as “reference distance L t ”).
- the distance R t is the distance R detected by the t-th irradiation in the vertical scanning, and represents the distance R from the work management apparatus 1 to the object (reflection source).
- ⁇ represents the deflection angle ⁇ when the t-th irradiation is performed.
- the work management apparatus 1 determines that the container 20 is not shifted when all of the differences ⁇ L t + 1, t are within the threshold T1 on the insertion surface 211.
- the work management device 1 determines that the container 20 is displaced.
- L t has the same value for the insertion surface 211.
- the difference ⁇ L t + 1, t
- 0 ⁇ T1.
- the work management apparatus 1 determines that the container 20 is not displaced.
- the work management apparatus 1 determines that the insertion surface 211 is a vertical surface, the normal line of the insertion surface 211 is the horizontal direction, or the container 20 is not displaced in the vertical direction.
- the work management apparatus 1 determines that the bottom surface or the top surface of the container 20 is horizontal with respect to the container 20 (the object to be transported by the rectangular parallelepiped (or substantially rectangular parallelepiped)). Furthermore, when it is assumed that the upper surface of the loading platform L1 is a horizontal plane, it is determined that the bottom surface of the container 20 is parallel to the upper surface of the loading platform L1.
- L t is a different value for the insertion surface 211, and for example, L t is a monotonically decreasing function of t.
- the difference ⁇ L t + 1, t
- the work management apparatus 1 determines that the container 20 is displaced. In other words, the work management apparatus 1 determines that the insertion surface 211 is not a vertical surface, the normal line of the insertion surface 211 is not horizontal, or the container 20 is inclined in the depth direction.
- the work management apparatus 1 determines that the bottom surface or the top surface of the container 20 is not horizontal with respect to the container 20 (the object to be transported by the rectangular parallelepiped (or substantially rectangular parallelepiped)). Furthermore, when it is assumed that the upper surface of the loading platform L1 is a horizontal plane, it is determined that the bottom surface of the container 20 is not parallel to the upper surface of the loading platform L1.
- FIG. 8 is a schematic diagram illustrating another example of the stacking error according to the present embodiment. This figure is a figure when the container 20 is inclined in the width direction, and is a figure when viewed from the forklift F1 side.
- the orientation of the bottom surface (or top surface) of the container 20 is deviated from the orientation of the top surface of the loading platform L1. Further, the side surface of the container 20 is not a vertical surface.
- the upper surface of the loading platform L1 is a horizontal plane
- the bottom surface of the container 20 is shifted from the upper surface of the loading platform L1.
- the work management apparatus 1 determines that the container 20 is shifted in the load shift determination.
- FIG. 9 is a schematic diagram illustrating another example of the stacking deviation determination according to the present embodiment.
- FIG. 9 is a diagram when the container 20 is displaced.
- FIG. 9 is a diagram in which the sensing information detected in FIG. 8 is projected onto the XZ plane.
- the object (reflection source) detected by the work management apparatus 1 is represented by a solid line.
- a straight line 2111 represents the bottom surface of the container 20.
- the straight line 2111 is also the bottom side (or one side of the loading platform L1 side) in the insertion surface 211.
- the straight line T111 represents the upper surface of the loading platform L1.
- the straight line T111 is also a side of the container 20 on the side surface of the loading platform L1.
- the work management apparatus 1 performs edge detection on the sensing information. As a result of the edge detection, the work management device 1 detects, for example, a straight line 2111 representing the bottom surface of the container 20 (the bottom side of the detected insertion surface 211) and a straight line T111 representing the top surface of the loading platform L1. In addition, the work management apparatus 1 may set a straight line (edge) closest to the straight line 2111 as a straight line T111 that is in a vertically downward direction of the straight line 2111. Further, the work management device 1 may set a plane in the vertically lower direction of the insertion surface 211 among the detected planes as a side surface of the loading platform L1, and a straight line on the container 20 side (vertical upper side) as a straight line T111. .
- the straight lines such as the straight line 2111 and the straight line T111 may be straight lines that approximate edges.
- the work management device 1 performs linear approximation on each point (object coordinates) of a part of the detected edge using a least square method or the like.
- the work management apparatus 1 performs the stacking deviation determination based on the detected straight line 2111 and straight line T111.
- the work management apparatus 1 performs stacking deviation determination based on an angle (inclination difference) formed by the detected straight line 2111 and straight line T111.
- the work management apparatus 1 projects the straight line 2111 and the straight line T111 onto the XZ plane (ignoring the Y coordinate).
- the work management apparatus 1 performs stacking deviation determination based on the difference between the inclination of the projected straight line 2111 and the inclination of the straight line T111 (also referred to as “inclination difference”).
- the work management apparatus 1 determines that the container 20 is not displaced when the inclination difference is equal to or less than a predetermined threshold. In other words, the work management apparatus 1 determines that the bottom surface of the container 20 is a horizontal plane, the normal line of the bottom surface of the container 20 is the vertical direction, or the container 20 is not inclined in the width direction. Moreover, the work management apparatus 1 determines that the bottom surface or top surface of the container 20 is horizontal for the container 20. Furthermore, when it is assumed that the upper surface of the loading platform L1 is a horizontal plane, it is determined that the bottom surface of the container 20 is parallel to the upper surface of the loading platform L1.
- the work management apparatus 1 determines that the container 20 is shifted when the inclination difference is larger than the threshold value. In other words, the work management apparatus 1 determines that the bottom surface of the container 20 is not a horizontal plane, the normal line of the bottom surface of the container 20 is not in the vertical direction, or the container 20 is inclined in the width direction. Further, the work management apparatus 1 determines that the bottom surface or top surface of the container 20 is not horizontal for the container 20. Furthermore, when it is assumed that the upper surface of the loading platform L1 is a horizontal plane, it is determined that the bottom surface of the container 20 is not parallel to the upper surface of the loading platform L1.
- FIG. 9 is a view when a part of the forks F101 and F102 is still inserted into the container 20.
- a part of the line T111 representing the upper surface of the loading platform L1 is indicated by a broken line. This is because a part of the forks F101 and F102 is located between the work management apparatus 1 and the loading platform L1, and a part of the loading platform L1 cannot be detected by sensing by the work management apparatus 1.
- the work management apparatus 1 may perform the stacking deviation determination when the forks F101 and F102 are being extracted.
- the work management apparatus 1 can detect all the lines T111 as solid lines when the upper surface of the loading platform L1 can be detected. Become. As described above, the work management apparatus 1 may perform the stacking deviation determination after completely extracting the forks F101 and F102.
- FIG. 10 is a flowchart showing an example of the operation of the forklift F1 according to the present embodiment.
- Step S101 The forklift F1 starts the engine (ACC ON) by the operation of a worker or the like. Then, it progresses to step S102.
- Step S102 The vehicle-mounted device such as the work management device 1 is activated by acquiring information indicating that power is supplied or the engine is started. Then, it progresses to step S103, S104, S05.
- Step S103 The work management apparatus 1 acquires sensing information representing a space using a space recognition sensor. Specifically, laser light irradiation is performed to sense the distance to the object (sensor scanning). Thereafter, the process proceeds to step S106.
- Step S104 The work management apparatus 1 acquires position information indicating the position of the forklift F1 (work management apparatus 1).
- the position information is, for example, a positioning result of GNSS (Global Positioning Satellite System). However, the position information may be a positioning result using other wireless communication (for example, wireless LAN or RFID tag).
- GNSS Global Positioning Satellite System
- Step S105 The work management apparatus 1 acquires vehicle information indicating the state of the forklift F1 or an operation by a worker or the like. Thereafter, the process proceeds to step S106.
- the vehicle information can be output by the forklift F1, such as the speed, steering angle, accelerator operation, brake operation, gear (forward, reverse, high speed, low speed, etc.), manufacturer, vehicle type, vehicle identification information, etc. It is data.
- the vehicle information includes fork information indicating the position (height) of the forks F101 and F102, the presence / absence of the gripping object to be transported, the weight thereof, the load status of the lift chain, the type of the forks F101 and F102, Or identification information of workers (drivers), identification information of workplaces (warehouses and factories) and companies, identification information of gripped (transported) transport targets (for example, acquired by RFID attached to transport targets), etc. May include work information or the like.
- Step S106 The work management apparatus 1 associates the sensing information acquired in Step S103, the position information acquired in Step S104, and the vehicle information acquired in Step S105 (the associated data is also referred to as “association data”). For example, the work management device 1 associates sensing information, position information, and vehicle information together with the device identification information of the work management device 1 and the acquisition date and time. Thereafter, the process proceeds to step S107.
- Step S107 The work management apparatus 1 determines the presence or absence of a danger or an event based on the association data associated in step S106. For example, the work management apparatus 1 performs the above-described load deviation determination based on the association data. If it is determined that there is a danger or event (yes), the process proceeds to step S108. On the other hand, if it is determined that there is no danger or event (no), the process proceeds to step S109.
- Step S108 The work management apparatus 1 outputs a warning (including guidance) based on the risk or event type determined in step S107 or the type and association data. Thereafter, the process proceeds to step S109.
- Step S109 The work management apparatus 1 associates the association data, the determination information indicating the determination result of Step S107, or the output information indicating the output result of the warning of Step S108, and records the associated data in a recording device or the like. . Then, it progresses to step S110.
- Step S110 The work management apparatus 1 transmits the data associated in step S109 to a server or the like. Thereafter, the process proceeds to step S111.
- this server is an information processing apparatus that collects and manages data from a plurality of forklifts F1 in a workplace or a company, for example.
- Data transmitted to the server is analyzed by a statistical processing function and a machine learning function.
- Data transmitted to the server or analysis result data is used for driving education and the like.
- the operation data of a worker who is well loaded or efficiently transported is used as a model.
- the data at that time is used for investigation and improvement of the cause.
- Step S111 When the engine of the forklift F1 is stopped by the operation of a worker or the like (yes), the process proceeds to Step S112. On the other hand, when the engine of the forklift F1 is not stopped (no), the process proceeds to steps S103, S104, and S05. That is, the work management apparatus 1 performs information acquisition, data association, recording, and transmission by sensing or the like until the engine stops. (Step S112) The in-vehicle device such as the work management device 1 stops or enters a sleep state by acquiring information indicating that the supply of power is stopped or the engine is stopped. Thereafter, this operation ends.
- FIG. 11 is a schematic configuration diagram illustrating a hardware configuration of the work management apparatus 1 according to the present embodiment.
- a work management apparatus 1 includes a CPU (Central Processing Unit) 111, an IF (Interface) 112, a communication module 113, a sensor 114 (for example, a space recognition sensor), a ROM (Read Only Memory) 121, and a RAM (Random Access). Memory) 122 and HDD (Hard Disk Drive) 123 are comprised.
- the IF 112 is, for example, a part of the forklift F1 (driver's seat, vehicle body, mast F14, etc.) or an output device (lamp, speaker, touch panel display, etc.) provided in the work management apparatus 1.
- the communication module 113 transmits and receives signals via a communication antenna.
- the communication module 113 is a communication chip such as a GNSS receiver or a wireless LAN.
- the sensor 114 irradiates laser light, for example, and performs sensing based on the received reflected light.
- FIG. 12 is a schematic configuration diagram showing a hardware configuration of the work management apparatus 1 according to the present embodiment.
- the work management apparatus 1 includes a sensor unit 101, a vehicle information acquisition unit 102, a GNSS reception unit 103, an analysis unit 104, a control unit 105, an output unit 106, a recording unit 107, and a communication unit 108. Is done.
- the sensor unit 101 is a space recognition sensor.
- the sensor unit 101 senses the distance R from its own device to each object, for example, with laser light.
- the sensor unit 101 recognizes the space based on the irradiation direction (deviation angle ⁇ , ⁇ ) of the laser light and the sensed distance R.
- recognizing a space means generating three-dimensional coordinates for a space including surrounding objects, but the present invention is not limited to this, and may be generating two-dimensional coordinates.
- the sensor unit 101 generates sensing information (for example, coordinate information) and outputs it to the control unit 105.
- the vehicle information acquisition unit 102 acquires vehicle information from the forklift F ⁇ b> 1 and outputs the acquired vehicle information to the control unit 105.
- the GNSS receiving unit 103 acquires position information and outputs the acquired position information to the control unit 105.
- the analysis unit 104 acquires the sensing information output from the sensor unit 101, the vehicle information output from the vehicle information acquisition unit 102, and the position information output from the GNSS reception unit from the control unit 105.
- the analysis unit 104 generates association data by associating the acquired sensing information, vehicle information, and position information.
- the analysis unit 104 analyzes the generated association data. For example, the analysis unit 104 detects the insertion surface 211 (container 20) by detecting the plane and the fork pockets 201 and 202 by the first detection process based on the sensing information. Moreover, the analysis part 104 detects the forks F101 and F102 by the 2nd detection process based on sensing information.
- the analysis unit 104 may measure the lengths of the detected forks F101 and F102. Further, the analysis unit 104 calculates the reference distance L t and the difference ⁇ L t, s in the vertical scanning of the detected insertion surface 211 based on the acquired sensing information. In addition, the analysis unit 104 performs edge detection on the acquired sensing information, and detects a straight line 2111 and a straight line T111 (FIG. 9) as a result of the edge detection.
- the control unit 105 acquires the sensing information output from the sensor unit 101, the vehicle information output from the vehicle information acquisition unit 102, and the position information output from the GNSS reception unit, and analyzes the analysis information using, for example, the analysis unit 104. Judgment is made based on this. For example, the control unit 105 determines whether there is a danger or an event.
- the control unit 105 performs the above-described loading deviation determination as one of the determinations. Specifically, the control unit 105 performs the above-described loading deviation determination based on the difference ⁇ L t, s calculated by the analysis unit 104. In addition, the control unit 105 performs the above-described loading deviation determination based on the straight line 2111 and the straight line T111 detected by the analysis unit 104.
- the control unit 105 causes the output unit 106 to output a warning (including guidance) based on the determination result or the determination result and association data.
- the control unit 105 records determination information indicating the determination result and association data in the recording unit 107 and transmits the information to a server or the like via the communication unit 108.
- the sensor unit 101 is realized by the sensor 114 of FIG.
- the vehicle information acquisition unit 102 and the GNSS reception unit 103 are realized by the communication module 113, for example.
- the analysis unit 104 and the control unit 105 are realized by, for example, the CPU 111, the ROM 121, the RAM 122, or the HDD 123.
- the work management device 1 is an in-vehicle device mounted on the forklift F1 (loader).
- forks F101 and F102 insertion claws
- sensing information acquired by the analysis unit 104 from a space recognition sensor (space recognition device).
- the container 20 is detected.
- the control unit 105 determines whether or not the container 20 loaded on the loading platform L1 (unloading destination) is displaced from the loading platform L1. Thereby, the work management apparatus 1 can load the container 20 without deviating from the loading platform L1, and can appropriately load the object to be transported.
- the work management apparatus 1 can appropriately apply the tightening functions of the tightening apparatuses L11 to L14, and after being loaded (in the case of a transportation vehicle, including during transportation), the balance is lost, and the loading platform L1 Can be prevented from falling or falling.
- the control unit 105 determines whether or not the orientation of at least one surface of the container 20 is deviated from the corresponding direction in the loading platform L1 as the loading deviation determination. Determine.
- the control unit 105 (ROM 121, RAM 122, or HDD 123) stores the orientation of the insertion surface 211 or the back surface of the container 20 in association with the orientation of the side surface of the loading platform L1.
- the controller 105 determines whether or not the orientation of the insertion surface 211 or the back surface is deviated from the orientation of the side surface of the loading platform L1 as the load deviation determination (see FIGS. 7A and 7B).
- control unit 105 stores the orientation of the bottom surface or the top surface of the container 20 in correspondence with the orientation of the top surface of the loading platform L1.
- the control unit 105 determines whether or not the orientation of the bottom surface or the top surface of the container 20 is deviated from the orientation of the top surface of the loading platform L1 as the loading deviation determination.
- the work management apparatus 1 can eliminate the deviation between the orientation of the surface of the container 20 and the orientation of the loading platform L1, and can load the container 20 on the loading platform L1 without deviation.
- analysis part 104 detects a part or all of insertion surface 211 which has an opening of fork pocket 201,202.
- the control unit 105 determines whether a part or all of the insertion surface 211 is a vertical surface as the load deviation determination. Thereby, the work management apparatus 1 can determine that the container 20 tilted with respect to the vertical direction is shifted, and can detect that the container 20 may fall or fall down. Alternatively, the work management apparatus 1 can determine that the container 20 that is not inclined with respect to the vertical direction is not shifted, and can detect that the container 20 is properly loaded.
- analysis part 104 detects the 1st edge which shows the side of container 20, and the 2nd edge which shows the side of loading platform L1.
- the analysis unit 104 detects a first edge that represents the bottom surface of the container 20 and a second edge that represents the top surface of the loading platform L1.
- the control unit 105 performs stacking deviation determination based on the first edge and the second edge. Thereby, the work management apparatus 1 can determine whether or not the container 20 is shifted based on the first edge of the container 20 and the second edge of the loading platform L1.
- analysis part 104 has straight line 2111 showing the direction of the 1st edge (edge showing the bottom of container 20), and the 2nd edge (upper surface of loading platform L1). And a straight line T111 indicating the direction of the edge).
- the control unit 105 performs the stacking deviation determination based on the difference between the inclination of the straight line 2111 and the inclination of the straight line T111, for example, the angle (inclination difference) formed by the straight line 2111 and the straight line T111.
- the work management apparatus 1 can determine whether or not the container 20 is shifted based on the difference in inclination between the edges, using the edges detected from the container 20 and the loading platform L1.
- the control unit 105 may perform the load deviation determination based on the distance between the straight line 2111 and the straight line T111 in FIG.
- the work management apparatus 1 performs the stacking deviation determination based on the distance (also referred to as “edge distance”) between the straight line 2111 and the straight line T111.
- the work management apparatus 1 determines that the container 20 is not displaced when the edge distance is equal to or smaller than a predetermined threshold.
- the work management apparatus 1 determines that the container 20 is displaced when the edge distance is larger than the threshold value.
- the edge distance may be a distance between a point where the straight line 2111 intersects with a plane parallel to the YZ plane and a point where the straight line T111 intersects.
- the edge distance may be calculated by calculating the difference between the distances of the two surfaces parallel to the YZ plane at the point where the straight line 2111 intersects and the point where the straight line T111 intersects.
- the edge distance may be determined that the container 20 is not shifted when the calculated difference is equal to or smaller than the threshold, and may be determined that the container 20 is shifted when the difference is larger than the threshold.
- the control unit 105 performs the loading deviation determination based on the distance between the straight line 2111 and the straight line T111. Thereby, the work management apparatus 1 can determine whether or not the container 20 is displaced based on the distance between the edges, using the edges detected from the container 20 and the loading platform L1.
- control unit 105 may determine whether or not the container 20 has a deviation in angle with the loading direction (Z-axis direction) as the rotation axis.
- FIG. 14A and 14B are schematic diagrams illustrating an example of stacking deviation determination according to a modification of the present embodiment.
- FIG. 14A is a diagram when the container 20 is not displaced.
- FIG. 14B is a diagram when the container 20 is displaced.
- 14A and 14B are diagrams in which detected objects (the container 20 and the loading platform L1) in the sensing information are projected onto the XY plane.
- 14A and 14B, the projections of the container 20, the forks F101 and F102, and the work management apparatus 1 are indicated by broken lines for convenience.
- a straight line 2111 represents the front surface of the container 20 (insertion surface 211).
- the straight line 2111 represents the bottom side (or one side of the loading platform L1 side) in the insertion surface 211.
- a straight line T111 represents a side surface of the loading platform L1, and represents a side of the container 20 on the side surface of the loading platform L1.
- the control unit 105 performs stacking deviation determination based on the straight line 2111 and the straight line T111.
- the work management apparatus 1 performs stacking deviation determination on the XY plane based on an angle (second inclination difference) formed by the straight line 2111 and the straight line T111. More specifically, the control unit 105 determines that the container 20 is not displaced when the second inclination difference is equal to or less than a predetermined threshold. On the other hand, the control part 105 determines with the container 20 having shifted
- the control unit 105 determines whether or not there is a deviation in the angle with the loading direction (Z-axis direction) as the rotation axis as the loading deviation determination. judge. Thereby, the work management device 1 can appropriately load the object to be transported.
- the control unit 105 may perform the second load deviation determination after performing the third load deviation determination.
- the stacking direction Z-axis direction
- the straight line 2111 and the straight line T111 in FIG. 9 may be shifted even when there is no shift in the width direction of the container 20.
- the work management device 1 determines whether there is a deviation in angle with the loading direction as the rotation axis by performing the third loading deviation determination, and if there is no deviation, the second loading deviation is determined. An output based on the determination can be performed. That is, the work management apparatus 1 can improve the accuracy of the second load deviation determination.
- the control unit 105 (forklift F1 or work management device 1) may be set with a condition for determining whether or not to perform the load deviation.
- the control unit 105 may issue a warning based on the loading deviation determination when the following first condition is satisfied, and may not issue a warning based on the loading deviation determination when the first condition is not satisfied.
- the control unit 105 may perform loading deviation determination or sensing when the first condition is satisfied, and may not perform loading deviation determination or sensing when the first condition is not satisfied.
- the control unit 105 may change the warning based on the load deviation determination and the interval of the load deviation determination or sensing (hereinafter referred to as a warning or the like) based on the first condition.
- the first condition is, for example, a condition that the distance between the container 20 and the forklift F1 (for example, the reference distance Li or the target distance LB) is smaller (closer or closer) than a threshold value.
- the first condition is a condition that the distance between the container 20 and the forklift F1 is larger than a threshold value (far and not close).
- the first condition may be a condition based on position information or vehicle information, for example.
- the control unit 105 may issue a warning or the like when the forklift F1 enters a predetermined position (range) in a warehouse or the like, and may not issue a warning or the like at other positions.
- the first condition may be a condition based on fork information or work information, for example.
- the control unit 105 may give a warning or the like when there is no gripping transport target, and may not perform a warning or the like when there is a gripping transport target.
- the control unit 105 issues a warning or the like when the position (height) of the forks F101 and F102 is higher than the threshold value, and does not need to issue a warning or the like when the position (height) of the forks F101 and F102 is lower than the threshold value.
- the work management apparatus 1 can perform a warning or the like when the container 20 is at a high position and the possibility of dropping or falling is high, or when the risk of dropping or falling is high.
- the control unit 105 issues a warning or the like when a specific worker operates, and does not need to issue a warning or the like in other cases.
- control unit 105 may determine the displacement between the container 20 and the loading platform L1 (including the fastening devices L11 to L14). For example, the control unit 105 stores in advance the distance between the container 20 and the loading platform L1 when tightened. The control unit 105 determines whether or not the position is shifted by determining whether or not the detected distance between the container 20 and the loading platform L1 and the distance between the straight line 2111 and the straight line T111 are pre-stored distances. Determine.
- the work management device 1 when the work management device 1 is fixed to the central portion of the forklift F1 in the X-axis direction, when the forklift F1 tries to grip the container 20 appropriately, the fork F101 and the fork F102
- the work management device 1 can be positioned at the center portion of the fork pocket 201 or the fork pocket 201 and the center portion of the fork pocket 202.
- the work management device 1 when the work management device 1 is fixed to the fork rail F11 and the backrest F13, the work management device 1 can more easily recognize the forks F101 and F102 than when the work management device 1 is fixed to the fork rail F12. . That is, since the work management device 1 and the forks F101 and F102 are separated in the height direction (X-axis direction), the work management device 1 recognizes the shape of the forks F101 and F102 in the length direction (Y-axis direction) more. (See FIGS. 3 and 5). Further, when the work management device 1 is fixed to the lower surface side (lower side) of the fork rail F11 or the like, the work management device 1 can sense the forks F101 and F102 (particularly up to the root portion).
- the work management device 1 when the work management device 1 is fixed to the fork rails F11 and F12, the work management device 1 can more easily recognize the fork pockets 201 and 202 than when the work management device 1 is fixed to the backrest F13. That is, since the work management device 1 and the fork pockets 201 and 202 approach the height direction, the work management device 1 sets the irradiation angle (the angle in the height direction) of the laser light or the like to the fork pockets 201 and 202 more horizontally. Can be close to (perpendicular to the insertion surface).
- the space recognition sensor may perform space recognition using light other than laser light.
- the work management apparatus 1 may perform space recognition using radio waves other than laser light, or may perform space recognition using a captured image, for example.
- the space recognition sensor may be a monocular camera, stereo camera, infrared camera, millimeter wave radar, optical laser, LiDAR (Light Detection And Ranging, Laser Imaging Detection And Ranging), (ultra) sonic sensor, or the like.
- the work management apparatus 1 may be connected to the automatic driving apparatus or may be a part of the automatic driving apparatus. That is, the work management apparatus 1 may perform the load deviation determination and automatically operate the forklift F1 so that the insertion amount is appropriate.
- service management apparatus 1 the loading deviation judgment results, so as to approach the range where the insertion distance d p is predetermined, gear, accelerator, to adjust the brake, for example, to the forklift F1 forward or reverse.
- the work management apparatus 1 may exclude the road surface G, the wall, and an object at a position farther than a predetermined distance from the detection target (sensing information). The work management apparatus 1 excludes these from the projection target when projecting onto each surface.
- the work management apparatus 1 may use edge detection when detecting the container 20, the loading platform L1, and the forks F101 and F102.
- the edge detected by edge detection is, for example, the distance R or a location where the rate of change is large.
- the work management apparatus 1 may use, as an edge, a portion of the detected object in which the partial differentiation at each coordinate axis is equal to or greater than a threshold value.
- the work management device 1 is a portion where the detected planes intersect, a portion where the difference in the distance R between adjacent or adjacent points in the reverse direction is equal to or greater than a threshold value, or a portion where the reflected light of the laser beam is not detected.
- a portion adjacent to the portion, and a portion adjacent to a portion where the reception level of the reflected light of the laser beam is low may be used as an edge.
- the work management apparatus 1 may perform edge detection by other methods.
- the work management apparatus 1 records a program for realizing each function on a computer-readable recording medium, causes the computer system to read and execute the program recorded on the recording medium, The above processing may be performed.
- the “computer system” includes an OS and hardware such as peripheral devices.
- the “computer system” includes a WWW system having a homepage providing environment (or display environment).
- the “computer-readable recording medium” refers to a storage device such as a flexible medium, a magneto-optical disk, a portable medium such as a ROM or a CD-ROM, and a hard disk incorporated in a computer system.
- the “computer-readable recording medium” refers to a volatile memory (RAM) in a computer system that becomes a server or a client when a program is transmitted via a network such as the Internet or a communication line such as a telephone line. In addition, those holding programs for a certain period of time are also included.
- RAM volatile memory
- the program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium.
- the “transmission medium” for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line.
- the program may be for realizing a part of the functions described above. Furthermore, what can implement
Landscapes
- Engineering & Computer Science (AREA)
- Structural Engineering (AREA)
- Transportation (AREA)
- Life Sciences & Earth Sciences (AREA)
- Geology (AREA)
- Mechanical Engineering (AREA)
- Civil Engineering (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Forklifts And Lifting Vehicles (AREA)
Abstract
車載装置は、解析部と制御部とを有する。解析部は、空間認識装置から取得したセンシング情報に基づいて、差込爪を差し込み可能な差込対象を検出する。制御部は、センシング情報に基づいて、搬出先に積載された差込対象について、搬出先に対してずれているか否かを判定する積載ずれ判定を行う。
Description
本発明は、車載装置、荷役機、制御回路、制御方法、及びプログラムに関する。
近年、自動運転技術やロボット技術の発展に伴い、レーザやレーダを活用した空間認識技術の精度が向上し、また、空間認識センサの低価格化が進んでいる。
一方、フォークリフト等の荷役機において、荷役作業を管理する装置が用いられている。例えば、特許文献1には、マストの上端に対応する高さ位置近傍に、変位を検出する積荷センサを設け、フォーク上に積荷が複数段に積まれた状態で搬送される場合、上段の積荷がコンテナやトラックの天井部、側壁部に緩衝しても、積荷のずれを速やかに検出することが記載されている。
一方、フォークリフト等の荷役機において、荷役作業を管理する装置が用いられている。例えば、特許文献1には、マストの上端に対応する高さ位置近傍に、変位を検出する積荷センサを設け、フォーク上に積荷が複数段に積まれた状態で搬送される場合、上段の積荷がコンテナやトラックの天井部、側壁部に緩衝しても、積荷のずれを速やかに検出することが記載されている。
しかしながら、特許文献1記載の技術は、フォークリフトに積まれた積荷のズレを検出するものであり、フォークリフト以外の搬出先(例えば、輸送車両の荷台、蔵置されたコンテナ)に積まれた積荷(運搬対象)について、そのずれを検出できない。
搬出先に積載された運搬対象がずれていた場合、運搬対象が積載された後(輸送車両の場合、輸送中を含む)に、運搬対象が転倒又は落下してしまう、という問題があった。
以上に例示したように、特許文献1記載の技術では、運搬対象に対する転倒や落を防止できず、運搬対象を適切に積載できない、という問題があった。
搬出先に積載された運搬対象がずれていた場合、運搬対象が積載された後(輸送車両の場合、輸送中を含む)に、運搬対象が転倒又は落下してしまう、という問題があった。
以上に例示したように、特許文献1記載の技術では、運搬対象に対する転倒や落を防止できず、運搬対象を適切に積載できない、という問題があった。
そこで、本発明の一態様は、運搬対象を適切に積載することができる車載装置、荷役機、制御回路、制御方法、及びプログラムを提供することを目的としている。
本発明の一態様は、上述の課題を解決すべくなされたもので、空間認識装置から取得したセンシング情報に基づいて、差込爪を差し込み可能な差込対象を検出する解析部と、前記センシング情報に基づいて、搬出先に積載された前記差込対象が、前記搬出先に対してずれているか否かを判定する積載ずれ判定を行う制御部と、を備える車載装置である。
また本発明の一態様は、上記の車載装置を備える荷役機である。
また本発明の一態様は、空間認識装置から取得したセンシング情報に基づいて、差込爪を差し込み可能な差込対象について、当該差込対象が積載された搬出先に対してずれているか否かを判定する制御回路である。
また本発明の一態様は、解析部が、空間認識装置から取得したセンシング情報に基づいて、差込爪を差し込み可能な差込対象を検出し、制御部が、前記センシング情報に基づいて、搬出先に積載された前記差込対象が、前記搬出先に対してずれているか否かを判定する積載ずれ判定を行う制御方法である。
また本発明の一態様は、コンピュータに、空間認識装置から取得したセンシング情報に基づいて、差込爪を差し込み可能な差込対象を検出させ、前記センシング情報に基づいて、搬出先に積載された前記差込対象が、前記搬出先に対してずれているか否かを判定する積載ずれ判定を行わせるプログラムである。
本発明の一態様によれば、運搬対象を適切に積載できるという効果が得られる。
以下、図面を参照しながら本発明の実施形態について詳しく説明する。
<運搬作業について>
図1は、本発明の実施形態に係る運搬作業を説明する説明図である。
フォークリフトF1は、荷役機の一例である。フォークリフトF1には、フォークF101、F102が設けられている。フォークF101、F102は、差込爪の一例である。
フォークリフトF1は、フォークF101、F102を、荷物又はパレット等の運搬対象に差し込むことで、運搬対象を把持して運搬する。つまり、荷役機には、運搬対象に差し込むことで、運搬対象を把持する差込爪が設けられている。
図1は、本発明の実施形態に係る運搬作業を説明する説明図である。
フォークリフトF1は、荷役機の一例である。フォークリフトF1には、フォークF101、F102が設けられている。フォークF101、F102は、差込爪の一例である。
フォークリフトF1は、フォークF101、F102を、荷物又はパレット等の運搬対象に差し込むことで、運搬対象を把持して運搬する。つまり、荷役機には、運搬対象に差し込むことで、運搬対象を把持する差込爪が設けられている。
コンテナ20は、運搬対象又は差込対象の一例である。コンテナ20は、荷物等を内部に納めるための容器である。コンテナ20には、フォークポケット201、202の開口部(差込部;凹部であっても良い)が設けられている。フォークポケット201、202は、それぞれ、フォークF101、F102を差し込み可能な穴又は凹部である。フォークポケット201、202は、差込対象の一例である。
差込時又は運搬時にフォークリフトF1と対向する面(「差込面211」とも称する)は、フォークポケット201、202を有する。フォークポケット201、202は、運搬対象の正面(差込面211)から背面へ(図1ではY軸の正方向)、それぞれフォークF101、F102を差し込まれ、その先端部を背面から突き出させる穴又は凹部である。
図1では、フォークポケット201、202は、差込面211の下部において、差込面211の法線方向に真っ直ぐ伸びる穴である。
差込時又は運搬時にフォークリフトF1と対向する面(「差込面211」とも称する)は、フォークポケット201、202を有する。フォークポケット201、202は、運搬対象の正面(差込面211)から背面へ(図1ではY軸の正方向)、それぞれフォークF101、F102を差し込まれ、その先端部を背面から突き出させる穴又は凹部である。
図1では、フォークポケット201、202は、差込面211の下部において、差込面211の法線方向に真っ直ぐ伸びる穴である。
フォークF101、F102が、それぞれ、フォークポケット201、202に真っ直ぐに差し込まれた場合、フォークリフトF1は、コンテナ20を適切に(バランス良く、安定させて)把持して運搬することができる。
なお、コンテナ20やフォークポケット201、202の寸法等は、標準規格(例えば、JIS)で定められている。また、運搬対象は、コンテナ20に限らず、パレットであっても良いし、パレットとパレットに載せられた荷物の両方であっても良い。ここで、パレットとは、荷物を載せるための荷役台をいう。パレットには、フォークポケットが設けられている。また、フォークポケットは、3個以上(例えば、4個)あってもよい。
なお、コンテナ20やフォークポケット201、202の寸法等は、標準規格(例えば、JIS)で定められている。また、運搬対象は、コンテナ20に限らず、パレットであっても良いし、パレットとパレットに載せられた荷物の両方であっても良い。ここで、パレットとは、荷物を載せるための荷役台をいう。パレットには、フォークポケットが設けられている。また、フォークポケットは、3個以上(例えば、4個)あってもよい。
荷台L1は、搬出先の一例である。搬出先とは、フォークリフトF1によって、コンテナ20が運搬されて、積載される先である。荷台L1は、トラックやトレーラの荷台、貨物列車の貨車等である。荷台L1には、緊締装置L11~L14が設けられている。緊締装置は、コンテナ20を繋いだり固定したりするために用いられる器具である。
コンテナ20は、フォークリフトF1に把持されて運搬され、荷台L1に載せられ、緊締装置L11~L14で荷台L1に固定される。
なお、搬出先は、貨物自動車や貨物列車等の輸送車両に限らず、他のコンテナや支持体、台、又は、倉庫やコンテナヤード(地面や床面)であっても良い。
コンテナ20は、フォークリフトF1に把持されて運搬され、荷台L1に載せられ、緊締装置L11~L14で荷台L1に固定される。
なお、搬出先は、貨物自動車や貨物列車等の輸送車両に限らず、他のコンテナや支持体、台、又は、倉庫やコンテナヤード(地面や床面)であっても良い。
作業管理装置1は、荷役機に取り付けられ、固定されている。作業管理装置1は、例えばレーザセンサ等の空間認識センサを備える。本実施形態では、空間認識センサがレーザセンサである場合について説明する。つまり、作業管理装置1(空間認識センサ)は、レーザ光を照射して反射光を受光し、自装置から各物体までの距離Rをセンシングする。作業管理装置1は、センシング対象の範囲に対して、これを繰り返す。作業管理装置1は、例えば、レーザ光の照射方向と各物体までの距離Rによって、空間を認識する(図3~図6参照)。
作業管理装置1は、空間認識センサから得たセンシング情報に基づいて、コンテナ20(又は差込面211)を検出する。作業管理装置1は、センシング情報に基づいて、荷台L1に積載されたコンテナ20について、荷台L1に対してずれているか否か(以下、単に「ずれている」、「ずれていない」とも称する)を判定する積載ずれ判定を行う。例えば、コンテナ20は、緊締されるべき緊締装置L11~L14に緊締されていない場合、荷台L1に対してずれている。作業管理装置1は、緊締装置L11~L14に緊締されているか否かを判定できる。
作業管理装置1は、判定結果を出力する。例えば、作業管理装置1は、ずれていると判定した場合、警告(例えば、警告音、警告光、警告画像、案内等)を出力する。
作業管理装置1は、判定結果を出力する。例えば、作業管理装置1は、ずれていると判定した場合、警告(例えば、警告音、警告光、警告画像、案内等)を出力する。
これにより、作業管理装置1は、例えば、作業者等に、コンテナ20が荷台L1に対してずれているか否かを知らせることができる。つまり、作業者等は、警告に応じてコンテナ20を、積載し直すことができ、ずれなくコンテナ20を積載させることができる。
コンテナ20がずれている場合、コンテナ20は、積載された後(輸送車両の場合、輸送中を含む)、バランスが崩れ、又は緊締装置L11~L14の緊締機能が作用せずに、荷台L1から落下又は転倒してしまう可能性がある。つまり、運搬対象を適切に積載できない。
これに対して、作業管理装置1は、コンテナ20がずれているか否かを判定するので、その判定結果に基づいて、運搬対象を適切に積載させることができる。
コンテナ20がずれている場合、コンテナ20は、積載された後(輸送車両の場合、輸送中を含む)、バランスが崩れ、又は緊締装置L11~L14の緊締機能が作用せずに、荷台L1から落下又は転倒してしまう可能性がある。つまり、運搬対象を適切に積載できない。
これに対して、作業管理装置1は、コンテナ20がずれているか否かを判定するので、その判定結果に基づいて、運搬対象を適切に積載させることができる。
なお、作業管理装置1は、コンテナ20がずれていない場合、つまり、コンテナ20が適切に積載されている場合、その旨を表す出力を行っても良い。また、「積載された」とは、コンテナ20の一部又は全部が積載されたことをいう。つまり、「積載された」には、コンテナ20の一部分が荷台L1に接し、他の部分が荷台L1に接していない場合(例えば、フォークF101、F102が他の部分を把持している場合)も含まれる。
なお、図1に示す座標軸X、Y、Zは、本実施形態及びその変形例の各図において、共通する座標軸である。
なお、図1に示す座標軸X、Y、Zは、本実施形態及びその変形例の各図において、共通する座標軸である。
<フォークリフトについて>
図2は、本実施形態に係る作業管理装置1の固定位置の一例を表す概略図である。
図2は、フォークリフトF1の正面図である。
図2は、本実施形態に係る作業管理装置1の固定位置の一例を表す概略図である。
図2は、フォークリフトF1の正面図である。
フォークレールF11、F12(フィンガーバー)は、フォークF101、F102を取り付けるレールである。なお、フォークF101又はフォークF102は、フォークレールF11、F12に沿ってスライドさせられることにより、フォークF101とフォークF102の間隔を調整できる。
バックレストF13は、フォークレールF11、F12に取り付けられている。バックレストF13は、把持されたコンテナ20が崩れる、又はフォークリフトF1側へ落下することを防止する機構である。
マストF14は、フォークF101、F102を上下させるためのレールである。フォークレールF11、F12が、マストF14に沿って上下させられることで、フォークF101、F102が上下させられる。
バックレストF13は、フォークレールF11、F12に取り付けられている。バックレストF13は、把持されたコンテナ20が崩れる、又はフォークリフトF1側へ落下することを防止する機構である。
マストF14は、フォークF101、F102を上下させるためのレールである。フォークレールF11、F12が、マストF14に沿って上下させられることで、フォークF101、F102が上下させられる。
作業管理装置1は、フォークレールF11の(X軸方向の)中央部分であって、フォークレールF11の下面側(下側)に固定されている。ただし、作業管理装置1は、フォークレールF11等の上面側(上側)に取り付けられても良い。また、作業管理装置1は、フォークレールF12、バックレストF13、マストF14、又はフォークリフトF1の車体に取り付けられていても良い。また、作業管理装置1又は空間認識センサは、複数個、取り付けられても良い。
なお、作業管理装置1がフォークレールF11、フォークレールF12、バックレストF13に固定されている場合、空間認識装置が照射するレーザ光を遮られることなく、コンテナ20に照射できる。この場合、フォークレールF11、フォークレールF12、バックレストF13は、フォークF101、F102やコンテナ20と一緒に上下するので、これらと作業管理装置1との相対的な位置関係を固定できる。
なお、作業管理装置1がフォークレールF11、フォークレールF12、バックレストF13に固定されている場合、空間認識装置が照射するレーザ光を遮られることなく、コンテナ20に照射できる。この場合、フォークレールF11、フォークレールF12、バックレストF13は、フォークF101、F102やコンテナ20と一緒に上下するので、これらと作業管理装置1との相対的な位置関係を固定できる。
<センシングについて>
以下、作業管理装置1(空間認識センサ)によるセンシングについて説明する。
なお、本実施形態では、レーザ光の照射方式について、作業管理装置1がラスタースキャンを行う場合について説明するが、本発明はこれに限らず、他の照射方式(例えば、リサージュスキャン)であっても良い。
以下、作業管理装置1(空間認識センサ)によるセンシングについて説明する。
なお、本実施形態では、レーザ光の照射方式について、作業管理装置1がラスタースキャンを行う場合について説明するが、本発明はこれに限らず、他の照射方式(例えば、リサージュスキャン)であっても良い。
図3は、本実施形態に係るセンシングの一例を表す概略図である。
この図は、順次、照射されたレーザ光を、フォークリフトF1の上面側から見た場合の図である。なお、図3において、レーザ光の投射方向について、XY平面に投影した場合の角度(極座標の偏角)をθとする。Y軸に平行な軸であって、作業管理装置1(照射口)を通る軸(後述する初期光軸)を、θ=0とする。
この図は、順次、照射されたレーザ光を、フォークリフトF1の上面側から見た場合の図である。なお、図3において、レーザ光の投射方向について、XY平面に投影した場合の角度(極座標の偏角)をθとする。Y軸に平行な軸であって、作業管理装置1(照射口)を通る軸(後述する初期光軸)を、θ=0とする。
作業管理装置1は、水平方向に(他の偏角φを一定にしたまま)、順次、レーザ光を照射することで、水平方向の走査を行う。
より具体的には、作業管理装置1は、偏角θの正方向に向かって、順次(例えば、等角度Δθ毎に)、レーザ光を照射する。作業管理装置1は、水平方向において特定範囲(XY平面に射影した偏角が-θmax≦θ≦θmaxの範囲)にレーザ光を照射(「水平走査」とも称する)した後、鉛直方向にレーザ光の照射方向をずらし、偏角θの負方向に向かって、レーザ光を照射する。
この偏角θの負方向の水平走査が完了した場合、作業管理装置1は、鉛直方向にレーザ光の照射方向を、さらにずらし、再度、X軸の正方向に水平走査を行う。
より具体的には、作業管理装置1は、偏角θの正方向に向かって、順次(例えば、等角度Δθ毎に)、レーザ光を照射する。作業管理装置1は、水平方向において特定範囲(XY平面に射影した偏角が-θmax≦θ≦θmaxの範囲)にレーザ光を照射(「水平走査」とも称する)した後、鉛直方向にレーザ光の照射方向をずらし、偏角θの負方向に向かって、レーザ光を照射する。
この偏角θの負方向の水平走査が完了した場合、作業管理装置1は、鉛直方向にレーザ光の照射方向を、さらにずらし、再度、X軸の正方向に水平走査を行う。
図4は、本実施形態に係るセンシングの一例を表す別の概略図である。
この図は、順次、照射されたレーザ光を、フォークリフトF1の側面側から見た場合の図である。図4において、レーザ光の投射方向について、YZ平面に投影した場合の角度(極座標の偏角)をφとする。Y軸に平行な軸であって、作業管理装置1(照射口)を通る軸(初期光軸)を、φ=0とする。
この図は、順次、照射されたレーザ光を、フォークリフトF1の側面側から見た場合の図である。図4において、レーザ光の投射方向について、YZ平面に投影した場合の角度(極座標の偏角)をφとする。Y軸に平行な軸であって、作業管理装置1(照射口)を通る軸(初期光軸)を、φ=0とする。
作業管理装置1は、垂直方向に(他の偏角θを一定にしたまま)、順次、レーザ光を照射することで、垂直方向の走査を行う。
より具体的には、作業管理装置1は、偏角φの正方向に向かって、順次(例えば、等角度Δφ毎に)、レーザ光を照射する。作業管理装置1は、垂直方向において特定範囲(YZ平面に射影した偏角が-φmax(例えば、φmax=90°)≦φ≦0)にレーザ光を照射(「垂直走査」とも称する)した後、垂直方向にレーザ光の照射方向をずらし、偏角φの負方向に向かって、レーザ光を照射する。
この偏角φの負方向の垂直走査が完了した場合、作業管理装置1は、鉛直方向にレーザ光の照射方向を、さらにずらし、再度、偏角φの正方向に向かって、垂直走査を行う。
なお、作業管理装置1は、図3又は図4のセンシングのいずれか或いは両方を行っても良い。また、作業管理装置1は、別の順序や別の座標系で、レーザ光を照射しても良い。
より具体的には、作業管理装置1は、偏角φの正方向に向かって、順次(例えば、等角度Δφ毎に)、レーザ光を照射する。作業管理装置1は、垂直方向において特定範囲(YZ平面に射影した偏角が-φmax(例えば、φmax=90°)≦φ≦0)にレーザ光を照射(「垂直走査」とも称する)した後、垂直方向にレーザ光の照射方向をずらし、偏角φの負方向に向かって、レーザ光を照射する。
この偏角φの負方向の垂直走査が完了した場合、作業管理装置1は、鉛直方向にレーザ光の照射方向を、さらにずらし、再度、偏角φの正方向に向かって、垂直走査を行う。
なお、作業管理装置1は、図3又は図4のセンシングのいずれか或いは両方を行っても良い。また、作業管理装置1は、別の順序や別の座標系で、レーザ光を照射しても良い。
図5は、本実施形態に係るセンシング結果の一例を表す模式図である。
図5は、図3、図4のセンシングの一例について、センシング結果を示すセンシング情報を表す。センシング情報は、例えば空間座標である。作業管理装置1は、この空間座標を、レーザ光の照射方向(偏角θ及び偏角φ)と反射元(物体)の距離Rに基づいて計算する。この空間座標は、センシング範囲において、反射元の位置を表す座標である。図5は、この空間座標を模式的に表す図である。
図5は、図3、図4のセンシングの一例について、センシング結果を示すセンシング情報を表す。センシング情報は、例えば空間座標である。作業管理装置1は、この空間座標を、レーザ光の照射方向(偏角θ及び偏角φ)と反射元(物体)の距離Rに基づいて計算する。この空間座標は、センシング範囲において、反射元の位置を表す座標である。図5は、この空間座標を模式的に表す図である。
図5において、作業管理装置1は、コンテナ20、そのフォークポケット201、202、及び、フォークF101、F102を検出している。なお、符号Gを付した面は、路面Gである。
作業管理装置1は、第1検出処理によって、コンテナ20(少なくとも差込面211の一部)と、そのフォークポケット201、202を検出する。第1検出処理の一例では、例えば、作業管理装置1は、平ら又は略平らな面(凹凸を有する面も含む)を、平面として検出する。作業管理装置1は、この平面において、フォークポケット201、202を検出した場合、この平面をコンテナ20の差込面211であると判定する。
ここで、作業管理装置1は、例えば、検出した平面又は平面の下部において、レーザ光の反射光を検出しない部分、レーザ光の反射光の受信レベルが低い部分を、フォークポケット201、202として検出する。
作業管理装置1は、第1検出処理によって、コンテナ20(少なくとも差込面211の一部)と、そのフォークポケット201、202を検出する。第1検出処理の一例では、例えば、作業管理装置1は、平ら又は略平らな面(凹凸を有する面も含む)を、平面として検出する。作業管理装置1は、この平面において、フォークポケット201、202を検出した場合、この平面をコンテナ20の差込面211であると判定する。
ここで、作業管理装置1は、例えば、検出した平面又は平面の下部において、レーザ光の反射光を検出しない部分、レーザ光の反射光の受信レベルが低い部分を、フォークポケット201、202として検出する。
なお、作業管理装置1は、検出した平面又は平面の下部において、平面までの距離に対して所定値以上の距離が変わる(遠くにある)部分を、フォークポケット201、202として検出しても良い。
また、作業管理装置1は、センシング情報とポケット位置情報を用いて、検出した平面から、フォークポケット201、202を検出しても良い。ここで、ポケット位置情報とは、コンテナ20の寸法と、コンテナ20におけるフォークポケット201、202の位置又は寸法(形状)との組合せを示す情報、又は、この組合せのパターンを示す情報である。つまり、作業管理装置1は、ポケット位置情報に基づいてフォークポケット201、202が存在する位置に、例えば、レーザ光の反射光の受信レベルが低い部分が所定の割合以上存在する場合は、ポケット位置情報に基づくフォークポケット201、202が存在すると判定しても良い。
また、作業管理装置1は、センシング情報とポケット位置情報を用いて、検出した平面から、フォークポケット201、202を検出しても良い。ここで、ポケット位置情報とは、コンテナ20の寸法と、コンテナ20におけるフォークポケット201、202の位置又は寸法(形状)との組合せを示す情報、又は、この組合せのパターンを示す情報である。つまり、作業管理装置1は、ポケット位置情報に基づいてフォークポケット201、202が存在する位置に、例えば、レーザ光の反射光の受信レベルが低い部分が所定の割合以上存在する場合は、ポケット位置情報に基づくフォークポケット201、202が存在すると判定しても良い。
作業管理装置1は、第2検出処理によって、フォークF101、F102を検出しても良い。第2検出処理の一例では、例えば、作業管理装置1は、XY平面に平行又は略平行の面のうち、Y軸方向に特定の長さ以上、伸びる平面であって、X軸方向に特定の幅より小さい部分を、フォークF101、F102として検出する。なお、作業管理装置1は、フォークF101、F102の位置及び形状を予め記憶しても良い。
<積載ずれ判定(第1ずれ判定)>
図6は、本実施形態に係る積載ずれの一例を示す概略図である。
この図は、コンテナ20が奥行方向に(フォークリフトF1側へ)傾いている場合の図であり、フォークリフトF1の側面側から見た場合の図である。
図6は、本実施形態に係る積載ずれの一例を示す概略図である。
この図は、コンテナ20が奥行方向に(フォークリフトF1側へ)傾いている場合の図であり、フォークリフトF1の側面側から見た場合の図である。
図6では、コンテナ20の差込面211(又背面)の向きは、荷台L1の側面(フォークリフトF1と対向する面)の向きとずれている。面同士の向き(又は角度)が「ずれている」とは、面同士が平行又は略平行ではない、又は、面同士の法線方向が同一又は略同一ではないことをいう。
また、コンテナ20の底面(又は上面)の向きは、荷台L1の上面(運搬対象が載置される面、又は、運搬対象と対向する面)の向きとずれている。なお、荷台L1の側面や上面は、一部が空間になっていても良い。例えば、荷台L1の上面(又は上面)は、コンテナ20の荷重を支える支持部を3点以上含む面や、その面に平行な面であっても良い。
また、コンテナ20の底面(又は上面)の向きは、荷台L1の上面(運搬対象が載置される面、又は、運搬対象と対向する面)の向きとずれている。なお、荷台L1の側面や上面は、一部が空間になっていても良い。例えば、荷台L1の上面(又は上面)は、コンテナ20の荷重を支える支持部を3点以上含む面や、その面に平行な面であっても良い。
このように、コンテナ20の各面は、その向きが、荷台L1で予め定められる向きに対応する。例えば、作業管理装置1は、コンテナ20の差込面211又は背面の向きには、荷台L1の側面の向きを対応させて、記憶する。作業管理装置1は、コンテナ20の底面又は上面の向きには、荷台L1の上面の向きを対応させて、記憶する。
また、コンテナ20の差込面211は、鉛直面(水平面と直角をなす面)ではない。荷台L1の側面が鉛直面であると想定する場合、差込面211は、荷台L1の側面とずれている。
以上に例示した場合(図6のような場合)、作業管理装置1は、積載ずれ判定において、コンテナ20がずれていると判定する。
以上に例示した場合(図6のような場合)、作業管理装置1は、積載ずれ判定において、コンテナ20がずれていると判定する。
図7Aおよび7Bは、本実施形態に係る積載ずれ判定の一例を示す概略図である。
図7Aは、コンテナ20がずれていない場合の図である。図7Aは、図5を参照して説明したセンシング情報を、XY平面へ射影した図である。
図7Bは、コンテナ20がずれている場合の図である。図7Bは、図6を参照して説明したセンシング情報を、XY平面へ射影した図である。
図7Aは、コンテナ20がずれていない場合の図である。図7Aは、図5を参照して説明したセンシング情報を、XY平面へ射影した図である。
図7Bは、コンテナ20がずれている場合の図である。図7Bは、図6を参照して説明したセンシング情報を、XY平面へ射影した図である。
図7Aおよび7Bにおいて、実線はレーザ光を表す。また、図7Aおよび7Bにおいて、便宜上、コンテナ20(フォークポケット201、202)、フォークF101、F102、及び作業管理装置1の射影を破線で記載している。なお、φtのtは、1回の垂直走査において、レーザ光を照射した順番、つまり、照射回数を表す。例えば、正方向の垂直走査の場合、φt=-φmax+t×Δφであり、負方向の垂直走査の場合、φt=-t×Δφである。
作業管理装置1は、コンテナ20がずれているか否かを判定する積載ずれ判定を行う。例えば、作業管理装置1は、差込面211が基準面B1に平行か否か(傾いていないか否か)を判定することで、積載ずれ判定を行う。ここで、基準面B1とは、XZ平面に平行な平面であり、フォークリフトF1が真っ直ぐに進む場合に、その進行方向に垂直な面である。例えば、基準面B1は、このような面のうち、作業管理装置1(投射口)を含む平面である。
積載ずれ判定の具体例として、作業管理装置1は、作業管理装置1から物体(反射元)までの距離Rtに基づいて、フォークリフトF1の基準面B1から差込面211までの距離Lt(「基準距離Lt」とも称する)を算出する。ここで、距離Rtは、垂直走査において、t回目の照射で検出した距離Rであって、作業管理装置1から物体(反射元)までの距離Rを表す。
例えば、作業管理装置1は、照射方向がφt、θの場合、物体までの距離Rtを検出した場合、基準距離Lt=Rtcos|φt|×cos|θ|として算出する。ここで、θは、上記のt番目の照射を行ったときの偏角θを表す。
例えば、作業管理装置1は、照射方向がφt、θの場合、物体までの距離Rtを検出した場合、基準距離Lt=Rtcos|φt|×cos|θ|として算出する。ここで、θは、上記のt番目の照射を行ったときの偏角θを表す。
作業管理装置1は、差込面211において、基準距離Ltと基準距離Ls(t≠s)の差ΔLt,s=|Lt-Ls|に基づいて、積載ずれ判定を行う。一例として、作業管理装置1は、隣り合う基準距離Ltと基準距離Lt+1の差ΔLt+1,t=|Lt+1-Lt|に基づいて、積載ずれ判定を行う。
この場合、作業管理装置1は、差込面211において、差ΔLt+1,tの全てが閾値T1以内である場合、コンテナ20はずれていないと判定する。
一方、作業管理装置1は、差込面211において、差ΔLt+1,tの少なくとも1つが閾値T1より大きい値である場合、コンテナ20はずれていると判定する。
この場合、作業管理装置1は、差込面211において、差ΔLt+1,tの全てが閾値T1以内である場合、コンテナ20はずれていないと判定する。
一方、作業管理装置1は、差込面211において、差ΔLt+1,tの少なくとも1つが閾値T1より大きい値である場合、コンテナ20はずれていると判定する。
図7Aにおいて、差込面211について、Ltは同じ値となる。この場合、例えば、差ΔLt+1,t=|Lt+1-Lt|=|LT1+1-LT1|=0≦T1となる。この場合、作業管理装置1は、コンテナ20はずれていないと判定する。
換言すれば、作業管理装置1は、差込面211は鉛直面である、差込面211の法線は水平方向である、又は、コンテナ20は鉛直方向にずれていない、と判定する。また、作業管理装置1は、コンテナ20(直方体(又は略直方体)の運搬対象)については、コンテナ20の底面又は上面が水平である、と判定する。さらに、荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は荷台L1の上面と平行である、と判定する。
換言すれば、作業管理装置1は、差込面211は鉛直面である、差込面211の法線は水平方向である、又は、コンテナ20は鉛直方向にずれていない、と判定する。また、作業管理装置1は、コンテナ20(直方体(又は略直方体)の運搬対象)については、コンテナ20の底面又は上面が水平である、と判定する。さらに、荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は荷台L1の上面と平行である、と判定する。
図7Bにおいて、差込面211について、Ltは異なる値であり、例えば、Ltはtの単調減少関数となる。この場合、例えば、差ΔLt+1,t=|Lt+1-Lt|=|LT2+1-LT2|>T1となる。この場合、作業管理装置1は、コンテナ20はずれていると判定する。
換言すれば、作業管理装置1は、差込面211は鉛直面でない、差込面211の法線は水平方向でない、又は、コンテナ20は奥行方向に傾いている、と判定する。また、作業管理装置1は、コンテナ20(直方体(又は略直方体)の運搬対象)については、コンテナ20の底面又は上面が水平でない、と判定する。さらに、荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は荷台L1の上面と平行でない、と判定する。
換言すれば、作業管理装置1は、差込面211は鉛直面でない、差込面211の法線は水平方向でない、又は、コンテナ20は奥行方向に傾いている、と判定する。また、作業管理装置1は、コンテナ20(直方体(又は略直方体)の運搬対象)については、コンテナ20の底面又は上面が水平でない、と判定する。さらに、荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は荷台L1の上面と平行でない、と判定する。
<積載ずれ判定(第2積載ずれ判定)>
図8は、本実施形態に係る積載ずれの別の一例を示す概略図である。
この図は、コンテナ20が幅方向に傾いている場合の図であり、フォークリフトF1側から見た場合の図である。
図8は、本実施形態に係る積載ずれの別の一例を示す概略図である。
この図は、コンテナ20が幅方向に傾いている場合の図であり、フォークリフトF1側から見た場合の図である。
図8では、コンテナ20の底面(又上面)の向きは、荷台L1の上面の向きとずれている。
また、コンテナ20の側面は、鉛直面ではない。荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は、荷台L1の上面とずれている。
以上に例示した場合(図8のような場合)、作業管理装置1は、積載ずれ判定において、コンテナ20がずれていると判定する。
また、コンテナ20の側面は、鉛直面ではない。荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は、荷台L1の上面とずれている。
以上に例示した場合(図8のような場合)、作業管理装置1は、積載ずれ判定において、コンテナ20がずれていると判定する。
図9は、本実施形態に係る積載ずれ判定の別の一例を示す概略図である。
図9は、コンテナ20がずれている場合の図である。図9は、図8のときに検出したセンシング情報を、XZ平面へ射影した図である。図9では、作業管理装置1が検出した物体(反射元)を実線で表す。
図9は、コンテナ20がずれている場合の図である。図9は、図8のときに検出したセンシング情報を、XZ平面へ射影した図である。図9では、作業管理装置1が検出した物体(反射元)を実線で表す。
この図において、直線2111は、コンテナ20の底面を表す。直線2111は、差込面211において、底辺(又は荷台L1側の一辺)でもある。
この図において、直線T111は、荷台L1の上面を表す。直線T111は、荷台L1の側面において、コンテナ20側の一辺でもある。
この図において、直線T111は、荷台L1の上面を表す。直線T111は、荷台L1の側面において、コンテナ20側の一辺でもある。
作業管理装置1は、センシング情報に対して、エッジ検出を行う。
作業管理装置1は、エッジ検出の結果、例えば、コンテナ20の底面(検出済みの差込面211の底辺)を表す直線2111と、荷台L1の上面を表す直線T111と、を検出する。
なお、作業管理装置1は、直線2111の鉛直下方向にある直線であって、直線2111に最も近い直線(エッジ)を直線T111としても良い。また、作業管理装置1は、検出された平面のうち、差込面211の鉛直下方向にある平面を荷台L1の側面とし、そのコンテナ20側(鉛直上側)の直線を、直線T111としても良い。
また、直線2111や直線T111等の直線は、エッジを近似した直線であっても良い。例えば、作業管理装置1は、検出したエッジの一部の各点(物体の座標)について、最小二乗法等を用いて、直線近似を行う。
作業管理装置1は、エッジ検出の結果、例えば、コンテナ20の底面(検出済みの差込面211の底辺)を表す直線2111と、荷台L1の上面を表す直線T111と、を検出する。
なお、作業管理装置1は、直線2111の鉛直下方向にある直線であって、直線2111に最も近い直線(エッジ)を直線T111としても良い。また、作業管理装置1は、検出された平面のうち、差込面211の鉛直下方向にある平面を荷台L1の側面とし、そのコンテナ20側(鉛直上側)の直線を、直線T111としても良い。
また、直線2111や直線T111等の直線は、エッジを近似した直線であっても良い。例えば、作業管理装置1は、検出したエッジの一部の各点(物体の座標)について、最小二乗法等を用いて、直線近似を行う。
作業管理装置1は、検出した直線2111と直線T111に基づいて、積載ずれ判定を行う。具体的な一例として、作業管理装置1は、検出した直線2111と直線T111のなす角度(傾きの差分)に基づいて、積載ずれ判定を行う。
例えば、作業管理装置1は、直線2111と直線T111を、XZ平面へ射影する(Y座標を無視する)。作業管理装置1は、投影した直線2111の傾きと、直線T111の傾きと、の差分(「傾き差分」とも称する)に基づいて、積載ずれ判定を行う。
例えば、作業管理装置1は、直線2111と直線T111を、XZ平面へ射影する(Y座標を無視する)。作業管理装置1は、投影した直線2111の傾きと、直線T111の傾きと、の差分(「傾き差分」とも称する)に基づいて、積載ずれ判定を行う。
より具体的には、作業管理装置1は、傾き差分が、予め定めた閾値以下の場合にコンテナ20はずれていないと判定する。
換言すれば、作業管理装置1は、コンテナ20の底面は水平面である、コンテナ20の底面の法線は鉛直方向である、又は、コンテナ20は幅方向に傾いていない、と判定する。また、作業管理装置1は、コンテナ20については、コンテナ20の底面又は上面が水平である、と判定する。さらに、荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は荷台L1の上面と平行である、と判定する。
換言すれば、作業管理装置1は、コンテナ20の底面は水平面である、コンテナ20の底面の法線は鉛直方向である、又は、コンテナ20は幅方向に傾いていない、と判定する。また、作業管理装置1は、コンテナ20については、コンテナ20の底面又は上面が水平である、と判定する。さらに、荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は荷台L1の上面と平行である、と判定する。
一方、作業管理装置1は、傾き差分がこの閾値より大きい場合にコンテナ20はずれていると判定する。
換言すれば、作業管理装置1は、コンテナ20の底面は水平面でない、コンテナ20の底面の法線は鉛直方向でない、又は、コンテナ20は幅方向に傾いている、と判定する。
また、作業管理装置1は、コンテナ20については、コンテナ20の底面又は上面が水平でない、と判定する。さらに、荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は荷台L1の上面と平行でない、と判定する。
換言すれば、作業管理装置1は、コンテナ20の底面は水平面でない、コンテナ20の底面の法線は鉛直方向でない、又は、コンテナ20は幅方向に傾いている、と判定する。
また、作業管理装置1は、コンテナ20については、コンテナ20の底面又は上面が水平でない、と判定する。さらに、荷台L1の上面が水平面であると想定する場合、コンテナ20の底面は荷台L1の上面と平行でない、と判定する。
なお、図9は、フォークF101、F102の一部が、まだ、コンテナ20に差し込まれている場合の図である。例えば、荷台L1の上面を表す線T111は、一部が破線で示されている。これは、作業管理装置1と荷台L1との間に、フォークF101、F102の一部が位置して、作業管理装置1によるセンシングでは、荷台L1の一部が検出できない為である。このように、作業管理装置1は、フォークF101、F102を抜き出しているときに、積載ずれ判定を行っても良い。
また、フォークF101、F102がコンテナ20から完全に抜き出され、フォークリフトF1が所定距離だけ後進したとき、作業管理装置1は、荷台L1の上面を検出できた場合には、線T111は全て実線となる。このように、作業管理装置1は、フォークF101、F102を完全に抜き出した後に、積載ずれ判定を行っても良い。
また、フォークF101、F102がコンテナ20から完全に抜き出され、フォークリフトF1が所定距離だけ後進したとき、作業管理装置1は、荷台L1の上面を検出できた場合には、線T111は全て実線となる。このように、作業管理装置1は、フォークF101、F102を完全に抜き出した後に、積載ずれ判定を行っても良い。
<フォークリフトの動作>
図10は、本実施形態に係るフォークリフトF1の動作の一例を示すフロー図である。
図10は、本実施形態に係るフォークリフトF1の動作の一例を示すフロー図である。
(ステップS101)作業員等の操作により、フォークリフトF1は、エンジンを始動させる(ACC ON)。その後、ステップS102へ進む。
(ステップS102)作業管理装置1等の車載機は、電力が供給される、又は、エンジンが始動されたことを示す情報を取得することで、起動する。その後、ステップS103、S104、S05へ進む。
(ステップS102)作業管理装置1等の車載機は、電力が供給される、又は、エンジンが始動されたことを示す情報を取得することで、起動する。その後、ステップS103、S104、S05へ進む。
(ステップS103)作業管理装置1は、空間認識センサを用いて、空間を表すセンシング情報を取得する。具体的には、レーザ光の照射し、物体までの距離をセンシングする(センサ走査)。その後、ステップS106へ進む。
(ステップS104)作業管理装置1は、フォークリフトF1(作業管理装置1)の位置を示す位置情報を取得する。位置情報は、例えば、GNSS(全球測位衛星システム)の測位結果である。ただし、位置情報は、他の無線通信(例えば、無線LANやRFIDタグ)を用いた測位結果であっても良い。その後、ステップS106へ進む。
(ステップS104)作業管理装置1は、フォークリフトF1(作業管理装置1)の位置を示す位置情報を取得する。位置情報は、例えば、GNSS(全球測位衛星システム)の測位結果である。ただし、位置情報は、他の無線通信(例えば、無線LANやRFIDタグ)を用いた測位結果であっても良い。その後、ステップS106へ進む。
(ステップS105)作業管理装置1は、フォークリフトF1の状態又は作業員等による操作を示す車両情報を取得する。その後、ステップS106へ進む。
ここで、車両情報は、例えば、フォークリフトF1の速度、ステアリング角、アクセル操作、ブレーキ操作、ギヤ(前進、後進、高速、低速等)、メーカー、車種、車両識別情報等、フォークリフトF1が出力可能なデータである。また、車両情報には、フォークF101、F102の位置(高さ)、把持している運搬対象の有無、やその重量、或いはリフトチェーンの負荷状況、フォークF101、F102の種類等を示すフォーク情報、又は、作業員(運転手)の識別情報、作業場(倉庫や工場)や企業の識別情報、把持した(運搬した)運搬対象の識別情報(例えば、運搬対象に貼付されたRFID等で取得)等を示す作業情報等が含まれても良い。
ここで、車両情報は、例えば、フォークリフトF1の速度、ステアリング角、アクセル操作、ブレーキ操作、ギヤ(前進、後進、高速、低速等)、メーカー、車種、車両識別情報等、フォークリフトF1が出力可能なデータである。また、車両情報には、フォークF101、F102の位置(高さ)、把持している運搬対象の有無、やその重量、或いはリフトチェーンの負荷状況、フォークF101、F102の種類等を示すフォーク情報、又は、作業員(運転手)の識別情報、作業場(倉庫や工場)や企業の識別情報、把持した(運搬した)運搬対象の識別情報(例えば、運搬対象に貼付されたRFID等で取得)等を示す作業情報等が含まれても良い。
(ステップS106)作業管理装置1は、ステップS103で取得したセンシング情報、ステップS104で取得した位置情報、及び、ステップS105で取得した車両情報を関連付ける(関連付けたデータを「関連付けデータ」とも称する)。例えば、作業管理装置1は、作業管理装置1の装置識別情報、取得日時とともに、センシング情報、位置情報、及び車両情報を関連付ける。その後、ステップS107へ進む。
(ステップS107)作業管理装置1は、ステップS106で関連付けた関連付けデータに基づいて、危険やイベントの有無を判定する。例えば、作業管理装置1は、関連付けデータに基づいて、上記の積載ずれ判定を行う。危険やイベントがあると判定された場合(yes)、ステップS108へ進む。一方、危険やイベントがないと判定された場合(no)、ステップS109へ進む。
(ステップS107)作業管理装置1は、ステップS106で関連付けた関連付けデータに基づいて、危険やイベントの有無を判定する。例えば、作業管理装置1は、関連付けデータに基づいて、上記の積載ずれ判定を行う。危険やイベントがあると判定された場合(yes)、ステップS108へ進む。一方、危険やイベントがないと判定された場合(no)、ステップS109へ進む。
(ステップS108)作業管理装置1は、ステップS107で判定した危険やイベントの種類、又は、この種類と関連付けデータに基づいて、警告(案内を含む)を出力する。その後、ステップS109へ進む。
(ステップS109)作業管理装置1は、関連付けデータ、ステップS107の判定結果を示す判定情報、又は、ステップS108の警告の出力結果を示す出力情報を、関連付け、関連付けたデータを記録装置等に記録する。その後、ステップS110へ進む。
(ステップS110)作業管理装置1は、ステップS109で関連付けたデータを、サーバ等へ送信する。その後、ステップS111へ進む。
なお、このサーバは、例えば、作業場や企業において、複数のフォークリフトF1からのデータを、総合的に収集して管理する情報処理装置である。サーバに送信されたデータは、統計処理機能や機械学習機能により、分析される。サーバに送信されたデータ、又は、分析結果のデータは、運転の教育等に用いられる。例えば、運搬対象の積載が上手い、又は効率的な作業員の運転データは、お手本として用いられる。一方、運搬対象の破損や落下等があった場合には、そのときのデータは、原因究明や改善に用いられる。
(ステップS109)作業管理装置1は、関連付けデータ、ステップS107の判定結果を示す判定情報、又は、ステップS108の警告の出力結果を示す出力情報を、関連付け、関連付けたデータを記録装置等に記録する。その後、ステップS110へ進む。
(ステップS110)作業管理装置1は、ステップS109で関連付けたデータを、サーバ等へ送信する。その後、ステップS111へ進む。
なお、このサーバは、例えば、作業場や企業において、複数のフォークリフトF1からのデータを、総合的に収集して管理する情報処理装置である。サーバに送信されたデータは、統計処理機能や機械学習機能により、分析される。サーバに送信されたデータ、又は、分析結果のデータは、運転の教育等に用いられる。例えば、運搬対象の積載が上手い、又は効率的な作業員の運転データは、お手本として用いられる。一方、運搬対象の破損や落下等があった場合には、そのときのデータは、原因究明や改善に用いられる。
(ステップS111)作業員等の操作により、フォークリフトF1のエンジンが停止された場合(yes)、ステップS112へ進む。一方、フォークリフトF1のエンジンが停止されていない場合(no)、ステップS103、S104、S05へ進む。つまり、作業管理装置1は、センシング等による情報の取得、データの関連付け、記録、送信を、エンジンが停止するまで行う。
(ステップS112)作業管理装置1等の車載機は、電力の供給が停止する、又は、エンジンが停止されたことを示す情報を取得することで、停止する又はスリープ状態となる。
その後、本動作は終了する。
(ステップS112)作業管理装置1等の車載機は、電力の供給が停止する、又は、エンジンが停止されたことを示す情報を取得することで、停止する又はスリープ状態となる。
その後、本動作は終了する。
<作業管理装置の構成について>
図11は、本実施形態に係る作業管理装置1のハードウェア構成を示す概略構成図である。この図において、作業管理装置1は、CPU(Central Processing Unit)111、IF(Interface)112、通信モジュール113、センサ114(例えば、空間認識センサ)、ROM(Read Only Memory)121、RAM(Random Access Memory)122、及び、HDD(Hard Disk Drive)123を含んで構成される。
IF112は、例えば、フォークリフトF1の一部(運転席、車体、マストF14等)や作業管理装置1に設けられた出力装置(ランプやスピーカ、タッチパネルディスプレイ等)である。通信モジュール113は、通信アンテナを介して信号の送受信を行う。通信モジュール113は、例えば、GNSS受信機や無線LAN等の通信チップである。センサ114は、例えば、レーザ光を照射し、受信した反射光に基づくセンシングを行う。
図11は、本実施形態に係る作業管理装置1のハードウェア構成を示す概略構成図である。この図において、作業管理装置1は、CPU(Central Processing Unit)111、IF(Interface)112、通信モジュール113、センサ114(例えば、空間認識センサ)、ROM(Read Only Memory)121、RAM(Random Access Memory)122、及び、HDD(Hard Disk Drive)123を含んで構成される。
IF112は、例えば、フォークリフトF1の一部(運転席、車体、マストF14等)や作業管理装置1に設けられた出力装置(ランプやスピーカ、タッチパネルディスプレイ等)である。通信モジュール113は、通信アンテナを介して信号の送受信を行う。通信モジュール113は、例えば、GNSS受信機や無線LAN等の通信チップである。センサ114は、例えば、レーザ光を照射し、受信した反射光に基づくセンシングを行う。
図12は、本実施形態に係る作業管理装置1のハードウェア構成を示す概略構成図である。この図において、作業管理装置1は、センサ部101、車両情報取得部102、GNSS受信部103、解析部104、制御部105、出力部106、記録部107、及び、通信部108を含んで構成される。
センサ部101は、空間認識センサである。センサ部101は、例えばレーザ光によって、自装置から各物体までの距離Rをセンシングする。センサ部101は、レーザ光の照射方向(偏角θ、φ)及びセンシングした距離Rに基づいて、空間を認識する。なお、空間を認識するとは、周囲の物体を含む空間について、3次元座標を生成することをいうが、本発明はこれに限らず、2次元座標を生成することであっても良い。センサ部101は、センシング情報(例えば、座標情報)を生成し、制御部105へ出力する。
車両情報取得部102は、フォークリフトF1から車両情報を取得し、取得した車両情報を制御部105へ出力する。
GNSS受信部103は、位置情報を取得し、取得した位置情報を制御部105へ出力する。
GNSS受信部103は、位置情報を取得し、取得した位置情報を制御部105へ出力する。
解析部104は、センサ部101が出力したセンシング情報、車両情報取得部102が出力した車両情報、GNSS受信部が出力した位置情報を、制御部105から取得する。
解析部104は、取得したセンシング情報、車両情報、位置情報を関連付けることで、関連付けデータを生成する。解析部104は、生成した関連付けデータを解析する。
例えば、解析部104は、センシング情報に基づく第1検出処理によって、平面とフォークポケット201、202を検出することで、差込面211(コンテナ20)を検出する。また、解析部104は、センシング情報に基づく第2検出処理によって、フォークF101、F102を検出する。ここで、解析部104は、検出したフォークF101、F102の長さを計測しても良い。
また、解析部104は、取得したセンシング情報に基づいて、検出した差込面211の垂直走査において、基準距離Ltを算出し、また、差ΔLt,sを算出する。また、解析部104は、取得したセンシング情報に対してエッジ検出を行い、エッジ検出の結果、直線2111と直線T111(図9)を検出する。
解析部104は、取得したセンシング情報、車両情報、位置情報を関連付けることで、関連付けデータを生成する。解析部104は、生成した関連付けデータを解析する。
例えば、解析部104は、センシング情報に基づく第1検出処理によって、平面とフォークポケット201、202を検出することで、差込面211(コンテナ20)を検出する。また、解析部104は、センシング情報に基づく第2検出処理によって、フォークF101、F102を検出する。ここで、解析部104は、検出したフォークF101、F102の長さを計測しても良い。
また、解析部104は、取得したセンシング情報に基づいて、検出した差込面211の垂直走査において、基準距離Ltを算出し、また、差ΔLt,sを算出する。また、解析部104は、取得したセンシング情報に対してエッジ検出を行い、エッジ検出の結果、直線2111と直線T111(図9)を検出する。
制御部105は、センサ部101が出力したセンシング情報、車両情報取得部102が出力した車両情報、GNSS受信部が出力した位置情報を取得し、例えば解析部104を用いて分析し、分析結果に基づいて判定を行う。
例えば、制御部105は、危険やイベントの有無の判定を行う。制御部105は、この判定の1つとして、上述の積載ずれ判定を行う。
具体的には、制御部105は、解析部104が算出した差ΔLt,sに基づいて、上述の積載ずれ判定を行う。また、制御部105は、解析部104が検出した直線2111と直線T111に基づいて、上述の積載ずれ判定を行う。
例えば、制御部105は、危険やイベントの有無の判定を行う。制御部105は、この判定の1つとして、上述の積載ずれ判定を行う。
具体的には、制御部105は、解析部104が算出した差ΔLt,sに基づいて、上述の積載ずれ判定を行う。また、制御部105は、解析部104が検出した直線2111と直線T111に基づいて、上述の積載ずれ判定を行う。
制御部105は、判定結果又は、判定結果と関連付けデータに基づいて、出力部106から警告(案内を含む)を出力させる。
制御部105は、判定結果を示す判定情報、及び関連付けデータを記録部107に記録するとともに、通信部108を介してサーバ等へ送信する。
制御部105は、判定結果を示す判定情報、及び関連付けデータを記録部107に記録するとともに、通信部108を介してサーバ等へ送信する。
なお、センサ部101は、図11のセンサ114で実現される。同様に、車両情報取得部102及びGNSS受信部103は、例えば、通信モジュール113で実現される。解析部104及び制御部105は、例えば、CPU111、ROM121、RAM122、又はHDD123で実現される。
(本実施形態のまとめ)
以上のように、本実施形態では、作業管理装置1は、フォークリフトF1(荷役機)に搭載される車載装置である。作業管理装置1(フォークリフトF1)では、図13に示すように、解析部104が空間認識センサ(空間認識装置)から取得したセンシング情報に基づいてフォークF101、F102(差込爪)を差し込み可能なコンテナ20(差込対象)を検出する。制御部105は、センシング情報に基づいて、荷台L1(搬出先)に積載されたコンテナ20について、荷台L1に対してずれているか否かを判定する。
これにより、作業管理装置1は、コンテナ20が荷台L1に対してずれることなく積載させることができ、運搬対象を適切に積載できる。その結果、例えば、作業管理装置1は、緊締装置L11~L14の緊締機能を適切に作用させることができ、積載された後(輸送車両の場合、輸送中を含む)、バランスが崩れ、荷台L1から落下又は転倒してしまうことを防止できる。
以上のように、本実施形態では、作業管理装置1は、フォークリフトF1(荷役機)に搭載される車載装置である。作業管理装置1(フォークリフトF1)では、図13に示すように、解析部104が空間認識センサ(空間認識装置)から取得したセンシング情報に基づいてフォークF101、F102(差込爪)を差し込み可能なコンテナ20(差込対象)を検出する。制御部105は、センシング情報に基づいて、荷台L1(搬出先)に積載されたコンテナ20について、荷台L1に対してずれているか否かを判定する。
これにより、作業管理装置1は、コンテナ20が荷台L1に対してずれることなく積載させることができ、運搬対象を適切に積載できる。その結果、例えば、作業管理装置1は、緊締装置L11~L14の緊締機能を適切に作用させることができ、積載された後(輸送車両の場合、輸送中を含む)、バランスが崩れ、荷台L1から落下又は転倒してしまうことを防止できる。
また、本実施形態では、作業管理装置1(フォークリフトF1)では、制御部105は、積載ずれ判定として、コンテナ20の少なくとも一面の向きが、荷台L1で対応する向きに対してずれているか否かを判定する。
例えば、制御部105(ROM121、RAM122又はHDD123)は、コンテナ20の差込面211又は背面の向きには、荷台L1の側面の向きを対応させて、記憶する。制御部105は、積載ずれ判定として、差込面211又は背面の向きが、荷台L1の側面の向きに対してずれているか否かを判定する(図7Aおよび7B参照)。また例えば、制御部105は、コンテナ20の底面又は上面の向きには、荷台L1の上面の向きを対応させて、記憶する。制御部105は、積載ずれ判定として、コンテナ20の底面又は上面の向きが、荷台L1の上面の向きに対してずれているか否かを判定する。
これにより、作業管理装置1は、コンテナ20の面の向きと荷台L1の向きのずれをなくすことができ、コンテナ20をずれることなく、荷台L1に積載させることができる。
例えば、制御部105(ROM121、RAM122又はHDD123)は、コンテナ20の差込面211又は背面の向きには、荷台L1の側面の向きを対応させて、記憶する。制御部105は、積載ずれ判定として、差込面211又は背面の向きが、荷台L1の側面の向きに対してずれているか否かを判定する(図7Aおよび7B参照)。また例えば、制御部105は、コンテナ20の底面又は上面の向きには、荷台L1の上面の向きを対応させて、記憶する。制御部105は、積載ずれ判定として、コンテナ20の底面又は上面の向きが、荷台L1の上面の向きに対してずれているか否かを判定する。
これにより、作業管理装置1は、コンテナ20の面の向きと荷台L1の向きのずれをなくすことができ、コンテナ20をずれることなく、荷台L1に積載させることができる。
また、本実施形態では、作業管理装置1(フォークリフトF1)では、解析部104は、フォークポケット201、202の開口部を有する差込面211の一部又は全部を検出する。制御部105は、積載ずれ判定として、差込面211の一部又は全部が鉛直面であるか否かを判定する。
これにより、作業管理装置1は、鉛直方向に対して傾いているコンテナ20については、ずれていると判定でき、コンテナ20が落下又は転倒する可能性のあることを検出できる。または、作業管理装置1は、鉛直方向に対して傾いていないコンテナ20については、ずれていないと判定でき、コンテナ20が適切に積載されていることを検出できる。
これにより、作業管理装置1は、鉛直方向に対して傾いているコンテナ20については、ずれていると判定でき、コンテナ20が落下又は転倒する可能性のあることを検出できる。または、作業管理装置1は、鉛直方向に対して傾いていないコンテナ20については、ずれていないと判定でき、コンテナ20が適切に積載されていることを検出できる。
また、本実施形態では、作業管理装置1(フォークリフトF1)では、解析部104は、コンテナ20の辺を示す第1エッジと、荷台L1の辺を表す第2エッジと、を検出する。例えば、解析部104は、コンテナ20の底面を表す第1エッジと、荷台L1の上面を表す第2エッジと、を検出する。制御部105は、第1エッジと第2エッジに基づいて、積載ずれ判定を行う。
これにより、作業管理装置1は、コンテナ20の第1エッジと荷台L1の第2エッジに基づいて、コンテナ20がずれているか否かを判定することができる。
これにより、作業管理装置1は、コンテナ20の第1エッジと荷台L1の第2エッジに基づいて、コンテナ20がずれているか否かを判定することができる。
また、本実施形態では、作業管理装置1(フォークリフトF1)では、解析部104は、第1エッジ(コンテナ20の底面を表すエッジ)の向きを表す直線2111と、第2エッジ(荷台L1の上面を表すエッジ)の向きを表す直線T111と、を検出する。制御部105は、直線2111の傾きと直線T111の傾きとの差分、例えば、直線2111と直線T111のなす角度(傾きの差分)に基づいて、積載ずれ判定を行う。
これにより、作業管理装置1は、コンテナ20と荷台L1から検出されたエッジを用いて、エッジ同士の傾きの差分に基づいて、コンテナ20がずれているか否かを判定することができる。
これにより、作業管理装置1は、コンテナ20と荷台L1から検出されたエッジを用いて、エッジ同士の傾きの差分に基づいて、コンテナ20がずれているか否かを判定することができる。
<変形例A1>
上記実施形態において、制御部105(フォークリフトF1又は作業管理装置1)は、図9の直線2111と直線T111の距離に基づいて、積載ずれ判定を行っても良い。
例えば、作業管理装置1は、直線2111と直線T111との距離(「エッジ距離」とも称する)に基づいて、積載ずれ判定を行う。
具体的には、作業管理装置1は、エッジ距離が、予め定めた閾値以下の場合にコンテナ20はずれていないと判定する。一方、作業管理装置1は、エッジ距離がこの閾値より大きい場合にコンテナ20はずれていると判定する。
なお、エッジ距離は、YZ平面に平行な面に、直線2111が交わる点と直線T111が交わる点の距離であっても良い。また、エッジ距離は、YZ平面に平行な面の2個について、直線2111が交わる点と直線T111が交わる点について、それぞれの面での距離の差分を算出しても良い。エッジ距離は、算出した差分が閾値以下の場合、コンテナ20はずれていないと判定し、この差分が閾値より大きい場合、コンテナ20はずれていると判定しても良い。
例えば、作業管理装置1は、直線2111と直線T111との距離(「エッジ距離」とも称する)に基づいて、積載ずれ判定を行う。
具体的には、作業管理装置1は、エッジ距離が、予め定めた閾値以下の場合にコンテナ20はずれていないと判定する。一方、作業管理装置1は、エッジ距離がこの閾値より大きい場合にコンテナ20はずれていると判定する。
なお、エッジ距離は、YZ平面に平行な面に、直線2111が交わる点と直線T111が交わる点の距離であっても良い。また、エッジ距離は、YZ平面に平行な面の2個について、直線2111が交わる点と直線T111が交わる点について、それぞれの面での距離の差分を算出しても良い。エッジ距離は、算出した差分が閾値以下の場合、コンテナ20はずれていないと判定し、この差分が閾値より大きい場合、コンテナ20はずれていると判定しても良い。
このように、本変形例では、作業管理装置1(フォークリフトF1)では、制御部105は、直線2111と直線T111との距離に基づいて、積載ずれ判定を行う。
これにより、作業管理装置1は、コンテナ20と荷台L1とから検出されたエッジを用いて、エッジ同士の距離に基づいて、コンテナ20がずれているか否かを判定することができる。
これにより、作業管理装置1は、コンテナ20と荷台L1とから検出されたエッジを用いて、エッジ同士の距離に基づいて、コンテナ20がずれているか否かを判定することができる。
<変形例A2>
上記実施形態において、制御部105(フォークリフトF1又は作業管理装置1)は、コンテナ20が積載方向(Z軸方向)を回転軸として、角度にずれがないか否かを判定しても良い。
上記実施形態において、制御部105(フォークリフトF1又は作業管理装置1)は、コンテナ20が積載方向(Z軸方向)を回転軸として、角度にずれがないか否かを判定しても良い。
<積載ずれ判定(第3積載ずれ判定)>
図14Aおよび14Bは、本実施形態の変形例に係る積載ずれ判定の一例を示す概略図である。
図14Aは、コンテナ20がずれていない場合の図である。
図14Bは、コンテナ20がずれている場合の図である。
図14Aおよび14Bは、センシング情報のうち、検出された物体(コンテナ20と荷台L1)を、XY平面へ射影した図である。なお、図14Aおよび14Bにおいて、便宜上、コンテナ20、フォークF101、F102、及び作業管理装置1の射影を破線で記載している。
図14Aおよび14Bは、本実施形態の変形例に係る積載ずれ判定の一例を示す概略図である。
図14Aは、コンテナ20がずれていない場合の図である。
図14Bは、コンテナ20がずれている場合の図である。
図14Aおよび14Bは、センシング情報のうち、検出された物体(コンテナ20と荷台L1)を、XY平面へ射影した図である。なお、図14Aおよび14Bにおいて、便宜上、コンテナ20、フォークF101、F102、及び作業管理装置1の射影を破線で記載している。
図14Aおよび14Bにおいて、直線2111は、コンテナ20の正面(差込面211)を表す。直線2111は、差込面211において、底辺(又は荷台L1側の一辺)を表す。図14Aおよび14Bにおいて、直線T111は、荷台L1の側面を表し、また、荷台L1の側面においてコンテナ20側の一辺を表す。
制御部105は、直線2111と直線T111に基づいて、積載ずれ判定を行う。具体的な一例として、作業管理装置1は、XY平面において、直線2111と直線T111のなす角度(第2傾きの差分)に基づいて、積載ずれ判定を行う。
より具体的には、制御部105は、第2傾き差分が、予め定めた閾値以下の場合にコンテナ20はずれていないと判定する。一方、制御部105は、第2傾き差分がこの閾値より大きい場合にコンテナ20はずれていると判定する。
より具体的には、制御部105は、第2傾き差分が、予め定めた閾値以下の場合にコンテナ20はずれていないと判定する。一方、制御部105は、第2傾き差分がこの閾値より大きい場合にコンテナ20はずれていると判定する。
このように、本変形例では、作業管理装置1(フォークリフトF1)では、制御部105は、積載ずれ判定として、積載方向(Z軸方向)を回転軸として、角度にずれがないか否かを判定する。これにより、作業管理装置1は、運搬対象を適切に積載できる。
<変形例A3>
上記実施形態において、制御部105(フォークリフトF1又は作業管理装置1)は、第3積載ずれ判定を行った後に、第2積載ずれ判定を行っても良い。
積載方向(Z軸方向)を回転軸として角度にずれがあるとき、コンテナ20の幅方向にずれがない場合でも、図9の直線2111と直線T111がずれてしまうことがある。
本変形例では、作業管理装置1は、第3積載ずれ判定を行うことで、積載方向を回転軸として角度にずれがあるか否かを判定し、このずれがない場合に、第2積載ずれ判定に基づく出力を行うことができる。つまり、作業管理装置1は、第2積載ずれ判定の精度を向上させることができる。
上記実施形態において、制御部105(フォークリフトF1又は作業管理装置1)は、第3積載ずれ判定を行った後に、第2積載ずれ判定を行っても良い。
積載方向(Z軸方向)を回転軸として角度にずれがあるとき、コンテナ20の幅方向にずれがない場合でも、図9の直線2111と直線T111がずれてしまうことがある。
本変形例では、作業管理装置1は、第3積載ずれ判定を行うことで、積載方向を回転軸として角度にずれがあるか否かを判定し、このずれがない場合に、第2積載ずれ判定に基づく出力を行うことができる。つまり、作業管理装置1は、第2積載ずれ判定の精度を向上させることができる。
<変形例B1:出力又は積載ずれ判定の条件>
上記実施形態において、制御部105(フォークリフトF1又は作業管理装置1)は、積載ずれ判定を行う又は行わない条件を設定されても良い。
制御部105は、下記の第1条件が満たされた場合に、積載ずれ判定に基づく警告を行い、第1条件を満たさない場合には、積載ずれ判定に基づく警告を行わなくても良い。また、制御部105は、第1条件が満たされた場合に、積載ずれ判定又はセンシングを行い、第1条件が満たされない場合には、積載ずれ判定又はセンシングを行わなくても良い。
また、制御部105は、第1条件に基づいて、積載ずれ判定に基づく警告や、積載ずれ判定又はセンシング(以下、警告等と称する)の間隔を変更しても良い。
上記実施形態において、制御部105(フォークリフトF1又は作業管理装置1)は、積載ずれ判定を行う又は行わない条件を設定されても良い。
制御部105は、下記の第1条件が満たされた場合に、積載ずれ判定に基づく警告を行い、第1条件を満たさない場合には、積載ずれ判定に基づく警告を行わなくても良い。また、制御部105は、第1条件が満たされた場合に、積載ずれ判定又はセンシングを行い、第1条件が満たされない場合には、積載ずれ判定又はセンシングを行わなくても良い。
また、制御部105は、第1条件に基づいて、積載ずれ判定に基づく警告や、積載ずれ判定又はセンシング(以下、警告等と称する)の間隔を変更しても良い。
第1条件は、例えば、コンテナ20とフォークリフトF1の距離(例えば、基準距離Li又は対象距離LB)が閾値よりも小さい(近い、近接している)という条件である。又は、第1条件は、コンテナ20とフォークリフトF1の距離が閾値よりも大きい(遠い、近接していない)という条件である。
第1条件は、例えば、位置情報や車両情報に基づく条件であっても良い。例えば、制御部105は、倉庫等において、予め定めた位置(範囲)にフォークリフトF1が入った場合に、警告等を行い、それ以外の位置では警告等を行わなくても良い。
第1条件は、例えば、位置情報や車両情報に基づく条件であっても良い。例えば、制御部105は、倉庫等において、予め定めた位置(範囲)にフォークリフトF1が入った場合に、警告等を行い、それ以外の位置では警告等を行わなくても良い。
第1条件は、例えば、フォーク情報や作業情報に基づく条件であっても良い。
例えば、制御部105は、把持している運搬対象が無い場合、警告等を行い、把持している運搬対象が有る場合、警告等を行わなくても良い。制御部105は、フォークF101、F102の位置(高さ)が閾値より高い場合、警告等を行い、フォークF101、F102の位置(高さ)が閾値より低い場合、警告等を行わなくても良い。
これにより、作業管理装置1は、コンテナ20が高い位置にあり、落下や転落の可能性が高い場合や、落下や転落による危険性が高い場合に、警告等を行うことができる。
例えば、制御部105は、特定の作業員が運転する場合、警告等を行い、それ以外の場合、警告等を行わなくても良い。
例えば、制御部105は、把持している運搬対象が無い場合、警告等を行い、把持している運搬対象が有る場合、警告等を行わなくても良い。制御部105は、フォークF101、F102の位置(高さ)が閾値より高い場合、警告等を行い、フォークF101、F102の位置(高さ)が閾値より低い場合、警告等を行わなくても良い。
これにより、作業管理装置1は、コンテナ20が高い位置にあり、落下や転落の可能性が高い場合や、落下や転落による危険性が高い場合に、警告等を行うことができる。
例えば、制御部105は、特定の作業員が運転する場合、警告等を行い、それ以外の場合、警告等を行わなくても良い。
また、上記実施形態において、制御部105(フォークリフトF1又は作業管理装置1)は、コンテナ20と、荷台L1(緊締装置L11~L14を含む)との位置のずれを判定しても良い。例えば、制御部105は、緊締された場合のコンテナ20と荷台L1との間の距離を予め記憶する。制御部105は、検出したコンテナ20と荷台L1との間の距離、直線2111と直線T111との距離が、予め記憶する距離であるか否かを判定することで、位置がずれているか否かを判定する。
なお、図2に示したように、作業管理装置1がフォークリフトF1のX軸方向の中央部分に固定されている場合、フォークリフトF1が適切にコンテナ20を把持しようとするとき、フォークF101とフォークF102の中央部分、又は、フォークポケット201とフォークポケット202の中央部分に、作業管理装置1を位置させることができる。
また、作業管理装置1がフォークレールF11やバックレストF13に固定されている場合、作業管理装置1は、フォークレールF12に固定された場合と比較して、よりフォークF101、F102を認識し易くなる。つまり、作業管理装置1とフォークF101、F102が高さ方向(X軸方向)に離れるので、作業管理装置1は、フォークF101、F102の長さ方向(Y軸方向)の形状を、より多く認識できる(図3、図5参照)。
また、作業管理装置1は、フォークレールF11等の下面側(下側)に固定されている場合、フォークF101、F102(特に、根本部分まで)をセンシングできる。
また、作業管理装置1は、フォークレールF11等の下面側(下側)に固定されている場合、フォークF101、F102(特に、根本部分まで)をセンシングできる。
また、作業管理装置1がフォークレールF11やF12に固定されている場合、作業管理装置1は、バックレストF13に固定された場合と比較して、よりフォークポケット201、202を認識し易くなる。つまり、作業管理装置1とフォークポケット201、202が高さ方向に近づくので、作業管理装置1は、フォークポケット201、202へのレーザ光等の照射角度(高さ方向の角度)を、より水平(差込面に対して垂直)に近くできる。
なお、空間認識センサは、レーザ光以外を用いて空間認識を行っても良い。例えば、作業管理装置1は、レーザ光以外の電波を用いて空間認識を行っても良いし、例えば、撮像画像を用いて空間認識を行っても良い。例えば、空間認識センサは、単眼カメラ、ステレオカメラ、赤外線カメラ、ミリ波レーダ、光学レーザ、LiDAR(Light Detection And Ranging、Laser Imaging Detection And Ranging)、(超)音波センサ等であっても良い。
また、作業管理装置1は、自動運転装置と接続されていても良いし、自動運転装置の一部であっても良い。つまり、作業管理装置1は、積載ずれ判定を行い、差込量が適切になるようにフォークリフトF1を自動運転しても良い。
例えば、作業管理装置1は、積載ずれ判定の結果、差込距離dpが予め定めた範囲に近づくように、ギヤ、アクセル、ブレーキを調整し、例えば、フォークリフトF1前進又は後進させる。
また、作業管理装置1は、路面Gや壁、所定距離より遠い位置にある物体を、検出対象(センシング情報)から除いても良い。作業管理装置1は、各面への射影する場合に、これらを射影対象から除く。
また、作業管理装置1は、自動運転装置と接続されていても良いし、自動運転装置の一部であっても良い。つまり、作業管理装置1は、積載ずれ判定を行い、差込量が適切になるようにフォークリフトF1を自動運転しても良い。
例えば、作業管理装置1は、積載ずれ判定の結果、差込距離dpが予め定めた範囲に近づくように、ギヤ、アクセル、ブレーキを調整し、例えば、フォークリフトF1前進又は後進させる。
また、作業管理装置1は、路面Gや壁、所定距離より遠い位置にある物体を、検出対象(センシング情報)から除いても良い。作業管理装置1は、各面への射影する場合に、これらを射影対象から除く。
なお、作業管理装置1は、コンテナ20や荷台L1、フォークF101、F102を検出する場合、エッジ検出を用いても良い。ここで、エッジ検出で検出されるエッジは、例えば、距離R、又は、その変化率が大きい箇所である。
具体的なエッジ検出として、作業管理装置1は、検出された物体について、各座標軸での偏微分が閾値以上になる部分をエッジとしても良い。また例えば、作業管理装置1は、検出した平面同士の交じわる部分や、逆方向に隣接又は近接する点同士の距離Rの差が閾値以上になる部分、レーザ光の反射光を検出しない部分と隣接する部分、レーザ光の反射光の受信レベルが低い部分と隣接する部分を、エッジとしても良い。作業管理装置1は、その他の方式でエッジ検出を行っても良い。
具体的なエッジ検出として、作業管理装置1は、検出された物体について、各座標軸での偏微分が閾値以上になる部分をエッジとしても良い。また例えば、作業管理装置1は、検出した平面同士の交じわる部分や、逆方向に隣接又は近接する点同士の距離Rの差が閾値以上になる部分、レーザ光の反射光を検出しない部分と隣接する部分、レーザ光の反射光の受信レベルが低い部分と隣接する部分を、エッジとしても良い。作業管理装置1は、その他の方式でエッジ検出を行っても良い。
なお、上記の作業管理装置1は、各機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより、上記の処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境(あるいは表示環境)を備えたWWWシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD-ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。
本願は、2017年3月22日に、日本に出願された特願2017-56013号に基づき優先権を主張し、その内容をここに援用する。
F1 フォークリフト
F101、F102 フォーク
F11、F12 フォークレール
F13 バックレスト
F14 マスト
20 コンテナ
201、202 フォークポケット
211 差込面
1 作業管理装置
111 CPU
112 IF
113 通信モジュール
114 センサ
121 ROM
122 RAM
123 HDD
101 センサ部
102 車両情報取得部
103 GNSS受信部
104 解析部
105 制御部
106 出力部
107 記録部
108 通信部
F101、F102 フォーク
F11、F12 フォークレール
F13 バックレスト
F14 マスト
20 コンテナ
201、202 フォークポケット
211 差込面
1 作業管理装置
111 CPU
112 IF
113 通信モジュール
114 センサ
121 ROM
122 RAM
123 HDD
101 センサ部
102 車両情報取得部
103 GNSS受信部
104 解析部
105 制御部
106 出力部
107 記録部
108 通信部
Claims (10)
- 空間認識装置から取得したセンシング情報に基づいて、差込爪を差し込み可能な差込対象を検出する解析部と、
前記センシング情報に基づいて、搬出先に積載された前記差込対象が前記搬出先に対してずれているか否かを判定する積載ずれ判定を行う制御部と、
を備える車載装置。 - 前記制御部は、前記差込対象の少なくとも一面の向きが、前記搬出先で対応する向きに対してずれているか否かを判定する前記積載ずれ判定を行う
請求項1に記載の車載装置。 - 前記解析部は、前記差込対象の差込部を有する差込面の一部又は全部を検出し、
前記制御部は、前記差込面の一部又は全部が鉛直面であるか否かを判定する前記積載ずれ判定を行う
請求項1又は2に記載の車載装置。 - 前記解析部は、前記差込対象の辺を示す第1エッジと、前記搬出先の辺を表す第2エッジと、を検出し、
前記制御部は、前記第1エッジと前記第2エッジとに基づいて、前記積載ずれ判定を行う
請求項1から3のいずれか一項に記載の車載装置。 - 前記制御部は、前記第1エッジの向きを表す第1直線の傾きと前記第2エッジの向きを表す第2直線の傾きとの差分に基づいて、前記積載ずれ判定を行う
請求項4に記載の車載装置。 - 前記制御部は、前記第1エッジを表す第1直線と前記第2エッジを表す第2直線との距離に基づいて、前記積載ずれ判定を行う
請求項4又は5に記載の車載装置。 - 請求項1から請求項6のいずれか一項に記載の車載装置を備える荷役機。
- 空間認識装置から取得したセンシング情報に基づいて、差込爪を差し込み可能な差込対象が、当該差込対象が積載された搬出先に対してずれているか否かを判定する制御回路。
- 解析部が、空間認識装置から取得したセンシング情報に基づいて、差込爪を差し込み可能な差込対象を検出し、
制御部が、前記センシング情報に基づいて、搬出先に積載された前記差込対象が、前記搬出先に対してずれているか否かを判定する積載ずれ判定を行う、
制御方法。 - コンピュータに、
空間認識装置から取得したセンシング情報に基づいて、差込爪を差し込み可能な差込対象を検出させ、
前記センシング情報に基づいて、搬出先に積載された前記差込対象が、前記搬出先に対してずれているか否かを判定する積載ずれ判定を行わせる、
プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/494,991 US11643312B2 (en) | 2017-03-22 | 2018-02-27 | Vehicle-mounted device, cargo handling machine, control circuit, control method, and program thereof |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017-056013 | 2017-03-22 | ||
JP2017056013A JP6822255B2 (ja) | 2017-03-22 | 2017-03-22 | 車載装置、制御回路、制御方法、及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2018173651A1 true WO2018173651A1 (ja) | 2018-09-27 |
Family
ID=63584835
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2018/007258 WO2018173651A1 (ja) | 2017-03-22 | 2018-02-27 | 車載装置、荷役機、制御回路、制御方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11643312B2 (ja) |
JP (1) | JP6822255B2 (ja) |
WO (1) | WO2018173651A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7095653B2 (ja) * | 2019-05-21 | 2022-07-05 | 株式会社豊田自動織機 | 自動運転フォークリフト用荷置き位置検出装置 |
JP7172922B2 (ja) * | 2019-09-05 | 2022-11-16 | 株式会社豊田自動織機 | フォークリフト及びコンテナ姿勢検出方法 |
JP7247827B2 (ja) * | 2019-09-13 | 2023-03-29 | 株式会社豊田自動織機 | フォークリフトのサイドシフト制御装置 |
JP7272197B2 (ja) * | 2019-09-13 | 2023-05-12 | 株式会社豊田自動織機 | 位置姿勢推定装置 |
JP7421925B2 (ja) * | 2019-12-23 | 2024-01-25 | 日鉄ソリューションズ株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP7078334B2 (ja) * | 2020-01-23 | 2022-05-31 | 三菱ロジスネクスト株式会社 | 荷役システム |
CN114929538A (zh) | 2020-02-21 | 2022-08-19 | 克朗设备公司 | 基于车辆位置信息修改车辆参数 |
JP7424241B2 (ja) * | 2020-07-31 | 2024-01-30 | 株式会社豊田自動織機 | エッジ検出装置 |
JP7036526B1 (ja) * | 2020-11-25 | 2022-03-15 | 三菱ロジスネクスト株式会社 | 車両接近報知装置および該装置を備えたピッキングトラック |
JP2022140064A (ja) * | 2021-03-12 | 2022-09-26 | オムロン株式会社 | 搬送ユニット、搬送方法、搬送プログラム |
JP2022140045A (ja) * | 2021-03-12 | 2022-09-26 | オムロン株式会社 | 搬送可否判定装置、測距装置、搬送ユニット、搬送可否判定方法、搬送可否判定プログラム |
JP7559707B2 (ja) * | 2021-08-24 | 2024-10-02 | 株式会社豊田自動織機 | フォークリフト |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5546440U (ja) * | 1978-09-19 | 1980-03-26 | ||
JPH11116199A (ja) * | 1997-10-09 | 1999-04-27 | Toyo Umpanki Co Ltd | フォークリフト |
JP2005343654A (ja) * | 2004-06-04 | 2005-12-15 | Toyota Industries Corp | 引摺り防止装置及び搬送車 |
JP2013230903A (ja) * | 2012-04-27 | 2013-11-14 | Hitachi Ltd | フォークリフト |
JP2015225450A (ja) * | 2014-05-27 | 2015-12-14 | 村田機械株式会社 | 自律走行車、及び自律走行車における物体認識方法 |
JP2017019595A (ja) * | 2015-07-08 | 2017-01-26 | 株式会社豊田自動織機 | フォークリフトにおける荷取り方法及びフォークリフト |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS60202098A (ja) * | 1984-03-23 | 1985-10-12 | 財団法人鉄道総合技術研究所 | フオ−クリフトの設定高さによる自動上昇停止装置 |
JPH08679B2 (ja) | 1987-01-20 | 1996-01-10 | トヨタ自動車株式会社 | 無人フオ−クリフト |
WO2003008325A1 (fr) * | 2001-07-17 | 2003-01-30 | Kabushiki Kaisha Toyota Jidoshokki | Vehicule industriel equipe d'un controleur de travaux de manipulation de materiaux |
JP6542574B2 (ja) * | 2015-05-12 | 2019-07-10 | 株式会社豊田中央研究所 | フォークリフト |
-
2017
- 2017-03-22 JP JP2017056013A patent/JP6822255B2/ja active Active
-
2018
- 2018-02-27 WO PCT/JP2018/007258 patent/WO2018173651A1/ja active Application Filing
- 2018-02-27 US US16/494,991 patent/US11643312B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5546440U (ja) * | 1978-09-19 | 1980-03-26 | ||
JPH11116199A (ja) * | 1997-10-09 | 1999-04-27 | Toyo Umpanki Co Ltd | フォークリフト |
JP2005343654A (ja) * | 2004-06-04 | 2005-12-15 | Toyota Industries Corp | 引摺り防止装置及び搬送車 |
JP2013230903A (ja) * | 2012-04-27 | 2013-11-14 | Hitachi Ltd | フォークリフト |
JP2015225450A (ja) * | 2014-05-27 | 2015-12-14 | 村田機械株式会社 | 自律走行車、及び自律走行車における物体認識方法 |
JP2017019595A (ja) * | 2015-07-08 | 2017-01-26 | 株式会社豊田自動織機 | フォークリフトにおける荷取り方法及びフォークリフト |
Also Published As
Publication number | Publication date |
---|---|
US20200031645A1 (en) | 2020-01-30 |
JP6822255B2 (ja) | 2021-01-27 |
US11643312B2 (en) | 2023-05-09 |
JP2018158779A (ja) | 2018-10-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2018173651A1 (ja) | 車載装置、荷役機、制御回路、制御方法、及びプログラム | |
WO2018173667A1 (ja) | 車載装置、荷役機、制御回路、制御方法、及びプログラム | |
JP7375800B2 (ja) | 荷役機、車載装置、方法、及びプログラム | |
WO2018173663A1 (ja) | 車載装置、荷役機、制御回路、制御方法、及びプログラム | |
EP3507216B1 (en) | Automated storage and retrieval system with detector for detecting items extending beyond dimensional threshold | |
CN108692681B (zh) | 凹陷部检测装置、输送装置以及凹陷部检测方法 | |
JP7228800B2 (ja) | 搬送方法、搬送システム、プログラム及びパレット | |
US8561897B2 (en) | Load tracking utilizing load identifying indicia and spatial discrimination | |
JP2006528122A (ja) | フォークリフトの荷物支持手段上の可動センサ装置 | |
JP5413413B2 (ja) | 自動倉庫 | |
CN111533051B (zh) | 托盘位姿检测方法、装置、叉车和货运系统 | |
CN113387302B (zh) | 移动控制系统、移动体、控制方法以及存储介质 | |
JP2023507675A (ja) | 自動誘導車の制御方法及びその方法を実行するように構成される制御システム | |
JP2022028342A (ja) | 無人搬送車システム | |
EP3597375B1 (en) | Autonomous cart | |
JP7207046B2 (ja) | 自律移動装置、誘導システムおよび自律移動装置の移動方法 | |
US6571172B1 (en) | Method for determining the position of a vehicle in relation to a container crane | |
JP2022040922A (ja) | 無人搬送車制御システム、搬送システム、無人搬送車、及び作業内容決定方法 | |
JP2023098264A (ja) | 移動体の制御方法、移動体及びプログラム | |
CN116761978A (zh) | 测量和分析包裹用于存储的方法 | |
JP2013161399A (ja) | 搬送車 | |
JP7287329B2 (ja) | フォークリフト | |
WO2022168377A1 (ja) | 荷物搬送システム、並びに荷物搬送システムにおいて用いられる方法およびコンピュータプログラム | |
WO2024014194A1 (ja) | 経路設定方法、プログラム及び経路設定システム | |
JP2023144175A (ja) | 荷取判定装置、荷役車両及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 18770894 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 18770894 Country of ref document: EP Kind code of ref document: A1 |