WO2019064802A1 - 荷物仕分けシステム、投影指示装置および荷物仕分け方法 - Google Patents

荷物仕分けシステム、投影指示装置および荷物仕分け方法 Download PDF

Info

Publication number
WO2019064802A1
WO2019064802A1 PCT/JP2018/025735 JP2018025735W WO2019064802A1 WO 2019064802 A1 WO2019064802 A1 WO 2019064802A1 JP 2018025735 W JP2018025735 W JP 2018025735W WO 2019064802 A1 WO2019064802 A1 WO 2019064802A1
Authority
WO
WIPO (PCT)
Prior art keywords
package
image
sorting system
projection
transport conveyor
Prior art date
Application number
PCT/JP2018/025735
Other languages
English (en)
French (fr)
Inventor
隆明 出良
隆昭 守山
紹二 大坪
Original Assignee
パナソニックIpマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックIpマネジメント株式会社 filed Critical パナソニックIpマネジメント株式会社
Priority to EP18863277.2A priority Critical patent/EP3689793A4/en
Priority to US16/648,973 priority patent/US20200282429A1/en
Priority to JP2019517108A priority patent/JPWO2019064802A1/ja
Publication of WO2019064802A1 publication Critical patent/WO2019064802A1/ja

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C3/00Sorting according to destination
    • B07C3/02Apparatus characterised by the means used for distribution
    • B07C3/08Apparatus characterised by the means used for distribution using arrangements of conveyors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C7/00Sorting by hand only e.g. of mail
    • B07C7/005Computer assisted manual sorting, e.g. for mail
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C1/00Measures preceding sorting according to destination
    • B07C1/02Forming articles into a stream; Arranging articles in a stream, e.g. spacing, orientating
    • B07C1/04Forming a stream from a bulk; Controlling the stream, e.g. spacing the articles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C3/00Sorting according to destination
    • B07C3/10Apparatus characterised by the means used for detection ofthe destination
    • B07C3/14Apparatus characterised by the means used for detection ofthe destination using light-responsive detecting means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C5/00Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
    • B07C5/02Measures preceding sorting, e.g. arranging articles in a stream orientating
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G1/00Storing articles, individually or in orderly arrangement, in warehouses or magazines
    • B65G1/02Storage devices
    • B65G1/04Storage devices mechanical
    • B65G1/137Storage devices mechanical with arrangements or automatic control means for selecting which articles are to be removed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/22Devices influencing the relative position or the attitude of articles during transit by conveyors
    • B65G47/26Devices influencing the relative position or the attitude of articles during transit by conveyors arranging the articles, e.g. varying spacing between individual articles
    • B65G47/30Devices influencing the relative position or the attitude of articles during transit by conveyors arranging the articles, e.g. varying spacing between individual articles during transit by a series of conveyors
    • B65G47/31Devices influencing the relative position or the attitude of articles during transit by conveyors arranging the articles, e.g. varying spacing between individual articles during transit by a series of conveyors by varying the relative speeds of the conveyors forming the series
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G47/00Article or material-handling devices associated with conveyors; Methods employing such devices
    • B65G47/52Devices for transferring articles or materials between conveyors i.e. discharging or feeding devices
    • B65G47/56Devices for transferring articles or materials between conveyors i.e. discharging or feeding devices to or from inclined or vertical conveyor sections
    • B65G47/57Devices for transferring articles or materials between conveyors i.e. discharging or feeding devices to or from inclined or vertical conveyor sections for articles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C2301/00Sorting according to destination
    • B07C2301/005Redirection or forwarding of mail pieces

Definitions

  • the present disclosure relates to a package sorting system and a package sorting method useful for sorting packages.
  • the sorting operation for sorting the packages according to the destination is a time-consuming process, and has relied on manual operations from before, but a technique for automating at least a part of the sorting operation has also been proposed.
  • Patent Document 1 tracks moving packages, determines an image to be displayed based on information on a package read from the package and information on the location of the package, projects an image on the package from the projector, and places the image on the package Disclosed is a system for displaying.
  • the present disclosure relates to techniques for more efficiently and accurately sorting packages.
  • a package sorting system includes a transport conveyor, a sensor for acquiring a distance image of a package passing through a sensing area including a part of the transport conveyor, and a projection image to be projected on the package based on the distance image. And a projection instruction device, and the transport conveyor includes a package separation unit separating the adjacent packages inside the sensing area.
  • the luggage sorting method acquires a distance image of a luggage passing through a sensing area including a part of a transport conveyor, generates a projection image to be projected onto the luggage based on the distance image, and the transport conveyor is
  • the package separation unit is provided inside the sensing area to separate adjacent packages.
  • sorting of packages can be performed more efficiently and accurately, and further increase in the circulation volume of packages can be coped with.
  • the packages can be sorted more efficiently and accurately.
  • FIG. 1 is a block diagram showing the configuration of a package sorting system according to the embodiment.
  • FIG. 2 is a block diagram showing the configuration of the projection instruction apparatus according to the embodiment.
  • FIG. 3A is a conceptual view showing a state in which the package sorting system is installed in the distribution center and in operation.
  • FIG. 3B is a view showing a projected image including numbers on a top surface of the luggage.
  • FIG. 4 is a view showing an example of a projection image generated by the projection instruction apparatus according to the embodiment.
  • FIG. 5 is a flowchart showing an outline procedure of an operation mainly performed by the projection instruction apparatus.
  • FIG. 6 is a diagram illustrating an embodiment of a transport conveyor that includes an uphill slope and a downhill slope along the transport direction.
  • FIG. 7 is a view showing an embodiment of a transfer conveyor including a first transfer conveyor having a low transfer speed and a second transfer conveyor having a high transfer speed, which are continuously arranged along the transfer direction.
  • FIG. 8 is a diagram showing an embodiment of a transport conveyor including a downwardly inclined slide at the leading end in the transport direction.
  • the present embodiment which specifically discloses a projection instruction device, a package sorting system, and a projection instruction method according to the present disclosure will be described in detail with reference to the drawings as appropriate.
  • the detailed description may be omitted if necessary.
  • detailed description of already well-known matters and redundant description of substantially the same configuration may be omitted. This is to avoid unnecessary redundancy in the following description and to facilitate understanding by those skilled in the art.
  • the attached drawings and the following description are provided to enable those skilled in the art to fully understand the present disclosure, and they are not intended to limit the claimed subject matter.
  • FIG. 1 is a block diagram showing the configuration of a package sorting system according to the embodiment.
  • the package sorting system 100 shown in FIG. 1 is installed, for example, at a distribution center.
  • the package sorting system 100 includes a label reader 10, an image sensor 20, a projection instruction device 30, and a projector 40.
  • the package sorting system 100 is a system that supports the work of a worker who sorts the packages transported by the transport conveyor.
  • the package sorting system 100 is installed at a distribution center owned by, for example, a retailer, a wholesaler, an internet distributor, and the like.
  • the luggage to be sorted generally has a substantially rectangular parallelepiped shape, its outer shape is not particularly limited, and the type of luggage is also not particularly limited.
  • the configuration of the package sorting system is not limited to that described in FIG.
  • the quantity of each component can be appropriately changed according to the purpose, such as connecting a plurality of image sensors 20, the projection instruction device 30, and the projector 40 to one label reader 10.
  • the label reader 10 as a reading device is a device including various elements such as a lens, an image sensor and the like (not shown). By using the label reader 10, it is possible to read label recording information in which various information related to the package is recorded from a label attached to the package transported by the transport conveyor. By using the read label recording information, it is possible to specify the package. Package specific information is defined by the read information.
  • the image sensor 20 is an imaging device including various elements such as a lens, an image sensor, and the like (not shown).
  • the image sensor 20 is generally configured as an imaging camera.
  • the imaging camera is a three-dimensional camera, a plurality of two-dimensional cameras, or the like.
  • the image sensor 20 includes a distance image sensor 22 and a color image sensor 24.
  • the distance image sensor 22 picks up an item transported by the transfer conveyor and generates a distance image.
  • the generated distance image is used as information indicating the position of the package, the distance to the package, the size of the package, and the like.
  • the “distance image” refers to an image containing distance information indicating the distance from the imaging position to the position (including the surface of the luggage) indicated by each pixel (that is, in the present disclosure, the word “image” is a distance image). including). Further, the term “distance image” includes those that can not be recognized as an image by human eyes, such as a table listing numerical values indicating distances.
  • the “distance image” may be any information as long as it indicates the relationship between the coordinates in the imaged area and the distance, and the data structure does not matter.
  • the distance image sensor 22 is used to identify the position of the package. Therefore, the distance image sensor 22 may be replaced by another sensing device (ultrasonic sensor, infrared sensor, stereo camera, monocular video camera).
  • the color image sensor 24 captures a package for which a distance image has been generated, and generates a color image.
  • Color image refers to an image in which the color of the surface of the package is expressed in a predetermined gradation, and "gradation” includes not only 256 gradations of RGB but also all kinds such as gray scale.
  • the color image sensor 24 is used to track each package for the package specified by the distance image sensor 22.
  • the color image sensor 24 can also be replaced with another sensing device (ultrasonic sensor, infrared sensor, stereo camera, single-eye video camera).
  • the term "image" includes both a distance image and a color image.
  • information output from an image sensor as a sensing device including a distance image sensor and a color image sensor is referred to as sensing information.
  • the present embodiment will be described using an image sensor 20 (including a distance image sensor 22 and a color image sensor 24) as an example of a sensing device. Further, in the present embodiment, as an example of sensing information, the description will be made using a distance image which is an output of the distance image sensor 22 and a color image which is an output of the color image sensor 24.
  • the projection instruction device 30 plays a role as an arithmetic device in the luggage sorting system 100.
  • the projection instruction device 30 includes an input unit 32, a processor 34, a memory 36, and an output unit 38 connected via a bus.
  • the input unit 32 receives package specification information that can specify the package acquired from the label recording information read by the label reader 10, the distance image generated by the distance image sensor 22, and the color image generated by the color image sensor 24.
  • the processor 34 is configured by a general computing device, and generates a projection image to be projected onto a package based on the package specific information, the distance image and the color image.
  • the memory 36 as a storage device performs operations such as reading of control programs necessary for various processes by the processor 34 and saving of data.
  • processor 34 and the memory 36 cooperate to control various processes by the projection instruction device 30.
  • the output unit 38 outputs the projection image generated by the processor 34 to the projector 40.
  • processor does not mean only a single processor.
  • processor is a term that means an operation subject in the case where a plurality of processors with the same purpose and processors with different purposes (for example, a general-purpose CPU (Central Processing Unit) and a GPU (Graphic Processing Unit)) perform processing jointly. Also used as.
  • the projector 40 is constituted by a general projection device, projects the projection light including the projection image received from the projection instructing device 30 onto a package, and displays the projection light on the package.
  • the package sorting system 100 can be constructed by connecting the label reader 10, the image sensor 20 (the distance image sensor 22 and the color image sensor 24), the projection instruction device 30, and the projector 40 by wired communication or wireless communication. Further, two or more devices among the label reader 10, the image sensor 20, the projection instruction device 30, and the projector 40 can be constructed as an integrated device. For example, the image sensor 20 and the projector 40 can be combined to construct an integrated imaging and projection apparatus (see FIG. 3A).
  • FIG. 3A is a conceptual view showing a state in which the package sorting system 100 is installed in the distribution center and in operation.
  • each worker M visually checks the label affixed to each package P transported by the transport conveyor 50 in the direction of arrow X, and the package for which the worker himself is in charge of delivery arrives Then, it was necessary to pick up the package (pickup) and place it in the vicinity of the worker's own foot, a car, a truck bed and the like.
  • sorting by visual inspection of the workers since there is a limit to the work efficiency of the workers, it was necessary to suppress the transport speed to a predetermined value or less.
  • positioned above the conveyance conveyor 50 reads the label stuck on each package P conveyed by the conveyance conveyor 50.
  • the label describes label recording information including various information on the package.
  • the label record information includes information similar to the package identification number individually assigned to the package, the sender's name, address, telephone number, recipient's name, address, telephone number, package type, and the like. The reading of the label may be performed by the worker in charge corresponding to the barcode in the label with the barcode reader as the label reader 10 by hand.
  • the image sensor 20 picks up an image (distance image and color image) of the package P transported by the transport conveyor 50, and the position of the package P, the distance to the package P, the size of the package P (the package P is a rectangular parallelepiped) In the case of three side lengths), the color of the package P, the pattern of the package P, etc. are acquired.
  • positioning position of the label reader 10 and the image sensor 20, the kind of sensing device, and the order of a process in particular are not limited to the form shown in figure.
  • the image sensor 20 and the projector 40 are constructed as an integrated imaging and projecting device 60 and disposed above the transport conveyor 50.
  • the projection instruction device 30 which is not shown in FIGS. 3A and 3B, is constituted by, for example, a computer disposed in the vicinity of the transport conveyor 50 or in another room, and information for identifying the package acquired by the label reader 10 and the image Based on the distance image and the color image generated by the sensor 20, a projection image to be displayed on the package P (for example, the upper surface when the package P is a rectangular parallelepiped) is generated.
  • the projection instructing device 30 sends to the projector 40 a projection instruction to project the projection image onto the package P.
  • the projector 40 as an image projection apparatus projects the projection light including the projection image generated by the projection instructing device 30 onto the package P, and displays the projection image on the package P.
  • the projection image displayed on the package P is, for example, a circled number image having a color indicating the sorting place corresponding to the delivery address of the package P (see FIG. 3B).
  • the circled numbers correspond to, for example, the number of the truck carrying the sorted luggage P (the number of the truck itself, the parking lot number, etc.), the number of the shelf or box to be carried into the truck, etc. ing.
  • a zip code corresponding to the delivery address, or a number of a worker who should pick up the package P may be used.
  • arrows indicating the sorting direction such as right or left with respect to the transport direction of the transport conveyor 50
  • characters such as "left” or "right”
  • the form of the display is not limited to the circled numbers, and various numbers may be considered such as the numbers enclosed by squares ("3", “359", "24735") as shown in FIG.
  • the projected image is not limited to one enclosing a number or letter by a frame, and may be an open number or letter with a background.
  • the shapes of numbers or characters to be displayed may be switched.
  • the projection image is not limited to a still image, and may be animation.
  • the animation it is conceivable to blink, scale, or change the color of each example described above.
  • an animation reflecting the sorting direction may be projected.
  • Examples of animation reflecting the sorting direction include, for example, moving a light beam or a light spot in the sorting direction, forming all or part of a projected image in the sorting direction, or changing the color, Various things can be considered, such as moving and displaying an arrow in the sorting direction.
  • moving and displaying an arrow in the sorting direction When only part of the projected image is targeted for animation, the part that has a large influence on the judgment of the sorting destination by the operator, such as numbers and arrows, is not changed, and the part that has little influence on the sorting destination such as a frame It is conceivable to change it. However, in situations where it is more efficient to intuitively convey the sorting direction than the meaning of numbers etc.
  • the “image projection device” is not limited to one that directly projects a light beam onto a package.
  • the "image projection apparatus” also includes glasses capable of displaying an image. That is, in the present disclosure, when expressing projection light on a package, displaying an image on a package, projecting an image on a package, etc., the expression is simulated through glasses capable of displaying an image. Also, including making the worker recognize as if the projection light is projected on the package. That is, when the operator wears special glasses capable of displaying an image, the projection image may be superimposed on the image of the luggage P visually recognized through the glasses.
  • FIG. 3A at the side of the transfer conveyor 50, there is a worker M who is in charge of picking up a package (other workers are omitted), and the package that has reached their respective area is circled number 1, circled number. 2. Pick up from the transfer conveyor 50 as shown by circle 3 and so on.
  • the package P1 has package specification information of “AAA 111” in the label, and that the package specification information of “AAA 111” is to be a target of sorting in the area A. Therefore, when the package P1 arrives at the specific area, the processor 34 transmits the projection image generated as shown in FIG. 3B to the projector 40. Then, the projector 40 projects the projection image onto the package P1. Therefore, it is possible for the worker in the relevant area to easily pay attention to the package P1 to be picked up which has arrived in the specific area for which he is in charge, and as a result, it is possible to sort the packages more efficiently and accurately. It becomes possible.
  • the presence or absence of the projection of a plurality of specific areas may be switched to one projector 40, and the plurality of projectors 40 may be switched in their respective specific areas.
  • the presence or absence of projection may be switched.
  • FIG. 5 is a flowchart showing an outline of an operation procedure mainly performed by the projection instruction device 30 of the present embodiment, in particular the processor 34 of the projection instruction device 30.
  • the input unit 32 of the projection instruction device 30 acquires package specification information corresponding to the label recording information from the label reader 10 (step S1).
  • the package identification information is at least one of information similar to the package identification number individually assigned to the package, the sender's name, address, phone number, recipient's name, address, phone number, package type, etc.
  • the processor 34 assigns an ID as a package identification number for identifying the package to the package identifying information, and records the ID together with time information corresponding to the time when the ID is assigned (step S2).
  • the ID recorded in the memory 36 may be a package identification number originally recorded in the package identification information, or the projection instructing device 30 may generate and assign a new ID.
  • step S1 after capturing of the distance image of the luggage by the distance image sensor 22 of the image sensor 20, the input unit 32 of the projection instructing device 30 receives the distance image as sensing information from the distance image sensor 22 It acquires (step S20).
  • the processor 34 determines whether an ID corresponding to a package present in the distance image is present in the memory 36.
  • the processor 34 moves the package between the label reader 10 and the distance image sensor 22 from the distance (known) between the label reader 10 and the distance image sensor 22 and the speed of the transfer conveyor 50. Calculate the time required. Then, by subtracting the time from the time when the distance image is acquired, it is possible to estimate the time when the package present in the distance image is given an ID by the label reader 10 (and the processor 34). Then, it can be estimated that the ID given close to the estimated time is the ID corresponding to the package present in the distance image.
  • the method of installing another distance image sensor in the label reader 10 vicinity is mentioned. That is, from when the label reader 10 assigns an ID (and the processor 34), the other distance image sensor installed in the vicinity of the label reader 10 is used to track the package to which the ID is assigned, for each time The distance between the package (and the ID) and the label reader 10 is measured.
  • the processor 34 determines a predetermined distance from the distance between the measured package (and the ID) and the label reader 10, the distance of the package in the distance image acquired in step S20, and the distance (known) between the two distance image sensors. It is possible to estimate the ID of the package in the distance image acquired in step S20.
  • the processor 34 determines whether or not the ID corresponding to the package included in the distance image is present in the memory 36 (step S30). That is, as described in step S2, in the memory 36, time information corresponding to the time when the package identification information, the ID, and the ID are given is recorded in advance. On the other hand, the processor 34 subtracts the time required for the package to move between the label reader 10 and the range image sensor 22 from the time when the range image is acquired, for example, as described above, so that the package exists in the range image. The time when the ID is given by the label reader 10 (and the processor 34) can be estimated.
  • the processor 34 compares the time information recorded in advance in the memory 36 with the estimated time, and if these values are close (for example, when the time difference is less than or equal to a predetermined threshold time), It can be determined that the corresponding ID exists in the memory 36. If it is determined that the ID corresponding to the package exists in the memory 36 (step S30; Yes), the process proceeds to the process of step S60 and subsequent steps.
  • step S30 If it is determined that the ID corresponding to the package does not exist in the memory 36 (step S30; No), the processor 34 specifies again the position of the package on the premise that the ID is not assigned to the package (step S30) S40), to give an ID to the package (step S50).
  • the color image sensor 24 In parallel with the above-described steps, the color image sensor 24 generates a color image of each package for which the distance image has been acquired. Then, based on the color image from the color image sensor 24 acquired by the input unit 32, the processor 34 tracks the luggage with an ID which is transported and moved by the transport conveyor 50 (step S60). Then, the processor 34 determines, based on the color image, whether or not the package being tracked is picked up by the operator (step S70). If it is determined that the package is not picked up by the worker (Step S70; No), the processor 34 determines whether the package exists in a specific area (a predetermined sorting area where the package is to be picked up) described later. judge.
  • a specific area a predetermined sorting area where the package is to be picked up
  • step S80 when it is determined that the package is present (reached) in the specific area (step S80; Yes), the processor 34 generates a projection image and transmits it to the projector 40 (step S90). If not determined (step S80; No), the process returns to step S60 and the processor 34 continues tracking the package.
  • step S70 If it is determined in step S70 that the package has been picked up by the worker (step S70; Yes), the processor 34 reads the detailed information of the package from the memory 36 (step S100), and generates a projection image including the detailed information
  • the projection image generated by the output unit 38 is output to the projector 40 (step S90).
  • the projector 40 that has acquired the projection image from the projection instructing device 30 projects the projection image onto the corresponding luggage.
  • step S70 is the determination in step S70.
  • contact determination with a worker's hand and a package, and a color image, a distance image, etc. for implementation of determination of step S70.
  • a plurality of packages P3 and P4 may be transported adjacent to each other.
  • the image sensor 20 may erroneously recognize the packages P3 and P4 as one package and it may be difficult to individually identify them.
  • both the packages P3 and P4 can not be correctly identified and can not be tracked. That is, if the packages P3 and P4 are adjacent to each other at the stage of giving an ID to a package, it is erroneously recognized that only one package is present, and only one ID is given. Also, if packages P3 and P4 are adjacent during tracking of packages, it is recognized that only one package is being transported and tracking is performed.
  • the present disclosure provides a projection instruction device capable of separating a plurality of adjacent loads during transfer and projecting a projection image onto each load by improving the configuration of the transfer conveyor.
  • the conveyance conveyor 50 of FIG. 6 includes an upward inclined portion 51 constituting an upward inclination along the conveyance direction X and a downward inclination portion 53 constituting a downward inclination along the conveyance direction X.
  • the transport speed of the load P decreases at the upward slope 51, while the transport speed of the load P increases at the downward slope 53. Therefore, in front of the upward inclined portion 51, two adjacent baggage are separated from each other at the boundary between the upward inclined portion 51 and the downward inclined portion 53 and move with a predetermined distance. That is, the boundary S in FIG. 6 functions as a package separation unit S that separates at least two adjacent packages.
  • the conveyance conveyor 50 of FIG. 7 includes a first conveyance conveyor 50A having a low conveyance speed continuously arranged along the conveyance direction X, and a second conveyance conveyor 50B having a conveyance speed higher than that of the first conveyance conveyor 50A. including. Therefore, in the load separation unit S at the boundary between the two transfer conveyors, two adjacent loads are separated from each other and move with a predetermined distance. Therefore, the image sensor 20 included in the area (sensing area) for imaging the portion where the transport speed changes changes the two packages individually while acquiring a distance image, and the processor 34 of the projection instruction device 30 receives it. In the package separation section S (boundary S) in the transport conveyor configured by the boundary as described above, it becomes possible to separately track two packages separated from the adjacent state. Furthermore, the processor 34 generates a projection image for each package, and the projector 40 can project the projection image for each package.
  • the transfer conveyor 50 of FIG. 8 includes a slide 70 inclined downward at the leading end in the transfer direction.
  • the image sensor 20 included in an area (sensing area) for imaging the boundary between the transport conveyor 50 and the slide 70 acquires a distance image while individually identifying two packages, and the projection instruction device 30 received the image.
  • the processor 34 can separately track the two packages separated from the adjacent state in the package separation unit S (boundary S) in the transport conveyor configured by the boundaries as described above. Furthermore, the processor 34 generates a projection image for each package, and the projector 40 can project the projection image for each package.
  • the conveyor of the present disclosure has the configuration as described above and the image sensor 20 can individually identify two separated packages, the projector 40 finally projects a projection image for each package. And increase the accuracy and efficiency of the work. In addition, when an operator places a load on the transfer conveyor, it is possible to work without worrying about the placement of the load.
  • the specific aspect of the package separation unit S is not limited to those shown in FIGS. 6 to 8, and it is possible to separate at least two packages in the adjacent state so that they can be separated by the accuracy of the distance image sensor. If it is
  • the change in the inclination angle of the transfer conveyor 50 in FIG. when the coefficient of friction between the load and the transfer conveyor 50 is high, the transfer speed of the load may not change even if the inclination angle changes. Therefore, particularly in the configuration in which the transport conveyor 50 has a change in inclination angle, it is desirable to install the image sensor 20 in the vicinity of the boundary S where the load is reliably pulled away due to the difference in inclination angle. In this case, there is a possibility that the package will be adjacent again at the end of the boundary S. However, if it is possible to recognize the fact that a plurality of packages exist at least at the boundary S, it becomes easy to detect that one large package recognized downstream is a false recognition of a plurality of adjacent packages.
  • conveyance conveyor 50 was provided with upslope 51 and down slope 52 in Drawing 6, it is not restricted to this. It is also possible to adopt a structure in which the upward inclined portion 51 is connected to a portion having no inclination, or a structure in which there is no inclination to be connected to the downward inclination portion 52. That is, the angle of inclination does not matter as long as the load located downstream in the transport direction is away from the load located upstream as viewed from the image sensor 20.
  • FIGS In the above embodiment, an example in which the transfer speed of the load located downstream in the transfer direction is made larger than the transfer speed of the load located upstream in the transfer direction has been described using FIGS.
  • the structures shown in these figures are merely examples, and any other structure may be used as long as the transport speed is larger downstream than upstream.
  • the boundary S is disposed inside the imaging area of the image sensor 20, but the present invention is not limited to this. If the separation of the load at the boundary S is caused by a change in speed, the load continues to be separated even after passing the boundary S. Therefore, even if the image sensor 20 is disposed downstream of the boundary S, there is a high possibility that the package in the separated state can be recognized. Such a structure is particularly useful when it is difficult to arrange the image sensor 20 in the vicinity of the boundary S because of the environment in which the transfer conveyor 50 is arranged.
  • the location where the inclination angle or the transport speed is changed and the location where the image sensor 20 is arranged are aligned, but the present invention is not limited to this.
  • the inclination angle or the conveyance speed may be changed at any position of the conveyance conveyor 50. Even in this case, the possibility that the load is transported in a separated state is increased, as compared with the transport conveyor in which neither the inclination angle nor the transport speed changes.
  • a plurality of locations may be provided to change the inclination angle of the transport conveyor 50 or the transport speed. This increases the chances of the package being pulled apart, so the package can be pulled away more reliably.
  • the image acquired by the image sensor 20 at the position where the inclination angle of the transport conveyor 50 or the transport speed is changed is a distance image, but it is not limited to this.
  • the image sensor 20 may acquire a color image instead of the distance image or together with the distance image.
  • tracking of packages based on color images is also performed, so tracking errors are likely to occur when packages of the same color are transported adjacent to each other. Therefore, tracking errors can be reduced by acquiring a color image at or below the boundary S where the package is separated.
  • the present disclosure is useful for providing a projection instruction device, a baggage sorting system, and a projection instruction method that can separate packages in an adjacent state and track packages individually.

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Sorting Of Articles (AREA)
  • Attitude Control For Articles On Conveyors (AREA)

Abstract

荷物仕分けシステムは、搬送コンベヤと、搬送コンベヤの一部を含むセンシング領域を通過する荷物の距離画像を取得するセンサと、距離画像に基づき前記荷物に投影する投影画像を生成する投影指示装置と、を備え、搬送コンベヤは、センシング領域の内側に、隣接した荷物を分離する荷物分離部を備える。

Description

荷物仕分けシステム、投影指示装置および荷物仕分け方法
 本開示は、荷物の仕分けに有用な荷物仕分けシステムおよび荷物仕分け方法に関する。
 近年の経済活動の高まりに伴い、荷物の流通量は増大する一方である。荷物の流通工程において、荷物を行先別に仕分ける仕分け作業は時間のかかる工程であり、従前から人手による作業に頼っているが、仕分け作業の少なくとも一部を自動化する技術も提案されている。
 特許文献1は、移動する荷物を追跡し、荷物から読み取った荷物に関する情報と当該荷物の位置の情報に基づき、表示する画像を決定し、プロジェクタから画像を荷物に投射して画像を荷物上に表示するシステムを開示している。
米国特許第7090134号明細書
 しかしながら、昨今荷物の流通量はますます増大するとともに、荷物の種類も様々なものとなっており、荷物をより効率的かつ正確に仕分ける技術が求められている。
 本開示は、荷物の仕分けをより効率的かつ正確に行うための技術に関する。
 本開示の荷物仕分けシステムは、搬送コンベヤと、前記搬送コンベヤの一部を含むセンシング領域を通過する荷物の距離画像を取得するセンサと、前記距離画像に基づき前記荷物に投影する投影画像を生成する投影指示装置と、を備え、前記搬送コンベヤは、前記センシング領域の内側に、隣接した荷物を分離する荷物分離部を備える。
 本開示の荷物仕分け方法は、搬送コンベヤの一部を含むセンシング領域を通過する荷物の距離画像を取得し、前記距離画像に基づき前記荷物に投影する投影画像を生成し、前記搬送コンベヤは、前記センシング領域の内側に、隣接した荷物を分離する荷物分離部を備える。
 本開示によれば、荷物の仕分けをより効率的かつ正確に行うことができ、さらなる荷物の流通量の増大にも対応することができる。特に、荷物の距離画像を取得する際に搬送コンベヤ上で隣接した少なくとも二つの荷物を引き離すため、荷物の仕分けをより効率的かつ正確に行うことができる。
図1は、実施の形態にかかる荷物仕分けシステムの構成を示すブロック図である。 図2は、実施の形態にかかる投影指示装置の構成を示すブロック図である。 図3Aは、荷物仕分けシステムが物流センターに設置され、稼働している状況を示す概念図である。 図3Bは、荷物の上面に数字を含む投影画像を投影した状態を示す図である。 図4は、実施の形態にかかる投影指示装置で生成される投影画像の一例を示す図である。 図5は、主として投影指示装置が行う動作の概要手順を示すフローチャートである。 図6は、搬送方向に沿って上り傾斜部と下り傾斜部とを含む搬送コンベヤの実施形態を示す図である。 図7は、搬送方向に沿って連続して配置された搬送速度の小さい第1の搬送コンベヤと、搬送速度の大きい第2の搬送コンベヤとを含む搬送コンベヤの実施形態を示す図である。 図8は、搬送方向の先端に下方に傾斜した滑り台を含む搬送コンベヤの実施形態を示す図である。
 以下、適宜図面を参照しながら、本開示に係る投影指示装置、荷物仕分けシステムおよび投影指示方法を具体的に開示した実施形態(以下、「本実施形態」という)を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、添付図面及び以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより請求の範囲に記載の主題を限定することは意図されていない。
 以下、図1~図8を用いて本開示の実施の形態を説明する。
 [構成]
 図1は、実施の形態にかかる荷物仕分けシステムの構成を示すブロック図である。図1に示す荷物仕分けシステム100は、例えば物流センターに設置される。荷物仕分けシステム100は、ラベルリーダ10と、画像センサ20と、投影指示装置30と、プロジェクタ40とを備える。荷物仕分けシステム100は、搬送コンベヤにより搬送されてくる荷物を仕分ける作業員の作業を支援するシステムである。荷物仕分けシステム100は、例えば小売業者、卸売業者、インターネット流通業者などが所有する物流センターに設置される。仕分け対象の荷物は、一般的には略直方体の形状を有するものであるが、その外形は特に限定はされず、荷物の種類も特に限定されない。なお、荷物仕分けシステムの構成は図1に記載したものに限定されない。例えば、一台のラベルリーダ10に複数の画像センサ20と、投影指示装置30と、プロジェクタ40を接続させるなど、各構成要素の数量は目的に応じて適宜変更させることができる。
 読取装置としてのラベルリーダ10は、図示せぬレンズ、イメージセンサ等の各種の要素を含む装置である。ラベルリーダ10を用いることで、搬送コンベヤにより搬送されてくる荷物に貼付されたラベルから当該荷物に関する各種の情報を記録したラベル記録情報を読み取ることができる。読み取られたラベル記録情報を用いることで、当該荷物を特定することが可能で有る。読み取られた情報によって荷物特定情報が定義づけられる。
 画像センサ20は、図示せぬレンズ、イメージセンサ等の各種の要素を含む撮像装置である。画像センサ20は、一般的には撮像カメラとして構成される。撮像カメラは3次元カメラ、複数台の2次元カメラなどである。画像センサ20は、距離画像センサ22と色画像センサ24とを含む。
 距離画像センサ22は、搬送コンベヤにより搬送されてくる荷物を撮像し、距離画像を生成する。生成された距離画像は、荷物の位置、荷物までの距離、荷物のサイズ等を示す情報として使用される。「距離画像」とは、撮像位置から各画素が示す位置(荷物の表面を含む)までの距離を示す距離情報を収容した画像のことをいう(つまり本開示において「画像」の語は距離画像を含む)。また、「距離画像」という文言には、距離を示す数値を列挙したテーブルなど、人の目で画像として認識できないものも含まれる。すなわち「距離画像」は、撮像した領域内における座標と距離との関係を示す情報であればよく、そのデータ構造は問わない。本開示において距離画像センサ22は荷物の位置を特定するために用いられる。よって距離画像センサ22は、他のセンシングデバイス(超音波センサ、赤外線センサ、ステレオカメラ、単眼ビデオカメラ)が代替することもできる。
 色画像センサ24は、距離画像が生成された荷物を撮像し、色画像を生成する。「色画像」とは、荷物の表面の色を所定の階調で表現した画像のことをいい、「階調」にはRGBの256階調のみならず、グレースケール等あらゆるものが含まれる。本開示において色画像センサ24は、距離画像センサ22が特定した荷物について、各荷物を追跡するために用いられる。色画像センサ24も、他のセンシングデバイス(超音波センサ、赤外線センサ、ステレオカメラ、単眼ビデオカメラ)が代替することができる。
 つまり本開示において「画像」の語は距離画像と色画像の双方を含む。本開示においては距離画像センサおよび色画像センサを含むセンシングデバイスとしての画像センサから出力される情報をセンシング情報と呼ぶ。本実施の形態においてはセンシングデバイスの一例として画像センサ20(距離画像センサ22および色画像センサ24を含む)を用いて説明を行う。また本実施の形態においては、センシング情報の例として、距離画像センサ22の出力である距離画像、色画像センサ24の出力である色画像を用いて説明を行う。
 投影指示装置30は、荷物仕分けシステム100における演算装置としての役割を果たす。図2に示すように、投影指示装置30は、バスを介して接続された入力部32、プロセッサ34、メモリ36、出力部38を備える。入力部32は、ラベルリーダ10が読み込んだラベル記録情報から取得した荷物の特定が可能な荷物特定情報、距離画像センサ22が生成した距離画像、色画像センサ24が生成した色画像を受け取る。プロセッサ34は一般的な演算装置によって構成され、荷物特定情報、距離画像および色画像に基づき、荷物に投影する投影画像を生成する。記憶装置としてのメモリ36は、プロセッサ34が各種処理に必要な制御プログラムの読み込み、データの退避等の操作を行う。すなわち、プロセッサ34とメモリ36は協働して投影指示装置30による各種処理を制御する。出力部38は、プロセッサ34が生成した投影画像をプロジェクタ40に出力する。なお、本開示において「プロセッサ」は単一のプロセッサのみを意味するものではない。「プロセッサ」は、複数の同一目的のプロセッサや、目的の異なるプロセッサ(例えば、汎用CPU(Central Processing Unit)とGPU(Graphic Processing Unit))が共同して処理を行う場合の動作主体を意味する語としても使用される。
 プロジェクタ40は一般的な投影装置により構成され、投影指示装置30から受信した投影画像を含む投影光を荷物に投影し、荷物上に表示する。
 荷物仕分けシステム100は、ラベルリーダ10と、画像センサ20(距離画像センサ22および色画像センサ24)と、投影指示装置30と、プロジェクタ40とを有線通信または無線通信で繋ぎ合わすことにより構築できる。また、ラベルリーダ10と、画像センサ20と、投影指示装置30と、プロジェクタ40のうちいずれかの二台以上の装置を一体型の装置として構築することもできる。例えば、画像センサ20とプロジェクタ40とを合わせて、一体型の撮像投影装置として構築することもできる(図3A参照)。
 [システムの概要]
 図3Aは、荷物仕分けシステム100が物流センターに設置され、稼働している状況を示す概念図である。従来の方法によれば、各作業者Mが、搬送コンベヤ50により矢印X方向に搬送されてくる各荷物Pに貼付されたラベルを目視によりチェックし、作業者自身が配送を担当する荷物が到着したら当該荷物を拾い上げて(ピックアップ)、作業者自身の足元、かご、トラックの荷台等の近傍に一旦置く必要があった。しかしながら、作業者の目視による仕分けの場合、作業者の作業効率には限界があるから、搬送速度を所定の値以下に抑える必要があった。結果として、作業者が単位時間内に仕分けることが可能な荷物の量の限界値は低かった。また、作業者がラベルの目視に際して誤認を行うことにより、仕分けに際して誤りを引き起こす可能性があった。近年、荷物の流通量は増大しており、これらの問題はより注目されつつある。
 そこで本実施形態では、図3Aに示すように、搬送コンベヤ50の上方に配置されたラベルリーダ10が、搬送コンベヤ50により搬送されてくる各荷物Pに貼付されたラベルを読み取る。ラベルには、当該荷物に関する各種の情報を含むラベル記録情報が記載されている。ラベル記録情報は、当該荷物に個別に付与される荷物特定番号、発送人の氏名、住所、電話番号、受取人の氏名、住所、電話番号、荷物の種類、等に類似する情報を含む。ラベルの読み込みは、担当の作業者がラベル内のバーコードに、ラベルリーダ10としてのバーコードリーダを手で当てて読み込むことで行っても良い。
 さらに画像センサ20が、搬送コンベヤ50により搬送されてくる荷物Pの画像(距離画像および色画像)を撮像し、荷物Pの位置、荷物Pまでの距離、荷物Pのサイズ(荷物Pが直方体の場合は3辺の長さ)、荷物Pの色、荷物Pの模様等の情報を取得する。尚、ラベルリーダ10、画像センサ20の配置位置や、センシングデバイスの種類、処理の順序は特に図示した形態に限定されない。上述した様に、本例では、画像センサ20とプロジェクタ40が一体型の撮像投影装置60として構築され、搬送コンベヤ50の上方に配置されている。
 図3A、図3Bでは示されていない投影指示装置30は、例えば搬送コンベヤ50の近傍や、別の部屋に配置されたコンピュータにより構成され、ラベルリーダ10が獲得した荷物を特定する情報と、画像センサ20が生成した距離画像および色画像に基づき、荷物P(荷物Pが直方体の場合は例えば上面)に表示する投影画像を生成する。投影指示装置30は投影画像を荷物Pに投影すべき投影指示をプロジェクタ40に送る。
 投影指示を受けた、画像投影装置としての、プロジェクタ40は、投影指示装置30が生成した投影画像を含む投影光を荷物Pに投影し、荷物P上に投影画像を表示する。ここで荷物Pに表示される投影画像は、例えば、当該荷物Pの配送先住所に対応した仕分け場所を示す色を有する丸数字の画像である(図3B参照)。ここで、丸数字は、例えば、仕分けられた荷物Pを運ぶトラックの番号(トラック自体の番号や駐車場番号など)や、当該トラックなどに搬入されるべき棚や箱などの番号等に対応している。また、直接的に棚や箱などの番号に対応させるのではなく、ピックアップした荷物を他の場所またはトラック等へ移動させるシューターの番号等に対応していてもよい。トラック等の駐車位置は交通状況などに応じて頻繁に変わるため搬送コンベヤ50周辺から見た仕分け先を随時対応させることは難しいことがある。そのため、搬送コンベヤ50と搬送トラック等との間にシューターを挟み、搬送コンベヤ50周辺ではシューターの番号を投影することで、搬送コンベヤ50周辺の構成を随時変えなくとも、シューターの出口の配置換えなどで仕分け先の変化に対応することが出来る。もちろん、状況に応じて、様々な種類の投影画像が表示される。数字を表示する他の例としては、配送先住所に対応した郵便番号や、荷物Pをピックアップすべき作業者の番号などであってもよい。また、数字以外の情報を表示する例としては、仕分け方向を示す矢印(搬送コンベヤ50の搬送方向に対して右または左など)または文字(「左」「右」など)であってもよい。更に、表示の形態も丸数字に限られるものではなく、図4で示すような四角で囲んだ数字(“3”、“359”、“24735”)など様々なものが考えられる。さらに、投影画像は、枠によって数字または文字を囲むものに限らず、背景を塗りつぶした白抜きの数字または文字であってもよい。また、表示する情報に応じて、丸・三角・四角など表示する数字または文字の形状を切り替えるなどとしてもよい。他にも、表示する情報ごとに個別に対応付けできるような絵を表示するなどとしてもよい。また、投影画像は静止画像に限らず、アニメーションであっても構わない。アニメーションの例としては、上記の各例を点滅させたり、拡大縮小させたり、色を変化させたりすることなど考えられる。また、仕分け方向を反映したアニメーションを投影しても構わない。仕分け方向を反映したアニメーションの例としては、例えば、仕分け方向に向かって光線または光点等を移動させたり、仕分け方向に向かって投影画像の全体または一部を形成したり色を変化させたり、仕分け方向に矢印を動かして表示するなど、さまざまなものが考えられる。投影画像の一部のみをアニメーションの対象とする場合は、数字や矢印などの作業者による仕分け先の判断への影響が大きい部分は変化させず、枠線などの仕分け先の影響の少ない部分を変化させることなどが考えられる。ただし、仕分け先の選択肢が少ない場合など、枠線内に投影される数字等の意味よりも仕分け方向を直感的に伝える方が効率的な状況では、固定された枠線内で数字や矢印などを仕分け方向に動かしてもよい。また、アニメーションは繰り返し投影されてもよいし、一度だけ投影されてもよい。なお、本開示において「画像投影装置」とは光線を直接荷物に投影するものに限定されない。本開示において「画像投影装置」には画像を表示可能な眼鏡も含む。つまり本開示において、荷物に投影光を投影する、荷物に画像を表示する、荷物に画像を投影する、などと表現した場合は、その表現は画像を表示可能な眼鏡を介して、擬似的に、荷物に投影光が投影されているかのように作業者に認識させることも含む。つまり、作業者が画像を表示可能な特殊な眼鏡を装着している場合、眼鏡を介して視認される荷物Pの像に、ここでの投影画像を重ねあわせてもよい。
 図3Aにおいて、搬送コンベヤ50の脇には、荷物を拾い上げる担当の作業者M(他の作業者は省略)が立っており、それぞれの担当の領域に到達した荷物を、丸数字1、丸数字2、丸数字3等で示すように搬送コンベヤ50から拾い上げる。
 例えば荷物P1はラベルに「AAA111」の荷物特定情報を持っており、「AAA111」の荷物特定情報は領域Aで仕分けの対象になる旨が特定されているとする。そこで、プロセッサ34は、荷物P1が特定領域に到着したら、図3Bに示すように生成した投影画像をプロジェクタ40に送信する。そして、プロジェクタ40は投影画像を荷物P1に投影する。よって、当該領域の作業者は、自身が担当する特定領域に到着した自身が拾い上げるべき荷物P1に容易に着目することが可能となり、結果的に荷物の仕分けをより効率的かつ正確に行うことが可能となる。
 本実施形態では、図3Aに示すように1台のプロジェクタ40に対して、複数の特定領域の投影の有無を切り替えさせてもよく、複数台のプロジェクタ40に対して、それぞれ担当の特定領域における投影の有無を切り替えさせてもよい。
 以下、実施形態の荷物仕分けシステム100において、投影指示装置30が行う荷物仕分けの動作の概要を説明する。
 [動作の概要]
 図5は、本実施形態の投影指示装置30、特に投影指示装置30のプロセッサ34が主として行う動作手順の概要を示すフローチャートである。まず、ラベルリーダ10による荷物のラベルのラベル記録情報の読み取り後、投影指示装置30の入力部32がラベルリーダ10から、ラベル記録情報に対応した荷物特定情報を取得する(ステップS1)。荷物特定情報とは、当該荷物に個別に付与される荷物特定番号、発送人の氏名、住所、電話番号、受取人の氏名、住所、電話番号、荷物の種類、等に類似する情報の少なくとも一つ含む情報である。プロセッサ34は、当該荷物特定情報に対して、当該荷物を特定する荷物特定番号としてのIDを付与し、IDを付与した時刻に対応する時刻情報とともにメモリ36に記録する(ステップS2)。メモリ36に記録するIDは、荷物特定情報に元から記録されていた荷物特定番号でもよいし、投影指示装置30が新しいIDを生成して付与してもよい。
 一方、ステップS1およびステップS2と並行して、画像センサ20の距離画像センサ22による荷物の距離画像の撮像後、投影指示装置30の入力部32が距離画像センサ22からセンシング情報としての距離画像を取得する(ステップS20)。プロセッサ34は、当該距離画像に存在する荷物に対応するIDがメモリ36に存在するか否かを判定する。
 当該距離画像に存在する荷物に対応するIDがメモリ36に存在するか否かを判定する手法の一例としては、次のような手順によることが挙げられる。すなわち、プロセッサ34は、ラベルリーダ10と距離画像センサ22との間の距離(既知とする)、および搬送コンベヤ50の速度から、荷物がラベルリーダ10と距離画像センサ22の間を移動するために要する時間を計算する。そして、距離画像を取得した時刻から当該時間を引くことで、距離画像に存在する荷物がラベルリーダ10(およびプロセッサ34)によりIDを付与された時刻が推定できる。そして、当該推定した時刻に近接して付与されたIDが、当該距離画像に存在する荷物に対応するIDであると推定できる。また、他の一例としては、ラベルリーダ10近辺に他の距離画像センサを設置する手法が挙げられる。すなわち、ラベルリーダ10がID(およびプロセッサ34)を付与した際から、ラベルリーダ10近辺に設置した他の距離画像センサを用いて当該IDが付与された荷物を追跡することで、時刻毎に当該荷物(およびID)とラベルリーダ10との距離を計測する。プロセッサ34は計測された荷物(およびID)とラベルリーダ10との距離と、ステップS20で取得された距離画像における荷物の距離と、2つの距離画像センサとの距離(既知とする)から所定のステップS20で取得された距離画像における荷物のIDを推定することができる。
 このようにして、プロセッサ34は当該距離画像に含まれる荷物に対応するIDがメモリ36に存在するか否かを判定する(ステップS30)。すなわち、ステップS2で述べたように、メモリ36には、荷物特定情報、ID、IDを付与した時刻に対応する時刻情報が予め記録されている。一方、プロセッサ34は、例えば上述したように、距離画像を取得した時刻から荷物がラベルリーダ10と距離画像センサ22の間を移動するために要する時間を引くことで、距離画像に存在する荷物がラベルリーダ10(およびプロセッサ34)によりIDを付与された時刻が推定できる。プロセッサ34は、予めメモリ36に記録された時刻情報と推定した時刻とを比較し、これらの値が近い場合は(例えば時間差が所定の閾値時間以下の場合など)、距離画像に含まれる荷物に対応するIDがメモリ36に存在すると判定することができる。メモリ36に荷物に対応するIDが存在すると判定した場合(ステップS30;Yes)、ステップS60以降の処理に進む。
 メモリ36に荷物に対応するIDが存在しないと判定した場合(ステップS30;No)、プロセッサ34は、当該荷物にIDが付与されていないことを前提として、当該荷物の位置を改めて特定し(ステップS40)、荷物にIDを付与する(ステップS50)。
 上述のステップと並行して、色画像センサ24は、距離画像を取得した各荷物の色画像を生成する。そして、プロセッサ34は、入力部32が取得する色画像センサ24からの色画像に基づき、搬送コンベヤ50により搬送されて移動するID付きの荷物を追跡する(ステップS60)。そして、プロセッサ34は、同じく色画像に基づき、追跡していた荷物が作業者により拾い上げられたか否かを判定する(ステップS70)。荷物が作業者により拾い上げられていないと判定した場合(ステップS70;No)、プロセッサ34は、荷物が、後述する特定領域(その荷物が拾い上げられるべき所定の仕分けエリア)に存在するか否かを判定する。そして、荷物が特定領域に存在する(到達した)と判定した場合(ステップS80;Yes)、プロセッサ34は投影画像を生成し、プロジェクタ40に送信する(ステップS90)荷物が特定領域に存在する(到達した)と判定しない場合(ステップS80;No)、ステップS60に戻り、プロセッサ34は、荷物の追跡を続行する。
 また、ステップS70で、荷物が作業者により拾い上げられたと判定した場合(ステップS70;Yes)、プロセッサ34は、荷物の詳細情報をメモリ36から読み出し(ステップS100)、詳細情報を含む投影画像を生成し、出力部38が生成した投影画像をプロジェクタ40に出力する(ステップS90)。投影指示装置30から投影画像を取得したプロジェクタ40は、当該投影画像を対応する荷物に投影する。
 以上は、投影指示装置30のプロセッサ34等が行う動作手順の概略というべきものである。もちろん、動作手順は上述したものには限定されない。例えば、ステップS70の判定等は省略することも可能である。また、ステップS70の判定の実施には、作業者の手と荷物との接触判定や、色画像、距離画像等を利用することも可能である。次に、本開示の固有事情について説明する。
 [搬送コンベヤの改良]
 一般的に、図3Aの荷物仕分けシステム100では、複数の荷物が、順次、搬送コンベヤ50により搬送されてくる。各荷物が互いに離れた状態である場合、誤った荷物の認識、追跡の発生も少ないと予想される。
 しかしながら、図6に示すように、複数の荷物P3、P4が隣接して搬送される事態が生じ得る。このような場合、画像センサ20が、荷物P3、P4を一つの荷物として誤って認識し、個別に識別することが困難となる事態が生じ得る。このような事態が生ずると、荷物P3、P4ともに正しく特定されず、また、追跡されなくなってしまう。すなわち、荷物にIDを付与する段階で荷物P3、P4が隣接していると、いずれか1つの荷物しか存在しないと誤認識されて1つのIDしか付与されなくなってしまう。また、荷物の追跡中に荷物P3、P4が隣接していると、どちらか1つの荷物だけが搬送されているものと認識されて追跡が行われてしまう。特に、荷物P3、P4の色が類似している場合は、色画像センサによる荷物の切り分けも困難になるため、このような事態が生じ易い。同様の問題は、荷物P3とP4が完全に隣接している場合に限られず、荷物P3、P4の距離が近く距離画像センサの精度では切り分けられない場合にも生じ得る。以下、荷物P3、P4が隣接した状態又は距離が近く距離画像センサの精度では切り分けられない状態を、まとめて「隣接した」と表現する。
 そこで、本開示では、搬送コンベヤの構成に改良を施すことにより、隣接した複数の荷物を搬送中に引き離すとともに、投影画像を各荷物に投影し得る投影指示装置を提供する。
 図6の搬送コンベヤ50は、搬送方向Xに沿って上り傾斜を構成する上り傾斜部51と、搬送方向Xに沿って下り傾斜を構成する下り傾斜部53とを含んでいる。荷物Pの搬送速度は、上り傾斜部51において減少する一方で、荷物Pの搬送速度は下り傾斜部53において増加する。よって、上り傾斜部51の手前において、隣接した二つの荷物は、上り傾斜部51と下り傾斜部53との境界において、互いに引き離され所定の距離をもって移動することになる。すなわち、図6における境界Sは、少なくとも二つの隣接した荷物を分離する荷物分離部Sとして機能する。
 画像センサ20の撮像対象となる領域、すなわちセンシング領域は、搬送コンベヤ50の一部であるこの傾斜角の変わる部分を含む。よって、画像センサ(ここでは距離画像を取得するセンサ)20は、二つの荷物を個別に識別しつつ距離画像を取得し、これを受けた投影指示装置30のプロセッサ34は、センシング領域の内側に含まれる荷物分離部S(境界S)において、隣接した状態から分離した後の二つの荷物を個別に追跡することが可能となる。さらにプロセッサ34は各荷物別に投影画像を生成し、プロジェクタ40は、各荷物別に投影画像を投影することが可能となる。
 図7の搬送コンベヤ50は、搬送方向Xに沿って連続して配置された搬送速度の小さい第1の搬送コンベヤ50Aと、第1の搬送コンベヤ50Aより搬送速度の大きい第2の搬送コンベヤ50Bとを含む。よって、二つの搬送コンベヤの境界における荷物分離部Sにおいて、隣接した二つの荷物が、互いに引き離され所定の距離をもって移動することになる。よって、この搬送速度の変わる部分を撮像する領域(センシング領域)に含む画像センサ20は、二つの荷物を個別に識別しつつ距離画像を取得し、これを受けた投影指示装置30のプロセッサ34は、上記のような境界によって構成される搬送コンベヤ中の荷物分離部S(境界S)において、隣接した状態から分離した後の二つの荷物を個別に追跡することが可能となる。さらにプロセッサ34は各荷物別に投影画像を生成し、プロジェクタ40は、各荷物別に投影画像を投影することが可能となる。
 図8の搬送コンベヤ50は、搬送方向の先端に下方に傾斜した滑り台70を含む。よって、搬送コンベヤ50の先端であって、搬送コンベヤ50と滑り台70の境界における荷物分離部Sにおいて、先頭の荷物が滑り台70によって加速しながら下に落ちるため、隣接した二つの荷物が、互いに引き離され所定の距離をもって移動することになる。よって、この搬送コンベヤ50と滑り台70の境界を撮像する領域(センシング領域)に含む画像センサ20は、二つの荷物を個別に識別しつつ距離画像を取得し、これを受けた投影指示装置30のプロセッサ34は、上記のような境界によって構成される搬送コンベヤ中の荷物分離部S(境界S)において、隣接した状態から分離した後の二つの荷物を個別に追跡することが可能となる。さらにプロセッサ34は各荷物別に投影画像を生成し、プロジェクタ40は、各荷物別に投影画像を投影することが可能となる。
 本開示の搬送コンベヤは、上述した様な構成を有するとともに、画像センサ20は、二つの分離した荷物を個別に識別できるため、最終的に、プロジェクタ40は、各荷物別に投影画像を投影することが可能となり、作業の正確性および効率性が増すことになる。また、作業者が荷物を搬送コンベヤ上に置く際、荷物の置き方を気にすることなく、作業することが可能になる。
 荷物分離部Sの具体的な態様は、図6~図8のものには限定されず、隣接状態にある少なくとも二つの荷物を引き離し、距離画像センサの精度で切り分けられるようにすることができるものであればよい。
 以上、図面を参照して本開示に係る投影指示装置、荷物仕分けシステムおよび投影指示方法の実施形態について説明したが、本開示はかかる例に限定されない。当業者であれば、請求の範囲に記載された範疇内において、各種の変更例、修正例、置換例、付加例、削除例、均等例に想到し得ることは明らかであり、それらについても当然に本開示の技術的範囲に属するものと了解される。
 上記の実施の形態では、図6にて搬送コンベヤ50の傾斜角が変化することにより、速度変化が生じる前提で説明した。しかしながら、荷物と搬送コンベヤ50との間の摩擦係数が高い場合、傾斜角が変化しても荷物の搬送速度が変化しないことがある。そこで、特に搬送コンベヤ50に傾斜角の変化を持たせる構成では、傾斜角の差によって確実に荷物が引き離される境界S付近に画像センサ20を設置することが望ましい。この場合、荷物は、境界Sの先で再び隣接してしまうおそれがある。しかし、少なくとも境界Sにおいて複数の荷物が存在した事実が認識できていれば、下流において認識された1つの大きな荷物が隣接する複数の荷物を誤認識したものであることを検出し易くなる。
 上記の実施の形態では、図6にて搬送コンベヤ50は上り傾斜部51と下り傾斜部52を備えていたが、これに限られるものではない。上り傾斜部51から傾斜の無い部分に繋がる構造、あるいは、傾斜の無い構造から下り傾斜部52に繋がる構造にしてもよい。すなわち、画像センサ20から見て、搬送方向において下流に位置する荷物が上流に位置する荷物から離れる角度になるようであれば、傾斜の角度は問わない。
 上記の実施の形態では、図6~図8を用いて、搬送方向において下流に位置する荷物の搬送速度を上流に位置する荷物の搬送速度よりも大きくする例を説明した。しかし、これらの図に示した構造は一例に過ぎず、搬送速度が上流よりも下流にて大きくなるような構造であれば、他の構造であっても構わない。
 上記の実施の形態では、画像センサ20の撮像領域の内側に境界Sを配置したが、これに限られるものではない。境界Sにおける荷物の引き離しが速度の変化によって生じる場合、境界Sを通過した後も荷物が引き離された状態が続く。したがって、画像センサ20を境界Sの下流に配置しても、引き離された状態の荷物が認識できる可能性は高い。このような構造は、特に、搬送コンベヤ50が配置されている環境の都合上、境界S付近に画像センサ20を配置することが難しい場合に有用である。
 上記の実施の形態では、傾斜角もしくは搬送速度を変化させる箇所と、画像センサ20の配置箇所とを揃えていたがこれに限られるものではない。搬送コンベヤ50の任意の位置で傾斜角もしくは搬送速度を変化させるとしても良い。この場合でも、傾斜角も搬送速度も変化しない搬送コンベヤと比べて荷物が引き離された状態で搬送される可能性が高まる。
 上記の実施の形態において、搬送コンベヤ50の傾斜角もしくは搬送速度を変える箇所を複数設けてもよい。これにより、荷物が引き離される機会が増加するので、より確実に荷物を引き離すことが出来る。
 上記の実施の形態において、搬送コンベヤ50の傾斜角もしくは搬送速度を変える箇所で画像センサ20が取得する画像は距離画像であったが、これに限られるものではない。画像センサ20は、距離画像に替えて、または、距離画像と共に色画像を取得しても良い。上記の実施の形態では色画像に基づく荷物の追跡も行っているため、同色の荷物が隣接して搬送されている場合に追跡ミスが発生しやすくなる。そこで、荷物が切り分けられる境界Sもしくはその下流において色画像を取得することにより、追跡ミスを低減することができる。
 本開示は、隣接状態にある荷物を引き離し、荷物を個別に追跡することができる投影指示装置、荷物仕分けシステムおよび投影指示方法の提供に有用である。
10  ラベルリーダ
20  画像センサ
22  距離画像センサ
24  色画像センサ
30  投影指示装置
32  入力部
34  プロセッサ
36  メモリ
38  出力部
40  プロジェクタ
50  搬送コンベヤ
60  撮像投影装置
100 荷物仕分けシステム
P   荷物
S   荷物分離部(境界)

Claims (9)

  1.  搬送コンベヤと、
     前記搬送コンベヤの一部を含むセンシング領域を通過する荷物の距離画像を取得するセンサと、
     前記距離画像に基づき前記荷物に投影する投影画像を生成する投影指示装置と、を備え、
     前記搬送コンベヤは、前記センシング領域の内側に、隣接した荷物を分離する荷物分離部を備える、
     荷物仕分けシステム。
  2.  請求項1に記載の荷物仕分けシステムであって、前記荷物分離部は、前記搬送コンベヤにて搬送されるに荷物の傾斜角もしくは搬送速度の少なくとも一方を変えることによって、前記隣接した荷物を分離する、荷物仕分けシステム。
  3.  請求項1または2に記載の荷物仕分けシステムであって、
     前記搬送コンベヤは、搬送方向に沿って上り傾斜を構成する上り傾斜部と、前記搬送方向に沿って下り傾斜を構成する下り傾斜部を含み、
     前記荷物分離部が、前記上り傾斜部と前記下り傾斜部との境界によって構成される、
     荷物仕分けシステム。
  4.  請求項1または2に記載の荷物仕分けシステムであって、
     前記搬送コンベヤは、第1の搬送コンベヤと、前記第1の搬送コンベヤの搬送速度より大きい搬送速度を有する第2の搬送コンベヤを含み、
     前記荷物分離部が、前記第1の搬送コンベヤと前記第2の搬送コンベヤとの境界によって構成され、
     前記投影指示装置は、前記荷物分離部において分離した二つの荷物を個別に追跡する、
     荷物仕分けシステム。
  5.  請求項1または2に記載の荷物仕分けシステムであって、
     前記搬送コンベヤは、搬送方向の先端に滑り台を有し、
     前記荷物分離部が、前記搬送コンベヤと前記滑り台との境界によって構成される、
     荷物仕分けシステム。
  6.  請求項1から5のいずれか1項に記載の荷物仕分けシステムであって、
     前記投影指示装置は、隣接した荷物の各々に投影する投影画像を生成する、
     荷物仕分けシステム。
  7.  請求項1から6のいずれか1項に記載の荷物仕分けシステムは、更に、荷物に貼付されたラベルから荷物特定情報を読み取るラベルリーダと、前記投影画像を前記荷物に投影する画像投影装置と、を備える荷物仕分けシステム。
  8.  請求項1から請求項7のいずれか1項に記載の荷物仕分けシステムにおける、投影指示装置。
  9.  搬送コンベヤの一部を含むセンシング領域を通過する荷物の距離画像を取得し、
     前記距離画像に基づき前記荷物に投影する投影画像を生成する荷物仕分け方法であって、
     前記搬送コンベヤは、前記センシング領域の内側に、隣接した荷物を分離する荷物分離部を備える、
     荷物仕分け方法。
PCT/JP2018/025735 2017-09-27 2018-07-06 荷物仕分けシステム、投影指示装置および荷物仕分け方法 WO2019064802A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP18863277.2A EP3689793A4 (en) 2017-09-27 2018-07-06 PACKAGE SORTING SYSTEM, DEVICE FOR PROJECTED INSTRUCTIONS AND PACKAGE SORTING METHOD
US16/648,973 US20200282429A1 (en) 2017-09-27 2018-07-06 Package sorting system, projected instruction device, and package sorting method
JP2019517108A JPWO2019064802A1 (ja) 2017-09-27 2018-07-06 荷物仕分けシステム、投影指示装置および荷物仕分け方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-187199 2017-09-27
JP2017187199 2017-09-27

Publications (1)

Publication Number Publication Date
WO2019064802A1 true WO2019064802A1 (ja) 2019-04-04

Family

ID=65900981

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/025735 WO2019064802A1 (ja) 2017-09-27 2018-07-06 荷物仕分けシステム、投影指示装置および荷物仕分け方法

Country Status (4)

Country Link
US (1) US20200282429A1 (ja)
EP (1) EP3689793A4 (ja)
JP (1) JPWO2019064802A1 (ja)
WO (1) WO2019064802A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111992508A (zh) * 2020-07-27 2020-11-27 上海东普信息科技有限公司 快递包裹智能分拣与装车方法、装置、设备及存储介质
WO2021217923A1 (zh) * 2020-04-26 2021-11-04 广东弓叶科技有限公司 人机协作分选系统及其分选多类物料的方法
CN117952521A (zh) * 2024-03-13 2024-04-30 深圳市同兴高科工业自动化设备有限公司 一种物流分拣管理方法和系统

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112991423B (zh) * 2021-03-15 2024-06-11 上海东普信息科技有限公司 物流包裹的分类方法、装置、设备及存储介质
CN113305038B (zh) * 2021-06-02 2023-04-25 上海瑞示电子科技有限公司 安检行李/包裹分拣系统
CN114226257A (zh) * 2021-12-14 2022-03-25 创新奇智(上海)科技有限公司 一种包裹分离方法、装置、电子设备及存储介质
CN114535102A (zh) * 2022-02-16 2022-05-27 北京京东乾石科技有限公司 分拣系统、分拣方法、控制方法及存储介质
CN114669510B (zh) * 2022-03-21 2023-05-30 宜宾五粮液股份有限公司 适用于生产线的误触纠正系统及方法
CN115069567B (zh) * 2022-04-28 2023-08-08 广州艮业信息科技有限公司 一种基于直线交叉带的包裹分拣方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5133467A (en) * 1974-11-12 1976-03-22 Gunze Kk Hosotaino teipitsuchiokuridashisochi
JPH07165322A (ja) * 1993-12-13 1995-06-27 Sony Corp 製品計数装置及び製品集積装置
JP2004059230A (ja) * 2002-07-29 2004-02-26 Atsushi Sato 物品整列搬送装置
US7090134B2 (en) 2003-03-04 2006-08-15 United Parcel Service Of America, Inc. System for projecting a handling instruction onto a moving item or parcel
JP2008280156A (ja) * 2007-05-11 2008-11-20 Toyo Kanetsu Solutions Kk 扁平物品仕分け装置及び扁平物品切出し装置
WO2015145982A1 (ja) * 2014-03-28 2015-10-01 日本電気株式会社 情報処理装置、情報処理システム、物流システム、情報処理方法およびプログラム記憶媒体

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5740901A (en) * 1994-01-03 1998-04-21 Lockheed Martin Corporation Apparatus and method for handling flow of packages
EP1189707A4 (en) * 1999-04-30 2008-03-05 Siemens Ag SYSTEM FOR SEPARATING ELEMENTS

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5133467A (en) * 1974-11-12 1976-03-22 Gunze Kk Hosotaino teipitsuchiokuridashisochi
JPH07165322A (ja) * 1993-12-13 1995-06-27 Sony Corp 製品計数装置及び製品集積装置
JP2004059230A (ja) * 2002-07-29 2004-02-26 Atsushi Sato 物品整列搬送装置
US7090134B2 (en) 2003-03-04 2006-08-15 United Parcel Service Of America, Inc. System for projecting a handling instruction onto a moving item or parcel
JP2008280156A (ja) * 2007-05-11 2008-11-20 Toyo Kanetsu Solutions Kk 扁平物品仕分け装置及び扁平物品切出し装置
WO2015145982A1 (ja) * 2014-03-28 2015-10-01 日本電気株式会社 情報処理装置、情報処理システム、物流システム、情報処理方法およびプログラム記憶媒体

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3689793A4 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021217923A1 (zh) * 2020-04-26 2021-11-04 广东弓叶科技有限公司 人机协作分选系统及其分选多类物料的方法
CN111992508A (zh) * 2020-07-27 2020-11-27 上海东普信息科技有限公司 快递包裹智能分拣与装车方法、装置、设备及存储介质
CN117952521A (zh) * 2024-03-13 2024-04-30 深圳市同兴高科工业自动化设备有限公司 一种物流分拣管理方法和系统

Also Published As

Publication number Publication date
JPWO2019064802A1 (ja) 2020-09-03
US20200282429A1 (en) 2020-09-10
EP3689793A4 (en) 2020-11-18
EP3689793A1 (en) 2020-08-05

Similar Documents

Publication Publication Date Title
WO2019064802A1 (ja) 荷物仕分けシステム、投影指示装置および荷物仕分け方法
WO2017163714A1 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
WO2017163710A1 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
WO2017163709A1 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
WO2017163711A1 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
WO2019003685A1 (ja) 荷物判定装置、荷物仕分けシステムおよび荷物判定方法
JP7126066B2 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
WO2019003688A1 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
WO2019064805A1 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
JP7129616B2 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
JP7194884B2 (ja) 荷物仕分けシステム、投影指示装置、投影指示方法
JP7129614B2 (ja) 荷物認識装置、荷物仕分けシステムおよび荷物認識方法
WO2017163713A1 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
JP7045621B2 (ja) 荷物認識装置、荷物仕分けシステムおよび荷物認識方法
WO2019003686A1 (ja) 荷物認識装置、荷物仕分けシステムおよび荷物認識方法
JP2020114778A (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
WO2017163712A1 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2019517108

Country of ref document: JP

Kind code of ref document: A

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18863277

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2018863277

Country of ref document: EP

Effective date: 20200428