WO2019098119A1 - 管理サーバ、管理システム、管理方法、及びプログラム - Google Patents

管理サーバ、管理システム、管理方法、及びプログラム Download PDF

Info

Publication number
WO2019098119A1
WO2019098119A1 PCT/JP2018/041500 JP2018041500W WO2019098119A1 WO 2019098119 A1 WO2019098119 A1 WO 2019098119A1 JP 2018041500 W JP2018041500 W JP 2018041500W WO 2019098119 A1 WO2019098119 A1 WO 2019098119A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
monitoring target
sensor
management server
storage device
Prior art date
Application number
PCT/JP2018/041500
Other languages
English (en)
French (fr)
Inventor
谷本 好史
Original Assignee
村田機械株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 村田機械株式会社 filed Critical 村田機械株式会社
Priority to JP2019554187A priority Critical patent/JP6919718B2/ja
Priority to CN201880070308.XA priority patent/CN111295879B/zh
Priority to US16/761,276 priority patent/US11412183B2/en
Publication of WO2019098119A1 publication Critical patent/WO2019098119A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G1/00Storing articles, individually or in orderly arrangement, in warehouses or magazines
    • B65G1/02Storage devices
    • B65G1/04Storage devices mechanical
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B65CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65GTRANSPORT OR STORAGE DEVICES, e.g. CONVEYORS FOR LOADING OR TIPPING, SHOP CONVEYOR SYSTEMS OR PNEUMATIC TUBE CONVEYORS
    • B65G1/00Storing articles, individually or in orderly arrangement, in warehouses or magazines
    • B65G1/02Storage devices
    • B65G1/04Storage devices mechanical
    • B65G1/137Storage devices mechanical with arrangements or automatic control means for selecting which articles are to be removed
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16YINFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00IoT characterised by the purpose of the information processing
    • G16Y40/10Detection; Monitoring
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16YINFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00IoT characterised by the purpose of the information processing
    • G16Y40/30Control
    • G16Y40/35Management of things, i.e. controlling in accordance with a policy or in order to achieve specified objectives
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks
    • H04L67/1044Group management mechanisms 
    • H04L67/1046Joining mechanisms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/535Tracking the activity of the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/561Adding application-functional data or data for application control, e.g. adding metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay

Definitions

  • the present invention relates to a management server that manages information related to a system in which sensors are provided at a plurality of locations, a management system including the management server, a method of managing information in the management server, and a program that causes a computer to execute the management method.
  • a management server that manages information related to a system in which sensors are provided at a plurality of locations
  • a management system including the management server, a method of managing information in the management server, and a program that causes a computer to execute the management method.
  • Patent Document 1 discloses a management apparatus that manages an image captured by a camera provided in a transport vehicle in a transport vehicle system. In the management apparatus, the image is managed in association with time, and the image acquired at the designated time is displayed on the display unit.
  • An object of the present invention is to facilitate search for necessary information in a management server that manages information on a system provided with a plurality of sensors.
  • the management server is a server that manages information on a system in which sensors are provided at a plurality of places.
  • the management server comprises a storage device, a network interface, and a processor.
  • the network interface performs communication with an external device.
  • the processor acquires the monitoring target information and the sensor information via the network interface, and executes processing for storing the monitoring target information, the sensor information, and the time information in the storage device in association with each other.
  • the monitoring target information includes key information that specifies a monitoring target in the system, and additional information that is additional information related to the monitoring target.
  • the sensor information is data representing the state of the monitoring target acquired by the sensor based on the above key information.
  • Time information is information that represents the time when sensor information was acquired.
  • the processor acquires specification information from the external terminal via the network interface, combines the monitoring target information corresponding to the acquired specification information, and the sensor information associated with the monitoring target information, and combines the information. And output to an external terminal through a network interface.
  • the designation information is information on the monitoring target specified by the user using the external terminal displaying the monitoring target information.
  • sensor information acquired by a plurality of sensors provided in the system is stored in the storage device in association with monitoring target information which is information related to a monitoring target and time information when the sensor information is acquired. It is done. Also, the processor combines the monitoring target information corresponding to the designated information specified by the user and the sensor information associated with the monitoring target information to generate composite information, and provides the user via the external terminal. . This makes it possible to display the state of the monitoring target in detail as two different pieces of information (sensor information and monitoring target information) while facilitating the search for the sensor information on the desired monitoring target.
  • the sensor information may include image data obtained by capturing the state of the monitoring target.
  • the processor overlays the monitoring target information on the image data to generate composite information. Thereby, the state of the monitoring target can be visually displayed.
  • the image data may be moving image data.
  • the processor generates composite information so as to overlay and display the monitoring target information on the monitoring target at the timing when the monitoring target is shown in the moving image data. This makes it possible to visually recognize at which timing of the moving image data the desired monitoring target is shown.
  • the monitoring target may be an event generated in the system.
  • the moving image data may include only data portions obtained by photographing states before and after occurrence of the event to be monitored. This makes it easy to visually confirm the state of an event generated in the system.
  • the storage device may include a first storage device and a second storage device.
  • the first storage device is an external storage device accessible to the management server via the network interface.
  • the first storage device stores sensor information.
  • the processor stores the monitoring target information, the access information, and the time information in the second storage device in association with each other.
  • the access information represents the position in the first storage device of sensor information representing the state of the monitoring target indicated in the corresponding monitoring target information. Further, the processor combines the sensor information acquired from the first storage device using the access information and the monitoring target information to generate combined information.
  • the management server can manage a large amount of sensor information with the external first storage device.
  • the monitoring target may be a trouble that occurs in the system.
  • the processor may generate a trouble situation report as composite information using the monitoring target information related to the trouble and the sensor information associated with the monitoring target information. This makes it possible to know the details of the trouble that has occurred in the system.
  • the processor may combine the plurality of sensor information to generate combined information. Thereby, it is possible to generate composite information in which a plurality of pieces of sensor information on the monitoring target are summarized.
  • a management system is a management system that manages a system in which sensors are provided at a plurality of locations.
  • This management system comprises a host device that controls the system, and a management server that manages information about the system.
  • the management server has a storage device, a network interface, and a processor.
  • the network interface performs communication with an external device.
  • the processor acquires the monitoring target information and the sensor information via the network interface, and executes processing for storing the monitoring target information, the sensor information, and the time information in the storage device in association with each other.
  • the monitoring target information includes key information that specifies a monitoring target in the system, and additional information that is additional information related to the monitoring target.
  • the sensor information is data representing the state of the monitoring target acquired by the sensor based on the above key information.
  • Time information is information that represents the time when sensor information was acquired.
  • the processor acquires specification information from the host apparatus via the network interface, combines the monitoring target information corresponding to the acquired specification information, and the sensor information associated with the monitoring target information, and combines the information. Are generated and output to the higher-level device via the network interface.
  • the designation information is information on the monitoring target specified by the user using the external terminal displaying the monitoring target information.
  • the state of the monitoring target can be displayed in detail as two different pieces of information (the sensor information and the monitoring target information) while facilitating the search for sensor information on a desired monitoring target.
  • a management method is a method of managing information in a management server that is provided with a storage device and manages information related to a system in which sensors are provided at a plurality of locations.
  • the management method comprises the following steps.
  • ⁇ Monitor target information including key information specifying the monitor target in the system and additional information which is additional information related to the monitor target, and sensor information representing the status of the monitor target acquired based on the key information by the sensor Step to get.
  • combining the monitoring target information corresponding to the designated information and the sensor information associated with the monitoring target information to generate combined information, and outputting the combined information to the external terminal.
  • the state of the monitoring target can be displayed in detail in two different pieces of information (the sensor information and the monitoring target information) while facilitating the search for the sensor information on the desired monitoring target.
  • the management server that manages information on a system provided with a plurality of sensors can display the status of the monitoring target in detail while facilitating the retrieval of necessary information.
  • the figure which shows the structure of an automatic warehouse system The figure which shows an example of arrangement
  • the enlarged view of the warehousing station and the delivery station vicinity in the automatic warehouse which handles the baggage of a long thing.
  • the flowchart which shows an example of the management method of sensor information in case the package etc. which are handled in a stacker crane become a monitoring object.
  • the flowchart which shows an example of the management method of sensor information at the time of making a shelf into monitoring object.
  • the flowchart which shows an example of the management method of the sensor information in making the monitoring object the error which generate
  • the flowchart which shows an example of the management method of the sensor information acquired by the measuring device.
  • the flowchart which shows the presentation method of the sensor information managed by the management server.
  • generated by combining several sensor information The flowchart which shows the presentation method of the operating condition of the apparatus of an automatic warehouse system.
  • the flowchart which shows the method of producing a trouble situation report by the sensor information managed by the management server. Diagram showing an example of a report. The figure which shows an example of a trouble recovery procedure manual. The flowchart which shows an example of the management method of sensor information at the time of making the monitoring object the package etc. which are handled by the warehousing station which concerns on 2nd Embodiment.
  • the management server of the present embodiment is a server that manages information related to an automatic warehouse system 100 (an example of a system) that performs large-scale storage, transfer, storage, and the like of packages A. Therefore, first, the configuration of the automatic warehouse system 100 in which information is managed by the management server will be described using FIG.
  • FIG. 1 is a diagram showing the configuration of an automatic warehouse system.
  • the automatic warehouse system 100 includes a plurality of automatic warehouses 1a to 1g.
  • the plurality of automatic warehouses 1a to 1g perform storage, transfer, storage, and the like of the package A.
  • the four automatic warehouses 1a to 1d existing in the lower part in FIG. 1 store the packages A in the buckets BK, and carry out storage, transfer, and storage of the buckets BK.
  • the two automatic warehouses 1e and 1f present above store the package A in the pallet PL, and carry out storage, transfer, and storage of the pallet PL.
  • one automatic warehouse 1g located above it carries in, out, transfers and stores long-width packages A (sometimes called "long").
  • the configuration of the plurality of automatic warehouses 1a to 1g will be described in detail later.
  • the automatic warehouse system 100 includes weighing devices 3a and 3b.
  • the weighing devices 3a and 3b are scales arranged in an area different from the area in which the plurality of automatic warehouses 1a to 1g are arranged in the area in which the automatic warehouse system 100 is installed, and for weighing the package A.
  • cameras CA 1 and CA 2 are provided at positions in the height direction opposite to the platform on which the load A of the weighing devices 3 a and 3 b is placed.
  • the cameras CA1 and CA2 are devices having a sensor such as a CCD sensor for capturing an image, for example.
  • FIG. 2 is a view showing an example of the arrangement of the camera with respect to the weighing device.
  • the image data (still image, moving image) of the package A being weighed can be acquired by the weighing devices 3a and 3b.
  • the light LI is provided in the weighing devices 3a and 3b.
  • the light LI irradiates the package A during weighing with light for acquiring image data with the cameras CA1 and CA2.
  • the light LI is, for example, an LED light.
  • the weighing results of the package A are transmitted to the host device 51 (described later) via the terminals TA1 and TA2 connected to the respective weighing devices 3a and 3b.
  • the automatic warehouse system 100 includes a system control management unit 5 (an example of a management system).
  • the system control management unit 5 is a computer system that executes control of the plurality of automatic warehouses 1a to 1g and management of information handled by the automatic warehouse system 100. The configuration of the system control management unit 5 will be described in detail later.
  • an access point AP is provided near the end of each of the automatic warehouses 1a to 1g.
  • the access point AP is, for example, a relay for wireless communication. Since the stacker cranes 13 (described later) of the respective automated warehouses 1a to 1g move along the path, a camera provided on the stacker crane 13 communicates with the system control management unit 5 via the access point AP.
  • the access point AP is disposed at the end of the automated warehouses 1a to 1g. Thereby, the facility of the wiring in the automatic warehouse system 100 can be made inexpensive.
  • cameras CA3 to CA5 may be provided at the entrance of the area in which the plurality of automatic warehouses 1a to 1g are arranged.
  • the cameras CA3 to CA5 are devices having a sensor for capturing an image, such as a CCD sensor, for example.
  • the cameras CA3 to CA5 can look over the entire stacker crane of each of the automatic warehouses 1a to 1g by photographing the images of the plurality of automatic warehouses 1a to 1g from the above-mentioned entrance.
  • FIG. 3 is a diagram showing the configuration of an automatic warehouse.
  • the dimensions of racks (described later) on which the luggage A and the like are placed differ depending on the dimensions of the packages A, buckets BK, and pallets PL handled by the respective automated warehouses;
  • the basic configuration is the same except that the arrangement of the delivery station 17 is different. Therefore, the configuration of the automatic warehouses 1a to 1g will be described below by taking the automatic warehouse 1e as an example of loading and unloading, transfer, and storage of the pallet PL storing the packages A.
  • the automatic warehouse 1e has racks 11a and 11b.
  • the racks 11a and 11b are facilities for storing the pallet PL storing the luggage A.
  • the racks 11a and 11b are disposed along the traveling direction of the stacker crane 13 (the left and right direction in FIG. 3).
  • the rack 11a is disposed on the upper side of the drawing as viewed from the stacker crane 13, and the rack 11b is disposed on the lower side of the drawing.
  • Each of the racks 11a and 11b has a plurality of shelves 111a and 111b.
  • the pallet PL is stored in the racks 11a and 11b by being placed on the shelves 111a and 111b.
  • the automated warehouse 1 e has a stacker crane 13.
  • the stacker crane 13 is a device for transporting the pallet PL between the plurality of shelves 111a and 111b, the storage station 15, and / or the delivery station 17. Specifically, the stacker crane 13 is movable along a guide rail 131 provided along the extension direction of the racks 11a and 11b.
  • the stacker crane 13 includes a traveling carriage 133, a lifting platform 135, and a transfer device 137.
  • the traveling carriage 133 is a device for moving the lifting platform 135 (a mast (not shown) mounted thereon) along the guide rails 131.
  • the traveling carriage 133 includes, for example, a wheel rotating on the guide rail 131 and a motor rotating the wheel.
  • the lifting platform 135 is mounted on a mast provided on the traveling carriage 133, and moves up and down in the height direction by moving along the mast. For example, by moving a chain that suspends the lifting platform 135 by rotating a sprocket connected to the output rotation shaft of the motor, the lifting platform 135 moves up and down along the mast.
  • the transfer device 137 is mounted on the elevation platform 135, and moves in the height direction by the elevation of the elevation platform 135. Further, the transfer device 137 moves in the horizontal direction by the traveling carriage 133 moving along the guide rail 131.
  • the transfer device 137 transfers the pallet PL from the stacker crane 13 to the racks 111a and 111b of the racks 11a and 11b, the storage station 15, or the delivery station 17, or in the opposite direction.
  • the transfer device 137 is, for example, a slide fork that can reach the shelves 111 a and 111 b, the storage station 15, and the delivery station 17 by expanding and contracting in a direction perpendicular to the traveling direction of the traveling carriage 133.
  • the stacker crane 13 has a controller (not shown) for controlling the traveling carriage 133, the elevator platform 135, and the transfer device 137 based on the command for loading and unloading of the pallet PL received from the system control management unit 5.
  • a controller not shown for controlling the traveling carriage 133, the elevator platform 135, and the transfer device 137 based on the command for loading and unloading of the pallet PL received from the system control management unit 5.
  • the automatic warehouse 1 e has a receiving station 15.
  • the loading station 15 is disposed on the side where the rack 11 a is disposed with respect to the stacker crane 13.
  • the receiving station 15 is a conveyor for receiving the pallet PL containing the package A.
  • the warehousing station 15 has a controller (not shown) that controls the warehousing station 15 based on the command received from the system control management unit 5.
  • the storage station 15 is provided with a small controller (for example, PLC (Programmable Logic Controller)).
  • the automatic warehouse 1 e has a delivery station 17.
  • the delivery station 17 is disposed on the side where the rack 11 b is disposed with respect to the stacker crane 13.
  • the delivery station 17 is a conveyor for delivering the pallet PL containing the package A.
  • the delivery station 17 has a controller (not shown) that controls the delivery station 17 based on the command received from the system control management unit 5.
  • FIG. 4A is an enlarged view of the vicinity of the loading station and the unloading station in an automatic warehouse handling buckets.
  • the drawing on the upper side of the drawing shows a top view near the loading station 15 'and the unloading station 17'
  • the drawing on the lower side of the drawing shows a side view near the loading station 15 'and the unloading station 17'.
  • FIG. 4B is an enlarged view of the vicinity of the loading station and the unloading station in an automatic warehouse handling pallets.
  • the drawing on the upper side of the drawing shows a top view near the loading station 15 and the unloading station 17, and the drawing on the lower side of the drawing shows a side view near the loading station 15 and the discharging station 17.
  • FIG. 4C is an enlarged view of the vicinity of the loading station and the unloading station in an automatic warehouse that handles long packages.
  • the upper side of the drawing shows the top view near the loading station and the unloading station (conveyor 15 ′ ′), and the lower side of the drawing shows the side view near the loading station and the unloading station (conveyor 15 ′ ′).
  • the packages A are placed on a conveyor having the functions of both the warehousing station 15 and the delivery station 17 using a forklift FL, for example, or from the conveyor Be unloaded.
  • a forklift FL for example, or from the conveyor Be unloaded.
  • the identification information of the package A is read in advance using a reader (for example, a barcode reader) and transmitted to the upper device.
  • the host device can grasp which package A is to be stored in the automated warehouse 1g.
  • each of the automated warehouses 1a to 1g is a transport state of the luggage A and the like in the stacker crane 13, a storage state of the luggage A and the like in the racks 111a and 111b, a bucket BK handled by the automated warehouses 1a to 1g, a pallet PL, and luggage It has a sensor for monitoring the state of A, etc.
  • FIG. 5A is a diagram showing an arrangement position of sensors in a stacker crane of an automatic warehouse that handles buckets.
  • FIG. 5B is a diagram showing an arrangement position of sensors in a stacker crane of an automatic warehouse that handles pallets.
  • FIG. 5C is a view showing an arrangement position of sensors in a stacker crane of an automatic warehouse that handles long packages.
  • cameras CA6 to CA8 are arranged near the entrance of the loading station 15.
  • the cameras CA6 to CA8 are devices having a sensor such as a CCD sensor for capturing an image. Also, the cameras CA6 to CA8 always obtain image data (moving image) during operation, and when a predetermined signal is input, output the image data of a predetermined time before and after the timing of the input of the signal. Have.
  • the light LI is provided in the vicinity of each of the cameras CA6 to CA8.
  • the light LI is, for example, an LED light that emits light to the shooting targets of the cameras CA6 to CA8.
  • the arrangement positions of the cameras CA6 to CA8 differ according to the sizes of the bucket BK, the pallet PL, and the package A handled by the automatic warehouses 1a to 1g.
  • one camera CA6 is disposed at the center in the width direction of the storage station 15 '.
  • the warehousing route of the warehousing station 15 ' is provided with a reader RD for reading identification information of the bucket BK.
  • Identification information and the like read by the reader RD are output to a sensor such as the host device 51 and the camera CA6.
  • the host device 51 can grasp which bucket BK has been received at the receiving station 15 '.
  • a sensor such as the camera CA 6 can grasp the acquisition timing of data regarding the bucket BK.
  • the reader RD may be provided in the delivery route of the delivery station 17 '.
  • the warehousing route of the warehousing station 15 is provided with a reader RD for reading the identification information of the pallet PL.
  • Identification information and the like read by the reader RD are output to a sensor such as the host device 51 and the camera CA7.
  • the higher-level device 51 can grasp which pallet PL has been received at the receiving station 15.
  • a sensor such as the camera CA 7 can grasp the acquisition timing of data regarding the pallet PL.
  • a pair of cameras CA8 are provided in the width direction of the conveyor 15 ′ ′ and a pair of cameras also in the length direction of the packages A.
  • CA8 is provided. That is, in the automatic warehouse 1g, four cameras CA8 are provided at the storage station 15.
  • a reader RD for reading the identification information of the package A is provided on the path of the conveyor 15 ′ ′.
  • Identification information and the like read by the reader RD are output to a sensor such as the host device 51 and the camera CA8.
  • the host device 51 can grasp which package A is received by the conveyor 15 ′ ′.
  • sensors, such as camera CA8, can grasp
  • the cameras CA6 to CA8 include the bucket BK, the pallet PL, and the package A.
  • the whole image can be acquired as image data.
  • the cameras CA6 to CA8 can communicate with the system control management unit 5, and can transmit the acquired image data to the system control management unit 5. Communication between the cameras CA6 to CA8 and the system control management unit 5 may be performed by a wired network, or may be performed by a wireless network via an access point AP or the like.
  • cameras are also provided to the stacker cranes 13 of the automated warehouses 1a to 1g.
  • the state of the bucket BK, the pallet PL, and the package A being transported by the stacker crane 13 (for example, the load collapse, the protrusion of the package A, etc.) can be grasped.
  • the stacker crane 13 stops on the predetermined racks 111a and 111b it is possible to monitor the state of the luggage A of the racks 111a and 111b.
  • CA9 is provided.
  • the transfer device 137 can simultaneously mount (transfer to two shelves 111 a and 111 b) the two buckets BK. Two units are provided to correspond to A light LI is provided at the end of the bucket BK and the lifting platform 135 (transfer device 137).
  • the rack 111a and 111b of the pallet PL is mounted.
  • the camera CA10 is provided directly above the position to be the near end.
  • a light LI is provided at a position corresponding to the end of the pallet PL and at an end of the lifting platform 135.
  • cameras CA11 are provided in the vicinity of the four corners of the transfer device 137 on the elevator platform 135 of the stacker crane 13 of the automatic warehouse 1g that handles long packages A.
  • a light LI is provided in the vicinity of the camera CA11 and at an end portion of the lifting platform 135.
  • the cameras CA9 to CA11 are fisheye cameras having a sensor such as a CCD sensor for capturing an image, for example.
  • the cameras CA9 to CA11 constantly acquire image data (moving images) during operation, and when a predetermined signal is input, the image data up to a predetermined time before the current time from the timing at which the signal is input It has a function to output.
  • the cameras CA9 to CA11 transmit the acquired image data to the system control management unit 5 by wireless communication via the access point AP.
  • the light LI is, for example, an LED light.
  • a camera provided in the automatic warehouse system 100 including the cameras CA1 to CA11 will be referred to as a camera CA.
  • another sensor SE is provided in each of the automatic warehouses 1a to 1g.
  • a sensor such as an acceleration sensor for detecting the magnitude of vibration is provided on the elevator platform 135 of the stacker crane 13 of each of the automated warehouses 1a to 1g.
  • a sensor such as an acceleration sensor for detecting the magnitude of vibration is provided on the elevator platform 135 of the stacker crane 13 of each of the automated warehouses 1a to 1g.
  • a sensor such as a temperature and humidity sensor may be provided to measure the state of the surrounding environment (for example, temperature, humidity, etc.). This makes it possible to know, for example, whether the package A or the like is stored under an appropriate environment.
  • each of the automatic warehouses 1a to 1g may be provided with a sensor (for example, a microphone or the like) for measuring the magnitude of the sound generated in the automatic warehouses 1a to 1g.
  • FIG. 6 is a diagram showing the configuration of the system control management unit.
  • the system control management unit 5 outputs a command for controlling the plurality of automated warehouses 1a to 1g from the host device 51.
  • the command includes information on which package A is to be stored in which shelf 111a, 111b and which package A is to be output from which shelf 111a, 111b.
  • the stacker cranes 13 of the respective automated warehouses 1a to 1g are controlled based on the command.
  • system control management unit 5 may be a camera CA, a sensor SE, a reader RD, and / or various terminals (for example, terminals TA1 and TA2 connected to the weighing devices 3a and 3b, and a bucket BK) provided in the automatic warehouse system 100.
  • terminals TA1 and TA2 connected to the weighing devices 3a and 3b, and a bucket BK
  • the information acquired at the device or the terminal is received and managed from the terminal TA3 and the like of the automatic warehouses 1a to 1d handling the information.
  • the system control management unit 5 has a host device 51 (an example of an external terminal).
  • the higher-level device 51 is a terminal that manages and controls the package A handled in the automatic warehouse system 100 and each component of the automatic warehouse system 100.
  • the system control management unit 5 has a management server 53.
  • the management server 53 is a server that manages information acquired by the camera CA provided in the automatic warehouse system 100, the sensor SE, and the like. Further, the management server 53 combines information managed by itself with respect to the monitoring target designated by the user in the upper apparatus 51 to generate combined information FI, and transmits the combined information FI to the upper apparatus 51.
  • the host device 51 includes a processor 511, a RAM 512, a ROM 513, a network interface 514, a display 515, an input interface 516, and a storage device 517.
  • a computer system having FIG. 7 is a diagram showing the configuration of a host device.
  • the processor 511 executes a program stored in the storage device 517 or the like, and performs various information processing performed in the host device 51. For example, the processor 511 generates an instruction to control the automatic warehouses 1a to 1g based on management control information WM1 (described later) stored in the storage device 517. The command is transmitted via the network interface 514 to the controllers of the automated warehouses 1a to 1g, the controllers of the loading station 15 and the unloading station 17, and the like.
  • management control information WM1 described later
  • the processor 511 receives a specification from the user for a monitoring target whose status is to be displayed on the display 515.
  • Information on a monitoring target for which a user-designated state is to be displayed is called "designated information”.
  • the processor 511 receives the composite information FI generated by the management server 53 with respect to the state of the monitoring target indicated in the designation information, and executes a process of causing the display 515 to display the composite information FI.
  • the RAM 512 temporarily stores necessary information such as a program stored in the storage device 517.
  • the ROM 513 stores programs for controlling the host device 51, settings, and the like.
  • the network interface 514 performs communication with an external terminal and / or device.
  • the network interface 514 is, for example, an Ethernet (registered trademark) card which communicates with an external terminal and / or device by wired communication, and / or a wireless LAN interface which communicates with an external terminal and / or device by wireless communication. It is.
  • the display 515 is, for example, a display such as a liquid crystal display or an organic EL display that displays various types of information about the host device 51.
  • the input interface 516 is an input device such as a keyboard, a mouse, and a touch panel that receives an input from the user.
  • the storage device 517 is, for example, a storage device such as a hard disk or an SSD that stores a program executed by the higher-level device 51 and the management control information WM1.
  • the management control information WM1 is a collection of various information for managing and controlling the automatic warehouse system 100. Specifically, the management control information WM1 identifies the identification information of the package A, the bucket BK, the pallet PL handled by the automatic warehouse system 100, and the shelves 111a and 111b of the storage destination such as the package A, the bucket BK, and the pallet PL. Information, identification information of shelves 111a and 111b for storing luggage A to be delivered, bucket BK, pallet PL and the like, and the like are included. Further, the management control information WM1 includes, for the package A, the date of receipt of the package A, the part number of the package A, the item name, the shipping destination, the shipping date, the number of items, and the like.
  • the management control information WM1 is information on the arrangement position of each component of the automatic warehouse system 100, for example, the stacker crane 13, the racks 111a and 111b, the storage station 15, and the delivery station 17 of the automatic warehouses 1a to 1g, camera CA, It includes information on the mounting position of the sensor SE or the like, and information on the state of these components (for example, operation information of the automatic warehouse system 100, transport information of the storage and withdrawal). Information on the attachment position of the camera CA, the sensor SE, etc. is acquired from the management server 53, and is associated with the management control information WM1.
  • the higher-level device 51 uses the management control information WM1 stored in the storage device 517 to handle packages A and the like handled by the automatic warehouse system 100, and components of the automatic warehouse system 100. Can perform management. Further, the upper-level device 51 can generate a command to control each component of the automatic warehouse system 100 based on the above-mentioned management control information WM1.
  • the management server 53 is a computer system having a processor 531, a RAM 532, a ROM 533, a network interface 534, and a storage device.
  • FIG. 8 is a diagram showing the configuration of a management server.
  • the processor 531 executes a program stored in the second storage device 536 or the like, and performs various information processing performed in the management server 53. Specifically, the processor 531 receives the access information AI representing the location of the sensor information SI representing the state of the monitoring target in the first storage device 535. Thereafter, a time indicating the time when the information on the monitoring target (referred to as monitoring target information MI), the access information AI described above, and the sensor information SI present at the position indicated in the access information AI is acquired The information TI is associated with each other to form one record, and is stored in the monitoring target database DB.
  • monitoring target information MI a time indicating the time when the information on the monitoring target
  • the information TI is associated with each other to form one record, and is stored in the monitoring target database DB.
  • the processor 531 When the processor 531 receives specification information from the higher-level device 51, the processor 531 monitors the monitoring target information MI corresponding to the specification information, that is, monitoring target information MI that matches the information on the monitoring target indicated in the specification information. Search from database DB. Thereafter, using the access information AI associated with the monitored object information MI found by searching, the sensor information SI designated by the designated information is acquired, and the sensor information SI and the monitored object information MI found by the search are obtained. And to generate composite information FI. The generated composite information FI is transmitted via the network interface 534 to the upper apparatus 51 that has transmitted the designation information.
  • the operation of the management server 53 at the time of storing the above record in the monitoring target database DB and the operation of the management server 53 when the designation information is received from the upper apparatus 51 will be described in detail later.
  • the RAM 532 temporarily stores necessary information such as a program stored in the second storage device 536.
  • the ROM 533 stores programs for controlling the management server 53, settings, and the like.
  • the network interface 534 performs communication with an external terminal and / or device.
  • the network interface 534 is, for example, an Ethernet (registered trademark) card that communicates with an external terminal and / or device by wired communication, and / or a wireless LAN interface that communicates with an external terminal and / or device by wireless communication, etc. It is.
  • the storage device of the management server 53 is configured of a first storage device 535 and a second storage device 536.
  • the first storage device 535 downloads the image data acquired by the camera CA and the measurement data acquired by the sensor SE via the network interface 5351, and stores the downloaded data as sensor information SI.
  • the first storage device 535 is, for example, a storage device connected to a network such as a NAS (Network Attached Storage) and used.
  • a plurality of first storage devices 535 are provided.
  • one first storage device 535 may be associated with a particular camera CA and / or sensor SE, that is, data in a particular first storage device 535
  • the camera CA and / or the sensor SE that can store the image may be fixed.
  • each camera CA and / or sensor SE appropriately selects the first storage device 535 having an appropriate free space from the plurality of first storage devices 535, and the data is stored in the selected first storage device 535. It may be sent.
  • the first storage device 535 can be accessed via the network interface 5351 with a computer system (a system including the processor 531, the RAM 532, the ROM 533, the network interface 534, etc.) that configures the management server 53.
  • a computer system a system including the processor 531, the RAM 532, the ROM 533, the network interface 534, etc.
  • the computer system configuring the management server 53 can obtain the sensor information SI stored in the first storage device 535 via the network interfaces 534 and 5351.
  • the management server 53 configures the second storage inside the computer system configuring the management server 53. Even if the storage capacity of the device 536 is not large, a large amount of sensor information SI can be managed by the external first storage device 535.
  • the first storage device 535 can be added according to the increase of the sensor information SI. As a result, it is possible to prevent the occurrence of a situation where the sensor information SI can not be stored due to the lack of capacity of the storage device.
  • the second storage device 536 is a storage device inside the computer system that constitutes the management server 53.
  • the second storage device 536 is, for example, a storage device such as a hard disk or an SSD that stores a program executed by the management server 53 and the monitoring target database DB. Further, the second storage device 536 stores sensor management information SMI and storage device management information HMI in addition to the above-described program and database.
  • the sensor management information SMI is information for managing the camera CA and the sensor SE provided in the automatic warehouse system 100.
  • the sensor management information SMI includes, for example, information for accessing the camera CA and the sensor SE, settings of the camera CA and the sensor SE, identification information of the first storage device 535 storing the data acquired by the camera CA and the sensor SE, etc. including.
  • a network address of the camera CA and the sensor SE for example, a network address of the camera CA and the sensor SE, an identification name (host name) on the network, a sequence number, an ID for accessing the camera CA and the sensor SE Password, etc.
  • an identification name host name
  • a sequence number for accessing the camera CA and the sensor SE Password
  • settings of the camera CA and the sensor SE include data acquisition conditions.
  • the management server 53 updates the sensor management information SMI, and the updated sensor management information SMI is stored in the first storage device. 535, and notify the controller of the automatic warehouses 1a to 1g.
  • the storage device management information HMI is information for managing the first storage device 535 described above.
  • the storage device management information HMI includes, for example, a network address of the first storage device 535, an identification name (host name) on the network, a sequence number, an available capacity, version information, and the like.
  • the management server 53 updates the storage device management information HMI, and the updated storage device management information HMI is stored in the camera CA. And notify the sensor SE etc.
  • the monitoring target database DB is a database for managing information on the monitoring target. As shown in FIG. 9, one record of the monitoring target database DB has monitoring target information MI, access information AI, and time information TI. In one record, these pieces of information are associated with one another.
  • FIG. 9 is a view showing an example of the data structure of one record stored in the monitoring target database.
  • the monitoring target information MI is information on the monitoring target.
  • the monitoring target information MI includes key information KI and additional information ADI.
  • the key information KI is information for specifying a monitoring target.
  • the monitoring targets managed by the management server 53 are the package A, events (errors) that occur in the automatic warehouse system 100, and the shelves 111a and 111b.
  • the key information KI includes, for example, identification information of the package A, the bucket BK, or the pallet PL, an error type generated in the automatic warehouse system 100, identification information of the shelves 111a and 111b, and the like.
  • the key information KI serves as a trigger for the camera CA and / or the sensor SE to acquire the sensor information SI.
  • the additional information ADI is additional information on the monitoring target indicated in the key information KI. If the key information KI is identification information of the package A, the bucket BK, or the pallet PL, the additional information ADI is, for example, the part number, item name, shipping destination, shipping date of the package A stored in the bucket BK or pallet PL. , Identification information of the storage shelves 111a and 111b, and the like.
  • the additional information ADI is, for example, being transported by a component (the stacker crane 13, the storage station 15, etc.) of the automatic warehouse system 100 in which the error occurred.
  • the additional information ADI is, for example, identification information of the package A stored in the shelf 111a, 111b indicated by the key information KI, the bucket BK, or the pallet PL, It is the product number, product name, shipping destination, shipping date, etc. of the package A.
  • the additional information ADI includes information as to which camera CA or sensor SE acquired the sensor information SI acquired based on the associated key information KI, the installation position of the camera CA or sensor SE, and the like. It may be
  • the access information AI is information indicating the position of the sensor information SI in the first storage device 535.
  • the access information AI includes, for example, the host name, network address, and / or sequence number of the first storage device 535 storing the sensor information SI, the relative path and directory name in the first storage device 535, It is information including the file name of the sensor information SI.
  • the access information AI may additionally include additional information related to the sensor information SI, for example, file types (moving image data, still image data, regular files, etc.) and the file size of the sensor information SI.
  • the time information TI is information representing the time when the sensor information SI is acquired.
  • the time information TI may be a time when the camera CA that has acquired the sensor information SI or the sensor SE outputs the time information TI.
  • the time indicated by the time server in operation of the management server 53 may be used.
  • the time of the time server at which the management server 53 is operating is notified, for example, to the first storage device 535, the sensor SE, and / or the camera CA. Thereby, the management server 53, the first storage device 535, the sensor SE and / or the camera CA can use a common time. As a result, it is possible to avoid the occurrence of time lag for each of these devices.
  • the management server 53 links the sensor information SI acquired from the plurality of cameras CA and sensors SE provided in the automatic warehouse system 100 with the information managed by the upper apparatus 51, It can manage centrally.
  • the management server 53 may have an input interface 537 for receiving input from the user.
  • the input interface 537 is, for example, an input device such as a keyboard, a mouse, and a touch panel.
  • the user can directly manage the management server 53 using the input interface 537.
  • management server 53 may have a display 538.
  • the display 515 is, for example, a display such as a liquid crystal display or an organic EL display that displays various information on the management server 53. Thereby, the user can manage the management server 53 while referring to the information displayed on the display 538, for example.
  • the management server 53 even if the management server 53 does not have the above-described input interface 537 and / or the display 538, for example, using a terminal accessible via the network interface 534, the management server 53 is referred to while referring to information on the management server 53. It can manage.
  • the sensor information SI transmitted to the management server 53 is stored in the first storage device 535.
  • the management server 53 acquires, as the access information AI, at which position of the first storage device 535 the sensor information SI is stored, for example, from the camera CA or the sensor SE that has transmitted the sensor information SI.
  • the camera CA and the sensor SE when transmitting the key information KI together with the sensor information SI, the camera CA and the sensor SE further manage the list of storage positions (file paths) of the sensor information SI in the first storage device 535. May be sent to 53.
  • the management server 53 searches the first storage device 535 using the key information KI received together with the acquired sensor information SI, thereby finding the position where the sensor information SI is stored. , And may be acquired as access information AI. As a result, for example, replacement of the first storage device 535 and / or a decrease in the number of installations may occur, and appropriate access information AI can be acquired even when the storage destination of the sensor information SI is changed.
  • the management server 53 acquires, from the higher-level device 51, additional information ADI which is additional information about the monitoring target indicated in the acquired key information KI.
  • the management server 53 manages the key information KI, the additional information ADI, the access information AI, and the time information TI representing the time when the sensor information SI indicated by the access information AI is acquired as one record in association with one another. Store in database DB.
  • the management method of the sensor information SI when the sensor information SI is acquired by the warehousing station 15, 15 'and the conveyor 15' ', and the sensor information SI when the sensor information SI is acquired by the stacker crane 13 The management method of the sensor information SI in the management server 53 will be described in more detail, taking as an example a management method of the sensor information SI when the sensor information SI is acquired by the weighing devices 3a and 3b.
  • FIG. 10 is a flowchart showing an example of a method of managing sensor information in the case where a package or the like handled at the warehousing station is to be monitored.
  • the pallet PL and the package A stored in the pallet PL
  • the pallet PL is to be monitored at the warehousing station 15 of the automatic warehouses 1e and 1f handling the pallet PL will be described as an example.
  • the worker W reads the identification information of the package A stored in the pallet PL using the reader RD or the like. Further, the worker W reads the identification information of the pallet PL containing the package A using the reader RD or the like. Thereby, the identification information of the pallet PL and the identification information of the package A stored in the pallet PL are associated.
  • the reader RD transmits the identification information of the pallet PL and the identification information of the package A stored in the pallet PL associated with the identification information to the upper apparatus 51.
  • the reader RD When the pallet PL containing the package A passes a reader RD provided at the loading station 15, the reader RD reads identification information of the passed pallet PL.
  • the reader RD transmits the read identification information of the pallet PL as key information KI to a small controller provided in the storage station 15 (step S1).
  • the small-sized controller of the receiving station 15 having received the identification information of the pallet PL as the key information KI transmits the received identification information of the pallet PL to the main controller of the receiving station 15 (step S2).
  • the main controller transmits the received identification information of the pallet PL to the upper apparatus 51 (step S3).
  • the upper apparatus 51 can grasp that a specific pallet PL is received at the storage station 15, and identification information of the pallet PL.
  • the small-sized controller of the storage station 15 transmits the identification information of the pallet PL received in step S1 as key information KI to the controller of the camera CA7 (step S4).
  • the controller of the camera CA7 having received the key information KI transmits a message (ACK signal) to the small controller of the storage station 15 when the camera CA7 can acquire image data (step S5). .
  • the small controller of the storage station 15 receives the above-mentioned ACK signal and then the camera CA 7 receives the pallet PL in the storage station 15.
  • An instruction (acquisition instruction) for acquiring the state of passing through as the image data is transmitted (step S6).
  • the controller transmits the above acquisition command to the camera CA7.
  • the small-sized controller of the storage station 15 transmits a shutter signal for acquiring a still image to the camera CA7 as the above acquisition command.
  • the camera CA7 can acquire a still image showing the pallet PL passing through the camera CA7 as the sensor information SI by acquiring the image data (still image) at the moment when the shutter signal is received.
  • the small-sized controller of the warehousing station 15 receives predetermined
  • a drive recorder signal hereinafter referred to as a drive recording signal
  • the camera CA7 stops the recording of the moving image after receiving the drive recording signal, and can obtain, as the sensor information SI, a moving image obtained by capturing the situation of the storage station 15 before and after the pallet PL passes the camera CA7.
  • the controller of the camera CA7 After acquiring a still image or a moving image obtained by photographing the pallet PL passing through the camera CA7 as the sensor information SI, the controller of the camera CA7 acquires the acquired sensor information SI and the identification information of the pallet PL acquired in step S4 above. (Key information KI) is sent to the management server 53 (step S7).
  • the controller of the camera CA 7 refers to the storage device management information HMI notified from the management server 53, determines the first storage device 535 to which the acquired sensor information SI is to be transmitted, and the determined first storage device 535
  • the sensor information SI is stored in a predetermined directory of
  • the controller of the camera CA 7 transmits the storage destination of the sensor information SI (the host name or network address of the first storage device 535 and the relative path in the first storage device 535) as the access information AI to the management server 53 Do.
  • the higher-level device 51 selects additional information ADI to be transmitted to the management server 53 from the identification information of the pallet PL received in step S3, and transmits the selected additional information ADI to the management server 53 (step S8).
  • the host device 51 identifies the identification information of the racks 111a and 111b where the pallet PL is stored, the identification information of the package A stored in the pallet PL, the part number, and the item name, from the identification information of the pallet PL.
  • the shipping destination and shipping date and time are selected as the additional information ADI, and are transmitted to the management server 53 together with the identification information of the pallet PL.
  • the transmission of the additional information ADI from the upper apparatus 51 to the management server 53 may be executed after the upper apparatus 51 receives the identification information of the pallet PL in step S3. Alternatively, it may be executed when the management server 53 requests the additional information ADI from the management server 53 after the management server 53 receives the identification information of the pallet PL and the access information AI from the controller of the camera CA 7.
  • the management server 53 After receiving the identification information (key information KI) of the pallet PL, the access information AI to the sensor information SI, and the additional information ADI, the management server 53 receives the key information KI (identification information of the pallet PL) and the additional information
  • the ADI, the access information AI, and the time information TI described above are associated with each other to form one record, and the one record is stored in the monitoring target database DB.
  • the management server 53 detects the sensor information SI when monitoring a specific pallet PL (and the package A stored in the pallet PL), and the specific pallet PL (and the stored package A). Additional information ADI (for example, the part number of the package A, the item name, the shipping destination, the shipping date and time, etc.) and the time information TI when the sensor information SI is acquired can be centrally managed.
  • Additional information ADI for example, the part number of the package A, the item name, the shipping destination, the shipping date and time, etc.
  • time information TI when the sensor information SI is acquired can be centrally managed.
  • FIG. 11 is a flow chart showing an example of a method of managing sensor information in the case where an error occurring at the loading station is to be monitored.
  • a method of managing the sensor information SI will be described by taking an example where the reader RD provided at the storage station 15 can not properly read the identification information of the pallet PL passing through the storage station 15. .
  • the reader RD provided in the warehousing station 15 can not properly read the identification information of the pallet PL passing through the warehousing station 15, the reader RD is an error in the small controller of the warehousing station 15. (No read error) is transmitted as key information KI (step S11).
  • the small-sized controller of the loading station 15 which has received the no read error as the key information KI transmits the no read error as the key information KI to the upper apparatus 51 (step S12). As a result, the host device 51 can recognize that an error has occurred in the storage station 15.
  • the small controller of the storage station 15 transmits the above-mentioned no read error as key information KI to the camera CA 7 (step S 13).
  • the controller of the camera CA7 that has received the key information KI transmits an ACK signal to the small-sized controller of the storage station 15 when the camera CA7 can obtain image data (step S14).
  • the small-sized controller of warehousing station 15 instructs camera CA 7 to acquire, as image data, a state in which pallet PL passes warehousing station 15 (shutter signal or drive recorder signal) Is sent (step S15).
  • the controller of the camera CA7 After acquiring a still image or a moving image obtained by imaging the pallet PL, which could not read the identification information, passing through the camera CA7 as the sensor information SI, the controller of the camera CA7 acquires the acquired sensor information SI and the above step S13.
  • the read no error (key information KI) is sent to the management server 53 (step S16).
  • the controller of the camera CA 7 refers to the storage device management information HMI notified from the management server 53, determines the first storage device 535 to which the acquired sensor information SI is to be transmitted, and the determined first storage device 535
  • the sensor information SI is stored in a predetermined directory of
  • the controller of the camera CA 7 transmits the storage destination of the sensor information SI (the host name or network address of the first storage device 535 and the relative path in the first storage device 535) as the access information AI to the management server 53 Do.
  • the upper-level device 51 specifies the identification information of the pallet PL for which the identification information could not be read and the package A stored in the pallet PL, based on the content of the no read error received in step S12, for example.
  • the identification information of the pallet PL and the identification information of the package A stored in the pallet PL are read by the worker W before the storage. . Further, the read identification information is transmitted to the upper apparatus 51.
  • the higher-level device 51 for example, the pallet PL for which the reader RD provided at the storage station 15 could not read the identification information based on the storage station 15 at which the no read error occurred and the occurrence time of the no read error.
  • the package A stored in the pallet PL can be identified.
  • the pallet PL for which the identification information could not be read is moved from the loading station 15 to another area (dedicated area). Thereafter, the worker W rereads the identification information of the pallet PL and / or performs an operation of attaching new identification information to the pallet PL.
  • the host device 51 After identifying the pallet PL for which the identification information could not be read, the host device 51 identifies the identification information of the shelves 111a and 111b where the identified pallet PL is stored and the identification information of the package A stored in the identified pallet PL.
  • the part number, the part name, the shipping destination, and the shipping date and time are selected as the additional information ADI, and are transmitted to the management server 53 together with a no read error (key information KI) (step S17).
  • the management server 53 After receiving the no read error (key information KI), the access information AI to the sensor information SI, and the additional information ADI, the management server 53 receives the key information KI (no read error), the additional information ADI, and the access information AI. And the time information TI described above are associated with each other to form one record, and the one record is stored in the monitoring target database DB.
  • the management server 53 detects the sensor information SI in the case where the occurrence of the no read error is to be monitored, and additional information ADI (for example, package information A) regarding the pallet PL (and stored luggage A) for which the identification information could not be read.
  • additional information ADI for example, package information A
  • the time information TI at which the sensor information SI is acquired can be centrally managed.
  • FIG. 12 is a flowchart showing an example of a method of managing sensor information when a package handled by a stacker crane is to be monitored.
  • identification information of pallet PL is issued as key information KI in automatic warehouses 1e and 1f handling pallet PL will be described as an example.
  • the host device 51 transmits identification information of the pallet PL transported by the stacker crane 13 to the controller of the stacker crane 13 as key information KI (step S21).
  • the controller of the stacker crane 13 sends the pallet PL13 to the stacker crane 13. And outputs the conveyance instruction of (step S22).
  • the transport instruction includes identification information of the pallet PL transported by the stacker crane 13. Thereby, the stacker crane 13 starts transporting the pallet PL.
  • the stacker crane 13 having received the transport instruction transmits identification information of the pallet PL included in the transport instruction to the camera CA 10 as key information KI (step S23).
  • the controller of the camera CA10 that has received the key information KI transmits an ACK signal to the stacker crane 13 when image data can be acquired by the camera CA10 (step S24).
  • the stacker crane 13 After receiving the above-mentioned ACK signal, the stacker crane 13 transmits, to the camera CA 10, an acquisition command for acquiring, as image data, the state of the pallet PL being transported mounted on the elevator platform 135 of the stacker crane 13 (step S25) ).
  • the stacker crane 13 When acquiring a still image of the pallet PL as image data, the stacker crane 13 transmits a shutter signal for acquiring a still image to the camera CA10 as the above acquisition command. As a result, the camera CA10 obtains the image data (still image) at the moment when the shutter signal is received, thereby setting the still image showing the state of the pallet PL mounted on the elevator platform 135 as the sensor information SI. You can get it.
  • the stacker crane 13 when acquiring a moving image obtained by photographing the pallet PL as image data, the stacker crane 13 receives, for example, the above-mentioned ACK signal as an acquisition command, and after a predetermined time has elapsed, a moving image of a predetermined length Sends a camera recording signal to the camera CA10.
  • the camera CA 10 stops the recording of the moving image after receiving the drive recording signal, and can obtain a moving image obtained by imaging the pallet PL placed on the elevator platform 135 and transported as the sensor information SI.
  • the controller of the camera CA10 After acquiring a still image or a moving image obtained by imaging the pallet PL being transported by the stacker crane 13 as the sensor information SI, the controller of the camera CA10 acquires the acquired sensor information SI and the pallet PL acquired in step S23 above. Identification information (key information KI) is transmitted to the management server 53 (step S26).
  • the controller of the camera CA 10 refers to the storage device management information HMI notified from the management server 53, determines the first storage device 535 to which the acquired sensor information SI is to be transmitted, and the determined first storage device 535
  • the sensor information SI is stored in a predetermined directory of
  • the controller of the camera CA 10 transmits the storage destination of the sensor information SI (the host name or network address of the first storage device 535 and the relative path in the first storage device 535) to the management server 53 as the access information AI. Do.
  • the higher-level device 51 selects additional information ADI to be transmitted to the management server 53 from the identification information of the pallet PL transmitted in step S21, and transmits the selected additional information ADI to the management server 53 (step S27). .
  • the host device 51 identifies the identification information of the racks 111a and 111b where the pallet PL is stored, the identification information of the package A stored in the pallet PL, the part number, and the item name, from the identification information of the pallet PL.
  • the shipping destination and shipping date and time are selected as the additional information ADI, and are transmitted to the management server 53 together with the identification information of the pallet PL.
  • the management server 53 After receiving the identification information (key information KI) of the pallet PL, the access information AI to the sensor information SI, and the additional information ADI, the management server 53 receives the key information KI (identification information of the pallet PL) and the additional information
  • the ADI, the access information AI, and the time information TI described above are associated with each other to form one record, and the one record is stored in the monitoring target database DB.
  • the management server 53 monitors the pallet PL (and the package PL stored in the pallet PL) being transported by the stacker crane 13 and the pallet PL (and storage). It is possible to centrally manage additional information ADI (for example, the part number of the package A, the product name, the shipping destination, the shipping date, etc.) of the package A) and the time information TI at which the sensor information SI is acquired.
  • additional information ADI for example, the part number of the package A, the product name, the shipping destination, the shipping date, etc.
  • FIG. 13 is a flowchart illustrating an example of a method of managing sensor information when a shelf is to be monitored.
  • identification information of the racks 111a and 111b is issued as key information KI in the automatic warehouses 1e and 1f handling the pallet PL will be described as an example.
  • the host device 51 transmits key information KI including the identification information of the shelves 111a and 111b to the controller of the stacker crane 13 (step S31).
  • the controller of the stacker crane 13 After receiving the key information KI, the controller of the stacker crane 13 outputs an inventory instruction to the stacker crane 13 (step S32).
  • This inventory instruction includes key information KI. Therefore, the stacker crane 13 having received the inventory instruction specifies the arrangement position of the shelves 111a and 111b of the inventory source from the identification information of the shelves 111a and 111b of the inventory source included in the key information KI.
  • the stacker crane 13 After that, the stacker crane 13 having received the inventory instruction moves the traveling carriage 133 and the lifting platform 135 to the arrangement position of the shelves 111a and 111b of the inventory source, which are specified from the key information KI.
  • the stacker crane 13 that has received the inventory instruction transmits identification information of the shelves 111a and 111b included in the inventory instruction as key information KI to the camera CA10 (step S33).
  • the controller of the camera CA10 having received the key information KI transmits an ACK signal to the stacker crane 13 when the camera CA10 can obtain image data (step S34).
  • the stacker crane 13 After receiving the above-mentioned ACK signal and the traveling carriage 133 and the lifting platform 135 reach the arrangement positions of the shelves 111a and 111b at the inventory source, the stacker crane 13 causes the camera CA10 to receive the pallet PL at the inventory source shelf 111a. , 111b from the elevator platform 135, and transmits a drag record signal for acquiring a series of inventory operations as moving images until the pallet PL is placed on the shelves 111a, 111b of the inventory destinations (step S35).
  • the camera CA10 starts the inventory destination from the shelves 111a and 111b of the inventory source.
  • a moving image indicating the storage state of the pallet PL in the racks 111a and 111b passing before reaching the racks 111a and 111b can be acquired as the sensor information SI.
  • the controller of the camera CA 10 After acquiring a moving image of a series of inventory operations of the pallet PL as the sensor information SI, the controller of the camera CA 10 acquires the acquired sensor information SI and the identification information of the shelves 111a and 111b acquired in step S33 described above The key information KI) is sent to the management server 53 (step S36).
  • the controller of the camera CA 10 refers to the storage device management information HMI notified from the management server 53, determines the first storage device 535 to which the acquired sensor information SI is to be transmitted, and the determined first storage device 535
  • the sensor information SI is stored in a predetermined directory of
  • the controller of the camera CA 10 transmits the storage destination of the sensor information SI (the host name or network address of the first storage device 535 and the relative path in the first storage device 535) to the management server 53 as the access information AI. Do.
  • the higher-level device 51 selects additional information ADI to be transmitted to the management server 53 from the identification information of the shelves 111a and 111b transmitted in step S31, and transmits the selected additional information ADI to the management server 53 (step S37). Specifically, the host device 51 transmits, as additional information ADI, the identification information of the pallet PL targeted for inventory and the identification information of the package A stored in the pallet PL, the product number, the product name, the shipping destination, and the shipping date. Do.
  • the additional information ADI includes identification information of the pallet PL stored in each of the shelves 111a and 111b which has passed from the inventory source shelves 111a and 111b to the inventory destination shelves 111a and 111b, and the relevant pallet
  • the identification information of the package A stored in the PL, the product number, the product name, the shipping destination, and the shipping date and time are included.
  • the management server 53 After receiving the identification information (key information KI) of the pallet PL, the access information AI to the sensor information SI, and the additional information ADI, the management server 53 receives the key information KI (identification information of the pallet PL) and the additional information
  • the ADI, the access information AI, and the time information TI described above are associated with each other to form one record, and the one record is stored in the monitoring target database DB.
  • the management server 53 monitors the sensor information SI when the pallet PL targeted for inventory and the shelves 111a and 111b passed during the inventory work are to be monitored, and the pallet PL and the shelves 111a and 111b.
  • the additional information ADI and the time information TI at which the sensor information SI is acquired can be centrally managed.
  • FIG. 14 is a flowchart showing an example of a method of managing sensor information in the case where an error generated in the stacker crane is to be monitored.
  • a method of managing the sensor information SI will be described by taking, as an example, a case where the pallet PL protrudes from the elevator platform 135 in the stacker crane 13.
  • the stacker crane 13 may use a load out error or a key for identifying the pallet or package being transported.
  • the information KI is transmitted to the upper apparatus 51 (step S41). Further, the stacker crane 13 transmits an error of the load as the key information KI to the camera CA 10 (step S 42).
  • the controller of the camera CA10 having received the key information KI transmits an ACK signal to the stacker crane 13 when the camera CA10 can acquire image data (step S43).
  • the stacker crane 13 After receiving the above-mentioned ACK signal, the stacker crane 13 transmits, to the camera CA 10, a drum recorder signal for acquiring a moving image up to the present before the reception of the ACK signal (step S44).
  • the camera CA 10 captures a moving image obtained by capturing the appearance of the pallet PL before the load is detected by the sensor SE or the like, that is, a data portion obtained by capturing a load extension state before and after a load extension error event occurs. , And can be acquired as sensor information SI.
  • the controller of the camera CA7 After acquiring the moving image obtained by capturing the situation of the load out as the sensor information SI, the controller of the camera CA7 obtains the acquired sensor information SI and an error of the load out acquired in step S42 above or the pallet or package being transported.
  • the identification information (key information KI) is sent to the management server 53 (step S45).
  • the sensor SE which has detected the overrun may transmit the measurement result of the sensor SE when the overrun is detected to the management server 53 as the sensor information SI.
  • the controller of the camera CA 10 (and the sensor SE) refers to the storage device management information HMI notified from the management server 53, determines the first storage device 535 to which the acquired sensor information SI is to be transmitted, The sensor information SI is stored in a predetermined directory of the first storage device 535.
  • the controller of the camera CA 10 uses the storage destination of the sensor information SI (the host name or network address of the first storage device 535 and the relative path in the first storage device 535) as the access information AI. It is sent to the management server 53.
  • the storage destination of the sensor information SI the host name or network address of the first storage device 535 and the relative path in the first storage device 535.
  • the upper-level device 51 specifies the identification information of the pallet PL which has been pushed out and the package A stored in the pallet PL, based on the contents of the error of the load out received in step S41, for example.
  • the identification information of the pallet PL and the identification information of the package A stored in the pallet PL are read by the worker W before the storage. . Further, the read identification information is transmitted to the upper apparatus 51.
  • the higher-level device 51 for example, based on the loading station 15 at which the load-out error has occurred and the occurrence time of the load-out error, the pallet PL which has been loaded off and the package A stored in the pallet PL. And can be identified.
  • the upper device 51 generates a transport command for the pallet PL and the like, and grasps which pallet PL is being transported at which timing. Therefore, in another embodiment, the higher-level device 51 specifies the pallet PL out of the load out and the package A stored in the pallet PL based on the occurrence time of the load out error and the transport command. Good.
  • the host device 51 After specifying the pallet PL which has carried out the load, the host device 51 identifies the identification information of the racks 111a and 111b in which the identified pallet PL is stored, the identification information of the package A stored in the identified pallet PL, the part number, The item name, the shipping destination, and the shipping date and time are selected as the additional information ADI, and are transmitted to the management server 53 together with the error of the over-loading (key information KI) (step S46).
  • the management server 53 After receiving the loading error (key information KI), the access information AI to the sensor information SI, and the additional information ADI, the management server 53 receives the key information KI (loading error) and the additional information ADI. ,
  • the access information AI and the time information TI described above are associated with each other to form one record, and the one record is stored in the monitoring target database DB.
  • the management server 53 detects the sensor information SI in the case where the load over error is to be monitored, and additional information ADI (for example, for the package A) about the pallet PL (and stored package A) from which the load is over. It is possible to centrally manage the product number, the product name, the shipping destination, the shipping date, etc.) and the time information TI at which the sensor information SI is acquired.
  • FIG. 15 is a flowchart showing an example of a method of managing sensor information acquired by the weighing device.
  • the worker W inputs identification information of the package A to be weighed by the weighing devices 3a and 3b to the terminals TA1 and TA2.
  • the terminals TA1 and TA2 transmit the input identification information of the package A as the key information KI to the upper apparatus 51 (step S51).
  • the worker W places the package A to be weighed on the weighing devices 3a and 3b, and weighs the package A. Further, the terminals TA1 and TA2 transmit an acquisition command for acquiring image data of the package A being weighed and identification information of the package A being weighed to the cameras CA1 and CA2 (step S52).
  • the cameras CA1 and CA2 that have received the above acquisition command acquire the image data (moving image, still image) of the package A being weighed. After acquiring the image data of the package A being weighed, the image data and the measurement result of the package A are transmitted as sensor information SI to the management server 53 together with the identification information of the package A (step S53).
  • the sensor information SI is stored in the first storage device 535.
  • the host device 51 selects additional information ADI to be transmitted to the management server 53 from the identification information of the package A received in step S51, and transmits the selected additional information ADI to the management server 53 (step S54). . Specifically, the host device 51 selects the item number, item name, shipping destination, and shipping date of the package A indicated in the identification information as the additional information ADI, and transmits the additional information ADI to the management server 53 along with the package A identification information. .
  • the management server 53 After receiving the identification information (key information KI) of the package A, the access information AI to the sensor information SI, and the additional information ADI, the management server 53 receives the key information KI (identification information of the package A) and the additional information
  • the ADI, the access information AI, and the time information TI described above are associated with each other to form one record, and the one record is stored in the monitoring target database DB.
  • the management server 53 detects the sensor information SI (weighting result, the image of the package A being weighed) when monitoring the package A to be weighed and the additional information ADI (for example, for the package A).
  • the part number of the package A, the part name, the shipping destination, the shipping date, etc.) and the time information TI at which the sensor information SI is acquired can be centrally managed.
  • an application program for browsing the sensor information SI is activated in the external terminal.
  • the software may be a web browser or dedicated application software.
  • the program downloads a list of sensor information SI managed by the management server 53 from the monitoring target database DB. Thereafter, the monitoring target information MI associated with the sensor information SI and the time information TI are displayed in a list on the display of the external terminal.
  • the list of sensor information SI displayed on the external terminal may be, for example, a list in which the user using the external terminal narrows the target using a keyword among the lists stored in the monitoring target database DB.
  • the user who uses the external terminal selects a desired monitoring target from the list displayed on the external terminal.
  • Information on the monitoring target selected by the user is transmitted to the management server 53 as specification information.
  • the management server 53 that has received the designation information from the external terminal searches the monitoring target database DB for the monitoring target information MI that matches the information on the monitoring target indicated in the received designation information. Thereafter, using the access information AI associated with the found monitoring target information MI, the sensor information SI indicating the state of the monitoring target specified by the specified information is acquired, and the monitoring found by the sensor information SI and the search
  • the composite information FI is generated by combining the target information MI.
  • the management server 53 transmits the generated composite information FI to the external terminal that has transmitted the designation information.
  • the sensor information SI is a device designated by the designation information of the automatic warehouse system 100, among the sensor information SI acquired in the past and managed by the management server 53 and designated by the designation information. Presentation of operational status such as, creation of trouble report, etc.
  • the method of presenting each sensor information SI will be described in detail.
  • FIG. 16 is a flowchart showing a method of presenting sensor information managed by the management server. In the following, a method of presenting sensor information SI acquired in the past will be described, using the upper device 51 as an external terminal as an example.
  • the user starts browsing software for displaying the sensor information SI acquired in the past by the upper apparatus 51 on the display 515 (step S101).
  • the processor 511 executing the browsing software requests the management server 53 to transmit a list of sensor information SI currently managed (step S102).
  • the processor 511 may request a list of all the sensor information SI managed by the management server 53, that is, all the records of the monitoring target database DB. Alternatively, the processor 511 may narrow down the monitoring target that the user desires to view via the viewing software.
  • the management server 53 having received the request for the list transmits the record of the monitoring target database DB corresponding to the requested list to the upper apparatus 51 (step S103). If all the lists are requested, all records stored in the monitoring target database DB are transmitted to the upper apparatus 51. On the other hand, when the user designates a monitoring target to be displayed in a list, a record related to the designated monitoring target is found from the monitoring target database DB and transmitted to the upper apparatus 51.
  • the host device 51 After receiving the above list (record), the host device 51 displays the received list on the display 515 as shown in FIG. 17 (step S104).
  • the occurrence date (occurrence date) of the trouble (error) occurring in the automatic warehouse system 100, the place (equipment classification) where the trouble occurred, and a block (control block in charge of control of the place) And a specific trouble content (abnormal content) and a button (displayed in the “image” area) for browsing the sensor information SI acquired when the trouble occurs are displayed.
  • FIG. 17 is a diagram illustrating an example of a display screen when the list of monitoring targets is displayed.
  • identification information of package A, bucket BK, pallet PL, item number of package A, item name, shipping destination, shipping date, etc. are displayed. May be This makes it easier to select the monitoring target for which the sensor information SI is to be browsed.
  • step S105 After the list is displayed on the display 515 of the host device 51, the user of the host device 51 clicks a button (image) displayed at the “image” part of the list display, for example, to monitor the sensor information SI An object is designated (step S105).
  • the processor 511 of the upper apparatus 51 transmits, to the management server 53, information on a monitoring target associated with the list specified by the user as specification information (step S106).
  • the designation information may include the monitoring target information MI and the time information TI, or a part of the monitoring target information MI and / or the time information TI. Only the information of may be included.
  • the information to be included in the designation information can be determined as appropriate, for example, based on the search efficiency of the monitoring target database DB in the management server 53, and the like.
  • the processor 531 of the management server 53 After receiving the above-mentioned designation information, the processor 531 of the management server 53 searches the monitoring target database DB for the monitoring target information MI corresponding to the received designation information and finds it (step S107). Specifically, among the records stored in the monitoring target database DB, the monitoring target information MI matching the information included in the designated information and / or the record including the time information TI is found out by searching.
  • the processor 531 of the management server 53 specifies the access information AI associated with the monitoring target information MI or the like (step S108).
  • the processor 531 stores the sensor information SI about the monitoring target indicated in the monitoring target information MI corresponding to the designated information using the access information AI and the storage device management information HMI as required.
  • the host name and / or network address of the first storage device 535 and the directory name (relative path) of the first storage device 535 are specified.
  • the processor 531 accesses the specified directory of the specified first storage device 535 via the network interface 534, 5351, and downloads the sensor information SI stored in the directory (step S109).
  • the management server 53 can acquire sensor information SI related to the monitoring target specified by the specification information from the first storage device 535.
  • the downloaded sensor information SI is stored, for example, in a cache area or a temporary storage area of the second storage device 536.
  • the processor 531 combines the monitoring target information MI corresponding to the designated information and the sensor information SI associated with the monitoring target information MI, that is, the sensor information SI acquired in step S109, and generates the composite information FI. Are generated (step S110).
  • the processor 531 overlays the content of the monitoring target information MI on the sensor information SI which is image data to monitor Composed information FI representing information MI visually as character information.
  • the processor 531 is configured to overlay and display the monitoring target information MI related to the monitoring target at the timing when the monitoring target appears in the moving image data. Generate information FI.
  • the processor 531 executes the image processing software to display the character information of the monitoring target information MI related to the desired monitoring target on the frame where the desired monitoring target is displayed in the sensor information SI.
  • composite information FI as shown in FIG. 18 can be generated.
  • FIG. 18 is a diagram showing an example of composite information created by overlaying monitoring target information on moving image data.
  • the composite information FI shown in FIG. 18 is a moving image showing the state of the package A being transported by the stacker crane 13, the pallet PL, or the bucket BK.
  • the identification information of the package A being transported by the stacker crane 13 (or the package PL stored in the pallet PL or the bucket BK), the product number, the product name, the shipping destination, the shipping date, (Additional information ADI) is displayed.
  • the processor 531 of the management server 53 transmits the generated composite information FI to the upper apparatus 51 via the network interfaces 534 and 514 (step S111).
  • the upper device 51 having received the composite information FI displays the composite information FI on the display 515 (step S112).
  • the upper apparatus 51 caches a part of the composite information FI in the storage device 517,
  • the entire composite information FI may be displayed by sequentially displaying the unit on the display 515 (streaming distribution).
  • the host device 51 may download the entire composite information FI, which is moving image data, to the storage device 517, and may display the composite information FI stored in the storage device 517 on the display 515.
  • the management server 53 may immediately delete the composite information FI from the second storage device 536 or may delete the composite information FI after storing for a certain period.
  • the generated composite information FI may be stored in a large-capacity storage device such as the first storage device 535 in consideration of the possibility of reproducing it later. As a result, it is possible to prevent the second storage device 536 of the management server 53 from being occupied by the generated composite information FI and causing a shortage of capacity.
  • the composite information FI is obtained by combining the monitoring target information MI corresponding to the designated information specified by the user with the upper apparatus 51 and the sensor information SI associated with the monitoring target information MI.
  • the state of the monitoring target is divided into two different pieces of information (the sensor information SI and the monitoring target information MI Can be displayed in detail).
  • a plurality of pieces of monitoring target information MI corresponding to one piece of specification information may be found in step S107 described above.
  • a plurality of pieces of sensor information SI corresponding to a plurality of pieces of monitoring target information MI are acquired from the first storage device 535, and the plurality of pieces of sensor information SI are combined to form one combined Information FI may be generated.
  • FIG. 19 is a diagram showing an example of combined information generated by combining a plurality of sensor information. In this way, it is possible to generate composite information FI in which a plurality of sensor information SI regarding the monitoring target are summarized.
  • corresponding monitoring target information MI may be overlaid on each of the plurality of sensor information SI. This makes it possible to visually recognize details of a plurality of sensor information SI.
  • FIG. 20 is a flow chart showing a method of presenting the operation status of the equipment etc. of the automatic warehouse system.
  • the user starts software for confirming the operation status of the equipment and the like of the automatic warehouse system 100 in the upper apparatus 51 (step S201).
  • a screen on which devices capable of confirming the operation status of the automated warehouse system 100 as shown in FIG. 21 are displayed on the display 515 (step S202).
  • FIG. 21 is a diagram showing an example of a screen on which devices capable of confirming the operation status of the automatic warehouse system are displayed.
  • FIG. 21 a schematic view of the vicinity of the loading station 15 and the unloading station 17 of the automatic warehouses 1a to 1g is displayed.
  • the devices whose operation status can be confirmed are highlighted by squares.
  • the warehousing station 15 is designated as a device whose operation status can be confirmed.
  • the device highlighted by a square and the identification information of the camera CA that captures the condition of the device are associated.
  • the device in which an event such as an error has occurred is colored and emphasized. Furthermore, the installation position and the installation direction of the camera are visually shown.
  • the device whose operation status is to be checked is designated as a monitoring target (step S203).
  • the camera CA for capturing the device status is also specified by the click.
  • identification information of a camera CA for photographing the status of the device whose activity is to be confirmed is transmitted to the management server 53 as designation information and key information KI (step S204).
  • the higher-level device 51 adds additional information ADI (package A identification information, part number, item name, shipping destination, shipping date, operation status) such as package A scheduled to be handled by the device whose operation status is to be handled. And the scheduled time at which the package A is handled, etc.) is sent to the management server 53 along with the designated information.
  • additional information ADI package A identification information, part number, item name, shipping destination, shipping date, operation status
  • the processor 531 of the management server 53 After receiving the designation information and the additional information ADI, the processor 531 of the management server 53 refers to the identification information of the camera CA designated by the designation information and the sensor management information SMI, and sends the designated camera CA Access information (a host name of the camera CA, a network address, an access ID, a password, etc.) is specified (step S205).
  • the processor 531 After specifying the access information to the designated camera CA, the processor 531 makes an access request to the designated camera CA (step S206). Specifically, the processor 531 accesses the camera CA of the identified host name or network address via the network interface 534, 5351, and transmits the identified access ID and password to the camera CA.
  • Step S207 a live image obtained by photographing a device whose operation status is to be checked is transmitted from the camera CA to the management server 53 as sensor information SI.
  • the live video is temporarily stored in the first storage device 535 and / or the second storage device 536.
  • the processor 531 While receiving the live video, the processor 531 overlays the contents of the additional information ADI as necessary on the live video to generate composite information FI (step S208). Specifically, the processor 531 performs an overlay process on the live video of an image showing the character information of the additional information ADI at the scheduled time when the package A is handled by the device that wants to check the operation status included in the additional information ADI. , Generate composite information FI.
  • FIGS. 22A and 22B composite information FI in which the content of the additional information ADI is overlaid on the live video of the device whose operating status is to be checked as shown in FIGS. 22A and 22B is generated.
  • FIG. 22A is a diagram showing an example of composite information in which additional information is overlaid on a live video of a device whose operating status is to be checked.
  • FIG. 22B is a diagram illustrating another example of composite information in which additional information is overlaid on live video of a device whose operating status is to be checked.
  • the identification information of the package A to be transported by the stacker crane 13 is overlaid.
  • the identification information of the package A being moved by the conveyor, the product number, the product name, the shipping destination, and the shipping date and time are overlaid on the live image showing the operating status of the conveyor provided in the automated warehouse system 100. There is.
  • the processor 531 of the management server 53 transmits the generated composite information FI to the upper apparatus 51 via the network interfaces 534 and 514 (step S209).
  • the upper device 51 having received the composite information FI displays the composite information FI on the display 515 (step S210).
  • the live video of the device (monitoring target) whose user wants to confirm the operation status designated by the upper device 51 and the information (additional information ADI) such as the package A handled by the device are synthesized and synthesized.
  • the information FI By generating the information FI and providing it to the user via the upper apparatus 51, it is possible to display in detail two different pieces of information (sensor information SI and additional information ADI) about the desired monitoring target operation status.
  • the object which can confirm a condition live is not restricted to an apparatus.
  • the identification information of the camera CA provided at the place where the worker W is working may be used as the designation information.
  • the composite information FI is generated by overlaying the live video of the work situation of the worker W and the additional information ADI of the package A handled by the worker W. , And can be provided to the user via the host device 51.
  • FIG. 23 is a view showing an example of composite information in which additional information is overlaid on a live video of a worker who wants to confirm the work status.
  • FIG. 24 is a flowchart showing a method of creating a trouble situation report based on sensor information managed by the management server.
  • the user activates a program for setting the type of trouble (monitoring target) for creating a trouble situation report on the host device 51.
  • the processor 511 which executes the program, displays a list of troubles for which trouble situation reports can be created on the display 515 (step S301).
  • the user selects a trouble type for which a trouble situation report is to be created from the list (step S302).
  • the processor 511 of the upper apparatus 51 transmits the trouble type selected by the user as designation information to the management server 53 (step S303).
  • the processor 531 of the management server 53 searches the monitoring target database DB for the monitoring target information MI related to the trouble type designated by the received designation information (step S304). Specifically, among the records stored in the monitoring target database DB, a record including the monitoring target information MI including the trouble type designated in the designation information is found out by searching.
  • the processor 531 of the management server 53 specifies the access information AI associated with the monitoring target information MI. After that, the processor 531 uses the access information AI and, if necessary, the storage device management information HMI to store the sensor information SI in which the designated trouble type is monitored. And a directory name (relative path) of the first storage device 535.
  • the processor 531 accesses the specified directory of the specified first storage device 535 via the network interface 534, 5351, and downloads the sensor information SI stored in the directory (step S305).
  • the management server 53 can acquire, from the first storage device 535, the sensor information SI to be included in the trouble situation report.
  • the processor 531 combines the monitoring target information MI including the designated trouble type and the sensor information SI acquired in step S305 to generate a trouble situation report as combined information FI (step S306).
  • FIG. 25A is a diagram showing an example of a report.
  • the processor 531 adds a trouble recovery procedure manual as shown in FIG. 25B to the report shown in FIG. 25A to create a trouble situation report.
  • the trouble recovery procedure shown in FIG. 25B is prepared in advance and stored in the first storage device 535 and / or the second storage device 536.
  • FIG. 25B is a diagram showing an example of the trouble recovery procedure manual.
  • the processor 531 transmits the created trouble situation report to the host device 51 through the network interfaces 534 and 514, if necessary (step S307).
  • the processor 511 of the upper apparatus 51 that has received the trouble situation report displays the received trouble situation report on the display 515 (step S308).
  • the processor 531 of the management server 53 performs the above steps S304 to S306, for example. Run every period, and a trouble situation report will be created automatically.
  • the created trouble situation report is transmitted to the external terminal (upper device 51) from which the request has been issued, in response to a request from the upper device 51 or the like.
  • the trouble situation report may be created only when the upper apparatus 51 or the like designates the monitoring target.
  • the package A (pallet PL) is provided at the storage station 15 and read
  • the identification information of the package A (pallet PL) read by the reader RD is issued as the key information KI after passing through the apparatus RD, an image representing the condition of the package A or the like is acquired as the sensor information SI It had been.
  • the key information KI serving as a trigger for acquiring the sensor information SI at the storage station 15 is not limited to the identification information of the package A or the like read by the reading device RD.
  • the sensor information SI in which the package A or the like is to be monitored is acquired.
  • FIG. 26 is a flowchart showing an example of a method of managing sensor information in the case where a package handled at the warehousing station is to be monitored according to the second embodiment.
  • the configuration and function of the other automatic warehouse system 100 are different from the first embodiment only in the method of managing sensor information when the package A or the like handled by the storage station 15 is to be monitored. , Is the same as the first embodiment. Therefore, in the following, only a method of managing sensor information in the case where a package A or the like handled by the warehousing station 15 is to be monitored according to the second embodiment will be described.
  • the configuration and function of another automatic warehouse system 100 Description of is omitted.
  • the worker W reads the identification information of the package A stored in the pallet PL using the reader RD or the like. Further, the worker W reads the identification information of the pallet PL containing the package A using the reader RD or the like. Thereby, the identification information of the pallet PL and the identification information of the package A stored in the pallet PL are associated.
  • the reader RD transmits the identification information of the pallet PL and the identification information of the package A stored in the pallet PL associated with the identification information to the upper apparatus 51.
  • the upper apparatus 51 After receiving the identification information of the pallet PL, the upper apparatus 51 transmits the identification information of the pallet PL to the (main) controller of the storage station 15 as key information KI (step S1 ').
  • the controller of the loading station 15 which has received the identification information of the pallet PL as the key information KI transmits the received identification information of the pallet PL to the camera CA 7 (step S 2 ′).
  • the controller of the camera CA7 having received the key information KI transmits an ACK signal to the controller of the storage station 15 when the camera CA7 can acquire image data (step S3 ').
  • the controller of the warehousing station 15 that has received the ACK signal instructs the warehousing station 15 to move the pallet PL received at the warehousing station 15 (that is, the pallet PL in which the key information KI is identification information).
  • Output step S4 '. Thereby, the pallet PL placed at the warehousing station 15 starts moving for warehousing.
  • the small controller of the storage station 15 After a predetermined time (for example, the time it takes for the pallet PL to reach the placement position of the camera CA7) has elapsed since the pallet PL started moving for storage, the small controller of the storage station 15 sends the camera CA7 Then, an acquisition command for acquiring, as image data, a state in which the pallet PL is passing through the storage station 15 is transmitted (step S5 '). Thereby, image data (still image or moving image) representing the pallet PL passing through the camera CA 7 can be acquired as the sensor information SI.
  • a predetermined time for example, the time it takes for the pallet PL to reach the placement position of the camera CA7
  • the controller of the camera CA7 After acquiring a still image or a moving image obtained by imaging the pallet PL passing through the camera CA7 as the sensor information SI, the controller of the camera CA7 identifies the acquired sensor information SI and the pallet PL acquired in the above step S2 ' The information (key information KI) is sent to the management server 53 (step S6 ').
  • the higher-level device 51 selects additional information ADI to be transmitted to the management server 53 from the identification information of the pallet PL transmitted in step S1 ', and manages the selected additional information ADI together with the identification information of the pallet PL. It transmits to the server 53 (step S7 ').
  • the management server 53 After receiving the identification information (key information KI) of the pallet PL, the access information AI to the sensor information SI, and the additional information ADI, the management server 53 receives the key information KI (identification information of the pallet PL) and the additional information
  • the ADI, the access information AI, and the time information TI described above are associated with each other to form one record, and the one record is stored in the monitoring target database DB.
  • the management server 53 monitors the specific pallet PL (and the package A stored in the pallet PL).
  • the acquired time information TI can be centrally managed.
  • the management server 53 (an example of a management server) is a server that manages information related to the automatic warehouse system 100 (an example of a system) in which a sensor SE and / or a camera CA (an example of a sensor) is provided in a plurality of places.
  • the management server 53 includes a first storage device 535 and a second storage device 536 (an example of a storage device), a network interface 534 (an example of a network interface), and a processor 531 (an example of a processor).
  • the network interface 534 performs communication with an external device.
  • the processor 531 acquires monitoring target information MI (an example of monitoring target information) and sensor information SI (an example of sensor information) via the network interface 534, and monitors the monitoring target information MI, the sensor information SI, and time.
  • a process of storing information TI (an example of time information) in a storage device in association with each other is executed.
  • the monitoring target information MI includes key information KI (an example of key information) for specifying a monitoring target in the automatic warehouse system 100, and additional information ADI (an example of additional information) which is additional information related to the monitoring target.
  • the sensor information SI is data representing the state of the monitoring target acquired based on the key information KI by the sensor SE and / or the camera CA.
  • the time information TI is information representing the time when the sensor information SI is acquired.
  • the processor 531 acquires specification information from the host device 51 (an example of an external terminal) via the network interface 534, and associates the monitoring object information MI corresponding to the acquired specification information with the monitoring object information MI.
  • the generated sensor information SI is combined to generate combined information FI (an example of combined information), and a process of outputting the combined information FI to the upper apparatus 51 via the network interface 534 is executed.
  • the designation information is information on the monitoring target specified by the user using the upper apparatus 51 displaying the monitoring target information MI.
  • the sensor information SI acquired by the plurality of sensors SE and / or cameras CA provided in the automatic warehouse system 100 is the monitoring target information MI which is information related to the monitoring target and the time when the sensor information SI is acquired.
  • the information TI is stored in the storage device in association with the information TI.
  • the processor 531 combines the monitoring target information MI corresponding to the designated information specified by the user and the sensor information SI associated with the monitoring target information MI to generate combined information FI, and the upper device 51 Provide to the user through. This makes it possible to display the state of the monitoring target in detail in two different pieces of information (the sensor information SI and the monitoring target information MI) while facilitating the search for the sensor information SI about the desired monitoring target.
  • the management server 53 of the present embodiment is also applicable to systems other than the automatic warehouse system 100.
  • the present invention can be applied to a processing machine system, an analysis system, a semiconductor transfer system, and the like.
  • the storage device of the management server 53 is configured of the external first storage device 535 and the internal second storage device 536, but is limited to this. Absent. For example, when the management server 53 is a large-scale computer system, when the storage capacity of the computer system configuring the management server 53 is sufficiently large, or when the storage system can be easily added in the computer system, etc. There is no need to provide a storage device outside.
  • the first storage device 535 according to the first embodiment and the second embodiment may be a cloud server that has a large-capacity storage area and can be accessed by a wide area network such as the Internet.
  • the management server 53 can manage a huge amount of sensor information SI.
  • the first storage device 535 as a cloud server, it is possible to manage, for example, sensor information SI of the automatic warehouse system 100 provided at another site.
  • the host device 51 can also display the sensor information SI obtained at the other site on the display 515.
  • the present invention can be understood as an invention of a system as follows.
  • a management system that manages a system in which sensors are provided at a plurality of locations, A host apparatus that controls the system; and a management server that manages information related to the system,
  • the management server is Storage device, A network interface that communicates with an external device;
  • the monitoring target information including key information for specifying the monitoring target in the system and additional information which is additional information on the monitoring target, and the state of the monitoring target acquired based on the key information by the sensor Acquiring sensor information via the network interface;
  • the monitoring target information, the sensor information, and time information indicating time when the sensor information is acquired are associated with each other and stored in the storage device.
  • Designated information on the monitoring target specified by the user using the external terminal displaying the monitoring target information is acquired from the host device via the network interface, Combining the monitoring target information corresponding to the designation information and the sensor information associated with the monitoring target information to generate combined information, and outputting the combined information to the upper-level device via the network interface;
  • the present invention can be widely applied to a management server that manages information on a system in which sensors are provided at a plurality of locations.
  • Automated warehouse systems 1a-1g Automated warehouses 11a, 11b Racks 111a, 111b Shelf 13 Stacker crane 131 Guide rail 133 Travel carriage 135 Lifting platform 137 Transfer device 15, 15 'Warehousing station 15''Conveyor 17, 17' Delivery station 3a , 3b Weigher 5 System control management unit 51 Host device 511 Processor 512 RAM 513 ROM 514 network interface 515 display 516 input interface 517 storage device 53 management server 531 processor 532 RAM 533 ROM 534 network interface 535 first storage 5351 network interface 536 second storage 537 input interface 538 display AP access point CA camera CA1 to CA11 camera LI light SE sensor FL forklift RD reader TA1 to TA3 terminal A package BK bucket PL pallet WM1 Management control information MI Monitoring target information KI Key information ADI additional information SI sensor information AI access information TI time information FI composite information HMI storage device management information SMI sensor management information W worker

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Mechanical Engineering (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Library & Information Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Warehouses Or Storage Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

管理サーバにおいて必要な情報の検索を容易にする。管理サーバ53は、記憶装置535、536と、ネットワークインターフェース534と、プロセッサ531と、を備える。ネットワークインターフェース534は、外部の装置との通信を実行する。プロセッサ531は、監視対象情報MIと、センサ情報SIと、時刻情報TIと、を互いに関連付けて記憶装置535、536に記憶する処理を実行する。また、プロセッサ531は、指定情報を上位装置51から取得し、取得した指定情報に対応する監視対象情報MIと、当該監視対象情報MIに関連付けられたセンサ情報SIと、を合成して合成情報FIを生成し、上位装置51に出力する処理を実行する。

Description

管理サーバ、管理システム、管理方法、及びプログラム
 本発明は、複数の箇所にセンサが設けられたシステムに関する情報を管理する管理サーバ、当該管理サーバを備える管理システム、当該管理サーバにおける情報の管理方法、及び、当該管理方法をコンピュータに実行させるプログラム、に関する。
 従来、機器に設けられたセンサから得た情報を、ネットワークを介して当該機器から収集して、当該情報を機器のモニターなどに使用することが知られている(いわゆるIoT(Internet of Things)技術)。例えば、特許文献1には、搬送車システムにおいて、搬送車に設けられたカメラにより撮影した画像を管理する管理装置が開示されている。この管理装置においては、上記画像は時刻と関連付けられて管理され、指定した時刻にて取得された画像を表示部に表示する。
特開2016-52919号公報
 システムが大規模となると、カメラなどのセンサの設置数が多くなり、また、システムに設置される機器及び扱われる対象物も増加する。その結果、管理装置により管理するシステムが大規模である場合には、時刻にて所望の情報を検索することは煩雑であり、大きな労力を要することとなる。なぜなら、センサ数、機器、及び/又は扱う対象物が増えることにより、システム全体において取得される情報の数、及び、ほぼ同時に取得される情報の数が増加するからである。
 本発明の目的は、複数のセンサが設けられたシステムに関する情報を管理する管理サーバにおいて、必要な情報の検索を容易にすることにある。
 以下に、課題を解決するための手段として複数の態様を説明する。これら態様は、必要に応じて任意に組み合せることができる。
 本発明の一見地に係る管理サーバは、複数の箇所にセンサが設けられたシステムに関する情報を管理するサーバである。管理サーバは、記憶装置と、ネットワークインターフェースと、プロセッサと、を備える。ネットワークインターフェースは、外部の装置との通信を実行する。プロセッサは、監視対象情報と、センサ情報とを、ネットワークインターフェースを介して取得し、監視対象情報と、センサ情報と、時刻情報と、を互いに関連付けて記憶装置に記憶する処理を実行する。監視対象情報は、システムにおける監視対象を特定するキー情報と、監視対象に関する付加的な情報である付加情報と、を含む。センサ情報は、センサにより上記のキー情報に基づいて取得された監視対象の状態を表すデータである。時刻情報は、センサ情報を取得した時刻を表す情報である。
 また、プロセッサは、指定情報を、ネットワークインターフェースを介して外部端末から取得し、取得した指定情報に対応する監視対象情報と、当該監視対象情報に関連付けられたセンサ情報と、を合成して合成情報を生成し、ネットワークインターフェースを介して外部端末に出力する処理を実行する。指定情報は、監視対象情報を表示した外部端末を用いてユーザが指定した監視対象に関する情報である。
 上記の管理サーバにおいて、システムに設けられた複数のセンサにて取得したセンサ情報は、監視対象に関する情報である監視対象情報と、センサ情報を取得した時刻情報と、に関連付けられて記憶装置に記憶されている。また、プロセッサが、ユーザが指定した指定情報に対応した監視対象情報と、当該監視対象情報に関連付けられたセンサ情報と、を合成して合成情報を生成し、外部端末を介してユーザに提供する。
 これにより、所望の監視対象についてのセンサ情報の検索を容易にしつつ、監視対象の状態を2つの異なる情報(センサ情報と監視対象情報)にて詳細に表示できる。
 センサ情報は、監視対象の状態を撮影した画像データを含んでもよい。この場合、プロセッサは、画像データに監視対象情報をオーバーレイして合成情報を生成する。これにより、監視対象の状態を視覚的に表示できる。
 画像データは、動画データであってもよい。この場合、プロセッサは、動画データにおいて、監視対象が映し出されたタイミングで当該監視対象に関する監視対象情報をオーバーレイして表示するよう、合成情報を生成する。これにより、動画データのどのタイミングにて所望の監視対象が映し出されているかを、視覚的に認識できる。
 監視対象は、システムにて発生したイベントであってもよい。この場合、動画データは、監視対象としたイベントが発生した前後の状態を撮影したデータ部分のみを含んでもよい。これにより、システムにて発生したイベントの状態を、視覚的に容易に確認できる。
 記憶装置は、第1記憶装置と、第2記憶装置と、を含んでもよい。第1記憶装置は、ネットワークインターフェースを介して、管理サーバとアクセス可能である、外部の記憶装置である。第1記憶装置は、センサ情報を記憶する。この場合、プロセッサは、監視対象情報と、アクセス情報と、時刻情報と、を互いに関連付けて第2記憶装置に記憶する。アクセス情報は、対応する監視対象情報に示された監視対象の状態を表すセンサ情報の、第1記憶装置における存在位置を表す。また、プロセッサは、アクセス情報を用いて第1記憶装置から取得したセンサ情報と、監視対象情報と、を合成して合成情報を生成する。
 これにより、管理サーバは、内部の第2記憶装置の記憶容量が大きくなくても、大量のセンサ情報を外部の第1記憶装置にて管理できる。
 監視対象は、システムにて発生したトラブルであってもよい。この場合、プロセッサは、トラブルに関する監視対象情報と、当該監視対象情報に関連付けられたセンサ情報と、を用いてトラブル状況レポートを合成情報として生成してもよい。これにより、システムにおいて発生したトラブルの詳細を知ることができる。
 プロセッサは、複数のセンサ情報を結合して合成情報を生成してもよい。これにより、監視対象についての複数のセンサ情報をまとめた合成情報を生成できる。
 本発明の他の見地に係る管理システムは、複数の箇所にセンサが設けられたシステムを管理する管理システムである。この管理システムは、システムを制御する上位装置と、システムに関する情報を管理する管理サーバと、を備える。さらに、当該管理サーバは、記憶装置と、ネットワークインターフェースと、プロセッサと、を有する。
 ネットワークインターフェースは、外部の装置との通信を実行する。
 プロセッサは、監視対象情報と、センサ情報とを、ネットワークインターフェースを介して取得し、監視対象情報と、センサ情報と、時刻情報と、を互いに関連付けて記憶装置に記憶する処理を実行する。監視対象情報は、システムにおける監視対象を特定するキー情報と、監視対象に関する付加的な情報である付加情報と、を含む。センサ情報は、センサにより上記のキー情報に基づいて取得された監視対象の状態を表すデータである。時刻情報は、センサ情報を取得した時刻を表す情報である。
 また、プロセッサは、指定情報を、ネットワークインターフェースを介して上位装置から取得し、取得した指定情報に対応する監視対象情報と、当該監視対象情報に関連付けられたセンサ情報と、を合成して合成情報を生成し、ネットワークインターフェースを介して上位装置に出力する処理を実行する。指定情報は、監視対象情報を表示した外部端末を用いてユーザが指定した監視対象に関する情報である。
 これにより、上記の管理システムにおいて、所望の監視対象についてのセンサ情報の検索を容易にしつつ、監視対象の状態を2つの異なる情報(センサ情報と監視対象情報)にて詳細に表示できる。
 本発明のさらに他の見地に係る管理方法は、記憶装置を備え、複数の箇所にセンサが設けられたシステムに関する情報を管理する管理サーバにおける情報の管理方法である。管理方法は、以下のステップを備える。
 ◎システムにおける監視対象を特定するキー情報と監視対象に関する付加的な情報である付加情報とを含む監視対象情報と、センサによりキー情報に基づいて取得された監視対象の状態を表すセンサ情報とを取得するステップ。
 ◎監視対象情報と、センサ情報と、センサ情報を取得した時刻を表す時刻情報と、を互いに関連付けて記憶装置に記憶するステップ。
 ◎監視対象情報を表示した外部端末を用いてユーザが指定した監視対象に関する指定情報を、外部端末から取得するステップ。
 ◎指定情報に対応する監視対象情報と、当該監視対象情報に関連付けられたセンサ情報と、を合成して合成情報を生成し、外部端末に出力するステップ。
 これにより、上記の管理方法において、所望の監視対象についてのセンサ情報の検索を容易にしつつ、監視対象の状態を2つの異なる情報(センサ情報と監視対象情報)にて詳細に表示できる。
 複数のセンサが設けられたシステムに関する情報を管理する管理サーバにおいて、必要な情報の検索を容易にしつつ、監視対象の状態を詳細に表示できる。
自動倉庫システムの構成を示す図。 秤量器に対するカメラの配置の一例を示す図。 自動倉庫の構成を示す図。 バケットを扱う自動倉庫における入庫ステーション及び出庫ステーション付近の拡大図。 パレットを扱う自動倉庫における入庫ステーション及び出庫ステーション付近の拡大図。 長物の荷物を扱う自動倉庫における入庫ステーション及び出庫ステーション付近の拡大図。 バケットを扱う自動倉庫のスタッカクレーンにおけるセンサの配置位置を示す図。 パケットを扱う自動倉庫のスタッカクレーンにおけるセンサの配置位置を示す図。 長物の荷物を扱う自動倉庫のスタッカクレーンにおけるセンサの配置位置を示す図。 システム制御管理部の構成を示す図。 上位装置の構成を示す図。 管理サーバの構成を示す図。 監視対象データベースに記憶される1レコードのデータ構造の一例を示す図。 入庫ステーションにて扱われる荷物などを監視対象とした場合のセンサ情報の管理方法の一例を示すフローチャート。 入庫ステーションにおいて発生したエラーを監視対象とした場合のセンサ情報の管理方法の一例を示すフローチャート。 スタッカクレーンにおいて取り扱われる荷物などが監視対象となる場合のセンサ情報の管理方法の一例を示すフローチャート。 棚を監視対象とした場合のセンサ情報の管理方法の一例を示すフローチャート。 スタッカクレーンにおいて発生したエラーを監視対象とする場合のセンサ情報の管理方法の一例を示すフローチャート。 秤量器により取得されたセンサ情報の管理方法の一例を示すフローチャート。 管理サーバにより管理されているセンサ情報の提示方法を示すフローチャート。 監視対象のリストを表示したときのディスプレイ画面の一例を示す図。 動画データに監視対象情報をオーバーレイして作成した合成情報の一例を示す図。 複数のセンサ情報を結合して生成した合成情報の一例を示す図。 自動倉庫システムの機器等の稼働状況の提示方法を示すフローチャート。 自動倉庫システムの稼働状況の確認が可能な機器を表示した画面の一例を示す図。 稼働状況を確認したい機器のライブ映像に付加情報がオーバーレイされた合成情報の一例を示す図。 稼働状況を確認したい機器のライブ映像に付加情報がオーバーレイされた合成情報の他の例を示す図。 作業状況を確認したい作業者のライブ映像に付加情報がオーバーレイされた合成情報の一例を示す図。 管理サーバにより管理されているセンサ情報によりトラブル状況レポートを作成する方法を示すフローチャート。 レポートの一例を示す図。 トラブル復旧手順書の一例を示す図。 第2実施形態に係る入庫ステーションにて扱われる荷物などを監視対象とした場合のセンサ情報の管理方法の一例を示すフローチャート。
1.第1実施形態
(1)自動倉庫システム
(1-1)自動倉庫システムの全体構成
 以下、第1実施形態に係る管理サーバについて説明する。本実施形態の管理サーバは、荷物Aの入出庫、移載、保管などを大規模に行う自動倉庫システム100(システムの一例)に関する情報を管理するサーバである。従って、まず、当該管理サーバにより情報が管理される自動倉庫システム100の構成について、図1を用いて説明する。図1は、自動倉庫システムの構成を示す図である。
 自動倉庫システム100は、複数の自動倉庫1a~1gを備える。複数の自動倉庫1a~1gは、荷物Aの入出庫、移載、保管などを行う。複数の自動倉庫1a~1gのうち、図1において下方に存在する4台の自動倉庫1a~1dは、荷物AをバケットBKに収納し、当該バケットBKの入出庫、移載、保管を行う。その上方に存在する2台の自動倉庫1e、1fは、荷物AをパレットPLに収納し、当該パレットPLの入出庫、移載、保管を行う。さらにその上方に存在する1台の自動倉庫1gは、長い幅の荷物A(「長物」と呼ばれることもある)の入出庫、移載、保管を行う。複数の自動倉庫1a~1gの構成については、後ほど詳しく説明する。
 自動倉庫システム100は、秤量器3a、3bを備える。秤量器3a、3bは、自動倉庫システム100が設置されたエリア内において、複数の自動倉庫1a~1gが配置されたエリアとは別のエリアに配置され、荷物Aを秤量する秤である。 
 図2に示すように、秤量器3a、3bの荷物Aを載置する台と高さ方向において対向する位置には、それぞれ、カメラCA1、CA2(センサの一例)が設けられる。カメラCA1、CA2は、例えば、CCDセンサなどの画像を撮影するためのセンサを有する装置である。図2は、秤量器に対するカメラの配置の一例を示す図である。
 これにより、秤量器3a、3bにて秤量中の荷物Aの画像データ(静止画像、動画)を取得できる。また、秤量器3a、3bには、ライトLIが設けられている。ライトLIは、秤量中の荷物Aに、カメラCA1、CA2にて画像データを取得するための光を照射する。ライトLIは、例えば、LEDライトである。
 荷物Aの秤量結果は、各秤量器3a、3bに接続された端末TA1、TA2を介して、上位装置51(後述)に送信される。
 自動倉庫システム100は、システム制御管理部5(管理システムの一例)を備える。システム制御管理部5は、複数の自動倉庫1a~1gの制御、及び、自動倉庫システム100にて扱われる情報の管理を実行するコンピュータシステムである。システム制御管理部5の構成については、後ほど詳しく説明する。
 その他、自動倉庫システム100には、各自動倉庫1a~1gの端部近傍に、アクセスポイントAPが設けられている。アクセスポイントAPは、例えば、無線通信のための中継器である。各自動倉庫1a~1gのスタッカクレーン13(後述)は、経路に沿って移動するため、スタッカクレーン13に設けられたカメラは、アクセスポイントAPを介して、システム制御管理部5と通信する。
 本実施形態において、アクセスポイントAPは、自動倉庫1a~1gの端部に配置されている。これにより、自動倉庫システム100における配線の施設を安価にできる。
 また、自動倉庫システム100は、複数の自動倉庫1a~1gが配置されたエリアの入口に、カメラCA3~CA5(センサの一例)が設けられてもよい。カメラCA3~CA5は、例えば、CCDセンサなどの画像を撮影するためのセンサを有する装置である。カメラCA3~CA5は、上記の入口から複数の自動倉庫1a~1gの画像を撮影することにより、各自動倉庫1a~1gのスタッカクレーン全体を俯瞰できる。
(1-2)自動倉庫の構成
 以下、本実施形態の自動倉庫1a~1gの構成について、図3を用いて説明する。図3は、自動倉庫の構成を示す図である。自動倉庫1a~1gは、各自動倉庫にて扱う荷物A、バケットBK、パレットPLの寸法によって、これら荷物A等を載置するラック(後述)の寸法が異なること、及び、入庫ステーション15及び/又は出庫ステーション17の配置等が異なること以外、基本構成は同一である。従って、以下、荷物Aを収納したパレットPLを入出庫、移載、及び保管する自動倉庫1eを例にとって、自動倉庫1a~1gの構成を説明する。
 自動倉庫1eは、ラック11a、11bを有する。ラック11a、11bは、荷物Aを収納したパレットPLを保管する施設である。ラック11a、11bは、スタッカクレーン13の走行方向(図3の左右方向)に沿って配置されている。スタッカクレーン13から見て紙面上側にラック11aが配置され、紙面下側にラック11bが配置される。
 ラック11a、11bは、それぞれ、複数の棚111a、111bを有している。パレットPLは、この棚111a、111b上に載置されることで、ラック11a、11bに保管される。
 自動倉庫1eは、スタッカクレーン13を有する。スタッカクレーン13は、複数の棚111a、111b、入庫ステーション15、及び/又は出庫ステーション17との間でパレットPLを搬送する装置である。具体的には、スタッカクレーン13は、ラック11a、11bの延伸方向に沿って設けられたガイドレール131に沿って移動可能である。
 スタッカクレーン13は、図3に示すように、走行台車133と、昇降台135と、移載装置137とを有している。走行台車133は、昇降台135(を装着したマスト(図示せず))をガイドレール131に沿って移動させる装置である。走行台車133は、例えば、ガイドレール131上にて回転する車輪と、当該車輪を回転させるモータと、により構成される。
 昇降台135は、走行台車133に設けられたマストに搭載され、当該マストに沿って移動することで高さ方向に昇降する。例えば、昇降台135を吊り下げるチェーンを、モータの出力回転軸に接続されたスプロケットの回転により移動させることにより、昇降台135は、マストに沿って昇降する。
 移載装置137は、昇降台135に搭載されており、昇降台135の昇降により高さ方向に移動する。また、移載装置137は、走行台車133がガイドレール131に沿って移動することで、水平方向に移動する。
 移載装置137は、スタッカクレーン13から、ラック11a、11bの棚111a、111b、入庫ステーション15、又は出庫ステーション17へと、又はその逆方向にパレットPLを移載する。移載装置137は、例えば、走行台車133の走行方向とは垂直な方向に伸縮することで、棚111a、111b、入庫ステーション15、出庫ステーション17に到達可能なスライドフォークである。
 スタッカクレーン13は、システム制御管理部5から受信したパレットPLの入出庫についての指令に基づいて、上記の走行台車133、昇降台135、及び移載装置137を制御するコントローラ(図示せず)を有する。
 自動倉庫1eは、入庫ステーション15を有する。入庫ステーション15は、スタッカクレーン13に対して、ラック11aが配置されている側に配置されている。入庫ステーション15は、荷物Aを収納したパレットPLを入庫するコンベヤである。入庫ステーション15は、システム制御管理部5から受信した指令に基づいて、入庫ステーション15を制御するコントローラ(図示せず)を有する。また、入庫ステーション15には、上記のコントローラとは別に、小型のコントローラ(例えば、PLC(Programmable Logic Controller))が設けられている。
 自動倉庫1eは、出庫ステーション17を有する。出庫ステーション17は、スタッカクレーン13に対して、ラック11bが配置されている側に配置されている。出庫ステーション17は、荷物Aを収納したパレットPLを出庫するコンベヤである。出庫ステーション17は、システム制御管理部5から受信した指令に基づいて、出庫ステーション17を制御するコントローラ(図示せず)を有する。
 上記のように、各自動倉庫1a~1gにおいて、入庫ステーション15と出庫ステーション17の配置及び形態は異なる。従って、以下、各自動倉庫1a~1gにおける入庫ステーション15及び出庫ステーション17の構成について説明していく。
 バケットBKを扱う自動倉庫1a~1dにおいては、図4Aに示すように、入庫ステーション15’がラック11b側に配置され、出庫ステーション17’がラック11a側に配置される。また、入庫ステーション15’及び出庫ステーション17’の間には、作業者Wが配置される。バケットBKを入庫する際、作業者Wは、例えばバーコードリーダなどの読取装置RDを用いて、バケットBKの識別情報(例えば、バーコード)と、当該バケットBKに収納する荷物Aの識別情報(例えば、バーコード)をスキャンして読み取る。上位装置51において、読み取られた荷物Aの識別情報と、当該荷物Aを収納するバケットBKの識別情報と、は関連付けられる。これにより、上位装置51は、どのバケットBKにどの荷物Aが収納されたかを把握できる。図4Aは、バケットを扱う自動倉庫における入庫ステーション及び出庫ステーション付近の拡大図である。
 図4Aにおいて、紙面上側の図が、入庫ステーション15’及び出庫ステーション17’付近の上面図を示し、紙面下側の図が、入庫ステーション15’及び出庫ステーション17’付近の側面図を示す。
 パレットPLを扱う自動倉庫1e、1fにおいては、図4Bに示すように、バケットBKを扱う自動倉庫1a~1dと同様、各自動倉庫1e、1fの入庫ステーション15及び出庫ステーション17の間に、作業者Wが配置される。パレットPLを入庫する際、作業者Wは、読取装置RDを用いて、パレットPLの識別情報と、当該パレットPLに収納する荷物Aの識別情報と、をスキャンして読み取る。上位装置51において、読み取られた荷物Aの識別情報と、当該荷物Aを収納するパレットPLの識別情報と、は関連付けられる。図4Bは、パレットを扱う自動倉庫における入庫ステーション及び出庫ステーション付近の拡大図である。
 図4Bにおいて、紙面上側の図が、入庫ステーション15及び出庫ステーション17付近の上面図を示し、紙面下側の図が、入庫ステーション15及び出庫ステーション17付近の側面図を示す。
 一方、長物の荷物Aを扱う自動倉庫1gにおいては、図4Cに示すように、入庫ステーション及び出庫ステーションが共通のコンベヤ15’’となっている。本実施形態において、当該コンベヤ15’’は、ラック11b側に配置されている。図4Cは、長物の荷物を扱う自動倉庫における入庫ステーション及び出庫ステーション付近の拡大図である。
 図4Cにおいて、紙面上側の図が、入庫ステーション及び出庫ステーション(コンベヤ15’’)付近の上面図を示し、紙面下側の図が、入庫ステーション及び出庫ステーション(コンベヤ15’’)付近の側面図を示す。
 長物の荷物Aを扱う自動倉庫1gにおいては、荷物Aは、例えばフォークリフトFLなどを用いて、入庫ステーション15及び出庫ステーション17の両方の機能を有するコンベヤに載置されるか、または、当該コンベヤから積み下ろされる。長物の荷物Aを入庫する際、例えば、フォークリフトFLにて荷物Aを運搬する前に、読取装置(例えば、バーコードリーダ)を用いて予め荷物Aの識別情報を読み取り、上位装置に送信する。これにより、上位装置は、どの荷物Aを自動倉庫1gに入庫しようとしているかを把握できる。
 本実施形態において、各自動倉庫1a~1gは、スタッカクレーン13における荷物Aなどの搬送状態、棚111a、111bにおける荷物Aなどの保管状態、自動倉庫1a~1gが扱うバケットBK、パレットPL、荷物Aの状態、などをモニターするためのセンサを有している。
(1-3)自動倉庫におけるセンサの配置
 以下、自動倉庫1a~1gにおけるセンサの具体的な配置位置について、図4A~図4C、及び、図5A~図5Cを用いて説明する。図5Aは、バケットを扱う自動倉庫のスタッカクレーンにおけるセンサの配置位置を示す図である。図5Bは、パレットを扱う自動倉庫のスタッカクレーンにおけるセンサの配置位置を示す図である。図5Cは、長物の荷物を扱う自動倉庫のスタッカクレーンにおけるセンサの配置位置を示す図である。
 図4A~図4Cに示すように、入庫ステーション15及び出庫ステーション17付近においては、入庫ステーション15の入口付近に、カメラCA6~CA8が配置される。カメラCA6~CA8は、CCDセンサなどの画像を撮影するためのセンサを有する装置である。また、カメラCA6~CA8は、その稼働中に常時画像データ(動画)を取得し、所定の信号が入力されたときに、当該信号が入力されたタイミングの前後所定時間の画像データを出力する機能を有する。
 また、各カメラCA6~CA8の近傍には、ライトLIが設けられる。ライトLIは、カメラCA6~CA8の撮影対象に光を照射する、例えば、LEDライトである。
 図4A~図4Cに示すように、カメラCA6~CA8は、自動倉庫1a~1gにて扱うバケットBK、パレットPL、荷物Aの大きさに従って、その配置位置が異なっている。
 具体的には、図4Aに示すように、バケットBKを扱う自動倉庫1a~1dにおいては、1つのカメラCA6が、入庫ステーション15’の幅方向の中心に配置される。また、入庫ステーション15’の入庫経路には、バケットBKの識別情報を読み取る読取装置RDが設けられている。当該読取装置RDにて読み取られた識別情報などは、上位装置51及びカメラCA6などのセンサに出力される。これにより、上位装置51は、入庫ステーション15’にてどのバケットBKが入庫されているかを把握できる。また、カメラCA6などのセンサは、当該バケットBKに関するデータの取得タイミングを把握できる。なお、上記の読取装置RDは、出庫ステーション17’の出庫経路に設けられていてもよい。
 図4Bに示すように、パレットPLを扱う自動倉庫1e、1fにおいては、2つのカメラCA7が、入庫ステーション15の幅方向に並んで配置される。また、入庫ステーション15の入庫経路には、パレットPLの識別情報を読み取る読取装置RDが設けられている。当該読取装置RDにて読み取られた識別情報などは、上位装置51及びカメラCA7などのセンサに出力される。これにより、上位装置51は、入庫ステーション15にてどのパレットPLが入庫されているかを把握できる。また、カメラCA7などのセンサは、当該パレットPLに関するデータの取得タイミングを把握できる。
 さらに、図4Cに示すように、長物の荷物Aを扱う自動倉庫1gにおいては、コンベヤ15’’の幅方向に一対のカメラCA8が設けられ、かつ、荷物Aの長さ方向にも一対のカメラCA8が設けられている。すなわち、自動倉庫1gにおいては、4つのカメラCA8が入庫ステーション15に設けられる。
 また、コンベヤ15’’の経路上には、荷物Aの識別情報を読み取る読取装置RDが設けられている。当該読取装置RDにて読み取られた識別情報などは、上位装置51及びカメラCA8などのセンサに出力される。これにより、上位装置51は、コンベヤ15’’にてどの荷物Aが入庫されているかを把握できる。また、カメラCA8などのセンサは、当該荷物Aに関するデータの取得タイミングを把握できる。
 このように、カメラCA6~CA8を、自動倉庫1a~1gにて取り扱うバケットBK、パレットPL、荷物Aの大きさに従って配置することにより、カメラCA6~CA8は、バケットBK、パレットPL、荷物Aの全体像を画像データとして取得できる。
 カメラCA6~CA8は、システム制御管理部5と通信可能となっており、取得した画像データをシステム制御管理部5に送信できる。なお、カメラCA6~CA8とシステム制御管理部5との通信は、有線ネットワークにより実行されてもよいし、アクセスポイントAPなどを介して無線ネットワークにより実行されてもよい。
 一方、自動倉庫1a~1gのスタッカクレーン13にも、カメラが設けられている。これにより、スタッカクレーン13により搬送中のバケットBK、パレットPL、荷物Aの状態(例えば、荷崩れ、荷物Aのはみ出しなど)を把握できる。また、スタッカクレーン13が所定の棚111a、111bに停止したときには、当該棚111a、111bの荷物Aなどの状態をモニターできる。
 具体的には、バケットBKを扱う自動倉庫1a~1dのスタッカクレーン13の昇降台135には、図5Aに示すように、移載装置137のバケットBKが載置される箇所の真上にカメラCA9が設けられる。本実施形態においては、図5Aに示すように、移載装置137は、2つのバケットBKを同時に載置(棚111a、111bに移載)可能となっているので、カメラCA9は、当該バケットBKに対応するよう2台設けられる。バケットBK及び昇降台135(移載装置137)の端部には、ライトLIが設けられる。
 パレットPLを扱う自動倉庫1e、1fのスタッカクレーン13の昇降台135には、図5Bに示すように、移載装置137にパレットPLが載置されたときに当該パレットPLの棚111a、111bに近い端部となる位置の真上にカメラCA10が設けられる。また、パレットPLの当該端部に対応する位置、及び、昇降台135の端部には、ライトLIが設けられる。
 長物の荷物Aを扱う自動倉庫1gのスタッカクレーン13の昇降台135には、図5Cに示すように、移載装置137の四隅の近傍のそれぞれにカメラCA11が設けられる。また、当該カメラCA11の近傍、及び、昇降台135の端部には、ライトLIが設けられる。
 本実施形態において、カメラCA9~CA11は、例えば、CCDセンサなどの画像を撮影するためのセンサを有する魚眼カメラである。また、カメラCA9~CA11は、その稼働中に常時画像データ(動画)を取得し、所定の信号が入力されたときに、当該信号が入力されたタイミングより所定時間前から現在までの画像データを出力する機能を有する。カメラCA9~CA11は、アクセスポイントAPを介した無線通信により、取得した画像データをシステム制御管理部5に送信する。ライトLIは、例えば、LEDライトである。
 上記の図5A~図5Cに示すように、スタッカクレーン13にカメラCA9~CA11を設けることにより、当該カメラCA9~CA11により、移載装置137(昇降台135)に載置された搬送中のバケットBK、パレットPL、及び荷物Aの状態をモニターできると同時に、棚111a、111bにおける荷物Aなどの保管状態などもモニターできる。
 自動倉庫システム100において、カメラCA1~CA11以外にも、画像として状態を監視したい対象が存在する場合には、他のカメラが設けられていてもよい。カメラCA1~CA11を含めた、自動倉庫システム100に設けられたカメラを、カメラCAと呼ぶことにする。
 上記のカメラCA以外に、各自動倉庫1a~1gには、他のセンサSEが設けられる。例えば、各自動倉庫1a~1gのスタッカクレーン13の昇降台135には、加速度センサなどの振動の大きさを検出するセンサが設けられている。昇降台135にて発生した振動の大きさを測定することにより、例えば、バケットBK、パレットPL、荷物Aの搬送中における荷崩れなどを検出できる。
 その他、各自動倉庫1a~1gには、温湿度センサなどの周囲環境の状態(例えば、温度、湿度など)を測定するセンサを設けてもよい。これにより、例えば、荷物Aなどが適切な環境下で保管されているかを知ることができる。さらに、各自動倉庫1a~1gには、当該自動倉庫1a~1gにて発生した音の大きさを測定するセンサ(例えば、マイクなど)が設けられていてもよい。
(1-4)システム制御管理部の構成
(1-4-1)全体構成
 以下、本実施形態の自動倉庫システム100に備わるシステム制御管理部5の構成について、図6を用いて説明する。図6は、システム制御管理部の構成を示す図である。図6に示すように、システム制御管理部5は、上位装置51から、複数の自動倉庫1a~1gを制御するための指令を出力する。当該指令には、どの荷物Aをどの棚111a、111bに入庫するか、及び、どの棚111a、111bからどの荷物Aを出庫するかに関する情報が含まれている。各自動倉庫1a~1gのスタッカクレーン13は、当該指令に基づいて制御される。
 また、システム制御管理部5は、カメラCA、センサSE、読取装置RD、及び/又は、自動倉庫システム100に備わる各種端末(例えば、秤量器3a、3bに接続された端末TA1、TA2、バケットBKを扱う自動倉庫1a~1dが有する端末TA3など)から、当該機器又は端末にて取得した情報を受信し、管理する。
 システム制御管理部5は、上位装置51(外部端末の一例)を有する。上位装置51は、自動倉庫システム100において取り扱う荷物A、自動倉庫システム100の各構成要素、についての管理および制御を行う端末である。
 システム制御管理部5は、管理サーバ53を有する。管理サーバ53は、自動倉庫システム100に備わるカメラCA、及び、センサSEなどにて取得された情報を管理するサーバである。また、管理サーバ53は、上位装置51にてユーザが指定した監視対象について、自身が管理している情報を合成して合成情報FIを生成し、当該合成情報FIを上位装置51に送信する。
 以下、本実施形態のシステム制御管理部5が有する上位装置51及び管理サーバ53の構成について、詳細に説明していく。
(1-4-2)上位装置の構成
 図7に示すように、上位装置51は、プロセッサ511と、RAM512と、ROM513と、ネットワークインターフェース514と、ディスプレイ515と、入力インターフェース516と、記憶装置517と、を有するコンピュータシステムである。図7は、上位装置の構成を示す図である。
 プロセッサ511は、記憶装置517などに記憶されたプログラムを実行し、上位装置51において行われる各種情報処理を行う。例えば、プロセッサ511は、記憶装置517に記憶された管理制御情報WM1(後述)に基づいて自動倉庫1a~1gを制御する指令を生成する。当該指令は、ネットワークインターフェース514を介して、自動倉庫1a~1gのコントローラ、及び、入庫ステーション15及び出庫ステーション17のコントローラなどに送信される。
 また、プロセッサ511は、ディスプレイ515に状態を表示したい監視対象について、ユーザから指定を受け付ける。ユーザにより指定された状態を表示したい監視対象に関する情報を「指定情報」と呼ぶことにする。プロセッサ511は、指定情報に示された監視対象の状態について管理サーバ53が生成した合成情報FIを受信し、当該合成情報FIをディスプレイ515に表示させる処理を実行する。
 RAM512は、記憶装置517に記憶されたプログラムなど一時的に必要な情報を記憶する。ROM513は、上位装置51を制御するためのプログラム及び設定などを記憶する。
 ネットワークインターフェース514は、外部の端末及び/又は機器などとの通信を実行する。ネットワークインターフェース514は、例えば、有線通信により外部の端末及び/又は機器と通信をするイーサネット(登録商標)カード、及び/又は、無線通信により外部の端末及び/又は機器と通信をする無線LANインターフェースなどである。
 ディスプレイ515は、上位装置51についての各種情報を表示する、例えば、液晶ディスプレイ、有機ELディスプレイなどのディスプレイである。入力インターフェース516は、ユーザからの入力を受け付ける、例えば、キーボード、マウス、タッチパネルなどの入力機器である。
 記憶装置517は、上位装置51にて実行されるプログラム、及び、管理制御情報WM1を記憶する、例えば、ハードディスク、SSDなどの記憶装置である。
 管理制御情報WM1は、自動倉庫システム100を管理及び制御するための各種情報の集合体である。具体的には、管理制御情報WM1は、自動倉庫システム100にて取り扱う荷物A、バケットBK、パレットPLの識別情報、これら荷物A、バケットBK、パレットPLなどの入庫先の棚111a、111bの識別情報、出庫する荷物A、バケットBK、パレットPLなどを保管する棚111a、111bの識別情報、などを含む。また、管理制御情報WM1は、荷物Aについては、荷物Aの入庫日、荷物Aの品番、品名、出荷先、出荷日時、品物の個数などを含む。
 さらに、管理制御情報WM1は、自動倉庫システム100の各構成要素、例えば、自動倉庫1a~1gのスタッカクレーン13、棚111a、111b、入庫ステーション15、出庫ステーション17の配置位置に関する情報、カメラCA、センサSEなどの取り付け位置に関する情報、及び、これらの構成要素の状態(例えば、自動倉庫システム100の稼働情報、入出庫の搬送情報)に関する情報を含む。カメラCA、センサSEなどの取り付け位置に関する情報は、管理サーバ53から取得し、管理制御情報WM1に関連付けられる。
 上記の構成を有することにより、上位装置51は、記憶装置517に記憶された管理制御情報WM1を用いて、自動倉庫システム100にて取り扱う荷物Aなど、及び、自動倉庫システム100の各構成要素の管理を実行できる。また、上位装置51は、上記の管理制御情報WM1に基づいて、自動倉庫システム100の各構成要素を制御する指令を生成できる。
(1-4-3)管理サーバの構成
 以下、本実施形態の管理サーバ53の構成について説明する。図8に示すように、管理サーバ53は、プロセッサ531と、RAM532と、ROM533と、ネットワークインターフェース534と、記憶装置と、を有するコンピュータシステムである。図8は、管理サーバの構成を示す図である。
 プロセッサ531は、第2記憶装置536などに記憶されたプログラムを実行し、管理サーバ53において行われる各種情報処理を行う。具体的には、プロセッサ531は、監視対象の状態を表すセンサ情報SIの第1記憶装置535における存在位置を表すアクセス情報AIを受信する。その後、当該監視対象についての情報(監視対象情報MIと呼ぶことにする)と、上記のアクセス情報AIと、当該アクセス情報AIに示された位置に存在するセンサ情報SIを取得した時刻を表す時刻情報TIと、を互いに関連付けて1つのレコードとし、監視対象データベースDBに記憶する。
 また、上位装置51から指定情報を受信したとき、プロセッサ531は、指定情報に対応する監視対象情報MI、すなわち、指定情報に示された監視対象に関する情報と一致する監視対象情報MIを、監視対象データベースDBから検索する。その後、検索して発見された監視対象情報MIに関連付けられたアクセス情報AIを用いて、指定情報により指定されたセンサ情報SIを取得し、当該センサ情報SIと検索により発見された監視対象情報MIとを合成して合成情報FIを生成する。生成した合成情報FIは、ネットワークインターフェース534を介して、指定情報を送信した上位装置51に送信される。
 監視対象データベースDBに上記のレコードを記憶する際の管理サーバ53の動作、及び、上位装置51から指定情報を受信したときの管理サーバ53の動作については、後ほど詳しく説明する。
 RAM532は、第2記憶装置536に記憶されたプログラムなど一時的に必要な情報を記憶する。ROM533は、管理サーバ53を制御するためのプログラム及び設定などを記憶する。
 ネットワークインターフェース534は、外部の端末及び/又は機器などとの通信を実行する。ネットワークインターフェース534は、例えば、有線通信により外部の端末及び/又は機器と通信をするイーサネット(登録商標)カード、及び/又は、無線通信により外部の端末及び/又は機器と通信をする無線LANインターフェースなどである。
 本実施形態において、管理サーバ53の記憶装置は、第1記憶装置535と第2記憶装置536と、により構成されている。第1記憶装置535は、ネットワークインターフェース5351を介して、カメラCAにて取得した画像データ、及び、センサSEにて取得した測定データをダウンロードし、センサ情報SIとして記憶する。第1記憶装置535は、例えば、NAS(Network Attached Storage)などのネットワークに接続して使用する記憶装置である。本実施形態において、第1記憶装置535は、複数台設けられている。
 第1記憶装置535が複数台設けられる場合において、1つの第1記憶装置535が特定のカメラCA及び/又はセンサSEと関連付けられていてもよい、すなわち、ある特定の第1記憶装置535にデータを記憶できるカメラCA及び/又はセンサSEは固定されていてもよい。または、各カメラCA及び/又はセンサSEは、複数の第1記憶装置535のうち、適切な空き容量がある第1記憶装置535を適宜選択し、当該選択された第1記憶装置535にデータを送信してもよい。
 第1記憶装置535は、ネットワークインターフェース5351を介して、管理サーバ53を構成するコンピュータシステム(プロセッサ531、RAM532、ROM533、ネットワークインターフェース534などにより構成されるシステム)とアクセス可能となっている。これにより、管理サーバ53を構成するコンピュータシステムは、ネットワークインターフェース534、5351を介して、第1記憶装置535に記憶されたセンサ情報SIを取得できる。
 管理サーバ53を構成するコンピュータシステムからアクセス可能な個別の第1記憶装置535にセンサ情報SIを記憶する構成とすることにより、管理サーバ53は、管理サーバ53を構成するコンピュータシステム内部の第2記憶装置536の記憶容量が大きくなくても、大量のセンサ情報SIを外部の第1記憶装置535にて管理できる。
 また、センサ情報SIを外部の第1記憶装置535にて管理することにより、例えば、センサ情報SIの増加に従って、第1記憶装置535を追加するなどの対応をすることができる。その結果、記憶装置の容量不足によりセンサ情報SIを記憶できないといった事態が発生することを回避できる。
 第2記憶装置536は、管理サーバ53を構成するコンピュータシステム内部の記憶装置である。第2記憶装置536は、管理サーバ53にて実行されるプログラム、及び、上記の監視対象データベースDBを記憶する、例えば、ハードディスク、SSDなどの記憶装置である。また、第2記憶装置536は、上記のプログラム及びデータベースに加えて、センサ管理情報SMI、及び、記憶装置管理情報HMIを記憶する。
 センサ管理情報SMIは、自動倉庫システム100に設けられたカメラCA及びセンサSEを管理するための情報である。センサ管理情報SMIは、例えば、カメラCA及びセンサSEへアクセスするための情報、カメラCA及びセンサSEの設定、カメラCA及びセンサSEが取得したデータを記憶する第1記憶装置535の識別情報、などを含む。
 カメラCA及びセンサSEへアクセスするための情報としては、例えば、カメラCA及びセンサSEのネットワークアドレス、ネットワーク上における識別名(ホスト名)、シーケンス番号、カメラCA及びセンサSEにアクセスするためのID・パスワード、などがある。カメラCA及びセンサSEの設定としては、例えば、データの取得条件などがある。
 自動倉庫システム100において、カメラCA及びセンサSEの追加、削減、更新などがあった場合に、管理サーバ53は、センサ管理情報SMIを更新し、更新後のセンサ管理情報SMIを、第1記憶装置535、自動倉庫1a~1gのコントローラなどに通知する。
 記憶装置管理情報HMIは、上記の第1記憶装置535を管理するための情報である。記憶装置管理情報HMIは、例えば、第1記憶装置535のネットワークアドレス、ネットワーク上における識別名(ホスト名)、シーケンス番号、空き容量、バージョン情報などを含む。
 自動倉庫システム100において、第1記憶装置535の追加、削減、更新などがあった場合に、管理サーバ53は、記憶装置管理情報HMIを更新し、更新後の記憶装置管理情報HMIを、カメラCA及びセンサSEなどに通知する。
 監視対象データベースDBは、監視対象に関する情報を管理するためのデータベースである。図9に示すように、監視対象データベースDBの1つのレコードは、監視対象情報MIと、アクセス情報AIと、時刻情報TIと、を有する。1つのレコードにおいて、これらの情報は互いに関連付けられている。図9は、監視対象データベースに記憶される1レコードのデータ構造の一例を示す図である。
 監視対象情報MIは、監視対象に関する情報である。監視対象情報MIは、キー情報KIと付加情報ADIとを含む。キー情報KIは、監視対象を特定するための情報である。本実施形態において、管理サーバ53にて管理される監視対象は、荷物A、自動倉庫システム100にて発生するイベント(エラー)、棚111a、111bである。従って、キー情報KIとしては、例えば、荷物A、バケットBK、又はパレットPLの識別情報、自動倉庫システム100において発生したエラー種別、棚111a、111bの識別情報、などがある。後述するように、キー情報KIは、カメラCA及び/又はセンサSEがセンサ情報SIを取得するためのトリガとなる。
 付加情報ADIは、キー情報KIに示された監視対象に関する付加的な情報である。キー情報KIが荷物A、バケットBK、又はパレットPLの識別情報であれば、付加情報ADIは、例えば、バケットBK、又は、パレットPLに収納された荷物Aの品番、品名、出荷先、出荷日時、保管先の棚111a、111bの識別情報、などである。
 キー情報KIが自動倉庫システム100において発生したエラー種別であれば、付加情報ADIは、例えば、エラーが発生した自動倉庫システム100の構成要素(スタッカクレーン13、入庫ステーション15など)にて搬送中の荷物A、バケットBK、及び/又はパレットPLの識別情報、当該荷物Aの品番、品名、出荷先、出荷日時、などである。
 キー情報KIが棚111a、111bの識別情報であれば、付加情報ADIは、例えば、キー情報KIが示す棚111a、111bに保管されている荷物A、バケットBK、又はパレットPLの識別情報、当該荷物Aの品番、品名、出荷先、出荷日時、などである。
 その他、付加情報ADIは、関連付けられたキー情報KIに基づいて取得したセンサ情報SIがどのカメラCA又はセンサSEにより取得されたかについての情報、当該カメラCA又はセンサSEの設置位置、などを含んでいてもよい。
 アクセス情報AIは、センサ情報SIの第1記憶装置535における存在位置を示す情報である。アクセス情報AIは、例えば、当該センサ情報SIを保存している第1記憶装置535のホスト名、ネットワークアドレス、及び/又はシーケンス番号と、当該第1記憶装置535内における相対パス及びディレクトリ名と、当該センサ情報SIのファイル名と、を含む情報である。
 アクセス情報AIは、その他、センサ情報SIに関する追加情報、例えば、ファイル種別(動画データ、静止画データ、通常ファイル、など)と、センサ情報SIのファイルサイズと、を含んでいてもよい。
 時刻情報TIは、センサ情報SIが取得された時刻を表す情報である。時刻情報TIは、センサ情報SIを取得したカメラCA又はセンサSEが出力した時刻であってもよい。または、管理サーバ53がセンサ情報SIを取得したタイミングにおいて、管理サーバ53が稼働中の時刻サーバが示す時刻であってもよい。管理サーバ53が稼働している時刻サーバの時刻は、例えば、第1記憶装置535、センサSE及び/又はカメラCAに通知される。これにより、管理サーバ53と、第1記憶装置535と、センサSE及び/又はカメラCAは、共通の時刻を使用できる。その結果、これらの機器毎に時刻のずれが生ずることを回避できる。
 上記の構成を有することにより、管理サーバ53は、自動倉庫システム100に設けられた複数のカメラCA及びセンサSEから取得したセンサ情報SIを、上位装置51にて管理されている情報と結びつけて、一元的に管理できる。
 他の実施形態において、管理サーバ53は、ユーザからの入力を受け付ける入力インターフェース537を有してもよい。入力インターフェース537は、例えば、キーボード、マウス、タッチパネルなどの入力機器である。これにより、ユーザは、入力インターフェース537を用いて、管理サーバ53を直接管理できる。
 他の実施形態において、管理サーバ53は、ディスプレイ538を有してもよい。ディスプレイ515は、管理サーバ53についての各種情報を表示する、例えば、液晶ディスプレイ、有機ELディスプレイなどのディスプレイである。これにより、ユーザは、例えば、ディスプレイ538に表示された情報を参照しながら、管理サーバ53を管理できる。
 なお、管理サーバ53は、上記の入力インターフェース537及び/又はディスプレイ538がなくとも、例えば、ネットワークインターフェース534を介してアクセス可能な端末を用いて、管理サーバ53に関する情報を参照しつつ管理サーバ53を管理できる。
(2)自動倉庫システムの動作
(2-1)概要
 以下、本実施形態に係る自動倉庫システム100の動作について説明する。特に、自動倉庫システム100において得られたセンサ情報SIの管理サーバ53による管理方法、及び、上位装置51などの外部端末から指定された監視対象に関するセンサ情報SIの提示方法について詳細に説明する。
(2-2)管理サーバにおけるセンサ情報の管理方法
 以下、管理サーバ53におけるセンサ情報SIの管理方法について説明する。まず、センサ情報SIの管理方法の概略について説明する。
 自動倉庫システム100が稼働中に、カメラCA及びセンサSEは、監視対象を特定するためのキー情報KIに基づいてセンサ情報SIを取得する。取得されたセンサ情報SIは、キー情報KIとともに管理サーバ53に送信される。
 管理サーバ53に送信されたセンサ情報SIは、第1記憶装置535に記憶される。管理サーバ53は、当該センサ情報SIがどの第1記憶装置535のどの位置に保存されたかを、アクセス情報AIとして、例えば、当該センサ情報SIを送信したカメラCA又はセンサSEから取得する。
 他の実施形態において、カメラCA及びセンサSEは、センサ情報SIとともにキー情報KIを送信する際に、さらに当該センサ情報SIの第1記憶装置535における保存位置(ファイルパス)の一覧をさらに管理サーバ53に送信してもよい。
 さらなる他の実施形態において、管理サーバ53は、取得されたセンサ情報SIとともに受信したキー情報KIを用いて第1記憶装置535を検索することにより、当該センサ情報SIがどの位置に保存されたかを、アクセス情報AIとして取得してもよい。これにより、例えば、第1記憶装置535の入れ替え及び/又は設置数の減少があり、センサ情報SIの保存先が変わった場合でも、適切なアクセス情報AIを取得できる。
 また、管理サーバ53は、取得したキー情報KIに示された監視対象についての付加的な情報である付加情報ADIを、上位装置51から取得する。管理サーバ53は、キー情報KIと、付加情報ADIと、アクセス情報AIと、アクセス情報AIが示すセンサ情報SIが取得された時刻を表す時刻情報TIと、を関連付けて1つのレコードとして、管理対象データベースDBに記憶する。
 以下、入庫ステーション15、15’、コンベヤ15’’にてセンサ情報SIが取得されたときの当該センサ情報SIの管理方法、スタッカクレーン13にてセンサ情報SIが取得されたときの当該センサ情報SIの管理方法、及び、秤量器3a、3bにてセンサ情報SIが取得されたときのセンサ情報SIの管理方法を例にとり、管理サーバ53におけるセンサ情報SIの管理方法についてより詳しく説明する。
(2-2-1)入庫ステーションにおいて取得されたセンサ情報の管理方法
(i)荷物などが監視対象となる場合
 以下、入庫ステーションにおいて取得されたセンサ情報SIの管理方法について、詳細に説明する。まず、入庫ステーション15にて扱われる荷物Aが監視対象となる場合のセンサ情報SIの管理方法について、図10を用いて説明する。図10は、入庫ステーションにて扱われる荷物などを監視対象とした場合のセンサ情報の管理方法の一例を示すフローチャートである。以下においては、パレットPLを扱う自動倉庫1e、1fの入庫ステーション15において、当該パレットPL(及びパレットPLに収納された荷物A)を監視対象とした場合を例にとって説明する。
 まず、作業者Wが、パレットPLに収納する荷物Aの識別情報を、読取装置RDなどを用いて読み取る。また、作業者Wは、当該荷物Aを収納したパレットPLの識別情報を、読取装置RDなどを用いて読み取る。これにより、パレットPLの識別情報と、当該パレットPLに収納された荷物Aの識別情報とが関連付けられる。読取装置RDは、パレットPLの識別情報と、当該識別情報と関連付けられた当該パレットPLに収納された荷物Aの識別情報と、を上位装置51に送信する。
 荷物Aを収納したパレットPLが入庫ステーション15に設けられた読取装置RDを通過すると、この読取装置RDが、通過したパレットPLの識別情報を読み取る。当該読取装置RDは、読み取ったパレットPLの識別情報を、キー情報KIとして、入庫ステーション15に設けられた小型のコントローラに送信する(ステップS1)。
 パレットPLの識別情報をキー情報KIとして受信した入庫ステーション15の小型のコントローラは、受信したパレットPLの識別情報を、入庫ステーション15のメインのコントローラに送信する(ステップS2)。当該メインのコントローラは、受信したパレットPLの識別情報を、上位装置51に送信する(ステップS3)。これにより、上位装置51は、特定のパレットPLが入庫ステーション15にて入庫されることと、当該パレットPLの識別情報と、を把握できる。
 また、入庫ステーション15の小型のコントローラは、カメラCA7のコントローラに、上記のステップS1にて受信したパレットPLの識別情報を、キー情報KIとして送信する(ステップS4)。このキー情報KIを受信したカメラCA7のコントローラは、カメラCA7にて画像データを取得可能である場合には、その旨(ACK信号)を、入庫ステーション15の小型のコントローラに送信する(ステップS5)。
 読取装置RDとカメラCA7の配置位置がほぼ同じであるか極近傍である場合には、上記のACK信号を受信後に、入庫ステーション15の小型のコントローラは、カメラCA7に、パレットPLが入庫ステーション15を通過している様子を画像データとして取得する指令(取得指令)を送信する(ステップS6)。
 一方、読取装置RDとカメラCA7の配置位置が離れている場合には、パレットPLが読取装置RDの配置位置からカメラCA7の配置位置に到達するまでにかかる時間だけ待機後に、入庫ステーション15の小型のコントローラは、上記の取得指令をカメラCA7に送信する。
 パレットPLの静止画を画像データとして取得する場合には、入庫ステーション15の小型のコントローラは、上記の取得指令として、静止画を取得するためのシャッタ信号をカメラCA7に送信する。これにより、カメラCA7は、当該シャッタ信号を受信した瞬間の画像データ(静止画)を取得することで、パレットPLがカメラCA7を通過する様子を示す静止画を、センサ情報SIとして取得できる。
 一方、パレットPLを撮影した所定の長さの動画を画像データとして取得する場合には、入庫ステーション15の小型のコントローラは、取得指令として、例えば、上記のACK信号を受信してから所定の時間経過後に、所定の長さの動画を撮影するための信号(ドライブレコーダ信号、以下ドラレコ信号と呼ぶことにする)を、カメラCA7に送信する。これにより、カメラCA7は、ドラレコ信号を受信後に動画の記録を停止し、パレットPLがカメラCA7を通過する前後の入庫ステーション15の様子を撮影した動画を、センサ情報SIとして取得できる。
 パレットPLがカメラCA7を通過する様子を撮影した静止画又は動画をセンサ情報SIとして取得後、カメラCA7のコントローラは、取得したセンサ情報SIと、上記のステップS4にて取得したパレットPLの識別情報(キー情報KI)と、を管理サーバ53に送信する(ステップS7)。
 このとき、カメラCA7のコントローラは、管理サーバ53から通知された記憶装置管理情報HMIを参照し、取得したセンサ情報SIを送信する第1記憶装置535を決定し、当該決定した第1記憶装置535の所定のディレクトリにセンサ情報SIを保存する。
 その後、カメラCA7のコントローラは、センサ情報SIの保存先(第1記憶装置535のホスト名又はネットワークアドレスと、当該第1記憶装置535内の相対パス)をアクセス情報AIとして、管理サーバ53に送信する。
 一方、上位装置51は、ステップS3にて受信したパレットPLの識別情報から、管理サーバ53に送信する付加情報ADIを選択し、当該選択した付加情報ADIを管理サーバ53に送信する(ステップS8)。具体的には、上位装置51は、パレットPLの識別情報から、当該パレットPLが保管される棚111a、111bの識別情報と、当該パレットPLに収納された荷物Aの識別情報、品番、品名、出荷先、出荷日時と、を付加情報ADIとして選択し、パレットPLの識別情報とともに管理サーバ53に送信する。
 なお、上位装置51から管理サーバ53への付加情報ADIの送信は、上記のステップS3にて上位装置51がパレットPLの識別情報を受信後に実行されてもよい。または、管理サーバ53がパレットPLの識別情報とアクセス情報AIとをカメラCA7のコントローラから受信後、管理サーバ53から付加情報ADIの要求があったときに実行されてもよい。
 パレットPLの識別情報(キー情報KI)と、センサ情報SIへのアクセス情報AIと、付加情報ADIと、を受信後、管理サーバ53は、キー情報KI(パレットPLの識別情報)と、付加情報ADIと、アクセス情報AIと、上記の時刻情報TIと、を関連付けて1つのレコードとし、当該1つのレコードを監視対象データベースDBに記憶する。
 このようにして、管理サーバ53は、特定のパレットPL(及び当該パレットPLに収納された荷物A)を監視対象とした場合のセンサ情報SIと、当該特定のパレットPL(及び収納された荷物A)についての付加情報ADI(例えば、荷物Aの品番、品名、出荷先、出荷日時など)と、センサ情報SIを取得した時刻情報TIと、を一元的に管理できる。
(ii)入庫ステーションにおいて発生したエラーを監視対象とした場合
 次に、入庫ステーション15において発生したエラー(イベントの一例)を監視対象とした場合のセンサ情報SIの管理方法について、図11を用いて説明する。図11は、入庫ステーションにおいて発生したエラーを監視対象とした場合のセンサ情報の管理方法の一例を示すフローチャートである。以下では、入庫ステーション15に設けられた読取装置RDが、入庫ステーション15を通過中のパレットPLの識別情報を適切に読み取ることができなかった場合を例にとり、センサ情報SIの管理方法を説明する。
 入庫ステーション15に設けられた読取装置RDが、入庫ステーション15を通過中のパレットPLの識別情報を適切に読み取ることができなかった場合、当該読取装置RDは、入庫ステーション15の小型のコントローラにエラー(ノーリードエラー)をキー情報KIとして送信する(ステップS11)。
 ノーリードエラーをキー情報KIとして受信した入庫ステーション15の小型のコントローラは、ノーリードエラーをキー情報KIとして上位装置51に送信する(ステップS12)。これにより、上位装置51は、入庫ステーション15にてエラーが発生したことを把握できる。
 また、入庫ステーション15の小型のコントローラは、上記のノーリードエラーをキー情報KIとしてカメラCA7に送信する(ステップS13)。このキー情報KIを受信したカメラCA7のコントローラは、カメラCA7にて画像データを取得可能である場合には、ACK信号を、入庫ステーション15の小型のコントローラに送信する(ステップS14)。
 上記のACK信号を受信後、入庫ステーション15の小型のコントローラは、カメラCA7に、パレットPLが入庫ステーション15を通過している様子を画像データとして取得する取得指令(シャッタ信号、又は、ドラレコ信号)を送信する(ステップS15)。
 識別情報を読み取れなかったパレットPLがカメラCA7を通過する様子を撮影した静止画又は動画をセンサ情報SIとして取得後、カメラCA7のコントローラは、取得したセンサ情報SIと、上記のステップS13にて取得したノーリードエラー(キー情報KI)と、を管理サーバ53に送信する(ステップS16)。
 このとき、カメラCA7のコントローラは、管理サーバ53から通知された記憶装置管理情報HMIを参照し、取得したセンサ情報SIを送信する第1記憶装置535を決定し、当該決定した第1記憶装置535の所定のディレクトリにセンサ情報SIを保存する。
 その後、カメラCA7のコントローラは、センサ情報SIの保存先(第1記憶装置535のホスト名又はネットワークアドレスと、当該第1記憶装置535内の相対パス)をアクセス情報AIとして、管理サーバ53に送信する。
 一方、上位装置51は、例えば、ステップS12にて受信したノーリードエラーの内容に基づいて、識別情報を読み取れなかったパレットPLの識別情報と、当該パレットPLに収納されている荷物Aを特定する。上記のように、パレットPLを自動倉庫1e、1fにて入庫する場合、パレットPLの識別情報と、当該パレットPLに収納する荷物Aの識別情報は、作業者Wにより入庫前に読み取られている。また、当該読み取られた識別情報は、上位装置51に送信されている。
 従って、上位装置51は、例えば、ノーリードエラーが発生した入庫ステーション15と、ノーリードエラーの発生時刻とに基づいて、入庫ステーション15に設けられた読取装置RDが識別情報を読み取れなかったパレットPLと、当該パレットPLに収納されている荷物Aと、を特定できる。
 なお、識別情報を読み取ることができなかったパレットPLは、入庫ステーション15から他のエリア(専用エリア)へと移動される。その後、作業者Wにより、当該パレットPLの識別情報の再読取、及び/又は、新たな識別情報を当該パレットPLに付する作業が実行される。
 識別情報を読み取れなかったパレットPLを特定後、上位装置51は、特定されたパレットPLが保管される棚111a、111bの識別情報と、特定されたパレットPLに収納されている荷物Aの識別情報、品番、品名、出荷先、出荷日時と、を付加情報ADIとして選択し、ノーリードエラー(キー情報KI)とともに管理サーバ53に送信する(ステップS17)。
 ノーリードエラー(キー情報KI)と、センサ情報SIへのアクセス情報AIと、付加情報ADIと、を受信後、管理サーバ53は、キー情報KI(ノーリードエラー)と、付加情報ADIと、アクセス情報AIと、上記の時刻情報TIと、を関連付けて1つのレコードとし、当該1つのレコードを監視対象データベースDBに記憶する。
 このようにして、管理サーバ53は、ノーリードエラーの発生を監視対象とした場合のセンサ情報SIと、識別情報を読み取れなかったパレットPL(及び収納された荷物A)についての付加情報ADI(例えば、荷物Aの品番、品名、出荷先、出荷日時など)と、センサ情報SIを取得した時刻情報TIと、を一元的に管理できる。
(2-2-2)スタッカクレーンにおいて取得されたセンサ情報の管理方法
(i)荷物などが監視対象となる場合
 次に、スタッカクレーン13において取得されたセンサ情報SIの管理方法について、詳細に説明する。まず、スタッカクレーン13において取り扱われる荷物A、バケットBK、又はパレットPLが監視対象となる場合のセンサ情報SIの管理方法について、図12を用いて説明する。図12は、スタッカクレーンにおいて取り扱われる荷物などが監視対象となる場合のセンサ情報の管理方法の一例を示すフローチャートである。以下においては、パレットPLを扱う自動倉庫1e、1fにおいてパレットPLの識別情報がキー情報KIとして発出された場合を例にとって説明する。
 まず、上位装置51が、スタッカクレーン13にて搬送するパレットPLの識別情報を、キー情報KIとして、スタッカクレーン13のコントローラに送信する(ステップS21)。
 その後、受信した識別情報にて識別されるパレットPLが入庫ステーション15からスタッカクレーン13への移載が可能な位置に到達したら、スタッカクレーン13のコントローラは、スタッカクレーン13に対して、当該パレットPLの搬送指示を出力する(ステップS22)。当該搬送指示には、スタッカクレーン13にて搬送するパレットPLの識別情報が含まれている。これにより、スタッカクレーン13は、パレットPLの搬送を開始する。
 また、搬送指示を受信したスタッカクレーン13は、搬送指示に含まれるパレットPLの識別情報を、キー情報KIとしてカメラCA10に送信する(ステップS23)。このキー情報KIを受信したカメラCA10のコントローラは、カメラCA10にて画像データを取得可能である場合には、ACK信号を、スタッカクレーン13に送信する(ステップS24)。
 上記のACK信号を受信後、スタッカクレーン13は、カメラCA10に、スタッカクレーン13の昇降台135に載置された搬送中のパレットPLの様子を画像データとして取得する取得指令を送信する(ステップS25)。
 パレットPLの静止画を画像データとして取得する場合には、スタッカクレーン13は、上記の取得指令として、静止画を取得するためのシャッタ信号をカメラCA10に送信する。これにより、カメラCA10は、当該シャッタ信号を受信した瞬間の画像データ(静止画)を取得することで、昇降台135に載置されているパレットPLの様子を示す静止画を、センサ情報SIとして取得できる。
 一方、パレットPLを撮影した動画を画像データとして取得する場合には、スタッカクレーン13は、取得指令として、例えば、上記のACK信号を受信してから所定の時間経過後に、所定の長さの動画を撮影するためのドラレコ信号を、カメラCA10に送信する。これにより、カメラCA10は、ドラレコ信号を受信後に動画の記録を停止し、パレットPLが昇降台135に載置されて搬送される様子を撮影した動画を、センサ情報SIとして取得できる。
 パレットPLがスタッカクレーン13にて搬送される様子を撮影した静止画又は動画をセンサ情報SIとして取得後、カメラCA10のコントローラは、取得したセンサ情報SIと、上記のステップS23にて取得したパレットPLの識別情報(キー情報KI)と、を管理サーバ53に送信する(ステップS26)。
 このとき、カメラCA10のコントローラは、管理サーバ53から通知された記憶装置管理情報HMIを参照し、取得したセンサ情報SIを送信する第1記憶装置535を決定し、当該決定した第1記憶装置535の所定のディレクトリにセンサ情報SIを保存する。
 その後、カメラCA10のコントローラは、センサ情報SIの保存先(第1記憶装置535のホスト名又はネットワークアドレスと、当該第1記憶装置535内の相対パス)をアクセス情報AIとして、管理サーバ53に送信する。
 一方、上位装置51は、ステップS21にて送信したパレットPLの識別情報から、管理サーバ53に送信する付加情報ADIを選択し、当該選択した付加情報ADIを管理サーバ53に送信する(ステップS27)。具体的には、上位装置51は、パレットPLの識別情報から、当該パレットPLが保管される棚111a、111bの識別情報と、当該パレットPLに収納された荷物Aの識別情報、品番、品名、出荷先、出荷日時と、を付加情報ADIとして選択し、パレットPLの識別情報とともに管理サーバ53に送信する。
 パレットPLの識別情報(キー情報KI)と、センサ情報SIへのアクセス情報AIと、付加情報ADIと、を受信後、管理サーバ53は、キー情報KI(パレットPLの識別情報)と、付加情報ADIと、アクセス情報AIと、上記の時刻情報TIと、を関連付けて1つのレコードとし、当該1つのレコードを監視対象データベースDBに記憶する。
 このようにして、管理サーバ53は、スタッカクレーン13にて搬送中のパレットPL(及び当該パレットPLに収納された荷物A)を監視対象とした場合のセンサ情報SIと、当該パレットPL(及び収納された荷物A)についての付加情報ADI(例えば、荷物Aの品番、品名、出荷先、出荷日時など)と、センサ情報SIを取得した時刻情報TIと、を一元的に管理できる。
(ii)棚が監視対象となる場合
 スタッカクレーン13では、ある1つの棚111a、111bから他の棚111a、111bへの荷物A、バケットBK、パレットPLの移動(棚卸と呼ぶことにする)が行われる場合がある。この場合、棚卸したいパレットPLなどが保管されている棚卸元の棚111a、111bの識別情報と、当該パレットPLなどの棚卸先の棚111a、111bの識別情報と、棚卸元の棚111a、111bから棚卸先の棚111a、111bに到達するまでに通過する棚111a、111bの識別情報と、がキー情報KIとなる。すなわち、スタッカクレーン13を稼働することにより、棚111a、111bを監視対象とできる。
 以下、棚111a、111bを監視対象とした場合のセンサ情報SIの管理方法について、図13を用いて説明する。図13は、棚を監視対象とした場合のセンサ情報の管理方法の一例を示すフローチャートである。以下においては、パレットPLを扱う自動倉庫1e、1fにおいて棚111a、111bの識別情報がキー情報KIとして発出された場合を例にとって説明する。
 まず、上位装置51が、上記の棚111a、111bの識別情報を含んだキー情報KIを、スタッカクレーン13のコントローラに送信する(ステップS31)。
 スタッカクレーン13のコントローラは、キー情報KIを受信後、スタッカクレーン13に、棚卸指示を出力する(ステップS32)。この棚卸指示には、キー情報KIが含まれている。従って、当該棚卸指示を受信したスタッカクレーン13は、キー情報KIに含まれている棚卸元の棚111a、111bの識別情報から、棚卸元の棚111a、111bの配置位置を特定する。
 その後、棚卸指示を受信したスタッカクレーン13は、キー情報KIから特定した、棚卸元の棚111a、111bの配置位置に、走行台車133及び昇降台135を移動させる。
 また、棚卸指示を受信したスタッカクレーン13は、棚卸指示に含まれる棚111a、111bの識別情報を、キー情報KIとしてカメラCA10に送信する(ステップS33)。このキー情報KIを受信したカメラCA10のコントローラは、カメラCA10にて画像データを取得可能である場合には、ACK信号を、スタッカクレーン13に送信する(ステップS34)。
 上記のACK信号を受信して、棚卸元の棚111a、111bの配置位置に走行台車133及び昇降台135が到達後、スタッカクレーン13は、カメラCA10に対して、パレットPLを棚卸元の棚111a、111bから昇降台135へ移載して、棚卸先の棚111a、111bに当該パレットPLを載置するまでの一連の棚卸作業を、動画として取得するドラレコ信号を送信する(ステップS35)。
 これにより、カメラCA10は、棚卸元の棚111a、111bにおけるパレットPLの保管状態と、棚卸先の棚111a、111bにおけるパレットPLの保管状態に加えて、棚卸元の棚111a、111bから棚卸先の棚111a、111bに到達するまでに通過する棚111a、111bにおけるパレットPLの保管状態を示す動画を、センサ情報SIとして取得できる。
 パレットPLの一連の棚卸作業の様子を撮影した動画をセンサ情報SIとして取得後、カメラCA10のコントローラは、取得したセンサ情報SIと、上記のステップS33にて取得した棚111a、111bの識別情報(キー情報KI)と、を管理サーバ53に送信する(ステップS36)。
 このとき、カメラCA10のコントローラは、管理サーバ53から通知された記憶装置管理情報HMIを参照し、取得したセンサ情報SIを送信する第1記憶装置535を決定し、当該決定した第1記憶装置535の所定のディレクトリにセンサ情報SIを保存する。
 その後、カメラCA10のコントローラは、センサ情報SIの保存先(第1記憶装置535のホスト名又はネットワークアドレスと、当該第1記憶装置535内の相対パス)をアクセス情報AIとして、管理サーバ53に送信する。
 一方、上位装置51は、ステップS31にて送信した棚111a、111bの識別情報から、管理サーバ53に送信する付加情報ADIを選択し、当該選択した付加情報ADIを管理サーバ53に送信する(ステップS37)。具体的には、上位装置51は、棚卸対象のパレットPLの識別情報と、当該パレットPLに収納された荷物Aの識別情報、品番、品名、出荷先、出荷日時と、を付加情報ADIとして送信する。それに加えて、付加情報ADIには、棚卸元の棚111a、111bから棚卸先の棚111a、111bに到達するまでに通過した各棚111a、111bに保管されたパレットPLの識別情報と、当該パレットPLに収納された荷物Aの識別情報、品番、品名、出荷先、出荷日時と、を含んでいる。
 パレットPLの識別情報(キー情報KI)と、センサ情報SIへのアクセス情報AIと、付加情報ADIと、を受信後、管理サーバ53は、キー情報KI(パレットPLの識別情報)と、付加情報ADIと、アクセス情報AIと、上記の時刻情報TIと、を関連付けて1つのレコードとし、当該1つのレコードを監視対象データベースDBに記憶する。
 このようにして、管理サーバ53は、棚卸対象のパレットPLと、棚卸作業中に通過した各棚111a、111bとを監視対象とした場合のセンサ情報SIと、当該パレットPL及び棚111a、111bについての付加情報ADIと、センサ情報SIを取得した時刻情報TIと、を一元的に管理できる。
(iii)スタッカクレーンにおいて発生したエラーを監視対象とする場合
 次に、スタッカクレーン13において発生したエラー(イベントの一例)を監視対象とする場合のセンサ情報SIの管理方法について、図14を用いて説明する。図14は、スタッカクレーンにおいて発生したエラーを監視対象とする場合のセンサ情報の管理方法の一例を示すフローチャートである。以下においては、スタッカクレーン13において、昇降台135からパレットPLがはみ出した場合を例にとって、センサ情報SIの管理方法を説明する。
 なお、スタッカクレーン13においては、昇降台135からパレットPLなどがはみ出す場合だけでなく、パレットPLに収納された荷物Aが崩れる荷崩れが発生した場合もエラーが発生する。スタッカクレーン13において荷崩れが発生した場合にも、以下と同様にして、荷崩れを監視対象として、荷崩れの様子を示すセンサ情報SIを取得し管理できる。
 例えば、スタッカクレーン13に設けられたセンサSEが、昇降台135からパレットPLがはみ出した状態を検出したとき、スタッカクレーン13は、荷はみ出しのエラーや搬送していたパレットや荷物の識別情報をキー情報KIとして、上位装置51に送信する(ステップS41)。また、スタッカクレーン13は、当該荷はみ出しのエラーをキー情報KIとして、カメラCA10に送信する(ステップS42)。このキー情報KIを受信したカメラCA10のコントローラは、カメラCA10にて画像データを取得可能である場合には、ACK信号を、スタッカクレーン13に送信する(ステップS43)。
 上記のACK信号を受信後、スタッカクレーン13は、カメラCA10に、当該ACK信号の受信前から現在までの動画を取得するドラレコ信号を送信する(ステップS44)。これにより、カメラCA10は、センサSEなどにより荷はみ出しが検出される前のパレットPLの様子を撮影した動画、すなわち、荷はみ出しエラーのイベントが発生した前後の荷はみ出しの状態を撮影したデータ部分を、センサ情報SIとして取得できる。
 荷はみ出しの様子を撮影した動画をセンサ情報SIとして取得後、カメラCA7のコントローラは、取得したセンサ情報SIと、上記のステップS42にて取得した荷はみ出しのエラーや搬送していたパレットや荷物の識別情報(キー情報KI)と、を管理サーバ53に送信する(ステップS45)。このとき、荷はみ出しを検出したセンサSEは、荷はみ出しを検出したときのセンサSEの測定結果を、センサ情報SIとして管理サーバ53に送信してもよい。
 このとき、カメラCA10(及びセンサSE)のコントローラは、管理サーバ53から通知された記憶装置管理情報HMIを参照し、取得したセンサ情報SIを送信する第1記憶装置535を決定し、当該決定した第1記憶装置535の所定のディレクトリにセンサ情報SIを保存する。
 その後、カメラCA10(及びセンサSE)のコントローラは、センサ情報SIの保存先(第1記憶装置535のホスト名又はネットワークアドレスと、当該第1記憶装置535内の相対パス)をアクセス情報AIとして、管理サーバ53に送信する。
 一方、上位装置51は、例えば、ステップS41にて受信した荷はみ出しのエラーの内容に基づいて、荷はみ出ししたパレットPLの識別情報と、当該パレットPLに収納されている荷物Aを特定する。上記のように、パレットPLを自動倉庫1e、1fにて入庫する場合、パレットPLの識別情報と、当該パレットPLに収納する荷物Aの識別情報は、作業者Wにより入庫前に読み取られている。また、当該読み取られた識別情報は、上位装置51に送信されている。
 従って、上位装置51は、例えば、荷はみ出しのエラーが発生した入庫ステーション15と、荷はみ出しのエラーの発生時刻とに基づいて、荷はみ出ししたパレットPLと、当該パレットPLに収納されている荷物Aと、を特定できる。
 また、上位装置51は、パレットPL等の搬送指令を生成しており、どのパレットPLがどのタイミングで搬送中であるかを把握している。従って、他の実施形態において、上位装置51は、荷はみ出しのエラーの発生時刻と搬送指令とに基づいて、荷はみ出ししたパレットPLと当該パレットPLに収納されている荷物Aとを特定してもよい。
 荷はみ出ししたパレットPLを特定後、上位装置51は、特定されたパレットPLが保管される棚111a、111bの識別情報と、特定されたパレットPLに収納されている荷物Aの識別情報、品番、品名、出荷先、出荷日時と、を付加情報ADIとして選択し、荷はみ出しのエラー(キー情報KI)とともに管理サーバ53に送信する(ステップS46)。
 荷はみ出しのエラー(キー情報KI)と、センサ情報SIへのアクセス情報AIと、付加情報ADIと、を受信後、管理サーバ53は、キー情報KI(荷はみ出しのエラー)と、付加情報ADIと、アクセス情報AIと、上記の時刻情報TIと、を関連付けて1つのレコードとし、当該1つのレコードを監視対象データベースDBに記憶する。
 このようにして、管理サーバ53は、荷はみ出しのエラーを監視対象とした場合のセンサ情報SIと、荷はみ出ししたパレットPL(及び収納された荷物A)についての付加情報ADI(例えば、荷物Aの品番、品名、出荷先、出荷日時など)と、センサ情報SIを取得した時刻情報TIと、を一元的に管理できる。
(2-2-3)秤量器において取得されたセンサ情報の管理方法
 以下、秤量器3a、3bにより取得されたセンサ情報SIの管理方法について、図15を用いて説明する。図15は、秤量器により取得されたセンサ情報の管理方法の一例を示すフローチャートである。
 例えば、作業者Wが、秤量器3a、3bにて秤量したい荷物Aの識別情報を端末TA1、TA2に入力する。当該端末TA1、TA2は、入力された荷物Aの識別情報を、キー情報KIとして上位装置51に送信する(ステップS51)。
 端末TA1、TA2に秤量したい荷物Aの識別情報をキー情報KIとして入力後、作業者Wは、秤量したい荷物Aを秤量器3a、3bに載置して、当該荷物Aを秤量する。また、端末TA1、TA2は、秤量中の荷物Aの画像データを取得する取得指令と、秤量中の荷物Aの識別情報と、をカメラCA1、CA2に送信する(ステップS52)。
 上記の取得指令を受信したカメラCA1、CA2は、秤量中の荷物Aの画像データ(動画、静止画)を取得する。秤量中の荷物Aの画像データを取得後、当該画像データと、荷物Aの秤量結果とをセンサ情報SIとして、荷物Aの識別情報とともに管理サーバ53に送信する(ステップS53)。センサ情報SIは、第1記憶装置535に記憶される。
 一方、上位装置51は、ステップS51にて受信した荷物Aの識別情報から、管理サーバ53に送信する付加情報ADIを選択し、当該選択した付加情報ADIを管理サーバ53に送信する(ステップS54)。具体的には、上位装置51は、識別情報に示された荷物Aの品番、品名、出荷先、出荷日時と、を付加情報ADIとして選択し、荷物Aの識別情報とともに管理サーバ53に送信する。
 荷物Aの識別情報(キー情報KI)と、センサ情報SIへのアクセス情報AIと、付加情報ADIと、を受信後、管理サーバ53は、キー情報KI(荷物Aの識別情報)と、付加情報ADIと、アクセス情報AIと、上記の時刻情報TIと、を関連付けて1つのレコードとし、当該1つのレコードを監視対象データベースDBに記憶する。
 このようにして、管理サーバ53は、秤量対象の荷物Aを監視対象とした場合のセンサ情報SI(秤量結果、秤量中の荷物Aの画像)と、当該荷物Aについての付加情報ADI(例えば、荷物Aの品番、品名、出荷先、出荷日時など)と、センサ情報SIを取得した時刻情報TIと、を一元的に管理できる。
(2-3)外部端末にて指定された監視対象に関するセンサ情報の提示方法
 以下、上位装置51などの外部端末から指定のあった監視対象に関するセンサ情報SIについて、管理サーバ53にて管理しているセンサ情報SIを外部端末に提示する方法について説明する。まず、センサ情報SIの提示方法の概略について説明する。
 上位装置51などの外部端末を用いて、管理サーバ53にて管理しているセンサ情報SIを閲覧したい場合、当該外部端末において、センサ情報SIを閲覧するためのアプリケーションプログラムを起動する。当該ソフトウェアは、ウェブブラウザであってもよいし、専用のアプリケーションソフトウェアであってもよい。
 上記のアプリケーションプログラム等が起動すると、当該プログラムは、管理サーバ53にて管理しているセンサ情報SIのリストを、監視対象データベースDBからダウンロードする。その後、外部端末のディスプレイに、センサ情報SIに関連付けられている監視対象情報MIと、時刻情報TIと、がリスト表示される。
 外部端末に表示されるセンサ情報SIのリストは、監視対象データベースDBに記憶されているリストのうち、例えば、外部端末を使用するユーザがキーワードを用いて対象を絞り込んだリストであってもよい。
 外部端末を使用するユーザは、外部端末に表示されているリストから、所望の監視対象を選択する。ユーザにより選択された監視対象に関する情報は、指定情報として、管理サーバ53に送信される。
 外部端末から指定情報を受信した管理サーバ53は、受信した指定情報に示された監視対象に関する情報と一致する監視対象情報MIを、監視対象データベースDBを検索して見つけ出す。その後、発見された監視対象情報MIに関連付けられたアクセス情報AIを用いて、指定情報により指定された監視対象の状態を示すセンサ情報SIを取得し、当該センサ情報SIと検索により発見された監視対象情報MIとを合成して合成情報FIを生成する。管理サーバ53は、生成した合成情報FIを、指定情報を送信した外部端末に送信する。
 本実施形態において、センサ情報SIは、過去に取得され管理サーバ53により管理されているセンサ情報SIのうち指定情報にて指定されたものの提示、自動倉庫システム100の指定情報にて指定された機器等の稼働状況の提示、トラブルレポートの作成、との形態で提示される。以下、それぞれのセンサ情報SIの提示方法について詳細に説明していく。
(2-3-1)過去に取得されたセンサ情報の提示方法
 以下、過去に取得され、管理サーバ53により管理されているセンサ情報SIの提示方法について、図16を用いて説明する。図16は、管理サーバにより管理されているセンサ情報の提示方法を示すフローチャートである。以下においては、外部端末として上位装置51を用いた場合を例にとって、過去に取得されたセンサ情報SIの提示方法を説明する。
 まず、ユーザは、上位装置51にて過去に取得されたセンサ情報SIをディスプレイ515に表示する閲覧ソフトウェアを起動する(ステップS101)。当該閲覧ソフトウェアを実行しているプロセッサ511は、管理サーバ53に対して、現在管理しているセンサ情報SIのリストを送信するよう要求する(ステップS102)。
 ステップS102において、プロセッサ511は、管理サーバ53が管理している全てのセンサ情報SIのリスト、すなわち、監視対象データベースDBの全てのレコードを要求してもよい。または、プロセッサ511は、閲覧ソフトウェアを介して、ユーザに対して閲覧したい監視対象を絞り込ませてもよい。
 上記リストの要求を受信した管理サーバ53は、要求されたリストに対応した監視対象データベースDBのレコードを、上位装置51に送信する(ステップS103)。全てのリストの要求があった場合には、監視対象データベースDBに記憶されている全てのレコードを上位装置51に送信する。一方、ユーザによりリスト表示したい監視対象の指定があった場合には、当該指定された監視対象に関連するレコードを監視対象データベースDBから見つけ出し、上位装置51に送信する。
 上記のリスト(レコード)を受信後、上位装置51は、図17に示すように、受信したリストをディスプレイ515に表示する(ステップS104)。図17に示す例では、自動倉庫システム100において発生したトラブル(エラー)の発生日時(発生日時)と、当該トラブルが発生した箇所(設備区分)と、当該箇所の制御を担当するブロック(制御ブロック)と、具体的なトラブルの内容(異常内容)と、トラブルが発生したときに取得したセンサ情報SIを閲覧するためのボタン(「画像」の箇所に表示)と、が表示されている。図17は、監視対象のリストを表示したときのディスプレイ画面の一例を示す図である。
 図17に示すようなリスト表示においては、上記以外にも、例えば、荷物A、バケットBK、パレットPLの識別情報、荷物Aの品番、品名、出荷先、出荷日時、などの情報が表示されていてもよい。これにより、センサ情報SIを閲覧したい監視対象をより選択しやすくなる。
 上位装置51のディスプレイ515にリストを表示後、上位装置51のユーザは、例えば、リスト表示の「画像」の箇所に表示されているボタン(画像)をクリックして、センサ情報SIを閲覧したい監視対象を指定する(ステップS105)。
 上位装置51のプロセッサ511は、ユーザにより指定されたリストについて、当該リストに関連付けられていた監視対象に関する情報を指定情報として、管理サーバ53に送信する(ステップS106)。指定情報には、監視対象データベースDBの1つのレコードに含まれる情報のうち、監視対象情報MI及び時刻情報TIが含まれていてもよいし、監視対象情報MI及び/又は時刻情報TIの一部の情報のみが含まれていてもよい。
 指定情報に含める情報は、例えば、管理サーバ53における監視対象データベースDBの検索の効率性などに基づいて、適宜決定できる。
 管理サーバ53のプロセッサ531は、上記の指定情報を受信後、受信した指定情報に対応する監視対象情報MIを、監視対象データベースDBを探索して見つけ出す(ステップS107)。具体的には、監視対象データベースDBに記憶されたレコードのうち、指定情報に含まれる情報と一致する監視対象情報MI、及び/又は、時刻情報TIが含まれるレコードを検索により見つけ出す。
 指定情報に対応する監視対象情報MI、及び/又は、時刻情報TIを発見後、管理サーバ53のプロセッサ531は、当該監視対象情報MIなどに関連付けられたアクセス情報AIを特定する(ステップS108)。
 その後、プロセッサ531は、当該アクセス情報AIと、必要に応じて記憶装置管理情報HMIと、を用いて、指定情報に対応する監視対象情報MIに示された監視対象についてのセンサ情報SIが保存されている第1記憶装置535のホスト名及び/又はネットワークアドレスと、当該第1記憶装置535のディレクトリ名(相対パス)と、を特定する。
 プロセッサ531は、ネットワークインターフェース534、5351を介して、当該特定した第1記憶装置535の特定したディレクトリにアクセスし、当該ディレクトリに保存されているセンサ情報SIをダウンロードする(ステップS109)。これにより、管理サーバ53は、指定情報により指定された監視対象に関するセンサ情報SIを、第1記憶装置535から取得できる。
 なお、ダウンロードしたセンサ情報SIは、例えば、第2記憶装置536のキャッシュ領域又は一時保存領域などに保存される。
 その後、プロセッサ531は、指定情報に対応する監視対象情報MIと、当該監視対象情報MIに関連付けられたセンサ情報SI、すなわち、ステップS109にて取得したセンサ情報SIと、を合成して合成情報FIを生成する(ステップS110)。
 本実施形態において、閲覧したいセンサ情報SIが静止画又は動画といった画像データである場合には、プロセッサ531は、画像データであるセンサ情報SIに、監視対象情報MIの内容をオーバーレイして、監視対象情報MIを文字情報により視覚的に表した合成情報FIを作成する。
 また、閲覧したいセンサ情報SIが動画データである場合には、プロセッサ531は、当該動画データにおいて、監視対象が映し出されるタイミングで、当該監視対象に関する監視対象情報MIをオーバーレイして表示するよう、合成情報FIを生成する。
 具体的には、例えば、プロセッサ531は、画像処理ソフトウェアを実行して、センサ情報SIにおいて所望の監視対象が映し出されているコマに、当該所望の監視対象に関する監視対象情報MIの文字情報を映し出す画像をオーバーレイ処理することで、図18に示すような合成情報FIを生成できる。図18は、動画データに監視対象情報をオーバーレイして作成した合成情報の一例を示す図である。
 図18に示す合成情報FIは、スタッカクレーン13にて搬送中の荷物A、パレットPL、又はバケットBKの状態を示す動画である。当該動画においては、スタッカクレーン13にて搬送中の荷物A(または、パレットPL又はバケットBKに収納されている荷物A)の識別情報、品番、品名、出荷先、出荷日時が、監視対象情報MI(付加情報ADI)として表示されている。
 また、当該動画において、スタッカクレーン13にて搬送中の荷物Aなどが昇降台135からはみ出した(荷はみ出しのエラー(イベント)が発生)状態が映し出されたタイミングにおいて、「走行中荷はみ出し検知」との強調表示された文字情報が、監視対象情報MI(キー情報KI)として表示される。また、キー情報KIとして、「走行中荷はみ出し検知」を表すエラーコードと、荷はみ出しが発生した時刻と、が表示される。
 上記のようにして合成情報FIを生成後、管理サーバ53のプロセッサ531は、ネットワークインターフェース534、514を介して、上位装置51に生成した合成情報FIを送信する(ステップS111)。合成情報FIを受信した上位装置51は、当該合成情報FIをディスプレイ515に表示する(ステップS112)。
 なお、動画データである合成情報FIを管理サーバ53から上位装置51に送信する際に、上位装置51は、合成情報FIの一部を記憶装置517にキャッシュして、キャッシュした合成情報FIの一部をディスプレイ515に表示することを逐次行うことで、合成情報FIの全体を表示してもよい(ストリーミング配信)。
 または、上位装置51は、動画データである合成情報FI全体を記憶装置517にダウンロードし、記憶装置517に記憶された合成情報FIをディスプレイ515に表示してもよい。
 また、上位装置51にて合成情報FIを表示後、管理サーバ53は、当該合成情報FIをすぐに第2記憶装置536から削除してもよいし、一定期間保存後に削除してもよい。または、生成した合成情報FIを、後日に再生する可能性を考慮して、第1記憶装置535などの大容量の記憶装置に記憶してもよい。これにより、管理サーバ53の第2記憶装置536が、生成した合成情報FIにより占有されて、容量不足となることを回避できる。
 上記にて説明したように、ユーザが上位装置51にて指定した指定情報に対応した監視対象情報MIと、当該監視対象情報MIに関連付けられたセンサ情報SIと、を合成して合成情報FIを生成し、上位装置51を介してユーザに提供することにより、所望の監視対象についてのセンサ情報SIの検索を容易にしつつ、監視対象の状態を2つの異なる情報(センサ情報SIと監視対象情報MI)にて詳細に表示できる。
 他の実施形態において、例えば、上記のステップS107において、1つの指定情報に対して対応する複数の監視対象情報MIが発見される場合がある。この場合に、図19に示すように、複数の監視対象情報MIのそれぞれに対応する複数のセンサ情報SIを第1記憶装置535から取得し、当該複数のセンサ情報SIを結合して1つの合成情報FIを生成してもよい。図19は、複数のセンサ情報を結合して生成した合成情報の一例を示す図である。これにより、監視対象についての複数のセンサ情報SIをまとめた合成情報FIを生成できる。
 この場合、複数のセンサ情報SIのそれぞれには、対応する監視対象情報MIがオーバーレイされていてもよい。これにより、複数のセンサ情報SIについての詳細を視覚的に認識できる。
(2-3-2)自動倉庫システムの機器等の稼働状況の提示方法
 以下、自動倉庫システム100に備わる機器等の稼働状況を提示する方法について、図19を用いて説明する。図20は、自動倉庫システムの機器等の稼働状況の提示方法を示すフローチャートである。
 まず、ユーザは、上位装置51にて、自動倉庫システム100の機器等の稼働状況を確認するためのソフトウェアを起動する(ステップS201)。当該ソフトウェアを実行することにより、図21に示すような、自動倉庫システム100の稼働状況の確認が可能な機器を表示した画面が、ディスプレイ515に表示される(ステップS202)。図21は、自動倉庫システムの稼働状況の確認が可能な機器を表示した画面の一例を示す図である。
 図21に示す例では、自動倉庫1a~1gの入庫ステーション15及び出庫ステーション17の近辺の概略図が表示されている。図21に示す例において、稼働状況が確認可能な機器は、四角にて強調されている。この表示では、入庫ステーション15が稼働状況の確認が可能な機器として指定されている。この表示において、四角にて強調されている機器と、当該機器の状況を撮影するカメラCAの識別情報と、は関連付けられている。
 また、図21に示す表示では、稼働状況が確認可能な機器のうち、エラーなどのイベントが発生している機器は、色づけされて強調されている。さらに、カメラの設置位置と設置方向が視覚的に示されている。
 上記の稼働状況が確認可能な機器を表示した画面上において、ユーザは、例えば、稼働状況が確認可能とされている機器の配置位置(四角の領域)をクリックする。これにより、稼働状況を確認したい機器が監視対象として指定される(ステップS203)。また、当該クリックにより、機器の状況を撮影するためのカメラCAも特定される。
 ユーザにより指定された稼働状況を確認したい機器が指定されると、稼働状況を確認したい機器の状況を撮影するカメラCAの識別情報を指定情報及びキー情報KIとして、管理サーバ53に送信する(ステップS204)。このとき、上位装置51は、稼働状況を確認したい機器にて扱われる予定の荷物Aなどの付加情報ADI(荷物Aの識別情報、品番、品名、出荷先、出荷日時、稼働状況を確認したい機器にて荷物Aが扱われる予定時刻、など)を、指定情報とともに管理サーバ53に送信する。
 管理サーバ53のプロセッサ531は、指定情報及び付加情報ADIを受信後、指定情報にて指定されたカメラCAの識別情報と、センサ管理情報SMIと、を参照して、指定されたカメラCAへのアクセス情報(当該カメラCAのホスト名、ネットワークアドレス、アクセスID、パスワードなど)を特定する(ステップS205)。
 指定されたカメラCAへのアクセス情報を特定後、プロセッサ531は、指定されたカメラCAにアクセス要求をする(ステップS206)。具体的には、プロセッサ531は、ネットワークインターフェース534、5351を介して、特定したホスト名又はネットワークアドレスのカメラCAにアクセスし、特定したアクセスID及びパスワードを当該カメラCAに送信する。
 送信したアクセスIDとパスワードにより指定されたカメラCAへのアクセスが成功すると、当該カメラCAから管理サーバ53へ、稼働状況を確認したい機器の様子を撮影したライブ映像が、センサ情報SIとして送信される(ステップS207)。合成情報FIを生成するために、当該ライブ映像は、第1記憶装置535及び/又は第2記憶装置536に一時的に記憶される。
 ライブ映像を受信中、プロセッサ531は、当該ライブ映像に必要に応じて上記の付加情報ADIの内容をオーバーレイして、合成情報FIを生成する(ステップS208)。具体的には、プロセッサ531は、付加情報ADIに含まれる稼働状況を確認したい機器にて荷物Aが扱われる予定時刻において、付加情報ADIの文字情報を映し出す画像をライブ映像にオーバーレイ処理することで、合成情報FIを生成する。
 これにより、図22A及び図22Bに示すような、稼働状況を確認したい機器のライブ映像に、付加情報ADIの内容がオーバーレイされた合成情報FIが生成される。図22Aは、稼働状況を確認したい機器のライブ映像に付加情報がオーバーレイされた合成情報の一例を示す図である。図22Bは、稼働状況を確認したい機器のライブ映像に付加情報がオーバーレイされた合成情報の他の例を示す図である。
 図22Aの例では、入庫ステーション15と、当該入庫ステーション15に存在するスタッカクレーン13のライブ映像に、当該スタッカクレーン13にて搬送予定の荷物Aの識別情報、品番、品名、ロット番号、出荷先、出荷日時がオーバーレイされている。一方、図22Bの例では、自動倉庫システム100に備わるコンベヤの稼働状況を示すライブ映像に、当該コンベヤにて移動中の荷物Aの識別情報、品番、品名、出荷先、出荷日時がオーバーレイされている。
 上記のようにして合成情報FIを生成後、管理サーバ53のプロセッサ531は、ネットワークインターフェース534、514を介して、上位装置51に生成した合成情報FIを送信する(ステップS209)。合成情報FIを受信した上位装置51は、当該合成情報FIをディスプレイ515に表示する(ステップS210)。
 このように、ユーザが上位装置51にて指定した稼働状況を確認したい機器(監視対象)のライブ映像と、当該機器において取り扱われる荷物Aなどの情報(付加情報ADI)と、を合成して合成情報FIを生成し、上位装置51を介してユーザに提供することにより、所望の監視対象の稼働状況について、2つの異なる情報(センサ情報SIと付加情報ADI)にて詳細に表示できる。
 なお、上記においては、自動倉庫システム100が備える機器の稼働状況を確認する例について説明したが、状況をライブにて確認できる対象は機器に限られない。例えば、上記のステップS203において、作業者Wが作業をしている箇所に設けられたカメラCA(の識別情報)を指定情報としてもよい。これにより、例えば、図23に示すように、作業者Wの作業状況を撮影したライブ映像と、当該作業者Wが取り扱っている荷物Aの付加情報ADIと、をオーバーレイした合成情報FIを生成し、上位装置51を介してユーザに提供できる。図23は、作業状況を確認したい作業者のライブ映像に付加情報がオーバーレイされた合成情報の一例を示す図である。
(2-3-3)トラブル状況レポートによるセンサ情報の提示方法
 以下、管理サーバ53により管理されているセンサ情報SIによりトラブル状況レポートを作成し、センサ情報SIを提示する方法について、図24を用いて説明する。図24は、管理サーバにより管理されているセンサ情報によりトラブル状況レポートを作成する方法を示すフローチャートである。トラブル状況レポートを作成する場合には、自動倉庫システム100にて発生したトラブルを監視対象とする。
 まず、ユーザは、トラブル状況レポートを作成するトラブルの種類(監視対象)を設定するためのプログラムを、上位装置51上にて起動する。当該プログラムを実行するプロセッサ511は、トラブル状況レポートを作成可能なトラブルのリストを、ディスプレイ515に表示する(ステップS301)。
 次に、ユーザは、当該リストから、トラブル状況レポートを作成するトラブル種別を選択する(ステップS302)。上位装置51のプロセッサ511は、ユーザにより選択されたトラブル種別を、指定情報として管理サーバ53に送信する(ステップS303)。
 管理サーバ53のプロセッサ531は、上記の指定情報を受信後、受信した指定情報に指定されたトラブル種別に関する監視対象情報MIを、監視対象データベースDBを探索して見つけ出す(ステップS304)。具体的には、監視対象データベースDBに記憶されたレコードのうち、指定情報に指定されたトラブル種別を含む監視対象情報MIが含まれるレコードを検索により見つけ出す。
 上記の監視対象情報MIを発見後、管理サーバ53のプロセッサ531は、当該監視対象情報MIに関連付けられたアクセス情報AIを特定する。その後、プロセッサ531は、当該アクセス情報AIと、必要に応じて記憶装置管理情報HMIと、を用いて、指定されたトラブル種別を監視対象としたセンサ情報SIが保存されている第1記憶装置535のホスト名及び/又はネットワークアドレスと、当該第1記憶装置535のディレクトリ名(相対パス)と、を特定する。
 プロセッサ531は、ネットワークインターフェース534、5351を介して、当該特定した第1記憶装置535の特定したディレクトリにアクセスし、当該ディレクトリに保存されているセンサ情報SIをダウンロードする(ステップS305)。これにより、管理サーバ53は、トラブル状況レポートに含めたいセンサ情報SIを、第1記憶装置535から取得できる。
 その後、プロセッサ531は、指定されたトラブル種別を含む監視対象情報MIと、ステップS305にて取得したセンサ情報SIと、を合成してトラブル状況レポートを合成情報FIとして生成する(ステップS306)。
 具体的には、予め用意されたトラブル状況レポートの定型フォーマット中に、上記監視対象情報MIに含まれる情報のうちの必要な情報と、ステップS305にて取得したセンサ情報SIとを配置することで、例えば、図25Aに示すようなレポートを、合成情報FIとして作成できる。図25Aは、レポートの一例を示す図である。
 また、プロセッサ531は、図25Bに示すようなトラブル復旧手順書を、図25Aに示すレポートに追加してトラブル状況レポートを作成する。図25Bに示すトラブル復旧手順書は、予め作成されて第1記憶装置535及び/又は第2記憶装置536に記憶される。図25Bは、トラブル復旧手順書の一例を示す図である。
 トラブル状況レポートを作成後、プロセッサ531は、必要に応じて、ネットワークインターフェース534、514を介して、作成したトラブル状況レポートを上位装置51に送信する(ステップS307)。トラブル状況レポートを受信した上位装置51のプロセッサ511は、受信したトラブル状況レポートをディスプレイ515に表示する(ステップS308)。
 本実施形態においては、上記のステップS302及びS303により、トラブル状況レポートを作成するトラブル種別(監視対象)が一旦指定されると、管理サーバ53のプロセッサ531が、上記のステップS304~S306を例えば所定の期間毎に実行し、自動的にトラブル状況レポートが作成される。当該作成されたトラブル状況レポートは、上位装置51などからの要求に応じて、要求が出された外部端末(上位装置51)に送信される。
 他の実施形態において、トラブル状況レポートは、上位装置51などから監視対象の指定があったときにのみ作成されてもよい。
 このようにして、ユーザにより指定されたトラブル種別についてトラブル状況レポートを作成することにより、自動倉庫システム100において発生したトラブルの詳細を知ることができる。
2.第2実施形態
 荷物Aなどを監視対象として入庫ステーション15にて取得したセンサ情報SIを管理する場合、上記の第1実施形態においては、荷物A(パレットPL)が入庫ステーション15に設けられた読取装置RDを通過し、当該読取装置RDにて読み取られた荷物A(パレットPL)の識別情報がキー情報KIとして発出されたときに、当該荷物Aなどの状態を表す画像がセンサ情報SIとして取得されていた。
 しかしながら、入庫ステーション15においてセンサ情報SIを取得するトリガとなるキー情報KIは、上記の読取装置RDにて読み取られた荷物Aなどの識別情報に限られない。第2実施形態においては、上位装置51から発出された荷物Aなどの識別情報をキー情報KIとして、当該荷物Aなどを監視対象としたセンサ情報SIを取得する。
 以下、上位装置51から発出された荷物Aなどの識別情報をキー情報KIとして、当該荷物Aなどを監視対象としたセンサ情報SIを取得する場合の管理サーバ53におけるセンサ情報SIの管理方法について、図26を用いて説明する。図26は、第2実施形態に係る、入庫ステーションにて扱われる荷物などを監視対象とした場合のセンサ情報の管理方法の一例を示すフローチャートである。
 第2実施形態においては、入庫ステーション15にて扱われる荷物Aなどを監視対象とした場合のセンサ情報の管理方法が第1実施形態と異なるのみで、その他の自動倉庫システム100の構成及び機能は、第1実施形態と同一である。従って、以下においては、第2実施形態に係る、入庫ステーション15にて扱われる荷物Aなどを監視対象とした場合のセンサ情報の管理方法のみを説明し、他の自動倉庫システム100の構成及び機能の説明は省略する。
 また、以下においては、パレットPLを扱う自動倉庫1e、1fの入庫ステーション15において、当該パレットPL(及びパレットPLに収納された荷物A)を監視対象とした場合を例にとって説明する。
 まず、作業者Wが、パレットPLに収納する荷物Aの識別情報を、読取装置RDなどを用いて読み取る。また、作業者Wは、当該荷物Aを収納したパレットPLの識別情報を、読取装置RDなどを用いて読み取る。これにより、パレットPLの識別情報と、当該パレットPLに収納された荷物Aの識別情報とが関連付けられる。読取装置RDは、パレットPLの識別情報と、当該識別情報と関連付けられた当該パレットPLに収納された荷物Aの識別情報と、を上位装置51に送信する。
 上記パレットPLの識別情報を受信後、上位装置51は、当該パレットPLの識別情報を、キー情報KIとして入庫ステーション15の(メインの)コントローラへ送信する(ステップS1’)。パレットPLの識別情報をキー情報KIとして受信した入庫ステーション15のコントローラは、受信したパレットPLの識別情報をカメラCA7に送信する(ステップS2’)。
 このキー情報KIを受信したカメラCA7のコントローラは、カメラCA7にて画像データを取得可能である場合には、ACK信号を、入庫ステーション15のコントローラに送信する(ステップS3’)。
 ACK信号を受信した入庫ステーション15のコントローラは、入庫ステーション15にて入庫するパレットPL(すなわち、キー情報KIが識別情報となっているパレットPL)を移動させる指令(発信指令)を、入庫ステーション15に出力する(ステップS4’)。これにより、入庫ステーション15に載置されたパレットPLが、入庫のために移動を開始する。
 パレットPLが入庫のために移動を開始してから所定の時間(例えば、パレットPLがカメラCA7の配置位置まで到達するのにかかる時間)経過後、入庫ステーション15の小型のコントローラは、カメラCA7に、パレットPLが入庫ステーション15を通過している様子を画像データとして取得する取得指令を送信する(ステップS5’)。これにより、パレットPLがカメラCA7を通過する様子を表す画像データ(静止画又は動画)をセンサ情報SIとして取得できる。
 パレットPLがカメラCA7を通過する様子を撮影した静止画又は動画をセンサ情報SIとして取得後、カメラCA7のコントローラは、取得したセンサ情報SIと、上記のステップS2’にて取得したパレットPLの識別情報(キー情報KI)と、を管理サーバ53に送信する(ステップS6’)。
 一方、上位装置51は、ステップS1’にて送信したパレットPLの識別情報から、管理サーバ53に送信する付加情報ADIを選択し、当該選択した付加情報ADIを、パレットPLの識別情報とともに、管理サーバ53に送信する(ステップS7’)。
 パレットPLの識別情報(キー情報KI)と、センサ情報SIへのアクセス情報AIと、付加情報ADIと、を受信後、管理サーバ53は、キー情報KI(パレットPLの識別情報)と、付加情報ADIと、アクセス情報AIと、上記の時刻情報TIと、を関連付けて1つのレコードとし、当該1つのレコードを監視対象データベースDBに記憶する。
 このようにして、キー情報KIであるパレットPLの識別情報が上位装置51から発出された場合でも、管理サーバ53は、特定のパレットPL(及び当該パレットPLに収納された荷物A)を監視対象とした場合のセンサ情報SIと、当該特定のパレットPL(及び収納された荷物A)についての付加情報ADI(例えば、荷物Aの品番、品名、出荷先、出荷日時など)と、センサ情報SIを取得した時刻情報TIと、を一元的に管理できる。
3.実施形態の共通事項
 上記第1及び第2実施形態は、下記の構成及び機能を共通に有している。
 管理サーバ53(管理サーバの一例)は、複数の箇所にセンサSE及び/又はカメラCA(センサの一例)が設けられた自動倉庫システム100(システムの一例)に関する情報を管理するサーバである。管理サーバ53は、第1記憶装置535及び第2記憶装置536(記憶装置の一例)と、ネットワークインターフェース534(ネットワークインターフェースの一例)と、プロセッサ531(プロセッサの一例)と、を備える。
 ネットワークインターフェース534は、外部の装置との通信を実行する。プロセッサ531は、監視対象情報MI(監視対象情報の一例)と、センサ情報SI(センサ情報の一例)とを、ネットワークインターフェース534を介して取得し、監視対象情報MIと、センサ情報SIと、時刻情報TI(時刻情報の一例)と、を互いに関連付けて記憶装置に記憶する処理を実行する。監視対象情報MIは、自動倉庫システム100における監視対象を特定するキー情報KI(キー情報の一例)と、監視対象に関する付加的な情報である付加情報ADI(付加情報の一例)と、を含む。センサ情報SIは、センサSE及び/又はカメラCAによりキー情報KIに基づいて取得された監視対象の状態を表すデータである。時刻情報TIは、センサ情報SIを取得した時刻を表す情報である。
 また、プロセッサ531は、指定情報を、ネットワークインターフェース534を介して、上位装置51(外部端末の一例)から取得し、取得した指定情報に対応する監視対象情報MIと、当該監視対象情報MIに関連付けられたセンサ情報SIと、を合成して合成情報FI(合成情報の一例)を生成し、ネットワークインターフェース534を介して、上位装置51に出力する処理を実行する。指定情報は、監視対象情報MIを表示した上位装置51を用いてユーザが指定した監視対象に関する情報である。
 管理サーバ53において、自動倉庫システム100に設けられた複数のセンサSE及び/又はカメラCAにて取得したセンサ情報SIは、監視対象に関する情報である監視対象情報MIと、センサ情報SIを取得した時刻情報TIと、に関連付けられて記憶装置に記憶されている。また、プロセッサ531が、ユーザが指定した指定情報に対応した監視対象情報MIと、当該監視対象情報MIに関連付けられたセンサ情報SIと、を合成して合成情報FIを生成し、上位装置51を介してユーザに提供する。これにより、所望の監視対象についてのセンサ情報SIの検索を容易にしつつ、監視対象の状態を2つの異なる情報(センサ情報SIと監視対象情報MI)にて詳細に表示できる。
4.他の実施形態
 以上、本発明の複数の実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、発明の要旨を逸脱しない範囲で種々の変更が可能である。特に、本明細書に書かれた複数の実施形態及び変形例は必要に応じて任意に組み合せ可能である。
 (A)本実施形態の管理サーバ53は、自動倉庫システム100以外のシステムに対しても適用可能である。例えば、加工機械システム、分析システム、半導体搬送システム、などに適用できる。
 (B)第1実施形態及び第2実施形態においては、管理サーバ53の記憶装置は、外部の第1記憶装置535と内部の第2記憶装置536にて構成されていたが、これに限られない。例えば、管理サーバ53が大規模なコンピュータシステムである場合など、管理サーバ53を構成するコンピュータシステムの記憶容量が十分に大きい場合、又は、当該コンピュータシステムにおいて記憶装置の追加などが容易にできる場合などには、外部に記憶装置を設けなくともよい。
 (C)第1実施形態及び第2実施形態に係る第1記憶装置535は、大容量の記憶領域を有し、インターネットなどの広域ネットワークによりアクセス可能なクラウドサーバであってもよい。これにより、管理サーバ53は、膨大な量のセンサ情報SIを管理できる。また、第1記憶装置535をクラウドサーバとすることにより、例えば、他の拠点に設けられた自動倉庫システム100のセンサ情報SIなども管理することができる。その結果、上位装置51は、当該他の拠点にて得られたセンサ情報SIもディスプレイ515に表示できる。
5.付記事項
 なお本発明は、下記のようにシステムの発明としてもとらえることができる。
 複数の箇所にセンサが設けられたシステムを管理する管理システムであって、
 前記システムを制御する上位装置と、前記システムに関する情報を管理する管理サーバと、を備え、
 前記管理サーバは、
 記憶装置と、
 外部の装置との通信を実行するネットワークインターフェースと、
 前記システムにおける監視対象を特定するキー情報と前記監視対象に関する付加的な情報である付加情報とを含む監視対象情報と、前記センサにより前記キー情報に基づいて取得された前記監視対象の状態を表すセンサ情報とを、前記ネットワークインターフェースを介して取得し、
 前記監視対象情報と、前記センサ情報と、前記センサ情報を取得した時刻を表す時刻情報と、を互いに関連付けて前記記憶装置に記憶し、
 前記監視対象情報を表示した外部端末を用いてユーザが指定した前記監視対象に関する指定情報を、前記ネットワークインターフェースを介して前記上位装置から取得し、
 前記指定情報に対応する前記監視対象情報と、当該監視対象情報に関連付けられた前記センサ情報と、を合成して合成情報を生成し、前記ネットワークインターフェースを介して前記上位装置に出力する、
 処理を実行するプロセッサと、
 を有する、管理システム。
 本発明は、複数の箇所にセンサが設けられたシステムに関する情報を管理する管理サーバに広く適用できる。
100 自動倉庫システム
1a~1g    自動倉庫
11a、11b       ラック
111a、111b   棚
13   スタッカクレーン
131 ガイドレール
133 走行台車
135 昇降台
137 移載装置
15、15'   入庫ステーション
15'' コンベヤ
17、17'   出庫ステーション
3a、3b    秤量器
5     システム制御管理部
51   上位装置
511 プロセッサ
512 RAM
513 ROM
514 ネットワークインターフェース
515 ディスプレイ
516 入力インターフェース
517 記憶装置
53   管理サーバ
531 プロセッサ
532 RAM
533 ROM
534 ネットワークインターフェース
535 第1記憶装置
5351      ネットワークインターフェース
536 第2記憶装置
537 入力インターフェース
538 ディスプレイ
AP   アクセスポイント
CA   カメラ
CA1~CA11     カメラ
LI   ライト
SE   センサ
FL   フォークリフト
RD   読取装置
TA1~TA3       端末
A     荷物
BK   バケット
PL   パレット
WM1 管理制御情報
MI   監視対象情報
KI   キー情報
ADI 付加情報
SI   センサ情報
AI   アクセス情報
TI   時刻情報
FI   合成情報
HMI 記憶装置管理情報
SMI センサ管理情報
W     作業者

Claims (10)

  1.  複数の箇所にセンサが設けられたシステムに関する情報を管理する管理サーバであって、
     記憶装置と、
     外部の装置との通信を実行するネットワークインターフェースと、
     前記システムにおける監視対象を特定するキー情報と前記監視対象に関する付加的な情報である付加情報とを含む監視対象情報と、前記センサにより前記キー情報に基づいて取得された前記監視対象の状態を表すセンサ情報とを、前記ネットワークインターフェースを介して取得し、
     前記監視対象情報と、前記センサ情報と、前記センサ情報を取得した時刻を表す時刻情報と、を互いに関連付けて前記記憶装置に記憶し、
     前記監視対象情報を表示した外部端末を用いてユーザが指定した前記監視対象に関する指定情報を、前記ネットワークインターフェースを介して前記外部端末から取得し、
     前記指定情報に対応する前記監視対象情報と、当該監視対象情報に関連付けられた前記センサ情報と、を合成して合成情報を生成し、前記ネットワークインターフェースを介して前記外部端末に出力する、
     処理を実行するプロセッサと、
     を備える管理サーバ。
  2.  前記センサ情報は、前記監視対象の状態を撮影した画像データを含み、
     前記プロセッサは、前記画像データに前記監視対象情報をオーバーレイして前記合成情報を生成する、
     請求項1に記載の管理サーバ。
  3.  前記画像データは動画データであり、
     前記プロセッサは、前記動画データにおいて、前記監視対象が映し出されたタイミングで当該監視対象に関する前記監視対象情報をオーバーレイして表示するよう、前記合成情報を生成する、
     請求項2に記載の管理サーバ。
  4.  前記監視対象は、前記システムにて発生したイベントであり、
     前記動画データは、前記監視対象としたイベントが発生した前後の状態を撮影したデータ部分のみを含む、
     請求項3に記載の管理サーバ。
  5.  前記記憶装置は、前記ネットワークインターフェースを介してアクセス可能であり前記センサ情報を記憶する外部の第1記憶装置と、第2記憶装置と、を含み、
     前記プロセッサは、
     前記監視対象情報と、当該監視対象情報に示された前記監視対象の状態を表す前記センサ情報の前記第1記憶装置における存在位置を表すアクセス情報と、前記時刻情報と、を互いに関連付けて前記第2記憶装置に記憶し、
     前記アクセス情報を用いて前記第1記憶装置から取得した前記センサ情報と前記監視対象情報とを合成して前記合成情報を生成する、
     請求項1~4のいずれか1項に記載の管理サーバ。
  6.  前記監視対象は、前記システムにて発生したトラブルであり、
     前記プロセッサは、前記トラブルに関する前記監視対象情報と、当該監視対象情報に関連付けられた前記センサ情報と、を用いてトラブル状況レポートを前記合成情報として生成する、請求項1~5のいずれか1項に記載の管理サーバ。
  7.  前記プロセッサは、複数の前記センサ情報を結合して前記合成情報を生成する、請求項1~6のいずれか1項に記載の管理サーバ。
  8.  複数の箇所にセンサが設けられたシステムを管理する管理システムであって、
     前記システムを制御する上位装置と、前記システムに関する情報を管理する管理サーバと、を備え、
     前記管理サーバは、
     記憶装置と、
     外部の装置との通信を実行するネットワークインターフェースと、
     前記システムにおける監視対象を特定するキー情報と前記監視対象に関する付加的な情報である付加情報とを含む監視対象情報と、前記センサにより前記キー情報に基づいて取得された前記監視対象の状態を表すセンサ情報とを、前記ネットワークインターフェースを介して取得し、
     前記監視対象情報と、前記センサ情報と、前記センサ情報を取得した時刻を表す時刻情報と、を互いに関連付けて前記記憶装置に記憶し、
     前記監視対象情報を表示した外部端末を用いてユーザが指定した前記監視対象に関する指定情報を、前記ネットワークインターフェースを介して前記上位装置から取得し、
     前記指定情報に対応する前記監視対象情報と、当該監視対象情報に関連付けられた前記センサ情報と、を合成して合成情報を生成し、前記ネットワークインターフェースを介して前記上位装置に出力する、
     処理を実行するプロセッサと、
     を有する、管理システム。
  9.  記憶装置を備え、複数の箇所にセンサが設けられたシステムに関する情報を管理する管理サーバにおける前記情報の管理方法であって、
     前記システムにおける監視対象を特定するキー情報と前記監視対象に関する付加的な情報である付加情報とを含む監視対象情報と、前記センサにより前記キー情報に基づいて取得された前記監視対象の状態を表すセンサ情報とを取得するステップと、
     前記監視対象情報と、前記センサ情報と、前記センサ情報を取得した時刻を表す時刻情報と、を互いに関連付けて前記記憶装置に記憶するステップと、
     前記監視対象情報を表示した外部端末を用いてユーザが指定した前記監視対象に関する指定情報を、前記外部端末から取得するステップと、
     前記指定情報に対応する前記監視対象情報と、当該監視対象情報に関連付けられた前記センサ情報と、を合成して合成情報を生成し、前記外部端末に出力するステップと、
     を備える管理方法。
  10.  請求項9に記載の管理方法をコンピュータに実行させるためのプログラム。
PCT/JP2018/041500 2017-11-15 2018-11-08 管理サーバ、管理システム、管理方法、及びプログラム WO2019098119A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019554187A JP6919718B2 (ja) 2017-11-15 2018-11-08 管理サーバ、管理システム、管理方法、及びプログラム
CN201880070308.XA CN111295879B (zh) 2017-11-15 2018-11-08 管理服务器、管理系统、管理方法以及记录介质
US16/761,276 US11412183B2 (en) 2017-11-15 2018-11-08 Management server, management system, management method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017219872 2017-11-15
JP2017-219872 2017-11-15

Publications (1)

Publication Number Publication Date
WO2019098119A1 true WO2019098119A1 (ja) 2019-05-23

Family

ID=66539579

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/041500 WO2019098119A1 (ja) 2017-11-15 2018-11-08 管理サーバ、管理システム、管理方法、及びプログラム

Country Status (4)

Country Link
US (1) US11412183B2 (ja)
JP (1) JP6919718B2 (ja)
CN (1) CN111295879B (ja)
WO (1) WO2019098119A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112917645A (zh) * 2021-02-07 2021-06-08 浙江和惠生态环境科技有限公司 飞灰成型成化方法、系统、控制方法、设备及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0881022A (ja) * 1994-09-14 1996-03-26 Murata Mach Ltd 自動倉庫の荷姿監視システム
JPH11301811A (ja) * 1998-04-16 1999-11-02 Daifuku Co Ltd 搬送設備管理装置
JP2002274611A (ja) * 2001-03-21 2002-09-25 Sumitomo Heavy Ind Ltd スタッカクレーンシステム
JP2006036485A (ja) * 2004-07-28 2006-02-09 Toyota Industries Corp 荷物搬送方法及び装置
JP2010241539A (ja) * 2009-04-03 2010-10-28 Murata Machinery Ltd 自動倉庫
JP2012192490A (ja) * 2011-03-16 2012-10-11 Toyota Motor Corp 荷姿認識装置
WO2013042447A1 (ja) * 2011-09-22 2013-03-28 村田機械株式会社 物流システムと物流システムの異常からの復旧方法
JP2015042586A (ja) * 2013-08-26 2015-03-05 株式会社ダイフク 物品保管設備
JP2016044007A (ja) * 2014-08-20 2016-04-04 村田機械株式会社 搬送システム
JP2016050106A (ja) * 2014-09-02 2016-04-11 村田機械株式会社 搬送車システム

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001282813A (ja) * 2000-03-29 2001-10-12 Toshiba Corp マルチメディアデータ検索方法、インデックス情報提供方法、マルチメディアデータ検索装置、インデックスサーバ及びマルチメディアデータ検索サーバ
US20050232574A1 (en) * 2002-07-02 2005-10-20 Fumi Kawai Video generation device, video generation method, and video storage device
JP2005157796A (ja) * 2003-11-26 2005-06-16 Canon Inc 情報処理装置、描画オブジェクト編集方法、及びプログラム
JP2006344017A (ja) * 2005-06-09 2006-12-21 Hitachi Ltd センサネットワークシステム及びセンサネットワークのデータ処理方法
JP2008236644A (ja) * 2007-03-23 2008-10-02 Fujifilm Corp 撮影装置および画像再生装置
JP5175236B2 (ja) 2009-03-31 2013-04-03 綜合警備保障株式会社 警備装置
CN102419750A (zh) * 2010-09-27 2012-04-18 北京中星微电子有限公司 一种视频检索方法及系统
JP5750697B2 (ja) * 2011-04-28 2015-07-22 オリンパス株式会社 表示装置および表示プログラム
US20130027561A1 (en) 2011-07-29 2013-01-31 Panasonic Corporation System and method for improving site operations by detecting abnormalities
US9595015B2 (en) * 2012-04-05 2017-03-14 Nokia Technologies Oy Electronic journal link comprising time-stamped user event image content
KR102126868B1 (ko) * 2013-11-15 2020-06-25 한화테크윈 주식회사 영상 처리 장치 및 방법
US10146723B2 (en) * 2013-11-21 2018-12-04 Sigsense Technologies, Inc. Sensor data correlation and analysis platform
US9516218B1 (en) * 2014-02-06 2016-12-06 Google Inc. Grouping digital images based on detected objects
CN105335387A (zh) * 2014-07-04 2016-02-17 杭州海康威视系统技术有限公司 一种视频云存储系统的检索方法
CN104133899B (zh) * 2014-08-01 2017-10-13 百度在线网络技术(北京)有限公司 图片搜索库的生成方法和装置、图片搜索方法和装置
JP6458411B2 (ja) 2014-09-02 2019-01-30 村田機械株式会社 搬送車システム
RU2602386C1 (ru) * 2015-05-26 2016-11-20 Общество с ограниченной ответственностью "Лаборатория 24" Способ визуализации объекта
CN105049795A (zh) * 2015-07-07 2015-11-11 合肥指南针电子科技有限责任公司 一种基于数据关联存储的监控系统
CN105528428A (zh) * 2015-12-09 2016-04-27 深圳市金立通信设备有限公司 一种图像显示方法及终端
KR102284448B1 (ko) * 2016-04-19 2021-08-02 캐논 가부시끼가이샤 정보 처리장치, 정보 처리방법 및 기억매체
CN105979214A (zh) * 2016-06-08 2016-09-28 胡渐佳 基于监护对象的视频事件列表建立系统和方法
JP2018036991A (ja) * 2016-09-02 2018-03-08 株式会社日立製作所 センサデータ検索システム、センサデータ検索方法及び管理計算機

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0881022A (ja) * 1994-09-14 1996-03-26 Murata Mach Ltd 自動倉庫の荷姿監視システム
JPH11301811A (ja) * 1998-04-16 1999-11-02 Daifuku Co Ltd 搬送設備管理装置
JP2002274611A (ja) * 2001-03-21 2002-09-25 Sumitomo Heavy Ind Ltd スタッカクレーンシステム
JP2006036485A (ja) * 2004-07-28 2006-02-09 Toyota Industries Corp 荷物搬送方法及び装置
JP2010241539A (ja) * 2009-04-03 2010-10-28 Murata Machinery Ltd 自動倉庫
JP2012192490A (ja) * 2011-03-16 2012-10-11 Toyota Motor Corp 荷姿認識装置
WO2013042447A1 (ja) * 2011-09-22 2013-03-28 村田機械株式会社 物流システムと物流システムの異常からの復旧方法
JP2015042586A (ja) * 2013-08-26 2015-03-05 株式会社ダイフク 物品保管設備
JP2016044007A (ja) * 2014-08-20 2016-04-04 村田機械株式会社 搬送システム
JP2016050106A (ja) * 2014-09-02 2016-04-11 村田機械株式会社 搬送車システム

Also Published As

Publication number Publication date
JPWO2019098119A1 (ja) 2020-12-17
CN111295879A (zh) 2020-06-16
US11412183B2 (en) 2022-08-09
US20200389626A1 (en) 2020-12-10
CN111295879B (zh) 2021-08-03
JP6919718B2 (ja) 2021-08-18

Similar Documents

Publication Publication Date Title
US11797923B2 (en) Item detection and transitions
US10949804B2 (en) Tote based item tracking
TWI765686B (zh) 用於在供應鏈中追蹤物品的電腦實施的系統以及方法
KR20200108752A (ko) 픽업 프로세스를 보조하기 위한 컴퓨터화된 시스템 및 방법
US11639265B1 (en) Tote and item association
WO2022131434A1 (ko) 물류 정보 관리 방법 및 이를 수행하는 전자 장치
WO2021167187A1 (ko) 재고 관리를 위한 전자 장치 및 그 동작 방법
WO2021172672A1 (ko) 로케이션 추천을 위한 동작 방법 및 이를 위한 장치
TWI817289B (zh) 用於即時監控存貨轉移的電腦實行的系統以及方法
KR20210061233A (ko) 시스템 파라미터에 기초하여 주문을 효율적으로 분배하기 위한 컴퓨터 구현 시스템 및 방법
WO2019098119A1 (ja) 管理サーバ、管理システム、管理方法、及びプログラム
TW202121277A (zh) 用於將包裹遞送至顧客的電腦實行的系統以及方法
JPH10194411A (ja) 商品在庫管理装置
US10860976B2 (en) Inventory tracking
WO2019065097A1 (ja) 監視システム(monitoring system)
EP3950537A1 (en) Maintenance method, maintenance server, and program
CN113537917A (zh) 货柜管理辅助系统及方法
JP2017168004A (ja) ロケーション管理システム
US11561838B2 (en) Computerized systems and methods for fail-safe loading of information on a user interface using a circuit breaker
US11204975B1 (en) Program interface remote management and provisioning
WO2023223013A1 (en) A warehouse management system and a method of operating such a system
KR20220136804A (ko) 이동식저울 및 이를 이용한 생산과 물류 시스템 및 그의 제어방법
JP2015196581A (ja) 荷物収納指示システム、荷物収納指示方法およびプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18878477

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019554187

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18878477

Country of ref document: EP

Kind code of ref document: A1