WO2020202993A1 - 保守方法、保守サーバ、及びプログラム - Google Patents

保守方法、保守サーバ、及びプログラム Download PDF

Info

Publication number
WO2020202993A1
WO2020202993A1 PCT/JP2020/009045 JP2020009045W WO2020202993A1 WO 2020202993 A1 WO2020202993 A1 WO 2020202993A1 JP 2020009045 W JP2020009045 W JP 2020009045W WO 2020202993 A1 WO2020202993 A1 WO 2020202993A1
Authority
WO
WIPO (PCT)
Prior art keywords
maintenance
equipment
composite image
information
server
Prior art date
Application number
PCT/JP2020/009045
Other languages
English (en)
French (fr)
Inventor
谷本 好史
Original Assignee
村田機械株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 村田機械株式会社 filed Critical 村田機械株式会社
Priority to CN202080023845.6A priority Critical patent/CN113632122A/zh
Priority to US17/599,613 priority patent/US11829958B2/en
Priority to EP20783934.1A priority patent/EP3951686A4/en
Publication of WO2020202993A1 publication Critical patent/WO2020202993A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/20Administration of product repair or maintenance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21Monitoring or handling of messages
    • H04L51/224Monitoring or handling of messages providing notification on incoming messages, e.g. pushed notifications of received messages

Definitions

  • the present invention relates to a maintenance method for maintaining equipment in a work site, a maintenance server used for the maintenance work, and a program for causing a computer to execute the maintenance method.
  • Patent Document 1 Conventionally, there is known a technique for accessing a server or terminal in a LAN and a terminal outside the LAN via a VPN (Virtual Private Network) (see, for example, Patent Document 1).
  • a VPN Virtual Private Network
  • Patent Document 1 when an external terminal accesses a server or terminal in a specific LAN via a VPN, the information for connecting to the gateway of the VPN is transmitted from the server that manages the information to the external terminal. Will be sent.
  • the information for connecting to this gateway includes the address of the gateway and the like.
  • the target facility may be specified from the location at the work site, but if information on the facility layout is not provided as in the conventional VPN connection, the target facility will be sent from an external terminal. Can be difficult to access quickly.
  • An object of the present invention is to facilitate and speedily access the equipment from an external terminal in a system for accessing the equipment in the work site from a terminal outside the work site.
  • the seemingly maintenance method of the present invention is a method executed by a maintenance server for maintaining equipment in the work site using a maintenance terminal provided at a maintenance base outside the work site.
  • the maintenance method includes the following steps. ⁇ Steps to create a site image that represents the work site. ⁇ Step to get access information to access the equipment. ⁇ A step to generate a composite image by associating an object representing a facility in a site image with access information for accessing the facility. ⁇ Step to output a composite image to the maintenance terminal. ⁇ A step that accepts the selection of objects in a composite image using a maintenance terminal. ⁇ A step to establish a communication session between the equipment corresponding to the selected object and the maintenance terminal by using the access information associated with the selected object.
  • a composite image including an object showing the arrangement of the equipment in the work site and its form is generated.
  • the generated composite image is output to an external maintenance terminal.
  • access information for accessing the corresponding equipment is associated with the object of the composite image, and when a specific object in the composite image is selected by the maintenance terminal, the access associated with the selected object is associated.
  • a communication session is established between the equipment corresponding to the object and the maintenance terminal.
  • the site image, access information, and composite image are generated for each of the plurality of work sites.
  • the user of the maintenance terminal can easily identify the equipment existing at the plurality of work sites and quickly access the specified equipment.
  • the above maintenance method may further include the following steps.
  • The step of receiving abnormality information indicating an abnormality that has occurred in the equipment from the equipment.
  • A step to generate a composite image by associating abnormality information with the object corresponding to the equipment in which the abnormality occurred.
  • the above maintenance method may further include the following steps. ⁇ If there is a change in the equipment at the work site after the composite image is generated, the step to generate a new composite image using the new access information corresponding to the change in the equipment. ⁇ Step to output a new composite image to the maintenance terminal. As a result, when there is a change in equipment at the work site, the latest composite image reflecting the change can be provided to the maintenance terminal.
  • the above maintenance method may further include a step of notifying the maintenance terminal that the composite image has been updated when a new composite image is generated. As a result, it is possible to notify the user of the maintenance terminal that the composite image has been updated and that the equipment has been changed at the work site.
  • the above maintenance method may further include a step of displaying a chat field together with a composite image.
  • the chat column provides a chat function between a maintenance worker who uses a maintenance terminal and a worker who uses a worker terminal provided at a work site.
  • the notification that the composite image has been updated is displayed in the chat column.
  • the maintenance server is a server for maintaining equipment in the work site by using a maintenance terminal provided at a maintenance base outside the work site.
  • the maintenance server includes a control unit.
  • the control unit creates a site image representing the work site, acquires access information for accessing the equipment, and associates the object representing the equipment in the site image with the access information for accessing the equipment, and creates a composite image. Is generated, the composite image is output to the maintenance terminal, the selection of the object in the composite image using the maintenance terminal is accepted, and the access information associated with the selected object is used to correspond to the selected object. Establish a communication session between and the maintenance terminal.
  • a composite image including an object showing the arrangement of equipment at the work site and its form is generated.
  • the generated composite image is output to an external maintenance terminal.
  • access information for accessing the corresponding equipment is associated with the object of the composite image, and when a specific object in the composite image is selected by the maintenance terminal, the access associated with the selected object is associated.
  • a communication session is established between the equipment corresponding to the object and the maintenance terminal.
  • control unit generates a site image, access information, and a composite image for each of the plurality of work sites.
  • the user of the maintenance terminal can easily identify the equipment existing at the plurality of work sites and quickly access the specified equipment.
  • the control unit may receive abnormality information indicating an abnormality that has occurred in the equipment from the equipment, and may generate a composite image by associating the abnormality information with the object corresponding to the equipment in which the abnormality has occurred.
  • the user of the maintenance terminal can easily and quickly access information on the abnormality that has occurred in the equipment.
  • the control unit When the equipment in the work site is changed after the composite image is generated, the control unit generates a new composite image using the new access information corresponding to the change of the equipment, and the new composite image is sent to the maintenance terminal. May be output. As a result, when there is a change in equipment at the work site, the latest composite image reflecting the change can be provided to the maintenance terminal.
  • control unit When the control unit generates a new composite image, the control unit may notify the maintenance terminal that the composite image has been updated. As a result, it is possible to notify the user of the maintenance terminal that the composite image has been updated and that the equipment has been changed at the work site.
  • the control unit may display the chat field together with the composite image.
  • the chat column provides a chat function between a maintenance worker who uses a maintenance terminal and a worker who uses a worker terminal provided at a work site.
  • the control unit displays a notification that the composite image has been updated in the chat column. As a result, it is possible to notify the workers at the work site that the equipment has been changed at the work site as well as updating the composite image.
  • the program according to still another aspect of the present invention is a program for causing a computer to execute the above maintenance method.
  • the figure which shows an example of the whole structure of a communication system The figure which shows an example of the structure of the automated warehouse system.
  • the figure which shows an example of image data The figure which shows an example of the measurement data by a sensor.
  • the figure which shows an example of the structure of a maintenance base The figure which shows an example of maintenance information (the 1).
  • the figure which shows an example of maintenance information (the 2).
  • the figure which shows an example of the gateway list The figure which shows the structure of the composite image creation information.
  • a flowchart showing the general operation of the maintenance server A flowchart showing the initial setting operation.
  • a flowchart showing an access information acquisition operation The figure which shows the transmission / reception of information in the acquisition of access information.
  • a flowchart showing the operation of the maintenance server in the operation up to the composite image output The figure which shows the transmission and reception of information in the operation up to the composite image output.
  • a flowchart showing a communication session establishment operation of the maintenance server The figure which shows the transmission / reception of information in a communication session establishment operation.
  • the figure which shows an example of the notification that the composite image was updated The figure which shows an example of the initial screen.
  • the maintenance server is a server for maintaining the equipment provided at the work site by using the maintenance terminal provided at the maintenance base located at a place away from the work site. Therefore, the maintenance server is provided in the communication system including the equipment and terminals inside the work site and the terminals existing in the maintenance base.
  • the communication system 100 according to the first embodiment as an example of the above communication system will be described with reference to FIG.
  • FIG. 1 is a diagram showing an example of the overall configuration of a communication system.
  • the communication system 100 includes an automated warehouse system 1, a maintenance base 2, a maintenance server 3, and a relay server 4 as an example of the above-mentioned work site.
  • the automated warehouse system 1 is, for example, a system arranged in a distribution center or the like for loading and unloading packages.
  • the automated warehouse system 1 has an automated warehouse 11 (an example of equipment) (FIG. 2) for loading and unloading luggage.
  • the communication system 100 of the present embodiment includes a plurality of automated warehouse systems 1.
  • the maintenance base 2 is, for example, a base where maintenance personnel who perform maintenance of the automated warehouse 11 in the automated warehouse system 1 are stationed, and terminals (maintenance terminals 21a, 21b) for performing maintenance of the automated warehouse system 1 are provided. Be prepared.
  • the maintenance terminals 21a and 21b of the maintenance base 2 can access the respective facilities of the plurality of automated warehouse systems 1.
  • the maintenance server 3 is connected to the automated warehouse system 1 and the maintenance base 2 (gateway device) via a network NW (for example, WAN).
  • NW for example, WAN
  • the maintenance server 3 is used to maintain the information (referred to as operation information) about the automated warehouse 11 (each facility) stored in the automated warehouse system 1 and the facilities managed by the maintenance base 2.
  • the maintenance server 3 uses the accumulated operation information and / or maintenance information as a worker terminal used by a worker who uses the automated warehouse 11 in the automated warehouse system 1 and a maintenance staff who uses the maintenance staff at the maintenance base 2. It is provided to terminals 21a and 21b as needed.
  • operation information and maintenance information can be shared between the worker terminal and the maintenance terminals 21a and 21b via the maintenance server 3.
  • the maintenance server 3 acts as an intermediary for establishing a communication session between the maintenance terminals 21a and 21b and the equipment when the equipment in the automated warehouse system 1 is maintained by using the maintenance terminals 21a and 21b. .. We will explain in detail later what kind of mediation will be done.
  • the relay server 4 is connected to the automated warehouse system 1 and the maintenance base 2 (gateway device) via the network NW.
  • the relay server 4 is a server that relays communication between the automated warehouse system 1 and the maintenance base 2. Further, the relay server 4 is connected to the maintenance server 3 via the network NW, and provides various information to be stored in the relay server 4 to the maintenance server 3 in response to a request from the maintenance server 3.
  • the WebSocket protocol for transmission and reception of commands and the like between each device (gateway device and the camera and sensor of the automated warehouse system 1) described later and the maintenance server 3, for example, the WebSocket protocol is used. Performed using.
  • a plurality of maintenance bases 2 may exist in the communication system 100.
  • a plurality of automated warehouse systems 1 be maintained at one maintenance base 2, but also one automated warehouse system 1 may be maintained from a plurality of maintenance bases 2.
  • FIG. 2 is a diagram showing an example of the configuration of the automated warehouse system.
  • the automated warehouse system 1 has an automated warehouse 11.
  • the automated warehouse 11 has a rack, a stacker crane, a conveyor, and the like, and performs loading / unloading, transfer, storage, and the like of luggage.
  • the stacker crane and conveyor of the automated warehouse 11 are provided with cameras CA1 to CA4 capable of capturing, for example, a still image and a moving image having a length of a predetermined time, and the status of the stacker crane and the conveyor can be checked. It can be acquired as visual operation information FI.
  • the cameras CA1 to CA4 are, for example, fisheye cameras.
  • image data (moving image) as shown in FIG. 3 can be acquired as operation information FI.
  • FIG. 3 is a diagram showing an example of image data.
  • a sensor SE for example, a temperature / humidity sensor for measuring the ambient temperature and humidity is provided in the vicinity of the automated warehouse 11, and the ambient temperature and humidity can be acquired as operation information FI.
  • the sensor SE for example, data for displaying the measured temperature and humidity in a line graph or a bar graph as shown in FIG. 4 can be acquired as measurement data (operation information FI).
  • FIG. 4 is a diagram showing an example of measurement data by the sensor.
  • the stacker crane is provided with a sensor SE for measuring a predetermined physical quantity, and when a load collapse occurs in the stacker crane, the vibration and / or loudness generated by the load collapse can be operated. It can be measured as information FI.
  • a sensor SE include an acceleration sensor, a sound sensor, and the like.
  • the automated warehouse system 1 shown in FIG. 2 four cameras CA1 to CA4 and one sensor SE are provided, but the number of cameras and sensors provided in the automated warehouse 11 is limited to the above. However, it can be arbitrary depending on the scale of the automated warehouse system 1.
  • the network configuration of the automated warehouse system 1 includes a first switching hub SH1.
  • the first switching hub SH1 connects the cameras CA1 and CA2 and the first external storage device 13a.
  • the first external storage device 13a is, for example, a NAS (Network Attached Storage) device, and stores image data acquired by the cameras CA1 and CA2.
  • a control device such as a stacker crane and a conveyor of the automated warehouse 11 is connected to the first switching hub SH1.
  • the network configuration of the automated warehouse system 1 has a second switching hub SH2.
  • the second switching hub SH2 connects the cameras CA3, CA4, the sensor SE, and the second external storage device 13b.
  • the second external storage device 13b is, for example, a NAS device, and stores image data acquired by the cameras CA3 and CA4 and measurement data acquired by the sensor SE.
  • the second switching hub SH2 is also connected to the first switching hub SH1, and the image data acquired by the cameras CA1 and CA2 can also be stored in the second external storage device 13b, and the images acquired by the cameras CA3 and CA4.
  • the data and the data acquired by the sensor SE can also be stored in the first external storage device 13a.
  • the network configuration of the automated warehouse system 1 has a server that manages the automated warehouse system 1. Specifically, it has a transport management server 15a and an information management server 15b.
  • the transport management server 15a is a computer system having various interfaces such as a CPU, a storage device (RAM, ROM, SSD, hard disk, etc.), and a network interface.
  • the transport management server 15a can communicate with the stacker crane, the conveyor, and the like of the automated warehouse 11, and by controlling these stacker cranes and the conveyor, it controls and manages the loading and unloading of luggage in the automated warehouse 11.
  • the transport management server 15a is connected to the first switching hub SH1.
  • the information management server 15b is a computer system having various interfaces such as a CPU, a storage device (RAM, ROM, SSD, hard disk, etc.), and a network interface.
  • the information management server 15b manages various data (for example, data acquired by the cameras CA1 to CA4 and the sensor SE) stored in the first external storage device 13a and the second external storage device 13b.
  • the information management server 15b acquires the information managed by the transport management server 15a as needed.
  • the information management server 15b is connected to the second switching hub SH2.
  • the network configuration of the automated warehouse system 1 has a worker terminal 17.
  • the worker terminal 17 is, for example, a personal computer, a tablet terminal, or the like.
  • the worker terminal 17 is a terminal used by a worker who works in the automated warehouse 11, and can communicate with the maintenance server 3 via the network NW. As a result, the worker can browse the operation information FI and the maintenance information MI stored in the maintenance server 3 by using the worker terminal 17.
  • the worker terminal 17 is a tablet terminal, the worker can carry the worker terminal to the installation location of the equipment (automated warehouse, camera or sensor) to be maintained and proceed with the maintenance work.
  • a terminal other than the tablet terminal for example, a personal computer
  • the camera CA1 to CA4 the sensor SE, and the like may be accessible by the worker terminal 17.
  • the network configuration of the automated warehouse system 1 includes a first gateway device 19.
  • the first gateway device 19 is a computer system having various interfaces such as a CPU, a storage device (RAM, ROM, SSD, hard disk, etc.), and a network interface. Further, the first gateway device 19 may be hardware in which a part or all of its functions are realized by SoC or the like.
  • the first gateway device 19 is connected to the second switching hub SH2 and the external network NW, and can relay communication between each facility in the network configuration of the automated warehouse system 1 and the outside. Therefore, the first gateway device 19 stores the first equipment list EL1 (described later), which lists information about the equipment connected to the first gateway device 19, in the storage device.
  • the first gateway device 19 states that a communication session should be established between each facility of the automated warehouse system 1 (cameras CA1 to CA4, sensor SE, stacker crane, conveyor control device, etc.) and maintenance terminals 21a and 21b.
  • the control for establishing a VPN session with the second gateway device 23 (described later) of the maintenance base 2 is executed.
  • the first gateway device 19 is used in the image data of the cameras CA1 to CA4 stored in the first external storage device 13a and the second external storage device 13b, the measurement data of the sensor SE, and each facility at a predetermined timing. It has a function of uploading abnormality information indicating an abnormality that has occurred to the maintenance server 3 as operation information FI. In addition, the first gateway device 19 maintains information on maintenance of each facility, operation information of each facility, photographs of the facilities taken by workers, and information on parts ordering of each facility as operation information FI. Can be uploaded to server 3.
  • the predetermined timing is, for example, every fixed time (for example, every hour, every day, etc.), the timing when the new operation information FI is saved, the timing when the existing operation information FI is updated, and the saved.
  • the timing at which the capacity of the operation information FI becomes a determined size can be appropriately determined.
  • FIG. 5 is a diagram showing an example of the configuration of the maintenance base.
  • the maintenance base 2 has maintenance terminals 21a and 21b.
  • the maintenance terminals 21a and 21b are connected to the third switching hub SH3.
  • the maintenance terminals 21a and 21b are, for example, personal computers, and are used when a maintenance worker stationed at the maintenance base 2 maintains the equipment of the automated warehouse system 1.
  • the maintenance base 2 has a second gateway device 23.
  • the second gateway device 23 is a computer system having various interfaces such as a CPU, a storage device (RAM, ROM, SSD, hard disk, etc.), and a network interface. Further, the second gateway device 23 may be hardware in which a part or all of its functions are realized by SoC or the like.
  • the second gateway device 23 is connected to the third switching hub SH3 and an external network, and relays communication between the maintenance terminals 21a and 21b and the outside. Therefore, the second gateway device 23 stores the second equipment list EL2 (described later), which lists the information about the maintenance terminals 21a and 21b connected to the second gateway device 23, in the storage device.
  • the second gateway device 23 executes control for establishing a VPN session with the first gateway device 19 when a VPN session establishment request is received from the first gateway device 19 of the automated warehouse system 1.
  • the second gateway device 23 uses the information stored in the maintenance terminals 21a and 21b and / or the core system (not shown) provided in the maintenance base 2 as the maintenance information MI at a predetermined timing as the maintenance server. It has a function to upload to 3.
  • the predetermined timing is, for example, at regular time intervals (for example, every hour, every day, etc.), when a new maintenance information MI is saved, when an existing maintenance information MI is updated, and when it is saved.
  • the timing at which the capacity of the maintenance information MI becomes a determined size can be appropriately determined.
  • Examples of the above maintenance information MI include, for example, a parts list which is a list of equipment parts as shown in FIG. 6, and a layout showing the arrangement of equipment (automated warehouse 11) in the automated warehouse system 1 as shown in FIG.
  • the second gateway device 23 can upload the inspection history of each facility of the automated warehouse system 1 and the inspection report of each facility to the maintenance server 3 as maintenance information MI.
  • the maintenance server 3 can determine which facility of the automated warehouse system 1 is related to the maintenance information MI received from the second gateway device 23 (maintenance base 2), for example, based on the file name.
  • FIG. 8 is a diagram showing an example of the hardware configuration of the maintenance server.
  • the maintenance server 3 is a computer system including a processor 31, a RAM 32, a ROM 33, a network interface 34, and a storage device 35.
  • the processor 31 is, for example, a CPU or a SoC in which a CPU and various interfaces are integrated on one chip.
  • the processor 31 executes a program stored in the storage device 35 or the like, and performs various information processing performed in the maintenance server 3.
  • the RAM 32 temporarily stores necessary information such as a program stored in the storage device 35.
  • the ROM 33 stores programs and settings for controlling the maintenance server 3.
  • the processor 31, the RAM 32, and the ROM 33 have a hardware configuration that controls to realize the functions of the maintenance server 3. Therefore, hereinafter, these three hardware configurations will be referred to as "control units" of the maintenance server 3. That is, this control unit executes the program stored in the storage device 35 and realizes the function (operation) of the maintenance server 3 described later.
  • the network interface 34 executes communication with an external terminal and / or equipment.
  • the network interface 34 is, for example, an Ethernet (registered trademark) card that communicates with an external terminal and / or equipment by wired communication, and / or a wireless LAN interface that communicates with an external terminal and / or equipment by wireless communication. Is.
  • the control unit When the maintenance server 3 transmits various information and data to the outside, the control unit outputs the information and data to the outside via the network interface 34.
  • the maintenance server 3 receives various information and data from the outside, the information and data are input to the control unit from the outside via the network interface 34.
  • the storage device 35 stores a program executed by the maintenance server 3, various information stored in the maintenance server 3, and various setting information.
  • the various information stored in the maintenance server 3 according to the present embodiment is the operation information FI related to the equipment (automated warehouse 11) of the automated warehouse system 1 and the maintenance information MI related to the maintenance of the equipment managed at the maintenance base 2. ..
  • the setting information stored in the storage device 35 of the maintenance server 3 is the user information UI, the gateway list GL, and the composite image creation information GI.
  • the user information UI is information that manages users who can log in to the maintenance server 3.
  • the gateway list GL is a list for identifying the first gateway device 19 included in each automated warehouse system 1 and the second gateway device 23 included in each maintenance base 2.
  • the composite image creation information GI is created for each automated warehouse system 1 and each maintenance base 2, and when a composite image SI (FIG. 26A) of each automated warehouse system 1 is generated, and which maintenance base 2 maintenance terminal 21a, This is information used when determining whether or not there is access from 21b.
  • the maintenance server 3 receives and stores the operation information FI related to the equipment of the automated warehouse system 1 and the maintenance information MI related to the maintenance of the equipment from the automated warehouse system 1 and the maintenance base 2. Can be done. Further, the maintenance server 3 having this configuration is an image (referred to as a composite image SI) in which the object O (described later) of the site image FM is associated with the access information AC to the equipment corresponding to the object O, as will be described later. Can be generated. Further, the composite image SI can be associated with the operation information FI and the maintenance information MI related to the corresponding equipment to each object O.
  • the maintenance server 3 may have a display 36 in addition to the above configuration.
  • the display 36 is a display such as a liquid crystal display or an organic EL display that displays various information about the maintenance server 3. As a result, the user can manage the maintenance server 3 while referring to the information displayed on the display 36, for example.
  • the maintenance server 3 may further have an input interface 37 that accepts input from the user.
  • the input interface 37 is, for example, an input device such as a keyboard, a mouse, and a touch panel. As a result, the user can directly manage the maintenance server 3 by using the input interface 37.
  • the maintenance server 3 can be managed while referring to the information about the maintenance server 3, for example, by using a terminal that can access the maintenance server 3 via the network interface 34. it can.
  • FIG. 9 is a diagram showing a hardware configuration of the relay server.
  • the relay server 4 is a computer system including a processor 41, a RAM 42, a ROM 43, a network interface 44, and a storage device 45.
  • the processor 41 is, for example, a CPU or a SoC in which a CPU and various interfaces are integrated on one chip.
  • the processor 41 executes a program stored in the storage device 45 or the like, and performs various information processing performed in the relay server 4.
  • the RAM 42 stores temporarily necessary information such as a program stored in the storage device 45.
  • the ROM 43 stores programs and settings for controlling the relay server 4.
  • the network interface 44 executes communication with an external terminal and / or equipment.
  • the network interface 44 is, for example, an Ethernet (registered trademark) card that communicates with an external terminal and / or equipment by wired communication, and / or a wireless LAN interface that communicates with an external terminal and / or equipment by wireless communication. Is.
  • the storage device 45 is a storage device such as a hard disk or SSD that stores a program executed by the relay server 4 and login information LI.
  • the storage device 45 stores a setting file or the like that describes the settings necessary for operating the relay server 4.
  • the relay server 4 may have a display 46.
  • the display 46 is a display such as a liquid crystal display or an organic EL display that displays various information about the relay server 4. As a result, the user can manage the relay server 4 while referring to the information displayed on the display 46, for example.
  • the relay server 4 may have an input interface 47 that accepts input from the user.
  • the input interface 47 is, for example, an input device such as a keyboard, a mouse, and a touch panel.
  • the user can directly manage the relay server 4 by using the input interface 47.
  • the relay server 4 can be managed while referring to the information about the relay server 4 by using a terminal that can access the relay server 4 via the network interface 44, for example. it can.
  • Information managed by the communication system (6-1) Information managed by the maintenance server The following is stored in the maintenance server 3, the relay server 4, the first gateway device 19, and the second gateway device 23. Explain the information you have. First, the information managed by the maintenance server 3 will be described. As described above, the maintenance server 3 stores the user information UI, the composite image creation information GI, and the gateway list GL in the storage device 35. As shown in FIG. 10A, the gateway list GL is, for example, a list in which the identification information of each automated warehouse system 1 and the identification information of the first gateway device 19 possessed by the automated warehouse system 1 are associated with each other. Further, the gateway list GL stores the identification information of each maintenance base 2 in association with the identification information of the second gateway device 23 possessed by the maintenance base 2. FIG. 10A is a diagram showing an example of a gateway list.
  • the identification information of each automated warehouse system 1 and each maintenance base 2 is, for example, an identification number of the automated warehouse system 1 and the maintenance base 2. Of this identification information, the identification number of the automated warehouse system 1 is also included in the composite image creation information GI described later. In the example shown in FIG. 10A, the identification number of the automated warehouse system 1 is in the 100s, and the identification number of the maintenance base 2 is in the 200s. The identification numbers of the automated warehouse system 1 and the maintenance base 2 are not limited to the example shown in FIG. 10A, and can be set arbitrarily.
  • the identification information of the first gateway device 19 and the second gateway device 23 is, for example, a login ID for the first gateway device 19 and the second gateway device 23 to log in to the relay server 4.
  • the network addresses (IP addresses) of the first gateway device 19 and the second gateway device 23 can be used as the identification information of the gateway device.
  • the user information UI stores the user ID and password for logging in to the maintenance server 3. Further, in the user information UI, a user type is associated with each user ID. The user type indicates whether the user ID belongs to a maintenance worker or is not a maintenance worker such as a worker. In addition, information on each user (for example, user's affiliation, contact information, authority level, etc.) may be stored in the user information UI.
  • the composite image creation information GI has identification information IN, site image FM, association information AI, and first equipment list EL1.
  • FIG. 10B is a diagram showing a configuration of composite image creation information.
  • the identification information IN is information for identifying the automated warehouse system 1, and is the same as the identification information of the gateway list GL.
  • the site image FM is an image representing the automated warehouse system 1. Specifically, the site image FM is a live-action image or a digital model of the automated warehouse system 1.
  • the site image FM represents each facility of the automated warehouse system 1 as an image.
  • An image of the equipment is called an object O.
  • the association information AI is information that stores the association between the operation information FI and the maintenance information MI and the equipment of the automatic warehouse system 1. Further, the association information AI is associated with the equipment of the automated warehouse system 1 and the access information AC (described later) for accessing the equipment from the maintenance terminals 21a and 21b.
  • the first equipment list EL1 is a list of information about the equipment connected to the first gateway device 19. The specific configuration will be described in detail later.
  • the login information LI managed by the relay server 4 stores a user ID for logging in to the relay server 4.
  • the login information LI includes a user ID for the first gateway device 19 and the second gateway device 23. That is, the first gateway device 19 and the second gateway device 23 log in to the relay server 4.
  • the user ID for the gateway device is associated with the network address (for example, IP address) of the gateway device having the user ID.
  • the relay server 4 can know the network address of the corresponding gateway device from the user ID of the gateway device, and can access the gateway device.
  • Each gateway device manages a list of information about equipment connected within its own LAN.
  • the first gateway device 19 manages the first equipment list EL1 shown in FIG. 11A.
  • the second gateway device 23 manages the second equipment list EL2 shown in FIG. 11B.
  • FIG. 11A is a diagram showing an example of the data structure of the first equipment list.
  • FIG. 11B is a diagram showing an example of the data structure of the second equipment list.
  • the equipment list shown in FIGS. 11A and 11B is an example, and the types of equipment and the number of equipment listed differ depending on the scale of the automated warehouse system 1 and the maintenance base 2.
  • the first equipment list EL1 managed by the first gateway device 19 includes the equipment name recording portion R1, the address recording portion R2, and the sub ID recording portion. It has R3, a subtype recording portion R4, and a state recording portion R5.
  • the equipment name recording part R1 records the equipment name.
  • the names of the cameras CA1 to CA4 (crane # 1 camera to conveyor # 2 camera), the name of the sensor SE (crane # 1 sensor), and the first external storage.
  • the name of the device 13a (external storage device # 1), the name of the second external storage device 13b (external storage device # 2), the name of the information management server 15b (information management server), and the name of the transport management server 15a (external storage device # 1).
  • Transport management server is recorded.
  • the address recording portion R2 records the network address assigned to the equipment that can be connected to the gateway device.
  • the IP addresses of "192.168.0.1” to "192.168.0.4” are recorded in the lines having the equipment names of the cameras CA1 to CA4, respectively.
  • the IP address "192.168.0.11” is recorded in the line having the equipment name of the sensor SE.
  • "192.168.0.21” and "192.168.0.22” are added to the lines having the equipment names of the external storage device # 1 and the external storage device # 2, respectively, and the information management server and the transfer.
  • the IP addresses of "192.168.0.31” and "192.168.0.32" are recorded in the line having the equipment name of the management server, respectively.
  • each row having the control device name (control panel) of the stacker crane has "192.168.0.111” and "192.168.0.112" and the control device name (PLC) of the conveyor.
  • the IP address is recorded as “192.168.0.41" and "192.168.0.42" in each of the lines.
  • the IP address recorded in the address recording portion R2 is used when a communication session is established between the gateway devices and the equipment connected to the gateway device communicates with each other via the gateway device. used.
  • the sub ID recording portion R3 records a login ID (sub ID) for the equipment to log in to the relay server 4.
  • sub-IDs "cam001” to “cam004" are recorded in the lines having the equipment names of the cameras CA1 to CA4, respectively, and "sen001” is recorded in the lines having the equipment names of the sensor SE. Sub ID of is recorded.
  • the sub IDs of "ctrl001” and “ctrl002” are recorded in the line having the equipment name of "control panel", respectively, and "PLC001” and "PLC001" and each of them are recorded in the line having the equipment name of "PLC”.
  • a sub ID of "PLC002" is recorded.
  • the subtype recording portion R4 records a user type (subtype) representing the type of equipment connected to the gateway device.
  • the subtype of "camera” is recorded in the line having the equipment name of the cameras CA1 to CA4, and the subtype of "sensor” is recorded in the line having the equipment name of the sensor SE.
  • the subtype of "controller” is recorded in the line having the equipment name of "control panel”, and the subtype of "PLC” is recorded in the line having the equipment name of "PLC”.
  • the state recording portion R5 records whether or not each equipment recorded in the equipment list is in a state where it can communicate with the gateway device.
  • the first equipment list EL1 for example, "NG" is recorded in the equipment name line of the camera CA3 and the camera CA4, while "OK” is recorded in the other lines. That is, the cameras CA3 and CA4 cannot communicate with the first gateway device 19.
  • the state recording portion R5 records "OK” for the equipment (equipment) connected to the gateway device that can communicate with the gateway device, and communication is not possible. Record "NG” for things.
  • the information for one line of the first equipment list EL1 that is, the information including at least the IP address, equipment name, sub ID, subtype, and status for one equipment is the access information AC. This is associated with the object O of the field image FM.
  • the second equipment list EL2 managed by the second gateway device 23 Similar to the first equipment list EL1, the second equipment list EL2 includes the equipment name recording portion R1, the address recording portion R2, the sub ID recording portion R3, the subtype recording portion R4, and the status recording portion R5. Have.
  • the name of the maintenance terminal 21a (maintenance terminal # 1) and the name of the maintenance terminal 21b (maintenance terminal # 2) are recorded in the equipment name recording portion R1.
  • the IP addresses of "172.28.0.2" and "172.28.0.3" are recorded in each of the lines having the equipment names of the maintenance terminals 21a and 21b. ing.
  • FIG. 12 is a flowchart showing the schematic operation of the maintenance server.
  • the maintenance server 3 accesses each facility of the automated warehouse system 1 using the maintenance terminals 21a and 21b at remote locations, the maintenance server 3 can easily identify the desired facility and enable quick access.
  • the maintenance server 3 executes the process according to the flowchart of FIG.
  • the operation shown in FIG. 12 is an operation for one automated warehouse system 1.
  • the maintenance server 3 individually executes the operations shown in FIG. 12 for each of the plurality of automated warehouse systems 1 included in the communication system 100.
  • step S1 the maintenance server 3 executes the initial setting operation for generating the composite image SI.
  • the maintenance server 3 After executing the initial setting operation, the maintenance server 3 generates a composite image SI by using the information created and acquired in the initial setting operation in step S2.
  • the maintenance server 3 outputs the generated composite image SI to the corresponding maintenance terminals 21a and 21b.
  • the maintenance terminals 21a and 21b that have received the composite image SI display the composite image SI on a display (not shown).
  • the maintenance server 3 After outputting the composite image SI, the maintenance server 3 accepts the selection of the object O in the composite image SI using the maintenance terminals 21a and 21b in step S3. Upon receiving the selection of the object O in step S3 (“Yes” in step S3), the maintenance server 3 uses the access information AC associated with the selected object O in step S4 to reach the selected object O. A command is given to establish a communication session between the corresponding equipment and the maintenance terminals 21a and 21b.
  • FIG. 13 is a flowchart showing the initial setting operation.
  • the site image FM is created and stored in the storage device 35 of the maintenance server 3.
  • the site image FM is used as a live-action image of the automated warehouse system 1
  • the live-action image is taken at a plurality of locations of the automated warehouse system 1.
  • the site image FM is created by connecting the plurality of live-action images in consideration of the position of each image taken in the automated warehouse system 1.
  • a live-action image can be taken as a panoramic image and used as a field image FM.
  • the site image FM is used as a digital model of the automated warehouse system 1, for example, a three-dimensional image of the automated warehouse system 1 drawn by using CAD or the like is used as the site image FM.
  • step S12 the maintenance server 3 acquires access information AC for accessing each facility of the automated warehouse system 1 from the maintenance terminals 21a and 21b.
  • the access information AC is acquired from the relay server 4. The operation of acquiring the access information AC will be described in detail later.
  • the maintenance server 3 After acquiring the access information AC, in step S13, the maintenance server 3 associates the acquired access information AC with the object O in the site image FM. This association can be performed, for example, as follows.
  • an image representing the equipment of the automated warehouse system 1 is specified as an object O.
  • the coordinate values of each of the specified objects O are acquired.
  • the coordinate value of the object O can be, for example, the arrangement position (coordinate value) of the pixel representing the object O in the field image FM.
  • the coordinate value of the object O and the access information AC of the equipment corresponding to the object O are associated and stored in the association information AI.
  • the maintenance server 3 can obtain the information necessary for generating the composite image SI. That is, the maintenance server 3 can obtain the composite image creation information GI by associating the site image FM, the association information AI, the first equipment list EL1 including the access information AC, and the identification information IN of the automated warehouse system 1. ..
  • the maintenance server 3 receives the operation information FI and maintenance information MI possessed by the automated warehouse system 1 and the maintenance base 2. After that, the maintenance server 3 further associates the operation information FI and the maintenance information MI of the corresponding equipment with each object O of the site image FM, and stores them in the association information AI. At this time, the maintenance server 3 associates the link to the operation information FI and the maintenance information MI with each object O.
  • the operation information FI includes abnormality information indicating an abnormality that has occurred in the equipment of the automated warehouse system 1. Therefore, by associating the operation information FI with each object O of the site image FM, the abnormality information can be associated with the object O corresponding to the equipment in which the abnormality has occurred, and the composite image SI can be generated.
  • the maintenance server 3 may execute a setting operation such as user registration for logging in to the maintenance server 3 and access restriction to information for each user as an initial setting operation.
  • FIG. 14 is a flowchart showing an operation of acquiring access information.
  • FIG. 15 is a diagram showing transmission / reception of information in acquisition of access information.
  • the maintenance server 3 transmits the equipment list request signal to the relay server 4 in step S21.
  • the maintenance server 3 first identifies the identification number of the automated warehouse system 1 in which the desired access information AC exists. After that, in the gateway list GL, the login ID of the first gateway device 19 associated with the specified identification number is specified. After specifying the login ID, the maintenance server 3 transmits the specified login ID to the relay server 4 together with the equipment list request signal (step S201).
  • the relay server 4 that has received the request signal identifies which login ID transmitted together with the request signal is that of the first gateway device 19 of the automated warehouse system 1. After that, the relay server 4 transmits the equipment list request signal to the first gateway device 19 specified above (step S202).
  • the first gateway device 19 transmits the first equipment list EL1 owned by the relay server 4 to the relay server 4 (step S203).
  • the relay server 4 transmits the first equipment list EL1 to the maintenance server 3 (step S204).
  • the maintenance server 3 stores the acquired first equipment list EL1 in the storage device 35 as the composite image creation information GI. After that, the maintenance server 3 extracts the access information AC of each facility from the stored first facility list EL1. As described above, the maintenance server 3 receives the desired first equipment list EL1 from the corresponding first gateway device 19 via the relay server 4, and receives the access information AC from the received first equipment list EL1. It can be extracted and obtained.
  • FIG. 16 is a flowchart showing the operation of the maintenance server in the operation up to the output of the composite image.
  • FIG. 17 is a diagram showing transmission / reception of information in the operation up to the output of the composite image.
  • the maintenance staff of the maintenance base 2 accesses the maintenance server 3 by using the maintenance terminal 21a will be described as an example.
  • the generation and output of the composite image SI is started when the maintenance server 3 which has completed the initial setting operation and is in operation is requested to connect to the maintenance server 3 from the maintenance terminal 21a (step S301).
  • the address of the maintenance server 3 is specified in the web browser of the maintenance terminal 21a, and this web browser outputs a connection request to the maintenance server 3.
  • the maintenance server 3 Upon receiving the connection request (“Yes” in step S31), the maintenance server 3 outputs the login screen I1 to the maintenance terminal 21a for which the connection request was made in step S32 (step S302). For example, the login screen I1 as shown in FIG. 18 is output.
  • FIG. 18 is a diagram showing an example of a login screen.
  • the maintenance staff On the login screen I1 displayed on the maintenance terminal 21a, the maintenance staff inputs his / her own user ID in the user ID input field T1 and his / her own password in the password input field T2. After that, by pressing the login button B1, the entered user ID and password are output to the maintenance server 3 as authentication information (step S303).
  • the maintenance server 3 executes the authentication operation in step S34. Specifically, the maintenance server 3 compares the received authentication information, that is, the user ID and password, with the user ID and password stored in the user information UI.
  • the maintenance server 3 ends the composite image output process. If the authentication fails, the maintenance server 3 notifies the maintenance terminal 21a trying to log in that the authentication has failed. Further, the maintenance server 3 may end the composite image output process after the authentication fails a predetermined number of times.
  • the maintenance server 3 outputs the initial screen I2 (FIG. 25) to the maintenance terminal 21a that succeeded in the authentication in step S25 (step S25). S304).
  • the configuration of the initial screen I2 will be described later.
  • the maintenance staff selects a room to be entered using the initial screen I2.
  • the worker terminal 17 or the maintenance terminal 21a transmits a chat participation request for the selected room to the maintenance server 3 as a chat entry request (step S305).
  • the maintenance server 3 Upon receiving the chat entry request from the maintenance terminal 21a, the maintenance server 3 generates the composite image SI in step S36.
  • the operation of generating the composite image SI executed in step S36 will be described in more detail with reference to FIG.
  • FIG. 19 is a flowchart showing a composite image generation operation.
  • the maintenance server 3 has operation information FI and maintenance information MI that can be viewed by the target maintenance staff, and equipment that the maintenance staff can access, regarding the equipment corresponding to each object O of the site image FM. Select.
  • the maintenance server 3 determines the operation information FI and the maintenance information MI that can be viewed by the maintenance staff identified by the user ID. Also, determine the equipment that the maintenance staff can access. Next, the maintenance server 3 refers to the association information AI, and among the operation information FI, maintenance information MI, and access information AC associated with each object O, the operation information that can be viewed by the target maintenance personnel. Extract the FI and maintenance information MI. In addition, the access information AC of the equipment that the maintenance staff can access is extracted.
  • the maintenance server 3 associates each object O with the operation information FI, maintenance information MI, and access information AC extracted for the corresponding equipment, and generates unique association information for each target maintenance person.
  • step S42 After generating the original association information, in step S42, whether the maintenance server 3 associates the operation information FI, the maintenance information MI, or the access information AC with each object O of the site image FM in the original association information. Determine if not. When none of the operation information FI, the maintenance information MI, and the access information AC is associated with the object O in the original association information (“No” in step S42), the process of generating the composite image SI proceeds to step S44.
  • step S42 when any of the operation information FI, the maintenance information MI, and the access information AC is associated with the object O in the original association information (“Yes” in step S42), the maintenance server 3 performs this in step S43.
  • a predetermined icon is arranged at the coordinate position of the site image FM in which the object O exists. This predetermined icon indicates that the operation information FI and / or the maintenance information MI is associated with the object O.
  • the access information AC of the corresponding equipment is displayed on the icon of the object O.
  • the type (shape) of the icon to be arranged differs depending on the type of the associated operation information FI and / or maintenance information MI.
  • the maintenance server 3 After arranging the icon, the maintenance server 3 generates a link that can refer to the operation information FI and the maintenance information MI selected in step S41 by clicking the icon based on the above-mentioned unique association information. At the same time, by clicking the icon displaying the access information AC, an instruction to output a command for establishing a communication session (referred to as a session establishment command) using the access information AC selected in step S41 is generated.
  • the link to the operation information FI and the maintenance information MI means information indicating the storage position of the operation information FI and / or the maintenance information MI on the maintenance server 3.
  • the link is, for example, a URL for accessing the operation information FI and / or the maintenance information MI.
  • the links to the operation information FI and the maintenance information MI associated with each object O are listed and managed as a list. Further, in the present embodiment, a link to this list is associated with each object O.
  • the access information AC is different for each facility, the instruction for outputting the communication session establishment command is directly associated with each object O.
  • an icon can be placed on the object O to which any of the operation information FI, the maintenance information MI, and the access information AC is associated, while the object O to which these information are not associated at all can be placed. Can prevent the icon from being placed.
  • step S44 After arranging the icons on the objects O as necessary, in step S44, it is confirmed whether or not the above steps S41 to S43 have been executed for all the objects O of the site image FM. That is, it is confirmed whether or not the operation information FI, maintenance information MI, and access information AC to be associated with all the objects O have been determined. If the information association has not been determined for all the objects O (“No” in step S44), the above steps S41 to S43 are further executed for the other objects O.
  • step S44 when the association of information is determined for all the objects O (“Yes” in step S44), the generation of the composite image SI (FIG. 26A) is terminated.
  • the specific configuration will be described later, but in the composite image SI, if any of the operation information FI, maintenance information MI, and access information AC is associated with the object O of the site image FM, an icon is placed on the object O. Will be done. Further, the shape of the icon differs depending on the type of information associated with the object O, and the access information AC is displayed together with the icon on the object O associated with the access information AC.
  • the maintenance server 3 combines the display screen I3 provided with the chat column A4 (FIG. 27) together with the composite image SI in step S37.
  • the maintenance staff of the user ID used to generate the image SI transmits the image SI to the maintenance terminal 21a in use (step S306).
  • a chat field A4 is provided outside the area where the composite image SI is displayed.
  • the maintenance server 3 associates the generated composite image SI with the identification information IN of the automated warehouse system 1 indicated by the composite image SI.
  • this identification information IN is included in the selection result (described later) of the object O and transmitted to the maintenance server 3.
  • the maintenance server 3 creates a site image FM representing the automated warehouse system 1 (step S11), acquires access information AC for accessing the equipment (step S12, steps S21 to S23), and then A composite image SI is generated by associating the access information AC for accessing the equipment with the object O representing the equipment in the site image FM (step S13, steps S41 to S44), and the composite image SI is connected to the maintenance terminals 21a and 21b. Is output (step S37).
  • the object O of the composite image SI generated as described above is associated with the access information AC for accessing the corresponding equipment.
  • the user (maintenance staff) of the maintenance terminals 21a and 21b can easily identify the equipment to be accessed by referring to the composite image SI.
  • the maintenance server 3 acquires the operation information FI from the automated warehouse system 1 and associates the operation information FI with the corresponding object O to generate a composite image SI.
  • the operation information FI includes abnormality information indicating an abnormality that has occurred in the equipment of the automated warehouse system 1, maintenance personnel can easily and quickly access information regarding the abnormality that has occurred in the equipment. ..
  • the maintenance server 3 outputs a display screen I3 that displays the chat column A4 together with the composite image SI. Further, the maintenance server 3 provides a chat column A4 together with the composite image SI generated by using the user ID of the worker.
  • the chat function can be used between the maintenance staff who use the maintenance terminals 21a and 21b and the worker who uses the worker terminal 17 by using the chat column A4.
  • FIG. 20 is a flowchart showing a communication session establishment operation of the maintenance server.
  • FIG. 21 is a diagram showing transmission / reception of information in the communication session establishment operation.
  • the establishment of a communication session between the maintenance terminal 21a logged in to the maintenance server 3 and the control panel (equipment name: crane # 1 control panel) of the stacker crane of the automated warehouse 11 will be described as an example.
  • the icon with the access information AC is clicked (“Yes” in step S3 of FIG. 12) in the composite image SI (FIG. 26A) of the display screen I3 displayed on the maintenance terminal 21a
  • the clicked icon The information is transmitted from the maintenance terminal 21a to the maintenance server 3 as the selection result of the object O (step S501).
  • the maintenance terminal 21a has its own IP address (in the LAN) and its maintenance terminal 21a.
  • the identification number of the maintenance base 2, the access information AC, and the identification information IN associated with the composite image SI are transmitted to the maintenance server 3 as the selection result of the object O.
  • the maintenance server 3 executes the operation associated with the icon.
  • the maintenance server 3 Upon receiving the selection result of the object O from the maintenance terminal 21a, the maintenance server 3 identifies in step S51 which first gateway device 19 the equipment to be accessed by the maintenance server 3 is connected to. Specifically, the maintenance server 3 identifies in the gateway list GL which first gateway device 19 the identification information IN of the received selection result is associated with. For example, when the identification number “101” is received as the identification information IN, the maintenance server 3 refers to the gateway list GL of FIG. 10A and identifies the first gateway device 19 having the login ID “vpn001”.
  • the maintenance server 3 also identifies the second gateway device 23 to which the maintenance terminal 21a that has transmitted the selection result of the object O is connected. For example, when receiving the identification number “201”, the maintenance server 3 refers to the gateway list GL of FIG. 10A and identifies the second gateway device 23 having the login ID “vpn002”.
  • the maintenance server 3 identifies the access information AC of the equipment that the maintenance server 3 is trying to access. Specifically, the maintenance server 3 identifies the access information AC transmitted as a result of selecting the object O as the access information AC of the equipment to be accessed. Further, in step S52, the maintenance server 3 specifies the IP address of the maintenance terminal 21a from the address of the maintenance terminal 21a received as the selection result of the object O.
  • the maintenance server 3 has the login ID (vpn001) of the first gateway device 19 specified in steps S51 to S52, the login ID (vpn002) of the specified second gateway device 23, and the specified access information AC. , And the IP address of the maintenance terminal 21a is transmitted to the relay server 4 as a connection request to the first gateway device 19 (step S502).
  • the maintenance server 3 gives a command to the relay server 4 to establish a communication session between the maintenance terminal 21a and the equipment of the automated warehouse system 1 in the communication system 100. Can be sent.
  • the relay server 4 After transmitting the command for establishing a communication session between the maintenance terminal 21a and the equipment of the automated warehouse system 1, communication is mainly performed by the relay server 4, the first gateway device 19, and the second gateway device 23.
  • the session establishment operation is performed.
  • the relay server 4 that has received the above connection request identifies the network address of the first gateway device 19 from the user ID "vpn001" of the connection request destination. Further, from the user ID "bpn002", the network address of the second gateway device 23 to which the maintenance terminal 21a is connected is specified.
  • the network address of the specified second gateway device 23, the access information AC, and the IP address of the maintenance terminal 21a are transmitted to the specified first gateway device 19 as a connection request (step S503).
  • the first gateway device 19 determines whether or not to accept the connection request. If it is determined to accept the connection request, the first gateway device 19 transmits a notification to the effect that the connection request is accepted to the second gateway device 23 having the network address included in the received connection request (). Step S504).
  • the second gateway device 23 Upon receiving the notification, the second gateway device 23 transmits its own second equipment list EL2 to the first gateway device 19 that is the source of the notification (step S505).
  • the first gateway device 19 that has received the second equipment list EL2 transmits its own first equipment list EL1 to the second gateway device 23 that is the source of the received equipment list (step S506).
  • the first gateway device 19 and the second gateway device 23 After exchanging the first equipment list EL1 and the second equipment list EL2 that each other has by the above steps S505 and S506, the first gateway device 19 and the second gateway device 23 establish a VPN session between each other. By establishing a VPN session between the first gateway device 19 and the second gateway device 23 as described above, the maintenance terminal 21a can be first accessed via the second gateway device 23 and the first gateway device 19. You can access the equipment connected to the gateway device 19.
  • the facilities of the maintenance terminal 21a and the automated warehouse system 1 are replaced with the replaced first facility list EL1 and second facility list.
  • the IP addresses recorded in the address recording portion R2 of the EL2 can be used to communicate with each other.
  • the equipment of the automated warehouse system 1 (equipment name: control panel of crane # 1 control panel) is addressed to the IP address "172.28.0.2" of the maintenance terminal 21a.
  • the maintenance terminal 21a starts, for example, a maintenance application for equipment.
  • the user (maintenance staff) of the maintenance terminal 21a can perform maintenance of the equipment (control panel) using the application.
  • the equipment of the maintenance terminal 21a and the automated warehouse system 1 is connected to the IP address used in the LAN via the first gateway device 19 and the second gateway device 23 (for example, “192.168. You can send and receive data to and from each other while ensuring security by using IP addresses such as "*. *” And "172.28. *. *” (*: Wildcard).
  • the communication session establishment operation between the maintenance terminals 21a and 21b and the equipment of the automated warehouse system 1 described with reference to FIGS. 20 and 21 is as follows. Can be summarized. As described above, when the maintenance terminals 21a and 21b select a specific object O (object O with access information AC) in the composite image SI (step S3, step S501), the maintenance server 3 sets the maintenance server 3. Using the access information AC associated with the selected object O, a communication session is established between the equipment corresponding to the object O and the maintenance terminals 21a and 21b (steps S51 to S53, steps S502). As a result, the user (maintenance staff) of the maintenance terminals 21a and 21b can easily identify the equipment to be accessed by referring to the composite image SI, and can quickly access the specified equipment.
  • a new operation information FI and maintenance information MI can be generated, or an existing operation information FI and maintenance information MI can be edited and associated with the composite image SI.
  • the maintenance server 3 changes the number of equipment when there is a change in the connection status of the equipment in the automated warehouse system 1 or when there is a change in the equipment of the automated warehouse system 1. If there is an increase or decrease, these changes can be reflected in the composite image SI.
  • FIG. 22 is a flowchart showing the operation of the maintenance server when the equipment is changed.
  • FIG. 23 is a diagram showing transmission / reception of information when the equipment is changed. For example, when a new gateway device is added in the automated warehouse system 1 and / or when equipment is removed and / or added in the existing automated warehouse system 1, the equipment is changed.
  • the 1 gateway device 19 generates (updates) the first equipment list EL1 corresponding to the change of new equipment.
  • the first gateway device 19 transmits a new first equipment list EL1 to the relay server 4 (step S601).
  • the relay server 4 that has received the new first equipment list EL1 transmits it to the maintenance server 3 (step S602). At this time, the relay server 4 transmits the identification information IN (for example, login ID) of the first gateway device 19 that has transmitted the new first equipment list EL1 together with the new first equipment list EL1.
  • the identification information IN for example, login ID
  • the maintenance server 3 that has received the new first equipment list EL1 updates the composite image SI so as to correspond to the new first equipment list EL1.
  • the update of the composite image SI is executed as follows. First, in step S61, the maintenance server 3 executes a new association between each access information AC of the new first equipment list EL1 and the object O in the composite image SI. Specifically, the maintenance server 3 first determines which composite image creation information GI should be changed based on the identification information IN transmitted together with the new first equipment list EL1. Next, the first equipment list EL1 of the corresponding composite image creation information GI is replaced with a new first equipment list EL1. Further, the maintenance server 3 executes the association between the object O and the new access information AC included in the new first equipment list EL1 and generates a new association information AI.
  • the new first equipment is performed in steps S11 to S13 (FIG. 13) and steps S21 to S23 (FIG. 14) described above. This can be achieved by executing based on the list EL1. Therefore, detailed description thereof will be omitted here.
  • the maintenance server 3 After executing the new association between the object O and the access information AC, the maintenance server 3 generates a new composite image SI based on the new composite image creation information GI in step S62 and outputs the new composite image SI to the maintenance terminals 21a and 21b. (Step S603).
  • the generation and output of the new composite image SI in step S52 can be realized by executing steps S31 to S37 (FIG. 16) and steps S41 to S44 (FIG. 19) based on the new association. .. Therefore, detailed description thereof will be omitted here.
  • the maintenance server 3 After generating the new composite image SI as described above, the maintenance server 3 notifies the maintenance terminals 21a and 21b that the composite image SI has been updated in step S63.
  • the above notification displays, for example, a pop-up window PU having a display of "composite image updated" in a predetermined area (lower area in the example of FIG. 24) of the chat field A4 as shown in FIG. 24. It is a command to be displayed on I3.
  • FIG. 24 is a diagram showing an example of notification that the composite image has been updated.
  • the above notification may be a command to generate a predetermined sound to the maintenance terminals 21a and 21b.
  • the message "The composite image has been updated" may be posted in the chat column A4. Further, the message may include a link to the updated data so that the updated data in the composite image SI can be accessed from the link in the message.
  • the maintenance server 3 notifies the maintenance terminals 21a and 21b to that effect, so that the maintenance staff using the maintenance terminals 21a and 21b can use the new composite image SI.
  • the SI laminate composite image SI
  • the maintenance staff can recognize that the equipment has been changed in the automated warehouse system 1 by recognizing that the composite image SI has been updated.
  • FIG. 25 is a diagram showing an example of the initial screen.
  • the initial screen I2 has a usage history display field A1.
  • a usage history list L1 for displaying a list of usage history
  • an update button B2 for updating the usage history
  • a memo field T3 for writing a memo
  • the initial screen I2 has a room selection field A2.
  • a selection button B3 for selecting which chat room to enter is displayed. When any of the selection buttons B3 is pressed, the selected button is requested to enter the chat room.
  • the buttons in the rooms that the user cannot enter or exit are either hidden or disabled (cannot be selected).
  • the initial screen I2 has a user information change column A3.
  • an information edit field T4 for editing user information (user ID, password, user name associated with the user ID) and an image change button B4 for changing the user image (avatar) are displayed.
  • the type change field M1 for changing the account type, and the update button B5 for updating the user information when pressed are displayed.
  • FIG. 26A is a diagram showing an example of the composite image.
  • FIG. 26B is an enlarged view of a part of the composite image.
  • the composite image SI displays a plurality of objects O representing the equipment of the automated warehouse system 1. Specifically, a plurality of types of automated warehouses 11 included in the automated warehouse system 1 are displayed as objects O.
  • an icon is placed on each object O.
  • eight types of icons (ICO1 to ICO8) are arranged.
  • the type of icon displayed on the composite image SI can be arbitrarily determined depending on the type of information associated with the equipment and the like.
  • the first icon ICO1 has a shape in which the letter "i" is circled.
  • the first icon ICO1 indicates that various information (manuals, etc.) related to this equipment is associated with the equipment in which this icon is arranged as operation information FI and / or maintenance information MI.
  • the characters "*** INFORMATION" ("***" is the name of the equipment. The same shall apply hereinafter) are added, and which object the first icon ICO1 is placed on is located. Is specifically shown.
  • the second icon ICO2 has a shape that imitates a small camera.
  • the second icon ICO2 indicates that the image data acquired by the camera CA provided in this equipment is associated with the equipment in which this icon is arranged as the operation information FI. Further, below the second icon ICO2, the characters "*** camera" are added to specifically indicate which object the second icon ICO2 is placed on.
  • the third icon ICO3 has a shape that imitates a thermometer and a hygrometer.
  • the third icon ICO3 indicates that the data (temperature, humidity) acquired by the sensor SE provided in the equipment is associated with the equipment with this icon as the operation information FI. Further, below the third icon ICO3, the characters "*** humidity temperature" are added to specifically indicate which object the third icon ICO3 is arranged on.
  • the fourth icon ICO4 has the shape of a document.
  • the fourth icon ICO4 indicates that the equipment with this icon is associated with the parts list of this equipment as maintenance information MI. Further, below the fourth icon ICO4, the characters "*** parts list" are added to specifically indicate which object the fourth icon ICO4 is arranged on.
  • the fifth icon ICO5 has a shape that imitates a large camera.
  • the fifth icon ICO5 indicates that the image data acquired by this camera is associated with the large camera to which this icon is attached as the operation information FI. Further, below the fifth icon ICO5, the characters "camera" are added, indicating that the fifth icon ICO5 is arranged on the object of the large camera.
  • the sixth icon ICO6 has a shape in which an arrow is attached to the side of the inverted triangular figure.
  • the sixth icon ICO6 is provided at a predetermined position of the field image FM (composite image SI), and by clicking this icon, the field of view of the composite image SI moves in the direction of the icon.
  • the center of the field of view of the composite image SI becomes the position of the selected sixth icon ICO6, and the direction of the field of view becomes the direction in front of the sixth icon ICO6.
  • a virtual reality that moves the automated warehouse system 1 can be realized.
  • the seventh icon ICO7 is provided at a predetermined position on the site image FM (composite image SI) (above the composite image SI in the example of FIG. 26A) and has the shape of a switch. In addition, the characters "View Mode" are attached below it.
  • the seventh icon ICO7 has a function of switching between display and non-display of the first icon ICO1 to the sixth icon ICO6 by clicking the seventh icon ICO7.
  • the eighth icon ICO8 is provided at a predetermined position on the site image FM (composite image SI) (above the composite image SI in the example of FIG. 26A) and has the shape of a switch. In addition, the characters "VPN" are attached above it.
  • the eighth icon ICO8 has a function of switching between display and non-display of the access information AC in the composite image SI by clicking the icon.
  • access information AC is displayed on some icons included in the composite image SI.
  • the access information AC between the description of "PL1_INFO” and the first icon ICO1, "Ctrl001 192.168.0.111" and the sub ID and IP address of the equipment (control panel of the stacker crane). Is displayed as access information AC.
  • the access information AC between the description of "PL1_crane camera” and the second icon ICO2, "Cam001 192.168.0.1" and the sub ID and IP address of the facility (camera CA) are the access information AC. Is displayed as.
  • FIG. 27 is a diagram showing an example of a display screen in which a composite image and a chat column are simultaneously displayed.
  • the room selection field A2 and the chat field A4 described above are displayed outside the area where the composite image SI is displayed.
  • the room selection field A2 is displayed on the left side of the composite image SI
  • the chat field A4 is displayed on the right side.
  • chat column A4 the chat contents made at a predetermined timing during the chat are arranged in chronological order as balloon CHs.
  • a file selection field FS is arranged in the chat field A4.
  • a file saved in the worker terminal 17 or the maintenance terminal 21a or the like is selected and attached to the chat content (speech balloon CH).
  • speech balloon CH By dragging the file attached to the chat content in this way to the composite image SI, it can be associated with the predetermined position or object O of the composite image SI as the operation information FI or the maintenance information MI.
  • the file associated from the chat content is, for example, associated as an operation information FI when the above operation is performed on the worker terminal 17, and as a maintenance information MI when the above operation is performed on the maintenance terminals 21a and 21b. Can be associated.
  • FIG. 28 is a diagram showing an example of a display screen in which access information is displayed as a character list LST.
  • the composite image SI does not have to have an icon indicating that the access information AC is associated with the object O.
  • a cursor for example, a mouse cursor
  • the access information AC of the object O May be displayed.
  • the access information AC itself may not be displayed in association with the object O, and for example, a message asking whether to access the equipment corresponding to the object O may be displayed. That is, in the composite image SI, the access information AC may be associated with the object O, and the specific display mode does not matter.
  • (B) In addition to the user ID and password, user authentication using human body information of workers and maintenance personnel (for example, fingerprint, blood vessel (vein) pattern, iris pattern, face pattern, etc.) can also be used. Further, for example, user authentication using the identification information (for example, MAC address, IP address, etc.) of the worker terminal 17 and the maintenance terminals 21a and 21b can also be used. In this case, viewing authority can be provided for each of the worker terminal 17, maintenance terminals 21a and 21b, LAN group, automated warehouse system 1, maintenance base 2, and the like.
  • human body information of workers and maintenance personnel for example, fingerprint, blood vessel (vein) pattern, iris pattern, face pattern, etc.
  • identification information for example, MAC address, IP address, etc.
  • viewing authority can be provided for each of the worker terminal 17, maintenance terminals 21a and 21b, LAN group, automated warehouse system 1, maintenance base 2, and the like.
  • the communication system 100 described above transmits information in an isolated location in addition to the purpose of sharing information between the automated warehouse system 1 and the maintenance base 2 that maintains the equipment of the automated warehouse system 1. Can be used in shared systems.
  • the chat column A4 may be displayed so as to overlap a part of the composite image SI.
  • the chat column A4 and / or the composite image SI may be movable on the screen.
  • the present invention can be widely applied to a communication system for remotely maintaining equipment in a work site.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Human Resources & Organizations (AREA)
  • Quality & Reliability (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Operations Research (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Bioethics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

外部端末から設備へのアクセスを容易かつ迅速にする。自動倉庫システム(1)内の設備を、保守拠点(2)に設けられた保守端末(21a、21b)を用いて保守する方法は、自動倉庫システム(1)を表す現場画像(FM)を作成するステップ(S11)と、アクセス情報(AC)を取得するステップ(S21~S23)と、現場画像(FM)内のオブジェクト(O)に、対応する設備にアクセスするためのアクセス情報(AC)を関連付けて合成画像(SI)を生成するステップ(S41~S44)と、保守端末(21a、21b)に合成画像(SI)を出力するステップ(S37)と、オブジェクト(O)の選択を受け付けるステップ(S3)と、選択されたオブジェクト(O)に関連付けられたアクセス情報(AC)を用いて、対応する設備と保守端末(21a、21b)との間に通信セッションを確立させるステップ(S51~S53)と、を備える。

Description

保守方法、保守サーバ、及びプログラム
 本発明は、作業現場内の設備を保守するための保守方法、当該保守作業に用いられる保守サーバ、及び、当該保守方法をコンピュータに実行させるプログラムに関する。
 従来、LAN内のサーバ又は端末と、当該LAN外の端末とをVPN(Virtual Private Network)を介してアクセスする技術が知られている(例えば、特許文献1を参照)。特許文献1のシステムでは、外部端末から特定のLAN内のサーバ又は端末にVPNを介してアクセスする際に、当該VPNのゲートウェイに接続するための情報が、当該情報を管理するサーバから外部端末へ送信される。このゲートウェイに接続するための情報には、当該ゲートウェイのアドレスなどが含まれている。
特許第5254909号
 上記のような外部端末と特定のLAN内の端末等とをVPN接続する技術を、自動倉庫などの多数の設備を備える作業現場に対して適用することが考えられている。これにより、ネットワークを介して、外部端末から作業現場内の設備にアクセスできるようになる。
 しかしながら、従来のVPN接続技術では、作業現場のような多数の設備が存在する場面での使用は想定されていない。例えば、従来のVPN接続技術では、VPN接続のゲートウェイへのアクセス情報(アドレス)は提供されるが、LAN内の端末及びサーバの配置に関する情報などは提供されない。
 多数の設備を有する作業現場においては、作業現場における配置位置から対象の設備を特定する場合もあるが、従来のVPN接続のように設備の配置に関する情報が提供されないと、外部端末から対象の設備に迅速にアクセスすることが難しくなることがある。
 本発明の目的は、作業現場外の端末から作業現場内の設備にアクセスするシステムにおいて、外部端末から設備へのアクセスを容易かつ迅速にすることにある。
 以下に、課題を解決するための手段として複数の態様を説明する。これら態様は、必要に応じて任意に組み合せることができる。
 本発明の一見地に係る保守方法は、作業現場内の設備を、作業現場外の保守拠点に設けられた保守端末を用いて保守するための保守サーバが実行する方法である。保守方法は、以下のステップを備える。
 ◎作業現場を表す現場画像を作成するステップ。
 ◎設備にアクセスするためのアクセス情報を取得するステップ。
 ◎現場画像内において設備を表すオブジェクトに、当該設備にアクセスするためのアクセス情報を関連付けて合成画像を生成するステップ。
 ◎保守端末に合成画像を出力するステップ。
 ◎保守端末を用いた合成画像におけるオブジェクトの選択を受け付けるステップ。
 ◎選択されたオブジェクトに関連付けられたアクセス情報を用いて、選択されたオブジェクトに対応する設備と保守端末との間に通信セッションを確立させるステップ。
 作業現場内の設備を外部の保守端末を用いて保守する上記の保守方法においては、作業現場における設備の配置及びその形態を表すオブジェクトを含む合成画像が生成される。生成された合成画像は、外部の保守端末に出力される。
 また、合成画像のオブジェクトには、対応する設備にアクセスするためのアクセス情報が関連付けられており、保守端末により合成画像内の特定のオブジェクトが選択されると、選択されたオブジェクトに関連付けられたアクセス情報を用いて、当該オブジェクトに対応する設備と保守端末との間に通信セッションが確立される。
 これにより、保守端末のユーザは、合成画像を参照してアクセスしたい設備を容易に特定できるとともに、特定した設備に迅速にアクセスできる。
 作業現場は複数存在してもよい。この場合、現場画像、アクセス情報、及び合成画像は、複数の作業現場のそれぞれに対して生成される。
 これにより、保守端末のユーザは、複数の作業現場に存在する設備を容易に特定し、特定した設備に迅速にアクセスできる。
 上記の保守方法は、以下のステップをさらに備えてもよい。
 ◎設備にて発生した異常を示す異常情報を設備から受信するステップ。
 ◎異常が発生した設備に対応するオブジェクトに異常情報を関連付けて、合成画像を生成するステップ。
 これにより、保守端末のユーザは、設備に発生した異常に関する情報に容易かつ迅速にアクセスできる。
 上記の保守方法は、以下のステップをさらに備えてもよい。
 ◎合成画像を生成後に作業現場内の設備に変更があった場合、当該設備の変更に対応した新たなアクセス情報を用いて新たな合成画像を生成するステップ。
 ◎保守端末に新たな合成画像を出力するステップ。
 これにより、作業現場において設備の変更があった場合には、その変更を反映した最新の合成画像を保守端末に提供できる。
 上記の保守方法は、新たな合成画像を生成した場合、保守端末に、合成画像が更新されたことを通知するステップをさらに備えてもよい。
 これにより、保守端末のユーザに対して、合成画像の更新とともに、作業現場において設備に変更があったことを通知できる。
 上記の保守方法は、チャット欄を合成画像とともに表示するステップをさらに備えてもよい。チャット欄は、保守端末を使用する保守員と作業現場に設けられた作業者端末を使用する作業者との間のチャット機能を提供する。この場合、合成画像が更新されたことの通知は、チャット欄に表示される。
 これにより、作業現場の作業者に対しても、合成画像の更新とともに、作業現場において設備に変更があったことを通知できる。
 本発明の他の見地に係る保守サーバは、作業現場内の設備を、作業現場外の保守拠点に設けられた保守端末を用いて保守するためのサーバである。保守サーバは、制御部を備える。
 制御部は、作業現場を表す現場画像を作成し、設備にアクセスするためのアクセス情報を取得し、現場画像内において設備を表すオブジェクトに、当該設備にアクセスするためのアクセス情報を関連付けて合成画像を生成し、保守端末に前記合成画像を出力し、保守端末を用いた合成画像におけるオブジェクトの選択を受け付け、選択されたオブジェクトに関連付けられたアクセス情報を用いて、選択されたオブジェクトに対応する設備と保守端末との間に通信セッションを確立させる。
 上記の保守サーバにおいては、作業現場における設備の配置及びその形態を表すオブジェクトを含む合成画像が生成される。生成された合成画像は、外部の保守端末に出力される。
 また、合成画像のオブジェクトには、対応する設備にアクセスするためのアクセス情報が関連付けられており、保守端末により合成画像内の特定のオブジェクトが選択されると、選択されたオブジェクトに関連付けられたアクセス情報を用いて、当該オブジェクトに対応する設備と保守端末との間に通信セッションが確立される。
 これにより、保守端末のユーザは、合成画像を参照してアクセスしたい設備を容易に特定できるとともに、特定した設備に迅速にアクセスできる。
 作業現場は複数存在してもよい。この場合、制御部は、現場画像、アクセス情報、及び合成画像を、複数の作業現場のそれぞれに対して生成する。
 これにより、保守端末のユーザは、複数の作業現場に存在する設備を容易に特定し、特定した設備に迅速にアクセスできる。
 制御部は、設備にて発生した異常を示す異常情報を設備から受信し、異常が発生した設備に対応するオブジェクトに異常情報を関連付けて合成画像を生成してもよい。
 これにより、保守端末のユーザは、設備に発生した異常に関する情報に容易かつ迅速にアクセスできる。
 制御部は、合成画像を生成後に作業現場内の設備に変更があった場合、当該設備の変更に対応した新たなアクセス情報を用いて新たな合成画像を生成し、保守端末に新たな合成画像を出力してもよい。
 これにより、作業現場において設備の変更があった場合には、その変更を反映した最新の合成画像を保守端末に提供できる。
 制御部は、新たな合成画像を生成したら、保守端末に合成画像が更新されたことを通知してもよい。
 これにより、保守端末のユーザに対して、合成画像の更新とともに、作業現場において設備に変更があったことを通知できる。
 制御部は、チャット欄を合成画像とともに表示してもよい。チャット欄は、保守端末を使用する保守員と作業現場に設けられた作業者端末を使用する作業者との間のチャット機能を提供する。この場合、制御部は、合成画像が更新されたことの通知を、チャット欄に表示する。
 これにより、作業現場の作業者に対しても、合成画像の更新とともに、作業現場において設備に変更があったことを通知できる。
 本発明のさらに他の見地に係るプログラムは、上記の保守方法をコンピュータに実行させるためのプログラムである。
 上記の合成画像を生成し外部の保守端末に出力することで、外部の保守端末において合成画像を参照してアクセスしたい設備を容易に特定できるとともに、特定した設備に迅速にアクセスできる。
通信システムの全体構成の一例を示す図。 自動倉庫システムの構成の一例を示す図。 画像データの一例を示す図。 センサによる測定データの一例を示す図。 保守拠点の構成の一例を示す図。 保守情報の一例を示す図(その1)。 保守情報の一例を示す図(その2)。 保守サーバのハードウェア構成の一例を示す図。 中継サーバのハードウェア構成を示す図。 ゲートウェイリストの一例を示す図。 合成画像作成情報の構成を示す図。 第1設備リストのデータ構成の一例を示す図。 第2設備リストのデータ構成の一例を示す図。 保守サーバの概略動作を示すフローチャート。 初期設定動作を示すフローチャート。 アクセス情報の取得動作を示すフローチャート。 アクセス情報の取得における情報の送受信を示す図。 合成画像出力までの動作における保守サーバの動作を示すフローチャート。 合成画像出力までの動作における情報の送受信を示す図。 ログイン画面の一例を示す図。 合成画像の生成動作を示すフローチャート。 保守サーバの通信セッション確立動作を示すフローチャート。 通信セッション確立動作における情報の送受信を示す図。 設備の変更があった場合の保守サーバの動作を示すフローチャート。 設備の変更があった場合における情報の送受信を示す図。 合成画像が更新されたことの通知の一例を示す図。 初期画面の一例を示す図。 合成画像の一例を示す図。 合成画像の一部の拡大図。 合成画像とチャット欄とを同時表示した表示画面の一例を示す図。 アクセス情報を文字のリストとして表示した表示画面の一例を示す図。
1.第1実施形態
(1)通信システムの全体構成
 以下、本発明に係る保守サーバについて説明する。保守サーバは、作業現場に設けられた設備を、当該作業現場とは離れた場所に存在する保守拠点に設けられた保守端末を用いて保守するためのサーバである。従って、保守サーバは、作業現場内部の設備及び端末と、保守拠点に存在する端末と、を含む通信システムに設けられる。
 以下、図1を用いて、上記通信システムの一例としての第1実施形態に係る通信システム100を説明する。図1は、通信システムの全体構成の一例を示す図である。
 第1実施形態に係る通信システム100は、上記の作業現場の一例としての自動倉庫システム1と、保守拠点2と、保守サーバ3と、中継サーバ4と、を備える。
 自動倉庫システム1は、例えば、物流センターなどに配置され、荷物の入出庫を行うためのシステムである。自動倉庫システム1は、荷物の入出庫を行うための自動倉庫11(設備の一例)(図2)を有する。本実施形態の通信システム100は、複数の自動倉庫システム1を備えている。
 保守拠点2は、例えば、自動倉庫システム1内の自動倉庫11の保守等を行う保守員が駐在する拠点であって、自動倉庫システム1の保守を行うための端末(保守端末21a、21b)を備える。保守拠点2の保守端末21a、21bは、複数の自動倉庫システム1のそれぞれの設備にアクセスできる。
 保守サーバ3は、上記の自動倉庫システム1及び保守拠点2(のゲートウェイ装置)と、ネットワークNW(例えば、WANなど)を介して接続されている。保守サーバ3は、自動倉庫システム1にて蓄積されている自動倉庫11(の各設備)に関する情報(稼働情報と呼ぶ)と、保守拠点2にて管理されている設備を保守するために使用する情報(保守情報と呼ぶ)と、を蓄積するデータベースを格納する。
 また、保守サーバ3は、蓄積している稼働情報及び/又は保守情報を、自動倉庫システム1内において自動倉庫11を使用する作業者が用いる作業者端末と、保守拠点2において保守員が用いる保守端末21a、21bと、に必要に応じて提供する。これにより、通信システム100では、保守サーバ3を介して、作業者端末と保守端末21a、21bとの間で、稼働情報及び保守情報を共有できる。
 さらに、保守サーバ3は、保守端末21a、21bを用いて自動倉庫システム1内の設備を保守する際に、保守端末21a、21bと当該設備との間に通信セッションを確立するための仲介をする。どのような仲介をするかについては、後ほど詳しく説明する。
 中継サーバ4は、自動倉庫システム1及び保守拠点2(のゲートウェイ装置)と、ネットワークNWを介して接続されている。中継サーバ4は、自動倉庫システム1と保守拠点2との間の通信を中継するサーバである。
 また、中継サーバ4は、ネットワークNWを介して保守サーバ3と接続され、保守サーバ3からの要求に応じて、中継サーバ4に保存する各種情報を保守サーバ3に提供する。
 なお、本実施形態に係る通信システム100において、後述する各装置(ゲートウェイ装置、及び、自動倉庫システム1のカメラ及びセンサ)と保守サーバ3との間のコマンド等の送受信は、例えば、WebSocketプロトコルを用いて実行される。
 また、図1に示す通信システム100においては、保守拠点2が1つしか存在しないが、これに限られず、保守拠点2は、通信システム100において複数存在してもよい。例えば、1つの保守拠点2にて複数の自動倉庫システム1を保守可能とするだけでなく、1つの自動倉庫システム1を複数の保守拠点2から保守可能としてもよい。
(2)自動倉庫システム
(2-1)自動倉庫
 以下、図2を用いて、通信システム100に含まれる自動倉庫システム1の具体的構成を説明する。図2は、自動倉庫システムの構成の一例を示す図である。なお、複数の自動倉庫システム1は、各々が有する設備数などに違いがあるのみで、基本的な構成については同一である。従って、以下では、代表的な自動倉庫システム1の基本構成を説明する。
 自動倉庫システム1は、自動倉庫11を有する。自動倉庫11は、ラック、スタッカクレーン、コンベヤなどを有し、荷物の入出庫、移載、保管などを行う。
 本実施形態において、自動倉庫11のスタッカクレーン及びコンベヤには、例えば、静止画、及び、所定時間の長さを有する動画を撮影可能なカメラCA1~CA4が設けられ、スタッカクレーン及びコンベヤの状況を視覚的な稼働情報FIとして取得可能となっている。カメラCA1~CA4は、例えば、魚眼カメラである。このカメラCA1~CA4により、例えば、図3に示すような画像データ(動画)を稼働情報FIとして取得できる。図3は、画像データの一例を示す図である。
 また、自動倉庫11の近傍には、周囲の温度及び湿度を測定するセンサSE(例えば、温湿度センサ)が設けられ、周囲温度及び湿度を稼働情報FIとして取得できる。センサSEにより、例えば、図4に示すような、測定された温度と湿度を折れ線グラフまたは棒グラフで表示するデータを、測定データ(稼働情報FI)として取得できる。図4は、センサによる測定データの一例を示す図である。
 さらに、スタッカクレーンには、所定の物理量を測定するセンサSEが設けられ、スタッカクレーンにて荷崩れなどが発生したときに、当該荷崩れなどにより発生した振動及び/又は音の大きさを、稼働情報FIとして測定可能となっている。このようなセンサSEとしては、例えば、加速度センサ、音センサ、などがある。
 なお、図2に示す自動倉庫システム1においては、4台のカメラCA1~CA4、及び、1つのセンサSEが設けられているが、自動倉庫11に設けられるカメラ及びセンサの数は、上記に限られず、自動倉庫システム1の規模等に応じて任意のものとすることができる。
(2-2)自動倉庫システムのネットワーク構成
 図2を用いて、自動倉庫システム1において各設備が互いに通信するためのネットワーク構成をさらに説明する。自動倉庫システム1のネットワーク構成は、第1スイッチングハブSH1を有する。第1スイッチングハブSH1は、図2に示すように、カメラCA1、CA2と、第1外部記憶装置13aと、を接続する。第1外部記憶装置13aは、例えばNAS(Network Attached Storage)装置であり、カメラCA1、CA2により取得された画像データを保存する。
 また、第1スイッチングハブSH1には、自動倉庫11のスタッカクレーン及びコンベヤなどの制御装置(図示せず)が接続されている。
 自動倉庫システム1のネットワーク構成は、第2スイッチングハブSH2を有する。第2スイッチングハブSH2は、カメラCA3、CA4、センサSE、及び、第2外部記憶装置13bを接続する。第2外部記憶装置13bは、例えばNAS装置であり、カメラCA3、CA4により取得された画像データ、及び、センサSEにより取得された測定データを保存する。
 第2スイッチングハブSH2は、第1スイッチングハブSH1にも接続されており、カメラCA1、CA2にて取得した画像データは第2外部記憶装置13bにも保存でき、カメラCA3、CA4にて取得した画像データ、及び、センサSEにて取得したデータは第1外部記憶装置13aにも保存できる。
 自動倉庫システム1のネットワーク構成は、自動倉庫システム1を管理するサーバを有する。具体的には、搬送管理サーバ15aと、情報管理サーバ15bと、を有する。
 搬送管理サーバ15aは、CPU、記憶装置(RAM、ROM、SSD、ハードディスクなど)、ネットワークインタフェースなどの各種インターフェースを有するコンピュータシステムである。搬送管理サーバ15aは、自動倉庫11のスタッカクレーン、コンベヤなどと通信可能となっており、これらスタッカクレーン及びコンベヤを制御することで、自動倉庫11における荷物の入出庫を制御・管理する。
 なお、本実施形態において、搬送管理サーバ15aは、第1スイッチングハブSH1に接続されている。
 情報管理サーバ15bは、CPU、記憶装置(RAM、ROM、SSD、ハードディスクなど)、ネットワークインタフェースなどの各種インターフェースを有するコンピュータシステムである。情報管理サーバ15bは、第1外部記憶装置13a及び第2外部記憶装置13bに保存された各種データ(例えば、カメラCA1~CA4及びセンサSEにて取得されたデータ)を管理する。情報管理サーバ15bは、必要に応じて、搬送管理サーバ15aが管理している情報を取得する。
 なお、本実施形態において、情報管理サーバ15bは、第2スイッチングハブSH2に接続されている。
 自動倉庫システム1のネットワーク構成は、作業者端末17を有する。作業者端末17は、例えば、パーソナルコンピュータ、タブレット端末などである。作業者端末17は、自動倉庫11において作業を行う作業者が用いる端末であり、ネットワークNWを介して、保守サーバ3と通信可能となっている。これにより、作業者は、作業者端末17を用いて、保守サーバ3に蓄積されている稼働情報FI及び保守情報MIを閲覧できる。作業者端末17がタブレット端末である場合、作業者は保守対象の機器(自動倉庫、カメラやセンサ)の設置場所に作業者端末を携帯して保守作業を進めることができる。また、タブレット端末以外の端末(例えば、パーソナルコンピュータ)が作業者端末17である場合にも、作業者端末17にてカメラCA1~CA4、センサSE等にアクセス可能となっていてもよい。
 なお、図2にて示す自動倉庫システム1では、作業者端末17は1台しか設けられていないがこれに限られず、複数台の作業者端末17が設けられてもよい。
 自動倉庫システム1のネットワーク構成は、第1ゲートウェイ装置19を有する。第1ゲートウェイ装置19は、CPU、記憶装置(RAM、ROM、SSD、ハードディスクなど)、ネットワークインタフェースなどの各種インターフェースを有するコンピュータシステムである。また、第1ゲートウェイ装置19は、その機能の一部又は全部をSoCなどにより実現したハードウェアであってもよい。
 第1ゲートウェイ装置19は、第2スイッチングハブSH2、及び、外部のネットワークNWに接続され、自動倉庫システム1のネットワーク構成中の各設備と外部との通信を中継できる。そのため、第1ゲートウェイ装置19は、第1ゲートウェイ装置19に接続された設備に関する情報をリスト化した第1設備リストEL1(後述)を、記憶装置に記憶する。
 第1ゲートウェイ装置19は、自動倉庫システム1の各設備(カメラCA1~CA4、センサSE、スタッカクレーン及びコンベヤの制御装置など)と保守端末21a、21bとの間で通信セッションを確立すべき旨の指令を中継サーバ4から受信すると、保守拠点2の第2ゲートウェイ装置23(後述)との間にVPNセッションを確立する制御を実行する。
 また、第1ゲートウェイ装置19は、所定のタイミングで、第1外部記憶装置13a及び第2外部記憶装置13bに保存されたカメラCA1~CA4の画像データ、センサSEの測定データ、及び、各設備において発生した異常を示す異常情報などを、稼働情報FIとして保守サーバ3にアップロードする機能を有する。その他、第1ゲートウェイ装置19は、各設備のメンテナンスに関する情報、各設備の稼働情報、作業者等が撮影した設備の写真、及び、各設備の部品発注に関する情報などを、稼働情報FIとして、保守サーバ3にアップロードできる。
 上記所定のタイミングは、例えば、一定の時間毎(例えば、1時間毎、1日毎、など)、新たな稼働情報FIが保存されたタイミング、既存の稼働情報FIが更新されたタイミング、保存された稼働情報FIの容量が決められた大きさとなるタイミング、など、適宜決定できる。
(3)保守拠点
 以下、図5を用いて、通信システム100に含まれる保守拠点2の具体的構成について説明する。図5は、保守拠点の構成の一例を示す図である。
 保守拠点2は、保守端末21a、21bを有する。保守端末21a、21bは、第3スイッチングハブSH3に接続される。保守端末21a、21bは、例えば、パーソナルコンピュータであり、保守拠点2に駐在する保守員が自動倉庫システム1の設備等の保守をする際に使用される。
 保守拠点2は、第2ゲートウェイ装置23を有する。第2ゲートウェイ装置23は、CPU、記憶装置(RAM、ROM、SSD、ハードディスクなど)、ネットワークインタフェースなどの各種インターフェースを有するコンピュータシステムである。また、第2ゲートウェイ装置23は、その機能の一部又は全部をSoCなどにより実現したハードウェアであってもよい。
 第2ゲートウェイ装置23は、第3スイッチングハブSH3、及び、外部のネットワークに接続され、保守端末21a、21bと外部との通信を中継する。そのため、第2ゲートウェイ装置23は、第2ゲートウェイ装置23に接続された保守端末21a、21bに関する情報をリスト化した第2設備リストEL2(後述)を、記憶装置に記憶する。
 第2ゲートウェイ装置23は、自動倉庫システム1の第1ゲートウェイ装置19からVPNセッション確立要求があったら、第1ゲートウェイ装置19との間にVPNセッションを確立する制御を実行する。
 また、第2ゲートウェイ装置23は、保守端末21a、21b、及び/又は、保守拠点2に設けられた基幹システム(図示せず)に保存された情報を、所定のタイミングで保守情報MIとして保守サーバ3にアップロードする機能を有する。上記所定のタイミングは、例えば、一定の時間毎(例えば、1時間毎、1日毎、など)、新たな保守情報MIが保存されたタイミング、既存の保守情報MIが更新されたタイミング、保存された保守情報MIの容量が決められた大きさとなるタイミング、など、適宜決定できる。
 上記の保守情報MIの例としては、例えば、図6に示すような設備の部品のリストであるパーツリスト、図7に示すような自動倉庫システム1における設備(自動倉庫11)の配置を示すレイアウト図、などがある。図6及び図7は、保守情報の一例を示す図である。その他、第2ゲートウェイ装置23は、自動倉庫システム1の各設備の点検履歴、及び、各設備の点検レポートなどを、保守情報MIとして、保守サーバ3にアップロードできる。
 保守サーバ3は、第2ゲートウェイ装置23(保守拠点2)から受信した保守情報MIについては、例えば、そのファイル名に基づいて、自動倉庫システム1のどの設備に関する情報であるかを判定できる。
(4)保守サーバ
 以下、図8を用いて、通信システム100に含まれる保守サーバ3の具体的なハードウェア構成について説明する。図8は、保守サーバのハードウェア構成の一例を示す図である。
 図8に示すように、保守サーバ3は、プロセッサ31と、RAM32と、ROM33と、ネットワークインタフェース34と、記憶装置35と、を有するコンピュータシステムである。
 プロセッサ31は、例えば、CPU、又は、CPUと各種インターフェースとを1つのチップに集積したSoCである。プロセッサ31は、記憶装置35などに記憶されたプログラムを実行し、保守サーバ3において行われる各種情報処理を行う。
 RAM32は、記憶装置35に記憶されたプログラムなど一時的に必要な情報を記憶する。ROM33は、保守サーバ3を制御するためのプログラム及び設定などを記憶する。
 このように、上記プロセッサ31と、RAM32と、ROM33は、保守サーバ3の機能を実現する制御を行うハードウェア構成である。従って、以後、これら3つのハードウェア構成を、保守サーバ3の「制御部」と呼ぶことにする。つまり、この制御部が、記憶装置35に記憶されたプログラムを実行し、後述する保守サーバ3の機能(動作)を実現する。
 ネットワークインタフェース34は、外部の端末及び/又は設備などとの通信を実行する。ネットワークインタフェース34は、例えば、有線通信により外部の端末及び/又は設備と通信をするイーサネット(登録商標)カード、及び/又は、無線通信により外部の端末及び/又は設備と通信をする無線LANインターフェースなどである。
 なお、保守サーバ3が外部へ各種情報及びデータを送信する場合、上記制御部が、ネットワークインタフェース34を介して、これら情報及びデータを外部に出力する。また、保守サーバ3が外部から各種情報及びデータを受信する場合、ネットワークインタフェース34を介して、これら情報及びデータが外部から上記制御部に入力される。
 記憶装置35は、保守サーバ3にて実行されるプログラム、保守サーバ3に蓄積する各種情報、及び、各種設定情報を記憶する。本実施形態に係る保守サーバ3に蓄積する各種情報は、自動倉庫システム1の設備(自動倉庫11)に関する稼働情報FI、及び、保守拠点2にて管理される設備の保守に関する保守情報MIである。
 一方、本実施形態に係る保守サーバ3の記憶装置35に記憶される設定情報は、ユーザ情報UI、ゲートウェイリストGL、及び、合成画像作成情報GIである。
 ユーザ情報UIは、保守サーバ3にログインできるユーザを管理する情報である。ゲートウェイリストGLは、各自動倉庫システム1が有する第1ゲートウェイ装置19、及び、各保守拠点2が有する第2ゲートウェイ装置23を識別するためのリストである。合成画像作成情報GIは、自動倉庫システム1毎及び保守拠点2毎に作成され、各自動倉庫システム1の合成画像SI(図26A)を生成する場合、及び、どの保守拠点2の保守端末21a、21bからアクセスがあるかを判断する場合に使用される情報である。
 上記の構成を有することにより、保守サーバ3は、自動倉庫システム1の設備に関する稼働情報FI、及び、設備の保守に関する保守情報MIを、自動倉庫システム1及び保守拠点2から受信し、蓄積することができる。
 また、この構成を有する保守サーバ3は、後述するように、現場画像FMのオブジェクトO(後述)に、そのオブジェクトOに対応する設備へのアクセス情報ACを関連付けた画像(合成画像SIと呼ぶ)を生成できる。また、合成画像SIには、各オブジェクトOに、対応する設備に関する稼働情報FI及び保守情報MIを関連付けることもできる。
 保守サーバ3は、上記の構成以外にも、ディスプレイ36を有してもよい。ディスプレイ36は、保守サーバ3についての各種情報を表示する、例えば、液晶ディスプレイ、有機ELディスプレイなどのディスプレイである。これにより、ユーザは、例えば、ディスプレイ36に表示された情報を参照しながら、保守サーバ3を管理できる。
 保守サーバ3は、ユーザからの入力を受け付ける入力インターフェース37をさらに有してもよい。入力インターフェース37は、例えば、キーボード、マウス、タッチパネルなどの入力機器である。これにより、ユーザは、入力インターフェース37を用いて、保守サーバ3を直接管理できる。
 なお、上記の入力インターフェース37及び/又はディスプレイ36がなくとも、例えば、ネットワークインタフェース34を介して保守サーバ3にアクセス可能な端末を用いて、保守サーバ3に関する情報を参照しつつ保守サーバ3を管理できる。
(5)中継サーバ
 以下、図9を用いて、通信システム100に含まれる中継サーバ4の具体的なハードウェア構成を説明する。図9は、中継サーバのハードウェア構成を示す図である。
 図9に示すように、中継サーバ4は、プロセッサ41と、RAM42と、ROM43と、ネットワークインタフェース44と、記憶装置45と、を有するコンピュータシステムである。
 プロセッサ41は、例えば、CPU、又は、CPUと各種インターフェースとを1つのチップに集積したSoCである。プロセッサ41は、記憶装置45などに記憶されたプログラムを実行し、中継サーバ4において行われる各種情報処理を行う。
 RAM42は、記憶装置45に記憶されたプログラムなど一時的に必要な情報を記憶する。ROM43は、中継サーバ4を制御するためのプログラム及び設定などを記憶する。
 ネットワークインタフェース44は、外部の端末及び/又は設備などとの通信を実行する。ネットワークインタフェース44は、例えば、有線通信により外部の端末及び/又は設備と通信をするイーサネット(登録商標)カード、及び/又は、無線通信により外部の端末及び/又は設備と通信をする無線LANインターフェースなどである。
 記憶装置45は、中継サーバ4にて実行されるプログラム、及び、ログイン情報LIを記憶する、例えば、ハードディスク、SSDなどの記憶装置である。また、記憶装置45は、中継サーバ4を動作させるために必要な設定を記述した設定ファイルなどを記憶する。
 他の実施形態において、中継サーバ4は、ディスプレイ46を有してもよい。ディスプレイ46は、中継サーバ4についての各種情報を表示する、例えば、液晶ディスプレイ、有機ELディスプレイなどのディスプレイである。これにより、ユーザは、例えば、ディスプレイ46に表示された情報を参照しながら、中継サーバ4を管理できる。
 他の実施形態において、中継サーバ4は、ユーザからの入力を受け付ける入力インターフェース47を有してもよい。入力インターフェース47は、例えば、キーボード、マウス、タッチパネルなどの入力機器である。これにより、ユーザは、入力インターフェース47を用いて、中継サーバ4を直接管理できる。
 なお、上記の入力インターフェース47及び/又はディスプレイ46がなくとも、例えば、ネットワークインタフェース44を介して中継サーバ4にアクセス可能な端末を用いて、中継サーバ4に関する情報を参照しつつ中継サーバ4を管理できる。
(6)通信システムにて管理される情報
(6-1)保守サーバで管理される情報
 以下、保守サーバ3、中継サーバ4、第1ゲートウェイ装置19、及び、第2ゲートウェイ装置23に記憶されている情報について説明する。最初に、保守サーバ3で管理される情報を説明する。上記のように、保守サーバ3は、ユーザ情報UI、合成画像作成情報GI、及びゲートウェイリストGLを記憶装置35に記憶している。
 ゲートウェイリストGLは、図10Aに示すように、例えば、各自動倉庫システム1の識別情報と、当該自動倉庫システム1が有する第1ゲートウェイ装置19の識別情報と、を関連付けたリストである。また、ゲートウェイリストGLは、各保守拠点2の識別情報と、当該保守拠点2が有する第2ゲートウェイ装置23の識別情報を関連付けて記憶している。図10Aは、ゲートウェイリストの一例を示す図である。
 各自動倉庫システム1及び各保守拠点2の識別情報は、例えば、自動倉庫システム1及び保守拠点2の識別番号である。この識別情報のうち自動倉庫システム1の識別番号は、後述する合成画像作成情報GIにも含まれる。図10Aに示す例では、自動倉庫システム1の識別番号を100番台の番号とし、保守拠点2の識別番号を200番台の番号としている。自動倉庫システム1及び保守拠点2の識別番号は、図10Aに示す例に限られず、任意に設定できる。
 一方、第1ゲートウェイ装置19及び第2ゲートウェイ装置23の識別情報は、例えば、当該第1ゲートウェイ装置19及び第2ゲートウェイ装置23が中継サーバ4にログインするためのログインIDである。その他、第1ゲートウェイ装置19及び第2ゲートウェイ装置23のネットワークアドレス(IPアドレス)を、ゲートウェイ装置の識別情報とすることもできる。
 ユーザ情報UIは、保守サーバ3にログインするためのユーザIDとパスワードとを記憶する。また、ユーザ情報UIにおいては、ユーザIDごとに、ユーザ種別が関連付けられている。ユーザ種別は、そのユーザIDが保守員のものであるか、作業者等の保守員以外のものであるかの種別を示すものである。その他、ユーザ情報UIには、各ユーザの情報(例えば、ユーザの所属、連絡先、権限レベル、など)が記憶されていてもよい。
 合成画像作成情報GIは、図10Bに示すように、識別情報INと、現場画像FMと、関連付け情報AIと、第1設備リストEL1と、を有する。図10Bは、合成画像作成情報の構成を示す図である。識別情報INは、自動倉庫システム1を識別するための情報であって、ゲートウェイリストGLの識別情報と同じものである。
 現場画像FMは、自動倉庫システム1を表す画像である。具体的には、現場画像FMは、自動倉庫システム1の実写画像、又は、デジタルモデルである。現場画像FMは、自動倉庫システム1の各設備を画像化して表す。設備を画像化して表したものをオブジェクトOと呼ぶことにする。
 関連付け情報AIは、稼働情報FI及び保守情報MIと、自動倉庫システム1の設備との関連付けを記憶した情報である。また、関連付け情報AIには、自動倉庫システム1の設備と、保守端末21a、21bから当該設備にアクセスするためのアクセス情報AC(後述)と、が関連付けられている。
 第1設備リストEL1は、第1ゲートウェイ装置19に接続された設備に関する情報のリストである。具体的な構成については、後ほど詳しく説明する。
(6-2)中継サーバで管理される情報
 次に、中継サーバ4で管理される情報を説明する。中継サーバ4で管理されるログイン情報LIは、中継サーバ4にログインするためのユーザIDを記憶する。なお、ログイン情報LIには、第1ゲートウェイ装置19及び第2ゲートウェイ装置23のためのユーザIDを含んでいる。すなわち、第1ゲートウェイ装置19及び第2ゲートウェイ装置23は、中継サーバ4にログインする。
 なお、ログイン情報LIにおいて、ゲートウェイ装置のためのユーザIDは、そのユーザIDを有するゲートウェイ装置のネットワークアドレス(例えば、IPアドレス)と関連付けられている。これにより、中継サーバ4は、ゲートウェイ装置のユーザIDから、対応するゲートウェイ装置のネットワークアドレスを知ることができ、当該ゲートウェイ装置にアクセスできる。
(6-3)ゲートウェイ装置で管理される情報
 最後に、ゲートウェイ装置で管理されている情報を説明する。各ゲートウェイ装置は、自身のLAN内に接続された設備に関する情報のリストを管理する。第1ゲートウェイ装置19は、図11Aに示す第1設備リストEL1を管理する。その一方、第2ゲートウェイ装置23は、図11Bに示す第2設備リストEL2を管理する。図11Aは、第1設備リストのデータ構成の一例を示す図である。図11Bは、第2設備リストのデータ構成の一例を示す図である。
 なお、図11A及び図11Bに示す設備リストは一例であって、自動倉庫システム1及び保守拠点2の規模などにより、リストされる設備の種類、設備の数は異なる。
(6-3-1)第1設備リスト
 図11Aに示すように、第1ゲートウェイ装置19が管理する第1設備リストEL1は、設備名記録部分R1と、アドレス記録部分R2と、サブID記録部分R3と、サブタイプ記録部分R4と、状態記録部分R5と、を有する。
 設備名記録部分R1は、設備名を記録する。第1設備リストEL1においては、図11Aに示すように、カメラCA1~CA4の名称(クレーン#1カメラ~コンベヤ#2カメラ)と、センサSEの名称(クレーン#1センサ)と、第1外部記憶装置13aの名称(外部記憶装置#1)と、第2外部記憶装置13bの名称(外部記憶装置#2)と、情報管理サーバ15bの名称(情報管理サーバ)と、搬送管理サーバ15aの名称(搬送管理サーバ)と、が記録される。
 アドレス記録部分R2は、ゲートウェイ装置に接続可能な設備に割り当てられたネットワークアドレスを記録する。第1設備リストEL1においては、カメラCA1~CA4の設備名を有する行には、それぞれに、「192.168.0.1」~「192.168.0.4」とのIPアドレスが記録されている。また、センサSEの設備名を有する行に、「192.168.0.11」とのIPアドレスが記録されている。
 さらに、外部記憶装置#1~外部記憶装置#2との設備名を有する行に、それぞれ、「192.168.0.21」及び「192.168.0.22」と、情報管理サーバ及び搬送管理サーバとの設備名を有する行に、それぞれ、「192.168.0.31」及び「192.168.0.32」と、IPアドレスが記録されている。
 また、スタッカクレーンの制御装置名(制御盤)を有する行のそれぞれに、「192.168.0.111」及び「192.168.0.112」と、コンベヤの制御装置名(PLC)を有する行のそれぞれに、「192.168.0.41」及び「192.168.0.42」と、IPアドレスが記録されている。
 後述するように、上記アドレス記録部分R2に記録されたIPアドレスは、ゲートウェイ装置間で通信セッションを確立したときに、当該ゲートウェイ装置に接続された設備同士が、ゲートウェイ装置を介して通信する際に使用される。
 サブID記録部分R3は、設備が中継サーバ4にログインするためのログインID(サブID)を記録する。第1設備リストEL1においては、カメラCA1~CA4の設備名を有する行に、それぞれ、「cam001」~「cam004」とのサブIDが記録され、センサSEの設備名を有する行に「sen001」とのサブIDが記録されている。
 また、「制御盤」との設備名を有する行に、それぞれ、「ctrl001」及び「ctrl002」とのサブIDが記録され、「PLC」との設備名を有する行に、それぞれ、「PLC001」及び「PLC002」とのサブIDが記録されている。
 サブタイプ記録部分R4は、ゲートウェイ装置に接続された設備の種別を表すユーザタイプ(サブタイプ)を記録する。第1設備リストEL1においては、カメラCA1~カメラCA4の設備名を有する行に「camera」とのサブタイプが記録され、センサSEの設備名を有する行に「sensor」とのサブタイプが記録されている。
 また、「制御盤」との設備名を有する行に「controller」とのサブタイプが記録され、「PLC」との設備名を有する行に「PLC」とのサブタイプが記録されている。
 状態記録部分R5は、設備リストに記録された各設備がゲートウェイ装置と通信可能な状態にあるか否かを記録する。第1設備リストEL1の例では、例えば、カメラCA3及びカメラCA4の設備名の行に「NG」と記録されている一方、その他の行においては「OK」と記録されている。すなわち、カメラCA3、CA4が第1ゲートウェイ装置19と通信可能となっていない。
 このように、状態記録部分R5は、ゲートウェイ装置に接続された設備(設備)のうち、ゲートウェイ装置と通信可能となっているものに対しては「OK」と記録し、通信可能となっていないものに対しては「NG」と記録する。
 図11Aに示すように、第1設備リストEL1の1行分の情報、すなわち、1つの設備に対するIPアドレス、設備名、サブID、サブタイプ、及び状態を少なくとも含む情報がアクセス情報ACであり、これが現場画像FMのオブジェクトOに関連付けられる。
(6-3-2)第2設備リスト
 次に、図11Bを用いて、第2ゲートウェイ装置23が管理する第2設備リストEL2を説明する。第2設備リストEL2は、第1設備リストEL1と同様に、設備名記録部分R1と、アドレス記録部分R2と、サブID記録部分R3と、サブタイプ記録部分R4と、状態記録部分R5と、を有する。
 第2設備リストEL2においては、設備名記録部分R1には、保守端末21aの名称(保守端末#1)と、保守端末21bの名称(保守端末#2)と、が記録される。また、アドレス記録部分R2には、保守端末21a、21bの設備名を有する行のそれぞれに、「172.28.0.2」及び「172.28.0.3」とのIPアドレスが記録されている。
 その一方、第2設備リストEL2のサブID記録部分R3、サブタイプ記録部分R4、及び状態記録部分R5には、情報が記録されていない。これは、保守端末21a、21bは、中継サーバ4にログインできないことを示している。
(7)保守サーバの概略動作
 以下、本実施形態に係る通信システム100の保守サーバ3の動作を説明する。まず、図12を用いて、保守サーバ3の概略動作を説明する。図12は、保守サーバの概略動作を示すフローチャートである。
 保守サーバ3は、自動倉庫システム1の各設備に、遠隔地の保守端末21a、21bを用いてアクセスする場合に、所望の設備を容易に特定し、かつ、迅速にアクセスを可能とする。この機能を実現するため、保守サーバ3は、図12のフローチャートに従った処理を実行する。なお、図12に示す動作は、1つの自動倉庫システム1に対する動作である。保守サーバ3は、通信システム100に含まれる複数の自動倉庫システム1のそれぞれについて、図12に示す動作を個別に実行する。
 具体的には、まずステップS1で、保守サーバ3は、合成画像SIを生成するための初期設定動作を実行する。初期設定動作を実行後、保守サーバ3は、ステップS2で、初期設定動作において作成及び取得した情報等を用いて、合成画像SIを生成する。保守サーバ3は、生成した合成画像SIを、対応する保守端末21a、21bに出力する。合成画像SIを受信した保守端末21a、21bは、ディスプレイ(図示せず)に合成画像SIを表示させる。
 合成画像SIを出力後、保守サーバ3は、ステップS3で、保守端末21a、21bを用いた合成画像SIにおけるオブジェクトOの選択を受け付ける。
 ステップS3でオブジェクトOの選択を受信すると(ステップS3で「Yes」)、保守サーバ3は、ステップS4で、選択されたオブジェクトOに関連付けられたアクセス情報ACを用いて、選択されたオブジェクトOに対応する設備と保守端末21a、21bの間に通信セッションを確立させるための指令をする。
(8)保守サーバの具体的動作
(8-1)初期設定動作
 以下、図13を用いて、上記ステップS1の初期設定動作を具体的に説明する。図13は、初期設定動作を示すフローチャートである。
 初期設定動作では、まず、ステップS11で、現場画像FMが作成され、保守サーバ3の記憶装置35に記憶される。
 現場画像FMを自動倉庫システム1の実写画像とする場合には、自動倉庫システム1の複数の箇所で実写画像を撮影する。次に、それぞれが自動倉庫システム1のどの位置で撮影されたかを考慮して、当該複数の実写画像を連結して現場画像FMを作成する。その他、実写画像をパノラマ画像として撮影して、現場画像FMとすることもできる。
 一方、現場画像FMを自動倉庫システム1のデジタルモデルとする場合には、例えば、CADなどを用いて描画した自動倉庫システム1の三次元イメージを現場画像FMとする。
 次に、ステップS12において、保守サーバ3は、保守端末21a、21bから自動倉庫システム1の各設備にアクセスするためのアクセス情報ACを取得する。本実施形態において、アクセス情報ACは、中継サーバ4から取得する。アクセス情報ACの取得動作については、後ほど詳しく説明する。
 アクセス情報ACを取得後、ステップS13において、保守サーバ3は、取得したアクセス情報ACと、現場画像FM中のオブジェクトOとを関連付ける。この関連付けは、例えば、以下のようにして実行できる。
 まず、現場画像FMにおいて、自動倉庫システム1の設備を表す画像をオブジェクトOとして特定する。その後、特定したオブジェクトOのそれぞれについて、その座標値を取得する。オブジェクトOの座標値は、例えば、オブジェクトOを表す画素の現場画像FMにおける配置位置(座標値)とすることができる。
 次に、オブジェクトOの座標値と、そのオブジェクトOに対応する設備のアクセス情報ACと、を関連付けて関連付け情報AIに記憶する。
 上記のステップS11~S13を実行することにより、保守サーバ3は、合成画像SIを生成するために必要な情報を得られる。すなわち、保守サーバ3は、現場画像FMと、関連付け情報AIと、アクセス情報ACを含む第1設備リストEL1と、自動倉庫システム1の識別情報INと、を関連付けて合成画像作成情報GIを得られる。
 なお、上記のステップS13において、保守サーバ3は、自動倉庫システム1及び保守拠点2から、これらが有する稼働情報FI及び保守情報MIを受信する。その後、保守サーバ3は、現場画像FMの各オブジェクトOに、対応する設備の稼働情報FI及び保守情報MIをさらに関連付けて、関連付け情報AIに記憶する。このとき、保守サーバ3は、稼働情報FI及び保守情報MIへのリンクを、各オブジェクトOに関連付ける。
 上記のように、稼働情報FIには、自動倉庫システム1の設備にて発生した異常を示す異常情報が含まれる。従って、現場画像FMの各オブジェクトOに稼働情報FIを関連付けることにより、異常が発生した設備に対応するオブジェクトOに異常情報を関連付けて、合成画像SIを生成できる。
 また、保守サーバ3は、初期設定動作として、保守サーバ3にログインするためのユーザ登録、各ユーザに対する情報へのアクセス制限等の設定動作を実行してもよい。
(8-2)アクセス情報取得動作
 次に、図14及び図15を用いて、上記の初期設定動作のステップS12の動作、すなわち、アクセス情報ACの取得動作をより詳細に説明する。図14は、アクセス情報の取得動作を示すフローチャートである。図15は、アクセス情報の取得における情報の送受信を示す図である。
 アクセス情報ACを取得するために、保守サーバ3は、ステップS21で、中継サーバ4に設備リスト要求信号を送信する。
 具体的には、保守サーバ3は、まず、所望のアクセス情報ACが存在する自動倉庫システム1の識別番号を特定する。その後、ゲートウェイリストGLにおいて、特定した識別番号に関連付けられた第1ゲートウェイ装置19のログインIDを特定する。
 ログインIDを特定後、保守サーバ3は、設備リスト要求信号とともに、特定したログインIDを中継サーバ4に送信する(ステップS201)。
 上記要求信号を受信した中継サーバ4は、要求信号とともに送信されてきたログインIDが、いずれの自動倉庫システム1の第1ゲートウェイ装置19のものであるかを特定する。その後、中継サーバ4は、設備リスト要求信号を、上記にて特定した第1ゲートウェイ装置19へ送信する(ステップS202)。
 中継サーバ4から設備リスト要求信号を受信すると(ステップS202)、第1ゲートウェイ装置19は、自身が保有する第1設備リストEL1を、中継サーバ4へ送信する(ステップS203)。
 その後、所望の第1設備リストEL1を第1ゲートウェイ装置19から取得したら(ステップS203)、中継サーバ4は、その第1設備リストEL1を保守サーバ3へ送信する(ステップS204)。
 中継サーバ4から第1設備リストEL1を受信すると(ステップS22で「Yes」)、保守サーバ3は、取得した第1設備リストEL1を、合成画像作成情報GIとして記憶装置35に記憶する。その後、保守サーバ3は、記憶した第1設備リストEL1から、各設備のアクセス情報ACを抽出する。
 以上のようにして、保守サーバ3は、所望の第1設備リストEL1を、中継サーバ4を介して、対応する第1ゲートウェイ装置19から受信し、受信した第1設備リストEL1からアクセス情報ACを抽出して取得できる。
(8-3)合成画像の生成/出力動作
 次に、図16及び図17を用いて、上記ステップS2における合成画像SIの生成と出力の具体的な動作を説明する。図16は、合成画像出力までの動作における保守サーバの動作を示すフローチャートである。図17は、合成画像出力までの動作における情報の送受信を示す図である。以下では、保守拠点2の保守員が保守端末21aを用いて、保守サーバ3へアクセスする場合を例にとって説明する。
 合成画像SIの生成と出力は、初期設定動作が完了し稼働中の保守サーバ3に対して、保守端末21aから、保守サーバ3への接続要求がなされることにより開始される(ステップS301)。具体的には、例えば、保守端末21aのウェブブラウザにおいて保守サーバ3のアドレスが指定され、このウェブブラウザが保守サーバ3へ接続要求を出力する。
 接続要求を受信すると(ステップS31で「Yes」)、保守サーバ3は、ステップS32で、接続要求のあった保守端末21aにログイン画面I1を出力する(ステップS302)。例えば、図18に示すようなログイン画面I1が出力される。図18は、ログイン画面の一例を示す図である。
 保守員は、保守端末21aに表示されたログイン画面I1において、ユーザID入力欄T1に自身のユーザIDを入力し、パスワード入力欄T2に自身のパスワードを入力する。その後、ログインボタンB1を押すことで、入力されたユーザID及びパスワードが、認証情報として保守サーバ3に出力される(ステップS303)。
 保守端末21aから認証情報を受信すると(ステップS33で「Yes」)、保守サーバ3は、ステップS34において、認証動作を実行する。具体的には、保守サーバ3は、受信した認証情報、すなわち、ユーザID及びパスワードと、ユーザ情報UIに記憶されたユーザID及びパスワードとを比較する。
 上記比較の結果、受信した認証情報がユーザ情報UIに存在しない、又は、受信した認証情報とユーザ情報UIに記憶されたユーザID及びパスワードとが一致しないなどの理由により認証に失敗した場合(ステップS34で「No」)、保守サーバ3は、合成画像出力処理を終了する。
 認証に失敗した場合、保守サーバ3は、認証に失敗したことを、ログインしようとしている保守端末21aに通知する。また、保守サーバ3は、認証が所定の回数失敗後に、合成画像出力処理を終了してもよい。
 一方、受信した認証情報により認証に成功すると(ステップS34で「Yes」)、保守サーバ3は、ステップS25において、認証に成功した保守端末21aに、初期画面I2(図25)を出力する(ステップS304)。初期画面I2の構成については、後ほど説明する。
 保守端末21aに初期画面I2が表示された後、保守員は、初期画面I2を用いて入室したいルームを選択する。作業者端末17又は保守端末21aが、選択されたルームのチャットへの参加要求を、チャット入室要求として保守サーバ3に送信する(ステップS305)。
 保守端末21aからチャット入室要求を受信すると、保守サーバ3は、ステップS36において、合成画像SIを生成する。以下、図19を用いて、ステップS36で実行される合成画像SIの生成動作を、さらに詳しく説明する。図19は、合成画像の生成動作を示すフローチャートである。
 まず、ステップS41において、保守サーバ3は、現場画像FMの各オブジェクトOに対応する設備ついて、対象の保守員が閲覧可能な稼働情報FI及び保守情報MI、及び、当該保守員がアクセス可能な設備を選択する。
 具体的には、保守サーバ3は、ユーザIDにて識別された保守員に対して閲覧可能となっている稼働情報FI、保守情報MIを判断する。また、当該保守員がアクセス可能な設備を判断する。
 次に、保守サーバ3は、関連付け情報AIを参照し、各オブジェクトOに関連付けられている稼働情報FI、保守情報MI、アクセス情報ACのうち、対象の保守員が閲覧可能となっている稼働情報FI及び保守情報MIを抽出する。また、当該保守員がアクセスできる設備のアクセス情報ACを抽出する。
 さらに、保守サーバ3は、各オブジェクトOと、対応する設備について抽出した稼働情報FI、保守情報MI、及びアクセス情報ACと、を関連付けて、対象の保守員ごとの独自の関連付け情報を生成する。
 独自の関連付け情報を生成後、保守サーバ3は、ステップS42において、当該独自の関連付け情報において、現場画像FMの各オブジェクトOに稼働情報FI、保守情報MI、又は、アクセス情報ACが関連付けられているか否かを判定する。
 独自の関連付け情報において、稼働情報FI、保守情報MI、アクセス情報ACのいずれもオブジェクトOに関連付けられていない場合(ステップS42で「No」)、合成画像SIの生成処理はステップS44に進む。
 一方、独自の関連付け情報において、稼働情報FI、保守情報MI、アクセス情報ACのいずれかがオブジェクトOに関連付けられている場合(ステップS42で「Yes」)、保守サーバ3は、ステップS43において、このオブジェクトOが存在する現場画像FMの座標位置に、所定のアイコンを配置する。この所定のアイコンは、稼働情報FI及び/又は保守情報MIがオブジェクトOに関連付けられていることを示す。
 また、このオブジェクトOに対応する設備が保守端末21aを用いてアクセス可能であれば、当該オブジェクトOのアイコンには、対応する設備のアクセス情報ACが表示される。なお、後述するように、関連付けられている稼働情報FI及び/又は保守情報MIの種類により、配置するアイコンの種類(形状)は異なっている。
 アイコンを配置後、保守サーバ3は、上記独自の関連付け情報に基づいて、アイコンをクリックすることによりステップS41で選択された稼働情報FI、保守情報MIを参照できるリンクを生成する。
 それと同時に、アクセス情報ACが表示されたアイコンをクリックすることにより、ステップS41で選択されたアクセス情報ACを用いて通信セッションを確立する指令(セッション確立指令と呼ぶ)を出力する命令を生成する。
 ここで、稼働情報FI、保守情報MIへのリンクとは、保守サーバ3における稼働情報FI及び/又は保守情報MIの保存位置を表す情報をいう。リンクは、例えば、稼働情報FI及び/又は保守情報MIへアクセスするためのURLである。
 設備数が多い自動倉庫システム1においては、1つのオブジェクトO(設備)に関連付けられる稼働情報FI及び保守情報MIは、通常、複数存在する。従って、本実施形態では、各オブジェクトOに関連付けられている稼働情報FI及び保守情報MIへのリンクは、リスト化され、リストとして管理される。また、本実施形態では、このリストへのリンクを各オブジェクトOに関連付ける。
 その一方で、アクセス情報ACは設備ごとに異なっているので、通信セッション確立指令を出力する命令は、各オブジェクトOに直接関連付けられる。
 上記の処理により、現場画像FMにおいて、稼働情報FI、保守情報MI、アクセス情報ACのいずれかが関連付けられているオブジェクトOにはアイコンを配置できる一方、これら情報が全く関連付けられていないオブジェクトOにはアイコンを配置しないようにできる。
 必要に応じてオブジェクトOにアイコンを配置後、ステップS44において、現場画像FMの全てのオブジェクトOに対して上記ステップS41~S43を実行したか否かを確認する。すなわち、全てのオブジェクトOについて関連付けるべき稼働情報FI、保守情報MI、アクセス情報ACを決定したか否かを確認する。
 全てのオブジェクトOについて情報の関連付けを決定していない場合(ステップS44で「No」)、他のオブジェクトOについて上記S41~S43をさらに実行する。
 一方、全てのオブジェクトOについて情報の関連付けを決定した場合(ステップS44で「Yes」)、合成画像SI(図26A)の生成を終了する。
 具体的構成については後ほど説明するが、合成画像SIでは、現場画像FMのオブジェクトOに稼働情報FI、保守情報MI、アクセス情報ACのいずれかが関連付けられていると、そのオブジェクトOにアイコンが配置される。
 また、オブジェクトOに関連付けられている情報の種類によりアイコンの形状は異なっており、アクセス情報ACが関連付けられているオブジェクトOには、そのアクセス情報ACがアイコンとともに表示される。
 このような合成画像SIにより、どのオブジェクトOにどの種類の稼働情報FI、保守情報、アクセス情報ACが関連付けられているかを、視覚的に整理された状態で保守員に示すことができる。
 図16及び図17に戻り、上記のようにして合成画像SIを生成後、保守サーバ3は、ステップS37において、合成画像SIとともにチャット欄A4(図27)を設けた表示画面I3を、この合成画像SIの生成に用いたユーザIDの保守員が使用中の保守端末21aに送信する(ステップS306)。
 例えば、合成画像SIが表示される領域の外側にチャット欄A4を設ける。
 なお、自動倉庫システム1の作業者が作業者端末17を用いて保守サーバ3にアクセスした場合も、上記ステップS31~S37、及び、ステップS41~S44が実行される。すなわち、合成画像SIが生成され、表示画面I3が作業者端末17に出力される。ただし、この場合の合成画像SIのオブジェクトOには、アクセス情報ACは関連付けられない。つまり、作業者端末17を使用する作業者は、合成画像SIを参照して稼働情報FI及び保守情報MIのみを閲覧できる。
 また、保守サーバ3は、生成した合成画像SIに、当該合成画像SIが示す自動倉庫システム1の識別情報INを関連付ける。合成画像SIのオブジェクトOが選択(クリック)された場合には、この識別情報INをオブジェクトOの選択結果(後述)に含めて保守サーバ3に送信する。
(8-4)合成画像の出力までの動作に関するまとめ
 図13~図19を用いて説明した、保守サーバ3の合成画像SIの出力までの動作については、以下のようにまとめることができる。
 本実施形態においては、保守サーバ3が、自動倉庫システム1を表す現場画像FMを作成し(ステップS11)、設備にアクセスするためのアクセス情報ACを取得し(ステップS12、ステップS21~S23)、現場画像FM内において設備を表すオブジェクトOに、当該設備にアクセスするためのアクセス情報ACを関連付けて合成画像SIを生成し(ステップS13、ステップS41~S44)、保守端末21a、21bに合成画像SIを出力している(ステップS37)。
 上記のようにして生成された合成画像SIのオブジェクトOには、対応する設備にアクセスするためのアクセス情報ACが関連付けられている。これにより、保守端末21a、21bのユーザ(保守員)は、合成画像SIを参照して、アクセスしたい設備を容易に特定できる。
 また、本実施形態においては、保守サーバ3が、自動倉庫システム1から稼働情報FIを取得し、対応するオブジェクトOに稼働情報FIを関連付けて合成画像SIを生成している。上記のように、稼働情報FIには、自動倉庫システム1の設備で発生した異常を示す異常情報が含まれているので、保守員は、設備に発生した異常に関する情報に容易かつ迅速にアクセスできる。
 また、本実施形態においては、保守サーバ3が、チャット欄A4を合成画像SIとともに表示する表示画面I3を出力している。また、保守サーバ3は、作業者のユーザIDを用いて生成した合成画像SIとともにチャット欄A4を設ける。
 これにより、チャット欄A4を用いて、保守端末21a、21bを使用する保守員と、作業者端末17を使用する作業者との間でチャット機能を使用できる。
(9)通信セッション確立動作
(9-1)通信セッション確立動作
 上記のように、合成画像SIを生成し出力すると、合成画像SIとチャット欄A4とがともに表示された表示画面I3が保守端末21a、21bに表示される。表示画面I3が表示されることで、アクセス可能な設備を容易に特定可能な合成画像SIの提供が開始される。それとともに、保守サーバ3に蓄積された稼働情報FI及び保守情報MIの提供が開始される。
 すなわち、保守員は、合成画像SIを参照して、所望のオブジェクトOに配置されたアイコンをクリックすることで、そのオブジェクトOに対応する設備に容易かつ迅速にアクセスできる。また、それとともに、オブジェクトOに関連付けられた稼働情報及び保守情報MIにアクセスできる。
 以下、図20及び図21を用いて、保守端末21a、21bと、合成画像SIにおいて特定したオブジェクトOに対応する設備と、の間に通信セッションを確立するまでの動作を説明する。図20は、保守サーバの通信セッション確立動作を示すフローチャートである。図21は、通信セッション確立動作における情報の送受信を示す図である。
 以下では、保守サーバ3にログインしている保守端末21aと、自動倉庫11のスタッカクレーンの制御盤(設備名:クレーン#1制御盤)と、の間の通信セッションの確立を例にとって説明する。
 保守端末21aに表示される表示画面I3の合成画像SI(図26A)において、アクセス情報ACが付されたアイコンがクリックされると(図12のステップS3で「Yes」)、クリックされたアイコンの情報が、オブジェクトOの選択結果として、保守端末21aから保守サーバ3に送信される(ステップS501)。
 例えば、「Ctrl001 192.168.0.111」とのアクセス情報ACが付されたアイコンがクリックされた場合、保守端末21aは、自身のIPアドレス(LAN内)と、その保守端末21aが存在する保守拠点2の識別番号と、当該アクセス情報ACと、合成画像SIに関連付けられた識別情報INと、をオブジェクトOの選択結果として、保守サーバ3に送信する。
 なお、オブジェクトOにアクセス情報ACが関連付けられたことを示さないアイコンがクリックされた場合には、保守サーバ3は、そのアイコンに関連付けられた動作を実行する。
 オブジェクトOの選択結果を保守端末21aから受信すると、保守サーバ3は、ステップS51において、保守サーバ3がアクセスしようとしている設備が、いずれの第1ゲートウェイ装置19に接続されているかを特定する。
 具体的には、保守サーバ3は、ゲートウェイリストGLにおいて、受信した選択結果の識別情報INが、どの第1ゲートウェイ装置19の識別情報に関連付けられているかを特定する。例えば、「101」との識別番号を識別情報INとして受信したとき、保守サーバ3は、図10AのゲートウェイリストGLを参照し、ログインID「vpn001」を有する第1ゲートウェイ装置19を特定する。
 また、ステップS51においては、保守サーバ3は、オブジェクトOの選択結果を送信した保守端末21aが接続された第2ゲートウェイ装置23も特定する。例えば、「201」との識別番号を受信したとき、保守サーバ3は、図10AのゲートウェイリストGLを参照し、ログインID「vpn002」を有する第2ゲートウェイ装置23を特定する。
 次に、保守サーバ3は、ステップS52において、保守サーバ3がアクセスしようとしている設備のアクセス情報ACを特定する。具体的には、保守サーバ3は、オブジェクトOの選択結果として送信されたアクセス情報ACを、アクセスしようとしている設備のアクセス情報ACとして特定する。
 また、ステップS52においては、保守サーバ3は、オブジェクトOの選択結果として受信した保守端末21aのアドレスから、保守端末21aのIPアドレスを特定する。
 その後、保守サーバ3は、ステップS53において、上記ステップS51~S52により特定した第1ゲートウェイ装置19のログインID(vpn001)、特定した第2ゲートウェイ装置23のログインID(vpn002)、特定したアクセス情報AC、及び、保守端末21aのIPアドレスを、第1ゲートウェイ装置19への接続要求として、中継サーバ4に送信する(ステップS502)。
 上記のステップS51~S53を実行することにより、保守サーバ3は、通信システム100において、保守端末21aと自動倉庫システム1の設備との間に通信セッションを確立させるための指令を、中継サーバ4に送信できる。
 保守端末21aと自動倉庫システム1の設備との間に通信セッションを確立させるための指令を送信後は、主に、中継サーバ4、第1ゲートウェイ装置19、及び、第2ゲートウェイ装置23により、通信セッションの確立動作が実行される。以下、図21を用いて、当該確立動作を説明する。
 上記の接続要求を受信した中継サーバ4は、接続要求先のユーザID「vpn001」から第1ゲートウェイ装置19のネットワークアドレスを特定する。また、ユーザID「vpn002」から、保守端末21aが接続された第2ゲートウェイ装置23のネットワークアドレスを特定する。
 その後、特定した第2ゲートウェイ装置23のネットワークアドレス、アクセス情報AC、及び、保守端末21aのIPアドレスを、接続要求として、特定した第1ゲートウェイ装置19に送信する(ステップS503)。
 上記の接続要求を受信した第1ゲートウェイ装置19は、当該接続要求を受け入れるか否かを決定する。この接続要求を受け入れると決定した場合には、第1ゲートウェイ装置19は、接続要求を受け入れる旨の通知を、受信した接続要求に含まれていたネットワークアドレスを有する第2ゲートウェイ装置23に送信する(ステップS504)。
 上記通知を受信した第2ゲートウェイ装置23は、自身が有する第2設備リストEL2を、上記通知の送信元の第1ゲートウェイ装置19に送信する(ステップS505)。
 第2設備リストEL2を受信した第1ゲートウェイ装置19は、受信した設備リストの送信元の第2ゲートウェイ装置23に、自身が有する第1設備リストEL1を送信する(ステップS506)。
 以上のステップS505及びS506により、互いが有する第1設備リストEL1と第2設備リストEL2を交換後、第1ゲートウェイ装置19及び第2ゲートウェイ装置23は、互いの間にVPNセッションを確立する。
 上記のように第1ゲートウェイ装置19と第2ゲートウェイ装置23との間でVPNセッションを確立することにより、保守端末21aは、第2ゲートウェイ装置23と第1ゲートウェイ装置19とを介して、第1ゲートウェイ装置19に接続された設備にアクセスできる。
 また、第1ゲートウェイ装置19と第2ゲートウェイ装置23との間にVPNセッションが確立されると、保守端末21aと自動倉庫システム1の各設備は、交換した第1設備リストEL1及び第2設備リストEL2のアドレス記録部分R2に記録されているIPアドレスを用いて、互いに通信できる。
 例えば、VPNセッションの確立後に、自動倉庫システム1の設備(設備名:クレーン#1制御盤の制御盤)は、保守端末21aのIPアドレス「172.28.0.2」宛てに、当該設備のIPアドレス「192.168.0.111」とともに、自身へのVPN接続が可能である旨を通知する。
 当該通知を受信した保守端末21aは、例えば、設備の保守アプリケーションを起動する。これにより、保守端末21aのユーザ(保守員)は、当該アプリケーションを用いて設備(制御盤)の保守を実行できる。
 上記のVPNセッションにより、保守端末21aと自動倉庫システム1の設備は、第1ゲートウェイ装置19及び第2ゲートウェイ装置23を介して、LAN内で用いられているIPアドレス(例えば、「192.168.*.*」、「172.28.*.*」(*:ワイルドカード)などのIPアドレス)を用いて、セキュリティを確保した状態で互いにデータを送受信できる。
(9-2)通信セッション確立動作に関するまとめ
 図20及び図21を用いて説明した、保守端末21a、21bと自動倉庫システム1の設備との間の通信セッションの確立動作については、以下のようにまとめることができる。
 上記のように、保守端末21a、21bにより、合成画像SI内の特定のオブジェクトO(アクセス情報ACが付されたオブジェクトO)が選択されると(ステップS3、ステップS501)、保守サーバ3は、選択されたオブジェクトOに関連付けられたアクセス情報ACを用いて、当該オブジェクトOに対応する設備と保守端末21a、21bとの間に通信セッションを確立させる(ステップS51~S53、ステップS502)。
 これにより、保守端末21a、21bのユーザ(保守員)は、合成画像SIを参照してアクセスしたい設備を容易に特定できるとともに、特定した設備に迅速にアクセスできる。
(10)合成画像SIを表示中に実行できる機能
(10-1)合成画像SIを表示中に実行可能な機能の概略
 上記にて説明した図27に示すような表示画面I3が表示された後、保守端末21a、21bにおいて、保守員は、チャット欄A4を用いてチャットすることができる。また、チャット以外にも、合成画像SIを用いた各種機能を実行できる。
 例えば、チャット欄A4のチャット内容を合成画像SIに関連付けて新たな合成画像SIを生成できる。また、チャット欄A4のチャット内容をクリックすると、このチャット内容に関連した合成画像SIの位置(オブジェクトO)に「ジャンプ」(アクセス)できるようになる。
 さらには、新たな稼働情報FI及び保守情報MIを生成し、又は、既存の稼働情報FI及び保守情報MIを編集し、それを合成画像SIに関連付けることもできる。
 稼働情報FI及び保守情報MIの更新だけでなく、保守サーバ3は、自動倉庫システム1における設備の接続状態に変化があった場合、自動倉庫システム1の設備に変更があった場合、設備数に増減があった場合には、これらの変更を合成画像SIに反映できる。
(10-2)設備変更に伴う合成画像の更新動作
 以下、図22及び図23を用いて、設備の変更があった場合の通信システム100における動作を説明する。図22は、設備の変更があった場合の保守サーバの動作を示すフローチャートである。図23は、設備の変更があった場合における情報の送受信を示す図である。
 例えば、自動倉庫システム1において新たなゲートウェイ装置が追加された、及び/又は、既存の自動倉庫システム1において設備が除去及び/又は追加された場合、設備の変更があった自動倉庫システム1の第1ゲートウェイ装置19は、新たな設備の変更に対応した第1設備リストEL1を生成(更新)する。当該第1ゲートウェイ装置19は、新たな第1設備リストEL1を中継サーバ4に送信する(ステップS601)。
 新たな第1設備リストEL1を受信した中継サーバ4は、それを保守サーバ3へ送信する(ステップS602)。このとき、中継サーバ4は、新たな第1設備リストEL1を送信した第1ゲートウェイ装置19の識別情報IN(例えば、ログインID)を、新たな第1設備リストEL1とともに送信する。
 新たな第1設備リストEL1を受信した保守サーバ3は、新たな第1設備リストEL1に対応するよう、合成画像SIを更新する。合成画像SIの更新は、以下のようにして実行される。
 まず、ステップS61で、保守サーバ3は、新たな第1設備リストEL1の各アクセス情報ACと、合成画像SI中のオブジェクトOとの新たな関連付けを実行する。
 具体的には、保守サーバ3は、まず、新たな第1設備リストEL1とともに送信されてきた識別情報INにより、どの合成画像作成情報GIを変更すべきかを決定する。次に、対応する合成画像作成情報GIの第1設備リストEL1を、新たな第1設備リストEL1に置き換える。さらに、保守サーバ3は、オブジェクトOと、新たな第1設備リストEL1に含まれる新たなアクセス情報ACとの関連付けを実行し、新たな関連付け情報AIを生成する。
 なお、上記ステップS61のオブジェクトOと新たなアクセス情報ACとの関連付けは、上記にて説明したステップS11~S13(図13)、及び、ステップS21~S23(図14)を、新たな第1設備リストEL1に基づいて実行することにより実現できる。従って、ここでは詳細な説明を省略する。
 オブジェクトOとアクセス情報ACの新たな関連付けを実行後、保守サーバ3は、ステップS62において、新たな合成画像作成情報GIに基づいて、新たな合成画像SIを生成し、保守端末21a、21bに出力する(ステップS603)。
 なお、上記ステップS52の新たな合成画像SIの生成と出力は、ステップS31~S37(図16)、及び、ステップS41~S44(図19)を、新たな関連付けに基づいて実行することにより実現できる。従って、ここでは詳細な説明を省略する。
 このように、合成画像SIを生成後に自動倉庫システム1の設備に変更があった場合に、当該設備の変更に対応した新たなアクセス情報を用いて、新たな合成画像SIを生成し出力することにより、自動倉庫システム1において設備の変更があった場合には、その変更を反映した最新の合成画像SIを保守端末21a、21bに提供できる。
 上記のようにして新たな合成画像SIを生成後、保守サーバ3は、ステップS63において、保守端末21a、21bに、合成画像SIが更新されたことを通知する。
 上記通知は、例えば、図24に示すように、チャット欄A4の所定領域(図24の例では下部領域)に「合成画像が更新されました」との表示を有するポップアップウィンドウPUを、表示画面I3上に表示する指令である。図24は、合成画像が更新されたことの通知の一例を示す図である。その他、上記通知は、保守端末21a、21bに、所定の音を発生させる指令であってもよい。
 あるいは、チャット欄A4に「合成画像が更新されました」というメッセージを投稿してもよい。また、このメッセージには更新されたデータへのリンクを含めておき、メッセージ中のリンクから、合成画像SI中の更新されたデータにアクセスできるようにしてもよい。
 このように、新たな合成画像SIが生成された場合に、保守サーバ3が保守端末21a、21bにその旨を通知することにより、保守端末21a、21bを使用する保守員は、新たな合成画像SI(最新の合成画像SI)が生成されたこと、すなわち、合成画像SIの更新があったことを容易に認識できる。また、保守員は、合成画像SIの更新があったことを認識することにより、自動倉庫システム1において設備の変更があったことを認識できる。
 なお、保守端末21a、21bを使用する保守員が、作業者端末17を使用する作業者とチャットをしている場合には、上記のポップアップを、作業者端末17のチャット欄A4にも表示する。これにより、自動倉庫システム1の作業者に対しても、合成画像SIの更新とともに、自動倉庫システム1において設備に変更があったことを通知できる。
(11)画面表示の構成
(11-1)初期画面
 以下、保守端末21a、21bのディスプレイに表示される表示画面の構成について簡単に説明する。なお、以下に示す表示画面は一例であって、表示画面の構成及び/又は外観は適宜変更できる。
 まず、図25を用いて、保守サーバ3にログイン後に作業者端末17及び保守端末21a、21bに表示される初期画面I2の構成を説明する。図25は、初期画面の一例を示す図である。初期画面I2は、利用履歴表示欄A1を有する。利用履歴表示欄A1には、利用履歴をリスト表示する利用履歴リストL1と、利用履歴を更新するための更新ボタンB2と、メモを記載するためのメモ欄T3と、が表示される。
 初期画面I2は、ルーム選択欄A2を有する。ルーム選択欄A2には、どのチャットのルームに入室するかを選択するための選択ボタンB3が表示される。いずれかの選択ボタンB3が押されると、選択されたボタンのチャットのルームへの入室が要求される。
 なお、ユーザが入出できないルームのボタンは、非表示とするか、又は、無効(選択できない)とされる。
 初期画面I2は、ユーザ情報変更欄A3を有する。ユーザ情報変更欄A3には、ユーザの情報(ユーザID、パスワード、ユーザIDに関連付けるユーザの名称)を編集するための情報編集欄T4と、ユーザ画像(アバター)を変更するための画像変更ボタンB4と、アカウント種別を変更するための種別変更欄M1と、押されるとユーザの情報が更新される更新ボタンB5と、が表示される。
(11-2)合成画像
 次に、図26A及び図26Bを用いて、合成画像SIの構成を説明する、図26Aは、合成画像の一例を示す図である。図26Bは、合成画像の一部の拡大図である。合成画像SIは、自動倉庫システム1の設備を表す複数のオブジェクトOを表示する。具体的には、自動倉庫システム1に含まれる複数種類の自動倉庫11がオブジェクトOとして表示されている。
 また、合成画像SIでは、各オブジェクトOにアイコンが配置されている。図26Aに示す合成画像SIの例では、八種類のアイコン(ICO1~ICO8)が配置されている。なお、合成画像SIに表示されるアイコンの種類は、設備に関連付ける情報の種類などにより、任意に決定できる。
 第1アイコンICO1は、「i」の文字が丸で囲まれた形状を有している。第1アイコンICO1は、このアイコンが配置された設備には、この設備に関する各種情報(マニュアル等)が稼働情報FI及び/又は保守情報MIとして関連付けられていることを示す。また、第1アイコンICO1の下には、「***INFO」(「***」は設備の呼称。以下同じ)との文字が付され、第1アイコンICO1がどのオブジェクトに配置されているかが具体的に示されている。
 第2アイコンICO2は、小型カメラを模した形状を有している。第2アイコンICO2は、このアイコンが配置された設備には、この設備に設けられたカメラCAが取得した画像データが稼働情報FIとして関連付けられていることを示す。また、第2アイコンICO2の下には、「***カメラ」との文字が付され、第2アイコンICO2がどのオブジェクトに配置されているかが具体的に示されている。
 第3アイコンICO3は、温度計と湿度計を模した形状を有している。第3アイコンICO3は、このアイコンが付された設備には、この設備に設けられたセンサSEが取得したデータ(温度、湿度)が稼働情報FIとして関連付けられていることを示す。また、第3アイコンICO3の下には、「***湿温度」との文字が付され、第3アイコンICO3がどのオブジェクトに配置されているかが具体的に示されている。
 第4アイコンICO4は、ドキュメントの形状を有している。第4アイコンICO4は、このアイコンが付された設備には、この設備のパーツリストが保守情報MIとして関連付けられていることを示す。また、第4アイコンICO4の下には、「***パーツリスト」との文字が付され、第4アイコンICO4がどのオブジェクトに配置されているかが具体的に示されている。
 第5アイコンICO5は、大型カメラを模した形状を有している。第5アイコンICO5は、このアイコンが付された大型カメラには、このカメラが取得した画像データが稼働情報FIとして関連付けられていることを示す。また、第5アイコンICO5の下には、「カメラ」との文字が付され、第5アイコンICO5が大型カメラのオブジェクトに配置されていることが示されている。
 第6アイコンICO6は、逆三角形の図形の横に矢印が付された形状を有している。第6アイコンICO6は、現場画像FM(合成画像SI)の所定位置に設けられ、このアイコンをクリックすることで、合成画像SIの視野が当該アイコンの方向に移動することを示す。
 第6アイコンICO6が押されるか又は操作されると、合成画像SIの視野の中心が、選択された第6アイコンICO6の位置となり、視野の方向が第6アイコンICO6の正面になる方向となる。これにより、合成画像SIにおいて、自動倉庫システム1を移動するような仮想現実を実現できる。
 第7アイコンICO7は、現場画像FM(合成画像SI)の所定位置に設けられ(図26Aの例では合成画像SIの上方)、スイッチの形状を有している。また、その下には「View Mode」との文字が付されている。第7アイコンICO7は、クリックすることで、上記第1アイコンICO1~第6アイコンICO6の表示と非表示とを切り替えることができる機能を有する。
 第8アイコンICO8は、現場画像FM(合成画像SI)の所定位置に設けられ(図26Aの例では合成画像SIの上方)、スイッチの形状を有している。また、その上には「VPN」との文字が付されている。第8アイコンICO8は、クリックすることで、合成画像SIにおいてアクセス情報ACの表示と非表示とを切り替えることができる機能を有する。
 図26B(図26Aの点線で囲まれた部分の拡大図)に示すように、合成画像SIに含まれるいくつかのアイコンには、アクセス情報ACが表示されている。図26Bで示す例では、「PL1_INFO」との記載と第1アイコンICO1との間に、「Ctrl001 192.168.0.111」と、当該設備(スタッカクレーンの制御盤)のサブIDとIPアドレスとが、アクセス情報ACとして表示されている。また、「PL1_クレーンカメラ」との記載と第2アイコンICO2との間に、「Cam001 192.168.0.1」と、当該設備(カメラCA)のサブIDとIPアドレスとが、アクセス情報ACとして表示されている。
(11-3)合成画像とチャット欄との表示画面
 以下、図27を用いて、合成画像SIとチャット欄A4とを同時に表示した表示画面I3の構成を説明する。図27は、合成画像とチャット欄とを同時表示した表示画面の一例を示す図である。
 図27に示すように、表示画面I3においては、合成画像SIが表示される領域の外側に、上記にて説明したルーム選択欄A2と、チャット欄A4と、が表示される。図27に示す例では、ルーム選択欄A2は合成画像SIの左側に表示され、チャット欄A4は右側に表示される。
 チャット欄A4では、チャット中の所定のタイミングでなされたチャット内容が吹き出しCHとして時系列に配置される。また、チャット欄A4には、ファイル選択欄FSが配置されている。ファイル選択欄FSは、作業者端末17又は保守端末21aなどに保存されたファイルを選択し、チャット内容(吹き出しCH)に添付する。
 このようにしてチャット内容に添付されたファイルは、合成画像SIにドラッグすることにより、合成画像SIの所定の位置又はオブジェクトOに、稼働情報FI又は保守情報MIとして関連付けることができる。
 チャット内容から関連付けられたファイルは、例えば、作業者端末17にて上記動作がなされた場合には稼働情報FIとして関連付け、保守端末21a、21bにて上記動作がされた場合には保守情報MIとして関連付けることができる。
 また、図28に示すように、表示画面I3において表示状態を切り替えることにより、合成画像SIのオブジェクトOに関連付けられているアクセス情報ACを文字によりリスト表示することもできる。図28は、アクセス情報を文字のリストLSTとして表示した表示画面の一例を示す図である。
2.他の実施形態
 以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、発明の要旨を逸脱しない範囲で種々の変更が可能である。特に、本明細書に書かれた複数の実施形態及び変形例は必要に応じて任意に組み合せ可能である。
 上記にて説明したフローチャートの処理の順番、及び、各ステップの処理内容は、発明の要旨を逸脱しない範囲で変更可能である。
 (A)合成画像SIは、オブジェクトOにアクセス情報ACが関連付けられたことを示すアイコンを有さなくてもよい。この場合、例えば、合成画像SI上にカーソル(例えば、マウスカーソル)が配置されたときに、そのカーソルが指しているオブジェクトOにアクセス情報ACが関連付けられているなら、そのオブジェクトOのアクセス情報ACが表示されてもよい。また、オブジェクトOに関連付けてアクセス情報AC自体が表示されなくてもよく、例えば、オブジェクトOに対応する設備にアクセスするか否かを問うメッセージが表示されてもよい。すなわち、合成画像SIにおいてオブジェクトOにアクセス情報ACが関連付けられていればよく、具体的な表示態様は問わない。
 (B)ユーザIDとパスワード以外にも、作業者及び保守員の人体情報(例えば、指紋、血管(静脈)パターン、虹彩パターン、顔パターンなど)を用いたユーザ認証を用いることもできる。
 さらに、例えば、作業者端末17及び保守端末21a、21bの識別情報(例えば、MACアドレス、IPアドレス、など)を用いたユーザ認証を用いることもできる。この場合には、作業者端末17、保守端末21a、21b、LANグループ、自動倉庫システム1、及び保守拠点2などの単位で閲覧権限を設けることができる。
 (C)上記にて説明した通信システム100は、自動倉庫システム1と、自動倉庫システム1の設備を保守する保守拠点2との間の情報共有の用途以外にも、隔離された箇所で情報を共有するシステムにおいて使用できる。
 (D)チャット欄A4は、合成画像SIの一部に重なった状態で表示されてもよい。この場合には、チャット欄A4及び/又は合成画像SIを画面中で移動可能となっていてもよい。
 本発明は、作業現場内の設備を遠隔にて保守するための通信システムに広く適用できる。
100 通信システム
1     自動倉庫システム
11   自動倉庫
13a 第1外部記憶装置
13b 第2外部記憶装置
15a 搬送管理サーバ
15b 情報管理サーバ
17   作業者端末
19   第1ゲートウェイ装置
2     保守拠点
21a、21b保守端末
23   第2ゲートウェイ装置
3     保守サーバ
31   プロセッサ
32   RAM
33   ROM
34   ネットワークインタフェース
35   記憶装置
36   ディスプレイ
37   入力インターフェース
4     中継サーバ
41   プロセッサ
42   RAM
43   ROM
44   ネットワークインタフェース
45   記憶装置
46   ディスプレイ
47   入力インターフェース
A1   利用履歴表示欄
A2   ルーム選択欄
A3   ユーザ情報変更欄
A4   チャット欄
AC   アクセス情報
AI   関連付け情報
B1   ログインボタン
B2   更新ボタン
B3   選択ボタン
B4   画像変更ボタン
B5   更新ボタン
CA   カメラ
CA1~CA4カメラ
CH   吹き出し
EL1 第1設備リスト
EL2 第2設備リスト
FI   稼働情報
FM   現場画像
FS   ファイル選択欄
GI   合成画像作成情報
GL   ゲートウェイリスト
I1   ログイン画面
I2   初期画面
I3   表示画面
ICO1      第1アイコン
ICO2      第2アイコン
ICO3      第3アイコン
ICO4      第4アイコン
ICO5      第5アイコン
ICO6      第6アイコン
ICO7      第7アイコン
ICO8      第8アイコン
IN   識別情報
L1   利用履歴リスト
LI   ログイン情報
M1   種別変更欄
MI   保守情報
NW   ネットワーク
O     オブジェクト
PU   ポップアップウィンドウ
R1   設備名記録部分
R2   アドレス記録部分
R3   サブID記録部分
R4   サブタイプ記録部分
R5   状態記録部分
SE   センサ
SH1 第1スイッチングハブ
SH2 第2スイッチングハブ
SH3 第3スイッチングハブ
SI   合成画像
T1   ユーザID入力欄
T2   パスワード入力欄
T3   メモ欄
T4   情報編集欄
UI   ユーザ情報

Claims (13)

  1.  作業現場内の設備を、前記作業現場外の保守拠点に設けられた保守端末を用いて保守するための保守サーバが実行する保守方法であって、
     前記作業現場を表す現場画像を作成するステップと、
     前記設備にアクセスするためのアクセス情報を取得するステップと、
     前記現場画像内において前記設備を表すオブジェクトに、当該設備にアクセスするための前記アクセス情報を関連付けて合成画像を生成するステップと、
     前記保守端末に前記合成画像を出力するステップと、
     前記保守端末を用いた前記合成画像における前記オブジェクトの選択を受け付けるステップと、
     選択されたオブジェクトに関連付けられた前記アクセス情報を用いて、前記選択されたオブジェクトに対応する設備と前記保守端末との間に通信セッションを確立させるステップと、
     を備える保守方法。
  2.  前記作業現場は複数存在し、
     前記現場画像、前記アクセス情報、及び前記合成画像は、複数の作業現場のそれぞれに対して生成される、請求項1に記載の保守方法。
  3.  前記設備にて発生した異常を示す異常情報を前記設備から受信するステップと、
     異常が発生した設備に対応する前記オブジェクトに前記異常情報を関連付けて、前記合成画像を生成するステップと、
     をさらに備える、請求項1又は2に記載の保守方法。
  4.  前記合成画像を生成後に前記作業現場内の設備に変更があった場合、当該設備の変更に対応した新たなアクセス情報を用いて新たな合成画像を生成するステップと、
     前記保守端末に前記新たな合成画像を出力するステップと、
     をさらに備える、請求項1~3のいずれか一項に記載の保守方法。
  5.  前記新たな合成画像を生成した場合、前記保守端末に、前記合成画像が更新されたことを通知するステップをさらに備える、請求項4に記載の保守方法。
  6.  前記保守端末を使用する保守員と前記作業現場に設けられた作業者端末を使用する作業者との間のチャット機能を提供するチャット欄を前記合成画像とともに表示するステップをさらに備え、
     前記合成画像が更新されたことの通知は、前記チャット欄に表示される、請求項5に記載の保守方法。
  7.  作業現場内の設備を、前記作業現場外の保守拠点に設けられた保守端末を用いて保守するための保守サーバであって、
     前記作業現場を表す現場画像を作成し、
     前記設備にアクセスするためのアクセス情報を取得し、
     前記現場画像内において前記設備を表すオブジェクトに、当該設備にアクセスするための前記アクセス情報を関連付けて合成画像を生成し、
     前記保守端末に前記合成画像を出力し、
     前記保守端末を用いた前記合成画像における前記オブジェクトの選択を受け付け、
     選択されたオブジェクトに関連付けられた前記アクセス情報を用いて、前記選択されたオブジェクトに対応する設備と前記保守端末との間に通信セッションを確立させる、
     制御部、
     を備える保守サーバ。
  8.  前記作業現場は複数存在し、
     前記制御部は、前記現場画像、前記アクセス情報、及び前記合成画像を、複数の作業現場のそれぞれに対して生成する、請求項7に記載の保守サーバ。
  9.  前記制御部は、前記設備にて発生した異常を示す異常情報を前記設備から受信し、異常が発生した設備に対応する前記オブジェクトに前記異常情報を関連付けて前記合成画像を生成する、請求項7又は8に記載の保守サーバ。
  10.  前記制御部は、前記合成画像を生成後に前記作業現場内の設備に変更があった場合、当該設備の変更に対応した新たなアクセス情報を用いて新たな合成画像を生成し、前記保守端末に前記新たな合成画像を出力する、請求項7~9のいずれか一項に記載の保守サーバ。
  11.  前記制御部は、前記新たな合成画像を生成した場合、前記保守端末に前記合成画像が更新されたことを通知する、請求項10に記載の保守サーバ。
  12.  前記制御部は、前記保守端末を使用する保守員と前記作業現場に設けられた作業者端末を使用する作業者との間のチャット機能を提供するチャット欄を前記合成画像とともに表示し、前記合成画像が更新されたことの通知を、前記チャット欄に表示する、請求項11に記載の保守サーバ。
  13.  請求項1~6のいずれか一項に記載の保守方法をコンピュータに実行させるプログラム。
     
PCT/JP2020/009045 2019-04-05 2020-03-04 保守方法、保守サーバ、及びプログラム WO2020202993A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202080023845.6A CN113632122A (zh) 2019-04-05 2020-03-04 维护方法、维护服务器以及程序
US17/599,613 US11829958B2 (en) 2019-04-05 2020-03-04 Maintenance method, maintenance server, and a non-transitory computer readable medium
EP20783934.1A EP3951686A4 (en) 2019-04-05 2020-03-04 MAINTENANCE PROCEDURE, MAINTENANCE SERVER AND PROGRAM

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-072891 2019-04-05
JP2019072891A JP7456094B2 (ja) 2019-04-05 2019-04-05 保守方法、及び、保守サーバ

Publications (1)

Publication Number Publication Date
WO2020202993A1 true WO2020202993A1 (ja) 2020-10-08

Family

ID=72668629

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/009045 WO2020202993A1 (ja) 2019-04-05 2020-03-04 保守方法、保守サーバ、及びプログラム

Country Status (5)

Country Link
US (1) US11829958B2 (ja)
EP (1) EP3951686A4 (ja)
JP (1) JP7456094B2 (ja)
CN (1) CN113632122A (ja)
WO (1) WO2020202993A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7010417B1 (ja) * 2021-01-14 2022-01-26 住友電気工業株式会社 情報提供システム、サーバ装置、情報提供方法、および情報提供プログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002032880A (ja) * 2000-07-14 2002-01-31 Hitachi Service & Engineering (East) Ltd 設備機器の遠隔保守システム
JP5254909B2 (ja) 2009-09-02 2013-08-07 日本電信電話株式会社 設定情報配信システム、設定情報配信方法、配信サーバ、及び配信サーバプログラム
JP2013183447A (ja) * 2012-03-05 2013-09-12 Murata Mach Ltd 中継通信システム、中継サーバ、及び管理サーバ
JP2016201007A (ja) * 2015-04-13 2016-12-01 Ihi運搬機械株式会社 搬送設備の遠隔メンテナンスシステム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3406760B2 (ja) * 1996-01-26 2003-05-12 株式会社東芝 監視制御装置
ITBO20000608A1 (it) 2000-10-18 2002-04-18 Gd Spa Metodo e macchina automatica per la lavorazione di un prodotto
US20070233844A1 (en) 2006-03-29 2007-10-04 Murata Kikai Kabushiki Kaisha Relay device and communication system
JP4222397B2 (ja) 2006-09-12 2009-02-12 村田機械株式会社 中継サーバ
US9244941B2 (en) * 2009-03-18 2016-01-26 Shutterfly, Inc. Proactive creation of image-based products
JP2011055455A (ja) 2009-09-04 2011-03-17 Murata Machinery Ltd 管理中継サーバ及び中継通信システム
US9581994B2 (en) * 2011-04-05 2017-02-28 Fisher-Rosemount Systems, Inc. Methods and apparatus to manage process control resources
JP2016192000A (ja) 2015-03-31 2016-11-10 横河電機株式会社 業務支援装置及び業務支援方法
US11487353B2 (en) * 2016-11-14 2022-11-01 Logitech Europe S.A. Systems and methods for configuring a hub-centric virtual/augmented reality environment
US20180275940A1 (en) * 2017-03-27 2018-09-27 Wipro Limited Personalized display system and method for dynamically displaying user information
JP6845072B2 (ja) 2017-04-21 2021-03-17 ファナック株式会社 工場設備の保守支援装置及び保守支援システム
US10996742B2 (en) * 2017-10-17 2021-05-04 Logitech Europe S.A. Input device for AR/VR applications
US11314399B2 (en) * 2017-10-21 2022-04-26 Eyecam, Inc. Adaptive graphic user interfacing system
US10809884B2 (en) * 2017-11-06 2020-10-20 The Sherwin-Williams Company Paint color selection and display system and method
US12014333B2 (en) * 2017-12-13 2024-06-18 Ariel D. Weindling Misconduct metrics reporting generation and rendering engine apparatuses, methods, systems and media
US11049075B2 (en) * 2017-12-13 2021-06-29 Ariel D. Weindling Victim reporting and notification system and alert mechanism for organizations
US11042769B2 (en) * 2018-04-12 2021-06-22 PRO Unlimited Global Solutions, Inc. Augmented reality badge system
US10846935B2 (en) * 2018-04-12 2020-11-24 PRO Unlimited Global Solutions, Inc. Augmented reality campus assistant
US11080935B2 (en) * 2019-04-03 2021-08-03 Wayfair Llc Systems and methods for scene-independent augmented reality interfaces
US11457730B1 (en) * 2020-10-26 2022-10-04 Wells Fargo Bank, N.A. Tactile input device for a touch screen

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002032880A (ja) * 2000-07-14 2002-01-31 Hitachi Service & Engineering (East) Ltd 設備機器の遠隔保守システム
JP5254909B2 (ja) 2009-09-02 2013-08-07 日本電信電話株式会社 設定情報配信システム、設定情報配信方法、配信サーバ、及び配信サーバプログラム
JP2013183447A (ja) * 2012-03-05 2013-09-12 Murata Mach Ltd 中継通信システム、中継サーバ、及び管理サーバ
JP2016201007A (ja) * 2015-04-13 2016-12-01 Ihi運搬機械株式会社 搬送設備の遠隔メンテナンスシステム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3951686A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7010417B1 (ja) * 2021-01-14 2022-01-26 住友電気工業株式会社 情報提供システム、サーバ装置、情報提供方法、および情報提供プログラム
WO2022153440A1 (ja) * 2021-01-14 2022-07-21 住友電気工業株式会社 情報提供システム、サーバ装置、情報提供方法、および情報提供プログラム

Also Published As

Publication number Publication date
CN113632122A (zh) 2021-11-09
JP7456094B2 (ja) 2024-03-27
EP3951686A1 (en) 2022-02-09
US11829958B2 (en) 2023-11-28
JP2020170452A (ja) 2020-10-15
EP3951686A4 (en) 2022-12-07
US20220164777A1 (en) 2022-05-26

Similar Documents

Publication Publication Date Title
CN105635108B (zh) 具有应用包分类器的防火墙
KR20150043344A (ko) 다른 형태의 정보 공유를 통한 코브라우징의 통합
US20090295925A1 (en) Network camera management system and network camera management method
WO2020202992A1 (ja) 保守方法、保守サーバ、及びプログラム
JP6322485B2 (ja) 情報提供装置
CN109977081A (zh) 一种内容共享方法及终端设备
WO2020202993A1 (ja) 保守方法、保守サーバ、及びプログラム
JP2016144146A (ja) 情報配信装置、情報配信システム、情報配信方法及びインターホン端末
JP2014071614A (ja) 機器情報表示装置、機器情報表示システム、及び機器情報表示方法
US10063664B2 (en) Network system and control device
JP6575311B2 (ja) ネットワークシステムおよび制御装置
US11463298B2 (en) Mediating apparatus, device management system, communication control method, and non-transitory recording medium
JP5977586B2 (ja) 情報処理システム、情報処理装置、情報処理方法およびプログラム
JP6471434B2 (ja) 電子会議システム
JP5865551B2 (ja) コンテンツ表示方法、プログラム及びコンテンツ表示システム
WO2021054073A1 (ja) 保守システム、サーバ、保守方法、及び、プログラム
KR100946708B1 (ko) 네트워크를 이용한 방문자 안내 시스템 및 방법
JP2019040573A (ja) 情報処理システム、情報処理装置、プログラム及び画面共有端末制御方法
JP7018677B1 (ja) 作業状況管理システム
CN113874847B (zh) 控制器以及空调管理系统
JP2005286732A (ja) 監視システム及び監視方法並びにそのプログラム
JP2022000718A (ja) 機器管理装置、遠隔管理システム、機器管理方法およびプログラム
JP2021051593A (ja) 画像処理システム、画像処理装置および方法
JP5608542B2 (ja) ネットワーク対応型の集合住宅用インターホンシステム
TWM614857U (zh) 監控主機權限設定系統

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20783934

Country of ref document: EP

Kind code of ref document: A1

DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)
NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2020783934

Country of ref document: EP

Effective date: 20211105