WO2020250543A1 - 管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体 - Google Patents
管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体 Download PDFInfo
- Publication number
- WO2020250543A1 WO2020250543A1 PCT/JP2020/014116 JP2020014116W WO2020250543A1 WO 2020250543 A1 WO2020250543 A1 WO 2020250543A1 JP 2020014116 W JP2020014116 W JP 2020014116W WO 2020250543 A1 WO2020250543 A1 WO 2020250543A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- image
- equipment
- target
- optical information
- target equipment
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19665—Details related to the storage of video surveillance data
- G08B13/19671—Addition of non-video data, i.e. metadata, to video stream
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
- G08B13/19689—Remote control of cameras, e.g. remote orientation or image zooming control for a PTZ camera
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B23/00—Alarms responsive to unspecified undesired or abnormal conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Definitions
- the present invention relates to a management device, a management method, a management system, a computer program and a recording medium, and more particularly to a technical field of a management device, a management method, a management system, a computer program and a recording medium for remotely managing a target facility.
- Patent Document 1 As a device of this type, for example, a security security system for unmanned stores has been proposed (see Patent Document 1).
- Other related techniques include Patent Documents 2 to 6.
- Japanese Unexamined Patent Publication No. 10-174089 Japanese Unexamined Patent Publication No. 10-191309 Japanese Unexamined Patent Publication No. 10-218617 Japanese Unexamined Patent Publication No. 2000-069455 Japanese Unexamined Patent Publication No. 2006-339982 International Publication No. 2016/139940
- the target equipment When remotely managing the target equipment, it is necessary to register the target equipment in the device (or system) for remote management as a preliminary preparation.
- the target equipment When the target equipment is registered, for example, only the identification information of the target equipment consisting of numbers, letters, symbols or a combination thereof is often registered. Therefore, there is a technical problem that it is difficult for the user (that is, the administrator) of the device that performs remote management to grasp the target equipment from the registered identification information.
- the present invention has been made in view of the above problems, and provides a management device, a management method, a management system, a computer program, and a recording medium that can relatively easily grasp the target equipment for remote control. Make it an issue.
- One aspect of the management device of the present invention is a management device that manages a target facility to which optically readable optical information indicating equipment identification information is attached, from a first image obtained by capturing the target facility.
- the optical information indicates a detection means for detecting the optical information, a determination means for determining an extraction condition for extracting an extracted image including at least a part of the target equipment based on the first image, and the optical information. It is provided with associating means for associating the equipment identification information to the determined extraction condition.
- Another aspect of the management device of the present invention is a management device that manages a plurality of target facilities to which optically readable optical information indicating equipment identification information is attached, and the plurality of target facilities are used.
- a state information acquisition means for acquiring a plurality of state information corresponding to each of the plurality of target facilities detected by a sensing sensor, and at least a part of the plurality of target facilities imaged by each of the plurality of imaging devices.
- the image acquisition means for acquiring a plurality of captured images including the image and the plurality of state information
- each of the plurality of captured images Based on the detection means for detecting the one optical information as the optical information attached to the one target facility and the detection result of the one optical information by the detection means, the plurality of said An extraction means for extracting one or more captured images including at least a part of the one target facility, a state of the one target facility, and at least one of the extracted one or a plurality of captured images from the captured image. It is provided with an output means for outputting the optics in association with each other.
- One aspect of the management method of the present invention is a management method for managing the target equipment to which optically readable optical information indicating the equipment identification information is attached, and the first image obtained by capturing the target equipment is described as described above.
- the optical information is detected, and the extraction conditions for extracting the extracted image including at least a part of the target equipment are determined based on the first image, and the equipment identification information indicated by the optical information and the equipment identification information It is associated with the determined extraction condition.
- One aspect of the computer program of the present invention is a computer program for causing a computer to execute a management method for managing a target facility to which optically readable optical information indicating equipment identification information is attached.
- Extraction conditions for detecting the optical information from the first image of the equipment and extracting an extracted image including at least a part of the target equipment based on the first image and the detected optical information. Is determined, and the equipment identification information indicated by the optical information is associated with the determined extraction condition.
- One aspect of the recording medium of the present invention is a computer program that causes a computer to execute a management method for managing a target facility to which optically readable optical information indicating equipment identification information is attached. Extraction conditions for detecting the optical information from the first image of the equipment and extracting an extraction image including at least a part of the target equipment based on the first image and the detected optical information. Is recorded, and a computer program that associates the equipment identification information indicated by the optical information with the determined extraction condition is recorded.
- the management system of the present invention is a management system that manages a target facility to which optically readable optical information indicating equipment identification information is attached, and a sensor that senses the target facility and the said.
- the management device includes an imaging device for imaging the target equipment and a management device, and the management device includes a first acquisition means for acquiring the equipment identification information in association with the sensor identification information related to the sensor, and the imaging device. Based on the detection means for detecting the optical information from the first image of the target equipment and the first image and the detected optical information, an extracted image including at least a part of the target equipment is extracted. It is provided with a determination means for determining the extraction condition for the purpose, and an association means for associating the equipment identification information with the determined extraction condition.
- FIG. 1 is a diagram showing an outline of a remote management system according to an embodiment.
- the remote management system 1 is configured to include a management device 10 installed in a management center and a plurality of facilities including a facility 20 as a management target installed in a store. Although it is described separately from the equipment 20 in FIG. 1 for convenience, the sensor 30 is attached to the equipment 20. A surveillance camera 40 capable of photographing the equipment 20 from the outside is installed in the store.
- the sensor 30 and the surveillance camera 40 are connected to the management device 10 via a network (not shown) such as the Internet.
- the signal output from the sensor 30 and the video signal output from the surveillance camera 40 are transmitted to the management device 10 via the network.
- the management target is limited to the equipment 20, but the management target may be a plurality of facilities.
- the surveillance camera 40 is not limited to one, and a plurality of surveillance cameras 40 may be installed.
- FIG. 2 is a block diagram showing a hardware configuration of the management device 10 according to the first embodiment.
- the management device 10 includes a CPU (Central Processing Unit) 11, a RAM (Random Access Memory) 12, a ROM (Read Only Memory) 13, a storage device 14, an input device 15, and an output device 16.
- the CPU 11, RAM 12, ROM 13, storage device 14, input device 15, and output device 16 are connected to each other via a data bus 17.
- the CPU 11 reads a computer program.
- the CPU 11 may read a computer program stored in at least one of the RAM 12, the ROM 13, and the storage device 14.
- the CPU 11 may read a computer program stored in a computer-readable recording medium using a recording medium reading device (not shown).
- the CPU 11 may acquire (that is, may read) a computer program from a device (not shown) arranged outside the management device 10 via a network interface.
- the CPU 11 controls the RAM 12, the storage device 14, the input device 15, and the output device 16 by executing the read computer program.
- a logical functional block for remotely managing the management target here, the equipment 20 installed in the store is realized in the CPU 11. .. That is, the CPU 11 can function as a controller for remotely managing the management target.
- the configuration of the functional block realized in the CPU 11 will be described in detail later with reference to FIG.
- the RAM 12 temporarily stores the computer program executed by the CPU 11.
- the RAM 12 temporarily stores data temporarily used by the CPU 11 when the CPU 11 is executing a computer program.
- the RAM 12 may be, for example, a D-RAM (Dynamic RAM).
- the ROM 13 stores a computer program executed by the CPU 11.
- the ROM 13 may also store fixed data.
- the ROM 13 may be, for example, a P-ROM (Programmable ROM).
- the storage device 14 stores data stored by the management device 10 for a long period of time.
- the storage device 14 may operate as a temporary storage device of the CPU 11.
- the storage device 14 may include, for example, at least one of a hard disk device, a magneto-optical disk device, an SSD (Solid State Drive), and a disk array device.
- the input device 15 is a device that receives an input instruction from the user of the management device 10.
- the input device 15 may include, for example, at least one of a keyboard, a mouse and a touch panel.
- the output device 16 is a device that outputs information about the management device 10 to the outside.
- the output device 16 may be a display device capable of displaying information about the management device 10.
- FIG. 3 is a block diagram showing a functional block realized in the CPU 11 of the management device 10.
- a communication unit 111, an image processing unit 112, a registration unit 113, an output unit 114, and an abnormality detection unit 115 are realized in the CPU 11 as logical functional blocks.
- equipment identification information such as the serial number of the equipment and the store number of the store where the equipment is installed is recorded in the equipment 20, for example, a two-dimensional code or the like.
- Optically readable optical information is added. This optical information is attached to, for example, the top plate of the equipment 20 so that it can be imaged by the surveillance camera 40.
- the optical information may be attached to any part of the outer surface of the equipment 20 as long as it can be imaged by the surveillance camera 40.
- the sensor 30 When the equipment 20 is compatible with IoT (Internet of Things), the sensor 30 is built in the equipment 20. In this case, the identification information of the sensor 30 (hereinafter, appropriately referred to as “sensor identification information”) is specified from the equipment identification information of the equipment 20. On the other hand, when the equipment 20 does not support IoT, the sensor 30 is provided with optical information in which the sensor identification information is recorded.
- IoT Internet of Things
- a worker who installs the equipment 20 in a store reads the optical information of the equipment 20 with a work terminal such as a smartphone. As a result, the equipment identification information of the equipment 20 is acquired by the work terminal.
- the communication unit 111 of the management device 10 acquires the equipment identification information of the equipment 20 from the work terminal via the network.
- the operator reads the optical information of the sensor 30 attached to the equipment 20 and associates the equipment identification information of the equipment 20 with the sensor identification information of the sensor 30.
- the communication unit 111 of the management device 10 acquires the equipment identification information of the equipment 20 and the sensor identification information of the sensor 30 associated with each other from the work terminal via the network.
- step S101 of FIG. 4 the communication unit 111 of the management device 10 acquires the equipment identification information and the sensor identification information.
- the registration unit 113 registers the equipment identification information and the sensor identification information in the storage device 14.
- the registration unit 113 specifies the sensor identification information from the equipment identification information (for example, from the equipment identification information of the equipment 20 corresponding to IoT, the sensor 30 (Specificing the sensor identification information), the specified equipment identification information and the sensor identification information are registered in the storage device 14.
- the sensor identification information may be specified from, for example, a table showing the correspondence between the equipment identification information and the sensor identification information of the sensor built in the equipment indicated by the equipment identification information.
- the equipment identification information related to each of the plurality of equipment installed in the store and the identification information related to the store are linked to each other. Create a list.
- This equipment list is registered (stored) in the storage device 14 (for example, this equipment list is created when each equipment is brought into the store).
- the registration unit 113 associates the sensor identification information with one facility included in the equipment list (that is, the equipment related to the equipment identification information corresponding to the sensor identification information). As a result, the equipment identification information and the sensor identification information are associated with each other and registered in the storage device 14.
- the communication unit 111 receives the video signal from the surveillance camera 40 and acquires the image in the store captured by the surveillance camera 40 (step S102).
- the image processing unit 112 detects optical information (for example, a two-dimensional code) from the acquired image (step S103).
- the image processing unit 112 identifies the equipment to be newly registered (here, the equipment 20) based on the equipment identification information indicated by the detected optical information.
- the image processing unit 112 performs a predetermined image processing such as distortion correction on the image. May be applied to.
- the image processing unit 112 sets a range in which it is estimated that the equipment to be newly registered (in this case, equipment 20) is shown in the image as an extraction range (step S104).
- the extraction range is set based on, for example, the position where the optical information is reflected in the image (that is, the image coordinates), the installation position of the surveillance camera 40, the size of the equipment in the image estimated from the optical characteristics, and the like. You can. As shown in FIG. 5, for example, for the equipment 20, the extraction range may be set as shown by the dotted line frame a.
- the registration unit 113 associates the equipment identification information indicated by the optical information detected from the image with the set extraction range (step S105). As a result, the registration of the equipment to be newly registered (here, the equipment 20) to the management device 10 is completed.
- the image processing unit 112 extracts an image corresponding to the extraction range from the image in the store captured by the surveillance camera 40 acquired via the communication unit 111.
- the output unit 114 identifies the sensor identification information associated with the equipment identification information based on the equipment identification information associated with the extraction range of the image extracted by the image processing unit 112.
- the output unit 114 acquires the signal output from the sensor 30 corresponding to the specified sensor identification information via the communication unit 111.
- the output unit 114 controls the output device 16 so that the state (for example, temperature) of the equipment 20 based on the state information indicated by the signal output from the sensor 30 and the extracted image are displayed. As a result, for example, an image as shown in FIG. 6 is displayed on the output device 16.
- the abnormality detection unit 115 determines whether or not the state of the equipment 20 is abnormal based on the state information indicated by the signal output from the sensor 30.
- the output unit 114 controls the output device 16 so as to issue an alarm.
- the output unit 114 may control the output device 16 so that, for example, an exclamation mark (exclamation mark) is displayed (see FIG. 6).
- the output unit 114 may control the output device 16 so as to output auditory information such as an alarm sound in place of or in addition to the visual information as an alarm.
- the output unit 114 is for a device different from the management device 10 such as a store terminal (not shown) installed in the store or a mobile terminal (not shown) owned by a clerk working in the store. You may send an alarm.
- the output unit 114 may control the output device 16 so as to notify that the equipment 20 is normal.
- the "communication unit 111" corresponds to an example of the “first acquisition means” and the “second acquisition means” in the appendix described later.
- the “image processing unit 112" corresponds to an example of "detecting means” and “determining means” in the appendix described later.
- the "registration unit 113", “output unit 114", and “abnormality detection unit 115” correspond to examples of “association means”, “output means”, and “abnormality detection means” in the appendix described later, respectively.
- the image extraction range is associated with the equipment identification information of the equipment to be managed. Therefore, the management device 10 can present the user of the management device 10 with an image showing the equipment to be managed together with the equipment identification information. As a result, the user of the management device 10 can relatively easily grasp the target equipment for remote management.
- the image processing unit 112 may set the conditions related to the surveillance camera 40, for example, based on how the optical information is captured in the image. Specifically, for example, the image processing unit 112 has a condition related to the angle of view, focal length, or zoom magnification of the surveillance camera 40 based on the position where the optical information in the image is captured (the surveillance camera 40 has a zoom function). (If this is the case), or conditions related to the optical axis direction (when the surveillance camera 40 has a swing function) may be set.
- the image processing unit 112 has a condition related to the angle of view or focal length of the surveillance camera 40 or a condition related to the zoom magnification or a condition related to the resolution (the surveillance camera 40 has a zoom function) based on the size of the optical information in the image. If so) may be set.
- the image processing unit 112 does not simply trim the predetermined portion from the image captured by the surveillance camera 40, but trims the predetermined portion and then performs distortion correction processing on the predetermined portion to obtain a target image. It may be acquired (extracted). In this case, the image processing unit 112 may set prior information (for example, coordinates related to the predetermined portion) for trimming a predetermined portion from the image captured by the surveillance camera 40.
- the image processing unit 112 newly registers based on how the optical information is captured in each of the plurality of images captured by the plurality of surveillance cameras 40.
- One or more surveillance cameras 40 to image the equipment to be may be set.
- the equipment identification information related to each of the plurality of equipment installed in the store and the identification information related to the store are linked to each other in the equipment list, or the equipment.
- information related to the plurality of surveillance cameras 40 may be registered in association with each other.
- the information indicating the camera 40 (for example, the identification information related to the surveillance camera 40) is an example of the "extraction condition" in the appendix described later.
- FIGS. 8 to 10 A second embodiment relating to a management device, a management method, a management system, a computer program, and a recording medium will be described with reference to FIGS. 8 to 10 using the remote management system 2 that remotely manages the store.
- the second embodiment is the same as the first embodiment described above, except that it is premised that a plurality of surveillance cameras are installed in the store. Therefore, with respect to the second embodiment, the description overlapping with the first embodiment is omitted, the common parts on the drawings are designated by the same reference numerals, and FIGS. 8 to 10 show basic differences. It will be explained with reference to.
- the remote management system 2 is a management device 10 installed in a management center, equipments 1 to 16 as management targets installed in a store, and a surveillance camera capable of photographing the equipments 1 to 16 from the outside. It is configured to include C1 to C8. Sensors (not shown) are attached to each of the facilities 1 to 16.
- the arrangement and number of the surveillance cameras C1 to C8 in FIG. 8 are examples, and are not limited thereto. Similarly, the arrangement and number of facilities 1 to 16 are examples, and the number is not limited thereto.
- the equipment identification information corresponding to each of the equipments 1 to 16 and the sensor identification information related to the sensor attached to each of the equipments 1 to 16 are associated with each other and registered in the storage device 14 (see FIG. 2). To do.
- the operation of the management device 10 when an abnormality of the equipment is detected by the abnormality detection unit 115 of the management device 10 will be described with reference to the flowchart of FIG.
- the abnormality detection unit 115 acquires signals output from each of the plurality of sensors attached to the equipments 1 to 16 via the communication unit 111. As a result, the abnormality detection unit 115 acquires the state information indicated by the signals output from each of the plurality of sensors (step S201).
- the abnormality detection unit 115 determines whether or not there is an abnormality in at least one of the facilities 1 to 16 based on the state information acquired in the process of step S201 (step S202).
- step S202 determines whether or not there is an abnormality in at least one of the facilities 1 to 16 based on the state information acquired in the process of step S201 (step S202).
- step S202 determines whether or not there is an abnormality in at least one of the facilities 1 to 16 based on the state information acquired in the process of step S201 (step S202).
- a predetermined time for example, several tens of milliseconds to several hundreds of milliseconds
- step S202 When it is determined in the process of step S202 that at least one of the facilities 1 to 16 has an abnormality (step S202: Yes), the image processing unit 112 has a plurality of camera images captured by the surveillance cameras C1 to C8, respectively. Is acquired via the communication unit 111. Subsequently, the image processing unit 112 detects optical information from the acquired plurality of camera images.
- the image processing unit 112 captures the optical information corresponding to the equipment identification information related to the equipment determined to be abnormal based on the equipment identification information indicated by the detected optical information. Identify multiple camera images. If there is a table in which the equipment identification information related to each of the equipments 1 to 16 and the surveillance cameras (at least one of the surveillance cameras C1 to C8) capable of photographing the equipments 1 to 16 respectively exist. From the table, one or a plurality of camera images showing optical information corresponding to the equipment identification information related to the equipment determined to have an abnormality may be specified.
- the image processing unit 112 of the management device 10 is based on, for example, the position (that is, image coordinates) in which the optical information is captured in the specified one or more camera images, the size of the optical information, and the like.
- a camera image to be presented to the user is selected (step S203).
- the registration unit 113 associates the camera image selected in the process of step S203 with the equipment identification information related to the equipment determined to have an abnormality, and registers it in the storage device 14 (step S204).
- the output unit 114 is the equipment based on the state information indicated by the signal output from the sensor related to the sensor identification information associated with the equipment identification information related to the equipment determined to be abnormal. (For example, temperature and the like) and the camera image selected in the process of step S204 are displayed, and the output device 16 is controlled so as to issue an alarm (step S205). As a result, for example, an image as shown in FIG. 10 is displayed on the output device 16.
- step S203 when a plurality of camera images showing optical information corresponding to the equipment identification information related to the equipment determined to have an abnormality are specified, the image processing unit 112 is specified. All of the plurality of camera images may be selected as camera images to be presented to the user of the management device 10. At this time, the image processing unit 112 gives priority to the user of the management device 10 based on how the optical information is captured in the specified plurality of camera images (for example, the position and size of the optical information in the camera image). The camera image to be presented may be determined (that is, the priority of each of the specified plurality of camera images may be determined).
- the image processing unit 112 temporally captures the camera image in which the optical information corresponding to the equipment identification information related to the equipment determined to be abnormal is captured. Acquires a moving image consisting of a plurality of consecutive images. Then, the image processing unit 112 may extract a moving image for a predetermined time (for example, several seconds to several tens of seconds) including a time point when the abnormality detecting unit 115 determines that there is an abnormality from the acquired moving image. The registration unit 113 may register the extracted moving image in the storage device 14 in association with the equipment identification information related to the equipment determined to have an abnormality.
- a predetermined time for example, several seconds to several tens of seconds
- the output unit 114 may control the output device 16 so that the extracted moving image is displayed in addition to or in place of the camera image (that is, the still image) in the process of step S205 described above. Further, one image (that is, a still image) may be extracted from the extracted moving image, and the extracted one image may be displayed in addition to the extracted moving image.
- a device different from the management device 10 such as a store terminal (not shown) installed in the store or a mobile terminal (not shown) possessed by a clerk working at the store. May issue an alarm to.
- the management device is a management device that manages the target equipment to which optically readable optical information indicating the equipment identification information is attached, and the optics from the first image of the target equipment.
- the management device is characterized by including an association means for associating the equipment identification information with the determined extraction condition.
- the determination means sets an extraction range including at least a part of the target equipment as at least a part of the extraction conditions based on the position of the optical information in the first image.
- the detection means detects the optical information from a plurality of captured images as the first image, each of which is captured by a plurality of image pickup devices, and the determination means is described.
- the management device according to Appendix 1, wherein an image pickup device for imaging the target equipment is determined as at least a part of the extraction conditions based on a plurality of captured images and detection results by the detection means. is there.
- the management device is any one of Appendix 1 to 3, wherein the management device includes a first acquisition means for acquiring sensor identification information related to a sensor that senses the target equipment in association with the equipment identification information.
- the management device includes a second acquisition means for acquiring the state information of the target equipment detected by the sensor and a second image of the target equipment, and the target equipment based on the state information. 4.
- the management device further comprising an output means for associating and outputting the extracted image extracted from the second image based on the determined extraction condition. ..
- the management device includes a second acquisition means for acquiring the state information of the target equipment detected by the sensor that senses the target equipment, a second image of the target equipment, and the state information.
- the output means for outputting the state and the extracted image extracted from the second image based on the determined extraction condition in association with each other is provided.
- the management device according to any one of Supplementary note 1 to 3, characterized in that.
- Appendix 7 The management device according to Appendix 7 is the management device according to Appendix 5 or 6, wherein the output means issues an alarm when the state is abnormal.
- the management device includes an abnormality detecting means for detecting an abnormality in the state of the target equipment based on the state information of the target equipment detected by the sensor.
- the management device according to any one of them.
- the management method according to Appendix 9 is a management method for managing the target equipment to which optically readable optical information indicating the equipment identification information is attached, and the optical is obtained from the first image obtained by imaging the target equipment.
- the target information is detected, and the extraction conditions for extracting the extracted image including at least a part of the target equipment are determined based on the first image, and the equipment identification information indicated by the optical information and the above-mentioned
- It is a management method characterized by associating with a determined extraction condition.
- the computer program according to Appendix 10 is a computer program that causes a computer to execute a management method for managing the target equipment to which optically readable optical information indicating equipment identification information is attached, and the target equipment is used.
- the optical information is detected from the first image captured, and the extraction conditions for extracting the extracted image including at least a part of the target equipment are determined based on the first image and the detected optical information.
- the computer program is characterized in that the equipment identification information indicated by the optical information is associated with the determined extraction conditions.
- the recording medium according to Appendix 11 is a computer program that causes a computer to execute a management method for managing the target equipment to which optically readable optical information indicating equipment identification information is attached, and the target equipment is used.
- the optical information is detected from the first image captured, and the extraction conditions for extracting the extracted image including at least a part of the target equipment are determined based on the first image and the detected optical information.
- the recording medium is characterized in that a computer program for associating the equipment identification information indicated by the optical information with the determined extraction conditions is recorded.
- the management system according to Appendix 12 is a management system that manages the target equipment to which optically readable optical information indicating the equipment identification information is attached, and is a sensor that senses the target equipment and the target equipment.
- the management device includes a first acquisition means for acquiring the equipment identification information in association with the sensor identification information related to the sensor, and the target equipment by the image pickup device.
- a detection means for detecting the optical information from the first image captured by the image, and an extracted image including at least a part of the target equipment based on the first image and the detected optical information.
- It is a management system including a determination means for determining an extraction condition, and an association means for associating the equipment identification information with the determined extraction condition.
- the management device is a management device that manages a plurality of target facilities to which optically readable optical information indicating equipment identification information is attached, and senses the plurality of target facilities.
- a plurality of state information acquisition means for acquiring a plurality of state information corresponding to each of the plurality of target facilities detected by a sensor, and a plurality of states including at least a part of the plurality of target facilities imaged by each of the plurality of imaging devices.
- a plurality of captured images based on a detection means for detecting one optical information as the optical information attached to one target facility and a detection result of the one optical information by the detection means.
- An extraction means for extracting one or more captured images including at least a part of the one target facility, a state of the one target facility, and at least one of the extracted one or a plurality of captured images. It is a management device characterized by including an output means for outputting in association with each other.
- Appendix 14 In the management device according to Appendix 14, when a plurality of captured images including at least a part of the one target equipment are extracted by the extraction means, the output means and the state of the one target equipment and the extraction are performed.
- the extraction means identifies one or a plurality of image pickup devices that have captured the extracted one or a plurality of captured images among the plurality of image pickup devices. From the moving images consisting of a plurality of temporally continuous captured images captured by one or a plurality of imaging devices, a moving image for a predetermined period including the time when an abnormality in the state of the one target facility is detected is extracted, and the output is described.
- the means is characterized in that, in place of or in addition to at least one of the extracted one or a plurality of captured images, the extracted moving image is output in association with the state of the one target facility.
- the management device according to any one of 13 to 15.
- the present invention can be appropriately modified within the scope of the claims and within the scope not contrary to the gist or idea of the invention which can be read from the entire specification, and the management device, management method, management system, computer program and record accompanied by such modification.
- the medium is also included in the technical idea of the present invention.
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Signal Processing (AREA)
- Emergency Management (AREA)
- Economics (AREA)
- Library & Information Science (AREA)
- Human Computer Interaction (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Alarm Systems (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
管理装置は、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理装置であって、前記対象設備を撮像した第1画像から前記光学的情報を検出する検出手段と、前記第1画像に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定する決定手段と、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付ける関連付け手段と、を備える。
Description
本発明は、管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体に関し、特に、対象設備を遠隔管理する管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体の技術分野に関する。
この種の装置として、例えば無人店舗の防犯警備システムが提案されている(特許文献1参照)。その他関連する技術として特許文献2乃至6が挙げられる。
対象設備を遠隔管理する場合、その事前準備として、該対象設備が遠隔管理を行う装置(又はシステム)に登録される必要がある。対象設備が登録される際には、例えば数字、英字、記号又はそれらの組合せからなる対象設備の識別情報だけが登録されることが多い。このため、遠隔管理を行う装置のユーザ(即ち、管理者)が、登録されている識別情報から対象設備を把握することが難しいという技術的問題点がある。
本発明は、上記問題点に鑑みてなされたものであり、遠隔管理の対象設備を比較的容易に把握することができる管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体を提供することを課題とする。
本発明の管理装置の一の態様は、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理装置であって、前記対象設備を撮像した第1画像から前記光学的情報を検出する検出手段と、前記第1画像に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定する決定手段と、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付ける関連付け手段と、を備える。
本発明の管理装置の他の態様は、夫々、設備識別情報を示す光学的に読み取り可能な光学的情報が付された複数の対象設備を管理する管理装置であって、前記複数の対象設備をセンシングするセンサにより検出された、前記複数の対象設備に夫々対応する複数の状態情報を取得する状態情報取得手段と、複数の撮像装置各々により撮像された、前記複数の対象設備の少なくとも一部を含む複数の撮像画像を取得する画像取得手段と、前記複数の状態情報に基づいて、前記複数の対象設備のうち一の対象設備の状態の異常が検出された場合に、前記複数の撮像画像各々から前記一の対象設備に付された、前記光学的情報としての、一の光学的情報を検出する検出手段と、前記検出手段による前記一の光学的情報の検出結果に基づいて、前記複数の撮像画像から、前記一の対象設備の少なくとも一部を含む一又は複数の撮像画像を抽出する抽出手段と、前記一の対象設備の状態と、前記抽出された一又は複数の撮像画像の少なくとも一つとを対応付けて出力する出力手段と、を備える。
本発明の管理方法の一態様は、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法であって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付ける。
本発明のコンピュータプログラムの一の態様は、コンピュータに、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法を実行させるコンピュータプログラムであって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付ける。
本発明の記録媒体の一の態様は、コンピュータに、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法を実行させるコンピュータプログラムであって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付けるコンピュータプログラムが記録されている。
本発明の管理システムの一の態様は、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理システムであって、前記対象設備をセンシングするセンサと、前記対象設備を撮像する撮像装置と、管理装置と、を備え、前記管理装置は、前記設備識別情報を、前記センサに係るセンサ識別情報に関連付けて取得する第1取得手段と、前記撮像装置により前記対象設備を撮像した第1画像から前記光学的情報を検出する検出手段と、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定する決定手段と、前記設備識別情報と、前記決定された抽出条件とを関連付ける関連付け手段と、を備える。
上述した管理装置の一の態様及び他の態様、並びに、管理方法、管理システム、コンピュータプログラム及び記録媒体のそれぞれの一の態様によれば、遠隔管理の対象設備を比較的容易に把握することができる。
管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体に係る実施形態を図面に基づいて説明する。
<第1実施形態>
店舗を遠隔管理する遠隔管理システム1を用いて、管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体に係る第1実施形態について図1乃至図6を参照して説明する。
店舗を遠隔管理する遠隔管理システム1を用いて、管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体に係る第1実施形態について図1乃至図6を参照して説明する。
(遠隔管理システム)
実施形態に係る遠隔管理システム1について図1を参照して説明する。図1は、実施形態に係る遠隔管理システムの概要を示す図である。
実施形態に係る遠隔管理システム1について図1を参照して説明する。図1は、実施形態に係る遠隔管理システムの概要を示す図である。
図1において、遠隔管理システム1は、管理センタに設置された管理装置10と、店舗に設置された管理対象としての設備20を含む複数の設備とを備えて構成されている。図1では便宜上、設備20とは別個に記載されているが、設備20にはセンサ30が取り付けられている。店舗には、設備20をその外部から撮像可能な監視カメラ40が設置されている。
センサ30及び監視カメラ40は、管理装置10と、例えばインターネット等のネットワーク(図示せず)を介して接続されている。センサ30から出力された信号、及び、監視カメラ40から出力された映像信号は、ネットワークを介して、管理装置10に送信される。
ここでは、説明の便宜上、管理対象を設備20に限っているが、管理対象は複数の設備であってよい。また、監視カメラ40は、一台に限らず複数台設置されていてよい。
(管理装置)
次に、管理装置10のハードウェア構成について図2を参照して説明する。図2は、第1実施形態に係る管理装置10のハードウェア構成を示すブロック図である。
次に、管理装置10のハードウェア構成について図2を参照して説明する。図2は、第1実施形態に係る管理装置10のハードウェア構成を示すブロック図である。
図2において、管理装置10は、CPU(Central Processing Unit)11、RAM(Random Access Memory)12、ROM(Read Only Memory)13、記憶装置14、入力装置15及び出力装置16を備えている。CPU11、RAM12、ROM13、記憶装置14、入力装置15及び出力装置16は、データバス17を介して相互に接続されている。
CPU11は、コンピュータプログラムを読み込む。例えば、CPU11は、RAM12、ROM13及び記憶装置14のうちの少なくとも一つが記憶しているコンピュータプログラムを読み込んでもよい。例えば、CPU11は、コンピュータで読み取り可能な記録媒体が記憶しているコンピュータプログラムを、図示しない記録媒体読み取り装置を用いて読み込んでもよい。CPU11は、ネットワークインタフェースを介して、管理装置10の外部に配置される不図示の装置からコンピュータプログラムを取得してもよい(つまり、読み込んでもよい)。CPU11は、読み込んだコンピュータプログラムを実行することで、RAM12、記憶装置14、入力装置15及び出力装置16を制御する。当該実施形態では特に、CPU11が読み込んだコンピュータプログラムを実行すると、CPU11内には、店舗に設置された管理対象(ここでは、設備20)を遠隔管理するための論理的な機能ブロックが実現される。つまり、CPU11は、管理対象の遠隔管理を行うためのコントローラとして機能可能である。尚、CPU11内で実現される機能ブロックの構成については、後に図3を参照しながら詳述する。
RAM12は、CPU11が実行するコンピュータプログラムを一時的に記憶する。RAM12は、CPU11がコンピュータプログラムを実行している際にCPU11が一時的に使用するデータを一時的に記憶する。RAM12は、例えば、D-RAM(Dynamic RAM)であってもよい。
ROM13は、CPU11が実行するコンピュータプログラムを記憶する。ROM13は、その他に固定的なデータを記憶していてもよい。ROM13は、例えば、P-ROM(Programmable ROM)であってもよい。
記憶装置14は、管理装置10が長期的に保存するデータを記憶する。記憶装置14は、CPU11の一時記憶装置として動作してもよい。記憶装置14は、例えば、ハードディスク装置、光磁気ディスク装置、SSD(Solid State Drive)及びディスクアレイ装置のうちの少なくとも一つを含んでいてもよい。
入力装置15は、管理装置10のユーザからの入力指示を受け取る装置である。入力装置15は、例えば、キーボード、マウス及びタッチパネルのうちの少なくとも一つを含んでいてもよい。
出力装置16は、管理装置10に関する情報を外部に対して出力する装置である。例えば、出力装置16は、管理装置10に関する情報を表示可能な表示装置であってもよい。
次に、CPU11内で実現される機能ブロックの構成について図3を参照して説明する。図3は、管理装置10のCPU11内で実現される機能ブロックを示すブロック図である。
図3に示すように、CPU11内には、論理的な機能ブロックとして、通信部111、画像処理部112、登録部113、出力部114及び異常検出部115が実現されている。
本実施形態では、主に、管理対象としての設備20が管理装置10に新たに登録されるときの通信部111、画像処理部112、登録部113、出力部114及び異常検出部115の動作について説明する。
前提として、設備20には、例えば設備の製造番号、設備が設置される店舗の店番等の識別情報(以降、適宜“設備識別情報”と称する)が記録されている、例えば二次元コード等の光学的に読み取り可能な光学的情報が付与されている。この光学的情報は、監視カメラ40により撮像可能なように、例えば設備20の天板に貼り付けられる。尚、光学的情報は、監視カメラ40により撮像可能であれば、設備20の外表面のどの部分に貼り付けられていてもよい。
設備20がIoT(Internet of Things)に対応している場合、センサ30は設備20に内蔵されている。この場合、センサ30の識別情報(以降、適宜、“センサ識別情報”と称する)は、設備20の設備識別情報から特定される。他方、設備20がIoTに対応していない場合、センサ30には、センサ識別情報が記録された光学的情報が付与されている。
設備20を店舗に設置する作業者は、例えばスマートフォン等の作業用端末により、設備20の光学的情報を読み取る。この結果、作業用端末により、設備20の設備識別情報が取得される。設備20がIoTに対応している場合、管理装置10の通信部111は、ネットワークを介して、作業用端末から設備20の設備識別情報を取得する。
他方、設備20がIoTに対応していない場合、作業者は、設備20に取り付けられるセンサ30の光学的情報を読み取り、設備20の設備識別情報とセンサ30のセンサ識別情報とを紐づける。管理装置10の通信部111は、ネットワークを介して、作業用端末から、互いに紐づけられた設備20の設備識別情報及びセンサ30のセンサ識別情報を取得する。
ここで、管理装置10の動作について図4のフローチャートを参照して説明を加える。図4のステップS101では、上述の如く、管理装置10の通信部111が、設備識別情報及びセンサ識別情報を取得する。登録部113は、設備識別情報及びセンサ識別情報を記憶装置14に登録する。
尚、管理対象の設備がIoTに対応している場合、登録部113は、設備識別情報からセンサ識別情報を特定して(例えば、IoTに対応している設備20の設備識別情報からセンサ30のセンサ識別情報を特定して)、該特定された設備識別情報及びセンサ識別情報を記憶装置14に登録する。この場合、センサ識別情報は、例えば設備識別情報と、該設備識別情報により示される設備に内蔵されているセンサのセンサ識別情報との対応関係を示すテーブル等から特定されてよい。実践的には、登録部113は先ず、店舗内に設置されている複数の設備各々に係る設備識別情報と、例えば店舗に係る識別情報(例えば店番、店名等)とが互いに紐づけられた設備リストを作成する。この設備リストは記憶装置14に登録(格納)される(この設備リストは、例えば、各設備の店舗搬入時に作成される)。次に、登録部113は、センサ識別情報を、設備リストに含まれる一の設備(即ち、該センサ識別情報に対応する設備識別情報に係る設備)に紐づける。この結果、設備識別情報及びセンサ識別情報が互いに紐づけられて記憶装置14に登録される。
ステップS101の処理と並行して、通信部111は、監視カメラ40から映像信号を受信して、監視カメラ40により撮像された店舗内の画像を取得する(ステップS102)。画像処理部112は、該取得された画像から光学的情報(例えば二次元コード)を検出する(ステップS103)。このとき、画像処理部112は、検出された光学的情報により示される設備識別情報に基づいて、新たに登録すべき設備(ここでは、設備20)を特定する。尚、画像に写っている光学的情報の、例えば歪み等に起因して、該光学的情報から設備識別情報を取得できない場合、画像処理部112は、例えば歪み補正等の所定の画像処理を画像に施してよい。
次に、画像処理部112は、画像において新たに登録すべき設備(ここでは、設備20)が写っていると推定される範囲を、抽出範囲として設定する(ステップS104)。ここで、抽出範囲は、例えば画像において光学的情報が写っている位置(即ち、画像座標)、監視カメラ40の設置位置や光学特性から推定される画像における設備の大きさ等に基づいて設定されてよい。図5に示すように、例えば設備20について、抽出範囲は、点線枠aで示すように設定されてよい。
次に、登録部113は、画像から検出された光学的情報により示される設備識別情報と、設定された抽出範囲と、を紐づける(ステップS105)。この結果、新たに登録すべき設備(ここでは、設備20)の管理装置10への登録が完了する。
設備20が管理装置10に登録された後、画像処理部112は、通信部111を介して取得された監視カメラ40により撮像された店舗内の画像から、抽出範囲に該当する画像を抽出する。出力部114は、画像処理部112により抽出された画像の抽出範囲に紐づけられた設備識別情報に基づいて、該設備識別情報に紐づけられたセンサ識別情報を特定する。出力部114は、特定されたセンサ識別情報に対応するセンサ30から出力された信号を、通信部111を介して取得する。出力部114は、センサ30から出力された信号により示される状態情報に基づく設備20の状態(例えば温度等)と、上記抽出された画像とが表示されるように出力装置16を制御する。この結果、例えば図6に示すような画像が出力装置16に表示される。
異常検出部115は、センサ30から出力された信号により示される状態情報に基づいて、設備20の状態が異常であるか否かを判定する。異常検出部115により設備20の状態が異常であると判定された場合、出力部114は、警報を発するように出力装置16を制御する。このとき、出力部114は、例えばエクスクラメーションマーク(感嘆符)が表示されるように出力装置16を制御してよい(図6参照)。出力部114は、警報としての視覚情報に代えて又は加えて、例えばアラーム音等の聴覚情報を出力するように出力装置16を制御してよい。出力部114は更に、例えば店舗に設置されている店舗端末(図示せず)や、店舗に勤務する店員等が所持するモバイル端末(図示せず)、等の管理装置10とは異なる装置に対して、警報を発信してよい。尚、異常検出部115により設備20の状態が異常ではないと判定された場合、出力部114は、設備20が正常であることを示す旨を報知するように出力装置16を制御してよい。
尚、「通信部111」は、後述する付記における「第1取得手段」及び「第2取得手段」の一例に相当する。「画像処理部112」は、後述する付記における「検出手段」及び「決定手段」の一例に相当する。「登録部113」、「出力部114」及び「異常検出部115」は、夫々、後述する付記における「関連付け手段」、「出力手段」及び「異常検出手段」の一例に相当する。
(技術的効果)
本実施形態では、管理対象の設備の設備識別情報に、画像の抽出範囲が紐づけられる。このため、管理装置10は、設備識別情報と一緒に、管理対象の設備が写っている画像を、管理装置10のユーザに提示することができる。この結果、管理装置10のユーザは、遠隔管理の対象設備を比較的容易に把握することができる。
本実施形態では、管理対象の設備の設備識別情報に、画像の抽出範囲が紐づけられる。このため、管理装置10は、設備識別情報と一緒に、管理対象の設備が写っている画像を、管理装置10のユーザに提示することができる。この結果、管理装置10のユーザは、遠隔管理の対象設備を比較的容易に把握することができる。
<第1変形例>
上述したステップS104の処理では、抽出範囲に加えて又は代えて、他の条件が設定されてよい。画像処理部112は、例えば画像における光学的情報の写り方に基づいて、監視カメラ40に係る条件を設定してよい。具体的には例えば、画像処理部112は、画像における光学的情報が写っている位置に基づいて、監視カメラ40の画角又は焦点距離若しくはズーム倍率に係る条件(監視カメラ40がズーム機能を有している場合)、或いは、光軸方向に係る条件(監視カメラ40が首振機能を有している場合)を設定してよい。或いは、画像処理部112は、画像における光学的情報の大きさに基づいて、監視カメラ40の画角又は焦点距離若しくはズーム倍率に係る条件或いは解像度に係る条件(監視カメラ40がズーム機能を有している場合)を設定してよい。
上述したステップS104の処理では、抽出範囲に加えて又は代えて、他の条件が設定されてよい。画像処理部112は、例えば画像における光学的情報の写り方に基づいて、監視カメラ40に係る条件を設定してよい。具体的には例えば、画像処理部112は、画像における光学的情報が写っている位置に基づいて、監視カメラ40の画角又は焦点距離若しくはズーム倍率に係る条件(監視カメラ40がズーム機能を有している場合)、或いは、光軸方向に係る条件(監視カメラ40が首振機能を有している場合)を設定してよい。或いは、画像処理部112は、画像における光学的情報の大きさに基づいて、監視カメラ40の画角又は焦点距離若しくはズーム倍率に係る条件或いは解像度に係る条件(監視カメラ40がズーム機能を有している場合)を設定してよい。
或いは、画像処理部112は、監視カメラ40により撮像された画像から所定部分を単純にトリミングせずに、所定部分をトリミングした後に、該所定部分に歪み補正処理を施して、目的とする画像を取得(抽出)してよい。この場合、画像処理部112は、監視カメラ40により撮像された画像から所定部分をトリミングするための事前情報(例えば、該所定部分に係る座標等)を設定してよい。
更に、店舗に監視カメラ40が複数台設置されている場合、画像処理部112は、複数の監視カメラ40により夫々撮像された複数の画像各々における光学的情報の写り方に基づいて、新たに登録すべき設備(ここでは、設備20)を撮像すべき一又は複数の監視カメラ40を設定してよい。この場合、例えば、店舗内に設置されている複数の設備各々に係る設備識別情報と、店舗に係る識別情報(例えば店番、店名等)とが互いに紐づけられた設備リストに、又は、該設備リストに基づいて作成された設備識別情報と設備を撮像すべき一又は複数の監視カメラ40に係る情報とが紐づけられたテーブルに、新たに登録すべき設備と、該設備を撮像すべき一又は複数の監視カメラ40に係る情報とが互いに紐づけられて登録されてよい。
尚、抽出範囲、監視カメラ40の画角又は焦点距離若しくはズーム倍率に係る条件、光軸方向に係る条件、解像度に係る条件、及び、新たに登録すべき設備を撮像すべき一又は複数の監視カメラ40を示す情報(例えば、監視カメラ40に係る識別情報)は、後述する付記における「抽出条件」の一例である。
<第2変形例>
管理装置10がCPU11以外の一又は複数のCPUを備える場合、或いは、管理センタが複数の管理装置10を備える場合には、図7に示すように、管理装置10のCPU11内には、画像処理部112及び登録部113が実現される一方で、画像処理部112及び登録部113以外の機能ブロックが実現されなくてもよい。
管理装置10がCPU11以外の一又は複数のCPUを備える場合、或いは、管理センタが複数の管理装置10を備える場合には、図7に示すように、管理装置10のCPU11内には、画像処理部112及び登録部113が実現される一方で、画像処理部112及び登録部113以外の機能ブロックが実現されなくてもよい。
<第2実施形態>
店舗を遠隔管理する遠隔管理システム2を用いて、管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体に係る第2実施形態について図8乃至図10を参照して説明する。第2実施形態では、店舗に複数の監視カメラが設置されていることを前提としている以外は、上述した第1実施形態と同じである。従って、第2実施形態について、第1実施形態と重複する説明を省略するとともに、図面上における共通箇所には同一の符号を付して示し、基本的に異なる点について、図8乃至図10を参照して説明する。
店舗を遠隔管理する遠隔管理システム2を用いて、管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体に係る第2実施形態について図8乃至図10を参照して説明する。第2実施形態では、店舗に複数の監視カメラが設置されていることを前提としている以外は、上述した第1実施形態と同じである。従って、第2実施形態について、第1実施形態と重複する説明を省略するとともに、図面上における共通箇所には同一の符号を付して示し、基本的に異なる点について、図8乃至図10を参照して説明する。
図8において、遠隔管理システム2は、管理センタに設置された管理装置10と、店舗に設置された管理対象としての設備1乃至16と、該設備1乃至16をその外部から撮像可能な監視カメラC1乃至C8とを備えて構成されている。設備1乃至16各々にはセンサ(図示せず)が取り付けられている。尚、図8における監視カメラC1乃至C8の配置や個数は一例であり、これに限定されるものではない。同様に、設備1乃至16の配置や個数は一例であり、これに限定されるものではない。
設備1乃至16に夫々対応する設備識別情報と、設備1乃至16各々に取り付けられたセンサに係るセンサ識別情報とは、互いに関連付けられて記憶装置14(図2参照)に登録されているものとする。
本実施形態では特に、管理装置10の異常検出部115により設備の異常が検出された場合の管理装置10の動作について図9のフローチャートを参照して説明する。
図9において、異常検出部115は、設備1乃至16に夫々取り付けられた複数のセンサ各々から出力された信号を、通信部111を介して取得する。この結果、異常検出部115は、複数のセンサ各々から出力された信号により示される状態情報を取得する(ステップS201)。
次に、異常検出部115は、ステップS201の処理において取得された状態情報に基づいて、設備1乃至16の少なくとも一つに異常があるか否かを判定する(ステップS202)。ステップS202の処理において、設備1乃至16のいずれにも異常がないと判定された場合(ステップS202:No)、図9に示す動作は終了される。その後、所定時間(例えば数十ミリ秒から数百ミリ秒)が経過した後に、ステップS201の処理が再度行われる。即ち、図9に示す動作は、所定時間に応じた周期で繰り返し行われる。
ステップS202の処理において、設備1乃至16の少なくとも一つに異常があると判定された場合(ステップS202:Yes)、画像処理部112は、監視カメラC1乃至C8により夫々撮像された複数のカメラ画像を、通信部111を介して取得する。続いて、画像処理部112は、取得された複数のカメラ画像から光学的情報を検出する。
次に、画像処理部112は、検出された光学的情報により示される設備識別情報に基づいて、異常があると判定された設備に係る設備識別情報に対応する光学的情報が写っている一又は複数のカメラ画像を特定する。尚、設備1乃至16各々に係る設備識別情報と、設備1乃至16を夫々撮像可能な監視カメラ(監視カメラC1乃至C8の少なくとも一つ)とが紐づけられたテーブルが存在する場合には、該テーブルから、異常があると判定された設備に係る設備識別情報に対応する光学的情報が写っている一又は複数のカメラ画像が特定されてよい。続いて、画像処理部112は、例えば特定された一又は複数のカメラ画像において光学的情報が写っている位置(即ち、画像座標)、光学的情報の大きさ等に基づいて、管理装置10のユーザに提示すべきカメラ画像を選択する(ステップS203)。
次に、登録部113は、ステップS203の処理において選択されたカメラ画像と、異常があると判定された設備に係る設備識別情報とを関連付けて、記憶装置14に登録する(ステップS204)。ステップS204の処理と並行して、出力部114は、異常があると判定された設備に係る設備識別情報に関連付けられたセンサ識別情報に係るセンサから出力された信号により示される状態情報に基づく設備の状態(例えば温度等)と、ステップS204の処理において選択されたカメラ画像とを表示して、警報を発するように出力装置16を制御する(ステップS205)。この結果、例えば図10に示すような画像が出力装置16に表示される。
尚、上述したステップS203の処理において、異常があると判定された設備に係る設備識別情報に対応する光学的情報が写っているカメラ画像が複数特定された場合、画像処理部112は、特定された複数のカメラ画像全てを、管理装置10のユーザに提示すべきカメラ画像として選択してよい。このとき、画像処理部112は、特定された複数のカメラ画像における光学的情報の写り方(例えば、カメラ画像における光学的情報の位置、大きさ等)に基づいて、管理装置10のユーザに優先して提示すべきカメラ画像を決定してよい(即ち、特定された複数のカメラ画像各々の優先順位を決定してよい)。
上述したステップS203の処理において、画像処理部112は、異常があると判定された設備に係る設備識別情報に対応する光学的情報が写っているカメラ画像を撮像した監視カメラにより撮像された時間的に連続する複数の画像からなる動画を取得する。そして、画像処理部112は、該取得された動画から、異常検出部115により異常があると判定された時点を含む所定時間(例えば数秒~数十秒等)の動画を抽出してよい。登録部113は、該抽出された動画を、異常があると判定された設備に係る設備識別情報に関連付けて記憶装置14に登録してよい。出力部114は、上述したステップS205の処理において、上記抽出された動画が、カメラ画像(即ち、静止画)に加えて又は代えて、表示されるように出力装置16を制御してよい。更に、抽出された動画から、一の画像(即ち、静止画)が抽出され、該抽出された一の画像が、抽出された動画に加えて表示されてもよい。
上述したステップS205の処理において、例えば店舗に設置されている店舗端末(図示せず)や、店舗に勤務する店員等が所持するモバイル端末(図示せず)、等の管理装置10とは異なる装置に対して警報を発信してよい。
<付記>
以上説明した実施形態に関して、更に以下の付記を開示する。
以上説明した実施形態に関して、更に以下の付記を開示する。
(付記1)
付記1に記載の管理装置は、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理装置であって、前記対象設備を撮像した第1画像から前記光学的情報を検出する検出手段と、前記第1画像に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定する決定手段と、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付ける関連付け手段と、を備えることを特徴とする管理装置である。
付記1に記載の管理装置は、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理装置であって、前記対象設備を撮像した第1画像から前記光学的情報を検出する検出手段と、前記第1画像に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定する決定手段と、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付ける関連付け手段と、を備えることを特徴とする管理装置である。
(付記2)
付記2に記載の管理装置は、前記決定手段は、前記第1画像における前記光学的情報の位置に基づいて、前記対象設備の少なくとも一部を含む抽出範囲を、前記抽出条件の少なくとも一部として決定することを特徴とする付記1に記載の管理装置である。
付記2に記載の管理装置は、前記決定手段は、前記第1画像における前記光学的情報の位置に基づいて、前記対象設備の少なくとも一部を含む抽出範囲を、前記抽出条件の少なくとも一部として決定することを特徴とする付記1に記載の管理装置である。
(付記3)
付記3に記載の管理装置は、前記検出手段は、複数の撮像装置により夫々撮像された、前記第1画像としての、複数の撮像画像から前記光学的情報を検出し、前記決定手段は、前記複数の撮像画像と、前記検出手段による検出結果とに基づいて、前記対象設備を撮像する撮像装置を、前記抽出条件の少なくとも一部として決定することを特徴とする付記1に記載の管理装置である。
付記3に記載の管理装置は、前記検出手段は、複数の撮像装置により夫々撮像された、前記第1画像としての、複数の撮像画像から前記光学的情報を検出し、前記決定手段は、前記複数の撮像画像と、前記検出手段による検出結果とに基づいて、前記対象設備を撮像する撮像装置を、前記抽出条件の少なくとも一部として決定することを特徴とする付記1に記載の管理装置である。
(付記4)
付記4に記載の管理装置は、前記対象設備をセンシングするセンサに係るセンサ識別情報を前記設備識別情報と関連付けて取得する第1取得手段を備えることを特徴とする付記1乃至3のいずれか一つに記載の管理装置である。
付記4に記載の管理装置は、前記対象設備をセンシングするセンサに係るセンサ識別情報を前記設備識別情報と関連付けて取得する第1取得手段を備えることを特徴とする付記1乃至3のいずれか一つに記載の管理装置である。
(付記5)
付記5に記載の管理装置は、前記センサにより検出された前記対象設備の状態情報と、前記対象設備を撮像した第2画像とを取得する第2取得手段と、前記状態情報に基づく前記対象設備の状態と、前記決定された抽出条件に基づいて前記第2画像から抽出された抽出画像とを対応付けて出力する出力手段と、を備えることを特徴とする付記4に記載の管理装置である。
付記5に記載の管理装置は、前記センサにより検出された前記対象設備の状態情報と、前記対象設備を撮像した第2画像とを取得する第2取得手段と、前記状態情報に基づく前記対象設備の状態と、前記決定された抽出条件に基づいて前記第2画像から抽出された抽出画像とを対応付けて出力する出力手段と、を備えることを特徴とする付記4に記載の管理装置である。
(付記6)
付記6に記載の管理装置は、前記対象設備をセンシングするセンサにより検出された前記対象設備の状態情報と、前記対象設備を撮像した第2画像とを取得する第2取得手段と、前記状態情報に基づく前記対象設備の状態が異常である場合に、前記状態と、前記決定された抽出条件に基づいて前記第2画像から抽出された抽出画像とを対応付けて出力する出力手段と、を備えることを特徴とする付記1乃至3のいずれか一つに記載の管理装置である。
付記6に記載の管理装置は、前記対象設備をセンシングするセンサにより検出された前記対象設備の状態情報と、前記対象設備を撮像した第2画像とを取得する第2取得手段と、前記状態情報に基づく前記対象設備の状態が異常である場合に、前記状態と、前記決定された抽出条件に基づいて前記第2画像から抽出された抽出画像とを対応付けて出力する出力手段と、を備えることを特徴とする付記1乃至3のいずれか一つに記載の管理装置である。
(付記7)
付記7に記載の管理装置は、前記出力手段は、前記状態が異常である場合に、警報を発することを特徴とする付記5又は6に記載の管理装置である。
付記7に記載の管理装置は、前記出力手段は、前記状態が異常である場合に、警報を発することを特徴とする付記5又は6に記載の管理装置である。
(付記8)
付記8に記載の管理装置は、前記センサにより検出された前記対象設備の状態情報に基づいて、前記対象設備の状態の異常を検出する異常検出手段を備えることを特徴とする付記5乃至7のいずれか一つに記載の管理装置である。
付記8に記載の管理装置は、前記センサにより検出された前記対象設備の状態情報に基づいて、前記対象設備の状態の異常を検出する異常検出手段を備えることを特徴とする付記5乃至7のいずれか一つに記載の管理装置である。
(付記9)
付記9に記載の管理方法は、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法であって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付けることを特徴とする管理方法である。
付記9に記載の管理方法は、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法であって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付けることを特徴とする管理方法である。
(付記10)
付記10に記載のコンピュータプログラムは、コンピュータに、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法を実行させるコンピュータプログラムであって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付けることを特徴とするコンピュータプログラムである。
付記10に記載のコンピュータプログラムは、コンピュータに、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法を実行させるコンピュータプログラムであって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付けることを特徴とするコンピュータプログラムである。
(付記11)
付記11に記載の記録媒体は、コンピュータに、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法を実行させるコンピュータプログラムであって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付けるコンピュータプログラムが記録されていることを特徴とする記録媒体である。
付記11に記載の記録媒体は、コンピュータに、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法を実行させるコンピュータプログラムであって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付けるコンピュータプログラムが記録されていることを特徴とする記録媒体である。
(付記12)
付記12に記載の管理システムは、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理システムであって、前記対象設備をセンシングするセンサと、前記対象設備を撮像する撮像装置と、管理装置と、を備え、前記管理装置は、前記設備識別情報を、前記センサに係るセンサ識別情報に関連付けて取得する第1取得手段と、前記撮像装置により前記対象設備を撮像した第1画像から前記光学的情報を検出する検出手段と、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定する決定手段と、前記設備識別情報と、前記決定された抽出条件とを関連付ける関連付け手段と、を備えることを特徴とする管理システムである。
付記12に記載の管理システムは、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理システムであって、前記対象設備をセンシングするセンサと、前記対象設備を撮像する撮像装置と、管理装置と、を備え、前記管理装置は、前記設備識別情報を、前記センサに係るセンサ識別情報に関連付けて取得する第1取得手段と、前記撮像装置により前記対象設備を撮像した第1画像から前記光学的情報を検出する検出手段と、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定する決定手段と、前記設備識別情報と、前記決定された抽出条件とを関連付ける関連付け手段と、を備えることを特徴とする管理システムである。
(付記13)
付記13に記載の管理装置は、夫々、設備識別情報を示す光学的に読み取り可能な光学的情報が付された複数の対象設備を管理する管理装置であって、前記複数の対象設備をセンシングするセンサにより検出された、前記複数の対象設備に夫々対応する複数の状態情報を取得する状態情報取得手段と、複数の撮像装置各々により撮像された、前記複数の対象設備の少なくとも一部を含む複数の撮像画像を取得する画像取得手段と、前記複数の状態情報に基づいて、前記複数の対象設備のうち一の対象設備の状態の異常が検出された場合に、前記複数の撮像画像各々から前記一の対象設備に付された、前記光学的情報としての、一の光学的情報を検出する検出手段と、前記検出手段による前記一の光学的情報の検出結果に基づいて、前記複数の撮像画像から、前記一の対象設備の少なくとも一部を含む一又は複数の撮像画像を抽出する抽出手段と、前記一の対象設備の状態と、前記抽出された一又は複数の撮像画像の少なくとも一つとを対応付けて出力する出力手段と、を備えることを特徴とする管理装置である。
付記13に記載の管理装置は、夫々、設備識別情報を示す光学的に読み取り可能な光学的情報が付された複数の対象設備を管理する管理装置であって、前記複数の対象設備をセンシングするセンサにより検出された、前記複数の対象設備に夫々対応する複数の状態情報を取得する状態情報取得手段と、複数の撮像装置各々により撮像された、前記複数の対象設備の少なくとも一部を含む複数の撮像画像を取得する画像取得手段と、前記複数の状態情報に基づいて、前記複数の対象設備のうち一の対象設備の状態の異常が検出された場合に、前記複数の撮像画像各々から前記一の対象設備に付された、前記光学的情報としての、一の光学的情報を検出する検出手段と、前記検出手段による前記一の光学的情報の検出結果に基づいて、前記複数の撮像画像から、前記一の対象設備の少なくとも一部を含む一又は複数の撮像画像を抽出する抽出手段と、前記一の対象設備の状態と、前記抽出された一又は複数の撮像画像の少なくとも一つとを対応付けて出力する出力手段と、を備えることを特徴とする管理装置である。
(付記14)
付記14に記載の管理装置は、前記出力手段は、前記抽出手段により前記一の対象設備の少なくとも一部を含む撮像画像が複数抽出された場合、前記一の対象設備の状態と、前記抽出された複数の撮像画像とを対応付けて出力することを特徴とする付記13に記載の管理装置である。
付記14に記載の管理装置は、前記出力手段は、前記抽出手段により前記一の対象設備の少なくとも一部を含む撮像画像が複数抽出された場合、前記一の対象設備の状態と、前記抽出された複数の撮像画像とを対応付けて出力することを特徴とする付記13に記載の管理装置である。
(付記15)
付記15に記載の管理装置は、前記出力手段は、前記抽出手段により前記一の対象設備の少なくとも一部を含む撮像画像が複数抽出された場合、前記抽出された複数の撮像画像各々における前記一の光学的情報の写り方に基づいて、前記一の対象設備の状態と対応付けて出力すべき撮像画像を決定することを特徴とする付記13に記載の管理装置である。
付記15に記載の管理装置は、前記出力手段は、前記抽出手段により前記一の対象設備の少なくとも一部を含む撮像画像が複数抽出された場合、前記抽出された複数の撮像画像各々における前記一の光学的情報の写り方に基づいて、前記一の対象設備の状態と対応付けて出力すべき撮像画像を決定することを特徴とする付記13に記載の管理装置である。
(付記16)
付記16に記載の管理装置は、前記抽出手段は、前記複数の撮像装置のうち、前記抽出された一又は複数の撮像画像を撮像した一又は複数の撮像装置を特定して、前記特定された一又は複数の撮像装置により撮像された時間的に連続する複数の撮像画像からなる動画から、前記一の対象設備の状態の異常が検出された時点を含む所定期間の動画を抽出し、前記出力手段は、前記抽出された一又は複数の撮像画像の少なくとも一つに代えて又は加えて、前記抽出された動画を、前記一の対象設備の状態と対応付けて出力することを特徴とする付記13乃至15のいずれか一つに記載の管理装置である。
付記16に記載の管理装置は、前記抽出手段は、前記複数の撮像装置のうち、前記抽出された一又は複数の撮像画像を撮像した一又は複数の撮像装置を特定して、前記特定された一又は複数の撮像装置により撮像された時間的に連続する複数の撮像画像からなる動画から、前記一の対象設備の状態の異常が検出された時点を含む所定期間の動画を抽出し、前記出力手段は、前記抽出された一又は複数の撮像画像の少なくとも一つに代えて又は加えて、前記抽出された動画を、前記一の対象設備の状態と対応付けて出力することを特徴とする付記13乃至15のいずれか一つに記載の管理装置である。
本発明は、請求の範囲及び明細書全体から読み取るこのできる発明の要旨又は思想に反しない範囲で適宜変更可能であり、そのような変更を伴う管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体もまた本発明の技術思想に含まれる。
この出願は、2019年6月10日に出願された日本出願特願2019-107727を基礎とする優先権を主張し、その開示の全てをここに取り込む。
1、2…遠隔管理システム、10…管理装置、20…設備、30…センサ、40、C1~C8…監視カメラ、111…通信部、112…画像処理部、113…登録部、114…出力部、115…異常検出部
Claims (16)
- 設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理装置であって、
前記対象設備を撮像した第1画像から前記光学的情報を検出する検出手段と、
前記第1画像に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定する決定手段と、
前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付ける関連付け手段と、
を備えることを特徴とする管理装置。 - 前記決定手段は、前記第1画像における前記光学的情報の位置に基づいて、前記対象設備の少なくとも一部を含む抽出範囲を、前記抽出条件の少なくとも一部として決定することを特徴とする請求項1に記載の管理装置。
- 前記検出手段は、複数の撮像装置により夫々撮像された、前記第1画像としての、複数の撮像画像から前記光学的情報を検出し、
前記決定手段は、前記複数の撮像画像と、前記検出手段による検出結果とに基づいて、前記対象設備を撮像する撮像装置を、前記抽出条件の少なくとも一部として決定する
ことを特徴とする請求項1に記載の管理装置。 - 前記対象設備をセンシングするセンサに係るセンサ識別情報を前記設備識別情報と関連付けて取得する第1取得手段を備えることを特徴とする請求項1乃至3のいずれか一項に記載の管理装置。
- 前記センサにより検出された前記対象設備の状態情報と、前記対象設備を撮像した第2画像とを取得する第2取得手段と、
前記状態情報に基づく前記対象設備の状態と、前記決定された抽出条件に基づいて前記第2画像から抽出された抽出画像とを対応付けて出力する出力手段と、
を備えることを特徴とする請求項4に記載の管理装置。 - 前記対象設備をセンシングするセンサにより検出された前記対象設備の状態情報と、前記対象設備を撮像した第2画像とを取得する第2取得手段と、
前記状態情報に基づく前記対象設備の状態が異常である場合に、前記状態と、前記決定された抽出条件に基づいて前記第2画像から抽出された抽出画像とを対応付けて出力する出力手段と、
を備えることを特徴とする請求項1乃至3のいずれか一項に記載の管理装置。 - 前記出力手段は、前記状態が異常である場合に、警報を発することを特徴とする請求項5又は6に記載の管理装置。
- 前記センサにより検出された前記対象設備の状態情報に基づいて、前記対象設備の状態の異常を検出する異常検出手段を備えることを特徴とする請求項5乃至7のいずれか一項に記載の管理装置。
- 設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法であって、
前記対象設備を撮像した第1画像から前記光学的情報を検出し、
前記第1画像に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、
前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付ける
ことを特徴とする管理方法。 - コンピュータに、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法を実行させるコンピュータプログラムであって、
前記対象設備を撮像した第1画像から前記光学的情報を検出し、
前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、
前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付ける
ことを特徴とするコンピュータプログラム。 - コンピュータに、設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理方法を実行させるコンピュータプログラムであって、前記対象設備を撮像した第1画像から前記光学的情報を検出し、前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定し、前記光学的情報により示される前記設備識別情報と、前記決定された抽出条件とを関連付けるコンピュータプログラムが記録されていることを特徴とする記録媒体。
- 設備識別情報を示す光学的に読み取り可能な光学的情報が付された対象設備を管理する管理システムであって、
前記対象設備をセンシングするセンサと、
前記対象設備を撮像する撮像装置と、
管理装置と、
を備え、
前記管理装置は、
前記設備識別情報を、前記センサに係るセンサ識別情報に関連付けて取得する第1取得手段と、
前記撮像装置により前記対象設備を撮像した第1画像から前記光学的情報を検出する検出手段と、
前記第1画像及び前記検出された光学的情報に基づいて、前記対象設備の少なくとも一部を含む抽出画像を抽出するための抽出条件を決定する決定手段と、
前記設備識別情報と、前記決定された抽出条件とを関連付ける関連付け手段と、
を備える
ことを特徴とする管理システム。 - 夫々、設備識別情報を示す光学的に読み取り可能な光学的情報が付された複数の対象設備を管理する管理装置であって、
前記複数の対象設備をセンシングするセンサにより検出された、前記複数の対象設備に夫々対応する複数の状態情報を取得する状態情報取得手段と、
複数の撮像装置各々により撮像された、前記複数の対象設備の少なくとも一部を含む複数の撮像画像を取得する画像取得手段と、
前記複数の状態情報に基づいて、前記複数の対象設備のうち一の対象設備の状態の異常が検出された場合に、前記複数の撮像画像各々から前記一の対象設備に付された、前記光学的情報としての、一の光学的情報を検出する検出手段と、
前記検出手段による前記一の光学的情報の検出結果に基づいて、前記複数の撮像画像から、前記一の対象設備の少なくとも一部を含む一又は複数の撮像画像を抽出する抽出手段と、
前記一の対象設備の状態と、前記抽出された一又は複数の撮像画像の少なくとも一つとを対応付けて出力する出力手段と、
を備えることを特徴とする管理装置。 - 前記出力手段は、前記抽出手段により前記一の対象設備の少なくとも一部を含む撮像画像が複数抽出された場合、前記一の対象設備の状態と、前記抽出された複数の撮像画像とを対応付けて出力することを特徴とする請求項13に記載の管理装置。
- 前記出力手段は、前記抽出手段により前記一の対象設備の少なくとも一部を含む撮像画像が複数抽出された場合、前記抽出された複数の撮像画像各々における前記一の光学的情報の写り方に基づいて、前記一の対象設備の状態と対応付けて出力すべき撮像画像を決定することを特徴とする請求項13に記載の管理装置。
- 前記抽出手段は、前記複数の撮像装置のうち、前記抽出された一又は複数の撮像画像を撮像した一又は複数の撮像装置を特定して、前記特定された一又は複数の撮像装置により撮像された時間的に連続する複数の撮像画像からなる動画から、前記一の対象設備の状態の異常が検出された時点を含む所定期間の動画を抽出し、
前記出力手段は、前記抽出された一又は複数の撮像画像の少なくとも一つに代えて又は加えて、前記抽出された動画を、前記一の対象設備の状態と対応付けて出力する
ことを特徴とする請求項13乃至15のいずれか一項に記載の管理装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US17/617,063 US20220335723A1 (en) | 2019-06-10 | 2020-03-27 | Management apparatus, management method, management system, computer program and recording medium |
JP2021525921A JP7487737B2 (ja) | 2019-06-10 | 2020-03-27 | 管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体 |
US18/237,790 US20230401859A1 (en) | 2019-06-10 | 2023-08-24 | Management apparatus, management method, management system, computer program and recording medium |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019-107727 | 2019-06-10 | ||
JP2019107727 | 2019-06-10 |
Related Child Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US17/617,063 A-371-Of-International US20220335723A1 (en) | 2019-06-10 | 2020-03-27 | Management apparatus, management method, management system, computer program and recording medium |
US18/237,790 Continuation US20230401859A1 (en) | 2019-06-10 | 2023-08-24 | Management apparatus, management method, management system, computer program and recording medium |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2020250543A1 true WO2020250543A1 (ja) | 2020-12-17 |
Family
ID=73781779
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2020/014116 WO2020250543A1 (ja) | 2019-06-10 | 2020-03-27 | 管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体 |
Country Status (3)
Country | Link |
---|---|
US (3) | US20220335723A1 (ja) |
JP (1) | JP7487737B2 (ja) |
WO (1) | WO2020250543A1 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007233702A (ja) * | 2006-03-01 | 2007-09-13 | Nec Corp | 管理システム、これに用いる管理サーバ及び情報処理端末、管理方法、プログラム |
JP2012249104A (ja) * | 2011-05-27 | 2012-12-13 | Kyocera Corp | 遠隔操作装置、遠隔制御システム、制御プログラムおよび記憶媒体 |
JP2015135570A (ja) * | 2014-01-16 | 2015-07-27 | キヤノン株式会社 | 画像処理装置、システム、情報処理方法及びプログラム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011054060A (ja) * | 2009-09-03 | 2011-03-17 | Canon Marketing Japan Inc | 監視システム、監視システムの制御方法およびその制御プログラム |
JP7196433B2 (ja) * | 2018-06-26 | 2022-12-27 | 横河電機株式会社 | 装置、方法、プログラムおよび記録媒体 |
-
2020
- 2020-03-27 US US17/617,063 patent/US20220335723A1/en active Pending
- 2020-03-27 JP JP2021525921A patent/JP7487737B2/ja active Active
- 2020-03-27 WO PCT/JP2020/014116 patent/WO2020250543A1/ja active Application Filing
-
2023
- 2023-08-24 US US18/237,790 patent/US20230401859A1/en active Pending
- 2023-08-24 US US18/237,797 patent/US20230401860A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007233702A (ja) * | 2006-03-01 | 2007-09-13 | Nec Corp | 管理システム、これに用いる管理サーバ及び情報処理端末、管理方法、プログラム |
JP2012249104A (ja) * | 2011-05-27 | 2012-12-13 | Kyocera Corp | 遠隔操作装置、遠隔制御システム、制御プログラムおよび記憶媒体 |
JP2015135570A (ja) * | 2014-01-16 | 2015-07-27 | キヤノン株式会社 | 画像処理装置、システム、情報処理方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20220335723A1 (en) | 2022-10-20 |
JP7487737B2 (ja) | 2024-05-21 |
JPWO2020250543A1 (ja) | 2020-12-17 |
US20230401860A1 (en) | 2023-12-14 |
US20230401859A1 (en) | 2023-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9210385B2 (en) | Method and system for metadata extraction from master-slave cameras tracking system | |
KR101464344B1 (ko) | 감시 영상의 정상 상태 학습을 통한 이상 상태 감지 방법과 이를 적용한 감시 카메라 및 영상 관리 시스템 | |
JP6730236B2 (ja) | 人識別システム及び人識別方法 | |
WO2016091545A1 (en) | Image processing method | |
JP6190862B2 (ja) | 監視システムとその監視制御装置 | |
JP2010021920A (ja) | カメラシステム及びレコーダ | |
JP5154341B2 (ja) | 画像監視装置およびプログラム | |
CN110557607B (zh) | 图像处理设备、信息处理设备、信息处理方法和记录介质 | |
JP2016189517A5 (ja) | ||
JP6602067B2 (ja) | 表示制御装置、表示制御方法、プログラム | |
JP5911227B2 (ja) | 判定装置、判定方法及びプログラム | |
JP2016197797A (ja) | 画像処理装置、画像処理方法、及び画像処理システム | |
JP4830904B2 (ja) | ネットワークシステム | |
WO2020250543A1 (ja) | 管理装置、管理方法、管理システム、コンピュータプログラム及び記録媒体 | |
JP2017055373A (ja) | 売場防犯プログラム、タブレット端末及び売場 | |
JP2018160722A (ja) | 映像異常停止検出装置、映像記録装置、および、映像異常停止検出方法 | |
US20120134534A1 (en) | Control computer and security monitoring method using the same | |
WO2022030548A1 (ja) | 監視情報処理装置、方法およびプログラム | |
JP2008085832A (ja) | 監視カメラ、監視カメラの制御方法および監視カメラシステム | |
JP2022107675A (ja) | 情報処理システム、情報処理システムの制御方法、およびプログラム | |
US20200177803A1 (en) | Imaging apparatus, control method, and program | |
JP7332465B2 (ja) | 動作認識システム、動作認識装置、および領域設定方法 | |
CN114166358B (zh) | 一种防疫检查的机器人巡检方法、系统、设备及存储介质 | |
JP2014131211A (ja) | 撮像装置及び映像監視システム | |
WO2020095790A1 (ja) | 被写体検知装置、システム、方法および記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20823217 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2021525921 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 20823217 Country of ref document: EP Kind code of ref document: A1 |