WO2017072990A1 - 施設撮像装置、施設画像収集装置、施設画像蓄積装置、施設画像出力制御装置、施設運営支援装置、ユーザ端末装置、および施設運営支援方法 - Google Patents

施設撮像装置、施設画像収集装置、施設画像蓄積装置、施設画像出力制御装置、施設運営支援装置、ユーザ端末装置、および施設運営支援方法 Download PDF

Info

Publication number
WO2017072990A1
WO2017072990A1 PCT/JP2016/003646 JP2016003646W WO2017072990A1 WO 2017072990 A1 WO2017072990 A1 WO 2017072990A1 JP 2016003646 W JP2016003646 W JP 2016003646W WO 2017072990 A1 WO2017072990 A1 WO 2017072990A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
facility
screen
images
area
Prior art date
Application number
PCT/JP2016/003646
Other languages
English (en)
French (fr)
Inventor
浩平 西野
哲郎 柿沢
Original Assignee
パナソニックIpマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2015214994A external-priority patent/JP6226249B2/ja
Priority claimed from JP2015214986A external-priority patent/JP6161013B2/ja
Application filed by パナソニックIpマネジメント株式会社 filed Critical パナソニックIpマネジメント株式会社
Priority to US15/769,102 priority Critical patent/US20180300802A1/en
Publication of WO2017072990A1 publication Critical patent/WO2017072990A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/77Retouching; Inpainting; Scratch removal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30241Trajectory

Definitions

  • the present disclosure relates to a facility imaging device that provides an image captured in a facility to a facility image collection device via a network, and a facility image collection device that acquires and stores an image captured in the facility from the facility imaging device via a network
  • a facility image storage device that stores an image output from a facility imaging device that images the inside of the facility and outputs the image to the facility image collection device via a network
  • Facility image output control device that controls image output to image collection device via network
  • facility operation support device that supports the work of a user who operates a facility that provides goods or services to a user, user terminal device, and facility It relates to the operation support method.
  • the facility imaging apparatus is a facility imaging apparatus that provides an image captured in a facility to the facility image collection apparatus via a network, and images the inside of the facility and sequentially outputs temporally continuous captured images.
  • An imaging unit a processor that performs image processing on the captured image and outputs the processed image, and a communication unit that transmits the processed image to the facility image collection apparatus via the network.
  • the control image information is updated to generate a still image for viewing from which moving objects have been removed as a processed image, and the communication unit transmits the still image for viewing at a predetermined timing.
  • the facility image collection device of the present disclosure is a facility image collection device that acquires and accumulates an image captured in a facility from the facility image capture device via a network, and is a still image for browsing transmitted from the facility image capture device.
  • the communication unit a storage device that stores the still image for browsing, and a processor that controls the timing for acquiring the still image for browsing from the facility imaging device, the communication unit based on the control of the processor, An image transmission request is periodically made at a predetermined timing, and a browsing still image transmitted from the facility imaging apparatus is received in response to the image transmission request.
  • a facility image storage device is a facility image storage device that stores an image output from a facility imaging device that images a facility and outputs the image to a facility image collection device via a network.
  • a receiving unit that receives sequentially captured images that are sequentially output from the imaging device, a storage device that accumulates the captured images, a processor that performs image processing on the captured images and outputs processed images;
  • a transmission unit that transmits the processed image to the facility image collection apparatus via the network, and the processor updates the dominant image information and removes the moving object each time the captured image is input from the facility imaging apparatus.
  • the still image for use is generated as a processed image, and the transmission unit is configured to transmit the still image for browsing at a predetermined timing.
  • a facility image output control device is a facility image output control device that is connected to a facility imaging device that images the inside of a facility and controls image output via a network to the facility image collection device.
  • a receiver that receives sequentially captured images that are sequentially output from the device, a processor that performs image processing on the captured images and outputs the processed images, and collects facility images via the network
  • a processor that transmits to the device, and each time a captured image is input from the facility imaging device, the processor updates the dominant image information to generate a still image for viewing from which moving objects are removed as a processed image,
  • the transmission unit is configured to transmit the browsing still image at a predetermined timing.
  • a facility operation support apparatus is a facility operation support apparatus that supports the work of a user who operates a facility that provides articles or services to a user, and an image storage unit that stores area images of each area in the facility;
  • a management unit that manages the area image, and a distribution unit that distributes a browsing screen including the area image to the user terminal device, and the distribution unit arranges the area image for each facility related to the common area together with the facility name.
  • a browsing screen including another image list and an area selection menu for changing the area in the facility-specific image list is generated and distributed to the user terminal device.
  • the user terminal device of the present disclosure is a user terminal device that displays a screen based on information distributed from a facility operation support device that supports a business of a user who operates a facility that provides goods or services to a user.
  • a browsing screen including a facility-specific image list in which area images for each facility related to a common area are arranged together with a facility name and an area selection menu for changing the area in the facility-specific image list is displayed.
  • the facility management support method of the present disclosure is a facility management support method in which a user who operates a facility that provides goods or services to a user is supported by the information processing device. Generates a viewing screen that accumulates area images of areas and includes a facility-specific image list in which area images for each facility related to a common area are arranged together with the facility name, and an area selection menu for changing the area in the facility-specific image list.
  • the user terminal device is distributed.
  • the facility image collection device improves the traffic load on the network when collecting images taken from multiple facilities, eliminates the risk of unprocessed images being leaked, and protects privacy. Images can be collected efficiently.
  • the browsing screen is distributed to the user terminal device, and the situation of the area is easily compared between the facilities for the common area by the facility-specific image list included in the browsing screen. Furthermore, by changing the area of the facility-specific image list using the area selection menu, the situation of different areas can be compared between a plurality of facilities. Thereby, even when the number of facilities and the number of areas increase, a plurality of users can efficiently check the situation in the facility from anywhere, and work for improving the facility operation can be performed rationally.
  • FIG. 1 is an overall configuration diagram of a facility management support system according to the present embodiment.
  • FIG. 2 is a plan view of the store explaining the store layout and the installation status of the camera 1.
  • FIG. 3 is a block diagram illustrating a schematic configuration of the camera 1, the recording server 21, the management server 22, and the distribution server 23.
  • FIG. 4 is an explanatory diagram showing a transition state of screens generated by the distribution server 23 and displayed on the PC 3.
  • FIG. 5 is an explanatory diagram showing a store comparison screen.
  • FIG. 6 is an explanatory diagram showing a sales floor list confirmation screen.
  • FIG. 7 is an explanatory diagram showing a designated time confirmation screen.
  • FIG. 8 is an explanatory diagram showing an all-day confirmation screen.
  • FIG. 9 is an explanatory diagram showing an enlarged image display screen.
  • FIG. 1 is an overall configuration diagram of a facility management support system according to the present embodiment.
  • FIG. 2 is a plan view of the store explaining the store layout and the installation status of the camera 1.
  • FIG. 10 is an explanatory diagram illustrating an image display screen for each store when viewing an enlarged image.
  • FIG. 11 is an explanatory diagram showing an enlarged image editing screen.
  • FIG. 12 is an explanatory diagram showing a report input screen.
  • FIG. 13 is an explanatory diagram showing a report list screen.
  • FIG. 14 is an explanatory diagram showing a report list screen in a detailed display state.
  • FIG. 15 is an explanatory diagram showing an enlarged image display screen when viewing a report.
  • FIG. 16 is an explanatory diagram showing a message display screen.
  • FIG. 17 is an explanatory diagram showing a user setting screen.
  • FIG. 18 is an explanatory diagram showing a topic setting screen.
  • FIG. 19 is an explanatory diagram showing a topic display screen.
  • FIG. 19 is an explanatory diagram showing a topic display screen.
  • FIG. 20 is an explanatory diagram illustrating a monitoring screen displayed on the smartphone 4.
  • FIG. 21 is an explanatory diagram showing an enlarged display state of the sales floor image on the monitoring screen.
  • FIG. 22 is a block diagram illustrating a schematic configuration of a camera 221 and a recorder 231 according to a modification of the facility management support system.
  • FIG. 23 is a block diagram illustrating a schematic configuration of a camera 241 and a recorder 251 according to a modification of the facility management support system.
  • FIG. 24 is a block diagram illustrating a schematic configuration of a camera 241 and an adapter 261 according to a modification of the facility management support system.
  • Patent Document 1 by periodically collecting an image of a sales floor in a convenience store or the like with a server and removing shielding objects such as shoppers and store staff from this image, It becomes possible to appropriately check the actual situation of the sales floor for each time zone.
  • management guidance information store clerk information, product display information, product missing information
  • FC headquarters such as a convenience store is located.
  • Product information, product inventory information, visitor information, etc. and the burden on the supervisor can be greatly reduced.
  • Patent Document 3 by incorporating a live camera capable of acquiring images for each sales floor into the POS system, it is possible to check the actual situation of the sales floor for each time period without going to the sales floor. It becomes.
  • the server collects original images from a plurality of remote stores via a network, and creates a corrected image at the center server. There is a possibility that the load of the above traffic increases and the communication becomes unstable or the communication becomes impossible.
  • An object of the present invention is to provide a facility imaging device, a facility image collection device, a facility image storage device, and a facility image output control device that can efficiently collect.
  • An object of the present invention is to provide a facility management support device, a user terminal device, and a facility management support method capable of performing business efficiently.
  • a first disclosure made to solve the above-described problem is a facility imaging apparatus that provides an image captured in a facility to a facility image collection apparatus via a network.
  • An imaging unit that sequentially outputs consecutive captured images
  • a processor that performs image processing on the captured images and outputs the processed images
  • a communication unit that transmits the processed images to the facility image collection device via the network
  • the processor updates the dominant image information every time a captured image is input from the imaging unit, and generates a browsing still image from which a moving object has been removed as a processed image. It is set as the structure which transmits at the timing of.
  • the facility image collection device improves the traffic load on the network when collecting images taken from multiple facilities, eliminates the risk of unprocessed images being leaked, and protects privacy. Images can be collected efficiently.
  • the dominant image information is color information in units of pixels.
  • the third disclosure is configured such that the communication unit transmits a still image for browsing in response to an image transmission request transmitted from the facility image collection device at the same timing as other facility imaging devices.
  • the facility image collection device it is possible to collect still images for browsing at the same timing among a plurality of facility imaging devices. For this reason, when the still images for browsing by a plurality of facility imaging devices are displayed side by side, the situation in the facility can be compared at a timing common to the plurality of facilities.
  • the communication unit outputs the still image for browsing from which the moving object is removed to the image storage device for facility operation support, and security is ensured for the unprocessed image from which the moving object is not removed.
  • the output is made to another image storage device.
  • the still image for browsing and the unprocessed image output from the facility imaging apparatus can be used for store management applications such as merchandise management and crime prevention / disaster prevention applications, respectively.
  • the fifth disclosure is a facility image collection device that acquires and accumulates an image captured in a facility from the facility imaging device via a network, and receives a still image for browsing transmitted from the facility imaging device.
  • an image transmission request is periodically made, and a browsing still image transmitted from the facility imaging apparatus is received in response to the image transmission request.
  • the facility image collection device improves the traffic load on the network when collecting images captured in a plurality of facilities, and the risk of unprocessed images being leaked Can be efficiently collected for privacy-protected images.
  • the communication unit when the communication unit fails to acquire the browsing still image at the timing, the communication unit repeats the image transmission request until the browsing still image is successfully acquired in the period up to the next timing. To do.
  • a seventh disclosure is a facility image storage device that stores an image output from a facility imaging device that images the inside of the facility and outputs the image to a facility image collection device via a network.
  • a receiving unit that receives sequentially captured images that are sequentially output, a storage device that stores the captured images, a processor that performs image processing on the captured images and outputs the processed images, and a processed image
  • a transmission unit that transmits to the facility image collection device via the network, and the processor updates the dominant image information each time a captured image is input from the facility imaging device and removes the moving object. Is generated as a processed image, and the transmission unit transmits a still image for browsing at a predetermined timing.
  • the facility image collection device improves the traffic load on the network when collecting images captured in a plurality of facilities, and the risk of unprocessed images being leaked Can be efficiently collected for privacy-protected images.
  • the eighth disclosure is a facility image output control device that is connected to a facility imaging device that images the inside of the facility and controls image output via the network to the facility image collection device, and sequentially outputs from the facility imaging device.
  • a reception unit that receives captured images that are continuous in time, a processor that performs image processing on the captured images, outputs the processed image, and transmits the processed image to the facility image collection apparatus via the network
  • the processor updates the dominant image information and generates a still image for viewing from which moving objects have been removed as a processed image.
  • a still image for browsing is transmitted at a predetermined timing.
  • the facility image collection device improves the traffic load on the network when collecting images captured in a plurality of facilities, and the risk of unprocessed images being leaked Can be efficiently collected for privacy-protected images.
  • the ninth disclosure is a facility operation support apparatus that supports the work of a user who operates a facility that provides goods or services to users, an image storage unit that stores area images of each area in the facility, A management unit that manages the area image, and a distribution unit that distributes a browsing screen including the area image to the user terminal device.
  • the distribution unit arranges area images for each facility related to a common area together with the facility name.
  • a browsing screen including an image list and an area selection menu for changing the area in the facility-specific image list is generated and distributed to the user terminal device.
  • the browsing screen is distributed to the user terminal device, and by the facility-specific image list included in the browsing screen, it is possible to easily compare the status of the area between facilities for a common area, By changing the area of the facility-specific image list using the area selection menu, the situation of different areas can be compared between a plurality of facilities. Thereby, even when the number of facilities and the number of areas increase, a plurality of users can efficiently check the situation in the facility from anywhere, and work for improving the facility operation can be performed rationally.
  • the distribution unit displays a plurality of date and time input units having different input methods on the browsing screen, and inputs the display date and time of the area image in the facility-specific image list to the user by the plurality of date and time input units. It is set as the structure made to do.
  • the date and time input unit is a calendar input that specifies a date and time in a calendar, a date and time feed input that changes the date and time at a predetermined interval, a scale input that specifies a date and time at a position in the time axis direction on a time scale, And it is set as the structure by the input method of at least 2 or more of the present date input changed to the present date.
  • the operability when changing the display date and time of the area image can be further enhanced.
  • the distribution unit arranges area images in the same facility together with area names based on an operation of a user who selects a facility in the facility-specific image list, and the area-specific image list.
  • a browsing screen including a facility selection menu for changing the facility in the image list is generated and distributed to the user terminal device.
  • the status of each area can be confirmed for the facility of interest by using the image list by area. Then, by changing the facilities in the area-specific image list using the facility selection menu, the status of different facilities can be easily confirmed without returning to the facility-specific image list browsing screen.
  • the distribution unit arranges the daily image list in which the area images for each day in the predetermined period related to the selected area are arranged based on an operation of a user who selects an area in the area-specific image list.
  • a browsing screen including an area selection menu for changing the area in the daily image list, and delivering the browsing screen to the user terminal device.
  • the user can specify the period.
  • the period becomes longer, if the area images of all the days in the period are displayed side by side, the screen becomes difficult to see, so the user can select the interval of dates displayed in the daily image list and set the interval. It is advisable to display the area image for each day. For example, if the interval is a week, the area images of the same day of the week for a few weeks before the specified date are displayed side by side. If the interval is a day, the area images of the most recent days of the specified date are displayed side by side.
  • the fourteenth disclosure is configured such that area images at predetermined times are displayed side by side in the daily image list.
  • the distribution unit includes a time-based image list in which area images at each time on the selected date are arranged in time series based on a user operation for selecting a date in the daily image list, A browsing screen including an area selection menu for changing the area in the image list by time is generated and distributed to the user terminal device.
  • the sixteenth disclosure is configured such that the distribution unit generates a distribution screen including a high-resolution area image and distributes it to the user terminal device based on a user's operation for selecting the high-quality mode.
  • the area image can be enlarged and displayed without degrading the image quality. Thereby, the situation of an area can be observed in detail and easily.
  • the image storage unit periodically obtains a still image for browsing obtained by removing moving objects from an image captured inside the facility from the facility imaging device at a predetermined timing,
  • the area image is generated and stored, and the distribution unit is configured to distribute the area image at the time specified by the user to the user terminal device.
  • the area image is a moving object such as a person removed, privacy can be protected. Further, among the browsing still images that are sequentially generated in the facility imaging device, only the still images for browsing at a predetermined timing are transmitted, so that the temporally continuous captured images (moving images) are transmitted or sequentially generated. The traffic load on the network can be improved as compared with the case where all of the browsing still images to be transmitted are transmitted. Thereby, the facility operation support apparatus can efficiently collect the area image in which privacy is protected.
  • An eighteenth disclosure is a user terminal device that displays a screen based on information distributed from a facility management support device that supports a business of a user who operates a facility that provides goods or services to a user.
  • a browsing screen including a facility-specific image list in which area images for each facility related to a common area are arranged together with a facility name and an area selection menu for changing the area in the facility-specific image list is displayed.
  • the nineteenth disclosure is a facility management support method for supporting a user's operation of a facility that provides a user with an article or service by an information processing device, and the information processing device is an area of each area in the facility.
  • the user generates a browsing screen that stores images, and includes a facility-specific image list in which area images for each facility related to a common area are arranged together with facility names, and an area selection menu for changing the area in the facility-specific image list.
  • a configuration for distribution to a terminal device is adopted.
  • FIG. 1 is an overall configuration diagram of a facility management support system according to the present embodiment.
  • This facility management support system is constructed for retail chain stores such as convenience stores, and includes a camera (facility imaging device) 1 provided for each of a plurality of stores (facility) and a cloud computer system 2. And a PC (user terminal device) 3 and a smartphone (user terminal device) 4.
  • the camera 1 is installed at an appropriate place in the store and images the inside of the store.
  • the camera 1 is connected to a closed network such as a VLAN (Virtual Local Area Network) via an in-store network and a router 11.
  • VLAN Virtual Local Area Network
  • the cloud computer system 2 includes a recording server (facility image collection device, image storage unit, information processing device) 21, a management server (management unit, information processing device) 22, and a distribution server (distribution unit, information processing device) 23. It is equipped with.
  • the recording server 21, the management server 22, and the distribution server 23 are connected to each other via a cloud LAN.
  • the cloud LAN is connected to the closed network via the router 24.
  • the distribution server 23 is connected to the Internet via the firewall 25.
  • the recording server 21 acquires images stored in the store from the camera 1 and accumulates them.
  • the sales floor image for each sales floor (area) is extracted from the still image for browsing acquired from the camera 1 and stored.
  • the management server 22 manages a sales floor image, information about a user and a store, a report input by the user, information about a topic, and the like using a database.
  • the distribution server (Web server) 23 generates and distributes a screen viewed by the user on the PC 3 or the smartphone 4, and acquires information input by the user on the screen.
  • the PC 3 and the smartphone 4 are operated by a user such as a supervisor, a store owner, or a store manager, and can view a screen distributed from the distribution server 23 with a Web browser.
  • the delivery server 23 can be accessed from PC3 or the smart phone 4 in arbitrary places.
  • FIG. 2 is a plan view of the store explaining the store layout and the installation status of the camera 1.
  • the store has an entrance, a display shelf, a cashier counter, and cooking utensils.
  • Display shelves are divided into different types of products such as fast food (FF), cooked rice (rice balls, bento boxes, sushi, etc.), bakery, desserts, drinks, processed foods, sundries, fresh foods, magazines, and newspapers. Yes.
  • the cooking utensils cook fast food such as Karaage in the store, and a fast food display shelf (FF case) is installed next to the cashier counter.
  • the customer enters the store from the entrance, moves through the passage between the display shelves, finds the desired product, and goes to the checkout counter with the product and pays at the checkout counter (payment). After exiting, exit from the entrance.
  • a plurality of cameras 1 for shooting the inside of the store are installed.
  • the camera 1 is installed at an appropriate position on the ceiling in the store.
  • an omnidirectional camera having a 360-degree shooting range using a fisheye lens is adopted as the camera 1, and a product displayed on a display shelf or the like can be shot by the camera 1. it can.
  • FIG. 3 is a block diagram illustrating a schematic configuration of the camera 1, the recording server 21, the management server 22, and the distribution server 23.
  • the camera 1 includes an imaging unit 31, a processor 32, a storage device 33, and a communication unit 34.
  • the imaging unit 31 includes an image sensor, and sequentially outputs captured images (frames) that are temporally continuous, so-called moving images.
  • the processor 32 performs image processing on the captured image, generates a processed image, and outputs the processed image.
  • the storage device 33 stores a program executed by the processor 32 and a captured image output from the imaging unit 31.
  • the communication unit 34 transmits the processed image output from the processor 32 to the recording server 21 via the network.
  • the processor 32 every time a captured image is input from the image capturing unit 31, the processor 32 updates the dominant image information and generates a still image for browsing (background image) from which a moving object is removed as a processed image.
  • a known background image generation technique can be used. For example, when sequentially captured images are sequentially input, the luminance of each pixel in the captured image corresponding to 30 frames is collected in the most recent predetermined sampling period (for example, 5 minutes) and approximated to a normal distribution Generating a luminance histogram for each pixel and accumulating color information in a predetermined range ( ⁇ 3 ⁇ ) in the luminance histogram, thereby obtaining dominant image information in units of pixels and generating a background image. This can be used as a still image for browsing.
  • sampling period may be set appropriately by the user in an appropriate sampling period in which a person is not reflected.
  • a color having the highest frequency is selected from a plurality of captured images within a predetermined period in the past (for example, 5 minutes). At this time, the color of the pixel changes in the moving image area. As a result, a background color having a high dominance rate is selected, and a still image for browsing (background image) from which a moving object is removed can be obtained.
  • a background color having a high dominance rate is selected, and a still image for browsing (background image) from which a moving object is removed can be obtained.
  • the moving object is a person, there is even a slight movement. Therefore, when the moving object is stationary for a long time, a person-like image is displayed in a blurred state, so that privacy can be protected.
  • the recording server 21 periodically sends an image transmission request to the camera 1 at a predetermined timing (for example, every 15 minutes), and the communication unit 34 of the camera 1 transmits an image from the recording server 21.
  • the still image for browsing at that time is transmitted.
  • a still image for browsing is transmitted from the communication unit 34 to the recording server 21, it may be transmitted via a mobile router or the like (not shown).
  • the browsing still image is updated as needed every time a captured image that is continuous in time is input in the processor 32, and the browsing still image that is updated as needed is transmitted at a predetermined timing.
  • the recording server 21 includes a processor 41, a storage device 42, and a communication unit 43.
  • the communication unit 43 transmits / receives necessary information to / from the camera 1, the management server 22, and the distribution server 23. For example, an image transmission request is periodically transmitted to each camera 1 at a predetermined timing (for example, every 15 minutes), and a still image for browsing transmitted from each camera 1 is received in response to the image transmission request.
  • the storage device 42 stores browsing still images for each camera 1 received by the communication unit 43 and programs executed by the processor 41.
  • the processor 41 performs image processing on the still image for browsing (omnidirectional image) acquired from the camera 1.
  • the viewing still image that is an omnidirectional image is equally divided (for example, divided into four images) so as to become the sales floor image of each sales floor, that is, the sales floor image of each sales floor is cut out (extracted) from the captured image. ).
  • the processor 41 generates a thumbnail image obtained by reducing the original image of the sales floor image. Sales floor images (original images and thumbnail images) are stored in the storage device 42. Further, the processor 41 controls the timing for acquiring the browsing still image from the camera 1.
  • the processor 41 performs division processing of the sales floor image.
  • the processor 32 of the camera 1 transmits the sales floor image of each sales floor to the recording server 21 in a state where the sales floor image is extracted and stores it in the storage device 42. You may do it.
  • the communication unit 43 if acquisition of the still image for browsing from the camera 1 fails at a predetermined image acquisition timing based on the control of the processor 41, acquisition of the still image for browsing is performed during the period until the next image acquisition timing. Until it succeeds, a retry is repeated to acquire still images for browsing. Thereby, although some time difference arises, the still image for browsing for every predetermined timing can be acquired without omission.
  • the management server 22 includes a processor 51, a storage device 52, and a communication unit 53.
  • the processor 51 executes processing for managing information related to sales floor images (such as file names and storage paths), information related to users and stores, information related to reports and topics input by the user, and the like using a database.
  • the storage device 52 stores information related to the database and programs executed by the processor 51.
  • the communication unit 53 transmits / receives necessary information to / from the recording server 21 and the distribution server 23. For example, information related to the sales floor image stored in the recording server 21 is received from the recording server 21, and information related to reports and topics input by the user is received from the distribution server 23.
  • the distribution server 23 includes a processor 61, a storage device 62, and a communication unit 63.
  • the processor 61 executes a process of generating a screen viewed by the user on the PC 3 or the smartphone 4.
  • the storage device 62 stores a program executed by the processor 51.
  • the communication unit 63 transmits / receives necessary information to / from the recording server 21 and the management server 22. For example, the screen information generated by the processor 61 is distributed to the PC 3 or the smartphone 4, and information input by the user on the PC 3 or the smartphone 4 is received.
  • FIG. 4 is an explanatory diagram showing a transition state of screens generated by the distribution server 23 and displayed on the PC 3.
  • a login screen is displayed.
  • user authentication is performed with a user ID and password, and when the user ID and password are entered on the login screen and the user authentication is successful, a store comparison screen (see FIG. 5) is displayed as the top screen. .
  • a message display screen for displaying a message to that effect is displayed.
  • a topic display screen (see FIG. 19) is displayed.
  • the screen On the store comparison screen (see FIG. 5), it is possible to compare the status of sales floors with respect to a common sales floor.
  • the screen changes to a sales floor list confirmation screen (see FIG. 6).
  • the sales floor list confirmation screen On this sales floor list confirmation screen, the status of each sales floor in the selected store can be confirmed.
  • the screen transits to a designated time confirmation screen (see FIG. 7).
  • the sales floor conditions can be compared between different days for the selected sales floor.
  • the screen When a date is selected on this designated time confirmation screen, the screen changes to an all-day confirmation screen (see FIG. 8). On this all-day confirmation screen, it is possible to confirm the status of the sales floor at each time of the entire day on the selected date.
  • This store comparison screen sales floor list screen, specified time screen, and all-day confirmation screen, a plurality of sales floor images extracted based on the display conditions of each screen are displayed, and the status of the sales floor can be confirmed by this sales floor image.
  • This store comparison screen, sales floor list screen, designated time screen, and all-day confirmation screen are collectively referred to as a monitoring screen.
  • an enlarged image display screen pops up.
  • a high-resolution sales floor image is displayed in an enlarged manner, and the status of the sales floor can be confirmed in detail.
  • the screen changes to a store-specific image display screen (see FIG. 10).
  • the store floor images of the stores are displayed side by side, and the store floor image displayed on the enlarged image display screen can be changed to that of another store.
  • image editing is instructed on the enlarged image display screen, a transition is made to the enlarged image editing screen (see FIG. 11). On this enlarged image editing screen, it is possible to draw on the sales floor image by handwriting input.
  • the screen changes to a report input screen (see FIG. 12).
  • a report input screen On this report input screen, items related to the report can be input.
  • transition to the report input screen can also be made by selecting report input in the main menu of the monitoring screen.
  • a sub menu is displayed.
  • the user setting screen see FIG. 17
  • topic setting screen see FIG. 18
  • a password change screen pops up.
  • FIG. 5 is an explanatory diagram showing a store comparison screen.
  • the store comparison screen includes a main menu 71, a date and time input unit 72, a site map display unit 73, a selection menu display unit 74, and an image list display unit 75.
  • one of top, monitoring, report list, report input, setting, and logout can be selected (input by clicking or tapping).
  • the screen changes to the top screen.
  • the store comparison screen is the top screen, and if the currently opened monitoring screen is other than the store comparison screen, that is, if it is a sales floor list confirmation screen, a specified time confirmation screen, or an all-day confirmation screen, the store comparison screen is displayed. Transition. At this time, the display date / time returns to the current time, more precisely to the latest image acquisition timing (image acquisition time).
  • the display switches to the store comparison screen, which is the top screen of the monitoring screen. At this time, the display date returns to the current time (latest image acquisition time).
  • the report list screen (see FIG. 13) is displayed.
  • a report input screen (see FIG. 12) is popped up.
  • a submenu will be displayed.
  • user setting, topic setting, or password change can be selected.
  • a user setting screen pops up.
  • topic setting is selected in the submenu
  • a topic setting screen is popped up.
  • the topic setting screen is displayed only when the user is an administrator.
  • password change is selected in the submenu, a password change screen (not shown) pops up.
  • the date input part 72 is provided with a NOW button 81, a date change part 82, and a time change part 83.
  • the NOW button 81 changes the display date / time of the sales floor image in the image list display section 75 to the current time (latest image acquisition time).
  • this NOW button is operated, a sales floor image of the current date and time is displayed.
  • the current sales floor image can be quickly displayed.
  • the date changing unit 82 changes the display date of the sales floor image of the image list display unit 75, and the sales floor image of the selected date is displayed on the image list display unit 75.
  • the date change unit 82 is provided with a date display unit 82a and left and right arrow buttons 82b and 82c.
  • the date currently set is displayed in the date display part 82a.
  • a calendar screen (not shown) is displayed, and a date can be selected on the calendar screen.
  • the arrow buttons 82b and 82c perform date advancement.
  • the left arrow button 82b is operated, the display date / time is changed one day ago, and when the right arrow button 82c is operated, the display date / time is changed one day later.
  • the time changing unit 83 changes the display time of the sales floor image in the image list display unit 75, and the sales floor image at the selected time is displayed on the image list display unit 75.
  • the time changing unit 83 includes a time display unit 83a, left and right arrow buttons 83b and 83c, and a time bar 83d.
  • the currently set time is displayed.
  • the arrow buttons 83b and 83c perform time advance corresponding to the image acquisition timing (for example, every 15 minutes).
  • the display time is the time of the previous timing (for example, 15).
  • the display time is changed to the time of the next timing (for example, 15 minutes later).
  • the time bar 83d is for selecting a time zone within business hours (24 hours for all day business), and a plurality of points representing each time zone are displayed side by side in the time axis direction. , Change to the time of that point. The display color changes at the point in the selected time zone.
  • the time bar 83d is not displayed on the designated time confirmation screen (see FIG. 7) or the all-day confirmation screen (see FIG. 8).
  • the site map display unit 73 displays a screen transition state.
  • the site map display unit 73 displays buttons of “all stores”, “store names”, “sales floor names”, and “details” in accordance with the monitoring screen (see FIGS. 5 to 8).
  • each button When each button is operated, the corresponding monitoring screen is displayed. In other words, when the “All Stores” button is operated, a transition is made to the store comparison screen (see FIG. 5).
  • the screen When the “Store Name” button is operated, the screen changes to a sales floor list confirmation screen (see FIG. 6).
  • the “sales floor name” button When the “sales floor name” button is operated, the screen transits to a designated time confirmation screen (see FIG. 7).
  • the “details” button When the “details” button is operated, a transition is made to an all-day confirmation screen (see FIG. 8).
  • the name of the currently selected store is displayed on the “Store Name” button, and the name of the currently selected store is displayed on the “Store Name” button.
  • the image list display section 75 is provided with a plurality of sales floor image display sections 91 arranged vertically and horizontally, and an explanation display section 92 disposed below the sales floor image display section 91.
  • the sales floor image display unit 91 displays a sales floor image (a low-resolution thumbnail image or a high-resolution original image).
  • FIGS. 5 to 8 four sales floor images are displayed side by side in the horizontal direction.
  • the arrangement number of the sales floor image in the vertical direction is arbitrary, and if it cannot fit on one screen, it may be scrolled with a vertical scroll bar.
  • the image list display unit 75 displays a store-specific image list 93 in which store images for each store related to a common store are arranged together with store names.
  • the sales floor image display unit 91 displays the sales floor image of each store, and the explanation display unit 92 displays the store name.
  • this store-specific image list 93 sales floor images of all stores related to the group to which the user belongs are displayed.
  • the sales floor image of the current date and time is displayed.
  • the stores directly handled by the user are preferentially displayed.
  • the sales floor images are arranged in the right order from the left end (upper left) of the uppermost stage, and are then arranged in the right direction from the left end of the lower stage, and are arranged in the same order.
  • This store-specific image list 93 enables comparison of store conditions between stores for a common store.
  • a sales floor selection menu 94 is displayed on the selection menu display section 74.
  • the sales floor selection menu 94 displays all sales floors related to the group to which the user belongs.
  • the sales floor image in the store-specific image list 93 is switched to that of the selected sales floor.
  • the sales floor of the store-specific image list 93 By changing the sales floor of the store-specific image list 93 using the sales floor selection menu 94, the situation of different sales floors can be compared among a plurality of stores. Thereby, the shop which should be noted about various sales floors can be found easily.
  • this store comparison screen when a store floor image in the store-specific image list 93 is selected, an enlarged image display screen (see FIG. 9) related to the selected store is displayed in a hop-up manner. Further, when the store name of the store-specific image list 93 is selected, the screen changes to a sales floor list confirmation screen (see FIG. 6) regarding the selected store.
  • the main menu 71 and date / time input unit 72 are common to other monitoring screens (sales list confirmation screen, designated time confirmation screen, all-day confirmation screen) described below.
  • FIG. 6 is an explanatory diagram showing a sales floor list confirmation screen.
  • the image list display section 75 displays a sales floor image list 95 in which the sales floor images of all sales floors in the store selected on the store comparison screen are arranged together with the sales floor names.
  • the sales floor image display unit 91 displays the sales floor image of each sales floor, and the explanation display unit 92 displays the sales floor name.
  • the status of each sales floor in the store selected on the store comparison screen can be confirmed from the image list 95 by sales floor.
  • a store selection menu 96 is displayed on the selection menu display section 74.
  • this store selection menu 96 all stores related to the group to which the user belongs are displayed.
  • the sales floor image in the sales floor image list 95 is switched to that of the selected store.
  • this sales floor list confirmation screen when a sales floor image of the sales floor image list 95 is selected, an enlarged image display screen (see FIG. 9) relating to the selected sales floor is displayed in a hop-up manner. Further, when the sales floor name in the sales floor image list 95 is selected, the screen transits to a designated time confirmation screen (see FIG. 7) regarding the selected sales floor.
  • FIG. 7 is an explanatory diagram showing a designated time confirmation screen.
  • the image list display unit 75 displays a daily image list 97 in which sales floor images for each day within a predetermined period related to the sales floor selected on the sales floor list confirmation screen are arranged.
  • the sales floor image display unit 91 displays the sales floor image of each sales floor, and the explanation display unit 92 displays the time.
  • the date is displayed on the date display unit 99 provided at the top.
  • the sales day images at a predetermined display time on a specified date and a predetermined number of days at predetermined intervals from that date are displayed.
  • the sales floor image for four days including the designated date is displayed.
  • sales floor images at the same display time on each day are displayed side by side.
  • the display time is set in advance on the user setting screen (see FIG. 5).
  • a display interval selection unit 76 for selecting an interval of dates displayed in the daily image list 97 is provided.
  • a weekly interval or a daily interval can be selected.
  • the sales day images on the same day of the week as the specified date one week before, two weeks before, and three weeks before, that is, the past one week, two weeks, and three weeks before the specified date are displayed.
  • sales floor images for the past three days from the specified date are displayed.
  • the weekly interval is selected, the designated date is September 11 (Friday), the day, September 4 one week before, and August 28 two weeks ago The sales floor image of each day on August 21 three weeks ago is displayed. Also, if you select the day interval, September 11 (Friday), the designated date, September 10 (Thursday) one day before, September 9 (Wednesday) two days ago, September 8 three days ago The sales floor image of each day (Tue) is displayed.
  • This daily image list 97 allows the status of the sales floor to be compared between different days.
  • the store selection menu 94 is displayed on the selection menu display unit 74 as in the store comparison screen (see FIG. 5).
  • the sales floor image in the daily image list 97 is switched to that of the selected sales floor.
  • FIG. 8 is an explanatory diagram showing an all-day confirmation screen.
  • the image list display unit 75 displays a time-based image list 98 in which sales floor images at all times on the date selected on the designated time confirmation screen are arranged in time series.
  • the sales floor image display unit 91 displays the sales floor image of each sales floor, and the explanation display unit 92 displays the time.
  • the all-day confirmation screen is provided with a display interval selection unit 77 for selecting an interval of time displayed in the image list 98 by time.
  • a display interval selection unit 77 for selecting an interval of time displayed in the image list 98 by time.
  • any of 15 minutes, 30 minutes, 1 hour, and 2 hours can be selected.
  • sales floor images are displayed at 15-minute intervals, 30-minute intervals, 1-hour intervals, and 2-hour intervals.
  • This time-based image list 98 allows the status of the sales floor on the day of interest to be confirmed in all time zones of the day.
  • a sales floor selection menu 94 is displayed on the selection menu display portion 74 as in the store comparison screen (see FIG. 5).
  • the sales floor image in the time-based image list 98 is switched to that of the selected sales floor.
  • each screen is browsed while narrowing down the store, the sales floor, and the date sequentially on the four monitoring screens, that is, the store comparison screen, the sales floor list confirmation screen, the specified time confirmation screen, and the all-day confirmation screen.
  • the store comparison screen is first displayed immediately after logging in.
  • FIG. 9 is an explanatory diagram showing an enlarged image display screen.
  • the enlarged image display screen shown in FIG. 9 is displayed as a hop-up display.
  • the enlarged image display screen includes an enlarged image display unit 101, an explanation display unit 102, a store button 103, an edit button 104, and left and right arrow buttons 105a and 105b.
  • the enlarged image display unit 101 displays an enlarged sales floor image (high-resolution original image).
  • the explanation display unit 102 displays the store name, the sales floor name, and the date and time.
  • This zoomed image display screen makes it possible to observe in detail the status of the sales floor of the store of interest.
  • a store-specific image display screen (see FIG. 10) is displayed in a pop-up manner.
  • the edit button 104 is operated, a transition is made to an enlarged image edit screen (see FIG. 11).
  • the arrow buttons 105a and 105b perform time feeding corresponding to image acquisition timing (for example, every 15 minutes).
  • the display time is changed to the time of the previous timing (for example, 15 minutes before)
  • the right arrow button 105b is operated, the display time is changed to the time of the next timing (for example, 15 minutes later).
  • FIG. 10 is an explanatory diagram illustrating an image display screen for each store when viewing an enlarged image.
  • This store-specific image display screen includes an image list display unit 111, left and right arrow buttons 112a and 112b, and a store button 103.
  • the store image of each store is displayed side by side with the store name.
  • the sales floor image displayed here relates to the same sales floor as the enlarged image display screen of the transition source in all stores related to the group to which the user belongs.
  • the arrow buttons 112a and 112b are for displaying store floor images that do not fit in the image list display unit 111.
  • the store-specific image display screen is closed and the screen returns to the enlarged image display screen (see FIG. 9), and the enlarged sales floor image of the selected store is displayed on the enlarged image display screen.
  • the store button 103 is selected, the store-by-store image display screen is closed and the screen is returned to the enlarged image display screen (see FIG. 9), and the sales floor image of the original store is displayed on the enlarged image display screen.
  • FIG. 11 is an explanatory diagram showing an enlarged image editing screen.
  • the enlarged image editing screen includes an enlarged image display unit 121, a handwriting tool selection unit 122, an upload button 123, and a close button 124.
  • the enlarged image display unit 121 displays an enlarged sales floor image (high-resolution original image) as in the enlarged image display screen (see FIG. 9).
  • the handwriting tool selection unit 122 is provided with a pencil button 125, an eraser button 126, and an initialization button 127.
  • a line can be drawn on the enlarged sales floor image of the enlarged image display unit 121.
  • the drawing color can be selected from a plurality of colors (for example, red, blue, yellow).
  • the eraser button 126 is selected, the drawn line can be erased.
  • the initialization button 127 is selected, all drawn lines can be erased and the state before editing can be restored.
  • This enlarged image editing screen allows hand drawing on the enlarged sales floor image. Thereby, the notable part in the enlarged sales floor image can be indicated by the drawn image 129 by handwriting input.
  • FIG. 12 is an explanatory diagram showing a report input screen.
  • the screen changes to a report input screen shown in FIG.
  • a report input is selected from the main menu 71 on the monitoring screen (see FIGS. 5 to 8), this report input screen is popped up.
  • This report input screen is used by a user (report creator) to input information about the report.
  • the report input screen includes a sharing destination selection unit 131, a sharing source selection unit 132, and a captured image selection unit 133.
  • a classification selection unit 134, an evaluation input unit 135, a subject input unit 136, a comment input unit 137, a send button 138, and a close button 139 are provided.
  • the sharing destination selection unit 131 is used by the user to select a report sharing destination (distribution destination).
  • this sharing destination selection unit 131 stores and managers (such as supervisors) related to the group to which the user belongs are displayed as sharing destinations, and a check box is provided for each sharing destination. Can be selected individually. Also, an “all” check box is provided, and all stores and managers can be selected at once.
  • the sharing source selection unit 132 is used by the user to select a store name that is a report sharing source (a store name that is a report target).
  • a store name that is a report target a store name that is a report target.
  • the captured image selection unit 133 is for the user to select a captured image file to be attached to the report when the report input screen is selected from the main menu 71 and the report input screen is displayed.
  • the picked-up image which the user imaged the sales floor with the smart phone 4 etc. beforehand is transferred to PC3.
  • the sales floor image selected here is uploaded to the distribution server 23 together with the input information. Note that when the transition is made from the enlarged image editing screen, the sales floor image edited on the enlarged image editing screen is automatically set and reflected in the attached image, so there is no need to select a file.
  • the camera 1 outputs an image in which the customer's privacy is protected by the moving object removal process, but the image taken by the user with the smartphone 4 or the like cannot protect the customer's privacy. Therefore, the face detection process may be executed in the PC 3, and if a face is detected here, a warning that the upload cannot be performed may be output. In this case, the captured image can be uploaded if the user performs the process of painting the image area of the customer with the image editing application of the smartphone 4 or the PC 3. In the PC 3, masking processing for covering the detected face area may be automatically performed.
  • the classification selection unit 134 selects a report classification.
  • a report report other than evaluation
  • evaluation or any other can be selected.
  • the evaluation input unit 135 is used when the user inputs an evaluation result, and is displayed when the classification selection unit 134 selects an evaluation. Here, it is possible to select either “Like” or “No” that is a good or bad evaluation.
  • the subject input unit 136 is used to input the subject of the report.
  • the comment input unit 137 is for inputting a comment (message) to be notified to the sharing destination user.
  • the user inputs information to be shared with other users, such as information regarding evaluations, reports, and other communication items for the store, or information regarding improvement measures performed at the store. For example, when the classification of the report is evaluation, a comment for pointing out and instructing improvement items is input.
  • the input information uploaded to the distribution server 23 is registered in the report management information (group member report list) in the management server 22.
  • the uploaded captured image is stored in the recording server 21 and registered in the report management information of the management server 22.
  • the management server 22 manages the sales floor image displayed on the enlarged image display screen, the drawing information by handwriting input, and the captured image selected by the user in association with the input information on the report input screen.
  • the close button 139 When the close button 139 is operated, the report input screen is closed and the transition source monitoring screen (see FIGS. 5 to 8) is returned.
  • FIG. 13 is an explanatory diagram showing a report list screen.
  • This report list screen displays a summary of reports specified as sharing destinations by users (report viewers) who have logged into the distribution server 23 in the PC 3.
  • a report list display unit 141 In this report list screen, a report list display unit 141, an update unit 142, and a deletion unit 143 are provided.
  • the report list display unit 141 is provided with a summary display field 145 for each report.
  • this summary display field 145 information on each item entered on the report input screen (see FIG. 12), that is, each item of classification, evaluation, share source store (store targeted for report), subject, and upload date / time. Information about is displayed.
  • the unread report is highlighted by changing the thickness and display color of the summary display field 145 so that the unread report can be easily distinguished from the read report.
  • the report list display unit 141 can sort (rearrange) each item.
  • the update unit 142 updates the report displayed on the report list display unit 141 to the latest state.
  • the deletion unit 143 deletes the report in the report list display unit 141.
  • check boxes are provided for each comment. When a report is selected with this check box and the deletion unit 143 is operated, the selected report is deleted.
  • a detail display button 146 is provided for each comment.
  • the report display screen (see FIG. 14) in the detail display state is displayed.
  • FIG. 14 is an explanatory diagram showing a report list screen in a detailed display state.
  • the report list screen in the detailed display state displays the detailed contents of the report, and in the report list display section 141, the detail display section 151 is displayed under the summary display column 145 of the selected report.
  • the detail display unit 151 is provided with an image display unit 152, an imaging date display unit 153, and a comment display unit 154.
  • the sales floor image attached to the report is the same as this.
  • the store images at the latest times of the store and the sales floor are displayed side by side, so that changes in the past and current sales floor conditions can be grasped.
  • a report input on the report input screen transitioned from the monitoring screen see FIGS. 5 to 8
  • only the selected captured image is displayed.
  • the imaging date and time display unit 153 displays the imaging date and time of the sales floor image.
  • a transition is made to a store comparison screen (see FIG. 5) regarding the imaging date / time of the sales floor image.
  • comment display unit 154 comments input on the report input screen (see FIG. 12) are displayed.
  • FIG. 15 is an explanatory diagram showing an enlarged image display screen when viewing a report.
  • the enlarged image display screen is provided with an enlarged image display portion 161, an explanation display portion 162, and left and right arrow buttons 163a and 163b.
  • the enlarged image display unit 161 displays an enlarged sales floor image.
  • a drawing image 129 by handwritten input is also displayed on the sales floor image.
  • the explanation display unit 162 displays the store name, the sales floor name, and the date and time.
  • the arrow buttons 163a and 163b are used to switch between two sales floor images displayed on the detail display section 151 of the report list screen in the detailed display state (see FIG. 14). When the left arrow button 163a is operated, the arrow buttons 163a and 163b are attached to the report. The displayed sales floor image is displayed, and when the right arrow button 163b is operated, the current sales floor image is displayed.
  • FIG. 16 is an explanatory diagram showing a message display screen.
  • This message display screen is displayed as a hop-up on the monitoring screen (store comparison screen in FIG. 5) immediately after logging in.
  • a message (alert) to that effect is displayed on the message display unit (alert box) 171.
  • the user can recognize that there is an unread report and that the password has expired.
  • FIG. 17 is an explanatory diagram showing a user setting screen.
  • the user setting screen is provided with a display time setting unit 181, an image quality setting unit 182, a setting button 183, and a cancel button 184.
  • the display time setting unit 181 sets the time of the sales floor image to be displayed on the designated time confirmation screen (see FIG. 7).
  • a plurality of display times can be set. Normally, 7:00, 14:00, and 23:00, which are important time zones in the store, are set as display times in the initial state.
  • the image quality setting unit 182 switches the image quality of the sales floor image (excluding the enlarged image display screen) displayed on the image list display unit 75 of the monitoring screen (see FIGS. 5 to 8).
  • the high image quality mode is turned off, a low resolution thumbnail image is displayed.
  • the high image quality mode is turned on, a high resolution original image is displayed.
  • FIG. 18 is an explanatory diagram showing a topic setting screen.
  • This topic setting screen is used to set the topic displayed on the topic display screen (see FIG. 19) displayed immediately after login. This topic can be set only when the user is an administrator.
  • the topic setting screen includes an invalid setting unit 191, a title input unit 192, an organization selection unit 193, and a topic content input unit 194.
  • the invalidity setting unit 191 is provided with a check box, and the topic display can be invalidated here.
  • the title input unit 192 inputs a topic title.
  • the organization selection unit 193 selects a group for which a topic is to be displayed, and selects a group from a pull-down menu.
  • the topic content input unit 194 inputs the content of the topic, that is, a message that the administrator notifies the user belonging to the group.
  • FIG. 19 is an explanatory diagram showing a topic display screen.
  • the topic display screen includes an organization display unit 201, a title display unit 202, a topic content display unit 203, a redisplay setting unit 204, and an OK button 205.
  • the organization display unit 201 displays a group that is a target of a topic.
  • the title display unit 202 displays the title of the topic.
  • the topic content display unit 203 displays the content of the topic, that is, a message that the administrator notifies the user belonging to the group.
  • the re-display setting unit 204 is provided with a check box, and the re-display of the topic display screen at the time of login can be stopped in a predetermined stop period. In the unchecked state, the topic display screen is displayed every time the user logs in. If the administrator updates the topic during the suspension period, a topic display screen is displayed.
  • the topic display screen is closed.
  • a topic display screen related to the next group is displayed.
  • FIG. 20 is an explanatory diagram showing a monitoring screen (store comparison screen) displayed on the smartphone 4.
  • the monitoring screen (store comparison screen) includes a main menu display button 211, a top button 212, a first selection menu display button 213, a NOW button 214, a date change button 215, and a second selection menu display.
  • a button 216, a site map display unit 217, and an image list display unit 218 are provided.
  • the main menu display button 211 When the main menu display button 211 is operated, the main menu is displayed. From this main menu, any of monitoring, report list, report input, user setting, topic setting, password change, and logout can be selected.
  • a selection menu corresponding to the monitoring screen (store comparison screen, sales floor list confirmation screen, designated time confirmation screen, all-day confirmation screen) is displayed.
  • This selection menu corresponds to the selection menu display unit 74 on the monitoring screen (see FIGS. 5 to 8) of the PC 3, and the selection items differ depending on the monitoring screen.
  • the characters “sales floor” are displayed on the selection menu display button 213, and when the selection menu display button 213 is operated, the sales floor selection menu is displayed.
  • the sales floor image for each store displayed on the image list display unit 218 can be changed to another sales floor.
  • the characters “Store” are displayed on the selection menu display button 213.
  • the selection menu display button 213 is operated, the store selection menu is displayed and the sales floor displayed on the image list display unit 218. Each store image can be changed to another store.
  • the first selection menu display button 213 is also displayed on the report list screen.
  • the word “operation” is displayed on the selection menu display button 213, and when the selection menu display button 213 is operated, an operation selection menu is displayed.
  • this operation selection menu either update or deletion can be selected, and the report displayed on the report list screen can be updated to the latest state, or the report displayed on the report list screen can be deleted. Can do.
  • the NOW button 214 can change the display date and time to the current time (latest image acquisition time) in the same manner as the monitoring screen of the PC 3 (see FIGS. 5 to 8).
  • a date can be selected by displaying a calendar, as in the monitoring screen of the PC 3 (see FIGS. 5 to 8).
  • a selection menu corresponding to the monitoring screen (store comparison screen, sales floor list confirmation screen, designated time confirmation screen, all-day confirmation screen) is displayed.
  • This selection menu has different selection items depending on the monitoring screen.
  • the currently set display time is displayed on the second selection menu display button 216, and when the second selection menu display button 216 is operated, the time selection is performed.
  • a menu is displayed, and the display time can be changed using this time selection menu.
  • the currently set display interval weekly interval, daily interval
  • the display interval is displayed on the second selection menu display button 216, and when the second selection menu display button 216 is operated, the display is performed.
  • An interval selection menu is displayed, and the display interval can be changed using this display interval selection menu.
  • the currently set display interval (15 minutes, 30 minutes, 1 hour, 2 hours) is displayed on the second selection menu display button 216, and the second selection menu display button 216 is displayed.
  • a display interval selection menu select box
  • the display interval can be changed using this display interval selection menu.
  • the site map display unit 217 displays the screen transition status in the same manner as the PC 3 monitoring screen (see FIGS. 5 to 8).
  • the monitoring screen (store comparison screen, sales floor list confirmation screen, designated time confirmation screen) , “All stores”, “Store name”, “Sales floor name”, and “Details” buttons are displayed in response to the all-day confirmation screen).
  • the corresponding monitoring screen is displayed.
  • the image list display unit 218 includes a plurality of sales floor image display units 221 arranged in the vertical and horizontal directions, and an explanatory display arranged below the sales floor image display unit 221. Part 222 is provided.
  • the sales floor image display unit 221 displays a sales floor image.
  • the store name is displayed in the case of the store comparison screen
  • the sales floor name is displayed in the case of the sales floor list confirmation screen
  • the time is displayed in the case of the designated time confirmation screen and the all-day confirmation screen.
  • two sales floor images are displayed side by side in the horizontal direction.
  • the arrangement number of the sales floor image in the vertical direction is arbitrary, and if it cannot fit on one screen, it may be scrolled with a vertical scroll bar.
  • the screen transition on the smartphone 4 is the same as that on the PC 3.
  • the display content of the screen displayed with the smart phone 4 is substantially the same as the case of PC3, it is good to perform a some change because a screen becomes small.
  • the time bar may be omitted from the monitoring screen of the smartphone 4.
  • the screen transitions to another screen, and the sales floor image is displayed together with the contents of the selected report (date and time, store name, subject, and evaluation) on the other screen. Good.
  • FIG. 21 is an explanatory diagram showing an enlarged display state of the sales floor image on the monitoring screen.
  • a user setting screen similar to the user setting screen (see FIG. 17) in the case of the PC 3 is displayed, and the high resolution mode can be selected on the user setting screen.
  • a high resolution sales floor image original image is displayed on the monitoring screen.
  • the monitoring screen can be enlarged and displayed by a pinch-out operation (an operation to spread two fingers touching the screen).
  • a pinch-out operation an operation to spread two fingers touching the screen.
  • the sales floor image is displayed at a high resolution, it is possible to view a fine image even if it is enlarged.
  • another sales floor image can be browsed in an enlarged display by moving the screen by performing a scrolling operation (an operation of moving a finger touching the screen) in the enlarged display state.
  • the operation for enlarging and displaying the screen is not limited to pinch-out, and various known methods may be adopted.
  • a predetermined operation may be performed by tapping (touching the screen for a moment). It may be enlarged and displayed at a magnification.
  • the enlarged image display screen is not separately displayed by the operation of selecting the sales floor image, the status of the sales floor can be observed in detail by displaying the enlarged monitoring screen as it is. Operability can be improved.
  • the effect of such enlarged display is the same as in the case of PC3.
  • FIG. 22 is a block diagram illustrating a schematic configuration of a camera 221 and a recorder 231 according to a modification of the facility management support system.
  • the camera 221 is a so-called network camera (IP camera) that can be connected to the network, as in the above-described embodiment (see FIG. 1).
  • IP camera network camera
  • the camera 221 can output two systems. It is configured and connected to the recorder 231 via a dedicated communication cable (for example, a coaxial cable).
  • the recorder 231 is provided for crime prevention / disaster prevention purposes, and security is ensured.
  • the camera 221 includes an imaging unit 222, a processor 223, a storage device 224, and a communication unit 225.
  • the imaging unit 222 and the storage device 224 are the same as those in the above embodiment (see FIG. 3).
  • the processor 223 performs the moving object removal process (background image generation process) on the captured image output from the imaging unit 222 as in the above-described embodiment (see FIG. 1), but the unprocessed image output from the imaging unit 222
  • the processed image can be input to the communication unit 225 as it is.
  • the communication unit 225 is capable of outputting two systems, and transmits a still image for viewing from which moving objects have been removed to the recording server 21 via the closed network, and is used to process unprocessed images from which moving objects have not been removed.
  • the data is transmitted to the recorder 231 via a communication cable.
  • the recorder 231 includes a processor 232, a storage device 233, and a communication unit 234.
  • the communication unit 234 receives an unprocessed image transmitted from the camera 221.
  • the processor 232 performs control such that the unprocessed image received by the communication unit 234 is stored in the storage device 233.
  • the storage device 233 stores a program executed by the processor 232 and an unprocessed image received by the communication unit 234.
  • a large-capacity storage device such as a hard disk drive is employed so that a long-term image can be stored.
  • FIG. 23 is a block diagram illustrating a schematic configuration of a camera 241 and a recorder 251 according to a modification of the facility management support system.
  • FIG. 24 is a block diagram illustrating a schematic configuration of a camera 241 and an adapter 261 according to a modification of the facility management support system.
  • the camera 1 is a so-called network camera (IP camera) that can be connected to the network.
  • IP camera network camera
  • the camera 241 is a dedicated communication cable. It is connected to a recorder (facility image storage device) 251 or an adapter (facility image output control device) 261 via a coaxial cable (for example, a coaxial cable).
  • the recorder 251 and the adapter 261 are configured to be connectable to a network, and are connected to the recording server 21 via a closed network.
  • the camera 241 includes an imaging unit 242, a processor 243, a storage device 244, and a communication unit 245.
  • the imaging unit 242 and the storage device 244 are the same as those in the above embodiment (see FIG. 3).
  • the processor 243 does not have a function of moving object removal processing (background image generation processing), and causes the communication unit 245 to input an unprocessed image output from the imaging unit 242 as it is.
  • the communication unit 245 transmits the unprocessed image to the recorder 251 or the adapter 261 via a dedicated communication cable.
  • the recorder 251 illustrated in FIG. 23 includes a processor 252, a storage device 253, and a communication unit 254, as in the example illustrated in FIG. 22.
  • the moving object removal process (background image generation process) is performed on the unprocessed image received by the communication unit 254.
  • This moving object removal process is the same as the process performed by the processor 32 of the camera 1 in the above embodiment.
  • the communication unit 254 transmits the processed image generated by the processor 252 to the recording server 21.
  • the storage device 253 is the same as the example shown in FIG.
  • the adapter 261 shown in FIG. 24 includes a processor 262, a storage device 263, and a communication unit 264.
  • the communication unit 264 and the processor 262 are the same as the recorder 251 shown in FIG.
  • the storage device 263 stores a program executed by the processor 262, but unlike the recorder 251, the storage device 263 temporarily stores an unprocessed image for processing by the processor 262 and does not store a long-term image.
  • a small capacity storage device is employed.
  • the embodiment has been described as an example of the technique disclosed in the present application.
  • the technology in the present disclosure is not limited to this, and can be applied to embodiments in which changes, replacements, additions, omissions, and the like have been performed.
  • a retail store such as a convenience store
  • the present invention is widely applied to various facilities that provide users with goods and services such as financial institutions such as banks and accommodation facilities such as hotels. can do.
  • examples of the PC and the smartphone are shown as the user terminal device.
  • the user terminal device is not limited to this, and a tablet terminal is also possible.
  • the tablet terminal may display the same screen as the PC.
  • the cloud computer system 2 is configured to include the three information processing apparatuses, the recording server 21, the management server 22, and the distribution server 23.
  • the functions of each server are configured as one information processing apparatus. You may make it implement
  • the camera 1 is an omnidirectional camera having a 360-degree shooting range using a fisheye lens.
  • a camera having a predetermined angle of view a so-called box camera, may be used. Is possible.
  • the facility imaging device, the facility image collection device, the facility image storage device, and the facility image output control device improve the traffic load on the network when collecting images captured in a plurality of facilities, It has the effect of eliminating the risk of leaking unprocessed images and efficiently collecting privacy-protected images, and provides images taken inside the facility to the facility image collection device via the network Facility imaging device, facility image collection device that acquires and stores images taken inside the facility from the facility imaging device via the network, stores images output from the facility imaging device that images the inside of the facility, and displays the images on the network Facility image storage device that outputs to the facility image collection device, and facility image collection device connected to the facility image capture device that captures the inside of the facility It is useful as controlling the image output through the network facility image output control apparatus.
  • the facility operation support device, the user terminal device, and the facility operation support method according to the present disclosure allow multiple users such as supervisors and owners who manage multiple stores to be in the store even when the number of stores and the number of sales floors increase.
  • a facility that can efficiently check the situation from anywhere has the effect of rationally performing operations to improve store operations, and supports the operations of users who operate facilities that provide goods or services to users It is useful as an operation support device, a user terminal device, and a facility operation support method.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

店舗内の売場を撮像した画像を収集する際のネットワーク上のトラフィックの負荷を改善すると共に、未処理の画像が流出するリスクを解消して、プライバシーが保護された画像を効率よく収集でき、複数のユーザが店舗内の状況をどこからでも効率よく確認でき、店舗運営改善のための業務を合理的に行うことができるようにする。施設内を撮像して、時間的に連続する撮像画像を順次出力する撮像部(31)と、撮像画像に対して画像処理を実施して処理画像を出力するプロセッサ(32)と、処理画像をネットワークを介して録画サーバ(21)に送信する通信部(34)と、を備え、プロセッサ(32)は、撮像部(31)から撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を処理画像として生成し、通信部(34)は、閲覧用静止画像を所定のタイミングで送信するものとする。また、施設運営支援装置から閲覧画面をユーザ端末装置に配信して、その閲覧画面をユーザ端末装置に表示させるものとし、このユーザ端末装置の閲覧画面では、画像一覧表示部に、共通の売場に関する店舗ごとの売場画像を店舗名称とともに並べた店舗別画像一覧が表示され、選択メニュー表示部に、店舗別画像一覧における売場を変更する売場選択メニューが表示されるようにする。

Description

施設撮像装置、施設画像収集装置、施設画像蓄積装置、施設画像出力制御装置、施設運営支援装置、ユーザ端末装置、および施設運営支援方法
 本開示は、施設内を撮像した画像をネットワークを介して施設画像収集装置に提供する施設撮像装置、施設内を撮像した画像をネットワークを介して施設撮像装置から取得して蓄積する施設画像収集装置、施設内を撮像する施設撮像装置から出力される画像を蓄積するとともに画像をネットワークを介して施設画像収集装置に出力する施設画像蓄積装置、および施設内を撮像する施設撮像装置に接続されて施設画像収集装置へのネットワークを介した画像出力を制御する施設画像出力制御装置、物品または役務を利用者に提供する施設を運営するユーザの業務を支援する施設運営支援装置、ユーザ端末装置、および施設運営支援方法に関するものである。
 コンビニエンスストアなどの店舗においては、店舗内を撮影するカメラを設置して、そのカメラの映像で店舗内の状況を監視する監視システムが広く普及しているが、このような店舗に設置されたカメラで、陳列棚が配置されている売場を撮像して、その画像に基づいて、商品の陳列状況などの売場の実際の状況を監視するようにすると、商品管理作業について改善すべき事項を把握して改善処置を実施する業務を効率的に行うことができる。
 また、コンビニエンスストアのように多数の店舗を有する店舗運営システムでは、各店舗を総括する本部に所属するスーパーバイザーが、店舗を巡回しながら、店舗の状況を把握して、店長に対して指導や提案を行うようにしているが、近年、1人のスーパーバイザーが担当する店舗が増加し、また、各店舗の状況にもばらつきがあるため、各店舗を運営する業務をスーパーバイザーが効率よく行うことができる技術が望まれる。また、1人のオーナが多数の店舗を経営する場合もあり、このようなオーナにおいても、スーパーバイザーと同様に、店舗運営業務の効率化が望まれる。
 このようにカメラの画像を商品管理作業の改善に利用する場合、陳列棚の前に滞在する買い物客や店舗スタッフが遮蔽物となって、商品の陳列状況を画像から適切に把握することができない場合がある。そこで、このような問題を解決する技術として、従来、デジタルカメラによって所定の時間間隔で撮影された多数の静止画像に対して、監視対象を覆い隠す遮蔽物を除去する修正処理を施し、コンビニ店舗等における商品陳列棚のフェイスアップ状況を効率的に監視する技術が知られている(特許文献1参照)。
 また、スーパーバイザーや多店舗を経営するオーナが行う店舗運営業務に関連するものとして、従来、フランチャイズチェーン(FC)加盟店等の複数の店舗における内外の状況を監視カメラとマイクロホンにより遠隔監視し、これら監視カメラからの画像データとマイクロホンからの音声データに基づいて作成された店舗の経営上必要な各種情報を、経営指導情報としてFC本部等の本部にオンラインで提供する技術が知られている(特許文献2参照)。
 また、複数の売場の中からいずれかの売場を選択し、設定された日時における時間帯ごとの売場の映像の一覧と商品の売り上げデータとを表示し、時間帯ごとの売場の実情と、売り上げの推移を把握することができるようにした技術が知られている(特許文献3参照)。
特許第4456437号公報 特開2002-366621号公報 特許第5072985号公報
 本開示の施設撮像装置は、施設内を撮像した画像をネットワークを介して施設画像収集装置に提供する施設撮像装置であって、施設内を撮像して、時間的に連続する撮像画像を順次出力する撮像部と、撮像画像に対して画像処理を実施して処理画像を出力するプロセッサと、処理画像をネットワークを介して施設画像収集装置に送信する通信部と、を備え、プロセッサは、撮像部から撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を処理画像として生成し、通信部は、閲覧用静止画像を所定のタイミングで送信する構成とする。
 また、本開示の施設画像収集装置は、施設内を撮像した画像をネットワークを介して施設撮像装置から取得して蓄積する施設画像収集装置であって、施設撮像装置から送信される閲覧用静止画像を受信する通信部と、閲覧用静止画像を蓄積する記憶デバイスと、施設撮像装置から閲覧用静止画像を取得するタイミングを制御するプロセッサと、を備え、通信部は、プロセッサの制御に基づいて、所定のタイミングで定期的に画像送信要求を行い、この画像送信要求に応じて施設撮像装置から送信される閲覧用静止画像を受信する構成とする。
 また、本開示の施設画像蓄積装置は、施設内を撮像する施設撮像装置から出力される画像を蓄積するとともに画像をネットワークを介して施設画像収集装置に出力する施設画像蓄積装置であって、施設撮像装置から順次出力される時間的に連続する撮像画像を受信する受信部と、撮像画像を蓄積する記憶デバイスと、撮像画像に対して画像処理を実施して、処理画像を出力するプロセッサと、処理画像をネットワークを介して施設画像収集装置に送信する送信部と、を備え、プロセッサは、施設撮像装置から撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を処理画像として生成し、送信部は、閲覧用静止画像を所定のタイミングで送信する構成とする。
 また、本開示の施設画像出力制御装置は、施設内を撮像する施設撮像装置に接続されて施設画像収集装置へのネットワークを介した画像出力を制御する施設画像出力制御装置であって、施設撮像装置から順次出力される時間的に連続する撮像画像を受信する受信部と、撮像画像に対して画像処理を実施して、処理画像を出力するプロセッサと、処理画像をネットワークを介して施設画像収集装置に送信する送信部と、を備え、プロセッサは、施設撮像装置から撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を処理画像として生成し、送信部は、閲覧用静止画像を所定のタイミングで送信する構成とする。
 本開示の施設運営支援装置は、物品または役務を利用者に提供する施設を運営するユーザの業務を支援する施設運営支援装置であって、施設における各エリアのエリア画像を蓄積する画像蓄積部と、エリア画像を管理する管理部と、エリア画像を含む閲覧画面をユーザ端末装置に配信する配信部と、を備え、配信部は、共通のエリアに関する施設ごとのエリア画像を施設名称とともに並べた施設別画像一覧と、この施設別画像一覧におけるエリアを変更するエリア選択メニューと、を含む閲覧画面を生成してユーザ端末装置に配信する構成とする。
 また、本開示のユーザ端末装置は、物品または役務を利用者に提供する施設を運営するユーザの業務を支援する施設運営支援装置から配信される情報に基づいて画面を表示するユーザ端末装置であって、共通のエリアに関する施設ごとのエリア画像を施設名称とともに並べた施設別画像一覧と、この施設別画像一覧におけるエリアを変更するエリア選択メニューと、を含む閲覧画面を表示する構成とする。
 また、本開示の施設運営支援方法は、物品または役務を利用者に提供する施設を運営するユーザの業務を情報処理装置により支援する施設運営支援方法であって、情報処理装置は、施設における各エリアのエリア画像を蓄積し、共通のエリアに関する施設ごとのエリア画像を施設名称とともに並べた施設別画像一覧と、この施設別画像一覧におけるエリアを変更するエリア選択メニューと、を含む閲覧画面を生成してユーザ端末装置に配信する構成とする。
 本開示によれば、順次生成される閲覧用静止画像のうち、所定のタイミングの閲覧用静止画像のみを送信するため、通信量を抑えることができる。また、人物などの動体が除去された閲覧用静止画像が出力されるため、プライバシーを保護することができる。これにより、施設画像収集装置において、複数の施設内を撮像した画像を収集する際のネットワーク上のトラフィックの負荷を改善すると共に、未処理の画像が流出するリスクを解消して、プライバシーが保護された画像を効率よく収集することができる。
 また、本開示によれば、閲覧画面がユーザ端末装置に配信され、この閲覧画面に含まれる施設別画像一覧により、共通のエリアを対象にして、エリアの状況を施設同士で簡単に比較することができ、さらに、エリア選択メニューにより、施設別画像一覧のエリアを変更することで、異なるエリアの状況を複数の施設同士で比較することができる。これにより、施設数やエリア数が増加した場合でも、複数のユーザが施設内の状況をどこからでも効率よく確認でき、施設運営改善のための業務を合理的に行うことができる。
図1は、本実施形態に係る施設運営支援システムの全体構成図である。 図2は、店舗のレイアウトおよびカメラ1の設置状況を説明する店舗の平面図である。 図3は、カメラ1、録画サーバ21、管理サーバ22、配信サーバ23の概略構成を示すブロック図である。 図4は、配信サーバ23で生成してPC3に表示される画面の遷移状況を示す説明図である。 図5は、店舗比較画面を示す説明図である。 図6は、売場一覧確認画面を示す説明図である。 図7は、指定時刻確認画面を示す説明図である。 図8は、終日確認画面を示す説明図である。 図9は、拡大画像表示画面を示す説明図である。 図10は、拡大画像閲覧時の店舗別画像表示画面を示す説明図である。 図11は、拡大画像編集画面を示す説明図である。 図12は、レポート入力画面を示す説明図である。 図13は、レポート一覧画面を示す説明図である。 図14は、詳細表示状態のレポート一覧画面を示す説明図である。 図15は、レポート閲覧時の拡大画像表示画面を示す説明図である。 図16は、メッセージ表示画面を示す説明図である。 図17は、ユーザ設定画面を示す説明図である。 図18は、トピック設定画面を示す説明図である。 図19は、トピック表示画面を示す説明図である。 図20は、スマートフォン4で表示されるモニタリング画面を示す説明図である。 図21は、モニタリング画面における売場画像の拡大表示状況を示す説明図である。 図22は、施設運営支援システムの変形例に係るカメラ221およびレコーダ231の概略構成を示すブロック図である。 図23は、施設運営支援システムの変形例に係るカメラ241およびレコーダ251の概略構成を示すブロック図である。 図24は、施設運営支援システムの変形例に係るカメラ241およびアダプタ261の概略構成を示すブロック図である。
 実施の形態の説明に先立ち、従来の技術における問題点を簡単に説明する。さて、特許文献1に開示された技術によれば、コンビニエンスストア等における売場を撮像した画像をサーバで定期的に収集し、この画像から買い物客や店舗スタッフ等の遮蔽物を除去することで、時間帯ごとの売場の実際の状況を適切に確認することが可能となる。また、特許文献2に開示された技術によれば、コンビニエンスストア等のFC本部などが置かれる遠隔地から店舗の経営を指導するために必要な経営指導情報(店員情報、商品陳列情報、商品欠品情報、商品在庫情報、来客情報など)を取得することができ、スーパーバイザーの負担を大幅に軽減することができる。また、特許文献3に開示されたように、売場ごとの画像を取得可能なライブカメラをPOSシステムに組み込むことにより、いちいち売場へ出向くことなく、時間帯ごとの売場の実情を確認することが可能となる。
 しかしながら、この従来の技術では、サーバがネットワークを介して遠隔地の複数の店舗から元画像を収集し、センターサーバにて修正画像を作成する仕組みであるため、元画像を収集する際に、ネットワーク上のトラフィックの負荷が増大し、通信が不安定になったり、通信不能になったりする可能性がある。
 また、元画像に現れる買い物客や店舗スタッフ等の除去処理が施されていない未処理画像が流出するリスクがあり、プライバシー保護の観点から改善が望まれるが、前記従来の技術では、このような未処理画像の流出の問題に関して何の考慮もなされておらず、未処理画像が流出するリスクを十分に低減することができないという問題があった。
 また、これら従来の技術では、遠隔地で売場等の状況をモニタリングできるという利便性は得られるものの、店舗数や売場数が増加した場合でも、スーパーバイザーや多店舗を経営するオーナなどの複数のユーザが店舗内の状況を効率よく確認する仕組みに関しては、何ら配慮がなされておらず、店舗運営改善のための業務が合理的に行うことができないという問題があった。
 そこで、本開示は、複数の施設内を撮像した画像を収集する際のネットワーク上のトラフィックの負荷を改善すると共に、未処理の画像が流出するリスクを解消して、プライバシーが保護された画像を効率よく収集することができる施設撮像装置、施設画像収集装置、施設画像蓄積装置、および施設画像出力制御装置を提供することにある。
 また、本開示は、店舗数や売場数が増加した場合でも、スーパーバイザーや多店舗を経営するオーナなどの複数のユーザが店舗内の状況をどこからでも効率よく確認でき、店舗運営改善のための業務を合理的に行うことができる施設運営支援装置、ユーザ端末装置、および施設運営支援方法を提供することにある。
 前記課題を解決するためになされた第1の開示は、施設内を撮像した画像をネットワークを介して施設画像収集装置に提供する施設撮像装置であって、施設内を撮像して、時間的に連続する撮像画像を順次出力する撮像部と、撮像画像に対して画像処理を実施して処理画像を出力するプロセッサと、処理画像をネットワークを介して施設画像収集装置に送信する通信部と、を備え、プロセッサは、撮像部から撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を処理画像として生成し、通信部は、閲覧用静止画像を所定のタイミングで送信する構成とする。
 これによると、順次生成される閲覧用静止画像のうち、所定のタイミングの閲覧用静止画像のみを送信するため、通信量を抑えることができる。また、人物などの動体が除去された閲覧用静止画像が出力されるため、プライバシーを保護することができる。これにより、施設画像収集装置において、複数の施設内を撮像した画像を収集する際のネットワーク上のトラフィックの負荷を改善すると共に、未処理の画像が流出するリスクを解消して、プライバシーが保護された画像を効率よく収集することができる。
 また、第2の開示は、支配画像情報は、画素単位の色情報である構成とする。
 これによると、動体を除去した閲覧用静止画像を効率よく生成することができる。
 また、第3の開示は、通信部は、他の施設撮像装置と共通のタイミングで施設画像収集装置から送信される画像送信要求に応じて、閲覧用静止画像を送信する構成とする。
 これによると、施設画像収集装置において、複数の施設撮像装置の間で共通するタイミングの閲覧用静止画像を収集することができる。このため、複数の施設撮像装置による閲覧用静止画像を並べて画面表示した際に、複数の施設で共通するタイミングで施設内の状況を比較することができる。
 また、第4の開示は、通信部は、動体を除去した閲覧用静止画像を、施設運営支援用の画像蓄積装置に出力するとともに、動体が除去されていない未処理画像を、セキュリティが確保された別の画像蓄積装置に出力する構成とする。
 これによると、施設撮像装置から出力される閲覧用静止画像および未処理画像をそれぞれ、商品管理など店舗経営の用途および防犯・防災の用途で用いることができる。
 また、第5の開示は、施設内を撮像した画像をネットワークを介して施設撮像装置から取得して蓄積する施設画像収集装置であって、施設撮像装置から送信される閲覧用静止画像を受信する通信部と、閲覧用静止画像を蓄積する記憶デバイスと、施設撮像装置から閲覧用静止画像を取得するタイミングを制御するプロセッサと、を備え、通信部は、プロセッサの制御に基づいて、所定のタイミングで定期的に画像送信要求を行い、この画像送信要求に応じて施設撮像装置から送信される閲覧用静止画像を受信する構成とする。
 これによると、第1の開示と同様に、施設画像収集装置において、複数の施設内を撮像した画像を収集する際のネットワーク上のトラフィックの負荷を改善すると共に、未処理の画像が流出するリスクを解消して、プライバシーが保護された画像を効率よく収集することができる。
 また、第6の開示は、通信部は、タイミングにおける閲覧用静止画像の取得が失敗すると、次のタイミングまでの期間において、閲覧用静止画像の取得が成功するまで、画像送信要求を繰り返す構成とする。
 これによると、多少の時間差が発生するものの、所定のタイミングごとの閲覧用静止画像を漏れなく収集することができる。
 また、第7の開示は、施設内を撮像する施設撮像装置から出力される画像を蓄積するとともに画像をネットワークを介して施設画像収集装置に出力する施設画像蓄積装置であって、施設撮像装置から順次出力される時間的に連続する撮像画像を受信する受信部と、撮像画像を蓄積する記憶デバイスと、撮像画像に対して画像処理を実施して、処理画像を出力するプロセッサと、処理画像をネットワークを介して施設画像収集装置に送信する送信部と、を備え、プロセッサは、施設撮像装置から撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を処理画像として生成し、送信部は、閲覧用静止画像を所定のタイミングで送信する構成とする。
 これによると、第1の開示と同様に、施設画像収集装置において、複数の施設内を撮像した画像を収集する際のネットワーク上のトラフィックの負荷を改善すると共に、未処理の画像が流出するリスクを解消して、プライバシーが保護された画像を効率よく収集することができる。
 また、第8の開示は、施設内を撮像する施設撮像装置に接続されて施設画像収集装置へのネットワークを介した画像出力を制御する施設画像出力制御装置であって、施設撮像装置から順次出力される時間的に連続する撮像画像を受信する受信部と、撮像画像に対して画像処理を実施して、処理画像を出力するプロセッサと、処理画像をネットワークを介して施設画像収集装置に送信する送信部と、を備え、プロセッサは、施設撮像装置から撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を処理画像として生成し、送信部は、閲覧用静止画像を所定のタイミングで送信する構成とする。
 これによると、第1の開示と同様に、施設画像収集装置において、複数の施設内を撮像した画像を収集する際のネットワーク上のトラフィックの負荷を改善すると共に、未処理の画像が流出するリスクを解消して、プライバシーが保護された画像を効率よく収集することができる。
 また、第9の開示は、物品または役務を利用者に提供する施設を運営するユーザの業務を支援する施設運営支援装置であって、施設における各エリアのエリア画像を蓄積する画像蓄積部と、エリア画像を管理する管理部と、エリア画像を含む閲覧画面をユーザ端末装置に配信する配信部と、を備え、配信部は、共通のエリアに関する施設ごとのエリア画像を施設名称とともに並べた施設別画像一覧と、この施設別画像一覧におけるエリアを変更するエリア選択メニューと、を含む閲覧画面を生成してユーザ端末装置に配信する構成とする。
 これによると、閲覧画面がユーザ端末装置に配信され、この閲覧画面に含まれる施設別画像一覧により、共通のエリアを対象にして、エリアの状況を施設同士で簡単に比較することができ、さらに、エリア選択メニューにより、施設別画像一覧のエリアを変更することで、異なるエリアの状況を複数の施設同士で比較することができる。これにより、施設数やエリア数が増加した場合でも、複数のユーザが施設内の状況をどこからでも効率よく確認でき、施設運営改善のための業務を合理的に行うことができる。
 また、第10の開示は、配信部は、入力方法が異なる複数の日時入力部を閲覧画面に表示して、複数の日時入力部により、施設別画像一覧におけるエリア画像の表示日時をユーザに入力させる構成とする。
 これによると、エリア画像の表示日時を変更する際の操作性を高めることができる。
 また、第11の開示は、日時入力部は、カレンダーで日時を指定するカレンダー入力、所定の間隔で日時を変更する日時送り入力、タイムスケールにおける時間軸方向の位置で日時を指定するスケール入力、および現在の日時に変更する現在日時入力のうちの少なくとも2つ以上の入力方法によるものである構成とする。
 これによると、エリア画像の表示日時を変更する際の操作性をより一層高めることができる。
 また、第12の開示は、配信部は、施設別画像一覧において施設を選択するユーザの操作に基づいて、同一の施設におけるエリア画像をエリアの名称とともに並べたエリア別画像一覧と、このエリア別画像一覧における施設を変更する施設選択メニューと、を含む閲覧画面を生成してユーザ端末装置に配信する構成とする。
 これによると、エリア別画像一覧により、注目する施設を対象にして各エリアの状況を確認することができる。そして、施設選択メニューにより、エリア別画像一覧の施設を変更することで、施設別画像一覧の閲覧画面に戻ることなく、異なる施設の状況を簡単に確認することができる。
 また、第13の開示は、配信部は、エリア別画像一覧においてエリアを選択するユーザの操作に基づいて、選択されたエリアに関する所定の期間内の各日におけるエリア画像を並べた日別画像一覧と、この日別画像一覧におけるエリアを変更するエリア選択メニューと、を含む閲覧画面を生成してユーザ端末装置に配信する構成とする。
 これによると、日別画像一覧により、注目するエリアを対象にして所定の期間内の各日のエリアの状況を確認することができる。そして、エリア選択メニューにより、日別画像一覧のエリアを変更することで、異なるエリアの状況を簡単に確認することができる。
 この場合、期間をユーザが指定することができるようにするとよい。また、期間が長くなると、期間内の全ての日のエリア画像を並べて表示すると、画面が見にくくなることから、日別画像一覧に表示される日付の間隔をユーザに選択させて、その間隔においた各日のエリア画像を表示するようにするとよい。例えば、週間隔とすると、指定日以前の数週間の同じ曜日のエリア画像を並べて表示し、日間隔とすると、指定日の直近の数日のエリア画像を並べて表示するようにする。
 また、第14の開示は、日別画像一覧には、予め指定された時刻のエリア画像が日別に並べて表示される構成とする。
 これによると、店舗運営上で重要な時間帯を予め指定しておくことで、重要な時間帯の状況を確認することができる。
 また、第15の開示は、配信部は、日別画像一覧において日付を選択するユーザの操作に基づいて、選択された日における各時刻のエリア画像を時系列で並べた時刻別画像一覧と、この時刻別画像一覧におけるエリアを変更するエリア選択メニューと、を含む閲覧画面を生成してユーザ端末装置に配信する構成とする。
 これによると、時刻別画像一覧により、注目する日を対象にして各時刻のエリアの状況を確認することができる。そして、エリア選択メニューにより、時刻別画像一覧のエリアを変更することで、異なるエリアの状況を簡単に確認することができる。
 また、第16の開示は、配信部は、高画質モードを選択するユーザの操作に基づいて、高解像度のエリア画像を含む閲覧画面を生成してユーザ端末装置に配信する構成とする。
 これによると、ユーザ端末装置において、画面を拡大表示する操作をユーザが行った場合に、画質を低下させることなく、エリア画像を拡大表示させることができる。これにより、エリアの状況を詳細にかつ簡単に観察することができる。
 また、第17の開示は、画像蓄積部は、施設の内部を撮像した画像から動体を除去した閲覧用静止画像を施設撮像装置から所定のタイミングで定期的に取得して、閲覧用静止画像からエリア画像を生成して蓄積し、配信部は、ユーザが指定した時刻のエリア画像をユーザ端末装置に配信する構成とする。
 これによると、エリア画像は、人物などの動体が除去されたものとなるため、プライバシーを保護することができる。また、施設撮像装置において順次生成される閲覧用静止画像のうち、所定のタイミングの閲覧用静止画像のみを送信するため、時間的に連続する撮像画像(動画像)を送信したり、順次生成される閲覧用静止画像を全て送信したりする場合に比較して、ネットワーク上のトラフィックの負荷を改善することができる。これにより、施設運営支援装置において、プライバシーが保護されたエリア画像を効率よく収集することができる。
 また、第18の開示は、物品または役務を利用者に提供する施設を運営するユーザの業務を支援する施設運営支援装置から配信される情報に基づいて画面を表示するユーザ端末装置であって、共通のエリアに関する施設ごとのエリア画像を施設名称とともに並べた施設別画像一覧と、この施設別画像一覧におけるエリアを変更するエリア選択メニューと、を含む閲覧画面を表示する構成とする。
 これによると、第9の開示と同様に、店舗数や売場数が増加した場合でも、スーパーバイザーや多店舗のオーナなどの複数のユーザが店舗内の状況をどこからでも効率よく確認でき、店舗運営改善のための業務を合理的に行うことができる。
 また、第19の開示は、物品または役務を利用者に提供する施設を運営するユーザの業務を情報処理装置により支援する施設運営支援方法であって、情報処理装置は、施設における各エリアのエリア画像を蓄積し、共通のエリアに関する施設ごとのエリア画像を施設名称とともに並べた施設別画像一覧と、この施設別画像一覧におけるエリアを変更するエリア選択メニューと、を含む閲覧画面を生成してユーザ端末装置に配信する構成とする。
 これによると、第9の開示と同様に、店舗数や売場数が増加した場合でも、スーパーバイザーや多店舗のオーナなどの複数のユーザが店舗内の状況をどこからでも効率よく確認でき、店舗運営改善のための業務を合理的に行うことができる。
 以下、実施の形態を、図面を参照しながら説明する。
 図1は、本実施形態に係る施設運営支援システムの全体構成図である。
 この施設運営支援システムは、コンビニエンスストアなどの小売チェーン店などを対象にして構築されるものであり、複数の店舗(施設)ごとに設けられたカメラ(施設撮像装置)1と、クラウドコンピュータシステム2と、PC(ユーザ端末装置)3と、スマートフォン(ユーザ端末装置)4と、を備えている。
 カメラ1は、店舗内の適所に設置され、店舗内を撮像する。このカメラ1は、店舗内ネットワークおよびルータ11を介して、VLAN(Virtual Local Area Network)などの閉域ネットワークに接続されている。
 クラウドコンピュータシステム2は、録画サーバ(施設画像収集装置、画像蓄積部、情報処理装置)21と、管理サーバ(管理部、情報処理装置)22と、配信サーバ(配信部、情報処理装置)23と、を備えている。録画サーバ21、管理サーバ22、配信サーバ23は、クラウドLANを介して相互に接続されている。クラウドLANは、ルータ24を介して閉域ネットワークに接続されている。配信サーバ23は、ファイアウォール25を介してインターネットに接続されている。
 録画サーバ21は、店舗内を撮像した画像をカメラ1から取得して蓄積する。本実施形態では、カメラ1から取得した閲覧用静止画像から売場(エリア)ごとの売場画像を抽出して蓄積する。管理サーバ22は、データベースにより、売場画像、ユーザや店舗に関する情報、ユーザが入力したレポートやトピックに関する情報などを管理する。配信サーバ(Webサーバ)23は、PC3やスマートフォン4でユーザが閲覧する画面を生成して配信し、また、ユーザが画面で入力した情報を取得する。
 PC3およびスマートフォン4は、スーパーバイザー、店舗オーナ、店長などのユーザが操作し、配信サーバ23から配信される画面をWebブラウザで閲覧することができる。
 このような施設運営支援システムにおいては、カメラ1と録画サーバ21とが、閉域ネットワークを介して接続されているため、通信の安全性を確保することができる。また、配信サーバ23とPC3およびスマートフォン4とがインターネットを介して接続されているため、任意の場所でPC3やスマートフォン4から配信サーバ23にアクセスすることができる。
 次に、店舗のレイアウトおよびカメラ1の設置状況について説明する。図2は、店舗のレイアウトおよびカメラ1の設置状況を説明する店舗の平面図である。
 店舗には、出入口、陳列棚、レジカウンタ、および調理器具などが設けられている。陳列棚は、ファーストフード(FF)、米飯(おにぎり、弁当、寿司などの商品)、ベーカリー、デザート、ドリンク、加工食品、雑貨、生鮮食品、雑誌、新聞などの商品の種類に分けて設置されている。調理器具は、からあげなどのファーストフードを店内で調理するものであり、レジカウンタの隣には、ファーストフードの陳列棚(FFケース)が設置されている。顧客は、出入口から入店し、陳列棚の間の通路を通って店舗内を移動し、所望の商品が見つかると、その商品を持ってレジカウンタに向かい、レジカウンタで会計(代金の支払い)を済ませた後に出入口から退店する。
 また、店舗には、店舗内を撮影する複数のカメラ1が設置されている。このカメラ1は、店舗内の天井の適宜な位置に設置されている。特に、図2に示す例では、カメラ1に、魚眼レンズを用いて360度の撮影範囲を有する全方位カメラが採用され、このカメラ1により、陳列棚などに陳列された商品などを撮影することができる。
 次に、図1に示したカメラ1、録画サーバ21、管理サーバ22、配信サーバ23の概略構成について説明する。図3は、カメラ1、録画サーバ21、管理サーバ22、配信サーバ23の概略構成を示すブロック図である。
 カメラ1は、撮像部31と、プロセッサ32と、記憶デバイス33と、通信部34と、を備えている。
 撮像部31は、イメージセンサを備え、時間的に連続する撮像画像(フレーム)、いわゆる動画を順次出力する。プロセッサ32は、撮像画像に対して画像処理を行い、処理画像を生成して出力する。記憶デバイス33は、プロセッサ32で実行されるプログラムや、撮像部31から出力される撮像画像を記憶する。通信部34は、プロセッサ32から出力される処理画像をネットワークを介して録画サーバ21に送信する。
 本実施形態では、プロセッサ32において、撮像部31から撮像画像が入力される度に、支配画像情報を更新し、動体を除去した閲覧用静止画像(背景画像)を処理画像として生成する。
 この閲覧用静止画像の生成では、公知の背景画像生成技術を利用することができる。例えば、時間的に連続する撮像画像が順次入力されると、直近の所定のサンプリング期間(例えば5分間)のうち、30フレーム相当の撮像画像における各画素の輝度を収集して、正規分布に近似させた輝度ヒストグラムを1画素ごとに生成して、その輝度ヒストグラムにおける所定の範囲(±3σ)の色情報を蓄積することで、画素単位の支配画像情報を求めて、背景画像を生成することができ、これを閲覧用静止画像として利用することが可能となる。
 なお、サンプリング期間は、人物が写り込まないような適切なサンプリング期間にユーザが適宜に設定することができるようにするとよい。
 このような背景画像生成処理では、過去の所定の期間(例えば5分間)内の複数の撮像画像において頻度が最も高い色が選択され、このとき、動体の画像領域では画素の色が変化するが、結果的に支配率の高い背景の色が選択されて、動体を除去した閲覧用静止画像(背景画像)を得ることができる。また、動体が人物である場合、僅かでも動きがあるため、長時間静止した状態では、人物らしき像がぼやけた状態で表示されることから、プライバシーを保護することができる。
 また、本実施形態では、録画サーバ21において、カメラ1に対する画像送信要求が所定のタイミング(例えば15分間隔)で定期的に行われ、カメラ1の通信部34では、録画サーバ21からの画像送信要求に応じて、その時刻の閲覧用静止画像を送信する。ここで、通信部34から録画サーバ21に閲覧用静止画像を送信する場合、モバイルルータ等(図示せず)を介在させて送信してもよい。また、閲覧用静止画像は、プロセッサ32において、時間的に連続する撮像画像が入力される度に随時更新されており、その随時更新されている閲覧用静止画像を所定のタイミングで送信する。
 録画サーバ21は、プロセッサ41と、記憶デバイス42と、通信部43と、を備えている。
 通信部43は、カメラ1や管理サーバ22や配信サーバ23との間で所要の情報を送受信する。例えば、所定のタイミング(例えば15分間隔)で定期的に画像送信要求を各カメラ1に送信し、この画像送信要求に応じて、各カメラ1から送信される閲覧用静止画像を受信する。記憶デバイス42では、通信部43で受信したカメラ1ごとの閲覧用静止画像や、プロセッサ41で実行されるプログラムを記憶する。
 プロセッサ41は、カメラ1から取得した閲覧用静止画像(全方位画像)に対して画像処理を行う。この画像処理では、全方位画像である閲覧用静止画像から各売場の売場画像となるように均等分割(例えば、4画分割)する、すなわち、撮像画像から各売場の売場画像を切り出す(抽出する)。また、プロセッサ41において、売場画像の原画像を縮小したサムネイル画像を生成する。売場画像(原画像およびサムネイル画像)は、記憶デバイス42に蓄積される。また、プロセッサ41は、カメラ1から閲覧用静止画像を取得するタイミングを制御する。
 ここで、プロセッサ41が売場画像の分割処理等を行う例を説明したが、カメラ1のプロセッサ32が、各売場の売場画像を抽出した状態で録画サーバ21へ送信し、記憶デバイス42に蓄積するようにしてもよい。
 通信部43では、プロセッサ41の制御に基づいて、所定の画像取得タイミングでカメラ1からの閲覧用静止画像の取得が失敗すると、次の画像取得タイミングまでの期間に、閲覧用静止画像の取得が成功するまで、閲覧用静止画像の取得を繰り返すリトライが行われる。これにより、多少の時間差が発生するものの、所定のタイミングごとの閲覧用静止画像を漏れなく取得することができる。
 管理サーバ22は、プロセッサ51と、記憶デバイス52と、通信部53と、を備えている。
 プロセッサ51は、売場画像に関する情報(ファイル名や保存パスなど)、ユーザや店舗に関する情報、ユーザが入力したレポートやトピックに関する情報などをデータベースにより管理する処理を実行する。記憶デバイス52は、データベースに関する情報や、プロセッサ51で実行されるプログラムを記憶する。通信部53は、録画サーバ21や配信サーバ23との間で所要の情報を送受信する。例えば、録画サーバ21に蓄積された売場画像に関する情報を録画サーバ21から受信し、また、ユーザが入力したレポートやトピックに関する情報を配信サーバ23から受信する。
 配信サーバ23は、プロセッサ61と、記憶デバイス62と、通信部63と、を備えている。
 プロセッサ61は、PC3やスマートフォン4でユーザが閲覧する画面を生成する処理を実行する。記憶デバイス62は、プロセッサ51で実行されるプログラムを記憶する。通信部63は、録画サーバ21や管理サーバ22との間で所要の情報を送受信する。例えば、プロセッサ61で生成した画面情報をPC3やスマートフォン4に配信し、また、PC3やスマートフォン4でユーザが入力した情報を受信する。
 次に、配信サーバ23で生成してPC3に表示される画面について説明する。図4は、配信サーバ23で生成してPC3に表示される画面の遷移状況を示す説明図である。
 PC3において、Webブラウザを起動して配信サーバ23にアクセスすると、まず、ログイン画面が表示される。本実施形態では、ユーザIDおよびパスワードでユーザ認証が行われ、ログイン画面にユーザIDおよびパスワードを入力して、ユーザ認証が成功すると、トップ画面として、店舗比較画面(図5参照)が表示される。
 このとき、他のユーザにより新規に入力された未読のレポートがある場合や、パスワードの有効期限が切れている場合には、その旨のメッセージを表示するメッセージ表示画面(図16参照)が表示される。また、管理者により入力されたトピックがある場合には、トピック表示画面(図19参照)が表示される。
 店舗比較画面(図5参照)では、共通の売場を対象にして売場の状況を店舗同士で比較することができる。この店舗比較画面で任意の店舗を選択すると、売場一覧確認画面(図6参照)に遷移する。この売場一覧確認画面では、選択された店舗における各売場の状況を確認することができる。この売場一覧確認画面で売場を選択すると、指定時刻確認画面(図7参照)に遷移する。この指定時刻確認画面では、選択された売場を対象にして売場の状況を異なる日同士で比較することができる。この指定時刻確認画面で日付を選択すると、終日確認画面(図8参照)に遷移する。この終日確認画面では、選択された日付における終日の各時刻の売場の状況を確認することができる。
 この店舗比較画面、売場一覧画面、指定時刻画面、終日確認画面には、各画面の表示条件に基づいて抽出された複数の売場画像が表示され、この売場画像により売場の状況を確認することができ、この店舗比較画面、売場一覧画面、指定時刻画面、終日確認画面をまとめてモニタリング画面と呼称する。
 モニタリング画面で売場画像を選択すると、拡大画像表示画面(図9参照)がポップアップ表示される。この拡大画像表示画面では、高解像度の売場画像が拡大表示され、売場の状況を詳細に確認することができる。この拡大画像表示画面で店舗一覧を指示すると、店舗別画像表示画面(図10参照)に遷移する。この店舗別画像表示画面では、各店舗の売場画像が並べて表示され、拡大画像表示画面に表示させる売場画像を別の店舗のものに変更することができる。拡大画像表示画面で画像編集を指示すると、拡大画像編集画面(図11参照)に遷移する。この拡大画像編集画面では、売場画像に手書き入力で描画を行うことができる。
 拡大画像編集画面でアップロードを指示すると、レポート入力画面(図12参照)に遷移する。このレポート入力画面では、レポートに関する各項目の入力を行うことができる。また、モニタリング画面のメインメニューでレポート入力を選択することでも、レポート入力画面に遷移させることができる。
 また、モニタリング画面のメインメニューでレポート一覧を選択すると、レポート一覧画面(図13参照)に遷移する。このレポート一覧画面では、ログインしたユーザを共有先として指定されたレポートが一覧表示される。このレポート一覧画面でレポートを選択すると、詳細表示状態のレポート一覧画面(図14参照)に遷移する。この詳細表示状態のレポート一覧画面では、レポートに添付された売場画像やメッセージを閲覧することができる。この詳細表示状態のレポート一覧画面で売場画像を選択すると、拡大画像表示画面(図15参照)がポップアップ表示される。この拡大画像表示画面では、高解像度の売場画像が拡大表示される。
 また、モニタリング画面のメインメニューで設定を選択すると、サブメニューが表示され、このサブメニューでユーザ設定、トピック設定、パスワード変更をそれぞれ選択すると、ユーザ設定画面(図17参照)、トピック設定画面(図18参照)、パスワード変更画面(図示せず)がポップアップ表示される。
 次に、図4に示した画面の遷移状況における店舗比較画面について説明する。図5は、店舗比較画面を示す説明図である。
 店舗比較画面には、メインメニュー71と、日時入力部72と、サイトマップ表示部73と、選択メニュー表示部74と、画像一覧表示部75と、が設けられている。
 メインメニュー71では、トップ、モニタリング、レポート一覧、レポート入力、設定、ログアウトのいずれかを選択(クリックやタップで入力)することができる。
 メインメニュー71でトップを選択すると、トップ画面に遷移する。本実施形態では、店舗比較画面をトップ画面としており、現在開いているモニタリング画面が、店舗比較画面以外、すなわち、売場一覧確認画面、指定時刻確認画面、終日確認画面であれば、店舗比較画面に遷移する。このとき、表示日時が現在の時刻、正確には最新の画像取得タイミングの時刻(画像取得時刻)に戻る。
 メインメニュー71でモニタリングを選択すると、モニタリング画面のトップ画面である店舗比較画面に遷移する。このとき、表示日時が現在の時刻(最新の画像取得時刻)に戻る。
 メインメニュー71でレポート一覧を選択すると、レポート一覧画面(図13参照)に遷移する。
 メインメニュー71でレポート入力を選択すると、レポート入力画面(図12参照)がポップアップ表示される。
 メインメニュー71で設定を選択すると、サブメニューが表示される。このサブメニューでは、ユーザ設定、トピック設定、パスワード変更のいずれかを選択することができる。このサブメニューでユーザ設定を選択すると、ユーザ設定画面(図17参照)がポップアップ表示される。サブメニューでトピック設定を選択すると、トピック設定画面(図18参照)がポップアップ表示される。なお、トピック設定画面は、管理者である場合のみ表示される。サブメニューでパスワード変更を選択すると、パスワード変更画面(図示せず)がポップアップ表示される。
 メインメニュー71でログアウトを選択すると、モニタリング画面を閉じて、ログイン画面が表示される。
 日時入力部72には、NOWボタン81と、日付変更部82と、時刻変更部83と、が設けられている。
 NOWボタン81は、画像一覧表示部75の売場画像の表示日時を現在の時刻(最新の画像取得時刻)に変更するものである。このNOWボタンを操作すると、現在の日時の売場画像が表示される。これにより、過去の状況を確認したところで、現在の状況を確認したい場合に、迅速に現在の売場画像を表示させることができる。
 日付変更部82は、画像一覧表示部75の売場画像の表示日を変更するものであり、選択された日付の売場画像が画像一覧表示部75に表示される。この日付変更部82には、日付表示部82aと、左向きおよび右向きの矢印ボタン82b,82cと、が設けられている。
 日付表示部82aには、現在設定中の日付が表示される。この日付表示部82aを操作すると、カレンダー画面(図示せず)が表示され、このカレンダー画面で日付を選択することができる。矢印ボタン82b,82cは、日送りを行うものであり、左向きの矢印ボタン82bを操作すると、表示日時が1日前に変更され、右向きの矢印ボタン82cを操作すると、表示日時が1日後に変更される。
 時刻変更部83は、画像一覧表示部75の売場画像の表示時刻を変更するものであり、選択された時刻の売場画像が画像一覧表示部75に表示される。この時刻変更部83には、時刻表示部83aと、左向きおよび右向きの矢印ボタン83b,83cと、タイムバー83dと、が設けられている。
 時刻表示部83aには、現在設定中の時刻が表示される。矢印ボタン83b,83cは、画像取得のタイミング(例えば15分間隔)に対応した時刻送りを行うものであり、左向きの矢印ボタン83bを操作すると、表示時刻が1つ前のタイミングの時刻(例えば15分前)に変更され、右向きの矢印ボタン83cを操作すると、表示時刻が1つ後のタイミングの時刻(例えば15分後)に変更される。
 タイムバー83dは、営業時間(終日営業では24時間)内の時間帯を選択するものであり、各時間帯を表す複数のポイントが時間軸方向に並べて表示されており、ポイントを選択することで、そのポイントの時刻に変更される。選択された時間帯のポイントは表示色が変化する。なお、タイムバー83dは、指定時刻確認画面(図7参照)や終日確認画面(図8参照)では表示されない。
 サイトマップ表示部73は、画面の遷移状況を表示するものである。このサイトマップ表示部73には、モニタリング画面(図5~図8参照)に応じて、「全店」、「店舗名」、「売場名」、「詳細」のボタンが表示される。
 各ボタンを操作すると、対応するモニタリング画面に遷移する。すなわち、「全店」のボタンを操作すると、店舗比較画面(図5参照)に遷移する。「店舗名」のボタンを操作すると、売場一覧確認画面(図6参照)に遷移する。「売場名」のボタンを操作すると、指定時刻確認画面(図7参照)に遷移する。「詳細」のボタンを操作すると、終日確認画面(図8参照)に遷移する。なお、「店舗名」のボタンには、現在選択されている店舗の名称が表示され、「売場名」のボタンには、現在選択されている売場の名称が表示される。
 画像一覧表示部75には、縦横に並ぶ複数の売場画像表示部91と、この売場画像表示部91の下に配置された説明表示部92と、が設けられている。売場画像表示部91には、売場画像(低解像度のサムネイル画像または高解像度の原画像)が表示される。
 また、図5~図8に示す例では、横方向に4つの売場画像が並んで表示されている。縦方向の売場画像の配置数は任意であり、1画面に収まりきらない場合は、縦スクロールバーでスクロールさせればよい。
 特に、図5に示す店舗比較画面では、画像一覧表示部75に、共通の売場に関する店舗ごとの売場画像を店舗名称とともに並べた店舗別画像一覧93が表示される。売場画像表示部91には各店舗の売場画像が表示され、説明表示部92には店舗名称が表示される。
 また、この店舗別画像一覧93では、ユーザが所属しているグループに関係する全ての店舗の売場画像が表示される。また、ログイン直後の初期状態では、現在の日時の売場画像が表示される。このとき、ユーザが直接担当している店舗が優先的に表示される。なお、売場画像は、最上段の左端(左上)から右向きの順番で並べられ、次にその下段の左端から右向きに並べられ、以下、同様の順番で並べられる。
 この店舗別画像一覧93により、共通の売場を対象にして、売場の状況を店舗同士で比較することができる。
 また、図5に示す店舗比較画面では、選択メニュー表示部74に、売場選択メニュー94が表示される。この売場選択メニュー94には、ユーザが所属するグループに関係する全ての売場が表示される。この売場選択メニューで売場を選択すると、店舗別画像一覧93の売場画像が、選択された売場のものに切り替えられる。
 この売場選択メニュー94により、店舗別画像一覧93の売場を変更することで、異なる売場の状況を複数の店舗同士で比較することができる。これにより、種々の売場について注目すべき店舗を簡単に見つけ出すことができる。
 この店舗比較画面の画像一覧表示部75において、店舗別画像一覧93の売場画像を選択操作すると、選択された売場に関する拡大画像表示画面(図9参照)がホップアップ表示される。また、店舗別画像一覧93の店舗名称を選択操作すると、選択された店舗に関する売場一覧確認画面(図6参照)に遷移する。
 なお、メインメニュー71および日時入力部72は、以下に説明する他のモニタリング画面(売場一覧確認画面、指定時刻確認画面、終日確認画面)と共通である。
 次に、図4に示した画面の遷移状況における売場一覧確認画面について説明する。図6は、売場一覧確認画面を示す説明図である。
 店舗比較画面(図5参照)において画像一覧表示部75に表示される店舗別画像一覧93の店舗名称を選択操作すると、図6に示す売場一覧確認画面が表示される。
 図6に示す売場一覧確認画面では、画像一覧表示部75に、店舗比較画面で選択された店舗における全ての売場の売場画像を売場名称とともに並べた売場別画像一覧95が表示される。売場画像表示部91には各売場の売場画像が表示され、説明表示部92には売場名称が表示される。
 この売場別画像一覧95により、店舗比較画面(図5参照)で選択した店舗における各売場の状況を確認することができる。
 また、図6に示す売場一覧確認画面では、選択メニュー表示部74に、店舗選択メニュー96が表示される。この店舗選択メニュー96には、ユーザが所属しているグループに関係する全ての店舗が表示される。この店舗選択メニュー96で店舗を選択操作すると、売場別画像一覧95の売場画像が、選択された店舗のものに切り替えられる。
 この店舗選択メニュー96により、売場別画像一覧95の売場を変更することで、異なる売場の状況を比較することができる。これにより、1つの店舗について注目すべき売場を簡単に見つけ出すことができる。
 この売場一覧確認画面の画像一覧表示部75において、売場別画像一覧95の売場画像を選択操作すると、選択された売場に関する拡大画像表示画面(図9参照)がホップアップ表示される。また、売場別画像一覧95の売場名称を選択操作すると、選択された売場に関する指定時刻確認画面(図7参照)に遷移する。
 次に、図4に示した画面の遷移状況における指定時刻確認画面について説明する。図7は、指定時刻確認画面を示す説明図である。
 売場一覧確認画面(図6参照)の画像一覧表示部75において売場名称を選択操作すると、図7に示す指定時刻確認画面が表示される。
 この指定時刻確認画面では、画像一覧表示部75に、売場一覧確認画面で選択された売場に関する所定期間内の各日における売場画像を並べた日別画像一覧97が表示される。売場画像表示部91には各売場の売場画像が表示され、説明表示部92には時刻が表示される。また、最上段に設けられた日付表示部99に日付が表示される。
 この日別画像一覧97では、指定日当日と、その日から所定の間隔においた所定数の各日における所定の表示時刻の売場画像が表示される。図7に示す例では、指定日当日を含めた4日分の売場画像が表示される。また、各日における同一の表示時刻の売場画像が横向きに並べて表示されている。なお、表示時刻は、ユーザ設定画面(図5参照)により予め設定される。
 また、この指定時刻確認画面では、日別画像一覧97に表示される日付の間隔を選択する表示間隔選択部76が設けられている。図7に示す例では、週間隔および日間隔のいずれかを選択することができる。週間隔を選択すると、指定日当日から過去1週間、2週間,3週間それぞれ遡った日、すなわち1週間前、2週間前、3週間前の指定日と同じ曜日の売場画像が表示される。日間隔を選択すると、指定日当日から過去3日間の売場画像が表示される。
 図7に示す例では、週間隔を選択しており、指定日が9月11日(金)であり、その当日と、その1週間前の9月4日、2週間前の8月28日、3週間前の8月21日の各日の売場画像が表示されている。また、日間隔を選択すると、指定日である9月11日(金)と、その1日前の9月10日(木)、2日前の9月9日(水)、3日前の9月8日(火)の各日の売場画像が表示される。
 この日別画像一覧97により、売場の状況を異なる日同士で比較することができる。
 また、図7に示す店舗比較画面では、選択メニュー表示部74に、店舗比較画面(図5参照)と同様に、売場選択メニュー94が表示される。この売場選択メニュー94で売場を選択すると、日別画像一覧97の売場画像が、選択された売場のものに切り替えられる。
 この指定時刻確認画面の画像一覧表示部75において、日別画像一覧97の売場画像を選択操作すると、選択された売場に関する拡大画像表示画面(図9参照)がホップアップ表示される。日別画像一覧97の日付を選択操作すると、選択された日付に関する終日確認画面(図8参照)に遷移する。
 次に、図4に示した画面の遷移状況における終日確認画面について説明する。図8は、終日確認画面を示す説明図である。
 指定時刻確認画面(図7)において画像一覧表示部75に表示される日別画像一覧97で日付を選択すると、図8に示す終日確認画面に遷移する。
 この終日確認画面では、画像一覧表示部75に、指定時刻確認画面で選択された日付における終日の各時刻の売場画像を時系列で並べた時刻別画像一覧98が表示される。売場画像表示部91には各売場の売場画像が表示され、説明表示部92には時刻が表示される。
 また、終日確認画面には、時刻別画像一覧98に表示される時刻の間隔を選択する表示間隔選択部77が設けられている。図8に示す例では、15分、30分、1時間、2時間のいずれかを選択することができる。15分、30分、1時間、2時間をそれぞれ選択すると、15分間隔、30分間隔、1時間間隔、2時間間隔で売場画像が表示される。
 この時刻別画像一覧98により、注目する日の売場の状況を、当日の全ての時間帯で確認することができる。
 また、図8に示す終日確認画面では、選択メニュー表示部74に、店舗比較画面(図5参照)と同様に、売場選択メニュー94が表示される。この売場選択メニュー94で売場を選択すると、時刻別画像一覧98の売場画像が、選択された売場のものに切り替えられる。
 この終日確認画面の画像一覧表示部75において、時刻別画像一覧98の売場画像を選択操作すると、選択された売場に関する拡大画像表示画面(図9参照)がホップアップ表示される。
 このように本実施形態では、4つのモニタリング画面、すなわち、店舗比較画面、売場一覧確認画面、指定時刻確認画面、および終日確認画面で順次、店舗、売場、日付を絞り込みながら、各画面を閲覧することで、各店舗の各売場の各日における売場の状況を効率よく確認することができる。そして、スーパーバイザーや多店舗を経営するオーナのような複数の施設を担当するユーザの場合、まず、各売場の状況を複数の店舗同士で比較することが望まれる。そこで、本実施形態では、ログインした直後に店舗比較画面を最初に表示させるようにしている。
 次に、図4に示した画面の遷移状況における拡大画像表示画面について説明する。図9は、拡大画像表示画面を示す説明図である。
 モニタリング画面(図5~図8参照)において売場画像を選択操作すると、図9に示す拡大画像表示画面がホップアップ表示される。
 この拡大画像表示画面には、拡大画像表示部101と、説明表示部102と、店舗ボタン103と、編集ボタン104と、左向きおよび右向きの矢印ボタン105a,105bと、が設けられている。拡大画像表示部101には、拡大した売場画像(高解像度の原画像)が表示される。説明表示部102には、店舗名称、売場名称、および日時が表示される。
 この拡大画像表示画面により、注目した店舗の売場の状況を詳細に観察することができる。
 この拡大画像表示画面において、店舗ボタン103を操作すると、店舗別画像表示画面(図10参照)がポップアップ表示される。編集ボタン104を操作すると、拡大画像編集画面(図11参照)に遷移する。矢印ボタン105a,105bは、画像取得のタイミング(例えば15分間隔)に対応した時刻送りを行うものである。左向きの矢印ボタン105aを操作すると、表示時刻が1つ前のタイミングの時刻(例えば15分前)に変更され、右向きの矢印ボタン105bを操作すると、表示時刻が1つ後のタイミングの時刻(例えば15分後)に変更される。
 次に、図4に示した画面の遷移状況における拡大画像閲覧時の店舗別画像表示画面について説明する。図10は、拡大画像閲覧時の店舗別画像表示画面を示す説明図である。
 拡大画像表示画面(図9参照)において、店舗ボタン103を操作すると、図10に示す店舗別画像表示画面がポップアップ表示される。
 この店舗別画像表示画面には、画像一覧表示部111と、左向きおよび右向きの矢印ボタン112a,112bと、店舗ボタン103と、が設けられている。
 画像一覧表示部111には、各店舗の売場画像が店舗名称とともに並べて表示される。ここで表示される売場画像は、ユーザが所属するグループに関係する全ての店舗における遷移元の拡大画像表示画面と同一の売場に関するものである。
 矢印ボタン112a,112bは、画像一覧表示部111に収まらない店舗の売場画像を表示させるものである。左向きおよび右向きの矢印ボタン112a,112bをそれぞれ操作すると、表示されていない店舗の売場画像が表示されるように、画像一覧表示部111に表示される売場画像が1つ分、右方向または左方向に移動する。
 画像一覧表示部111において売場画像を選択操作すると、この店舗別画像表示画面を閉じて拡大画像表示画面(図9参照)に戻り、選択された店舗の拡大売場画像が拡大画像表示画面に表示される。また、店舗ボタン103を選択操作すると、この店舗別画像表示画面を閉じて拡大画像表示画面(図9参照)に戻り、元の店舗の売場画像が拡大画像表示画面に表示される。
 これにより、店舗比較画面(図5参照)に戻ることなく、異なる店舗の拡大売場画像を表示させることができるので、ユーザ操作にかかる負担が大幅に軽減できる。
 次に、図4に示した画面の遷移状況における拡大画像編集画面について説明する。図11は、拡大画像編集画面を示す説明図である。
 拡大画像表示画面(図9参照)において編集ボタン104を操作すると、図11に示す拡大画像編集画面に遷移する。
 この拡大画像編集画面には、拡大画像表示部121と、手書きツール選択部122と、アップロードボタン123と、閉じるボタン124と、が設けられている。拡大画像表示部121には、拡大画像表示画面(図9参照)と同様に、拡大した売場画像(高解像度の原画像)が表示される。
 手書きツール選択部122には、鉛筆ボタン125と、消しゴムボタン126と、初期化ボタン127と、設けられている。鉛筆ボタン125を選択すると、拡大画像表示部121の拡大売場画像上に線を描画することができる。このとき、描画色を複数の色(例えば赤、青、黄)の中から選択することができる。消しゴムボタン126を選択すると、描画した線を消去することができる。初期化ボタン127を選択すると、描画した線を全て消去して、編集前の状態に戻すことができる。
 この拡大画像編集画面により、拡大売場画像上に手書きで描画することができる。これにより、拡大売場画像内の注目すべき部位を手書き入力による描画像129で指し示すことができる。
 アップロードボタン123を操作すると、レポート入力画面(図12参照)に遷移する。また、閉じるボタン124を操作すると、拡大画像表示画面(図9参照)に戻る。
 ここで、アップロードボタン123を操作すると、手書き入力による描画情報が配信サーバ23にアップロードされ、さらに、管理サーバ22において、描画情報が売場画像とともに、レポート管理情報に登録される。
 なお、本実施形態では、拡大売場画像上に手書きで描画することができるようにしたが、予め用意された種々の形状のマーク(スタンプ)を拡大売場画像上に描画することができるようにしてもよい。
 次に、図4に示した画面の遷移状況におけるレポート入力画面について説明する。図12は、レポート入力画面を示す説明図である。
 拡大画像編集画面(図11参照)においてアップロードボタン123を操作すると、図12に示すレポート入力画面に遷移する。また、モニタリング画面(図5~図8参照)のメインメニュー71でレポート入力を選択すると、このレポート入力画面がポップアップ表示される。
 このレポート入力画面は、レポートに関する情報をユーザ(レポート作成者)が入力するものであり、このレポート入力画面には、共有先選択部131と、共有元選択部132と、撮像画像選択部133と、分類選択部134と、評価入力部135と、件名入力部136と、コメント入力部137と、送信ボタン138と、閉じるボタン139と、が設けられている。
 共有先選択部131は、レポートの共有先(配信先)をユーザが選択するものである。この共有先選択部131には、ユーザが所属しているグループに関係する店舗および管理者(スーパーバイザーなど)が共有先として表示され、各共有先にチェックボックスが設けられており、各共有先を個別に選択することができる。また、「すべて」のチェックボックスが設けられており、全ての店舗および管理者を一括して選択することができる。
 共有元選択部132は、レポートの共有元となる店舗名(レポートの対象となる店舗名)をユーザが選択するものである。ここで、拡大画像編集画面(図11参照)から遷移した場合には、この拡大画像編集画面で表示された拡大売場画像の店舗名が共有元選択部により自動で入力、反映される。
 撮像画像選択部133は、メインメニュー71でレポート入力を選択してレポート入力画面に遷移した場合に、レポートに添付する撮像画像のファイルをユーザが選択するものである。この場合、予めスマートフォン4などでユーザが売場を撮像した撮像画像をPC3に転送しておく。ここで選択された売場画像は、入力情報とともに配信サーバ23にアップロードされる。なお、拡大画像編集画面から遷移した場合には、その拡大画像編集画面で編集した売場画像が添付画像に自動で設定、反映されるため、ファイルの選択を行う必要がない。
 なお、カメラ1では、動体除去処理により顧客のプライバシーが保護された画像が出力されるが、スマートフォン4などでユーザが撮影した画像では顧客のプライバシーを保護することができない。そこで、PC3において顔検出処理を実行し、ここで顔が検出された場合には、アップロードができない旨の警告を出力するようにしてもよい。この場合、ユーザがスマートフォン4やPC3の画像編集アプリケーションで、顧客の画像領域を塗りつぶす処理を行うようにすれば、撮像画像をアップロードすることができる。また、PC3において、検出された顔領域を覆うマスキング処理を自動で行うようにしてもよい。
 分類選択部134は、レポートの分類を選択するものである。ここでは、報告(評価以外の報告)、評価、その他のいずれかを選択することができる。
 評価入力部135は、評価結果をユーザが入力するものであり、分類選択部134において評価を選択した場合に表示される。ここでは、評価の良否である「いいね」、「だめね」のいずれかを選択することができる。
 件名入力部136は、レポートの件名を入力するものである。
 コメント入力部137は、共有先のユーザに通知するコメント(メッセージ)を入力するものである。このコメント入力部137には、店舗に対する評価、報告、その他の連絡事項に関する情報、あるいは、店舗において実施した改善処置に関する情報など、他のユーザとの間で共有すべき情報をユーザが入力する。例えば、レポートの分類が評価の場合には、改善事項の指摘および指導を行うコメントを入力する。
 送信ボタン138を操作すると、レポート入力画面でユーザが入力した内容に関する入力情報がPC3から配信サーバ23にアップロードされる。撮像画像選択部133で撮像画像をユーザが選択した場合には、その撮像画像もPC3から配信サーバ23にアップロードされる。
 配信サーバ23にアップロードされた入力情報は、管理サーバ22において、レポート管理情報(グループメンバーのレポート一覧)に登録される。また、アップロードされた撮像画像は録画サーバ21に蓄積され、また、管理サーバ22のレポート管理情報に登録される。このとき、管理サーバ22では、拡大画像表示画面に表示させた売場画像、手書き入力による描画情報、およびユーザが選択した撮像画像が、レポート入力画面による入力情報と関連づけて管理される。
 閉じるボタン139を操作すると、レポート入力画面を閉じて、遷移元のモニタリング画面(図5~図8参照)に戻る。
 次に、図4に示した画面の遷移状況におけるレポート一覧画面について説明する。図13は、レポート一覧画面を示す説明図である。
 モニタリング画面(図5~図8参照)のメインメニュー71でレポート一覧を選択すると、図13に示すレポート一覧画面に遷移する。
 このレポート一覧画面は、PC3において配信サーバ23にログインしたユーザ(レポート閲覧者)が共有先として指定されたレポートの概要を一覧表示するものである。このレポート一覧画面には、レポート一覧表示部141と、更新部142と、削除部143と、が設けられている。
 レポート一覧表示部141には、レポートごとの概要表示欄145が設けられている。この概要表示欄145には、レポート入力画面(図12参照)で入力した各項目に関する情報、すなわち、分類、評価、共有元の店舗(レポートの対象となる店舗)、件名、アップロード日時の各項目に関する情報が表示される。
 このレポート一覧表示部141では、未読のレポートを既読のレポートと容易に判別することができるように、概要表示欄145の文字の太さや表示色を変えることで、未読のレポートが強調表示される。また、レポート一覧表示部141では、各項目についてソート(並び替え)を行うことができる。
 更新部142は、レポート一覧表示部141に表示されるレポートを最新の状態に更新するものである。削除部143は、レポート一覧表示部141のレポートを削除するものである。レポート一覧表示部141には、各コメントにチェックボックスが設けられており、このチェックボックスでレポートを選択して削除部143を操作すると、選択したレポートが削除される。
 また、レポート一覧表示部141には、各コメントに詳細表示ボタン146が設けられている。この詳細表示ボタン146を操作すると、詳細表示状態のレポート一覧画面(図14参照)に遷移する。
 次に、図4に示した画面の遷移状況における詳細表示状態のレポート一覧画面について説明する。図14は、詳細表示状態のレポート一覧画面を示す説明図である。
 レポート一覧画面(図13参照)において詳細表示ボタン146を操作すると、図14に示す詳細表示状態のレポート一覧画面に遷移する。
 この詳細表示状態のレポート一覧画面は、レポートの詳細な内容を表示するものであり、レポート一覧表示部141において、選択したレポートの概要表示欄145の下に詳細表示部151が表示される。
 詳細表示部151には、画像表示部152と、撮像日時表示部153と、コメント表示部154と、が設けられている。画像表示部152には、拡大画像編集画面(図11参照)から遷移したレポート入力画面(図12参照)で入力されたレポートの場合には、レポートに添付された売場画像と、これと同一の店舗および売場の最新の時刻の売場画像とが並べて表示され、過去と現在の売場状況の変化を把握することができる。モニタリング画面(図5~図8参照)から遷移したレポート入力画面で入力されたレポートの場合には、選択された撮像画像のみが表示される。
 撮像日時表示部153には、売場画像の撮像日時が表示される。この撮像日時表示部153を操作すると、売場画像の撮像日時に関する店舗比較画面(図5参照)に遷移する。
 画像表示部152の売場画像を操作すると、レポート閲覧時の拡大画像表示画面(図15参照)がポップアップ表示される。
 コメント表示部154には、レポート入力画面(図12参照)で入力されたコメントが表示される。
 この詳細表示状態のレポート一覧画面で、詳細表示部151が表示されたコメントの詳細表示ボタン146を操作すると、詳細表示部151を閉じて、標準状態のレポート一覧画面(図13参照)に戻る。
 次に、図4に示した画面の遷移状況におけるレポート閲覧時の拡大画像表示画面について説明する。図15は、レポート閲覧時の拡大画像表示画面を示す説明図である。
 詳細表示状態のレポート一覧画面(図14参照)において売場画像を選択すると、図15に示す拡大画像表示画面がポップアップ表示される。
 この拡大画像表示画面には、拡大画像表示部161と、説明表示部162と、左向きおよび右向きの矢印ボタン163a,163bと、が設けられている。
 拡大画像表示部161には、拡大した売場画像が表示される。この売場画像には手書き入力による描画像129も表示されている。説明表示部162には、店舗名称、売場名称および日時が表示される。矢印ボタン163a,163bは、詳細表示状態のレポート一覧画面(図14参照)の詳細表示部151に表示された2つの売場画像を切り替えるものであり、左向きの矢印ボタン163aを操作すると、レポートに添付された売場画像が表示され、右向きの矢印ボタン163bを操作すると、現在の売場画像が表示される。
 次に、図4に示した画面の遷移状況におけるメッセージ表示画面について説明する。図16は、メッセージ表示画面を示す説明図である。
 このメッセージ表示画面は、ログインした直後にモニタリング画面(図5の店舗比較画面)上にホップアップ表示される。このメッセージ表示画面では、未読のレポート(新着レポート)がある場合や、パスワードの有効期限が切れている場合に、その旨のメッセージ(アラート)がメッセージ表示部(アラートボックス)171に表示される。これにより、未読のレポートが存在することや、パスワードの有効期限が切れていることをユーザが把握することができる。
 次に、図4に示した画面の遷移状況におけるユーザ設定画面について説明する。図17は、ユーザ設定画面を示す説明図である。
 モニタリング画面(図5~図8参照)のメインメニュー71で設定を選択し、続いてサブメニューでユーザ設定を選択すると、図17に示すユーザ設定画面がポップアップ表示される。
 このユーザ設定画面には、表示時刻設定部181と、画質設定部182と、設定ボタン183と、取消ボタン184と、が設けられている。
 表示時刻設定部181は、指定時刻確認画面(図7参照)に表示させる売場画像の時刻を設定するものである。ここでは、複数の表示時刻を設定することができる。なお、通常、店舗における重要な時間帯である7:00、14:00、23:00が、初期状態で表示時刻に設定される。
 画質設定部182は、モニタリング画面(図5~図8参照)の画像一覧表示部75に表示させる売場画像(拡大画像表示画面を除く)の画質を切り替えるものである。高画質モードをオフとすると、低解像度のサムネイル画像が表示される。高画質モードをオンとすると、高解像度の原画像が表示される。
 設定ボタン183を操作すると、入力した設定内容を管理サーバ22のユーザ情報に反映させる処理が行われて、このユーザ設定画面が閉じられる。取消ボタン184を操作すると、入力した内容を反映させることなく、ユーザ設定画面が閉じられる。
 次に、図4に示した画面の遷移状況におけるトピック設定画面について説明する。図18は、トピック設定画面を示す説明図である。
 モニタリング画面(図5~図8参照)のメインメニュー71で設定を選択し、続いてサブメニューでトピック設定を選択すると、図18に示すトピック設定画面がポップアップ表示される。
 このトピック設定画面は、ログインした直後に表示されるトピック表示画面(図19参照)に表示されるトピックを設定するものである。このトピックの設定は、ユーザが管理者である場合にのみ行うことができる。
 このトピック設定画面には、無効設定部191と、タイトル入力部192と、組織選択部193と、トピック内容入力部194と、が設けられている。
 無効設定部191には、チェックボックスが設けられており、ここでトピックの表示を無効に設定することができる。タイトル入力部192には、トピックのタイトルを入力する。組織選択部193は、トピックを表示させる対象となるグループを選択するものであり、プルダウンメニューでグループを選択する。トピック内容入力部194には、トピックの内容、すなわち、管理者がグループに所属しているユーザに通知するメッセージを入力する。
 設定ボタン195を操作すると、入力した設定内容を管理サーバ22のトピック管理情報に反映させる処理が行われて、トピック設定画面が閉じられる。取消ボタン196を操作すると、入力した内容を反映させることなく、トピック設定画面が閉じられる。
 次に、図4に示した画面の遷移状況におけるトピック表示画面について説明する。図19は、トピック表示画面を示す説明図である。
 このトピック表示画面には、組織表示部201と、タイトル表示部202と、トピック内容表示部203と、再表示設定部204と、了解ボタン205と、が設けられている。
 組織表示部201には、トピックの対象となるグループが表示される。タイトル表示部202には、トピックのタイトルが表示される。トピック内容表示部203には、トピックの内容、すなわち、管理者がグループに所属しているユーザに通知するメッセージが表示される。再表示設定部204には、チェックボックスが設けられており、ログイン時におけるトピック表示画面の再表示を所定の停止期間で停止させることができる。非チェック状態では、ログインする度にトピック表示画面が表示される。なお、停止期間中に管理者がトピックを更新した場合には、トピック表示画面が表示される。
 了解ボタン205を操作すると、トピック表示画面が閉じられる。なお、ユーザが複数のグループに所属している場合には、次のグループに関するトピック表示画面が表示される。
 次に、スマートフォン4で表示される画面について説明する。図20は、スマートフォン4で表示されるモニタリング画面(店舗比較画面)を示す説明図である。
 このモニタリング画面(店舗比較画面)には、メインメニュー表示ボタン211と、トップボタン212と、第1の選択メニュー表示ボタン213と、NOWボタン214と、日付変更ボタン215と、第2の選択メニュー表示ボタン216と、サイトマップ表示部217と、画像一覧表示部218と、が設けられている。
 メインメニュー表示ボタン211を操作すると、メインメニューが表示される。このメインメニューにより、モニタリング、レポート一覧、レポート入力、ユーザ設定、トピック設定、パスワード変更、ログアウトのいずれかを選択することができる。
 トップボタン212を操作すると、トップ画面としての店舗比較画面に遷移する。
 第1の選択メニュー表示ボタン213を操作すると、モニタリング画面(店舗比較画面、売場一覧確認画面、指定時刻確認画面、終日確認画面)に応じた選択メニューが表示される。この選択メニューは、PC3のモニタリング画面(図5~図8参照)における選択メニュー表示部74に相当するものであり、モニタリング画面に応じて選択項目が異なる。
 すなわち、店舗比較画面、指定時刻確認画面、終日確認画面の場合には、選択メニュー表示ボタン213に「売場」の文字が表示され、選択メニュー表示ボタン213を操作すると、売場選択メニューが表示され、画像一覧表示部218に表示された店舗ごとの売場画像を別の売場に変更することができる。売場一覧確認画面の場合には、選択メニュー表示ボタン213に「店舗」の文字が表示され、選択メニュー表示ボタン213を操作すると、店舗選択メニューが表示され、画像一覧表示部218に表示された売場ごとの売場画像を別の店舗に変更することができる。
 また、第1の選択メニュー表示ボタン213は、レポート一覧画面でも表示される。この場合、選択メニュー表示ボタン213に「操作」の文字が表示され、選択メニュー表示ボタン213を操作すると、操作選択メニューが表示される。この操作選択メニューでは、更新および削除のいずれかを選択することができ、レポート一覧画面に表示されるレポートを最新の状態に更新したり、レポート一覧画面に表示されたレポートを削除したりすることができる。
 また、スマートフォン4の場合にも、モニタリング画面(店舗比較画面、売場一覧確認画面、指定時刻確認画面、終日確認画面)の売場画像を選択すると、拡大画像表示画面が表示される。
 NOWボタン214では、PC3のモニタリング画面(図5~図8参照)と同様に、表示日時を現在の時刻(最新の画像取得時刻)に変更することができる。日付変更ボタン215では、PC3のモニタリング画面(図5~図8参照)と同様に、カレンダーを表示させて日付を選択することができる。
 第2の選択メニュー表示ボタン216を操作すると、モニタリング画面(店舗比較画面、売場一覧確認画面、指定時刻確認画面、終日確認画面)に応じた選択メニューが表示される。この選択メニューは、モニタリング画面に応じて選択項目が異なる。
 すなわち、店舗比較画面、売場一覧確認画面の場合には、第2の選択メニュー表示ボタン216に、現在設定されている表示時刻が表示され、第2の選択メニュー表示ボタン216を操作すると、時刻選択メニュー(セレクトボックス)が表示され、この時刻選択メニューで表示時刻を変更することができる。指定時刻確認画面の場合には、第2の選択メニュー表示ボタン216に、現在設定されている表示間隔(週間隔、日間隔)が表示され、第2の選択メニュー表示ボタン216を操作すると、表示間隔選択メニュー(セレクトボックス)が表示され、この表示間隔選択メニューで表示間隔を変更することができる。終日確認画面の場合には、第2の選択メニュー表示ボタン216に、現在設定されている表示間隔(15分、30分、1時間、2時間)が表示され、第2の選択メニュー表示ボタン216を操作すると、表示間隔選択メニュー(セレクトボックス)が表示され、この表示間隔選択メニューで表示間隔を変更することができる。
 サイトマップ表示部217は、PC3のモニタリング画面(図5~図8参照)と同様に、画面の遷移状況を表示するものであり、モニタリング画面(店舗比較画面、売場一覧確認画面、指定時刻確認画面、終日確認画面)に応じて、「全店」、「店舗名」、「売場名」、「詳細」のボタンが表示され、各ボタンを操作すると、対応するモニタリング画面に遷移する。
 画像一覧表示部218には、PC3のモニタリング画面(図5~図8参照)と同様に、縦横に並ぶ複数の売場画像表示部221と、この売場画像表示部221の下に配置された説明表示部222と、が設けられている。売場画像表示部221には、売場画像が表示される。説明表示部222には、店舗比較画面の場合には店舗名称が表示され、売場一覧確認画面の場合には売場名称が表示され、指定時刻確認画面および終日確認画面の場合には時刻が表示される。
 また、図20に示す例では、横方向に2つの売場画像が並んで表示される。縦方向の売場画像の配置数は任意であり、1画面に収まりきらない場合は、縦スクロールバーでスクロールさせればよい。
 なお、スマートフォン4における画面の遷移は、PC3の場合と同様である。また、スマートフォン4で表示される画面の表示内容は、PC3の場合と略同様であるが、画面が小さくなることで、若干の変更を行うとよい。例えば、スマートフォン4のモニタリング画面では、タイムバーを省略するようにしてもよい。また、レポート一覧画面でレポートを選択すると、別画面に遷移して、その別画面において、選択されたレポートの内容(日時、店舗名、件名、および評価)とともに売場画像を表示するようにしてもよい。
 次に、図20に示したモニタリング画面における売場画像の拡大表示について説明する。図21は、モニタリング画面における売場画像の拡大表示状況を示す説明図である。
 スマートフォン4でも、PC3の場合のユーザ設定画面(図17参照)と同様のユーザ設定画面が表示され、このユーザ設定画面で高解像度モードを選択することができ、高解像度モードを選択すると、常時、モニタリング画面で高解像度の売場画像(原画像)が表示される。
 また、図21に示すように、モニタリング画面は、ピンチアウト操作(画面に触れた2本の指を広げる操作)で拡大表示させることができる。この場合、売場画像が高解像度で表示されているため、拡大表示しても精細な画像を閲覧することができる。また、拡大表示した状態のままでスクロール操作(画面に触れた指をずらす操作)を行って画面を移動させることで、別の売場画像も拡大表示で閲覧することができる。
 なお、画面を拡大表示させる操作はピンチアウトに限定されるものではなく、公知の種々の方式を採用すればよく、例えば、タップ操作(画面を軽く叩いて一瞬だけ画面に触れる操作)で所定の倍率で拡大表示されるようにしてもよい。
 このように本実施形態では、売場画像を選択する操作で拡大画像表示画面を別に表示させなくても、モニタリング画面のままで拡大表示させることで、売場の状況を詳細に観察することができ、操作性を高めることができる。なお、このような拡大表示の効果はPC3の場合も同様である。
 次に、施設運営支援システムの変形例について説明する。図22は、施設運営支援システムの変形例に係るカメラ221およびレコーダ231の概略構成を示すブロック図である。
 この変形例では、前記の実施形態(図1参照)と同様に、カメラ221を、ネットワーク接続可能な、いわゆるネットワークカメラ(IPカメラ)としているが、このカメラ221は、2系統の出力が可能に構成されており、専用の通信ケーブル(例えば同軸ケーブル)を介してレコーダ231に接続されている。レコーダ231は、防犯・防災の用途で設けられるものであり、セキュリティが確保されている。
 カメラ221は、撮像部222と、プロセッサ223と、記憶デバイス224と、通信部225と、を備えている。
 撮像部222および記憶デバイス224は、前記の実施形態(図3参照)と同様である。プロセッサ223は、前記の実施形態(図1参照)と同様に、撮像部222が出力される撮像画像に対して動体除去処理(背景画像生成処理)を行うが、撮像部222から出力される未処理画像をそのまま通信部225に入力することができる。通信部225は、2系統の出力が可能になっており、動体を除去した閲覧用静止画像を閉域ネットワークを介して録画サーバ21に送信するとともに、動体が除去されていない未処理画像を専用の通信ケーブルを介してレコーダ231に送信する。
 レコーダ231は、プロセッサ232と、記憶デバイス233と、通信部234と、を備えている。
 通信部234は、カメラ221から送信される未処理画像を受信する。プロセッサ232は、通信部234で受信した未処理画像を記憶デバイス233に記憶させる制御などを行う。記憶デバイス233は、プロセッサ232で実行されるプログラムや、通信部234で受信した未処理画像を記憶する。この記憶デバイス233には、長期間の画像を記憶可能なように、ハードディスクドライブなどの大容量の記憶デバイスが採用される。
 次に、施設運営支援システムの別の変形例について説明する。図23は、施設運営支援システムの変形例に係るカメラ241およびレコーダ251の概略構成を示すブロック図である。図24は、施設運営支援システムの変形例に係るカメラ241およびアダプタ261の概略構成を示すブロック図である。
 前記の実施形態(図1参照)では、カメラ1を、ネットワーク接続可能な、いわゆるネットワークカメラ(IPカメラ)としたが、図23および図24に示す変形例では、カメラ241が、専用の通信ケーブル(例えば同軸ケーブル)を介してレコーダ(施設画像蓄積装置)251またはアダプタ(施設画像出力制御装置)261に接続されている。レコーダ251およびアダプタ261はネットワーク接続可能に構成され、閉域ネットワークを介して録画サーバ21に接続されている。
 カメラ241は、撮像部242と、プロセッサ243と、記憶デバイス244と、通信部245と、を備えている。
 撮像部242および記憶デバイス244は、前記の実施形態(図3参照)と同様である。プロセッサ243は、動体除去処理(背景画像生成処理)の機能を有しておらず、撮像部242から出力される未処理画像をそのまま通信部245に入力させる。通信部245は、未処理画像を専用の通信ケーブルを介してレコーダ251またはアダプタ261に送信する。
 図23に示すレコーダ251は、図22に示した例と同様に、プロセッサ252と、記憶デバイス253と、通信部254と、を備えているが、図22に示した例とは異なり、プロセッサ252が、通信部254で受信した未処理画像に対して動体除去処理(背景画像生成処理)を行う。この動体除去処理は、前記の実施形態におけるカメラ1のプロセッサ32で行われる処理と同様である。通信部254は、プロセッサ252で生成される処理画像を録画サーバ21に送信する。記憶デバイス253は、図22に示した例と同様である。
 図24に示すアダプタ261は、プロセッサ262と、記憶デバイス263と、通信部264と、を備えている。
 通信部264およびプロセッサ262は、図23に示したレコーダ251と同様である。記憶デバイス263は、プロセッサ262で実行されるプログラムを記憶するが、レコーダ251とは異なり、プロセッサ262での処理のために未処理画像を一時的に記憶し、長期間の画像を記憶しないため、小容量の記憶デバイスが採用される。
 以上のように、本出願において開示する技術の例示として、実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施形態にも適用できる。また、上記の実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。
 例えば、前記の実施形態では、コンビニエンスストアなどの小売店舗の例について説明したが、銀行などの金融機関や、ホテルなどの宿泊施設など、物品や役務を利用者に提供する各種の施設に広く適用することができる。
 また、前記の実施形態では、ユーザ端末装置としてPCおよびスマートフォンの例を示したが、ユーザ端末装置はこれに限定されるものではなく、タブレット端末も可能である。なお、タブレット端末では、PCと同様の画面表示を行うようにすればよい。
 また、前記の実施形態では、クラウドコンピュータシステム2が、録画サーバ21、管理サーバ22、および配信サーバ23の3つの情報処理装置を備えた構成としたが、各サーバの機能を1つの情報処理装置で実現するようにしてもよい。
 また、前記の実施形態では、図2に示したように、カメラ1を、魚眼レンズを用いて360度の撮影範囲を有する全方位カメラとしたが、所定の画角を有するカメラ、いわゆるボックスカメラでも可能である。
 本開示に係る施設撮像装置、施設画像収集装置、施設画像蓄積装置、および施設画像出力制御装置は、複数の施設内を撮像した画像を収集する際のネットワーク上のトラフィックの負荷を改善すると共に、未処理の画像が流出するリスクを解消して、プライバシーが保護された画像を効率よく収集することができる効果を有し、施設内を撮像した画像をネットワークを介して施設画像収集装置に提供する施設撮像装置、施設内を撮像した画像をネットワークを介して施設撮像装置から取得して蓄積する施設画像収集装置、施設内を撮像する施設撮像装置から出力される画像を蓄積するとともに画像をネットワークを介して施設画像収集装置に出力する施設画像蓄積装置、および施設内を撮像する施設撮像装置に接続されて施設画像収集装置へのネットワークを介した画像出力を制御する施設画像出力制御装置などとして有用である。
 また、本開示に係る施設運営支援装置、ユーザ端末装置、および施設運営支援方法は、店舗数や売場数が増加した場合でも、スーパーバイザーや多店舗を経営するオーナなどの複数のユーザが店舗内の状況をどこからでも効率よく確認でき、店舗運営改善のための業務を合理的に行うことができる効果を有し、物品または役務を利用者に提供する施設を運営するユーザの業務を支援する施設運営支援装置、ユーザ端末装置、および施設運営支援方法などとして有用である。
1 カメラ(施設撮像装置)
2 クラウドコンピュータシステム(施設運営支援装置)
3 PC(ユーザ端末装置)
4 スマートフォン(ユーザ端末装置)
21 録画サーバ(施設画像収集装置、画像蓄積部、情報処理装置)
22 管理サーバ(管理部、情報処理装置)
23 配信サーバ(配信部、情報処理装置)
31 撮像部
32 プロセッサ
33 記憶デバイス
34 通信部
41 プロセッサ
42 記憶デバイス
43 通信部
72 日時入力部
81 NOWボタン
82 日付変更部
82a 日付表示部
82b,82c 矢印ボタン
83 時刻変更部
83a 時刻表示部
83b,83c 矢印ボタン
83d タイムバー
93 店舗別画像一覧
94 売場選択メニュー
95 売場別画像一覧
96 店舗選択メニュー
97 日別画像一覧
98 時刻別画像一覧
251 レコーダ(施設画像蓄積装置)
252 プロセッサ
253 記憶デバイス
254 通信部(受信部、送信部)
261 アダプタ(施設画像出力制御装置)
262 プロセッサ
264 通信部(受信部、送信部)

Claims (19)

  1.  施設内を撮像した画像をネットワークを介して施設画像収集装置に提供する施設撮像装置であって、
     前記施設内を撮像して、時間的に連続する撮像画像を順次出力する撮像部と、
     前記撮像画像に対して画像処理を実施して処理画像を出力するプロセッサと、
     前記処理画像を前記ネットワークを介して前記施設画像収集装置に送信する通信部と、
    を備え、
     前記プロセッサは、前記撮像部から前記撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を前記処理画像として生成し、
     前記通信部は、前記閲覧用静止画像を所定のタイミングで送信することを特徴とする施設撮像装置。
  2.  前記支配画像情報は、画素単位の色情報であることを特徴とする請求項1に記載の施設撮像装置。
  3.  前記通信部は、他の施設撮像装置と共通のタイミングで前記施設画像収集装置から送信される画像送信要求に応じて、前記閲覧用静止画像を送信することを特徴とする請求項1または請求項2に記載の施設撮像装置。
  4.  前記通信部は、動体を除去した前記閲覧用静止画像を、施設運営支援用の画像蓄積装置に出力するとともに、動体が除去されていない未処理画像を、セキュリティが確保された別の画像蓄積装置に出力することを特徴とする請求項1から請求項3のいずれか1項に記載の施設撮像装置。
  5.  施設内を撮像した画像をネットワークを介して施設撮像装置から取得して蓄積する施設画像収集装置であって、
     前記施設撮像装置から送信される閲覧用静止画像を受信する通信部と、
     前記閲覧用静止画像を蓄積する記憶デバイスと、
     前記施設撮像装置から前記閲覧用静止画像を取得するタイミングを制御するプロセッサと、を備え、
     前記通信部は、前記プロセッサの制御に基づいて、所定のタイミングで定期的に画像送信要求を行い、前記画像送信要求に応じて前記施設撮像装置から送信される閲覧用静止画像を受信することを特徴とする施設画像収集装置。
  6.  前記通信部は、前記タイミングにおける前記閲覧用静止画像の取得が失敗すると、次の前記タイミングまでの期間において、前記閲覧用静止画像の取得が成功するまで、前記画像送信要求を繰り返すことを特徴とする請求項5に記載の施設画像収集装置。
  7.  施設内を撮像する施設撮像装置から出力される画像を蓄積するとともに前記画像をネットワークを介して施設画像収集装置に出力する施設画像蓄積装置であって、
     前記施設撮像装置から順次出力される時間的に連続する撮像画像を受信する受信部と、
     前記撮像画像を蓄積する記憶デバイスと、
     前記撮像画像に対して画像処理を実施して、処理画像を出力するプロセッサと、
     前記処理画像を前記ネットワークを介して前記施設画像収集装置に送信する送信部と、
    を備え、
     前記プロセッサは、前記施設撮像装置から前記撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を前記処理画像として生成し、
     前記送信部は、前記閲覧用静止画像を所定のタイミングで送信することを特徴とする施設画像蓄積装置。
  8.  施設内を撮像する施設撮像装置に接続されて施設画像収集装置へのネットワークを介した画像出力を制御する施設画像出力制御装置であって、
     前記施設撮像装置から順次出力される時間的に連続する撮像画像を受信する受信部と、
     前記撮像画像に対して画像処理を実施して、処理画像を出力するプロセッサと、
     前記処理画像を前記ネットワークを介して前記施設画像収集装置に送信する送信部と、
    を備え、
     前記プロセッサは、前記施設撮像装置から前記撮像画像が入力される度に、支配画像情報を更新して、動体を除去した閲覧用静止画像を前記処理画像として生成し、
     前記送信部は、前記閲覧用静止画像を所定のタイミングで送信することを特徴とする施設画像出力制御装置。
  9.  物品または役務を利用者に提供する施設を運営するユーザの業務を支援する施設運営支援装置であって、
     前記施設における各エリアのエリア画像を蓄積する画像蓄積部と、
     前記エリア画像を管理する管理部と、
     前記エリア画像を含む閲覧画面をユーザ端末装置に配信する配信部と、
    を備え、
     前記配信部は、共通の前記エリアに関する前記施設ごとの前記エリア画像を施設名称とともに並べた施設別画像一覧と、前記施設別画像一覧における前記エリアを変更するエリア選択メニューと、を含む前記閲覧画面を生成して前記ユーザ端末装置に配信することを特徴とする施設運営支援装置。
  10.  前記配信部は、入力方法が異なる複数の日時入力部を前記閲覧画面に表示して、複数の前記日時入力部により、前記施設別画像一覧における前記エリア画像の表示日時をユーザに入力させることを特徴とする請求項9に記載の施設運営支援装置。
  11.  前記日時入力部は、カレンダーで日時を指定するカレンダー入力、所定の間隔で日時を変更する日時送り入力、タイムスケールにおける時間軸方向の位置で日時を指定するスケール入力、および現在の日時に変更する現在日時入力のうちの少なくとも2つ以上の入力方法によるものであることを特徴とする請求項10に記載の施設運営支援装置。
  12.  前記配信部は、前記施設別画像一覧において前記施設を選択するユーザの操作に基づいて、同一の前記施設における前記エリア画像を前記エリアの名称とともに並べたエリア別画像一覧と、前記エリア別画像一覧における前記施設を変更する施設選択メニューと、を含む閲覧画面を生成して前記ユーザ端末装置に配信することを特徴とする請求項9から請求項11のいずれかに記載の施設運営支援装置。
  13.  前記配信部は、前記エリア別画像一覧において前記エリアを選択するユーザの操作に基づいて、選択された前記エリアに関する所定の期間内の各日における前記エリア画像を並べた日別画像一覧と、前記日別画像一覧における前記エリアを変更するエリア選択メニューと、を含む閲覧画面を生成して前記ユーザ端末装置に配信することを特徴とする請求項12に記載の施設運営支援装置。
  14.  前記日別画像一覧には、予め指定された時刻の前記エリア画像が日別に並べて表示されることを特徴とする請求項13に記載の施設運営支援装置。
  15.  前記配信部は、前記日別画像一覧において日付を選択するユーザの操作に基づいて、選択された日における各時刻の前記エリア画像を時系列で並べた時刻別画像一覧と、前記時刻別画像一覧における前記エリアを変更するエリア選択メニューと、を含む閲覧画面を生成して前記ユーザ端末装置に配信することを特徴とする請求項13または請求項14に記載の施設運営支援装置。
  16.  前記配信部は、高画質モードを選択するユーザの操作に基づいて、高解像度の前記エリア画像を含む前記閲覧画面を生成して前記ユーザ端末装置に配信することを特徴とする請求項9から請求項15のいずれか1項に記載の施設運営支援装置。
  17.  前記画像蓄積部は、前記施設の内部を撮像した画像から動体を除去した閲覧用静止画像を施設撮像装置から所定のタイミングで定期的に取得して、前記閲覧用静止画像から前記エリア画像を生成して蓄積し、
     前記配信部は、ユーザが指定した時刻の前記エリア画像をユーザ端末装置に配信することを特徴とする請求項9から請求項16のいずれか1項に記載の施設運営支援装置。
  18.  物品または役務を利用者に提供する施設を運営するユーザの業務を支援する施設運営支援装置から配信される情報に基づいて画面を表示するユーザ端末装置であって、
     共通のエリアに関する施設ごとのエリア画像を施設名称とともに並べた施設別画像一覧と、前記施設別画像一覧におけるエリアを変更するエリア選択メニューと、を含む閲覧画面を表示することを特徴とするユーザ端末装置。
  19.  物品または役務を利用者に提供する施設を運営するユーザの業務を情報処理装置により支援する施設運営支援方法であって、
     前記情報処理装置は、
     前記施設における各エリアのエリア画像を蓄積し、
     共通の前記エリアに関する前記施設ごとの前記エリア画像を施設名称とともに並べた施設別画像一覧と、前記施設別画像一覧における前記エリアを変更するエリア選択メニューと、を含む閲覧画面を生成してユーザ端末装置に配信することを特徴とする施設運営支援方法。
PCT/JP2016/003646 2015-10-30 2016-08-08 施設撮像装置、施設画像収集装置、施設画像蓄積装置、施設画像出力制御装置、施設運営支援装置、ユーザ端末装置、および施設運営支援方法 WO2017072990A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/769,102 US20180300802A1 (en) 2015-10-30 2016-08-08 Facility imaging device, facility image collecting device, facility image storage device, facility image output control device, facility operation support device, user terminal device, and facility operation support method

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2015214994A JP6226249B2 (ja) 2015-10-30 2015-10-30 施設撮像装置、施設画像収集装置、施設画像蓄積装置、および施設画像出力制御装置
JP2015214986A JP6161013B2 (ja) 2015-10-30 2015-10-30 施設運営支援装置および施設運営支援方法
JP2015-214986 2015-10-30
JP2015-214994 2015-10-30

Publications (1)

Publication Number Publication Date
WO2017072990A1 true WO2017072990A1 (ja) 2017-05-04

Family

ID=58631525

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/003646 WO2017072990A1 (ja) 2015-10-30 2016-08-08 施設撮像装置、施設画像収集装置、施設画像蓄積装置、施設画像出力制御装置、施設運営支援装置、ユーザ端末装置、および施設運営支援方法

Country Status (2)

Country Link
US (1) US20180300802A1 (ja)
WO (1) WO2017072990A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3407593B1 (en) * 2017-05-24 2019-10-30 Axis AB Device, system and method for providing additional functionality to an apparatus
JPWO2021039312A1 (ja) * 2019-08-28 2021-03-04

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005236464A (ja) * 2004-02-18 2005-09-02 Hitachi Ltd 監視カメラ映像配信システム
JP2006140757A (ja) * 2004-11-12 2006-06-01 Nomura Research Institute Ltd 画像処理システム、画像処理プログラム及び画像処理方法
JP2010181920A (ja) * 2009-02-03 2010-08-19 Optex Co Ltd エリア管理システム
JP2015103153A (ja) * 2013-11-27 2015-06-04 パナソニックIpマネジメント株式会社 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法
JP2015159419A (ja) * 2014-02-24 2015-09-03 パナソニックIpマネジメント株式会社 監視カメラシステム及び監視カメラシステムの制御方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005236464A (ja) * 2004-02-18 2005-09-02 Hitachi Ltd 監視カメラ映像配信システム
JP2006140757A (ja) * 2004-11-12 2006-06-01 Nomura Research Institute Ltd 画像処理システム、画像処理プログラム及び画像処理方法
JP2010181920A (ja) * 2009-02-03 2010-08-19 Optex Co Ltd エリア管理システム
JP2015103153A (ja) * 2013-11-27 2015-06-04 パナソニックIpマネジメント株式会社 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法
JP2015159419A (ja) * 2014-02-24 2015-09-03 パナソニックIpマネジメント株式会社 監視カメラシステム及び監視カメラシステムの制御方法

Also Published As

Publication number Publication date
US20180300802A1 (en) 2018-10-18

Similar Documents

Publication Publication Date Title
US10951862B2 (en) Systems and methods for managing and displaying video sources
US10602080B2 (en) Flow line analysis system and flow line analysis method
US10445693B2 (en) Goods monitoring device, goods monitoring system, and goods monitoring method
US10304032B2 (en) Product monitoring device, product monitoring system, and product monitoring method
US6847393B2 (en) Method and system for monitoring point of sale exceptions
US9948901B2 (en) Moving information analyzing system, camera, and moving information analyzing method
US10235574B2 (en) Image-capturing device, recording device, and video output control device
JP2017182654A (ja) 施設内活動分析装置、施設内活動分析システムおよび施設内活動分析方法
JP6176503B2 (ja) 施設運営支援装置、ユーザ端末装置、および施設運営支援方法
JP2015222881A (ja) モニタリング装置、モニタリングシステムおよびモニタリング方法
US20070260429A1 (en) Method and apparatus for monitoring
DE112015005301T5 (de) Bildaufnahmevorrichtung, Aufzeichnungsvorrichtung und Bewegtbildausgabesteuervorrichtung
JP5866542B1 (ja) 施設管理支援装置、施設管理支援システムおよび施設管理支援方法
US10497130B2 (en) Moving information analyzing system and moving information analyzing method
JP5830706B2 (ja) 店員作業管理装置、店員作業管理システムおよび店員作業管理方法
JP5707561B1 (ja) モニタリング装置、モニタリングシステムおよびモニタリング方法
JP6161013B2 (ja) 施設運営支援装置および施設運営支援方法
WO2018012389A1 (ja) 施設運営支援装置、ユーザ端末装置、および施設運営支援方法
WO2017072990A1 (ja) 施設撮像装置、施設画像収集装置、施設画像蓄積装置、施設画像出力制御装置、施設運営支援装置、ユーザ端末装置、および施設運営支援方法
JP6024933B2 (ja) 店員作業管理装置、店員作業管理システムおよび店員作業管理方法
JP6226249B2 (ja) 施設撮像装置、施設画像収集装置、施設画像蓄積装置、および施設画像出力制御装置
US20170330434A1 (en) Flow line analysis system and flow line display method
JP6176502B2 (ja) 施設運営支援装置、ユーザ端末装置、および施設運営支援方法
JP6288567B2 (ja) 施設運営支援装置、および施設運営支援方法
JP6260959B2 (ja) 施設運営支援装置、および施設運営支援方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16859231

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15769102

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16859231

Country of ref document: EP

Kind code of ref document: A1