WO2018110663A1 - サービス状況管理システム - Google Patents

サービス状況管理システム Download PDF

Info

Publication number
WO2018110663A1
WO2018110663A1 PCT/JP2017/044962 JP2017044962W WO2018110663A1 WO 2018110663 A1 WO2018110663 A1 WO 2018110663A1 JP 2017044962 W JP2017044962 W JP 2017044962W WO 2018110663 A1 WO2018110663 A1 WO 2018110663A1
Authority
WO
WIPO (PCT)
Prior art keywords
service
image
time limit
facility
unit
Prior art date
Application number
PCT/JP2017/044962
Other languages
English (en)
French (fr)
Inventor
岡本 明浩
Original Assignee
旭化成株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 旭化成株式会社 filed Critical 旭化成株式会社
Priority to US16/469,871 priority Critical patent/US10878347B2/en
Priority to JP2018556747A priority patent/JP6730455B2/ja
Priority to CN201780077833.XA priority patent/CN110073397A/zh
Publication of WO2018110663A1 publication Critical patent/WO2018110663A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/02Reservations, e.g. for tickets, services or events
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10712Fixed beam scanning
    • G06K7/10722Photodetector array or CCD scanning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404Methods for optical code recognition
    • G06K7/1408Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/14131D bar codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404Methods for optical code recognition
    • G06K7/1408Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/14172D bar codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information

Definitions

  • the present invention relates to a service status management system.
  • Patent Document 1 a system that displays a situation in a predetermined facility on a terminal connected via a network is known (for example, Patent Document 1).
  • Patent Document 2 a system for sending a sales promotion e-mail describing a time service for discounting a visit to a mobile phone of a customer who has used it during the predetermined time period when a visit is made at a predetermined time period when there are enough seats.
  • Patent Document 2 a system for sending a sales promotion e-mail describing a time service for discounting a visit to a mobile phone of a customer who has used it during the predetermined time period when a visit is made at a predetermined time period when there are enough seats.
  • Patent Document 2 the accuracy of the transmission of the service status to potential visitors (prospect customers) and the management of the service status on the facility side are not sufficient.
  • An object of the present invention is to provide a service status management system capable of improving the accuracy of service status transmission to potential visitors and management of service status on the facility side.
  • a photographing unit that photographs an inside of a facility is associated with service information including a service provided in the facility and a validity period of the service.
  • An object registration unit for registering the service object in advance, an object detection unit for detecting the service object registered in the object registration unit in the captured image captured by the imaging unit, and the object detection unit for detecting the service object.
  • a time limit setting unit for setting a time limit for an effective period starting from the time when it is detected for the first time, a time limit area where a time limit information image representing information related to the time limit can be displayed, and a facility image for displaying a facility image representing the status of the facility
  • An image generation unit for generating a transmission image for transmitting a status of the service to an external terminal device;
  • the transmission image generating unit has generated and a transmission image transmitting unit that transmits to the terminal device.
  • a service status management system capable of improving the accuracy of service status management for potential visitors and management of service status on the facility side.
  • FIG. 1 is a block diagram illustrating an example of a functional configuration of a service status management system 1 according to the present embodiment.
  • the service status management system 1 manages information on the status of services such as reservations and discounts provided by facilities (for example, restaurants and the like), and also makes reservations for prospective visitors and “I want to go if facilities are available”. It is a system that transmits the information to potential visitors who want to go if there is a discount.
  • the service status management system 1 includes a processing unit 10.
  • the processing unit 10 is configured by, for example, developing a software program on a predetermined computer (hereinafter referred to as “processing computer”), and executing the arithmetic processing by the CPU of the processing computer in accordance with an instruction of the software program.
  • the processing computer may be a computer (for example, a microcomputer) built in a camera used as the photographing unit 11 described later, or a computer (for example, a personal computer) installed in the facility, or set outside the facility. Or a computer (for example, a server computer). Further, the processing performed by the processing unit 10 may be distributed by combining these computers.
  • the service status management system 1 includes a photographing unit 11 that photographs the inside of the facility.
  • the image capturing unit 11 is a camera that can transfer captured images to a computer or the like in real time, and is connected to a processing computer so as to be communicable.
  • the imaging unit 11 is installed at a position where the inside of the facility can be widely accommodated in the composition.
  • a restaurant is assumed as the facility photographed by the photographing unit 11.
  • the service status management system 1 includes an object registration unit 13 that pre-registers a service object associated with a service provided in a facility (such as a restaurant photographed by the photographing unit 11) and service information including the validity period of the service. Is provided.
  • the object registration unit 13 is a predetermined storage area such as a memory in a processing computer.
  • Services linked to service objects include, for example, a reservation service in which a restaurant reserves a table in advance for a customer who promises to visit the store (expected visitor), or a prospective customer (potential visitor) who is likely to visit the store.
  • there is a discount service where the restaurant side reduces the price of dishes and products.
  • a store that provides these services is referred to as a service providing facility.
  • a person (such as an employee or shop owner) who provides a service at a service providing facility is called a service provider.
  • the service validity period is a period set in advance by the service provider and means a period during which the potential visitors and visitors can use the service provided by the service provider.
  • the validity period of the reservation service is a period in which a table is reserved for the prospective visitors at the service providing facility.
  • the validity period of the discount service is a period during which a visitor can eat and drink, purchase goods, and the like at a service providing facility with a discounted amount than usual.
  • the service provided by the service providing facility is associated with the service object registered in the object registration unit 13.
  • the service object represents a service (reservation service, discount service, etc.) provided by the service providing facility.
  • the service object may be, for example, a panel printed with barcodes (one-dimensional barcode or two-dimensional barcode) representing numerical values or characters, or a design (picture pattern) that can be identified by colors and figures such as road signs. ) May be a sign-like panel printed on the surface, or may be a panel on which symbols or characters that can be understood by humans are described.
  • the service object may be a pylon or a load cone that can be identified by color or shape, or may be a doll or figurine having a specific shape or design.
  • the service status management system 1 is configured to be able to communicate with an external terminal device 100 via the Internet.
  • the terminal device 100 is a terminal device that is browsed by an unspecified number of potential visitors who are expected to use the service providing facility.
  • the terminal device 100 may be a mobile phone (including a smartphone), a tablet-type terminal device, a personal computer, or the like, or may be a display device (digital signage) other than a personal computer connected via a wired network.
  • Personal computers include notebook personal computers and desktop personal computers.
  • the service status management system 1 includes an object detection unit 15 that detects a service object registered in the object registration unit 13 in a photographed image photographed by the photographing unit 11. For example, when the service object registered in the object registration unit 13 is a sign-like panel, the object detection unit 15 removes noise using the color information of the sign-like panel as when detecting a road sign, Pattern recognition using Hough transform is performed on simple figures printed on the panel. Thereby, the object detection part 15 can detect a sign-like panel with high precision.
  • the object detection unit 15 uses barcode reading software (for example, “ZBAR” which is open source software).
  • the barcode reading software reads a plurality of barcodes such as a JAN code classified as a one-dimensional barcode and a QR code (registered trademark) classified as a two-dimensional barcode, and information contained in the barcode as a reading result (barcode Code type, character information written on barcodes, etc.).
  • barcode Code type character information written on barcodes, etc.
  • a plurality of service objects are registered in the object registration unit 13.
  • the object detection unit 15 When detecting any one of the plurality of service objects in the captured image, the object detection unit 15 outputs information (detection information) about the detected service object to the time limit setting unit 16 described later.
  • FIG. 2 is a diagram showing service objects registered in the object registration unit 13 in a list format.
  • barcode represents an image of a two-dimensional barcode that is a service object in the present embodiment.
  • Charge information represents character information (including numerical values and symbols) included in the two-dimensional barcode.
  • Service content represents the content of a service associated with a two-dimensional barcode that is a service object.
  • the “valid period length” represents the length of the valid period of the service.
  • the service contents set in the “service contents” field and the services set in the “validity length” field for the three two-dimensional barcodes (service objects 131, 133, 135) in the “bar code” field Are associated with each other, and are referred to via the character information in the “character information” column.
  • “reservation” in the “service content” column and “5 minutes” in the “validity length” column are associated with the service object 131.
  • “reservation” in the “service content” column and “7 minutes” in the “validity length” column are associated with the service object 133.
  • This indicates that the service object 133 is an object associated with the reservation service “reservation” whose effective period (table reservation time) is 7 minutes.
  • “discount” in the “service content” column and “30 minutes” in the “validity length” column are associated with the service object 135. This indicates that the service object 135 is an object associated with a discount service “discount” whose effective period (the time during which food / drink / product purchase with a discount amount is possible) is 30 minutes.
  • the two-dimensional barcode includes character information (including numerical values and symbols), and the object detection unit 15 can acquire character information included in the barcode using barcode reading software. Therefore, if the character information included in the two-dimensional barcodes of the service objects 131, 133, and 135 is registered in the object registration unit 13, the object detection unit 15 uses the barcode reading software to identify the two-dimensional service object. The bar code is detected, and the contents shown in the “service contents” field and the “validity length” field can be acquired via the character information shown in the “character information” field in FIG.
  • the barcode reading software performs image processing, so it is not necessary to register the two-dimensional barcode image itself in the object registration unit 13.
  • the object registration unit 13 stores a table including three columns of “character information”, “service content”, and “validity period length” in the list shown in FIG. 2 as a service object registration table. The case will be described.
  • the service status management system 1 sets the expiration date of the service validity period (hereinafter referred to as “service expiration date”) starting from the time when the object detection unit 15 first detects the service object.
  • a setting unit 16 is provided.
  • the service status management system 1 is a facility for displaying a time limit area that can display a time limit information image that represents information related to a service expiration date (time limit information) and a facility image that represents the status of a service providing facility (such as a restaurant).
  • An image generation unit 17 that generates an image having an image region and that transmits a transmission image that conveys the service status to the external terminal device 100 is provided.
  • the time when the object detection unit 15 detects the service object for the first time is the time when the service object is detected for the first time in a situation where the expiration date of the service associated with the detected service object is not defined, That is, it refers to the start time of the service.
  • the object detection unit 15 detects a service object for the first time
  • the service content associated with the detected service object and the length of the validity period of the service are acquired from the service object registration table of the object registration unit 13.
  • the barcode reading software returns “No. 1” as the character information, so that the object detection unit 15 refers to the service object registration table and describes the service content “ “Reservation” and “5 minutes”, which is the length of the effective period of the service, are acquired and output as detection information.
  • the time limit setting unit 16 sets the time limit based on the length of the service validity period.
  • the image generation unit 17 generates a time limit information image based on the time limit set by the time limit setting unit 16. The term information image will be described later.
  • the image generation unit 17 outputs a transmission image composed of the time limit information image and the facility image to the transmission image transmission unit 19. The facility image and the transmission image will be described later.
  • the generation of the transmission image in the image generation unit 17 refers to the generation of a time limit information image constituting the transmission image.
  • the service status management system 1 includes a transmission image transmission unit 19 that transmits the transmission image generated by the image generation unit 17 to the external terminal device 100.
  • the terminal device 100 includes a display unit 101 that can display an image or the like.
  • the user of the terminal device 100 (scheduled visitor / potential visitor) can check the service status in the service providing facility by browsing the transmission image transmitted via the Internet on the display unit 101.
  • the transmission image transmission unit 19 may automatically transmit the transmission image to the terminal device 100 when the transmission image is input from the image generation unit 17, or the transmission image according to a request from the terminal device 100 side. May be sent.
  • the transmission destination when the transmission image is automatically transmitted is, for example, that registration processing is performed in advance by the user of the terminal device 100, or registration processing is automatically performed when the display software is installed in the terminal device 100.
  • the processing unit 10 (see FIG. 1) is stored in a storage area on the processing computer.
  • the transmission destination is self-explanatory because it is directly connected to the service status management system 1 via a local area network or a cable without using the Internet.
  • a computer in which the processing unit 10 is deployed is a microcomputer built in a camera
  • a service provider (employee or store owner) of a service providing facility connects a display to the camera and transmits a captured image or transmission. You can view images.
  • the processing computer in which the processing unit 10 is deployed is a personal computer installed in the providing facility, the photographed image and the transmitted image can be viewed through the display of the personal computer.
  • a service provider employee or store owner
  • the service status management system 1 may be provided to a service providing facility in a state where the processing unit 10, the photographing unit 11, and the object registration unit 13 are combined, and software that realizes each operation of the processing unit 10.
  • Only an application program having a program is provided to a service providing facility, and a service provider (employee or store owner) of the service providing facility develops the application program on a predetermined personal computer or the like, and the personal computer is installed in a commercially available camera or memory. It may be configured by connecting to a storage device such as.
  • FIG. 3 is a diagram illustrating an example of the transmission image 200 generated by the image generation unit 17.
  • the transmission image 200 is an image having a facility image area 210 and a time limit area 203 for displaying the facility image 201.
  • the facility image 201 is an image in the current facility (still image) captured by the capturing unit 11.
  • a panel (service object) on which a two-dimensional barcode is printed is arranged on a table that appears in a region slightly below the center of the image.
  • the time limit area 203 is an area in which the time limit information regarding the expiration date of the service provided by the service providing facility can be displayed.
  • the time limit area 203 may be provided in a different area from the facility image area 210, or may be overlapped with the facility image area 210 as in this example.
  • a time limit information image 231 that is a character string image representing the service content and the remaining time until the service expiration date is displayed in the time limit area 203.
  • the time limit information image 231 is an image displayed in the time limit area 203, and in this example, a character string image “reservation” indicating service contents and a character string image indicating the remaining time (“300 seconds remaining”) are represented by symbols ( Pixels other than characters in an image separated by (colon) are set to be transparent. For example, if the time limit information image 231 is a PNG format file, the transparency can be set. For example, when the user of the terminal device 100 contacts a service providing facility and reserves a table, service objects (for example, service objects 131 and 133) linked to the reservation service in the service providing facility are stored in a predetermined table (for example, in the facility).
  • service objects for example, service objects 131 and 133 linked to the reservation service in the service providing facility are stored in a predetermined table (for example, in the facility).
  • the service status management system 1 includes a facility image 201 in which a service object is shown as shown in FIG.
  • a transmission image 200 composed of the term information image 231 is transmitted to the terminal device 100. This allows the terminal device user (potential visitors / expected visitors) to know the facility status of which table has been reserved and the remaining reservation service through the transmission image 200 displayed on the display unit 101 of the terminal device 100. The service status of 300 seconds remaining is communicated.
  • the time limit area 203 is provided in the facility image area 210 in the vicinity area (lower right area) of the area where the service object is reflected, but the position of the time limit area 203 is not limited to this.
  • the time limit area 203 may be provided at a position in the facility image area 210 that does not hinder the viewing of the service object, or outside the facility image area 210 (for example, outside the facility image area 210 and adjacent to the facility image area 210). Or any one of the upper, lower, left and right areas).
  • the display unit 101 may be configured with a touch panel display, and the time limit area 203 may be provided in the vicinity of the area where the service object is captured only after the user touches the area where the service object is captured with a finger.
  • time limit information image 231 shown in FIG. 3 displays the remaining time of the service effective period in seconds
  • the display mode of the time limit information image 231 is not limited to this.
  • the remaining time may be displayed up to the millisecond unit, or the minute / second / millisecond may be displayed in a colon separator (minute: second: millisecond).
  • the date and time ( ⁇ month ⁇ day ⁇ hour ⁇ minute, or ⁇ hour ⁇ minute by omitting the date) when the service expires may be displayed. Both the remaining time and the date and time when the service expires may be displayed.
  • the character string image “reservation:” indicating the service content is not necessary.
  • FIG. 4 is a flowchart showing an example of the flow of service status transmission processing.
  • the service status management system 1 according to the present embodiment executes the service status transmission process, for example, 30 times per second.
  • the service status transmission process is executed four times per second, for example, by reducing the frequency to prevent a third person from identifying the individual from the walking state of the person reflected in the camera image.
  • Step S1 In step S ⁇ b> 1, the imaging unit 11 captures the inside of the service providing facility and outputs a single captured image to the object detection unit 15 and the image generation unit 17. When the captured image is input, the object detection unit 15 executes the process of step S2.
  • the object detection unit 15 includes the two-dimensional barcode (any of the service objects 131, 133, and 135 shown in FIG. 2) registered in advance in the object registration unit 13 in the captured image captured in step S1. It is searched using bar code reading software (for example, “ZBAR”). Specifically, when the barcode reading software detects the two-dimensional barcode and returns the character information, the object detection unit 15 refers to the service object registration table (see FIG. 2) and “service” via “character information”. "Content” and "Length of validity period" are acquired as service information.
  • bar code reading software for example, “ZBAR”.
  • the object detection unit 15 determines that a registered service object is detected from the captured image when the character information returned by the barcode reading software corresponds to any of the character information in the “character information” column of the service object registration table. judge.
  • the object detection unit 15 determines that any of the service objects 131, 133, and 135 has been detected
  • the service information (service contents, the length of the valid period) read from the service object and the time (detection) at which the service object is detected Time) is output to the time limit setting unit 16 as detection information.
  • the time limit setting unit 16 executes the process of step S3.
  • the object detection unit 15 determines that no registered service object has been detected from the captured image
  • information indicating that none of the service objects 131, 133, and 135 has been detected is a time limit setting unit. 16 output.
  • the service object is not detected from the photographed image
  • the time limit setting unit 16 executes the time limit canceling process in step S10. The term cancellation process will be described later.
  • Step S3 the time limit setting unit 16 determines whether or not the service expiration date has been set. Whether or not the expiration date of the service has been set is determined based on whether or not the expiration date is stored in a predetermined storage area of the computer in which the processing unit 10 (see FIG. 1) is deployed.
  • the expiration time is a time indicating the expiration date of the service, starting from a time (detection time) when the object detection unit 15 detects the service object for the first time, and an expiration date associated with the service object at the detection time. This is the time when the length (see FIG. 2) is added.
  • the fact that the expiration date has been set indicates that the service associated with the service object detected in step S2 has started, and the expiration information image 231 displayed in the expiration area 203 (see FIG. 3) has been created. Indicates that If the expiration date setting unit 16 determines that the expiration date is stored in a predetermined storage area and the expiration date of the service has been set, the processing proceeds to step S5. On the other hand, if the expiration date setting unit 16 determines that the expiration date is not stored in the predetermined storage area and the service expiration date has not been set, that is, the service object has been detected for the first time, the processing proceeds to step S4.
  • the deadline setting unit 16 stores the acquired length of the valid period as it is in the predetermined storage area as the deadline information.
  • the term information is information related to the expiration date of the service, and is used for generating the term information image 231 in the process of step S7 described later.
  • the time limit setting unit 16 sets, for example, a value obtained by converting the unit of the length of the effective period from “minutes” to “seconds” as the remaining time in the time limit information. For example, the length of the valid period “5 minutes” is set in the time limit information as “300 seconds”.
  • the remaining time set in the time limit information in step S4 is updated in step S6 to be described later every time a service object is detected until the expiration time elapses.
  • the time limit information is displayed on the date and time when the service expires in the time limit information image 231 (see FIG. 3)
  • the time limit for expiration is set as the time limit information.
  • the remaining time update process in step S6 is omitted.
  • Step S5 when the current time is acquired, the time limit setting unit 16 determines whether or not the current time has passed the expiration time set in step S4. In this example, the current time on the computer where the processing unit 10 (see FIG. 1) is deployed is used as the current time. If the time limit setting unit 16 determines that the current time has passed the expiration time, the process proceeds to step S8. On the other hand, if the time limit setting unit 16 determines that the current time has not yet passed the expiration date and the service validity period continues, the processing proceeds to step S6.
  • Step S6 In step S ⁇ b> 6, when the time limit setting unit 16 updates the remaining time stored in the predetermined storage area as the time limit information, the service content included in the detection information input from the object detection unit 15 is output to the image generation unit 17. .
  • the image generation unit 17 executes the process of step S7. Specifically, the time limit setting unit 16 updates the value by subtracting the current time from the expiration time. If the execution interval of the service status transmission process is accurately recorded, the remaining time may be updated by subtracting the execution interval (for example, 0.25 seconds if 4 times per second) from the current remaining time. If the time limit information is displayed at the date and time when the service expires in the time limit information image 231, the update process in step S6 is omitted, and the process proceeds from step S5 to step S7.
  • Step S7 the image generation unit 17 generates a time limit information image 231 displayed in the time limit area 203, and proceeds to the process of step S9. Specifically, the image generation unit 17 includes the service content included in the detection information input from the object detection unit 15 via the time limit setting unit 16 and the time limit information stored in a predetermined storage area by the time limit setting unit 16. From this, a time limit information image 231 is generated. If the service content included in the detection information is “reservation” and the remaining time set in the time limit information is 300 seconds in step S7 that has shifted from step S4, the image generation unit 17 reads “reservation”. A character string image in which “remaining 300 seconds” is separated by a colon is generated.
  • a time limit information image 231 representing information related to the service expiration date as shown in FIG. 3 is generated.
  • step S7 that has shifted from step S6, when the remaining time is less than the decimal point, such as “299.75 seconds”, the decimal point may be rounded down and displayed as “299 seconds”.
  • the remaining time set in the time limit information is a value indicating the length of the validity period initially set in step S4 when the service object is detected for the first time, and is a value updated in step S6.
  • the remaining time of the time limit information decreases. For this reason, the remaining time of the valid period of the service is displayed in a countdown manner in the time limit information image 231.
  • the time limit information image 231 can be generated only once when the service object is detected for the first time. Can be used repeatedly.
  • the image generation unit 17 detects the service object (Yes in Step S2) and the time limit setting unit 16 determines that the service expiration date has not elapsed (No in Step S5). ), A time limit information image 231 in which the time limit information is displayed is generated and displayed in the time limit area 203 of the transmission image 200.
  • the generation of the transmission image 200 in the image generation unit 17 refers to the generation of the time limit information image 231.
  • Step S8 the image generation unit 17 deletes the time limit information of the time limit information image 231 displayed in the time limit area 203 (see FIG. 3), and proceeds to the process of step S9.
  • To delete the term information for example, when the term region 203 overlaps the facility image region 210, it means to make all the term information images 231 transparent, and when the term region 203 does not overlap the facility image region 210, term information This refers to initializing the image 231 (for example, painting with a single color). Thereby, in the time limit area 203, the time limit information (in this example, the remaining time of the effective period or the expiration date) is not displayed.
  • FIG. 5 is a diagram illustrating an example of a transmission image having the time limit information image 231 in which the time limit information is not displayed in step S8.
  • the service object is displayed in the facility image area 210 in the same manner as shown in FIG.
  • the image generation unit 17 may display, for example, a character string image “reservation service end” as the time limit information image 231.
  • Step S9 the transmission image transmission unit 19 transmits the transmission image 200 to the terminal device 100 via the Internet.
  • the transmission image 200 is an image having a facility image area 210 displaying the facility image 201 and a time limit area 203 capable of displaying the time limit information image 231.
  • the user of the terminal device 100 browses the transmission image 200 through the display unit 101, and if the status of the service (reservation, discount, etc.) provided by the service providing facility and the service is a table reservation, the user is reserved. It is possible to grasp which table is the same.
  • the facility image 201 displayed in the facility image area 210 is an in-facility image that is a captured image captured by the capturing unit 11 in step S1.
  • the service status management system 1 executes the service status transmission process, for example, four times per second (every 0.25 seconds).
  • a transmission image is transmitted every 0.25 seconds to a terminal device (for example, the terminal device 100) used by a potential visitor, and the state in the service providing facility or the service provided by the service providing facility (reservation or discount) (For example, the remaining time of the reservation service or the reserved table) is transmitted.
  • a terminal device for example, the terminal device 100
  • the state in the service providing facility or the service provided by the service providing facility reserve or discount
  • the remaining time of the reservation service or the reserved table is transmitted.
  • potential visitors can check the service status and the like almost in real time.
  • the time limit information displayed on the time limit information image 231 is the remaining time of the valid period, a number indicating the remaining time is counted down for each unit time.
  • the service status management system 1 can promote the visitor to visit the service providing facility within the service effective period.
  • the service provided by the service provider is a reservation service
  • the service status management system 1 has a potential visit period during which the prospective visitor currently using the reservation service can use the reservation service (the remaining time of the valid period). Can also be viewed by a person. As a result, if the remaining time is low, it is judged that there is a high possibility that the scheduled visitors will not come and improve the possibility of acquiring potential visitors who intend to use the reservation service newly Can do.
  • a discount rate predetermined by the service provider may be displayed on the transmission image.
  • the discount rate is displayed on the time limit information image 231 together with the service content and the remaining time, for example, “10% discount: remaining 300 seconds”.
  • the service status management system 1 deletes the time limit information of the time limit information image 231 when the service expiration date has passed in the service status transmission process (Yes in step S5), or displays, for example, “reservation service end” in the time limit information image 231. Is displayed (step S8).
  • a service provider employee or store owner
  • the service status management system 1 can display to the potential visitors by displaying on the transmission image that the validity period of the previous reservation service has ended, so a new reservation can be made to the potential visitors. You can communicate that the service is acceptable. For this reason, the service status management system 1 can promote the use of the reservation service, and can increase the opportunity for the service providing facility to acquire a prospective visitor who newly uses the reservation service. In this way, the service status management system 1 can improve the accuracy of the transmission of the service status to potential visitors and the management of the service status on the facility side without increasing the workload on the facility side.
  • the service status management system 1 may be provided with a reservation receiving unit that receives a request for using the reservation service from the terminal device 100, for example.
  • the reservation receiving unit notifies the terminal device carried by the service provider that the reservation service use request has been made, for example.
  • the service provider who has confirmed the notification places the service objects (service objects 131 and 133) linked to the reservation service on a predetermined table. Thereby, the effective period of the reservation service is started.
  • the object detection unit 15 detects a service object in a photographed image taken by the photographing unit 11, it is assumed that the service object appears in the entire field of view, and the maximum image (service object image) to be searched is assumed.
  • the size is determined, and the minimum size of the image to be searched is determined according to the maximum distance between the assumed camera (shooting unit 11) and the service object and the image resolution.
  • the entire field of view is searched with all search sizes from the maximum size to the minimum size every time shooting is performed, there is a possibility that the speed of the detection process may be slow or erroneous detection may occur.
  • FIG. 6 is a flowchart illustrating an example of the flow of the term cancellation process.
  • the time limit setting unit 16 executes the time limit canceling process based on the fact that information indicating that no service object has been detected from the object detection unit 15 (undetected information) is input to the time limit setting unit 16 (No in step S2). To do.
  • Step S10-1 the time limit setting unit 16 determines whether or not the service expiration date has been set. Whether or not the expiration date of the service has been set is determined by whether or not the expiration date of the service is stored in a predetermined storage area, as in the process of step S3 (see FIG. 4). If the expiration date setting unit 16 determines that the expiration date is stored in a predetermined storage area and the expiration date of the service has been set, the processing proceeds to step S10-2.
  • the expiration date setting unit 16 determines that the expiration date is not stored in the predetermined storage area and that the expiration date of the service has not been set, the expiration date canceling process is performed without executing the processing after step S10-2. End and return to the service status transmission process.
  • Step S10-2 the time limit setting unit 16 determines whether or not the current time has passed the release grace time.
  • the current time uses the current time on the processing computer as in step S5.
  • the release grace time refers to a time obtained by adding the release grace time to the service expiration date stored in a predetermined storage area.
  • the release grace time will be described.
  • the object detection unit 15 does not receive the service object in the photographed image due to a blocking object between the image capturing unit 11 (camera) and the service object. It may happen that an object cannot be detected. In such a case, if the service provider (employee or shop owner) considers that the service object has been removed so as to forcibly terminate the valid period of the service and cancels the deadline, there will be no shielding and the service will disappear. When the object is detected again, the service expiration date is reset and the service expiration date is unintentionally postponed. In order to prevent such a situation, the service status management system 1 according to the present embodiment provides a release grace period.
  • the service status management system 1 can prevent the postponement of the expiration date of the service that the service providing facility does not intend.
  • the release grace time may be set to a time equal to or longer than the assumed neglect time.
  • step S10-3 If the time limit setting unit 16 determines that the release grace time has elapsed, the process proceeds to step S10-3. On the other hand, if the time limit setting unit 16 determines that the release grace time has not elapsed, the processing proceeds to step S10-4.
  • Step S10-3 the time limit setting unit 16 cancels the service expiration date, and proceeds to the process of step S10-4.
  • To cancel the service expiration date is to specifically reset the value of the service expiration time and the value of the time limit information stored in a predetermined storage area.
  • Step S10-4 the image generation unit 17 deletes the time limit information (in this example, the remaining time of the valid period) in the time limit area 203 (see FIG. 3), and proceeds to the process of step S10-5.
  • the time limit information in this example, the remaining time of the valid period
  • the time limit information image 231 is initialized (for example, painted with a single color).
  • the time limit information in this example, the remaining time of the valid period is not displayed in the time limit area 203.
  • the facility image 201 is, for example, a state in which a service object is covered by a shielding object (including a person and an object) and cannot be captured by the photographing unit 11 (camera) This is different from the facility image 201 shown in FIGS. 3 and 5.
  • the service object employee or shop owner
  • the service object has removed the service object from the area in the service providing facility where the image capturing unit 11 captures the image, the service object cannot be captured by the image capturing unit 11 (camera). It may be in a state.
  • FIG. 7 is a diagram illustrating an example of the transmission image 200c on which the time limit information image 231 generated in step S10-4 is displayed. As shown in FIG. 7, the service object is shielded by the person ⁇ in the facility image 201c. Further, in the time limit area 203, the time limit information image 231 is not displayed because it is transparent.
  • Step S10-5 the transmission image transmission unit 19 transmits the transmission image 200 to the terminal device 100 of the potential visitor via the Internet.
  • the transmission image 200 is an image having a facility image area 210 displaying the facility image 201 and a time limit area 203 capable of displaying the time limit information image 231.
  • the service status management system 1 also executes the term cancellation processing (particularly from step S10-1 to step S10-) even when the service object is not detected by the object detection unit 15 in step S2 of the service status transmission processing (see FIG. 4).
  • the service expiration date can be canceled by executing the process (3).
  • the service status management system 1 sets the expiration date of the service (Yes in step S10-2) as a condition for canceling the service expiration date in the term cancellation processing. Thereby, the postponement of the service expiration date that is not intended by the service providing facility can be prevented.
  • the image generation unit 17 determines whether the service expiration date has passed, A different time limit information image 231 is automatically generated depending on whether or not a service object is detected by the object detection unit 15.
  • the service status management system according to the present embodiment is the same as that of the first embodiment except that the service status transmission process (see FIG. 4) for transmitting a transmission image to an external terminal device (for example, the terminal device 100) is different from the first embodiment.
  • the service status management system 1 has the same configuration and the same operational effects. Therefore, hereinafter, the service status management system and the components of the service status management system according to the present embodiment will be described using the same reference numerals as those of the service status management system 1 shown in FIG.
  • FIG. 8 is a flowchart for explaining an example of the flow of service status transmission processing in the present embodiment.
  • steps that perform the same processes as in the first embodiment are denoted by the same reference numerals as those in the flowchart of the service status transmission process shown in FIG.
  • the photographing unit 11 outputs a photographed image obtained by photographing the inside of the facility to the object detecting unit 15 and the image generating unit 17 (step S1), and the object detecting unit 15 Performs the process of step S2-1.
  • Step S2-1 the object detection unit 15 searches for whether or not the captured image includes a service object (any of the service objects 131, 133, and 135 shown in FIG. 2). If the object detection unit 15 determines that the service object is included in the captured image, the object detection unit 15 proceeds to the process of step S20. On the other hand, when the object detection unit 15 determines that the service object is not included in the photographed image, the object detection unit 15 outputs information indicating that the service objects 131, 133, and 135 are not detected (undetected information) to the time limit setting unit 16. When the undetected information is input, the time limit setting unit 16 executes the time limit canceling process in step S10.
  • the term cancellation processing executed in the present embodiment is the same processing as the term cancellation processing (see FIG. 5) executed in the first embodiment.
  • Step S20 If the object detection unit 15 determines in step S20 that the service objects 131 and 133 whose service contents are “reservation” have been detected using bar code reading software (for example, “ZBAR”), the current position of the service object is determined. The indicated information (current position information) is added to the detection information and output to the time limit setting unit 16. If the time limit setting unit 16 determines that the expiration date has been set in the subsequent step S3, the process proceeds to step S21. On the other hand, when the object detection unit 15 determines that the service objects 131 and 133 whose service contents are “reserved” have not been detected, the service status transmission process is terminated without executing the processes after step S3.
  • bar code reading software for example, “ZBAR”
  • step S21 the time limit setting unit 16 determines whether the position of the service object in the captured image is deviated from the position of the service object (previous position) at the time of the previous service status transmission process.
  • Information on the previous position is stored in a predetermined storage area on the processing computer in which the processing unit 10 (see FIG. 1) is deployed as previous position information.
  • the previous position information is held without being updated.
  • the service status management system 1 is activated, coordinates outside the area of the facility image 201 are set as the previous position information, for example.
  • the time limit setting unit 16 compares the position information (current position information) of the service object included in the detection information input from the object detection unit 15 with the previous position information.
  • step S4 setting of the service expiration date
  • step S5 setting of the service expiration date
  • Step S23 When the image generation unit 17 executes the process of step S7 or step S8, the time limit setting unit 16 then executes the process of step S23.
  • the time limit setting unit 16 updates the previous position information with the contents of the current position information.
  • the current position information of the service object is stored in a predetermined storage area and can be used to determine whether or not there is a shift in the position of the service object in the next service status transmission process.
  • the transmission image transmitting unit 19 transmits the transmission image to the terminal device (for example, the terminal device 100) in step S9, and the service status transmission process is ended.
  • the position of the service object has shifted from the previous service status transmission process (Yes in step S21).
  • the service expiration date is reset (step S4).
  • a service provider (employee or store owner) of a service providing facility simply moves a service object to a table (table B) next to the table (table A) where the service object is currently placed, and newly creates a table B.
  • About reservation service can be started.
  • the service status management system 1 can easily reset the expiration date of the reservation service at the service providing facility.
  • the service status management system 1 if the difference between the current position of the service object and the previous position is within a predetermined error range, it is determined in step S21 that the service object has not been moved. Also good. As a result, the service expiration date is unintentionally reset and the service expiration date is postponed when the position of the service object is shifted due to vibrations caused by movement of objects or people in the service providing facility. Can be prevented.
  • the service status management system according to the present embodiment is the same as that of the first embodiment except that the service status transmission process (see FIG. 4) for transmitting a transmission image to an external terminal device (for example, the terminal device 100) is different from the first embodiment.
  • the service status management system 1 has the same configuration and the same operational effects. Therefore, hereinafter, the service status management system and the components of the service status management system according to the present embodiment will be described using the same reference numerals as those of the service status management system 1 shown in FIG.
  • FIG. 9 is a flowchart for explaining an example of the flow of service status transmission processing in the present embodiment.
  • steps that perform the same processing as in the first embodiment are denoted by the same reference numerals as those in the flowchart of the service status transmission process shown in FIG.
  • the photographing unit 11 outputs a photographed image obtained by photographing the inside of the facility to the object detecting unit 15 (step S1), and the object detecting unit 15 performs step S2- Process 1 is executed.
  • Step S2-1 the object detection unit 15 determines whether or not a service object (any of the service objects 131, 133, and 135 shown in FIG. 2) is included in the captured image, as in the second embodiment. Explore. If the object detection unit 15 determines that the service object is included in the captured image, the object detection unit 15 proceeds to the process of step S30. On the other hand, when the object detection unit 15 determines that the service object is not included in the photographed image, the object detection unit 15 outputs information indicating that the service objects 131, 133, and 135 are not detected (undetected information) to the time limit setting unit 16. When the undetected information is input, the time limit setting unit 16 executes the time limit canceling process in step S10.
  • the term cancellation processing executed in the present embodiment is the same processing as the term cancellation processing (see FIG. 5) executed in the first embodiment.
  • Step S30 when the object detection unit 15 determines that the service content is “discount”, the information indicating the current position of the service object (current position information) is added to the detection information and output to the time limit setting unit 16, and the time limit is set.
  • the setting unit 16 proceeds to the process of step S3.
  • the object detection unit 15 determines that the service object 135 whose service content is “discount” has not been detected, the service status transmission process is terminated without executing the processes after step S3.
  • step S3 If the expiration date setting unit 16 determines in step S3 that the service expiration date has not been set (No in step S3), the expiration date setting unit 16 sets the service expiration date in step S4, and proceeds to processing in step S31. On the other hand, if the time limit setting unit 16 determines that the service expiration time has been set in step S3 (Yes in step S3), the process proceeds to step S32.
  • Step S31 the time limit setting unit 16 registers the content of the current position information of the service object in a predetermined storage area on the processing computer, and proceeds to the process of step S7. Thereby, it is possible to determine whether or not the service object has deviated from the position at the start of the discount service in the discount service valid period.
  • step S32 the time limit setting unit 16 determines whether or not the position of the service object in the captured image is deviated from the position of the service object (previous position) at the time of the previous service status transmission process, as in step S21 (see FIG. 8). To do.
  • the time limit setting unit 16 compares the position information (current position information) of the service object included in the detection information input from the object detection unit 15 with the previous position information. It is determined whether or not there is a difference between the position of the service object included and the position of the service object included in the previous position information.
  • step S33 If the time limit setting unit 16 determines that there is a difference between the position of the service object included in the current position information and the position of the service object included in the previous position information, the process proceeds to step S33. On the other hand, if the time limit setting unit 16 determines that the current position information matches the previous position information and that the service object has not shifted between the previous service status transmission process and the current service status transmission process, The process proceeds to S5.
  • Step S33 In step S33, regardless of whether or not the service validity period has passed, the time limit setting unit 16 determines a predetermined storage area in order to cancel the service validity period, as in step S10-3 (see FIG. 6). The value of the service expiration time and the value of the time limit information stored in is reset, and the process proceeds to step S8. As a result, the discount service is terminated based on the shift of the position of the service object.
  • the position of the service object is registered at the start of provision of the discount service at the service providing facility (step S31), and the position of the service object is determined within the service effective period. Due to the deviation (Yes in step S32), the expiration date of the service is canceled and the discount service is terminated.
  • the service status management system 1 invalidates the discount service when the position shift of the service object is detected. Specifically, the service status management system 1 according to the present embodiment does not reset the service expiration date as in the second embodiment in which the movement of the service object is detected, and the service status management system 1 regardless of the service expiration date. End. Thereby, the service status management system 1 according to the present embodiment postpones the expiration date of the discount service regardless of the intention of the service providing facility when the service object associated with the discount service is moved due to mischief or the like. It is possible to prevent a fake discount service from being started by a malicious third party who is not a service provider bringing a fake service object.
  • the service status management system 1 may be configured to reset and re-register the position information of the service object associated with the discount service every time it is activated.
  • the service object location registration process (step S31) may be executed only when the expiration date of the discount service is set for the first time after the service providing facility starts operating (step S4).
  • the discount service can be terminated based on whether the position of the service object has deviated from the first position after the start of business. It is possible to more reliably prevent the expiration date from being postponed.
  • the timing for registering the position information of the service object is not limited every time it is activated, and may be set for each day, week, month, or year using a timer. Further, when registering the position information, a time difference may be provided between the time when the service object is first detected and the start time of the service, and it may be determined whether or not the position of the service object is stabilized at the time difference.
  • the service status management system according to the present embodiment is different from the service status management system 1 in that a background image registration unit 41 is included as a system component. Further, in the service status management system according to the present embodiment, by including the background image registration unit 41, the facility image in the transfer image transmitted in step S9 of the service status transfer process (see FIG. 4) is the service according to the first embodiment. Different from the situation management system 1. However, except these points, it has the same structure and the same effect as the service status management system 1 according to the first embodiment. Therefore, in the following, the constituent elements of the service status management system and the service status management system according to the present embodiment that have the same functions and operations as the service status management system 1 shown in FIG. The description is omitted.
  • FIG. 10 is a configuration diagram for explaining the service status management system 2 according to the present embodiment.
  • the service status management system 2 includes a background image registration unit 41 that registers in advance an image in a service providing facility that does not include a service object as a background image.
  • the background image is a still image in the service providing facility that is captured in advance by the imaging unit 11 in a state where the service provider confirms that there is no service object in the angle of view to be captured.
  • the background image registration unit 41 is a predetermined storage area such as a memory in the processing computer.
  • the service status management system 2 determines pixels that are not changed in the plurality of captured images captured by the imaging unit 11 for a certain period as pixels that are not included in the service object, and uses the pixels in the background image registration unit 41. The corresponding pixel in the registered background image may be replaced.
  • the background image is automatically updated without confirmation from the service provider.
  • FIG. 11 is a diagram illustrating an example of a facility image generation method according to the present embodiment.
  • the facility image in this example is a facility image when the service expiration date has passed.
  • FIG. 11A is a diagram illustrating an example of a background image registered in the background image registration unit 41.
  • the background image 401 is, for example, an image obtained by photographing the inside of a service providing facility in a state where there are no customers and service objects are not arranged outside the business providing facility business hours.
  • FIG. 11B is a diagram illustrating an example of a captured image captured in step S1 of the service status transmission process (see FIG. 4).
  • the background image 401 is an image obtained by photographing the inside of the facility from the same position as the captured image 402 at the same angle of view. For this reason, the composition of the background image 401 is the same as that of the captured image 402.
  • FIG. 11C is a diagram illustrating an example of a facility image (a facility image when a service expiration date has passed) in the present embodiment.
  • the facility image 201d is generated by combining the background image 401 and the captured image 402. More specifically, the image generation unit 17 detects the service object (Yes in Step S2) and the time limit setting unit 16 determines that the service expiration date has passed (Step S5). Yes), an image obtained by replacing the region 402s (see FIG. 11B) where the service object is located in the captured image 402 with the image of the region 401s at the same position in the background image 401 is generated as the facility image 201d. Display in area 210.
  • the facility image 201d is generated immediately before the transmission image is transmitted in step S9 (see FIG. 4), for example. Further, the image generation unit 17 deletes the time limit information in the time limit information image 231 displayed in the time limit area 203 in the process of step S8 (see FIG. 4). In this manner, in the service status management system 2 according to the present embodiment, the transmission image 200d in which the service object and the time limit information are not displayed is transmitted to the terminal device 100 of the potential visitor. In the transmission image 200d of this example, since the service object is not displayed in the facility image 201d, it is not necessary to display the character string image “reservation service end” clearly indicating that the service expiration date has passed in the time limit area 203. In this example, the generation of the transmission image 200d in the image generation unit 17 refers to the generation of the facility image 201d and the time limit information image 231.
  • the service status management system 2 can more clearly convey to the potential visitors the status that the service validity period has ended, as if the service had not been performed. Yes, it is very effective in the reservation service.
  • the transmission image transmitted in the service status management system 2 according to the present embodiment is not limited to the transmission image 200d.
  • the transmission image 200e generated in the first modification of the fourth embodiment will be described with reference to FIG.
  • FIG. 12 is a diagram for explaining an example of the facility image generation method in the present modification.
  • FIG. 12A shows a background image 401 similar to that shown in FIG.
  • FIG. 12B is a diagram illustrating a captured image 402 captured with a composition similar to that illustrated in FIG.
  • an image that is not included in the background image 401 but is included in the captured image 402 is illustrated as a foreground image 420 (420a, 420b, 420c, 420d). ing.
  • the foreground image 420 includes a foreground image 420a that is an image of a service object and foreground images 420b, 420c, and 420d that are images of moving objects other than the service object.
  • Foreground images 420b, 420c, and 420d are, for example, belongings of visitors who visit a service providing facility, and appeal that a table or chair is reserved by leaving it on the table or seat. It is the image of the object used for.
  • the foreground image 420 includes persons (visitors, employees, etc.) who are in the service providing facility.
  • FIG. 12C is a diagram illustrating an example of the transmission image 200e when the service expiration date in the present modification has not elapsed.
  • the image generation unit 17 obtains a contour line from data of the foreground image 420 that is a difference image between the captured image 402 and the background image 401 immediately before transmitting the transmission image in step S9 (see FIG. 4). Extract the data to represent. For example, the image generation unit 17 calculates the brightness or hue difference between adjacent pixels in the foreground image 420, and extracts a series of pixels that exceed a certain threshold as an outline. In this example, the photographed image 402 does not include a person, but when the photographed image 402 includes a person, all objects and people included in the photographed image 402 are extracted as contour lines.
  • the contour line of the foreground image 420 is obtained by taking the difference between the contour line of the captured image 402 and the contour line of the background image 401.
  • the contour line of the foreground image 420 can be obtained by generating a mask image in which the difference between the photographed image 402 and the background image 401 is assigned to 1 or 0 with a predetermined threshold and masking the contour line of the photographed image 402. can get.
  • the image generation unit 17 sets, as a facility image 201e to be displayed in the facility image area 210, an image obtained by overwriting the outline of the foreground image 420, which is a difference image between the captured image 402 and the background image 401, on the background image 401. Generate. As shown in FIG. 12C, in the transmitted image 200e, the foreground image 420 (foreground image 420a shown in FIG. 12B) is displayed in the facility image area 210 regardless of whether or not the service expiration date has passed.
  • the transmission image 200e when the service expiration date has not elapsed the time limit information image 231 displaying the time limit information (remaining time in this modification) is displayed in the time limit area 203, as shown in FIG. ing.
  • the generation of the transmission image 200e in the image generation unit 17 refers to the generation of the facility image 201e and the time limit information image 231.
  • the facility image area 210 displaying the facility image 201e in which the contour line of the foreground image 420 is overwritten on the background image 401 and the time limit for displaying the time limit information image 231 are displayed.
  • a transmission image 200e having an area 203 is transmitted to the terminal device 100 of the potential visitor. Since the service status management system 2 according to the present modification draws an object or person included in the captured image 402 as a line drawing, the person in the service providing facility cannot be specified from the possession or the face. Therefore, it is possible to protect the privacy of the person in the service providing facility, particularly the visitor.
  • the service status management system 1 executes the service status transmission process, for example, four times per second, that is, at intervals of 0.25 seconds. Therefore, the transmission image is also transmitted to the terminal device 100 at intervals of 0.25 seconds. Thereby, since the movement of the person in the service providing facility is displayed in the frame advance state on the display unit 101 of the terminal device 100, the person cannot be specified by the movement (walking mode, gesture, etc.). It is possible to protect the privacy of visitors.
  • an image of a current predetermined facility such as a restaurant photographed by a camera and an image of the facility (background image) photographed in advance are used.
  • An image is generated by overwriting the background image with the outline of the foreground as a difference, and the congestion status of the predetermined facility is displayed on the terminal device connected by the network without infringing on the privacy.
  • a situation in which a table or a table is reserved by photographing a situation where a bag or a hat is left on a table of a restaurant is photographed with a camera and transmitted to the terminal device. To the user (image viewer).
  • the service status management system 2 while transmitting privacy, it is possible to transmit a transmission image that conveys the service content provided at the service providing facility and the validity period of the service to the terminal device 100. it can. Thereby, according to the service status management system 2, it is possible to improve the accuracy of the service status transmission to the potential visitors and the service status management on the facility side as compared with the conventional system.
  • the image generation unit 17 determines in step S8 (see FIG. 4) the expiration area of the transmission image 200e shown in FIG.
  • the time limit information is deleted from the time limit information image 231 displayed in 203, for example, a character string image “reservation service end” that clearly indicates that the service expiration date has passed is displayed.
  • a transmission image indicating the progress may be generated.
  • FIG. 13 is a diagram illustrating an example of the facility image 201f and the time limit information image 231 in the present modification.
  • a facility image 201f of the present modification is a facility image when the service expiration date has passed.
  • the image generation unit 17 extracts the contour line of the foreground image 420 using the background image 401 and the captured image 402 shown in FIG. Thus, the facility image 201f is generated.
  • the object detection unit 15 detects a service object (Yes in Step S2) and the time limit setting unit 16 determines that the service expiration date has passed (Yes in Step S5)
  • the image generation unit 17 does not overwrite the background image 401 with the contour line (contour line image 421a) of the service object included in the foreground image 420 when the facility image 201f is generated.
  • the facility image 201f is generated immediately before the transmission image is transmitted in step S9 (see FIG. 4), for example.
  • the facility image 201f overwritten with the contour image 421b, 421c, 421d excluding the contour image 421a (see FIG. 12C) which is the contour of the service object as shown in FIG.
  • a transmission image 200f having a facility image area 210 to be displayed and a time limit area 203 for displaying the time limit information image 231 from which the time limit information has been deleted is transmitted to the terminal device 100 of the potential visitor.
  • the generation of the transmission image 200f in the image generation unit 17 refers to the generation of the facility image 201f and the time limit information image 231.
  • the service status management system 2 protects the privacy of the visitors, and the service is not provided to the potential visitors as if the service has expired. Thus, it can be transmitted more clearly and is very effective in the reservation service.
  • FIG. 14 is a diagram illustrating an example of a facility image 201g in the present modification.
  • the image generation unit 17 extracts the outline of the foreground image 420 using the background image 401 and the captured image 402 shown in FIG.
  • the facility image 201g is generated.
  • the image generation unit 17 overwrites the background image 401 with the foreground image (foreground image 420a) of the service object at the time of generating the facility image 201g, and sets the outline (outline image 421a) of the service object.
  • the background image 401 is not overwritten.
  • the facility image 201g is generated immediately before transmitting the transmission image in step S9 (see FIG. 4), for example.
  • the facility image area 210 displaying the facility image 201g in which the foreground image 420a and the outline images 421b, 421c, and 421d are overwritten, and the time limit area 203 displaying the time limit information image 231 are displayed.
  • the transmission image 200g having the above is transmitted to the terminal device 100 of the potential visitor.
  • the generation of the transmission image 200g in the image generation unit 17 refers to the generation of the facility image 201g and the time limit information image 231.
  • the service object is displayed as it is in the captured image 402 instead of the contour line.
  • the color and shape of the service object are transmitted to the terminal device 100 of the potential visitor. Therefore, if the service object is a panel (such as a sign-like panel) that shows the service content in color or shape, the potential visitor must intuitively grasp the service content currently provided at the service providing facility. Can do.
  • the foreground image 420a is replaced with another image registered in advance, a service object is installed there when a user who browses using the terminal device 100 actually visits the facility. Therefore, it is not uncomfortable for the user to use the foreground image 420a.
  • the facility image is at least one of one or more photographed images taken in advance including one or more photographed images taken in advance by the photographing unit 11 and a photographed image where the service object is detected. May be generated. Furthermore, the facility image may not include the captured image captured by the capturing unit 11.
  • the facility image may be generated, for example, as an image in a service providing facility photographed by a camera other than the photographing unit 11 and having a composition similar to the composition of the photographed image photographed by the photographing unit 11. Further, not only the photographed image but also a sketch, an illustration, or a schematic diagram of the same composition as the composition of the photographed image photographed by the photographing unit 11 may be used.
  • the service status management system according to the present embodiment is different from the service status management system 1 in that the terminal location information receiving unit 51 is included as a system component.
  • FIG. 15 is a configuration diagram for explaining the service status management system 3 according to the present embodiment.
  • the service status management system 3 includes a terminal location information receiving unit 51 that receives the location information of the terminal device 100 transmitted from the terminal device 100 in the processing unit 10.
  • the terminal device 100 also transmits the current location information to the service status management system 3 when requesting transmission of a transmission image for the first time within the validity period of the discount service or when requesting use of a reservation service, for example.
  • the terminal location information receiving unit 51 stores the location information in a predetermined storage area on the processing computer.
  • the terminal device 100 transmits, for example, the IP address of the terminal device 100 as user identification information when transmitting the location information, and stores it in a predetermined storage area on the processing computer together with the location information. Good.
  • the terminal position information receiving unit 51 calculates the distance from the terminal device 100 to the service providing facility, and stores it as a terminal device distance information in a predetermined storage area on the processing computer.
  • the time limit setting unit 16 acquires the terminal location information stored in the terminal location information receiving unit 51 when, for example, the expiration date of the reservation service is set in step S4 (see FIG. 4). Thereby, the time limit setting unit 16 can set the time limit of the reservation service based on the length of the time limit registered in the service object registration table (see FIG. 2) and the terminal location information. For example, the time limit setting unit 16 sets the time limit by adding the time obtained by adding the length of the effective period registered in the service object registration table and the predetermined terminal position adjustment time to the detection time.
  • the terminal position adjustment time is determined to be added according to the value of the terminal device distance information calculated by the terminal position information receiving unit 51, and is stored in a predetermined storage area on the processing computer. For example, every time the terminal device distance information increases by 100 m, the terminal position adjustment time is set to be added by 1 minute.
  • the terminal device distance information calculated by the terminal position information receiving unit 51 when the service object 131 having a valid period length of “5 minutes” registered in the service object registration table is detected by the object detection unit 15. Is assumed to be “300 m”.
  • the service status management system 3 can change the length of the validity period of the reservation service for each user (planned visitor) of the terminal device 100 according to the position of the terminal device 100. .
  • the service status management system 3 can improve the possibility of acquiring a potential visitor located away from the service providing facility.
  • the service status management system 3 may include a discount rate setting unit that sets a discount rate in the discount service according to the position of the terminal device 100 in the processing unit 10.
  • the discount rate setting unit performs terminal position adjustment discount based on the terminal device distance information. Set the rate.
  • the terminal location adjustment discount rate is determined, for example, according to the value range of the terminal device distance information calculated by the terminal location information receiving unit 51, and is stored in a predetermined storage area on the processing computer.
  • the terminal position adjustment discount rate corresponding to the range where the terminal device distance information is “300 m” to less than “500 m” is “added by 3%”, and the terminal device distance information is corresponding to the range where “500 m” is less than “1000 m”.
  • the terminal position adjustment discount rate is set to “5% extra” and the terminal position adjustment time corresponding to the range of “1000 m or more” is set to “10% extra”.
  • the predetermined discount rate is “10%” and the value of the terminal device distance information calculated by the terminal position information receiving unit 51 is “500 m”.
  • the discount rate set here is applied only to the terminal device 100 that is the transmission source of the terminal location information used for calculating the terminal location adjustment discount rate. For this reason, in this example, a transmission image in which a discount rate corresponding to the terminal position information is displayed in the time limit information image 231 (see FIG.
  • each terminal device 100 is transmitted to each terminal device 100. That is, a different discount rate is set for each potential visitor.
  • the user of the terminal device 100 can use the screen shot function of a smartphone, for example, to save a copy of the transmission image in the terminal device 100 and use it as a proof of receiving a discount service.
  • the displayed discount rate is reduced to 10%.
  • a copy of the transmission image for example, a screen shot of the transmission image displaying 15% as the discount rate
  • the discount rate displayed on the copy of the transmission image is applied.
  • the service status management system 3 can change the discount rate in the discount service for each user (potential visitor) of the terminal device 100 according to the position of the terminal device 100. Thereby, the service status management system 3 can improve the possibility of acquiring potential visitors who are away from the service providing facility by improving the willingness of the potential visitors to visit.
  • map information is registered in advance in a predetermined storage area, and a discount rate is set based on the map information and terminal location information. May be.
  • the service status management system 3 is set with information (specific area information) of a region where there are many competing stores, and the discount rate setting unit links the terminal device distance information and the map information to the terminal device.
  • the terminal position adjustment discount rate may be set based on the positional relationship between the 100 positions and the specific area information. For example, in the above example, when the value of the terminal device distance information is “500 m”, the corresponding terminal position adjustment discount rate is “5% addition”.
  • the discount rate setting unit For example, “10%” is added to the terminal location adjustment discount rate.
  • the terminal location adjustment discount rate added based on the specific area information is not limited to 10%.
  • a plurality of terminal position adjustment discount rates to be added may be set in association with the distance from the specific area of the terminal device 100 or the like.
  • the service status management system 3 improves the willingness of a potential visitor to visit a service providing facility from a specific area or a region sandwiching the specific area between the service providing facility and provide a service.
  • the possibility of the facility acquiring potential visitors can be improved.
  • the terminal location information receiving unit 51 stores in a predetermined storage area the time (access time) when the terminal device 100 requests transmission of a transmission image or use of a reservation service. It may be configured to.
  • the time limit setting unit 16 may set the expiration time of the reservation service based on the access time and the terminal location information.
  • the service status management system 3 may be configured such that terminal location information, access time, and user identification information can be viewed on a processing computer or a terminal device in a service providing facility connected to the processing computer.
  • the discount service can be provided by confirming that the access time is within the valid period of the discount service.
  • the discount rate setting unit is provided not in the processing unit 10 but in a terminal device (facility-side terminal device) in a service providing facility connected to the processing computer.
  • the facility-side terminal device has a function of reading a non-contact type IC card, and when the user of the terminal device 100 comes to the site, the facility-side terminal device reads the non-contact type IC card built in the terminal device 100.
  • the terminal position adjustment discount rate corresponding to the terminal device distance information of the terminal device 100 may be set by acquiring the terminal device distance information of the terminal device 100 stored in a predetermined storage area of the processing computer.
  • the service status management system 3 may include a distribution unit that distributes to the terminal device 100 a program that stores the terminal location information and the access time in the terminal device 100.
  • a potential visitor accesses the service status management system 3 in advance using the terminal device 100, and receives distribution of the program from the distribution unit.
  • the visitor can, for example, send the terminal location information and access time to the employees of the service providing facility at the time of arrival. You can present and use services (discount services, etc.).
  • the service status management system 3 may include a visitor history storage unit that stores a visitor history for each time zone.
  • the visitor history storage unit is a predetermined storage area such as a memory in the processing computer, for example, like the object registration unit 13.
  • the discount rate setting unit refers to the visitor history storage unit, and subtracts a predetermined value from a predetermined discount rate value during times when there are many visitors to reduce the discount rate.
  • the discount rate may be increased by adding a predetermined value to the discount rate value.
  • the service object in the present invention is not limited to that shown in FIG.
  • the service object registration table may be configured so that a service provider (employee or store owner) of the service providing facility can additionally register a service object as appropriate. For example, at the time of additional registration of a service object, the service object to be added is photographed, and the image of the captured object is added to the service object registration table together with the service content and the length of the validity period.
  • the service linked to the service object in the present invention is not limited to the reservation service or discount service.
  • the service object may be associated with a unique service developed by the service providing facility.
  • a plurality of service objects associated with a reservation service may be arranged in a service providing facility.
  • the transmission image is provided with a time limit area in the vicinity of each service object, and a time limit information image representing the time limit information corresponding to each service object is displayed.
  • the service status management system can transmit the status of reservation services for a plurality of tables to potential visitors and prospective visitors through transmission images.
  • a transmission image that conveys the situation in the service providing facility may be transmitted to a terminal device owned by a potential visitor even during a period when the service object is not arranged in the service providing facility.
  • potential visitors must check the congestion situation in the service providing facility (for example, that there are no seats left on the table where there are no people) before visiting the service providing facility. Can do.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Electromagnetism (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Toxicology (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Primary Health Care (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本発明は、潜在来場者に対するサービス状況の伝達や施設側におけるサービス状況の管理の精度を向上させることができるサービス状況管理システムを提供することを目的とする。サービス状況管理システム(1)は、施設内を撮影する撮影部(11)と、サービス物体を予め登録する物体登録部(13)と、撮影画像において物体登録部(13)に登録されたサービス物体を検出する物体検出部(15)と、物体検出部(15)がサービス物体を初めて検出した時刻を起点とする有効期間の期限を設定する期限設定部(16)と、期限情報画像を表示可能な期限領域(203)と、施設の状況を表す施設画像(201)を表示する施設画像領域(210)とを有する画像であって、外部の端末装置(100)へサービスの状況を伝達する伝達画像(200)を生成する画像生成部(17)と、伝達画像(200)を端末装置(100)に送信する伝達画像送信部(19)とを備える。

Description

サービス状況管理システム
 本発明はサービス状況管理システムに関する。
 従来、所定の施設内の状況をネットワークで繋がる端末に表示するシステムが知られている(例えば、特許文献1)。また、空席が十分ある所定の時間帯に来店すれば割引を行うタイムサービスを記した販促用メールを、該所定の時間帯に利用したことがある顧客の携帯電話宛に送信するシステムが知られている(例えば、特許文献2)。しかしながら、従来のシステムでは、潜在来場者(見込み客)に対するサービス状況の伝達や施設側におけるサービス状況の管理の精度が十分でなかった。
特許第5060047号 特開2003-99514号公報
 本発明の目的は、潜在来場者に対するサービス状況の伝達や施設側におけるサービス状況の管理の精度を向上させることができるサービス状況管理システムを提供することにある。
 上記目的を達成するために、本発明の一態様によるサービス状況管理システムは、施設内を撮影する撮影部と、前記施設において提供されるサービス及び該サービスの有効期間を含むサービス情報が対応付けられたサービス物体を予め登録する物体登録部と、前記撮影部によって撮影された撮影画像において前記物体登録部に登録された前記サービス物体を検出する物体検出部と、前記物体検出部が前記サービス物体を初めて検出した時刻を起点とする有効期間の期限を設定する期限設定部と、前記期限に関する情報を表す期限情報画像を表示可能な期限領域と、前記施設の状況を表す施設画像を表示する施設画像領域とを有する画像であって、外部の端末装置へ前記サービスの状況を伝達する伝達画像を生成する画像生成部と、前記画像生成部が生成した前記伝達画像を前記端末装置に送信する伝達画像送信部とを備える。
 本発明の一態様によれば、潜在来場者に対するサービス状況の伝達や施設側におけるサービス状況の管理の精度を向上させることができるサービス状況管理システムを提供することが可能になる。
本発明の第1実施形態に係るサービス状況管理システムを説明するための構成図である。 物体登録部に登録されているサービス物体を一覧形式で表す図である。 伝達画像の一例を示す図である。 本発明の第1実施形態に係るサービス状況管理システムにおけるサービス状況伝達処理の流れの一例を示すフローチャートである。 伝達画像の一例を示す図である。 本発明の第1実施形態に係るサービス状況管理システムにおける期限解除処理の流れの一例を示すフローチャートである。 サービス有効期間内にもかかわらずサービス物体が検出されない場合の期限情報画像が表示された伝達画像の一例を示す図である。 本発明の第2実施形態に係るサービス状況管理システムにおけるサービス状況伝達処理の流れの一例を説明するフローチャートである。 本発明の第3実施形態に係るサービス状況管理システムにおけるサービス状況伝達処理の流れの一例を説明するフローチャートである。 本発明の第4実施形態に係るサービス状況管理システム2を説明するための構成図である。 本発明の第4実施形態における施設画像の生成方法の一例について説明する図である。 本発明の第4実施形態の変形例1における施設画像の生成方法の一例について説明する図である。 本発明の第4実施形態の変形例2における施設画像の一例を示す図である。 本発明の第4実施形態の変形例3における施設画像の一例を示す図である。 本発明の第5実施形態に係るサービス状況管理システムを説明するための構成図である。
 以下、本発明を実施するための形態(以下、「実施形態」と称する)によるサービス状況管理システムについて図1から図15を用いて説明する。
(第1実施形態)
 まず、本発明に係る第1実施形態について説明する。図1は、本実施形態によるサービス状況管理システム1の機能構成の一例を示すブロック図である。サービス状況管理システム1は、施設(例えば飲食店等の店舗)が提供する予約や割引といったサービスの状況に関する情報を管理するとともに、予約をした来場予定者や「施設が空いていれば行きたい」「割引があるなら行きたい」と思っている潜在来場者に対して該情報の伝達を行うシステムである。
(サービス状況管理システムの構成)
 図1に示すように、サービス状況管理システム1は、処理部10を備える。処理部10は、例えば所定のコンピュータ(以降、「処理用コンピュータ」と称する)上にソフトウェアプログラムが展開され、該ソフトウェアプログラムの指令により処理用コンピュータのCPUが演算処理を実行することによって構成される。処理用コンピュータは、後述する撮影部11として利用されるカメラに内蔵されたコンピュータ(例えばマイクロコンピュータ)でもよいし、施設内に設置されたコンピュータ(例えばパーソナルコンピュータ)でもよいし、施設外に設定されたコンピュータ(例えばサーバコンピュータ)であってもよい。また、これらのコンピュータを組み合わせて処理部10の行う処理を分散させてもよい。
 サービス状況管理システム1は、施設内を撮影する撮影部11を備える。撮影部11は、例えば撮影した映像をリアルタイムにコンピュータ等へ転送可能なカメラであって、処理用コンピュータと通信可能に接続されている。撮影部11は、施設内を広く構図に収められる位置に設置される。ここで、撮影部11により撮影される施設は、例えば飲食店等が想定される。
 サービス状況管理システム1は、施設(撮影部11で撮影される飲食店等)において提供されるサービス及び該サービスの有効期間を含むサービス情報が対応付けられたサービス物体を予め登録する物体登録部13を備える。物体登録部13は、例えば処理用コンピュータにおけるメモリ等の所定の記憶領域である。サービス物体に紐づけられたサービスとしては、例えば来店を約束した客(来場予定者)のために飲食店側が予めテーブルを確保する予約サービスや、来店しそうな見込み客(潜在来場者)を誘うために飲食店側が料理・商品等の価格の値下げを行う割引サービス等がある。以降、これらのサービスを提供する店(施設)をサービス提供施設と称する。また、サービス提供施設においてサービスを提供する者(従業員や店主等)をサービス提供者という。
 また、サービスの有効期間とは、サービス提供者が予め設定した期間であって、潜在来場者や来場者がサービス提供者の提供するサービスを利用可能な期間をいう。例えば、予約サービスの有効期間は、サービス提供施設において来場予定者のためにテーブルが確保される期間である。また、割引サービスの有効期間は、サービス提供施設において来場者が通常よりも割引された金額によって飲食や商品の購入等が可能な期間である。
 物体登録部13に登録されるサービス物体には、サービス提供施設が提供するサービスが紐づけられる。サービス物体は、サービス提供施設が提供するサービス(予約サービス、割引サービス等)を表している。サービス物体は、例えば数値や文字を表現するバーコード(一次元バーコードや二次元バーコード)が表面に印刷されたパネルでもよいし、道路標識のような色や図形で識別可能なデザイン(絵柄)が表面に印刷された標識状パネルでもよいし、人がその意味を理解できる記号や文字を記載したパネルでもよい。また、サービス物体は、色や形状で識別可能なパイロンやロードコーンでもよいし、特定の形状やデザインを有する人形や置物でもよい。
 また、サービス状況管理システム1は、インターネットを介して外部の端末装置100と通信可能に構成されている。端末装置100は、サービス提供施設の利用が見込まれる不特定多数の潜在来場者がそれぞれ閲覧する端末装置である。端末装置100は、携帯電話(スマートフォンを含む)やタブレット型端末装置、パーソナルコンピュータ等でもよいし、有線のネットワークで繋がるパーソナルコンピュータ以外のディスプレイ装置(デジタルサイネージ)でもよい。パーソナルコンピュータには、ノート型パーソナルコンピュータやデスクトップ型パーソナルコンピュータ等が含まれる。
 次に、処理部10の各構成について説明する。
 サービス状況管理システム1は、撮影部11によって撮影された撮影画像において物体登録部13に登録されたサービス物体を検出する物体検出部15を備える。例えば物体検出部15は、物体登録部13に登録されているサービス物体が標識状パネルである場合、道路標識の検出時のように標識状パネルの色情報を用いてノイズを除去し、標識状パネルに印刷されたシンプルな図形に対してハフ変換(Hough transform)を用いたパターン認識を行う。これにより、物体検出部15は高い精度で標識状パネルを検出できる。
 また、例えば、物体登録部13に登録されているサービス物体がバーコードを印刷したパネルである場合、物体検出部15は、バーコード読み取りソフトウェア(例えば、オープンソースのソフトウェアである「ZBAR」)を用いる。バーコード読み取りソフトウェアは、一次元バーコードに分類されるJANコードや二次元バーコードに分類されるQRコード(登録商標)等複数のバーコードを読み取り、読み取り結果としてバーコードに含まれる情報(バーコードの種類、バーコードに書かれた文字情報等)を返すソフトウェアである。本実施形態では、サービス物体が二次元バーコードである場合について説明する。
 物体登録部13には、複数のサービス物体が登録されている。物体検出部15は、撮影画像において複数のサービス物体の何れかを検出すると、後述する期限設定部16に検出したサービス物体に関する情報(検出情報)を出力する。
 ここで、図2を用いて物体登録部13に登録されているサービス物体の一例を説明する。図2は、物体登録部13に登録されているサービス物体を一覧形式で表す図である。図2において、「バーコード」は、本実施形態におけるサービス物体である二次元バーコードの画像を表している。理解を容易にするため、本例ではパネル表面に印刷された二次元バーコードをサービス物体として説明する。また、「文字情報」は二次元バーコードに含まれる文字情報(数値や記号を含む)を表している。また、「サービス内容」は、サービス物体である二次元バーコードに紐づけられたサービスの内容を表している。また、「有効期間の長さ」は、サービスの有効期間の長さを表している。「バーコード」欄にある3つの二次元バーコード(サービス物体131,133,135)に対して「サービス内容」欄に設定されたサービス内容と「有効期間の長さ」欄に設定されたサービスの有効期間の長さがそれぞれ対応付けられており、「文字情報」欄の文字情報を介して参照される。
 図2に示す例では、サービス物体131には「サービス内容」欄の「予約」と「有効期間の長さ」欄の「5分」が対応付けられている。これは、サービス物体131が有効期間(来場予定者のためにテーブルが確保される時間)の長さが5分の予約サービス「予約」と紐づけられた物体であることを示している。また、サービス物体133には「サービス内容」欄の「予約」と「有効期間の長さ」欄の「7分」が対応付けられている。これは、サービス物体133が有効期間(テーブル確保時間)の長さが7分の予約サービス「予約」と紐づけられた物体であることを示している。また、サービス物体135には「サービス内容」欄の「割引」と「有効期間の長さ」欄の「30分」が対応付けられている。これは、サービス物体135が有効期間(割引金額での飲食・商品購入が可能な時間)の長さが30分の割引サービス「割引」と紐づけられた物体であることを示している。
 上述のように、二次元バーコードは文字情報(数値や記号を含む)を含んでおり、物体検出部15は、バーコード読み取りソフトウェアを用いてバーコードに含まれる文字情報を取得可能である。このため、物体登録部13にサービス物体131,133,135の二次元バーコードに含まれる文字情報が登録されていれば、物体検出部15はバーコード読み取りソフトウェアを用いてサービス物体である二次元バーコードを検出し、図2の「文字情報」欄に示した文字情報を介して「サービス内容」欄及び「有効期間の長さ」欄に示した内容を取得することができる。サービス物体が二次元バーコードの場合はバーコード読み取りソフトウェアが画像処理を行うので、二次元バーコードの画像そのものを物体登録部13に登録しておく必要はない。なお、サービス状況管理システム1では、物体検出部15以外の構成においてサービス物体とサービス内容との対応付けの情報を使用することも想定されうる。サービス物体を物体登録部13に登録する場合、例えば画像そのものを登録する方法や、画像の特徴量を抽出して登録する方法などが想定されうる。本実施形態では、物体登録部13において、図2に示す一覧の内、「文字情報」「サービス内容」「有効期間の長さ」の3列で構成されるテーブルがサービス物体登録テーブルとして記憶されている場合について説明する。
 図1に戻って、サービス状況管理システム1は、物体検出部15がサービス物体を初めて検出した時刻を起点とするサービスの有効期間の期限(以下、「サービスの有効期限」という)を設定する期限設定部16を備える。また、サービス状況管理システム1は、サービスの有効期限に関する情報(期限情報)を表す期限情報画像を表示可能な期限領域と、サービス提供施設(飲食店等)の状況を表す施設画像を表示する施設画像領域とを有する画像であって、外部の端末装置100へサービスの状況を伝達する伝達画像を生成する画像生成部17を備える。本実施形態において、物体検出部15がサービス物体を初めて検出した時刻とは、検出されたサービス物体に紐づけられたサービスの有効期限が定められていない状況で初めてサービス物体が検出された時刻、すなわち該サービスの開始時刻をいう。例えば、物体検出部15は初めてサービス物体を検出すると、検出されたサービス物体に紐づけられたサービス内容とそのサービスの有効期間の長さを物体登録部13のサービス物体登録テーブルから取得する。例えば、検出されたサービス物体がサービス物体131である場合、バーコード読み取りソフトウェアは文字情報として「No.1」を返すので、物体検出部15はサービス物体登録テーブルを参照してサービス内容である「予約」とそのサービスの有効期間の長さである「5分」を取得して検出情報として出力する。
 期限設定部16は、物体検出部15から検出情報が入力されると、サービスの有効期間の長さに基づいて期限を設定する。また、画像生成部17は、期限設定部16が設定した期限に基づいて期限情報画像を生成する。期限情報画像については後述する。さらに、画像生成部17は、期限情報画像及び施設画像で構成される伝達画像を伝達画像送信部19へ出力する。施設画像と伝達画像については後述する。本例では、画像生成部17における伝達画像の生成とは伝達画像を構成する期限情報画像の生成をいう。
 サービス状況管理システム1は、画像生成部17が生成した伝達画像を外部の端末装置100に送信する伝達画像送信部19を備える。端末装置100は、画像等を表示可能な表示部101を有している。端末装置100のユーザ(来場予定者・潜在来場者)は、インターネットを介して送信された伝達画像を表示部101において閲覧することで、サービス提供施設におけるサービス状況を確認することができる。伝達画像送信部19は、画像生成部17から伝達画像が入力された場合に、自動的に伝達画像を端末装置100へ送信してもよいし、端末装置100側からの要求に応じて伝達画像を送信してもよい。伝達画像を自動的に送信する場合の送信先は、例えば端末装置100のユーザによって事前に登録処理が行われること、または表示用ソフトウェアが端末装置100にインストールされた時点で自動的に登録処理が行われることにより処理部10(図1参照)が展開されている処理用コンピュータ上の記憶領域に記憶される。なお、端末装置100がデジタルサイネージのディスプレイの場合はインターネットを介することなく、ローカルエリアネットワークまたはケーブルなどによってサービス状況管理システム1に直接接続されるので送信先は自明である。
 またサービス提供施設のサービス提供者(従業員や店主)は、処理部10が展開されているコンピュータがカメラに内蔵されたマイクロコンピュータである場合は、該カメラにディスプレイを接続して撮影画像や伝達画像を閲覧することができる。また、処理部10が展開されている処理用コンピュータが提供施設内に設置されたパーソナルコンピュータである場合は、該パーソナルコンピュータのディスプレイを通して撮影画像や伝達画像を閲覧することができる。また、処理部10が展開されている処理用コンピュータが提供施設外に設置されたサーバコンピュータである場合、サービス提供施設のサービス提供者(従業員や店主)は、該サーバコンピュータに接続可能な端末装置(スマートフォンやタブレット型端末装置、パーソナルコンピュータ、デジタルサイネージ等)を介して撮影画像や伝達画像を閲覧してもよい。
 また、本発明によるサービス状況管理システム1は、処理部10、撮影部11及び物体登録部13を組み合わせた状態でサービス提供施設に提供されてもよいし、処理部10の各動作を実現するソフトウェアプログラムを有するアプリケーションプログラムのみがサービス提供施設に提供され、サービス提供施設のサービス提供者(従業員や店主)が該アプリケーションプログラムを所定のパーソナルコンピュータ等において展開し、該パーソナルコンピュータを市販のカメラやメモリ等の記憶装置と接続することで構成されてもよい。
(伝達画像)
 ここで、画像生成部17が生成する伝達画像について図3を用いて説明する。図3は、画像生成部17が生成した伝達画像200の一例を示す図である。
 図3に示すように、伝達画像200は、施設画像201を表示する施設画像領域210と期限領域203とを有する画像である。本例では、施設画像201は撮影部11が撮影した現在の施設内の画像(静止画像)である。図3に示す施設画像201において、画像の中心部よりやや下の領域に写るテーブル上には二次元バーコードを印刷したパネル(サービス物体)が配置されている。
 また、期限領域203は、サービス提供施設の提供するサービスの有効期限に関する期限情報を表示可能な領域である。期限領域203は施設画像領域210とは別の領域に設けてもよいし、本例のように施設画像領域210と重ね合わせてもよい。図3に示す例では、期限領域203には、サービス内容とサービスの有効期限までの残り時間を表す文字列画像である期限情報画像231が表示されている。期限情報画像231は、期限領域203に表示される画像であって、本例ではサービス内容を示す文字列画像「予約」と残り時間を示す文字列画像(「残り300秒」)とが記号(コロン)で区切られた画像であって文字以外の画素は透明が設定されている。例えば期限情報画像231がPNG形式ファイルであれば、透明度の設定が可能である。例えば端末装置100のユーザがサービス提供施設へ連絡してテーブルの予約を行うと、サービス提供施設において予約サービスに紐づけられたサービス物体(例えばサービス物体131,133)が所定のテーブル(例えば施設内においてユーザが所望する場所のテーブル、あるいはユーザが所望する座席数を有するテーブル)に例えばサービス提供者によって配置され、サービス状況管理システム1は図3に示すようなサービス物体が写った施設画像201と期限情報画像231とで構成される伝達画像200を端末装置100に送信する。これにより、端末装置のユーザ(潜在来場者・来場予定者)に、端末装置100の表示部101に表示された伝達画像200を通して、予約されたテーブルがどれかという施設状況と、予約サービスの残り時間があと300秒であるというサービス状況とが伝達される。
 本例では、期限領域203は施設画像領域210内においてサービス物体が写った領域の近傍領域(右下領域)に設けられているが、期限領域203の位置はこれに限られない。期限領域203は、施設画像領域210内においてサービス物体の視認を妨げない位置に設けられてもよいし、施設画像領域210外(例えば、施設画像領域210外であって、施設画像領域210と隣接した上下左右何れかの領域等)に設けられてもよい。また、表示部101をタッチパネルディスプレイで構成し、ユーザがサービス物体の写った領域を指でタッチして初めて、期限領域203をサービス物体の写った領域の近傍に設けるようにしてもよい。また、図3に示す期限情報画像231は、サービスの有効期間の残り時間が秒単位で表示されているが、期限情報画像231の表示態様はこれに限られない。期限情報画像231において残り時間は、ミリ秒単位まで表示されてもよいし、分秒ミリ秒がコロン区切り(分:秒:ミリ秒)で表示されてもよい。また、残り時間の表示に代えてサービスが有効期限切れとなる日時(○月○日○時○分、または日付を省略して○時○分)が表示されてもよい。残り時間とサービスが有効期限切れとなる日時の両方が表示されてもよい。また、ユーザにサービス物体のデザインが周知されている場合は、サービス内容を示す文字列画像「予約:」は不要である。
(サービス状況伝達処理)
 次に、図4を用いて本実施形態によるサービス状況管理システム1が伝達画像200を端末装置100へ送信する処理であるサービス状況伝達処理の流れについて説明する。図4は、サービス状況伝達処理の流れの一例を示すフローチャートである。本実施形態によるサービス状況管理システム1は、サービス状況伝達処理を例えば1秒間に30回実行する。あるいは、カメラ画像に写り込んだ人物の歩行の態様から第三者が個人を特定することを防ぐべく頻度を落として、サービス状況伝達処理を例えば1秒間に4回実行する。
(ステップS1)
 ステップS1において撮影部11は、サービス提供施設内を撮影して1枚の撮影画像を物体検出部15および画像生成部17へ出力する。撮影画像が入力されると、物体検出部15はステップS2の処理を実行する。
(ステップS2)
 ステップS2において物体検出部15は、ステップS1で撮影された撮影画像に物体登録部13に予め登録されている二次元バーコード(図2に示すサービス物体131,133,135の何れか)が含まれているか否かを、バーコード読み取りソフトウェア(例えば「ZBAR」)を用いて探索する。具体的には、バーコード読み取りソフトウェアが二次元バーコードを検出して文字情報を返すと物体検出部15はサービス物体登録テーブル(図2参照)を参照して「文字情報」を介して「サービス内容」と「有効期間の長さ」をサービス情報として取得する。物体検出部15は、バーコード読み取りソフトウェアが返した文字情報がサービス物体登録テーブルの「文字情報」欄の文字情報の何れかに該当した場合に、撮影画像から登録済みのサービス物体が検出されたと判定する。物体検出部15は、サービス物体131,133,135の何れかが検出されたと判定すると、サービス物体から読み取ったサービス情報(サービス内容、有効期間の長さ)と、サービス物体を検出した時刻(検出時刻)とを検出情報として期限設定部16へ出力する。サービス内容を含む検出情報が入力されると、期限設定部16はステップS3の処理を実行する。
 一方、物体検出部15は撮影画像から登録済みのサービス物体が検出されなかったと判定した場合、サービス物体131,133,135の何れも検出されなかった旨の情報(未検出情報)を期限設定部16へ出力する。撮影画像からサービス物体が検出されない例としては、例えばサービス物体131,133,135の何れも施設内に配置されていない(二次元バーコードが撮影画像に含まれない)場合や、撮影画像に含まれる二次元バーコードに含まれる文字情報がサービス物体登録テーブルの「文字情報」欄の設定内容に該当しなかった場合、施設内に配置されたサービス物体が遮蔽物(他の物体や人)によって遮られている場合が想定される。サービス物体が検出されなかった旨の情報(未検出情報)が入力されると、期限設定部16はステップS10の期限解除処理を実行する。期限解除処理については後述する。
(ステップS3)
 ステップS3において期限設定部16は、サービスの有効期限が設定済みか否かを判定する。サービスの有効期限が設定済みか否かは、処理部10(図1参照)が展開されているコンピュータの所定の記憶領域に有効期限時刻が記憶されているか否かで判定する。有効期限時刻は、サービスの有効期限を示す時刻であって、物体検出部15がサービス物体を初めて検出した時刻(検出時刻)を起点とし、該検出時刻にサービス物体に紐づけられた有効期間の長さ(図2参照)を加えた時刻である。有効期限時刻が設定されていることは、ステップS2で検出されたサービス物体に対応づけられたサービスが開始されており、期限領域203(図3参照)に表示される期限情報画像231が作成済みであることを示す。期限設定部16は、所定の記憶領域に有効期限時刻が記憶されており、サービスの有効期限が設定済みであると判定するとステップS5の処理に移る。一方、期限設定部16は、所定の記憶領域に有効期限時刻が記憶されておらず、サービスの有効期限が設定済みでない、すなわちサービス物体が初めて検出されたと判定するとステップS4の処理に移る。
(ステップS4)
 ステップS4において期限設定部16は、サービスが開始された時点において、サービスの有効期限を設定しステップS7の処理に移る。具体的には、期限設定部16は、物体検出部15が出力した検出情報に含まれるサービスの有効期間の長さを取得する。さらに、期限設定部16は、物体検出部15から入力された検出情報に含まれる検出時刻にサービスの有効期間の長さを加算した時刻を有効期限時刻として所定の記憶領域に記憶する。例えば、検出情報に含まれる有効期間の長さが「5分」であり、検出時刻が10時10分であるとすると、有効期限時刻は10時15分(=10時10分+5分)となる。期限情報画像231において期限情報としてサービスの有効期間の残り時間が表示される場合、期限設定部16は、取得した有効期間の長さをそのまま期限情報として所定の記憶領域に記憶する。期限情報は、サービスの有効期限に関する情報であって、後述するステップS7の処理における期限情報画像231の生成に用いられる。期限設定部16は、例えば有効期間の長さの単位を「分」から「秒」に換算した値を残り時間として期限情報に設定する。例えば有効期間の長さ「5分」は「300秒」として期限情報に設定される。ステップS4において期限情報に設定された残り時間は、有効期限時刻を経過するまでの間、サービス物体が検出される度に後述するステップS6において更新される。なお、期限情報画像231(図3参照)においてサービスが有効期限切れとなる日時で期限情報が表示される場合、このステップ4では有効期限時刻が期限情報として設定される。この場合、ステップS6の残り時間の更新処理は省略される。
(ステップS5)
 ステップS5において期限設定部16は、現在時刻を取得すると、該現在時刻がステップS4で設定された有効期限時刻を経過しているか否かを判定する。本例では、現在時刻として、処理部10(図1参照)が展開されているコンピュータ上の現在時刻が用いられる。期限設定部16は、現在時刻が有効期限時刻を経過していると判定するとステップS8の処理に移る。一方、期限設定部16は、現在時刻が有効期限時刻を経過しておらず、サービスの有効期間が継続すると判定するとステップS6の処理に移る。
(ステップS6)
 ステップS6において期限設定部16は、期限情報として所定の記憶領域に記憶されている残り時間を更新すると、物体検出部15から入力された検出情報に含まれるサービス内容を画像生成部17へ出力する。期限設定部16から検出情報が入力されると、画像生成部17はステップS7の処理を実行する。期限設定部16は、具体的には、有効期限時刻から現在時刻を差し引いた値に更新する。サービス状況伝達処理の実行間隔を正確に刻めるなら、現在の残り時間からその実行間隔(例えば1秒間に4回であれば0.25秒)を差し引いて残り時間を更新してもよい。なお、期限情報画像231においてサービスが有効期限切れとなる日時で期限情報が表示される場合には、ステップS6の更新処理は省略され、ステップS5のNoからステップS7の処理に移る。
(ステップS7)
 ステップS7において画像生成部17は、期限領域203に表示される期限情報画像231を生成してステップS9の処理に移る。具体的には、画像生成部17は、物体検出部15から期限設定部16を介して入力された検出情報に含まれるサービス内容と、期限設定部16によって所定の記憶領域に記憶された期限情報から期限情報画像231を生成する。ステップS4から移行したステップS7において、例えば検出情報に含まれるサービス内容が「予約」であり、期限情報に設定された残り時間が300秒であるとすると、画像生成部17は、「予約」と「残り300秒」とをコロン区切りにした文字列画像を生成する。これにより、図3に示すようなサービスの有効期限に関する情報を表す期限情報画像231が生成される。また、ステップS6から移行したステップS7において、例えば残り時間が「299.75秒」のように小数点以下であるときは、小数点以下を切り捨てて「299秒」として表示してもよい。期限情報に設定された残り時間は、初めてサービス物体が検出されたときにステップS4において初期設定された有効期間の長さを示す値であり、ステップS6において更新される値である。ステップS6の処理が実行される度に期限情報の残り時間は減少していく。このため、期限情報画像231においてサービスの有効期間の残り時間がカウントダウン表示されることとなる。
 なお、期限情報画像231においてサービスが有効期限切れとなる日時(有効期限時刻)で期限情報が表示される場合には、初めてサービス物体が検出されたときに一度だけ期限情報画像231を生成しておけば繰り返し利用することができる。このように、画像生成部17は、物体検出部15がサービス物体を検出し(ステップS2のYes)且つサービスの有効期限が経過していないと期限設定部16が判定した場合(ステップS5のNo)に、期限情報が表示される期限情報画像231を生成し、伝達画像200の期限領域203に表示させる。本例では、画像生成部17における伝達画像200の生成とは期限情報画像231の生成をいう。
(ステップS8)
 ステップS8において画像生成部17は、期限領域203(図3参照)に表示される期限情報画像231の期限情報を消去してステップS9の処理に移る。期限情報を消去するとは、例えば、期限領域203が施設画像領域210に重なる場合は期限情報画像231のすべてを透明にすることをいい、期限領域203が施設画像領域210に重ならない場合は期限情報画像231を初期化する(例えば、単色で塗りつぶす)ことをいう。これにより、期限領域203において期限情報(本例では有効期間の残り時間または有効期限時刻)が非表示となる。
 図5は、ステップS8において期限情報を非表示にした期限情報画像231を有する伝達画像の一例を示す図である。図5に示すように、施設画像領域210において図3に示すのと同様にサービス物体が表示されている。このとき、画像生成部17は、期限情報画像231として例えば文字列画像「予約サービス終了」を表示してもよい。これにより、期限情報が非表示である伝達画像200bを端末装置100のユーザが閲覧した際に、サービス物体の配置されたテーブルが予約済みであると誤解されることを防止することができる。
(ステップS9)
 図4に戻って、ステップS9において伝達画像送信部19は、インターネットを介して端末装置100に伝達画像200を送信する。伝達画像200は、施設画像201を表示する施設画像領域210と期限情報画像231を表示可能な期限領域203とを有する画像である。これにより、端末装置100のユーザは表示部101を通して伝達画像200を閲覧することで、サービス提供施設の提供するサービス(予約、割引等)の状況及びサービスがテーブルの予約である場合は該予約されたテーブルが何れであるかを把握することができる。なお、本例において、施設画像領域210に表示される施設画像201は、ステップS1において撮影部11が撮影した撮影画像である施設内の画像そのものである。
 以上説明したように、本実施形態によるサービス状況管理システム1は、サービス状況伝達処理を例えば1秒間に4回(0.25秒ごと)実行する。これにより、潜在来場者が使用する端末装置(例えば端末装置100)には0.25秒ごとに伝達画像が送信され、サービス提供施設内の様子やサービス提供施設が提供するサービス(予約や割引)の状況(例えば、予約サービスの残り時間や予約済みのテーブルがどれか)が伝達される。これにより潜在来場者はほぼリアルタイムでサービス状況等を確認できる。また、期限情報画像231に表示される期限情報を有効期間の残り時間とした場合、単位時間ごとに残り時間を示す数字がカウントダウンされていく。これにより、サービス状況管理システム1は、来場予定者がサービス有効期間内にサービス提供施設へ来場することを促進することができる。また、サービス状況管理システム1は、サービス提供者が提供するサービスが予約サービスの場合、現在予約サービスを利用している来場予定者が予約サービスを利用できる期間(有効期間の残り時間)が潜在来場者にも閲覧可能である。これにより、残り時間が少なくなっていれば予約をした来場予定者が来ない可能性が高いと判断して、新たに予約サービスを利用しようとする潜在来場者を獲得する可能性を向上させることができる。
 また、図示は省略するが、サービス提供施設において提供されているサービスが割引サービスである場合、伝達画像にはサービス提供者によって予め定められた割引率が表示されてもよい。割引率は、期限情報画像231にサービス内容及び残り時間と併せて、例えば「10%値引き中:残り300秒」のように表示される。
 また、サービス状況管理システム1は、サービス状況伝達処理においてサービスの有効期限が経過すると(ステップS5のYes)、期限情報画像231の期限情報を消去したり、期限情報画像231に例えば「予約サービス終了」と表示したりする(ステップS8)。このため、サービス状況管理システム1を利用するサービス提供施設ではサービス提供者(従業員や店主)が例えばサービスの有効期限の経過を把握したり、サービスの有効期限が経過したらサービス物体を片付けるといったサービスの有効期間を管理する作業をする必要がなく、本来の業務に集中することができる。例えば、テーブルに予約済みの札を置いてカメラで写して外から該カメラが写した画像を閲覧させるといった方法では、予約をした来場予定者が現れないままサービス提供者がその札を放置してしまうと、該画像を閲覧している潜在来場者を獲得できないという問題があった。これに対し、サービス状況管理システム1は、前の予約サービスの有効期間が終了していることを伝達画像に表示して潜在来場者に伝達可能であるので、潜在来場者に対して新たな予約サービスが受付け可能であることを伝達することができる。このため、サービス状況管理システム1は予約サービスの利用を促進させて、サービス提供施設が新たに予約サービスを利用する来場予定者を獲得する機会を増加させることができる。このように、サービス状況管理システム1は、施設側における作業負荷を増加させることなく、潜在来場者に対するサービス状況の伝達や施設側におけるサービス状況の管理の精度を向上させることができる。
 また、サービス状況管理システム1には、例えば端末装置100から予約サービスの利用の要求を受け付ける予約受信部が設けられていてもよい。端末装置100から予約サービスの利用要求が送信されると、予約受信部は例えばサービス提供者が携帯している端末装置に予約サービスの利用要求があった旨の通知を行う。該通知を確認したサービス提供者は、予約サービスに紐づけられたサービス物体(サービス物体131,133)を所定のテーブルに配置する。これにより、予約サービスの有効期間が開始される。
(サービス物体の検出方法)
 ここで、本実施形態によるサービス状況管理システム1において、物体検出部15が撮影画像からサービス物体を検出する際(ステップS2)の検出方法の一例について説明する。
 物体検出部15が、撮影部11の撮影した撮影画像においてサービス物体を検出する際は、画角の全面にサービス物体が写る場合を想定して探索対象となる画像(サービス物体の画像)の最大サイズを決め、想定されるカメラ(撮影部11)とサービス物体との最大距離や画像解像度に応じて探索対象となる画像の最小サイズを決める。しかし、撮影する度に最大サイズから最小サイズまで全ての探索サイズで画角全面を探索していては、検出処理の速度が遅くなったり誤検出が発生したりするおそれがある。
 そこで、例えば新規にサービス状況管理システム1を設置する時やサービス提供施設内においてテーブルやソファ等のレイアウト変更を行った時は、サービス提供施設内の全ての設備にそれぞれサービス物体を設置して、1回だけ、最大サイズから最小サイズまで全ての探索サイズを全ての領域で探索する初期化処理を行う。これにより、画角内において物体検出部15が探索しなくてもよいエリア(天井、壁、通路など)が特定できる。一方、撮影部11が撮影する撮影画像に写る物体は、撮影部11に近ければ大きく写り、離れれば小さく写る。このため、物体検出部15がサービス物体の検出にあたり探索すべきエリアを分割すれば、この分割されたエリアごとに検出対象のおおよその探索サイズが決まる。このような探索サイズ決定処理を行うことで、撮影画像の画角の全領域に対して全ての探索サイズでサービス物体を探索する必要がなくなる。このため、2回目以降のサービス状況伝達処理における物体検出部15におけるサービス物体の探索速度を上げて探索時間を短縮すること及びサービス物体の検出精度を上げることができる。
(期限解除処理)
 次に、図6を用いて本実施形態によるサービス状況管理システム1がサービス状況伝達処理(図4参照)のステップS10において実行する期限解除処理について説明する。図6は、期限解除処理の流れの一例を示すフローチャートである。期限設定部16は、物体検出部15からサービス物体が検出されなかった旨の情報(未検出情報)が期限設定部16に入力されたこと(ステップS2のNo)に基づいて期限解除処理を実行する。
(ステップS10-1)
 ステップS10-1において、期限設定部16は、サービスの有効期限が設定済みか否かを判定する。サービスの有効期限が設定済みか否かはステップS3(図4参照)の処理と同様に所定の記憶領域にサービスの有効期限時刻が記憶されているか否かで判定する。期限設定部16は、所定の記憶領域に有効期限時刻が記憶されており、サービスの有効期限が設定済みであると判定するとステップS10-2の処理に移る。一方、期限設定部16は、所定の記憶領域に有効期限時刻が記憶されておらず、サービスの有効期限が設定済みでないと判定するとステップS10-2以降の処理を実行せずに期限解除処理を終了してサービス状況伝達処理に戻る。
(ステップS10-2)
 ステップS10-2において、期限設定部16は、現在時刻が解除猶予時刻を経過しているか否かを判定する。現在時刻は、ステップS5と同様に処理用コンピュータ上の現在時刻を用いる。また、本例において解除猶予時刻とは、所定の記憶領域に記憶されているサービスの有効期限時刻に解除猶予時間を加算した時刻をいう。ここで、解除猶予時間について説明する。
(解除猶予時間)
 サービス提供施設内には多くの人や物体が存在する。このため、撮影部11(カメラ)とサービス物体の間に遮蔽物が割り込む等して、撮影画像内にサービス物体が写らず、サービスの有効期間内であるにも関わらず物体検出部15がサービス物体を検出できない場合も起こり得る。このような場合に、サービス提供者(従業員や店主)がサービスの有効期間を強制的に終了させるべくサービス物体を撤去したものとみなして期限を解除してしまうと、遮蔽物がなくなってサービス物体が再び検出されたときにサービスの有効期限が再度設定し直され、サービスの有効期限が意図せず延期されてしまうことになる。このような事態を防止するため、本実施形態によるサービス状況管理システム1では解除猶予時間を設けている。サービス状況管理システム1は、物体検出部15によりサービス物体が検出されなくてもすぐには期限を解除せず、解除猶予時刻(サービス物体が最後に検出された時刻+解除猶予時間)が経過した場合にサービスの有効期限を解除する(後述するステップS10-3の処理)。これにより、サービス状況管理システム1はサービス提供施設が意図しないサービスの有効期限の延期を防止することができる。
 本例では、解除猶予時間は予め設定された時間(例えば、3分)である。例えば、物体検出部15によってサービス物体が最後に検出された時刻が10時10分であるとすると、解除猶予時刻は10時13分(=10時10分+3分)となる。なお、サービス物体が最後に検出された時刻は、例えばステップS2(図4参照)で物体検出部15が出力した検出情報に基づいて、例えばステップS9(図4参照)の処理において所定の記憶領域に記憶すればよい。この機能はサービスの有効期限が経過しているにもかかわらずサービス物体が放置されるケースでも有効である。想定される放置時間と同じかそれ以上の時間を解除猶予時間に設定すればよい。期限設定部16は、解除猶予時刻が経過していると判定すると、ステップS10-3の処理に移る。一方、期限設定部16は、解除猶予時刻が経過していないと判定すると、ステップS10-4の処理に移る。
(ステップS10-3)
 ステップS10-3において、期限設定部16は、サービスの有効期限を解除してステップS10-4の処理に移る。サービスの有効期限を解除するとは、具体的には所定の記憶領域に記憶されているサービスの有効期限時刻の値及び期限情報の値をリセットすることである。これにより、サービス状況伝達処理(図4参照)において、物体検出部15により改めてサービス物体が検出されると(ステップS2のYes)、期限設定部16によりサービスの有効期限が設定されていない、すなわちサービス物体が初めて検出されたと判定され(ステップS3のNo)、サービスの有効期限が再度設定される(ステップS4)。
(ステップS10-4)
 ステップS10-4において、画像生成部17は、期限領域203(図3参照)において期限情報(本例では有効期間の残り時間)を消去してステップS10-5の処理に移る。期限情報を消去するとは、ステップS8と同様に、例えば、期限領域203が施設画像領域210に重なる場合は期限情報画像231のすべてを透明にすることをいい、期限領域203が施設画像領域210に重ならない場合は期限情報画像231を初期化する(例えば、単色で塗りつぶす)ことをいう。これにより、期限領域203において期限情報(本例では有効期間の残り時間等)が非表示となる。ステップS10-4において生成される期限情報画像231を有する伝達画像において施設画像201は、例えばサービス物体が遮蔽物(人と物を含む)によって覆われて撮影部11(カメラ)でとらえられない状態となっている点で、図3及び図5に示す施設画像201と異なる。また、サービス提供者(従業員や店主)により、サービス物体が撮影部11で撮影されるサービス提供施設内の領域から取り去られたことで、サービス物体が撮影部11(カメラ)でとらえられない状態となっている場合もある。
 図7は、ステップS10-4において生成される期限情報画像231が表示された伝達画像200cの一例を示す図である。図7に示すように、施設画像201cにおいてサービス物体が人物αによって遮蔽されている。また、期限領域203では期限情報画像231が透明とされることで非表示になっている。
(ステップS10-5)
 図6に戻って、ステップS10-5において伝達画像送信部19は、インターネットを介して潜在来場者の端末装置100に伝達画像200を送信する。伝達画像200は、施設画像201を表示する施設画像領域210と期限情報画像231を表示可能な期限領域203とを有する画像である。
 このように、サービス状況管理システム1は、サービス状況伝達処理(図4参照)のステップS2において物体検出部15によりサービス物体が検出されない場合も、期限解除処理(特にステップS10-1からステップS10-3の処理)を実行することによりサービスの有効期限の解除を実行することができる。また、サービス状況管理システム1は、解除猶予時刻を経過していること(ステップS10-2のYes)を期限解除処理におけるサービスの有効期限の解除の条件としている。これにより、サービス提供施設が意図しないサービスの有効期限の延期を防止することができる。
 具体的には、図3、図5及び図7を用いて説明したように、本実施形態によるサービス状況管理システム1において画像生成部17は、サービスの有効期限が経過しているか否か、またサービス物体が物体検出部15により検出されているか否かに応じて自動的に異なる期限情報画像231を生成する。これにより、サービス状況管理システム1では、サービス提供者(従業員や店主)が煩雑な処理を行わなくても、サービス状況を正確に潜在来場者に伝達することができる。このように、サービス状況管理システム1は、施設側における作業負荷を増加させることなく、潜在来場者に対するサービス状況の伝達や施設側におけるサービス状況の管理の精度を向上させることができる。
(第2実施形態)
 次に、本発明の第2実施形態によるサービス状況管理システムについて説明する。本実施形態によるサービス状況管理システムは、伝達画像を外部の端末装置(例えば端末装置100)に送信するサービス状況伝達処理(図4参照)が第1実施形態と異なる以外は、第1実施形態によるサービス状況管理システム1と同一の構成及び同一の作用効果を有する。このため、以下、本実施形態によるサービス状況管理システム及びサービス状況管理システムの構成要素について、図1に示すサービス状況管理システム1と同一の符号を用いて説明する。
 ここで、図8を用いて本実施形態によるサービス状況伝達処理の一例を説明する。
 図8は、本実施形態におけるサービス状況伝達処理の流れの一例を説明するフローチャートである。図8では、本実施形態におけるサービス状況伝達処理において上記第1実施形態と同様の処理を行うステップには図4に示すサービス状況伝達処理のフローチャートと同一の符号を付し、説明は省略する。
 図8に示すように、サービス状況伝達処理が開始されると、撮影部11が施設内を撮影した撮影画像を物体検出部15および画像生成部17に出力し(ステップS1)、物体検出部15は、ステップS2-1の処理を実行する。
(ステップS2-1)
 ステップS2-1において物体検出部15は、撮影画像にサービス物体(図2に示すサービス物体131,133,135の何れか)が含まれているか否かを探索する。物体検出部15は、撮影画像にサービス物体が含まれていると判定すると、ステップS20の処理に移る。一方、物体検出部15は、撮影画像にサービス物体が含まれていないと判定するとサービス物体131,133,135が検出されなかった旨の情報(未検出情報)を期限設定部16へ出力する。未検出情報が入力されると、期限設定部16はステップS10の期限解除処理を実行する。本実施形態において実行される期限解除処理は、上記第1実施形態で実行される期限解除処理(図5参照)と同じ処理である。
(ステップS20)
 ステップS20において物体検出部15は、バーコード読み取りソフトウェア(例えば「ZBAR」)を用いて、サービス内容が「予約」であるサービス物体131,133を検出したと判定すると、サービス物体の現在の位置を示す情報(現在位置情報)を検出情報に加えて期限設定部16へ出力し、期限設定部16は続くステップS3において有効期限が設定済みであると判定した場合はステップS21の処理に移る。一方、物体検出部15はサービス内容が「予約」であるサービス物体131,133が検出されなかったと判定すると、ステップS3以降の処理を実行せずにサービス状況伝達処理を終了する。
(ステップS21)
 ステップS21において、期限設定部16は、撮影画像におけるサービス物体の位置が前回のサービス状況伝達処理時のサービス物体の位置(前回位置)からずれているか否かを判定する。前回位置に関する情報は、前回位置情報として処理部10(図1参照)が展開されている処理用コンピュータ上の所定の記憶領域に記憶されている。サービス物体が検出されなかったときは、この前回位置情報は更新されずに保持される。また、サービス状況管理システム1の起動時には、前回位置情報として例えば施設画像201の領域の外の座標が設定される。期限設定部16は、物体検出部15から入力された検出情報に含まれるサービス物体の位置情報(現在位置情報)と前回位置情報とを比較し、両者が一致していない、すなわち現在位置情報に含まれるサービス物体の位置と前回位置情報に含まれるサービス物体の位置とにずれがあるかを判定する。期限設定部16は、現在位置情報に含まれるサービス物体の位置と前回位置情報に含まれるサービス物体の位置とにずれがあると判定すると、ステップS4の処理(サービスの有効期限の設定)に移る。これにより、サービス物体の位置がずれたことに基づいて、サービスの有効期限の再設定が実行される。一方、期限設定部16は、現在位置情報と前回位置情報とが一致しておりずれがないと判定すると、ステップS5の処理に移る。
(ステップS23)
 画像生成部17がステップS7またはステップS8の処理を実行すると、次いで期限設定部16は、ステップS23の処理を実行する。
 ステップS23において、期限設定部16は、現在位置情報の内容で前回位置情報を更新する。これにより、現在のサービス物体の位置情報が所定の記憶領域に記憶され、次回のサービス状況伝達処理においてサービス物体の位置のずれの有無の判定に用いることができる。ステップS23の処理が終了すると、ステップS9において伝達画像送信部19が伝達画像を端末装置(例えば端末装置100)へ送信して、サービス状況伝達処理が終了する。
 以上説明したように、本実施形態におけるサービス状況伝達処理では、サービス提供施設における予約サービスの提供時において、サービス物体の位置が前回のサービス状況伝達処理時とずれたことにより(ステップS21のYes)、サービスの有効期限の再設定が実行される(ステップS4)。
 これにより、例えばサービス提供施設のサービス提供者(従業員や店主)は、サービス物体を現在置かれているテーブル(テーブルA)の隣のテーブル(テーブルB)に移動させるだけで、新たにテーブルBについて予約サービスを開始することができる。また、テーブルAについての予約サービスの有効期間が経過する前に、テーブルAについてのサービス有効期間を再設定したい場合等には、テーブルA上においてサービス物体の位置を移動させればよい。このように、本実施形態によるサービス状況管理システム1は、サービス提供施設において容易に予約サービスの有効期限の再設定を実行することができる。
 また、本実施形態によるサービス状況管理システム1において、サービス物体の現在位置と前回位置とのずれが予め定められた誤差範囲内であれば、ステップS21においてサービス物体が移動されていないと判定してもよい。これにより、サービス提供施設内における物や人の移動に伴う振動等でサービス物体の位置がずれた場合に、意図せずにサービスの有効期限が再設定されてサービスの有効期限が延期されることを防止することができる。
(第3実施形態)
 次に、本発明の第3実施形態によるサービス状況管理システムについて説明する。本実施形態によるサービス状況管理システムは、伝達画像を外部の端末装置(例えば端末装置100)に送信するサービス状況伝達処理(図4参照)が第1実施形態と異なる以外は、第1実施形態によるサービス状況管理システム1と同一の構成及び同一の作用効果を有する。このため、以下、本実施形態によるサービス状況管理システム及びサービス状況管理システムの構成要素について、図1に示すサービス状況管理システム1と同一の符号を用いて説明する。
 ここで、図9を用いて本実施形態によるサービス状況伝達処理の一例を説明する。
 図9は、本実施形態におけるサービス状況伝達処理の流れの一例を説明するフローチャートである。図9では、本実施形態におけるサービス状況伝達処理において上記第1実施形態と同様の処理を行うステップには図4に示すサービス状況伝達処理のフローチャートと同一の符号を付し、説明は省略する。
 図9に示すように、サービス状況伝達処理が開始されると、撮影部11が施設内を撮影した撮影画像を物体検出部15に出力し(ステップS1)、物体検出部15は、ステップS2-1の処理を実行する。
(ステップS2-1)
 ステップS2-1において物体検出部15は、上記第2実施形態におけるのと同様に、撮影画像にサービス物体(図2に示すサービス物体131,133,135の何れか)が含まれているか否かを探索する。物体検出部15は、撮影画像にサービス物体が含まれていると判定すると、ステップS30の処理に移る。一方、物体検出部15は、撮影画像にサービス物体が含まれていないと判定するとサービス物体131,133,135が検出されなかった旨の情報(未検出情報)を期限設定部16へ出力する。期限設定部16は未検出情報が入力されると、ステップS10の期限解除処理を実行する。本実施形態において実行される期限解除処理は、上記第1実施形態で実行される期限解除処理(図5参照)と同じ処理である。
(ステップS30)
 ステップS30において物体検出部15は、サービス内容が「割引」であると判定すると、サービス物体の現在の位置を示す情報(現在位置情報)を検出情報に加えて期限設定部16へ出力し、期限設定部16はステップS3の処理に移る。一方、物体検出部15はサービス内容が「割引」であるサービス物体135が検出されなかったと判定すると、ステップS3以降の処理を実行せずに、サービス状況伝達処理を終了する。
 期限設定部16は、ステップS3においてサービスの有効期限時刻が設定済みでないと判定すると(ステップS3のNo)、ステップS4でサービスの有効期限を設定し、ステップS31の処理に移る。一方、期限設定部16は、ステップS3においてサービスの有効期限時刻が設定済みであると判定すると(ステップS3のYes)、ステップS32の処理に移る。
(ステップS31)
 ステップS31において期限設定部16は、サービス物体の現在位置情報の内容を処理用コンピュータ上の所定の記憶領域に登録してステップS7の処理に移る。これにより、割引サービス有効期間において、サービス物体が割引サービスの開始時の位置からずれたか否かを判定することができる。
(ステップS32)
 ステップS32において期限設定部16は、ステップS21(図8参照)と同様に撮影画像におけるサービス物体の位置が前回のサービス状況伝達処理時のサービス物体の位置(前回位置)からずれたか否かを判定する。期限設定部16は、物体検出部15から入力された検出情報に含まれるサービス物体の位置情報(現在位置情報)と前回位置情報とを比較し、両者が一致していない、すなわち現在位置情報に含まれるサービス物体の位置と前回位置情報に含まれるサービス物体の位置とにずれがあるか否かを判定する。期限設定部16は、現在位置情報に含まれるサービス物体の位置と前回位置情報に含まれるサービス物体の位置とにずれがあると判定すると、ステップS33の処理に移る。一方、期限設定部16は、現在位置情報と前回位置情報とが一致しており、前回のサービス状況伝達処理から今回のサービス状況伝達処理までの間にサービス物体がずれていないと判定すると、ステップS5の処理に移る。
(ステップS33)
 ステップS33において期限設定部16は、サービスの有効期間が経過しているか否かに関わらず、ステップS10-3(図6参照)と同様に、サービスの有効期限を解除すべく、所定の記憶領域に記憶されているサービスの有効期限時刻の値及び期限情報の値をリセットし、ステップS8の処理に移る。これにより、サービス物体の位置がずれたことに基づいて、割引サービスが終了される。
 以上説明したように、本実施形態におけるサービス状況伝達処理では、サービス提供施設における割引サービスの提供開始時にサービス物体の位置を登録しておき(ステップS31)、サービス有効期間内においてサービス物体の位置がずれたことにより(ステップS32のYes)、サービスの有効期限を解除して割引サービスを終了する。
 このように、本実施形態によるサービス状況管理システム1は、サービス物体の位置のずれが検知された場合に割引サービスを無効にする。具体的には、本実施形態によるサービス状況管理システム1は、サービス物体の移動が検知される第2実施形態のようにサービスの有効期限を再設定せずに、サービスの有効期限に関わらずサービスを終了させる。これにより、本実施形態によるサービス状況管理システム1は、いたずら等によって割引サービスに紐づけられたサービス物体が移動された場合に、サービス提供施設側の意図によらずに割引サービスの有効期限が延期されることや、サービス提供者でない悪意の第三者が偽のサービス物体を持ち込んだことで偽の割引サービスが開始されることを防止することができる。
(第3実施形態の変形例)
 また、本実施形態によるサービス状況管理システム1は、起動される度に割引サービスに紐づけられたサービス物体の位置情報をリセットして再登録するように構成されていてもよい。例えば、サービス提供施設の営業開始後に最初に割引サービスの有効期限が設定される(ステップS4)際のみにサービス物体の位置登録処理(ステップS31)を実行するようにしてもよい。これにより、営業開始後最初に配置された位置からサービス物体の位置がずれたか否かに基づいて割引サービスを終了させることができ、いたずら等によってサービス提供施設側の意図によらずに割引サービスの有効期限が延期されることをより確実に防止することができる。なお、サービス物体の位置情報を登録するタイミングは起動される度に限られず、タイマーを用いて日、週、月、年ごととしてもよい。また、位置情報を登録する際はサービス物体を初めて検出した時刻とサービスの開始時刻に時間差を設け、その時間差においてサービス物体の位置が安定したか否かを判定してもよい。
(第4実施形態)
 次に、本発明の第4実施形態によるサービス状況管理システムについて説明する。本実施形態によるサービス状況管理システムは、システムの構成要素として背景画像登録部41を有する点でサービス状況管理システム1と異なる。また、本実施形態によるサービス状況管理システムでは、背景画像登録部41を有することにより、サービス状況伝達処理(図4参照)のステップS9で送信される伝達画像における施設画像が第1実施形態によるサービス状況管理システム1と異なる。ただし、これらの点以外は第1実施形態によるサービス状況管理システム1と同一の構成及び同一の作用効果を有する。したがって、以下、本実施形態によるサービス状況管理システム及びサービス状況管理システムの構成要素について、図1に示すサービス状況管理システム1と同一の機能・作用を奏する構成要素には同一の符号を付してその説明は省略する。
 ここで、図10及び図11を用いて本実施形態によるサービス状況管理システムについて説明する。図10は、本実施形態によるサービス状況管理システム2を説明するための構成図である。
 サービス状況管理システム2は、サービス物体が含まれないサービス提供施設内の画像を背景画像として予め登録する背景画像登録部41を備える。本実施形態において背景画像は、撮影される画角の中にサービス物体がないことをサービス提供者によって確認された状態で、撮影部11によって予め撮影されたサービス提供施設内の静止画像である。背景画像登録部41は、物体登録部13と同様に処理用コンピュータにおけるメモリ等の所定の記憶領域である。また、サービス状況管理システム2は、撮影部11によって一定期間に撮影された複数枚の撮影画像において変化のない画素をサービス物体に含まれない画素と判定し、該画素で背景画像登録部41に登録されている背景画像における対応する画素を置き換えてもよい。この背景画像の更新は、サービス提供者による確認なしで自動的に行われる。
 図11は、本実施形態における施設画像の生成方法の一例について説明する図である。本例における施設画像は、サービスの有効期限が経過した場合における施設画像である。図11(a)は、背景画像登録部41に登録されている背景画像の一例を示す図である。背景画像401は、例えば、サービス提供施設の営業時間外等において客がおらずサービス物体が配置されていない状態のサービス提供施設内を撮影した画像である。図11(b)は、サービス状況伝達処理(図4参照)のステップS1において撮影される撮影画像の一例を示す図である。背景画像401は、撮影画像402と同じ位置から同じ画角で施設内を撮影した画像である。このため、背景画像401の構図は撮影画像402と同様である。
 図11(c)は、本実施形態における施設画像(サービスの有効期限が経過した場合の施設画像)の一例を説明する図である。本実施形態において施設画像201dは、背景画像401と撮影画像402とを組み合わせて生成される。より具体的には、画像生成部17は、物体検出部15がサービス物体を検出し(ステップS2のYes)且つサービスの有効期限が経過していると期限設定部16が判定した場合(ステップS5のYes)に、撮影画像402においてサービス物体が位置する領域402s(図11(b)参照)を背景画像401における同位置の領域401sの画像で置き換えた画像を施設画像201dとして生成し、施設画像領域210に表示する。施設画像201dは、例えばステップS9(図4参照)において伝達画像を送信する直前に生成される。また、画像生成部17は、ステップS8(図4参照)の処理で、期限領域203に表示する期限情報画像231において期限情報を消去する。このようにして、本実施形態によるサービス状況管理システム2では、サービス物体及び期限情報が非表示の状態の伝達画像200dが潜在来場者の端末装置100へ送信される。本例の伝達画像200dでは施設画像201dにおいてサービス物体が非表示になるので、期限領域203にサービスの有効期限が経過したことを明示する文字列画像「予約サービス終了」を表示する必要はない。本例では、画像生成部17における伝達画像200dの生成とは施設画像201d及び期限情報画像231の生成をいう。
 これにより、本実施形態によるサービス状況管理システム2は、潜在来場者に対してサービスの有効期間が終了している状況を、あたかもサービスが行われていなかったがごとく、より明確に伝達することができ、予約サービスにおいては大変有効である。
(第4実施形態の変形例1)
 本実施形態によるサービス状況管理システム2において送信される伝達画像は伝達画像200dに限られない。ここで、図12を用いて第4実施形態の変形例1において生成される伝達画像200eについて説明する。
 図12は、本変形例における施設画像の生成方法の一例について説明する図である。図12(a)は、図11(a)で図示したのと同様の背景画像401を示す図である。図12(b)は、図11(b)に示すのと同様の構図で撮影された撮影画像402を示す図である。図12(b)では、背景画像401に含まれず撮影画像402に含まれる画像、すなわち撮影画像402と背景画像401との差分の画像を前景画像420(420a,420b,420c,420d)として図示している。ここで、前景画像420には、サービス物体の画像である前景画像420aと、サービス物体以外の移動体の画像である前景画像420b,420c,420dとが含まれる。前景画像420b,420c,420dは、例えばサービス提供施設に来場している来場者の所有物等であって、テーブルや座席に放置することによってそのテーブルや椅子が予約されていることをアピールすることに用いられる物体の画像である。また、図12(b)では図示しないが、前景画像420にはサービス提供施設にいる人物(来場者や従業員等)も含まれる。また、図12(c)は、本変形例におけるサービスの有効期限が経過していない場合の伝達画像200eの一例を示す図である。
 本変形例において、画像生成部17は、ステップS9(図4参照)において伝達画像を送信する直前に、撮影画像402と背景画像401との差分の画像である前景画像420のデータから輪郭線を表すデータを抽出する。例えば画像生成部17は、前景画像420における隣接する画素同士の明度や色相の差分を計算し、ある閾値を超えた画素の連なりを輪郭線として抽出する。本例では、撮影画像402に人物が含まれないが、撮影画像402に人物が含まれる場合、撮影画像402に含まれる物体、人物全てが輪郭線として抽出される。また、撮影画像402の輪郭線と背景画像401の輪郭線との差分をとっても同様に前景画像420の輪郭線が得られる。あるいは、撮影画像402と背景画像401との差分を予め決められた閾値を以て1か0に振り分けたマスク画像を生成し、撮影画像402の輪郭線をマスク処理することでも前景画像420の輪郭線が得られる。
 次に、画像生成部17は、撮影画像402と背景画像401との差分の画像である前景画像420の輪郭線を背景画像401に上書きした画像を、施設画像領域210に表示する施設画像201eとして生成する。図12(c)に示すように、伝達画像200eでは、サービスの有効期限が経過しているか否かに関わらず、施設画像領域210において、図12(b)に示す前景画像420(前景画像420a,420b,420c,420d)がそれぞれ輪郭線画像421(輪郭線画像421a,421b,421c,421d)として背景画像401に上書きされて施設画像201eを構成している。また、施設画像201eにおける輪郭線画像421のそれぞれは、撮影画像402において前景画像420それぞれが写っている領域と同位置に該当する背景画像401上の領域に上書きされている。また、サービスの有効期限が経過していない場合の伝達画像200eでは図3に示すのと同様に、期限情報(本変形例では残り時間)を表示した期限情報画像231が期限領域203に表示されている。本変形例では、画像生成部17における伝達画像200eの生成とは施設画像201e及び期限情報画像231の生成をいう。
 このようにして、本変形例によるサービス状況管理システム2では、前景画像420の輪郭線が背景画像401に上書きされた施設画像201eを表示する施設画像領域210と期限情報画像231が表示された期限領域203とを有する伝達画像200eが潜在来場者の端末装置100へ送信される。本変形例によるサービス状況管理システム2は、撮影画像402に含まれる物体や人物を線画で描いているので、所有物や顔等からサービス提供施設にいる人物を特定することができない。したがって、サービス提供施設にいる人物、特に来場者のプライバシーを保護することができる。また、上述したように、本発明においてサービス状況管理システム1はサービス状況伝達処理を例えば1秒間に4回、すなわち0.25秒間隔で実行する。したがって、伝達画像も0.25秒間隔で端末装置100へ送信される。これにより、端末装置100の表示部101にはサービス提供施設にいる人物の動作がコマ送り状態で表示されるので、動作(歩行の態様やしぐさ等)によって人物を特定することもできず、より確実に来場者のプライバシーを保護することができる。
 従来のシステム(例えば特許文献1に記載の発明)では、カメラで撮影した現在の所定施設(飲食店等)の画像と事前に撮影された該施設の画像(背景画像)とを用い、それらの差分である前景の輪郭線を該背景画像に上書きした画像を生成し、該画像によってプライバシーを侵害することなく、所定施設の混雑状況をネットワークで繋がる端末装置に表示していた。このようなシステムによれば、例えば飲食店のテーブルの上にカバンや帽子が放置された状況をカメラで撮影して端末装置に送信することで、該テーブルが予約済みであるという状況を端末装置のユーザ(画像の閲覧者)に伝達することができる。しかしながら、本実施形態によるサービス状況管理システム2によれば、プライバシーを保護しながら、さらにサービス提供施設において提供されるサービス内容やサービスの有効期間を伝達する伝達画像を端末装置100に送信することができる。これにより、サービス状況管理システム2によれば、従来のシステムよりも潜在来場者に対するサービス状況の伝達や施設側におけるサービス状況の管理の精度を向上させることができる。
 また、画像生成部17は、期限設定部16がサービスの有効期限が経過していると判定した場合に、ステップS8(図4参照)において、図12(c)に示す伝達画像200eの期限領域203に表示されている期限情報画像231から期限情報を消去したり、例えばサービスの有効期限が経過したことを明示する文字列画像「予約サービス終了」を表示したりして、サービスの有効期限の経過を示す伝達画像を生成してもよい。
(第4実施形態の変形例2)
 次に、図4及び図12を参照しつつ図13を用いて第4実施形態の変形例2において生成される施設画像201fについて説明する。図13は、本変形例における施設画像201fと期限情報画像231の一例を示す図である。本変形例の施設画像201fは、サービスの有効期限が経過している場合の施設画像である。
 本変形例において画像生成部17は、上記変形例1と同様に背景画像401と図12(b)に示す撮影画像402とを用いて前景画像420の輪郭線を抽出し、背景画像401に上書きして施設画像201fを生成する。しかしながら、本変形例において、物体検出部15がサービス物体を検出し(ステップS2のYes)且つサービスの有効期限が経過していると期限設定部16が判定した場合(ステップS5のYes)には、画像生成部17は、施設画像201fの生成時において前景画像420に含まれるサービス物体の輪郭線(輪郭線画像421a)を背景画像401に上書きしない。本変形例において施設画像201fは、例えばステップS9(図4参照)において伝達画像を送信する直前に生成される。こうして、本変形例では、図13に示すようにサービス物体の輪郭線である輪郭線画像421a(図12(c)参照)を除く輪郭線画像421b,421c,421dが上書きされた施設画像201fを表示する施設画像領域210と期限情報が消去された期限情報画像231を表示する期限領域203とを有する伝達画像200fが潜在来場者の端末装置100へ送信される。本変形例では、画像生成部17における伝達画像200fの生成とは施設画像201fと期限情報画像231の生成をいう。
 これにより、本変形例によるサービス状況管理システム2は、来場者のプライバシーを保護しつつ、潜在来場者に対してサービスの有効期間が終了している状況を、あたかもサービスが行われていなかったがごとく、より明確に伝達することができ、予約サービスにおいては大変有効である。
(第4実施形態の変形例3)
 次に、図4及び図12を参照しつつ図14を用いて第4実施形態の変形例3において生成される施設画像201gについて説明する。図14は、本変形例における施設画像201gの一例を示す図である。
 本変形例において画像生成部17は、上記変形例1と同様に背景画像401と図12(b)に示す撮影画像402とを用いて前景画像420の輪郭線を抽出し背景画像401に上書きして施設画像201gを生成する。しかしながら、本変形例において、物体検出部15がサービス物体を検出し(図4のステップS2のYes)且つサービスの有効期限が経過していないと期限設定部16が判定した場合(図4のステップS5のNo)には、画像生成部17は、施設画像201gの生成時においてサービス物体の前景画像(前景画像420a)を背景画像401に上書きし、サービス物体の輪郭線(輪郭線画像421a)を背景画像401に上書きしない。本変形例において施設画像201gは、例えばステップS9(図4参照)において伝達画像を送信する直前に生成される。こうして、本変形例では、図14に示すように前景画像420aと輪郭線画像421b,421c,421dが上書きされた施設画像201gを表示する施設画像領域210と期限情報画像231を表示する期限領域203とを有する伝達画像200gが潜在来場者の端末装置100へ送信される。本変形例では、画像生成部17における伝達画像200gの生成とは施設画像201gと期限情報画像231の生成をいう。
 本変形例によるサービス状況管理システム2では、サービス物体が輪郭線ではなく撮影画像402に写ったままの状態で表示される。これにより、サービス物体の色や形が潜在来場者の端末装置100へ送信される。このため、サービス物体が色や形でサービス内容を示すパネル(例えば標識状パネル)等である場合に、潜在来場者は直感的に、現在サービス提供施設で提供されているサービス内容を把握することができる。前景画像420aの代わりに予め登録された別の画像に置き換えることもシステム上は可能であるが、端末装置100を用いて閲覧したユーザが実際に施設を訪れるとそこにはサービス物体が設置されているのであるから、前景画像420aを用いた方が該ユーザにとって違和感がない。
 以上、伝達画像が有する施設画像領域210に表示される施設画像の変形例を説明したが、施設画像の変形例は、上記変形例1から変形例3に限られない。施設画像は、撮影部11によって予め撮影された1つ以上の撮影画像及びサービス物体が検出された撮影画像が撮影された時刻を含み過去に撮影された1つ以上の撮影画像の少なくとも何れか一方から生成されてもよい。さらに、施設画像は、撮影部11が撮影した撮影画像を含まなくてもよい。施設画像は、例えば撮影部11以外のカメラによって撮影されたサービス提供施設内の画像であって、撮影部11が撮影した撮影画像の構図と同様の構図の画像で生成されてもよい。また、撮影画像に限らず、撮影部11が撮影した撮影画像の構図と同様の構図のスケッチやイラスト、模式図を用いて生成されてもよい。
(第5実施形態)
 次に、本発明の第5実施形態によるサービス状況管理システムについて説明する。本実施形態によるサービス状況管理システムは、システムの構成要素として端末位置情報受信部51を有する点でサービス状況管理システム1と異なる。以下、本実施形態によるサービス状況管理システム及びサービス状況管理システムの構成要素について、図1に示すサービス状況管理システム1と同一の機能・作用を奏する構成要素には同一の符号を付してその説明は省略する。
 ここで、図15を用いて、本実施形態によるサービス状況管理システムについて説明する。図15は、本実施形態によるサービス状況管理システム3を説明するための構成図である。
 サービス状況管理システム3は、処理部10において端末装置100から送信された端末装置100の位置情報を受信する端末位置情報受信部51を備える。端末装置100は、例えば割引サービスの有効期間内に初めて伝達画像の送信を要求する場合や、予約サービスの利用要求を行う場合等に現在の位置情報も合わせてサービス状況管理システム3に送信する。端末位置情報受信部51は、端末装置100から位置情報を受信すると、処理用コンピュータ上の所定の記憶領域に記憶する。割引サービスにおいては、端末装置100は、位置情報の送信時において例えば端末装置100のIPアドレスをユーザ識別情報として送信し、位置情報と合せて処理用コンピュータ上の所定の記憶領域に記憶してもよい。また、端末位置情報受信部51は端末位置情報を受信すると、端末装置100からサービス提供施設までの距離を算出して端末装置距離情報として処理用コンピュータ上の所定の記憶領域に記憶する。
 本実施形態において期限設定部16は、例えばステップS4(図4参照)において予約サービスの有効期限を設定する場合に、端末位置情報受信部51が記憶した端末位置情報を取得する。これにより、期限設定部16は、サービス物体登録テーブル(図2参照)に登録されている有効期間の長さと端末位置情報に基づいて、予約サービスの有効期限を設定することができる。例えば、期限設定部16は、サービス物体登録テーブルに登録された有効期間の長さと予め定められた端末位置調整時間とを合算した時間を検出時刻に加算して有効期限時刻を設定する。端末位置調整時間は、端末位置情報受信部51が算出した端末装置距離情報の値に応じて加算されるよう定められており、処理用コンピュータ上の所定の記憶領域に記憶されている。例えば、端末装置距離情報が100m増えるごとに端末位置調整時間に1分ずつ加算されるように設定されている。
 例えば、サービス物体登録テーブルに登録されている有効期間の長さが「5分」であるサービス物体131が物体検出部15により検出されており、端末位置情報受信部51が算出した端末装置距離情報の値が「300m」だとする。本例では、端末装置距離情報の値が「300m」の場合、対応する端末位置調整時間は1分×3=3分であるので、期限設定部16は、8分(=5分+3分)を検出時刻に加算してサービスの有効期限時刻を設定する。
 このように、本実施形態によるサービス状況管理システム3は、端末装置100の位置に応じて、端末装置100のユーザ(来場予定者)ごとに予約サービスの有効期間の長さを変更することができる。これにより、サービス状況管理システム3はサービス提供施設から離れた位置にいる潜在来場者を獲得する可能性を向上させることができる。
 また、本実施形態によるサービス状況管理システム3は、処理部10において端末装置100の位置に応じて割引サービスにおける割引率を設定する割引率設定部を備えていてもよい。本実施形態によるサービス状況管理システム3は、例えば割引サービスの有効期間内に端末装置100から伝達画像の送信要求があった場合に、割引率設定部において端末装置距離情報に基づいて端末位置調整割引率を設定する。端末位置調整割引率は、例えば端末位置情報受信部51が算出した端末装置距離情報の値の範囲に応じて定められており、処理用コンピュータ上の所定の記憶領域に記憶されている。例えば、端末装置距離情報が「300m」から「500m」未満の範囲に対応する端末位置調整割引率は「3%上乗せ」、端末装置距離情報が「500m」から「1000m」未満の範囲に対応する端末位置調整割引率は「5%上乗せ」、「1000m以上」の範囲に対応する端末位置調整時間は「10%上乗せ」のように設定されている。
 例えば、予め定められた割引率が「10%」であり、端末位置情報受信部51が算出した端末装置距離情報の値が「500m」だとする。本例では、端末装置距離情報の値が「500m」の場合、対応する端末位置調整割引率は「5%上乗せ」であるので、割引率設定部は、15%(=10%+5%)を端末装置100のユーザ(潜在来場者)が利用可能な割引率として設定する。ここで設定された割引率は、端末位置調整割引率の算出に用いられた端末位置情報の送信元の端末装置100にのみ適用される。このため、本例では端末装置100それぞれに対して、端末位置情報に応じた割引率が期限情報画像231(図3参照)内に表示された伝達画像が送信される。すなわち、潜在来場者ごとに異なる割引率が設定される。端末装置100のユーザは、例えばスマートフォンのスクリーンショット機能を用いて、該伝達画像のコピーを端末装置100に保存して割引サービスを受けた証とすることができる。端末装置100のユーザがサービス提供施設に近づくと表示される割引率は10%に減ってしまうが、該伝達画像のコピー(例えば、割引率として15%が表示された伝達画像のスクリーンショット)をサービス提供施設のサービス提供者(従業員や店主)に提示すれば、該伝達画像のコピーに表示された割引率が適用される。
 このように、本実施形態によるサービス状況管理システム3は、端末装置100の位置に応じて、端末装置100のユーザ(潜在来場者)ごとに割引サービスにおける割引率を変更することができる。これにより、サービス状況管理システム3は、潜在来場者の来場意欲を向上させて、サービス提供施設から離れた位置にいる潜在来場者を獲得する可能性を向上させることができる。
 また、本実施形態によるサービス状況管理システム3には、所定の記憶領域において予め地図情報が登録されており、該地図情報と端末位置情報とに基づいて割引率が設定されるように構成されていてもよい。例えば、サービス状況管理システム3には、競合店舗が多く存在する地域の情報(特定エリア情報)が設定されており、割引率設定部は端末装置距離情報と地図情報とを連動させて、端末装置100の位置と特定エリア情報との位置関係に基づいて端末位置調整割引率を設定するように構成されていてもよい。例えば、上述の例では端末装置距離情報の値が「500m」の場合、対応する端末位置調整割引率は「5%上乗せ」である。ここでさらに、端末位置情報から割り出された端末装置100の位置が、特定エリア内の場合や、サービス提供施設への来場にあたって特定エリアを通過する地域である場合には、割引率設定部は端末位置調整割引率を例えば「10%」上乗せする。これにより、割引率設定部は、予め定められた割引率(10%)に端末位置調整割引率「15%」(=5%+10%)を加えた「25%」を端末装置100のユーザ(潜在来場者)が利用可能な割引率として設定する。なお、特定エリア情報に基づいて上乗せされる端末位置調整割引率は、10%に限られない。また、上乗せされる端末位置調整割引率は端末装置100の特定エリアからの距離等に対応付けて複数設定されてもよい。
 これにより、本実施形態によるサービス状況管理システム3は、特定エリア内またはサービス提供施設との間に特定エリアを挟む地域からの潜在来場者のサービス提供施設への来場意欲を向上させて、サービス提供施設が潜在来場者を獲得する可能性を向上させることができる。
 また、本実施形態によるサービス状況管理システム3において端末位置情報受信部51は、端末装置100が伝達画像の送信や予約サービスの利用の要求を行った時刻(アクセス時刻)を所定の記憶領域において記憶するように構成されていてもよい。期限設定部16は、アクセス時刻と端末位置情報とに基づいて予約サービスの有効期限時刻を設定してもよい。また、サービス状況管理システム3は、端末位置情報、アクセス時刻及びユーザ識別情報を処理用コンピュータや処理用コンピュータと接続されたサービス提供施設内の端末装置において閲覧可能に構成されていてもよい。この場合、割引サービスの有効期間内に端末装置100で伝達画像等を閲覧した来場者が割引サービスの有効期間後に来場したとしても、伝達画像のコピー(スクリーンショット)をユーザが提示することを要さず、アクセス時刻が割引サービスの有効期間内であることを確認して割引サービスを提供することができる。
 また、本実施形態によるサービス状況管理システム3において、割引率設定部は、処理部10でなく、処理用コンピュータと接続されたサービス提供施設内の端末装置(施設側端末装置)に設けられていてもよい。施設側端末装置には例えば非接触型ICカードの読み取り機能が設けられており、端末装置100のユーザが来場した際に端末装置100に内蔵された非接触型ICカードを施設側端末装置で読み取るとともに、処理用コンピュータの所定の記憶領域に記憶されている端末装置100の端末装置距離情報を取得して端末装置100の端末装置距離情報に応じた端末位置調整割引率を設定してもよい。
 また、本実施形態によるサービス状況管理システム3は、端末位置情報やアクセス時刻を端末装置100に保存するプログラムを端末装置100に配信する配信部を備えていてもよい。潜在来場者は事前に端末装置100でサービス状況管理システム3へアクセスし、配信部から該プログラムの配信を受ける。サービス状況管理システム3へのアクセス時の端末位置情報やアクセス時刻を端末装置100に保存しておくことにより、来場者は来場時において、例えば端末位置情報やアクセス時刻をサービス提供施設の従業員に提示してサービス(割引サービス等)を利用することができる。
 また、本実施形態によるサービス状況管理システム3は、時間帯別の来客履歴を記憶する来客履歴記憶部を備えていてもよい。来客履歴記憶部は、例えば物体登録部13と同様に処理用コンピュータにおけるメモリ等の所定の記憶領域である。割引率設定部は、来客履歴記憶部を参照して、来客が多い時間帯には予め定められた割引率の値から所定の値を減算して割引率を小さくし、来客が少ない時間帯には割引率の値に所定の値を加算して割引率を大きくしてもよい。
(変形例)
 本発明におけるサービス物体は、図2に示したものに限られない。また、サービス物体登録テーブルは、サービス提供施設のサービス提供者(従業員や店主)が適宜サービス物体を追加登録可能に構成されていてもよい。例えば、サービス物体の追加登録の際には、追加対象のサービス物体を写真撮影し、撮影した物体の画像をサービス内容及び有効期間の長さとともにサービス物体登録テーブルに追加する。
 本発明におけるサービス物体に紐づけられるサービスは、予約サービスや割引サービスに限られない。サービス物体には、サービス提供施設が発案した独自のサービスが紐づけられてもよい。
 本発明において、例えば予約サービスに紐づけられたサービス物体は、サービス提供施設内に複数配置されてもよい。この場合、伝達画像には各サービス物体の近傍にそれぞれ期限領域が設けられ、各サービス物体に応じた期限情報を表す期限情報画像が表示される。これにより、本発明によるサービス状況管理システムは、伝達画像を通して複数のテーブルの予約サービスの状況を潜在来場者や来場予定者に伝達することができる。
 また、本発明において、サービス物体がサービス提供施設内に配置されていない期間もサービス提供施設内の状況を伝達する伝達画像が潜在来場者の所有する端末装置へ送信されてもよい。これにより、潜在来場者は、サービス提供施設内の混雑状況等(例えば、人がいないテーブルに座席確保のための所定物が放置されていないこと)を確認してからサービス提供施設へ来場することができる。
 以上、添付図面を参照しながら本発明の好適な実施形態とその変形例について説明したが、本発明はかかる実施形態等に限定されない。当業者であれば、特許請求の範囲に記載された範疇において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。また、上記の各実施形態及び変形例は、矛盾しない範囲で適宜組合せることができる。
1、2、3 サービス状況管理システム
10 処理部
11 撮影部
13 物体登録部
15 物体検出部
16 期限設定部
17 画像生成部
19 伝達画像送信部
41 背景画像登録部
51 端末位置情報受信部
100 端末装置
101 表示部
131、133、135 サービス物体
200 伝達画像
201 施設画像
203 期限領域
203c 期限領域
210 施設画像領域
231 期限情報画像
401 背景画像
402 撮影画像
420 前景画像
421 輪郭線画像

Claims (6)

  1.  施設内を撮影する撮影部と、
     前記施設において提供されるサービス及び該サービスの有効期間を含むサービス情報が対応付けられたサービス物体を予め登録する物体登録部と、
     前記撮影部によって撮影された撮影画像において前記物体登録部に登録された前記サービス物体を検出する物体検出部と、
     前記物体検出部が前記サービス物体を初めて検出した時刻を起点とする前記有効期間の期限を設定する期限設定部と、
     前記期限に関する情報を表す期限情報画像を表示可能な期限領域と、前記施設の状況を表す施設画像を表示する施設画像領域とを有する画像であって、外部の端末装置へ前記サービスの状況を伝達する伝達画像を生成する画像生成部と、
     前記画像生成部が生成した前記伝達画像を前記端末装置に送信する伝達画像送信部と
     を備えるサービス状況管理システム。
  2.  前記画像生成部は、前記物体検出部が前記サービス物体を検出し且つ前記期限が経過していないと前記期限設定部が判定した場合に、前記期限情報画像を前記期限領域に表示させる
     請求項1に記載のサービス状況管理システム。
  3.  前記サービス物体が含まれない前記施設内の画像を背景画像として予め保存する背景画像登録部を備え、
     前記画像生成部は、前記物体検出部が前記サービス物体を検出し且つ前記期限が経過していると前記期限設定部が判定した場合に、前記撮影画像において前記サービス物体が位置する領域を前記背景画像における同位置の領域の画像で置き換えた画像を前記施設画像領域に表示する
     請求項1または2に記載のサービス状況管理システム。
  4.  前記サービス物体が含まれない前記施設内の画像を背景画像として予め保存する背景画像登録部を備え、
     前記画像生成部は、前記撮影画像と前記背景画像との差分の画像である前景画像の輪郭線を該背景画像に上書きした画像を前記施設画像領域に表示する
     請求項1または2に記載のサービス状況管理システム。
  5.  前記画像生成部は、前記物体検出部が前記サービス物体を検出し且つ前記期限が経過していると前記期限設定部が判定した場合に、前記前景画像に含まれる前記サービス物体の輪郭線を前記背景画像に上書きしない
     請求項4に記載のサービス状況管理システム。
  6.  前記画像生成部は、前記物体検出部が前記サービス物体を検出し且つ前記期限が経過していないと前記期限設定部が判定した場合に、前記サービス物体の前記前景画像を前記背景画像に上書きし、前記サービス物体の前記輪郭線を前記背景画像に上書きしない
     請求項4に記載のサービス状況管理システム。
PCT/JP2017/044962 2016-12-15 2017-12-14 サービス状況管理システム WO2018110663A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US16/469,871 US10878347B2 (en) 2016-12-15 2017-12-14 Service status management system
JP2018556747A JP6730455B2 (ja) 2016-12-15 2017-12-14 サービス状況管理システム
CN201780077833.XA CN110073397A (zh) 2016-12-15 2017-12-14 服务状况管理系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016-243266 2016-12-15
JP2016243266 2016-12-15

Publications (1)

Publication Number Publication Date
WO2018110663A1 true WO2018110663A1 (ja) 2018-06-21

Family

ID=62558852

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/044962 WO2018110663A1 (ja) 2016-12-15 2017-12-14 サービス状況管理システム

Country Status (4)

Country Link
US (1) US10878347B2 (ja)
JP (1) JP6730455B2 (ja)
CN (1) CN110073397A (ja)
WO (1) WO2018110663A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021117532A (ja) * 2020-01-22 2021-08-10 Necプラットフォームズ株式会社 座席利用適正化システム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011248813A (ja) * 2010-05-31 2011-12-08 Technocraft Co Ltd レンタサイクルシステム
JP2011253424A (ja) * 2010-06-03 2011-12-15 Bill Haraguchi 画像認識装置及び画像認識方法並びに情報提供システム
JP2014160963A (ja) * 2013-02-20 2014-09-04 Ntt Docomo Inc 画像処理装置及びプログラム
JP2016186732A (ja) * 2015-03-27 2016-10-27 東芝テック株式会社 情報処理装置及びプログラム
JP2017130029A (ja) * 2016-01-20 2017-07-27 日本システムバンク株式会社 空き駐車スペースの時間貸しシステム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003099514A (ja) 2001-09-20 2003-04-04 Fujitsu General Ltd 携帯電話利用の顧客管理方法と顧客管理システム
JP2005149053A (ja) * 2003-11-14 2005-06-09 Oki Electric Ind Co Ltd 顧客誘導システム、管理サーバ、およびプログラム
JP2006053806A (ja) * 2004-08-13 2006-02-23 Kenko Kankyo Toshi Kaihatsu Center サービスエリアやショピングモールにおける情報の提供システム
JP4288608B2 (ja) 2005-02-08 2009-07-01 コニカミノルタビジネステクノロジーズ株式会社 画像処理装置
JP5060047B2 (ja) 2005-10-14 2012-10-31 旭化成株式会社 混雑状況提示装置、及び、混雑状況情報閲覧システム
JP2011210125A (ja) 2010-03-30 2011-10-20 Ns Solutions Corp 情報処理装置、表示制御システム、表示制御方法及びプログラム
JP5314200B1 (ja) * 2013-02-01 2013-10-16 パナソニック株式会社 接客状況分析装置、接客状況分析システムおよび接客状況分析方法
JP2015036904A (ja) 2013-08-13 2015-02-23 シャープ株式会社 席案内システム、席案内方法及び席案内プログラム
JP5866564B1 (ja) * 2014-08-27 2016-02-17 パナソニックIpマネジメント株式会社 モニタリング装置、モニタリングシステムおよびモニタリング方法
US20160275419A1 (en) * 2015-03-20 2016-09-22 Nobuhiro Morita Information processing apparatus, vacancy information providing program, and method of providing vacancy information
JP2016177775A (ja) 2015-03-20 2016-10-06 株式会社リコー 情報処理装置、空き情報提供プログラム及び空き情報提供方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011248813A (ja) * 2010-05-31 2011-12-08 Technocraft Co Ltd レンタサイクルシステム
JP2011253424A (ja) * 2010-06-03 2011-12-15 Bill Haraguchi 画像認識装置及び画像認識方法並びに情報提供システム
JP2014160963A (ja) * 2013-02-20 2014-09-04 Ntt Docomo Inc 画像処理装置及びプログラム
JP2016186732A (ja) * 2015-03-27 2016-10-27 東芝テック株式会社 情報処理装置及びプログラム
JP2017130029A (ja) * 2016-01-20 2017-07-27 日本システムバンク株式会社 空き駐車スペースの時間貸しシステム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021117532A (ja) * 2020-01-22 2021-08-10 Necプラットフォームズ株式会社 座席利用適正化システム

Also Published As

Publication number Publication date
US20190318279A1 (en) 2019-10-17
JPWO2018110663A1 (ja) 2019-10-24
US10878347B2 (en) 2020-12-29
CN110073397A (zh) 2019-07-30
JP6730455B2 (ja) 2020-07-29

Similar Documents

Publication Publication Date Title
US20180341985A1 (en) Provision and management of advertising via mobile entity
US20080247612A1 (en) Method and System for Facilitating Tasks Using Images and Selections from Object Class and Task Menus
US20100265311A1 (en) Apparatus, systems, and methods for a smart fixture
US8078988B2 (en) Information display system, apparatus and method of displaying electronic information according to schedule information
WO2014017392A1 (ja) 情報処理装置、そのデータ処理方法、およびプログラム
US20150088637A1 (en) Information processing system, information processing method, and non-transitory computer readable storage medium
US20090289775A1 (en) Fitting room terminal, job supporting system, and notifying method
US10872324B2 (en) Shopping support computing device
US20170293965A1 (en) Shopping support device and shopping support method
US20180068369A1 (en) Shopping support device and shopping support method
JP6455040B2 (ja) 店舗集客支援システム、サーバ装置、プログラムおよび方法
US20150108213A1 (en) Shopping support device and shopping support method
JP6867469B2 (ja) 電子装置、対話型情報表示方法およびコンピュータ可読記録媒体
JP6940127B1 (ja) 管理システム、サーバ装置、プログラム及び方法
WO2018110663A1 (ja) サービス状況管理システム
KR20110125866A (ko) 증강현실을 통한 정보제공 방법 및 장치
JP2019164635A (ja) 情報処理装置、情報処理方法及びプログラム
JP6293341B1 (ja) 商品購入支援システムおよび商品購入支援方法
JP7529156B2 (ja) 情報処理装置、情報処理システム、及び情報処理方法
JP7224510B1 (ja) 情報処理方法、情報処理装置及び情報処理プログラム
JP2023044753A (ja) 情報処理システム、情報処理方法、およびプログラム
KR20230107989A (ko) 오프라인 매장 예약 방법
TWM596916U (zh) 基於發票回饋優惠訊息的系統
JP2024047241A (ja) 情報処理プログラム、情報通信装置及び情報処理装置
JP6140211B2 (ja) 飲食店利用促進システム、飲食店利用促進プログラムおよび、飲食店利用促進方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17879883

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018556747

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17879883

Country of ref document: EP

Kind code of ref document: A1