WO2022064990A1 - 管理システム、管理装置およびプログラム - Google Patents

管理システム、管理装置およびプログラム Download PDF

Info

Publication number
WO2022064990A1
WO2022064990A1 PCT/JP2021/032293 JP2021032293W WO2022064990A1 WO 2022064990 A1 WO2022064990 A1 WO 2022064990A1 JP 2021032293 W JP2021032293 W JP 2021032293W WO 2022064990 A1 WO2022064990 A1 WO 2022064990A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
call
person
customer
camera
Prior art date
Application number
PCT/JP2021/032293
Other languages
English (en)
French (fr)
Inventor
康典 谷村
Original Assignee
グローリー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by グローリー株式会社 filed Critical グローリー株式会社
Publication of WO2022064990A1 publication Critical patent/WO2022064990A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services

Definitions

  • the present invention relates to a management system, a management device and a program.
  • the service robot can communicate with at least a reception machine to which a reception number is assigned, and receives an image information acquisition unit that acquires image information including an image of a customer, and a reception operation according to a reception operation by the customer. It is disclosed that a reception number acquisition unit for acquiring a reception number from a machine and a storage unit for storing the acquired reception number and the acquired image information in a state of being associated with each other are provided.
  • a person who is in a predetermined place is called.
  • the person may leave the predetermined place due to a toilet or a temporary outing.
  • it may be troublesome to call an absentee who is not in a predetermined place or to confirm whether or not the person to be called is an absentee.
  • An object of the present invention is to reduce the time and effort required for calling even when there is an absentee.
  • One aspect of the present disclosure is a specific means for specifying a visitor entering a predetermined place and a exiting person leaving the predetermined place by using a photographed image, and the visitor specified by the specific means.
  • It is a management system characterized by comprising a creation means for creating call information for calling a person at a predetermined place based on the information of the above and the information of the exit person.
  • the creating means is characterized in that the calling information is created so as not to make a call to the exiting person.
  • the creating means is characterized in that when the exiting person re-enters the predetermined place, the calling information is created with the content that the exiting person is a person at the predetermined place.
  • the display means for displaying the operation screen operated by the operator who makes the call is provided, and the display means obtains the information about the absentee who is not in the predetermined place, which is specified by using the information of the exit person. It is characterized by displaying it on the operation screen. Further, the display means for displaying the operation screen operated by the operator who makes the call is provided, and the display means is a person who has left the exit when there is the exit person who has skipped the predetermined call order. It is characterized in that the display relating to the above and the display relating to the exiting person who has re-entered the predetermined place are displayed in different display modes.
  • the means for delivering the identification information to the visitors is provided, and the creating means is characterized in that the identification information is associated with the information of the visitors and the information of the exiters to create the calling information.
  • the delivery means includes a photographing means for photographing the visitors, and the creating means associates the photographed image of the visitors photographed by the photographing means with the identification information. ..
  • the delivery means is an information terminal device owned by the visitor. Then, another aspect of the present disclosure is an acquisition means for acquiring information of a visitor who enters a predetermined place and a person who leaves the predetermined place, which is specified by using a photographed image, and the above-mentioned.
  • a management characterized by comprising: a creation means for creating call information for calling a person at a predetermined place based on the information of the visitor and the information of the exiter acquired by the acquisition means. It is a device. Further, another aspect of the present disclosure is a function of acquiring information on a computer between a visitor who enters a predetermined place and a person who leaves the predetermined place, which is specified by using a photographed image. It is a program characterized by realizing a function of creating call information for calling a person in a predetermined place based on the acquired information of the visitor and the information of the exiter. ..
  • FIG. 1 is a diagram illustrating an outline of the management system 1 of the first embodiment.
  • FIG. 2 is an example of a floor diagram of a store to which the management system 1 of the first embodiment is applied.
  • the management system 1 of the first embodiment will be described with reference to an example applied when a bank employee calls a customer to a counter and handles procedures and the like at a bank store as an example of a predetermined place. ..
  • a bank employee calls a customer to a counter and handles procedures and the like at a bank store as an example of a predetermined place. ..
  • stores such as post offices and mobile phone shops, public facilities such as city halls, and medical facilities such as hospitals can be exemplified in predetermined places.
  • the management system 1 of the first embodiment includes a camera 10 for photographing an object and a ticket issuing machine 20 for issuing a number slip 200. Further, the management system 1 has a calling terminal 30 used by the person making the call, and a number display 40 for displaying the number to be called. Further, the management system 1 has a management server 50 that manages various information for making a call.
  • the ticket issuing machine 20 is an example of the issuing means
  • the calling terminal 30 is an example of the display means.
  • the camera 10, the ticket issuing machine 20, the calling terminal 30, the number display 40, and the management server 50 are all connected to the network.
  • the network of the first embodiment is a communication network used for data communication between the devices constituting the management system 1.
  • the type of network is not particularly limited as long as it can transmit and receive data, and may be, for example, the Internet, LAN (Local Area Network), WAN (Wide Area Network), or the like.
  • the communication line used for data communication may be wired or wireless.
  • the bank store 100 is provided with a lobby area 101 in which a waiting seat or the like is installed and a customer waits, and a plurality of counters 102 in which a bank employee responds to the customer.
  • the lobby area 101 is provided with a main entrance / exit 103 for customers and the like to enter and exit the lobby area 101, and a toilet entrance / exit 104 connected to the toilet.
  • the management system 1 of the first embodiment identifies the visitors who enter the lobby area 101 of the bank (for example, an example of a predetermined place) and the exiters who leave the lobby area 101 by using a photographed image. Then, based on the identified visitor information and exit information, a call management table 500 (see FIG. 4 described later), which is an example of call information for calling a person in the lobby area 101, is created. As a result, the management system 1 of the first embodiment reduces the time and effort required for calling even when there is an absentee, for example, it is not necessary to call the absentee. Hereinafter, the management system 1 will be described in detail.
  • the plurality of cameras 10 are configured to include a first camera 11 set in the main doorway 103 and a second camera 12 installed in the toilet doorway 104. To the toilet. The first camera 11 and the second camera 12 are constantly taking pictures. Then, the first camera 11 and the second camera 12 transmit the captured image information to the management server 50 almost at the same time as the capture.
  • the first camera 11 is installed at the main entrance / exit 103. Then, the first camera 11 photographs a person passing through the main entrance / exit 103.
  • the main entrance / exit 103 an entrance person who enters the lobby area 101 from outside the lobby area 101 and an exit person who exits from the inside of the lobby area 101 to the outside of the lobby area 101 pass through. Therefore, the first camera 11 photographs the visitors and the exiters passing through the main entrance / exit 103.
  • the second camera 12 is installed at the toilet entrance / exit 104. Then, the second camera 12 photographs a person passing through the toilet entrance / exit 104.
  • the second camera 12 photographs the visitors and the exiters passing through the toilet entrance / exit 104.
  • the first camera 11 and the second camera 12 each associate the captured image information, the shooting time information which is the shooting time, and the camera identification information that can uniquely identify the camera 10 with the management server. Send to 50.
  • the first camera 11 and the second camera 12 are not particularly distinguished, they are collectively referred to as a camera 10.
  • the ticket issuing machine 20 of the first embodiment is installed in the lobby area 101 in the vicinity of the main entrance / exit 103.
  • the ticket issuing machine 20 is used by a customer who visits the store to make a reception. Therefore, the ticket issuing machine 20 is placed in a place where a visitor who has entered the lobby area 101 from the main entrance / exit 103 can immediately operate the ticketing machine 20.
  • the ticket issuing machine 20 is a communication unit that realizes communication via a control unit 21 that controls this machine, a storage unit 22 that stores information, and a LAN (Local Area Network) cable or the like. 23 and.
  • the ticket issuing machine 20 includes a touch panel 24 for accepting input operations from customers and displaying information, a ticketing unit 25 for issuing number slips 200, and a camera unit 26 for photographing customers.
  • the control unit 21 includes a CPU (Central Processing Unit), which is an example of a processor, a ROM (Read Only Memory) in which firmware, a BIOS (Basic Input Output System), and the like are stored, and a RAM (Random Access Memory) used as a work area. ) And.
  • the control unit 21 functions as a so-called computer.
  • the storage unit 22 is composed of, for example, a hard disk device (HDD (Hard Disk Drive)) or a semiconductor memory. Then, various information such as image information is stored in the storage unit 22.
  • the communication unit 23 is composed of a communication interface conforming to various standards.
  • the touch panel 24 includes a display such as a liquid crystal display or an organic EL (Electro Luminescence), and a capacitance type film sensor.
  • a device other than the touch panel 24 may be used for inputting the operation.
  • a device that can be operated by a visiting customer such as a push button or a non-contact operation panel, may be used for inputting the operation.
  • the touch panel 24 displays, for example, a screen for accepting input of a purpose of visiting a store or a desired transaction. Further, the touch panel 24 displays the destination of the customer according to the received purpose and the like.
  • the ticketing unit 25 outputs a number slip 200 on which information indicating a number (for example, an example of identification information) is printed.
  • the ticketing unit 25 can exemplify, for example, a thermal printer that prints information on roll paper and outputs it as a number slip 200.
  • the numbers are sequentially created in the order of reception, and the later the order of reception, the larger the number.
  • the ticketing unit 25 associates the ticketing time information at the time of ticketing with the number.
  • the number slip 200 of this embodiment the issued number, the issue date of the number slip 200, the issue time of the number slip 200, the explanation about the call, the store name and the like are described.
  • the camera unit 26 is provided, for example, on the upper side of the touch panel 24.
  • the camera unit 26 captures at least the face of the customer who operates the touch panel 24.
  • the ticket issuing machine 20 of the present embodiment is provided in the vicinity of the main entrance / exit 103, and is operated first by a visitor entering from the main entrance / exit 103. Therefore, the camera unit 26 can be regarded as taking a picture of the visitors. Then, the camera unit 26 associates the number information issued by the ticket issuing unit 25 with the image information of the customer's face taken when the number is issued. Further, the camera unit 26 associates the image information with the camera identification information that can identify the camera unit 26.
  • the ticket issuing machine 20 uses the communication unit 23 controlled by the control unit 21 to provide the number information of the issued number, the ticketing time information when the number is issued, the image information of the customer, and the camera.
  • the camera identification information that identifies the unit 26 is associated with each other and transmitted to the management server 50.
  • the calling terminal 30 is provided at the window 102 and receives an operation from an operator such as a bank employee.
  • the hardware configuration of the calling terminal 30 is the same as that of the ticket issuing machine 20 described above.
  • the calling terminal 30 of the first embodiment has a liquid crystal display or an organic EL display 31 for displaying information, and an operation unit 32 for receiving an input operation.
  • the display 31 displays a call screen 300 (described later) in which the number corresponding to the number slip 200 issued by the ticket issuing machine 20 is displayed.
  • the call screen 300 is displayed based on the call management table 500 (see FIG. 4 described later), which is an example of the call information acquired from the management server 50.
  • the call management table 500 and the call screen 300 created by the management server 50 will be described in detail later.
  • the display 31 of the present embodiment is a touch panel, and can accept operations by touching the display screen with an operator's finger or the like.
  • the operation unit 32 accepts an operation of designating a number to be called from among a plurality of numbers displayed on the display 31. In addition, the operation unit 32 accepts an operation of notifying that the customer has been dealt with at the counter. Then, the calling terminal 30 transmits the number information to be called to the number display 40. Further, the calling terminal 30 transmits the number information to be called, the number information of the customer whose response has been completed, and the time information of the end of the call and the response to the management server 50.
  • the number display 40 is provided at the window 102.
  • One number display 40 is connected to one calling terminal 30 or two different calling terminals 30.
  • the number display 40 of the first embodiment has a display 41 for displaying an image and a speaker 42 for outputting sound.
  • a liquid crystal display or a 7-segment display can be used as the display 41.
  • the display 41 displays the number designated as the target of the call on the calling terminal 30.
  • the speaker 42 outputs a sound effect at the time of calling and a voiced number at the timing when the number is displayed on the display 41.
  • FIG. 3 is a functional block diagram of the management server 50 of the first embodiment.
  • the hardware configuration of the management server 50 is the same as that of the ticket issuing machine 20 described above. Then, the management server 50 of the first embodiment is called to call a person who is in a predetermined place (for example, lobby area 101) based on the information of the visitors and the information of the exiters specified by the camera 10.
  • the call management table 500 and the call screen 300, which are information, are created.
  • the management server 50 transmits information about the created call screen 300 to the call terminal 30.
  • the management server 50 will be described in detail.
  • the management server 50 includes a ticketing machine information acquisition unit 51 for acquiring ticketing machine information, a camera information acquisition unit 52 for acquiring camera information, and an image analysis unit 53 for analyzing an image. .. Further, the management server 50 has a processing information acquisition unit 54 for acquiring processing information and a call information management unit 55 for creating call information.
  • the above functions in the management server 50 are realized by a CPU, ROM, RAM, and HDD, which are examples of processors.
  • the image analysis unit 53 is an example of the specific means
  • the call information management unit 55 is an example of the creation means.
  • the ticketing machine information acquisition unit 51 acquires ticketing machine information from the ticketing machine 20.
  • the ticket issuing machine information includes image information of the camera unit 26, number information of the number slip 200, ticketing time information of the number slip 200, and camera identification information for identifying the camera unit 26. Then, the ticketing machine information acquisition unit 51 sends the ticketing machine information to the image analysis unit 53.
  • the camera information acquisition unit 52 acquires camera information from the camera 10 (in this embodiment, the first camera 11 and the second camera 12).
  • the camera information includes image information of the camera 10, camera identification information for identifying the camera 10, and shooting time information which is the shooting date and time of the camera 10. Then, the camera information acquisition unit 52 sends the camera information to the image analysis unit 53.
  • the image analysis unit 53 extracts facial features from the image information from the ticketing machine information acquired from the ticketing machine information acquisition unit 51. That is, the image analysis unit 53 extracts the feature amount of the face of the customer who operates the ticket issuing machine 20.
  • the facial features can be exemplified by quantifying the positional relationship of eyes, nose, mouth and the like.
  • the image analysis unit 53 associates the number information, the ticketing time information, and the camera identification information with the facial feature amount information extracted from the image information in the ticket issuing machine information, and sends it to the call information management unit 55.
  • the image analysis unit 53 extracts the facial feature amount from the image information among the camera information acquired from the camera information acquisition unit 52. That is, the image analysis unit 53 extracts the feature amount of the face of the person passing through the main entrance / exit 103 and the toilet entrance / exit 104.
  • the image analysis unit 53 of the first embodiment has the camera information in order to obtain the entrance / exit information which is the information on whether the person whose facial feature amount is to be extracted is an entrance / exit person. Analyze the image information. Specifically, the image analysis unit 53 determines the entry / exit person based on the direction of the face or body with respect to the main entrance / exit 103 and the direction in which the face or body moves. For example, when the image analysis unit 53 passes through the main entrance / exit 103 from the outside toward the lobby area 101, the image analysis unit 53 determines that the person is a visitor. Further, for example, when the image analysis unit 53 passes through the main entrance / exit 103 with the lobby area 101 as the back, the image analysis unit 53 determines that the person is an exit person.
  • the image analysis unit 53 associates the shooting time information with the camera identification information with the information on the feature amount of the face extracted from the image information and the determined entry / exit information among the camera information, and sends the information to the call information management unit 55. ..
  • the processing information acquisition unit 54 acquires processing information from the calling terminal 30.
  • the processing information includes the number information at which the call was made, the time information at which the call was made, the number information at which the response was completed, and the time information at the end of the response. Then, the processing information acquisition unit 54 sends the processing information to the call information management unit 55.
  • the call information management unit 55 manages various information acquired from the image analysis unit 53 and the processing information acquisition unit 54 by using the call management table 500. Further, the call information management unit 55 creates a call screen 300 used in the call terminal 30 based on the call management table 500. Further, the call information management unit 55 creates a call screen 300 to be displayed on the display 31 of the call terminal 30 based on the call management table 500.
  • FIG. 4 is an example of the call management table 500 managed by the call information management unit 55.
  • the call management table 500 has information on "ticketing time”, information on “feature amount”, information on “status”, and “callability” associated with the information on “number”. It includes information, “waiting time” information, “exit time” information, "re-entry time” information, and "exit time” information. Then, each time the call information management unit 55 acquires various information based on the ticket issuing machine information, the camera information, and the processing information, the call information management unit 55 updates the information of each item associated with each number.
  • the number item is created according to the acquired number information.
  • the number issued by the ticket issuing machine 20 is used for the item of the number.
  • the ticketing time is created according to the acquired ticketing time information.
  • the feature amount item is created based on the information of the feature amount of the customer's face taken by the camera unit 26 acquired from the image analysis unit 53.
  • the status item indicates the customer's status and is set based on various acquired information.
  • the status includes six states of "unprocessed”, “processing”, “finished”, “going out”, “toilet”, and “skip”. Then, one of the states is set in the status item.
  • the number ticket 200 is issued by the ticket issuing machine 20, and the call has not been made yet.
  • the call information management unit 55 refers to the acquired processing information, and among the issued numbers, the number that has not been called is set as the unprocessed target.
  • the call information management unit 55 sets unprocessed numbers for numbers that can be called. Therefore, the call information management unit 55 sets another state for the number of the exiting person who cannot make a call, as will be described later. Further, when the exiting person returns to the lobby area 101, the call information management unit 55 sets unprocessed for the number.
  • the call information management unit 55 refers to the acquired processing information, and sets a number that is being called but has not been answered during processing.
  • the end is the state in which the response is completed.
  • the call information management unit 55 refers to the acquired processing information and sets the number at which the response has been completed to the end.
  • the call information management unit 55 analyzes the image information taken by the first camera 11 (see FIG. 2) by the image analysis unit 53, and the feature amount of the face of the customer determined to be an exiter of the main entrance / exit 103. Get information about. Then, the call information management unit 55 compares the feature amount of the customer's face determined to be a player with the information of the feature amount of the customer's face photographed by the ticket issuing machine 20. When the facial features match, the call information management unit 55 sets the number associated with the facial features to go out.
  • the toilet has not been called yet and is absent by leaving through the toilet entrance / exit 104.
  • the call information management unit 55 acquires information on the facial features of the customer determined to be a vacant person at the toilet entrance / exit 104 by the image analysis unit 53 analyzing the image information taken by the second camera 12. .. Then, the call information management unit 55 compares the feature amount of the customer's face determined to be a player with the information of the feature amount of the customer's face photographed by the ticket issuing machine 20. When the facial features match, the call information management unit 55 sets the number associated with the facial features in the toilet.
  • the number of the number slip 200 is called in the order of the smallest number to the largest number, that is, in the order of reception by the ticket issuing machine 20. However, if the customer with the target number leaves the lobby area 101 and is absent from the lobby area 101 at the timing of the call order, or even if the call is made, the customer does not appear at the window 102. When the order is skipped based on the operation of the skip button 342 described later, the customer with the number after that number is the target of the call. Then, the call information management unit 55 sets the number that is smaller than the number that has already been called and has not been called to skip.
  • the "absent person” in the description of the present embodiment means a person who has left the lobby area 101 but has not yet completed the processing at the counter and is the target of the call.
  • a person who has left the lobby area 101 is not a person who is absent in the present embodiment because the process at the counter has already been completed and the person is no longer the target of the call.
  • the callability item indicates whether or not the call is possible, and is set based on various acquired information.
  • the callability includes "possible” indicating that the call is possible and “impossible” that the call cannot be made.
  • the call information management unit 55 refers to the acquired processing information, and sets the number for which the call has already been made or the number for which the response has been completed to "impossible". Further, the call information management unit 55 sets the number of the customer who has been determined to be an exiter by the image analysis unit 53 and has not returned to the lobby area 101 to "impossible”. Specifically, the call information management unit 55 analyzes the image information taken by the first camera 11 and the second camera 12 by the image analysis unit 53, so that the call information management unit 55 can be used as a person leaving the main entrance / exit 103 or the toilet entrance / exit 104. Acquire information on the determined facial features of the customer.
  • the call information management unit 55 sets the number to "impossible" when the facial feature amount of the customer determined to be the exiter matches the facial feature amount managed by the call management table 500. do. In this way, the call information management unit 55 creates a call management table 500 that handles the call so that the exiter is not called by setting the callability status of the exiter to "impossible".
  • the call information management unit 55 sets "OK" for the number of the customer in the lobby area 101, which is a number that has not yet been called. Further, the call information management unit 55 sets the customer's number to "OK" when the exiting person returns to the lobby area 101 and is in the lobby area 101.
  • the call information management unit 55 analyzes the image information taken by the first camera 11 and the second camera 12 by the image analysis unit 53, and the call information management unit 55 determines that the visitor is a visitor to the main entrance / exit 103 or the toilet entrance / exit 104. Acquire information on facial features. Then, the call information management unit 55 determines whether the facial features of the customer determined to be a visitor match among the facial features managed by the call management table 500.
  • the call information management unit 55 sets that if there is a matching number and the number is "impossible", the number is changed to "possible”. In this way, the call information management unit 55 creates a call management table 500 that treats the customer who was the exit as a person in the lobby area 101 when the exiter re-enters the lobby area 101.
  • the waiting time item is set according to the time from when the number ticket 200 is issued by the ticket issuing machine 20 to when the call is made.
  • the call information management unit 55 measures the time from the issuance of the number slip 200 to the present for each number, and sets it as a waiting time.
  • the exit time item is set for the exit number when the exit time is specified.
  • the call information management unit 55 sets the time information acquired from the image analysis unit 53 by the exiting person as the exiting person's number.
  • the item of re-entry time is created for the number of the visitor when the customer who has left the lobby area 101 re-enters the lobby area 101.
  • the call information management unit 55 analyzes the image information taken by the first camera 11 and the second camera 12 by the image analysis unit 53, and the call information management unit 55 determines that the visitor is a visitor to the main entrance / exit 103 or the toilet entrance / exit 104. Acquire information on facial features. Then, the call information management unit 55 determines whether or not the facial features of the customer determined to be a visitor match among the facial features managed by the call management table 500. do. Further, when the call information management unit 55 has a matching number and the status of the number is "going out" or "toilet", the call information management unit 55 sets the time when the visitor is specified for the visitor's number. It will be the re-entry time.
  • the exit time item is created for the exit number.
  • the call information management unit 55 measures from the exit time when the exiter exits to the current time, and sets it as the exit time. Further, when the exiting person returns to the lobby area 101 again, the call information management unit 55 measures from the exiting time of the exiting person to the time when the exiting person returns to the lobby area 101 again, and determines the exit time. do.
  • FIG. 5 is an example of the call screen 300 created by the call information management unit 55.
  • the call information management unit 55 creates a call screen 300 to be displayed on the call terminal 30 based on the call management table 500. Then, the call information management unit 55 transmits the created call screen 300 to the call terminal 30. As described above, the call management table 500 is updated according to the situation. Therefore, the contents of the call screen 300 are updated each time according to the call management table 500.
  • a number list 310 that lists the numbers of a plurality of number slips 200 issued by the ticket issuing machine 20 is displayed.
  • the number list 310 has a plurality of number displays 312 created for each number.
  • Each number display 312 has a number 313, a waiting time 314 and a status 315. These information constituting the number display 312 are displayed based on the information of the "number", the "status", and the "waiting time” managed in the call management table 500, respectively.
  • the number display 312 is not limited to the example shown in FIG. 5, and other information managed by the call management table 500 may be displayed.
  • the number display 312 displays information such as "toilet” and "going out” when a customer leaves the lobby area 101.
  • the display 31 of the calling terminal 30 displays the information about the absentee who is not in the lobby area 101 on the calling screen 300, which is specified by using the information of the leaving person.
  • a total waiting number display 320 indicating the total number of customers waiting for a call at the store is displayed. Further, the call screen 300 displays a skip list 330 that displays a list of numbers whose order has been skipped. In the skip list 330, a skip number display 331 indicating a number whose order has been skipped is displayed. That is, the skip number display 331 displays a number whose "status" is "skip" in the call management table 500 (see FIG. 4). Further, the skip number display 331 is displayed so that the display mode differs depending on whether the "callability" in the call management table 500 is "possible” or "impossible”.
  • the numbers “85” and “102” are numbers in which the order of calling is skipped with respect to the predetermined order.
  • the customer No. 85 is still absent at this point in time.
  • the customer number "102” has returned to the lobby area 101.
  • the skip number display 331 of the "102" number is highlighted so as to be more prominent than the skip number display 331 of the "85” number.
  • the number "85” is displayed in a relatively dark color to suggest that it is an absentee.
  • the display 31 of the calling terminal 30 displays the display regarding the exiting person who has left the lobby area 101 and the customer in the lobby area 101 when there is an exiting person who has skipped the predetermined calling order. Is displayed in a different display mode.
  • the customer in the lobby area 101 is a person who has left the lobby area 101 and then re-entered the lobby area 101, or a person who is not a person but does not appear at the window 102 without answering the call. Can exemplify customers who have been sent off.
  • the call button 341 and the skip button 342 are displayed on the call screen 300.
  • the numbers are "possible” in the call management table 500, and the calls are made in order from the smallest number to the largest number.
  • "104" is the number to be called next.
  • the number display 312 of the number "104" is provided with the highlight display 350 in which the frame is emphasized. Then, the operator of the calling terminal 30 can call the number with the highlighting 350 by operating the calling button 341.
  • the skip button 342 is a button used when skipping the order of numbers to be operated. For example, if there is a customer number that does not appear at the window 102 even after making a call, the number can be skipped by operating the skip button 342.
  • FIG. 6 is an explanatory diagram of the operation of the ticket issuing machine 20 of the first embodiment.
  • the control unit 21 of the ticket issuing machine 20 determines whether or not there is a customer ticketing operation, for example, the touch panel 24 (see FIG. 1) is operated (S101). When the customer's ticketing operation is not performed (No in S101), the control unit 21 returns to S101 again and determines whether or not the customer's ticketing operation is performed.
  • the control unit 21 controls the camera unit 26 to take a picture of the customer operating the ticket issuing machine 20 (S102). Then, the control unit 21 determines whether or not an image capable of identifying the customer's face can be acquired in the captured image (S103). When the control unit 21 can confirm that the image includes elements constituting the face such as the contour of the face, the eyes, the nose, and the mouth, the control unit 21 determines that the image capable of identifying the face can be acquired.
  • control unit 21 determines that the image that can identify the customer's face can be acquired (Yes in S103)
  • the control unit 21 controls the ticketing unit 25 to issue the number ticket 200 (S104).
  • the control unit 21 determines that the image that can identify the customer's face cannot be acquired (No in S103)
  • the control unit 21 returns to S102 again and takes a picture of the customer who operates the ticket issuing machine 20.
  • control unit 21 determines whether or not the number slip 200 issued by the ticket issuing unit 25 has been extracted (S105). When the control unit 21 determines that the number slip 200 has not been extracted (No in S105), the control unit 21 returns to S105 again and continues to determine whether or not the number slip 200 has been extracted. On the other hand, when the control unit 21 determines that the number slip 200 has been extracted (Yes in S105), the control unit 21 manages the image information which is a photographed image of the face and the ticket issuing machine information including the number information which is the number of the number slip 200. It is transmitted to the server 50 (S106).
  • FIG. 7 is an explanatory diagram of the operation of the management server 50 when there is an exit person.
  • the camera information acquisition unit 52 acquires an image taken by the camera 10 from the camera 10 (S201). Then, the image analysis unit 53 (see FIG. 3) of the management server 50 analyzes the acquired image information to determine the exited person leaving the lobby area 101 and extracts the feature amount of the face of the leaving person. (S202).
  • the call information management unit 55 (see FIG. 3) of the management server 50 refers to the call management table 500, and determines the facial features managed by the call management table 500 and the facial features of the exiting person. Are compared (S203). Then, the call information management unit 55 determines whether or not the facial feature amount managed by the call management table 500 has a number corresponding to the facial feature amount of the exiting person (S204). Here, if there is no number corresponding to the feature amount of the face of the exiting person (No in S204), the process ends.
  • the call information management unit 55 when the call information management unit 55 has a number corresponding to the feature amount of the face of the exiter (Yes in S204), the call information management unit 55 changes the "status" of the number and sets "call availability" to "impossible”. Set (S205).
  • the call information management unit 55 sets the status to "going out” when the camera information that identifies the first camera 11 is associated with the image information taken by the exiter.
  • the call information management unit 55 sets the status to "toilet" when the camera information that identifies the second camera 12 is associated with the image information taken by the exiter.
  • the call information management unit 55 sets the customer's number to "impossible", but only in this embodiment. Not limited. For example, the number of the customer determined to be an exit person and the status information that the number is an exit person (for example, display of going out or a toilet) are displayed on the call screen 300 of the calling terminal 30. Then, the call information management unit 55 receives from the operator at the call terminal 30 of the window 102 whether to call the customer determined to be the exit or skip the turn of the customer determined to be the exit. Then, the call information management unit 55 may set "impossible” or "acceptable” of "callable / unacceptable” based on the received information.
  • FIG. 8 is an explanatory diagram of the operation of the management server 50 when there are visitors.
  • the camera information acquisition unit 52 of the management server 50 acquires an image taken by the camera 10 from the camera 10 (S301). Then, the image analysis unit 53 of the management server 50 analyzes the acquired image information to determine the visitors who enter the lobby area 101 and extract the facial features of the visitors (S302).
  • the call information management unit 55 of the management server 50 refers to the call management table 500 and compares the facial features managed by the call management table 500 with the facial features of the visitors (the amount of facial features of the visitors). S303). Then, the call information management unit 55 determines whether or not the facial feature amount managed by the call management table 500 has a number corresponding to the facial feature amount of the visitor (S304). Here, if there is no number corresponding to the feature amount of the face of the visitor (No in S304), the process ends.
  • the call information management unit 55 when the call information management unit 55 has a number corresponding to the feature amount of the face of the visitor (Yes in S304), the call information management unit 55 changes the "status" of the number and changes the "call availability" to "acceptable”. Set (S305).
  • the call information management unit 55 sets the "status” to "skip” when the numbers of the visitors are skipped in order. Further, the call information management unit 55 sets the "status” to "unprocessed” when the numbers of the visitors are not skipped in order.
  • FIG. 9 is a modified example of the call screen 300 created by the call information management unit 55.
  • the basic configuration of the call screen 300 of the modified example shown in FIG. 9 is the same as the call screen 300 described with reference to FIG. However, on the call screen 300 of the modified example, when it can be specified that the customer with the skipped number has returned to the lobby area 101, the number display 312 corresponding to that number is not operated by the operator. It is automatically displayed in the number list 310. In this case, in the number list 310, the number display 312 of the returned customer's number is interrupted and displayed by the other number display 312, not in the order of the numbers. As a result, the operator of the calling terminal 30 can easily call the number when the customer whose turn has been skipped returns.
  • the skip button 342 is also displayed on the call screen 300 of the modified example.
  • the skip button 342 can be used when the number of the other number display 312 is designated as the call target without calling the number of the number display 312 with the highlighting 350.
  • the number display 312 of the returned customer is displayed in the number list 310.
  • the operator of the calling terminal 30 may want to skip the number of the returned customer and call the customer who has a relatively long waiting time first. In such a case, the skip button 342 is used.
  • the basic configuration of the management system 1 of the second embodiment is the same as that of the first embodiment.
  • the same components as those in the first embodiment are designated by the same reference numerals, and detailed description thereof will be omitted.
  • the ticket issuing machine 20 is not provided with the camera unit 26. Then, in the management system 1 of the second embodiment, the camera 10 that captures the entire lobby area 101 is used. The number of cameras 10 may be singular or plural as long as the entire lobby area 101 can be grasped. Then, the camera 10 transmits the captured image captured in the lobby area 101 to the management server 50.
  • the management server 50 analyzes the image acquired from the camera 10 to extract the feature amount of the customer's face and the feature amount of the skeleton of the customer's body. The management server 50 distinguishes and recognizes the customer shown in the image. Then, the management server 50 tracks the movement of the customer in the lobby area 101. Further, the management server 50 specifies not only the customers in the lobby area 101 but also the positions of the ticket issuing machine 20, the main entrance / exit 103, and the toilet entrance / exit 104 in the image taken by the camera 10. In this way, the management server 50 of the second embodiment identifies which customer is doing what kind of action based on the acquired image.
  • the management server 50 of the second embodiment has information on the feature amount of the customer's face and skeleton and the number issued by the ticket issuing machine 20. Associate with number information. Further, the management server 50 also determines whether or not the customer has left the lobby area 101 by tracking the customer in the lobby area 101 by the camera 10.
  • the information obtained by tracking the customer in the lobby area 101 by the camera 10 is associated with the number of the ticket issuing machine 20 and managed by the call management table 500.
  • FIG. 10 is an explanatory diagram of the operation of the ticket issuing machine 20 of the second embodiment.
  • the management server 50 of the second embodiment determines whether or not the visitors of the main entrance / exit 103 have acquired the photographed image information (S401). If the visitor has not acquired the captured image information (No in S401), the management server 50 returns to S401 again and continues the determination.
  • the management server 50 determines that the image information taken by the visitor has been acquired (Yes in S401)
  • the management server 50 refers to the call management table 500 and manages the facial features in the call management table 500.
  • the amount is compared with the amount of facial features of the visitors (S402).
  • the management server 50 determines whether or not the facial feature amount managed by the call management table 500 has a number corresponding to the facial feature amount of the visitor (S403). If there is no number corresponding to the feature amount of the face of the visitor (No in S403), the management server 50 subsequently analyzes the image of the entire lobby area 101 and tracks the visitor in the lobby area 101. Do (S404).
  • the management server 50 determines whether or not the visitor is operating the ticket issuing machine 20 (S405). Specifically, the management server 50 operates the ticketing machine 20 based on the fact that there is a visitor at the position of the ticketing machine 20 in the lobby area 101 and that the ticketing machine 20 is operated. Judge that there is. When the management server 50 determines that the entrant is not operating the ticket issuing machine 20 (No in S405), the management server 50 returns to S404 and tracks the entrant.
  • the management server 50 determines whether or not the number slip 200 issued by the ticketing unit 25 has been extracted (S406). ..
  • the management server 50 determines that the number slip 200 has not been extracted (No in S406)
  • the management server 50 returns to 406 again and continues to determine whether or not the number slip 200 has been extracted.
  • the management server 50 determines that the number slip 200 has been extracted (Yes in S406)
  • the management server 50 registers the feature amount information of the face and skeleton of the visitor and the number information of the number slip 200 in the call management table 500 (Yes). S407).
  • the management server 50 determines in S403 that there is a number corresponding to the feature amount of the face of the visitor (Yes in S403), the management server 50 changes the "status" of the number and changes the "callability” to "callability”. Set to "OK” (S408). This situation is a case where the customer who has already received the reception leaves the lobby area 101 and then returns to the lobby area 101 again. In this case, the management server 50 sets the "callability" to "possible” for the customer number returned to the lobby area 101 so that the number becomes the target of the call again. ..
  • FIG. 11 is a diagram illustrating an outline of the management system 1 of the third embodiment.
  • the management system 1 of the third embodiment includes a camera 10, a calling terminal 30, a number display 40, a management server 50, and an information terminal device 60 owned by a customer. That is, the management system 1 of the third embodiment is different from the management system 1 of the first embodiment in that the information terminal device 60 is provided in place of the ticket issuing machine 20. Then, in the third embodiment, the information terminal device 60 functions as an example of the issuing means like the ticket issuing machine 20.
  • the information terminal device 60 a device that can be carried by the user, such as a mobile phone such as a smartphone or a mobile terminal device such as a tablet terminal, can be used. Then, the information terminal device 60 can communicate with the management server 50 via the network.
  • the hardware configuration of the information terminal device 60 is the same as the hardware configuration of the ticket issuing machine 20 described above.
  • the information terminal device 60 has a touch panel 61 that displays information and accepts input, and a camera unit 62 that captures an object.
  • the management server 50 has an electronic number corresponding to a paper number slip 200 via an information terminal device 60 owned by the customer while the customer is outside a store such as a bank. Issue a vote.
  • the management server 50 acquires an image of the face of the customer who operates the information terminal device 60 when the information terminal device 60 issues an electronic number slip.
  • the information terminal device 60 transmits the image information of the customer's face taken by the camera unit 62 provided in the information terminal device 60 to the management server 50 in association with the number information of the issued number.
  • the management server 50 extracts the feature amount of the face from the image information by analyzing the image information acquired from the information terminal device 60.
  • the management server 50 associates the number information with the extracted facial feature amount information and manages it in the call management table 500.
  • the process related to the call is performed as in the first embodiment and the second embodiment.
  • the call management table 500 is used for each customer number to be called, such as normal calling, handling when going out or absent from the toilet, handling when leaving and returning to the lobby area 101, etc.
  • the various information that was used is managed.
  • the management server 50 acquires an image of the customer's face when the information terminal device 60 issues the electronic number slip, and the facial features extracted from the acquired facial image. It manages the amount of information, but is not limited to this aspect. For example, the management server 50 acquires a customer's face image and extracts facial features based on the acquired face image in advance before the information terminal device 60 issues an electronic number slip. You may do and manage that information.
  • the camera 10 for photographing the visitors and the camera 10 for photographing the exits may be separately installed at the main entrance / exit 103.
  • the camera 10 for photographing the visitors is installed so that the customer whose face faces the front toward the lobby area 101 can be photographed at the main entrance / exit 103. Then, the customer facing the front with the camera 10 that captures the visitors is determined to be the visitors. The same applies to the camera 10 that captures the exit person.
  • the customer reflected in the image information is individually specified by extracting the feature amount of the customer's face from the image information, but the present invention is not limited to this example.
  • the feature amount of the customer's skeleton may be extracted from the image information, and the customer reflected in the image information may be individually specified.
  • the management system 1 detects the feature amount of the customer's skeleton when first entering the store, associates the number information with the feature amount information of the skeleton, and tracks the customer, so that the customer can track the lobby area 101. You may recognize that you are in.
  • information on the feature amount of the customer's face is acquired at the timing when the customer's skeleton cannot be detected when the customer goes out or goes to the toilet or the like. Is also good.
  • the numbers issued by the ticket issuing machine 20 and the information terminal device 60 are associated with various information to manage the information necessary for the call.
  • identification information that can identify each customer, such as a customer's name, a predetermined name, or a symbol, may be associated with various types of information to manage information necessary for the call.
  • the ticket issuing machine 20 may have a part or all of the functions of the management server 50.
  • the program for realizing the management server 50 and the ticket issuing machine 20 of the present embodiment can be provided not only by communication means but also by storing the program in a recording medium such as a CD-ROM.
  • ... Management system 10 ... Camera, 11 ... 1st camera, 12 ... 2nd camera, 20 ... Ticket issuing machine 26 ... Camera unit, 30 ... Calling terminal, 40 ... Number display, 50 ... Management server, 51 ... Ticketing machine Information acquisition unit, 52 ... Camera information acquisition unit, 53 ... Image analysis unit, 54 ... Processing information acquisition unit, 55 ... Call information management unit, 300 ... Call screen

Landscapes

  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Primary Health Care (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Telephonic Communication Services (AREA)

Abstract

管理システムは、所定の場所に入場する入場者と所定の場所から退場する退場者とを、撮影画像を用いて特定する特定手段と、特定手段により特定された入場者の情報と退場者の情報とに基づいて、所定の場所にいる者を呼び出すための呼出情報を作成する作成手段と、を備えることを特徴とする。

Description

管理システム、管理装置およびプログラム
 本発明は、管理システム、管理装置およびプログラムに関する。
 例えば、特許文献1には、サービスロボットは、少なくとも受付番号を割り当てる受付機と通信可能であり、顧客の画像を含む画像情報を取得する画像情報取得部と、顧客による受付操作に応じて、受付機から受付番号を取得する受付番号取得部と、取得された受付番号と取得された画像情報とを互いに対応付けられた状態で記憶する記憶部とを備えるこことが開示されている。
国際公開第2017/221924号
 例えば銀行や店舗などの所定の場所において、所定の場所にいる者を呼び出すことが行われる。ここで、例えばトイレや一時的な外出のために、所定の場所から退場する場合がある。このような場合、所定の場所にいない不在者を呼び出したり、呼出の対象者が不在者であるか否かの確認をしたりすると、手間が掛かることがあった。
 本発明は、不在者がいる場合であっても、呼出にかかる手間を軽減することを目的とする。
 本開示の1つの態様は、所定の場所に入場する入場者と当該所定の場所から退場する退場者とを、撮影画像を用いて特定する特定手段と、前記特定手段により特定された前記入場者の情報と前記退場者の情報とに基づいて、前記所定の場所にいる者を呼び出すための呼出情報を作成する作成手段と、を備える、ことを特徴とする管理システムである。
 ここで、前記作成手段は、前記退場者に対する呼出が行われないようにする内容の前記呼出情報を作成する、ことを特徴とする。
 また、前記作成手段は、前記退場者が前記所定の場所に再び入場した場合に、当該退場者を前記所定の場所にいる者とする内容の前記呼出情報を作成する、ことを特徴とする。
 また、呼出を行う操作者が操作する操作画面を表示する表示手段を備え、前記表示手段は、前記退場者の情報を用いて特定された、前記所定の場所にいない不在者に関する情報を、前記操作画面に表示する、ことを特徴とする。
 また、呼出を行う操作者が操作する操作画面を表示する表示手段を備え、前記表示手段は、予め定められた呼出の順番を飛ばされた前記退場者がいる場合に、退場したままの退場者に関する表示と、前記所定の場所に再び入場した退場者に関する表示とを、異なる表示態様で表示する、ことを特徴とする。
 また、前記入場者に識別情報を交付する交付手段を備え、前記作成手段は、前記入場者の情報および前記退場者の情報に、前記識別情報を関連付けて前記呼出情報を作成する、ことを特徴とする。
 また、前記交付手段は、前記入場者を撮影する撮影手段を備え、前記作成手段は、前記撮影手段にて撮影した前記入場者の撮影画像と、前記識別情報とを関連付ける、ことを特徴とする。
 また、前記交付手段は、前記入場者が所有する情報端末装置である、ことを特徴とする。
 そして、本開示の他の1つの態様は、撮影画像を用いて特定された、所定の場所に入場する入場者と当該所定の場所から退場する退場者との情報を取得する取得手段と、前記取得手段が取得した前記入場者の情報と前記退場者の情報とに基づいて、前記所定の場所にいる者を呼び出すための呼出情報を作成する作成手段と、を備える、ことを特徴とする管理装置である。
 そして、本開示のさらに他の1つの態様は、コンピュータに、撮影画像を用いて特定された、所定の場所に入場する入場者と当該所定の場所から退場する退場者との情報を取得する機能と、取得した前記入場者の情報と前記退場者の情報とに基づいて、前記所定の場所にいる者を呼び出すための呼出情報を作成する機能と、を実現させることを特徴とするプログラムである。
 本発明によれば、不在者がいる場合であっても、呼出にかかる手間を軽減することが可能になる。
第1実施形態の管理システムの概要を説明する図である。 第1実施形態の管理システムが適用される店舗のフロア図の一例である。 第1実施形態の管理サーバの機能ブロック図である。 呼出情報作成部が管理する呼出管理テーブルの一例である。 呼出情報作成部が作成する呼出画面の一例である。 第1実施形態の発券機の動作の説明図である。 退場者がいる場合の管理サーバの動作の説明図である。 入場者がいる場合の管理サーバの動作の説明図である。 呼出情報作成部が作成する呼出画面の変形例である。 第2実施形態の発券機の動作の説明図である。 第3実施形態の管理システムの概要を説明する図である。
 以下、添付図面を参照して、本発明の実施形態について詳細に説明する。
<第1実施形態>
〔管理システム1〕
 図1は、第1実施形態の管理システム1の概要を説明する図である。
 図2は、第1実施形態の管理システム1が適用される店舗のフロア図の一例である。
 以下では、第1実施形態の管理システム1を、所定の場所の一例としての銀行の店舗にて、行員が顧客を窓口に呼び出し、手続きなどの応対を行う場合に適用した例を用いて説明する。なお、所定の場所には、銀行のみならず、郵便局や携帯電話ショップなどの店舗、市役所などの公共施設、病院などの医療施設を例示できる。
 図1に示すように、第1実施形態の管理システム1は、対象を撮影するカメラ10と、番号票200を発券する発券機20と、を有する。また、管理システム1は、呼出を行う者が用いる呼出端末30と、呼出の対象の番号を表示する番号表示器40と、を有する。さらに、管理システム1は、呼出を行うための各種の情報を管理する管理サーバ50を有する。
 ここで、第1実施形態の管理システム1において、例えば発券機20が交付手段の一例であり、例えば呼出端末30が表示手段の一例である。
 そして、カメラ10、発券機20、呼出端末30、番号表示器40および管理サーバ50は、いずれもネットワークに接続されている。なお、第1実施形態のネットワークは、管理システム1を構成する装置間のデータ通信に用いられる通信ネットワークである。ネットワークは、データの送受信が可能であれば、その種類は特に限定されず、例えばインターネット、LAN(Local Area Network)、WAN(Wide Area Network)等として良い。データ通信に用いられる通信回線は、有線であっても無線であっても良い。
 図2に示すように、銀行の店舗100には、待合席などが設置されて顧客が待機するロビーエリア101と、行員が顧客の応対を行う複数の窓口102とが設けられる。また、図2に示す例では、ロビーエリア101には、顧客などがロビーエリア101に出入りするためのメイン出入口103と、トイレにつながるトイレ出入口104とが設けられる。
 そして、第1実施形態の管理システム1は、銀行のロビーエリア101(例えば、所定の場所の一例)に入場する入場者と、ロビーエリア101から退場する退場者とを、撮影画像を用いて特定し、特定された入場者の情報と退場者の情報とに基づいて、ロビーエリア101にいる者を呼び出すための呼出情報の一例である呼出管理テーブル500(後述の図4参照)を作成する。これによって、第1実施形態の管理システム1は、例えば不在者を呼び出す必要がなくなるなど、不在者がいる場合であっても、呼出にかかる手間を軽減する。以下、管理システム1について、詳細に説明する。
[カメラ10]
 図2に示すように、第1実施形態において、複数のカメラ10は、メイン出入口103に設定される第1カメラ11と、トイレ出入口104に設置される第2カメラ12と、を備えて構成される。第1カメラ11と第2カメラ12とは、それぞれ撮影を常時行っている。そして、第1カメラ11と第2カメラ12とは、撮影した画像情報を、撮影とほぼ同時に管理サーバ50にそれぞれ送信する。
 第1カメラ11は、メイン出入口103に設置される。そして、第1カメラ11は、メイン出入口103を通過する人を撮影する。メイン出入口103では、ロビーエリア101外からロビーエリア101内に入場する入場者と、ロビーエリア101内からロビーエリア101外へと退場する退場者が通過する。従って、第1カメラ11は、メイン出入口103を通る入場者および退場者を撮影する。
 第2カメラ12は、トイレ出入口104に設置される。そして、第2カメラ12は、トイレ出入口104を通過する人を撮影する。トイレ出入口104では、ロビーエリア101内からロビーエリア101外へと退場する退場者と、ロビーエリア101外からロビーエリア101内に入場する入場者が通過する。従って、第2カメラ12は、トイレ出入口104を通る入場者および退場者を撮影する。
 そして、第1カメラ11と第2カメラ12とは、それぞれ、撮影した画像情報と、撮影した時刻である撮影時刻情報と、カメラ10を一意に識別可能なカメラ識別情報とを関連付けて、管理サーバ50に送信する。
 なお、本実施形態の説明において、第1カメラ11および第2カメラ12を特に区別しない場合には、カメラ10と総称する。
[発券機20]
 図2に示すように、第1実施形態の発券機20は、ロビーエリア101内であってメイン出入口103の付近に設置される。発券機20は、来店した顧客が受付を行う際に用いるものである。従って、発券機20は、メイン出入口103からロビーエリア101内に入場した入場者が直ぐに操作できる場所に置かれている。
 そして、図1に示すように、発券機20は、本機を制御する制御部21と、情報を記憶する記憶部22と、LAN(Local Area Network)ケーブル等を介した通信を実現する通信部23と、を有する。また、発券機20は、顧客からの入力操作の受け付けや情報の表示を行うタッチパネル24と、番号票200を発券する発券部25と、顧客を撮影するカメラ部26と、を有する。
 制御部21は、プロセッサの一例であるCPU(Central Processing Unit)と、ファームウェアやBIOS(Basic Input Output System)等が記憶されたROM(Read Only Memory)と、ワークエリアとして用いられるRAM(Random Access Memory)と、を有している。制御部21は、いわゆるコンピュータとして機能する。
 記憶部22は、例えばハードディスク装置(HDD(Hard Disk Drive))や半導体メモリにより構成される。そして、記憶部22には、画像情報などの各種の情報が記憶される。
 通信部23は、各種の規格に準拠する通信インタフェースで構成される。
 タッチパネル24は、液晶や有機EL(Electro Luminescence)等のディスプレイと、静電容量式のフィルムセンサとを有して構成される。なお、操作の入力には、タッチパネル24以外のデバイスを用いても良い。例えば、操作の入力には、押しボタンや非接触の操作パネル等、来店した顧客による操作が可能なデバイスを用いてもよい。
 また、タッチパネル24は、例えば、来店した目的や所望する取引の入力を受け付ける画面を表示する。また、タッチパネル24は、受け付けた目的等に応じた顧客の行き先を表示する。
 発券部25は、番号(例えば、識別情報の一例)を示す情報が印刷された番号票200を出力する。発券部25は、例えばロール紙に情報を印字して番号票200として出力するサーマルプリンタを例示できる。本実施形態において、番号は、受付の順に連番で作成され、受付の順番が後になるほど、数字が大きくなる。また、発券部25は、発券を行ったときの発券時刻情報を、番号に関連付ける。
 なお、本実施形態の番号票200には、発行された番号、番号票200の発行日、番号票200の発行時刻、呼出に関する説明文、および店舗名などが記載される。
 カメラ部26は、例えばタッチパネル24の上側に設けられる。カメラ部26は、タッチパネル24を操作する顧客の少なくとも顔を撮影する。本実施形態の発券機20は、メイン出入口103付近に設けられ、メイン出入口103から入場する入場者が最初に操作するものである。従って、カメラ部26は、入場者を撮影していると捉えることができる。そして、カメラ部26は、発券部25が発行した番号情報を、その番号が発行されたときに撮影した顧客の顔を写した画像情報に関連付ける。また、カメラ部26は、画像情報に、カメラ部26を識別可能なカメラ識別情報を関連付ける。
 そして、発券機20は、制御部21に制御される通信部23を介して、発行した番号の番号情報と、番号が発行されたときの発券時刻情報と、顧客を撮影した画像情報と、カメラ部26を識別するカメラ識別情報と、を相互に関連付けて、管理サーバ50に送信する。
[呼出端末30]
 呼出端末30は、窓口102に設けられ、例えば行員などの操作者から操作を受け付ける。呼出端末30のハードウェア構成は、上述した発券機20と同様である。なお、第1実施形態の呼出端末30は、情報を表示する液晶や有機ELのディスプレイ31と、入力操作を受け付ける操作部32とをそれぞれ有している。
 ディスプレイ31は、発券機20にて発券された番号票200に対応する番号が表示される呼出画面300(後述)を表示する。本実施形態において、この呼出画面300は、管理サーバ50から取得した呼出情報の一例である呼出管理テーブル500(後述の図4参照)に基づいて表示される。管理サーバ50が作成する呼出管理テーブル500と、呼出画面300については、後に詳しく説明する。
 なお、本実施形態のディスプレイ31は、タッチパネルとなっており、表示画面に対する操作者の指などの接触などによって、操作を受け付けることが可能になっている。
 操作部32は、ディスプレイ31に表示される複数の番号のうち、呼出の対象となる番号を指定する操作を受け付ける。また、操作部32は、窓口において顧客との応対が終了したということを通知する操作を受け付ける。
 そして、呼出端末30は、呼出の対象となった番号情報を番号表示器40に送信する。また、呼出端末30は、呼出の対象となった番号情報と、応対が終了した顧客の番号情報と、呼出および応対の終了の時刻情報とを、管理サーバ50に送信する。
[番号表示器40]
 番号表示器40は、窓口102に設けられる。1台の番号表示器40は、1台の呼出端末30、または異なる2台の呼出端末30に接続される。第1実施形態の番号表示器40は、画像を表示するディスプレイ41と、音声を出力するスピーカ42と、を有している。
 ディスプレイ41には、液晶ディスプレイや7セグメントディスプレイを用いることができる。そして、ディスプレイ41は、呼出端末30にて呼出の対象として指定された番号を表示する。
 スピーカ42は、ディスプレイ41にて番号が表示されるタイミングで、呼出の際の効果音や、音声化された番号を出力する。
[管理サーバ50]
 図3は、第1実施形態の管理サーバ50の機能ブロック図である。
 管理サーバ50のハードウェア構成は、上述した発券機20と同様である。そして、第1実施形態の管理サーバ50は、カメラ10により特定された入場者の情報と退場者の情報とに基づいて、所定の場所(例えば、ロビーエリア101)にいる者を呼び出すための呼出情報である呼出管理テーブル500および呼出画面300を作成する。管理サーバ50は、作成した呼出画面300に関する情報を呼出端末30に送信する。以下、管理サーバ50について詳細に説明する。
 図3に示すように、管理サーバ50は、発券機情報を取得する発券機情報取得部51と、カメラ情報を取得するカメラ情報取得部52と、画像を解析する画像解析部53と、を有する。また、管理サーバ50は、処理情報を取得する処理情報取得部54と、呼出情報を作成する呼出情報管理部55と、を有する。
 なお、管理サーバ50における上記の機能は、プロセッサの一例であるCPU、ROM、RAM、およびHDDによって実現される。
 ここで、第1実施形態の管理システム1において、例えば画像解析部53が特定手段の一例であり、例えば呼出情報管理部55が作成手段の一例である。
 発券機情報取得部51は、発券機情報を、発券機20から取得する。発券機情報には、カメラ部26の画像情報と、番号票200の番号情報と、番号票200の発券時刻情報と、カメラ部26を識別するカメラ識別情報とが含まれる。そして、発券機情報取得部51は、発券機情報を画像解析部53に送る。
 カメラ情報取得部52は、カメラ情報を、カメラ10(本実施形態では、第1カメラ11および第2カメラ12)から取得する。カメラ情報には、カメラ10の画像情報と、カメラ10を識別するカメラ識別情報と、カメラ10の撮影日時である撮影時刻情報と、が含まれる。そして、カメラ情報取得部52は、カメラ情報を画像解析部53に送る。
 画像解析部53は、発券機情報取得部51から取得した発券機情報のうち画像情報から顔の特徴量を抽出する。すなわち、画像解析部53は、発券機20を操作する顧客の顔の特徴量を抽出する。第1実施形態において、顔の特徴量は、例えば眼、鼻、口などの位置関係などを数値化したものを例示できる。
 そして、画像解析部53は、発券機情報のうち画像情報から抽出した顔の特徴量の情報に、番号情報、発券時刻情報およびカメラ識別情報を関連付けて、呼出情報管理部55に送る。
 また、画像解析部53は、カメラ情報取得部52から取得したカメラ情報のうち画像情報から顔の特徴量を抽出する。すなわち、画像解析部53は、メイン出入口103やトイレ出入口104を通る人物の顔の特徴量を抽出する。
 さらに、第1実施形態の画像解析部53は、顔の特徴量の抽出対象の人物が、入場者であるか退場者であるかの情報である入退場情報を得るために、カメラ情報のうち画像情報を解析する。具体的には、画像解析部53は、メイン出入口103に対する顔や身体の向きや、顔や身体が移動する方向に基づいて、入場者と退場者とを判定する。例えば、画像解析部53は、ロビーエリア101に向けて外からメイン出入口103を通過する場合には、その人物は、入場者であると判定する。また、例えば、画像解析部53は、ロビーエリア101を背にしてメイン出入口103を通過する場合には、その人物は、退場者であると判定する。
 そして、画像解析部53は、カメラ情報のうち画像情報から抽出した顔の特徴量の情報および判定した入退場情報に、撮影時刻情報とカメラ識別情報とを関連付けて、呼出情報管理部55に送る。
 処理情報取得部54は、処理情報を呼出端末30から取得する。処理情報には、呼出が行われた番号情報と、呼出が行われた時刻情報と、応対が終了した番号情報と、応対が終了時の時刻情報とが含まれる。そして、処理情報取得部54は、処理情報を呼出情報管理部55に送る。
 呼出情報管理部55は、画像解析部53および処理情報取得部54から取得する各種情報を、呼出管理テーブル500を用いて管理する。さらに、呼出情報管理部55は、呼出管理テーブル500に基づいて、呼出端末30にて用いられる呼出画面300を作成する。
 さらに、呼出情報管理部55は、呼出管理テーブル500に基づいて、呼出端末30のディスプレイ31に表示する呼出画面300を作成する。
 図4は、呼出情報管理部55が管理する呼出管理テーブル500の一例である。
 図4に示すように、呼出管理テーブル500は、「番号」の情報に関連付けた、「発券時刻」の情報と、「特徴量」の情報と、「ステータス」の情報と、「呼出可否」の情報と、「待ち時間」の情報と、「退場時刻」の情報と、「再入場時刻」の情報と、「退場時間」の情報と、の項目を備える。
 そして、呼出情報管理部55は、発券機情報、カメラ情報および処理情報に基づく各種の情報を取得するたびに、各番号に関連付けられた各項目の情報を更新する。
 番号の項目は、取得した番号情報に応じて作成される。本実施形態において、番号の項目には、発券機20にて発行された番号が用いられる。
 発券時刻は、取得した発券時刻情報に応じて作成される。
 特徴量の項目は、画像解析部53から取得した、カメラ部26にて撮影された顧客の顔の特徴量の情報に基づいて作成される。
 ステータスの項目は、顧客の状態を示すものであり、取得した各種の情報に基づいて設定される。ステータスには、「未処理」、「処理中」、「終了」、「外出」、「トイレ」、「スキップ」の6つの状態が含まれる。そして、ステータスの項目には、いずれかの状態が設定される。
-未処理-
 未処理は、発券機20にて番号票200が発行され、未だ呼出が行われていない状態である。呼出情報管理部55は、取得した処理情報を参照し、発行された番号のうち、呼出が行われていない番号を、未処理の対象に設定する。
 なお、呼出情報管理部55は、呼出を行うことができる番号に対して未処理を設定する。したがって、呼出情報管理部55は、呼出を行うことができない退場者の番号に対しては、後述するように、他の状態を設定する。また、呼出情報管理部55は、退場者がロビーエリア101に戻ってきた場合には、その番号に対して未処理を設定する。
-処理中-
 処理中は、既に呼出が行われているが、応対が終了していない状態である。呼出情報管理部55は、取得した処理情報を参照し、呼出が行われている番号であって、応対が終了していない番号を、処理中に設定する。
-終了-
 終了は、応対が終了した状態である。呼出情報管理部55は、取得した処理情報を参照し、応対が終了している番号を、終了に設定する。
-外出-
 外出は、未だ呼出が行われておらず、かつ、メイン出入口103を通って退場することで不在となっている状態である。呼出情報管理部55は、第1カメラ11(図2参照)にて撮影された画像情報を画像解析部53が解析することで、メイン出入口103の退場者と判定された顧客の顔の特徴量の情報を取得する。そして、呼出情報管理部55は、退場者と判定された顧客の顔の特徴量と、発券機20にて撮影された顧客の顔の特徴量の情報とを比較する。呼出情報管理部55は、顔の特徴量が一致した場合に、その顔の特徴量に関連付けられている番号を、外出に設定する。
-トイレ-
 トイレは、未だ呼出が行われておらず、かつ、トイレ出入口104を通って退場することで不在となっている状態である。呼出情報管理部55は、第2カメラ12にて撮影された画像情報を画像解析部53が解析することで、トイレ出入口104の退場者と判定された顧客の顔の特徴量の情報を取得する。そして、呼出情報管理部55は、退場者と判定された顧客の顔の特徴量と、発券機20にて撮影された顧客の顔の特徴量の情報とを比較する。呼出情報管理部55は、顔の特徴量が一致した場合に、その顔の特徴量に関連付けられている番号を、トイレに設定する。
-スキップ-
 本実施形態では、番号票200の番号が小さい数字から大きい数字の順、すなわち、発券機20にて受付が行われた順番に従って、呼出を行うようにしている。ただし、呼出の順番のタイミングで、対象となる番号の顧客が、ロビーエリア101を退場してロビーエリア101を不在にする不在者となっている場合や、呼出を行っても窓口102に現れず後述するスキップボタン342の操作に基づいて順番が飛ばされた場合に、その番号の次以降の番号の顧客が呼出の対象となる。そして、呼出情報管理部55は、既に呼出が行われている番号よりも小さい数字の番号であって、呼出が未だ行われていない番号を、スキップに設定する。
 なお、本実施形態の説明における「不在者」は、ロビーエリア101を退場した退場者であるが、未だ窓口における処理が終了しておらず、呼出の対象となる者を意味する。例えば、既に窓口での処理が終了することで呼出の対象ではなくなり、ロビーエリア101を退場した退場者は、本実施形態における不在者に該当しない。
 呼出可否の項目は、呼出が可能か否かを示すものであり、取得した各種の情報に基づいて設定される。呼出可否には、呼出が可能であることを示す「可」と、呼出ができない「不可」とが含まれる。
 呼出情報管理部55は、取得した処理情報を参照し、既に呼出が行われた番号、または応対が終了している番号を、「不可」に設定する。さらに、呼出情報管理部55は、画像解析部53によって退場者と判定され、かつ、ロビーエリア101に戻っていない顧客の番号を、「不可」に設定する。具体的には、呼出情報管理部55は、第1カメラ11や第2カメラ12にて撮影された画像情報を画像解析部53が解析することで、メイン出入口103またはトイレ出入口104の退場者と判定された顧客の顔の特徴量の情報を取得する。そして、呼出情報管理部55は、退場者と判定された顧客の顔の特徴量が、呼出管理テーブル500にて管理されている顔の特徴量と一致する場合、その番号を「不可」に設定する。
 このように、呼出情報管理部55は、退場者の呼出可否の状態を「不可」に設定することで、退場者に対する呼出が行われないように扱う呼出管理テーブル500を作成する。
 一方、呼出情報管理部55は、未だ呼出が行われていない番号であって、ロビーエリア101にいる顧客の番号に対して、「可」を設定する。
 さらに、呼出情報管理部55は、退場者がロビーエリア101に再び戻り、ロビーエリア101にいる場合、その顧客の番号を「可」に設定する。呼出情報管理部55は、第1カメラ11や第2カメラ12にて撮影された画像情報を画像解析部53が解析することで、メイン出入口103またはトイレ出入口104の入場者と判定された顧客の顔の特徴量の情報を取得する。そして、呼出情報管理部55は、入場者と判定された顧客の顔の特徴量が、呼出管理テーブル500にて管理されている顔の特徴量のなかで一致するものがあるか判定する。呼出情報管理部55は、判定の結果、一致する番号があり、その番号が「不可」であった場合、「可」に変更する設定を行う。
 このように、呼出情報管理部55は、退場者がロビーエリア101に再び入場した場合に、この退場者であった顧客をロビーエリア101にいる者として取り扱う呼出管理テーブル500を作成する。
 待ち時間の項目は、発券機20にて番号票200が発券されてから呼出が行われたときまでの時間に応じて設定される。呼出情報管理部55は、番号ごとに、番号票200が発券されてから現在までの時間を計測し、待ち時間とする。
 退場時刻の項目は、退場者が特定された場合に、その退場者の番号に対して設定される。呼出情報管理部55は、画像解析部53から取得した退場者が退場した時刻情報を、退場者の番号に設定する。
 再入場時刻の項目は、ロビーエリア101から退場していた顧客が、再びロビーエリア101に入場した場合に、その入場者の番号に対して作成される。呼出情報管理部55は、第1カメラ11や第2カメラ12にて撮影された画像情報を画像解析部53が解析することで、メイン出入口103またはトイレ出入口104の入場者と判定された顧客の顔の特徴量の情報を取得する。そして、呼出情報管理部55は、入場者と判定された顧客の顔の特徴量が、呼出管理テーブル500にて管理されている顔の特徴量のなかで一致するものがあるか否かを判定する。さらに、呼出情報管理部55は、一致する番号があり、その番号のステータスが「外出」または「トイレ」であった場合に、入場者の番号に対して、入場者が特定された時刻を、再入場時刻とする。
 退場時間の項目は、退場者が特定された場合、その退場者の番号に対して作成される。呼出情報管理部55は、退場者が退場した退場時刻から現在の時刻までを計測し、退場時間とする。また、呼出情報管理部55は、退場者が再びロビーエリア101に戻ってきた場合には、退場者の退場時刻から、再びロビーエリア101に戻ってきたときの時刻までを計測し、退場時間とする。
 図5は、呼出情報管理部55が作成する呼出画面300の一例である。
 呼出情報管理部55は、呼出管理テーブル500に基づいて、呼出端末30に表示する呼出画面300を作成する。そして、呼出情報管理部55は、作成した呼出画面300を呼出端末30に送信する。なお、上述のとおり、呼出管理テーブル500は、状況に応じて更新される。従って、呼出画面300は、呼出管理テーブル500に応じて、都度、内容が更新される。
 図5に示すように、呼出画面300には、発券機20にて発行された複数の番号票200の番号をリスト化した番号リスト310が表示される。番号リスト310は、番号ごとに作成される番号表示312を複数有する。各々の番号表示312は、番号313、待ち時間314およびステータス315を有する。番号表示312を構成するこれらの情報は、呼出管理テーブル500にて管理される「番号」、「ステータス」および「待ち時間」の情報にそれぞれ基づいて表示される。なお、図5に示す例に限定されず、番号表示312には、呼出管理テーブル500にて管理される他の情報を表示しても良い。
 特に、番号表示312には、ロビーエリア101から顧客が退場した場合に、「トイレ」や「外出」などの情報が表示される。このように、呼出端末30のディスプレイ31は、退場者の情報を用いて特定された、ロビーエリア101にいない不在者に関する情報を呼出画面300に表示する、
 呼出画面300には、店舗で呼出を待っている顧客の全体の人数を示す全体待ち人数表示320が表示される。
 また、呼出画面300には、順番がスキップされた番号を一覧表示するスキップリスト330が表示される。スキップリスト330には、順番が飛ばされた番号を示すスキップ番号表示331が表示される。すなわち、スキップ番号表示331は、呼出管理テーブル500(図4参照)における「ステータス」が「スキップ」である番号が表示される。さらに、スキップ番号表示331は、呼出管理テーブル500における「呼出可否」が「可」である場合と、「不可」である場合とで、表示態様が異なるように表示される。
 図5に示す例では、「85」番および「102」番は、予め定められた順番に対して、それぞれ呼出の順番が飛ばされた番号である。そして、「85」番の顧客は、現時点においても退場したままであり、不在者となっている。一方、「102」番の顧客は、ロビーエリア101に戻っている。そして、呼出画面300では、例えば、「102」番のスキップ番号表示331は、「85」番のスキップ番号表示331よりも目立つように強調して表示される。これによって、呼出画面300では、「102」番については、呼出が可能であることを明示する。一方で、「85」番については、比較的暗い色で表示するなどして、不在者であることを示唆する。
 このように、呼出端末30のディスプレイ31は、予め定められた呼出の順番を飛ばされた退場者がいる場合に、ロビーエリア101を退場したままの退場者に関する表示と、ロビーエリア101にいる顧客に関する表示とを、異なる表示態様で表示する。なお、この表示を行う場合に、ロビーエリア101にいる顧客とは、ロビーエリア101を退場した後に再びロビーエリア101に入場した退場者や、退場者ではないが呼出に応じず窓口102に現れなかった顧客などを例示できる。
 そして、呼出画面300には、呼出ボタン341とスキップボタン342とが表示される。
 本実施形態では、呼出管理テーブル500において呼出可否が「可」である番号であって、小さい数字から大きい数字に向けて順に呼出を行うようにしている。図5に示す例の場合、「104」番が次に呼び出されるべき番号となっている。この場合、「104」番の番号表示312は、他の番号表示312とは異なり、枠が強調された強調表示350が施される。そして、呼出端末30の操作者は、呼出ボタン341を操作することで、強調表示350が施された番号を呼び出すことができる。
 スキップボタン342は、操作の対象となる番号の順番を飛ばす際に用いられるボタンである。例えば、呼出を行っても窓口102に現れない顧客の番号があった場合に、スキップボタン342を操作することで、その番号を飛ばすことができる。
 続いて、発券機20および管理サーバ50の動作について具体的に説明する。
 図6は、第1実施形態の発券機20の動作の説明図である。
 図6に示すように、発券機20の制御部21は、例えばタッチパネル24(図1参照)が操作されるなど、顧客の発券操作があるか否かを判断する(S101)。制御部21は、顧客の発券操作が行われない場合(S101にてNo)、再びS101に戻って、顧客の発券操作の有無を判断する。
 一方、顧客の発券操作があった場合(S101にてYes)、制御部21は、カメラ部26を制御することで、発券機20を操作する顧客を撮影する(S102)。そして、制御部21は、撮影された画像において、顧客の顔を特定可能な画像を取得できたか否かを判断する(S103)。制御部21は、例えば顔の輪郭、眼、鼻、口などの顔を構成する要素が画像に含まれていることを確認できた場合、顔を特定可能な画像が取得できると判断する。
 そして、制御部21は、顧客の顔を特定可能な画像を取得できたと判断した場合(S103でYes)、発券部25を制御することで、番号票200を発券する(S104)。一方、制御部21は、顧客の顔を特定可能な画像を取得できていない判断した場合(S103でNo)、再びS102に戻って、発券機20を操作する顧客を撮影する。
 その後、制御部21は、発券部25が発券した番号票200が抜き取られたか否かを判断する(S105)。制御部21は、番号票200が抜き取られていないと判断した場合(S105にてNo)、再びS105に戻って、番号票200が抜き取られたか否かの判断を継続する。
 一方で、制御部21は、番号票200が抜き取られたと判断した場合(S105でYes)、顔の撮影画像である画像情報および番号票200の番号である番号情報を含む発券機情報を、管理サーバ50に送信する(S106)。
 次に、顧客がロビーエリア101から退場した場合における、管理サーバ50の動作を説明する。
 図7は、退場者がいる場合の管理サーバ50の動作の説明図である。
 図7に示すように、管理サーバ50のカメラ情報取得部52(図3参照)は、カメラ10が撮影した画像をカメラ10から取得する(S201)。そして、管理サーバ50の画像解析部53(図3参照)は、取得した画像情報を解析することで、ロビーエリア101から退場する退場者を判別するとともに、退場者の顔の特徴量を抽出する(S202)。
 その後、管理サーバ50の呼出情報管理部55(図3参照)は、呼出管理テーブル500を参照して、呼出管理テーブル500にて管理される顔の特徴量と、退場者の顔の特徴量との比較を行う(S203)。そして、呼出情報管理部55は、呼出管理テーブル500にて管理される顔の特徴量に、退場者の顔の特徴量に該当する番号があるか否かを判定する(S204)。ここで、退場者の顔の特徴量に該当する番号がない場合(S204にてNo)、処理を終了する。
 一方で、呼出情報管理部55は、退場者の顔の特徴量に該当する番号がある場合(S204にてYes)、その番号の「ステータス」を変更し、「呼出可否」を「不可」に設定する(S205)。ここで、呼出情報管理部55は、退場者が撮影された画像情報に第1カメラ11を特定するカメラ情報が関連付けられていた場合には、ステータスを「外出」に設定する。一方、呼出情報管理部55は、退場者が撮影された画像情報に第2カメラ12を特定するカメラ情報が関連付けられていた場合には、ステータスを「トイレ」に設定する。
 なお、上述した例において、呼出情報管理部55は、画像解析部53によって退場者と判定された顧客がいる場合に、その顧客の番号を「不可」に設定しているが、この態様だけに限定されない。例えば、退場者と判定された顧客の番号と、その番号が退場者であるというステータスの情報(例えば、外出やトイレの表示)とを、呼出端末30の呼出画面300に表示する。そして、呼出情報管理部55は、退場者と判定された顧客の呼出を行うか、退場者と判定された顧客の順番を飛ばすかの判断を窓口102の呼出端末30にて操作者から受け付ける。そして、呼出情報管理部55は、受け付けた情報に基づいて、「呼出可否」の「不可」または「可」の設定を行うようにしても良い。
 次に、退場していた顧客がロビーエリア101に再び戻った場合における、管理サーバ50の動作を説明する。
 図8は、入場者がいる場合の管理サーバ50の動作の説明図である。
 図8に示すように、管理サーバ50のカメラ情報取得部52は、カメラ10が撮影した画像をカメラ10から取得する(S301)。そして、管理サーバ50の画像解析部53は、取得した画像情報を解析することで、ロビーエリア101に入場する入場者を判別するとともに、入場者の顔の特徴量を抽出する(S302)。
 その後、管理サーバ50の呼出情報管理部55は、呼出管理テーブル500を参照して、呼出管理テーブル500にて管理される顔の特徴量と、入場者の顔の特徴量との比較を行う(S303)。そして、呼出情報管理部55は、呼出管理テーブル500にて管理される顔の特徴量に、入場者の顔の特徴量に該当する番号があるか否かを判定する(S304)。ここで、入場者の顔の特徴量に該当する番号がない場合(S304にてNo)、処理を終了する。
 一方で、呼出情報管理部55は、入場者の顔の特徴量に該当する番号がある場合(S304にてYes)、その番号の「ステータス」を変更し、「呼出可否」を「可」に設定する(S305)。ここで、呼出情報管理部55は、入場者の番号が順番として飛ばされていた場合には「ステータス」を「スキップ」に設定する。また、呼出情報管理部55は、入場者の番号が順番として飛ばされていない場合には「ステータス」を「未処理」に設定する。
 次に、呼出情報管理部55が表示する呼出画面300の変形例について説明する。
 図9は、呼出情報管理部55が作成する呼出画面300の変形例である。
 図9に示す変形例の呼出画面300の基本構成は、図5を参照しながら説明した呼出画面300と同様である。ただし、変形例の呼出画面300では、順番を飛ばされた番号の顧客がロビーエリア101に戻ったことを特定できた場合、その番号に対応する番号表示312を、操作者による操作を介さず、番号リスト310に自動的に表示する。この場合に、番号リスト310では、番号の数字の順ではなく、戻ってきた顧客の番号の番号表示312を、他の番号表示312に割り込ませて表示する。これによって、呼出端末30の操作者は、順番が飛ばされていた顧客が戻ってきた場合に、その番号を呼出やすくなる。
 また、変形例の呼出画面300にも、スキップボタン342が表示される。変形例において、スキップボタン342は、強調表示350がされた番号表示312の番号を呼び出さずに、他の番号表示312の番号を呼出の対象として指定する場合に用いることができる。上記のとおり、呼出画面300では、順番が飛ばされた顧客が戻ってくることで、戻ってきた顧客の番号表示312が番号リスト310に表示される。ここで、戻ってきた顧客の後に、待ち時間が比較的長い顧客が存在しているケースが想定される。例えばこのような場合に、呼出端末30の操作者は、戻ってきた顧客の番号を飛ばして、待ち時間が比較的長い顧客を先に呼び出したいと考える場合がある。このような場合に、スキップボタン342は、用いられる。
<第2実施形態>
 第2実施形態の管理システム1の基本構成は、第1実施形態と同様である。なお、第2実施形態において、第1実施形態と同様な構成については、同一の符号を付して、その詳細な説明を省略する。
 第2実施形態の管理システム1において、発券機20には、カメラ部26が設けられていない。そして、第2実施形態の管理システム1では、ロビーエリア101全体を撮影するカメラ10を用いる。なお、カメラ10の数は、ロビーエリア101全体を把握することができれば、単数でも複数でも良い。そして、カメラ10は、ロビーエリア101内を撮影した撮影画像を管理サーバ50に送信する。
 管理サーバ50では、カメラ10から取得した画像を解析することで、顧客の顔の特徴量や、顧客の身体の骨格の特徴量を抽出する。管理サーバ50は、画像に映る顧客を区別して認識する。そして、管理サーバ50は、ロビーエリア101における顧客の動きを追跡する。さらに、管理サーバ50は、カメラ10が撮影した画像において、ロビーエリア101にいる顧客のみならず、発券機20、メイン出入口103およびトイレ出入口104の位置も特定する。このように、第2実施形態の管理サーバ50は、取得した画像に基づいて、どの顧客が、どのような行動をしているかということを特定する。
 そして、第2実施形態の管理サーバ50は、顧客が発券機20を操作して番号を発行した場合に、その顧客の顔や骨格の特徴量の情報と、発券機20にて発行した番号の番号情報とを関連付ける。さらに、管理サーバ50は、カメラ10によってロビーエリア101にいる顧客を追跡することで、その顧客がロビーエリア101から退場したか否かも判定する。
 第2実施形態の管理サーバ50では、上述のとおり、カメラ10によってロビーエリア101の顧客の追跡することで得られる情報に、発券機20の番号を関連付けて、呼出管理テーブル500にて管理する。
 図10は、第2実施形態の発券機20の動作の説明図である。
 図10に示すように、第2実施形態の管理サーバ50は、メイン出入口103の入場者が撮影された画像情報を取得したか否かを判断する(S401)。管理サーバ50は、入場者が撮影された画像情報を取得していない場合(S401にてNo)、再びS401戻って、判断を継続する。
 一方、管理サーバ50は、入場者が撮影された画像情報を取得したと判断した場合(S401にてYes)、呼出管理テーブル500を参照して、呼出管理テーブル500にて管理される顔の特徴量と、入場者の顔の特徴量との比較を行う(S402)。
 そして、管理サーバ50は、呼出管理テーブル500にて管理される顔の特徴量に、入場者の顔の特徴量に該当する番号があるか否かを判定する(S403)。入場者の顔の特徴量に該当する番号がない場合(S403にてNo)、管理サーバ50は、その後にロビーエリア101全体を撮影した画像を解析し、ロビーエリア101にいる入場者の追跡を行う(S404)。
 そして、管理サーバ50は、入場者が発券機20の発券操作をしているか否かを判断する(S405)。具体的には、管理サーバ50は、ロビーエリア101において発券機20の位置に入場者がいること、その発券機20が操作されていることに基づいて、入場者が発券機20を操作していると判断する。管理サーバ50は、入場者が発券機20を操作してないと判断した場合(S405にてNo)、S404に戻って、入場者の追跡を行う。
 一方、管理サーバ50は、入場者が発券機20を操作していると判断した場合(S405にてYes)、発券部25が発券した番号票200が抜き取られたか否かを判断する(S406)。管理サーバ50は、番号票200が抜き取られていないと判断した場合(S406にてNo)、再び406に戻って、番号票200が抜き取られたか否かの判断を継続する。
 管理サーバ50は、番号票200が抜き取られたと判断した場合(S406にてYes)、入場者の顔や骨格の特徴量情報、および番号票200の番号情報を、呼出管理テーブル500に登録する(S407)。
 また、管理サーバ50は、S403において、入場者の顔の特徴量に該当する番号があると判断した場合(S403にてYes)、その番号の「ステータス」を変更し、「呼出可否」を「可」に設定する(S408)。この状況は、既に受付を行った顧客が、ロビーエリア101を退場し、その後、再びロビーエリア101に戻ってきた場合である。この場合、管理サーバ50は、ロビーエリア101に戻ってきた顧客の番号に対して、「呼出可否」を「可」とする設定を行うことで、その番号が再び呼出の対象となるようにする。
<第3実施形態>
 次に、第3実施形態の管理システム1について説明する。なお、第3実施形態において、他の実施形態と同様な構成については、同一の符号を付して、その詳細な説明を省略する。
 図11は、第3実施形態の管理システム1の概要を説明する図である。
 図11に示すように、第3実施形態の管理システム1は、カメラ10と、呼出端末30と、番号表示器40と、管理サーバ50と、顧客が所有する情報端末装置60とを備える。つまり、第3実施形態の管理システム1は、発券機20に代えて、情報端末装置60を備えている点で、第1実施形態の管理システム1とは異なる。そして、第3実施形態では、情報端末装置60が、発券機20のように、交付手段の一例として機能する。
 情報端末装置60は、スマートフォンなどの携帯電話、タブレット型端末などの携帯端末機器など、ユーザが持ち歩くことが可能な装置を用いることができる。そして、情報端末装置60は、ネットワークを介して、管理サーバ50と通信が可能になっている。
 情報端末装置60のハードウェア構成は、上述した発券機20のハードウェア構成と同様である。そして、情報端末装置60は、情報を表示するとともに入力を受け付けるタッチパネル61と、対象を撮影するカメラ部62とを有する。
 第3実施形態の管理システム1では、管理サーバ50は、顧客が銀行などの店舗の外にいる状態で、顧客が所有する情報端末装置60を介して、紙の番号票200に相当する電子番号票を発行する。
 また、管理サーバ50は、情報端末装置60にて電子番号票の発行が行われる際に、情報端末装置60を操作する顧客の顔の画像を取得する。情報端末装置60は、情報端末装置60に設けられるカメラ部62にて撮影した顧客の顔の画像情報を、発行された番号の番号情報に関連付けて、管理サーバ50に送信する。
 そして、管理サーバ50は、情報端末装置60から取得した画像情報を解析することで、画像情報から顔の特徴量を抽出する。管理サーバ50は、抽出した顔の特徴量の情報に、番号情報を関連付けて、呼出管理テーブル500にて管理する。
 以上のように構成される第3実施形態の管理システム1では、顧客が店舗に入場することで、第1実施形態や第2実施形態と同様に、呼出に関する処理が行われる。具体的には、第3実施形態の管理システム1では、カメラ10にて撮影されたロビーエリア101の画像における顧客の顔の特徴量の情報と、顧客の情報端末装置60から取得した顔の特徴量の情報とを比較することで、入場者や退場者の判定を行う。これによって、呼出対象となる顧客の番号ごとに、通常の呼出や、外出やトイレなどの不在時の取扱いや、退場して再びロビーエリア101に戻ったときの取扱いなど、呼出管理テーブル500を用いた各種情報の管理が行われる。
 なお、上述の例では、管理サーバ50は、情報端末装置60にて電子番号票の発行が行われた際に、顧客の顔の画像を取得し、取得した顔の画像から抽出した顔の特徴量の情報を管理しているが、この態様に限定されない。
 例えば、管理サーバ50は、情報端末装置60にて電子番号票の発行が行われるよりも以前に、顧客の顔の画像の取得や、取得した顔の画像に基づく顔の特徴量の抽出を予め行い、それらの情報を管理していても良い。
 以上、本実施形態について説明したが、本発明の技術的範囲は前述した実施の形態に記載の範囲に限定されない。上述した実施形態に、種々の変更または改良を加えたものも、本発明の技術的範囲に含まれることは、特許請求の範囲の記載から明らかである。
 例えば、第1実施形態~第3実施形態において、メイン出入口103にて、入場者を撮影するカメラ10と、退場者を撮影するカメラ10とは、それぞれ別々に設置されていても良い。この場合、入場者を撮影するカメラ10は、メイン出入口103にてロビーエリア101に向かって顔が正面を向く顧客を撮影できるように設置する。そして、入場者を撮影するカメラ10にて正面を向く顧客を、入場者と判定する。退場者を撮影するカメラ10についても同様である。
 さらに、上述した管理システム1では、画像情報から顧客の顔の特徴量を抽出することで、画像情報に映る顧客を個別に特定しているが、この例に限定されない。管理システム1では、画像情報から顧客の骨格の特徴量を抽出し、画像情報に映る顧客を個別に特定しても良い。例えば、管理システム1は、最初に入店した際に、顧客の骨格の特徴量を検出し、骨格の特徴量情報に番号情報を関連付けて、顧客の追跡を行うことで、顧客がロビーエリア101にいることを認識しても良い。さらに、管理システム1では、顧客が外出したり、トイレ等に行ったりすることによって、その顧客の骨格を検知することができなくなるタイミングで、顧客の顔の特徴量の情報を取得するようにしても良い。
 また、第1実施形態~第3実施形態の呼出管理テーブル500では、発券機20や情報端末装置60にて発行した番号を各種の情報に関連付けて、呼出に必要な情報を管理しているが、この態様に限定されない。例えば、呼出管理テーブル500にて、顧客の名前、所定の名称、または、記号など、各顧客を識別可能な識別情報を各種の情報に関連付けて、呼出に必要な情報を管理しても良い。
 また、第1実施形態および第2実施形態において、管理サーバ50の機能の一部または全部を、発券機20が備えていても良い。
 さらに、本実施形態の管理サーバ50や発券機20を実現するプログラムは、通信手段により提供することはもちろん、CD-ROM等の記録媒体に格納して提供することも可能である。
 なお、上述のとおり、種々の実施形態や変形例についても言及したが、一の実施形態や一の変形例の内容を、他の実施形態等に応用すること、他の実施形態等に組み合わせること、一部を入れ替えることは、本書に言及がない場合であっても可能である。
1…管理システム、10…カメラ、11…第1カメラ、12…第2カメラ、20…発券機 26…カメラ部、30…呼出端末、40…番号表示器、50…管理サーバ、51…発券機情報取得部、52…カメラ情報取得部、53…画像解析部、54…処理情報取得部、55…呼出情報管理部、300…呼出画面

Claims (10)

  1.  所定の場所に入場する入場者と当該所定の場所から退場する退場者とを、撮影画像を用いて特定する特定手段と、
     前記特定手段により特定された前記入場者の情報と前記退場者の情報とに基づいて、前記所定の場所にいる者を呼び出すための呼出情報を作成する作成手段と、
    を備える、ことを特徴とする管理システム。
  2.  前記作成手段は、前記退場者に対する呼出が行われないようにする内容の前記呼出情報を作成する、ことを特徴とする請求項1に記載の管理システム。
  3.  前記作成手段は、前記退場者が前記所定の場所に再び入場した場合に、当該退場者を前記所定の場所にいる者とする内容の前記呼出情報を作成する、ことを特徴とする請求項1または2に記載の管理システム。
  4.  呼出を行う操作者が操作する操作画面を表示する表示手段を備え、
     前記表示手段は、前記退場者の情報を用いて特定された、前記所定の場所にいない不在者に関する情報を、前記操作画面に表示する、ことを特徴とする請求項1乃至3の何れか1項に記載の管理システム。
  5.  呼出を行う操作者が操作する操作画面を表示する表示手段を備え、
     前記表示手段は、予め定められた呼出の順番を飛ばされた前記退場者がいる場合に、退場したままの退場者に関する表示と、前記所定の場所に再び入場した退場者に関する表示とを、異なる表示態様で表示する、ことを特徴とする請求項1乃至3の何れか1項に記載の管理システム。
  6.  前記入場者に識別情報を交付する交付手段を備え、
     前記作成手段は、前記入場者の情報および前記退場者の情報に、前記識別情報を関連付けて前記呼出情報を作成する、ことを特徴とする請求項1乃至5の何れか1項に記載の管理システム。
  7.  前記交付手段は、前記入場者を撮影する撮影手段を備え、
     前記作成手段は、前記撮影手段にて撮影した前記入場者の撮影画像と、前記識別情報とを関連付ける、ことを特徴とする請求項6に記載の管理システム。
  8.  前記交付手段は、前記入場者が所有する情報端末装置である、ことを特徴とする請求項6または7に記載の管理システム。
  9.  撮影画像を用いて特定された、所定の場所に入場する入場者と当該所定の場所から退場する退場者との情報を取得する取得手段と、
     前記取得手段が取得した前記入場者の情報と前記退場者の情報とに基づいて、前記所定の場所にいる者を呼び出すための呼出情報を作成する作成手段と、
    を備える、ことを特徴とする管理装置。
  10.  コンピュータに、
     撮影画像を用いて特定された、所定の場所に入場する入場者と当該所定の場所から退場する退場者との情報を取得する機能と、
     取得した前記入場者の情報と前記退場者の情報とに基づいて、前記所定の場所にいる者を呼び出すための呼出情報を作成する機能と、
    を実現させることを特徴とするプログラム。
PCT/JP2021/032293 2020-09-25 2021-09-02 管理システム、管理装置およびプログラム WO2022064990A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-161381 2020-09-25
JP2020161381A JP2022054282A (ja) 2020-09-25 2020-09-25 管理システム、管理装置およびプログラム

Publications (1)

Publication Number Publication Date
WO2022064990A1 true WO2022064990A1 (ja) 2022-03-31

Family

ID=80845175

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/032293 WO2022064990A1 (ja) 2020-09-25 2021-09-02 管理システム、管理装置およびプログラム

Country Status (2)

Country Link
JP (1) JP2022054282A (ja)
WO (1) WO2022064990A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004348765A (ja) * 2004-08-06 2004-12-09 Koichi Yoshii 予約受付方法、事前呼出方法及びそのプログラム
JP2015232791A (ja) * 2014-06-10 2015-12-24 パナソニックIpマネジメント株式会社 利用者管理装置、利用者管理システムおよび利用者管理方法
JP2016143255A (ja) * 2015-02-03 2016-08-08 日本ソフトウェアマネジメント株式会社 装置およびプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004348765A (ja) * 2004-08-06 2004-12-09 Koichi Yoshii 予約受付方法、事前呼出方法及びそのプログラム
JP2015232791A (ja) * 2014-06-10 2015-12-24 パナソニックIpマネジメント株式会社 利用者管理装置、利用者管理システムおよび利用者管理方法
JP2016143255A (ja) * 2015-02-03 2016-08-08 日本ソフトウェアマネジメント株式会社 装置およびプログラム

Also Published As

Publication number Publication date
JP2022054282A (ja) 2022-04-06

Similar Documents

Publication Publication Date Title
JP6448331B2 (ja) 勤怠監視装置、勤怠管理方法、勤怠管理システムおよびプログラム
JP6193519B1 (ja) 窓口支援システム及び窓口支援プログラム
WO2017221924A1 (ja) 窓口受付システムおよびサービスロボット
JP6241666B2 (ja) 利用者管理装置、利用者管理システムおよび利用者管理方法
JPH10246041A (ja) 無人受付システム
JP7400862B2 (ja) 情報処理装置
JP2017222021A (ja) 店舗受付システム
JP2017111489A (ja) 宿泊手続き補助システム
JP2016126414A (ja) 顔照合システムおよび娯楽施設のサービス提供方法
AU2013267154B2 (en) Video ticket office
WO2022064990A1 (ja) 管理システム、管理装置およびプログラム
JP5054067B2 (ja) 自動受付システム
JP2013033417A (ja) 端末監視装置及び端末監視システム並びにプログラム
JP2020013316A (ja) 順番管理システム、順番管理方法及び順番管理プログラム
JP2009163417A (ja) 自動受付システム
JP6841358B1 (ja) 施設利用管理システム、施設利用管理方法、及び施設利用管理プログラム
JP2008079259A (ja) 集合住宅インターホンシステム
JP5081580B2 (ja) 受付案内装置
KR200368741Y1 (ko) 무인 객실용 자판기 시스템
JP5264142B2 (ja) 受付案内装置
KR100902039B1 (ko) 고객 맞춤형 안내 시스템
JP6979679B2 (ja) 空席検知机
JP5422707B2 (ja) 受付案内装置
JP2020077205A (ja) 受付システムおよび窓口操作機
JP4876928B2 (ja) 発券装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21872121

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21872121

Country of ref document: EP

Kind code of ref document: A1