WO2017142191A1 - 포스 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법 - Google Patents

포스 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법 Download PDF

Info

Publication number
WO2017142191A1
WO2017142191A1 PCT/KR2016/015528 KR2016015528W WO2017142191A1 WO 2017142191 A1 WO2017142191 A1 WO 2017142191A1 KR 2016015528 W KR2016015528 W KR 2016015528W WO 2017142191 A1 WO2017142191 A1 WO 2017142191A1
Authority
WO
WIPO (PCT)
Prior art keywords
transaction
pos
information
image
server
Prior art date
Application number
PCT/KR2016/015528
Other languages
English (en)
French (fr)
Inventor
마송훈
김인호
한재웅
Original Assignee
제이씨스퀘어주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020160017879A external-priority patent/KR20170096463A/ko
Priority claimed from KR1020160039208A external-priority patent/KR102107533B1/ko
Application filed by 제이씨스퀘어주식회사 filed Critical 제이씨스퀘어주식회사
Publication of WO2017142191A1 publication Critical patent/WO2017142191A1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00Payment architectures, schemes or protocols
    • G06Q20/08Payment architectures
    • G06Q20/20Point-of-sale [POS] network systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/02Feature extraction for speech recognition; Selection of recognition unit
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the present invention relates to a system and method for remotely monitoring a merchandise transaction occurring in a store such as a shopping mall, a restaurant, a tavern, a convenience store, and more particularly, to a transaction history information and a camera provided by a POS terminal installed in a store.
  • the present invention relates to a system and method for remotely monitoring a merchandise transaction in a store by using an image captured around a POS terminal.
  • losses occur in stores such as shopping malls, restaurants, taverns, and convenience stores, which are caused by the following causes. Loss of opportunity, loss of merchandise in the store due to customer injustice or injustice of the store staff, and settlement loss caused by miscalculation or miscalculation by the cashier.
  • the inventory loss and opportunity loss were solved by the introduction of a system to computerize product management and customer management using POS terminals in each store, and the loss of product was solved by installing surveillance cameras near the store shelves in the store. have.
  • the cashier staff withdraws the cash of the cancellation amount in the process of intercepting the payment or canceling the card payment without entering the product code (manufacturer code, item code, etc.) purchased by the customer at the POS terminal.
  • product code manufactured by the customer at the POS terminal.
  • An object of the present invention a remote monitoring system and method for merchandise transaction remote monitoring using a POS terminal and a camera that allows the administrator to remotely monitor the transaction history occurring in the store in real time and to check the image taken when the transaction occurs if necessary. To provide.
  • Another object of the present invention is to provide a system and method for remote monitoring of a merchandise transaction in a store using a POS terminal and a camera, which can remotely monitor and prevent mistakes and misconduct of cashier employees.
  • the object is, according to the present invention, an image processing server for collecting the captured image from the camera taking a picture of the surroundings of the POS terminal installed in the store and store the captured image matched with the time information; And receiving transaction history information accompanying the product sale from a POS server that processes payment for the product sale generated in the POS terminal, and provides the transaction history information to the manager terminal of the store by interworking with the image processing server. It is achieved by a product transaction remote monitoring system of a store using a POS terminal and a camera including a service providing server.
  • the system is installed in the manager terminal and receives the transaction history information from the service providing server to display on the screen of the manager terminal, the manager requests the image information about the transaction history information from the manager If received through the terminal, based on the transaction occurrence time included in the transaction history information to the image processing server or the service providing server requesting the corresponding image information and the service application receives the requested image information; further includes.
  • the service providing server determines whether the transaction history information received from the POS server is a normal transaction or an abnormal transaction, and the manager terminal through the service application only the transaction history information for the abnormal transaction; To transmit.
  • the service providing server checks the transaction history information received from the POS server, and determines that the transaction is abnormal when any one of order cancellation, transaction cancellation, and return occurs.
  • the service providing server determines whether it is a normal transaction or an abnormal transaction, and if it is determined that the abnormal transaction (information on "abnormal") Transaction notification message ') is transmitted to the manager terminal.
  • the system is installed in the manager terminal and receives the abnormal transaction notification message and the transaction history information from the service providing server to display on the screen of the manager terminal, the manager in response to the abnormal transaction notification message
  • the image information is transmitted to the image processing server or the service providing server based on the transaction occurrence time included in the transaction history information.
  • the service application receives the request and the requested image information.
  • the image processing server when the image processing server requests the image information from the service application or the service providing server, the image processing server extracts image information corresponding to the transaction occurrence time based on the time information on the stored captured image. Send to the manager terminal through a service application.
  • the image processing server extracts image information from the point in time before the transaction occurrence time based on the time information on the stored captured image and transmits the image information to the manager terminal through the service application in a streaming manner. .
  • the image processing server monitors the state of the POS money connection connected to the POS terminal by comparing and analyzing the photographed image with a preset reference image.
  • the image processing server extracts a certain region including the POS money tradition from the photographed image and then compares and analyzes the predetermined region with the reference image to monitor the state of the POS money tradition.
  • the image processing server transmits index information corresponding to the captured image to the service providing server when it is determined that the POS monetary is opened as a result of the monitoring.
  • the service providing server determines whether the opening of the POS monetary tradition is a normal transaction based on the transaction history information received from the POS server, and the normal transaction is performed. If it is determined not to transmit a notification message for this to the manager terminal.
  • the service providing server by querying the transaction history information received from the POS server, even if there is no transaction history information corresponding to the opening time of the POS monetary included in the index information or even if there is the transaction history information card transactions If it is determined that the opening of the POS monetary is not due to the normal transaction.
  • the system is installed in the manager terminal and receives the notification message from the service providing server to display on the screen of the manager terminal, if the request for the corresponding video information from the manager through the manager terminal, And a service application requesting the corresponding image information from the image processing server or the service providing server based on the opening occurrence time of the POS monetary and receiving the requested image information.
  • the image processing server when there is a request for the image information from the service application or the service providing server, the image information corresponding to the opening occurrence time of the POS money transfer based on the time information on the stored captured image. Extract it and transmit it to the manager terminal through the service application.
  • an image processing server collects captured images from a camera photographing the surroundings of a POS terminal installed in a store, and stores the captured images by matching the time information; Receiving, by the service providing server, transaction details information accompanying the product sale from a POS server that processes payment for the product sale generated at the POS terminal; And providing, by the service providing server, the transaction history information to the manager terminal of the store, by a method of remotely monitoring a product transaction of a store using a POS terminal and a camera.
  • the method includes the steps of receiving a transaction history information from the service providing server, the service application installed in the manager terminal on the screen of the manager terminal; And receiving a request for image information about the transaction history information from the manager through the manager terminal, and the service application transmits to the image processing server or the service providing server based on a transaction occurrence time included in the transaction history information. Requesting the corresponding video information.
  • the service providing server determines whether the normal transaction or abnormal transaction with respect to the transaction history information received from the POS server, the abnormal transaction Only the transaction history information is transmitted to the manager terminal through the service application.
  • the service providing server determines whether the normal transaction or abnormal transaction with respect to the transaction history information received from the POS server, the abnormal transaction If it is determined that the transmission of the abnormal transaction (hereinafter referred to as "unusual transaction notification message") transmits to the manager terminal.
  • the service application installed in the manager terminal receiving the abnormal transaction notification message and the transaction history information from the service providing server and displaying on the screen of the manager terminal;
  • the manager when the service application receives the abnormal transaction notification message, the manager receives a request for image information on the transaction history information of the abnormal transaction through the manager terminal. Requesting the corresponding image information from the image processing server or the service providing server based on the included transaction generation time.
  • the image processing server when there is a request for the image information from the service application or the service providing server, acquires image information corresponding to the transaction generation time based on the time information on the stored image. Extracting and transmitting to the manager terminal through the service application.
  • the present invention by providing the transaction history information generated in the POS terminal at the time of merchandise sales to the manager terminal in real time through the service application, by extracting and providing the video information corresponding to the time when the transaction occurs in response to the request of the manager terminal, You can monitor the transaction history in the store in real time from the remote and if necessary, you can check the video taken when the transaction occurs.
  • the present invention when an abnormal transaction such as a transaction cancellation, order cancellation, return, payment change in the POS terminal occurs, pushes the abnormal transaction notification message to the manager terminal through the service application in real time notification, as well as the request of the manager terminal Accordingly, by extracting and providing video information corresponding to the time when an abnormal transaction occurred, it is possible to remotely monitor and prevent mistakes or misconduct of cashier employees.
  • an abnormal transaction such as a transaction cancellation, order cancellation, return, payment change in the POS terminal occurs
  • FIG. 1 is a block diagram illustrating a system for monitoring a merchandise transaction remotely according to an embodiment of the present invention.
  • FIG. 2 illustrates an example of a screen for requesting image information regarding transaction history information of an abnormal transaction from a manager terminal of the merchandise transaction remote monitoring system of FIG. 1.
  • FIG. 3 is a flowchart illustrating a method for remote monitoring of a merchandise transaction in a store according to an embodiment of the present invention.
  • FIG. 4 is a block diagram illustrating a system for monitoring a merchandise transaction remotely using a POS terminal and a camera according to another exemplary embodiment of the present invention.
  • FIG. 5 is a diagram illustrating a configuration of an image processing server in the product transaction remote monitoring system of FIG. 4.
  • FIGS. 1 to 3 a system and a method for remote monitoring of a product transaction in a store using a POS terminal and a camera according to an embodiment of the present invention will be described in detail with reference to FIGS. 1 to 3.
  • FIG. 1 is a block diagram illustrating a system for monitoring a merchandise transaction remotely according to an embodiment of the present invention.
  • the product transaction remote monitoring system includes a POS terminal 10, a camera 20, a POS server 100, an image processing server 200, and a service providing server 300 provided at a checkout counter of each store.
  • the service application 400 installed in the manager terminal 410.
  • the "store” includes all places where goods are sold, such as restaurants, taverns, and convenience stores, and the "goods transaction” includes not only tangible goods but also transactions for intangible goods.
  • the POS terminal 10 is a device that collects, stores, and transmits product information or customer information at the point of sale of the product, and delivers transaction details such as a product name or price at the point of sale to the POS server 100 in combination with a payment method. Collect and record.
  • POS terminal 10 may be provided at the cash register in the form of a small terminal that can be installed or portable in each store.
  • the POS terminal 10 outputs a reader for recognizing a barcode imprinted on a product, an input key for inputting a required number such as a barcode or a price of a product, and information input from the reader and the input key for the employee to check. It consists of a print that prints a force monitor and a receipt.
  • the camera 20 is for monitoring the POS terminal 10 and the staff who manipulates the POS terminal 10, and is usually configured as a closed circuit television (CCTV) system.
  • the camera 20 photographs the surroundings of the POS terminal 10 and transmits the captured image to the image processing server 200.
  • the camera 20 in the present embodiment may be installed 1: 1 with the POS terminal 10, and may also transmit a management number of the camera 20 when transferring the captured image to the image processing server 200.
  • the management number of the camera 20 may be an IP (Internet Protocol) address.
  • the POS server 100 processes payment for merchandise sales generated at the POS terminal 10 of each store. Specifically, the POS payment information storage unit 110 of the POS server 100 receives and stores transaction history information accompanying the sale of goods from the POS terminal 10, and the transaction history transmission unit 120 of the POS server 100. ) Transmits the transaction history information stored in the POS payment information storage unit 110 to the service providing server 300.
  • the transaction history transmitter 120 may transmit transaction history information received from the POS terminal 10 together with the management number of the corresponding POS terminal 10.
  • the image processing server 200 is a device that receives recording images of the camera 10 and supports recording, searching, and playback.
  • the image processing server 200 may be implemented as a network video recorder (NVR) system.
  • NVR system receives digital image signal directly from IP network and processes it, so it can be installed wherever network exists and it has a big advantage over DVR system that can't escape from camera installation site.
  • the NVR system can install an infinite number of cameras within the network bandwidth range, and if only a network connection is provided, the NVR system can automatically connect only by registering information of the camera, thereby reducing the cost of installing and maintaining the system.
  • the image storage unit 210 of the image processing server 200 collects captured images from the camera 20 and matches the collected captured images with time information and stores them in a database (DB) 230.
  • the time information is included in the captured image and may be performed to extract and match the time information so that the captured image can be searched later.
  • the image extracting unit 220 of the image processing server 200 When the image extracting unit 220 of the image processing server 200 receives a request for image information with respect to the stored captured image, the image extracting unit 220 extracts image information at a desired time point based on the time information, and passes the manager terminal 410 through the service application 400. To send).
  • the image extracting unit 220 of the image processing server 200 requests a time when a corresponding transaction occurs, that is, a predetermined time before a transaction occurrence time (for example, 30 seconds) when image information regarding arbitrary transaction history information is requested. Extracts the video information from the transmission to the manager terminal 410 through the service application 400.
  • the request for the image information is performed by the service application 400 of the manager terminal 410, the image processing server 200 receives a request for the image information directly from the service application 400 or the service providing server 300 The request for image information may be received via.
  • the image processing server 200 may be physically installed in a store or alternatively may be installed in a place where the service providing server 300 is located. Furthermore, the image processing server 200 may be implemented as one integrated server together with the service providing server 300.
  • the service providing server 300 receives the transaction history information generated in the POS terminal 10 from the POS server 200 and provides the transaction history information to the manager terminal 410.
  • the transaction history information includes not only a product name, a price, a payment amount, and a payment type, but also information on a transaction type (order cancellation, transaction cancellation, refund, etc.) and transaction occurrence time.
  • the service providing server 300 determines whether it is a normal transaction or an abnormal transaction with respect to the transaction history information received from the POS server 100, and sets or provides a service of the service application 400 of the manager terminal 410. According to the setting of the server 300, only the transaction history information may be transmitted to the manager terminal 410 through the service application 400.
  • the normal transaction refers to a transaction in which a normal cash payment or a card payment is made at the point of sale of the product
  • an abnormal transaction includes a transaction such as an order cancellation, a transaction cancellation (refund), a return, and a payment change.
  • the service providing server 300 may check the transaction history information received from the POS server 100, and may determine an abnormal transaction when any one of order cancellation, transaction cancellation, and return occurs.
  • the service providing server 300 determines whether the transaction history information received from the POS server 100 is a normal transaction or an abnormal transaction, and if it is determined that the transaction is abnormal, occurrence of an abnormal transaction together with the corresponding transaction history information.
  • Message (hereinafter referred to as an "unusual transaction notification message") can be transmitted / pushed to the manager terminal 410.
  • the manager terminal 410 is a terminal possessed by a manager of a store, and is preferably provided as a smartphone that can be always portable and can be checked in real time. However, the manager terminal 410 is not limited thereto. If the terminal can be applied regardless of its type.
  • the manager of a store can be the store's owner, shopkeeper, or manager.
  • information regarding the manager terminal 410 is registered in advance in the service providing server 300.
  • the manager terminal 410 is installed in the process of installing a service application 400 in the manager terminal 410 and proceeding with membership.
  • the information related to the POS terminal 10 may be matched with and stored in a database of the service providing server 300.
  • the information about the manager terminal 410 is registered in advance in the image processing server 200, or the image processing server 200 shares information about the manager terminal 410 pre-registered in the service providing server 300 can do.
  • the service application 400 is installed in the manager terminal 400 and receives transaction history information generated in the POS terminal 10 from the service providing server 300 and displays it on the screen of the manager terminal 410. In addition, the service application 400 receives the abnormal transaction notification message from the service providing server 300 to display on the screen of the manager terminal 410.
  • the service application 400 may receive transaction history information for all transactions occurring in the POS terminal 10 installed in the store, but may be set to receive transaction history information only when an abnormal transaction occurs.
  • the service application 400 may provide a transaction history reception setting screen, and may be configured to receive transaction history information for all transactions in the transaction history reception setting screen or to receive only transaction history information for abnormal transactions.
  • the service application 400 When the service application 400 receives a request for image information from the manager through the manager terminal 410 with respect to the transaction history information displayed on the screen of the manager terminal 410, the service application 400 is based on a transaction occurrence time included in the corresponding transaction history information. Request image information from the image processing server 200 or the service providing server 300, and receives the requested image information.
  • FIG. 2 illustrates an example of a screen for requesting image information regarding transaction history information of an abnormal transaction from a manager terminal of the merchandise transaction remote monitoring system of FIG. 1.
  • the transaction history information 411a includes information such as a business name, a business number, an address, a phone number, a date and time (transaction time), a transaction type, and a POS number (which is a management number of a POS terminal).
  • the video request 'button 411b is selected and inputted, the video information regarding the transaction history information 411a displayed on the screen is requested.
  • the 'confirmation' button 411c is selected on the screen 411, the screen on which the transaction history information 411a is displayed ends.
  • the image processing server 200 extracts the image information corresponding to the transaction occurrence time based on the time information of the stored captured image, thereby streaming the service application 400. Through the transmission to the manager terminal 410.
  • the 'image information corresponding to the transaction occurrence time' may be image information from a predetermined time (eg, 30 seconds before) the transaction occurrence time.
  • the image processing server 200 may directly transmit the corresponding image information to the manager terminal 410.
  • the image processing server 200 may transmit the corresponding image information to the service providing server 300, and the service providing server 300 may refer to the manager terminal ( 410 may be transmitted.
  • the product transaction remote monitoring system of a store having the above configuration has real-time transaction history information generated in the POS terminal 10 at the point of sale of the product to the manager terminal 410 through the service application 400. And by extracting and providing the video information corresponding to the time when the transaction occurs in response to the request of the manager terminal 410, the manager can monitor the transaction history occurring in the store in real time from the remote and if the transaction occurs if necessary You can check the recorded video.
  • the product transaction remote monitoring system of the store when abnormal transactions such as transaction cancellation, order cancellation, return, etc. occur at the POS terminal 10, an abnormal transaction notification message through the service application 400.
  • an abnormal transaction notification message By pushing to the manager terminal 410, as well as real-time notification, by extracting and providing the video information corresponding to the time when the abnormal transaction occurs in response to the request of the manager terminal 410 to remotely monitor and advance the mistake or cheating of the cashier staff It can be prevented.
  • FIG. 3 is a flowchart illustrating a method for remote monitoring of a merchandise transaction in a store according to an embodiment of the present invention.
  • step S100 POS server 100 receives and stores the transaction history information according to the product sales payment from the POS terminal of each store.
  • step S101 the image processing server 200 supports the search and playback of the image by collecting the captured image from the camera taking a picture of the surroundings of the POS terminal and matching and storing the collected captured image.
  • Steps S100 and S101 may be viewed as a process of individually collecting and storing information according to whether or not any one of them is first performed and interlocked with each other, depending on whether they are generated in each POS terminal and a camera.
  • POS server 100 transmits the transaction history information received from the POS terminal to the service providing server 300.
  • the service providing server 300 determines whether the normal transaction or abnormal transaction for the transaction history information received from the POS server 100.
  • the service providing server 300 transmits the transaction history information only to the abnormal transaction through the service application 400 to the corresponding manager terminal. Unlike this, the service providing server 300 transmits transaction history information to the corresponding manager terminal through the service application 400 for all transactions occurring at the POS terminal regardless of whether the transaction is abnormal or not.
  • the abnormal transaction notification message may be transmitted to the corresponding manager terminal for ventilation.
  • the service providing server 300 may query information about a manager or a manager terminal registered in advance, and transmit transaction history information to a manager terminal matched with a corresponding POS terminal of the corresponding store or the corresponding store.
  • the service application 400 displays the transaction history information received from the service providing server 300 on the screen of the manager terminal, and receives a request for video information about the transaction history information from the manager, transaction details
  • the video information is requested to the service providing server 300 based on the transaction occurrence time included in the information.
  • the service providing server 300 transmits the image information request received from the service application 400 to the image processing server 200.
  • the service application 400 may request image information directly from the image processing server 200 without passing through the service providing server 300.
  • the image processing server 200 extracts image information corresponding to a transaction occurrence time included in the transaction history information based on the time information on the stored captured image.
  • the image processing server 200 transmits the extracted image information to the corresponding manager terminal through the service application 400.
  • the image processing server 200 may directly transmit the extracted image information to the corresponding manager terminal, and once the extracted image information is transmitted to the service providing server 300, the service providing server 300 transmits the extracted image information to the manager terminal. You can also take
  • FIG. 4 is a block diagram illustrating a system for monitoring a merchandise transaction remotely using a POS terminal and a camera according to another exemplary embodiment of the present invention.
  • the product transaction remote monitoring system of a store includes a POS terminal 10, a POS money bank 15, a camera 20, a POS server 100, and an image processing server 200 provided at a checkout counter of each store. , The service providing server 300 and the service application 400 installed in the manager terminal 410.
  • the merchandise transaction remote monitoring system presupposes the main configuration of the above-described embodiment, but adds a configuration for monitoring the status of the POS monetary connected to the POS terminal 10. Therefore, the description of the configuration common to the above-described embodiment will be omitted, and the present embodiment will be described based on differences from the above-described embodiment.
  • the POS monetary 15 stores money and is connected to the POS terminal 10 to store money received from customers at the time of payment for merchandise sales or to operate the POS terminal 10 to pay the difference. Can be opened and closed.
  • the POS terminal 10 is provided with a button related to opening and closing of the POS monetary 15 and a button is selected, the POS monetary 15 may be automatically opened.
  • POS cash 15 is provided with a locking device in the cash transfer itself is opened and closed according to its operation.
  • the camera 20 is for monitoring the POS money transfer 15 connected to the POS terminal 10 and the employees who operate the POS terminal 10.
  • the camera 20 photographs the surroundings of the POS terminal 10 and takes the captured image into the image processing server 200. To pass.
  • the POS server 100 processes payment for merchandise sales generated at the POS terminal 10 of each store.
  • the POS server 100 receives and stores transaction history information accompanying product sales from the POS terminal 10, and transmits the stored transaction history information to the service providing server 300.
  • the POS server 100 may transmit transaction history information received from the POS terminal 10 together with the management number of the corresponding POS terminal 10.
  • FIG. 5 is a diagram illustrating a configuration of an image processing server in the product transaction remote monitoring system of FIG. 4.
  • the image processing server 200 collects and stores the captured image captured by the camera 20 with time information, and analyzes the captured image to monitor the state of the POS money transfer 15. As a result of the monitoring, when the POS monetary 15 is confirmed to be opened, the POS server 300 transmits index information corresponding to the captured image or the captured image.
  • the 'index information' includes information on identifying the photographed image, and the opening occurrence time of the POS money transfer 15.
  • the image analysis may be performed by extracting a predetermined region including the POS money transfer 15 from the captured image and comparing the extracted predetermined region with a preset reference image.
  • the image processing server 200 includes an image storage unit 210, an image analyzer 215, an image extractor 220, and a database (DB) 230 as shown in FIG. 5.
  • DB database
  • the image storage unit 210 collects the captured images from the camera and stores the captured images in the database 230 by matching the collected images with time information.
  • the time information is included in the captured image and may be performed to extract and match the time information so that the captured image can be searched later.
  • the captured image may include audio information as well as video information.
  • the image analyzer 215 compares and analyzes the photographed image collected from the camera with a reference image previously stored in the database 230 to determine whether the image corresponds to the reference image. Through this determination, the image analysis unit 215 monitors whether the POS monetary is open. In detail, the image analyzer 215 may extract a partial region including the POS money tradition from the captured image and compare and analyze the extracted partial region with the reference image to determine whether the POS monetary is closed or open. .
  • the reference image is, for example, an image photographed in advance in a state in which the POS cashier to be monitored is closed.
  • the image extracting unit 220 determines that the POS monetary is opened as determined by the image analyzing unit 215, the image extracting unit 220 generates / extracts index information corresponding to the captured image and transmits the index information to the service providing server 300.
  • the POS is stored based on the time information on the stored image. Image information corresponding to the image information corresponding to the opening occurrence time of the money transfer 15 is extracted and transmitted to the manager terminal 410 through the service application 400 in a streaming manner.
  • the service providing server 300 may determine the position of the POS money tradition 15 based on the transaction history information received from the POS server 100. It is determined whether the opening is a normal transaction. For example, the service providing server 300 inquires the transaction history information received from the POS server 100 so that the transaction history information corresponding to the opening occurrence time of the POS monetary 15 included in the corresponding captured image information or index information is displayed. Or, even if there is transaction information, it can be determined that the opening of the POS monetary 15 is not a normal transaction in the case of a card transaction. If it is determined that the service providing server 300 is not a normal transaction, the service providing server 300 transmits a notification message to the corresponding manager terminal 410 registered in advance.
  • the service application 400 receives the notification message from the service providing server 300 and displays the notification message on the screen of the manager terminal 410.
  • the service application 400 receives a request for image information related to the notification message from the manager through the manager terminal 410, the image processing server 200 or the based on the opening occurrence time of the POS monetary 15.
  • the service providing server 300 requests the corresponding video information and receives the requested video information.
  • the image processing server 200 corresponds to the image information corresponding to the opening occurrence time of the POS money transfer 15 based on the time information on the stored captured image.
  • the video information is extracted and transmitted to the manager terminal 410 through the service application 400 in a streaming manner.
  • the "image information corresponding to the opening occurrence time" may be image information from a predetermined time (for example, 30 seconds) before the opening occurrence time.
  • the image processing server 200 may directly transmit the corresponding image information to the manager terminal 410.
  • the image processing server 200 may transmit the corresponding image information to the service providing server 300, and the service providing server 300 may refer to the manager terminal ( 410 may be transmitted.
  • the present invention can be used in a product transaction remote monitoring system for remotely monitoring a product transaction occurring in a store such as a shopping mall, a restaurant, a tavern, a convenience store.

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Accounting & Taxation (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Marketing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computational Linguistics (AREA)
  • Development Economics (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법이 개시된다. 본 발명에 따른 매장의 상품거래 원격 모니터링 시스템은, 매장에 설치된 POS 단말의 주위를 촬영하는 카메라로부터 촬영 영상을 수집하고 상기 촬영 영상을 시간 정보와 매칭하여 저장하는 영상 처리 서버; 및 상기 POS 단말에서 발생하는 상품 판매에 대한 결제를 처리하는 POS 서버로부터 상기 상품 판매에 수반되는 거래내역정보를 전달받고 상기 영상 처리 서버와 연동하여 상기 거래내역정보를 상기 매장의 관리자 단말로 제공하는 서비스 제공 서버;를 포함한다.

Description

포스 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법
본 발명은 쇼핑몰, 음식점, 주점, 편의점 등의 매장에서 발생하는 상품거래를 원격으로 모니터링하기 위한 시스템 및 방법에 관한 것으로, 더 상세하게는 매장 내에 설치된 포스 단말에 의해 제공되는 거래내역정보와 카메라에 의해 제공되는 포스 단말 주위를 촬영한 영상을 이용하여 매장의 상품거래를 원격으로 모니터링하기 위한 시스템 및 방법에 관한 것이다.
일반적으로 쇼핑몰, 음식점, 주점, 편의점 등의 매장에서는 다음과 같은 원인에 의해 손실이 발생하는데, 구체적으로 상품이 너무 많이 보관되어 관리상의 어려움으로 발생하는 재고손실, 상품의 재고가 없어서 팔지 못하여 발생하는 기회손실, 고객의 부정이나 매장 직원의 부정에 의해 매장에서 생기는 상품분실손실, 계산대 직원의 계산 실수나 부정에 의해 발생하는 결제손실 등이 있다.
이중 재고손실이나 기회손실은 각 매장에 포스(POS) 단말을 이용하여 상품 관리 및 고객 관리를 전산화하는 시스템 도입으로 해소하였고, 상품분실손실은 매장 내 상품진열대 인근에 감시카메라를 설치함으로써 해소하고자 하고 있다.
그런데, 계산대 직원이 POS 단말에 고객이 구입한 상품코드(제조업체코드, 품목코드 등)을 입력하지 않고 대금을 가로채거나, 카드 결제를 취소하는 과정에서 해당 취소 금액의 현금을 계산대 직원이 인출하여 가로채거나, 또는 상품을 친한 고객에게 공짜로 주는 등 계산대에서 발생되는 결제손실에 대해서는 차단할 방법이 아직 없다는 문제점이 있다.
따라서, 본 출원인은 상기와 같은 문제점을 해결하기 위하여 본 발명을 제안하게 되었으며, 이와 관련된 선행기술문헌으로는 대한민국 공개특허 제10-2002-0015681호(발명의 명칭: POS 데이터를 이용한 디지털영상감시 시스템 및 방법, 공개일: 2003.09.26.)가 있다.
본 발명의 목적은, 관리자가 매장에서 발생하는 거래내역을 원격에서 실시간으로 모니터링할 수 있고 필요한 경우 해당 거래 발생시 촬영한 영상을 확인할 수 있는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법을 제공하는 것이다.
본 발명의 다른 목적은, 계산대 직원의 실수나 부정행위를 원격에서 감시하고 사전에 예방할 수 있는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법을 제공하는 것이다.
상기 목적은, 본 발명에 따라, 매장에 설치된 POS 단말의 주위를 촬영하는 카메라로부터 촬영 영상을 수집하고 상기 촬영 영상을 시간 정보와 매칭하여 저장하는 영상 처리 서버; 및 상기 POS 단말에서 발생하는 상품 판매에 대한 결제를 처리하는 POS 서버로부터 상기 상품 판매에 수반되는 거래내역정보를 전달받고 상기 영상 처리 서버와 연동하여 상기 거래내역정보를 상기 매장의 관리자 단말로 제공하는 서비스 제공 서버;를 포함하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템에 의해 달성된다.
바람직하게, 상기 시스템은, 상기 관리자 단말에 설치되고 상기 서비스 제공 서버로부터 상기 거래내역정보를 수신하여 상기 관리자 단말의 화면에 표시하며, 상기 관리자로부터 상기 거래내역정보에 관한 영상 정보의 요청을 상기 관리자 단말을 통해 입력받으면, 상기 거래내역정보에 포함된 거래발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 영상 정보를 요청하고 요청한 영상 정보를 제공받는 서비스 애플리케이션;을 더 포함한다.
바람직하게, 상기 서비스 제공 서버는, 상기 POS 서버로부터 전달받은 거래내역정보에 대하여 정상 거래인지 또는 비정상 거래인지 여부를 판단하고, 상기 비정상 거래에 대해서만 상기 거래내역정보를 상기 서비스 애플리케이션을 통해 상기 관리자 단말에 전송한다.
바람직하게, 상기 서비스 제공 서버는, 상기 POS 서버로부터 전달받은 거래내역정보를 확인하여 주문 취소, 거래 취소, 반품 중 어느 하나가 발생한 경우 비정상 거래로 판단한다.
바람직하게, 상기 서비스 제공 서버는, 상기 POS 서버로부터 전달받은 거래내역정보에 대하여 정상 거래인지 또는 비정상 거래인지 여부를 판단하고, 상기 비정상 거래로 판단되면 비정상 거래의 발생을 알리는 메시지(이하, '비정상 거래 알림 메시지'라고 함)를 상기 관리자 단말에 전송한다.
바람직하게, 상기 시스템은 상기 관리자 단말에 설치되고 상기 서비스 제공 서버로부터 상기 비정상 거래 알림 메시지 및 상기 거래내역정보를 수신하여 상기 관리자 단말의 화면에 표시하며, 상기 비정상 거래 알림 메시지를 수신함에 따라 상기 관리자로부터 상기 비정상 거래의 거래내역정보에 관한 영상 정보의 요청을 상기 관리자 단말을 통해 입력받으면, 상기 거래내역정보에 포함된 거래발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 영상 정보를 요청하고 요청한 영상 정보를 제공받는 서비스 애플리케이션;을 더 포함한다.
바람직하게, 상기 영상 처리 서버는, 상기 서비스 애플리케이션 또는 상기 서비스 제공 서버로부터 상기 영상 정보의 요청이 있으면, 저장된 촬영 영상에 대하여 상기 시간 정보를 근거로 상기 거래발생시간에 대응되는 영상 정보를 추출하여 상기 서비스 애플리케이션을 통해 상기 관리자 단말로 전송한다.
바람직하게, 상기 영상 처리 서버는, 상기 저장된 촬영 영상에 대하여 상기 시간 정보를 근거로 상기 거래발생시간의 일정시간 전 시점부터 영상 정보를 추출하여 스트리밍 방식으로 상기 서비스 애플리케이션을 통해 상기 관리자 단말로 전송한다.
바람직하게, 상기 영상 처리 서버는, 상기 촬영 영상을 미리 설정된 기준 영상과 비교 분석하여 상기 POS 단말과 연결된 POS 금전통의 상태를 모니터링한다.
바람직하게, 상기 영상 처리 서버는, 상기 촬영 영상에서 상기 POS 금전통을 포함한 일정 영역을 추출한 후 상기 일정 영역에 대해 상기 기준 영상과 비교 분석하여 상기 POS 금전통의 상태를 모니터링한다.
바람직하게, 상기 영상 처리 서버는, 상기 모니터링 결과 상기 POS 금전통이 열린 것으로 확인되면 해당 촬영 영상에 대응되는 인덱스 정보를 상기 서비스 제공 서버로 전송한다.
바람직하게, 상기 서비스 제공 서버는, 상기 인덱스 정보를 수신하면 상기 POS 서버로부터 전달받은 거래내역정보에 기초하여 상기 POS 금전통의 열림이 정상 거래에 의한 것인지 여부를 판단하고, 상기 정상 거래에 의한 것이 아니라고 판단된 경우 이에 대한 알림 메시지를 상기 관리자 단말로 전송한다.
바람직하게, 상기 서비스 제공 서버는, 상기 POS 서버로부터 전달받은 거래내역정보를 조회하여 상기 인덱스 정보에 포함된 POS 금전통의 열림발생시간에 대응되는 거래내역정보가 없거나 상기 거래내역정보가 있더라도 카드 거래인 경우 상기 POS 금전통의 열림이 상기 정상 거래에 의한 것이 아니라고 판단한다.
바람직하게, 상기 시스템은, 상기 관리자 단말에 설치되고 상기 서비스 제공 서버로부터 상기 알림 메시지를 수신하여 상기 관리자 단말의 화면에 표시하며, 상기 관리자로부터 해당 영상 정보의 요청을 상기 관리자 단말을 통해 입력받으면, 상기 POS 금전통의 열림발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 영상 정보를 요청하고 요청한 영상 정보를 제공받는 서비스 애플리케이션;을 더 포함한다.
바람직하게, 상기 영상 처리 서버는, 상기 서비스 애플리케이션 또는 상기 서비스 제공 서버로부터 상기 영상 정보의 요청이 있으면, 저장된 촬영 영상에 대하여 상기 시간 정보를 근거로 상기 POS 금전통의 열림발생시간에 대응되는 영상 정보를 추출하여 상기 서비스 애플리케이션을 통해 상기 관리자 단말로 전송한다.
상기 목적은, 본 발명에 따라, 영상 처리 서버가 매장에 설치된 POS 단말의 주위를 촬영하는 카메라로부터 촬영 영상을 수집하고 상기 촬영 영상을 시간 정보와 매칭하여 저장하는 단계; 서비스 제공 서버가 상기 POS 단말에서 발생하는 상품 판매에 대한 결제를 처리하는 POS 서버로부터 상기 상품 판매에 수반되는 거래내역정보를 전달받는 단계; 및 상기 서비스 제공 서버가 상기 거래내역정보를 상기 매장의 관리자 단말로 제공하는 단계;를 포함하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 방법에 의해 달성된다.
바람직하게, 상기 방법은, 상기 관리자 단말에 설치된 서비스 애플리케이션이 상기 서비스 제공 서버로부터 상기 거래내역정보를 수신하여 상기 관리자 단말의 화면에 표시하는 단계; 및 상기 관리자로부터 상기 거래내역정보에 관한 영상 정보의 요청을 상기 관리자 단말을 통해 입력받으면, 상기 서비스 애플리케이션이 상기 거래내역정보에 포함된 거래발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 영상 정보를 요청하는 단계;를 더 포함한다.
바람직하게, 상기 거래내역정보를 상기 매장의 관리자 단말로 제공하는 단계에서, 상기 서비스 제공 서버가 상기 POS 서버로부터 전달받은 거래내역정보에 대하여 정상 거래인지 또는 비정상 거래인지 여부를 판단하고, 상기 비정상 거래에 대해서만 상기 거래내역정보를 상기 서비스 애플리케이션을 통해 상기 관리자 단말에 전송한다.
바람직하게, 상기 거래내역정보를 상기 매장의 관리자 단말로 제공하는 단계에서, 상기 서비스 제공 서버가 상기 POS 서버로부터 전달받은 거래내역정보에 대하여 정상 거래인지 또는 비정상 거래인지 여부를 판단하고, 상기 비정상 거래로 판단되면 비정상 거래의 발생을 알리는 메시지(이하, '비정상 거래 알림 메시지'라고 함)를 상기 관리자 단말에 전송한다.
바람직하게, 상기 관리자 단말에 설치된 서비스 애플리케이션이 상기 서비스 제공 서버로부터 상기 비정상 거래 알림 메시지 및 상기 거래내역정보를 수신하여 상기 관리자 단말의 화면에 표시하는 단계; 및
바람직하게, 상기 방법은, 상기 서비스 애플리케이션이 상기 비정상 거래 알림 메시지를 수신함에 따라 상기 관리자로부터 상기 비정상 거래의 거래내역정보에 관한 영상 정보의 요청을 상기 관리자 단말을 통해 입력받으면, 상기 거래내역정보에 포함된 거래발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 영상 정보를 요청하는 단계;를 더 포함한다.
바람직하게, 상기 방법은, 상기 서비스 애플리케이션 또는 상기 서비스 제공 서버로부터 상기 영상 정보의 요청이 있으면, 상기 영상 처리 서버가 저장된 촬영 영상에 대하여 상기 시간 정보를 근거로 상기 거래발생시간에 대응되는 영상 정보를 추출하여 상기 서비스 애플리케이션을 통해 상기 관리자 단말로 전송하는 단계;를 더 포함한다.
본 발명은, 상품 판매 시점에 POS 단말에서 발생한 거래내역정보를 서비스 애플리케이션을 통해 관리자 단말에 실시간으로 제공하고, 관리자 단말의 요청에 따라 해당 거래가 발생한 시간에 대응되는 영상 정보를 추출하여 제공함으로써, 관리자가 매장에서 발생하는 거래내역을 원격에서 실시간으로 모니터링할 수 있고 필요한 경우 해당 거래 발생시 촬영한 영상을 확인할 수 있다.
또한, 본 발명은, POS 단말에서 거래 취소나 주문 취소, 반품, 결제 변경 등의 비정상 거래가 발생한 경우, 비정상 거래 알림 메시지를 서비스 애플리케이션을 통해 관리자 단말에게 푸시하여 실시간 알림은 물론, 관리자 단말의 요청에 따라 비정상 거래가 발생한 시간에 대응되는 영상 정보를 추출하여 제공함으로써 계산대 직원의 실수나 부정행위를 원격에서 감시하고 사전에 예방할 수 있다.
도 1은 본 발명의 일 실시예에 따른 매장의 상품거래 원격 모니터링 시스템을 나타낸 구성도이다.
도 2는 도 1의 상품거래 원격 모니터링 시스템의 관리자 단말에서 비정상 거래의 거래내역정보에 관한 영상 정보를 요청하는 화면의 일 예를 나타낸다.
도 3은 본 발명의 일 실시예에 따른 매장의 상품거래 원격 모니터링 방법을 설명하기 위한 흐름도이다.
도 4는 본 발명의 다른 실시예에 따른 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템을 나타낸 구성도이다.
도 5는 도 4의 상품거래 원격 모니터링 시스템에서 영상 처리 서버의 구성을 나타낸 도면이다.
본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
이하, 도 1 내지 도 3을 참조하여 본 발명의 일 실시예에 따른 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법에 대해 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 매장의 상품거래 원격 모니터링 시스템을 나타낸 구성도이다.
본 실시예에 따른 매장의 상품거래 원격 모니터링 시스템은 각 매장의 계산대에 구비되는 POS 단말(10), 카메라(20), POS 서버(100), 영상 처리 서버(200), 서비스 제공 서버(300), 관리자 단말(410)에 설치된 서비스 애플리케이션(400)을 포함한다. 여기서, '매장'은 음식점, 주점, 편의점 등의 상품 판매가 이루어지는 모든 장소를 포함하고, '상품거래'에는 유형의 재화뿐만 아니라 무형의 재화인 서비스에 대한 거래를 포함한다.
POS 단말(10)은 상품 판매 시점에서 상품 정보나 고객 정보를 수집, 기억, 전송하는 장치로서, 결제 수단과 결합하여 판매 시점의 상품명이나 가격 등의 거래내역정보를 POS 서버(100)로 전달하여 수집 및 기록한다. POS 단말(10)은 각 매장에 설치되거나 휴대 가능한 소형 단말기 형태로 계산대에 마련될 수 있다.
일반적으로 POS 단말(10)은 상품에 찍힌 바코드를 인식하는 리더기와, 바코드 또는 상품의 가격 등 필요한 숫자 등을 입력하기 위한 입력키, 리더기와 입력키에서 입력받은 정보들을 직원이 확인할 수 있도록 출력하는 포스모니터, 영수증 등을 인쇄하는 프린트 등으로 구성된다.
카메라(20)는 POS 단말(10)과 POS 단말(10)을 조작하는 직원을 감시하기 위한 것으로, 통상 CCTV(Closed Circuit Television) 시스템으로 구성된다. 카메라(20)는 POS 단말(10)의 주위를 촬영하고 촬영된 영상을 영상 처리 서버(200)로 전달한다. 본 실시예에서의 카메라(20)는 POS 단말(10)과 1:1 로 설치될 수 있으며, 촬영 영상을 영상 처리 서버(200)로 전달할 때 카메라(20)의 관리번호도 함께 전달할 수 있다. 카메라(20)의 관리번호는 IP(Internet Protocol) 주소가 될 수 있다.
POS 서버(100)는 각 매장의 POS 단말(10)에서 발생하는 상품 판매에 대한 결제를 처리한다. 구체적으로, POS 서버(100)의 POS 결제정보 저장부(110)는 POS 단말(10)로부터 상품 판매에 수반하는 거래내역정보를 수신하여 저장하고, POS 서버(100)의 거래내역 전송부(120)는 POS 결제정보 저장부(110)에 저장된 거래내역정보를 서비스 제공 서버(300)로 전송한다. 거래내역 전송부(120)는 POS 단말(10)로부터 수신된 거래내역정보를 해당 POS 단말(10)의 관리번호와 함께 전송할 수 있다.
영상 처리 서버(200)는 카메라(10)의 촬영 영상을 전달받아 녹화, 검색 및 재생을 지원해주는 장치이다. 일 예로, 영상 처리 서버(200)는 NVR(Network Video Recoder) 시스템으로 구현될 수 있다. NVR 시스템은 IP 네트워크에서 직접 디지털 이미지 신호를 받아 처리하기 때문에 네트워크가 존재하는 곳이라면 어디든 설치가 가능하고 카메라 설치 장소에서 크게 벗어날 수 없는 DVR 시스템과는 큰 장점이 있다. 또한, NVR 시스템은 네트워크 대역폭 범주 내에 무한 개의 카메라 설치가 가능하고, 네트워크 연결만 되어 있으면 카메라의 정보 등록만으로 자동 연결이 가능하여 시스템의 설치 및 유지 비용을 절감할 수 있다.
영상 처리 서버(200)의 영상 저장부(210)는 카메라(20)로부터 촬영 영상을 수집하고 수집한 촬영 영상을 시간 정보와 매칭하여 데이터베이스(DB; 230)에 저장한다. 시간 정보는 촬영 영상에 포함되어 있으며 추후 원하는 시점의 촬영 영상을 검색할 수 있도록 시간 정보를 추출하여 매칭하는 작업을 수행할 수 있다.
영상 처리 서버(200)의 영상 추출부(220)는 저장된 촬영 영상에 대하여 영상 정보의 요청이 수신되면 시간 정보를 근거로 원하는 시점의 영상 정보를 추출하여 서비스 애플리케이션(400)을 통해 관리자 단말(410)로 전송한다. 구체적으로, 영상 처리 서버(200)의 영상 추출부(220)는 임의의 거래내역정보에 관한 영상 정보가 요청되면 해당 거래가 발생한 시간, 즉 거래발생시간의 일정시간 전(예컨대, 30초 전) 시점부터의 영상 정보를 추출하여 서비스 애플리케이션(400)을 통해 관리자 단말(410)로 전송한다. 이때, 영상 정보의 요청은 관리자 단말(410)의 서비스 애플리케이션(400)에 의해 수행되며, 영상 처리 서버(200)는 서비스 애플리케이션(400)으로부터 직접 영상 정보의 요청을 수신하거나 서비스 제공 서버(300)를 경유하여 영상 정보의 요청을 수신할 수 있다.
한편, 영상 처리 서버(200)는 물리적으로 매장에 설치될 수 있고 이와 다르게 서비스 제공 서버(300)가 있는 장소에 설치될 수도 있다. 더 나아가, 영상 처리 서버(200)는 서비스 제공 서버(300)와 함께 하나의 통합 서버로 구현될 수도 있다.
서비스 제공 서버(300)는 POS 서버(200)로부터 POS 단말(10)에서 발생된 거래내역정보를 전달받고 거래내역정보를 관리자 단말(410)로 제공한다. 거래내역정보에는 상품명, 가격, 결제 금액, 결제 유형뿐만 아니라, 거래 종류(주문 취소, 거래 취소, 환불 등), 거래발생시간의 정보가 포함된다.
특히, 서비스 제공 서버(300)는 POS 서버(100)로부터 전달받은 거래내역정보에 대하여 정상 거래인지 또는 비정상 거래인지 여부를 판단하고, 관리자 단말(410)의 서비스 애플리케이션(400)의 설정 또는 서비스 제공 서버(300)의 설정에 따라 비정상 거래에 대해서만 거래내역정보를 서비스 애플리케이션(400)을 통해 관리자 단말(410)에 전송할 수 있다. 이때, 정상 거래는 상품 판매 시점에서 정상적인 현금 결제나 카드 결제가 이루어진 거래를 말하며, 비정상 거래는 주문 취소, 거래 취소(환불), 반품, 결제 변경 등의 거래를 포함한다. 이에, 서비스 제공 서버(300)는 POS 서버(100)로부터 전달받은 거래내역정보를 확인하여 주문 취소, 거래 취소, 반품 중 어느 하나가 발생한 경우 비정상 거래로 판단할 수 있다.
이와 다르게, 서비스 제공 서버(300)는 POS 서버(100)로부터 전달받은 거래내역정보에 대하여 정상 거래인지 또는 비정상 거래인지 여부를 판단하고, 비정상 거래로 판단되면 해당 거래내역정보와 함께 비정상 거래의 발생을 알리는 메시지(이하, '비정상 거래 알림 메시지'라고 함)를 관리자 단말(410)에 전송/푸시할 수 있다.
관리자 단말(410)은 매장의 관리자가 소지한 단말로, 항상 휴대 가능하고 실시간 확인이 가능한 스마트폰로 제공되는 것이 바람직하나, 이에 한정되지 아니하고 서버 간 네트워크를 통해 데이터 송수신이 가능하고 영상 정보를 재생할 수 있는 단말이라면 그 종류에 관계없이 적용할 수 있을 것이다. 매장의 관리자는 매장의 사장, 점주, 매니저 등이 될 수 있다. 한편, 서비스 제공 서버(300)에는 관리자 단말(410)에 관한 정보가 사전에 등록되는데, 예컨대 관리자 단말(410)에 서비스 애플리케이션(400)을 설치하고 회원 가입을 진행하는 과정에서 관리자 단말(410)에 관한 정보를 해당 POS 단말(10)과 매칭하여 서비스 제공 서버(300)의 데이터베이스에 저장할 수 있다. 또한, 관리자 단말(410)에 관한 정보는 영상 처리 서버(200)에 사전에 등록되거나, 영상 처리 서버(200)가 서비스 제공 서버(300)에 사전 등록된 관리자 단말(410)에 관한 정보를 공유할 수 있다.
서비스 애플리케이션(400)은 관리자 단말(400)에 설치되고, 서비스 제공 서버(300)로부터 POS 단말(10)에서 발생한 거래내역정보를 수신하여 관리자 단말(410)의 화면에 표시한다. 또한, 서비스 애플리케이션(400)은 서비스 제공 서버(300)로부터 비정상 거래 알림 메시지를 수신하여 관리자 단말(410)의 화면에 표시한다.
이때, 서비스 애플리케이션(400)은 매장에 설치된 POS 단말(10)에서 발생하는 모든 거래에 대한 거래내역정보를 수신할 수도 있지만, 선택적으로 비정상 거래가 발생한 경우에만 거래내역정보를 수신하도록 설정될 수 있다. 이를 위해 서비스 애플리케이션(400)은 거래내역 수신 설정 화면을 제공하며, 거래내역 수신 설정 화면에서 모든 거래에 대한 거래내역정보를 수신하도록 설정하거나 비정상 거래에 대한 거래내역정보만 수신하도록 설정할 수 있다.
서비스 애플리케이션(400)은 관리자 단말(410)의 화면에 표시된 거래내역정보에 대하여 관리자로부터 영상 정보의 요청을 관리자 단말(410)을 통해 입력받으면, 해당 거래내역정보에 포함된 거래발생시간에 기초하여 영상 처리 서버(200) 또는 서비스 제공 서버(300)에 영상 정보를 요청하고, 요청한 영상 정보를 제공받는다.
도 2는 도 1의 상품거래 원격 모니터링 시스템의 관리자 단말에서 비정상 거래의 거래내역정보에 관한 영상 정보를 요청하는 화면의 일 예를 나타낸다.
관리자 단말(410)의 화면(411)에는 기본적으로 서비스 제공 서버(300)로부터 수신한 거래내역정보(411a)가 표시되고, 거래가 발생한 시점의 영상 정보를 요청하는 '영상요청' 버튼(411b), '확인' 버튼(411c)이 포함된다. 거래내역정보(411a)에는 상호명, 사업자 번호, 주소, 전화번호, 일시(거래발생시간), 거래 종류, POS 번호(POS 단말의 관리번호임) 등의 정보들이 포함되며, 화면(411)에서 '영상요청' 버튼(411b)이 선택 입력되면 화면에 표시된 거래내역정보(411a)에 관한 영상 정보를 요청한다. 이와 다르게, 화면(411)에서 '확인' 버튼(411c)이 선택되면 거래내역정보(411a)이 표시된 화면을 종료한다.
서비스 애플리케이션(400)에 의해 영상 정보의 요청이 이루어지면, 영상 처리 서버(200)는 저장된 촬영 영상에 대하여 시간 정보를 근거로 거래발생시간에 대응되는 영상 정보를 추출하여 스트리밍 방식으로 서비스 애플리케이션(400)을 통해 관리자 단말(410)로 전송한다. 이때, '거래발생시간에 대응되는 영상 정보'는 거래발생시간의 일정시간 전(예컨대, 30초 전)부터의 영상 정보일 수 있다. 한편, 영상 처리 서버(200)는 해당 영상 정보를 직접 관리자 단말(410)로 전송할 수도 있고, 이와 다르게 해당 영상 정보를 서비스 제공 서버(300)로 전송하고 서비스 제공 서버(300)가 이를 관리자 단말(410)로 전송하는 방식을 취할 수도 있다.
위와 같은 구성을 갖는 본 발명의 일 실시예에 따른 매장의 상품거래 원격 모니터링 시스템은 상품 판매 시점에 POS 단말(10)에서 발생한 거래내역정보를 서비스 애플리케이션(400)을 통해 관리자 단말(410)에 실시간으로 제공하고, 관리자 단말(410)의 요청에 따라 해당 거래가 발생한 시간에 대응되는 영상 정보를 추출하여 제공함으로써, 관리자가 매장에서 발생하는 거래내역을 원격에서 실시간으로 모니터링할 수 있고 필요한 경우 해당 거래 발생시 촬영한 영상을 확인할 수 있다.
특히, 본 발명의 일 실시예에 따른 매장의 상품거래 원격 모니터링 시스템은 POS 단말(10)에서 거래 취소나 주문 취소, 반품 등의 비정상 거래가 발생한 경우, 비정상 거래 알림 메시지를 서비스 애플리케이션(400)을 통해 관리자 단말(410)에게 푸시하여 실시간 알림은 물론, 관리자 단말(410)의 요청에 따라 비정상 거래가 발생한 시간에 대응되는 영상 정보를 추출하여 제공함으로써 계산대 직원의 실수나 부정행위를 원격에서 감시하고 사전에 예방할 수 있다.
도 3은 본 발명의 일 실시예에 따른 매장의 상품거래 원격 모니터링 방법을 설명하기 위한 흐름도이다.
먼저 S100 단계에서, POS 서버(100)는 각 매장의 POS 단말로부터 상품 판매 결제에 따른 거래내역정보를 수신하여 저장한다.
S101 단계에서, 영상 처리 서버(200)는 POS 단말의 주위를 촬영하는 카메라로부터 촬영 영상을 수집하고 수집한 촬영 영상을 시간 정보와 매칭하여 저장함으로써 영상의 검색 및 재생이 가능하도록 지원한다.
위 S100 단계 및 S101 단계는 시간의 흐름상 어느 것이 먼저 수행되고 연동되는 것이 아니라, 각 POS 단말 및 카메라에서 발생되는 여부에 따라 개별적으로 정보를 수집하고 저장하는 과정으로 볼 수 있다.
다음 S102 단계에서, POS 서버(100)는 POS 단말로부터 수신한 거래내역정보를 서비스 제공 서버(300)로 전송한다.
다음 S103 단계에서, 서비스 제공 서버(300)는 POS 서버(100)로부터 수신한 거래내역정보에 대하여 정상 거래인지 또는 비정상 거래인지 여부를 판단한다.
다음 S104 단계에서, 서비스 제공 서버(300)는 비정상 거래에 대해서만 거래내역정보를 서비스 애플리케이션(400)을 통해 해당 관리자 단말로 전송한다. 이와 다르게 서비스 제공 서버(300)는 비정상 거래인지 여부와 관계없이 POS 단말에서 발생한 모든 거래에 대해 거래내역정보를 서비스 애플리케이션(400)을 통해 해당 관리자 단말로 전송하되, 비정상 거래인 경우에는 관리자의 주의 환기를 위해 비정상 거래 알림 메시지를 해당 관리자 단말로 전송할 수 있다. 이때, 서비스 제공 서버(300)는 사전에 등록된 관리자 혹은 관리자 단말에 관한 정보를 조회하여 해당 매장 또는 해당 매장의 POS 단말과 매칭되어 있는 관리자 단말로 거래내역정보를 전송할 수 있다.
다음 S105 단계에서, 서비스 애플리케이션(400)은 서비스 제공 서버(300)로부터 수신한 거래내역정보를 관리자 단말의 화면에 표시하고, 관리자로부터 해당 거래내역정보에 관한 영상 정보의 요청을 입력받으면, 거래내역정보에 포함된 거래발생시간에 기초하여 서비스 제공 서버(300)에 영상 정보를 요청한다.
다음 S106 단계에서, 서비스 제공 서버(300)는 서비스 애플리케이션(400)로부터 수신한 영상 정보 요청을 영상 처리 서버(200)에 전달한다. 한편, 이와 다르게 서비스 애플리케이션(400)은 서비스 제공 서버(300)를 거치지 않고 직접 영상 처리 서버(200)에 영상 정보를 요청할 수도 있다.
다음 S107 단계에서, 영상 처리 서버(200)는 저장된 촬영 영상에 대하여 시간 정보를 근거로 해당 거래내역정보에 포함된 거래발생시간에 대응되는 영상 정보를 추출한다.
다음 S108 및 S109 단계에서, 영상 처리 서버(200)는 추출한 영상 정보를 서비스 애플리케이션(400)을 통해 해당 관리자 단말로 전송한다. 이때, 영상 처리 서버(200)는 추출한 영상 정보를 직접 해당 관리자 단말로 전송할 수도 있고, 추출한 영상 정보를 일단 서비스 제공 서버(300)로 전송하면 서비스 제공 서버(300)가 이를 관리자 단말로 전달하는 방식을 취할 수도 있다.
이하, 도 4 및 도 5를 참조하여 본 발명의 다른 실시예에 따른 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템에 대해 상세하게 설명한다.
도 4는 본 발명의 다른 실시예에 따른 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템을 나타낸 구성도이다.
본 실시예에 따른 매장의 상품거래 원격 모니터링 시스템은 각 매장의 계산대에 구비되는 POS 단말(10)과 POS 금전통(15), 카메라(20), POS 서버(100), 영상 처리 서버(200), 서비스 제공 서버(300), 관리자 단말(410)에 설치된 서비스 애플리케이션(400)을 포함한다.
참고로, 본 실시예에 따른 매장의 상품거래 원격 모니터링 시스템은 전술한 실시예의 주요 구성을 전제로 하되, POS 단말(10)과 연결된 POS 금전통의 상태를 모니터링하기 위한 구성을 추가하고 있다. 이에, 전술한 실시예와 공통되는 구성에 대한 설명은 생략하고 전술한 실시예와 상이한 점을 중심으로 본 실시예를 설명한다.
POS 금전통(15)은 금전을 보관하며, POS 단말(10)과 연결되어 상품 판매에 대한 결제 시 고객으로부터 받은 금전을 수납하거나 차액에 대한 금전을 지급하기 위해 POS 단말(10)의 조작에 의해 개폐될 수 있다. 예를 들어, POS 단말(10)에 POS 금전통(15)의 개폐와 관련된 버튼이 구비되고 버튼이 선택되면 POS 금전통(15)이 자동 열릴 수 있다. 통상 POS 금전통(15)은 금전통 자체에 잠금장치가 구비되어 있어 이의 조작에 따라 개폐된다.
카메라(20)는 POS 단말(10)과 연결된 POS 금전통(15) 및 이를 조작하는 직원을 감시하기 위한 것으로, POS 단말(10)의 주위를 촬영하고 촬영된 영상을 영상 처리 서버(200)로 전달한다.
POS 서버(100)는 각 매장의 POS 단말(10)에서 발생하는 상품 판매에 대한 결제를 처리한다. 구체적으로, POS 서버(100)는 POS 단말(10)로부터 상품 판매에 수반하는 거래내역정보를 수신하여 저장하고, 저장된 거래내역정보를 서비스 제공 서버(300)로 전송한다. 이때, POS 서버(100)는 POS 단말(10)로부터 수신된 거래내역정보를 해당 POS 단말(10)의 관리번호와 함께 전송할 수 있다.
도 5는 도 4의 상품거래 원격 모니터링 시스템에서 영상 처리 서버의 구성을 나타낸 도면이다.
영상 처리 서버(200)는 카메라(20)를 통해 촬영된 촬영 영상을 시간정보와 매칭하여 수집 및 저장하고, 촬영 영상을 영상 분석하여 POS 금전통(15)의 상태를 모니터링한다. 모니터링 결과 POS 금전통(15)이 열린 것으로 확인되면 서비스 제공 서버(300)로 해당 촬영 영상 또는 촬영 영상에 대응되는 인덱스(index) 정보를 전송한다. 여기서, '인덱스 정보'는 촬영 영상을 식별할 수 있는 정보로서 POS 금전통(15)의 열림발생시간을 포함한다. 여기서, 영상 분석은 촬영 영상에서 POS 금전통(15)을 포함한 일정 영역을 추출하고, 추출된 일정 영역을 미리 설정된 기준 영상과 비교 분석하는 것으로 수행될 수 있다.
이를 위해, 영상 처리 서버(200)는 도 5에 도시된 바와 같이 영상 저장부(210), 영상 분석부(215), 영상 추출부(220), 데이터베이스(DB; 230)를 포함한다.
영상 저장부(210)는 카메라로부터 촬영 영상을 수집하고 수집한 촬영 영상을 시간정보와 매칭하여 데이터베이스(230)에 저장한다. 시간 정보는 촬영 영상에 포함되어 있으며 추후 원하는 시점의 촬영 영상을 검색할 수 있도록 시간 정보를 추출하여 매칭하는 작업을 수행할 수 있다. 촬영 영상에는 비디오 정보뿐만 아니라 음성 정보를 포함할 수 있다.
영상 분석부(215)는 카메라로부터 수집한 촬영 영상을 데이터베이스(230)에 기 저장된 기준 영상과 비교 분석하여 기준 영상과 일치하는지 여부를 판단한다. 이러한 판단을 통해 영상 분석부(215)는 POS 금전통이 열린 상태인지를 모니터링한다. 구체적으로, 영상 분석부(215)는 촬영 영상에서 POS 금전통을 포함한 일부 영역을 추출하고, 추출된 일부 영역에 대해 기준 영상과 비교 분석함으로써, POS 금전통이 닫혀있는지 아니면 열려 있는지 판단할 수 있다. 이때, '기준 영상'은 예컨대 모니터링 대상이 되는 POS 금전통이 닫힌 상태를 미리 촬영해둔 영상이다.
영상 추출부(220)는 영상 분석부(215)에서 판단한 결과 POS 금전통이 열린 것으로 확인되면 해당 촬영 영상에 대응되는 인덱스 정보를 생성/추출하여 서비스 제공 서버(300)로 전송한다. 또한, 서비스 제공 서버(300)에 의해 POS 금전통의 열림이 정상적인 거래에 의한 것이 아니라고 판단되고 서비스 애플리케이션(400)에 의해 해당 영상 정보의 요청이 있으면, 저장된 촬영 영상에 대하여 시간 정보를 근거로 POS 금전통(15)의 열림발생시간에 대응되는 영상 정보에 대응되는 영상 정보를 추출하여 스트리밍 방식으로 서비스 애플리케이션(400)을 통해 관리자 단말(410)로 전송한다.
서비스 제공 서버(300)는 영상 처리 서버(200)로부터 해당 촬영 영상 또는 촬영 영상에 대응되는 인덱스 정보를 수신하면, POS 서버(100)로부터 전달받은 거래내역정보에 기초하여 POS 금전통(15)의 열림이 정상 거래에 의한 것인지 여부를 판단한다. 예컨대, 서비스 제공 서버(300)는 POS 서버(100)로부터 전달받은 거래내역정보를 조회하여 해당 촬영 영상 정보 또는 인덱스 정보에 포함된 POS 금전통(15)의 열림발생시간에 대응되는 거래내역정보가 없거나, 거래내역정보가 있더라도 카드 거래인 경우 POS 금전통(15)의 열림이 정상 거래에 의한 것이 아니라고 판단할 수 있다. 그리고, 서비스 제공 서버(300)는 정상 거래에 의한 것이 아니라고 판단된 경우 이에 대한 알림 메시지를 사전에 등록된 해당 관리자 단말(410)로 전송한다.
서비스 애플리케이션(400)은 서비스 제공 서버(300)로부터 상기 알림 메시지를 수신하여 관리자 단말(410)의 화면에 표시한다. 그리고, 서비스 애플리케이션(400)은 관리자로부터 상기 알림 메시지와 관련된 영상 정보의 요청을 관리자 단말(410)을 통해 입력받으면, POS 금전통(15)의 열림발생시간에 기초하여 영상 처리 서버(200) 또는 서비스 제공 서버(300)에 해당 영상 정보를 요청하고 요청한 영상 정보를 제공받는다.
서비스 애플리케이션(400)에 의해 영상 정보의 요청이 이루어지면, 영상 처리 서버(200)는 저장된 촬영 영상에 대하여 시간 정보를 근거로 POS 금전통(15)의 열림발생시간에 대응되는 영상 정보에 대응되는 영상 정보를 추출하여 스트리밍 방식으로 서비스 애플리케이션(400)을 통해 관리자 단말(410)로 전송한다. 이때, '열림발생시간에 대응되는 영상 정보'는 열림발생시간의 일정시간 전(예컨대, 30초 전)부터의 영상 정보일 수 있다. 한편, 영상 처리 서버(200)는 해당 영상 정보를 직접 관리자 단말(410)로 전송할 수도 있고, 이와 다르게 해당 영상 정보를 서비스 제공 서버(300)로 전송하고 서비스 제공 서버(300)가 이를 관리자 단말(410)로 전송하는 방식을 취할 수도 있다.
이상의 설명은 본 발명을 예시적으로 설명한 것에 불과하며, 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술적 사상에서 벗어나지 않는 범위에서 다양한 변형이 가능할 것이다. 따라서 본 발명의 명세서에 개시된 실시예들은 아래의 특허청구범위에 의해 해석 되어야 하며, 그와 균등한 범위 내에 있는 모든 기술도 본 발명의 범위에 포함되는 것으로 해석해야 할 것이다.
본 발명은 쇼핑몰, 음식점, 주점, 편의점 등의 매장에서 발생하는 상품거래를 원격으로 모니터링하기 위한 상품거래 원격 모니터링 시스템에 사용될 수 있다.

Claims (16)

  1. 매장에 설치된 POS 단말의 주위를 촬영하는 카메라로부터 촬영 영상을 수집하고 상기 촬영 영상을 시간 정보와 매칭하여 저장하는 영상 처리 서버; 및
    상기 POS 단말에서 발생하는 상품 판매에 대한 결제를 처리하는 POS 서버로부터 상기 상품 판매에 수반되는 거래내역정보를 전달받고 상기 영상 처리 서버와 연동하여 상기 거래내역정보를 상기 매장의 관리자 단말로 제공하는 서비스 제공 서버;를 포함하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  2. 제1항에 있어서,
    상기 관리자 단말에 설치되고 상기 서비스 제공 서버로부터 상기 거래내역정보를 수신하여 상기 관리자 단말의 화면에 표시하며, 상기 관리자로부터 상기 거래내역정보에 관한 영상 정보의 요청을 상기 관리자 단말을 통해 입력받으면, 상기 거래내역정보에 포함된 거래발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 영상 정보를 요청하고 요청한 영상 정보를 제공받는 서비스 애플리케이션;
    을 더 포함하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  3. 제2항에 있어서,
    상기 서비스 제공 서버는,
    상기 POS 서버로부터 전달받은 거래내역정보에 대하여 정상 거래인지 또는 비정상 거래인지 여부를 판단하고, 상기 비정상 거래에 대해서만 상기 거래내역정보를 상기 서비스 애플리케이션을 통해 상기 관리자 단말에 전송하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  4. 제3항에 있어서,
    상기 서비스 제공 서버는,
    상기 POS 서버로부터 전달받은 거래내역정보를 확인하여 주문 취소, 거래 취소, 반품 중 어느 하나가 발생한 경우 비정상 거래로 판단하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  5. 제1항에 있어서,
    상기 서비스 제공 서버는,
    상기 POS 서버로부터 전달받은 거래내역정보에 대하여 정상 거래인지 또는 비정상 거래인지 여부를 판단하고, 상기 비정상 거래로 판단되면 비정상 거래의 발생을 알리는 메시지(이하, '비정상 거래 알림 메시지'라고 함)를 상기 관리자 단말에 전송하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  6. 제5항에 있어서,
    상기 관리자 단말에 설치되고 상기 서비스 제공 서버로부터 상기 비정상 거래 알림 메시지 및 상기 거래내역정보를 수신하여 상기 관리자 단말의 화면에 표시하며, 상기 비정상 거래 알림 메시지를 수신함에 따라 상기 관리자로부터 상기 비정상 거래의 거래내역정보에 관한 영상 정보의 요청을 상기 관리자 단말을 통해 입력받으면, 상기 거래내역정보에 포함된 거래발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 영상 정보를 요청하고 요청한 영상 정보를 제공받는 서비스 애플리케이션;
    을 더 포함하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  7. 제2항에 있어서,
    상기 영상 처리 서버는,
    상기 서비스 애플리케이션 또는 상기 서비스 제공 서버로부터 상기 영상 정보의 요청이 있으면, 저장된 촬영 영상에 대하여 상기 시간 정보를 근거로 상기 거래발생시간에 대응되는 영상 정보를 추출하여 상기 서비스 애플리케이션을 통해 상기 관리자 단말로 전송하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  8. 제7항에 있어서,
    상기 영상 처리 서버는,
    상기 저장된 촬영 영상에 대하여 상기 시간 정보를 근거로 상기 거래발생시간의 일정시간 전 시점부터 영상 정보를 추출하여 스트리밍 방식으로 상기 서비스 애플리케이션을 통해 상기 관리자 단말로 전송하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  9. 제1항에 있어서,
    상기 영상 처리 서버는,
    상기 촬영 영상을 미리 설정된 기준 영상과 비교 분석하여 상기 POS 단말과 연결된 POS 금전통의 상태를 모니터링하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  10. 제9항에 있어서,
    상기 영상 처리 서버는,
    상기 촬영 영상에서 상기 POS 금전통을 포함한 일정 영역을 추출한 후 상기 일정 영역에 대해 상기 기준 영상과 비교 분석하여 상기 POS 금전통의 상태를 모니터링하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  11. 제9항에 있어서,
    상기 영상 처리 서버는,
    상기 모니터링 결과 상기 POS 금전통이 열린 것으로 확인되면 해당 촬영 영상에 대응되는 인덱스 정보를 상기 서비스 제공 서버로 전송하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  12. 제11항에 있어서,
    상기 서비스 제공 서버는,
    상기 인덱스 정보를 수신하면 상기 POS 서버로부터 전달받은 거래내역정보에 기초하여 상기 POS 금전통의 열림이 정상 거래에 의한 것인지 여부를 판단하고, 상기 정상 거래에 의한 것이 아니라고 판단된 경우 이에 대한 알림 메시지를 상기 관리자 단말로 전송하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  13. 제12항에 있어서,
    상기 서비스 제공 서버는,
    상기 POS 서버로부터 전달받은 거래내역정보를 조회하여 상기 인덱스 정보에 포함된 POS 금전통의 열림발생시간에 대응되는 거래내역정보가 없거나 상기 거래내역정보가 있더라도 카드 거래인 경우 상기 POS 금전통의 열림이 상기 정상 거래에 의한 것이 아니라고 판단하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  14. 제12항에 있어서,
    상기 관리자 단말에 설치되고 상기 서비스 제공 서버로부터 상기 알림 메시지를 수신하여 상기 관리자 단말의 화면에 표시하며, 상기 관리자로부터 해당 영상 정보의 요청을 상기 관리자 단말을 통해 입력받으면, 상기 POS 금전통의 열림발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 영상 정보를 요청하고 요청한 영상 정보를 제공받는 서비스 애플리케이션;
    을 더 포함하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  15. 제14항에 있어서,
    상기 영상 처리 서버는,
    상기 서비스 애플리케이션 또는 상기 서비스 제공 서버로부터 상기 영상 정보의 요청이 있으면, 저장된 촬영 영상에 대하여 상기 시간 정보를 근거로 상기 POS 금전통의 열림발생시간에 대응되는 영상 정보를 추출하여 상기 서비스 애플리케이션을 통해 상기 관리자 단말로 전송하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템.
  16. 영상 처리 서버가 매장에 설치된 POS 단말의 주위를 촬영하는 카메라로부터 촬영 영상을 수집하고 상기 촬영 영상을 시간 정보와 매칭하여 저장하는 단계;
    서비스 제공 서버가 상기 POS 단말에서 발생하는 상품 판매에 대한 결제를 처리하는 POS 서버로부터 상기 상품 판매에 수반되는 거래내역정보를 전달받는 단계; 및
    상기 서비스 제공 서버가 상기 거래내역정보를 상기 매장의 관리자 단말로 제공하는 단계;
    를 포함하는 POS 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 방법.
PCT/KR2016/015528 2016-02-16 2016-12-29 포스 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법 WO2017142191A1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2016-0017879 2016-02-16
KR1020160017879A KR20170096463A (ko) 2016-02-16 2016-02-16 포스(pos) 단말과 카메라를 이용한 매장의 거래 모니터링 시스템 및 방법
KR10-2016-0039208 2016-03-31
KR1020160039208A KR102107533B1 (ko) 2016-03-31 2016-03-31 Pos 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템

Publications (1)

Publication Number Publication Date
WO2017142191A1 true WO2017142191A1 (ko) 2017-08-24

Family

ID=59625147

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/015528 WO2017142191A1 (ko) 2016-02-16 2016-12-29 포스 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법

Country Status (1)

Country Link
WO (1) WO2017142191A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190238743A1 (en) * 2016-10-17 2019-08-01 Hanwha Techwin Co., Ltd. Camera linked with pos apparatus and surveillance method using the same
CN110126725A (zh) * 2019-05-22 2019-08-16 广州小鹏汽车科技有限公司 车辆仪表盘指示灯的提示方法、装置及车辆
CN111161743A (zh) * 2019-12-31 2020-05-15 秒针信息技术有限公司 基于语音识别的收银监督方法及系统
CN109671227B (zh) * 2018-11-13 2024-04-26 达闼机器人股份有限公司 智能货柜消费行为识别方法、装置、存储介质和电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100468590B1 (ko) * 2002-03-22 2005-01-31 (주)태성엠아이에스 Pos 데이터를 이용한 디지털영상감시 시스템 및 방법
KR20110008649A (ko) * 2009-07-20 2011-01-27 (주)블루비스 Pos 관리 시스템 및 그 방법
US20110191195A1 (en) * 2006-05-25 2011-08-04 Objectvideo, Inc. Intelligent video verification of point of sale (pos) transactions
KR101281846B1 (ko) * 2012-11-29 2013-07-03 이상온 스마트 프론트 시스템
KR101511496B1 (ko) * 2014-09-30 2015-04-13 주식회사 포인트시스템 Pos단말기에서의 부정행위 감시 시스템 및 감시 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100468590B1 (ko) * 2002-03-22 2005-01-31 (주)태성엠아이에스 Pos 데이터를 이용한 디지털영상감시 시스템 및 방법
US20110191195A1 (en) * 2006-05-25 2011-08-04 Objectvideo, Inc. Intelligent video verification of point of sale (pos) transactions
KR20110008649A (ko) * 2009-07-20 2011-01-27 (주)블루비스 Pos 관리 시스템 및 그 방법
KR101281846B1 (ko) * 2012-11-29 2013-07-03 이상온 스마트 프론트 시스템
KR101511496B1 (ko) * 2014-09-30 2015-04-13 주식회사 포인트시스템 Pos단말기에서의 부정행위 감시 시스템 및 감시 방법

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190238743A1 (en) * 2016-10-17 2019-08-01 Hanwha Techwin Co., Ltd. Camera linked with pos apparatus and surveillance method using the same
US11095803B2 (en) * 2016-10-17 2021-08-17 Hanwha Techwin Co., Ltd. Camera linked with POS apparatus and surveillance method using the same
CN109671227B (zh) * 2018-11-13 2024-04-26 达闼机器人股份有限公司 智能货柜消费行为识别方法、装置、存储介质和电子设备
CN110126725A (zh) * 2019-05-22 2019-08-16 广州小鹏汽车科技有限公司 车辆仪表盘指示灯的提示方法、装置及车辆
CN111161743A (zh) * 2019-12-31 2020-05-15 秒针信息技术有限公司 基于语音识别的收银监督方法及系统
CN111161743B (zh) * 2019-12-31 2022-12-13 上海明胜品智人工智能科技有限公司 基于语音识别的收银监督方法及系统

Similar Documents

Publication Publication Date Title
US10755259B2 (en) Intelligent video verification of point of sale (POS) transactions
US7474330B2 (en) System and method for integrating and characterizing data from multiple electronic systems
WO2017142191A1 (ko) 포스 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법
WO2021172803A1 (ko) 무인 판매기를 이용한 판매와 구매 중개 방법
KR102244430B1 (ko) Pc방 무인 관제 시스템, 서버 및 방법
EP0713200A2 (en) Security monitoring arrangement for a computer system
JP5260233B2 (ja) 追跡装置、追跡方法及び追跡プログラム
JP2006245686A (ja) 画像記録装置及び画像記録再生方法
US7806316B1 (en) Transaction system for video matching
WO2016175373A1 (ko) 상품 임대차 거래 중개 장치 및 방법
JP2012128539A (ja) 機器情報管理システム
KR102107533B1 (ko) Pos 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템
KR20180109807A (ko) 포스(pos) 단말과 카메라를 이용한 매장의 거래 모니터링 시스템 및 방법
WO2012011638A1 (ko) 영업의 손실을 관리하는 방법, 시스템, 그를 위한 매장 관리 서버 및 포스 단말기
US20030069800A1 (en) Mobile wireless image capture and printing method and system
WO2012124857A1 (ko) 음성패킷망(VoIP)을 이용한 동영상광고와 쿠폰 제공 방법 및 그 시스템
KR101281846B1 (ko) 스마트 프론트 시스템
KR102049244B1 (ko) 안면인식을 이용한 회원관리 및 방문객 모니터링 장치 및 방법
KR20170096463A (ko) 포스(pos) 단말과 카메라를 이용한 매장의 거래 모니터링 시스템 및 방법
JP2022127013A (ja) セルフチェックアウトシステム及びプログラム
WO2009022760A1 (en) Apparatus and method for analyzing transaction data of a pos device
KR101958417B1 (ko) 횡령 사고 방지를 위해 pos 단말기의 조작을 감시하는 pos 보안시스템
KR100810097B1 (ko) 고객이미지 기록방법 및 그 시스템
WO2017179761A1 (ko) 비디오 텍스트 삽입 시스템 및 그의 제어방법
WO2022173090A1 (ko) 인공 지능을 이용한 사용자 행위 분석 및 상황 인지 기반의 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16890781

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205 DATED 03/12/18)

122 Ep: pct application non-entry in european phase

Ref document number: 16890781

Country of ref document: EP

Kind code of ref document: A1