WO2018074627A1 - Pos 기기와 연동된 감시 카메라 및 이를 이용한 감시 방법 - Google Patents

Pos 기기와 연동된 감시 카메라 및 이를 이용한 감시 방법 Download PDF

Info

Publication number
WO2018074627A1
WO2018074627A1 PCT/KR2016/011780 KR2016011780W WO2018074627A1 WO 2018074627 A1 WO2018074627 A1 WO 2018074627A1 KR 2016011780 W KR2016011780 W KR 2016011780W WO 2018074627 A1 WO2018074627 A1 WO 2018074627A1
Authority
WO
WIPO (PCT)
Prior art keywords
camera
transaction information
image
surveillance
transmitted
Prior art date
Application number
PCT/KR2016/011780
Other languages
English (en)
French (fr)
Inventor
김경덕
김현호
심민정
Original Assignee
한화테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화테크윈 주식회사 filed Critical 한화테크윈 주식회사
Publication of WO2018074627A1 publication Critical patent/WO2018074627A1/ko
Priority to US16/380,031 priority Critical patent/US11095803B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/04—Context-preserving transformations, e.g. by using an importance map
    • G06T3/047—Fisheye or wide-angle transformations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information

Definitions

  • the present invention relates to a surveillance camera and a monitoring method interlocked with a POS device, and more particularly, to a surveillance camera and a monitoring method for monitoring a corresponding area according to an order history input to a POS device.
  • a POS terminal or system is an abbreviation of Point Of Sales Terminal (system), which refers to an electronic system or device for integrating and managing sales and inventory management.
  • system refers to an electronic system or device for integrating and managing sales and inventory management.
  • the field of use of such POS devices is diversified mainly in stores that sell products directly to consumers such as convenience stores, restaurants, and large marts.
  • SCM supply chain management
  • CRM customer relationship management
  • mPOS mobile POS
  • ePOS The Ethernet POS market is expanding, adding the ability to send and receive useful information via mobile devices or network connections.
  • surveillance systems are widely used in various places, including banks, department stores, and residential areas. This surveillance system is mainly used for crime prevention and security purposes. In addition, the most commonly used surveillance system is to install a camera at an appropriate position to capture an area to be monitored, and the user can monitor the image captured by the camera by using a connected monitoring device. Closed Circuit Television (CCTV) system.
  • CCTV Closed Circuit Television
  • the receipt information recorded in the POS is transmitted to a video storage device such as a DVR (Digital Video Recorder) or a NVR (Network Video Recorder), and then stored together with the surveillance video to retrieve the receipt information when the image is retrieved later.
  • a video storage device such as a DVR (Digital Video Recorder) or a NVR (Network Video Recorder)
  • DVR Digital Video Recorder
  • NVR Network Video Recorder
  • the POS device receives the completed transaction information from the user; Transmitting, by the POS device, the received transaction information to the camera management device; Transmitting, by the camera management apparatus, the transmitted transaction information to the camera; And capturing an image of the surveillance area corresponding to the completed transaction information when the camera receives the completed transaction information.
  • the surveillance camera of the present invention may be a PTZ camera and may sequentially capture an image of the surveillance region.
  • the surveillance camera of the present invention may also be a fisheye camera.
  • the stored image may be searched using the search unit of the camera management apparatus of the present invention.
  • the surveillance camera of the present invention includes: an imaging unit configured to capture an image of a surveillance area corresponding to transaction information received from a POS device and transmitted through a camera management device from when the transaction information is transmitted; And a communication unit configured to transmit the captured image to the camera management apparatus so that the camera management apparatus stores the corresponding transaction information together with the corresponding transaction information.
  • Transaction information entered into the POS device is saved along with the captured image for easy retrieval.
  • FIG. 1 is a view showing the overall configuration of the operation of the surveillance camera system according to an embodiment of the present invention.
  • FIG. 2 is a block diagram showing the configuration of a POS device according to an embodiment of the present invention.
  • FIG. 3 is a block diagram showing the configuration of a surveillance camera according to an embodiment of the present invention.
  • FIG. 4 is a block diagram showing the configuration of a camera management apparatus according to an embodiment of the present invention.
  • FIG. 5 is a diagram illustrating a situation in which the surveillance cameras according to the first and second embodiments of the present invention are installed.
  • FIG. 6 is a plan view of the situation and the surveillance region in which the surveillance camera system according to the first embodiment of the present invention is installed;
  • FIG. 7 is a view illustrating an image captured by a surveillance camera system according to a first embodiment of the present invention stored in a camera management apparatus.
  • FIG. 8 is a plan view of a situation in which a surveillance camera system according to a second exemplary embodiment of the present invention is installed, and a monitoring region.
  • FIG. 9 is a diagram illustrating an image captured by a surveillance camera system and a surveillance region according to a second exemplary embodiment of the present invention.
  • FIG. 10 is a diagram illustrating an image of a dwarf image captured by a surveillance camera system according to a second exemplary embodiment of the present invention with respect to one surveillance region.
  • FIG. 11 is a flowchart illustrating a monitoring method according to an embodiment of the present invention.
  • FIG. 12 is a diagram illustrating a search interface provided by a search unit according to an exemplary embodiment of the present invention.
  • FIG. 1 is a view showing the overall configuration of the operation of the surveillance camera 2 system according to an embodiment of the present invention.
  • the surveillance camera 2 system of the present invention stores an image captured by a camera 2 for monitoring a peripheral area, a POS device 1 receiving an order, and a camera 2, and stores the camera 2. It includes a camera management device 7 that can perform a management operation such as control.
  • the POS device 1 is an order device capable of performing a POS function.
  • the POS device 1 may receive transaction information from a user and transfer the transaction information to the camera 2 through the camera management device 7 and the camera management device 7.
  • the POS device 1 may be a PC-based POS device 1 on the market, and is composed of devices such as smartphones, tablet PCs, laptops, and the like that are easy to carry and move.
  • the entire POS device 1 may be configured by mPOS.
  • Transaction information that can be input by the POS device 1 includes, but is not limited to, a watch area number, watch area occupancy time, sales, order history, member information, and personnel.
  • the camera management device 7 is connected to the POS device 1 and the camera 2, controls the camera 2 using the information received from the POS device 1, and stores the image received from the camera 2. And a device that serves to manage.
  • the camera 2 is a device for capturing an image of the surrounding area.
  • the camera 2 receives light reflected and emitted from the surrounding area, converts the light into an electrical signal, and transmits the converted light to the camera management apparatus 7.
  • the detailed structure of the camera 2 is mentioned later.
  • the peripheral area is an area that can be monitored by the camera 2, and the camera 2 is generally disposed to face an area to be monitored among the peripheral areas.
  • FIG. 2 is a block diagram showing the configuration of the POS device 1 according to the embodiment of the present invention.
  • the POS device 1 of the present invention includes a POS communication unit 23 and an input unit 12.
  • the input unit 12 is a component provided so that the POS device 1 may receive transaction information from a user.
  • the input unit 12 may also display a user interface for user convenience.
  • the input unit 12 may be a device which is not easily moved, such as a mobile device such as a smartphone, a tablet PC, a laptop, a desktop, a video wall, but is not limited thereto.
  • the input unit 12 may use a touch sensor, a mouse, a keyboard, a joystick, a remote controller, etc. as an input means, but is not limited thereto.
  • the input unit 12 may further receive a tag corresponding to the transaction information from the user and store the tag with a captured image later. If there is anything unusual in the surveillance area, the tag is used to mark the situation so that it is easy to retrieve the corresponding image later.
  • the POS communication unit 23 is connected to the first communication unit 71 of the camera management apparatus 7, which will be described later, so that the POS device 1 receives transaction information and a tag input from the user through the input unit 12. 71) It is the component that plays the role of transmitting to.
  • the POS communication unit 23 may be connected to the first communication unit 71 by wire or wireless, or may be connected through a network.
  • the POS device 1 is a device that facilitates the calculation and management of transaction information
  • the POS device 1 provides a payment unit (not shown) to enable payment for the input transaction information, and outputs a receipt. May be provided).
  • a payment unit (not shown) to enable payment for the input transaction information, and outputs a receipt. May be provided).
  • the configuration of the POS device 1 is not limited thereto and may add a function required for transaction history management.
  • FIG. 3 is a block diagram showing the configuration of the camera 2 according to the embodiment of the present invention.
  • the type of camera 2 may be a general box camera, a PTZ (Pan, Tilt, Zoom) camera, a digital PTZ (DPTZ) camera, a 4K camera, a fisheye camera, etc., but the type of the camera 2 is not limited thereto. .
  • the camera 2 of the present invention includes a second communication unit 23, an imaging unit 24, and a control unit 25.
  • the imaging unit 24 is a general camera configuration, and is generally located at the front of the camera 2, and includes a lens system for receiving and condensing light and an image sensor for obtaining a valid signal from the light condensed by the lens system.
  • the image sensor may be a charge-coupled device (CCD), a complementary metal-oxide-semiconductor (CMOS), or the like, but is not limited thereto.
  • the imaging unit 24 may include a video encoder such as a VGA (Video Graphics Array) encoder in order to make the optical signal recognized by the image sensor into a form that can be stored. The data is processed through a video encoder, stored or transmitted, and processed into data that can be played back.
  • VGA Video Graphics Array
  • the second communication unit 23 is connected to the first communication unit 71 of the camera management apparatus 7 to be described later, and receives transaction information from the first communication unit 71 and transmits the transaction information to the control unit 25 of the camera 2. Component. In addition, it is connected to the imaging unit 24 serves to transmit the image captured by the imaging unit 24 to the first communication unit (71). In addition, transaction information corresponding to the captured surveillance area may be further transmitted.
  • the second communication unit 23 may be connected to the first communication unit 71 by wire or wireless, or may be connected through a network.
  • the camera 2 may include a sensor (not shown).
  • a sensor a gyro sensor or an acceleration sensor, which is a sensor capable of measuring the attitude of the surveillance camera 2, may be used.
  • the control unit 25 is a component that controls the posture of the camera 2.
  • the controller 25 needs to physically convert the posture of the camera 2 according to the control signal.
  • the controller 25 may rotate the imaging unit 24 using a driving member (not shown) such as a motor. If the camera 2 used in the surveillance camera 2 system of the present invention is a type that can determine the direction of viewing only when the posture of the entire camera 2 is corrected, the camera can be modified so that the posture of the entire camera 2 can be corrected.
  • the driving member may be used at the portion where (2) is connected to the fixed surface. If the camera 2 used in the surveillance camera system of the present invention is a PTZ camera or the like capable of controlling only the imaging unit 24 present in the housing, the driving member is connected to the imaging unit 24 to connect the imaging unit 24. Can be formed to control.
  • the controller 25 may further include an encoder to determine the driving degree of the controller 25.
  • the controller 25 may store the coordinates of the surveillance region corresponding to the transaction information in advance so that the camera 2 monitors the surveillance region corresponding to the transaction information received from the camera 2 control device. Therefore, the controller 25 may further include a storage medium (not shown) for storing simple information. The controller 25 may control the attitude of the camera 2 so that the camera 2 or the imaging unit 24 faces the coordinates of the pre-stored surveillance area when the transaction information is transmitted.
  • FIG. 4 is a block diagram showing the configuration of the camera management apparatus 7 according to the embodiment of the present invention.
  • the camera management apparatus 7 may include a first communication unit 71 and a storage unit 72, and may further include an image processing unit 73 and a search unit 74.
  • the first communication unit 71 is connected to the POS communication unit 23 of the POS device 1 and the second communication unit 23 of the camera 2.
  • the POS device 1 receives the transaction information or the tag received from the user through the input unit 12 from the first communication unit 71, and the image captured by the camera 2 and the corresponding transaction information are transmitted to the second communication unit ( Received from 23 serves to provide a storage unit 72 can be stored.
  • the first communication unit 71 may be connected to the POS communication unit 23 and the second communication unit 23 by wire or wireless, or may be connected through a network.
  • the storage unit 72 is a component that stores a captured image, transaction information, and tag received by the first communication unit 71. Therefore, a storage medium should be used as a means for storing such data.
  • the storage medium may be a hard disk drive (HDD), a solid state drive (SSD), a compact flash (CF), a secure digital (SD) card, or the like, but is not limited thereto.
  • the image processor 73 processes the captured image received from the camera 2 and transmits the captured image to the storage unit 72.
  • the image processing unit 73 may serve to transfer the transaction information, the tag, etc. received from the POS device 1 so as to correspond to each other and to store the same in the storage unit 72.
  • the image processing unit 73 according to the second embodiment, which will be described later, may make a corrected image by dewarping the crop region and transmit the image to the storage unit 72.
  • the image processing unit 73 should be capable of basic logical operations, a semiconductor device capable of logical operations such as a central processing unit (CPU), a micro controller unit (MCU), a microprocessor, a field programmable gate array (FPGA), etc. may be used. It is not limited.
  • CPU central processing unit
  • MCU micro controller unit
  • FPGA field programmable gate array
  • the search unit 74 is a component capable of searching for an image stored in the storage unit 72. Accordingly, a search interface 8 for a user may be provided through a display device, and a search condition input by a user may be input through the search interface 8, and a search result may be displayed. In order to perform such a function, the search unit 74 may be configured as a smart phone, a laptop, a desktop, and the like, but is not limited thereto. The search unit 74 may provide a touch sensor, a mouse, a keyboard, a joystick, a remote controller, or the like as an input means, but is not limited thereto.
  • the first communication unit 71, the second communication unit 23, the POS communication unit 11 constituting the present invention includes a network module for wired and wireless communication, which may be composed of a wireless network module 3G modem or LTE modem Other ZigBee, WLAN, Bluetooth, etc. may be used.
  • the wired network module may include an Ethernet card (or NIC card), a chip, a serial port for using a cable such as RS-485, RS-232, and a universal serial bus (USB) port. It is not limited.
  • FIG. 5 is a diagram illustrating a situation in which the surveillance cameras 21 and 22 are installed according to the first and second embodiments of the present invention.
  • a system of surveillance cameras 21 and 22 is installed in a predetermined space in which a table is arranged.
  • a restaurant including the tables 31, 32, 33, 34 as the main monitoring area may be an object thereof
  • the camera 2 which requires a change in posture for changing the surveillance area is used.
  • the PTZ camera 21 can be used.
  • the surveillance cameras 21, 22 are preferably installed on one wall or ceiling of the space.
  • a camera 21 is installed at one side of the ceiling of the space, and a total of the first table 31, the second table 32, the third table 33, and the fourth table 34 is located at the bottom of the space. It is shown that four tables are arranged.
  • a user When a customer enters a space, occupies a table, places an order, and the like, a user inputs transaction information into the POS device 1 of the surveillance camera 2 system of the present invention.
  • Transaction information input through the input unit 12 of the POS device 1 is transmitted to the first communication unit 71 of the camera management device 7 through the POS communication unit 23, the first communication unit 71 is received The transaction information is again transmitted to the second communication unit 23 of the camera 2.
  • the camera 21 reads coordinates of the surveillance area corresponding to the received transaction information from a storage medium included in the controller 25, and the controller 25 captures the coordinates so that the controller 25 captures an image of the coordinates.
  • the posture of the camera 21 is controlled.
  • the coordinates of the surveillance area may be PTZ coordinates for controlling the attitude of the PTZ camera 2.
  • the coordinates of the surveillance region corresponding to the transaction information may be received from the camera management device 7 together with the transaction information.
  • the storage unit 72 of the camera management apparatus 7 should further store the coordinate information of the surveillance area corresponding to the transaction information.
  • Fig. 6 is a plan view of the situation and surveillance area where the surveillance camera 2 system according to the first embodiment of the present invention is installed and viewed from above.
  • the camera 21 has a surveillance area corresponding to each table, and the surveillance area is formed so that the table can be sufficiently identified in the captured image.
  • the position of the surveillance area may be set directly by the user using the POS device 1 or the camera management device 7, or may be preset and used by an operator when the initial surveillance camera 2 system is installed.
  • each surveillance area will be an area exposed in an image captured from a camera 21 installed on one side of the ceiling of the space, the width becomes wider from the side closer to the camera 21 toward the farther side. It will have a trapezoidal shape that includes it.
  • the first table monitoring area 41 and the third table monitoring area are assumed. (43) is shown in a trapezoid in the figure.
  • the control unit 25 of the camera 21 controls the attitude of the camera 21 in accordance with the coordinates of the first table surveillance region 41 and the third table surveillance region 43.
  • the imaging unit 24 continuously captures an image
  • the control unit 25 keeps the camera 21 in the first table monitoring area 41 for a predetermined time and then moves the camera to the third table monitoring area 43.
  • the direction in which 21 is directed moves.
  • the controller 25 moves the camera 21 so that the camera 21 faces the first table monitoring area after the same predetermined time elapses. This process is repeated until the end of monitoring. Therefore, the controller 25 of the camera 21 according to the first embodiment of the present invention may further include a timer.
  • the image of each surveillance region is sequentially captured by circulating the surveillance regions and staying in each surveillance region for a predetermined time to capture an image.
  • the first table surveillance region 41 and the third table surveillance region 43 may be cameras. 21) sequentially traverses to capture the image.
  • the plurality of surveillance regions corresponding to the one transaction information are sequentially traversed to capture an image.
  • the time that the camera 21 stays in each surveillance area may be set to 1 minute, but is not limited thereto.
  • the camera 21 may traverse the monitoring area corresponding to the transaction information of the monitoring target in the input order, but the order in which the camera 21 traverses is not limited thereto, and the entire surveillance area may be clockwise or clockwise. You can also choose to traverse counter-clockwise.
  • the operation of monitoring the surveillance area by the camera 21 is performed by the user through the camera management device 7 by inputting the transaction information that has been settled due to calculation completion or the like on the input unit 12 of the POS device 1. Is repeated until it is delivered to the camera 21.
  • the controller 25 controls the posture so that the camera 21 does not face the surveillance area corresponding to the transaction information. Therefore, the monitoring of the surveillance area is naturally terminated.
  • FIG. 7 is a diagram illustrating an image captured by the surveillance camera 21 system according to the first embodiment of the present invention in the camera management apparatus 7.
  • the captured image is transmitted to the first communication unit 71 through the second communication unit 23 and stored in the storage unit 72. At this time, the captured captured image may be stored together with the corresponding transaction information received from the POS device 1 via the image processing unit 73.
  • the first table 31 appears in the captured image while the camera 21 stays in the first table monitoring area 41. Since the corresponding transaction information is stored together by the image processing unit 73, a phrase indicating that the first table 31 may be displayed on a part of the image. In addition, transaction information and tags stored together can be displayed together with the captured image.
  • Fig. 8 is a plan view of the situation and surveillance area where the surveillance camera 22 system according to the second embodiment of the present invention is installed.
  • the camera may be a fisheye camera 22 capable of wide-angle imaging.
  • the camera 22 may be a recently introduced 360 ° camera.
  • the 360 ° camera 2 refers to a camera 2 in which all directions can be photographed without attaching a plurality of fisheye lenses so that the camera 2 does not need to pan or tilt directly.
  • the camera 22 according to the second embodiment of the present invention is not limited thereto and may be various kinds of cameras if the original image is distorted and needs to be corrected to some extent.
  • Correcting the original image of the distorted shape formed by the fisheye lens is commonly referred to as 'Distortion Calibration' or 'Dewarp', which is based on the projection method used in the fisheye lens 20
  • a parameter such as the focal length of the lens 20, the optical center position, etc. are made through an appropriate equation.
  • the camera management apparatus 7 may dwarp the original image into the corrected image through software, but the camera 22 itself performs a dwarf operation to the camera management apparatus 7. You can also send.
  • the surveillance camera 22 system is installed in a predetermined space where a table is arranged.
  • the predetermined space is the same as the space described in the first embodiment.
  • the main purpose is to monitor the table attached to the floor in the space, it is preferable that the surveillance camera 22 using the fisheye lens is installed on the ceiling of the space. Therefore, in the second embodiment, the camera 22 is installed at the center of the ceiling of the space and the camera 22 is surrounded by the tables.
  • the transaction information transfer process after the customer enters the space, occupies a table, places an order, and the like is the same as the description of the first embodiment.
  • the imaging unit 24 of the camera 22 according to the second embodiment monitors the entire area. Therefore, instead of reading the coordinates of the surveillance region corresponding to the received transaction information, the posture is not controlled through the control unit 25, and the second communication unit 23 cuts out the region on the currently captured image corresponding to the coordinates of the surveillance region. Transfer to the camera management device 7 through.
  • the coordinates of the surveillance area may be logical coordinates on the captured image, not physical coordinates, and may be coordinates including distances and widths separated from the coordinates of the vertices or the center because they designate a certain area instead of a single point.
  • the kind of possible coordinates is not limited to this.
  • the coordinates of the surveillance region corresponding to the transaction information may be received from the camera management device 7 together with the transaction information.
  • the camera 2 may capture the entire imageable image and transmit the captured image to the camera management apparatus 7 without cutting and transmitting the image of the surveillance area.
  • the camera management apparatus 7 stores the coordinates of the surveillance area corresponding to the received transaction information and stores the coordinates of the surveillance area in the storage unit 72 together with the received captured image. An image of the surveillance area corresponding to the information may be cut out and provided.
  • each surveillance area will be an area exposed in the image captured from the camera 22 installed in the ceiling center of the space, so that the width of the trapezoid becomes wider from the side closer to the camera 2 toward the far side.
  • the second table monitoring area 42 and the fourth table monitoring area 44 are changed. It is shown by the trapezoid in the figure.
  • the imaging unit 24 of the camera 22 continuously captures an image of the entire surveillance region, cuts an image of the surveillance region corresponding to the transmitted transaction information, and transmits the image to the camera management apparatus 7.
  • the operation of monitoring the surveillance area by the camera 22 is performed by the user by inputting the transaction information that has been settled due to the calculation completion or the like on the input unit 12 of the POS device 1 and the corresponding transaction information through the camera management device 7. Is made continuously until delivered to the camera 22.
  • the controller 25 stops the operation of cutting and transmitting an image of the surveillance area corresponding to the transaction information. Therefore, the monitoring of the surveillance area is naturally terminated.
  • FIG. 9 is a view showing an image captured by the surveillance camera 22 system and the surveillance region according to the second embodiment of the present invention.
  • the surveillance area is also formed in the shape of a polygon with a curved edge.
  • the second table 32 and the fourth table 34 are designated to be monitored, the second table monitoring area 62 and the fourth table monitoring area 64 indicate the same area as the monitoring area of FIG. 9. Although present, the form is shown to be different.
  • the camera 22 may cut out an image of the surveillance area and transmit the image to the camera management apparatus 7, or transmit the entire image, and the camera management apparatus 7 may correspond to the surveillance region at the time of searching and viewing. You can also crop the image and provide it.
  • FIG. 10 is a view showing an image of a dwarf image captured by a surveillance camera 22 system according to a second embodiment of the present invention with respect to one surveillance region.
  • the captured image is transmitted to the first communication unit 71 through the second communication unit 23 and stored in the storage unit 72. At this time, the captured captured image may be stored together with the corresponding transaction information received from the POS device 1 via the image processing unit 73.
  • the original image captured will be in a distorted form. Therefore, the captured original image can be dwarped in the camera (2) step to be transmitted to the camera management device (7), or after the camera management device (7) dwarfs the transmitted original image, the image corresponding to the surveillance area to observe You can cut out and provide the cut, or you can cut the area corresponding to the surveillance area you want to observe from the original image and then dwarf it. Since the image of the fourth table shown in FIG. 10 is dwarped, the distortion appears to be corrected.
  • FIG. 11 is a flowchart illustrating a monitoring method according to an embodiment of the present invention.
  • the monitoring method starts with a user inputting transaction information into the surveillance camera 2 system POS device 1 (S10). You can also enter more tags.
  • Transaction information input through the input unit 12 of the POS device 1 is transmitted to the first communication unit 71 of the camera management device 7 through the POS communication unit 23, the first communication unit 71 is received The transaction information is again transmitted to the second communication unit 23 of the camera 2.
  • the camera 2 reads the coordinates of the surveillance region corresponding to the received transaction information from the storage medium included in the controller 25, and causes the imaging unit 24 to start monitoring the surveillance region (S20).
  • the controller 25 controls the posture of the camera 2 with the corresponding coordinates so as to capture an image of the corresponding coordinates, and a fisheye camera for capturing the entire image. If used, capture the entire image.
  • the controller 25 controls the posture of the imaging unit 24 or the camera 2 so as to sequentially traverse the surveillance region, and captures an image and transmits it to the camera management apparatus 7.
  • the entire image may be captured and transmitted to the camera management apparatus 7, or only the image of the surveillance area may be cut out and transmitted.
  • the camera management apparatus 7 stores the received captured image in the storage unit 72 together with the transaction information corresponding thereto (S30).
  • the image processor 73 may be used to combine the information and the image. Since the transaction information and the tag may be input even after the first input of the transaction information, the input unit 12 of the POS device 1 receives the transaction information and the tag information corresponding to each monitoring area even during monitoring. It may be transmitted to the first communication unit 71 through the 23, and stored in the storage unit 72.
  • the transaction is terminated at the POS device 1 (S40), so that the user inputs the completed transaction information to the POS device 1 input unit 12. Therefore, the completed transaction information is transmitted to the first communication unit 71 of the camera management device 7 through the POS communication unit 23, and the first communication unit 71 returns the received transaction information to the second communication unit of the camera 2 again. Transfer to 23 (S50).
  • the camera 2 receives the completed transaction information and ends the monitoring of the corresponding surveillance area (S60).
  • the control unit 25 no longer faces the camera 21 or the imaging unit 24 to the corresponding area, thereby terminating the monitoring of the corresponding area.
  • the monitoring may be terminated by causing the camera 22 to stop cutting and transmitting an image of the corresponding area or by storing the end time of the monitoring time of the corresponding area. .
  • FIG. 12 illustrates a search interface 8 provided by the search unit 74 according to an exemplary embodiment of the present invention.
  • a user may search for a desired captured image through the search interface 8 provided by the display device of the search unit 74.
  • the user may input the start time of the situation to be searched through the start time input unit 81, and input the end time through the end time input unit 82 to search for monitoring contents within a corresponding time range.
  • a search field may be designated through the filter input unit 83, and transaction information may be input through the keyword input unit 84 to perform a search.
  • the search results according to the user-specified contents are output to the result output unit 85 as a list, and configured to be checked by clicking or touching the image to check the corresponding image stored in the storage unit 72.
  • the field searchable with the contents shown in FIG. 14 is not limited.
  • the surveillance camera system may include a plurality of POS devices 1. Accordingly, as described above, using the transaction information received from the plurality of POS devices 1, the monitoring may be performed by sequentially capturing an image of the surveillance region or selectively storing a crop image of the surveillance region.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Computer Security & Cryptography (AREA)
  • Alarm Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 POS 기기를 이용한 감시 카메라 및 이를 이용한 감시 방법에 관한 것으로, 사용자로부터 거래정보를 POS 기기로 입력받는 단계; 입력받은 상기 거래정보를 상기 POS 기기가 카메라 관리 장치로 전송하는 단계; 전송받은 상기 거래정보를 상기 카메라 관리 장치가 카메라로 전송하는 단계; 상기 전송된 거래정보에 대응하는 감시 영역의 이미지를 상기 주문 정보가 입력될 때부터 상기 카메라가 캡쳐하는 단계; 상기 캡쳐된 이미지를 상기 카메라가 상기 카메라 관리 장치로 전송하는 단계; 및 상기 카메라로부터 전송된 이미지를 대응하는 상기 거래정보와 함께 저장부에 저장하는 단계를 포함한다.

Description

POS 기기와 연동된 감시 카메라 및 이를 이용한 감시 방법
본 발명은 POS 기기와 연동된 감시 카메라 및 감시 방법에 관한 것으로, 보다 상세하게는 POS 기기에 입력된 주문 내역에 따라 해당 영역을 감시하는 감시 카메라 및 감시 방법에 관한 것이다.
POS 단말기 혹은 시스템은 Point Of Sales Terminal(system)의 약어로, 판매 및 재고 관리를 통합하여 관리하기 위한 전자 시스템 혹은 장치를 뜻한다. 이러한 POS 기기의 사용분야는 편의점, 음식점, 대형 마트 등으로 소비자에게 직접 상품을 판매하는 매장을 중심으로 다양하다. 최근 그 유통 과정과 지출 형태가 복잡해지면서, SCM(Supply Chain Management), CRM(Customer Relationship Management) 등과 융합되는 형식의 시스템이 도입되는 추세이고, 모바일 인터넷 기술의 발달로 mPOS(mobile POS), ePOS(Ethernet POS) 단말기 시장이 확대되어 모바일 기기를 이용하거나 네트워크 연결을 통해 유용한 정보를 수신하거나 송출할 수 있는 기능이 추가되는 추세에 있다.
일반적으로 은행, 백화점, 일반 주택가를 비롯한 다양한 장소에서 감시 시스템이 널리 사용되고 있다. 이러한 감시 시스템은 범죄 예방, 보안을 목적으로 주로 사용된다. 그리고 이러한 감시 시스템으로 가장 많이 사용하는 시스템은, 감시를 원하는 영역을 촬영할 수 있도록 적절한 위치에 카메라를 설치하고, 사용자는 카메라가 촬영한 영상을 연결된 모니터링 장치 등을 이용하여 모니터링 함으로써 감시할 수 있는 폐쇄회로 텔레비전(Closed Circuit Television: CCTV) 시스템이다.
종래의 기술 중에는 POS에 기록되는 영수증 정보를 DVR(Digital Video Recorder), NVR(Network Video Recorder)과 같은 영상저장장치에 전송한 후, 이를 감시 영상과 함께 저장해서 영상을 추후 검색할 때 영수증 정보를 메타데이터로 사용하는 방법이 존재했다. 카운터에 설치된 감시 카메라와 POS 기기를 연동하여 판매자와 구매자의 영상정보와 영수증 정보를 함께 저장해 판매자 혹은 구매자의 부정행위를 감시하는 것에 중점을 둔 것이다. 따라서 마트나 편의점 등에서 유용하게 사용될 수 있었으나, 단순히 주문 정보를 검색 키워드로 사용하거나 화면상에 같이 계산 정보를 표시하는 역할을 할 수 있었고, 원하는 기타 영역을 감시하거나 이를 같이 저장해 검색에 유용하게 사용하는 등의 기능은 수행할 수 없었다.
본 발명이 해결하고자 하는 과제는, 거래내역에 따라 필요한 관심 영역을 감시하고 상응하는 정보와 함께 캡쳐된 이미지를 저장해서 검색이 용이하도록 하는 POS기기와 연동된 감시 카메라 시스템을 제공하는 것이다.
본 발명의 과제들은 이상에서 언급한 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기 과제를 해결하기 위한 감시 방법은, 사용자로부터 거래정보를 POS 기기로 입력받는 단계; 입력받은 상기 거래정보를 상기 POS 기기가 카메라 관리 장치로 전송하는 단계; 전송받은 상기 거래정보를 상기 카메라 관리 장치가 카메라로 전송하는 단계; 상기 전송된 거래정보에 대응하는 감시 영역의 이미지를 상기 주문 정보가 입력될 때부터 상기 카메라가 캡쳐하는 단계; 상기 캡쳐된 이미지를 상기 카메라가 상기 카메라 관리 장치로 전송하는 단계; 및 상기 카메라로부터 전송된 이미지를 대응하는 상기 거래정보와 함께 저장부에 저장하는 단계를 포함할 수 있다.
또한 상기 POS 기기가 사용자로부터 완료된 거래정보를 입력받는 단계; 입력받은 상기 완료된 거래정보를 상기 POS 기기가 상기 카메라 관리 장치로 전송하는 단계; 전송된 상기 완료된 거래정보를 상기 카메라 관리 장치가 상기 카메라로 전송하는 단계; 및 상기 카메라가 상기 완료된 거래정보를 전송받을 때 상기 완료된 거래정보에 대응하는 감시 영역의 이미지를 캡쳐하는 동작을 종료하는 단계를 더 포함할 수 있다.
본 발명의 감시 카메라는 PTZ 카메라일 수 있고, 순차적으로 감시 영역의 이미지를 캡쳐할 수 있다. 또한 본 발명의 감시 카메라는 어안 카메라일 수 있다.
본 발명의 카메라 관리 장치의 검색부를 이용해 저장된 이미지를 검색할 수 있다.
본 발명의 감시 카메라는 POS 기기가 입력받고, 카메라 관리 장치를 통해 전송된 거래정보에 대응하는 감시 영역의 이미지를 상기 거래정보가 전송될 때부터 캡쳐하는 촬상부; 및 상기 캡쳐된 이미지를 상기 카메라 관리 장치가 상기 대응하는 거래정보와 함께 저장하도록 상기 카메라 관리 장치로 전송하는 통신부를 포함할 수 있다.
본 발명의 기타 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.
본 발명의 실시예들에 의하면 적어도 다음과 같은 효과가 있다.
POS 기기에 입력된 거래정보에 따라 감시 영역을 설정하여 필요한 영역만을 촬영, 저장 공간을 절약할 수 있다.
POS 기기에 입력된 거래정보를 캡쳐된 영상과 함께 저장해서 검색이 용이하게 한다.
본 발명에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다. 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 실시예에 따른 감시 카메라 시스템이 작동하는 전체 구성을 표현한 도면이다.
도 2는 본 발명의 실시예에 따른 POS 기기의 구성을 나타낸 블록도이다.
도 3은 본 발명의 실시예에 따른 감시 카메라의 구성을 나타낸 블록도이다.
도 4는 본 발명의 실시예에 따른 카메라 관리 장치의 구성을 나타낸 블록도이다.
도 5는 본 발명의 제1 실시예 및 제2 실시예에 따른 감시 카메라가 설치된 상황을 표현한 도면이다.
도 6은 본 발명의 제1 실시예에 따른 감시 카메라 시스템이 설치된 상황 및감시 영역을 상방에서 바라본 평면도이다.
도 7은 본 발명의 제1 실시예에 따른 감시 카메라 시스템이 감시영역에 대해서 캡쳐한 이미지가 카메라 관리 장치에 저장된 형태를 나타낸 도면이다.
도 8은 본 발명의 제2 실시예에 따른 감시 카메라 시스템이 설치된 상황 및감시 영역을 상방에서 바라본 평면도이다.
도 9는 본 발명의 제2 실시예에 따른 감시 카메라 시스템이 캡쳐한 이미지및 감시 영역을 나타낸 도면이다.
도 10은 본 발명의 제2 실시예에 따른 감시 카메라 시스템이 일 감시영역에 대해서 캡쳐한 이미지를 드워프 한 이미지를 나타낸 도면이다.
도 11은 본 발명의 실시예에 따른 감시 방법을 나타낸 순서도이다.
도 12는 본 발명의 실시예에 따른 검색부가 제공하는 검색 인터페이스를 나타낸 도면이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다.
또한, 본 명세서에서 기술하는 실시예들은 본 발명의 이상적인 예시도인 단면도 및/또는 개략도들을 참고하여 설명될 것이다. 따라서, 제조 기술 및/또는 허용 오차 등에 의해 예시도의 형태가 변형될 수 있다. 또한 본 발명에 도시된 각 도면에 있어서 각 구성 요소들은 설명의 편의를 고려하여 다소 확대 또는 축소되어 도시된 것일 수 있다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭하며, "및/또는"은 언급된 아이템들의 각각 및 하나 이상의 모든 조합을 포함한다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예의 구성을 상세히 설명하기로 한다.
도 1은 본 발명의 실시예에 따른 감시 카메라(2) 시스템이 작동하는 전체 구성을 표현한 도면이다.
도 1을 참조하면, 본 발명의 감시 카메라(2) 시스템은 주변 영역을 감시하는 카메라(2), 주문을 입력받는 POS 기기(1) 및 카메라(2)가 캡쳐한 영상을 저장하고 카메라(2)를 제어하는 등의 관리 작업을 수행할 수 있는 카메라 관리 장치(7)를 포함한다.
POS 기기(1)는 POS 기능을 수행할 수 있는 주문 장치로, 거래 정보를 사용자로부터 입력받아 카메라 관리 장치(7)와 카메라 관리 장치(7)를 통해 카메라(2)로 전달할 수 있다. POS 기기(1)는 시중의 PC 기반의 POS 기기(1)일 수도 있고, 스마트폰(Smartphone), 태블릿 PC(Tablet PC), 랩탑(Laptop) 등 휴대 및 이동이 용이한 장치로 구성되어 ePOS 또는 mPOS로 전체 POS 기기(1)가 구성될 수도 있다.
POS 기기(1)가 입력받을 수 있는 거래정보에는 감시 영역 번호, 감시 영역 점유 시간, 매출액, 주문 내역, 회원 정보, 인원등이 있으나 이에 제한되지 않는다.
카메라 관리 장치(7)는 POS 기기(1) 및 카메라(2)와 연결되며, POS 기기(1)로부터 전달받은 정보를 이용해 카메라(2)를 제어하고, 카메라(2)로부터 전달받은 이미지를 저장 및 관리하는 역할을 하는 장치이다.
카메라(2)는 주변 영역의 이미지를 캡쳐하는 장치이다. 카메라(2)는 주변 영역으로부터 반사 및 방출된 빛을 받아들이고, 이를 전기적 신호로 변환하여 카메라 관리 장치(7)로 전송하는 동작을 수행한다. 카메라(2)의 자세한 구성에 대해서는 후술한다. 주변 영역은 카메라(2)가 감시할 수 있는 영역으로, 카메라(2)는 일반적으로 주변 영역 중 감시하고자 하는 영역을 향하도록 배치된다.
도 2는 본 발명의 실시예에 따른 POS 기기(1)의 구성을 나타낸 블록도이다.
도 2를 참조하면, 본 발명의 POS 기기(1)는 POS 통신부(23)와 입력부(12)를 포함한다는 것을 알 수 있다.
입력부(12)는 POS 기기(1)가 사용자로부터 거래정보를 입력받을 수 있도록 제공되는 구성요소이다. 입력부(12)는 사용자 편의를 위해 사용자 인터페이스를 함께 디스플레이 할 수 있다. 이러한 입력부(12)는 스마트폰, 태블릿 PC, 랩탑 등 이동이 용이한 장치, 데스크탑(Desktop), 비디오 월(Video Wall) 등 이동이 용이하지 않은 장치를 사용할 수도 있으나 이에 제한되지 않는다.
입력부(12)는 입력수단으로 터치 센서, 마우스, 키보드, 조이스틱, 리모콘 등을 사용할 수 있으나 이에 제한되지 않는다.
입력부(12)는 그 밖에 거래정보에 대응하는 태그를 사용자로부터 더 입력받아 추후 캡쳐된 이미지와 함께 저장하도록 할 수 있다. 해당 감시 영역에서 특이사항이 있었던 경우 태그로 상황을 표시해 나중에 대응하는 이미지를 검색하기 용이하도록 하는 것이다.
POS 통신부(23)는 후술할 카메라 관리 장치(7)의 제1 통신부(71)와 연결되어, POS 기기(1)가 입력부(12)를 통해서 사용자로부터 입력받는 거래정보 및 태그를 제1 통신부(71)로 전송하는 역할을 하는 구성요소이다. POS 통신부(23)는 제1 통신부(71)와 유무선으로 연결될 수 있으며, 네트워크를 통해서 연결될 수도 있다.
이 밖에도 POS 기기(1)는 거래정보를 계산 및 관리하기 편하도록 하는 기기이므로, 입력받은 거래정보에 대해서 결제가 가능하도록 결제부(미도시)를 제공하고, 영수증을 출력하기 위한 POS 프린터(미도시)를 제공할 수 있다. 또한 POS 통신부(23)를 통해서 카드 결제 정보 등을 네트워크로 송수신 할 수 있다. POS 기기(1)의 구성은 이에 제한되지 않으며 거래내역 관리에 필요한 기능을 추가할 수 있다.
도 3은 본 발명의 실시예에 따른 카메라(2)의 구성을 나타낸 블록도이다.
카메라(2)의 종류는 일반 박스형 카메라, PTZ(Pan, Tilt, Zoom) 카메라, DPTZ(Digital PTZ) 카메라, 4K 카메라, 어안(Fisheye) 카메라 등일 수도 있으나 카메라(2)의 종류는 이에 제한되지 않는다.
도 3을 참조하면, 본 발명의 카메라(2)는 제2 통신부(23), 촬상부(24) 및 제어부(25)를 포함한다.
촬상부(24)는 일반적인 카메라의 구성으로, 일반적으로 카메라(2)의 전면부에 위치하며, 빛을 받아들이고 집광하는 렌즈 시스템과 렌즈 시스템이 집광한 빛으로부터 유효한 신호를 얻어내는 이미지 센서를 포함한다. 상기 이미지 센서로는 CCD(Charge-Coupled Device), CMOS(Complementary Metal-Oxide-Semiconductor) 등을 사용할 수 있으나 이에 제한되는 것은 아니다. 또한 이미지 센서가 인지한 광학적 신호를 저장 가능한 형태로 만들기 위해 촬상부(24)는 VGA(Video Graphics Array) 인코더 등의 비디오 인코더를 포함할 수 있다. 비디오 인코더를 통과해서 저장 혹은 전송하여 재생 가능한 형태의 데이터로 가공되는 것이다.
제2 통신부(23)는 후술할 카메라 관리 장치(7)의 제1 통신부(71)와 연결되어, 제1 통신부(71)로부터 거래정보를 전송받아 카메라(2)의 제어부(25)에 전달하는 구성요소이다. 또한 촬상부(24)와 연결되어 촬상부(24)가 캡쳐한 이미지를 제1 통신부(71)로 전송하는 역할을 수행한다. 또한 캡쳐한 감시 영역에 해당하는 거래정보를 더 전송할 수도 있다. 제2 통신부(23)는 제1 통신부(71)와 유무선으로 연결될 수 있으며, 네트워크를 통해서 연결될 수도 있다.
카메라(2)는 센서(미도시)를 포함할 수 있다. 센서로는 감시 카메라(2)의 자세를 측정할 수 있는 센서인 자이로 센서 또는 가속도 센서가 사용될 수 있다.
제어부(25)는 카메라(2)의 자세를 제어하는 구성요소이다. 제어부(25)는 제어 신호에 따라 카메라(2)의 자세를 물리적으로 변환시켜야 하는바, 모터 등의 구동부재(미도시)를 사용하여 촬상부(24)를 회전시킬 수 있다. 본 발명의 감시 카메라(2) 시스템에 사용되는 카메라(2)가 카메라(2) 전체의 자세를 수정해야만 그 바라보는 방향을 결정할 수 있는 종류라면, 카메라(2) 전체의 자세를 수정할 수 있도록 카메라(2)가 고정면에 연결되는 부위에 구동부재가 사용될 수 있다. 만약 본 발명의 감시 카메라 시스템에 사용되는 카메라(2)가 하우징 내부에 존재하는 촬상부(24)만을 제어할 수 있는 PTZ 카메라 등이라면, 구동부재는 촬상부(24)에 연결되어 촬상부(24)를 제어하도록 형성될 수 있다. 또한 제어부(25)는 엔코더를 더 포함해 제어부(25)의 구동 정도를 파악할 수 있다.
제어부(25)는 카메라(2) 제어 장치로부터 전달받은 거래정보에 해당하는 감시 영역을 카메라(2)가 감시하도록 하기 위하여, 각 거래정보에 해당하는 감시 영역의 좌표를 미리 기억하도록 할 수 있다. 따라서 간단한 정보의 저장을 위해 제어부(25) 저장매체(미도시)를 더 포함할 수 있다. 제어부(25)는 해당하는 거래정보가 전달될 때, 미리 저장된 감시 영역의 좌표를 읽어들여 해당 좌표로 카메라(2) 혹은 촬상부(24)가 향하도록 카메라(2) 자세를 제어할 수 있다.
도 4는 본 발명의 실시예에 따른 카메라 관리 장치(7)의 구성을 나타낸 블록도이다.
도 4를 참조하면 카메라 관리 장치(7)는 제1 통신부(71), 저장부(72)를 포함할 수 있으며, 영상 가공부(73)와 검색부(74)를 더 포함할 수 있다.
제1 통신부(71)는 POS 기기(1)의 POS 통신부(23) 및 카메라(2)의 제2 통신부(23)와 연결된다. POS 기기(1)가 입력부(12)를 통해서 사용자로부터 입력받는 거래정보 또는 태그를 제1 통신부(71)로부터 전송받고, 카메라(2)가 캡쳐한 이미지 및 이에 대응하는 거래정보를 제2 통신부(23)로부터 전송받아 저장부(72)가 저장할 수 있도록 제공하는 역할을 한다. 제1 통신부(71)는 POS 통신부(23) 및 제2 통신부(23)와 유무선으로 연결될 수 있으며, 네트워크를 통해서 연결될 수도 있다.
저장부(72)는 제1 통신부(71)가 전달받은 캡쳐된 이미지, 거래정보, 태그를 저장하는 역할을 하는 구성요소이다. 따라서 이와 같은 데이터를 저장하기 위한 수단으로 저장매체가 사용되어야 한다. 저장매체로는 HDD(Hard Disk Drive), SSD(Solid State Drive), CF(Compact Flash), SD(Secure Digital) 카드 등을 사용할 수 있으나 이에 한정되는 것은 아니다.
영상 가공부(73)는 카메라(2)로부터 전달받은 캡쳐된 이미지를 가공하여 저장부(72)에 전달하는 역할을 한다. 영상 가공부(73)는 POS 기기(1)로부터 전달받은 거래정보, 태그 등을 서로 대응시켜 같이 저장부(72)에 저장할 수 있도록 전달하는 역할을 할 수 있다. 또한 후술할 제2 실시예에 따른 영상 가공부(73)는 크롭 영역을 드워프(dewarp) 해서 보정된 이미지로 만들어 저장부(72)로 전달 할 수 있다.
영상 가공부(73)는 기본적인 논리 연산이 가능해야 하므로 CPU(Central Processing Unit), MCU(Micro Controller Unit), 마이크로프로세서, FPGA(Field Programmable Gate Array) 등 논리 연산이 가능한 반도체 소자를 사용할 수 있으나 이에 제한되는 것은 아니다.
검색부(74)는 저장부(72)에 저장된 이미지의 검색을 수행할 수 있는 구성요소이다. 따라서 디스플레이 장치를 통해 사용자를 위한 검색 인터페이스(8)를 제공할 수 있으며, 검색 인터페이스(8)를 통해 사용자가 원하는 검색 조건을 입력받고, 검색한 결과를 디스플레이 할 수 있다. 이러한 기능을 수행하기 위해 검색부(74)는 스마트폰, 랩탑, 데스크탑등으로 구성될 수 있으나 이에 제한되지 않는다. 검색부(74)는 입력 수단으로 터치 센서, 마우스, 키보드, 조이스틱, 리모콘등을 제공할 수 있으나 이에 제한되지 않는다.
본 발명을 구성하는 제1 통신부(71), 제2 통신부(23), POS 통신부(11)는 유무선 통신을 위해 네트워크 모듈을 포함하는데, 이는 무선 네트워크 모듈인 3G 모뎀 또는 LTE 모뎀으로 구성될 수 있고, 기타 지그비(ZigBee), 무선랜(WLAN), 블루투스(Bluetooth) 등의 방식을 사용할 수도 있다. 또한 유선 네트워크 모듈로 이더넷 카드(혹은 NIC 카드)나 칩, RS-485, RS-232 등의 케이블을 이용하기 위한 시리얼 포트(serial port), USB(Universal Serial Bus) 포트 등을 포함할 수 있으나 이에 제한되지 않는다.
이하, 도 5 내지 도 7을 참조하여 본 발명의 제1 실시예에 따른 감시 카메라(2) 시스템을 이용하여 관심 영역을 감시하는 과정을 설명한다.
도 5는 본 발명의 제1 실시예 및 제2 실시예에 따른 감시 카메라(21, 22)가 설치된 상황을 표현한 도면이다.
도 5를 참조하면, 테이블이 배치된 일정 공간 안에 감시 카메라(21, 22) 시스템이 설치된다. 여기서 일정 공간은 테이블(31,32, 33, 34)이 다수 배치되고, 해당 테이블(31,32, 33, 34)들을 포함하는 영역이 주 감시 영역이 되는 음식점 등이 그 대상이 될 수 있으므로, 본 명세서에서는 음식점 및 테이블을 예시로 설명한다. 본 발명의 제1 실시예에서는 감시 영역의 변경을 위해서 자세 변경이 필요한 카메라(2)를 사용한다. 바람직하게는 PTZ 카메라(21)가 사용될 수 있다. 공간 내의 바닥에 붙어있는 테이블(31,32, 33, 34)을 감시하는 것이 주 목적일 것이므로, 감시 카메라(21, 22)는 공간의 일측 벽이나 천장에 설치되는 것이 바람직하다. 도 5에서는 공간의 천장 일측에 카메라(21)가 설치되고, 공간의 바닥 타측에 제1 테이블(31), 제2 테이블(32), 제3 테이블(33) 및 제4 테이블(34)의 총 4개의 테이블이 배치되는 것으로 도시하였다.
고객이 공간으로 입장하고, 테이블을 점유하고 주문을 하는 등의 거래가 이루어지면, 사용자는 본 발명의 감시 카메라(2) 시스템의 POS 기기(1)에 거래정보를 입력한다. POS 기기(1)의 입력부(12)를 통해 입력된 거래정보는 POS 통신부(23)를 통해서 카메라 관리 장치(7)의 제1 통신부(71)로 전송되고, 제1 통신부(71)는 전송받은 거래정보를 다시 카메라(2)의 제2 통신부(23)로 전송한다.
카메라(21)는 전송받은 거래정보에 해당하는 감시 영역의 좌표를 제어부(25)가 포함하는 저장매체로부터 읽어들이고, 촬상부(24)가 해당 좌표의 이미지를 캡쳐하도록 제어부(25)가 해당 좌표로 카메라(21)의 자세를 제어하도록 한다. 이 때, 감시 영역의 좌표는 PTZ 카메라(2)의 자세를 제어하는 PTZ 좌표일 수 있다. 또한 거래정보에 대응하는 감시 영역의 좌표를 카메라 관리 장치(7)로부터 거래정보와 함께 전달받을 수도 있다. 이 경우 카메라 관리 장치(7)의 저장부(72)는 거래정보에 해당하는 감시 영역의 좌표 정보를 더 저장하고 있어야 한다.
도 6은 본 발명의 제1 실시예에 따른 감시 카메라(2) 시스템이 설치된 상황 및감시 영역을 상방에서 바라본 평면도이다.
도 6을 참조하면, 카메라(21)는 각 테이블에 대응하는 감시 영역을 가지고 있는데, 이 감시 영역은 해당 테이블이 캡쳐되는 이미지 안에 충분히 확인될 수 있도록 형성된다. 감시 영역의 위치에 대해서는 사용자가 직접 POS 기기(1) 또는 카메라 관리 장치(7)를 이용해 설정할 수도 있고, 최초 감시 카메라(2) 시스템의 설치시 작업자에 의해서 기 설정되어 사용될 수도 있다.
도 6에 도시된 바와 같이, 각 감시 영역은 공간의 천장 일측에 설치된 카메라(21)로부터 캡쳐되는 이미지 안에 드러나는 영역일 것이므로, 카메라(21)에 가까운 쪽으로부터 먼 쪽으로 갈수록 그 폭이 넓어지며 테이블을 포함하는 사다리꼴의 형태를 가지게 된다. 도 6에서는 사용자에 의해 제1 테이블(31) 및 제3 테이블(33)의 감시 영역 번호를 포함하는 거래정보를 입력받은 상황을 가정하므로, 제1 테이블 감시 영역(41) 및 제3 테이블 감시 영역(43)을 도면에 사다리꼴로 나타내었다.
카메라(21)의 제어부(25)는 제1 테이블 감시 영역(41)과 제3 테이블 감시 영역(43)의 좌표에 따라 카메라(21)의 자세를 제어한다. 이 때, 촬상부(24)는 지속적으로 이미지를 캡쳐하고, 제어부(25)는 일정 시간 동안 제1 테이블 감시 영역(41)에서 카메라(21)를 머무르게 하다가 제3 테이블 감시 영역(43)으로 카메라(21)가 향하는 방향을 이동시킨다. 카메라(21)가 이동한 후, 역시 동일한 일정 시간이 지나면 제어부(25)는 카메라(21)가 제1 테이블 감시 영역을 향하도록 카메라(21)를 이동시킨다. 이와 같은 과정을 감시가 종료되는 시점까지 반복한다. 따라서 본 발명의 제1 실시예에 따른 카메라(21)의 제어부(25)는 타이머를 더 포함할 수 있다. 이와 같은 방법으로, 감시 영역들을 순회하면서 각 감시 영역에서 일정 시간 머무르며 이미지를 캡쳐하는 방식으로 순차적으로 각 감시 영역의 이미지를 캡쳐한다. 도 6에서는 제1 테이블(31)과 제3 테이블(33)에 해당하는 거래정보가 카메라(21)에 전달되었으므로, 제1 테이블 감시 영역(41)과 제3 테이블 감시 영역(43)을 카메라(21)가 순차적으로 순회하면서 이미지를 캡쳐한다. 또한 일 거래정보에 대응하는 감시 영역이 복수일 수 있으므로, 이와 같은 경우 역시 일 거래정보에 대응하는 복수의 감시 영역을 순차적으로 순회하면서 이미지를 캡쳐한다.
카메라(21)가 각 감시 영역에 머무르는 시간은 1분으로 설정할 수 있으나 이에 제한되지 않는다. 또한 감시 대상의 거래정보가 입력된 순서대로 이에 대응되는 감시 영역을 카메라(21)가 순회하도록 할 수 있으나 카메라(21)가 순회하는 순서는 이에 제한되지 않으며 전체 감시 영역을 시계방향(Clockwise) 또는 반시계방향(Counter-Clockwise)으로 순회하도록 선택할 수도 있다.
카메라(21)가 각 감시 영역을 감시하는 동작은 사용자가 POS 기기(1)의 입력부(12)에 계산 완료 등으로 정산이 완료된 거래정보를 입력해서 카메라 관리 장치(7)를 통해 해당 완료된 거래정보가 카메라(21)로 전달되기 전까지 반복적으로 이루어진다. 완료된 거래정보가 카메라(21)로 전달되면, 제어부(25)는 해당 거래정보에 대응하는 감시 영역을 카메라(21)가 향하지 않도록 자세를 제어한다. 따라서 자연스럽게 해당 감시 영역에 대한 감시가 종료된다.
도 7은 본 발명의 제1 실시예에 따른 감시 카메라(21) 시스템이 감시영역에 대해서 캡쳐한 이미지가 카메라 관리 장치(7)에 저장된 형태를 나타낸 도면이다.
캡쳐된 이미지는 제2 통신부(23)를 통해서 제1 통신부(71)에 전달되고, 저장부(72)에 저장된다. 이 때, 전송된 캡쳐된 이미지는 영상 가공부(73)를 거쳐서 POS 기기(1)로부터 전달받은 대응하는 거래정보와 같이 저장될 수 있다.
도 7에 따르면, 카메라(21)가 제1 테이블 감시 영역(41)에 머무르면서 캡쳐한 이미지에서는 제1 테이블(31)이 나타남을 확인할 수 있다. 영상 가공부(73)에 의해 대응하는 거래정보를 같이 저장하였으므로, 이미지 일부에 제1 테이블(31)임을 나타낼 수 있는 문구가 표시될 수 있다. 이 밖에도, 같이 저장된 거래정보와 태그를 캡쳐된 이미지와 함께 표시되도록 할 수도 있다.
이하, 도 8 내지 도 10을 참조하여 본 발명의 제2 실시예에 따른 감시 카메라(22) 시스템을 이용하여 관심 영역을 감시하는 과정을 설명한다.
도 8은 본 발명의 제2 실시예에 따른 감시 카메라(22) 시스템이 설치된 상황 및 감시 영역을 상방에서 바라본 평면도이다.
상기 기술한 바와 같이, 카메라는 광각 촬영이 가능한 어안 카메라(22)일 수 있다. 또는, 카메라(22)는 최근에 소개된 360°카메라일 수도 있다. 360°카메라(2)란, 어안 렌즈를 복수로 장착하여 카메라(2)가 직접 패닝 또는 틸팅할 필요 없이 전방위가 모두 촬영이 가능한 카메라(2)를 말한다. 이에 제한되지 않고, 본 발명의 제2 실시예에 따른 카메라(22)는 원본 영상이 왜곡되어 어느 정도 보정할 필요가 있다면 다양한 종류의 카메라일 수 있다.
어안 렌즈에 의해 형성된 왜곡된 형태의 원본 이미지를 보정하는 것을 보통 '왜곡 보정(Distortion Calibration)' 또는 '드워프(Dewarp)'라고 하며, 이러한 드워프는 어안 렌즈(20)에서 사용되는 투사 방식에 따라 어안 렌즈(20)의 초점 거리나 광중심 위치 등과 같은 파라미터(parameter)를 이용하여 적절한 수식을 통해 이루어지게 된다.
본 발명의 제2 실시예에 따르면, 카메라 관리 장치(7)에서 소프트웨어를 통해 원본 이미지를 보정 이미지로 드워프할 수도 있으나, 카메라(22)가 자체적으로 드워프 작업을 수행해서 카메라 관리 장치(7)에 전송할 수도 있다.
도 8를 참조하면, 테이블이 배치된 일정 공간 안에 감시 카메라(22) 시스템이 설치된다. 여기서 일정 공간은 제1 실시예에서 설명한 공간과 동일하다. 일반적으로 공간 내의 바닥에 붙어있는 테이블을 감시하는 것이 주 목적일 것이므로, 어안 렌즈를 사용하는 감시 카메라(22)는 공간의 천장에 설치되는 것이 바람직하다. 따라서 제2 실시예에서는 공간의 천장 중앙에 카메라(22)가 설치되어 테이블들에 의해 카메라(22)가 둘러싸이는 것으로 표현하였다.
고객이 공간으로 입장하고, 테이블을 점유하고 주문을 하는 등의 거래가 이루어진 이후의 거래정보 전달 과정은 제1 실시예에 대한 설명과 동일하다. 다만 제1 실시예와 달리 제2 실시예에 따른 카메라(22)의 촬상부(24)는 전체 영역을 감시한다. 따라서 전송받은 거래정보에 해당하는 감시 영역의 좌표를 읽어들이고, 자세를 제어부(25)를 통해 제어하지 않는 대신 해당 감시 영역의 좌표에 대응되는 현재 캡쳐되는 이미지 상의 영역을 잘라내어 제2 통신부(23)를 통해 카메라 관리 장치(7)로 전송한다. 이 때, 감시 영역의 좌표는 물리적인 좌표가 아닌 캡쳐되는 이미지 상의 논리적 좌표일 수 있으며, 어떤 한 점이 아니라 일정 영역을 지정하므로 꼭지점들의 좌표나 중심으로부터 이격된 거리와 폭을 포함하는 좌표일 수 있으나 가능한 좌표의 종류는 이에 제한되지 않는다.
또한 거래정보에 대응하는 감시 영역의 좌표를 카메라 관리 장치(7)로부터 거래정보와 함께 전달받을 수도 있다. 그 밖에도 감시 영역의 이미지를 잘라 전송하지 않고, 카메라(2)는 전체 촬영 가능 이미지를 캡쳐해 카메라 관리 장치(7)로 전달할 수 있다. 이 경우 카메라 관리 장치(7)가 전달받은 거래정보에 대응하는 감시 영역의 좌표를 기억하고 있다가 전달받은 전체 캡쳐 이미지와 함께 저장부(72)에 저장하게 되고, 향후 검색 및 열람 단계에서 상기 거래정보에 해당하는 감시 영역의 이미지를 잘라 제공할 수 있다.
도 8에 도시된 바와 같이, 각 감시 영역은 공간의 천장 중앙에 설치된 카메라(22)로부터 캡쳐되는 이미지 안에 드러나는 영역일 것이므로, 카메라(2)에 가까운 쪽으로부터 먼 쪽으로 갈수록 그 폭이 넓어지는 사다리꼴의 형태를 가지게 된다. 제2 실시예에서는 사용자에 의해 제2 테이블(32) 및 제4 테이블(34)의 거래정보를 입력받은 상황을 나타내고 있으므로, 제2 테이블 감시 영역(42) 및 제4 테이블 감시 영역(44)을 도면에 사다리꼴로 나타내었다.
카메라(22)의 촬상부(24)는 지속적으로 전체 감시 영역의 이미지를 캡쳐하고, 전송된 거래정보에 해당하는 감시 영역의 이미지를 잘라 카메라 관리 장치(7)로 전송한다.
카메라(22)가 각 감시 영역을 감시하는 동작은 사용자가 POS 기기(1)의 입력부(12)에 계산 완료 등으로 정산이 완료된 거래정보를 입력해서 카메라 관리 장치(7)를 통해 해당 완료된 거래정보가 카메라(22)로 전달되기 전까지 지속적으로 이루어진다. 완료된 거래정보가 카메라(22)로 전달되면, 제어부(25)는 해당 거래정보에 대응하는 감시 영역의 이미지를 잘라서 전송하는 동작을 중단하도록 한다. 따라서 자연스럽게 해당 감시 영역에 대한 감시가 종료된다.
도 9는 본 발명의 제2 실시예에 따른 감시 카메라(22) 시스템이 캡쳐한 이미지 및 감시 영역을 나타낸 도면이다.
도 9를 참조하면, 어안 카메라나 360° 카메라를 사용하는 경우 전체 감시 영역을 캡쳐한 이미지가 보여주는 원형의 이미지를 확인할 수 있다. 화각이 넓은 이미지를 생성하므로, 육안으로 관찰할 수 있는 실제 이미지와 달리 이미지 전체적으로 왜곡이 심하게 일어난다. 따라서 감시 영역 역시 모서리가 곡선인 다각형의 형태로 형성된다. 도 9에서는 제2 테이블(32)과 제4 테이블(34)을 감시하도록 지정하였으므로, 제2 테이블 감시 영역(62)과 제4 테이블 감시 영역(64)이 도 9의 감시 영역과 동일한 영역을 가리키고 있음에도 불구하고 그 형태가 상이하도록 도시되었다.
상술한 바와 같이 카메라(22)는 해당 감시 영역의 이미지를 잘라서 카메라 관리 장치(7)로 전송할 수도 있고, 전체 이미지를 전송하고 카메라 관리 장치(7)가 검색 및 열람시에 해당 감시 영역에 해당하는 이미지를 잘라서 제공할 수도 있다.
도 10은 본 발명의 제2 실시예에 따른 감시 카메라(22) 시스템이 일 감시영역에 대해서 캡쳐한 이미지를 드워프 한 이미지를 나타낸 도면이다.
캡쳐된 이미지는 제2 통신부(23)를 통해서 제1 통신부(71)에 전달되고, 저장부(72)에 저장된다. 이 때, 전송된 캡쳐된 이미지는 영상 가공부(73)를 거쳐서 POS 기기(1)로부터 전달받은 대응하는 거래정보와 같이 저장될 수 있다.
제2 실시예에서 캡쳐된 원본 이미지는 왜곡된 형태일 것이다. 따라서 캡쳐된 원본 이미지를 카메라(2) 단계에서 드워프 해서 카메라 관리 장치(7)로 전송할 수도 있고, 전송된 원본 이미지를 카메라 관리 장치(7)가 드워프한 후, 관찰하고자 하는 감시 영역에 해당하는 이미지만을 잘라서 제공할 수도 있고, 전송된 원본 이미지 중 관찰하고자 하는 감시 영역에 해당하는 영역을 잘라낸 후 드워프 할 수도 있다. 도 10에 도시된 제4 테이블의 이미지는 드워프되었으므로, 왜곡이 보정되어 나타난다.
도 11은 본 발명의 실시예에 따른 감시 방법을 나타낸 순서도이다.
도 11을 참조하면, 감시 방법은 사용자가 감시 카메라(2) 시스템 POS 기기(1)에 거래정보를 입력하는 것으로 시작된다(S10). 이 밖에 태그를 더 입력할 수도 있다.
POS 기기(1)의 입력부(12)를 통해 입력된 거래정보는 POS 통신부(23)를 통해서 카메라 관리 장치(7)의 제1 통신부(71)로 전송되고, 제1 통신부(71)는 전송받은 거래정보를 다시 카메라(2)의 제2 통신부(23)로 전송한다.
카메라(2)는 전송받은 거래정보에 대응하는 감시 영역의 좌표를 제어부(25)가 포함하는 저장매체로부터 읽어들이고, 촬상부(24)가 해당 감시 영역의 감시를 시작하도록 한다(S20). PTZ 카메라 등의 자세를 제어 가능한 카메라(2)를 사용하는 경우 해당 좌표의 이미지를 캡쳐하도록 제어부(25)가 해당 좌표로 카메라(2)의 자세를 제어하고, 전체 이미지를 캡쳐하는 어안 카메라 등을 사용하는 경우 전체 이미지를 캡쳐한다. PTZ 카메라의 경우 감시 영역을 순차적으로 순회하도록 제어부(25)가 촬상부(24) 또는 카메라(2)의 자세를 제어하고, 이미지를 캡쳐해 카메라 관리 장치(7)로 전송한다. 어안 카메라(2)의 경우 전체 이미지를 캡쳐해 카메라 관리 장치(7)로 전송하거나, 해당 감시 영역의 이미지만을 잘라서 전송할 수도 있다.
카메라 관리 장치(7)는 전송받은 캡쳐된 이미지를 이에 대응하는 거래정보와 함께 저장부(72)에 저장한다(S30). 상기 정보들과 이미지를 합치기 위해 영상 가공부(73)가 사용될 수 있다. 거래정보 및 태그가 최초 거래정보를 입력하는 순간 이후에도 입력될 수 있으므로, POS 기기(1)의 입력부(12)는 감시가 이루어지는 도중에도 각 감시 영역에 해당하는 거래정보 및 태그 정보를 입력받아 POS 통신부(23)를 통해 제1 통신부(71)로 전달하고, 저장부(72)에 저장되도록 할 수 있다.
만일 고객이 용무를 마치고 거래를 종료하게 되는 경우, POS 기기(1)에서 거래종료(S40)가 이루어질 것이므로 POS 기기(1) 입력부(12)에 완료된 거래정보를 사용자가 입력하게 된다. 따라서 완료된 거래정보는 POS 통신부(23)를 통해 카메라 관리 장치(7)의 제1 통신부(71)로 전송되고, 제1 통신부(71)는 전송받은 거래정보를 다시 카메라(2)의 제2 통신부(23)로 전송한다(S50).
카메라(2)는 완료된 거래정보를 전송받아 대응하는 감시 영역에 대한 감시를 종료한다(S60). PTZ 카메라를 사용하는 경우, 제어부(25)가 더 이상 해당 영역으로 카메라(21) 또는 촬상부(24)가 향하지 않도록 하여 해당 영역에 대한 감시를 종료한다. 어안 카메라를 사용하는 경우, 카메라(22)가 해당 영역에 대한 이미지를 잘라서 전송하는 것을 중단하도록 하거나 카메라 관리 장치(7)가 해당 영역의 감시 시간의 종료 시점을 저장하는 것으로 감시를 종료할 수 있다.
도 12는 본 발명의 실시예에 따른 검색부(74)가 제공하는 검색 인터페이스(8)를 나타낸 도면이다.
도 12를 참조하면, 사용자는 검색부(74)의 디스플레이 장치가 제공하는 검색 인터페이스(8)를 통해 원하는 캡쳐된 이미지를 검색할 수 있다. 사용자는 검색하고자 하는 상황의 시작 시점을 시작 시점 입력부(81) 를 통해 입력할 수 있고, 종료 시점을 종료 시점 입력부(82)를 통해 입력해 해당 시간 범위 안에 있는 감시 내용을 검색한다. 또한 필터 입력부(83)를 통해 검색 필드를 지정할 수 있고, 거래정보를 키워드 입력부(84)를 통해 입력해 검색을 수행할 수 있다. 사용자가 지정한 내용대로 검색한 결과가 결과 출력부(85)에 목록으로 출력되고, 이를 클릭 또는 터치 등으로 선택하여 저장부(72)에 저장된 해당 이미지를 확인할 수 있도록 구성된다. 도 14에 도시한 내용으로 검색 가능한 필드 등은 제한되지 않는다.
도면으로 도시하지 않았으나, 본 발명의 제3 실시예에 따른 감시 카메라 시스템은 복수의 POS 기기(1)를 포함할 수 있다. 따라서 복수의 POS 기기(1)로부터 전달받은 거래정보를 이용해 상술한 바와 같이 감시 영역의 이미지를 순차적으로 캡쳐하거나 선택적으로 감시 영역의 크롭 이미지를 저장하는 방식으로 감시를 수행할 수 있다.
본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
비록 본 발명이 상기 언급된 바람직한 실시예와 관련하여 설명되었지만, 발명의 요지와 범위로부터 벗어남이 없이 다양한 수정이나 변형을 하는 것이 가능하다. 따라서 첨부된 특허청구의 범위에는 본 발명의 요지에 속하는 한 이러한 수정이나 변형을 포함할 것이다.

Claims (20)

  1. 사용자로부터 거래정보를 POS 기기로 입력받는 단계;
    입력받은 상기 거래정보를 상기 POS 기기가 카메라 관리 장치로 전송하는 단계;
    전송받은 상기 거래정보를 상기 카메라 관리 장치가 카메라로 전송하는 단계;
    상기 전송된 거래정보에 대응하는 감시 영역의 이미지를 상기 거래정보가 입력될 때부터 상기 카메라가 캡쳐하는 단계;
    상기 캡쳐된 이미지를 상기 카메라가 상기 카메라 관리 장치로 전송하는 단계; 및
    상기 카메라로부터 전송된 이미지를 대응하는 상기 거래정보와 함께 저장부에 저장하는 단계를 포함하는 감시 방법.
  2. 제1항에 있어서,
    상기 POS 기기가 사용자로부터 완료된 거래정보를 입력받는 단계;
    입력받은 상기 완료된 거래정보를 상기 POS 기기가 상기 카메라 관리 장치로 전송하는 단계;
    전송된 상기 완료된 거래정보를 상기 카메라 관리 장치가 상기 카메라로 전송하는 단계; 및
    상기 카메라가 상기 완료된 거래정보를 전송받을 때 상기 완료된 거래정보에 대응하는 감시 영역의 이미지를 캡쳐하는 동작을 종료하는 단계를 더 포함하는 감시 방법.
  3. 제1항에 있어서,
    상기 카메라는 PTZ 카메라이고,
    상기 감시 영역의 이미지를 캡쳐하는 단계는, 상기 카메라가 상기 전송된 거래정보에 대응하는 감시 영역의 이미지를 캡쳐하도록 상기 카메라의 자세를 상기 카메라가 더 포함하는 제어부가 제어하는 단계를 포함하는 감시 방법.
  4. 제3항에 있어서,
    상기 감시 영역의 이미지를 캡쳐하는 단계는, 상기 전송된 거래정보가 복수일 때, 상기 복수의 거래정보에 대응하는 복수의 감시 영역의 이미지를 순차적으로 캡쳐하는 단계를 더 포함하는 감시 방법.
  5. 제3항에 있어서,
    상기 감시 영역의 이미지를 캡쳐하는 단계는, 상기 전송된 거래정보에 대응하는 감시 영역이 복수일 때, 상기 복수의 감시 영역의 이미지를 순차적으로 캡쳐하는 단계를 더 포함하는 감시 방법.
  6. 제4항 또는 제5항에 있어서,
    상기 복수의 감시 영역의 이미지를 순차적으로 캡쳐하는 단계는,
    제1 감시 영역의 이미지를 소정의 시간동안 캡쳐하는 단계;
    상기 카메라가 제2 감시 영역을 향하도록 상기 제어부가 상기 카메라의 자세를 제어하는 단계; 및
    제2 감시 영역의 이미지를 상기 소정의 시간동안 캡쳐하는 단계를 더 포함하는 감시 방법.
  7. 제1항에 있어서,
    상기 카메라는 어안 카메라이고,
    상기 이미지를 저장하는 단계는 상기 전송된 이미지를 드워프하는 단계를 포함하는 감시 방법.
  8. 제1항에 있어서,
    상기 카메라는 어안 카메라이고,
    상기 캡쳐된 이미지를 상기 카메라 관리 장치로 전송하는 단계는,
    상기 캡쳐된 이미지를 드워프하는 단계; 및
    상기 드워프된 이미지를 상기 카메라 관리 장치로 전송하는 단계를 더 포함하는 감시 방법.
  9. 제1항에 있어서,
    사용자가 상기 카메라 관리 장치가 더 포함하는 검색부를 통해 상기 저장부에 저장된 이미지를 같이 저장된 상기 거래정보로 검색하는 단계를 더 포함하는 감시 방법.
  10. 제9항에 있어서,
    사용자로부터 상기 거래정보에 대응하는 태그를 POS기기로 더 입력받는 단계; 및
    상기 입력받은 태그를 대응하는 상기 전송된 이미지 및 상기 거래정보와 같이 상기 저장부에 저장하는 단계를 더 포함하고,
    상기 저장된 이미지를 같이 저장된 상기 거래정보로 검색하는 단계는, 상기 같이 저장된 태그로 상기 저장된 이미지를 검색하는 단계를 더 포함하는 감시 방법.
  11. 제1 항에 있어서,
    상기 사용자로부터 거래정보를 POS기기로부터 입력받는 단계는,
    복수의 상기 POS기기로부터 거래정보를 입력받는 단계를 더 포함하는 감시 방법.
  12. 제1 항에 있어서,
    상기 거래정보는 상기 거래정보에 대응하는 감시 영역의 좌표를 포함하는 감시 방법.
  13. POS 기기가 입력받고, 카메라 관리 장치를 통해 전송된 거래정보에 대응하는 감시 영역의 이미지를 상기 거래정보가 전송될 때부터 캡쳐하는 촬상부; 및
    상기 캡쳐된 이미지를 상기 카메라 관리 장치가 상기 대응하는 거래정보와 함께 저장하도록 상기 카메라 관리 장치로 전송하는 통신부를 포함하는 감시 카메라.
  14. 제13항에 있어서,
    상기 통신부가, 상기 POS 기기가 입력받고, 상기 카메라 관리 장치를 통해 전송된 완료된 거래정보를 전송받을 때,
    상기 촬상부는 상기 전송된 완료된 거래정보에 대응하는 감시 영역의 이미지를 캡쳐하는 동작을 종료하는 감시 카메라.
  15. 제13항에 있어서,
    상기 감시 카메라는 PTZ 카메라이고,
    상기 전송된 거래정보에 대응하는 감시 영역의 이미지를 상기 촬상부가 캡쳐하도록 상기 감시 카메라의 자세를 제어하는 제어부를 더 포함하는 감시 카메라.
  16. 제15항에 있어서,
    상기 전송된 거래정보가 복수일 때, 상기 복수의 거래정보에 대응하는 복수의 감시 영역의 이미지를 순차적으로 캡쳐하는 감시 카메라.
  17. 제15항에 있어서,
    상기 전송된 거래정보에 대응하는 감시 영역이 복수일 때, 상기 복수의 감시 영역의 이미지를 순차적으로 캡쳐하는 감시 카메라.
  18. 제16항 또는 제17항에 있어서,
    상기 복수의 감시 영역의 이미지를 캡쳐하는 각각의 시간은 소정의 시간인 감시 카메라.
  19. 제13항에 있어서,
    상기 감시 카메라는 어안 카메라인 감시 카메라.
  20. 제19항에 있어서,
    상기 통신부는 상기 캡쳐된 이미지를 드워프하여 상기 카메라 관리 장치로 전송하는 감시 카메라.
PCT/KR2016/011780 2016-10-17 2016-10-20 Pos 기기와 연동된 감시 카메라 및 이를 이용한 감시 방법 WO2018074627A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/380,031 US11095803B2 (en) 2016-10-17 2019-04-10 Camera linked with POS apparatus and surveillance method using the same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160134138A KR102575271B1 (ko) 2016-10-17 2016-10-17 Pos 기기와 연동된 감시 카메라 및 이를 이용한 감시 방법
KR10-2016-0134138 2016-10-17

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/380,031 Continuation US11095803B2 (en) 2016-10-17 2019-04-10 Camera linked with POS apparatus and surveillance method using the same

Publications (1)

Publication Number Publication Date
WO2018074627A1 true WO2018074627A1 (ko) 2018-04-26

Family

ID=62018623

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/011780 WO2018074627A1 (ko) 2016-10-17 2016-10-20 Pos 기기와 연동된 감시 카메라 및 이를 이용한 감시 방법

Country Status (3)

Country Link
US (1) US11095803B2 (ko)
KR (1) KR102575271B1 (ko)
WO (1) WO2018074627A1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11586682B2 (en) * 2019-07-30 2023-02-21 Motorola Solutions, Inc. Method and system for enhancing a VMS by intelligently employing access control information therein
US20220343743A1 (en) * 2019-08-22 2022-10-27 Nec Corporation Display control apparatus, display control method, and program
CN111355884B (zh) * 2019-12-23 2021-11-02 深圳市鸿合创新信息技术有限责任公司 监控方法、装置、系统、电子设备及存储介质
US11100328B1 (en) * 2020-02-12 2021-08-24 Danco, Inc. System to determine piping configuration under sink

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100794614B1 (ko) * 2007-08-16 2008-01-14 (주)큐텀 판매 시점 관리 단말에 대한 거래 정보 분석 장치 및 방법
KR20080021730A (ko) * 2008-01-25 2008-03-07 주식회사 씨트링 판매정보 자동 검출시스템 및 방법
KR20110008649A (ko) * 2009-07-20 2011-01-27 (주)블루비스 Ｐｏｓ 관리 시스템 및 그 방법
KR20140018626A (ko) * 2012-08-02 2014-02-13 케이에스피 주식회사 보안성 및 시스템 구축이 용이한 초 광각 아이피 카메라 및 이를 이용한 방법.
KR20140133620A (ko) * 2013-05-06 2014-11-20 주식회사 엠앤엘솔루션 클라우드 서비스 기반 실시간 매출정보트래킹 장치, 방법 및 시스템

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5751345A (en) * 1995-02-10 1998-05-12 Dozier Financial Corporation Image retention and information security system
US20050128304A1 (en) * 2002-02-06 2005-06-16 Manasseh Frederick M. System and method for traveler interactions management
JP2004171240A (ja) 2002-11-20 2004-06-17 Casio Comput Co Ltd 不正監視システムおよびプログラム
US7267277B2 (en) * 2005-04-28 2007-09-11 International Business Machines Corporation Method and system for targeted marketing by leveraging video-based demographic insights
US20090115849A1 (en) * 2007-11-07 2009-05-07 Internation Business Machines Corporation Controlling A Point Of Sale ('POS') Terminal Using Surveillance Video
US8145525B2 (en) * 2008-12-18 2012-03-27 Ycd Multimedia Ltd. Precise measurement of point-of-sale promotion impact
US20130002868A1 (en) * 2010-03-15 2013-01-03 Omron Corporation Surveillance camera terminal
US20120320214A1 (en) * 2011-06-06 2012-12-20 Malay Kundu Notification system and methods for use in retail environments
US9288452B2 (en) * 2013-11-21 2016-03-15 Panasonic Intellectual Property Management Co., Ltd. Apparatus for controlling image capturing device and shutter
US9922257B2 (en) * 2014-09-29 2018-03-20 Glimpse Group Llc Image auditing method and system
KR101481527B1 (ko) 2014-10-07 2015-01-14 주식회사 포인트시스템 Pos단말기에서의 cctv카메라 촬영 영상 재생 시스템 및 방법
EP3109817A1 (en) * 2015-06-25 2016-12-28 Mastercard International Incorporated Systems, methods, devices, and computer readable media for monitoring proximity mobile payment transactions
US20160379145A1 (en) * 2015-06-26 2016-12-29 eConnect, Inc. Surveillance Data Based Resource Allocation Analysis
WO2017142191A1 (ko) * 2016-02-16 2017-08-24 제이씨스퀘어주식회사 포스 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법
US11095801B2 (en) * 2016-08-30 2021-08-17 Ncr Corporation Scanner with independent integrated network video capabilities

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100794614B1 (ko) * 2007-08-16 2008-01-14 (주)큐텀 판매 시점 관리 단말에 대한 거래 정보 분석 장치 및 방법
KR20080021730A (ko) * 2008-01-25 2008-03-07 주식회사 씨트링 판매정보 자동 검출시스템 및 방법
KR20110008649A (ko) * 2009-07-20 2011-01-27 (주)블루비스 Ｐｏｓ 관리 시스템 및 그 방법
KR20140018626A (ko) * 2012-08-02 2014-02-13 케이에스피 주식회사 보안성 및 시스템 구축이 용이한 초 광각 아이피 카메라 및 이를 이용한 방법.
KR20140133620A (ko) * 2013-05-06 2014-11-20 주식회사 엠앤엘솔루션 클라우드 서비스 기반 실시간 매출정보트래킹 장치, 방법 및 시스템

Also Published As

Publication number Publication date
US11095803B2 (en) 2021-08-17
KR20180041866A (ko) 2018-04-25
US20190238743A1 (en) 2019-08-01
KR102575271B1 (ko) 2023-09-06

Similar Documents

Publication Publication Date Title
WO2018074627A1 (ko) Pos 기기와 연동된 감시 카메라 및 이를 이용한 감시 방법
CN100353388C (zh) 全方位监视控制系统和全方位监视控制方法
US10235574B2 (en) Image-capturing device, recording device, and video output control device
US20150244991A1 (en) Monitoring camera system and control method of monitoring camera system
JP2006333133A (ja) 撮像装置、撮像方法、プログラム、プログラム記録媒体並びに撮像システム
JP2016220173A (ja) 追跡支援装置、追跡支援システムおよび追跡支援方法
JP2002015390A (ja) 遠隔監視方法および監視制御サーバ
CN111358443A (zh) 体温监测方法及装置
TWI407386B (zh) 影像自動追蹤之監控方法
WO2018135695A1 (ko) 모니터링 장치 및 시스템
WO2012137994A1 (ko) 영상인식장치 및 그 영상 감시방법
KR20190090544A (ko) 적외선 센서 및 얼굴인식기술을 이용한 카메라 감시 시스템
WO2018097384A1 (ko) 밀집도 알림 장치 및 방법
KR101452342B1 (ko) 감시카메라 유닛 및 그 구동방법
US20060001741A1 (en) Realtime video display method of mixed signals
CN106056693A (zh) 一种基于移动终端热成像图片数据的在线巡检方法与系统
KR101288881B1 (ko) 다수의 감시영역을 설정하고 이를 확대촬영할 수 있는 감시카메라의 감시영역 설정시스템
KR101731592B1 (ko) 독립형 다중 영상 감시 시스템
JP2012124658A (ja) 特定人物検知システムおよび検知方法
TWI510098B (zh) 攝像裝置及利用其動態追蹤特定物體的方法
KR20150035108A (ko) 와이파이 다이렉트를 이용한 로봇 청소기 및 방범 시스템
CN206674067U (zh) 一种热成像和监控摄像相结合的摄像装置
KR101079076B1 (ko) 보안기능이 강화된 ｃｃｔｖ 시스템
WO2013103230A1 (en) Method of providing user interface and image photographing apparatus applying the same
KR101716184B1 (ko) 카메라 시스템에서 이벤트 영상 재생 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16919210

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16919210

Country of ref document: EP

Kind code of ref document: A1