KR101287613B1 - System for checking proper scanning operation destinction and control method thereof - Google Patents
System for checking proper scanning operation destinction and control method thereof Download PDFInfo
- Publication number
- KR101287613B1 KR101287613B1 KR1020120058595A KR20120058595A KR101287613B1 KR 101287613 B1 KR101287613 B1 KR 101287613B1 KR 1020120058595 A KR1020120058595 A KR 1020120058595A KR 20120058595 A KR20120058595 A KR 20120058595A KR 101287613 B1 KR101287613 B1 KR 101287613B1
- Authority
- KR
- South Korea
- Prior art keywords
- sound
- scan
- signal
- frequency
- identification code
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
- G06K7/10821—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices
- G06K7/1096—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum further details of bar or optical code scanning devices the scanner having more than one scanning window, e.g. two substantially orthogonally placed scanning windows for integration into a check-out counter of a super-market
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
- G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
- G06K19/067—Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components
- G06K19/07—Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips
- G06K19/077—Constructional details, e.g. mounting of circuits in the carrier
- G06K19/07701—Constructional details, e.g. mounting of circuits in the carrier the record carrier comprising an interface suitable for human interaction
- G06K19/07715—Constructional details, e.g. mounting of circuits in the carrier the record carrier comprising an interface suitable for human interaction the interface being used to indicate that the record carrier is active, e.g. a blinking light to indicate that the record carrier is busy communicating with a secondary device or busy computing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/88—Image or video recognition using optical means, e.g. reference filters, holographic masks, frequency domain filters or spatial domain filters
- G06V10/89—Image or video recognition using optical means, e.g. reference filters, holographic masks, frequency domain filters or spatial domain filters using frequency domain filters, e.g. Fourier masks implemented on spatial light modulators
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Electromagnetism (AREA)
- Computer Hardware Design (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Toxicology (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Cash Registers Or Receiving Machines (AREA)
Abstract
Description
본 발명은 식별코드 스캔 확인 시스템 및 그 제어 방법에 관한 것으로서, 더욱 구체적으로는 바코드 등과 같은 식별코드를 정상적으로 스캔하였는지 여부를 확인할 수 있도록 하는 식별코드 스캔 확인 시스템 및 그 제어 방법에 관한 것이다. The present invention relates to an identification code scan confirmation system and a control method thereof, and more particularly, to an identification code scan confirmation system and a method of controlling the identification code scan to verify whether an identification code such as a barcode is normally scanned.
현재 상업적인 목적을 위해 광범위하게 사용되고 있는 바코드 스캔 기술은 그 편리성에도 불구하고 스캔 누락으로 인한 피해가 전체 영업 이익에 2%에 달한다. 전체 매출이 10조원인 대형 마트에서의 피해액은 2천억 원에 달하는 셈이다. 따라서 단순 바코드 스캔을 통한 기존의 결제 방식에서 더 나아가 여러 가지 센서와 서버를 통해 관리자가 중앙에서 관리할 수 있는 시스템을 구축할 필요성이 제기되고 있다. Barcode scanning technology, which is now widely used for commercial purposes, despite its convenience, suffers 2% of total operating profit from missing scans. The damages at large marts with total sales of 10 trillion won amount to 200 billion won. Therefore, there is a need to build a system that can be managed centrally through various sensors and servers, in addition to the conventional payment method through simple barcode scanning.
기존의 스캔 시스템에서는 바코드를 단순히 스캐너로 스캔하는 방법이라 계산원이 외부의 인물과 공모하여 불순한 목적으로 물건을 겹쳐서 스캔을 한다든지, 스캔을 하는 척 하면서 스캐너를 제대로 동작을 하지 않거나, 바코드가 아닌 엉뚱한 부분에 대고 스캔을 했을 경우 이를 적발할 수 있는 방법이 없는 문제점이 있다. 따라서 정상적인 바코드 스캔이 아닌 경우 이를 적발하고, 관리자에게 서버를 통해 알리는 시스템에 대한 연구가 절실한 상황이다.
In a conventional scanning system, a barcode is simply scanned with a scanner, so the cashier does not collaborate with an outside person and scans the object over a pile for impure purposes, or does not operate the scanner properly while pretending to scan, or is not a barcode. There is a problem that there is no way to detect this when scanning the part. Therefore, if it is not a normal barcode scan, it is urgently needed to study the system that detects this and informs the administrator through the server.
전술한 문제점을 해결하기 위한 본 발명의 목적은 계산대의 입구로 상품이 유입된 후 발생되는 스캔음을 확인하여 정상스캔되었는지 여부를 판별하는 식별코드 스캔 확인 시스템을 제공하는 것이다. An object of the present invention for solving the above problems is to provide an identification code scan confirmation system for determining whether or not the normal scan was performed by checking the scan sound generated after the product is introduced into the entrance of the checkout.
본 발명의 다른 목적은 계산대의 입구로 상품이 유입된 후 발생되는 스캔음을 확인하여 정상스캔되었는지 여부를 판별하고, 비정상스캔된 것으로 판별되면 사전 설정된 경고 절차를 수행하는 식별코드 스캔 확인 시스템을 제공하는 것이다. Another object of the present invention is to determine whether or not the normal scan by checking the scan sound generated after the product flows into the entrance of the checkout, and provides an identification code scan confirmation system for performing a preset warning procedure if it is determined that the abnormal scan It is.
본 발명의 또 다른 목적은 스캔음을 이용하여 정상스캔되었는지 여부를 판별하는 제어 방법을 제공하는 것이다. Still another object of the present invention is to provide a control method for determining whether or not a normal scan is performed using a scan sound.
전술한 목적을 달성하기 위한 본 발명의 제1 특징은, 상품들에 부착된 식별코드를 스캔하여 정산하는 과정에서 정상적으로 식별 코드가 스캔되었는지 여부를 판별할 수 있는 식별코드 스캔 확인 시스템에 관한 것으로서, 상기 시스템은, 상품들이 들어오는 계산대 입구에 장착되어 계산대로 들어오는 상품을 감지하여 제1 감지 신호를 출력하는 제1 감지 센서; 상품들이 나가는 계산대 출구에 장착되어 계산대를 나가는 상품을 감지하여 제2 감지 신호를 출력하는 제2 감지 센서; 계산대의 소리를 감지한 음향 신호를 출력하는 음향 센서; 스캐너의 정상 스캔음을 사전에 저장하고, 상기 음향 센서로부터 제공된 음향 신호와 상기 정상 스캔음, 및 상기 제1 감지 신호와 제2 감지 신호를 이용하여 계산대로 유입된 상품들에 대한 식별 코드가 정상 스캔되었는지 여부를 판별하는 제어 장치;를 구비하여, 상품의 식별코드가 정상 스캔되었는지 여부를 판별할 수 있도록 한다. A first aspect of the present invention for achieving the above object, relates to an identification code scan confirmation system that can determine whether the identification code is normally scanned in the process of scanning the identification code attached to the goods, The system may include: a first detection sensor mounted at an entrance of a cash register at which goods enters and sensing a product coming into the checkout and outputting a first detection signal; A second detection sensor mounted at an exit of a cashier at which the goods exit and sensing a product exiting the cashier and outputting a second detection signal; An acoustic sensor for outputting an acoustic signal sensing the sound of the cashier; The normal scan sound of the scanner is stored in advance, and the identification code for the goods introduced into the calculation is normal using the acoustic signal provided from the acoustic sensor, the normal scan sound, and the first sensing signal and the second sensing signal. And a control device for determining whether or not it has been scanned, so as to determine whether the identification code of the product has been normally scanned.
전술한 제1 특징에 따른 식별코드 스캔 확인 시스템에 있어서, 상기 식별코드 스캔 확인 시스템은 상품이 계산대 입구로 들어와서 출구로 나가는 과정에 대한 영상을 촬영하도록 배치된 촬상 장치;를 더 구비하고, The identification code scan confirmation system according to the first aspect of the present invention, wherein the identification code scan confirmation system further comprises: an imaging device arranged to photograph an image of a product entering and exiting a cash register entrance;
상기 제어 장치는 상기 제1 감지 신호가 수신되면 상기 촬상 장치를 구동시켜 동영상을 촬상하고 상기 제2 감지 신호가 수신되거나 정상 스캔되었다고 판단되면 상기 촬상 장치의 구동을 종료하며, 상기 제어 장치는 제1 감지 신호와 제2 감지 신호가 수신되고, 제1 감지 신호와 제2 감지 신호의 사이에 식별 코드가 정상 스캔되지 않았다고 판단되면, 상기 촬상 장치에 의해 촬영된 동영상을 서버로 전송하는 것이 바람직하다. When the first detection signal is received, the control device drives the imaging device to capture a moving image, and when it is determined that the second detection signal has been received or is normally scanned, the control device stops driving the imaging device. If it is determined that the detection signal and the second detection signal are received, and the identification code is not normally scanned between the first detection signal and the second detection signal, it is preferable to transmit the video photographed by the imaging device to the server.
전술한 제1 특징에 따른 식별코드 스캔 확인 시스템에 있어서, 상기 제어 장치는 음향 신호의 임계값 및 샘플링 윈도우 크기를 사전에 설정하고, In the identification code scan confirmation system according to the first aspect described above, the control device presets a threshold value and a sampling window size of an acoustic signal,
상기 음향 센서로부터 수신된 음향 신호를 주파수 영역 신호로 변환하고, 변환된 음향 신호의 각 주파수에 대한 파워 스펙트럼을 계산하고, 상기 계산된 파워 스펙트럼이 상기 임계값보다 큰 시작점(starting point)을 검출하고, 상기 검출된 시작점으로부터 상기 샘플링 윈도우 크기만큼 샘플링하며, 샘플링된 음향 신호와 상기 정상 스캔음을 비교하고, 비교 결과에 따라 정상 스캔되었는지 여부를 판별하는 것이 바람직하다. 또한, 상기 제어 장치는 샘플링 구간의 음향 신호와 상기 정상 스캔음을 비교하기 위하여, 제어 장치는 상기 정상 스캔음을 주파수 영역 신호로 변환하고, 변환된 정상 스캔음에 대하여 각 주파수별 파워 스펙트럼값을 검출하고, 상기 검출된 파워 스펙트럼값의 순서에 따라 각 주파수에 인덱스를 부여한 주파수별 인덱스들을 저장하고, 상기 샘플링 구간의 음향 신호에 대하여 각 주파수별 파워 스펙트럼값을 검출하고, 상기 검출된 파워 스펙트럼값의 순서에 따라 음향 신호의 주파수를 인덱싱하여, 샘플링 구간의 음향 신호에 대한 주파수별 인덱스들을 검출하고, 상기 정상 스캔음에 대한 주파수별 인덱스들과 상기 샘플링 구간의 음향 신호에 대한 주파수별 인덱스들을 비교하고, 그 비교 결과에 따라 정상 스캔되었는지 여부를 판별하는 것이 더욱 바람직하다. Converts the acoustic signal received from the acoustic sensor into a frequency domain signal, calculates a power spectrum for each frequency of the converted acoustic signal, detects a starting point at which the calculated power spectrum is greater than the threshold, It is preferable to sample the sampling window size from the detected starting point, compare the sampled sound signal with the normal scan sound, and determine whether the normal scan has been performed according to the comparison result. In addition, in order to compare the sound signal in the sampling interval with the normal scan sound, the control device converts the normal scan sound into a frequency domain signal, and converts the power spectrum value for each frequency with respect to the converted normal scan sound. Detects, stores frequency indices indexed to respective frequencies according to the order of the detected power spectrum values, detects power spectrum values for each frequency with respect to an acoustic signal in the sampling interval, and detects the detected power spectrum values By indexing the frequency of the sound signal in the order of, to detect the frequency-by-frequency indexes for the sound signal of the sampling interval, compare the frequency-specific indexes for the normal scan sound and frequency-specific indexes for the sound signal of the sampling interval And determining whether or not it has been normally scanned according to the comparison result Is recommended.
본 발명의 제2 특징에 따른 상품에 부착된 식별 코드가 스캐너에 의해 정상 스캔되었는지 여부를 판단하는 식별코드 스캔 확인 시스템의 제어 장치의 제어 방법은, (a) 스캐너의 정상 스캔음을 저장하는 단계; (b) 음향 센서의 임계값과 샘플링 윈도우의 크기를 설정하는 단계; (c) 계산대의 입구 게이트에 장착된 제1 감지 센서로부터 제1 감지 신호를 수신하는 단계; (d) 제1 감지 신호가 수신되면, 음향 센서를 구동시켜 일정 시간동안 음향 신호를 녹음하고, 상기 음향 신호와 상기 정상 스캔음을 비교하는 단계; (e) 상기 음향 신호와 상기 정상 스캔음이 서로 일치하면 정상 스캔되었다고 판단하는 단계; 를 구비하여, 식별 코드가 정상 스캔되었는지 여부를 판단한다. A control method of a control device of an identification code scan confirmation system for determining whether an identification code attached to a product according to a second aspect of the present invention has been normally scanned by a scanner includes: (a) storing a normal scan sound of a scanner; ; (b) setting the threshold of the acoustic sensor and the size of the sampling window; (c) receiving a first sensing signal from a first sensing sensor mounted at the entrance gate of the checkout counter; (d) driving a sound sensor to record a sound signal for a predetermined time when the first detection signal is received, and comparing the sound signal with the normal scan sound; (e) determining that the scan is normal when the sound signal and the normal scan sound coincide with each other; And determining whether the identification code has been normally scanned.
전술한 제2 특징에 따른 제어방법에 있어서, (f) 제1 감지 신호가 수신되면, 촬상 장치를 구동시켜 동영상을 촬영하는 단계; (g) 계산대의 출구 게이트에 장착된 제2 감지 센서로부터 제2 감지 신호를 수신하는 단계; 및 (h) 제1 감지 신호와 제2 감지 신호가 수신된 시간 동안, 상기 음향 신호와 상기 정상 스캔음을 비교하여 서로 일치하지 않으면 비정상 스캔되었다고 판단하고, 상기 동영상을 서버로 전송하는 단계; 를 더 구비하는 것이 바람직하다. A control method according to the second aspect of the present invention, comprising: (f) photographing a moving image by driving an imaging device when a first detection signal is received; (g) receiving a second sensing signal from a second sensing sensor mounted at the exit gate of the counter; And (h) comparing the sound signal with the normal scan sound for a time when the first detection signal and the second detection signal are received, determining that the scan is abnormal if they do not coincide with each other, and transmitting the video to the server; As shown in Fig.
전술한 제2 특징에 따른 제어방법에 있어서, 상기 (a) 단계는 (a1) 정상 스캔음을 저장하는 단계; 및 (a2) 정상 스캔음을 주파수 영역 신호로 변환하고, 각 주파수별 파워 스펙트럼을 구하고, 파워 스펙트럼값들의 순서에 따라 각 주파수를 인덱싱하여 각 주파수별 인덱스를 부여하고, 주파수별 인덱스를 저장하는 단계;를 구비하는 것이 바람직하다. In the control method according to the second aspect, the step (a) comprises the steps of: (a1) storing a normal scan sound; And (a2) converting a normal scan sound into a frequency domain signal, obtaining a power spectrum for each frequency, indexing each frequency according to the order of the power spectrum values, giving an index for each frequency, and storing an index for each frequency. It is preferable to have;
전술한 제2 특징에 따른 제어방법에 있어서, 상기 (d) 단계는 (d1) 일정 시간동안 음향 신호를 녹음하는 단계; (d2) 상기 음향 신호를 주파수 영역 신호로 변환하고, 각 주파수별 파워 스펙트럼을 구하고, 파워 스펙트럼이 임계값을 초과하는 구간을 검출하여 시작점으로 설정하고, 시작점으로부터 샘플링 윈도우 크기만큼 샘플링하는 단계; (d3) 샘플링된 구간에 대하여 각 주파수별 파워 스펙트럼을 구하고, 파워 스펙트럼값들의 순서에 따라 각 주파수를 인덱싱하여 각 주파수별 인덱스를 부여하는 단계; (d4) 음향 신호에 대한 각 주파수별 인덱스와 정상 스캔음에 대한 각 주파수별 인덱스들을 비교하여, 서로 일치하면 정상 스캔되었다고 판단하는 단계;를 구비하는 것이 바람직하다. In the control method according to the aforementioned second aspect, the step (d) comprises: (d1) recording a sound signal for a predetermined time; (d2) converting the sound signal into a frequency domain signal, obtaining a power spectrum for each frequency, detecting a section in which the power spectrum exceeds a threshold and setting it as a starting point, and sampling a sampling window size from the starting point; (d3) obtaining a power spectrum for each frequency with respect to the sampled interval, and indexing each frequency according to the order of the power spectrum values to give an index for each frequency; (d4) comparing the index for each frequency for the sound signal and the index for each frequency for the normal scan sound, and determining that the scan is normal if they match each other.
본 발명에 따른 스캔 확인 시스템은 상업적 용도로 많이 사용되고 있는 바코드 스캐닝 기법에서 제대로 바코드 스캔이 이루어지지 않아 일어날 수 있는 피해를 막기 위한 물리적 판단과 동영상 판독을 통한 2단계의 비정상스캔 행위 검출 시스템이다. 첫 단계로 입구와 출구에 설치된 2개의 감지 센서와 미리 설정된 소리를 검출하는 소리센서를 이용하여 정상적인 스캔이 이루어졌는지 판별하고, 아닐 경우 서버로 해당 동영상을 전송하여 보다 정밀한 판별을 위한 두 번째 단계인 이동물체를 검출하고, 바코드를 추출하여 바코드의 유무를 판별하는 기법을 제안한다.The scan confirmation system according to the present invention is a two-step abnormal scanning behavior detection system through physical judgment and video reading to prevent damage that may not occur due to bar code scanning in a bar code scanning technique that is widely used for commercial purposes. The first step is to determine whether a normal scan has been performed by using two detection sensors installed at the entrance and the exit and a sound sensor that detects the preset sound. If not, the second step is to send the video to the server for more precise determination. We propose a technique to detect moving objects and extract barcodes to determine the presence of barcodes.
본 발명에 의하여 2 단계로 판별함으로써, 보다 정확하게 정상 스캔되었는지 여부를 판별할 수 있게 된다. By discriminating in two steps according to the present invention, it is possible to determine whether or not the normal scan has been performed more accurately.
도 1은 본 발명의 바람직한 실시예에 따른 식별코드 스캔 확인 시스템의 구성을 전제적으로 도시한 블록도이다.
도 2는 본 발명의 바람직한 실시예에 따른 식별코드 스캔 확인 시스템의 제어 장치(100)의 동작을 순차적으로 도시한 흐름도이다.
도 3은 본 발명의 바람직한 실시예에 따른 식별코드 스캔 확인 시스템의 서버의 동작을 순차적으로 도시한 흐름도이다.
도 4는 본 발명에 따른 제어 장치가 정상 스캔음에 대한 주파수별 인덱스를 부여하는 과정을 순차적으로 도시한 흐름도이다.
도 5는 본 발명에 따른 제어 장치가 음향 센서로부터 제공된 음향 신호가 정상 스캔음과 일치하는지 여부를 판단하는 과정을 순차적으로 도시한 흐름도이다.
도 6은 본 발명에 따라 음향 센서로부터 수신된 음향 신호를 예시적으로 도시한 그래프이다.
도 7은 본 발명에 따라 음향 신호를 FFT한 후의 파워 스펙트럼을 예시적으로 도시한 그래프이다.
도 8은 본 발명의 바람직한 실시예에 따른 식별코드 스캔 확인 시스템의 제어장치가 스캔음을 처리하는 샘플링 윈도우 크기를 결정하는 과정을 순차적으로 도시한 흐름도이다. Figure 1 is a block diagram showing the configuration of the identification code scan confirmation system according to a preferred embodiment of the present invention.
2 is a flowchart sequentially showing the operation of the
3 is a flowchart sequentially showing the operation of the server of the identification code scan confirmation system according to an embodiment of the present invention.
4 is a flowchart sequentially illustrating a process of assigning a frequency-specific index to a normal scan sound by a control device according to the present invention.
5 is a flowchart sequentially illustrating a process of determining, by the control apparatus according to the present invention, whether a sound signal provided from an acoustic sensor matches a normal scan sound.
6 is a graph illustrating an example of an acoustic signal received from an acoustic sensor according to the present invention.
7 is a graph exemplarily illustrating a power spectrum after FFT of an acoustic signal according to the present invention.
8 is a flowchart sequentially illustrating a process of determining a sampling window size for processing a scan sound by a control device of an identification code scan confirmation system according to an exemplary embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 따른 식별코드 스캔 확인 시스템 및 제어장치의 제어 방법을 구체적으로 설명한다. Hereinafter, with reference to the accompanying drawings will be described in detail the control method of the identification code scan confirmation system and control apparatus according to an embodiment of the present invention.
도 1은 본 발명의 바람직한 실시예에 따른 식별코드 스캔 확인 시스템의 구성을 전제적으로 도시한 블록도이다. 도 1을 참조하면, 본 발명에 따른 식별코드 스캔 확인 시스템(1)은 계산대의 입구 게이트와 출구 게이트에 설치되어 계산대에서 상품들에 부착된 식별코드들이 정상적으로 스캔되었는지 여부를 판별할 수 있는 시스템으로서, 제어장치(100), 제1 감지 센서(110), 제2 감지 센서(112), 촬상장치(120), 음향센서(130), 경고음 발생장치(140), 서버(150)를 구비한다. Figure 1 is a block diagram showing the configuration of the identification code scan confirmation system according to a preferred embodiment of the present invention. Referring to Figure 1, the identification code
제1 감지 센서(110) 및 제2 감지 센서(112)는 계산대의 입구 게이트와 출구 게이트에 각각 설치된다. 상기 제1 감지 센서(110)는 계산대 입구 게이트에 장착되어, 계산대로 들어오는 상품을 감지하여 제1 감지 신호를 상기 제어 장치로 출력한다. 상기 제2 감지 센서(112)는 계산대 출구 게이트에 장착되어, 계산대를 나가는 상품을 감지하여 제2 감지 신호를 상기 제어 장치로 출력한다. The
음향센서(130)는 음향 신호를 검출하여 제어장치로 제공하는 것으로서, 계산대의 바코드 스캐너에 인접한 위치에 설치되어 바코드 스캐너의 스캔음을 검출할 수 있도록 한다. The
경고음 발생 장치(140)는 상기 제어 장치로부터 제공되는 구동 신호에 따라 경고음을 출력한다. The warning sound generating
촬상 장치(120)는 계산대의 입구 게이트와 출구 게이트 사이의 영역을 촬상할 수 있도록 배치되며, 상기 제어 장치로부터 제공되는 구동 신호에 따라 구동되어 동영상을 촬영한다. 서버(150)는 상기 촬상 장치에 의해 촬영된 동영상을 수신하고, 상기 동영상을 분석하여 비정상적인 스캔 동작을 검출한다. The
상기 제어 장치(100)는 스캐너의 정상 스캔음에 대한 정보를 사전에 저장하고, 상기 음향 센서로부터 제공된 음향 신호와 상기 정상 스캔음에 대한 정보, 및 상기 제1 감지 신호와 제2 감지 신호를 이용하여 계산대로 유입된 상품들에 대한 식별 코드가 정상적으로 스캔되었는지 여부를 판별한다. 본 명세서에서의 스캐너는 바코드나 QR 코드 등과 같은 식별 코드를 판독하는 장치로서, 식별 코드에 대하여 정상적으로 판독되면 사전 설정된 정상 스캔음을 출력한다. The
상기 제어 장치의 동작은 도 2를 참조하여 구체적으로 설명한다. The operation of the control device will be described in detail with reference to FIG. 2.
도 2는 본 발명의 바람직한 실시예에 따른 식별코드 스캔 확인 시스템의 제어 장치(100)의 동작을 순차적으로 도시한 흐름도이다. 2 is a flowchart sequentially showing the operation of the
상기 제어 장치(100)는 음향 센서를 통해 스캐너의 정상 스캔음을 검출하고 사전 설정 등록하며, 상기 정상 스캔음에 대한 주파수별 인덱스들을 부여하여 저장한다(단계 200). The
다음, 음향 센서의 임계값과 샘플링 윈도우 크기를 설정한다(단계 210).Next, the threshold value and the sampling window size of the acoustic sensor are set (step 210).
다음, 주변 노이즈 환경에 따라 스캐너의 스캔음을 정수배로 증가시키거나 감소시킨다(단계 220).Next, the scan sound of the scanner is increased or decreased by an integer multiple according to the ambient noise environment (step 220).
제1 감지 센서로부터 제1 감지 신호가 수신되면(단계 230), 계산대의 입구 게이트로 상품이 들어온 것으로 판단하고 촬상 장치를 구동하여 동영상 녹화를 시작하며(단계 240), 음향 센서를 일정 시간동안 구동하여 음향 신호를 녹음한다(단계 250). 상기 녹음된 음향 신호와 상기 정상 스캔음을 비교하여 서로 일치되는지 여부를 판단한다(단계 260). When the first detection signal is received from the first detection sensor (step 230), it is determined that the product has entered the entrance gate of the checkout counter, and the imaging device is driven to start recording the video (step 240), and the acoustic sensor is driven for a predetermined time. Record a sound signal (step 250). The recorded sound signal is compared with the normal scan sound to determine whether they match each other (step 260).
단계 260에서 음향 신호가 정상 스캔음과 일치하여 바코드가 정상적으로 스캔된 것으로 판단되면, 동영상 녹화를 종료하고 단계 230으로 되돌아가서 제1 감지 센서로부터 제1 감지 신호의 수신을 대기한다. If it is determined in step 260 that the audio signal matches the normal scan sound and the barcode is normally scanned, video recording ends and the process returns to step 230 to wait for the reception of the first detection signal from the first detection sensor.
단계 260에서 음향 신호가 정상 스캔음과 일치하지 않는 경우, 제2 감지 센서로부터 제2 감지 신호가 수신되었는지 여부를 확인하고(단계 270), 만약 제2 감지 신호가 수신되지 않은 경우 단계 250으로 되돌아가서 음향 센서를 구동하여 다시 음향 신호를 녹음하고 정상 스캔 판별 과정을 수행한다. If the sound signal does not match the normal scan sound in step 260, it is checked whether a second detection signal is received from the second detection sensor (step 270), and if the second detection signal is not received, the flow returns to step 250. Go ahead and drive the acoustic sensor to record the acoustic signal again and perform the normal scan discrimination process.
만약 단계 270에서 제2 감지 신호가 수신되었다면, 바코드가 정상적으로 스캔되지 않고 상품이 출구 게이트를 나간 것으로서 비정상 스캔으로 판단하고, 동영상 녹화를 종료하고 경고음 발생 장치를 구동하여 경고음을 출력하고 해당 동영상을 서버로 전송한다(단계280). If the second detection signal is received in step 270, the barcode is not normally scanned and the product exits the exit gate and is determined to be an abnormal scan. (Step 280).
이하, 도 3을 참조하여 동영상을 수신한 서버의 동작을 구체적으로 설명한다. 도 3은 본 발명의 바람직한 실시예에 따른 식별코드 스캔 확인 시스템의 서버의 동작을 순차적으로 도시한 흐름도이다. Hereinafter, an operation of a server that receives a video will be described in detail with reference to FIG. 3. 3 is a flowchart sequentially showing the operation of the server of the identification code scan confirmation system according to an embodiment of the present invention.
도 3을 참조하면, 상기 서버는 촬상 장치로부터 동영상을 수신하면(단계 300), 움직이는 물체에 대한 스캔 동작이 있는지 여부를 확인한다(단계 302). 스캔 동작이 있는 경우, 수신된 동영상을 분석하여 바코드가 있는지 여부를 판단한다(단계310). 만약 단계310에서 바코드가 없는 경우 바코드 스캔 누락으로 판단하고(단계 320) 제1 경고음을 출력한다. 만약 단계 310에서 바코드가 있는 경우 바코드 스캔 오류로 판단하고(단계330) 제2 경고음을 출력한다(단계 340). 동영상으로부터 바코드를 식별하는 바코드 식별 알고리즘은 당업계에 공지된 기술로서, 본 명세서에서는 이에 대하여 구체적으로 설명하지 않는다. Referring to FIG. 3, when the server receives a moving image from the imaging apparatus (step 300), the server checks whether there is a scan operation on a moving object (step 302). If there is a scan operation, the received video is analyzed to determine whether there is a barcode (step 310). If there is no barcode in step 310, it is determined that the barcode is missing (step 320) and a first warning sound is output. If there is a barcode in step 310, it is determined that the barcode is scanned (step 330) and a second warning sound is output (step 340). Barcode identification algorithm for identifying a barcode from a video is a technique known in the art, which is not described in detail herein.
이하, 도 4를 참조하여 본 발명에 따른 제어 장치가 정상 스캔음에 대한 주파수별 인덱스를 부여하는 과정(도 2의 단계 200)을 순차적으로 설명한다. Hereinafter, a process (step 200 of FIG. 2) of assigning an index for each frequency to a normal scan sound by the control apparatus according to the present invention will be described in detail with reference to FIG. 4.
도 4는 본 발명에 따른 제어 장치가 정상 스캔음에 대한 주파수별 인덱스를 부여하는 과정을 순차적으로 도시한 흐름도이다. 4 is a flowchart sequentially illustrating a process of assigning a frequency-specific index to a normal scan sound by a control device according to the present invention.
도 4를 참조하면, 먼저 스캐너의 정상 스캔음을 입력받아 저장한다(단계 400). 입력된 정상 스캔음을 FFT 변환하여 주파수 영역 신호로 변환한다(단계410). 다음, 복수 개의 주파수들에 대하여 각각 파워 스펙트럼을 검출한다(단계420). 다음 각 주파수에 대한 파워 스펙트럼들을 표준화시킨 후(단계 430), 파워 스펙트럼의 순서에 따라 각 주파수들에 대해 인덱스를 부여하고 저장한다(단계 440).Referring to FIG. 4, first, a normal scan sound of a scanner is received and stored (step 400). The input normal scan sound is converted into a frequency domain signal by FFT conversion (step 410). Next, a power spectrum is detected for each of the plurality of frequencies (step 420). Next, normalize the power spectra for each frequency (step 430), and then index and store the respective frequencies according to the order of the power spectrum (step 440).
이하, 도 5를 참조하여 본 발명에 따른 제어 장치가 음향 센서로부터 제공된 음향 신호가 정상 스캔음과 일치하는지 여부를 판단하는 과정(도 2의 단계 260)을구체적으로 설명한다. 도 5는 본 발명에 따른 제어 장치가 음향 센서로부터 제공된 음향 신호가 정상 스캔음과 일치하는지 여부를 판단하는 과정을 순차적으로 도시한 흐름도이다. Hereinafter, a process (step 260 of FIG. 2) of determining, by the control apparatus according to the present invention, whether the acoustic signal provided from the acoustic sensor matches the normal scan sound will be described in detail with reference to FIG. 5. 5 is a flowchart sequentially illustrating a process of determining, by the control apparatus according to the present invention, whether a sound signal provided from an acoustic sensor matches a normal scan sound.
도 5를 참조하면, 먼저 음향 센서로부터 일정 시간동안 음향 신호(x(t))를 수신한다(단계 500). 수신된 음향 신호를 사전 설정된 기본 윈도우 크기로 분할한다(단계 510). 도 6은 본 발명에 따라 음향 센서로부터 수신된 음향 신호를 예시적으로 도시한 그래프이다. 도 6에 도시된 바와 같은 음향 신호를 윈도우 크기 20ms, 이동률 10ms 크기로 분할할 수 있다. Referring to FIG. 5, first, an acoustic signal x (t) is received from the acoustic sensor for a predetermined time (step 500). The received acoustic signal is divided into a preset default window size (step 510). 6 is a graph illustrating an example of an acoustic signal received from an acoustic sensor according to the present invention. A sound signal as shown in FIG. 6 may be divided into a window size of 20 ms and a moving rate of 10 ms.
다음, 분할된 각 프레임들을 수학식 1에 따라 FFT(Fast Fourier Transform)하여 주파수 영역 신호로 변환하고(단계 520), 수학식 2에 따라 각 주파수별로 파워 스펙트럼(Ex)을 계산한다(단계 530). 도 7은 본 발명에 따라 음향 신호를 FFT한 후의 파워 스펙트럼을 예시적으로 도시한 그래프이다. Next, each of the divided frames is transformed into a frequency domain signal by fast Fourier transform (FFT) according to Equation 1 (step 520), and a power spectrum E x is calculated for each frequency according to equation (2) (step 530). ). 7 is a graph exemplarily illustrating a power spectrum after FFT of an acoustic signal according to the present invention.
여기서, n은 프레임의 번호이며, i는 주파수 성분을 나타낸다. 따라서, X(i,n)은 n번째 프레임의 i번째 주파수 성분에 대한 음향 신호를 나타낸다. Where n is the number of frames and i is the frequency component. Thus, X (i, n) represents the acoustic signal for the i th frequency component of the n th frame.
여기서, 단위는 Watt/Frequency 이다. Here, the unit is Watt / Frequency.
다음, 파워 스펙트럼값이 사전 설정된 임계값을 넘는 구간을 시작점(Starting Point)으로 설정하고(단계 540), 시작점으로부터 샘플링 윈도우 크기만큼 샘플링한다(단계 550). Next, a section in which the power spectral value exceeds a preset threshold is set as a starting point (step 540), and sampled by the sampling window size from the starting point (step 550).
이와 같이 임계값을 설정하는 이유는 신호음과 잡음을 분리해 내는 효과를 보기 위한 것이며, 상대적으로 시끄럽고 잡음이 심한 환경에서는 임계값을 높게 설정하여 잡음에 상관없이 스캔음을 잡아낼 수 있는 것을 기대할 수 있기 때문이다. 임계값을 설정하는 방법으로는, 초기에 정상 스캔음을 인식시킬 때의 샘플링 내의 전체 스캔음 주파수 파워의 정수배 만큼 크게 하거나 작게 하여 설정하는데, 그렇게 하더라도 주파수별 파워 스펙트럼의 특성은 크기가 커지더라도 변화하지 않기 때문에 상황에 맞는 임계값을 설정하더라도 기존의 입력된 스캔음을 찾는 데는 전혀 문제가 되지 않는다. The reason for setting the threshold is to see the effect of separating the beeper and the noise.In a relatively noisy and noisy environment, you can expect to catch the scan sound regardless of the noise by setting the threshold higher. Because. As a method of setting the threshold value, it is set to increase or decrease the frequency of the total scan sound frequency power in the sampling when the normal scan sound is initially recognized, but the characteristics of the power spectrum for each frequency change even if the magnitude increases. Setting a threshold that suits the situation is not a problem for finding existing input scan sounds.
다음, 샘플링 구간에 대하여 복수 개의 주파수별 파워 스펙트럼을 추출하고(단계 560), 추출된 파워 스펙트럼을 수학식 3에 따라 표준화시킨 후(단계 565) 파워 스펙트럼의 순서에 따라 각 주파수에 대하여 인덱스들을 부여한다(단계 570). Next, a plurality of frequency-specific power spectra are extracted for the sampling interval (step 560), the extracted power spectrum is normalized according to Equation 3 (step 565), and indexes are assigned to each frequency in the order of the power spectrum. (Step 570).
여기서, N'n은 표준화된 특성 비교값이며, M'n 은 특성 비교값이며, N'은 표준화개수이며, 주로 변환 데이터 그룹의 피크에 해당하는 주파수 값의 파워 값을 사용한다. 이 표준화 과정은 파워 스펙트럼을 구하고 난 후 주파수별 인덱싱하기 전에 수행하는 것이 바람직하다. Here, N'n is a normalized characteristic comparison value, M'n is a characteristic comparison value, N 'is a normalization number, and mainly uses a power value of a frequency value corresponding to the peak of the transform data group. This normalization process is preferably performed after obtaining the power spectrum and before indexing by frequency.
수학식 4에 따라 각 구간별 에너지(P[j][k])를 산출한다. The energy P [j] [k] for each section is calculated according to Equation 4.
여기서, x(n)은 샘플링된 음향 신호이며, Where x (n) is the sampled sound signal,
다음, 샘플링 구간의 음향 신호에 대한 주파수별 인덱스들과 정상 스캔음에 대한 주파수별 인덱스들을 서로 비교하고(단계 580), 이들이 서로 일치하는 경우 정상 스캔된 것으로 판단한다(단계 590). Next, the frequency indices of the sound signal of the sampling interval and the frequency indices of the normal scan sound are compared with each other (step 580), and if they match with each other, it is determined that the scan is normal (step 590).
이하, 도 8을 참조하여 본 발명에 따른 제어 장치가 스캔음을 처리하는 샘플링 윈도우 크기를 결정하는 알고리즘을 설명한다. 도 8은 본 발명의 바람직한 실시예에 따른 식별코드 스캔 확인 시스템의 제어장치가 스캔음을 처리하는 샘플링 윈도우 크기를 결정하는 과정을 순차적으로 도시한 흐름도이다. Hereinafter, an algorithm for determining a sampling window size for processing a scan sound by a control device according to the present invention will be described with reference to FIG. 8. 8 is a flowchart sequentially illustrating a process of determining a sampling window size for processing a scan sound by a control device of an identification code scan confirmation system according to an exemplary embodiment of the present invention.
본 발명에 따른 실시예에서는 음향 신호를 분석하는 윈도우의 기본 크기를 512 프레임, 변화율을 256 프레임으로 잡았다. 시작 시점으로 여기는 과도 구간은 급격하게 신호의 변화가 있는 구간, 즉 파워의 변화가 급격한 구간으로서, 여기서는 그런 구간일수록 윈도우의 크기를 짧게 해서 해상도를 상승시켜 찾아내야 한다. 윈도우를 짧게 하면 시간 영역은 신호의 분석을 넓게 하고, 주파수 영역은 분석이 짧아지는 효과를 기대할 수 있다. In the embodiment of the present invention, the basic size of the window for analyzing the acoustic signal is set to 512 frames and the change rate is 256 frames. The transient section regarded as the starting point is a section in which there is a sudden change in the signal, that is, a section in which the change in power is sharp. Here, the section should be found by increasing the resolution by shortening the window size. Shorter windows can be expected to make the time domain wider and the frequency domain shorter.
256 포인트 샘플 값의 파워 값의 차이가 임계치 S1 ( 소리 샘플이 16 비트일 때 100/32768 로 설정) 보다 크면 과도 구간으로 잡았다. 보다 세밀하게 스캔 음 데이터를 잡아내고 싶으면 샘플링 윈도우 값을 128 으로 설정할 수 있다. 이 경우 128 샘플 4개가 생기고 에너지 값 a, b, c, d를 구하고 그 차들 b-a, c-b, d-c, d-a 의 합이 256 샘플로 할 때의 임계치 S1 의 두 배가 넘는 경우 과도 구간으로 잡는다. 가장 세밀하게 세밀한 스캔 음 데이터를 잡아내려면 128 샘플을 다시 64 샘플로 분할하고 각 에너지 a, b, c, d, e, f, g, h 를 구하고 각 샘플들의 파워 값 차의 합, 즉 b-a, c-b, d-c, e-d, f-e ,g-f, h-g, h-a 값의 합이 임계치 S1 값의 네 배가 넘는 경우 과도 구간으로 잡는다. 따라서 윈도우 크기와 transient 구간을 찾기 위한 임계치와 샘플링 윈도우의 설정은 사용자가 미리 주변 상황에 맞게 설정하여 적절한 값을 찾아낼 수 있다. If the difference in power value of the 256 point sample value is greater than the threshold S1 (set to 100/32768 when the sound sample is 16 bits), it is taken as a transient section. If you want to capture more detailed scan note data, you can set the sampling window value to 128. In this case, four 128 samples are generated, and the energy values a, b, c, and d are obtained, and when the sum of the differences b-a, c-b, d-c, and d-a is more than twice the threshold S1 of 256 samples, it is taken as a transient interval. To capture the finest scan note data, divide 128 samples back into 64 samples, find each energy a, b, c, d, e, f, g, h and sum the difference in power values of each sample, that is, ba If the sum of the values of cb, dc, ed, fe, gf, hg, and ha exceeds four times the threshold S1, it is regarded as a transient interval. Therefore, the threshold and sampling window for finding the window size and the transient interval can be set by the user according to the surrounding conditions in advance to find an appropriate value.
그리고 이 임계치의 변화에 대응하여 바코드 스캐너의 스캔 음 역시 정수배로 증가하거나 감소한다.
In response to the change of the threshold, the scan sound of the barcode scanner also increases or decreases by an integer multiple.
이상에서 본 발명에 대하여 그 바람직한 실시예를 중심으로 설명하였으나, 이는 단지 예시일 뿐 본 발명을 한정하는 것이 아니며, 본 발명이 속하는 분야의 통상의 지식을 가진 자라면 본 발명의 본질적인 특성을 벗어나지 않는 범위에서 이상에 예시되지 않은 여러 가지의 변형과 응용이 가능함을 알 수 있을 것이다. 그리고, 이러한 변형과 응용에 관계된 차이점들은 첨부된 청구 범위에서 규정하는 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다. While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood that various changes and modifications may be made without departing from the spirit and scope of the invention. It is to be understood that the present invention may be embodied in many other specific forms without departing from the spirit or essential characteristics thereof.
본 발명에 따른 식별코드 스캔 확인 시스템은 바코드 스캔 기술이 사용되는 매장이나 계산대 등에 함께 사용될 수 있다. Identification code scan confirmation system according to the present invention can be used in conjunction with a store or checkout counter used barcode scanning technology.
1 : 식별코드 스캔 확인 시스템
100 : 제어장치
110 : 제1 감지 센서
112 : 제2 감지 센서
120 : 촬상장치
130 : 음향센서
140 : 경고음 발생장치
150 : 서버1: Identification code scan confirmation system
100: Control device
110: first detection sensor
112: second detection sensor
120: imaging device
130: acoustic sensor
140: warning sound generator
150: Server
Claims (16)
상품들이 들어오는 계산대 입구에 장착되어 계산대로 들어오는 상품을 감지하여 제1 감지 신호를 출력하는 제1 감지 센서;
상품들이 나가는 계산대 출구에 장착되어 계산대를 나가는 상품을 감지하여 제2 감지 신호를 출력하는 제2 감지 센서;
계산대의 소리를 감지한 음향 신호를 출력하는 음향 센서;
스캐너의 정상 스캔음을 사전에 저장하고, 상기 음향 센서로부터 제공된 음향 신호와 상기 정상 스캔음, 및 상기 제1 감지 신호와 제2 감지 신호를 이용하여 계산대로 유입된 상품들에 대한 식별 코드가 정상 스캔되었는지 여부를 판별하는 제어 장치;
를 구비하여, 상품의 식별코드가 정상 스캔되었는지 여부를 판별할 수 있도록 하는 식별코드 스캔 확인 시스템.In the identification code scan confirmation system that can determine whether the identification code is normally scanned in the process of scanning the identification code attached to the goods,
A first detection sensor mounted at an entrance of a cashier to receive goods and detecting a goods to be entered as a cashier and outputting a first detection signal;
A second detection sensor mounted at an exit of a cashier at which the goods exit and sensing a product exiting the cashier and outputting a second detection signal;
An acoustic sensor for outputting an acoustic signal sensing the sound of the cashier;
The normal scan sound of the scanner is stored in advance, and the identification code for the goods introduced into the calculation is normal using the acoustic signal provided from the acoustic sensor, the normal scan sound, and the first sensing signal and the second sensing signal. A control device for determining whether or not it has been scanned;
And an identification code scan confirmation system for determining whether the identification code of the product is normally scanned.
상기 제어 장치는 상기 제1 감지 신호가 수신되면 상기 촬상 장치를 구동시켜 동영상을 촬상하고 상기 제2 감지 신호가 수신되거나 정상 스캔되었다고 판단되면 상기 촬상 장치의 구동을 종료하며,
상기 제어 장치는 제1 감지 신호와 제2 감지 신호가 수신되고, 제1 감지 신호와 제2 감지 신호의 사이에 식별 코드가 정상 스캔되지 않았다고 판단되면, 상기 촬상 장치에 의해 촬영된 동영상을 서버로 전송하는 것을 특징으로 하는 식별코드 스캔 확인 시스템.The apparatus of claim 1, wherein the identification code scan confirmation system further comprises an imaging device arranged to capture an image of a product entering and exiting the checkout counter.
When the first detection signal is received, the control device drives the imaging device to capture a moving image, and when it is determined that the second detection signal is received or is normally scanned, stops the driving of the imaging device.
If it is determined that the first detection signal and the second detection signal are received, and the identification code is not normally scanned between the first detection signal and the second detection signal, the control apparatus sends a video photographed by the imaging device to the server. Identification code scan confirmation system, characterized in that for transmitting.
상기 음향 센서로부터 수신된 음향 신호를 주파수 영역 신호로 변환하고, 변환된 음향 신호의 각 주파수에 대한 파워 스펙트럼을 계산하고, 상기 계산된 파워 스펙트럼이 상기 임계값보다 큰 시작점(starting point)을 검출하고, 상기 검출된 시작점으로부터 상기 샘플링 윈도우 크기만큼 샘플링하며, 샘플링된 음향 신호와 상기 정상 스캔음을 비교하고, 비교 결과에 따라 정상 스캔되었는지 여부를 판별하는 것을 특징으로 하는 식별코드 스캔 확인 시스템.The method of claim 1, wherein the control device pre-sets the threshold value and the sampling window size of the acoustic signal,
Converts the acoustic signal received from the acoustic sensor into a frequency domain signal, calculates a power spectrum for each frequency of the converted acoustic signal, detects a starting point at which the calculated power spectrum is greater than the threshold, And sampling the size of the sampling window from the detected starting point, comparing the sampled sound signal with the normal scan sound, and determining whether or not the normal scan has been performed according to a comparison result.
제어 장치는 상기 정상 스캔음을 주파수 영역 신호로 변환하고, 변환된 정상 스캔음에 대하여 각 주파수별 파워 스펙트럼값을 검출하고, 상기 검출된 파워 스펙트럼값의 순서에 따라 각 주파수에 인덱스를 부여한 주파수별 인덱스들을 저장하고,
상기 샘플링 구간의 음향 신호에 대하여 각 주파수별 파워 스펙트럼값을 검출하고, 상기 검출된 파워 스펙트럼값의 순서에 따라 음향 신호의 주파수를 인덱싱하여, 샘플링 구간의 음향 신호에 대한 주파수별 인덱스들을 검출하고,
상기 정상 스캔음에 대한 주파수별 인덱스들과 상기 샘플링 구간의 음향 신호에 대한 주파수별 인덱스들을 비교하고, 그 비교 결과에 따라 정상 스캔되었는지 여부를 판별하는 것을 특징으로 하는 식별코드 스캔 확인 시스템. The method of claim 4, wherein the control device compares the sound signal in the sampling interval with the normal scan sound.
The control device converts the normal scan sound into a frequency domain signal, detects a power spectrum value for each frequency with respect to the converted normal scan sound, and assigns an index to each frequency according to the order of the detected power spectrum value. Store indices,
Detecting a power spectral value for each frequency with respect to the acoustic signal in the sampling interval, indexing the frequency of the acoustic signal according to the order of the detected power spectrum value, and detecting frequency-specific indexes for the acoustic signal in the sampling interval,
And comparing the frequency-specific indexes for the normal scan sound with the frequency-specific indexes for the sound signal in the sampling interval, and determining whether or not the normal scan has been performed according to the comparison result.
상기 서버는 동영상 정보가 수신되면, 동영상을 분석하여 스캔 동작에 대한 장면이 있는지 확인하고, 동영상으로부터 바코드를 추출하고, 바코드가 있는 경우 바코드 스캔 오류로 판단하고, 바코드가 없는 경우 바코드 스캔 누락으로 판단하는 것을 특징으로 하는 식별코드 스캔 확인 시스템. According to claim 2, wherein the identification code scan confirmation system further comprises a server in communication with the control device,
When the server receives the video information, the server analyzes the video to see if there is a scene for the scan operation, extracts a barcode from the video, and if there is a barcode, determines that it is a barcode scan error, and if there is no barcode, determines that the barcode scan is missing. Identification code scan confirmation system, characterized in that.
상기 제어장치는 비정상 스캔이라고 판단되면 상기 경고음 발생 장치를 구동시키는 것을 특징으로 하는 식별코드 스캔 확인 시스템. According to claim 1, wherein the identification code scan confirmation system further comprises a warning sound generating device,
And the control device drives the warning sound generating device when it is determined that the abnormal scan is performed.
(a) 스캐너의 정상 스캔음을 저장하는 단계;
(b) 음향 센서의 임계값과 샘플링 윈도우의 크기를 설정하는 단계;
(c) 계산대의 입구 게이트에 장착된 제1 감지 센서로부터 제1 감지 신호를 수신하는 단계;
(d) 제1 감지 신호가 수신되면, 음향 센서를 구동시켜 일정 시간동안 음향 신호를 녹음하고, 상기 음향 신호와 상기 정상 스캔음을 비교하는 단계;
(e) 상기 음향 신호와 상기 정상 스캔음이 서로 일치하면 정상 스캔되었다고 판단하는 단계;
를 구비하여, 식별 코드가 정상 스캔되었는지 여부를 판단하는 제어 방법. In the control method of the control device of the identification code scan confirmation system for determining whether the identification code attached to the product has been normally scanned by the scanner,
(a) storing a normal scan sound of the scanner;
(b) setting the threshold of the acoustic sensor and the size of the sampling window;
(c) receiving a first sensing signal from a first sensing sensor mounted at the entrance gate of the checkout counter;
(d) driving a sound sensor to record a sound signal for a predetermined time when the first detection signal is received, and comparing the sound signal with the normal scan sound;
(e) determining that the scan is normal when the sound signal and the normal scan sound coincide with each other;
And determining whether the identification code has been normally scanned.
(g) 계산대의 출구 게이트에 장착된 제2 감지 센서로부터 제2 감지 신호를 수신하는 단계; 및
(h) 제1 감지 신호와 제2 감지 신호가 수신된 시간 동안, 상기 음향 신호와 상기 정상 스캔음을 비교하여 서로 일치하지 않으면 비정상 스캔되었다고 판단하고, 상기 동영상을 서버로 전송하는 단계;
를 더 구비하는 것을 특징으로 하는 제어 방법. 12. The method of claim 11, further comprising: (f) photographing a moving image by driving the imaging device when the first detection signal is received;
(g) receiving a second sensing signal from a second sensing sensor mounted at the exit gate of the counter; And
(h) comparing the sound signal with the normal scan sound during the time when the first detection signal and the second detection signal are received, and determining that the scan signal is abnormal if not matched with each other, and transmitting the video to the server;
Control method characterized in that it further comprises.
(g) 제1 감지 신호와 제2 감지 신호가 수신된 시간 동안, 상기 음향 신호와 상기 정상 스캔음을 비교하여 서로 일치하지 않으면 비정상 스캔되었다고 판단하는 단계;
를 더 구비하는 것을 특징으로 하는 제어 방법. 12. The method of claim 11, further comprising: (f) receiving a second sensing signal from a second sensing sensor mounted at an exit gate of the checkout counter; And
(g) comparing the sound signal and the normal scan sound for a time period when the first detection signal and the second detection signal are received and determining that the scan is abnormal if they do not coincide with each other;
Control method characterized in that it further comprises.
(a1) 정상 스캔음을 저장하는 단계; 및
(a2) 정상 스캔음을 주파수 영역 신호로 변환하고, 각 주파수별 파워 스펙트럼을 구하고, 파워 스펙트럼값들의 순서에 따라 각 주파수를 인덱싱하여 각 주파수별 인덱스를 부여하고, 주파수별 인덱스를 저장하는 단계;
를 구비하는 것을 특징으로 하는 제어 방법. 12. The method of claim 11, wherein step (a)
(a1) storing a normal scan sound; And
(a2) converting a normal scan sound into a frequency domain signal, obtaining a power spectrum for each frequency, indexing each frequency according to the order of the power spectrum values, assigning an index for each frequency, and storing an index for each frequency;
Control method characterized in that it comprises a.
(d1) 일정 시간동안 음향 신호를 녹음하는 단계;
(d2) 상기 음향 신호를 주파수 영역 신호로 변환하고, 각 주파수별 파워 스펙트럼을 구하고, 파워 스펙트럼이 임계값을 초과하는 구간을 검출하여 시작점으로 설정하고, 시작점으로부터 샘플링 윈도우 크기만큼 샘플링하는 단계;
(d3) 샘플링된 구간에 대하여 각 주파수별 파워 스펙트럼을 구하고, 파워 스펙트럼값들의 순서에 따라 각 주파수를 인덱싱하여 각 주파수별 인덱스를 부여하는 단계;
(d4) 음향 신호에 대한 각 주파수별 인덱스와 정상 스캔음에 대한 각 주파수별 인덱스들을 비교하여, 서로 일치하면 정상 스캔되었다고 판단하는 단계;
를 구비하는 것을 특징으로 하는 제어 방법. 12. The method of claim 11, wherein step (d)
(d1) recording a sound signal for a predetermined time;
(d2) converting the sound signal into a frequency domain signal, obtaining a power spectrum for each frequency, detecting a section in which the power spectrum exceeds a threshold and setting it as a starting point, and sampling a sampling window size from the starting point;
(d3) obtaining a power spectrum for each frequency with respect to the sampled interval, and indexing each frequency according to the order of the power spectrum values to give an index for each frequency;
(d4) comparing the index for each frequency for the acoustic signal with the index for each frequency for the normal scan sound, and determining that the scan is normal if they match each other;
Control method characterized in that it comprises a.
12. The method of claim 11, wherein step (b) further comprises increasing or decreasing the scan sound of the scanner by an integer multiple according to the surrounding environment.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020120058595A KR101287613B1 (en) | 2012-05-31 | 2012-05-31 | System for checking proper scanning operation destinction and control method thereof |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020120058595A KR101287613B1 (en) | 2012-05-31 | 2012-05-31 | System for checking proper scanning operation destinction and control method thereof |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR101287613B1 true KR101287613B1 (en) | 2013-07-19 |
Family
ID=48997678
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020120058595A KR101287613B1 (en) | 2012-05-31 | 2012-05-31 | System for checking proper scanning operation destinction and control method thereof |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101287613B1 (en) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006179032A (en) | 2006-03-17 | 2006-07-06 | Toshiba Tec Corp | Commodity sales data processor |
| JP2007323419A (en) | 2006-06-01 | 2007-12-13 | Toshiba Tec Corp | Self-checkout unit |
| KR20090076683A (en) * | 2008-01-09 | 2009-07-13 | 성균관대학교산학협력단 | Method, apparatus for detecting signal and computer readable record-medium on which program for executing method thereof |
-
2012
- 2012-05-31 KR KR1020120058595A patent/KR101287613B1/en active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006179032A (en) | 2006-03-17 | 2006-07-06 | Toshiba Tec Corp | Commodity sales data processor |
| JP2007323419A (en) | 2006-06-01 | 2007-12-13 | Toshiba Tec Corp | Self-checkout unit |
| KR20090076683A (en) * | 2008-01-09 | 2009-07-13 | 성균관대학교산학협력단 | Method, apparatus for detecting signal and computer readable record-medium on which program for executing method thereof |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10260949B2 (en) | Raman spectrum-based object inspection apparatus and method | |
| KR101969504B1 (en) | Sound event detection method using deep neural network and device using the method | |
| JP4945297B2 (en) | Terminal monitoring device | |
| EP3067829A1 (en) | Person authentication method | |
| US20060136997A1 (en) | Authentication system and method | |
| KR101187917B1 (en) | Gate control system | |
| KR20140141052A (en) | System and method for analyzing sensing data | |
| JP5618295B2 (en) | Authentication system and authentication reliability determination method | |
| TWI607336B (en) | Monitoring method?for region | |
| RU2017128710A (en) | SIMULTANEOUS AUTHENTICATION OF THE PROTECTED PRODUCT AND IDENTIFICATION OF THE USER OF THE PROTECTED PRODUCT | |
| US20050021333A1 (en) | Method and system for detecting and temporally relating components in non-stationary signals | |
| JP2010088072A (en) | Monitor image storage system and monitor image storage method for monitor image storage system | |
| CN111353374A (en) | Information processing apparatus, control method thereof, and computer-readable storage medium | |
| US10902355B2 (en) | Apparatus and method for processing information and program for the same | |
| CN113678178A (en) | Monitoring system, monitoring apparatus, monitoring method, and non-transitory computer-readable medium | |
| US10528950B2 (en) | System and a method for detecting fraudulent transactions at a transaction site | |
| KR101287613B1 (en) | System for checking proper scanning operation destinction and control method thereof | |
| JP2013061875A (en) | Authentication system and reliability determination method | |
| KR20170121934A (en) | Smart doorbell and home security system | |
| EP2963583A1 (en) | Method, apparatus and computer program for facial recognition-based identity verification | |
| KR101106450B1 (en) | Method and system for performing security on multiple unresolved objects in a self checkout | |
| US20230073167A1 (en) | Registration checking apparatus, control method, and non-transitory storage medium | |
| JP2012059002A (en) | Call terminal and image transmission method | |
| KR102337790B1 (en) | Hidden camera detector and method using temperature change | |
| KR102319687B1 (en) | Surveillance system adopting wireless acoustic sensors |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20160414 Year of fee payment: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20170719 Year of fee payment: 5 |
|
| FPAY | Annual fee payment |
Payment date: 20181204 Year of fee payment: 6 |