KR20210127536A - Surveillance method and system applicable to a mobile electronic device based on video image comparison algorithm - Google Patents
Surveillance method and system applicable to a mobile electronic device based on video image comparison algorithm Download PDFInfo
- Publication number
- KR20210127536A KR20210127536A KR1020200045552A KR20200045552A KR20210127536A KR 20210127536 A KR20210127536 A KR 20210127536A KR 1020200045552 A KR1020200045552 A KR 1020200045552A KR 20200045552 A KR20200045552 A KR 20200045552A KR 20210127536 A KR20210127536 A KR 20210127536A
- Authority
- KR
- South Korea
- Prior art keywords
- mobile electronic
- scene
- electronic device
- information
- comparison algorithm
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/70—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
- G06F21/88—Detecting or preventing theft or loss
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G06K9/6201—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/147—Scene change detection
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Computer Security & Cryptography (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Burglar Alarm Systems (AREA)
- Alarm Systems (AREA)
Abstract
Description
본 발명은 이동식 전자 기기에 적용할 수 있는 도난 방지 시스템에 관한 것으로, 더욱 상세하게는 본 발명은 이동식 전자 기기의 카메라 화면에서 추출된 배경 이미지와 촬상 되는 카메라 장면 간의 변화 정보를 토대로 알림 전송 부에 변화 정보를 전달하여 사용자로 하여금 이동식 전자 기기의 도난을 미연에 방지할 수 있게 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 방법 및 시스템에 관한 것이다.The present invention relates to an anti-theft system applicable to a mobile electronic device, and more particularly, the present invention relates to a notification transmission unit based on change information between a background image extracted from a camera screen of a mobile electronic device and a camera scene to be captured. The present invention relates to an anti-theft method and system applicable to a mobile electronic device using a video scene comparison algorithm that transmits change information to enable a user to prevent theft of the mobile electronic device in advance.
현대에 이르러 이동식 전자 기기의 보급과 사용이 증가하면서 장소에 국한 받지 않고 어디서나 이동식 전자 기기를 사용할 수 있게 됐지만 이에 대한 도난 문제가 늘어나고 있다.In modern times, with the increase in the spread and use of mobile electronic devices, mobile electronic devices can be used anywhere regardless of location, but the problem of theft is increasing.
이러한 문제를 해결하기 위해 종래에는 센서를 사용한 기술을 제안하여 이동식 전자기기를 안전하게 보호하기 위한 노력을 계속하고 있다.In order to solve this problem, in the related art, a technology using a sensor is proposed to continue an effort to safely protect a mobile electronic device.
이러한 기술로는 대한민국 특허청에 가속도 센서를 이용한 노트북 도난 방지 장치 및 방법에 명칭으로 하여 특허 공개된 제10-2008-0017502호가 있으며, 이는 가속도 센서를 이용한 노트북의 이동을 감지하여 인터럽트를 발생하는 가속도 센서와 상기 가속도 센서에서 발생한 인터럽트가 프리폴(Freefall) 인터럽트인 경우에는 하드 보호 기능을 수행하고 모션(Motion) 인터럽트인 경우에는 알람 기능을 수행하도록 제어하는 ICH6가 있다. 상기 알람 기능이 실행되어 경고음을 발생하는 음원 발생 부와 상기 알람 기능이 실행되었을 경우, 경고음을 해제 시키기 위해 사용자를 인증하기 위한 지문인식부를 포함하는 것으로서, 노트북 도난에 대해 철저한 방지가 가능 한 장치를 개시하고 있다.As such technology, there is Patent No. 10-2008-0017502, which was published as a name for a laptop anti-theft device and method using an accelerometer to the Korean Intellectual Property Office, which is an accelerometer sensor that detects the movement of a laptop using an accelerometer and generates an interrupt. and ICH6, which controls to perform a hard protection function when the interrupt generated by the acceleration sensor is a freefall interrupt and perform an alarm function when it is a motion interrupt. A device capable of thoroughly preventing theft of a laptop as it includes a sound source generating unit that generates a warning sound when the alarm function is executed and a fingerprint recognition unit for authenticating the user to cancel the warning sound when the alarm function is executed. is starting
상기한 바와 같이 종래에는 가속도 센서를 구비한 노트북에만 해당하여 다양한 이동식 전자 기기에 적용하지 못하여 효율적으로 이동식 전자 기기의 도난 방지를 이행할 수 없는 문제가 있었다.As described above, in the related art, since it is applicable only to a notebook equipped with an acceleration sensor and cannot be applied to various mobile electronic devices, there is a problem in that it is not possible to efficiently prevent theft of mobile electronic devices.
이에 종래에는 가속도 센서를 구비한 노트북에 국한되어 동작되는 형편이므로, 다양한 이동식 전자 기기에 대한 도난 상황을 좀 더 신뢰성 있게 예측하여 다양한 이동식 전자 기기를 보호하고 도난을 방지 할 수 있는 기술의 개발이 절실하게 요망되었다.Therefore, in the prior art, the operation is limited to laptops equipped with an acceleration sensor, so there is an urgent need to develop a technology that can more reliably predict the theft situation for various mobile electronic devices to protect various mobile electronic devices and prevent theft. was so desired
본 발명은 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 방법 및 시스템을 사용자에게 제공하는 것에 목적이 있다.An object of the present invention is to provide a user with an anti-theft method and system applicable to a mobile electronic device using a video scene comparison algorithm.
구체적으로 본 발명은 이동식 전자 기기의 카메라 장면에서 추출된 배경 이미지와 촬상 되는 카메라 장면 간의 장면 변화 정보를 토대로 알림 전송 부에 변화 정보를 전달하여 사용자로 하여금 이동식 전자 기기의 도난을 방지할 수 있게 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 방법 및 시스템에 관한 것이다.Specifically, the present invention transmits change information to a notification transmission unit based on scene change information between a background image extracted from a camera scene of a mobile electronic device and a camera scene to be captured, thereby enabling a user to prevent theft of a mobile electronic device. It relates to an anti-theft method and system applicable to a mobile electronic device using a video scene comparison algorithm.
한편, 본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.On the other hand, the technical problems to be achieved in the present invention are not limited to the technical problems mentioned above, and other technical problems not mentioned are clearly to those of ordinary skill in the art to which the present invention belongs from the description below. can be understood
상기의 기술적 과제를 달성하기 위한 본 발명에 따르는 비디오 장면 비교 알고리즘을 이용한 이동식 전자기기에 적용할 수 있는 도난 방지 방법은, 제어 장치가 미리 정해진 일정 시간 동안 카메라가 촬상하는 화면에 대한 배경 추출을 하는 제1단계; 상기 제어 장치가 추출된 배경 이미지와 촬상된 카메라 장면 간의 장면 변화 정보를 검출하는 제2단계; 및 상기 제어 장치가 상기 검출된 장면 변화 정보가 미리 정해진 일정 수치를 초과 하였는지를 검출하고, 상기 검출된 장면 변화 정보가 미리 정해진 일정 수치를 초과 하였으면, 알림 전송 부에 변화 정보를 전달하는 제3단계;를 포함하는 것을 특징으로 한다.In an anti-theft method applicable to a mobile electronic device using a video scene comparison algorithm according to the present invention for achieving the above technical problem, the control device extracts the background of the screen captured by the camera for a predetermined period of time. Step 1; a second step in which the control device detects scene change information between the extracted background image and the captured camera scene; and a third step of detecting, by the control device, whether the detected scene change information exceeds a predetermined predetermined value, and transmitting the change information to a notification transmission unit when the detected scene change information exceeds a predetermined predetermined value; It is characterized in that it includes.
상기한 본 발명은 이동식 전자 기기의 카메라 장면들에서 추출된 배경 이미지와 이후 촬상된 장면 간의 변화 정보를 토대로 알림 전송 부에 변화 정보를 전달하여 사용자로 하여금 이동식 전자 기기의 도난을 방지할 수 있는 효과를 야기한다.According to the present invention, the change information is transmitted to the notification transmission unit based on change information between the background image extracted from camera scenes of the mobile electronic device and the subsequently captured scene, thereby enabling the user to prevent theft of the mobile electronic device. causes
한편, 본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.On the other hand, the effects obtainable in the present invention are not limited to the above-mentioned effects, and other effects not mentioned will be clearly understood by those of ordinary skill in the art to which the present invention belongs with the following description. will be able
도 1은 본 발명의 바람직한 실시 예에 따르는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 시스템의 구성도.
도 2는 본 발명의 바람직한 실시 예에 따르는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 방법의 절차도.
도 3은 본 발명의 바람직한 실시 예에 따르는 추출된 배경 이미지와 카메라 장면 간의 변화 검출 과정을 예시한 도면.
도 4는 본 발명의 바람직한 실시 예에 따라 알림이 발생되는 것을 예시한 도면.1 is a block diagram of an anti-theft system applicable to a mobile electronic device using a video scene comparison algorithm according to a preferred embodiment of the present invention.
2 is a flowchart of an anti-theft method applicable to a mobile electronic device using a video scene comparison algorithm according to a preferred embodiment of the present invention.
3 is a diagram illustrating a change detection process between an extracted background image and a camera scene according to a preferred embodiment of the present invention.
4 is a diagram illustrating that a notification is generated according to a preferred embodiment of the present invention.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.Since the present invention can apply various transformations and can have various embodiments, specific embodiments are illustrated in the drawings and described in detail in the detailed description. However, this is not intended to limit the present invention to specific embodiments, and it should be understood to include all modifications, equivalents and substitutes included in the spirit and scope of the present invention. In describing the present invention, if it is determined that a detailed description of a related known technology may obscure the gist of the present invention, the detailed description thereof will be omitted.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.Terms such as first, second, etc. may be used to describe various elements, but the elements should not be limited by the terms. The above terms are used only for the purpose of distinguishing one component from another.
본 발명은 이동식 전자기기의 카메라 장면들에서 추출된 배경 이미지와 이후 촬상된 장면 간의 변화 정보를 토대로 알림 전송 부에 변화 정보를 전달하여 사용자로 하여금 이동식 전자기기의 도난을 방지 시킨다.According to the present invention, change information is transmitted to a notification transmission unit based on change information between a background image extracted from camera scenes of a mobile electronic device and a scene captured thereafter to prevent the user from stealing the mobile electronic device.
즉 본 발명은 사용자가 이동식 전자 기기를 관리 및 사용함에 있어 기기 도난에 대한 방지를 원하는 경우에 감안하여, 이동식 전자 기기의 카메라를 통해 실시간으로 들어온 비디오 장면들의 배경 이미지를 추출하고 이후 촬상된 장면 간의 변화 정보를 검출하고, 검출된 변화 정보가 미리 정해진 일정 수치를 초과하면 사용자에게 도난 알림을 가능하게 한다.That is, in the present invention, in consideration of a case where a user wants to prevent device theft in managing and using a mobile electronic device, background images of video scenes that are entered in real time through the camera of the mobile electronic device are extracted, and thereafter, between the captured scenes Change information is detected, and when the detected change information exceeds a predetermined predetermined value, it is possible to notify the user of theft.
특히 본 발명은 이동식 전자 기기의 카메라를 이용한 비디오 장면 비교를 통해 도난 유무를 판단하므로, 장치 성능 의존보다 핵심 알고리즘에 중점을 두어 사용자의 신뢰성을 최대화하고 현실 세계의 예외 사항 처리에 강하다.In particular, the present invention determines whether or not theft exists by comparing video scenes using a camera of a mobile electronic device, thereby maximizing the user's reliability by focusing on the core algorithm rather than relying on device performance, and is strong in handling exceptions in the real world.
이러한 본 발명의 바람직한 실시 예에 따르는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 방법 및 시스템을 도면을 참조하여 상세히 설명한다.An anti-theft method and system applicable to a mobile electronic device using a video scene comparison algorithm according to a preferred embodiment of the present invention will be described in detail with reference to the drawings.
<비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 시스템의 구성><Configuration of anti-theft system applicable to mobile electronic devices using video scene comparison algorithm>
본 발명의 바람직한 실시 예에 따르는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 시스템의 구성을 도 1을 참조하여 설명한다.A configuration of an anti-theft system applicable to a mobile electronic device using a video scene comparison algorithm according to a preferred embodiment of the present invention will be described with reference to FIG. 1 .
상기 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 시스템은 제어 장치(100)와 촬상 장치(102), 사용자 인터페이스(104), 메모리 부(106), 알림 전송 부(108) 로 구성된다.The anti-theft system applicable to a mobile electronic device using the video scene comparison algorithm includes the control device 100, the imaging device 102, the user interface 104, the memory unit 106, and the notification transmission unit 108. is composed
상기 제어 장치(100)는 상기 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 시스템의 각 부를 제어한다. 특히 상기 제어 장치(100)는 본 발명의 바람직한 실시 예에 따라 촬상 장치(102)로부터 들어오는 외부 영상으로부터 장면의 변화를 비교 및 검출하고, 변화 정보가 미리 정해진 일정 수치를 넘었을 경우 도난 상황이라 판단하여 알림 전송 부(108)에 변화 정보를 보내, 사용자가 도난 상황을 인식하도록 한다.The control device 100 controls each part of the anti-theft system applicable to a mobile electronic device using the video scene comparison algorithm. In particular, according to a preferred embodiment of the present invention, the control device 100 compares and detects changes in a scene from an external image coming from the imaging device 102 , and determines that it is a theft situation when the change information exceeds a predetermined value. to send the change information to the notification transmission unit 108 so that the user recognizes the theft situation.
상기 촬상 장치(102)는 이동식 전자 기기의 주변 외부 상황을 촬상 하고, 이에 대한 촬상 정보를 상기 제어 장치(100)에 제공한다.The imaging device 102 captures an external circumstance surrounding the mobile electronic device, and provides imaging information thereto to the control device 100 .
상기 사용자 인터페이스(104)는 사용자로부터의 각종 정보 또는 명령을 입력 받아 상기 제어 장치(100)에 제공한다.The user interface 104 receives various types of information or commands from a user and provides them to the control device 100 .
상기 메모리 부(106)은 상기 제어 장치(100)의 제어 프로그램을 포함하는 다양한 정보, 특히 사용자가 알림을 받을 수 있는 정보를 저장한다.The memory unit 106 stores various information including the control program of the control device 100 , in particular, information through which a user can receive a notification.
상기 알림 전송 부(108)는 제어 장치(100)로부터 정보를 받아 메모리 부(106)에 저장되어 있는 사용자의 정보를 이용해 사용자에게 도난 상황의 위험을 알린다.The notification transmission unit 108 receives information from the control device 100 and uses the user information stored in the memory unit 106 to notify the user of the danger of theft situation.
<비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 방법><Anti-theft method applicable to mobile electronic devices using video scene comparison algorithm>
이제 상기한 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 시스템에 적용 가능한 상기한 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 방법을 도 2의 흐름도를 참조하여 상세히 설명한다.Now, an anti-theft method applicable to a mobile electronic device using the video scene comparison algorithm applicable to an anti-theft system applicable to a mobile electronic device using the video scene comparison algorithm is described with reference to the flowchart of FIG. It will be described in detail.
상기 제어 장치(100)는 상기 촬상 장치(102)를 통해 배경 추출을 위한 카메라 화면을 촬상한다(200 단계).The control device 100 captures a camera screen for background extraction through the imaging device 102 (step 200).
상기 제어 장치(100)는 미리 정해진 일정 시간이 도래 하였는지를 확인한다(202 단계).The control device 100 checks whether a predetermined time has arrived (step 202).
상기 제어 장치(100)는 일정 시간 동안 카메라 화면에 대한 촬상 정보에서 배경 이미지를 추출한다. 여기서, 상기 배경 이미지 추출은 Open CV를 이용할 수 있다(204 단계).The control device 100 extracts a background image from the sensing information on the camera screen for a predetermined time. Here, the background image extraction may use Open CV (step 204).
상기 배경 이미지가 추출되면, 상기 제어 장치(100)는 상기 촬상 장치(102)를 통해 다시 카메라 화면을 촬상한다(206 단계).When the background image is extracted, the control device 100 captures the camera screen again through the imaging device 102 (step 206).
상기 촬상 장치(102)로부터 카메라 화면을 촬상한 촬상 정보가 제공되면, 상기 제어 장치(100)는 상기 배경 이미지의 모든 픽셀 값과 상기 카메라 화면에 대한 촬상 정보의 모든 픽셀 값 간의 차이 정보를 수학식 1에 따라 산출하고, 산출된 정보에 대하여 이미지 전처리를 함으로, 추출된 배경 이미지와 카메라 장면 간의 변화를 검출한다. 여기서, 상기 이미지 전처리는 Open CV를 이용할 수 있다(208 단계).When the imaging information obtained by photographing the camera screen is provided from the imaging device 102, the control device 100 calculates the difference information between all pixel values of the background image and all the pixel values of the imaging information for the camera screen using the equation 1, and by performing image pre-processing on the calculated information, a change between the extracted background image and the camera scene is detected. Here, the image preprocessing may use Open CV (step 208).
수학식 1Equation 1
상기 수학식 1에서 Average는 상기 추출된 배경 이미지이고, Image는 상기 카메라 화면에 대한 촬상 정보이고, Difference(x, y, t)는 상기 추출된 배경 이미지와 상기 카메라 화면에 대한 촬상 정보의 차이 정보이고, 상기 x는 x축 좌표 값이고, 상기 y는 y축 좌표 값이고, 상기 t는 시간 값이고, 상기 T는 한곗값이다. 이 상기 카메라 화면에 대한 촬상 정보의 차이 정보를 도 3의 (a)에 예시한 바와 같다.In Equation 1, Average is the extracted background image, Image is the imaging information for the camera screen, and Difference(x, y, t) is the difference information between the extracted background image and the imaging information for the camera screen , wherein x is an x-axis coordinate value, y is a y-axis coordinate value, t is a time value, and T is a threshold value. The difference information of the imaging information for the camera screen is exemplified in (a) of FIG. 3 .
상기한 추출된 배경 이미지와 카메라 장면 간의 변화 검출 과정을 도 3을 참조하여 설명한다. 도3은 본 발명의 바람직한 실시 예에 따르는 추출된 배경 이미지와 카메라 장면 간의 변화 측정 과정을 예시한 도면으로, (a)는 장면 간의 차이 정보가 적은 장면을 예시한 것이고 (b)는 장면 간의 차이 정보가 많은 장면을 예시한 것이다. 상기 배경 이미지의 모든 픽셀 값과 상기 카메라 화면에 대한 촬상 정보의 모든 픽셀 값 간의 차이 정보는 도 3의 (c)에 예시한 바와 같이 장면 간의 차이 정보가 적은 장면보다 장면 간의 차이 정보가 많은 장면에서 급격하게 증가됨을 예시한 것이다.A process of detecting a change between the extracted background image and the camera scene will be described with reference to FIG. 3 . 3 is a diagram illustrating a change measurement process between an extracted background image and a camera scene according to a preferred embodiment of the present invention. (a) illustrates a scene with little difference information between scenes, and (b) is a difference between scenes It exemplifies a scene with a lot of information. The difference information between all the pixel values of the background image and all the pixel values of the imaging information for the camera screen, as illustrated in FIG. This is an example of a sharp increase.
이와 같이 상기 배경 이미지의 모든 픽셀 값과 상기 카메라 화면에 대한 촬상 정보의 모든 픽셀 값 간의 차이 정보는 장면 간의 차이 정보가 많은 장면일 때에 급격하게 증가하므로, 제어 장치(100)는 상기 배경 이미지의 모든 픽셀 값과 상기 카메라 화면에 대한 촬상 정보의 모든 픽셀 값 간의 차이 정보가 미리 정해진 수치를 초과할 경우에 추출된 배경 이미지와 카메라 장면 간의 변화가 일어난 것으로 판단한다.As described above, since the difference information between all the pixel values of the background image and all the pixel values of the imaging information for the camera screen increases rapidly when there is a lot of information about the difference between scenes, the control device 100 controls all of the background images. When the difference information between the pixel value and all pixel values of the imaging information for the camera screen exceeds a predetermined value, it is determined that a change has occurred between the extracted background image and the camera scene.
상기 제어 장치(100)는 상기 추출된 배경 이미지와 카메라 장면 간의 변화가 미리 정해진 일정 수치를 초과하였는지 확인한다(210 단계). The control device 100 checks whether the change between the extracted background image and the camera scene exceeds a predetermined value (step 210).
상기 추출된 배경 이미지와 카메라 장면 간의 변화가 미리 정해진 일정 수치를 초과했으면, 상기 제어 장치(100)는 변화 정보를 상기 알림 전송 부(108)로 전달하고, 알림을 발생 시킨다 (212단계).If the change between the extracted background image and the camera scene exceeds a predetermined value, the control device 100 transmits the change information to the notification transmitter 108 and generates a notification (step 212).
도 4는 본 발명에 따라 알림이 발생되는 것을 예시한 도면이다. 도 4의 좌측은 평시에 알림이 발생하지 않는 상태를 예시한 것이고, 도 4의 우측은 추출된 배경 이미지와 카메라 장면 간의 변화가 미리 정해진 일정 수치 초과에 따라 알림이 발생한 상태를 예시한 것이다.4 is a diagram illustrating that a notification is generated according to the present invention. The left side of FIG. 4 illustrates a state in which a notification does not occur during normal times, and the right side of FIG. 4 illustrates a state in which a notification occurs when a change between the extracted background image and the camera scene exceeds a predetermined value.
이러한 본 발명은 추출된 배경 이미지와 카메라 장면 간의 변화가 미리 정해진 일정 수치를 초과했을 경우에 변화 정보를 전달함으로써, 사용자가 이동식 전자 기기를 놓고 자리를 비우는 동안 알림을 발생 시킬 수 있게 한다. 이는 자리를 비우는 동안 사용자의 이동식 전자 기기로 비 인가된 접근을 탐지하여 사용자의 이동식 전자 기기에 대한 도난을 방지 할 수 있게 한다.The present invention transmits change information when the change between the extracted background image and the camera scene exceeds a predetermined value, so that a notification can be generated while the user leaves the mobile electronic device and leaves his or her seat. This makes it possible to prevent theft of the user's mobile electronic device by detecting unauthorized access to the user's mobile electronic device while away.
또한 본 발명은 사용자의 특별한 제어 없이도 추출된 배경 이미지와 카메라 장면 간의 변화를 통해 알림을 발생시킴으로 사용상의 편이를 가져온다.In addition, the present invention brings convenience in use by generating a notification through a change between the extracted background image and the camera scene without the user's special control.
또한 상기한 본 발명의 바람직한 실시 예에서는 배경 추출을 하기 위해 다른 필터들과 배경 추출 기술들 중 하나인 Mean 필터를 사용하는 것만을 예시하였으나, 상기 다른 필터들과 배경 추출 기술들인 Median필터, absdiff, Open CV MoG2, 가우시안 혼합 모델(GMM), 커널 밀도 추정 방식(KDE) 등도 대체 사용하여 배경 추출을 향상 시킬 수 있으며, 이는 본 발명에 의해 당업자에게 자명하다.In addition, in the above-described preferred embodiment of the present invention, only using the Mean filter, which is one of the other filters and background extraction techniques, is used for background extraction, but the other filters and the background extraction techniques Median filter, absdiff, Open CV MoG2, Gaussian Mixed Model (GMM), Kernel Density Estimation Method (KDE), etc. can also be alternatively used to improve background extraction, which is apparent to those skilled in the art by the present invention.
상술한 바와 같이 개시된 본 발명의 바람직한 실시 예에 대한 상세한 설명은 당업자가 본 발명을 구현하고 실시할 수 있도록 제공되었다. 상기에서는 본 발명의 바람직한 실시 예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 본 발명의 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다. 예를 들어, 당업자는 상술한 실시 예에 기재된 각 구성을 서로 조합하는 방식으로 이용할 수 있다. 따라서, 본 발명은 여기에 나타난 실시형태들에 제한되려는 것이 아니라, 여기서 개시된 원리들 및 신규한 특징들과 일치하는 최광의 범위를 부여하려는 것이다.The detailed description of the preferred embodiments of the present invention disclosed as described above has been provided to enable those skilled in the art to make and practice the present invention. Although the above has been described with reference to a preferred embodiment of the present invention, it will be understood by those skilled in the art that various modifications and changes can be made to the present invention without departing from the scope of the present invention. For example, those skilled in the art may use each configuration described in the above-described embodiments in a way in which they are combined with each other. Accordingly, the present invention is not intended to be limited to the embodiments shown herein but is to be accorded the widest scope consistent with the principles and novel features disclosed herein.
본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니 되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다. 본 발명은 여기에 나타난 실시형태들에 제한되려는 것이 아니라, 여기서 개시된 원리들 및 신규한 특징들과 일치하는 최광의 범위를 부여하려는 것이다. 또한, 특허청구범위에서 명시적인 인용 관계가 있지 않은 청구 항들을 결합하여 실시 예를 구성하거나 출원 후의 보정에 의해 새로운 청구 항으로 포함할 수 있다.The present invention may be embodied in other specific forms without departing from the spirit and essential characteristics of the present invention. Accordingly, the above detailed description should not be construed as restrictive in all respects but as exemplary. The scope of the present invention should be determined by a reasonable interpretation of the appended claims, and all modifications within the equivalent scope of the present invention are included in the scope of the present invention. The present invention is not intended to be limited to the embodiments shown herein but is to be accorded the widest scope consistent with the principles and novel features disclosed herein. In addition, claims that are not explicitly cited in the claims may be combined to form an embodiment, or may be included as new claims by amendment after filing.
Claims (10)
제어 장치가 미리 정해진 일정 시간 동안 카메라가 촬상하는 화면에 대한 배경 추출을 하는 제1단계;
상기 제어 장치가 추출된 배경 이미지와 촬상된 카메라 장면 간의 장면 변화 정보를 검출하는 제2단계; 및
상기 제어 장치가 상기 검출된 장면 변화 정보가 미리 정해진 일정 수치를 초과 하였는지를 검출하고, 상기 검출된 장면 변화 정보가 미리 정해진 일정 수치를 초과 하였으면, 알림 전송 부에 변화 정보를 전달하는 제3단계;
를 포함하는 것을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자기기에 적용할 수 있는 도난 방지 방법.In the anti-theft method applicable to a mobile electronic device using a video scene comparison algorithm,
a first step of extracting, by the control device, a background of a screen captured by the camera for a predetermined period of time;
a second step in which the control device detects scene change information between the extracted background image and the captured camera scene; and
a third step of detecting, by the control device, whether the detected scene change information exceeds a predetermined predetermined value, and transmitting the change information to a notification transmission unit when the detected scene change information exceeds a predetermined predetermined value;
An anti-theft method applicable to a mobile electronic device using a video scene comparison algorithm comprising a.
상기 제2단계에서의 장면 변화 정보 검출은,
상기 추출된 배경 이미지의 모든 픽셀 값과 상기 촬상된 카메라 장면에 대한 촬상 정보의 모든 픽셀 값 간의 차이 정보 및 이미지 전처리를 토대로 한 검출인 것을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자기기에 적용할 수 있는 도난 방지 방법.The method of claim 1,
The scene change information detection in the second step is,
Applied to a mobile electronic device using a video scene comparison algorithm, characterized in that the detection is based on image preprocessing and difference information between all pixel values of the extracted background image and all pixel values of the captured information for the captured camera scene. A possible anti-theft method.
상기 추출된 배경 이미지의 모든 픽셀 값과 상기 촬상된 카메라 장면에 대한 촬상 정보의 모든 픽셀 값 간의 차이 정보 검출은 수학식 2에 따라 산출되는 것을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 방법.
수학식 2
상기 수학식 2에서 Average는 상기 추출된 배경 이미지이고, Image는 상기 카메라 화면에 대한 촬상 정보이고,
Difference(x, y, t)는 상기 추출된 배경 이미지와 상기 카메라 화면에 대한 촬상 정보의 차이 정보이고,
상기 x는 x축 좌표 값이고, 상기 y는 y축 좌표 값이고, 상기 t는 시간 값이고, 상기 T는 한계값이다.3. The method of claim 2,
The detection of difference information between all pixel values of the extracted background image and all pixel values of the captured information for the captured camera scene is applied to a mobile electronic device using a video scene comparison algorithm, characterized in that it is calculated according to Equation 2 What you can do to prevent theft.
Equation 2
In Equation 2, Average is the extracted background image, Image is imaging information for the camera screen,
Difference(x, y, t) is difference information between the extracted background image and the sensing information for the camera screen,
Wherein x is an x-axis coordinate value, y is a y-axis coordinate value, t is a time value, and T is a limit value.
상기 배경 추출은 Mean 필터를 통한 배경 평가를 이용하는 것을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 방법.The method of claim 1,
The background extraction is an anti-theft method applicable to a mobile electronic device using a video scene comparison algorithm, characterized in that using a background evaluation through a mean filter.
상기 배경 추출은 Median필터, absdiff, Open CV MoG2, 가우시안 혼합 모델(GMM), 및 커널 밀도 추정 방식(KDE) 중 적어도 하나를 더 포함함을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자기기에 적용할 수 있는 도난 방지 방법.5. The method of claim 4,
The background extraction is applied to a mobile electronic device using a video scene comparison algorithm, characterized in that it further includes at least one of a Median filter, absdiff, Open CV MoG2, Gaussian mixture model (GMM), and a kernel density estimation method (KDE). What you can do to prevent theft.
이동식 전자기기의 카메라 장면을 촬상 하는 촬상 장치;
알림 전송 부;
미리 정해진 일정 시간 동안 상기 촬상 장치를 통해 카메라 화면에 대한 배경 추출을 하고,
추출된 배경 이미지와 촬상된 카메라 장면 간의 장면 변화 정보를 검출하고,
상기 검출된 장면 변화 정보가 미리 정해진 일정 수치를 초과 하였는지를 검출하고, 상기 검출된 장면 변화 정보가 미리 정해진 일정 수치를 초과 하였으면, 상기 알림 전송 부에 변화 정보를 전달하는 제어장치;를 구비함을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자기기에 적용할 수 있는 도난 방지 시스템.In the anti-theft system applicable to a mobile electronic device using a video scene comparison algorithm,
an imaging device for imaging a camera scene of a mobile electronic device;
notification sending unit;
extracting the background of the camera screen through the imaging device for a predetermined period of time,
detecting scene change information between the extracted background image and the captured camera scene,
and a control device for detecting whether the detected scene change information exceeds a predetermined predetermined value, and transmitting the change information to the notification transmission unit when the detected scene change information exceeds a predetermined predetermined value. An anti-theft system that can be applied to mobile electronic devices using a video scene comparison algorithm.
상기 장면 변화 정보 검출은,
상기 추출된 배경 이미지의 모든 픽셀 값과 상기 촬상된 카메라 장면에 대한 촬상 정보의 모든 픽셀 값 간의 차이 정보 및 이미지 전처리를 토대로 한 검출인 것을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자기기에 적용할 수 있는 도난 방지 시스템.7. The method of claim 6,
The scene change information detection is,
Applied to a mobile electronic device using a video scene comparison algorithm, characterized in that the detection is based on image preprocessing and difference information between all pixel values of the extracted background image and all pixel values of the captured information for the captured camera scene. anti-theft system.
상기 추출된 배경 이미지의 모든 픽셀 값과 상기 촬상된 카메라 장면에 대한 촬상 정보의 모든 픽셀 값 간의 차이 정보 검출은 수학식 3에 따라 산출되는 것을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자기기에 적용할 수 있는 도난 방지 시스템.
수학식 3
상기 수학식 3에서 Average는 상기 추출된 배경 이미지이고, Image는 상기 카메라 화면에 대한 촬상 정보이고,
Difference(x, y, t)는 상기 추출된 배경 이미지와 상기 카메라 화면에 대한 촬상 정보의 차이 정보이고,
상기 x는 x축 좌표 값이고, 상기 y는 y축 좌표 값이고, 상기 t는 시간 값이고, 상기 T는 스레시 값이다.8. The method of claim 7,
Applied to a mobile electronic device using a video scene comparison algorithm, characterized in that the detection of difference information between all pixel values of the extracted background image and all pixel values of the captured information for the captured camera scene is calculated according to Equation 3 anti-theft system.
Equation 3
In Equation 3, Average is the extracted background image, Image is imaging information for the camera screen,
Difference(x, y, t) is difference information between the extracted background image and the sensing information for the camera screen,
Wherein x is an x-axis coordinate value, y is a y-axis coordinate value, t is a time value, and T is a thresh value.
상기 배경 추출은 Mean 필터를 통한 배경 평가를 이용하는 것을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 시스템.7. The method of claim 6,
The background extraction is an anti-theft system applicable to a mobile electronic device using a video scene comparison algorithm, characterized in that using a background evaluation through a mean filter.
상기 배경 추출은 Median필터, absdiff, Open CV MoG2, 가우시안 혼합 모델(GMM), 및 커널 밀도 추정 방식(KDE) 중 적어도 하나를 더 포함함을 특징으로 하는 비디오 장면 비교 알고리즘을 이용한 이동식 전자 기기에 적용할 수 있는 도난 방지 시스템.10. The method of claim 9,
The background extraction is applied to a mobile electronic device using a video scene comparison algorithm, characterized in that it further includes at least one of a Median filter, absdiff, Open CV MoG2, Gaussian mixture model (GMM), and a kernel density estimation method (KDE). anti-theft system.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200045552A KR102321480B1 (en) | 2020-04-14 | 2020-04-14 | Surveillance method and system applicable to a mobile electronic device based on video image comparison algorithm |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200045552A KR102321480B1 (en) | 2020-04-14 | 2020-04-14 | Surveillance method and system applicable to a mobile electronic device based on video image comparison algorithm |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20210127536A true KR20210127536A (en) | 2021-10-22 |
| KR102321480B1 KR102321480B1 (en) | 2021-11-03 |
Family
ID=78275973
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200045552A KR102321480B1 (en) | 2020-04-14 | 2020-04-14 | Surveillance method and system applicable to a mobile electronic device based on video image comparison algorithm |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102321480B1 (en) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005143052A (en) * | 2003-11-10 | 2005-06-02 | Victor Co Of Japan Ltd | Monitoring apparatus including background image change detecting function |
| KR20140037354A (en) * | 2012-09-17 | 2014-03-27 | 주식회사 제론헬스케어 | System for abandoned and stolen object detection |
| KR101395666B1 (en) | 2012-12-31 | 2014-05-16 | 동국대학교 산학협력단 | Surveillance apparatus and method using change of video image |
| KR101547239B1 (en) * | 2014-12-30 | 2015-08-25 | 에이제이파크 주식회사 | System and method for adjusting camera brightness based extraction of background image |
| KR20160043484A (en) * | 2014-10-13 | 2016-04-21 | 에스케이텔레콤 주식회사 | Method and Apparatus for Detecting Event by Using Pan-Tilt-Zoom Camera |
| KR101985711B1 (en) * | 2019-03-13 | 2019-06-04 | (주)정도기술 | Augmented reality CCTV system, and control method for the same |
-
2020
- 2020-04-14 KR KR1020200045552A patent/KR102321480B1/en active IP Right Grant
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005143052A (en) * | 2003-11-10 | 2005-06-02 | Victor Co Of Japan Ltd | Monitoring apparatus including background image change detecting function |
| KR20140037354A (en) * | 2012-09-17 | 2014-03-27 | 주식회사 제론헬스케어 | System for abandoned and stolen object detection |
| KR101395666B1 (en) | 2012-12-31 | 2014-05-16 | 동국대학교 산학협력단 | Surveillance apparatus and method using change of video image |
| KR20160043484A (en) * | 2014-10-13 | 2016-04-21 | 에스케이텔레콤 주식회사 | Method and Apparatus for Detecting Event by Using Pan-Tilt-Zoom Camera |
| KR101547239B1 (en) * | 2014-12-30 | 2015-08-25 | 에이제이파크 주식회사 | System and method for adjusting camera brightness based extraction of background image |
| KR101985711B1 (en) * | 2019-03-13 | 2019-06-04 | (주)정도기술 | Augmented reality CCTV system, and control method for the same |
Also Published As
| Publication number | Publication date |
|---|---|
| KR102321480B1 (en) | 2021-11-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110955912B (en) | Privacy protection method, device, equipment and storage medium based on image recognition | |
| EP3647129A1 (en) | Vehicle, vehicle door unlocking control method and apparatus, and vehicle door unlocking system | |
| CN110163100B (en) | Anti-photographing display | |
| KR101858396B1 (en) | Intelligent intrusion detection system | |
| CN107294915B (en) | Image acquisition method, system and terminal | |
| CN111866600B (en) | Method, device and system for protecting privacy | |
| CN109819114B (en) | Screen locking processing method and device, electronic equipment and storage medium | |
| CN101166234B (en) | Device with imaging function | |
| JP4910627B2 (en) | Impersonation detection device | |
| KR101894399B1 (en) | Monitoring system having personal information protection function and method thereof | |
| CN111259461A (en) | Anti-stealing-lighting method, terminal equipment and system | |
| KR102321480B1 (en) | Surveillance method and system applicable to a mobile electronic device based on video image comparison algorithm | |
| JP6044633B2 (en) | Information processing apparatus, information processing method, and program | |
| CN105138321B (en) | The control method and system of terminal | |
| CN106572324A (en) | Energy-efficient smart monitoring device | |
| US20230118532A1 (en) | Method and system for detecting a spoofing attempt | |
| JP2009151482A (en) | Security device, automatic teller machine, program, and suspicious individual determination method | |
| KR101650757B1 (en) | Contents protection method and computer program thereof | |
| CN115359539A (en) | Office place information security detection method, device, equipment and storage medium | |
| JP6064995B2 (en) | Information processing apparatus, information processing method, and program | |
| JP7256364B2 (en) | Information processing device, its control method and program | |
| CN109040420B (en) | Terminal equipment unlocking method and device, electronic equipment and storage medium | |
| KR101832363B1 (en) | Intelligent IP camera and video management system which can detect unauthorized access | |
| US20240104881A1 (en) | Image sensor device, method and computer program | |
| CN112215045A (en) | Living body detection method and device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |