KR101925799B1 - Computer program for preventing information spill displayed on display device and security service using the same - Google Patents

Computer program for preventing information spill displayed on display device and security service using the same Download PDF

Info

Publication number
KR101925799B1
KR101925799B1 KR1020180020509A KR20180020509A KR101925799B1 KR 101925799 B1 KR101925799 B1 KR 101925799B1 KR 1020180020509 A KR1020180020509 A KR 1020180020509A KR 20180020509 A KR20180020509 A KR 20180020509A KR 101925799 B1 KR101925799 B1 KR 101925799B1
Authority
KR
South Korea
Prior art keywords
image
camera
capture
computer program
display device
Prior art date
Application number
KR1020180020509A
Other languages
Korean (ko)
Inventor
이영
황동혁
최성복
Original Assignee
주식회사 테르텐
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 테르텐 filed Critical 주식회사 테르텐
Priority to KR1020180020509A priority Critical patent/KR101925799B1/en
Application granted granted Critical
Publication of KR101925799B1 publication Critical patent/KR101925799B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/70—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
    • G06F21/82—Protecting input, output or interconnection devices
    • G06F21/84—Protecting input, output or interconnection devices output devices, e.g. displays or monitors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark

Abstract

The present invention relates to a computer program stored in a storage medium to prevent the spill of information displayed on a display device of a computer by being connected to hardware. The computer program performs: a step of receiving and analyzing the first current image obtained by a camera connected to the computer; a step of determining whether a screen of the display device is being photographed by a capture camera based on an analysis result; a step of changing the first image displayed on the display device to a second image when it is determined that the screen of the display device is being photographed by the capture camera; a step of receiving and analyzing the second current image obtained by the capture camera; a step of determining whether the screen of the display device is still being photographed by the capture camera based on the analysis result; and a step of restoring the second image displayed by the display device to the first image when it is determined that the screen of the display device is still not being photographed by the capture camera.

Description

디스플레이 장치에서 표시되는 정보의 유출을 방지하기 위한 컴퓨터 프로그램과 이를 이용한 보안 서비스 제공 방법{COMPUTER PROGRAM FOR PREVENTING INFORMATION SPILL DISPLAYED ON DISPLAY DEVICE AND SECURITY SERVICE USING THE SAME}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a computer program for preventing leakage of information displayed on a display device, and a security service providing method using the computer program.

본 발명의 개념에 따른 실시 예는 보안 컴퓨터 프로그램에 관한 것으로, 특히 디스플레이 장치에서 표시되고 보안이 요구되는 정보를 캡쳐 카메라를 이용하여 불법적으로 그리고 무단으로 유출하는 것을 방지할 수 있는 컴퓨터 프로그램과 이를 이용한 보안 서비스 제공 방법에 관한 것이다.An embodiment according to the concept of the present invention relates to a security computer program, and more particularly to a computer program capable of preventing unauthorized and unauthorized disclosure of information that is displayed on a display device and requires security using a capture camera, and And a security service providing method.

캡쳐 방지 프로그램은 캡쳐 프로그램에 의한 캡쳐를 차단하는 기능을 갖고 있다. 어떤 캡쳐 방지 프로그램은 디스플레이 장치에서 디스플레이되는 보안이 요구되는 데이터를 보호하기 위해 워터마크를 삽입하는 기능을 가지고 있다.The capture prevention program has a function of blocking capture by the capture program. Some capture prevention programs have a function of inserting a watermark to protect the security-required data displayed on the display device.

등록특허공보: 등록번호 10-1643936호 (2016.08.01 공고)Registered patent publication: Registration No. 10-1643936 (published by 2016.08.01)

본 발명이 이루고자 하는 기술적인 과제는, 컴퓨터의 디스플레이 장치에서 표시되는 보안이 요구되는 제1화면을 캡쳐 카메라를 이용하여 불법적으로 무단으로 캡쳐할 때 상기 제1화면에 대한 캡쳐를 차단하기 위해 상기 제1화면을 제2화면으로 변경할 수 있는 컴퓨터 프로그램과 상기 컴퓨터 프로그램을 이용한 보안 서비스를 제공하는 것이다.According to an aspect of the present invention, there is provided a method for capturing a first screen, which is displayed on a display device of a computer, by illegally capturing a first screen, A computer program capable of changing one screen to a second screen, and a security service using the computer program.

본 발명이 이루고자 하는 기술적인 과제는, 컴퓨터의 디스플레이 장치에서 표시되는 보안이 요구되는 정보를 캡쳐 카메라를 이용하여 불법적으로 그리고 무단으로 유출하려는 행위자의 행위(예컨대, 상기 캡쳐 카메라로 사진을 찍는 행위 또는 동영상을 녹화하는 행위)를 상기 컴퓨터에 연결된 카메라를 이용하여 검출하고, 검출 결과에 따라 상기 디스플레이에서 표시되는 상기 정보를 실시간으로 변경하는 동시에 상기 카메라를 이용하여 상기 행위자에 대한 증거 영상을 실시간으로 촬영할 수 있는 컴퓨터 프로그램과 상기 컴퓨터 프로그램을 이용한 보안 서비스를 제공하는 것이다.SUMMARY OF THE INVENTION The present invention has been made in view of the above problems, and it is an object of the present invention to provide an image capturing apparatus and a method for capturing an image of a person who wants to illegally and unauthorized leakage of information, And recording the evidence image of the actor in real time using the camera in real time while changing the information displayed on the display in real time according to the detection result And a security service using the computer program.

본 발명의 실시 예에 따른, 하드웨어와 결합되어 컴퓨터의 디스플레이 장치에서 디스플레이되는 정보의 유출을 방지하기 위하여 저장 매체에 저장된 컴퓨터 프로그램은, 상기 컴퓨터 프로그램이 상기 컴퓨터에 연결된 카메라에 의해 획득된 영상을 분석하고, 상기 디스플레이 장치에서 디스플레이되는 정보를 상기 획득된 영상에 포함된 캡쳐 카메라를 이용하여 캡쳐하는 행위를 학습하고, 학습 결과에 따라 상기 캡쳐 카메라에 대한 영상을 스스로 학습하여 상기 컴퓨터의 메모리 장치에 저장하는 단계와, 상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제1 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 학습된 영상을 참조하여 상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있는지를 판단하는 단계와, 상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재함에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치에서 디스플레이되는 제1 영상을 제2 영상으로 변경하는 단계와, 상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제2 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 상기 학습된 영상을 참조하여 상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있는지를 판단하는 단계와, 상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하지 않음에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있지 않다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치에서 디스플레이되는 상기 제2 영상을 상기 제1 영상으로 복원하는 단계를 포함한다.According to an embodiment of the present invention, a computer program stored in a storage medium for preventing an outflow of information displayed on a display device of a computer in combination with hardware, the computer program causing the computer to analyze Capturing information displayed on the display device using a capture camera included in the acquired image, learning an image of the capture camera by itself according to a learning result, and storing the captured image in a memory device of the computer Wherein the computer program is adapted to receive a first current image acquired by the camera and to learn the captured image of the capture camera stored in the memory after self learning by the computer program, The image capture device Determining whether an image is present and determining whether a capture of the screen of the display device is being performed by the capture camera based on the determination result; and if the image of the capture camera exists in the first current image, Changing the first image displayed on the display device to a second image when it is determined that the capture of the screen of the display device is being performed by the capture camera; Acquires a second current image obtained by the capturing camera, and after the self-learning by the computer program, refers to the learned image of the capture camera stored in the memory, And, based on the determination result, The method comprising the steps of: determining whether a capture of a screen of a display device is being progressed by the capture camera; and determining whether capturing of a screen of the display device And restoring, by the computer program, the second image displayed on the display device to the first image when it is determined that the capture camera is not proceeding.

삭제delete

삭제delete

본 발명의 실시 예에 따라, 컴퓨터, 상기 컴퓨터에서 실행되는 컴퓨터 프로그램, 및 상기 컴퓨터에 연결된 카메라를 이용하여 상기 컴퓨터의 디스플레이 장치의 화면에서 디스플레이되는 정보의 유출을 방지하는 서비스를 제공하는 방법은 상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 영상을 분석하고, 상기 디스플레이 장치의 화면에서 디스플레이되는 정보를 상기 획득된 영상에 포함된 캡쳐 카메라를 이용하여 캡쳐하는 행위를 학습하고, 학습 결과에 따라 상기 캡쳐 카메라에 대한 영상을 스스로 학습하여 상기 컴퓨터의 메모리 장치에 저장하는 단계와, 상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제1 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 학습된 영상을 참조하여 상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있는지를 판단하는 단계와, 상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재함에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치의 화면에서 디스플레이되는 제1 영상을 제2 영상으로 변경하고, 상기 카메라로 하여금 상기 캡쳐 카메라에 해당하는 영상을 추적하면서 상기 카메라의 전방의 영상을 녹화하도록 상기 카메라를 제어하는 단계와, 상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제2 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 상기 학습된 영상을 참조하여 상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있는지를 판단하는 단계와, 상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하지 않음에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있지 않다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치의 화면에서 디스플레이되는 상기 제2 영상을 상기 제1 영상으로 복원하고 상기 카메라에 의해 촬영된 영상에 대한 녹화를 중지하는 단계를 포함한다.According to an embodiment of the present invention, there is provided a method of providing a service for preventing leakage of information displayed on a screen of a display device of a computer using a computer, a computer program executed on the computer, and a camera connected to the computer, The computer program analyzes the image acquired by the camera and learns to capture information displayed on the screen of the display device using a capture camera included in the acquired image, The method comprising: receiving a first current image obtained by the camera, learning it by itself, and storing it in the memory; Learned spirit for capture camera Determining whether an image of the capture camera is present in the first current image and determining whether a capture of the screen of the display device is being performed by the capture camera based on the determination result; 1. A computer-readable storage medium storing a program for causing a computer to execute a first image displayed on a screen of a display device, when a capture of the screen of the display device is determined to be proceeded by the capture camera, Controlling the camera to record an image in front of the camera while tracking the image corresponding to the capture camera; and controlling the camera to record a second image obtained by the second camera Receiving a current image, Determines whether there is an image of the capture camera in the second current image by referring to the learned image of the capture camera stored in the memory, and determines whether there is an image of the capture camera in the second current image, The method of claim 1, further comprising the steps of: determining whether the capture is continued by the capture camera; and if the capturing camera does not have an image of the capture camera in the second current image, The computer program restores the second image displayed on the screen of the display device to the first image and stops recording the image photographed by the camera.

본 발명의 실시 예에 따른 컴퓨터 프로그램은 컴퓨터의 디스플레이 장치에서 표시되는 보안이 요구되는 제1화면을 캡쳐 카메라를 이용하여 불법적으로 무단으로 캡쳐할 때 상기 제1화면에 대한 캡쳐를 차단하기 위해 상기 제1화면을 제2화면으로 변경할 수 있는 효과가 있다.The computer program according to the embodiment of the present invention is a computer program for preventing unauthorized capture of a first screen which is displayed on a display device of a computer illegally by using a capture camera, There is an effect that one screen can be changed to the second screen.

본 발명의 실시 예에 따른 컴퓨터 프로그램은 컴퓨터의 디스플레이 장치에서 표시되는 보안이 요구되는 정보를 캡쳐 카메라를 이용하여 불법적으로 그리고 무단으로 유출하려는 행위자의 행위(예컨대, 상기 캡쳐 카메라로 사진을 찍는 행위 또는 동영상을 녹화하는 행위)를 상기 컴퓨터에 연결된 카메라를 이용하여 검출하고, 검출 결과에 따라 상기 디스플레이에서 표시되는 상기 정보를 실시간으로 변경하는 동시에 상기 카메라를 이용하여 상기 행위자의 상기 행위에 대한 증거 영상을 실시간으로 촬영할 수 있는 효과가 있다.A computer program according to an exemplary embodiment of the present invention is a computer program for performing an act of an actor who illegally and unauthorized leakage of information requiring security displayed on a display device of a computer using a capture camera (for example, And a controller for controlling the camera to record the evidence image of the actor using the camera in a real time manner, There is an effect that can be photographed in real time.

본 발명의 실시 예에 따른 컴퓨터 프로그램을 이용한 정보 유출 방지 서비스는 디스플레이에서 표시되는 보안이 요구되는 정보를 유출하는 사람에 대한 영상을 실시간으로 촬영하고, 촬영된 영상을 관리자의 컴퓨터로 전송할 수 있으므로, 상기 관리자는 상기 정보를 유출하려는 사람에 대한 증거 자료를 용이하게 확보할 수 있는 효과가 있다. The information leakage prevention service using the computer program according to the embodiment of the present invention can photograph the image of the person who is out of the security information displayed on the display in real time and transmit the photographed image to the manager's computer, The manager can easily obtain evidence data on the person who is to leak the information.

본 발명의 상세한 설명에서 인용되는 도면을 보다 충분히 이해하기 위하여 각 도면의 상세한 설명이 제공된다.
도 1은 본 발명의 실시 예에 따른 컴퓨터 프로그램을 이용한 보안 서비스 제공 방법을 설명하는 보안 서비스 제공 시스템의 블록도이다.
도 2는 캡쳐 카메라를 이용하여 디스플레이 장치의 화면을 캡쳐할 때와 캡쳐 하지 않을 때 상기 디스플레이 장치의 화면에서 디스플레이되는 영상을 나타낸다.
도 3은 도 1에 도시된 보안 서비스 제공 시스템의 작동을 설명하는 플로우 차트이다.
도 4는 본 발명의 실시 예에 따른 컴퓨터 프로그램에 의해 학습된 캡쳐 도구와 상기 학습된 캡쳐 도구에 대한 이미지를 설명하기 위한 표이다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS In order to more fully understand the drawings recited in the detailed description of the present invention, a detailed description of each drawing is provided.
1 is a block diagram of a security service providing system for explaining a security service providing method using a computer program according to an embodiment of the present invention.
2 shows an image displayed on the screen of the display device when capturing a screen of the display device using the capture camera or not.
3 is a flowchart illustrating the operation of the security service providing system shown in FIG.
4 is a table for explaining a capture tool learned by a computer program and an image of the captured capture tool according to an embodiment of the present invention.

도 1은 본 발명의 실시 예에 따른 컴퓨터 프로그램을 이용한 보안 서비스 제공 방법을 설명하는 보안 서비스 제공 시스템의 블록도이다. 도 1을 참조하면, 보안이 요구되는 정보(또는 보안 데이터)의 유출을 방지하기 위한 서비스를 제공하는 보안 서비스 제공 시스템(또는 보안 데이터 유출 방지 시스템; 100)은 컴퓨터(200)와 카메라(210)를 포함하고, 통신 네트워크(260)를 통해 컴퓨터(200)와 신호들을 주고받는 관리자 단말기(270)를 포함한다.1 is a block diagram of a security service providing system for explaining a security service providing method using a computer program according to an embodiment of the present invention. Referring to FIG. 1, a security service providing system (or security data leakage preventing system) 100 for providing a service for preventing leakage of information (or security data) requiring security includes a computer 200, a camera 210, And an administrator terminal 270 for exchanging signals with the computer 200 via the communication network 260.

컴퓨터(200)는 PC 또는 모바일 장치(mobile device 또는 portable device)를 의미하고, 카메라(210)는 PC 카메라, 웹캠(webcam), 또는 상기 모바일 장치의 카메라를 의미할 수 있다. 관리자 단말기(270)는 데이터베이스(280)에 저장된 또는 저장될 데이터를 관리(예컨대, 저장, 검색, 리드(read), 또는 업데이트)할 수 있는 장치 또는 관리 서버를 의미할 수 있다. 상기 모바일 장치는 스마트폰, 모바일 인터넷 장치(mobile internet device(MID)), 또는 사물 인터넷(Internet of Things(IoT)) 장치를 의미할 수 있다.The computer 200 may refer to a PC or a mobile device and the camera 210 may refer to a PC camera, a webcam, or a camera of the mobile device. Administrator terminal 270 may refer to a device or a management server that is capable of managing (e.g., storing, retrieving, reading, or updating) data stored or to be stored in database 280. The mobile device may be a smart phone, a mobile internet device (MID), or an Internet of Things (IOT) device.

컴퓨터(200)는 본 명세서에서 설명될 캡쳐 방지 프로그램(230)을 실행할 수 있는 CPU(220), CPU(220)에서 생성(또는 처리)된 정보(또는 데이터)를 수신하여 디스플레이할 수 있는 디스플레이 장치(또는 모니터; 235), 컴퓨터(200)에 필요한 컴퓨터 프로그램(캡쳐 방지 프로그램(230)을 포함함)을 저장하는 메모리 장치(240), 및 통신 네트워크(260)에 연결되는 인터페이스를 제공하는 통신 장치(모뎀 또는 송수신기; 250)를 포함할 수 있다.The computer 200 includes a CPU 220 capable of executing the capture prevention program 230 described herein, a display device 220 capable of receiving and displaying information (or data) generated (or processed) by the CPU 220, (Or monitor) 235, a memory device 240 for storing a computer program necessary for the computer 200 (including a capture prevention program 230), and a communication device providing an interface to the communication network 260 (Modem or transceiver) 250.

여기서 정보는 디지털 신호들 또는 데이터를 의미하고, 메모리 장치(240)는 하드디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD)와 같은 불휘발성 메모리 장치와, DRAM과 같은 휘발성 메모리 장치를 포함한다.Where the information refers to digital signals or data and the memory device 240 includes a nonvolatile memory device such as a hard disk drive (HDD) or a solid state drive (SSD) and a volatile memory device such as a DRAM.

도 2는 캡쳐 카메라를 이용하여 디스플레이 장치의 화면을 캡쳐할 때와 캡쳐 하지 않을 때 상기 디스플레이 장치의 화면에서 디스플레이되는 영상을 나타내고, 도 3은 도 1에 도시된 보안 서비스 제공 시스템의 작동을 설명하는 플로우 차트이고, 도 4는 본 발명의 실시 예에 따른 컴퓨터 프로그램에 의해 학습된 캡쳐 도구와 상기 학습된 캡쳐 도구에 대한 이미지를 설명하기 위한 표이다.FIG. 2 shows an image displayed on the screen of the display device when a screen of the display device is captured and not captured using a capture camera, and FIG. 3 illustrates an operation of the security service providing system shown in FIG. 4 is a table for explaining images captured by the capturing tool learned by the computer program and the captured capturing tool according to the embodiment of the present invention.

도 1 내지 도 4를 참조하면, 하드웨어(예컨대, CPU(220)와 결합되어 컴퓨터 (200)의 디스플레이 장치(235)에서 디스플레이되는 보안이 요구되는 정보의 유출을 방지하기 위하여 저장 매체(예컨대, CPU(220) 또는 메모리 장치(240))에 저장된 컴퓨터 프로그램(예컨대, 캡쳐 방지 프로그램(230))은, 디스플레이 장치(235)에서 디스플레이되는 보안이 요구되는 정보(또는 디스플레이 장치(235)의 화면)를 다양한 캡쳐 도구들 각각을 이용하여 캡쳐(정지 영상으로 촬영 또는 동영상으로 촬영)하는 행위를 학습하고, 학습 결과에 따라 상기 다양한 캡쳐 도구들 각각에 대한 영상 자료를 축적하여 메모리 장치(240)에 저장할 수 있다(S110).1 to 4, a storage medium (e.g., a CPU (Central Processing Unit), a hard disk drive (HDD), or the like) may be used to prevent leakage of security-required information displayed on the display device 235 of the computer 200, (Or a screen of the display device 235) displayed on the display device 235 is stored in the computer program (e.g., the capture device 220 or the memory device 240) (Capturing as still images or capturing a moving image) using each of various capturing tools, accumulating image data for each of the various capturing tools according to the learning result, and storing the captured image data in the memory device 240 (S110).

다양한 캡쳐 도구들은 각각은 서로 다른 모양(또는 디자인)을 갖는 카메라들, 캠코더들 또는 스마트폰들을 의미할 수 있다. 예컨대, 카메라들, 캠코더들 또는 스마트폰들은 제조사에 따라 서로 다른 모양을 갖거나 모델에 따라 서로 다른 모양을 갖는다.The various capture tools may each refer to cameras, camcorders or smartphones having different shapes (or designs). For example, cameras, camcorders, or smartphones have different shapes depending on the manufacturer or different shapes depending on the model.

캡쳐 방지 프로그램(230)은 다양한 캡쳐 도구들에 대한 영상들을 포함하거나, 캡쳐 방지 프로그램(230)이 메모리 장치(240)로 다운로드될 때 함께 다운로드된 다양한 캡쳐 도구들에 대한 영상들을 이용하거나, 다양한 캡쳐 도구들에 대한 영상들을 스스로 학습할 수 있다.The capture prevention program 230 may include images for various capture tools or may utilize images for various capture tools downloaded together when the capture prevention program 230 is downloaded to the memory device 240, You can learn the images of the tools yourself.

예컨대, 관리자 단말기(270) 대신에 사용되는 관리자 서버(270)는 미리 학습된 다양한 캡쳐 도구들 각각에 대한 영상을 데이터베이스(280)로부터 리드하여 통신 네트워크(260)를 통해 컴퓨터(200)로 전송할 수 있다. 실시 예들에 따라 캡쳐 방지 프로그램(230)은 카메라(210)에 의해 획득(또는 촬영)된 영상을 분석하고, 상기 영상에 포함된 캡쳐 도구에 대한 영상(또는 모양)을 학습하고, 학습 결과를 메모리 장치(240)에 저장할 수 있다.For example, the administrator server 270 used in place of the administrator terminal 270 may read an image for each of various learned capture tools from the database 280 and transmit the captured image to the computer 200 via the communication network 260 have. According to the embodiments, the capture prevention program 230 analyzes an image acquired (or photographed) by the camera 210, learns an image (or a shape) of a capture tool included in the image, May be stored in the device 240.

캡쳐 방지 프로그램(230)은 컴퓨터(200)에 부착(또는 연결)된 카메라(210)를 작동시킨다(S120). 캡쳐 방지 프로그램(230)은 디스플레이 장치(235) 또는 디스플레이 장치(235)의 화면에 제1 영상을 디스플레이한다(S130).The capture prevention program 230 activates the camera 210 attached to (or connected to) the computer 200 (S120). The capture prevention program 230 displays the first image on the screen of the display device 235 or the display device 235 (S130).

제1 영상은 보안이 요구되는 데이터(예컨대, 워드프로세서에 의해 작성된 문서 또는 파일), 정지 영상 또는 동영상 등으로서 디스플레이 장치(235)에서 시각적으로 디스플레이되는 모든 정보를 총칭하고, 시간이 지남에 따라 변하는 복수의 영상들을 포함한다.The first image is collectively referred to as all information visually displayed on the display device 235 as security-required data (e.g., a document or a file created by a word processor), still image or moving image, And includes a plurality of images.

캡쳐 방지 프로그램(230)은 컴퓨터(200)에 연결되고 정상적으로 작동하는 카메라(210)에 의해 획득된 제1 현재 영상을 수신하여 분석하고, 분석 결과에 기초하여 디스플레이 장치(235)에서 디스플레이되는 제1 영상에 대한 촬영이 캡쳐 카메라 (51)에 의해 진행되고 있는지를 판단한다(S140).The capture prevention program 230 receives and analyzes the first current image acquired by the camera 210 connected to the computer 200 and operating normally and analyzes the first current image captured by the first It is determined whether the capture of the image is being performed by the capture camera 51 (S140).

캡쳐 카메라(51)는 사용자(50)가 사용하는 카메라 또는 카메라를 포함하는 모바일 장치를 의미하고, 캡쳐 도구라고 불릴 수 있다.The capture camera 51 means a mobile device including a camera or a camera used by the user 50, and may be called a capture tool.

캡쳐 방지 프로그램(230)은 카메라(210)에 의해 촬영된 제1 현재 영상(예컨대, 제1 시점에서 촬영된 영상) 내에 캡쳐 카메라(51)에 대한 영상이 존재하는지를 판단한다(S140). 예컨대, 캡쳐 방지 프로그램(230)은 이미 학습된 영상을 참조하여 상기 제1 현재 영상 내에 캡쳐 카메라(51)의 영상이 존재하는지를 판단하고, 상기 제1 현재 영상에 캡쳐 카메라(51)의 영상이 존재할 때 캡쳐 방지 프로그램(230)은 디스플레이 장치(235)에서 디스플레이되는 제1 영상에 대한 촬영이 캡쳐 카메라 (51)에 의해 진행되고 있다고 판단한다.The capture prevention program 230 determines whether there is an image for the capture camera 51 in the first current image (e.g., the image photographed at the first time) photographed by the camera 210 at step S140. For example, the capture prevention program 230 determines whether an image of the capture camera 51 exists in the first current image by referring to the already-learned image, and if there is an image of the capture camera 51 in the first current image The capture prevention program 230 determines that the capture of the first image displayed on the display device 235 is being performed by the capture camera 51. [

예컨대, 도 2에 도시된 바와 같이 사용자(50)가 캡쳐 카메라(예컨대, 스마트폰(51))로 디스플레이 장치(235)에서 디스플레이되고 있는 제1 영상을 촬영하고 있을 때, 캡쳐 방지 프로그램(230)은 에지 검출 알고리즘을 이용하여 제1 현재 영상으로부터 스마트폰(51)의 에지를 검출하고, 검출된 에지의 모양과 사전에 학습된 에지의 모양을 서로 비교하고, 검출된 에지의 모양과 사전에 학습된 에지의 모양이 동일 또는 유사할 때 제1 현재 영상 내에 스마트폰(51)에 해당하는 영상(또는 에지)이 존재한다고 판단한다.For example, when the user 50 is shooting a first image being displayed on the display device 235 with a capture camera (e.g., a smart phone 51) as shown in Fig. 2, Detects the edge of the smartphone 51 from the first current image using the edge detection algorithm, compares the shape of the detected edge with the shape of the previously learned edge, (Or edges) corresponding to the smartphone 51 exist in the first current image when the shapes of the edges are the same or similar.

따라서 캡쳐 방지 프로그램(230)은 디스플레이 장치(235)에서 디스플레이되는 제1 영상에 대한 촬영이 캡쳐 카메라(51)에 의해 진행되고 있다고 판단한다. 예컨대, 에지 검출 알고리즘은 제1 현재 영상에 포함된 윤곽선에 해당하는 픽셀들 각각의 밝기 값이 낮은 값으로부터 높은 값으로 변하거나 그 반대로 변하는 부분을 에지로서 검출하는 알고리즘으로서, 본 발명에서 제1 현재 영상 내에 캡쳐 카메라 (51)에 해당하는 영상이 존재하는지를 판단하는 알고리즘은 에지 검출 알고리즘에 한정되지 않는다.Therefore, the capture prevention program 230 determines that the capture of the first image displayed on the display device 235 is being performed by the capture camera 51. [ For example, the edge detection algorithm is an algorithm for detecting, as an edge, a portion where the brightness value of each of the pixels corresponding to the contour included in the first current image changes from a low value to a high value or vice versa, The algorithm for determining whether an image corresponding to the capture camera 51 exists in the image is not limited to the edge detection algorithm.

제1 현재 영상 내에 캡쳐 카메라(51)에 해당하는 영상이 존재하지 않을 때 (S140의 NO), 카메라(210)는 그 전방의 영상을 촬영하여 이를 CPU(220)로 전송하고 (S120), 캡쳐 방지 프로그램(230)은 디스플레이 장치(235)의 화면에 제1 영상을 디스플레이한다(S130).When there is no image corresponding to the capture camera 51 in the first current image (NO in S140), the camera 210 captures an image in front of the captured image and transmits it to the CPU 220 (S120) Prevention program 230 displays the first image on the screen of the display device 235 (S130).

제1 현재 영상 내에 캡쳐 카메라(51)에 해당하는 영상이 존재할 때(S140의 YES), 카메라(210)는 그 전방의 영상을 촬영하고, 촬영된 영상을 CPU(220)로 전송하고, 캡쳐 방지 프로그램(230)은 수신된 영상을 녹화하면서 디스플레이 장치(235)의 화면에서 디스플레이되는 제1 영상(IM1)을 제2 영상(IM2)으로 변경한다(S150). When there is an image corresponding to the capture camera 51 in the first current image (YES in S140), the camera 210 captures an image in front of the captured image, transmits the captured image to the CPU 220, The program 230 changes the first image IM1 displayed on the screen of the display device 235 to the second image IM2 while recording the received image at step S150.

제2 영상(IM2)은 제1 영상(IM1)의 유출을 방지하기 위해 제1 영상(IM1)을 보이지 않게 하는 데이터, 정지 영상 또는 동영상 등으로서 디스플레이 장치(235)에서 시각적으로 디스플레이되는 모든 정보를 총칭하고, 시간이 지남에 따라 변하는 복수의 영상들을 포함한다.The second image IM2 includes all the information visually displayed on the display device 235 as data, still image, moving image or the like that prevents the first image IM1 from being displayed to prevent the first image IM1 from flowing out Collectively, and includes a plurality of images that change over time.

실시 예들에 따라, 캡쳐 방지 프로그램(230)은, 제1 영상(IM1)이 제2 영상 (IM2)으로 변경된 후, 시각적 경고 메시지를 디스플레이 장치(235)에 디스플레이하거나 스피커를 이용하여 청각적 메시지를 출력할 수 있다.According to embodiments, the capture prevention program 230 may display a visual warning message on the display device 235 after the first image IM1 is changed to the second image IM2, or may display an audible message Can be output.

따라서, 보안이 요구되는 제1 영상(IM1)은 불법적인 무단 유출을 차단하기 위해 제2 영상(IM2)으로 변경된다. 카메라(210)에 의해 실시간으로 촬영되는 영상은 디스플레이 장치(235)에서 표시되는 제1 영상(IM1) 또는 제2 영상(IM2)을 캡쳐 카메라(51)를 이용하여 촬영하는 사용자(50)에 대한 영상을 포함하고, 캡쳐 방지 프로그램(230)은 카메라(210)에 의해 촬영된 영상을 메모리 장치(240)에 저장하거나 통신 장치(250)와 통신 네트워크(260)를 통해 관리자 컴퓨터(또는 관리 서버; 270)로 실시간으로 전송할 수 있다.Accordingly, the first image IM1 requiring security is changed to the second image IM2 in order to block unauthorized unauthorized outflow. The image photographed in real time by the camera 210 is displayed on the display device 235 for the user 50 photographing the first image IM1 or the second image IM2 using the capture camera 51. [ Capture capture program 230 may include an image captured by the camera 210 or stored in the memory device 240 or transmitted to the administrator computer (or management server) via the communication device 250 and the communication network 260. [ 270 in real time.

제1 현재 영상 내에 캡쳐 카메라(51)에 대한 영상이 존재할 때(S140의 YES), 캡쳐 방지 프로그램(230)은 카메라(210)로 하여금 캡쳐 카메라(51)에 대한 영상(또는 캡쳐 카메라(51)의 에지)을 추적하면서 카메라(210)의 전방의 영상을 녹화하도록 카메라(210)를 제어한다. 캡쳐 방지 프로그램(230)은 영상(또는 움직임) 추적 알고리즘을 이용하여 캡쳐 카메라(51)를 추적할 수 있다.The capture prevention program 230 causes the camera 210 to detect the image (or the capture camera 51) for the capture camera 51, if there is an image for the capture camera 51 in the first current image (YES in S140) And controls the camera 210 to record an image in front of the camera 210. [ The capture prevention program 230 may track the capture camera 51 using a video (or motion) tracking algorithm.

실시 예들에 따라 캡쳐 방지 프로그램(230)은 제2 영상(IM2)을 제1 영상 (IM1)의 위에 오버랩시킴으로써 제1 영상(IM1)을 제2 영상(IM2)으로 변경할 수 있다. 제2 영상(IM2)에 의해 제1 영상(IM1)은 사용자(50) 또는 캡쳐 카메라(51)에 의해 인식될 수 없다.The capture prevention program 230 may change the first image IM1 to the second image IM2 by overlapping the second image IM2 on the first image IM1 according to the embodiments. The first image IM1 can not be recognized by the user 50 or the capture camera 51 by the second image IM2.

실시 예들에 따라 캡쳐 방지 프로그램(230)은 디스플레이 장치(235)로 전송되는 제1 영상(IM1)에 관련된 영상 신호들을 차단함에 따라 제1 영상(IM1)을 제2 영상(IM2)으로 변경할 수 있다.The capture prevention program 230 can change the first image IM1 to the second image IM2 by blocking image signals related to the first image IM1 transmitted to the display device 235 .

실시 예들에 따라 캡쳐 방지 프로그램(230)은 제1 영상(IM1)의 디스플레이에 관련된 컴퓨터 프로그램(예컨대, 워드프로세서 프로그램)의 실행을 종료시킴에 따라 제1 영상(IM1)을 제2 영상(IM2)으로 변경할 수 있다.According to embodiments, the capture prevention program 230 may be configured to stop the execution of a computer program (e.g., a word processor program) related to the display of the first image IM1 to terminate the execution of the first image IM1 to the second image IM2, .

캡쳐 방지 프로그램(230)은 카메라(210)에 의해 획득된 제2 현재 영상(예컨대, 제1 시점보다 늦은 제2 시점에서 촬영된 영상)을 수신하여 분석하고, 분석 결과에 기초하여 디스플레이 장치(235)에 대한 촬영(또는 제2 영상(IM2)에 대한 촬영)이 캡쳐 카메라(51)에 의해 계속 진행되고 있는지를 판단한다(S160).The capture prevention program 230 receives and analyzes a second current image (e.g., an image photographed at a second point in time later than the first point in time) acquired by the camera 210, and displays it on the display device 235 (Or the second image IM2) is continuously being progressed by the capture camera 51 (S160).

캡쳐 방지 프로그램(230)은 이미 학습된 영상을 참조하여 제2 현재 영상 내에 캡쳐 카메라(51)에 해당하는 영상이 존재하는지를 판단하고, 상기 제2 현재 영상 내에 캡쳐 카메라(51)에 해당하는 영상이 존재하지 않을 때(S160의 N0), 디스플레이 장치(235)에 대한 촬영이 캡쳐 카메라(51)에 의해 계속 진행되고 있지 않다고 판단한다.The capture prevention program 230 determines whether there is an image corresponding to the capture camera 51 in the second current image with reference to the already-learned image, and if the image corresponding to the capture camera 51 exists in the second current image (NO at S160), it is judged that the shooting of the display device 235 is not being continued by the capture camera 51. [

디스플레이 장치(235)에 대한 촬영이 캡쳐 카메라(51)에 의해 계속 진행되고 있지 않다고 판단될 때(S160의 NO), 캡쳐 방지 프로그램(230)은 디스플레이 장치 (235)에서 디스플레이되는 제2 영상(IM2)을 제1 영상(IM1)으로 복원(또는 복구)한다.When the capture camera 51 determines that the capture of the display device 235 is not proceeding (NO in S160), the capture prevention program 230 displays the second image IM2 displayed on the display device 235 ) To the first image IM1.

이때, 캡쳐 방지 프로그램(230)은 카메라(210)에 의해 촬영된 제3 현재 영상(예컨대, 제2시점보다 늦은 제3 시점에 촬영된 영상)에 대한 녹화를 중지한다. At this time, the capture prevention program 230 stops the recording of the third current image photographed by the camera 210 (e.g., the image photographed at a third point in time later than the second point of time).

실시 예들에 따라 캡쳐 방지 프로그램(230)은 제1 영상(IM1) 위에 오버랩된 제2 영상(IM2)을 제거하여 제2 영상(IM2)을 제1 영상(IM1)으로 변경할 수 있다. 제2 영상(IM2)이 제거됨에 따라 제1 영상(IM1)은 사용자(50)에게 보인다.The capture prevention program 230 may change the second image IM2 to the first image IM1 by removing the overlapped second image IM2 on the first image IM1. The first image IM1 is displayed to the user 50 as the second image IM2 is removed.

실시 예들에 따라 캡쳐 방지 프로그램(230)은 디스플레이 장치(235)로 제1 영상(IM1)에 관련된 영상 신호들을 다시 전송함에 따라 제2 영상(IM2)을 제1 영상 (IM1)으로 변경할 수 있다.The capture prevention program 230 may change the second image IM2 to the first image IM1 by transmitting the image signals related to the first image IM1 to the display device 235 again.

실시 예들에 따라 캡쳐 방지 프로그램(230)은 제1 영상(IM1)의 디스플레이에 관련된 컴퓨터 프로그램(예컨대, 워드프로세서 프로그램)을 다시 실행시켜 제2 영상(IM2)을 제1 영상(IM1)으로 변경할 수 있다.The capture prevention program 230 can execute a computer program (e.g., a word processor program) related to display of the first image IM1 again to change the second image IM2 to the first image IM1 have.

상기 제2 현재 영상 내에 캡쳐 카메라(51)에 해당하는 영상이 계속 존재할 때(S160의 YES), 캡쳐 방지 프로그램(230)은 카메라(210)에 의해 촬영되는 영상을 메모리 장치(240)에 저장하거나 통신 장치(250)와 통신 네트워크(260)를 통해 관리자 컴퓨터(또는 관리 서버; 270)로 실시간으로 전송할 수 있다(S170). 캡쳐 방지 프로그램(230)은 디스플레이 장치(235)에 제2 영상(IM2)을 계속 디스플레이한다 (S180).When the image corresponding to the capture camera 51 still exists in the second current image (YES in S160), the capture prevention program 230 stores the image captured by the camera 210 in the memory device 240 (Or the management server) 270 through the communication device 250 and the communication network 260 (S170). The capture prevention program 230 continues to display the second image IM2 on the display device 235 (S180).

사용자(50)가 캡쳐 카메라(51)를 이용하여 디스플레이 장치(235)의 화면을 촬영할 때 또는 캡쳐 방지 프로그램(230)이 디스플레이 장치(235)에서 디스플레이되는 제1 영상(IM1)이 캡쳐 카메라(51)에 의해 촬영되고 있다고 판단할 때, 캡쳐 방지 프로그램(230)은 디스플레이 장치(235)에서 디스플레이되는 보안이 요구되는 제1 영상(IM1)을 제2 영상(IM2)으로 변경하고, 카메라(210)에 의해 촬영된 영상들을 녹화한다.When the user 50 shoots the screen of the display device 235 using the capture camera 51 or when the first image IM1 displayed on the display device 235 by the capture prevention program 230 is captured by the capture camera 51 The capture prevention program 230 changes the first image IM1 to be displayed on the display device 235 to the second image IM2 and transmits the second image IM2 to the camera 210. [ As shown in FIG.

그 후 사용자(50)가 캡쳐 카메라(51)를 치웠을 때 또는 캡쳐 방지 프로그램 (230)이 디스플레이 장치(235)에서 디스플레이되는 제2 영상(IM2)이 캡쳐 카메라 (51)에 의해 촬영되고 있지 않다고 판단할 때, 캡쳐 방지 프로그램(230)은 디스플레이 장치(235)에서 디스플레이되는 제2 영상(IM2)을 제1 영상(IM1)으로 변경하고, 카메라(210)에 의해 촬영된 영상들을 녹화하지 않는다.Thereafter, when the user 50 has removed the capture camera 51 or when the second image IM2 in which the capture prevention program 230 is displayed on the display device 235 is not being photographed by the capture camera 51 The capture prevention program 230 changes the second image IM2 displayed on the display device 235 to the first image IM1 and does not record the images photographed by the camera 210. [

즉, 디스플레이 장치(235)의 화면이 캡쳐 카메라(51)에 의해 촬영되는 동안에만, 제2 영상(IM2)이 디스플레이 장치(235)에서 디스플레이되고, 카메라(210)의 전방에 대한 영상들이 녹화된다.That is, while the screen of the display device 235 is being captured by the capture camera 51, the second image IM2 is displayed on the display device 235, and images for the front of the camera 210 are recorded .

도 1과 도 4를 참조하면, 캡쳐 방지 프로그램(230)은 각 캡쳐 도구(SM1~SMn, n은 자연수)에 대한 각 이미지(CIM1~CIMn)를 참조하여 사용자(50)의 캡쳐 카메라 (51)에 해당하는 이미지가 해당 캡쳐 도구의 이미지와 동일 또는 유사한지를 판단할 수 있다.1 and 4, the capture prevention program 230 refers to the capture camera 51 of the user 50 by referring to each of the images CIM1 to CIMn for each capture tool SM1 to SMn, n is a natural number, It is possible to determine whether or not the image corresponding to the capture tool is the same as or similar to the image of the capture tool.

본 발명은 도면에 도시된 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is evident that many alternatives, modifications and variations will be apparent to those skilled in the art. Accordingly, the true scope of the present invention should be determined by the technical idea of the appended claims.

100: 보안 서비스 제공 시스템
200: 컴퓨터
220: CPU
230: 캡쳐 방지 프로그램
235: 모니터 또는 디스플레이 장치
240: 메모리 장치
250: 통신 장치
260: 통신 네트워크
270: 관리자 단말기 또는 관리 서버
280: 데이터베이스100: Security service providing system
200: computer
220: CPU
230: Capture prevention program
235: Monitor or display device
240: memory device
250: communication device
260: communication network
270: Administrator terminal or management server
280: Database

Claims (12)

하드웨어와 결합되어 컴퓨터의 디스플레이 장치에서 디스플레이되는 정보의 유출을 방지하기 위하여 저장 매체에 저장된 컴퓨터 프로그램에 있어서,
상기 컴퓨터 프로그램이 상기 컴퓨터에 연결된 카메라에 의해 획득된 영상을 분석하고, 상기 디스플레이 장치에서 디스플레이되는 정보를 상기 획득된 영상에 포함된 캡쳐 카메라를 이용하여 캡쳐하는 행위를 학습하고, 학습 결과에 따라 상기 캡쳐 카메라에 대한 영상을 스스로 학습하여 상기 컴퓨터의 메모리 장치에 저장하는 단계;
상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제1 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 학습된 영상을 참조하여 상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있는지를 판단하는 단계;
상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재함에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치에서 디스플레이되는 제1 영상을 제2 영상으로 변경하는 단계;
상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제2 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 상기 학습된 영상을 참조하여 상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있는지를 판단하는 단계; 및
상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하지 않음에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있지 않다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치에서 디스플레이되는 상기 제2 영상을 상기 제1 영상으로 복원하는 단계를 포함하는 컴퓨터 프로그램.A computer program stored in a storage medium coupled with hardware to prevent leakage of information displayed on a display device of the computer,
The computer program analyzes the image acquired by the camera connected to the computer and learns to capture information displayed on the display device using a capture camera included in the acquired image, Learning an image of the capture camera by itself and storing it in a memory device of the computer;
Wherein the computer program receives a first current image acquired by the camera, learns by itself by the computer program, refers to the learned image of the capture camera stored in the memory, Determining whether an image of the camera is present, and determining whether the capture of the screen of the display device is being performed by the capture camera based on the determination result;
When the capture camera determines that the capture of the screen of the display device is being performed by the capture camera in the first current image, the computer program causes the display device to display the first image displayed on the display device Changing to a second image;
Wherein the computer program receives the second current image acquired by the camera and refers to the learned image for the capture camera stored in the memory after learning by itself by the computer program, Determining whether an image of the capture camera is present and determining whether the capture of the screen of the display device is being continued by the capture camera based on the determination result; And
When the capture camera determines that the capturing of the screen of the display device is not proceeding due to the absence of the capture camera image in the second current image, the computer program is displayed on the display device And restoring the second image to the first image. 삭제delete 삭제delete 제1항에 있어서,
상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있다고 판단될 때, 상기 컴퓨터 프로그램이 상기 카메라로 하여금 상기 캡쳐 카메라에 해당하는 영상을 추적하면서 상기 카메라의 전방의 영상을 녹화하도록 상기 카메라를 제어하는 단계를 더 포함하는 컴퓨터 프로그램.The method according to claim 1,
Wherein the computer program causes the camera to record an image in front of the camera while tracking the image corresponding to the capture camera when it is determined that the capture of the screen of the display device is being performed by the capture camera, The method comprising the steps of: 제4항에 있어서,
상기 컴퓨터 프로그램이 상기 녹화된 영상을 통신 네트워크를 통해 관리자 컴퓨터로 실시간으로 전송하는 단계를 더 포함하는 컴퓨터 프로그램.5. The method of claim 4,
Further comprising the computer program transmitting the recorded video to a manager computer through a communication network in real time. 제4항에 있어서,
상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있지 않다고 판단될 때, 상기 컴퓨터 프로그램이 상기 카메라에 의해 촬영된 영상의 녹화를 중지하는 단계를 더 포함하는 컴퓨터 프로그램.5. The method of claim 4,
Further comprising stopping the recording of the image photographed by the camera when the computer program determines that the shooting of the screen of the display device is not being continued by the capture camera. 제1항에 있어서,
상기 제1 영상을 상기 제2 영상으로 변경하는 단계는 상기 컴퓨터 프로그램이 상기 제2 영상을 상기 제1 영상의 위에 오버랩시킴으로써 상기 제1 영상을 상기 제2 영상으로 변경하고,
상기 제2 영상을 상기 제1 영상으로 복원하는 단계는 상기 컴퓨터 프로그램이 상기 제1 영상 위에 오버랩된 상기 제2 영상을 제거함에 따라 상기 제2 영상을 상기 제1 영상으로 복원하는 컴퓨터 프로그램.The method according to claim 1,
Wherein the step of modifying the first image into the second image comprises: changing the first image to the second image by overlapping the second image on the first image,
Wherein the restoring the second image to the first image restores the second image to the first image as the computer program removes the second image overlapped on the first image. 제1항에 있어서,
상기 제1 영상을 상기 제2 영상으로 변경하는 단계는 상기 컴퓨터 프로그램이 상기 디스플레이 장치로 전송되는 상기 제1 영상에 관련된 영상 신호들을 차단함에 따라 상기 제1 영상을 상기 제 2 영상으로 변경하고,
상기 제2 영상을 상기 제1 영상으로 복원하는 단계는 상기 컴퓨터 프로그램이 상기 디스플레이 장치로의 전송이 차단된 상기 제1 영상에 관련된 영상 신호들을 다시 공급함에 따라 상기 제2 영상을 상기 제1 영상으로 복원하는 컴퓨터 프로그램.The method according to claim 1,
Wherein the step of changing the first image to the second image is performed by changing the first image to the second image as the computer program intercepts the image signals related to the first image transmitted to the display device,
The step of restoring the second image into the first image may include restoring the second image into the first image as the computer program supplies the image signals related to the first image blocked from transmission to the display device A computer program to restore. 하드웨어와 결합되어 컴퓨터의 디스플레이 장치에서 디스플레이되는 정보의 유출을 방지하기 위하여 저장 매체에 저장된 컴퓨터 프로그램에 있어서,
상기 컴퓨터 프로그램이 상기 컴퓨터에 연결된 카메라에 의해 획득된 영상을 분석하고, 상기 디스플레이 장치에서 디스플레이되는 정보를 상기 획득된 영상에 포함된 캡쳐 카메라를 이용하여 캡쳐하는 행위를 학습하고, 학습 결과에 따라 상기 캡쳐 카메라에 대한 영상을 스스로 학습하여 상기 컴퓨터의 메모리 장치에 저장하는 단계;
상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제1 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 학습된 영상을 참조하여 상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있는지를 판단하는 단계;
상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재함에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치에서 디스플레이되는 제1 영상을 제2 영상으로 변경하는 단계;
상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제2 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 상기 학습된 영상을 참조하여 상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있는지를 판단하는 단계; 및
상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하지 않음에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있지 않다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치에서 디스플레이되는 상기 제2 영상을 상기 제1 영상으로 복원하는 단계를 포함하고,
상기 제1 영상을 상기 제2 영상으로 변경하는 단계는 상기 컴퓨터 프로그램이 상기 제1 영상의 디스플레이에 관련된 컴퓨터 프로그램의 실행을 종료시킴에 따라 상기 제1 영상을 상기 제2 영상으로 변경하고,
상기 제2 영상을 상기 제1 영상으로 복원하는 단계는 상기 컴퓨터 프로그램이 종료된 상기 제1 영상의 디스플레이에 관련된 컴퓨터 프로그램을 다시 실행시킴에 따라 상기 제2 영상을 상기 제1 영상으로 복원하는 컴퓨터 프로그램.A computer program stored in a storage medium coupled with hardware to prevent leakage of information displayed on a display device of the computer,
The computer program analyzes the image acquired by the camera connected to the computer and learns to capture information displayed on the display device using a capture camera included in the acquired image, Learning an image of the capture camera by itself and storing it in a memory device of the computer;
Wherein the computer program receives a first current image acquired by the camera, learns by itself by the computer program, refers to the learned image of the capture camera stored in the memory, Determining whether an image of the camera is present, and determining whether the capture of the screen of the display device is being performed by the capture camera based on the determination result;
When the capture camera determines that the capture of the screen of the display device is being performed by the capture camera in the first current image, the computer program causes the display device to display the first image displayed on the display device Changing to a second image;
Wherein the computer program receives the second current image acquired by the camera and refers to the learned image for the capture camera stored in the memory after learning by itself by the computer program, Determining whether an image of the capture camera is present and determining whether the capture of the screen of the display device is being continued by the capture camera based on the determination result; And
When the capture camera determines that the capturing of the screen of the display device is not proceeding due to the absence of the capture camera image in the second current image, the computer program is displayed on the display device And restoring the second image to the first image,
Wherein the step of changing the first image to the second image is performed by changing the first image to the second image as the computer program terminates execution of a computer program related to display of the first image,
And restoring the second image to the first image may include restoring the second image to the first image by re-executing the computer program related to display of the first image, . 제1항에 있어서,
상기 컴퓨터 프로그램이, 상기 제1 영상이 상기 제2 영상으로 변경된 후, 경고 메시지를 상기 디스플레이 장치에서 디스플레이하는 컴퓨터 프로그램.The method according to claim 1,
And the computer program displays a warning message on the display device after the first image is changed to the second image. 컴퓨터, 상기 컴퓨터에서 실행되는 컴퓨터 프로그램, 및 상기 컴퓨터에 연결된 카메라를 이용하여 상기 컴퓨터의 디스플레이 장치의 화면에서 디스플레이되는 정보의 유출을 방지하는 서비스를 제공하는 방법에 있어서,
상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 영상을 분석하고, 상기 디스플레이 장치의 화면에서 디스플레이되는 정보를 상기 획득된 영상에 포함된 캡쳐 카메라를 이용하여 캡쳐하는 행위를 학습하고, 학습 결과에 따라 상기 캡쳐 카메라에 대한 영상을 스스로 학습하여 상기 컴퓨터의 메모리 장치에 저장하는 단계;
상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제1 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 학습된 영상을 참조하여 상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있는지를 판단하는 단계;
상기 제1 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재함에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 진행되고 있다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치의 화면에서 디스플레이되는 제1 영상을 제2 영상으로 변경하고, 상기 카메라로 하여금 상기 캡쳐 카메라에 해당하는 영상을 추적하면서 상기 카메라의 전방의 영상을 녹화하도록 상기 카메라를 제어하는 단계;
상기 컴퓨터 프로그램이 상기 카메라에 의해 획득된 제2 현재 영상을 수신하고, 상기 컴퓨터 프로그램에 의해 스스로 학습된 후 상기 메모리에 저장된 상기 캡쳐 카메라에 대한 상기 학습된 영상을 참조하여 상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하는지를 판단하고, 판단 결과에 기초하여 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있는지를 판단하는 단계; 및
상기 제2 현재 영상 내에 상기 캡쳐 카메라의 영상이 존재하지 않음에 따라 상기 디스플레이 장치의 화면에 대한 촬영이 상기 캡쳐 카메라에 의해 계속 진행되고 있지 않다고 판단될 때, 상기 컴퓨터 프로그램이 상기 디스플레이 장치의 화면에서 디스플레이되는 상기 제2 영상을 상기 제1 영상으로 복원하고 상기 카메라에 의해 촬영된 영상에 대한 녹화를 중지하는 단계를 포함하는 서비스를 제공하는 방법.A method of providing a service for preventing leakage of information displayed on a screen of a display device of a computer using a computer, a computer program executed on the computer, and a camera connected to the computer,
The computer program analyzes the image acquired by the camera and learns to capture information displayed on a screen of the display device using a capture camera included in the acquired image, Learning an image of the camera by itself and storing it in a memory device of the computer;
Wherein the computer program receives a first current image acquired by the camera, learns by itself by the computer program, refers to the learned image of the capture camera stored in the memory, Determining whether an image of the camera is present, and determining whether the capture of the screen of the display device is being performed by the capture camera based on the determination result;
Wherein when a capture of the screen of the display device is determined to be proceeding by the capture camera as the capture camera exists in the first current image, Changing the image to a second image and controlling the camera to record an image in front of the camera while tracking the image corresponding to the capture camera;
Wherein the computer program receives the second current image acquired by the camera and refers to the learned image for the capture camera stored in the memory after learning by itself by the computer program, Determining whether an image of the capture camera is present and determining whether the capture of the screen of the display device is being continued by the capture camera based on the determination result; And
When it is determined that the capture camera does not continue capturing the screen of the display device due to the absence of the capture camera image in the second current image, the computer program is displayed on the screen of the display device And restoring the second image to be displayed to the first image and stopping the recording of the image photographed by the camera. 제11항에 있어서,
상기 제1 영상을 상기 제2 영상으로 변경은 상기 컴퓨터 프로그램이 상기 제1 영상의 디스플레이에 관련된 컴퓨터 프로그램의 실행을 종료시킴에 따라 상기 제1 영상을 상기 제2 영상으로 변경하고,
상기 제2 영상을 상기 제1 영상으로 복원은 상기 컴퓨터 프로그램이 종료된 상기 제1 영상의 디스플레이에 관련된 컴퓨터 프로그램을 다시 실행시킴에 따라 상기 제2 영상을 상기 제1 영상으로 복원하는 서비스를 제공하는 방법.

12. The method of claim 11,
Changing the first image to the second image changes the first image to the second image as the computer program terminates execution of a computer program related to display of the first image,
And restoring the second image to the first image may include restoring the second image to the first image by re-executing the computer program related to the display of the first image for which the computer program has ended Way.

KR1020180020509A 2018-02-21 2018-02-21 Computer program for preventing information spill displayed on display device and security service using the same KR101925799B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180020509A KR101925799B1 (en) 2018-02-21 2018-02-21 Computer program for preventing information spill displayed on display device and security service using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180020509A KR101925799B1 (en) 2018-02-21 2018-02-21 Computer program for preventing information spill displayed on display device and security service using the same

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020180150833A Division KR20190100844A (en) 2018-11-29 2018-11-29 Computer program for preventing information spill displayed on display device and security service using the same

Publications (1)

Publication Number Publication Date
KR101925799B1 true KR101925799B1 (en) 2018-12-07

Family

ID=64669650

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180020509A KR101925799B1 (en) 2018-02-21 2018-02-21 Computer program for preventing information spill displayed on display device and security service using the same

Country Status (1)

Country Link
KR (1) KR101925799B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210135063A (en) * 2020-05-04 2021-11-12 주식회사 테르텐 Computer program for preventing information spill displayed on display device and security service using the same
US11763042B2 (en) 2021-06-29 2023-09-19 Teruten, Inc Computer program for preventing information spill displayed on display device and security service using the same

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006259930A (en) * 2005-03-15 2006-09-28 Omron Corp Display device and its control method, electronic device equipped with display device, display device control program, and recording medium recording program
JP2009237574A (en) 2003-12-12 2009-10-15 Seiko Epson Corp Display device and display control method
JP2012173913A (en) 2011-02-21 2012-09-10 Nec Corp Peep prevention device and peep prevention method and program
JP2014146167A (en) 2013-01-29 2014-08-14 Xacti Corp Electronic equipment

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009237574A (en) 2003-12-12 2009-10-15 Seiko Epson Corp Display device and display control method
JP2006259930A (en) * 2005-03-15 2006-09-28 Omron Corp Display device and its control method, electronic device equipped with display device, display device control program, and recording medium recording program
JP2012173913A (en) 2011-02-21 2012-09-10 Nec Corp Peep prevention device and peep prevention method and program
JP2014146167A (en) 2013-01-29 2014-08-14 Xacti Corp Electronic equipment

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210135063A (en) * 2020-05-04 2021-11-12 주식회사 테르텐 Computer program for preventing information spill displayed on display device and security service using the same
KR102336165B1 (en) * 2020-05-04 2021-12-07 주식회사 테르텐 Computer program for preventing information spill displayed on display device and security service using the same
US11763042B2 (en) 2021-06-29 2023-09-19 Teruten, Inc Computer program for preventing information spill displayed on display device and security service using the same

Similar Documents

Publication Publication Date Title
KR102122348B1 (en) Method and device for face in-vivo detection
US8396316B2 (en) Method and apparatus for processing image
JP6823267B2 (en) Information processing equipment, information processing systems, control methods, and programs
EP3048788A1 (en) Shooting method and apparatus
US9094616B2 (en) Method and system for image capture and facilitated annotation
KR101925799B1 (en) Computer program for preventing information spill displayed on display device and security service using the same
US10299117B2 (en) Method for authenticating a mobile device and establishing a direct mirroring connection between the authenticated mobile device and a target screen device
WO2019196240A1 (en) Photographing method, apparatus, computer device, and storage medium
US20200026866A1 (en) Method and device for covering private data
US20200074217A1 (en) Techniques for providing user notice and selection of duplicate image pruning
CN112672102B (en) Video generation method and device
US10880735B2 (en) Method for detecting the possible taking of screenshots
CN111832458A (en) Anti-theft method and system
KR20190100844A (en) Computer program for preventing information spill displayed on display device and security service using the same
CN110084076A (en) Evidence display methods and device
US11544833B1 (en) System and method for capturing by a device an image of a light colored object on a light colored background for uploading to a remote server
US10984140B2 (en) Method for detecting the possible taking of screenshots
JP5002131B2 (en) Imaging device for monitoring and control method thereof
CN109978761B (en) Method and device for generating panoramic picture and electronic equipment
KR101698864B1 (en) Media Being Recorded with the Program Executing Method for Detecting Image Using Metadata
KR20160044834A (en) Security apparatus for terminal and method thereof
US11763042B2 (en) Computer program for preventing information spill displayed on display device and security service using the same
KR101641940B1 (en) video surveillance system and method
KR102337779B1 (en) Method of preventing the leakage of the information based on behavior and system performing the same
JP4938065B2 (en) Image parameter adjusting apparatus, method and program

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant