KR102555680B1 - Method, Apparatus and System for Image Processing For Protecting Portrait Rights - Google Patents
Method, Apparatus and System for Image Processing For Protecting Portrait Rights Download PDFInfo
- Publication number
- KR102555680B1 KR102555680B1 KR1020200189586A KR20200189586A KR102555680B1 KR 102555680 B1 KR102555680 B1 KR 102555680B1 KR 1020200189586 A KR1020200189586 A KR 1020200189586A KR 20200189586 A KR20200189586 A KR 20200189586A KR 102555680 B1 KR102555680 B1 KR 102555680B1
- Authority
- KR
- South Korea
- Prior art keywords
- portrait
- image
- user
- hidden
- identification information
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000012545 processing Methods 0.000 title claims description 86
- 230000008569 process Effects 0.000 claims abstract description 22
- 238000003672 processing method Methods 0.000 claims abstract description 20
- 230000004044 response Effects 0.000 claims description 15
- 238000010586 diagram Methods 0.000 description 6
- 230000010365 information processing Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 3
- 238000007792 addition Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 239000010865 sewage Substances 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
- G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Bioethics (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Telephonic Communication Services (AREA)
- Selective Calling Equipment (AREA)
Abstract
초상권 보호를 위한 영상 처리 방법, 장치 및 시스템이 개시되어 있다. 영상 처리 방법은 영상 촬영부로부터 촬영된 영상을 수신하고, 촬영된 영상 내에서 복수 개의 초상을 식별하고, 복수 개의 초상에 대응하는 복수 개의 사용자 식별 정보를 검출하고, 검출된 복수 개의 사용자 식별 정보에 대응하는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 적어도 하나의 초상에 대한 히든 처리를 수행할 수 있다.An image processing method, apparatus, and system for protecting portrait rights are disclosed. The image processing method receives a photographed image from an image photographing unit, identifies a plurality of portraits in the photographed image, detects a plurality of user identification information corresponding to the plurality of portraits, and uses the detected plurality of user identification information A hidden process for at least one portrait may be performed based on the corresponding plurality of portrait disclosure setting information.
Description
본 발명은 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템에 관한 것으로서, 좀더 상세하게는 CCTV(Closed Circuit Television), 블랙박스, SNS(Social Network Service) 등과 같이 불특정 다수를 촬영하나 타인에게 영상이 공개되는 시스템에서 개인의 설정에 따라 선택적으로 초상을 공개 또는 비공개하도록 함으로써 무분별하게 노출될 수 있는 개인의 초상권을 보호할 수 있는 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템에 관한 것이다.The present invention relates to an image processing method, apparatus, and system for protecting portrait rights, and more particularly, to a closed circuit television (CCTV), a black box, a social network service (SNS), etc. An image processing method, apparatus, and system for protecting portrait rights capable of protecting an individual's portrait rights that may be indiscriminately exposed by selectively disclosing or disclosing portraits according to individual settings in a system that can be used.
최근 들어, 정보화 기술의 발전, 유비쿼터스 컴퓨팅의 도입과 함께, 현대사회는 각종 파이프나 물리적인 선으로 연결되는 공공서비스망(전기, 가스, 상하수도 등) 기반의 인프라를 넘어서 공공서비스, 콘텐트와 새로운 부가서비스를 전달하여 높은 부가가치를 창출할 수 있는 첨단 정보통신망을 주목하고 있다.Recently, with the development of information technology and the introduction of ubiquitous computing, modern society has gone beyond infrastructure based on public service networks (electricity, gas, water supply and sewage, etc.) connected by various pipes or physical lines to provide public services, content and new additions. It is paying attention to the advanced information communication network that can create high added value by delivering services.
또한, 사회가 발전하면서 범죄는 갈수록 지능화, 고속화되고 있으며, 흉포하고 동기가 없는 범죄들도 빈번해지고 있다. 이러한 범죄는 특성상 목격자나 증거를 찾아내기가 쉽지 않고 진술 확보에 있어서도 어려움이 많다.In addition, as society develops, crimes are becoming increasingly intelligent and high-speed, and vicious and unmotivated crimes are becoming more frequent. Due to the nature of these crimes, it is not easy to find witnesses or evidence, and it is difficult to secure statements.
CCTV(Closed-Circuit Television) 카메라는 이러한 상황에서 범죄를 감시하고, 사회의 안전문제를 개선하기 위해 도입되었으며, 최근에는 여성, 어린이, 치매노인, 독거노인 등을 위해 이동통신망을 이용한 위치확인 서비스도 점차 확대되어 가고 있는 실정이다.CCTV (Closed-Circuit Television) cameras have been introduced to monitor crimes and improve social safety issues under these circumstances. It is gradually expanding.
CCTV 카메라를 이용하면, 광범위한 영역을 대상으로 모니터 요원을 활용하여 실시간으로 영상을 모니터링하고 저장하면서 사건 발생 시 조치를 취하거나 사건 발생 후 저장된 영상을 검색하여 범죄발생의 증거물로 활용할 수 있다.When using a CCTV camera, monitor personnel can be used in a wide area to monitor and store images in real time, taking action when an incident occurs, or searching for stored images after an incident can be used as evidence of a crime.
또한, 최근에는 차량에 부탁되는 주행 또는 주차 시에 발생하는 사고를 촬영하는 차량용 블랙박스를 사용하여 CCTV와 같은 용도로 활용하는 시스템도 사용되고 있다.In addition, recently, a system used for purposes such as CCTV using a black box for a vehicle that photographs accidents that occur during driving or parking, which is requested to the vehicle, has also been used.
그런데, 이러한 CCTV나 블랙박스는 불특정 다수를 촬영하는 것이므로 영상에 본인이 촬영되기를 원하지 않더라도 영상에 포함되며 필요에 따라서는 본의 아니게 공개되기도 한다.By the way, these CCTVs or black boxes are for shooting an unspecified number of people, so even if you do not want to be filmed in the video, it is included in the video and, if necessary, unintentionally disclosed.
따라서 공개를 원치 않는 개인의 초상권이 보장되기 어렵다. 최근에는 개인의 초상권 보호를 위하여, 영상 처리 담당자가 영상의 공개될 부분 이외의 다른 사람들은 모두 모자이크 처리 하여 얼굴을 가리는 기술이 개발되고 있으나 이는 인적 및 시간적 소모가 크고 누구의 얼굴을 공개하고 누구의 얼굴을 가릴지 일일이 담당자가 확인하여야 하는 문제점이 있다.Therefore, it is difficult to guarantee the portrait rights of individuals who do not want to be disclosed. Recently, in order to protect the portrait rights of individuals, a technology is being developed in which the person in charge of image processing mosaics all other people except for the part to be disclosed in the video to cover the face. There is a problem that the person in charge has to check whether or not to cover the face.
본 발명은 이러한 문제점을 해결하기 위한 것으로서, CCTV, 블랙박스, SNS 등과 같이 불특정 다수를 촬영하나 타인에게 영상이 공개되는 시스템에서 개인의 설정에 따라 선택적으로 초상을 공개 또는 비공개하도록 함으로써 무분별하게 노출될 수 있는 개인의 초상권을 보호할 수 있는 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템을 제공하는데 그 목적이 있다.The present invention is intended to solve this problem, and in a system in which an unspecified number of people are photographed but the video is disclosed to others, such as CCTV, black box, SNS, etc. An object of the present invention is to provide an image processing method, device, and system for protecting portrait rights of individuals capable of protecting portrait rights.
이러한 목적을 달성하기 위하여 본 발명은 일 측면(Aspect)에서 초상권 보호를 위한 영상 처리 방법을 제공한다. 상기 초상권 보호를 위한 영상 처리 방법은 영상 처리 장치를 이용하여, 영상 촬영부로부터 촬영된 영상을 수신하는 단계; 상기 촬영된 영상 내에서 복수 개의 초상을 식별하는 단계; 식별된 상기 복수 개의 초상에 대응하는 복수 개의 사용자 식별 정보를 검출하는 단계; 검출된 복수 개의 사용자 식별 정보에 대응하는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 적어도 하나의 초상에 대한 히든 처리를 수행하는 단계를 포함한다.In order to achieve this object, the present invention provides an image processing method for protecting portrait rights in one aspect. The image processing method for protection of portrait rights includes receiving a captured image from an image capturing unit using an image processing device; identifying a plurality of portraits in the photographed image; detecting a plurality of pieces of user identification information corresponding to the identified plurality of portraits; and performing hidden processing on at least one likeness based on a plurality of pieces of portrait disclosure setting information corresponding to a plurality of pieces of detected user identification information.
상기 히든 처리를 수행하는 단계는, 상기 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 상기 복수 개의 초상 중 초상을 공개하지 않음으로 설정된 적어도 하나의 초상을 검출하는 단계; 및 검출된 상기 적어도 하나의 초상에 대하여 히든 처리를 수행하는 단계를 포함할 수 있다.The performing of the hidden processing may include: detecting at least one portrait set to not disclose a portrait from among the plurality of portraits based on the plurality of portrait disclosure setting information; and performing hidden processing on the at least one detected portrait.
상기 복수 개의 사용자 식별 정보를 검출하는 단계는, 사용자 별 초상 영상 정보를 저장하고 있는 데이터베이스를 조회하여 식별된 복수 개의 초상과 매칭되는 복수 개의 사용자의 초상 영상 정보를 검출하는 단계; 및 검출된 복수 개의 사용자의 초상 영상 정보에 대응하는 복수 개의 사용자 식별 정보를 검출하는 단계를 포함할 수 있다.The detecting of the plurality of pieces of user identification information may include: detecting portrait image information of a plurality of users matching the plurality of identified portraits by searching a database storing portrait image information for each user; and detecting a plurality of pieces of user identification information corresponding to the detected portrait image information of a plurality of users.
상기 사용자 별 초상 영상 정보는 사용자 별 사진 및 동영상 중 적어도 하나일 수 있다. 상기 적어도 하나의 초상에 대한 히든 처리는, 상기 적어도 하나의 초상이 보여지지 않도록 모자이크 처리 또는 블록 처리 할 수 있다.The portrait image information for each user may be at least one of photos and videos for each user. In the hidden processing of the at least one portrait, mosaic processing or block processing may be performed so that the at least one portrait is not displayed.
상기 초상권 보호를 위한 영상 처리 방법은 영상 재생부로부터 히든 처리된 초상에 대한 히든 해제 요청을 수신하는 단계; 및 상기 정보 요청에 응답하여, 히든 해제 요청된 초상에 대한 히든 처리를 해제하여 보여지도록 하는 단계를 더 포함할 수 있다.The image processing method for protection of portrait rights includes receiving a hidden release request for a hidden-processed portrait from an image reproducing unit; and in response to the information request, canceling the hidden processing of the portrait for which the hidden release request has been made so that the portrait can be displayed.
상기 초상권 보호를 위한 영상 처리 방법은 영상 재생부로부터 히든 처리된 초상에 대한 정보 요청을 수신하는 단계; 및 상기 정보 요청에 대응하여, 상기 히든 처리된 초상에 대응하는 사용자 식별 정보, 상기 히든 처리된 조상에 대응하는 초상 영상 정보 및 상기 히든 처리된 초상에 대응하는 연락처 중 적어도 하나를 상기 영상 재생부로 전송하는 단계를 더 포함할 수도 있다.The image processing method for protection of portrait rights includes receiving a request for information on a hidden-processed portrait from an image reproducing unit; and in response to the information request, at least one of user identification information corresponding to the hidden-processed portrait, portrait image information corresponding to the hidden-processed ancestor, and contact information corresponding to the hidden-processed portrait is transmitted to the image reproducing unit. It may further include steps to do.
상기 초상권 보호를 위한 영상 처리 방법은 상기 촬영된 영상에서 히든 처리된 초상의 부분을 대응되는 상기 사용자 식별 정보와 연관시켜 상기 데이터베이스에 저장하는 단계를 더 포함할 수도 있다.The image processing method for protection of portrait rights may further include a step of associating a part of a hidden-processed portrait in the photographed image with the corresponding user identification information and storing the image in the database.
한편, 상술한 본 발명의 목적을 달성하기 위하여 본 발명은 또 다른 측면에서 초상권 보호를 위한 영상 처리 장치를 제공한다. 상기 영상 처리 장치는, 영상 촬영부로부터 촬영된 영상을 수신하는 인터페이스; 및 상기 촬영된 영상 내에서 복수 개의 초상을 식별하고, 식별된 상기 복수 개의 초상에 대응하는 복수 개의 사용자 식별 정보를 검출하고, 검출된 복수 개의 사용자 식별 정보에 대응하는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 적어도 하나의 초상에 대한 히든 처리를 수행하는 프로세서를 포함할 수 있다.On the other hand, in order to achieve the above object of the present invention, the present invention provides an image processing device for portrait rights protection in another aspect. The image processing device may include an interface for receiving an image captured by an image capturing unit; and identifying a plurality of portraits in the photographed image, detecting a plurality of user identification information corresponding to the identified plurality of portraits, and providing a plurality of portrait disclosure setting information corresponding to the detected plurality of user identification information. Based on this, it may include a processor that performs hidden processing on at least one portrait.
상기 프로세서는, 상기 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 상기 복수 개의 초상 중 초상을 공개하지 않음으로 설정된 적어도 하나의 초상을 검출하고, 검출된 상기 적어도 하나의 초상에 대하여 히든 처리를 수행할 수 있다.The processor detects at least one portrait set to not disclose a portrait from among the plurality of portraits based on the plurality of portrait disclosure setting information, and performs a hidden process on the detected at least one portrait. can do.
상기 프로세서는, 사용자 별 초상 영상 정보를 저장하고 있는 데이터베이스를 조회하여 식별된 복수 개의 초상과 매칭되는 복수 개의 사용자의 초상 영상 정보를 검출하고, 검출된 복수 개의 사용자의 초상 영상 정보에 대응하는 복수 개의 사용자 식별 정보를 검출할 수 있다.The processor searches a database storing portrait image information for each user, detects portrait image information of a plurality of users matching the identified plurality of portraits, and detects a plurality of portrait image information corresponding to the detected portrait image information of the plurality of users. User identification information may be detected.
상기 사용자 별 초상 영상 정보는 사용자 별 사진 및 동영상 중 적어도 하나일 수 있다. 상기 적어도 하나의 초상에 대한 히든 처리는, 상기 적어도 하나의 초상이 보여지지 않도록 모자이크 처리 또는 블록 처리 할 수 있다.The portrait image information for each user may be at least one of photos and videos for each user. In the hidden processing of the at least one portrait, mosaic processing or block processing may be performed so that the at least one portrait is not displayed.
상기 프로세서는, 영상 재생부로부터 히든 처리된 초상에 대한 히든 해제 요청을 수신하고, 상기 정보 요청에 응답하여, 히든 해제 요청된 초상에 대한 히든 처리를 해제하여 보여지도록 할 수 있다.The processor may receive a hidden release request for the hidden-processed portrait from the image reproducing unit, and in response to the information request, release the hidden processing for the hidden-release-requested portrait to be displayed.
상기 프로세서는, 영상 재생부로부터 히든 처리된 초상에 대한 정보 요청을 수신하고, 상기 정보 요청에 대응하여, 상기 히든 처리된 초상에 대응하는 사용자 식별 정보, 상기 히든 처리된 조상에 대응하는 초상 영상 정보 및 상기 히든 처리된 초상에 대응하는 연락처 중 적어도 하나를 상기 영상 재생부로 전송할 수 있다.The processor receives a request for information on the hidden-processed portrait from the image reproducing unit, and in response to the information request, user identification information corresponding to the hidden-processed portrait and portrait image information corresponding to the hidden-processed ancestor. And at least one of the contact information corresponding to the hidden-processed portrait may be transmitted to the image reproducing unit.
상기 프로세서는, 상기 촬영된 영상에서 히든 처리된 초상의 부분을 대응되는 상기 사용자 식별 정보와 연관시켜 상기 데이터베이스에 저장할 수 있다.The processor may associate a part of the portrait that has been hidden in the photographed image with the corresponding user identification information and store it in the database.
한편, 상술한 본 발명의 목적을 달성하기 위하여 본 발명은 또 다른 측면에서 초상권 보호를 위한 영상 처리 시스템을 제공한다. 상기 영상 처리 시스템은 영상 촬영부; 및 상기 영상 촬영부로부터 촬영된 영상을 수신하고, 상기 촬영된 영상 내에서 복수 개의 초상을 식별하고, 식별된 상기 복수 개의 초상에 대응하는 복수 개의 사용자 식별 정보를 검출하고, 검출된 복수 개의 사용자 식별 정보에 대응하는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 적어도 하나의 초상에 대한 히든 처리를 수행하는 영상 처리 장치를 포함할 수 있다.On the other hand, in order to achieve the above object of the present invention, the present invention provides an image processing system for portrait rights protection in another aspect. The image processing system includes an image capturing unit; and receiving an image captured by the image capturing unit, identifying a plurality of portraits in the captured image, detecting a plurality of user identification information corresponding to the identified plurality of portraits, and identifying the plurality of detected users. It may include an image processing device that performs hidden processing on at least one portrait based on a plurality of portrait disclosure setting information corresponding to the information.
상기 영상 처리 장치는, 상기 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 상기 복수 개의 초상 중 초상을 공개하지 않음으로 설정된 적어도 하나의 초상을 검출하고, 검출된 상기 적어도 하나의 초상에 대하여 히든 처리를 수행할 수 있다.The image processing device detects at least one portrait set to not disclose the portrait from among the plurality of portraits based on the plurality of portrait disclosure setting information, and performs hidden processing on the detected at least one portrait. can be performed.
상기 영상 처리 장치는, 사용자 별 초상 영상 정보를 저장하고 있는 데이터베이스를 조회하여 식별된 복수 개의 초상과 매칭되는 복수 개의 사용자의 초상 영상 정보를 검출하고, 검출된 복수 개의 사용자의 초상 영상 정보에 대응하는 복수 개의 사용자 식별 정보를 검출할 수 있다.The image processing device searches a database storing portrait image information for each user, detects portrait image information of a plurality of users that matches the identified plurality of portraits, and performs a method corresponding to the detected portrait image information of the plurality of users. A plurality of pieces of user identification information may be detected.
상기 사용자 별 초상 영상 정보는 사용자 별 사진 및 동영상 중 적어도 하나일 수 있다. 상기 적어도 하나의 초상에 대한 히든 처리는, 상기 적어도 하나의 초상이 보여지지 않도록 모자이크 처리 또는 블록 처리 할 수 있다.The portrait image information for each user may be at least one of photos and videos for each user. In the hidden processing of the at least one portrait, mosaic processing or block processing may be performed so that the at least one portrait is not displayed.
상기 영상 처리 장치는, 영상 재생부로부터 히든 처리된 초상에 대한 히든 해제 요청을 수신하고, 상기 정보 요청에 응답하여, 히든 해제 요청된 초상에 대한 히든 처리를 해제하여 보여지도록 할 수 있다.The image processing device may receive a hidden release request for the hidden-processed portrait from the image reproducing unit, and in response to the information request, release the hidden processing for the hidden-release-requested portrait so that it can be displayed.
상기 영상 처리 장치는, 영상 재생부로부터 히든 처리된 초상에 대한 정보 요청을 수신하고, 상기 정보 요청에 대응하여, 상기 히든 처리된 초상에 대응하는 사용자 식별 정보, 상기 히든 처리된 조상에 대응하는 초상 영상 정보 및 상기 히든 처리된 초상에 대응하는 연락처 중 적어도 하나를 상기 영상 재생부로 전송할 수 있다.The image processing device receives a request for information on the hidden-processed portrait from the image reproducing unit, and in response to the information request, user identification information corresponding to the hidden-processed portrait and portraits corresponding to the hidden-processed ancestors. At least one of image information and contact information corresponding to the hidden-processed portrait may be transmitted to the image reproducing unit.
상기 서버는, 상기 촬영된 영상에서 히든 처리된 초상의 부분을 대응되는 상기 사용자 식별 정보와 연관시켜 상기 데이터베이스에 저장할 수 있다. The server may associate the part of the portrait that has been hidden in the captured image with the corresponding user identification information and store it in the database.
한편, 상술한 본 발명의 목적을 달성하기 위하여 본 발명은 컴퓨터에, 영상 촬영부로부터 촬영된 영상을 수신하는 단계; 상기 촬영된 영상 내에서 복수 개의 초상을 식별하는 단계; 식별된 상기 복수 개의 초상에 대응하는 복수 개의 사용자 식별 정보를 검출하는 단계; 검출된 복수 개의 사용자 식별 정보에 대응하는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 적어도 하나의 초상에 대한 히든 처리를 수행하는 단계를 실행시키기 위하여 매체에 저장되는 컴퓨터 프로그램을 제공한다.On the other hand, in order to achieve the object of the present invention described above, the present invention comprises the steps of receiving a photographed image from a computer, an image capturing unit; identifying a plurality of portraits in the photographed image; detecting a plurality of pieces of user identification information corresponding to the identified plurality of portraits; Provided is a computer program stored in a medium to execute a step of performing a hidden process for at least one portrait based on a plurality of pieces of portrait disclosure setting information corresponding to a plurality of detected user identification information.
이상 설명한 바와 같이, 본 발명에 따르면 본 발명은 CCTV, 블랙박스, SNS 등과 같이 불특정 다수를 촬영하나 타인에게 영상이 공개되는 시스템에서 개인의 설정에 따라 선택적으로 초상을 공개 또는 비공개하도록 함으로써 무분별하게 노출될 수 있는 개인의 초상권을 보호할 수 있다.As described above, according to the present invention, the present invention is indiscriminately exposed by selectively disclosing or disclosing portraits according to individual settings in a system in which an unspecified number of people are photographed, such as CCTV, black box, SNS, etc., but the images are disclosed to others. Personal portrait rights can be protected.
도 1은 본 발명의 바람직한 실시예에 따른 초상권 보호 방법을 실현하기 위한 시스템의 구성을 나타내는 블록도이다.
도 2는 도 1에 도시되어 있는 서버의 상세한 구성을 설명하기 위한 블록도이다.
도 3은 도 1에 도시된 서버의 동작 흐름을 설명하기 위한 흐름도로서, 본 발명의 바람직한 실시예에 따른 초상권 보호 방법의 흐름을 나타내고 있다.
도 4는 본 발명의 바람직한 실시예에 따른 초상권 보호를 위한 영상 처리 방법의 흐름을 나타내는 흐름도이다.
도 5는 서버에 의하여 복수 개의 사용자 식별 정보를 검출하는 과정을 예시적으로 나타내는 흐름도이다.
도 6은 서버에 의하여 적어도 하나의 초상에 대한 히든 처리가 수행되는 과정을 예시적으로 설명하기 위한 흐름도이다.
도 7은 영상 재생부에 의하여 촬영된 영상에서 적어도 하나의 초상에 대한 히든 처리가 수행된 상태를 예시적으로 나타내는 예시도이다.
도 8은 히든 해제 요청을 수신한 서버에 의하여 히든 해제가 수행된 예를 설명하기 위한 예시도이다.1 is a block diagram showing the configuration of a system for realizing a method for protecting portrait rights according to a preferred embodiment of the present invention.
Figure 2 is a block diagram for explaining the detailed configuration of the server shown in Figure 1;
FIG. 3 is a flowchart for explaining the operation flow of the server shown in FIG. 1, and shows the flow of a portrait rights protection method according to a preferred embodiment of the present invention.
4 is a flow chart showing the flow of an image processing method for protecting portrait rights according to a preferred embodiment of the present invention.
5 is a flowchart illustrating a process of detecting a plurality of pieces of user identification information by a server by way of example.
6 is a flowchart illustratively illustrating a process in which a hidden process for at least one portrait is performed by a server.
7 is an exemplary view illustrating a state in which a hidden process is performed for at least one portrait in an image captured by an image reproducing unit.
8 is an exemplary diagram for explaining an example in which hidden release is performed by a server that has received a hidden release request.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Since the present invention can make various changes and have various embodiments, specific embodiments are illustrated in the drawings and described in detail. However, this is not intended to limit the present invention to specific embodiments, and should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention.
제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.Terms such as first and second may be used to describe various components, but the components should not be limited by the terms. These terms are only used for the purpose of distinguishing one component from another. For example, a first element may be termed a second element, and similarly, a second element may be termed a first element, without departing from the scope of the present invention. The terms and/or include any combination of a plurality of related recited items or any of a plurality of related recited items.
어떤 구성요소가 다른 구성요소에 '연결되어' 있다거나 '접속되어' 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 '직접 연결되어' 있다거나 '직접 접속되어' 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. It is understood that when a component is referred to as being 'connected' or 'connected' to another component, it may be directly connected or connected to the other component, but other components may exist in the middle. It should be. On the other hand, when a component is referred to as being 'directly connected' or 'directly connected' to another component, it should be understood that no other component exists in the middle.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, '포함하다' 또는 '가지다' 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Terms used in this application are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly dictates otherwise. In this application, terms such as 'include' or 'have' are intended to designate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, but one or more other features It should be understood that the presence or addition of numbers, steps, operations, components, parts, or combinations thereof is not precluded.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which the present invention belongs. Terms such as those defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related art, and unless explicitly defined in the present application, they should not be interpreted in an ideal or excessively formal meaning. don't
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.Hereinafter, with reference to the accompanying drawings, preferred embodiments of the present invention will be described in more detail. In order to facilitate overall understanding in the description of the present invention, the same reference numerals are used for the same components in the drawings, and redundant descriptions of the same components are omitted.
도 1은 본 발명의 바람직한 실시예에 따른 초상권 보호 방법을 실현하기 위한 시스템의 구성을 나타내는 블록도이다.1 is a block diagram showing the configuration of a system for realizing a method for protecting portrait rights according to a preferred embodiment of the present invention.
도 1에 도시된 바와 같이, 서버(20)는 사용자 단말기(10), 영상 촬영부(30) 및 영상 재생부(40) 등과 연동할 수 있다. 상기 사용자 단말기(10)는 예컨대 사용자의 스마트폰, 노트패드, 노트북 등과 같은 포터블 디바이스일 수도 있고 또는 PC 등과 같은 고정형 디바이스일 수도 있다. 사용자는 사용자 단말기(10)는 사용하여 서버(20)에 접속 가능하며 영상 촬영부(30)에 의하여 촬영되는 영상에서 사용자를 공개할 것인지 비공개할 것인지의 여부를 사전에 설정할 수 있다.As shown in FIG. 1 , the
영상 촬영부(30)는 영상을 촬영하는 카메라를 포함할 수 있다. 상기 영상 촬영부(30)는 예컨대 CCTV, 블랙박스 등일 수 있다. 영상 재생부(40)는 영상 촬영부(30)에 의하여 촬영된 영상을 재생할 수 있다. 예를 들어, 상기 영상 재생부(40)는 CCTV 모니터링 시스템, 블랙박스 영상 재생부, CCTV나 블랙박스와 연결되는 보안 시스템, 홈 모니터링 시스템 등일 수 있으며, 또는, 도 1의 도시에서는 다르게 표시되었으나, 사용자 단말기(10)일 수도 있다.The
서버(20)는 사용자 단말기(10)로부터 사용자의 초상권 보호를 위한 설정과 관련된 정보들을 수신하고, 영상 촬영부(30)에 의하여 촬영된 영상에서 사용자의 초상이 존재할 경우 사용자 단말기(10)로부터 설정된 정보에 따라 사용자의 초상을 히든 처리할 수 있다.The
도 2는 도 1에 도시되어 있는 서버(20)의 상세한 구성을 설명하기 위한 블록도이다.FIG. 2 is a block diagram for explaining a detailed configuration of the
도 2에 도시된 바와 같이, 서버(20)는 정보 처리부(22), 영상 처리부(24) 및 데이터베이스(26) 등을 포함할 수 있다. 상기 각 부는 상호 간에 연동 가능하며 통신을 위한 인터페이스, 프로세서, 메모리, 입력부, 출력부 등을 포함하는 적어도 하나의 컴퓨터 디바이스를 기반으로 구현될 수 있다.As shown in FIG. 2 , the
정보 처리부(22)는 사용자 단말기(10)로부터 사용자에 대응하는 사용자 식별 정보, 상기 사용자의 초상 영상 정보 및 상기 사용자에 대응하는 초상 공개 여부 설정 정보를 수신하고, 수신된 상기 사용자 식별 정보, 상기 초상 영상 정보 및 상기 초상 공개 여부 설정 정보를 데이터베이스(26)에 저장할 수 있다.The
예를 들면, 정보 처리부(22)는 영상 재생부(40)로부터 히든 처리된 상기 사용자의 초상에 대한 정보 요청을 수신하고, 상기 정보 요청에 응답하여, 상기 사용자에 대응하는 사용자 식별 정보, 상기 사용자의 초상 영상 정보 및 상기 사용자에 대응하는 연락처 중 적어도 하나를 상기 영상 재생부(40)로 전송할 수도 있다. 또한 정보 처리부(22)는 상기 사용자 단말기(10)로부터 상기 사용자에 대응하는 연락처 정보를 수신하고, 연락처 정보를 기반으로, 상기 히든 처리의 수행 여부와 연관된 정보를 전송할 수도 있다.For example, the
영상 처리부(24)는 영상 촬영부(30)로부터 촬영된 영상을 수신하고, 상기 사용자의 초상 영상 정보를 기반으로 하여, 수신된 상기 영상 내의 객체 중 상기 사용자의 초상을 검출하고, 상기 초상 공개 여부 설정 정보를 기반으로 하여, 검출된 상기 사용자의 초상에 대한 히든 처리를 수행할 수 있다.The
예를 들면, 영상 처리부(24)는 상기 초상 공개 여부 설정 정보가 상기 사용자에 대응하는 초상을 공개하지 않음으로 설정된 경우, 상기 사용자의 초상을 보여지지 않도록 히든 처리를 수행하고, 상기 초상 공개 여부 설정 정보가 상기 사용자에 대응하는 초상을 공개함으로 설정된 경우, 상기 사용자의 초상에 대한 히든 처리를 수행하지 않을 수 있다. 또한 영상 처리부(24)는 상기 촬영된 영상에서 히든 처리된 상기 사용자의 초상의 부분을 상기 사용자 식별 정보와 연관시켜 상기 데이터베이스(26)에 저장할 수도 있다.For example, when the portrait disclosure setting information is set to not disclose the portrait corresponding to the user, the
도 3은 도 1에 도시된 서버(20)의 동작 흐름을 설명하기 위한 흐름도로서, 본 발명의 바람직한 실시예에 따른 초상권 보호 방법의 흐름을 나타내고 있다.FIG. 3 is a flowchart for explaining the operation flow of the
도 1 내지 도 3을 참조하면, 먼저 서버(20)는 사용자 단말기(10)로부터 사용자에 대응하는 사용자 식별 정보, 상기 사용자의 초상 영상 정보 및 상기 사용자에 대응하는 초상 공개 여부 설정 정보를 수신할 수 있다(단계:S1).1 to 3, the
상기 사용자 식별 정보는 사용자의 계정에 대응하는 ID일 수 있다. 상기 초상 영상 정보는 사용자의 초상을 촬영한 하나 또는 복수 개의 사진 또는 동영상 등일 수 있다. 상기 초상 영상 정보는 영상 촬영부(30)에 의하여 촬영된 영상에서 사용자를 식별하기 하기 위한 근거 데이터로서 사용될 수 있다.The user identification information may be an ID corresponding to the user's account. The portrait image information may be one or a plurality of photos or videos of a user's portrait. The portrait image information may be used as basis data for identifying a user in an image captured by the
상기 사용자에 대응하는 초상 공개 여부 설정 정보는 영상 촬영부(30)에 의하여 촬영된 영상에서 사용자의 초상을 공개할 것인지 비공개할 것인지의 여부를 설정하는 정보로서, 예컨대 "공개/비공개", "True/False", "Yes/No", "Non-Hidden/Hidden" 등과 같이 설정될 수 있다.The information for setting whether or not to disclose the portrait corresponding to the user is information for setting whether to disclose or not disclose the portrait of the user in the image captured by the
다음으로, 서버(20)는 수신된 사용자에 대응하는 사용자 식별 정보, 사용자의 초상 영상 정보 및 사용자에 대응하는 초상 공개 여부 설정 정보를 데이터베이스(26)에 저장할 수 있다(단계:S2).Next, the
한편, 영상 촬영부(30)는 영상을 촬영할 수 있으며 촬영된 영상에는 사용자의 소상이 포함되어 있을 수도 있다. 영상 촬영부(30)는 촬영된 영상을 서버(20)로 전송할 수 있으며, 서버(20)는 영상 촬영부(30)로부터 촬영된 영상을 수신할 수 있다(단계:S3).Meanwhile, the
다음으로, 서버(20)는 데이터베이스(26)에 저장되어 있으며 또는 인공지능에 의하여 학습되어 있는 사용자의 초상 영상 정보를 기반으로 하여, 수신된 상기 영상 내의 객체 중 상기 사용자의 초상을 검출할 수 있다(단계:S4).Next, the
서버(20)는 상기 초상 공개 여부 설정 정보를 기반으로 하여, 검출된 상기 사용자의 초상에 대한 히든 처리를 수행할 수 있다(단계:S5). 예를 들어, 상기 초상 공개 여부 설정 정보가 상기 사용자에 대응하는 초상을 공개하지 않음으로 설정된 경우, 서버(20)는 상기 사용자의 초상을 보여지지 않도록 히든 처리를 수행할 수 있다. 반면, 상기 초상 공개 여부 설정 정보가 상기 사용자에 대응하는 초상을 공개함으로 설정된 경우, 서버(20)는 상기 사용자의 초상에 대한 히든 처리를 수행하지 않을 수 있다.The
상기 상기 사용자의 초상에 대한 히든 처리는 촬영된 영상의 재생 시에 상기 사용자의 초상을 보여지지 않도록 가림 처리하는 것으로서, 예를 들어 모자이크 처리, 블록 처리 등일 수 있다.The hidden processing of the user's portrait is a process of covering the user's portrait so that the user's portrait is not displayed when a captured image is reproduced, and may be, for example, mosaic processing or block processing.
한편, 서버(20)는 사용자 단말기(10)로부터 사용자에 대응하는 연락처 정보를 수신하여 데이터베이스(26)에 사용자 식별 정보 등과 연관시켜 저장할 수 있으며 저장된 연락처 정보를 기반으로 히든 처리의 수행 여부와 연관된 정보를 전송함으로써 사용자에게 관련된 내용을 알려 줄 수 있다. 예를 들어, 상기 연락처는, 예컨대 사용자 단말기(10)가 모바일폰일 경우, 사용자 단말기(10)에 대응하는 전화번호일 수 있다. 서버(20)는 문자나 메신저, 음성 안내 등을 통하여 사용자 단말기(10)로, 예컨대 "XX시 XX동에서 촬영된 CCTV 영상에 귀하가 포함되어 있어 모자이크 처리하였습니다" 등과 같은 처리 결과를 알려줄 수 있다.Meanwhile, the
한편, 서버(20)는 영상 재생부(40)로부터 히든 처리된 상기 사용자의 초상에 대한 정보 요청을 수신할 수 있다. 이 경우 서버(20)는 상기 정보 요청에 응답하여, 상기 사용자에 대응하는 사용자 식별 정보, 상기 사용자의 초상 영상 정보 및 상기 사용자에 대응하는 연락처 중 적어도 하나를 상기 영상 재생부(40)로 전송할 수 있다.Meanwhile, the
예를 들어, 도난 사건 수사 중 영상 재생부(40)에서 CCTV를 확인하기 위하여 촬영 영상을 재생하던 중 사용자와 범인과의 연관성 여부를 확인하기 위하여 사용자의 신원을 확인하고자 한다면 영상 재생부(40)는 사용자의 초상에 대한 정보 요청을 전송하고, 서버(20)는 그 요청에 응답하여 상기 사용자에 대응하는 사용자 식별 정보, 상기 사용자의 초상 영상 정보 및 상기 사용자에 대응하는 연락처 등과 같은 정보를 영상 재생부(40)로 전달하는 것이다.For example, if you want to check the identity of the user in order to check the relationship between the user and the criminal while playing the captured video to check the CCTV in the
한편, 서버(20)는 상기 촬영된 영상에서 히든 처리된 상기 사용자의 초상의 부분을 상기 사용자 식별 정보와 연관시켜 상기 데이터베이스(26)에 저장할 수 있다. 예를 들면, 히든 처리 후에는 사용자의 초상 부분이 누구를 가린 부분인지 육안으로 알 수 없기 때문에 만약 사용자를 확인하여야 하는 경우가 발생할 때를 대비하여 서버(20)는 히든 처리된 사용자의 초상 부분에 사용자 식별 정보를 연관시켜 놓는 것이다.Meanwhile, the
도 4는 본 발명의 바람직한 실시예에 따른 초상권 보호를 위한 영상 처리 방법의 흐름을 나타내는 흐름도이다. 이하에서는, 복수 개의 초상이 촬영된 영상에서 개인 별 초상을 공개 또는 비공개하는 방법에 대하여 설명하기로 한다.4 is a flow chart showing the flow of an image processing method for protecting portrait rights according to a preferred embodiment of the present invention. Hereinafter, a method of disclosing or disclosing a portrait of an individual in an image in which a plurality of portraits are photographed will be described.
도 4에 도시된 바와 같이, 서버(20)는 인터페이스를 통하여 영상 촬영부(30)로부터 촬영된 영상을 수신할 수 있다(단계:S11). 이때, 촬영된 영상에는 복수 개의 사용자에 대응하는 초상이 포함되어 있다고 가정할 수 있다. 그러면 서버(20)의 프로세서는 상기 촬영된 영상 내에서 복수 개의 초상을 식별할 수 있다(단계:S12). 다음으로, 서버(20)는 식별된 상기 복수 개의 초상에 대응하는 복수 개의 사용자 식별 정보를 검출할 수 있다(단계:S13).As shown in FIG. 4 , the
도 5는 서버(20)에 의하여 복수 개의 사용자 식별 정보를 검출하는 과정을 예시적으로 나타내는 흐름도이다.5 is a flowchart illustrating a process of detecting a plurality of pieces of user identification information by the
도 5를 참조하면, 예를 들어, 서버(20)는 사용자 별 초상 영상 정보를 저장하고 있는 데이터베이스(26)를 조회하여 식별된 복수 개의 초상과 매칭되는 복수 개의 사용자의 초상 영상 정보를 검출할 수 있다(단계:S21). 이어서 서버(20)는 검출된 복수 개의 사용자의 초상 영상 정보에 대응하는 복수 개의 사용자 식별 정보를 검출할 수 있다(단계:S22). 상기 사용자 별 초상 영상 정보는 사용자 별 사진 및 동영상 중 적어도 하나일 수 있다.Referring to FIG. 5 , for example, the
다음으로, 서버(20)는 검출된 복수 개의 사용자 식별 정보에 대응하는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 적어도 하나의 초상에 대한 히든 처리를 수행할 수 있다(단계:S14).Next, the
도 6은 서버(20)에 의하여 적어도 하나의 초상에 대한 히든 처리가 수행되는 과정을 예시적으로 설명하기 위한 흐름도이다. 도 6에 도시된 바와 같이, 서버(20)는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 상기 복수 개의 초상 중 초상을 공개하지 않음으로 설정된 적어도 하나의 초상을 검출할 수 있다(단계:S31). 이어서 서버(20)는 검출된 상기 적어도 하나의 초상에 대하여 히든 처리를 수행할 수 있다(단계:S32).FIG. 6 is a flowchart for illustratively explaining a process of performing hidden processing on at least one portrait by the
상기 상기 사용자의 초상에 대한 히든 처리는 촬영된 영상의 재생 시에 상기 사용자의 초상을 보여지지 않도록 가림 처리하는 것으로서, 예를 들어 모자이크 처리, 블록 처리 등일 수 있다.The hidden processing of the user's portrait is a process of covering the user's portrait so that the user's portrait is not displayed when a captured image is reproduced, and may be, for example, mosaic processing or block processing.
도 7은 영상 재생부(40)에 의하여 촬영된 영상에서 적어도 하나의 초상에 대한 히든 처리가 수행된 상태를 예시적으로 나타내는 예시도이다.7 is an exemplary view illustrating a state in which a hidden process is performed for at least one portrait in an image captured by the
도 7에 도시된 바와 같이, 촬영된 영상에는 4명의 사용자의 초상, 예를 들어, 제 1 사용자의 초상(U1), 제 2 사용자의 초상(U2), 제 3 사용자의 초상(U3), 제 4 사용자의 초상(U4)이 포함되어 있다.As shown in FIG. 7, the captured images include portraits of four users, for example, portraits of the first user (U1), portraits of the second user (U2), portraits of the third user (U3), 4 The user's portrait (U4) is included.
이중 제 1 사용자에 대응하는 초상 공개 여부 설정 정보 및 제 4 사용자에 대응하는 초상 공개 여부 설정 정보는 초상을 공개해도 상관 없음이고, 제 2 사용자에 대응하는 초상 공개 여부 설정 정보 및 제 3 사용자에 대응하는 초상 공개 여부 설정 정보는 초상을 공개하지 않음으로 설정되어 있다고 가정하면, 도 7에 도시된 예에서와 같이, 제 1 및 제 4 사용자의 초상은 공개되어 있는 반면 제 2 및 제 3 사용자의 초상은 모자이크 처리되어 재생될 수 있다.Among them, the portrait disclosure setting information corresponding to the first user and the portrait disclosure setting information corresponding to the fourth user indicate that the portrait may be disclosed, and the portrait disclosure setting information corresponding to the second user and the portrait disclosure setting information corresponding to the third user. Assuming that the portrait disclosure setting information is set to not disclose the portrait, as in the example shown in FIG. 7, the portraits of the first and fourth users are public, while the portraits of the second and third users can be reproduced after being mosaic-processed.
한편, 서버(20)는 영상 재생부(40)로부터 히든 처리된 초상에 대한 히든 해제 요청을 수신할 수 있다. 서버(20)는 상기 정보 요청에 응답하여, 히든 해제 요청된 초상에 대한 히든 처리를 해제하여 보여지도록 할 수 있다.Meanwhile, the
도 8은 히든 해제 요청을 수신한 서버(20)에 의하여 히든 해제가 수행된 예를 설명하기 위한 예시도이다.8 is an exemplary diagram for explaining an example in which hidden release is performed by the
도 8을 참조하면, 예를 들면, 도 7에 도시된 재생 영상을 확인하던 제 3 사용자가 사용자가 히든 처리된 자신의 모습을 확인하고 싶어 제 3 사용자 단말기를 사용하여 이리 설정된 패스워드를 입력하면 히든 해제 요청이 서버(20)로 전달될 수 있다.Referring to FIG. 8, for example, when a third user checking the playback video shown in FIG. A release request may be transmitted to the
그러면 서버(20)는 제 3 사용자 단말기로부터의 히든 해제 요청에 따라 서버(20)는 상기 정보 요청에 응답하여, 히든 해제 요청된 초상에 대한 히든 처리를 해제하여 보여지도록 할 수 있다. 따라서, 도 8에 도시된 바와 같이, 제 3 사용자 단말기로부터의 인증된 요청에 따라 촬영된 영상에서 제 3 사용자의 초상(U3)이 히든 해제되어 정상적으로 표시되게 된다.Then, in response to the hidden release request from the third user terminal, the
한편, 서버(20)는 영상 재생부(40)로부터 히든 처리된 초상에 대한 정보 요청을 수신할 수 있다. 서버(20)는 상기 정보 요청에 대응하여, 상기 히든 처리된 초상에 대응하는 사용자 식별 정보, 상기 히든 처리된 조상에 대응하는 초상 영상 정보 및 상기 히든 처리된 초상에 대응하는 연락처 중 적어도 하나를 상기 영상 재생부(40)로 전송할 수 있다.Meanwhile, the
한편, 서버(20)는 상기 촬영된 영상에서 히든 처리된 상기 사용자 별 초상의 부분을 대응되는 상기 사용자 식별 정보와 연관시켜 상기 데이터베이스(26)에 저장할 수 있다. 예를 들면, 히든 처리 후에는 사용자 별 초상 부분이 누구를 가린 부분인지 알 수 없기 때문에 만약 특정 사용자를 확인하여야 하는 경우가 발생할 때를 대비하여 서버(20)는 히든 처리된 사용자의 초상 부분에 사용자 식별 정보를 연관시켜 놓는 것이다.Meanwhile, the
이상 본 발명에 대하여 그 바람직한 실시예를 예시하여 설명하였지만 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구 범위에 기재된 본 발명의 기술적 사항 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시켜 실시할 수 있음을 이해할 수 있을 것이다. 따라서, 본 발명의 앞으로의 실시예들의 변경은 본 발명의 기술을 벗어날 수 없을 것이다.Although the present invention has been described by exemplifying preferred embodiments, those skilled in the art will variously modify and change the present invention within the scope not departing from the technical details and scope of the present invention described in the claims below. You will understand that this can be done. Accordingly, changes to future embodiments of the present invention will not deviate from the technology of the present invention.
10 : 사용자 단말기
20 : 서버
22 : 정보 처리부
24 : 영상 처리부
26 : 데이터베이스
30 : 영상 촬영부
40 : 영상 재생부10: user terminal
20: server
22: information processing unit
24: image processing unit
26: database
30: video recording unit
40: video playback unit
Claims (25)
영상 촬영부로부터 촬영된 영상을 수신하는 단계;
상기 촬영된 영상 내에서 복수 개의 초상을 식별하는 단계;
식별된 상기 복수 개의 초상에 대응하는 복수 개의 사용자 식별 정보를 검출하는 단계;
검출된 복수 개의 사용자 식별 정보에 대응하는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 적어도 하나의 초상에 대한 히든 처리를 수행하는 단계를 포함하고,
각각의 사용자 단말기로부터 상기 사용자 식별 정보에 대응하는 연락처 정보를 수신하고, 수신된 연락처 정보를 기반으로 하여, 사용자의 초상에 대한 희든 처리를 수행한 후에, 촬영된 상기 영상에 상기 사용자가 포함되었고 상기 영상에 포함된 상기 사용자의 초상에 대한 희든 처리가 수행되었음을 나타내는 처리 결과 알림을 상기 사용자 식별 정보에 대응하는 연락처 정보에 대응하는 문자, 메신저 및 음성 안내 중 어느 하나를 통하여 상기 사용자에 대응하는 사용자 단말기로 전송하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 방법.
Using an image processing device,
Receiving a photographed image from an image capturing unit;
identifying a plurality of portraits in the photographed image;
detecting a plurality of pieces of user identification information corresponding to the identified plurality of portraits;
performing hidden processing on at least one portrait based on a plurality of portrait disclosure setting information corresponding to the detected plurality of user identification information;
After receiving contact information corresponding to the user identification information from each user terminal and performing white processing on the user's portrait based on the received contact information, the user is included in the captured image and the A user terminal corresponding to the user sends notification of a processing result indicating that the image of the user included in the image has been processed through any one of text, messenger, and voice guidance corresponding to the contact information corresponding to the user identification information. An image processing method for protecting portrait rights, characterized in that transmitted to.
상기 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 상기 복수 개의 초상 중 초상을 공개하지 않음으로 설정된 적어도 하나의 초상을 검출하는 단계; 및
검출된 상기 적어도 하나의 초상에 대하여 히든 처리를 수행하는 단계를 포함하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 방법.
The method of claim 1, wherein the performing of the hidden processing comprises:
detecting at least one portrait set to not disclose a portrait from among the plurality of portraits, based on the plurality of portrait disclosure setting information; and
An image processing method for protection of portrait rights comprising the step of performing hidden processing on the at least one detected likeness.
사용자 별 초상 영상 정보를 저장하고 있는 데이터베이스를 조회하여 식별된 복수 개의 초상과 매칭되는 복수 개의 사용자의 초상 영상 정보를 검출하는 단계; 및
검출된 복수 개의 사용자의 초상 영상 정보에 대응하는 복수 개의 사용자 식별 정보를 검출하는 단계를 포함하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 방법.
The method of claim 1, wherein detecting the plurality of pieces of user identification information comprises:
detecting portrait image information of a plurality of users matching the identified plurality of portraits by querying a database storing portrait image information for each user; and
An image processing method for protection of portrait rights comprising the step of detecting a plurality of pieces of user identification information corresponding to the detected portrait image information of a plurality of users.
4. The image processing method of claim 3, wherein the portrait image information for each user is at least one of a photo and a video for each user.
상기 적어도 하나의 초상이 보여지지 않도록 모자이크 처리 또는 블록 처리 하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 방법.
The method of claim 1, wherein the hidden processing of the at least one portrait,
An image processing method for protecting portrait rights, characterized in that mosaic processing or block processing is performed so that the at least one portrait is not shown.
상기 히든 해제 요청에 응답하여, 히든 해제 요청된 초상에 대한 히든 처리를 해제하여 보여지도록 하는 단계를 더 포함하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 방법.
The method of claim 1 , further comprising: receiving a hidden release request for a hidden-processed portrait from an image reproducing unit; and
In response to the hidden release request, the image processing method for protecting portrait rights further comprising the step of canceling the hidden processing for the portrait for which the hidden release has been requested so that the portrait can be displayed.
상기 정보 요청에 대응하여, 상기 히든 처리된 초상에 대응하는 사용자 식별 정보, 상기 히든 처리된 조상에 대응하는 초상 영상 정보 및 상기 히든 처리된 초상에 대응하는 연락처 중 적어도 하나를 상기 영상 재생부로 전송하는 단계를 더 포함하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 방법.
The method of claim 1 , further comprising: receiving a request for information about the hidden-processed portrait from an image reproducing unit; and
In response to the information request, at least one of user identification information corresponding to the hidden-processed portrait, portrait image information corresponding to the hidden-processed ancestor, and contact information corresponding to the hidden-processed portrait is transmitted to the image reproducing unit. An image processing method for protecting portrait rights, characterized in that it further comprises a step.
The image processing method according to claim 1, further comprising the step of associating a part of the image that has been hidden in the captured image with the corresponding user identification information and storing it in a database.
상기 촬영된 영상 내에서 복수 개의 초상을 식별하고, 식별된 상기 복수 개의 초상에 대응하는 복수 개의 사용자 식별 정보를 검출하고, 검출된 복수 개의 사용자 식별 정보에 대응하는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 적어도 하나의 초상에 대한 히든 처리를 수행하는 프로세서를 포함하고,
각각의 사용자 단말기로부터 상기 사용자 식별 정보에 대응하는 연락처 정보를 수신하고, 사용자의 초상에 대한 희든 처리를 수행한 후에, 촬영된 상기 영상에 상기 사용자가 포함되었고 상기 영상에 포함된 상기 사용자의 초상에 대한 희든 처리가 수행되었음을 나타내는 처리 결과 알림을 상기 사용자 식별 정보에 대응하는 연락처 정보에 대응하는 문자, 메신저 및 음성 안내 중 어느 하나를 통하여 상기 사용자에 대응하는 사용자 단말기로 전송하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 장치.
An interface for receiving the captured image from the image capturing unit; and
Identifying a plurality of portraits in the captured image, detecting a plurality of user identification information corresponding to the identified plurality of portraits, and based on the plurality of portrait disclosure setting information corresponding to the detected plurality of user identification information and a processor that performs hidden processing on at least one portrait,
After receiving contact information corresponding to the user identification information from each user terminal and performing white-processing on the user's portrait, the user was included in the captured image and the user's portrait included in the image A processing result notification indicating that the process has been performed is transmitted to a user terminal corresponding to the user through any one of text, messenger, and voice guidance corresponding to contact information corresponding to the user identification information. Image processing device for.
상기 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 상기 복수 개의 초상 중 초상을 공개하지 않음으로 설정된 적어도 하나의 초상을 검출하고, 검출된 상기 적어도 하나의 초상에 대하여 히든 처리를 수행하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 장치.
The method of claim 9, wherein the processor,
Based on the plurality of portrait disclosure setting information, at least one portrait set to not be disclosed among the plurality of portraits is detected, and a hidden process is performed on the detected at least one portrait. image processing device for protection of portrait rights.
사용자 별 초상 영상 정보를 저장하고 있는 데이터베이스를 조회하여 식별된 복수 개의 초상과 매칭되는 복수 개의 사용자의 초상 영상 정보를 검출하고, 검출된 복수 개의 사용자의 초상 영상 정보에 대응하는 복수 개의 사용자 식별 정보를 검출하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 장치.
The method of claim 9, wherein the processor,
A database storing portrait image information for each user is searched, portrait image information of a plurality of users matching the identified plurality of portraits is detected, and a plurality of user identification information corresponding to the detected portrait image information of the plurality of users is retrieved. An image processing device for protection of portrait rights, characterized in that for detecting.
12. The image processing apparatus of claim 11, wherein the portrait image information for each user is at least one of a photo and a moving picture for each user.
상기 적어도 하나의 초상이 보여지지 않도록 모자이크 처리 또는 블록 처리 하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 장치.
The method of claim 9, wherein the hidden processing of the at least one portrait,
An image processing device for protection of portrait rights, characterized in that mosaic processing or block processing is performed so that the at least one portrait is not shown.
영상 재생부로부터 히든 처리된 초상에 대한 히든 해제 요청을 수신하고,
상기 히든 해제 요청에 응답하여, 히든 해제 요청된 초상에 대한 히든 처리를 해제하여 보여지도록 하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 장치.
The method of claim 9, wherein the processor,
Receiving a hidden release request for the hidden-processed portrait from the image reproducing unit;
An image processing device for protection of portrait rights, characterized in that in response to the hidden release request, the hidden processing for the portrait requested for the hidden release is released and displayed.
영상 재생부로부터 히든 처리된 초상에 대한 정보 요청을 수신하고, 상기 정보 요청에 대응하여, 상기 히든 처리된 초상에 대응하는 사용자 식별 정보, 상기 히든 처리된 조상에 대응하는 초상 영상 정보 및 상기 히든 처리된 초상에 대응하는 연락처 중 적어도 하나를 상기 영상 재생부로 전송하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 장치.
The method of claim 9, wherein the processor,
Receives a request for information on the hidden-processed portrait from the image reproducing unit, and in response to the information request, user identification information corresponding to the hidden-processed portrait, portrait image information corresponding to the hidden-processed ancestor, and the hidden-processed portrait An image processing device for protection of portrait rights, characterized in that for transmitting at least one of the contact information corresponding to the portrait to the image reproducing unit.
상기 촬영된 영상에서 히든 처리된 초상의 부분을 대응되는 상기 사용자 식별 정보와 연관시켜 데이터베이스에 저장하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 장치.
The method of claim 9, wherein the processor,
An image processing device for protection of portrait rights, characterized in that the part of the portrait that has been hidden in the captured image is associated with the corresponding user identification information and stored in a database.
상기 영상 촬영부로부터 촬영된 영상을 수신하고, 상기 촬영된 영상 내에서 복수 개의 초상을 식별하고, 식별된 상기 복수 개의 초상에 대응하는 복수 개의 사용자 식별 정보를 검출하고, 검출된 복수 개의 사용자 식별 정보에 대응하는 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 적어도 하나의 초상에 대한 히든 처리를 수행하는 영상 처리 장치를 포함하고,
각각의 사용자 단말기로부터 상기 사용자 식별 정보에 대응하는 연락처 정보를 수신하고, 사용자의 초상에 대한 희든 처리를 수행한 후에, 촬영된 상기 영상에 상기 사용자가 포함되었고 상기 영상에 포함된 상기 사용자의 초상에 대한 희든 처리가 수행되었음을 나타내는 처리 결과 알림을 상기 사용자 식별 정보에 대응하는 연락처 정보에 대응하는 문자, 메신저 및 음성 안내 중 어느 하나를 통하여 상기 사용자에 대응하는 사용자 단말기로 전송하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 시스템.
video recording unit; and
Receiving an image captured by the image capture unit, identifying a plurality of portraits in the captured image, detecting a plurality of user identification information corresponding to the identified plurality of portraits, and detecting a plurality of user identification information An image processing device that performs hidden processing on at least one portrait based on a plurality of portrait disclosure setting information corresponding to
After receiving contact information corresponding to the user identification information from each user terminal and performing white-processing on the user's portrait, the user was included in the captured image and the user's portrait included in the image A processing result notification indicating that the process has been performed is transmitted to a user terminal corresponding to the user through any one of text, messenger, and voice guidance corresponding to contact information corresponding to the user identification information. image processing system for
상기 복수 개의 초상 공개 여부 설정 정보를 기반으로 하여, 상기 복수 개의 초상 중 초상을 공개하지 않음으로 설정된 적어도 하나의 초상을 검출하고, 검출된 상기 적어도 하나의 초상에 대하여 히든 처리를 수행하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 시스템.
The method of claim 17, wherein the image processing device,
Based on the plurality of portrait disclosure setting information, at least one portrait set to not be disclosed among the plurality of portraits is detected, and a hidden process is performed on the detected at least one portrait. image processing system for protection of portrait rights.
사용자 별 초상 영상 정보를 저장하고 있는 데이터베이스를 조회하여 식별된 복수 개의 초상과 매칭되는 복수 개의 사용자의 초상 영상 정보를 검출하고, 검출된 복수 개의 사용자의 초상 영상 정보에 대응하는 복수 개의 사용자 식별 정보를 검출하는 것을 특징으로 하는 초상권 보호를 위한 영상 처리 시스템.
The method of claim 17, wherein the image processing device,
A database storing portrait image information for each user is searched, portrait image information of a plurality of users matching the identified plurality of portraits is detected, and a plurality of user identification information corresponding to the detected portrait image information of the plurality of users is retrieved. Image processing system for protection of portrait rights, characterized in that for detecting.
20. The image processing system according to claim 19, wherein the portrait image information for each user is at least one of a photo and a video for each user.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/KR2021/015760 WO2022098074A1 (en) | 2020-11-06 | 2021-11-03 | Method, device, and system for protecting portrait rights |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20200147210 | 2020-11-06 | ||
KR1020200147210 | 2020-11-06 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20220061794A KR20220061794A (en) | 2022-05-13 |
KR102555680B1 true KR102555680B1 (en) | 2023-07-17 |
Family
ID=81583151
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200189586A KR102555680B1 (en) | 2020-11-06 | 2020-12-31 | Method, Apparatus and System for Image Processing For Protecting Portrait Rights |
KR1020200189621A KR102525077B1 (en) | 2020-11-06 | 2020-12-31 | Method, Apparatus and System for Voice Processing Based on Setting |
KR1020200189616A KR102442427B1 (en) | 2020-11-06 | 2020-12-31 | Method, Apparatus and System for Voice Processing |
KR1020200189583A KR102502105B1 (en) | 2020-11-06 | 2020-12-31 | Method, Apparatus and System for Protecting Portrait Rights |
Family Applications After (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200189621A KR102525077B1 (en) | 2020-11-06 | 2020-12-31 | Method, Apparatus and System for Voice Processing Based on Setting |
KR1020200189616A KR102442427B1 (en) | 2020-11-06 | 2020-12-31 | Method, Apparatus and System for Voice Processing |
KR1020200189583A KR102502105B1 (en) | 2020-11-06 | 2020-12-31 | Method, Apparatus and System for Protecting Portrait Rights |
Country Status (1)
Country | Link |
---|---|
KR (4) | KR102555680B1 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102598080B1 (en) | 2023-03-21 | 2023-11-06 | (주)노웨어소프트 | Method and apparatus for filtering harmful content using artificial intelligence-based sentiment analysis |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101297295B1 (en) * | 2013-02-14 | 2013-08-14 | 우원소프트 주식회사 | Security control system by face recognition |
KR101859433B1 (en) * | 2017-02-14 | 2018-05-21 | 에스케이텔레콤 주식회사 | Method for processing of mosaic image and apparatus thereof |
KR102123248B1 (en) * | 2020-01-30 | 2020-06-16 | 김선진 | Real-time image processing system based on face recognition for protecting privacy |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101528934B1 (en) | 2009-02-18 | 2015-06-15 | 주식회사 엘지유플러스 | System and method for providing cctv image information |
WO2015005679A1 (en) * | 2013-07-09 | 2015-01-15 | 주식회사 윌러스표준기술연구소 | Voice recognition method, apparatus, and system |
KR102092756B1 (en) * | 2014-01-29 | 2020-03-24 | 삼성전자주식회사 | User terminal Device and Method for secured communication therof |
KR102106898B1 (en) * | 2018-06-18 | 2020-05-06 | 주식회사 쓰임기술 | Tracking method and system using a database of a person's faces |
KR102113879B1 (en) * | 2018-12-19 | 2020-05-26 | 주식회사 공훈 | The method and apparatus for recognizing speaker's voice by using reference database |
KR102356623B1 (en) * | 2019-02-01 | 2022-01-28 | 삼성전자주식회사 | Virtual assistant electronic device and control method thereof |
-
2020
- 2020-12-31 KR KR1020200189586A patent/KR102555680B1/en active IP Right Grant
- 2020-12-31 KR KR1020200189621A patent/KR102525077B1/en active IP Right Grant
- 2020-12-31 KR KR1020200189616A patent/KR102442427B1/en active IP Right Grant
- 2020-12-31 KR KR1020200189583A patent/KR102502105B1/en active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101297295B1 (en) * | 2013-02-14 | 2013-08-14 | 우원소프트 주식회사 | Security control system by face recognition |
KR101859433B1 (en) * | 2017-02-14 | 2018-05-21 | 에스케이텔레콤 주식회사 | Method for processing of mosaic image and apparatus thereof |
KR102123248B1 (en) * | 2020-01-30 | 2020-06-16 | 김선진 | Real-time image processing system based on face recognition for protecting privacy |
Also Published As
Publication number | Publication date |
---|---|
KR20220061794A (en) | 2022-05-13 |
KR20220061795A (en) | 2022-05-13 |
KR102502105B1 (en) | 2023-02-23 |
KR20220061793A (en) | 2022-05-13 |
KR102442427B1 (en) | 2022-09-14 |
KR102525077B1 (en) | 2023-04-24 |
KR20220061796A (en) | 2022-05-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10062406B2 (en) | Video masking processing method and apparatus | |
US11336968B2 (en) | Method and device for generating content | |
US9350914B1 (en) | Methods of enforcing privacy requests in imaging systems | |
EP1914961B1 (en) | Mobile information terminal apparatus | |
US20060104483A1 (en) | Wireless digital image capture device with biometric readers | |
KR102237086B1 (en) | Apparatus and method for controlling a lobby phone that enables video surveillance through a communication terminal that can use a 5G mobile communication network based on facial recognition technology | |
US9742990B2 (en) | Image file communication system with tag information in a communication network | |
JP2009116600A (en) | Entering and leaving management system | |
WO2016169267A1 (en) | Image sharing method and device | |
JP7553601B2 (en) | METHOD, DEVICE AND SYSTEM FOR PROTECTING PRIVACY - Patent application | |
KR100917453B1 (en) | Device and method for processing information of image | |
Senior et al. | Privacy protection and face recognition | |
KR102555680B1 (en) | Method, Apparatus and System for Image Processing For Protecting Portrait Rights | |
CN111400768A (en) | Face and behavior recognition-based encryption sharing platform and encryption sharing method | |
CN111832458A (en) | Anti-theft method and system | |
WO2017157435A1 (en) | A method and system for visual privacy protection for mobile and wearable devices | |
CN115086478A (en) | Terminal information confidentiality method and device, electronic equipment and storage medium | |
WO2022098074A1 (en) | Method, device, and system for protecting portrait rights | |
CN113420613A (en) | Identity verification method based on face recognition, face recognition system and associated equipment | |
CN117932657B (en) | Album intelligent arrangement and privacy protection method | |
JP7564916B1 (en) | Information processing device, information processing method, and information processing program | |
WO2024053183A1 (en) | Person search device and person search method | |
KR102524271B1 (en) | System and method for video integrity verification and original recovery based on Blockchain network | |
JP2006185255A (en) | Video management system | |
US11763042B2 (en) | Computer program for preventing information spill displayed on display device and security service using the same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
X701 | Decision to grant (after re-examination) | ||
GRNT | Written decision to grant |