KR102123248B1 - 프라이버시 보호를 위한 얼굴인식 기반 실시간 영상처리 시스템 - Google Patents
프라이버시 보호를 위한 얼굴인식 기반 실시간 영상처리 시스템 Download PDFInfo
- Publication number
- KR102123248B1 KR102123248B1 KR1020200011340A KR20200011340A KR102123248B1 KR 102123248 B1 KR102123248 B1 KR 102123248B1 KR 1020200011340 A KR1020200011340 A KR 1020200011340A KR 20200011340 A KR20200011340 A KR 20200011340A KR 102123248 B1 KR102123248 B1 KR 102123248B1
- Authority
- KR
- South Korea
- Prior art keywords
- face
- list
- real
- image processing
- image data
- Prior art date
Links
- 238000012545 processing Methods 0.000 title claims abstract description 86
- 238000000034 method Methods 0.000 claims abstract description 43
- 238000012806 monitoring device Methods 0.000 claims abstract description 27
- 238000012544 monitoring process Methods 0.000 claims abstract description 10
- 238000013503 de-identification Methods 0.000 claims abstract description 8
- 238000013473 artificial intelligence Methods 0.000 claims abstract description 5
- 230000003044 adaptive effect Effects 0.000 claims description 4
- 238000004891 communication Methods 0.000 claims description 4
- 238000010295 mobile communication Methods 0.000 claims description 4
- 238000000605 extraction Methods 0.000 claims 1
- 238000005516 engineering process Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 210000004072 lung Anatomy 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- G06K9/00221—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/27—Server based end-user applications
- H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
- H04N21/6181—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via a mobile phone network
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
본 발명은 실시간 영상처리 시스템에 관한 것으로서, 카메라를 구비하며, 상기 카메라를 통해 사진 또는 실시간 영상 데이터를 생성하기 위한 촬영 장치, 상기 촬영 장치와 연동되어 상기 촬영 장치에서 생성된 사진 또는 실시간 영상 데이터를 디스플레이하며, 모니터링을 위한 화면을 디스플레이하는 모니터링 장치, 미리 설정된 촬영에 동의한 사용자의 얼굴이 저장된 리스트인 촬영 동의 리스트가 저장되어 있는 데이터베이스 및 상기 촬영 장치에서 생성된 실시간 영상 데이터를 송출하여 스트리밍 방송을 제공하되, 인공지능 알고리즘을 이용하여 실시간 영상 데이터에서 얼굴을 인식하고, 인식된 얼굴을 상기 촬영 동의 리스트와 비교하여, 상기 촬영 동의 리스트에 저장된 얼굴과 동일한 얼굴을 제외한 나머지 얼굴 영역을 비식별화 처리하고, 해당 얼굴 영역 객체를 객체 추적하여 실시간 영상 데이터를 송출하는 영상처리 서버를 포함한다. 본 발명에 의하면, 실시간 스트리밍 방송에서 실시간으로 모자이크, 블러 처리 등의 비식별화 처리 기능을 지원하기 때문에, 촬영에 동의하지 않은 사람의 초상권 침해를 방지할 수 있는 효과가 있다.
Description
본 발명은 실시간 영상처리 기술에 관한 것으로서, 더욱 상세하게는 프라이버시 보호를 위해 실시간으로 영상에서 얼굴을 비식별화하는 기술에 관한 것이다.
최근 실시간 영상 플랫폼 산업이 확대되면서, 기존의 게임, 일상/토크 등 실내 콘텐츠를 넘어 실시간 개인 방송, 축구 거리 응원, 시위 현장 중계 등 야외 촬영 및 대규모 현장을 배경으로 방송이 진행되는 경우가 증가하고 있다.
이에 따라, 출연자의 동의를 받지 않고 진행되는 실시간 방송으로 인해, 촬영에 동의하지 않은 비(非) 출연자들의 프라이버시 침해 논란이 지속되고 있다. 예를 들어, 출연자의 동의없이 번화가, 관광지 등에서 진행되는 방송으로 인한 초상권 침해 사례, 국제적 경기에서 진행되는 방송에서 관람객의 초상권이 침해되는 사례 등이 그 대표적인 사례라고 할 수 있다.
이처럼 실시간 방송은 온라인에 업로드(upload)되고 스트리밍(streaming)되는 콘텐츠로서, 확산이 빠르고, 영구적인 삭제가 어렵다는 특징이 있기 때문에 촬영 시에 촬영 미동의자에 대한 초상권을 포함하는 프라이버시 보호가 필수적이다. 하지만, 현재 실시간으로 방송되는 생방송에 적용할 수 있는 편집 기술이 부족한 실정이며, 이에 따라 초상권 등 개인의 프라이버시 보호가 제대로 이루어지지 않는다는 문제점이 있다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 촬영에 동의하지 않은 사람의 초상권을 보호하여 프라이버시 침해를 방지하기 위하여, 촬영에 동의하지 않은 사람의 얼굴을 비식별화 처리하는 얼굴인식 기반 실시간 영상처리 시스템을 제공하는데 그 목적이 있다.
본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
이와 같은 목적을 달성하기 위한 본 발명의 실시간 영상처리 시스템은 카메라를 구비하며, 상기 카메라를 통해 사진 또는 실시간 영상 데이터를 생성하기 위한 촬영 장치, 상기 촬영 장치와 연동되어 상기 촬영 장치에서 생성된 사진 또는 실시간 영상 데이터를 디스플레이하며, 모니터링을 위한 화면을 디스플레이하는 모니터링 장치, 미리 설정된 촬영에 동의한 사용자의 얼굴이 저장된 리스트인 촬영 동의 리스트가 저장되어 있는 데이터베이스 및 상기 촬영 장치에서 생성된 실시간 영상 데이터를 송출하여 스트리밍 방송을 제공하되, 인공지능 알고리즘을 이용하여 실시간 영상 데이터에서 얼굴을 인식하고, 인식된 얼굴을 상기 촬영 동의 리스트와 비교하여, 상기 촬영 동의 리스트에 저장된 얼굴과 동일한 얼굴을 제외한 나머지 얼굴 영역을 비식별화 처리하고, 해당 얼굴 영역 객체를 객체 추적하여 실시간 영상 데이터를 송출하는 영상처리 서버를 포함한다.
상기 영상처리 서버는 스트리밍 방송을 제공하기 전에 상기 카메라에서 촬영된 사진 또는 실시간 영상 데이터에서 얼굴을 인식하고, 인식된 얼굴 영역들의 리스트인 얼굴 리스트가 화면의 일부에 표시되는 모니터링 화면이 상기 모니터링 장치에 디스플레이되도록 한다.
그리고, 상기 모니터링 장치에서 화면의 일부에 표시된 얼굴 리스트 중에서 사용자의 조작에 의해 선택된 얼굴 영역을 삭제하는 리스트 편집 과정을 수행하고, 상기 리스트 편집 과정이 완료되면, 완료된 얼굴 리스트 정보를 상기 영상처리 서버에 전송한다.
그리고, 상기 영상처리 서버는 수신한 얼굴 리스트 정보에 따라 확정된 얼굴 영역들의 리스트를 촬영 동의 리스트로 생성하여 상기 데이터베이스에 저장한다.
상기 영상처리 서버는 유무선 통신망을 통해 외부의 이동통신 단말로부터 사진 데이터를 수신하면, 수신된 사진 데이터에서 얼굴을 인식하고, 인식된 얼굴 영역들의 리스트가 화면의 일부에 표시되는 모니터링 화면이 상기 모니터링 장치에 디스플레이되도록 할 수 있다.
상기 영상처리 서버는 스트리밍 방송을 진행하는 중, 실시간 영상 데이터에서 새 얼굴을 인식하면, 인식된 새 얼굴을 상기 얼굴 리스트에 추가하고, 상기 모니터링 장치에서 편집 과정이 완료된 얼굴 리스트 정보를 수신하여 촬영 동의 리스트를 업데이트할 수 있다.
상기 영상처리 서버는 스트리밍 방송이 종료되면, 촬영 동의 리스트 관련 데이터를 상기 데이터베이스에서 삭제할 수 있다.
상기 영상처리 서버는 영상편집 모드를 더 포함하며, 상기 영상편집 모드에서 영상 데이터가 업로드되면, 해당 영상 데이터를 편집할 수 있는 기능을 제공하고, 전체 영상 데이터에서 인식된 얼굴들로 이루어진 얼굴 리스트를 팝업창으로 제공하고, 상기 팝업창에서 얼굴을 삭제하고, 확인하고, 추가하는 리스트 편집 기능을 제공하고, 리스트 편집이 완료된 얼굴 리스트를 촬영 동의 리스트로 생성하고, 상기 촬영 동의 리스트에 저장된 얼굴과 동일한 얼굴을 제외한 나머지 얼굴 영역을 해당 영상 데이터에서 비식별화 처리하고, 비식별화 처리가 완료된 영상 데이터를 인코딩할 수 있다.
본 발명의 일 실시예에서 상기 영상처리 서버는 얼굴 영역을 모자이크, 블러(blur) 또는 이모지(emoji) 처리하는 방식으로 비식별화 처리할 수 있다.
본 발명에 의하면, 실시간 스트리밍 방송에서 실시간으로 모자이크, 블러 처리 등의 비식별화 처리 기능을 지원하기 때문에, 촬영에 동의하지 않은 사람의 초상권 침해를 방지할 수 있는 효과가 있다.
또한, 본 발명에 의하면 인공지능 알고리즘을 이용하여 빠르고 정확하게 영상에서 인물을 인식할 수 있으므로, 실시간 스트리밍 방송을 진행하는 사용자에게 고품질의 영상처리 서비스를 제공할 수 있다는 효과가 있다.
또한, 본 발명에 의하면, 기존 영상 편집 프로그램에서 초상권 침해를 방지하기 위해 매 프레임마다 모자이크 처리 등의 비식별화 작업을 수행해야하는 불편함을 개선하여, 자동으로 영상에서 얼굴을 비식별화하기 때문에 편집 절차를 간소화할 수 있는 효과가 있다.
또한, 본 발명의 실시간 영상처리 시스템은 실시간 방송 분야에서 주로 활용되지만, 더 나아가서 향후 TV 생방송, CCTV 등의 다양한 매체로 확장될 것으로 기대된다.
도 1은 본 발명의 일 실시예에 따른 실시간 영상처리 시스템의 구성을 개략적으로 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서의 영상 처리 과정을 보여주는 흐름도이다.
도 3은 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서의 촬영동의 리스트 생성 과정을 보여주는 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서의 영상편집 모드 기능을 수행하는 과정을 보여주는 흐름도이다.
도 5는 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서 스트리밍 방송 서비스 제공 과정을 개념적으로 나타낸 흐름도이다.
도 6은 본 발명의 일 실시예에 따른 모니터링 장치의 화면예이다.
도 7 및 도 8은 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서 송출되는 스트리밍 방송을 수신하는 단말의 화면예이다.
도 9는 본 발명의 일 실시예에 따른 비식별화 처리된 객체 추출 및 레이어 지정 알고리즘을 나타낸 순서도이다.
도 2는 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서의 영상 처리 과정을 보여주는 흐름도이다.
도 3은 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서의 촬영동의 리스트 생성 과정을 보여주는 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서의 영상편집 모드 기능을 수행하는 과정을 보여주는 흐름도이다.
도 5는 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서 스트리밍 방송 서비스 제공 과정을 개념적으로 나타낸 흐름도이다.
도 6은 본 발명의 일 실시예에 따른 모니터링 장치의 화면예이다.
도 7 및 도 8은 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서 송출되는 스트리밍 방송을 수신하는 단말의 화면예이다.
도 9는 본 발명의 일 실시예에 따른 비식별화 처리된 객체 추출 및 레이어 지정 알고리즘을 나타낸 순서도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 갖고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 갖는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조 부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
도 1은 본 발명의 일 실시예에 따른 실시간 영상처리 시스템의 구성을 개략적으로 나타낸 도면이고, 도 5는 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서 스트리밍 방송 서비스 제공 과정을 개념적으로 나타낸 흐름도이다.
도 1 및 도 5를 참조하면, 본 발명의 실시간 영상처리 시스템은 촬영 장치(110), 모니터링 장치(120), 영상처리 서버(200), 데이터베이스(210)를 포함한다.
촬영 장치(110)는 카메라를 구비하며, 카메라를 통해 사진 또는 실시간 영상 데이터를 생성한다.
모니터링 장치(120)는 촬영 장치(110)와 연동되어 촬영 장치(110)에서 생성된 사진 또는 실시간 영상 데이터를 디스플레이하며, 모니터링을 위한 화면을 디스플레이한다.
본 발명의 일 실시예에서 모니터링 장치(120)는 LCD 터치스크린으로 구현될 수 있다.
데이터베이스(210)에는 미리 설정된 촬영에 동의한 사용자의 얼굴이 저장된 리스트인 촬영 동의 리스트가 저장되어 있다.
영상처리 서버(200)는 촬영 장치(110)에서 생성된 실시간 영상 데이터를 송출하여 스트리밍 방송을 제공하되, 인공지능 알고리즘을 이용하여 실시간 영상 데이터에서 얼굴을 인식하고, 인식된 얼굴을 촬영 동의 리스트와 비교하여, 촬영 동의 리스트에 저장된 얼굴과 동일한 얼굴을 제외한 나머지 얼굴 영역을 비식별화 처리하고, 해당 얼굴 영역 객체를 객체 추적하여 실시간 영상 데이터를 송출하는 방식으로 스트리밍 방송을 제공한다.
본 발명의 일 실시예에서 영상처리 서버(200)는 플라스크 서버(Flask server), Ngrok 터널(tunnel) 등의 기술을 이용하여 구현할 수 있다.
그리고, 영상처리 서버(200)는 객체 식별 라이브러리인 OpenCV를 이용하여 사람의 얼굴을 인식할 수 있다.
단말(310)은 영상처리 서버(200)에서 송출된 영상 데이터를 수신하여 스트리밍 방송을 수신하는 단말로서, 다수의 시청자가 각각 소지하는 다수의 단말이다. 본 발명에서 단말(310)은 영상처리 서버(200)와 유무선 통신망을 통해 스트리밍 방송을 수신할 수 있는 장치로서, 태블릿 PC, 스마트폰을 비롯한 이동통신 단말기와, 데스크탑 컴퓨터, 랩탑 컴퓨터 등을 모두 포함하는 개념이다.
본 발명에서 영상처리 서버(200)는 스트리밍 방송을 제공하기 전에 카메라에서 촬영된 사진 또는 실시간 영상 데이터에서 얼굴을 인식하고, 인식된 얼굴 영역들의 리스트인 얼굴 리스트가 화면의 일부에 표시되는 모니터링 화면이 모니터링 장치(120)에 디스플레이되도록 한다.
그리고, 모니터링 장치(120)에서 화면의 일부에 표시된 얼굴 리스트 중에서 사용자의 조작에 의해 선택된 얼굴 영역을 삭제하는 리스트 편집 과정을 수행하고, 리스트 편집 과정이 완료되면, 완료된 얼굴 리스트 정보를 영상처리 서버(200)에 전송한다.
그리고, 영상처리 서버(200)는 수신한 얼굴 리스트 정보에 따라 확정된 얼굴 영역들의 리스트를 촬영 동의 리스트로 생성하여 데이터베이스(210)에 저장한다.
또는 본 발명의 다른 실시예에서 영상처리 서버(200)는 유무선 통신망을 통해 외부의 이동통신 단말로부터 사진 데이터를 수신하면, 수신된 사진 데이터에서 얼굴을 인식하고, 인식된 얼굴 영역들의 리스트가 화면의 일부에 표시되는 모니터링 화면이 모니터링 장치(120)에 디스플레이되도록 할 수 있다.
그리고, 모니터링 장치(120)에서 화면의 일부에 표시된 얼굴 리스트 중에서 사용자의 조작에 의해 선택된 얼굴 영역을 삭제하는 리스트 편집 과정을 수행하고, 리스트 편집 과정이 완료되면, 완료된 얼굴 리스트 정보를 영상처리 서버(200)에 전송한다.
그리고, 영상처리 서버(200)는 수신한 얼굴 리스트 정보에 따라 확정된 얼굴 영역들의 리스트를 촬영 동의 리스트로 생성하여 데이터베이스(210)에 저장한다.
영상처리 서버(200)는 스트리밍 방송을 진행하는 중, 실시간 영상 데이터에서 새 얼굴을 인식하면, 인식된 새 얼굴을 얼굴 리스트에 추가하고, 모니터링 장치(120)에서 편집 과정이 완료된 얼굴 리스트 정보를 수신하여 촬영 동의 리스트를 업데이트할 수 있다.
영상처리 서버(200)는 스트리밍 방송이 종료되면, 촬영 동의 리스트 관련 데이터를 데이터베이스(210)에서 삭제할 수 있다.
본 발명의 일 실시예에서 영상처리 서버(200)는 영상편집 모드를 더 포함할 수 있다.
영상처리 서버(200)는 영상편집 모드에서 영상 데이터가 업로드(upload)되면, 해당 영상 데이터를 편집할 수 있는 기능을 제공하고, 전체 영상 데이터에서 인식된 얼굴들로 이루어진 얼굴 리스트를 팝업창으로 제공한다.
그리고, 팝업창에서 얼굴을 삭제하고, 확인하고, 추가하는 등의 리스트 편집 기능을 제공하고, 리스트 편집이 완료된 얼굴 리스트를 촬영 동의 리스트로 생성한다.
그리고, 촬영 동의 리스트에 저장된 얼굴과 동일한 얼굴을 제외한 나머지 얼굴 영역을 해당 영상 데이터에서 비식별화 처리하고, 비식별화 처리가 완료된 영상 데이터를 인코딩하는 기능을 제공할 수 있다.
본 발명에서 영상처리 서버(200)는 얼굴 영역을 모자이크, 블러(blur) 또는 이모지(emoji) 처리하는 방식으로 비식별화 처리할 수 있다.
도 2는 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서의 영상 처리 과정을 보여주는 흐름도이다.
도 2를 참조하면, 영상처리 서버(200)는 촬영에 동의한 사람의 얼굴을 모아놓은 리스트인 촬영 동의 리스트를 생성하고(S210), 스트리밍 방송 요청에 의해 방송이 시작되면 촬영 장치(110)를 통해 촬영을 시작한다(S220).
촬영 장치(110)에서 촬영되는 실시간 영상 데이터에서 얼굴이 인식되면(S230), 인식된 얼굴이 촬영 동의 리스트에 등록된 얼굴인지 확인한다(S240).
인식된 얼굴이 촬영 동의 리스트에 등록된 얼굴이면 그대로 영상 데이터를 송출하고, 촬영 동의 리스트에 등록된 얼굴이 아니면 인식된 얼굴을 비식별화 처리한 후 영상 데이터를 송출한다(S250).
도 3은 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서의 촬영동의 리스트 생성 과정을 보여주는 흐름도이다.
도 3을 참조하면, 스트리밍 방송을 시작하기 전에 촬영에 동의한 사람의 얼굴을 등록하기 위해, 촬영 장치(110)에서 카메라를 통해 사진을 촬영한다(S310).
그리고, 촬영 장치(100)는 사진을 영상처리 서버(200)에 전송한다(S320).
그리고, 영상처리 서버(200)는 사진에서 얼굴을 인식하고(S330), 인식된 얼굴 리스트를 모니터링 장치(120)에 전송한다.
그리고, 모니터링 장치(120)에서는 사용자에 의해 얼굴 리스트에서 추가, 삭제, 확인 등의 리스트 편집 과정이 수행되고, 리스트 편집이 완료되면, 최종 얼굴 리스트 정보를 영상처리 서버(200)에 전송한다(S340).
그리고, 영상처리 서버(200)는 수신한 얼굴 리스트 정보를 촬영 동의 리스트로 생성하고, 이를 모니터링 장치(120)에 전송한다.
그리고, 모니터링 장치(120)에서는 촬영 동의 리스트를 화면의 일부분에 디스플레이한다(S360).
도 4는 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서의 영상편집 모드 기능을 수행하는 과정을 보여주는 흐름도이다.
도 4를 참조하면, 영상편집 모드에서 영상 데이터가 업로드되면(S401). 영상처리 서버(200)는 해당 영상 데이터에 대해 필요없는 부분을 삭제하는 등의 편집할 수 있는 기능을 제공한다(S403).
그리고, 영상처리 서버(200)는 전체 영상 데이터에서 얼굴이 인식되면(S405), 인식된 얼굴들로 이루어진 얼굴 리스트를 팝업창으로 제공한다(S407).
그리고, 영상처리 서버(200)는 팝업창에서 얼굴을 삭제하고, 확인하고, 추가하는 리스트 편집 기능을 제공한(S409).
그리고, 영상처리 서버(200)는 리스트 편집이 완료된 얼굴 리스트를 촬영 동의 리스트로 생성한다(S411, S413).
그리고, 영상처리 서버(200)는 촬영 동의 리스트에 저장된 얼굴과 동일한 얼굴을 제외한 나머지 얼굴 영역을 해당 영상 데이터에서 비식별화 처리하고(S415, S417), 비식별화 처리가 완료된 영상 데이터를 인코딩하는 과정의 영상편집 모드를 제공한다(S419).
도 6은 본 발명의 일 실시예에 따른 모니터링 장치의 화면예이다.
도 6의 실시예에서, 화면의 좌측 부분에 촬영 동의 리스트(610)가 디스플레이 된 것을 확인할 수 있다. 모니터링 장치가 터치스크린 방식인 경우, 사용자는 촬영 동의 리스트(610)에서 촬영에 동의하지 않은 사람의 얼굴이 인식된 경우, 해당 얼굴 영역의 'x' 버튼을 터치하여 삭제할 수 있다.
도 7 및 도 8은 본 발명의 일 실시예에 따른 실시간 영상처리 시스템에서 송출되는 스트리밍 방송을 수신하는 단말의 화면예이다.
도 7을 참조하면, 실시간 스트리밍 방송 중에 촬영에 동의하지 않은 사람의 얼굴을 블러(710, 720) 처리한 것을 확인할 수 있다.
그리고, 도 8을 참조하면, 촬영에 동의한 얼굴(810)을 그대로 송출하고, 촬영에 동의하지 않은 얼굴을 비식별화 처리하기 위해 이모지(820)로 처리한 것을 확인할 수 있다.
도 9는 본 발명의 일 실시예에 따른 비식별화 처리된 객체 추출 및 레이어 지정 알고리즘을 나타낸 순서도이다.
본 발명의 일 실시예에 의하면, 영상처리 서버(200)에서 처리되는 각 이미지의 경계선 값들은 MeanShift 알고리즘을 이용한 클러스터링 과정과 적응적 임계치 결정과정을 거쳐 적응적 경계선 추출이 이루어진다. 이어서, 각 경계선에 대한 폐영역 구간을 검출하여 최종적인 경계선을 검출한다. 이어서, 추출된 폐영역을 토대로 원이미지와의 마스크 연산을 통해 객체를 분리시킨 후 분리된 각 객체에 대해 레이어를 지정한다. 이러한 과정을 보다 자세히 기술하면 다음과 같다.
즉, 단계 S901에서, 픽셀의 저주파와 고주파 성분을 분리해 그레이 스케일로 그 분리 정도를 파악할 수 있는 경계선 검출 알고리즘을 수행한다. 그리고 이미지의 경계선 값들에 MeanShift 알고리즘을 이용하여 클러스터링 과정을 거치고, 결과로 나온 이미지에서 적응적 임계치 결정과정을 수행하여 경계선을 추출한다.
이어서 단계 S903에서, 추출된 경계선의 모든 외곽선(contour)을 저장한 후, 최외각의 외곽선만을 찾아낸다. 그리고 임계값 크기에 못 미치는 폐영역을 제거한다(임계값 크기는 관리자의 지정값임). 이러한 폐영역 검출은 각 폐영역의 내부를 채운 마스크 이미지를 생성하고 마스크 이미지를 원본 이미지와 AND 연산하는 방법을 통해 보다 분명하게 수행된다.
단계 S905에서, 상기 분리된 객체의 외각선을 기반으로 객체에 대한 마스크를 추출한다. 추출된 외각선 기반의 마스크 생성 시에, 마스크 영역은 영역 성장 알고리즘 (Region growing method)을 적용하여 형성한다. 이러한 영역 성장 알고리즘을 통해 생성된 마스크를 이용하여, 원본 이미지와 마스크를 AND 연산을 수행하여 객체를 분리하여 결과를 확인하고 별도로 저장하고 이때 AND 연산에 사용된 마스크도 같이 저장한다.
단계 S907에서, 각 객체들에 대한 레이어가 지정되는데, 각 지정된 레이어 객체에 대해 각 객체의 등록, 삭제, 저장 기능과 레이어의 순서 변경, 위치 변경의 기능이 제공된다. 그래서 비식별화 처리(모자이크, 블러, 이모지 처리)된 객체의 등록, 삭제, 저장은 물론 다른 객체와의 레이어 순서와 위치 변경 등이 가능하게 된다.
이상 본 발명을 몇 가지 바람직한 실시예를 사용하여 설명하였으나, 이들 실시예는 예시적인 것이며 한정적인 것이 아니다. 본 발명이 속하는 기술분야에서 통상의 지식을 지닌 자라면 본 발명의 사상과 첨부된 특허청구범위에 제시된 권리범위에서 벗어나지 않으면서 다양한 변화와 수정을 가할 수 있음을 이해할 것이다.
110 촬영 장치 120 모니터링 장치
200 영상처리 서버 210 데이터베이스
310 단말
200 영상처리 서버 210 데이터베이스
310 단말
Claims (9)
- 카메라를 구비하며, 상기 카메라를 통해 사진 또는 실시간 영상 데이터를 생성하기 위한 촬영 장치;
상기 촬영 장치와 연동되어 상기 촬영 장치에서 생성된 사진 또는 실시간 영상 데이터를 디스플레이하며, 모니터링을 위한 화면을 디스플레이하는 모니터링 장치;
미리 설정된 촬영에 동의한 사용자의 얼굴이 저장된 리스트인 촬영 동의 리스트가 저장되어 있는 데이터베이스; 및
상기 촬영 장치에서 생성된 실시간 영상 데이터를 송출하여 스트리밍 방송을 제공하되, 인공지능 알고리즘을 이용하여 실시간 영상 데이터에서 얼굴을 인식하고, 인식된 얼굴을 상기 촬영 동의 리스트와 비교하여, 상기 촬영 동의 리스트에 저장된 얼굴과 동일한 얼굴을 제외한 나머지 얼굴 영역을 비식별화 처리하고, 해당 얼굴 영역 객체를 객체 추적하여 실시간 영상 데이터를 송출하는 영상처리 서버를 포함하고,
상기 영상처리 서버는 스트리밍 방송을 제공하기 전에 상기 카메라에서 촬영된 사진 또는 실시간 영상 데이터에서 얼굴을 인식하고, 인식된 얼굴 영역들의 리스트인 얼굴 리스트가 화면의 일부에 표시되는 모니터링 화면이 상기 모니터링 장치에 디스플레이되도록 하고,
상기 모니터링 장치에서 화면의 일부에 표시된 얼굴 리스트 중에서 사용자의 조작에 의해 선택된 얼굴 영역을 삭제하는 리스트 편집 과정을 수행하고, 상기 리스트 편집 과정이 완료되면, 완료된 얼굴 리스트 정보를 상기 영상처리 서버에 전송하고,
상기 영상처리 서버는 수신한 얼굴 리스트 정보에 따라 확정된 얼굴 영역들의 리스트를 촬영 동의 리스트로 생성하여 상기 데이터베이스에 저장하며,
상기 영상처리 서버는 유무선 통신망을 통해 외부의 이동통신 단말로부터 사진 데이터를 수신하면, 수신된 사진 데이터에서 얼굴을 인식하고, 인식된 얼굴 영역들의 리스트가 화면의 일부에 표시되는 모니터링 화면이 상기 모니터링 장치에 디스플레이되도록 하고,
상기 영상처리 서버는 스트리밍 방송을 진행하는 중, 실시간 영상 데이터에서 새 얼굴을 인식하면, 인식된 새 얼굴을 상기 얼굴 리스트에 추가하고, 상기 모니터링 장치에서 편집 과정이 완료된 얼굴 리스트 정보를 수신하여 촬영 동의 리스트를 업데이트하며,
상기 영상처리 서버는 스트리밍 방송이 종료되면, 촬영 동의 리스트 관련 데이터를 상기 데이터베이스에서 삭제하고,
상기 영상처리 서버는 영상편집 모드를 더 포함하며, 상기 영상편집 모드에서 영상 데이터가 업로드되면, 해당 영상 데이터를 편집할 수 있는 기능을 제공하고, 전체 영상 데이터에서 인식된 얼굴들로 이루어진 얼굴 리스트를 팝업창으로 제공하고, 상기 팝업창에서 얼굴을 삭제하고, 확인하고, 추가하는 리스트 편집 기능을 제공하고, 리스트 편집이 완료된 얼굴 리스트를 촬영 동의 리스트로 생성하고, 상기 촬영 동의 리스트에 저장된 얼굴과 동일한 얼굴을 제외한 나머지 얼굴 영역을 해당 영상 데이터에서 비식별화 처리하고, 비식별화 처리가 완료된 영상 데이터를 인코딩하고,
상기 영상처리 서버는 비식별화 처리되는 각 이미지의 경계선 값들은 MeanShift 알고리즘을 이용한 클러스터링 과정과 적응적 임계치 결정과정을 거쳐 적응적 경계선 추출을 수행하고, 각 경계선에 대한 폐영역 구간을 검출하여 최종적인 경계선을 검출하고, 검출된 경계선을 기반으로 영역 성장 알고리즘(Region growing method)을 적용하여 객체에 대한 마스크 영역을 형성하고, 추출된 폐영역을 토대로 원 이미지와의 마스크 연산을 통해 객체를 분리시킨 후, 분리된 각 객체에 대해 레이어를 지정하는 것을 특징으로 하는 실시간 영상처리 시스템.
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
- 청구항 1에 있어서,
상기 영상처리 서버는 얼굴 영역을 모자이크 처리하는 방식으로 비식별화 처리하는 것을 특징으로 하는 실시간 영상처리 시스템.
- 청구항 1에 있어서,
상기 영상처리 서버는 얼굴 영역을 블러(blur) 처리하는 방식으로 비식별화 처리하는 것을 특징으로 하는 실시간 영상처리 시스템.
- 청구항 1에 있어서,
상기 영상처리 서버는 얼굴 영역을 이모지(emoji) 처리하는 방식으로 비식별화 처리하는 것을 특징으로 하는 실시간 영상처리 시스템.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200011340A KR102123248B1 (ko) | 2020-01-30 | 2020-01-30 | 프라이버시 보호를 위한 얼굴인식 기반 실시간 영상처리 시스템 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020200011340A KR102123248B1 (ko) | 2020-01-30 | 2020-01-30 | 프라이버시 보호를 위한 얼굴인식 기반 실시간 영상처리 시스템 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR102123248B1 true KR102123248B1 (ko) | 2020-06-16 |
Family
ID=71141747
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020200011340A KR102123248B1 (ko) | 2020-01-30 | 2020-01-30 | 프라이버시 보호를 위한 얼굴인식 기반 실시간 영상처리 시스템 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102123248B1 (ko) |
Cited By (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111898587A (zh) * | 2020-08-14 | 2020-11-06 | 广州盈可视电子科技有限公司 | 一种视频打码处理方法和装置 |
| CN112312011A (zh) * | 2020-10-15 | 2021-02-02 | 珠海格力电器股份有限公司 | 一种摄像头隐私的保护方法以及装置 |
| KR102212077B1 (ko) * | 2020-09-29 | 2021-02-03 | 오성윤 | 동영상 자동 편집 방법 및 장치 |
| WO2021124320A1 (en) * | 2019-12-16 | 2021-06-24 | De-Identification Ltd. | System and method for performing face recognition |
| KR102271673B1 (ko) * | 2020-09-29 | 2021-07-02 | 강준영 | 상호협력 기반 파파라치샷 촬영 서비스 제공 방법 |
| CN113347479A (zh) * | 2021-05-31 | 2021-09-03 | 网易（杭州）网络有限公司 | 多媒体素材的编辑方法、装置、设备及存储介质 |
| KR102357908B1 (ko) * | 2021-07-26 | 2022-02-08 | 이미연 | 영상의 모자이크 처리를 위한 전자 장치 및 그 동작 방법 |
| US11276214B2 (en) | 2020-07-15 | 2022-03-15 | De-Ideniification Ltd. | System and a method for artificial neural-network based animation |
| KR20220043811A (ko) * | 2020-09-29 | 2022-04-05 | (주)알지비 | 동영상 내의 인물을 고려한 동영상 합성 방법 |
| KR20220043925A (ko) * | 2021-01-12 | 2022-04-05 | (주)알지비 | 인물을 고려한 동영상 비주얼 이펙트 합성 방법 |
| WO2022098074A1 (ko) * | 2020-11-06 | 2022-05-12 | 카페24 주식회사 | 초상권 보호 방법, 장치 및 시스템 |
| KR20220061794A (ko) * | 2020-11-06 | 2022-05-13 | 카페24 주식회사 | 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템 |
| KR20220076760A (ko) | 2020-12-01 | 2022-06-08 | 동의대학교 산학협력단 | 불특정인물의 얼굴 영역의 식별 정도에 따른 가림스티커 처리 시스템 |
| CN114710215A (zh) * | 2022-04-08 | 2022-07-05 | 郑州大学 | 一种跳频信号快速盲检测的方法 |
| US11436781B2 (en) | 2020-07-15 | 2022-09-06 | De-Identification Ltd. | System and method for artificial neural-network based animation with three-dimensional rendering |
| US11461948B2 (en) | 2020-07-15 | 2022-10-04 | De-Identification Ltd. | System and method for voice driven lip syncing and head reenactment |
| US11526626B2 (en) | 2020-07-10 | 2022-12-13 | De-Identification Ltd. | Facial anonymization with consistent facial attribute preservation in video |
| KR20230030416A (ko) * | 2021-08-25 | 2023-03-06 | 계명대학교 산학협력단 | 얼굴 인식 기반의 선택적 얼굴 모자이크 방법 및 장치 |
| WO2023120754A1 (ko) * | 2021-12-21 | 2023-06-29 | 엘지전자 주식회사 | 메타버스 기반의 가상화 영상 제공 시스템 및 그 방법 |
| US11762998B2 (en) | 2019-10-23 | 2023-09-19 | De-Identification Ltd. | System and method for protection and detection of adversarial attacks against a classifier |
| WO2023212040A1 (en) * | 2022-04-29 | 2023-11-02 | Raytheon Company | Computer/human generation, validation and use of a ground truth map to enforce data capture and transmission compliance in real and near real time video of a local scene |
| US11893828B2 (en) | 2017-06-04 | 2024-02-06 | De-Identification Ltd. | System and method for image de-identification |
| WO2024039073A1 (ko) * | 2022-08-18 | 2024-02-22 | 삼성전자 주식회사 | 이미지에 효과를 적용하는 전자 장치 및 그 제어 방법 |
| US11954191B2 (en) | 2018-09-05 | 2024-04-09 | De-Identification Ltd. | System and method for performing identity authentication based on de-identified data |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20140012474A (ko) * | 2012-07-20 | 2014-02-03 | 한국전자통신연구원 | 얼굴인식 기반의 개인정보보호 장치 및 방법 |
| KR20140035753A (ko) | 2012-09-14 | 2014-03-24 | 엘지전자 주식회사 | Ｓｎｓ시스템 및 그의 ｓｎｓ정보 보호방법 |
| KR101881391B1 (ko) * | 2018-03-09 | 2018-07-25 | 한화에어로스페이스 주식회사 | 객체의 특성 정보를 반영하여 프라이버시 마스킹을 수행하는 영상 마스킹 장치 |
| KR101972918B1 (ko) * | 2018-12-20 | 2019-08-20 | 주식회사 로민 | 영상 마스킹 장치 및 영상 마스킹 방법 |
-
2020
- 2020-01-30 KR KR1020200011340A patent/KR102123248B1/ko active IP Right Grant
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20140012474A (ko) * | 2012-07-20 | 2014-02-03 | 한국전자통신연구원 | 얼굴인식 기반의 개인정보보호 장치 및 방법 |
| KR20140035753A (ko) | 2012-09-14 | 2014-03-24 | 엘지전자 주식회사 | Ｓｎｓ시스템 및 그의 ｓｎｓ정보 보호방법 |
| KR101881391B1 (ko) * | 2018-03-09 | 2018-07-25 | 한화에어로스페이스 주식회사 | 객체의 특성 정보를 반영하여 프라이버시 마스킹을 수행하는 영상 마스킹 장치 |
| KR101972918B1 (ko) * | 2018-12-20 | 2019-08-20 | 주식회사 로민 | 영상 마스킹 장치 및 영상 마스킹 방법 |
Cited By (39)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11893828B2 (en) | 2017-06-04 | 2024-02-06 | De-Identification Ltd. | System and method for image de-identification |
| US11954191B2 (en) | 2018-09-05 | 2024-04-09 | De-Identification Ltd. | System and method for performing identity authentication based on de-identified data |
| US11762998B2 (en) | 2019-10-23 | 2023-09-19 | De-Identification Ltd. | System and method for protection and detection of adversarial attacks against a classifier |
| WO2021124320A1 (en) * | 2019-12-16 | 2021-06-24 | De-Identification Ltd. | System and method for performing face recognition |
| US11526626B2 (en) | 2020-07-10 | 2022-12-13 | De-Identification Ltd. | Facial anonymization with consistent facial attribute preservation in video |
| US11276214B2 (en) | 2020-07-15 | 2022-03-15 | De-Ideniification Ltd. | System and a method for artificial neural-network based animation |
| US11436781B2 (en) | 2020-07-15 | 2022-09-06 | De-Identification Ltd. | System and method for artificial neural-network based animation with three-dimensional rendering |
| US11461948B2 (en) | 2020-07-15 | 2022-10-04 | De-Identification Ltd. | System and method for voice driven lip syncing and head reenactment |
| CN111898587A (zh) * | 2020-08-14 | 2020-11-06 | 广州盈可视电子科技有限公司 | 一种视频打码处理方法和装置 |
| KR102271673B1 (ko) * | 2020-09-29 | 2021-07-02 | 강준영 | 상호협력 기반 파파라치샷 촬영 서비스 제공 방법 |
| KR102367581B1 (ko) * | 2020-09-29 | 2022-02-28 | (주)알지비 | 동영상 합성을 위한 자동 툴 및 이를 실행할 수 있는 프로그램이 저장된 컴퓨터 판독 가능한 기록매체 |
| KR102367576B1 (ko) * | 2020-09-29 | 2022-02-28 | (주)알지비 | 동영상 합성을 통해 동영상 내의 노출되는 정보를 동영상과 함께 제공하는 방법 및 장치 |
| KR102367579B1 (ko) * | 2020-09-29 | 2022-02-28 | (주)알지비 | 효율적인 동영상 합성 툴을 제공하는 전자 장치 |
| KR20220043811A (ko) * | 2020-09-29 | 2022-04-05 | (주)알지비 | 동영상 내의 인물을 고려한 동영상 합성 방법 |
| KR102367574B1 (ko) * | 2020-09-29 | 2022-02-25 | 오성윤 | 동영상 편집에서 음악 정보를 효과적으로 전달하는 방법 |
| KR102387398B1 (ko) | 2020-09-29 | 2022-04-18 | 주식회사 알지비 | 동영상 내의 인물을 고려한 동영상 합성 방법 |
| KR102212077B1 (ko) * | 2020-09-29 | 2021-02-03 | 오성윤 | 동영상 자동 편집 방법 및 장치 |
| CN112312011A (zh) * | 2020-10-15 | 2021-02-02 | 珠海格力电器股份有限公司 | 一种摄像头隐私的保护方法以及装置 |
| KR20220061794A (ko) * | 2020-11-06 | 2022-05-13 | 카페24 주식회사 | 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템 |
| KR102525077B1 (ko) * | 2020-11-06 | 2023-04-24 | 카페24 주식회사 | 설정 기반의 음성 처리 방법, 장치 및 시스템 |
| KR20220061796A (ko) * | 2020-11-06 | 2022-05-13 | 카페24 주식회사 | 설정 기반의 음성 처리 방법, 장치 및 시스템 |
| KR102555680B1 (ko) * | 2020-11-06 | 2023-07-17 | 카페24 주식회사 | 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템 |
| WO2022098074A1 (ko) * | 2020-11-06 | 2022-05-12 | 카페24 주식회사 | 초상권 보호 방법, 장치 및 시스템 |
| KR102502105B1 (ko) * | 2020-11-06 | 2023-02-23 | 카페24 주식회사 | 초상권 보호 방법, 장치 및 시스템 |
| KR20220061793A (ko) * | 2020-11-06 | 2022-05-13 | 카페24 주식회사 | 초상권 보호 방법, 장치 및 시스템 |
| KR20220076760A (ko) | 2020-12-01 | 2022-06-08 | 동의대학교 산학협력단 | 불특정인물의 얼굴 영역의 식별 정도에 따른 가림스티커 처리 시스템 |
| KR102388652B1 (ko) | 2021-01-12 | 2022-04-20 | 주식회사 알지비 | 인물을 고려한 동영상 비주얼 이펙트 합성 방법 |
| KR20220043925A (ko) * | 2021-01-12 | 2022-04-05 | (주)알지비 | 인물을 고려한 동영상 비주얼 이펙트 합성 방법 |
| CN113347479B (zh) * | 2021-05-31 | 2023-05-26 | 网易（杭州）网络有限公司 | 多媒体素材的编辑方法、装置、设备及存储介质 |
| CN113347479A (zh) * | 2021-05-31 | 2021-09-03 | 网易（杭州）网络有限公司 | 多媒体素材的编辑方法、装置、设备及存储介质 |
| KR102380574B1 (ko) * | 2021-07-26 | 2022-04-01 | 이미연 | 모자이크 처리를 이용한 새로운 이미지로의 대체 방법 |
| KR102357908B1 (ko) * | 2021-07-26 | 2022-02-08 | 이미연 | 영상의 모자이크 처리를 위한 전자 장치 및 그 동작 방법 |
| KR20230030416A (ko) * | 2021-08-25 | 2023-03-06 | 계명대학교 산학협력단 | 얼굴 인식 기반의 선택적 얼굴 모자이크 방법 및 장치 |
| KR102560372B1 (ko) * | 2021-08-25 | 2023-07-27 | 계명대학교 산학협력단 | 얼굴 인식 기반의 선택적 얼굴 모자이크 방법 및 장치 |
| WO2023120754A1 (ko) * | 2021-12-21 | 2023-06-29 | 엘지전자 주식회사 | 메타버스 기반의 가상화 영상 제공 시스템 및 그 방법 |
| CN114710215A (zh) * | 2022-04-08 | 2022-07-05 | 郑州大学 | 一种跳频信号快速盲检测的方法 |
| CN114710215B (zh) * | 2022-04-08 | 2024-02-02 | 郑州大学 | 一种跳频信号快速盲检测的方法 |
| WO2023212040A1 (en) * | 2022-04-29 | 2023-11-02 | Raytheon Company | Computer/human generation, validation and use of a ground truth map to enforce data capture and transmission compliance in real and near real time video of a local scene |
| WO2024039073A1 (ko) * | 2022-08-18 | 2024-02-22 | 삼성전자 주식회사 | 이미지에 효과를 적용하는 전자 장치 및 그 제어 방법 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102123248B1 (ko) | 프라이버시 보호를 위한 얼굴인식 기반 실시간 영상처리 시스템 | |
| US10062406B2 (en) | Video masking processing method and apparatus | |
| Verdoliva | Media forensics and deepfakes: an overview | |
| US11023618B2 (en) | Systems and methods for detecting modifications in a video clip | |
| US9196069B2 (en) | Digital image manipulation | |
| US9646358B2 (en) | Methods for scene based video watermarking and devices thereof | |
| US9961231B2 (en) | Image processing method that attempts decoding of additional information using a plurality of decoding methods, and apparatus therefor | |
| CN110298862A (zh) | 视频处理方法、装置、计算机可读存储介质和计算机设备 | |
| US9426385B2 (en) | Image processing based on scene recognition | |
| US11670099B2 (en) | Validating objects in volumetric video presentations | |
| JP2009033738A (ja) | 撮像装置、画像ファイルのデータ構造 | |
| US10205875B2 (en) | Image enhancement and repair using sample data from other images | |
| JP2015114828A (ja) | 情報処理装置及び情報処理プログラム | |
| JP2008017224A (ja) | 撮像装置、撮像装置の出力制御方法及びプログラム | |
| CN107622497A (zh) | 图像裁剪方法、装置、计算机可读存储介质和计算机设备 | |
| EP3103117A1 (en) | Live scene recognition allowing scene dependent image modification before image recording or display | |
| CN113393471A (zh) | 图像处理方法和装置 | |
| JP7084795B2 (ja) | 画像処理装置、画像提供装置、それらの制御方法及びプログラム | |
| Santoyo-Garcia et al. | Visible watermarking technique based on human visual system for single sensor digital cameras | |
| CN116095363B (zh) | 基于关键行为识别的移动端短视频高光时刻剪辑方法 | |
| CN115620374A (zh) | 一种监控视频中人脸图像识别模糊处理的方法 | |
| CN116051477A (zh) | 一种超高清视频文件的图像噪声检测方法及装置 | |
| CN115988259A (zh) | 一种视频处理方法、装置、终端、介质及程序产品 | |
| CN110378973B (zh) | 图像信息处理方法、装置以及电子设备 | |
| JP5868145B2 (ja) | 画像処理装置及びその制御方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |