KR101859433B1 - 영상 모자이크 처리 방법 및 이를 위한 장치 - Google Patents

영상 모자이크 처리 방법 및 이를 위한 장치 Download PDF

Info

Publication number
KR101859433B1
KR101859433B1 KR1020170019820A KR20170019820A KR101859433B1 KR 101859433 B1 KR101859433 B1 KR 101859433B1 KR 1020170019820 A KR1020170019820 A KR 1020170019820A KR 20170019820 A KR20170019820 A KR 20170019820A KR 101859433 B1 KR101859433 B1 KR 101859433B1
Authority
KR
South Korea
Prior art keywords
image
identification information
mosaic
user identification
information
Prior art date
Application number
KR1020170019820A
Other languages
English (en)
Inventor
이종민
Original Assignee
에스케이텔레콤 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이텔레콤 주식회사 filed Critical 에스케이텔레콤 주식회사
Priority to KR1020170019820A priority Critical patent/KR101859433B1/ko
Application granted granted Critical
Publication of KR101859433B1 publication Critical patent/KR101859433B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4015Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2347Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
    • H04N21/23476Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption by partially encrypting, e.g. encrypting the ending portion of a movie
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/26613Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel for generating or managing keys in general
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/36Review paper; Tutorial; Survey
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 영상에서 특정 영역만을 모자이크 처리하여 정보 게시 서비스를 통해 게시하고, 재생하고자 하는 사용자에 따라 선별적으로 모자이크를 해제하여 배포할 수 있는 영상 모자이크 처리 방법 및 이를 위한 장치에 관한 것으로, 이를 위한 본 발명의 서비스 서버는 영상에서 모자이크 처리가 필요한 영역을 확인하고, 상기 모자이크 처리가 필요한 영역 각각에 대한 키 값 및 상기 키 값에 대응하는 사용자 식별 정보를 확인하고, 상기 확인된 키 값 및 사용자 식별 정보를 이용하여 상기 모자이크 처리가 필요한 영역을 암호화하여 모자이크를 수행하고, 상기 모자이크가 수행된 영역을 포함하는 영상을 저장하여 상기 정보 게시 서비스에 게시되도록 제어하는 단계를 수행할 수 있다.

Description

영상 모자이크 처리 방법 및 이를 위한 장치{METHOD FOR PROCESSING OF MOSAIC IMAGE AND APPARATUS THEREOF}
본 발명은 영상 모자이크 처리 방법에 관한 것으로, 더욱 상세하게는 영상에서 특정 영역만을 모자이크 처리하여 정보 게시 서비스를 통해 게시하고, 재생하고자 하는 사용자에 따라 선별적으로 모자이크를 해제하여 배포할 수 있는 영상 모자이크 처리 방법 및 이를 위한 장치에 관한 것이다.
최근, 많은 사람들이 가까운 지인과의 소식 전달을 위하여 Social Network Service(이하 'SNS'라 지칭함)를 이용하고 있다. 특히, 스마트폰이나 타블릿 PC와 같은 이동 기기들이 급속하게 보급되어 장소의 구분 없이 사용자들은 다양한 사진, 동영상을 생성하여 SNS 서비스 플랫폼에 업로드할 수 있으며, 해당 SNS 서비스 플랫폼에 접속한 다른 사용자들에게 실시간 배포할 수 있게 되었다.
이와 같이, 실시간으로 정보를 송수신할 수 있는 SNS 서비스 플랫폼의 폭발적인 확산에 따라 정보의 확산이 급속히 이뤄지고 있다.
그러나, 사용자가 사진이나 영상을 촬영하여 SNS 서비스 플랫폼에 업로드하여 게시하고자 할 경우, 무분별한 타인의 얼굴, 차량 번호판 등의 의도하지 않은 정보가 유출될 수 있으며, 이에 따라 다양한 문제가 발생되기도 한다.
이에 일부 사용자들의 경우 SNS 서비스 플랫폼에 사진을 업로드하고자 할 경우, 개인 정보가 유출될 수 있는 특정 영역을 모자이크 처리한 후 업로드하고 있다. 예컨대, 관련성이 없는 타인의 얼굴, 차량 번호판 등을 직접 모자이크 처리한 후 업로드하는 방식이다.
그러나, 종래의 방식에서는 사용자가 직접 사진 하나하나 특정 영역을 지정하여 모자이크 처리하는 방식으로, 업로드에 많은 시간이 소요되며, 사용자의 불편함이 야기된다는 문제점이 있다.
또한, 종래의 방식에서는 동영상의 경우 모자이크를 처리할 수 있는 방안이 상당히 불편하다는 문제점이 있다.
한편, 다양한 사회적인 이슈로 인하여 CCTV의 보급이 지속적으로 증가하고 있으나, CCTV와 같은 실시간 영상 감시 시스템에서는 개인의 초상권 문제를 고려하여 특정 정보를 스크리닝 하기가 사실상 불가능하다는 문제점이 있다.
한국등록특허 제10-1565649호, 2015.10.28 공개(명칭: 스마트 폰에서 생성되는 n개의 멀티미디어 라이프로그 데이터를 이용한 n개의 라이프로그 동영상 서비스 제공 시스템 및 그 방법)
본 발명은 상기한 종래의 문제점을 해결하기 위해 제안된 것으로서, 영상에서 특정 영역만을 모자이크 처리하여 정보 게시 서비스를 통해 게시하고, 재생하고자 하는 사용자에 따라 선별적으로 모자이크를 해제하여 배포할 수 있는 영상 모자이크 처리 방법 및 이를 위한 장치를 제공하는 데 목적이 있다.
특히, 본 발명은 영상에서 얼굴 영역을 추출하고, 추출된 얼굴 영역에 대응하여 얼굴 키 값을 이용하여 해당 얼굴 영역을 모자이크 처리하고 재생 권한을 설정한 후 저장하며, 영상 배포 시, 재생 권한에 따라 선별적으로 모자이크를 해제한 후 배포할 수 있는 영상 모자이크 처리 방법 및 이를 위한 장치를 제공하는 데 그 목적이 있다.
그러나, 이러한 본 발명의 목적은 상기의 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 명확하게 이해될 수 있을 것이다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 실시 예에 따른 영상 모자이크 처리 방법은 영상생성장치로부터 수신된 영상을 특정 정보 게시 서비스에 게시하고자 하는 서비스 서버에 있어서, 상기 서비스 서버가, 상기 수신된 영상에서 모자이크 처리가 필요한 영역을 확인하는 단계; 상기 모자이크 처리가 필요한 영역 각각에 대한 키 값 및 상기 키 값에 대응하는 사용자 식별 정보를 확인하는 단계; 상기 확인된 키 값 및 사용자 식별 정보를 이용하여 상기 모자이크 처리가 필요한 영역을 암호화하여 모자이크 수행하는 단계; 및 상기 모자이크가 수행된 영상을 저장하여 상기 정보 게시 서비스를 통해 게시되도록 제어하는 단계;를 포함하여 이뤄질 수 있다.
이때, 상기 모자이크 처리가 필요한 영역을 확인하는 단계는 상기 수신된 영상에서 얼굴 영역을 추출하여 확인하며, 상기 키 값은 상기 얼굴 영역에 대한 얼굴 키 값일 수 있다.
또한, 상기 모자이크 처리가 필요한 영역을 확인하는 단계는 상기 수신된 영상에서 얼굴 영역을 추출하는 단계; 상기 추출된 얼굴 영역이 복수 개인 경우, 복수 개의 얼굴 영역의 크기를 비교하는 단계; 및 상기 비교 결과, 일정 크기 이상인 얼굴 영역을 모자이크 처리가 필요한 영역으로 확인하고, 그렇지 않은 얼굴 영역은 무조건 모자이크 처리하는 단계;를 포함하여 이뤄질 수 있다.
이때, 상기 사용자 식별 정보를 확인하는 단계에서, 상기 키 값에 대응하는 사용자 식별 정보가 존재하지 않을 경우, 상기 영상을 생성 또는 게시하고자 하는 사용자 식별 정보를 확인할 수 있다.
또한, 상기 영상이 동영상일 경우, 상기 수신된 영상에서 아이 프레임(I Frame)을 추출하는 단계를 더 포함하며, 상기 모자이크를 수행하는 단계는 상기 추출된 아이 프레임을 기준으로 모자이크 처리가 필요한 영역에 대한 모자이크를 수행할 수 있다.
또한, 상기 게시하는 단계는 상기 모자이크가 수행된 각각의 영역 또는 영상을 재생할 수 있는 재생 권한을 설정한 후 게시할 수 있다.
아울러, 상기 영상생성장치로부터 영상이 수신되면, 상기 영상생성장치의 사용자 식별 정보를 확인하여, 상기 영상생성장치의 사용자가 가입된 사용자인지 여부를 판단하는 단계; 상기 판단 결과, 가입되어 있지 않을 경우, 일회용 식별 정보를 생성하는 단계; 및 상기 생성된 일회용 식별 정보를 이용하여 상기 모자이크 처리가 필요한 영역에 대한 모자이크를 수행하는 단계;를 더 포함하여 이뤄질 수 있다.
또한, 상기 게시하는 단계 이후에, 상기 정보 게시 서비스에 접속하여 영상을 재생하고자 하는 영상재생장치로부터 상기 영상에 대한 전송 요청을 확인하는 단계; 상기 영상재생장치의 사용자 식별 정보를 확인하는 단계; 및 상기 영상재생장치의 사용자 식별 정보가 상기 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보인 경우 상기 모자이크가 수행된 영역의 모자이크를 해제한 후 영상을 전송하거나, 상기 영상재생장치의 사용자 식별 정보가 상기 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보가 아닐 경우, 상기 사용자 식별 정보에 대응하는 키 값 및 상기 영상에 대응하여 설정된 재생 권한을 확인한 후, 상기 재생 권한에 따라 해당하는 영역의 모자이크를 복호화하여 선별적 해제한 후 영상을 전송하는 단계;를 더 포함하여 이뤄질 수 있다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 실시 예에 따른 영상 모자이크 처리 방법은 영상재생장치가, 정보 게시 서비스를 지원하는 서비스 서버로 게시된 영상의 전송을 요청하는 단계; 상기 서비스 서버로부터 영상을 수신하는 단계; 상기 수신된 영상에서 모자이크가 처리된 모자이크 영역이 존재하는 경우, 상기 모자이크 영역을 해제하기 위한 키 값 및 사용자 식별 정보를 확인하는 단계; 및 상기 확인된 키 값 및 사용자 식별 정보를 이용하여 해당하는 영역의 모자이크를 복호화하여 선별적 해제하는 단계;를 포함하여 이뤄질 수 있다.
상기 선별적 해제하는 단계는 상기 영상에 대응하여 설정된 재생 권한을 더 확인한 후, 상기 재생 권한에 따라 복호화하여 선별적 해제할 수 있다.
추가로 본 발명은 상술한 바와 같은 방법을 실행하는 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체를 제공할 수 있다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 실시 예에 따른 서비스 서버는 영상생성장치로부터 영상을 수신하는 정보 수신부; 상기 수신된 영상에서 모자이크 처리가 필요한 영역을 확인하고, 상기 모자이크 처리가 필요한 영역 각각에 대한 키 값 및 상기 키 값에 대응하는 사용자 식별 정보를 확인하고, 확인된 상기 키 값 및 사용자 식별 정보를 이용하여 상기 모자이크 처리가 필요한 영역을 암호화하여 모자이크를 수행하는 영역 처리부; 및 상기 모자이크가 수행된 영역을 포함하는 영상을 저장 및 정보 게시 서비스에 게시하는 영상 제공부;를 포함하여 이뤄질 수 있다.
이때, 상기 영역 처리부의 요청에 따라 상기 사용자 식별 정보를 확인하는 사용자 정보 관리부;를 더 포함하며, 상기 사용자 식별 정보는 상기 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보를 의미하거나, 상기 키 값에 미리 매핑된 사용자의 식별 정보를 의미할 수 있다.
또한, 상기 영역 처리부는 상기 영상이 동영상일 경우, 상기 수신된 영상에서 아이 프레임(I Frame)을 추출하고, 상기 추출된 아이 프레임을 기준으로 모자이크 처리가 필요한 영역에 대한 모자이크를 수행할 수 있다.
또한, 상기 영상 제공부는 상기 모자이크가 수행된 영역을 재생할 수 있는 재생 권한을 설정한 후 게시할 수 있다.
또한, 상기 영상 제공부는 상기 정보 게시 서비스에 접속하여 영상을 재생하고자 하는 영상재생장치로부터 영상에 대한 전송 요청이 확인되면, 상기 영상재생장치의 사용자 식별 정보를 확인하여, 상기 확인된 영상재생장치의 사용자 식별 정보가 상기 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보인 경우 상기 모자이크가 수행된 영역의 모자이크를 해제한 후 영상을 전송하거나, 상기 영상재생장치의 사용자 식별 정보가 상기 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보가 아닐 경우, 상기 사용자 식별 정보에 대응하는 키 값 및 상기 영상에 대응하여 설정된 재생 권한을 확인한 후, 상기 재생 권한에 따라 해당하는 영역의 모자이크를 복호화하여 선별적 해제한 후 영상을 전송할 수 있다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 실시 예에 따른 영상재생장치는 정보 게시 서비스를 지원하는 서비스 서버로 게시된 영상의 전송을 요청하여 수신하는 영상 수신부; 상기 영상 수신부를 통해 수신된 영상에서 모자이크가 처리된 모자이크 영역이 존재하는 경우, 상기 모자이크 영역을 해제하기 위한 키 값 및 사용자 식별 정보를 확인하고, 상기 확인된 키 값 및 사용자 식별 정보를 이용하여 해당하는 영역의 모자이크를 복호화하여 선별적 해제하는 재생 처리부; 및 상기 모자이크가 해제된 영상을 표시하는 영상 표시부;를 포함하여 구성될 수 있다.
본 발명의 영상 모자이크 처리 방법 및 이를 위한 장치에 의하면, 영상을 생성한 영상생성장치가 생성된 영상을 특정 서비스를 통해 게시하여 배포하고자 할 경우, 영상에서 특정 영역만을 모자이크 처리하여 업로드할 수 있어 사용자가 직접 영역 하나하나를 지정하여 모자이크를 처리할 필요가 없어 사용자의 편의성이 높아질 수 있다.
또한, 본 발명에 의하면 특정 서비스를 통해 게시된 영상을 재생하고자 하는 사용자에 따라 선별적으로 모자이크를 해제하여 배포함으로써, SNS 서비스 플랫폼을 통해 무분별한 개인 영상 정보가 유포되는 것을 사전에 방지할 수 있게 된다.
또한, 본 발명에 의하면, 영상을 생성한 사용자와 영상을 재생 요청한 사용자 간의 관계를 이용하여 모자이크가 설정된 영역의 모자이크를 차등적으로 해제하여 배포할 수 있어 개인 정보를 보다 더 강화함과 동시에 색다른 서비스를 제공할 수 있게 된다.
아울러, 상술한 효과 이외의 다양한 효과들이 후술될 본 발명의 실시 예에 따른 상세한 설명에서 직접적 또는 암시적으로 개시될 수 있다.
도 1은 본 발명의 실시 예에 따른 영상 모자이크 시스템을 설명하기 위한 시스템 예시도이다.
도 2는 본 발명의 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 데이터 흐름도이다.
도 3 내지 도 6은 본 발명의 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 흐름도이다.
도 7 및 도 8은 본 발명의 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 예시도이다.
도 9는 본 발명의 다른 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 데이터 흐름도이다.
도 9는 본 발명의 다른 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 데이터 흐름도이다.
도 10은 본 발명의 실시 예에 따른 영상재생장치의 주요 구성을 도시한 블록도이다.
도 11은 본 발명의 실시 예에 따른 서비스 서버의 주요 구성을 도시한 블록도이다.
이하 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있는 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예에 대한 동작 원리를 상세하게 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 이는 불필요한 설명을 생략함으로써 본 발명의 핵심을 흐리지 않고 더욱 명확히 전달하기 위함이다. 또한 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 하나, 이는 본 발명을 특정한 실시 형태로 한정하려는 것은 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
더하여, 어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급할 경우, 이는 논리적 또는 물리적으로 연결되거나, 접속될 수 있음을 의미한다. 다시 말해, 구성요소가 다른 구성요소에 직접적으로 연결되거나 접속되어 있을 수 있지만, 중간에 다른 구성요소가 존재할 수도 있으며, 간접적으로 연결되거나 접속될 수도 있다고 이해되어야 할 것이다.
또한, 본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 또한, 본 명세서에서 기술되는 "포함 한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이제 본 발명의 실시 예에 따른 영상 모자이크 처리 방법 및 이를 위한 장치에 대하여 도면을 참조하여 상세하게 설명하도록 한다. 이때, 도면 전체에 걸쳐 유사한 기능 및 작용을 하는 부분에 대해서는 동일한 도면 부호를 사용하며, 이에 대한 중복되는 설명은 생략하기로 한다.
이하, 본 발명의 실시 예에 따른 영상 모자이크 시스템에 대해 먼저 설명하도록 한다.
도 1은 본 발명의 실시 예에 따른 영상 모자이크 시스템을 설명하기 위한 시스템 예시도이다.
먼저, 도 1을 참조하면, 본 발명의 실시 예에 따른 영상 모자이크 시스템은 영상생성장치(100), 복수 개의 영상재생장치(200) 및 서비스 서버(300)를 포함하여 구성될 수 있다.
먼저, 본 발명의 영상생성장치(100)는 영상을 생성하거나 생성된 영상을 서비스 서버(300)로 전송하여 특정 정보 게시 서비스를 통해 게시하고자 하는 사용자의 장치를 의미한다.
복수 개의 영상재생장치(200)는 서비스 서버(300)로부터 게시된 특정 영상을 요청하여 수신하고 이를 재생할 수 있는 사용자의 장치를 의미한다.
이와 같이 본 발명의 영상생성장치(100) 및 복수 개의 영상재생장치(200)는 영상을 생성하고 재생하는 관점에서 분류한 것으로, 영상생성장치(100)가 서비스 서버(300)로 게시된 영상을 요청하여 수신하고자 할 경우 영상재생장치의 역할을 수행할 수 있다. 또한, 영상재생장치(200)가 영상을 생성하여 서비스 서버(300)로 전송하여 게시하고자 할 경우 영상생성장치의 역할을 수행할 수도 있다.
아울러, 이하의 설명에서는 영상재생장치(200)에 대한 구분이 필요한 경우, 영상재생장치A(200A), 영상재생장치B(200B)의 형태로 지칭하여 설명하도록 하나, 불특정 영상재생장치를 지칭하고자 할 경우 영상재생장치(200)로 지칭하여 설명하도록 한다.
이러한 본 발명의 영상생성장치(100) 및 영상재생장치(200)은 다양한 형태로 구현될 수 있다. 예를 들어, 스마트 폰(smart phone), 타블렛 PC(Tablet PC), PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), MP3 Player 등의 이동 단말기는 물론, 스마트 TV(Smart TV), 데스크탑 컴퓨터 등과 같은 고정 단말기가 사용될 수 있으며, 통신망(500)을 경유하여 서비스 서버(300)와 영상을 송수신할 수 있는 장치라면 그 어떠한 장치도 본 발명의 영상생성장치(100) 및 영상재생장치(200)로 적용 가능하다.
아울러, 본 발명의 영상생성장치(100) 및 영상재생장치(200)는 동일한 사용자의 장치가 될 수도 있다. 즉, 사용자가 스마트폰을 이용하여 영상을 생성한 후 서비스 서버(300)로 전송하여 특정 정보 게시 서비스에 게시하고자 한 경우, 스마트 폰은 영상생성장치(100)가 될 수 있다. 그리고, 사용자가 PC를 통해 상기 정보 게시 서비스에 접속하여 게시한 영상을 요청한 경우, PC는 영상재생장치(200)가 될 수 있다. 또한 사용자는 정보 게시 서비스에 가입된 가입자 정보를 이용하여 해당 서비스에 로그인할 수 있으며, 서비스 서버(300)는 가입자 정보를 통해 영상생성장치(100) 및 영상재생장치(200)의 사용자가 동일한 사용자임을 확인할 수 있다.
아울러, 영상생성장치(100)와 영상재생장치(200)는 서로 다른 사용자의 장치가 될 수도 있다. 즉, 사용자가 영상을 서비스 서버(300)로 전송하여 정보 게시 서비스에 게시한 경우, 해당 정보 게시 서비스에 게시된 영상은 불특정 다수의 영상재생장치(200)에 의해 접근 가능한 상태가 될 수 있으며, 이 경우 불특정 다수의 영상재생장치(200)는 사용자와 관계가 설정된 지인이 될 수 있으며, 그렇지 않은 타인이 될 수도 있다.
아울러, 본 명세서에서 기술하는 정보 게시 서비스란 서비스 서버(300) 또는 서비스 서버(300)와 연동 가능한 특정 서버(미도시)에서 제공하는 정보 게시 서비스를 의미하는 것으로, 예컨대, 블로그, 인스타그램, 트위터와 같은 개인 SNS 서비스 플랫폼을 기반으로 하는 서비스는 물론 카페, 클럽, 밴드 등의 각종 인터넷 커뮤니티 서비스를 포함하는 개념일 수 있다. 또한 본 발명의 정보 게시 서비스는 CCTV 시스템과 같이 실시간 영상 감시 시스템을 포함할 수 있다.
즉, 본 명세서에서 기술하는 정보 게시 서비스란 영상이 불특정 다수에게 공개될 수 있는 상태의 서비스를 의미하는 것으로, 영상생성장치(100)에서 영상을 수신하고, 이를 저장하거나 특정 장소에 게시하여 불특정 다수의 접근을 지원할 수 있는 서비스의 총칭이 될 수 있다.
본 발명의 서비스 서버(300)는 상술한 정보 게시 서비스를 직접 지원하거나 또는 정보 게시 서비스를 지원하는 특정 서버(미도시)와 연동하여 영상 모자이크 처리 서비스를 제공하는 장치를 의미한다.
특히, 본 발명의 서비스 서버(300)는 영상생성장치(100)로부터 영상을 수신하고 수신된 영상에서 모자이크 처리가 필요한 영역을 확인할 수 있으며, 모자이크 처리가 필요한 영역에 대한 키 값을 확인하고, 확인된 키 값 및 사용자 식별 정보를 이용하여 모자이크 처리가 필요한 영역에 대한 모자이크를 수행할 수 있다. 그리고 본 발명의 서비스 서버(300)는 모자이크가 수행된 영역을 포함하는 영상을 저장하거나 정보 게시 서비스를 통해 게시할 수 있다.
이후, 본 발명의 서비스 서버(300)는 영상재생장치(200)로부터 모자이크 처리된 영상의 전송 요청이 확인되면, 상기 영상재생장치(200)로 영상을 전송할 수 있으며, 이때, 영상에서 모자이크 처리된 영역을 선별적으로 해제하여 영상재생장치(200)로 전송할 수도 있다.
아울러, 본 발명의 모자이크 처리를 수행하고자 하는 영상은 정지 영상 및 동영상을 모두 포함할 수 있으며, 본 발명의 서비스 서버(300)는 영상이 동영상인 경우, 아이 프레임을 기준으로 모자이크 처리가 필요한 영역에 대한 모자이크를 수행할 수도 있다.
이러한 본 발명의 서비스 서버(300)는 모자이크 처리 과정을 수행하는 모자이크 서버(미도시) 및 사용자를 인증하고 사용자 별로 선별적으로 모자이크가 해제된 영상을 제공하기 위한 인증 서버(미도시)를 포함하는 형태로 구현될 수 있다.
한편, 상술한 과정을 지원하는 통신망(500)은 인터넷 망과 같은 IP 기반의 유선 통신망뿐만 아니라, LTE(Long term evolution) 망, WCDMA 망과 같은 이동통신망, Wi-Fi망과 같은 다양한 종류의 무선망, 및 이들의 조합으로 이루어질 수 있으며, 이러한 통신망(500)은 접속망, 백본망, 인터넷망을 포함하여 구성될 수 있으나, 구체적인 구성 및 통신망에서의 동작은 공지된 다양한 기술을 적용할 수 있으므로, 구체적인 설명에 대해서는 생략하도록 한다.
또한, 본 발명의 통신망(500)은 하드웨어, 소프트웨어 등의 컴퓨팅 자원을 저장하고, 클라이언트가 필요로 하는 컴퓨팅 자원을 해당 단말기로 제공할 수 있는 클라우드 컴퓨팅망을 포함할 수 있다. 여기서, 클라우드 컴퓨팅이란 정보가 인터넷 상의 서버에 영구적으로 저장되고, 데스크톱, 태블릿 컴퓨터, 노트북, 넷북, 스마트폰 등의 클라이언트 단말기에는 일시적으로 보관되는 컴퓨터 환경을 의미하며, 클라우드 컴퓨팅은 이용자의 모든 정보를 인터넷 상의 서버에 저장하고, 이 정보를 각종 IT 기기를 통하여 언제 어디서든 이용할 수 있도록 하는 컴퓨터 환경 접속망을 의미한다.
이하, 본 발명의 실시 예에 따른 영상 모자이크 시스템에서 이뤄지는 본 발명의 동작에 대해 설명하도록 한다.
도 2는 본 발명의 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 데이터 흐름도이다.
도 2를 참조하면, 본 발명의 실시 예에 따른 영상 모자이크 처리 방법에서, 먼저 영상생성장치(100)는 영상을 생성한다(S101). 이때 본 발명의 영상생성장치(100)는 정지영상 또는 동영상의 형태로 영상을 생성할 수 있다.
이후, 본 발명의 영상생성장치(100)는 특정 정보 게시 서비스로 생성된 영상을 게시하기 위하여 서비스 서버(300)로 생성된 영상을 전송한다(S103). 이때, 본 발명의 영상생성장치(100)는 미리 기 생성된 영상을 저장하고 있는 상태라면, 별도로 영상을 생성하지 않더라도 기 저장된 영상을 서비스 서버(300)로 전송할 수도 있다.
또한, 본 발명의 영상생성장치(100)는 서비스 서버(300)로 영상을 전송하기 이전에, 미리 서비스 서버(300)에 접속한 상태에서, 로그인을 위한 사용자 인증이 완료된 상태일 수 있다.
아울러, 본 발명의 특정 정보 게시 서비스는 서비스 서버(300) 또는 서비스 서버(300)와 연동 가능한 특정 서버(미도시)에서 제공하는 정보 게시 서비스를 의미하는 것으로, 예컨대, 블로그, 인스타그램, 트위터와 같은 개인 SNS 서비스 플랫폼을 기반으로 하는 서비스는 물론 카페, 클럽, 밴드 등의 각종 인터넷 커뮤니티 서비스를 포함하는 개념일 수 있다. 또한 본 발명의 정보 게시 서비스는 CCTV 시스템과 같이 실시간 영상 감시 시스템을 포함할 수 있다.
즉, 본 명세서에서 기술하는 정보 게시 서비스란 영상이 불특정 다수에게 공개될 수 있는 상태의 서비스를 의미하는 것으로, 영상을 수신하고, 이를 저장하거나 특정 장소에 게시하여 불특정 다수의 접근을 지원할 수 있는 서비스의 총칭이 될 수 있다.
본 발명의 서비스 서버(300)는 상술한 정보 게시 서비스를 직접 지원하거나 또는 정보 게시 서비스를 지원하는 특정 서버(미도시)와 연동할 수 있으며, 정보 게시 서비스에 업로드되는 영상에서 특정 영역을 모자이크 처리하여 제공할 수 있는 장치를 의미한다.
이러한 서비스 서버(300)는 영상생성장치(100)로부터 영상이 수신되면 수신된 영상에서 모자이크 처리가 필요한 영역을 확인하여(S105), 모자이크 처리가 필요한 영역에 대한 모자이크를 수행할 수 있다. 여기서, 모자이크 처리가 필요한 영역은 얼굴 영역, 차량 번호판과 같은 개인 정보가 노출될 수 있는 영역을 의미하며, 사전에 정보 게시 서비스에 가입된 사용자의 설정 또는 서비스 제공자의 설정에 따라 지정될 수 있다.
아울러, 본 발명의 서비스 서버(300)는 모자이크 처리가 필요한 영역에 대한 키 값, 사용자 식별 정보를 확인하고(S107), 확인된 키 값 및 사용자 식별 정보를 이용하여 영역에 대한 모자이크를 수행하게 된다(S109). 이때, 본 발명의 서비스 서버(300)는 S103 단계에서 수신된 영상이 동영상일 경우, 영상에서 아이 프레임(I Frame)을 추출하게 되며, 상기 추출된 아이 프레임을 기준으로 모자이크 처리가 필요한 영역을 검출하여 모자이크를 수행할 수도 있다.
이후, 본 발명의 서비스 서버(300)는 모자이크가 수행된 영역을 포함하는 영상을 저장하여(S111), 정보 게시 서비스를 통해 불특정 다수에게 공개될 수 있는 환경에 게시하거나 또는 정보 게시 서비스를 제공하는 특정 서버(미도시)로 모자이크 처리된 영상을 전달하여 정보 게시 서비스를 통해 공개될 수 있도록 지원할 수도 있다.
이러한 상태에서, 본 발명의 서비스 서버(300)는 어느 하나의 영상재생장치로부터 모자이크 처리된 영상에 대한 전송 요청이 발생되면, 영상을 요청한 사용자에 따라 선별적으로 모자이크를 해제하여 전송할 수도 있다. 여기서 영상에 대한 전송 요청이란 모자이크 처리된 영상이 게시된 서비스에 접속하여 해당 영상을 요청한 상태를 의미한다.
예를 들어 영상재생장치A(200A)가 서비스 서버(300)로 영상생성장치(100)가 생성한 영상을 요청(S113), 본 발명의 서비스 서버(300)는 영상재생장치A(200A)의 사용자 식별 정보를 확인하고, 사용자 식별 정보에 대응하는 키 값을 확인한 후(S115), 사용자 식별 정보 및 키 값에 대응하여 해제 가능한 영역의 모자이크를 해제할 수 있다(S117). 이때 S113 단계에서 영상재생장치A(200A)는 서비스 서버(300)에 접속하여 사용자 인증을 수행한 상태일 수 있으며 이 과정에서 가입자 정보인 사용자 식별 정보가 확인될 수 있다.
이와 같이, 본 발명의 서비스 서버(300)는 영역에 대한 모자이크 처리 단계에서 키 값 및 사용자 식별 정보를 암호화 값으로 이용하여 모자이크를 처리하였으므로, 동일한 키 값 및 사용자 식별 정보를 이용하여 암호화된 모자이크 영역을 복호화하여 모자이크를 해제할 수 있게 된다.
이후, 본 발명의 서비스 서버(300)는 모자이크가 해제된 영상을 서비스 서버(300)가 영상재생장치A(200A)로 전송할 수 있다.
또한, 또 다른 영상재생장치B(200B)가 서비스 서버(300)로 영상생성장치(100)가 생성한 영상을 요청한 경우(S115), 서비스 서버(300)는 마찬가지로 영상재생장치B(200B)의 사용자 식별 정보를 확인하고, 사용자 식별 정보에 대응하는 키 값을 확인한 후(S123), 확인된 사용자 식별 정보 및 키 값을 이용하여 해제 가능한 영역의 모자이크를 해제하고(S125), 영상재생장치B(200B)로 전송할 수 있다.
이때, S117 단계에서 모자이크 해제되는 영역과 S125 단계에서 모자이크 해제되는 영역은 서로 다를 수 있다. 즉, 본 발명의 서비스 서버(300)는 S109 단계에서 모자이크 수행 시 모자이크를 수행하고자 하는 각각의 영역별로 서로 다른 키 값 및 사용자 식별 정보를 이용하여 암호화한 후 모자이크를 수행하였기에, 이를 복호화하기 위해 사용되는 정보가 서로 다르므로, 해당되는 영역만을 해제 하게 되므로, 각 영상재생장치(200)에서 재생되는 영상은 동일한 영상이지만, 모자이크가 설정된 영역은 서로 다르게 설정되어 표시될 수 있다.
이하에서는 이러한 본 발명의 서비스 서버(300)의 동작에 대해 보다 더 구체적으로 설명하도록 한다.
도 3 내지 도 6은 본 발명의 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 흐름도이며, 도 7 및 도 8은 본 발명의 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 예시도이다.
먼저, 도 3을 참조하여 설명하도록 한다.
도 3은 본 발명의 일 실시 예에 따른 영상 모자이크 처리 과정을 설명하기 위한 흐름도로, 도 1 및 도 3을 참조하면, 본 발명의 서비스 서버(300)는 먼저 모자이크를 수행하고자 하는 영상을 확인한다(S201). 영상을 확인하는 과정은 영상생성장치(100)에서 생성된 영상을 수신함으로써 확인하거나 미리 수신되어 저장된 영상을 확인할 수 있다.
그리고, 본 발명의 서비스 서버(300)는 영상에서 모자이크 처리가 필요한 영역, 예컨대 얼굴 영역이 존재하는 지 확인하여 얼굴 영역이 존재할 경우 해당 얼굴 영역을 추출한다(S203). 이때, 본 발명의 서비스 서버(300)가 추출하는 영역이 얼굴 영역에 한정되는 것은 아니다.
또한, 본 발명의 서비스 서버(300)가 얼굴 영역을 추출하는 과정은 종래의 알려진 다양한 방식의 영상 처리 기술을 적용할 수 있다. 예를 들어 본 발명의 서비스 서버(300)는 AdaBoost 방법, 신경망 기반 검출 방법(Neural Network based method), 통계적 방법(Statistical Method)으로 얼굴 영역을 검출할 수 있다. 여기서, AdaBoost는 분류기(Weak classifier)로 구성된 여러 개의 단계(stage)가 캐스캐이드(cascade) 형태로 연결된 구조로, 현 단계에서 검출에 실패하면 그 서브 윈도우(sub-window, 얼굴 후보)를 얼굴이 아닌 영상, 즉 '비 얼굴'로 판별하며, 현 단계에서 검출에 성공한 서브 윈도우만 다음 단계에 입력되며, 마지막 단계까지 검출에 성공하면 '얼굴'로 판별할 수 있다. 이때, 정면을 보는 얼굴이 아닌 옆모습 또는 고개를 돌리거나 기울인 얼굴을 판별하기 위해, X, Y, Z축으로 각각 기울어진 얼굴 모습을 이용하여 상기 분류기를 학습할 수 있다. 또한 다양한 크기의 얼굴을 검출하기 위해 윈도우 하나로 얼굴을 검출하는 것보다 XY축에 평행한 서브 윈도우의 크기를 변화시킨 것을 적용할 수 있다.
반면, 신경망 기반 검출 방법은 신경망으로 연결된 네트워크는 이미지의 작은 윈도우들을 검사하여 각각의 윈도우가 얼굴을 포함하는지 판단한다. 또한 다중 네트워크들을 조절하여 하나의 네트워크로 결정하는 것보다 높은 성능을 제공할 수 있다. 네가티브 예(negative example)을 추출하여 얼굴을 판명하는데 오류가 난 경우를 이용하여 신경망 회로를 교육시킬 수 있다.
또한, 통계적 방법을 적용할 수 있다. 통계적 방법은 부분화된 파트(localized parts)의 통계치에 기반한 분류자(classifier)를 적용하여 사물을 인식할 수 있다. 분류자는 각 파트와 이미지를 매칭시킨 결과를 계산하고 해당 분류의 조건에 따라 확률을 구한다. 그리고 유사도(likelihood ratio) 테스트를 통해 인식된 사물에 대해 결정할 수 있다.
아울러, 본 발명의 서비스 서버(300)는 검출된 얼굴 영역을 대상으로 색공간 상에서 사전에 정의된 표준 피부색 모델을 이용하여 피부색에 해당하는 픽셀을 추출하고, 얼굴로 검출된 영역에서 피부색을 가지는 부분이 어느 정도인지를 검토하여 최종 얼굴 영역을 추출할 수도 있다.
이외에도, 본 발명의 서비스 서버(300)는 공지된 다양한 방식을 이용하여 얼굴 영역을 추출할 수 있다.
또한, 본 발명의 서비스 서버(300)는 얼굴 영역 추출 시 얼굴의 특징점을 검출할 수 있으며, 검출된 특징점을 이용하여 얼굴 영역에 대응하는 얼굴 키 값을 확인할 수 있다(S205). 본 발명의 얼굴 키 값은 얼굴의 특징점을 이용하여 생성되며, 서비스 서버(300)에 의해 관리될 수 있는 고유의 키 값을 의미하는 것으로, 검출된 사용자의 얼굴 영역에 대응하여 서로 다르게 할당되어 얼굴 영역을 식별하는 데 사용될 수 있는 키 값을 의미한다.
본 발명의 서비스 서버(300)는 추출된 얼굴 영역에 대응하는 얼굴 키 값을 확인하여 얼굴 키 값이 없는 것으로 확인되면(S207), 먼저 얼굴 영역에 대응하는 얼굴 키 값을 생성하는 과정을 수행할 수 있다(S209). 이때, 생성되는 얼굴 키 값은 예컨대 얼굴 고유의 특징점에 대한 시그니쳐 값을 이용하여 생성될 수 있으며, 추출된 얼굴 영역에 매핑되어 저장될 수 있다. 예를 들어, 추출된 얼굴 영역이 수평(horizontal) xx ~ xx이고, 수직(vertical) hh ~ hh이라고 할 경우, 상기 추출된 얼굴 영역에 매핑하여 얼굴 키 값을 저장할 수 있다.
이때, 서비스 서버(300)는 얼굴 영역에 대응하는 얼굴 키 값이 존재하지 않을 경우, 얼굴 키 값을 이용한 사용자 식별 정보 확인이 어려울 수 있으므로, 사용자로부터 얼굴 키 값에 대응하는 사용자 식별 정보에 대한 수동 입력을 요청할 수도 있다.
즉, 본 발명의 서비스 서버(300)는 기본적으로 정보 게시 서비스에 가입된 사용자들을 대상으로 사용자 식별 정보 및 얼굴 키 값이 매칭되어 저장된 상태에서 그 이후의 동작이 원활히 이뤄질 수 있으며, 정보 게시 서비스에 가입된 사용자이나 얼굴 키 값과 사용자 식별 정보가 매칭되어 미리 저장되어 있지 않다면, 이를 먼저 저장하도록 유도할 수도 있다.
그리고 본 발명의 서비스 서버(300)는 생성된 얼굴 키 값 및 사용자 식별 정보를 이용하여 추출된 얼굴 영역 각각을 암호화하여 모자이크 처리할 수 있다(S211).
이때, 본 발명의 서비스 서버(300)는 얼굴 영역 모자이크 처리 시, 얼굴 영역에 대응하는 고유의 얼굴 키 값과 상기 얼굴 키 값에 대응하여 미리 매핑된 사용자 식별 정보를 이용하여 모자이크 처리할 수 있다. 이때의 사용자 식별 정보는 정보 게시 서비스에 가입된 사용자 식별 정보이자 얼굴 키 값에 대응하여 미리 매핑된 사용자 식별 정보를 의미한다.
본 발명의 서비스 서버(300)는 생성된 얼굴 키 값과 확인된 사용자 식별 정보를 이용하여 추출된 얼굴 영역을 모자이크 처리할 수 있다(S211).
이후, 본 발명의 서비스 서버(300)는 사용자 식별 정보 및 생성된 얼굴 키 값을 이용하여 얼굴 영역을 모자이크한 후 각각의 얼굴 영역에 대한 재생 권한을 설정할 수도 있는데, 이를 위해 본 발명의 서비스 서버(300)는 사용자 식별 정보를 이용하여 관계 정보를 확인하게 된다(S213). 여기서 관계 정보를 확인하는 데 사용되는 사용자 식별 정보는 영상을 게시하고자 하는 사용자의 식별 정보로, 정보 게시 서비스에 가입된 가입자 정보를 의미한다. 상기 가입자 정보에는 정보 게시 서비스에서 관리되는 관계 정보를 포함할 수 있는데, 예컨대, 친구 관계, 이웃 관계 등을 확인할 수 있다.
그리고, 본 발명의 서비스 서버(300)는 관계 정보를 확인한 후, 관계 정보에 따라 재생 권한을 설정할 수 있다(S215). 예를 들어, 영상에서 추출된 얼굴 영역이 3개가 존재한다고 가정하고, 이 중 하나의 얼굴 영역이 영상을 게시하고자 하는 사용자의 얼굴 영역이며 2개의 얼굴 영역이 타인의 얼굴 영역이라고 가정한다. 타인의 얼굴 영역 중 1개의 얼굴 영역은 사용자와 관계가 설정된 지인 관계가 될 수 있으며 다른 1개의 얼굴 영역은 사용자와 전혀 관계가 없는 사람의 얼굴 영역이 될 수 있으며, 모든 사용자들이 동일한 정보 게시 서비스에 가입된 상태라 가정한다. 이러한 상태에서, 본 발명의 서비스 서버(300)는 영상을 게시하고자 하는 사용자 식별 정보에 해당하는 관계 정보를 확인할 수 있으며, 그 결과 동일한 서비스 가입자이나, 서로 관계가 설정되어 있지 않을 경우, 관계가 설정되어 있지 않은 타인이 영상을 요청하더라도, 해당 사용자의 얼굴 영역의 모자이크는 해제되지 않도록 재생 권한을 설정할 수 있다.
아울러, 본 발명의 서비스 서버(300)는 영상 전체에 대한 재생 권한을 설정할 수도 있다. 예를 들어, 정보 게시 서비스가 블로그 서비스를 의미할 경우, 해당 블로그 서비스를 통해 게시되는 정보들은 '이웃', '서로 이웃'과 같은 형태로 접근할 수 있는 권한을 부여할 수 있다. 또한, 정보 게시 서비스가 클럽, 카페, 밴드와 같은 커뮤니티 서비스를 의미하는 경우 해당 커뮤니티 서비스를 통해 게시되는 정보들은 '전체 공개', '멤버 공개'와 같은 형태로 접근의 범위를 결정할 수 있다.
이와 같이, 본 발명의 서비스 서버(300)는 해당 정보 게시 서비스에서 제공되는 관계 정보를 이용하여 재생 권한을 설정할 수 있으며, 또한, '딸', '아들'과 같이 사용자가 직접 설정하여 범위를 결정할 수도 있으며, 전화번호부를 이용하여 상호 간의 서로 등록된 사용자의 관계를 통해 재생 권한을 설정할 수도 있다.
또한 전술한 바와 같이 영역 각각에 대한 관계를 고려하여 재생 권한을 설정할 수 있으며, 이러한 과정은 서비스 서버(300)에 의해 자동적으로 설정되거나 사용자가 직접 설정할 수도 있다. 이 외에도 다양한 방식으로 영상에 접근할 수 있는 사용자의 범위에 대한 재생 권한을 설정할 수 있다.
그리고, 본 발명의 서비스 서버(300)는 영상을 저장하고(S217), 해당 정보 게시 서비스를 통해 게시되는 과정을 지원할 수 있다.
본 발명의 일 실시 예에서는 얼굴 영역에 대응하여 생성되는 얼굴 키 값 및 상기 얼굴 키 값에 매핑된 각각의 사용자 식별 정보, 즉 정보 게시 서비스에 미리 가입된 각각의 가입자 정보를 이용하여 각각의 얼굴 영역을 모자이크 처리하는 것을 예로 들어 설명하나, 정보 게시 서비스에 미리 가입된 사용자가 아닐 경우에는 영상을 게시하고자 하는 사용자 식별 정보를 이용하여 모자이크 처리할 수도 있다.
이에 대해 도 4를 참조하여 설명하도록 한다.
도 4는 본 발명의 다른 실시 예에 따른 영상 모자이크 처리 과정을 설명하기 위한 흐름도이다.
도 4에 도시된 S301 ~ S305 과정은 도 3을 참고하여 설명한 S201 ~ S205 과정과 동일하므로 구체적인 설명은 생략하도록 한다.
그리고, 서비스 서버(300)는 S305 단계에서 확인된 얼굴 키 값에 대응하여 매핑된 사용자 식별 정보를 확인한다(S307).
상기 확인 결과, 얼굴 키 값에 대응하여 매핑된 사용자 식별 정보가 존재하지 않을 경우(S309), 영상생성장치의 사용자 식별 정보, 다시 말해 영상 게시자의 사용자 식별 정보를 확인한다(S311). 즉, 영상을 정보 게시 서비스에 게시하고자 하는 사용자 식별 정보를 확인하게 되는 데, 상기 사용자 식별 정보는 S301 단계에서 확인될 수도 있다.
그리고, 얼굴 키 값에 대응하는 사용자 식별 정보가 없는 영역에 대해서는 S305 단계에서 확인된 얼굴 키 값 및 S311 단계에서 확인된 사용자 식별 정보를 이용하여 암호화한 후 얼굴 영역을 모자이크 처리하게 된다(S313).
즉, 영상 게시자의 얼굴이 아니고, 정보 게시 서비스에 가입된 사용자가 아닐 경우, 대응하는 사용자 식별 정보 확인이 어려운 상태이므로, 서비스 서버(300)는 해당 영역의 모자이크 해제가 불가능하게 무조건 모자이크를 수행할 수 있으며, 구현 방식에 따라 영상 게시자의 식별 정보를 이용하여 해당 영역을 암호화한 후 모자이크를 수행할 수 있다. 이때, 영상 게시자의 사용자 식별 정보로 이용하여 모자이크 처리된 영역은 영상을 요청한 사용자가 영상 게시자이라면 영상 게시자의 사용자 식별 정보만으로 복호화가 이뤄지도록 설정될 수도 있다.
서비스 서버(300)는 이러한 과정을 통해 각각의 영역에 대한 모자이크를 수행하고, 재생 권한을 설정한 후(S315) 영상을 저장하여 정보 게시 서비스를 통해 게시되는 과정을 수행할 수 있다(S317).
한편, 본 발명의 서비스 서버(300)는 추출된 얼굴 영역의 크기를 이용하여 재생 권한을 설정할 수도 있다.
이에 대해 도 5를 참조하여 설명하도록 한다.
도 5는 본 발명의 또 다른 실시 예에 따른 영상 모자이크 처리 과정을 설명하기 위한 흐름도이다.
도 5를 참조하면, 본 발명의 서비스 서버(300)는 영상을 먼저 모자이크를 수행하고자 하는 영상을 확인한다(S401). 영상을 확인하는 과정은 영상생성장치(100)에서 생성된 영상을 수신함으로써 확인하거나 미리 수신되어 저장된 영상을 확인할 수 있다.
그리고, 본 발명의 서비스 서버(300)는 영상에서 얼굴 영역이 존재하는 지 확인하여 얼굴 영역이 존재할 경우 해당 얼굴 영역을 추출한다(S403). 이때, 본 발명의 서비스 서버(300)가 추출하는 영역이 얼굴 영역에 한정되는 것은 아니며 지정된 특정 영역을 추출할 수도 있다.
그리고 서비스 서버(300)는 추출된 얼굴 영역이 일정 크기 이상인지 여부를 판단한다(S405).
상기 판단의 기준은 서비스 서버(300)에 의해 자동적으로 설정된 것으로, 영상에 존재하는 중심이 되는 피사체와 배경이 되는 피사체를 구분하기 위한 기준이 될 수 있다.
상기 판단 결과, 일정 크기 이상인 경우, 본 발명의 서비스 서버(300)는 일정 크기 이상인 얼굴 영역을 대상으로 얼굴 영역에 대응하는 얼굴 키 값을 확인하고(S407), 얼굴 키 값에 대응하는 사용자 식별 정보를 확인한 후(S409), 얼굴 키 값 및 사용자 식별 정보를 이용하여 얼굴 영역을 모자이크 처리할 수 있다(S411). 또한 서비스 서버(300)는 도 3 및 도 4를 참조하여 설명한 바와 같이 모자이크 해제를 위한 재생 권한을 설정할 수 있으며(S413), 재생 권한이 설정된 영상을 저장하게 된다(S415).
반면, S405 단계에서 추출된 얼굴 영역이 일정 크기 미만인 경우에는 해당 얼굴 영역에 대한 얼굴 키 값 확인하는 과정 없이 무조건 얼굴 영역을 모자이크를 처리할 수도 있다(S417).
즉, 영상을 생성한 사용자의 의도와는 무관하게 영상 촬영 당시에 촬영된 타인의 얼굴이라고 확인이 되는 경우로 판단하여, 그 어떠한 경우에도 모자이크 해제되지 않고 정보 게시되도록 처리할 수도 있다. 아울러 경우에 따라서는 영상을 생성한 사용자 또는 관리자만 해당 얼굴 영역을 모자이크 해제하여 확인할 수 있도록 처리할 수도 있다.
아울러, 영상생성장치(100)의 사용자, 즉 영상을 게시하고자 하는 영상 게시자가 서비스 서버(300)가 지원하는 정보 게시 서비스에 가입된 상태가 아니라고 할 경우, 본 발명의 서비스 서버(300)는 일회용 식별정보를 발급하여 모자이크 처리 과정을 지원할 수 있다.
이에 대해 도 6을 참조하여 설명하도록 한다.
도 6은 본 발명의 또 다른 실시 예에 따른 영상 모자이크 처리 과정을 설명하기 위한 흐름도이다.
도 6을 참조하면, 본 발명의 서비스 서버(300)는 S601 단계에서 영상생성장치(100)로부터 영상을 수신할 수 있다(S601). 이때, 서비스 서버(300)는 영상생성장치(100)의 사용자 식별 정보, 즉 영상 게시자의 사용자 식별 정보를 확인하여(S603), 사용자 식별 정보가 존재하는 지 여부를 확인하여(S605), 해당 영상 게시자가 게시하고자 하는 정보 게시 서비스에 가입된 상태인지를 확인할 수 있다.
확인 결과, 사용자 식별 정보가 존재하지 않을 경우, 서비스 서버(300)는 일회용 식별 정보를 생성하고(S607), 얼굴 키 값 및 일회용 식별 정보를 이용하여 얼굴 영역을 모자이크 처리한 후(S609), 영상을 저장하는 과정을 지원할 수 있다(S613).
반면, S605 단계에서 사용자 식별 정보가 존재하는 경우, 서비스 서버(300)는 전술한 바와 같이 얼굴 키 값 및 가입자 정보인 사용자 식별 정보를 이용하여 얼굴 영역을 모자이크 처리할 수 있게 된다(S611).
이러한 서비스 서버(300)에서의 영상 모자이크 처리 방법에 대해 예시도를 참조하여 설명하도록 한다.
도 7 및 도 8은 본 발명의 일 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 예시도로, 먼저 도 7에 도시된 것은 영상재생장치A(200A)가 영상생성장치의 역할을 수행하여 서비스 서버(300)에 영상(image001)를 업로드하고, 서비스 서버(300)는 영상(image001)에서 얼굴 영역을 각각 추출하여 이를 모자이크 처리한 상태인 것을 가정하여 설명하도록 한다. 이때, 서비스 서버(300)는 업로드된 영상에서 모자이크 처리가 완료되어 정보 게시 서비스를 통해 게시되도록 저장할 때, 영상의 파일명을 변경할 수 있는데, 예컨대 영상을 생성 또는 게시한 영상 게시자인 영상재생장치A(200A)의 식별 정보를 이용하여 모자이크 처리된 영상(image001_hj)의 형태로 저장할 수 있다.
그리고, 서비스 서버(300)는 영상에서 모자이크 처리가 필요한 영역, 즉 얼굴 영역을 각각 추출할 수 있으며, 추출된 얼굴 영역 각각에 대해 얼굴 키 값을 확인할 수 있다. 예를 들어 A 얼굴 영역은 얼굴 키 값이 F001이며, B 얼굴 영역은 얼굴 키 값이 F002이며, C 얼굴 영역은 F003으로 가정한다. 그리고, 서비스 서버(300)는 얼굴 키 값에 대응하여 미리 매핑된 사용자 식별 정보를 각각 확인한다. 이때, 영상 속에 존재하는 세 명의 사용자 모두 해당 정보 게시 서비스에 가입된 사용자 일 경우, 서비스 서버(300)는 이러한 사용자에 대한 사용자 식별 정보를 관리하고 있을 수 있으므로, F001에 대응하는 사용자 식별 정보 hj, F002에 대응하는 사용자 식별 정보 kA, F003에 대응하는 사용자 식별 정보 JO를 확인할 수 있다.
이후, 서비스 서버(300)는 확인된 얼굴 키 값 및 사용자 식별 정보를 이용하여 각각의 얼굴 영역을 암호화하여 모자이크 처리하게 된다.
또한, 모자이크된 영상(image001_hj)를 저장 시 서비스 서버(300)는 영상 게시자와의 관계 정보에 따라 영상에 접근할 수 있는 재생 권한을 설정하여 저장할 수 있다.
이러한 상태에서, 영상재생장치A(200A)가 서비스 서버(300)로 모자이크된 영상(image001_hj)을 요청한 상태라면, 서비스 서버(300)는 영상재생장치A(200A)의 식별 정보 hj를 확인하고, 해당 사용자는 영상 게시자임을 확인할 수 있다. 그리고 서비스 서버(300)는 영상 게시자이므로, A, B, C 영역 모두의 모자이크를 해제한 후 모자이크가 해제된 영상을 영상재생장치A(200A)로 전송할 수 있다. 그러나 이에 반드시 한정되는 것은 아니며, 해당 얼굴 영역의 모자이크만 해제, 즉 A 영역의 모자이크만을 해제한 후 영상재생장치A(200A)로 전송할 수도 있다.
또 다른 예를 들어 영상재생장치B(200B)가 모자이크된 영상(image001_hj)를 요청한 경우, 서비스 서버(300)는 상기 영상재생장치B(200B)의 사용자 식별 정보(kA)를 확인하고 이에 대응하는 얼굴 키 값(F002)를 확인할 수 있다. 그리고 모자이크된 영상(image001_hj)에서 해당되는 얼굴 영역이 있는 지를 확인하고, B 영역의 모자이크를 확인된 얼굴 키 값(F002) 및 사용자 식별 정보(kA)를 이용하여 복호한 후 해제할 수 있게 된다.
반면, 영상 게시자의 사용자 식별 정보(hj)와 영상재생장치B(200B)의 사용자 식별 정보(kA)를 이용하여 관계 정보를 확인한 후 재생 권한이 있는 것으로 확인되면, 영상 게시자의 얼굴 영역, 즉 A 영역의 모자이크를 해제한 후 영상재생장치B(200B)로 전송할 수도 있다.
또 다른 예를 들어, 영상재생장치C(200C)가 모자이크된 영상(image001_hi)을 요청하였으나, 영상 게시자와 관계 정보가 설정되지 않은 사용자인 경우, 서비스 서버(300)는 영상재생장치C(200C)의 사용자 식별 정보와 얼굴 키 값을 알고 있더라도 해당하는 C 영역의 모자이크를 해제하지 않을 수도 있다. 이후 영상재상장치C(200C)의 사용자가 영상 게시자와 관계 정보가 설정된 상태로 변경되면 서비스 서버(300)는 C 영역의 모자이크를 해제한 후 영상재생장치C(200C)로 전송할 수도 있다.
또한 다른 관점에서, 영상게시자가 영상을 업로드 시, 서비스 서버(300)는 영상에서 얼굴 영역을 모자이크 처리한 후 저장할 때, 영상 게시자의 설정에 의해 재생 권한을 설정할 수 있다. 예컨대, '전체 공개', '친구만 공개'의 형태로 재생 권한을 설정할 수 있으며, '전체 공개'로 설정되어 있을 경우, 영상을 요청한 사용자는 모든 모자이크가 해제된 영상을 확인할 수 있게 된다. 반면 '친구만 공개'로 되어 있다면, 사용자 식별 정보를 이용하여 관계 정보를 확인하고 이에 따라 특정한 영역만을 모자이크 해제하여 확인할 수 있게 된다.
또한, 본 발명의 관계 정보는 정보 게시 서비스에서 통용되는 관계 정보만 이용하는 것이 아니라 전화번호 등의 주소록을 기반으로 한 관계 정보를 의미할 수도 있다.
예컨대, 영상게시자인 영상생성장치(100)와 영상요청자인 영상재생장치(200) 간에 저장된 주소록에 쌍방에 대한 정보가 저장되어 있을 경우, 서로 관계가 있는 상태인 것으로 확인하여, 설정된 재생 권한 정보에 따라 영상을 요청하여 재생할 수 있게 된다.
반면, 도 7에 도시된 바와 같이, 얼굴 크기를 이용하여 선별적으로 모자이크를 처리할 수도 있다. 즉, A, B, C 얼굴 영역에 비교하여 D 영역의 크기가 상대적으로 매우 작다면, 서비스 서버(300)는 D 영역은 배경에 해당하는 피사체로 간주하여, D 영역에 대해서는 얼굴 키 값을 확인하는 과정 없이 즉시 모자이크를 처리하고, 해당 영역에 대한 모자이크 해제는 영상을 생성 또는 게시한 사용자에 의해서만 이뤄지는 것으로 처리할 수도 있다.
또한, 도 7에서 E 영역과 같이 영상 속에 얼굴 영역이 존재하여 얼굴 키 값은 추출하여 확인하였으나, 대응하는 사용자 식별 정보가 없을 경우 서비스 서버(300)는 영상 게시자의 사용자 식별 정보(hj)를 이용하여 E 얼굴 영역을 암호화하여 모자이크할 수 있다. 그리고 영상 게시자만이 E 얼굴 영역에 대한 모자이크를 해제한 후 확인하도록 설정할 수 있으며, 구현 방식에 따라 정보 게시 서비스에 업로드된 영상에 대해서는 모자이크 해제가 불가능하도록 처리할 수도 있다.
이와 같이, 본 발명의 실시 예에 따른 영상 모자이크 처리 과정은 얼굴 영역별로 얼굴 키 값을 매핑하여 저장하고, 얼굴 키 값을 이용하여 모자이크 처리함으로써, 추후 해당 영상을 열람하고자 하는 사용자별로 차등적으로 모자이크 해제하여 영상을 열람할 수 있게 된다.
한편, 본 발명의 일 실시 예에 따른 영상 모자이크 처리 방법은 서비스 서버(300)에 의해 영상 모자이크 처리 및 모자이크 해제 과정이 이뤄지는 것으로 설명하였으나, 이에 한정되는 것은 아니며 영상요청자인 영상재생장치(200)가 직접 모자이크 해제 과정을 수행할 수 있다.
이에 대해 도 9를 참조하여 설명하도록 한다.
도 9는 본 발명의 다른 실시 예에 따른 영상 모자이크 처리 방법을 설명하기 위한 데이터 흐름도이다.
설명에 앞서, 영상재생장치A(200A)가 미리 생성된 영상(image001)을 서비스 서버(300)로 전송하여 서비스 서버(300)가 상기 영상(image001)에서 얼굴 영역을 추출하고 추출된 각각의 얼굴 영역을 모자이크 처리하여 모자이크된 영상(image001_hj)를 저장하고 있는 상태라 가정한다. 이때, 각각의 얼굴 영역은 얼굴 영역에 대응하여 추출된 얼굴 키 값 및 영상재생장치A(200A)의 사용자 식별 정보를 이용하여 모자이크 처리될 수 있으며, 얼굴 영역에 대응하여 추출된 얼굴 키 값 및 미리 매핑된 해당 사용자 식별 정보를 이용하여 모자이크 처리될 수 있다. 그리고 서비스 서버(300)는 상기 모자이크된 영상(image001_hj)의 각각의 얼굴 영역에 대한 재생 권한이 설정된 상태이다.
이러한 상태에서 영상재생장치A(200A)가 서비스 서버(300)로 image001_hj 영상을 요청한다(S501). 여기서 영상을 요청하는 과정은 모자이크된 영상이 게시된 정보 게시 서비스에 접근하여 영상을 요청하는 것으로, 즉, image001_hj이 블로그 서비스에 게시된 경우, 해당 블로그 포스팅 페이지에 접속하여 영상을 요청하는 과정이 될 수 있다.
그리고 영상재생장치A(200A)는 서비스 서버(300)로부터 모자이크된 영상 image001_hj를 수신할 수 있다(S503).
이후, 본 발명의 영상재생장치A(200)A는 해당 영상의 얼굴 영역에 모자이크가 처리되어 있는 것을 확인하고, 자신의 사용자 식별 정보를 확인한다(S505).
확인 결과, 자신이 영상을 생성 또는 게시한 사용자로 확인되면, 영상에 포함된 모든 얼굴 영역의 모자이크를 해제한 후 표시할 수 있다(S507).
마찬가지로 영상재생장치B(200B)는 서비스 서버(300)에 접속하여 동일한 모자이크 처리된 영상(image001_hj)을 요청한다(S509). 그리고 영상(image001_hj)이 서비스 서버(300)로부터 수신되면, 수신된 영상에 모자이크 영역이 포함되어 있음을 확인하고, 이를 해제하기 위하여 사용자 식별 정보를 확인한다(S513).
사용자 식별 정보를 확인한 결과, 자신은 해당 모자이크 처리된 영상을 생성 또는 게시한 사용자가 아니므로, 권한이 할당된 모자이크 영역을 해제하기 위하여 얼굴 키 값을 확인할 수 있다(S515).
이때, 얼굴 키 값을 확인하는 과정은 영상재생장치B(200B)가 사용자 식별 정보를 서비스 서버(300)로 전송하고, 서비스 서버(300)로부터 사용자 식별 정보에 대응하여 매핑된 얼굴 키 값을 수신함에 따라 확인될 수 있다.
그리고, 영상재생장치B(200B)는 사용자 식별 정보 및 얼굴 키 값을 모자이크 처리된 얼굴 영역의 모자이크를 해제할 수 있는데, 이때 재생 권한을 확인하고(S517), 재생 권한이 부여된 얼굴 영역의 모자이크를 해제한 후 표시할 수 있다(S519). 즉, 사용자 식별 정보 및 얼굴 키 값이 동일하더라도 재생 권한이 없을 경우 얼굴 영역의 모자이크를 해제하지 않을 수 있으며, 타인의 얼굴이더라도 서로 관계가 있는 상태로 설정되어 있어 재생 권한이 부여된 얼굴일 경우 모자이크를 해제한 후 확인할 수 있다.
이상으로 본 발명의 실시 예에 따른 영상 모자이크 처리 방법에 대해 설명하였다.
이하, 본 발명의 실시 예에 따른 장치의 주요 구성 및 동작 방법에 대해 설명하도록 한다.
도 10은 본 발명의 실시 예에 따른 영상재생장치의 주요 구성을 도시한 블록도이다.
도 10을 참조하면, 본 발명의 실시 예에 따른 영상재생장치(200)는 영상 수신부(210), 재생 처리부(220) 및 영상 표시부(230)를 포함하여 구성될 수 있다.
영상 수신부(210)는 통신망(500)을 통해 서비스 서버(300)로 특정 영상을 요청하고 수신할 수 있다. 특히, 본 발명의 영상재생장치(200)가 재생하고자 하는 영상은 영상생성장치(100)에 의해 생성되어 서비스 서버(300)로 전송된 영상을 의미하며, 이때의 영상은 서비스 서버(300)에 의해 얼굴 영역의 모자이크 처리된 영상이 될 수 있다. 아울러, 본 발명의 영상 수신부(210)는 상술한 과정을 수행하기 위해, 미리 서비스 서버(300)에 접속하는 과정을 수행할 수도 있다.
그리고 재생 처리부(220)는 영상 수신부(210)를 통해 수신된 영상을 재생하는 과정을 제어한다. 여기서 영상 수신부(210)를 통해 수신되는 영상은 정지 영상 또는 동영상이 될 수 있으며, 재생 처리부(220)는 이를 영상 표시부(230)로 전달하여 표시되는 과정을 제어할 수 있다.
특히, 본 발명의 재생 처리부(220)는 수신된 영상에서 모자이크 영역이 존재하는 것으로 확인되면 권한이 설정된 모자이크 영역을 해제하는 과정을 수행할 수 있다.
예를 들어, 재생 처리부(220)는 사용자 식별 정보를 확인하여 수신된 영상이 자신에 의해 생성되거나 게시된 영상일 경우, 영상에 존재하는 모든 모자이크 영역을 해제한 후 영상 표시부(230)로 전달하여 표시되도록 제어할 수 있다.
반면, 수신된 영상이 자신에 의해 생성되거나 게시되지 않은 영상일 경우, 자신의 사용자 식별 정보에 대응하는 얼굴 키 값을 확인하고, 얼굴 키 값을 이용하여 해제할 수 있는 영역이 있을 경우, 해당 얼굴 영역에 대한 모자이크를 해제할 수 있으며, 이때 영상에 대응하여 설정된 재생 권한에 따라 자신의 얼굴 영역 또는 권한이 인가된 얼굴 영역의 모자이크를 해제할 수 있다.
영상 표시부(230)는 영상재생장치(200)의 기능 수행 중에 발생되는 일련의 동작 상태 및 동작 결과 등에 대한 정보를 표시하는 것으로, 특히, 본 발명의 재생 처리부(220)를 통해 재생 처리된 영상을 인가 받아 표시 모듈을 통해 표시되는 과정을 제어할 수 있다.
이상으로 본 발명의 실시 예에 따른 영상재생장치(200)의 주요 구성에 대해 설명하였다.
그러나 도 9를 통해 도시된 구성 요소 보다 많은 구성 요소에 의해 영상재생장치(200)가 구현될 수도 있으며, 아울러, 본 발명의 영상재생장치(200)는 영상을 수신하는 기능을 중심으로 도시한 것으로, 영상재생장치(200)가 영상을 생성하거나 영상을 서비스 서버(300)로 전송하여 정보 게시 서비스를 통해 게시하고자 할 경우, 영상생성장치(100)의 기능을 동시에 포함하여 구현될 수도 있다.
이하, 본 발명의 실시 예에 따른 서비스 서버의 주요 구성에 대해 설명하도록 한다.
도 11은 본 발명의 실시 예에 따른 서비스 서버의 주요 구성을 도시한 블록도이다.
도 11을 참조하면, 본 발명의 실시 예에 따른 서비스 서버(300)는 정보 수신부(310), 영상 제공부(320), 영역 처리부(330), 저장부(340) 및 사용자 정보 관리부(350)를 포함하여 구성될 수 있다.
정보 수신부(310)는 영상생성장치(100)로부터 영상을 수신하는 역할을 수행한다. 이때, 본 발명의 정보 수신부(310)는 영상생성장치(100)로부터 상기 영상을 생성하거나 게시하고자 하는 사용자 식별 정보를 함께 수신할 수 있다.
영상 제공부(320)는 후술한 영역 처리부(330)에 의해 모자이크가 수행되면, 모자이크가 처리된 얼굴 영역을 포함하는 영상을 저장 및 정보 게시 서비스에 게시하는 역할을 수행한다.
특히, 본 발명의 영상 제공부(320)는 모자이크가 수행된 영역을 재생할 수 있는 재생 권한을 설정한 후 게시할 수 있다. 이때 재생 권한은 해당 영상에 접근하여 영상을 재생할 수 있는 사용자의 권한을 의미한다. 특히, 본 발명의 재생 권한은 영상을 전송한 사용자에 의해 설정될 수 있으며, 정보 게시 서비스를 통해 해당 사용자와 미리 설정된 관계 정보가 존재할 경우 해당 관계 정보를 통해 설정될 수 있다.
또한, 본 발명의 영상 제공부(320)는 특정 영상재생장치(200)로부터 정보 게시 서비스에 게시된 영상에 대한 요청이 발생되면 이를 상기 영상재생장치(200)가 확인할 수 있도록 처리하는 과정을 제어할 수 있다. 예컨대, 영상을 상기 영상재생장치(200)로 임시로 전송하여 영상재생장치(200)에서 표시되도록 제어할 수 있으며, 영상이 동영상일 경우 스트리밍 방식으로 전송할 수도 있다.
또한, 본 발명의 영상 제공부(320)는 영상에서 모자이크된 영역이 있을 경우, 영상재생장치(200)의 사용자 식별 정보 및 매칭되는 키 값을 이용하여 해제가 가능한 영역이 있는 지 확인하여 있을 경우 해당 영역만을 해제한 후 영상재생장치(200)로 전송할 수 있다. 이때, 본 발명의 영상 제공부(320)는 모자이크 해제가 가능한 영역이 없더라도, 해당 영상에 대응하여 설정된 재생 권한에 따라 모자이크를 해제한 후 영상재생장치(200)로 전송할 수도 있다.
영역 처리부(330)는 영상생성장치(100)로부터 수신된 영상에서 모자이크를 처리하고자 하는 영역이 존재하는 지를 판단하고, 해당 영역에 대한 모자이크를 처리하는 역할을 수행할 수 있다. 특히, 본 발명의 영역 처리부(330)는 수신된 영상에서 얼굴 영역을 추출하고, 추출된 얼굴 영역을 키 값 및 사용자 식별 정보를 이용하여 암호화하여 모자이크를 처리하게 된다. 그리고, 영상 제공부(320)의 요청에 따라 동일한 키 값 및 사용자 식별 정보를 이용하여 해당 영역의 모자이크를 해제하는 과정을 수행할 수도 있다.
또한, 본 발명의 영역 처리부(330)는 수신된 영상이 동영상일 경우, 아이 프레임(I Frame)을 추출하고, 상기 추출된 아이 프레임을 기준으로 모자이크 처리가 필요한 영역에 대한 모자이크를 수행할 수 있다.
저장부(340)는 본 발명의 서비스 서버(300)의 동작 수행과 관련된 각종 정보를 저장하고 관리하는 역할을 수행하는 것으로, 예컨대 재생 권한 정보, 관계 정보, 키 값 등 다양한 정보들을 저장하고 관리할 수 있다. 또한 본 발명의 저장부(340)는 키 값 및 사용자 식별 정보를 매핑하여 저장할 수 있으며, 영상에 대응하여 재생 권한 정보를 매핑하여 저장할 수도 있다.
사용자 정보 관리부(350)는 사용자 정보를 저장하고 관리하는 역할을 수행할 수 있다. 이때, 사용자 정보 관리부(350)에 의해 관리되는 사용자 식별 정보는 정보 게시 서비스에 가입된 사용자 식별 정보를 포함할 수 있다. 예컨대, 본 발명의 서비스 서버(300)가 블로그 서비스를 제공하거나 블로그 서비스와 연동 가능한 특정 서버(미도시)를 통해 서비스를 제공하는 경우, 블로그 서비스에 가입된 가입자 정보가 본 발명의 사용자 식별 정보가 될 수 있다.
아울러, 본 발명의 사용자 식별 정보는 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보를 의미하거나, 상기 키 값에 미리 매핑된 사용자의 식별 정보, 예컨대 사용자의 개인 계정 암호 또는 아이디 등이 이에 해당될 수 있다.
이상으로 본 발명의 실시 예에 따른 영상 모자이크 처리 방법에 대해 설명하였다.
상술한 바와 같은 본 발명의 영상 모자이크 처리 방법은 컴퓨터 프로그램 명령어와 데이터를 저장하기에 적합한 컴퓨터로 판독 가능한 매체의 형태로 제공될 수도 있다.
특히, 본 발명의 컴퓨터 프로그램은 영상에서 모자이크 처리가 필요한 영역을 확인하는 단계, 상기 모자이크 처리가 필요한 영역 각각에 대한 키 값 및 상기 키 값에 대응하는 사용자 식별 정보를 확인하는 단계, 상기 확인된 키 값 및 사용자 식별 정보를 이용하여 상기 모자이크 처리가 필요한 영역을 암호화하여 모자이크 수행하는 단계 및 상기 모자이크가 수행된 영상을 저장하여 상기 정보 게시 서비스를 통해 게시되도록 제어하는 단계 등을 실행할 수 있다.
이러한, 컴퓨터가 읽을 수 있는 기록매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있으며, 컴퓨터 시스템에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(Magnetic Media), CD-ROM(Compact Disk Read Only Memory), DVD(Digital Video Disk)와 같은 광기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media) 및 롬(ROM, Read Only Memory), 램(RAM, Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치를 포함한다.
또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
이상으로 본 발명의 기술적 사상을 예시하기 위한 바람직한 실시예와 관련하여 설명하고 도시하였지만, 본 발명은 이와 같이 도시되고 설명된 그대로의 구성 및 작용에만 국한되는 것은 아니며, 기술적 사상의 범주를 이탈함없이 본 발명에 대해 다수의 변경 및 수정이 가능함을 당업자들은 잘 이해할 수 있을 것이다. 따라서 그러한 모든 적절한 변경 및 수정과 균등물들도 본 발명의 범위에 속하는 것으로 간주되어야 할 것이다.
본 발명은 영상 모자이크 처리 방법에 관한 것으로, 더욱 상세하게는 영상에서 특정 영역만을 모자이크 처리하여 정보 게시 서비스를 통해 게시하고, 재생하고자 하는 사용자에 따라 선별적으로 모자이크를 해제하여 배포할 수 있는 영상 모자이크 처리 방법 및 이를 위한 장치에 관한 것이다.
이러한 본 발명에 의하면, 영상에서 모자이크 처리하고자 하는 영상을 검출하고 모자이크 처리하며, 영상 배포 시 선별적으로 모자이크를 해제하여 배포함으로써, 사용자가 직접 영역 하나하나를 지정하여 모자이크를 처리하거나 해제할 필요 없이 사용자의 편의성이 높아질 수 있으며, SNS 서비스 플랫폼을 통해 무분별한 개인 영상 정보가 유포되는 것을 사전에 방지할 수 있어, 서비스 산업의 발전에 이바지할 수 있다.
또한, 본 발명은 시판 또는 영업의 가능성이 충분할 뿐만 아니라 현실적으로 명백하게 실시할 수 있는 정도이므로 산업상 이용가능성이 있다.
100: 영상생성장치 200: 영상재생장치
210: 영상 수신부 220: 재생 처리부
230: 영상 표시부 300: 서비스 서버
310: 정보 수신부 320: 영상 제공부
330: 영역 처리부 340: 저장부
350: 사용자 정보 관리부 500: 통신망

Claims (17)

  1. 영상생성장치로부터 수신된 영상을 특정 정보 게시 서비스에 게시하고자 하는 서비스 서버에 있어서,
    상기 서비스 서버가,
    상기 수신된 영상에서 모자이크 처리가 필요한 하나 이상의 영역을 추출하는 단계;
    상기 모자이크 처리가 필요한 하나 이상의 영역 각각에 대하여, 해당 영역으로부터 추출된 특징점에 대한 시그니처 값을 이용하여 키 값을 생성하고, 상기 키 값에 매핑되어 저장된 사용자 식별 정보를 확인하는 단계;
    상기 모자이크 처리가 필요한 하나 이상의 영역 각각에 대하여, 상기 생성한 키 값 및 사용자 식별 정보를 이용하여 암호화하는 단계; 및
    상기 하나 이상의 영역 각각에 대하여 암호화가 수행된 영상을 저장하여 상기 정보 게시 서비스를 통해 게시하는 단계;
    를 포함하는 것을 특징으로 하는 영상 모자이크 처리 방법.
  2. 제1항에 있어서,
    상기 모자이크 처리가 필요한 하나 이상의 영역은 얼굴 영역이며,
    상기 키 값은 상기 얼굴 영역에 대한 얼굴 키 값인 것을 특징으로 하는 영상 모자이크 처리 방법.
  3. 제2항에 있어서,
    상기 추출된 하나 이상의 얼굴 영역의 크기를 비교하는 단계; 및
    상기 비교 결과, 일정 크기 이상인 얼굴 영역을 모자이크 처리가 필요한 영역으로 확인하고, 그렇지 않은 얼굴 영역은 무조건 모자이크 처리하는 단계;
    를 포함하는 것을 특징으로 하는 영상 모자이크 처리 방법.
  4. 제1항에 있어서,
    상기 사용자 식별 정보를 확인하는 단계에서,
    상기 키 값에 대응하는 사용자 식별 정보가 존재하지 않을 경우, 상기 영상을 생성 또는 게시하고자 하는 사용자 식별 정보를 확인하는 것을 특징으로 하는 영상 모자이크 처리 방법.
  5. 제1항에 있어서,
    상기 영상이 동영상일 경우,
    상기 수신된 영상에서 아이 프레임(I Frame)을 추출하는 단계를 더 포함하며,
    상기 암호화하는 단계는
    상기 추출된 아이 프레임을 기준으로 모자이크 처리가 필요한 영역에 대한 암호화를 수행하는 것을 특징으로 하는 영상 모자이크 처리 방법.
  6. 제1항에 있어서,
    상기 게시하는 단계는 이전에,
    상기 암호화가 수행된 각각의 영역을 재생할 수 있는 재생 권한을 사용자 식별 정보를 이용하여 확인한 관계 정보 및 영상 게시자의 선택 중 하나 이상에 따라서 설정하는 단계를 더 포함하는 것을 특징으로 하는 영상 모자이크 처리 방법.
  7. 제4항에 있어서,
    상기 영상생성장치로부터 영상이 수신되면, 상기 영상생성장치의 사용자 식별 정보를 확인하여, 상기 영상생성장치의 사용자가 가입된 사용자인지 여부를 판단하는 단계; 및
    상기 판단 결과, 가입되어 있지 않을 경우, 암호화 처리에 이용할 일회용 식별 정보를 생성하는 단계;
    를 더 포함하는 것을 특징으로 하는 영상 모자이크 처리 방법.
  8. 제1항에 있어서,
    상기 게시하는 단계 이후에,
    상기 정보 게시 서비스에 접속하여 영상을 재생하고자 하는 영상재생장치로부터 상기 영상에 대한 전송 요청을 확인하는 단계;
    상기 영상재생장치의 사용자 식별 정보를 확인하는 단계; 및
    상기 영상재생장치의 사용자 식별 정보가 상기 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보인 경우 상기 하나 이상의 영역의 암호화를 해제한 후 영상을 전송하고,
    상기 영상재생장치의 사용자 식별 정보가 상기 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보가 아닐 경우, 상기 영상재생장치의 사용자 식별 정보에 매핑되어 저장된 키 값 및 상기 영상에 대응하여 설정된 재생 권한을 확인한 후, 상기 재생 권한에 따라 해당하는 영역을 상기 영상재생장치의 사용자 식별 정보 및 키 값을 이용하여 복호화하여 선별적 해제한 후 영상을 전송하는 단계;
    를 더 포함하는 것을 특징으로 하는 영상 모자이크 처리 방법.
  9. 영상재생장치가,
    정보 게시 서비스를 지원하는 서비스 서버로 게시된 영상의 전송을 요청하는 단계;
    상기 서비스 서버로부터 상기 영상을 수신하는 단계;
    상기 수신된 영상에서 암호화된 영역이 존재하는 경우, 상기 암호화된 영역을 해제하기 위한 영상재상장치 사용자의 키 값 및 사용자 식별 정보를 확인하는 단계; 및
    상기 확인된 키 값 및 사용자 식별 정보를 이용하여 상기 수신된 영상에 포함된 암호화된 영역을 복호화하여 선별적 해제하는 단계;
    를 포함하는 것을 특징으로 하는 영상 모자이크 처리 방법.
  10. 제9항에 있어서,
    상기 선별적 해제하는 단계는
    상기 영상에 대응하여 설정된 재생 권한을 더 확인한 후, 상기 재생 권한에 따라 복호화하여 선별적 해제하는 것을 특징으로 하는 영상 모자이크 처리 방법.
  11. 제1항 내지 제10항 중 어느 하나의 항에 기재된 방법을 실행하는 프로그램을 기록한 컴퓨터 판독 가능한 기록매체.
  12. 영상생성장치로부터 영상을 수신하는 정보 수신부;
    상기 수신된 영상에서 모자이크 처리가 필요한 하나 이상의 영역을 추출하고, 상기 모자이크 처리가 필요한 하나 이상의 영역 각각에 대하여, 해당 영역으로부터 추출된 특징점에 대한 시그니처 값을 이용하여 키 값을 생성하고, 상기 키 값에 매핑하여 저장된 사용자 식별 정보를 확인하고, 상기 생성한 키 값 및 확인된 사용자 식별 정보를 이용하여 상기 모자이크 처리가 필요한 하나 이상의 영역을 각각 암호화하는 영역 처리부; 및
    상기 암호화가 수행된 영역을 포함하는 영상을 저장 및 정보 게시 서비스에 게시하는 영상 제공부;
    를 포함하는 것을 특징으로 하는 서비스 서버.
  13. 제12항에 있어서,
    상기 영역 처리부의 요청에 따라 상기 사용자 식별 정보를 확인하는 사용자 정보 관리부;
    를 더 포함하며,
    상기 영역 처리부는, 상기 사용자 정보 관리부를 통해서 상기 키 값에 미리 매핑된 사용자 식별 정보를 확인하되, 상기 키 값에 매핑된 사용자 식별 정보가 없는 경우, 상기 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보를 확인하는 것을 특징으로 하는 서비스 서버.
  14. 제12항에 있어서,
    상기 영역 처리부는
    상기 영상이 동영상일 경우, 상기 수신된 영상에서 아이 프레임(I Frame)을 추출하고, 상기 추출된 아이 프레임을 기준으로 모자이크 처리가 필요한 하나 이상의 영역에 대한 암호화를 수행하는 것을 특징으로 하는 서비스 서버.
  15. 제12항에 있어서,
    상기 영상 제공부는
    상기 암호화가 수행된 영역을 재생할 수 있는 재생 권한을 사용자 식별 정보를 이용하여 확인한 관계 정보 및 영상 게시자의 선택 중 하나 이상에 따라서 설정한 후 게시하는 것을 특징으로 하는 서비스 서버.
  16. 제12항에 있어서,
    상기 영상 제공부는
    상기 정보 게시 서비스에 접속한 영상재생장치로부터 상기 영상에 대한 전송 요청이 확인되면, 상기 영상재생장치의 사용자 식별 정보를 확인하여, 상기 확인된 영상재생장치의 사용자 식별 정보가 상기 영상을 생성 또는 게시하고자 하는 사용자의 사용자 식별 정보인 경우 상기 영역의 암호화를 해제한 후 영상을 전송하거나,
    상기 영상재생장치의 사용자 식별 정보가 상기 영상을 생성 또는 게시하고자 하는 사용자의 식별 정보가 아닐 경우, 상기 영상재생장치의 사용자 식별 정보에 대응하는 키 값 및 상기 영상에 대응하여 설정된 재생 권한을 확인한 후, 상기 재생 권한에 따라 상기 영상재생장치의 사용자 식별 정보 및 그에 대응하는 키 값을 이용하여 상기 하나 이상의 영역을 복호화하여 선별적 해제한 후 영상을 전송하는 것을 특징으로 하는 서비스 서버.
  17. 정보 게시 서비스를 지원하는 서비스 서버로 게시된 영상의 전송을 요청하여 수신하는 영상 수신부;
    상기 영상 수신부를 통해 수신된 영상에서 암호화 처리된 하나 이상의 영역이 존재하는 경우, 상기 모자이크 영역을 해제하기 위한 영상재생장치 사용자의 키 값 및 사용자 식별 정보를 확인하고, 상기 확인된 키 값 및 사용자 식별 정보를 이용하여 상기 하나 이상의 영역을 복호화하여 선별적 해제하는 재생 처리부; 및
    상기 해제된 영상을 표시하는 영상 표시부;
    를 포함하는 것을 특징으로 하는 영상재생장치.
KR1020170019820A 2017-02-14 2017-02-14 영상 모자이크 처리 방법 및 이를 위한 장치 KR101859433B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170019820A KR101859433B1 (ko) 2017-02-14 2017-02-14 영상 모자이크 처리 방법 및 이를 위한 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170019820A KR101859433B1 (ko) 2017-02-14 2017-02-14 영상 모자이크 처리 방법 및 이를 위한 장치

Publications (1)

Publication Number Publication Date
KR101859433B1 true KR101859433B1 (ko) 2018-05-21

Family

ID=62453101

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170019820A KR101859433B1 (ko) 2017-02-14 2017-02-14 영상 모자이크 처리 방법 및 이를 위한 장치

Country Status (1)

Country Link
KR (1) KR101859433B1 (ko)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200047461A (ko) * 2020-04-10 2020-05-07 서울여자대학교 산학협력단 클라우드 서버 및 클라우드 기반의 이미지 파일 처리방법
KR20200053000A (ko) * 2018-10-26 2020-05-18 서울여자대학교 산학협력단 클라우드 서버 및 클라우드 기반의 이미지 파일 처리방법
CN111836065A (zh) * 2020-07-14 2020-10-27 韶关市启之信息技术有限公司 一种直播商标自动隐藏的智能方法
CN112585605A (zh) * 2018-09-06 2021-03-30 索尼公司 信息处理系统、信息处理方法、终端装置和信息处理装置
WO2022098074A1 (ko) * 2020-11-06 2022-05-12 카페24 주식회사 초상권 보호 방법, 장치 및 시스템
KR20220061794A (ko) * 2020-11-06 2022-05-13 카페24 주식회사 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템
KR102633279B1 (ko) * 2022-08-22 2024-02-05 한양대학교 에리카산학협력단 선택적 비식별화 장치 및 방법
KR102651303B1 (ko) * 2022-12-16 2024-03-26 한국생산기술연구원 얼굴 이미지 비식별화 및 복원 장치 및 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007122914A1 (ja) * 2006-04-04 2007-11-01 Panasonic Corporation 個人情報管理装置
KR101381343B1 (ko) * 2013-09-14 2014-04-04 주식회사 코어셀 얼굴인식기술을 이용하여 영상처리기기에서 촬영된 영상물로부터 얼굴영역을 검출하여 개인 프라이버시 보호를 위한 마스킹을 제공하는 방법
JP2014082695A (ja) * 2012-10-18 2014-05-08 Nec Casio Mobile Communications Ltd 携帯端末装置、携帯端末システム、携帯端末装置の制御方法、及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007122914A1 (ja) * 2006-04-04 2007-11-01 Panasonic Corporation 個人情報管理装置
JP2014082695A (ja) * 2012-10-18 2014-05-08 Nec Casio Mobile Communications Ltd 携帯端末装置、携帯端末システム、携帯端末装置の制御方法、及びプログラム
KR101381343B1 (ko) * 2013-09-14 2014-04-04 주식회사 코어셀 얼굴인식기술을 이용하여 영상처리기기에서 촬영된 영상물로부터 얼굴영역을 검출하여 개인 프라이버시 보호를 위한 마스킹을 제공하는 방법

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112585605A (zh) * 2018-09-06 2021-03-30 索尼公司 信息处理系统、信息处理方法、终端装置和信息处理装置
KR20200053000A (ko) * 2018-10-26 2020-05-18 서울여자대학교 산학협력단 클라우드 서버 및 클라우드 기반의 이미지 파일 처리방법
KR102148937B1 (ko) * 2018-10-26 2020-08-31 서울여자대학교 산학협력단 클라우드 서버 및 클라우드 기반의 이미지 파일 처리방법
KR20200047461A (ko) * 2020-04-10 2020-05-07 서울여자대학교 산학협력단 클라우드 서버 및 클라우드 기반의 이미지 파일 처리방법
KR102199335B1 (ko) * 2020-04-10 2021-01-06 서울여자대학교 산학협력단 클라우드 서버 및 클라우드 기반의 이미지 파일 처리방법
CN111836065B (zh) * 2020-07-14 2022-04-29 北京场景互娱传媒科技有限公司 一种直播商标自动隐藏的智能方法
CN111836065A (zh) * 2020-07-14 2020-10-27 韶关市启之信息技术有限公司 一种直播商标自动隐藏的智能方法
WO2022098074A1 (ko) * 2020-11-06 2022-05-12 카페24 주식회사 초상권 보호 방법, 장치 및 시스템
KR20220061794A (ko) * 2020-11-06 2022-05-13 카페24 주식회사 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템
KR20220061793A (ko) * 2020-11-06 2022-05-13 카페24 주식회사 초상권 보호 방법, 장치 및 시스템
KR102502105B1 (ko) * 2020-11-06 2023-02-23 카페24 주식회사 초상권 보호 방법, 장치 및 시스템
KR102555680B1 (ko) * 2020-11-06 2023-07-17 카페24 주식회사 초상권 보호를 위한 영상 처리 방법, 장치 및 시스템
KR102633279B1 (ko) * 2022-08-22 2024-02-05 한양대학교 에리카산학협력단 선택적 비식별화 장치 및 방법
KR102651303B1 (ko) * 2022-12-16 2024-03-26 한국생산기술연구원 얼굴 이미지 비식별화 및 복원 장치 및 방법

Similar Documents

Publication Publication Date Title
KR101859433B1 (ko) 영상 모자이크 처리 방법 및 이를 위한 장치
US11611553B2 (en) Online identity verification platform and process
Das et al. Assisting users in a world full of cameras: A privacy-aware infrastructure for computer vision applications
US9911002B2 (en) Method of modifying image including photographing restricted element, and device and system for performing the method
CA2994055C (en) System and method for electronically providing legal instrument
US10607035B2 (en) Method of displaying content on a screen of an electronic processing device
AU2015297230B2 (en) Method of modifying image including photographing restricted element, and device and system for performing the method
WO2020085690A1 (ko) 블록체인 기반의 비디지털 저작물의 저작권 관리 시스템
KR20150132266A (ko) 이미지와 연관된 정보에 대한 액세스를 요청 및 제공하기 위한 방법 및 장치
US20230252123A1 (en) Method of Displaying Content On A Screen Of An Electronic Processing Device
EP3317773B1 (en) Systems and methods for media privacy
CN111368232A (zh) 口令分享回流方法、装置、电子设备及存储介质
CN110943960B (zh) 一种庭审笔录电子签名生成方法、装置、设备及介质
KR20210000957A (ko) 블록체인과 해쉬 암호화 기술을 기반으로 한 영상 인증 시스템 및 그 방법
CN115702446A (zh) 识别来自不同来源的图像内的对象
US20160110531A1 (en) Information processing apparatus, terminal apparatus and information processing method
CN104579665B (zh) 鉴权方法及装置
CN111917728A (zh) 一种密码验证方法及装置
JP7236042B2 (ja) 準同型暗号を用いた顔認証のアプリケーション
Mohanty et al. Seamless authentication for online teaching and meeting
US11553216B2 (en) Systems and methods of facilitating live streaming of content on multiple social media platforms
KR20130082980A (ko) 얼굴인식 기반 사용자 맞춤형 추천 시스템
US20150358318A1 (en) Biometric authentication of content for social networks
KR20180116628A (ko) 개인화 이미지 기반 사용자 접속 인증 시스템
US20220053123A1 (en) Method and apparatus for independent authentication of video

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant