KR101875137B1 - 프라이버시 마스크 처리 방법 및 장치 - Google Patents

프라이버시 마스크 처리 방법 및 장치 Download PDF

Info

Publication number
KR101875137B1
KR101875137B1 KR1020130032305A KR20130032305A KR101875137B1 KR 101875137 B1 KR101875137 B1 KR 101875137B1 KR 1020130032305 A KR1020130032305 A KR 1020130032305A KR 20130032305 A KR20130032305 A KR 20130032305A KR 101875137 B1 KR101875137 B1 KR 101875137B1
Authority
KR
South Korea
Prior art keywords
privacy
mask
area
camera
zone
Prior art date
Application number
KR1020130032305A
Other languages
English (en)
Other versions
KR20140117183A (ko
Inventor
하재룡
박기범
Original Assignee
한화에어로스페이스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화에어로스페이스 주식회사 filed Critical 한화에어로스페이스 주식회사
Priority to KR1020130032305A priority Critical patent/KR101875137B1/ko
Priority to PCT/KR2014/001143 priority patent/WO2014157830A1/ko
Priority to US14/779,497 priority patent/US9794517B2/en
Priority to GB201517095A priority patent/GB2527235B/en
Publication of KR20140117183A publication Critical patent/KR20140117183A/ko
Application granted granted Critical
Publication of KR101875137B1 publication Critical patent/KR101875137B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/167—Systems rendering the television signal unintelligible and subsequently intelligible
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 프라이버시 마스크 처리 방법 및 장치를 개시한다. 본 발명에 따른 프라이버시 마스크 처리 방법 및 장치는 어떠한 방식의 카메라 움직임이 있더라도 촬상 영상 내의 프라이버시 영역에 정확히 마스크 영역을 배치하기 위한 구성을 갖추고 있다. 따라서, 본 발명은 카메라가 Pan, Tilt 및 Zoom 중 어느 하나 이상의 방식으로 움직인다고 하더라도 프라이버시 영역에 대해 마스크 영역이 정확히 일치하게 할 수 있다.

Description

프라이버시 마스크 처리 방법 및 장치{PROCESS METHOD AND APPARATUS FOR PRIVACY MASK}
본 발명은 프라이버시 마스크 처리 방법 및 장치에 관한 것으로, 더욱 상세하게는 감시 카메라의 촬상 영상 중에 프라이버시 마스크(즉, 사생활 보호가 필요한 영역이나 어떤 피사체를 가려주는 것)를 설정하는 것에 대한 프라이버시 마스크 처리 방법 및 장치에 관한 것이다.
통상적으로, 감시카메라 시스템은 범죄 및 사고를 예방 또는 방지할 수 있으나, 개인의 사생활을 침해할 수 있는 가능성이 있다. 이는 사생활에 관련된 부분까지 감시 카메라를 통해 영상 촬영됨에 따라 개인의 사생활이 침해될 수 있기 때문이다.
이에, 감시 카메라를 통해 촬영되는 촬상 영역 중 사생활 침해가 염려되는 부분인 프라이버시 영역 또는 피사체를 확인 불가하게 가려주는 기술이 적용되고 있다.
전술된 종래 기술은 프라이버시 마스크(즉, 사생활 보호가 필요한 영역이나 어떤 피사체를 가려주는 것) 기술로서 명명되고 있고, 이러한 프라이버시 마스크는 사생활 침해가 염려되는 부분인 프라이버시 영역 또는 피사체에 대해 감시자로 하여금 확인하는 것이 불가능하게 영상 처리하는 기술을 일컫는다.
여기서, 감시자로 하여금 확인하는 것이 불가능하게 영상 처리되는 부분을 이하 '마스크 영역'이라 칭하여 설명하기로 한다.
또한, 전술된 종래 기술은 일반 고정형 감시 카메라의 경우에 바뀌지 않는 화면만을 출력하기 때문에, 프라이버시 마스크를 1회 설정하게 되면 이후에도 지속적으로 문제없이 마스크 영역과 프라이버시 영역 또는 가리고자 하는 피사체가 일치한다.
하지만, 전술된 종래 기술은 PTZ(Pan, Tilt, Zoom) 카메라의 경우, Pan, Tilt 및 Zoom 중 어느 하나 이상의 방식으로 카메라 움직임이 있게 되면, 프라이버시 영역 또는 가리고자 하는 피사체도 함께 이동하게 되므로, 마스크 영역 또한 함께 이동하는 것은 가능하나 정확하게 일치하지 않고, 때에 따라서는 그 불일치율이 매우 크게 발생하는 문제점이 있다.
대한민국 등록특허공보 제10-0588170(2006.06.01)
따라서, 본 발명은 상기의 문제점을 해결하기 위해 창출된 것으로, 본 발명의 목적은 어떠한 방식의 카메라 움직임이 있더라도 촬상 영상 내의 프라이버시 영역에 정확히 마스크 영역을 배치하기 위한 프라이버시 마스크 처리 방법 및 장치를 제공하는 데 있다.
본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기 목적을 달성하기 위한 본 발명의 관점에 따른 프라이버시 마스크 처리 방법은, 카메라의 촬상 영상 중 프라이버시 영역에 대해 프라이버시 마스크를 설정하는 단계; 상기 프라이버시 마스크의 설정을 통해 상기 촬상 영상 내에 형성되는 마스크 영역이 상기 프라이버시 영역을 이탈하고, 기 정해진 마스크 영역의 이탈 조건을 충족하는 경우 상기 마스크 영역의 미세조정 모드를 실행하는 단계; 상기 카메라의 일측에 구비된 거리측정 센서를 동작시켜 상기 촬상 영상의 피사체와 상기 카메라 간의 상대적 위치를 결정하기 위한 위치 데이터를 생성하는 단계; 상기 위치 데이터를 포함하는 프라이버시 영역이동 값을 특정하는 단계; 및 상기 프라이버시 영역이동 값을 기초로 상기 프라이버시 영역의 위치 및 크기를 판정하고, 판정 결과를 이용해서 상기 마스크 영역을 조정하는 단계;를 포함할 수 있다.
상기 프라이버시 영역이동 값은 상기 카메라에서 상기 피사체에 대한 포커스가 맞을 경우 상기 피사체에 대한 상대적 거리를 나타내는 값으로 저장되는 줌 배율별 포커스 거리 데이터를 더 포함할 수 있다.
상기 프라이버시 마스크 처리 방법은, 상기 마스크 영역의 이탈 조건을 미 충족하는 경우 상기 카메라의 움직임 을 기초로 한 일반 모드로 상기 마스크 영역을 조정하는 단계;를 더 포함할 수 있다.
상기 마스크 영역의 이탈 조건은 상기 마스크 영역의 크기를 변경하는 상기 카메라의 움직임을 포함할 수 있다.
상기 프라이버시 영역이동 값은 상기 피사체에 대한 줌 배율과 대응되는 제1 프라이버시 영역이동 값과 상기 피사체에 대한 위치와 대응되는 제2 프라이버시 영역이동 값의 평균값일 수 있다.
상기 프라이버시 영역이동 값은 상기 피사체에 대한 줌 배율 및 상기 피사체에 대한 위치를 조합한 결과로서 생성된 값일 수 있다.
상기 촬상 영상에 대해 적어도 하나의 다른 프라이버시 마스크를 더 설정하는 단계를 더 포함할 수 있다.
상기 프라이버시 마스크 처리 방법은, 복수 개수의 프라이버시 마스크들의 설정을 통해 상기 촬상 영상 내에 형성되는 복수 개수의 마스크 영역들 중 하나 이상이 대응되는 프라이버시 영역으로부터 이탈하고, 상기 마스크 영역의 이탈 조건을 충족하는 경우 이탈된 하나 이상의 마스크 영역에 대한 미세조정 모드를 실행하는 단계; 및 상기 프라이버시 영역이동 값을 기초로 상기 이탈된 하나 이상의 마스크 영역을 조정하는 단계를 더 포함할 수 있다.
상기 목적을 달성하기 위한 본 발명의 관점에 따른 프라이버시 마스크 처리 장치는, 카메라의 촬상 영상 중 프라이버시 영역에 대해 프라이버시 마스크를 설정하는 마스크 설정모듈; 상기 프라이버시 마스크의 설정을 통해 상기 촬상 영상 내에 형성되는 마스크 영역이 상기 프라이버시 영역을 이탈하고, 기 정해진 마스크 영역의 이탈 조건을 충족하는 경우 상기 마스크 영역의 미세조정 모드를 실행하는 마스크 조정모듈; 및 상기 미세조정 모드에서 상기 촬상 영상의 피사체와 떨어진 상대적 거리를 측정하는 거리측정 센서;를 포함하되, 상기 마스크 조정모듈은 상기 거리측정 센서의 측정 값을 통해 상기 피사체와 상기 카메라 간의 상대적 위치를 결정하기 위한 위치 데이터를 생성하고, 상기 위치 데이터를 포함하는 프라이버시 영역이동 값을 특정하며, 상기 프라이버시 영역이동 값을 기초로 상기 프라이버시 영역이동 값을 기초로 상기 프라이버시 영역의 위치 및 크기를 판정하고, 판정 결과를 이용해서 상기 마스크 영역을 조정할 수 있다.
상기 프라이버시 마스크 처리 장치는, 상기 카메라의 움직임 방향 및 움직임 폭을 판정하거나, 줌 기능의 적용 시에는 줌 배율 값을 추가 판정하는 카메라 움직임 판정모듈;을 더 포함할 수 있다.
상기 마스크 설정모듈은 상기 촬상 영상에 대해 적어도 하나의 다른 프라이버시 마스크를 더 설정할 수 있다.
상기 마스크 조정모듈은 복수 개수의 프라이버시 마스크들의 설정을 통해 상기 촬상 영상 내에 형성되는 복수 개수의 마스크 영역들 중 하나 이상이 대응되는 프라이버시 영역으로부터 이탈하고, 상기 마스크 영역의 이탈 조건을 충족하는 경우 이탈된 하나 이상의 마스크 영역에 대한 미세조정 모드를 실행하고, 상기 프라이버시 영역이동 값을 기초로 상기 이탈된 하나 이상의 마스크 영역을 조정할 수 있다.
따라서, 본 발명에서는 어떠한 방식의 카메라 움직임이 있더라도 촬상 영상 내의 프라이버시 영역에 정확히 마스크 영역을 배치함으로써, 카메라가 Pan, Tilt 및 Zoom 중 어느 하나 이상의 방식으로 움직인다고 하더라도 프라이버시 영역 또는 가리고자 하는 피사체에 대해 마스크 영역이 일치하게 할 수 있는 이점이 있다.
본 발명의 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명에 따른 프라이버시 마스크 처리 장치의 일실시 예를 나타내는 도면이다.
도 2는 도 1에 도시된 장치의 마스크 영역 설정을 일실시 예로 나타내는 도면이다.
도 3은 도 1에 도시된 장치의 마스크 영역 설정을 다른 실시 예로 나타내는 도면이다.
도 4는 도 3에 도시된 장치의 마스크 영역을 줌 확대한 후 이동하는 예를 나타내는 도면이다.
도 5는 도 4에서 확인되는 문제점을 본 발명의 프라이버시 마스크 처리 장치를 통해 보완한 결과를 나타내는 도면이다.
도 6은 도 4에 도시된 장치의 마스크 영역을 줌 축소한 후 이동하는 예를 나타내는 도면이다.
도 7은 도 6에서 확인되는 문제점을 본 발명의 프라이버시 마스크 처리 장치를 통해 보완한 결과를 나타내는 도면이다.
도 8은 도 1에 도시된 장치에 적용되는 줌 배율별 위치 데이터를 일실시 예로 나타내는 도면이다.
그리고, 도 9는 도 1에 도시된 장치의 동작 과정을 일실시 예로 나타내는 도면이다.
이하, 첨부도면을 참조하여 본 발명의 바람직한 실시 예에 대하여 다음과 같이 상세히 설명한다.
도 1은 본 발명에 따른 프라이버시 마스크 처리 장치(200)의 일실시 예를 나타내는 도면이다.
도 1에 도시된 바와 같이, 프라이버시 마스크 처리 장치(200)는 카메라(100)와 함께 연동하는 장치이다. 즉, 프라이버시 마스크 처리 장치(200)는 카메라(100)로부터 촬영된 촬상 영상에 대해 프라이버시 마스크를 설정하는 장치로서, 카메라(100)의 움직임(Pan, Tilt 및 Zoom 중 어느 하나 이상에 따른 움직임)에 제약 없이 촬상 영상 내의 프라이버시 영역 또는 가리고자 하는 피사체에 대해 마스크 영역을 정확하게 배치할 수 있다.
카메라(100)는 고정 또는 가변 가능한 배율로서 피사체를 촬상하기 위한 렌즈(110) 및 렌즈(110)를 거쳐 형성된 촬상 영상을 사용자(예: 카메라(100)가 감시 카메라(100)인 경우, 모니터링하는 작업자)로 하여금 확인할 수 있는 형태로 출력하는 영상출력모듈(120)을 포함할 수 있다.
여기서, 카메라(100)는 Pan, Tilt 및 Zoom 중 어느 하나 이상에 따른 움직임이 가능하며, 이와 같은 카메라(100)의 움직임은 외부 별도 수단 또는 작업자의 수동 이동에 따라 가능할 수 있다.
즉, 이와 같은 카메라(100)의 움직임 중 Pan 움직임은 촬영 영상을 수평으로 이동하는 움직임이고, Tilt 움직임은 카메라(100)의 축을 중심으로 수직적으로 움직이는 것이며, Zoom 이동은 카메라(100) 자체의 움직임이라기 보다는 카메라(100)의 렌즈(110) 배율이 변경됨에 따라 줌 확대 또는 줌 축소되어 촬영 영상의 크기가 변경되는 것을 일컫는다.
또한, 프라이버시 마스크 처리 장치(200)는 마스크 영역을 설정하거나 설정된 마스크 영역을 재조정하기 위한 구성으로서, 피사체에 대한 줌 배율 및 위치별로 프라이버시 영역 이동 값을 특정한 후 특정된 프라이버시 영역 이동 값을 이용하여 마스크 영역의 정확한 배치를 실행한다.
이를 위해, 프라이버시 마스크 처리 장치(200)는 카메라 움직임 판정모듈(210), 마스크 설정모듈(220), 마스크 조정모듈(230), 센서(240) 및 메모리(250)를 포함할 수 있다.
카메라 움직임 판정모듈(210)은 카메라(100)가 움직인 방향 및 폭을 판정하거나, 줌 기능이 적용된 경우에는 줌 배율 값을 판정하는 역할을 한다.
마스크 설정모듈(220)은 촬상 영상 중 어느 한 특정 부분에 대해 프라이버시 마스크를 최초 설정하고, 이와 같은 프라이버시 마스크의 설정에 대한 각종 옵션 메뉴를 제공하여 사용자에게 프라이버시 마스크를 설정하는 것에 대한 인터페이스 역할을 한다.
마스크 조정모듈(230)은 프라이버시 마스크 기능이 적용된 경우, 카메라(100)의 움직임에 따라 자동 실행되는 것이 가능하다.
즉, 마스크 조정모듈(230)은 마스크 설정모듈(220)에 의해 프라이버시 마스크 기능이 활성화된 상태이면, 영상 출력 모듈 및 카메라 움직임 판정모듈(210) 중 어느 하나 이상과 연동하여 결론적으로 촬상 영상이 어떻게 변화되고 있는지에 대한 정보를 취득하고, 취득한 정보를 기초로 해서 촬상 영상 내의 프라이버시 영역 또는 가리고자 하는 피사체에 대해 마스크 영역을 조정할지 여부에 대한 판정을 한다.
이때, 마스크 조정모듈(230)은 전술된 판정 결과에서 마스크 영역에 대한 미세 조정이 요구되는 것으로 판정된 경우, 마스크 영역을 미세 조정하기 위한 미세조정 모드를 실행한다.
마스크 조정모듈(230)이 미세조정 모드로 실행되는 경우, 카메라(100)의 움직임으로 인한 결과인 피사체에 대한 줌 배율 및 위치와 대응하는 프라이버시 영역 이동 값을 특정한다.
여기서, 프라이버시 영역 이동 값은 카메라(100)에서 피사체에 대한 포커스가 맞았을 경우에 피사체에 대한 상대적 거리를 나타내는 값으로 저장되는 줌 배율별 포커스 거리 데이터와, 피사체와 카메라(100) 간의 상대적 위치를 확인하기 위한 센서(240)를 통해 결정되는 위치 데이터 중 어느 하나 이상을 기준으로 해서 결정된 값이다.
즉, 줌 배율별 포커스 거리 데이터는 도 8에 도시된 바와 같이, 카메라(100)의 포커스가 맞았을 경우에 카메라(100)에 촬상되는 피사체가 얼마만큼의 거리에 있는지를 나타내는 데이터이다.
또한, 센서(240)를 통해 결정되는 위치 데이터는 초음파 센서, 레이저 센서 또는 GPS 센서 등을 통해 측정되는 데이터를 일컫는 것이며, 이는 피사체와 카메라(100) 간의 거리를 확인할 수 있는 데이터일 뿐만 아니라 피사체에 대한 카메라(100)의 방향성까지도 확인 가능하게 할 수 있는 소스가 될 수 있다.
마스크 조정모듈(230)은 특정된 프라이버시 영역 이동 값을 통해서, 변화된 현 촬상 영상 내에서 프라이버시 영역 또는 가리고자 하는 피사체에 대한 정확한 위치 및 크기를 판정하고, 판정된 위치 및 크기에 따라 마스크 영역을 조정한다.
이를 통해 마스크 조정모듈(230)은 마스크 영역에 대한 미세 조절이 가능하여 촬상 영역이 어떠한 카메라(100) 움직임에 의해 변동된다고 하더라도 프라이버시 영역 또는 가리고자 하는 피사체를 정확히 가릴 수 있다.
예를 들면, 도 2에 도시된 바와 같이 카메라(100)가 수평 방향으로 Pan 움직임이 발생할 경우, 프라이버시 마스크 처리 장치(200)는 도 2의 a) 도면과 같은 제1 촬상 영상이 도 2의 b) 도면과 같은 제2 촬상 영상으로 변화되었으나, 카메라(100)의 움직임은 Pan 움직임인 바 마스크 영역(A)의 크기가 변경될 상황이 발생한 것이 아니다.
즉, 카메라(100)가 수평 방향으로 Pan 움직임이 발생할 경우에 대한 프라이버시 마스크 처리 장치(200)는 카메라(100)의 수평 이동 폭만을 반영하여 마스크 영역(A)를 위치 이동하면 됨에 따라, 마스크 영역(A)이 프라이버시 영역에서 벗어나는 오류가 발생할 가능성이 현저히 낮다.
또한, 도 3은 도 2에 도시된 것과 같이 카메라(100)가 수평 방향으로 Pan 움직이는 경우를 피사체를 단순 구조화하여 도시한 것으로서, 마스크 영역(A)이 프라이버시 영역에서 벗어나는 오류가 발생할 가능성이 현저히 낮은 경우를 나타낸 것이다.
반면, 도 4는 도 3에 도시된 장치의 마스크 영역을 줌 확대한 후 이동하는 예를 나타내는 도면으로서, 촬상 영상이 변경되면서 함께 마스크 영역(A)의 크기 또한 변경되는 상황이 발생한 것이다.
도 4의 경우, 촬상 영상의 줌 배율이 확대된 만큼 마스크 영역(A)의 크기를 확대하는 것뿐만 아니라, 줌 배율이 확대된 경우에서 카메라(100) 움직임에 대응하여 촬상 영상이 이동하는 범위와 줌 배율이 확대 적용되기 이전의 경우에서 카메라(100) 움직임에 대응하여 촬상 영상이 이동하는 범위가 상이하다는 점을 고려할 필요가 있다.
전술된 상이점을 포함한 오류로 인하여, 도 4의 c 도면과 같이 마스크 영역(A)과 기 설정된 프라이버시 영역이 일치하지 않게 되는 현상이 발생한다.
도 5는 도 4에서 확인되는 문제점을 본 발명의 프라이버시 마스크 처리 장치(200)를 통해 보완한 결과를 나타내는 도면이다.
도 5에 도시된 바와 같이, 프라이버시 마스크 처리 장치(200)는 줌 배율이 확대된 경우에서 카메라(100) 움직임에 대응하여 촬상 영상이 이동하는 범위와 줌 배율이 확대 적용되기 이전의 경우에서 카메라(100) 움직임에 대응하여 촬상 영상이 이동하는 범위가 상이하다는 점을 고려함에 따라, 도 5의 c 도면과 같이 마스크 영역(A'')과 기 설정된 프라이버시 영역이 일치하는 결과를 줄곧 나타내는 것이 가능하다.
즉, 이는 프라이버시 마스크 처리 장치(200)에서 피사체에 대한 줌 배율 및 위치별로 프라이버시 영역이동 값을 추가로 더 특정하고, 이렇게 특정된 프라이버시 영역이동 값을 이용하여 프라이버시 영역의 정확한 위치 및 크기를 판정하는 것이 가능함에 따라 구현 가능하다.
도 6은 도 4에 도시된 장치의 마스크 영역을 줌 축소한 후 이동하는 예를 나타내는 도면이다.
도 6에 도시된 바와 같이, 영상의 줌 배율이 축소된 경우에도 영상의 줌 배율이 축소된 만큼 마스크 영역(A)의 크기를 축소할 뿐만 아니라, 줌 배율이 축소된 경우에서 카메라(100) 움직임에 대응하여 촬상 영상이 이동하는 범위와 줌 배율이 축소 적용되기 이전의 경우에서 카메라(100) 움직임에 대응하여 촬상 영상이 이동하는 범위가 상이하다는 점을 고려할 필요가 있다.
전술된 상이점을 포함한 오류로 인하여, 도 6의 c도면과 같이 마스크 영역(A)과 기 설정된 프라이버시 영역이 일치하지 않게 되는 현상이 발생한다.
도 7은 도 6에서 확인되는 문제점을 본 발명의 프라이버시 마스크 처리 장치(200)를 통해 보완한 결과를 나타내는 도면이다. 즉, 도 7의 c 도면과 같이 프라이버시 마스크 처리 장치(200)를 통해 마스크 영역에 대한 보정이 실시되는 경우, 마스크 영역(A'')과 기 설정된 프라이버시 영역이 일치하는 결과를 줄곧 나타내는 것이 가능하다.
그리고, 도 9는 도 1에 도시된 장치의 동작 과정을 일실시 예로 나타내는 도면이다.
도 9에 도시된 바와 같이, 프라이버시 마스크 처리 방법은 촬상 영상 중 어느 한 부분이 사생활 노출 거부 등의 이유로 인해 외부 노출이 불가한 경우, 해당 부분에 대해 프라이버시 마스크를 설정할 수 있다(S1).
S1 단계에서의 프라이버시 마스크에 대한 설정은 단일 개수의 프라이버시 마스크 또는 복수 개의 프라이버시 마스크를 설정하는 것이 가능하다.
즉, 단일 개수의 프라이버시 마스크를 설정한 경우에는 이후 단일 개수의 마스크 영역에 대한 미세 조정 기능이 이루어지고, 복수 개수의 프라이버시 마스크를 설정한 경우에는 복수 개수의 마스크 영역에 대한 미세 조정 기능이 실행된다.
S1 단계에서 프라이버시 마스크에 대한 설정이 이루어진 이후, 카메라(100) 움직임이 발생하는지 여부를 판정한다(S3).
S3 단계의 판정 결과, 카메라(100)의 움직임이 발생한 경우 마스크 영역을 미세 조정하기 위한 미세 조정 모드를 실행할 수 있다. 특히, 전술된 카메라(100)의 움직임은 마스크 영역의 크기까지 변경하여야 하는 움직임인 경우로 국한하는 것도 가능하다.
미세 조정 모드를 실행하게 되면, 카메라(100)의 움직임과 대응하는 피사체에 대한 줌 배율 및 위치 중 1 이상과 대응하는 프라이버시 영역이동 값을 특정한다(S5).
전술한 프라이버시 영역이동 값은 피사체에 대한 줌 배율 및 위치를 모두 고려한 경우, 피사체에 대한 줌 배율과 대응하는 제1 프라이버시 영역이동 값과 피사체에 대한 위치와 대응하는 제2 프라이버시 영역이동 값에 대한 평균값으로 정해지거나, 피사체에 대한 줌 배율 및 위치와 대응하는 프라이버시 영역의 이동에 대한 최적 실험 및 통계치를 기준으로 하여 정해질 수 있다.
이후, S5 단계에서 특정된 프라이버시 영역이동 값을 기준으로 하여 마스크 영역에 대한 미세 조정을 실시한다(S7).
이후, 프라이버시 마스크 처리 장치(200)에서 S7 단계의 실행 결과를 반영한 영상 출력을 카메라(100)에 요청할 수 있다(S9).
한편, S3 단계에서 판정한 결과, 카메라(100) 움직임이 없거나 카메라(100) 움직임이 있더라도 마스크 영역에 대한 오류 발생 가능성이 현저히 낮은 경우이면, 마스크 영역에 대한 미세조정 모드를 실행하지 않는다(S11).
이상과 첨부된 도면을 참조하여 본 발명의 실시 예를 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시 예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.
또한, 본 발명은 어떠한 방식의 카메라 움직임이 있더라도 촬상 영상 내의 프라이버시 영역에 정확히 마스크 영역을 배치하기 위한 것임에 따라, 시판 또는 영업의 가능성이 충분할 뿐만 아니라 현실적으로 명백하게 실시할 수 있는 정도이므로 산업상 이용가능성이 있는 발명이다.
100: 카메라 110: 렌즈
120: 영상출력모듈
200: 프라이버시 마스크 처리장치
210: 카메라 움직임 판정모듈 220: 마스크 설정모듈
230: 마스크 조정모듈 240: 센서
250: 메모리

Claims (12)

  1. 카메라의 촬상 영상 중 프라이버시 영역에 대해 프라이버시 마스크를 설정하는 단계;
    상기 프라이버시 마스크의 설정을 통해 상기 촬상 영상 내에 형성되는 마스크 영역이 상기 프라이버시 영역을 이탈하고, 기 정해진 마스크 영역의 이탈 조건을 충족하는 경우 상기 마스크 영역의 미세조정 모드를 실행하는 단계;
    상기 카메라의 일측에 구비된 거리측정 센서를 동작시켜 상기 거리측정 센서의 실제거리 측정 값을 통해 상기 촬상 영상의 피사체와 상기 카메라 간의 상대적 위치를 결정하기 위한 위치 데이터를 생성하는 단계;
    상기 위치 데이터를 포함하는 프라이버시 영역이동 값을 특정하는 단계; 및
    상기 프라이버시 영역이동 값을 기초로 상기 프라이버시 영역의 위치 및 크기를 판정하고, 판정 결과를 이용해서 상기 마스크 영역을 조정하는 단계;를 포함하는 프라이버시 마스크 처리 방법.
  2. 제1 항에 있어서,
    상기 프라이버시 영역이동 값은 상기 카메라에서 상기 피사체에 대한 포커스가 맞을 경우 상기 피사체에 대한 상대적 거리를 나타내는 값으로 저장되는 줌 배율별 포커스 거리 데이터를 더 포함하는 프라이버시 마스크 처리 방법.
  3. 제1 항에 있어서,
    상기 프라이버시 마스크 처리 방법은,
    상기 마스크 영역의 이탈 조건을 미 충족하는 경우 상기 카메라의 움직임 을 기초로 한 일반 모드로 상기 마스크 영역을 조정하는 단계;를 더 포함하는 프라이버시 마스크 처리 방법.
  4. 제1 항에 있어서,
    상기 마스크 영역의 이탈 조건은 상기 마스크 영역의 크기를 변경하는 상기 카메라의 움직임을 포함하는 프라이버시 마스크 처리 방법.
  5. 제2 항에 있어서,
    상기 프라이버시 영역이동 값은 상기 피사체에 대한 줌 배율과 대응되는 제1 프라이버시 영역이동 값과 상기 피사체에 대한 위치와 대응되는 제2 프라이버시 영역이동 값의 평균값인 프라이버시 마스크 처리 방법.
  6. 제2 항에 있어서,
    상기 프라이버시 영역이동 값은 상기 피사체에 대한 줌 배율 및 상기 피사체에 대한 위치를 조합한 결과로서 생성된 값인 프라이버시 마스크 처리 방법.
  7. 제1 항에 있어서,
    상기 촬상 영상에 대해 적어도 하나의 다른 프라이버시 마스크를 더 설정하는 단계를 더 포함하는 프라이버시 마스크 처리 방법.
  8. 제7 항에 있어서,
    복수 개수의 프라이버시 마스크들의 설정을 통해 상기 촬상 영상 내에 형성되는 복수 개수의 마스크 영역들 중 하나 이상이 대응되는 프라이버시 영역으로부터 이탈하고, 상기 마스크 영역의 이탈 조건을 충족하는 경우 이탈된 하나 이상의 마스크 영역에 대한 미세조정 모드를 실행하는 단계; 및
    상기 프라이버시 영역이동 값을 기초로 상기 이탈된 하나 이상의 마스크 영역을 조정하는 단계를 더 포함하는 프라이버시 마스크 처리 방법.
  9. 카메라의 촬상 영상 중 프라이버시 영역에 대해 프라이버시 마스크를 설정하는 마스크 설정모듈;
    상기 프라이버시 마스크의 설정을 통해 상기 촬상 영상 내에 형성되는 마스크 영역이 상기 프라이버시 영역을 이탈하고, 기 정해진 마스크 영역의 이탈 조건을 충족하는 경우 상기 마스크 영역의 미세조정 모드를 실행하는 마스크 조정모듈; 및
    상기 미세조정 모드에서 상기 촬상 영상의 피사체와 떨어진 상대적 거리를 측정하는 거리측정 센서;를 포함하되,
    상기 마스크 조정모듈은 상기 거리측정 센서의 실제거리 측정 값을 통해 상기 피사체와 상기 카메라 간의 상대적 위치를 결정하기 위한 위치 데이터를 생성하고, 상기 위치 데이터를 포함하는 프라이버시 영역이동 값을 특정하며, 상기 프라이버시 영역이동 값을 기초로 상기 프라이버시 영역이동 값을 기초로 상기 프라이버시 영역의 위치 및 크기를 판정하고, 판정 결과를 이용해서 상기 마스크 영역을 조정하는 프라이버시 마스크 처리 장치.
  10. 제9 항에 있어서,
    상기 프라이버시 마스크 처리 장치는,
    상기 카메라의 움직임 방향 및 움직임 폭을 판정하거나, 줌 기능의 적용 시에는 줌 배율 값을 추가 판정하는 카메라 움직임 판정모듈;을 더 포함하는 프라이버시 마스크 처리 장치.
  11. 제9 항에 있어서,
    상기 마스크 설정모듈은 상기 촬상 영상에 대해 적어도 하나의 다른 프라이버시 마스크를 더 설정하는 프라이버시 마스크 처리 장치.
  12. 제11 항에 있어서,
    상기 마스크 조정모듈은 복수 개수의 프라이버시 마스크들의 설정을 통해 상기 촬상 영상 내에 형성되는 복수 개수의 마스크 영역들 중 하나 이상이 대응되는 프라이버시 영역으로부터 이탈하고, 상기 마스크 영역의 이탈 조건을 충족하는 경우 이탈된 하나 이상의 마스크 영역에 대한 미세조정 모드를 실행하고, 상기 프라이버시 영역이동 값을 기초로 상기 이탈된 하나 이상의 마스크 영역을 조정하는 프라이버시 마스크 처리 장치.
KR1020130032305A 2013-03-26 2013-03-26 프라이버시 마스크 처리 방법 및 장치 KR101875137B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020130032305A KR101875137B1 (ko) 2013-03-26 2013-03-26 프라이버시 마스크 처리 방법 및 장치
PCT/KR2014/001143 WO2014157830A1 (ko) 2013-03-26 2014-02-12 프라이버시 마스크 처리 방법
US14/779,497 US9794517B2 (en) 2013-03-26 2014-02-12 Privacy masking method
GB201517095A GB2527235B (en) 2013-03-26 2014-02-12 Privacy masking method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130032305A KR101875137B1 (ko) 2013-03-26 2013-03-26 프라이버시 마스크 처리 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20140117183A KR20140117183A (ko) 2014-10-07
KR101875137B1 true KR101875137B1 (ko) 2018-07-06

Family

ID=51624751

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130032305A KR101875137B1 (ko) 2013-03-26 2013-03-26 프라이버시 마스크 처리 방법 및 장치

Country Status (4)

Country Link
US (1) US9794517B2 (ko)
KR (1) KR101875137B1 (ko)
GB (1) GB2527235B (ko)
WO (1) WO2014157830A1 (ko)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6551416B2 (ja) * 2014-11-07 2019-07-31 ソニー株式会社 情報処理システム、記憶媒体、および制御方法
KR20180066722A (ko) * 2016-12-09 2018-06-19 한국전자통신연구원 모바일 기반 개인 콘텐츠 보호장치 및 그 방법
EP3564900B1 (en) * 2018-05-03 2020-04-01 Axis AB Method, device and system for a degree of blurring to be applied to image data in a privacy area of an image
US20190349517A1 (en) * 2018-05-10 2019-11-14 Hanwha Techwin Co., Ltd. Video capturing system and network system to support privacy mode
US11122237B2 (en) * 2018-06-05 2021-09-14 Axon Enterprise, Inc. Systems and methods for redaction of screens
KR102574895B1 (ko) * 2018-06-12 2023-09-05 한화비전 주식회사 패닝 및 틸팅 제어가 되는 카메라의 프라이버시 마스크 최적화방법 및 프라이버시 마스크 최적화가 적용된 촬상장치
KR20200101133A (ko) * 2019-02-19 2020-08-27 삼성전자주식회사 전자 장치 및 그의 제어 방법
WO2020243059A1 (en) * 2019-05-29 2020-12-03 Apple Inc. Obfuscating location specific data associated with a physical environment
EP3985976B1 (en) 2020-10-16 2022-09-28 Axis AB Method of encoding an image including a privacy mask
CN112770049A (zh) * 2020-12-30 2021-05-07 维沃移动通信有限公司 拍摄方法、装置及存储介质
CN114827396A (zh) * 2021-01-29 2022-07-29 佳能株式会社 摄像装置、摄像方法和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060133265A (ko) * 2005-06-20 2006-12-26 엘지전자 주식회사 프라이버시 마스크 표시 제어 방법 및 장치
WO2012001947A1 (ja) * 2010-06-28 2012-01-05 株式会社ニコン 撮像装置、画像処理装置、画像処理プログラム記録媒体
JP2012090157A (ja) * 2010-10-21 2012-05-10 Canon Inc 表示制御装置、表示制御方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100579456B1 (ko) * 2003-07-23 2006-05-12 엘지전자 주식회사 마스킹 블록의 설정방법
US7493038B2 (en) * 2004-12-15 2009-02-17 Lg Electronics Inc. Method and apparatus for controlling privacy mask display
KR100719120B1 (ko) * 2005-02-26 2007-05-17 삼성전자주식회사 프라이버시영역을 마스크 처리하는 감시시스템 및 그 방법
JP5132705B2 (ja) * 2010-03-26 2013-01-30 株式会社日立製作所 画像処理装置
CN105791776B (zh) * 2010-10-16 2018-12-11 佳能株式会社 服务器设备及视频数据的发送方法
KR101237966B1 (ko) * 2011-03-16 2013-02-27 삼성테크윈 주식회사 피사체의 마스킹을 제어하는 감시 시스템 및 그 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060133265A (ko) * 2005-06-20 2006-12-26 엘지전자 주식회사 프라이버시 마스크 표시 제어 방법 및 장치
WO2012001947A1 (ja) * 2010-06-28 2012-01-05 株式会社ニコン 撮像装置、画像処理装置、画像処理プログラム記録媒体
JP2012090157A (ja) * 2010-10-21 2012-05-10 Canon Inc 表示制御装置、表示制御方法

Also Published As

Publication number Publication date
GB2527235A (en) 2015-12-16
GB2527235B (en) 2019-12-25
KR20140117183A (ko) 2014-10-07
GB201517095D0 (en) 2015-11-11
US9794517B2 (en) 2017-10-17
WO2014157830A1 (ko) 2014-10-02
US20160150188A1 (en) 2016-05-26

Similar Documents

Publication Publication Date Title
KR101875137B1 (ko) 프라이버시 마스크 처리 방법 및 장치
US20230059657A1 (en) Multi-camera zoom control method and apparatus, and electronic system and storage medium
US8488001B2 (en) Semi-automatic relative calibration method for master slave camera control
US8279323B2 (en) Image capturing apparatus and control method for the same
WO2012169149A1 (en) Image display apparatus and image display method
US10198796B2 (en) Information processing apparatus, control method of information processing apparatus, and non-transitory storage medium storing information processing program
US10432843B2 (en) Imaging apparatus, control method of imaging apparatus, and non-transitory recording medium for judging an interval between judgement targets
JP6512793B2 (ja) 撮像装置、監視カメラシステム、撮像装置の制御方法およびプログラム
US11140327B2 (en) Image-capturing device and method for operating image-capturing system of two cameras
US10104277B2 (en) Panning index display apparatus and processing method
JP2013017125A (ja) 撮像装置及び撮像装置のモニタリング画像の表示方法
JP6700706B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP6460310B2 (ja) 撮像装置、画像表示方法及びプログラム
JP2009224882A (ja) 撮像装置、撮像装置の表示方法、プログラム及びコンピュータ読み取り可能な記録媒体
JP2014039165A (ja) 追尾機能付き撮影装置
US10805609B2 (en) Image processing apparatus to generate panoramic image, image pickup apparatus to generate panoramic image, control method of image processing apparatus to generate panoramic image, and non-transitory computer readable storage medium to generate panoramic image
JP2013044827A (ja) 撮像装置
JP2018155562A (ja) 情報取得装置
US11696040B2 (en) Image processing apparatus that retouches and displays picked-up image, image processing method, and storage medium
US20230209203A1 (en) Imaging device, imaging system, control method, program, and storage medium
KR102394189B1 (ko) 하우징에 장착된 이기종 카메라의 영상 동기화 방법 및 그 장치
JP7504688B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP6205147B2 (ja) 撮像装置及びそのピント合わせ方法、ピント合わせプログラム
US20160373726A1 (en) Method for automatic optical-axis alignment of camera rig for capturing stereographic image
JP2006119199A (ja) 光学機器

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right