KR102621196B1 - 개인 영상정보 보호 cctv 시스템 - Google Patents
개인 영상정보 보호 cctv 시스템 Download PDFInfo
- Publication number
- KR102621196B1 KR102621196B1 KR1020230089131A KR20230089131A KR102621196B1 KR 102621196 B1 KR102621196 B1 KR 102621196B1 KR 1020230089131 A KR1020230089131 A KR 1020230089131A KR 20230089131 A KR20230089131 A KR 20230089131A KR 102621196 B1 KR102621196 B1 KR 102621196B1
- Authority
- KR
- South Korea
- Prior art keywords
- video
- image
- metadata
- artificial intelligence
- storage device
- Prior art date
Links
- 238000013473 artificial intelligence Methods 0.000 claims abstract description 53
- 230000006835 compression Effects 0.000 claims abstract description 24
- 238000007906 compression Methods 0.000 claims abstract description 24
- 238000001514 detection method Methods 0.000 claims abstract description 24
- 238000000034 method Methods 0.000 claims abstract description 24
- 230000000873 masking effect Effects 0.000 claims description 45
- 230000005540 biological transmission Effects 0.000 claims description 8
- 230000008569 process Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 8
- 230000009466 transformation Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
- H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/27—Server based end-user applications
- H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N5/9201—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving the multiplexing of an additional signal and the video signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/91—Television signal processing therefor
- H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N5/926—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
- H04N5/9261—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation involving data reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
본 발명은 개인 영상정보 보호 CCTV 시스템에 관한 것이다. 본 발명에 따르면, 네트워크 연결된 적어도 하나의 IP 카메라로부터 영상을 수신하고, 인공지능을 기반으로 상기 영상 내 객체를 검출 후 객체 검출 정보가 저장된 메타 데이터를 생성하고, 원본 영상의 영상 압축 데이터에 상기 메타 데이터를 추가하여 네트워크를 통해 전송하는 인공지능 장치; 및 상기 인공지능 장치로부터 상기 메타 데이터가 추가된 영상 압축 데이터를 수신하여 저장하고, 클라이언트 장치로부터 상기 IP 카메라에 대한 영상 반출 요청이 수신되면, 상기 영상 압축 데이터의 원본 영상 내 상기 객체를 상기 메타 데이터를 기초로 설정 방식으로 마스킹 처리한 마스킹 처리 영상을 상기 클라이언트 장치로 반출하는 영상 저장 장치를 포함하는 개인 영상정보 보호 CCTV 시스템을 제공한다.
본 발명에 따르면, 영상 저장 장치가 IP 카메라의 원본 영상에 대한 영상 압축 데이터 및 영상 내 객체 관련 메타 데이터를 수신하여 저장함에 따라 원본 영상의 복원이 가능하고 원본 영상 내 객체를 메타 데이터를 기초로 설정 방식으로 직접 마스킹 처리하여 클라이언트 장치로 반출할 수 있다.
본 발명에 따르면, 영상 저장 장치가 IP 카메라의 원본 영상에 대한 영상 압축 데이터 및 영상 내 객체 관련 메타 데이터를 수신하여 저장함에 따라 원본 영상의 복원이 가능하고 원본 영상 내 객체를 메타 데이터를 기초로 설정 방식으로 직접 마스킹 처리하여 클라이언트 장치로 반출할 수 있다.
Description
본 발명은 개인 영상정보 보호 CCTV 시스템에 관한 것으로, 보다 상세하게는 영상 내에서 개인 정보 보호가 필요한 영역을 마스킹 처리하여 서비스할 수 있는 개인 영상정보 보호 CCTV 시스템에 관한 것이다.
개인영상정보 실시간 마스킹 시스템은 CCTV 등에 의해 촬영되는 영상 중 개인의 얼굴이나 차량번호 등을 실시간으로 자동 탐지한 후 해당 부분이 녹화되지 않게 하거나 식별되지 않도록 흐릿하게 하는 것을 말한다.
개인 영상정보 보호 시스템에 적용되는 마스킹 기법으로는 블러링, 모자이크, 제거/변형, 암호화 등의 방법이 있다.
그런데, 기존의 경우 원본 영상 내 마스킹 대상이 되는 객체(얼굴) 영역이 블러링, 모자이크, 암호화 등에 의해 변형됨에 따라 원본 영상을 완벽하게 복구할 수 없다는 단점이 있다. 원본 영상에서 암호화 마스킹 후 복원하는 기법은 원본 영상 추출을 위하여 별도의 프로세스, 장비가 필요하다.
이러한 점에 따라, 기존의 시스템은 원본 영상을 저장해 두고, 영상 반출 시에 저장된 영상에서 마스킹 처리를 수행해야 한다. 하지만, 해당 마스킹에 많은 리소스가 필요하며 실시간 처리가 어려운 문제점이 있다.
최근에는 카메라에서 촬영 중인 고화질 라이브 영상을 받아서 자동으로 마스킹 처리하는 고성능 시스템도 개발되고 있다. 실시간 영상의 경우 영상 관제를 통한 라이브 모니터링 서비스를 제공하지만, 얼굴 마스킹 처리를 별도의 NVR(네트워크 비디오 레코더)이나 PC 서버에서 진행 후 서비스 하고 있어 이 역시 실시간 처리가 어려운 문제점이 있다.
그밖에도, 기존의 마스킹 지원 카메라는 촬영 영상 내 감지된 객체를 마스킹 후 실시간 영상을 전송하지만, 마스킹에 의해 원본 영상이 훼손되어 원본을 복원할 수 없다는 단점이 있다.
본 발명의 배경이 되는 기술은 한국등록특허 제10-2301239호(2021.09.06 공고)에 개시되어 있다.
본 발명은, 영상 저장 장치가 인공지능 장치로부터 IP 카메라의 원본 영상에 대한 영상 압축 데이터 및 영상 내 객체 관련 메타 데이터를 수신하여 저장하고, 외부로부터 영상 반출 요청이 수신되면 해당 영상에 대한 메타데이터를 기초로 영상 내 객체를 마스킹 처리하여 반출할 수 있는 개인 영상정보 보호 CCTV 시스템을 제공하는데 목적이 있다.
본 발명은, 네트워크 연결된 적어도 하나의 IP 카메라로부터 영상을 수신하고, 인공지능을 기반으로 상기 영상 내 객체를 검출 후 객체 검출 정보가 저장된 메타 데이터를 생성하고, 원본 영상의 영상 압축 데이터에 상기 메타 데이터를 추가하여 네트워크를 통해 전송하는 인공지능 장치; 및 상기 인공지능 장치로부터 상기 메타 데이터가 추가된 영상 압축 데이터를 수신하여 저장하고, 클라이언트 장치로부터 상기 IP 카메라에 대한 영상 반출 요청이 수신되면, 상기 영상 압축 데이터의 원본 영상 내 상기 객체를 상기 메타 데이터를 기초로 설정 방식으로 마스킹 처리한 마스킹 처리 영상을 상기 클라이언트 장치로 반출하는 영상 저장 장치를 포함하는 개인 영상정보 보호 CCTV 시스템을 제공한다.
또한, 상기 영상 저장 장치는, 상기 IP 카메라의 영상을 요청한 상기 클라이언트 장치로 상기 마스킹 처리 영상을 제공하는 네트워크 비디오 레코더(Network Video Recorder, NVR)일 수 있다.
또한, 상기 인공지능 장치는, 인공지능을 기반으로 상기 원본 영상 내 타겟이 되는 적어도 하나의 객체의 위치 및 크기를 검출하고, 상기 적어도 하나의 객체에 대응한 객체 검출 정보를 저장한 메타데이터를 생성하는 객체 검출부; 상기 마스킹 처리 전의 원본 영상을 압축하는 영상 압축부; 및 상기 원본 영상을 압축하여 생성한 상기 영상 압축 데이터에 상기 메타 데이터를 추가하여 상기 영상 저장 장치로 전송하는 데이터 전송부를 포함할 수 있다.
또한, 상기 객체 검출부는, 각 객체에 대한 객체 타입, 위치, 크기, 검출 신뢰도 값을 상기 메타데이터로 저장할 수 있다.
또한, 상기 영상 저장 장치는, 상기 메타데이터를 기초로 상기 영상 내 검출된 객체 중에서 상기 검출 신뢰도 값이 기준값 이상인 객체를 대상으로 기 설정된 영상 마스킹 방법을 적용하여 객체의 일부 영역 또는 전체 영역을 마스킹 처리하여 상기 마스킹 처리 영상을 생성할 수 있다.
또한, 상기 인공지능 장치는, 상기 영상 내 검출된 객체에 대해 기 설정된 영상 마스킹 방법을 이용하여 마스킹을 적용하는 마스킹 처리부를 더 포함하고, 상기 영상 압축부는, 상기 마스킹이 적용된 마스킹 처리 영상을 압축하여 마스킹 영상 압축 데이터를 생성하여 상기 영상 저장 장치로 전달할 수 있다.
또한, 상기 영상 저장 장치는, 상기 인공지능 장치로부터 수신한 상기 마스킹 영상 압축 데이터를 이용하여 상기 클라이언트 장치로 상기 IP 카메라의 영상에 대한 실시간 라이브 방송을 서비스할 수 있다.
또한, 상기 타겟이 되는 객체는, 차량, 사람, 사용자 단말의 디스플레이 화면 중 적어도 하나를 포함할 수 있다.
본 발명에 따르면, 영상 저장 장치가 IP 카메라의 원본 영상에 대한 영상 압축 데이터 및 영상 내 객체 관련 메타 데이터를 인공지능 장치로부터 수신하여 저장함에 따라 영상 저장 장치에서 원본 영상의 복원이 가능하다.
또한, 클라이언트 장치로부터 영상 반출 요청이 수신되면 영상 저장 장치에서 해당 원본 영상 내 객체를 메타 데이터를 기초로 설정 방식으로 직접 마스킹 처리하여 클라이언트 장치로 서비스할 수 있다.
아울러, 인공지능 장치로부터 마스킹 처리 영상을 수신하는 경우 영상 저장 장치가 IP 카메라의 영상에 대한 마스킹 처리 영상을 클라이언트 장치로 실시간 라이브 서비스할 수 있다.
도 1은 본 발명의 실시예에 따른 개인 영상정보 보호 CCTV 시스템의 구성을 나타낸 도면이다.
도 2는 도 1에 도시된 인공지능 장치의 구성을 상세히 나타낸 도면이다.
도 3은 도 1의 인공지능 장치가 영상 저장 장치로 전송하는 데이터 형태를 설명한 도면이다.
도 4는 도 3에 나타낸 전송 데이터 형태를 보다 구체적으로 설명한 도면이다.
도 2는 도 1에 도시된 인공지능 장치의 구성을 상세히 나타낸 도면이다.
도 3은 도 1의 인공지능 장치가 영상 저장 장치로 전송하는 데이터 형태를 설명한 도면이다.
도 4는 도 3에 나타낸 전송 데이터 형태를 보다 구체적으로 설명한 도면이다.
그러면 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.
도 1은 본 발명의 실시예에 따른 개인 영상정보 보호 CCTV 시스템의 구성을 나타낸 도면이다.
도 1에 나타낸 것과 같이, 본 발명의 실시예에 따른 개인 영상정보 보호 CCTV 시스템은 인공지능 장치(100), 영상 저장 장치(200)를 포함한다.
여기서, 인공지능 장치(100)는 IP 카메라(10) 및 영상 저장 장치(200)와 각각 유선 네트워크, 무선 네트워크, 혹은 유무선 결합 네트워크를 통해 연결되어 상호 통신하고 데이터를 주고받을 수 있다.
IP 카메라(10)는 실내, 실외 등 감시가 필요한 위치나 공간에 설치되어 운용될 수 있다. IP 카메라(10)는 촬영한 영상을 네트워크를 통해 인공지능 장치(100)로 전송할 수 있다.
인공지능 장치(100)는 적어도 하나의 IP 카메라(10)로부터 영상을 수신한다. 이러한 인공지능 장치(100)는 인공지능을 기반으로 영상 내 타겟이 되는 적어도 하나의 객체를 검출 후 객체 검출 정보가 저장된 메타 데이터를 생성한다. 그리고, 인공지능 장치(100)는 원본 영상의 영상 압축 데이터에 메타 데이터를 추가하여 네트워크를 통해 전송한다.
여기서, 타겟이 되는 객체란, 차량, 사람, 사용자 단말의 디스플레이 화면 중 적어도 하나를 포함할 수 있다. 여기서 차량 객체의 경우 차량번호가 프라이버시 보호 대상이 될 수 있고, 사람의 경우 얼굴이 프라이버시 보호 대상이 될 수 있고, 사용자 단말의 디스플레이 화면의 경우 화면 자체가 프라이버시 보호 대상이 될 수 있다.
영상 저장 장치(200)는 인공지능 장치(100)로부터 메타 데이터가 추가된 영상 압축 데이터를 수신하여 저장한다. 영상 저장 장치(200)는 각각의 IP 카메라(10) 별로 관련 데이터를 인공지능 장치(100)로부터 수신 및 저장한다.
여기서, 영상 저장 장치(200)는 네트워크 연결된 클라이언트 장치(미도시)로부터 IP 카메라(10)에 대한 영상 반출 요청이 오면, 영상 압축 데이터의 원본 영상 내 객체를 메타 데이터를 기초로 설정 방식으로 마스킹 처리(예: 블러링, 모자이크, 제거/변형 등)하여 마스킹 처리 영상을 클라이언트 장치(미도시)로 전달할 수 있다.
구체적으로, 영상 저장 장치(200)는 클라이언트 장치(미도시)로부터 해당 IP 카메라(10)에 대한 영상 반출 요청이 수신될 때, 인공지능 장치(100)로부터 받은 영상 압축 데이터의 압축 해제 후 메타 데이터를 기초로 영상 내 관련 객체를 직접 마스킹 처리하여 클라이언트 장치(미도시)로 서비스할 수 있다.
클라이언트 장치(미도시)는 영상을 요청한 사용자 단말, 해당 구역에 대한 관리자 단말, 관계 기관 측의 관리자 단말 등을 포함할 수 있다. 이러한 클라이언트 장치는 데스크탑, PC, 태블릿 PC, 노트북, 스마트폰, 스마트 패드, 관계 기관 서버 등을 포함할 수 있다.
또한, 클라이언트 장치(미도시)는 영상 저장 장치(200)와 유선, 무선 혹은 유무선 결합 네트워크에 의해 연결될 수 있다.
본 발명의 실시예에서 영상 저장 장치(200)에 저장되는 데이터는 원 영상 압축 데이터에 해당하므로, 언제든지 압축 해제를 통해 원본 영상으로 복원이 가능하다. 이러한 원본 영상은 필요한 경우 권한을 가진 관할 기관, 정부 기관, 경찰청 등에 제공될 수 있다.
이러한 영상 저장 장치(200)는 IP 카메라(10)의 영상을 요청한 클라이언트 장치로 마스킹 처리 영상을 제공하는 네트워크 비디오 레코더(Network Video Recorder, NVR)에 해당할 수 있다.
아울러, 본 발명에서 제안하는 인공지능 장치(100)와 영상 저장 장치(200)는 통상의 네트워크 비디오 레코더 기능을 대체할 수 있으며, 본 발명의 실시예에 따른 영상 저장 장치(200)는 기존 네트워크 비디오 레코더와는 다르게 원본 영상의 저장 및 복원이 가능한 장점을 가진다.
인공지능 장치(100)는 적어도 하나 이상의 다수 카메라를 지원하기 위해 구현될 수 있다. 여기서 물론, 단일 카메라 처리를 위해서 인공 지능 장치(100)는 IP 카메라(10) 내에 포함될 수도 있다.
인공지능 장치(100)는 임베디드로 구현될 수 있으며, PC에서 구동 가능한 S/W로 구현될 수 있다.
이러한 본 발명의 개인 영상정보 보호 CCTV 시스템은 IP 카메라에 포함되어 구현될 수도 있고, 단일 장치로 구현될 수도 있으며, NVR에 포함되어 구현될 수도 있다. 또한, 개인 영상정보 보호 CCTV 시스템은 임베디드 장치로 구현될 수 있고, 일반 IP 카메라와 연동하는 PC용 S/W(PC Software)로도 구현될 수 있다
도 2는 도 1에 도시된 인공지능 장치의 구성을 상세히 나타낸 도면이다.
도 2에 나타낸 것과 같이, 인공지능 장치(100)는 객체 검출부(110), 영상 압축부(130), 데이터 전송부(140)를 포함하며, 마스킹 처리부(120)를 더 포함할 수 있다. 여기서 각 부(110~140)의 동작과 각 부 간의 데이터 흐름은 제어부(미도시)에 의해 제어될 수 있다.
객체 검출부(110)는 인공지능을 기반으로 원본 영상 내 타겟이 되는 적어도 하나의 객체의 위치 및 크기를 검출하고, 적어도 하나의 객체에 대응한 객체 검출 정보를 저장한 메타데이터를 생성한다. 여기서, 인공지능을 이용하는 영상 내 객체 검출은 기 공지된 다양한 방법이 사용될 수 있다.
여기서 타겟이 되는 객체는 임의 객체일 수 있다. 예를 들어, 영상 내 존재한 차량, 사람, 사용자 단말 시스템 이외에도, 사용자가 추가한 임의 종류의 객체에 해당할 수 있다. 객체 검출부(110)는 인공지능을 통해서 다수의 객체를 검출할 수 있고 사용자가 임의로 설정한 객체를 검출할 수 있으며, 이와 같이 사용자가 임의 추가(설정)한 객체의 경우에도 메타 데이터를 생성할 수 있다. 사전 학습되어 있지 않은 객체 혹은 임의 위치 영역의 마스킹을 위해서는 사용자에 의해 임의 객체 추가가 가능하다.
이와 같이, 객체 검출부(110)는 AI를 통해서 영상 내 객체(사람, 차량 등)을 검출하고, 메타 데이터를 생성할 수 있다. 여기서, 메타 데이터는 각 객체에 대한 객체 타입, 위치, 크기, 검출 신뢰도 값을 포함할 수 있다.
객체 타입은 객체 종류(사람, 차량 등)를 나타내고, 객체 위치 및 크기는 영상 내 해당 객체의 좌표 위치 및 크기를 의미할 수 있다.
객체의 검출 신뢰도 값은 인공 지능에 의해 검출 혹은 분류된 객체에 대한 검출 신뢰도(정확도)를 의미할 수 있다. 예를 들어, 영상 내에서 객체 1은 신뢰도 55%의 값으로 사람으로 분류되고, 객체 2는 신뢰도 90%의 값으로 사람으로 분류될 수 있다. 이때, 객체 1과 객체 2 모두 사람으로 분류되었으나, 그에 대한 분류 정확도(신뢰성)은 상이한 것을 알 수 있으며, 객체가 사람일 확률은 신뢰도 값이 90%인 객체 2의 경우가 보다 높다고 볼 수 있다.
객체 검출부(110)는 이와 같이 원본 영상에서 인공지능을 기반으로 추출한 각 객체별 특징들이 저장된 형태의 메타데이터를 생성하고, 이를 데이터 전송부(140)로 전달할 수 있다.
영상 압축부(130)는 마스킹 처리 전에 해당한 원본 영상을 압축하여 영상 압축 데이터(원 영상 압축 데이터)를 생성하고, 이를 데이터 전송부(140)로 전달할 수 있다.
그러면, 데이터 전송부(140)는 영상 압축부(130)에 의한 영상 압축 데이터에 객체 검출부(110)에 의한 메타 데이터를 추가하여 영상 저장 장치(200)로 전송한다.
도 3은 도 1의 인공지능 장치가 영상 저장 장치로 전송하는 데이터 형태를 설명한 도면이고, 도 4는 도 3에 나타낸 전송 데이터 형태를 보다 구체적으로 설명한 도면이다.
도 3에 나타낸 것과 같이, 인공지능 장치(100)는 각 IP 카메라(10) 별로 영상 압축 데이터에 메타 데이터를 추가 또는 연결하여 영상 저장 장치(200)로 전송할 수 있다. 아울러, 도 4와 같이, 원 영상 압축 데이터에 대응한 메타 데이터는 해당 IP 카메라(10)의 원 영상에서 추출한 각 객체별 객체 타입, 위치, 크기, 신뢰도 값이 함께 보관될 수 있다.
영상 저장 장치(200)는 이와 같이 메타 데이터가 추가된 영상 압축 데이터를 이러한 인공지능 장치(100)로부터 수신하여 저장한다.
영상 저장 장치(200)는 영상 반출 요청이 수신되면, 메타데이터를 기초로 영상 내 해당 객체에 대해 기 설정된 영상 마스킹 방법을 적용하여 객체의 일부 영역 또는 전체 영역을 마스킹 처리하여 마스킹 처리 영상을 생성할 수 있다.
보다 구체적으로, 영상 저장 장치(200)는 영상 반출 요청이 수신되면, 영상 내 검출된 객체 중에서 검출 신뢰도 값이 기준값(예: 50%) 이상인 객체를 대상으로 기 설정된 영상 마스킹 방법을 적용하여 객체의 일부 영역 또는 전체 영역을 마스킹 처리할 수 있다.
이와 같이, 영상 저장 장치(200)는 설정 신뢰도 이상의 객체에 대해 기 설정된 영상 마스킹 기법을 이용하여 마스킹을 적용할 수 있다. 영상 마스킹 방법은 기 공지된 다양한 방법이 사용될 수 있다.
다시 도 2를 참조하면, 인공지능 장치(100)는 마스킹 처리부(120)를 추가로 포함할 수 있으며, 이 경우 인공지능 장치(100)에서 직접 메타 데이터를 기초로 영상 내 객체에 대해 마스킹을 수행할 수 있다.
구체적으로, 마스킹 처리부(120)는 원본 영상 내 검출된 객체에 대해 기 설정된 영상 마스킹 방법을 이용하여 마스킹을 적용하고 이를 영상 압축부(130)로 전달할 수 있다. 여기서, 물론 마스킹 처리부(120)는 메타 데이터를 참고하여 설정 신뢰도 이상을 갖는 객체를 대상으로 마스킹을 적용할 수 있다.
또한, 영상 압축부(130)는 마스킹이 적용된 마스킹 처리 영상을 압축하여 마스킹 영상 압축 데이터를 생성하여 영상 저장 장치(200)로 전달할 수 있다.
그러면, 영상 저장 장치(200)는 인공지능 장치(100)로부터 수신한 마스킹 영상 압축 데이터를 이용하여 클라이언트 장치(미도시)로 IP 카메라(10)의 영상에 대한 실시간 라이브 방송을 서비스할 수 있다. 즉, 영상 저장 장치(200)는 마스킹 처리된 상태의 영상을 인공지능 장치(100)로부터 받아서 라이브 방송을 실시간 스트리밍할 수 있다.
이상과 같은 본 발명에 따르면, 영상 저장 장치가 IP 카메라의 원본 영상에 대한 영상 압축 데이터 및 영상 내 객체 관련 메타 데이터를 인공지능 장치로부터 수신하여 저장함에 따라 영상 저장 장치에서 원본 영상의 복원이 가능하다.
또한, 클라이언트 장치로부터 영상 반출 요청이 수신되면 영상 저장 장치에서 해당 원본 영상 내 객체를 메타 데이터를 기초로 설정 방식으로 직접 마스킹 처리하여 클라이언트 장치로 서비스할 수 있다.
아울러, 인공지능 장치로부터 마스킹 처리 영상을 수신하는 경우 영상 저장 장치가 IP 카메라의 영상에 대한 마스킹 처리 영상을 클라이언트 장치로 실시간 라이브 서비스할 수 있다.
본 발명은 도면에 도시된 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.
10: IP 카메라 100: 인공지능 장치
110: 객체 검출부 120: 마스킹 처리부
130: 영상 압축부 140: 데이터 전송부
200: 영상 저장 장치
110: 객체 검출부 120: 마스킹 처리부
130: 영상 압축부 140: 데이터 전송부
200: 영상 저장 장치
Claims (8)
- 네트워크 연결된 적어도 하나의 IP 카메라로부터 영상을 수신하고, 인공지능을 기반으로 상기 영상 내 객체를 검출 후 객체 검출 정보가 저장된 메타 데이터를 생성하고, 원본 영상의 영상 압축 데이터에 상기 메타 데이터를 추가하여 네트워크를 통해 전송하는 인공지능 장치; 및
상기 인공지능 장치로부터 상기 메타 데이터가 추가된 영상 압축 데이터를 수신하여 저장하고, 클라이언트 장치로부터 상기 IP 카메라에 대한 영상 반출 요청이 수신되면, 상기 영상 압축 데이터의 원본 영상 내 상기 객체를 상기 메타 데이터를 기초로 설정 방식으로 마스킹 처리한 마스킹 처리 영상을 상기 클라이언트 장치로 반출하는 영상 저장 장치를 포함하며,
상기 인공지능 장치는,
인공지능을 기반으로 상기 원본 영상 내 타겟이 되는 적어도 하나의 객체의 위치 및 크기를 검출하고, 상기 적어도 하나의 객체에 대응한 객체 검출 정보를 저장한 메타데이터를 생성하되, 각 객체에 대한 객체 타입, 위치, 크기, 검출 신뢰도 값을 상기 메타데이터로 저장하는 객체 검출부;
상기 마스킹 처리 전의 원본 영상을 압축하는 영상 압축부; 및
상기 원본 영상을 압축하여 생성한 상기 영상 압축 데이터에 상기 메타 데이터를 추가하여 상기 영상 저장 장치로 전송하는 데이터 전송부를 포함하며,
상기 영상 저장 장치는,
상기 메타데이터를 기초로 상기 영상 내 검출된 객체 중에서 상기 검출 신뢰도 값이 기준값 이상인 객체를 대상으로 기 설정된 영상 마스킹 방법을 적용하여 객체의 일부 영역 또는 전체 영역을 마스킹 처리하여 상기 마스킹 처리 영상을 생성하는 개인 영상정보 보호 CCTV 시스템. - 청구항 1에 있어서,
상기 영상 저장 장치는,
상기 IP 카메라의 영상을 요청한 상기 클라이언트 장치로 상기 마스킹 처리 영상을 제공하는 네트워크 비디오 레코더(Network Video Recorder, NVR)인 개인 영상정보 보호 CCTV 시스템. - 삭제
- 삭제
- 삭제
- 청구항 1에 있어서,
상기 인공지능 장치는,
상기 영상 내 검출된 객체에 대해 기 설정된 영상 마스킹 방법을 이용하여 마스킹을 적용하는 마스킹 처리부를 더 포함하고,
상기 영상 압축부는,
상기 마스킹이 적용된 마스킹 처리 영상을 압축하여 마스킹 영상 압축 데이터를 생성하여 상기 영상 저장 장치로 전달하는 개인 영상정보 보호 CCTV 시스템. - 청구항 6에 있어서,
상기 영상 저장 장치는,
상기 인공지능 장치로부터 수신한 상기 마스킹 영상 압축 데이터를 이용하여 상기 클라이언트 장치로 상기 IP 카메라의 영상에 대한 실시간 라이브 방송을 서비스하는 개인 영상정보 보호 CCTV 시스템. - 청구항 1에 있어서,
상기 타겟이 되는 객체는,
차량, 사람, 사용자 단말의 디스플레이 화면 중 적어도 하나를 포함하는 개인 영상정보 보호 CCTV 시스템.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020230089131A KR102621196B1 (ko) | 2023-07-10 | 2023-07-10 | 개인 영상정보 보호 cctv 시스템 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020230089131A KR102621196B1 (ko) | 2023-07-10 | 2023-07-10 | 개인 영상정보 보호 cctv 시스템 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR102621196B1 true KR102621196B1 (ko) | 2024-01-09 |
Family
ID=89538380
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020230089131A KR102621196B1 (ko) | 2023-07-10 | 2023-07-10 | 개인 영상정보 보호 cctv 시스템 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102621196B1 (ko) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101458136B1 (ko) * | 2014-02-28 | 2014-11-05 | 김호 | 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체 |
KR101881391B1 (ko) * | 2018-03-09 | 2018-07-25 | 한화에어로스페이스 주식회사 | 객체의 특성 정보를 반영하여 프라이버시 마스킹을 수행하는 영상 마스킹 장치 |
KR101972918B1 (ko) * | 2018-12-20 | 2019-08-20 | 주식회사 로민 | 영상 마스킹 장치 및 영상 마스킹 방법 |
KR20200042979A (ko) * | 2018-10-16 | 2020-04-27 | 전자부품연구원 | 영상정보기기에서의 개인정보의 비식별화 방법 및 시스템 |
KR102152237B1 (ko) * | 2020-05-27 | 2020-09-04 | 주식회사 와치캠 | 상황 분석 기반의 cctv 관제 방법 및 시스템 |
KR102301239B1 (ko) * | 2020-05-07 | 2021-09-09 | 에스케이텔레콤 주식회사 | 지능형 카메라 영상에 대한 프라이버시 마스킹장치 및 방법 |
KR20230026061A (ko) * | 2021-08-17 | 2023-02-24 | 주식회사 세연테크 | 지능형 정보처리를 고려한 영상 감시 시스템 |
-
2023
- 2023-07-10 KR KR1020230089131A patent/KR102621196B1/ko active IP Right Grant
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101458136B1 (ko) * | 2014-02-28 | 2014-11-05 | 김호 | 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체 |
KR101881391B1 (ko) * | 2018-03-09 | 2018-07-25 | 한화에어로스페이스 주식회사 | 객체의 특성 정보를 반영하여 프라이버시 마스킹을 수행하는 영상 마스킹 장치 |
KR20200042979A (ko) * | 2018-10-16 | 2020-04-27 | 전자부품연구원 | 영상정보기기에서의 개인정보의 비식별화 방법 및 시스템 |
KR101972918B1 (ko) * | 2018-12-20 | 2019-08-20 | 주식회사 로민 | 영상 마스킹 장치 및 영상 마스킹 방법 |
KR102301239B1 (ko) * | 2020-05-07 | 2021-09-09 | 에스케이텔레콤 주식회사 | 지능형 카메라 영상에 대한 프라이버시 마스킹장치 및 방법 |
KR102152237B1 (ko) * | 2020-05-27 | 2020-09-04 | 주식회사 와치캠 | 상황 분석 기반의 cctv 관제 방법 및 시스템 |
KR20230026061A (ko) * | 2021-08-17 | 2023-02-24 | 주식회사 세연테크 | 지능형 정보처리를 고려한 영상 감시 시스템 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9288451B2 (en) | Image processing apparatus and image processing method | |
CN109040709B (zh) | 视频监控方法及装置、监控服务器及视频监控系统 | |
EP2283472B1 (en) | A system and method for electronic surveillance | |
KR101747221B1 (ko) | 보안 카메라 시스템에서의 위변조 방지를 위한 영상 데이터 송수신 방법 | |
US8369399B2 (en) | System and method to combine multiple video streams | |
KR101425505B1 (ko) | 객체인식기술을 이용한 지능형 경계 시스템의 감시 방법 | |
US20170076572A1 (en) | Privacy masking video content of alarm exceptions and mask verification | |
US20060238616A1 (en) | Video image processing appliance manager | |
US20030185296A1 (en) | System for the capture of evidentiary multimedia data, live/delayed off-load to secure archival storage and managed streaming distribution | |
JP2010136032A (ja) | 映像監視システム | |
IL249739A (en) | Secure video acquisition and verification system and method | |
CN111405222B (zh) | 视频告警方法、视频告警系统及告警图片的获取方法 | |
US10311711B2 (en) | Method and system for configurable security and surveillance systems | |
KR102264275B1 (ko) | 폭력행위 관리시스템 및 방법 | |
KR101951605B1 (ko) | 영상의 유출을 방지하기 위한 cctv 영상 보안 시스템 | |
CN110557603A (zh) | 移动目标的监控方法、装置和可读存储介质 | |
KR101005568B1 (ko) | 지능형 방범 시스템 | |
KR101487461B1 (ko) | 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템 | |
KR102621196B1 (ko) | 개인 영상정보 보호 cctv 시스템 | |
WO2021084944A1 (ja) | 情報処理システム、情報処理方法、撮像装置、情報処理装置 | |
CN110392303B (zh) | 热度图视频的生成方法、装置、设备以及存储介质 | |
KR102108547B1 (ko) | 지하철 역사에서 nvr 백업 및 복구 시스템 및 방법 | |
JP2016122892A (ja) | 映像装置 | |
US20200169714A1 (en) | 3d visual intelligent simulation monitoring system and simulation display method thereof | |
KR101513467B1 (ko) | 스쿨존 cctv 감시장치 성능개선 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |