KR101954719B1 - 이벤트감지장치 및 그 장치의 구동방법 - Google Patents

Abstract

본 발명은 이벤트감지장치 및 그 장치의 구동방법에 관한 것으로서, 본 발명의 실시예에 따른 이벤트감지장치는, 입력된 영상 이미지를 저장하는 저장부, 및 지정된 조건을 만족하는 복수의 객체를 중심으로 (기)저장한 이미지를 분석하며, 분석 결과를 딥러닝하여 딥러닝 기반의 이벤트를 검출하는 제어부를 포함할 수 있다.

Description

이벤트감지장치 및 그 장치의 구동방법{Apparatus for Detecting Event and Driving Method Thereof}

본 발명은 이벤트감지장치 및 그 장치의 구동방법에 관한 것으로서, 더 상세하게는 가령 입력되는 영상 이미지에서 지정 조건을 만족하는 복수의 객체를 중심으로 분석되는 분석 결과를 딥러닝하여 객체의 이벤트 검출의 정확도를 높이는 이벤트감지장치 및 그 장치의 구동방법에 관한 것이다.

현대인들의 삶이 점점더 복잡하고 다변화되면서 그에 따른 사건·사고도 더불어 증가하고 있다. 이러한 이유의 일환으로 공공 장소를 감시하기 위해 CCTV 카메라로 공공 장소를 촬영하고 자동으로 영상을 분석하여 불특정 다수의 물체들을 추출하고 움직임을 분석하여, 비정상적인 움직임이 감지될 경우에 자동으로 관리자에게 경고하거나 그 밖의 연계된 자동화 시스템에 정보를 전달하는 지능형 영상 감시 시스템에 대한 요구가 점점 커지고 있다.

최근 몇년 사이에 감시용 CCTV를 통해 확보된 이미지나 동영상을 통해 특정 이벤트를 감지하는 장치 및 그 방법에 대한 많은 설비들이 설치되어 있는데, 기존의 장치는 특정 지역에 따라 발생할 수 있는 특정 이벤트 감지(예: 중앙선 침범, 과속 등)를 위해 영상에서 추적 객체를 추출하고 추출된 객체가 일정한 행위를 하는 설정된 값에 의해 이벤트 발생을 감지하는 것이 일반적이다.

그런데, 종래의 이러한 객체 추적 방식은 객체의 다양한 환경 요인에 의해 발생하는 노이즈 모션 때문에 객체 오검출이 발생하고, 또 기존 룰(rule) 기반의 객체 분류기의 성능 한계로 잦은 객체 오분류가 발생하며, 영상에서 객체들 간의 겹침이 크고 자주 발생하는 복잡한 환경에서는 개별 객체의 영역을 제대로 검출하기 어려운 문제가 있다. 또한, 이동 중인 카메라 영상에서는 배경이 자주 바뀌기 때문에 배경 모델과의 비교를 통한 객체 검출 방식을 적용할 수 없는 문제도 있다.

한국공개특허공보 제10-2017-0034226호(2017.03.28) 한국공개특허공보 제10-2016-0061856호(2016.06.01) 한국공개특허공보 제10-2017-0137350호(2017.12.13)

본 발명의 실시예는 가령 입력되는 영상 이미지에서 지정 조건을 만족하는 복수의 객체를 중심으로 분석된 분석 결과를 딥러닝하여 객체의 이벤트 검출의 정확도를 높이는 이벤트감지장치 및 그 장치의 구동방법을 제공함에 그 목적이 있다.

본 발명의 실시예에 따른 이벤트감지장치는, 입력된 영상 이미지를 저장하는 저장부, 및 지정된 조건을 만족하는 복수의 객체를 중심으로 상기 저장한 이미지를 분석하며, 분석 결과를 딥러닝하여 딥러닝 기반의 이벤트를 검출하는 제어부를 포함한다.

상기 제어부는, 상기 영상 이미지에서 상기 복수의 객체 중 적어도 하나를 캡쳐한 캡쳐 이미지를 이용하여 분석할 수 있다.

상기 제어부는, 입력된 일련의 영상 이미지에서 상기 복수의 객체 중 적어도 하나의 상태를 판단하여 상기 딥러닝 기반의 이벤트를 검출할 수 있다.

상기 이벤트감지장치는, 입력 영상을 객체추적 기반으로 분석하여 이벤트를 검출하는 모니터링장치에 연동하는 통신 인터페이스부를 더 포함하며, 상기 제어부는, 상기 검출한 딥러닝 기반의 이벤트 관련 데이터를 상기 모니터링장치로 전송하도록 상기 통신 인터페이스부를 제어할 수 있다.

상기 제어부는, 상기 모니터링장치의 요청에 따라 선택적으로 상기 딥러닝 기반의 이벤트를 검출하여 상기 모니터링장치로 전송할 수 있다.

상기 제어부는, 상기 모니터링장치에서 객체추적 기반으로 검출된 이벤트와 서로 다른 특성의 이벤트를 검출할 수 있다.

상기 제어부는, 상기 딥러닝 기반의 이벤트 검출에 의해 지역별 특성과 관련되는 지역별 이벤트 데이터를 생성할 수 있다.

또한, 본 발명의 실시예에 따른 이벤트감지장치의 구동방법은, 저장부 및 제어부를 포함하는 이벤트감지장치의 구동방법으로서, 입력된 영상 이미지를 상기 저장부에 저장하는 단계, 및 상기 제어부가 지정된 조건을 만족하는 복수의 객체를 중심으로 상기 저장한 이미지를 분석하며, 상기 분석한 결과를 딥러닝하여 딥러닝 기반의 이벤트를 검출하는 단계를 포함한다.

상기 분석하는 단계는, 상기 영상 이미지에서 상기 복수의 객체 중 적어도 하나를 캡쳐한 캡쳐 이미지를 이용하여 분석할 수 있다.

상기 이벤트를 검출하는 단계는, 입력된 일련의 영상 이미지에서 상기 복수의 객체 중 적어도 하나의 상태를 판단하여 상기 딥러닝 기반의 이벤트를 검출할 수 있다.

상기 이벤트감지장치의 구동방법은, 입력 영상을 객체추적 기반으로 분석하여 이벤트를 검출하는 모니터링장치에 연동시키는 단계를 더 포함하며, 상기 이벤트를 검출하는 단계는, 상기 검출한 딥러닝 기반의 이벤트 관련 데이터를 상기 모니터링장치로 전송하는 단계를 포함할 수 있다.

상기 전송하는 단계는, 상기 모니터링장치의 요청에 따라 선택적으로 상기 딥러닝 기반의 이벤트를 검출하여 상기 모니터링장치로 전송할 수 있다.

상기 이벤트를 검출하는 단계는, 상기 모니터링장치에서 객체추적 기반으로 검출된 이벤트와 서로 다른 특성의 이벤트를 검출할 수 있다.

상기 이벤트를 검출하는 단계는, 상기 딥러닝 기반의 이벤트 검출에 의해 지역별 특성과 관련되는 지역별 이벤트 데이터를 생성하는 단계를 포함할 수 있다.

본 발명의 실시예에 따르면 입력된 영상 이미지의 특정 객체들을 가령 캡쳐하여 분석하고 또 분석한 결과를 딥러닝으로 통해 이벤트를 도출하기 때문에 이벤트 검출의 정확도가 증가될 것이다. 즉 종래 객체추적 기반의 이벤트 검출과 비교해 볼 때 더 정확도가 증가된다고 볼 수 있다.

또한, 기존의 객체추적 기반의 이벤트 검출 프로그램은 표준화 등의 이유로 프로그램의 전면적인 갱신이 어려운 문제가 많기 때문에 새로운 프로그램의 개발을 통해 이와 연동시킴으로써 다양한 유형의 이벤트를 검출할 수 있을 뿐 아니라, 기존 프로그램의 설치 또는 빈번한 갱신을 필요로 하지 않으므로 관리 및 유지비를 최소화할 수 있을 것이다.

도 1은 본 발명의 실시예에 따른 이벤트감지시스템을 나타내는 도면,
도 2는 도 1의 이벤트감지장치의 동작을 설명하기 위한 도면,
도 3은 도 1의 이벤트감지장치의 구조를 나타내는 블록다이어그램,
도 4는 도 1의 이벤트감지장치의 다른 구조를 나타내는 블록다이어그램,
도 5는 도 4의 딥러닝기반 이벤트실행부의 구조를 예시하여 나타낸 블록다이어그램, 그리고
도 6은 본 발명의 실시예에 따른 이벤트감지장치의 구동과정을 나타내는 흐름도이다.

이하, 도면을 참조하여 본 발명의 실시예에 대하여 상세히 설명한다.

도 1은 본 발명의 실시예에 따른 이벤트감지시스템을 나타내는 도면이며, 도 2는 도 1의 이벤트감지장치의 동작을 설명하기 위한 도면이다.

도 1에 도시된 바와 같이, 본 발명의 실시예에 따른 이벤트감지시스템(90)은 촬영장치(100), 통신망(110), 모니터링장치(120) 및 이벤트감지장치(130)의 일부 또는 전부를 포함한다.

여기서, "일부 또는 전부를 포함한다"는 것은 촬영장치(100)나 통신망(110)과 같은 일부 구성요소가 생략되어 이벤트감지시스템(90)이 구성되거나, 이벤트감지장치(130)와 같은 일부 구성요소가 통신망(110) 내의 네트워크장치나 모니터링장치(120)에 통합되어 구성될 수 있는 것 등을 의미하는 것으로서, 발명의 충분한 이해를 돕기 위하여 전부 포함하는 것으로 설명한다.

촬영장치(100)는 가령 보안용 카메라로서, PTZ 카메라나 줌 카메라 등을 포함한다. 여기서, PTZ 카메라는 렌즈부를 360도 회전하여 광역 지역을 감시할 수 있는 카메라이며, 줌 카메라는 특정 지역의 촬영 영상이 고 배율로 확대되는 카메라에 해당한다. 물론 PTZ 카메라의 경우에도 줌 카메라와 같이 줌 기능은 가능하며, 줌 카메라보다 고성능 또는 저성능을 가질 수 있다. 촬영장치(100)는 주변 지역을 실시간으로 촬영하여 해당 촬영 영상을 통신망(110)을 경유하여 모니터링장치(120) 및 이벤트감지장치(130) 중 적어도 하나의 장치로 전송한다. 촬영장치(100)는 모니터링장치(120)의 제어에 따라 동작하여 특정 지역(혹은 구역)으로 촬영 지역을 변경할 수 있고, 이의 과정에서 가령 모니터링 요원으로부터 줌인 명령이 있을 때 배율을 높여 해당 지역을 촬영 후 촬영 영상을 모니터링장치(120)로 제공할 수 있다.

또한, 촬영장치(100)에 의해 특정 지역을 촬영 중에 이벤트가 발생하여 모니터링장치(120)로부터 해당 지역을 줌인하도록 설정되었다면, 촬영장치(100)는 모니터링장치(120)의 명령에 따라 자동으로 해당 지역을 줌인 촬영할 수 있다. 예를 들어, 해당 지역에 사건, 사고가 발생하거나 사람이 많이 모인 것으로 분석될 때, 촬영장치(100)는 모니터링장치(120)의 요청에 따라 해당 지역을 자동으로 줌인 촬영하는 것이다. 물론 이러한 동작은 모니터링장치(120)에서 영상 분석을 통해 이벤트의 발생을 감지하고 감지 결과에 따라 모니터링장치(120)로부터 지시를 받아 촬영장치(100)가 동작하는 것이지만, 촬영장치(100) 자체적으로도 이러한 동작은 충분히 가능할 수 있으므로, 위의 내용에 특별히 한정하지는 않을 것이다. 예컨대, 통신망(110)의 트래픽이 증가하는 경우에는 서비스가 수월하지 않을 수 있기 때문에 촬영장치(100) 자체적으로 위의 동작을 수행할 수 있도록 하여 서비스 품질을 더욱 향상시킬 수 있다. 또는 트래픽의 상태에 따라 촬영장치(100)가 줌인 동작을 수행할지를 판단하고, 판단 결과에 따라 모니터링장치(120)가 영상을 분석하여 분석 결과에 따라 카메라(100)는 줌인 동작을 자동으로 수행할 수 있을 것이다.

통신망(110)은 유무선 통신망을 모두 포함한다. 가령 통신망(110)으로서 유무선 인터넷망이 이용되거나 연동될 수 있다. 여기서 유선망은 케이블망이나 공중 전화망(PSTN)과 같은 인터넷망을 포함하는 것이고, 무선 통신망은 CDMA, WCDMA, GSM, EPC(Evolved Packet Core), LTE(Long Term Evolution), 와이브로(Wibro) 망 등을 포함하는 의미이다. 물론 본 발명의 실시예에 따른 통신망(110)은 이에 한정되는 것이 아니며, 향후 구현될 차세대 이동통신 시스템의 접속망으로서 가령 클라우드 컴퓨팅 환경하의 클라우드 컴퓨팅망, 5G망 등에 사용될 수 있다. 가령, 통신망(110)이 유선 통신망인 경우 통신망(110) 내의 액세스포인트는 전화국의 교환국 등에 접속할 수 있지만, 무선 통신망인 경우에는 통신사에서 운용하는 SGSN 또는 GGSN(Gateway GPRS Support Node)에 접속하여 데이터를 처리하거나, BTS(Base Station Transmission), NodeB, e-NodeB 등의 다양한 중계기에 접속하여 데이터를 처리할 수 있다.

통신망(110)은 액세스포인트를 포함할 수 있다. 액세스포인트는 건물 내에 많이 설치되는 펨토(femto) 또는 피코(pico) 기지국과 같은 소형 기지국을 포함한다. 여기서, 펨토 또는 피코 기지국은 소형 기지국의 분류상 촬영장치(100)를 최대 몇 대까지 접속할 수 있느냐에 따라 구분된다. 물론 액세스포인트는 촬영장치(100)와 지그비 및 와이파이(Wi-Fi) 등의 근거리 통신을 수행하기 위한 근거리 통신 모듈을 포함한다. 액세스포인트는 무선통신을 위하여 TCP/IP 혹은 RTSP(Real-Time Streaming Protocol)를 이용할 수 있다. 여기서, 근거리 통신은 와이파이 이외에 블루투스, 지그비, 적외선(IrDA), UHF(Ultra High Frequency) 및 VHF(Very High Frequency)와 같은 RF(Radio Frequency) 및 초광대역 통신(UWB) 등의 다양한 규격으로 수행될 수 있다. 이에 따라 액세스포인트는 데이터 패킷의 위치를 추출하고, 추출된 위치에 대한 최상의 통신 경로를 지정하며, 지정된 통신 경로를 따라 데이터 패킷을 다음 장치, 예컨대 모니터링장치(120) 및/또는 이벤트감지장치(130)로 전달할 수 있다. 액세스포인트는 일반적인 네트워크 환경에서 여러 회선을 공유할 수 있으며, 예컨대 라우터(router), 리피터(repeater) 및 중계기 등이 포함된다.

모니터링장치(120)는 가령 관제 센터에 구비될 수 있다. 모니터링장치(120)는 DB(120a)를 포함하며, DB(120a)에는 수신된 촬영영상과 해당 촬영영상을 분석한 분석 결과가 저장될 수 있다. 본 발명의 실시예에 따라 DB(120a)는 객체추적 기반으로 분석된 분석 결과와 그에 따른 이벤트 관련 데이터를 저장하고, 나아가 이벤트감지장치(130)에서 제공하는 딥러닝기반의 분석 결과와 그에 따른 이벤트 관련 데이터를 저장한다. 둘의 차이라면 객체추적은 영상에서 객체(예: 사람, 차량, 미확인)를 먼저 추출하고, 추출한 객체의 움직임을 추적하여 이의 과정에서 기설정된 (룰 기반의) 이벤트 조건을 만족할 때 이벤트를 발생시켜 그에 따라 촬영장치(100)를 제어하거나 외부로 이벤트를 알리는 표출 동작을 수행하게 되는 것이라면, 딥러닝 기반의 이벤트 검출은 지정 조건을 만족하는 객체들을 중심으로 영상 이미지를 분석하여 분석 결과를 딥러닝하여 이벤트를 발생시키는 방식이다. 따라서, 딥러닝 방식은 불필요한 객체의 추출 동작이 없을 수 있으므로, 연산 처리량이 줄게 된다. 딥러닝과 관련해서는 이후에 좀더 다루기로 한다.

본 발명의 실시예에 따른 모니터링장치(120)는 보안을 위해 사용될 수 있지만, 보안이 아니라 교통 상황 등의 관제에 사용되어도 무관하다. 예를 들어, 행정 업무를 수행하는 모니터링 요원의 경우에는 주기적으로 교체될 수 있고, 또 모니터링 요원이 특정 지역의 지리를 상세히 알 수 없는 경우가 많기 때문에 본 발명의 실시예에 따른 장치와 방법은 이러한 상황에서 매우 유용할 수 있다. 지나친 부분에 대한 정밀 검색이 필요할 수 있기 때문이다. 모니터링장치(120)는 가령 서버와, 서버에 연결되는 컴퓨터를 더 포함할 수 있다. 물론 컴퓨터도 서버로 사용될 수 있기 때문에 본 발명의 실시예에서는 이에 특별히 한정하지는 않을 것이다.

모니터링장치(120)는 설명의 이해를 돕기 위하여 촬영장치(100)에 연동시켜 촬영영상을 수신하여 모니터링 동작을 수행하는 것을 예시하였지만, 나아가서는 제휴를 맺은 제휴 서버로부터 제공되는 영상, 또는 CD-ROM이나 USB 등과 같은 저장매체를 통해 제공되는 영상 등을 수신하는 것도 얼마든지 가능할 수 있다. 다양한 경로를 통해 수신된 영상은 모니터링장치(120)에서 분석되고 분석된 결과에 따라 이벤트가 검출된다. 이를 위하여, 모니터링장치(120)는 이벤트를 검출하기 위한 이벤트 설정값을 기저장하고, 검출된 객체의 행위 등이 이벤트 설정값을 만족할 때 이벤트를 검출하게 된다. 앞서 언급한 대로 객체는 사람, 차량 및 미확인으로 구분될 수 있고, 차량의 충돌 상황이 있을 때에는 무조건적으로 이벤트를 발생시킬 수 있다. 또한 사람이 쓰레기를 투기할 때 바로 이벤트를 발생시킬 수 있다. 그러나 이러한 객체 추적에 의한 이벤트 검출 방식은 영상에서 지정된 객체를 모두 추출하기 때문에 연산량이 상당히 증가할 수 있을 것이다.

본 발명의 실시예에 따른 모니터링장치(120)는 객체추적 기반으로 객체의 모니터링 동작을 수행하고, 그 결과에 따라 이벤트를 발생시킨다. 물론 향후에 딥러닝 기반의 이벤트검출장치인 이벤트감지장치(130)가 모니터링장치(120)의 성능을 대체할 수 있을 때에는 해당 장치로 대체될 거라는 것은 자명하다. 다만, 기존에 객체기반으로 이벤트를 검출하는 모니터링장치(120)의 효율적인 활용을 위하여, 또한 딥러닝기반의 이벤트감지장치(130)의 성능이 아직 완벽하게 검증되지 않는 상태에서 현 단계에서는 두 장치를 병행하여 운용하는 것도 나쁘지는 않을 것이다. 비용이 많이 절약될 수 있기 때문이다. 따라서, 본 발명의 실시예에서는 모니터링장치(120)가 이벤트감지장치(130)와 병행 동작하는 것으로 설명한다.

물론 모니터링장치(120)는 내부적으로 이벤트감지장치(130)와 같은 동작을 수행하는 하드웨어나 소프트웨어 모듈을 포함하도록 구성하여 구동시킬 수 있다. 다시 말해, 개별 또는 전면적인 프로그램의 설치 또는 갱신 등을 통해 활용하는 것도 얼마든지 가능하다. 다만, 이보다는 별도의 인터페이스를 통해 이벤트감지장치(130)를 운용하는 것이 여러 면에서 더 수월하다는 가정 하에 이하 설명한다.

모니터링장치(120)는 다양한 형태로 동작할 수 있다. 예를 들어, 객체추적 기반으로 이벤트를 검출하다가 특정 상황(예: 수신된 영상의 분석결과 환경이 복잡할 때)에서만 이벤트감지장치(130)로 딥러닝 기반의 이벤트 검출을 요청할 수 있다. 또는, 촬영영상을 동시에 제공받아 서로 분석하고, 그 결과를 이벤트감지장치(130)에 주기적으로 요청하는 것이다. 나아가, 사용자로부터 딥러닝 기반으로 검색 요청이 있을 때 이벤트감지장치(130)로 요청하는 것이다.

예를 들어, 모니터링장치(120)는 객체추적 기반으로 이벤트를 검출하기 때문에 사람, 차량 및 미확인으로 구분되는 객체의 이벤트 검출에는 한계가 있을 수 있다. 다시 말해, 특정 지역에서 발생할 수 있는 특정 이벤트 감지(예: 중앙선 침범, 과속 등)를 위해 영상에서 추적 객체를 추출하고 추출된 객체가 일정한 행위를 할 때 설정된 값에 의해 이벤트 발생을 감지하게 되는데, 기설정된 이벤트와 다른 이벤트를 감지하기 위해서는 전면적인 프로그램의 갱신이 필요하다. 그러나 이는 영상처리나 장비의 표준화 등에 의해 작업이 매우 어렵고 심지어는 불가할 수 있다.

따라서, 본 발명의 실시예에서는 모니터링장치(120)에 이벤트감지장치(130)를 연동시킴으로써 이러한 문제를 아주 간편하게 해결할 수 있을 것이다. 물론 본 발명의 실시예에 따른 이벤트감지장치(130)는 복수의 이벤트감지장치(130)를 포함할 수 있다. 복수의 이벤트감지장치(130)를 통해 서로 다른 유형의 이벤트를 검출하도록 분산 시스템을 구성함으로써 그에 따라 영상을 분석하고 이벤트를 검출하는 이벤트감지시스템(90)의 데이터 처리 속도를 상당히 증가시킬 수 있을 것이다.

이벤트감지장치(130)는 이벤트 검출을 다양화하고 또 객체에 따른 이벤트를 정확히 검출하기 위하여 딥러닝 기반의 이벤트 검출 동작을 수행한다. 이를 위하여, 가령 이벤트감지장치(130)는 영상이 수신되면 영상을 분석하여 이벤트 관련 객체가 있는지를 판단하고 해당 객체를 기준으로 주변 객체를 함께 캡쳐하여 캡쳐 이미지를 활용할 수 있다. 다시 말해, 모니터링장치(120)는 객체를 추출하고 해당 추출한 객체의 움직임을 추적하며, 추적한 객체의 행위가 설정된 값을 만족할 때 이벤트를 발생시킨다. 가령 차량의 과속행위를 단속할 때 차량의 움직임 거리를 시간으로 나누어 속도를 계산한다. 반면, 이벤트감지장치(130)는 사람이 많으면, 무단투기, 무단횡단 등의 설정된 조건에 따라 분석 대상의 객체를 찾고, 찾은 객체들의 상태를 분석하여 딥러닝 기반으로 이벤트를 검출한다고 볼 수 있다.

딥러닝 기반의 이벤트 검출을 위해 이벤트감지장치(130)는 지정(혹은 설정)된 조건을 근거로 영상 이미지의 특정 부분을 가령 캡쳐한다. 예컨대 '사람이 많으면', '사람이 쓰레기를 들고 있으면', 그리고 '속도를 측정하니 기설정된 값을 초과하면' 등의 조건을 만족하면 해당 객체와 관련한, 다시 말해 조건에 관련되는 객체들을 중심으로 대상 객체들을 분석한다. 이의 과정에서 해당 부분만 캡쳐하여 캡쳐된 이미지들을 분석할 수 있다. 그리고 그 분석결과를 딥러닝하여 최종 결론을 도출하거나 새로운 유의미한 데이터를 생성한다. 가령 사람이 쓰레기를 버리면 객체 추적은 버리는 행위로 이벤트를 발생시킨다면, 딥러닝은 특정인을 지속적으로 살피고 상습적이라 판단될 때 해당 특정인을 상습범으로 규정한다. 그리고 관련 데이터를 저장하고, 외부로 알릴 수 있다. 물론 상습적인 행위가 개선되면 저장된 데이터는 비상습이라는 결론으로 갱신될 것이다.

예를 하나 더 들면, 과속행위를 하는 운전자가 특정 속도나 규정을 위반하면 이벤트를 발생시키는 것은 객체추적 및 룰 기반으로 설정한 이벤트 검출 방식에 해당될 수 있다. 그러나, 딥러닝은 이에 더하여 어떠한 운전자들이 속도를 위반하는지 등과 관련한 유의미한 데이터를 더 생성한다. 물론 본 발명의 실시예에서는 그러한 딥러닝을 위해 지정된 조건 기반으로 이미지(예: 정지영상)를 캡쳐하여 해당 객체들을 중심으로 이미지를 분석하게 된다. 즉 시간 변화에 따른 대상 객체들의 상태를 분석한다. 그리고 지속적으로 인공지능(AI) 방식으로 학습을 수행하게 된다. 그리고 누적 결과의 확률 및 통계 연산을 통해 유의미한 데이터를 생성해낸다.

[표 1] 및 도 2를 참조하여 좀더 살펴보기로 한다.

통상적으로 영상은, 압축 즉 인코딩되어 매크로블록 단위로 영상이 전송되며, 따라서 이벤트감지장치(130)는 다양한 경로를 통해 영상이 수신되면 가령 매크로블록 단위의 영상이 수신되면 이를 복원 즉 디코딩할 것이고, 해당 디코딩 동작을 통해 가령 도 2에서와 같이 영상이 복원되면 복원된 픽쳐(picture) 단위의 영상에 대한 분석 동작을 수행한다. 물론 영상의 복원은 매크로블록 단위로 복원되어 조합될 수도 있으므로 어느 단계에서 분석하는지 특별히 한정하지는 않을 것이다.

따라서, 이벤트감지장치(130)는 매크로블록이든 픽쳐 단위이든 영상 분석 과정에서 가령 이벤트 관련 기설정된 객체가 있는지를 판단한다. 예를 들어, 무단횡단 상황을 판단하는 경우라면 건널목과 관련한 속성(혹은 특징점)이 화소(R, G, B) 데이터를 통해 검출되는지를 판단할 수 있다. 만약 검출된 특징점이나 속성이 이벤트와 관련한 지정 조건의 객체라면 해당 객체와 관련한 주변 객체를 함께 캡쳐할 수 있다. 도 2의 박스는 캡쳐부(200)로서 캡쳐된 이미지 부위를 나타낸다. 여기서, 캡쳐란 영상 분석 과정에서 객체의 주변 화소값들을 분석하여 해당 화소값 데이터를 복사하는 것을 포함할 수 있다. 따라서, 건널목의 신호등이 빨간색인데 사람이 이를 건너는 것이 감지되면 해당 상황과 관련한 이미지를 캡쳐하여 분석하게 된다.

예를 들어, 이벤트감지장치(130)는 위의 [표 1]에서와 같이 투기상황을 기준으로 다양한 사람들을 모니터링할 수 있을 것이다. 지정 조건의 이벤트 객체를 중심으로 주변 객체와의 연관 관계(혹은 상태)를 분석하고, 그 분석 결과를 누적하여 저장한다. 그리고 누적되어 저장된 분석 결과를 이용하여 학습을 수행한다. 그 결과 특정인은 일회성으로 쓰레기를 버렸는지, 상습적인 행동을 보이는 사람인지를 알 수 있게 된다. 또한 행정 조치 등에 의해 일정한 시점에서 상습 행위가 개선되면 또 이벤트감지장치(130)는 해당 결론을 수정할 것이다. 이와 같이 이벤트감지장치(130)는 다양한 사람들에 대하여 모니터링하고 또 그 데이터를 딥러닝 기반으로 분석한 결과 특정인이 쓰레기 투기에 상습적이라는 것을 알 수 있게 된다.

이와 같이, 본 발명의 실시예에 따른 이벤트감지장치(130)는 지정 조건을 만족하는 이벤트 관련 객체 및 그 주변 객체를 캡쳐하고 캡쳐된 이미지들을 딥러닝 분석을 통해 이벤트를 최종적으로 검출한다고 볼 수 있다. 물론 그 반대이어도 무관하다. 다시 말해, 객체를 먼저 검출하고 그 객체와 관련한 주변의 이벤트 관련 객체를 같이 캡쳐하여 이를 이용하는 것도 얼마든지 가능하므로 본 발명의 실시예에서는 어느 하나의 방식에 특별히 한정하지는 않을 것이다. 뿐만 아니라, 복수의 객체가 영상에 존재하면, 가령 지정된 객체이어야 하지만, 해당 객체를 무조건적으로 캡쳐하여 캡쳐 이미지를 얻고 이를 분석하여 객체간의 연관 관계를 찾고, 이를 딥러닝 기반으로 분석하여 기설정된 이벤트가 있는지를 판단하는 것도 얼마든지 가능할 수 있을 것이다.

상기의 데이터가 누적되면, 또 이벤트감지장치(130)는 지역별로, 나아가서는 지역의 구역별로 다양한 유의미한 데이터를 새롭게 생성할 수 있게 된다. 다시 말해, 이벤트감지장치(130)는 이러한 딥러닝 기반의 이벤트 검출을 통해 특정 지역에서 어느 구역이 투기가 많은 지역이고, 또 어느 구역이 과속이 많은 구역이며 또 어느 구역이 사고 다발지역인지 알 수 있을 뿐 아니라, 나아가서 특정 지역은 자연 재해가 많은 지역이라는 것 등을 알 수 있게 된다. 이에 따라 다양한 유의미한 데이터를 정부나 지방자치단체에 제공하여 적절한 조치를 기대할 수 있을 것이다.

상기한 바와 같이, 모니터링장치(120)에서 이루어지는 객체기반의 이벤트 검출보다는 이벤트감지장치(130)에서 이루어지는 딥러닝기반의 이벤트 검출 과정이 데이터의 연산 처리량을 더 줄여줄 수 있을 뿐 아니라, 나아가서는 검출의 정확도 측면에서도 더 유리할 수 있을 것이다.

또한, 본 발명의 실시예에 따르면 특정 이벤트 감지를 위한 독립된 이미지 검출기를 구성하고 이미지 검출기에서 반복적으로 학습된 특정 이벤트만 기존 장치 즉 모니터링장치(120)에 전송하고, 기존 장치는 이를 기존 장치에 세팅된 이미지로 인식하도록 하여 해당 관리자에게 알려주도록 함으로써 별도의 프로그램 등의 설치 또는 갱신이 필요하지 않도록 하여 관리 및 유지비를 최소화할 수 있을 것이다.

또한, 모니터링장치(120) 등의 기존 관제서버에 설정된 프로그램은 그대로 유지하면서 이벤트감지장치(130)를 통해 특정 이벤트만을 감지할 수 있을 것이다.

도 3은 도 1의 이벤트감지장치의 구조를 나타내는 블록다이어그램이다.

도 3에 도시된 바와 같이, 본 발명의 실시예에 따른 이벤트감지장치(130)는 딥러닝기반 이벤트처리부(300) 및 저장부(310)의 일부 또는 전부를 포함하며, 여기서 "일부 또는 전부를 포함"한다는 것은 앞서서의 의미와 동일하다.

딥러닝기반 이벤트처리부(300)는 저장부(310)를 제어하며, 딥러닝 기반의 이벤트 검출 동작을 수행한다. 본 발명의 실시예에 따라 도 3에서는 딥러닝기반 이벤트처리부(300)가 하나의 프로그램을 통해 제어 동작과 함께 딥러닝 기반의 이벤트 검출 동작을 일원화하여 처리하는 것을 보여주고 있다.

딥러닝기반 이벤트처리부(300)는 수신된 영상(예: 정지영상, 동영상)을 분석하여 기설정된 조건에 따라 특정 객체를 포함하는 복수의 객체를 캡쳐할 수 있다. 여기서 기설정된 조건은 검출할 이벤트와 관련한 객체(예: 쓰레기, 건널목 등)인지 또는 복수의 객체가 서로 얽혀 있는지 등을 판단하여 해당 객체를 중심으로 주변 객체를 캡쳐하여 캡쳐된 이미지를 분석할 수 있다. 가령, 복수의 객체간 연관 관계를 분석한다고 볼 수 있을 것이다.

이후, 딥러닝기반 이벤트처리부(300)는 분석된 결과를 근거로 딥러닝 기술을 적용하여 쓰레기 투기를 상습적으로 수행하는 사람이나, 건널목을 무시하고 무단횡단하는 사람이나 신호등을 상습적으로 위반하는 운전자 등을 파악하여 관련 데이터를 저장부(310)에 저장한 후, 가령 도 1의 모니터링장치(120)에 제공할 수 있다.

딥러닝기반 이벤트처리부(300)는 단순히 학습(learning)을 수행하는 것을 넘어 심층신경 네트워크(DNN) 알고리즘을 이용하므로 예측이 가능할 수 있다. 다시 말해, 특정인에 대하여 사건, 사고가 예측될 때 딥러닝기반 이벤트처리부(300)는 이벤트를 발생시킬 수 있을 것이다. 예컨대, 특정 건널목에서 발생된 사고의 유형을 분석하여 특정 행태의 운전자들이 주로 사고를 발생시키는 것으로 분석되었다고 가정해 보자. 따라서, 이를 근거로 해당 건널목에 진입하는 운전자를 예측하여 이벤트를 발생시켜 미리 주의를 주는 등의 동작을 수행할 수 있을 것이다.

물론 딥러닝기반 이벤트처리부(300)는 위의 예측보다는 발생된 사건, 사고에 대한 보다 정밀한 검색을 수행하려는 데에 있다. 이를 위해서는 정확한 분류가 선행되어야 한다. 따라서, 딥러닝기반 이벤트처리부(300)는 캡쳐 이미지를 통해 객체가 겹쳐있을 때 즉 환경이 복잡할 때 이를 딥러닝을 통해 정확히 구분함으로써 어떤 객체에 의해 사건, 사고가 발생했는지를 정확히 검출할 수 있을 것이다. 가령, 객체는 같은 사람이나 차량 또는 미확인 대상이라 하더라도 서로 다른 속성을 가질 수 있으므로 이를 딥러닝에 의해 명확히 구분해 낼 수 있을 것이다. 딥러닝은 오차율이 굉장히 낮아져 인간의 인지 오차율에 매우 근접한 수준에 이르렀기 때문이다.

저장부(310)는 이벤트 검출에 관련되는 객체(예: 쓰레기, 투기장소, 횡단보도 등)에 대한 기설정된 값을 저장하거나, 둘 이상의 사람, 사람이 특정 사물을 소지하는 경우 등에 대한 기설정된 값을 저장할 수 있다. 이러한 설정값은 분석 대상의 객체를 찾기 위한 자유로운 설정이 가능할 수 있을 것이다.

이에 따라, 저장부(310)는 딥러닝기반 이벤트처리부(300)에서 요청할 때 해당 저장된 설정값을 제공하며, 또한 딥러닝기반 이벤트처리부(300)에서 분석 결과를 제공하면 해당 분석 결과를 수신하여 저장할 수 있을 것이다.

그 이외에 기타, 딥러닝기반 이벤트처리부(300) 및 저장부(310)와 관련한 자세한 내용은 도 1의 이벤트감지장치(130)와 크게 다르지 않으므로 그 내용들로 대신하고자 한다.

도 4는 도 1의 이벤트감지장치의 다른 구조를 나타내는 블록다이어그램이며, 도 5는 도 4의 딥러닝기반 이벤트실행부의 구조를 예시한 블록다이어그램이다.

도 4에 도시된 바와 같이, 본 발명의 다른 실시예에 따른 이벤트감지장치(130')는 통신 인터페이스부(400), 제어부(410), 딥러닝기반 이벤트실행부(420) 및 저장부(430)의 일부 또는 전부를 포함한다.

여기서, "일부 또는 전부를 포함한다"는 것은 저장부(430)와 같은 일부 구성요소가 생략되어 구성되거나 딥러닝기반 이벤트실행부(420)와 같은 일부 구성요소가 제어부(410)와 같은 다른 구성요소에 통합되어 구성될 수 있는 것 등을 의미하는 것으로서, 발명의 충분한 이해를 돕기 위하여 전부 포함하는 것으로 설명한다.

도 3의 이벤트감지장치(130)와 비교해 볼 때, 도 4의 이벤트감지장치(130')는 도 3의 딥러닝기반 이벤트처리부(300)가 도 4의 통신 인터페이스부(400), 제어부(410) 및 딥러닝기반 이벤트실행부(420)로 하드웨어적으로, 소프트웨어적으로 또는 그 조합에 의해 이원화된다는 데에 그 차이가 있다고 볼 수 있다.

통신 인터페이스부(400)는 제어부(410)의 제어 하에 도 1의 통신망(110)을 경유하여 촬영장치(100) 및/또는 모니터링장치(120)와 통신을 수행한다. 가령, 모니터링장치(120)의 요청에 따라 특정 시간대나 구간의 촬영영상을 수신하여 제어부(410)에 제공할 수 있다. 또한, 제어부(410)가 영상의 분석 결과 및 분석 결과에 따른 딥러닝 기반의 이벤트 검출 데이터를 제공하면 해당 데이터를 모니터링장치(120)로 전송해 줄 수 있다.

제어부(410)는 이벤트감지장치(130')를 구성하는 통신 인터페이스부(400), 딥러닝기반 이벤트실행부(420) 및 저장부(430)의 전반적인 동작을 제어한다. 제어부(410)는 통신 인터페이스부(400)로부터 촬영 영상이 수신되면 저장부(430)에 해당 영상을 임시 저장하고, 딥러닝기반 이벤트실행부(420)를 실행시켜 저장부(430)에 저장된 촬영영상을 불러내어 딥러닝기반 이벤트실행부(420)에 제공할 수 있다. 이러한 과정에 따라 제어부(410)는 딥러닝기반 이벤트실행부(420)에서 제공하는 촬영영상의 분석결과 및 분석결과에 딥러닝 기술을 적용해 얻은 이벤트 검출 데이터를 다시 저장부(430)에 저장한 후, 모니터링장치(120)로 전송하도록 통신 인터페이스부(400)를 제어할 수 있을 것이다.

딥러닝기반 이벤트실행부(420)는 본 발명의 실시예에 따른 딥러닝 기반의 이벤트 검출 동작을 수행한다. 요약하면, 기설정된 조건을 근거로 수신된 영상 이미지에서 이벤트 객체 및 주변 객체를 캡쳐하고, 캡쳐된 이미지를 분석하여 분석 결과를 도출하며, 딥러닝 기술을 적용하여 분석된 결과로부터 이벤트를 검출한다. 예를 들어, 검출하고자 하는 이벤트가 쓰레기 투기라면 누적되는 학습을 통해 특정인이 상습적인 쓰레기 투기범이라는 결론을 얻게 된다. 따라서, 촬영영상의 검색시 딥러닝에 의해 이벤트 검출이 정확히 이루어졌기 때문에 그에 따라 특정인에 대한 검색은 또한 정확히 이루어지게 될 것이다.

도 4의 딥러닝기반 이벤트실행부(420)는 도 5에서와 같이 영상이미지 분석부(500) 및 딥러닝기반 이벤트검출부(510)를 포함할 수 있다. 도 4의 예시인 관계로 도 5의 딥러닝기반 이벤트실행부(420')에 작은따옴표(')를 표기하였다. 이는 소프트웨어적인 분류이든 하드웨어적인 분류이든 무관하다. 따라서 본 발명의 실시예에서는 어느 하나의 형태에 특별히 한정하지는 않을 것이다. 이에 따라 가령 도 4의 제어부(410)는 수신된 촬영영상의 분석을 위해 영상이미지 분석부(500)를 실행시킬 수 있고, 딥러닝 기반의 이벤트 검출을 위해 딥러닝기반 이벤트검출부(510)를 실행시킬 수 있을 것이다. 도 5의 영상이미지 분석부(500)와 딥러닝기반 이벤트검출부(510)는 제어부(410)의 제어에 따라 프로그램의 갱신이 이루어질 수 있겠지만, 이이피롬(EEPROM)과 같이 별도의 칩을 단순히 교체하는 방식으로 프로그램의 갱신이나 교체가 이루어질 수도 있을 것이다. 따라서, 본 발명의 실시예에서는 어떠한 방식으로 프로그램으로 교체 또는 갱신하는지에 대하여 어느 하나의 형태에 특별히 한정하지는 않을 것이다.

상기한 내용들 이외에 기타 도 4의 통신 인터페이스부(400), 제어부(410), 딥러닝기반 이벤트실행부(420) 및 저장부(430)와 관련한 내용은 도 1의 이벤트감지장치(130) 및 도 3의 딥러닝기반 이벤트처리부(300) 및 저장부(310)의 내용과 크게 다르지 않으므로 그 내용들로 대신하고자 한다.

한편, 도 4의 제어부(410)는 본 발명의 또 다른 실시예로서 CPU 및 메모리를 포함할 수 있다. CPU는 제어 동작을 담당하는 제어회로, 디지털 연산을 수행하는 연산회로(ALU), 명령어를 해석하는 해석부 및 데이터 저장에 관련되는 레지스트리 등을 포함할 수 있으며, 메모리는 램(RAM)을 포함할 수 있다. 이에 따라 CPU는 이벤트감지장치(130')의 초기 구동시 도 4의 딥러닝기반 이벤트실행부(420)에 저장되어 있는 프로그램을 복사하여 메모리에 저장한 후 이를 실행시킴으로써 이벤트감지장치(130')의 연산 처리를 빠르게 증가시킬 수 있을 것이다.

도 6은 본 발명의 실시예에 따른 이벤트감지장치의 구동과정을 나타내는 흐름도이다.

설명의 편의상 도 6을 도 1과 함께 참고하면, 본 발명의 실시예에 따른 이벤트감지장치(130)는 입력된 영상 이미지를 저장한다(S600), 입력된 영상 이미지(혹은 촬영영상)는 도 1의 촬영장치(100)로부터 제공될 수 있고, 모니터링장치(120)로부터 제공될 수 있으며, 경찰서 등의 관공서에서 제공되는 CD-ROM이나 USB 등에 포함되어 제공될 수 있을 것이다.

또한, 이벤트감지장치(130)는 지정된 조건을 만족하는 복수의 객체를 중심으로서 위의 (기)저장된 이미지를 분석하며, 분석 결과를 딥러닝하여 딥러닝 기반의 이벤트를 검출하게 된다(S610).

이의 과정에서 이벤트감지장치(130)는 복수의 객체를 캡쳐한 캡쳐 이미지를 분석하여 객체들간의 연관 관계, 가령 상태를 분석하게 되는데, 이러한 과정에서 해당 객체와 관련하여 (N-1)번째 정지영상에서 캡쳐된 제1 캡쳐이미지와 N번째 정지영상에서 캡쳐된 제2 캡쳐이미지를 서로 비교하여 연관 관계를 분석할 수 있다.

예컨대, 캡쳐 이미지들을 분석하여 제1 객체와 제2 객체가 어떠한 관계에 있고, 또 어떠한 상태에 이르게 되었는지에 대한 다양한 결과를 도출하게 된다. 가령 쓰레기를 특정인(예: 빨간색을 즐겨입는 사람)이 들고 있었고, 특정 장소에 버리는 것이 주기적으로 감시되면 상습적이라는 결론에 이르게 되는 것이다. 이와 같은 캡쳐 이미지와 딥러닝 방식을 적용함으로써 특정 객체와 해당 객체의 행위를 정확히 분류함으로써 검색에도 정확도를 더욱 높일 수 있게 된다. 또한, 데이터 처리속도에 있어서도 원하는 객체들만 핀셋으로 끄집어내듯 추출하여 분석하기 때문에 불필요한 연산을 줄임으로써 상당히 빨라지게 될 것이다.

한편, 본 발명의 실시 예를 구성하는 모든 구성 요소들이 하나로 결합하거나 결합하여 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시 예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 하나 이상으로 선택적으로 결합하여 동작할 수도 있다. 또한, 그 모든 구성요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 그 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 본 발명의 기술 분야의 당업자에 의해 용이하게 추론될 수 있을 것이다. 이러한 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 비일시적 저장매체(non-transitory computer readable media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시 예를 구현할 수 있다.

여기서 비일시적 판독 가능 기록매체란, 레지스터, 캐시(cache), 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라, 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로, 상술한 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리 카드, ROM 등과 같은 비일시적 판독가능 기록매체에 저장되어 제공될 수 있다.

이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안 될 것이다.

100: 촬영장치 110: 통신망
120: 모니터링장치 130, 130': 이벤트감지장치
200: 캡쳐부 300: 딥러닝기반 이벤트처리부
310, 430: 저장부 400: 통신 인터페이스부
410: 제어부 420, 420': 딥러닝기반 이벤트실행부
500: 영상이미지 분석부 510: 딥러닝기반 이벤트검출부

Claims (14)

1. 배경과 객체가 혼합되어 입력되는 일련의 영상 이미지를 저장하는 저장부; 및
   지정된 조건을 만족하는 복수의 객체를 중심으로 상기 저장한 영상 이미지를 분석하며, 분석 결과를 딥러닝하여 딥러닝 기반의 이벤트를 검출하는 제어부;를 포함하며,
   상기 제어부는,
   상기 딥러닝 기반의 이벤트 검출을 위하여 상기 저장한 일련의 영상 이미지 중 제1 영상 이미지에서 상기 복수의 객체를 배경과 함께 캡쳐한 제1 캡쳐 이미지를 분석하여 얻은 제1 분석 결과 및 상기 제1 영상 이미지와 다른 시간에 입력된 제2 영상 이미지에서 상기 복수의 객체와 함께 배경을 캡쳐한 제2 캡쳐 이미지를 분석하여 얻은 제2 분석 결과를 상기 분석 결과로서 이용하는 이벤트감지장치.
2. 삭제
3. 삭제
4. 제1항에 있어서,
   입력된 영상을 객체추적 기반으로 분석하여 이벤트를 검출하는 모니터링장치에 연동하는 통신 인터페이스부;를 더 포함하며,
   상기 제어부는, 상기 검출한 딥러닝 기반의 이벤트 관련 데이터를 상기 모니터링장치로 전송하도록 상기 통신 인터페이스부를 제어하는 이벤트감지장치.
5. 제4항에 있어서,
   상기 제어부는, 상기 모니터링장치의 요청에 따라 선택적으로 상기 딥러닝 기반의 이벤트를 검출하여 상기 모니터링장치로 전송하는 이벤트감지장치.
6. 제4항에 있어서,
   상기 제어부는, 상기 모니터링장치에서 객체추적 기반으로 검출된 이벤트와 서로 다른 특성의 이벤트를 검출하는 이벤트감지장치.
7. 제1항에 있어서,
   상기 제어부는, 상기 딥러닝 기반의 이벤트 검출에 의해 지역별 특성과 관련되는 지역별 이벤트 데이터를 생성하는 이벤트감지장치.
8. 저장부 및 제어부를 포함하는 이벤트감지장치의 구동방법으로서,
   배경과 객체가 혼합되어 입력되는 일련의 영상 이미지를 상기 저장부에 저장하는 단계; 및
   상기 제어부가, 지정된 조건을 만족하는 복수의 객체를 중심으로 상기 저장한 영상 이미지를 분석하며, 상기 분석한 결과를 딥러닝하여 딥러닝 기반의 이벤트를 검출하는 단계;를 포함하며,
   상기 이벤트를 검출하는 단계는,
   상기 딥러닝 기반의 이벤트 검출을 위하여 상기 저장한 일련의 영상 이미지 중 제1 영상 이미지에서 상기 복수의 객체를 배경과 함께 캡쳐한 제1 캡쳐 이미지를 분석하여 얻은 제1 분석 결과 및 상기 제1 영상 이미지와 다른 시간에 입력된 제2 영상 이미지에서 상기 복수의 객체와 함께 배경을 캡쳐한 제2 캡쳐 이미지를 분석하여 얻은 제2 분석 결과를 상기 분석한 결과로서 이용하는 이벤트감지장치의 구동방법.
9. 삭제
10. 삭제
11. 제8항에 있어서,
    입력 영상을 객체추적 기반으로 분석하여 이벤트를 검출하는 모니터링장치에 연동시키는 단계;를 더 포함하며,
    상기 이벤트를 검출하는 단계는,
    상기 검출한 딥러닝 기반의 이벤트 관련 데이터를 상기 모니터링장치로 전송하는 단계를 포함하는 이벤트감지장치의 구동방법.
12. 제11항에 있어서,
    상기 전송하는 단계는,
    상기 모니터링장치의 요청에 따라 선택적으로 상기 딥러닝 기반의 이벤트를 검출하여 상기 모니터링장치로 전송하는 이벤트감지장치의 구동방법.
13. 제11항에 있어서,
    상기 이벤트를 검출하는 단계는,
    상기 모니터링장치에서 객체추적 기반으로 검출된 이벤트와 서로 다른 특성의 이벤트를 검출하는 이벤트감지장치의 구동방법.
14. 제8항에 있어서,
    상기 이벤트를 검출하는 단계는,
    상기 딥러닝 기반의 이벤트 검출에 의해 지역별 특성과 관련되는 지역별 이벤트 데이터를 생성하는 단계를 포함하는 이벤트감지장치의 구동방법.

Images