KR102464197B1 - 빅데이터 기반 영상 감시 방법 - Google Patents

빅데이터 기반 영상 감시 방법 Download PDF

Info

Publication number
KR102464197B1
KR102464197B1 KR1020220063921A KR20220063921A KR102464197B1 KR 102464197 B1 KR102464197 B1 KR 102464197B1 KR 1020220063921 A KR1020220063921 A KR 1020220063921A KR 20220063921 A KR20220063921 A KR 20220063921A KR 102464197 B1 KR102464197 B1 KR 102464197B1
Authority
KR
South Korea
Prior art keywords
tracking
area
tracking device
information
priority index
Prior art date
Application number
KR1020220063921A
Other languages
English (en)
Inventor
윤사빈
김영관
Original Assignee
주식회사 유투에스알
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 유투에스알 filed Critical 주식회사 유투에스알
Priority to KR1020220063921A priority Critical patent/KR102464197B1/ko
Application granted granted Critical
Publication of KR102464197B1 publication Critical patent/KR102464197B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/71—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/292—Multi-camera tracking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • H04N5/23206—
    • H04N5/23299—

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 문제에 관한 빅데이터 기반 영상 감시 방법에 관한 것이다. 본 발명의 일측면에 따르면, 탐지영역과 탐지영역 내에 추적영역을 가지는 복수 개의 추적장비가 상기 탐지영역 내에 객체 존재를 탐지하는 탐지단계, 상기 탐지영역 내에서 상기 객체가 상기 추적영역으로의 진입여부를 확인하는 추적영역 확인단계, 상기 추적영역 내의 상기 객체를 하나 이상의 상기 추적장비로 추적하는 추적단계, 하나 이상의 상기 추적장비의 상기 추적영역이 중복되는 중복영역에서 추적우선지수를 산출하여 하나의 상기 추적장비만으로 상기 객체를 추적하는 추적장비 선택단계, 상기 객체 이동으로 상기 객체가 이동하는 상기 추적영역이 변동되면, 상기 변동된 추적영역의 추적장비로 기존의 상기 객체에 대한 정보를 전달받아, 상기 객체에 대한 추적이 연속적으로 추적 가능한 추적장비 변경단계 및 상기 객체가 상기 추적영역 밖을 향하는 방향으로 이동하여 상기 추적영역 밖으로 이동 시 상기 추적장비가 탐지모드로 전환되는 전환단계를 포함한다.

Description

빅데이터 기반 영상 감시 방법{Big data-based video surveillance method}
본 발명은 빅데이터 기반 영상 감시 방법에 관한 것으로, 영상감시카메라를 활용하고, 데이터를 축적하여 객체를 탐지 및 추적하고, 객체의 추적 및 정확도를 높이며, 비정상 상황에 대처가 용이한 빅데이터 기반 영상 감시 방법에 관한 것이다.
일반적으로 감시 카메라를 이용한 모니터링 시스템은 특정 장소에 고정식 또는 이동식으로 설치된 카메라를 통하여 입력되는 영상을 처리하여 특정 지역을 감시하는 모니터링 시스템이다. 최근에 모니터링 시스템은 지능형 감시 경계 로봇, GOP(Gerenal OutPost) 과학화 시스템, 사회안전 로봇 시스템과 같이 영상을 이용한 시큐리티 시스템(security system) 전반에 걸쳐 사용되고 있다.
이러한 모니터링 시스템은 유사한 적용 분야로 관제 시스템이라 하며, 공공기관 또는 공공기관과 연계된 업체에서 지역사회의 안전을 위한 목적으로 특정 위치나 특정 지역에서 카메라로 수집된 영상을 모니터링 및 관리하는 것으로, 많게는 수 백여개의 영상을 모니터링하고 관리하기 위한 많은 디스플레이가 사용된다. 이러한 모니터링 시스템에서는 일반적인 전시나 광고 목적으로 사용되는 디스플레이에 비해 규모가 크기 때문에, 그에 따른 카메라는 복수개가 상호 연동되어 작동된다. 복수개의 카메라들 중에서 적어도 하나 이상의 카메라가 지정된 영역 또는 위치를 감시할 수 있다. 또한, 모니터링 시스템에 의하여 촬영되는 방향이 지정된 영역 또는 위치로 향할 수 있도록, 감시 카메라에 패닝(panning), 틸팅(tilting), 및 줌(zoom) 등의 기능이 마련된다.
그러나, 이러한 모니터링 또는 감시시스템에서 사용되는 카메라들은 각각 카메라들이 독립적으로 사용되기 때문에 각각의 카메라들이 겹치게 되어 중복적으로 추적하게 되어 추적에 혼동을 주는 문제점이 있다.
또한, 이러한 감시시스템은 중복으로 추적된 객체에 대한 정보의 공유가 어려운 문제점이 있어, 사용자의 육안으로만 파악이 가능하여 인력 소모가 과도하게 발생되는 문제점이 있다.
또한, 이러한 감시시스템은 추적도의 정확성이 저하될 수 있고, 각각 독립적으로 모든 장비가 작동함에 있어서, 비효율적인 자원이 소모될 수 있으며, 객체정보의 예측이 불가능하여, 감시 영역 외의 상황파악이 어려운 문제점이 있다.
본 발명의 목적은, 감시시스템을 빅데이터 기반 감시 방법으로 운영하여, 감시시스템의 운용 시, 독립적으로 감시하는 장비들을 서로 연동시켜, 중복되는 정보를 제거함으로써, 잉여 정보 생성을 방지하고, 객체 들의 구분이 용이하며, 객체의 경로를 예측 가능함으로써, 추적 정확도를 향상시키고, 감시 영역 외의 영역에서 대처 방안에 대해 사용자에게 제공하여 사용자의 대응이 용이할 수 있으며, 각 장비 간의 정보 공유를 통해, 정보를 효율적으로 운용 가능할 수 있는 것을 목적으로 한다.
상기와 같은 목적을 달성하기 위하여 본 발명은 탐지영역과 탐지영역 내에 추적영역을 가지는 복수 개의 추적장비가 상기 탐지영역 내에 객체 존재를 탐지하는 탐지단계, 상기 탐지영역 내에서 상기 객체가 상기 추적영역으로의 진입여부를 확인하는 추적영역 확인단계, 상기 추적영역 내의 상기 객체를 하나 이상의 상기 추적장비로 추적하는 추적단계, 하나 이상의 상기 추적장비의 상기 추적영역이 중복되는 중복영역에서 추적우선지수를 산출하여 하나의 상기 추적장비만으로 상기 객체를 추적하는 추적장비 선택단계, 상기 객체 이동으로 상기 객체가 이동하는 상기 추적영역이 변동되면, 상기 변동된 추적영역의 추적장비로 기존의 상기 객체에 대한 정보를 공유받아, 상기 객체에 대한 추적이 연속적으로 추적 가능한 추적장비 변경단계 및 상기 객체가 상기 추적영역 밖을 향하는 방향으로 이동하여 상기 추적영역 밖으로 이동 시 상기 추적장비가 탐지모드로 전환되는 전환단계를 포함할 수 있다.
또한, 상기 추적장비 선택단계는, 제1 추적장치와 제2 추적장비의 추적영역이 중복되는 상기 중복영역에 상기 객체의 진입여부를 확인하는 중복영역 진입단계, 상기 중복영역에 진입한 상기 객체에 대해서, 해당 상기 제1 및 제2 추적장비의 성능값과 상기 객첵와 상기 제1 및 제2 추적장비 간의 거리값을 각각 측정하여 측정값을 산출하는 측정단계, 상기 제1 및 제2 추적장비의 상기 측정값에 따른 가중치를 고려하여 상기 추적우선지수를 산출하는 연산단계 및 상기 추적우선지수를 비교하여 높은 값을 가지는 상기 추적우선지수의 상기 추적장비를 선택하여 상기 객체를 추적하는 추적우선지수 선택단계를 포함할 수 있다.
또한, 상기 객체가 상기 중복영역 내에서 이동함에 따라, 상기 추적우선지수를 1초 간격으로 산출하여 상기 객체를 추적할 상기 추적장비를 선택하는 반복단계를 더 포함할 수 있다.
또한, 상기 추적우선지수는 하기 식으로 산정되는 것을 특징으로 할 수 있다.
Value = (((Erng - Tdis)/Erng)*(100*Eweight)+(Sacc * Sweight)
(여기서, Erng: 모든 추적장비 내 최대 추적 사거리(m), Tdis: 추적장비와 객체 간의 거리, Eweight: 사거리 가중치(0.0~1.0), Sacc: 센서 추적 정확도(백분율), Sweight: 정확도 가중치(0.0~1.0), 사거리 가중치와 정확도 가중치의 합은 1이다.)
또한, 상기 추적장비는 감시카메라가 구비되어, 상기 추적영역으로 출입하는 상기 객체에 대한 영상정보를 생성할 수 있다.
또한, 상기 추적영역으로 출입 가능한 등록객체에 대한 정보를 저장하는 데이터베이스를 포함하는 제어부가 구비되어, 상기 추적영역으로 진입한 상기 객체가 상기 등록객체인 경우, 실시간 상기 등록객체의 키, 보폭, 이동속도, 폭, 실시간 이동경로인 객체정보를 추출하여 상기 데이터베이스에 저장하여, 상기 등록객체의 등록정보를 업데이트할 수 있다.
또한, 상기 객체가 미등록된 객체로 판단되는 경우, 상기 미등록 객체에 상기 객체를 식별하기 위한 식별표시를 부가하여 디스플레이부에 표시하는 객체표시단계를 더 포함할 수 있다.
본 발명의 일 실시예에 따른 빅데이터 기반 영상 감시 방법은, 영상 추적 장비 간 시스템을 구축함으로써, 불필요한 추적을 방지하고, 데이터, 인력 등의 자원소모를 절감할 수 있어, 장비의 운용 효율을 향상시킬 수 있는 효과를 가지고 있다.
또한, 통합 제어가 가능하도록, 모든 정보를 하나의 장치에서 종합하여 관리 및 처리할 수 있어, 사용자가 종합적으로 상황판단이 가능하며, 사용자의 상황판단 시 감시시스템의 예측을 통해, 보다 정확한 상황을 인지할 수 있다.
도 1은 본 발명의 일 실시예에 따른 빅데이터 기반 영상 감시 방법의 순서도이다.
도 2는 본 발명의 일 실시예에 따른 추적장비 선택단계의 순서도이다.
도 3은 본 발명의 일 실시예에 따른 빅데이터 기반 영상 감시 방법을 수행하기 위한 구성을 나타낸 개략도이다.
도 4은 도 3에 도시된 디스플레이부를 나타낸 도면이다.
도 5는 도 3에 도시된 디스플레이부의 표시부를 나타낸 도면이다.
도 6은 도 3에 나타낸 추적장비의 감시범위를 나타낸 도면이다.
도 7은 본 발명의 일 실시예에 따른 추적부의 컨볼루션 신경망(CNN, Convolution Neural Network)의 계층을 나타낸 도면이다.
도 8은 본 발명의 일 실시예에 따른 추적부의 심층 신경망(DNN, Deep Neural Network)를 나타낸 도면이다.
이하, 첨부된 도면을 참조하면서 본 발명에 따른 바람직한 실시 예를 상세히 설명하기로 한다.
본 발명의 이점 및 특징, 그리고 그것을 달성하는 방법은 첨부된 도면과 함께 상세하게 후술 되어 있는 실시 예들을 참조하면 명확해질 것이다.
그러나, 본 발명은 이하에 개시되는 실시 예들에 의해 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
또한, 본 발명을 설명함에 있어 관련된 공지 기술 등이 본 발명의 요지를 흐리게 할 수 있다고 판단되는 경우 그에 관한 자세한 설명은 생략하기로 한다.
도 1은 본 발명의 일 실시예에 따른 빅데이터 기반 영상 감시 방법의 순서도이고, 도 2는 본 발명의 일 실시예에 따른 추적장비 선택단계의 순서도이다.
도 1 및 도 2를 참고하면, 본 발명의 일 실시예에 따른 빅데이터 기반 영상 감시 방법(S10)은 추적장비(100)일 수 있는 레이더센서(111, 121, 131, 141, 151, 161), 감시카메라(113, 123, 133, 143, 153, 163)를 포함하는 추적장비(100)의 운영 효율을 높일 수 있다.
예를 들어, 일정 범위 내에 있는 객체들 중 추적영역(A)일 수 있는 관계자 외 출입 금지 등의 영역을 감시하는 추적장비(100)가 객체를 추적할 때, 복수 개의 추적장비(100)가 동시에 하나의 객체를 추적하게 될 수 있다.
이때, 객체가 적은 시간 차를 가지고 추적영역(A)에 진입하면, 추적장비(100)의 개수가 부족하여, 객체의 추적이 어려울 수 있고, 중복영역에서 하나의 객체를 동시에 추적하여, 중복되는 정보를 생성되어 잉여 정보가 생성되고, 잉여 정보들이 다수 발생되는 것을 방지할 수 있다.
도 1을 참고하면, 본 발명의 일 실시예에 다른 빅데이터 기반 영상 감시 방법(S10)은, 탐지단계(S100), 추적영역 확인단계(S200), 추적단계(S300), 추적장비 선택단계(S400), 추적장비 변경단계(S500) 및 전환단계(S600)를 통해, 복수 개의 추적장비(100)의 추적영역(A)이 중복될 수 있는 중복영역(L)에서 하나의 추적장비(100)가 객체를 추적할 수 있어, 감시 체계의 운영 효율을 향상시킬 수 있다.
탐지단계(S100)는 레이더센서(111, 121, 131, 141, 151, 161)와 감시카메라(113, 123, 133, 143, 153, 163)를 포함하는 복수 개의 추적장비(100)를 통해 탐지영역이 형성되면, 탐지영역에 위치하는 복수 개의 객체에 대해 존재 유무와 위치에 대해 탐지할 수 있다.
예를 들어, 각 추적장비(100)에 포함되는 레이더센서(111, 121, 131, 141, 151, 161)에는 디스플레이부(300)에 2D로 표시하기 위한 영역이 형성될 수 있다. 이때, 탐지영역은 레이더센서(111, 121, 131, 141, 151, 161)를 중심으로 원형 영역으로 형성될 수 있다.
또한, 탐지영역은 내부에 객체가 존재하게 되면 객체에 대해 탐지영역 내에 점으로 표시될 수 있다. 또한, 점으로 표시된 객체는 탐지영역 내에서 이동시, 점의 이동으로 디스플레이부(300)에 표시되어 사용자가 객체의 이동 및 존재 유무를 직접 확인할 수 있다.
이때, 탐지영역의 내부에는 도 6에 도시된 바와 같이, 각각의 추적장비(100)마다 추적영역(A)이 형성될 수 있다.
추적영역(A)은 각 추적장비(100)의 탐지영역 내에서 탐지영역보다 좁은 영역으로 형성될 수 있다. 예를 들어, 탐지영역 내에서 이동하는 객체가 탐지영역 내를 이동 중에 탐지영역 내에 설정된 추적영역(A)으로 진입될 수 있다.
이때, 추적영역(A)으로 근접하게 이동하여 추적영역(A) 내로 진입하려는 객체를 추적장비(100)가 추적영역(A) 내로 객체가 진입한 여부에 대해서 확인하는 추적영역 확인단계(S200)를 수행할 수 있다.
추적장비 확인단계(S200)는 탐지영역 내에서 객체가 이동 중에 추적영역(A)으로 근접하게 되는 것을 인지하고, 추적영역(A)의 경계 안으로 객체가 진입한 것을 확인할 수 있다.
이때, 추적영역(A)으로 진입한 객체에 대해서, 추적장비(100)는 추적을 시작할 수 있다. 예를 들어, 추적영역(A)은 관계자 외 출입 금지 등과 같은 영역일 수 있다.
또한, 추적영역(A)은 개폐문 같은 객체가 진입 시 통과해야 하는 문 등이 형성될 수 있어, 추적영역(A)으로 객체가 진입 시, 동시적으로 복수의 객체가 진입은 어려울 수 있다.
이를 통해, 추적영역(A)으로 진입하는 객체는 순서에 따라, 추적영역(A)으로 진입할 수 있어, 추적장비(100)는 추적영역(A)으로 진입하는 객체를 순차적으로 추적 가능할 수 있다.
또한, 추적영역(A)으로 진입할 때, 출입문 등의 개폐에 의해, 추적영역(A)으로의 진입여부를 확인할 수 있다. 이때, 추적영역(A)으로 객체의 진입여부와 확인하여, 객체가 추적영역(A)으로 진입 시, 객체를 추적하는 추적단계(S300)를 수행할 수 있다.
추적단계(S300)는, 추적영역(A)으로 진입한 객체에 대해서, 추적장비(100)의 레이더센서(111, 121, 131, 141, 151, 161)가 객체의 위치를 2D 매핑화 하여, 디스플레이부(300)에 표시함과 동시에, 추적장비(100)에 포함된 감시카메라(113, 123, 133, 143, 153, 163)가 객체를 촬영하여 영상정보를 생성하여 추적가능할 수 있다.
이때, 감시카메라(113, 123, 133, 143, 153, 163)를 통해, 촬영되는 영상정보는 후술할 디스플레이부(300)의 화면에 영상을 송출 및 표시할 수 있어, 사용자가 직접 감시카메라(113, 123, 133, 143, 153, 163)에 송출되는 영상으로 객체를 추적 및 감시할 수 있다.
또한, 추적단계(S300)는 추적영역(A)으로 진입한 객체가 추적영역(A)이 중복되는 중복영역(L)에서 중복영역(L)을 추적하는 감시카메라(113, 123, 133, 143, 153, 163)를 포함하는 복수 개의 추적장비(100)가 객체를 추적을 수행할 수 있다.
중복영역(L)은 서로 인접한 추적장비(100) 간에는 영역이 겹치는 영역일 수 있다. 이를 통해, 추적장비(100)의 서로 추적영역(A)이 이격되면, 빈 공간이 형성되어 객체를 연속적으로 탐지할 수 있어, 객체가 추적장비(100)가 설치되어 추적하기 위한 영역을 벗어나는 것을 방지할 수 있다.
이때, 객체를 추적하는 복수의 추적장비(100) 중 하나의 장비가 선택되어 하나의 추적장비(100)가 하나의 객체를 추적하여 순차적으로 진입하고, 복수의 추적영역(A) 내에서 이동하는 객체의 추적을 효율적으로 추적하고, 잉여 정보가 생성되는 것을 방지할 수 있도록, 추적장비 선택단계(S400)가 수행될 수 있다.
추적장비 선택단계(S400)는 하나 이상의 추적장비(100)의 상기 추적영역(A)이 중복되는 중복영역(L)에서 추적우선지수를 산출하여 하나의 추적장비(100)로 객체를 추적할 수 있도록 객체를 추적할 하나의 추적장비(100)를 선택하는 단계일 수 있다.
이때, 추적장비 선택단계(S400)는 하나의 장비를 선택할 수 있도록 중복영역에 위치하는 객체와 중복영역(L)을 추적하는 복수의 추적장비(100)에 대해서, 추적우선지수를 산출하고, 높은 값을 갖는 하나의 추적장비(100)만이 객체를 추적할 수 있도록, 중복영역 진입단계(S410), 측정단계(S420), 연산단계(S430) 및 추적우선지수 선택단계(S440)를 포함할 수 있다.
중복영역 진입단계(S410)는 제1 추적장치(110)와 제2 추적장비(120)의 추적영역(A)이 중복되는 중복영역(L)에 객체의 진입여부를 확인하는 단계일 수 있다.
예를 들어, 추적영역(A)으로 진입이 확인된 객체가 제1 추적장비(110)의 추적영역과 제2 추적장비(120)의 추적영역이 중복된 영역으로 진입하는 것을 확인하는 단계일 수 있다.
예를 들어, 중복영역 진입단계(S410)는 제1 추적장비(110)에 포함된 레이더센서(111, 121, 131, 141, 151, 161)의 추적영역과 제2 추적장비(120)의 레이더센서(121, 122, 123, 124, 125, 126)의 추적영역이 중복된 위치에 객체가 진입되어 있는 지, 2D 매핑화에서 확인이 가능할 수 있다.
또한, 제1 추적장비(110)로 추적 중인 객체가 제2 추적장비(120)의 감시카메라에 객체가 일정 크기 이상의 비율로 확인되면, 중복영역으로 진입한 것을 인지할 수 있어, 복수에 걸쳐 객체의 중복영역(L) 진입여부를 확인할 수 있다.
이후, 중복영역(L)으로 진입한 객체와 제1 추적장비(110)와 제2 추적장비(120) 간의 거리값과 제1 추적장비(110)와 제2 추적장비(120)의 성능값을 측정하는 측정단계(S420)를 수행할 수 있다.
예를 들어, 측정단계(S420)는, 중복영역(L)에 진입한 객체에 대해서, 해당 제2 추적장비(120)제1 및 제2 추적장비(110, 120)의 성능값과 상기 객체와 제1 및 제2 추적장비 간의 거리값을 각각 측정하여 측정값을 산출하는 단계일 수 있다.
이후, 제1 및 제2 추적장비(110, 120)의 측정값과 사용자가 원하는 가중치를 추가로 설정시켜, 추적우선지수를 산출하는 연산단계(S430)를 수행할 수 있다.
즉, 성능값과 거리값이 측정된 상태에서 가중치를 추가하여 추적우선지수를 산출할 수 있다. 이때, 추적우선지수는 하기 식을 통해, 산출될 수 있다.
Value = (((Erng - Tdis)/Erng)*(100*Eweight)+(Sacc * Sweight)
(여기서, Erng: 모든 추적장비 내 최대 추적 사거리(m), Tdis: 추적장비와 객체 간의 거리, Eweight: 사거리 가중치(0.0~1.0), Sacc: 센서 추적 정확도(백분율), Sweight: 정확도 가중치(0.0~1.0), 사거리 가중치와 정확도 가중치의 합은 1이다.)
이후, 추적우선지수를 비교하여 높은 값을 가지는 추적우선지수의 상기 추적장비를 선택하여 객체를 추적하는 추적우선지수 선택단계(S440)를 수행할 수 있다.
예를 들어, 각각의 추적우선지수가 산출된 값을 비교하여 높은 추적우선지수를 갖는 해당 추적장비(100)로 중복영역(L)에서 이동하는 객체를 추적할 수 있고, 객체의 이동에 따라, 추적우선지수는 매초 연산되어 비교될 수 있어, 객체의 이동에 따라, 추적장비(100)가 연속적으로 변경되면서, 객체를 추적 가능할 수 있다.
이후, 객체의 이동에 따라, 추적장비(100)가 변동되는 추적장비 변경단계(S500)를 수행할 수 있다.
추적장비 변경단계(S500)는, 객체 이동으로 객체가 이동하는 추적영역(A)이 변동되면, 변동된 추적영역(A)의 추적장비(100)로 기존의 객체의 이동 경로 등에 대한 정보를 공유받아, 객체에 대한 추적이 연속적으로 추적 가능할 수 있다.
이후, 객체가 추적영역(A)을 벗어나면, 추적장비(100)를 탐지모드로 전환하여 객체를 탐지하는 것을 수행할 수 있도록, 전환단계(S600)가 수행될 수 있다.
예를 들어, 객체가 추적영역(A) 밖을 향하는 방향으로 이동하여 추적영역(A) 밖으로 이탈시 추적장비(100)가 탐지모드로 전환되어, 객체의 존재여부만이 판단하는 단계를 수행할 수 있다.
상술한 탐지영역을 탐지하는 탐지모드는 한번에 복수의 객체의 존재 유무와 이동을 탐지만이 할 수 있고, 상술한 추적모드는 하나의 추적장비(100)가 하나 또는 둘 정도의 객체를 추적할 수 있어, 하나의 추적장비(100) 각각 다른 객체를 추적할 수 있도록, 감시체계를 운영하여 객체의 추적을 자동화시킴과 동시에 효율적으로 운용할 수 있다.
이후, 빅데이터 기반 영상 감시 방법(S10)을 수행하기 위한, 구성은 후술하기로 한다.
도 3은 본 발명의 일 실시예에 따른 빅데이터 기반 영상 감시 방법을 수행하기 위한 구성을 나타낸 개략도이고, 도 4은 도 3에 도시된 디스플레이부를 나타낸 도면이며, 도 5는 도 3에 도시된 디스플레이부의 표시부를 나타낸 도면이고, 도 6은 도 3에 나타낸 추적장비의 감시범위를 나타낸 도면이다.
도 3 내지 도 6을 참고하면, 본 발명의 일 실시예에 따른 빅데이터 기반 영상 감시 방법(S10)은, 감시시스템(10)을 포함하여, 센서, 카메라 등을 사용하여 객체에 대한 정보를 효율적으로 추적하고, 객체의 경로를 예측하고, 이동하는 객체들의 정보를 저장하여 추적이 필요한 공간 내에 이동되는 객체의 이상 행동 등을 감시할 수 있다.
이를 통해, 비정상 상황, 위험 상황 등을 효율적으로 감시하고, 빠르게 대응할 수 있으며, 하나의 통솔 장치로 모든 센서, 카메라 등을 제어할 수 있어, 비용 및 인력의 소모를 절감시킬 수 있어, 효율적인 감시 방법(S10)의 운영이 가능할 수 있다.
또한, 추적된 객체의 정보를 저장 및 축적하여, 이전에 출입 정보가 있는 고유의 등록번호가 부여된 등록객체와 미등록 객체를 구분하여, 등록된 객체의 예측 경로의 정확성을 높일 수 있어, 이상 행동 감시가 더욱 빠르고 효율적으로 감시할 수 있다.
또한, 감시 대상인 객체의 경로를 실시간으로 예측함으로써, 감시 방법(S10)의 외로 이동되는 객체의 경로 또한 예측할 수 있어, 감시 외의 영역에서의 대처 방안에 대해 사용자에게 제공하여 감시 외의 영역에서 사용자가 객체에 대한 대응이 용이 할 수 있다.
또한, 추적장비(100) 간의 정보 공유가 실시간으로 이루어질 수 있어, 객체에 대한 정보의 추적이 장비들 간에 자체적으로 이루어질 수 있어, 장비들의 운영이 용이하고, 운영 효율이 향상될 수 있다.
상술한 바와 같이, 장비들 간의 서로 정보 공유가 이루어지고, 하나의 장치로 모든 장비를 제어할 수 있으며, 실시간으로 객체의 이동 경로를 추적 및 예측할 수 있도록, 빅데이터 기반 영상 감시 시스템(10)은 추적장비(100), 디스플레이부(300) 및 제어부(500)를 포함할 수 있다.
도 3 내지 도 5을 참고하면, 추적장비(100)는 레이더센서(110) 및 감시카메라(130)를 포함할 수 있다,
또한, 추적장비(100)는 탐지영역과 추적영역(A)을 분리하여 설정될 수 있다. 또한, 탐지영역은 객체의 유무를 구분할 수 있다. 또한, 탐지영역은 레이더센서(110) 및 감시카메라(130)를 통해 탐지될 수 있다.
또한, 추적영역(A)은 탐지영역의 범위 내에 형성될 수 있고, 추적영역(A)은 등록되거나, 출입이 허용된 객체만의 출입이 가능한 영역일 수 있다.
예를 들어, 탐지영역은 추적영역보다 범위가 넓게 형성될 수 있고, 추적영역은 탐지영역 안에서 출입이 허가된 관계자만이 출입 가능한 영역일 수 있다.
또한, 탐지영역에서 추적영역(A)으로 출입하려는 객체를 레이더센서(110)가 추출할 수 있고, 추적영역(A)으로 객체가 진입하면 감시카메라(130)가 객체의 이동에 따라, 위치를 추적할 수 있다.
즉, 레이더센서(110)는 탐지영역에서 추적영역(A)으로 진입하는 객체의 유무를 확인할 수 있고, 객체가 추적영역(A)을 향하는 방향으로 움직여 추적영역(A)으로 진입하면, 레이더센서(110)는 객체의 위치를 추적할 수 있다.
이때, 객체가 복수의 레이더센서(110)가 중복되는 영역에 출입하게 되면, 해당 영역을 추적영역(A)으로 가지는 복수의 레이더센서(110)는 레이더센서(110)의 위치, 객체의 위치, 각 레이더센서(110)와 위치와 객체의 거리 등에 대한 정보로 복수의 추적장비(100) 중 추적우선지수를 계산하여 높은 값을 가진 추적우선지수를 통해, 객체를 추적할 하나의 추적장비(100)의 선택이 가능할 수 있다.
예를 들어, 레이더센서(110)는 제1 내지 제6 레이더센서(111, 121, 131, 141, 151, 161)가 형성될 수 있다.
도 6를 참고하면, 레이더센서(110)는 6개의 레이더센서(110)를 도시하고 있으나, 복수의 레이더센서(110)는 2개 이상이면 모두 적용 가능할 수 있다.
레이더센서(110)는 서로 인접한 레이더센서(110) 간에 추적영역이 중복되는 중복영역(L)이 형성될 수 있다. 이때, 레이더센서(110)는 중복영역(L)의 레이더망에 객체와 각각의 레이더센서(110)와의 추적우선지수가 높은 값을 1초마다 계산하여, 추적우선지수가 높은 레이더센서(110)로 추적 중인 객체의 추적이 가능할 수 있다. 이때, 추적우선지수가 연산부(530)를 통해 계산되는 것은 후술하기로 한다.
또한, 레이더센서(110)는 추적영역(A)에 출입한 객체에 대해 추적하는 추적모드(581, 583, 585)가 수행시, 추적영역(A)으로 진입하는 모든 객체에 대해, 진입한 순서 중 먼저 들어온 순서에 따라, 추적할 수 있다.
예를 들어, 복수의 레이더센서(110)의 탐지영역에 위치한 객체가 이동하여 추적영역(A)으로 진입하게 되면, 레이더센서(110)는 중복영역(L)일 경우, 추적우선지수를 계산하여 객체를 추적할 레이더센서(110)를 결정하여 레이더센서(110)가 진입한 객체에 대해 추적이 가능할 수 있다.
이때, 레이더센서(110)는 감시카메라(130)와 일체화되어 설치될 수 있어, 추적영역(A)으로 진입한 객체에 대해 감시카메라(130)가 작동되어, 출입한 객체에 대해 영상정보를 생성할 수 있다.
이후, 생성된 영상정보에서 추출한 객체정보(O)로 해당 객체가 등록객체이면, 추적모드(581, 583, 585)를 중지하고, 해당 객체가 미등록 객체이면, 추적모드(581, 583, 585)를 지속할 수 있다.
또한, 등록 객체이라도 이전에 등록된 등록 객체의 이동경로와 차이가 발생하는 경로 혹은 이상행동이 발생되면, 해당 객체의 추적을 지속할 수 있다.
즉, 상술한 바와 같이, 복수의 추적장비(100)는 레이더센서(110)의 추적영역(A)으로 추적할 추적장비(100)의 선택이 가능할 수 있고, 선택된 추적장비(100)에 설치되는 감시카메라(130)로 영상정보에 대한 추적이 실행될 수 있다.
또한, 감시카메라(130)는 레이더센서(110)를 통해, 결정된 추적장비(100)에 포함된 감시카메라(130)가 출입한 해당 객체를 영상으로 직접 추적하기 위해, 객체를 촬영할 수 있다.
이때, 감시카메라(130)는 독립촬영범위를 가지고 있어, 독립촬영범위를 향하게 배치된 복수 개의 감시카메라(130)가 독립촬영범위 내로 진입하는 객체의 키, 보폭, 이동속도, 폭에 대한 정보인 객체정보(O)에 대한 영상을 촬영하여 영상정보를 생성할 수 있다.
또한, 감시카메라(130)는 영상정보의 객체정보(O)를 추출하여 해당 객체가 등록번호가 부여된 등록된 객체인지 미등록 객체인지 판단이 가능할 수 있다.
예를 들어, 출입한 객체의 얼굴인식, 등록번호, 키, 보폭, 이동속도, 이동경로를 추출하고, 후술한 데이터베이스에 저장된 등록객체와 비교하여 등록객체로 판단되면, 추적영역(A)으로 진입 가능한 객체로 판단하여 추적을 중지할 수 있다.
또한, 등록객체의 실시간 이동이 등록된 이동경로와 차이가 발생하면, 추적을 지속할 수 있다.
이때, 독립촬영범위는 복수 개의 감시카메라(130)가 각각 촬영하는 범위를 나타낼 수 있고, 독립촬영범위 내에서 하나의 감시카메라(130)가 추적 또는 촬영하는 범위는 추적영역(A)과 동일한 영역일 수 있다.
또한, 감시카메라(130)는 독립촬영범위를 촬영하기 위해, 제1 내지 제6 감시카메라(113, 123, 133, 143, 153, 163)를 포함할 수 있다. 본 발명의 실시예는 6대의 감시카메라(130)를 예시로 들었으나, 본 발명은 2대 이상의 감시카메라(130)에 모두 적용 가능할 수 있다.
즉, 제1 내지 제6 감시카메라(113, 123, 133, 143, 153, 163)은 제1 내지 제6 레이더센서(111, 121, 131, 141, 151, 161)와 동일하게 설치될 수 있다.
또한, 감시카메라(130)는 내부에 디스플레이부(300) 및 제어부(500)와 송수신이 가능할 수 있어, 레이더센서(110)로 생성되는 객체의 위치, 이동경로, 이동속도, 예상 이동경로와 감시카메라(130)로 생성되는 영상정보는 디스플레이부(300)를 통해, 사용자에게 제공될 수 있고, 사용자는 제어부(500)를 통해, 레이더센서(110) 및 감시카메라(130)를 포함하는 추적장비(100)가 제어될 수 있다.
또한, 감시카메라(130)는 감시카메라(130) 간의 정보를 공유할 수 있어, 제1 감시카메라(110)에서 제2 감시카메라(120)를 향하는 방향으로 이동되는 객체정보(O)를 제2 감시카메라(120) 내지 제6 감시카메라(130)와 연동되어 객체정보(O)가 이동하는 방향의 감시카메라(130)로 객체정보(O)를 전송하여 레이더센서(110)와 감시카메라(130)가 자체적으로 객체정보(O)를 추적하기 위한, 추적대기모드가 수행될 수 있다.
이때, 추적대기모드는, 추적이 중지된 레이더센서(110) 및 감시카메라(130)가 재추적을 위한, 준비상태일 수 있다. 즉, 추적대기모드는 탐지모드에서 추적모드를 수행하기 위한 대기시간 상태일 수 있다.
예를 들어, 탐지모드는 탐지영역을 탐지하는 모드일 수 있다. 또한, 탐지모드는 추적이 중단된 상태에서 객체의 존재유무만을 판단하고 있는 상태이고, 추적대기모드는 객체가 추적영역(A)에 진입하면 이전 출입한 객체인 것을 확인하여 바로 추적이 가능한 상태일 수 있다.
즉, 해당 출입하는 객체에 대한 정보가 설정되어 있어, 해당 객체가 감시카메라(130)에 촬영되면 바로 추적모드(581, 583, 585)가 가능한 상태일 수 있다.
디스플레이부(300)는 추적장비(100)를 통해, 전송되는 레이더정보 및 영상정보를 표시하고, 추적장비(100)를 사용자가 직접 제어할 수 있도록, 표시부(310) 및 수동제어부(330)를 포함할 수 있다.
표시부(310)는 사용자가 표시부(310)의 전방에서 추적장비(100)가 촬영하여 전송하는 객체정보(O)에 대한 레이더정보 및 영상정보를 화면 등으로 표시하여 사용자에게 객체정보(O)를 2D 매핑으로 변환 및 단순화하여 시각적으로 사용자가 간략하게 객체정보(O)의 경로, 예측 경로, 이동 방향 등을 확인할 수 있도록, 사용자에게 화면으로 표출할 수 있다.
예를 들어, 표시부(310)는 사각 단면으로 형성될 수 있다. 또한, 표시부(310)는 좌측 부분에 현재 객체정보(O)를 생성하고 있는 감시카메라(130)의 실시간 영상을 표출할 수 있다.
또한, 표시부(310)의 우측 부분에는 독립촬영범위를 촬영하고 있는 복수의 추적장비(100)가 수직방향으로 표시되어, 현재 탐지, 탐지 및 추적을 촬영하고 있는 제1 내지 제6 레이더센서(110) 및 감시카메라(130) 중에서 사용자가 직접 선택하여 사용자가 확인하고자 하는 제1 내지 제6 레이더센서(110) 및 감시카메라(130)의 레이더정보 및 영상정보의 객체정보(O)를 좌측 부분과 후술할 중간 부분에 표시될 수 있다.
예를 들어, 객체정보(O)가 제1 레이더센서(111)과 제2 레이더센서(112) 및 제1 감시카메라(131)와 제2 감시카메라(132)의 독립촬영범위에 진입하면, 제1 감시카메라(131)와 제2 감시카메라(132)에서 실시간 추적 또는 촬영되는 영상과 위치가 표시될 수 있다.
또한, 좌측 부분에는 객체정보(O)일 수 있는 객체에 대해 사각형의 점선 단면으로 표시하여 현재 추적 또는 촬영되어 좌측 부분에 표시되는 실시간 영상에 현재 추적 중인 객체정보(O)인 객체의 타겟을 사용자에게 제공할 수 있다.
또한, 우측 부분에는 독립촬영범위를 촬영 또는 추적하여 실시간 영상을 송출하는 제1 감시카메라(110)와 제2 감시카메라(120)는 우측 부분에서 위치한 제1 내지 제6 레이더센서(111, 121, 131, 141, 151, 161) 및 감시카메라(113, 123, 133, 143, 153, 163)는 사용자가 사용하고자 하는 장치를 선택하여 해당 장치를 사용자가 직접 조절할 수 있다.
또한, 좌측 부분의 실시간 영상이 송출되는 부분과 우측 부분의 사용자가 사용하고자 하는 추적장비(100)를 선택하는 부분의 사이에 위치하는 중간 부분에는 현재 추적되고 있는 객체정보(O)를 레이더센서(110)에서 추출되는 정보일 수 있는 2D 매핑화하여 예측 경로, 이동 경로 등을 간략하게 표현할 수 있다.
예를 들어, 중간 부분에는 객체정보(O)는 십자가 등의 모양으로 표현될 수 있고, 객체정보(O)가 이동하는 방향 또는 예측된 방향에 따라, 점선으로 표시될 수 있다. 또한, 진행 방향은 점선의 끝단에 위치할 수 있다. 이때, 이동하는 방향과 예측 가능한 제어부(500)는 후술하기로 한다.
또한, 디스플레이부(300)는 수동제어부(330)가 설치될 수 있다. 이때, 수동제어부(330)는 표시부(310)에 표시된 복수 개의 추적장비(100)를 선택가능하고, 감시카메라(130)들의 회전시킬 수 있도록 조이스틱으로 형성될 수 있다.
또한, 표시부(310)가 화면일 수 있어, 표시부(310)에 표시되는 화면의 내부에 위치한 커서 등을 조절할 수 있는 제어패드 등으로 형성될 수 있다.
본 발명의 일 실시예에 따른, 빅데이터 기반 영상 감시시스템(10)의 제어부(500)는 추적장비(100)의 모드를 제어하고, 실시간으로 복수 개의 제1 내지 제6 레이더센서(111, 121, 131, 141, 151, 161)와 제1 내지 제6 감시카메라(113, 123, 133, 143, 153, 163) 간에 지속적인 추적이 가능할 수 있다.
이를 통해, 복수 개의 레이더센서(110)와 감시카메라(130)가 자체적으로 운영이 가능하며, 비정상 상황 발생 시, 사용자에게 알림을 전달하며, 이후 객체정보(O)의 이후 경로를 예측함으로써, 사용자가 효율적인 대응이 가능하도록, 데이터베이스(510), 식별부(520), 연산부(530), 비교부(540), 판단부(550), 예측부(560), 통제부(570) 및 추적부(580)를 포함할 수 있다.
데이터베이스(510)는 사용자가 추적영역(A)으로 출입이 가능한 객체에 대한 정보인 등록번호가 부여된 객체일 수 있는 등록객체에 대한 정보를 저장할 수 있다. 또한, 추적장비(100)로 새롭게 진입한 객체정보(O)가 생성되면, 생성된 객체정보(O)를 저장 및 축적할 수 있다.
이때, 데이터베이스(510)에 축적 및 저장된 등록객체(R)는 고유의 등록번호를 부여하여 객체정보(O)일 수 있고, 이후, 등록객체(R)가 추적영역(A)으로 재진입하게 되면, 등록객체(R)의 이동경로는 등록번호에 따라, 업데이트될 수 있다.
즉, 사용자는 등록객체(R)를 등록하여 추적영역(A)으로 진입을 허가하고, 추적영역(A)으로 진입한 등록객체(R)를 추적시에는 등록객체(R)의 이동경로를 추적모드(581, 583, 585)를 통해, 추적하여 추적된 이동경로가 업데이트될 수 있어, 등록객체(R)의 이동경로의 데이터를 축적할 수 있다.
이를 통해, 데이터베이스(510)는 등록객체(R)가 추적영역(A)에서 추적될 때, 기저장된 이동경로가 있을 경우, 등록객체(R)의 이동경로가 기저장된 이동경로를 기초로 예측될 수 있어, 등록객체(R)에 대한 이동경로의 예측이 빠르게 이루어질 수 있고, 기존의 이동경로가 다른 이동경로 혹은 이상 행동시, 해당 등록객체(R)의 비정상 상황을 빠르게 검출할 수 있다.
즉, 데이터베이스(510)에는 추적장비(100)에서 추출된 영상정보에서 객체의 얼굴인식, 등록번호, 출입카드, 키, 보폭, 이동속도, 폭 등에 대한 정보인 등록객체(R)와 등록객체(R)의 이동경로를 지속적으로 저장하여 축적함으로써, 등록객체(R)의 이동경로를 예측할 수 있고, 객체의 등록여부를 확인할 수 있다.
식별부(520)는 복수 개의 추적장비(100)로 추적 또는 촬영되는 추적영역 내로 진입한 객체에 식별번호를 부여할 수 있다.
예를 들어, 추적영역으로 객체가 진입하면, 추적장비(100) 중 레이더센서(110)는 추적우선지수가 높은 추적장비(100)가 선택되고, 선택된 추적장비(100)에 포함된 감시카메라(130)가 객체를 촬영하여 영상정보를 확인할 수 있다.
또한, 영상정보에서 추출된 객체에 대한 정보일 수 있는 키, 보폭, 이동속도, 안면과, 등록번호가 기재된 출입증 등을 통해, 기존에 추적영역(A)에 진입 가능한 등록객체(R)인지 판단이 가능할 수 있다. 이때, 객체가 미등록일 경우, 미등록 객체를 추적하기 위해, 객체에 식별번호를 부가할 수 있다.
예를 들어, 첫 번째로 추적영역(A)에 출입한 객체는 1로 식별번호를 부가하여, 추적할 수 있다. 이때, 등록번호는 이후, 추적을 진행 중인 제1 추적장비(111, 131)를 벗어나 다른 추적장비일 수 있는 제2 추적장비(112, 132)로 진입하게 되면, 추적장비(100)가 식별번호 1에 대한 객체가 다시 제1 추적장비(111, 131)로 진입할 것을 대비하여 추적을 대기하고 있는 상태를 유지할 수 있다.
또한, 출입한 객체에 대해서, 식별번호를 부여함으로써, 추적영역(A) 내로 진입한 객체는 식별번호에 따라 데이터베이스(510)에 저장될 수 있고, 객체정보(O)가 이동하는 이동경로가 식별번호에 따라 데이터베이스(510)에 저장될 수 있다.
예를 들어, 식별번호 1의 미등록 객체가 이동한 경로와 미등록 객체가 촬영된 영상에서 객체의 키, 보폭, 이동속도, 이동경로, 안면 등을 추출하여 데이터베이스(510)에 저장될 수 있다.
또한, 등록객체(R)의 이상 경로 또는 이상 행동으로 인해, 등록객체(R)를 추적할 때에는 등록객체(R)에 부여된 등록번호로 해당 등록객체(R)의 이상 행동 또는 이상 경로에 대한 영상이 저장될 수 있다.
이를 통해, 이후 추적영역(A) 내로 진입한 객체가 등록객체(R)인지 새로운 객체인지 판별할 수 있어, 이후, 등록객체(R)의 진입 시, 과거 등록객체(R)가 진행한 경로를 토대로, 효율적으로 객체의 경로를 예측 및 비교 판단할 수 있다.
연산부(530)는 후술할 추적부(580)의 추적모드(581, 583, 585)일 수 있는 협력추적모드(583) 및 예측추적모드(585)에 따라, 복수 개의 추적장비(100)를 제어하기 위해, 추적우선지수를 계산 또는 연산할 수 있다.
즉, 복수 개의 추적장비(100)는 레이더센서(110) 및 감시카메라(130)를 포함하여, 객체가 추적영역(A) 내에서 해당 추적장비(100)와의 거리, 보폭, 이동 속도 등을 측정하면, 연산부(530)는 측정한 값에 따라, 하기 식을 통해, 추적우선지수를 계산 또는 연산하여, 높은 추적우선지수를 갖는 추적장비(100)로 객체의 추적이 가능할 수 있다.
이때, 추적장비(100)의 추적우선지수를 연산할 때는, 레이더센서(110)에서 도출된 값으로 계산될 수 있다.
하기 식은 다음과 같다.
Value(추적우선지수) = (((Erng - Tdis)/Erng)* 100*Eweight)+(Sacc * Sweight)
(여기서, Erng: 모든 감시카메라 내 최대 추적 사거리(m), Tdis: 감시카메라와 객체 간의 거리, Eweight: 사거리 가중치(0.0~1.0), Sacc: 센서 추적 정확도(백분율), Sweight: 정확도 가중치(0.0~1.0)
또한, 각 가중치는 사용자가 변경 가능할 수 있고, 센서 추적 정확도는 장비의 스펙에 따라, 달라질 수 있으며, 각 가중치는 사용자가 사거리와 정확도 중 추적 전환시 우선순위를 부여하기 위한 수치일 수 있어, 가중치의 합은 1을 유지할 수 있다.
이때, 연산부(530)를 통해 연산된 추적우선지수를 다른 감시카메라(130)와 비교할 수 있도록, 제어부(500)에는 비교부를 포함할 수 있다.
비교부(540)는 복수 개의 추적장비(100)의 추적영역(A)이 중복되는 중복영역(L)에서 추적장비(100) 간의 추적우선지수를 계산하고, 상호 추적장비(100) 간에 계산된 추적우선지수를 전달받아 값을 비교할 수 있다.
또한, 비교부(540)는 상술한 데이터베이스(510)에 저장된 등록객체(R)와 추적영역(A) 내로 진입한 객체의 등록 유무에 대해, 추적장비(100)에서 추출된 객체에 대한 정보를 토대로, 등록번호와 비교할 수 있다. 또한, 해당 객체가 등록번호가 부여된 객체를 추적할 시에는, 등록객체(R)의 기존의 데이터베이스(510)에 저장된 이동경로와 실시간 이동되는 등록객체(R)의 이동경로가 일정 범위를 벗어나는 지 여부를 비교할 수 있다.
이때, 비교부(540)를 통해, 비교된 추적우선지수의 결과는 판단부(550)를 통해, 높은 값을 가진 추적우선지수의 추적장비(100)가 추적을 실행할 수 있다. 또한, 판단부(550)는 미등록 객체 를 판단할 수 있다.
또한, 예측부(560)는 후술할 추적부(580)에 저장된 예측추적모드(585)를 실행할 수 있도록, 컨볼루션 신경망(CNN, Convolutional Neural Network)으로 객체를 구분할 수 있다. 예를 들어, 추적된 객체가 사람인지를 구분할 수 있고, 데이터베이스(510)에 저장된 객체인지 여부를 구분할 수 있다.
또한, 예측부(560)는 컨볼루션 신경망(CNN)을 통해, 객체가 사람 이외의 객체로 판단되면, 사용자에게 알람을 송신하도록 통제부(570)로 알람정보를 전송할 수 있다. 예를 들어, 객체의 폭이 높이보다 크면, 사람으로 판단하지 않을 수 있어, 이상 객체가 추적영역으로 출입된 상태를 알람정보로 전송할 수 있다.
또한, 예측부(560)는 심층 신경망(DNN, Deep Neural Network)이 저장되어 있어, 컨볼루션 신경망(CNN)을 통해, 객체가 사람으로 구분되면, 심층 신경망(DNN) 기반의 경로 예측을 통해, 사람일 수 있는 해당 객체의 경로를 예측할 수 있다.
또한, 예측부(560)는 진입한 객체가 등록객체(R) 이외의 객체인 미등록 객체 또는 사람 이외의 객체로 판단되면, 예측부(560)는 통제부(570)를 통해, 사용자에게 알람 정보를 전송하여, 통제부(570)가 디스플레이부(300)에 알람을 발생시키고, 해당 객체는 심층 신경망(DNN)을 통해, 경로를 예측할 수 있다.
예측부(560)의 컨볼루션 신경망(CNN)에 의해, 해당 객체가 사람 이외의 것으로 판단되면, 객체의 특징일 수 있는 객체정보(O)의 특징정보를 추출하여 데이터베이스(510)에 저장시킬 수 있다.
예를 들어, 바닥면과 수직인 길이일 수 있는 높이와 바닥면으로부터 수평인 길이일 수 있는 폭의 길이에서 폭의 길이가 더 넓게 형성되면 사람 이외의 것으로 판단되고, 이는 객체의 특징으로 데이터베이스(510)에 저장될 수 있다.
통제부(570)는 연산부(530)에서 연산되어 비교부(540)와 판단부(550)를 통해 도출된 결과를 전달받아, 감시카메라(130)의 실행시키거나, 위치 또는 방향 등을 통제시킬 수 있다.
또한, 통제부(570)는 후술할 추적부(580)의 추적모드(581, 583, 585)에 따라, 감시카메라(130)가 객체를 추적, 촬영, 탐지모드할 수 있도록 통제할 수 있다.
또한, 통제부(570)는 판단부(550)에서 이상 상황일 수 있는 사람 이외의 객체 등의 알람이 필요할 때, 알람정보를 수신 받아 디스플레이부(300)를 통해, 사용자에게 알람을 전송할 수 있다.
추적부(580)는 추적영역(A)에 객체가 진입하여 추적, 촬영 및 탐지되는 객체를 정확하게 추적하고, 효율적으로 복수 개의 추적장비(100)를 작동시키며, 객체의 이동 경로를 예측할 수 있고, 불필요한 추적을 방지하고, 데이터, 인력 등의 자원소모를 절감시킬 수 있다.
추적부(580)에는 복수 개의 추적모드(581, 583, 585)가 저장될 수 있다. 이때, 추적모드(581, 583, 585)는 데이터베이스(510)에 기저장된 등록객체(R)에 대한 등록번호와 추적장비(100)에서 추출된 객체정보(O)인 객체의 키, 보폭, 이동 방향, 이동속도를 사용하여, 연산부(530), 비교부(540), 예측부(560), 판단부(550) 및 통제부(570)를 통해, 객체의 추적이 가능할 수 있다. 이때, 추적모드(581, 583, 585)는, 추적영역(A)에 진입되는 객체의 경로를 추적, 촬영, 예측하는 모드일 수 있다.
또한, 추적모드(581, 583, 585)는 등록객체(R) 또는 미등록 객체의 경로를 추적 또는 예측하기 위해, 단독추적모드(581), 협력추적모드(583) 및 예측추적모드(585)를 포함할 수 있다.
단독추적모드(581)는 추적장비(100)가 추적영역(A)을 추적 또는 촬영할 때, 객체가 복수 개의 추적장비(100)의 촬영 가능한 범위에 위치하면, 복수 개의 추적장비(100)의 중복 추적을 허용할 수 있어, 객체에 대한 위치, 이동 등에 대한 추적을 반복적으로 탐지할 수 있다.
이를 통해, 추적영역(A) 내에 진입하여 해당 추적장비(100)의 추적영역(A) 내의 객체에 대해, 다양한 각도로 객체의 추적 또는 촬영이 가능할 수 있어, 객체정보(O)일 수 있는 객체의 위치, 이동 방향 등의 추출이 더욱 정확할 수 있다.
협력추적모드(583)는 복수의 추적장비(100)가 추적영역(A)을 추적 또는 촬영할 때, 객체가 복수 개의 추적장비(100)의 추적 또는 촬영 가능한 범위에 위치하면, 복수 개의 추적장비(100) 중에서 하나의 추적장비(100)가 선택되어 객체를 추적하는 모드일 수 있다.
또한, 하나의 추적장비(100)가 객체를 추적 또는 촬영하게 되면, 다른 타 장비들은 탐지영역을 탐지하는 탐지모드로 전환되어 추적 중인 객체 외의 다른 객체의 진입 등을 감시할 수 있다.
탐지모드는 탐지영역을 탐지하는 모드로써, 추적영역(A)보다 범위가 넓은 탐지영역에 레이더센서(110)를 통해, 객체의 진입여부를 판단할 수 있고, 객체가 추적영역(A)으로 진입시 객체를 추적하는 추적모드(581, 583, 585)가 수행될 수 있다.
이때, 객체의 추적 또는 촬영을 위한 하나의 추적장비(100)를 결정하는 것은 추적우선지수로 결정될 수 있다. 추적우선지수는 연산부(530)에서 연산될 수 있고, 추적우선지수에 부합하는 추적장비(100)가 객체를 추적 또는 촬영할 수 있다. 이때, 추적우선지수가 높은 값을 갖는 추적장비(100)일 수 있다.
예를 들어, 제1 추적장비(111, 131)와 제2 추적장비(112, 132)가 하나의 객체를 추적하는데 각각의 추적영역(A)이 중복되는 중복영역이 형성되면, 협력추적모드(583)가 실행될 수 있다.
이때, 추적 또는 촬영하는 추적장비(100) 외의 추적 또는 촬영하는 중복영역(L)의 추적장비(100)는 탐지모드로 전환되어 해당 객체 외의 다른 객체를 탐지하여 촬영영역 내의 영상정보를 생성 및 저장하는 상태를 수행할 수 있다.
예를 들어, 제1 추적장비(111, 131)와 제2 추적장비(112, 132) 중 제1 추적장비(111)의 추적우선지수가 높게 연산되어 제1 추적장비(111, 131)가 추적 또는 촬영을 진행하게 되고, 객체가 중복영역(L)에서 이동되고 있으면, 1초마다 제1 추적장비(111, 131)와 제2 추적장비(112, 132)는 추적우선지수를 다시 계산하여, 객체를 추적할 장비가 계산 또는 연산되어 재선택될 수 있다.
이를 통해, 반복적으로 중복영역(L)을 이동하고, 왕복하는 객체에 대한 위치와 행동을 실시간으로 추적 가능하고, 객체가 중복영역(L)으로 재진입시 오류를 방지할 수 있다.
협력추적모드(583)의 감시는 복수 개의 추적장비(100)가 각각 개별적으로 객체를 반복적으로 감시하고, 객체가 해당 추적장비(100)의 추적영역(A)으로 진입하면, 해당 영역을 감시하던 추적장비(100)는 객체를 추적할 수 있다.
이때, 미등록 객체는 객체에 따라, 상술한 식별부(520)에 의해, 식별번호가 부가된 상태일 수 있고, 식별번호가 부가된 미등록 객체의 객체정보(O)는 식별번호에 따라, 데이터베이스(510)로 저장될 수 있다.
또한, 복수 개의 추적장비(100)의 추적영역(A)이 중복되는 경우, 설정된 값인 추적우선지수에 따라, 추적우선지수가 높은 추적장비(100)가 객체를 추적할 수 있어, 추적 중인 객체가 이동하여 또 다른 추적장비(100)와 추적영역(A)이 중복되는 경우 연산부(530)는 1초 간격으로 추적영역(A)이 겹치는 두 추적장비(100)의 추적우선지수를 각각 계산하고, 추적 중이지 않는 추적장비(100)의 추적우선지수가 높아지면 높아진 추적장비(100)로 추적 상태를 전환할 수 있고, 기존 추적하고 있던 추적장비(100)는 탐지모드로 전환될 수 있다.
도 7은 본 발명의 일 실시예에 따른 추적부의 컨볼루션 신경망(CNN, Convolution Neural Network)의 계층을 나타낸 도면이고, 도 8은 본 발명의 일 실시예에 따른 추적부의 심층 신경망(DNN, Deep Neural Network)를 나타낸 도면이다.
도 7 및 도 8을 참고하면, 예측추적모드(585)는 복수 개의 추적장비(100)가 각각 개별 추적영역(A)을 감시하고 있는 상태에서 객체가 추적영역(A)에 진입하면 추적영역(A)에 해당하는 추적장비(100)가 추적을 시작할 수 있다.
이때, 추적을 시작하는 해당 추적장비(100)는 컨볼루션 신경망(CNN, Convolutional Neural Network) 기반의 객체 구분을 통해, 탐지된 객체의 종류를 구분할 수 있다. 예를 들어, 사람과 사람 이외의 객체를 구분시킬 수 있다. 이때, 컨볼루션 신경망(CNN)은 별도의 DB를 저장할 수 있다.
또한, 컨볼루션 신경망(CNN)의 구분은 특정 필터를 이용해 입력된 이미지에서 특징을 추출하고, 완전 연결 계층 (Fully-Connected Layer)에서 분류를 수행할 수 있다. 이때, 분류를 하기 위해 우선적으로 신뢰할 수 있는 사람의 얼굴정보를 DB(Database)에 저장하고, 이를 컨볼루션 신경망(CNN)의 학습데이터로 이용하여 컨볼루션 신경망(CNN)을 학습시킬 수 있다.
또한, 컨볼루션 신경망(CNN)은 도 8에 도시된 바와 같이 컨볼루션 계층(Convolution Layer), 최대 풀링 계층(Max Pooling Layer), 완전 연결 계층으로 이루어져 있다.
이때, 컨볼루션 계층은 이미지의 특징들을 추출할 수 있고, 최대 풀링 계층은 이미지의 크기를 절반으로 줄이며 강한 특징을 추출할 수 있다.
이와 같이, 컨볼루션 계층과 최대 풀링 계층을 반복적으로 구성하여 강한 특징들로 구성된 특징맵(feature Map)을 뽑아낼 수 있다.
이후, 완전연결 계층에 전달되기 전 플래튼 계층(Flatten Layer)을 통과하여 특징맵을 1차원으로 변경 후, 완전연결 계층을 통과하여 최종적으로 학습된 이미지와의 비교를 통해 이미지 분류를 수행할 수 있다.
이때, 학습된 이미지와 유사도가 임계 값을 넘으면 DB에 등록 사람으로 판단하고, 유사도가 임계 값보다 작으면 Unknown으로 분류할 수 있다.
추적영역(A)의 감시카메라(130)가 추적을 시작하면, 움직이는 영역의 이미지를 CNN 모델의 입력하여 해당 이미지가 DB에 있는 사람인지 아니면 Unknown 인지 판단한다.
이후, 구분된 객체의 종류가 DB에 있는 사람일 경우, 심층 신경망(DNN, Deep Neural Network) 기반의 경로 예측을 통해 해당 사람의 이동경로를 예측한다.
구분된 객체의 종류가 Unknown일 경우, 통제부(570)로 알람정보를 전송하고 통제부(570)는 알람정보를 디스플레이부(300)로 전송시켜 알람을 발생시킬 수 있고, DNN 기반의 경로 예측을 통해 해당 사람의 이동 경로를 예측할 수 있다. 이때, 사용자는 발생한 알람을 확인하고 해제할 수 있다.
Unknown 이미지는 라벨링하여 컨볼루션 신경망(CNN)의 별도 DB와 데이터베이스(510)에 저장할 수 있고, 이를 컨볼루션 신경망(CNN)의 학습데이터로 사용하여 객체 구분에 대한 성능향상에 이용할 수 있다.
구분된 객체가 사람일 경우, 심층 신경망(DNN, Ceep Neural Network)를 통해, 객체의 이동 경로를 예측할 수 있다.
심층 신경망(DNN) 기반 경로 예측 모델은 해당 객체의 이동 방향, 이동 속도를 이용하여 대상의 이동경로 예측 지도(Path Prediction Map)을 생성할 수 있다.
또한, 심층 신경망(DNN)의 은닉 계층(Hidden Layer)은 여러 개인 인공 신경망으로, 손실 함수(Loss Function)를 정의하여 손실 함수가 최소가 되는 값으로 모델을 훈련시켜 원하는 예측 값을 얻을 수 있다.
또한, 심층 신경망(DNN)을 사전에 많은 데이터로 훈련시키면 더 좋은 예측 성능을 기대할 수 있기 때문에, 여러 추적 영상을 기반으로 객체의 이동 방향과 이동 속도를 얻어 심층 신경망(DNN)을 훈련시킬 수 있다.
심층 신경망(DNN)의 훈련 단계는 먼저 입력 Feature인 객체의 이동 방향과 이동 속도를 추적 시작단계에서의 객체의 위치와 일정 시간 뒤의 객체의 위치를 바탕으로 객체의 이동 방향과 이동 속도를 습득할 수 있다.
이후, 최소화할 손실함수를 실제 이동 경로와 예측 이동 경로의 차로 정의하고, 예측 이동경로와 실제 이동경로의 차가 최소가 되게 심층 신경망(DNN)의 가중치를 학습시킬 수 있다.
심층 신경망(DNN)의 입력 계층은 입력 Feature와 동일한 2층, 출력 계층은 예측 경로인 1층으로 구성한다. 이렇게 예측한 경로를 바탕으로 추적장비(100)가 커버하는 영역에 대해 이동경로 예측 지도를 생성할 수 있다.
또한, 심층 신경망(DNN)을 통해, 생성된 이동경로 예측 지도에서 가장 높은 확률을 가지는 이동경로를 선정하고, 이 경로를 포함하는 다른 추적장비(100)는 해당 경로에 대해 미리 추적할 수 있도록 추적대기 모드로 변경할 수 있다.
이때, 객체가 중복영역(L)에 진입하면, 기존 추적장비(100)는 객체 추적을 유지하고, 다른 추적장비(100)는 해당 객체를 기존 추적장비(100)와 동시에 추적할 수 있어, 객체를 추적하는데 필요한 객체정보를 정확하게 추출할 수 있다.
이때, 객체의 예측 이동 경로가 장비의 추적영역(A)을 벗어나 다른 장비의 추적영역(A)으로 이동하게 되면, 기존 장비는 탐지모드로 전환될 수 있다.
상술한 바와 같이, 본 발명의 빅데이터 기반 영상 감시 방법(S10)은, 감시시트템(10)에 의해 운영될 수 있다.
또한, 빅데이터 기반 영상 감시 방법(S10)은 각 추적영역(A)을 갖는 복수 개의 추적장비(100)가 객체를 각각의 추적장비(100) 별로 추적할 수 있고, 독립적으로 추적된 추적장비(100) 간의 연동 가능하여, 중복되는 정보를 최소화할 수 있어, 잉여 데이터 생성을 방지하고, 불필요한 추적을 방지하여 비용 및 인력을 절감시킬 수 있어, 추적장비(100) 들의 운영 효율을 향상시킬 수 있다.
또한, 디스플레이부(300)에 2D 매핑화된 지도를 표시할 수 있어, 사용자가 간편하게 객체의 이동을 확인할 수 있고, 객체의 이동 경로도 사전에 예측할 수 있으며, 독립촬영범위 밖으로 이동되는 객체의 이동 경로도 일부 예측 가능할 수 있어, 다양한 분야에서 활용 가능할 수 있다.
이상에서, 본 명세서에서 설명한 기능적 동작과 본 주제에 관한 실시형태들은 본 명세서에서 개시한 구조들 및 그들의 구조적인 등가물을 포함하여 디지털 전자 회로나 컴퓨터 소프트웨어, 펌웨어 또는 하드웨어에서 혹은 이들 중 하나 이상의 조합에서 구현 가능하다.
본 기술한 설명은 본 발명의 최상의 모드를 제시하고 있으며, 본 발명을 설명하기 위하여, 그리고 당업자가 본 발명을 제작 및 이용할 수 있도록 하기 위한 예를 제공하고 있다. 이렇게 작성된 명세서는 그 제시된 구체적인 용어에 본 발명을 제한하는 것이 아니다.
따라서, 상술한 예를 참조하여 본 발명을 상세하게 설명하였지만, 당업자라면 본 발명의 범위를 벗어나지 않으면서도 본 예들에 대한 개조, 변경 및 변형을 가할 수 있다. 요컨대 본 발명이 의도하는 효과를 달성하기 위해 도면에 도시된 모든 기능 블록을 별도로 포함하거나 도면에 도시된 모든 순서를 도시된 순서 그대로 따라야만 하는 것은 아니며, 그렇지 않더라도 얼마든지 청구항에 기재된 본 발명의 기술적 범위에 속할 수 있음에 주의한다.
이상의 본 발명은 도면에 도시된 실시 예(들)를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형이 이루어질 수 있으며, 상기 설명된 실시예(들)의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 청구범위의 기술적 사상에 의해 정해여야 할 것이다.
S10: 빅데이터 기반 영상 감시 방법.
S100: 탐지단계 S200: 추적영역 확인단계
S300: 추적단계 S400: 추적장비 선택단계
S500: 추적장비 변경단계 S600: 전환단계
10: 감시시스템
100: 추적장비 110: 레이더센서
130: 감시카메라
300: 디스플레이부
500: 제어부 510: 데이터베이스
520: 식별부 530: 연산부
540: 비교부 550: 판단부
560: 예측부 570: 통제부
580: 추적부 581: 단독추적모드
583: 협력추적모드 585: 예측추적모드
R; 등록객체 A: 추적영역
O: 객체정보 L: 중복영역

Claims (7)

  1. 레이더 센서를 포함하여, 탐지영역과 탐지영역 내에 추적영역을 가지는 복수 개의 추적장비가 상기 탐지영역 내에 객체 존재를 탐지하는 탐지단계;
    상기 탐지영역 내에서 상기 객체가 상기 추적영역으로의 진입여부를 확인하는 추적영역 확인단계;
    상기 추적영역 내의 상기 객체를 하나 이상의 상기 추적장비로 추적하는 추적단계;
    하나 이상의 상기 추적장비의 상기 추적영역이 중복되는 중복영역에서 추적우선지수를 산출하여 하나의 상기 추적장비만으로 상기 객체를 추적하는 추적장비 선택단계;
    상기 객체 이동으로 상기 객체가 이동하는 상기 추적영역이 변동되면, 상기 변동된 추적영역의 추적장비로 기존의 상기 객체에 대한 정보를 공유받아, 상기 객체에 대한 추적이 연속적으로 추적 가능한 추적장비 변경단계; 및
    상기 객체가 상기 추적영역 밖을 향하는 방향으로 이동하여 상기 추적영역 밖으로 이동 시 상기 추적장비가 탐지모드로 전환되는 전환단계를 포함하고,
    상기 추적장비 선택단계는,
    제1 추적장치와 제2 추적장비의 추적영역이 중복되는 상기 중복영역에 상기 객체의 진입여부를 확인하는 중복영역 진입단계;
    상기 중복영역에 진입한 상기 객체에 대해서, 해당 상기 제1 및 제2 추적장비의 성능값과 상기 객첵와 상기 제1 및 제2 추적장비 간의 거리값을 각각 측정하여 측정값을 산출하는 측정단계;
    상기 제1 및 제2 추적장비의 상기 측정값에 따른 가중치를 고려하여 상기 추적우선지수를 산출하는 연산단계; 및
    상기 추적우선지수를 비교하여 높은 값을 가지는 상기 추적우선지수의 상기 추적장비를 선택하여 상기 객체를 추적하는 추적우선지수 선택단계를 포함하며,
    상기 객체가 상기 중복영역 내에서 이동함에 따라, 상기 추적우선지수를 1초 간격으로 산출하여 상기 객체를 추적할 상기 추적장비를 선택하는 반복단계를 더 포함하고,
    상기 추적우선지수는 하기 식으로 산정되는 것을 특징으로 하는 빅데이터 기반 영상 감시 방법.
    Value = (((Erng - Tdis)/Erng)*(100*Eweight)+(Sacc * Sweight)
    (여기서, Erng: 모든 추적장비 내 최대 추적 사거리(m), Tdis: 추적장비와 객체 간의 거리, Eweight: 사거리 가중치(0.0~1.0), Sacc: 센서 추적 정확도(백분율), Sweight: 정확도 가중치(0.0~1.0), 사거리 가중치와 정확도 가중치의 합은 1이다.)
  2. 삭제
  3. 삭제
  4. 삭제
  5. 제1 항에 있어서,
    상기 추적장비는 감시카메라가 구비되어, 상기 추적영역으로 출입하는 상기 객체에 대한 영상정보를 생성하는 빅데이터 기반 영상 감시 방법.
  6. 제1 항에 있어서,
    상기 추적영역으로 출입 가능한 등록객체에 대한 정보를 저장하는 데이터베이스를 포함하는 제어부가 구비되어,
    상기 추적영역으로 진입한 상기 객체가 상기 등록객체인 경우, 실시간 상기 등록객체의 키, 보폭, 이동속도, 폭, 실시간 이동경로인 객체정보를 추출하여 상기 데이터베이스에 저장하여, 상기 등록객체의 등록정보를 업데이트하는 빅데이터 축적단계를 더 포함하는 빅데이터 기반 영상 감시 방법.
  7. 제6 항에 있어서,
    상기 객체가 미등록된 객체로 판단되는 경우, 상기 미등록 객체에 상기 객체를 식별하기 위한 식별표시를 부가하여 디스플레이부에 표시하는 객체표시단계를 더 포함하는 빅데이터 기반 영상 감시 방법.
KR1020220063921A 2022-05-25 2022-05-25 빅데이터 기반 영상 감시 방법 KR102464197B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220063921A KR102464197B1 (ko) 2022-05-25 2022-05-25 빅데이터 기반 영상 감시 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220063921A KR102464197B1 (ko) 2022-05-25 2022-05-25 빅데이터 기반 영상 감시 방법

Publications (1)

Publication Number Publication Date
KR102464197B1 true KR102464197B1 (ko) 2022-11-09

Family

ID=84040320

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220063921A KR102464197B1 (ko) 2022-05-25 2022-05-25 빅데이터 기반 영상 감시 방법

Country Status (1)

Country Link
KR (1) KR102464197B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110093659A (ko) * 2010-02-10 2011-08-18 캐논 가부시끼가이샤 화상인식장치 및 방법
KR20130068343A (ko) * 2011-12-15 2013-06-26 한국산업기술대학교산학협력단 지능적 다중 객체 추적 알고리즘 기반의 다중 ｐｔｚ 카메라 제어 시스템 및 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110093659A (ko) * 2010-02-10 2011-08-18 캐논 가부시끼가이샤 화상인식장치 및 방법
KR20130068343A (ko) * 2011-12-15 2013-06-26 한국산업기술대학교산학협력단 지능적 다중 객체 추적 알고리즘 기반의 다중 ｐｔｚ 카메라 제어 시스템 및 방법

Similar Documents

Publication Publication Date Title
CN106144861B (zh) 用于乘客运输控制的基于深度传感器的乘客感测
CN106144862B (zh) 用于乘客运输门控制的基于深度传感器的乘客感测
KR101788269B1 (ko) 이상 상황을 감지하는 장치 및 방법
CN106144796B (zh) 用于空乘客运输外壳确定的基于深度传感器的乘客感测
CN101714255B (zh) 异常行为探测装置
RU2670429C1 (ru) Системы и способы отслеживания движущихся объектов на видеоизображении
JP2018173914A (ja) 画像処理システム、撮像装置、学習モデル作成方法、情報処理装置
CN106144798A (zh) 用于乘客运输控制的传感器融合
CN106144795A (zh) 通过识别用户操作用于乘客运输控制和安全的系统和方法
CN106144816A (zh) 基于深度传感器的乘客检测
CN106144797A (zh) 用于乘客运输的通行列表产生
JPWO2007026744A1 (ja) 広域分散カメラ間の連結関係推定法および連結関係推定プログラム
CN106144801A (zh) 用于特殊乘客运输负载状况的基于深度传感器的感测
WO2008103206A1 (en) Surveillance systems and methods
JP2006146378A (ja) 複数カメラを用いた監視システム
KR20130097868A (ko) 카메라 기반 지능형 주차관제 방법 및 시스템
US7295106B1 (en) Systems and methods for classifying objects within a monitored zone using multiple surveillance devices
JP2015512042A (ja) 区域内の人の存在を監視する装置、方法及びシステム
KR102464196B1 (ko) 빅데이터 기반 영상 감시시스템
KR20200017594A (ko) 딥 러닝과 멀티 에이전트를 활용한 대규모 개체 식별 및 추적 방법
KR102519151B1 (ko) 입국장 내 우범 여행자 추적 시스템 및 방법
KR102476777B1 (ko) 인공지능 기반 경로 예측시스템
JP5111795B2 (ja) 監視装置
KR102464197B1 (ko) 빅데이터 기반 영상 감시 방법
KR102351476B1 (ko) 객체 충돌 예측을 위한 장치, 시스템 및 방법

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant