KR102015588B1 - 배회 경보 방법 및 장치 - Google Patents

배회 경보 방법 및 장치 Download PDF

Info

Publication number
KR102015588B1
KR102015588B1 KR1020150101112A KR20150101112A KR102015588B1 KR 102015588 B1 KR102015588 B1 KR 102015588B1 KR 1020150101112 A KR1020150101112 A KR 1020150101112A KR 20150101112 A KR20150101112 A KR 20150101112A KR 102015588 B1 KR102015588 B1 KR 102015588B1
Authority
KR
South Korea
Prior art keywords
information
roaming
image
frames
database
Prior art date
Application number
KR1020150101112A
Other languages
English (en)
Other versions
KR20170009300A (ko
Inventor
이활석
윤석민
박주형
Original Assignee
한화테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화테크윈 주식회사 filed Critical 한화테크윈 주식회사
Priority to KR1020150101112A priority Critical patent/KR102015588B1/ko
Priority to US15/130,218 priority patent/US9959460B2/en
Priority to CN201610550220.0A priority patent/CN106355137B/zh
Priority to CN202210026580.6A priority patent/CN114332737A/zh
Publication of KR20170009300A publication Critical patent/KR20170009300A/ko
Application granted granted Critical
Publication of KR102015588B1 publication Critical patent/KR102015588B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training
    • G06V40/25—Recognition of walking or running movements, e.g. gait recognition
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19606—Discriminating between target movement or movement in an area of interest and other non-signicative movements, e.g. target movements induced by camera shake or movements of pets, falling leaves, rotating fan
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19608—Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • G08B13/19615—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion wherein said pattern is defined by the user
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665—Details related to the storage of video surveillance data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/44—Event detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

본 발명의 재배회 검출 장치 및 방법을 개시한다.
본 발명의 일 실시예에 따른 재배회 검출 방법은, 입력 이미지에서 객체 및 상기 객체의 위치에 관한 정보를 검출하는 객체 검출 단계; 상기 객체의 위치에 관한 정보에 기초하여 배회 여부를 판단하는 배회 판단 단계; 상기 객체가 배회하는 것으로 판단되면, 데이터베이스에 기 저장된 객체 중 상기 입력 이미지에서 검출된 객체와 일치하는 객체가 있는지 여부를 판단하여 상기 객체의 재배회 여부를 판단하는 재배회 판단 단계; 상기 객체의 재배회 여부에 따라 상기 객체의 배회 정보를 다르게 제공하는 정보 제공 단계;를 포함한다.

Description

배회 경보 방법 및 장치{Advanced wander alarm system and method thereof}
본 발명의 실시예들은 배회하는 객체를 검출하여 배회 횟수에 따라 정보를 다르게 제공하는 시스템 및 방법에 관한 것이다.
오늘날 감시카메라가 도처에 설치되어 있기 때문에, 많은 범죄자들은 범행을 하기 전 범죄의 기획을 위하여 범행장소를 배회한다. 따라서 배회하는 사람을 수상한 사람으로 간주하여 주의 깊게 관찰 할 필요가 있다. 그러나 현재 설치되어있는 감시장비와 인력으로는 모든 배회하는 사람의 관찰이 어려운 것이 실정이다. 따라서 특정 지역에 일정 시간 이상 머무르거나 또는 특정 지역을 다시 배회하는 사람을 검출하여 사용자에게 알려주는 경보 시스템의 필요성이 부각되고 있다.
한국공개특허 제 2001-0016315호
본 발명의 실시예들은 배회하는 객체를 검출하고, 객체의 기준특징을 추출하여 배회 횟수에 따라 화면에 표시되는 정보를 다르게 제공하는 시스템 및 방법에 관한 것이다.
본 발명의 일 실시예에 따른 재배회 검출 방법은, 입력 이미지에서 객체 및 상기 객체의 위치에 관한 정보를 검출하는 객체 검출 단계; 상기 객체의 위치에 관한 정보에 기초하여 배회 여부를 판단하는 배회 판단 단계; 상기 객체가 배회하는 것으로 판단되면, 데이터베이스에 기 저장된 객체 중 상기 입력 이미지에서 검출된 객체와 일치하는 객체가 있는지 여부를 판단하여 상기 객체의 재배회 여부를 판단하는 재배회 판단 단계; 상기 객체의 재배회 여부에 따라 상기 객체의 배회 정보를 다르게 제공하는 정보 제공 단계;를 포함한다.
상기 입력 이미지는 복수의 프레임(frame)을 포함하는 동영상이고, 상기 객체 검출 단계는, 상기 복수의 프레임마다 상기 객체 및 상기 객체의 위치에 관한 정보를 검출하고, 상기 배회 판단 단계는 상기 객체 검출 단계에서 검출된 상기 객체가 기 설정된 배회 조건을 만족하는 경우 상기 객체를 배회하는 것이라고 판단하는 것을 특징으로 할 수 있다.
상기 배회 조건은 상기 객체가 연속적으로 검출된 프레임의 개수가 기 설정된 임계수 이상인 객체를 배회하는 것으로 판단하는 것을 특징으로 할 수 있다.
또한 상기 배회 조건은 상기 객체의 위치에 관한 정보를 이용하여 형성한 상기 객체의 궤적이 적어도 하나의 폐곡선을 형성하는 경우 상기 객체를 배회하는 것으로 판단하는 것을 특징으로 할 수 있다.
상기 객체 검출 단계는 상기 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 상기 객체의 기준특징을 더 검출할 수 있고, 상기 재배회 판단 단계는 상기 검출된 기준특징을 상기 데이터베이스에서 검색하여, 상기 데이터베이스 상에 일치되는 기준특징을 가진 객체가 있는지 여부를 판단하고, 상기 기준특징이 일치하는 객체가 있는 경우 상기 객체를 재배회로 판단하는 단계; 상기 객체가 재배회로 판단된 경우, 복수의 프레임 각각에서 검출된 객체의 이미지를 상기 데이터베이스에 저장하고, 상기 객체가 재배회가 아닌 것으로 판단된 경우, 상기 객체의 기준특징 및 상기 복수의 프레임 각각에서 검출된 객체의 이미지를 상기 데이터베이스에 저장하는 단계;를 포함할 수 있다.
상기 객체 검출 단계는, 상기 복수의 프레임마다 상기 객체를 포함하는 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 검출하고, 상기 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 상기 박스 이미지의 기준특징을 더 검출하고, 상기 저장하는 단계는, 상기 기준특징이 일치하는 객체가 없는 경우 상기 박스 이미지의 기준특징 및 상기 복수의 프레임 각각에서 검출된 모든 박스 이미지를 저장하는 것을 특징으로 할 수 있다.
상기 기준특징은 상기 객체의 옷차림, 얼굴 또는 걸음걸이 중 어느 하나 또는 이들 중 둘 이상의 조합일 수 있다.
상기 정보 제공 단계는 상기 객체가 배회하는 것으로 판단되면 상기 객체의 위치에 관한 정보를 참조하여, 상기 객체 검출 단계에서 검출된 상기 객체의 모든 이미지를 한 화면에 배치하여 배회에 관한 정보를 제공하는 제1 정보제공 단계; 상기 재배회 판단 단계에서 상기 객체가 재배회 하는 것으로 판단된 경우 상기 데이터베이스 상에 저장된 상기 객체의 이미지 중 상기 제1 정보제공 단계에서 제공된 객체 이미지를 제외한 나머지 객체 이미지를 상기 나머지 객체 이미지의 위치에 관한 정보를 참조하여, 상기 제1 정보제공 단계에서 제공된 정보와 함께 상기 한 화면에 배치하여 재배회에 관한 정보를 제공하는 제2 정보제공 단계;를 포함할 수 있다.
상기 객체 검출 단계는, 상기 복수의 프레임마다 상기 객체를 포함하는 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 검출하고, 상기 데이터베이스는, 복수의 객체 각각에 대한 복수의 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 기 저장하고, 상기 제1 정보제공 단계는 상기 박스 이미지의 위치에 관한 정보를 참조하여, 상기 객체 검출 단계에서 검출된 상기 모든 박스 이미지를 한 화면에 배치하여 배회에 관한 정보를 제공하고, 상기 제2 정보제공 단계는 상기 데이터베이스 상에 저장된 상기 검출된 객체와 동일한 객체의 박스 이미지 중 상기 제1 정보제공 단계에서 제공된 박스 이미지를 제외한 나머지 박스 이미지를 상기 나머지 이미지의 위치에 관한 정보를 참조하여, 상기 제1 정보제공 단계에서 제공된 정보와 함께 상기 한 화면에 배치하여 재배회에 관한 정보를 제공하는 제2 정보제공 단계;를 포함할 수 있다.
상기 정보 제공 단계는 상기 재배회 판단 단계에서 상기 객체가 재배회 하는 것으로 판단된 경우 상기 데이터베이스에 저장되어있는 상기 객체의 모든 이미지를 상기 데이터베이스에 저장된 상기 객체의 이미지 및 위치에 관한 정보를 참조하여 시간의 흐름에 따라 하나씩 순차적으로 화면에 표시하여 배회에 관한 정보를 제공하는 단계;를 포함할 수 있다.
본 발명의 일 실시예에 따른 재배회 검출 장치는, 입력 이미지에서 객체 및 상기 객체의 위치에 관한 정보를 검출하는 객체 검출부; 상기 객체의 위치에 관한 정보에 기초하여 배회 여부를 판단하는 배회 판단부; 상기 객체가 배회하는 것으로 판단되면, 데이터베이스에 기 저장된 객체 중 상기 입력 이미지에서 검출된 객체와 일치하는 객체가 있는지 여부를 판단하여 상기 객체의 재배회 여부를 판단하는 재배회 판단부; 상기 객체의 재배회 여부에 따라 상기 객체의 배회 정보를 다르게 제공하는 정보 제공부;를 포함한다.
상기 입력 이미지는 복수의 프레임(frame)을 포함하는 동영상이고, 상기 객체 검출부는, 상기 복수의 프레임마다 상기 객체 및 상기 객체의 위치에 관한 정보를 검출하고, 상기 배회 판단부는; 상기 객체 검출부에서 검출된 상기 객체가 기 설정된 배회 조건을 만족하는 경우 상기 객체를 배회하는 것이라고 판단하는 것을 특징으로 할 수 있다.
상기 배회 조건은 상기 객체가 연속적으로 검출된 프레임의 개수가 기 설정된 임계수 이상인 객체를 배회하는 것으로 판단하는 것을 특징으로 할 수 있다.
또한 상기 배회 조건은 상기 객체의 위치에 관한 정보를 이용하여 형성한 상기 객체의 궤적이 적어도 하나의 폐곡선을 형성하는 경우 상기 객체를 배회하는 것으로 판단하는 것을 특징으로 할 수 있다.
상기 객체 검출부는 상기 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 상기 객체의 기준특징을 더 검출하고, 상기 재배회 판단부는 상기 검출된 기준특징을 상기 데이터베이스에서 검색하여, 상기 데이터베이스 상에 일치되는 기준특징을 가진 객체가 있는지 여부를 판단하는 제1 판단부; 상기 기준특징이 일치하는 객체가 있는 경우 상기 객체를 재배회로 판단하는 제2 판단부; 상기 객체가 재배회로 판단된 경우, 복수의 프레임 각각에서 검출된 객체의 이미지를 상기 데이터베이스에 저장하고, 상기 객체가 재배회가 아닌 것으로 판단된 경우, 상기 객체의 기준특징 및 상기 복수의 프레임 각각에서 검출된 객체의 이미지를 상기 데이터베이스에 저장하는 데이터 저장부;를 포함할 수 있다.
상기 객체 검출부는 상기 복수의 프레임마다 상기 객체를 포함하는 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 검출하고, 상기 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 상기 박스 이미지의 기준특징을 더 검출하고, 상기 데이터 저장부는 상기 기준특징이 일치하는 객체가 없는 경우 상기 박스 이미지의 기준특징 및 상기 복수의 프레임 각각에서 검출된 모든 박스 이미지를 저장하는 것을 특징으로 할 수 있다.
상기 기준특징은 상기 객체의 옷차림, 얼굴 또는 걸음걸이 중 어느 하나 또는 이들 중 둘 이상의 조합인 것을 특징으로 할 수 있다.
상기 객체 검출부는, 상기 복수의 프레임마다 상기 객체 및 상기 객체의 위치에 관한 정보를 검출하고, 상기 정보 제공부는 상기 객체가 배회하는 것으로 판단되면 상기 객체의 위치에 관한 정보를 참조하여, 상기 객체 검출부에서 검출된 상기 객체의 모든 이미지를 한 화면에 배치하여 배회에 관한 정보를 제공하는 제1 정보 제공부; 상기 재배회 판단부에서 상기 객체가 재배회 하는 것으로 판단된 경우 상기 데이터베이스 상에 저장된 상기 객체의 이미지 중 상기 제1 정보 제공부에서 제공된 객체 이미지를 제외한 나머지 객체 이미지를 상기 나머지 객체 이미지의 위치에 관한 정보를 참조하여, 상기 제1 정보 제공부에서 제공된 정보와 함께 상기 한 화면에 배치하여 재배회에 관한 정보를 제공하는 제2 정보 제공부;를 포함하는 것을 특징으로 할 수 있다.
상기 객체 검출부는, 상기 복수의 프레임마다 상기 객체를 포함하는 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 검출하고, 상기 데이터베이스는, 복수의 객체 각각에 대한 복수의 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 기 저장하고, 상기 제1 정보 제공부는, 상기 박스 이미지의 위치에 관한 정보를 참조하여, 상기 객체 검출부에서 검출된 상기 모든 박스 이미지를 한 화면에 배치하여 배회에 관한 정보를 제공하고, 상기 제2 정보 제공부는, 상기 데이터베이스 상에 저장된 상기 검출된 객체와 동일한 객체의 박스 이미지 중 상기 제1 정보 제공부에서 제공된 박스 이미지를 제외한 나머지 박스 이미지를 상기 나머지 이미지의 위치에 관한 정보를 참조하여, 상기 제1 정보 제공부에서 제공된 정보와 함께 상기 한 화면에 배치하여 재배회에 관한 정보를 제공하는 제2 정보 제공부;를 포함하는 것을 특징할 수 있다.
전술한 것 외의 다른 측면, 특징, 이점이 이하의 도면, 특허청구범위 및 발명의 상세한 설명으로부터 명확해질 것이다.
본 발명의 실시예들에 따르면 배회하는 객체를 검출하고, 객체의 기준특징을 추출하여 배회 횟수에 따라 화면에 표시되는 정보를 다르게 제공하는 방법 및 장치를 구현할 수 있다.
도 1은 본 발명의 일 실시예에 따른 재배회 검출 시스템을 도시한 것이다.
도 2 내지 도 3은 객체 검출부가 입력 이미지에서 객체 및 객체의 위치에 관한 정보를 검출하는 과정을 설명하기 위한 도면이다.
도 4 내지 도 5는 배회 판단부에서 판단하는 배회 조건의 예시이다.
도 6은 재배회 판단부의 구성을 도시하는 도면이다.
도 7은 검출부에서 검출된 객체의 이미지를 데이터베이스에 저장하는 과정을 도시한 도면이다.
도 8 내지 도 9는 정보 제공부가 배회에 관한 정보를 제공하는 화면의 예시이다.
도 10는 본 발명의 다른 실시예에 따른 정보 제공부가 배회에 관한 정보를 제공하는 화면의 예시이다.
도 11은 본 발명의 일 실시예에 따른 재배회 검출 방법을 설명하기 위한 순서도이다.
도 12는 도 11의 단계(S20)를 상세하게 설명하기 위한 순서도이다.
도 13는 도 11의 단계(S30)를 상세하게 설명하기 위한 순서도이다.
도 14는 도 11의 단계(S40)를 상세하게 설명하기 위한 순서도이다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
이하의 실시예에서, 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
이하의 실시예에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 이하의 실시예에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명의 실시예들은 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들은 특정 기능들을 실행하는 다양한 개수의 하드웨어 또는/및 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 발명의 실시예들은 하나 이상의 마이크로프로세서들의 제어 또는 다른 제어 장치들에 의해서 다양한 기능들을 실행할 수 있는, 메모리, 프로세싱, 로직(logic), 룩업 테이블(look-up table) 등과 같은 직접 회로 구성들을 채용할 수 있다. 본 발명의 실시예의 구성 요소들이 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 잇는 것과 유사하게, 본 발명의 실시예는 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 발명의 실시예들은 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. 매커니즘, 요소, 수단, 구성과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다. 상기 용어는 프로세서 등과 연계하여 소프트웨어의 일련의 처리들(routines)의 의미를 포함할 수 있다.
재배회(再徘徊)란 특정 영역에서 적어도 한번 이상 배회한 이력이 있는 객체가 다시 그 특정 영역에서 배회하는 것을 의미한다.
종래 배회 알람은 단순히 특정 객체가 FOV(Field of view) 내에서 머무르는 시간을 측정하여 배회하는지 여부를 판단했다. 즉 어떤 객체가 FOV내에서 임계 시간 이상 머무르는 경우 배회하는 것으로 판단했다. 그러나 이러한 배회 알람은 이전에 배회 이력이 있는 객체가 다시 배회하는 경우 재배회인지 여부를 검출해낼 수 없을 뿐만 아니라, 재배회 하는 것을 또 다른 객체의 배회로 인식하여 정확한 감시, 관찰이 어려웠다.
그러나 본 발명의 일 실시예에 따른 재배회 검출 시스템은 특정 객체가 배회하는지 여부와 아울러 재배회인지 여부를 검출할 수 있다. 또한 재배회에 해당하는 경우 이전 배회에 관한 정보까지 사용자에게 동시에 제공함으로써 보다 효율적인 감시, 관찰이 가능하다.
도 1은 본 발명의 일 실시예에 따른 재배회 검출 시스템을 도시한 것이다.
도 1에 도시된 재배회 검출 시스템은 재배회 검출 장치(1) 및 영상 획득 장치(2)를 포함한다.
영상 획득 장치(2)는 주변 환경 또는 장면(공간)을 촬영하고, 장면 내에 존재하는 다양한 객체(예를 들어, 바닥, 벽, 장애물 등의 정적 물체나 사람, 동물 등의 동적 물체)를 촬영한다. 영상 획득 장치(2)는 영상 센서를 포함하는 카메라 등일 수 있다. 영상 획득 장치(2)는 재배회 검출 장치(1)와 유선 또는 무선으로 연결될 수 있다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 재배회 검출 장치(1)는 객체 검출부(10), 배회 판단부(20), 재배회 판단부(30) 및 정보 제공부(40)를 포함할 수 있다. 객체 검출부(10)는 입력 이미지에서 객체 및 객체의 위치에 관한 정보를 검출한다. 배회 판단부(20)는 검출된 객체의 위치에 관한 정보에 기초하여 검출된 객체의 배회 여부를 판단한다. 재배회 판단부(30)는 검출된 객체가 배회하는 것으로 판단되면, 데이터베이스에 기 저장된 객체 중 검출된 객체와 일치하는 객체가 있는지 여부를 판단함으로써 검출된 객체의 재배회 여부를 판단한다. 마지막으로 정보 제공부(40)는 검출된 객체의 재배회 여부에 따라 검출된 객체의 배회 정보를 다르게 제공한다.
재배회 검출 시스템은 데이터베이스를 포함한다. 데이터베이스는 재배회 검출장치(1)에 구비되거나, 재배회 검출장치(1)와 통신 가능하도록 구비된다.
객체 검출부(10)는 입력 이미지에서 객체 및 객체의 위치에 관한 정보를 검출한다.
도 2와 도 3은 객체 검출부(10)가 입력 이미지에서 객체 및 객체의 위치에 관한 정보를 검출하는 과정을 설명하기 위한 도면이다.
도 2를 참조하면 객체 검출부(10)는 입력 이미지(11)에서 객체(12)를 검출한다.
입력 이미지(11)는 복수의 프레임(frame)을 포함하는 동영상 일 수 있으며, 도 2에 도시된 것은 하나의 프레임이다.
객체 검출부(10)는 입력 이미지(11)에서 움직임 영역을 탐지하는 방식으로 객체를 검출할 수 있다. 움직임 영역의 탐지 방법은 특별히 한정되지 않으며, GMM(Gaussian Mixture Model) 이나 코드북(Codebook) 모델 등 다양한 기법이 활용 될 수 있다.
도 3을 참조하면 객체 검출부(10)는 입력 이미지(11)에서 객체의 위치에 관한 정보(13)를 검출한다. 객체(12)의 위치라고 볼 수 있는 점은 객체(12)의 중앙이 될 수 있고, 사용자에 의해 설정된 객체 내의 임의의 점일 수 있다. 또한 객체의 위치 산정의 기준이 되는 원점도 사용자에 의해 설정된 임의의 점일 수 있다.
객체 검출부(10)는, 복수의 프레임마다 객체 및 객체의 위치에 관한 정보(13)를 검출할 수 있다.
다시 도 1로 돌아가면, 배회 판단부(20)는 객체의 위치에 관한 정보(13)에 기초하여 배회 여부를 판단한다.
상세히, 배회 판단부(20)는 객체 검출부(10)에서 객체(12)가 기 설정된 배회 조건을 만족하는 경우 해당 객체를 배회하는 것이라고 판단한다.
배회 조건은 사용자에 의하여 설정될 수 있다. 예를 들면 객체(12)가 연속적으로 검출된 프레임의 개수가 기 설정된 임계수 이상일 경우 객체(12)가 배회 하는 것으로 판단할 수 있다. 또한 객체 검출부(10)에서 검출한 객체의 위치에 관한 정보(13)를 이용하여 객체(12)의 이동 궤적을 형성하고, 그 궤적이 적어도 하나의 폐곡선을 형성하는 경우 객체(12)를 배회 하는 것으로 판단할 수도 있다.
도 4와 도 5는 배회 판단부(20)에서 판단하는 배회 조건의 예시이다.
도 4에서 객체(12)가 입력 이미지(11)의 좌-상단에서 우-하단의 방향(21)으로 움직이는 것으로 가정했을 때, 총 6개의 프레임에서 객체(12)가 연속적으로 검출된 것으로 볼 수 있다. 가령 배회 판단의 기준이 되는 임계수를 5개라고 하면, 도 4의 경우 총 6프레임에서 객체(12)가 검출되었으므로 배회 판단부(20)는 객체(12)가 배회하는 것이라고 판단할 수 있다.
도 5에서 객체(12)가 순서대로 입력 이미지(11)의 좌-상단, 중앙-하단, 중앙-상단, 좌-하단의 방향으로 움직이는 것으로 가정했을 때, 객체의 이동 궤적(22)은 하나의 폐곡선(23)을 형성한다. 즉 객체의 이동 궤적(22)이 적어도 하나의 폐곡선(23)을 형성하므로, 객체(12)가 배회하는 것이라고 판단할 수 있다. 한편 도 4에서 상술한 배회 조건(임계수가 5라고 가정한 경우)에 의하여도 객체(12)가 배회하는 것이라고 판단되는 것은 자명하다.
배회 판단부(20)에서 객체(12)가 배회 하는 것이라고 판단되면, 객체 검출부(10)는 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 객체(12)의 기준특징을 더 검출한다. 기준특징은 후술하는 재배회 판단부(30)에서 객체(12)의 재배회 여부를 판단하는데 사용된다.
다시 도 1로 돌아가면, 재배회 판단부(30)는 배회 판단부(20)에서 객체(12)가 배회하는 것으로 판단되면, 데이터베이스에 기 저장된 객체 중 입력 이미지(11)에서 검출된 객체(12)와 일치하는 객체가 있는지 여부를 판단하여 객체(12)의 재배회 여부를 판단한다.
도 6을 참조하면, 재배회 판단부(30)는 제1 판단부(31), 제2 판단부(32) 및 데이터 저장부(33)를 포함한다. 제1 판단부(31)는 객체 검출부(10)에서 검출된 기준특징을 데이터베이스에서 검색하여, 데이터베이스 상에 일치되는 기준특징을 가진 객체가 있는지 여부를 판단한다. 제2 판단부(32)는 기준특징이 일치하는 객체가 데이터베이스에 있는 경우 객체 검출부(10)에서 검출된 객체(12)를 재배회로 판단한다. 데이터 저장부(33)는 검출부(10)에서 검출된 객체(12)가 재배회로 판단된 경우 복수의 프레임 각각에서 검출된 객체(12)의 이미지를 데이터베이스에 저장하고, 검출부(10)에서 검출된 객체(12)가 재배회가 아닌 것으로 판단된 경우, 객체(12)의 기준특징 및 복수의 프레임 각각에서 검출된 객체(12)의 이미지를 데이터베이스에 저장한다. 이때 기준특징은 객체(12)의 옷차림, 얼굴 또는 걸음걸이 중 어느 하나 또는 이들 중 둘 이상의 조합일 수 있다.
도 7은 검출부(10)에서 검출된 객체(12)가 재배회가 아닌 것으로 판단되어, 객체(12)의 기준특징 및 복수의 프레임 각각에서 검출된 객체(12)의 이미지를 데이터베이스에 저장하는 과정을 도시한 도면이다.
상술한 바와 같이 배회 판단부(20)에서 객체(12)가 배회 하는 것이라고 판단되면, 객체 검출부(10)는 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 객체(12)의 기준특징을 더 검출한다.
데이터 저장부(33)는 객체 검출부(10)가 복수의 프레임 중 어느 하나의 프레임(12)으로부터 검출한 객체의 옷차림에 관한 특징(14)을 데이터베이스(34)에 저장(35)한다. 이와 유사하게 데이터 저장부(33)는 객체 검출부(10)가 복수의 프레임 중 어느 하나의 프레임(12)으로부터 검출한 객체의 얼굴에 관한 특징(15)을 데이터베이스(34)에 저장(35)할 수 있다. 옷차림 또는 얼굴의 추출은 방법은 특별히 한정되지 않으며, 다양한 기법이 활용 될 수 있다.
한편 데이터 저장부(33)는 객체 검출부(10)가 복수의 프레임(16)으로부터 검출한 객체의 걸음걸이에 관한 특징(17)도 데이터베이스(34)에 저장(35)할 수 있다.
또한 상술한 기준특징과 더불어 복수의 프레임 각각에서 검출된 객체(12)의 이미지(또는 객체의 형태를 나타내는 패턴/박스 이미지)를 데이터베이스(34)에 저장(35)할 수 있다.
데이터베이스(34)에 저장된 객체의 옷차림에 관한 특징(14), 얼굴에 관한 특징(15), 걸음걸이에 관한 특징(17) 등의 기준특징 및 객체(12)의 이미지는 재배회 판단 과정에서 일치되는 기준특징을 가진 객체가 있는지 여부를 판단하는데 사용된다.
본 발명의 다른 실시예에 따른 객체 검출부(10)는 복수의 프레임마다 객체(12)를 포함하는 박스 이미지 및 박스 이미지의 위치에 관한 정보를 검출한다. 즉 객체 검출부(10)에서 객체(12)를 박스 이미지의 형식으로 검출할 수 있다. 객체 검출부(10)는 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 박스 이미지의 기준특징을 더 검출한다. 데이터 저장부(33)는 기준특징이 일치하는 객체가 없는 경우 박스 이미지의 기준특징 및 복수의 프레임 각각에서 검출된 모든 박스 이미지를 저장한다. 한편 기준특징이 일치하는 객체가 있는 경우 데이터 저장부(33)는 객체(12)를 재배회로 판단하고, 프레임 각각에서 검출된 객체(12)의 박스 이미지를 데이터베이스(34)에 저장한다.
다시 도 1로 돌아가면, 정보 제공부(40)는 객체(12)의 재배회 여부에 따라 객체(12)의 배회 정보를 다르게 제공한다. 즉 배회 이력이 있는 객체(12)가 다시 배회하는 경우, 배회 이력이 없는 객체(12)가 배회 하는 경우와 달리 이전 배회에 관한 정보를 더 제공할 수 있다. 즉 당회 배회에 관한 정보와 이전 배회에 관한 정보를 동시에 사용자에게 제공할 수 있다. 이 때 사용자는 당회 배회에 관한 정보와 이전 배회에 관한 정보를 비교하여 보다 정확한 상환 판단이 가능하다.
상세히, 정보 제공부(40)는 당회 배회에 관한 정보를 제공하는 제1 정보제공부와 이전 배회에 관한 정보를 제공하는 제2 정보 제공부를 포함한다. 제1 정보 제공부는 객체(12)가 배회하는 것으로 판단되면 객체의 위치에 관한 정보(13)를 참조하여 객체 검출부(10)에서 검출된 객체(12)의 모든 이미지를 한 화면에 배치하여 배회에 관한 정보를 제공한다.
제2 정보 제공부는 데이터베이스(34) 상에 저장된 객체(12)의 이미지 중 제1 정보 제공부에서 제공된 객체 이미지를 제외한 나머지 객체 이미지를 나머지 객체 이미지의 위치에 관한 정보를 참조하여 제공한다. 앞선 재배회 판단부(30)에서 검출된 객체(12)의 모든 이미지를 데이터베이스(34)에 저장하기 때문에, 제1 정보 제공부에서 제공된 객체의 이미지를 제외해야 정보의 중복 제공을 방지할 수 있다. 정보 제공부(40)는 제1 정보 제공부와 제2 정보 제공부에 의해 제공된 정보를 한 화면에 배치하여 재배회에 관한 정보를 제공한다. 이때 각 제공부에서 제공된 정보와 더불어 배회 시간과 같은 부가정보를 더 제공할 수 있다.
도 8 및 도 9는 정보 제공부(40)가 배회에 관한 정보를 제공하는 화면의 예시이다.
도 8은 제1 정보 제공부가 당회 배회에 관한 정보를 제공하는 예시이다. 제1 정보 제공부는 배회하는 것으로 판단된 객체의 위치에 관한 정보(13)를 참조하여 객체 검출부(10)에서 검출된 객체의 모든 이미지(41)(당회 배회에 관한 정보)를 한 화면에 배치하여 배회에 관한 정보를 제공한다.
도 9는 제2 정보 제공부가 데이터베이스(34)에 저장된 이전 배회에 관한 정보를 제공하는 예시이다. 제2 정보 제공부는 데이터베이스(34) 상에 저장된 객체의 이미지 중 제1 정보 제공부에서 제공된 객체 이미지를 제외한 나머지 객체 이미지(42)를 나머지 객체 이미지의 위치에 관한 정보를 참조하여 제공한다.
한편 정보 제공부(40)는 각 제공부에서 제공된 정보와 더불어 배회 시간과 같은 부가정보(43)를 더 제공할 수 있다.
본 발명의 다른 실시예에 따른 제1 정보 제공부(40)는 객체(12)를 포함하는 박스 이미지의 위치에 관한 정보를 참조하여, 객체 검출부(10)에서 검출된 모든 박스 이미지를 한 화면에 배치하여 배회에 관한 정보를 제공한다.
제2 정보 제공부는 데이터베이스(34) 상에 저장된 검출된 객체(12)와 동일한 객체의 박스 이미지 중, 제1 정보 제공부에서 제공된 박스 이미지를 제외한 나머지 박스 이미지를 상기 나머지 박스 이미지의 위치에 관한 정보를 참조하여 제공한다. 이 때 제2 정보 제공부는 제1 정보 제공부에서 제공된 정보와 함께 정보를 한 화면에 배치하여 재배회에 관한 정보를 제공할 수 있다.
본 발명의 다른 실시예에 따른 정보 제공부(40)는 객체(12)가 재배회 하는 것으로 판단된 경우 데이터베이스(34)에 저장되어있는 객체(12)의 모든 이미지를 데이터베이스(34)에 저장된 객체의 이미지 및 위치에 관한 정보를 참조하여 시간의 흐름에 따라 하나씩 순차적으로 화면에 표시하여 배회에 관한 정보를 제공할 수 있다.
도 10는 본 발명의 다른 실시예에 따른 정보 제공부(40)가 배회에 관한 정보를 제공하는 화면의 예시이다. 정보 제공부(40)는 도 10의 (a), (b)의 화면을 연속 표시하고, 그 후속 프레임을 연속 표시하는 방식으로 데이터베이스(34)에 저장된 객체의 이미지를 이미지의 위치에 관한 정보를 참조하여 시간의 흐름에 따라 하나씩 순차적으로 화면에 표시할 수 있다. 도 10의 (a)는 특정 프레임의 화면 표시 예시이고, 도 10의 (b)는 특정 프레임의 한 프레임 이후 프레임의 화면 표시 예시이다.
한편 정보 제공부(40)는 상술한 바와 같이 객체(12)의 이미지와 더불어 배회 시간과 같은 부가정보를 더 제공할 수도 있다.
도 11에 도시된 재배회 검출 방법은 전술한 도 1의 재배회 검출 장치(1)에 의해 수행될 수 있다. 이하에서는 도 1 내지 도 10에서 설명한 내용과 중복하는 내용의 상세한 설명은 생략하겠다.
객체 검출부(10)는 입력 이미지(11)에서 객체(12) 및 객체의 위치에 관한 정보(13)를 검출한다.(S10) 객체(12)의 검출은 여러가지 방법에 의하여 여러가지 형태로 이루어 질 수 있다. 예를 들어 객체(12)의 검출은 움직임 검출 방법에 의하여 박스 이미지 형태로 이루어질 수 있다. 검출된 객체(12)는 후술하는 배회판단 및 재배회 판단의 대상이 된다. 한편 검출된 객체의 위치에 관한 정보(13)는 후술하는 객체(12)의 배회 여부를 판단하는 과정 및 사용자에게 배회에 대한 정보를 제공하는 과정에서 사용된다.
배회 판단부(20)는 객체의 위치에 관한 정보(13)에 기초하여 객체(12)의 배회 여부를 판단한다.(S20) 상세히, 객체의 위치에 관한 정보(13)에 따라 객체(12)가 움직이는 궤적을 생성했을 때 그 궤적이 적어도 하나의 폐곡선을 형성하면 그 객체(12)가 배회하는 것으로 판단한다. 또한 객체(12)가 연속적으로 검출된 프레임의 개수가 기 설정된 임계수 이상일 경우 객체(12)가 배회 하는 것으로 판단할 수 있다.
배회 판단부(20)에서 객체(12)가 배회 하는 것이라고 판단되면, 객체 검출부(10)는 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 객체(12)의 기준특징을 더 검출한다. 기준특징은 후술하는 재배회 판단부(30)에서 객체(12)의 재배회 여부를 판단하는데 사용된다.
재배회 판단부(30)는 배회 판단부(20)에서 객체(12)가 배회하는 것으로 판단되면, 데이터베이스(34)에 기 저장된 객체 중 검출된 객체(12)와 일치하는 객체가 있는지 여부를 판단하여 객체(12)의 재배회 여부를 판단한다.(S30) 이 때, 기준특징이 일치하는 객체가 있는지 여부는 기준특징을 데이터베이스(34)에서 검색하여 일치하는 객체가 있는지 여부로 판단할 수 있다. 한편 기준특징은 옷차림, 얼굴 또는 걸음걸이가 될 수 있다.
마지막으로 정보 제공부(40)는 객체(12)의 재배회 여부에 따라 객체(12)의 배회 정보를 다르게 제공한다.(S40) 보다 구체적으로, 재배회인 경우 당회 배회에 관한 모든 이미지와 이전 배회에 관한 모든 이미지를 한 화면에 표시하여 양자를 비교해볼 수 있도록 표시할 수 있다. 또한 시간에 대한 정보 등을 부수적으로 제공하여 보다 효율적인 관리, 감시가 될 수 있도록 할 수 있다.
도 12는 도 11의 단계(S20)를 상세하게 설명하기 위한 순서도이다. 배회 판단부(20)는 객체(12)가 기 설정된 배회 조건을 만족하는 경우 해당 객체(12)를 배회하는 것이라고 판단한다. 상세히, 배회 판단부(20)는 객체(12)가 연속적으로 검출된 프레임의 개수가 기 설정된 임계수 이상일 경우(S21) 또는 객체(12)의 이동 궤적이 적어도 하나의 폐곡선을 형성하는 경우(S22) 객체(12)를 배회 하는 것으로 판단(S23)할 수 있다. 한편 상술한 배회 조건을 모두 만족하지 않는 객체(12)는 배회하는 것이 아니라고 판단(S23)할 수 있다. 한편 배회 판단부(20)에서 객체(12)가 배회 하는 것이라고 판단되면, 객체 검출부(10)는 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 객체(12)의 기준특징을 더 검출한다.
도 13는 도 11의 단계(S30)를 상세하게 설명하기 위한 순서도이다. 재배회 판단부(30)는 배회 판단부(20)에서 객체(12)가 배회하는 것으로 판단되면, 데이터베이스(34)에 기 저장된 객체 중 입력 이미지(11)에서 검출된 객체(12)와 일치하는 객체가 있는지 여부를 판단하여 객체(12)의 재배회 여부를 판단한다.
상세히, 재배회 판단부(30)는 객체 검출부(10)에서 검출된 기준특징을 데이터베이스(34)에서 검색하여, 데이터베이스(34) 상에 일치되는 기준특징을 가진 객체가 있는지 여부를 판단한다.(S31) 재배회 판단부(30)는 데이터베이스(34) 상에 일치되는 기준특징을 가진 객체가 있는 경우 재배회로 판단(S32)한다. 한편 데이터베이스(34) 상에 일치되는 기준특징을 가진 객체가 없는 경우 데이터베이스(34)에 객체(12)의 기준 특징을 저장한다.(S33). 마지막으로 재배회 판단부(30)는 복수의 프레임 각각에서 검출된 객체(12)의 이미지를 데이터베이스(34)에 저장한다.(S34)
객체(12)가 재배회로 판단된 경우에는 데이터베이스(34)에 기 형성된 객체(12)에 관한 정보에 복수의 프레임 각각에서 검출된 객체(12)의 이미지를 부가하여 데이터베이스(34)에 저장한다. 한편 객체(12)가 재배회가 아닌 경우에는 객체(12)에 관한 기준특징과 더불어 복수의 프레임 각각에서 검출된 객체(12)의 이미지를 데이터베이스(34)에 새로이 저장한다.
도 14는 도 11의 단계(S40)를 상세하게 설명하기 위한 순서도이다. 정보 제공부(40)는 객체(12)의 재배회 여부에 따라 객체(12)의 배회 정보를 다르게 제공한다. 즉 배회 이력이 있는 객체(12)가 다시 배회하는 경우, 배회 이력이 없는 객체(12)가 배회 하는 경우와 달리 이전 배회에 관한 정보를 부가적으로 더 제공할 수 있다. 즉 당회 배회에 관한 정보와 이전 배회에 관한 정보를 동시에 사용자에게 제공할 수 있다.
상세히, 정보 제공부(40)는 배회하는 것으로 판단된 객체(12)를 객체의 위치에 관한 정보(13)를 참조하여 객체 검출부(10)에서 검출된 객체(12)의 모든 이미지를 한 화면에 배치하여 배회에 관한 정보(당해 배회에 관한 정보)를 제공한다.(S41) 정보 제공부(40)는 객체(12)가 재배회 하였는지 여부를 판단한다.(S42) 정보 제공부(40)는 객체(12)가 재배회 한 경우 데이터베이스(34) 상에 저장된 객체의 이미지 중 단계 S41에서 제공된 이미지를 제외한 나머지 객체 이미지를 나머지 객체 이미지의 위치에 관한 정보를 참조하여 제공한다.(S43) 이 때 각 단계 S41 및 S42에서 제공된 정보와 더불어 배회 시간과 같은 부가정보를 더 제공할 수 있다.(S44)
본 발명의 실시예들은 단순히 객체가 머무르는 시간을 측정하여 배회하는지 여부를 판단하는 기존의 배회 알람 시스템과 달리 기준특징을 추출하여 배회 횟수에 관한 정보까지 제공함으로써 보다 효과적인 감시, 관찰이 가능하다.
본 발명의 실시예들은 객체의 인식, 재인식을 요하는 다양한 시스템에 응용될 수 있다. 예를 들어 복수의 카메라로 구성된 감시 시스템에서, 복수의 카메라의 FOV를 모두 병합하여 하나의 FOV라고 한다면, 보다 넒은 범위에서 객체가 배회하였는지 여부를 정확하게 파악할 수 있을 것이다.
또한 정확한 계수를 필요로 하는 모든 시스템에 사용될 수 있다. 예를 들어 FOV를 출입하는 모든 객체를 데이터베이스(34)에 저장하여, 동일한 객체가 반복하여 지나가는 경우 중복하여 카운트 하지 않음으로써 보다 정확한 계수가 가능할 것이다.
그 밖에 복수의 카메라로 구성된 감시 시스템에서, 객체의 인식 재인식 과정을 통해 객체의 이동 경로 추적이 가능할 것이다.
본 발명의 실시예에 따른 재배회 검출 장치 및 방법은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
본 발명은 첨부된 도면에 도시된 일 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 수 있을 것이다.
재배회 검출 장치(1)
영상 획득 장치(2)
객체 검출부(10)
입력 이미지(11)
객체(12)
객체의 위치에 관한 정보(13)
객체의 옷차림에 관한 특징(14)
객체의 얼굴에 관한 특징(15)
복수의 프레임(16)
객체의 걸음걸이에 관한 특징(17)
배회 판단부(20)
좌-상단에서 우-하단의 방향(21)
객체의 이동 궤적(22)
폐곡선(23)
재배회 판단부(30)
제1 판단부(31)
제2 판단부(32)
데이터 저장부(33)
데이터베이스(34)
저장(35)
정보 제공부(40)
당해 배회에 관한 정보(41)
이전 배회에 관한 정보(42)
부가정보(43)

Claims (20)

  1. 입력 이미지에서 객체 및 상기 객체의 위치에 관한 정보를 검출하는 객체 검출 단계;
    상기 객체의 위치에 관한 정보에 기초하여 배회 여부를 판단하는 배회 판단 단계;
    상기 객체가 배회하는 것으로 판단되면, 데이터베이스에 기 저장된 객체 중 상기 입력 이미지에서 검출된 객체와 일치하는 객체가 있는지 여부를 판단하여 상기 객체의 재배회 여부를 판단하는 재배회 판단 단계; 및
    상기 객체가 재배회인 것으로 판단되는 경우, 상기 객체의 당회 배회에 관한 정보 및 상기 객체의 하나 이상의 이전 배회에 관한 정보를 함께 제공하는 정보 제공 단계;를 포함하고,
    상기 당회 배회에 관한 정보는 상기 입력 이미지와 연속하고 상기 객체를 포함하는 적어도 하나의 이미지를 포함하고,
    상기 하나 이상의 이전 배회에 관한 정보 각각은 상기 입력 이미지와 불연속이고 상기 객체를 포함하는 적어도 하나의 과거 이미지를 포함하는, 재배회 검출 방법.
  2. 제1 항에 있어서,
    상기 입력 이미지는 복수의 프레임(frame)을 포함하는 동영상이고,
    상기 객체 검출 단계는, 상기 복수의 프레임마다 상기 객체 및 상기 객체의 위치에 관한 정보를 검출하고,
    상기 배회 판단 단계는, 상기 객체 검출 단계에서 검출된 상기 객체가 기 설정된 배회 조건을 만족하는 경우 상기 객체를 배회하는 것이라고 판단하는 것을 특징으로 하는 재배회 검출 방법.
  3. 제2 항에 있어서
    상기 배회 조건은, 상기 객체가 연속적으로 검출된 프레임의 개수가 기 설정된 임계수 이상인 객체를 배회하는 것으로 판단하는 것을 특징으로 하는 재배회 검출 방법.
  4. 제2 항에 있어서
    상기 배회 조건은, 상기 객체의 위치에 관한 정보를 이용하여 형성한 상기 객체의 궤적이 적어도 하나의 폐곡선을 형성하는 경우 상기 객체를 배회하는 것으로 판단하는 것을 특징으로 하는 재배회 검출 방법.
  5. 제1 항에 있어서,
    상기 입력 이미지는, 복수의 프레임(frame)을 포함하는 동영상이고,
    상기 객체 검출 단계는, 상기 복수의 프레임마다 상기 객체 및 상기 객체의 위치에 관한 정보를 검출하고, 상기 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 상기 객체의 기준특징을 더 검출하고,
    상기 재배회 판단 단계는, 상기 검출된 기준특징을 상기 데이터베이스에서 검색하여, 상기 데이터베이스 상에 일치되는 기준특징을 가진 객체가 있는지 여부를 판단하고, 상기 기준특징이 일치하는 객체가 있는 경우 상기 객체를 재배회로 판단하는 단계; 및
    상기 객체가 재배회로 판단된 경우, 복수의 프레임 각각에서 검출된 객체의 이미지를 상기 데이터베이스에 저장하고,
    상기 객체가 재배회가 아닌 것으로 판단된 경우, 상기 객체의 기준특징 및 상기 복수의 프레임 각각에서 검출된 객체의 이미지를 상기 데이터베이스에 저장하는 단계;를 포함하는 것을 특징으로 하는 재배회 검출 방법.
  6. 제5 항에 있어서,
    상기 객체 검출 단계는, 상기 복수의 프레임마다 상기 객체를 포함하는 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 검출하고, 상기 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 상기 박스 이미지의 기준특징을 더 검출하고,
    상기 저장하는 단계는, 상기 기준특징이 일치하는 객체가 없는 경우 상기 박스 이미지의 기준특징 및 상기 복수의 프레임 각각에서 검출된 모든 박스 이미지를 저장하는 것을 특징으로 하는 재배회 검출 방법.
  7. 제5 항에 있어서,
    상기 기준특징은 상기 객체의 옷차림, 얼굴 또는 걸음걸이 중 어느 하나 또는 이들 중 둘 이상의 조합인 것을 특징으로 하는 재배회 검출 방법.
  8. 제1 항에 있어서
    상기 입력 이미지는, 복수의 프레임(frame)을 포함하는 동영상이고,
    상기 객체 검출 단계는, 상기 복수의 프레임마다 상기 객체 및 상기 객체의 위치에 관한 정보를 검출하고,
    상기 정보 제공 단계는, 상기 객체가 배회하는 것으로 판단되면 상기 객체의 위치에 관한 정보를 참조하여, 상기 당회 배회에 관한 정보에 포함된 상기 객체의 모든 이미지를 한 화면에 배치하여 제공하는 제1 정보제공 단계; 및
    상기 재배회 판단 단계에서 상기 객체가 재배회 하는 것으로 판단된 경우 상기 데이터베이스 상에 저장된 상기 객체의 이미지 중 상기 제1 정보제공 단계에서 제공된 객체 이미지를 제외한 나머지 객체 이미지를 상기 나머지 객체 이미지의 위치에 관한 정보를 참조하여, 상기 하나 이상의 이전 배회에 관한 정보에 포함된 상기 객체의 이미지를 상기 제1 정보제공 단계에서 제공된 정보와 함께 상기 한 화면에 배치하여 제공하는 제2 정보제공 단계;를 포함하는 것을 특징으로 하는 재배회 검출 방법.
  9. 제8 항에 있어서,
    상기 객체 검출 단계는, 상기 복수의 프레임마다 상기 객체를 포함하는 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 검출하고,
    상기 데이터베이스는, 복수의 객체 각각에 대한 복수의 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 기 저장하고,
    상기 제1 정보제공 단계는, 상기 박스 이미지의 위치에 관한 정보를 참조하여, 상기 객체 검출 단계에서 검출된 상기 모든 박스 이미지를 한 화면에 배치하여 배회에 관한 정보를 제공하고,
    상기 제2 정보제공 단계는, 상기 데이터베이스 상에 저장된 상기 검출된 객체와 동일한 객체의 박스 이미지 중 상기 제1 정보제공 단계에서 제공된 박스 이미지를 제외한 나머지 박스 이미지를 상기 나머지 이미지의 위치에 관한 정보를 참조하여, 상기 제1 정보제공 단계에서 제공된 정보와 함께 상기 한 화면에 배치하여 재배회에 관한 정보를 제공하는 제2 정보제공 단계;를 포함하는 것을 특징으로 하는 재배회 검출 방법.
  10. 제1 항에 있어서
    상기 정보 제공 단계는, 상기 재배회 판단 단계에서 상기 객체가 재배회 하는 것으로 판단된 경우 상기 데이터베이스에 저장되어있는 상기 객체의 모든 이미지를 상기 데이터베이스에 저장된 상기 객체의 이미지 및 위치에 관한 정보를 참조하여 시간의 흐름에 따라 하나씩 순차적으로 화면에 표시하여 배회에 관한 정보를 제공하는 단계;를 포함하는 재배회 검출 방법.
  11. 입력 이미지에서 객체 및 상기 객체의 위치에 관한 정보를 검출하는 객체 검출부;
    상기 객체의 위치에 관한 정보에 기초하여 배회 여부를 판단하는 배회 판단부;
    상기 객체가 배회하는 것으로 판단되면, 데이터베이스에 기 저장된 객체 중 상기 입력 이미지에서 검출된 객체와 일치하는 객체가 있는지 여부를 판단하여 상기 객체의 재배회 여부를 판단하는 재배회 판단부; 및
    상기 객체가 재배회인 것으로 판단되는 경우, 상기 객체의 당회 배회에 관한 정보 및 상기 객체의 하나 이상의 이전 배회에 관한 정보를 함께 제공하는 정보 제공부;를 포함하고,
    상기 당회 배회에 관한 정보는 상기 입력 이미지와 연속하고 상기 객체를 포함하는 적어도 하나의 이미지를 포함하고,
    상기 하나 이상의 이전 배회에 관한 정보 각각은 상기 입력 이미지와 불연속이고 상기 객체를 포함하는 적어도 하나의 과거 이미지를 포함하는, 재배회 검출 장치.
  12. 제11 항에 있어서,
    상기 입력 이미지는 복수의 프레임(frame)을 포함하는 동영상이고,
    상기 객체 검출부는, 상기 복수의 프레임마다 상기 객체 및 상기 객체의 위치에 관한 정보를 검출하고,
    상기 배회 판단부는, 상기 객체 검출부에서 검출된 상기 객체가 기 설정된 배회 조건을 만족하는 경우 상기 객체를 배회하는 것이라고 판단하는 것을 특징으로 하는 재배회 검출 장치.
  13. 제12 항에 있어서
    상기 배회 조건은, 상기 객체가 연속적으로 검출된 프레임의 개수가 기 설정된 임계수 이상인 객체를 배회하는 것으로 판단하는 것을 특징으로 하는 재배회 검출 장치.
  14. 제12 항에 있어서
    상기 배회 조건은, 상기 객체의 위치에 관한 정보를 이용하여 형성한 상기 객체의 궤적이 적어도 하나의 폐곡선을 형성하는 경우 상기 객체를 배회하는 것으로 판단하는 것을 특징으로 하는 재배회 검출 장치.
  15. 제11 항에 있어서,
    상기 입력 이미지는, 복수의 프레임(frame)을 포함하는 동영상이고,
    상기 객체 검출부는, 상기 복수의 프레임마다 상기 객체 및 상기 객체의 위치에 관한 정보를 검출하고, 상기 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 상기 객체의 기준특징을 더 검출하고,
    상기 재배회 판단부는, 상기 검출된 기준특징을 상기 데이터베이스에서 검색하여, 상기 데이터베이스 상에 일치되는 기준특징을 가진 객체가 있는지 여부를 판단하는 제1 판단부;
    상기 기준특징이 일치하는 객체가 있는 경우 상기 객체를 재배회로 판단하는 제2 판단부; 및
    상기 객체가 재배회로 판단된 경우, 복수의 프레임 각각에서 검출된 객체의 이미지를 상기 데이터베이스에 저장하고, 상기 객체가 재배회가 아닌 것으로 판단된 경우, 상기 객체의 기준특징 및 상기 복수의 프레임 각각에서 검출된 객체의 이미지를 상기 데이터베이스에 저장하는 데이터 저장부;를 포함하는 것을 특징으로 하는 재배회 검출 장치.
  16. 제15 항에 있어서,
    상기 객체 검출부는, 상기 복수의 프레임마다 상기 객체를 포함하는 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 검출하고, 상기 복수의 프레임 중 적어도 하나 이상의 프레임으로부터 상기 박스 이미지의 기준특징을 더 검출하고,
    상기 데이터 저장부는, 상기 기준특징이 일치하는 객체가 없는 경우 상기 박스 이미지의 기준특징 및 상기 복수의 프레임 각각에서 검출된 모든 박스 이미지를 저장하는 것을 특징으로 하는 재배회 검출 장치.
  17. 제15 항에 있어서,
    상기 기준특징은 상기 객체의 옷차림, 얼굴 또는 걸음걸이 중 어느 하나 또는 이들 중 둘 이상의 조합인 것을 특징으로 하는 재배회 검출 장치.
  18. 제11 항에 있어서
    상기 입력 이미지는, 복수의 프레임(frame)을 포함하는 동영상이고,
    상기 객체 검출부는, 상기 복수의 프레임마다 상기 객체 및 상기 객체의 위치에 관한 정보를 검출하고,
    상기 정보 제공부는, 상기 객체가 배회하는 것으로 판단되면 상기 객체의 위치에 관한 정보를 참조하여, 상기 당회 배회에 관한 정보에 포함된 상기 객체의 모든 이미지를 한 화면에 배치하여 제공하는 제1 정보 제공부; 및
    상기 재배회 판단부에서 상기 객체가 재배회 하는 것으로 판단된 경우 상기 데이터베이스 상에 저장된 상기 객체의 이미지 중 상기 제1 정보 제공부에서 제공된 객체 이미지를 제외한 나머지 객체 이미지를 상기 나머지 객체 이미지의 위치에 관한 정보를 참조하여, 상기 하나 이상의 이전 배회에 관한 정보에 포함된 상기 객체의 이미지를 상기 제1 정보 제공부에서 제공된 정보와 함께 상기 한 화면에 배치하여 제공하는 제2 정보 제공부;를 포함하는 것을 특징으로 하는 재배회 검출 장치.
  19. 제18 항에 있어서,
    상기 객체 검출부는, 상기 복수의 프레임마다 상기 객체를 포함하는 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 검출하고,
    상기 데이터베이스는, 복수의 객체 각각에 대한 복수의 박스 이미지 및 상기 박스 이미지의 위치에 관한 정보를 기 저장하고,
    상기 제1 정보 제공부는, 상기 박스 이미지의 위치에 관한 정보를 참조하여, 상기 객체 검출부에서 검출된 상기 모든 박스 이미지를 한 화면에 배치하여 배회에 관한 정보를 제공하고,
    상기 제2 정보 제공부는, 상기 데이터베이스 상에 저장된 상기 검출된 객체와 동일한 객체의 박스 이미지 중 상기 제1 정보 제공부에서 제공된 박스 이미지를 제외한 나머지 박스 이미지를 상기 나머지 이미지의 위치에 관한 정보를 참조하여, 상기 제1 정보 제공부에서 제공된 정보와 함께 상기 한 화면에 배치하여 재배회에 관한 정보를 제공하는 제2 정보 제공부;를 포함하는 것을 특징으로 하는 재배회 검출 장치.
  20. 컴퓨터를 이용하여 제1 항 내지 제10 항 중 어느 한 항의 방법을 실행하기 위하여 매체에 저장된 컴퓨터 프로그램.
KR1020150101112A 2015-07-16 2015-07-16 배회 경보 방법 및 장치 KR102015588B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020150101112A KR102015588B1 (ko) 2015-07-16 2015-07-16 배회 경보 방법 및 장치
US15/130,218 US9959460B2 (en) 2015-07-16 2016-04-15 Re-wandering alarm system and method
CN201610550220.0A CN106355137B (zh) 2015-07-16 2016-07-13 检测反复游荡的方法和反复游荡检测装置
CN202210026580.6A CN114332737A (zh) 2015-07-16 2016-07-13 游荡信息提供方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150101112A KR102015588B1 (ko) 2015-07-16 2015-07-16 배회 경보 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20170009300A KR20170009300A (ko) 2017-01-25
KR102015588B1 true KR102015588B1 (ko) 2019-08-28

Family

ID=57776237

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150101112A KR102015588B1 (ko) 2015-07-16 2015-07-16 배회 경보 방법 및 장치

Country Status (3)

Country Link
US (1) US9959460B2 (ko)
KR (1) KR102015588B1 (ko)
CN (2) CN114332737A (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109753894A (zh) * 2018-12-19 2019-05-14 国网北京市电力公司 告警方法及装置
KR102423968B1 (ko) * 2020-10-06 2022-07-22 동명대학교산학협력단 영상의 객체 재인식 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007267294A (ja) * 2006-03-30 2007-10-11 Hitachi Ltd 複数カメラを用いた移動物体監視装置
JP2010113682A (ja) * 2008-11-10 2010-05-20 Brother Ind Ltd 来訪者情報検索方法、来訪者情報検索装置およびインターホンシステム
JP2011186733A (ja) * 2010-03-08 2011-09-22 Hitachi Kokusai Electric Inc 画像検索装置
KR101470315B1 (ko) * 2014-08-11 2014-12-09 (주)엔토스정보통신 객체의 움직임 감지에 의한 위험 감지 ｃｃｔｖ 시스템 및 그 방법

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7433493B1 (en) * 2000-09-06 2008-10-07 Hitachi, Ltd. Abnormal behavior detector
KR100383734B1 (ko) 2000-12-01 2003-05-14 김남수 음성 및 영상과 함께 부가정보를 전송하는 무선 cctv 시스템
JP2004266623A (ja) 2003-03-03 2004-09-24 Ffc:Kk 監視カメラ管理システム
CN101344923B (zh) * 2004-08-03 2012-05-23 松下电器产业株式会社 人物搜索跟踪装置
US7483227B1 (en) * 2005-09-16 2009-01-27 Maxtor Corporation Detecting a thermal asperity condition of a disk drive head responsive to data value transitions
US7860162B2 (en) * 2005-09-29 2010-12-28 Panasonic Corporation Object tracking method and object tracking apparatus
US8130203B2 (en) * 2007-01-03 2012-03-06 Apple Inc. Multi-touch input discrimination
US8169481B2 (en) * 2008-05-05 2012-05-01 Panasonic Corporation System architecture and process for assessing multi-perspective multi-context abnormal behavior
TWI382762B (zh) * 2008-11-17 2013-01-11 Ind Tech Res Inst 移動物體的追蹤方法
KR20110111106A (ko) * 2010-04-02 2011-10-10 삼성테크윈 주식회사 객체추적 및 로이터링 장치 및 방법
JP5559335B2 (ja) * 2010-08-31 2014-07-23 オムロン株式会社 挙動解析装置
KR101180887B1 (ko) * 2010-09-08 2012-09-07 중앙대학교 산학협력단 이상행위 검출장치 및 방법
US9117147B2 (en) * 2011-04-29 2015-08-25 Siemens Aktiengesellschaft Marginal space learning for multi-person tracking over mega pixel imagery
IN2014DN08342A (ko) * 2012-03-15 2015-05-08 Behavioral Recognition Sys Inc
GB2501542A (en) * 2012-04-28 2013-10-30 Bae Systems Plc Abnormal behaviour detection in video or image surveillance data
US11100334B2 (en) * 2013-04-19 2021-08-24 James Carey Video identification and analytical recognition system
KR102206235B1 (ko) 2013-08-20 2021-01-22 한화테크윈 주식회사 네트워크카메라 대쉬보드
US9959903B2 (en) * 2014-10-23 2018-05-01 Qnap Systems, Inc. Video playback method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007267294A (ja) * 2006-03-30 2007-10-11 Hitachi Ltd 複数カメラを用いた移動物体監視装置
JP2010113682A (ja) * 2008-11-10 2010-05-20 Brother Ind Ltd 来訪者情報検索方法、来訪者情報検索装置およびインターホンシステム
JP2011186733A (ja) * 2010-03-08 2011-09-22 Hitachi Kokusai Electric Inc 画像検索装置
KR101470315B1 (ko) * 2014-08-11 2014-12-09 (주)엔토스정보통신 객체의 움직임 감지에 의한 위험 감지 ｃｃｔｖ 시스템 및 그 방법

Also Published As

Publication number Publication date
CN106355137B (zh) 2022-01-28
US9959460B2 (en) 2018-05-01
CN106355137A (zh) 2017-01-25
US20170018091A1 (en) 2017-01-19
KR20170009300A (ko) 2017-01-25
CN114332737A (zh) 2022-04-12

Similar Documents

Publication Publication Date Title
US11010905B2 (en) Efficient object detection and tracking
US11270108B2 (en) Object tracking method and apparatus
US11908293B2 (en) Information processing system, method and computer readable medium for determining whether moving bodies appearing in first and second videos are the same or not using histogram
WO2014041912A1 (ja) 画像処理システム、画像処理方法及びプログラム
US10719946B2 (en) Information processing apparatus, method thereof, and computer-readable storage medium
US9390332B2 (en) Information processing system, information processing method and program
US9761012B2 (en) Object tracking device, object tracking method, and computer-readable medium
US20230396738A1 (en) Duration and potential region of interest for suspicious activities
KR102015588B1 (ko) 배회 경보 방법 및 장치
US20200084416A1 (en) Information processing apparatus, control method, and program
JP6405606B2 (ja) 画像処理装置、画像処理方法、および画像処理プログラム
JP6570906B2 (ja) 監視システム及び監視方法
US20130265420A1 (en) Video processing apparatus, video processing method, and recording medium
JP6451418B2 (ja) 注視対象判定装置、注視対象判定方法、および、注視対象判定プログラム
CN111447403B (zh) 一种视频显示方法、装置及系统
KR20220154473A (ko) 영상 내 가상 검지선을 이용한 외부 침입 방지 시스템
KR20190090960A (ko) 관심 영역에 기반한 히트맵 생성 장치 및 방법
CN111831845A (zh) 轨迹回放方法及装置
KR102496462B1 (ko) 비디오에서 키프레임 추출을 위한 알고리즘
JPH09107540A (ja) 監視カメラ装置
JP6954416B2 (ja) 情報処理装置、情報処理方法、及びプログラム
US11070770B2 (en) Method and system for auto-calibration of multiple sensors for event tracking
US20230215015A1 (en) Tracking device, tracking method, and recording medium
KR20220018805A (ko) 화재 감지 장치 및 화재 감지 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant