KR101794456B1 - 승강기에서의 접촉 행위를 탐지하는 장치 및 방법 - Google Patents

승강기에서의 접촉 행위를 탐지하는 장치 및 방법 Download PDF

Info

Publication number
KR101794456B1
KR101794456B1 KR1020160104278A KR20160104278A KR101794456B1 KR 101794456 B1 KR101794456 B1 KR 101794456B1 KR 1020160104278 A KR1020160104278 A KR 1020160104278A KR 20160104278 A KR20160104278 A KR 20160104278A KR 101794456 B1 KR101794456 B1 KR 101794456B1
Authority
KR
South Korea
Prior art keywords
occupant
skeleton
image
elevator
contact
Prior art date
Application number
KR1020160104278A
Other languages
English (en)
Inventor
신성윤
장대현
Original Assignee
군산대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 군산대학교산학협력단 filed Critical 군산대학교산학협력단
Priority to KR1020160104278A priority Critical patent/KR101794456B1/ko
Application granted granted Critical
Publication of KR101794456B1 publication Critical patent/KR101794456B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06K9/00335—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
    • B66B5/0006—Monitoring devices or performance analysers
    • B66B5/0012—Devices monitoring the users of the elevator system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G06K9/6201—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/337—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19613—Recognition of a predetermined image pattern or behaviour pattern indicating theft or intrusion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position

Abstract

본 발명은 승강기내에서 발생되는 범죄에 실시간으로 대응할 수 있도록, 승강기 내에서 발생되는 접촉 행위를 실시간으로 탐지하는 장치 및 방법을 제안한다. 보다 구체적으로, 일실시예에 따른 접촉 행위 탐지 장치는 제1 탑승자 및 제2 탑승자가 촬영된 영상으로부터, 제1 탑승자 및 제2 탑승자 각각의 자세를 식별하는 특징점을 결정한 다음, 결정된 특징점을 이용하여 제1 탑승자 및 제2 탑승자 각각의 높낮이의 변화를 측정함으로써, 제1 탑승자 및 제2 탑승자 간에 접촉 행위가 발생하였는지를 결정할 수 있다.

Description

승강기에서의 접촉 행위를 탐지하는 장치 및 방법{APPARATUS AND METHOD FOR DETECTING CONTACT ACTIVITY IN AN ELEVEATOR}
본 발명은 사람 사이에 발생되는 접촉 행위를 탐지하는 장치 및 방법에 관한 것으로, 보다 구체적으로는 승강기 내의 탑승자 간에 접촉 행위가 발생하였는지를 탐지하는 장치 및 방법에 관한 것이다.
흡연, 폭력, 폭행, 그리고 성추행 등 다양한 범죄가 승강기에서 발생하고 있다. CCTV 카메라가 설치된 승강기의 수가 증가하였음에도 불구하고, 승강기내 폭행 및 폭력이 자주 발생하고 있다. 승강기내 폭행 및 폭력은 승강기에 사람이 많이 타는 경우 보다는 사람이 적게 타는 경우에 더 많이 발생한다.
영상을 분석하는 방법으로, 영상에 포함된 프레임 또는 장면이 전환되는 시점을 검출하는 장면 전환 검출 기법이 널리 사용된다. 프레임 또는 장면이 전환되는 시점을 이용하여 영상을 분석하는 것은, 각 프레임 또는 장면을 비교하기 위하여 소요되는 시간이 매우 길고, 그 방법 또한 복잡할 수 있다. 따라서, 장면 전환 검출 기법으로는 영상을 실시간으로 분석할 수 없으며, 승강기내에서 발생되는 폭행 및 폭력을 실시간으로 탐지할 수 없다. 결론적으로, 승강기내에서 발생되는 범죄를 예방하거나, 또는 범죄에 실시간으로 대응하는 것이 어렵다.
본 발명은 승강기내에서 발생되는 범죄에 실시간으로 대응할 수 있도록, 승강기 내에서 발생되는 접촉 행위를 실시간으로 탐지하는 장치 및 방법을 제안한다.
본 발명의 일실시예에 따르면, 승강기 내의 제1 탑승자 및 제2 탑승자가 촬영된 영상을 저장하는 비디오 저장 장치 및 상기 영상을 이용하여, 상기 제1 탑승자 및 상기 제2 탑승자 간에 접촉 행위가 발생하였는지를 결정하는 프로세서를 포함하고, 상기 프로세서는, 상기 영상으로부터, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 자세를 식별하는 특징점들을 결정하고, 상기 결정된 특징점들을 이용하여 상기 제1 탑승자 및 상기 제2 탑승자 각각의 높낮이의 변화를 측정하여, 상기 높낮이의 변화가 미리 설정된 임계치 이상인 경우, 상기 접촉 행위가 발생한 것으로 결정하는 접촉 행위 탐지 장치가 제공된다.
일실시예에 따르면, 상기 프로세서는, 상기 영상의 프레임에 포함된 상기 제1 탑승자 및 상기 제2 탑승자 각각의 이미지를 침식하여, 선을 이용하여 상기 제1 탑승자 및 상기 제2 탑승자 각각의 자세를 나타낸 골격을 추출하고, 상기 추출된 골격을 이용하여 상기 특징점들을 결정하는 접촉 행위 탐지 장치가 제공된다.
일실시예에 따르면, 상기 프로세서는, 상기 승강기 내에, 상기 제1 탑승자 및 상기 제2 탑승자 이외에 미리 설정된 수 이상의 사람이 더 탑승한 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 장치가 제공된다.
일실시예에 따르면, 상기 프로세서는, 상기 제1 탑승자 및 상기 제2 탑승자가 상기 승강기로 동시에 탑승하고, 상기 제1 탑승자 및 상기 제2 탑승자의 높낮이의 차가 미리 설정된 임계치 이상인 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 장치가 제공된다.
일실시예에 따르면, 상기 프로세서는, 상기 승강기가 동일한 층에 반복적으로 정지하거나, 또는 상기 승강기가 미리 설정된 시간 이상 정지한 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 장치가 제공된다.
본 발명의 일실시예에 따르면, 승강기 내의 제1 탑승자 및 제2 탑승자가 촬영된 영상으로부터, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 자세를 선을 이용하여 나타낸 골격을 추출하는 단계, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 골격을 비교하여, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 높낮이의 변화를 측정하는 단계 및 상기 높낮이의 변화가 미리 설정된 임계치 이상인 경우, 상기 제1 탑승자 및 상기 제2 탑승자 간에 접촉 행위가 발생한 것으로 결정하는 단계를 포함하는 접촉 행위 탐지 방법 및 상술한 접촉 행위 탐지 방법이 기록된 컴퓨터에서 판독 가능한 기록 매체가 제공된다.
일실시예에 따르면, 상기 추출하는 단계는, 상기 영상의 프레임에 포함된 상기 제1 탑승자 및 상기 제2 탑승자 각각의 이미지를 침식하여, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 골격을 추출하는 접촉 행위 탐지 방법 및 상술한 접촉 행위 탐지 방법이 기록된 컴퓨터에서 판독 가능한 기록 매체가 제공된다.
일실시예에 따르면, 상기 결정하는 단계는, 상기 승강기 내에, 상기 제1 탑승자 및 상기 제2 탑승자 이외에 미리 설정된 수 이상의 사람이 더 탑승한 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 방법 및 상술한 접촉 행위 탐지 방법이 기록된 컴퓨터에서 판독 가능한 기록 매체가 제공된다.
일실시예에 따르면, 상기 결정하는 단계는, 상기 제1 탑승자 및 상기 제2 탑승자가 상기 승강기로 동시에 탑승하고, 상기 제1 탑승자 및 상기 제2 탑승자의 높낮이의 차가 미리 설정된 임계치 이상인 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 방법 및 상술한 접촉 행위 탐지 방법이 기록된 컴퓨터에서 판독 가능한 기록 매체가 제공된다.
일실시예에 따르면, 상기 결정하는 단계는, 상기 승강기가 동일한 층에 반복적으로 정지하거나, 또는 상기 승강기가 미리 설정된 시간 이상 정지한 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 방법 및 상술한 접촉 행위 탐지 방법이 기록된 컴퓨터에서 판독 가능한 기록 매체가 제공된다.
본 발명의 일실시예에 따르면, 승강기 내의 제1 탑승자 및 제2 탑승자가 촬영된 영상을 저장하는 비디오 저장 장치 및 상기 영상을 이용하여, 상기 제1 탑승자 및 상기 제2 탑승자 간에 접촉 행위가 발생하였는지를 결정하는 프로세서를 포함하고, 상기 프로세서는, 상기 영상으로부터, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 자세를 식별하는 특징점들을 결정하고, 상기 제1 탑승자의 특징점들 및 상기 제2 탑승자의 특징점들 중에서 서로 중첩된 특징점이 존재하는 경우, 상기 접촉 행위가 발생한 것으로 결정하는 접촉 행위 탐지 장치가 제공된다.
일실시예에 따르면, 상기 프로세서는, 상기 제1 탑승자 및 상기 제2 탑승자가 상기 승강기로 동시에 탑승하고, 상기 제1 탑승자의 특징점들 및 상기 제2 탑승자의 특징점들을 이용하여 측정된 상기 제1 탑승자 및 상기 제2 탑승자의 높낮이의 차가 미리 설정된 임계치 이상인 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 장치가 제공된다.
일실시예에 따르면, 상기 프로세서는, 상기 영상의 프레임에 포함된 상기 제1 탑승자 및 상기 제2 탑승자 각각의 이미지를 침식함으로써, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 골격을 추출하고, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 이미지를 상기 제1 탑승자 및 상기 제2 탑승자 각각의 골격으로 대체함으로써, 상기 영상을 골격 영상으로 변환하고, 상기 변환된 골격 영상으로부터 상기 제1 탑승자 및 상기 제2 탑승자 각각의 특징점들을 결정하는 접촉 행위 탐지 장치가 제공된다.
본 발명의 일실시예에 따르면, 승강기 내에서 발생되는 접촉 행위를 실시간으로 탐지함으로써, 승강기내에서 발생되는 범죄에 실시간으로 대응할 수 있다.
도 1은 본 발명의 일실시예에 따른 접촉 행위 탐지 장치가 설치된 승강기의 구조를 개념적으로 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 접촉 행위 탐지 장치의 구조를 설명하기 위한 개념적인 도면이다.
도 3은 본 발명의 일실시예에 따른 접촉 행위 탐지 장치가 영상으로부터 골격을 추출하고, 특징점을 결정하는 동작을 설명하기 위한 예시적인 도면이다.
도 4는 본 발명의 일실시예에 따른 접촉 행위 탐지 장치가 영상으로부터 접촉 행위를 탐지하는 동작을 설명하기 위한 예시적인 도면이다.
도 5는 본 발명의 일실시예에 따른 접촉 행위 탐지 장치가 제1 탑승자 및 제2 탑승자 간에 접촉 행위를 탐지하는 동작을 설명하기 위한 흐름도이다.
본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시예들에 대해서 특정한 구조적 또는 기능적 설명들은 단지 본 발명의 개념에 따른 실시예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시예들은 다양한 형태로 실시될 수 있으며 본 명세서에 설명된 실시예들에 한정되지 않는다.
본 발명의 개념에 따른 실시예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시예들을 도면에 예시하고 본 명세서에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시예들을 특정한 개시형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 변경, 균등물, 또는 대체물을 포함한다.
제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만, 예를 들어 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 “연결되어” 있다거나 “접속되어” 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 “직접 연결되어” 있다거나 “직접 접속되어” 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 표현들, 예를 들어 “~사이에”와 “바로~사이에” 또는 “~에 직접 이웃하는” 등도 마찬가지로 해석되어야 한다.
본 명세서에서 사용한 용어는 단지 특정한 실시예들을 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, “포함하다” 또는 “가지다” 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 특허출원의 범위가 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 본 발명의 일실시예에 따른 접촉 행위 탐지 장치(120)가 설치된 승강기(elevator)(110)의 구조를 개념적으로 도시한 도면이다. 도 1을 참고하면, 복수의 사람이 승강기(110) 내에 탑승하였을 때에, 접촉 행위 탐지 장치(120)는 탑승한 사람(이하, 탑승자라 한다) 간에 발생하는 접촉 행위를 실시간으로 탐지할 수 있다. 접촉 행위 탐지 장치(120)가 탐지하는 접촉 행위는 단순한 탑승자 간의 신체적 접촉뿐만 아니라, 폭행 또는 폭력으로 인한 탑승자 간의 신체적 접촉을 포함할 수 있다.
접촉 행위 탐지 장치(120)는 승강기(110) 내의 영상을 획득하는 CCTV 또는 카메라와 연결될 수 있다. 접촉 행위 탐지 장치(120)는 승강기(110) 내의 영상을 획득하는 CCTV 또는 카메라를 포함할 수 있다. 접촉 행위 탐지 장치(120)는 획득된 승강기(110) 내의 영상을 분석하여, 탑승자 간에 발생하는 접촉 행위를 실시간으로 탐지할 수 있다.
접촉 행위 탐지 장치(120)는 탑승자 간에 발생하는 접촉 행위를 실시간으로 탐지하기 위하여, 장면 전환 검출 기법을 사용하지 않을 수 있다. 접촉 행위 탐지 장치(120)는 장면 전환 검출 기법을 사용하지 않는 대신에, 미리 설정된 시간 간격으로, 획득된 승강기(110) 내의 영상을 분할하고, 분할된 영상에서 탑승자의 골격을 추출하여 접촉 행위를 탐지할 수 있다. 골격화 또는 골격을 추출하는 것은 적어도 하나의 직선 또는 곡선을 포함하는 집합으로 물체의 크기와 모양을 요약하는 것이다. 접촉 행위 탐지 장치(120)가 추출한 탑승자의 골격은 탑승자의 자세를 선을 이용하여 나타낼 수 있다. 추출된 탑승자의 골격은 탑승자의 자세를 식별하는 특징점을 결정하는데 이용될 수 있다. 또한, 골격은 이진 영상으로부터 추출될 수 있다.
승강기 내의 범죄는 탑승자 간의 신체적 접촉에 의해 발생되며, 탑승자의 높낮이가 변화하는 현상을 동반한다. 예를 들어, 탑승자는 폭행을 당함에 따라 몸을 움츠려 방어 자세를 취할 수 있고, 이로써, 탑승자의 높낮이가 급격하게 감소될 수 있다. 특정 접촉 행위 탐지 장치(120)는 추출된 골격 또는 특징점을 이용하여, 탑승자의 높낮이의 변화를 측정함으로써, 탑승자간의 신체적 접촉을 탐지할 수 있다. 일실시예에 따르면, 접촉 행위 탐지 장치(120)는 특징점의 접촉 여부를 결정함으로써, 탑승자 간의 신체적 접촉을 탐지할 수 있다.
탑승자 간의 신체적 접촉이 탐지되면, 접촉 행위 탐지 장치(120)는 외부 단말(130)로, 신체적 접촉이 승강기(110)에서 탐지되었음을 알릴 수 있다. 접촉 행위 탐지 장치(120)는 외부 단말(130)과 통신하기 위하여, 유선 네트워크 또는 무선 네트워크에 연결될 수 있다. 접촉 행위 탐지 장치(120)가 장면 전환 검출 기법을 사용하지 않고 실시간으로 탑승자 간의 신체적 접촉을 탐지하므로, 외부 단말(130)의 사용자(예를 들어, 경비실의 경비원)는 승강기(110)의 탑승자 간의 신체적 접촉을 실시간으로 알 수 있다. 따라서, 외부 단말(130)의 사용자는 신체적 접촉에 따른 범죄 행위를 사전에 차단하거나 또는 저지할 수 있다. 이로써, 승강기 내 범죄 행위가 예방될 수 있다.
도 2는 본 발명의 일실시예에 따른 접촉 행위 탐지 장치(210)의 구조를 설명하기 위한 개념적인 도면이다.
도 2를 참고하면, 접촉 행위 탐지 장치(210)는 승강기 내의 제1 탑승자 및 제2 탑승자가 촬영된 영상을 저장하는 비디오 저장 장치(220)를 포함할 수 있다. 비디오 저장 장치(220)는 상기 영상을 저장하는 메모리를 포함할 수 있다. 비디오 저장 장치(220)는 상기 영상을 촬영하기 위한 카메라 센서를 포함할 수 있다. 비디오 저장 장치(220)는 네트워크를 통하여, 상기 영상을 접촉 행위 탐지 장치(210)와 이격된 승강기로부터 상기 영상을 수신할 수 있다.
도 2를 참고하면, 접촉 행위 탐지 장치(210)는 비디오 저장 장치(220)에 저장된 영상을 이용하여, 제1 탑승자 및 제2 탑승자 간에 접촉 행위가 발생하였는지를 결정하는 프로세서(230)를 포함할 수 있다. 프로세서(230)는 인스트럭션(instruction)을 수행하는 적어도 하나 이상의 집적회로를 포함할 수 있다. 예를 들어, 프로세서(230)는 단일 코어 프로세서 또는 멀티 코어 프로세서를 포함할 수 있다.
프로세서(230)는 영상으로부터, 제1 탑승자 및 제2 탑승자 각각의 자세를 식별하는 특징점들을 결정할 수 있다. 프로세서(230)는 영상의 프레임에 포함된 제1 탑승자 및 제2 탑승자 각각의 이미지를 침식하여, 선을 이용하여 제1 탑승자 및 제2 탑승자 각각의 자세를 나타낸 골격을 추출할 수 있다. 프로세서(230)는 추출된 골격을 이용하여 상기 특징점들을 결정할 수 있다. 프로세서(230)는 결정된 특징점들을 이용하여 제1 탑승자 및 제2 탑승자 각각의 높낮이의 변화를 측정하여, 높낮이의 변화가 미리 설정된 임계치 이상인 경우, 접촉 행위가 발생한 것으로 결정될 수 있다.
앞서 설명한 바와 같이, 높낮이의 변화는 제1 탑승자 또는 제2 탑승자가 방어적인 자세를 취함에 따라 발생될 수 있다. 접촉 행위 탐지 장치는 높낮이의 변화를 미리 설정된 임계치와 비교함으로써, 탑승자가 방어적인 자세를 취하는 것과 관련된 접촉 행위를 탐지할 수 있다. 이로써, 접촉 행위 탐지 장치는 탑승자간의 폭행 또는 폭력 행위를 보다 정확하게 판단할 수 있다.
많은 사람이 승강기로 탑승하거나, 또는 승강기가 자주 오르내리는 경우, 탑승자간의 신체적 접촉이 폭행 또는 폭력이 아닌 다른 이유로 발생될 수 있다. 접촉 행위 탐지 장치는 승강기 내에서 폭행 또는 폭력 행위가 발생하기 어려운 조건을 고려하여, 탑승자 간의 접촉 행위를 탐지할 수 있다. 다시 말하면, 승강기 내에서 폭행 또는 폭력 행위가 발생하기 어려운 조건에서, 접촉 행위 탐지 장치는 접촉 행위를 탐지하는 것을 중단하거나, 또는 접촉 행위가 발생하지 않은 것으로 결정할 수 있다.
일실시예에 따르면, 프로세서(230)는 승강기 내에, 제1 탑승자 및 제2 탑승자 이외에 미리 설정된 수 이상의 사람이 더 탑승한 경우, 접촉 행위가 발생하지 않은 것으로 결정할 수 있다. 이 경우, 많은 사람이 승강기로 탑승함에 따라 폭행 또는 폭력 행위가 발생할 확률이 감소하기 때문이다. 미리 설정된 수는 승강기의 탑승자 수 및 폭력 행위 발생 빈도의 상관 관계에 따라 경험적으로(heuristically) 결정될 수 있다.
일실시예에 따르면, 프로세서(230)는 제1 탑승자 및 제2 탑승자가 승강기로 동시에 탑승하고, 제1 탑승자 및 제2 탑승자의 높낮이의 차가 미리 설정된 임계치 이상인 경우, 접촉 행위가 발생하지 않은 것으로 결정할 수 있다. 이 경우, 제1 탑승자 및 제2 탑승자는 부모와 자녀 또는 보호자와 피보호자의 관계에 있을 확률이 높기 때문이다.
일실시예에 따르면, 프로세서(230)는 승강기가 동일한 층에 반복적으로 정지하거나, 또는 승강기가 미리 설정된 시간 이상 정지한 경우, 접촉 행위가 발생하지 않은 것으로 결정할 수 있다. 이 경우, 승강기의 고장으로 인하여 폭행 또는 폭력 행위가 발생할 확률이 감소하기 때문이다.
상술한 바와 같이, 접촉 행위 탐지 장치는 승강기 내에서 폭행 또는 폭력 행위가 발생하기 어려운 조건을 고려하여 탑승자 간의 접촉 행위를 탐지함으로써, 폭력 또는 폭행 행위와 관련이 없는 접촉 행위를 보다 빠르게 선별할 수 있다. 이로써, 접촉 행위 탐지 장치는 폭력 또는 폭행 행위와 관련성이 있는 접촉 행위만을 보다 정확하게 탐지할 수 있다.
도 3은 본 발명의 일실시예에 따른 접촉 행위 탐지 장치가 영상으로부터 골격을 추출하고, 특징점을 결정하는 동작을 설명하기 위한 예시적인 도면이다. 접촉 행위 탐지 장치는 영상에 포함된 객체의 크기를 일정하게 감소 시키는 침식 연산을 이용하여, 탑승자의 골격을 추출할 수 있다. 보다 구체적으로, 접촉 행위 탐지 장치는 복수의 침식 마스크를 이용하여, 영상내의 탑승자의 이미지를 반복적으로 깎을 수 있다. 복수의 침식 마스크들의 방향성은 서로 다를 수 있다. 접촉 행위 탐지 장치는 영상내의 탑승자의 이미지에 침식 연산을 반복적으로 수행하여, 탑승자의 자세를 일정한 폭의 직선 또는 곡선의 집합인 골격으로 표현할 수 있다. 접촉 행위 탐지 장치는 탑승자의 이미지로부터 골격 또는 특징점을 추출하기 위하여, 영상을 이진 영상으로 변환할 수 있다.
보다 구체적으로, 접촉 행위 탐지 장치는 수학식 1과 같이 골격화의 부분 집합 SSi(X)를 정의할 수 있다. X는 골격을 추출하는 대상 영상을 의미한다.
Figure 112016079725416-pat00001
수학식 1을 참고하면, I는 SSi(X)가 공집합이 되기 전의 i의 최대값으로 결정될 수 있다. 구성요소 Y는 볼록하고, 경계가 있으며 대칭성인 원판에 근사하기 위해 선택될 수 있다. 수학식 1의 E(X,iY)는 수학식 2에 의하여 정의될 수 있다.
Figure 112016079725416-pat00002
수학식 2를 참고하면, E(A, B)는 영상 A 및 영상 B의 침식(erosion) 영상 으로써, A와 -B의 Minkowski subtraction을 통해 계산될 수 있다. β는 영상 B의 원소로써, 픽셀 또는 벡터일 수 있다. 수학식 1의 연산자
Figure 112016079725416-pat00003
는 수학식 3의 Opening 연산에 따라 정의될 수 있다.
Figure 112016079725416-pat00004
수학식 3을 참고하면, Opening 연산은 영상 A 및 영상 B를 침식한 영상에 대하여 영상 B를 확장(dilation)한 연산을 출력할 수 있다. 수학식 3의 확장 연산D(A, B)는 수학식 4에 따라 정의된다.
Figure 112016079725416-pat00005
수학식 4를 참고하면, 확장 연산 D(A, B)는 영상 A 및 영상 B를 Minkowski addition을 통해 계산한 영상을 출력할 수 있다. 최종적으로, 골격은 수학식 1의 골격화의 부분 집합 SSi(X)을 결합하여 수학식 5에 따라 획득될 수 있다.
Figure 112016079725416-pat00006
골격을 추출하는 대상 영상 X는 수학식 1의 골격화의 부분 집합 SSi(X), 구성요소 Y 및 I를 이용하여, 수학식 6에 의해 재구성될 수 있다.
Figure 112016079725416-pat00007
도 3을 참고하면, 사람을 촬영한 제1 영상(310) 내지 제3 영상(330)이 도시된다. 제1 영상(310) 내지 제3 영상(330)은 이진 영상일 수 있다. 도 3을 참고하면, 제1 영상(310) 내지 제3 영상(330)으로부터 획득된 골격이 제1 영상(310) 내지 제3 영상(330)에 오버랩되어 도시된다.
도 3을 참고하면, 제1 영상(310)은 양팔과 다리를 벌리고 있는 사람을 촬영한 것으로써, 제1 영상(310)으로부터 도출된 골격은 총 다섯 개의 직선 - 양 팔을 잇는 직선, 머리 끝에서 골반까지 이어지는 직선 그리고 두 개의 다리에 각각 대응하는 두 개의 직선 - 을 포함할 수 있다. 제1 영상(310)으로부터 도출된 골격은 사람의 이미지를 골격화할 때 기준으로 사용될 수 있다. 도 3을 참고하면, 제1 영상(310)의 골격으로부터 작은 원으로 표시된 다섯 개의 특징점 - 머리 끝, 두 개의 팔의 끝, 두 개의 다리의 끝 - 이 결정될 수 있다. 일실시예에 따르면, 사람이 영상을 촬영하는 카메라의 방향과 수직 방향으로 걷는 경우, 제1 영상(310)으로부터 결정된 특징점들과 동일한 5 개의 특징점들이 결정될 수 있다.
도 3을 참고하면, 제2 영상(320)은 양 팔을 모으고 가만히 서있는 사람을 촬영한 것으로써, 제2 영상(320)으로부터 1개의 직선의 형태의 골격이 도출될 수 있다. 접촉 행위 탐지 장치는 다리 사이의 거리가 미리 설정된 임계치(예를 들어, 15 픽셀) 이하인 경우, 1개의 직선으로 사람에 대한 골격을 결정할 수 있다. 도 3을 참고하면, 제2 영상(320)의 골격으로부터 머리 끝과 발 끝에 2 개의 특징점을 결정할 수 있다. 일실시예에 따르면, 사람이 영상을 촬영하는 카메라와 동일한 방향으로 걷는 경우, 다리 사이의 거리가 미리 설정된 임계치 이하가 되므로, 제2 영상(320)의 골격과 동일한 골격이 도출될 수 있다.
도 3을 참고하면, 제3 영상(330)은 가장 많은 수의 특징점들이 결정되는 예로써, 접촉 행위 탐지 장치는 1명의 탑승자의 영상으로부터, 최소 2개에서 최대 11개의 특징점들을 결정할 수 있다. 접촉 행위 탐지 장치는 탑승자를 촬영한 영상으로부터, 탑승자에 대한 골격 또는 특징점들을 결정할 수 있다. 결정된 골격 또는 특징점들은 탑승자간의 접촉 행위를 탐지하는데 사용될 수 있다.
도 4는 본 발명의 일실시예에 따른 접촉 행위 탐지 장치가 영상으로부터 접촉 행위를 탐지하는 동작을 설명하기 위한 예시적인 도면이다. 도 4를 참고하면, 접촉 행위 탐지 장치는 제1 탑승자(440) 및 제2 탑승자(450)간에 접촉 행위가 발생하였는지를 결정할 수 있다.
도 4를 참고하면, 승강기의 실내를 촬영한 영상의 일부인 제1 영상(410) 내지 제3 영상(430)이 시간 순서대로 도시된다. 제1 영상(410) 내지 제3 영상(430)은 승강기의 실내를 촬영한 영상을 미리 설정한 시간 간격(예를 들어, 1초)으로 분할하여 획득한 영상들일 수 있다. 승강기의 실내를 촬영한 영상을 1초 간격으로 분할한 경우, 접촉 행위 탐지 장치는 제1 영상(410) 내지 제3 영상(430)을 통하여 3초 동안 제1 탑승자 및 제2 탑승자 간에 접촉 행위가 발생하였는지를 탐지할 수 있다.
일실시예에 따르면, 접촉 행위 탐지 장치는 영상의 프레임에 포함된 제1 탑승자(440) 및 제2 탑승자(450) 각각의 이미지를 침식함으로써, 제1 탑승자(440) 및 제2 탑승자(450) 각각의 골격을 추출한 다음, 제1 탑승자(440) 및 제2 탑승자(450) 각각의 이미지를 제1 탑승자(440) 및 제2 탑승자(450) 각각의 골격으로 대체함으로써, 영상을 골격 영상으로 변환할 수 있다. 도 4를 참고하면, 접촉 행위 탐지 장치가 제1 영상(410) 내지 제3 영상(430) 각각에 포함된 제1 탑승자(440) 및 제2 탑승자(450)의 이미지를 골격으로 대체한 제1 골격 영상(411) 내지 제3 골격 영상(431)이 도시된다. 접촉 행위 탐지 장치는 변환된 골격 영상으로부터 제1 탑승자(440) 및 제2 탑승자(450) 각각의 특징점들을 결정할 수 있다.
도 4를 참고하면, 제1 영상(410)은 제일 먼저 촬영된 영상으로써, 승강기에 제일 먼저 탑승한 제1 탑승자(440) 만을 포함할 수 있다. 접촉 행위 탐지 장치는 수학식 1 내지 수학식 6을 이용하여, 제1 탑승자(440)의 골격을 추출할 수 있다. 더 나아가서, 접촉 행위 탐지 장치는 추출된 제1 탑승자(440)의 골격으로, 제1 영상(410)에 포함된 제1 탑승자(440)의 이미지를 대체함으로써, 제1 골격 영상(411)으로 제1 영상(410)을 변환할 수 있다. 도 4를 참고하면, 제1 영상(410)으로부터 도출된 제1 탑승자(440)의 골격은 머리, 몸체 그리고 몸체에서 떨어지지 않은 양 팔에 대한 1개의 직선과 양 다리에 대한 2개의 직선을 포함할 수 있다. 또한, 특징점이 제1 탑승자(440)의 골격으로부터 머리 끝, 그리고 양 발 끝에 설정되어, 총 3개의 특징점이 결정될 수 있다.
도 4를 참고하면, 제1 영상(410) 이후에 촬영된 제2 영상(420)은, 제2 영상(420)이 촬영되는 시점에 탑승한 제2 탑승자(450)를 추가로 포함할 수 있다. 접촉 행위 탐지 장치는 제1 탑승자(440) 및 제2 탑승자(450) 각각에 대한 골격을 추출할 수 있다. 접촉 행위 탐지 장치는 추출된 제1 탑승자(440) 및 제2 탑승자(450) 각각에 대한 골격을 이용하여, 제2 골격 영상(421)으로 제2 영상(420)을 변환할 수 있다. 도 4를 참고하면, 제2 탑승자(450)의 골격으로부터 머리 끝, 그리고 양 발 끝의 3개의 특징점이 결정됨을 알 수 있다.
접촉 행위 탐지 장치는 승강기 내에 두 명의 사람이 탑승한 시점부터, 두 명의 사람의 접촉 행위를 탐지할 수 있다. 접촉 행위 탐지 장치는 제1 탑승자(440) 및 제2 탑승자(450) 각각의 골격 또는 특징점으로부터, 제1 탑승자(440)의 높낮이(441) 및 제2 탑승자(450)의 높낮이(451)를 측정할 수 있다. 탑승자의 높낮이는 영상에 촬영된 탑승자의 이미지로부터 측정된 탑승자의 자세를 요약하는 파라미터이다. 도 4를 참고하면, 접촉 행위 탐지 장치는 제2 공격 영상(421)의 탑승자의 특징점들 중에서, 세로축 상에서 가장 높이 위치한 특징점 및 가장 낮게 위치한 특징점의 세로축 상의 거리로부터 탑승자의 높낮이를 결정할 수 있다.
도 4를 참고하면, 제2 영상(420) 이후에 촬영된 제3 영상(430)은 제1 탑승자(440) 및 제2 탑승자(450) 간에 접촉 행위가 발생한 상황을 촬영할 수 있다. 접촉 행위 탐지 장치는 제3 영상(430)으로부터 도출된 제1 탑승자(440) 및 제2 탑승자(450) 각각의 골격을 이용하여, 제3 영상(430)을 제3 골격 영상(431)으로 변환할 수 있다.
접촉 행위 탐지 장치는 제1 탑승자(440) 및 제2 탑승자(450) 각각의 높낮이의 변화로부터, 제1 탑승자(440) 및 제2 탑승자(450) 간에 접촉 행위가 발생하였는지를 결정할 수 있다. 제2 골격 영상(421) 및 제3 골격 영상(431)을 비교하면, 제2 탑승자(450)의 높낮이는 제2 골격 영상(421)에서의 높낮이(451) 보다 제3 골격 영상(431)에서의 높낮이(452)가 더 작음을 알 수 있다. 더 나아가서, 제1 탑승자(440)의 높낮이는 제2 골격 영상(421)에서의 높낮이(441) 보다 제3 골격 영상(431)에서의 높낮이(442)가 훨씬 작음을 알 수 있다.
즉, 제1 탑승자(440)의 높낮이의 변화는 제2 영상(420)에서 제3 영상(430)으로 전환되는 시점에, 미리 설정된 임계치 이상이 될 수 있다. 접촉 행위 탐지 장치는 제1 탑승자(440)의 높낮이의 변화가 미리 설정된 임계치 이상이 되었으므로, 제1 탑승자(440) 및 제2 탑승자(450)간에 접촉 행위가 발생한 것으로 결정될 수 있다.
일실시예에 따르면, 접촉 행위 탐지 장치는 제1 탑승자의 특징점들 및 제2 탑승자의 특징점들 중에서 서로 중첩된 특징점이 존재하는 경우, 접촉 행위가 발생한 것으로 결정할 수 있다. 즉, 접촉 행위 탐지 장치는 제1 탑승자의 특징점들 및 제2 탑승자의 특징점들 중에서, 동일한 좌표를 가지는 특징점이 존재하는지를 이용하여, 접촉 행위를 탐지할 수 있다. 도 4를 참고하면, 제1 탑승자(440)의 머리 끝의 특징점과 제2 탑승자(450)의 팔 끝의 특징점이 서로 중첩됨을 알 수 있다.
일실시예에 따르면, 접촉 행위 탐지 장치는 제1 탑승자의 골격 및 제2 탑승자의 골격이 서로 교차되는 경우, 접촉 행위가 발생한 것으로 결정될 수 있다. 제1 탑승자(440)의 골격 및 제2 탑승자(450)의 골격이 교차되는지 여부는 골격에 포함된 직선 및 곡선간에 교점이 존재하는지에 따라 결정될 수 있다. 도 4를 참고하면, 접촉 행위가 발생한 제3 영상(430)에서, 제1 탑승자(440)의 골격 및 제2 탑승자(450)의 골격이 서로 교차됨을 알 수 있다.
결론적으로, 접촉 행위 탐지 장치는 제1 탑승자(440)의 골격 및 제2 탑승자(450)의 골격이 서로 교차되는지 또는, 제1 탑승자(440)의 높낮이 및 제2 탑승자(450)의 높낮이의 변화를 이용하여 제1 탑승자(440) 및 제2 탑승자(450) 간의 접촉 행위를 탐지할 수 있다. 더 나아가서, 접촉 행위 탐지 장치는 많은 사람이 승강기에 탑승하거나, 승강기가 자주 오르내림으로써, 폭행 또는 폭력 행위가 발생할 확률이 낮은 상황을 고려하여, 제1 탑승자(440) 및 제2 탑승자(450) 간의 접촉 행위를 탐지할 수 있다.
도 5는 본 발명의 일실시예에 따른 접촉 행위 탐지 장치가 제1 탑승자 및 제2 탑승자 간에 접촉 행위를 탐지하는 동작을 설명하기 위한 흐름도이다. 일실시예에 따른 접촉 행위 탐지 방법을 실행하기 위한 프로그램이 기록된 컴퓨터에서 판독 가능한 기록 매체가 제공될 수 있다. 상기 프로그램은 접촉 행위 탐지 방법을 저장한 응용 프로그램, 디바이스 드라이버, 펌웨어, 미들웨어, 동적 링크 라이브러리(DLL) 및 애플릿 중 적어도 하나를 포함할 수 있다. 본 발명의 일실시예에 따르면, 접촉 행위 탐지 장치는 프로세서를 포함하고, 프로세서는 접촉 행위 탐지 방법이 기록된 기록 매체를 판독함으로써, 접촉 행위 탐지 방법을 수행할 수 있다.
도 5를 참고하면, 단계(510)에서, 일실시예에 따른 접촉 행위 탐지 장치는 승강기 내의 제1 탑승자 및 제2 탑승자가 촬영된 영상으로부터, 제1 탑승자 및 제2 탑승자 각각의 자세를 선을 이용하여 나타낸 골격을 추출할 수 있다. 접촉 행위 탐지 장치는 상기 영상을 미리 설정된 시간 간격으로 샘플링하고, 샘플링된 영상으로부터 제1 탑승자 및 제2 탑승자 각각의 골격을 추출할 수 있다.
접촉 행위 탐지 장치는 영상의 프레임에 포함된 제1 탑승자 및 제2 탑승자 각각의 이미지를 침식하여, 제1 탑승자 및 제2 탑승자 각각의 골격을 추출할 수 있다. 접촉 행위 탐지 장치는 하나 이상의 침식 마스크를 사용하여 제1 탑승자 및 제2 탑승자 각각의 이미지를 침식할 수 있다. 접촉 행위 탐지 장치가 침식 마스크를 사용함으로써, 제1 탑승자 및 제2 탑승자 각각의 이미지는 일정한 폭의 직선 또는 곡선의 집합으로 변환될 수 있다. 접촉 행위 탐지 장치는 제1 탑승자 및 제2 탑승자 각각의 골격으로부터, 제1 탑승자 및 제2 탑승자 각각의 특징점들을 결정할 수 있다.
도 5를 참고하면, 단계(520)에서, 일실시예에 따른 접촉 행위 탐지 장치는 제1 탑승자 및 제2 탑승자 각각의 골격을 비교하여, 제1 탑승자 및 제2 탑승자 각각의 높낮이의 변화를 측정할 수 있다. 제1 탑승자 및 제2 탑승자 각각의 높낮이는 제1 탑승자 및 제2 탑승자 각각의 골격 또는 특징점으로부터 결정될 수 있다. 접촉 행위 탐지 장치는 샘플링된 영상들 각각으로부터 결정된 제1 탑승자 및 제2 탑승자의 높낮이들의 변화를 실시간으로 추적할 수 있다.
도 5를 참고하면, 단계(530)에서, 측정된 높낮이의 변화가 미리 설정된 임계치 이상인 경우, 접촉 행위 탐지 장치는 제1 탑승자 및 제2 탑승자 간에 접촉 행위가 발생한 것으로 결정할 수 있다(단계(540)). 접촉 행위 탐지 장치는 제1 탑승자 및 제2 탑승자 간에 접촉 행위가 발생하였음을, 네트워크를 통하여 다른 단말로 알릴 수 있다. 측정된 높낮이의 변화가 미리 설정된 임계치 이하인 경우, 접촉 행위 탐지 장치는 제1 탑승자 및 제2 탑승자의 높낮이들의 변화를 계속 추적할 수 있다.
더 나아가서, 접촉 행위 탐지 장치는 접촉 행위가 폭행 또는 폭력 행위로 이어질 확률이 낮은 상황을 고려하여 상기 접촉 행위의 발생 여부를 결정할 수 있다. 단계(540)에서, 일실시예에 따른 접촉 행위 탐지 장치는, 승강기 내에, 제1 탑승자 및 제2 탑승자 이외에 미리 설정된 수 이상의 사람이 더 탑승한 경우, 접촉 행위가 발생하지 않은 것으로 결정할 수 있다. 다수의 사람이 승강기에 탑승함으로써, 신체적 접촉은 더 많이 발생될 수 있지만, 발생된 신체적 접촉이 폭행 또는 폭력 행위를 유발할 확률은 감소하기 때문이다.
일실시예에 따른 접촉 행위 탐지 장치는, 제1 탑승자 및 제2 탑승자가 승강기로 동시에 탑승하고, 제1 탑승자 및 제2 탑승자의 높낮이의 차가 미리 설정된 임계치 이상인 경우, 접촉 행위가 발생하지 않은 것으로 결정할 수 있다. 이 경우, 제1 탑승자 및 제2 탑승자는 보호자 및 피보호자의 관계에 있을 확률이 높기 때문이다. 이 경우, 제1 탑승자 및 제2 탑승자 간에 신체적 접촉이 발생하더라도, 발생된 신체적 접촉이 폭행 또는 폭력 행위를 유발할 확률이 낮으므로, 접촉 행위 탐지 장치는 접촉 행위가 발생하지 않은 것으로 결정할 수 있다.
일실시예에 따른 접촉 행위 탐지 장치는, 승강기가 동일한 층에 반복적으로 정지하거나, 또는 승강기가 미리 설정된 시간 이상 정지한 경우, 접촉 행위가 발생하지 않은 것으로 결정할 수 있다. 이 경우, 승강기의 고장으로 인하여 폭행 또는 폭력 행위가 발생될 확률이 감소하기 때문이다.
상술한 바와 같이, 접촉 행위 탐지 장치는 승강기 내의 복수의 탑승자들을 촬영하여, 탑승자 간에 접촉 행위가 발생하였는지를 신속하게 탐지할 수 있다. 접촉 행위 탐지 장치는 탑승자 간에 접촉 행위가 발생하였음을 외부에 알림으로써, 접촉 행위로 인하여 폭행 또는 폭력 행위가 발생하는 것을 차단할 수 있다. 이로써, 접촉 행위 탐지 장치는 승강기 내에서 발생되는 폭행 또는 폭력 행위를 실시간으로 차단할 수 있다.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.
110 : 승강기
120 : 접촉 행위 탐지 장치
130 : 외부 단말

Claims (13)

  1. 승강기 내의 제1 탑승자 및 제2 탑승자가 촬영된 영상을 저장하는 비디오 저장 장치; 및
    상기 영상을 이용하여, 상기 제1 탑승자 및 상기 제2 탑승자 간에 접촉 행위가 발생하였는지를 결정하는 프로세서
    를 포함하고,
    상기 프로세서는,
    상기 영상의 프레임에 포함된 상기 제1 탑승자의 이미지 및 상기 제2 탑승자의 이미지에 침식 마스크를 적용함으로써, 상기 제1 탑승자의 이미지 및 상기 제2 탑승자의 이미지 각각에 대한 침식 연산을 반복적으로 수행하고,
    상기 침식 연산이 수행된 상기 제1 탑승자의 이미지 및 상기 제2 탑승자의 이미지로부터, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 자세를, 상기 침식된 제1 탑승자의 이미지 및 상기 침식된 제2 탑승자의 이미지 각각에 포함된 일정한 폭의 직선 또는 곡선에 기초하여 나타낸 상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격을 추출하고,
    상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격으로부터, 상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격상에 위치하고, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 자세를 식별하는 특징점들을 결정하고,
    상기 제1 탑승자의 특징점들의 좌표 및 상기 제2 탑승자의 특징점들의 좌표를 비교하여, 상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격이 서로 교차되는지 여부를 판단하고,
    상기 특징점들로부터 결정되는 상기 제1 탑승자의 높낮이의 변화 또는 상기 제2 탑승자 각각의 높낮이의 변화가 미리 설정된 임계치 이상인지 여부를 판단하고,
    상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격이 서로 교차되고, 상기 제1 탑승자의 높낮이의 변화 또는 상기 제2 탑승자 각각의 높낮이의 변화가 미리 설정된 임계치 이상인 경우, 상기 접촉 행위가 발생한 것으로 결정하는 접촉 행위 탐지 장치.
  2. 삭제
  3. 제1항에 있어서,
    상기 프로세서는,
    상기 승강기 내에, 상기 제1 탑승자 및 상기 제2 탑승자 이외에 미리 설정된 수 이상의 사람이 더 탑승한 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 장치.
  4. 제1항에 있어서,
    상기 프로세서는,
    상기 제1 탑승자 및 상기 제2 탑승자가 상기 승강기로 동시에 탑승하고, 상기 제1 탑승자 및 상기 제2 탑승자의 높낮이의 차가 미리 설정된 임계치 이상인 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 장치.
  5. 제1항에 있어서,
    상기 프로세서는,
    상기 승강기가 동일한 층에 반복적으로 정지하거나, 또는 상기 승강기가 미리 설정된 시간 이상 정지한 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 장치.
  6. 승강기 내의 제1 탑승자 및 제2 탑승자가 촬영된 영상으로부터, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 자세를 선을 이용하여 나타낸 골격을 추출하는 단계;
    상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격이 서로 교차되는지를 판단하는 단계;
    상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격이 서로 교차되는 경우, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 골격을 비교하여, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 높낮이의 변화를 측정하는 단계; 및
    상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격이 서로 교차되고, 상기 높낮이의 변화가 미리 설정된 임계치 이상인 경우, 상기 제1 탑승자 및 상기 제2 탑승자 간에 접촉 행위가 발생한 것으로 결정하는 단계
    를 포함하고,
    상기 추출하는 단계는,
    상기 영상의 프레임에 포함된 상기 제1 탑승자의 이미지 및 상기 제2 탑승자의 이미지에 침식 마스크를 적용함으로써, 상기 제1 탑승자의 이미지 및 상기 제2 탑승자의 이미지 각각에 대한 침식 연산을 반복적으로 수행하는 단계;
    상기 침식 연산이 수행된 상기 제1 탑승자의 이미지 및 상기 제2 탑승자의 이미지로부터, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 자세를, 상기 침식된 제1 탑승자의 이미지 및 상기 침식된 제2 탑승자의 이미지 각각에 포함된 일정한 폭의 직선 또는 곡선에 기초하여 나타낸 상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격을 추출하는 단계; 및
    상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격으로부터, 상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격상에 위치하고, 상기 제1 탑승자 및 상기 제2 탑승자 각각의 자세를 식별하는 특징점들을 결정하는 단계
    를 포함하고,
    상기 판단하는 단계는,
    상기 제1 탑승자의 특징점들의 좌표 및 상기 제2 탑승자의 특징점들의 좌표를 비교하여 상기 제1 탑승자의 골격 및 상기 제2 탑승자의 골격이 서로 교차되는지를 판단하는 접촉 행위 탐지 방법.
  7. 삭제
  8. 제6항에 있어서,
    상기 결정하는 단계는,
    상기 승강기 내에, 상기 제1 탑승자 및 상기 제2 탑승자 이외에 미리 설정된 수 이상의 사람이 더 탑승한 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 방법.
  9. 제6항에 있어서,
    상기 결정하는 단계는,
    상기 제1 탑승자 및 상기 제2 탑승자가 상기 승강기로 동시에 탑승하고, 상기 제1 탑승자 및 상기 제2 탑승자의 높낮이의 차가 미리 설정된 임계치 이상인 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 방법.
  10. 제6항에 있어서,
    상기 결정하는 단계는,
    상기 승강기가 동일한 층에 반복적으로 정지하거나, 또는 상기 승강기가 미리 설정된 시간 이상 정지한 경우, 상기 접촉 행위가 발생하지 않은 것으로 결정하는 접촉 행위 탐지 방법.
  11. 삭제
  12. 삭제
  13. 삭제
KR1020160104278A 2016-08-17 2016-08-17 승강기에서의 접촉 행위를 탐지하는 장치 및 방법 KR101794456B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160104278A KR101794456B1 (ko) 2016-08-17 2016-08-17 승강기에서의 접촉 행위를 탐지하는 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160104278A KR101794456B1 (ko) 2016-08-17 2016-08-17 승강기에서의 접촉 행위를 탐지하는 장치 및 방법

Publications (1)

Publication Number Publication Date
KR101794456B1 true KR101794456B1 (ko) 2017-11-07

Family

ID=60384739

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160104278A KR101794456B1 (ko) 2016-08-17 2016-08-17 승강기에서의 접촉 행위를 탐지하는 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101794456B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111591847A (zh) * 2020-03-27 2020-08-28 重庆厚齐科技有限公司 一种电梯安全多媒体警示互动系统以及监测方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008037625A (ja) * 2006-08-09 2008-02-21 Hitachi Building Systems Co Ltd エレベーターの防犯装置
KR101238788B1 (ko) * 2011-08-02 2013-03-05 오티스 엘리베이터 컴파니 엘리베이터 방범시스템 및 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008037625A (ja) * 2006-08-09 2008-02-21 Hitachi Building Systems Co Ltd エレベーターの防犯装置
KR101238788B1 (ko) * 2011-08-02 2013-03-05 오티스 엘리베이터 컴파니 엘리베이터 방범시스템 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111591847A (zh) * 2020-03-27 2020-08-28 重庆厚齐科技有限公司 一种电梯安全多媒体警示互动系统以及监测方法
CN111591847B (zh) * 2020-03-27 2024-04-30 重庆厚齐科技有限公司 一种电梯安全多媒体警示互动系统以及监测方法

Similar Documents

Publication Publication Date Title
JP4663756B2 (ja) 異常行動検知装置
JP6741130B2 (ja) 情報処理システム、情報処理方法及びプログラム
US9842269B2 (en) Video processing apparatus, video processing method, and recording medium
KR102195706B1 (ko) 침입 탐지방법 및 그 장치
US20160217326A1 (en) Fall detection device, fall detection method, fall detection camera and computer program
TWI507998B (zh) 視訊分析
JP6729793B2 (ja) 情報処理装置、制御方法、及びプログラム
CN109508576B (zh) 一种异常驾驶行为检测方法、装置及电子设备
Abdo et al. Fall detection based on RetinaNet and MobileNet convolutional neural networks
WO2014175356A1 (ja) 情報処理システム、情報処理方法及びプログラム
US10200607B2 (en) Image capturing apparatus, method of controlling the same, monitoring camera system, and storage medium
JPWO2014010203A1 (ja) 転倒検知装置および転倒検知方法、転倒検知カメラ、並びにコンピュータ・プログラム
CN115984967A (zh) 基于深度学习的人体跌倒检测方法、装置及系统
JP5771039B2 (ja) 放置人物検出装置
KR101454644B1 (ko) 보행자 추적기를 이용한 서성거림을 탐지하는 방법
JPWO2008035411A1 (ja) 移動体情報検出装置、移動体情報検出方法および移動体情報検出プログラム
KR101860062B1 (ko) 낙상 감지 시스템 및 방법
JP4883415B2 (ja) 監視装置及びプログラム
JP5657377B2 (ja) 異常検知装置
KR101794456B1 (ko) 승강기에서의 접촉 행위를 탐지하는 장치 및 방법
CN114764895A (zh) 异常行为检测装置和方法
Christodoulidis et al. Near real-time human silhouette and movement detection in indoor environments using fixed cameras
JP2005284652A (ja) 動きベクトルを用いた映像監視方法及び装置
KR20220107920A (ko) 카메라 영상을 이용한 딥러닝 기술 기반 전방 보행자의 자세 예측 및 이를 활용한 충돌 위험도 추정 기술
KR101669885B1 (ko) 영상 기반 보행자 추돌 자동 검출 방법 및 이를 적용한 사물 인터넷 장치

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant