KR20090091539A - System for monitoring occurrence of dangerous motion - Google Patents
System for monitoring occurrence of dangerous motion Download PDFInfo
- Publication number
- KR20090091539A KR20090091539A KR1020080016861A KR20080016861A KR20090091539A KR 20090091539 A KR20090091539 A KR 20090091539A KR 1020080016861 A KR1020080016861 A KR 1020080016861A KR 20080016861 A KR20080016861 A KR 20080016861A KR 20090091539 A KR20090091539 A KR 20090091539A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- motion
- frame
- dangerous
- frames
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
- G06T7/248—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving reference images or patches
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Closed-Circuit Television Systems (AREA)
- Alarm Systems (AREA)
Abstract
Description
본 발명은 위험 동작 발생 감시 시스템에 관한 것으로, 특히 영상 촬영을 통해 획득된 촬영 영상 내에 존재하는 이동체의 위험 동작을 실시간으로 감시할 수 있도록 하는 위험 동작 발생 감시 시스템에 관한 것이다.The present invention relates to a dangerous motion occurrence monitoring system, and more particularly, to a dangerous motion occurrence monitoring system for real-time monitoring of a dangerous motion of a moving object existing in a captured image obtained through image capturing.
오늘날 어린이나 노인 또는 환자 등의 보호가 필요한 사람들의 위험 동작 발생 여부를 감시하여 위험 상황을 알리는 기술의 개발이 활발히 진행되고 있다.Today, there is an active development of a technology for notifying a dangerous situation by monitoring a dangerous operation of a child, an elderly person or a patient who needs to protect the patient.
최근에는 목이나 허리에 착용 가능하며 넘어진 사람이 버튼을 눌러 가까운 응급센터로 도움을 요청할 수 있게 하는 커뮤니티 알람(Community Alarm) 장치나, 가속도 센서(Accelerometers)를 가슴이나 벨트에 착용하여 넘어질 때 가속도 값이 갑자기 변화하는 것을 감지하여 자동으로 보호자나 의사에게 위급 상황 발생을 알리는 웨어러블 폴 검출 장치(Wearable Fall Detection Device) 등이 일반적으로 어린이나 노인 또는 환자 등의 위험 동작 발생 여부를 감시하는 장치로 활용되고 있 다.Recently worn on the chest or belt, a community alarm device or acceleration sensor (accelerometers) that can be worn around the neck or waist and allows a person to fall down for assistance at the nearest emergency center with the push of a button. Wearable Fall Detection Device, which detects sudden changes in value and automatically alerts guardian or doctor to emergencies, is commonly used as a device to monitor dangerous behavior of children, the elderly, or patients. It is becoming.
그러나, 위험 동작 감시가 필요한 어린이나 노인 또는 환자들은 커뮤니티 알람 장치 또는 웨어러블 폴 검출 장치와 같은 종래의 위험 동작 감시 장치들을 착용하는 것을 종종 잊어버리거나, 혹은 커뮤니티 알람 장치를 착용하고 있다 하여도 넘어짐 등의 위험 동작 발생시 정신을 잃거나, 심각한 부상으로 인해 움직일 수가 없어, 버튼을 누르는 등의 행위를 통해 위급 상황 발생을 알릴 수가 없기 때문에, 위험 동작으로 인한 부상 발생시 신속하게 대처하기 어려운 문제점이 있다.However, children, seniors or patients who need to monitor dangerous motion often forget to wear conventional dangerous motion monitoring devices such as community alarms or wearable pole detection devices, or even fall over wearing community alarm devices. It is difficult to cope quickly when an injury occurs due to a dangerous operation because it is not possible to move out of mind or to move due to serious injuries when dangerous operation occurs.
본 발명은 전술한 바와 같은 문제점을 해결하기 위해 안출된 것으로, 영상 촬영을 통해 획득된 영상 프레임을 시간적 템플릿 기반으로 분석하여 촬영 영상 내에 존재하는 이동체의 위험 동작을 실시간으로 감시할 수 있도록 하는 위험 동작 발생 감시 시스템을 제공하는데, 그 목적이 있다. The present invention has been made to solve the problems described above, the risk operation to monitor the dangerous motion of the moving object present in the captured image in real time by analyzing the image frame obtained through the image based on the temporal template To provide a generation monitoring system, the purpose is.
전술한 바와 같은 목적을 달성하기 위한 것으로, 본 발명의 일 실시예에 따른 위험 동작 발생 감시 시스템은, 영상을 촬영하는 영상 촬영부와; 상기 영상 촬영부를 통해 촬영된 영상을 분석하여 객체 출현 여부를 확인하고, 객체 출현시 객체의 동작 변화 정도가 위험 동작에 해당하는 지를 판단하여 위험 동작에 해당하는 경우, 위험 동작이 발생한 것으로 인식하여 위험 동작 발생 경보를 출력하는 위험 동작 감시부를 포함하여 이루어지는 것이 바람직하다.In order to achieve the object as described above, the dangerous operation occurrence monitoring system according to an embodiment of the present invention, the image capture unit for taking an image; Analyzing the image taken through the image capturing unit to determine whether the object appeared, determine whether the degree of change of the operation of the object corresponds to the dangerous movement when the object appears, if it corresponds to the dangerous movement, it is recognized that the dangerous movement has occurred It is preferable to include a dangerous operation monitoring unit for outputting an operation occurrence alarm.
본 발명의 위험 동작 발생 감시 시스템에 따르면, 영상 촬영을 통해 획득된 영상 프레임을 시간적 템플릿 기반으로 분석하여 촬영 영상 내에 존재하는 이동체의 위험 동작을 실시간으로 감시함으로써, 노인 및 환자 등이 갑자기 쓰러지는 경우에 발생될 수 있는 심각한 부상들에 대해 신속히 대처할 수 있는 효과가 있다. According to the dangerous motion generation monitoring system of the present invention, by analyzing the video frame obtained through the video shooting based on the temporal template, by monitoring the dangerous motion of the moving object existing in the captured video in real time, when the elderly and patients suddenly fall down It is effective to deal quickly with serious injuries that may occur.
이하에서는, 첨부된 도면을 참조하여 본 발명의 실시예에 다른 위험 동작 발생 감시 시스템 및 방법에 대하여 상세하게 설명한다.Hereinafter, with reference to the accompanying drawings will be described in detail with respect to the dangerous operation occurrence monitoring system and method according to an embodiment of the present invention.
도 1은 본 발명의 일 실시예에 따른 위험 동작 발생 감시 시스템의 구성을 개략적으로 도시한 도면이다.1 is a view schematically showing the configuration of a dangerous operation occurrence monitoring system according to an embodiment of the present invention.
도 1에 의하면, 본 발명의 일 실시예에 따른 위험 동작 발생 감시 시스템의 구성은 영상 촬영부(100)와, 위험 동작 감시부(200)를 포함하여 이루어진다.Referring to FIG. 1, the dangerous motion occurrence monitoring system according to an embodiment of the present invention includes an
영상 촬영부(100)는 자신이 설치된 장소의 촬영 영역 내에서 영상을 촬영하여 촬영된 영상을 실시간으로 위험 동작 감시부(200)로 전달한다. 예를 들어, 영상 촬영부(100)는 컴퓨팅 장치용 USB 웹 카메라 등을 포함하여 이루어질 수 있다.The
위험 동작 감시부(200)는 영상 촬영부(100)로부터 영상을 전달받음에 따라, 전달받은 영상에 객체 출현 여부를 확인하고, 객체 출현시 출현된 객체의 동작 변화 정도가 위험 동작에 해당하는 지를 판단하여 위험 동작에 해당하는 경우, 위험 동작 발생 경보를 출력하는 한편, 위험 동작에 해당하는 영상을 재생한다.As the dangerous
아울러, 위험 동작은 갑자기 쓰러지는 동작, 즉 낙상 동작 및 넘어짐 동작 등을 포함하는 것이 바람직하다.In addition, the dangerous operation preferably includes a sudden falling operation, that is, a falling operation and a falling operation.
한편, 위험 동작 감시부(200)는 도 2에 도시된 바와 같이, 영상 처리 수단(210), 광도 프레임 생성 수단(220), 시간적 템플릿 영상 생성 수단(230), 영상 프레임 저장 수단(240), 경보 출력 수단(250), 영상 출력 수단(260) 및 제어 수 단(270)을 포함하여 이루어진다.Meanwhile, as illustrated in FIG. 2, the dangerous
영상 처리 수단(210)은 영상 촬영부(100)로부터 실시간으로 영상을 전달받아, 전달받은 영상을 특정 시간 주기로 캡쳐하여 영상 프레임을 생성하고, 생성된 영상 프레임을 재생 순서에 따라 순차적으로 제어 수단(270)으로 전달한다. 예를 들어, 영상 처리 수단(210)은 도 3에 도시된 바와 같이, 영상 촬영부(100)로부터 전달받은 영상을 특정 시간 주기로 캡쳐하여 영상 프레임을 생성한다.The
광도 프레임 생성 수단(220)은 제어 수단(270)으로부터 객체 출현 영상 프레임들을 전달받음에 따라, 전달받은 각 객체 출현 영상 프레임을 이루는 픽셀의 휘도 성분을 이용하여 객체 출현 영상 프레임별 광도 프레임을 생성하여 제어 수단(270)으로 전달하되, 광도 프레임을 생성할 때, 광도 프레임 내에 존재하는 객체를 휘도 성분으로 이루어진 실루엣 형태로 변형시키는 것이 바람직하다. 예를 들어, 광고 영상 프레임 변환 수단은 도 4에 도시된 바와 같이, 객체 출현 영상 프레임을 광도 프레임으로 변환시, 영상 프레임 내에 존재하는 객체를 실루엣 형태로 변형시키게 된다.As the luminance frame generating means 220 receives the object appearance image frames from the control means 270, the luminance frame generating means 220 generates a luminance frame for each object appearance image frame by using the luminance component of the pixels constituting the received object appearance image frames. While transmitting to the control means 270, when generating the luminance frame, it is preferable to transform the object present in the luminance frame into a silhouette form of the luminance component. For example, as illustrated in FIG. 4, the advertisement image frame converting means transforms an object present in the image frame into a silhouette form when the object appearance image frame is converted into a luminance frame.
한편, 광도 프레임 생성 수단(220)은 광도 프레임을 생성할 때, 제어 수단(270)으로부터 전달받은 객체 출현 영상 프레임들 중 서로 인접한 프레임 간의 픽셀값 차를 이용하여 차영상들을 획득하고, 획득된 차영상들 중 서로 인접한 차영상 간의 픽셀값 차를 이용하여 광도 프레임 내에 존재하는 객체를 실루엣 형태로 변형시킨다.Meanwhile, when the luminance
시간적 템플릿 영상 생성 수단(230)은 제어 수단(270)으로부터 동작 발생 광 도 프레임들을 전달받음에 따라, 전달받은 동작 발생 광도 프레임들을 일정 간격별로 나누어 누적시키고, 누적된 각 일정 간격에 해당하는 프레임들 내에 존재하는 실루엣 형태로 이루어진 객체의 동작 히스토리를 시간에 따라 분석하고, 분석 결과에 따라 광도 프레임 생성 수단(220)으로부터 전달받은 동작 발생 광도 프레임들의 일정 간격별 시간적 템플릿 영상을 생성한 후, 생성된 시간적 템플릿 영상들을 제어 수단(270)으로 전달한다. 예를 들어, 시간적 템플릿 영상 생성 수단(230)은 도 5에 도시된 바와 같이, 동작 발생 광도 프레임들 각각에 존재하는 객체의 동작 영역 크기 및 동작 위치를 확인하여 동작 발생 광도 프레임들의 일정 간격별 시간적 템플릿 영상을 생성한다.As the temporal template image generating means 230 receives the motion generating luminance frames from the control means 270, the temporal template image generating means 230 accumulates the received motion generating luminance frames at predetermined intervals and frames corresponding to each accumulated interval. After analyzing the motion history of the object in the form of a silhouette existing in the time, and generating a temporal template image of a predetermined interval of the motion-induced brightness frame received from the brightness frame generation means 220 according to the analysis result, The temporal template images are transmitted to the control means 270. For example, as illustrated in FIG. 5, the temporal template
영상 프레임 저장 수단(240)은 제어 수단(270)의 제어에 따라 영상 프레임들을 저장한다.The image frame storage means 240 stores the image frames under the control of the control means 270.
경보 출력 수단(250)은 제어 수단(270)의 제어에 따라 위험 동작 발생 경보를 출력한다.The alarm output means 250 outputs a dangerous operation occurrence alarm under the control of the control means 270.
영상 출력 수단(260)은 제어 수단(270)의 제어에 따라 영상을 재생한다.The image output means 260 reproduces an image under the control of the control means 270.
제어 수단(270)은 영상 처리 수단(210)으로부터 영상 프레임을 순차적으로 전달받아, 전달받은 각 영상 프레임과 기설정된 기준 배경 영상 프레임 간의 비교를 통해, 각 영상 프레임 내의 객체 출현 여부를 인식함으로써, 영상 처리 수단(210)으로부터 전달되는 영상 프레임들 중 객체 출현 영상 프레임들을 검출하고, 검출된 객체 출현 영상 프레임들을 광도 프레임 생성 수단(220)으로 전달한다. 여기서, 기준 배경 영상 프레임은 영상 촬영부(100)의 촬영 영역 내에 동작 객체가 존재하지 않을 때, 영상 촬영부(100)를 통해 촬영하여 획득 설정되는 것이 바람직하다.The control means 270 sequentially receives the image frames from the image processing means 210 and recognizes whether an object appears in each image frame by comparing the received image frames with a preset reference background image frame. The object appearance image frames are detected among the image frames transmitted from the
또한, 제어 수단(270)은 광도 프레임 생성 수단(220)으로부터 광도 프레임들을 전달받음에 따라, 전달받은 광도 프레임들 각각에 존재하는 실루엣 형태의 객체 간 동작 차이, 즉 서로 인접한 광도 프레임에 각각 존재하는 객체의 실루엣 형태를 이루는 픽셀들 간의 위치 차이를 이용하여 광도 프레임별 객체의 동작 변화량을 산출하고, 산출된 동작 변화량 크기에 따라 동작 발생 광도 프레임을 검출하며, 검출된 동작 발생 광도 프레임을 시간적 템플릿 영상 생성 수단(230)으로 전달한다.In addition, as the control means 270 receives the light intensity frames from the light intensity frame generation means 220, the difference in motion between the objects in the form of silhouettes present in each of the received light intensity frames, that is, in the light intensity frames adjacent to each other, respectively. Calculate the motion variation of the object for each luminosity frame by using the position difference between the pixels forming the silhouette of the object, detect the motion-induced luminosity frame according to the calculated amount of motion variation, and use the detected motion-induced luminosity frame as a temporal template image. It passes to the generating means 230.
한편, 제어 수단(270)은 광도 프레임별로 산출된 객체의 동작 변화량이 기설정된 제1기준치를 초과하는 지를 확인하여, 기설정된 제1기준치를 초과하는 경우에, 기설정된 제1기준치를 초과하는 동작 변화량을 보인 광도 프레임을 동작 발생 광도 프레임으로 인식하여 검출한다.On the other hand, the control means 270 checks whether the amount of change in the operation of the object calculated for each luminosity frame exceeds the preset first reference value, and exceeds the preset first reference value when it exceeds the preset first reference value. The luminance frame showing the amount of change is recognized and detected as the operation generated luminance frame.
또한, 제어 수단(270)은 시간적 템플릿 영상 생성 수단(230)으로부터 시간적 템플릿 영상들을 전달받음에 따라, 전달받은 각 시간적 템플릿 영상 내에 존재하는 객체의 동작 영역 크기 및 동작 위치를 확인하고, 확인된 동작 영역 크기 및 동작 위치를 이용하여 시간적 템플릿 영상별로 객체의 동작 영역 경계 박스(500) 및 동작 중심점(510)을 설정한 후, 시간적 템플릿 영상별로 설정된 객체의 동작 영역 경계 박스(500)의 크기 및 동작 중심점(510)의 위치 비교를 통해 객체의 동작 영역 경계 박스 크기 변화량 및 동작 중심점 위치 변화량을 산출한 후, 산출된 동작 영역 경계 박스 크기 변화량 및 중심점 위치 변화량 중 적어도 어느 하나가 기설정된 제2기준치를 초과하는지 여부를 확인한 후, 확인 결과 기설정된 제2기준치를 초과하는 경우에, 경보 출력 수단(250)을 통해 위험 동작 발생 경보를 출력시키고, 영상 출력 수단(260)을 통해 위험 동작 영상을 재생시킨다.In addition, as the control means 270 receives the temporal template images from the temporal template image generating means 230, the control means 270 checks the size and position of the motion region of the object existing in each of the received temporal template images, and confirms the confirmed operation. After setting the motion
이러한, 제어 수단(270)은 시간적 템플릿 영상 내에 존재하는 객체의 동작 영역 크기 및 동작 위치를 확인하고, 확인 결과를 통계적 모멘트 분석(Statistic Moment Analysis) 방식을 통해 분석하여 객체의 동작 영역 경계 박스(500) 및 동작 중심점(510)을 설정하는 것이 바람직하다.The control means 270 checks an operation region size and an operation position of the object existing in the temporal template image, and analyzes the result of the determination through a statistical moment analysis method to determine an operation
즉, 제어 수단(270)은 시간적 템플릿 영상 생성 수단(230)으로부터 전달받은 동작 영역 경계 박스 크기 변화량 및 중심점 위치 변화량 중 적어도 어느 하나가 기설정된 제2기준치를 초과하는지 여부를 확인한 후, 확인 결과 기설정된 제2기준치를 초과하는 경우, 동작 영역 경계 박스 크기 변화량 또는 중심점 위치 변화량이 기설정된 제2기준치를 초과하는 시점부터 해당 기설정된 제2기준치 이하로 내려가는 시점까지의 시간 동안, 영상 처리 수단(210)으로부터 전달되는 영상 프레임들을 영상 프레임 저장 수단(240)에 저장시키면서, 영상 출력 수단(260)을 통해 재생시킨다.That is, the control means 270 checks whether at least one of the change amount of the operation area bounding box size and the change in the position of the center point received from the temporal template image generating means 230 exceeds the preset second reference value. When exceeding the set second reference value, the image processing means 210 for a time from the point of time when the change amount of the operation area boundary box size or the center point position exceeds the preset second reference value to the time when the value falls below the preset second reference value. The image frames transmitted from the ()) are reproduced through the image output means 260 while being stored in the image frame storage means 240.
한편, 제어 수단(270)은 통신 모듈을 구비하여 이루어져, 시간적 템플릿 영상 생성 수단(230)으로부터 전달받은 동작 영역 경계 박스 크기 변화량 및 중심점 위치 변화량 중 적어도 어느 하나가 기설정된 제2기준치를 초과하는지 여부를 확인한 후, 확인 결과 기설정된 제2기준치를 초과하는 경우에, 구비된 통신 모듈을 통해 인터넷망에 접속하여 해당 접속된 인터넷망에 통신 연결되어 있는 외부 서버(예 를 들어, 응급상황처리센터 서버 등)로 위험 동작 발생을 통보함으로써, 외부 서버로 하여금 위험 동작 감시부(200)로부터 위험 동작 발생을 통보받음에 따라, 위험 동작 발생 경보를 출력하면서, 위험 동작 감시부(200)에 구비된 영상 프레임 저장 수단(240)에 저장되어 있는 영상 프레임을 불러와 재생할 수 있도록 해준다. On the other hand, the control means 270 is provided with a communication module, whether at least one of the change amount of the operation area bounding box size and the change in the position of the center point received from the temporal template image generating means 230 exceeds the predetermined second reference value; After confirming, if the check result exceeds the preset second reference value, an external server (for example, an emergency treatment center server) connected to the internet network through the provided communication module and connected to the connected internet network Etc.) by notifying the occurrence of the dangerous motion, the external server is notified of the dangerous motion occurrence from the dangerous
이러한, 외부 서버는 도면에는 도시되지 않았지만, 위험 동작 발생 경보를 출력하기 위한 경보 출력 장비, 영상 재생을 위한 영상 출력 장비 및 인터넷망을 통한 위험 동작 감시부(200)와의 통신 연결을 위한 통신 장비 등을 포함하여 이루어질 수 있다.Although not shown in the drawings, the external server may include an alarm output device for outputting a dangerous motion occurrence alarm, a video output device for reproducing an image, and a communication device for communication connection with the dangerous
도 6은 본 발명의 일 실시예에 따른 위험 동작 발생 감시 방법을 순차적으로 도시한 도면이다.6 is a diagram sequentially illustrating a method of monitoring a dangerous operation occurrence according to an embodiment of the present invention.
도 6을 참조하여 본 발명의 일 실시예에 따른 위험 동작 발생 감시 방법을 설명하면, 먼저 타인의 보호가 필요한 사람(예를 들어, 어린이, 노인 또는 환자 등)의 위험 동작 발생 예상 장소에 설치된 영상 촬영부(100)는 자신이 설치된 위치의 촬영 영역의 영상을 촬영하여 위험 동작 감시부(200)로 실시간 전달한다(S600).Referring to FIG. 6, a method of monitoring a dangerous motion occurrence according to an embodiment of the present invention, first, an image installed at a place where a dangerous motion occurrence of a person who needs protection of another person (eg, a child, an elderly person or a patient) occurs The photographing
상기한 단계 S600을 통해 영상 촬영부(100)로부터 실시간으로 영상을 전달받은 위험 동작 감시부(200)는 전달받은 영상을 특정 시간 주기로 캡쳐하여 영상 프레임을 생성하고(S610), 생성된 영상 프레임별로 기설정된 기준 배경 영상 프레임 간의 비교를 통해, 각 영상 프레임 내의 객체 출현 여부를 인식함으로써, 상기한 단계 S610을 통해 생성된 영상 프레임들 중 객체 출현 영상 프레임들을 검출한다(S620).The dangerous
이후, 위험 동작 감시부(200)는 상기한 단계 S620을 통해 검출된 각 객체 출현 영상 프레임을 이루는 픽셀의 휘도 성분을 이용하여 상기한 단계 S620을 통해 검출된 객체 출현 영상 프레임별 광도 프레임을 생성한다(S630).Thereafter, the dangerous
한편, 상기한 단계 S630에서 위험 동작 감시부(200)는 광도 프레임을 생성할 때, 광도 프레임 내에 존재하는 객체를 실루엣 형태로 변형시키되, 상기한 단계 S620을 통해 검출된 객체 출현 영상 프레임들 중 서로 인접한 프레임 간의 픽셀값 차를 이용하여 차영상들을 획득하고, 획득된 차영상들 중 서로 인접한 차영상 간의 픽셀값 차를 이용하여 광도 프레임 내에 존재하는 객체를 실루엣 형태로 변형시키는 것이 바람직하다.Meanwhile, in operation S630, the dangerous
이후, 위험 동작 감시부(200)는 상기한 단계 S630을 통해 생성된 광도 프레임들 각각에 존재하는 실루엣 형태의 객체 간 동작 차이, 즉 서로 인접한 광도 프레임에 각각 존재하는 객체의 실루엣 형태를 이루는 픽셀들 간의 위치 차이를 이용하여 광도 프레임별 객체의 동작 변화량을 산출하고(S640), 산출된 동작 변화량 크기에 따라 동작 발생 광도 프레임을 검출하며(S650), 검출된 동작 발생 광도 프레임들을 일정 간격별로 나누어 누적시키고, 누적된 각 일정 간격에 해당하는 프레임들 내에 존재하는 실루엣 형태로 이루어진 객체의 동작 히스토리를 시간에 따라 분석하고, 분석 결과에 따라 광도 프레임 생성 수단(220)으로부터 전달받은 동작 발생 광도 프레임들의 일정 간격별 시간적 템플릿 영상을 생성하며(S660), 생성된 각 시간적 템플릿 영상 내에 존재하는 객체의 동작 영역 크기 및 동작 위치를 확인하고, 확인된 동작 영역 크기 및 동작 위치를 이용하여 시간적 템플릿 영상별로 객체 의 동작 영역 경계 박스(500) 및 동작 중심점(510)을 설정한 후, 시간적 템플릿 영상별로 설정된 객체의 동작 영역 경계 박스(500)의 크기 및 동작 중심점(510)의 위치 비교를 통해 객체의 동작 영역 경계 박스 크기 변화량 및 동작 중심점 위치 변화량을 산출한다(S670).Thereafter, the dangerous
한편, 상기한 단계 S650에서 위험 동작 감시부(200)는 상기한 단계 S640을 통해 광도 프레임별로 산출된 객체의 동작 변화량이 기설정된 제1기준치를 초과하는 지를 확인하여, 기설정된 제1기준치를 초과하는 경우에, 기설정된 제1기준치를 초과하는 동작 변화량을 보인 광도 프레임을 동작 발생 광도 프레임으로 인식하여 검출하는 것이 바람직하다.Meanwhile, in step S650, the dangerous
이후, 위험 동작 감시부(200)는 상기한 단계 S670을 통해 산출된 동작 영역 경계 박스 크기 변화량 및 동작 중심점 위치 변화량 중 적어도 어느 하나가 기설정된 제2기준치를 초과하는지 여부를 확인한 후(S680), 확인 결과 기설정된 제2기준치를 초과하는 경우에, 위험 동작 발생 경보를 출력하고, 위험 동작 영상을 재생한다(S690).Thereafter, the dangerous
상기한 단계 S690에서 위험 동작 감시부(200)는 위험 동작 발생 경보를 출력시키면서, 동작 영역 경계 박스 크기 변화량 및 중심점 위치 변화량 중 적어도 어느 하나가 기설정된 제2기준치를 초과하는 시점부터 해당 기설정된 제2기준치 이하로 내려가는 시점까지의 시간 동안, 상기한 단계 S610을 통해 생성되는 영상 프레임들을 내부에 구비된 영상 프레임 저장 수단(240)에 저장시킴과 동시에, 재생한다.In operation S690, the dangerous
다르게는, 상기한 단계 S680에서의 확인 결과, 상기한 단계 S670을 통해 산출된 동작 영역 경계 박스 크기 변화량 및 동작 중심점 위치 변화량 중 적어도 어느 하나가 기설정된 제2기준치를 초과하는 경우에, 위험 동작 감시부(200)는 구비된 통신 모듈을 통해 인터넷망에 접속하여 해당 접속된 인터넷망에 통신 연결되어 있는 외부 서버로 위험 동작 발생을 통보한다.Alternatively, the dangerous operation monitoring is performed when at least one of the operation area bounding box size change amount and the operation center point position change amount calculated through the step S670 exceeds the preset second reference value. The
그러면, 외부 서버에서는 위험 동작 감시부(200)로부터 위험 동작 발생을 통보받음에 따라, 위험 동작 발생 경보를 출력하면서, 위험 동작 감시부(200)에 구비된 영상 프레임 저장 수단(240)에 저장되어 있는 영상 프레임들을 불러와 영상을 재생한다.Then, as the external server is notified of the dangerous motion occurrence from the dangerous
본 발명의 위험 동작 발생 감시 시스템에 따르면, 영상 촬영을 통해 획득된 영상 프레임을 시간적 템플릿 기반으로 분석하여 촬영 영상 내에 존재하는 이동체의 위험 동작을 실시간으로 감시함으로써, 노인 및 환자 등이 갑자기 쓰러지는 경우에 발생될 수 있는 심각한 부상들에 대해 신속히 대처할 수 있다.According to the dangerous motion generation monitoring system of the present invention, by analyzing the video frame obtained through the video shooting based on the temporal template, by monitoring the dangerous motion of the moving object existing in the captured video in real time, when the elderly and patients suddenly fall down Respond promptly to serious injuries that may occur.
도 1은 본 발명의 일 실시예에 따른 위험 동작 발생 감시 시스템의 구성을 개략적으로 도시한 도면.1 is a view schematically showing the configuration of a dangerous operation occurrence monitoring system according to an embodiment of the present invention.
도 2는 도 1에 있어서, 위험 동작 감시부의 구성을 개략적으로 도시한 도면.2 is a view schematically showing the configuration of the dangerous operation monitoring unit in FIG.
도 3은 도 2에 있어서, 영상 처리 수단에 의해 생성된 영상 프레임을 예시적으로 도시한 도면.FIG. 3 exemplarily shows an image frame generated by the image processing means in FIG. 2; FIG.
도 4는 도 2에 있어서, 광도 프레임 생성 수단에 의해 생성된 광도 프레임을 예시적으로 도시한 도면.FIG. 4 exemplarily shows a luminosity frame generated by the luminosity frame generating means in FIG.
도 5는 도 2에 있어서, 시간적 템플릿 영상 생성 수단에 의해 생성된 템플릿 영상 프레임을 예시적으로 도시한 도면.FIG. 5 exemplarily illustrates a template image frame generated by the temporal template image generating unit of FIG. 2. FIG.
도 6은 본 발명의 일 실시예에 따른 위험 동작 발생 감시 방법을 순차적으로 도시한 도면.6 is a diagram sequentially illustrating a method of monitoring a dangerous operation occurrence according to an embodiment of the present invention.
*** 도면의 주요 부분에 대한 부호의 설명 ****** Explanation of symbols for the main parts of the drawing ***
100: 영상 촬영부 200: 위험 동작 감시부100: image capturing unit 200: dangerous motion monitoring unit
210: 영상 처리 수단 220: 광도 프레임 생성 수단210: image processing means 220: luminous intensity frame generating means
230: 시간적 템플릿 영상 생성 수단 240: 영상 프레임 저장 수단230: temporal template image generating means 240: image frame storage means
250: 경보 출력 수단 260: 영상 출력 수단250: alarm output means 260: video output means
270: 제어 수단 500: 동작 영역 경계 박스270: control means 500: operation area bounding box
510: 동작 중심점510: center of motion
Claims (11)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080016861A KR100927776B1 (en) | 2008-02-25 | 2008-02-25 | Hazardous Behavior Monitoring System |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080016861A KR100927776B1 (en) | 2008-02-25 | 2008-02-25 | Hazardous Behavior Monitoring System |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090091539A true KR20090091539A (en) | 2009-08-28 |
KR100927776B1 KR100927776B1 (en) | 2009-11-20 |
Family
ID=41208924
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020080016861A KR100927776B1 (en) | 2008-02-25 | 2008-02-25 | Hazardous Behavior Monitoring System |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100927776B1 (en) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011108913A1 (en) * | 2010-03-01 | 2011-09-09 | Mimos Berhad | A tracking and movement monitoring system and a method thereof |
KR101155273B1 (en) * | 2010-07-06 | 2012-06-18 | 중앙대학교 산학협력단 | Apparatus and method for tunnel monitoring based on adaptive background |
KR101309366B1 (en) * | 2012-02-16 | 2013-09-17 | 부경대학교 산학협력단 | System and Method for Monitoring Emergency Motion based Image |
KR101357721B1 (en) * | 2012-04-30 | 2014-02-05 | 고려대학교 산학협력단 | Apparatus for detecting of single elderly persons’ abnormal situation using image and method thereof |
KR101438002B1 (en) * | 2013-02-28 | 2014-09-16 | 계명대학교 산학협력단 | Falldown prevent device |
WO2016018006A1 (en) * | 2014-07-31 | 2016-02-04 | 삼성에스디에스 주식회사 | Method and device for sensing collapse in image, and system using same |
KR101704471B1 (en) | 2015-12-08 | 2017-02-10 | 조선대학교산학협력단 | Fall detection apparatus and method thereof |
CN109730490A (en) * | 2019-03-04 | 2019-05-10 | 上海海事大学 | A kind of safe and portable is intelligent baby bed |
KR101980551B1 (en) * | 2018-11-08 | 2019-05-21 | 주식회사 다누시스 | System For Detecting An Action Through Real-Time Intelligent CCTV Image Analysis Using Machine Learning Object Detection And Method For Detecting An Action Through Real-Time Intelligent CCTV Image Analysis Using Machine Learning Object Detection |
CN117830920A (en) * | 2023-11-27 | 2024-04-05 | 无锡伙伴智能科技有限公司 | Monitoring method, device, equipment and storage medium |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4648644B2 (en) | 2003-12-01 | 2011-03-09 | 邦夫 麻生 | In-person monitoring system |
KR20050090947A (en) * | 2004-03-10 | 2005-09-14 | 이상로 | System for silver-tel |
KR20060086505A (en) * | 2005-01-25 | 2006-08-01 | 금동교 | Digital security system using motion detection and operating method thereof |
JP2007018101A (en) * | 2005-07-05 | 2007-01-25 | Asahi Breweries Ltd | Fall detection system |
-
2008
- 2008-02-25 KR KR1020080016861A patent/KR100927776B1/en active IP Right Grant
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011108913A1 (en) * | 2010-03-01 | 2011-09-09 | Mimos Berhad | A tracking and movement monitoring system and a method thereof |
KR101155273B1 (en) * | 2010-07-06 | 2012-06-18 | 중앙대학교 산학협력단 | Apparatus and method for tunnel monitoring based on adaptive background |
KR101309366B1 (en) * | 2012-02-16 | 2013-09-17 | 부경대학교 산학협력단 | System and Method for Monitoring Emergency Motion based Image |
KR101357721B1 (en) * | 2012-04-30 | 2014-02-05 | 고려대학교 산학협력단 | Apparatus for detecting of single elderly persons’ abnormal situation using image and method thereof |
KR101438002B1 (en) * | 2013-02-28 | 2014-09-16 | 계명대학교 산학협력단 | Falldown prevent device |
WO2016018006A1 (en) * | 2014-07-31 | 2016-02-04 | 삼성에스디에스 주식회사 | Method and device for sensing collapse in image, and system using same |
KR101704471B1 (en) | 2015-12-08 | 2017-02-10 | 조선대학교산학협력단 | Fall detection apparatus and method thereof |
KR101980551B1 (en) * | 2018-11-08 | 2019-05-21 | 주식회사 다누시스 | System For Detecting An Action Through Real-Time Intelligent CCTV Image Analysis Using Machine Learning Object Detection And Method For Detecting An Action Through Real-Time Intelligent CCTV Image Analysis Using Machine Learning Object Detection |
CN109730490A (en) * | 2019-03-04 | 2019-05-10 | 上海海事大学 | A kind of safe and portable is intelligent baby bed |
CN117830920A (en) * | 2023-11-27 | 2024-04-05 | 无锡伙伴智能科技有限公司 | Monitoring method, device, equipment and storage medium |
Also Published As
Publication number | Publication date |
---|---|
KR100927776B1 (en) | 2009-11-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100927776B1 (en) | Hazardous Behavior Monitoring System | |
JP6644827B2 (en) | Video surveillance system and video surveillance method | |
US20230410513A1 (en) | Abnormality detection device and abnormality detection method | |
KR20190015400A (en) | Machine telemetry transmission and digitization system | |
KR101309366B1 (en) | System and Method for Monitoring Emergency Motion based Image | |
KR100822476B1 (en) | Remote emergency monitoring system and method | |
JP2008077517A (en) | Camera block detection system | |
JPWO2015118953A1 (en) | Information processing apparatus, information processing method, and program | |
JP2015138427A (en) | monitor | |
JP2005323046A (en) | Monitoring system and monitoring camera | |
US20150023551A1 (en) | Method and device for detecting falls by image analysis | |
KR102443785B1 (en) | A surveillance system | |
JP2008541650A (en) | Monitoring method and apparatus | |
TW201701238A (en) | Falling down detecting systems and method | |
KR20130094488A (en) | System and method for monitoring emergency motion based image | |
KR20100051148A (en) | Warning system of accidental situation in monitoring area | |
JP6844503B2 (en) | Monitoring system | |
JP2020194227A (en) | Face hiding determination device, face hiding determination method, face hiding determination program, and occupant monitoring system | |
KR101704471B1 (en) | Fall detection apparatus and method thereof | |
WO2019136395A1 (en) | System and method for monitoring life signs of a person | |
KR102412270B1 (en) | Systen for preventing indoor human casualties | |
JP4954459B2 (en) | Suspicious person detection device | |
CN103164923A (en) | Home safety monitoring system and method | |
JP2007215032A (en) | Imaging apparatus and control method thereof | |
JP2012004720A (en) | Monitor, and monitoring system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130628 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20140627 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20150623 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20161102 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20171101 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20190114 Year of fee payment: 10 |
|
FPAY | Annual fee payment |
Payment date: 20190828 Year of fee payment: 11 |