KR20100007050A - Behavior pattern recognition device and its method - Google Patents

Behavior pattern recognition device and its method Download PDF

Info

Publication number
KR20100007050A
KR20100007050A KR1020080067478A KR20080067478A KR20100007050A KR 20100007050 A KR20100007050 A KR 20100007050A KR 1020080067478 A KR1020080067478 A KR 1020080067478A KR 20080067478 A KR20080067478 A KR 20080067478A KR 20100007050 A KR20100007050 A KR 20100007050A
Authority
KR
South Korea
Prior art keywords
behavior pattern
information
unit
signal
collecting unit
Prior art date
Application number
KR1020080067478A
Other languages
Korean (ko)
Other versions
KR100961476B1 (en
Inventor
송오영
김지호
박순형
Original Assignee
중앙대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 중앙대학교 산학협력단 filed Critical 중앙대학교 산학협력단
Priority to KR1020080067478A priority Critical patent/KR100961476B1/en
Publication of KR20100007050A publication Critical patent/KR20100007050A/en
Application granted granted Critical
Publication of KR100961476B1 publication Critical patent/KR100961476B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/19—Recognition using electronic means
    • G06V30/192—Recognition using electronic means using simultaneous comparisons or correlations of the image signals with a plurality of references
    • G06V30/194—References adjustable by an adaptive method, e.g. learning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Alarm Systems (AREA)

Abstract

PURPOSE: A behavior pattern recognition device and a method thereof are provided to collect video information without a blind spot only through one camera irrespective of a specific place and prevent an invasion of privacy. CONSTITUTION: An information collecting unit includes a camera capable of video photographing. A normal behavior pattern storage unit(240) stores normal behavior pattern information. A video information analyzing unit(220) analyzes a video information signal received from the information collecting unit. An information processing unit(200) performs wireless transmission/reception with the information collecting unit. The video information analyzing unit analyzes a behavior pattern based on transition speed and video transition included in the video information signal.

Description

행동 패턴 인식 장치 및 방법{BEHAVIOR PATTERN RECOGNITION DEVICE AND ITS METHOD}Behavior pattern recognition device and method {BEHAVIOR PATTERN RECOGNITION DEVICE AND ITS METHOD}

본 발명은 행동 패턴 인식 장치 및 방법에 관한 것으로, 구체적으로는 사용자의 행동 정보를 수집하고 분석하는 행동 패턴 인식 장치 및 방법에 관한 것이다.The present invention relates to an apparatus and method for recognizing behavior patterns, and more particularly, to an apparatus and method for recognizing behavior patterns for collecting and analyzing behavior information of a user.

현재 노인인구의 비율이 꾸준히 증가함에 따라, 혼자 생활하는 노인들이 많아지고 있으며, 이들은 갑작스런 건강의 이상 또는 외부적인 요인에 의한 응급 상황이 발생할 가능성이 높다.As the proportion of the elderly population is steadily increasing, more elderly people are living alone, and they are more likely to have an emergency due to sudden health abnormalities or external factors.

따라서, 이들의 행동 패턴과 상태를 인식하기 위한 연구가 널리 행하여지고 있다. 행동 패턴과 상태 인식의 방법으로는 카메라, 오디오, 위치 센서 등을 통하여 사용자의 행동에 대한 정보를 수집하고, 미리 저장된 정보와 비교 분석하여 사용자의 현재 상태를 파악하는 것이 제시되고 있다. Therefore, researches for recognizing these behavioral patterns and states have been widely conducted. As a method of behavior pattern and state recognition, information about a user's behavior is collected through a camera, an audio, a position sensor, and the like and compared with previously stored information to grasp the current state of the user.

이를 이용하여 독거노인, 임산부, 장애인, 어린이 등의 행동 정보를 수집하고 응급 상황 시에 이를 감지하고, 경고할 수 있다. 예를 들어, 독거노인들의 현 상태를 지속적으로 체크하여 위급 상황 시 경고할 수 있는 수단의 하나로써 비디오 카메라를 이용하는 방법이 있다. Using this information, behavioral information of elderly, pregnant, disabled, and children living alone can be collected, detected in an emergency, and alerted. For example, there is a method of using a video camera as a means of continuously checking the current status of the elderly living alone and warning in case of emergency.

한국공개특허공보 제2008-0026326호에는 움직임 영상 감시 방법이 개시되어 있다. Korean Laid-Open Patent Publication No. 2008-0026326 discloses a motion image monitoring method.

위 움직임 영상 감시 방법은 감시 카메라로부터 촬영되어 디지탈 신호로 변환되어 입력된 영상정보에서 영상의 배경으로부터 사람의 실루엣을 분리하여 이진화된 영상을 출력하는 영상전처리(S100)단계, 상기 영상전처리(S100)단계에서 분리된 사람의 실루엣의 정보에 주성분요소방법(PCA) 알고리즘을 적용하여 사람의 실루엣의 고유벡터(eigenvector)의 비율들의 변화를 파라미터로 자세변화를 분석하는 PCA연산처리(S200)단계, 사람의 실루엣의 고유벡터(eigenvector)의 비율에서 급격한 변화가 검출되어 응급상황인지를 판단하는 응급상황 판단단계(S300), 상기 응급상황판단 단계(S300)에서 응급상황이면 의사 또는 가족에게 무선 단말기로 응급상황임을 알리는 응급상황 알림단계로 이루어져 응급상황을 알리는 방법이 제시되어 있다.The motion image monitoring method is a video preprocessing step (S100) of outputting a binary image by separating the silhouette of a person from the background of the image in the image information is converted from the surveillance camera and converted into a digital signal, the image preprocessing (S100) PCA computation step (S200), which analyzes the posture change as a parameter by changing the proportions of the eigenvectors of the silhouette of the person by applying the PCA algorithm to the information of the silhouette of the person separated in the step. In the emergency situation determination step (S300) to determine whether a sudden change in the ratio of the eigenvector of the silhouette of the emergency situation (S300), the emergency situation determination step (S300) if the emergency situation to the doctor or family to the wireless terminal emergency An emergency situation notification step is provided to inform you that a situation is provided.

즉, 특정 장소에 카메라를 설치하고 촬영된 사용자의 영상정보를 분석하여 응급상황이라고 판단되는 경우 응급상황을 알리는 것이다. 하지만, 이러한 방법은 카메라가 설치된 특정 지역에서만 사용이 가능할 뿐이며, 더욱 정확한 정보 수집을 위해서 복수의 카메라가 필요하다. 예를 들어 주택을 촬영할 경우, 각각의 방, 거실, 부엌 및 화장실 등, 사용자가 머무를 수 있는 모든 장소에 카메라를 설치해야 한다. 또한, 가구 등에 의해 카메라가 촬영할 수 없는 사각지대가 생길 수 있을 뿐만 아니라, 사용자가 외출하여 응급 상황에 처하더라도 위치를 파악할 수 없어 응급 상황인지 여부를 파악할 방도가 없다. 더하여, 촬영되는 사용자가 화장실을 사 용하는 경우나 목욕시 또는 탈의시에 사생활 침해 문제가 발생할 수 있다.In other words, if it is determined that an emergency situation by installing a camera in a specific place and analyzing the image information of the user is taken to inform the emergency situation. However, this method can only be used in the specific area where the camera is installed, and multiple cameras are required for more accurate information collection. For example, if you're photographing a home, you should install cameras in every room where you can stay, including each room, living room, kitchen, and toilet. In addition, not only the blind spots that the camera can not shoot due to furniture, etc. can be generated, but even if the user goes out and is in an emergency situation, there is no way to determine whether it is an emergency situation. In addition, a privacy violation may occur when the user who is photographed uses the toilet or when taking a bath or undressing.

결과적으로, 종래 기술의 움직임 영상 감시 장치 및 방법은 카메라가 설치되는 특정 장소에서만 영상 정보의 수집이 가능하며, 영상 정보 수집을 위하여 복수의 카메라를 필요로 하고, 카메라가 영상 정보를 수집할 수 없는 사각지대가 생길 수 있다. 또한, 개인의 사생활 침해 문제가 발생할 수 있으며, 카메라가 설치된 특정 장소를 벗어난 경우 위치를 파악할 수 없다는 단점이 있다.As a result, the motion image surveillance apparatus and method of the related art can collect image information only at a specific place where a camera is installed, and require a plurality of cameras for collecting image information, and the camera cannot collect image information. Blind spots can occur. In addition, there may be a problem of invasion of personal privacy, there is a disadvantage that can not determine the location when the camera is out of a specific place installed.

본 발명은 특정 장소에 구애받지 않고 영상 정보 수집이 가능한 행동 패턴 인식 장치 및 방법을 제공함에 목적이 있다.An object of the present invention is to provide a behavior pattern recognition apparatus and method capable of collecting image information regardless of a specific place.

또한, 본 발명은 한대의 카메라만으로도 영상 정보 수집이 가능한 행동 패턴 인식 장치 및 방법을 제공함에 다른 목적이 있다.Another object of the present invention is to provide an apparatus and method for recognizing behavior patterns capable of collecting image information using only one camera.

또한, 본 발명은 카메라가 영상 정보를 수집할 수 없는 사각지대가 발생하지 않는 행동 패턴 인식 장치 및 방법을 제공함에 또 다른 목적이 있다.In addition, another object of the present invention is to provide an apparatus and method for recognizing a behavior pattern in which a blind spot in which a camera cannot collect image information does not occur.

또한, 본 발명은 개인 사생활 침해 문제를 유발하지 않는 행동 패턴 인식 장치 및 방법을 제공함에 또 다른 목적이 있다.Another object of the present invention is to provide an apparatus and method for recognizing a behavior pattern that does not cause a problem of personal privacy infringement.

또한, 본 발명은 현재 위치를 정확하게 파악할 수 있는 행동 패턴 인식 장치 및 방법을 제공함에 또 다른 목적이 있다.In addition, another object of the present invention is to provide an apparatus and method for recognizing a behavior pattern capable of accurately identifying a current position.

본원의 제1 발명에 따른 행동 패턴 인식 장치는, 동영상 촬영이 가능한 카메라를 포함하는 정보 수집부; 및 응급 신호 생성부, 정상 행동 패턴 정보 데이터가 저장되는 정상 행동 패턴 저장부, 및 상기 정보 수집부로부터 수신되는 영상 정보 신호를 분석하기 위한 영상 정보 분석부를 포함하며, 상기 정보 수집부와 무선으로 송수신하는 정보 처리부를 포함하고, 상기 영상 정보 분석부는 상기 영상 정보 신호에 포함된 영상의 상하, 좌우, 회전, 전진 및 후진 이동에 기반하여 행동 패턴을 분석하며, 상기 정보 수집부는 신체의 일부에 착용될 수 있다.Behavior pattern recognition apparatus according to the first invention of the present application, the information collection unit including a camera capable of shooting video; And an emergency signal generator, a normal behavior pattern storage unit for storing normal behavior pattern information data, and an image information analyzer for analyzing the image information signal received from the information collection unit, and wirelessly transmitting and receiving to and from the information collection unit. And an information processing unit, wherein the image information analyzing unit analyzes a behavior pattern based on up, down, left, right, rotation, forward, and backward movements of an image included in the image information signal, and the information collecting unit is worn on a part of a body. Can be.

바람직하게는, 상기 영상 정보 분석부는 상기 행동 패턴의 분석 요소로 상기 영상 정보 신호에 포함된 사용자의 이동 속도를 더 포함할 수 있다.Preferably, the image information analyzer may further include a moving speed of a user included in the image information signal as an analysis element of the behavior pattern.

바람직하게는, 상기 정보 처리부는, 상기 영상 정보 분석부에 의해 분석된 상기 행동 패턴을 상기 정상 행동 패턴 저장부의 상기 정상 행동 패턴 정보와 비교하는 행동 패턴 판단부를 더 포함할 수 있다.Preferably, the information processor may further include a behavior pattern determination unit for comparing the behavior pattern analyzed by the image information analyzer with the normal behavior pattern information of the normal behavior pattern storage unit.

바람직하게는, 상기 정보 수집부는 위치기반서비스 기기를 포함할 수 있다.Preferably, the information collecting unit may include a location-based service device.

바람직하게는, 상기 정보수집부는 헤드셋, 혹은 안경테, 벨트 등에 고정될 수 있다.Preferably, the information collecting unit may be fixed to a headset, glasses frame, belt or the like.

본원의 제2 발명에 따른 행동 패턴 인식 방법은, 사용자의 신체의 일부에 부착된 정보 수집부에 의해 획득된 영상 정보 신호를 수신하는 제1 단계; 상기 영상 정보 신호를 이용하여 상기 사용자의 행동 패턴을 분석하는 제2 단계; 상기 사용자의 행동 패턴과 정상 행동 패턴을 비교하는 제3 단계; 상기 사용자의 행동 패턴이 상기 정상 행동 패턴에 속하지 않으면 비정상 행동 패턴으로 판단하는 제4 단계; 및 상기 비정상 행동 패턴으로 판단하면, 응급신호를 제3자에게 전송하는 제5 단계를 포함할 수 있다.According to a second aspect of the present invention, there is provided a method of recognizing a behavior pattern, comprising: a first step of receiving an image information signal acquired by an information collector attached to a part of a user's body; A second step of analyzing a behavior pattern of the user by using the image information signal; Comparing the behavior pattern of the user with a normal behavior pattern; A fourth step of determining that the user's behavior pattern does not belong to the normal behavior pattern as an abnormal behavior pattern; And judging by the abnormal behavior pattern, a fifth step of transmitting an emergency signal to a third party.

바람직하게는, 상기 제1 단계는 상기 정보 수집부로부터 상기 사용자의 위치 정보 신호를 더 수신할 수 있다.Preferably, the first step may further receive the location information signal of the user from the information collecting unit.

바람직하게는, 상기 비정상 행동 패턴으로 판단하더라도 소정의 경우에는 응급신호의 전송을 보류하고, 상기 정보수집부로 확인신호를 전송하는 제6 단계; 및 상기 확인신호에 응답하여 상기 정보수집부로부터 소정 시간 내에 확인응답신호가 수신되면, 상기 응급신호의 전송을 취소하는 제7 단계를 더 포함할 수 있다.Preferably, the sixth step, even if determined as the abnormal behavior pattern to suspend the transmission of the emergency signal in a predetermined case, and transmits a confirmation signal to the information collecting unit; And a seventh step of canceling transmission of the emergency signal when an acknowledgment signal is received from the information collecting unit within a predetermined time in response to the acknowledgment signal.

본 발명에 따른 행동 패턴 인식 장치 및 방법은 특정 장소에 구애받지 않고 한대의 카메라만으로도 사각지대 없이 영상 정보 수집이 가능하며, 개인 사생활 침해 문제를 유발하지 않고, LBS(Location Based Service 위치기반서비스)기기와 연동하여 현재 위치를 정확하게 파악할 수 있는 효과가 있다.The behavior pattern recognition apparatus and method according to the present invention can collect image information without blind spots without using a single camera, without causing blind spots, and cause LBS (Location Based Service) location based service (LBS) devices. In conjunction with, it is effective to determine the current position accurately.

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. Prior to this, terms or words used in the specification and claims should not be construed as having a conventional or dictionary meaning, and the inventors should properly explain the concept of terms in order to best explain their own invention. Based on the principle that can be defined, it should be interpreted as meaning and concept corresponding to the technical idea of the present invention. Therefore, the embodiments described in the specification and the drawings shown in the drawings are only one of the most preferred embodiments of the present invention and do not represent all of the technical idea of the present invention, various modifications that can be replaced at the time of the present application It should be understood that there may be equivalents and variations.

도 1은 본 발명의 일실시예에 따른 행동 패턴 인식 장치 및 방법의 전체적인 개략도이다.1 is an overall schematic diagram of an apparatus and method for recognizing a behavior pattern according to an embodiment of the present invention.

본 발명의 일실시예에 따른 행동 패턴 인식 장치는 카메라(120)와 무선 데이터 송신 유닛(130)을 포함하는 정보 수집부(100) 및 정보 처리부(200)를 포함한다. 사용자는 전방을 촬영할 수 있도록 정보 수집부(100)를 휴대하며, 카메라(120)를 통하여 촬영된 영상 정보 신호와 LBS(위치 기반 서비스)기기(130)로부터의 위치 정보 신호가 정보 처리부(200)로 무선 전송된다. 정보 처리부(200)는 수신된 영상 정보 신호를 분석하여 사용자의 현재 상태를 판단하고, 위치 정보 신호로부터 현재 위치를 판단한다. The behavior pattern recognition apparatus according to an embodiment of the present invention includes an information collector 100 and an information processor 200 including a camera 120 and a wireless data transmission unit 130. The user carries the information collecting unit 100 to photograph the front, and the image information signal photographed through the camera 120 and the location information signal from the LBS (location based service) device 130 is the information processing unit 200. Is wirelessly transmitted. The information processing unit 200 analyzes the received image information signal to determine the current state of the user, and determines the current position from the location information signal.

도 2는 본 발명의 일실시예에 따른 행동 패턴 인식 장치의 정보 수집부의 구성도이다.2 is a block diagram of an information collecting unit of the behavior pattern recognition apparatus according to an embodiment of the present invention.

본 발명의 일실시예에 따른 정보 수집부(100)는 본체(110), 카메라(120), 송수신 장치, 스피커(150), LBS기기(130) 및 확인 버튼(140)을 포함한다. 카메라(120)는 본체(110)에 구성되어 전방을 촬영하며, LBS기기(130)는 본체(110)에 구성된다. 도시되지 않았으나, 본체 내의 송수신 장치는 카메라(120)로 촬영되는 영상 정보 신호와 LBS기기(130)로부터 발생되는 위치 정보 신호를 정보 처리부(200)로 송신하고, 정보 처리부로부터 확인 신호를 수신한다. 스피커(150)는 확인 신호에 따라 확인음을 발생시키고, 확인 버튼(140)은 확인음의 확인이나, 응급 신호 송출을 위한 것이다.The information collecting unit 100 according to an embodiment of the present invention includes a main body 110, a camera 120, a transceiver, a speaker 150, an LBS device 130, and a confirmation button 140. The camera 120 is configured in the main body 110 to photograph the front, the LBS device 130 is configured in the main body 110. Although not shown, the transmitting and receiving device in the main body transmits the image information signal captured by the camera 120 and the position information signal generated from the LBS device 130 to the information processing unit 200, and receives a confirmation signal from the information processing unit. The speaker 150 generates a confirmation sound according to the confirmation signal, and the confirmation button 140 is for confirmation of the confirmation sound or for emergency signal transmission.

여기서, LBS(위치 기반 서비스)는 무선통신망을 기반으로 이동성이 보장된 기기를 통해 사람이나 사물의 위치를 파악하고 이를 활용하는 서비스를 의미한다.Here, LBS (Location Based Service) refers to a service that locates and utilizes a location of a person or a thing through a device that guarantees mobility based on a wireless communication network.

도 3은 본 발명의 일실시예에 따른 행동 패턴 인식 장치의 행동 패턴 인식 개념도이다.3 is a conceptual view illustrating a behavior pattern recognition of the behavior pattern recognition apparatus according to an embodiment of the present invention.

본 발명의 일실시예에 따른 행동 패턴 인식 방법은 기본적으로 카메라(120)의 상하, 좌우, 회전, 전진 및 후진 이동과 이동 속도에 따라 촬영되는 영상의 변화에 기초한다. 예를 들어, 도 4에 예시된 바와 같이, 영상 속의 TV를 기준으로 상하, 좌우, 회전, 전진 및 후진 이동 방향을 인식하고 동시에 이동 속도 또한 인식한다. Behavior pattern recognition method according to an embodiment of the present invention is basically based on the change of the image photographed according to the up and down, left and right, rotation, forward and backward movement and moving speed of the camera 120. For example, as illustrated in FIG. 4, the up, down, left, right, up, and backward moving directions are recognized based on the TV in the image, and at the same time, the moving speed is also recognized.

도 4는 본 발명의 일실시예에 따른 행동 패턴 인식 장치의 정보 처리부의 구성도이다.4 is a block diagram of an information processing unit of the behavior pattern recognition apparatus according to an embodiment of the present invention.

본 발명의 일실시예에 따른 정보 처리부(200)는 송수신부(210), 영상 정보 분석부(220), 행동 패턴 판단부(230), 정상 행동 패턴 저장부(240) 및 신호 생성부(250)를 포함한다.The information processor 200 according to an embodiment of the present invention includes a transceiver 210, an image information analyzer 220, a behavior pattern determiner 230, a normal behavior pattern storage 240, and a signal generator 250. ).

송수신부(210)는 정보 수집부(100)로부터 영상 정보 신호와 위치 정보 신호를 수신하며, 영상 정보 분석부(220)는 수신된 영상 정보 신호를 행동 패턴 인식 방법을 이용하여 분석한다. 행동 패턴 판단부(230)는 영상 정보 분석부로부터의 분석 결과를 정상 행동 패턴 저장부(240)에 기 저장되어 있는 정상 행동 패턴과 비교한다. 즉, 행동 패턴 판단부(230)는 영상 정보 분석부에서 분석된 행동 패턴을 정상 행동 패턴 저장부(240)에 저장되어 있는 정상 행동 패턴과 비교하여 어떠한 정상 행동 패턴에 속하는 것인지를 판단한다. 기 저장된 정상 행동 패턴에 대한 정보는, 예를 들어 영상이 앞쪽으로 천천히 전진하면 도보, 빨리 전진하면 달리기, 하강하면 착석, 회전하면 몸을 기울임, 좌로 회전하면서 하강하면 좌로 누움 등이 될 수 있다. The transceiver 210 receives an image information signal and a location information signal from the information collector 100, and the image information analyzer 220 analyzes the received image information signal using a behavior pattern recognition method. The behavior pattern determination unit 230 compares the analysis result from the image information analyzer with the normal behavior pattern previously stored in the normal behavior pattern storage unit 240. That is, the behavior pattern determination unit 230 determines which normal behavior pattern belongs to by comparing the behavior pattern analyzed by the image information analyzer with the normal behavior pattern stored in the normal behavior pattern storage 240. The previously stored normal behavior pattern may include, for example, walking when the image moves forward slowly, running when moving forward quickly, sitting when descending, tilting the body when rotating, and lying left when rotating while descending.

비교 결과, 정상 행동 패턴에 속하지 않으면 비정상 행동 패턴으로 판단하고, 신호 생성부(250)는 위치 정보 신호와 비정상 행동 패턴에 대응하는 응급 신호를 생성하며, 송수신부(210)를 통하여 제3자에게 송신한다. 정상 행동 패턴에 속하지 않는 비정상 행동 패턴의 예는, 매우 급격한 영상의 하강 또는 회전(쓰러짐 또는 추락)이나 장시간 동안 영상의 움직임 정지(졸도 또는 사망)등일 수 있다.As a result of the comparison, if it does not belong to the normal behavior pattern is determined as an abnormal behavior pattern, the signal generator 250 generates an emergency signal corresponding to the location information signal and the abnormal behavior pattern, and transmits to the third party through the transceiver 210 Send. Examples of abnormal behavior patterns that do not belong to normal behavior patterns may be falling or rotating (falling or falling) of a very sharp image or stopping movement of the image (fading or death) for a long time.

비정상 행동 패턴으로 판단되는 경우 중에서 소정의 비정상 행동 패턴으로 판단되면, 신호 생성부(250)는 생성된 응급 신호의 송신을 보류하고, 송수신부(250)를 통하여 정보 수집부(100)로 확인 신호를 전송한다. 전송한 확인 신호에 대한 응답으로써, 정보 처리부(200)가 정보 수집부(100)로부터 확인 신호를 수신하는 경우 신호 생성부(250)에서 생성된 응급 신호는 취소된다. 하지만, 일정 시간 내에 확인 신호가 수신되지 않으면 응급 상황으로 판단하여, 생성된 응급 신호를 제3자에게 송신한다. 이에 대한 예시와 내용은 본 명세서의 후반부에 더욱 상세히 설명하기로 한다.If it is determined that the abnormal behavior pattern is determined as a predetermined abnormal behavior pattern, the signal generator 250 suspends the transmission of the generated emergency signal, and confirms the confirmation signal to the information collection unit 100 through the transceiver 250. Send it. In response to the transmitted confirmation signal, the emergency signal generated by the signal generator 250 is canceled when the information processor 200 receives the confirmation signal from the information collector 100. However, if the confirmation signal is not received within a certain time, it is determined as an emergency situation and transmits the generated emergency signal to a third party. Examples and content thereof will be described in more detail later in this specification.

도 5a 내지 5c는 본 발명의 실시예에 따른 행동 패턴 인식 장치의 정보 수집부의 구성 예시도이다.5A to 5C are exemplary views illustrating the configuration of an information collecting unit of the behavior pattern recognition apparatus according to the embodiment of the present invention.

도 5a에서 정보 수집부(100)는 고정부(510)에 구성되어 헤드셋 형식으로 머리에 착용된다. 도 5b와 같이 안경에 구성되어 착용할 수도 있고, 도 5c와 같이 구성되어 클립(520) 또는 고정핀 등을 이용해 벨트나 주머니(530) 등에 착용할 수도 있다.In FIG. 5A, the information collecting unit 100 is configured in the fixing unit 510 and is worn on the head in the form of a headset. 5b may be configured to be worn on glasses, or may be configured as shown in FIG. 5c and may be worn on a belt or pocket 530 using a clip 520 or a fixing pin.

도 6은 본 발명의 실시예에 따른 행동 패턴 인식 장치의 정보 수집부의 착용 예시도이다.6 is an exemplary view of wearing the information collecting unit of the behavior pattern recognition apparatus according to an embodiment of the present invention.

클립(520)을 이용하여 주머니(530) 및 벨트에 착용한 예시로서, 본 발명에 따른 정보 수집부의 형태와 구성은 이에 한정되는 것은 아니며, 용이하게 착용할 수 있고 영상 정보 수집이 가능하다면 어떠한 구성이라도 무방하다.As an example of wearing on the pocket 530 and the belt using the clip 520, the shape and configuration of the information collecting unit according to the present invention is not limited thereto, and any configuration can be easily worn and image information can be collected. It is okay.

본 발명의 일실시예에 따른 행동 패턴 인식 장치의 동작 과정은 다음과 같다.Operation of the behavior pattern recognition apparatus according to an embodiment of the present invention is as follows.

사용자가 착용하는 정보 수집부(100)의 카메라(120)를 통해 수집되는 영상 정보는 정보 처리부(200)로 전송되고, 영상 정보 분석부(220)는 영상 정보의 행동 패턴을 분석한다. 행동 패턴 판단부(230)는 분석된 행동 패턴과 정상 행동 패턴 저장부(240)에 기 저장되어 있는 정상 행동 패턴과 비교하여 어떠한 패턴에 속하는지 판단한다. 비교 결과 기 저장되어 있는 정상 행동 패턴의 어디에도 속하지 않는다면 비정상 행동 패턴으로 판단하고, 신호 생성부(250)는 응급 신호를 생성하며, 송수신부(250)는 생성된 응급 신호를 제3자에게 송신한다. 응급 신호는 기 설정된 제3자에게 문자와 같은 방식으로 전송될 수 있으며, 사용자의 비정상 행동 패턴과 LBS기기(130)로부터의 위치 정보를 포함한다. The image information collected by the camera 120 of the information collector 100 worn by the user is transmitted to the information processor 200, and the image information analyzer 220 analyzes the behavior pattern of the image information. The behavior pattern determination unit 230 compares the analyzed behavior pattern with the normal behavior pattern previously stored in the normal behavior pattern storage unit 240 to determine which pattern belongs. If the comparison result does not belong to any of the pre-stored normal behavior patterns, it is determined as an abnormal behavior pattern, the signal generator 250 generates an emergency signal, and the transceiver 250 transmits the generated emergency signal to a third party. . The emergency signal may be transmitted to a preset third party in a text-like manner, and includes an abnormal behavior pattern of the user and location information from the LBS device 130.

한편, 정상 행동 패턴에 속하지 않더라도 실제로는 정상 행동을 행하고 있는 경우가 있는데, 예를 들면 촬영되는 영상 화면이 전혀 움직임이 없는 경우 행동 패턴 판단부(230)는 이를 정상 행동 패턴이 아닌 사망이나 졸도 등으로 판단할 수 있 으나, 실제로는 수면 중일 수 있다. 이러한 오류를 방지하기 위하여, 정보 처리부(200)를 통하여 수면 시간을 설정할 수 있으며, 수면 시간에는 영상의 움직임이 없어도, 정상 행동 패턴으로 인식한다. 또한, 수면으로 설정된 시간 이외의 시간에 영상 화면이 움직임이 없는 경우에는 응급 상황 여부를 확인하기 위하여 신호 처리부(250)에서 확인 신호를 생성하여 정보 수집부(100)로 전송할 수 있으며, 정보 수집부(100)의 스피커(150)는 확인음을 발생하고, 사용자는 확인 버튼(140)을 눌러서 정상 상태임을 확인시킬 수 있다. 하지만 일정 시간 내에 확인 버튼(140)이 조작되지 않으면, 정보 처리부(200)의 행동 패턴 판단부(230)는 이를 응급 상황으로 판단하고 제3자에게 응급 신호를 전송한다. 확인 신호 생성 여부는 사용자의 선택에 따라 온/오프 될 수 있고, 또한, 설정된 수면 시간에 확인 버튼(140)을 누르면 반대로 응급 상황으로 판단하여 제3자에게 응급 신호를 전송하는 것이 가능하며, 이 또한 사용자의 선택에 따라 온/오프 될 수 있다.On the other hand, even if it does not belong to the normal behavior pattern may actually be performing the normal behavior, for example, if the image screen is no movement at all, the behavior pattern determination unit 230 is not a normal behavior pattern, such as death or fainting It can be determined, but it may actually be sleeping. In order to prevent such an error, the sleep time may be set through the information processor 200, and the sleep time is recognized as a normal behavior pattern even when there is no motion of the image. In addition, when there is no movement of the video screen at a time other than the time set to sleep, the signal processor 250 may generate a confirmation signal and transmit the confirmation signal to the information collection unit 100 to check whether there is an emergency situation. The speaker 150 of the 100 generates a confirmation sound, and the user may confirm the normal state by pressing the confirmation button 140. However, if the confirmation button 140 is not operated within a certain time, the behavior pattern determination unit 230 of the information processing unit 200 determines this as an emergency situation and transmits an emergency signal to a third party. Whether or not to generate the confirmation signal can be turned on / off according to the user's selection, and when pressing the confirmation button 140 at the set sleep time, it is possible to determine the emergency situation and transmit the emergency signal to a third party. It can also be turned on or off according to the user's choice.

수면 시간 설정 입력과 확인 신호, 확인 버튼(140) 온/오프 및 응급 신호 수신 사용자 설정은 도시되지 않은 정보 처리부(200)의 디스플레이와 조작부를 통해 이루어지며, 입력 장치와 방법은 이미 널리 주지된 관용기술에 불과하므로 생략하기로 한다.Sleep time setting input and confirmation signal, confirmation button 140 on / off and emergency signal reception user setting is made through the display and operation of the information processing unit 200, not shown, the input device and method is well known Since this is only a technique, it will be omitted.

이상과 같이, 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술사상과 아래에 기재될 특허청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능하다.As described above, although the present invention has been described by way of limited embodiments and drawings, the present invention is not limited thereto and is intended by those skilled in the art to which the present invention pertains. Various modifications and variations are possible within the scope of equivalents of the claims to be described.

도 1은 본 발명의 일실시예에 따른 행동 패턴 인식 장치 및 방법의 전체적인 개략도,1 is an overall schematic diagram of a behavior pattern recognition apparatus and method according to an embodiment of the present invention;

도 2는 본 발명의 일실시예에 따른 행동 패턴 인식 장치의 정보 수집부의 구성도,2 is a block diagram of an information collecting unit of a behavior pattern recognition apparatus according to an embodiment of the present invention;

도 3은 본 발명의 일실시예에 따른 행동 패턴 인식 장치의 행동 패턴 인식 방법의 개념도,3 is a conceptual diagram of a behavior pattern recognition method of the behavior pattern recognition apparatus according to an embodiment of the present invention;

도 4는 본 발명의 일실시예에 따른 행동 패턴 인식 장치의 정보 처리부의 구성도,4 is a block diagram of an information processing unit of a behavior pattern recognition apparatus according to an embodiment of the present invention;

도 5a 내지 5c는 본 발명의 실시예에 따른 행동 패턴 인식 장치의 정보 수집부의 구성 예시도, 및5a to 5c are diagrams illustrating the configuration of an information collection unit of the behavior pattern recognition apparatus according to the embodiment of the present invention; and

도 6은 본 발명의 실시예에 따른 행동 패턴 인식 장치의 정보 수집부의 착용 예시도이다.6 is an exemplary view of wearing the information collecting unit of the behavior pattern recognition apparatus according to an embodiment of the present invention.

*도면의 주요 부분에 대한 간단한 설명** Brief description of the main parts of the drawing *

100: 정보 수집부 120: 카메라100: information collecting unit 120: camera

130: GPS 130: GPS

200: 정보 처리부 220: 영상 정보 분석부 200: information processing unit 220: video information analysis unit

230: 행동 패턴 판단부 240: 정상 행동 패턴 저장부230: behavior pattern determination unit 240: normal behavior pattern storage unit

250: 신호 생성부250: signal generator

Claims (10)

동영상 촬영이 가능한 카메라를 포함하는 정보 수집부; 및An information collecting unit including a camera capable of shooting a video; And 응급 신호 생성부, 정상 행동 패턴 정보 데이터가 저장되는 정상 행동 패턴 저장부, 및 상기 정보 수집부로부터 수신되는 영상 정보 신호를 분석하기 위한 영상 정보 분석부를 포함하며, 상기 정보 수집부와 무선으로 송수신하는 정보 처리부를 포함하고, An emergency signal generation unit, a normal behavior pattern storage unit for storing normal behavior pattern information data, and an image information analysis unit for analyzing the image information signal received from the information collection unit, and wirelessly transmitting and receiving the information collection unit. Including an information processing unit, 상기 영상 정보 분석부는 상기 영상 정보 신호에 포함된 영상의 상하, 좌우, 회전, 전진 및 후진 이동에 기반하여 행동 패턴을 분석하며,The image information analyzer analyzes a behavior pattern based on up, down, left, right, rotation, forward, and backward movements of an image included in the image information signal. 상기 정보 수집부는 신체의 일부에 착용될 수 있는 것을 특징으로 하는 행동 패턴 인식 장치.The information collecting unit may be worn on a part of the body behavior pattern recognition apparatus. 제1항에 있어서, The method of claim 1, 상기 영상 정보 분석부는 상기 행동 패턴의 분석 요소로 상기 영상 정보 신호에 포함된 사용자의 이동 속도를 더 포함하는 것을 특징으로 하는 행동 패턴 인식 장치.And the image information analyzer further includes a movement speed of a user included in the image information signal as an analysis element of the behavior pattern. 제2항에 있어서,The method of claim 2, 상기 정보 처리부는, 상기 영상 정보 분석부에 의해 분석된 상기 행동 패턴을 상기 정상 행동 패턴 저장부의 상기 정상 행동 패턴 정보와 비교하는 행동 패턴 판단부를 더 포함하는 것을 특징으로 하는 행동 패턴 인식 장치.The information processing unit further includes a behavior pattern determination unit for comparing the behavior pattern analyzed by the image information analysis unit with the normal behavior pattern information of the normal behavior pattern storage unit. 제3항에 있어서, The method of claim 3, 상기 정보 수집부는 위치기반서비스 기기를 포함하는 것을 특징으로 하는 행동 패턴 인식 장치.And the information collecting unit comprises a location-based service device. 제4항에 있어서,The method of claim 4, wherein 상기 정보수집부는 헤드셋에 고정되는 것을 특징으로 하는 행동 패턴 인식 장치.And the information collecting unit is fixed to the headset. 제4항에 있어서,The method of claim 4, wherein 상기 정보수집부는 안경테에 고정되는 것을 특징으로 하는 행동 패턴 인식 장치.The information collecting unit is a behavior pattern recognition device, characterized in that fixed to the spectacle frame. 제4항에 있어서,The method of claim 4, wherein 상기 정보수집부는 벨트에 고정되는 것을 특징으로 하는 행동 패턴 인식 장치.And the information collecting unit is fixed to a belt. 사용자의 신체의 일부에 부착된 정보 수집부에 의해 획득된 영상 정보 신호를 수신하는 제1 단계;A first step of receiving an image information signal obtained by an information collecting unit attached to a part of a user's body; 상기 영상 정보 신호를 이용하여 상기 사용자의 행동 패턴을 분석하는 제2 단계;A second step of analyzing a behavior pattern of the user by using the image information signal; 상기 사용자의 행동 패턴과 정상 행동 패턴을 비교하는 제3 단계;Comparing the behavior pattern of the user with a normal behavior pattern; 상기 사용자의 행동 패턴이 상기 정상 행동 패턴에 속하지 않으면 비정상 행동 패턴으로 판단하는 제4 단계; 및A fourth step of determining that the user's behavior pattern does not belong to the normal behavior pattern as an abnormal behavior pattern; And 상기 비정상 행동 패턴으로 판단하면, 응급신호를 제3자에게 전송하는 제5 단계A fifth step of transmitting an emergency signal to a third party if the abnormal behavior pattern is determined; 를 포함하는 행동 패턴 인식 방법.Behavior pattern recognition method comprising a. 제8항에 있어서,The method of claim 8, 상기 제1 단계는 상기 정보 수집부로부터 상기 사용자의 위치 정보 신호를 더 수신하는 것을 특징으로 하는 행동 패턴 인식 방법.The first step is a behavior pattern recognition method, characterized in that further receiving the location information signal of the user from the information collecting unit. 제8항에 있어서,The method of claim 8, 상기 비정상 행동 패턴으로 판단하더라도 소정의 경우에는 응급신호의 전송을 보류하고, 상기 정보수집부로 확인신호를 전송하는 제6 단계; 및A sixth step of suspending transmission of an emergency signal and transmitting a confirmation signal to the information collection unit even if determined as the abnormal behavior pattern; And 상기 확인신호에 응답하여 상기 정보수집부로부터 소정 시간 내에 확인응답신호가 수신되면, 상기 응급신호의 전송을 취소하는 제7 단계A seventh step of canceling transmission of the emergency signal when an acknowledgment signal is received from the information collecting unit within a predetermined time in response to the acknowledgment signal; 를 더 포함하는 행동 패턴 인식 방법. Behavioral pattern recognition method further comprising.
KR1020080067478A 2008-07-11 2008-07-11 Behavior pattern recognition device and its method KR100961476B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080067478A KR100961476B1 (en) 2008-07-11 2008-07-11 Behavior pattern recognition device and its method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080067478A KR100961476B1 (en) 2008-07-11 2008-07-11 Behavior pattern recognition device and its method

Publications (2)

Publication Number Publication Date
KR20100007050A true KR20100007050A (en) 2010-01-22
KR100961476B1 KR100961476B1 (en) 2010-06-08

Family

ID=41816095

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080067478A KR100961476B1 (en) 2008-07-11 2008-07-11 Behavior pattern recognition device and its method

Country Status (1)

Country Link
KR (1) KR100961476B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101579585B1 (en) * 2014-06-18 2015-12-22 경북대학교 산학협력단 User Action Monitoring Method, Apparatus, System And Recording Medium for Performing The Method
CN112712672A (en) * 2020-12-23 2021-04-27 杭州奥美健康科技有限公司 Intelligent learning type old man falling detection alarm method, device and application

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101534045B1 (en) * 2013-10-30 2015-07-06 (주) 트라이너스 Wearable type photographing device

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100386702B1 (en) 2001-03-22 2003-06-02 (주)파워링크 System for monitoring a first-aid Patient
KR100694510B1 (en) 2005-10-24 2007-03-13 신영길 System for observing abnormal symptoms of a person and method thereof

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101579585B1 (en) * 2014-06-18 2015-12-22 경북대학교 산학협력단 User Action Monitoring Method, Apparatus, System And Recording Medium for Performing The Method
CN112712672A (en) * 2020-12-23 2021-04-27 杭州奥美健康科技有限公司 Intelligent learning type old man falling detection alarm method, device and application

Also Published As

Publication number Publication date
KR100961476B1 (en) 2010-06-08

Similar Documents

Publication Publication Date Title
KR101654609B1 (en) Remote Smart Monitoring System for Handicapped, Disabled and Elderly Living Alone and Method thereof
US10595766B2 (en) Abnormal motion detector and monitor
El-Bendary et al. Fall detection and prevention for the elderly: A review of trends and challenges
KR102423752B1 (en) Apparatus and Method for assisting sound sleep
US9898182B2 (en) Gesture control for monitoring vital body signs
RU2685815C1 (en) Method for responding to detected fall and apparatus for implementing same
CN109961058B (en) Non-contact fall detection method and device
JP5133677B2 (en) Monitoring system
CN109561855B (en) Device, system and method for fall detection
Naranjo-Hernandez et al. Personalization and adaptation to the medium and context in a fall detection system
JP6519166B2 (en) MONITORING CONTROL PROGRAM, MONITORING CONTROL DEVICE, AND MONITORING CONTROL METHOD
JP2004164282A (en) Personal behavior detection system
JP2018538078A (en) Device, method and computer program product for continuous monitoring of vital signs
CN105678958A (en) Robot-based human body tumble monitoring system
JP2015138427A (en) monitor
KR100961476B1 (en) Behavior pattern recognition device and its method
KR20200056660A (en) Pain monitoring method and apparatus using tiny motion in facial image
JP2013003815A (en) Fall detection device, fall detection unit, fall detection system, and fall detection method
JP6142975B1 (en) Monitored person monitoring apparatus and method, and monitored person monitoring system
KR20170096901A (en) Infant Health Monitoring System
CN112136162A (en) Wrist-worn medical alert device for communicating emergency messages to care providers
Doukas et al. Enabling human status awareness in assistive environments based on advanced sound and motion data classification
Singh et al. Implementation of safety alert system for elderly people using multi-sensors
KR102270637B1 (en) Method for analyzing pet behavior based on interaction with adoptees
US20220020257A1 (en) Method and system for monitoring a user

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130429

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140326

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150417

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160325

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee