KR102172606B1

KR102172606B1 - Apparatus for tracing activity pattern and method by using the same

Info

Publication number: KR102172606B1
Application number: KR1020180057943A
Authority: KR
Inventors: 서정욱; 이승엽
Original assignee: (주)하이디어 솔루션즈
Priority date: 2018-05-21
Filing date: 2018-05-21
Publication date: 2020-11-03
Also published as: KR20190132865A

Abstract

본 발명은 동작패턴 추적 장치 및 그 방법에 관한 것으로, 더욱 상세하게는 댁내, 사무실 또는 이들의 조합을 포함한 동작패턴 추적 공간에 구비된 PIR 센서를 포함한 적외선 센서, 초음파 센서, 이미지 센서, 온도센서 등을 포함한 움직임감지센서를 사용하여 사용자의 움직임을 지속적으로 추적한 결과를 액티비티 윈도우를 통해 표시하고, 상기 액티비티 윈도우에 표시된 추적결과의 분석을 토대로 사용자의 동작패턴을 용이하게 확인할 수 있는 장치 및 방법에 관한 것이다.The present invention relates to a motion pattern tracking device and method thereof, and more particularly, an infrared sensor including a PIR sensor provided in a motion pattern tracking space including a home, an office, or a combination thereof, an ultrasonic sensor, an image sensor, a temperature sensor, etc. A device and method for displaying the result of continuously tracking the user's movement using a motion detection sensor including, through an activity window, and easily checking the user's movement pattern based on the analysis of the tracking result displayed in the activity window. About.

Description

Motion pattern tracking device and its method {APPARATUS FOR TRACING ACTIVITY PATTERN AND METHOD BY USING THE SAME}

본 발명은 동작패턴 추적 장치 및 그 방법에 관한 것으로, 더욱 상세하게는 댁내, 사무실 또는 이들의 조합을 포함한 동작패턴 추적 공간에 구비된 PIR(Passive Infrared) 센서를 포함한 적외선 센서, 초음파(Ultra sonic) 센서, 이미지 센서, 온도센서 등을 포함한 움직임감지센서를 사용하여 사용자의 움직임을 지속적으로 추적한 결과를 액티비티(activity) 윈도우를 통해 표시하고, 상기 액티비티 윈도우에 표시된 추적결과의 분석을 토대로 사용자의 동작패턴을 용이하게 확인할 수 있는 장치 및 방법에 관한 것이다.The present invention relates to a motion pattern tracking apparatus and method thereof, and more particularly, an infrared sensor including a passive infrared (PIR) sensor provided in a motion pattern tracking space including a home, an office, or a combination thereof, and an ultrasonic wave (Ultra sonic) Using a motion detection sensor including sensors, image sensors, temperature sensors, etc., the result of continuously tracking the user's movement is displayed through the activity window, and the user's action based on the analysis of the tracking result displayed in the activity window. It relates to an apparatus and method for easily identifying a pattern.

최근 들어 소득의 증대에 따른 삶의 질 향상과 장수화시대의 진행과 같은 시대적 조류의 변화에 따라 치료 중심의 보건의료 패러다임이 예방과 관리 중심으로 변화하고 있으며, 이에 발맞추어 만성질환 및 건강관리 서비스에 대한 연구 개발이 활발히 진행되고 있다.In recent years, the treatment-centered health care paradigm is changing toward prevention and management as the trend of the times, such as the improvement of the quality of life and the progress of the longevity era, is changing to keep pace with this. The research and development of is actively in progress.

특히 수면이 다이어트나 운동에 못지않은 건강 관심사로 주목 받으면서 관련 산업 또한 급성장하고 있으며, 사용자의 수면상태를 모니터링할 수 있도록 하는 기술이 요구됨에 따라 수면 모니터링 기능을 제공하는 전자 장치들이 개발되어 사용되고 있다.In particular, as sleep is attracting attention as a health concern as much as diet or exercise, the related industry is also rapidly growing, and as a technology for monitoring a user's sleep state is required, electronic devices that provide a sleep monitoring function have been developed and used.

이러한 사용자의 수면상태를 모니터링을 위한 전자 장치 중에서, 수면 중 발생하는 여러 가지 비정상적인 상태를 진단하기 위하여 여러 기구를 사용하여 수면 중 상태를 기록, 분석하는 수면다원검사가 대표적으로 사용되고 있다.Among the electronic devices for monitoring the user's sleep state, a polysomnography test, which records and analyzes the sleep state using several instruments, is typically used to diagnose various abnormal states that occur during sleep.

그러나 상기 수면다원검사는 사용자가 직접 검사실에서 하룻밤을 자는 동안 전체적인 몸의 상태를 체크하는 검사법이기 때문에, 시간적, 공간적 제약이 따를 뿐만 아니라 여러 장비를 신체에 부착하여야 하고 고가의 비용이 소요되는 문제점이 있었다.However, since the polysomnography test is a test method in which the user directly checks the overall condition of the body while sleeping in the laboratory, it is not only subject to time and space constraints, but also has a problem that several equipment must be attached to the body and expensive cost is required. there was.

또한 일반적인 수면 모니터링을 지원하는 전자 장치들은 손목시계, 헤드셋, 팔찌, 목걸이 등의 형태를 가지고 있기 때문에 사용자가 직접 신체의 일부에 부착하여야 하는 불편함이 있었음은 물론, 수면패턴 검사의 시작이나 종료를 사용자가 직접 버튼 조작이나 수기로 기록하여야 하는 등 수면 모니터링을 수행하는데 있어서 불편함이 있었다.In addition, since the electronic devices that support general sleep monitoring have the form of wrist watches, headsets, bracelets, necklaces, etc., the user has to attach themselves to a part of the body, as well as inconvenient to start or end the sleep pattern test. There was an inconvenience in performing sleep monitoring, such as having to manually operate a button or record by a user.

그러므로 사용자가 손쉽게 자신의 수면상태를 편리하게 모니터링하고 확인할 수 있는 기술의 개발이 시급한 실정이다.Therefore, there is an urgent need to develop a technology that allows users to conveniently monitor and check their sleeping conditions.

따라서 본 발명에서는 PIR 센서를 포함한 적외선 센서, 초음파 센서, 이미지 센서, 온도센서 등의 움직임감지센서를 통해 댁내, 사무실 등에 위치한 사용자의 움직임을 추적하여 추적결과를 액티비티 윈도우에 표시하고, 상기 액티비티 윈도우에 표시된 추적결과를 분석함으로써, 사용자의 동작패턴을 용이하게 확인할 수 있는 방안을 제시하고자 한다.Accordingly, in the present invention, the movement of a user located in the house or office is tracked through motion detection sensors such as infrared sensors, ultrasonic sensors, image sensors, and temperature sensors including PIR sensors, and the tracking results are displayed in the activity window. By analyzing the displayed tracking result, it is intended to propose a method to easily check the user's motion pattern.

특히 본 발명은 설정된 시간동안 사용자의 움직임을 감지하여 움직임이 없는 구간 및 움직임이 있는 구간의 시간 정보를 체크, 저장 및 표시하고, 해당 정보를 토대로 유사한 동작패턴을 그룹핑하거나 결합하여 동작여부를 정확하게 판정할 수 있는 방안을 제시하고자 한다.In particular, the present invention detects the user's motion for a set time, checks, stores, and displays time information of a section without motion and a section with motion, and accurately determines whether to operate by grouping or combining similar motion patterns based on the information. I would like to suggest a way to do it.

다음으로 본 발명의 기술분야에 존재하는 선행기술에 대하여 간단하게 설명하고, 이어서 본 발명이 상기 선행기술에 비해서 차별적으로 이루고자 하는 기술적 사항에 대해서 기술하고자 한다.Next, the prior art existing in the technical field of the present invention will be briefly described, and then the technical matters that the present invention intends to achieve differentiated from the prior art will be described.

먼저 한국등록특허 제1575112호(2015.12.07.)는 키넥트 센서를 이용한 수면 모니터링 시스템에 관한 것으로, 적외선 센서, 깊이 센서, 오디오 센서를 포함하는 키넥트 센서의 데이터를 이용하여 사람의 뒤척임과 호흡을 인식하고, 이에 대한 분석결과를 이용하여 상태를 판정함으로써, 사람의 수면 패턴과 수면 방해용인을 사람의 무자각 및 무구속에 의해 모니터링하는 것을 기술적 특징으로 한다.First, Korean Patent Registration No. 1575112 (2015.12.07.) relates to a sleep monitoring system using Kinect sensors, which uses data from Kinect sensors including infrared sensors, depth sensors, and audio sensors to rotate and breathe. By recognizing and determining the condition using the analysis result thereof, it is a technical feature to monitor a person's sleep pattern and sleep disturbance tolerance by a person's inability to be aware of and restraint.

하지만 상기 선행기술은 사람의 뒤척임 이외에 호흡정보를 동시에 활용하여 수면 상태를 모니터링하는 것이지만, 본 발명은 댁내, 사무실 또는 이들의 조합을 포함한 동작패턴 추적 공간에 구비된 PIR 센서를 포함한 적외선 센서, 초음파 센서, 이미지 센서, 온도센서 등을 포함한 움직임감지센서를 사용자의 움직임을 추적한 결과를 액티비티 윈도우를 통해 표시하고, 액티비티 윈도우에 표시되는 정보를 토대로 유사한 동작을 그룹핑하거나 결합하여 동작패턴을 확인하는 기술적 구성이기 때문에, 상기 선행기술과 본 발명은 기술적 특징의 차이점이 분명하다.However, the prior art is to monitor the sleep state by simultaneously utilizing breathing information in addition to the person's tossing, but the present invention is an infrared sensor including a PIR sensor provided in a motion pattern tracking space including a home, an office, or a combination thereof, and an ultrasonic sensor. , Motion detection sensor including image sensor, temperature sensor, etc., displays the result of tracking the user's movement through the activity window, and checks the motion pattern by grouping or combining similar actions based on the information displayed in the activity window For this reason, the difference in technical features between the prior art and the present invention is obvious.

또한 한국공개특허 제2014-0003867호(2014.01.10.)는 수면 무호흡과 수면 단계를 모니터링하기 위한 수면 모니터링 시스템 및 방법에 관한 것으로, 바이오 레이더를 이용하여 사용자의 호흡 데이터를 생성하여 사용자의 수면 무호흡을 모니터링하고, 움직임 감지 센서에서 생성된 움직임 데이터로부터 사용자의 수면 단계를 모니터링함으로써, 사용자의 불편함이나 거부감으로 인한 수면 방해 없이 사용자의 수면 상태를 모니터링하는 것을 기술적 특징으로 한다.In addition, Korean Patent Publication No. 2014-0003867 (2014.01.10.) relates to a sleep monitoring system and method for monitoring sleep apnea and sleep stages, and a user's sleep apnea by generating user's breathing data using bio-radar. The technical feature is to monitor the sleep state of the user without disturbing sleep due to discomfort or rejection by monitoring the user's sleep stage from the motion data generated by the motion detection sensor.

하지만 상기 선행기술은 바이오 레이더를 이용하여 사용자의 호흡 데이터를 생성하고 이를 움직임 데이터와 결합하여 수면 상태를 모니터링하는 것인 반면에, 본 발명은 센서 감지값과 기 설정된 임계값 비교를 통해 임계값을 초과할 때의 시간 정보를 관리하는 구성, 유사한 동작패턴을 그룹핑하거나 결합하는 구성, 동작패턴을 확인하는 구성을 제시하고 있기 때문에, 상기 선행기술의 기술적 구성과는 전혀 다르다.However, in the prior art, the user's breathing data is generated using a bio-radar and combined with motion data to monitor the sleep state, whereas the present invention provides a threshold value through comparison of a sensor detection value and a preset threshold value. It is completely different from the technical configuration of the prior art because a configuration for managing time information when it is exceeded, a configuration for grouping or combining similar operation patterns, and a configuration for checking operation patterns are presented.

즉 상기 선행기술들은 키넥트 센서를 이용하여 사람의 뒤척임을 인식하는 구성, 움직임 감지 센서에서 생성된 움직임 데이터로부터 사용자의 수면 단계를 모니터링하는 구성을 제시하고 있지만, 본 발명의 기술적 특징인 댁내, 사무실 등에 구비된 PIR 센서를 포함한 적외선 센서, 초음파 센서, 이미지 센서, 온도센서 등의 움직임감지센서를 통해 사용자의 움직임을 추적한 결과를 액티비티 윈도우에 표시하고, 상기 액티비티 윈도우에 표시된 추적결과를 분석하여 동작패턴을 확인할 수 있는 구성에 대해서는 구체적인 기재가 없기 때문에 기술적 차이점이 분명한 것이다.That is, the prior art suggests a configuration for recognizing a person's turnover using a Kinect sensor, and a configuration for monitoring a user's sleep stage from motion data generated by a motion detection sensor, but the technical features of the present invention are at home and office. The result of tracking the user's movement is displayed in the activity window through motion detection sensors such as infrared sensors, ultrasonic sensors, image sensors, temperature sensors, etc., including PIR sensors provided on the back, and the tracking result displayed in the activity window is analyzed to operate. The technical difference is obvious because there is no specific description of the configuration in which the pattern can be confirmed.

본 발명은 상기와 같은 문제점을 해결하기 위해 창작된 것으로서, PIR 센서, 적외선 센서, 초음파 센서, 이미지 센서, 온도센서 등의 움직임감지센서를 통해 사용자의 움직임을 추적하고, 추적결과의 분석을 토대로 사용자의 수면을 포함한 동작패턴을 확인하는 장치 및 그 방법을 제공하는 것을 목적으로 한다.The present invention was created to solve the above problems, and tracks the user's movement through motion detection sensors such as PIR sensor, infrared sensor, ultrasonic sensor, image sensor, and temperature sensor, and based on the analysis of the tracking result, the user It is an object of the present invention to provide an apparatus and a method for confirming the operation pattern including the sleep of the child.

또한 본 발명은 사용자의 움직임을 추적하고, 추적한 사용자의 움직임 정보를 액티비티 윈도우를 통해 표시하여, 사용자의 동작패턴을 손쉽게 확인하고 분석할 수 있는 장치 및 그 방법을 제공하는 것을 다른 목적으로 한다.Another object of the present invention is to provide an apparatus and a method for easily checking and analyzing a user's motion pattern by tracking the user's movement and displaying the tracked user's movement information through an activity window.

또한 본 발명은 설정된 시간동안 사용자의 움직임을 감지하고, 움직임이 없는 구간 및 움직임이 있는 구간의 시간 정보를 체크하여 저장하고, 이를 액티비티 윈도우 상에 표시하며, 액티비티 윈도우에 표시된 정보를 토대로 유사한 동작패턴을 그룹핑하거나 결합하여 동작패턴을 확인할 수 있는 장치 및 그 방법을 제공하는 것을 또 다른 목적으로 한다.In addition, the present invention detects the user's motion for a set time, checks and stores time information of a section without motion and a section with motion, and displays this on the activity window, and similar motion patterns based on the information displayed in the activity window Another object of the present invention is to provide an apparatus and a method capable of grouping or combining them to check an operation pattern.

또한 본 발명은 액티비티 윈도우를 통해 사용자의 움직임을 직관적으로 확인할 수 있으며, 이를 통해 수면상태를 포함한 사용자의 각종 동작패턴에 대한 질적인 판단을 빠르고 용이하게 수행할 수 있는 장치 및 그 방법을 제공하는 것을 또 다른 목적으로 한다.In addition, the present invention provides an apparatus and method capable of intuitively checking a user's movement through an activity window, through which qualitative determination of various movement patterns of a user including a sleep state can be quickly and easily performed. It has another purpose.

본 발명의 일 실시예에 따른 동작패턴 추적 장치는, 적어도 하나 이상의 센서로부터 사용자의 움직임에 대한 감지데이터를 수집하는 감지데이터 수집부 및 상기 수집한 감지데이터와 사전에 설정된 임계값의 비교를 토대로 액티비티가 있는 구간과 액티비티가 없는 구간을 체크하여 시간정보를 저장하는 액티비티 메인 처리부;를 포함하는 것을 특징으로 한다.The motion pattern tracking apparatus according to an embodiment of the present invention includes a sensing data collection unit that collects sensing data on a user's movement from at least one sensor, and an activity based on a comparison between the collected sensing data and a preset threshold. And an activity main processing unit that stores time information by checking a section with and without an activity.

또한 상기 동작패턴 추적 장치는, 상기 저장한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 토대로 움직임 시간, 경로 또는 이들의 조합을 포함한 동작패턴 결과데이터를 산출하는 결과 확인부를 더 포함하는 것을 특징으로 한다.In addition, the motion pattern tracking device further comprises a result check unit for calculating motion pattern result data including a motion time, a route, or a combination thereof based on the stored time information of the section with the activity and the section without the activity. To do.

또한 상기 센서는, PIR(Passive Infrared) 센서를 포함한 적외선 센서, 초음파(Ultra sonic) 센서, 이미지 센서 또는 이들의 조합을 포함한 움직임감지센서로서, 댁내, 사무실 또는 이들의 조합을 포함한 동작패턴 추적 공간에 적어도 하나 이상 설치되어 있으며, 기 설정된 구동시간 및 간격에 따라 동작하여 사용자의 움직임을 감지한 감지데이터를 유선 또는 무선을 통해 동작패턴 추적 장치로 전송하는 것을 특징으로 한다.In addition, the sensor is a motion detection sensor including an infrared sensor including a PIR (Passive Infrared) sensor, an ultra sonic sensor, an image sensor, or a combination thereof, and is used in a motion pattern tracking space including a home, an office, or a combination thereof. At least one or more is installed and operates according to a preset driving time and interval, and transmits sensing data that detects the user's movement to the motion pattern tracking device via wired or wireless.

또한 상기 동작패턴 추적 장치는, 상기 액티비티 메인 처리부에서 처리한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 토대로 동작패턴 추적의 시작 및 종료구간, 액티비티가 없는 구간, 액티비티가 있는 구간 중 일시적인 움직임을 나타내는 쇼트 액티비티와 연속적인 움직임을 나타내는 롱 액티비티 또는 이들의 조합을 시간의 경과에 따라 표시하는 액티비티 윈도우 표시부를 더 포함하는 것을 특징으로 한다.In addition, the motion pattern tracking device may perform a temporary movement among a start and end section of motion pattern tracking, a section without activity, and a section with activity based on time information of a section with and without an activity processed by the activity main processing unit. It characterized in that it further comprises an activity window display unit for displaying a short activity indicating a short activity, a long activity indicating a continuous movement, or a combination thereof over time.

또한 상기 동작패턴 추적 장치는, 상기 액티비티 메인 처리부에서 처리한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 토대로, 상기 액티비티가 있는 구간 중 일시적인 움직임을 나타내는 쇼트 액티비티의 인접한 액티비티를 그룹핑하거나, 적어도 하나 이상의 센서에서 각각 측정한 사용자의 움직임에 대한 감지데이터 중 동일한 시간에 겹치는 구간이 있는지의 여부를 확인하여 겹치는 구간을 하나로 결합하여 배회여부나 이동경로를 확인하거나, 또는 이들의 조합을 포함한 분석을 수행하는 액티비티 서브 처리부를 더 포함하며, 상기 액티비티 서브 처리부에서 수행한 쇼프 그룹핑, 결합 프로세싱 또는 이들의 조합을 포함한 정보는 액티비티 윈도우 표시부를 통해 표시되는 것을 특징으로 한다.In addition, the motion pattern tracking device may group adjacent activities of short activities representing temporary movements among the active sections, based on time information of a section with an activity and a section without an activity processed by the activity main processing unit, or at least It checks whether there is a section that overlaps at the same time among the detection data of the user's motion measured by one or more sensors, and combines the overlapping sections into one to check whether roaming or moving paths, or analysis including a combination of these. It further comprises an activity sub-processing unit to perform, and information including shop grouping, combining processing, or a combination thereof performed by the activity sub-processing unit is displayed through an activity window display unit.

또한 상기 액티비티 메인 처리부는, 상기 센서로부터 수집한 감지데이터가 기 설정된 임계값을 초과하는지를 판단하여 액티비티의 발생여부를 확인하는 액티비티 확인부, 상기 확인한 액티비티 발생여부에 따라 액티비티가 없는 구간의 시작시간과 종료시간의 설정 및 업데이트를 처리하는 논 액티비티 처리부, 상기 확인한 액티비티 발생여부에 따라 액티비티가 있는 구간 중 기 설정된 롱 액티비티 판단을 위한 최대 타임스탬프 카운팅 수 이내의 일시적인 움직임이 나타난 쇼트 액티비티 구간의 시작시간과 종료시간을 저장하는 쇼트 액티비티 처리부 및 상기 확인한 액티비티 발생여부에 따라 액티비티가 있는 구간 중 기 설정된 롱 액티비티 판단을 위한 최대 타임스탬프 카운팅 수를 초과하여 연속적인 움직임이 나타난 롱 액티비티 구간의 시작시간과 종료시간을 저장하는 롱 액티비티 처리부를 포함하는 것을 특징으로 한다.In addition, the activity main processing unit determines whether the sensing data collected from the sensor exceeds a preset threshold to check whether an activity has occurred, and the start time of a section without activity according to the checked activity occurrence The non-activity processing unit that processes the setting and update of the end time, the start time of the short activity section in which a temporary movement within the maximum number of timestamps counting to determine a preset long activity among the sections in which there is an activity according to the occurrence of the checked activity occurs The short activity processing unit that stores the end time and the start time and end time of the long activity section in which continuous movement exceeds the maximum number of timestamp counts for determining a preset long activity among the sections with activities according to the occurrence of the checked activity. It characterized in that it comprises a long activity processing unit for storing.

또한 상기 동작패턴 추적 장치는, 액티비티 윈도우에 표시되는 동작패턴 추적정보를 확인한 다음, 쇼트 그룹핑, 결합 프로세싱, 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 또는 이들의 조합을 수행하거나, 또는 상기 액티비티가 있는 구간과 액티비티가 없는 구간의 시작 및 종료시간 정보를 토대로 쇼트 그룹핑, 결합 프로세싱, 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 또는 이들의 조합을 수행한 다음, 상기 수행한 결과를 상기 액티비티 윈도우에 표시하는 것을 특징으로 한다.In addition, the motion pattern tracking device may check the motion pattern tracking information displayed in the activity window, and then perform short grouping, combined processing, bedtime check, wake up time check, roaming while sleeping, or a combination thereof, or Short grouping, combined processing, bedtime check, wake-up time check, roaming while sleeping, or a combination of these are performed based on the start and end time information of the section with activity and the section without activity. It is characterized in that it is displayed in the activity window.

아울러, 본 발명의 일 실시예에 따른 동작패턴 추적 방법은, 동작패턴 추적 장치에서, 적어도 하나 이상의 센서로부터 사용자의 움직임에 대한 감지데이터를 수집하는 감지데이터 수집 단계 및 상기 수집한 감지데이터와 사전에 설정된 임계값의 비교를 토대로 액티비티가 있는 구간과 액티비티가 없는 구간을 체크하여 시간정보를 저장하는 액티비티 메인 처리 단계를 포함하는 것을 특징으로 한다.In addition, a motion pattern tracking method according to an embodiment of the present invention includes a sensing data collection step of collecting sensing data on a user's movement from at least one sensor in a motion pattern tracking device, and the collected sensing data in advance. And an activity main processing step of storing time information by checking a section with an activity and a section without an activity based on a comparison of the set threshold values.

또한 상기 동작패턴 추적 방법은, 상기 동작패턴 추적 장치에서, 상기 저장한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 토대로 움직임 시간, 경로 또는 이들의 조합을 포함한 동작패턴 결과데이터를 산출하는 결과 확인 단계를 더 포함하는 것을 특징으로 한다.In addition, the motion pattern tracking method includes, in the motion pattern tracking device, a result of calculating motion pattern result data including a motion time, a route, or a combination thereof based on the stored time information of the section with the activity and the section without the activity. It characterized in that it further comprises a confirmation step.

또한 상기 감지데이터 수집 단계는, 댁내, 사무실 또는 이들의 조합을 포함한 동작패턴 추적 공간에 적어도 하나 이상 설치된 PIR 센서를 포함한 적외선 센서, 초음파 센서, 이미지 센서 또는 이들의 조합을 포함한 움직임감지센서로부터 기 설정된 구동시간 및 간격에 따라 사용자의 움직임을 감지한 감지데이터를 유선 또는 무선을 통해 전송받는 것을 특징으로 한다.In addition, the sensing data collection step is preset from an infrared sensor including at least one PIR sensor installed in a motion pattern tracking space including a house, an office, or a combination thereof, an ultrasonic sensor, an image sensor, or a motion sensor including a combination thereof. It is characterized in that the sensing data that detects the movement of the user according to the driving time and interval is transmitted through wired or wireless.

또한 상기 동작패턴 추적 방법은, 상기 동작패턴 추적 장치에서 처리한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 토대로 동작패턴 추적의 시작 및 종료구간, 액티비티가 없는 구간, 액티비티가 있는 구간 중 일시적인 움직임을 나타내는 쇼트 액티비티와 연속적인 움직임을 나타내는 롱 액티비티 또는 이들의 조합을 시간의 경과에 따라 표시하는 액티비티 윈도우 표시 단계를 더 포함하는 것을 특징으로 한다.In addition, the motion pattern tracking method includes, based on the time information of the section with activity and the section without activity, processed by the motion pattern tracking device, the start and end section of motion pattern tracking, the section without activity, and the section with activity temporarily It characterized in that it further comprises an activity window displaying step of displaying a short activity representing movement and a long activity representing continuous movement or a combination thereof over time.

또한 상기 동작패턴 추적 방법은, 상기 동작패턴 추적 장치에서 처리한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 토대로, 상기 액티비티가 있는 구간 중 일시적인 움직임을 나타내는 쇼트 액티비티의 인접한 액티비티를 그룹핑하거나, 적어도 하나 이상의 센서에서 각각 측정한 사용자의 움직임에 대한 감지데이터 중 동일한 시간에 겹치는 구간이 있는지의 여부를 확인하여 겹치는 구간을 하나로 결합하여 배회여부나 이동경로를 확인하거나, 또는 이들의 조합을 포함한 분석을 수행하는 액티비티 서브 처리 단계를 더 포함하며, 상기 액티비티 서브 처리 단계에서 수행한 쇼트 그룹핑, 결합 프로세싱 또는 이들의 조합을 포함한 정보는 액티비티 윈도우를 통해 표시되는 것을 특징으로 한다.In addition, the motion pattern tracking method comprises grouping adjacent activities of a short activity representing a temporary movement among the active section, based on time information of a section with an activity and a section without an activity processed by the motion pattern tracking device, Check whether there is a section that overlaps at the same time among the detection data on the user's movement measured by at least one or more sensors, and combine the overlapping sections into one to check whether or not to roam or move, or to analyze including a combination of these An activity sub-processing step of performing the activity sub-processing step, wherein information including short grouping, combined processing, or a combination thereof performed in the activity sub-processing step is displayed through an activity window.

또한 상기 액티비티 메인 처리 단계는, 상기 센서로부터 수집한 감지데이터가 기 설정된 임계값을 초과하는지를 판단하여 액티비티의 발생여부를 확인하는 액티비티 확인 단계, 상기 확인한 액티비티 발생여부에 따라 액티비티가 없는 구간의 시작시간과 종료시간의 설정 및 업데이트를 처리하는 논 액티비티 처리 단계, 상기 확인한 액티비티 발생여부에 따라 액티비티가 있는 구간 중 기 설정된 롱 액티비티 판단을 위한 최대 타임스탬프 카운팅 수 이내의 일시적인 움직임이 나타난 쇼트 액티비티 구간의 시작시간과 종료시간을 저장하는 쇼트 액티비티 처리 단계 및 상기 확인한 액티비티 발생여부에 따라 액티비티가 있는 구간 중 기 설정된 롱 액티비티 판단을 위한 최대 타임스탬프 카운팅 수를 초과하여 연속적인 움직임이 나타난 롱 액티비티 구간의 시작시간과 종료시간을 저장하는 롱 액티비티 처리단계를 포함하는 것을 특징으로 한다.In addition, the activity main processing step is an activity check step of determining whether or not an activity has occurred by determining whether the sensing data collected from the sensor exceeds a preset threshold, and the start time of a section without activity according to whether the checked activity has occurred. Non-activity processing step, which processes setting and updating of and end time, the start of a short activity section in which a temporary movement within the maximum number of timestamps counting for determining a preset long activity among the sections with activities according to the occurrence of the checked activity occurs Short activity processing step that stores the time and end time, and the start time of the long activity section in which the continuous movement exceeds the maximum number of timestamps for determining the predetermined long activity among the section with the activity according to the occurrence of the checked activity. It characterized in that it comprises a long activity processing step of storing the and end time.

또한 상기 동작패턴 추적 방법은, 액티비티 윈도우에 표시되는 동작패턴 추적정보를 확인한 다음, 쇼트 그룹핑, 결합 프로세싱, 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 또는 이들의 조합을 수행하거나, 또는 상기 액티비티가 있는 구간과 액티비티가 없는 구간의 시작 및 종료시간 정보를 토대로 쇼트 그룹핑, 결합 프로세싱, 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 또는 이들의 조합을 수행한 다음, 상기 수행한 결과를 상기 액티비티 윈도우에 표시하는 단계;를 더 포함하는 것을 특징으로 한다.In addition, the motion pattern tracking method may include checking the motion pattern tracking information displayed in the activity window, and then performing short grouping, combined processing, bedtime check, wake-up time check, roaming while sleeping, or a combination thereof, or Short grouping, combined processing, bedtime check, wake-up time check, roaming while sleeping, or a combination of these are performed based on the start and end time information of the section with activity and the section without activity. And displaying on the activity window.

이상에서와 같이 본 발명의 동작패턴 추적 장치 및 그 방법에 따르면, PIR 센서를 포함한 적외선 센서, 초음파 센서, 이미지 센서, 온도센서 등의 움직임감지센서를 통해 사용자의 움직임을 추적하고, 추적한 사용자의 움직임 정보를 액티비티 윈도우를 통해 표시하고, 이를 통해 사용자의 동작패턴을 분석함으로써, 액티비티 윈도우를 통해 수면을 포함한 사용자의 움직임을 직관적으로 확인할 수 있음은 물론, 사용자의 동작패턴에 대한 질적인 판단을 빠르고 용이하게 수행할 수 있는 효과가 있다.As described above, according to the motion pattern tracking apparatus and method of the present invention, the motion of the user is tracked through motion detection sensors such as infrared sensors, ultrasonic sensors, image sensors, and temperature sensors including PIR sensors. By displaying the motion information through the activity window and analyzing the user's motion pattern through it, it is possible to intuitively check the user's movement, including sleep, through the activity window, and to quickly determine the quality of the user's motion pattern. There is an effect that can be easily performed.

도 1은 본 발명의 일 실시예에 따른 동작패턴 추적 장치의 구성을 개략적으로 나타낸 도면이다.
도 2는 본 발명이 적용된 동작패턴 추적 과정을 설명하기 위한 개념도이다.
도 3은 상기 도 1의 동작패턴 추적 장치의 구성을 상세하게 나타낸 도면이다.
도 4는 본 발명의 일 실시예에 따른 동작패턴 추적 방법의 동작과정을 나타낸 순서도이다.
도 5는 상기 도 4의 논 액티비티 구간의 체크 및 저장의 동작과정을 보다 상세하게 나타낸 순서도이다.
도 6은 상기 도 4의 액티비티 구간의 체크 및 저장의 동작과정을 보다 상세하게 나타낸 순서도이다.
도 7은 상기 도 4의 액티비티 윈도우 표시의 동작과정을 보다 상세하게 나타낸 순서도이다.
도 8은 상기 도 7의 액티비티 윈도우를 통해 표시되는 동작패턴 추적 정보의 일 예를 나타낸 도면이다.
도 9는 상기 도 4의 데이터 분석에서의 쇼트 그룹핑 동작과정을 보다 상세하게 나타낸 순서도이다.
도 10은 상기 도 4의 데이터 분석에서의 결합 프로세싱 동작과정을 보다 상세하게 나타낸 순서도이다.
도 11은 상기 도 4의 데이터 분석에서의 취침시간 확인 동작과정을 보다 상세하게 나타낸 순서도이다.
도 12는 상기 도 4의 데이터 분석에서의 기상시간(rise time) 확인 동작과정을 보다 상세하게 나타낸 순서도이다.
도 13은 상기 도 4의 데이터 분석에서의 수면 중 배회 여부 확인 동작과정을 보다 상세하게 나타낸 순서도이다.
도 14는 상기 도 9 내지 도 13의 데이터 분석화면의 일 예를 나타낸 도면이다.
도 15는 본 발명이 적용된 동작패턴 추적의 최종 결과화면의 일 예를 나타낸 도면이다.1 is a view schematically showing the configuration of a motion pattern tracking apparatus according to an embodiment of the present invention.
2 is a conceptual diagram illustrating a motion pattern tracking process to which the present invention is applied.
3 is a view showing in detail the configuration of the motion pattern tracking device of FIG.
4 is a flowchart showing an operation process of a method for tracking an operation pattern according to an embodiment of the present invention.
5 is a flow chart showing in more detail an operation process of checking and storing a non-activity section of FIG. 4.
6 is a flow chart showing in more detail the operation of checking and storing the activity section of FIG. 4.
FIG. 7 is a detailed flowchart illustrating an operation process of displaying the activity window of FIG. 4.
8 is a diagram illustrating an example of motion pattern tracking information displayed through the activity window of FIG. 7.
9 is a detailed flowchart illustrating a short grouping operation process in the data analysis of FIG. 4.
10 is a flow chart showing in more detail the operation of combining processing in the data analysis of FIG. 4.
11 is a flow chart showing in more detail an operation procedure for checking bedtime in the data analysis of FIG. 4.
12 is a flow chart showing in more detail an operation procedure for checking a rise time in the data analysis of FIG. 4.
13 is a flow chart showing in more detail a process of checking whether to wander during sleep in the data analysis of FIG. 4.
14 is a diagram illustrating an example of the data analysis screen of FIGS. 9 to 13.
15 is a diagram showing an example of a final result screen of motion pattern tracking to which the present invention is applied.

이하, 첨부한 도면을 참조하여 본 발명의 동작패턴 추적 장치 및 그 방법에 대한 바람직한 실시 예를 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다. 또한 본 발명의 실시 예들에 대해서 특정한 구조적 내지 기능적 설명들은 단지 본 발명에 따른 실시 예를 설명하기 위한 목적으로 예시된 것으로, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는 것이 바람직하다.Hereinafter, a preferred embodiment of the motion pattern tracking apparatus and method of the present invention will be described in detail with reference to the accompanying drawings. The same reference numerals in each drawing indicate the same member. In addition, specific structural or functional descriptions of the embodiments of the present invention are exemplified only for the purpose of describing the embodiments according to the present invention, and unless otherwise defined, all terms used herein including technical or scientific terms They have the same meaning as commonly understood by one of ordinary skill in the art to which the present invention belongs. Terms as defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related technology, and should not be interpreted as an ideal or excessively formal meaning unless explicitly defined in this specification. It is desirable not to.

도 1은 본 발명의 일 실시예에 따른 동작패턴 추적 장치의 구성을 개략적으로 나타낸 도면이다.1 is a view schematically showing the configuration of a motion pattern tracking apparatus according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명은 동작패턴 추적 장치(100), 적어도 하나 이상의 센서(200), 데이터베이스(300)로 구성된다.As shown in FIG. 1, the present invention includes a motion pattern tracking device 100, at least one sensor 200, and a database 300.

상기 동작패턴 추적 장치(100)는 침실, 거실, 욕실 등의 댁내는 물론, 사무실 등에 구비되어 인체의 움직임을 감지하는 센서(200)로부터 입력받은 감지데이터를 토대로 사용자의 움직임을 지속적으로 추적한다.The motion pattern tracking device 100 continuously tracks a user's movement based on sensing data received from a sensor 200 that is provided in an office, as well as in a bedroom, a living room, a bathroom, and the like.

또한 상기 동작패턴 추적 장치(100)는 상기 추적한 결과를 분석하여 해당 사용자가 어느 정도 움직임을 수행하고 있는지, 예를 들어 사전에 설정된 소정의 시간 간격 이내에서 간헐적으로 움직이는 무의미한 움직임인지, 사전에 설정된 소정의 시간 간격 이상으로 지속적으로 움직이는 유의미한 움직임인지를 확인할 수 있음은 물론, 이에 대한 동작패턴의 판정, 동작패턴에 대한 판정결과를 해당 사용자에게 제공하는 기능을 수행한다.In addition, the motion pattern tracking device 100 analyzes the tracking result to determine how much movement the user is performing, for example, whether it is an insignificant movement that intermittently moves within a predetermined time interval. In addition to being able to check whether it is a meaningful movement that continuously moves beyond a predetermined time interval, it performs a function of determining a motion pattern for this and providing a determination result of the motion pattern to a corresponding user.

예를 들어, 상기 동작패턴 추적 장치(100)는 사용자가 수면검사를 위하여 병원을 방문할 필요가 없으므로 시간적, 공간적 제약문제 및 비용문제를 절감할 수 있으며, 댁내, 사무실 등에 구비된 센서(200)를 사용하여 수면상태를 점검할 수 있으므로 여러 전자 장치를 신체의 일부에 부착한 상태로 검사하여야 하는 불편함을 해소할 수 있는 것이다.For example, since the motion pattern tracking device 100 does not require a user to visit a hospital for a sleep test, time and space constraints and cost problems can be reduced, and the sensor 200 provided in the home, office, etc. Since the sleep state can be checked by using, it is possible to eliminate the inconvenience of having to inspect various electronic devices attached to a part of the body.

이때 상기 동작패턴 추적 장치(100)는 상기 예시와 같이 수면검사 이외에, 별도의 독립적인 장비로 구현되어 댁내나 사무실의 소정 위치에 구비되거나, 사용자가 보유한 컴퓨터나 스마트폰에 설치된 애플리케이션 프로그램의 형태로 구현되거나, 서버 형태로 구현되어 네트워크를 통해 원격지에서 사용자의 동작패턴을 추적 및 분석하는 등 다양한 방식으로 실현될 수 있으며, 그 제한을 두지 않는다.In this case, the motion pattern tracking device 100 is implemented as a separate independent device, as in the example above, and provided in a predetermined location in the house or office, or in the form of an application program installed on a computer or smartphone held by the user. It can be implemented or implemented in the form of a server, and can be realized in various ways, such as tracking and analyzing a user's operation pattern at a remote location through a network, and is not limited thereto.

또한 상기 동작패턴 추적 장치(100)는 사용자의 움직임을 추적한 결과를 시간 경과에 따라 액티비티 윈도우를 통해 표시하기 때문에 상기 액티비티 윈도우에 표시되는 움직임 정보를 토대로 얼마만큼의 움직임이 있는지의 여부, 화장실을 가거나 음료수 음용 등을 위한 이동동선이나 배회시간의 여부 등을 직관적으로 확인할 수 있으며, 이를 통해 동작패턴의 분석을 용이하고 빠르게 수행하는 것이 가능해 진다.In addition, since the motion pattern tracking device 100 displays the result of tracking the user's movement through the activity window over time, it is possible to determine how much movement there is based on the movement information displayed in the activity window. It is possible to intuitively check whether there is a moving movement or roaming time for going or drinking beverages, etc., and through this, it becomes possible to easily and quickly perform an analysis of the motion pattern.

상기 액티비티 윈도우는 기 설정된 타임스탬프(예를 들어, 1분 간격)별 시간 경과에 따라 사용자의 움직임 정도(예를 들어, 수면 상태)를 그래프로 나타낸 것이다(도 8, 도 14 및 도 15 참조).The activity window is a graph showing the degree of movement of the user (eg, sleep state) according to the lapse of time for each preset timestamp (eg, 1 minute interval) (see FIGS. 8, 14 and 15) .

한편, 상기 동작패턴 추적 장치(100)는 액티비티 윈도우 상에 표시되는 사전에 설정된 시간(예를 들어 동작패턴 추적을 위한 시작 및 종료시간)동안 사용자의 움직임을 감지한 결과를 토대로 데이터 분석을 수행할 때, 상기 액티비티 윈도우 상에 표시된 움직임이 없는 구간(즉 논 액티비티(non activity) 구간) 및 움직임이 있는 구간(즉 액티비티 구간)의 시간 정보를 바로 이용하여 동작패턴을 분석할 수 있지만 이에 한정되는 것은 아니다.Meanwhile, the motion pattern tracking device 100 may perform data analysis based on the result of detecting the user's motion during a preset time displayed on the activity window (eg, start and end times for motion pattern tracking). In this case, the motion pattern can be analyzed by directly using the time information of the no-motion section (that is, the non-activity section) and the section in which there is motion (i.e., the activity section) displayed on the activity window. no.

즉 상기 동작패턴 추적 장치(100)는 상기 액티비티 윈도우 상에 표시된 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 활용하여 액티비티가 있는 구간의 인접한 액티비티(특히 쇼트 액티비티 구간)를 그룹핑(grouping)하거나, 적어도 하나 이상의 센서(200)에서 각각 측정한 사용자의 움직임에 대한 감지데이터 중 동일한 시간에 겹치는 구간이 있는지의 여부를 확인하여 겹치는 구간을 하나로 결합(joint processing)하여 배회여부나 이동경로를 확인하거나, 수면 중인 상에서의 기상 시간(rise time)을 확인하는 등의 세부 분석과정을 추가로 수행함으로써, 분석결과의 정확도와 신뢰도를 높일 수 있는 것이다.That is, the motion pattern tracking device 100 may group adjacent activities (especially short activity sections) of a section with an activity using the time information of the section with the activity and the section without the activity displayed on the activity window. , Checking whether there is a section that overlaps at the same time among the detection data of the user's movement measured by at least one or more sensors 200, and then combines the overlapping sections into one (joint processing) to check whether roaming or moving paths, or The accuracy and reliability of the analysis result can be improved by additionally performing a detailed analysis process such as checking the rise time in the sleeping bed.

또한 상기 동작패턴 추적 장치(100)는 액티비티 윈도우를 통해 표시되는 사용자의 움직임에 따른 추적 정보를 토대로 자동으로 동작패턴의 질적인 판단을 수행하는 것을 예로 하여 설명하지만 이에 한정되는 것은 아니며, 전문 의료인이 직접 상기 동작패턴 추적 장치(100)에서 처리한 사용자의 움직임에 따른 추적 정보를 확인하여 동작패턴의 질적인 판단을 수행할 수 있음을 밝혀둔다.In addition, the motion pattern tracking device 100 is described as an example of automatically performing the qualitative determination of the motion pattern based on tracking information according to the user's motion displayed through the activity window, but the present invention is not limited thereto. It is revealed that the qualitative determination of the motion pattern can be performed by directly checking the tracking information according to the user's movement processed by the motion pattern tracking device 100.

상기 센서(200)는 PIR 센서를 포함한 각종 적외선 센서, 초음파 센서, 이미지 센서, 온도센서 또는 이들의 조합을 포함한 사람의 움직임을 감시할 수 있는 공지된 모든 형태의 움직임감지센서을 포함하며, 댁내의 침실, 거실, 욕실은 물론, 사무실 등의 동작패턴 추적 공간에 적어도 하나 이상 설치되어 있다. 예를 들어, 침실의 경우 수면 중인 사용자의 움직임을 감지하기 쉽도록 침대 상부의 천정에 설치되는 것이 바람직하다.The sensor 200 includes all types of known motion detection sensors capable of monitoring a person's movement, including various infrared sensors including PIR sensors, ultrasonic sensors, image sensors, temperature sensors, or a combination thereof. , Living room, bathroom, as well as at least one is installed in the motion pattern tracking space in the office. For example, in the case of a bedroom, it is preferable to be installed on the ceiling above the bed so that it is easy to detect the movement of a sleeping user.

또한 상기 센서(200)는 상기 동작패턴 추적 장치(100)의 제어를 토대로 기 설정된 구동시간 및 간격에 따라 동작하여 사용자의 움직임을 감지하고, 상기 감지한 데이터를 유선 또는 무선으로 상기 동작패턴 추적 장치(100)로 전송한다.In addition, the sensor 200 operates according to a preset driving time and interval based on the control of the motion pattern tracking device 100 to detect the movement of the user, and the detected data is wired or wirelessly used to track the motion pattern. Send to (100).

상기 데이터베이스(300)는 상기 동작패턴 추적 장치(100)에서 처리되는 상기 센서(200)로부터 수집한 감지데이터를 토대로 한 동작패턴 추적정보, 추적정보의 액티비티 윈도우 표시정보, 동작패턴 분석 및 결과정보를 각 사용자별로 구분하여 저장, 관리한다.The database 300 stores motion pattern tracking information, activity window display information of tracking information, motion pattern analysis, and result information based on the detection data collected from the sensor 200 processed by the motion pattern tracking device 100. Store and manage separately for each user.

또한 상기 데이터베이스(300)는 상기 동작패턴 추적 장치(100) 및 상기 센서(200)에서 사용되는 각종 동작프로그램을 저장하여 관리하며, 각종 동작프로그램의 업데이트 정보를 저장하여 관리한다.In addition, the database 300 stores and manages various motion programs used by the motion pattern tracking device 100 and the sensor 200, and stores and manages update information of various motion programs.

한편, 상기 동작패턴 추적 과정을 도 2를 참조하여 상세하게 설명하면 다음과 같다.Meanwhile, the operation pattern tracking process will be described in detail with reference to FIG. 2 as follows.

도 2는 본 발명이 적용된 동작패턴 추적 과정을 설명하기 위한 개념도이다.2 is a conceptual diagram illustrating a motion pattern tracking process to which the present invention is applied.

도 2에 도시된 바와 같이, 상기 동작패턴 추적 장치(100)는 동작패턴 추적을 수행할 사용자가 지내는 댁내에 적어도 하나 이상 설치된 센서(200)의 동작을 설정하여 해당 사용자의 동작패턴 추적을 시작한다(①).As shown in FIG. 2, the motion pattern tracking device 100 starts tracking the motion pattern of the user by setting the motion of at least one sensor 200 installed in the premises of the user who will perform motion pattern tracking. (①).

즉 상기 동작패턴 추적 장치(100)는 상기 센서(200)가 측정을 시작하는 시간과 종료하는 시간, 측정 시간 간격(예를 들어 1분)을 사전에 설정함으로써, 사용자의 움직임을 감지하도록 하는 것이다.That is, the motion pattern tracking device 100 detects the user's movement by setting a time when the sensor 200 starts and ends a measurement, and a measurement time interval (eg, 1 minute) in advance. .

이렇게 상기 센서(200)의 구동시간 및 측정 시간 간격 설정을 토대로 특정 사용자의 동작패턴 추적이 시작되면, 상기 센서(200)에서 사용자의 움직임을 소정의 시간 간격(즉 타임스탬프)마다 측정하고(②), 소정 시간 간격으로 측정한 감지데이터를 유선 또는 무선을 통해 상기 동작패턴 추적 장치(100)로 전송한다(③).In this way, when tracking of a specific user's motion pattern is started based on the setting of the driving time and the measurement time interval of the sensor 200, the sensor 200 measures the user's movement every predetermined time interval (ie, time stamp) (②). ), and transmits the sensing data measured at predetermined time intervals to the motion pattern tracking device 100 via wired or wireless (③).

그러면, 상기 동작패턴 추적 장치(100)는 상기 센서(200)로부터 전송받은 감지데이터를 토대로 사용자의 움직임 정도에 대한 액티비티값을 산출하고, 상기 산출한 액티비티값을 사전에 설정한 임계값과 비교하여 사용자의 액티비티가 있는지의 여부를 확인한다. 즉 사용자의 움직임을 감지한 데이터가 움직임으로 확인할 수 있는 기준이 되는 임계값을 초과하는지의 여부를 판단하는 것이다.Then, the motion pattern tracking device 100 calculates an activity value for the degree of movement of the user based on the sensing data transmitted from the sensor 200, and compares the calculated activity value with a preset threshold value. It checks whether there is an activity of the user. That is, it is determined whether or not the data that detects the user's motion exceeds a threshold that is a criterion that can be identified as motion.

그리고 상기 동작패턴 추적 장치(100)는 상기 확인한 액티비티의 여부를 토대로 액티비티가 있는 구간 또는 액티비티가 없는 구간을 체크하고, 시작시간과 종료시간을 저장한다(④).Further, the motion pattern tracking device 100 checks a section with an activity or a section without an activity based on the checked activity, and stores the start time and the end time (④).

또한 상기 동작패턴 추적 장치(100)는 상기 액티비티가 있는 구간과 액티비티가 없는 구간의 시작 및 종료시간 정보를 토대로 액티비티 윈도우 상에 시작 및 종료시점, 액티비티가 없는 구간, 액티비티가 있는 구간 등을 표시하거나, 또는 상기 액티비티가 있는 구간과 액티비티가 없는 구간의 시작 및 종료시간 정보를 토대로 액티비티가 있는 구간의 인접한 액티비티를 그룹핑(특히, 쇼트 액티비티의 그룹핑)하거나, 복수의 센서(200)에서 측정한 사용자의 움직임에 대한 감지데이터 중 겹치는 구간을 하나로 결합하거나, 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 등을 수행한다(⑤).In addition, the motion pattern tracking device 100 may display start and end times, a section without an activity, a section with an activity, etc. on the activity window based on the start and end time information of the section with the activity and the section without the activity. , Or grouping (especially, grouping short activities) adjacent activities of a section with an activity based on the start and end time information of the section with the activity and the section without the activity, or the user's measured by a plurality of sensors 200 It combines the overlapping sections of motion detection data into one, or checks the bedtime, wake-up time, and checks whether to roam while sleeping (⑤).

이때 상기 동작패턴 추적 장치(100)는 상기 액티비티 윈도우에 표시되는 동작패턴 추적정보를 확인한 다음, 쇼트 그룹핑, 결합 프로세싱, 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 등을 수행할 수 있다. 또한 이와는 반대로 상기 액티비티가 있는 구간과 액티비티가 없는 구간의 시작 및 종료시간 정보를 토대로 쇼트 그룹핑, 결합 프로세싱, 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 등을 우선 수행한 다음, 상기 수행한 결과를 상기 액티비티 윈도우에 표시할 수도 있다.At this time, the motion pattern tracking device 100 may check motion pattern tracking information displayed in the activity window, and then perform short grouping, combined processing, bedtime check, wake-up time check, and roaming while sleeping. Also, on the contrary, based on the start and end time information of the section with the activity and the section without the activity, short grouping, combined processing, bedtime check, wake-up time check, and roaming while sleeping are first performed, and then Results can also be displayed in the activity window.

또한 상기 동작패턴 추적 장치(100)는 각 사용자들의 동작패턴 추적에 대한 정보를 토대로 동작패턴을 확인(예를 들어, 수면 상태의 추적의 경우에는 수면 상태의 질은 물론 수면장애가 있는지의 여부 등의 판정도 가능함)하며, 동작패턴에 대한 판정결과를 해당 사용자에게 제공한다(⑥).In addition, the motion pattern tracking device 100 checks the motion pattern based on the information on the motion pattern tracking of each user (for example, in the case of tracking the sleep state, the quality of the sleep state as well as whether there is a sleep disorder, etc. Judgment is also possible), and the judgment result for the motion pattern is provided to the user (⑥).

이때 동작패턴에 대한 판정결과의 제공은 문자, 메일 등의 사용자가 요청한 방식을 통하여 제공될 수 있다.At this time, the determination result for the operation pattern may be provided through a method requested by the user such as text or mail.

도 3은 상기 도 1의 동작패턴 추적 장치(100)의 구성을 상세하게 나타낸 도면이다.3 is a diagram showing in detail the configuration of the motion pattern tracking device 100 of FIG. 1.

도 3에 도시된 바와 같이, 상기 동작패턴 추적 장치(100)는 감지데이터 수집부(110), 액티비티 메인 처리부(120), 액티비티 서브 처리부(130), 응용 서비스 처리부(140), 액티비티 윈도우 표시부(150), 결과 확인부(160), 저장부(170), 제어부(180)로 구성된다.As shown in FIG. 3, the motion pattern tracking device 100 includes a sensing data collection unit 110, an activity main processing unit 120, an activity sub-processing unit 130, an application service processing unit 140, and an activity window display unit ( 150), the result check unit 160, the storage unit 170, and consists of a control unit 180.

또한 상기 동작패턴 추적 장치(100)는 도면에 도시하지는 않았지만, 각 구성 부분에 동작전원을 공급하는 전원부, 사용자가 각종 기능을 입력하거나 상태를 확인하기 위한 입력부, 상기 데이터베이스(300)와의 데이터 송수신을 위한 데이터 인터페이스부, 상기 동작패턴 추적 장치(100) 및 상기 센서(200)에서 사용하는 각종 동작프로그램의 업데이트를 관리하는 업데이트 관리부 등을 추가로 포함할 수 있다.In addition, although not shown in the drawing, the operation pattern tracking device 100 is a power supply unit for supplying operation power to each component, an input unit for a user to input various functions or check status, and transmit and receive data with the database 300. A data interface unit for the operation pattern tracking device 100 and the sensor 200 may further include an update management unit for managing updates of various operation programs used by the sensor 200.

상기 감지데이터 수집부(110)는 댁내에 구비된 적어도 하나 이상의 센서(200)로부터 유선 또는 무선으로 사용자의 움직임에 대한 아날로그 형태의 감지데이터를 수신하고, 수신한 감지데이터를 디지털로 변환하여 사용자의 움직임 정도를 나타내는 액티비티값을 산출하며, 산출한 액티비티값을 상기 제어부(180)로 전달한다.The sensing data collection unit 110 receives sensing data in analog form for the user's movement by wire or wirelessly from at least one sensor 200 provided in the home, and converts the received sensing data into digital An activity value representing the degree of movement is calculated, and the calculated activity value is transmitted to the controller 180.

이때 상기 감지데이터가 상기 센서(200)에서 아날로그 형태가 아닌 디지털 형태로 변환하여 수신되는 경우, 상기 감지데이터 수집부(110)는 상기 감지데이터의 값을 그대로 액티비티값으로 하여 상기 제어부(180)로 전달할 수 있다.At this time, when the sensor 200 converts the sensing data into a digital form rather than an analog form and is received, the sensing data collection unit 110 uses the sensing data value as an activity value to the controller 180. I can deliver.

상기 액티비티 메인 처리부(120)는 상기 감지데이터 수집부(110)에서 수집한 감지데이터와 사전에 설정된 임계값의 비교를 토대로 액티비티가 있는 구간과 액티비티가 없는 구간을 체크하여 시간정보를 저장하는 기능을 수행한다.The activity main processing unit 120 has a function of storing time information by checking a section with an activity and a section without an activity based on a comparison of the detection data collected by the detection data collection unit 110 with a preset threshold value. Perform.

이때 상기 액티비티 메인 처리부(120)는 액티비티 확인부(122), 논 액티비티 처리부(124), 쇼트 액티비티 처리부(126), 롱 액티비티 처리부(128)로 구성된다.At this time, the activity main processing unit 120 includes an activity check unit 122, a non-activity processing unit 124, a short activity processing unit 126, and a long activity processing unit 128.

상기 액티비티 확인부(122)는 상기 감지데이터 수집부(110)에서 확인한 사용자의 움직임 정도를 나타내는 액티비티값과 기 설정된 임계값을 비교하고, 비교결과 액티비티값이 임계값을 초과하지 않으면 액티비티가 발생하지 않은 구간으로 확인하며, 비교결과 액티비티값이 임계값을 초과하면 액티비티가 발생한 구간으로 확인한다.The activity check unit 122 compares the activity value indicating the degree of movement of the user checked by the sensing data collection unit 110 with a preset threshold value, and if the activity value does not exceed the threshold value, the activity does not occur. If the activity value exceeds the threshold value as a result of the comparison, it is checked as the section in which the activity occurred.

또한 상기 액티비티 확인부(122)는 액티비티값과 임계값의 비교결과에 따라 액티비티가 발생하지 않은 구간의 정보는 상기 논 액티비티 처리부(124)로 출력하며, 액티비티가 발생한 구간의 정보는 상기 쇼트 액티비티 처리부(126) 또는 상기 롱 액티비티 처리부(128)로 출력한다.In addition, the activity check unit 122 outputs information on the section in which no activity has occurred to the non-activity processing unit 124 according to the result of comparing the activity value and the threshold value, and the information on the section in which the activity occurs is the short activity processing unit. (126) or output to the long activity processing unit 128.

이때 상기 액티비티 확인부(122)는 액티비티값이 임계값을 초과하여 액티비티가 발생한 구간으로 확인할 때, 쇼트 액티비티인지 롱 액티비티인지의 여부를 확인한 다음, 쇼트 액티비티 또는 롱 액티비티의 결과에 따라 액티비티가 발생한 구간의 정보를 상기 쇼트 액티비티 처리부(126) 또는 상기 롱 액티비티 처리부(128)로 출력한다.At this time, when the activity check unit 122 checks whether an activity has occurred because the activity value exceeds the threshold value, it checks whether it is a short activity or a long activity, and then the section in which the activity occurs according to the result of the short or long activity. The information of is output to the short activity processing unit 126 or the long activity processing unit 128.

상기 논 액티비티 처리부(124)는 상기 액티비티 확인부(122)에서 확인한 액티비티 발생여부에 따라 액티비티가 없는 구간의 시작시간과 종료시간의 설정 및 업데이트를 처리한다.The non-activity processing unit 124 processes the setting and updating of a start time and an end time of a section without activity according to whether or not an activity has occurred, which is checked by the activity check unit 122.

상기 쇼트 액티비티 처리부(126)는 상기 액티비티 확인부(122)에서 확인한 액티비티 발생여부에 따라 액티비티가 있는 구간 중 기 설정된 롱 액티비티 판단을 위한 최대 타임스탬프 카운팅 수 이내의 일시적인 움직임이 나타난 쇼트 액티비티 구간의 시작시간과 종료시간의 저장을 처리한다. 즉 상기 쇼트 액티비티는 기 설정된 시간 간격 이내의 일시적인 움직임을 의미하는 것이다.The short activity processing unit 126 starts a short activity section in which a temporary movement within the maximum number of timestamps counted for determining a preset long activity among the sections in which there is an activity according to whether or not the activity has occurred checked by the activity check unit 122 Handles storage of time and end time. That is, the short activity means a temporary movement within a preset time interval.

상기 롱 액티비티 처리부(128)는 상기 액티비티 확인부(122)에서 확인한 액티비티 발생여부에 따라 액티비티가 있는 구간 중 기 설정된 롱 액티비티 판단을 위한 최대 타임스탬프 카운팅 수를 초과하여 연속적인 움직임이 나타난 롱 액티비티 구간의 시작시간과 종료시간의 저장을 처리한다. 즉 상기 롱 액티비티는 기 설정된 시간 간격을 초과하는 연속적인 움직임을 의미하는 것이다.The long activity processing unit 128 is a long activity section in which a continuous movement exceeds the maximum number of timestamps for determining a preset long activity among sections in which there is an activity according to whether or not the activity has occurred, which is checked by the activity check unit 122. The start time and end time of are stored. That is, the long activity means a continuous movement exceeding a preset time interval.

상기 액티비티 서브 처리부(130)는 상기 액티비티 메인 처리부(120)에서 수행한 액티비티가 있는 구간 중 일시적인 움직임을 나타내는 쇼트 액티비티의 인접한 액티비티를 그룹핑하거나, 센서(200)에서 각각 측정한 사용자의 움직임에 대한 감지데이터 중 동일한 시간에 겹치는 구간이 있는지의 여부를 확인하여 겹치는 구간을 하나로 결합하여 화장실을 가거나 음료수 음용 등을 위한 이동동선이나 배회시간의 여부, 기상 확인 여부 등을 확인한다.The activity sub-processing unit 130 groups adjacent activities of short activities representing temporary movements among the sections in which there is an activity performed by the activity main processing unit 120, or detects user movements measured by the sensor 200 respectively. It checks whether there are overlapping sections at the same time among the data, and combines the overlapping sections into one and checks whether there is a moving line or roaming time for going to the bathroom, drinking water, etc., and checking the weather.

이때 상기 액티비티 서브 처리부(130)는 쇼트 그룹핑부(132)와 결합 처리부(134)로 구성된다.In this case, the activity sub-processing unit 130 includes a short grouping unit 132 and a combination processing unit 134.

상기 쇼트 그룹핑부(132)는 상기 쇼트 액티비티 처리부(126)에서 처리한 액티비티가 있는 구간 정보를 토대로 인접한 액티비티 간의 그룹핑을 수행한다. 예를 들어, 상기 그룹핑을 수행하는 이유는 간헐적으로 발생하는 쇼트 액티비티의 경우 노이즈나 무의미한 사용자의 움직임으로 인식하게 되는데, 이러한 쇼트 액티비티가 일정 간격으로 여러 번 나타나면 롱 액티비티와 유사한 유의미한 사용자의 움직임으로 판단할 수 있도록 하기 위함이다.The short grouping unit 132 performs grouping between adjacent activities based on section information in which there is an activity processed by the short activity processing unit 126. For example, the reason for performing the grouping is that short activities that occur intermittently are recognized as noise or meaningless user movement.If such short activities appear several times at regular intervals, it is determined as meaningful user movement similar to long activities. It is to be able to do it.

상기 결합 처리부(134)는 상기 액티비티 메인 처리부(120)에서 수행한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 토대로, 적어도 하나 이상의 센서(200)에서 각각 측정한 사용자의 움직임에 대한 감지데이터 중 동일한 시간에 겹치는 구간이 있는지의 여부를 확인하여 겹치는 구간을 하나로 결합한다.The combined processing unit 134 is based on the time information of the section with the activity and the section without the activity performed by the main activity processing unit 120, the detection data of the user's movement measured by each of at least one sensor 200 Checks whether or not there is an overlapping section at the same time, and combines the overlapping sections into one.

상기 결합 처리부(134)에서의 결합 처리를 통하여 상기 액티비티 서브 처리부(130)는 사용자의 배회여부나 이동경로를 확인할 수 있다. 예를 들어 수면상태의 움직임을 추적하는 경우에는, 침실, 거실, 욕실 등에 각각 구비된 센서(200)에서 동일한 시간 간격 동안 사용자의 움직임이 감지되었다고 하면, 움직임의 크기에 따른 이동경로의 확인이 가능함은 물론, 이동경로를 통하여 수면 중인 사용자가 중간에 깨어나 거실로 가서 물을 마신다거나, 욕실을 이용하는 것을 확인할 수 있는 것이다.The activity sub-processing unit 130 may check whether the user is roaming or a movement path through the combination processing in the combination processing unit 134. For example, in the case of tracking the movement of the sleeping state, if the user's movement is detected during the same time interval by the sensors 200 each provided in the bedroom, living room, bathroom, etc., it is possible to check the movement path according to the size of the movement. Of course, it is possible to confirm that the sleeping user wakes up in the middle through the movement path, goes to the living room to drink water or uses the bathroom.

한편 상기 액티비티 서브 처리부(130)에서 수행한 쇼트 그룹핑 및 결합에 관련된 정보는 상기 액티비티 윈도우 표시부(150)를 통해 표시될 수 있음은 물론이다.Meanwhile, it goes without saying that information related to the short grouping and combining performed by the activity sub-processing unit 130 may be displayed through the activity window display unit 150.

상기 응용 서비스 처리부(140)는 취침 확인부(142), 기상 확인부(144), 수면 중 배회 확인부(146)로 구성되어, 상기 액티비티 메인 처리부(120)에서 수행한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 토대로 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 등을 수행한다. 예를 들어, 수면 중인 사용자의 최종 액티비티(배회, 롱 액티비티, 쇼트 그룹, 쇼트 액티비티, 컨티뉴드 등)가 확인된 시점 이후 동작패턴 추적의 종료시점까지 액티비티가 없으면 사용자가 기상한 것으로 확인한다.The application service processing unit 140 is composed of a sleep confirmation unit 142, a wake up check unit 144, and a roaming check unit 146 during sleep, and the section and activity in which the activities performed by the activity main processing unit 120 are present. Based on the time information of the section where there is no absence, check the bedtime, wake up time, and check whether or not to wander while sleeping. For example, if there is no activity until the end of motion pattern tracking after the time when the last activity of the sleeping user (roaming, long activity, short group, short activity, continuation, etc.) is confirmed, it is confirmed that the user has woke up.

상기 액티비티 윈도우 표시부(150)는 상기 논 액티비티 처리부(124), 쇼트 액티비티 처리부(126) 및 롱 액티비티 처리부(128)에서 각각 처리한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보를 참조하여, 특정 사용자의 동작패턴 추적의 시작 및 종료구간, 사용자의 움직임이 발생하지 않은 액티비티가 없는 구간, 사용자의 움직임이 발생한 액티비티가 있는 구간 중에서 일시적인 움직임을 나타내는 쇼트 액티비티와 연속적인 움직임을 나타내는 롱 액티비티를 시간의 경과에 따라 표시한다.The activity window display unit 150 refers to the time information of the section with the activity and the section without the activity processed by the non-activity processing unit 124, the short activity processing unit 126, and the long activity processing unit 128, respectively, Among the start and end sections of the user's motion pattern tracking, the section in which there is no activity in which the user's movement has not occurred, and the section in which the user's motion has occurred, the short activity representing temporary movement and the long activity representing continuous movement are defined in time. Display according to progress.

이때 상기 액티비티 윈도우는 상기 동작패턴 추적 장치(100)에 설정되어 있는 소정 시간 간격의 타임스탬프에 따라 사용자의 움직임 정도를 그래프로 나타낸 것이다.In this case, the activity window is a graph showing the degree of movement of the user according to a timestamp of a predetermined time interval set in the motion pattern tracking device 100.

또한 상기 액티비티 윈도우 표시부(150)는 상기 액티비티 서브 처리부(130)에서 수행한 쇼트 그룹핑 및 결합에 관련된 정보, 상기 응용 서비스 처리부(140)에서 수행한 사용자의 취침 확인, 기상 확인, 수면 중 배회 여부에 관련된 정보를 표시한다.In addition, the activity window display unit 150 provides information related to the short grouping and combination performed by the activity sub-processing unit 130, the user's sleep check, wake-up check, and roaming during sleep performed by the application service processing unit 140. Display related information.

상기 결과 확인부(160)는 상기 액티비티 메인 처리부(120)에서 수행한 액티비티가 있는 구간과 액티비티가 없는 구간의 시간정보와 상기 액티비티 서브 처리부(130)에서 수행한 쇼트 그룹핑 및 결합 프로세싱, 상기 응용 서비스 처리부(140)에서의 취침 확인, 기상 확인 및 배회 여부 확인과 관련한 정보를 토대로 얼마나 움직임이 있는지의 여부, 동작의 종류 또는 이들의 조합을 포함한 동작패턴 결과데이터를 산출한다. 즉 상기 결과 확인부(160)는 상기 액티비티 메인 처리부(120)에서 수행한 액티비티 구간 및 논 액티비티 구간의 정보와 상기 액티비티 서브 처리부(130)에서 수행한 각 사용자들의 동작패턴 추적에 대한 정보를 토대로 움직임이 얼마나 있는지의 여부, 동작의 종류 확인 등의 판정을 수행하고, 동작패턴에 대한 판정결과를 해당 사용자에게 제공하는 것이다.The result check unit 160 includes time information of an activity section and a section without activity performed by the activity main processing unit 120, short grouping and combining processing performed by the activity subprocessing unit 130, and the application service. Based on information related to sleep confirmation, wake-up confirmation, and roaming confirmation in the processing unit 140, operation pattern result data including whether there is movement, type of movement, or a combination thereof is calculated. That is, the result check unit 160 moves based on the information on the activity section and the non-activity section performed by the activity main processing unit 120 and the motion pattern tracking of each user performed by the activity sub-processing unit 130. A determination is made, such as whether or not there is a certain amount, and the type of movement is checked, and the determination result for the movement pattern is provided to the user.

또한 상기 결과 확인부(160)는 동작패턴에 대한 판정결과를 제공할 때, 사용자가 사전에 설정한 문자, 메일 등으로 제공할 수 있다.In addition, when the result check unit 160 provides the determination result for the operation pattern, it may be provided in a text, e-mail, or the like previously set by the user.

상기 저장부(170)는 상기 동작패턴 추적 장치(100) 및 상기 센서(200)에서 사용되는 각종 동작프로그램을 저장하고 있으며, 상기 감지데이터 수집부(110), 액티비티 메인 처리부(120), 액티비티 서브 처리부(130), 액티비티 윈도우 표시부(150), 결과 확인부(160)에서 처리되는 데이터를 상기 데이터베이스(300)에 저장하기 이전에 임시 저장하는 역할을 수행한다.The storage unit 170 stores various motion programs used in the motion pattern tracking device 100 and the sensor 200, and the sensing data collection unit 110, the activity main processing unit 120, and the activity sub The data processed by the processing unit 130, the activity window display unit 150, and the result check unit 160 are temporarily stored before being stored in the database 300.

상기 제어부(180)는 상기 동작패턴 추적 장치(100)의 각 구성 부분을 총괄적으로 제어하는 부분으로서, 상기 감지데이터 수집부(110)에서의 상기 센서(200)에서 측정한 감지데이터의 수신 및 액티비티값 확인을 제어하며, 상기 액티비티 메인 처리부(120)에서의 액티비티값과 임계값의 비교를 통한 액티비티가 있는 구간과 액티비티가 없는 구간의 확인 및 시간정보 저장을 제어한다.The controller 180 is a part that controls each component of the motion pattern tracking device 100 as a whole, and receives and activities of the sensing data measured by the sensor 200 in the sensing data collection unit 110. A value check is controlled, and a section with an activity and a section without an activity are checked and time information is stored through the comparison of the activity value and the threshold value in the activity main processing unit 120.

또한 상기 제어부(180)는 상기 액티비티 서브 처리부(130)에서의 액티비티가 있는 구간 중 일시적인 움직임을 나타내는 쇼트 액티비티의 인접한 액티비티의 그룹핑, 이동동선이나 배회시간 확인을 위한 결합 등의 확인을 제어하며, 상기 액티비티 윈도우 표시부(150)에서의 상기 액티비티 메인 처리부(120)에서 처리한 사용자의 움직임에 따른 액티비티가 있는 구간과 액티비티가 없는 구간의 표시 및 상기 액티비티 서브 처리부(130)에서 처리한 쇼트 그룹핑, 결합 프로세싱 등의 표시를 제어한다.In addition, the control unit 180 controls confirmation of grouping of adjacent activities of short activities representing temporary movements among the section in which there is an activity in the activity sub-processing unit 130, and combining for checking movement or roaming time, and the like. In the activity window display unit 150, the active section and the section without the activity according to the user's movement processed by the activity main processing unit 120 are displayed, and the short grouping and combination processing processed by the activity sub processing unit 130 Control the display of the back.

또한 상기 제어부(180)는 상기 결과 확인부(160)에서의 상기 액티비티 메인 처리부(120)에서 처리한 액티비티 구간 및 논 액티비티 구간의 정보와 상기 액티비티 서브 처리부(130)에서 수행한 정보를 토대로 한 결과데이터의 산출과 산출한 결과데이터의 사용자 제공을 제어한다.In addition, the control unit 180 is a result based on the information of the activity section and the non-activity section processed by the activity main processing unit 120 in the result check unit 160 and the information performed by the activity sub-processing unit 130 It controls the calculation of data and user provision of the calculated result data.

한편 상기 제어부(180)는 유선 또는 무선으로 통신 접속되는 상기 센서(200)의 동작프로그램 관리 및 업데이트를 제어한다.Meanwhile, the controller 180 controls management and updating of an operation program of the sensor 200, which is connected via wired or wireless communication.

다음에는, 이와 같이 구성된 본 발명에 따른 동작패턴 추적 방법의 일 실시예를 도 4 내지 도 15를 참조하여 상세하게 설명한다. 이때 본 발명의 방법에 따른 각 단계는 사용 환경이나 당업자에 의해 순서가 변경될 수 있다. 또한 도 4 내지 도 15에 제시된 도면은 본 발명의 동작패턴 추적 중 수면 중인 사용자의 동작패턴 추적에 적용되는 하나의 예시를 제안한 것으로서, 언급한 방식 이외에 다양한 방식을 적용할 수 있음은 물론, 수면과 관련된 정보의 추적 이외에 다양한 동작패턴의 추적에 적용할 수 있음을 밝혀둔다.Next, an embodiment of a method for tracking a motion pattern according to the present invention configured as described above will be described in detail with reference to FIGS. 4 to 15. At this time, the order of each step according to the method of the present invention may be changed by a use environment or a person skilled in the art. In addition, the drawings shown in FIGS. 4 to 15 suggest an example that is applied to the motion pattern tracking of a sleeping user during motion pattern tracking of the present invention, and various methods other than the above-mentioned methods can be applied, as well as sleep and sleep. In addition to tracking related information, it is revealed that it can be applied to tracking various motion patterns.

도 4 내지 도 7은 본 발명의 일 실시예에 따른 동작패턴 추적 방법의 동작과정을 나타낸 순서도이고, 도 8은 상기 도 7의 액티비티 윈도우를 통해 표시되는 동작패턴 추적 정보의 일 예를 나타낸 도면이고, 도 9 내지 도 13은 상기 도 4의 데이터 분석에서의 쇼트 그룹핑, 결합 프로세싱, 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 각각의 동작과정을 보다 상세하게 나타낸 순서도이고, 도 14는 상기 도 9 내지 도 13의 데이터 분석화면의 일 예를 나타낸 도면이며, 도 15는 본 발명이 적용된 동작패턴 추적의 최종 결과화면의 일 예를 나타낸 도면이다.4 to 7 are flowcharts illustrating an operation process of a method for tracking a motion pattern according to an embodiment of the present invention, and FIG. 8 is a diagram illustrating an example of motion pattern tracking information displayed through the activity window of FIG. 7. 9 to 13 are flowcharts showing in more detail each operation process of short grouping in the data analysis of FIG. 4, combined processing, check of bedtime, check of wake-up time, check whether roaming while sleeping, and FIG. 9 to 13 are views showing an example of the data analysis screen, and FIG. 15 is a view showing an example of the final result screen of the motion pattern tracking to which the present invention is applied.

먼저 도 4에 도시된 바와 같이, 동작패턴 추적 장치(100)는 침실, 거실 등에 설치되어 있는 인체의 움직임을 감지하는 센서(200)의 동작을 설정하고, 수면패턴 추적을 위한 시간이 되면 타임스탬프를 가동하여 사전에 설정한 측정 시간 간격(예를 들어 1분)마다 상기 센서(200)로부터 감지데이터를 수집한다(S100).First, as shown in FIG. 4, the motion pattern tracking device 100 sets the motion of the sensor 200 that detects the movement of the human body installed in the bedroom, living room, etc., and when the time for tracking the sleep pattern comes, a time stamp The sensor 200 collects sensing data every preset measurement time interval (for example, 1 minute) by operating (S100).

상기 S100 단계를 통해 상기 센서(200)로부터 수면 중인 사용자의 움직임을 감지한 감지데이터가 수집되면, 상기 동작패턴 추적 장치(100)는 기 설정된 수면패턴 측정시간 이내인지의 여부를 판단한다(S200). 즉 현재 시간이 수면 중인 사용자가 사전에 설정해 놓은 취침 시작시간과 종료시간 이내인지의 여부를 확인하는 것이다.When sensing data that detects the movement of the sleeping user from the sensor 200 is collected through the step S100, the motion pattern tracking device 100 determines whether or not it is within a preset sleep pattern measurement time (S200). . That is, it checks whether the current time is within the start time and end time of bed set by the sleeping user.

상기 S200 단계의 판단결과 수면패턴 측정시간 이내이면, 상기 동작패턴 추적 장치(100)는 상기 S100 단계를 통해 상기 센서(200)로부터 수집한 감지데이터에서 사용자의 움직임 정도에 대한 액티비티값을 산출한 다음, 상기 액티비티값과 사전에 설정한 임계값을 비교하여 상기 액티비티값이 임계값을 초과하는지의 여부를 판단한다(S300).If the determination result in step S200 is within the measurement time of the sleep pattern, the motion pattern tracking device 100 calculates an activity value for the degree of movement of the user from the sensing data collected from the sensor 200 through the step S100. , It is determined whether the activity value exceeds the threshold value by comparing the activity value with a preset threshold value (S300).

상기 S300 단계의 판단결과 상기 액티비티값이 임계값을 초과하지 않으면, 상기 동작패턴 추적 장치(100)는 수면 중인 사용자가 현재 시간에 별다른 움직임이 없는 액티비티가 없는 구간(즉 논 액티비티 구간)으로 판단하고, 액티비티가 없는 구간의 시작시간과 종료시간 정보를 체크하여 업데이트한다(S400).As a result of the determination in step S300, if the activity value does not exceed the threshold value, the motion pattern tracking device 100 determines that the sleeping user is a section in which there is no activity in which there is no other movement at the current time (that is, a non-activity section). , The start time and end time information of the section without activity is checked and updated (S400).

이때 상기 S400 단계를 도 5를 참조하여 보다 상세하게 설명하면, 상기 동작패턴 추적 장치(100)는 액티비티가 없는 구간을 카운팅하고(S410), 액티비티가 없는 구간의 현재 카운팅 수가 최대 카운팅 수를 초과하는지를 판단한다(S420). 이때 상기 카운팅은 타임스탬프와 동일한 1분을 의미하고, 최대 카운팅 수는 20을 예로 설정할 수 있으며, 최대 카운팅 수 20의 의미는 20분 단위를 기준으로 액티비티가 없는 구간의 정보를 체크 및 업데이트한다는 것이다.At this time, the step S400 will be described in more detail with reference to FIG. 5, the motion pattern tracking device 100 counts a section without activity (S410), and determines whether the current counting number of the section without activity exceeds the maximum number of counting. It is determined (S420). At this time, the counting means 1 minute, which is the same as the timestamp, and the maximum number of counting can be set to 20 as an example, and the maximum number of counting means 20 is to check and update the information of the section without activity on a 20-minute basis. .

상기 S420 단계의 판단결과 액티비티가 없는 구간의 현재 카운팅 수가 최대 카운팅 수를 초과하면, 상기 동작패턴 추적 장치(100)는 액티비티가 없는 구간의 시작과 종료시점을 셋업하거나, 또는 액티비티가 없는 구간의 종료시점을 업데이트한 다음(S430), 측정시간 이내인지를 판단하는 상기 S200 단계 이후를 반복하여 수행한다.As a result of the determination in step S420, if the current counting number of the section without activity exceeds the maximum counting number, the motion pattern tracking device 100 sets the start and end points of the section without activity, or ends the section without activity. After the time point is updated (S430), the step S200 is repeated to determine whether it is within the measurement time.

또한 상기 S420 단계의 판단결과 액티비티가 없는 구간의 현재 카운팅 수가 최대 카운팅 수를 초과하지 않으면, 상기 동작패턴 추적 장치(100)는 측정시간 이내인지를 판단하는 상기 S200 단계 이후를 반복하여 수행한다.In addition, as a result of the determination in step S420, if the current counting number in the section without activity does not exceed the maximum counting number, the motion pattern tracking apparatus 100 repeatedly performs after step S200 to determine whether it is within the measurement time.

한편 상기 S300 단계의 판단결과 상기 액티비티값이 임계값을 초과하면, 상기 동작패턴 추적 장치(100)는 수면 중인 사용자가 현재 시간에 임계값 이상의 유의미한 움직임이 있는 액티비티가 있는 구간(즉 액티비티 구간)으로 판단하고, 액티비티가 있는 구간의 시작시간과 종료시간 정보를 체크하여 저장한다(S500).On the other hand, if the activity value exceeds the threshold value as a result of the determination in step S300, the motion pattern tracking device 100 moves the sleeping user to a section in which there is an activity in which there is a significant movement above the threshold value (ie, the activity section). It is determined, the start time and end time information of the section in which the activity is located is checked and stored (S500).

이때 상기 S500 단계를 도 6을 참조하여 보다 상세하게 설명하면, 상기 동작패턴 추적 장치(100)는 롱 액티비티 구간을 카운팅하고(S510), 롱 액티비티 구간의 현재 카운팅 수가 최대 카운팅 수를 초과하는지를 판단한다(S520). 이때 상기 롱 액티비티 구간의 최대 카운팅 수는 3(즉 연속적인 움직임이 3분 동안 지속되는지를 의미)을 예로 설정할 수 있다.In this case, the step S500 will be described in more detail with reference to FIG. 6, the motion pattern tracking device 100 counts the long activity section (S510) and determines whether the current counting number of the long activity section exceeds the maximum number of counting. (S520). In this case, the maximum number of counting in the long activity section may be set to 3 (that is, whether continuous movement is continued for 3 minutes) as an example.

상기 S520 단계의 판단결과 롱 액티비티 구간의 현재 카운팅 수가 최대 카운팅 수를 초과하면, 상기 동작패턴 추적 장치(100)는 롱 액티비티가 있는 구간의 시작과 종료시점을 확인하여 저장한 다음(S530), 측정시간 이내인지를 판단하는 상기 S200 단계 이후를 반복하여 수행한다.As a result of the determination in step S520, if the current counting number of the long activity section exceeds the maximum counting number, the motion pattern tracking device 100 checks and stores the start and end points of the long activity section (S530), and then measure. After the step S200, which determines whether it is within the time, is repeatedly performed.

또한 상기 S520 단계의 판단결과 롱 액티비티 구간의 현재 카운팅 수가 최대 카운팅 수를 초과하지 않으면, 상기 동작패턴 추적 장치(100)는 현재의 구간을 쇼트 액티비티로 확인하여 저장한 다음(S540), 측정시간 이내인지를 판단하는 상기 S200 단계 이후를 반복하여 수행한다.In addition, as a result of the determination in step S520, if the current counting number of the long activity section does not exceed the maximum counting number, the motion pattern tracking device 100 checks and stores the current section as a short activity (S540), and then within the measurement time. After the step S200 of determining whether it is recognized is repeatedly performed.

한편 상기 S200 단계의 판단결과 수면패턴 측정시간이 경과되면, 상기 동작패턴 추적 장치(100)는 상기 S400 단계 및 S500 단계에서 수행한 상기 액티비티가 있는 구간과 액티비티가 없는 구간의 시작 및 종료시간 정보를 시간의 경과에 따라 액티비티 윈도우 상에 표시하거나, 세부 항목의 분석을 수행한다(S600).On the other hand, when the sleep pattern measurement time elapses as a result of the determination in step S200, the motion pattern tracking device 100 stores start and end time information of the section with the activity and the section without the activity performed in steps S400 and S500. As time elapses, it is displayed on the activity window or detailed items are analyzed (S600).

즉 액티비티가 있는 구간과 액티비티가 없는 구간의 시작 및 종료시간 정보를 토대로 시작 및 종료시점, 액티비티가 없는 구간, 액티비티가 있는 구간(일시적인 움직임을 나타내는 쇼트 액티비티와 연속적인 움직임을 나타내는 롱 액티비티 포함) 등을 액티비티 윈도우 상에 표시하거나, 액티비티가 있는 구간 중 쇼트 액티비티의 인접한 액티비티의 쇼트 그룹핑, 복수의 센서(200)에서 측정한 사용자의 움직임에 대한 감지데이터 중 겹치는 구간의 결합 프로세싱, 취침시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 등의 세부사항에 대한 분석, 또는 이들의 조합을 수행하는 것이다.In other words, based on the start and end time information of the section with and without the activity, the start and end points, the section without the activity, the section with the activity (including a short activity representing temporary movement and a long activity representing continuous movement), etc. Is displayed on the activity window, or short grouping of adjacent activities of the short activity during the section where there is an activity, combined processing of overlapping sections among the detection data of the user's motion measured by a plurality of sensors 200, checking bedtime, waking up Analyzing details, such as checking the time, checking whether to roam while sleeping, or a combination of these.

이때 상기 S600 단계의 액티비티 윈도우 표시과정을 도 7과 도 8을 참조하여 보다 상세하게 설명하면, 상기 동작패턴 추적 장치(100)는 상기 S400 단계 및 S500 단계에서 수행한 액티비티가 있는 구간과 액티비티가 없는 구간의 시작 및 종료시간 정보를 토대로 논 액티비티 구간이 없고, 논 액티비티 시작점에 저장된 값이 없는지를 판단한다(S601).In this case, the process of displaying the activity window in step S600 will be described in more detail with reference to FIGS. 7 and 8. The motion pattern tracking device 100 includes a section in which there is an activity performed in steps S400 and S500 and there is no activity. Based on the start and end time information of the section, it is determined whether there is no non-activity section and there is no value stored at the non-activity start point (S601).

상기 S601 단계의 판단결과 논 액티비티 구간이 없고, 논 액티비티 시작점에 저장된 값이 없으면, 상기 동작패턴 추적 장치(100)는 논 액티비티 구간을 찾기 위한 카운트 값이 없는지를 판단하고(S602), 판단결과 논 액티비티 구간을 찾기 위한 카운트 값이 없으면 모두 액티비티가 있는 구간으로 설정하고(S603), 상기 S602 단계의 판단결과 논 액티비티 구간을 찾기 위한 카운트 값이 있으면 모두 액티비티가 없는 구간으로 설정한다(S604). 예를 들어 도 8에 도시된 하늘색 표시부분(①)의 시작시점과 종료시점을 확인하는 것이다.If the determination result of step S601 is that there is no non-activity section and there is no value stored at the non-activity start point, the motion pattern tracking device 100 determines whether there is no count value for finding the non-activity section (S602), and the determination result is non-active. If there is no count value for finding the activity section, all are set as an activity section (S603), and if there is a count value for finding the non-activity section as a result of the determination in step S602, all are set as a section without activity (S604). For example, the starting point and the ending point of the light blue display portion (①) shown in FIG. 8 are checked.

그러나 상기 S601 단계의 판단결과 논 액티비티 구간이 있고, 논 액티비티 시작점에 저장된 값이 있으면, 상기 동작패턴 추적 장치(100)는 논 액티비티 구간이 있고, 논 액티비티 시작점 값이 마지막에 저장된 논 액티비티 시작점 값과 같은지를 판단한다(S605).However, as a result of the determination of step S601, if there is a non-activity section and a value stored in the non-activity start point is present, the motion pattern tracking device 100 has a non-activity start point value and the non-activity start point value is last stored. It is determined whether they are the same (S605).

상기 S605 단계의 판단결과 논 액티비티 구간이 있고, 논 액티비티 시작점 값이 마지막에 저장된 논 액티비티 시작점 값과 같지 않으면, 상기 동작패턴 추적 장치(100)는 논 액티비티 구간별 시작 및 종료지점을 확인한다(S606).As a result of the determination in step S605, if there is a non-activity section and the non-activity start point value is not the same as the last stored non-activity start point value, the motion pattern tracking device 100 checks the start and end points for each non-activity section (S606). ).

상기 S606 단계를 통해 논 액티비티 구간별 시작 및 종료지점을 확인한 이후, 상기 동작패턴 추적 장치(100)는 액티비티 최종구간 이내인지를 판단하고(S607), 상기 S607 단계의 판단결과 액티비티 최종구간 이내이면, 상기 S606 단계에서 확인한 논 액티비티 구간 정보를 참조하여, 논 액티비티 구간 사이의 모든 롱 액티비티 구간별 시작 및 종료시점을 확인한다(S608). 이때 롱 액티비티 구간은 도 8에 도시된 보라색 표시부분(③)이다. 또한 쇼트 액티비티 구간은 도 8에 도시된 빨간색 표시부분(②)이며, 노란색 표시부분은 액티비티 구간 판정의 기준이 되는 임계값이다.After confirming the start and end points for each non-activity section through the step S606, the motion pattern tracking device 100 determines whether it is within the activity final section (S607), and if the determination result in the step S607 is within the activity final section, With reference to the non-activity section information checked in step S606, the start and end times of each long activity section between the non-activity sections are checked (S608). At this time, the long activity section is a purple display part (③) shown in FIG. 8. In addition, the short activity section is a red portion (②) shown in FIG. 8, and the yellow portion is a threshold value used as a criterion for determining the activity section.

이후 상기 동작패턴 추적 장치(100)는 액티비티 구간을 카운팅한 다음(S609), 액티비티 최종구간 이내인지의 여부를 판단하는 상기 S607 단계 이후를 반복하여 수행한다.Thereafter, the motion pattern tracking device 100 counts the activity section (S609), and then repeats the operation after step S607 to determine whether it is within the final section of the activity.

또한 상기 동작패턴 추적 장치(100)는 상기 S607 단계의 판단결과 액티비티 최종구간 이내가 아니면, 액티비티의 시작 및 종료 구간(액티비티의 continued 정보)을 확인하여 저장한다(S610). 예를 들어 도 8의 하늘색 표시부분(①)의 수면패턴 추적에 대한 시작 및 종료구간을 확인하는 것이다.In addition, as a result of the determination in step S607, the motion pattern tracking apparatus 100 checks and stores the start and end sections of the activity (continued information of the activity) if it is not within the final section of the activity (S610). For example, the start and end sections for tracking the sleep pattern of the light blue display portion (①) of FIG. 8 are checked.

한편, 상기 S600 단계의 쇼트 그룹핑, 결합 프로세싱, 취침 시간 확인, 기상 시간 확인, 수면 중 배회 여부 확인 등의 세부분석 과정을 도 9 내지 도 14를 참조하여 보다 상세하게 설명하면 다음과 같다.On the other hand, detailed analysis processes such as short grouping, combined processing, sleep time check, wake up time check, and roaming during sleep in step S600 will be described in more detail with reference to FIGS. 9 to 14 as follows.

도 9를 참조하여 액티비티가 있는 구간 중 인접한 쇼트 액티비티의 쇼트 그룹핑을 설명하면, 상기 동작패턴 추적 장치(100)는 최종 쇼트 액티비티인지를 판단하고(S611), 상기 S611 단계의 판단결과 최종 쇼트 액티비티가 아니면, 현재의 쇼트 액티비티 이후 구간과 이전 구간의 차이값을 확인한다(S612).Referring to FIG. 9 to describe the short grouping of adjacent short activities in the section where there is an activity, the motion pattern tracking device 100 determines whether it is a final short activity (S611), and as a result of the determination in step S611, the final short activity is Otherwise, the difference value between the section after the current short activity and the previous section is checked (S612).

그리고 상기 동작패턴 추적 장치(100)는 상기 S612 단계에서 확인한 차이값이 기 설정된 최대 그룹핑 간격 이내인지를 판단한다(S613). 이때 최대 그룹핑 간격은 10으로 설정되며, 이는 현재의 쇼트 액티비티가 확인된 이후 10분 이내에 후속 쇼트 액티비티가 있는지를 확인하는 것을 의미한다.Further, the motion pattern tracking apparatus 100 determines whether the difference value checked in step S612 is within a preset maximum grouping interval (S613). At this time, the maximum grouping interval is set to 10, which means to check whether there is a subsequent short activity within 10 minutes after the current short activity is confirmed.

상기 S613 단계의 판단결과 상기 S612 단계에서 확인한 차이값이 기 설정된 최대 그룹핑 간격 이내이면, 상기 동작패턴 추적 장치(100)는 쇼트 액티비티에 대한 시작 및 종료지점, 그룹핑 수에 대한 그룹핑 결과를 저장하고(S614), 그룹핑 변수를 카운팅한 다음(S615), 최종 쇼트 액티비티 여부를 판단하는 상기 S611 단계 이후를 반복하여 수행한다. 이때 인접한 쇼트 액티비티의 그룹핑 결과는 도 14의 첫 번째 그래프에 나타난 바와 같다.As a result of the determination in step S613, if the difference value checked in step S612 is within a preset maximum grouping interval, the motion pattern tracking device 100 stores the grouping result for the start and end points for the short activity and the number of groupings ( S614), after the grouping variable is counted (S615), and after the step S611 of determining whether or not the final short activity has been performed, it is repeatedly performed. At this time, the grouping result of adjacent short activities is as shown in the first graph of FIG. 14.

상기 S613 단계의 판단결과 상기 S612 단계에서 확인한 차이값이 기 설정된 최대 그룹핑 간격을 벗어나면, 상기 동작패턴 추적 장치(100)는 그룹핑 변수를 카운팅한 다음(S616), 최종 쇼트 액티비티 여부를 판단하는 상기 S611 단계 이후를 반복하여 수행한다.As a result of the determination in step S613, when the difference value checked in step S612 exceeds a preset maximum grouping interval, the motion pattern tracking device 100 counts the grouping variable (S616), and then determines whether the final short activity is present. After step S611 is performed repeatedly.

또한 도 10을 참조하여 각각의 센서(200)에서 측정한 사용자의 움직임에 대한 감지데이터 중 겹치는 구간의 결합 프로세싱을 설명하면, 댁내에 구비된 각각의 센서(200)에서 감지한 감지데이터를 토대로 액티비티값을 확인하는 상기 동작패턴 추적 장치(100)는 사전에 설정된 측정시간 이내인지를 판단한다(S621).In addition, referring to FIG. 10, the combined processing of overlapping sections among the detection data on the user's motion measured by each sensor 200 will be described, based on the detection data detected by each sensor 200 in the premises. The motion pattern tracking device 100 for checking a value determines whether it is within a preset measurement time (S621).

상기 S621 단계의 판단결과 사전에 설정된 측정 시간 이내이면, 상기 동작패턴 추적 장치(100)는 액티비티값을 토대로 겹치는 부분이 시작되는지의 여부를 판단한다(S622).If it is within a predetermined measurement time as a result of the determination in step S621, the motion pattern tracking apparatus 100 determines whether or not the overlapping portion starts based on the activity value (S622).

상기 S622 단계의 판단결과 겹치는 부분이 시작되면, 상기 동작패턴 추적 장치(100)는 타겟 공간이나 다른 공간의 움직임 여부를 확인하고(S623), 상기 확인한 타겟 공간이나 다른 공간의 움직임 여부를 토대로 겹치는 구간의 시작지점 확인 또는 업데이트를 수행한다(S624).As a result of the determination in step S622, when the overlapping part starts, the motion pattern tracking device 100 checks whether a target space or another space is moving (S623), and the overlapping section based on whether the checked target space or another space moves. Check or update the starting point of (S624).

그리고 상기 S624 단계를 통해 겹치는 구간의 시작지점 확인 또는 업데이트를 수행한 이후, 상기 동작패턴 추적 장치(100)는 액티비티 구간을 카운팅한 다음(S625), 기 설정된 측정시간 이내인지의 여부를 판단하는 상기 S621 단계 이후를 반복하여 수행한다.And after checking or updating the start point of the overlapping section through the step S624, the motion pattern tracking device 100 counts the activity section (S625), and then determines whether or not it is within a preset measurement time. After step S621 is performed repeatedly.

또한 상기 S622 단계의 판단결과 겹치는 부분의 시작이 아니면, 상기 동작패턴 추적 장치(100)는 타겟 공간, 다른 공간 또는 동시의 움직임 여부를 확인하고(S626), 상기 확인한 타겟 공간, 다른 공간 또는 동시 움직임 여부를 토대로 겹치는 구간의 종료지점 확인 또는 업데이트를 수행한다(S627).In addition, if the determination result in step S622 is not the start of the overlapping portion, the motion pattern tracking device 100 checks whether a target space, another space, or simultaneous movement is made (S626), and the checked target space, another space, or simultaneous movement Based on whether or not, the end point of the overlapping section is checked or updated (S627).

그리로 상기 S627 단계를 통해 겹치는 구간의 종료지점 확인 또는 업데이트를 수행한 이후, 상기 동작패턴 추적 장치(100)는 액티비티 구간을 카운팅하는 상기 S627 단계를 수행한다.Thus, after checking or updating the end point of the overlapping section through the step S627, the motion pattern tracking device 100 performs the step S627 of counting the activity section.

즉 동일한 시간에 액티비티가 겹치는 부분의 결합을 토대로 수면 중인 사용자가 중간에 깨어나 거실로 가서 물을 마신다거나, 욕실을 이용한다거나, 수면 중에 무의식적으로 배회하는 등을 용이하게 확인할 수 있는 것이다. 이때 액티비티가 겹치는 부분을 결합한 결과는 도 14의 두 번째 및 세 번째 그래프에 나타난 바와 같다.In other words, based on the combination of overlapping activities at the same time, it is possible to easily confirm that a sleeping user wakes up in the middle and goes to the living room to drink water, uses the bathroom, or unconsciously wanders while sleeping. At this time, the result of combining the overlapping portions of the activity is as shown in the second and third graphs of FIG. 14.

또한 도 11을 참조하여 취침 시간 확인을 설명하면, 상기 동작패턴 추적 장치(100)는 사전에 설정된 측정시간 이내인지를 판단한다(S631).In addition, when the check of bedtime will be described with reference to FIG. 11, the motion pattern tracking device 100 determines whether it is within a preset measurement time (S631).

상기 S631 단계의 판단결과 사전에 설정된 측정 시간 이내이면, 상기 동작패턴 추적 장치(100)는 액티비티값을 토대로 타겟 공간(예를 들어 수면을 취하고 있는 침실)과 다른 공간에서의 움직임이 감지되는지의 여부를 판단한다(S632).If the determination result in step S631 is within a preset measurement time, the motion pattern tracking device 100 determines whether a motion in a space different from the target space (for example, a sleeping bedroom) is detected based on the activity value. Is determined (S632).

상기 S632 단계의 판단결과 타겟 공간이나 다른 공간에서의 움직임이 감지되면, 상기 동작패턴 추적 장치(100)는 액티비티 구간을 카운팅한 다음(S633), 기 설정된 측정시간 이내인지의 여부를 판단하는 상기 S631 단계 이후를 반복하여 수행한다.As a result of the determination in step S632, when movement in a target space or another space is detected, the motion pattern tracking device 100 counts an activity section (S633), and then determines whether or not within a preset measurement time. Repeatedly after step.

그러나 상기 S632 단계의 판단결과 타겟 공간이나 다른 공간에서의 움직임이 감지되면, 상기 동작패턴 추적 장치(100)는 타겟 공간에 움직임이 감지되는지를 판단한다(S634). 즉 사용자가 취침에 의하여 타겟 공간 내에서 별다른 움직임이 없는지를 확인하는 것이다.However, as a result of the determination in step S632, when motion in the target space or other space is detected, the motion pattern tracking apparatus 100 determines whether motion is detected in the target space (S634). That is, it is to check whether there is any movement in the target space by the user sleeping.

상기 S634 단계의 판단결과 타겟 공간에 움직임이 감지되면, 상기 동작패턴 추적 장치(100)는 액티비티 구간을 카운팅하는 상기 S633 단계를 수행하고, 상기 S634 단계의 판단결과 타겟 공간에 움직임이 감지되지 않으면, 기 설정된 카운팅 수를 초과하는지를 판단한다(S635). 예를 들어, 움직임이 감지되지 않는 시간이 취침으로 판단할 수 있는 시간(예를 들어, 20분)동안 계속 유지되는지의 여부를 확인하는 것이다.When a motion is detected in the target space as a result of the determination in step S634, the motion pattern tracking device 100 performs step S633 of counting an activity section, and if the motion is not detected in the target space as a result of the determination in step S634, It is determined whether a preset counting number is exceeded (S635). For example, it is to check whether or not the time when no motion is detected continues for a period of time (for example, 20 minutes) that can be determined as sleeping.

상기 S635 단계의 판단결과 기 설정된 카운팅 수를 초과하지 않으면, 상기 동작패턴 추적 장치(100)는 액티비티 구간을 카운팅하는 상기 S633 단계를 수행하고, 상기 S635 단계의 판단결과 기 설정된 카운팅 수를 초과하면, 취침 시간 확인 및 저장을 수행한다(S636).If the determination result in step S635 does not exceed a preset counting number, the motion pattern tracking device 100 performs step S633 of counting an activity section, and if the determination result in step S635 exceeds a preset counting number, Checking and storing the bedtime time is performed (S636).

또한 도 12를 참조하여 기상 시간 확인을 설명하면, 상기 동작패턴 추적 장치(100)는 종료시점 직전시점을 초기데이터로 설정한다(S641). 즉 동작패턴을 추적하기 위하여 사전에 설정한 종료시간 바로 직전의 타임스탬프를 초기데이터로 설정하는 것으로서, 예를 들어 종료시점 직전시점의 타임스탬프를 N-1라 할 때, 초기데이터(n)는 n=N-1로 설정된다.In addition, when the wake-up time check will be described with reference to FIG. 12, the motion pattern tracking apparatus 100 sets a point immediately before the end point as initial data (S641). That is, in order to track the motion pattern, the timestamp immediately before the previously set end time is set as the initial data.For example, when the timestamp immediately before the end time is N-1, the initial data (n) is It is set to n=N-1.

이후 상기 동작패턴 추적 장치(100)는 동작패턴 추적 시작시점인지를 판단하고(S642), 동작패턴 추적 시작시점이 아니면, 액티비티값을 토대로 타겟 공간이나 다른 공간에서 움직임이 감지되는지의 여부를 판단한다(S643).Thereafter, the motion pattern tracking apparatus 100 determines whether it is a motion pattern tracking start point (S642), and if it is not the motion pattern tracking start point, determines whether a motion is detected in a target space or another space based on the activity value. (S643).

상기 S643 단계의 판단결과 타겟 공간이나 다른 공간에서의 움직임이 감지되지 않으면, 상기 동작패턴 추적 장치(100)는 사용자가 수면상태인 것으로 판단하여 액티비티 구간을 역 카운팅한 다음(S644), 동작패턴 추적 시작시점인지의 여부를 판단하는 상기 S642 단계 이후를 반복하여 수행한다.As a result of the determination in step S643, if movement in the target space or other space is not detected, the motion pattern tracking device 100 determines that the user is in a sleeping state, counts the activity section inversely (S644), and then tracks the motion pattern. After step S642 for determining whether or not it is the start time is repeatedly performed.

그러나 상기 S643 단계의 판단결과 타겟 공간이나 다른 공간에서의 움직임이 감지되면, 상기 동작패턴 추적 장치(100)는 타겟 공간에 움직임이 감지되는지를 판단한다(S645).However, as a result of the determination in step S643, when motion in a target space or another space is detected, the motion pattern tracking apparatus 100 determines whether motion is detected in the target space (S645).

상기 S365 단계의 판단결과 , 타겟 공간에 움직임이 감지되지 않으면, 상기 동작패턴 추적 장치(100)는 액티비티 구간을 역 카운팅하는 상기 S644 단계를 수행하고, 상기 S645 단계의 판단결과 타겟 공간에 움직임이 감지되면, 기 설정된 카운팅 수를 초과하는지를 판단한다(S646). 예를 들어, 움직임이 연속적으로 감지되어 기상한 것으로 판단할 수 있는 시간(예를 들어, 10분)동안 계속 유지되는지의 여부를 확인하는 것이다.As a result of the determination in step S365, if no motion is detected in the target space, the motion pattern tracking device 100 performs step S644 of inverse counting the activity section, and as a result of the determination in step S645, the motion is detected in the target space. If so, it is determined whether the preset counting number is exceeded (S646). For example, it is checked whether or not movement is continuously detected and maintained for a period of time (for example, 10 minutes) that can be determined as awakening.

상기 S646 단계의 판단결과 기 설정된 카운팅 수를 초과하지 않으면, 상기 동작패턴 추적 장치(100)는 액티비티 구간을 역 카운팅하는 상기 S644 단계를 수행하고, 상기 S646 단계의 판단결과 기 설정된 카운팅 수를 초과하면, 기상 시간 확인 및 저장을 수행한다(S647).If the determination result of step S646 does not exceed the preset counting number, the motion pattern tracking device 100 performs step S644 of inverse counting the activity section, and if the determination result of step S646 exceeds the preset counting number , Check and store the wake-up time (S647).

또한 도 13을 참조하여 수면 중 배회 여부확인을 설명하면, 상기 동작패턴 추적 장치(100)는 각각의 센서(200)에서 감지한 감지데이터를 토대로 확인하는 액티비티값을 토대로 기상 시간 이전인지를 판단한다(S651).In addition, referring to FIG. 13 to describe whether to wander while sleeping, the motion pattern tracking device 100 determines whether it is before the wake-up time based on an activity value that is checked based on sensing data detected by each sensor 200. (S651).

상기 S651 단계의 판단결과 기상 시간 이전이면, 상기 동작패턴 추적 장치(100)는 액티비티값을 토대로 겹치는 부분이 시작되는지의 여부를 판단한다(S652).As a result of the determination in step S651, if it is before the wake-up time, the motion pattern tracking apparatus 100 determines whether or not the overlapping portion starts based on the activity value (S652).

상기 S652 단계의 판단결과 겹치는 부분이 시작되면, 상기 동작패턴 추적 장치(100)는 타겟 공간이나 다른 공간의 움직임 여부를 확인하고(S653), 상기 확인한 타겟 공간이나 다른 공간의 움직임 여부를 토대로 겹치는 구간의 시작지점 확인 또는 업데이트를 통해 수면 중 배회 시작을 확인한다(S654).As a result of the determination in step S652, when the overlapping part starts, the motion pattern tracking device 100 checks whether a target space or another space is moving (S653), and the overlapping section based on whether the checked target space or another space moves. Check the start of the roaming start during sleep through confirmation or update of the starting point (S654).

상기 S654 단계를 통해 각각의 센서(200)에서 측정한 감지데이터를 토대로 한 액티비티가 겹치는 부분의 처리를 수행하여, 겹치는 구간의 시작지점 확인 또는 업데이트를 통해 수면 중 배회 시작을 확인한 이후, 상기 동작패턴 추적 장치(100)는 액티비티 구간을 카운팅한 다음(S655), 기상 시간 이전인지의 여부를 판단하는 상기 S651 단계 이후를 반복하여 수행한다.After performing the processing of the portion where the activity overlaps based on the sensing data measured by each sensor 200 through the step S654, and confirming the start of roaming during sleep by checking or updating the start point of the overlapping section, the operation pattern After counting the activity section (S655), the tracking device 100 repeats the step S651 to determine whether it is before the wake-up time.

또한 상기 S652 단계의 판단결과 겹치는 부분의 시작이 아니면, 상기 동작패턴 추적 장치(100)는 타겟 공간, 다른 공간 또는 동시의 움직임 여부를 확인하고(S655), 상기 확인한 타겟 공간, 다른 공간 또는 동시 움직임 여부를 토대로 겹치는 구간의 종료지점 확인 또는 업데이트를 통해 수면 중 배회 종료를 확인한다(S656). 즉 동일한 시간에 액티비티가 겹치는 부분의 결합을 토대로 수면 중인 사용자가 수면 중에 배회하는 것을 확인하는 것이다. 이때 액티비티가 겹치는 부분을 결합한 결과는 도 14의 두 번째 및 세 번째 그래프에 나타난 바와 같다.In addition, if the determination result of step S652 is not the start of the overlapping portion, the motion pattern tracking device 100 checks whether a target space, another space, or simultaneous movement is made (S655), and the checked target space, another space, or simultaneous movement Based on whether or not, the end point of the overlapping section is checked or updated to confirm the end of the roaming during sleep (S656). In other words, it checks that the sleeping user wanders while sleeping based on the combination of overlapping parts at the same time. At this time, the result of combining the overlapping portions of the activity is as shown in the second and third graphs of FIG. 14.

그리고 상기 S657 단계를 통해 각각의 센서(200)에서 측정한 감지데이터를 토대로 한 액티비티가 겹치는 부분의 처리를 수행하여 수면 중 배회여부를 확인한 이후, 상기 동작패턴 추적 장치(100)는 액티비티 구간을 카운팅하는 상기 S655 단계를 수행한다.And after performing the processing of the portion where the activity overlaps based on the sensing data measured by each sensor 200 through the step S657 to determine whether to roam during sleep, the motion pattern tracking device 100 counts the activity section. The step S655 is performed.

한편, 상기 도 9 내지 도 13에서 설명한 쇼트 그룹핑, 결합 프로세싱, 취침 시간 확인, 기상시간 확인, 수면 중 배회 여부 확인 등에 관련된 정보는 도 14에 나타낸 것처럼 액티비티 윈도우를 통해 표시될 수 있다.Meanwhile, information related to short grouping, combined processing, check of bedtime, check of wake up time, check of roaming while sleeping, etc. described in FIGS. 9 to 13 may be displayed through an activity window as shown in FIG. 14.

이제, 상기 S600 단계를 통해 상기 액티비티가 있는 구간과 액티비티가 없는 구간의 시작 및 종료시간 정보를 시간의 경과에 따라 액티비티 윈도우 상에 표시하거나, 세부 항목의 분석을 수행한 이후, 상기 동작패턴 추적 장치(100)는 해당 사용자의 수면패턴 추적에 대한 정보를 토대로 수면종류 확인, 수면장애 여부 확인 등의 수면패턴 결과정보를 산출하며, 산출한 수면패턴에 대한 결과를 해당 사용자에게 제공한다(S700).Now, through the step S600, after displaying the start and end time information of the section with the activity and the section without the activity on the activity window as time elapses, or after analyzing detailed items, the motion pattern tracking device The 100 calculates sleep pattern result information, such as checking the sleep type and checking the sleep disorder, based on the information on the sleep pattern tracking of the corresponding user, and provides the result of the calculated sleep pattern to the corresponding user (S700).

상기 S700 단계에서 산출되는 결과정보는 도 15에 나타낸 바와 같이 활동한 시간, 수면 시간, 수면 방해가 일어난 횟수, 얕은 잠을 잔 시간, 쇼트 그룹핑 결과, 배회한 시간, 기상 시간 등이며, 이를 통해 사용자는 자신의 수면패턴이나 수면의 질이 어떠한지를 확인할 수 있게 된다.The result information calculated in step S700 is active time, sleep time, number of sleep disturbances, shallow sleep time, short grouping results, roaming time, wake up time, etc., as shown in FIG. You can check your sleep pattern or quality of sleep.

이처럼, 본 발명은 PIR 센서, 초음파 센서 등의 움직임감지센서를 통해 사용자의 움직임을 추적하고, 추적한 사용자의 움직임 정보를 액티비티 윈도우를 통해 표시하고, 이를 통해 사용자의 동작패턴을 분석함으로써, 액티비티 윈도우를 통해 수면을 포함한 사용자의 움직임을 직관적으로 확인할 수 있음은 물론, 사용자의 동작패턴에 대한 질적인 판단을 빠르고 용이하게 수행할 수 있다.As described above, the present invention tracks a user's movement through a motion detection sensor such as a PIR sensor or an ultrasonic sensor, displays the tracked user's movement information through an activity window, and analyzes the user's movement pattern through the activity window. Through this, it is possible to intuitively check the user's movement including sleep, and to quickly and easily perform a qualitative determination of the user's movement pattern.

이상에서와 같이 본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 기술적 보호범위는 아래의 특허청구범위에 의해서 판단되어야 할 것이다.As described above, the present invention has been described with reference to the embodiments shown in the drawings, but this is only exemplary, and various modifications and equivalent other embodiments are available from those of ordinary skill in the field to which the technology belongs. You will understand that it is possible. Therefore, the technical protection scope of the present invention should be determined by the following claims.

100 : 동작패턴 추적 장치 110 : 감지데이터 수집부
120 : 액티비티 메인 처리부 122 : 액티비티 확인부
124 : 논 액티비티 처리부 126 : 쇼트 액티비티 처리부
128 : 롱 액티비티 처리부 130 : 액티비티 서브 처리부
132 : 쇼트 그룹핑부 134 : 결합 처리부
140 : 응용 서비스 처리부 142 : 취침 확인부
144 : 기상 확인부 146 : 수면 중 배회 확인부
150 : 액티비티 윈도우 표시부 160 : 결과 확인부
170 : 저장부 180 : 제어부
200 : 센서 300 : 데이터베이스100: motion pattern tracking device 110: detection data collection unit
120: activity main processing unit 122: activity confirmation unit
124: non-activity processing unit 126: short activity processing unit
128: long activity processing unit 130: activity sub processing unit
132: short grouping unit 134: coupling processing unit
140: application service processing unit 142: sleep confirmation unit
144: weather check unit 146: roaming check unit during sleep
150: activity window display unit 160: result confirmation unit
170: storage unit 180: control unit
200: sensor 300: database

Claims

A sensing data collection unit that collects sensing data on a user's movement from at least one sensor;
An activity main processing unit for storing time information by checking a section with an activity and a section without an activity based on a comparison between the collected sensing data and a preset threshold value; And
Based on the time information of the section with the activity and the section without the activity, the adjacent activities of the short activity representing the temporary movement among the sections with the activity are grouped to be meaningful, similar to the long activity without recognizing it as noise or meaningless user movement. Judging by the user's movement, or by combining sections that overlap at the same time among the detection data on the user's movement measured by at least one sensor to check whether or not to roam, or to perform an analysis including a combination thereof An activity pattern tracking device comprising a;

The method according to claim 1,
The motion pattern tracking device,
And a result confirming unit for calculating motion pattern result data including a motion time, a path, or a combination thereof, based on time information of the section with the activity and the section without the activity.

The method according to claim 1,
The sensor,
As a motion detection sensor including an infrared sensor including a PIR (Passive Infrared) sensor, an ultra sonic sensor, an image sensor, or a combination thereof, at least one is installed in a motion pattern tracking space including a home, an office, or a combination thereof. ,
Motion pattern tracking device, characterized in that the operation according to a preset driving time and interval and transmits the detection data for detecting the movement of the user to the motion pattern tracking device.

The method according to claim 1,
The motion pattern tracking device,
Based on the time information of the section with the above activity and the section without activity, the start and end section of the motion pattern tracking, the section without activity, the short activity representing the temporary movement among the sections with the activity, and the long activity representing continuous motion, or these And an activity window display unit that displays a combination of the combinations over time and displays information including short grouping, combined processing, or a combination thereof performed by the activity sub-processing unit.

delete

The method according to claim 1,
The activity main processing unit,
An activity check unit for determining whether or not an activity has occurred by determining whether the sensing data collected from the sensor exceeds a preset threshold;
A non-activity processor configured to set and update a start time and an end time of a section without an activity according to whether the checked activity has occurred;
A short activity processing unit for storing a start time and an end time of a short activity section in which a temporary movement within a maximum timestamp counting number for determining a predetermined long activity among the sections in which the checked activity has occurred; And
A long activity processing unit that stores the start time and end time of the long activity section in which the continuous movement appears in excess of the maximum timestamp counting number for determining the predetermined long activity among the sections with the activity according to the occurrence of the checked activity; Motion pattern tracking device comprising a.

The method according to claim 1,
The motion pattern tracking device,
After checking the motion pattern tracking information displayed in the activity window, perform short grouping, combined processing, bedtime check, wake up time check, roaming while sleeping, or a combination thereof, or
Based on the time information of the section with the activity and the section without the activity, short grouping, combined processing, checking the bedtime, checking the wake up time, checking whether to roam while sleeping, or a combination thereof are performed, and then the result of the execution is displayed in the activity. Motion pattern tracking device, characterized in that displayed on a window.

In the motion pattern tracking apparatus, a sensing data collection step of collecting sensing data on a user's movement from at least one sensor;
An activity main processing step of storing time information by checking a section with an activity and a section without an activity based on a comparison between the collected sensing data and a preset threshold value; And
Based on the time information of the section with the activity and the section without the activity, the adjacent activities of the short activity representing the temporary movement among the sections with the activity are grouped to be meaningful, similar to the long activity without recognizing it as noise or meaningless user movement. Judging by the user's movement, or by combining sections that overlap at the same time among the detection data on the user's movement measured by at least one sensor to check whether or not to roam, or to perform an analysis including a combination thereof And an activity sub-processing step.

The method of claim 8,
The operation pattern tracking method,
In the motion pattern tracking device, based on time information of the section with the activity and the section without the activity, a result confirming step of calculating motion pattern result data including a motion time, a route, or a combination thereof; A method of tracking motion patterns.

The method of claim 8,
The sensing data collection step,
In the motion pattern tracking device, preset driving from an infrared sensor including at least one PIR sensor installed in a motion pattern tracking space including a home, an office, or a combination thereof, an ultrasonic sensor, an image sensor, or a motion detection sensor including a combination thereof Motion pattern tracking method, characterized in that the operation according to the time and interval to receive the detection data for detecting the movement of the user.

The method of claim 8,
The operation pattern tracking method,
In the motion pattern tracking device, based on the time information of the section with the activity and the section without the activity, the start and end section of the motion pattern tracking, the section without the activity, the short activity representing the temporary movement of the section with the activity and continuous An activity window displaying step of displaying a long activity indicating a movement or a combination thereof over time, and displaying information including short grouping, combining processing or a combination thereof performed in the activity sub-processing step; Motion pattern tracking method, characterized in that.

delete

The method of claim 8,
The activity main processing step,
An activity check step of determining whether or not an activity has occurred by determining whether the sensing data collected from the sensor exceeds a preset threshold, in the motion pattern tracking device;
A non-activity processing step of setting and updating a start time and an end time of a section without an activity according to whether the checked activity has occurred;
A short activity processing step of storing a start time and an end time of a short activity section in which a temporary movement within a maximum timestamp counting number for determining a predetermined long activity among the sections in which the checked activity has occurred, is stored; And
A long activity processing step of storing a start time and an end time of a long activity section in which a continuous movement is displayed in excess of a maximum number of timestamp counting for determining a predetermined long activity among sections in which the identified activity has occurred; Motion pattern tracking method comprising a.

The method of claim 8,
The operation pattern tracking method,
In the motion pattern tracking device, after checking the motion pattern tracking information displayed in the activity window, short grouping, combined processing, bedtime check, wake up time check, check whether roaming while sleeping, or a combination thereof, or
Based on the time information of the section with the activity and the section without the activity, short grouping, combined processing, checking the bedtime, checking the wake up time, checking whether to roam while sleeping, or a combination thereof are performed, and then the result of the execution is displayed in the activity. Displaying on a window; motion pattern tracking method comprising a further.