KR20210115450A - 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템 - Google Patents

낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템 Download PDF

Info

Publication number
KR20210115450A
KR20210115450A KR1020200031268A KR20200031268A KR20210115450A KR 20210115450 A KR20210115450 A KR 20210115450A KR 1020200031268 A KR1020200031268 A KR 1020200031268A KR 20200031268 A KR20200031268 A KR 20200031268A KR 20210115450 A KR20210115450 A KR 20210115450A
Authority
KR
South Korea
Prior art keywords
gait
subject
mat
unit
hybrid
Prior art date
Application number
KR1020200031268A
Other languages
English (en)
Other versions
KR102376330B1 (ko
Inventor
이영우
지유강
주재홍
Original Assignee
(주)옵토닉스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)옵토닉스 filed Critical (주)옵토닉스
Priority to KR1020200031268A priority Critical patent/KR102376330B1/ko
Priority to CN202080099942.3A priority patent/CN115428050B/zh
Priority to PCT/KR2020/016474 priority patent/WO2021182713A1/ko
Priority to US17/911,236 priority patent/US20230404436A1/en
Publication of KR20210115450A publication Critical patent/KR20210115450A/ko
Application granted granted Critical
Publication of KR102376330B1 publication Critical patent/KR102376330B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1116—Determining posture transitions
    • A61B5/1117—Fall detection
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/04—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0438—Sensor means for detecting
    • G08B21/0476—Cameras to detect unsafe condition, e.g. video cameras
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/112—Gait analysis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/1036—Measuring load distribution, e.g. podologic studies
    • A61B5/1038—Measuring plantar pressure during gait
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1121—Determining geometric values, e.g. centre of rotation or angular range of movement
    • A61B5/1122—Determining geometric values, e.g. centre of rotation or angular range of movement of movement trajectories
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6892—Mats
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06K9/00201—
    • G06K9/00348—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G06T7/251—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/64—Three-dimensional objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training
    • G06V40/25—Recognition of walking or running movements, e.g. gait recognition
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/04—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0247—Pressure sensors
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7203—Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271—Specific aspects of physiological measurement analysis
    • A61B5/7282—Event detection, e.g. detecting unique waveforms indicative of a medical condition
    • G06K2209/055—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30008—Bone
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images
    • G06V2201/033—Recognition of patterns in medical or anatomical images of skeletal patterns

Abstract

본 발명은 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템에 관한 것으로, 특히 피검자의 보행 특성을 기반으로 하는 측정 시스템을 제공하고, 수집된 정보를 이용하여 맞춤형 분석을 진행함으로써 낙상 예측 및 예방을 가능하도록 하는 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템에 관한 것이다.

Description

낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템{HYBRID TYPE GAIT ANALYSIS APPARATUS FOR PREVENTING FALL AND MANAGEMENT SYSTEM INCLUDING THE SAME}
본 발명은 피검자의 보행 특성을 기반으로 하는 측정 시스템을 제공하고, 수집된 정보를 이용하여 맞춤형 분석을 진행함으로써 낙상 예측 및 예방을 가능하도록 하는 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템에 관한 것이다.
일반적으로 낙상(fall)은 신체적, 심리적, 환경적 요인 등 복합적인 요인에 의하여 발생하기 때문에 사회 심리적 요인을 포함한 통합적인 접근이 필요하다.
낙상을 유발하는 요인은 다양하며 그 요인이 많을수록 낙상의 위험은 높아지므로 낙상 위험도 평가를 위한 선별검사가 필요하다.
현재 적용중인 낙상 위험도 평가로써 가장 많이 활용되고 있는 것으로는 '낙상병력청취' 및 '보행과 균형에 대한 평가'가 있다.
하지만 대부분의 평가 과정이 신체적 요인은 배제하고 지식, 자가효능감, 예방행위, 우울과 같은 심리적 요소를 측정하여 운동효과의 검정력에 한계가 있다.
측정 장비를 사용하지 않고 신체 균형 및 보행 능력을 측정하면 측정과정에서 대상자의 의지나 동작 등에 의해 오차가 발생할 수 있으며, 검사자에 따라 주관적인 견해가 과도하게 포함될 수 있다.
이에 일부 측정에서 신체 능력을 분석하는 장비를 이용하고는 있지만 제한된 내용의 편면적 측정 방법으로는 한계가 있고, 고령자 등이 아닌 일반인을 대상으로 한 것이어서 고령자 등의 특성과 UX에 부합하는 시스템의 개발이 필요한 실정이다.
대한민국 공개특허 제10-2019-0070068호 대한민국 등록특허 제10-1713263호
본 발명은 전술한 바와 같은 문제점을 해결하기 위한 것으로, 피검자의 보행 특성을 기반으로 하는 측정 시스템을 제공하고, 수집된 정보를 이용하여 맞춤형 분석을 진행함으로써 낙상 예측 및 예방을 가능하게 하는 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템을 제공하고자 한다.
이를 위해 본 발명에 따른 낙상 예방을 위한 하이브리드 보행 분석장치는 낙상 예방 피검자(subject)가 보행하는 바닥에 설치되며 보행시의 족압을 측정하는 다수의 압력센서를 구비하여 족압 정보를 제공하는 보행 분석기와; 상기 보행중인 피검자를 촬영하도록 설치되며, 상기 피검자의 3차원 깊이 영상을 제공하는 깊이 카메라(depth camera); 및 상기 피검자의 족압 정보 및 상기 3차원 깊이 영상으로부터 판독되는 골격 정보를 종합하여 상기 피검자의 보행 상태를 분석하는 보행 분석 모듈;을 포함하는 것을 특징으로 한다.
이때, 상기 피검자의 위치를 탐색하여 상기 피검자가 상기 매트 타입 보행 분석기에 진입하는 시점과 진출하는 시점을 각각 분석하는 사용자 자동 인식기를 더 포함하는 것이 바람직하다.
또한, 상기 보행 분석기는 각각 매트(mat) 타입으로 이루어진 다수의 단위 매트 센서를 포함하되, 상기 단위 매트 센서는 다수의 압력센서가 매트릭스(matrix) 패턴으로 구비되어 있는 것이 바람직하다.
또한, 상기 단위 매트 센서는 바닥 시트와; 상기 바닥 시트의 상면에 적층되며, 수평 방향을 따라 수평축 압력센서가 구비된 제1 센서 시트와; 상기 제1 센서 시트의 상면에 적층되며 전도성 재질로 이루어진 전도성 재질층과; 상기 전도성 재질층의 상면에 적층되며, 상기 수평축 압력센서와 교차하도록 수직 방향을 따라 수직층 압력센서가 구비된 제2 센서 시트; 및 상기 제2 센서 시트의 상면에 적층된 마감 시트;를 포함하는 것이 바람직하다.
또한, 상기 깊이 카메라는 상기 보행 분석기를 따라 적어도 하나 이상 설치되며, 각각 담당하는 구간내에서 상기 피검자를 연속하여 촬영하는 것이 바람직하다.
또한, 상기 피검자를 2차원의 RGB 영상으로 촬영하여 상기 보행 분석 모듈에 제공하는 2D 검사 카메라를 더 포함하되, 상기 보행 분석 모듈은 상기 깊이 카메라에서 제공되는 3D의 깊이 영상에 대한 분석결과와 상기 검사 카메라에서 제공되는 2D의 RGB 영상에 대한 분석 결과를 이용하여 상기 피검자를 촬영한 영상 프레임들 중 실제 보행 상태와 다른 에러 프레임을 추출하고 보간(interpolation)하는 것이 바람직하다.
또한, 상기 보행 분석 모듈은 머신 러닝(machine learning)을 통해 영상 프레임으로부터 피검자의 골격(skeleton) 및 관절(joint) 영상을 추출하되, 상기 골격과 관절의 자세(position) 및 오리엔테이션(orientation) 값을 포함하여 상기 피검자의 보행 상태를 분석하는 것이 바람직하다.
또한, 상기 보행 분석 모듈은 상기 3차원 깊이 영상 중에서 상기 피검자가 보행 중 사용하는 보행 보조수단을 추출하는 오브젝트 추출부와; 상기 추출된 보행 보조수단을 상기 분석 대상 영상 프레임으로부터 제외시키는 노이즈 제거부와; 상기 보행 보조수단이 제외된 분석 대상 영상 프레임을 이용하여 상기 피검자의 보행 상태를 분석하는 보행 분석부; 및 상기 피검자의 보행 상태를 낙상 위험 인자(factor)와 대비하여 낙상 위험도를 예측하는 낙상 예측부;를 포함하는 것이 바람직하다.
한편, 본 발명에 따른 낙상 예방 관리시스템은 이상과 같은 하이브리드 보행 분석장치와; 상기 피검자의 개인 정보 및 낙상검사 이력정보를 기록하는 통합 데이터베이스; 및 상기 피검자의 단말장치에서 상기 통합 데이터베이스에 접속하여 검사 결과를 제공받도록 어플리케이션을 제공하는 앱 관리 모듈;을 포함하는 것을 특징으로 한다.
이때, 상기 통합 데이터베이스는 상기 피검자에게 적합한 맞춤형 낙상 예방 프로그램을 제공하는 것이 바람직하다.
이상과 같은 본 발명은 검사 대상인 피검자가 보행 측정중임을 의식하지 않도록 측정을 진행하면서도 보행 중의 족압 측정과 골격 정보를 종합적으로 반영하는 하이브리드 타입의 측정장치를 제공한다.
또한, 본 발명은 통합 데이터베이스를 통해 피검자의 개인정보 및 낙상검사 이력정보를 실시간으로 제공하고, 더불어 각 검사 그룹별로 최적화된 낙상 예방 프로그램을 제공한다.
따라서, 피검자의 보행 특성을 기반으로 하는 측정 시스템의 제공이 가능하며, 수집된 정보를 이용하여 맞춤형 분석을 진행함으로써 낙상 예측 및 예방이 가능한 통합 시스템을 제공한다.
도 1은 본 발명에 따른 낙상 예방 관리시스템을 나타낸 개략 구성도이다.
도 2는 본 발명에 따른 낙상 예방을 위한 하이브리드 보행 분석장치를 나타낸 구성도이다.
도 3은 본 발명의 매트형 보행 분석기 어레이를 나타낸 도이다.
도 4는 본 발명의 매트형 보행 분석기 적층 상태도이다.
도 5는 본 발명의 수신 강도를 이용한 피검자 위치 측정 방법을 나타낸 도이다.
도 6은 본 발명의 비콘을 이용한 삼면 측량 피검자 위치 측정 방법을 나타낸 도이다.
도 7은 본 발명의 깊이 카메라로 획득한 보행 중의 골격 정보를 나타내 도이다.
도 8은 본 발명에서의 오류 프레임 제거 상태를 나타낸 도이다.
도 9는 본 발명의 보행 분석 모듈을 나타낸 구성도이다.
도 10a 및 도 10b는 본 발명에서 촬영 영상으로부터 보행 정보를 추출하는 방법을 나타낸 도이다.
도 11은 본 발명의 실시예에 따른 보행 측정 중 단위 검출 센서 인식 방법을 나타낸 도이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 따른 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템에 대해 상세히 설명한다.
먼저, 도 1과 같이 본 발명에 따른 하이브리드 보행 분석장치(10)에 대한 상세한 설명에 앞서, 그를 포함하는 낙상 예방 관리시스템(10, 20, 30)이 적용되는 실시예에 대해 간단히 설명한다.
도시된 바와 같이, 본 발명의 낙상 예방 관리시스템(10, 20, 30)은 하이브리드 보행 분석장치(10)와, 통합 데이터베이스(20) 및 앱 관리 모듈(30)을 포함하며, 이들은 유무선 네트워크망을 통해 서로 연결된다.
하이브리드 보행 분석장치(10)는 피검자의 낙상을 예측하고 예방하기 위한 검측장치로 매트(mat) 타입의 보행 분석기(11)로 보행시의 족압을 측정하고, 깊이 카메라(12, depth camera)로는 보행시의 골격 움직임을 측정한다.
보행 분석기(11)와 깊이 카메라(12)로 함께 측정하는 하이브리드 방식을 적용하면 객관적인 측정 데이터에 기반하여 피검자의 낙상 인자를 분석할 수 있고, 이들 정보의 조합으로 더욱 다양한 보행 파라미터(gait parameter)를 제공한다.
이때, 상기한 피검자는 고령자(노인), 장애인 및 거동불편자와 같이 일반인에 비해 낙상에 대한 예측 및 예방의 필요성이 큰 검사 대상자를 의미하는 것으로 이하에서는 주로 고령자를 예로 들어 설명한다.
통합 데이터베이스(20)는 피검자인 고령자들의 개인 정보 및 낙상검사 이력정보를 각각 기록하는 것으로 하이브리드 보행 분석장치(10)로부터 측정 데이터값을 입력받아 기록하고 고령자(피검자)에 제공한다. 또한 필요시는 유관기관에도 제공할 수 있다.
이러한 통합 데이터베이스(20)는 단독으로 구축될 수 있지만, 바람직하게는 웹 서버와 함께 구축되어 데이터베이스 서버 타입으로 구축될 수 있다. 또한 서비스 서버는 스마트 폰과 같은 모바일 단말에 서비스를 제공하도록 왑(WAP)서버나 클라우드 서버로 구축될 수 있다.
앱 관리 모듈(30)은 피검자인 고령자의 단말장치에서 통합 데이터베이스에 접속하여 검사 결과를 제공받도록 어플리케이션을 제공하는 것으로, 일 예로 상술한 서비스 서버에 함께 설치될 수 있다. 이러한 경우 서비스 서버는 어플리케이션 다운로드 서버로 기능한다.
이하, 도 2를 참조하여 본 발명의 낙상 예방 관리시스템을 구성하는 하이브리드 보행 분석장치(10)에 대해 상세히 설명한다.
도 2와 같이, 본 발명의 하이브리드 보행 분석장치(10)는 보행 분석기(11), 3D의 깊이 카메라(12) 및 보행 분석 모듈(13)을 포함한다. 나아가, 바람직한 다른 실시예로써 사용자 자동 인식기(14) 및 2D의 검사 카메라(15)를 더 포함한다.
여기서, 보행 분석기(11)는 피검자에 해당하는 고령자의 족압을 측정하고 아울러 깊이 카메라(12)는 3차원 영상을 통해 보행중인 피검자의 골격을 분석하게 하며, 보행 분석 모듈(13)은 측정 정보들을 종합하여 낙상 인자를 분석한다.
또한, 사용자 자동 인식기(14)는 근거리 무선통신을 이용하여 피검자인 고령자의 위치를 검출(탐색)하여 제공함으로써 피검자가 매트(mat) 타입으로 구성된 보행 분석기(11)에 진입 및/또는 진출하는지 검출하여 검사 정밀도를 높인다.
2D의 검사 카메라(15)는 상기한 3D의 깊이 카메라(12)와 함께 피검자의 보행을 분석하기 위한 촬영 영상을 제공한다. 따라서, 3차원 영상의 장점과 2차원 영상의 장점을 통해 실제의 보행 자세와 다른 에러 프레임을 찾아 이를 제외하게 한다.
좀더 구체적으로, 상기 보행 분석기(11)는 낙상 예방 검사의 대상자인 피검자(subject), 즉 고령자의 보행 중 족압(foot pressure)을 측정하며, 족압과 함께 보행 분석도 가능하게 한다.
이를 위해 보행 분석기(11)는 낙상 예방 피검자가 보행하는 바닥(예: 복도나 측정 장소)에 설치되며 보행시의 족압을 측정할 수 있도록 다수의 압력센서가 일정 간격으로 구비된다.
또한, 보행 분석기(11)는 보관, 이송 및 환경에 따른 조립 용이성을 제공하도록 다수의 '단위 매트 센서'로 구성된다. 이때 각각의 단위 매트 센서들은 고령자의 자연스러운 보행을 유도하기 위해 매트(mat) 타입으로 제작된다.
도 3과 같이 다수의 단위 매트 센서(C1 내지 Cn)는 일 예로 사각 단면 형상을 갖도록 제작되며, 일렬로 연결된 다수의 단위 매트 센서(C1 내지 Cn)는 메인 컨트롤러에 연결되어 각 압력센서에서 측정한 값을 메인 컨트롤러에 제공한다.
또한, 단위 매트 센서(C1 내지 Cn)는 다수의 압력센서가 일정 이상의 분포 밀도를 갖도록 매트릭스(matrix) 패턴으로 구비되어 있어서, 보행시의 족압 측정을 통해 CoP(Center of Pressure) 및 CoM(Center of Mass) 등의 직관적인 측정정보를 제공하고 이를 기초로 보행 분석이 이루어지게 한다.
도 4에 도시된 바와 같이, 매트 타입의 단위 매트 센서(C1 내지 Cn)는 바람직한 실시예로써 바닥 시트(11a), 제1 센서 시트(11b), 전도성 재질층(11c), 제2 센서 시트(11d) 및 마감 시트(11e)를 포함하는 다층 구조로 구성된다.
그 중 바닥 시트(11a)는 단위 매트 센서(C1 내지 Cn)의 최하층에 배치되는 것으로 저면에는 미끄럼 방지 수단 등을 구비한다. 또한 일측에는 어레이 컨트롤러(array controller)를 구비한다. 단위 매트 센서(C1 내지 Cn)에 각각 구비된 어레이 컨트롤러는 상기한 메인 컨트롤러로 집중 연결된다.
제1 센서 시트(11b)는 바닥 시트(11a)의 상면에 적층되며, 수평 방향을 따라 '수평축 압력센서'가 구비된다. 일 예로 수평축 압력센서는 시트상에 선형 패턴을 형성하여 제작된다.
다만, 상기 '수평' 방향은 후술하는 제2 센서 시트(11d)의 '수직'에 교차하는 방향을 의미하며, 수평과 수직은 평면상에서 시트가 놓이는 위치나 바라보는 방향에 따라 다를 수 있다.
전도성 재질층(11c)은 제1 센서 시트(11b)의 상면에 적층되며 전도성 재질로 이루어진다. 이러한 전도성 재질층(11c)으로는 실시예로써 'velostat'이라는 압력 감지천을 사용하여 압력값을 측정할 수 있게 한다.
제2 센서 시트(11d)는 전도성 재질층(11c)의 상면에 적층됨에 따라 전도성 재질층(11c)을 사이에 두고 제1 센서 시트(11b)와 제2 센서 시트(11d)가 배치되며, 제1 센서 시트(11b)의 수평축 압력센서와 교차하도록 수직 방향을 따라 '수직층 압력센서'가 구비된다.
따라서, 제1 센서 시트(11b)의 수평축 압력센서와 제2 센서 시트(11d)의 수직축 압력센서가 교차하여 매트릭스 패턴을 형성하며, 센서의 각 지점에서 동시에 피검자의 족압을 측정함에 따라 상술한 CoP 및 CoM 등을 정밀하게 측정한다.
위와 같은 매트 타입의 보행 분석기(11)는 실시예로써 보행 중의 족압 영역을 세밀하게 구획하여 감지할 수 있도록 매트릭스는 최소 0.5“(1.27cm) 간격으로 설정된다. 또한 스텝 폭(Step Width)을 감안하여 단위 매트 센서(C1 내지 Cn)의 사이즈를 61cmX61cm(Width, Height)로 설계한다.
따라서, 각 단위 매트 센서(C1 내지 Cn)는 2,304개(48X48)의 압력센서를 포함하여 구성된다. 최종 매트의 길이는 다수개의 단위 매트 센서(C1 내지 Cn)들을 서로 연결한 어레이에 따라 다양한 사이즈로 제공할 수 있게 된다.
마감 시트(11e)는 제2 센서 시트(11d)의 상면에 적층되는 것으로, 일 예로 실리콘 재질로 이루어진 실리콘 층(silicon layer)이 이용된다. 따라서, 피검자인 고령자가 측정시 충격을 흡수하면서도 미끄러짐을 방지할 수 있게 한다.
한편, 사용자 자동 인식기(14)는 피검자의 위치를 인식하여 피검자가 상술한 매트 타입 보행 분석기(11)에 진입하는 시점과 진출하는 시점을 각각 분석하는 것으로, 일 예로 근거리 무선통신(near field communication)을 이용하여 사용자를 인식(탐색)한다.
사용자(피검자)를 인식하는 근거리 무선신에는 대표적으로 모바일 단말장치(14a, 14b)에서 제공되는 BLE(Bluetooth Low Energy) 프로토콜 통신 기능이 있으며, 이러한 경우 사용자 자동 인식기(14)는 블루투스 비콘(beacon)이다.
도 5와 같이, 블루투스 비콘은 피검자가 소지한 스마트 폰(14a)이나 착용한 웨어러블 기기(예: 스마트 와치나 밴드)(14b)에서 송출된 블루투스 무선신호를 수신하고, 수신된 데이터 패킷에는 TxPower에 대한 정보가 포함된다.
따라서 수신된 데이터 패킷에 포함된 정보를 이용하여 수신 강도 세기신호 RSSI(Received Signal Strength Indicator)를 산출하고, 산출된 RSSI 값으로부터 피검자의 접근을 인식할 수 있다.
따라서, 피검자가 검사 개시를 인지하지 못한 상태에서 사용자 자동 인식기(14)를 통해 피검자를 인식한 후 검사가 개시되므로 피검자는 보행 측정 중임을 인식하지 않고 평소와 같이 자연스러운 보행 상태에서 보행 능력을 평가받을 수 있게 된다.
다만, 이상에서는 피검자를 인식하는 수단으로서 근거리 무선통신 수단을 예로 들었으며 그 중에서도 BLE 통신을 하는 비콘에 대해 설명하였다. 그러나 피검자를 인지하는 근거리 무선통신에는 RFID 태그를 비롯하여 다른 근거리 인식 수단도 이용될 수 있다.
또한, 본 발명은 사용자 인식 방법으로 비콘에서의 수신 강도 세기신호(RSSI)를 이용하는 것을 예로 들었지만, 비콘의 전파특성상 일정한 RSSI 값을 구하기 어려운 단점을 보완하기 위하여 삼변측량 알고리즘을 이용할 수 있다.
도 6과 같이, 삼각측량 알고리즘은 3개의 서로 다른 비콘에서 각각 스마트 폰과 같은 신호 발생원에서 방출된 블루투스 신호를 수신하고, 수신 시간 및 수신 방향 등을 삼각 측량 기법에 적용하여 사용자의 위치를 예측한다.
이때, 비콘의 RSSI 정규화를 위해 칼만 필터(Kalman Filter) 알고리즘 적용하고, 비콘을 보행 측정 시작점과 끝점에 설치하면, 시작점과 끝점 근처의 근사 값만으로 인식하기 때문에 정확한 거리 값보다 인식 거리(Recognition Threshold) 범위 안에 포함 유무를 판단하는 것이 바람직하다.
다음, 깊이 카메라(12)는 보행중인 피검자를 촬영하도록 설치되며, 피검자에 대한 3차원 깊이 영상을 제공하는 컴퓨터 카메라(computational camera)에 해당하는 것으로 기존의 2D에서 할 수 없었던 각 픽셀의 깊이 값을 계산한다.
도 7과 같이, 깊이 카메라(12)는 2D 영상 이미지가 제공하는 픽셀의 RGB, 채도 및 콘트라스트 정보들로부터 더 나아가 렌즈를 통해 들어오는 이미지에 대한 연산을 통해 이미지를 재가공함으로써 촬영된 피검자의 골격 정보를 표현할 수 있게 한다.
따라서, 보행 분석기(11)를 따라 깊이 카메라(12)를 적어도 하나 이상 설치하고 각각 담당하는 구간내에서 피검자를 연속하여 촬영하면, 피검자의 골격(skeleton) 및 관절(joint)을 포함한 보행 중의 골격 정보를 제공할 수 있게 된다.
예컨대, 골격 조인트(skeleton joint)의 위치(position) 및 회전각 정보인 오리엔테이션(orientation)을 이용하여 보행 분석 파라미터를 추출할 수 있게 한다. 또한, 골격 정보를 통해 보행 중 좌우 균형, 다리 각도 및 발의 높이 등을 비롯한 다양한 보행 패턴과 보행 자세를 분석할 수 있게 한다.
다만, 본 발명은 2D의 검사 카메라(15)를 더 포함하는 것이 바람직한데, 검사 카메라(15)는 피검자를 2차원의 RGB 영상으로 촬영하여 보행 분석 모듈(13)에 제공한다. 즉, 3D의 깊이 카메라(12)와 함께 2D의 촬영 영상도 함께 제공함으로써 서로 다른 차원의 두 영상을 분석하여 더욱 정확한 보행 정보를 제공한다.
일 예로, 도 8과 같이 보행 분석 모듈(13)은 깊이 카메라(12)에서 제공되는 3D의 깊이 영상에 대한 분석결과와 검사 카메라(15)에서 제공되는 2D의 RGB 영상에 대한 분석 결과를 이용하여 피검자를 촬영한 영상 프레임들 중 실제 보행 상태와 다른 에러 프레임을 추출한다. 나아가 추출된 에어 프레임을 배제하거나 보정하여 영상 프레임들을 보간(interpolation)할 수 있게 한다.
즉, 깊이 카메라(12)를 통하여 측정된 각 관절(joint)의 3차원 위치 및 오리엔테이션값을 기준으로 골격(skeleton)을 인식하고, 이때 깊이(depth) 값을 이용하여 골격을 인식하기에는 카메라 FoV(Field of View), 앵글(angle)에 따라 다리, 팔, 몸 등의 겹침 또는 주변 사물에 의한 오류가 발생할 확률이 많다.
따라서, 이와 같은 오류를 완화하기 위하여 2차원의 RGB 영상과 3차원의 깊이 영상을 동시에 분석하여 골격을 인식할 수 있게 하고, 더불어 깊이 영상의 에러 프레임을 검출하는 알고리즘및 보간 알고리즘을 적용하여 골격을 인식할 수 있게 한다.
다음, 보행 분석 모듈(13)은 피검자의 족압 정보 및 3차원 깊이 영상으로부터 판독되는 골격 정보를 종합하여 피검자의 보행 상태를 분석함으로써 고령자의 낙상을 예측 및 예방할 수 있게 한다.
즉, 피검자의 보행 중 영상 분석을 거쳐 획득된 골격 정보를 통해 보행시 피검자의 좌우 균형, 다리 각도 및 발의 높이 등을 비롯한 다양한 보행 패턴과 보행 자세를 분석하여 낙상을 예측 및 예방한다.
이러한 보행 분석 모듈(13)은 별도의 컴퓨팅 단말장치에 단독으로 설치되거나, 보행 분석기(11)에 일체로 설치될 수 있다. 또한 서비스 서버에 설치되어 유무선 통신망을 통해 전송된 측정 데이터를 입력받아 프로세스를 처리할 수도 있다.
특히, 보행 분석 모듈(13)은 머신 러닝(ML, machine learning)을 통해 영상 프레임으로부터 피검자의 골격(skeleton) 및 관절(joint) 영상을 추출한다. 나아가 골격과 관절의 자세(position) 및 오리엔테이션(orientation) 값을 포함하여 피검자의 보행 상태를 분석한다.
이를 위해, 도 9와 같이 보행 분석 모듈(13)은 오브젝트 추출부(13a)와, 노이즈 제거부(13b)와, 보행 분석부(13c) 및 낙상 예측부(13d)를 포함하여, 보행 파라미터(gait parameter)를 추출할 수 있게 한다.
보행 파라미터는 사용자의 gait step, stride, stride length, Step Width, single support, double support, 체공 시간, step Velocity, CoP(Center of Pressure), CoM(Center of Mass) 등을 알고리즘에 의해 판독한다.
여기서 오브젝트 추출부(13a)는 3차원 깊이 영상 이미지 중에서 피검자가 보행 중 사용하는 보행 보조수단을 추출한다. 보행 보조수단은 고령자가 사용하는 목발, 지팡이, 보행기 및 워커 등을 의미한다.
따라서, 보행 보조수단은 피검자 즉, 고령자의 보행 정보의 분석에서 제외되어야 하므로 영상 프레임 내에서 보행 보조수단을 나타내는 이미지는 일종의 오브젝트로 취급하여 아래와 같이 제거한다.
노이즈 제거부(13b)는 위와 같이 오브젝트 형식으로 추출된 보행 보조수단을 분석 대상 영상 프레임으로부터 제외(삭제나 무시)시킴으로서, 피검자의 보행과 관련된 정보만 분석에 제공되게 한다.
도 10a 및 도 10b와 같이, 매트 타입의 보행 분석기(11) 위를 피검자가 보행하면 보행 보조수단에는 피검자의 발(foot)에 의해 생성되는 영역의 압력과 보행 보조수단에 의해 생성되는 영역의 압력이 각각 검출된다.
피검자의 발에 의해 생성되는 영역의 압력 센싱값은 로우 데이터(raw data)로써 저장한 후 다운 샘플링을 거쳐 분석하고 각종 유효 데이터를 생성한다. 반면 보행 보조수단에 의해 생성되는 압력값은 노이즈 제거부(13b)로 제거한다.
보행 분석부(13c)는 위와 같이 보행 보조수단이 제외된 유효한 분석 대상 영상 프레임을 이용하여 피검자의 보행 상태를 분석하고, 낙상 예측부(13d)는 피검자의 보행 상태를 낙상 위험 인자(factor)와 대비하여 낙상 위험도를 예측한다.
즉, 보행 분석을 위해 깊이 카메라(12)를 통해 획득한 골격 정보에서 관절의 3차원 위치 및 오리엔테이션 정보를 입력받고, 이를 조합하여 피검자의 보행 정보를 분석함으로써 낙상 위험도를 예측한다.
또한, 일반 고령자, 낙상 위험군 대상 낙상 검사를 통한 사용자 보행 분석 정보 수집 및 분석하고, 낙상 위험요인 인자(Factor)의 추출, 처리 및 위험군 분류 알고리즘을 적용한다.
또한, 보행패턴 비교 모델 데이터셋, 낙상 위험군 분류 데이터셋, 사용자별 낙상예측 데이터셋을 통한 분류/학습/예측 알고리즘 적용하고, 낙상위험군 분류 모델과 사용자 개인 보행 패턴 데이터를 기반으로 낙상 위험도를 예측한다.
이하, 본 발명에 따른 낙상 예방을 위한 하이브리드 보행 분석장치에 적용 가능한 다른 실시예에 대해 설명한다.
이러한 다른 실시예는 보행 분석기(11)를 구성하는 단위 매트 센서(C1 내지 Cn)들 각각의 식별이나 이들의 배열 분석을 반영하여 피검자의 보행 측정에 반영할 수 있도록 한다.
이를 위해, 도 2에서 살펴본 바와 같이 본 발명에 따른 낙상 예방을 위한 하이브리드 보행 분석장치는 다른 실시예를 위해 추가된 기술적 구성으로써 매트 식별부(16) 및 매트측 인식기(17)를 더 포함한다.
매트 식별부(16)는 상기한 단위 매트 센서(C1 내지 Cn)들에서 각각 자신의 고유 식별 정보를 제공(송출)하는 것으로, 신호 송출을 위해 사용자 자동 인식기(14)에서 수신 가능한 데이터 패킷(packet)에 고유 식별 정보는 실어 전송한다.
예컨대, 사용자 자동 인식기(14)가 스마트폰과 같은 모바일 단말기와 근거리 무선통신을 하도록 BLE(Bluetooth Low Energy) 프로토콜을 지원하는 경우 매트 식별부(16)는 블루투스 신호에 고유 식별 정보 실어 전송한다.
이러한 매트 식별부(16)는 단위 매트 센서(C1 내지 Cn)의 어레이 컨트롤러에 탑재될 수 있으며, 고유 식별 신호는 후술하는 사용자 자동 인식기(14)에서 수신한 후 보행 분석 모듈(13)에 제공된다.
도 11과 같이, 매트 식별부(16)를 더 포함하면 다수의 단위 매트 센서(C1 내지 Cn)를 조립하여 측정용 보행로를 형성시 고유 식별 정보를 참조하여 보행에 이용 중인 매트를 파악할 수 있게 된다. 예컨대, 보행에 이용중인 단위 매트 센서(C1 내지 Cn)가 ID#1부터 ID#6임을 알 수 있게 한다.
즉, 보행 중인 피검자가 현재 조립된 단위 매트 센서(C1 내지 Cn)들 중 어느 것 위를 걷고 있는지 그 히스토리를 파악할 수 있게 한다. 따라서, 보행 분석 모듈(13)은 피검자의 식별 정보와 단위 매트 센서의 식별 정보를 서로 매칭(matching)하여 피검자의 보행 검사 진행 위치를 판독할 수 있게 된다.
또한, 상기한 사용자 자동 인식기(14)는 단위 매트 센서(C1 내지 Cn)의 매트 식별부(16)로부터 각각 송출되는 신호를 분석하여 사용자 자동 인식기(14)와 단위 매트 센서(C1 내지 Cn)들 사이의 상대 위치 정보를 제공할 수 있다.
송출되는 신호를 분석하여 단위 매트 센서(C1 내지 Cn)들의 상대 위치를 판독하는 방법으로는 상술한 바와 같이 수신 강도 세기신호 RSSI를 이용하거나 삼면 측량 방법 등이 있다.
따라서, 보행 분석 모듈(13)은 사용자 자동 인식기(14)로부터 제공된 단위 매트 센서(C1 내지 Cn)들과의 상대 위치 정보로부터 판독된 단위 매트 센서(C1 내지 Cn)들의 정렬 순서를 반영하여 피검자의 보행 상태를 분석할 수 있게 한다.
예컨대, 단위 매트 센서(C1 내지 Cn)가 ID#1부터 ID#6까지 순차로 배열된 경우, 피검자가 이들을 따라 순차로 보행중임을 판독하고, 그에 따라 족압 등을 분석하여 피검자의 낙상 예측 및 예방 분석을 진행하게 한다.
다음, 매트측 인식기(17)는 피검자를 인식하는 것으로 BLE 프로토콜과 같은 근거리 무선통신을 이용하여 피검자가 소지한 모바일 단말이나 피검자가 착용한 웨어러블 기기를 인식하고 피검자의 접근을 인식한다. 인식된 정보는 사용자 자동 인식기(14)를 통해 수집 및 중계된다.
이러한 매트측 인식기(17)는 일 실시예로써 단위 매트 센서(C1 내지 Cn)들 중 피검자가 검사(측정)를 위해 진입하는 위치와 보행을 마치고 나가는 위치에 배치되는 각각의 단위 매트 센서(C1 내지 Cn)에 설치된다.
또한, 단위 매트 센서(C1 내지 Cn)들을 다수개 조립함에 따라 보행 거리가 길거나 혹은 복잡한 경우에는 그 이동 경로의 처음과 끝 사이의 중간에 배치되는 단위 매트 센서(C1 내지 Cn)에도 상기 매트측 인식기(17)를 구비된다.
특히, 매트측 인식기(17)는 피검자의 진입 지점과 진출 지점 사이에 존재하는 방향 전환 지점에 배치된 단위 매트 센서(C1 내지 Cn)에 설치되는데, 이를 통해 피검자가 방향 전환 중임을 반영하여 보행 검사를 진행할 수 있게 한다. 또한 단위 매트 센서(C1 내지 Cn)들의 조립 패턴이나 정렬 방향을 분석할 수 있게 된다.
구체적으로, 매트측 인식기(17)가 구비되어 있는 단위 매트 센서(C1 내지 Cn)를 보행 중인 피검자를 검출시, 매트측 인식기(17)는 사용자 자동 인식기(14)의 중계하에 보행 분석 모듈(13)로 매트 통과 신호를 전송한다.
매트 통과 신호를 입력받은 보행 분석 모듈(13)은 해당 신호가 입력된 시점의 압력센서 센싱 신호를 분석하게 되며, 특히 피검자가 방향 전환 지점에 배치된 단위 매트 센서(C1 내지 Cn)를 통과중인 경우 이를 반영할 수 있게 한다.
도 11에서는 일 예로 ID#1부터 ID#6까지의 단위 매트 센서(C1 내지 Cn)들 중 ID#4의 단위 매트 센서가 방향 전환 지점에 배치되고, 그를 기준으로 단위 매트 센서들의 정렬이 상측으로 꺽인 것을 예로 들었다.
따라서, 보행 분석 모듈(13)은 ID#4의 단위 매트 센서에서 피검자의 보행 상태가 급격이 변화하더라도 이를 방향 전환으로 인식하고, 이를 반영하여 낙상 예측 및 예방에 이용되는 보행 상태를 측정할 수 있게 한다.
이하, 본 발명에 따른 낙상 예방 관리시스템에 대해 설명한다. 본 발명의 낙상 예방 관리시스템은 위에서 도 1을 참조하여 설명한 바와 같이 하이브리드 보행 분석장치(10), 통합 데이터베이스(20) 및 앱 관리 모듈(30)을 포함한다.
이때, 하이브리드 보행 분석장치(10)는 고령자의 낙상을 예측하고 예방하도록 매트형의 보행 분석기(11)로 보행시의 족압을 측정하고, 보행로에 설치된 깊이 카메라(12)로는 보행시의 골격 정보를 획득한다.
따라서, 피검자의 보행 중 골격 인식을 통해 보행시의 골격, 관절, 좌우 균형, 다리 각도 및 발의 높이 등을 비롯하여 다양한 보행 패턴과 보행 자세를 분석할 수 있게 한다.
통합 데이터베이스(20)는 피검자의 개인 정보 및 낙상검사 이력정보를 기록하고, 사용자/장비의 인증 관리 기능을 제공한다. 따라서 사용자별 낙상 검사 이력의 관리를 통해 통합 측정정보 분석데이터 제공 시스템을 제공한다.
나아가, 통합 데이터베이스(20)는 피검자에게 적합한 맞춤형 낙상 예방 프로그램을 제공한다. 낙상 예방 프로그램은 보행 상태 측정을 통한 그룹별로 낙상 예측 및 예방 결과를 고려하여 최적의 예방 프로그램을 선택하여 제공된다.
예방 프로그램은 순환기, 신경계, 근골격계 및 시각적 위험에 따른 신체적 위험 뿐만 아니라 노화와 관련된 위험, 섭취중인 약물에 따른 위험, 주거 환경 요인에 따른 위험 및 음주와 같은 생활습관에 따른 위험 등을 예방하기 위해 다양한 카테고리로 분류하여 제공할 수 있다.
앱 관리 모듈(30)은 피검자의 단말장치에서 통합 데이터베이스에 접속하여 검사 결과를 제공받도록 어플리케이션을 제공한다. 따라서 본 발명에서 앱 관리 모듈(30)은 일종의 앱 다운로드 서버의 기능을 제공한다.
이러한 앱 관리 모듈(30)에 의해 제공되는 어플리케이션은 보행 검사를 위한 사용자 자동 인식 기능의 활성화, 보행 상태 측정 결과 확인 및 낙상 예방 프로그램 요청을 위한 인터페이스 생성 등 다양한 서비스 환경을 포함한다.
이상, 본 발명의 특정 실시예에 대하여 상술하였다. 그러나, 본 발명의 사상 및 범위는 이러한 특정 실시예에 한정되는 것이 아니라, 본 발명의 요지를 변경하지 않는 범위 내에서 다양하게 수정 및 변형 가능하다는 것을 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 이해할 것이다.
따라서, 이상에서 기술한 실시예들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이므로, 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 하며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
10: 하이브리드 보행 분석장치
11: 보행 분석기(매트형 센서)
12: 3D 깊이 카메라
13: 보행 분석 모듈
14: 사용자 자동 인식기
15: 2D 검사 카메라
16: 매트 식별부
17: 매트측 인식기
20: 통합 데이터베이스
30: 앱 관리 모듈

Claims (13)

  1. 낙상 예방 피검자(subject)가 보행하는 바닥에 설치되며 보행시의 족압을 측정하는 다수의 압력센서를 구비하여 족압 정보를 제공하는 보행 분석기(11)와;
    상기 보행중인 피검자를 촬영하도록 설치되며, 상기 피검자의 3차원 깊이 영상을 제공하는 깊이 카메라(depth camera, 12); 및
    상기 피검자의 족압 정보 및 상기 3차원 깊이 영상으로부터 판독되는 골격 정보를 종합하여 상기 피검자의 보행 상태를 분석하는 보행 분석 모듈(13);을 포함하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  2. 제1항에 있어서,
    상기 피검자의 위치를 탐색하여 상기 피검자가 상기 매트 타입 보행 분석기(11)에 진입하는 시점과 진출하는 시점을 각각 분석하는 사용자 자동 인식기(14)를 더 포함하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  3. 제2항에 있어서,
    상기 보행 분석기(11)는,
    각각 매트(mat) 타입으로 이루어진 다수의 단위 매트 센서(C1 내지 Cn)를 포함하되,
    상기 단위 매트 센서(C1 내지 Cn)는 각각 다수의 압력센서가 매트릭스(matrix) 패턴으로 구비되어 있는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  4. 제3항에 있어서,
    상기 단위 매트 센서(C1 내지 Cn)는,
    바닥 시트(11a)와;
    상기 바닥 시트(11a)의 상면에 적층되며, 수평 방향을 따라 수평축 압력센서가 구비된 제1 센서 시트(11b)와;
    상기 제1 센서 시트(11b)의 상면에 적층되며 전도성 재질로 이루어진 전도성 재질층(11c)과;
    상기 전도성 재질층(11c)의 상면에 적층되며, 상기 수평축 압력센서와 교차하도록 수직 방향을 따라 수직층 압력센서가 구비된 제2 센서 시트(11d); 및
    상기 제2 센서 시트(11d)의 상면에 적층된 마감 시트(11e);를 포함하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  5. 제1항에 있어서,
    상기 깊이 카메라(12)는,
    상기 보행 분석기(11)를 따라 적어도 하나 이상 설치되며, 각각 담당하는 구간내에서 상기 피검자를 연속하여 촬영하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  6. 제5항에 있어서,
    상기 피검자를 2차원의 RGB 영상으로 촬영하여 상기 보행 분석 모듈(13)에 제공하는 2D 검사 카메라(15)를 더 포함하되,
    상기 보행 분석 모듈(13)은,
    상기 깊이 카메라(12)에서 제공되는 3D의 깊이 영상에 대한 분석결과와 상기 검사 카메라(15)에서 제공되는 2D의 RGB 영상에 대한 분석 결과를 이용하여 상기 피검자를 촬영한 영상 프레임들 중 실제 보행 상태와 다른 에러 프레임을 추출하고 보간(interpolation)하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  7. 제1항에 있어서,
    상기 보행 분석 모듈(13)은,
    머신 러닝(machine learning)을 통해 영상 프레임으로부터 피검자의 골격(skeleton) 및 관절(joint) 영상을 추출하되,
    상기 골격과 관절의 자세(position) 및 오리엔테이션(orientation) 값을 포함하여 상기 피검자의 보행 상태를 분석하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  8. 제7항에 있어서,
    상기 보행 분석 모듈(13)은,
    상기 3차원 깊이 영상 중에서 상기 피검자가 보행 중 사용하는 보행 보조수단을 추출하는 오브젝트 추출부(13a)와;
    상기 추출된 보행 보조수단을 상기 분석 대상 영상 프레임으로부터 제외시키는 노이즈 제거부(13b)와;
    상기 보행 보조수단이 제외된 분석 대상 영상 프레임을 이용하여 상기 피검자의 보행 상태를 분석하는 보행 분석부(13c); 및
    상기 피검자의 보행 상태를 낙상 위험 인자(factor)와 대비하여 낙상 위험도를 예측하는 낙상 예측부(13d);를 포함하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  9. 제3항에 있어서,
    상기 다수의 단위 매트 센서(C1 내지 Cn)들에는 각각 자신의 고유 식별 정보를 송출하는 매트 식별부(16)를 더 포함하되,
    상기 매트 식별부(16)의 고유 식별 정보는 상기 사용자 자동 인식기(14)에서 수신 가능한 통신 프로토콜을 따르는 데이터 패킷(packet)으로 송출되며,
    상기 보행 분석 모듈(13)은 상기 피검자의 식별 정보와 상기 단위 매트 센서의 식별 정보를 서로 매칭(matching)하여 상기 피검자의 보행 검사 진행 위치를 판독하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  10. 제9항에 있어서,
    상기 사용자 자동 인식기(14)는,
    상기 단위 매트 센서(C1 내지 Cn)들로부터 각각 송출되는 신호를 분석하여 상기 사용자 자동 인식기(14)와 단위 매트 센서(C1 내지 Cn)들 사이의 상대 위치 정보를 각각 제공하고,
    상기 보행 분석 모듈(13)은,
    상기 사용자 자동 인식기(14)로부터 제공된 상기 단위 매트 센서(C1 내지 Cn)들과의 상대 위치 정보로부터 판독된 상기 단위 매트 센서(C1 내지 Cn)들의 정렬 순서를 반영하여 상기 피검자의 보행 상태를 분석하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  11. 제10항에 있어서,
    상기 단위 매트 센서(C1 내지 Cn)들 중 피검자가 검사를 위해 진입하는 진입 지점과 검사를 마치고 나가는 진출 지점 사이의 방향 전환 지점에 설치된 매트측 인식기(17)를 더 포함하되,
    상기 매트측 인식기(17)가 구비되어 있는 단위 매트 센서(C1 내지 Cn)를 보행 중인 피검자를 검출시, 상기 매트측 인식기(17)는 상기 사용자 자동 인식기(14)의 중계하에 상기 보행 분석 모듈(13)로 매트 통과 신호를 전송하고,
    상기 보행 분석 모듈(13)은 피검자가 상기 방향 전환 지점을 보행 중에 측정된 정보를 반영하여 상기 피검자의 보행 상태를 분석하는 것을 특징으로 하는 낙상 예방을 위한 하이브리드 보행 분석장치.
  12. 제1항 내지 제11항 중 어느 하나의 항과 같은 하이브리드 보행 분석장치(10)와;
    상기 피검자의 개인 정보 및 낙상검사 이력정보를 기록하는 통합 데이터베이스(20); 및
    상기 피검자의 단말장치에서 상기 통합 데이터베이스(20)에 접속하여 검사 결과를 제공받도록 어플리케이션을 제공하는 앱 관리 모듈(30);을 포함하는 것을 특징으로 하는 낙상 예방 관리시스템.
  13. 제12항에 있어서,
    상기 통합 데이터베이스(20)는,
    상기 피검자에게 적합한 맞춤형 낙상 예방 프로그램을 제공하는 것을 특징으로 하는 낙상 예방 관리시스템.
KR1020200031268A 2020-03-13 2020-03-13 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템 KR102376330B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020200031268A KR102376330B1 (ko) 2020-03-13 2020-03-13 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템
CN202080099942.3A CN115428050B (zh) 2020-03-13 2020-11-20 用于预防跌倒的混合型步态分析装置及包含其的跌倒预防管理系统
PCT/KR2020/016474 WO2021182713A1 (ko) 2020-03-13 2020-11-20 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템
US17/911,236 US20230404436A1 (en) 2020-03-13 2020-11-20 Hybrid walking analysis apparatus for fall prevention and fall prevention management system comprising same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200031268A KR102376330B1 (ko) 2020-03-13 2020-03-13 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템

Publications (2)

Publication Number Publication Date
KR20210115450A true KR20210115450A (ko) 2021-09-27
KR102376330B1 KR102376330B1 (ko) 2022-03-18

Family

ID=77672413

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200031268A KR102376330B1 (ko) 2020-03-13 2020-03-13 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템

Country Status (4)

Country Link
US (1) US20230404436A1 (ko)
KR (1) KR102376330B1 (ko)
CN (1) CN115428050B (ko)
WO (1) WO2021182713A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102389427B1 (ko) * 2021-10-25 2022-04-22 웰트 주식회사 보행 데이터를 이용한 낙상 위험 예방 방법 및 이러한 방법을 수행하는 장치
KR102507767B1 (ko) * 2022-02-28 2023-03-07 이상우 낙상을 검출하기 위한 방법, 서버 및 컴퓨터프로그램
WO2023121376A1 (ko) * 2021-12-24 2023-06-29 서울대학교병원 이미지를 이용하여 임상 평가 정보를 제공하는 방법 및 장치

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112396014B (zh) * 2020-11-26 2022-04-12 河北工业大学 基于特征融合的视触融合步态识别方法
CN114176578A (zh) * 2022-02-17 2022-03-15 杭州拜伦医疗科技有限公司 一种步态分析仪

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003216743A (ja) * 2002-01-25 2003-07-31 Nippon Telegr & Teleph Corp <Ntt> 遠隔転倒予防指導支援システム
KR101713263B1 (ko) 2015-04-14 2017-03-09 주식회사 케이엔아이씨 낙상 감지 패드, 및 낙상 감지 장치
KR20180023225A (ko) * 2016-08-25 2018-03-07 정원미 관리 대상자의 상태 인식을 통한 질병 발병 및 위험 상황 방지를 위한 스마트 매트 시스템
KR101902551B1 (ko) * 2018-06-11 2018-09-28 정재훈 족저 압력과 신체의 움직임 정보를 이용한 신체 부정렬 증후군 진단 장치 및 방법
KR20190070068A (ko) 2017-12-12 2019-06-20 고용국 웨어러블 장치를 이용한 낙상 사고 관리 시스템

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012523299A (ja) * 2009-04-13 2012-10-04 ウェルセンス テクノロジーズ 褥瘡性潰瘍の防止システムおよび方法
US20150320352A1 (en) * 2009-04-13 2015-11-12 Enhanced Surface Dynamics, Inc. System and method for preventing decubitus ulcers
US9271665B2 (en) * 2011-05-20 2016-03-01 The Regents Of The University Of California Fabric-based pressure sensor arrays and methods for data analysis
JP6901707B2 (ja) * 2015-05-15 2021-07-14 ジェイ．ブラシュ シーオー． ，エルエルシー アナログマルチゾーン感圧性パッドを介して、人をモニタリングするシステムおよびその方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003216743A (ja) * 2002-01-25 2003-07-31 Nippon Telegr & Teleph Corp <Ntt> 遠隔転倒予防指導支援システム
KR101713263B1 (ko) 2015-04-14 2017-03-09 주식회사 케이엔아이씨 낙상 감지 패드, 및 낙상 감지 장치
KR20180023225A (ko) * 2016-08-25 2018-03-07 정원미 관리 대상자의 상태 인식을 통한 질병 발병 및 위험 상황 방지를 위한 스마트 매트 시스템
KR20190070068A (ko) 2017-12-12 2019-06-20 고용국 웨어러블 장치를 이용한 낙상 사고 관리 시스템
KR101902551B1 (ko) * 2018-06-11 2018-09-28 정재훈 족저 압력과 신체의 움직임 정보를 이용한 신체 부정렬 증후군 진단 장치 및 방법

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102389427B1 (ko) * 2021-10-25 2022-04-22 웰트 주식회사 보행 데이터를 이용한 낙상 위험 예방 방법 및 이러한 방법을 수행하는 장치
WO2023075042A1 (ko) * 2021-10-25 2023-05-04 웰트 주식회사 낙상 위험 예방 방법 및 이러한 방법을 수행하는 장치
WO2023121376A1 (ko) * 2021-12-24 2023-06-29 서울대학교병원 이미지를 이용하여 임상 평가 정보를 제공하는 방법 및 장치
KR20230097298A (ko) 2021-12-24 2023-07-03 서울대학교병원 이미지를 이용하여 임상 평가 정보를 제공하는 방법 및 장치
KR102507767B1 (ko) * 2022-02-28 2023-03-07 이상우 낙상을 검출하기 위한 방법, 서버 및 컴퓨터프로그램

Also Published As

Publication number Publication date
CN115428050A (zh) 2022-12-02
CN115428050B (zh) 2024-04-19
WO2021182713A1 (ko) 2021-09-16
US20230404436A1 (en) 2023-12-21
KR102376330B1 (ko) 2022-03-18

Similar Documents

Publication Publication Date Title
KR102376330B1 (ko) 낙상 예방을 위한 하이브리드 보행 분석장치 및 그를 포함하는 낙상 예방 관리시스템
CN106580294B (zh) 基于多模态成像技术的生理信号远程监控系统及应用
US9597016B2 (en) Activity analysis, fall detection and risk assessment systems and methods
US20120232430A1 (en) Universal actigraphic device and method of use therefor
US9095285B2 (en) Portable biometric identification device using a dorsal hand vein pattern
US9289160B2 (en) Portable biometric identification device using a dorsal hand vein pattern
US20130289449A1 (en) Activity analysis, fall detection and risk assessment systems and methods
EP3017761B1 (en) System for functional balance assessment
Hossain et al. A direction-sensitive fall detection system using single 3D accelerometer and learning classifier
CN109171734A (zh) 基于多传感器数据融合的人体行为分析云管理系统
EP3815022A1 (en) System, apparatus and method of item location, list creation, routing, imaging and detection
Wang et al. Home monitoring musculo-skeletal disorders with a single 3d sensor
JP6351860B2 (ja) 行動識別装置、空気調和機およびロボット制御装置
MejiaCruz et al. Walking speed measurement technology: a review
Rastogi et al. Human fall detection and activity monitoring: a comparative analysis of vision-based methods for classification and detection techniques
CN112438723A (zh) 认知功能评估方法、认知功能评估装置以及存储介质
CN111861275B (zh) 家政工作模式的识别方法和装置
KR20230061876A (ko) 모션인식 기반의 운동관리시스템 및 운동관리방법
Nguyen et al. A SVM algorithm for falling detection in an IoTs-based system
KR102553951B1 (ko) 낙상 예방 관리 시스템
KR101174729B1 (ko) 유비쿼터스 헬스케어 장치 및 이를 구비한 다기능 신발
KR102472190B1 (ko) 사용자 맞춤형 풋웨어 추천 시스템 및 그 방법
CN117115926B (zh) 一种基于实时图像处理的人体动作标准判定方法及装置
Htoo et al. Privacy preserving human fall recognition using human skeleton data
JP6867465B2 (ja) モバイルプラットフォームの動作モードを選択するシステム及び方法

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant