KR20200059628A - 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 방법 - Google Patents

스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 방법 Download PDF

Info

Publication number
KR20200059628A
KR20200059628A KR1020180144597A KR20180144597A KR20200059628A KR 20200059628 A KR20200059628 A KR 20200059628A KR 1020180144597 A KR1020180144597 A KR 1020180144597A KR 20180144597 A KR20180144597 A KR 20180144597A KR 20200059628 A KR20200059628 A KR 20200059628A
Authority
KR
South Korea
Prior art keywords
user
information
skeleton
abnormality
central server
Prior art date
Application number
KR1020180144597A
Other languages
English (en)
Inventor
조영혁
Original Assignee
주식회사 노다시스템
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 노다시스템 filed Critical 주식회사 노다시스템
Priority to KR1020180144597A priority Critical patent/KR20200059628A/ko
Publication of KR20200059628A publication Critical patent/KR20200059628A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/04—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0407—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons based on behaviour analysis
    • G08B21/0423—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons based on behaviour analysis detecting deviation from an expected pattern of behaviour or schedule
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/22—Social work or social welfare, e.g. community support activities or counselling services
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/04—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0407—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons based on behaviour analysis
    • G08B21/0415—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons based on behaviour analysis detecting absence of activity per se
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/04—Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0438—Sensor means for detecting
    • G08B21/0476—Cameras to detect unsafe condition, e.g. video cameras
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/016—Personal emergency signalling and security systems

Landscapes

  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Emergency Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Gerontology & Geriatric Medicine (AREA)
  • Tourism & Hospitality (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Multimedia (AREA)
  • Child & Adolescent Psychology (AREA)
  • Computer Security & Cryptography (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Alarm Systems (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

본 발명은 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법에 관한 것으로, 모니터링 장치가 사용자를 감지하여 카메라를 통해 촬영된 상기 사용자의 정보를 뼈대화한 정보인 스켈레톤(skeleton) 정보로 변환하여 전송하는 제1 단계; 중앙 서버가 상기 스켈레톤 정보를 수신 및 분석하여 상기 사용자에게 이상이 발생한 것으로 판단하면 이상 발생 신호를 전송하는 제2 단계; 및 응급센터 자동호출 시스템이 상기 이상 발생 신호를 수신하면 응급센터로 자동호출을 발신하는 제3 단계;를 포함한다.

Description

스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 방법{SKELETON IMAGE LEARNING BASED OLD PEOPLE BEHAVIOR PATTERN MONITORING METHOD}
본 발명의 실시예는 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 방법에 관한 것이다.
일반적으로 65세 이상의 인구가 전체 인구를 차지하는 비율이 7% 이상이면 고령화 사회(Aging Society)라 하고, 14% 이상이면 고령 사회(Aged Society)라 하고, 20% 이상이면 후기 고령 사회(Post-aged Society) 혹은 초고령 사회라고 한다.
한국의 경우, 고령자 고용촉진법시행령에서는 55세 이상을 고령자, 50~54세를 준고령자(2조)로 규정하고 있으나, UN에서는 65세 이상의 인구가 전체 인구에서 차지하는 비율이 7% 이상일 때 고령화 사회라고 보고 있다.
고령에 따른 질병, 고독, 빈곤, 무직업 등에 대응하는 사회적, 경제적 대책은 고령화 사회가 당면하고 있는 과제로서, 혼자 살고 있는 독거노인은 갑작스럽게 건강에 이상이 생기는 위급 상황이 발생하는 경우, 누군가의 도움을 받기 어려운 문제점이 있으며, 이와 같은 독거노인들의 안전을 위한 모니터링 시스템이 개발되고 있다.
국내공개특허 2009-0080672호에서는 지체 장애인이나 고령의 노인 등이 생활하는 실내의 바닥에 좌표 정보를 포함한 RFID 태그를 다수개 설치하고, RFID 리더기가 내장된 신발을 신은 위치 추적 대상자가 이동하면, RFID 리더기에 의해 바닥에 설치된 RFID 태그의 좌표 정보가 수집되고 이를 이용하여 위치 추적 대상자의 현재 위치나 이동 경로를 용이하게 파악할 수 있는 RFID 리더기가 내장된 신발 및 이를 이용한 위치 추적 시스템을 개시하고 있다.
그러나, 이와 같은 RFID 리더기를 이용한 방식은 반드시 RFID가 내장된 신발을 이용해야 하며, 사용자의 행동이나 현재 상황 등을 확인하기 어려운 문제점이 있었다.
국내등록특허 10-1648076호는 사용자인 독거노인의 손목에 착용되도록 구성된 안심 밴드(relief band)가 측정한 맥박을 비콘 신호(beacon signal)로 송신하면 해당 사용자의 스마트폰이 수신한 비콘 신호를 파싱(parsing)하여 해당 사용자의 맥박을 추출하고 추출된 맥박과 해당 사용자 정보를 독거노인 모니터링 서버로 실시간으로 송신함으로써 구조 요청이 필요한 독거노인에 대한 응급 처지와 구조를 하도록 한다.
그러나, 안심 밴드는 독거노인이 상시로 손목에 착용하고 있어야 하기 때문에 불편하고 노인들의 움직임을 구속하는 단점이 있었다.
또한, 국내등록특허 10-1654609호에 게시되어 있는 독거노인을 위한 원격 스마트 모니터링 시스템에서는 독거노인의 현재 상황을 촬영하기 위하여 카메라를 사용하고 있으나, 이처럼 카메라를 사용하는 경우에는 독거노인들의 사생활을 침해할 수 있는 문제점이 있었다.
따라서, 노인의 행동이나 이상 발생 여부를 용이하게 파악할 수 있으며, 사용상의 편의성과 개인 사생활도 보호할 수 있는 모니터링 방법의 개발이 필요한 실정이다.
본 발명은 전술한 문제를 해결하기 위해 안출된 것으로서, 본 발명에 따르면 독거노인 행동 패턴 모니터링 시에 사용자의 정보를 뼈대화한 정보인 상기 스켈레톤(skeleton) 정보로 변환하고, 이와 같은 스켈레톤 정보를 분석하여 사용자의 이상 발생 여부를 판단하여 보다 효율적이고 정확한 이상 발생 여부의 판단이 가능하도록 하며, 스켈레톤 정보만을 외부로 제공하므로 사용자에 대한 개인 사생활 보호가 가능하도록 하고자 한다.
또한, 본 발명에 따르면, 통신사 네트워크를 통하여 보다 신뢰도 높고 신속한 이상 발생 여부의 전달이 가능하도록 하고, 통신사 네트워크의 사용시에 스켈레톤 정보를 사용하여 전송 데이터의 양을 대폭 줄여 통신비를 최소화하고자 한다.
또한, 본 발명에 따르면, 사용자의 스켈레톤 정보와 사용자의 연령대별 데이터를 저장하여 사용자의 행동 패턴을 학습할 수 있도록 함으로써, 빅데이터 딥러닝을 통하여 보다 정확도 높은 데이터 분석 및 학습이 가능하도록 하고자 한다.
또한, 본 발명에 따르면, 사용자의 스켈레톤 정보를 이용해 구성된 아바타 정보 및 상기 사용자의 상태 정보를 제공하여, 관리자와 보호자가 사용자의 상태를 매우 용이하게 직관적으로 파악할 수 있도록 하고자 한다.
전술한 문제를 해결하기 위한 본 실시예에 따른 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법은 모니터링 장치가 사용자를 감지하여 카메라를 통해 촬영된 상기 사용자의 정보를 뼈대화한 정보인 스켈레톤(skeleton) 정보로 변환하여 전송하는 제1 단계; 중앙 서버가 상기 스켈레톤 정보를 수신 및 분석하여 상기 사용자에게 이상이 발생한 것으로 판단하면 이상 발생 신호를 전송하는 제2 단계; 및 응급센터 자동호출 시스템이 상기 이상 발생 신호를 수신하면 응급센터로 자동호출을 발신하는 제3 단계;를 포함한다.
본 발명의 일실시예에 따르면, 상기 제1 단계는 상기 모니터링 장치가 상기 촬영된 영상을 상기 사용자의 발목, 무릎, 엉덩이, 손목, 팔꿈치, 어깨, 턱 또는 이마의 정보를 포함하는 스켈레톤 정보로 변환하여 전송할 수 있다.
본 발명의 일실시예에 따르면, 상기 제1 단계 이후에, 데이터베이스가 상기 사용자의 스켈레톤 정보와 상기 사용자의 연령대별 데이터를 저장하는 단계; 또는 웹 서버가 상기 사용자의 스켈레톤 정보를 이용해 구성된 아바타 정보 및 상기 사용자의 상태 정보를 제공하는 단계;를 더 포함할 수 있다.
본 발명의 일실시예에 따르면, 상기 제2 단계는, 상기 중앙 서버가 상기 사용자의 스켈레톤 정보와 상기 사용자의 연령대별 데이터에 기초하여 상기 사용자의 행동 패턴을 학습하는 단계; 상기 중앙 서버가 상기 행동 패턴 학습부에서 학습된 상기 사용자의 행동 패턴에 의해 상기 사용자의 이상 발생 여부를 판단 단계; 및 상기 중앙 서버가 상기 사용자에게 이상이 발생한 것으로 판단하면 이상 발생 신호를 발생시키는 단계;를 더 포함할 수 있다.
본 발명의 일실시예에 따르면, 상기 제1 단계의 이전 또는 이후에, 상기 중앙 서버가 상기 모니터링 장치로 날씨 정보를 포함하는 생활 필수정보를 제공하는 단계;를 더 포함할 수 있다.
본 발명의 실시예에 따르면 독거노인 행동 패턴 모니터링 시에 사용자의 정보를 뼈대화한 정보인 상기 스켈레톤(skeleton) 정보로 변환하고, 이와 같은 스켈레톤 정보를 분석하여 사용자의 이상 발생 여부를 판단하여 보다 효율적이고 정확한 이상 발생 여부의 판단이 가능하며, 스켈레톤 정보만을 외부로 제공하므로 사용자에 대한 개인 사생활 보호가 가능한 장점이 있다.
또한, 본 발명의 실시예에 따르면, 통신사 네트워크를 통하여 보다 신뢰도 높고 신속한 이상 발생 여부의 전달이 가능하며, 통신사 네트워크의 사용시에 스켈레톤 정보를 사용하여 전송 데이터의 양을 대폭 줄여 통신비를 최소화할 수 있다.
또한, 본 발명의 실시예에 따르면, 사용자의 스켈레톤 정보와 사용자의 연령대별 데이터를 저장하여 사용자의 행동 패턴을 학습할 수 있도록 함으로써, 빅데이터 딥러닝을 통하여 보다 정확도 높은 데이터 분석 및 학습이 가능하다.
또한, 본 발명의 실시예에 따르면, 사용자의 스켈레톤 정보를 이용해 구성된 아바타 정보 및 상기 사용자의 상태 정보를 제공하여, 관리자와 보호자가 사용자의 상태를 매우 용이하게 직관적으로 파악할 수 있다.
도 1은 본 발명의 일실시예에 따른 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 시스템의 구성도이다.
도 2는 본 발명의 일실시예에 따른 모니터링 장치의 구성도이다.
도 3은 본 발명의 일실시예에 따른 중앙 서버의 구성도이다.
도 4는 본 발명의 일실시예에 따른 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 일실시예에 따른 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법을 설명하기 위한 흐름도이다.
도 6은 본 발명의 일실시예에 따른 모니터링 장치의 스켈레톤(skeleton) 정보의 처리 방법을 설명하기 위한 도면이다.
도 7 및 도 8은 본 발명의 일실시예에 따른 어플리케이션을 이용한 사용자의 상태 정보 제공 방법을 설명하기 위한 도면이다.
이하에서는 첨부한 도면을 참조하여 바람직한 본 발명의 일실시예에 대해서 상세히 설명한다. 다만, 실시형태를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그에 대한 상세한 설명은 생략한다. 또한, 도면에서의 각 구성요소들의 크기는 설명을 위하여 과장될 수 있으며, 실제로 적용되는 크기를 의미하는 것은 아니다.
도 1은 본 발명의 일실시예에 따른 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 시스템의 구성도이고, 도 2는 본 발명의 일실시예에 따른 모니터링 장치의 구성도이며, 도 3은 본 발명의 일실시예에 따른 중앙 서버의 구성도이다.
이후부터는 도 1 내지 도 3을 참조하여 본 발명의 일실시예에 따른 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 시스템의 구성을 상세하게 설명하기로 한다.
도 1에 도시된 바와 같이 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 시스템은 모니터링 장치(110), 중앙 서버(120), 응급센터 자동호출 시스템(130), 데이터베이스(140) 및 웹 서버(150)를 포함하여 구성될 수 있다.
모니터링 장치(110)는 사용자를 감지하여 카메라를 통해 촬영하여 스켈레톤(skeleton) 정보로 변환하여 전송한다. 상기 스켈레톤 정보는 상기 사용자의 형태 정보를 뼈대화한 정보로서, 상기 모니터링 장치(110)는 이와 같이 사용자를 감지하여 카메라를 통해 촬영된 상기 사용자의 정보를 뼈대화한 정보인 상기 스켈레톤(skeleton) 정보로 변환하여 전송한다.
보다 구체적으로, 도 2를 참조하면 상기 모니터링 장치(110)는 3D 카메라(111), 적외선 카메라 센서(112), 센서부(113), 디스플레이(114), 전원부(115), 마이크(116), 스피커(117), 통신부(118) 및 정보처리 제어부(119)를 포함하여 구성될 수 있다.
3D 카메라(111)는 사용자를 촬영하며 이때 상기 사용자를 촬영하여 3D 이미지를 생성할 수 있으며, 적외선 카메라 센서(112)는 상기 사용자를 촬영 및 감지할 수 있다.
또한, 센서부(113)는 온도 등의 감지가 가능하고, 디스플레이(114)는 사용자에게 날씨 등의 필요 정보를 제공할 수 있으며, 전원부(115)는 상기 모니터링 장치(110)에 전원을 제공하며, 마이크(116)는 상기 모니터링 장치(110)의 주변의 소리 또는 사용자의 음성을 획득할 수 있으며, 스피커(117)는 상기 사용자에게 정보 또는 경고 등의 정보를 제공할 수 있다.
정보처리 제어부(119)는 상기 사용자의 정보를 뼈대화한 정보인 스켈레톤(skeleton) 정보로 변환하고 상기 통신부(118)를 제어하여 네트워크(101)를 통해 중앙 서버(120)로 전송할 수 있다.
이때, 본 발명의 일실시예에 따르면 네트워크(101)가 무선 네트워크로 구성될 수 있으며, 보다 구체적으로 통신사 네트워크로 구성되는 경우 스켈레톤 정보를 사용하므로 전송 데이터의 양을 대폭 줄여 통신비를 최소화할 수 있다.
중앙 서버(120)는 이와 같이 네트워크(101)를 통해 전송되는 스켈레톤 정보를 수신 및 분석하여 사용자에게 이상이 발생하였는지의 여부를 판단할 수 있다.
보다 구체적으로, 도 2에 도시된 바와 같이 상기 중앙 서버(120)는 행동 패턴 학습부(121), 이상 발생 판단부(122), 위험 경보부(123) 및 생활 필수정보 제공부(124)를 포함하여 구성될 수 있다.
상기 행동 패턴 학습부(121)는 데이터베이스(140)에 저장된 사용자의 스켈레톤 정보와 상기 사용자의 연령대별 데이터에 기초하여 상기 사용자의 행동 패턴을 학습할 수 있으며, 상기 이상 발생 판단부(122)는 상기 행동 패턴 학습부에서 학습된 상기 사용자의 행동 패턴에 의해 상기 사용자의 이상 발생 여부를 판단할 수 있다.
또한, 상기 위험 경보부(123)는 상기 사용자에게 이상이 발생한 것으로 판단하면 이상 발생 신호를 발생시킬 수 있으며, 상기 생활 필수정보 제공부(124)는 상기 사용자의 단말로 날씨 정보를 포함하는 생활 필수정보를 제공하여 사용자가 보다 다양한 생활 정보를 편리하게 제공받을 수 있다.
그에 따라, 응급센터 자동호출 시스템(130)은 상기 중앙 서버(120)의 위험 경보부(123)로부터 이상 발생 신호를 수신하는 경우 자동호출을 발신하도록 하여, 응급센터는 신속하게 출동하여 사용자에 대한 응급조치가 가능하다.
또한, 관리자 및 보호자는 이상 발생 신호를 수신하여 조치하거나, 유무선 전화를 통해 독거 노인 등의 사용자의 안전 여부를 체크할 수 있다.
한편, 데이터베이스(140)는 상기 사용자의 스켈레톤 정보와 상기 사용자의 연령대별 데이터를 저장하여 상기 중앙 서버(120)의 행동 패턴 학습부(121)가 사용자의 행동 패턴을 학습할 수 있도록 함으로써, 빅데이터 딥러닝을 통하여 보다 정확도 높은 데이터 분석 및 학습이 가능하도록 할 수 있다.
또한, 웹 서버(150)는 상기 사용자의 스켈레톤 정보를 이용해 구성된 아바타 정보 및 상기 사용자의 상태 정보를 제공하여, 관리자가 사용자의 상태를 매우 용이하게 직관적으로 제공받을 수 있다.
도 4는 본 발명의 일실시예에 따른 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법을 설명하기 위한 도면이고, 도 5는 본 발명의 일실시예에 따른 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법을 설명하기 위한 흐름도이다.
또한, 도 6은 본 발명의 일실시예에 따른 모니터링 장치의 스켈레톤(skeleton) 정보의 처리 방법을 설명하기 위한 도면이고, 도 7 및 도 8은 본 발명의 일실시예에 따른 어플리케이션을 이용한 사용자의 상태 정보 제공 방법을 설명하기 위한 도면이다.
이후부터는 도 4 내지 도 8을 참조하여 본 발명의 일실시예에 따른 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법을 설명하기로 한다.
도 4를 참조하면, 먼저 집안 내부의 거실과 방 등에 각각 설치된 모니터링 장치(110)가 독거 노인 등에 해당하는 사용자를 감지하여 3D 카메라를 통해 사용자를 촬영한다(S510).
이후, 상기 모니터링 장치(110)는 촬영된 상기 사용자의 정보를 뼈대화한 정보인 스켈레톤(skeleton) 정보로 변환하여 네트워크(101)를 통해 전송한다(S520). 이와 같이 사용자의 정보를 스켈레톤 정보로 변환하여 전송하면, 전송 데이터의 양을 대폭 줄여 통신비를 줄일 수 있을 뿐만 아니라 스켈레톤 정보만을 제공하므로 사용자에 대한 개인 사생활 보호가 가능한 장점이 있다.
이때, 도 6에 도시된 바와 같이 보다 정확도 높고 효율적인 스켈레톤 정보의 생성을 위하여 상기 모니터링 장치(110)가 상기 촬영된 영상을 상기 사용자의 발목, 무릎, 엉덩이, 손목, 팔꿈치, 어깨, 턱 또는 이마의 정보를 포함하는 스켈레톤 정보로 변환하여 전송하도록 구성될 수 있다.
중앙 서버(120)는 이와 같이 변환되어 전송된 스켈레톤 정보를 수신 및 분석한다(S530).
보다 구체적으로, 상기 중앙 서버(120)는 데이터베이스(140)에 기 저장된 사용자의 스켈레톤 정보와 상기 사용자의 연령대별 데이터에 기초하여 상기 사용자의 행동 패턴을 학습하고, 이와 같이 학습된 정보에 기초하여 상기 스켈레톤 정보를 분석할 수 있다.
따라서, 본 발명의 일실시예에 따르면 사용자의 스켈레톤 정보와 연령대별 데이터를 이용한 빅데이터 딥러닝을 통하여 보다 정확도 높은 데이터 분석 및 학습이 가능하다.
상기 중앙 서버(120)는 이와 같은 분석 결과, 사용자에게 이상이 발생한 것으로 판단하면(S540), 이상 발생 신호를 전송하여(S550), 응급센터 자동호출 시스템이 응급센터로 자동호출을 발신하도록 할 수 있다(S560).
따라서, 응급센터는 신속하게 출동하여 사용자에 대한 응급조치가 가능하며, 관리자 및 보호자는 이에 대하여 통보 받아 조치하거나 유무선 전화를 통해 사용자의 안전 여부를 체크할 수 있다.
그뿐만 아니라, 본 발명의 일실시예에 따르면 웹 서버가 상기 사용자의 스켈레톤 정보를 이용해 구성된 아바타 정보 및 상기 사용자의 상태 정보를 제공하며, 관리자 및 보호자는 웹(web)을 통해 상기 아바타 정보를 포함하는 상기 사용자의 상태 정보를 제공받거나, 휴대 단말에 설치된 어플리케이션을 통해 상기 아바타 정보를 포함하는 상기 사용자의 상태 정보를 제공받을 수 있다.
도 7 및 도 8을 참조하면, 관리자 및 보호자는 휴대 단말을 통해 어플리케이션을 다운로드 한 후, 회원 가입 및 로그인하여, 사용자인 독거 노인의 동작 및 현 상태를 아바타의 형태로 제공받을 수 있으며, 활동량 등의 다양한 데이터를 확인하여 사용자의 과거와 현재의 상태 등의 다양한 정보를 제공받을 수 있다.
그뿐만 아니라, 본 발명의 일실시예에 따르면 사용자는 모니터링 장치(110)를 통해 날씨 정보를 포함하는 생활 필수정보를 제공받을 수 있도록 하여, 사용자의 이상 발생 감지 뿐만 아니라, 사용자의 일상 생활에서의 편의를 제공할 수 있다.
전술한 바와 같은 본 발명의 상세한 설명에서는 구체적인 실시예에 관해 설명하였다. 그러나 본 발명의 범주에서 벗어나지 않는 한도 내에서는 여러 가지 변형이 가능하다. 본 발명의 기술적 사상은 본 발명의 전술한 실시예에 국한되어 정해져서는 안 되며, 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
101: 네트워크
110: 모니터링 장치
111: 3D 카메라
112: 적외서 카메라 센서
113: 센서부
114: 디스플레이
115: 전원부
116: 마이크
117: 스피커
118: 통신부
119: 정보처리 제어부
120: 중앙 서버
121: 행동패턴 학습부
122: 이상 발생 판단부
123: 위험 경보부
124: 생활 필수정보 제공부
130: 응급센터 자동호출 시스템
140: 데이터베이스
150: 웹 서버

Claims (3)

  1. 모니터링 장치가 사용자를 감지하여 카메라를 통해 촬영된 상기 사용자의 정보를 뼈대화한 정보인 스켈레톤(skeleton) 정보로 변환하여 전송하는 제1 단계;
    중앙 서버가 상기 스켈레톤 정보를 수신 및 분석하여 상기 사용자에게 이상이 발생한 것으로 판단하면 이상 발생 신호를 전송하는 제2 단계; 및
    응급센터 자동호출 시스템이 상기 이상 발생 신호를 수신하면 응급센터로 자동호출을 발신하는 제3 단계;
    를 포함하는 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법.
  2. 청구항 1에 있어서,
    상기 제1 단계는,
    상기 모니터링 장치가 상기 촬영된 영상을 상기 사용자의 발목, 무릎, 엉덩이, 손목, 팔꿈치, 어깨, 턱 또는 이마의 정보를 포함하는 스켈레톤 정보로 변환하여 전송하는 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법.
  3. 청구항 1에 있어서,
    상기 제1 단계 이후에,
    데이터베이스가 상기 사용자의 스켈레톤 정보와 상기 사용자의 연령대별 데이터를 저장하는 단계; 또는 웹 서버가 상기 사용자의 스켈레톤 정보를 이용해 구성된 아바타 정보 및 상기 사용자의 상태 정보를 제공하는 단계;를 더 포함하며,
    상기 제2 단계는,
    상기 중앙 서버가 상기 사용자의 스켈레톤 정보와 상기 사용자의 연령대별 데이터에 기초하여 상기 사용자의 행동 패턴을 학습하는 단계;
    상기 중앙 서버가 상기 행동 패턴 학습부에서 학습된 상기 사용자의 행동 패턴에 의해 상기 사용자의 이상 발생 여부를 판단 단계; 및
    상기 중앙 서버가 상기 사용자에게 이상이 발생한 것으로 판단하면 이상 발생 신호를 발생시키는 단계;
    를 더 포함하는 스켈레톤 영상정보 변환방법을 이용한 행동 인지 모니터링 방법.
KR1020180144597A 2018-11-21 2018-11-21 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 방법 KR20200059628A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180144597A KR20200059628A (ko) 2018-11-21 2018-11-21 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180144597A KR20200059628A (ko) 2018-11-21 2018-11-21 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 방법

Publications (1)

Publication Number Publication Date
KR20200059628A true KR20200059628A (ko) 2020-05-29

Family

ID=70911807

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180144597A KR20200059628A (ko) 2018-11-21 2018-11-21 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 방법

Country Status (1)

Country Link
KR (1) KR20200059628A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220126934A (ko) * 2021-03-10 2022-09-19 주식회사 넥스트도어 Ai 기반의 모니터링 시스템 및 그의 동작 방법
KR102527771B1 (ko) * 2022-11-11 2023-05-02 주식회사 인텔리빅스 Tof 카메라와 디지털 트윈기술을 이용한 독거노인 행동관찰 및 이상행위 모니터링 시스템 및 방법
WO2024075919A1 (ko) * 2022-10-05 2024-04-11 장민석 Iot 카메라 기반의 스마트홈 응급처리 장치

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220126934A (ko) * 2021-03-10 2022-09-19 주식회사 넥스트도어 Ai 기반의 모니터링 시스템 및 그의 동작 방법
WO2024075919A1 (ko) * 2022-10-05 2024-04-11 장민석 Iot 카메라 기반의 스마트홈 응급처리 장치
KR102527771B1 (ko) * 2022-11-11 2023-05-02 주식회사 인텔리빅스 Tof 카메라와 디지털 트윈기술을 이용한 독거노인 행동관찰 및 이상행위 모니터링 시스템 및 방법

Similar Documents

Publication Publication Date Title
KR102013235B1 (ko) 독거노인 모니터링 시스템
US11037300B2 (en) Monitoring system
KR101654609B1 (ko) 거동이 불편한 자, 장애인 및 독거노인을 위한 원격 스마트 모니터링 시스템 및 그 방법
CN108734055B (zh) 一种异常人员检测方法、装置及系统
KR101990803B1 (ko) IoT를 이용한 취약계층 보호관리 시스템
WO2019036400A1 (en) SYSTEM, DEVICE AND METHOD FOR INTEGRATION OF ALERT AND RESPONSE
CN106599802B (zh) 一种基于云技术的智能楼道监控系统
KR20200059628A (ko) 스켈레톤 영상 학습 기반의 독거노인 행동 패턴 모니터링 방법
KR102231183B1 (ko) IoT 망을 이용한 독거인 생활 패턴 학습 및 모니터링 시스템
KR20160074208A (ko) 비콘신호를 이용한 안전 서비스 제공 시스템 및 방법
US10834363B1 (en) Multi-channel sensing system with embedded processing
KR20160101508A (ko) 독거노인 위급상황 관리시스템
KR102382517B1 (ko) 빅데이터 기반의 행동패턴 분석을 이용한 독거 생활 케어시스템
Makhlouf et al. Multimodal system for fall detection and location of person in an intelligent habitat
KR20150144205A (ko) 활동량 데이터를 이용한 장애인 스마트 케어 시스템 및 그 방법
KR102638693B1 (ko) 위치 기반 생체정보 모니터링 시스템 및 방법
KR101997225B1 (ko) 노약자 안심케어 시스템
KR20140120468A (ko) 원격 효대행 서비스 제공시스템
KR102540146B1 (ko) 격리대상자 관리 시스템
KR102407150B1 (ko) 지능형 응급상황 알람 서비스 시스템 및 방법
KR102558653B1 (ko) 스마트 케어 응급 안전 알림 시스템 및 이의 실행 방법
Bej et al. A cost-effective alertness-rating tool to enable situational awareness among on-duty static security guards in Covid-19 pandemic
US11100785B1 (en) Method for requesting assistance from emergency services
KR20230030822A (ko) 노약자 케어를 위한 긴급 알림 호출시스템
KR102465978B1 (ko) 독거노인 케어시스템에서 음성인식 오류에 따른 신고오류 방지장치 및 방법