KR100995885B1 - 눈글인식 응급구난 시스템 및 방법 - Google Patents

눈글인식 응급구난 시스템 및 방법 Download PDF

Info

Publication number
KR100995885B1
KR100995885B1 KR1020080114077A KR20080114077A KR100995885B1 KR 100995885 B1 KR100995885 B1 KR 100995885B1 KR 1020080114077 A KR1020080114077 A KR 1020080114077A KR 20080114077 A KR20080114077 A KR 20080114077A KR 100995885 B1 KR100995885 B1 KR 100995885B1
Authority
KR
South Korea
Prior art keywords
rescue
eye recognition
eye
message
module
Prior art date
Application number
KR1020080114077A
Other languages
English (en)
Other versions
KR20100055139A (ko
Inventor
전병훈
Original Assignee
휴잇테크놀러지스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 휴잇테크놀러지스 주식회사 filed Critical 휴잇테크놀러지스 주식회사
Priority to KR1020080114077A priority Critical patent/KR100995885B1/ko
Priority to EP09826247.0A priority patent/EP2360653A4/en
Priority to PCT/KR2009/006493 priority patent/WO2010056015A2/ko
Priority to US13/129,177 priority patent/US20110227741A1/en
Priority to CN2009801466097A priority patent/CN102216964A/zh
Publication of KR20100055139A publication Critical patent/KR20100055139A/ko
Application granted granted Critical
Publication of KR100995885B1 publication Critical patent/KR100995885B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/10—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles actuating a signalling device
    • B60R25/102—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles actuating a signalling device a signal being sent to a remote location, e.g. a radio signal being transmitted to a police station, a security company or the owner
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016—Operational features thereof
    • A61B3/0066—Operational features thereof with identification means for the apparatus
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/02—Subjective types, i.e. testing apparatus requiring the active assistance of the patient
    • A61B3/028—Subjective types, i.e. testing apparatus requiring the active assistance of the patient for testing visual acuity; for determination of refraction, e.g. phoropters
    • A61B3/032—Devices for presenting test symbols or characters, e.g. test chart projectors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/016—Personal emergency signalling and security systems

Abstract

유무선 네트워크를 통하여 상호 연결되는 눈글인식 클라이언트와 눈글인식 서버를 구비하며, 상기 눈글인식 클라이언트는 보호대상자의 눈동자 구성요소에 기초하여 감지된 시선 변화를 이용하여 가상의 평면에 표시되는 패턴의 조합으로 구성되는 제 1 신호와 상기 보호대상자의 눈꺼풀 깜빡임의 인위적 변화에 의한 제 2 신호를 조합한 구난 신호를 기반으로 기저장된 메시지 변환 데이터베이스를 참조하여 구난 메시지를 작성하여 상기 유무선 네트워크를 통하여 상기 눈글인식 서버에 전송하고, 상기 눈글인식 서버는 상기 전송된 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스로부터 상기 위난 상황에 대응하는 구난정보를 검색하고 이에 기초하여 응급구난조치를 시스템적으로 수행하거나 응급구난 요청을 관련 기관의 서버에 통보하는 눈글인식 응급구난 시스템이 개시된다.
응급, 운전자, 눈동자, 시선추적, 구난, 위난

Description

눈글인식 응급구난 시스템 및 방법{System and Method of notifying in-vehicle emergency based on eye writing recognition}
본 발명은 눈글인식 응급구난 시스템에 관한 것으로, 특히 보호대상자의 눈동자 구성요소에 기초하여 감지된 시선 변화를 이용하여 구난 메시지를 작성하여 응급구난 서버에 전송함으로써 안전한 응급구난요청 및 그에 따른 자동원격감시와 신속한 응급구난서비스를 제공할 수 있는 눈글인식 응급구난 시스템에 관련한다.
일반적으로 눈의 동공, 홍채의 움직임을 이용한 시선추적은 자동차 부문에서 전방주시 감시, 인터넷상에서 검색자의 시선 확인을 통한 광고효과 파악 등과 같은 수동적 시선추적(Passive eye monitoring)과, 시선 마우스(Eye mouse)나 장애자를 위한 글쓰기 등과 같은 능동적 시선추적(Active eye monitoring)과 같은 다양한 분야에서 활용되고 있다.
이러한 시선추적 기술을 위난 상황에 처하여 눈의 동작 이외에는 모든 행위의 가능성이 배제된 경우에 응급구난요청 수단으로서 활용할 수 있다면 응급구난 분야에서 유용하게 이용될 수 있을 것이다. 특히, 차량 내에서 신체적 위협자의 감시로 인하여 전화는 물론 응급버튼도 작동할 수 없는 급박한 상황에서는 능동적 시선추적을 기반으로 한 응급구난 신호작성 및 메시지 체계로의 변환과 유무선통신을 통하여 원격지 응급구난센터에 은밀히 응급구난요청을 할 수 있다.
따라서, 본 발명의 목적은 보호대상자가 눈 동작 이외에 다른 모든 동작을 수행할 수 없는 위급 상황에서 유무선통신을 통하여 원격지에 응급구난 요청을 수행하여 응급구난을 받을 수 있는 눈글인식 응급구난 시스템을 제공하는 것이다.
상기의 목적은, 유무선 네트워크를 통하여 상호 연결되는 눈글인식 클라이언트와 눈글인식 서버를 구비하며, 상기 눈글인식 클라이언트는 보호대상자의 눈동자 구성요소에 기초하여 감지된 시선 변화를 이용하여 가상의 평면에 표시되는 패턴의 조합으로 구성되는 제 1 신호와 상기 보호대상자의 눈꺼풀 깜빡임의 인위적 변화에 의한 제 2 신호를 조합한 구난 신호를 기반으로 기저장된 메시지 변환 데이터베이스를 참조하여 구난 메시지를 작성하여 상기 유무선 네트워크를 통하여 상기 눈글인식 서버에 전송하고, 상기 눈글인식 서버는 상기 전송된 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스로부터 상기 위난 상황에 대응하는 구난정보를 검색하고 이에 기초하여 응급구난조치를 시스템적으로 수행하거나 응급구난 요청을 관련 기관의 서버에 통보하는 눈글인식 응급구난 시스템에 의해 달성된다.
바람직하게, 상기 눈글인식 클라이언트는 자신의 위치정보 또는 식별정보를 상기 구난 메시지와 함께 상기 눈글인식 서버에 전송한다.
상기의 목적은, 유무선 네트워크를 통하여 상호 연결되는 눈글인식 클라이언트와 눈글인식 서버를 구비한 응급구난 시스템에 적용되며, 상기 눈글인식 클라이언트가 감시 카메라를 통하여 보호대상자의 눈동자 구성요소를 기반으로 시선의 변화와 함께 눈꺼풀 깜빡임의 인위적 변화를 감시하는 단계; 상기 눈글인식 클라이언트가 상기 시선의 변화 또는 깜박임 횟수의 결합에 의해 상기 보호대상자가 의사전달을 하고자 한다거나 응급구난 요청이 있는 것으로 인식한 경우, 상기 보호대상자의 시선의 변화를 이용하여 가상의 2차원이나 3차원 평면상에 표시되는 패턴으로 구성되는 제 1 신호와 상기 눈 깜박임의 인위적 변화에 의한 보조 신호를 조합하여 구난 신호를 작성하고, 메시지 변환 데이터베이스를 참조하여 구난 메시지로 변환하는 단계; 상기 눈글인식 클라이언트가 상기 변환한 구난 메시지와 실시간 위치정보를 유무선 네트워크을 통하여 상기 눈글인식 서버에 전송하는 단계; 상기 눈글인식 서버가 상기 전송된 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스로부터 해당 위난 상황에 대응하는 구난정보를 검색하는 단계; 상기 눈글인식 서버가 상기 전송된 식별정보에 기초하여 고객정보 데이터베이스로부터 위난이 발생한 눈글인식 클라이언트를 식별하고, 전송된 위치정보에 기초하여 공간정보 데이터베이스로부터 상기 눈글인식 클라이언트의 지리적 위치를 실시간으로 추적하는 단계; 상기 눈글인식 서버가 식별정보에 기초하여 해당 눈글인식 클라이언트가 서비스 가입자인 경우 상기 검색된 구난정보와 검출된 지리적 위치에 기초하여 응급구난조치를 시스템적으로 수행하고, 서비스 가입자가 아닌 경우에도, 사전에 설정된 관련 기관 서버에 응급구난 요청정보를 전송하는 단계를 포함하는 눈 글인식 응급구난 방법에 의해 달성된다.
이러한 구성에 의하면, 칼이나 총포류와 같은 치명적 흉기를 이용한 신체적 위협에 노출되기 쉬운 일상생활에서 음성에 의한 구난요청은 물론 사람의 미세한 동작조차도 감시되는 불가항력적 위급한 상황에서 위협자에게 노출되지 않고 응급구난요청을 할 수 있다는 이점이 있다.
이하, 첨부된 도면을 참조하여 본 발명의 실시 예를 구체적으로 설명한다.
도 1은 본 발명의 눈글인식 응급구난 시스템을 나타내는 네트워크 구성도이다.
본 발명에서 설명하는 눈글인식(eye writing recognition)은 눈동자의 구성요소, 가령 동공, 홍채, 눈꺼풀, 안구 등을 기초로 측정되는 시선의 변화, 가령 각도, 방향, 또는 움직임을 이용하여 가상의 2차원이나 3차원 평면상에 표시되는 선, 호, 및 원의 조합으로 구성되는 주 신호(문자, 텍스트, 기호, 부호, 또는 도형)와 눈 깜박임의 인위적 변화(횟수, 시간, 또는 감김 정도)에 의한 보조 신호를 조합하여 모든 의사전달 내용을 포함하는 구난 신호를 작성하는 것을 의미한다.
도시된 바와 같이, 차량에 설치되거나 편의점이나 은행창구 등의 시설물에 설치되는 눈글인식 클라이언트(100, 200)는 유무선 네트워크(310, 320)를 통하여 눈글인식 서버(400)에 연결되어 양방향으로 상호 통신한다. 따라서, 눈글인식 서버(400)는 다수의 눈글인식 클라이언트(100, 200)에 대응하여 관제센터로서 기능한다.
여기서, 유선 네트워크는 통상의 유선 인터넷을 포함하고, 무선 네트워크는 휴대 인터넷망, 이동통신망 또는 근거리 무선데이터 통신망을 모두 포함한다.
본 발명의 특징에 따르면, 눈글인식 클라이언트(100, 200)는 보호대상자, 가령 차량의 운전자나 은행창구의 직원의 눈동자 구성요소에 기초하여 감지된 시선 변화를 이용하여 가상의 평면에 표시되는 패턴의 조합으로 구성되는 제 1 신호와 보호대상자의 눈꺼풀 깜빡임의 인위적 변화에 의한 제 2 신호를 조합한 구난 신호를 기반으로 기저장된 메시지 변환 데이터베이스를 참조하여 구난 메시지를 작성하여 식별정보와 함께 유무선 네트워크(300, 310)를 통하여 눈글인식 서버(400)에 전송한다. 여기서, 눈글인식 클라이언트(100, 200)로부터 전송되는 구난 메시지에는 보호대상자의 영상정보가 포함될 수 있다.
본 발명의 다른 특징에 의하면, 눈글인식 클라이언트(100, 200)는 가상의 공간 디스플레이에 응급구난신호 테이블을 제공하고, 보호대상자의 눈동자 시선의 방향전환과 눈 깜박임에 의해 응급구난신호 테이블로부터 선택된 정보를 구난 메시지로 변환하여 유무선 네트워크(310, 320)를 통하여 눈글인식 서버(400)에 전송한다. 다시 말해, 눈글인식 클라이언트(100, 200)는 보호대상자가 제공된 응급구난신호 테이블에서 시선의 방향전환과 눈 깜빡임을 이용하여 응급구난 요청 메시지를 작성하면, 메시지 변환 데이터베이스를 참조하여 구난 메시지로 변환한다.
또한, 눈글인식 서버(400)는 전송된 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스로부터 위난 상황에 대응하는 구난정보를 검색하고 이에 기초하여 응급구난조치를 시스템적으로 수행하거나 응급구난 요청을 관련 기관의 서버에 통보한다. 바람직하게, 눈글인식 서버(400)는 구난 메시지 수신 후, 신속하게 상황을 파악하고 추가적으로 안전조치를 취하기 위해 양방향 실시간 응급비밀통신을 통하여 원격영상 감시를 개시하고 눈글인식 클라이언트(100, 200)에 상황조치 방법을 제공할 수 있다.
이러한 구성에 의하면, 칼이나 총포류와 같은 치명적 흉기를 이용한 신체적 위협에 노출되기 쉬운 일상생활에 있어서 음성에 의한 구난요청은 물론 사람의 미세한 동작조차도 감시되는 불가항력의 위급한 상황에서 위협자에게 노출되지 않고 응급구난 요청을 할 수 있도록 할 수 있다.
본 발명의 응급구난 시스템은 다양한 분야에 적용할 수 있다. 가령, 자동차, 특히 택시, 현금수송차량 등을 비롯한 운송수단의 동승자(옆좌석 또는 뒷자석)의 무기를 이용한 위협, 납치, 강도 등과 같은 위난 상황에서 운전자의 안전보호를 위해 적용된다.
또한, 은행, 상점, 건물 등에서 신체적 위협에 의한 강제적 안전 보안시설 해제 및 강도나 절도 범죄 시도의 통보, 차량탑승 범죄수배자의 안전한 신고, 기타 위난구조요청 비상 통신수단, 자동차 운전 중에 SMS 등 긴급메시지 작성 및 전송, 자동차 운전 중에 차량 장착 기기(텔레매틱스, 전자기기장치)에 대한 명령 및 조작 등에 적용될 수 있다.
도 2는 본 발명에 적용되는 눈글인식 클라이언트(100, 200)의 기능적 구성을 나타낸다.
눈글 감시모듈(120)은 보호대상자의 눈동자 구성요소에 기초한 시선 변화와 눈꺼풀 깜빡임의 인위적 변화를 감시하는 기능을 수행한다. 구체적으로, 차량 내부의 운전자 또는 특정 장소, 예컨대 은행창구의 직원과 같은 보호대상자의 눈동자에 초점을 맞추어 주야간으로 감시할 수 있는 주야간 감시카메라를 포함한다. 여기서, 바람직하게 주야간 감시 카메라는 원격지 서버에 의해 팬이나 틸트 또는 줌이 가능하다.
이때, 보호대상자에 의한 의사전달이나 응급구난 요청에 대한 인식은 일정시간 내에 시선의 변화 또는 깜박임 횟수의 결합에 의해 개시될 수 있다.
눈글 작성기모듈(130)은 눈동자의 구성요소, 가령 동공, 홍채, 눈꺼풀, 안구 등을 기초로 측정되는 시선의 변화, 가령 각도, 방향, 또는 움직임을 이용하여 가상의 2차원이나 3차원 평면상에 표시되는 선, 호, 및 원의 조합으로 구성되는 주 신호(문자, 텍스트, 기호, 부호, 또는 도형)와 눈 깜박임의 인위적 변화(횟수, 시간, 또는 감김 정도)에 의한 보조 신호를 조합하여 모든 의사전달 내용을 포함하는 구난 신호를 작성한다.
다시 말해, 눈글 작성기모듈(130)은 보호대상자가 전달하고자 하는 메시지를 작성 또는 응급구난 신호를 작성해주는 저작도구의 역할을 하며, 공간상에 투영되는 가상의 디스플레이에 시선의 변화로 그려지는 문자, 텍스트, 기호, 부호, 또는 도형을 해당 문자와 맵핑(Mapping) 또는 조합하여 표시한다.
또한, 눈글 작성기모듈(130)은 눈 깜빡임(blink)을 보조기능 키로 이용하여, 가령 주 신호의 작성 도중에 수정, 완성, 또는 기타 작업을 위해 사용할 수 있는데, 가령 일정시간 내의 복수의 연속적인 눈 깜박임 키의 변화를 이용할 수 있다. 즉, 이전에 작성된 문자의 수정을 위해서 “Blink + Blink + 방향키 + Blink”와 같은 방식이 사용될 수 있다. 이때 방향키는 눈의 시선이 상하좌우 어느 한 방향으로 움직이면서 만드는 직선을 의미한다. 또한, 눈글 작성기모듈(130)은 보호대상자의 신속하고도 편리한 작업을 위하여 자주 또는 긴급하게 사용되는 응급구호 신호테이블을 공간 디스플레이에 투영시키는 작업에 눈 깜빡임 키를 사용될 수 있으며, 투영된 응급구호 신호테이블은 시선의 전후좌우 방향키와 눈 깜박임 키를 이용하여 선택할 수 있다. 그 밖의 보조 키로서 일정시간 동안 특정부분에 시선의 초점(Fixation)을 고정하는 것으로서 초점 키를 이용할 수 있다.
눈글 메시지변환모듈(140)은 눈글 작성기모듈(130)에서 작성된 구난 신호를 메시지 변환 데이터베이스(180)를 참조하여 구난 메시지로 변환한다. 여기서, 구난 메시지는 구난 신호에 대응하는 디지털 문자나 텍스트를 의미한다.
공간 디스플레이모듈(150)은 눈글 작성기모듈(130)과 상호작용하여 보호대상자의 응급구난 요청 메시지 및 신호 작성 사실을 위협자에게 발각되지 않도록 물리적 디스플레이가 아닌 공간상에 투영시켜 표시하는 디스플레이 기능을 가지며, 외부로부터 수신되는 메시지도 표시될 수 있다. 바람직하게, 공간 디스플레이모듈(150)은 일정 시야각 범위 밖에서 표시된 내용이 보이지 않도록 시야각이 제어된 디스플레이를 구비할 수 있다.
GPS 모듈(160)은 눈글인식 클라이언트(100, 200)의 현재 위치에 관련된 정보를 GPS 위성으로부터 수신받아 작성된 구난 신호에 대응하는 구난 메시지와 함께 눈글인식 서버(400)에 전송한다. 여기서, 눈글인식 클라이언트가 일정한 위치에 고정된 시설물에 설치된 경우에는 GPS 모듈(160)은 필요하지 않으며, 후술하는 바와 같이, 눈글인식 클라이언트의 식별정보만 전송하면 된다.
유무선 통신모듈(170)은 보호대상자의 구난 메시지를 눈글인식 서버(400)에 전송하고, 눈글인식 서버(400)로부터 응급조치 정보를 수신하는 양방향 통신모듈이다. 여기서, 무선통신모듈은 와이브로(일명 Mobile WiMax), HSDPA/HSUPA, GPRS, TETRA, 또는 기타 네트워크를 이용한 휴대인터넷 통신기능과, WCDMA, CDMA/GSM, TD-SCDMA, UMB, LTE, 기타의 네트워크 형태를 갖는 이동통신망 통신기능과, 와이파이(WiFi), DSRC, 블루투스, 기타 근거리 무선데이터 통신기능을 갖는 모든 유무선 통신 모듈을 의미한다.
제어모듈(110)은 각 모듈들(120, 130, 140, 150, 160, 170)을 제어하고, 메시지 변환 데이터베이스(180)의 입출력을 제어하고 관리하는 기능을 갖는다.
메시지 변환 데이터베이스(180)는 눈글 작성기모듈(130)에서 작성된 주 신호와 보조신호인 눈 깜박임 키의 조합, 또는 응급구호신호 테이블로부터 보호대상자가 선택하여 작성한 응급구난 요청을 응급구난 메시지로 변환할 수 있도록 사전 정의된 대응해석 데이터베이스이다.
도 3은 본 발명에 적용되는 눈글인식 서버(300)의 기능적 구성을 나타낸다.
응급구난 판단매니저(420)는 눈글인식 클라이언트(100, 200)로부터 전송된 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스(490)로부터 위난 상황에 대응하는 구난정보를 검색한다.
위치추적매니저(440)는 눈글인식 클라이언트(100, 200)로부터 전송된 위치정보에 기초하여 고객정보 데이터베이스(470)와 공간정보 데이터베이스(480)로부터 눈글인식 클라이언트(100, 200)의 위치정보를 검출한다.
응급구난 수행매니저(430)는 검색된 구난정보와 검출된 위치정보에 기초하여 응급구난조치를 시스템적으로 수행한다.
고객관리매니저(460)는 보호대상자, 즉 응급구난 요청자의 고객정보 및 눈글인식 클라이언트(100, 200)의 속성정보를 유지 관리하는 기능을 수행한다.
유무선 통신 매니저(450)는 눈글인식 클라이언트(100, 200)와의 양방향 실시간통신을 제어하고 관리하며, 외부 긴급구난센터 서버와 상시적인 통신을 감시한다.
중앙관제 매니저(410)는 각 매니저(420, 430, 440, 450, 460)의 동작과 각 데이터베이스(470, 480, 490)의 입출력을 제어한다. 여기서, 고객정보 데이터베이스(470)는 가입된 고객정보에 관련된 정보를 유지 관리하고, 공간정보 데이터베이스(480)는 실시간 위치추적을 위한 지리적 공간정보를 유지관리하며, 구난정보 데이터베이스(490)는 응급구난조치를 위한 각종 정보를 유지 관리한다.
이러한 구성을 갖는 눈글인식 응급구난 시스템의 동작에 대해 설명한다.
설명의 편의를 위해 눈글인식 클라이언트(100)는 차량에 설치되고, 운전자가 가해자에 의해 위협을 받고 있는 상황을 가정한다.
차량 내부에 설치된 눈글 감시모듈(120)은 감시 카메라를 통하여 운전자의 눈동자 구성요소, 가령 동공, 홍채, 눈꺼풀, 안구를 기반으로 시선의 변화, 가령 각도, 방향, 또는 움직임과 함께 눈꺼풀 깜빡임의 인위적 변화를 감시하는 기능을 수행한다.
이때, 일정시간 내에 시선의 변화 또는 깜박임 횟수의 결합에 의해 운전자가 의사전달을 하고자 한다거나 응급구난 요청이 있는 것으로 인식되며, 눈글 감시모듈(120)은 눈글 작성기모듈(130)의 구동을 제어모듈(110)에 요청하여 눈글 작성기모듈(130)을 구동한다.
눈글 작성기모듈(130)은 눈동자의 구성요소를 기초로 측정되는 시선의 변화를 이용하여 가상의 2차원이나 3차원 평면상에 표시되는 선, 호, 및 원의 조합으로 구성되는 문자, 텍스트, 기호, 부호, 또는 도형 등의 주 신호와 눈 깜박임의 인위적 변화, 즉 횟수, 시간, 또는 감김 정도에 의한 보조 신호를 조합하여 운전자의 의사전달 내용을 포함하는 구난 신호를 작성한다.
즉, 도 4를 참조하면, 눈글 작성기모듈(130)은 공간 디스플레이모듈(150)에 의해 공간상에 투영되는 가상의 디스플레이(10)에 운전자의 눈동자 구성요소에 기반하여 시선의 변화로 그려지는 문자, 텍스트, 기호, 부호, 또는 도형을 해당 문자와 맵핑(Mapping) 또는 조합하여 표시하고, 감시 카메라와 결합한 눈글 감시모듈(120)은 이를 인지한다.
눈글 메시지변환모듈(140)은 눈글 작성기모듈(130)에서 작성된 구난 신호를 메시지 변환 데이터베이스(180)를 참조하여 구난 메시지로 변환한다.
이와 함께, GPS 모듈(160)은 눈글인식 클라이언트(100, 200)의 현재 위치에 관련된 정보를 GPS 위성으로부터 실시간으로 수신받아 제어모듈(110)에 제공한다.
제어모듈(110)은 눈글 메시지변환모듈(140)이 변환한 구난 메시지와 GPS 모듈(160)이 제공하는 위치정보를 유무선 통신모듈(170)을 통하여 눈글인식 서버(400)에 전송한다. 이때, 제어모듈(110)은 위난이 발생한 눈글인식 클라이언트(100)의 식별정보도 함께 전송함으로써, 눈글인식 서버(400)가 위난이 발생한 눈글인식 클라이언트(100)를 식별할 수 있도록 한다.
눈글인식 서버(400)에서 응급구난 판단매니저(420)는 차량에 설치된 눈글인식 클라이언트(100, 200)로부터 전송된 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스(490)로부터 해당 위난 상황에 대응하는 구난정보를 검색한다.
이와 함께, 위치추적매니저(440)는 눈글인식 클라이언트(100)로부터 전송된 식별정보에 기초하여 고객정보 데이터베이스(470)로부터 위난이 발생한 눈글인식 클라이언트(100)를 식별하고, 전송된 위치정보에 기초하여 공간정보 데이터베이스(480)로부터 눈글인식 클라이언트(100)의 지리적 위치를 실시간으로 추적한다.
식별정보에 기초하여 해당 눈글인식 클라이언트(100)가 서비스 가입자인 경우 응급구난 수행매니저(430)는 검색된 구난정보와 검출된 지리적 위치에 기초하여 응급구난조치를 시스템적으로 수행한다. 가령, 자체적으로 운영하거나 연계된 응급구난 서비스업체의 서버에 응급구난 요청정보를 전송할 수 있다.
반면, 눈글인식 클라이언트(100)가 눈글인식 서버(400)에 등록된 가입자가 아니거나, 눈글인식 서버(400)로의 전송이 불가한 경우, 눈글인식 클라이언트(100)는 유무선 네트워크를 통하여 사전에 설정된 관련 기관, 가령 경찰서나 119센터 등의 응급구난요청 관련기관의 서버에 응급구난 요청정보를 직접 전송한다.
특히, 네트워크상의 문제가 있는 경우, 가령 근거리 무선데이터 통신망만이 사용가능한 경우에는, 고속도로 톨게이트에서 요금자동 징수를 위한 근거리 무선데이터 장치를 변경하여 구난요청을 자동으로 수신할 수 있도록 하는 것도 가능하다.
이상에서는 본 발명의 실시예를 중심으로 설명하였지만, 당업자의 수준에서 다양한 변경을 가할 수 있음은 물론이다. 따라서, 본 발명의 권리범위는 상기한 실시예에 한정되어 해석될 수 없으며, 이하에 기재되는 특허청구범위에 의해 해석되어야 한다.
도 1은 본 발명의 눈글인식 응급구난 시스템을 나타내는 네트워크 구성도이다.
도 2는 본 발명에 적용되는 눈글인식 클라이언트(100, 200)의 기능적 구성을 나타낸다.
도 3은 본 발명에 적용되는 눈글인식 서버(300)의 기능적 구성을 나타낸다.
도 4는 눈글 감지모듈에 의한 구난 신호의 인식을 나타낸다.

Claims (9)

  1. 유무선 네트워크를 통하여 상호 연결되는 눈글인식 클라이언트와 눈글인식 서버를 구비하며,
    상기 눈글인식 클라이언트는 보호대상자의 눈동자 구성요소에 기초하여 감지된 시선 변화 및 움직임을 이용하여 가상의 평면에 표시되는 패턴의 조합으로 구성되는 제 1 신호와 상기 보호대상자의 눈꺼풀 깜빡임의 인위적 변화에 의한 제 2 신호를 조합한 구난 신호를 기반으로 기저장된 메시지 변환 데이터베이스를 참조하여 구난 메시지를 작성하여 상기 유무선 네트워크를 통하여 상기 눈글인식 서버에 전송하고,
    상기 눈글인식 서버는 상기 전송된 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스로부터 상기 위난 상황에 대응하는 구난정보를 검색하고 이에 기초하여 응급구난조치를 시스템적으로 수행하거나 응급구난 요청을 관련 기관의 서버에 통보하는 것을 특징으로 하는 눈글인식 응급구난 시스템.
  2. 유무선 네트워크를 통하여 상호 연결되는 눈글인식 클라이언트와 눈글인식 서버를 구비하며,
    상기 눈글인식 클라이언트는 가상의 공간 디스플레이에 응급구난신호 테이블을 제공하고, 보호대상자의 눈동자 시선의 방향전환과 눈 깜박임에 의해 상기 응급구난신호 테이블로부터 선택된 정보를 기저장된 메시지 변환 데이터베이스를 참조 하여 구난 메시지로 변환하여 상기 유무선 네트워크를 통하여 상기 눈글인식 서버에 전송하고,
    상기 눈글인식 서버는 상기 전송된 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스로부터 상기 위난 상황에 대응하는 구난정보를 검색하고 이에 기초하여 응급구난조치를 시스템적으로 수행하거나 응급구난 요청을 관련 기관의 서버에 통보하는 것을 특징으로 하는 눈글인식 응급구난 시스템.
  3. 청구항 1 또는 2에 있어서,
    상기 눈글인식 클라이언트가 상기 눈글인식 서버에 등록된 가입자가 아니거나, 상기 눈글인식 서버로의 전송이 불가한 경우, 상기 눈글인식 클라이언트는 상기 유무선 네트워크를 통하여 응급구난요청 관련기관 서버에 직접 통보하는 것을 특징으로 하는 눈글인식 응급구난 시스템.
  4. 청구항 1 또는 2에 있어서,
    상기 눈글인식 클라이언트는 상기 구난 메시지에 상기 보호대상자의 영상정보를 포함하여 전송하는 것을 특징으로 하는 눈글인식 응급구난 시스템.
  5. 청구항 1에 있어서,
    상기 눈글인식 클라이언트는 자신의 위치정보 또는 식별정보를 상기 구난 메시지와 함께 상기 눈글인식 서버에 전송하는 것을 특징으로 하는 눈글인식 응급구 난 시스템.
  6. 유무선 네트워크를 통하여 상호 연결되는 눈글인식 클라이언트와 눈글인식 서버를 구비하며,
    상기 눈글인식 클라이언트는,
    보호대상자의 눈동자 구성요소에 기초한 시선 변화와 눈꺼풀 깜빡임의 인위적 변화를 감시하는 눈글 감시모듈;
    상기 눈글 감시모듈로부터 제공된 시선 변화에 의해 가상의 평면에 표시되는 패턴과 눈꺼풀 깜빡임의 인위적 변화의 조합에 의한 구난 신호를 작성하는 눈글 작성기모듈;
    상기 눈글 작성기모듈에서 작성된 구난 신호를 메시지 변환 데이터베이스를 참조하여 구난 메시지로 변환하는 눈글 메시지변환모듈; 및
    상기 모듈의 동작을 제어하고, 상기 변환된 구난 메시지를 상기 눈글인식 클라이언트의 식별정보와 함께 유무선 통신모듈을 통하여 상기 눈글인식 서버에 전송하는 제어모듈을 포함하며,
    상기 눈글인식 서버는,
    상기 눈글인식 클라이언트로부터 전송된 상기 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스로부터 상기 위난 상황에 대응하는 구난정보를 검색하는 응급구난 판단모듈;
    상기 식별정보에 기초하여 고객정보 데이터베이스로부터 상기 눈글인식 클라 이언트의 위치정보를 검출하는 위치추적모듈;
    상기 검색된 구난정보와 검출된 위치정보에 기초하여 응급구난조치를 시스템적으로 수행하는 응급구난 수행모듈; 및
    상기 모듈의 동작과 상기 데이터베이스의 입출력을 제어하는 중앙관제모듈을 포함하는 것을 특징으로 하는 눈글인식 응급구난 시스템.
  7. 청구항 6에 있어서,
    상기 눈글인식 클라이언트는 GPS 위성으로부터 위치정보를 실시간으로 수신하는 GPS 모듈을 추가로 포함하고,
    상기 제어모듈은 상기 GPS 모듈으로부터 제공된 실시간 위치정보를 상기 구난 메시지와 함께 상기 눈글인식 서버에 전송하며,
    상기 눈글인식 서버의 위치추적모듈은 상기 전송된 실시간 위치정보에 기초하여 공간정보 데이터베이스로부터 지리적 위치정보를 추출하는 것을 특징으로 하는 눈글인식 응급구난 시스템.
  8. 청구항 6에 있어서,
    상기 눈글인식 클라이언트는 상기 눈글 작성기모듈과 상호작용하여 상기 보호대상자가 작성한 응급구난 요청 메시지와 신호를 공간상에 투영시켜 표시하고 외부로부터 수신되는 메시지를 표시하는 공간 디스플레이모듈을 더 포함하며,
    상기 공간 디스플레이모듈은 일정 시야각 범위 밖에서 표시된 내용이 보이지 않도록 시야각이 제어된 디스플레이를 구비하는 것을 특징으로 하는 눈글인식 응급구난 시스템.
  9. 유무선 네트워크를 통하여 상호 연결되는 눈글인식 클라이언트와 눈글인식 서버를 구비한 응급구난 시스템에 적용되며,
    상기 눈글인식 클라이언트가 감시 카메라를 통하여 보호대상자의 눈동자 구성요소를 기반으로 시선의 변화와 함께 눈꺼풀 깜빡임의 인위적 변화를 감시하는 단계;
    상기 눈글인식 클라이언트가 상기 시선의 변화 또는 깜박임 횟수의 결합에 의해 상기 보호대상자가 의사전달을 하고자 한다거나 응급구난 요청이 있는 것으로 인식한 경우, 상기 보호대상자의 시선의 변화를 이용하여 가상의 2차원이나 3차원 평면상에 표시되는 패턴으로 구성되는 제 1 신호와 상기 눈 깜박임의 인위적 변화에 의한 보조 신호를 조합하여 구난 신호를 작성하고, 메시지 변환 데이터베이스를 참조하여 구난 메시지로 변환하는 단계;
    상기 눈글인식 클라이언트가 상기 변환한 구난 메시지와 실시간 위치정보를 유무선 네트워크을 통하여 상기 눈글인식 서버에 전송하는 단계;
    상기 눈글인식 서버가 상기 전송된 구난 메시지를 분석하여 위난 상황을 판단하고, 구난정보 데이터베이스로부터 해당 위난 상황에 대응하는 구난정보를 검색하는 단계;
    상기 눈글인식 서버가 상기 전송된 식별정보에 기초하여 고객정보 데이터베 이스로부터 위난이 발생한 눈글인식 클라이언트를 식별하고, 전송된 위치정보에 기초하여 공간정보 데이터베이스로부터 상기 눈글인식 클라이언트의 지리적 위치를 실시간으로 추적하는 단계;
    상기 눈글인식 서버가 식별정보에 기초하여 해당 눈글인식 클라이언트가 서비스 가입자인 경우 상기 검색된 구난정보와 검출된 지리적 위치에 기초하여 응급구난조치를 시스템적으로 수행하고, 서비스 가입자가 아닌 경우에도, 사전에 설정된 관련 기관 서버에 응급구난 요청정보를 전송하는 단계를 포함하는 것을 특징으로 하는 눈글인식 응급구난 방법.
KR1020080114077A 2008-11-17 2008-11-17 눈글인식 응급구난 시스템 및 방법 KR100995885B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020080114077A KR100995885B1 (ko) 2008-11-17 2008-11-17 눈글인식 응급구난 시스템 및 방법
EP09826247.0A EP2360653A4 (en) 2008-11-17 2009-11-05 EMERGENCY RESCUE SYSTEM USING OCULAR RECOGNITION AND CORRESPONDING METHOD
PCT/KR2009/006493 WO2010056015A2 (ko) 2008-11-17 2009-11-05 눈글인식 응급구난 시스템 및 방법
US13/129,177 US20110227741A1 (en) 2008-11-17 2009-11-05 Emergency rescue system triggered by eye expression recognition and method for same
CN2009801466097A CN102216964A (zh) 2008-11-17 2009-11-05 眼神识别紧急救援系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080114077A KR100995885B1 (ko) 2008-11-17 2008-11-17 눈글인식 응급구난 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20100055139A KR20100055139A (ko) 2010-05-26
KR100995885B1 true KR100995885B1 (ko) 2010-11-23

Family

ID=42170500

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080114077A KR100995885B1 (ko) 2008-11-17 2008-11-17 눈글인식 응급구난 시스템 및 방법

Country Status (5)

Country Link
US (1) US20110227741A1 (ko)
EP (1) EP2360653A4 (ko)
KR (1) KR100995885B1 (ko)
CN (1) CN102216964A (ko)
WO (1) WO2010056015A2 (ko)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110172550A1 (en) 2009-07-21 2011-07-14 Michael Scott Martin Uspa: systems and methods for ems device communication interface
KR101130746B1 (ko) * 2010-12-16 2012-03-28 한국전자통신연구원 홍채를 이용한 감시 시스템 및 방법
JP2015533248A (ja) * 2012-09-28 2015-11-19 ゾール メディカル コーポレイションＺＯＬＬ Ｍｅｄｉｃａｌ Ｃｏｒｐｏｒａｔｉｏｎ Ｅｍｓ環境内で三次元対話をモニタするためのシステム及び方法
KR101266814B1 (ko) * 2012-12-26 2013-05-22 김성빈 긴급구조 시스템
KR101634972B1 (ko) * 2014-02-20 2016-07-01 주식회사 보형 위급 상황 알림 시스템, 방법 및 컴퓨터 판독 가능한 기록 매체
CN103903388A (zh) * 2014-03-21 2014-07-02 佛山市天地行科技有限公司 一种汽车碰撞处理方法
CN105303155B (zh) * 2014-06-03 2019-11-15 虹膜识别系统公司 虹膜识别设备及其操作方法
CN106940766A (zh) * 2016-01-04 2017-07-11 由田新技股份有限公司 视线轨迹认证系统及方法
CN105931532A (zh) * 2016-06-16 2016-09-07 永州市金锐科技有限公司 智能车载驾培系统
KR20160147677A (ko) 2016-09-29 2016-12-23 한희상 시선 탐지에 의한 메시지 생성 장치 및 그에 의한 메시지 생성 방법
CN107066079A (zh) 2016-11-29 2017-08-18 阿里巴巴集团控股有限公司 基于虚拟现实场景的业务实现方法及装置
CN107122642A (zh) * 2017-03-15 2017-09-01 阿里巴巴集团控股有限公司 基于虚拟现实环境的身份认证方法及装置
JP6977492B2 (ja) * 2017-11-13 2021-12-08 トヨタ自動車株式会社 救援システムおよび救援方法、ならびにそれに使用されるサーバおよびプログラム
CN111652014A (zh) * 2019-03-15 2020-09-11 上海铼锶信息技术有限公司 一种眼神识别方法
US11295309B2 (en) * 2019-09-13 2022-04-05 International Business Machines Corporation Eye contact based financial transaction
CN112052779B (zh) * 2020-09-01 2024-01-16 深圳市研盛芯控电子技术有限公司 一种具备掌静脉识别与虹膜识别的门禁系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10138791A (ja) 1996-11-08 1998-05-26 Niles Parts Co Ltd 携帯電話使用時の危険状態警報装置
US20060072793A1 (en) 2004-10-05 2006-04-06 Honeywell International, Inc. Security alarm notification using iris detection systems
KR100646031B1 (ko) 2005-10-19 2006-11-14 에스케이 텔레콤주식회사 눈동자 움직임으로 입력을 제어하는 방법 및 이동통신단말기
US20060267781A1 (en) 2005-05-24 2006-11-30 Coulter Jeffery R Process and method for safer vehicle navigation through facial gesture recognition and operator condition monitoring

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5360971A (en) * 1992-03-31 1994-11-01 The Research Foundation State University Of New York Apparatus and method for eye tracking interface
JPH0749744A (ja) * 1993-08-04 1995-02-21 Pioneer Electron Corp 頭部搭載型表示入力装置
US6542081B2 (en) * 1996-08-19 2003-04-01 William C. Torch System and method for monitoring eye movement
US7044742B2 (en) * 2001-12-26 2006-05-16 Kabushikikaisha Equos Research Emergency reporting apparatus
US7561143B1 (en) * 2004-03-19 2009-07-14 The University of the Arts Using gaze actions to interact with a display
JP3828901B2 (ja) * 2004-05-11 2006-10-04 株式会社Ｉｈｃ 個人認証システム
KR100594117B1 (ko) * 2004-09-20 2006-06-28 삼성전자주식회사 Ｈｍｄ 정보 단말기에서 생체 신호를 이용하여 키를입력하는 장치 및 방법
US7385515B1 (en) * 2005-06-02 2008-06-10 Owen William K Surveillance detection system and methods for detecting surveillance of an individual
KR100859379B1 (ko) * 2006-07-05 2008-09-22 동서대학교산학협력단 언어장애자 의사소통 지원시스템
US20080238690A1 (en) * 2007-03-30 2008-10-02 International Business Machines Corporation Driver and registration identification for vehicle enablement
KR100778060B1 (ko) * 2007-06-01 2007-11-21 (주)텔릭스타 얼굴인식기술을 이용한 위난방지장치 및 이를 이용한위난방지장치 시스템

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10138791A (ja) 1996-11-08 1998-05-26 Niles Parts Co Ltd 携帯電話使用時の危険状態警報装置
US20060072793A1 (en) 2004-10-05 2006-04-06 Honeywell International, Inc. Security alarm notification using iris detection systems
US20060267781A1 (en) 2005-05-24 2006-11-30 Coulter Jeffery R Process and method for safer vehicle navigation through facial gesture recognition and operator condition monitoring
KR100646031B1 (ko) 2005-10-19 2006-11-14 에스케이 텔레콤주식회사 눈동자 움직임으로 입력을 제어하는 방법 및 이동통신단말기

Also Published As

Publication number Publication date
EP2360653A2 (en) 2011-08-24
WO2010056015A2 (ko) 2010-05-20
US20110227741A1 (en) 2011-09-22
KR20100055139A (ko) 2010-05-26
CN102216964A (zh) 2011-10-12
WO2010056015A3 (ko) 2010-08-05
EP2360653A4 (en) 2013-04-10

Similar Documents

Publication Publication Date Title
KR100995885B1 (ko) 눈글인식 응급구난 시스템 및 방법
US10922978B2 (en) Controlling autonomous vehicles to provide automated emergency response functions
US20220114894A1 (en) Tracking and analysis of drivers within a fleet of vehicles
US20220114846A1 (en) Safety for vehicle users
US11238722B2 (en) Methods and systems for providing online monitoring of released criminals by law enforcement
US10043373B2 (en) System for providing advance alerts
US8630820B2 (en) Methods and systems for threat assessment, safety management, and monitoring of individuals and groups
US20230388750A1 (en) Personal monitoring using a remote timer
US20140118140A1 (en) Methods and systems for requesting the aid of security volunteers using a security network
CA2829329A1 (en) System and apparatus for locating and surveillance of persons and/or surroundings
US20080036612A1 (en) System and Method for Tracking, Locating, and Identifying Known Sex Offenders
Mutiawani et al. Anti-theft vehicle monitoring and tracking android application using firebase as web service
WO2008120971A1 (en) Method of and apparatus for providing tracking information together with environmental information using a personal mobile device
Isong et al. Real-time Monitoring and Detection of Drink-driving and Vehicle Over-speeding
AU2015271971A1 (en) A vehicle driver monitoring method, arrangement, system, software and application
RU105776U1 (ru) Система дистанционного контроля местоположения и перемещения объекта на основе инфокоммуникационных и навигационных технологий
Rohit An IOT based system for public transport surveillance using real-time data analysis and computer vision
KR20200015291A (ko) 시계형 스마트 웨어러블 장치 및 이를 포함하는 모니터링 시스템
KR101104081B1 (ko) 보호자가 참여하는 안심 보호 시스템
KR20230056134A (ko) 운전자를 이중으로 보호하기 위한 방법 및 장치
KR102118453B1 (ko) 비활동 감지를 이용한 피보호자 관리 시스템 및 그 방법
Sahoo et al. Accident rescuing system for vehicles in road traffic: A smart phone application
Matthews New in-car computer technologies in police vehicles benefit not distraction
JP2021015320A (ja) 状態判定装置、車載機、運転評価システム、状態判定方法、及びプログラム
US20230116941A1 (en) System and a method for authenticating information during a police inquiry

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
N231 Notification of change of applicant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130822

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20141112

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20151116

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee