KR102225456B1 - 로드 메이트 시스템 및 로드 메이트 서비스 제공 방법 - Google Patents

Abstract

본 발명은 로드 메이트 시스템 및 로드 메이트 서비스 제공 방법에 관한 것이다. 본 발명은, 로드 메이트 제공 서버(300)가 시각 장애인 스마트 단말(100) 상에서 음성인식 기반으로 로드 메이트 앱이 실행되고, 로드 메이트 앱에 의해 자동으로 수행되는 블랙박스 기능 수행 이후, 시각 장애인 스마트 단말(100)의 터치스크린 상에 미리 설정된 동선녹화 영역(120) 터치에 따라 동선녹화 신호를 시각 장애인 스마트 단말(100)로부터 네트워크(200)를 통해 수신하는 제 1 단계; 및 로드 메이트 제공 서버(300)가 시각 장애인 스마트 단말(100)과 네트워크(200)를 통해 시각 장애인의 동선에 따른 영상을 수신하기 위한 데이터 세션을 연결하여 동선녹화에 대한 설정을 완료하는 제 2 단계; 를 포함할 수 있다.
이에 의해, 시각 장애인에 대한 길안내, 그리고 길안내 중의 영상 녹화, 주위의 상점에 대한 소개, 그리고 친구로 등록된 시각 장애인간의 약속 장소 공유 등의 서비스를 제공할 수 있는 효과가 있다.
뿐만 아니라, 위협이 되는 객체가 있는 경우, 시각장애인의 GPS 위치정보, 위협이 되는 객체가 인식된 영상 자료, 시각 장애인 스마트 단말의 단말식별번호를 응급구조자에게 전송함으로써, 시각 장애인에 대한 응급구조가 이루어질 수 있는 효과를 제공한다.

Description

로드 메이트 시스템 및 로드 메이트 서비스 제공 방법{ROAD MATE SYSTEM, AND ROAD MATE SERVICE PROVIDING METHOD}

본 발명은 로드 메이트 시스템 및 로드 메이트 서비스 제공 방법에 관한 것으로, 보다 구체적으로는, 시각 장애인에 대한 길안내, 그리고 길안내 중의 영상 녹화, 주위의 상점에 대한 소개, 그리고 친구로 등록된 시각 장애인간의 약속 장소 공유 등의 서비스를 제공하도록 하기 위한 로드 메이트 시스템 및 로드 메이트 서비스 제공 방법에 관한 것이다.

시각 장애인도 비장애인과 마찬가지로 예컨대, 교육, 종교, 여가, 쇼핑 등의 다양한 사회 활동에 참여할 수 있도록 선행되어야 할 것은 활동을 할 수 있는 장소 또는 시설에 안전하게 접근하는 것이다. 이에 시각 장애인이 보다 안전하게 주행할 수 있도록 하기 위한 기술개발이 요구되고 있다.

이를 위해 보도블록에 점자블록을 설치하거나 횡단보도에서 파란 신호시 안내 소리를 제공하는 것 정도의 단순 정보제공만으로는 점차 복잡해지는 도시의 보행환경에서 시각 장애인이 안전하고 자유롭게 이동하기로 어려운 일이기 때문에 언제 발생할지 모르는 사고의 위험에 노출되어 있다고 할 수 있다.

이에 따라 해당 기술분야에 있어서는 시각 장애인에 대한 길안내, 그리고 길안내 중의 영상 녹화, 주위의 상점에 대한 소개, 그리고 친구로 등록된 시각 장애인간의 약속 장소 공유 등의 다양한 서비스를 제공하기 위한 기술개발이 요구되고 있다.

대한민국 특허출원 출원번호 제10-2013-0149614(2013.12.04)호 "시각장애인용 길안내시스템을 위한 RFID 태그의 정보 저장 및 이의 송수신 방법(The method of saving data on RFID and transmitting-receiving the data for the navigation system to guide the blind)"

본 발명은 상기의 문제점을 해결하기 위한 것으로, 시각 장애인에 대한 길안내, 그리고 길안내 중의 영상 녹화, 주위의 상점에 대한 소개, 그리고 친구로 등록된 시각 장애인간의 약속 장소 공유 등의 서비스를 제공하도록 하기 위한 로드 메이트 시스템 및 로드 메이트 서비스 제공 방법을 제공하기 위한 것이다.

또한, 본 발명은 위협이 되는 객체가 있는 경우, 시각장애인의 GPS 위치정보, 위협이 되는 객체가 인식된 영상 자료, 시각 장애인 스마트 단말의 단말식별번호를 응급구조자에게 전송함으로써, 시각 장애인에 대한 응급구조가 이루어지도록 하기 위한 로드 메이트 시스템 및 로드 메이트 서비스 제공 방법을 제공하기 위한 것이다.

그러나 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.

상기의 목적을 달성하기 위해 본 발명의 실시예에 따른 로드 메이트 서비스 제공 방법은, 로드 메이트 제공 서버(300)가 시각 장애인 스마트 단말(100) 상에서 음성인식 기반으로 로드 메이트 앱이 실행되고, 로드 메이트 앱에 의해 자동으로 수행되는 블랙박스 기능 수행 이후, 시각 장애인 스마트 단말(100)의 터치스크린 상에 미리 설정된 동선녹화 영역(120) 터치에 따라 동선녹화 신호를 시각 장애인 스마트 단말(100)로부터 네트워크(200)를 통해 수신하는 제 1 단계; 및 로드 메이트 제공 서버(300)가 시각 장애인 스마트 단말(100)과 네트워크(200)를 통해 시각 장애인의 동선에 따른 영상을 수신하기 위한 데이터 세션을 연결하여 동선녹화에 대한 설정을 완료하는 제 2 단계; 를 포함하는 것을 특징으로 한다.

이때, 본 발명은, 상기 제 2 단계 이후, 로드 메이트 제공 서버(300)가 장애인 스마트 단말(100)의 몸체 일측에 형성되는 충격방지센서(130)를 통해 시각 장애인 스마트 단말(100)에 미리 설정된 임계치 이상의 충격이 감지 여부를 판단하는 제 3 단계; 를 더 포함하는 것을 특징으로 한다.

또한, 본 발명은, 상기 제 3 단계의 판단 결과 미리 설정된 임계치 이상의 충격이 감지된 경우, 로드 메이트 제공 서버(300)가 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로부터 충격치, 그리고 동선녹화 설정시에는 영상 자료, 시각 장애인 스마트 단말(100)의 GPS 수신모듈에 의해 획득된 GPS 위치정보를 동시에 수신한 뒤, 네트워크(200)를 통해 보호자 단말(500)로 전송하는 제 4 단계; 를 더 포함하는 것을 특징으로 한다.

또한, 상기 제 3 단계의 판단 결과 미리 설정된 임계치 이상의 충격이 감지되지 않는 경우, 로드 메이트 제공 서버(300)가 동선녹화 모드 수행에 따라 영상 자료를 실시간으로 수신 중에 영상인식기반으로 시각 장애인 스마트 단말(100)의 카메라 상에 위협이 되는 객체에 대한 인식이 수행여부를 판단하는 제 4 단계; 를 더 포함하는 것을 특징으로 한다.

또한, 상기 제 4 단계의 판단 결과 객체에 대한 인식이 수행되는 경우, 로드 메이트 제공 서버(300)가 네트워크(200)를 통해 GPS 위치정보, 위협이 되는 객체가 인식된 영상 자료, 시각 장애인 스마트 단말(100)의 단말식별번호를 네트워크(200)를 통해 위치기반의 응급구조단말(600)로 전송함으로써, 시각 장애인에 대한 응급 조치를 위할 수 있도록 할 수 있을 뿐만 아니라, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)과 응급구조단말(600)을 연결한 뒤, 응급구조단말(600)에서 응급구조자에 의해 음성입력되어 제공되는 음성정보를 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로 전송을 중계하여 치한 방지 기반을 제공하는 제 5 단계; 를 더 포함하는 것을 특징으로 한다.

상기의 목적을 달성하기 위해 본 발명의 실시예에 따른 로드 메이트 시스템은, 시각 장애인 스마트 단말(100); 및 시각 장애인 스마트 단말(100) 상에서 음성인식 기반으로 로드 메이트 앱이 실행되고, 로드 메이트 앱에 의해 자동으로 수행되는 블랙박스 기능 수행 이후, 시각 장애인 스마트 단말(100)의 터치스크린 상에 미리 설정된 동선녹화 영역(120) 터치에 따라 동선녹화 신호를 시각 장애인 스마트 단말(100)로부터 네트워크(200)를 통해 수신하며, 시각 장애인 스마트 단말(100)과 네트워크(200)를 통해 시각 장애인의 동선에 따른 영상을 수신하기 위한 데이터 세션을 연결하여 동선녹화에 대한 설정을 완료하는 로드 메이트 제공 서버(300); 를 포함하는 것을 특징으로 한다.

또한, 로드 메이트 제공 서버(300)는, 장애인 스마트 단말(100)의 몸체 일측에 형성되는 충격방지센서(130)를 통해 시각 장애인 스마트 단말(100)에 미리 설정된 임계치 이상의 충격이 감지 여부를 판단하는 것을 특징으로 한다.

또한, 로드 메이트 제공 서버(300)는, 판단 결과 미리 설정된 임계치 이상의 충격이 감지된 경우, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로부터 충격치, 그리고 동선녹화 설정시에는 영상 자료, 시각 장애인 스마트 단말(100)의 GPS 수신모듈에 의해 획득된 GPS 위치정보를 동시에 수신한 뒤, 네트워크(200)를 통해 보호자 단말(500)로 전송하는 것을 특징으로 한다.

또한, 로드 메이트 제공 서버(300)는, 판단 결과 미리 설정된 임계치 이상의 충격이 감지되지 않는 경우, 동선녹화 모드 수행에 따라 영상 자료를 실시간으로 수신 중에 영상인식기반으로 시각 장애인 스마트 단말(100)의 카메라 상에 위협이 되는 객체에 대한 인식이 수행여부를 판단하는 것을 특징으로 한다.

또한, 로드 메이트 제공 서버(300)는, 판단 결과 객체에 대한 인식이 수행되는 경우, 네트워크(200)를 통해 GPS 위치정보, 위협이 되는 객체가 인식된 영상 자료, 시각 장애인 스마트 단말(100)의 단말식별번호를 네트워크(200)를 통해 위치기반의 응급구조단말(600)로 전송함으로써, 시각 장애인에 대한 응급 조치를 위할 수 있도록 할 수 있을 뿐만 아니라, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)과 응급구조단말(600)을 연결한 뒤, 응급구조단말(600)에서 응급구조자에 의해 음성입력되어 제공되는 음성정보를 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로 전송을 중계하여 치한 방지 기반을 제공하는 것을 특징으로 한다.

본 발명의 실시예에 따른 로드 메이트 시스템 및 로드 메이트 서비스 제공 방법은, 시각 장애인에 대한 길안내, 그리고 길안내 중의 영상 녹화, 주위의 상점에 대한 소개, 그리고 친구로 등록된 시각 장애인간의 약속 장소 공유 등의 서비스를 제공할 수 있는 효과가 있다.

뿐만 아니라, 본 발명의 다른 실시예에 따른 로드 메이트 시스템 및 로드 메이트 서비스 제공 방법은, 위협이 되는 객체가 있는 경우, 시각장애인의 GPS 위치정보, 위협이 되는 객체가 인식된 영상 자료, 시각 장애인 스마트 단말의 단말식별번호를 응급구조자에게 전송함으로써, 시각 장애인에 대한 응급구조가 이루어질 수 있는 효과를 제공한다.

도 1은 본 발명의 실시예에 따른 로드 메이트 시스템(1)을 나타내는 도면이다.
도 2는 본 발명의 실시예에 따른 로드 메이트 시스템(1) 중 로드 메이트 제공 서버(300)의 구성요소를 나타내는 블록도이다.
도 3 내지 도 6은 본 발명의 실시예에 따른 로드 메이트 시스템(1) 상에서 수행되는 로드 메이트 서비스 제공 과정을 설명하기 위한 도면이다.
도 7은 본 발명의 실시예에 따른 로드 메이트 서비스 제공 방법을 나타내는 흐름도이다.

이하, 본 발명의 바람직한 실시예의 상세한 설명은 첨부된 도면들을 참조하여 설명할 것이다. 하기에서 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.

본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로 데이터 또는 신호를 '전송'하는 경우에는 구성요소는 다른 구성요소로 직접 상기 데이터 또는 신호를 전송할 수 있고, 적어도 하나의 또 다른 구성요소를 통하여 데이터 또는 신호를 다른 구성요소로 전송할 수 있음을 의미한다.

도 1은 본 발명의 실시예에 따른 로드 메이트 시스템(1)을 나타내는 도면이다. 도 1을 참조하면, 로드 메이트 시스템(1)은 복수의 시각 장애인 스마트 단말(100)로 이루어진 시각 장애인 스마트 단말 그룹(100g), 네트워크(200), 로드 메이트 제공 서버(300), 빅데이터 서버(400), 각 시각 장애인 스마트 단말(100)의 보호자가 운영하는 보호자 단말(500)로 이루어지는 보호자 단말 그룹(500g), 복수의 응급구조자가 운영하는 응급구조단말(600)로 이루어진 응급구조단말 그룹(600g)을 포함할 수 있다.

네트워크(200)는 대용량, 장거리 음성 및 데이터 서비스가 가능한 대형 통신망의 고속 기간 망인 통신망이며, 인터넷(Internet) 또는 고속의 멀티미디어 서비스를 제공하기 위한 차세대 유선 및 무선 망일 수 있다. 네트워크(200)가 이동통신망일 경우 동기식 이동 통신망일 수도 있고, 비동기식 이동 통신망일 수도 있다. 비동기식 이동 통신망의 일 실시 예로서, WCDMA(Wideband Code Division Multiple Access) 방식의 통신망을 들 수 있다. 이 경우 도면에 도시되진 않았지만, 네트워크(200)는 RNC(Radio Network Controller)을 포함할 수 있다. 한편, WCDMA망을 일 예로 들었지만, 3G LTE망, 4G망 그 밖의 5G 등 차세대 통신망, 그 밖의 IP를 기반으로 한 IP망일 수 있다. 네트워크(200)는 복수의 시각 장애인 스마트 단말(100)로 이루어진 시각 장애인 스마트 단말 그룹(100g), 로드 메이트 제공 서버(300), 빅데이터 서버(400), 각 시각 장애인 스마트 단말(100)의 보호자가 운영하는 보호자 단말(500)로 이루어지는 보호자 단말 그룹(500g), 복수의 응급구조자가 운영하는 응급구조단말(600)로 이루어진 응급구조단말 그룹(600g), 그 밖의 시스템 상호 간의 신호 및 데이터를 상호 전달하는 역할을 한다.

여기서, 시각 장애인 스마트 단말(100)은 시각 장애인의 목 등의 신체나 가방 등의 악세사리에 도 4와 같이 가로방향으로 고리, 클립 등을 이용해 부착되어 안정적인 촬영구조를 제공할 수 있다.

도 2는 본 발명의 실시예에 따른 로드 메이트 시스템(1) 중 로드 메이트 제공 서버(300)의 구성요소를 나타내는 블록도이다. 도 3 내지 도 6은 본 발명의 실시예에 따른 로드 메이트 시스템(1) 상에서 수행되는 로드 메이트 서비스 제공 과정을 설명하기 위한 도면이다.

먼저, 도 2를 참조하면, 로드 메이트 제공 서버(300)는 송수신부(310), 제어부(320), 데이터베이스(330)를 포함할 수 있으며, 제어부(320)는 블랙박스 제공 모듈(321), 주변정보 제공 모듈(322), 위치정보 제공 모듈(323)를 포함할 수 있다.

블랙박스 제공 모듈(321)은 시각 장애인 스마트 단말(100) 상에서 음성인식 기반으로 로드 메이트 앱이 실행되고, 로드 메이트 앱에 의해 자동으로 수행되는 블랙박스 기능 수행 이후, 시각 장애인 스마트 단말(100)의 터치스크린 상에 미리 설정된 동선녹화 영역(120) 터치에 따라 동선녹화 신호가 네트워크(200)를 통해 수신하도록 송수신부(310)를 제어함으로써, 시각 장애인 스마트 단말(100)과 네트워크(200)를 통해 시각 장애인의 동선에 따른 영상을 수신하기 위한 데이터 세션을 연결하도록 송수신부(310)를 제어할 수 있다.

한편, 시각 장애인 스마트 단말(100) 상에서 음성인식 기반으로 로드 메이트 앱을 실행하기 위해서는 음성인식/출력모듈로 "로드 메이트 앱 실행"이라는 음성신호가 수신되거나 시각 장애인 스마트 단말(100)의 본체의 일측에 형성된 자료전송버튼(110)에 대한 입력을 통해 수행될 수 있으며, 미리 설정된 동선녹화 영역(120)은 도 4와 같이 가로 형태로 시각 장애인 스마트 단말(100)을 위치시킨 상태에서 좌측 하부 영역으로 설정될 수 있다.

또한, 시각 장애인 스마트 단말(100) 상에서 로드 메이트 앱에 의해 각 단계, 예를 들어 미리 설정된 동선녹화 영역(120) 터치에 따라 시각 장애인 스마트 단말(100)의 카메라에 의해 촬영하는 영상 자료 전송 기능을 수행시, 음성으로 "영상 자료 전송 기능이 수행됩니다."라는 음성신호를 음성인식/출력모듈로 출력함으로써, 시각 장애인에 의한 시각 장애인 스마트 단말(100) 상의 터치스크린에 대한 제어가 수행될 수 있도록 하는 것이 바람직하다.

또한, 블랙박스 제공 모듈(321)은 로드 메이트 앱 실행, 그리고 동선녹화에 대한 설정뿐만 아니라, 미설정시에도 각 장애인 스마트 단말(100)의 몸체 일측에 형성되는 충격방지센서(130)를 통해 시각 장애인 스마트 단말(100)에 미리 설정된 임계치 이상의 충격이 감지되는 경우 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로부터 충격치, 그리고 동선녹화 설정시에는 영상 자료, 시각 장애인 스마트 단말(100)의 GPS 수신모듈에 의해 획득된 GPS 위치정보를 동시에 수신하도록 송수신부(310)를 제어한 뒤, 네트워크(200)를 통해 보호자 단말(500)로 전송하도록 송수신부(310)를 제어할 수 있다. 한편, 블랙박스 제공 모듈(321)은 동선녹화에 대한 미설정시 수신된 충격치를 네트워크(200)를 통해 보호자 단말(500)로 전송하도록 송수신부(310)를 제어할 수 있다.

블랙박스 제공 모듈(321)은 동선녹화 모드 수행에 따라 영상 자료를 실시간으로 수신 중에 영상인식기반으로 시각 장애인 스마트 단말(100)의 카메라 상에 위협이 되는 객체에 대한 인식이 수행되는 경우, 네트워크(200)를 통해 GPS 위치정보, 위협이 되는 객체가 인식된 영상 자료, 시각 장애인 스마트 단말(100)의 단말식별번호를 네트워크(200)를 통해 위치기반의 응급구조단말(600)로 전송함으로써, 시각 장애인에 대한 응급 조치를 취할 수 있도록 할 수 있을 뿐만 아니라, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)과 응급구조단말(600)을 연결한 뒤, 응급구조단말(600)에서 응급구조자에 의해 음성입력되어 제공되는 음성정보(예를 들어, "멀리 떨어지세요", "경찰입니다")를 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로 전송을 중계하도록 송수신부(310)를 제어함으로써, 치한 방지 기반을 제공할 수 있다.

본 발명의 일 실시예로, 블랙박스 제공 모듈(321)은 동선녹화 모드 수행에 따라 영상 자료를 실시간으로 수신 중에 영상인식기반으로 시각 장애인 스마트 단말(100)의 카메라 상에 위협이 되는 객체에 대한 인식을 수행시, 네트워크(200)를 통해 빅데이터 서버(400)로 시각 장애인 스마트 단말(100)에서 수신되는 영상 자료를 전송하여, 빅데이터 서버(400)에 의한 영상 자료 분석을 수행하도록 할 수 있다.

이에 따라, 빅데이터 서버(400)는 영상 자료에서 영상정보를 획득한 뒤, 영상정보와 빅데이터 서버(400)에 저장된 다양한 위협이 되는 객체 패턴과를 비교할 수 있다.

여기서 빅데이터 서버(400)에는 다양한 위협이 되는 객체 패턴이 저장되어 있으므로, 다양한 위협이 되는 객체 패턴 정보, 각 위협이 되는 객체 패턴 정보가 미리 설정된 각도로 기울어진 것, 역으로 된 것 등과 같은 영상정보에 포함된 위협이 되는 객체 패턴을 비교하여 영상정보 속에서 위협이 되는 객체를 판별할 수 있으며, 위협이 되는 객체는 손이 상향으로 올라가서 주먹을 쥐는 형상 등일 수 있다.

주변정보 제공 모듈(322)은 도 5와 같이 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로부터 GPS 위치정보를 실시간으로 수신한 뒤, GPS 위치정보를 네트워크(200)를 통해 빅데이터 서버(400)로 제공함으로써, 빅데이터 서버(400)에 의해 GPS 위치정보와 매칭되는 상점의 명칭정보, 상점의 위치정보, 그리고 각 상점의 할인 정보(1+1), 이벤트 알림, 지역별 맛집 알림 등을 포함하는 주변상점정보가 추출되면, 빅데이터 서버(400)로부터 주변상점정보를 수신한 뒤, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로 전송하도록 송수신부(310)를 제어할 수 있다.

여기서, 주변정보 제공 모듈(322)은 빅데이터 서버(400)로부터 수신된 주변상점정보를 영상 이미지로 수신한 뒤, 음성정보로 변환된 주변상점정보를 제공할 수 있다.

보다 구체적으로, 주변정보 제공 모듈(322)은 도 5에서 시각 장애인 아이콘(I1)을 중심으로 전자지도 형태로 수신된 주변상점정보에서 시각 장애인 아이콘(I1)을 중심으로 각 상점의 명칭정보 및 위치음성정보, 그리고 각 상점의 명칭정보와 매칭되는 할인 음성정보(1+1), 이벤트 알림 음성정보, 지역별 맛집 알림 음성정보 중 적어도 하나 이상을 매칭시켜서 음성 변환된 주변상점정보를 생성하여 네트워크(200)를 통해 시각 장애인 아이콘(I1)으로 전송하여 출력되도록 송수신부(310)를 제어할 수 있다.

이후, 주변정보 제공 모듈(322)은 시각 장애인 스마트 단말(100)의 음성인식/출력모듈로 하나의 상점의 명칭정보에 해당하는 음성정보가 입력되는 경우, 시각 장애인 스마트 단말(100)로부터 네트워크(200)를 통해 상점의 명칭정보에 해당하는 음성정보를 네트워크(200)를 통해 수신하도록 송수신부(310)를 제어한 뒤, 네트워크(200)를 통해 상점 명칭이 선택된 상점으로 네비게이션 기능을 제공할 수 있다. 보다 구체적으로, 주변정보 제공 모듈(322)은 도 5에서 시각 장애인 아이콘(I1)을 중심으로 전자지도 형태로 수신된 주변정보에서 시각 장애인 아이콘(I1)을 중심으로 경로정보, 그리고 각 경로정보의 지점에서의 진행 방향 정보(현재의 위치로부터 직진, 상좌, 상우, 하좌, 하우, 후진 등)를 파악하고, 시각 장애인 스마트 단말(100)의 GPS 위치정보로부터 경로정보 및 진행 방향 정보로 올바르게 진행되는지 여부를 실시간으로 분석하여 틀리게 가는 경우, 경로 변경 정보를 음성정보로 변환하여 생성한 뒤, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로 제공하도록 송수신부(310)를 제어함으로써, 네비게이션 역할도 음성기반으로 제공할 수 있다.

위치정보 제공 모듈(323)은 각 시각 장애인 스마트 단말(100) 간에 친구 등록 요청을 각 보호자 단말(500)로부터 수신한 뒤, 데이터베이스(330)에 친구로 등록된 각 시각 장애인 스마트 단말(100)의 단말식별번호(IMEI)를 저장할 수 있다.

이후, 위치정보 제공 모듈(323)은 친구로 등록된 각 시각 장애인 스마트 단말(100) 간의 GPS 위치정보를 네트워크(200)를 통해 실시간으로 수신한 뒤, 각 GPS 위치정보간의 거리정보를 연산하고, 연산된 거리정보를 네트워크(200)를 통해 친구로 등록된 각 시각 장애인 스마트 단말(100)로 전송하도록 송수신부(310)를 제어할 수 있다.

본 발명의 다른 실시예로, 위치정보 제공 모듈(323)은 친구로 등록된 하나의 시각 장애인 스마트 단말(100)이 하나의 선택된 상점으로의 네비게이션 기능을 제공받고 있으며, 친구로 등록된 다른 하나의 시각 장애인 스마트 단말(100)이 동일한 선택된 상점으로의 네비게이션 기능을 제공받는 경우, 친구 그룹으로 등록된 다른 시각 장애인 스마트 단말(100)로 하나의 선택된 상점으로의 네비게이션 기능을 제공받고 있는 각 시각 장애인 스마트 단말(100)의 GPS 위치정보, 그리고 거리정보를 실시간으로 전송하도록 송수신부(310)를 제어함으로써, 하나의 친구 그룹으로 등록된 모든 시각 장애인에게 정보를 음성기반으로 공유시킬 수 있는 효과가 있다.

도 7은 본 발명의 실시예에 따른 로드 메이트 서비스 제공 방법을 나타내는 흐름도이다. 도 7을 참조하면, 로드 메이트 제공 서버(300)는 시각 장애인 스마트 단말(100) 상에서 음성인식 기반으로 로드 메이트 앱이 실행되고, 로드 메이트 앱에 의해 자동으로 수행되는 블랙박스 기능 수행 이후, 시각 장애인 스마트 단말(100)의 터치스크린 상에 미리 설정된 동선녹화 영역(120) 터치에 따라 동선녹화 신호가 네트워크(200)를 통해 수신함으로써, 시각 장애인 스마트 단말(100)과 네트워크(200)를 통해 시각 장애인의 동선에 따른 영상을 수신하기 위한 데이터 세션을 연결하여 동선녹화에 대한 설정을 완료한다(S110).

단계(S110) 이후, 로드 메이트 제공 서버(300)는 장애인 스마트 단말(100)의 몸체 일측에 형성되는 충격방지센서(130)를 통해 시각 장애인 스마트 단말(100)에 미리 설정된 임계치 이상의 충격이 감지 여부를 판단한다(S120).

단계(S120)의 판단 결과 미리 설정된 임계치 이상의 충격이 감지된 경우, 로드 메이트 제공 서버(300)는 각 장애인 스마트 단말(100)의 몸체 일측에 형성되는 충격방지센서(130)를 통해 시각 장애인 스마트 단말(100)에 미리 설정된 임계치 이상의 충격이 감지되는 경우 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로부터 충격치, 그리고 동선녹화 설정시에는 영상 자료, 시각 장애인 스마트 단말(100)의 GPS 수신모듈에 의해 획득된 GPS 위치정보를 동시에 수신한 뒤, 네트워크(200)를 통해 보호자 단말(500)로 전송한다(S130).

한편, 단계(S120)의 판단 결과 미리 설정된 임계치 이상의 충격이 감지되지 않은 경우, 로드 메이트 제공 서버(300)는 동선녹화 모드 수행에 따라 영상 자료를 실시간으로 수신 중에 영상인식기반으로 시각 장애인 스마트 단말(100)의 카메라 상에 위협이 되는 객체에 대한 인식이 수행여부를 판단한다(S140).

단계(S14)의 판단 결과 객체에 대한 인식이 수행되는 경우 로드 메이트 제공 서버(300)는 네트워크(200)를 통해 GPS 위치정보, 위협이 되는 객체가 인식된 영상 자료, 시각 장애인 스마트 단말(100)의 단말식별번호를 네트워크(200)를 통해 위치기반의 응급구조단말(600)로 전송함으로써, 시각 장애인에 대한 응급 조치를 위할 수 있도록 할 수 있을 뿐만 아니라, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)과 응급구조단말(600)을 연결한 뒤, 응급구조단말(600)에서 응급구조자에 의해 음성입력되어 제공되는 음성정보를 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로 전송을 중계하여 치한 방지 기반을 제공한다(S150).

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.

컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.

또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다.

이상과 같이, 본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.

1 : 로드 메이트 시스템
100 : 시각 장애인 스마트 단말
200 : 네트워크
300 : 로드 메이트 제공 서버
310 : 송수신부
320 : 제어부
321 : 블랙박스 제공 모듈
322 : 주변정보 제공 모듈
323 : 위치정보 제공 모듈
330 : 데이터베이스
400 : 빅데이터 서버
500 : 보호자 단말
600 : 응급구조단말

Claims (10)

1. 복수의 시각 장애인 스마트 단말(100)로 이루어진 시각 장애인 스마트 단말 그룹(100g), 네트워크(200), 로드 메이트 제공 서버(300), 빅데이터 서버(400), 각 시각 장애인 스마트 단말(100)의 보호자가 운영하는 보호자 단말(500)로 이루어지는 보호자 단말 그룹(500g), 복수의 응급구조자가 운영하는 응급구조단말(600)로 이루어진 응급구조단말 그룹(600g)을 포함하는 로드 메이트 시스템(1)에 있어서,
   로드 메이트 제공 서버(300)는,
   송수신부(310), 제어부(320), 데이터베이스(330)를 포함할 수 있으며, 제어부(320)는,
   시각 장애인 스마트 단말(100) 상에서 음성인식 기반으로 로드 메이트 앱이 실행되고, 로드 메이트 앱에 의해 자동으로 수행되는 블랙박스 기능 수행 이후, 시각 장애인 스마트 단말(100)의 터치스크린 상에 미리 설정된 동선녹화 영역(120) 터치에 따라 동선녹화 신호가 네트워크(200)를 통해 수신하도록 송수신부(310)를 제어함으로써, 시각 장애인 스마트 단말(100)과 네트워크(200)를 통해 시각 장애인의 동선에 따른 영상을 수신하기 위한 데이터 세션을 연결하도록 송수신부(310)를 제어하며,
   로드 메이트 앱 실행, 그리고 동선녹화에 대한 설정뿐만 아니라, 미설정시에도 각 장애인 스마트 단말(100)의 몸체 일측에 형성되는 충격방지센서(130)를 통해 시각 장애인 스마트 단말(100)에 미리 설정된 임계치 이상의 충격이 감지되는 경우 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로부터 충격치, 그리고 동선녹화 설정시에는 영상 자료, 시각 장애인 스마트 단말(100)의 GPS 수신모듈에 의해 획득된 GPS 위치정보를 동시에 수신하도록 송수신부(310)를 제어한 뒤, 네트워크(200)를 통해 보호자 단말(500)로 전송하도록 송수신부(310)를 제어하며,
   동선녹화에 대한 미설정시 수신된 충격치를 네트워크(200)를 통해 보호자 단말(500)로 전송하도록 송수신부(310)를 제어하며,
   동선녹화 모드 수행에 따라 영상 자료를 실시간으로 수신 중에 영상인식기반으로 시각 장애인 스마트 단말(100)의 카메라 상에 위협이 되는 객체에 대한 인식이 수행되는 경우, 네트워크(200)를 통해 GPS 위치정보, 위협이 되는 객체가 인식된 영상 자료, 시각 장애인 스마트 단말(100)의 단말식별번호를 네트워크(200)를 통해 위치기반의 응급구조단말(600)로 전송함으로써, 시각 장애인에 대한 응급 조치를 취할 수 있도록 할 수 있을 뿐만 아니라, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)과 응급구조단말(600)을 연결한 뒤, 응급구조단말(600)에서 응급구조자에 의해 음성입력되어 제공되는 음성정보("멀리 떨어지세요", "경찰입니다" 포함)를 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로 전송을 중계하도록 송수신부(310)를 제어함으로써, 치한 방지 기반을 제공하며,
   동선녹화 모드 수행에 따라 영상 자료를 실시간으로 수신 중에 영상인식기반으로 시각 장애인 스마트 단말(100)의 카메라 상에 위협이 되는 객체에 대한 인식을 수행시, 네트워크(200)를 통해 빅데이터 서버(400)로 시각 장애인 스마트 단말(100)에서 수신되는 영상 자료를 전송하여, 빅데이터 서버(400)에 의한 영상 자료 분석을 수행하도록 하는 블랙박스 제공 모듈(321);
   네트워크(200)를 통해 시각 장애인 스마트 단말(100)로부터 GPS 위치정보를 실시간으로 수신한 뒤, GPS 위치정보를 네트워크(200)를 통해 빅데이터 서버(400)로 제공함으로써, 빅데이터 서버(400)에 의해 GPS 위치정보와 매칭되는 상점의 명칭정보, 상점의 위치정보, 그리고 각 상점의 할인 정보(1+1), 이벤트 알림, 지역별 맛집 알림을 포함하는 주변상점정보가 추출되면, 빅데이터 서버(400)로부터 주변상점정보를 수신한 뒤, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로 전송하도록 송수신부(310)를 제어하며,
   빅데이터 서버(400)로부터 수신된 주변상점정보를 영상 이미지로 수신한 뒤, 음성정보로 변환된 주변상점정보를 제공하되, 시각 장애인 아이콘(I1)을 중심으로 전자지도 형태로 수신된 주변상점정보에서 시각 장애인 아이콘(I1)을 중심으로 각 상점의 명칭정보 및 위치음성정보, 그리고 각 상점의 명칭정보와 매칭되는 할인 음성정보(1+1), 이벤트 알림 음성정보, 지역별 맛집 알림 음성정보 중 적어도 하나 이상을 매칭시켜서 음성 변환된 주변상점정보를 생성하여 네트워크(200)를 통해 시각 장애인 아이콘(I1)으로 전송하여 출력되도록 송수신부(310)를 제어하며,
   시각 장애인 스마트 단말(100)의 음성인식/출력모듈로 하나의 상점의 명칭정보에 해당하는 음성정보가 입력되는 경우, 시각 장애인 스마트 단말(100)로부터 네트워크(200)를 통해 상점의 명칭정보에 해당하는 음성정보를 네트워크(200)를 통해 수신하도록 송수신부(310)를 제어한 뒤, 네트워크(200)를 통해 상점 명칭이 선택된 상점으로 네비게이션 기능을 제공함에 있어서, 시각 장애인 아이콘(I1)을 중심으로 전자지도 형태로 수신된 주변정보에서 시각 장애인 아이콘(I1)을 중심으로 경로정보, 그리고 각 경로정보의 지점에서의 진행 방향 정보(현재의 위치로부터 직진, 상좌, 상우, 하좌, 하우, 후진 포함)를 파악하고, 시각 장애인 스마트 단말(100)의 GPS 위치정보로부터 경로정보 및 진행 방향 정보로 올바르게 진행되는지 여부를 실시간으로 분석하여 틀리게 가는 경우, 경로 변경 정보를 음성정보로 변환하여 생성한 뒤, 네트워크(200)를 통해 시각 장애인 스마트 단말(100)로 제공하도록 송수신부(310)를 제어함으로써, 네비게이션 역할도 음성기반으로 제공하는 주변정보 제공 모듈(322); 및
   각 시각 장애인 스마트 단말(100) 간에 친구 등록 요청을 각 보호자 단말(500)로부터 수신한 뒤, 데이터베이스(330)에 친구로 등록된 각 시각 장애인 스마트 단말(100)의 단말식별번호(IMEI)를 저장하며, 친구로 등록된 각 시각 장애인 스마트 단말(100) 간의 GPS 위치정보를 네트워크(200)를 통해 실시간으로 수신한 뒤, 각 GPS 위치정보간의 거리정보를 연산하고, 연산된 거리정보를 네트워크(200)를 통해 친구로 등록된 각 시각 장애인 스마트 단말(100)로 전송하도록 송수신부(310)를 제어하며,
   친구로 등록된 하나의 시각 장애인 스마트 단말(100)이 하나의 선택된 상점으로의 네비게이션 기능을 제공받고 있으며, 친구로 등록된 다른 하나의 시각 장애인 스마트 단말(100)이 동일한 선택된 상점으로의 네비게이션 기능을 제공받는 경우, 친구 그룹으로 등록된 다른 시각 장애인 스마트 단말(100)로 하나의 선택된 상점으로의 네비게이션 기능을 제공받고 있는 각 시각 장애인 스마트 단말(100)의 GPS 위치정보, 그리고 거리정보를 실시간으로 전송하도록 송수신부(310)를 제어함으로써, 하나의 친구 그룹으로 등록된 모든 시각 장애인에게 정보를 음성기반으로 공유시키는 위치정보 제공 모듈(323); 을 포함하며,
   시각 장애인 스마트 단말(100) 상에서 음성인식 기반으로 로드 메이트 앱을 실행하기 위해서는 음성인식/출력모듈로 "로드 메이트 앱 실행"이라는 음성신호가 수신되거나 시각 장애인 스마트 단말(100)의 본체의 일측에 형성된 자료전송버튼(110)에 대한 입력을 통해 수행될 수 있으며, 미리 설정된 동선녹화 영역(120)은 가로 형태로 시각 장애인 스마트 단말(100)을 위치시킨 상태에서 좌측 하부 영역에 위치하며,
   빅데이터 서버(400)에는 복수의 위협이 되는 객체 패턴이 저장되어 있으므로, 복수의 위협이 되는 객체 패턴 정보, 각 위협이 되는 객체 패턴 정보가 미리 설정된 각도로 기울어진 것, 역으로 된 것과 같은 영상정보에 포함된 위협이 되는 객체 패턴을 비교하여 영상정보 속에서 위협이 되는 객체를 판별하며, 위협이 되는 객체는 손이 상향으로 올라가서 주먹을 쥐는 형상을 포함하는 것을 특징으로 하는 로드 메이트 시스템.
   
2. 삭제
3. 삭제
4. 삭제
5. 삭제
6. 삭제
7. 삭제
8. 삭제
9. 삭제
10. 삭제

Images