KR101632169B1 - 시각 장애인을 위한 음성 길안내 시스템 - Google Patents
시각 장애인을 위한 음성 길안내 시스템 Download PDFInfo
- Publication number
- KR101632169B1 KR101632169B1 KR1020140123786A KR20140123786A KR101632169B1 KR 101632169 B1 KR101632169 B1 KR 101632169B1 KR 1020140123786 A KR1020140123786 A KR 1020140123786A KR 20140123786 A KR20140123786 A KR 20140123786A KR 101632169 B1 KR101632169 B1 KR 101632169B1
- Authority
- KR
- South Korea
- Prior art keywords
- braille
- braille block
- information
- block
- voice
- Prior art date
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
- A61F9/00—Methods or devices for treatment of the eyes; Devices for putting-in contact lenses; Devices to correct squinting; Apparatus to guide the blind; Protective devices for the eyes, carried on the body or in the hand
- A61F9/08—Devices or methods enabling eye-patients to replace direct visual perception by another kind of perception
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H3/00—Appliances for aiding patients or disabled persons to walk about
- A61H3/06—Walking aids for blind persons
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B21/00—Teaching, or communicating with, the blind, deaf or mute
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Life Sciences & Earth Sciences (AREA)
- Vascular Medicine (AREA)
- Rehabilitation Therapy (AREA)
- Biomedical Technology (AREA)
- Ophthalmology & Optometry (AREA)
- Epidemiology (AREA)
- Pain & Pain Management (AREA)
- Physical Education & Sports Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Traffic Control Systems (AREA)
Abstract
본 발명은 시각 장애인이 특히 건물 내부 또는 지하철 내부에 들어갔을 때 효과적으로 길 안내를 받을 수 있도록 하는 시각 장애인을 위한 음성 길안내 시스템을 제공한다.
본 발명에 따른 시각 장애인을 위한 음성 길안내 시스템은, 건물 내부 또는 지하철 내에 형성된 점자블록 정보를 저장하는 데이터베이스; 시각 장애인에게 길 안내 음성을 제공하기 위한 디바이스; 상기 디바이스가 상기 건물 내부 또는 지하철 내에 진입한 경우, 상기 데이터베이스에 저장된 점자블록 정보를 상기 디바이스에 제공하는 서버를 포함하고, 상기 디바이스는, 바닥면을 촬영하기 위한 촬영수단과, 상기 촬영수단을 통해 제공받은 영상에서 점자블록을 인식하고 인식된 점자블록이 지시하는 정보를 판단하는 제어부를 포함하고, 상기 제어부는, 상기 서버로부터 전송되는 점자블록 정보와 상기 판단된 정보를 비교하여, 상기 두 정보가 일치하면 상기 서버로부터 전송된 점자블록 정보를 최종 점자블록 정보로 판단하고, 상기 두 정보가 일치하지 않으면 상기 촬영수단을 통해 제공받은 영상에서 판단한 정보를 최종 점자블록 정보로 판단하고, 상기 디바이스는, 상기 최종 점자블록 정보에 대응되는 안내메시지를 음성으로 출력하는 음성안내수단을 더 포함하는 것을 특징으로 한다.
이를 통해, 시각 장애인이 건물 내부 또는 지하철 내부에 들어갔을 때 효과적으로 길 안내를 받을 수 있도록 한다.
본 발명에 따른 시각 장애인을 위한 음성 길안내 시스템은, 건물 내부 또는 지하철 내에 형성된 점자블록 정보를 저장하는 데이터베이스; 시각 장애인에게 길 안내 음성을 제공하기 위한 디바이스; 상기 디바이스가 상기 건물 내부 또는 지하철 내에 진입한 경우, 상기 데이터베이스에 저장된 점자블록 정보를 상기 디바이스에 제공하는 서버를 포함하고, 상기 디바이스는, 바닥면을 촬영하기 위한 촬영수단과, 상기 촬영수단을 통해 제공받은 영상에서 점자블록을 인식하고 인식된 점자블록이 지시하는 정보를 판단하는 제어부를 포함하고, 상기 제어부는, 상기 서버로부터 전송되는 점자블록 정보와 상기 판단된 정보를 비교하여, 상기 두 정보가 일치하면 상기 서버로부터 전송된 점자블록 정보를 최종 점자블록 정보로 판단하고, 상기 두 정보가 일치하지 않으면 상기 촬영수단을 통해 제공받은 영상에서 판단한 정보를 최종 점자블록 정보로 판단하고, 상기 디바이스는, 상기 최종 점자블록 정보에 대응되는 안내메시지를 음성으로 출력하는 음성안내수단을 더 포함하는 것을 특징으로 한다.
이를 통해, 시각 장애인이 건물 내부 또는 지하철 내부에 들어갔을 때 효과적으로 길 안내를 받을 수 있도록 한다.
Description
본 발명은 시각 장애인의 보행을 보다 용이하게 해 주는 시각 장애인을 위한 음성 길안내 시스템에 관한 것이다.
일반적으로 시각장애인들은 시각적인 장애를 극복하기 위해 맹인견이나 지팡이에 의지하여 바닥면에 설치된 점자블록을 인식함으로써, 실외로 외출을 행하게 된다.
상기한 점자블록은 통상 노랑색의 판형상으로, 그 상면에 점 또는 선 형태의 돌출면, 즉 에지성분을 형성하도록 구성된다. 이때, 점자블록은 상면의 에지성분에 따라 직진 또는 방향전환 등의 의미를 갖는다. 예컨대, 선형 점자블록은 직진을, 점형 점자블록은 방향전환을 의미한다.
즉, 시각장애인들은 다수의 점자블록으로 이루어진 점자블록 유도라인을 따라 보행하되, 각 점자블록의 에지성분을 지팡이로 여러번 접촉시키거나 또는 발바닥 느낌을 통해 인식함으로써 보행하게 된다.
그러나, 시각장애인들이 지팡이나 발바닥을 통한 자신의 감각만으로 점자블록을 인지하여 보행을 하기에는 많은 시간이 소요됨은 물론, 점자블록상의 의미 판단에 따른 스트레스가 있게 되고, 지팡이를 이용하는 경우, 일정 시간 이상 동안 지팡이를 이용함에 따라 체력소모가 많아지게 된다.
이에, 최근에는 시각장애인의 주변을 카메라를 통해 촬영하고, 그 촬영정보를 분석하여 점자블록에 대응되는 보행정보를 음성으로 제공해주는 장치가 제안되었다. 즉, 상기한 보행정보 음성제공장치는 점자블록의 연속성을 근거로 유도라인을 판단하여 이에 따른 보행경로에 대응되는 보행정보를 음성출력하게 된다.
그런데, 상기한 점자블록은 실외의 인도 뿐 아니라 건물내의 바닥면에도 설치된다. 도 1은 건물 바닥면에 표시되어 있는 점자블록(1)과 조명등에 의해 바닥표면으로부터 반사되는 불빛(2)을 촬영한 것이다. 특히, 건물내 바닥면은 도 1에 도시된 바와 같이 천정에 설치된 조명등에 의해 점자블록 유도라인(1)과 조명등 반사라인(2)이 서로 다른 라인으로 바닥면에 형성된다.
따라서, 점자블록의 연속성을 근거로 유도라인을 판단하여 보행정보를 제공함에 있어서는, 조명등 반사라인(2)을 유도라인으로 판단하여 보행정보를 잘못 안내하는 문제가 발생될 수 있다. 이는 시각장애인에게 치명적인 위험을 가져다 줄 수 있게 된다.
또한, 상기한 문제점을 해결하기 위한 최근에는 점자블록의 색상을 근거로 점자블록을 인식하는 방법이 제안되어 있으나, 이는 점자블록 고유색에 대응되는 고정 설정값을 기준으로 하기 때문에, 날씨가 흐리거나 실내 바닥면에 설치되는 등 주변 환경에 따라 촬영영상에서 분석되는 점자블록의 고유색 변화로 인해 점자블록을 정확하게 인식하지 못하는 문제가 있게 된다.
[특허문헌]
한국등록특허 제1294347호 (발명의 명칭 : 영상의 형태 패턴과 텍스처 특징을 이용한 보도블록의 인식방법)
이에, 본 발명은 상기한 현상을 감안하여 창출된 것으로, 시각 장애인이 특히 건물 내부 또는 지하철 내부에 들어갔을 때 효과적으로 길 안내를 받을 수 있도록 하는 시각 장애인을 위한 음성 길안내 시스템을 제공함에 기술적 목적이 있다.
상기 목적을 달성하기 위한 본 발명의 일 측면에 따르면, 건물 내부 또는 지하철 내에 형성된 점자블록 정보를 저장하는 데이터베이스; 시각 장애인에게 길 안내 음성을 제공하기 위한 디바이스; 상기 디바이스가 상기 건물 내부 또는 지하철 내에 진입한 경우, 상기 데이터베이스에 저장된 점자블록 정보를 상기 디바이스에 제공하는 서버를 포함하고, 상기 디바이스는, 바닥면을 촬영하기 위한 촬영수단과, 상기 촬영수단을 통해 제공받은 영상에서 점자블록을 인식하고 인식된 점자블록이 지시하는 정보를 판단하는 제어부를 포함하고, 상기 제어부는, 상기 서버로부터 전송되는 점자블록 정보와 상기 판단된 정보를 비교하여, 상기 두 정보가 일치하면 상기 서버로부터 전송된 점자블록 정보를 최종 점자블록 정보로 판단하고, 상기 두 정보가 일치하지 않으면 상기 촬영수단을 통해 제공받은 영상에서 판단한 정보를 최종 점자블록 정보로 판단하고, 상기 디바이스는, 상기 최종 점자블록 정보에 대응되는 안내메시지를 음성으로 출력하는 음성안내수단을 더 포함하는 것을 특징으로 한다.
또한, 상기 디바이스의 제어부는, 상기 촬영수단을 통해 제공되는 촬영영상을 분할처리하고,
상기 분할처리된 영상을 점자라인 판단처리 및 점자영역 확인처리를 한 후 점자 분석처리를 수행하여 상기 촬영수단을 통해 제공받은 영상에서 점자블록을 인식하고 인식된 점자블록이 지시하는 정보를 판단하는 것을 특징으로 한다.
또한, 상기 디바이스는, 환경 설정정보를 입력하기 위한 정보입력부를 더 포함하는 것을 특징으로 한다.
또한, 상기 디바이스는, 상기 최종 점자블록 정보에 대응되는 음성안내메시지와, 점자블록 인식을 위한 기준 설정값을 저장하는 데이터메모리를 더 포함하는 것을 특징으로 한다.
또한, 상기 디바이스는, 위치를 감지하는 GPS모듈을 더 포함하고, 상기 제어부는, 상기 GPS모듈로부터 감지한 위치를 기초로 상기 디바이스의 상기 건물 내부 또는 지하철 내 진입 여부를 판단하는 것을 특징으로 한다.
본 발명에 의하면, 시각 장애인이 특히 건물 내부 또는 지하철 내부에 들어갔을 때 효과적으로 길 안내를 받을 수 있다.
또한, 1차적으로 건물 내부 또는 지하철 내부에 구비된 점자블록에 기초하여 시각 장애인에게 음성으로 길안내를 하고, 2차적으로 실시간으로 점자블록을 인식하여 혹시라도 발생할 수 있는 오류를 보완하으로써, 보다 정확한 길안내를 수행할 수 있다.
도 1은 조명등 반사라인과 점자블록 유도라인이 포함된 실내 바닥면 촬영영상을 예시한 예시도이다.
도 2는 본 발명의 실시예에 따른 시각 장애인을 위한 음성 길안내 시스템의 디바이스 구성을 개략적으로 도시한 블록도이다.
도 3은 도 2에 도시된 제어부의 점자블록 음성안내처리과정을 설명하기 위한 블록도이다.
도 2는 본 발명의 실시예에 따른 시각 장애인을 위한 음성 길안내 시스템의 디바이스 구성을 개략적으로 도시한 블록도이다.
도 3은 도 2에 도시된 제어부의 점자블록 음성안내처리과정을 설명하기 위한 블록도이다.
본 발명의 다른 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술 되는 실시 예를 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예는 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
만일 정의되지 않더라도, 여기서 사용되는 모든 용어들(기술 혹은 과학 용어들을 포함)은 이 발명이 속한 종래 기술에서 보편적 기술에 의해 일반적으로 수용되는 것과 동일한 의미를 갖는다. 일반적인 사전들에 의해 정의된 용어들은 관련된 기술 그리고/혹은 본 출원의 본문에 의미하는 것과 동일한 의미를 갖는 것으로 해석될 수 있고, 그리고 여기서 명확하게 정의된 표현이 아니더라도 개념화되거나 혹은 과도하게 형식적으로 해석되지 않을 것이다.
한편, 본 명세서 전체에서 사용되는 '~부' 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미할 수 있다. '~부' 안에서 제공되는 기능은 더 작은 수의 구성요소들로 분리되거나, 다른 '~부'와 통합되는 형태로 제공될 수 있다.
본 명세서에서 어떤 구성이 다른 구성에 '연결'된다는 의미는 반드시 두 구성이 직접적으로 연결되는 것뿐만 아니라, 또 다른 구성이 매개되어 간접적으로 연결되는 것까지 포함한다. 본 명세서에서 공지된 구성에 대한 일반적인 내용에 관한 설명은 본 발명의 요지를 흐리지 않기 위해 생략될 수 있다.
이하에서는 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하기로 한다.
본 발명의 실시예에 따른 시각 장애인을 위한 음성 길안내 시스템은, 데이터베이스, 디바이스 및 서버를 포함한다.
데이터베이스는 건물 내부 또는 지하철 내에 형성된 점자블록 정보를 저장한다.
또한, 디바이스는 시각 장애인에게 길 안내 음성을 제공하기 위해서 시각 장애인에게 구비된다.
또한, 서버는 디바이스가 건물 내부 또는 지하철 내에 진입한 경우, 데이터베이스에 저장된 점자블록 정보를 디바이스에 제공한다.
여기서 디바이스에 대해 도 2 내지 도 3을 기초로 이하에서 상세히 설명한다.
도 2는 본 발명의 실시예에 따른 시각 장애인을 위한 음성 길안내 시스템의 디바이스 구성을 개략적으로 도시한 블록도이다.
도 3은 도 2에 도시된 제어부의 점자블록 음성안내처리과정을 설명하기 위한 블록도이다.
먼저, 도 2에 도시된 바와 같이 본 발명에 따른 디바이스는 바닥면을 촬영하기 위한 촬영수단(100)과, 이 촬영수단(100)으로부터 제공되는 촬영영상에서 점자블록을 인식하여 해당 점자블록에 대응되는 안내정보를 음성으로 출력하는 음성안내수단(200) 및 전원수단(300)을 포함하여 구성된다.
여기서, 상기 촬영수단(100)과 음성안내수단(200) 및 전원수단(300)은 일체형으로 구성되거나 또는 전원수단(300)이 음성안내수단(200)과 하나의 모듈로 구성되고, 촬영수단(100)은 분리된 별개 모듈형태로 구성될 수 있다.
이때, 상기 촬영수단(100)과 음성안내수단(200), /전원수단(300)이 분리된 형태로 구성되는 경우, 촬영수단(100)과 음성안내수단(200)/전원수단(300)은 유선 또는 무선으로 상호 결합될 수 있다. 예컨대, 상기 촬영수단(100)은 모자나 안경 등에 장착될 수 있고, 음성안내수단(200)은 시각 장애인인 사용자가 착용한 모자나 안경, 의복의 주머니 속에 수납되어질 수 있다.
즉, 상기 디바이스는 사용자, 예컨대 시각장애인이 착용하는 모자나 안경 등의 착용물에 장착되어 사용되어질 수 있다. 이때, 상기 디바이스는 모자나 안경 등의 착용물에 탈부착이 가능한 형태로 결합될 수 있으며, 그 결합방법으로는 착용물의 소재 등에 따라 다양한 형태의 결합부재를 통해 이루어질 수 있음은 물론이다.
이때, 촬영수단(100)은 시각 장애인이 보행하는 길의 바닥면을 촬영하기 위한 카메라를 포함하여 구성된다. 또한, 촬영수단(100)은 특정 착용물에 결합된 형태로 배치되는 바, 촬영수단(100)이 착용물에 결합된 상태에서 카메라가 바닥면을 촬영될 수 있도록 카메라의 촬영 각도가 적절하게 설정되는 것이 바람직하다.
이때, 도시되지는 않았지만 상기 촬영수단(100)은 카메라의 촬영 각도를 검출하기 위한 센서 및, 상기 음성안내수단(200)으로부터 제공되는 제어신호를 근거로 카메라의 촬영 각도를 조절하기 위한 각도조절부재를 추가로 포함하여 구성되는 것 또한 가능하다 할 것이다.
또한, 전원수단(300)은 상기 촬영수단(100) 및 음성안내수단(200)을 동작시키기 위한 공급전원(Vcc)을 제공한다. 이때, 전원수단(300)은 휴대 가능한 배터리 형태 또는 임베디드 형태로 구성되는 것이 바람직하다.
한편, 음성안내수단(200)은 도2에 도시된 바와 같이, 음성출력부(210)와, 데이터메모리(220), 제어부(230) 및 정보입력부(240)를 포함하여 구성된다.
음성출력부(210)는 점자블록에 대응되는 안내정보를 음성으로 출력하기 위한 것으로, 예컨대 스피커 등으로 구성될 수 있다.
이때, 음성출력부(210)는 사용자가 안내음성을 보다 명확하게 청취할 수 있도록 하기 위해 제어부(230)와 무선 또는 유선으로 결합되어 일정 거리 이격되게 배치될 수 있다. 예컨대, 사용자는 유선 또는 무선 이어폰을 자신의 귀에 꽂은 상태로 용이하게 점자블록 안내음성을 청취할 수 있게 된다. 이는 대로변 소음으로 인해 사용자가 안내음성을 정확하게 청취하지 못하게 되는 문제를 해결할 수 있다.
또한, 데이터메모리(220)는 점자블록 음성안내 관련 각종 정보가 저장된다. 또한, 데이터메모리(220)는 점자블록에 대응되는 음성안내메시지와, 점자블록 인식을 위한 기준 설정값 및, 제어부(230)에서 처리되는 각종 처리정보를 포함하는 정보가 저장된다.
여기서, 기준 설정값 정보는 점자블록 영역 판단을 위한 기준값, 점자블록 종류 판단을 위한 서브밴드 기준값을 포함한다. 또한, 제어부(230)의 처리정보는 현재 볼륨 크기와, 현재 디바이스의 작동 또는 정지 상태의 구동상태정보를 포함할 수 있다.
또한, 제어부(230)은 촬영수단(100)을 통해 제공받은 영상에서 점자블록을 인식하고 인식된 점자블록이 표시하는 정보를 판단한다.
또한, 제어부(230)는 서버로부터 전송되는 점자블록 정보와 촬영수단(100)을 통해 제공받은 영상에서 점자블록을 인식하고 인식된 점자블록이 표시하는 정보를 비교하여, 두 정보가 일치하면 서버로부터 전송된 점자블록 정보를 최종 점자블록 정보로 판단하고, 두 정보가 일치하지 않으면 촬영수단을 통해 제공받은 영상에서 판단한 정보를 최종 점자블록 정보를 최종 점자블록 정보를 판단한다.
즉, 제어부(230)는 일단 서버로부터 건물 등의 내부에 형성된 점자블록 정보를 받고, 받은 정보와, 촬영수단(100)을 통해 받은 영상을 기초로 판단한 점자블록 정보를 비교한 후 그 일치성을 기준으로 보다 정확한 점자블록 정보를 최종 점자블록 정보로 산출한다.
이렇게 산출한 최종 점자블록 정보를 시각 장애인에게 음성으로 실시간으로 제공함으로써 시각 장애인이 보다 용이하게 길안내를 받을 수 있다.
또한, 디바이스는, 위치를 감지하는 GPS모듈을 더 포함한다.
제어부(230)는 GPS모듈로부터 감지한 위치를 기초로 디바이스의 건물 내부 또는 지하철 내 진입 여부를 판단한다.
또한, 제어부(230)는 상기 GPS모듈로부터 감지한 위치 및 서버로부터 전송받은 건물 또는 지하철 정보를 기초로 건물 등의 내부에 진입한 것으로 판단되면 음성 출력부(210)를 통해 건물 등의 내부에 진입한 사실을 시각 장애인에게 알릴 수 있다.
또한, 제어부(230)는 사용자가 외출을 하면서 정보입력부(240)를 통해 구동요구를 하게 되면, 이를 근거로 전원수단(300)을 제어하여 공급전원을 각 장치로 제공하도록 함과 더불어, 촬영수단(100)으로부터 제공되는 촬영영상에서 점자블록을 인식하여, 데이터메모리(220)에서 해당 점자블록 종류에 대응되는 안내메시지를 도출하여 음성출력부(210)를 통해 음성 출력하도록 제어한다.
또한, 정보입력부(240)는 점자블록 음성안내장치의 환경 설정정보를 입력하기 위한 것으로, 예컨대, 사용자가 음성출력부(210)의 볼륨 크기를 높이거나 낮추거나, 켜거나 끄는 버튼 등을 이용하여 동작 상태를 설정할 수 있도록 구성된다.
다음으로 디바이스의 제어부(230)가 상기 최종 점자블록 정보를 결정하는 과정에서, 서버에서 제공하는 점자블록 정보가 아닌 직접 촬영한 점자블록 정보를 최종 점자블록 정보로 결정하고 이를 음성안내처리하는 과정을 도 3을 기초로 이하에서 설명한다.
만약 서버에서 제공한 점자블록 정보가 촬영한 점자블록 정보가 일치하면, 서버에서 제공한 점자블록 정보를 최종 점자블록 정보로 결정하고, 이에 따라 디바이스가 음성안내를 수행하도록 제어부(230)가 제어를 수행한다.
도 3은 도 2에 도시된 제어부의 점자블록 음성안내처리과정을 설명하기 위한 순서도이다.
이때, 제어부(230)는 촬영영상에서 점자블록을 인식하고, 그 점자블록 인식결과에 대응되도록 음성안내처리가 되도록 제어 과정을 수행하게 된다.
도 3에 도시된 바와 같이 제어부(230)는 촬영영상 수신단계(S301), 촬영영상 분할처리 단계(S302)와, 점자라인 판단단계(S303), 점자영역 확인처리단계(S304), 점자블록 분석처리단계(S305) 및 음성안내처리단계(S306)를 수행한다.
먼저, 제어부(230)는 촬영영상 수신단계(S301)를 수행하는데, 촬영수단(100)을 통해 들어오는 영상을 수신한다.
다음으로, 촬영영상 분할처리 단계(S302)는 아래와 같은 처리를 수행한다.
제어부(230)는 상기 촬영수단(100)으로부터 제공되는 촬영영상을 먼저 유효 영상과 무효 영상으로 분할한다. 이때, 유효영상은 촬영영상의 수평 중심선(미도시)을 기준으로 하측영역이고, 무효영상은 촬영영상의 수평 중심선을 기준으로 상측영역으로 설정된다. 이는 본 발명은 사용자, 예컨대 시각장애인과 근접한 위치에 대한 정보의 제공이 우선하므로, 이를 고려하여 촬영영상의 상측영상을 무효 영상으로 분리하여 이후의 영상처리를 수행하지 않도록 함으로써, 신호처리 속도를 보다 향상시킬 수 있다.
이어, 제어부(230)는 상기 촬영영상의 하측영역에 해당하는 유효영상을 해당 유효영상의 수평 중심선(미도시)을 기준으로 상측 부분과 하측 부분으로 분할하여 상측영상과 하측영상으로 분할한다.
이하에서 제어부(230)는 유효영상에 대해 점자블록 인식처리 및 점자블록 인식에 따른 음성안내처리를 수행하게 된다.
한편, 제어부(230)는 촬영영상의 무효영상에서 예컨대, 이전 영상과의 비교를 통해 움직임 등이 검출되는 경우, 이를 근거로 사람이 있음을 판단하여 이에 대한 안내정보를 음성출력하도록 구성하는 것도 가능하다. 예컨대, 제어부(230)는 촬영영상의 무효영상에서 사람이 감지되었다고 판단되는 경우, "전면에 사람이 있습니다" 라는 안내메시지를 음성 출력할 수 있다.
다음으로, 점자라인 판단단계(S303)는 아래와 같은 처리를 수행한다.
제어부(230)는 점자블록과 일반 공간 사이의 경계 상에 점자라인을 생성함으로써, 점자블록 영역을 우선적으로 판단한다. 이러한 판단과정에서 점자라인은 촬영 영상에서 색깔 정보를 기초로 설정될 수 있다. 즉, 점자 블록은 일반적으로 노란색 등인데 일반 영역과는 색깔 상의 차이가 있어서 이를 기초로 점자라인을 판단하고 설정할 수 있다.
다음으로, 점자영역 확인처리단계(S304)는 아래와 같은 처리를 수행한다.
제어부(230)는 우선적으로 판단된 점자블록 영역의 엣지 성분을 검출하고 엣지 성분이 소정의 기준값 이상이면 점자블록 영역으로 판단한다. 엣지 성분 검출은 공지된 기술이므로 상술하지 않는다.
또한, 해당 영역이 점자블록 영역이 아니라고 판단되면, "인식할 수 없습니다"라는 안내메시지를 음성 출력한다.
한편, 분석결과 해당 영역이 점자블록 영역으로 판단되면, 제어부(230)는 현재 사용자가 점자블록 위에 있다고 판단한다.
다음으로, 점자블록 분석처리단계(S305)는 아래와 같은 처리를 수행한다.
제어부(230)는 점자라인 판단단계(S303) 또는 점자영역 확인처리단계(S304)에 의해 점자블록 영역으로 판단된 영역을 이용하여 해당 점자블록의 엣지 성분을 판단함으로써, 점자블록 종류를 분석한다.
즉, 제어부(230)는 분석한 점자블록의 구조가 점형 블록인지 선형 블록인지 여부를 판단한다. 즉, 점형 블록의 경우에는 엣지 성분이 다수 개 검출되고, 선형 블록의 경우에는 점형 블록보다 적은 수의 엣지 성분이 검출된다. 이렇게 검출되는 엣지 성분의 개수를 기준으로 점형 블록과 선형 블록을 구분할 수 있다.
마지막으로, 음성안내처리단계(S306)는 아래와 같은 처리를 수행한다.
제어부(230)는 상기 점자블록 분석처리단계(S305)에 의해 판단된 점자블록 종류에 대응되는 안내메시지를 음성출력부(210)를 통해 출력한다.
예컨대, 제어부(230)는 선형 점자블록에 대해서는 "직진 하십시오"라는 음성메시지를 출력하고, 점형 점자블록에 대해서는 "방향이 나뉩니다. 방향을 선택 하십시오" 라는 안내메시지를 음성 출력하도록 제어한다. 이때, 제어부(230)는 기 설정된 볼륨 크기에 대응되는 크기로 안내메시지를 음성 출력하도록 제어한다.
즉, 이상의 실시예에 의하면, 건물 등에 진입할 때 기본적으로 제공되는 건물 등의 내부 점자블록 정보와 실제로 촬영수단을 통해 촬영한 점자블록 정보를 비교하여 최적의 길 안내 정보를 시각 장애인에게 제고할 수 있다.
또한, 본 발명에 의하면, 촬영영상에서 점자블록영역 판단에 기준이 되는 점자블록 대표 색상값을 일정 주기단위로 이전 점자블록영역으로 판단된 RGB값으로 업데이트하여 점자블록영역을 판단함으로써, 주변 환경변화에 적응적으로 점자블록을 인식하는 것이 가능하게 된다.
비록, 본 발명이 상기 언급된 바람직한 실시예와 관련하여 설명되어졌지만, 발명의 요지와 범위로부터 벗어남이 없이 다양한 수정이나 변형을 하는 것이 가능하다. 따라서 첨부된 특허등록청구의 범위는 본 발명의 요지에서 속하는 이러한 수정이나 변형을 포함할 것이다.
100 : 촬영수단, 200 : 음성안내수단,
210 : 음성출력부, 220 : 데이터메모리,
230 : 제어부, 240 : 정보입력부,
300 : 전원수단
210 : 음성출력부, 220 : 데이터메모리,
230 : 제어부, 240 : 정보입력부,
300 : 전원수단
Claims (10)
- 건물 내부 또는 지하철 내에 형성된 점자블록 정보를 저장하는 데이터베이스;
시각 장애인에게 길 안내 음성을 제공하기 위한 디바이스;
상기 디바이스가 상기 건물 내부 또는 지하철 내에 진입한 경우, 상기 데이터베이스에 저장된 점자블록 정보를 상기 디바이스에 제공하는 서버를 포함하고,
상기 디바이스는,
바닥면을 촬영하기 위한 촬영수단과,
상기 촬영수단을 통해 제공받은 영상에서 점자블록을 인식하고 인식된 점자블록이 지시하는 정보를 판단하는 제어부를 포함하고,
상기 제어부는, 상기 서버로부터 전송되는 점자블록 정보와 상기 판단된 정보를 비교하여, 상기 두 정보가 일치하면 상기 서버로부터 전송된 점자블록 정보를 최종 점자블록 정보로 판단하고, 상기 두 정보가 일치하지 않으면 상기 촬영수단을 통해 제공받은 영상에서 판단한 정보를 최종 점자블록 정보로 판단하고, 상기 촬영수단을 통해 제공되는 촬영영상을 수평 중심선을 기준으로 하측영역의 유효영상과 상측영역의 무효영상으로 분할설정하여, 상기 유효영상을 점자라인 판단처리 및 점자영역 확인처리 한 후 점자 분석처리를 수행하여 점자블록을 인식하고 인식된 상기 점자블록이 지시하는 정보를 판단하여 음성안내처리를 수행하며,
상기 디바이스는, 상기 최종 점자블록 정보에 대응되는 안내메시지를 음성으로 출력하는 음성안내수단을 더 포함하는 것을 특징으로 하는 시각 장애인을 위한 음성 길안내 시스템.
- 제1항에 있어서,
상기 제어부는,
상기 무효영상에서 이전 영상과의 비교를 통해 움직임이 검출되는 경우, 이를 근거로 사람이 있음을 판단하여 음성안내처리를 수행하는 것을 특징으로 하는 시각 장애인을 위한 음성 길안내 시스템.
- 제1항에 있어서,
상기 디바이스는,
환경 설정정보를 입력하기 위한 정보입력부를 더 포함하는 것을 특징으로 하는 시각 장애인을 위한 음성 길안내 시스템.
- 제3항에 있어서,
상기 디바이스는,
상기 최종 점자블록 정보에 대응되는 음성안내메시지와, 점자블록 인식을 위한 기준 설정값을 저장하는 데이터메모리를 더 포함하는 것을 특징으로 하는 시각 장애인을 위한 음성 길안내 시스템.
- 제4항에 있어서,
상기 디바이스는,
위치를 감지하는 GPS모듈을 더 포함하고,
상기 제어부는, 상기 GPS모듈로부터 감지한 위치를 기초로 상기 디바이스의 상기 건물 내부 또는 지하철 내 진입 여부를 판단하는 것을 특징으로 하는 시각 장애인을 위한 음성 길안내 시스템.
- 삭제
- 제1항에 있어서,
상기 제어부의 점자라인 판단처리는,
상기 유효영상에서 색깔 정보를 추출하여 추출된 색깔 정보를 기초로 색깔이 변하는 경계를 점자라인으로 판단하여 처리하는 것을 특징으로 하는 시각 장애인을 위한 음성 길안내 시스템.
- 제7항에 있어서,
상기 제어부의 점자영역 확인처리는,
상기 점자라인 판단처리를 통해 점자블록으로 판단된 부분의 엣지 성분을 검출하고, 상기 검출된 엣지 성분이 소정값 이상이면 점자블록 영역으로 판단하는 것을 특징으로 하는 시각 장애인을 위한 음성 길안내 시스템.
- 제8항에 있어서,
상기 제어부의 점자블록 분석처리는,
상기 점자영역 확인처리 단계에서 판단된 점자블록 영역의 엣지 성분의 개수를 검출하고, 검출된 엣지 성분 개수가 소정 값 이상이면 점형 블록으로 판단하는 것을 특징으로 하는 시각 장애인을 위한 음성 길안내 시스템.
- 제8항에 있어서,
상기 제어부의 점자블록 분석처리는,
상기 점자영역 확인처리 단계에서 판단된 점자블록 영역의 엣지 성분의 개수를 검출하고, 검출된 엣지 성분 개수가 소정 값 이하이면 선형 블록으로 판단하는 것을 특징으로 하는 시각 장애인을 위한 음성 길안내 시스템.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140123786A KR101632169B1 (ko) | 2014-09-17 | 2014-09-17 | 시각 장애인을 위한 음성 길안내 시스템 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140123786A KR101632169B1 (ko) | 2014-09-17 | 2014-09-17 | 시각 장애인을 위한 음성 길안내 시스템 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20160032961A KR20160032961A (ko) | 2016-03-25 |
KR101632169B1 true KR101632169B1 (ko) | 2016-06-21 |
Family
ID=55645588
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140123786A KR101632169B1 (ko) | 2014-09-17 | 2014-09-17 | 시각 장애인을 위한 음성 길안내 시스템 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101632169B1 (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101944187B1 (ko) | 2017-07-11 | 2019-02-07 | 동서대학교 산학협력단 | 시각장애인용 음성서비스 제공 방법 |
KR20230012117A (ko) | 2021-07-14 | 2023-01-26 | 서울시립대학교 산학협력단 | Cctv 및 스마트폰을 연계한 교통 약자 음성 길 안내 장치 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20080008705A (ko) * | 2006-07-21 | 2008-01-24 | (주)바네트 | 영상 인식 기술을 이용한 시각 장애인 도로 안내 시스템 |
KR101091437B1 (ko) * | 2009-08-24 | 2011-12-07 | 성균관대학교산학협력단 | 시각장애인 보행 안내 시스템 |
KR101159437B1 (ko) * | 2010-04-29 | 2012-06-22 | 숭실대학교산학협력단 | 시각장애인용 보행유도 장치 및 방법 |
-
2014
- 2014-09-17 KR KR1020140123786A patent/KR101632169B1/ko active IP Right Grant
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101944187B1 (ko) | 2017-07-11 | 2019-02-07 | 동서대학교 산학협력단 | 시각장애인용 음성서비스 제공 방법 |
KR20230012117A (ko) | 2021-07-14 | 2023-01-26 | 서울시립대학교 산학협력단 | Cctv 및 스마트폰을 연계한 교통 약자 음성 길 안내 장치 |
Also Published As
Publication number | Publication date |
---|---|
KR20160032961A (ko) | 2016-03-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10592763B2 (en) | Apparatus and method for using background change to determine context | |
JP6030582B2 (ja) | 視覚障害を有する個人のための光学装置 | |
US10490101B2 (en) | Wearable device, display control method, and computer-readable recording medium | |
KR20180093753A (ko) | 시각장애인용 지팡이 | |
US20110074658A1 (en) | Head mounted display and imaging data usage system including the same | |
KR20150097043A (ko) | 스마트 안경 및 지팡이를 이용한 시각 장애인 보조 시스템 및 방법 | |
TW201636796A (zh) | 控制裝置、電子機器、控制方法及程式 | |
KR101822084B1 (ko) | 시각장애인을 위한 지팡이 | |
KR102242719B1 (ko) | 스마트 안경 추적 방법과 장치, 및 스마트 안경과 저장 매체 | |
KR101187600B1 (ko) | 스테레오 카메라 기반의 3차원 실시간 입술 특징점 추출을 이용한 음성 인식 장치 및 음성 인식 방법 | |
KR20120140486A (ko) | 휴대용 단말기에서 보행 안내 서비스를 제공하기 위한 장치 및 방법 | |
JP7403783B2 (ja) | 視覚障がい者用行動支援装置 | |
KR101632169B1 (ko) | 시각 장애인을 위한 음성 길안내 시스템 | |
KR20200067549A (ko) | 점자 블록 안내 시스템 및 장치 | |
KR20180098071A (ko) | 디지털 사이니지 | |
US7522824B2 (en) | Photographing apparatus photographing method and computer program | |
KR102268759B1 (ko) | 피부 상태 측정 및 케어용 디바이스, 및 이를 포함하는 피부 상태 측정 및 케어 시스템 | |
KR102263695B1 (ko) | 복수개의 카메라를 이용한 휴대 장치 및 제어방법 | |
KR20190004490A (ko) | 보행 안내 시스템 | |
KR20070008772A (ko) | 시각장애인을 위한 화상인식 보행 보조장치 | |
TW201643646A (zh) | 檢測裝置及程式 | |
KR101636235B1 (ko) | 점자블럭 음성안내장치 및 촬영영상에서의 점자블럭 인식방법 | |
KR101230341B1 (ko) | 시각 지원 보조 시스템 및 방법 | |
JP2023049253A (ja) | 視覚障碍者歩行支援装置、視覚障碍者歩行支援端末、視覚障碍者歩行支援方法、及びプログラム | |
KR20110006062A (ko) | 얼굴 인식 시스템 및 얼굴 인식 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |