KR20190111262A - Portable device for measuring distance from obstacle for blind person - Google Patents

Portable device for measuring distance from obstacle for blind person Download PDF

Info

Publication number
KR20190111262A
KR20190111262A KR1020180033172A KR20180033172A KR20190111262A KR 20190111262 A KR20190111262 A KR 20190111262A KR 1020180033172 A KR1020180033172 A KR 1020180033172A KR 20180033172 A KR20180033172 A KR 20180033172A KR 20190111262 A KR20190111262 A KR 20190111262A
Authority
KR
South Korea
Prior art keywords
obstacle
distance measuring
user
measuring terminal
distance
Prior art date
Application number
KR1020180033172A
Other languages
Korean (ko)
Inventor
김한실
Original Assignee
울산대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 울산대학교 산학협력단 filed Critical 울산대학교 산학협력단
Priority to KR1020180033172A priority Critical patent/KR20190111262A/en
Publication of KR20190111262A publication Critical patent/KR20190111262A/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
    • A61F9/00—Methods or devices for treatment of the eyes; Devices for putting-in contact lenses; Devices to correct squinting; Apparatus to guide the blind; Protective devices for the eyes, carried on the body or in the hand
    • A61F9/08—Devices or methods enabling eye-patients to replace direct visual perception by another kind of perception
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H3/00—Appliances for aiding patients or disabled persons to walk about
    • A61H3/06—Walking aids for blind persons
    • A61H3/061—Walking aids for blind persons with electronic detecting or guiding means
    • G01S17/023—
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06—Systems determining position data of a target
    • G01S17/08—Systems determining position data of a target for measuring distance only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/247—Telephone sets including user guidance or feature selection means facilitating their use
    • H04M1/2474—Telephone terminals specially adapted for disabled people
    • H04M1/2476—Telephone terminals specially adapted for disabled people for a visually impaired user
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50—Control means thereof
    • A61H2201/5007—Control means thereof computer controlled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50—Control means thereof
    • A61H2201/5023—Interfaces to the user
    • A61H2201/5048—Audio interfaces, e.g. voice or music controlled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00—Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50—Control means thereof
    • A61H2201/5058—Sensors or detectors
    • A61H2201/5064—Position sensors

Abstract

Disclosed is a device for measuring the distance from an obstacle for blind persons. The device comprises: a camera unit for taking an image of the user′s gaze direction; a detection unit for analyzing the image and detecting an obstacle in the moving path of the user; a distance measurement unit for measuring the distance between the obstacle and the user; a signal generation unit for generating a visual assistance signal using the measured distance; and a transmission unit for transmitting the generated visual assistance signal to the user.

Description

시각 장애인을 위한 장애물 거리 측정 단말기{PORTABLE DEVICE FOR MEASURING DISTANCE FROM OBSTACLE FOR BLIND PERSON}PORTABLE DEVICE FOR MEASURING DISTANCE FROM OBSTACLE FOR BLIND PERSON}

아래 실시예들은 시각 장애인을 위한 스마트 안경에 관한 것으로, 보다 상세하게는 장애물이나 지형지물을 인식하여 사용자에게 인지시켜주는 안경에 관한 것이다.The embodiments below relate to smart glasses for the visually impaired, and more particularly, to glasses that recognize and recognize an obstacle or a feature.

일반적으로 시각 장애인들은 주위 환경을 감지하기 위해서 시각장애인용 지팡이를 사용한다. 하지만 이는 원거리에 있는 물체에 대해서는 감지하기 어렵고 근접한 물체라도 접촉에 의해서만 감지가 가능한 실정이다.In general, the visually impaired use a walking stick for the visually impaired. However, this is difficult to detect a remote object and even close objects can be detected only by contact.

시각 장애인들은 보행을 할 때 주변의 장애물 유무를 판단하기 위해서 안내봉(또는 지팡이)을 주로 사용한다. 시각 장애인들은 종래의 안내봉을 이용해서 지면 및 주변 장애물과 직접적으로 접촉하여 보행을 방해하는 장애물을 감지하였으며, 최근에는 시각 장애인의 보행에 필요한 정보를 특정한 신호음이나 진동 등을 출력하여 장애물의 유무를 알려주는 좀 더 개선된 전자식 안내봉이 사용되고 있다.Blind people often use guide rods (or walking sticks) when walking to determine the presence of obstacles in their surroundings. Visually impaired people have detected obstacles that prevent walking by directly contacting the ground and surrounding obstacles using conventional guide rods. More advanced electronic guides are being used.

종래 시각 장애인들이 안내봉을 이용해서 장애물을 확인할 경우, 사용자가 안내봉을 제대로 짚지 못하면 안정적으로 장애물을 검색할 수 없다. 이를 개선하기 위한 전자식 센서를 구비한 안내봉은 장애물 검출 정보를 처리하는 소정의 처리 장치를 별도로 구비하고, 처리 장치에서 출력된 장애물의 유무를 확인시켜주는 신호음 등 결과 메시지를 수신할 수 있다.When the visually impaired person checks the obstacle using the guide rod, the user cannot stably search for the obstacle if the user does not properly touch the guide rod. The guide rod having an electronic sensor for improving this may be separately provided with a predetermined processing device for processing obstacle detection information, and may receive a result message such as a beep sound confirming the presence or absence of an obstacle output from the processing device.

하지만, 전자식 안내봉은 센싱 범위가 극히 제한적일 뿐만 아니라 장애인이 센서를 어떻게 조종하느냐에 따라 장애물에 관한 정보가 크게 달라질 수 있다. 또한, 안내봉을 사용하기 위해서 여러 가지 내부 구성들이 필수적으로 구비되어야 하므로 안내봉의 부피가 커지고 중량이 무거워져서 장애인이 휴대하기에 불편함이 있다.However, the electronic guide rod has a very limited sensing range, and information on obstacles can vary greatly depending on how the handicapped person controls the sensor. In addition, in order to use the guide rods must be provided with a variety of internal configuration is essential because the guide rod is bulky and heavy weight is inconvenient to carry the disabled.

종래의 시각 장애인 보조 기기들은 안경 자체에 IT 기술이 접목되어 제작되는 경우가 일반적이지만, 본 발명에서는 장애물을 감지하여 시각 장애인의 안전 보행을 도모하기 위해 기존의 안경 또는 선글라스에 간편하게 부착하여 장애물을 효과적으로 감지할 수 있는 새로운 기술을 제안하고자 한다.Conventional visual aids are generally manufactured by incorporating IT technology into the glasses themselves, but in the present invention, the obstacles are effectively attached to existing glasses or sunglasses in order to detect obstacles and promote safety of the visually impaired. We will propose a new technology that can be detected.

일 실시예에 따르면, 장애물 거리 측정 단말기는 사용자의 시선 방향의 영상을 촬영하는 카메라부, 상기 영상을 분석하여, 상기 사용자의 이동 경로에 있는 장애물을 감지하는 감지부, 상기 장애물과 상기 사용자 간의 거리를 측정하는 거리 측정부, 상기 측정된 거리를 이용해서 시각 보조 신호를 생성하는 신호 생성부 및 상기 생성된 시각 보조 신호를 사용자에게 전달하는 전달부를 포함할 수 있다.According to an embodiment, the obstacle distance measuring terminal may include a camera unit for capturing an image in a user's gaze direction, a sensor configured to analyze the image to detect an obstacle in the moving path of the user, and a distance between the obstacle and the user. The apparatus may include a distance measuring unit measuring a, a signal generator generating a visual aid signal using the measured distance, and a transmission unit transmitting the generated visual aid signal to a user.

이때, 다른 일 실시예에 따르면, 상기 카메라부는 복수 개의 이미지 센서를 포함할 수 있으며, 장애물 거리 측정 단말기는 이미지 센서를 통해서 장애물의 3D 영상을 획득할 수 있다.In this case, according to another exemplary embodiment, the camera unit may include a plurality of image sensors, and the obstacle distance measuring terminal may acquire a 3D image of the obstacle through the image sensor.

또 다른 일 실시예에 따르면, 감지부는, 상기 촬영된 영상을 분석하여 상기 장애물의 종류를 인식하는 인식부 및 상기 인식부를 통해 인식한 상기 장애물의 정보를 이용하여 위험도를 설정하는 위험도 설정부를 포함할 수 있다.According to another embodiment, the detection unit may include a recognition unit for analyzing the captured image to recognize the type of the obstacle and a risk setting unit for setting the risk using the information of the obstacle recognized by the recognition unit. Can be.

또 다른 일 실시예에 따르면, 상기 거리 측정부는 거리 측정을 위한 레이저를 방사하는 레이저 모듈 및 상기 레이저의 상기 장애물로부터의 반사광을 통해 상기 장애물과 상기 사용자 간의 거리를 계산하는 거리 계산부를 포함할 수 있다.According to another embodiment, the distance measuring unit may include a laser module for emitting a laser for distance measurement and a distance calculator for calculating a distance between the obstacle and the user through the reflected light from the obstacle of the laser. .

또 다른 일 실시예에 따르면, 신호 생성부는 미리 정해진 거리에 대응하는 상기 시각 보조 신호를 생성할 수 있다.According to another embodiment, the signal generator may generate the visual assistance signal corresponding to a predetermined distance.

또 다른 일 실시예에 따르면, 거리 측정 단말기는 상기 사용자의 위치 좌표를 획득하는 위치 감지 센서 및 상기 사용자의 시선 방향을 센싱하는 자이로센서를 더 포함할 수 있다. 이때, 신호 생성부는 전자 지도에서 제공되는 위치 정보를 이용해서 상기 시각 보조 신호를 생성할 수 있다.According to another embodiment, the distance measuring terminal may further include a position sensor for obtaining the position coordinates of the user and a gyro sensor for sensing the gaze direction of the user. In this case, the signal generator may generate the visual assistance signal using location information provided from the electronic map.

또 다른 일 실시예에 따르면, 상기 전달부는 스피커, 골전도 스피커 및 바이브레이터 중 적어도 하나를 포함할 수 있다.According to another embodiment, the transfer unit may include at least one of a speaker, a bone conduction speaker, and a vibrator.

또 다른 일 실시예에 따르면, 상기 거리 측정 단말기는 안경, 선글라스 및 고글을 포함하는 안경 류에 탈부착이 가능한 모듈 형태로 제작될 수 있다.According to another embodiment, the distance measuring terminal may be manufactured in the form of a module that can be attached to and detached glasses, including glasses, sunglasses and goggles.

본 발명에 따르면, 시각 장애인들은 기존에 착용하던 안경에 부착해서 장애물을 감지하므로, 리소스가 절약되는 효과가 있다.According to the present invention, since the visually impaired person detects obstacles by attaching to glasses that are previously worn, the resource is saved.

또한, 본 발명에 따르면, 장애물의 거리에 따라 시각 보조 신호가 변화되도록 함으로써 사용자가 용이하게 장애물 거리를 감지할 수 있도록 하는 효과가 있다.In addition, according to the present invention, there is an effect that the user can easily detect the obstacle distance by changing the visual aid signal according to the distance of the obstacle.

또한, 본 발명에 따르면, 시각 장애인이 다른 사람의 도움 없이도 보행이 가능한 효과를 기대할 수 있다.In addition, according to the present invention, the visually impaired person can expect the effect of walking without the help of others.

또한, 본 발명에 따르면, 시각 장애인용 거리 측정 단말기는 시각 장애자가 옥외를 보행할 때의 안전을 높여 상해의 유무에 관련되지 않고 비슷하게 생활할 수 있는 성숙한 사회에 필요한 기구의 하나를 제공한다.In addition, according to the present invention, the distance measuring terminal for the visually impaired provides one of the mechanisms necessary for a mature society that can improve the safety of the visually impaired when walking outdoors to live similarly regardless of the presence or absence of injury.

도 1은 일 실시예에 따른 장애물 거리 측정 단말기를 설명하기 위한 블록도이다.
도 2는 일 실시예에 따른 장애물 거리 측정 단말기의 구성을 설명하기 위한 도면이다.
도 3은 다른 일 실시예에 따른 복수 개의 카메라를 구비한 장애물 거리 측정 단말기의 구성을 설명하기 위한 도면이다.
도 4는 일 실시예에 따른 장애물 거리 측정 단말기의 동작을 설명하기 위한 도면이다.
도 5는 일 실시예에 따른 장애물 거리 측정 단말기의 위치 정보를 이용한 동작을 설명하기 위한 도면이다.1 is a block diagram illustrating an obstacle distance measuring terminal according to an exemplary embodiment.
2 is a diagram illustrating a configuration of an obstacle distance measuring terminal according to an exemplary embodiment.
3 is a diagram for describing a configuration of an obstacle distance measuring terminal having a plurality of cameras according to another exemplary embodiment.
4 is a diagram illustrating an operation of an obstacle distance measuring terminal according to an exemplary embodiment.
5 is a diagram illustrating an operation using location information of an obstacle distance measuring terminal according to an exemplary embodiment.

본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시예들에 대해서 특정한 구조적 또는 기능적 설명들은 단지 본 발명의 개념에 따른 실시예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시예들은 다양한 형태로 실시될 수 있으며 본 명세서에 설명된 실시예들에 한정되지 않는다.Specific structural or functional descriptions of the embodiments according to the inventive concept disclosed herein are merely illustrated for the purpose of describing the embodiments according to the inventive concept, and the embodiments according to the inventive concept. These may be embodied in various forms and are not limited to the embodiments described herein.

본 발명의 개념에 따른 실시예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시예들을 도면에 예시하고 본 명세서에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시예들을 특정한 개시형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물, 또는 대체물을 포함한다.Embodiments according to the inventive concept may be variously modified and have various forms, so embodiments are illustrated in the drawings and described in detail herein. However, this is not intended to limit the embodiments in accordance with the concept of the present invention to specific embodiments, it includes all changes, equivalents, or substitutes included in the spirit and scope of the present invention.

제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만, 예를 들어 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.Terms such as first or second may be used to describe various components, but the components should not be limited by the terms. The terms are only for the purpose of distinguishing one component from another component, for example, without departing from the scope of the rights according to the inventive concept, the first component may be called a second component, Similarly, the second component may also be referred to as the first component.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in the commonly used dictionaries should be construed as having meanings consistent with the meanings in the context of the related art, and are not construed in ideal or excessively formal meanings unless expressly defined herein. Do not.

이하, 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, exemplary embodiments will be described in detail with reference to the accompanying drawings.

도 1은 일 실시예에 따른 장애물 거리 측정 단말기를 설명하기 위한 블록도이다.1 is a block diagram illustrating an obstacle distance measuring terminal according to an exemplary embodiment.

도 1을 참조하면, 일 실시예에 따른 장애물 거리 측정 단말기(100)는 카메라부(110), 감지부(120), 거리 측정부(130), 신호 생성부(140) 및 전달부(150)를 포함할 수 있다.Referring to FIG. 1, the obstacle distance measuring terminal 100 according to an exemplary embodiment may include a camera unit 110, a detector 120, a distance measurer 130, a signal generator 140, and a transmitter 150. It may include.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 카메라부(110)는 사용자의 시선 방향 영상을 촬영할 수 있다.According to an embodiment, the camera unit 110 of the obstacle distance measuring terminal 100 may capture an image of the user's gaze direction.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)는 안경, 선글라스 및 고글을 포함하는 안경 류에 탈부착이 가능한 모듈 형태로 제작될 수 있다. 이때, 장애물 거리 측정 단말기(100)의 카메라부(110)는 사용자의 시선 방향으로 부착되도록 할 수 있다.According to one embodiment, the obstacle distance measuring terminal 100 may be manufactured in the form of a module that can be attached to and detached glasses, including glasses, sunglasses and goggles. At this time, the camera unit 110 of the obstacle distance measuring terminal 100 may be attached in the direction of the user's eyes.

다른 일 실시예에 따르면, 장애물 거리 측정 단말기(100)는 안경 형태로 제작되어 사용자가 착용할 수도 있다. 이때, 카메라부(110)는 사용자의 시선 방향을 촬영하도록 제작될 수 있다.According to another exemplary embodiment, the obstacle distance measuring terminal 100 may be manufactured in the form of glasses and worn by a user. In this case, the camera unit 110 may be manufactured to photograph the user's gaze direction.

일 실시예에 따르면, 카메라부(110)는 장애물로부터 반사된 광을 검출하여 영상 신호로 출력하는 구성으로서, CCD 센서 또는 CMOS 센서 중 어느 하나를 이용할 수 있다.According to an embodiment, the camera unit 110 detects the light reflected from the obstacle and outputs the image signal. The camera unit 110 may use either a CCD sensor or a CMOS sensor.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 감지부(120)는 카메라부(110)로부터 촬영된 영상을 분석하여, 사용자의 이동 경로에 있는 장애물을 감지할 수 있다. 여기서 사용자의 이동 경로는 사용자의 시선 방향에서 오차 범위를 제외하여 결정할 수 있다.According to an embodiment, the sensing unit 120 of the obstacle distance measuring terminal 100 may detect an obstacle in a user's moving path by analyzing an image captured by the camera unit 110. In this case, the movement path of the user may be determined by excluding an error range in the direction of the user's eyes.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 감지부(120)는 카메라부(110)로부터 촬영된 영상의 이미지를 이전에 촬영된 이미지와 비교하여 일정 시간 내에 사용자의 이동 경로에 있는지 여부를 감지할 수 있다.According to an embodiment of the present disclosure, the sensing unit 120 of the obstacle distance measuring terminal 100 compares an image of an image photographed by the camera unit 110 with a previously photographed image to determine whether the user is in a moving path within a predetermined time. Can be detected.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 감지부(120)는 카메라부(110)로부터 촬영된 영상을 분석하여 장애물의 종류를 인식하는 인식부 및 인식된 장애물의 정보를 이용하여 장애물의 위험도를 설정하는 위험도 설정부를 포함할 수 있다. 예를 들면, 카메라부(110)로부터 촬영된 영상의 이미지를 인공지능을 통해 인식하여 사용자의 이동 경로에 있는 장애물이 무엇인지 인식할 수 있다. 이때, 인식된 장애물이 뾰족한 물건이거나, 빠르게 움직이는 물건이거나, 위험한 생물체인 경우 등을 파악하여 위험도를 설정할 수 있다.According to an embodiment of the present disclosure, the sensing unit 120 of the obstacle distance measuring terminal 100 analyzes an image photographed by the camera unit 110 and recognizes the type of the obstacle and uses the information of the recognized obstacle. It may include a risk setting unit for setting the risk of. For example, the image of the image captured by the camera unit 110 may be recognized through artificial intelligence to recognize what an obstacle in the user's movement path is. At this time, the degree of danger may be set by identifying a case where the recognized obstacle is a sharp object, a fast moving object, or a dangerous creature.

감지부(120)가 장애물을 감지하는 방법에 대해서는 도 4에서 보다 상세하게 설명하도록 한다.A method of detecting the obstacle by the sensor 120 will be described in more detail with reference to FIG. 4.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 거리 측정부(130)는 감지부(120)에서 감지된 장애물과 장애물 거리 측정 단말기(100)를 착용한 사용자 간의 거리를 측정할 수 있다.일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 거리 측정부(130)는 복수 개의 카메라부(110)로부터 획득한 영상을 통해서 장애물의 형상과 거리를 정확하게 측정할 수 있다.According to one embodiment, the distance measuring unit 130 of the obstacle distance measuring terminal 100 may measure the distance between the obstacle detected by the sensing unit 120 and the user wearing the obstacle distance measuring terminal 100. According to an exemplary embodiment, the distance measuring unit 130 of the obstacle distance measuring terminal 100 may accurately measure the shape and the distance of the obstacle through the images acquired from the plurality of camera units 110.

다른 일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 거리 측정부(130)는 레이저 모듈과 카메라부(110) 간의 설치 위치 정보를 저장하고 상기 레이저 모듈의 온/오프 제어에 따라 조사된 거리 측정용 광이 장애물에 반사되어 카메라부(110)에서 수광되면 상기 레이저 모듈과 카메라부(110) 사이의 각도 정보와 이격 거리 정보를 이용하여 상기 카메라부(110)의 화면상에 표시되는 장애물까지의 거리를 삼각 측정법을 이용해서 획득할 수 있다.According to another embodiment, the distance measuring unit 130 of the obstacle distance measuring terminal 100 stores the installation position information between the laser module and the camera unit 110 and the distance irradiated according to the on / off control of the laser module When the measurement light is reflected on the obstacle and received by the camera unit 110, the obstacle is displayed on the screen of the camera unit 110 by using the angle information and the separation distance information between the laser module and the camera unit 110. The distance of can be obtained using triangulation.

다른 일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 거리 측정부(130)는 거리 측정을 위한 레이저를 방사하는 레이저 모듈 및 장애물로부터 반사된 레이저 반사광 촬영하여, 상기 장애물과 상기 사용자 간의 거리를 계산하는 거리 계산부를 포함할 수 있다.According to another exemplary embodiment, the distance measuring unit 130 of the obstacle distance measuring terminal 100 photographs a laser module that emits a laser for distance measurement and laser reflected light reflected from an obstacle, thereby measuring a distance between the obstacle and the user. It may include a distance calculator to calculate.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 신호 생성부(140)는 거리 측정부(130)로부터 측정된 거리를 이용하여, 시각 장애인을 위한 시각 보조 신호를 생성할 수 있다.According to an embodiment, the signal generator 140 of the obstacle distance measuring terminal 100 may generate a visual aid signal for the visually impaired by using the distance measured from the distance measurer 130.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 신호 생성부(140)는 장애물과 사용자 간의 거리를 미리 정해진 거리에 대응시켜 시각 보조 신호를 생성할 수 있다.According to an embodiment of the present disclosure, the signal generator 140 of the obstacle distance measuring terminal 100 may generate a visual assistance signal by corresponding the distance between the obstacle and the user to a predetermined distance.

예를 들면, 장애물 거리 측정 단말기(100)의 신호 생성부(140)는 장애물과 사용자 간의 거리가 4 내지 5m인 경우, 1초 간격의 "삐" 소리를 생성할 수 있다. 다른 예를 들면, 장애물과 사용자 간의 거리가 3 내지 4m인 경우, 0.5초 간격의 "삐" 소리를 생성할 수 있다. 이때, 장애물과 사용자 간의 거리가 점점 더 가까워질수록 신호의 간격을 좁히거나, 신호의 볼륨 또는 주파수를 높일 수 있다.For example, when the distance between the obstacle and the user is 4 to 5 m, the signal generator 140 of the obstacle distance measuring terminal 100 may generate a “beep” sound at one second intervals. As another example, when the distance between the obstacle and the user is 3 to 4m, it is possible to generate a "beep" sound at intervals of 0.5 seconds. In this case, as the distance between the obstacle and the user gets closer, the interval of the signal may be narrowed, or the volume or frequency of the signal may be increased.

다른 예를 들면, 장애물 거리 측정 단말기(100)의 신호 생성부(140)는 장애물과 사용자 간의 거리가 4 내지 5m인 경우, 1초 간격의 진동 신호를 생성할 수 있다. 다른 예를 들면, 장애물과 사용자 간의 거리가 3 내지 4m인 경우, 0.5초 간격의 진동 신호를 생성할 수 있다. 이때, 장애물과 사용자 간의 거리가 점점 더 가까워질수록 진동 신호의 간격을 좁히거나, 진동 신호의 세기를 높일 수 있다.As another example, when the distance between the obstacle and the user is 4 to 5 m, the signal generator 140 of the obstacle distance measuring terminal 100 may generate a vibration signal at one second intervals. As another example, when the distance between the obstacle and the user is 3 to 4m, a vibration signal at 0.5 second intervals may be generated. At this time, as the distance between the obstacle and the user gets closer, the interval of the vibration signal may be narrowed or the strength of the vibration signal may be increased.

또 다른 예를 들면, 장애물 거리 측정 단말기(100)의 신호 생성부(140)는 장애물과 사용자 간의 거리가 5m인 경우, "5m"라는 소리를 생성할 수 있다. 다른 예를 들면, 장애물과 사용자 간의 거리가 4m인 경우, "4m"라는 소리를 생성할 수 있다.As another example, when the distance between the obstacle and the user is 5 m, the signal generator 140 of the obstacle distance measuring terminal 100 may generate a sound “5 m”. For another example, when the distance between the obstacle and the user is 4m, the sound “4m” may be generated.

일 실시예에 따르면, 시각 보조 신호는 소리 또는 진동으로 구성된 신호를 포함할 수 있다.According to an embodiment, the visual assistance signal may include a signal composed of sound or vibration.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 전달부(150)는 신호 생성부(140)를 통해 생성된 시각 보조 신호를 장애물 거리 측정 단말기(100)의 사용자에게 전달할 수 있다.According to an embodiment, the transmitter 150 of the obstacle distance measuring terminal 100 may transmit the visual assistance signal generated through the signal generator 140 to the user of the obstacle distance measuring terminal 100.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 전달부(150)는 스피커, 골전도 스피커 및 바이브레이터 중 적어도 하나를 포함할 수 있다.According to an embodiment, the transmitter 150 of the obstacle distance measuring terminal 100 may include at least one of a speaker, a bone conduction speaker, and a vibrator.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)는 위치 감지 센서(미도시) 및 자이로센서(미도시)를 더 포함할 수 있다.According to an embodiment, the obstacle distance measuring terminal 100 may further include a position sensor (not shown) and a gyro sensor (not shown).

일 실시예에 따른 장애물 거리 측정 단말기(100)의 위치 감지 센서는 장애물 거리 측정 단말기(100) 사용자의 위치 좌표를 획득할 수 있다. 이때, 위치 감지 센서는 GPS 모듈을 포함할 수 있다.The position detection sensor of the obstacle distance measuring terminal 100 may obtain the position coordinates of the user of the obstacle distance measuring terminal 100. In this case, the position detection sensor may include a GPS module.

일 실시예에 따른 장애물 거리 측정 단말기(100)의 자이로센서는 사용자의 시선 방향을 센싱할 수 있다. 예를 들면, 장애물 거리 측정 단말기(100)는 자이로센서를 이용해서 사용자의 시선 방향(이동 방향) 정보를 측정할 수 있다.The gyro sensor of the obstacle distance measuring terminal 100 according to an embodiment may sense the direction of the user's gaze. For example, the obstacle distance measuring terminal 100 may measure the gaze direction (movement direction) information of the user using a gyro sensor.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)의 신호 생성부(140)는 사용자의 위치 좌표와 사용자의 시선 방향을 전자 지도에 적용하여, 이동 경로의 주변 환경을 알려주는 시각 보조 신호를 생성할 수 있다.According to an embodiment, the signal generator 140 of the obstacle distance measuring terminal 100 generates a visual aid signal informing the surrounding environment of the moving path by applying the location coordinates of the user and the gaze direction of the user to the electronic map. can do.

예를 들면, 장애물 거리 측정 단말기(100)의 사용자가 교차로 방향으로 걸어가고 있을 때, 교차로에 도달하기 전에 신호 생성부(140)는 "교차로에 근접했습니다" 라는 시각 보조 신호를 생성할 수 있다.For example, when the user of the obstacle distance measuring terminal 100 is walking in the direction of the intersection, the signal generator 140 may generate a visual assistance signal "near to the intersection" before reaching the intersection.

다른 예를 들면, 장애물 거리 측정 단말기(100)의 사용자가 공원에서 호수 방향으로 걸어가고 있을 때, 호수에 도달하기 전에 신호 생성부(140)는 "호수에 근접했습니다" 라는 시각 보조 신호를 생성할 수 있다.For another example, when the user of the obstacle distance measuring terminal 100 is walking in the direction of the lake in the park, the signal generator 140 may generate a visual aid signal "close to the lake" before reaching the lake. Can be.

일 실시예에 따르면, 장애물 거리 측정 단말기(100)는 안경, 선글라스 및 고글을 포함하는 모든 안경 류의 장치에 탈부착이 가능한 모듈 형태로 제작될 수 있다. 따라서, 시각 장애인들이 기존에 사용하던 선글라스나 안경에 부착하여 활용함으로써 리소스를 절약할 수 있다.According to one embodiment, the obstacle distance measuring terminal 100 may be manufactured in the form of a module that can be attached and detached to all eyeglasses including glasses, sunglasses and goggles. Therefore, it is possible to save resources by attaching to the sunglasses or glasses used by the visually impaired.

도 2는 일 실시예에 따른 장애물 거리 측정 단말기의 구성을 설명하기 위한 도면이다.2 is a diagram illustrating a configuration of an obstacle distance measuring terminal according to an exemplary embodiment.

일 실시예에 따르면, 장애물 거리 측정 단말기는 시각 장애인들이 기존에 사용하던 선글라스나 안경(200)에 부착할 수 있도록 카메라부(110)를 포함하는 본체(210)와 전달부(150)를 포함할 수 있다. 이때, 본체(210)와 전달부(150)는 하나의 모듈로 구성될 수도 있다.According to an embodiment, the obstacle distance measuring terminal may include a main body 210 and a transmission unit 150 including the camera unit 110 so that the visually impaired person may attach to the sunglasses or glasses 200 previously used. Can be. At this time, the main body 210 and the delivery unit 150 may be configured as a single module.

도면에서 카메라부(110)는 안경(200)의 측면에 위치하도록 도시되어 있으나, 이에 한정되지 아니하고, 안경(200)의 코 받침 주변에 상당하는 중앙부에 위치할 수도 있다.In the drawing, the camera unit 110 is illustrated to be positioned on the side of the glasses 200, but is not limited thereto. The camera unit 110 may be located at a central portion corresponding to the nose of the glasses 200.

일 실시예에 따르면, 장애물 거리 측정 단말기의 전달부(150)는 스피커, 골전도 스피커 및 바이브레이터 중 적어도 하나를 포함할 수 있다. 이때, 도 2에서는 우측 귀 받힘 부분에 전달부(150)가 위치하는 것으로 도시되어 있으나, 이에 한정되지 아니하며, 다른 위치 또는 이어폰 형태로 위치할 수도 있다.According to an embodiment, the transmission unit 150 of the obstacle distance measuring terminal may include at least one of a speaker, a bone conduction speaker, and a vibrator. At this time, in Figure 2 is shown that the transmission unit 150 is located in the right ear receiving portion, but is not limited to this, it may be located in a different position or earphone form.

일실시예에 따르면 장애물 거리 측정 단말기의 본체(210)는 카메라부(110), 감지부, 거리 측정부, 신호 생성부, 위치 감지 센서 및 자이로센서를 포함할 수 있다.According to an embodiment, the main body 210 of the obstacle distance measuring terminal may include a camera unit 110, a sensing unit, a distance measuring unit, a signal generator, a position sensor, and a gyro sensor.

일 실시예에 따르면, 장애물 거리 측정 단말기는 안경(200)에 부착되어 전방 장애물의 종류, 거리 및 위치를 파악하여 시각 보조 신호를 생성하여 전달부(150)를 통해서 사용자에게 알려줄 수 있다.According to an embodiment of the present disclosure, the obstacle distance measuring terminal may be attached to the glasses 200 to identify the type, distance, and position of the front obstacle to generate a visual assistance signal, and notify the user through the transmission unit 150.

일 실시예에 따르면, 장애물 거리 측정 단말기의 카메라부(110)는 사용자의 시선 방향 영상을 촬영할 수 있다. 이때, 장애물 거리 측정 단말기의 카메라부(110)는 사용자의 시선 방향으로 부착되도록 할 수 있다.According to an embodiment of the present disclosure, the camera unit 110 of the obstacle distance measuring terminal may capture an image of the gaze direction of the user. In this case, the camera unit 110 of the obstacle distance measuring terminal may be attached in the direction of the line of sight of the user.

장애물 거리 측정 단말기의 거리 측정부는 카메라부(110)로부터 획득한 이미지를 분석하여 장애물까지의 거리를 산출할 수 있다. 예를 들면, 레이저 모듈에서 출력된 광원이 확산렌즈를 거져 방사되면 장애물에 반사되는 위치에 따라 평행광이 발생하게 되고, 카메라부(110)가 촬영한 이미지 상에 표시된다.The distance measuring unit of the obstacle distance measuring terminal may calculate the distance to the obstacle by analyzing the image acquired from the camera unit 110. For example, when the light source output from the laser module is radiated through the diffusion lens, parallel light is generated according to the position reflected by the obstacle, and the camera unit 110 is displayed on the captured image.

장애물 거리 측정 단말기의 거리 측정부는 미리 설정된 레이저 모듈과 카메라부(110)의 각도 정보, 이격 거리 정보 등을 이용하여 삼각 측정 계산을 통해 이미지 상에서 평행광 이미지까지의 거리 정보를 산출할 수 있다.The distance measuring unit of the obstacle distance measuring terminal may calculate distance information from the image to the parallel light image through triangulation measurement using angle information and separation distance information of the preset laser module and the camera unit 110.

즉 장애물의 굴곡으로 인하여 발생되는 평행광 이미지가 카메라부(110)의 이미지에 서로 다른 영역에 표시되므로 거리 측정부는 평행광 이미지 간의 거리를 산출하고, 상기 산출된 평행광 이미지 사이의 거리 차로부터 장애물까지의 거리를 알 수 있다.That is, since the parallel light image generated by the bending of the obstacle is displayed in different areas in the image of the camera unit 110, the distance measuring unit calculates the distance between the parallel light images, and the obstacle from the distance difference between the calculated parallel light images. You can see the distance.

일 실시예에 따르면, 장애물 거리 측정 단말기는 혈압 또는 맥박을 측정하기 위한 압력 센서, 체온을 측정하는 온도 센서를 더 포함할 수 있다. 다른 일 실시예에 따르면, 장애물 거리 측정 단말기는 땀센서, 지문센서, 적외선센서, 중력센서, 가속도센서, 자이로스코프센서, 모션센서, 지자기센서, 조도센서, 터치센서, 음성인식센서 등 다양한 센서가 포함될 수 있다.According to one embodiment, the obstacle distance measuring terminal may further include a pressure sensor for measuring blood pressure or pulse, and a temperature sensor for measuring body temperature. According to another exemplary embodiment, the obstacle distance measuring terminal may include various sensors such as a sweat sensor, a fingerprint sensor, an infrared sensor, a gravity sensor, an acceleration sensor, a gyroscope sensor, a motion sensor, a geomagnetic sensor, an illuminance sensor, a touch sensor, and a voice recognition sensor. May be included.

일 실시예에 따르면, 장애물 거리 측정 단말기의 전달부(150)는 안경에 부착된 스피커 또는 골전도 스피커 또는 바이브레이터를 포함할 수 있으며, 이어폰 형태로 연결될 수도 있다.According to an embodiment, the transmission unit 150 of the obstacle distance measuring terminal may include a speaker or a bone conduction speaker or a vibrator attached to the glasses, and may be connected in the form of an earphone.

도 3은 다른 일 실시예에 따른 복수 개의 카메라를 구비한 장애물 거리 측정 단말기의 구성을 설명하기 위한 도면이다.3 is a diagram for describing a configuration of an obstacle distance measuring terminal having a plurality of cameras according to another exemplary embodiment.

일 실시예에 따르면, 복수 개의 카메라를 구비한 장애물 거리 측정 단말기는 시각 장애인들이 기존에 사용하던 선글라스나 안경(300)에 부착할 수 있도록 제1 본체(310), 제2 본체(320) 제1 전달부(330)와 제2 전달부(340)를 포함할 수 있다.According to an embodiment of the present disclosure, the obstacle distance measuring terminal having a plurality of cameras may be attached to the first body 310 and the second body 320 so that the visually impaired person may attach to the sunglasses or glasses 300 previously used. It may include a transfer unit 330 and the second transfer unit 340.

일 실시예에 따르면, 장애물 거리 측정 단말기의 전달부(150)는 스피커, 골전도 스피커 및 바이브레이터 중 적어도 하나를 포함할 수 있다. 이때, 도 3에서는 좌/우측 귀 받힘 부분에 전달부(330, 340)가 위치하는 것으로 도시되어 있으나, 이에 한정되지 아니하며, 다른 위치 또는 이어폰 형태로 위치할 수도 있다.According to an embodiment, the transmission unit 150 of the obstacle distance measuring terminal may include at least one of a speaker, a bone conduction speaker, and a vibrator. In this case, in FIG. 3, the transmission parts 330 and 340 are positioned at the left / right ear receiving parts, but the present invention is not limited thereto and may be located in other positions or earphones.

일실시예에 따르면 장애물 거리 측정 단말기의 본체(310, 320)는 제1 본체와 제2 본체 간의 무게를 고려하여 카메라부(110), 감지부, 거리 측정부, 신호 생성부, 위치 감지 센서 및 자이로센서를 나누어 포함할 수 있다.According to an embodiment, the main body 310 or 320 of the obstacle distance measuring terminal may include a camera unit 110, a sensing unit, a distance measuring unit, a signal generating unit, a position detecting sensor, in consideration of the weight between the first main body and the second main body. The gyro sensor can be divided and included.

일 실시예에 따르면 장애물 거리 측정 단말기의 카메라부(110)는 복수 개의 이미지 센서를 포함할 수 있다. 따라서, 복수 개의 이미지 센서를 이용해서 장애물 거리 측정 단말기의 카메라부(110)는 장애물의 3D 영상을 획득할 수 있다.According to an embodiment, the camera unit 110 of the obstacle distance measuring terminal may include a plurality of image sensors. Accordingly, the camera unit 110 of the obstacle distance measuring terminal may acquire a 3D image of the obstacle using a plurality of image sensors.

일 실시예에 따르면, 장애물 거리 측정 단말기는 복수의 카메라부와 시각 보조 신호를 형성하는 신호 생성부를 포함하고, 상기 시각 보조 신호를 사용자에게 전달하는 전달부를 포함할 수 있다. 복수의 카메라부를 이용해서 피사체인 장애물을 검출하고, 그 검출 결과를 기본으로 형성된 시각 보조 신호에 따라 사용자인 시각 장애인에게 장애물의 유무 또는 거리를 전달할 수 있다.According to an embodiment, the obstacle distance measuring terminal may include a signal generator configured to form a visual assistance signal with a plurality of camera units, and may include a transmitter configured to transmit the visual assistance signal to a user. An obstacle as a subject may be detected using a plurality of camera units, and the presence or absence of an obstacle or a distance may be transmitted to a visually-impaired person who is a user according to a visual assistance signal formed based on the detection result.

일 실시예에 따르면, 전달부는 외이를 경유시키지 않고 두골을 거쳐 시각 장애자의 내이에 직접 전할 수 있는 골전도 수단을 포함할 수 있다. 이때, 골전도 수단을 이용하면, 통상의 소리를 듣는 것을 방해하지 않고, 시각 장애인의 지팡이가 닿지 않는 범위에 있는 장애물을 검지할 수 있어 안전성이 향상될 수 있다.According to one embodiment, the delivery unit may include bone conduction means capable of delivering directly to the inner ear of the visually impaired via the skull without passing through the outer ear. At this time, by using the bone conduction means, it is possible to detect an obstacle in a range not reachable by the cane of the visually impaired without disturbing the normal sound, thereby improving safety.

도 4는 일 실시예에 따른 장애물 거리 측정 단말기의 동작을 설명하기 위한 도면이다.4 is a diagram illustrating an operation of an obstacle distance measuring terminal according to an exemplary embodiment.

도 4를 참조하면, 장애물 거리 측정 단말기가 장애물을 판단하는 방법과 장애물의 거리에 따라 시각 보조 신호를 생성하는 방법이 개시되어 있다.Referring to FIG. 4, a method of determining an obstacle by an obstacle distance measuring terminal and a method of generating a visual assistance signal according to a distance of an obstacle are disclosed.

일 실시예에 따르면, 장애물 거리 측정 단말기(400)는 사용자의 시선 방향의 이미지를 획득할 수 있다. 이때, 시간에 따른 이미지들을 통해서 사용자의 시야에 존재하는 장애물(411, 412, 413) 중 사용자의 이동 방향에 대응하는 장애물(411)의 존재를 확인할 수 있다.According to an exemplary embodiment, the obstacle distance measuring terminal 400 may acquire an image in a user's gaze direction. In this case, the presence of the obstacle 411 corresponding to the moving direction of the user among the obstacles 411, 412, and 413 existing in the user's field of view may be confirmed through the images over time.

일 실시예에 따르면, 장애물 거리 측정 단말기(400)는 인공지능을 통해 사용자의 시야에 존재하는 장애물(411, 412, 413)의 종류를 인식할 수 있다. 예를 들면, 도 4의 장애물(411)이 전봇대인 것을 축적된 데이터들과 이미지 비교를 통해서 알 수 있다.According to an exemplary embodiment, the obstacle distance measuring terminal 400 may recognize types of obstacles 411, 412, and 413 existing in a user's field of vision through artificial intelligence. For example, it can be seen that the obstacle 411 of FIG. 4 is a power pole through image comparison with the accumulated data.

도 4(a)에서, 일 실시예에 따르면, 장애물 거리 측정 단말기(400)와 사용자의 이동 방향에 존재하는 장애물(411) 간에 거리가 5m인 것을 가정할 수 있다. 예를 들면, 장애물 거리 측정 단말기(400)의 신호 생성부는 장애물(411)과 사용자 간의 거리가 5m 이내로 들어온 경우, 1초 간격의 "삐" 소리를 생성하여 전달부를 통해서 사용자에게 전달할 수 있다. 다른 예를 들면, 장애물 거리 측정 단말기(400)의 신호 생성부는 장애물(411)과 사용자 간의 거리가 5m 이내로 들어온 경우, 1초 간격의 진동 신호를 생성하여 전달부를 통해서 사용자에게 전달할 수 있다. 또 다른 예를 들면, 장애물 거리 측정 단말기(100)의 신호 생성부(140)는 장애물과 사용자 간의 거리가 5m인 경우, "5m"라는 소리를 생성하여 전달부를 통해서 사용자에게 전달할 수 있다.In FIG. 4A, according to an embodiment, it may be assumed that the distance between the obstacle distance measuring terminal 400 and the obstacle 411 existing in the moving direction of the user is 5 m. For example, when the distance between the obstacle 411 and the user is within 5 m, the signal generator of the obstacle distance measuring terminal 400 may generate a “beep” sound at a 1 second interval and transmit the sound to the user through the transmission unit. As another example, when the distance between the obstacle 411 and the user is within 5 m, the signal generator of the obstacle distance measuring terminal 400 may generate a vibration signal at a 1 second interval and transmit the generated vibration signal to the user. As another example, when the distance between the obstacle and the user is 5m, the signal generator 140 of the obstacle distance measuring terminal 100 may generate a sound “5m” and transmit the sound to the user through the transmission unit.

도 4(b)에서, 일 실시예에 따르면, 장애물 거리 측정 단말기(400)와 사용자의 이동 방향에 존재하는 장애물(421) 간에 거리가 3m인 것을 가정할 수 있다.In FIG. 4B, according to an embodiment, it may be assumed that the distance between the obstacle distance measuring terminal 400 and the obstacle 421 existing in the moving direction of the user is 3 m.

예를 들면, 장애물(421)과 사용자 간의 거리가 3m 이내로 들어온 경우, 0.5초 간격의 "삐" 소리를 생성하여 전달부를 통해서 사용자에게 전달할 수 있다.. 이때, 장애물(421)과 사용자 간의 거리가 점점 더 가까워질수록 소리 신호의 간격을 좁히거나, 소리 신호의 볼륨 또는 주파수를 높일 수 있다. 다른 예를 들면, 장애물(421)과 사용자 간의 거리가 3m 이내로 들어온 경우, 0.5초 간격의 진동 신호를 생성하여 전달부를 통해서 사용자에게 전달할 수 있다. 이때, 장애물(421)과 사용자 간의 거리가 점점 더 가까워질수록 진동 신호의 간격을 좁히거나, 진동 신호의 세기를 높일 수 있다. 다른 예를 들면, 장애물(421)과 사용자 간의 거리가 3m인 경우, "3m"라는 소리를 생성하여 전달부를 통해서 사용자에게 전달할 수 있다.For example, when the distance between the obstacle 421 and the user is within 3m, it can generate a "beep" sound of 0.5 seconds interval and transmit it to the user through the transmission unit. In this case, the distance between the obstacle 421 and the user As you get closer, you can narrow the interval of the sound signal, or increase the volume or frequency of the sound signal. For another example, when the distance between the obstacle 421 and the user enters within 3m, it can generate a vibration signal of 0.5 seconds interval and transmit it to the user through the transmission unit. At this time, as the distance between the obstacle 421 and the user gets closer, the interval of the vibration signal may be narrowed or the strength of the vibration signal may be increased. For another example, when the distance between the obstacle 421 and the user is 3m, a sound of "3m" may be generated and transmitted to the user through the transmission unit.

일 실시예에 따르면, 장애물 거리 측정 단말기(400)는 카메라로 수집한 외부 상황을 자동으로 계산하여 사용자와의 거리를 환산할 수 있다. 이때, 환산된 거리가 멀면 작은 진동을 주고 환산된 거리를 음성으로 알려줄 수 있다. 환산된 거리가 가까워질수록 진동은 커지고 미리 정해진 거리마다 환산된 거리를 음성으로 알려줄 수 있다.According to an embodiment of the present disclosure, the obstacle distance measuring terminal 400 may automatically calculate an external situation collected by the camera and convert the distance from the user. In this case, when the converted distance is far, a small vibration may be given and the converted distance may be notified by voice. As the converted distance gets closer, the vibration increases, and the converted distance for each predetermined distance may be spoken.

다른 일 실시예에 따르면, 장애물 거리 측정 단말기(400)는 장애물의 위험도에 근거하여 소리의 높이 또는 길이를 생성할 수 있다. According to another embodiment, the obstacle distance measuring terminal 400 may generate the height or length of the sound based on the risk of the obstacle.

도 5는 일 실시예에 따른 장애물 거리 측정 단말기의 위치 정보를 이용한 동작을 설명하기 위한 도면이다.5 is a diagram illustrating an operation using location information of an obstacle distance measuring terminal according to an exemplary embodiment.

도 5를 참조하면, 사용자(510)의 위치 좌표와 시선 방향이 표시된 전자 지도를 확인할 수 있다.Referring to FIG. 5, the electronic map displaying the location coordinates and the gaze direction of the user 510 may be checked.

일 실시예에 따르면, 장애물 거리 측정 단말기는 위치 감지 센서 및 자이로센서를 포함할 수 있다. 일 실시예에 따른 장애물 거리 측정 단말기의 위치 감지 센서는 장애물 거리 측정 단말기 사용자의 위치 좌표를 획득할 수 있다. 이때, 위치 감지 센서는 GPS 모듈을 포함할 수 있다.According to an embodiment, the obstacle distance measuring terminal may include a position sensor and a gyro sensor. The position detection sensor of the obstacle distance measuring terminal according to an embodiment may acquire the position coordinates of the user of the obstacle distance measuring terminal. In this case, the position detection sensor may include a GPS module.

일 실시예에 따른 장애물 거리 측정 단말기의 자이로센서는 사용자의 시선 방향을 센싱할 수 있다. 예를 들면, 장애물 거리 측정 단말기는 자이로센서를 이용해서 사용자의 시선 방향(이동 방향) 정보를 측정할 수 있다.The gyro sensor of the obstacle distance measuring terminal according to an embodiment may sense the direction of the user's gaze. For example, the obstacle distance measuring terminal may measure the gaze direction (movement direction) information of the user using a gyro sensor.

일 실시예에 따르면, 장애물 거리 측정 단말기의 신호 생성부는 사용자(510)의 위치 좌표와 사용자의 시선 방향을 전자 지도에 적용하여, 이동 경로의 주변 환경을 알려주는 시각 보조 신호를 생성할 수 있다.According to an embodiment of the present disclosure, the signal generator of the obstacle distance measuring terminal may generate a visual aid signal indicating the surrounding environment of the moving path by applying the location coordinates of the user 510 and the direction of the user's gaze to the electronic map.

예를 들면, 장애물 거리 측정 단말기의 사용자가 교차로 방향으로 걸어가고 있을 때, 교차로에 도달하기 전에 신호 생성부는 "교차로에 근접했습니다" 라는 소리 신호를 생성할 수 있다.For example, when the user of the obstacle distance measuring terminal is walking in the direction of the intersection, the signal generator may generate a sound signal that is “close to the intersection” before reaching the intersection.

다른 예를 들면, 장애물 거리 측정 단말기의 사용자가 공원에서 호수 방향으로 걸어가고 있을 때, 호수에 도달하기 전에 신호 생성부는 "호수에 근접했습니다" 라는 소리 신호를 생성할 수 있다.In another example, when the user of the obstacle distance measuring terminal is walking in the direction of the lake in the park, the signal generator may generate a sound signal "close to the lake" before reaching the lake.

일 실시예에 따르면, 장애물 거리 측정 단말기는 무선 통신을 이용하여 사용자의 스마트 폰 또는 보호자의 스마트 폰과 연동시켜 시각 보조 신호를 저장할 수 있다. 이때, 저장된 시각 보조 신호를 바탕으로 시각 장애인이 자주 다니는 길의 상황들을 익힐 수 있고 보호자가 사용자의 위치나 상황을 파악할 수 있다.According to an embodiment, the obstacle distance measuring terminal may store the visual assistance signal by interworking with a user's smartphone or a guardian's smartphone using wireless communication. In this case, based on the stored visual aid signal, the visually impaired may frequently learn the road conditions and the guardian may grasp the location or the situation of the user.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The method according to the embodiment may be embodied in the form of program instructions that can be executed by various computer means and recorded in a computer readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the media may be those specially designed and constructed for the purposes of the embodiments, or they may be of the kind well-known and available to those having skill in the computer software arts. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like. The hardware device described above may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.Although the embodiments have been described by the limited embodiments and the drawings as described above, various modifications and variations are possible to those skilled in the art from the above description. For example, the described techniques may be performed in a different order than the described method, and / or components of the described systems, structures, devices, circuits, etc. may be combined or combined in a different form than the described method, or other components. Or even if replaced or substituted by equivalents, an appropriate result can be achieved.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are within the scope of the claims that follow.

100 : 장애물 거리 측정 단말기
110 : 카메라부
120 : 감지부
130 : 거리 측정부
140 : 신호 생성부
150 : 전달부100: obstacle distance measuring terminal
110: camera unit
120: detector
130: distance measuring unit
140: signal generator
150: delivery unit

Claims (8)

사용자의 시선 방향의 영상을 촬영하는 카메라부;
상기 영상을 분석하여, 상기 사용자의 이동 경로에 있는 장애물을 감지하는 감지부;
상기 장애물과 상기 사용자 간의 거리를 측정하는 거리 측정부;
상기 측정된 거리를 이용해서 시각 보조 신호를 생성하는 신호 생성부;
상기 생성된 시각 보조 신호를 사용자에게 전달하는 전달부
를 포함하는 장애물 거리 측정 단말기.
A camera unit for capturing an image in a user's gaze direction;
A detector configured to analyze the image and detect an obstacle in a moving path of the user;
A distance measuring unit measuring a distance between the obstacle and the user;
A signal generator configured to generate a visual assistance signal using the measured distance;
A transmission unit for transmitting the generated visual assistance signal to a user
Obstacle distance measuring terminal comprising a.
제1항에 있어서,
상기 카메라부는 복수 개의 이미지 센서를 포함하고,
상기 이미지 센서는 상기 장애물의 3D 영상을 획득하는
장애물 거리 측정 단말기.
The method of claim 1,
The camera unit includes a plurality of image sensors,
The image sensor acquires a 3D image of the obstacle
Obstacle distance measuring terminal.
제1항에 있어서,
상기 감지부는,
상기 촬영된 영상을 분석하여 상기 장애물의 종류를 인식하는 인식부; 및
상기 인식부를 통해 인식한 상기 장애물의 정보를 이용하여 위험도를 설정하는 위험도 설정부를 포함하는 장애물 거리 측정 단말기.
The method of claim 1,
The detection unit,
A recognizer configured to recognize the type of the obstacle by analyzing the captured image; And
Obstacle distance measuring terminal comprising a risk setting unit for setting the risk using the information of the obstacle recognized through the recognition unit.
제1항에 있어서,
상기 거리 측정부는
거리 측정을 위한 레이저를 방사하는 레이저 모듈; 및
상기 레이저의 상기 장애물로부터의 반사광을 통해 상기 장애물과 상기 사용자 간의 거리를 계산하는 거리 계산부를 포함하는 장애물 거리 측정 단말기.
The method of claim 1,
The distance measuring unit
A laser module for emitting a laser for distance measurement; And
And a distance calculator configured to calculate a distance between the obstacle and the user through reflected light from the obstacle of the laser.
제1항에 있어서,
상기 신호 생성부는
미리 정해진 거리에 대응하는 상기 시각 보조 신호를 생성하는 것
을 특징으로 하는 장애물 거리 측정 단말기.
The method of claim 1,
The signal generator
Generating the visual aid signal corresponding to a predetermined distance
Obstacle distance measuring terminal, characterized in that.
제1항에 있어서,
상기 거리 측정 단말기는
상기 사용자의 위치 좌표를 획득하는 위치 감지 센서; 및
상기 사용자의 시선 방향을 센싱하는 자이로센서를 더 포함하고,
상기 신호 생성부는 전자 지도에서 제공되는 위치 정보를 이용해서 상기 시각 보조 신호를 생성하는 것
을 특징으로 하는 장애물 거리 측정 단말기.
The method of claim 1,
The distance measuring terminal
A position sensor for obtaining position coordinates of the user; And
Further comprising a gyro sensor for sensing the eye direction of the user,
Wherein the signal generator generates the visual assistance signal using location information provided from an electronic map.
Obstacle distance measuring terminal, characterized in that.
제1항에 있어서,
상기 전달부는
스피커, 골전도 스피커 및 바이브레이터 중 적어도 하나인 것
을 특징으로 하는 장애물 거리 측정 단말기.
The method of claim 1,
The delivery unit
At least one of speakers, bone conduction speakers, and vibrators
Obstacle distance measuring terminal, characterized in that.
제1항에 있어서,
상기 거리 측정 단말기는
안경, 선글라스 및 고글을 포함하는 안경 류에 탈부착이 가능한 모듈 형태로 제작된 것
을 특징으로 하는 장애물 거리 측정 단말기.The method of claim 1,
The distance measuring terminal
Made in a modular form that can be attached to glasses, including glasses, sunglasses and goggles
Obstacle distance measuring terminal, characterized in that.
KR1020180033172A 2018-03-22 2018-03-22 Portable device for measuring distance from obstacle for blind person KR20190111262A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180033172A KR20190111262A (en) 2018-03-22 2018-03-22 Portable device for measuring distance from obstacle for blind person

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180033172A KR20190111262A (en) 2018-03-22 2018-03-22 Portable device for measuring distance from obstacle for blind person

Publications (1)

Publication Number Publication Date
KR20190111262A true KR20190111262A (en) 2019-10-02

Family

ID=68422822

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180033172A KR20190111262A (en) 2018-03-22 2018-03-22 Portable device for measuring distance from obstacle for blind person

Country Status (1)

Country Link
KR (1) KR20190111262A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102252352B1 (en) * 2020-12-04 2021-05-17 주식회사 바토너스 Method and apparatus for walking guide
KR20210063089A (en) * 2019-11-22 2021-06-01 울산과학기술원 Method and apparatus for object recognition
KR20210076235A (en) * 2019-12-13 2021-06-24 동국대학교 산학협력단 Smart stick provides voice information about obstacles detected by ultrasonic sensors and operating method thereof
KR20220158914A (en) * 2021-05-24 2022-12-02 대한민국(국립재활원장) Rear View Security System for Electric Wheelchair
KR20230114604A (en) 2022-01-25 2023-08-01 가천대학교 산학협력단 System and Method of Producing Tactile Information via Object Extraction and Object Simplifying for the Visually Impaired

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210063089A (en) * 2019-11-22 2021-06-01 울산과학기술원 Method and apparatus for object recognition
KR20210076235A (en) * 2019-12-13 2021-06-24 동국대학교 산학협력단 Smart stick provides voice information about obstacles detected by ultrasonic sensors and operating method thereof
KR102252352B1 (en) * 2020-12-04 2021-05-17 주식회사 바토너스 Method and apparatus for walking guide
KR20220158914A (en) * 2021-05-24 2022-12-02 대한민국(국립재활원장) Rear View Security System for Electric Wheelchair
KR20230114604A (en) 2022-01-25 2023-08-01 가천대학교 산학협력단 System and Method of Producing Tactile Information via Object Extraction and Object Simplifying for the Visually Impaired

Similar Documents

Publication Publication Date Title
KR20190111262A (en) Portable device for measuring distance from obstacle for blind person
US20130250078A1 (en) Visual aid
US9805619B2 (en) Intelligent glasses for the visually impaired
KR101646503B1 (en) Device, system and method for informing about 3D obstacle or information for blind person
Patel et al. Multisensor-based object detection in indoor environment for visually impaired people
US10062302B2 (en) Vision-assist systems for orientation and mobility training
KR20190069919A (en) Walking assistive device and system for visually impaired people
US10867527B2 (en) Process and wearable device equipped with stereoscopic vision for helping the user
Hakim et al. Navigation system for visually impaired people based on RGB-D camera and ultrasonic sensor
KR20210068970A (en) System for providing navigation service for visually impaired person
Bala et al. Design, development and performance analysis of cognitive assisting aid with multi sensor fused navigation for visually impaired people
Saffoury et al. Blind path obstacle detector using smartphone camera and line laser emitter
Sun et al. “Watch your step”: precise obstacle detection and navigation for Mobile users through their Mobile service
JP6120444B2 (en) Wearable device
Biswas et al. Shortest path based trained indoor smart jacket navigation system for visually impaired person
KR102081193B1 (en) Walking assistance device for the blind and walking system having it
KR20120088320A (en) Object recognition and for the visually impaired pedestrian guidance system
KR20130031423A (en) Sensor of object recognition and for the visually impaired pedestrian guidance system
Malla et al. Obstacle Detection and Assistance for Visually Impaired Individuals Using an IoT-Enabled Smart Blind Stick.
WO2019109301A1 (en) Blind guidance method and apparatus, and blind guidance device
JP2017142825A (en) Wearable device
TW201510961A (en) Image recognition detector for blind person
KR20170057711A (en) Apparatus for guiding blind person and method thereof
US20240062548A1 (en) Converting spatial information to haptic and auditory feedback
WO2021124299A1 (en) Walking assisting systems and methods

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E801 Decision on dismissal of amendment
X601 Decision of rejection after re-examination