JP7080492B2 - Walking assist device for the visually impaired and walking assist method for the visually impaired - Google Patents

Walking assist device for the visually impaired and walking assist method for the visually impaired Download PDF

Info

Publication number
JP7080492B2
JP7080492B2 JP2019033505A JP2019033505A JP7080492B2 JP 7080492 B2 JP7080492 B2 JP 7080492B2 JP 2019033505 A JP2019033505 A JP 2019033505A JP 2019033505 A JP2019033505 A JP 2019033505A JP 7080492 B2 JP7080492 B2 JP 7080492B2
Authority
JP
Japan
Prior art keywords
visually impaired
impaired person
unit
walking assist
current situation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019033505A
Other languages
Japanese (ja)
Other versions
JP2020137580A (en
Inventor
康宏 和田
信子 和田
Original Assignee
康宏 和田
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 康宏 和田 filed Critical 康宏 和田
Priority to JP2019033505A priority Critical patent/JP7080492B2/en
Publication of JP2020137580A publication Critical patent/JP2020137580A/en
Application granted granted Critical
Publication of JP7080492B2 publication Critical patent/JP7080492B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

特許法第30条第2項適用 平成30年10月20日に「電子情報通信学会技術研究報告信学技報 Vol.118 No.270 第37~38頁」にて公開した。 平成30年11月15日から11月17日に西日本総合展示場 新館(福岡県北九州市小倉北区浅野3-8-1)において開催された「西日本国際福祉機器展」にて公開した。Application of Article 30, Paragraph 2 of the Patent Act Published on October 20, 2018 in "IEICE Technical Report Vol. 118 No. 270, pp. 37-38". It was exhibited at the "West Japan International Welfare Equipment Exhibition" held at the West Japan General Exhibition Center New Building (3-8-1 Asano, Kokurakita-ku, Kitakyushu City, Fukuoka Prefecture) from November 15th to 17th, 2018.

本発明の実施の形態は、視覚障害者用歩行補助装置及び視覚障害者用歩行補助方法に関する。 Embodiments of the present invention relate to a walking assist device for the visually impaired and a walking assist method for the visually impaired.

現在視覚障害者として、例えば身体障害者手帳の交付を受けている者は、概ね31万人程度いると言われている。このうち、例えば、特に1級から3級までの視覚障害者は障害の程度が重いことから、移動に対して不安や不自由を感じていることが多い。 It is said that there are currently about 310,000 visually impaired people, for example, who have been issued a certificate of the physically disabled. Of these, for example, visually impaired people from grades 1 to 3 often feel anxiety and inconvenience in moving because the degree of disability is severe.

視覚障害者にとって行き慣れない場所に行くことが不安であることはもちろん、例えば、道路を横断する際も危険が伴うことが考えられる。例えば、横断歩道には信号機が設置されていることも多いが、視覚障害者に配慮した音響信号機が設置されていることは少ない。また、バリアフリーに対応するべく車道と歩道との間の段差が可能な限り無いようにされている箇所もあるが、視覚障害者からすると歩道と車道の段差が無いことによって歩道と車道の境界が分からず、却って危険な場合も散見する。 Not only is it anxious for the visually impaired to go to places that are unfamiliar to them, but it can also be dangerous when crossing a road, for example. For example, traffic lights are often installed on pedestrian crossings, but acoustic signals that are friendly to the visually impaired are rarely installed. In addition, there are places where there are as few steps as possible between the roadway and the sidewalk in order to be barrier-free, but for the visually impaired, the boundary between the sidewalk and the roadway is due to the fact that there is no step between the sidewalk and the roadway. I don't know, and sometimes it's dangerous.

さらに、近年電車の駅でのプラットホームからの視覚障害者の転落事故も多く発生している。これは主にプラットホームの床に設置されている点字ブロックが分かりにくい、ホームドアが設置されていないこと等の理由が挙げられる。 Furthermore, in recent years, many visually impaired people have fallen from platforms at train stations. This is mainly because the Braille blocks installed on the platform floor are difficult to understand, and the platform doors are not installed.

すなわち、視覚障害者が感じている移動の不安や不自由さは、周囲の状況を適時把握して判断することが困難であることに起因していると言える。このような視覚障害者の歩行時における不安や不自由さ、危険を回避するための装置として、様々な装置が開発されている。 In other words, it can be said that the anxiety and inconvenience of movement felt by the visually impaired is due to the difficulty in grasping and judging the surrounding situation in a timely manner. Various devices have been developed as devices for avoiding anxiety, inconvenience, and danger during walking of such visually impaired persons.

特開2013-034490号公報Japanese Unexamined Patent Publication No. 2013-034490

例えば上記特許文献には、眼鏡と同じ形状をしたフレームの装着されたカメラを用いて前方に出現した障害物を把握する態様が記載されている。しかしながら、当該特許文献記載の発明では、例えば、視覚障害者が歩行の際使用する白杖との連携が取れない。 For example, the above patent document describes an embodiment in which an obstacle appearing in front is grasped by using a camera equipped with a frame having the same shape as eyeglasses. However, in the invention described in the patent document, for example, it is not possible to cooperate with a white cane used by a visually impaired person when walking.

ここで視覚障害者の移動の不安や不自由さを解消するために、歩行に際して様々な装置を装着することも考えられるが、例えば、装着する装置が重い、異物感を感じるような装置である、ということになると、安全は確保される一方でそもそも移動が億劫になってしまう。また、通常は歩行に際して白杖を利用することが多いが、安全の確保のために白杖以外の装置が多くなってしまうと、白杖も含めて装置の管理が困難となる。 Here, in order to eliminate the anxiety and inconvenience of movement of the visually impaired, it is conceivable to wear various devices when walking, but for example, the device to be worn is heavy and feels a foreign body sensation. When it comes to that, while safety is ensured, movement becomes a hassle in the first place. In addition, normally, a white cane is often used when walking, but if the number of devices other than the white cane increases to ensure safety, it becomes difficult to manage the devices including the white cane.

さらに、視覚障害者が歩行している時は、歩行に集中しており、危険が発生し得る状況であってもいきなり音声による報知は、視覚障害者にとって却って危険な場合も多い。 Furthermore, when a visually impaired person is walking, he / she concentrates on walking, and even in a situation where danger may occur, sudden voice notification is often rather dangerous for the visually impaired person.

本発明は上記課題を解決するためになされたものであり、本発明の目的は、視覚障害者が歩行する際に、たとえ危険な状況や災害等に遭遇した場合であっても可能な限り視覚障害者単独で危機を回避しつつ、健常者と同じようにストレスを感じることなく自由に移動することができる視覚障害者用歩行補助装置及び視覚障害者用歩行補助方法を提供することにある。 The present invention has been made to solve the above problems, and an object of the present invention is to be as visual as possible even when a visually impaired person encounters a dangerous situation, a disaster, or the like when walking. It is an object of the present invention to provide a walking assist device for the visually impaired and a walking assist method for the visually impaired, which can move freely without feeling stress like a healthy person while avoiding a crisis by the disabled alone.

実施の形態における視覚障害者用歩行補助装置は、装着機器と呈示装置とを備える。装着機器は、視覚障害者が装着し、視覚障害者が歩行する際に視覚障害者の周囲の状況を検知する。また、呈示装置は、視覚障害者が歩行の際に保持する白杖に装着される。そして検知の結果危険な状況が存在する場合に、呈示装置の振動部を介して視覚障害者に対して注意を喚起し、視覚障害者が呈示装置の入力部を操作することによって装着機器による報知を得ることの承諾を受けた後に、装着機器が視覚障害者に対して現在の状況を報知する。 The walking assist device for the visually impaired in the embodiment includes a wearing device and a presentation device. The wearing device is worn by a visually impaired person and detects the surrounding situation of the visually impaired person when the visually impaired person walks. In addition, the presentation device is attached to a white cane held by a visually impaired person when walking. Then, when a dangerous situation exists as a result of the detection , the visually impaired person is alerted through the vibrating part of the presentation device, and the visually impaired person operates the input part of the presentation device to wear the device. After receiving the consent to obtain the notification by , the wearing device notifies the visually impaired of the current situation.

実施の形態における視覚障害者用歩行補助方法は、視覚障害者が装着する装着機器と白杖に装着される呈示装置からなる視覚障害者用歩行補助装置を用いて視覚障害者が歩行する際に、装着機器が、常時視覚障害者の周囲の状況を検知するステップと、装着機器が、視覚障害者が存在する現在の状況に合致する視覚障害者の過去の生体情報を取得するステップと、装着機器が、検知結果と取得された生体情報とを用いて視覚障害者への報知の可否を判断するステップと、判断の結果、危険な状況が存在すると判断される場合に、呈示装置の振動部を介して視覚障害者に対して現在の状況を報知するための注意喚起を行うステップと、視覚障害者による呈示装置の入力部の操作に基づく注意喚起に対する承諾の信号を装着機器が受信するステップと、承諾を受けた後に、装着機器が現在の状況を視覚障害者に対して報知するステップとを備える。 The method for assisting walking for the visually impaired in the embodiment is when a visually impaired person walks using a walking assist device for the visually impaired, which comprises a wearing device worn by the visually impaired and a presentation device attached to a white cane. The wearing device constantly detects the situation around the visually impaired person, and the wearing device acquires the past biological information of the visually impaired person that matches the current situation in which the visually impaired person exists. The step of determining whether or not the device can notify the visually impaired using the detection result and the acquired biometric information, and when it is determined that a dangerous situation exists as a result of the determination, the vibrating part of the presentation device. The device is equipped with a step to alert the visually impaired to notify the current situation and a signal of consent to the alert based on the operation of the input part of the presentation device by the visually impaired. It includes a receiving step and, after receiving consent, a step in which the wearing device notifies the visually impaired of the current situation.

以上のような視覚障害者用歩行補助装置及び視覚障害者用歩行補助方法を用いることによって、視覚障害者が歩行する際に、たとえ危険な状況や災害等に遭遇した場合であっても可能な限り視覚障害者単独で危機を回避しつつ、健常者と同じようにストレスを感じることなく自由に移動することが可能となる。 By using the walking assist device for the visually impaired and the walking assist method for the visually impaired as described above, it is possible even if the visually impaired person encounters a dangerous situation or a disaster when walking. As long as the visually impaired can avoid the crisis alone, it will be possible to move freely without feeling stress like a healthy person.

実施の形態における視覚障害者用歩行補助装置を視覚障害者が装着した状態を示す全体図である。It is an overall view which shows the state which the visually impaired person wears the walking assist device for the visually impaired person in embodiment. 実施の形態における視覚障害者用歩行補助装置のうち、装着機器の全体を示す全体図である。It is an overall view which shows the whole of the wearing device among the walking assist devices for the visually impaired in the embodiment. 実施の形態における視覚障害者用歩行補助装置の内部構成を示すブロック図である。It is a block diagram which shows the internal structure of the walking assist device for the visually impaired in embodiment. 実施の形態における記憶部に記憶されている視覚障害者の過去における生体情報を示すテーブルである。It is a table which shows the past biological information of the visually impaired person stored in the storage part in embodiment. 実施の形態における視覚障害者の現在の状況を示す模式図である。It is a schematic diagram which shows the present situation of the visually impaired person in embodiment. 実施の形態において、視覚障害者に対して報知する際に装着機器に表示される画像の表示の一例を示す模式図である。In the embodiment, it is a schematic diagram which shows an example of the display of the image displayed on the wearing device at the time of notifying a visually impaired person. 実施の形態において、視覚障害者に対して現在の状況を報知する流れを示すフローチャートである。In the embodiment, it is a flowchart which shows the flow of notifying the visually impaired person of the present situation. 実施の形態において、視覚障害者に対して現在の状況を報知する流れを示すフローチャートである。In the embodiment, it is a flowchart which shows the flow of notifying the visually impaired person of the present situation.

以下、実施の形態について図面を参照して詳細に説明する。 Hereinafter, embodiments will be described in detail with reference to the drawings.

[視覚障害者用歩行補助装置の全体構成]
図1は、実施の形態における視覚障害者用歩行補助装置1を視覚障害者Hが装着した状態を示す全体図である。視覚障害者用歩行補助装置1は、装着機器2と呈示装置3とから構成される。図1に示すように、視覚障害者Hが歩行する際には、顔に視覚障害者用歩行補助装置1を構成する装着機器2を装着する。また、路面の状態を把握するために手には白杖Wを持つ。当該白杖Wには、呈示装置3が装着されている。
[Overall configuration of walking assist device for the visually impaired]
FIG. 1 is an overall view showing a state in which the visually impaired person H wears the walking assist device 1 for the visually impaired in the embodiment. The walking assist device 1 for the visually impaired is composed of a wearing device 2 and a presentation device 3. As shown in FIG. 1, when the visually impaired person H walks, the wearing device 2 constituting the visually impaired walking assist device 1 is attached to the face. In addition, he holds a white cane W in his hand to grasp the condition of the road surface. A presentation device 3 is attached to the white cane W.

なお、装着機器2の形態としては、例えばめがねのような形態や頭部にかぶる帽子のような形態が考えられるが、いずれの形態を採用しても良い。以下の説明においては、装着機器2の一例としてめがね型機器を例に挙げて説明する。 As the form of the wearing device 2, for example, a form such as glasses or a form such as a hat worn on the head can be considered, but any form may be adopted. In the following description, a glasses-type device will be described as an example of the wearing device 2.

図2は、実施の形態におけるめがね型機器2の全体を示す全体図である。めがね型機器2は、視覚障害者Hが歩行する際における周囲の状況を検知するため装着するものである。めがね型機器2は、図2に示されているように、いわゆる眼鏡の形状とされている。視覚障害者Hが装着する方法は、一般的なめがねを掛ける方法と同じである。 FIG. 2 is an overall view showing the entire eyeglass-type device 2 according to the embodiment. The glasses-type device 2 is worn to detect the surrounding conditions when the visually impaired person H walks. As shown in FIG. 2, the glasses-type device 2 has a so-called eyeglass shape. The method worn by the visually impaired person H is the same as the method of wearing general glasses.

なお、本発明の実施の形態におけるめがね型機器2については、図2に示す通りであるが、めがね型機器2の全体、及び、部分の形状については、図2に示す形状に限られるものではない。 The eyeglass-type device 2 in the embodiment of the present invention is as shown in FIG. 2, but the shape of the entire eyeglass-type device 2 and the shape of a part thereof is not limited to the shape shown in FIG. do not have.

図3は、実施の形態における視覚障害者用歩行補助装置1のめがね型機器2と呈示装置3の内部構成を示すブロック図である。めがね型機器2は、検知部21と、学習部22と、比較判断部23と、報知部24とがバスBを介して互いに接続されている。また、記憶部25と、制御部26と、表示制御部27と、送受信部28も併せて接続されている。 FIG. 3 is a block diagram showing an internal configuration of the glasses-type device 2 and the presentation device 3 of the walking assist device 1 for the visually impaired in the embodiment. In the glasses-type device 2, the detection unit 21, the learning unit 22, the comparison determination unit 23, and the notification unit 24 are connected to each other via the bus B. Further, the storage unit 25, the control unit 26, the display control unit 27, and the transmission / reception unit 28 are also connected.

検知部21は、測距センサ211と、測位・方位センサ212と、視覚障害者の生体情報を検出する生体情報センサ213とを備えている。測距センサ211は、視覚障害者Hが歩行する際における、周囲に存在する様々な物に対する視覚障害者Hとの間の距離を計測する。測距センサ211としては、例えば、CMOS(Complementary Metal-Oxide Semiconductor)カメラ等のカメラ、ミリ波、赤外線等を用いることができる。 The detection unit 21 includes a distance measuring sensor 211, a positioning / orientation sensor 212, and a biological information sensor 213 that detects biological information of a visually impaired person. The distance measuring sensor 211 measures the distance between the visually impaired person H and the visually impaired person H with respect to various objects existing in the surroundings when the visually impaired person H walks. As the distance measuring sensor 211, for example, a camera such as a CMOS (Complementary Metal-Oxide Semiconductor) camera, millimeter waves, infrared rays, or the like can be used.

図2に示す本発明の実施の形態におけるめがね型機器2においては、測距センサ211は、例えば、めがね型機器2を保持するために視覚障害者Hの耳に引っかける、いわゆるつると、レンズの部分との境界部に設けられている。また、当該めがね型機器2においては、左右両方にそれぞれ測距センサ211が設けられている。 In the spectacle-type device 2 according to the embodiment of the present invention shown in FIG. 2, the distance measuring sensor 211 is hooked on the ear of the visually impaired person H in order to hold the spectacle-type device 2, for example, a so-called vine, a lens. It is provided at the boundary with the portion. Further, in the glasses-type device 2, distance measuring sensors 211 are provided on both the left and right sides, respectively.

なお、本発明の実施の形態におけるめがね型機器2においては、上述した位置に測距センサ211が設けられているが、これらの位置に限定されるものではなく、視覚障害者Hの周囲の状況を把握するに必要な測距を行うことができれば、いずれの位置に設けられていても良い。また、左右両方ではなく、いずれか一方の側だけ、或いは、つるの部分に設けられている等、設けられる測距センサ211の数は問わない。 In the eyeglass-type device 2 according to the embodiment of the present invention, the distance measuring sensor 211 is provided at the above-mentioned position, but the distance measuring sensor 211 is not limited to these positions, and the situation around the visually impaired person H is not limited to these positions. It may be provided at any position as long as the distance measurement necessary for grasping the above can be performed. Further, the number of distance measuring sensors 211 provided may not be limited, such as being provided on only one side or on the vine portion, not on both the left and right sides.

測位・方位センサ212は、視覚障害者用歩行補助装置1を装着した視覚障害者Hがいる位置や歩行の速度等を計測するセンサである。測位・方位センサ212としては、例えば、GPS(Global Positioning System)、LTE(Long Term Evolution)、ジャイロ、加速度センサ等を利用することができる。但し、測位・方位センサ212としていずれの機器を利用するか、いくつ利用するかについては自由に選択することができる。 The positioning / orientation sensor 212 is a sensor that measures the position where the visually impaired person H is equipped with the walking assist device 1 for the visually impaired, the walking speed, and the like. As the positioning / orientation sensor 212, for example, GPS (Global Positioning System), LTE (Long Term Evolution), gyro, acceleration sensor and the like can be used. However, it is possible to freely select which device is used as the positioning / orientation sensor 212 and how many devices are used.

本発明の実施の形態における図2に示すめがね型機器2においては、測距センサ211と測位・方位センサ212は、例えば、レンズに該当する部分の上部に設けられている。或いは、つるの部分に設けられていても良い。 In the eyeglass-type device 2 shown in FIG. 2 according to the embodiment of the present invention, the distance measuring sensor 211 and the positioning / direction sensor 212 are provided, for example, on the upper part of the portion corresponding to the lens. Alternatively, it may be provided on the vine portion.

このように、測距センサ211と測位・方位センサ212とを用いて、特に、上述したカメラやミリ波を用いて視覚障害者用歩行補助装置1を装着する視覚障害者Hの周囲360度をリアルタイムに(常時)検知する。また、視覚障害者Hの上半身部分の検知も併せて行う。視覚障害者Hは、通常白杖Wを持って歩行することから、自身の下半身部分については白杖Wを介して様々な情報を把握することができるが、上半身については無防備になりやすい。そこで、測距センサ211と測位・方位センサ212とを用いることで、視覚障害者Hの上半身部分の検知も行う。 In this way, using the distance measuring sensor 211 and the positioning / orientation sensor 212, in particular, using the above-mentioned camera and millimeter waves, the circumference of the visually impaired person H who wears the walking assist device 1 for the visually impaired is 360 degrees. Detect in real time (always). In addition, the upper body portion of the visually impaired person H is also detected. Since the visually impaired person H usually walks with the white cane W, he / she can grasp various information through the white cane W for his / her lower body part, but tends to be defenseless for the upper body part. Therefore, by using the distance measuring sensor 211 and the positioning / direction sensor 212, the upper body portion of the visually impaired person H is also detected.

生体情報センサ213は、例えば、視覚障害者Hの心拍数をリアルタイムに検知するセンサである。これは、歩行中の心拍数を計測することによって、例えば、視覚障害者Hに対して危険の報知が必要になった際の視覚障害者Hの身体の状態を把握することができる。生体情報センサ213としては、例えば心電計等を利用することができる。図2に示すめがね型機器2においては、例えば、つるの部分であって視覚障害者Hの耳に当たる部分に設けられている。 The biological information sensor 213 is, for example, a sensor that detects the heart rate of the visually impaired person H in real time. By measuring the heart rate during walking, for example, it is possible to grasp the physical condition of the visually impaired person H when it is necessary to notify the visually impaired person H of the danger. As the biological information sensor 213, for example, an electrocardiograph or the like can be used. In the eyeglass-type device 2 shown in FIG. 2, for example, it is provided in a portion of the vine that touches the ear of the visually impaired person H.

なお、ここで本発明の実施の形態においては、視覚障害者Hへの報知の可否判断する際には、上記生体情報センサ213がリアルタイムに取得した生体情報を利用するのではなく、過去に取得された生体情報を利用する。これは、過去に取得された生体情報を用いることで、より適切に視覚障害者Hに対して危険を報知することができるからである。なお、生体情報センサ213によってリアルタイムに取得された生体情報は、記憶部25に記憶される。 Here, in the embodiment of the present invention, when determining whether or not to notify the visually impaired person H, the biometric information acquired by the biometric information sensor 213 in real time is not used but acquired in the past. Use the biometric information provided. This is because the danger can be more appropriately notified to the visually impaired person H by using the biological information acquired in the past. The biometric information acquired in real time by the biometric information sensor 213 is stored in the storage unit 25.

学習部22は、視覚障害者Hの過去の生体情報を取得する。視覚障害者Hがこれまで経験してきた移動の際の対応について、後述する比較判断部23が視覚障害者Hへの危険の報知の可否判断を行う際に、生体情報の観点からその判断に反映させるためである。 The learning unit 22 acquires the past biological information of the visually impaired person H. Regarding the response to the movement that the visually impaired person H has experienced so far, when the comparative judgment unit 23, which will be described later, determines whether or not to notify the visually impaired person H of the danger, it is reflected in the judgment from the viewpoint of biometric information. This is to make you.

具体的には、学習部22は、比較判断部23が視覚障害者Hへの危険の報知の可否を判断するに当たって、記憶部25に記憶されている過去の生体情報の中から、視覚障害者Hのおかれている現在の状況に合致する生体情報を取得する。 Specifically, in the learning unit 22, when the comparative determination unit 23 determines whether or not the danger is notified to the visually impaired person H, the visually impaired person is selected from the past biological information stored in the storage unit 25. Acquire biometric information that matches the current situation of H.

ここで、「現在の状況に合致する生体情報」とは、視覚障害者Hが置かれている現在の状況と全く合致する(一致する)場合における過去の状況における生体情報のみならず、概ね合致する状況において取得された生体情報も含むものである。視覚障害者Hが置かれている現在の状況と全く合致する場合に限定してしまうと、視覚障害者Hがこれまで行ったことのある場所に行く場合に限って当該過去の生体情報を利用することができることになり、新たな場所に移動する場合には利用できなくなってしまうからである。 Here, the "biological information that matches the current situation" is not only the biological information in the past situation when the visually impaired person H completely matches (matches) the current situation in which the visually impaired person H is placed, but also generally matches. It also includes the biometric information acquired in the situation. If it is limited to the case where the visually impaired person H completely matches the current situation in which the visually impaired person H is placed, the past biometric information is used only when the visually impaired person H goes to a place where he / she has been. This is because it will be possible to do so, and it will not be available when moving to a new location.

図4は、実施の形態における後述する記憶部25に記憶されている視覚障害者Hの過去における生体情報を示すテーブルである。図4に示されている通り、視覚障害者Hの生体情報がどの場所で、いつ、どのような環境の下で取得されたかがまとめて記憶部25に記憶されている。また、「キーワード」も併せて紐付けて記憶されている。このキーワードとして、例えば、場所に関する情報から取得された「駅」、「プラットホーム」、或いは、「信号機」といった内容が記憶されている。 FIG. 4 is a table showing past biological information of the visually impaired person H stored in the storage unit 25 described later in the embodiment. As shown in FIG. 4, the storage unit 25 collectively stores the place, when, and under what environment the biological information of the visually impaired person H was acquired. In addition, "keywords" are also associated and stored. As this keyword, for example, the contents such as "station", "platform", or "traffic light" acquired from the information about the place are stored.

学習部22では、測距センサ211や測位・方位センサ212によってリアルタイムに取得される検知結果を基に、例えばその場所に関する情報からキーワードを把握する。そして、記憶部25に記憶されている過去の生体情報の中で、同じキーワードを備える生体情報を抽出する。学習部22において、このような処理を行うことによって、現在視覚障害者Hが置かれている状況と全く同じ状況ではないものの、似た状況における視覚障害者Hの生体情報を取得することができ、視覚障害者Hへの危険の報知の可否の判断に役立てることができる。 The learning unit 22 grasps keywords from, for example, information about the location based on the detection results acquired in real time by the distance measuring sensor 211 and the positioning / orientation sensor 212. Then, the biometric information having the same keyword is extracted from the past biometric information stored in the storage unit 25. By performing such processing in the learning unit 22, it is possible to acquire biometric information of the visually impaired person H in a similar situation, although the situation is not exactly the same as the situation in which the visually impaired person H is currently placed. , It can be useful for determining whether or not the danger is notified to the visually impaired person H.

比較判断部23は、視覚障害者Hの現在の状況、すなわち、視覚障害者Hへの危険の報知の可否の判断を行う。比較判断部23が当該判断を行う際に利用する情報は、測距センサ211や測位・方位センサ212によってリアルタイムに取得される検知結果と学習部22が抽出した視覚障害者Hの過去の生体情報である。 The comparative determination unit 23 determines the current situation of the visually impaired person H, that is, whether or not the danger is notified to the visually impaired person H. The information used by the comparison determination unit 23 when making the determination is the detection result acquired in real time by the distance measuring sensor 211 and the positioning / orientation sensor 212 and the past biological information of the visually impaired person H extracted by the learning unit 22. Is.

報知部24は、視覚障害者Hに対して現在の状況を報知する。但し、後述するように、比較判断部23が視覚障害者Hに対して危険の報知の必要あり、と判断した場合であって、呈示装置3を介して視覚障害者Hに対して現在の状況を報知するための注意喚起を行い、さらに、この注意喚起に対する視覚障害者Hからの承諾の信号を受信した場合に、報知部24は、視覚障害者Hに対して現在の状況を報知する。 The notification unit 24 notifies the visually impaired person H of the current situation. However, as will be described later, when the comparison determination unit 23 determines that it is necessary to notify the visually impaired person H of the danger, the current situation is given to the visually impaired person H via the presentation device 3. When a signal of consent from the visually impaired person H for this warning is received, the notification unit 24 notifies the visually impaired person H of the current situation.

これは、上述したように、視覚障害者Hが歩行している時には、細心の注意を払って集中して歩いているので、現在の状況とはいえ、突然視覚障害者Hに報知すると却って危険な状態になる可能性があるからである。そこで、上述したようなステップを踏んだ上で視覚障害者Hに対して報知する。報知の流れについては、後述する。 This is because, as described above, when the visually impaired person H is walking, he pays close attention and concentrates on walking. Therefore, even in the current situation, it is rather dangerous to suddenly notify the visually impaired person H. This is because there is a possibility that the situation will be different. Therefore, after taking the steps as described above, the visually impaired person H is notified. The flow of notification will be described later.

報知部24は、どのように視覚障害者Hに対して現在の状況を報知しても良いが、本発明の実施の形態においては、後述する表示制御部27と連携して、めがね型機器2のレンズ部分に状況を表示させることで報知する。また、この他、音声等によって報知しても良く、複数の方法を組み合わせて報知することもできる。 The notification unit 24 may notify the visually impaired person H of the current situation in any way, but in the embodiment of the present invention, the glasses-type device 2 cooperates with the display control unit 27 described later. Notify by displaying the situation on the lens part of. In addition, the notification may be performed by voice or the like, and a plurality of methods may be combined for notification.

記憶部25は、例えば、半導体等で構成されている。記憶部25には、例えば上述した図4に示す視覚障害者Hの過去の生体情報が記憶されている。また、視覚障害者Hに対して現在の状況を報知するために実行されるプログラム等記憶されている。 The storage unit 25 is made of, for example, a semiconductor or the like. In the storage unit 25, for example, the past biological information of the visually impaired person H shown in FIG. 4 described above is stored. In addition, a program or the like executed to notify the visually impaired person H of the current situation is stored.

制御部26は、めがね型機器2を構成する各部を制御する。具体的な構成としては、例えば、図3では図示しない、CPU(Central Processing Unit)と、ROM(Read Only Memory)と、RAM(Random Access Memory)を備える。 The control unit 26 controls each unit constituting the glasses-type device 2. As a specific configuration, for example, a CPU (Central Processing Unit), a ROM (Read Only Memory), and a RAM (Random Access Memory), which are not shown in FIG. 3, are provided.

CPUは、図示しないめがね型機器2の、例えばON/OFFスイッチからの入力信号に基づいてROMからめがね型機器2を起動するためのブートプログラムを読み出して実行し、記憶部25に格納されている各種オペレーティングシステムを読み出す。 The CPU reads and executes a boot program for starting the glasses-type device 2 from the ROM based on an input signal from, for example, an ON / OFF switch of the glasses-type device 2 (not shown), and stores the boot program in the storage unit 25. Read various operating systems.

またCPUは、RAMや記憶部25等に記憶されたプログラム及びデータを読み出してRAMにロードする。そして、CPUは、報知部24からの指示に基づき、呈示装置3に視覚障害者Hに対して注意喚起を行うための動作を行うよう無線で制御を行う。 Further, the CPU reads out the programs and data stored in the RAM, the storage unit 25, and the like, and loads them into the RAM. Then, based on the instruction from the notification unit 24, the CPU wirelessly controls the presentation device 3 to perform an operation for calling attention to the visually impaired person H.

表示制御部27は、視覚障害者Hに対して報知を行う際に、めがね型機器2のレンズ部分への表示制御を行う。レンズ部分に表示させる内容については、予め記憶部25に記憶されており、例えば、視覚障害者Hの選択により、或いは、自動的に予め選択されて表示される。 The display control unit 27 controls the display on the lens portion of the eyeglass-type device 2 when notifying the visually impaired person H. The content to be displayed on the lens portion is stored in the storage unit 25 in advance, and is, for example, selected and displayed in advance by the selection of the visually impaired person H or automatically.

なお、ここでレンズ部分は、例えば液晶ディスプレイや有機EL(Electroluminescence)ディスプレイである。このレンズ部分は、表示制御部27からバスBを介して出力信号を受信し、視覚障害者Hに対する現在の状況や危険に関する情報を表示する。 Here, the lens portion is, for example, a liquid crystal display or an organic EL (Electroluminescence) display. This lens portion receives an output signal from the display control unit 27 via the bus B, and displays information on the current situation and danger to the visually impaired person H.

図5は、実施の形態における視覚障害者Hの現在の状況を示す模式図である。図5は、視覚障害者Hを中心に、上方から俯瞰した状態を示している。まず、視覚障害者Hの右側には建物があり、当該建物内の通路とつながる扉が開け放たれている。また、右手前方には視覚障害者Hの前方から視覚障害者Hに向かってくる対向者がいる。次に視覚障害者Hの左側を見ると、左側は道路である。そしてその道路と視覚障害者Hとの間であって左前方には看板が、左後方には樹木が植わっている。 FIG. 5 is a schematic diagram showing the current situation of the visually impaired person H in the embodiment. FIG. 5 shows a bird's-eye view from above, centering on the visually impaired person H. First, there is a building on the right side of the visually impaired person H, and the door connected to the passage in the building is open. Further, in front of the right hand, there is an opponent who comes from the front of the visually impaired person H toward the visually impaired person H. Next, looking at the left side of the visually impaired person H, the left side is the road. A signboard is planted in the front left and trees are planted in the rear left between the road and the visually impaired person H.

図6は、実施の形態において、視覚障害者Hに対して報知する際にめがね型機器2に表示される画像の表示の一例を示す模式図である。表示制御部27は、視覚障害者Hが装着するめがね型機器2のレンズ部分に現在の状況を表示させる。 FIG. 6 is a schematic diagram showing an example of displaying an image displayed on the eyeglass-type device 2 when notifying the visually impaired person H in the embodiment. The display control unit 27 causes the lens portion of the eyeglass-type device 2 worn by the visually impaired person H to display the current situation.

なお、図6においては、めがね型機器2の右側、或いは、左側のいずれか一方の側のレンズ部分に現在の状況を表示させた例を示している。但し、いずれのレンズ部分に表示させるか、或いは、両方のレンズ部分に跨がって表示させるかについては、任意に設定することができる。 Note that FIG. 6 shows an example in which the current situation is displayed on the lens portion on either the right side or the left side of the eyeglass-type device 2. However, it is possible to arbitrarily set which lens portion is to be displayed or which lens portion is to be displayed so as to straddle both lens portions.

図6に示されているように、視覚障害者Hは、二重丸で、表示領域の中心に示されている。また、前方から近づく対向者については、星形で示されている。その他の建物や看板等については、図5に示す現在の状況を示すようにそれぞれの位置に配置されている。このように検知部21が検知した結果がレンズ部分に表示されることによって、視覚障害者Hに対する報知が行われる。 As shown in FIG. 6, the visually impaired person H is indicated by a double circle in the center of the display area. Opponents approaching from the front are shown in a star shape. Other buildings, signboards, etc. are arranged at their respective positions so as to show the current situation shown in FIG. By displaying the result detected by the detection unit 21 on the lens portion in this way, the visually impaired person H is notified.

送受信部28は、めがね型機器2と呈示装置3との間で無線で信号のやり取りを行う。具体的には、めがね型機器2の送受信部28から呈示装置3の送受信部31に対して、呈示装置3を介して視覚障害者Hに対して現在の状況を報知する前段階としての注意喚起を行うための信号を送信する。一方、呈示装置3からはこの注意喚起に対する視覚障害者Hからの承諾の信号を受信する。 The transmission / reception unit 28 wirelessly exchanges signals between the glasses-type device 2 and the presentation device 3. Specifically, the transmission / reception unit 28 of the glasses-type device 2 alerts the transmission / reception unit 31 of the presentation device 3 as a preliminary step to notify the visually impaired person H of the current situation via the presentation device 3. Send a signal to do. On the other hand, the presentation device 3 receives a signal of consent from the visually impaired person H for this alert.

呈示装置3は、視覚障害者Hに対して現在の状況を報知するための注意喚起を行うために用いられる。呈示装置3は、送受信部31と、振動部32と、入力部33とを備える。 The presentation device 3 is used to call attention to the visually impaired person H to notify the current situation. The presentation device 3 includes a transmission / reception unit 31, a vibration unit 32, and an input unit 33.

送受信部31は、めがね型機器2の送受信部28からの視覚障害者Hに対して現在の状況を報知するための注意喚起を行うための信号を受信する。また、この注意喚起に対する視覚障害者Hからの承諾の信号をめがね型機器2の送受信部28に向けて送信する。 The transmission / reception unit 31 receives a signal from the transmission / reception unit 28 of the glasses-type device 2 to call attention to the visually impaired person H to notify the current situation. Further, a signal of consent from the visually impaired person H for this alert is transmitted to the transmission / reception unit 28 of the glasses-type device 2.

振動部32は、制御部26の指示に基づき、視覚障害者Hに対して現在の状況を報知するために注意喚起を行う。具体的には、振動部32が振動することで、呈示装置3が装着されている白杖Wを振動させて視覚障害者Hに注意喚起を行う。そのため、振動部32は、例えば、制御部26からの信号に基づいて振動する振動素子で構成される。 Based on the instruction of the control unit 26, the vibrating unit 32 alerts the visually impaired person H in order to notify the current situation. Specifically, when the vibrating unit 32 vibrates, the white cane W to which the presentation device 3 is attached is vibrated to alert the visually impaired person H. Therefore, the vibrating unit 32 is composed of, for example, a vibrating element that vibrates based on a signal from the control unit 26.

入力部33は、注意喚起を受けた視覚障害者Hが、注意喚起を受けたことを理解し、めがね型機器2から視覚障害者Hが置かれている現在の状況について報知を受けることについて了承した旨の信号をめがね型機器2に対して送信する際に用いられる。 The input unit 33 understands that the visually impaired person H who has received the attention has received the attention, and acknowledges that the glasses-type device 2 notifies the visually impaired person H about the current situation in which the visually impaired person H is placed. It is used when transmitting a signal to that effect to the glasses-type device 2.

入力部33の形態については、ボタン、スイッチ、ダイアル等、様々な態様が考えられるが、視覚障害者Hから確実にめがね型機器2に対して了承した旨の信号を送信することができるのであれば、どのような態様であっても良い。 Various modes such as buttons, switches, dials, etc. can be considered for the form of the input unit 33, but it is possible for the visually impaired person H to reliably transmit a signal to the effect that the eyeglass-type device 2 has been approved. However, any aspect may be used.

呈示装置3は、視覚障害者Hが歩行に際して保持する白杖Wに装着される。白杖Wに装着するための方法については、様々な方法が考えられるが、視覚障害者Hに対して確実に注意喚起を促すことができる態様であれば、どのような方法をもって白杖Wに装着されていても良い。 The presentation device 3 is attached to a white cane W held by the visually impaired person H when walking. Various methods can be considered for attaching to the white cane W, but any method can be used to attach the white cane W to the white cane W as long as it can surely call attention to the visually impaired person H. It may be attached.

なお、学習部22、比較判断部23、報知部24、表示制御部27、送受信部28の各働きについては、制御部26の制御の下、実行されるものとして説明してきた。すなわち、これら各部が行う処理は、学習機能、比較判断機能、報知機能、表示制御機能というように、制御部26における各機能であると把握することができる。 The functions of the learning unit 22, the comparison determination unit 23, the notification unit 24, the display control unit 27, and the transmission / reception unit 28 have been described as being executed under the control of the control unit 26. That is, it can be understood that the processing performed by each of these units is each function of the control unit 26, such as a learning function, a comparison determination function, a notification function, and a display control function.

一方でこれらの各機能を、或いは、複数の機能をまとめて回路、装置として構成することも可能である。例えば、各機能が個別の回路や装置として構成される場合には、制御回路の他、検知装置、学習回路、比較判断回路、報知回路、表示制御回路、送受信回路が設けられることになる。 On the other hand, it is also possible to configure each of these functions or a plurality of functions together as a circuit or a device. For example, when each function is configured as an individual circuit or device, a detection device, a learning circuit, a comparison / determination circuit, a notification circuit, a display control circuit, and a transmission / reception circuit are provided in addition to the control circuit.

[動作]
次に、図7及び図8を利用して、視覚障害者用歩行補助装置1が視覚障害者Hの現在の周囲の状況を検知して報知するまでの処理の流れを説明する。図7及び図8は、実施の形態において視覚障害者Hに対して現在の状況を報知する流れを示すフローチャートである。
[motion]
Next, with reference to FIGS. 7 and 8, the flow of processing until the visually impaired walking assist device 1 detects and notifies the current surrounding situation of the visually impaired person H will be described. 7 and 8 are flowcharts showing a flow of notifying the visually impaired person H of the current situation in the embodiment.

視覚障害者Hは、歩行を開始するに当たって、図1に示すように、めがね型機器2を装着し、呈示装置3が装着されている白杖Wを手に持つ。視覚障害者Hがめがね型機器2を装着することでめがね型機器2の電源が入り、検知部21による現在の状況の検知が開始される(ST1)。 At the start of walking, the visually impaired person H wears a glasses-type device 2 and holds a white cane W to which the presentation device 3 is attached, as shown in FIG. When the visually impaired person H wears the spectacle-type device 2, the power of the spectacle-type device 2 is turned on, and the detection unit 21 starts detecting the current situation (ST1).

なお、ここでは視覚障害者Hがめがね型機器2を装着することでめがね型機器2の電源が入ることとしたが、もちろん、視覚障害者H自身がめがね型機器2の電源を入れるようにしても良い。 Here, it was decided that the visually impaired person H would turn on the glasses-type device 2 by wearing the glasses-type device 2, but of course, the visually impaired person H himself turned on the glasses-type device 2. Is also good.

上述したように、検知部21は、測距センサ211を備えている。そこで、制御部26は、検知部21を介して測距センサ211からの検知結果の情報を取得する(ST2)。取得された検知結果は、比較判断部23に送信され、検知結果の解析が実行される(ST3)。比較判断部23が解析を行った結果、視覚障害者Hの所定範囲内に危険物があるか否かを判断する(ST4)。 As described above, the detection unit 21 includes a distance measuring sensor 211. Therefore, the control unit 26 acquires the information of the detection result from the distance measuring sensor 211 via the detection unit 21 (ST2). The acquired detection result is transmitted to the comparison determination unit 23, and the analysis of the detection result is executed (ST3). As a result of the analysis by the comparative determination unit 23, it is determined whether or not there is a dangerous substance within the predetermined range of the visually impaired person H (ST4).

ここで、危険物の有無を判断する所定範囲は、任意に設定することができる。すなわち、カメラ等のセンサを用いることのできる、例えば、視覚障害者Hを中心にした半径3mを所定の範囲と設定できる。この判断は、視覚障害者Hに対して報知を行うに当たっての、いわば、現在の状況の第1の確認処理と言える。比較判断部23が解析した結果、所定範囲内に危険物がない場合には(ST4のNO)、改めてステップST2に戻って、引き続き視覚障害者Hの周囲の検知を実行する。 Here, a predetermined range for determining the presence or absence of a dangerous substance can be arbitrarily set. That is, a sensor such as a camera can be used, for example, a radius of 3 m centered on the visually impaired person H can be set as a predetermined range. This determination can be said to be, so to speak, the first confirmation process of the current situation in notifying the visually impaired person H. As a result of the analysis by the comparison determination unit 23, if there is no dangerous substance within the predetermined range (NO in ST4), the process returns to step ST2 again to continuously detect the surroundings of the visually impaired person H.

一方、比較判断部23が解析した結果、所定範囲内に危険物が存在する場合には(ST4のYES)、次に、検知部21は、測位・方位センサ212を用いた検知結果を取得し、比較判断部23に送信する(ST5)。比較判断部23では、受け取った測位・方位センサ212からの検知結果を基に解析を行う(ST6)。 On the other hand, as a result of analysis by the comparison determination unit 23, if a dangerous substance exists within a predetermined range (YES in ST4), then the detection unit 21 acquires the detection result using the positioning / orientation sensor 212. , Sent to the comparison determination unit 23 (ST5). The comparison determination unit 23 performs analysis based on the detection result from the received positioning / orientation sensor 212 (ST6).

測位・方位センサ212を用いた検知は、例えば、ジャイロを用いて視覚障害者Hの傾きを検知する等、視覚障害者Hの現在地において危険物があるか否かを検知するものである。比較判断部23が解析した結果、現在地において危険物がないと判断できる場合には(ST7のNO)、改めてステップST2に戻って、引き続き視覚障害者Hの周囲の検知を実行する。この判断は、視覚障害者Hに対して報知を行うに当たっての、いわば、現在の状況の第2の確認処理と言える。 The detection using the positioning / orientation sensor 212 detects whether or not there is a dangerous substance at the present location of the visually impaired person H, for example, detecting the inclination of the visually impaired person H using a gyro. If, as a result of the analysis by the comparative determination unit 23, it can be determined that there is no dangerous substance at the current location (NO in ST7), the process returns to step ST2 and continues to detect the surroundings of the visually impaired person H. This determination can be said to be, so to speak, the second confirmation process of the current situation in notifying the visually impaired person H.

もし、現在地に危険物があると判断された場合には(ST7のYES)、次に、制御部26は、学習部22を介して現在地における、視覚障害者Hの過去の生体情報を確認する(ST8)。学習部22では、記憶部25に記憶されている視覚障害者Hの過去の生体情報の中から、現在地における危険の有無を判断するに適切な生体情報が存在するか否かを確認する(ST9)。すなわち、まず学習部22は、視覚障害者Hが現在いる位置と同じ場所における生体情報が記憶部25に記憶されているか否かを確認する。 If it is determined that there is a dangerous substance at the current location (YES in ST7), then the control unit 26 confirms the past biological information of the visually impaired person H at the current location via the learning unit 22. (ST8). The learning unit 22 confirms whether or not there is appropriate biometric information for determining the presence or absence of danger at the current location from the past biometric information of the visually impaired person H stored in the storage unit 25 (ST9). ). That is, first, the learning unit 22 confirms whether or not the biological information at the same place where the visually impaired person H is currently located is stored in the storage unit 25.

もし視覚障害者Hが現在いる場所を基準として適切な生体情報を記憶部25内から抽出することができない場合には(ST9のNO)、次に学習部22は、参考となる生体情報を検索する(ST10)。ここで参考となる生体情報とは、過去の生体情報のうち、例えば、図4に示すような経度緯度を参考にした、現在地に近い場所における過去の生体情報である。また、キーワードを用いて、視覚障害者Hが例えば、駅にいる場合には、駅にいた時の過去の生体情報を検索することも有効である。 If appropriate biometric information cannot be extracted from the storage unit 25 based on the current location of the visually impaired person H (NO in ST9), then the learning unit 22 searches for reference biometric information. (ST10). The biometric information referred to here is, among the past biometric information, the past biometric information at a place close to the current location with reference to, for example, the longitude and latitude as shown in FIG. It is also effective to search the past biometric information when the visually impaired person H is at the station, for example, by using the keyword.

学習部22は、参考となる生体情報が記憶部25内から抽出できるか否か、検索を行い(ST11)、抽出するまで検索を継続する(ST11のNO)。一方、参考となる生体情報が記憶部25内から抽出することができた場合には(ST11のYES)、抽出することができた過去の生体情報を予め設定されている閾値と比較する(図8のST12)。もちろん、元々視覚障害者Hが現在いる位置と同じ場所における過去の生体情報が取得できている場合にも(ST9のYES)、同じように取得した過去の生体情報を閾値と比較する。 The learning unit 22 searches whether or not the reference biological information can be extracted from the storage unit 25 (ST11), and continues the search until it is extracted (NO in ST11). On the other hand, when the reference biometric information can be extracted from the storage unit 25 (YES in ST11), the past biometric information that could be extracted is compared with the preset threshold value (Fig.). 8 ST12). Of course, even when the past biometric information at the same place where the visually impaired person H is originally present can be acquired (YES in ST9), the past biometric information acquired in the same manner is compared with the threshold value.

ここで、過去の生体情報が閾値を超えているか否かを確認するのは、視覚障害者Hが現在いる場所において、もし、心拍数が非常に多くなる等、過去に重大な生体情報が得られているのであれば、視覚障害者Hが同じ場所、或いは、似たような場所にいることは危険が存在する、と判断できるからである。 Here, it is confirmed whether or not the past biometric information exceeds the threshold value in the place where the visually impaired person H is currently present, and if the heart rate becomes very high, important biometric information is obtained in the past. This is because it can be determined that there is a danger if the visually impaired person H is in the same place or a similar place.

すなわち、比較判断部23では、検知部21における測距センサ211及び測位・方位センサ212から得られる検知結果、及び、学習部22が抽出した過去の視覚障害者Hの生体情報に鑑みて、現在視覚障害者Hがいる場所における危険性の有無を判断することになる。 That is, the comparison determination unit 23 is currently in view of the detection results obtained from the distance measurement sensor 211 and the positioning / direction sensor 212 in the detection unit 21 and the past biological information of the visually impaired person H extracted by the learning unit 22. It will be determined whether or not there is a danger in the place where the visually impaired person H is present.

比較判断部23が閾値を超えると判断しない場合には(図8のST12のNO)、改めてステップST2に戻って、引き続き視覚障害者Hの周囲の検知を実行する。 If the comparison determination unit 23 does not determine that the threshold value is exceeded (NO in ST12 in FIG. 8), the process returns to step ST2 and continues to detect the surroundings of the visually impaired person H.

一方、比較判断部23が、視覚障害者Hの過去の生体情報を閾値と比較した結果、閾値を超えると判断した場合には(ST12のYES)、視覚障害者Hの現在の状況において危険が存在すると判断する(ST13)。 On the other hand, if the comparative determination unit 23 compares the past biological information of the visually impaired person H with the threshold value and determines that the threshold value is exceeded (YES in ST12), there is a danger in the current situation of the visually impaired person H. It is determined that it exists (ST13).

そして、視覚障害者Hに対して注意を喚起する(ST14)。具体的には、報知部24が送受信部28を介して信号を呈示装置3に送信する。呈示装置3では、送受信部31がめがね型機器2からの注意喚起の信号を受信し、振動部32を構成する振動素子を駆動させて白杖Wに振動を伝える。 Then, attention is drawn to the visually impaired person H (ST14). Specifically, the notification unit 24 transmits a signal to the presentation device 3 via the transmission / reception unit 28. In the presentation device 3, the transmission / reception unit 31 receives a signal for calling attention from the glasses-type device 2, drives the vibration element constituting the vibration unit 32, and transmits the vibration to the white cane W.

併せて、制御部26は、現在の状況を生体情報センサ213から取得している視覚障害者Hの心拍数とともに記憶部25に記憶させる(ST15)。この記憶部25に記憶された生体情報が、今後視覚障害者Hが歩行を行う際の危険性の報知の際の判断情報となる。 At the same time, the control unit 26 stores the current situation in the storage unit 25 together with the heart rate of the visually impaired person H acquired from the biological information sensor 213 (ST15). The biological information stored in the storage unit 25 will be the judgment information when the visually impaired person H is informed of the danger when walking in the future.

なお、ここでは視覚障害者Hに対する注意喚起の処理と現在の状況を記憶部25に記憶させる処理を上述した順に説明した。但し、この順に処理されなくても、例えば、並行して処理しても、或いは、順番を入れ替えて処理しても良い。 Here, the process of calling attention to the visually impaired person H and the process of storing the current situation in the storage unit 25 have been described in the order described above. However, even if they are not processed in this order, they may be processed in parallel or may be processed in a different order.

制御部26は、注意喚起を受けた視覚障害者Hが現在の状況について報知を受けることについて了解したか否かの信号が、呈示装置3からめがね型機器2へ送信されたか否かを確認する(ST16)。具体的には、視覚障害者Hが呈示装置3の入力部33を用いてめがね型機器2信号を送ったか否かを確認する。 The control unit 26 confirms whether or not the signal of whether or not the visually impaired person H who has received the attention has agreed to be notified of the current situation is transmitted from the presentation device 3 to the eyeglass-type device 2. (ST16). Specifically, it is confirmed whether or not the visually impaired person H has sent the glasses-type device 2 signal using the input unit 33 of the presentation device 3.

制御部26は、視覚障害者Hからの了解の信号を受信できない場合には(ST16のNO)、引き続き振動部32を振動させる。一方、視覚障害者Hが了解の信号を送信してめがね型機器2の送受信部28が当該信号を受信した場合には(ST16のYES)、視覚障害者Hが現在の状況について報知を受けると判断する。 If the control unit 26 cannot receive the consent signal from the visually impaired person H (NO in ST16), the control unit 26 continues to vibrate the vibrating unit 32. On the other hand, when the visually impaired person H transmits an consent signal and the transmission / reception unit 28 of the glasses-type device 2 receives the signal (YES in ST16), the visually impaired person H is notified of the current situation. to decide.

なお、視覚障害者Hが了解の信号を送信した場合には、当該信号を受信したことをもって、制御部26は振動部32が振動するように呈示装置3に向けて駆動信号を送信することを停止する。或いは、視覚障害者Hが入力部33を操作した時点で、振動部32の振動を止めるように構成しても良い。 When the visually impaired person H transmits an consent signal, the control unit 26 transmits a drive signal to the presentation device 3 so that the vibrating unit 32 vibrates when the signal is received. Stop. Alternatively, the vibration of the vibrating unit 32 may be stopped when the visually impaired person H operates the input unit 33.

制御部26は、さらに、引き続き視覚障害者Hの動きを検知している検知部21からの信号を受信して、視覚障害者Hが立ち止まったか(停止したか)を確認する(ST17)。上述したように、視覚障害者Hが歩行している際に、いきなり現在の状況を報知することは却って危険である。そこで制御部26は、検知部21による検知結果を基に、視覚障害者Hが立ち止まったか否かを確認するものである。 Further, the control unit 26 further receives a signal from the detection unit 21 that continuously detects the movement of the visually impaired person H, and confirms whether the visually impaired person H has stopped (stopped) (ST17). As described above, it is rather dangerous to suddenly notify the current situation when the visually impaired person H is walking. Therefore, the control unit 26 confirms whether or not the visually impaired person H has stopped based on the detection result by the detection unit 21.

もし視覚障害者Hが停止しない場合には(ST17のNO)、視覚障害者Hが停止するまで報知処理を待機の状態としておく。或いは、改めて視覚障害者Hに対して注意喚起を行うこととしても良い。 If the visually impaired person H does not stop (NO in ST17), the notification process is set to a standby state until the visually impaired person H stops. Alternatively, the visually impaired person H may be alerted again.

一方、視覚障害者が立ち止まったら(ST17のYES)、視覚障害者Hに対して現在の状況について報知するべく、めがね型機器2のレンズ部分に現在の状況を表示させる(ST18)。ここでレンズ部分に表示される現在の状況は、例えば図6に示すような表示態様で表示されることになる。 On the other hand, when the visually impaired person stops (YES in ST17), the current situation is displayed on the lens portion of the eyeglass-type device 2 in order to notify the visually impaired person H about the current situation (ST18). Here, the current situation displayed on the lens portion is displayed in a display mode as shown in FIG. 6, for example.

なお検知部21には、生体情報センサ213も備えられているが、当該生体情報センサ213は、視覚障害者Hが歩行する際の心拍数の変化をリアルタイムに検出し、記憶部25に記憶させる。 The detection unit 21 is also provided with a biometric information sensor 213. The biometric information sensor 213 detects a change in heart rate when the visually impaired person H walks in real time and stores it in the storage unit 25. ..

以上少なくとも1つの実施の形態によれば、このような処理を行うことで、障害者が歩行する際に、たとえ危険な状況や災害等に遭遇した場合であっても可能な限り視覚障害者単独で危機を回避しつつ、健常者と同じようにストレスを感じることなく自由に移動することが可能となる。 According to the above at least one embodiment, by performing such a process, the visually impaired person alone as much as possible even when the handicapped person encounters a dangerous situation or a disaster when walking. It is possible to move freely without feeling stress like a healthy person while avoiding a crisis.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これらの実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これらの実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although some embodiments of the present invention have been described, these embodiments are presented as examples and are not intended to limit the scope of the invention. These embodiments can be implemented in various other embodiments, and various omissions, replacements, and changes can be made without departing from the gist of the invention. These embodiments and variations thereof are included in the scope of the invention described in the claims and the equivalent scope thereof, as are included in the scope and gist of the invention.

1 視覚障害者用歩行補助装置
2 めがね型機器
21 検知部
22 学習部
23 比較判断部
24 報知部
25 記憶部
26 制御部
27 表示制御部
28 送受信部
3 呈示装置
31 送受信部
32 振動部
33 入力部
1 Walking assist device for the visually impaired 2 Glasses type device 21 Detection unit 22 Learning unit 23 Comparison judgment unit 24 Notification unit 25 Storage unit 26 Control unit 27 Display control unit 28 Transmission / reception unit 3 Presentation device 31 Transmission / reception unit 32 Vibration unit 33 Input unit

Claims (5)

視覚障害者が装着し、前記視覚障害者が歩行する際に前記視覚障害者の周囲の状況を検知する装着機器と、
前記視覚障害者が歩行の際に保持する白杖に装着される呈示装置と、を備え、
知の結果危険な状況が存在する場合に、前記呈示装置の振動部を介して前記視覚障害者に対して注意を喚起し、前記視覚障害者が前記呈示装置の入力部を操作することによって前記装着機器による報知を得ることの承諾を受けた後に、前記装着機器が前記視覚障害者に対して現在の状況を報知することを特徴とする視覚障害者用歩行補助装置。
A wearing device that is worn by a visually impaired person and detects the surrounding situation of the visually impaired person when the visually impaired person walks.
A presentation device attached to a white cane held by a visually impaired person when walking is provided.
When a dangerous situation exists as a result of the detection , the visually impaired person is alerted to the visually impaired person through the vibrating part of the presentation device, and the visually impaired person operates the input part of the presentation device. A walking assist device for the visually impaired , wherein the wearing device notifies the visually impaired of the current situation after receiving consent to obtain the notification by the wearing device.
前記装着機器は、
測距センサと測位・方位センサと前記視覚障害者の心拍数を表す生体情報を検出する生体情報センサとを備える検知部と、
前記視覚障害者の過去の前記生体情報を取得する学習部と、
前記検知部による検知結果及び前記学習部からの前記生体情報と予め設定されている閾値との比較結果を用いて、前記閾値を超えるか否かをもって前記視覚障害者の前記現在の状況における危険性の有無を判断する比較判断部と、
前記閾値を超える場合には、前記現在の状況に危険性が存在するとの前記比較判断部における判断に基づいて、前記視覚障害者に対して前記現在の状況を報知する報知部と、
を備えることを特徴とする請求項1に記載の視覚障害者用歩行補助装置。
The attached device is
A detection unit including a distance measuring sensor, a positioning / orientation sensor, and a biological information sensor that detects biological information representing the heart rate of the visually impaired person.
A learning unit that acquires the past biometric information of the visually impaired person,
Using the detection result by the detection unit and the comparison result between the biometric information from the learning unit and the preset threshold value, the risk of the visually impaired person in the current situation depends on whether or not the threshold value is exceeded. A comparison judgment unit that judges the presence or absence of
When the threshold value is exceeded, the notification unit for notifying the visually impaired person of the current situation based on the judgment in the comparison determination unit that the current situation is dangerous.
The walking assist device for the visually impaired according to claim 1, wherein the walking assist device is provided.
前記装着機器は、さらに前記生体情報センサが検出した前記視覚障害者の前記生体情報を記憶する記憶部を備え、
前記視覚障害者への報知の可否を判断するに当たって、前記学習部は、前記記憶部に記憶されている過去の前記生体情報の中から、前記現在の状況に合致する前記生体情報を取得し、前記比較判断部による前記閾値との比較を行うことを特徴とする請求項2に記載の視覚障害者用歩行補助装置。
The wearing device further includes a storage unit for storing the biometric information of the visually impaired person detected by the biometric information sensor.
In determining whether or not the notification to the visually impaired person is possible, the learning unit acquires the biometric information that matches the current situation from the past biometric information stored in the storage unit. The walking assist device for the visually impaired according to claim 2, wherein the comparison determination unit performs a comparison with the threshold value.
前記呈示装置は、
前記視覚障害者に対して注意を喚起する振動部と、
前記視覚障害者が前記承諾を前記装着機器に対して与えるために用いる入力部と、
を備えることを特徴とする請求項1ないし請求項3のいずれかに記載の視覚障害者用歩行補助装置。
The presentation device is
The vibrating part that calls attention to the visually impaired,
An input unit used by the visually impaired person to give the consent to the wearing device, and
The walking assist device for the visually impaired according to any one of claims 1 to 3, wherein the walking assist device is provided.
視覚障害者が装着する装着機器と白杖に装着される呈示装置からなる視覚障害者用歩行補助装置を用いて前記視覚障害者が歩行する際に、前記装着機器が、常時前記視覚障害者の周囲の状況を検知するステップと、
前記装着機器が、前記視覚障害者が存在する現在の状況に合致する前記視覚障害者の過去の生体情報を取得するステップと、
前記装着機器が、検知結果と取得された前記生体情報とを用いて前記視覚障害者への報知の可否を判断するステップと、
判断の結果、危険な状況が存在すると判断される場合に、前記呈示装置の振動部を介して前記視覚障害者に対して前記現在の状況を報知するための注意喚起を行うステップと、
前記視覚障害者による前記呈示装置の入力部の操作に基づく前記注意喚起に対する承諾の信号を前記装着機器が受信するステップと、
前記承諾を受けた後に、前記装着機器が前記現在の状況を前記視覚障害者に対して報知するステップと、
を備えることを特徴とする視覚障害者用歩行補助方法。
When the visually impaired person walks using a walking assist device for the visually impaired, which consists of a wearing device worn by the visually impaired person and a presentation device attached to a white cane, the wearing device is always used by the visually impaired person. Steps to detect the surrounding situation and
A step in which the wearing device acquires past biological information of the visually impaired person that matches the current situation in which the visually impaired person is present.
A step in which the wearing device determines whether or not to notify the visually impaired person by using the detection result and the acquired biological information.
As a result of the judgment, when it is determined that a dangerous situation exists, a step of alerting the visually impaired person to the visually impaired person via the vibrating part of the presentation device, and a step of calling attention to the current situation.
The step of receiving the signal of consent for the alerting based on the operation of the input unit of the presentation device by the visually impaired person, and the step of receiving the wearing device .
After receiving the consent, the step of notifying the visually impaired person of the current situation by the wearing device , and
A walking assist method for the visually impaired, characterized in that it is provided with.
JP2019033505A 2019-02-27 2019-02-27 Walking assist device for the visually impaired and walking assist method for the visually impaired Active JP7080492B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019033505A JP7080492B2 (en) 2019-02-27 2019-02-27 Walking assist device for the visually impaired and walking assist method for the visually impaired

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019033505A JP7080492B2 (en) 2019-02-27 2019-02-27 Walking assist device for the visually impaired and walking assist method for the visually impaired

Publications (2)

Publication Number Publication Date
JP2020137580A JP2020137580A (en) 2020-09-03
JP7080492B2 true JP7080492B2 (en) 2022-06-06

Family

ID=72279527

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019033505A Active JP7080492B2 (en) 2019-02-27 2019-02-27 Walking assist device for the visually impaired and walking assist method for the visually impaired

Country Status (1)

Country Link
JP (1) JP7080492B2 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017043101A1 (en) 2015-09-08 2017-03-16 ソニー株式会社 Information processing device, information processing method, and program

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003023699A (en) * 2001-07-05 2003-01-24 Saibuaasu:Kk Spatial information auralizing system and spatial information auralizing method
WO2012068280A1 (en) * 2010-11-16 2012-05-24 Echo-Sense Inc. Remote guidance system

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017043101A1 (en) 2015-09-08 2017-03-16 ソニー株式会社 Information processing device, information processing method, and program

Also Published As

Publication number Publication date
JP2020137580A (en) 2020-09-03

Similar Documents

Publication Publication Date Title
JP2020508440A (en) Personal navigation system
US20200265701A1 (en) Systems and methods for detecting and monitoring hazardous obstacles
KR20190046317A (en) Walking safety system
JP6699665B2 (en) Information processing apparatus, information processing method, and program
JP7080492B2 (en) Walking assist device for the visually impaired and walking assist method for the visually impaired
JP6500139B1 (en) Visual support device
KR101982848B1 (en) Vision aids apparatus for the vulnerable group of sight comprising a removable wearable device and a control device
KR20200071560A (en) Farm Experience Safety Management System
US11886190B2 (en) Method for controlling robot, robot, and recording medium
US20230288934A1 (en) Method for controlling robot, robot, and recording medium
KR20150106986A (en) System for detecting drowsiness based on server and the method thereof
WO2020188626A1 (en) Vision assistance device
KR101235585B1 (en) Omni-directional apparatus and system for announce blind persons, method for announce using the same and recording medium thereof
JP2001351190A (en) Walk supporting system
JP2000353289A (en) Information providing method, its implementation device, and recording medium for recording its processing program
JP7130230B2 (en) Cooperation assistance system and cooperation assistance method
US20240037594A1 (en) Incentive providing system, incentive providing method, and program
KR101679341B1 (en) Cane for visually handicapped person
KR20170004142A (en) GPS pedestrian navigation and location-based awareness Alarms sound for the visually impaired
US20230419826A1 (en) Traffic facility control system, traffic facility control method, and program
JP2019101766A (en) User support system
CN115428470B (en) Robot control method, robot, program, and recording medium
JP7298510B2 (en) state estimator
JP7439694B2 (en) Information processing device, information processing method, and program
US20200281771A1 (en) Movement Aid for the Visually Impaired

Legal Events

Date Code Title Description
A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A80

Effective date: 20190326

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200609

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200807

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20200807

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20210112

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210409

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20210409

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20210416

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20210420

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20210611

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20210615

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20211012

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20211214

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220203

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20220315

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20220419

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20220419

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220518

R150 Certificate of patent or registration of utility model

Ref document number: 7080492

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150