JP2011527005A - Improved orientation, navigation and information system, especially for the blind or visually impaired - Google Patents

Improved orientation, navigation and information system, especially for the blind or visually impaired Download PDF

Info

Publication number
JP2011527005A
JP2011527005A JP2011516198A JP2011516198A JP2011527005A JP 2011527005 A JP2011527005 A JP 2011527005A JP 2011516198 A JP2011516198 A JP 2011516198A JP 2011516198 A JP2011516198 A JP 2011516198A JP 2011527005 A JP2011527005 A JP 2011527005A
Authority
JP
Japan
Prior art keywords
navigation
information
information system
orientation
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2011516198A
Other languages
Japanese (ja)
Inventor
ダ シルバ フレイタス ディアメンティノ ルイ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Universidade do Porto
Original Assignee
Universidade do Porto
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Universidade do Porto filed Critical Universidade do Porto
Publication of JP2011527005A publication Critical patent/JP2011527005A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00Teaching, or communicating with, the blind, deaf or mute
    • G09B21/001Teaching or communicating with blind persons
    • G09B21/006Teaching or communicating with blind persons using audible presentation of the information
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/04Electrically-operated educational appliances with audible presentation of the material to be studied
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/08Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G09B5/12Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously
    • G09B5/125Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations different stations being capable of presenting different information simultaneously the stations being mobile

Landscapes

  • Engineering & Computer Science (AREA)
  • Educational Administration (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Navigation (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Traffic Control Systems (AREA)

Abstract

本発明は、特に全盲者または視覚障害者のために改良された方位特定、ナビゲーションおよび情報システムに関する。これは基本的に、全盲または視覚障害者が、通常は公共交通機関の利用者に対して、ポスターや情報掲示あるいは各種の性質の動的情報スクリーンを通じて視覚的にのみ提供される情報にアクセスできるようにするシステムである。このシステムによれば、第一に、1つまたは複数の別の通信チャネルを備える従来の携帯電話(2)または無線通信機を使って、民間または公共の施設または場所の外または中から情報にアクセスすることが可能となり、第二に、同時に、関心対象の場所(20)においてシステム利用者の指示によってその利用者の方位特定およびナビゲーションを行うことが可能となり、これは、音響発生器(3,17)の個別の、妨害しないシステムを用い、また利用者(1)の関心対象の場所に設置された、これに関連する、Bluetoothおよび/またはWi−Fiおよび/またはその他の方式の携帯電話システムまたは無線通信ネットワーク(6)を利用して行われる。それにより、利用者は自分の正確な位置を知ることができ、利用者に道順を案内することができる。本願の方位特定、ナビゲーションおよび情報システムはまた、たとえば方位特定の説明を視覚的に表示するようにシステムを変更することによって、視覚障害のない人々によっても使用される。The present invention relates to an improved orientation, navigation and information system, particularly for blind or visually impaired people. This basically access information totally blind person or visually impaired person, usually a relative users of public transportation, it is only provided to visually through posters and information posting or dynamic information screens for various properties It is a system that makes it possible. According to this system, firstly, information can be transferred from outside or inside a private or public facility or place using a conventional mobile phone (2) or wireless communicator with one or more separate communication channels. Second, at the same time, it is possible to specify the user's orientation and navigation at the location of interest (20) according to the instructions of the system user, which is the acoustic generator (3 , 17), and related Bluetooth, and / or Wi-Fi and / or other types of mobile phones, which are used in individual, non-interfering systems and installed at the location of interest of the user (1) This is done using a system or a wireless communication network (6). Thereby, the user can know his / her exact position and can guide directions to the user. The orientation determination, navigation and information system of the present application is also used by people who are not visually impaired, for example, by modifying the system to visually display an orientation specific description.

Description

本発明は、音声方位特定システムに関し、携帯電話またはWLANネットワーク内で無線コンピュータを通じた自動制御式音声発生および口頭通信機器によって機能し、通信機の位置特定および音声方位特定システムと統合され、交通機関の駅またはその他の場所といった施設の外または中で歩行者をナビゲートするためのシステム、すなわち通信機の位置特定および音声方位特定システムと統合された、音声方位特定システムに関する。   The present invention relates to a voice azimuth identification system, which functions by an automatically controlled voice generation and verbal communication device through a wireless computer in a mobile phone or a WLAN network, integrated with a communication machine position identification and voice azimuth identification system, The present invention relates to a system for navigating pedestrians outside or inside a facility such as a station or other location, ie, a voice orientation identification system integrated with a communicator location and voice orientation identification system.

地下鉄や鉄道の駅をはじめとする公共または民間の場所で提供される機能とサービスに関しては、全盲者または視覚障害者が普通に利用できる情報は現実に存在しない。   With regard to functions and services provided in public or private places such as subway and railway stations, there is no real information that is normally available to blind or visually impaired people.

わずかな例外として、一部の交通機関の駅に見られる点字の情報掲示物、美術館で稀に見られるような、特定の再生機で作動する、音声ガイドとも呼ばれる音声説明システムおよび、今後標準化が必要である。また、交通機関の駅や公共の歩行者用道路においてきわめて稀に見られるか、部分的に導入されている点字ブロックシステム(tactile floor system)がある。最後に、一般的に緊急避難信号、空港警備およびロンドン地下鉄の「隙間注意」の類の警報に関連する、注意を喚起し、あるいは直接的な情報を提供するための口頭メッセージに基づく情報システムもある。   With few exceptions, Braille information bulletins found at some transportation stations, voice explanation systems, also called voice guides, that work with specific players, such as those rarely seen in museums, and standardization in the future. is necessary. There is also a tactile floor system that is very rarely seen or partially introduced in transportation stations and public pedestrian roads. Finally, there is also an information system based on verbal messages to call attention or provide direct information, generally related to emergency evacuation signals, airport security and “gap attention” type alarms on the London Underground is there.

しかしながら、交通機関または公共もしくは民間の場所において、利用者がサービスを十分に使用できるための不可欠な方位特定およびナビゲーション情報は幅広く、複雑である。たとえば、交通機関の場合、目的地、駅、経路に関する情報を得ることができる。しかし、運送車両、船舶、可能な目的地に関する運行スケジュール情報ならびに運賃情報も必要である。   However, the orientation and navigation information that is essential for users to fully use the service in transportation or public or private places is wide and complex. For example, in the case of transportation facilities, information on destinations, stations, and routes can be obtained. However, operation schedule information and fare information regarding transportation vehicles, ships and possible destinations are also required.

サービスの利用を可能にするようなその他の必要情報は一般に視覚的に提供され、駅やその他の建物の異なる部分に設置されているため、明白な建築上の理由により、ある建物の中のすべての地点から見えるとはかぎらない。切符売場の場合がそうである。また、これは化粧室、警察または警備所、医務室、電気通信室、非常用設備、非常口等、その他の必須または重要サービスに関しても当てはまる。   Other necessary information that enables the use of the service is generally provided visually and is installed in different parts of the station and other buildings, so for obvious architectural reasons, everything in a building It may not be visible from the point. This is the case at the ticket office. This is also true for other essential or important services such as restrooms, police or guards, medical offices, telecommunications rooms, emergency equipment, emergency exits, etc.

これはさらに、人々がその目的の地点、すなわち乗船用スロープ、地下鉄のプラットフォームあるいはいずれかの立ち寄り地点に到達するのに必要な、個人的ナビゲーションに関する重要情報の場合にも当てはまる。言い換えれば、個人的な順路に関する情報である。上記の情報の多くは、建物や施設の入口または乗客その他の人々が通常利用するアクセス通路では利用できず、方向を指示し、利用者が利用できるサービスを説明する、情報表示(signaling)と呼ばれるより多くの視覚的支援手段が導入される。さまざまな部分空間や部屋のある場所では、看板やその他の視覚的情報の中には視覚化できないものがある。そのため、ナビゲーションを容易にするために、看板を設置すべき位置が十分に調査される。より複雑な建物では、ドア、エレベータまたは階段等、サービスや場所すべての情報表示が必要となる。   This is also the case for important information about personal navigation that is necessary for people to reach their destination, namely a boarding slope, a subway platform or any stop. In other words, it is information about a personal route. Much of the above information is called signaling, which is not available at the entrance of buildings or facilities or access passages normally used by passengers or other people, but gives directions and describes the services available to the user More visual support means are introduced. In places with various subspaces and rooms, some signs and other visual information cannot be visualized. Therefore, in order to facilitate navigation, the position where the signboard should be installed is sufficiently investigated. In more complex buildings, information on all services and places such as doors, elevators or stairs is required.

顧客としての全盲者および視覚障害者にとって、ナビゲーション情報を含む上記の情報が安易に提供された場合、内外の交通機関やその他の施設ならびにそのサービスを利用するうえで厳しい制約がある。   For customers who are blind and visually impaired as customers, if the above information including navigation information is easily provided, there are severe restrictions in using domestic and foreign transportation facilities and other facilities and services.

監督者の下で訓練を受ければ、全盲者または視覚障害者は自分自身の手段を使って、上述のような内外の交通機関の駅またはその他の建物やサービスを利用することができることが一般に知られている。しかしながら、情報入手の制約はそのままである。このような状況において、全盲者または視覚障害者は、その市民としての、およびあるサービスの利用者/顧客としての権利が著しく制限される。   When trained under a supervisor, it is generally known that blind or visually impaired persons can use their own means to use internal and external transportation stations or other buildings and services as described above. It has been. However, restrictions on obtaining information remain the same. In such situations, blind or visually impaired people are severely limited in their rights as citizens and as users / customers of certain services.

街頭で全盲者または視覚障害者にナビゲーション情報を提供するために、音声信号や音響付信号灯(acoustic lights)が用いられており、たとえば交通信号機に取り付けられた音声信号がある。このような信号機、すなわち音響付信号灯は、交通信号機と同期して自律的に動作する。その主な欠点は騒音公害であり、これまで、1日のうちの作動時間帯、環境騒音のレベルを考慮して音響振幅制御装置を用い、また鳥の鳴き声等の自然の音を採用することによって緩和されている。   Audio signals and acoustic lights are used to provide navigation information for blind or visually impaired people on the street, for example, audio signals attached to traffic lights. Such a traffic light, that is, a signal light with sound, operates autonomously in synchronization with the traffic light. The main drawback is noise pollution. So far, the sound amplitude control device has been used in consideration of the operating time of the day and the level of environmental noise, and natural sounds such as bird calls have been adopted. Has been eased by.

全盲の人々のためのナビゲーション支援システムを提案するいくつかの特許出願がある。   There are several patent applications that propose navigation assistance systems for blind people.

「全盲者のための管理およびナビゲーションシステム」と題するカナダ特許第10107684号明細書の文献は、「RFIDタグ」等のラジオ波を用いた固有の識別用機器の使用について述べており、この機器により、通信モジュールを通じて順路を信号で知らせる杖またはその人の脚に取り付けられた読み取り装置が検出される。この文献では、位置特定ユニットは赤外線放射または音波を使って通信モジュールの位置を特定し、追跡してもよい。通信モジュールに埋め込まれたマイクロフォンを使い、利用者本人またはその他の人物により発せられる音波および/または音声または超音波音響位置特定装置によって発せられる音響波を収集する。プロセッサがマイクロフォンにより収集された音声を処理して、処理されたデータをコンピュータシステムまたは通信モジュールに送信し、データはさらに処理される。通信モジュールに埋め込まれたスピーカは、警告信号、説明その他の情報を発生するのに使用される。マイクロフォンとスピーカを音響追跡装置と同時に使用し、マイクロフォンまたはスピーカが建物または屋外に設置された他の音響発生源またはセンサと通信できるようにする音響波を使って、利用者の位置を特定することができる。人間の聴力を利用せずに本願で開示される音響位置特定法を使用することの実現可能性は、現実の環境では非常に疑わしく、これは、音響波の性質が異なるために追跡機器間に重大な干渉が発生し、また周波数が低いために、表示処理技術による取扱いが可能な方法による有効な音声符号化が妨害され、利用者の順路決定中に有益であるほど高速でないからである。   The document of Canadian Patent No. 10107684 entitled “Management and Navigation System for the Blind” describes the use of unique identification equipment using radio waves, such as “RFID tags”. A cane or signal reader attached to the person's leg is signaled through the communication module to signal the route. In this document, the location unit may locate and track the location of the communication module using infrared radiation or sound waves. A microphone embedded in the communication module is used to collect acoustic waves emitted by the user himself / herself or other persons and / or acoustic waves emitted by the audio or ultrasonic acoustic localization device. A processor processes the voice collected by the microphone and sends the processed data to a computer system or communication module, where the data is further processed. A speaker embedded in the communication module is used to generate warning signals, explanations and other information. Use a microphone and speaker at the same time as an acoustic tracking device to locate the user using acoustic waves that allow the microphone or speaker to communicate with other sound sources or sensors installed in the building or outdoors Can do. The feasibility of using the acoustic localization method disclosed herein without using human hearing is very suspicious in real-world environments, because the nature of the acoustic wave is different, so that tracking devices This is because significant interference occurs and the low frequency hinders effective speech coding in a way that can be handled by display processing techniques and is not fast enough to be beneficial during user route determination.

「全盲者および視覚障害者のためのナビゲーション装置とナビゲーションシステムおよびナビゲーション方法」と題する欧州特許第1930742号明細書の文献では、全盲者のナビゲーションにGPSシステムが援用される。無線技術によるインタフェースを備える携帯電話を利用してもよい。このシステムは、建物またはその他の施設の中では、GPSや同様の信号の受信領域がないため、使用上、さまざまな障害がある。0.5mの精度で順路を確立することは、周知の「フェーディング」または「多重伝搬」という現象によって、特に屋外環境で現実には実現不能である。このシステムは、1977年まで、MOREと称するEU出資のプロジェクトで開発されたものと非常に似ており、このプロジェクトでは、障害者による追跡とナビゲーションを可能にする、Differential GPSを備える初めての携帯電話、GSM+GPSが作製された。   In the document of European Patent No. 1930742 entitled “Navigation device and navigation system and navigation method for the blind and visually impaired”, the GPS system is used for navigation of the blind. A mobile phone equipped with a wireless technology interface may be used. This system has various obstacles in use because there is no GPS or similar signal reception area in a building or other facility. Establishing a route with an accuracy of 0.5 m is not feasible in practice, especially in outdoor environments, due to the well-known phenomenon of “fading” or “multi-propagation”. This system is very similar to that developed in an EU-funded project called MORE until 1977, the first mobile phone with a differential GPS that enables tracking and navigation by the disabled. GSM + GPS was produced.

最後に、「全盲者のためのナビゲーションシステムおよびそれを備える携帯機器」と題する韓国特許出願公開第20070089263号明細書の文献は、高く浮き彫りにしたレタリングまたは音声によって全盲者と通信するGPSベースのシステムを開示している。   Finally, Korean Patent Application Publication No. 20070089263 entitled “Navigation System for the Blind and Mobile Device With It” is a GPS-based system that communicates with the blind by highly embossed lettering or voice. Is disclosed.

欧州特許第1930742号明細書European Patent No. 1930742 韓国特許出願公開第20070089263号明細書Korean Patent Application Publication No. 20070089263

本特許出願は、上述の問題を克服する。本願で使用する音源は、利用者が直接、または自分の能力で音源の位置を特定できるようにする機器を使って聞くことができる。方位特定は、人々が、特に反響や音声反射を受ける屋内または屋外環境において、音源を他の環境音や雑音から区別できるように選択された通常の音源を用いて実現される。   The present patent application overcomes the aforementioned problems. The sound source used in the present application can be listened to using a device that allows the user to specify the position of the sound source directly or with his / her ability. Orientation identification is accomplished using a normal sound source that is selected so that people can distinguish the sound source from other environmental sounds and noises, especially in indoor or outdoor environments that are subject to reverberations and sound reflections.

その一方で、この新規なシステムは音響による方位特定を利用するが、追跡システムとしてGPS信号も使用できる。   On the other hand, the new system utilizes acoustic orientation, but GPS signals can also be used as a tracking system.

全盲者または視覚障害者による重要情報へのアクセスおよび個人的方位特定とナビゲーションを可能にするには、視覚情報に代わりうる1つまたは複数の代替手段を使用する必要がある。   To allow access to critical information and personal orientation and navigation by the blind or visually impaired, it is necessary to use one or more alternatives that can replace visual information.

サービスと、サービスが提供される建物またはその他の施設に関する情報にアクセスする場合の主な問題を完全に解決し、その情報を全盲者または視覚障害者およびそれ以外の人々が使用できるようにするためには、情報およびナビゲーション資源を1つの現実的で単純なシステムに統合する必要がある。この意味において、本願では無線個人通信機器の使用を提案する。本願で開示する説明は、サービスが提供され、情報の使用が必要となる特定の場所をカバーするネットワークを、一般的カバー範囲を有するその他のネットワークと一緒に使用することを提案する。   To fully resolve the main problem of accessing the service and information about the building or other facility where the service is provided and making the information available to the blind or visually impaired and others Requires the integration of information and navigation resources into one realistic and simple system. In this sense, the present application proposes the use of a wireless personal communication device. The description disclosed herein proposes to use a network that covers a specific location where service is provided and where the use of information is needed, along with other networks that have general coverage.

以下の説明は添付の図面に基づいて行い、図面は本願の好ましい実現形態を示しているが、発明の範囲を限定するものではない。   The following description is made with reference to the accompanying drawings, which illustrate preferred implementations of the present application, but are not intended to limit the scope of the invention.

システムアーキテクチャを示す図である。It is a figure which shows a system architecture. 本発明の1つの具体的な応用例を示す図である。It is a figure which shows one specific application example of this invention.

携帯端末とも呼ばれる個人通信機器は、たとえばGlobal System for Mobile Communication(GSM)、個人用通信システム(PCS)またはUniversal Mobile Telecommunication System(UMTS)等、専用基地局のネットワークを通じた音声またはデータの移動通信に使用されるような携帯電話とすることができる。しかしながら、音声による双方向通信が可能であれば他のどのタイプの無線通信機も、システムに必要な調整を加えることにより、本願での利用を検討できる。市販されている従来のタイプの要素が分散されたローカルネットワークを利用することが本発明の重要な特徴である。   Personal communication devices, also called mobile terminals, are used for mobile communication of voice or data through a network of dedicated base stations, such as Global System for Mobile Communication (GSM), Personal Communication System (PCS), or Universal Mobile Telecommunication System (UMTS). It can be a mobile phone as used. However, as long as two-way communication by voice is possible, any other type of wireless communication device can be considered for use in the present application by making necessary adjustments to the system. It is an important feature of the present invention that it utilizes a local network in which commercially available conventional types of elements are distributed.

どのような種類のローカル無線ネットワークでも使用でき、使用される放射は、その場所のすべての地点に問題なく到達でき、適正なカバー範囲と、人間による携帯端末とネットワークインフラとの間の通信を可能にする帯域幅を有する。本発明の一部となる、適切なローカルネットワークにより実現されるまた別の特徴は、携帯端末の位置特定を提供できることであり、これについては後述する。   Can be used with any type of local wireless network, and the radiation used can reach all points of the location without problems, allowing for proper coverage and human communication between the mobile device and the network infrastructure Have the bandwidth to Another feature realized by a suitable local network that is part of the present invention is the ability to provide location of the mobile terminal, as will be described later.

音声通信機能のほかに、通信機は、標準的な電話のキーボードにより、音声通信ツールおよび単純な情報の伝送を作動させ、または無効にすることができる、他のヒューマンインタフェースを備えていてもよい。   In addition to voice communication functions, the communicator may have other human interfaces that can activate or disable voice communication tools and simple information transmission via a standard telephone keyboard. .

本発明の第二の要素は、利用者の方位特定の目的にしたがって、建物または施設の中で組み立てられるラウドスピーカまたは「ブザー」のような音響発生器または音声生成装置のシステムである。音声方位特定は、音の発生源と方向を判断する能力と関連する、本来備わった人間の能力である。音源の位置を特定するために人間の聴力を利用することと、仮想現実環境でのその利用に関する研究が発表されている。ヘッドフォンを用いて、音の発生源とその方向をシミュレートできる。しかしながら、ヘッドフォンの使用は現実の生活環境における全盲者または視覚障害者の可動性を損なうことになり、それは、ヘッドフォンによって自分たちの方位特定にとって不可欠な環境音が聞こえなくなるからである。本発明では、屋内および屋内環境における人間の音声方位特定能力を特徴付けるために、徹底的な試験を行った。その結果、平均の品質が最も優れていたのは、点音源(punctual sound source)の方位特定に関していることがわかった。音源の位置特定は、方位角的にも、高度変化においても分析した。同時に、人間による方位特定で使用すべき音声の種類を選択し、最も有効で好ましい音声はチャープ、短いノイズまたは振動音等、遷移的音声(transitional sound)および広帯域音であるとの結論に至った。実施した研究から、本出願人は本発明の人間による音声方位特定が実現可能であることを確認した。利用者が移動して音源に近づく、方位特定のための点音源の動的使用についても十分に分析し、本願の状況におけるその有益性を確認した。   The second element of the present invention is a system of sound generators or sound generators such as loudspeakers or “buzzers” that are assembled in a building or facility according to the user's orientation specific purpose. Voice orientation identification is a natural human ability associated with the ability to determine the source and direction of sound. Research has been published on the use of human hearing to locate sound sources and their use in virtual reality environments. Headphones can be used to simulate the source and direction of sound. However, the use of headphones impairs the mobility of blind or visually impaired people in the real life environment, because the headphones cannot hear the environmental sounds that are essential for identifying their orientation. In the present invention, a thorough test was conducted to characterize the human voice orientation capability in indoor and indoor environments. As a result, it was found that the best average quality was related to the orientation of the punctual sound source. The localization of the sound source was analyzed both in azimuth and in altitude change. At the same time, we selected the type of sound that should be used for human orientation, and concluded that the most effective and preferred sounds are transitional sounds and broadband sounds, such as chirps, short noises or vibration sounds. . From the research conducted, the present applicant confirmed that the human voice direction specification of the present invention is feasible. We also analyzed the dynamic use of point sound sources to identify the direction in which the user moves and approaches the sound source, and confirmed its usefulness in the situation of this application.

視覚障害のない人々については、可聴音波のほかに、本願で提案されるような、正確な瞬間に要求に応じて空間基準点を提供するというアイディアは、音声以外の他の手段を使って、すなわち音源に代わる可視光の使用によっても実現できる。   For people without visual impairment, in addition to audible sound waves, the idea of providing a spatial reference point on demand at the exact moment, as proposed in this application, uses other means besides speech, That is, it can be realized by using visible light instead of the sound source.

本発明において、順路決定中の方位特定のための音源の使用は、このシステムで完全に制御される。決められた音声は、利用者の要求によって前に確定された順路に従っている際に、システムが正しい案内とナビゲーションのためにそれが適当であると判断したときにのみ、自動的に作動される。その場所の自然環境または建物の特徴と、音響的に信号で指示される目標地点の近さに応じて、ある音源は無指向性であってもよく、また別の音源は有指向性であってもよい。   In the present invention, the use of the sound source for direction determination during route determination is completely controlled by this system. The determined voice is automatically activated only when the system determines that it is appropriate for correct guidance and navigation while following a route previously established by the user's request. Depending on the natural environment of the location or the characteristics of the building and the proximity of the target point acoustically indicated by the signal, one sound source may be omnidirectional and another sound source may be directional. May be.

本発明の第三の要素は、関心対象の場所に実装され、これに関するBluetooth型および/またはWi−Fiおよび/またはその他の携帯電話または無線通信ネットワークのシステムである。これは、上述のローカル無線ネットワークである。これは、市場で入手可能な技術を用いて構築されるネットワークである。このネットワークを通じて、携帯端末はシステムにアクセスし、それが提供する通信チャネルを利用できる。携帯端末の位置は一般に、同じネットワークによって確保される。また、それが好都合であれば、異なる種類の技術に基づく特定のネットワークによっても確保できる。この無線ローカルネットワークのデータアクセスポイント(DAP−data access points)間の接続は、イーサネット(登録商標)その他の有線ネットワークまたは伝送だけのための別の無線ネットワークによって確保される。この伝送用ネットワークは、従来の「スイッチ」によって管理される。無線ネットワークは、連続する「シームレスの」携帯電話受信機能領域を確保するために設計でき、あるいは、受信可能領域が重複しない別々のセルの集合でも構成できる。前者の場合、システムはセルの「切り替え」によって機能する。後者の場合、システムは断続的に動作し、中央システムによって連続した工程となる。   The third element of the present invention is a Bluetooth and / or Wi-Fi and / or other mobile phone or wireless communication network system implemented in and related to the location of interest. This is the local wireless network described above. This is a network built using technologies available on the market. Through this network, the mobile terminal can access the system and use the communication channel it provides. The position of the mobile terminal is generally secured by the same network. It can also be secured by specific networks based on different types of technologies if it is convenient. The connection between data access points (DAP-data access points) of this wireless local network is secured by Ethernet® or other wired network or another wireless network for transmission only. This transmission network is managed by a conventional “switch”. The wireless network can be designed to ensure a continuous “seamless” mobile phone reception functional area, or it can be composed of a set of separate cells with non-overlapping coverage areas. In the former case, the system works by “switching” the cells. In the latter case, the system operates intermittently and is a continuous process by the central system.

本発明は、利用者の携帯端末の位置特定にも基づく。位置特定システムは、本発明の第四の要素である。これは外部のものであり、市場で入手可能である。システムのセキュリティを損なわないようにするためには、携帯端末の位置について十分な精度で情報が供給されるようにするべきである。データアクセスポイントまたはネットワークノードから受信した信号の特徴に関する情報を携帯端末が収集することに基づくシステムがある。他のシステムは、携帯電話端末が発生する信号に関して無線ネットワークが収集する情報に基づく。これらの技術のもとになっているのは、その具体的な場所における放射場のパターンの認識である。この要素により、地理的に判断された情報が確実に供給され、この情報を使って、利用者とその人の携帯端末の実際の順路の状況が判断される。場合により、位置特定を目的とする携帯端末は、通信を目的とする携帯端末と異なることがある。技術革新が進む中で、市場では、より多くの無線インタフェースをより大規模に統合したものを提供する傾向がある。明記すべき点として、携帯端末の代わりに、タグ(TAG)タイプの機器やブレスレットを使用することもできる。   The present invention is also based on the location of the user's mobile terminal. The location system is the fourth element of the present invention. This is external and available on the market. In order not to compromise the security of the system, information about the position of the mobile terminal should be supplied with sufficient accuracy. There are systems based on the collection of information about characteristics of signals received from data access points or network nodes by a mobile terminal. Other systems are based on information collected by the wireless network regarding signals generated by mobile phone terminals. The basis of these techniques is the recognition of the radiation field pattern at that specific location. This element ensures that geographically determined information is supplied, and this information is used to determine the actual route status of the user and his mobile terminal. In some cases, the mobile terminal for the purpose of specifying the position may be different from the mobile terminal for the purpose of communication. As technology advances, the market tends to offer more integrated radio interfaces on a larger scale. It should be noted that a tag (TAG) type device or a bracelet can be used instead of the mobile terminal.

位置特定には、携帯端末の識別が本来的に関係する。したがって、前述の要素によって、Medium Access Control(MAC)アドレス等、システム内の従来の性質のコードや固有の識別パスワードに基づいて、正確に識別することができる。   The identification of the mobile terminal is inherently related to the location specification. Therefore, the above-described elements enable accurate identification based on codes of a conventional nature in the system, such as a medium access control (MAC) address, or a unique identification password.

利用者の自動位置特定はGPS、他のGNPS、WLANによって、またはWMANあるいは別の携帯電話ネットワークの中で実行できる。また、赤外線、超音波またはRFID(Radio Frequency Identification)によっても行うこともできる。   User automatic location can be performed by GPS, other GNPS, WLAN, or in WMAN or another cellular network. It can also be performed by infrared rays, ultrasonic waves, or RFID (Radio Frequency Identification).

本発明の第五の要素は、動作制御および利用者対話管理システムである。このシステムは、ネットワークに接続されたコンピュータの集合に基づく。ネットワークは、イーサネットタイプ、無線または、システムが遅れずに動作できるように短い待ち時間が確保できるのであれば、インターネットであってもよい。システム運用の例としては、動的情報による対話式のヘルプデスク電話サービスや順路決定サービスがある。利用者は、ローカルまたはグローバルネットワークの短い電話番号をダイアルすると、サービスを利用できる。携帯電話端末がネットワークに接続されると、システムは、自動的に起動画面の文言を表示し、利用者にそのシステム自身を紹介し、最初の操作方法を説明する。他の場合では、システムは登録した利用者に対して電話で注意を促し、その利用者に、列車の駅または乗船デッキのスクリーンに今表示されたばかりの新しい情報を音声で知らせることができる。動作は、Interactive Voice Response(IVR)型の市販の対話管理ソフトウェアによって保証される。これとともに、他の2種類のソフトウェアにより、電話サービス/通話管理および無線通信路と情報サービスが確保される。対話管理システムは、利用者の順路決定中に、上述の位置特定装置にも照会し、上述の案内音声システム生産コンポーネントのための命令を送信する。   The fifth element of the present invention is an operation control and user interaction management system. This system is based on a collection of computers connected to a network. The network may be Ethernet type, wireless, or the Internet as long as a short waiting time can be secured so that the system can operate without delay. Examples of system operation include interactive help desk telephone service and route determination service using dynamic information. Users can use the service by dialing a short phone number in the local or global network. When the mobile phone terminal is connected to the network, the system automatically displays the words on the startup screen, introduces the system itself to the user, and explains the first operation method. In other cases, the system can alert the registered user by phone and inform the user of the new information just displayed on the train station or boarding deck screen. Operation is assured by commercially available interactive management software of the Interactive Voice Response (IVR) type. At the same time, the other two types of software ensure telephone service / call management and a wireless communication path and information service. The dialog management system also queries the location device described above during the route determination of the user and sends instructions for the guidance voice system production component described above.

対話管理システムは、利用者が明瞭であるが簡潔な対話によって確実で信頼性の高い使用体験を持つことができ、意思決定工程のキーポイントにおいて、また順路決定/ナビゲーション中に、確認を送信し、他人に聞くことができるように設計される。このシステムは、各利用者のための専用メモリを有し、利用者の要求に応じて、利用者が過去の順路からの情報を再使用でき、また、個々の目的に応じて、異なる種類の対話を利用する、すなわち、利用者の挙動が予想可能な場合は特定のステップを割愛することができるようになっている。何らかの理由によって通話が中断された場合は常に、利用者が選択すれば、次の通話において、システムは中断した地点から対話を再開できる。対話システムは、合成会話変換モジュールのTTS(text−to−speech)を通じて、携帯電話端末の音声通信システムにより機能する。フレーズは簡潔かつ明瞭で、できるだけ多くの人々によって理解されるように慎重に選択される。データ入力と利用者の命令のために、本発明は2つのシステム、すなわち、スピーカが独立した自動音声認識装置(ASR)と、2トーンマルチフリーケンシ打鍵認識システム(DTMF(dual−tone multi−frequency))を並列に使用する。このような並列使用により、利用者は、システムと対話するために自分の音声を使用でき、あるいは、携帯電話のキーから選択してもよく、これは利用者がプライバシーを必要としている場合等、音声認識が難しい、ノイズの大きい状況で非常に有益である。   The dialogue management system allows users to have a clear and concise dialogue and have a reliable and reliable usage experience, sending confirmation at key points in the decision-making process and during route determination / navigation. Designed to be able to listen to others. This system has a dedicated memory for each user, the user can reuse the information from the past route according to the user's request, and different types according to the individual purpose. When a dialog is used, that is, when a user's behavior can be predicted, a specific step can be omitted. Whenever a call is interrupted for any reason, the system can resume the conversation from the point of interruption in the next call if the user chooses. The dialogue system functions by the voice communication system of the mobile phone terminal through the text-to-speech (TTS) of the synthetic conversation conversion module. Phrases are concise and clear and are carefully selected to be understood by as many people as possible. For data entry and user command, the present invention provides two systems: an automatic speech recognizer (ASR) with independent speakers and a two-tone multi-frequency keystroke recognition system (DTMF (dual-tone multi-frequency-frequency). )) In parallel. Such parallel usage allows users to use their voice to interact with the system, or may choose from mobile phone keys, such as when the user needs privacy, etc. This is very useful in noisy situations where speech recognition is difficult.

上記の電話サービスによって、システムが受けた通話の管理が最初から確実に行われ、利用者の携帯端末のアクセス許可が確認され、通話中のデータフローも管理され、その通話が対話管理システムのうち、順番がきたときに複数の通話を同時にとる準備ができているトランクチャネルに確実に転送される。このサービスは、PBX(構内交換機)型のソフトウェアによって完全に実行され、その動作は、動作管理および利用者対話管理システムの一部であるコンピュータネットワークの中でサポートされる。現在、電話システムはVoIP(voice over internet protocol)とSIP(session initiation protocol)という電話プロトコルを採用している。   The above phone service ensures that calls received by the system are managed from the beginning, the access permission of the user's mobile terminal is confirmed, the data flow during the call is managed, and the call is included in the dialogue management system. When the order arrives, it is reliably transferred to the trunk channel ready to take multiple calls at the same time. This service is fully executed by PBX (Private Branch Exchange) type software, and its operation is supported in a computer network that is part of the operation management and user interaction management system. Currently, the telephone system employs a telephone protocol called VoIP (voice over internet protocol) and SIP (session initiation protocol).

電話システムは、少なくとも2つのサブシステムに分けることができる。第一はローカルネットワーク用、第二は公共電話システムまたはグローバルカバレッジ電話システムによるユニバーサルアクセス用である。第一のサブシステムの接続はローカルコンピュータネットワークによって確立されるのに対し、第二のサブシステムの接続は、VoIP/SIPのための従来のデジタル電話アクセスゲートウェイを通じて行われる。システムへの電話が、たとえば地上またはモバイルネットワークにおいてグローバル電話システムを通じてかけられた場合は常に、これらの電話は第二の電話サブシステムによって対応され、主として公共の場の屋外空間における案内のための情報コンテンツとともに対話管理コントロールシステムセクタに送られ、目的地までの利用者の移動計画と実際の移動を可能にすることができる。このようなシステムの機能によって、都市全体が情報提供範囲となる。屋外の公共の経路における方位特定とナビゲーションを実現するために、システムは、携帯電話端末に取り付けられた、またそこに組み込まれたGPS(全地球測位システム)等を使って利用者を追跡し、地理的座標およびその他の関連情報を送信することができる。あるいは、利用者は、都市全体の地理参照システムの中で本人の位置特定が可能となるような地理または街路情報をシステムに供給することができる。たとえば、利用者は自分の目的地に関する情報を、音声またはDTMFによって対話管理システムに供給する。この地点から、システムは歩行者用または混合の(他の交通手段が関わる場合)の順路を生成する。この順路は適切な方法で計算され、利用者に伝えられ、利用者はこれを後に使用するために保存できる。この方位特定とローカルナビゲーションネットワークによりカバーされない空間での利用者ナビゲーションは、携帯電話に取り付けられた電子コンパス等、他のツールで行うことができる。   The telephone system can be divided into at least two subsystems. The first is for the local network, and the second is for universal access by public telephone system or global coverage telephone system. The first subsystem connection is established by the local computer network, while the second subsystem connection is through a conventional digital telephone access gateway for VoIP / SIP. Whenever a call to the system is made through the global telephone system, for example on the ground or in a mobile network, these telephones are served by a second telephone subsystem, mainly for guidance in outdoor spaces in public places Along with the content, it is sent to the dialogue management control system sector to enable the user's movement plan and actual movement to the destination. Due to the function of such a system, the entire city becomes an information provision range. In order to achieve orientation and navigation in outdoor public routes, the system tracks users using GPS (Global Positioning System), etc. attached to and incorporated in mobile phone terminals, Geographic coordinates and other relevant information can be transmitted. Alternatively, the user can provide the system with geography or street information that allows the person to be located within the city-wide georeferencing system. For example, the user supplies information regarding his / her destination to the dialog management system by voice or DTMF. From this point, the system generates a pedestrian or mixed route (if other modes of transportation are involved). This route is calculated in an appropriate manner and communicated to the user, who can save it for later use. This orientation specification and user navigation in a space not covered by the local navigation network can be performed by other tools such as an electronic compass attached to the mobile phone.

追加して記さなければならない点として、インターネットまたはイントラネットを通じた2つの電話サブシステム間の相互接続によって、都市全体の経路計画と関心対象として決められた場所における現地の案内が可能となり、利用者は十分な支援のための案内および方位特定システムを利用できる。その関心対象の場所では、システムは、たとえばGPS等のシステムが相応の安定性で作動できない屋内または内部空間まで、十分に詳細に案内を提供することができる。結論として、本発明は、屋内外の空間に利用できるナビゲーションおよび案内システムである。本発明が現行技術と異なる別の特徴は、一部のGPSナビゲーションシステムで電子コンパスとジャイロスコープによって行われる屋外空間のための外挿的案内方法を屋内環境に使用し、歩行者による順路決定において動作するのに十分なローカルガイダンスシステムとすることができる点である。   An additional point to note is that the interconnection between two telephone subsystems over the Internet or an intranet allows for route planning for the entire city and local guidance at the locations of interest, allowing users to Guidance and direction identification system for sufficient support is available. At the location of interest, the system can provide guidance in sufficient detail to indoor or interior spaces where a system such as a GPS cannot operate with reasonable stability. In conclusion, the present invention is a navigation and guidance system that can be used in indoor and outdoor spaces. Another feature of the present invention that differs from the current technology is that in some GPS navigation systems, an extrapolated guidance method for outdoor spaces performed by an electronic compass and gyroscope is used in an indoor environment to determine the route by a pedestrian. The point is that the local guidance system can be sufficient to operate.

上述の情報サービスは本発明の重要な部分である。これは、関心対象の場所に関する情報のすべてが、その情報サービスと、システムの使用および利用者の情報の履歴と記録に依存するからである。このサービスは、ローカルコンピュータサービスまたはインターネットウェブサービスを通じてアクセス可能な複雑なデータベースの形態で設計され、ローカルまたはインターネットポータルで管理される。   The information service described above is an important part of the present invention. This is because all of the information about the location of interest depends on the information service, the use of the system and the history and record of user information. This service is designed in the form of a complex database accessible through a local computer service or Internet web service, and is managed by a local or Internet portal.

関心対象の場所は、公共交通機関の駅、公共交通機関の乗り物、ショッピングセンター、文化、教育またはレジャー施設、行政機関の建物、病院、軍用基地または裁判所、あるいはその他、屋内または屋外の社会的、経済的または行政的性質の空間である。   Places of interest include public transport stations, public transport vehicles, shopping centers, cultural, educational or leisure facilities, government buildings, hospitals, military bases or courts, or other indoor or outdoor social, A space of economic or administrative nature.

たとえば地下鉄のような交通システムのための情報サービスの場合、システムは利用者に対して、地下鉄の駅の情報、これらの駅は地下にあるか、地上にあるか、その内部の機能または関心対象の場所、たとえば切符売り場、改札、カフェテリア、化粧室、出口および地下鉄路線図等を提供する。地下鉄路線図については、地下鉄の路線、列車の駅、運行スケジュール、所要時間、運賃、切符の種類、乗車情報等の情報を表示することが必要である。   In the case of an information service for a transportation system, for example a subway, the system informs the user about subway station information, whether these stations are underground, on the ground, their internal functions or interests. Locations such as ticket offices, ticket gates, cafeterias, restrooms, exits and subway maps. For subway maps, it is necessary to display information such as subway lines, train stations, operation schedules, required times, fares, ticket types, and boarding information.

関心対象地点の地図作製に必要な情報に関して、情報システムは、利用者の案内またはナビゲーション計画に必要な情報をリアルタイムで提供する。   With regard to information necessary for creating a map of a point of interest, the information system provides information necessary for user guidance or navigation planning in real time.

上述のインターネットポータルにより、現地で、または離れた場所から、システム動作における重要な変化の数値を示しながら、管理用ウェブページを通じてシステム全体を管理することができ、動作上必要な場合に、動作パラメータと介入を適用できる。ポータルにより、システムのデータベース記録にアクセスし、これを手作業または自動的にアップデートすることも可能となる。   The above-mentioned Internet portal allows you to manage the entire system through a management web page, showing numerical values of significant changes in system operation locally or from a remote location. And interventions can be applied. The portal also allows you to access the system's database records and update them manually or automatically.

図1は、本発明によるシステムのアーキテクチャを示す。基本的に、これはGSM方式の従来の携帯電話を使って、地下鉄の駅等の特定の公共の場所の外または中から情報にアクセスする様子を示している。Bluetooth(BLT)、Wi−Fi等を備えた、そのために特に設計されたソフトウェアにより改良された携帯電話でのアクセスを通じて、利用者はたとえば、地下鉄駅の現地情報やどのようにして中に入るかを知ることができ、地下鉄駅の中を徒歩で進む場合の方位特定とナビゲーションのための、携帯電話を援用した音声による支援を利用することができる。利用者はまた、ボイスポータルとの接続によって、運行情報にもアクセスできる。   FIG. 1 shows the architecture of a system according to the invention. Basically, this shows how a conventional GSM mobile phone can be used to access information from outside or inside a specific public location such as a subway station. Through access to mobile phones equipped with Bluetooth (BLT), Wi-Fi, etc., specially designed for this purpose, users can, for example, get local information on subway stations and how to get inside It is possible to use the voice assistance with the help of a mobile phone for specifying the direction and navigation when walking in a subway station. Users can also access operation information by connecting to a voice portal.

列車の駅の中で方位を特定し、ナビゲーションを助けるために、2つの相補的で複合されたシステム、すなわち、妨害しない、個別の音声システムと、利用者の関心対象の場所に実装され、そこに関連付けられたBluetooth携帯電話システムが作られる。   Two complementary and complex systems, namely, non-disturbing, separate voice systems and locations of interest to the user, to identify the direction within the train station and aid navigation, A Bluetooth mobile phone system associated with the is created.

音響システムは音声「信号」または「ブイ」に基づき、これは符号化され、アクセス位置または地下鉄駅のいくつかの領域に慎重に位置づけられ、音声の位置と空間を通じて、利用者が到達したい地点または目的地へと利用者をナビゲートするのを支援し、方位を定める。   The sound system is based on voice “signals” or “buoys”, which are encoded and carefully positioned in the access location or some area of the subway station, through the location and space of the voice, or where the user wants to reach or Assist users in navigating to their destination and determine their heading.

この情報は、携帯端末(BLTまたはWi−Fiを備える携帯電話)によって提供される音声情報を含み、これによって利用者は、自分が使用できる2つの情報ツールを組み合わせて、駅の中で自分の方位を特定し、ナビゲートできる。電話通信は、VoIP/SIPプロトコルで行うことができる。   This information includes voice information provided by the mobile terminal (cell phone with BLT or Wi-Fi), which allows the user to combine his two information tools that he can use in his station in the station. Identify and navigate directions. Telephone communication can be performed using the VoIP / SIP protocol.

Bluetooth携帯電話は、Interactive Voice Reponse System(IVR)にアクセスできる、駅構内の特別なサーバとWi−Fiまたはイーサネットを通じて接続されたBluetooth Data Access Protocol(DAP)により構成される。このシステムの対話的コンテンツは、駅の中の、利用者がいる特定の部分に合わせて文脈化される。   The Bluetooth mobile phone is configured by a Bluetooth Data Access Protocol (DAP) connected to a special server in the station premises through Wi-Fi or Ethernet, which can access the Interactive Voice Response System (IVR). The interactive content of this system is contextualized to the specific part of the station where the user is.

情報は、利用者がアクセスポイントに近づくとすぐに(距離は、場所に応じて10から100m)、利用者の携帯端末(BLTまたはWi−Fi携帯電話)で一時的に形成される「ピコネット」を通じて、アクセスポイント制御デバイスによって送信できる。情報を取得するために、利用者には個別に情報の入手可能性を知らせ(振動または呼び出しによる)、利用者は希望に応じて、単純に端末のキーボードを押すことによって対話システムとの接続を有効にできる。   Information is “piconet” that is temporarily formed on the user's mobile terminal (BLT or Wi-Fi mobile phone) as soon as the user approaches the access point (distance is 10 to 100 m depending on location) Through the access point control device. To obtain the information, the user is individually informed of the availability of the information (by vibration or call), and the user can connect to the interactive system by simply pressing the keyboard of the terminal as desired. Can be enabled.

BLTまたはWi−Fiデータ等のアクセスポイントは、地下鉄駅構内において、全盲者または視覚障害のある利用者が駅構内で行く必要のある場所を選び、必要なサービスを利用するために、既存の視覚情報に代わる形態の情報にアクセスする必要があると判断される場所(たとえば切符売り場等)に設置される。無線通信機は、Bluetooth、 IEEE 802.11、Wi−FiまたはHiperLAN、DECT、CDMAまたはOFDMA e SOFDMA、IEEE 802.16、WiMAXタイプとすることができる。   Access points such as BLT or Wi-Fi data can be used by existing blind people or visually impaired users to choose where they need to go within the station and to use the necessary services. It is installed in a place where it is determined that it is necessary to access information in a form instead of information (for example, ticket office). The wireless communicator may be of the Bluetooth, IEEE 802.11, Wi-Fi or HiperLAN, DECT, CDMA or OFDMA e SOOFDA, IEEE 802.16, WiMAX type.

明らかに、全盲の利用者は上記以外の物理的なアクセス支援ツールを自由に利用することができ、たとえば、床に設けられた点字ブロック、点字信号および一般的な音声情報がある。   Obviously, blind users are free to use other physical access support tools, such as braille blocks, braille signals and general audio information provided on the floor.

同時に、駅の外で情報サービスが確実に行えるようなシステムを開発でき、あるいは、BLTを採用するその他の場所においては、2つのシステム間の調整を確実に行うことができる。   At the same time, a system that can reliably provide information services outside the station can be developed, or in other locations that employ BLT, the coordination between the two systems can be reliably performed.

前述のシステムはまた、利用者の位置特定が音声通信または端末キーボードまたは、方位特定を支援するために、公共の場所のある領域におけるアクセスポイントに適正に配置された識別要素に関する視覚情報に基づく他のインタフェースデバイスを通じて行われる場合に、視覚障害を持たない人々にも応用できる。   The above-mentioned system can also be based on visual information about identification elements properly located at access points in public areas to help users locate voice communications or terminal keyboards or orientations. It can be applied to people who do not have visual impairments when it is performed through the interface device.

以下に、図2を参照しながら本発明の具体的な応用例を説明する。関心対象の空間(20)の中に、関心対象の場所(5)、この場合は利用者(1)が行こうとしているエレベータのドアがあることがわかる。関心対象の空間(20)には、スイッチ(7)を通じて構成され、1つまたは複数のデータアクセスポイント(4)をまとめる無線ネットワーク(6)がある。この無線ネットワークは、利用者(1)の端末(2)と、ローカルネットワーク(8)の上に構築された1つまたは複数のコンピュータ(9)に実装されたシステムとの間の、PBX(10)によって制御される音声通信またはDTMFを行うのに使用できる。あるいは、音声通信は、民間または公共の別の無線チャネルによっても実行できる。このシステムにより、無線ネットワークを通じて、最終的には追跡モジュール(12)との組み合わせにより、IVR(Interactive Voice Response)モジュール(11)によって連続的に、利用者(1)の端末位置特定(2)が行われる。   A specific application example of the present invention will be described below with reference to FIG. It can be seen that in the space of interest (20) is the location of interest (5), in this case the elevator door that the user (1) is going to go. In the space of interest (20) is a wireless network (6) that is configured through a switch (7) and brings together one or more data access points (4). This wireless network is a PBX (10) between a user (1) terminal (2) and a system implemented on one or more computers (9) built on a local network (8). ) To control voice communication or DTMF. Alternatively, voice communication can be performed over another private or public wireless channel. With this system, the terminal location (2) of the user (1) can be continuously obtained through an IVR (Interactive Voice Response) module (11) through a wireless network and finally in combination with the tracking module (12). Done.

このシステムの動作はIVRモジュール(11)によって制御され、これは利用者(1)との自動対話処理を実行し、その中で、モジュールは利用者に対し、関心対象の場所(20)における情報入手可能性のオプションおよび/または個人的ナビゲーションの支援を提供する。利用者が情報を自由に使用できるようにするために、システムは、ローカルサービスモジュールを有するか、インターネット(19)に接続される場合は分散され、この分散はルータ(18)によって支援される。利用者(1)は、本発明によりサポートされる関心対象の空間(20)における自分の個人的ナビゲーション過程で、端末(2)を通じて行われる音声通信のほかに、各瞬間に、IVRの制御(11)の下で、関心対象の場所(5)の正確な位置特定を利用者(1)に示して、そこに向かう利用者のナビゲーション行うために、関心対象の空間(20)の中に十分に調査したうえで設置されたスピーカ(3)等の発生源から音響信号を受け取る。ラウドスピーカ(3)の音声生成は、音声識別および位置特定における人間の聴覚能力に応じて選択された、十分に調査したうえでの音声で行われ、IVRモジュール(11)の完全な制御の下で音声モジュール(5)を通じて行われ、音声モジュールはそれが発生する音声の電気信号を、音源(17)のネットワークに取り付けられた増幅システム(16)へと供給し、すべての音響空間において、その時に1つまたは複数の音源を作動させることができる。   The operation of this system is controlled by the IVR module (11), which performs an automatic interaction with the user (1), in which the module informs the user at the location of interest (20). Provide accessibility options and / or personal navigation assistance. In order to make the information freely available to the user, the system is distributed if it has a local service module or is connected to the Internet (19), and this distribution is supported by the router (18). In addition to voice communication performed through the terminal (2) in the personal navigation process in the space (20) of interest supported by the present invention, the user (1) controls the IVR at each moment ( 11) under the space of interest (20) enough to show the user (1) the exact location of the place of interest (5) and to navigate the user towards it The sound signal is received from the source such as the speaker (3) installed after investigation. The sound generation of the loudspeaker (3) is performed on a well-studied sound selected according to the human hearing ability in voice identification and localization and under the full control of the IVR module (11). The sound module supplies the electrical signal of the sound it generates to the amplification system (16) attached to the network of sound sources (17), and in all acoustic spaces at that time One or more sound sources can be activated.

Claims (18)

全盲者または視覚障害者(1)のための方位特定、ナビゲーションおよび情報システムであって、
従来の携帯電話からなる携帯ユニット(2)または、ローカルまたはグローバル通信手段を備える別の無線通信機を使って、通常は民間または公共の施設または場所(20)の外または中から視覚的に利用者(1)に提供される情報にアクセスすることを可能にし、前記利用者(1)に対して、コンピュータシステム(9)が自動的に音声でサービスを提供して、関心対象の場所(5)におけるナビゲーションに必要な情報を提供し、計画された順路に沿って、コンピュータ制御(9,15)による、妨害しない個別の音響システム(3,17)により発生される音響信号によって連続的に案内することを可能にし、その際、ローカル携帯電話通信システムまたは、Bluetoothおよび/またはWi−Fi方式その他の無線通信ネットワーク(8)による通信および最終的な位置特定が援用され、前記携帯電話は、前記利用者(1)にとっての有益なナビゲーションという点で、前記関心対象の場所(5)において実装され、これに関連付けられていることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation, navigation and information system for the blind or visually impaired (1),
Visually available from outside or inside a private or public facility or place (20), usually using a portable unit (2) consisting of a conventional cellular phone or another wireless communication device with local or global communication means Information provided to the user (1), and the computer system (9) automatically provides voice service to the user (1) to provide the location of interest (5 ) Provides the necessary information for navigation and is continuously guided along the planned route by acoustic signals generated by individual non-interfering sound systems (3, 17) under computer control (9, 15) A local mobile phone communication system or a Bluetooth and / or Wi-Fi system or other wireless communication network Communication and final location is used, and the mobile phone is implemented at the location of interest (5) in terms of useful navigation for the user (1). Orientation, navigation and information system characterized by being associated with
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記音響システムは音響信号または光線(3)に基づいており、音響信号または光線は符号化され、公共施設(20)の中のある領域へのアクセス部分に適正に位置づけられ、これらが音声による位置特定および空間参照(spatial referencing)を通じて、前記利用者(1)が関心を持つ前記公共施設(20)の基準位置または場所(5)への前記利用者(1)のナビゲーションを支援し、案内できるようになっていることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
The acoustic system is based on acoustic signals or rays (3), which are encoded and properly located in the access part to a certain area in the public facility (20), which are located by sound. Support and guide the navigation of the user (1) to the reference position or location (5) of the public facility (20) of interest to the user (1) through specific and spatial referencing Orientation identification, navigation and information system characterized by
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記参照情報には、前記コンピュータシステム(9)によって前記携帯ユニット(2)を通じて、対話に応じて自動的に送信される音声情報が追加され、前記音声情報により、前記利用者(1)は前記2つの形態の情報を組み合わせることによって、前記公共施設(20)内で方位特定とナビゲーションを行うことができ、前記音声参照情報の提供範囲内に複数の利用者がいる場合、前記コンピュータシステム(9)は自動的に待ち行列システムを構築して、前記複数の利用者との通信を独立して管理することを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
Audio information that is automatically transmitted in response to a dialogue through the portable unit (2) by the computer system (9) is added to the reference information. By the audio information, the user (1) By combining the two forms of information, it is possible to specify the direction and navigation within the public facility (20), and when there are a plurality of users within the provision range of the voice reference information, the computer system (9 ) Automatically establishes a queuing system, and independently manages communication with the plurality of users.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記電話通信は、VoIP/SIPプロトコルその他を使って行われ、実現された接続によって、PSTNまたは無線LAN等の異なる通信チャネル間での相互運用が可能となり、前記コンピュータシステム(9)は音声とデータの同時通信を可能にすることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
The telephone communication is performed using a VoIP / SIP protocol or the like, and the realized connection enables interoperability between different communication channels such as PSTN or wireless LAN, and the computer system (9) is capable of voice and data. Orientation, navigation and information system characterized by enabling simultaneous communication of
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記Bluetooth方式の携帯電話はBluetoothまたはWi−Fiデータアクセスシステムによって形成され、これは従来、Wi−Fi/WLANまたはイーサネット/LANによって、前記公共施設または遠隔地にその目的のために設置され、その順番になった時に、自動応答モジュールであるIVR(Interactive Voice Responder)(11)との相互対話システムを受け継ぐ少なくとも1つのサーバコンピュータ(9)に接続されることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
The Bluetooth mobile phone is formed by Bluetooth or Wi-Fi data access system, which is conventionally installed for the purpose in the public facility or remote place by Wi-Fi / WLAN or Ethernet / LAN. Orientation specification, navigation, and information characterized by being connected to at least one server computer (9) that inherits an interactive system with an interactive response responder (IVR) (11) that is an automatic response module system.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記モジュールユニット(2)を通じた口頭通信のための、自動制御の音声発生装置(17,3)およびその他の装置と、携帯ユニット(2)と音声情報システム(11)の空間位置が特定され、その目的のために少なくとも1つのネットワークサーバコンピュータ(9)を使用する携帯電話ネットワークまたはWLAN、無線ラジオ通信ネットワーク(6)および、それぞれ前記音声発生装置ネットワーク(3,17)への増幅器と電源(16)をさらに備えることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
For the oral communication through the module unit (2), the spatial positions of the automatic control sound generators (17, 3) and other devices, the portable unit (2) and the sound information system (11) are specified, A cellular phone network or WLAN using at least one network server computer (9) for that purpose, a wireless radio communication network (6) and an amplifier and a power supply (16) to said sound generator network (3, 17) respectively. ), Navigation and information system.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、 前記サーバコンピュータ(9)には、自動通話応答および前記利用者(1)に供給されるべき情報を検索するためのソフトウェアが搭載され、これは記録された、または合成された音声システムを使って前記利用者にメッセージを送信し、前記利用者は前記携帯ユニットのキーボード(2)によって、DTMFを通じて、またはスイッチまたはスキャンシステムあるいは自動音声認識システムにより、また対話システムと前記IVR(11)へのその統合によってこのシステムと対話できることを特徴とする方位特定、ナビゲーションおよび情報システム。   In the azimuth identification, navigation, and information system described in the preceding paragraph, the server computer (9) is equipped with software for searching for an automatic call response and information to be supplied to the user (1), This uses a recorded or synthesized voice system to send a message to the user, who can use the keyboard (2) of the portable unit, through DTMF, or a switch or scanning system or automatic voice recognition. Orientation, navigation and information system characterized by being able to interact with the system by means of the system and its integration into the IVR (11). 前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記サーバコンピュータ(9)には、関連する位置にある正規の前記利用者(1)の前記携帯ユニットを自動認識し、前記利用者の通話によってサービスが開始されるようにするソフトウェアが搭載されていることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
The server computer (9) is equipped with software for automatically recognizing the portable unit of the legitimate user (1) at the relevant position and starting the service by the user's call. Orientation, navigation and information system characterized by
請求項1に記載の方位特定、ナビゲーションおよび情報システムであって、
前記無線通信機(2)は、Bluetooth、IEEE 802.11、Wi−FiまたはHiperLAN、DECT、CDMAまたはOFDMA、SOFDMA、IEEE 802.16、WiMAX等のうちの1つに基づくことを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation specification, navigation and information system according to claim 1,
The wireless communication device (2) is based on one of Bluetooth, IEEE 802.11, Wi-Fi or HiperLAN, DECT, CDMA or OFDMA, SOFDMA, IEEE 802.16, WiMAX, etc. Identification, navigation and information system.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記利用者自動追跡機能はGPSまたは他のGNPSによって実行され、あるいはWLANまたはWMANあるいはその他の携帯電話ネットワークの中で実行されることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
An orientation, navigation and information system wherein the user auto-tracking function is performed by GPS or other GNPS, or in a WLAN or WMAN or other cellular network.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記利用者(1)の自動追跡は、赤外線または超音波信号を使って実行されることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
Orientation identification, navigation and information system characterized in that the automatic tracking of the user (1) is performed using infrared or ultrasonic signals.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記利用者(1)の自動追跡は、RFID(Radio Frequency Identification)によって実行されることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
The direction tracking, navigation and information system characterized in that the automatic tracking of the user (1) is performed by RFID (Radio Frequency Identification).
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
これは視覚障害のある、またはない人に適用することができ、前記利用者位置特定は、口頭通信か、前記利用者のキーボードまたは、公共施設のある領域への目に見えるアクセス部分に適正に配置され、ナビゲーションのための支援となる識別要素に関する視覚的情報に基づくその他のインタフェース機器によって実行されることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
This can be applied to people with or without visual impairments, and the user location is appropriate for verbal communication or the user's keyboard or visible access to certain areas of public facilities. Orientation, navigation and information system characterized in that it is arranged and executed by other interface devices based on visual information about the identification elements that aid in navigation.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記公共の場所は公共交通機関の駅であり、そこでは一般的に、ある地点から別の希望する地点に到達するために通るべき複数の経路または順路があり、そのために1つまたは複数の関心対象の場所(5)を通過しなければならず、前記携帯ユニットを通じて提供される音声の指示に従って一般的にノイズの大きい環境で十分な強度を有する音響信号を受信し、このようにして、ノイズの大きい環境におけるその明確な識別が可能になることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
The public place is a public transportation station, where there are generally multiple routes or routes that must be taken to reach another desired point from one point, and therefore one or more interests. An acoustic signal that must pass through the location of interest (5) and that is generally strong in a noisy environment according to the audio instructions provided through the portable unit is thus received Orientation, navigation and information system characterized by its clear identification in large environments.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記公共の場所は公共交通手段であり、その中では、前記音響信号が、前記携帯ユニットを通じて与えられた音声命令にしたがって、前記ノイズの大きい環境におけるその明確な識別と位置特定を行うことができるようにするのに十分な強度で、特別な音響プロファイルを有するように調整されていることを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
The public place is a public transport, in which the acoustic signal can be clearly identified and located in the noisy environment according to voice commands given through the portable unit. Orientation, navigation and information system characterized in that it is strong enough to be adjusted and adjusted to have a special acoustic profile.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
前記公共の場所は商業、文化、教育、レクリエーション、行政、医療、軍事、宗教または司法関係の屋内の複雑な空間であり、その中では、所望の目的地に到達するには、複数の関心対象の場所(5)を通過し、ノイズの大きな環境において明確な識別と位置特定が可能で、前記利用者(1)がナビゲーションにおいて使用する位置特定情報も提供するような、十分な強度、音声プロファイルおよび音声または符号化情報の音響信号を受け取る複雑な順路を通らなければならないことを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
The public place is a complex indoor space of commercial, cultural, educational, recreational, administrative, medical, military, religious or judicial relations, in which multiple objects of interest can be reached to reach a desired destination Sufficient strength and sound profile that can be clearly identified and located in a noisy environment and that also provides location information used by the user (1) for navigation And an azimuth, navigation and information system characterized by having to go through a complex route that receives audio signals of speech or encoded information.
前項、特に請求項20に記載の方位特定、ナビゲーションおよび情報システムであって、
前記公共または民間の場所は、内側か外側の位置かを問わず、社会、経済、政治または行政関係のすべての空間を含み、その中で、音響信号は、請求項1によるローカル携帯電話通信システムを通じて、あるいは請求項14に記載のそれと同様のシステムを通じて伝送される非音響信号により補完されてもよいことを特徴とする方位特定、ナビゲーションおよび情報システム。
A heading, navigation and information system according to the preceding clause, in particular claim 20, comprising:
The public or private location includes all social, economic, political or administrative space, whether inside or outside, in which the acoustic signal is a local mobile phone communication system according to claim 1 15. An orientation, navigation and information system characterized in that it may be supplemented by non-acoustic signals transmitted through or through a system similar to that of claim 14.
前項に記載の方位特定、ナビゲーションおよび情報システムであって、
従来の携帯ユニットのかわりに、タグまたはブレスレット等の特定の機器を利用してもよく、あるいは小型のイヤホン型ヘッドフォンで補完してもよいことを特徴とする方位特定、ナビゲーションおよび情報システム。
An orientation identification, navigation and information system as described in the previous section,
An orientation specifying, navigation and information system characterized in that a specific device such as a tag or a bracelet may be used instead of a conventional portable unit, or it may be supplemented by a small earphone type headphone.
JP2011516198A 2008-06-30 2009-06-29 Improved orientation, navigation and information system, especially for the blind or visually impaired Pending JP2011527005A (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
PT104120 2008-06-30
PT104120A PT104120B (en) 2008-06-30 2008-06-30 GUIDANCE, NAVIGATION AND INFORMATION SYSTEM SPECIFICALLY ADAPTED TO BLIND OR AMBITIOUS PEOPLE
PCT/PT2009/000036 WO2010002284A2 (en) 2008-06-30 2009-06-29 Guidance, navigation and information system especially adapted for blind or partially sighted people

Publications (1)

Publication Number Publication Date
JP2011527005A true JP2011527005A (en) 2011-10-20

Family

ID=41268150

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011516198A Pending JP2011527005A (en) 2008-06-30 2009-06-29 Improved orientation, navigation and information system, especially for the blind or visually impaired

Country Status (9)

Country Link
US (1) US20110172907A1 (en)
EP (1) EP2313879A2 (en)
JP (1) JP2011527005A (en)
CN (1) CN102150190B (en)
BR (1) BRPI0913978A2 (en)
CA (1) CA2729424A1 (en)
PT (1) PT104120B (en)
RU (1) RU2490694C2 (en)
WO (1) WO2010002284A2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218912A (en) * 2012-11-13 2013-07-24 深圳市盛世任我行科技有限公司 Multifunctional integrated information terminal equipment

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL188156A0 (en) * 2007-12-16 2008-11-03 Maly Edelman A method and system for protecting an area
EP2539883A1 (en) 2010-02-24 2013-01-02 Ipplex Holdings Corporation Augmented reality panorama supporting visually impaired individuals
FR2961047B1 (en) * 2010-06-04 2017-07-28 Phitech INFORMATION COMMUNICATION SYSTEM FOR THE USE OF PERSONS WITH DISABILITIES.
FR2976704A1 (en) * 2011-06-17 2012-12-21 E O E D P S System for guiding and signaling visually impaired person during e.g. fire in building, has automatic activation unit automatically activating continuous guiding path toward determined location from fixed beacons
US8788222B2 (en) 2011-07-25 2014-07-22 International Business Machines Corporation Detection of pipeline contaminants
US9322657B2 (en) * 2011-10-04 2016-04-26 International Business Machines Corporation Mobility route optimization
US9207089B2 (en) 2011-10-04 2015-12-08 International Business Machines Corporation Mobility route optimization
US9146112B2 (en) * 2011-10-04 2015-09-29 International Business Machines Corporation Mobility route optimization
FR2989811A1 (en) * 2012-04-24 2013-10-25 Canecaude Emmanuel De Radio frequency identification beacon for use with label on white cane used by blind/partially sighted person for safe crossing of street, has digital processor coupled with receiver and sound messages storage unit to control transmitter
RU2503436C1 (en) * 2012-04-27 2014-01-10 Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования "Московский государственный университет путей сообщения" (МИИТ) Method for space orientation, navigation and information in individuals suffering visual dysfunctions and system for implementation thereof
CN102670384B (en) * 2012-06-08 2014-11-05 北京美尔斯通科技发展股份有限公司 Wireless voice blind guide system
WO2014070041A1 (en) * 2012-10-29 2014-05-08 Aronov Maksim Leonidovich Method for informing and orienting sight-impaired persons and system for carrying out said method
US9770382B1 (en) * 2013-05-07 2017-09-26 Christ G. Ellis Guided movement
US9492343B1 (en) * 2013-05-07 2016-11-15 Christ G. Ellis Guided movement
US9942685B2 (en) 2013-06-28 2018-04-10 Microsoft Technology Licensing, Llc Navigation with three dimensional audio effects
CN103759734A (en) * 2014-01-24 2014-04-30 成都万先自动化科技有限责任公司 Service robot assisting crossing of street
RU2573534C2 (en) * 2014-03-18 2016-01-20 Дмитрий Георгиевич Заикин Method of informing disabled persons on public transport vehicles approaching station, improving safety for disabled persons when boarding vehicles and system therefor
RU2582045C2 (en) * 2014-03-18 2016-04-20 Дмитрий Георгиевич Заикин Method of informing disabled persons on availability of nearest stationary objects and determining required direction of movement to said objects and system therefor
US9355547B2 (en) 2014-05-22 2016-05-31 International Business Machines Corporation Identifying a change in a home environment
US9612722B2 (en) * 2014-10-31 2017-04-04 Microsoft Technology Licensing, Llc Facilitating interaction between users and their environments using sounds
US9429446B1 (en) * 2015-03-16 2016-08-30 Conley Searle Navigation device for the visually-impaired
US9953547B2 (en) * 2015-03-18 2018-04-24 Aditi B. Harish Wearable device to guide a human being with at least a partial visual impairment condition around an obstacle during locomotion thereof
ES2597155B1 (en) * 2015-06-12 2017-09-18 Eyesynth, S.L. PORTABLE SOUND OR TOUCH INTERPRETATION SYSTEM OF THE ENVIRONMENT FOR AN INVIDENT
US9659503B2 (en) 2015-07-14 2017-05-23 International Business Machines Corporation Ambulatory route management based on a personal drone
US10113877B1 (en) * 2015-09-11 2018-10-30 Philip Raymond Schaefer System and method for providing directional information
EP3156765A1 (en) 2015-10-16 2017-04-19 Inventio AG Direction of persons using acoustic signals
US10605614B2 (en) * 2016-10-17 2020-03-31 International Business Machines Corporation Generation of route network data for movement
RU175011U1 (en) * 2017-03-03 2017-11-15 Владимир Владиславович Евдокимов DEVICE FOR HELP FOR VISUAL PERSONS
RU2681346C2 (en) * 2017-03-10 2019-03-06 Общество с ограниченной ответственностью "ПРОзрение" Method and system of accurate localization of visually impaired or blind person
RU2651162C1 (en) * 2017-04-24 2018-04-18 Федеральное государственное бюджетное образовательное учреждение высшего образования "Российский государственный университет физической культуры, спорта, молодежи и туризма (ГЦОЛИФК)" (РГУФКСМиТ) Method of navigation of people with impaired vision in the buildings and structures
EP3395740B1 (en) 2017-04-28 2020-11-04 Otis Elevator Company Audio orientation systems for elevator cars
RU177623U1 (en) * 2017-05-05 2018-03-02 Открытое акционерное общество "ИСТОК-АУДИО ИНТЕРНЭШНЛ" (ОАО "ИАИ") TACTICAL AND SOUND MIMIC
US20180356233A1 (en) * 2017-06-13 2018-12-13 Boutros Baqain Intelligent navigation assistance device
WO2019023037A1 (en) * 2017-07-27 2019-01-31 Blind InSites, LLC Devices, systems, and methods for navigation and usage guidance in a navigable space using wireless communication
PL426438A1 (en) * 2018-07-25 2019-02-25 Piotr Kryszk Application of the wireless personal area network WPAN for transmission of information to blind or visually impaired persons
US10583067B2 (en) 2018-08-08 2020-03-10 International Business Machines Corporation Source-of-sound based navigation for a visually-impaired user
RU2679866C1 (en) * 2018-08-27 2019-02-13 ОБЩЕСТВО С ОГРАНИЧЕННОЙ ОТВЕТСТВЕННОСТЬЮ "Некс-Т" Visual-sound system for the blind and partially sighted people
ES2790024A1 (en) * 2019-04-26 2020-10-26 Imesapi S A Acoustic warning system for traffic lights for the blind or people with reduced mobility (Machine-translation by Google Translate, not legally binding)
US11195404B2 (en) * 2019-05-28 2021-12-07 International Business Machines Corporation Interpreting reactions of other people for physically impaired during an emergency situation
CN110101555A (en) * 2019-06-04 2019-08-09 济南浪潮高新科技投资发展有限公司 A kind of subway blind way navigation methods and systems based on indoor positioning
FR3112885B1 (en) * 2020-07-21 2022-09-09 N Vibe Information system for a visually impaired user and associated method
CN112276967B (en) * 2020-10-22 2024-01-09 苏州穿山甲机器人股份有限公司 Method for searching mobile vending robot by calling service robot
CN112198810B (en) * 2020-11-06 2023-05-16 青岛海尔空调器有限总公司 Method and device for navigation control of intelligent household equipment and intelligent household equipment
EP4036524A1 (en) * 2021-01-29 2022-08-03 SC Dotlumen SRL A computer-implemented method, wearable device, computer program and computer readable medium for assisting the movement of a visually impaired user

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0338997A2 (en) * 1988-04-20 1989-10-25 Loredana Reppucci Ales Computer controlled information broadcasting system for aiding blind persons in town walking
JP3679388B2 (en) * 2002-08-19 2005-08-03 卓史 宮脇 Blind person guidance system
JP2005250917A (en) * 2004-03-05 2005-09-15 Ikeno Tsuken Kk Voice recognition type voice guidance device
JP3887650B2 (en) * 2003-03-19 2007-02-28 国土交通省国土技術政策総合研究所長 System and method for providing facility information to pedestrians
JP2007141116A (en) * 2005-11-22 2007-06-07 Toto Ltd System and method for guiding visually handicapped person
JP2007257463A (en) * 2006-03-24 2007-10-04 Nec Commun Syst Ltd Directional voice guide system and directional voice guide method
JP2008139181A (en) * 2006-12-04 2008-06-19 Matsushita Electric Ind Co Ltd Mobile terminal and its program

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2085162C1 (en) * 1993-03-01 1997-07-27 Вячеслав Алексеевич Сапрыкин Method of acoustic delivery of spatial information for sight invalids
DE19714156C1 (en) * 1997-04-05 1998-04-02 Rtb Rehabilitations Technik Br Information system for blind person, bus stop data service
JPH1124619A (en) * 1997-06-27 1999-01-29 Shinichi Numazaki Voice guide system of transmission type of radio wave and infrared ray or the like
GB2393599A (en) * 2002-09-25 2004-03-31 Saleh Ali Hussain Wireless navigation aid for blind people
US20060129308A1 (en) * 2004-12-10 2006-06-15 Lawrence Kates Management and navigation system for the blind
DE102005009110A1 (en) * 2005-01-13 2006-07-27 Siemens Ag Device for communicating environmental information to a visually impaired person
RU2299053C2 (en) * 2005-08-04 2007-05-20 Сергей Евгеньевич Варламов Device for spatial orientation of people with visual impairments
US20080120029A1 (en) * 2006-02-16 2008-05-22 Zelek John S Wearable tactile navigation system
ITMI20062325A1 (en) * 2006-12-04 2008-06-05 Mario Quintilio MULTIFUNCTIONAL EQUIPMENT FOR VISUAL HANDICAPERS
US20090122648A1 (en) * 2007-11-12 2009-05-14 Trustees Of Boston University Acoustic mobility aid for the visually impaired

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0338997A2 (en) * 1988-04-20 1989-10-25 Loredana Reppucci Ales Computer controlled information broadcasting system for aiding blind persons in town walking
JP3679388B2 (en) * 2002-08-19 2005-08-03 卓史 宮脇 Blind person guidance system
JP3887650B2 (en) * 2003-03-19 2007-02-28 国土交通省国土技術政策総合研究所長 System and method for providing facility information to pedestrians
JP2005250917A (en) * 2004-03-05 2005-09-15 Ikeno Tsuken Kk Voice recognition type voice guidance device
JP2007141116A (en) * 2005-11-22 2007-06-07 Toto Ltd System and method for guiding visually handicapped person
JP2007257463A (en) * 2006-03-24 2007-10-04 Nec Commun Syst Ltd Directional voice guide system and directional voice guide method
JP2008139181A (en) * 2006-12-04 2008-06-19 Matsushita Electric Ind Co Ltd Mobile terminal and its program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103218912A (en) * 2012-11-13 2013-07-24 深圳市盛世任我行科技有限公司 Multifunctional integrated information terminal equipment

Also Published As

Publication number Publication date
WO2010002284A2 (en) 2010-01-07
WO2010002284A4 (en) 2010-07-15
PT104120A (en) 2009-12-30
RU2011103203A (en) 2012-08-10
CA2729424A1 (en) 2010-01-07
WO2010002284A3 (en) 2010-04-22
US20110172907A1 (en) 2011-07-14
CN102150190A (en) 2011-08-10
PT104120B (en) 2010-11-23
CN102150190B (en) 2015-02-04
EP2313879A2 (en) 2011-04-27
RU2490694C2 (en) 2013-08-20
BRPI0913978A2 (en) 2015-10-27

Similar Documents

Publication Publication Date Title
JP2011527005A (en) Improved orientation, navigation and information system, especially for the blind or visually impaired
TW532000B (en) System and method of accessing and recording messages at coordinate way points
JP2008538872A (en) Simultaneous information context distribution system in public mode and individual mode
Hatakeyama et al. Remote infrared audible signage system
CN106205292A (en) One listens barrier crowd to use Intelligent multifunctional electronic wrist-watch
US7366499B1 (en) Announcement service for the visually impaired
JP6201279B2 (en) Server, server control method and control program, information processing system, information processing method, portable terminal, portable terminal control method and control program
KR20000022231A (en) Location determination in a communication system
Ross et al. Talking braille: a wireless ubiquitous computing network for orientation and wayfinding
KR20110024785A (en) Image/voice information service system based on the position using radio communication
US20110201319A1 (en) Interactive system for guidance and information on mobile telephone or analogous terminal
US20030101059A1 (en) System and method of accessing and recording messages at coordinate way points
WO2021153438A1 (en) Communication management device and method
JP4285857B2 (en) Information terminal
CN205561859U (en) Intelligence blind person navigation
JPH1124619A (en) Voice guide system of transmission type of radio wave and infrared ray or the like
WO2008010806A1 (en) Wireless communications management system
Bohonos et al. Cellphone accessible information via bluetooth beaconing for the visually impaired
Crandall et al. -Development, Evaluation, and Lessons Learned: A Case Study of Talking Signs® Remote Infrared Audible Signage
JP2021117965A (en) Communication management device and method
WO2024084263A1 (en) Suburban smart kiosk with information, advertisement and relief system
NL1016812C2 (en) Route navigation method, especially for blind or visually impaired people, detects user position and sends information from central database server to user
JP2005308598A (en) Walk guide system and walk guide method
CN112700618A (en) Portable tour guide supervision camera device for tourism management
WO2021071393A1 (en) Method for automatically screening vehicle information

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120628

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130716

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20131010

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20131018

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20131112

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20131119

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20131211

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20131218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140304

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140602

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140609

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140630

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140707

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20141014