JP2016212858A - 触覚誘導のためのシステム及び方法 - Google Patents

触覚誘導のためのシステム及び方法 Download PDF

Info

Publication number
JP2016212858A
JP2016212858A JP2016088755A JP2016088755A JP2016212858A JP 2016212858 A JP2016212858 A JP 2016212858A JP 2016088755 A JP2016088755 A JP 2016088755A JP 2016088755 A JP2016088755 A JP 2016088755A JP 2016212858 A JP2016212858 A JP 2016212858A
Authority
JP
Japan
Prior art keywords
haptic
sensor
user
processor
haptic effect
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2016088755A
Other languages
English (en)
Inventor
アブデルワハブ ハマム、
Hamam Abdelwahab
アブデルワハブ ハマム、
ユアン マヌエル クルス−エルナンデス、
Manuel Cruz-Hernandez Juan
ユアン マヌエル クルス−エルナンデス、
リーウェン ウー、
li-wen Wu
リーウェン ウー、
ジャマール サボーネ、
Saboune Jamal
ジャマール サボーネ、
ビンセント レベスク、
Levesque Vincent
ビンセント レベスク、
ロバート ラクロワ、
Lacroix Robert
ロバート ラクロワ、
ダニー グラント、
Danny Grant
ダニー グラント、
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of JP2016212858A publication Critical patent/JP2016212858A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00Tactile signalling systems, e.g. personal calling systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45BWALKING STICKS; UMBRELLAS; LADIES' OR LIKE FANS
    • A45B3/00Sticks combined with other objects
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H3/00Appliances for aiding patients or disabled persons to walk about
    • A61H3/06Walking aids for blind persons
    • A61H3/061Walking aids for blind persons with electronic detecting or guiding means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61NELECTROTHERAPY; MAGNETOTHERAPY; RADIATION THERAPY; ULTRASOUND THERAPY
    • A61N1/00Electrotherapy; Circuits therefor
    • A61N1/40Applying electric fields by inductive or capacitive coupling ; Applying radio-frequency signals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • HELECTRICITY
    • H02GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
    • H02KDYNAMO-ELECTRIC MACHINES
    • H02K41/00Propulsion systems in which a rigid body is moved along a path due to dynamo-electric interaction between the body and a magnetic field travelling along the path
    • H02K41/02Linear motors; Sectional motors
    • HELECTRICITY
    • H02GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
    • H02NELECTRIC MACHINES NOT OTHERWISE PROVIDED FOR
    • H02N2/00Electric machines in general using piezoelectric effect, electrostriction or magnetostriction
    • H02N2/02Electric machines in general using piezoelectric effect, electrostriction or magnetostriction producing linear motion, e.g. actuators; Linear positioners ; Linear motors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72475User interfaces specially adapted for cordless or mobile telephones specially adapted for disabled users
    • H04M1/72481User interfaces specially adapted for cordless or mobile telephones specially adapted for disabled users for visually impaired users
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H3/00Appliances for aiding patients or disabled persons to walk about
    • A61H3/06Walking aids for blind persons
    • A61H3/061Walking aids for blind persons with electronic detecting or guiding means
    • A61H2003/063Walking aids for blind persons with electronic detecting or guiding means with tactile perception
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/01Constructive details
    • A61H2201/0119Support for the device
    • A61H2201/0153Support for the device hand-held
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/01Constructive details
    • A61H2201/0173Means for preventing injuries
    • A61H2201/0184Means for preventing injuries by raising an alarm
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/10Characteristics of apparatus not provided for in the preceding codes with further special therapeutic means, e.g. electrotherapy, magneto therapy or radiation therapy, chromo therapy, infrared or ultraviolet therapy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/16Physical interface with patient
    • A61H2201/1602Physical interface with patient kind of interface, e.g. head rest, knee support or lumbar support
    • A61H2201/1635Hand or arm, e.g. handle
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5007Control means thereof computer controlled
    • A61H2201/501Control means thereof computer controlled connected to external computer devices or networks
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5007Control means thereof computer controlled
    • A61H2201/501Control means thereof computer controlled connected to external computer devices or networks
    • A61H2201/5012Control means thereof computer controlled connected to external computer devices or networks using the internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5058Sensors or detectors
    • A61H2201/5064Position sensors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5058Sensors or detectors
    • A61H2201/5079Velocity sensors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5058Sensors or detectors
    • A61H2201/5084Acceleration sensors
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5058Sensors or detectors
    • A61H2201/5092Optical sensor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61HPHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
    • A61H2201/00Characteristics of apparatus not provided for in the preceding codes
    • A61H2201/50Control means thereof
    • A61H2201/5097Control means thereof wireless

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Epidemiology (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Rehabilitation Therapy (AREA)
  • Pain & Pain Management (AREA)
  • Power Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Electromagnetism (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】携帯端末を含む移動装置が、周辺地域に関する情報を検出し、ユーザに好適にフィードバックするシステム及び方法を提供する。
【解決手段】方法は、領域に関係付けられる1つ以上のオブジェクトを決定するように構成されるセンサからセンサ信号を受信し502、センサ信号に部分的に基づいて領域情報を決定し504、領域情報に部分的に基づいて触覚効果を決定し512、触覚効果を出力するように構成される触覚出力装置に触覚効果に関係付けられる触覚信号を送信する514。
【選択図】図5

Description

本発明は、ユーザインターフェース装置の分野に関する。より詳細には、本発明は、触覚誘導のためのシステムに関する。
携帯電話等のハンドヘルド装置がますます人気を博している。こうした装置のうち幾つかは領域センサを含んでいる。こうした領域センサは、移動装置が周辺地域に関する情報を検出できるようにする。次に、この情報は視覚手段を介してユーザに伝達され得る。多くの装置は触覚フィードバックの機能を更に含んでおり、これは触覚手段を介してユーザに情報を伝達するために使用され得る。従って、触覚誘導のためのシステム及び方法が必要とされている。
本発明の実施形態は、触覚信号を決定して触覚効果を出力する機能を特徴とする装置を含む。一部の実施形態では、こうした触覚効果は、タッチ領域において1つ以上の特徴をシミュレートする表面ベースの触覚効果を含んでもよい。限定されないが、特長には、テクスチャの変化、及び/又は境界、障害物若しくは表面と接触しているオブジェクトの使用を通じて知覚され得るタッチ面の他の不連続性のシミュレーションが含まれてもよい。一部の実施形態では、触覚効果は、表面変形、信号、及び当技術分野で周知の触覚効果を含んでもよい。一部の実施形態では、こうした触覚効果は、領域に関係付けられる情報、例えば、領域内の障害物又は領域のマップに関係付けられる情報を伝達するために使用されてもよい。
一実施形態では、触覚誘導のための方法は、領域に関係付けられる1つ以上のオブジェクトを決定するように構成されるセンサからセンサ信号を受信するステップと、センサ信号に部分的に基づいて領域情報を決定するステップと、領域情報に部分的に基づいて触覚効果を決定するステップと、触覚効果を出力するように構成される触覚出力装置に触覚効果に関係付けられる触覚信号を送信するステップとを含む。
別の例示の実施形態では、触覚誘導のためのシステムは、領域情報を決定して、領域情報に関係付けられるセンサ信号を送信するように構成されるセンサと、センサと通信するプロセッサであって、センサ信号に部分的に基づいて領域情報を決定すること、領域情報に部分的に基づいて触覚効果を決定すること、及び前記触覚効果に関係付けられる触覚信号を送信することを行うように構成されるプロセッサと、プロセッサと通信する触覚出力装置であって、触覚信号を受信して、触覚効果を出力するように構成される触覚出力装置とを備える。
別の例示の実施形態は、プログラムコードを含む一時的でないコンピュータ可読媒体を含み、プログラムコードは、プロセッサによって実行されると、プロセッサに、領域に関係付けられる1つ以上のオブジェクトを決定するように構成されるセンサからセンサ信号を受信すること、センサ信号に部分的に基づいて領域情報を決定すること、領域情報に部分的に基づいて触覚効果を決定すること、及び触覚効果を出力するように構成される触覚出力装置に触覚効果に関係付けられる触覚信号を送信することを行わせるように構成される。
こうした例示の実施形態は、本主題を限定し又はその限界を定義するためではなく、その理解を支援するための例示を提供するために言及される。例示の実施形態は、詳細な説明において検討され、そこでは更なる説明が提供される。本明細書を吟味することによって、及び/又は請求項に記載の主題の1つ以上の実施形態を実施することによって、様々な実施形態によってもたらされる利点が更に理解され得る。
本明細書の以下の部分には完全な且つ実施可能な開示がより詳細に説明される。本明細書は以下の添付の図面を参照する。
触覚誘導のための例示的なシステムを示す。 図1Aで示されたシステムの一実施形態の外観図を示す。 図1Aで示されたシステムの別の実施形態の外観図を示す。 触覚誘導のための例示の実施形態を示す。 触覚誘導のための別の例示の実施形態を示す。 触覚誘導のための更に別の例示の実施形態を示す。 触覚誘導のための更に別の例示の実施形態を示す。 触覚誘導のための更に別の例示の実施形態を示す。 触覚誘導のための例示の実施形態の方法ステップのフローチャートである。
次に、多様な及び代替的な例示の実施形態及び添付の図面を詳細に参照する。各例示は、限定としてではなく、説明目的で提供される。修正及び変更が行われ得ることは、当業者には明らかであろう。例えば、一実施形態の一部として例示され又は記載された特徴は、更なる実施形態をもたらすために別の実施形態において使用されてもよい。従って、本開示は、添付の請求項及び均等物の範囲に入る修正及び変形を含むことが意図されている。
(触覚誘導のための装置の例示)
本開示の例示の実施形態は、タブレット、Eリーダ、携帯電話、装着可能装置等の携帯電子装置又はラップトップ等のコンピュータを含む。例示の実施形態では、電子装置は、ディスプレイ(例えば、タッチスクリーンディスプレイ)、メモリ、及びこうした要素の各々と通信するプロセッサを備える。例示の装置は、移動装置によく見られるアプリケーション、例えば、テキスト作成、Eメール、ゲーム等のためのアプリケーションを含む。例示の装置のユーザは、ユーザの集中を必要とする他の活動を行いながら、例えば、部屋の中又は混雑した通りを歩きながら、こうしたアプリケーションを使用してもよい。
例示の実施形態では、移動装置は、装置を取り囲む領域内で1つ以上のオブジェクトを検出して、こうしたオブジェクトに関係付けられるセンサ信号を送信するように構成されるセンサを更に備える。例示の実施形態では、1つ以上のオブジェクトは、ユーザの周囲の領域で見られる任意のオブジェクト、例えば、屋内オブジェクト(例えば、家具、支柱、壁、ドア、又は屋内領域に関係付けられる他のオブジェクト)、屋外オブジェクト(例えば、木、岩、穴、根、切り株、縁石、車、自転車、又は屋外領域に関係付けられる他のオブジェクト)を含んでもよい。更に、1つ以上のオブジェクトは、動いているオブジェクト(例えば、動物、車、人等)又は動いていないオブジェクト(例えば、木、壁、水溜り等)を含んでもよい。例示の実施形態では、領域センサは、1つ以上の超音波センサ、赤外線センサ、レーザセンサ、又はカメラを含んでもよい。一部の実施形態では、領域センサは、1つ以上のオブジェクトの1つ以上のキー記述子を検出するように更に構成されてもよい。一部の実施形態では、こうしたキー記述子は、例えば、色、温度、動き、加速、寸法、又はオブジェクトに関係付けられる何らかの他の特徴を含んでもよい。
例示の実施形態では、プロセッサは、領域センサから信号を受信してもよい。こうした信号に基づいて、プロセッサは、ユーザの周囲の領域に関係付けられる1つ以上のオブジェクト及びこうしたオブジェクトに関係付けられる1つ以上のキー記述子を決定してもよい。例えば、例示の実施形態では、領域センサは、ユーザの周囲の領域、例えば、ユーザが位置している屋内又は屋外領域の様々なオブジェクトを検出してもよい。例示の実施形態では、移動装置は、領域内のオブジェクトに部分的に基づいてユーザの場所を決定してもよい。例えば、移動装置は、オブジェクトに関係付けられるデータを領域情報のデータベースと比較してもよい。この比較に基づいて、移動装置は、移動装置及びユーザが既知の場所、例えば、家、モール、公園、キャンパス、職場、又は何らかの他の既知の場所にいることを決定してもよい。このような実施形態では、データベースは、インターネットアクセス可能「クラウド」データベースを含んでもよく、これは1つ以上の公的及び/又は民間グループによって継続的に更新されてもよい。更に、このようなデータベースは、複数のモバイルアプリケーション及びウェブページによって使用又はアクセスされるマップデータのデータベースを含んでもよい。一部の実施形態では、このデータベースは、地球上の様々な領域に関係付けられる領域情報を含んでもよい。例示の実施形態では、プロセッサは、この領域情報をユーザの周囲で検出された情報と比較し、この比較に部分的に基づいて、ユーザの現在地を決定してもよい。
例示の実施形態では、ユーザは、領域(例えば、部屋、廊下、又は歩道)を横断しながら、移動装置のディスプレイに集中している場合がある。例えば、ユーザは、テキスト作成アプリケーションに集中しており、そのため周囲に集中していない場合がある。このような実施形態では、移動装置は、ユーザが1つ以上のオブジェクトにぶつかる可能性があることを決定してもよい。例えば、(複数の)オブジェクトは、ユーザの経路にある障害物、例えば、椅子を含んでもよい。このような実施形態では、移動装置は、ユーザを警告するアラートを出力してもよい。例示の実施形態では、このアラートは、1つ以上のグラフィカルアラート(例えば、ディスプレイ上の視覚的警告)、聴覚的アラート(例えば、聴覚的警報)、又は触覚アラート(例えば、振動、変形、表面特徴、又は何らかの他の触覚効果)の1つ以上を含んでもよい。例えば、例示の実施形態では、ユーザが障害物から所定の距離内にいることを移動装置が決定すると、移動装置は2つのアラートを出力してもよい。例示の実施形態では、こうした2つのアラートは、移動装置のディスプレイにテキストを表示する等のグラフィカルアラート、及び触覚アラートを含んでもよい。一部の実施形態では、触覚アラートは、例えば、振動、変形(例えば、オブジェクトの方向における又はオブジェクトから離れる方向の表面の変形)、又は表面ベースの効果(例えば、タッチ面上の摩擦係数の変化)を含んでもよい。例示の実施形態では、こうしたアラートは、ユーザが障害物にぶつかりそうであることをユーザに知らせてもよい。
更に、例示の実施形態では、プロセッサは、ユーザが位置している領域の「マップ」を決定してもよい。このマップは、領域及び領域に位置する様々なオブジェクトのレイアウトを含んでもよい。例示の実施形態では、プロセッサは、ローカルメモリにこのマップを記憶してもよい。更に、このような実施形態では、プロセッサは、領域内の1つ以上のオブジェクトに関係付けられる触覚効果を決定してもよい。このような実施形態では、例示の装置は、オブジェクトの場所をユーザに警告するように構成される1つ以上の触覚効果を決定してもよい。一部の実施形態では、こうした触覚効果は、例えば、移動装置のディスプレイ上で表面ベースの効果として出力されてもよい。こうした効果により、ユーザはディスプレイの表面と相互作用することにより部屋の中の障害物等のオブジェクトを見つけることができてもよい。例えば、テクスチャ又は摩擦係数の変化等の表面オブジェクトは、様々なオブジェクトの場所を示してもよい。代替的に、プロセッサは、ユーザがオブジェクトに接近すると触覚効果を出力し、従って、オブジェクトがユーザの経路にある障害物であることをユーザに警告してもよい。
例示の実施形態では、移動装置は、単純化されたマップを記憶するように構成されてもよい。例えば、移動装置は、ユーザの現在地から領域内の1つ以上のオブジェクトへの距離及び角度を決定してもよい。例示の実施形態では、単純化されたマップは、ユーザが接近しているオブジェクトを識別するために使用されてもよい。例えば、ユーザがある位置から別の位置に移動すると、単純化されたマップに基づいて、ユーザがオブジェクト(例えば、廊下又はドア)に接近していることを移動装置が検出してもよい。
更に、例示の実施形態では、移動装置は、ユーザをある場所に向かわせるように構成されてもよい。例えば、例示の実施形態では、移動装置は、ユーザをある場所から別の場所に向かわせるように構成されるマッピング又は位置支援アプリケーションを含んでもよい。例示の実施形態では、こうしたアプリケーションは、ユーザの現在地を決定するために、衛星測位システム、例えば、GPS、AGPS、GLONASS、Galileo等を利用するように構成されてもよい。他の実施形態では、移動装置は、ユーザの現在地を決定するために他の情報を利用してもよい。例えば、移動装置は、領域センサを使用して検出されたオブジェクトに基づいてユーザの場所を決定してもよい。更に、移動装置は、こうしたオブジェクトに基づいてユーザが方向を変更すべきであることを決定してもよい。
例示の実施形態では、移動装置は、経路(例えば、屋内経路又は屋外経路)に沿ってユーザを案内するための触覚効果を決定してもよい。例えば、例示の実施形態では、移動装置は、ユーザをある場所に案内するための触覚効果を出力してもよい。例えば、このような実施形態では、移動装置の右側における触覚効果はユーザが右折すべきであることを示してもよく、移動装置の左側における触覚効果はユーザが左折すべきであることを示してもよい。一部の実施形態では、こうした触覚効果は、例えば、振動、表面変形(例えば、ユーザが曲がるべき方向における変形)、又は表面ベースの効果(例えば、摩擦係数又は知覚される表面テクスチャの変化)を含んでもよい。更に、このような実施形態では、移動装置は、ユーザが障害物に遭遇しそうであることをユーザに警告するための1つ以上のアラートを出力してもよい。一部の実施形態では、アラートは、視覚障害を有するユーザ又は不注意なユーザ、例えば、歩きながらテキストを送信している又はEメールをタイプしているユーザによって使用されてもよい。
別の例示の実施形態では、例示の装置は、視覚障害を有する人物によって使用される装置を含んでもよい。一実施形態では、この装置は、触覚杖を含んでもよい。このような実施形態では、触覚杖は、領域センサ(例えば、超音波センサ、赤外線センサ、レーザセンサ、又はカメラ)及び触覚出力装置の配列を含んでもよい。例示の実施形態では、触覚杖は、上記の動作を行うように構成されてもよい。例えば、触覚杖は、ユーザの経路にある障害物を検出して、ユーザに障害物を警告するための触覚効果を出力するように構成されてもよい。例示の実施形態では、こうした触覚効果は、障害物のタイプをユーザに警告するように構成される効果を含んでもよい。例えば、ある触覚効果を壁が含み、異なる触覚効果をドアが含んでもよい。一部の実施形態では、このアラートは、1つ以上のオブジェクトに関係付けられる1つ以上のキー記述子に部分的に基づいてもよい。更に、例示の実施形態では、触覚杖は、ある場所から別の場所への経路又は通路をユーザに警告する機能を含んでもよい。例えば、触覚杖は、ユーザに前進、後退、左又は右への移動をユーザに警告するための触覚効果を出力するように構成されてもよい。
一部の実施形態では、例示の装置は、検出されたオブジェクトに関係付けられる1つ以上のキー記述子に基づいてアラートを出力すべきかどうかを決定するように構成されてもよい。このような実施形態では、キー記述子は、例えば、オブジェクトのサイズ、移動の方向、移動の速さ、ユーザからの距離、相対的危険性、又はオブジェクトに関係付けられる何らかの他のキー記述子を含んでもよい。例えば、検出されたオブジェクトが相対的に遠い(例えば、閾値距離以上である)場合、例示の装置はアラートを出力しなくてもよい。同様に、例示の装置は、オブジェクトに関する追加の情報、例えば、オブジェクトのサイズ、その相対的危険性、その移動の速さ、その移動の方向を決定して、この情報に基づいて、ユーザにアラートを出力するかどうかを決定してもよい。
更に、一部の実施形態では、ユーザの周囲の領域における1つ以上のオブジェクトがアクティブオブジェクトを含んでもよい。例えば、アクティブオブジェクトは、処理及びデータ転送機能を有するオブジェクトを含んでもよい。こうしたアクティブオブジェクトは、インターネット等のネットワークを介してアクセス可能なサーバ又は例示の装置と通信して、アクティブオブジェクトの周囲の領域に関する情報を提供するように構成されてもよい。一部の実施形態では、この情報は、アクティブオブジェクト、領域内の他のオブジェクト、及び/又は例示の装置に対するユーザの移動に関する情報を含んでもよい。例示の装置は、ユーザにアラートを出力するか及び/又はユーザにどのようなタイプのアラートを出力するかを決定するためにこうした信号を使用してもよい。例えば、例示の実施形態では、アクティブオブジェクトは、専用センサ、領域センサを含む移動装置、又は領域センサを含む他の電子装置を含んでもよい。例示の実施形態では、こうしたアクティブオブジェクトは、領域情報を周期的に又は実質的に連続的に検出して、この領域情報に関係付けられる信号を送信してもよい。こうした信号は、他の移動装置にアクセス可能なデータベース、例えば、インターネットを介してアクセス可能なクラウドデータベースにアップロードされてもよい。代替的に、一部の実施形態では、アクティブオブジェクトは、他の装置、例えば、アクティブオブジェクトと同じ領域内の他の移動装置に直接的にデータを送信するように構成されてもよい。
こうした例示の実施形態は、本主題を限定し又はその限界を定義するためではなく、その理解を支援するための例示を提供するために言及される。例示の実施形態は、詳細な説明において検討され、そこでは更なる説明が提供される。本明細書を吟味することによって、及び/又は請求項に記載の主題の1つ以上の実施形態を実施することによって、様々な実施形態によってもたらされる利点が更に理解され得る。
(触覚誘導のための例示のシステム)
図1Aは、触覚誘導のための例示的なシステム100を示す。特に、この例示では、システム100は、バス106を介して他のハードウェアとインターフェース接続されるプロセッサ102を有するコンピュータ装置101を含む。RAM、ROM又はEEPROM等の任意の適切な有形の(及び一時的でない)コンピュータ可読媒体を含み得るメモリ104が、コンピュータ装置の動作を構成するプログラム要素を具現化する。この例示では、コンピュータ装置101は、1つ以上のネットワークインターフェース装置110、入力/出力(I/O)インターフェース要素112、及び追加の記憶装置114を更に含む。
ネットワーク装置110は、ネットワーク接続を容易にする1つ以上の任意の構成要素を表し得る。限定されないが、例示には、Ethernet(登録商標)、USB、IEEE1394等の有線インターフェース、及び/又はIEEE802.11、Bluetooth(登録商標)等の無線インターフェース、又は携帯電話ネットワークにアクセスするための無線インターフェース(例えば、CDMA、GSM(登録商標)、UMTS又は他の移動通信ネットワーク)が含まれる。
I/O要素112は、1つ以上のディスプレイ、キーボード、マウス、スピーカ、マイクロホン、カメラ(例えば、移動装置の前部又は後部向きのカメラ)、衛星測位システム受信機(例えば、GPS、AGPS、GLONASS、Galileo等)、及び/又はデータの入力又は出力に使用される他のハードウェア等の装置への接続を容易にするために使用されてもよい。記憶装置114は、装置101に含まれる磁気、光学、又は他の記憶媒体等の不揮発性記憶装置を表す。
(複数の)領域センサ115は、ユーザの周囲の領域に関係付けられるオブジェクトを検出して、こうしたオブジェクトに関係付けられる信号を(複数の)プロセッサ102に送信するように構成される1つ以上の装置を備える。例えば、(複数の)領域センサ115は、超音波センサ、赤外線センサ、レーザセンサ、又はカメラ(例えば、光学又は赤外線カメラ)の1つ以上を含んでもよい。一実施形態では、(複数の)領域センサ115はMB1320 XL−MaxSonar−AE2を含んでもよいが、他の実施形態では、多くの他のタイプ及びモデルの(複数の)領域センサも又は代替的に使用されてもよい。一部の実施形態では、(複数の)領域センサ115により検出されるオブジェクトは、ユーザの周囲の領域で見られる任意のオブジェクト、例えば、屋内オブジェクト(例えば、家具、支柱、壁、ドア、又は屋内領域に関係付けられる他のオブジェクト)、屋外オブジェクト(例えば、木、岩、穴、根、切り株、縁石、車、自転車、又は屋外領域に関係付けられる他のオブジェクト)を含んでもよい。更に、オブジェクトは、動いているオブジェクト(例えば、動物、車、人等)又は動いていないオブジェクト(例えば、木、壁、水溜り等)を含んでもよい。一部の実施形態では、領域センサは、1つ以上のオブジェクトの1つ以上のキー記述子を検出するように更に構成されてもよい。一部の実施形態では、こうしたキー記述子は、例えば、色、温度、動き、加速、寸法、又はオブジェクトに関係付けられる何らかの他の特徴を含んでもよい。例えば、一部の実施形態では、領域センサ115は赤外線カメラを含んでもよい。一部の実施形態では、赤外線カメラは、1つ以上のオブジェクトの熱的特性を検出してもよい。一部の実施形態では、熱的特性は、オブジェクトが生きているか(例えば、人物又は動物)又はオブジェクト、例えば、火若しくはホットプレートの脅威レベルを検出するために使用されてもよい。
一部の実施形態では、ユーザの周囲の領域における1つ以上のオブジェクトはアクティブオブジェクトを含んでもよい。例えば、アクティブオブジェクトは、処理及びデータ転送機能を有するオブジェクトを含んでもよい。こうしたアクティブオブジェクトは、システム100と通信して、アクティブオブジェクト、領域内の他のオブジェクト、及び/又は装置100に対するユーザの移動に関する情報を提供するように構成されてもよい。一部の実施形態では、こうした信号は、(複数の)領域センサ115によって受信されてもよい。更に、一部の実施形態では、装置100のプロセッサ102は、ユーザにアラートを出力するか及び/又はユーザにどのようなタイプのアラートを出力するかを決定するためにこうした信号を使用してもよい。 例えば、例示の実施形態では、アクティブオブジェクトは、専用センサ、領域センサを含む移動装置、又は領域センサを含む他の電子装置を含んでもよい。例示の実施形態では、こうしたアクティブオブジェクトは、領域情報を周期的に又は実質的に連続的に検出して、この領域情報に関係付けられる信号を送信してもよい。こうした信号は、他の移動装置にアクセス可能なデータベース、例えば、インターネットを介してアクセス可能なクラウドデータベースにアップロードされてもよい。従って、一部の実施形態では、アクティブオブジェクトによって検出されたデータは、データが検出された後で所定の期間(例えば、分、時間、日、週、又は年等)、コンピュータ装置によって記憶され且つアクセス可能であってもよい。代替的に、一部の実施形態では、アクティブオブジェクトは、他の装置、例えば、アクティブオブジェクトと同じ領域内の他の移動装置に直接的にデータを送信するように構成されてもよい。
一実施形態では、システム100は、信号データ、例えば、GPS、Wi−Fi、又はセルラ信号に基づいて装置100の周囲の領域にアクティブオブジェクトを発見する。一部の実施形態では、このデータはアクティブオブジェクトの場所に関係付けられるデータ及び装置100の場所に関係付けられるデータを含んでもよい。別の実施形態では、中央システム/サーバは、装置100及びアクティブオブジェクトに関係付けられるデータを受信して、このデータに基づいて装置100を取り囲む領域にあるアクティブオブジェクトを決定する。一部の実施形態では、装置100及びアクティブオブジェクトは、無線で直接的に(例えば、Wi−Fi、Bluetooth(登録商標)等を介して)通信してもよい。他の実施形態では、装置100及びアクティブオブジェクトは、ネットワークを介してアクセス可能な中央システム/サーバを介して通信してもよい。更に、一部の実施形態では、アクティブオブジェクトは、領域内の1つ以上の他のユーザの装置(例えば、装置100に類似の他の装置)を含んでもよい。
システム100は、この例示では、装置101に統合されるタッチ面116を更に含む。タッチ面116は、ユーザの接触入力を感知するように構成される任意の表面を表す。1つ以上のセンサ108は、物体がタッチ面に接触する場合に接触領域における接触を検出して、プロセッサ102によってユーザに適切なデータを提供するように構成されてもよい。任意の適切な数、種類、又は配置のセンサが使用され得る。例えば、抵抗性及び/又は容量性のセンサが、タッチ面116に組み込まれて、タッチの場所及び圧力等の他の情報を検出するために使用されてもよい。別の例示として、接触位置を決定するためにタッチ面のビューを備える光学センサが使用されてもよい。一部の実施形態では、センサ108及びタッチ面116は、タッチスクリーン又はタッチパッドを含んでもよい。例えば、一部の実施形態では、タッチ面116及びセンサ108は、表示信号を受信して、ユーザに画像を出力するように構成されるディスプレイの上(overtop)に取り付けられるタッチスクリーンを含んでもよい。他の実施形態では、センサ108は、LED検出器を含んでもよい。例えば、一実施形態では、タッチ面116は、ディスプレイの側部に取り付けられるLED指検出器を含んでもよい。一部の実施形態では、プロセッサは単一のセンサ108と通信し、他の実施形態では、プロセッサは複数のセンサ108、例えば、第1のタッチスクリーン及び第2のタッチスクリーンと通信する。
一部の実施形態では、1つ以上のセンサ108は、移動装置の運動を検出するように構成される1つ以上のセンサ(例えば、加速度計、ジャイロスコープ、カメラ、GPS、又は他のセンサ)を更に含む。こうしたセンサは、例えば、ユーザが領域の中で移動装置を運ぶとき、X、Y又はZ平面で装置を移動させるユーザ相互作用を検出するように構成されてもよい。センサ108は、ユーザ相互作用を検出し、ユーザ相互作用に基づいて、プロセッサ102に信号を送信するように構成される。
一部の実施形態では、センサ108は、ユーザ相互作用の複数の態様を検出するように構成されてもよい。例えば、センサ108は、ユーザ相互作用の速度及び圧力を検出して、この情報をインターフェース信号に組み込んでもよい。更に、一部の実施形態では、ユーザ相互作用は、装置から離れた多次元ユーザ相互作用を含む。例えば、一部の実施形態では、装置に関係付けられるカメラが、ユーザの動き、例えば、手、指、体、頭、目若しくは足の動作又は別の人物若しくはオブジェクトとの相互作用を検出するように構成されてもよい。
図1Aに示される例示では、プロセッサ102と通信する触覚出力装置118がタッチ面116に結合される。一部の実施形態では、触覚出力装置118は、触覚信号に応じてタッチ面上でテクスチャをシミュレートする触覚効果を出力するように構成される。追加的又は代替的に、触覚出力装置118は、タッチ面を制御して動かす振動触覚効果を提供してもよい。一部の触覚効果は、装置の筐体に結合されるアクチュエータを利用してもよい。また、一部の触覚効果は、順番に及び/又は同時に複数のアクチュエータを使用してもよい。例えば、一部の実施形態では、表面テクスチャは、異なる周波数で表面を振動させることによりシミュレートされてもよい。このような実施形態では、触覚出力装置118は、例えば、圧電アクチュエータ、電気モータ、電磁アクチュエータ、音声コイル、形状記憶合金、電気活性ポリマ、ソレノイド、偏心回転質量モータ (ERM)又は線形共振アクチュエータ(LRA)の1つ以上を含んでもよい。一部の実施形態では、触覚出力装置118は、複数のアクチュエータ、例えば、ERM及びLRAを含んでもよい。
一部の実施形態では、1つ以上の触覚出力装置が、装置に対してX、Y又はZ平面に力を出力するように構成されてもよい。一部の実施形態では、こうした効果は、ディスプレイ内のオブジェクトが移動する感覚をシミュレートするように構成されてもよい。例えば、一実施形態では、多次元触覚効果は、X平面(左又は右)、Y平面(上又は下)、Z平面(ディスプレイの中へ又は外へ)、又はこうした面のベクトルで移動するオブジェクト(例えば、移動オブジェクト)をシミュレートするように構成されてもよい。こうした多次元の触覚効果がタッチ面における特徴をシミュレートしてもよい。
本明細書では単一の触覚出力装置118が示されているが、複数の実施形態では、触覚効果を出力するために、例えば、タッチ面において表面テクスチャをシミュレートするために同じ又は異なる種類の複数の触覚出力装置が使用されてもよい。一実施形態では、超音波周波数で、例えば、一部の実施形態では20−25kHzよりも高い周波数で動作するアクチュエータ等を使用することによって、垂直に及び/又は水平にタッチ面116の一部又は全部を移動するために圧電アクチュエータが使用されてもよい。一部の実施形態では、偏心回転質量モータ及び線形共振アクチュエータ等の複数のアクチュエータが、異なるテクスチャ及び他の触覚効果を与えるために単独で又は同時に使用され得る。
更に他の実施形態では、触覚出力装置118は、タッチ面116の表面でテクスチャをシミュレートするために、例えば、静電表面アクチュエータを使用することによって、静電引力を使用してもよい。同様に、一部の実施形態では、触覚出力装置118は、タッチ面116の表面でユーザが感じる摩擦を変化させるために静電引力を使用してもよい。例えば、一実施形態では、触覚出力装置118は、触覚効果を生成するために機械的な動きの代わりに電圧及び電流を加える静電ディスプレイ又は任意の他の装置を含んでもよい。このような実施形態では、静電アクチュエータは、導電層及び絶縁層を含んでもよい。このような実施形態では、導電層は、任意の半導体又は銅、アルミニウム、金又は銀等の他の導電性材料であってもよい。また、絶縁層は、ガラス、プラスチック、ポリマ、又は任意の他の絶縁性材料であってもよい。
プロセッサ102は、導電層に電気信号を加えることによって静電アクチュエータを動作させてもよい。一部の実施形態では、電気信号は、導電層をタッチ面116に近い又は接触しているオブジェクトと容量結合するAC信号であってもよい。一部の実施形態では、AC信号は、高圧増幅器によって生成されてもよい。他の実施形態では、容量結合は、タッチ面116の表面における摩擦係数又はテクスチャをシミュレートしてもよい。例えば、一実施形態では、タッチ面116の表面は円滑であるが、容量結合はタッチ面116の表面の付近のオブジェクト間に引力を生み出してもよい。一部の実施形態では、オブジェクトと導電層との間の引力のレベルを変化させることは、タッチセンサ面116の表面で動くオブジェクトにおける擬似テクスチャを変化させること、又はオブジェクトがタッチ面116の表面で動くときに感じられる摩擦係数を変化させることができる。更に、一部の実施形態では、静電アクチュエータが、タッチ面116の表面において擬似テクスチャを変化させるために従来のアクチュエータと共に使用されてもよい。例えば、アクチュエータはタッチ面116の表面のテクスチャの変化をシミュレートするように振動してもよい。一方では同時に、静電アクチュエータがタッチ面116の表面において、又はコンピュータ装置101の別の部分(例えば、その筐体又は別の入力装置)において異なるテクスチャ又は他の効果をシミュレートしてもよい。
当業者であれば、摩擦係数を変化させること又は表面上のテクスチャをシミュレートすること等の触覚効果を出力するために多くの技術が使用され得ることを理解するであろう。例えば、一部の実施形態では、テクスチャは、表面再構成可能な触覚基板(限定されないが、例えば、繊維、ナノチューブ、電気活性ポリマ、圧電要素、又は形状記憶合金を含む)又は磁性流体からの接触に基づいてそのテクスチャを変化させるように構成される可撓性表面層を使用してシミュレートされ又は出力されてもよい。別の実施形態では、表面のテクスチャは、例えば、変形機構、空気若しくは流体ポケット、材料の局部変形、共振機構要素、圧電性材料、微小電気機械システム(“MEMS”)要素、熱流体ポケット、MEMSポンプ、可変多孔性膜(variable porosity membranes)、又は層流変調で、1つ以上の表面特徴を上昇又は下降させることによって変化させられてもよい。
一部の実施形態では、タッチ面116に近接した又は接触している体の部分をシミュレートすることによって触覚効果を生成するために静電アクチュエータが使用されてもよい。例えば、一部の実施形態では、ユーザの指の皮膚の神経終端又は静電アクチュエータに応答することができるスタイラスの構成要素をシミュレートしてもよい。例えば、皮膚の神経終端は、刺激されて、振動又は何らかのより具体的な感覚として静電アクチュエータ(例えば、容量結合)を感知してもよい。例えば、一実施形態では、静電アクチュエータの導電層が、ユーザの指の導電部分と結合するAC電圧信号を受信してもよい。ユーザがタッチ面116に触れてタッチ面上で自身の指を動かすと、ユーザは、チクチク、ザラザラ、ガタガタ、でこぼこ、粘々、又は何らかの他のテクスチャを感知してもよい。
メモリ104に関しては、例示のプログラム構成要素124、126及び128は、触覚誘導を与えるために一部の実施形態では、装置がどのように構成され得るかを示すように描かれている。この例示では、検出モジュール124は、(複数の)領域センサ115から受信される信号を処理して、ユーザを取り囲む領域にあるオブジェクトを決定するようにプロセッサ102を構成する。例えば、検出モジュールは、ユーザが領域を通ると領域センサ115から信号を受信するようにプロセッサ102を構成してもよい。こうしたセンサ信号に基づいて、プロセッサ102は領域内の1つ以上のオブジェクト(例えば、壁、廊下、縁石、他の人々等)に対してユーザの場所に関係付けられるデータを連続的に更新してもよい。
一部の実施形態では、検出モジュール124及びプロセッサ102は、データベース、例えば、ローカルに保存されたデータベース又はネットワーク接続を介してアクセスされる遠隔データベースにおけるデータと検出されたオブジェクトを比較することによりマップに関係付けられる情報を決定してもよい。例えば、一部の実施形態では、プロセッサは、インターネットを介してアクセス可能な遠隔データベースからデータを受信することによりマップを決定してもよい。一部の実施形態では、このようなデータベースは、「クラウド」データベースを含んでもよく、これは1つ以上の公的又は民間グループによって継続的に更新されてもよい。更に、このようなデータベースは、複数のモバイルアプリケーション及びウェブページによって使用又はアクセスされるマップデータのデータベースを含んでもよい。更に、一部の実施形態では、このデータベースは、地球上の様々な領域に関係付けられる領域情報を含んでもよい。例示の実施形態では、プロセッサは、この領域情報をユーザの周囲で検出された情報と比較して、ユーザの現在地を決定してもよい。 従って、一部の実施形態では、プロセッサは、データベースに記憶された情報とユーザの周囲の領域に関する情報(例えば、領域内のオブジェクトに関する情報)を比較することによりマップを決定してもよい。一部の実施形態では、プロセッサ102は、データベースにアクセスすることによりユーザの現在地を決定してもよい。
触覚効果決定モジュール126は、生成すべき触覚効果を選択するためのオブジェクトに関するデータを分析するプログラム構成要素を表す。例えば、一実施形態では、モジュール126は、オブジェクトの場所に基づいて、生成すべき触覚効果を決定するコードを含む。例えば、触覚効果決定モジュール126は、ユーザによって選択され得る1つ以上の最初から組み込まれている触覚効果を含んでもよい。こうした触覚効果は、(複数の)触覚出力装置118が生成することができる任意の種類の触覚効果を含んでもよい。更に、一部の実施形態では、モジュール126は、触覚効果の特徴、例えば、効果の強度、周波数、持続時間、ディーティサイクル、又は触覚効果に関係付けられる任意の他の特徴を操作するように構成されるプログラムコードを含んでもよい。一部の実施形態では、モジュール126は、例えば、グラフィカルユーザインターフェースを介して、こうした特徴をユーザが操作できるようにするプログラムコードを含んでもよい。
更に、一部の実施形態では、モジュール126は、ユーザ相互作用に基づいて触覚効果を決定するように構成されるプログラムコードを含んでもよい。例えば、モジュール126は、タッチ面116におけるユーザ入力又は移動装置の動作を検出するように構成される慣性センサ等の他のセンサを監視するように構成されてもよい。モジュール126は、この入力を検出して、入力に基づいて触覚効果を生成してもよい。例えば、一部の実施形態では、モジュール126は、ユーザ相互作用をシミュレートするように構成される触覚効果を決定するように構成されてもよい。
触覚効果生成モジュール128は、プロセッサ102に触覚信号を生成させて触覚出力装置118に送信させ、それにより、触覚出力装置118に選択された触覚効果を生成させるプログラミングを表す。例えば、生成モジュール128は、記憶された波形又はコマンドにアクセスして、触覚出力装置118に送信してもよい。別の例示として、触覚効果生成モジュール128は、所望の種類のテクスチャを受信して、適切な信号を生成して触覚出力装置118に送信するために、信号処理アルゴリズムを利用してもよい。更なる例示として、触覚効果に関する目標座標と共に所望のテクスチャが示されて、表面(及び/又は他の装置要素)の適切な変位を生成して触覚効果を与えるために1つ以上のアクチュエータに適切な波形が送信されてもよい。一部の実施形態は、触覚効果を出力するために同時に複数の触覚出力装置を利用してもよい。例えば、インターフェース上でボタン間の境界を横断することをシミュレートするためにテクスチャの変化が使用されてもよい。一方で、触覚振動効果が、ボタンが押されたことをシミュレートする。
コンピュータシステムの特定の実施形態によっては、タッチ面がディスプレイを覆ってもよく、又は覆わなくてもよい(或いは、対応しても、対応してなくてもよい)。図1Bでは、コンピュータシステム100Bの外観図が示される。コンピュータ装置101は、装置のタッチ面及びディスプレイを組み合わせたタッチ可能ディスプレイ116を含む。タッチ面は、ディスプレイ外部又は実際のディスプレイ構成要素上の1つ以上の材料層に対応してもよい。
図1Cは、タッチ面がディスプレイをオーバレイしないタッチ可能コンピュータシステムの別の例を示す。この例示では、コンピュータ装置101は、装置101とインターフェース接続されたコンピュータシステム120に含まれるディスプレイ122に設けられるグラフィカルユーザインターフェースにマッピングされ得るタッチ面116を含む。例えば、コンピュータ装置101は、マウス、トラックパッド、又は他の装置を含んでもよいが、コンピュータシステム120は、デスクトップ若しくはラップトップコンピュータ、セットトップボックス(例えば、DVDプレーヤ、DVR、ケーブルテレビボックス)、又は別のコンピュータシステムを含んでもよい。別の例示として、タッチ面116及びディスプレイ122は、ディスプレイ122を特徴付けるラップトップコンピュータにおけるタッチ可能トラックパッド等の同じ装置に配置されてもよい。ディスプレイと統合されるか否かに関わらず、本明細書の例示における平面的なタッチ面の描写は、限定することを意図していない。他の実施形態は、表面ベースの触覚効果を与えるように更に構成される湾曲した又は不規則なタッチ可能面を含む。
図2A−2Bは、触覚誘導のための例示の実施形態を示す。図2Aは、タッチ可能ディスプレイ202を備えるコンピュータ装置201を含むシステム200の外観図を示す図面である。図2Bは、装置201の断面図を示す。装置201は図1Aの装置101と同様に構成され得るが、プロセッサ、メモリ及びセンサ等は明確のためこの図面には示されていない。
図2Bに見られるように、装置201は、複数の触覚出力装置218及び追加の触覚出力装置222を備える。触覚出力装置218−1は、ディスプレイ202に垂直の力を与えるように構成されるアクチュエータを含んでもよいが、一方で218−2は横方向にディスプレイ202を動かしてもよい。この例では、触覚出力装置218、222はディスプレイに直接結合されているが、触覚出力装置218、222は別のタッチ面、例えば、ディスプレイ202の上にある材料の層に結合され得ることが理解されるべきである。更に、1つ以上の触覚出力装置218又は222が上記の静電アクチュエータを含んでもよいことが理解されるべきである。更に、触覚出力装置222は、装置201の構成要素を保持する筐体に結合されてもよい。図2A−2Bの例では、ディスプレイ202の領域はタッチ領域に対応するが、原理はディスプレイとは完全に分離したタッチ面に適用され得る。
一実施形態では、触覚出力装置218の各々は圧電アクチュエータを含むが、追加の触覚出力装置222は、偏心回転質量モータ、線形共振アクチュエータ又は別の圧電アクチュエータを含む。触覚出力装置222は、プロセッサからの触覚信号に応答して振動触覚効果を提供するように構成され得る。振動触覚効果は、表面ベースの触覚効果と併せて及び/又は他の目的で利用され得る。例えば、ディスプレイ202の表面におけるテクスチャをシミュレートするために各アクチュエータが併せて使用されてもよい。
一部の実施形態では、触覚出力装置218−1及び218−2のいずれか又は両方は、圧電アクチュエータ以外のアクチュエータを含み得る。いずれのアクチュエータも、例えば、圧電アクチュエータ、電磁アクチュエータ、電気活性ポリマ、形状記憶合金、可撓性複合圧電アクチュエータ(例えば、可撓性材料を含むアクチュエータ)、静電、及び/又は磁歪アクチュエータを含み得る。更に、触覚出力装置222が示されているが、複数の他の触覚出力装置が装置201の筐体に結合可能であり、及び/又は触覚出力装置222は別の場所に結合されてもよい。装置201は、異なる場所でもタッチ面に結合される複数の触覚出力装置218−1/218−2を含んでもよい。
次に図3Aを参照すると、図3Aは、本開示の一実施形態による触覚誘導の実施形態を含む。図3Aに示された実施形態は、コンピュータ装置300を含む。図3Aに示されたように、コンピュータ装置300は、タッチスクリーンディスプレイ302を備える。更に、コンピュータ装置300は、上記のタイプの領域センサ、例えば、1つ以上の超音波センサ、赤外線センサ、レーザセンサ、又はカメラを含む。図3Aに示される実施形態では、コンピュータ装置は、モバイルアプリケーション(例えば、モバイルゲーム、テキスト作成アプリケーション、Eメールアプリケーション、ソーシャルメディアアプリケーション等)を実行してもよい。ユーザは、ユーザの注意を必要とする他のタスクを行っている間、例えば、障害物を有する領域内を歩いている又は走っている間、このアプリケーションに集中する場合がある。
図3Aに示される実施形態では、触覚誘導のための方法を実行するように構成されるソフトウェアプログラムは、ユーザが別のアプリケーションを使用している間、バックグラウンドで実行されてもよい。このプログラムは、移動装置300の領域センサから受信される信号を連続的に監視してもよい。領域センサがユーザの経路にある障害物を検出すると、移動装置300はユーザにアラートを出力する。このアラートは、聴覚、視覚、又は触覚アラートを含んでもよい。図3Aに示されるように、このアラートは、グラフィカルアラート及び触覚アラート(例えば、振動)を含む。グラフィカルアラート304は、「障害物が検出された」と表示するテキストを含む。図3Aに示される実施形態では、グラフィカルアラート304は、ユーザが相互作用していたどのようなモバイルアプリケーションのディスプレイでも含む、移動装置のディスプレイをオーバレイする。他の実施形態では、ディスプレイ302全体をオーバレイするのではなく、グラフィカルアラート304は、バックグラウンドのみに現れてもよい。更に、図3Aに示されるように、コンピュータ装置300は、強い振動等の触覚効果を出力する。他の実施形態では、移動装置300は、可聴アラート、例えば、障害物がユーザの経路にあることをユーザに更に警告し得るアラームを出力するように構成されてもよい。
次に図3Bを参照すると、図3Bは、本開示の一実施形態による触覚誘導の実施形態を含む。図3Bに示された実施形態は、コンピュータ装置350を含む。図3Bに示されたように、コンピュータ装置350は、タッチスクリーンディスプレイ302を備える。図3Bに示される実施形態では、ディスプレイは、ユーザが移動している経路352を示す。図3Bに示される実施形態では、移動装置350は、上記のタイプの領域センサ、例えば、1つ以上の超音波センサ、赤外線センサ、レーザセンサ、又はカメラを含む。ユーザが経路352に沿って進むと、移動装置は、経路352及びユーザが経路352を進むために取るべきターンをユーザに警告するための触覚効果を出力する。例えば、一部の実施形態では、ユーザが前進し続けるべきであることを移動装置350が決定する場合、移動装置は移動装置350の前側に触覚効果を出力するであろう。同様に、ユーザが左折又は右折すべきであることを移動装置350が決定する場合、移動装置350はその右又は左側に触覚効果を出力する。こうした触覚効果は、ユーザが曲がるべき方向をユーザに警告してもよい。一部の実施形態では、これは、不注意なユーザ、例えば、テキストを送信しているユーザ又は視覚障害を有するユーザにとって役立つ場合がある。
更に、図3Bに示される実施形態では、移動装置350は、障害物がユーザの経路にあるかどうかを決定するために領域センサからの信号を連続的に監視してもよい。障害物がユーザの経路に検出される場合、移動装置350は、障害物がユーザの経路にあることをユーザに警告するために、触覚アラート等のアラートを出力する。
更に、図3Bに示される実施形態では、(複数の)領域センサからの信号に基づいて、移動装置350は、ユーザの周囲領域のマップを決定してもよい。このマップは、領域内の1つ以上のオブジェクトとユーザとの間の距離及び角度を含んでもよい。例えば、図3Bに示される実施形態では、移動装置は、各壁354からのユーザの角度及び距離を表すマップを決定してもよい。他の実施形態では、移動装置350は、更なるオブジェクト(例えば、木、人々、動物、家具等)に対するユーザの角度及び距離を表すデータのマップを決定してもよい。ユーザが経路352に沿って移動し及び/又はオブジェクトが領域内で移動すると、移動装置はユーザの周囲の正確なデータを維持するためのこのマップを連続的に更新してもよい。
図3Bに示される実施形態では、移動装置350は、タッチスクリーンディスプレイ302の表面において摩擦及びテクスチャ等の表面ベースの触覚効果を出力するように構成されてもよい。一部の実施形態では、移動装置350は、マップに関係付けられる表面ベースの効果を出力するように構成されてもよい。例えば、一部の実施形態では、ユーザはタッチスクリーンディスプレイ302の表面と相互作用してもよく、移動装置350はユーザの領域内の様々なオブジェクト間のユーザの距離に関係付けられる触覚効果を出力してもよい。例えば、一実施形態では、触覚効果は、各方向におけるユーザの障害物からの距離に基づく様々な振幅の摩擦又はテクスチャを含んでもよい。例えば、このような実施形態では、オブジェクトがユーザの前方の近距離にある場合、移動装置350はタッチスクリーンディスプレイ302の前方に粗いテクスチャを出力してもよい。このような実施形態では、オブジェクトがユーザの右側に長距離にある場合、移動装置350はタッチスクリーンディスプレイ302の右側に細かいテクスチャを出力してもよい。
他の実施形態では、移動装置350は、他の触覚効果を出力してもよい(例えば、振動又は表面変形(例えば、効果は誘導を示すために装置の側部を縮小又は拡張させるように構成されてもよい))。更に他の実施形態では、タッチスクリーンディスプレイ302にではなく移動装置350の筐体に対して1つ以上の触覚効果が出力されてもよい。更に、一部の実施形態では、触覚効果は、タッチスクリーンディスプレイ302に示されるオブジェクトとは無関係であってもよい。
次に図4を参照すると、図4は、本開示の一実施形態による触覚誘導の実施形態を含む。図4に示される実施形態では、システム400は、視覚障害者により使用される触覚杖を含む。他の実施形態では、システムは、異なる形態、例えば、松葉杖、車椅子、スクーター、歩行器、又は何らかの他のフォームファクタを取ってもよい。一部の実施形態では、装置は、視界が低下した領域で作業しなければならない人々、例えば、消防士、警察官、又は兵士によって使用される装置を含んでもよい。従って、一部の実施形態では、装置は、手袋、ジャケット、ヘルメット、眼鏡、又は拡張現実眼鏡、靴、靴下、腕時計等の装着可能装置、又は何らかの他のタイプの装着可能装置を含んでもよい。
図4に示される実施形態では、触覚杖400は、触覚配列402及び2つの領域センサ404及び406を備える。触覚配列402は、1つ以上の触覚出力装置、例えば、圧電アクチュエータ、電気モータ、電磁アクチュエータ、音声コイル、形状記憶合金、電気活性ポリマ、ソレノイド、偏心回転質量モータ(ERM)、線形共振アクチュエータ(LRA)、又は表面ベースの効果を出力するように構成される触覚出力装置を含んでもよい。2つの領域センサ404及び406は、例えば、超音波センサ、赤外線センサ、レーザセンサ、又はカメラを含む。一部の実施形態では、触覚杖400は、1つの領域センサのみを含んでもよい。他の実施形態では、触覚杖400は、2つより多くの領域センサを含んでもよい。
図4に示されるように、触覚杖400は、本明細書に記載の動作を行うように構成されてもよい。例えば、領域センサ404及び406から受信した信号に基づいて、触覚杖に関係付けられるプロセッサは、ユーザの経路にある障害物を検出して、ユーザに障害物を警告するための触覚効果を出力するように構成されてもよい。一部の実施形態では、触覚杖400は、自身のマイクロプロセッサを備えてもよい。更に、一部の実施形態では、触覚杖400は、移動装置のプロセッサと通信するように構成されてもよい。このような実施形態では、移動装置は、触覚杖からセンサ信号を受信して、移動装置又は触覚杖400のいずれかにより出力される触覚効果を決定してもよい。例えば、一部の実施形態では、触覚杖400は、ユーザが移動装置を触覚杖に結合することを可能にするマウントを備えてもよい。このような実施形態では、領域センサ404及び406ではなく、プロセッサがその代わりに移動装置に関係付けられる領域センサからデータを受信してもよい。更に、一部の実施形態では、移動装置に関係付けられる領域センサ及び触覚杖400に関係付けられる領域センサの両方がオブジェクトを検出するために使用されてもよい。同様に、触覚配列402及び移動装置に関係付けられる触覚出力装置がユーザに触覚効果を出力するために利用されてもよい。
触覚杖は、触覚配列402を介して触覚効果を出力してもよい。こうした触覚効果は、ユーザに障害物を警告するための単純な振動を含んでもよい。代替的に、こうした触覚効果は、ユーザに障害物のタイプを警告するために強度を変化させるように構成されるより複雑な効果、例えば、開いたマンホールの蓋又は接近する車等の危険な障害物に対して強い効果、及び家具又は別の人物等のより危険の少ない障害物に対して弱い触覚効果を含んでもよい。
更に、図4に示される実施形態では、触覚杖400は、経路に沿ってユーザを誘導するように構成されてもよい。従って、例えば、触覚杖400は、ユーザに前進、後退、左又は右への移動をユーザに警告するための触覚効果を出力するように構成されてもよい。更に、ユーザが階段に遭遇する場合、触覚杖400は、ユーザが階段を昇る又は降りるべきであることを示すフィードバックを提供するように構成されてもよい。一部の実施形態では、こうした触覚効果は、触覚配列402の異なる場所に出力される効果、例えば、前進するようにユーザを誘導するために触覚配列402の前方における効果、及び後退するようにユーザを誘導するために触覚配列402の後方における効果を含んでもよい。一部の実施形態では、触覚杖400は、衛星測位システム機能を含んでおり、多数の相対的に離れた地点間の道順をユーザに提供することが可能であってもよい。
更に他の実施形態では、触覚誘導のためのシステム及び方法は、探索ツールとして使用されてもよい。例えば、ユーザは、例えば、暗い場所で又は別のオブジェクトの下で(例えば、ユーザのベッドの下で)ユーザが見ることができない領域にあるオブジェクトを見つけるために本明細書に開示のシステム及び方法を使用してもよい。このような実施形態では、触覚誘導のためのシステム及び方法は、オブジェクトが捜索領域内にあるかどうかをユーザが決定することを可能にする検出器として機能してもよい。例えば、ユーザは、ユーザの猫がベッドに下に居ることを決定するために本明細書に開示の実施形態を使用してもよい。このような実施形態では、ユーザは、ベッドの下で自分の電話を握ってもよい。領域センサは、領域内のオブジェクトを検出して、こうしたオブジェクトの1つが捜索中のオブジェクト(この場合、猫)である場合、移動装置のプロセッサは、オブジェクトが見つかったことをユーザに警告するための触覚効果を決定してもよい。このような実施形態は、失くした又は間違って置いたオブジェクト(例えば、鍵、リモートコントロール、ツール、ヘッドホン等)を見つけるために役立ち得る。
(触覚誘導のための例示の方法)
図5は、一実施形態による触覚誘導のための方法を実行するためのステップのフローチャートである。一部の実施形態では、図5のステップは、例えば、汎用コンピュータ、移動装置又はサーバにおけるプロセッサによって実行されるプログラムコードで実装されてもよい。一部の実施形態では、こうしたステップは一群のプロセッサによって実装されてもよい。一部の実施形態では、図5に示される1つ以上のステップは省略され又は異なる順番で行われてもよい。同様に、一部の実施形態では、図5に示されない追加のステップが実行されてもよい。以下のステップは図1に示されたコンピュータ装置100に関して記載された構成要素を参照して記載される。
方法500はステップ502で開始して、プロセッサ102が領域センサ115からセンサ信号を受信する。先に検討されたように、(複数の)領域センサ115は、ユーザの周囲の領域に関係付けられるオブジェクトを検出して、こうしたオブジェクトに関係付けられる信号を(複数の)プロセッサ102に送信するように構成される1つ以上の装置を備える。例えば、(複数の)領域センサ115は、超音波センサ、赤外線センサ、レーザセンサ、又はカメラの1つ以上を含んでもよい。一実施形態では、(複数の)領域センサ115はMB1320 XL−MaxSonar−AE2を含んでもよいが、他の実施形態では、多くの他のタイプ及びモデルの(複数の)領域センサも又は代替的に使用されてもよい。一部の実施形態では、(複数の)領域センサ115により検出されるオブジェクトは、ユーザの周囲の領域で見られる任意のオブジェクト、例えば、屋内オブジェクト(例えば、家具、支柱、壁、ドア、又は屋内領域に関係付けられる他のオブジェクト)、屋外オブジェクト(例えば、木、岩、穴、根、切り株、縁石、車、自転車、又は屋外領域に関係付けられる他のオブジェクト)を含んでもよい。更に、オブジェクトは、動いているオブジェクト(例えば、動物、車、人等)又は動いていないオブジェクト(例えば、木、壁、水溜り等)を含んでもよい。従って、一実施形態では、領域センサ115は、壁の形態のオブジェクトを検出して、壁に関係付けられるプロセッサ102に信号を送信してもよい。
次に、プロセッサ102は領域情報を決定する(504)。一部の実施形態では、プロセッサ102は、領域センサ115から受信した信号に部分的に基づいて領域情報を決定する。領域情報は、例えば、ユーザから所定距離内のオブジェクトに関する情報を含んでもよい。こうしたオブジェクトは、先に検討されたオブジェクト、例えば、屋内又は屋外オブジェクトを含んでもよい。これらのうちの一部は障害物を含んでもよい。一部の実施形態では、プロセッサは、ユーザが進んでいる又は進むであろう経路も決定する。一部の実施形態では、この経路は、衛星測位システムから受信した情報に部分的に基づいて決定される。
一部の実施形態では、領域センサ115は、カメラを含んでもよい。このような実施形態では、プロセッサ102は、カメラから受信した画像を平滑化することによりカメラ信号から領域情報を決定してもよい。プロセッサ102は、信号をRGBからHSV色空間に変換してもよい。次に、プロセッサ102は、閾値画像を作成してもよい。HSV画像内のピクセルが閾値の間にある場合、プロセッサはピクセルを閾値画像にコピーしてもよい。次に、プロセッサ102は、閾値画像を3Dマトリクスに変換してもよい。次に、3Dマトリクス内の非ゼロ要素の数が検出値よりも大きい場合、プロセッサ102はオブジェクトが検出されたことを戻してもよい。同様に、一部の実施形態では、領域センサは、オブジェクトに関係付けられるキー記述子を検出するように構成されてもよい。例えば、領域センサ115は赤外線カメラを含んでもよい。一部の実施形態では、赤外線カメラは、1つ以上のオブジェクトの熱的特性を検出してもよい。
次に、プロセッサ102はマップを決定する(506)。一部の実施形態では、マップは領域情報に関する詳細を含んでもよい。この詳細は、ユーザの領域内の全てのオブジェクトを含んでもよい。一部の実施形態では、プロセッサ102はこのマップをローカルに保存してもよい。代替的に、一部の実施形態では、プロセッサは、更なる処理及び記憶のためにマップを遠隔データストアに送信してもよい。
一部の実施形態では、プロセッサ102は、データベース、例えば、ローカルに保存されたデータベース又はネットワーク接続を介してアクセスされる遠隔データベースからマップデータを受信することによりマップを決定してもよい。例えば、一部の実施形態では、プロセッサは、インターネットを介してアクセス可能な遠隔データベースからデータを受信することによりマップを決定してもよい。一部の実施形態では、このようなデータベースは、「クラウド」データベースを含んでもよく、これは1つ以上の公的又は民間グループによって継続的に更新されてもよい。更に、このようなデータベースは、複数のモバイルアプリケーション及びウェブページによって使用又はアクセスされるマップデータのデータベースを含んでもよい。一部の実施形態では、プロセッサは、データベースに記憶された情報とユーザの周囲の領域に関する情報(例えば、領域内のオブジェクトに関する情報)を比較することによりマップを決定してもよい。一部の実施形態では、プロセッサ102は、データベースにアクセスすることによりユーザの現在地を決定してもよい。
次に、プロセッサ102はマップを単純化する(508)。一部の実施形態では、マップの単純化は、領域情報をユーザの領域内の各オブジェクトへのベクトルの集合に単純化することを含んでもよい。この一連のベクトルは、ユーザがオブジェクトに遭遇する前に各方向にどのくらいまで移動し得るかを決定するためにプロセッサ102が単純化されたデータにアクセスすることを可能にしてもよい。
次に、は、1つ以上の障害物510を示す。障害物は、ユーザの経路にある先に検討された任意のオブジェクトを含んでもよい。従って、例えば、障害物は、ユーザが同じ方向に移動し続けた場合にユーザの前進を妨げるかもしれない1つ以上のオブジェクトを含んでもよい。
一部の実施形態では、プロセッサ102は、オブジェクト及びマップに関する情報を連続的に更新してもよい。例えば、一部の実施形態では、ユーザは動作中であってもよい。このような実施形態では、プロセッサは、(複数の)領域センサ115を監視し続けて、オブジェクトに対するユーザの場所に関する実質的に最新の情報を維持してもよい。同様に、一部の実施形態では、オブジェクトは、車、バス、列車、動物、又は他の人々等の移動するオブジェクトを含んでもよい。このような実施形態では、プロセッサ102は、(複数の)領域センサ115を監視し続けて、オブジェクトに対するユーザの場所に関する実質的に最新の情報を維持してもよい。
次に、プロセッサは触覚効果を決定する(512)。一部の実施形態では、プロセッサ102は、ユーザ選択に基づいて触覚効果を決定してもよい。例えば、ユーザは、オブジェクトに遭遇すると出力される利用可能な触覚効果を選択してもよい。例えば、コンピュータ装置101のデータストアは、ユーザが選択し得る多数の触覚効果に関係付けられるデータを含んでもよい。代替的に、一部の実施形態では、プロセッサ102は、触覚効果を自動的に選択してもよい。例えば、一部の実施形態では、プロセッサ102は、領域センサ115によって検出されたオブジェクトに関係付けられる触覚効果を選択してもよい。例えば、プロセッサは、より危険なオブジェクト、例えば、高速移動するオブジェクト(例えば、車、バス、列車)に対してより強い触覚効果、及びより離れた又は危険の少ないオブジェクト、例えば、家具又は人々に対してあまり強くない触覚効果を決定してもよい。
一部の実施形態では、プロセッサ102は、検出されたオブジェクトに関係付けられる1つ以上のキー記述子に基づいてアラートを出力すべきかどうかを決定するように構成されてもよい。このような実施形態では、キー記述子は、例えば、オブジェクトのサイズ、移動の方向、移動の速さ、ユーザからの距離、相対的危険性、又はオブジェクトに関係付けられる何らかの他のキー記述子を含んでもよい。例えば、検出されたオブジェクトが相対的に遠い(例えば、閾値距離以上である)場合、例示の装置はアラートを出力しなくてもよい。同様に、例示の装置は、オブジェクトに関する追加の情報、例えば、オブジェクトのサイズ、その相対的危険性、その移動の速さ、その移動の方向を決定して、この情報に基づいて、ユーザにアラートを出力するかどうかを決定してもよい。
更に、一部の実施形態では、オブジェクトに関係付けられる1つ以上のキー記述子に基づいて、プロセッサ102は、いかなる形態のアラートも出力しないことを決定してもよい(例えば、聴覚アラート、視覚アラート又は触覚効果を出力しない)。例えば、センサ信号に基づいて、プロセッサ102は、オブジェクトの距離、オブジェクトが移動している速さ、移動の方向、オブジェクトのサイズ、又はオブジェクトに関係付けられる何らかの他の特徴等のオブジェクトに関係付けられるキー記述子を決定し、この情報に基づいて、いかなる形態のアラートも出力しないことを決定してもよい。例えば、プロセッサは、ユーザから離れて行くバスはアラートを必要としないが、ユーザに向かって来るバスはアラートを必要とすることを決定してもよい。同様に、一部の実施形態では、プロセッサ102は、オブジェクトのサイズに基づいてアラートを出力しないことを決定してもよい。例えば、プロセッサ102は、ユーザの経路にあるペーパークリップ等の非常に小さなオブジェクトについてはアラートを出力しないことを決定してもよい。更に、プロセッサ102は、オブジェクトのタイプに基づいてアラートを出力しないことを決定してもよい。例えば、プロセッサ102は、大人しい小型犬に対してアラートを出力しないが、攻撃的な大型犬に対してアラートを出力することを決定してもよい。更なる実施形態では、プロセッサ102は、オブジェクトがユーザから相対的に離れている、例えば、閾値距離よりも大きいと検出されるのでユーザに警告しないことを決定してもよい。このような実施形態では、オブジェクトが閾値距離よりも離れて位置している場合、プロセッサ102はアラートを出力しないことを決定してもよい。
次に、プロセッサ102は、触覚効果を出力する触覚出力装置118に触覚信号を送信する(514)。上記のように、触覚効果は、テクスチャ(例えば、砂質、凹凸又は円滑)、振動、知覚される摩擦係数の変化、温度の変化、ストローク感、電気触知効果、又は変形(例えば、コンピュータ装置101に関係付けられる表面の変形)を含んでもよい。
触覚誘導には多くの利点がある。例えば、触覚誘導は、ユーザが危険な又は厄介な衝突の恐怖無しでモバイルアプリケーションに完全に専念することを可能にし得る。これは、ユーザの安全性を高めると共に、ユーザの満足度も高め得る。更に、本開示の実施形態は、視覚障害を有する人々に更なる可動性を提供してもよい。更に、本開示の実施形態は、視覚的に制限された領域で作業しなければならない場合が多い人々、例えば、兵士、警察官、消防士等によって使用されるツールを提供してもよい。こうした特徴はいずれも、広範なユーザに移動装置及びモバイルアプリケーションの付加的使用を提供する。
(概論)
上記の方法、システム及び装置は例示である。様々な構成によって、適宜、様々な手続き又は構成要素が省略、置換、又は追加されてもよい。例えば、代替的な構成では、方法は記載されたものとは異なる順序で実行されてもよく、及び/又はステージが追加、省略及び/又は結合されてもよい。また、所定の構成に関して記載された機能は、様々な他の構成に結合されてもよい。構成の異なる態様及び要素が、同様に結合されてもよい。また、技術は進歩するものであり、そのため要素の多くは例示であり、本開示又は請求項の範囲を限定しない。
例示的な構成(実装を含む)の十分な理解を与えるために説明の中で特定の詳細が与えられている。しかしながら、こうした構成は特定の詳細無しで実施されてもよい。例えば、周知の回路、工程、アルゴリズム、構造及び技術が、構成を不明確にするのを避けるために不要な詳細無しで示されている。この説明は、例示的な構成のみを提供するものであり、請求項の範囲、応用性又は構成を限定しない。むしろ、構成の上記説明は、記載された技術を実装するための実施可能な説明を当業者に提供するであろう。本開示の精神又は範囲から逸れることなく、要素の機能及び配置の様々な変更が行われてもよい。
また、構成は、フロー図又はブロック図として描かれる処理として記載されてもよい。各々が連続した工程として操作を説明している場合があるが、こうした操作の多くは並列的又は同時に行われ得る。更に、操作の順序は並び替えられてもよい。工程は、図面に含まれない追加のステップを有してもよい。更に、方法の例示は、ハードウェア、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、ハードウェア記述言語、又はこれらの任意の組み合わせによって実装されてもよい。ソフトウェア、ファームウェア、ミドルウェア又はマイクロコードで実装される場合、必要なタスクを実行するためのプログラムコード又はコードセグメントは、記憶媒体等の一時的でないコンピュータ可読媒体に記憶されてもよい。プロセッサは、記載されたタスクを実行してもよい。
複数の例示的な構成が記載されているが、本開示の精神から逸脱することなく、様々な修正、代替構造及び均等物が使用されてもよい。例えば、上記の要素は、より大きなシステムの構成要素であってもよく、他の規則が本発明のアプリケーションに優先し又はそれを修正してもよい。また、上記の要素が検討される前、間、又は後で多くのステップが行われてもよい。従って、先の記載は請求項の範囲を限定しない。
本明細書における「適合される」又は「構成される」の使用は、追加のタスク又はステップを実行するように適合又は構成される装置を排除しない開放的且つ包括的な言語を意図している。更に、「基づいて」の使用は開放的且つ包括的であることが意図されており、即ち、1つ以上の記載された条件又は値に「基づいて」行われる処理、ステップ、計算、又は他の動作が、実際には、記載されたものを超える追加の条件又は値に基づいてもよい。本明細書に含まれる表題、リスト及び番号は、単に説明を容易にするためのものであって、限定することを意図していない。
本主題の態様に従う実施形態は、デジタル電子回路、コンピュータハードウェア、ファームウェア、ソフトウェア、又はこれらの組み合わせで実装され得る。一実施形態では、コンピュータは、1つ又は複数のプロセッサを備えてもよい。プロセッサは、プロセッサに結合されるRAM(random access memory)等のコンピュータ可読媒体を備え、又はそれへのアクセスを有する。プロセッサは、センササンプリングルーチン、選択ルーチン、及び上述の方法を実行する他のルーチン等、メモリに記憶されたコンピュータ実行可能プログラム命令を実行する。
このようなプロセッサは、マイクロプロセッサ、DSP(digital signal processor)、ASIC(application−specific integrated circuit)、FPGA(field programmable gate array)、及び状態機械を含む。このようなプロセッサは、PLC、PIC(programmable interrupt controller)、PLD(programmable logic device)、PROM(programmable read−only memory)、EPROM又はEEPROM(electronically programmable read−only memory)、又は他の類似の装置等のプログラム可能電子装置を更に備えてもよい。
このようなプロセッサは、媒体、例えば、プロセッサによって実行されると、プロセッサによって遂行又は支援される本明細書に記載のステップをプロセッサに実行させることができる命令を記憶し得る有形のコンピュータ可読媒体を備え、又はこれと通信してもよい。コンピュータ可読媒体の実施形態は、限定されないが、プロセッサ、例えばウェブサーバのプロセッサにコンピュータ可読命令を提供することができる全ての電子、光学、磁気、又は他の記憶装置を備えてもよい。媒体の他の例は、限定されないが、フロッピーディスク、CD−ROM、磁気ディスク、メモリチップ、ROM、RAM、ASIC、構成プロセッサ、全ての光学媒体、全ての磁気テープ若しくは他の磁気媒体、又はコンピュータプロセッサが読み取り可能な任意の他の媒体を含む。また、様々な他の装置は、ルータ、プライベート若しくはパブリックネットワーク、又は他の伝送装置等のコンピュータ可読媒体を含んでもよい。記載されたプロセッサ及び処理は、1つ以上の構造内にあってもよく、1つ以上の構造を通じて分散されてもよい。プロセッサは、本明細書に記載の1つ以上の方法(又は方法の一部)を実行するためのコードを備えてもよい。
本主題はその特定の実施形態に関して詳細に記載されているが、上記のことを理解すると、このような実施形態の変形、変化、及び均等物を当業者であれば容易に生み出し得ることが理解されるであろう。従って、本開示は、限定ではなく例示を目的として提示されており、当業者には容易に明らかとなる本主題への修正、変更及び/又は追加を含むことを排除しないことが理解されるべきである。

Claims (22)

  1. 領域に関係付けられる1つ以上のオブジェクトを決定するように構成されるセンサからセンサ信号を受信するステップと、
    前記センサ信号に部分的に基づいて領域情報を決定するステップと、
    前記領域情報に部分的に基づいて触覚効果を決定するステップと、
    前記触覚効果を出力するように構成される触覚出力装置に前記触覚効果に関係付けられる触覚信号を送信するステップと
    を含む、触覚誘導のための方法。
  2. 前記センサ信号に部分的に基づいてマップを決定するステップと、
    遠隔データベースに前記マップに関係付けられるデータを送信するステップと
    を更に含む、請求項1に記載の方法。
  3. 前記マップを決定するステップは、データベースから前記マップに関するデータを受信することを含む、請求項2に記載の方法。
  4. 前記領域内の直線距離を含むように前記マップを単純化するステップと、
    前記領域における1つ以上の障害物を識別するステップと
    を更に含む、請求項2に記載の方法。
  5. 前記触覚効果は、1つ以上の障害物に関係付けられる、請求項1に記載の方法。
  6. 前記センサは、超音波センサ、赤外線センサ、レーザセンサ、又はカメラの1つ以上を含む、請求項1に記載の方法。
  7. 前記触覚出力装置は、圧電アクチュエータ、電気モータ、電磁アクチュエータ、音声コイル、形状記憶合金、電気活性ポリマ、ソレノイド、偏心回転質量モータ(ERM)又は線形共振アクチュエータ(LRA)の1つ以上を含む、請求項1に記載の方法。
  8. 前記センサ及び触覚出力装置は共に、装着可能装置又は把持可能装置の1つに関係付けられる、請求項1に記載の方法。
  9. 前記把持可能装置は、移動装置又は杖の1つを含む、請求項8に記載の方法。
  10. 前記装着可能装置は、ヘルメット、手袋、眼鏡、又は拡張現実眼鏡の1つを含む、請求項8に記載の方法。
  11. プロセッサによって実行されると、前記プロセッサに
    領域に関係付けられる1つ以上のオブジェクトを決定するように構成されるセンサからセンサ信号を受信すること、
    前記センサ信号に部分的に基づいて領域情報を決定すること、
    前記領域情報に部分的に基づいて触覚効果を決定すること、及び
    前記触覚効果を出力するように構成される触覚出力装置に前記触覚効果に関係付けられる触覚信号を送信すること
    を行わせるように構成されるプログラムコードを含む、一時的でないコンピュータ可読媒体。
  12. 前記プロセッサによって実行されると、前記プロセッサに
    前記センサ信号に部分的に基づいてマップを決定すること、及び
    遠隔データベースに前記マップに関係付けられるデータを送信すること
    を行わせるように構成されるプログラムコードを更に含む、請求項11に記載の一時的でないコンピュータ可読媒体。
  13. 前記マップを決定することは、データベースから前記マップに関するデータを受信することを含む、請求項12に記載の一時的でないコンピュータ可読媒体。
  14. 前記プロセッサによって実行されると、前記プロセッサに
    前記領域内の直線距離を含むように前記マップを単純化すること、
    前記領域における1つ以上の障害物を識別すること
    を行わせるように構成されるプログラムコードを更に含む、請求項12に記載の一時的でないコンピュータ可読媒体。
  15. 前記触覚効果は、1つ以上の障害物に関係付けられる、請求項11に記載の一時的でないコンピュータ可読媒体。
  16. 前記センサは、超音波センサ、赤外線センサ、レーザセンサ、又はカメラの1つ以上を含む、請求項11に記載の一時的でないコンピュータ可読媒体。
  17. 前記触覚出力装置は、圧電アクチュエータ、電気モータ、電磁アクチュエータ、音声コイル、形状記憶合金、電気活性ポリマ、ソレノイド、偏心回転質量モータ (ERM)又は線形共振アクチュエータ(LRA)の1つ以上を含む、請求項11に記載の一時的でないコンピュータ可読媒体。
  18. 前記一時的でないコンピュータ可読媒体、センサ及び触覚出力装置は共に、装着可能装置又は把持可能装置の1つに関係付けられる、請求項11に記載の一時的でないコンピュータ可読媒体。
  19. 前記把持可能装置は、移動装置又は杖の1つを含む、請求項18に記載の一時的でないコンピュータ可読媒体。
  20. 前記装着可能装置は、ヘルメット、手袋、眼鏡、又は拡張現実眼鏡の1つを含む、請求項18に記載の一時的でないコンピュータ可読媒体。
  21. 領域情報を決定して、前記領域情報に関係付けられるセンサ信号を送信するように構成されるセンサと、
    前記センサと通信するプロセッサであって、
    前記センサ信号に部分的に基づいて領域情報を決定し、
    前記領域情報に部分的に基づいて触覚効果を決定し、且つ
    前記触覚効果に関係付けられる触覚信号を送信するように構成されるプロセッサと、
    前記プロセッサと通信する触覚出力装置であって、前記触覚信号を受信して、前記触覚効果を出力するように構成される触覚出力装置と
    を備える、触覚誘導のためのシステム。
  22. 前記システムの全ての構成要素が杖に関係付けられる、請求項21に記載のシステム。
JP2016088755A 2015-04-28 2016-04-27 触覚誘導のためのシステム及び方法 Withdrawn JP2016212858A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/697,680 2015-04-28
US14/697,680 US20160321880A1 (en) 2015-04-28 2015-04-28 Systems And Methods For Tactile Guidance

Publications (1)

Publication Number Publication Date
JP2016212858A true JP2016212858A (ja) 2016-12-15

Family

ID=55860737

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016088755A Withdrawn JP2016212858A (ja) 2015-04-28 2016-04-27 触覚誘導のためのシステム及び方法

Country Status (5)

Country Link
US (1) US20160321880A1 (ja)
EP (1) EP3088996A1 (ja)
JP (1) JP2016212858A (ja)
KR (1) KR20160128233A (ja)
CN (1) CN106095071A (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10758821B2 (en) 2017-11-10 2020-09-01 Bandai Namco Entertainment Inc. Operation input system, operation input device, and game system for adjusting force feedback control

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9842388B2 (en) * 2015-07-02 2017-12-12 Honeywell International Inc. Systems and methods for location aware augmented vision aircraft monitoring and inspection
JP6875010B2 (ja) * 2016-04-07 2021-05-19 国立研究開発法人科学技術振興機構 触覚情報変換装置、触覚情報変換方法、および、触覚情報変換プログラム
US11269480B2 (en) * 2016-08-23 2022-03-08 Reavire, Inc. Controlling objects using virtual rays
US20180096632A1 (en) * 2016-09-30 2018-04-05 Omar U. Florez Technology to provide visual context to the visually impaired
EP3378461B1 (en) * 2017-03-22 2019-10-23 Vestel Elektronik Sanayi ve Ticaret A.S. A smart guide device for visually impaired person
US10969870B2 (en) * 2017-07-10 2021-04-06 Sharp Kabushiki Kaisha Input device
DE102017217876B4 (de) * 2017-10-09 2019-05-16 Zf Friedrichshafen Ag Vorrichtung und Verfahren zur Verbesserung des Raumgefühls eines Nutzers
US11740697B1 (en) 2018-06-19 2023-08-29 Meta Platforms Technologies, Llc Vibrotactile devices, systems, and related methods
US20200073210A1 (en) * 2018-08-30 2020-03-05 Daniel Lai Chow Leung Method to help navigate users of mobile communication devices by re-directed camera views
CN109009906B (zh) * 2018-08-31 2021-02-12 江苏大学 一种导盲杆及其方法
US11139755B2 (en) 2020-01-31 2021-10-05 Toyota Motor Engineering & Manufacturing North America, Inc. Variable stiffening device comprising electrode stacks in a flexible envelope
US11370496B2 (en) 2020-01-31 2022-06-28 Toyota Motor Engineering & Manufacturing North America, Inc. Programmable texture surfaces having artificial muscles
US11453347B2 (en) 2020-03-12 2022-09-27 Toyota Motor Engineering & Manufacturing North America, Inc. Suction devices having artificial muscles
US11611293B2 (en) 2020-03-13 2023-03-21 Toyota Motor Engineering & Manufacturing North America, Inc. Artificial muscles having a reciprocating electrode stack
US11461587B2 (en) 2021-01-13 2022-10-04 International Business Machines Corporation Intelligent visual recognition translation
WO2023019376A1 (zh) * 2021-08-15 2023-02-23 曹庆恒 一种触觉感知系统及其使用方法
TWM644361U (zh) * 2022-02-11 2023-08-01 香港商領航智能有限公司 觸覺引導系統

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003079685A (ja) * 2001-09-17 2003-03-18 Seiko Epson Corp 視覚障害者歩行用補助具
DE102005009110A1 (de) * 2005-01-13 2006-07-27 Siemens Ag Vorrichtung zur Vermittlung von Umgebungsinformationen an einen sehbehinderten Menschen
US20090028003A1 (en) * 2007-07-24 2009-01-29 International Business Machines Corporation Apparatus and method for sensing of three-dimensional environmental information
US9201143B2 (en) * 2009-08-29 2015-12-01 Echo-Sense Inc. Assisted guidance navigation
EP2545494A1 (en) * 2010-03-12 2013-01-16 Shafa Wala Position capture input apparatus, system, and method therefor
EP2629737B1 (en) * 2010-09-24 2016-07-13 Heptagon Micro Optics Pte. Ltd. White cane with integrated electronic travel aid using 3d tof sensor
US20120119920A1 (en) * 2010-11-12 2012-05-17 Extra Sensory Technology, L.C. Portable sensory devices
US20130113601A1 (en) * 2011-03-14 2013-05-09 The Quality of Life Plus (QL+) Program Obstacle Detection for Visually Impaired Persons
US20130131985A1 (en) * 2011-04-11 2013-05-23 James D. Weiland Wearable electronic image acquisition and enhancement system and method for image acquisition and visual enhancement
US10571715B2 (en) * 2011-11-04 2020-02-25 Massachusetts Eye And Ear Infirmary Adaptive visual assistive device
US9044374B1 (en) * 2013-07-05 2015-06-02 Leon E. Stimpson Assisted walking device
US9558637B2 (en) * 2013-09-10 2017-01-31 Immersion Corporation Systems and methods for performing haptic conversion
US9183708B2 (en) * 2014-03-05 2015-11-10 Umm Al-Qura University Multisensor system for the blind
US10121335B2 (en) * 2014-07-18 2018-11-06 Google Technology Holdings LLC Wearable haptic device for the visually impaired

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10758821B2 (en) 2017-11-10 2020-09-01 Bandai Namco Entertainment Inc. Operation input system, operation input device, and game system for adjusting force feedback control

Also Published As

Publication number Publication date
EP3088996A1 (en) 2016-11-02
KR20160128233A (ko) 2016-11-07
US20160321880A1 (en) 2016-11-03
CN106095071A (zh) 2016-11-09

Similar Documents

Publication Publication Date Title
JP2016212858A (ja) 触覚誘導のためのシステム及び方法
Jafri et al. Visual and infrared sensor data-based obstacle detection for the visually impaired using the Google project tango tablet development kit and the unity engine
Khan et al. An insight into smartphone-based assistive solutions for visually impaired and blind people: issues, challenges and opportunities
JP6906580B2 (ja) ビューポートベースの拡張現実触覚効果のシステム、方法及び非一時的コンピュータ可読媒体
JP6541945B2 (ja) 触覚効果の知覚正規化のためのシステム及び方法
Poggi et al. A wearable mobility aid for the visually impaired based on embedded 3D vision and deep learning
Fernandes et al. A review of assistive spatial orientation and navigation technologies for the visually impaired
US9316502B2 (en) Intelligent mobility aid device and method of navigating and providing assistance to a user thereof
Xiao et al. An assistive navigation framework for the visually impaired
Csapó et al. A survey of assistive technologies and applications for blind users on mobile platforms: a review and foundation for research
KR102331048B1 (ko) 오디오 탐색 지원
JP2022003535A (ja) 位置ベースの触覚効果のためのシステム及び方法
US9488833B2 (en) Intelligent glasses for the visually impaired
US11272283B2 (en) Rendering haptics on headphones with non-audio data
WO2018156549A1 (en) Personal navigation system
Chanana et al. Assistive technology solutions for aiding travel of pedestrians with visual impairment
JP2018508851A (ja) モニタリング
Schwarze et al. A camera-based mobility aid for visually impaired people
Suresh et al. Intelligent smart glass for visually impaired using deep learning machine vision techniques and robot operating system (ROS)
CN107209205B (zh) 重心移动力设备
Bala et al. Design, development and performance analysis of cognitive assisting aid with multi sensor fused navigation for visually impaired people
Sun et al. “Watch your step”: precise obstacle detection and navigation for Mobile users through their Mobile service
Bouteraa Smart real time wearable navigation support system for BVIP
Argüello Prada et al. A belt-like assistive device for visually impaired people: Toward a more collaborative approach
JP2017224290A (ja) 日和見ディスプレイのための触覚フィードバック

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190327

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20200127