JP2022075801A - 触覚による操縦誘導システム - Google Patents

触覚による操縦誘導システム Download PDF

Info

Publication number
JP2022075801A
JP2022075801A JP2022038042A JP2022038042A JP2022075801A JP 2022075801 A JP2022075801 A JP 2022075801A JP 2022038042 A JP2022038042 A JP 2022038042A JP 2022038042 A JP2022038042 A JP 2022038042A JP 2022075801 A JP2022075801 A JP 2022075801A
Authority
JP
Japan
Prior art keywords
tactile
user
guidance application
vehicle
operator
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2022038042A
Other languages
English (en)
Inventor
ボーランガー アダム
Boulanger Adam
ヴァーベック ジョセフ
Verbeke Joseph
マルティ ステファン
Marti Stefan
ディ センソ ダヴィデ
Di Censo Davide
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harman International Industries Inc
Original Assignee
Harman International Industries Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harman International Industries Inc filed Critical Harman International Industries Inc
Publication of JP2022075801A publication Critical patent/JP2022075801A/ja
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0414Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using force sensing means to determine a position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/30Arrangements for executing machine instructions, e.g. instruction decode
    • G06F9/30003Arrangements for executing specific machine instructions
    • G06F9/3004Arrangements for executing specific machine instructions to perform operations on memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/46Special adaptations for use as contact microphones, e.g. on musical instrument, on stethoscope
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2555/00Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
    • B60W2555/20Ambient conditions, e.g. wind or rain
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/014Force feedback applied to GUI
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/13Hearing devices using bone conduction transducers

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Software Systems (AREA)
  • Transportation (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • Details Of Audible-Bandwidth Transducers (AREA)
  • Navigation (AREA)
  • Manipulator (AREA)

Abstract

【課題】好適な触覚による操縦誘導システムを提供すること。【解決手段】触覚出力を介して乗物の態様を調整するようにユーザーを導くためのシステム。システムは、乗物装置の付近に配置され、制御信号に応答して触覚出力を生成するように構成された1つ以上の触覚出力装置を含む。システムは、1つ以上の触覚出力装置に結合されたプロセッサを更に含む。プロセッサは、乗物装置に関連したパラメータを調整すべきであると判定し、当該判定に応答して、1つ以上の触覚出力装置に制御信号を送信するように構成されている。【選択図】なし

Description

関連出願の相互参照
本出願は、2016年7月22日に出願された米国仮特許出願第62/365,960号の利点を請求するものであり、参照することによって本願に組み込まれるものとする。
実施形態の分野
各種実施形態は、一般に、マンマシンインタフェースに関し、より具体的には、触覚による操縦誘導システムに関する。
関連技術の説明
自動車、モーターバイク、ボート及び飛行機などの最近の乗物は、乗物サブシステムの性能を監視し、最適化するために制御ユニットへの依存を高めている。例えば、制御ユニットは、特定のサブシステムが最適に動作していないと判定とすることができ、次いで、サブシステムの動作を改善するために調節可能な1つ以上のパラメータを決定することができる。一方、いくつかのパラメータは、操縦者によって直接調節することができる。例えば、操縦者は、乗物の駆動シャフトを分離し、次いで変速比を調節するために、変速機クラッチ及びギアシフトなどの1つ以上の乗物装置を操作してもよい。
従来、最適ではない方法で特定の乗物サブシステムを操縦者が操作しているとき、制御ユニットは、視覚及び/または聴覚的通知を作動させて、サブシステムに関連した1つ以上のパラメータを調節すべきであることを操縦者に指示してもよい。例えば、最適ではないギアに乗物の変速機があるとき、上向きの矢印を車のダッシュボードディスプレイ上に表示させて操縦者がより高いギアにシフトすべきであることを指示してもよく、または、下向きの矢印を表示させて操縦者がより低いギアにシフトすべきであることを指示してもよい。加えて、従来のシステムは、操縦者がギアをシフトすべきであることを指示するために警告音を生成してもよい。
これらの種類の従来のアプローチは、視覚及び/または聴覚的通知(複数可)を解釈することに自分の注意を向けることを操縦者に要求し得る。例えば、視覚及び/または聴覚的通知は、所与の事態でどの行動(複数可)をとるべきかを操縦者に明らかに指示しない場合がある。その結果、操縦者には、視覚及び聴覚的通知を解釈するために追加の認識リソースを消費することが要求され得る。
前述の事項が示すように、操縦誘導をユーザーにより効果的に提供するための技術が有用であると考えられる。
本開示の実施形態は、触覚出力を介して乗物の態様を調整するようにユーザーを導くための方法について記載する。方法は、乗物装置に関連したパラメータを調整すべきであると判定することを含む。方法は、判定に応答して、乗物装置の付近にある1つ以上の触覚出力装置に1つ以上の制御信号を送信することを更に含み、1つ以上の触覚出力装置は、1つ以上の制御信号に基づいて触覚出力を生成する。
更なる実施形態は、特に、上記の技術を実装するように構成されたシステム及び非一時的コンピュータ可読記憶媒体を提供する。
本明細書に記載された技術の少なくとも1つの利点は、ユーザーが視覚及び/または聴覚的通知に自分の注意を払うことを必要とせずに、パラメータを調整すべきであることをユーザーに通知することができる点である。従って、ユーザーは、視覚及び/または聴覚的通知を分析するためにユーザーが追加の認識リソースを消費せずに、調整すべきであるパラメータ(複数可)を決定することが可能である。更に、触覚感覚を、ユーザーの視覚及び聴覚的知覚に負担をかけずに様々な種類の情報をユーザーに伝達するための代替手段として実装することができる。その結果、本明細書に記載された技術は、様々な種類の情報がユーザーに提供されるときにユーザーに対して与えられる認識負荷を低減することができる。
本明細書は、例えば、以下の項目も提供する。
(項目1)
触覚出力を介して乗物の態様を調整するようにユーザーを導くためのシステムであって、制御信号に応答して触覚出力を生成するように構成された1つ以上の触覚出力装置と、
前記1つ以上の触覚出力装置に結合されたプロセッサであって、
乗物装置に関連したパラメータを調整すべきであると判定し、
前記判定に応答して、前記制御信号を前記1つ以上の触覚出力装置に送信するように構成された前記プロセッサと
を含む、前記システム。
(項目2)
前記触覚出力は、前記乗物装置を動かすべき方向及び前記乗物装置を動かすべき距離のうちの少なくとも1つを指示する、項目1に記載のシステム。
(項目3)
前記乗物装置に関連した前記パラメータを調整すべきであると判定することは、乗物制御ユニットから第2の制御信号を受信することを含む、項目1に記載のシステム。
(項目4)
前記第2の制御信号は、前記パラメータの目標値を含む、項目3に記載のシステム。
(項目5)
前記プロセッサは、
前記パラメータの現在値及び前記パラメータの前記目標値に基づき、前記1つ以上の触覚出力装置によって生成される前記触覚出力の方向及び場所のうちの少なくとも一方を決定し、
前記方向及び前記場所のうちの前記少なくとも1つに基づいて前記制御信号を生成するように更に構成されている、項目4に記載のシステム。
(項目6)
前記プロセッサは、前記パラメータの現在値及び前記パラメータの前記目標値に基づき、前記1つ以上の触覚出力装置を複数の触覚出力装置から選択するように更に構成されている、項目4に記載のシステム。
(項目7)
前記プロセッサに結合され、センサデータを取得するように構成された1つ以上のセンサを更に含み、前記プロセッサは、前記センサデータを分析してユーザーの場所を決定するように更に構成されている、項目1に記載のシステム。
(項目8)
前記プロセッサは、前記ユーザーの前記場所に基づき、前記1つ以上の触覚出力装置によって生成される前記触覚出力の方向及び場所のうちの少なくとも一方を決定するように更に構成されている、項目7に記載のシステム。
(項目9)
前記プロセッサは、前記ユーザーの前記場所に基づき、前記1つ以上の触覚出力装置を複数の触覚出力装置から選択するように更に構成されている、項目7に記載のシステム。
(項目10)
前記1つ以上の触覚出力装置は、超音波トランスデューサ及び空気出力装置のうちの少なくとも一方を含む、項目1に記載のシステム。
(項目11)
前記触覚出力は畝を含み、前記1つ以上の触覚出力装置は、前記乗物装置を動かすべき方向を指示するために前記畝の場所を時間の関数として変えるように構成されている、項目1に記載のシステム。
(項目12)
前記触覚出力を生成することは、前記1つ以上の触覚出力装置に含まれる第1の触覚出力装置を介して第1の触覚出力を生成することと、前記1つ以上の触覚出力装置に含まれる第2の触覚出力装置を介して第2の触覚出力を生成することとを含み、前記第1の触覚出力は、前記乗物装置の付近の前記第2の触覚出力と強め合うように干渉する、項目1に記載のシステム。
(項目13)
前記乗物装置は、ギアシフト装置、ステアリング装置、アクセル装置、ブレーキ装置及びクラッチ装置のうちの少なくとも1つを含む、項目1に記載のシステム。
(項目14)
触覚出力を介して乗物の態様を調整するようにユーザーを導くための方法であって、
乗物装置に関連したパラメータを調整すべきであると判定することと、
前記判定に応答して、前記乗物装置の付近にある1つ以上の触覚出力装置に1つ以上の制御信号を送信することであって、前記1つ以上の触覚出力装置が、前記1つ以上の制御信号に基づいて触覚出力を生成する、前記送信することと
を含む、前記方法。
(項目15)
前記乗物装置は、ギアシフト装置、ステアリング装置、アクセル装置、ブレーキ装置及びクラッチ装置のうちの少なくとも1つを含む、項目14に記載の方法。
(項目16)
前記乗物装置に関連した前記パラメータを調整すべきであると判定することは、乗物制御ユニットから第2の制御信号を受信することを含む、項目14に記載の方法。
(項目17)
前記第2の制御信号は、前記パラメータの目標値を含む、項目16に記載の方法。
(項目18)
前記パラメータの前記目標値に基づき、前記1つ以上の触覚出力装置を複数の触覚出力装置から選択することを更に含む、項目17に記載の方法。
(項目19)
ユーザーの場所を指示するセンサデータを1つ以上のセンサから受信することと、
前記ユーザーの前記場所に基づき、前記1つ以上の触覚出力装置によって生成される前記触覚出力の方向及び場所のうちの少なくとも一方を決定することと
を更に含む、項目14に記載の方法。
(項目20)
命令を含む非一時的コンピュータ可読記憶媒体であって、前記命令が、プロセッサによって実行されたとき、
乗物装置に関連したパラメータを調整すべきであるとの指示を乗物制御ユニットから受信するステップと、
前記指示に応答して、前記乗物装置の付近にある1つ以上の触覚出力装置に1つ以上の制御信号を送信するステップであって、前記1つ以上の触覚出力装置が、前記1つ以上の制御信号に基づいて触覚出力を生成する、前記送信するステップと
を実行することにより、前記触覚出力を介して乗物の態様を調整するようにユーザーを導くように前記プロセッサを構成する、前記非一時的コンピュータ可読記憶媒体。
1つ以上の上記の実施形態の列挙された特徴を詳細に理解することができるように、上で簡潔に要約された1つ以上の実施形態のより具体的な説明が、ある特定の実施形態を参照することによって与えられてもよい。この実施形態のうちのいくつかは、添付図面に例示されている。しかしながら、各種実施形態の範囲は他の実施形態も包含するため、添付図面は、典型的な実施形態を例示するものに過ぎず、従って、どの方法でもその範囲を制限するものとみなされないことに留意されたい。
各種実施形態に係る、本発明の1つ以上の態様を実装するように構成されたコンピューティング装置の概念ブロック図を示す。 各種実施形態に係る、乗物のギアシフトの位置をシフトするように触覚感覚を介して操縦者を導くための技術を示す。 各種実施形態に係る、触覚感覚を介してステアリング挙動を誘導するための技術を示す。 図4A~4Cは、各種実施形態に係る、触覚感覚を生成するための触覚出力装置の種々の配列を示す。 各種実施形態に係る、乗物の態様を調整するように触覚出力を介してユーザーを導くための方法ステップのフロー図を示す。
図1は、各種実施形態に係る、本発明の1つ以上の態様を実装するように構成されたコンピューティング装置100の概念ブロック図を示す。図に示すように、コンピューティング装置100は、処理ユニット110、入出力(I/O)装置120及びメモリ装置130を含むが、これらに限定されることはない。メモリ装置130は、データベース134と対話するように構成された触覚誘導アプリケーション132を含む。
処理ユニット110には、中央演算処理ユニット(central processing unit:CPU)、デジタル信号処理ユニット(digital signal processing unit:DSP)、センサ処理ユニット、制御ユニットなどが含まれてもよい。各種実施形態では、処理ユニット110は、ユーザーの1つ以上の部分(例えば、ユーザーの手、指、手首、腕、足、膝、脚、体幹など)の位置及び/もしくは向きを決定するために、かつ/または乗物装置の位置及び/もしくは向きを決定するために1つ以上のセンサを介して取得されたセンサデータを分析するように構成されている。いくつかの実施形態では、処理ユニット110は、ユーザーの位置及び/または向きに対して乗物装置の位置及び/または向きを決定するように更に構成されている。例えば、限定されることはないが、処理ユニット110は、触覚誘導アプリケーション132を実行して、手及び/または乗物装置が特定の位置及び/または向きにあると判定するために1つ以上の制御ユニットからのセンサデータ及び/またはデータを分析することができる。加えて、処理ユニット110は、手及び/または乗物装置の位置または向きが変化すると共に1つ以上の制御ユニットからのセンサデータ及びデータを継続的に処理してもよい。
入出力装置120には、入力装置、出力装置、及び入力の受信と出力の提供との両方が可能な装置が含まれてもよい。例えば、限定されることはないが、入出力装置120には、外部カメラ、操縦者を向いたカメラ、全球測位衛星システム(global navigation satellite system:GNSS)、速度計、タコメータ、テレメトリセンサ、外部ネットワーク接続、ジャイロスコープ、気圧計、燃料レベルセンサ、タイヤ圧力センサなどが含まれてもよい。入出力装置120はまた、超音波トランスデューサ、空気渦生成器、空気圧装置、空気嚢などの、1つ以上の触覚出力装置を含んでもよい。加えて、入出力装置120は、マイクロ流体、磁性流体、静電気及び/または電気力学的方法を利用して乗物表面の特性を改質させる装置などの表面改質装置を含んでもよい。更に、入出力装置はまた、前腕、脚、指などの表面にウェアラブル触覚トランスデューサを含んでもよい。入出力装置は、乗物装置とユーザーとの間の対話事象に加えて、乗物装置の位置及び/または向き、ユーザーの位置及び/または向きを含むセンサデータを(例えば、コントローラエリアネットワーク、ローカル相互接続ネットワーク、FlexRay(登録商標)などを介して)受信する1つ以上の有線または無線通信装置を含むことができる。
メモリ装置130は、メモリモジュールまたはメモリモジュールの集合体を含んでもよい。メモリ装置130は、触覚誘導アプリケーション132及びデータベース134を含む。触覚誘導アプリケーション132は、入出力装置120及び/またはアクセスデータベース134からデータを受信してもよい。データベース134は、デジタル信号処理アルゴリズム、物体認識データ及びユーザー嗜好データを記憶してもよい。処理ユニット110は、触覚誘導アプリケーション132を実行することにより、コンピューティング装置100の一部または全ての機能を実装する。
コンピューティング装置100は、全体として、マイクロプロセッサ、特定用途向け集積回路(application-specific integrated circuit:ASIC)、システムオンチップ(system-on-a-chip:SoC)などであってもよい。一般に、コンピューティング装置100は、超音波トランスデューサアレイ、空気渦生成器などの触覚出力装置の全体動作を調整するように構成されてもよい。他の実施形態では、コンピューティング装置100は、1つ以上の触覚出力装置に結合されているが、それとは別々である場合がある。このような実施形態では、触覚出力装置は、コンピューティング装置100からデータ(例えば、手及び乗物装置の位置及び/または向き)を受信し、コンピューティング装置100にデータ(例えば、触覚出力事象データ)を送信する専用プロセッサを含んでもよい。いくつかの実施形態では、専用プロセッサは、操縦者支援システム内に含まれてもよく、または、モバイルもしくはウェアラブル装置としてユーザーによって環境内に物理的に持ち込まれてもよい。モバイルまたはウェアラブル装置は、物理的に、または無線でコンピューティング装置100に接続されてもよい。例えば、専用プロセッサは、スマートフォン、パーソナルコンピュータ、ウェアラブル装置などの家庭用電子装置内に含めることができる。しかしながら、本明細書に開示された実施形態は、触覚出力装置の機能を実装するように構成された技術的に可能な任意のシステムを企図している。
上述したように、従来のアプローチは、操縦者に対し、視覚及び/または聴覚的通知(複数可)を解釈することに自分の注意を向けることを必要とし得る。例えば、視覚及び/または聴覚的通知は、所与の事態でどの行動(複数可)をとるべきかを操縦者に明らかに指示しない場合がある。その結果、操縦者には、視覚及び聴覚的通知を解釈するために追加の認識リソースを消費することが要求され得る。
本明細書に記載された各種実施形態は、1つ以上の乗物パラメータを調整するためにユーザー(例えば、操縦者)によって実行されるべきである1つ以上の行動を指示する1つ以上の触覚感覚を生成することにより、従来のアプローチを越えた操縦者誘導のための技術を提供する。例えば、操縦者は、1つ以上の乗物装置の位置及び/または状態を変えることによって1つ以上のパラメータを調整することができる。一般に、乗物は、任意の種類の輸送装置を含んでもよい。このような装置としては、車、トラック、モーターバイク、ボート、潜水艦、パーソナルウォータークラフト、スノーモービル、飛行機、宇宙船などが挙げられるが、これらに限定されることはない。操縦者は、乗物の内部に、または遠隔のドローン制御ステーション内などの乗物の外部に位置することができる。動作中、触覚誘導アプリケーション132は、調整すべきであるパラメータ(複数可)の通知を受信する。いくつかの実施形態では、触覚誘導アプリケーション132は、次いで、パラメータ(複数可)に対応する乗物装置に対するユーザーの場所などの、ユーザー(例えば、ユーザーの手、腕、足、足首、指、指先など)の場所を決定することができる。次に、触覚誘導アプリケーション132は、ユーザーに対して生成するための触覚感覚の種類を決定してもよい。例えば、触覚誘導アプリケーション132は、ユーザーに対して生成される触覚感覚の周波数、強度、場所、サイズ、動き、パターン、方向、形状などを決定することができる。最後に、触覚誘導アプリケーション132は、乗物パラメータ(複数可)を調整するようにユーザーを導くために、1つ以上の触覚出力装置を介してユーザーに対して触覚感覚を生成する。特に、ユーザーと直接的、物理的に接触せずにユーザーに対して触覚感覚を生成する触覚出力装置を、本明細書に開示された任意の実施形態において実装することができる。このような技術の例を、図2、3、4A~4C及び5に関連して更に詳細に以下で説明する。
図2は、各種実施形態に係る、乗物のギアシフトの位置をシフトするように触覚感覚を介して操縦者を導くための技術を示す。図に示すように、システム環境200は、ギアシフトノブ210、ギアシフトプレート220、センサ230及び触覚出力装置240を含む。一般に、触覚出力装置240は、超音波トランスデューサアレイ及び/または空気出力装置などの、ユーザーに対して触覚感覚を生成することができる任意の種類の装置を含んでもよい。
上述したように、各種実施形態では、触覚感覚は、乗物装置(例えば、ギアシフトノブ210)を操作して乗物の1つ以上のパラメータを調整するように操縦者を導くために生成されてもよい。いくつかの実施形態では、触覚誘導アプリケーション132は、1つ以上の通信経路(例えば、乗物のバス、コントローラエリアネットワーク、ローカル相互接続ネットワーク、無線通信プロトコルなど)を介して、乗物内に含まれる1つ以上の制御ユニットから制御信号を受信する。例えば、制御ユニットは、乗物パラメータをユーザーによって調整すべきであることを指示するために、1つ以上の信号を触覚誘導アプリケーション132に送信することができる。触覚誘導アプリケーション132は、次いで、触覚出力250を生成して、乗物パラメータを調整すべきこと及び/または乗物パラメータをどのように調整すべきかをユーザーに指示する。
例えば、図2に示すように、触覚出力装置240を介して操縦者の手に対して触覚感覚を生成することにより、ギアシフトノブ210を介して乗物の変速機をシフトアップまたはシフトダウンするように操縦者を導くことができる。いくつかの実施形態では、エンジン制御ユニットは、最初に、変速機をシフトアップまたはシフトダウンすべきであることを触覚誘導アプリケーション132に乗物のバスを介して通知することができる。触覚誘導アプリケーション132は、次いで、触覚出力装置240を介して触覚出力250を生成して、変速機を調整するためにギアシフトノブ210の位置を調整すべきであること及び/またはギアシフトノブ210の位置をどのように変えるべきか(例えば、より高い、もしくはより低い変速機ギアと関連しているギアシフトプレート220のスロットへとギアシフトノブ210を動かすことによって)を操縦者に指示することができる。
いくつかの実施形態では、触覚出力装置(複数可)240によって生成された触覚出力250は、対応するパラメータを調整するためにユーザーが乗物装置を動かすべきである特定の方向を指示する。例えば、図2に示すように、触覚出力250は、操縦者の手を横切る特定の方向に生成することができる。その場合、方向は、操縦者がギアシフトノブ210を動かすべき先のギアを示す。より具体的な例では、ギアシフトノブ210が第5ギアにあり、かつ変速機をシフトダウンすべきであることを指示する制御信号を触覚誘導アプリケーション132が受信した場合、触覚出力250-3を生成して、第4ギアにシフトするように操縦者に命じることができる。別の例では、ギアシフトノブ210が第2ギアにあり、かつ変速機をシフトアップすべきであることを指示する制御信号を触覚誘導アプリケーション132が受信した場合、触覚出力250-1を生成して、第3ギアにシフトするように操縦者に命じることができる。乗物装置を特定の方向に押すこと、引くこと、スライドすること、またはさもなければ再度位置付けることによってパラメータを調整することが可能である任意の種類の乗物装置について、方向を示す類似の技術が触覚誘導アプリケーション132によって実装されてもよい。
一実施形態では、触覚誘導アプリケーション132が触覚出力を介して指示する特定の方向は絶対方向である。特に、絶対方向は、乗物装置を新しい位置に動かすために手が動くべき方向であってもよい。例えば、触覚出力250-1は、第2ギアスロットから第3ギアスロットにギアシフトノブ210を動かすために操縦者が自分の手を動かすべきである方向を指示することができる。ユーザーの手の向きがギアシフトノブ210に対して変わったときでも、触覚誘導アプリケーション132は、触覚出力250-1の方向を変化させない。追加的に、または代替的に、触覚誘導アプリケーション132は、ユーザーの手に対して相対方向を指示してもよい。相対方向を生成するとき、触覚誘導アプリケーション132は、ユーザーの手の現在の向きに対して触覚出力250-1の方向を変化させる。従って、触覚誘導アプリケーション132は、ユーザーの手の2つの部分の間を移動する触覚出力を、手が乗物装置に対してどのように向いているかに関係なく生成するように触覚出力装置を構成する。例えば、ユーザーの手がギアシフトノブ210に対してどのように向いているかに関係なく、触覚誘導アプリケーション132は、ユーザーの手の中央と小指の指関節との間を移動する触覚出力250-1を生成することができる。このような触覚感覚は、ユーザーが第2ギアスロットから第3ギアスロットにギアシフトノブ210をシフトすべきであることを矛盾なく指示することになる。
いくつかの実施形態では、触覚誘導アプリケーション132は、特定の形状(例えば、畝)を有するものとしてユーザーによって知覚される触覚感覚を生成してもよい。加えて、触覚誘導アプリケーション132は、初期位置と、触覚感覚がユーザーの手の表面を移動する経路とを決定してもよい。具体的には、触覚感覚は、初期位置でユーザーの手に対して生成されてもよく、次いで経路に沿ってユーザーの手の1つ以上の方向に移動してもよい。例えば、触覚誘導アプリケーション132は、左手の手首で始まり、左手の各指関節まで移動する畝の形で触覚感覚を生成することができる。触覚誘導アプリケーション132は、更に、右手の各指関節で始まり、右手の手首まで移動する畝の形で別の触覚感覚を生成することができる。いくつかの実施形態では、触覚誘導アプリケーション132は、1つ以上のパラメータ(複数可)の現在値及びそのパラメータ(複数可)の目標値を受信してもよい。触覚誘導アプリケーション132は、次いで、どの乗物装置(複数可)がパラメータ(複数可)と関連しているか、及びパラメータ(複数可)の値を現在値から目標値に変えるために乗物装置(複数可)を調整すべきである方法を決定してもよい。追加的に、または代替的に、乗物パラメータを調整すべきであるとの指示を受信すると、触覚誘導アプリケーション132は、乗物装置と関連している(例えば、データベース134内に記憶された)一組の所定の切り替えから選択することができる。例えば、エンジン制御ユニットは、変速機が動作している現在のギア、及びギアを上げるべきであることを指示することができる。触覚誘導アプリケーション132は、第2ギアから第3ギアへのシフトに関連した所定の切り替えに基づき、ギアシフトノブ210を上方に、更には右に動かすようにユーザーを導くために触覚出力250-1をユーザーに対して生成すべきであることを決定することができる。触覚誘導アプリケーション132は、次いで、触覚出力装置240に、ユーザーに対する触覚出力250-1を生成させることができる。
いくつかの実施形態では、触覚誘導アプリケーション132は、特定のパラメータを特定の乗物装置及び/または触覚出力装置240と(例えば、データベース134内に記憶されたルックアップテーブルを介して)関連させてもよい。次いで、制御ユニットから特定のパラメータを指定する制御信号を受信すると、触覚誘導アプリケーション132は、そのパラメータと関連している乗物装置、及び/または触覚感覚を生成するように実行されるべき1つ以上の触覚出力装置240を決定してもよい。触覚誘導アプリケーション132は、次いで、それらの触覚出力装置(複数可)240に、ユーザーに対する触覚感覚を生成させる。
いくつかの実施形態では、制御ユニットは、調整すべきである1つ以上のパラメータと関連している乗物装置(複数可)、及びそれらの乗物装置(複数可)を調整すべきである方法を触覚誘導アプリケーション132に指示してもよい。例えば、制御ユニットは、ギアシフトノブ210の位置が調整される前にクラッチペダルを踏み込むべきであること及び/またはどの程度クラッチペダルを踏み込むべきかを触覚誘導アプリケーション132に指示することができる。触覚誘導アプリケーション132は、次いで、クラッチペダルの付近の1つ以上の触覚出力装置240を介して触覚出力250を生成して、制御ユニットによって指定された距離だけクラッチペダルを踏み込むように操縦者を導くことができる。例えば、触覚出力250は、制御ユニットによって指定された位置にクラッチペダルが到達するまで、ユーザーの脚または足に対して生成することができる。触覚誘導アプリケーション132は、乗物のアクセルペダル及び/または乗物のブレーキペダルに関して類似の技術を実装することができる。
各種実施形態では、1つ以上のセンサ230は、ユーザー及び/または乗物装置の場所及び/または向きを決定するために、触覚誘導アプリケーション132によって次いで処理されるセンサデータを取得するように実装されてもよい。例えば、触覚誘導アプリケーション132は、センサ(複数可)230によって取得されたセンサデータを分析して、操縦者の手が1つ以上の乗物装置(例えば、ギアシフトノブ210)の付近に位置しているかどうかを判定することができる。触覚誘導アプリケーション132は、次いで、1つ以上の触覚出力装置240に、ユーザーの手の特定の場所に基づいて触覚出力250を生成させることができる。いくつかの実施形態では、ユーザー及び/またはユーザーによって操作されている乗物装置の特定の場所を決定することにより、乗物装置を特定の方法で調整するようにユーザーを導くために触覚出力250をより正確に生成してもよい。例えば、図2を参照すると、様々なユーザーが、自分の手をギアシフトノブ210上の様々な場所に位置付けている場合がある。その結果、1つ以上のセンサ230を介してユーザーの手の場所を検出することにより、手の特定の部分に対して触覚出力250をより正確に生成することが可能となり得る。
更に、誘導アプリケーション132は、センサデータを分析してユーザーの場所(例えば、手、腕、足、脚などの場所)を決定することにより、その場所付近にある1つ以上の触覚出力装置240を選択することができる。次いで、触覚出力250を、選択された触覚出力装置240を介してユーザーに対して生成することができる。例えば、触覚誘導アプリケーション132は、センサ230から受信したセンサデータを分析することにより、ギアシフトノブ210に対する操縦者の手の場所及び向きを決定することができる。触覚誘導アプリケーション132は、次いで、手に対して触覚感覚を生成するために最適に位置付けられている1つ以上の触覚出力装置240を選択することができる。
いくつかの実施形態では、触覚誘導アプリケーション132は、触覚感覚の周波数、形状、向き、位置及び/または強度を更に決定してもよい。例えば、触覚誘導アプリケーション132は、変速機を異なるギアにシフトする緊急性を操縦者に伝えるために触覚感覚の周波数及び強度を変化させることができる。
触覚出力装置240は、ギアシフトノブ210の上方、乗物のダッシュボードの上、操縦者の手の下など、乗物周辺の様々な位置に位置し得る。例えば、システム環境200内で、触覚出力装置240は、ギアシフトノブ210の上方に位置している。加えて、触覚出力装置240は、乗物装置(複数可)及び/または操縦者に対して適切な出力経路を提供する乗物の未使用領域(例えば、乗物のダッシュボード上の未使用空間)内に都合良く置くことができる。加えて、触覚出力装置240は、乗物装置の付近に(例えば、乗物装置の内部に、乗物装置の周辺部に沿って)、かつ/またはユーザーの付近に存在することができる。
図3は、各種実施形態に係る、触覚感覚を介してステアリング挙動を誘導するための技術を示す。図に示すように、システム環境300は、ステアリングホイール310、センサ320及び触覚出力装置330を含む。
各種実施形態では、触覚誘導アプリケーション132は、自分のステアリング挙動を調整するように触覚感覚を介して操縦者を導いてもよい。例えば、触覚誘導アプリケーション132は、制御ユニットから1つ以上の制御信号を受信ことができる。その場合、制御信号は、車を特定の方向にステアリングすべきことを指示する。1つ以上の触覚出力装置330は、次いで、特定の方法でステアリングホイールを動かすようにユーザーを導くためにユーザーの手に対して触覚感覚を生成するように実施されてもよい。例えば、触覚感覚をユーザーの左手に対して生成して左にステアリングするようにユーザーを導くことができ、または、触覚感覚をユーザーの右手に対して生成して右にステアリングするようにユーザーを導くことができる。加えて、いくつかの実施形態では、ユーザーの手及び/または腕を横切る特定の方向に触覚感覚を生成して、ステアリングホイールを左または右に回すべきであることを指示することができる。例えば、ユーザーを横切る時計回り方向に触覚感覚を生成してホイールを右に回すべきことを示すことができ、または、ユーザーを横切る反時計回り方向に触覚感覚を生成してホイールを左に回すべきことを指示することができる。乗物装置を回すこと、または回転させることによってパラメータを調整することが可能である任意の種類の乗物装置について、類似の技術が触覚誘導アプリケーション132によって実装されてもよい。
触覚誘導アプリケーション132は、センサ320を介して乗物装置に対するユーザーの場所を更に決定してもよい。いくつかの実施形態では、触覚誘導アプリケーション132は、センサ320からのセンサデータを分析して、ユーザーの手に対して触覚感覚を生成するために触覚出力装置330が触覚出力を出力すべきである方向を決定してもよい。次いで、触覚誘導アプリケーション132は、ユーザーに対して生成するための触覚感覚の1つ以上の特性を更に決定してもよく、ユーザーに対して触覚感覚を生成する触覚出力装置330に制御信号を出力してもよい。
例えば、乗物が車線の外にそれている、かつ/または道路の端に向かって移動している場合、触覚誘導アプリケーション132は、1つ以上のセンサ320を介して、ステアリングホイールの向きを決定し、必要に応じて操縦者の手の場所及び向きを決定することができる。触覚誘導アプリケーション132は、次いで、操縦者に対し、自分が乗物をステアリングして車線内に戻す、かつ/または道路の端から離れるべきであることを指示するために、操縦者の手に対して生成するための触覚感覚の1つ以上の特性を決定することができる。いくつかの実施形態では、上述した畝として操縦者によって知覚される1つ以上の触覚感覚を操縦者の手(複数可)に対して生成して、自分がステアリングホイールを右または左に回すべきであることを指示することができる。加えて、乗物が道路の端に向かって、車線ラインを横切って、かつ/または別の乗物もしくは物体に向かって更にそれたときなど、操縦者が危険な状況に向かって更にそれているときに触覚感覚の周波数及び/または強度を上げてもよい。
いくつかの実施形態では、触覚誘導アプリケーション132は、ある場所から別の場所まで乗物を操縦するために操縦者がとるべきいくつかの、または全ての行動を通じて操縦者を誘導してもよい。例えば、触覚誘導アプリケーション132は、自分の家と仕事場との間を運転する際に操縦者を誘導するために一連の触覚感覚を生成することができる。触覚誘導アプリケーション132は、1つ以上の触覚出力装置240を介して一連の触覚感覚を更に生成して、所与の目的地まで安全に移動する際に操縦者を助けるために操縦者のシフト挙動、加速、ブレーキなどを誘導することができる。
例えば、触覚出力装置330は、乗物のステアリングコラム上に、かつ/または乗物のフットウェル内に位置することができる。乗物を加速すべきであることを指示する制御信号を触覚誘導アプリケーション132が受信したとき、触覚誘導アプリケーション132は、フットウェル内に位置する1つ以上のセンサ320からのセンサデータを介して操縦者の足の場所及び向きを決定することができる。次いで、操縦者の足がアクセルの上に位置していると触覚誘導アプリケーション132が判定した場合、触覚誘導アプリケーション132は、自分がアクセルを踏み込むべきことを操縦者に指示するために、操縦者の足に対して生成するための触覚感覚の1つ以上の特性を決定することができる。これに対して、足がブレーキの上に位置していると触覚誘導アプリケーション132が判定した場合、触覚誘導アプリケーション132は、操縦者が自分の足をブレーキペダルから上げ、アクセル上に足を動かすべきことを操縦者に指示するために、操縦者の足に対して生成するための触覚感覚の1つ以上の特性を決定することができる。例えば、触覚誘導アプリケーション132は、触覚出力装置330を介して操縦者の足に対して触覚感覚を生成することができる。その場合、触覚感覚は、操縦者が自分の足をブレーキペダルからアクセルに動かすべきであることを操縦者に指示するために足の左側から足の右側まで移動する。次に、触覚誘導アプリケーション132は、触覚出力装置330に制御信号を送信することにより、操縦者の足に対して第2の触覚感覚を生成することができる。この触覚感覚は、自分がアクセルを踏み込むべきであることを操縦者に指示する。
加えて、触覚誘導アプリケーション132は、乗物の事象、道路の状態などについて操縦者に警告するために、操縦者に対して触覚感覚を生成してもよい。例えば、操縦者が半自律的な操縦環境にあり、かつ操縦者のシートが乗物の後部を向いているとき、触覚誘導アプリケーション132は、操縦者が自分のシートの向きを変えるべきである、かつ/または特定の乗物装置の制御を行うべきであるときに触覚感覚の形態で操縦者に警告を提供してもよい。加えて、触覚誘導アプリケーション132は、乗物の正面を向くように自分のシートの向きを変える際に一連の触覚感覚を生成して操縦者を誘導することにより、乗物装置を調整する際に操縦者を助けてもよい。
更に、半自律的な乗物内では、触覚誘導アプリケーション132は、1つ以上の制御装置から制御信号を受信してもよく、1つ以上のパラメータを調整することが安全ではないと操縦者に警告するために操縦者に対して触覚感覚を生成してもよい。例えば、現在の乗物の速度では安全ではないギアに変速機をシフトすることを操縦者が試みる場合、触覚誘導アプリケーション132は、制御信号を受信して触覚感覚を操縦者に対して生成してもよい。触覚誘導アプリケーション132は、次いで、高強度を有する触覚感覚を操縦者の手に対して生成することができる。高強度を有する触覚感覚を実行することにより、触覚誘導アプリケーション132は、操縦者に警告する、かつ/または操縦者が安全ではないギアに変速機をシフトしないようにすることができる。
加えて、操縦者監視システムを乗物が有する場合、触覚誘導アプリケーション132は、操縦者監視システムからの各種通知を操縦者に対する触覚感覚を介して実施してもよい。例えば、触覚誘導アプリケーション132は、操縦者監視システムから、1つ以上の乗物装置の位置を変えることによって操縦者が1つ以上のパラメータを調整すべきであることを指示する制御信号を受信することができる。触覚誘導アプリケーション132は、次いで、乗物装置(複数可)の位置を自分がどのように変えてパラメータ(複数可)を調整すべきかを操縦者に指示するために触覚感覚を操縦者に対して生成することができる。
図4A~4Cは、各種実施形態に係る、触覚感覚を生成するための触覚出力装置の種々の配列を示す。図に示すように、システム環境400は、乗物装置410及び触覚出力装置420を含む。
本明細書で述べたように、触覚出力装置420は、超音波トランスデューサ、空気出力装置及び/または他の種類の触覚出力装置を含んでもよい。各種実施形態では、触覚誘導アプリケーション132は、操縦者の手に対して生成される触覚感覚の1つ以上の特性を決定してもよい。このような特性としては、触覚感覚の強度、場所、形状、周波数、動き及びサイズが挙げられる。
このような実施形態では、触覚誘導アプリケーション132は、2つ以上の触覚出力装置420の触覚出力を強め合うように、かつ/または弱め合うように干渉させることにより、特定の一組の特性を有する触覚感覚を生成してもよい。例えば、2つ以上の触覚出力装置420によって生成された触覚出力は、特定の時間において空間内の特定の場所を占有して、各触覚出力装置の触覚出力が1つ以上の他の触覚出力装置の触覚出力と強め合うように、かつ/または弱め合うように干渉することを可能にしてもよい。異なる触覚出力装置によって生成された触覚出力間の強め合う、かつ/または弱め合う干渉は、次いで、触覚出力が強め合うように干渉する場所において触覚感覚を生じさせることができる。従って、各種実施形態では、触覚誘導アプリケーション132は、触覚出力装置からの触覚出力を1つ以上の他の触覚出力装置の触覚出力と干渉させることにより、特定の場所において触覚感覚を生成してもよい。
更に、各種実施形態では、触覚誘導アプリケーション132は、各触覚出力装置によって生成された触覚出力の強度及び/または位相を調整することにより、触覚出力によって生成された強度パターンを更に制御してもよい。このような技術を利用して、触覚誘導アプリケーション132は、強度ピークの場所をシフトしてもよく、強度ピークの数を増加または減少させてもよく、かつ/または1つ以上の強度ピークの形状及び/または大きさを調節してもよい。その結果、触覚誘導アプリケーション132は、ユーザーに対して生成される触覚感覚の各種特性を局所化及び/または調整してもよい。例えば、触覚誘導アプリケーション132は、このような技術を利用して、ユーザーの手に対して生成される触覚感覚の強度、サイズ、場所及び/または形状を改変することができる。
加えて、空気出力装置(例えば、空気渦生成器)を使用して操縦者の手に対して触覚感覚を生成してもよい。各種実施形態では、触覚誘導アプリケーション132は、空気出力装置を含む触覚出力装置420を使用して、本明細書に記載された技術のうちのいずれかを実装してもよい。例えば、乗物装置410の付近に位置する空気出力装置は、自分が乗物装置410の位置を調整すべきであることを操縦者に指示するために、操縦者の手、手のひら、前腕などに対して触覚感覚を生成することができる。加えて、各空気出力装置は、空気渦生成器が様々な方向に空気渦を放出することを可能にするパン・チルト作動を実施することなどにより、複数の領域内に空気渦を放出してもよい。このような実施形態では、触覚誘導アプリケーション132は、複雑な特性を有する触覚感覚をユーザーの各種部分に対して生成することができる。
図4Aに示すように、触覚出力装置420は、乗物装置410の付近のアレイに配列されてもよい。例えば、触覚出力装置420は、5×2のアレイに配列することができる。各種実施形態では、他の寸法及び/または形状のアレイを実装してもよい。例えば、超音波トランスデューサアレイは、4×4アレイ、8×8アレイ、16×16アレイなどに配列することができる。更に、触覚出力装置420は乗物装置410に対して特定の位置にあるものとして示されているが、他の実施形態では、触覚出力装置420は、乗物装置410の付近の任意の位置に位置付けられてもよい。
図4Bでは、触覚出力装置420は、乗物装置410の周縁部を囲んで配列されている。図4Bに示した実施形態は触覚出力装置420の楕円構成を実装しているが、他の任意の形状(例えば、円形、矩形、多角形、自由形など)を各種実施形態において実装してもよい。このような実施形態では、触覚感覚を操縦者の手のひら及び/または前腕に対して生成してもよい。加えて、触覚感覚を操縦者の指及び/または指先に対して生成してもよい。
図4Cでは、触覚出力装置420は、乗物装置410上に配列されている。このような実施形態では、触覚感覚を操縦者の手のひら、指及び/または前腕に対して生成することができる。追加的に、または代替的に、触覚出力装置は、乗物装置410を囲んで散在的に配列することができる。いくつかの実施形態では、触覚出力装置420は、利用可能な空間を有する乗物の各種領域内に(例えば、乗物装置、物体、またはディスプレイなどの他の障害物がない乗物の表面上に)位置してもよい。次いで、乗物装置410の付近の触覚出力装置420の特定の配列を所与として、触覚誘導アプリケーション132は、操縦者の手に対して触覚感覚を生成するために触覚出力装置420のそれぞれの触覚出力を制御してもよい。
本明細書に開示された各種実施形態は特定の種類の乗物装置に関して記載されているが、本明細書に開示された技術のいずれもが、任意の種類の乗物装置に関して実装され得る。更に、各種実施形態は触覚出力装置の特定の配列と共に記載されているが、図4A~4Cに関して上述したものなどの、本明細書に開示された触覚出力装置の配列のいずれもが、任意の種類の乗物装置の付近に触覚出力を生成するための任意の技術で実装され得る。加えて、触覚出力装置420の任意の配列を実装して任意の形状を有する触覚感覚を生成してもよい。このような触覚感覚としては、楕円形、矩形、多角形及び自由形の形状を有する触覚感覚が挙げられるが、これに限定されることはない。
図5は、各種実施形態に係る、乗物の態様を調整するように触覚出力を介してユーザーを導くための方法ステップのフロー図を示す。方法ステップは図1~3及び4A~4Cのシステムに関連して記載されているが、当業者は、方法ステップを任意の順序で実行するように構成された任意のシステムが本発明の範囲内に含まれることを理解するであろう。
図5に示すように、方法500はステップ510から始まる。ここで、触覚誘導アプリケーション132は、制御ユニットから1つ以上の制御信号を受信する。いくつかの実施形態では、ステップ510で、触覚誘導アプリケーション132はまた、調整すべきであるパラメータ及びそのパラメータと関連している乗物装置を決定してもよい。次いで、ステップ520で、触覚誘導アプリケーション132は、乗物装置の付近に位置する1つ以上の触覚出力装置を選択する。次いで、ステップ530で、触覚誘導アプリケーション132は、1つ以上の触覚出力装置を介して生成するための触覚感覚を決定する。
次に、ステップ540で、触覚誘導アプリケーション132は、ユーザーに対して触覚感覚を生成する。最後に、ステップ550で、触覚誘導アプリケーション132は、(例えば、ユーザーによって)パラメータが調整されたかどうかを判定する。例えば、ステップ550で、触覚誘導アプリケーション132は、パラメータが変化したことを制御ユニットによって通知することができる。代替的に、または追加的に、触覚誘導アプリケーション132は、乗物装置の位置が変化したことを指示するセンサデータを分析することによってパラメータが調整されたことを判定してもよい。
ステップ550で、パラメータが変化したと触覚誘導アプリケーション132が判定した場合、方法500はステップ510に戻る。そこで、触覚誘導アプリケーション132は、制御ユニットから1つ以上の制御信号を受信する。パラメータが変化しなかった場合、方法500はステップ530に戻る。そこで、触覚誘導アプリケーション132は、1つ以上の触覚出力装置を介して操縦者に対して生成するための触覚感覚を再度決定してもよい。
いくつかの実施形態では、触覚誘導アプリケーション132は、ユーザー(例えば、ユーザーの手)の位置及び/または向きが変化したことを判定してもよい。このような実施形態では、パラメータが変化しなかった場合、方法500はステップ520に戻る。そこで、触覚誘導アプリケーション132は、乗物装置の付近の1つ以上の触覚出力装置を選択する。触覚誘導アプリケーション132は、ユーザーの手の新しい場所及び/または向きに触覚出力を向けることができる乗物装置の付近の触覚出力装置を選択する。各種実施形態はユーザーの手に対して触覚感覚を生成するものとして記載されているが、上記の実施形態のいずれにおいても、触覚感覚は、ユーザーの体の任意の部分に対して生成され得る。各種実施形態では、触覚出力装置は、ユーザーとの直接的、物理的な任意の種類の接触を行うことなく、ユーザーに対して触覚感覚を生成する。
各種実施形態では、ステップ510で、触覚誘導アプリケーション132は、1つ以上のセンサからのセンサデータを介してユーザーの位置を決定してもよい。触覚誘導アプリケーション132は、乗物装置に対する手の位置及び向きに加えて、操縦者の手のサイズ及び向きを更に受信してもよい。更に、いくつかの実施形態では、ステップ520で、触覚誘導アプリケーション132は、どの触覚出力装置が乗物装置の付近にあるかを決定してもよく、ユーザーに対して触覚感覚を生成するための1つ以上の触覚出力装置を選択してもよい。次いで、ステップ530で、触覚誘導アプリケーション132は、ユーザーに対して生成するための触覚感覚の1つ以上の特性を決定することができる。例えば、触覚誘導アプリケーション132は、触覚感覚のサイズ、形状、場所及び強度を決定することができる。加えて、触覚誘導アプリケーション132は、触覚感覚がユーザーの手に対して有するべき方向、周波数及び動きを決定することができる。触覚誘導アプリケーション132は、乗物装置の付近にある触覚出力装置の種類、位置及び/または向き、ならびに乗物装置及びユーザーの位置及び向きに基づいて触覚感覚の1つ以上の特性を決定してもよい。
要約すれば、触覚誘導アプリケーションは、制御ユニットから制御信号を受信する。触覚誘導アプリケーションは、次いで、調整すべきパラメータ及びそのパラメータと関連している乗物装置を決定してもよい。触覚誘導アプリケーションは、次いで、乗物装置の付近の1つ以上の触覚出力装置を選択してもよく、更にはユーザーに対して生成するための触覚感覚を決定してもよい。触覚誘導アプリケーションは、次いで制御信号を触覚出力装置(複数可)に送信し、触覚出力装置は、ユーザーに対して触覚感覚を生成する。
本明細書に記載された技術の少なくとも1つの利点は、ユーザーが視覚及び/または聴覚的通知に自分の注意を払うことを必要とせずに、パラメータを調整すべきであることをユーザーに通知することができる点である。従って、ユーザーは、視覚及び/または聴覚的通知を分析するためにユーザーが追加の認識リソースを消費せずに、調整すべきであるパラメータ(複数可)を決定することが可能である。更に、触覚感覚を、ユーザーの視覚及び聴覚的知覚に負担をかけずに様々な種類の情報をユーザーに伝達するための代替手段として実装することができる。その結果、本明細書に記載された技術は、様々な種類の情報がユーザーに提供されるときにユーザーに与えられる認識負荷を低減することができる。
各種実施形態についての記載は、例示の目的で与えられているが、網羅的であることも、開示される実施形態に限定されることも意図しない。記載された実施形態の範囲及び趣旨から逸脱することなく、多くの修正及び変形が当業者にとって明らかとなるであろう。
本実施形態の態様は、システム、方法またはコンピュータプログラム製品として具現化されてもよい。従って、本開示の態様は、完全にハードウェアの実施形態、完全にソフトウェアの実施形態(ファームウェア、常駐ソフトウェア、マイクロコードなどを含む)、またはソフトウェアの態様とハードウェアの態様とを組み合わせた実施形態の形をとり得るが、これらは全て、一般に、本明細書において「回路」、「モジュール」または「システム」と呼ぶことができる。更に、本開示の態様は、1つ以上のコンピュータ可読媒体(複数可)であって、当該媒体上に具現化されたコンピュータ可読プログラムコードを有するコンピュータ可読媒体に具現化されたコンピュータプログラム製品の形をとることができる。
1つ以上のコンピュータ可読媒体(複数可)の任意の組み合わせを利用してもよい。コンピュータ可読媒体は、コンピュータ可読信号媒体またはコンピュータ可読記憶媒体であってもよい。コンピュータ可読記憶媒体は、例えば、電子、磁気、光学、電磁気、赤外線もしくは半導体システム、機器もしくは装置、または前述したものの任意の適切な組み合わせであってもよいが、これらに限定されることはない。コンピュータ可読記憶媒体のより具体的な例(非限定なリスト)としては、1本以上のワイヤを有する電気的接続、可搬型コンピュータディスケット、ハードディスク、ランダムアクセスメモリ(random access memory:RAM)、リードオンリーメモリ(read-only memory:ROM)、消去可能プログラマブルリードオンリーメモリ(erasable programmable read-only memory:EPROM、もしくはフラッシュメモリ)、光ファイバ、可搬型コンパクトディスクリードオンリーメモリ(compact disc read-only memory:CD-ROM)、光学記憶装置、磁気記憶装置、または前述したものの任意の適切な組み合わせが挙げられる。本文書の文脈では、コンピュータ可読記憶媒体は、命令実行システム、機器もしくは装置によって、またはそれと共に使用するためのプログラムを含む、または記憶することが可能な任意の有形媒体であってもよい。
本開示の態様は、開示の実施形態に係る方法、機器(システム)及びコンピュータプログラム製品のフローチャート説明図及び/またはブロック図を参照して上述されている。フローチャート説明図及び/またはブロック図の各ブロック、ならびにフローチャート説明図及び/またはブロック図内の各ブロックの組み合わせは、コンピュータプログラム命令によって実装可能であることが理解されよう。これらのコンピュータプログラム命令は、機械を製作するために、汎用コンピュータ、専用コンピュータ、または他のプログラム可能なデータ処理機器のプロセッサに提供されてもよい。それにより、コンピュータまたは他のプログラム可能なデータ処理機器のプロセッサを介して実行される命令は、フローチャート及び/またはブロック図のブロックもしくは複数のブロック内で指定された機能/作用の実装を可能にする。このようなプロセッサは、限定されることはないが、汎用プロセッサ、専用プロセッサ、特定用途向けプロセッサ、またはフィールドプログラマブルプロセッサもしくはゲートアレイであってもよい。
図面内のフローチャート及びブロック図は、本開示の各種実施形態に係るシステム、方法及びコンピュータプログラム製品の可能な実装の構造、機能及び動作を示す。この点に関して、フローチャートまたはブロック図内の各ブロックは、モジュール、セグメント、またはコードの一部を表してもよい。これは、指定された論理機能(複数可)を実装するための1つ以上の実行可能な命令を含む。いくつかの代替的な実装では、ブロック内に記述された機能は、図面内に記述された順序以外で行われてもよいことにも留意すべきである。例えば、連続的に示した2つのブロックは、実際に、実質的に同時に実行されてもよく、またはブロックは、場合によっては、関係する機能に応じて逆の順序で実行されてもよい。ブロック図及び/またはフローチャート説明図の各ブロック、ならびにブロック図及び/またはフローチャート説明図内の各ブロックの組み合わせは、指定された機能もしくは作用を実行する専用ハードウェアベースシステム、または専用ハードウェアとコンピュータ命令との組み合わせによって実装することができることにも留意されよう。
先の説明は本開示の実施形態を対象としているが、本開示の基本的な範囲を逸脱せずに他の実施形態及び更なる実施形態が考案されてもよく、本開示の範囲は、続く特許請求の範囲によって決まる。

Claims (1)

  1. 本明細書に記載の発明。
JP2022038042A 2016-07-22 2022-03-11 触覚による操縦誘導システム Withdrawn JP2022075801A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201662365960P 2016-07-22 2016-07-22
US62/365,960 2016-07-22
JP2019503272A JP7248568B2 (ja) 2016-07-22 2017-06-15 触覚による操縦誘導システム
PCT/US2017/037619 WO2018017212A1 (en) 2016-07-22 2017-06-15 Haptic driving guidance system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019503272A Division JP7248568B2 (ja) 2016-07-22 2017-06-15 触覚による操縦誘導システム

Publications (1)

Publication Number Publication Date
JP2022075801A true JP2022075801A (ja) 2022-05-18

Family

ID=60992731

Family Applications (7)

Application Number Title Priority Date Filing Date
JP2019503271A Active JP6992045B2 (ja) 2016-07-22 2017-06-15 触覚誘導システム
JP2019503272A Active JP7248568B2 (ja) 2016-07-22 2017-06-15 触覚による操縦誘導システム
JP2019503273A Active JP6954989B2 (ja) 2016-07-22 2017-07-21 材料を作動させるための触覚システム
JP2019503284A Active JP7144400B2 (ja) 2016-07-22 2017-07-21 車両用触覚通知システム
JP2019503283A Active JP6944513B2 (ja) 2016-07-22 2017-07-21 オーディオコンテンツをユーザに送出するための触覚システム
JP2019503274A Active JP6949938B2 (ja) 2016-07-22 2017-07-21 触覚振動子デバイスによる反響定位
JP2022038042A Withdrawn JP2022075801A (ja) 2016-07-22 2022-03-11 触覚による操縦誘導システム

Family Applications Before (6)

Application Number Title Priority Date Filing Date
JP2019503271A Active JP6992045B2 (ja) 2016-07-22 2017-06-15 触覚誘導システム
JP2019503272A Active JP7248568B2 (ja) 2016-07-22 2017-06-15 触覚による操縦誘導システム
JP2019503273A Active JP6954989B2 (ja) 2016-07-22 2017-07-21 材料を作動させるための触覚システム
JP2019503284A Active JP7144400B2 (ja) 2016-07-22 2017-07-21 車両用触覚通知システム
JP2019503283A Active JP6944513B2 (ja) 2016-07-22 2017-07-21 オーディオコンテンツをユーザに送出するための触覚システム
JP2019503274A Active JP6949938B2 (ja) 2016-07-22 2017-07-21 触覚振動子デバイスによる反響定位

Country Status (5)

Country Link
US (6) US10890975B2 (ja)
EP (6) EP3487280B1 (ja)
JP (7) JP6992045B2 (ja)
CN (6) CN109475079B (ja)
WO (6) WO2018017210A1 (ja)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11059495B2 (en) * 2016-09-12 2021-07-13 Sony Corporation Information presentation apparatus, steering apparatus, and information presentation method
DK179471B1 (en) * 2016-09-23 2018-11-26 Apple Inc. IMAGE DATA FOR ENHANCED USER INTERACTIONS
KR102439054B1 (ko) 2017-05-16 2022-09-02 애플 인크. 이모지 레코딩 및 전송
US10281983B2 (en) 2017-09-20 2019-05-07 Alex Hamid Mani Haptic feedback device and method for providing haptic sensation based on video
US10503310B2 (en) * 2017-09-20 2019-12-10 Alex Hamid Mani Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user
US11726571B2 (en) 2017-09-20 2023-08-15 Niki Mani Assistive device for non-visually discerning a three-dimensional (3D) real-world area surrounding a user
US10275083B2 (en) 2017-09-20 2019-04-30 Alex Hamid Mani Assistive device with a refreshable haptic feedback interface
US11561619B2 (en) 2017-09-20 2023-01-24 Niki Mani Haptic feedback device and method for providing haptic sensation based on video
US11513627B2 (en) 2017-09-20 2022-11-29 Niki Mani Assistive device with a refreshable haptic feedback interface
EP3776291A1 (en) * 2018-03-26 2021-02-17 Sony Corporation Methods and apparatuses for proximity detection
US12033296B2 (en) 2018-05-07 2024-07-09 Apple Inc. Avatar creation user interface
US11009954B2 (en) 2018-06-02 2021-05-18 Harman International Industries, Incorporated Haptics device for producing directional sound and haptic sensations
CN108919277B (zh) * 2018-07-02 2022-11-22 深圳米唐科技有限公司 基于亚超声波的室内外环境识别方法、系统及存储介质
CN109254652A (zh) * 2018-08-13 2019-01-22 瑞声科技(新加坡)有限公司 车辆触摸显示屏的触觉反馈方法、系统及控制装置
CN109254658A (zh) * 2018-08-29 2019-01-22 上海天马微电子有限公司 触觉反馈方法、触觉反馈装置及触摸显示装置
US10860096B2 (en) 2018-09-28 2020-12-08 Apple Inc. Device control using gaze information
US11760377B2 (en) * 2019-02-26 2023-09-19 Harman International Industries, Incorporated Shape-shifting control surface for an autonomous vehicle
JP7333185B2 (ja) * 2019-03-27 2023-08-24 株式会社Subaru 車両の接近警報装置
US11067687B2 (en) 2019-04-25 2021-07-20 Elwha, Llc Multipath acoustic holography and virtual haptics
CN110347249B (zh) * 2019-06-25 2020-08-28 燕山大学 基于振型叠加触觉反馈方法
US10916107B1 (en) * 2019-07-29 2021-02-09 Elwha Llc Time-domain and frequency-domain enhancements for acoustic haptography
US11100801B2 (en) 2019-08-12 2021-08-24 Toyota Motor North America, Inc. Utilizing sensors to detect hazard from other vehicle while driving
US10962562B2 (en) * 2019-08-22 2021-03-30 Bayerische Motoren Werke Aktiengesellschaft Vehicle velocity indicator
JP7406328B2 (ja) * 2019-09-10 2023-12-27 株式会社東海理化電機製作所 制御装置、制御方法、およびプログラム
JP7282639B2 (ja) * 2019-09-10 2023-05-29 株式会社東海理化電機製作所 制御装置、制御方法、およびプログラム
US10824390B1 (en) * 2019-09-24 2020-11-03 Facebook Technologies, Llc Methods and system for adjusting level of tactile content when presenting audio content
US11282281B2 (en) * 2019-11-13 2022-03-22 At&T Intellectual Property I, L.P. Activation of extended reality actuators based on content analysis
CN111158465A (zh) * 2019-12-09 2020-05-15 瑞声科技(新加坡)有限公司 一种力触觉振动反馈方法及系统
CN110972020B (zh) * 2019-12-19 2021-06-01 东莞市逸音电子科技有限公司 一种新型智能触摸手感蓝牙耳机
CN111338468B (zh) * 2020-02-05 2022-01-28 吉林大学 一种基于交叉范式的移动终端触觉目标操作系统和方法
US11535260B2 (en) * 2020-03-05 2022-12-27 Harman International Industries, Incorporated Attention-based notifications
KR20210112633A (ko) * 2020-03-05 2021-09-15 현대자동차주식회사 퍼스널 모빌리티 및 그 제어 방법
US11703881B2 (en) * 2020-03-19 2023-07-18 Logistics And Supply Chain Multi Tech R&D Centre Limited Method of controlling a guide machine and a navigation system
US20210319656A1 (en) * 2020-04-10 2021-10-14 Igt Real-time analytics and feedback for electronic gaming machines
JP7072744B2 (ja) * 2020-05-13 2022-05-20 三菱電機株式会社 空中ハプティクス制御装置、空中ハプティクスシステム及び空中ハプティクス制御方法
KR102591674B1 (ko) * 2020-07-10 2023-10-23 한국전자통신연구원 음향 및 촉각 재생 장치
GB2597492B (en) * 2020-07-23 2022-08-03 Nissan Motor Mfg Uk Ltd Gesture recognition system
DE102020131513B3 (de) * 2020-11-27 2022-01-27 JENETRIC GmbH Vorrichtung und Verfahren zur berührungslosen optischen Abbildung eines ausgewählten Oberflächenbereiches einer Hand
US20220212691A1 (en) * 2021-01-05 2022-07-07 Ford Global Technologies, Llc Systems and methods for providing haptic feedback to drivers when aligning electrified vehicles to charging equipment
EP4264460A1 (en) 2021-01-25 2023-10-25 Apple Inc. Implementation of biometric authentication
WO2022254732A1 (ja) 2021-06-04 2022-12-08 国立大学法人東北大学 振動分配制御装置,振動分配制御プログラム及び振動分配制御方法
CN113335182A (zh) * 2021-07-21 2021-09-03 业成科技(成都)有限公司 车内安全系统及其操作方法
US20230128104A1 (en) * 2021-10-25 2023-04-27 Motional Ad Llc Accessibility system for assisting a user in interacting with a vehicle
JP7326505B2 (ja) * 2022-01-06 2023-08-15 本田技研工業株式会社 車両用警告装置
US20230311733A1 (en) * 2022-03-30 2023-10-05 Ghsp, Inc. Vehicle signal system having a plurality of force generators for producing a user-experienced feedback
CN115206337A (zh) * 2022-06-27 2022-10-18 瑞声开泰声学科技(上海)有限公司 一种振动马达的控制方法、装置、存储介质和电子设备

Family Cites Families (143)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4982434A (en) 1989-05-30 1991-01-01 Center For Innovative Technology Supersonic bone conduction hearing aid and method
US5282858A (en) * 1991-06-17 1994-02-01 American Cyanamid Company Hermetically sealed implantable transducer
US6856876B2 (en) * 1998-06-09 2005-02-15 Automotive Technologies International, Inc. Methods for controlling a system in a vehicle using a transmitting/receiving transducer and/or while compensating for thermal gradients
US6377693B1 (en) 1994-06-23 2002-04-23 Hearing Innovations Incorporated Tinnitus masking using ultrasonic signals
JP3184058B2 (ja) * 1994-12-16 2001-07-09 カルソニックカンセイ株式会社 車両用障害物検知方法およびその装置
US20060284839A1 (en) 1999-12-15 2006-12-21 Automotive Technologies International, Inc. Vehicular Steering Wheel with Input Device
US6139488A (en) 1997-09-25 2000-10-31 Symphonix Devices, Inc. Biasing device for implantable hearing devices
US6338028B1 (en) 1998-06-11 2002-01-08 Trw Inc. Ultrasonic sensor system and method having input capture for echo processing
US6643378B2 (en) 2001-03-02 2003-11-04 Daniel R. Schumaier Bone conduction hearing aid
US7623114B2 (en) 2001-10-09 2009-11-24 Immersion Corporation Haptic feedback sensations based on audio output from computer devices
US6904823B2 (en) * 2002-04-03 2005-06-14 Immersion Corporation Haptic shifting devices
US20040049323A1 (en) 2002-09-05 2004-03-11 Ford Global Technologies, Inc. Haptic seat notification system
JP3875178B2 (ja) 2002-11-05 2007-01-31 日本電信電話株式会社 ヘッドホン装置
JP4365158B2 (ja) 2003-07-23 2009-11-18 アロカ株式会社 2次元アレイ超音波探触子
JP4020036B2 (ja) * 2003-07-31 2007-12-12 日産自動車株式会社 コマンド入力装置
JP2005080227A (ja) 2003-09-03 2005-03-24 Seiko Epson Corp 音声情報提供方法及び指向型音声情報提供装置
GB0322489D0 (en) * 2003-09-25 2003-10-29 British Telecomm Haptics transmission systems
JP4254501B2 (ja) 2003-11-20 2009-04-15 日産自動車株式会社 車両用運転操作補助装置および車両用運転操作補助装置を備えた車両
JP2006199094A (ja) * 2005-01-19 2006-08-03 Hitachi Ltd 車両用情報呈示装置
CN101160104B (zh) * 2005-02-22 2012-07-04 马科外科公司 触觉引导系统及方法
CN101180584B (zh) * 2005-05-26 2011-04-13 思考方案有限公司 可配戴和可改变位置的振动节拍器
JP2007065798A (ja) * 2005-08-29 2007-03-15 Seiko Epson Corp タッチパネル装置
US8405618B2 (en) 2006-03-24 2013-03-26 Northwestern University Haptic device with indirect haptic feedback
US8780053B2 (en) 2007-03-21 2014-07-15 Northwestern University Vibrating substrate for haptic interface
JP2008039497A (ja) 2006-08-03 2008-02-21 Matsushita Electric Works Ltd 障害物検出装置
JP2010502086A (ja) * 2006-08-24 2010-01-21 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ハプティックな刺激を発生させるために音声信号及び/又はビデオ信号を処理するデバイス及び方法
JP4945303B2 (ja) * 2006-12-15 2012-06-06 本田技研工業株式会社 車両状態伝達装置
US7692552B2 (en) 2007-01-23 2010-04-06 International Business Machines Corporation Method and system for improving driver safety and situational awareness
JP4333883B2 (ja) 2007-01-24 2009-09-16 ヤマハ株式会社 モーションセンサ及びその製造方法
KR100889726B1 (ko) 2007-02-02 2009-03-24 한국전자통신연구원 촉각 자극 장치 및 이를 응용한 장치
EP1956466B1 (fr) 2007-02-12 2013-08-07 Universite Des Sciences Et Technologies De Lille Interface tactile vibrante
JP5056185B2 (ja) 2007-06-12 2012-10-24 日産自動車株式会社 車両のシフト案内装置
US20090073112A1 (en) 2007-09-14 2009-03-19 International Business Machines Corporation Method and system for dynamically configurable tactile feedback for navigational support
US7788032B2 (en) 2007-09-14 2010-08-31 Palm, Inc. Targeting location through haptic feedback signals
JP5448320B2 (ja) 2007-10-04 2014-03-19 キヤノン株式会社 圧電アクチュエータ及びそれを用いた液体吐出ヘッド
US9557915B2 (en) 2008-01-04 2017-01-31 Tactus Technology, Inc. Dynamic tactile interface
US20090219252A1 (en) * 2008-02-28 2009-09-03 Nokia Corporation Apparatus, method and computer program product for moving controls on a touchscreen
KR100984230B1 (ko) * 2008-03-20 2010-09-28 엘지전자 주식회사 근접 터치 감지 기능을 갖는 휴대 단말기 및 이를 이용한화면 제어 방법
US9829977B2 (en) 2008-04-02 2017-11-28 Immersion Corporation Method and apparatus for providing multi-point haptic feedback texture systems
DE102008064645A1 (de) 2008-04-11 2010-04-08 Knorr-Bremse Systeme für Nutzfahrzeuge GmbH Fahrerassistenzanlage für Kraftfahrzeuge und Verfahren zum haptischen Warnen eines Fahrers eines Kraftfahrzeuges
US20100013613A1 (en) 2008-07-08 2010-01-21 Jonathan Samuel Weston Haptic feedback projection system
JP2010066640A (ja) * 2008-09-12 2010-03-25 Yamaha Corp 楽器
US20110319703A1 (en) * 2008-10-14 2011-12-29 Cochlear Limited Implantable Microphone System and Calibration Process
JP2010118877A (ja) * 2008-11-12 2010-05-27 Sumida Corporation 体内埋込型スピーカ
US8362882B2 (en) 2008-12-10 2013-01-29 Immersion Corporation Method and apparatus for providing Haptic feedback from Haptic textile
US20100198458A1 (en) 2009-02-02 2010-08-05 Ford Global Technologies, Llc Navigation system with haptic assist
WO2010104953A1 (en) * 2009-03-10 2010-09-16 Artificial Muscle, Inc. Electroactive polymer transducers for tactile feedback devices
JP5694205B2 (ja) 2009-03-12 2015-04-01 イマージョン コーポレーションImmersion Corporation 摩擦ディスプレイシステム及び方法、並びに付加的な触覚効果
US9696803B2 (en) * 2009-03-12 2017-07-04 Immersion Corporation Systems and methods for friction displays and additional haptic effects
EP3467624A1 (en) * 2009-03-12 2019-04-10 Immersion Corporation System and method for interfaces featuring surface-based haptic effects
KR101032635B1 (ko) * 2009-04-16 2011-05-09 한국과학기술원 자동차 네비게이션 시스템, 자동차 네비게이션용 스티어링 휠 및 커버, 이를 포함하는 자동차 및 이를 이용한 자동차 주행안내방법
CN201440697U (zh) * 2009-04-20 2010-04-21 康佳集团股份有限公司 一种显示按键功能设备
KR100971220B1 (ko) * 2009-08-17 2010-07-20 주식회사 에프티랩 Lc공진주파수 변이를 이용한 정전용량방식 터치스크린패널의 검사방법
US8610549B2 (en) * 2009-10-16 2013-12-17 Immersion Corporation Systems and methods for providing haptic feedback at multiple resonance frequencies
US20110115709A1 (en) 2009-11-17 2011-05-19 Immersion Corporation Systems And Methods For Increasing Haptic Bandwidth In An Electronic Device
BR112012020482A2 (pt) * 2010-02-16 2019-09-24 Bayer Ip Gmbh aparelho háptico e técnicas para quantificar a capacidade do mesmo.
US20110267294A1 (en) * 2010-04-29 2011-11-03 Nokia Corporation Apparatus and method for providing tactile feedback for user
US8519982B2 (en) 2010-06-21 2013-08-27 Sony Corporation Active acoustic touch location for electronic devices
US20130222311A1 (en) 2010-06-28 2013-08-29 Nokia Corporation Haptic surface compression
JP5343946B2 (ja) * 2010-08-25 2013-11-13 株式会社デンソー 触覚提示装置
US8405522B2 (en) * 2010-09-30 2013-03-26 Ford Global Technologies, Llc Lane departure haptic warning with compensation for road-caused vibration
US8547215B2 (en) * 2010-11-24 2013-10-01 Denso Corporation Information presentation apparatus and system
US8845110B1 (en) 2010-12-23 2014-09-30 Rawles Llc Powered augmented reality projection accessory display device
JP5924802B2 (ja) * 2011-01-26 2016-05-25 日本電気株式会社 入力装置
US9417696B2 (en) * 2011-01-27 2016-08-16 Blackberry Limited Portable electronic device and method therefor
US10039672B2 (en) 2011-03-23 2018-08-07 Ali Mohammad Aghamohammadi Vibro-electro tactile ultrasound hearing device
US8581714B2 (en) 2011-05-20 2013-11-12 Ford Global Technologies, Llc Method and apparatus for generating vehicle vibration to alert vehicle user of warning
US9083821B2 (en) 2011-06-03 2015-07-14 Apple Inc. Converting audio to haptic feedback in an electronic device
DE102011111543A1 (de) * 2011-08-17 2013-02-21 Continental Automotive Gmbh Bedieneinrichtung
JP2013053867A (ja) * 2011-09-01 2013-03-21 Sharp Corp 距離検出システム
CN104169847B (zh) * 2011-11-18 2019-03-12 森顿斯公司 局部触觉反馈
DE102011088309A1 (de) * 2011-12-12 2013-06-13 Robert Bosch Gmbh Verfahren und Steuergerät zum Steuern von vorhersehbaren haptisch wahrnehmbaren Signalen in einem Fahrpedal eines Kraftfahrzeugs
US20140309876A1 (en) 2013-04-15 2014-10-16 Flextronics Ap, Llc Universal vehicle voice command system
CN103649885B (zh) 2012-04-27 2017-03-01 松下知识产权经营株式会社 触觉提示装置、触觉提示方法、驱动信号生成装置以及驱动信号生成方法
WO2013177587A2 (en) * 2012-05-25 2013-11-28 Immerz Inc. Haptic interface for portable electronic device
US8970358B2 (en) 2012-06-22 2015-03-03 GM Global Technology Operations LLC Alert systems and methods for a vehicle
US9153108B2 (en) * 2012-06-22 2015-10-06 GM Global Technology Operations LLC Alert systems and methods for a vehicle
US9545879B2 (en) * 2012-06-22 2017-01-17 GM Global Technology Operations LLC Vehicle seat back haptic alert systems and methods
US9198714B2 (en) 2012-06-29 2015-12-01 Ethicon Endo-Surgery, Inc. Haptic feedback devices for surgical robot
US20140056461A1 (en) 2012-08-21 2014-02-27 Immerz, Inc. Systems and methods for a vibrating input device
DE102012215350A1 (de) 2012-08-29 2014-03-06 Continental Automotive Gmbh Multisensuelle Aufmerksamkeitslenkung
US8945328B2 (en) 2012-09-11 2015-02-03 L.I.F.E. Corporation S.A. Methods of making garments having stretchable and conductive ink
CN104756173B (zh) * 2012-09-17 2018-02-06 沃尔沃拉斯特瓦格纳公司 用于将基于背景的指导消息提供给汽车驾驶员的方法
FI20120340A (fi) * 2012-10-08 2014-04-09 Canatu Oy Kosketusrajapintalaite ja rakenne
US9002020B1 (en) 2012-10-22 2015-04-07 Google Inc. Bone-conduction transducer array for spatial audio
JP6183661B2 (ja) * 2012-11-30 2017-08-23 パナソニックIpマネジメント株式会社 触感呈示装置および触感呈示方法
KR102184288B1 (ko) * 2013-01-17 2020-11-30 삼성전자주식회사 입력 유닛에 햅틱 효과를 제공하는 휴대 단말 및 방법
US9081651B2 (en) 2013-03-13 2015-07-14 Ford Global Technologies, Llc Route navigation with optimal speed profile
KR20140115836A (ko) * 2013-03-22 2014-10-01 삼성전자주식회사 햅틱 효과를 제공하는 휴대 단말 및 방법
US9367136B2 (en) * 2013-04-12 2016-06-14 Microsoft Technology Licensing, Llc Holographic object feedback
US20140350640A1 (en) * 2013-05-22 2014-11-27 Jim Patrick Implantable Medical Device and Tool Sensors
US9596534B2 (en) 2013-06-11 2017-03-14 Dsp Group Ltd. Equalization and power control of bone conduction elements
US20150018660A1 (en) 2013-07-11 2015-01-15 Alivecor, Inc. Apparatus for Coupling to Computing Devices and Measuring Physiological Data
US10359857B2 (en) * 2013-07-18 2019-07-23 Immersion Corporation Usable hidden controls with haptic feedback
US9619980B2 (en) 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals
US9711014B2 (en) * 2013-09-06 2017-07-18 Immersion Corporation Systems and methods for generating haptic effects associated with transitions in audio signals
US10162416B2 (en) * 2013-09-06 2018-12-25 Immersion Corporation Dynamic haptic conversion system
US9213408B2 (en) 2013-10-08 2015-12-15 Immersion Corporation Generating haptic effects while minimizing cascading
JP6056729B2 (ja) * 2013-10-15 2017-01-11 株式会社デンソー 触覚提示装置
WO2015054789A1 (en) * 2013-10-18 2015-04-23 Hagedorn Douglas Systems and methods for non-visual spatial interfacing with a computer
FR3014571B1 (fr) * 2013-12-11 2021-04-09 Dav Dispositif de commande a retour sensoriel
US9248840B2 (en) 2013-12-20 2016-02-02 Immersion Corporation Gesture based input system in a vehicle with haptic feedback
US9623907B2 (en) * 2014-01-13 2017-04-18 Harman International Industries, Inc. Haptic language through a steering mechanism
US20150199950A1 (en) 2014-01-13 2015-07-16 DSP Group Use of microphones with vsensors for wearable devices
EP2902864B1 (en) * 2014-01-30 2017-05-31 Volvo Car Corporation Control arrangement for autonomously driven vehicle
WO2015127119A2 (en) 2014-02-24 2015-08-27 Sony Corporation Body position optimization and bio-signal feedback for smart wearable devices
US10067566B2 (en) * 2014-03-19 2018-09-04 Immersion Corporation Systems and methods for a shared haptic experience
KR20150110356A (ko) 2014-03-21 2015-10-02 임머숀 코퍼레이션 센서의 데이터를 햅틱 효과들로 변환하는 시스템들 및 방법들
JP2015186072A (ja) 2014-03-25 2015-10-22 オンキヨー株式会社 音声信号出力装置
KR20150118813A (ko) * 2014-04-15 2015-10-23 삼성전자주식회사 햅틱 정보 운용 방법 및 이를 지원하는 전자 장치
US10232113B2 (en) 2014-04-24 2019-03-19 Medtronic Minimed, Inc. Infusion devices and related methods and systems for regulating insulin on board
DE102014207807A1 (de) * 2014-04-25 2015-10-29 Bayerische Motoren Werke Aktiengesellschaft Personenbezogene Fahrerunterstützung
US9283847B2 (en) 2014-05-05 2016-03-15 State Farm Mutual Automobile Insurance Company System and method to monitor and alert vehicle operator of impairment
US9656606B1 (en) 2014-05-30 2017-05-23 State Farm Mutual Automobile Insurance Company Systems and methods for alerting a driver to vehicle collision risks
FR3022726A1 (fr) * 2014-06-18 2015-12-25 Sebastien Andre Rene Descamps Dispositif d'amplification autonome pour instrument de musique
US9696806B2 (en) 2014-07-02 2017-07-04 Immersion Corporation Systems and methods for multi-output electrostatic haptic effects
US9262924B2 (en) 2014-07-09 2016-02-16 Toyota Motor Engineering & Manufacturing North America, Inc. Adapting a warning output based on a driver's view
US20140320402A1 (en) 2014-07-14 2014-10-30 Immersion Corporation Self calibration for haptic devices
WO2016036671A2 (en) * 2014-09-02 2016-03-10 Apple Inc. Haptic notifications
JP2016078602A (ja) * 2014-10-15 2016-05-16 ヤンマー株式会社 作業車両
US9827904B2 (en) * 2014-10-20 2017-11-28 Immersion Corporation Systems and methods for enhanced continuous awareness in vehicles using haptic feedback
US9290174B1 (en) 2014-10-23 2016-03-22 GM Global Technology Operations LLC Method and system for mitigating the effects of an impaired driver
CN204215357U (zh) * 2014-11-11 2015-03-18 深圳市视晶无线技术有限公司 操作器突出显示系统
US9600076B2 (en) 2014-12-19 2017-03-21 Immersion Corporation Systems and methods for object manipulation with haptic feedback
US9658693B2 (en) * 2014-12-19 2017-05-23 Immersion Corporation Systems and methods for haptically-enabled interactions with objects
US9836124B2 (en) * 2014-12-31 2017-12-05 Harman International Industries, Incorporated Techniques for dynamically changing tactile surfaces of a haptic controller to convey interactive system information
GB2534164B (en) * 2015-01-14 2018-11-14 Jaguar Land Rover Ltd Vehicle interface device
US10099608B2 (en) 2015-01-16 2018-10-16 Ford Global Technologies, Llc Haptic vehicle alert based on wearable device
KR102301621B1 (ko) 2015-01-16 2021-09-14 삼성전자주식회사 스타일러스 펜, 터치 패널 및 이들을 구비한 좌표 측정 시스템
US9595250B2 (en) 2015-01-22 2017-03-14 Paul Ierymenko Handheld vibration control device for musical instruments
US10353467B2 (en) 2015-03-06 2019-07-16 Apple Inc. Calibration of haptic devices
US10275029B2 (en) 2015-06-22 2019-04-30 Accenture Global Solutions Limited Directional and awareness guidance device
US20170021762A1 (en) 2015-07-22 2017-01-26 Denso International America, Inc. Haptic System And Method Of Controlling A Haptic System
US10664053B2 (en) 2015-09-30 2020-05-26 Apple Inc. Multi-transducer tactile user interface for electronic devices
JP6576225B2 (ja) 2015-11-27 2019-09-18 クラリオン株式会社 車両用報知装置および車両用報知方法
US10235848B2 (en) 2015-12-09 2019-03-19 Immersion Corporation Public network transmission of haptic effect signals
DE102016200897A1 (de) 2016-01-22 2017-07-27 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Vorrichtung zum zumindest teilweise automatisierten Fahren
US10013858B2 (en) 2016-02-26 2018-07-03 At&T Intellectual Property I, L.P. Notification system with haptic feedback garment and methods for use therewith
FR3048544B1 (fr) 2016-03-01 2021-04-02 Valeo Comfort & Driving Assistance Dispositif et methode de surveillance d'un conducteur d'un vehicule automobile
US9983775B2 (en) 2016-03-10 2018-05-29 Vignet Incorporated Dynamic user interfaces based on multiple data sources
US10026309B1 (en) 2016-04-11 2018-07-17 State Farm Mutual Automobile Insurance Company Networked vehicle control systems to facilitate situational awareness of vehicles
US20170336903A1 (en) * 2016-05-19 2017-11-23 Ciena Corporation Touch and pressure sensitive surface with haptic methods for blind probe alignment
US9827811B1 (en) 2016-07-14 2017-11-28 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicular haptic feedback system and method

Also Published As

Publication number Publication date
JP6992045B2 (ja) 2022-01-13
US20190268693A1 (en) 2019-08-29
CN109476318B (zh) 2022-06-24
CN109477721A (zh) 2019-03-15
EP3488427A1 (en) 2019-05-29
EP3488184A4 (en) 2019-12-25
JP6954989B2 (ja) 2021-10-27
JP2019527431A (ja) 2019-09-26
CN109564464A (zh) 2019-04-02
JP2019527432A (ja) 2019-09-26
CN109475079A (zh) 2019-03-15
JP7248568B2 (ja) 2023-03-29
US20190283780A1 (en) 2019-09-19
CN109478354B (zh) 2022-02-08
WO2018018003A1 (en) 2018-01-25
EP3487280B1 (en) 2022-03-30
WO2018017934A1 (en) 2018-01-25
EP3487739A1 (en) 2019-05-29
US11392201B2 (en) 2022-07-19
EP3487280A4 (en) 2019-12-25
CN109475079B (zh) 2023-03-14
EP3488184A1 (en) 2019-05-29
US10915175B2 (en) 2021-02-09
WO2018017932A1 (en) 2018-01-25
US20190235630A1 (en) 2019-08-01
EP3488325A1 (en) 2019-05-29
EP3488326B1 (en) 2024-01-03
JP2019523498A (ja) 2019-08-22
JP2019527430A (ja) 2019-09-26
JP6944513B2 (ja) 2021-10-06
US20190276051A1 (en) 2019-09-12
EP3487280A1 (en) 2019-05-29
JP7144400B2 (ja) 2022-09-29
WO2018017933A1 (en) 2018-01-25
CN109478354A (zh) 2019-03-15
US20190227631A1 (en) 2019-07-25
JP2019523497A (ja) 2019-08-22
EP3488325A4 (en) 2020-01-08
US20190243450A1 (en) 2019-08-08
WO2018017212A1 (en) 2018-01-25
EP3488184B1 (en) 2023-03-22
US10671170B2 (en) 2020-06-02
US11126263B2 (en) 2021-09-21
JP6949938B2 (ja) 2021-10-13
EP3487739A4 (en) 2019-12-25
EP3488325B1 (en) 2023-04-19
EP3488326A4 (en) 2020-01-01
US11275442B2 (en) 2022-03-15
WO2018017210A1 (en) 2018-01-25
JP2019530049A (ja) 2019-10-17
EP3488427A4 (en) 2019-12-25
CN109478102B (zh) 2022-09-23
CN109478102A (zh) 2019-03-15
CN109476318A (zh) 2019-03-15
US10890975B2 (en) 2021-01-12
EP3488427B1 (en) 2023-04-05
EP3487739B1 (en) 2022-03-23
EP3488326A1 (en) 2019-05-29
CN109564464B (zh) 2024-01-09

Similar Documents

Publication Publication Date Title
JP2022075801A (ja) 触覚による操縦誘導システム
JP6882388B2 (ja) 圧力応答式タッチスクリーンの検出タッチ位置と関連する入力区域の固定装置及び方法
CN104516642B (zh) 把手开关装置
CN108068828B (zh) 用于驾驶系统控制的触觉反馈
JP6851197B2 (ja) 多次元トラックパッド
JP4891286B2 (ja) 遠隔操作装置
EP3409553B1 (en) System and method for automated execution of a maneuver or behavior of a system
JP6579579B2 (ja) ステアリング制御装置
US11518242B2 (en) Systems and methods for locking an input area associated with detected touch location in a force-based touch display
WO2018198506A1 (ja) 駐車支援装置
WO2017145742A1 (ja) 車両及び車両における制御方法
JP7192413B2 (ja) 車両用操作装置
US12122403B2 (en) Method for generating warning signal of integrated control apparatus for autonomous vehicles
US20170192546A1 (en) Apparatus, system, and method for controlling device
KR20230037917A (ko) 자율주행 차량용 통합조작장치의 경고신호 발생방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220311

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20230316