JP4656177B2 - ナビゲーション装置、操作部表示方法 - Google Patents

ナビゲーション装置、操作部表示方法 Download PDF

Info

Publication number
JP4656177B2
JP4656177B2 JP2008104733A JP2008104733A JP4656177B2 JP 4656177 B2 JP4656177 B2 JP 4656177B2 JP 2008104733 A JP2008104733 A JP 2008104733A JP 2008104733 A JP2008104733 A JP 2008104733A JP 4656177 B2 JP4656177 B2 JP 4656177B2
Authority
JP
Japan
Prior art keywords
driver
vehicle
learning
unit
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008104733A
Other languages
English (en)
Other versions
JP2009257832A (ja
Inventor
圭介 岡本
賢也 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2008104733A priority Critical patent/JP4656177B2/ja
Priority to DE112009000910T priority patent/DE112009000910T5/de
Priority to PCT/JP2009/057279 priority patent/WO2009128387A1/ja
Priority to CN2009801129623A priority patent/CN102007373A/zh
Priority to US12/922,593 priority patent/US20110035144A1/en
Publication of JP2009257832A publication Critical patent/JP2009257832A/ja
Application granted granted Critical
Publication of JP4656177B2 publication Critical patent/JP4656177B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3641Personalized guidance, e.g. limited guidance on previously travelled routes
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • G08G1/0969Systems involving transmission of navigation instructions to the vehicle having a display in the form of a map

Description

本発明は、ナビゲーション装置等に関し、特に、表示部に表示される操作ボタンの表示態様を変更するナビゲーション装置及び操作部表示方法に関する。
ナビゲーション装置のユーザインターフェイスに表示部と操作部を兼用したタッチパネルが用いられており、キーボードなどのハード的な操作部を最小限にして空間効率を向上させ、また、直感的な操作を可能とするなど操作性を向上させている。タッチパネルについて、走行中の操作性を向上させるべく走行中はタッチパネルに形成された操作ボタンを大きくするナビゲーション装置が提案されている(例えば、特許文献1参照。)。走行中に操作ボタンが大きくなれば走行中の誤操作を低減することができる。
また、ナビゲーション装置が表示する自車アイコンを変化させることができるナビゲーション装置が提案されている(例えば、特許文献2参照。)。特許文献2記載のナビゲーション装置は、高速走行を好む等の運転者の運転者特性に応じて自車アイコンを擬人化して表示したり、擬人化した自車アイコンを成長させて表示する。
特開2006−17478号公報 特開2000−283771号公報
ところで、ナビゲーション装置は高機能化が進んでいるため、単に走行中に操作ボタンを大きくするだけでは、必ずしも操作性を向上させることができなくなってきている。例えば、特許文献1記載のナビゲーション装置のように、車両状態のみに応じて操作ボタンを大きくすることは、運転の得意な運転者にも運転の初心者にも同じユーザインターフェイスを提供するものであるため、各運転者の操作性を向上させることになるとは限らないという問題がある。
この点、特許文献2記載のナビゲーション装置は、運転者特性を検出して自車アイコンを変化させるが、自車アイコンの変更は各運転者に好適な演出効果をもたらす可能性はあっても、操作性を向上させることはできない。
本発明は、上記課題に鑑み、運転者の特性に応じて各運転者の操作性を向上させることができるナビゲーション装置及び操作部表示方法を提供することを目的とする。
上記課題に鑑み、本発明は、表示部に表示された操作部の接触位置により操作されるナビゲーション装置において、走行時の車両操作(ナビ画面を含む)を検出する車両操作検出手段と、前記車両操作検出手段が検出した前記車両操作に基づき、運転者操作情報を取得する車両操作取得手段と、前記運転者操作情報に基づき運転者の運転者特性を学習する運転者特性学習手段と、前記運転者特性学習手段が学習した学習結果に応じて、前記操作部の表示態様を変更する操作部生成手段と、走行時の車両環境を検出する車両環境検出手段と、前記車両環境検出手段が検出した前記車両環境に基づき、車両環境情報を取得する環境情報取得手段と、を有し、前記運転者特性学習手段は、所定の車両環境における前記運転者操作情報に基づき運転者の運転者特性を学習する、ことを特徴とする。
本発明によれば、運転者の特性に応じて操作ボタンをカスタマイズできるので、各運転者にとって操作性を向上することができる。
本発明によれば、車両の走行環境に対応づけて運転者特性を学習できるので、走行環境毎に操作ボタンをカスタマイズすることができる。
運転者の特性に応じて各運転者の操作性を向上させることができるナビゲーション装置及び操作部表示方法を提供することができる。
以下、本発明を実施するための最良の形態について、図面を参照しながら説明する。
図1は、走行中のナビゲーション装置100のHMI(Human Machine Interface)の一例を示す図である。このHMIはタッチパネルを備えた表示部28に表示される。ナビゲーション装置100は、操作ボタンA〜F(以下、区別しない場合、単に操作ボタンという)に対応した機能を提供するが、走行中は複雑な操作を制限して運転者の負荷を低減する観点から、操作ボタンA、D、Eのみが操作可能となっている(以下、走行操作制限という。)。なお、車両が停止中は、操作ボタンA〜Eの全てを操作可能である。停止中か否かはパーキングブレーキのオン、車速がゼロであることの少なくとも一方から判定される。
本実施形態ではこの3つの操作ボタンA、D、Eの表示可否、配置、サイズ、輝度、色(以下、単に表示態様という)を運転者特性に応じて変更(以下、カスタマイズという)する。これにより、各運転者毎に操作性が向上するように表示態様をカスタマイズできる。例えば、ナビゲーション装置100の操作(以下、ナビ操作という)を間違えやすい運転者に対しては、図1の右上に示すように、基本的な機能を提供する操作ボタンA、EのみをHMIに表示する。また、操作ボタンA、Eを大きく表示したり、操作ボタンA、Eの判定範囲を操作ボタンA,Eの外縁よりも拡大することで、ナビ操作を間違いやすい運転者でも容易に操作することが可能となる。
また、例えば、注意力が散漫になりやすい(例えば、急ブレーキの頻度が多い)運転者に対しては、図1の右中に示すように、走行中は操作ボタンA、D、Eの全ての操作を禁止することができる。ナビゲーション装置100は、操作ボタンA、D、Eをトーンダウン(輝度や彩度を低下させ)したり、HMIから消去し、仮に運転者が操作してもその機能を提供しない。したがって、走行中に注意力が散漫となる運転者の操作負荷を低減することができる。
また、例えば、冷静な運転者に対しては、カスタマイズすることなくHMIを提供する。したがって、冷静な運転者は制限なくナビゲーション装置100を操作できる。また、冷静な運転者に対しては、走行操作制限を緩和して、カスタマイズ前が操作ボタンA、D、Eであるなら、操作ボタンB等を操作可能とするなど、走行操作制限の操作ボタンより多くの操作ボタンを操作可能としてもよい。走行操作制限は、安全サイドに設定されているため、冷静な運転者にとっては制限が厳格過ぎる場合があるが、本実施形態では走行操作制限を緩和できるので、運転者の操作性を向上させることができる。
なお、同じ運転者であっても、精神状態、体調、運転の慣れ等により運転者特性は変化するので、本実施形態のナビゲーション装置100は、運転者特性を随時学習しながら、同じ運転者の運転者特性の変化に応じて動的にHMIをカスタマイズすることができる。
図2は、ナビゲーション装置100の機能ブロック図の一例を示す。図2は運転者特性を学習するプロセスにおける機能ブロック図である。ナビゲーション装置100は、制御部20により制御され、制御部20には、ナビゲーション装置100を操作する操作部11、エンジン等の各車載装置を制御するECU(electronic control unit)、車両の状態を検出する各センサ13、現在位置を取得する位置取得部14、VICS(Vehicle Information and Communication System)が配信する交通情報を受信するVICS受信装置17、プローブカーセンタ(プローブカーから収集したプローブ情報から交通情報を生成し配信するサーバ)から交通情報を受信するセンター情報受信装置18、及び、操作ボタンを表示する表示部28が接続されている。
また、制御部20はCPU、RAM、不揮発メモリ、入出力インターフェイス等を備えたコンピュータを実体とし、CPUがプログラムを実行するか、ASIC等のハードウェアにより実現される、運転者操作情報取得部21、環境情報取得部22及び運転者特性学習部23、を有し、不揮発メモリには学習した運転者特性を記憶する運転者特性DB25、制限レベルテーブル26、及び、HMI規定テーブル27を記憶する。
操作部11は、図1のHMIに形成される操作ボタンA〜E、HMIの周囲に設けられるキーボード、リモコン、又は、音声入力のためのマイクと音声認識装置の少なくとも1以上を有する。操作部11のナビ操作からナビゲーション装置100の運転者操作情報が検出される。また、各ECU12及び各センサ13は、ナビ操作以外の運転者の運転者操作情報を取得する。車両の基本的な車両操作として、操舵、加速及び減速があり、その他の車両操作としてウィンカ操作、ワイパー操作、パーキングブレーキ操作、等がある。各ECU12及び各センサ13はこのような車両操作に伴う運転者操作情報を取得する。
ナビ操作は、車両操作の一態様であるので車両操作に含まれるが、本実施形態では説明のため、ナビゲーション装置100を操作するナビ操作と、ウィンカ等を操作する車両操作とを区別する。
〔運転者操作情報の取得〕
a)操作部11からナビゲーション装置100のナビ操作を検出する。運転者操作情報取得部21は、操作ボタンの一連の操作情報を記憶しておき、その間の「戻る」操作、タッチミス(操作ボタンでない位置をタッチ)等から運転者のナビ操作における間違えを検出し、それを運転者操作情報として取得する。
b)各ECU12及び各センサ13はステアリングホイールの操舵角から車両が操舵されていることを検出し、さらに、各ECU12及び各センサ13が検出する車速、ヨーレート、横Gから、運転者操作情報取得部21は、旋回時の運転者操作情報を取得する。
c)各ECU12及び各センサ13は例えばアクセルペダル開度から車両が加速操作されていることを検出し、さらに、各ECU12及び各センサ13が検出する加速度、車速等から、運転者操作情報取得部21は加速時の運転者操作情報を取得する。
d)各ECU12及び各センサ13は、例えばストップランプスイッチのオンから車両が減速操作されていることを検出し、さらに、各ECU12及び各センサ13が検出する減速度、マスタシリンダ圧等から、運転者操作情報取得部21は減速時の運転者操作情報を取得する。
e)ウィンカ操作時に各ECU12及び各センサ13は、ウィンカ操作後から操舵までの時間、車速、操舵角、を検出するので、運転者操作情報取得部21は、これらから車線変更や右左折時の運転者操作情報を取得する。例えばウィンカを点灯させてから車線変更までの時間が短い、ウィンカを点灯せずに車線変更したなどの運転者操作情報が取得される。
f)ワイパー操作時に各ECU12及び各センサ13は、雨滴量、ワイパーの操作位置(Hi、Low、Int)、を検出するので、運転者操作情報取得部21は、これらから雨天時の運転者操作情報を取得する。例えば、雨滴が検出されてからワイパーをオンするまでの時間が長い、雨滴が検出されなくなってからワイパーを停止するまでの時間が長い、などの運転者操作情報が取得される。
g)車速がゼロになると各ECU12及び各センサ13は、パーキングブレーキのオン/オフ、シフトポジションを検出するので、運転者操作情報取得部21は、これらから停車時にパーキングブレーキのオンに操作するか否かなど停車時の運転者操作情報を取得する。
h)ハンズフリー装置を搭載している場合、各ECU12及び各センサ13は、着信に対し応答するか、公共モード(ドライブモード)にて対応するか、又は、相手を発呼する頻度を検出するので、運転者操作情報取得部21は、これらからハンズフリー装置の運転者操作情報を取得する。
i)また、運転者の直接的な運転者操作情報ではないが、運転者特性として覚醒度を検出することができる。各ECU12及び各センサ13(顔カメラ)は、走行時には運転者の視線方向や眠けを検出しており、運転者操作情報取得部21は、視線が停留して漫然運転に陥ったり眠けが生じた(以下、覚醒度が低下するという)状態を運転者操作情報として検出する。
〔環境情報の取得〕
環境情報とは、走行中に、運転者や運転者の操作の有無に関わらず各運転者の全てに共通に生じる事象である。例えば、渋滞、天候、信号待ち、特定の位置や道路の通過、等である。
I)VICS受信装置17は、VICSがFM方法、電波ビーコン又は光ビーコンを媒体に配信する渋滞の有無やリンク等の旅行時間を含む交通情報を受信する。また、センター情報受信装置18は、例えば、携帯電話等の通信網に接続して交通情報を受信する。VICSが配信する交通情報は主要な幹線道路に限られているのに対し、プローブカーセンターが配信する交通情報は車両が通行する道路を含みうるので、より広範囲の交通情報を受信できる。なお、VICS受信装置17とセンター情報受信装置18が受信する交通情報は完全に同一でないが、本実施形態ではこれらを区別しない。環境情報取得部22は、交通情報を環境情報として取得する。
II)各センサ13は、天候情報を取得する。この場合の各センサ13は例えば天候情報を配信するサーバに接続する通信装置、雨滴センサ、外気温センサ、日射センサ等である。なお、日本では気象庁がアメダス情報を提供しているので、環境情報取得部22は、例えばアメダス情報に含まれる降水量、積雪量、風向、気温及び日照時間等の環境情報を取得する。
III)各センサ13は、時刻情報や曜日、日付等を検出する。この場合のセンサは時計やカレンダである。環境情報取得部22は、日中、夜間、深夜、明け方、平日、休日等の環境情報を取得する。
IV)信号待ち、交差点、特定の位置・道路(橋梁、踏切等)、などは車両の位置から検出される環境情報となる。位置取得部14は、GPS受信機15と地図DB16を有し、GPS受信機15がGPS衛星から受信した電波の到達時間に基づき車両の現在位置(緯度・経度・標高)を検出する。地図DB16には、道路を交差点や所定間隔で区切るノードが位置情報に対応づけて記憶されており、ノードを道路に対応するリンクで結ぶことで道路網を表現している。地図DB16には、交差点、橋梁、トンネル、踏切、海岸、山間部、等を検出する情報が記憶されているので、車両が走行している位置から、環境情報が検出される。環境情報取得部22は、自車の位置に基づき信号待ち、交差点、特定の位置・道路などの環境情報を取得する。
〔運転者特性の学習〕
運転者特性学習部23は、運転者操作情報及び環境情報に基づき運転者特性を学習する。運転者操作情報a)〜i)と環境情報I)〜IV)の組み合わせ毎に、運転者特性を学習しうる。運転者特性学習部23はこれらの組み合わせ毎に得られる運転者特性を学習していく。なお、一台の車両を複数の運転者が運転する場合があるので、例えば、キーID毎に運転者特性を学習する。
図3、4は、運転者特性DB25に記憶される運転者特性情報の一例を示す。図3、4は、学習される一部の運転者特性を抜き出したものであって、運転者特性の一例として注意散漫度と性急度を学習している。これらの値が大きいほど、注意散漫に陥ったり焦燥感を感じやすいことになり、後述するようにHMIの制限が大きくなる。
図3(a)はナビ操作の間違いにより学習される注意散漫度の学習量の一例を示す。ナビ操作を間違うとナビ操作に余計な時間がかかることになり、結果的に運転に割くことができる注意力が低下すると考えられる。このため、ナビ操作を間違うか、間違わないかに応じて、ナビ画面操作時の学習量が設定されている。また、払うべき注意は状況変化の大きい交差点、見通しの悪くなる夜間等の環境情報に応じて異なるので、これら環境情報に応じて学習量が異なっている。例えば、交差点を走行中にナビ操作を間違えると注意散漫度が「+4」増えることになる。学習の結果得られる現在の注意散漫度は、現在学習値として記憶される。現在学習値は、後に、HMIの表示態様をカスタマイズする際に参照される。
図3(b)は減速時に学習される注意散漫度の学習量の一例を示す。減速時に減速度が大きい場合、停止又は減速すべき走行環境で減速の開始が遅れていると推定できる。このため、減速度が所定値以上か所定値未満かに応じて、減速時における注意散漫度の学習量が設定されている。また、交差点で大きな減速度で減速することは、歩行者の横断や信号機の表示等に直前まで気づかない状況と推定できるので、注意散漫度の学習量が位置全般よりも大きくなっている。同様に、渋滞列の末尾や渋滞列を走行中に、大きな減速度で減速することは、前方の渋滞に直前まで気づかない状況と推定できるので、渋滞時の注意散漫度の学習量が大きくなっている。
図3(c)は前照灯の操作により学習される注意散漫度の学習量の一例を示す。トンネルを走行時、国によっては前照灯を点灯することが法令により義務づけられていることがあるが、トンネルを走行時に前照灯を点灯しないことは走行環境に対する注意力が低下していると推定できる。このため、トンネルの走行時に点灯するか否かに応じて前照灯の操作に基づく注意散漫度の学習量が設定されている。
この他、覚醒度が低下している場合、注意力も散漫になると推定してよいので、覚醒度が低下している場合に、注意散漫度の学習量(プラス側)を増大させてもよい。これにより、覚醒度が低い場合にはHMIを制限することができる。なお、覚醒度のみを検出するのでなく、ナビ操作、減速時、前照灯の操作等、の運転者操作情報に加えて覚醒度を検出し、覚醒度が低い場合にのみ注意散漫度を学習してもよいし、覚醒度が低い場合には注意散漫度の学習量(プラス側)を大きくしてもよい。覚醒度により注意が散漫になりやすいことを考慮すると、覚醒度と共に注意散漫度を学習することでより適格に注意散漫度の学習が可能となる。
図4(a)は操舵時に学習される性急度の学習量の一例を示す。性急度とは、目的地までの到達を必要以上に急いだり、信号待ちなどで焦燥感に駆られた際に生じうる心理状態を車両操作から検出した指標である。同じ車両操作から注意散漫度を検出してもよいが、本実施形態では便宜的に区別した。
運転者が操舵するのは、カーブなどの旋回走行時、交差点の右左折、車線変更時等であるが、操舵時のヨーレートが大きい場合、車両の操舵が急激であると推定できる。このためヨーレートが所定値以上か所定値未満かに応じて、操舵時における性急度の学習量が設定されている。なお、操舵が急激か否かは、ヨーレートでなく横加速度やロール角等から検出してもよい。また、旋回走行、交差点の右左折又は車線変更、のぞれぞれで急激と見なせるヨーレートは異なるので、「所定値」はそれぞれの走行環境に応じて可変とする。
図4(b)は車速に基づき学習される性急度の学習量の一例を示す。車速が制限速度を超える場合、目的地に早期に到着したいという心理状態にあると推定できるので、制限速度を守るか否かに応じて、性急度の学習量が設定されている。なお、制限速度に対する感覚は国民性や文化によって異なるので、制限速度そのものでなく制限速度の80%、制限速度の1.2倍などを基準に性急度を学習してもよい。
図4(c)は踏切走行時の減速に基づき学習される性急度の学習量の一例を示す。国によっては踏切走行時に一時停止することが義務づけられていることがあるが、踏切走行時に一時停止しないことは目的地に急いで到着したいという心理状態であると推定できる。このため、踏切走行時に一時停止するか否か、すなわち車速がゼロになるか否か応じて性急度の学習量が設定されている。
この他、加速時に加速度が大きい場合、目的地に急いで到着したいという心理状態であると推定できるので、加速度が所定値以上か否かに否か応じて性急度の学習量を設定してもよい。
一方、停止後、パーキングブレーキをオンにする運転者は、冷静に運転していると推定できる。したがって、運転者特性DB25には、このように冷静な心理状態を推測させる車両操作に対しては、注意散漫度及び性急度を減少させる学習量が対応づけて記憶されている。例えば、パーキングブレーキがオンに操作されると、全ての注意散漫度及び性急度から学習量が低減される。
また、図3に示したように降雪時などの特殊な走行環境の運転経験を登録しておくことができる。降雪時にスリップが生じやすくなり視界も不良となるなど運転への負荷が大きいが、さらに降雪時の運転が未経験であれば、ナビゲーション装置100の操作に影響が出やすいと考えられる。そこで、未経験の走行環境が検出された場合、注意散漫度又は性急度が高い場合と同様に、操作ボタンの全ての操作を禁止することで、運転者の操作負荷を低減することができる。
学習速度について説明する。どのくらいの頻度で学習量を増減するかに応じて、ナビゲーション装置100の学習速度を調整できる。例えば、減速時の場合、所定値以上又は所定値以下の減速度が検出される度に現在学習値を増減すると、運転者の運転者操作情報を早期に学習できることになる。この場合、一日の走行のうち運転者の操作によっては同じ走行環境に対しHMIを何度かカスタマイズすることができる。一方、数ヶ月などのより長期的な運転者の運転者操作情報を学習する場合、所定値以上又は所定値以下の減速度が例えば10回検出される度に現在学習値を増減するなどにより、長期的な傾向を学習して、頻繁にはカスタマイズされないHMIを提供することができる。本実施形態のナビゲーション装置100は、いずれの学習速度に対しても対応できるが、例えば、運転者が選択して設定できるようになっている。
〔HMIのカスタマイズ〕
HMI生成部24は、環境情報に基づき運転者特性DB25を参照して、その運転者に最適なHMIを表示部28に出力する。なお、表示部28は、タッチパネルを搭載した液晶や有機ELなどのフラットパネルディスプレイである。
厳密には、前進走行時と後退走行時、駐車場の再検索など所定の走行環境では、走行規制状態でも操作ボタンA、D、Eと異なる操作ボタン(例えば、操作ボタンG)が表示されることがあり得る。したがって、走行環境毎にHMIをカスタマイズしうるが、実際には多くの走行環境において操作ボタンA、D、Eは共通であるとしてよい。本実施例では簡単のため走行操作制限では操作ボタンA、D,Eのみが操作できるとする。そして、この走行操作制限の制限レベルを「0」として、注意散漫度又は性急度の現在学習値に基づき、制限レベルを規定する。
図5は、注意散漫度又は性急度の現在学習値と制限レベルの関係を規定する制限レベルテーブル26の一例を示す。制限レベルが大きいほどHMIは大きな制約を受ける。制限レベルテーブル26は、制御部20の不揮発メモリに記憶されている。図示するように、注意散漫度又は性急度それぞれの合計が所定値(図では100)以上では制限レベルが「2」に、99〜30では制限レベルが「1」に規定され、29〜−100では制限レベルが「0」に規定されている。したがって、注意散漫度又は性急度が29〜−100では走行操作制限と同じ操作ボタンが表示される。
また、注意散漫度又性急度の現在学習値がマイナスであることは冷静に運転していることを示すため、所定値以下(図では−100以下)では走行操作制限を一部解除するように規定されている。
HMI生成部24は運転者特性DB25の注意散漫度の現在学習値、性急度の現在学習値をそれぞれ合計して、制限レベルテーブル26を参照し制限レベルを決定する。決定された制限レベルをどのようにHMIに反映させるかは、HMI規定テーブル27に走行操作制限毎に予め定められている。
図5(b)は、制限レベルと表示される操作ボタンとの関係を規定するHMI規定テーブル27の一例を示す。HMI規定テーブル27は、制御部20の不揮発メモリに記憶されている。操作ボタンA、D、Eが走行操作制限の場合、制限レベル「2」ではいっさい操作ボタンが表示されなくなり、制限レベル「1」では操作ボタンA、Eのみが表示され、制限レベル「0」では操作ボタンA、D、Eが表示される。そして、注意散漫度又は性急度が所定値以下の冷静な状態では、走行操作制限が一部解除され、操作ボタンBが表示されるようになる。
また、走行操作制限において表示される操作ボタンが操作ボタンA、B、C、D、Eの場合、制限レベル「2」では操作ボタンEのみが表示され、制限レベル「1」では操作ボタンA、E、Dのみが表示され、制限レベル「0」では操作ボタンA、B、C、D、Eが表示される。そして、注意散漫度又は性急度が所定値以下の冷静な状態では、走行操作制限が一部解除され、操作ボタンFが表示されるようになる。
このように、走行操作制限毎に、操作が複雑な操作ボタンほど表示されにくくしておことで、注意力が散漫したか又は性急な運転者の運転負荷を低減することができる。
そして、表示する操作ボタンの数が決定されれば、操作性、意匠性、に配慮されたHMIを提供すればよいことになる。各操作ボタンの大きさが共通であるとすれば、最終的にHMIは操作ボタンの数によって規定することができる。図6は、操作ボタンの数とHMIの関係の一例を示す図である。図6(a)は表示する操作ボタンが0個の場合のHMIの一例を示す。操作ボタンが0個の場合、例えば全ての操作ボタンをトーンダウンして表示する。トーンダウンであるので、運転者は各操作ボタンを視認することができるが、仮に操作しても対応する機能は提供されない。トーンダウンするだけであれば各操作ボタンの位置が変わらないので、運転者は違和感なくナビゲーション装置を操作することができる。
また、図6(a)の右側に示すように、トーンダウンでなく、選択できない操作ボタンを一切表示しなくてもよい。実際には道路地図などが表示されるが、操作ボタンが一切表示されないため、運転者が操作を試みることがなくなり運転負荷を低減できる。
同様に、図6(b)は操作ボタンが1個の場合のHMIを示し、図6(c)は操作ボタンが2個の場合のHMIを示し、図6(d)は操作ボタンが3個の場合のHMIを示し、図6(e)は操作ボタンが4個の場合のHMIを示す。いずれの場合も、表示する操作ボタン以外はトーンダウンして表示するHMIと、選択できる操作ボタンのみ画面に拡大して表示するHMIがある。なお、トーンダウンするHMI又は拡大表示するHMIのどちらを表示するかを、運転者が設定できるようにしてもよい。
拡大表示するHMIの場合、輝度や色をそのまま表示してもよいが、運転者の操作負荷を低減するという観点からは輝度を高くしたり色の彩度を上げて運転者の視認性を向上させることが好ましい。
なお、図5(b)又(c)に示す操作ボタンの組み合わせ毎に、予めHMIを規定するファイルを記憶しておいてもよい。これにより、表示する操作ボタンの数は同じでも各操作ボタンの大きさや色を変えるなど、HMIの表現を豊富にできる。
以上説明したように、本実施形態のナビゲーション装置100は、運転者毎にHMIをカスタマイズできるので操作性を向上させることができる。HMIのカスタマイズは、同一の運転者に施されるので、運転に疲れて注意力が散漫となった運転者に対しては操作ボタンを少なくして操作負荷を低減でき、また、何ヶ月かを経て冷静な運転ができるようになった運転者には表示する操作ボタンを多くすることもできる。したがって、運転者特性に応じて柔軟にHMIをカスタマイズすることができる。
〔ナビゲーション装置100の動作手順〕
図7(a)はナビゲーション装置100が運転者特性を学習する手順を示すフローチャート図の一例を、図7(b)は学習結果に応じてHMIをカスタマイズする手順を示すフローチャート図の一例を、それぞれ示す。図7(a)及び図7(b)の手順は所定のサイクル時間毎に繰り返し実行される。
運転者操作情報取得部21は、運転者操作情報を検出したか否かを判定する(S10)。運転者操作情報は、ナビ画面の操作、減速、加速、前照灯のオン、操舵等である。これらの運転者操作情報を検出した場合(S10のYes)、運転者操作情報に対応して学習する環境情報が検出されたか否かを判定する(S20)。例えば、ナビ操作の間違いであれば、車両の位置に関わらず学習量が増減され、前照灯のオンであればトンネルを通過時に学習量が増減される。なお、ステップS10とS20は順不同であって、踏切の一時停止の有無のように一時停止をしないという運転者操作情報を検出するため、先にステップS20の環境情報を検出してもよい。
環境情報が検出された場合、運転者特性学習部23は、運転者操作情報と環境情報に対応する現在学習値を増減する(S30)。ナビゲーション装置100は以上の処理を繰り返す。
このようにして学習された現在学習値に基づき、HMI生成部24は運転者毎にHMIをカスタマイズする。まず、HMI生成部24は、予め定められている走行操作制限の操作ボタンを読み出す(S110)。
ついで、HMI生成部24は、注意散漫度又は性急度に応じて制限レベルを決定し(S120)、制限レベルに応じて表示する操作ボタンを決定する(S130)。そして、操作ボタンの数に応じて最終的なHMIを生成する(S140)。
以上説明したように、本実施形態のナビーション装置100は、運転者特性に応じてHMIをカスタマイズできるので、操作性を向上させることができる。
なお、本実施形態では、車両の走行時のHMIをカスタマイズする形態を例に説明したが、停止時のHMIをカスタマイズすることもできる。停止時には操作ボタンA〜Eの全てが表示されるが、車両が停止後すぐに走行を再開する走行環境(例えば、信号待ち、渋滞)では、運転者がナビの操作を開始した直後に走行を再開することになってしまう。このため、例えば、HMI生成部24は、停止時間が所定値以上になることを予想した場合にのみ、全ての操作ボタンA〜Eを表示し、それ以外は走行中と同じように選択可能な操作ボタンを制限する。これにより、注意散漫度や性急度が高い運転者に対し、ナビ操作の時間が十分にない場合は停止しても(パーキングブレーキをオンにしても)、操作が複雑でない操作ボタンのみが表示されるので、運転者の操作負荷を低減できる。停止時間が所定値以上になることは、例えば信号機との路車間通信により受信した青信号に切り替わるまでの時間、前方に渋滞した車両との車車間通信により受信した渋滞距離、等から検出される。
ナビゲーション装置のHMIの一例を示す図である。 ナビゲーション装置の機能ブロック図の一例である。 運転者特性情報の一例を示す図である。 運転者特性情報の一例を示す図である。 制限レベルテーブル、HMI規定テーブルの一例を示す図である。 操作ボタンの数とHMIの関係の一例を示す図である。 ナビゲーション装置100が運転者特性を学習する手順、及び、HMIをカスタマイズする手順を示すフローチャート図の一例である。
符号の説明
11 操作部
12 各ECU
13 各センサ
14 位置取得部
20 制御部
21 運転者操作情報取得部
22 環境情報取得部
23 運転者特性学習部
24 HMI生成部
25 運転者特性DB
28 表示部

Claims (6)

  1. 表示部に表示された操作部の接触位置により操作されるナビゲーション装置において、
    走行時の車両操作を検出する車両操作検出手段と、
    前記車両操作検出手段が検出した前記車両操作に基づき、運転者操作情報を取得する車両操作取得手段と、
    前記運転者操作情報に基づき運転者の運転者特性を学習する運転者特性学習手段と、
    前記運転者特性学習手段が学習した学習結果に応じて、前記操作部の表示態様を変更する操作部生成手段と、
    走行時の車両環境を検出する車両環境検出手段と、
    前記車両環境検出手段が検出した前記車両環境に基づき、車両環境情報を取得する環境情報取得手段と、を有し、
    前記運転者特性学習手段は、所定の車両環境における前記運転者操作情報に基づき運転者の運転者特性を学習する、
    ことを特徴とするナビゲーション装置。
  2. 前記操作部に複数の操作ボタンが配置される場合、
    前記操作部生成手段は、前記学習結果に基づき、走行時に表示する初期設定の前記操作ボタンの数よりも、少ない数の前記操作ボタンを選択可能に表示する、
    ことを特徴とする請求項1記載のナビゲーション装置。
  3. 前記操作部に複数の操作ボタンが配置される場合、
    前記操作部生成手段は、前記学習結果に基づき、走行時に表示する初期設定の前記操作ボタンのうち、乗員が選択可能でない前記操作ボタンを選択可能な前記操作ボタンよりもトーンダウンして表示する、
    ことを特徴とする請求項1記載のナビゲーション装置。
  4. 前記操作部に複数の操作ボタンが配置される場合、
    前記操作部生成手段は、前記学習結果に基づき、走行時に表示する初期設定の前記操作ボタンの数よりも、多い数の前記操作ボタンを選択可能に表示する、
    ことを特徴とする請求項1記載のナビゲーション装置。
  5. 前記運転者特性学習手段は、運転者の注意散漫度又は性急度を学習し、
    前記操作部生成手段は、注意散漫度又は性急度が大きいほど、少ない数の前記操作ボタンを選択可能に表示する、
    ことを特徴とする請求項2〜4いずれか1項記載のナビゲーション装置。
  6. 表示部に表示された操作部の接触位置により操作されるナビゲーション装置の操作部表示方法において、
    車両操作検出手段が、走行時の車両操作を検出するステップと、
    車両操作取得手段が、前記車両操作検出手段が検出した前記車両操作に基づき、運転者操作情報を取得するステップと、
    運転者特性学習手段が、前記運転者操作情報に基づき運転者の運転者特性を学習するステップと、
    操作部生成手段が、運転者特性学習手段が学習した学習結果に応じて、前記操作部の表示態様を変更するステップと、
    車両環境検出手段が、走行時の車両環境を検出するステップと、
    環境情報取得手段が、前記車両環境検出手段が検出した前記車両環境に基づき、車両環境情報を取得するステップ、
    前記運転者特性学習手段が、所定の車両環境における前記運転者操作情報に基づき運転者の運転者特性を学習するステップと、
    を有することを特徴とする操作部表示方法。
JP2008104733A 2008-04-14 2008-04-14 ナビゲーション装置、操作部表示方法 Expired - Fee Related JP4656177B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2008104733A JP4656177B2 (ja) 2008-04-14 2008-04-14 ナビゲーション装置、操作部表示方法
DE112009000910T DE112009000910T5 (de) 2008-04-14 2009-04-09 Navigationsvorrichtung und Verfahren zum Anzeigen eines Betätigungsteils
PCT/JP2009/057279 WO2009128387A1 (ja) 2008-04-14 2009-04-09 ナビゲーション装置、操作部表示方法
CN2009801129623A CN102007373A (zh) 2008-04-14 2009-04-09 导航装置、操作部显示方法
US12/922,593 US20110035144A1 (en) 2008-04-14 2009-04-09 Navigation apparatus and operation part display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008104733A JP4656177B2 (ja) 2008-04-14 2008-04-14 ナビゲーション装置、操作部表示方法

Publications (2)

Publication Number Publication Date
JP2009257832A JP2009257832A (ja) 2009-11-05
JP4656177B2 true JP4656177B2 (ja) 2011-03-23

Family

ID=41199083

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008104733A Expired - Fee Related JP4656177B2 (ja) 2008-04-14 2008-04-14 ナビゲーション装置、操作部表示方法

Country Status (5)

Country Link
US (1) US20110035144A1 (ja)
JP (1) JP4656177B2 (ja)
CN (1) CN102007373A (ja)
DE (1) DE112009000910T5 (ja)
WO (1) WO2009128387A1 (ja)

Families Citing this family (162)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8745541B2 (en) 2003-03-25 2014-06-03 Microsoft Corporation Architecture for controlling a computer using hand gestures
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20130275899A1 (en) * 2010-01-18 2013-10-17 Apple Inc. Application Gateway for Providing Different User Interfaces for Limited Distraction and Non-Limited Distraction Contexts
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
DE112011105431B4 (de) * 2011-07-11 2019-05-29 Toyota Jidosha Kabushiki Kaisha Fahrzeug-Notfallevakuierungsvorrichtung
FR2979030B1 (fr) 2011-08-11 2013-08-02 Renault Sa Procede d'assistance d'un utilisateur d'un vehicule automobile, systeme multimedia et vehicule automobile
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
WO2013069110A1 (ja) * 2011-11-09 2013-05-16 三菱電機株式会社 ナビゲーション装置及び操作制限方法
US8811938B2 (en) 2011-12-16 2014-08-19 Microsoft Corporation Providing a user interface experience based on inferred vehicle state
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
EP2858054A4 (en) * 2012-06-05 2015-06-10 Panasonic Ip Man Co Ltd INFORMATION SYSTEM AND EMBEDDED DEVICE
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
BR112015018905B1 (pt) 2013-02-07 2022-02-22 Apple Inc Método de operação de recurso de ativação por voz, mídia de armazenamento legível por computador e dispositivo eletrônico
JP5862643B2 (ja) * 2013-02-20 2016-02-16 株式会社デンソー 車載装置
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US9499051B2 (en) * 2013-03-28 2016-11-22 Panasonic Intellectual Property Management Co., Ltd. Presentation information learning method, server, and terminal device
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
EP3008641A1 (en) 2013-06-09 2016-04-20 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
FR3010032A1 (fr) * 2013-08-29 2015-03-06 Peugeot Citroen Automobiles Sa Procede et dispositif pour l'assistance a la conduite d'un vehicule
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
CN106471570B (zh) 2014-05-30 2019-10-01 苹果公司 多命令单一话语输入方法
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
JP6447144B2 (ja) * 2015-01-08 2019-01-09 株式会社デンソー 緊急情報受信装置
KR101683649B1 (ko) * 2015-01-27 2016-12-07 현대자동차주식회사 차량 컨텐츠를 통합하고 가변하기 위한 사용자 맞춤 표시 시스템 및 그의 차량 컨텐츠 관리 방법, 그리고 이를 실행하는 컴퓨터 판독 가능한 기록매체
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
GB2545005B (en) * 2015-12-03 2021-09-08 Bentley Motors Ltd Responsive human machine interface
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
JP6477551B2 (ja) * 2016-03-11 2019-03-06 トヨタ自動車株式会社 情報提供装置及び情報提供プログラム
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
JP6692261B2 (ja) * 2016-09-01 2020-05-13 アイシン・エィ・ダブリュ株式会社 経路探索システムおよび経路探索プログラム
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
KR20180106196A (ko) * 2017-03-17 2018-10-01 현대자동차주식회사 네비게이션의 성능 최적화 장치 및 방법
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
JP6918222B2 (ja) * 2018-05-11 2021-08-11 三菱電機株式会社 表示制御装置、表示装置及び表示制御方法
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970511A1 (en) 2019-05-31 2021-02-15 Apple Inc Voice identification in digital assistant systems
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
KR20210117619A (ko) * 2020-03-19 2021-09-29 삼성전자주식회사 프로액티브 디지털 비서
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000055674A (ja) * 1998-07-31 2000-02-25 Alpine Electronics Inc 車載用装置の動作指示方式
JP2005182313A (ja) * 2003-12-17 2005-07-07 Nissan Motor Co Ltd 操作メニュー切換装置、車載用ナビゲーション・システムおよび操作メニュー切換え方法
JP2006209210A (ja) * 2005-01-25 2006-08-10 Denso Corp 情報検索装置及び車両用ナビゲーション装置
JP2008065583A (ja) * 2006-09-07 2008-03-21 Denso Corp 画像表示制御装置および画像表示制御装置用プログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4311804B2 (ja) 1999-03-29 2009-08-12 富士通テン株式会社 ナビゲーション装置
DE10322458A1 (de) * 2003-05-16 2004-12-02 Daimlerchrysler Ag Verfahren und Vorrichtung zur Beeinflussung der Beanspruchung eines Fahrers in einem Kraftfahrzeug
JP2006017478A (ja) 2004-06-30 2006-01-19 Xanavi Informatics Corp ナビゲーション装置
JP2006084384A (ja) * 2004-09-17 2006-03-30 Denso Corp 車両用ナビゲーション装置
KR101047719B1 (ko) * 2005-02-16 2011-07-08 엘지전자 주식회사 네비게이션 시스템에서 이동체의 주행경로 안내방법 및 장치
US7463961B2 (en) * 2005-06-30 2008-12-09 General Motors Corporation Method for adapting lockout of navigation and audio system functions while driving
JP4859433B2 (ja) * 2005-10-12 2012-01-25 任天堂株式会社 位置検出システムおよび位置検出プログラム
JP2008104733A (ja) 2006-10-26 2008-05-08 Olympus Corp 内視鏡の湾曲部および内視鏡

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000055674A (ja) * 1998-07-31 2000-02-25 Alpine Electronics Inc 車載用装置の動作指示方式
JP2005182313A (ja) * 2003-12-17 2005-07-07 Nissan Motor Co Ltd 操作メニュー切換装置、車載用ナビゲーション・システムおよび操作メニュー切換え方法
JP2006209210A (ja) * 2005-01-25 2006-08-10 Denso Corp 情報検索装置及び車両用ナビゲーション装置
JP2008065583A (ja) * 2006-09-07 2008-03-21 Denso Corp 画像表示制御装置および画像表示制御装置用プログラム

Also Published As

Publication number Publication date
CN102007373A (zh) 2011-04-06
JP2009257832A (ja) 2009-11-05
DE112009000910T5 (de) 2011-03-03
US20110035144A1 (en) 2011-02-10
WO2009128387A1 (ja) 2009-10-22

Similar Documents

Publication Publication Date Title
JP4656177B2 (ja) ナビゲーション装置、操作部表示方法
EP1233389B1 (en) Travel directions providing device
US11097730B2 (en) Implicit activation and control of driver assistance systems
EP3415394A1 (en) Vehicle user interface device and vehicle
CN107111956A (zh) 行驶控制装置
JP2014228550A (ja) 車載装置、ナビゲーション情報出力方法、携帯電話、及びカーナビゲーションシステム
JP6524129B2 (ja) 運転支援装置
JP6646856B2 (ja) 運転支援装置および運転支援方法、自動運転制御装置、車両、プログラム
JP4445283B2 (ja) 表示システム
JP4844834B2 (ja) 車両用マッサージ制御装置
JP5297647B2 (ja) 車両用制御装置
JP2008195295A (ja) 灯火制御装置
JP2006268414A (ja) 運転支援装置
JP2009143354A (ja) 車両用制御装置
GB2454516A (en) Vehicle speed control
JP2008056056A (ja) 車両前照灯制御システム
CN112937566B (zh) 自动驾驶车辆用信息提示装置
CN111762193B (zh) 车辆用驾驶辅助系统
KR102650436B1 (ko) 차량 제어 장치 및 그것을 포함하는 차량
JP2007168595A (ja) 運転支援装置
JP7029689B2 (ja) 表示制御方法およびそれを利用した表示制御装置、車両、プログラム、表示制御システム
JP2008195231A (ja) 車両用不慣れ検出装置
JP2019074813A (ja) 自動運転時情報伝達方法および車載情報提示装置
US20210181900A1 (en) System for a scrolling mode interface in a vehicle
WO2022030317A1 (ja) 車両用表示装置、および車両用表示方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20091112

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100525

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100723

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101130

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101213

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140107

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140107

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees