JP6686450B2 - Glasses type information display device - Google Patents
Glasses type information display device Download PDFInfo
- Publication number
- JP6686450B2 JP6686450B2 JP2016003497A JP2016003497A JP6686450B2 JP 6686450 B2 JP6686450 B2 JP 6686450B2 JP 2016003497 A JP2016003497 A JP 2016003497A JP 2016003497 A JP2016003497 A JP 2016003497A JP 6686450 B2 JP6686450 B2 JP 6686450B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- user
- driver
- seat position
- seat
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 239000011521 glass Substances 0.000 title description 3
- 238000004891 communication Methods 0.000 claims description 23
- 238000000034 method Methods 0.000 description 20
- 238000012545 processing Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 238000012544 monitoring process Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 238000004587 chromatography analysis Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000004438 eyesight Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Controls And Circuits For Display Device (AREA)
Description
本発明は、車両に乗車しているユーザの頭部に装着して使用可能なメガネ型情報表示装置に関する。 The present invention relates to a glasses-type information display device that can be mounted on the head of a user who is in a vehicle and used.
近年、車両(自動車)においては、例えばインパネのセンター部に情報表示装置を設け、ナビゲーション画面や、TV・ビデオ等の画像を表示したり、運転支援の情報例えばバックカメラやサイドカメラの画像を表示したりすることが行われる。この種の車載情報表示装置においては、一般に、運転者の運転の安全性を確保するために、車両の走行中には、情報表示装置における表示や操作の機能に制限が設けられるようになっている。 In recent years, in vehicles (automobiles), for example, an information display device is provided in the center of an instrument panel to display navigation screens, TV / video images, etc., and driving assistance information, such as back camera and side camera images. Things are done. In this type of in-vehicle information display device, generally, in order to ensure the driving safety of the driver, the display and operation functions of the information display device are restricted during traveling of the vehicle. There is.
ところが、単純に表示や操作に制限をかけるだけでは、助手席に座る同乗者など、運転者以外の乗員に対しての不便さを招く事情がある。そのため、従来では、同乗者の不便さを解消するために、各種の工夫が考えられている(例えば特許文献1、2参照)。特許文献1では、前席、後席の夫々に表示部と操作部を設け、夫々に関して操作の可否を設定可能としている。特許文献2では、運転席、助手席の異なる視覚に応じて別画像を表示することにより、操作者の判別を行うようにしている。
However, simply restricting the display and operation may cause inconvenience to passengers other than the driver, such as a passenger sitting in the passenger seat. Therefore, conventionally, various measures have been considered in order to eliminate inconvenience for passengers (see, for example,
ところで、近年、いわゆるウェアラブルコンピュータの一つとして、例えば「Google Glass(登録商標)」等の、ユーザが頭部に装着するメガネ型情報表示装置(ヘッドマウントディスプレイ)が注目を集めてきており、これを、車両用に使用することが考えられる。このメガネ型情報表示装置は、例えば右目の前方に配置されるプリズムディスプレイに、装置内部のプロジェクタから照射した画像を投影させるように構成されている。また、マイクやスピーカ、操作可能なタッチパッド、方位センサや加速度センサ等の各種センサが搭載され、音声操作やタッチパッド操作、ウインクやヘッドジェスチャ等の各種操作が可能とされている。更に、カメラ、WiFiやBT等の無線通信装置を備えて構成され、インターネットの利用や、スマートフォンとのBT接続による通話や各種アプリの利用が可能とされている。 By the way, in recent years, as one of so-called wearable computers, a glasses-type information display device (head mount display) such as "Google Glass (registered trademark)" worn on the user's head has attracted attention. Can be used for vehicles. This glasses-type information display device is configured to project an image emitted from a projector inside the device on, for example, a prism display arranged in front of the right eye. Further, a microphone, a speaker, an operable touch pad, various sensors such as a direction sensor and an acceleration sensor are mounted, and various operations such as voice operation, touch pad operation, wink and head gesture are possible. Further, it is configured to include a camera and a wireless communication device such as WiFi or BT, and it is possible to use the Internet, call by BT connection with a smartphone, or use various applications.
車両内で使用するにあたっては、運転者となるユーザがメガネ型情報表示装置を装着し、例えば車載機と無線接続することにより、車載機側から必要な運転支援情報を得て、プリズムディスプレイに表示させるといった使い方が考えられる。しかしながら、この種のメガネ型情報表示装置を、特に運転者が車内で使用する場合、安全性を考慮することが極めて重要となる。 When using in a vehicle, the user who is the driver wears the glasses-type information display device and wirelessly connects to the in-vehicle device, for example, to obtain necessary driving support information from the in-vehicle device side and display it on the prism display. It can be considered to be used. However, it is extremely important to consider safety, especially when a driver uses the glasses-type information display device of this type in the vehicle.
本発明は上記事情に鑑みてなされたものであり、その目的は、車両内で使用する場合の、安全性を確保することができるメガネ型情報表示装置を提供することにある。 The present invention has been made in view of the above circumstances, and an object thereof is to provide an eyeglass-type information display device capable of ensuring safety when used in a vehicle.
上記目的を達成するために、本発明の請求項1のメガネ型情報表示装置は、車両に乗車しているユーザの頭部に装着して使用可能なものであって、ユーザの視野内に情報を表示するディスプレイ(7)と、ユーザにより操作可能な操作部(12)とを備えたメガネ型情報表示装置(1)において、ユーザの座席位置を判別する座席位置判別手段(21)と、前記座席位置判別手段(21)が判別した座席位置に応じて、前記ディスプレイ(7)に表示する情報を取捨選択する表示制御手段(21)と、前記座席位置判別手段(21)が判別した座席位置に応じて、前記操作部(12)の操作を制限する操作制限手段(21)とを備えると共に、カメラ(8)及び該カメラ(8)の撮影画像を認識する画像認識機能を備え、前記座席位置判別手段(21)は、前記カメラ(8)により撮影した車内画像に基づいて、ユーザの座席位置を判別するところに特徴を有する。
In order to achieve the above object, the glasses-type information display device according to
これによれば、座席位置判別手段(21)により、メガネ型情報表示装置(1)を装着して使用するユーザの座席位置が判別される。このとき、ユーザが運転席に乗車している運転者である場合には、運転支援に必要な情報を提供することは好ましいが、運転に対する集中を妨げるような情報表示は望ましくない。座席位置判別手段(21)が判別した座席位置に応じて、表示制御手段(21)により、ディスプレイ(7)に表示する情報が取捨選択される。 According to this, the seat position determination means (21) determines the seat position of the user who wears and uses the glasses-type information display device (1). At this time, when the user is a driver who is in the driver's seat, it is preferable to provide information necessary for driving assistance, but it is not desirable to display information that prevents concentration on driving. The information displayed on the display (7) is selected by the display control means (21) according to the seat position determined by the seat position determination means (21).
従って、使用しているユーザが運転者である場合に、不要な情報については表示しない等、運転に対する集中を妨げるような表示動作を行わずに済ませることができる。この結果、請求項1のメガネ型情報表示装置(1)によれば、ユーザの視野内に情報を表示するディスプレイ(7)を備えたものにあって、車両内で使用する場合の、安全性を確保することができるという優れた効果を奏する。
Therefore, when the user who is using the device is a driver, it is possible to avoid performing unnecessary display operations such as not displaying unnecessary information. As a result, according to the glasses-type information display device (1) of
またこのとき、ユーザが運転席に乗車している運転者である場合には、操作部(12)を操作するのは必要最低限に止めておくべきであり、運転に対する集中を妨げるような操作を行うことは望ましくない。座席位置判別手段(21)が判別した座席位置に応じて、操作制限手段(21)により、ユーザによる操作部(12)の操作が制限される。 Further, at this time, when the user is a driver who is in the driver's seat, the operation unit (12) should be operated to the minimum necessary, and an operation that impedes concentration on driving. Is not desirable. The operation restriction unit (21) restricts the operation of the operation unit (12) by the user according to the seat position determined by the seat position determination unit (21).
従って、使用しているユーザが運転者である場合に、必要最低限の操作以外の操作を禁止する等、運転に対する集中を妨げるような操作を行わずに済ませることができる。この結果、ユーザの視野内に情報を表示するディスプレイ(7)を備えたものにあって、車両内で使用する場合の、安全性を確保することができるという優れた効果を奏する。 Therefore, when the user who is using the device is a driver, it is possible to avoid an operation that impedes concentration on driving, such as prohibiting an operation other than the minimum necessary operation. As a result, exhibits be in that a display (7) for displaying information in a visual field Yu chromatography The, when used in a vehicle, an excellent effect that it is possible to ensure safety.
以下、本発明を具体化した一実施形態について、図面を参照しながら説明する。図1は、本実施携帯に係るメガネ型情報表示装置1の電気的構成を示しており、図2は、メガネ型情報表示装置1の外観構成を示している。
An embodiment of the present invention will be described below with reference to the drawings. FIG. 1 shows the electrical configuration of a glasses-type
図2(a)に示すように、メガネ型情報表示装置1は、ユーザ(車両の運転者または同乗者)の頭部に着脱自在に装着されるメガネフレームに似た本体部2を有している。詳しくは、この本体部2は、ユーザの頭部の前面側に位置され、ノーズパッド3aを有するフロント部3と、ユーザの左右の側頭部に位置され耳に掛けられるテンプル部4,5と、右のテンプル部5から前方に延び左方に湾曲するように折れ曲る延出部6とを有している。尚、フロント部3に、レンズ用のリムさらにはレンズを設ける構成としても良い。
As shown in FIG. 2 (a), the glasses-type
この本体部2には、以下のような各種の構成部品が組込まれる。即ち、図2(c)、(d)にも示すように、前記延出部6の先端には、プリズムディスプレイからなるディスプレイ7が設けられ、ユーザの右目の視野の一部である右前方に、プロジェクタから照射した画像を投影することにより、各種の情報を表示するように構成されている。図2(d)に示すように、延出部6の前面部には、前方を撮影するカメラ8が設けられ、前記テンプル部5の前端部上部には、そのカメラ用のスイッチ9が設けられている。図1に示すように、本体部2には、前記カメラ8の撮影画像を処理して画像認識の機能などを実現する画像制御部10が設けられると共に、後述するように、カメラ8の撮影画像に基づいてユーザの座席位置を判別する座席位置判別部11が設けられている。
The following various components are incorporated in the
図2(c)に示すように、延出部6の右側面部には、操作部としてのタッチパッド12が設けられている。図2(b)に示すように、テンプル部5の後部には、例えば骨伝導式のスピーカ13が設けられている。図示しないイヤホンの接続も可能とされている。更に、図1に示すように、本体部2には、ユーザの音声を入力するマイク14や、加速度センサ、方位センサ等の各種センサ15、記憶装置16が設けられている。この場合、ユーザは、各種入力操作を行う場合、タッチパッド12の操作以外にも、音声操作や、ウインク・ヘッドジェスチャー操作が可能とされている。
As shown in FIG. 2C, a
また、本体部2には、例えばWiFiやBT等の近距離無線通信装置からなる通信部17が設けられ、車両(自動車)に搭載された車載機18や、ユーザの所持するスマートフォン19との無線接続が可能とされている。前記車載機18としては、カーナビや、車載マルチメディアシステム、周辺監視カメラシステム(バックガイドモニタ)等を含んでいる。
In addition, the
そして、図1に示すように、本実施形態に係るメガネ型情報表示装置1は、機能実行制御部21を備えている。機能実行制御部21は、CPU、ROM、RAM等からなるコンピュータを主体として構成され、メガネ型情報表示装置1全体を制御して各種機能(各種アプリ)を実行する。この場合、機能実行制御部21は、前記画像制御部10、座席位置判別部11に接続されていると共に、音声制御部22を介して前記スピーカ13、マイク14を制御するようになっている。また、機能実行制御部21には、前記各種センサ15からの信号が入力されると共に、記憶装置16を制御するようになっている。
Then, as shown in FIG. 1, the glasses-type
更に、機能実行制御部21には、表示制御部23、操作制御部24、通信制御部25が接続されている。これにて、機能実行制御部21は、表示制御部23を介してディスプレイ7の表示を制御する。また、機能実行制御部21には、操作制御部24を介してタッチパッド12からの操作信号が入力される。そして、機能実行制御部21は、通信制御部25を介して通信部17の通信を制御するようになっている。
Further, a
ここで、前記車載機18としては、カーナビや、車載マルチメディアシステム、周辺監視カメラシステム(バックガイドモニタ)等を含んでおり、メガネ型情報表示装置1の通信部17との通信機能、例えばBluetooth(登録商標)接続機能を備えている。この場合、車載機18からメガネ型情報表示装置1に対し車両情報が送信される。この車両情報には、例えば、周辺監視カメラや周辺監視センサが取得した障害物情報(前方、前方左右、後方、後方左右の衝突警告情報)といった運転支援情報が含まれている。
Here, the vehicle-mounted
更に、車両情報には、車両の警告情報、例えばガソリンやバッテリの残量、ランプ切れ等の情報、オイル交換などのメンテナンス情報などがある。また、スマートフォン19についても、メガネ型情報表示装置1の通信部17との通信機能、例えばBluetooth(登録商標)接続機能を備えており、音声通話、メール、SNS、ナビゲーション等の各種アプリの情報等を送信することができる。
Further, the vehicle information includes warning information of the vehicle, for example, information such as the remaining amount of gasoline or a battery, lamp exhaustion, maintenance information such as oil change, and the like. The
さて、後の作用説明(フローチャート説明)でも述べるように、メガネ型情報表示装置1の機能実行制御部21は、ユーザが車両に乗車して、通信部17と、前記車載機18及び/又はスマートフォン19とが接続している状態で、それらから情報を取得し、表示制御部23を介してディスプレイ7に表示する。このとき、機能実行制御部21は、メガネ型情報表示装置1を使用(装着)しているユーザの座席位置、即ち運転席かそれ以外の座席かを判別し、判別したユーザの座席位置に応じて、前記ディスプレイ7に表示する情報を取捨選択即ち制限するようになっている。
As will be described later in the explanation of the operation (the explanation of the flowchart), the function
具体的には、ユーザが運転者席の場合には、車載機18から送信される車両情報については、必要な運転支援情報等を除いて、表示が制限される。また、動画情報の表示や、スマートフォンから送信されるメール情報等の運転に関係ない割込み情報についても表示が制限される。これに対し、ユーザがその他の乗員である場合には、そのような動画情報やメール情報等の表示の制限はなされない。車両情報については、もともと不要であるため、表示はなされない。
Specifically, when the user is in the driver's seat, the display of the vehicle information transmitted from the vehicle-mounted
また、本実施形態では、機能実行制御部21は、メガネ型情報表示装置1の操作、つまりタッチパッド12の操作やその他の入力操作についても、ユーザの座席位置(運転者かその他の乗員か)に応じて、制限するようになっている。この場合も、運転者の場合には必要、不可欠な操作を除いて、運転の集中を妨げるような無用な操作が制限される。その他の乗員の場合には、基本的には、操作に関しても制限はなされない。
In addition, in the present embodiment, the function
このとき、本実施形態では、機能実行制御部21は、車両が走行中かどうかを判断し、車両が走行中でない即ち停車中であるときには、ユーザが運転者であると判別された場合でも、ディスプレイ7の表示の制限や、操作の制限を緩和するようになっている。車両が走行中かどうかの判断は、例えば車載機18から無線通信で車速情報を取得したり、車載機18が走行中かどうかを判断し無線通信でその情報を取得したりすることに基づいて行われる。それ以外にも、メガネ型情報表示装置1自体或いはスマートフォン19がGPS機能を備える場合には、そのGPS情報から移動速度を算出したり、カメラ8で撮影した連続画像から移動速度を推定したり、カメラ8でメータ部の画像を撮影して車速を読取ったりすることも可能である。
At this time, in the present embodiment, the function
本実施形態では、上記のように機能実行制御部21がユーザの座席位置を判別するにあたっては、前記カメラ8により車内画像を撮影する。そして、その車内画像に基づいて、ユーザの座席位置、即ち、ユーザが運転席に乗車している運転者か、それ以外の座席の乗員かを判別する。この場合、ユーザの座席が運転席であれば、ステアリングホイール26やメータ部27(図9(b)参照)等の車内の運転席特有の電装品が正面に撮影されるなど、座席に応じた車内画像が撮影される。これにより、画像認識によってそのような特定の車内固有物の有無及び相対位置を検出することに基づき、ユーザの座席位置を判別することができる。
In the present embodiment, when the function
尚、車室内に特定のエンブレムを設けて、そのエンブレムを撮影することに基づき、その見え方によって運転席かどうかを判別するように構成することも可能である。また、図9(b)に示すように、車室内には、インストルメントパネルの中央部に位置して、車載マルチメディアシステムの一部を構成する表示装置28が設けられている。この表示装置28には、ナビゲーション画面や、TVやDVDなど各種動画、バックガイドモニタ画面などの各種画面が表示されるようになっている。
It is also possible to provide a specific emblem in the passenger compartment, and determine whether the driver's seat is present or not based on the appearance of the emblem when the emblem is photographed. Further, as shown in FIG. 9B, a
従って、機能実行制御部21は、カメラ8、画像制御部10及び座席位置判別部11と共に、座席位置判別手段として機能する。機能実行制御部21は、表示制御手段や操作制限手段、更には判断手段としても機能する。尚、本実施形態では、メガネ型情報表示装置1は、着信メール等のメッセージの読上げの機能を備えており、例えばメール着信時において、表示が制限される場合でも、メッセージの音声出力が可能とされている。
Therefore, the function
次に、上記構成の作用について、図3から図9も参照して述べる。まず、図3のフローチャートは、ユーザ(運転者)が運転席に乗込んで、本実施形態のメガネ型情報表示装置1を装着した際に、機能実行制御部21が実行する運転席モードへの切替えの制御手順を示している。即ち、ユーザが車両に乗車して車載機18が起動されると、ステップS1では、ユーザが例えば車載機18の情報を得るためにタッチパッド12を操作すると、通信部17と車載機18との間の例えばBluetoothによる接続が実行される。車載機18との接続がなされると、次のステップS2にて、メガネ型情報表示装置1の機能実行制御部21は、運転席モードに切替えられる。
Next, the operation of the above configuration will be described with reference to FIGS. First, in the flowchart of FIG. 3, when the user (driver) gets in the driver's seat and wears the glasses-type
このように、運転席モードに切替えられることにより、以降は、車載機18からメガネ型情報表示装置1に対し、車両情報などの運転者に対する有用な情報を提供することができる。また後述するように、この運転席モードにあっては、運転者の運転への集中を妨げるような表示や操作が制限されることになる。メガネ型情報表示装置1の車載機18との接続状態から、その接続を解除する場合には、ステップS3にて、ユーザのタッチパッド12操作等の操作に基づき、通信部17と車載機18との間の接続が解除される。すると、ステップS4にて、メガネ型情報表示装置1における運転席モードが解除され、処理が終了する。
In this way, by switching to the driver's seat mode, it is possible to provide useful information such as vehicle information to the driver from the vehicle-mounted
図4のフローチャートは、機能実行制御部21が実行する、カメラの撮影画像に基づく、ユーザの座席位置の判別の処理手順を示している。即ち、ステップS11では、カメラ8によりユーザの視野画像(前方画像)の撮影が行われる。次のステップS12では、カメラ8の撮影画像を画像認識処理することにより、ユーザが車内にいるか車外にいるかの判別が行われ、車内の場合には、更に座席位置の判別が行われる。
The flowchart of FIG. 4 shows a processing procedure executed by the function
この場合、上記したように、ステアリングホイール26やメータ部27、シート等の特定の車内固有物の有無及び相対位置(見え方)の検出に基づき、ユーザが車内、車外のどちらにいるか、更には座席位置を判別することができる。ステップS13では、ユーザが車内、車外のいずれにいるか、及び車内の場合の座席位置(運転者かそれ以外の乗員か)の情報が保存され、処理が終了する。
In this case, as described above, whether the user is inside or outside the vehicle based on the presence / absence of a specific vehicle interior such as the
次に、図5のフローチャートは、機能実行制御部21が実行する、ディスプレイ7の表示及びタッチパッド12操作等の操作の制限に関する処理手順を示すものである。尚、この処理は、ディスプレイ7の表示を更新する前に、更新ごとに毎回実行される。ディスプレイ7の表示の更新は、例えばスマートフォン19にメールの着信があった場合などシステム側のトリガに基づいて行われたり、ユーザによるタッチパッド12の操作をトリガとして行われたりする。
Next, the flowchart of FIG. 5 shows a processing procedure executed by the function
処理か開始されると、まずステップS21では、現在運転席モードになっているかどうかが判断される。運転席モードになっている場合には(ステップS21にてYes)、ステップS22にて、上記画像認識の結果に基づきユーザが車内(運転席)にいるかどうかが判断される。ユーザが車外にいると判断された場合には(ステップS22にてNo)、ステップS23にて、運転席モードが解除され、ステップS21に戻る。ユーザが車内(運転席)にいると判断された場合には(ステップS22にてYes)、ステップS24にて、車両が走行中かどうかが判断される。 When the process is started, first in step S21, it is determined whether or not the driver's seat mode is currently set. If it is in the driver's seat mode (Yes in step S21), it is determined in step S22 whether or not the user is in the vehicle (driver's seat) based on the result of the image recognition. When it is determined that the user is outside the vehicle (No in step S22), the driver's seat mode is canceled in step S23, and the process returns to step S21. When it is determined that the user is in the vehicle (driver's seat) (Yes in step S22), it is determined in step S24 whether the vehicle is traveling.
車両が走行中である場合には(ステップS24にてYes)、ステップS25にて、ディスプレイ7の表示が制限付きで行われる。具体的には、車載機18から送信される車両情報中でも必要な運転支援情報等の表示は可能であるが、動画情報の表示や、スマートフォンから送信されるメール情報等、運転に関係ない(運転者の運転への集中を妨げる)割込み情報については表示が制限(禁止)される。但し音声出力は可能となる。また、タッチパッド12操作など車載機18に対する必要な操作は可能であるが、例えばカーナビにおける目的地検索、設定、オーディオ操作等の運転の集中を妨げるような操作は制限(禁止)される。
When the vehicle is traveling (Yes in step S24), the display on the
これに対し、車両が走行中でない、つまり停車中である場合には(ステップS24にてNo)、ステップS26にて、ディスプレイ7の表示については、制限なしで行われる。タッチパッド12操作などの操作についても、制限は設けられない。尚、ガソリン残量、バッテリ残量、ランプ切れ等の警告情報や、オイル交換等のメンテナンス情報については、ユーザが運転者であり且つ車両の走行中においては、視界を妨げない範囲に制限された形態で表示が行われる。
On the other hand, when the vehicle is not traveling, that is, when the vehicle is stopped (No in step S24), the display on the
一方、ステップS21に戻り、現在運転席モードになっていない場合には(ステップS21にてNo)、ステップS27にて、上記画像認識の結果に基づきユーザが車内(運転席)にいるかどうかが判断される。ユーザが車内にいない、つまり車外にいる場合には(ステップS27にてNo)、後述のステップS30に進む。ユーザが車内にいると判断された場合には(ステップS27にてYes)、ステップS28にて、ユーザが運転席に乗車しているかどうかが判断される。 On the other hand, returning to step S21, if the driver's seat mode is not currently set (No in step S21), it is determined in step S27 whether the user is in the vehicle (driver's seat) based on the result of the image recognition. To be done. If the user is not inside the vehicle, that is, outside the vehicle (No in step S27), the process proceeds to step S30 described below. When it is determined that the user is in the vehicle (Yes in step S27), it is determined in step S28 whether the user is in the driver's seat.
運転席に乗車していると判断された場合には(ステップS28にてYes)、次のステップS29にて、運転席モードに切替えらえた上で、前記ステップS24に進む。これに対し、ユーザが運転席以外の席に乗車していると判断された場合には(ステップS28にてNo)、ステップS30に進む。ステップS30では、ディスプレイ7の表示については、制限なしで行われる。タッチパッド12操作などの操作についても、制限は設けられない。但し、車載機18と接続されていないので、メガネ型情報表示装置1による車載機18の操作や、車載機18からの情報の取得及び表示はできない。
When it is determined that the driver is in the driver's seat (Yes in step S28), the mode is switched to the driver's seat mode in step S29, and then the process proceeds to step S24. On the other hand, when it is determined that the user is in a seat other than the driver's seat (No in step S28), the process proceeds to step S30. In step S30, the display on the
図6は、運転者に対するメール等のメッセージの着信時における、機能実行制御部21が実行する処理手順及びディスプレイ7の表示例と共に示している。即ち、ユーザ(運転者)に対するメッセージの着信があったときには、まずステップS31にて、走行中かどうかが判断される。走行中である場合には(ステップS31にてYes)、ステップS32にて、ディスプレイ7に、メッセージの読み上げを行うかどうかをユーザに選択させるための選択画面が表示される。このとき、選択画面の表示と併せて(代えて)、「着信メッセージがあります。メッセージを読み上げますか?」といった合成音声の出力を行っても良い。
FIG. 6 shows a processing procedure executed by the function
ここで、ユーザが「はい」を選択した場合には、ステップS33にて、メッセージが順に読み上げられる。「いいえ」が選択された場合には、表示、読み上げのいずれも行われず、処理が終了する。一方、走行中でない場合には(ステップS31にてNo)、ステップS34にて、ディスプレイ7に、メッセージを表示するか、読み上げを行うかユーザに選択させるための選択画面が表示される。ユーザが、「読み上げ」を選択した場合には、ステップS33にて、メッセージが順に読み上げられる。「表示」を選択した場合には、ステップS35にて、ディスプレイ7にメッセージが表示される。
Here, if the user selects "Yes", the messages are read in order in step S33. If "No" is selected, neither the display nor the reading is performed, and the process ends. On the other hand, when the vehicle is not traveling (No in step S31), the selection screen for allowing the user to select whether to display a message or read aloud is displayed on the
図7は、ディスプレイ7に対し、動画リストの選択画面を表示する場合の表示例を示している。図7(a)は、車両の停車中の表示を示し、ディスプレイ7に、複数のアイコン(選択スイッチ)を有する動画リストが制限なく表示される。これに対し、車両の走行中には、図7(b)に示すように、ディスプレイ7には、アイコン部分がトーンダウン表示され、選択操作が不可とされる。
FIG. 7 shows a display example when a moving image list selection screen is displayed on the
更に、図8は、ディスプレイ7の動画再生画面を示しており、図8(a)は、車両の停車中の表示を示し、図8(b)は走行中の様子を示している。このように、車両の停車中は、動画についても制限なくディスプレイ7に表示可能であるが、走行中においては、動画表示が禁止される。このように、車両の走行中は、運転者であるユーザに対し、動画リストの選択や、動画表示が禁止されるのである。
Further, FIG. 8 shows a moving image reproduction screen of the
ところで、車載機18から運転支援情報や警告情報等の車両情報を取得してディスプレイ7に表示する場合、車両側の表示装置28の表示や車載スピーカからの音声出力と重複する事情がある。そこで、例えば、車載機18と運転者のメガネ型情報表示装置1とが接続されている場合には、車載機18からの車両情報を全てメガネ型情報表示装置1側でのみ出力するように構成することができる。これにより、他の乗員が動画やオーディオを楽しんでいるような場合に、車載側の表示装置28や音声出力が妨げられることなく済ませることができる。
By the way, when vehicle information such as driving support information and warning information is acquired from the vehicle-mounted
また、車両をバックさせる場合に、運転者は、後方を直接見ながら運転する場合と、表示装置28に表示されたバックガイドモニタ画面を見ながら運転する場合とがある。このようなバック時に、メガネ型情報表示装置1のディスプレイ7にバックガイドモニタ画面を表示させることができるが、その際に、運転者が後方或いは表示装置28のどちらを向いているかをセンサで検出し、図9に示すように、それに応じて表示の方法を変更することができる。
Further, when the vehicle is backed, the driver may drive the vehicle while looking directly behind him or may drive the vehicle while looking at the back guide monitor screen displayed on the
即ち、運転者が、後方を向いている場合には、図9(a)に示すように、ディスプレイ7に車両の後部を上にしてバックガイドモニタ画面が表示される。これに対し、運転者が前方(表示装置28)を向いている場合には、図9(b)に示すように、ディスプレイ7に車両の前部を上にしてバックガイドモニタ画面が表示され。図9(a)、(b)では、車両の左前方に障害物が相対的に近付いている場合の表示例を示しており、いずれも、その方向を、運転者にとって直感的に判りやすく表示することができる。尚、この際には「左前方に注意して下さい。」といった音声出力も併せて行われる。
That is, when the driver is facing rearward, as shown in FIG. 9A, the back guide monitor screen is displayed on the
このように本実施形態のメガネ型情報表示装置1によれば、次のような効果を得ることができる。本実施形態では、車両に乗車したユーザの座席位置を判別し、判別した座席位置に応じて、機能実行制御部21により、ディスプレイ7に表示する情報を取捨選択するように構成した。従って、使用しているユーザが運転者である場合に、不要な情報については表示しない等、運転に対する集中を妨げるような表示動作を行わずに済ませることができる。
As described above, according to the glasses-type
また、本実施形態では、通信部17により車載機18等と通信を行い、ユーザが運転者であると判別された場合に、車載機18から取得した運転支援情報を含む車両情報をディスプレイ7表示させるように構成した。これにより、運転者に対して、運転に必要な或いは運転に役に立つ情報を、提供することができる。
In addition, in the present embodiment, the
そして、併せて、本実施形態では、使用しているユーザが運転者である場合に、必要最低限の操作以外の操作を禁止する等、運転に対する集中を妨げるような操作を行わずに済ませることができる。この結果、ユーザの視野内に情報を表示するディスプレイ7を備えたメガネ型情報表示装置1にあって、車両内で使用する場合の、安全性を確保することができるという優れた効果を奏する。
In addition, in addition, in the present embodiment, when the user who is using the driver is a driver, it is not necessary to perform an operation that impedes concentration on driving, such as prohibiting operations other than the minimum necessary operations. You can As a result, the glasses-type
特に本実施形態では、カメラ8により撮影した車内画像に基づいて、ユーザが、運転席に乗車している運転者か、それ以外の座席の乗員かを判別するように構成した。これにより、メガネ型情報表示装置1が元々備えているカメラ8及び画像認識機能を利用して、座席位置を十分な確かさで判別することが可能となる。ユーザが運転者の場合、運転に対する集中を妨げるような表示及び操作に制限をかけることで、安全性を確保することができる。それ以外の乗員の場合には、運転支援の情報を提供することは不要であると共に、表示や操作に制限をかけた場合の利便性が損なわれることになる。従って、運転者かそれ以外の乗員かを判別することで、両者にとって有益な制御を行うことができる。
In particular, the present embodiment is configured to determine whether the user is a driver in the driver's seat or an occupant in another seat, based on the in-vehicle image captured by the
更に本実施形態では、車両が走行中かどうかを判断し、走行中でないと判断された場合には、走行中であると判断された場合と比べて、表示に関する制限を緩和する、或いは、操作に関する制限を緩和するように構成した。表示や操作において安全上問題となるのは、車両の走行中であり、車両の停止時においては、制限を緩和しても安全性を確保できるので、走行中でないと判断された場合には制限を緩和することで、より利便性を高めることができる。 Further, in the present embodiment, it is determined whether or not the vehicle is traveling, and when it is determined that the vehicle is not traveling, the restriction on the display is relaxed or the operation is performed as compared with the case where it is determined that the vehicle is traveling. Configured to relax the restrictions on. Display and operation are a safety issue when the vehicle is running, and when the vehicle is stopped, safety can be ensured even if the restrictions are relaxed. By alleviating, it is possible to improve convenience.
尚、上記実施形態では、カメラ8の撮影画像に基づいて、ユーザの座席位置を判別するように構成したが、座席位置の判別の手法としては、ユーザが操作により自分の座席位置を入力するようにする等も可能である。また、上記実施形態では詳しく説明しなかったが、ナビゲーション画面をディスプレイ7に表示するようにしても良く、この場合、走行中は、例えば走行方向を矢印で示すだけといった、簡略化したナビゲーション画面を表示することが望ましい。その他、メガネ型情報表示装置のハードウエア構成及びソフトウエア構成、外観構造等についても様々な変更が可能であるなど、本発明は要旨を逸脱しない範囲内で適宜変更して実施し得るものである。
In the above embodiment, the seat position of the user is determined based on the image captured by the
図面中、1はメガネ型情報表示装置、2は本体部、7はディスプレイ、8はカメラ、12はタッチパッド(操作部)、15は各種センサ、17は通信部、18は車載機、19はスマートフォン、21は機能実行制御部(座席位置判別手段、表示制御手段。判断手段、操作制限手段)を示す。
In the drawings, 1 is a glasses-type information display device, 2 is a main body unit, 7 is a display, 8 is a camera, 12 is a touch pad (operation unit), 15 is various sensors, 17 is a communication unit, 18 is an in-vehicle device, and 19 is A
Claims (6)
ユーザの座席位置を判別する座席位置判別手段(21)と、
前記座席位置判別手段(21)が判別した座席位置に応じて、前記ディスプレイ(7)に表示する情報を取捨選択する表示制御手段(21)と、
前記座席位置判別手段(21)が判別した座席位置に応じて、前記操作部(12)の操作を制限する操作制限手段(21)とを備えると共に、
カメラ(8)及び該カメラ(8)の撮影画像を認識する画像認識機能を備え、
前記座席位置判別手段(21)は、前記カメラ(8)により撮影した車内画像に基づいて、ユーザの座席位置を判別することを特徴とするメガネ型情報表示装置。 A display (7) that can be used by being mounted on the head of a user who is in a vehicle and that displays information within the field of view of the user, and an operation unit (12) that can be operated by the user. In the eyeglass-type information display device (1),
A seat position discriminating means (21) for discriminating the seat position of the user,
Display control means (21) for selecting information to be displayed on the display (7) according to the seat position determined by the seat position determination means (21);
And an operation limiting unit (21) for limiting the operation of the operation unit (12) according to the seat position determined by the seat position determining unit (21) ,
A camera (8) and an image recognition function for recognizing a captured image of the camera (8),
The eyeglass-type information display device, wherein the seat position discriminating means (21) discriminates a user's seat position based on an in-vehicle image taken by the camera (8) .
前記座席位置判別手段(21)は、前記通信装置(17)と車載機(18)が接続している状態で、装着しているユーザの座席位置を判別することを特徴とする請求項1又は2記載のメガネ型情報表示装置。 A communication device (17) capable of communicating with an in-vehicle device (18) mounted on a vehicle,
The seat position discriminating means (21) discriminates a seat position of a user who is wearing the communication device (17) and the vehicle-mounted device (18) in a connected state. The eyeglass-type information display device described in 2.
前記座席位置判別手段(21)により、ユーザが運転席に乗車している運転者であると判別された際には、前記表示制御手段(21)は、前記判断手段(21)により走行中でないと判断された場合には、走行中であると判断された場合と比べて、表示に関する制限を緩和することを特徴とする請求項1から3のいずれか一項に記載のメガネ型情報表示装置。 A judging means (21) for judging whether the vehicle is traveling,
When the seat position determination means (21) determines that the user is a driver in the driver's seat, the display control means (21) is not traveling by the determination means (21). The glasses-type information display device according to any one of claims 1 to 3, characterized in that, when it is determined that the vehicle is traveling, the limitation on the display is relaxed as compared with the case where the vehicle is traveling. .
前記座席位置判別手段(21)により、ユーザが運転席に乗車している運転者であると判別された際には、前記表示制御手段(21)は、前記通信装置(17)を介して前記車載機(18)から取得した運転支援情報を含む車両情報を表示することを特徴とする請求項1から4のいずれか一項に記載のメガネ型情報表示装置。 A communication device (17) capable of communicating with an in-vehicle device (18) mounted on a vehicle,
When the seat position determination means (21) determines that the user is a driver in the driver's seat, the display control means (21) uses the communication device (17) to perform the above-mentioned operation. 5. The glasses-type information display device according to claim 1, wherein the vehicle information including the driving support information acquired from the vehicle-mounted device (18) is displayed.
前記座席位置判別手段(21)により、ユーザが運転席に乗車している運転者であると判別された際には、前記操作制限手段(21)は、前記判断手段(21)により走行中でないと判断された場合には、走行中であると判断された場合と比べて、操作に関する制限を緩和することを特徴とする請求項1から5のいずれか一項に記載のメガネ型情報表示装置。 A judging means (21) for judging whether the vehicle is traveling,
When the seat position determining means (21) determines that the user is a driver in the driver's seat, the operation limiting means (21) is not traveling by the determining means (21). The glasses-type information display device according to any one of claims 1 to 5, wherein, when it is determined that the operation is restricted, the restriction regarding the operation is relaxed as compared with the case where it is determined that the vehicle is running. .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016003497A JP6686450B2 (en) | 2016-01-12 | 2016-01-12 | Glasses type information display device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016003497A JP6686450B2 (en) | 2016-01-12 | 2016-01-12 | Glasses type information display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017125883A JP2017125883A (en) | 2017-07-20 |
JP6686450B2 true JP6686450B2 (en) | 2020-04-22 |
Family
ID=59365108
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016003497A Expired - Fee Related JP6686450B2 (en) | 2016-01-12 | 2016-01-12 | Glasses type information display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6686450B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102017218444B4 (en) * | 2017-10-16 | 2020-03-05 | Audi Ag | Method for operating a safety system for a seat system of a motor vehicle and safety system for a seat system of a motor vehicle |
JP7043845B2 (en) * | 2018-01-17 | 2022-03-30 | トヨタ自動車株式会社 | Display linkage control device for vehicles |
JP7135052B2 (en) * | 2020-10-29 | 2022-09-12 | ソフトバンク株式会社 | Control device, program, and control method |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001333351A (en) * | 2000-05-24 | 2001-11-30 | Nissan Motor Co Ltd | Information display device |
JP4918872B2 (en) * | 2007-03-12 | 2012-04-18 | 株式会社エクォス・リサーチ | In-vehicle device |
JP2014035289A (en) * | 2012-08-09 | 2014-02-24 | Nissan Motor Co Ltd | Vehicle travel support information display device |
WO2015046669A1 (en) * | 2013-09-26 | 2015-04-02 | Lg Electronics Inc. | Head mounted display device and method of controlling the same |
JP6063854B2 (en) * | 2013-12-02 | 2017-01-18 | 本田技研工業株式会社 | Vehicle display system |
WO2015145541A1 (en) * | 2014-03-24 | 2015-10-01 | 日立マクセル株式会社 | Video display device |
-
2016
- 2016-01-12 JP JP2016003497A patent/JP6686450B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2017125883A (en) | 2017-07-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6682574B2 (en) | Method of using a communication terminal in a motor vehicle with an autopilot operating and motor vehicle | |
JP6033804B2 (en) | In-vehicle device operation device | |
JP5397697B2 (en) | Image control device | |
US20160313792A1 (en) | Device and method for navigating within a menu for controlling a vehicle, and selecting a menu entry from the menu | |
US8874321B2 (en) | Display control apparatus for vehicle | |
JP6197814B2 (en) | Vehicle display device | |
CN110997390B (en) | Method for operating a display device of a motor vehicle and motor vehicle | |
JP2013067332A (en) | Vehicle operation input apparatus | |
WO2017056570A1 (en) | Driving support device | |
JP2013119370A (en) | System for preventing driver from shifting line of sight during traveling | |
US11595878B2 (en) | Systems, devices, and methods for controlling operation of wearable displays during vehicle operation | |
JP6686450B2 (en) | Glasses type information display device | |
JP2018129732A (en) | Vehicular video display device | |
JP6115278B2 (en) | Vehicle display device | |
WO2022198907A1 (en) | Method and apparatus for controlling vehicle display screen, and device, medium and vehicle | |
WO2017154208A1 (en) | Mobile terminal, operation control system for mobile terminal, and method for controlling mobile terminal | |
US9283893B2 (en) | Vision-controlled interaction for data spectacles | |
KR101525351B1 (en) | Display control system for vehicle interworking portable terminal | |
JP2020117103A (en) | Vehicular display device | |
JP2019119357A (en) | Display system | |
JP7484756B2 (en) | Display System | |
JP2017007548A (en) | Rear seat state display control device | |
JP2015136953A (en) | Two-wheeled vehicle information provision device | |
JP2016030507A (en) | On-vehicle display device | |
JP2023093087A (en) | Information provision support method, information provision support device, and information provision support program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180409 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181212 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181225 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190723 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190917 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200303 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200316 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6686450 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |