JP2023035095A - 表示制御装置、表示システム、表示方法及び表示プログラム - Google Patents

表示制御装置、表示システム、表示方法及び表示プログラム Download PDF

Info

Publication number
JP2023035095A
JP2023035095A JP2021141710A JP2021141710A JP2023035095A JP 2023035095 A JP2023035095 A JP 2023035095A JP 2021141710 A JP2021141710 A JP 2021141710A JP 2021141710 A JP2021141710 A JP 2021141710A JP 2023035095 A JP2023035095 A JP 2023035095A
Authority
JP
Japan
Prior art keywords
display
content
display unit
unit
control device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021141710A
Other languages
English (en)
Other versions
JP7487714B2 (ja
Inventor
智洋 稲田
Tomohiro Inada
均至 村木
Kinji Muraki
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2021141710A priority Critical patent/JP7487714B2/ja
Priority to KR1020220093902A priority patent/KR102633253B1/ko
Priority to DE102022119110.9A priority patent/DE102022119110A1/de
Priority to CN202210932042.3A priority patent/CN115723568A/zh
Priority to US17/880,658 priority patent/US11958360B2/en
Publication of JP2023035095A publication Critical patent/JP2023035095A/ja
Application granted granted Critical
Publication of JP7487714B2 publication Critical patent/JP7487714B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C7/00—Optical parts
    • G02C7/02—Lenses; Lens systems ; Methods of designing lenses
    • G02C7/04—Contact lenses for the eyes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/001—Arbitration of resources in a display system, e.g. control of access to frame buffer by video controller and/or main processor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/177—Augmented reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/178—Warnings
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/182—Distributing information between displays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00—Non-optical adjuncts; Attachment thereof
    • G02C11/10—Electronic devices other than hearing aids
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/028—Improving the quality of display appearance by changing the viewing angle properties, e.g. widening the viewing angle, adapting the viewing angle to the view direction
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0464—Positioning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/04—Display device controller operating with a plurality of display units
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Optics & Photonics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Otolaryngology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Instrument Panels (AREA)

Abstract

【課題】異なる表示部のそれぞれの特徴を補間してユーザーにとって視認しやすい表示を提供する。【解決手段】表示制御装置２０は、プロセッサが、車両１２に固定されたヘッドアップディスプレイ２４及び乗員の瞳に装着されるスマートコンタクトレンズ１４において、透過される実像を対象に重畳表示されるコンテンツを決定し、所定の条件に基づいて前記コンテンツをヘッドアップディスプレイ２４及びスマートコンタクトレンズ１４の何れの表示部ＤＳに表示させるかを選択し、選択された表示部ＤＳにおいて前記対象に合わせて前記コンテンツを重畳表示させるように構成されている。【選択図】図１

Description

本発明は、表示制御装置、表示システム、表示方法及び表示プログラムに関する。
特許文献１には、フロントガラスに画像を重畳するＡＲ－ＨＵＤが開示され、特許文献２には、コンタクトレンズに表示部を備えたスマートコンタクトレンズが開示されている。
特開２０１９－１３８７７３号公報 米国特許出願公開第２０１６／００９７９４０号明細書
ＨＵＤやコンタクトレンズをＡＲ表示器とする場合、ＨＵＤは視野角が限定され、コンタクトレンズは表示の精度が得られない。
本発明は、異なる表示部のそれぞれの特徴を補間してユーザーにとって視認しやすい表示を提供する表示制御装置、表示システム、表示方法及び表示プログラムを提供することを目的とする。
請求項１に記載の表示制御装置は、プロセッサを備え、前記プロセッサは、移動体に固定された第一表示部及び人体に装着される第二表示部において、透過される実像を対象に重畳表示されるコンテンツを決定し、所定の条件に基づいて前記コンテンツを前記第一表示部及び前記第二表示部の何れの表示部に表示させるかを選択し、選択された前記表示部において前記対象に合わせて前記コンテンツを重畳表示させるように構成されている。
請求項１に記載の表示制御装置では、プロセッサが第一表示部及び第二表示部の各々の表示部に対してコンテンツを表示するように構成されている。ここで、第一表示部は、車両等の移動体に固定され、第二表示部は頭部又は瞳等の人体に対して装着されている。当該表示制御装置においてプロセッサは、所定の条件に基づいてコンテンツを表示させる表示部を選択し、選択された表示部において透過される実像に対してコンテンツを重畳表示させる。当該表示制御装置によれば、異なる表示部のそれぞれの特徴を補間してユーザーにとって視認しやすい表示を提供することができる。
請求項２に記載の表示制御装置は、請求項１に記載の表示制御装置において、前記プロセッサは、前記コンテンツを重畳表示させる前記対象、前記移動体から前記対象までの距離、各前記表示部の視野角に対する前記コンテンツの表示位置の少なくとも何れか一つの条件に基づいて前記コンテンツを前記第一表示部及び前記第二表示部の何れの表示部に表示させるかを選択する。
請求項２に記載の表示制御装置によれば、条件毎に最適な表示部を選択することができる。
請求項３に記載の表示制御装置は、請求項１又は２に記載の表示制御装置において、前記プロセッサは、前記コンテンツの表示位置が前記第一表示部の表示領域を超える場合、前記コンテンツを前記第二表示部に表示させる。
請求項３に記載の表示制御装置によれば、第一表示部の表示領域外のコンテンツの表示を第二表示部により補完することができる。
請求項４に記載の表示制御装置は、請求項１～３の何れか１項に記載の表示制御装置において、前記プロセッサは、前記移動体から前記対象までの距離が所定値よりも大きい場合、前記コンテンツを前記第二表示部に表示させる。
請求項４に記載の表示制御装置によれば、第一表示部において遠方の表示対象に対してコンテンツの視点距離がずれる場合であっても、第二表示部によりコンテンツの表示を補完することができる。
請求項５に記載の表示システムは、請求項１～３の何れか１項に記載の表示制御装置と、前記移動体である車両に搭載された前記第一表示部としてのヘッドアップディスプレイと、前記車両の乗員の瞳に装着された第二表示部としてのスマートコンタクトレンズと、を備えている。
請求項５に記載の表示システムによれば、車両において特徴の異なる表示部を使い分けることで、乗員に対して視認しやすい表示を提供することができる。
請求項６に記載の表示方法は、移動体に固定された第一表示部及び人体に装着される第二表示部において、透過される実像を対象に重畳表示されるコンテンツを決定し、所定の条件に基づいて前記コンテンツを前記第一表示部及び前記第二表示部の何れの表示部に表示させるかを選択し、選択された前記表示部において前記対象に合わせて前記コンテンツを重畳表示させる処理をコンピュータが実行する。
請求項６に記載の表示方法では、コンピュータが第一表示部及び第二表示部の各々の表示部に対してコンテンツを表示するように構成されている。ここで、第一表示部及び第二表示部の態様については上述のとおりである。当該表示方法においてコンピュータは、所定の条件に基づいてコンテンツを表示させる表示部を選択し、選択された表示部において透過される実像に対してコンテンツを重畳表示させる。当該表示方法によれば、異なる表示部のそれぞれの特徴を補間してユーザーにとって視認しやすい表示を提供することができる。
請求項７に記載の表示プログラムは、移動体に固定された第一表示部及び人体に装着される第二表示部において、透過される実像を対象に重畳表示されるコンテンツを決定し、所定の条件に基づいて前記コンテンツを前記第一表示部及び前記第二表示部の何れの表示部に表示させるかを選択し、選択された前記表示部において前記対象に合わせて前記コンテンツを重畳表示させる処理をコンピュータに実行させる。
請求項７に記載の表示プログラムは、コンピュータが第一表示部及び第二表示部の各々の表示部に対してコンテンツを表示するように構成されている。ここで、第一表示部及び第二表示部の態様については上述のとおりである。当該表示プログラムが実行されるコンピュータは、所定の条件に基づいてコンテンツを表示させる表示部を選択し、選択された表示部において透過される実像に対してコンテンツを重畳表示させる。当該表示プログラムによれば、異なる表示部のそれぞれの特徴を補間してユーザーにとって視認しやすい表示を提供することができる。
本発明によれば、異なる表示部のそれぞれの特徴を補間してユーザーにとって視認しやすい表示を提供することができる。
第１の実施形態に係る表示システムの概略構成を示す図である。 第１の実施形態の車両のハードウェア構成を示すブロック図である。 第１の実施形態の表示制御装置におけるＲＯＭの構成を示すブロック図である。 第１の実施形態の表示制御装置におけるＣＰＵの機能構成を示すブロック図である。 第１の実施形態に係るスマートコンタクトレンズのハードウェア構成を示す図である。 第１の実施形態における表示処理の流れを示すフローチャートである。 第１の実施形態における選択処理の流れを示すフローチャートである。 第１の実施形態において、ヘッドアップディスプレイによる表示を説明する図である。 第１の実施形態において、スマートコンタクトレンズによる表示を説明する図である。 第２の実施形態に係る表示システムの概略構成を示す図である。 第２の実施形態における選択処理の流れを示すフローチャートである。
以下、図面を用いて本発明の実施形態である表示システム１０について説明する。
［第１の実施形態］
（全体構成）
図１に示されるように、第１の実施形態の表示システム１０は、表示制御装置２０、ヘッドアップディスプレイ２４、スマートコンタクトレンズ１４及びスマートフォン１６を含んで構成されている。ヘッドアップディスプレイ２４及びスマートコンタクトレンズ１４は、車両１２の乗員に対して、車両１２の各種機能に係る表示を提供する表示部ＤＳとして提供されている。また、本実施形態のヘッドアップディスプレイ２４及びスマートコンタクトレンズ１４は、ＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ：拡張現実）技術を用いて、画像や文字等のコンテンツを車外の風景に重畳させて表示することを可能としている。ヘッドアップディスプレイ２４は、第一表示部の一例であり、スマートコンタクトレンズ１４は第二表示部の一例である。
表示制御装置２０及びヘッドアップディスプレイ２４はその主たる構成がダッシュボード１２Ａ（図８及び図９参照）の内部に収容されている。スマートコンタクトレンズ１４は乗員の瞳に装着されている。スマートフォン１６は乗員が所持している。
ヘッドアップディスプレイ２４は表示制御装置２０と電気的に接続されている。また、スマートコンタクトレンズ１４は、スマートフォン１６を介して表示制御装置２０と通信可能に接続されている。
（車両）
図２に示されるように、車両１２は、表示制御装置２０、ＥＣＵ２２及びヘッドアップディスプレイ２４を少なくとも含んで構成されている。また、車両１２は、ＧＰＳ装置３０、外部カメラ３４及び視線カメラ３６が搭載されている。
ＥＣＵ２２は、カーナビゲーションＥＣＵ２２Ａ、ＡＤＡＳ（Ａｄｖａｎｃｅｄ Ｄｒｉｖｅｒ Ａｓｓｉｓｔａｎｃｅ Ｓｙｓｔｅｍ）－ＥＣＵ２２Ｂ、及びボデーＥＣＵ２２Ｃを含む。
カーナビゲーションＥＣＵ２２Ａは、カーナビゲーションシステムを制御する。カーナビゲーションＥＣＵ２２Ａには、ＧＰＳ装置３０が接続されている。ＧＰＳ装置３０は車両１２の現在位置を測定する装置である。ＧＰＳ装置３０は、ＧＰＳ衛星からの信号を受信する図示しないアンテナを含んでいる。なお、ＧＰＳ装置３０は、表示制御装置２０に対して直接接続されていてもよい。
ＡＤＡＳ－ＥＣＵ２２Ｂは、先進運転支援システムを統括制御する。ＡＤＡＳ－ＥＣＵ２２Ｂには、少なくとも車両１２の前方を撮像する外部センサである外部カメラ３４が接続されている。ＡＤＡＳ－ＥＣＵ２２Ｂには、外部カメラ３４の他に、車両１２の周辺環境の検出に用いられるセンサ群として、探査波を送信し反射波を受信するミリ波レーダ、及び車両１２の前方をスキャンするライダ（Ｌａｓｅｒ Ｉｍａｇｉｎｇ Ｄｅｔｅｃｔｉｏｎ ａｎｄ Ｒａｎｇｉｎｇ）等が接続されている。また、ＡＤＡＳ－ＥＣＵ２２Ｂには、ブレーキ及びアクセルの各々を駆動させる図示しないアクチュエータが接続されている。なお、外部カメラ３４は、表示制御装置２０に対して直接接続されていてもよい。
ボデーＥＣＵ２２Ｃは、ワイパーやライト類を制御する。ボデーＥＣＵ２２Ｃには、例えば、前照灯、ウィンカ等のスイッチが接続されている。
ヘッドアップディスプレイ２４は、投影装置２６及びアクチュエータ２８を含んで構成されている。アクチュエータ２８は、投影装置２６から投影された画像を反射するミラーの角度、及び当該ミラーと投影装置２６との距離を調整するための駆動装置である。
視線カメラ３６は、少なくとも乗員の顔を撮像するカメラであって、乗員の視線を検出する。視線カメラ３６は、後述する入出力Ｉ／Ｆ２０Ｆに接続されている。
ヘッドアップディスプレイ２４は、フロントウインドウ１２Ｂに所定の領域の投影面ＰＡを有し（図８及び図９参照）、投影装置２６から投影された画像が表示される。この投影面ＰＡは、ヘッドアップディスプレイ２４の表示領域に相当する。なお、ヘッドアップディスプレイ２４の投影面は、フロントウインドウ１２Ｂに限らず、ダッシュボード１２Ａに設けられたコンバイナ（反射板）が投影面であってもよい
本実施形態の表示制御装置２０は、外部カメラ３４の撮像画像を基にヘッドアップディスプレイ２４に表示させるコンテンツの位置を設定する。この際、視線カメラ３６の映像を基に乗員のアイポイントの三次元座標を取得し、取得した三次元座標に基づいて撮像画像の撮影場所が乗員のアイポイントに補正される。これにより、ヘッドアップディスプレイ２４では、コンテンツの表示対象となる実像に対し、当該対象に合わせてコンテンツを重畳表示させることができる。なお、外部カメラ３４の撮像画像に基づいて走行中の走行路、他の車両及び歩行者を仮想空間上に配置すると共に、仮想空間における表示対象に対してコンテンツの位置を設定してもよい。この場合もヘッドアップディスプレイ２４では、コンテンツの表示対象となる実像に対し、当該対象に合わせてコンテンツを重畳表示させることができる。
表示制御装置２０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０Ａ、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０Ｂ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０Ｃ、無線通信Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）２０Ｄ、車内通信Ｉ／Ｆ２０Ｅ及び入出力Ｉ／Ｆ２０Ｆを含んで構成されている。ＣＰＵ２０Ａ、ＲＯＭ２０Ｂ、ＲＡＭ２０Ｃ、無線通信２０Ｄ、車内通信Ｉ／Ｆ２０Ｅ及び入出力Ｉ／Ｆ２０Ｆは、内部バス２０Ｇを介して相互に通信可能に接続されている。
ＣＰＵ２０Ａは、中央演算処理ユニットであり、各種プログラムを実行したり、各部を制御したりする。すなわち、ＣＰＵ２０Ａは、ＲＯＭ２０Ｂからプログラムを読み出し、ＲＡＭ２０Ｃを作業領域としてプログラムを実行する。
ＲＯＭ２０Ｂは、各種プログラム及び各種データを記憶している。図３に示されるように、本実施形態のＲＯＭ２０Ｂは、処理プログラム１００、及び画像データ１１０を記憶している。なお、処理プログラム１００及び画像データ１１０は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）又はＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）等のストレージに記憶されていてもよい。
表示プログラムとしての処理プログラム１００は、後述する表示処理及び選択処理を行うためのプログラムである。画像データ１１０は、ヘッドアップディスプレイ２４に表示させる画像であるコンテンツを記憶したデータである。
図２に示されるように、ＲＡＭ２０Ｃは、作業領域として一時的にプログラム又はデータを記憶する。
無線通信Ｉ／Ｆ２０Ｄは、スマートフォン１６又はスマートグラス１８と接続するためのインタフェースである。無線通信Ｉ／Ｆ２０Ｄでは、Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｗｉ－Ｆｉ（登録商標）等の通信規格が用いられる。
車内通信Ｉ／Ｆ２０Ｅは、各ＥＣＵ２２と接続するためのインタフェースである。当該インタフェースは、ＣＡＮ（Ｃｏｎｔｒｏｌｌｅｒ Ａｒｅａ Ｎｅｔｗｏｒｋ）プロトコルによる通信規格が用いられている。車内通信Ｉ／Ｆ２０Ｅは、外部バス２０Ｈを介して各ＥＣＵ２２と接続されている。
入出力Ｉ／Ｆ２０Ｆは、ヘッドアップディスプレイ２４を構成する投影装置２６及びアクチュエータ２８と通信するためのインタフェースである。
図４に示されるように本実施形態の表示制御装置２０では、ＣＰＵ２０Ａが、処理プログラム１００を実行することで、取得部２００、決定部２１０、選択部２２０及び表示制御部２３０として機能する。
取得部２００は、車両１２における撮像画像、及び車両１２の制御等に係る車両情報を取得する機能を有している。例えば、取得部２００は、外部カメラ３４及び視線カメラ３６の撮像画像を取得する。また例えば、取得部２００は、カーナビゲーションＥＣＵ２２Ａから目的地までの進路を取得する。また例えば、取得部２００は、ＡＤＡＳ－ＥＣＵ２２Ｂから車両１２の速度、加速度、ヨーレイト等を取得する。
決定部２１０は、ヘッドアップディスプレイ２４、及びスマートコンタクトレンズ１４に表示させるコンテンツを決定する機能を有している。例えば、決定部２１０は、画像データ１１０からカーナビゲーションに使用する矢印等の画像をコンテンツとして決定する。また例えば、決定部２１０は、車速に対応する数字の画像をコンテンツとして決定する。
選択部２２０は、所定の条件に基づいて決定部２１０が決定したコンテンツをヘッドアップディスプレイ２４及びスマートコンタクトレンズ１４の何れの表示部ＤＳに表示させるかを選択する機能を有している。選択部２２０は、後述する選択処理を実行することで、表示させるコンテンツの各々について、ヘッドアップディスプレイ２４及びスマートコンタクトレンズ１４の何れの表示部ＤＳに表示させるかを選択する。
表示制御部２３０は、コンテンツを選択部２２０により選択された表示部ＤＳに表示させる機能を有している。
（スマートコンタクトレンズ）
スマートコンタクトレンズ１４は、車両１２の乗員の瞳に装着され、瞳に対して画像を表示させるウェアラブルデバイスである。図５に示されるように、スマートコンタクトレンズ１４は、制御ユニット４０、表示ユニット４２、カメラユニット４４、電源ユニット４６、通信ユニット４８及びセンサ４９を含んで構成されている。
制御ユニット４０は、スマートコンタクトレンズ１４を構成する表示ユニット４２、カメラユニット４４、電源ユニット４６、通信ユニット４８及びセンサ４９の各部を制御する。制御ユニット４０は、ＣＰＵ、ＲＯＭ及びＲＡＭを有するマイクロコンピュータとして構成されている。
表示ユニット４２は、乗員に対して提示する画像や文字等のコンテンツを表示する表示部として機能する。本実施形態の表示ユニット４２は、画像を生成する複数の発光素子を備えている。なお、表示ユニット４２は、例えば、発光素子としてのＬＥＤとマイクロレンズとを組み合わせて画像を網膜に投影する方式、発光素子としてホログラフィック光学素子を使用する方式が採用され、視点距離の影響を受けにくいデバイスとして機能する。また、本実施形態の表示ユニット４２は、乗員の眼球表面で反射した光を受光する視線検出用の複数の受光素子を備えている。
カメラユニット４４は、瞳の外部を撮像する撮像部として機能する。カメラユニット４４は、撮像レンズ、及び撮像レンズを駆動する駆動部を含んで構成されている。
電源ユニット４６は、制御ユニット４０、表示ユニット４２、カメラユニット４４、通信ユニット４８及びセンサ４９を駆動させる駆動源である。なお、スマートコンタクトレンズ１４では、電源ユニット４６を設けずにワイヤレス給電を行ってもよい。
通信ユニット４８は、外部のスマートフォン１６又は表示制御装置２０と通信を行う通信部として機能する。通信ユニット４８には、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線通信規格が適用される。通信ユニット４８は、表示ユニット４２に表示させるコンテンツのデータを受信する。また、通信ユニット４８は、カメラユニット４４が撮像した撮像画像のデータ及び後述するセンサ４９が取得したデータを送信する。なお、本実施形態の通信ユニット４８はスマートフォン１６を介して表示制御装置２０に接続されているが、これに限らず、通信ユニット４８は表示制御装置２０に対して直接接続されていてもよい。
センサ４９は、乗員の瞳における涙液の電気抵抗を測定する。涙液の電気抵抗値を測定することにより、表示制御装置２０では涙液量を測定することができる。
本実施形態のスマートコンタクトレンズ１４は、カメラユニット４４の撮像画像を基に表示ユニット４２に表示させるコンテンツの位置を設定する。これにより、スマートコンタクトレンズ１４では、コンテンツの表示対象となる実像に対して、当該対象に合わせてコンテンツを重畳表示させることができる。
（スマートフォン）
スマートフォン１６は、乗員が所持する通信端末である。スマートフォン１６は、スマートコンタクトレンズ１４及び表示制御装置２０の双方と無線通信により接続される。
（制御の流れ）
本実施形態の表示制御装置２０において実行される表示方法としての表示処理及び選択処理の流れについて、図６及び図７を用いて説明する。表示処理及び選択処理は、ＣＰＵ２０Ａが、取得部２００、決定部２１０、選択部２２０及び表示制御部２３０として機能することにより実行される。
図６のステップＳ１００において、ＣＰＵ２０Ａは、各カメラから撮像画像を、各ＥＣＵ２２から車両情報を取得する。例えば、ＣＰＵ２０Ａは、車両情報として車両１２の目的地までの進路、車両１２の速度、加速度、ヨーレイト等を取得する。
ステップＳ１０１において、ＣＰＵ２０Ａは、各表示部ＤＳに表示させるコンテンツとその表示位置とを決定する。
ステップＳ１０２において、ＣＰＵ２０Ａは、選択処理を実行する。選択処理の詳細については後述する。
ステップＳ１０３において、ＣＰＵ２０Ａは、選択された表示部ＤＳに対してコンテンツを表示させる。そして、ステップＳ１００に戻る。
具体的に、ヘッドアップディスプレイ２４にコンテンツを表示させる場合、ＣＰＵ２０Ａは、コンテンツの画像情報を投影装置２６に出力する。これにより、投影面ＰＡでは、乗員の視点において、フロントウインドウ１２Ｂを通じた実像に対してコンテンツが重畳表示される。例えば、図８に示されるように、表示の対象物である前方の車両に対して、先進運転支援システムが検知していることを示すコンテンツであるバウンディングボックスＣ１が重畳表示される。また例えば、表示の対象物である走行路に対して車両１２の経路を示すコンテンツであるラインＣ２が重畳表示される。
また、スマートコンタクトレンズ１４にコンテンツを表示させる場合、ＣＰＵ２０Ａは、コンテンツの画像情報及び位置情報をスマートフォン１６経由でスマートコンタクトレンズ１４に出力する。これにより、スマートコンタクトレンズ１４では、制御ユニット４０が表示ユニット４２を制御して、当該表示ユニット４２を通じた実像に対してコンテンツが重畳表示される。例えば、図９に示されるように、表示の対象物である前方の走行路に対して、この先の進路を示すコンテンツである矢印Ｃ３が重畳表示される。また例えば、表示の対象領域である車両１２の右側方において、右後方から二輪車が接近していることを示すコンテンツである警告表示Ｃ４が重畳表示される。
次に、ステップＳ１０２の選択処理について、図７を用いて説明する。
図７のステップＳ２００において、ＣＰＵ２０Ａは、Ｓ１０１で表示が決定されたコンテンツを取得する。
ステップＳ２０１において、ＣＰＵ２０Ａは、投影面ＰＡ内、すなわちヘッドアップディスプレイ２４の表示領域内にコンテンツが表示されるか否かの判定を行う。換言すると、ＣＰＵ２０Ａは、ヘッドアップディスプレイ２４の視野角にコンテンツの表示が収まるか否かの判定を行う。ＣＰＵ２０Ａは、投影面ＰＡ内にコンテンツが表示されると判定した場合（ステップＳ２０１でＹＥＳの場合）、ステップＳ２０２に進む。一方、ＣＰＵ２０Ａは、投影面ＰＡ内にコンテンツが表示されないと判定した場合（ステップＳ２０１でＮＯの場合）、ステップＳ２０５に進む。
ステップＳ２０２において、ＣＰＵ２０Ａは、コンテンツの表示位置が車両１２から所定距離以下であるか否かの判定を行う。補足すると、車両１２からの距離とはコンテンツの虚像が表示される仮想の位置までの距離である。ＣＰＵ２０Ａは、コンテンツの表示位置が車両１２から所定距離以下であると判定した場合（ステップＳ２０２でＹＥＳの場合）、ステップＳ２０３に進む。一方、ＣＰＵ２０Ａは、コンテンツの表示位置が車両１２から所定距離以下ではない、すなわち所定距離を超えると判定した場合（ステップＳ２０２でＮＯの場合）、ステップＳ２０５に進む。
ステップＳ２０３において、ＣＰＵ２０Ａは、コンテンツの追従対象があるか否かの判定を行う。ここで、コンテンツの追従対象とは、コンテンツを重畳表示させる対象となる車両、歩行者、走行路、その他の構造物である。ＣＰＵ２０Ａは、コンテンツの追従対象があると判定した場合（ステップＳ２０３でＹＥＳの場合）、ステップＳ２０４に進む。一方、ＣＰＵ２０Ａは、コンテンツの追従対象がないと判定した場合（ステップＳ２０３でＮＯの場合）、ステップＳ２０５に進む。
ステップＳ２０４において、ＣＰＵ２０Ａは、コンテンツをヘッドアップディスプレイ２４に表示させることを選択する。そして、ステップＳ２０６に進む。
ステップＳ２０５において、ＣＰＵ２０Ａは、コンテンツをスマートコンタクトレンズ１４に表示させることを選択する。そして、ステップＳ２０６に進む。
ステップＳ２０６において、ＣＰＵ２０Ａは、選択すべき他のコンテンツはないか否かの判定を行う。ＣＰＵ２０Ａは、選択すべき他のコンテンツはないと判定した場合（ステップＳ２０６でＹＥＳの場合）、選択処理を終了させる。一方、ＣＰＵ２０Ａは、選択すべき他のコンテンツがあると判定した場合（ステップＳ２０６でＮＯの場合）、ステップＳ２００に戻る。
（まとめ）
本実施形態の表示制御装置２０では、ＣＰＵ２０Ａが第一表示部としてのヘッドアップディスプレイ２４、及び第二表示部としてのスマートコンタクトレンズ１４の各々に対してコンテンツを表示するように構成されている。ここで、ヘッドアップディスプレイ２４は、車両１２に固定され、スマートコンタクトレンズ１４は乗員の瞳に装着されている。本実施形態においてＣＰＵ２０Ａは、所定の条件に基づいてコンテンツを表示させる表示部ＤＳを選択し、選択された表示部ＤＳにおいて透過される実像に対してコンテンツを重畳表示させる。本実施形態の表示制御装置２０によれば、異なる表示部ＤＳのそれぞれの特徴を補間してユーザーにとって視認しやすい表示を提供することができる。
補足すると、ヘッドアップディスプレイ２４は、実像に合わせてコンテンツを重畳する場合の表示位置の精度がスマートコンタクトレンズ１４に比べて優れている。他方、本実施形態のスマートコンタクトレンズ１４は、網膜にコンテンツを直接投影する等することで、ヘッドアップディスプレイ２４のようにコンテンツの視点距離が遠く離れた場合の違和感が生じ難い。本実施形態では、ＣＰＵ２０Ａがコンテンツを重畳表示させる対象、車両１２から表示対象までの距離、各表示部ＤＳの視野角に対するコンテンツの表示位置の少なくとも何れか一つの条件に基づいて、何れの表示部ＤＳにコンテンツを表示させるかを選択する。
特に、本実施形態の表示制御装置２０では、コンテンツを重畳表示させる対象が車両、歩行者、走行路、その他の構造物等である場合、位置決め精度が優位なヘッドアップディスプレイ２４が選択される。
また、本実施形態の表示制御装置２０では、コンテンツの表示位置がヘッドアップディスプレイ２４の視野角、つまり表示領域を超える場合、当該コンテンツを視野角の制限が少ないスマートコンタクトレンズ１４に表示させる。そのため、本実施形態によれば、ヘッドアップディスプレイ２４の表示領域外のコンテンツの表示をスマートコンタクトレンズ１４により補完することができる。
また、本実施形態の表示制御装置２０では、車両１２から表示対象までの距離が所定距離よりも大きい場合、コンテンツを視点距離の影響を受け難いスマートコンタクトレンズ１４に表示させる。そのため、本実施形態によれば、ヘッドアップディスプレイ２４において遠方の表示対象に対してコンテンツの視点距離がずれる場合であっても、スマートコンタクトレンズ１４によりコンテンツの表示を補完することができる。
［第２の実施形態］
第１の実施形態では、表示部ＤＳとしてヘッドアップディスプレイ２４及びスマートコンタクトレンズ１４を備え、コンテンツを何れの表示部ＤＳに表示させるかを選択していた。これに対して、第２の実施形態では、表示部ＤＳとして、ヘッドアップディスプレイ２４及びスマートコンタクトレンズ１４に加えてスマートグラス１８を含み、何れの表示部ＤＳに表示させるかを選択する。以下、第１の実施形態との相違点について説明する。なお、同一の構成については同一の符号を付しており、詳細な説明は割愛する。
図１０に示されるように、本実施形態の表示制御装置２０には、スマートフォン１６に加えて、スマートグラス１８が通信可能に接続されている。このスマートグラス１８は乗員の頭部に装着されている。スマートグラス１８は第二表示部の一例である。
（スマートグラス）
スマートグラス１８は、ＡＲ技術を用いて、画像や文字等のコンテンツを車外の風景に重畳させて表示するヘッドマウントディスプレイ方式のウェアラブルデバイスである。このスマートグラス１８は、車両１２の乗員が装着するデバイスである。図示しないが、スマートグラス１８は、車室内外の映像を撮影するカメラと、透過型のディスプレイと、表示制御装置２０と通信を行うための通信装置を少なくとも含んでいる。
（制御の流れ）
本実施形態の選択処理について、図１１を用いて説明する。
図１１のステップＳ２５０において、ＣＰＵ２０Ａは、Ｓ１０１で表示が決定されたコンテンツを取得する。
ステップＳ２５１において、ＣＰＵ２０Ａは、投影面ＰＡ内にコンテンツが表示されるか否かの判定を行う。ＣＰＵ２０Ａは、投影面ＰＡ内にコンテンツが表示されると判定した場合（ステップＳ２５１でＹＥＳの場合）、ステップＳ２５２に進む。一方、ＣＰＵ２０Ａは、投影面ＰＡ内にコンテンツが表示されないと判定した場合（ステップＳ２５１でＮＯの場合）、ステップＳ２５５に進む。
ステップＳ２５２において、ＣＰＵ２０Ａは、コンテンツの表示位置が車両１２から所定距離以下であるか否かの判定を行う。ＣＰＵ２０Ａは、コンテンツの表示位置が車両１２から所定距離以下であると判定した場合（ステップＳ２５２でＹＥＳの場合）、ステップＳ２５３に進む。一方、ＣＰＵ２０Ａは、コンテンツの表示位置が車両１２から所定距離以下ではない、すなわち所定距離を超えると判定した場合（ステップＳ２５２でＮＯの場合）、ステップＳ２５５に進む。
ステップＳ２５３において、ＣＰＵ２０Ａは、コンテンツの追従対象があるか否かの判定を行う。ＣＰＵ２０Ａは、コンテンツの追従対象があると判定した場合（ステップＳ２５３でＹＥＳの場合）、ステップＳ２５４に進む。一方、ＣＰＵ２０Ａは、コンテンツの追従対象がないと判定した場合（ステップＳ２５３でＮＯの場合）、ステップＳ２５６に進む。
ステップＳ２５４において、ＣＰＵ２０Ａは、コンテンツをヘッドアップディスプレイ２４に表示させることを選択する。そして、ステップＳ２５８に進む。
ステップＳ２５５において、ＣＰＵ２０Ａは、コンテンツの追従対象があるか否かの判定を行う。当該判定内容は、ステップＳ２５３と同様である。ＣＰＵ２０Ａは、コンテンツの追従対象があると判定した場合（ステップＳ２５５でＹＥＳの場合）、ステップＳ２５７に進む。一方、ＣＰＵ２０Ａは、コンテンツの追従対象がないと判定した場合（ステップＳ２５５でＮＯの場合）、ステップＳ２５６に進む。
ステップＳ２５６において、ＣＰＵ２０Ａは、コンテンツをスマートコンタクトレンズ１４に表示させることを選択する。そして、ステップＳ２５８に進む。
ステップＳ２５７において、ＣＰＵ２０Ａは、コンテンツをスマートグラス１８に表示させることを選択する。そして、ステップＳ２５８に進む。
ステップＳ２５８において、ＣＰＵ２０Ａは、選択すべき他のコンテンツはないか否かの判定を行う。ＣＰＵ２０Ａは、選択すべき他のコンテンツはないと判定した場合（ステップＳ２５８でＹＥＳの場合）、選択処理を終了させる。一方、ＣＰＵ２０Ａは、選択すべき他のコンテンツがあると判定した場合（ステップＳ２５８でＮＯの場合）、ステップＳ２５０に戻る。
第２の実施形態においても、第１の実施形態と同様の効果を得ることができる。特に、ヘッドアップディスプレイ２４、スマートコンタクトレンズ１４及びスマートグラス１８の３種類の表示部ＤＳを用いてコンテンツを乗員に表示させることで、各表示部ＤＳの長所を生かした最適な表示を乗員に提供することができる。具体的にスマートグラス１８を用いることで、ヘッドアップディスプレイ２４よりも表示領域の制約を受け難く、スマートコンタクトレンズ１４よりも表示位置の精度を確保することができる。
［備考］
なお、上記実施形態でＣＰＵ２０Ａがソフトウェア（プログラム）を読み込んで実行した各種処理を、ＣＰＵ以外の各種のプロセッサが実行してもよい。この場合のプロセッサとしては、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の製造後に回路構成を変更可能なＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、及びＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が例示される。また、上述した処理を、これらの各種のプロセッサのうちの１つで実行してもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡ、及びＣＰＵとＦＰＧＡとの組み合わせ等）で実行してもよい。また、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
また、上記実施形態において、各プログラムはコンピュータが読み取り可能な非一時的記録媒体に予め記憶（インストール）されている態様で説明した。例えば、表示制御装置２０における処理プログラム１００は、ＲＯＭ２０Ｂに予め記憶されている。しかしこれに限らず、各プログラムは、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＤＶＤ－ＲＯＭ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、及びＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリ等の非一時的記録媒体に記録された形態で提供されてもよい。また、プログラムは、ネットワークを介して外部装置からダウンロードされる形態としてもよい。
上記実施形態で説明した処理の流れも、一例であり、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよい。
１０ 表示システム
１２ 車両（移動体）
２０ 表示制御装置
１４ スマートコンタクトレンズ（第二表示部、表示部）
１８ スマートグラス（第二表示部、表示部）
２０Ａ ＣＰＵ（プロセッサ）
２４ ヘッドアップディスプレイ（第一表示部、表示部）
１００ 処理プログラム（表示プログラム）
Ｃ１ バウンディングボックス（コンテンツ）
Ｃ２ ライン（コンテンツ）
Ｃ３ 矢印（コンテンツ）
Ｃ４ 警告表示（コンテンツ）
ＤＳ 表示部
ＰＡ 投影面（表示領域）

Claims (7)

  1. プロセッサを備え、
    前記プロセッサは、
    移動体に固定された第一表示部及び人体に装着される第二表示部において、透過される実像を対象に重畳表示されるコンテンツを決定し、
    所定の条件に基づいて前記コンテンツを前記第一表示部及び前記第二表示部の何れの表示部に表示させるかを選択し、
    選択された前記表示部において前記対象に合わせて前記コンテンツを重畳表示させる
    ように構成されている表示制御装置。
  2. 前記プロセッサは、前記コンテンツを重畳表示させる前記対象、前記移動体から前記対象までの距離、各前記表示部の視野角に対する前記コンテンツの表示位置の少なくとも何れか一つの条件に基づいて前記コンテンツを前記第一表示部及び前記第二表示部の何れの表示部に表示させるかを選択する請求項１に記載の表示制御装置。
  3. 前記プロセッサは、前記コンテンツの表示位置が前記第一表示部の表示領域を超える場合、前記コンテンツを前記第二表示部に表示させる請求項１又は２に記載の表示制御装置。
  4. 前記プロセッサは、前記移動体から前記対象までの距離が所定値よりも大きい場合、前記コンテンツを前記第二表示部に表示させる請求項１～３の何れか１項に記載の表示制御装置。
  5. 請求項１～３の何れか１項に記載の表示制御装置と、
    前記移動体である車両に搭載された前記第一表示部としてのヘッドアップディスプレイと、
    前記車両の乗員の瞳に装着された第二表示部としてのスマートコンタクトレンズと、
    を備える表示システム。
  6. 移動体に固定された第一表示部及び人体に装着される第二表示部において、透過される実像を対象に重畳表示されるコンテンツを決定し、
    所定の条件に基づいて前記コンテンツを前記第一表示部及び前記第二表示部の何れの表示部に表示させるかを選択し、
    選択された前記表示部において前記対象に合わせて前記コンテンツを重畳表示させる
    処理をコンピュータが実行する表示方法。
  7. 移動体に固定された第一表示部及び人体に装着される第二表示部において、透過される実像を対象に重畳表示されるコンテンツを決定し、
    所定の条件に基づいて前記コンテンツを前記第一表示部及び前記第二表示部の何れの表示部に表示させるかを選択し、
    選択された前記表示部において前記対象に合わせて前記コンテンツを重畳表示させる
    処理をコンピュータに実行させる表示プログラム。
JP2021141710A 2021-08-31 2021-08-31 表示制御装置、表示システム、表示方法及び表示プログラム Active JP7487714B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2021141710A JP7487714B2 (ja) 2021-08-31 2021-08-31 表示制御装置、表示システム、表示方法及び表示プログラム
KR1020220093902A KR102633253B1 (ko) 2021-08-31 2022-07-28 표시 제어 장치, 표시 시스템, 표시 방법 및 비일시적 기억 매체
DE102022119110.9A DE102022119110A1 (de) 2021-08-31 2022-07-29 Anzeigesteuervorrichtung, Anzeigesystem, Anzeigeverfahren und nicht-transitorisches Speichermedium
CN202210932042.3A CN115723568A (zh) 2021-08-31 2022-08-04 显示控制装置、显示系统、显示方法及非暂时性存储介质
US17/880,658 US11958360B2 (en) 2021-08-31 2022-08-04 Display control device, display system, display method, and non-transitory storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021141710A JP7487714B2 (ja) 2021-08-31 2021-08-31 表示制御装置、表示システム、表示方法及び表示プログラム

Publications (2)

Publication Number Publication Date
JP2023035095A true JP2023035095A (ja) 2023-03-13
JP7487714B2 JP7487714B2 (ja) 2024-05-21

Family

ID=85174897

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021141710A Active JP7487714B2 (ja) 2021-08-31 2021-08-31 表示制御装置、表示システム、表示方法及び表示プログラム

Country Status (5)

Country Link
US (1) US11958360B2 (ja)
JP (1) JP7487714B2 (ja)
KR (1) KR102633253B1 (ja)
CN (1) CN115723568A (ja)
DE (1) DE102022119110A1 (ja)

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014178212A1 (ja) 2013-05-02 2014-11-06 ソニー株式会社 コンタクトレンズおよび記憶媒体
JP6176541B2 (ja) * 2014-03-28 2017-08-09 パナソニックＩｐマネジメント株式会社 情報表示装置、情報表示方法及びプログラム
US10181266B2 (en) * 2015-09-11 2019-01-15 Sony Corporation System and method to provide driving assistance
KR101736991B1 (ko) * 2015-11-03 2017-05-17 현대자동차주식회사 스마트 안경의 화면과 차량 디스플레이 장치의 화면 중첩을 회피하는 방법 및 장치
KR101916993B1 (ko) * 2015-12-24 2018-11-08 엘지전자 주식회사 차량용 디스플레이 장치 및 그 제어방법
KR20170089328A (ko) * 2016-01-26 2017-08-03 삼성전자주식회사 자동차 제어 시스템과 그의 운영 방법
KR101806892B1 (ko) * 2016-05-09 2018-01-10 엘지전자 주식회사 차량용 제어장치
US10332292B1 (en) * 2017-01-17 2019-06-25 Zoox, Inc. Vision augmentation for supplementing a person's view
US10257582B2 (en) * 2017-03-17 2019-04-09 Sony Corporation Display control system and method to generate a virtual environment in a vehicle
US10083547B1 (en) * 2017-05-23 2018-09-25 Toyota Jidosha Kabushiki Kaisha Traffic situation awareness for an autonomous vehicle
EP3456577B1 (en) * 2017-09-13 2022-01-26 LG Electronics Inc. User interface apparatus for vehicle
WO2019079790A1 (en) * 2017-10-21 2019-04-25 Eyecam, Inc ADAPTIVE GRAPHIC USER INTERFACE SYSTEM
JP7043845B2 (ja) 2018-01-17 2022-03-30 トヨタ自動車株式会社 車両用表示連携制御装置
JP6954850B2 (ja) 2018-02-09 2021-10-27 トヨタ自動車株式会社 表示装置
US11508255B2 (en) * 2018-04-27 2022-11-22 Red Six Aerospace Inc. Methods, systems, apparatuses and devices for facilitating provisioning of a virtual experience
US11887495B2 (en) * 2018-04-27 2024-01-30 Red Six Aerospace Inc. Augmented reality for vehicle operations
US11436932B2 (en) 2018-04-27 2022-09-06 Red Six Aerospace Inc. Methods and systems to allow real pilots in real aircraft using augmented and virtual reality to meet in a virtual piece of airspace
US10469769B1 (en) * 2018-07-30 2019-11-05 International Business Machines Corporation Augmented reality based driver assistance
US11639138B2 (en) * 2018-08-06 2023-05-02 Koito Manufacturing Co., Ltd. Vehicle display system and vehicle
US11584298B2 (en) * 2018-08-15 2023-02-21 Koito Manufacturing Co., Ltd. Vehicle display system and vehicle
US10768699B2 (en) 2018-09-10 2020-09-08 Lenovo (Singapore) Pte. Ltd. Presentation to user of indication of object at which another person is looking
US10970899B2 (en) * 2018-10-23 2021-04-06 International Business Machines Corporation Augmented reality display for a vehicle
US11595878B2 (en) * 2018-10-24 2023-02-28 Google Llc Systems, devices, and methods for controlling operation of wearable displays during vehicle operation
KR102589468B1 (ko) * 2018-11-16 2023-10-16 삼성전자주식회사 차량의 디스플레이 제어 방법 및 이를 위한 전자 장치
JP7163748B2 (ja) 2018-12-05 2022-11-01 トヨタ自動車株式会社 車両用表示制御装置
JP2020112698A (ja) 2019-01-11 2020-07-27 株式会社リコー 表示制御装置、表示装置、表示システム、移動体、プログラム、画像生成方法
JP2020117105A (ja) 2019-01-24 2020-08-06 日本精機株式会社 表示制御装置、方法、及びコンピュータ・プログラム
US11465626B2 (en) * 2019-02-06 2022-10-11 Toyota Jidosha Kabushiki Kaisha Virtualized driver assistance

Also Published As

Publication number Publication date
CN115723568A (zh) 2023-03-03
US20230062934A1 (en) 2023-03-02
KR20230032888A (ko) 2023-03-07
US11958360B2 (en) 2024-04-16
JP7487714B2 (ja) 2024-05-21
DE102022119110A1 (de) 2023-03-02
KR102633253B1 (ko) 2024-02-02

Similar Documents

Publication Publication Date Title
CN109725634B (zh) 用于自动驾驶车辆的使用分色镜的3d lidar系统
EP3590753A1 (en) Display control device and display control method
JP6304628B2 (ja) 表示装置および表示方法
JP5327025B2 (ja) 車両用走行案内装置、車両用走行案内方法及びコンピュータプログラム
US11274934B2 (en) Information output device, output control method, and storage medium
US20210229553A1 (en) Display control device, display control method, and program
WO2019239709A1 (ja) 移動体用表示制御装置、移動体用表示制御方法、及び制御プログラム
WO2019189393A1 (en) Image control apparatus, display apparatus, movable body, and image control method
JP6922169B2 (ja) 情報処理装置および方法、車両、並びに情報処理システム
US11214197B2 (en) Vehicle surrounding area monitoring device, vehicle surrounding area monitoring method, vehicle, and storage medium storing program for the vehicle surrounding area monitoring device
US20230373309A1 (en) Display control device
JP7058253B2 (ja) 表示制御装置および情報処理装置
US20220410711A1 (en) Display control device, display method, and storage medium storing display program
US20210323403A1 (en) Image control apparatus, display apparatus, movable body, and image control method
KR102633253B1 (ko) 표시 제어 장치, 표시 시스템, 표시 방법 및 비일시적 기억 매체
WO2021200914A1 (ja) 表示制御装置、ヘッドアップディスプレイ装置、及び方法
JP7501463B2 (ja) 車両用表示制御装置、表示方法及び表示プログラム
JP7563111B2 (ja) ヘッドアップディスプレイ装置
WO2023145852A1 (ja) 表示制御装置、表示システム、及び表示制御方法
WO2024154271A1 (ja) 運転支援装置、運転支援方法及び記録媒体
JP2024119400A (ja) 運転支援装置
JP2023141162A (ja) 画像表示装置
CN118636669A (zh) 显示控制方法、装置、抬头显示系统及计算机存储介质
JP2021133874A (ja) 表示制御装置、ヘッドアップディスプレイ装置、及び方法
JP2022057051A (ja) 表示制御装置、虚像表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230517

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240325

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240409

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240422

R150 Certificate of patent or registration of utility model

Ref document number: 7487714

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150