JP6802226B2 - 車両用表示装置 - Google Patents

車両用表示装置 Download PDF

Info

Publication number
JP6802226B2
JP6802226B2 JP2018170450A JP2018170450A JP6802226B2 JP 6802226 B2 JP6802226 B2 JP 6802226B2 JP 2018170450 A JP2018170450 A JP 2018170450A JP 2018170450 A JP2018170450 A JP 2018170450A JP 6802226 B2 JP6802226 B2 JP 6802226B2
Authority
JP
Japan
Prior art keywords
vehicle
image
display
unit
virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018170450A
Other languages
English (en)
Other versions
JP2020040561A (ja
Inventor
元暁 中嶋
元暁 中嶋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yazaki Corp
Original Assignee
Yazaki Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yazaki Corp filed Critical Yazaki Corp
Priority to JP2018170450A priority Critical patent/JP6802226B2/ja
Priority to US16/537,479 priority patent/US11238621B2/en
Priority to EP19191620.4A priority patent/EP3623196B1/en
Publication of JP2020040561A publication Critical patent/JP2020040561A/ja
Application granted granted Critical
Publication of JP6802226B2 publication Critical patent/JP6802226B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • B60K35/22
    • B60K35/28
    • B60K35/29
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/60Rotation of a whole image or part thereof
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • B60K2360/167
    • B60K2360/176
    • B60K2360/191
    • B60K2360/21
    • B60K2360/31
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • B60K35/81
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0492Change of orientation of the displayed image, e.g. upside-down, mirrored
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/10Automotive applications

Description

本発明は、車両用表示装置に関する。
従来の車両用表示装置として、例えば、特許文献1には、表示手段と、撮像手段と、表示制御手段と備える車両用表示装置が開示されている。表示制御手段は、表示手段に自車両に関する後方視認ミラー画像を含む目印画像を表示すると共に、当該目印画像を基準として撮像方向に対応する位置に撮像手段にて撮像された後方画像を表示する。
特開2009−149306号公報
ところで、上述の特許文献1に記載の車両用表示装置は、例えば、より分かり易い表示等、更なる改善の余地がある。
本発明は、上記の事情に鑑みてなされたものであって、自車両の周囲の状況を適正に表示することができる車両用表示装置を提供することを目的とする。
上記目的を達成するために、本発明に係る車両用表示装置は、自車両に搭載され画像を表示する表示部と、前記自車両の周囲の画像を撮像する撮像部と、前記表示部を制御し、前記自車両を模した仮想車両を表す仮想車両画像を表示させ、前記撮像部によって撮像された前記自車両の周囲の画像を、前記自車両への映り込みを表す映り込み画像として前記仮想車両画像が表す前記仮想車両の外面に貼り付けて表示させる処理を実行可能である制御部とを備えることを特徴とする。
また、上記車両用表示装置では、前記制御部は、前記表示部を制御し、前記撮像部によって撮像された前記自車両の周囲の画像の変化に応じて、前記仮想車両画像が表す前記仮想車両の向きを可変とするものとすることができる。
また、上記車両用表示装置では、前記制御部は、前記表示部を制御し、前記映り込み画像に含まれる特定の対象物を表す特定対象物画像を強調して表示させるものとすることができる。
また、上記車両用表示装置では、前記自車両の状態を検出する自車両状態検出装置を備え、前記制御部は、前記自車両状態検出装置によって検出された前記自車両の状態に応じて、前記仮想車両画像が表す前記仮想車両の向きを可変とするものとすることができる。
上記目的を達成するために、本発明に係る車両用表示装置は、自車両に搭載され画像を表示する表示部と、撮像部によって撮像された前記自車両の周囲の画像を取得する取得部と、前記表示部を制御し、前記自車両を模した仮想車両を表す仮想車両画像を表示させ、前記取得部によって取得された前記自車両の周囲の画像を、前記自車両への映り込みを表す映り込み画像として前記仮想車両画像が表す前記仮想車両の外面に貼り付けて表示させる処理を実行可能である制御部とを備えることを特徴とする。
本発明に係る車両用表示装置は、制御部が表示部を制御し、撮像部によって撮像された自車両の周囲の画像を、自車両への映り込みを表す映り込み画像として仮想車両画像が表す仮想車両の外面に貼り付けて表示させる処理を実行可能である。この処理により、車両用表示装置は、表示部に自車両の周囲の状況を直感的に分かり易く表示することができる。この結果、車両用表示装置は、自車両の周囲の状況を適正に表示することができる、という効果を奏する。
図1は、実施形態に係る車両用表示装置の概略構成を表すブロック図である。 図2は、実施形態に係る車両用表示装置が備える表示部の模式的な正面図である。 図3は、実施形態に係る車両用表示装置における表示画像の一例を表す模式図である。 図4は、実施形態に係る車両用表示装置における表示画像の一例を表す模式図である。 図5は、実施形態に係る車両用表示装置における処理の一例を説明するフローチャート図である。
以下に、本発明に係る実施形態を図面に基づいて詳細に説明する。なお、この実施形態によりこの発明が限定されるものではない。また、下記実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。
[実施形態]
図1、図2に示す本実施形態に係る車両用表示装置1は、自車両Vに搭載され、自車両Vに関する種々の情報を表示するものである。自車両Vは、本実施形態の車両用表示装置1が搭載される車両である。本実施形態に係る車両用表示装置1は、仮想車両画像100に自車両Vの周囲の環境に応じた映り込み画像200を貼り付けて表示させることで、自車両Vの周囲の状況について直感的で分かり易い表示を実現するものである。以下、各図を参照して車両用表示装置1の各構成について詳細に説明する。
具体的には、車両用表示装置1は、表示部2と、撮像部3と、自車両状態検出装置4と、制御部5とを備える。
表示部2は、自車両Vに搭載され画像を表示するものである。表示部2は、例えば、薄型の液晶ディスプレイを用いることができるが、これに限らず、プラズマディスプレイ、有機ELディスプレイ等を用いることもできる。本実施形態の表示部2は、いわゆる車載メータを構成するものである。表示部2は、例えば、自車両Vのダッシュボードに設けられたインストルメントパネルに搭載され、自車両Vの運転に供される情報として当該自車両Vに関する種々の情報を表示する。表示部2は、例えば、計器画像21、22(図2中には簡略化して図示)を表示する。計器画像21、22は、自車両Vに関する情報として自車両Vの車速や動力源の出力回転数を指針、目盛等によって表示する速度計や回転計等の種々の計器を表す画像である。そして、本実施形態の表示部2は、計器画像21と計器画像22との間に運転支援表示領域23を有している。運転支援表示領域23は、自車両Vにおいて運転を支援するための様々な画像を表示する領域である。本実施形態の表示部2は、運転支援表示領域23に仮想車両画像100、映り込み画像200等を表示する。
なお、車両用表示装置1は、表示部2に表示される計器画像21、22にかえて、速度計や回転計等を構成するアナログ式計器を備えていてもよい。また、表示部2は、車載メータに限らず、例えば、センタコンソールに搭載されたセンタディスプレイを構成してもよいし、ナビゲーションシステムの表示装置によって兼用されてもよい。また、表示部2は、いわゆるヘッドアップディスプレイ等であってもよい。
撮像部3は、自車両Vの周囲の画像を撮像するものである。撮像部3は、例えば、自車両Vの周囲の画像を連続的に撮像するCCDカメラ等の撮像装置によって構成される。撮像部3は、典型的には、自車両Vの鉛直方向下面側を除く当該自車両Vの周囲の全方位の画像(映像)を撮像する。撮像部3は、自車両Vの鉛直方向下面側を除く全方位の撮像範囲を、1つの広角の撮像装置によってカバーしてもよいし、複数の撮像装置によってカバーしてもよい。
自車両状態検出装置4は、自車両Vの状態を検出するものである。自車両状態検出装置4は、自車両Vの状態を検出する種々のセンサ、検出器類を含んで構成される。自車両状態検出装置4は、自車両Vの状態を表す自車両状態情報として、例えば、自車両Vの車速情報、加速度(車両前後方向加速度、車両幅方向加速度、車両ロール方向加速度等)情報、操舵角情報、アクセルペダルの操作量(アクセル踏み込み量)情報、ブレーキペダルの操作量(ブレーキ踏み込み量)情報、シフトポジション情報、各部の電流値/電圧値情報、蓄電装置の蓄電量情報、自車両Vの現在位置情報(GPS情報)等を検出する。自車両状態検出装置4は、一例として、車速センサ、加速度センサ、操舵角センサ、アクセルセンサ、ブレーキセンサ、シフトポジションセンサ、電流/電圧計、GPS受信器等の種々の検出器、センサによって構成される。自車両状態検出装置4は、自車両Vにおいて各部を制御するECU(Electronic Control Unit)等の処理部自体を含んでいてもよい。
制御部5は、車両用表示装置1の各部を統括的に制御するものである。制御部5は、表示部2による表示を実現するための種々の処理を実行する。制御部5は、自車両Vにおいて各部を制御するECUによって兼用されてもよい。制御部5は、CPU等の中央演算処理装置、ROM、RAM及びインターフェースを含む周知のマイクロコンピュータを主体とする電子回路を含んで構成される。制御部5は、表示部2、撮像部3、自車両状態検出装置4等の車両用表示装置1の各部と通信可能に接続され、各部との間で相互に各種信号を授受可能である。
具体的には、制御部5は、機能概念的に、インターフェース部51、記憶部52、処理部53等を含んで構成される。インターフェース部51、記憶部52、及び、処理部53は、電気的に接続されている各種機器との間で種々の情報を相互に授受することができる。
インターフェース部51は、表示部2、撮像部3、自車両状態検出装置4等の車両用表示装置1の各部と種々の情報を送受信するためのインターフェースである。インターフェース部51は、各部との間で電線等を介して有線通信する機能、各部との間で無線通信ユニット等を介して無線通信する機能等を有している。
記憶部52は、ROM、RAM、半導体メモリ等の記憶装置である。記憶部52は、車両用表示装置1での各種処理に必要な条件や情報、処理部53で実行する各種プログラム、アプリケーション、制御データ等が格納されている。記憶部52は、表示部2によって表示する各種画像情報(例えば、後述する仮想車両画像100等に関する画像情報)を記憶している。また、記憶部52は、3次元地図情報等も記憶している。また、記憶部52は、例えば、自車両状態検出装置4によって検出された各種検出情報や処理部53によって取得された各種情報を一時的に記憶することもできる。記憶部52は、処理部53によってこれらの情報が必要に応じて読み出される。
処理部53は、記憶部52に記憶されている各種プログラムを実行し、当該プログラムが動作することにより車両用表示装置1の各部を動作させ各種機能を実現するための種々の処理を実行する演算部である。処理部53は、機能概念的に、取得部53a、画像処理部53b、表示制御部53c等を含んで構成される。
取得部53aは、車両用表示装置1における各種処理に用いる種々の情報を取得する処理を実行可能な機能を有する部分である。取得部53aは、撮像部3によって撮像された自車両Vの周囲の画像情報、自車両状態検出装置4によって検出された検出情報等を取得する。取得部53aは、取得した各種情報を記憶部52に格納することもできる。
画像処理部53bは、表示部2によって表示する画像に対して様々な画像処理を実行可能な機能を有する部分である。画像処理部53bは、例えば、記憶部52に記憶されている各種画像情報、撮像部3によって撮像され取得部53aによって取得された自車両Vの周囲の画像情報、自車両状態検出装置4によって検出され取得部53aによって取得された検出情報等に基づいて、表示部2によって表示する画像を生成する。
表示制御部53cは、表示部2を制御し、画像を表示させる処理を実行可能な機能を有する部分である。表示制御部53cは、典型的には、表示部2を制御し、画像処理部53bによって画像処理が施され、生成された画像を表示部2に表示させる。
そして、本実施形態の処理部53は、図2、図3に示すように、画像処理部53b、及び、表示制御部53cによって表示部2を制御し、仮想車両画像100、及び、映り込み画像200を組み合わせて表示させる処理を実行可能である。
ここで、表示部2に表示される仮想車両画像100は、自車両Vを模した仮想車両100Aを表す画像である。仮想車両100Aは、自車両Vの外形形状をそのまま表したものでもよいし、自車両Vの外形形状を適宜デフォルメ、簡略化して表したものでもよい。一方、映り込み画像200は、撮像部3によって撮像され取得部53aによって取得された自車両Vの周囲の画像を基に自車両Vへの映り込み(反射)を仮想的に模した画像である。
本実施形態の画像処理部53bは、記憶部52から仮想車両画像100を読み出し、撮像部3によって撮像され取得部53aによって取得された自車両Vの周囲の画像を、映り込み画像200として仮想車両画像100が表す仮想車両100Aの外面(ボディ)に貼り付けた表示画像を生成する。この場合、画像処理部53bは、例えば、自車両Vの周囲の画像、及び、仮想車両画像100に対して、種々の公知のデジタル処理、マッピング(テクスチャマッピング)処理等を施す。これらの処理によって、画像処理部53bは、仮想車両画像100が表す仮想車両100Aの外面に、自車両Vの周囲の画像を映り込み画像200として貼り付けることで表示画像を生成する。
例えば、画像処理部53bは、自車両Vの周囲の画像のうち、当該自車両Vの後方の画像を後方映り込み画像201として仮想車両100Aの後部外面に貼り付ける。図2、図3の例では、後方映り込み画像201は、自車両Vの後方を走行する他車両V1を表す他車両画像201aや後方路面、後方背景等が映り込んだ画像となっている。同様に、画像処理部53bは、自車両Vの周囲の画像のうち、当該自車両Vの上方の画像を上方映り込み画像202として仮想車両100Aの上部外面に貼り付ける。画像処理部53bは、自車両Vの周囲の画像のうち、当該自車両Vの右側方の画像を右側方映り込み画像203として仮想車両100Aの右側部外面に貼り付ける。図示しないが、画像処理部53bは、自車両Vの前方、左側方についても同様に、それぞれ、自車両Vの周囲の画像のうち、当該自車両Vの前方、左側方の画像を前方映り込み画像、左側方映り込み画像として仮想車両100Aの前部外面、左側部外面に貼り付ける。
そして、表示制御部53cは、画像処理部53bによって生成された表示画像に基づいて、表示部2を制御し、当該表示部2の運転支援表示領域23に当該表示画像を表示させる処理を実行する。すなわち、表示制御部53cは、撮像部3によって撮像され取得部53aによって取得された自車両Vの周囲の画像を、映り込み画像200として仮想車両100Aの外面に貼り付けた表示画像を表示部2に表示させる。
この場合、表示制御部53cは、表示部2において、当該自車両Vの現在位置に応じた路面画像や背景画像と共に仮想空間上に仮想車両画像100、及び、映り込み画像200を表示させるようにしてもよい。画像処理部53bは、例えば、自車両状態検出装置4によって検出され取得部53aによって取得された自車両Vの現在位置情報に応じて記憶部52から3次元地図情報を読み出し、表示部2に表示させる当該路面画像や当該背景画像を生成する。図2は、自車両Vの現在位置に応じた路面画像上に仮想車両画像100、映り込み画像200を表示させた例を表している。図3は、自車両Vの現在位置に応じた路面画像、及び、背景画像上に仮想車両画像100、映り込み画像200を表示させた例を表している。
また、本実施形態の処理部53は、図4に示すように、画像処理部53b、及び、表示制御部53cによって表示部2を制御し、自車両Vの周囲の画像の変化に応じて、仮想車両画像100が表す仮想車両100Aの向きを可変とすることも可能である。また、本実施形態の処理部53は、図4に示すように、画像処理部53b、及び、表示制御部53cによって表示部2を制御し、映り込み画像200に含まれる特定の対象物300Aを表す特定対象物画像300を強調して表示させることも可能である。
図4の例では、映り込み画像200を構成する右側方映り込み画像203は、対象物300Aとして自車両Vの右側方の人物を表す特定対象物画像300を含んでいる。画像処理部53bは、撮像部3によって撮像された自車両Vの周囲の画像に対して種々の公知の人物認識処理を施し当該画像に人物を検出した場合、当該人物を特定の対象物300Aとする特定対象物画像300を強調した表示画像を生成する。画像処理部53bは、例えば、映り込み画像200において特定対象物画像300のコントラストを他の領域より上げることで当該特定対象物画像300を強調してもよいし、特定対象物画像300を丸で囲むことで当該特定対象物画像300を強調してもよい。
そして、画像処理部53bは、例えば、映り込み画像200に特定対象物画像300を含まない状態から自車両Vの周囲の画像が変化し、映り込み画像200に特定対象物画像300を含む状態となって際に仮想車両画像100が表す仮想車両100Aの向きを変える。この場合、画像処理部53bは、例えば、特定対象物画像300を含む映り込み画像200を正面側(運転者等に視認される側)に向けるように仮想車両100Aを回転させた表示画像を生成する。図4の例では、画像処理部53bは、例えば、特定対象物画像300を含む右側方映り込み画像203が見え易いように、右側方映り込み画像203を正面側に向けるように仮想車両100Aを右側に回転させた表示画像を生成する。
そして、表示制御部53cは、画像処理部53bによって生成された表示画像に基づいて、仮想車両画像100、映り込み画像200を表示部2に表示させる。すなわち、表示制御部53cは、表示部2において、特定の対象物(人物)300Aを表す特定対象物画像300を強調し、かつ、当該特定対象物画像300を含む映り込み画像200(右側方映り込み画像203)を視認し易いように仮想車両100Aを回転させた仮想車両画像100、映り込み画像200を表示させる。
また、処理部53は、画像処理部53b、及び、表示制御部53cによって表示部2を制御し、自車両状態検出装置4によって検出され取得部53aによって取得された自車両Vの状態を表す自車両状態情報に応じて、仮想車両画像100が表す仮想車両100Aの向きを可変としてもよい。この場合、画像処理部53bは、例えば、自車両状態情報に含まれる操舵角情報に応じて仮想車両100Aを回転させた表示画像を生成する。そして、表示制御部53cは、画像処理部53bによって生成された表示画像に基づいて、自車両Vの操舵角に応じて回転させた仮想車両100Aを表す仮想車両画像100、映り込み画像200を表示部2に表示させる。
処理部53は、撮像部3によって撮像された自車両Vの周囲の画像を、仮想車両画像100と共に映り込み画像200として表示部2にリアルタイムで表示させる。画像処理部53bは、所定の制御周期毎に自車両Vの走行に伴って時々刻々と変化する自車両Vの周囲の画像に応じて逐次表示画像を生成していく。そして、表示制御部53cは、画像処理部53bによって逐次生成される表示画像をリアルタイムで表示部2に表示させていく。なおここで、リアルタイムという場合、例えば、画像の処理に要する時間程度の遅れ時間は許容される。
次に、図5のフローチャート図を参照して、車両用表示装置1による表示処理の一例を説明する。
まず、撮像部3は、例えば、自車両VのイグニッションがONされると、自車両Vの周囲の画像の撮像を開始し、取得部53aは、撮像部3によって撮像された自車両Vの周囲の画像情報を取得する(ステップS1)。
次に、画像処理部53bは、ステップS1で取得された自車両Vの周囲の画像情報に基づいて画像処理を行い、自車両Vの周囲の画像を、映り込み画像200として仮想車両100Aの外面に貼り付けた表示画像を生成する(ステップS2)。
次に、表示制御部53cは、ステップS2で生成された表示画像に基づいて、表示部2を制御し、自車両Vの周囲の画像を、映り込み画像200として仮想車両100Aの外面に貼り付けた表示画像を表示部2に表示させる(ステップS3)。
次に、表示制御部53cは、表示部2による表示を終了するか否を判定する(ステップS4)。表示制御部53cは、例えば、自車両VのイグニッションがOFFされた場合、表示部2の表示をOFFさせる操作がなされた場合等に表示部2による表示を終了するものと判定する。
表示制御部53cは、表示部2による表示を終了しないと判定し場合(ステップS4:No)、ステップS1の処理に戻って以降の処理を繰り返し実行させる。表示制御部53cは、表示部2による表示を終了すると判定し場合(ステップS4:Yes)、この表示処理を終了する。
以上で説明した車両用表示装置1は、制御部5が表示部2を制御し、撮像部3によって撮像された自車両Vの周囲の画像を、自車両Vへの映り込みを表す映り込み画像200として仮想車両画像100が表す仮想車両100Aの外面に貼り付けて表示させる処理を実行可能である。この処理により、車両用表示装置1は、仮想車両画像100が表す仮想車両100Aの外面に、映り込み画像200として自車両Vの周囲の実際の景色、構造物、他車両、人物、障害物等を映し込んで表示することができる。この結果、車両用表示装置1は、表示部2に自車両Vの周囲の状況を自然現象を模して直感的に分かり易く表示することができ、自車両Vの周囲の状況を適正に表示することができる。これにより、車両用表示装置1は、例えば、自車両Vの運転者等に対して自車両Vの周囲で実際に生じている状況を自然に認識させ易くすることができ、運転に必要な情報の取捨選択をさせ易くすることができる。ここでは、車両用表示装置1は、自車両Vの走行に伴って時々刻々と変化する自車両Vの周囲の画像を、リアルタイムで仮想車両100Aの外面の映り込み画像200として表示することができる。この結果、車両用表示装置1は、時々刻々と変化する自車両Vの周囲の状況を、分かり易く表示することができる。
さらに、以上で説明した車両用表示装置1は、撮像部3によって撮像された自車両Vの周囲の画像の変化に応じて、表示部2において、仮想車両画像100が表す仮想車両100Aの向きを可変とすることがきる。この場合、車両用表示装置1は、自車両Vの周囲の画像の変化に応じて仮想車両100Aの向きを変えることで、自車両Vの周囲の状況変化を認識させ易くすることができる。
また、以上で説明した車両用表示装置1は、表示部2において、映り込み画像200に含まれる特定対象物画像300を強調して表示させることがきる。この場合、車両用表示装置1は、自車両Vの周囲の特定の対象物300A(例えば、人物等)をより認識させ易くすることができる。
また、以上で説明した車両用表示装置1は、自車両状態検出装置4によって検出された自車両Vの状態に応じて、仮想車両画像100が表す仮想車両100Aの向きを可変とすることができる。この場合、車両用表示装置1は、仮想車両画像100が表す仮想車両100Aの向きによって自車両Vの状態を表示することができ、これにより、自車両Vの状態をより認識させ易くすることができる。
なお、上述した本発明の実施形態に係る車両用表示装置は、上述した実施形態に限定されず、特許請求の範囲に記載された範囲で種々の変更が可能である。
以上で説明した処理部53(画像処理部53b、表示制御部53c)は、仮想車両画像100が表す仮想車両100Aにおいて、いかなる表示態様でも表示されない面に対しては、映り込み画像200を貼り付けないようにしてもよい。
以上で説明した撮像部3は、自車両Vに予め備え付けられた既存の撮像部を兼用する構成であってもよい。
以上で説明した制御部5は、各部が別体に構成され、当該各部が各種の電気信号を相互に授受可能に接続されることで構成されてもよく、一部の機能が他の制御装置によって実現されてもよい。また、以上で説明したプログラム、アプリケーション、各種データ等は、適宜、更新されてもよいし、車両用表示装置1に対して任意のネットワークを介して接続されたサーバに記憶されていてもよい。以上で説明したプログラム、アプリケーション、各種データ等は、例えば、必要に応じてその全部又は一部をダウンロードすることも可能である。また、例えば、制御部5が備える処理機能については、その全部又は任意の一部を、例えば、CPU等及び当該CPU等にて解釈実行されるプログラムにて実現してもよく、また、ワイヤードロジック等によるハードウェアとして実現してもよい。
1 車両用表示装置
2 表示部
3 撮像部
4 自車両状態検出装置
5 制御部
21、22 計器画像
23 運転支援表示領域
51 インターフェース部
52 記憶部
53 処理部
53a 取得部
53b 画像処理部
53c 表示制御部
100 仮想車両画像
100A 仮想車両
200 映り込み画像
201 後方映り込み画像
201a 他車両画像
202 上方映り込み画像
203 右側方映り込み画像
300 特定対象物画像
300A 対象物
V 自車両
V1 他車両

Claims (4)

  1. 自車両に搭載され画像を表示する表示部と、
    前記自車両の周囲の画像を撮像する撮像部と、
    前記表示部を制御し、前記自車両を模した仮想車両を表す仮想車両画像を表示させ、前記撮像部によって撮像された前記自車両の周囲の画像を、前記自車両への映り込みを表す映り込み画像として前記仮想車両画像が表す前記仮想車両の外面に貼り付けて表示させる処理を実行可能である制御部とを備え
    前記制御部は、前記表示部を制御し、前記撮像部によって撮像された前記自車両の周囲の画像の変化に応じて、前記仮想車両画像が表す前記仮想車両の向きを可変とすることを特徴とする、
    車両用表示装置。
  2. 前記制御部は、前記表示部を制御し、前記映り込み画像に含まれる特定の対象物を表す特定対象物画像を強調して表示させる、
    請求項1記載の車両用表示装置。
  3. 前記自車両の状態を検出する自車両状態検出装置を備え、
    前記制御部は、前記自車両状態検出装置によって検出された前記自車両の状態に応じて、前記仮想車両画像が表す前記仮想車両の向きを可変とする、
    請求項1又は請求項2に記載の車両用表示装置。
  4. 自車両に搭載され画像を表示する表示部と、
    撮像部によって撮像された前記自車両の周囲の画像を取得する取得部と、
    前記表示部を制御し、前記自車両を模した仮想車両を表す仮想車両画像を表示させ、前記取得部によって取得された前記自車両の周囲の画像を、前記自車両への映り込みを表す映り込み画像として前記仮想車両画像が表す前記仮想車両の外面に貼り付けて表示させる処理を実行可能である制御部とを備え
    前記制御部は、前記表示部を制御し、前記撮像部によって撮像された前記自車両の周囲の画像の変化に応じて、前記仮想車両画像が表す前記仮想車両の向きを可変とすることを特徴とする、
    車両用表示装置。
JP2018170450A 2018-09-12 2018-09-12 車両用表示装置 Active JP6802226B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018170450A JP6802226B2 (ja) 2018-09-12 2018-09-12 車両用表示装置
US16/537,479 US11238621B2 (en) 2018-09-12 2019-08-09 Vehicle display device
EP19191620.4A EP3623196B1 (en) 2018-09-12 2019-08-14 Vehicle display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018170450A JP6802226B2 (ja) 2018-09-12 2018-09-12 車両用表示装置

Publications (2)

Publication Number Publication Date
JP2020040561A JP2020040561A (ja) 2020-03-19
JP6802226B2 true JP6802226B2 (ja) 2020-12-16

Family

ID=67658747

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018170450A Active JP6802226B2 (ja) 2018-09-12 2018-09-12 車両用表示装置

Country Status (3)

Country Link
US (1) US11238621B2 (ja)
EP (1) EP3623196B1 (ja)
JP (1) JP6802226B2 (ja)

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09319891A (ja) * 1996-06-03 1997-12-12 Sega Enterp Ltd 画像処理装置及びその処理方法
JP4877447B2 (ja) * 2004-08-31 2012-02-15 株式会社エクォス・リサーチ 車両周辺画像表示装置
JP5073703B2 (ja) 2009-04-03 2012-11-14 株式会社デンソー 車両用表示装置
JP5077307B2 (ja) * 2009-08-05 2012-11-21 株式会社デンソー 車両周囲画像表示制御装置
JP5521750B2 (ja) * 2010-05-10 2014-06-18 富士通株式会社 シミュレーションプログラム、シミュレーション装置及びシミュレーション方法
US9762880B2 (en) * 2011-12-09 2017-09-12 Magna Electronics Inc. Vehicle vision system with customized display
JP6014442B2 (ja) 2012-09-27 2016-10-25 富士通テン株式会社 画像生成装置、画像表示システム、および、画像生成方法
JP6285656B2 (ja) * 2013-07-17 2018-02-28 矢崎総業株式会社 表示装置
JP6447011B2 (ja) * 2014-10-29 2019-01-09 株式会社デンソー 運転情報表示装置および運転情報表示方法
US10373378B2 (en) * 2015-06-26 2019-08-06 Paccar Inc Augmented reality system for vehicle blind spot prevention
DE112017004391T5 (de) 2016-09-01 2019-05-09 Panasonic Intellectual Property Management Co., Ltd. Bilderzeugungsvorrichtung, Bilderzeugungsverfahren, Aufzeichungsmedium und Bildanzeigesystem
JP6766557B2 (ja) * 2016-09-29 2020-10-14 アイシン精機株式会社 周辺監視装置
JP2018063294A (ja) * 2016-10-11 2018-04-19 アイシン精機株式会社 表示制御装置

Also Published As

Publication number Publication date
EP3623196B1 (en) 2021-06-02
JP2020040561A (ja) 2020-03-19
EP3623196A1 (en) 2020-03-18
US20200082575A1 (en) 2020-03-12
US11238621B2 (en) 2022-02-01

Similar Documents

Publication Publication Date Title
CN107878327B (zh) 周边监视装置
CN105075247B (zh) 车辆的控制装置及存储介质
JP6364702B2 (ja) 画像表示制御装置、画像表示システム、および表示ユニット
EP2990265B1 (en) Vehicle control apparatus
JP5561566B2 (ja) 運転支援装置
CN105644438B (zh) 车辆周边监视装置
CN105191297A (zh) 图像显示控制装置及图像显示系统
CN107791951B (zh) 显示控制装置
CN110877573A (zh) 车辆周边显示装置
CN111066319B (zh) 图像处理装置
WO2020116352A1 (ja) 路面検出装置および路面検出プログラム
JP2017220876A (ja) 周辺監視装置
CN110997409B (zh) 周边监控装置
JP2008168693A (ja) 車両用表示装置
US11669230B2 (en) Display control device
JP2020068477A (ja) カメラパラメータ推定装置、カメラパラメータ推定方法、およびカメラパラメータ推定プログラム
JP6802226B2 (ja) 車両用表示装置
US20200081612A1 (en) Display control device
EP3358841A1 (en) Image processing device for vehicles
JP6930202B2 (ja) 表示制御装置
JP2020121638A (ja) 表示制御装置
US11153510B2 (en) Display control device
US11938818B2 (en) Periphery monitoring apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191119

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200827

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200901

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201014

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201126

R150 Certificate of patent or registration of utility model

Ref document number: 6802226

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250