JP2016070951A - 表示装置、制御方法、プログラム、及び記憶媒体 - Google Patents
表示装置、制御方法、プログラム、及び記憶媒体 Download PDFInfo
- Publication number
- JP2016070951A JP2016070951A JP2014196533A JP2014196533A JP2016070951A JP 2016070951 A JP2016070951 A JP 2016070951A JP 2014196533 A JP2014196533 A JP 2014196533A JP 2014196533 A JP2014196533 A JP 2014196533A JP 2016070951 A JP2016070951 A JP 2016070951A
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- pixel
- saliency
- brightness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Landscapes
- Controls And Circuits For Display Device (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
- Instructional Devices (AREA)
- Navigation (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
Abstract
Description
図1は、実施例に係るヘッドアップディスプレイシステムの構成例である。図1に示すように、本実施例に係るヘッドアップディスプレイシステムは、主に、光源ユニット4と、カメラ5と、凹面鏡8と、を備え、フロントウィンドウ25と、天井部27と、ボンネット28と、ダッシュボード29とを備える車両に取り付けられる。
図2は、ヘッドアップディスプレイシステムの機能的な構成を表すブロック図である。図2に示すように、光源ユニット4は、カメラ5及び目点位置検出装置6と電気的に接続しており、表示画像生成部41と、顕著性判断部42と、表示制御部43と、表示光を出射する光源部44と、変換量算出部45と、対応点算出部46と、補正量算出部47と、を有する。目点位置検出装置6は、例えば運転者の顔を撮影するカメラなどを含み、公知の画像認識技術等により、運転者の目の位置(「目点位置」とも呼ぶ。)を検出し、検出した情報を光源ユニット4へ送信する。
(ア)特徴抽出によるガウシアンピラミッドの生成、
(イ)ガウシアンピラミッドの差分処理による特徴マップの生成、
(ウ)特徴マップの正規化及び重ね合わせによる顕著性マップの生成
の3ステップにより顕著性マップを生成するものとする。以後では、各画素の顕著性は、最も顕著性が低い場合に「0」をとり、最も顕著性が高い場合に「1」をとるものとする。そして、顕著性判断部42は、生成した顕著性マップの情報を、表示制御部43へ供給する。
次に、本実施例において、光源ユニット4が実行する処理について、図3〜図5のフローチャートを参照して説明する。
図3は、本実施例において光源ユニット4が実行する表示画像Iaの表示処理の概要を示すフローチャートである。光源ユニット4は、図3のフローチャートの処理を、例えば目点位置検出装置6が運転者の目点位置を検出したときに実行する。
図4は、図3のステップS104で光源ユニット4の表示制御部43が実行する輝度低減処理の手順を示すフローチャートである。
図5は、図3のステップS107で光源ユニット4の対応点算出部46及び補正量算出部47が実行する対応点補正処理のフローチャートを示す。
次に、目点位置に基づくHUD座標系の各座標位置に対応する前方画像座標系の対応点の算出方法について説明する。まず、変換量算出部45が算出するHUD座標系から前方画像座標系への座標変換行列の算出方法について説明する。以後では、前提として、カメラ5と、目点位置検出装置6と、表示光が投影されるフロントウィンドウ25との相対位置は、予め測定されており、変換量算出部45は、これらの相対位置の情報を、予め記憶しているものとする。
次に、図3のフローチャートに基づく表示画像Iaの表示処理の具体例について、図7〜図9を参照して説明する。
以下、上述の実施例に好適な変形例について説明する。以下の変形例は、任意に組み合わせて上述の実施例に適用してもよい。
表示制御部43は、図4のステップS203で設定する輝度を、0より大きい所定値としてもよい。この場合、表示制御部43は、顕著性が閾値以上の表示位置となる表示画像Iaの画素の輝度を、当該画素に重なる前方風景を運転者が視認できる値まで低下させればよい。この場合、輝度を低下させる処理は、RGB空間における各色の度数を均一に変化させる処理に限定されず、ガンマ補正値を変更するなどの最終的な表示輝度を変更する種々の処理であってもよい。
図4の輝度低減処理では、表示制御部43は、顕著性が閾値以上の表示位置となる表示画像Iaの画素の輝度を低減させた。しかし、本発明が適用可能な方法は、これに限定されない。以後では、輝度低減処理の他の具体例(第1具体例〜第3具体例)について説明する。
表示制御部43は、顕著性が高い前方画像Ibの画素が示す風景と表示位置が重なる表示画像Iaの画素について、RGB空間におけるRGBを均一に下げることで輝度を下げる態様の他、他の種々の方法により、対象となる表示画像Iaの画素の明るさを低下させてもよい。
図2の構成例に代えて、光源ユニット4は、変換量算出部45、対応点算出部46、及び補正量算出部47を有しなくともよい。
図1のヘッドアップディスプレイは、フロントウィンドウ25に表示光を投影することで、運転者に虚像Ivを視認させた。これに代えて、ヘッドアップディスプレイは、前方風景と運転者との間に設置された透過性を有するコンバイナを有し、コンバイナを介して運転者に虚像Ivを視認させてもよい。この場合、光源ユニット4は、表示光をコンバイナに投射し、コンバイナの反射光を運転者の目に到達させることで、運転者に虚像Ivを視認させる。
本発明は、ヘッドアップディスプレイへの適用に限定されず、カメラ5が撮影した前方画像Ibに重ねて表示画像Iaを表示する装置へ適用されてもよい。
カメラ5は、ステレオカメラでなくともよい。この場合、光源ユニット4は、図示しないレーダ等の前方風景の対象物との距離を計測するセンサと電気的に接続し、当該センサの検出信号に基づき、前方画像座標系の各画素に対応するカメラ座標系での座標を認識する。この態様によっても、光源ユニット4は、好適に、HUD座標系から前方画像座標系への変換行列を算出し、HUD座標系の各座標位置に対応する前方画像座標系の対応点を認識することができる。
5 カメラ
6 目点位置検出装置
25 フロントウィンドウ
28 ボンネット
29 ダッシュボード
Claims (10)
- 風景を撮影した画像を取得する画像取得手段と、
前記画像の画素について、顕著性を算出する顕著性算出手段と、
風景に重ねて、又は風景を撮影した前記画像に重ねて表示する表示画像の各画素の表示位置に対応する前記画像の画素の顕著性に基づき、前記表示画像の各画素の明るさを決定する明るさ決定手段と、
を含むことを特徴とする表示装置。 - 前記明るさ決定手段は、前記顕著性が所定値より高い前記画像の画素に対応する前記表示画像の画素の明るさを低下させることを特徴とする請求項1に記載の表示装置。
- 前記明るさ決定手段は、前記顕著性が高い前記画像の画素に対応する前記表示画像の画素ほど、段階的又は連続的に、当該画素の明るさを低く設定することを特徴とする請求項1に記載の表示装置。
- 前記明るさ決定手段は、前記表示画像の各々の表示位置に対応する前記画像の画素の顕著性に基づき、前記表示画像ごとに画素の明るさを決定することを特徴とする請求項1に記載の表示装置。
- 前記明るさ決定手段は、前記顕著性が極大値となる前記画像の画素に対応する前記表示画像の所定画素の周辺にある画素の明るさを、前記所定画素との距離が短いほど低く設定することを特徴とする請求項1に記載の表示装置。
- 観察者の目点位置を検出する検出手段が検出した前記目点位置に応じて、前記画像の画素の位置と前記表示画像の各画素の表示位置との対応関係を認識する対応関係認識手段をさらに備え、
前記明るさ決定手段は、前記対応関係に基づき、前記表示画像の各画素の表示位置に対応する前記画像の画素の顕著性を認識することを特徴とする請求項1〜5のいずれか一項に記載の表示装置。 - 運転者に前記表示画像を虚像として視認させるヘッドアップディスプレイであることを特徴とする請求項1〜6のいずれか一項に記載の表示装置。
- 風景を撮影した画像を取得する画像取得工程と、
前記画像の画素について、顕著性を算出する顕著性算出工程と、
風景に重ねて、又は風景を撮影した前記画像に重ねて表示する表示画像の各画素の表示位置に対応する前記画像の画素の顕著性に基づき、前記表示画像の各画素の明るさを決定する明るさ決定工程と、
を含むことを特徴とする制御方法。 - コンピュータが実行するプログラムであって、
風景を撮影した画像を取得する画像取得手段と、
前記画像の画素について、顕著性を算出する顕著性算出手段と、
風景に重ねて、又は風景を撮影した前記画像に重ねて表示する表示画像の各画素の表示位置に対応する前記画像の画素の顕著性に基づき、前記表示画像の各画素の明るさを決定する明るさ決定手段
として前記コンピュータを機能させることを特徴とするプログラム。 - 請求項9に記載のプログラムを記憶したことを特徴とする記憶媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014196533A JP2016070951A (ja) | 2014-09-26 | 2014-09-26 | 表示装置、制御方法、プログラム、及び記憶媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014196533A JP2016070951A (ja) | 2014-09-26 | 2014-09-26 | 表示装置、制御方法、プログラム、及び記憶媒体 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019001791A Division JP6624312B2 (ja) | 2019-01-09 | 2019-01-09 | 表示装置、制御方法、プログラム、及び記憶媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2016070951A true JP2016070951A (ja) | 2016-05-09 |
Family
ID=55866808
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014196533A Ceased JP2016070951A (ja) | 2014-09-26 | 2014-09-26 | 表示装置、制御方法、プログラム、及び記憶媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2016070951A (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018090170A (ja) * | 2016-12-06 | 2018-06-14 | 株式会社デンソー | ヘッドアップディスプレイシステム |
CN110458202A (zh) * | 2019-07-18 | 2019-11-15 | 东莞弓叶互联科技有限公司 | 图片处理方法、装置、设备及计算机可读存储介质 |
JP2020071453A (ja) * | 2018-11-02 | 2020-05-07 | 京セラ株式会社 | 無線通信ヘッドアップディスプレイシステム、無線通信機器、移動体、およびプログラム |
WO2020144974A1 (en) * | 2019-01-11 | 2020-07-16 | Ricoh Company, Ltd. | Display controller, display system, mobile object, image generation method, and carrier means |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10281794A (ja) * | 1997-04-03 | 1998-10-23 | Toyota Motor Corp | 車両用案内表示装置 |
JP2004030212A (ja) * | 2002-06-25 | 2004-01-29 | Toyota Central Res & Dev Lab Inc | 車両用情報提供装置 |
JP2006284195A (ja) * | 2005-03-31 | 2006-10-19 | Denso Corp | 経路案内システム |
JP2006284458A (ja) * | 2005-04-01 | 2006-10-19 | Denso Corp | 運転支援情報表示システム |
JP2007198962A (ja) * | 2006-01-27 | 2007-08-09 | Matsushita Electric Ind Co Ltd | 車両用案内表示装置 |
JP2012247847A (ja) * | 2011-05-25 | 2012-12-13 | Denso Corp | 車両用情報伝達制御装置、及び、情報伝達制御方法 |
JP2013009825A (ja) * | 2011-06-29 | 2013-01-17 | Denso Corp | 視認負荷量推定装置、運転支援装置、および視認負荷量推定プログラム |
JP2013108852A (ja) * | 2011-11-21 | 2013-06-06 | Alpine Electronics Inc | ナビゲーション装置 |
-
2014
- 2014-09-26 JP JP2014196533A patent/JP2016070951A/ja not_active Ceased
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10281794A (ja) * | 1997-04-03 | 1998-10-23 | Toyota Motor Corp | 車両用案内表示装置 |
JP2004030212A (ja) * | 2002-06-25 | 2004-01-29 | Toyota Central Res & Dev Lab Inc | 車両用情報提供装置 |
JP2006284195A (ja) * | 2005-03-31 | 2006-10-19 | Denso Corp | 経路案内システム |
JP2006284458A (ja) * | 2005-04-01 | 2006-10-19 | Denso Corp | 運転支援情報表示システム |
JP2007198962A (ja) * | 2006-01-27 | 2007-08-09 | Matsushita Electric Ind Co Ltd | 車両用案内表示装置 |
JP2012247847A (ja) * | 2011-05-25 | 2012-12-13 | Denso Corp | 車両用情報伝達制御装置、及び、情報伝達制御方法 |
JP2013009825A (ja) * | 2011-06-29 | 2013-01-17 | Denso Corp | 視認負荷量推定装置、運転支援装置、および視認負荷量推定プログラム |
JP2013108852A (ja) * | 2011-11-21 | 2013-06-06 | Alpine Electronics Inc | ナビゲーション装置 |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018090170A (ja) * | 2016-12-06 | 2018-06-14 | 株式会社デンソー | ヘッドアップディスプレイシステム |
JP2020071453A (ja) * | 2018-11-02 | 2020-05-07 | 京セラ株式会社 | 無線通信ヘッドアップディスプレイシステム、無線通信機器、移動体、およびプログラム |
WO2020090714A1 (ja) * | 2018-11-02 | 2020-05-07 | 京セラ株式会社 | 無線通信ヘッドアップディスプレイシステム、無線通信機器、移動体、およびプログラム |
JP7034052B2 (ja) | 2018-11-02 | 2022-03-11 | 京セラ株式会社 | 無線通信ヘッドアップディスプレイシステム、無線通信機器、移動体、およびプログラム |
WO2020144974A1 (en) * | 2019-01-11 | 2020-07-16 | Ricoh Company, Ltd. | Display controller, display system, mobile object, image generation method, and carrier means |
JP2020112698A (ja) * | 2019-01-11 | 2020-07-27 | 株式会社リコー | 表示制御装置、表示装置、表示システム、移動体、プログラム、画像生成方法 |
US11752940B2 (en) | 2019-01-11 | 2023-09-12 | Ricoh Company, Ltd. | Display controller, display system, mobile object, image generation method, and carrier means |
CN110458202A (zh) * | 2019-07-18 | 2019-11-15 | 东莞弓叶互联科技有限公司 | 图片处理方法、装置、设备及计算机可读存储介质 |
CN110458202B (zh) * | 2019-07-18 | 2022-11-25 | 广东弓叶科技有限公司 | 图片处理方法、装置、设备及计算机可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021197189A1 (zh) | 基于增强现实的信息显示方法、系统、装置及投影设备 | |
US11194154B2 (en) | Onboard display control apparatus | |
US9878667B2 (en) | In-vehicle display apparatus and program product | |
JP6379779B2 (ja) | 車両用表示装置 | |
JP6381807B2 (ja) | 表示制御装置、表示装置および表示制御方法 | |
US11295702B2 (en) | Head-up display device and display control method | |
EP2455927A1 (en) | Driving support device, driving support method, and program | |
WO2015163205A1 (ja) | 車両用表示システム | |
US9463743B2 (en) | Vehicle information display device and vehicle information display method | |
US11325470B2 (en) | Method, device and computer-readable storage medium with instructions for controlling a display of an augmented-reality head-up display device for a transportation vehicle | |
JP6838626B2 (ja) | 表示制御装置、及び表示制御プログラム | |
KR20160002179A (ko) | 차량정보 표시장치 및 그 표시방법 | |
JP2013090005A (ja) | 画像生成装置 | |
JP2010039793A (ja) | 車両用表示装置 | |
JP2015120395A (ja) | 車両情報投影システム | |
CN114489332B (zh) | Ar-hud输出信息的显示方法及系统 | |
CN110546026A (zh) | 调整装置、显示系统及调整方法 | |
JP2016070951A (ja) | 表示装置、制御方法、プログラム、及び記憶媒体 | |
JP2019139273A (ja) | 表示システム | |
JP2013026801A (ja) | 車両周辺監視システム | |
JP2018020779A (ja) | 車両情報投影システム | |
JP6624312B2 (ja) | 表示装置、制御方法、プログラム、及び記憶媒体 | |
KR20170056100A (ko) | 헤드업 디스플레이의 물체 표시 장치 및 방법 | |
JP6415968B2 (ja) | 通信装置、警告装置、表示装置、制御方法、プログラム、及び記憶媒体 | |
WO2020039855A1 (ja) | 表示制御装置、表示制御プログラム、およびその持続的有形コンピュータ読み取り媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170804 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180528 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180605 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180806 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181211 |
|
A045 | Written measure of dismissal of application [lapsed due to lack of payment] |
Free format text: JAPANESE INTERMEDIATE CODE: A045 Effective date: 20190423 |