JP5813944B2 - 画像表示システム、画像処理装置及び画像表示方法 - Google Patents
画像表示システム、画像処理装置及び画像表示方法 Download PDFInfo
- Publication number
- JP5813944B2 JP5813944B2 JP2010271940A JP2010271940A JP5813944B2 JP 5813944 B2 JP5813944 B2 JP 5813944B2 JP 2010271940 A JP2010271940 A JP 2010271940A JP 2010271940 A JP2010271940 A JP 2010271940A JP 5813944 B2 JP5813944 B2 JP 5813944B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- vehicle
- enlarged
- display screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
Description
<1.システム構成>
図1は、画像表示システム120の構成例を示すブロック図である。この画像表示システム120は、車両(本実施の形態では、自動車)に搭載されるものであり、車両の周辺を撮影して画像を生成して車室内に表示する機能を有している。画像表示システム120のユーザ(代表的にはドライバ)は、この画像表示システム120を利用することにより、当該車両の周辺の様子をほぼリアルタイムに把握できるようになっている。なお、以下の説明において使用される用語「画像」は、静止画像及び動画のいずれの意味も含む。
次に、画像生成部3の合成画像生成部32が、撮像部5で得られた複数の撮影画像に基づいて車両9の周辺を任意の仮想視点からみた様子を示す合成画像を生成する手法について説明する。図3は、合成画像を生成する手法の一例の説明図である。
画像表示システム120は、ナビモードや、撮影部5で取得された撮影画像や合成画像生成部32が合成した合成画像を表示するための複数の表示モードを有している。これらの表示モードは、車両9の走行状態やシフトレバーの位置、操作部22、ディスプレイ21のタッチパネルなどを介したユーザの操作に基づいて表示制御部12の制御により切り替えられる。以下、表示制御部12による表示モードの切替処理の各実施例について説明する。
図5は、表示制御部12により切り替わる表示モードの状態遷移図の第1例の説明図である。ナビモードST10は、ナビゲーション装置20の機能により、ナビゲーション案内用の地図画像などをディスプレイ21に表示する動作モードである。ナビモードST10では、図6に示すような経路案内のためのナビゲーション表示Dnがディスプレイ21上に表示される。
車両左前方の領域A1:車両左前方を真上から拡大して見た拡大俯瞰画像の合成画像
車両前方の領域A2:車両前方を真上から拡大して見た拡大俯瞰画像の合成画像
車両右前方の領域A3:車両右前方を真上から拡大して見た拡大俯瞰画像の合成画像
車両左側方の領域A4:車両左側方を真上から拡大して見た拡大俯瞰画像の合成画像
車両右側方の領域A5:車両右側方を真上から拡大して見た拡大俯瞰画像の合成画像
車両左後方の領域A6:車両左後方を真上から拡大して見た拡大俯瞰画像の合成画像
車両後方の領域A7:車両後方を真上から拡大して見た拡大俯瞰画像の合成画像
車両右後方の領域A8:車両右後方を真上から拡大して見た拡大俯瞰画像の合成画像
Dy=Yf−Yp
Dz=Zf−Zp
my=Dy/(F×T)
mz=Dz/(F×T)
Yn=Yn-1+α×my
Zn=Zn-1+α×mz
続いて、バックモード用2画面表示状態ST21において、第1領域R1に表示された俯瞰画像CPwがタッチされた場合の表示処理の他の実施例を説明する。本実施例では、俯瞰画像CPwがタッチされた場合に、拡大俯瞰画像を全画面V0に全画面表示する。
続いて、表示制御部12による表示モードの他の切り替え処理の実施例について説明する。図21は、表示モードの状態遷移図の第2例の説明図である。図5に示す状態遷移図と同一の部分については同じ参照符号を付している。
車両前方の領域A12:車両前方を真上から拡大して見た拡大俯瞰画像の合成画像
車両右前方の領域A13:車両右前方を真上から拡大して見た拡大俯瞰画像の合成画像
車両左側方の領域A14:車両左側方を真上から拡大して見た拡大俯瞰画像の合成画像
車両右側方の領域A15:車両右側方を真上から拡大して見た拡大俯瞰画像の合成画像
車両左後方の領域A16:車両左後方を真上から拡大して見た拡大俯瞰画像の合成画像
車両後方の領域A17:車両後方を真上から拡大して見た拡大俯瞰画像の合成画像
車両右後方の領域A18:車両右後方を真上から拡大して見た拡大俯瞰画像の合成画像
以上の実施例においては、俯瞰画像を複数の領域に分割し、タッチされた領域の拡大俯瞰画像を生成し表示するようにした。換言すれば、各領域の中心の真上近傍に視点位置が存在する。この場合、隣接する領域の境界に障害物が存在する場合に障害物が確認しづらくなる可能性がある。そこで、変形例として俯瞰画像を複数の領域に分割するのではなく、俯瞰画像上でタッチされた点を中心とした拡大俯瞰画像を生成、表示してもよい。即ち、俯瞰画像上でタッチされた点を視点位置として拡大俯瞰画像を生成する。このようにすれば、確認したい箇所を中心とした拡大俯瞰画像表示が可能となるため障害物を確認し易くなる。
21 ディスプレイ
22 操作部
11 画像制御部
12 表示制御部
31 合成画像生成部
51 フロントカメラ
52 バックカメラ
53 サイドカメラ
120 画像表示システム
Claims (11)
- 車両に搭載される画像表示システムであって、
前記車両に配置されたカメラで得られる撮影画像に基づいて仮想視点から見た合成画像を生成する合成画像生成手段と、
前記合成画像生成手段により生成された合成画像を表示画面に表示する表示手段と、
前記合成画像生成手段により生成され前記表示画面に表示された前記車両周辺の俯瞰画像の一部の領域を指定する第1の指定入力を受け付ける受付手段と、
前記第1の指定入力を受け付けた場合に、前記指定された領域の拡大画像を前記表示画面に全画面表示する表示制御手段と、
を備え、
前記表示制御手段によって制御される前記表示画面の1以上の表示モードには、前記俯瞰画像が全画面表示される状態を少なくとも含み、
前記受付手段は、全画面表示された前記俯瞰画像の領域を指定する第2の指定入力を受け付け、
前記表示制御手段は、前記第2の指定入力を受け付けた場合に、指定された領域の拡大俯瞰画像を全画面表示することを特徴とする画像表示システム。 - 車両に搭載される画像表示システムであって、
前記車両に配置されたカメラで得られる撮影画像に基づいて仮想視点から見た合成画像を生成する合成画像生成手段と、
前記合成画像生成手段により生成された合成画像を表示画面に表示する表示手段と、
前記合成画像生成手段により生成され前記表示画面に表示された前記車両周辺の俯瞰画像の一部の領域を指定する指定入力を受け付ける受付手段と、
前記指定入力を受け付けた場合に、前記指定された領域の拡大画像を前記表示画面に全画面表示する表示制御手段と、
を備え、
前記表示制御手段によって制御される前記表示画面の1以上の表示モードには、前記カメラにより得られる撮影画像を前記表示画面に表示する状態を含み、
前記表示制御手段は、前記撮影画像の表示中に前記指定入力を受け付けた場合に、前記合成画像生成手段により生成される、前記撮影画像から前記俯瞰画像まで変化する第1のアニメーション及び前記俯瞰画像から前記拡大画像まで変化する第2のアニメーションと、を表示することを特徴とする画像表示システム。 - 車両に搭載される画像表示システムであって、
前記車両に配置されたカメラで得られる撮影画像に基づいて仮想視点から見た合成画像を生成する合成画像生成手段と、
前記合成画像生成手段により生成された合成画像を表示画面に表示する表示手段と、
前記合成画像生成手段により生成され前記表示画面に表示された前記車両周辺の俯瞰画像の一部の領域を指定する第1の指定入力を受け付ける受付手段と、
前記第1の指定入力を受け付けた場合に、前記指定された領域の拡大画像を前記表示画面に全画面表示する表示制御手段と、
を備え、
前記受付手段は、前記拡大画像を分割した複数領域のいずれかを指定する第2の指定入力を受け付け、
前記表示制御手段は、前記第2の指定入力を受け付けた場合に、指定された領域に応じて前記拡大画像の視野の位置を変更することを特徴とする画像表示システム。 - 車両に搭載される画像表示システムであって、
前記車両に配置されたカメラで得られる撮影画像に基づいて仮想視点から見た合成画像を生成する合成画像生成手段と、
前記合成画像生成手段により生成された合成画像を表示画面に表示する表示手段と、
前記合成画像生成手段により生成され前記表示画面に表示された前記車両周辺の俯瞰画像の一部の領域を指定する第1の指定入力を受け付ける受付手段と、
前記第1の指定入力を受け付けた場合に、前記指定された領域の拡大画像を前記表示画面に全画面表示する表示制御手段と、
を備え、
前記受付手段は、前記表示画面に表示された矢印表示を指定する第2の指定入力を受け付け、
前記表示制御手段は、前記第2の指定入力を受け付けた場合に、指定された矢印に応じて前記拡大画像の視野の位置を変更することを特徴とする画像表示システム。 - 前記表示制御手段によって制御される前記表示画面の1以上の表示モードには、第1領域と第2領域とを少なくとも有する2画面表示状態が含まれ、
前記受付手段は、前記2画面表示状態において前記第1領域に表示された前記俯瞰画像の領域の指定を受け付けることを特徴とする請求項2〜4のいずれか一項に記載の画像表示システム。 - 前記合成画像生成手段は、前記拡大画像中に寸法線を挿入する請求項1〜5のいずれか一項に記載の画像表示システム。
- 車両に搭載される画像表示システムであって、
前記車両に配置されたカメラで得られる撮影画像に基づいて仮想視点から見た合成画像を生成する合成画像生成手段と、
前記合成画像生成手段により生成された合成画像及び前記撮影画像を表示画面に表示する表示手段と、
前記合成画像生成手段により生成され前記表示画面に表示された前記車両周辺の俯瞰画像の一部の領域を指定する指定入力を受け付ける受付手段と、
前記指定入力を受け付けた場合に、前記指定された領域の拡大画像を前記表示画面に表示する表示制御手段と、を備え、
前記表示制御手段によって制御される前記表示画面の1以上の表示モードには、前記カメラにより得られる撮影画像を前記表示画面に表示する状態を含み、
前記撮影画像の表示中に前記指定入力を受け付けたとき、前記表示制御手段は、前記合成画像生成手段により生成される、前記撮影画像から前記俯瞰画像まで変化する第1のアニメーション及び前記俯瞰画像から前記拡大画像まで変化する第2のアニメーションと、を表示することを特徴とする画像表示システム。 - 車両に搭載される表示装置に表示させる画像を生成する画像処理装置であって、
前記車両に配置されたカメラで得られる撮影画像に基づいて仮想視点から見た合成画像を生成する合成画像生成手段と、
前記合成画像生成手段により生成された合成画像を前記表示装置の表示画面に表示する表示手段と、
前記合成画像生成手段により生成され前記表示画面に表示された前記車両周辺の俯瞰画像の一部の領域を指定する指定入力を受け付ける受付手段と、
前記指定入力を受け付けた場合に、前記指定された領域の拡大画像を前記表示画面に全画面表示する表示制御手段と、
を備え、
前記表示制御手段によって制御される前記表示画面の1以上の表示モードには、前記カメラにより得られる撮影画像を前記表示画面に表示する状態を含み、
前記表示制御手段は、前記撮影画像の表示中に前記指定入力を受け付けた場合に、前記合成画像生成手段により生成される、前記撮影画像から前記俯瞰画像まで変化する第1のアニメーション及び前記俯瞰画像から前記拡大画像まで変化する第2のアニメーションと、を表示することを特徴とする画像処理装置。 - 車両に搭載される表示装置に表示させる画像を生成する画像処理装置であって、
前記車両に配置されたカメラで得られる撮影画像に基づいて仮想視点から見た合成画像を生成する合成画像生成手段と、
前記合成画像生成手段により生成された合成画像及び前記撮影画像を表示画面に表示する表示手段と、
前記合成画像生成手段により生成され前記表示画面に表示された前記車両周辺の俯瞰画像の一部の領域を指定する指定入力を受け付ける受付手段と、
前記指定入力を受け付けた場合に、前記指定された領域の拡大画像を前記表示画面に表示する表示制御手段と、を備え、
前記表示制御手段によって制御される前記表示画面の1以上の表示モードには、前記カメラにより得られる撮影画像を前記表示画面に表示する状態を含み、
前記撮影画像の表示中に前記指定入力を受け付けたとき、前記表示制御手段は、前記合成画像生成手段により生成される、前記撮影画像から前記俯瞰画像まで変化する第1のアニメーション及び前記俯瞰画像から前記拡大画像まで変化する第2のアニメーションと、を表示することを特徴とする画像処理装置。 - 車両において画像を表示する画像表示方法であって、
前記車両に配置されたカメラで得られる撮影画像に基づいて仮想視点から見た前記車両周辺の俯瞰画像を生成し、
前記俯瞰画像を表示画面に表示し、
前記表示画面に表示された俯瞰画像の一部の領域を指定する指定入力を受け付け、
前記指定入力を受け付けた場合に、仮想視点から見た場合の前記指定された領域の拡大画像を前記撮影画像に基づいて生成し、
前記拡大画像を前記表示画面に全画面表示し、
前記撮影画像の表示中に前記指定入力を受け付けた場合に、前記撮影画像から前記俯瞰画像まで変化する第1のアニメーションと、前記俯瞰画像から前記拡大画像まで変化する第2のアニメーションと、を生成し、
前記第1及び第2のアニメーションを前記表示画面に表示することを特徴とする画像表示方法。 - 車両において画像を表示する画像表示方法であって、
前記車両に配置されたカメラで得られる撮影画像に基づいて仮想視点から見た前記車両周辺の俯瞰画像を生成し、
前記撮影画像と前記俯瞰画像とを表示画面に表示し、
前記表示画面に表示された俯瞰画像の一部の領域を指定する指定入力を受け付け、
前記指定入力を受け付けた場合に、前記撮影画像から前記俯瞰画像まで変化する第1のアニメーションと、前記俯瞰画像から前記指定された領域の拡大画像まで変化する第2のアニメーションと、を生成し、
前記第1及び第2のアニメーションを前記表示画面に表示することを特徴とする画像表示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010271940A JP5813944B2 (ja) | 2010-12-06 | 2010-12-06 | 画像表示システム、画像処理装置及び画像表示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010271940A JP5813944B2 (ja) | 2010-12-06 | 2010-12-06 | 画像表示システム、画像処理装置及び画像表示方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015184346A Division JP6073433B2 (ja) | 2015-09-17 | 2015-09-17 | 画像表示システム、画像処理装置及び画像表示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012124610A JP2012124610A (ja) | 2012-06-28 |
JP5813944B2 true JP5813944B2 (ja) | 2015-11-17 |
Family
ID=46505629
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010271940A Active JP5813944B2 (ja) | 2010-12-06 | 2010-12-06 | 画像表示システム、画像処理装置及び画像表示方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5813944B2 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5938292B2 (ja) * | 2012-08-03 | 2016-06-22 | 日立建機株式会社 | 運搬車両の監視装置 |
TWI535587B (zh) * | 2012-11-14 | 2016-06-01 | 義晶科技股份有限公司 | 利用觸控面板來控制車用影像之顯示的方法及其車用影像系統 |
JP6223685B2 (ja) * | 2013-01-30 | 2017-11-01 | 富士通テン株式会社 | 画像処理装置および画像処理方法 |
JP6347934B2 (ja) | 2013-10-11 | 2018-06-27 | 株式会社デンソーテン | 画像表示装置、画像表示システム、画像表示方法、及び、プログラム |
JP6488628B2 (ja) * | 2014-10-14 | 2019-03-27 | 株式会社デンソー | 映像処理装置、及び車載映像処理システム |
JP6657937B2 (ja) * | 2015-12-25 | 2020-03-04 | トヨタ自動車株式会社 | 車両用表示装置 |
JP2017143340A (ja) * | 2016-02-08 | 2017-08-17 | 株式会社デンソー | 情報処理装置及びプログラム |
JP6662655B2 (ja) * | 2016-02-12 | 2020-03-11 | トヨタ自動車株式会社 | 車両用画像表示装置 |
CN109691088B (zh) * | 2016-08-22 | 2022-04-15 | 索尼公司 | 图像处理设备、图像处理方法、以及程序 |
JP6802008B2 (ja) * | 2016-08-25 | 2020-12-16 | キャタピラー エス エー アール エル | 建設機械 |
JP6658642B2 (ja) * | 2017-03-24 | 2020-03-04 | トヨタ自動車株式会社 | 車両用視認装置 |
KR102570780B1 (ko) | 2018-05-08 | 2023-08-29 | 소니 세미컨덕터 솔루션즈 가부시키가이샤 | 화상 처리 장치, 이동 장치 및 방법, 그리고 프로그램 |
JP6568981B2 (ja) * | 2018-05-29 | 2019-08-28 | 株式会社デンソーテン | 画像表示装置、画像表示システム、画像表示方法、及び、プログラム |
JP7119798B2 (ja) * | 2018-09-07 | 2022-08-17 | 株式会社アイシン | 表示制御装置 |
CN112215917A (zh) * | 2019-07-09 | 2021-01-12 | 杭州海康威视数字技术股份有限公司 | 车载全景图生成方法、装置及系统 |
JP6725734B2 (ja) * | 2019-08-05 | 2020-07-22 | 株式会社デンソーテン | 画像表示装置、画像表示システム、画像表示方法、及び、プログラム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002320223A (ja) * | 2001-04-23 | 2002-10-31 | Sumitomo Electric Ind Ltd | 車両側方映像生成装置 |
JP3606223B2 (ja) * | 2001-04-26 | 2005-01-05 | 住友電気工業株式会社 | 車両側方映像生成方法及び車両側方映像生成装置 |
JP4843167B2 (ja) * | 2001-09-20 | 2011-12-21 | 株式会社東芝 | ローラ清掃装置 |
JP4776491B2 (ja) * | 2006-10-06 | 2011-09-21 | 日立建機株式会社 | 作業機械の周囲監視装置 |
JP4973564B2 (ja) * | 2008-03-27 | 2012-07-11 | 三菱自動車工業株式会社 | 車両周辺表示装置 |
JP4992800B2 (ja) * | 2008-04-02 | 2012-08-08 | 株式会社デンソー | 駐車支援装置 |
JP5187179B2 (ja) * | 2008-12-16 | 2013-04-24 | 三菱自動車工業株式会社 | 車両周辺監視装置 |
JP5696872B2 (ja) * | 2010-03-26 | 2015-04-08 | アイシン精機株式会社 | 車両周辺監視装置 |
-
2010
- 2010-12-06 JP JP2010271940A patent/JP5813944B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012124610A (ja) | 2012-06-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5813944B2 (ja) | 画像表示システム、画像処理装置及び画像表示方法 | |
US7554461B2 (en) | Recording medium, parking support apparatus and parking support screen | |
JP6073433B2 (ja) | 画像表示システム、画像処理装置及び画像表示方法 | |
JP6413207B2 (ja) | 車両用表示装置 | |
CA3069114C (en) | Parking assistance method and parking assistance device | |
JP5087051B2 (ja) | 画像生成装置及び画像表示システム | |
JP5271154B2 (ja) | 画像生成装置及び画像表示システム | |
US8878934B2 (en) | Image display device | |
JP5321267B2 (ja) | 車両用画像表示装置及び俯瞰画像の表示方法 | |
JP6275396B2 (ja) | 仮想カメラを対話形式で制御するシステムおよび方法 | |
JP5697512B2 (ja) | 画像生成装置、画像表示システム及び画像表示装置 | |
WO2010137684A1 (ja) | 画像生成装置及び画像表示システム | |
US20120287282A1 (en) | Image processing apparatus, image processing system, and image processing method | |
JP5622986B2 (ja) | 画像表示システム、画像処理装置及び画像表示方法 | |
JP2005311868A (ja) | 車両周辺視認装置 | |
CN105009574A (zh) | 周边监视装置及程序 | |
JP5724446B2 (ja) | 車両の運転支援装置 | |
US20120249796A1 (en) | Image processing device, image processing system, and image processing method | |
JP5914114B2 (ja) | 駐車支援装置、及び駐車支援方法 | |
JP6084097B2 (ja) | 画像生成装置、画像表示システム及び画像生成方法 | |
JP2012073836A (ja) | 画像表示システム、画像処理装置、および、画像表示方法 | |
JP4927514B2 (ja) | 運転支援装置 | |
JP5273068B2 (ja) | 車両周辺監視装置 | |
JP4059309B2 (ja) | 車載カメラの画像表示制御方法及びその装置 | |
JP2008162308A (ja) | 車両用撮像装置及び車両用画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131009 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140704 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140715 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140912 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150106 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150303 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150818 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150917 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5813944 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |