JP2015075966A - 画像処理装置、画像処理方法、及び、プログラム - Google Patents
画像処理装置、画像処理方法、及び、プログラム Download PDFInfo
- Publication number
- JP2015075966A JP2015075966A JP2013212337A JP2013212337A JP2015075966A JP 2015075966 A JP2015075966 A JP 2015075966A JP 2013212337 A JP2013212337 A JP 2013212337A JP 2013212337 A JP2013212337 A JP 2013212337A JP 2015075966 A JP2015075966 A JP 2015075966A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- image processing
- coordinate system
- axis
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 125
- 238000003672 processing method Methods 0.000 title claims abstract description 8
- 238000005259 measurement Methods 0.000 claims abstract description 73
- 238000004364 calculation method Methods 0.000 claims abstract description 43
- 230000002093 peripheral effect Effects 0.000 claims abstract description 37
- 238000000034 method Methods 0.000 claims description 27
- 230000008569 process Effects 0.000 claims description 24
- 230000007717 exclusion Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 26
- 239000011159 matrix material Substances 0.000 description 21
- 239000013598 vector Substances 0.000 description 20
- 230000009466 transformation Effects 0.000 description 17
- 101100238516 Rattus norvegicus Mrgprx1 gene Proteins 0.000 description 15
- 230000006870 function Effects 0.000 description 11
- 238000000605 extraction Methods 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 10
- 239000007787 solid Substances 0.000 description 8
- 238000006243 chemical reaction Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 238000012800 visualization Methods 0.000 description 4
- 238000013507 mapping Methods 0.000 description 3
- 230000015654 memory Effects 0.000 description 3
- KNMAVSAGTYIFJF-UHFFFAOYSA-N 1-[2-[(2-hydroxy-3-phenoxypropyl)amino]ethylamino]-3-phenoxypropan-2-ol;dihydrochloride Chemical compound Cl.Cl.C=1C=CC=CC=1OCC(O)CNCCNCC(O)COC1=CC=CC=C1 KNMAVSAGTYIFJF-UHFFFAOYSA-N 0.000 description 2
- 206010069747 Burkholderia mallei infection Diseases 0.000 description 2
- 208000023445 Congenital pulmonary airway malformation Diseases 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- SAZUGELZHZOXHB-UHFFFAOYSA-N acecarbromal Chemical compound CCC(Br)(CC)C(=O)NC(=O)NC(C)=O SAZUGELZHZOXHB-UHFFFAOYSA-N 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30261—Obstacle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/64—Three-dimensional objects
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Computer Graphics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
【解決手段】車両に搭載されているカメラにより撮像された画像と、車両に搭載されている距離センサにより算出された周辺物体上の計測点までの距離と、に基づいて、車両の周辺環境を再構築した仮想的な3次元空間を描画する画像処理装置であって、車両座標系で定義されている複数のグリット面と周辺物体との交線を算出する交線算出部47と、交線算出部47により算出された交線を仮想的な3次元空間内に配置されている対応する周辺物体上に描画する画像処理部48と、を備えている。
【選択図】図17
Description
図1は、本実施形態1における車載システム1の構成例を示す図である。車載システム1は、図1に示すように、画像処理装置である車載装置2と、複数のカメラ3と、複数のレンジセンサ4と、を備えて構成されている。車載装置2には、図1に示すように、複数のカメラ3と、複数のレンジセンサ4と、が接続されている。
M11=cr×cp−sr×st×sp
M12=cr×sp+sr×st×cp
M13=sr×ct
M21=−sr×cp−cr×st×sp
M22=−sr×sp+cr×st×cp
M23=cr×ct
M31=ct×sp
M32=−ct×cp
M33=st
である。
三角形{P0,P1,P2}の頂点P0、P1、P2を{X,Y,Z}座標値の降順にソートし、ソート結果をPA{X,Y,Z}、PB{X,Y,Z}、PC{X,Y,Z}とする。なお、PA{X,Y,Z}は、X座標値の降順にソートした場合のPAX、Y座標値の降順にソートした場合のPAY、Z座標値の降順にソートした場合のPAZ、を便宜的に一括で示している。PB{X,Y,Z}、PC{X,Y,Z}についても同様である。
式(9.1)乃至式(9.3)に従って、[PA{X,Y,Z}]、[PB{X,Y,Z}]、[PC{X,Y,Z}]をSTEP{X,Y,Z}で割って算出した値の整数部NA{X,Y,Z}、NB{X,Y,Z}、NC{X,Y,Z}をそれぞれ算出する。
X座標値の降順にソートした場合の整数部NAX、NBX、NCXにおいて、(A)NAX≠NBX、且つ、NBX=NCXの場合は、図15に例示する線分L0R0を算出し、算出した線分L0R0をX軸グリット面との交線として座標情報をグリットデータGDに登録し、(B)NAX=NBX、且つ、NBX≠NCXの場合は、図15に例示する線分L1R1を算出し、算出した線分L1R1をX軸グリット面との交線として座標情報をグリットデータGDに登録し、(C)(A)と(B)以外の場合は、X軸グリット面との交線のグリットデータGDへの登録を行わない。
実施形態1においては、車両座標系CCARで定義されている{X軸,Y軸,Z軸}グリット面と、物体投影面を構成する3次元ポリゴンPとの交線を算出し、周辺物体上に交線を重畳表示するように構成した。
車両座標系CCARで定義されている三角形{P0,P1,P2}の頂点座標P0、P1、P2を、式(13)により、それぞれ、世界座標系CWORLDでの頂点座標PW 0、PW 1、PW 2に変換する。なお、式中のP{0,1,2}は、頂点座標P0、P1、P2を、便宜的に一括で示している。PW {0,1,2}についても同様である。
世界座標系CWORLDに変換後の頂点PW 0、PW 1、PW 2を{X,Y,Z}座標値の降順にソートし、ソート結果をPW A{X,Y,Z}、PW B{X,Y,Z}、PW C{X,Y,Z}とする。なお、PW A{X,Y,Z}は、X座標値の降順にソートした場合のPW AX、Y座標値の降順にソートした場合のPW AY、Z座標値の降順にソートした場合のPW AZ、を便宜的に一括で示している。PW B{X,Y,Z}、PW C{X,Y,Z}についても同様である。
式(14.1)乃至式(14.3)に従って、[PW A{X,Y,Z}]、[PW B{X,Y,Z}]、[PW C{X,Y,Z}]をSTEP{X,Y,Z}で割って算出した値の整数部NA{X,Y,Z}、NB{X,Y,Z}、NC{X,Y,Z}をそれぞれ算出する。
X座標値の降順にソートした場合の整数部NAX、NBX、NCXにおいて、(A)NAX≠NBX、且つ、NBX=NCXの場合は、図15に例示する線分L0R0を算出し、算出した線分L0R0をX軸グリット面との交線として座標情報をグリットデータGDに登録し、(B)NAX=NBX、且つ、NBX≠NCXの場合は、図15に例示する線分L1R1を算出し、算出した線分L1R1をX軸グリット面との交線として座標情報をグリットデータGDに登録し、(C)(A)と(B)以外の場合は、X軸グリット面との交線のグリットデータGDへの登録を行わない。
本実施形態3においては、自車両からの距離に応じて、例えば、交線(グリット線)の色や輝度や透過率などを変化させるように構成する。以下において、自車両からの距離に応じて交線(グリット線)の色を変化させる例について説明する。なお、本構成は、実施形態1と2のいずれの構成にも適用可能である。
(付記1)
車両に搭載されているカメラにより撮像された画像と、前記車両に搭載されている距離センサにより算出された周辺物体上の計測点までの距離と、に基づいて、前記車両の周辺環境を再構築した仮想的な3次元空間を描画する画像処理装置であって、
前記車両を基準とする座標系である車両座標系で定義されている複数のグリット面と前記周辺物体との交差断面の外郭線を算出する外郭線算出手段と、
前記外郭線算出手段により算出された前記外郭線を前記仮想的な3次元空間内に配置されている対応する周辺物体上に描画する画像処理手段と、
を備え、
前記複数のグリット面は、前記車両座標系のX軸に対して垂直な平面と、前記車両座標系のY軸に対して垂直な平面と、前記車両座標系のZ軸に対して垂直な平面と、により構成されている、
ことを特徴とする画像処理装置。
(付記2)
前記周辺物体上の計測点までの距離に基づいて、前記周辺物体の形状を特定する形状特定手段をさらに備え、
前記外郭線算出手段は、前記形状特定手段により特定された前記形状に基づいて、前記外郭線を算出する、
ことを特徴とする付記1に記載の画像処理装置。
(付記3)
前記形状特定手段は、前記周辺物体の形状を特定する際に、前記距離センサの方向に対する、隣接する前記計測点により構成される図形の面法線の傾きが所定の範囲を超える図形を除外する、
ことを特徴とする付記2に記載の画像処理装置。
(付記4)
前記計測点の内で、道路平面上の計測点を除外する除外手段を更に備え、
前記形状特定手段は、前記除外手段により道路平面上の計測点が除外された後の計測点に基づいて、前記周辺物体の形状を特定する、
ことを特徴とする付記2又は3に記載の画像処理装置。
(付記5)
前記複数のグリット面は、世界座標系で定義され、前記世界座標系のX軸に対して垂直な平面と、前記世界座標系のY軸に対して垂直な平面と、前記世界座標系のZ軸に対して垂直な平面と、により構成されており、
前記外郭線算出手段は、前記世界座標系で定義されている複数のグリット面と前記周辺物体との交差断面の外郭線を算出する、
ことを特徴とする付記1乃至4のいずれか一に記載の画像処理装置。
(付記6)
前記画像処理手段は、前記車両からの距離に応じて、前記外郭線の属性を変化させて描画する、
ことを特徴とする付記1乃至5のいずれか一に記載の画像処理装置。
(付記7)
前記X軸に垂直な平面は第1の間隔で均等に配置され、前記Y軸に垂直な平面は第2の間隔で均等に配置され、前記Z軸に垂直な平面は第3の間隔で均等に配置されている、
ことを特徴とする付記1乃至6のいずれか一に記載の画像処理装置。
(付記8)
前記画像処理手段は、前記周辺物体をテクスチャ付き描画した後に、前記外郭線を重畳描画する、
ことを特徴とする付記1乃至7のいずれか一に記載の画像処理装置。
(付記9)
前記画像処理手段による処理結果を表示画面上に表示する表示手段を更に備える、
ことを特徴とする付記1乃至8のいずれか一に記載の画像処理装置。
(付記10)
車両に搭載されているカメラにより撮像された画像と、前記車両に搭載されている距離センサにより算出された周辺物体上の計測点までの距離と、に基づいて、前記車両の周辺環境を再構築した仮想的な3次元空間を描画する画像処理装置の画像処理方法であって、
前記車両を基準とする座標系である車両座標系で定義されている複数のグリット面であって、前記車両座標系のX軸に対して垂直な平面と、前記車両座標系のY軸に対して垂直な平面と、前記車両座標系のZ軸に対して垂直な平面と、により構成されている前記複数のグリット面と前記周辺物体との交差断面の外郭線を算出し、
算出した前記外郭線を前記仮想的な3次元空間内に配置されている対応する周辺物体上に描画する、
ことを特徴とする画像処理方法。
(付記11)
車両に搭載されているカメラにより撮像された画像と、前記車両に搭載されている距離センサにより算出された周辺物体上の計測点までの距離と、に基づいて、前記車両の周辺環境を再構築した仮想的な3次元空間を描画する画像処理装置のコンピュータに、
前記車両を基準とする座標系である車両座標系で定義されている複数のグリット面であって、前記車両座標系のX軸に対して垂直な平面と、前記車両座標系のY軸に対して垂直な平面と、前記車両座標系のZ軸に対して垂直な平面と、により構成されている前記複数のグリット面と前記周辺物体との交差断面の外郭線を算出し、
算出した前記外郭線を前記仮想的な3次元空間内に配置されている対応する周辺物体上に描画する、
処理を実行させる、
ことを特徴とするプログラム。
(付記12)
車両に搭載されているカメラにより撮像された画像と、前記車両に搭載されている距離センサにより算出された周辺物体上の計測点までの距離と、に基づいて、前記車両の周辺環境を再構築した仮想的な3次元空間を描画する画像処理装置のコンピュータに、
前記車両を基準とする座標系である車両座標系で定義されている複数のグリット面であって、前記車両座標系のX軸に対して垂直な平面と、前記車両座標系のY軸に対して垂直な平面と、前記車両座標系のZ軸に対して垂直な平面と、により構成されている前記複数のグリット面と前記周辺物体との交差断面の外郭線を算出し、
算出した前記外郭線を前記仮想的な3次元空間内に配置されている対応する周辺物体上に描画する、
処理を実行させるプログラムを記憶した記録媒体。
2 車載装置
10 記憶部
11 画像バッファ
20 表示部
30 操作部
40 制御部
41 判定部
42 座標変換行列生成部
43 テクスチャ座標算出部
44 計測点座標算出部
45 抽出部
46 ポリゴン判定部
47 交線算出部
48 画像処理部
49 位置推定部
4A 距離算出部
3 カメラ
4 レンジセンサ
5 GPS
6 電子コンパス
201 CPU
202 RAM
203 ROM
204 HDD
205 カメラインターフェース
206 モニタインターフェース
207 センサ類インターフェース
208 無線通信モジュール
209 読取装置
210 モニタ
211 バス
212 記録媒体
Claims (11)
- 車両に搭載されているカメラにより撮像された画像と、前記車両に搭載されている距離センサにより算出された周辺物体上の計測点までの距離と、に基づいて、前記車両の周辺環境を再構築した仮想的な3次元空間を描画する画像処理装置であって、
前記車両を基準とする座標系である車両座標系で定義されている複数のグリット面と前記周辺物体との交差断面の外郭線を算出する外郭線算出手段と、
前記外郭線算出手段により算出された前記外郭線を前記仮想的な3次元空間内に配置されている対応する周辺物体上に描画する画像処理手段と、
を備え、
前記複数のグリット面は、前記車両座標系のX軸に対して垂直な平面と、前記車両座標系のY軸に対して垂直な平面と、前記車両座標系のZ軸に対して垂直な平面と、により構成されている、
ことを特徴とする画像処理装置。 - 前記周辺物体上の計測点までの距離に基づいて、前記周辺物体の形状を特定する形状特定手段をさらに備え、
前記外郭線算出手段は、前記形状特定手段により特定された前記形状に基づいて、前記外郭線を算出する、
ことを特徴とする請求項1に記載の画像処理装置。 - 前記形状特定手段は、前記周辺物体の形状を特定する際に、前記距離センサの方向に対する、隣接する前記計測点により構成される図形の面法線の傾きが所定の範囲を超える図形を除外する、
ことを特徴とする請求項2に記載の画像処理装置。 - 前記計測点の内で、道路平面上の計測点を除外する除外手段を更に備え、
前記形状特定手段は、前記除外手段により道路平面上の計測点が除外された後の計測点に基づいて、前記周辺物体の形状を特定する、
ことを特徴とする請求項2又は3に記載の画像処理装置。 - 前記複数のグリット面は、世界座標系で定義され、前記世界座標系のX軸に対して垂直な平面と、前記世界座標系のY軸に対して垂直な平面と、前記世界座標系のZ軸に対して垂直な平面と、により構成されており、
前記外郭線算出手段は、前記世界座標系で定義されている複数のグリット面と前記周辺物体との交差断面の外郭線を算出する、
ことを特徴とする請求項1乃至4のいずれか一に記載の画像処理装置。 - 前記画像処理手段は、前記車両からの距離に応じて、前記外郭線の属性を変化させて描画する、
ことを特徴とする請求項1乃至5のいずれか一に記載の画像処理装置。 - 前記X軸に垂直な平面は第1の間隔で均等に配置され、前記Y軸に垂直な平面は第2の間隔で均等に配置され、前記Z軸に垂直な平面は第3の間隔で均等に配置されている、
ことを特徴とする請求項1乃至6のいずれか一に記載の画像処理装置。 - 前記画像処理手段は、前記周辺物体をテクスチャ付き描画した後に、前記外郭線を重畳描画する、
ことを特徴とする請求項1乃至7のいずれか一に記載の画像処理装置。 - 前記画像処理手段による処理結果を表示画面上に表示する表示手段を更に備える、
ことを特徴とする請求項1乃至8のいずれか一に記載の画像処理装置。 - 車両に搭載されているカメラにより撮像された画像と、前記車両に搭載されている距離センサにより算出された周辺物体上の計測点までの距離と、に基づいて、前記車両の周辺環境を再構築した仮想的な3次元空間を描画する画像処理装置の画像処理方法であって、
前記車両を基準とする座標系である車両座標系で定義されている複数のグリット面であって、前記車両座標系のX軸に対して垂直な平面と、前記車両座標系のY軸に対して垂直な平面と、前記車両座標系のZ軸に対して垂直な平面と、により構成されている前記複数のグリット面と前記周辺物体との交差断面の外郭線を算出し、
算出した前記外郭線を前記仮想的な3次元空間内に配置されている対応する周辺物体上に描画する、
ことを特徴とする画像処理方法。 - 車両に搭載されているカメラにより撮像された画像と、前記車両に搭載されている距離センサにより算出された周辺物体上の計測点までの距離と、に基づいて、前記車両の周辺環境を再構築した仮想的な3次元空間を描画する画像処理装置のコンピュータに、
前記車両を基準とする座標系である車両座標系で定義されている複数のグリット面であって、前記車両座標系のX軸に対して垂直な平面と、前記車両座標系のY軸に対して垂直な平面と、前記車両座標系のZ軸に対して垂直な平面と、により構成されている前記複数のグリット面と前記周辺物体との交差断面の外郭線を算出し、
算出した前記外郭線を前記仮想的な3次元空間内に配置されている対応する周辺物体上に描画する、
処理を実行させる、
ことを特徴とするプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013212337A JP6149676B2 (ja) | 2013-10-09 | 2013-10-09 | 画像処理装置、画像処理方法、及び、プログラム |
US14/463,793 US20150098623A1 (en) | 2013-10-09 | 2014-08-20 | Image processing apparatus and method |
EP14182461.5A EP2863365A3 (en) | 2013-10-09 | 2014-08-27 | Image processing apparatus and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013212337A JP6149676B2 (ja) | 2013-10-09 | 2013-10-09 | 画像処理装置、画像処理方法、及び、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015075966A true JP2015075966A (ja) | 2015-04-20 |
JP6149676B2 JP6149676B2 (ja) | 2017-06-21 |
Family
ID=51453623
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013212337A Expired - Fee Related JP6149676B2 (ja) | 2013-10-09 | 2013-10-09 | 画像処理装置、画像処理方法、及び、プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20150098623A1 (ja) |
EP (1) | EP2863365A3 (ja) |
JP (1) | JP6149676B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101767434B1 (ko) * | 2015-11-17 | 2017-08-14 | 현대오트론 주식회사 | 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법 |
WO2018061613A1 (ja) * | 2016-09-30 | 2018-04-05 | 本田技研工業株式会社 | 車両制御装置 |
CN108290499A (zh) * | 2015-11-24 | 2018-07-17 | 康蒂-特米克微电子有限公司 | 带有自适应周围环境图像数据处理功能的驾驶员辅助系统 |
JP2018139107A (ja) * | 2017-01-20 | 2018-09-06 | ロベルト・ボッシュ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツングRobert Bosch Gmbh | 車両の周辺を表示する方法 |
CN111429469A (zh) * | 2019-04-17 | 2020-07-17 | 杭州海康威视数字技术股份有限公司 | 泊位位置确定方法、装置、电子设备及存储介质 |
JP2020162089A (ja) * | 2019-03-28 | 2020-10-01 | 株式会社デンソーテン | 画像生成装置および画像生成方法 |
EP4258653A1 (en) | 2022-04-06 | 2023-10-11 | Canon Kabushiki Kaisha | Image processing device that can measure distance to object, movable apparatus, image processing method, and storage medium |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6365385B2 (ja) * | 2015-04-17 | 2018-08-01 | トヨタ自動車株式会社 | 立体物検出装置及び立体物検出方法 |
JP6575445B2 (ja) | 2015-09-30 | 2019-09-18 | アイシン精機株式会社 | 車両用画像処理装置 |
FR3044274B1 (fr) * | 2015-11-27 | 2017-11-24 | Renault Sas | Systeme multimedia de vehicule automobile |
DE112017006840B4 (de) * | 2017-01-16 | 2023-11-02 | Fujitsu Limited | Informationsverarbeitungsprogramm, Informationsverarbeitungsverfahren und Informationsverarbeitungsvorrichtung |
JP6948175B2 (ja) * | 2017-07-06 | 2021-10-13 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
JP2019086310A (ja) * | 2017-11-02 | 2019-06-06 | 株式会社日立製作所 | 距離画像カメラ、距離画像カメラシステム、及びそれらの制御方法 |
DE102019123778A1 (de) * | 2019-09-05 | 2021-03-11 | Valeo Schalter Und Sensoren Gmbh | Darstellen einer Fahrzeugumgebung zum Bewegen des Fahrzeugs zu einer Zielposition |
CN112509179B (zh) * | 2020-12-18 | 2024-07-30 | 大连理工大学 | 具有全向碰撞感知和车内外三维场景重现的汽车黑匣子 |
US11954798B2 (en) * | 2021-04-22 | 2024-04-09 | Faro Technologies, Inc. | Automatic selection of a region in a three-dimensional (3D) point cloud |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0686200U (ja) * | 1993-05-13 | 1994-12-13 | 矢崎総業株式会社 | 車両周辺監視装置 |
JPH11161159A (ja) * | 1997-11-28 | 1999-06-18 | Hitachi Ltd | 3次元地図表示装置 |
JP2000029384A (ja) * | 1998-07-13 | 2000-01-28 | Monolith:Kk | 地形情報データの処理方法 |
JP2000339465A (ja) * | 1999-05-28 | 2000-12-08 | Minolta Co Ltd | 3次元形状の対応付け方法 |
JP2001319225A (ja) * | 2000-05-12 | 2001-11-16 | Minolta Co Ltd | 3次元入力装置 |
US20110282581A1 (en) * | 2010-05-12 | 2011-11-17 | Gm Global Technology Operations, Inc. | Object and vehicle detection and tracking using 3-d laser rangefinder |
WO2013018173A1 (ja) * | 2011-07-29 | 2013-02-07 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP2013088999A (ja) * | 2011-10-18 | 2013-05-13 | Aero Asahi Corp | 建物抽出装置、方法及びプログラム |
JP2013157745A (ja) * | 2012-01-27 | 2013-08-15 | Mitsubishi Heavy Ind Ltd | 送信装置、表示装置、及び表示システム |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2874710B2 (ja) * | 1996-02-26 | 1999-03-24 | 日本電気株式会社 | 三次元位置計測装置 |
JP2002083285A (ja) * | 2000-07-07 | 2002-03-22 | Matsushita Electric Ind Co Ltd | 画像合成装置および画像合成方法 |
US20020134151A1 (en) * | 2001-02-05 | 2002-09-26 | Matsushita Electric Industrial Co., Ltd. | Apparatus and method for measuring distances |
DE10317044A1 (de) * | 2003-04-11 | 2004-10-21 | Daimlerchrysler Ag | Freiraumüberwachung bei Kraftfahrzeugen |
JP4406381B2 (ja) * | 2004-07-13 | 2010-01-27 | 株式会社東芝 | 障害物検出装置及び方法 |
EP1717757A1 (de) * | 2005-04-28 | 2006-11-02 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zur grafischen Darstellung der Umgebung eines Kraftfahrzeugs |
DE102005022819A1 (de) * | 2005-05-12 | 2006-11-16 | Nanofocus Ag | Verfahren zur Bestimmung der absoluten Dicke von nicht transparenten und transparenten Proben mittels konfokaler Messtechnik |
US7741961B1 (en) * | 2006-09-29 | 2010-06-22 | Canesta, Inc. | Enhanced obstacle detection and tracking for three-dimensional imaging systems used in motor vehicles |
JP4492654B2 (ja) * | 2007-08-29 | 2010-06-30 | オムロン株式会社 | 3次元計測方法および3次元計測装置 |
WO2012017560A1 (ja) | 2010-08-06 | 2012-02-09 | 富士通株式会社 | 画像処理装置および画像処理プログラム |
US8648702B2 (en) * | 2010-08-20 | 2014-02-11 | Denso International America, Inc. | Combined time-of-flight and image sensor systems |
DE102011084554A1 (de) * | 2011-10-14 | 2013-04-18 | Robert Bosch Gmbh | Verfahren zur Darstellung eines Fahrzeugumfeldes |
US9996974B2 (en) * | 2013-08-30 | 2018-06-12 | Qualcomm Incorporated | Method and apparatus for representing a physical scene |
-
2013
- 2013-10-09 JP JP2013212337A patent/JP6149676B2/ja not_active Expired - Fee Related
-
2014
- 2014-08-20 US US14/463,793 patent/US20150098623A1/en not_active Abandoned
- 2014-08-27 EP EP14182461.5A patent/EP2863365A3/en not_active Withdrawn
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0686200U (ja) * | 1993-05-13 | 1994-12-13 | 矢崎総業株式会社 | 車両周辺監視装置 |
JPH11161159A (ja) * | 1997-11-28 | 1999-06-18 | Hitachi Ltd | 3次元地図表示装置 |
JP2000029384A (ja) * | 1998-07-13 | 2000-01-28 | Monolith:Kk | 地形情報データの処理方法 |
JP2000339465A (ja) * | 1999-05-28 | 2000-12-08 | Minolta Co Ltd | 3次元形状の対応付け方法 |
JP2001319225A (ja) * | 2000-05-12 | 2001-11-16 | Minolta Co Ltd | 3次元入力装置 |
US20110282581A1 (en) * | 2010-05-12 | 2011-11-17 | Gm Global Technology Operations, Inc. | Object and vehicle detection and tracking using 3-d laser rangefinder |
WO2013018173A1 (ja) * | 2011-07-29 | 2013-02-07 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP2013088999A (ja) * | 2011-10-18 | 2013-05-13 | Aero Asahi Corp | 建物抽出装置、方法及びプログラム |
JP2013157745A (ja) * | 2012-01-27 | 2013-08-15 | Mitsubishi Heavy Ind Ltd | 送信装置、表示装置、及び表示システム |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101767434B1 (ko) * | 2015-11-17 | 2017-08-14 | 현대오트론 주식회사 | 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법 |
JP2019504382A (ja) * | 2015-11-24 | 2019-02-14 | コンティ テミック マイクロエレクトロニック ゲゼルシャフト ミット ベシュレンクテル ハフツングConti Temic microelectronic GmbH | アダプティブな周辺画像データ処理を有するドライバー・アシスタント・システム |
CN108290499B (zh) * | 2015-11-24 | 2022-01-11 | 康蒂-特米克微电子有限公司 | 带有自适应周围环境图像数据处理功能的驾驶员辅助系统 |
CN108290499A (zh) * | 2015-11-24 | 2018-07-17 | 康蒂-特米克微电子有限公司 | 带有自适应周围环境图像数据处理功能的驾驶员辅助系统 |
JPWO2018061613A1 (ja) * | 2016-09-30 | 2019-06-24 | 本田技研工業株式会社 | 車両制御装置 |
CN109844840A (zh) * | 2016-09-30 | 2019-06-04 | 本田技研工业株式会社 | 车辆控制装置 |
WO2018061613A1 (ja) * | 2016-09-30 | 2018-04-05 | 本田技研工業株式会社 | 車両制御装置 |
JP2018139107A (ja) * | 2017-01-20 | 2018-09-06 | ロベルト・ボッシュ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツングRobert Bosch Gmbh | 車両の周辺を表示する方法 |
JP7103791B2 (ja) | 2017-01-20 | 2022-07-20 | ロベルト・ボッシュ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング | 車両の周辺を表示する方法 |
JP2020162089A (ja) * | 2019-03-28 | 2020-10-01 | 株式会社デンソーテン | 画像生成装置および画像生成方法 |
JP7318265B2 (ja) | 2019-03-28 | 2023-08-01 | 株式会社デンソーテン | 画像生成装置および画像生成方法 |
CN111429469A (zh) * | 2019-04-17 | 2020-07-17 | 杭州海康威视数字技术股份有限公司 | 泊位位置确定方法、装置、电子设备及存储介质 |
CN111429469B (zh) * | 2019-04-17 | 2023-11-03 | 杭州海康威视数字技术股份有限公司 | 泊位位置确定方法、装置、电子设备及存储介质 |
EP4258653A1 (en) | 2022-04-06 | 2023-10-11 | Canon Kabushiki Kaisha | Image processing device that can measure distance to object, movable apparatus, image processing method, and storage medium |
Also Published As
Publication number | Publication date |
---|---|
EP2863365A3 (en) | 2015-06-03 |
US20150098623A1 (en) | 2015-04-09 |
JP6149676B2 (ja) | 2017-06-21 |
EP2863365A2 (en) | 2015-04-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6149676B2 (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
US11373357B2 (en) | Adjusting depth of augmented reality content on a heads up display | |
US9633266B2 (en) | Image processing apparatus and method that synthesizes an all-round image of a vehicle's surroundings | |
JP5369465B2 (ja) | 車両用画像処理装置、車両用画像処理方法、車両用画像処理プログラム | |
JP5013773B2 (ja) | 車載画像処理装置及びその視点変換情報生成方法 | |
JP2015074436A (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
KR20120140515A (ko) | 차량 주변 시각화를 위한 3차원 영상 합성장치 및 그 방법 | |
JP5299296B2 (ja) | 車両周辺画像表示装置及び車両周辺画像表示方法 | |
JP2010129063A (ja) | 運転模擬装置、広角カメラ映像模擬装置および画像変形合成装置 | |
JP2020107089A (ja) | 画像処理装置及び画像処理方法 | |
WO2023276567A1 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US11580689B2 (en) | Information display control device, method, and non-transitory computer-readable recording medium | |
CN115222815A (zh) | 障碍物距离检测方法、装置、计算机设备和存储介质 | |
JP2023077658A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
KR102329031B1 (ko) | 3D 모델링 가시화 시스템의 최대 Zoom 레벨을 결정 방법 | |
JP2013207622A (ja) | キャリブレーション装置及びキャリブレーション方法 | |
JP6060612B2 (ja) | 移動面状況認識装置、移動体、及びプログラム | |
JP6385621B2 (ja) | 画像表示装置、画像表示方法及び画像表示プログラム | |
CN118397200B (zh) | 用于自动泊车过程中场景重建的方法、装置和设备 | |
CN115665400B (zh) | 增强现实抬头显示成像方法、装置、设备以及存储介质 | |
JP6948363B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN118397200A (zh) | 用于自动泊车过程中场景重建的方法、装置和设备 | |
CN110942498A (zh) | 一种建立hud系统图像翘曲形变模型的方法 | |
JPWO2019058734A1 (ja) | 情報表示装置及び方法、並びにプログラム及び記録媒体 | |
JP2002230579A (ja) | 画像作成方法および装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160606 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170328 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170425 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170508 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6149676 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |