JP6711395B2 - 画像処理装置、撮像装置、移動体機器制御システム、移動体、画像処理方法、及びプログラム - Google Patents
画像処理装置、撮像装置、移動体機器制御システム、移動体、画像処理方法、及びプログラム Download PDFInfo
- Publication number
- JP6711395B2 JP6711395B2 JP2018505308A JP2018505308A JP6711395B2 JP 6711395 B2 JP6711395 B2 JP 6711395B2 JP 2018505308 A JP2018505308 A JP 2018505308A JP 2018505308 A JP2018505308 A JP 2018505308A JP 6711395 B2 JP6711395 B2 JP 6711395B2
- Authority
- JP
- Japan
- Prior art keywords
- road surface
- image
- distance
- unit
- frequency
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 92
- 238000003384 imaging method Methods 0.000 title claims description 32
- 238000003672 processing method Methods 0.000 title claims description 3
- 238000000034 method Methods 0.000 claims description 50
- 238000001514 detection method Methods 0.000 claims description 18
- 238000005070 sampling Methods 0.000 claims description 11
- 238000004441 surface measurement Methods 0.000 description 59
- 238000010586 diagram Methods 0.000 description 26
- 238000010191 image analysis Methods 0.000 description 18
- 238000004364 calculation method Methods 0.000 description 13
- 238000000605 extraction Methods 0.000 description 12
- 239000000284 extract Substances 0.000 description 11
- 238000009499 grossing Methods 0.000 description 7
- 230000001502 supplementing effect Effects 0.000 description 7
- 239000013589 supplement Substances 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000000052 comparative effect Effects 0.000 description 4
- 230000001276 controlling effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 230000004313 glare Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/593—Depth or shape recovery from multiple images from stereo images
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30181—Earth observation
- G06T2207/30192—Weather; Meteorology
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30261—Obstacle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
Description
前記垂直方向分布データにおける頻度が閾値以上であり垂直方向の高さが最も低い標本点に応じた路面と、前記垂直方向分布データにおける頻度の最も多い最頻点に基づく路面であって、当該路面が不適切と判定された場合は平坦な路面のデータが設定されたデフォルト路面または以前のフレームにて推定された路面のデータに基づいて補間された路面と、を推定する推定部と、前記推定部により推定された各路面の傾きの差が所定の閾値以上の場合に、傾きが小さい方の路面に決定する決定部と、を備える。
[第1の実施形態]
〈車載機器制御システムの構成〉
図1は、本発明の実施形態に係る移動体機器制御システムとしての車載機器制御システムの構成を示す図である。
図2は、撮像ユニット500及び画像解析ユニット600の構成を示す図である。
視差画像生成部11は、視差画像データ(視差画像情報)を生成する視差画像生成処理を行う。なお、視差画像生成部11は、例えば視差演算部511(図2)によって構成される。
Vマップ生成部12は、視差画素データに基づき、Vマップ(V-Disparity Map、「垂直方向分布データ」の一例)を生成するVマップ生成処理を実行する。視差画像データに含まれる各視差画素データは、x方向位置とy方向位置と視差値dとの組(x,y,d)で示される。これを、X軸にd、Y軸にy、Z軸に頻度fを設定した三次元座標情報(d,y,f)に変換したもの、又はこの三次元座標情報(d,y,f)から所定の頻度閾値を超える情報に限定した三次元座標情報(d,y,f)を、視差ヒストグラム情報として生成する。本実施形態の視差ヒストグラム情報は、三次元座標情報(d,y,f)からなり、この三次元ヒストグラム情報をX−Yの2次元座標系に分布させたものを、Vマップと呼ぶ。
路面推定部13は、視差画像生成部11により生成された視差画像に基づき、路面を推定(検出)する。図3に示すように、路面推定部13は、第1の路面推定部13a、及び第2の路面推定部13bを有する。なお、以下では、路面推定部13は、2つの方式で路面を推定する例について説明するが、路面推定部13は、3以上の方式で路面を推定してもよい。
第1の路面推定部13aは、標本点抽出部131、外れ点除去部132、路面形状検出部133、路面補足部134、スムージング処理部135、路面決定部136、及び路面高さテーブル算出部15を有する。
標本点抽出部131は、Vマップ生成部12により生成されたVマップから、路面の推定に用いる標本点を抽出する。
図12は、第2のセグメントから、標本点を抽出する処理の他の例を説明する図である。
外れ点除去部132は、標本点抽出部131により抽出された標本点のうち、直線近似に適さない点を除外する。
路面形状検出部133は、Vマップ生成部12により生成されたVマップの各セグメントから、標本点抽出部131により抽出され、外れ点除去部132により除去されていない標本点に基づき、路面の形状(位置、高さ)を検出する。
路面補足部134は、路面形状検出部133により検出(推定)された路面、または、後述する路面決定部14により選択された路面が不適切か否かを判定し、不適切と判定した場合は、路面を補足する。
スムージング処理部135は、各セグメントで推定された各路面を、当該各路面が連続するように修正する。スムージング処理部135は、隣り合う2つのセグメントにおいてそれぞれ推定された各路面のうち、一方の路面の終点(端点)と、他方の路面の始点(端点)が一致するよう、各路面の傾きと切片を変更する。
第2の路面推定部13bは、第1の路面推定部13aとは異なる方式により、路面を推定する。
路面決定部14は、第1の路面推定部13a、及び第2の路面推定部13bにより各々推定された路面に基づき、採用する路面のデータを決定する。
ここで、図17Bに示すように、H1は、あるセグメント573における第1の路面572aの終点のY座標と、第2の路面572bの終点のY座標の差である。H2は、当該あるセグメントにおける第1の路面572aの始点のY座標と、第2の路面572bの始点のY座標の差である。A及びBは所定の定数である。
あるセグメントにおける第1の路面と第2の路面の傾きが異なる場合、上述した第1の路面が、路面上に位置する先行車両等の物体の視差により、上方向に引っ張られている可能性がある。または、上述した第2の路面が、図7Bに示すように、水たまり等による照り返し504により、下方向に引っ張られている可能性がある。
上述した実施形態では、路面決定部14は、第1の路面と第2の路面の傾きに基づいて、採用する路面を選択していた。これに代えて、または加えて、路面決定部14は、直線近似により第1の路面と第2の路面を推定した際の各々の信頼度(相関係数)に基づいて、採用する路面を選択してもよい。この場合、例えば、第1の路面推定部13a、及び第2の路面推定部13bは、抽出した各標本点に基づいて最小二乗法により近似直線を算出した際、当該近似直線と各標本点との相関係数に基づくスコアを算出する。そして、路面決定部14は、第1の路面のスコアと第2の路面のスコアに応じて、採用する路面を選択する。この変形例を、上述した路面決定処理に加える場合は、例えば、図16のステップS36の処理に代えて、この変形例に係る処理を実行してもよい。
路面高さテーブル算出部15は、スムージング処理部135にて修正された各セグメントにおける路面に基づいて、路面高さ(自車両の真下の路面部分に対する相対的な高さ)を算出してテーブル化する路面高さテーブル算出処理を行う。
〈クラスタリング、棄却、トラッキング〉
クラスタリング部16は、視差画像データに含まれる各視差画素データにおけるx方向位置とy方向位置と視差値dとの組(x,y,d)を、X軸にx、Y軸にd、Z軸に頻度を設定し、X−Yの2次元ヒストグラム情報(頻度Uマップ)を作成する。
制御部19は、クラスタリング部16による、物体の検出結果に基づいて、例えば、自車両100の運転者へ警告を報知したり、自車両のハンドルやブレーキを制御したりするなどの走行支援制御を行う。
[第2の実施形態]
第1の実施形態では、路面決定部14は、第1の路面と第2の路面の傾きに基づいて、採用する路面を選択していた。第2の実施形態では、路面決定部14は、第1の路面と第2の路面を含む所定の領域における視差点の分布形状や数に基づき、採用する路面を選択する。なお、第2の実施形態は一部を除いて第1の実施形態と同様であるため、適宜説明を省略する。
第2の実施形態によれば、第1の実施形態と同様の効果を得られる。
[第3の実施形態]
第3の実施形態では、路面決定部14は、撮影画像(輝度画像)または視差画像の所定領域内を画像認識し、画像認識の結果に基づいて、採用する路面を選択する。なお、第3の実施形態は一部を除いて第1の実施形態と同様であるため、適宜説明を省略する。
雨天時の路面の照り返し等により、視差にノイズが発生すると、推定される路面が正解に対して低すぎたり、逆に高すぎたりする問題が発生する。推定される路面が低すぎる場合、路面の一部を障害物と誤認識する場合がある。推定される路面が高すぎる場合、推定される路面よりも低い障害物等を検出できない場合がある。
100 自車両
101 撮像ユニット
103 表示モニタ
106 車両走行制御ユニット(「制御部」の一例)
11 視差画像生成部(「距離画像生成部」の一例)
12 Vマップ生成部(「生成部」の一例)
13 路面推定部(「推定部」の一例)
13a 第1の路面推定部
13b 第2の路面推定部
131 標本点抽出部
132 外れ点除去部
133 路面形状検出部
134 路面補足部
135 スムージング処理部
14 路面決定部(「決定部」の一例)
15 路面高さテーブル算出部
16 クラスタリング部(「物体検出部」の一例)
17 棄却部
18 トラッキング部
19 制御部
2 撮像装置
510a,510b 撮像部
510 処理ハードウェア部
600 画像解析ユニット(「画像処理装置」の一例)
Claims (14)
- 複数の撮像部で各々撮影された複数の撮影画像における路面の距離に応じた距離値を有する距離画像から、前記距離画像の垂直方向に対する距離値の頻度の分布を示す垂直方向分布データを生成する生成部と、
前記垂直方向分布データにおける頻度が閾値以上であり垂直方向の高さが最も低い標本点に応じた路面と、前記垂直方向分布データにおける頻度の最も多い最頻点に基づく路面であって、当該路面が不適切と判定された場合は平坦な路面のデータが設定されたデフォルト路面または以前のフレームにて推定された路面のデータに基づいて補間された路面とを推定する推定部と、
前記推定部により推定された各路面の傾きの差が所定の閾値以上の場合に、傾きが小さい方の路面に決定する決定部と、
を備えることを特徴とする画像処理装置。 - 複数の撮像部で各々撮影された複数の撮影画像における路面の距離に応じた距離値を有する距離画像から、前記距離画像の垂直方向に対する距離値の頻度の分布を示す垂直方向分布データを生成する生成部と、
前記垂直方向分布データにおける頻度が閾値以上であり垂直方向の高さが最も低い標本点に応じた路面と前記垂直方向分布データにおける頻度の最も多い最頻点に基づく路面であって、当該路面が不適切と判定された場合は平坦な路面のデータが設定されたデフォルト路面または以前のフレームにて推定された路面のデータに基づいて補間された路面とを推定する推定部と、
前記推定部により最小二乗法による直線近似された際の路面の相関係数に基づいて、路面を決定する決定部と、
を備えることを特徴とする画像処理装置。 - 複数の撮像部で各々撮影された複数の撮影画像における路面の距離に応じた距離値を有する距離画像から、前記距離画像の垂直方向に対する距離値の頻度の分布を示す垂直方向分布データを生成する生成部と、
前記垂直方向分布データにおける頻度が閾値以上であり垂直方向の高さが最も低い標本点に応じた路面と前記垂直方向分布データにおける頻度の最も多い最頻点に基づく路面であって、当該路面が不適切と判定された場合は平坦な路面のデータが設定されたデフォルト路面または以前のフレームにて推定された路面のデータに基づいて補間された路面とを推定する推定部と、
前記推定部により推定された各路面を含む所定の領域における、所定値以上の距離値を有する画素の数または密度が所定の閾値以上である場合に、高さが高い方の路面に決定する決定部と、
を備えることを特徴とする画像処理装置。 - 複数の撮像部で各々撮影された複数の撮影画像における路面の距離に応じた距離値を有する距離画像から、前記距離画像の垂直方向に対する距離値の頻度の分布を示す垂直方向分布データを生成する生成部と、
前記垂直方向分布データにおける頻度が閾値以上であり垂直方向の高さが最も低い標本点に応じた路面と、前記垂直方向分布データにおける頻度の最も多い最頻点に基づく路面であって、当該路面が不適切と判定された場合は平坦な路面のデータが設定されたデフォルト路面または以前のフレームにて推定された路面のデータに基づいて補間された路面とを推定する推定部と、
前記推定部により推定された各路面を含む所定の領域における、所定値以上の距離値を有する画素の分布形状が、視差が大きく高さが高い部分、または視差が小さく高さが低い部分の分布が所定値以下である場合に、高さが低い方の路面に決定する決定部と、
を備えることを特徴とする画像処理装置。 - 複数の撮像部で各々撮影された複数の撮影画像における路面の距離に応じた距離値を有する距離画像から、前記距離画像の垂直方向に対する距離値の頻度の分布を示す垂直方向分布データを生成する生成部と、
前記垂直方向分布データにおける頻度が閾値以上であり垂直方向の高さが最も低い標本点に応じた路面と、前記垂直方向分布データにおける頻度の最も多い最頻点に基づく路面であって、当該路面が不適切と判定された場合は平坦な路面のデータが設定されたデフォルト路面または以前のフレームにて推定された路面のデータに基づいて補間された路面と、を推定する推定部と、
前記撮影画像または前記距離画像を画像認識し、路面以外の物体を認識した場合に、高さが低い方の路面に決定する決定部と、
を備えることを特徴とする画像処理装置。 - 複数の撮像部で各々撮影された複数の撮影画像における路面の距離に応じた距離値を有する距離画像から、前記距離画像の垂直方向に対する距離値の頻度の分布を示す垂直方向分布データを生成する生成部と、
前記垂直方向分布データにおける頻度が閾値以上であり垂直方向の高さが最も低い標本点に応じた路面と、前記垂直方向分布データにおける頻度の最も多い最頻点に基づく路面であって、当該路面が不適切と判定された場合は平坦な路面のデータが設定されたデフォルト路面または以前のフレームにて推定された路面のデータに基づいて補間された路面とを推定する推定部と、
前記撮影画像または前記距離画像を画像認識し、雨滴を認識した場合に、高さが高い方の路面に決定する決定部と、
を備えることを特徴とする画像処理装置。 - 複数の撮像部で各々撮影された複数の撮影画像における路面の距離に応じた距離値を有する距離画像から、前記距離画像の垂直方向に対する距離値の頻度の分布を示す垂直方向分布データを生成する生成部と、
前記垂直方向分布データにおける頻度が閾値以上であり垂直方向の高さが最も低い標本点に応じた第2の路面と、前記垂直方向分布データにおける頻度の最も多い最頻点に基づく路面であって、当該路面が不適切と判定された場合は平坦な路面のデータが設定されたデフォルト路面または以前のフレームにて推定された路面のデータに基づいて補間された第1の路面とを推定する推定部と、
前記垂直方向分布データにおける距離値に応じて分割された複数の領域のうちの所定の領域における前記第1の路面の終点の垂直方向位置と前記第2の路面の終点の垂直方向位置の差をH1、前記所定の領域における前記第1の路面の始点の垂直方向位置と前記第2の路面の始点の垂直方向位置の差をH2とし、予め定められた第1の定数をA及び予め定められた第2の定数をBとした場合に、H1>Aかつ、H1/B>H2を満たす場合、前記第1の路面および前記第2の路面のうち傾きが小さい方の路面を前記所定の領域において採用する路面に決定する決定部と、
を備えることを特徴とする画像処理装置。 - 前記推定部は、垂直方向分布データの所定の距離値に対応する所定の領域について複数の路面を推定し、
前記決定部は、推定部により推定された複数の路面から前記所定の領域において採用する路面を決定する
ことを特徴とする請求項1乃至7のいずれか一項に記載の画像処理装置。 - 前記推定部は、垂直方向分布データを距離値に応じて複数の領域に分割し、分割した複数の領域のうちの所定の領域について複数の路面を推定し、
前記決定部は、推定部により推定された複数の路面から前記所定の領域において採用する路面を決定する
ことを特徴とする請求項1乃至7のいずれか一項に記載の画像処理装置。 - 複数の撮像部と、
前記複数の撮像部で各々撮影された複数の撮影画像から、前記複数の撮影画像における物体の視差に応じた距離値を有する距離画像を生成する距離画像生成部と、
請求項1乃至9のいずれか一項に記載の画像処理装置と、
を備える撮像装置。 - 移動体に搭載される、請求項10に記載の撮像装置と、
前記決定部により決定された移動面、及び前記距離画像に基づいて、前記複数の撮影画像における物体を検出する物体検出部と、
前記物体検出部により検出された物体のデータに基づいて、前記移動体の制御を行う制御部と、
を備える移動体機器制御システム。 - 請求項11に記載の移動体機器制御システムを備え、
前記制御部により制御される
移動体。 - コンピュータが、
請求項1乃至7のいずれか一項に記載の画像処理装置の各部の処理を実行する、画像処理方法。 - コンピュータに、
請求項1乃至7のいずれか一項に記載の画像処理装置の各部を実現させるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016053383 | 2016-03-17 | ||
JP2016053383 | 2016-03-17 | ||
PCT/JP2017/002550 WO2017159056A1 (ja) | 2016-03-17 | 2017-01-25 | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017159056A1 JPWO2017159056A1 (ja) | 2019-01-10 |
JP6711395B2 true JP6711395B2 (ja) | 2020-06-17 |
Family
ID=59852078
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018505308A Active JP6711395B2 (ja) | 2016-03-17 | 2017-01-25 | 画像処理装置、撮像装置、移動体機器制御システム、移動体、画像処理方法、及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US10885351B2 (ja) |
EP (1) | EP3432264A4 (ja) |
JP (1) | JP6711395B2 (ja) |
WO (1) | WO2017159056A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017199178A (ja) * | 2016-04-27 | 2017-11-02 | Kyb株式会社 | 路面状態検出装置 |
EP3640108A4 (en) * | 2017-06-15 | 2021-03-17 | Hitachi Automotive Systems, Ltd. | VEHICLE CONTROL DEVICE |
JP7025912B2 (ja) * | 2017-12-13 | 2022-02-25 | 日立Astemo株式会社 | 車載環境認識装置 |
JP7022624B2 (ja) * | 2018-03-13 | 2022-02-18 | 株式会社ディスコ | 位置付け方法 |
JP2020160914A (ja) * | 2019-03-27 | 2020-10-01 | 株式会社豊田自動織機 | 物体検出装置 |
JP7214776B2 (ja) * | 2021-03-25 | 2023-01-30 | 本田技研工業株式会社 | アクティブサスペンション装置、及びサスペンションの制御装置 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007102545A (ja) | 2005-10-05 | 2007-04-19 | Ricoh Co Ltd | 電子文書作成装置、電子文書作成方法及び電子文書作成プログラム |
JP4647515B2 (ja) | 2006-02-20 | 2011-03-09 | 株式会社リコー | 座標検出装置、筆記具および座標入力システム |
EP2602761A4 (en) | 2010-08-03 | 2017-11-01 | Panasonic Intellectual Property Management Co., Ltd. | Object detection device, object detection method, and program |
JP6102088B2 (ja) | 2011-09-01 | 2017-03-29 | 株式会社リコー | 画像投影装置、画像処理装置、画像投影方法、画像投影方法のプログラム及びそのプログラムを記録した記録媒体 |
CN103177236B (zh) * | 2011-12-22 | 2016-06-01 | 株式会社理光 | 道路区域检测方法和装置、分道线检测方法和装置 |
CN103489175B (zh) * | 2012-06-13 | 2016-02-10 | 株式会社理光 | 路面检测方法和装置 |
JP2014131257A (ja) | 2012-11-27 | 2014-07-10 | Ricoh Co Ltd | 画像補正システム、画像補正方法及びプログラム |
CN103854008B (zh) * | 2012-12-04 | 2019-10-18 | 株式会社理光 | 路面检测方法和装置 |
JP6274557B2 (ja) | 2013-02-18 | 2018-02-07 | 株式会社リコー | 移動面情報検出装置、及びこれを用いた移動体機器制御システム並びに移動面情報検出用プログラム |
JP6151150B2 (ja) * | 2013-10-07 | 2017-06-21 | 日立オートモティブシステムズ株式会社 | 物体検出装置及びそれを用いた車両 |
JP5874756B2 (ja) * | 2014-02-07 | 2016-03-02 | トヨタ自動車株式会社 | 区画線検出システム及び区画線検出方法 |
JP6340850B2 (ja) * | 2014-03-18 | 2018-06-13 | 株式会社リコー | 立体物検出装置、立体物検出方法、立体物検出プログラム、及び移動体機器制御システム |
JP6519262B2 (ja) | 2014-04-10 | 2019-05-29 | 株式会社リコー | 立体物検出装置、立体物検出方法、立体物検出プログラム、及び移動体機器制御システム |
JP6550881B2 (ja) | 2014-07-14 | 2019-07-31 | 株式会社リコー | 立体物検出装置、立体物検出方法、立体物検出プログラム、及び移動体機器制御システム |
US20160019429A1 (en) | 2014-07-17 | 2016-01-21 | Tomoko Ishigaki | Image processing apparatus, solid object detection method, solid object detection program, and moving object control system |
-
2017
- 2017-01-25 WO PCT/JP2017/002550 patent/WO2017159056A1/ja active Application Filing
- 2017-01-25 JP JP2018505308A patent/JP6711395B2/ja active Active
- 2017-01-25 EP EP17766064.4A patent/EP3432264A4/en active Pending
-
2018
- 2018-09-11 US US16/127,889 patent/US10885351B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JPWO2017159056A1 (ja) | 2019-01-10 |
EP3432264A4 (en) | 2019-07-10 |
WO2017159056A1 (ja) | 2017-09-21 |
EP3432264A1 (en) | 2019-01-23 |
US10885351B2 (en) | 2021-01-05 |
US20190019044A1 (en) | 2019-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10580155B2 (en) | Image processing apparatus, imaging device, device control system, frequency distribution image generation method, and recording medium | |
JP6711395B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、移動体、画像処理方法、及びプログラム | |
JP6733225B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
US10755116B2 (en) | Image processing apparatus, imaging apparatus, and device control system | |
JP6705496B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、移動体、画像処理方法、及びプログラム | |
JP6769477B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
JP6702340B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
JP6583527B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
JP7206583B2 (ja) | 情報処理装置、撮像装置、機器制御システム、移動体、情報処理方法およびプログラム | |
JP6705497B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、プログラム、及び移動体 | |
JP6816401B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
JP6733302B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
US10628960B2 (en) | Information processing apparatus, imaging apparatus, device control system, moving object, information processing method, and recording medium | |
JP2016206801A (ja) | 物体検出装置、移動体機器制御システム及び物体検出用プログラム | |
JP6763198B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
JP6711128B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
JP2018088234A (ja) | 情報処理装置、撮像装置、機器制御システム、移動体、情報処理方法、及びプログラム | |
EP3287948B1 (en) | Image processing apparatus, moving body apparatus control system, image processing method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A524 | Written submission of copy of amendment under article 19 pct |
Free format text: JAPANESE INTERMEDIATE CODE: A527 Effective date: 20180907 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180907 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191008 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191205 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200128 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200325 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200428 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200511 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6711395 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |