JP6805363B2 - 駐車場内に存在する隆起した物体を検出するための方法およびシステム - Google Patents
駐車場内に存在する隆起した物体を検出するための方法およびシステム Download PDFInfo
- Publication number
- JP6805363B2 JP6805363B2 JP2019547762A JP2019547762A JP6805363B2 JP 6805363 B2 JP6805363 B2 JP 6805363B2 JP 2019547762 A JP2019547762 A JP 2019547762A JP 2019547762 A JP2019547762 A JP 2019547762A JP 6805363 B2 JP6805363 B2 JP 6805363B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- parking lot
- video cameras
- cameras
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 34
- 238000004458 analytical method Methods 0.000 claims description 60
- 238000004891 communication Methods 0.000 claims description 18
- 238000007726 management method Methods 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 5
- 238000003384 imaging method Methods 0.000 claims description 2
- 238000004364 calculation method Methods 0.000 claims 2
- 230000008901 benefit Effects 0.000 description 42
- 230000014509 gene expression Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 4
- 238000005286 illumination Methods 0.000 description 4
- 238000003754 machining Methods 0.000 description 4
- 240000004050 Pentaglottis sempervirens Species 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/04—Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/027—Parking aids, e.g. instruction means
- B62D15/0285—Parking performed automatically
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/94—Hardware or software architectures specially adapted for image or video understanding
- G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
- G08G1/096708—Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
- G08G1/096708—Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
- G08G1/096725—Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information generates an automatic action on the vehicle control
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
- G08G1/096733—Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place
- G08G1/096758—Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place where no selection takes place on the transmitted or the received information
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
- G08G1/096766—Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
- G08G1/096775—Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is a central station
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30264—Parking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/16—Image acquisition using multiple overlapping images; Image stitching
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Life Sciences & Earth Sciences (AREA)
- Atmospheric Sciences (AREA)
- Software Systems (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Databases & Information Systems (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
- Closed-Circuit Television Systems (AREA)
Description
一態様によれば、駐車場内で空間的に分散して配置されており、それぞれの視野が重畳領域内で重なり合っている少なくとも2つのビデオカメラを使用して、駐車場内に存在する隆起した物体を検出するための方法であって、
− ビデオカメラによって重畳領域のそれぞれのビデオ画像を撮影するステップと、
− 撮影されたビデオ画像内で隆起した物体を検出するために、撮影されたビデオ画像を分析するステップと
を含んでおり、
− この分析が、専らビデオカメラの少なくとも1つによりビデオカメラ内部で実行される方法が提供される。
もう1つの態様によれば、コンピュータ上で、とりわけビデオカメラのプロセッサ上でコンピュータプログラムが実施される場合の、駐車場内に存在する隆起した物体を検出するための方法を実行するためのプログラムコードを含んでいるコンピュータプログラムが提供される。
とりわけ、少なくとも2つのビデオカメラを使用することで冗長性がもたらされる。とりわけ、1つのビデオカメラの誤りを別のビデオカメラによって補うことができる。
表現「ビデオカメラの少なくとも1つの」は、とりわけ以下の表現、すなわち「ビデオカメラの1つだけ」、「ビデオカメラの正確に1つ」、「複数のビデオカメラ」、および「すべてのビデオカメラ」を含んでいる。これはつまりとりわけ、1つの、特に1つだけの、または複数のビデオカメラ上で分析が実行されることを意味している。つまり分析は1つまたは複数のビデオカメラによって実行される。
プロセッサは、例えばビデオ画像加工プログラムを実施するように形成されている。
本明細書の意味における駐車場は、とりわけ自動車用の駐車場である。この駐車場は、例えば駐車場ビルまたは地下駐車場である。検出すべき物体は、例えば駐車場の走行路内に存在している。
隆起した物体は、例えば、駐車場の床上に、例えば車道上に、または駐車場の走行領域内に、つまり例えば走行路内に存在している。つまり隆起した物体は例えば駐車場の走行路内に存在している。
− 撮影されたビデオ画像を修正するステップと、
− 撮影された重畳領域内の違いを認識するために、それぞれの修正されたビデオ画像を相互比較するステップと、
− 比較に基づいて隆起した物体を検出するステップと
が規定されている。
重畳領域のすべての修正されたビデオ画像が違いを有していない、つまり同じもしくは同一であるか、または最大で予め決定された許容値でもって互いに異なっている違いを有している場合、重畳領域とビデオカメラとの間のそれぞれの視軸上には隆起した物体が存在していないことを前提とすることができる。しかし、重畳領域とビデオカメラの1つとの間の視軸上に隆起した物体が存在している場合には、この1つのビデオカメラは、そのほかのビデオカメラと同じものは見ない。つまり、対応する修正されたビデオ画像は、そのほかのビデオカメラの修正されたビデオ画像とは、予め決定された許容値より大きな違いで異なっている。つまりこれにより、隆起した物体を効率的に検出することができる。
これにより例えば、効率的に冗長性がつくられるという技術的利点がもたらされる。つまりとりわけ、ビデオカメラの各々が分析の独自の結果を提供する。ビデオカメラの1つが故障していたとしても、そのほかのビデオカメラ上で分析の結果が提供される。これはつまり、1つのビデオカメラが故障しても依然として隆起した物体を検出できることを意味している。
一実施形態では、駐車場内に多数のビデオカメラが空間的に分散して配置されており、この場合、多数のビデオカメラから、それぞれの視野が重畳領域内で重なり合っている少なくとも2つのビデオカメラを、使用すべきビデオカメラとして選択する。
共通の一領域、ここでは重畳領域を監視する少なくとも2つのビデオカメラを選択することで、とりわけ、隆起した物体の、信頼性が高くロバスト性のある検出をもたらすことができる。
とりわけ、少なくとも2つのビデオカメラを使用することで冗長性がもたらされる。とりわけ、1つのビデオカメラの誤りを別のビデオカメラによって補うことができる。
一実施形態では、撮影されたビデオ画像の分析を、選択されたビデオカメラの1つまたは複数によりビデオカメラ内部で実行する。とりわけ、すべての選択されたビデオカメラによって分析を実行する。とりわけ、選択されたビデオカメラの1つまたは複数だけによって分析を実行する。
さらなる一実施形態によれば、撮影されたビデオ画像の分析が、選択されていないビデオカメラの1つまたは複数によりビデオカメラ内部で実行される。とりわけ、すべての選択されていないビデオカメラによって分析を実行する。とりわけ、選択されていないビデオカメラの1つまたは複数だけによって分析を実行する。
一実施形態では、撮影されたビデオ画像の分析を、選択されたビデオカメラの1つまたは複数によりビデオカメラ内部で実行することも、選択されていないビデオカメラの1つまたは複数によりビデオカメラ内部で実行することも行われる。
一実施形態によれば、ビデオカメラが相互間で無線および/または有線で通信する。
通信ネットワークは、例えばWLANネットワークおよび/または移動無線通信ネットワークを含んでいる。無線通信は、例えば無線通信技術、例えばWLANおよび/または移動無線に基づく通信を含んでいる。
これにより例えば、この判断のためにビデオカメラ外部の計算容量を提供しなくてよいという技術的利点がもたらされる。
これにより例えば、この判断のためにビデオカメラ内部の計算容量を提供しなくてよいという技術的利点がもたらされる。
これにより例えば、撮影されたビデオ画像が効率的に、分析を実行する1つまたは複数のビデオカメラに提供されるという技術的利点がもたらされる。
これにより例えば、駐車場管理サーバがこの結果に基づいて駐車場を効率的に運用できるという技術的利点がもたらされる。
別の一実施形態によれば、それぞれの視野が重畳領域内で重なり合っているビデオカメラが2つより多い場合、2つより多いビデオカメラからの少なくとも2つのビデオカメラの選択は、2つより多いビデオカメラからの、それぞれの視野の中心を含むそれぞれの真ん中の視野が重畳領域に含まれている1つまたは複数のビデオカメラの選択を含んでいる。
別の一実施形態によれば、それぞれの視野が重畳領域内で重なり合っているビデオカメラが2つより多い場合、2つより多いビデオカメラからの少なくとも2つのビデオカメラの選択は、2つより多いビデオカメラからの、重畳領域をそれぞれ向かい合う側から撮影する複数のビデオカメラの選択を含んでいる。
別の一実施形態によれば、それぞれの視野が重畳領域内で重なり合っているビデオカメラが2つより多い場合、2つより多いビデオカメラからの少なくとも2つのビデオカメラの選択は、2つより多いビデオカメラからの、ある特定の最低解像度および/または撮影されたビデオ画像を加工するためのある特定の加工時間を有する1つまたは複数のビデオカメラの選択を含んでいる。
さらなる一実施形態によれば、それぞれ視野が重畳領域内で重なり合っているビデオカメラが2つより多い場合、2つより多いビデオカメラからの少なくとも2つのビデオカメラの選択は、2つより多いビデオカメラからの、相互間で最適に較正されている1つまたは複数のビデオカメラの選択を含んでいる。
一実施形態によれば、それぞれの視野が重畳領域内で重なり合っているビデオカメラが2つより多い場合、2つより多いビデオカメラからの少なくとも2つのビデオカメラの選択は、2つより多いビデオカメラからの、予め決定された最短時間内にビデオ画像を分析できる1つまたは複数のビデオカメラの選択を含んでいる。
さらなる一実施形態では、それぞれの視野が重畳領域内で重なり合っているビデオカメラが2つより多い場合に、2つより多いビデオカメラから正確に2つのビデオカメラを選択する。
これにより例えば、重畳領域を効率的に捕捉できるという技術的利点がもたらされる。これにより例えば、高い冗長性およびそれに伴う誤りの低減、とりわけ最小化をもたらし得るという技術的利点がもたらされる。
一実施形態によれば、最初にどのビデオカメラが駐車場のどの領域を撮影できるかが確定され、最初の確定の結果が、ビデオカメラのどれが駐車場のどの領域を撮影できるかの確定を繰り返すことによって点検される。
これにより例えば、ビデオカメラポジションの変化が分析を歪曲するあるいは困難にする可能性を効率的に阻めるという技術的利点がもたらされる。
これにより例えば、物体を効率的に検出できるという技術的利点がもたらされる。というのも物体の1つの側が、好ましくはまたは物体のそのほかの側とは違うように照明されていれば、効率的に、撮影されたビデオ画像内の違いを特に容易かつ効率的に認識できるからである。
これにより例えば、走行領域を効率的に監視できるという技術的利点がもたらされる。
一実施形態によれば、比較は、明るさの違いを1つの違いとして認識するために、修正されたビデオ画像のそれぞれの明るさの比較を含んでいる。
一実施形態によれば、駐車場は、駐車場内に存在する隆起した物体を検出するための方法を実施または実行するように構成または形成されている。
システムの技術的機能性は方法の対応する技術的機能性から類似的に明らかであり、およびその逆である。
一実施形態によれば、少なくともn個のビデオカメラが設けられており、ここでnは3以上である。
一実施形態では、重畳領域を一方向だけから照明する。
一実施形態によれば、少なくともn個のビデオカメラを使用し、ここでnは3以上である。
一実施形態では、それぞれの視野がそれぞれ重畳領域内で重なり合っている複数のビデオカメラが設けられており、あるいは設けられる。これはつまり、とりわけここでは複数の重畳領域を複数のビデオカメラによって捕捉、つまりとりわけ監視することを意味している。
一実施形態によれば、1つあるいは複数あるいはすべてのビデオカメラが、駐車場の床に対して少なくとも2m、とりわけ2.5mの高さに配置されている。
一実施形態によれば、分析を実行する1つまたは複数のビデオカメラを、1つまたは複数の加工基準に応じて選択する。
さらに1つの実施形態によれば、1つまたは複数の加工基準を、加工基準の以下の群、すなわちビデオカメラのそれぞれの計算容量、ビデオカメラのそれぞれのメモリ使用量、ビデオカメラへのそれぞれの伝送帯域幅、ビデオカメラのそれぞれの電力消費量、ビデオカメラのそれぞれの計算能力、ビデオカメラのそれぞれの計算速度、ビデオカメラのそれぞれのその時々の運転モードから選択する。
一実施形態では、加工基準が予め決定された加工基準閾値と比較され、比較の結果に応じて1つまたは複数のビデオカメラを選択する。
例えば、それぞれのメモリ使用量がメモリ使用量閾値より小さいまたはそれ以下であるビデオカメラだけを選択する。
例えば、それぞれの電力消費量が電力消費量閾値より小さいまたはそれ以下であるビデオカメラだけを選択する。
例えば、それぞれの計算速度が計算速度閾値より大きいまたはそれ以上であるビデオカメラだけを選択する。
図1は、駐車場内で空間的に分散して配置されており、それぞれの視野が重畳領域内で重なり合っている少なくとも2つのビデオカメラを使用して、駐車場内に存在する隆起した物体を検出するための方法のフロー図を示している。
− ビデオカメラによって重畳領域のそれぞれのビデオ画像を撮影するステップ101と、
− 撮影されたビデオ画像内で隆起した物体を検出するために、撮影されたビデオ画像を分析するステップ103と
を含んでおり、
− この分析103は、専らビデオカメラの少なくとも1つによりビデオカメラ内部で実行される。
図2は、駐車場内に存在する隆起した物体を検出するためのシステム201を示している。システム201は、駐車場内に存在する隆起した物体を検出するための方法を実施または実行するために形成されている。
− それぞれの視野が重畳領域内で重なり合っている多数のビデオカメラ203から、少なくとも2つのビデオカメラ203を選択するステップと、
− 選択されたビデオカメラ203によって、重畳領域のそれぞれのビデオ画像を撮影するステップと、
− 撮影されたビデオ画像内で隆起した物体を検出するために、1つのプロセッサ205によってまたは複数のプロセッサ205によって、撮影されたビデオ画像を分析するステップと
を実行するように形成されている。
図3は、駐車場301を示している。
図4は、駐車場の床401を監視する第1のビデオカメラ403および第2のビデオカメラ405を示している。両方のビデオカメラ403、405は、例えば天井(図示されていない)に配置されている。
床401上に隆起した物体は存在していない。これはつまり、両方のビデオカメラ403、405が同じ重畳領域411を見るまたは捕捉することを意味している。これはつまり、両方のビデオカメラ403、405が重畳領域411の同じ画像情報を認識するまたは見ることを意味している。
図5は、隆起した物体501を捕捉する際の両方のビデオカメラ403、405を示している。隆起した物体501は、向かい合う側面503、505を有している。側面503を以下では(紙面に対して)右側面と言う。側面505を以下では(紙面に対して)左側面と言う。
第1のビデオカメラ403は、隆起した物体501の左側面505を捕捉する。第2のビデオカメラ405は、隆起した物体501の右側面503を捕捉する。
隆起していない、つまり二次元のまたは平たい物体が床401上に存在している場合、相応に修正されたビデオ画像は一般的に、予め設定された許容範囲内では互いに異なっていない。このような二次元の物体は、例えば落ち葉、紙、または枯れ枝などである。このようなケースで、場合によっては違い不足(違いが予め設定された許容値より小さいまたはそれ以下である)に基づき、修正されたビデオ画像内で検出されない物体が、隆起した物体ではないが、確かに床401上に存在しているということは、ここでは、このような隆起していない物体の上を一般的に問題なく自動車が走行してよいあるいは走行できるという点で、安全性の理由から重要ではない。自動車は、枯れ枝または紙の上を、例えば歩行者または自転車または動物または自動車であり得る隆起した物体とは違い、危険な状況または衝突に至ることなく走行できる。隆起した物体と自動車は衝突すべきではない。
よって本発明によるコンセプトは、ビデオ画像の分析を専ら複数のビデオカメラによってまたはビデオカメラの1つによってそれ自体で実行することに基づいている。ビデオカメラはその撮影したビデオ画像を、分析を実行する1つまたは複数のビデオカメラに送信する。この送信は、例えば無線および/または有線の通信ネットワークを含む通信ネットワークを介したビデオ画像の送信などを含んでいる。
つまり本発明は、とりわけ、例えば駐車場ビルとしてまたは地下駐車場として形成され得る駐車場内で、例えば走行領域の各々の地点が少なくとも2つ、例えば少なくとも3つのビデオカメラによって見られるまたは捕捉されるあるいは監視されるように空間的に分散して配置された複数のビデオカメラを使用するという着想に基づいている。これはつまり、それぞれの視野がそれぞれ重畳領域内で重なり合っており、これらの重畳領域が走行領域をカバーしていることを意味している。撮影されたビデオ画像は、例えば比較の前に修正される。
よって境界面の各々個々の地点から、例えばこの地点を見ている3つのビデオカメラへと視線を辿ることができる。もっと多くのビデオカメラが提供されている場合には、例えば複数のカメラからできるだけ異なる視点を有する3つのビデオカメラを選択する。
こうして例えば1つのビデオカメラは物体の前側を見て、その一方でもう1つのビデオカメラは物体の後ろ側を見る。一般的には、この両方の側は互いに有意に異なっており、したがって、撮影されたビデオ画像が互いに異なっている場合には、隆起した物体を検出することができる。この効果は、例えば、場面、つまり重畳領域を一方の側でより明るく照明することによって強化でき、これにより、隆起した物体の見落としを効率的に排除できる。物体の異なる側が異なって照明されることにより、この物体はより強く照明された側では弱く照明された側より明るく見え、したがってビデオカメラが異なる画像情報を見る。これは単色の物体に対してさえ有効である。
駐車場601は、車道602を横切る方向に配置された複数の駐車位置603を含んでおり、車道602上を第1の自動車605が走行している。第2の自動車607は、駐車位置603の1つに駐車している。
第2の自動車607は出庫しようとしており、これは、符号611が付された矢印によって示唆されている。
ビデオカメラ613は、例えば車道602の端に、それぞれ左右にずれて配置されている。ビデオカメラ613は、例えばそれぞれ駐車位置603の隅に配置されている。
したがってビデオカメラ613により通行を、とりわけ自動走行している自動車の、つまりとりわけ運転者なしで走行している自動車の通行を効率的に監視することができる。
本発明によるコンセプトは、隆起した物体の効率的な検出または認識を可能にすることが有利である。本発明によるコンセプトは、とりわけ明るさの変化または例えば日光の差込みによる明るさの点状の変化に対して非常にロバスト性がある。
Claims (16)
- 駐車場(301)内で空間的に分散して配置されており、それぞれの視野(407、409)が重畳領域(411)内で重なり合っている少なくとも2つのビデオカメラ(203)を使用して、前記駐車場(301)内に存在する隆起した物体(501)を検出するための方法であって、
−前記少なくとも2つのビデオカメラ(203)によって前記重畳領域(411)のそれぞれのビデオ画像を撮影するステップ(101)であって、前記少なくとも2つのビデオカメラ(203)のうちの少なくとも1対のビデオカメラは、前記隆起した物体(501)の進行方向における左右の方向にそれぞれ位置する、ステップ(101)と、
−前記少なくとも2つのビデオカメラのうちの1つまたは複数のビデオカメラ(203)に、当該ビデオカメラ以外のビデオカメラ(203)が、前記撮影されたそれぞれのビデオ画像を送信するステップと、
−前記撮影されたビデオ画像を受信する前記1つまたは複数のビデオカメラ(203)が、専らその内部において、前記撮影されたビデオ画像内で隆起した物体(501)を検出するために、前記撮影されたビデオ画像を分析するステップ(103)と、
を含む、方法。 - 前記駐車場(301)内には光源が備えられており、前記撮影するステップ(101)において、前記少なくとも一対のビデオカメラの一方は、他方のビデオカメラとは異なるように前記光源によって照明された前記重畳領域を撮影する、請求項1に記載の方法。
- 前記分析が、複数のビデオカメラ(203)によって実行され、前記1つまたは複数のビデオカメラ(203)の各々が互いに独立して、前記撮影されたビデオ画像を分析する、請求項1または2に記載の方法。
- 前記駐車場(301)内で多数のビデオカメラ(203)が空間的に分散して配置されており、前記多数のビデオカメラ(203)から、それぞれの視野(407、409)が前記重畳領域(411)内で重なり合っている少なくとも2つのビデオカメラ(203)が、前記使用すべきビデオカメラ(203)として選択される、請求項1から3のいずれか一項に記載の方法。
- 前記撮影されたビデオ画像の前記分析が、前記選択されたビデオカメラ(203)の1つまたは複数によりビデオカメラ内部で実行される、請求項4に記載の方法。
- 前記撮影されたビデオ画像の前記分析が、前記選択されていないビデオカメラ(203)の1つまたは複数によりビデオカメラ内部で実行される、請求項4または5に記載の方法。
- 前記少なくとも2つのビデオカメラ(203)が相互間で無線および/または有線で通信する、請求項1〜6のいずれか一項に記載の方法。
- 前記少なくとも2つのビデオカメラ(203)のどの1つまたは複数により、前記撮影されたビデオ画像の前記分析を実行するのかを判断するために、前記少なくとも2つのビデオカメラ(203)が相互間で通信する、請求項7に記載の方法。
- 前記それぞれ撮影されたビデオ画像を、前記分析を実行する前記1つまたは複数のビデオカメラ(203)へ送信するため、前記少なくとも2つのビデオカメラ(203)が相互間で通信する、請求項7または8に記載の方法。
- 前記分析の結果が前記駐車場(301)の駐車場管理サーバに通信ネットワークを介して送信される、請求項1〜9のいずれか一項に記載の方法。
- 前記分析に基づいて、前記撮影されたビデオ画像内で隆起した物体を検出するために、
−前記撮影されたビデオ画像を修正するステップと、
−前記撮影された重畳領域(411)内の違いを認識するために、前記それぞれの修正されたビデオ画像を相互比較するステップと、
−前記比較に基づいて隆起した物体(501)を検出するステップと、
が提供されている、請求項1〜10のいずれか一項に記載の方法。 - 前記分析を実行する前記1つまたは複数のビデオカメラ(203)が、1つまたは複数の加工基準に応じて選択される、請求項1〜11のいずれか一項に記載の方法。
- 前記1つまたは複数の加工基準が、前記ビデオカメラ(203)のそれぞれの計算容量、前記ビデオカメラ(203)のそれぞれのメモリ使用量、前記ビデオカメラ(203)へのそれぞれの伝送帯域幅、前記ビデオカメラ(203)のそれぞれの電力消費量、前記ビデオカメラ(203)のそれぞれの計算能力、前記ビデオカメラ(203)のそれぞれの計算速度、前記ビデオカメラ(203)のそれぞれのその時々の運転モードからなる群から選択される、請求項12に記載の方法。
- 駐車場(301)内に存在する隆起した物体(501)を検出するためのシステム(201)であって、前記システム(201)が、請求項1〜13のいずれか一項に記載の方法を実行するように形成されている、システム。
- 請求項14に記載の前記システム(201)を含んでいる、駐車場(301)。
- コンピュータ上でコンピュータプログラムが実施される場合の、請求項1〜13のいずれか一項に記載の方法を実行するためのプログラムコードを含んでいる、コンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102016223185.5A DE102016223185A1 (de) | 2016-11-23 | 2016-11-23 | Verfahren und System zum Detektieren eines sich innerhalb eines Parkplatzes befindenden erhabenen Objekts |
DE102016223185.5 | 2016-11-23 | ||
PCT/EP2017/074436 WO2018095612A1 (de) | 2016-11-23 | 2017-09-27 | Verfahren und system zum detektieren eines sich innerhalb eines parkplatzes befindenden erhabenen objekts |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020500389A JP2020500389A (ja) | 2020-01-09 |
JP6805363B2 true JP6805363B2 (ja) | 2020-12-23 |
Family
ID=59974433
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019547762A Active JP6805363B2 (ja) | 2016-11-23 | 2017-09-27 | 駐車場内に存在する隆起した物体を検出するための方法およびシステム |
Country Status (6)
Country | Link |
---|---|
US (1) | US20200050865A1 (ja) |
EP (1) | EP3545505A1 (ja) |
JP (1) | JP6805363B2 (ja) |
CN (1) | CN110114807B (ja) |
DE (1) | DE102016223185A1 (ja) |
WO (1) | WO2018095612A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102016223171A1 (de) * | 2016-11-23 | 2018-05-24 | Robert Bosch Gmbh | Verfahren und System zum Detektieren eines sich innerhalb eines Parkplatzes befindenden erhabenen Objekts |
JP7163669B2 (ja) * | 2018-08-28 | 2022-11-01 | トヨタ自動車株式会社 | 駐車システム |
DE102019207344A1 (de) * | 2019-05-20 | 2020-11-26 | Robert Bosch Gmbh | Verfahren zum Überwachen einer Infrastruktur |
DE102019218479A1 (de) * | 2019-11-28 | 2021-06-02 | Robert Bosch Gmbh | Verfahren und Vorrichtung zur Klassifikation von Objekten auf einer Fahrbahn in einem Umfeld eines Fahrzeugs |
DE102020107108A1 (de) | 2020-03-16 | 2021-09-16 | Kopernikus Automotive GmbH | Verfahren und System zum autonomen Fahren eines Fahrzeugs |
KR102476520B1 (ko) * | 2020-08-11 | 2022-12-12 | 사이클롭스 주식회사 | 복수의 카메라를 활용한 스마트 주차관리 장치 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
IL88806A (en) * | 1988-12-26 | 1991-04-15 | Shahar Moshe | Automatic multi-level parking garage |
US20010020299A1 (en) * | 1989-01-30 | 2001-09-06 | Netergy Networks, Inc. | Video communication/monitoring apparatus and method therefor |
JPH05265547A (ja) * | 1992-03-23 | 1993-10-15 | Fuji Heavy Ind Ltd | 車輌用車外監視装置 |
US8564661B2 (en) * | 2000-10-24 | 2013-10-22 | Objectvideo, Inc. | Video analytic rule detection system and method |
WO2002071023A1 (fr) * | 2001-03-06 | 2002-09-12 | Toray Industries, Inc. | Procede et dispositif de controle, et procede de fabrication d'un panneau d'affichage |
US8154616B2 (en) * | 2007-01-16 | 2012-04-10 | Panasonic Corporation | Data processing apparatus and method, and recording medium |
KR101182853B1 (ko) * | 2008-12-19 | 2012-09-14 | 한국전자통신연구원 | 자동 주차 대행 시스템 및 방법 |
JP4957850B2 (ja) * | 2010-02-04 | 2012-06-20 | カシオ計算機株式会社 | 撮像装置、警告方法、および、プログラム |
JP5052707B2 (ja) * | 2010-06-15 | 2012-10-17 | 三菱電機株式会社 | 車両周辺監視装置 |
AU2012221159B2 (en) * | 2011-02-21 | 2015-11-26 | Stratech Systems Limited | A surveillance system and a method for detecting a foreign object, debris, or damage in an airfield |
AU2013352495B2 (en) * | 2012-11-27 | 2016-12-22 | Cloudparc, Inc. | Controlling use of a single multi-vehicle parking space using multiple cameras |
US9488483B2 (en) * | 2013-05-17 | 2016-11-08 | Honda Motor Co., Ltd. | Localization using road markings |
EP2922042A1 (fr) * | 2014-03-21 | 2015-09-23 | SP Financial Holding SA | Procédé et système de gestion d'une aire de stationnement |
US9858816B2 (en) * | 2014-05-21 | 2018-01-02 | Regents Of The University Of Minnesota | Determining parking space occupancy using a 3D representation |
DE102015201209A1 (de) | 2015-01-26 | 2016-07-28 | Robert Bosch Gmbh | Valet Parking-Verfahren und Valet-Parking System |
-
2016
- 2016-11-23 DE DE102016223185.5A patent/DE102016223185A1/de active Pending
-
2017
- 2017-09-27 WO PCT/EP2017/074436 patent/WO2018095612A1/de unknown
- 2017-09-27 EP EP17777013.8A patent/EP3545505A1/de not_active Withdrawn
- 2017-09-27 US US16/346,211 patent/US20200050865A1/en not_active Abandoned
- 2017-09-27 CN CN201780072507.XA patent/CN110114807B/zh active Active
- 2017-09-27 JP JP2019547762A patent/JP6805363B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
CN110114807B (zh) | 2022-02-01 |
US20200050865A1 (en) | 2020-02-13 |
DE102016223185A1 (de) | 2018-05-24 |
CN110114807A (zh) | 2019-08-09 |
WO2018095612A1 (de) | 2018-05-31 |
JP2020500389A (ja) | 2020-01-09 |
EP3545505A1 (de) | 2019-10-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6805363B2 (ja) | 駐車場内に存在する隆起した物体を検出するための方法およびシステム | |
JP6805364B2 (ja) | 駐車場内に存在する隆起した物体を検出するための方法およびシステム | |
JP7009987B2 (ja) | 自動運転システム及び自動運転方法 | |
WO2018005441A2 (en) | Controlling host vehicle based on detected parked vehicle characteristics | |
US9683861B2 (en) | Estimated route presentation apparatus and estimated route presentation method | |
JP6806920B2 (ja) | 駐車場内に存在する隆起した物体を検出するための方法およびシステム | |
CN103917411B (zh) | 用于分组照明单元的方法和设备 | |
KR20200071656A (ko) | 교통신호 제어 장치 및 방법 | |
US20220410931A1 (en) | Situational awareness in a vehicle | |
US10733459B2 (en) | Image processing device, image processing method, computer-readable recording medium, object recognition device, device control system, and movable body | |
CN108091161B (zh) | 用于探测位于停车场内的突起对象的方法和系统 | |
US11663834B2 (en) | Traffic signal recognition method and traffic signal recognition device | |
JP2020166409A (ja) | 車載装置、車載システムおよび周辺監視方法 | |
JP5434277B2 (ja) | 走行支援装置および走行支援方法 | |
CN111739332B (zh) | 一种停车场管理系统 | |
JP7472832B2 (ja) | 車両制御装置、車両制御方法及び車両制御用コンピュータプログラム | |
US11769337B2 (en) | Traffic signal recognition method and traffic signal recognition device | |
CN115179863A (zh) | 移动体的控制装置及控制方法、存储介质以及车辆 | |
US20220398923A1 (en) | Traffic Signal Recognition Method and Traffic Signal Recognition Device | |
US11417115B2 (en) | Obstacle recognition device | |
US20190188500A1 (en) | Apparatus for monitoring object in low light environment and monitoring method thereof | |
KR102203218B1 (ko) | 영상 정보 공유 방법 및 장치 | |
KR20220052394A (ko) | 주차유도 방법, 장치 및 시스템 | |
KR20230083067A (ko) | 멀티 카메라 기반 차량 트래킹 방법 및 시스템 | |
CN115179864A (zh) | 移动体的控制装置及控制方法、存储介质以及车辆 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190607 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20200218 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200806 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200813 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201021 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201130 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201203 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6805363 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |