JP7401292B2 - 駐車場管制システム、駐車場管制方法、及びプログラム - Google Patents
駐車場管制システム、駐車場管制方法、及びプログラム Download PDFInfo
- Publication number
- JP7401292B2 JP7401292B2 JP2019230407A JP2019230407A JP7401292B2 JP 7401292 B2 JP7401292 B2 JP 7401292B2 JP 2019230407 A JP2019230407 A JP 2019230407A JP 2019230407 A JP2019230407 A JP 2019230407A JP 7401292 B2 JP7401292 B2 JP 7401292B2
- Authority
- JP
- Japan
- Prior art keywords
- parking lot
- vehicle
- frame image
- dimensional frame
- objects
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 44
- 238000012544 monitoring process Methods 0.000 claims description 33
- 238000004364 calculation method Methods 0.000 claims description 20
- 230000001131 transforming effect Effects 0.000 claims description 3
- 230000008569 process Effects 0.000 description 21
- 238000010586 diagram Methods 0.000 description 20
- 238000012545 processing Methods 0.000 description 20
- 238000004891 communication Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 9
- 238000012015 optical character recognition Methods 0.000 description 8
- 238000004422 calculation algorithm Methods 0.000 description 7
- 230000006399 behavior Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000003973 paint Substances 0.000 description 1
- 230000000452 restraining effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- PICXIOQBANWBIZ-UHFFFAOYSA-N zinc;1-oxidopyridine-2-thione Chemical class [Zn+2].[O-]N1C=CC=CC1=S.[O-]N1C=CC=CC1=S PICXIOQBANWBIZ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/02—Reservations, e.g. for tickets, services or events
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/12—Edge-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07B—TICKET-ISSUING APPARATUS; FARE-REGISTERING APPARATUS; FRANKING APPARATUS
- G07B15/00—Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points
- G07B15/02—Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points taking into account a variable factor such as distance or time, e.g. for passenger transport, parking systems or car rental systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/123—Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams
- G08G1/127—Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams to a central station ; Indicators in a central station
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/14—Traffic control systems for road vehicles indicating individual free spaces in parking areas
- G08G1/145—Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas
- G08G1/148—Management of a network of parking areas
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/625—License plates
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/08—Detecting or categorising vehicles
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Finance (AREA)
- Economics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Marketing (AREA)
- Accounting & Taxation (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Development Economics (AREA)
- Human Resources & Organizations (AREA)
- Quality & Reliability (AREA)
- Operations Research (AREA)
- Entrepreneurship & Innovation (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Multimedia (AREA)
- Traffic Control Systems (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
Description
前記画像取得部は、複数の管制カメラで撮影された駐車場内の対象物の撮影画像を取得する。
前記枠画像生成部は、前記撮影画像に基づいて、前記対象物の外形を表す三次元枠画像を生成する。
前記座標算出部は、前記三次元枠画像に基づいて前記対象物の平面位置座標を算出する。
前記撮影画像に基づいて、前記対象物の外形を表す三次元枠画像を生成し、
前記三次元枠画像に基づいて前記対象物の平面位置座標を算出し、
前記三次元枠画像を前記撮影画像に重畳して管制画面へ表示させる。
前記撮影画像に基づいて、前記対象物の外形を表す三次元枠画像を生成するステップと、
前記三次元枠画像に基づいて前記対象物の平面位置座標を算出するステップと、
前記三次元枠画像を前記撮影画像に重畳して管制画面へ表示させるステップと
をコンピュータシステムに実行させる。
図1は、本発明の一実施形態に係る駐車場管制システムの構成例を示す概略図である。
駐車場管理システム500は、駐車場を利用する利用者から申請される予約の管理、駐車状況の監視、及び駐車場の利用に関する種々の料金の算出等、駐車場に関する種々の処理を実行可能である。
これらの端末及び装置は、ネットワーク1を介して相互に通信可能に接続されている。ネットワーク1は、例えばインターネットや広域通信回線網等により構築される。
その他、任意のWAN(Wide Area Network)やLAN(Local Area Network)等が用いられてよく、ネットワーク1を構築するためのプロトコルは限定されない。
駐車場管制装置5は、駐車場11内に設置される各装置の動作を包括的に制御することが可能である。
また、駐車場管制装置5は、駐車場11内に設置される各装置から種々の情報を集約し、駐車場管理装置7等に送信することが可能である。駐車場管制装置5は、駐車場管理装置7や管理機関端末8等から種々の情報を受信し、種々の動作を実行することが可能である。
また駐車場管制装置5は、ネットワーク1を介して他の装置と通信するための通信部を有する。通信部としては、例えばWiFi等の無線LANモジュールや、モデムやルータ等の通信機器が用いられる。
駐車場管制装置5として、例えばPC(Personal Computer)等の任意のコンピュータが用いられる。
なお、ゲート装置やフラップ装置が設置されない所謂フラップレス式駐車場に対しても、本発明を適用することが可能である。
また各サーバ装置12は、ネットワーク1を介して他の装置と通信するための通信部を有する。通信部としては、例えばWiFi等の無線LANモジュールや、モデムやルータ等の通信機器が用いられる。
サーバ装置12として、例えばPC等の任意のコンピュータが用いられる。
例えばDB13内には、会員登録DB、予約情報DB、在車DB、及び、超過情報DBが構築される。その他、例えば駐車場DB、提携店舗DB、割引DB、出庫情報DB、オーナー情報DB、種々の履歴DB、管理情報DB等の、種々のDBが構築されてもよい。
各種のDBは、駐車場管理装置7内のDBサーバにより包括的に管理され、例えば駐車場管理サービスを利用する利用者の会員登録及び退会、各利用者から受付けた予約情報の登録、変更及び削除、各駐車場11のオーナー情報の登録及び保管、運営収支情報の記録及び保管等が実行される。
また駐車場管理装置7内のWeb/APIサーバにより、種々のリクエストに応じた種々の処理が実行される。例えばWeb/APIサーバにより、各駐車場11の満空車情報の収集及び出力、管理機関端末8からの遠隔操作の中継等が実行される。
駐車場管理装置7内により生成されたWebページは、図1に示す各装置に備えられるWebブラウザにより画面上に表示される。例えば駐車場11を利用する利用者は、利用者端末6を操作することで、種々のWebページを閲覧したり、種々のWebアプリケーションを利用したりすることが可能である。
なお駐車場11を所有するオーナー自身で、駐車場11の管理業務を行う場合もある。この場合、オーナーが所有する端末が管理機関端末8として機能し得る。また管理業務を委託された管理機関が駐車場管理装置7を保有し、本実施形態に係る駐車場管理サービスを提供することもあり得る。
本発明は、自動バレー駐車システムが構築された駐車場11に対して適用可能である。自動バレー駐車システムは、自動運転機能(自律運転機能)を有する車両による自動バレー運転(自動バレー駐車すなわち自動バレー入庫運転と、自動バレー出庫運転)が実行可能なシステムである。自動バレー駐車システムが構築された駐車場11は、自動バレー駐車サービス対応の駐車場11とも言える。
本実施形態では、図1に示す駐車場管理システム500に含まれるシステムとして、自動バレー駐車システムが構築される。すなわち駐車場管理装置7により提供される駐車場管理サービスに含まれるサービスとして、自動バレー駐車サービスが提供される。DB13には、自動バレー駐車システムに関する種々のDBが構築される。
これに限定されず、駐車場管理システム500とは別のシステムとして、自動バレー駐車システムが構築されてもよい。例えば、図1には図示していない別の管理装置等により自動バレー駐車システムが構築され、駐車場11と個別に契約等が行われてもよい。
その他、自動バレー駐車システムを構築するための構成や方法等は限定されない。
利用者は、駐車場11内の所定の位置に設けられた自動バレー駐車サービス対応の駐車スペース(以下、自動バレー乗降スペースと記載する)に車両を駐車する。そして、車両から降りた利用者により、自動バレー駐車の実行が指示される。自動バレー駐車の実行の指示は、例えば利用者端末6を介して実行される。あるいは、駐車場11内に設定された専用の端末等が操作されてもよい。
当該指示に応じて、車両は無人による自動運転(自動運転モード)により、駐車場11内の所定の駐車スペースに移動し、車両を駐車させる(自動バレー入庫運転)。なお予約をすることなく、好きな時間に駐車場11内に入場して、自動バレー駐車を実行させることも可能である。
利用者が駐車場に戻ってくる際には、例えば何分後に駐車場内の自動バレー乗降スペースに、自動運転機能を有する車両を移動させる旨等の指示が入力される。当該指示に応じて、車両は無人による自動運転(自動運転モード)により、駐車スペースから自動バレー乗降スペースに車両を移動させ駐車させる(自動バレー出庫運転)。
以下、自動バレー駐車サービス対応の駐車場11を例に挙げて、本実施形態を説明する。
図2は、自動バレー駐車サービス対応の駐車場の構成例を示す模式図である。
駐車場11は、入場口15、出場口16、構内通路17、複数の駐車スペース18、自動バレー乗降スペース19、階段20、エレベータ21(エレベータホール)、事前精算機22、案内装置23、監視システム24、及びバンプ25を有する。
入口ループコイル27aから出力される信号に基づいて、入場レーンへの車両3の進入が検出される。
入場ゲート装置28aにより、入場レーンから駐車場11内部への車両3の入場が適宜規制される。
入口カメラ29aにより、入場レーンに進入した車両3を撮影することが可能である。
入口スピーカ30aにより、入場レーンに進入した車両3を運転する運転手や同乗者に向かって、音声を通知することが可能である。
各デバイスの具体的な構成は限定されず、任意の構成が採用されてよい。
出口ループコイル27bから出力される信号に基づいて、出場レーンへの車両3の進入が検出される。
出口ゲート装置28bにより、出場レーンから駐車場11外部への車両3の出場が適宜規制される。
出口カメラ29bにより、出場レーンに進入した車両3を撮影することが可能である。
出口スピーカ30bにより、出場レーンに進入した車両3を運転する運転手や同乗者に向かって、音声を通知することが可能である。
各デバイスの具体的な構成は限定されず、任意の構成が採用されてよい。
また本開示において、自動運転モードで走行している自動運転機能を有する車両3を、自動運転車両3aとする。一方、運転手が手動で運転している車両3を、非自動運転車両3bとする。例えば、手動運転モードで走行している自動運転機能を有する車両3も、非自動運転車両3bとなる。なお非自動運転車両3bは、手動運転車両とも言える。
図2では、頭部と肩の部分を表現する図により、歩行者4が図示されている。二重の略長方形状により、自動運転車両3aが図示されている。一重の略長方形状により、非自動運転車両3bが図示されている。
図2に示すように、構内通路17に対して、車両3の走行方向を規定する標識(矢印等)が設けられてもよい。また、歩行者4が歩くための通路が規定されてもよい。
駐車スペース18は、自動バレー駐車を実行する自動運転車両3a、及び非自動運転車両3bの両方が駐車可能なスペースである。すなわち本実施形態では、構内通路17を、自動運転車両3a、及び非自動運転車両3bの両方が、混在して走行することになる。
図2に示す例では、入場口15及び出場口16に近い位置に、スペースナンバーがV1及びV2となる2つの自動バレー乗降スペース19が設けられる。例えば、自動バレー駐車サービスを利用する利用者は、入場口15から駐車場11に入場した後、右折して自動バレー乗降スペース19に車両3を駐車させる。そして自動バレー乗降スペース19にて、車両3から降り、自動バレー駐車の実行を指示する。当該指示に応じて、自動運転車両3aが、自動バレー乗降スペース19から、いずれかの駐車スペース18に移動する。
自動運転車両3aが駐車される駐車スペース18は、予め決められていていてもよいし、その都度選択されてもよい。例えば、駐車場11内の最も隅にあり、あまり便がよくない駐車スペース18が優先的に自動バレー駐車のために割り当てられてもよい。
自動バレー駐車サービスを利用する利用者が駐車場11に戻ってきた場合には、そのタイミングに合わせて、駐車スペース18から自動バレー乗降スペース19に、自動運転車両3aが移動する。ユーザは、車両3に乗り込み、手動運転にて、出場口16から外部に車両3を出場させる。
案内装置23は、駐車場11及び本駐車場管理システム500(自動バレー駐車システムを含む)に関する種々の情報を案内するための装置である。例えばディスプレイ装置等を有し案内情報を表示可能な装置等が、案内装置23として用いられる。
図2に示す例では、以下のデバイスが、監視システム24として設置される。
入口カメラ29a及び入口スピーカ30a
出口カメラ29b及び出口スピーカ30b
主に構内通路17を撮影する場内カメラ32(図中の白丸)
主に駐車スペース18を撮影する駐車スペースカメラ33(図中の黒丸)
構内に設けられた複数の場内スピーカ34
構内に設けられた複数の場内マイク35
なお本開示において、画像は、静止画像及び動画像(映像)の両方を含む。
場内カメラ32や駐車スペースカメラ33は、駐車場11の全体を極力カバーできるように配置される。すなわち可能な限り死角が存在しないように、複数の場内カメラ32及び複数の駐車スペースカメラ33が適宜配置される。
バンプ25は、例えば構内通路17の進行方向を横断する方向に設置される単数か複数の凸稜部により構成され、本来の目的は一部を隆起させた路面を通過する車両に上下の振動を生じさせることで、運転車に減速を促すことである。典型的には、蒲鉾上の凸稜線形状であるが、短い凸部や半球状の凸部が一定間隔で並んでいてもよい。その場合は、車両3のタイヤ幅よりも狭い間隔であることが望ましい。また横断本数は、3本程度が良い。
またバンプ25は、通行速度を強制的に低減させるために視覚的に牽制効果のある奥行き幅の長く凸高さの高い大型のバンプと併用することで構成されてもよい。
またバンプ25は、それ自体が場内カメラ32で撮像した画像の中で像認識しやすいように、路面とのコントラストが大きい色で着色するのが良い。例えば、赤外線発光塗料で塗装されていると、運転者には視認しにくく、カメラ画像では認識しやすくなり、様々な応用性がある。
例えば、車両3がバンプ25を通過する際のタイヤの上下音が「ガタンガタン」といった音声として検出可能である。
図3は、駐車場管制システム100の構成例を示すブロック図である。
駐車場管制システム100は、駐車場11に対して構築されるシステムである。
図3に例示する駐車場管制システム100は、駐車場管制装置5、監視システム24、事前精算機22、案内装置23、自動バレー管理装置37、及び駐車場DB38を有する。
図3に示す各ブロックは、例えば駐車場11の構内に設置された図示しない構内LANを介して、互いに通信可能に接続されている。その他、無線/有線を介した任意の通信技術が用いられてもよい。
図3に示す例では、これらのデバイスに加えて、複数の赤外線カメラ(サーモグラフィ)39も設置される。赤外線カメラ39は、赤外線画像を撮影可能である。本実施形態では、駐車スペースカメラ33と同じ画角となるように、赤外線カメラ39が設置される。従って、主に駐車スペース18に駐車された車両3や、車両3に乗降する歩行者4についての、赤外線画像を撮影することが可能である。
例えば、自動バレー管理装置37により、自動運転車両3aによる自動運転動作が制御される。例えば、自動バレー乗降スペース19から所定の駐車スペース18への自動運転が指示される。あるいは、所定の駐車スペース18からの自動バレー乗降スペース19への自動運転が指示される。
その他、自動バレー駐車場の予約管理等、種々の処理が実行される。
本実施形態では、自動バレー管理装置37により、自動運転車両3aに対して、後に説明するヒートマップが送信される。
自動バレー管理装置37は、例えば、CPU、ROM、RAM、HDD等のコンピュータの構成に必要なハードウェアを有する。また自動バレー管理装置37に、図1に示すネットワーク1を介して他の装置と通信するための通信部が備えられる。通信部としては、例えばWiFi等の無線LANモジュールや、モデムやルータ等の通信機器が用いられる。
自動バレー管理装置37として、例えばPC等の任意のコンピュータが用いられる。
本実施形態では、各種車両の形状等の車種データに関する車両情報や、後に説明するヒートマップに関する情報が駐車場DB38に記憶され、駐車場管制装置5や自動バレー管理装置37により適宜参照される。また自動バレー駐車に関する種々の情報が駐車場DB38に記憶される。なお、上述の車両情報等は、駐車場DB38ではなく、駐車場管理装置7のDB13に格納されてもよい。
図4は、自動運転機能を有する車両の構成例を示す模式図である。ここでは、自動運転モードが選択された状態である自動運転車両3aとして説明を行う。
自動運転車両3aは、通信部41と、車載カメラ42と、認識装置43と、ETCアンテナ44と、ETC車載器45と、制御部46とを有する。
通信部41は、他の装置と通信するためのデバイスである。本実施形態では、通信部41を介して、自動バレー管理装置37からの指示等を含む種々の情報が取得される。
通信部41としては、例えばWiFi等の無線LANモジュールや、モデムやルータ等の通信機器が用いられる。その他任意の通信デバイスが用いられてよい。
車載カメラ42としては、CCDカメラ等のデジタルカメラが用いられる。その他、ToFカメラやステレオカメラ等の測距デバイスが用いられてもよい。また赤外線カメラ等が用いられてもよい。
認識装置43は、車載カメラ42により撮影された画像に基づいて、自動運転車両3aの周囲の状況を認識する。状況認識のためのアルゴリズムは限定されない。
ETCアンテナ44、及びETC車載器45により、ETC決済による駐車場11の利用が可能である。
走行ルート決定部47は、自動バレー管理装置37からの指示、認識装置43による認識結果、駐車場11の地図情報等に基づいて、自動運転を行う走行ルートを決定する。
走行制御部48は、決定された走行ルートに沿った自動運転を実現するために、自動運転車両3aが備える駆動系(図示は省略)等を適宜制御する。
例えば図4に例示するように、走行制御部48により、エンジン・モータ制御装置49、ブレーキ制御装置50、ヘッドライト制御装置51、ハザードランプ(ウィンカー)制御装置52、及びクラクション制御装置53等に制御信号が出力される。これにより走行ルートに沿った自動運転や、危機回避運動等が実現される。
その他、自動運転を実現するための周知の技術が適宜されてよい。
さらに、本駐車場管制システム100では、自動運転車両3aに、後に説明するヒートマップが送信される。制御部46は、受信したヒートマップを用いて、自動運転を自律的に制御することが可能である。例えば、ヒートマップに基づいた走行ルートの決定や、ヒートマップに基づいた走行制御等を実行することが可能である。
その他、自動運転車両3aは、ヒートマップに基づいた種々の車両制御(車速制限やルート変更等)を実行することが可能である。
図5は、駐車場管制装置5の機能的な構成例を示すブロック図である。
駐車場管制装置5は、画像取得部71、車両識別部72、枠画像生成部73、座標算出部74、表示制御部75、マップ情報生成部76、ヒートマップ生成部77、及び、駐車場管制部78を有する。
これらのブロックは、駐車場管制装置5のCPUが所定のプログラムを実行し、装置内のハードウェア資源と協働することで構成され、本実施形態に係る駐車場管制方法が実現される。
駐車場管制装置5にプログラムをインストールする方法は限定されない。
画像取得部71は、監視システム24により検出された監視情報を取得する。本実施形態では、図3等に示す入口カメラ29a、出口カメラ29b、場内カメラ32、駐車スペースカメラ33、赤外線カメラ39により撮影された撮影画像が取得される。なお必要に応じて、場内マイク35により取得された音声が取得されてもよい。
車両識別部72は、駐車場11内の個々の車両を識別し、識別した各車両に関する情報を駐車場DB38へ格納する。
車両識別部72は、典型的には、入口カメラ29aの撮影画像から入場する車両のナンバープレートを抽出し、画像処理技術を用いて当該ナンバープレートの情報(陸運支局名、分類番号、ひらがな、4桁の一連番号等)を読み出す。これらの情報は、当該車両の識別情報として駐車場DB38に格納され、後述する座標算出部において生成される車両の位置に関する情報に紐付けされる。
枠画像生成部73は、画像取得部71から取得された駐車場11内の撮影画像に基づいて、対象物Tである車両3の外形を表す三次元枠画像を生成する。枠画像生成部73は、各カメラの撮影画像について、後述する三次元枠画像の生成処理を実行する。
対象物Tか否かの判定方法は特に限定されず、例えば、予め取得しておいた背景画像(対象物Tが存在しないときの撮影画像)を基準として、当該背景画像との差分から対象物Tを識別してもよい。当該背景画像は、複数の管制カメラごとに駐車場DB38に格納される。三次元枠画像F1の生成には、対象物の最大寸法または範囲を囲む最小のボックス(バウンディングボックス)を生成可能な公知の三次元物体認識アルゴリズムを用いることができる。
典型的には、ナンバープレート3pは車両の正面あるいは背面に向けて配置されるため、その形状からカメラの位置を基準とした当該車両の正面方向を判定できる。また、車両前後のナンバープレートは高さが異なる位置に設置される場合が多い。この場合は、駐車場DB38に蓄積された車両情報等を参照することで、ナンバープレート3pの高さから車両の前後の判定が可能である。さらに、ナンバープレート3pの2桁または3桁の分類番号から車種を特定し、その大きさを決定してもよい。枠画像生成部73は、これらの情報から対象物である車両3の車幅や車長を推定することで、三次元枠画像F1の縦横長さに反映させてもよい。
なお、三次元枠画像F1の生成には、ナンバープレート3pの形状や文字情報だけでなく、車両のヘッドライトの形状やドラミラーの位置など、車両のその他の特徴部分が参照されてもよい。これにより車種の特定、三次元枠画像F1の大きさや向きなどの精度を高めることができる。
図7に、撮影画像P1に含まれる車両3を囲む二次元枠画像F2の一例を示す。二次元枠画像F2の生成には、対象物の最大寸法または範囲を囲む最小の矩形枠画像を生成可能な公知の二次元物体認識アルゴリズムを用いることができる。
座標算出部74は、枠画像生成部73で生成された三次元枠画像F1および二次元枠画像F2に基づいて対象物Tの平面位置座標を算出する。
平面位置座標とは、駐車場11の全体を天井から俯瞰した平面図上における座標である。駐車場11が多層階で構成される場合、典型的には、階層(駐車フロア)ごとに平面位置が算出される。車両3の平面位置は、枠画像F1,F2の生成周期に応じて更新されるので、車両3の平面位置の変化を監視することで、駐車場11内での個々の車両3を追尾することができる。
このとき、車両の正面のナンバープレート3pの直下が当該車両3の平面位置として算出される。これにより、カメラごとに車両が映り込む角度が変化しても車両の位置を正確に示すことができる。これに以外にも、三次元枠画像F1から当該三次元枠の重心位置を算出し、その重心位置の直下を車両3の平面位置としてもよい。
そこで本実施形態では、第2の位置情報により取得される車両の粗位置情報に基づく車両の追尾処理を優先的に実行し、第1の位置情報の取得後は、上記粗位置を当該第1の位置情報に基づき補正して、駐車場平面図にマッピングするように構成される。当該処理は、後述するマップ情報生成部76において実行される。
表示制御部75は、図6に示すように、枠画像生成部73において生成された三次元枠画像F1を撮影画像P1に重畳して管制画面40へ表示させるための画像信号を生成する。
同様に、表示制御部75は、図7に示すように、枠画像生成部73において生成された二次元枠画像F2を撮影画像P1に重畳して管制画面40へ表示させるための画像信号を生成するように構成される。
あるいは、座標算出部74により生成される車両の位置情報(第1の位置情報、第2の位置情報)に基づいて、三次元枠画像F1および二次元枠画像F2の表示位置が算出されてもよい。
マップ情報生成部76は、座標算出部74において算出された各車両の平面位置を示す駐車場11の平面図データを生成する。マップ情報生成部76は、図10に示すような駐車場11の平面図データ11Dを生成し、これに識別した各車両の位置をマッピングする。
なお上述のように、枠画像生成部73において別途生成された二次元枠画像F2に基づいて車両および歩行者の平面位置を算出し、その後、当該平面位置を三次元枠画像F1に基づいて算出された平面位置に補正されてもよい。
また、平面図データ11Dに対応する画像が管制画面40とは別に設置された専用の画面に表示されてもよい。これにより、駐車場11内の利用状況の一覧性を高めることができる。
さらに本実施形態では、平面図データ11Dは、駐車場11内を走行する自動運転車両3aの制御に利用される。この場合、平面図データ11Dには、後述するヒートマップ生成部77において生成された、駐車場11内の位置と走行危険度とが関連付けられたマップ情報が埋め込まれる。
ヒートマップ生成部77は、監視システム24から出力される駐車場11内の監視情報に基づいて、ヒートマップを生成する。本実施形態では、監視情報として、図3等に示す入口カメラ29a、出口カメラ29b、場内カメラ32、駐車スペースカメラ33、赤外線カメラ39により撮影された撮影画像が取得される。また場内マイク35により取得された音声が取得される。
例えば、状況情報として、駐車場11内の自動運転車両3aに関する情報、駐車場11内の非自動運転車両3bに関する情報、又は駐車場11内の歩行者4に関する情報が生成される。また状況情報として、自動運転車両3a、非自動運転車両3b、及び歩行者4のいずれとも異なる他の物体に関する情報が生成される。その他、駐車場11の状況に関する任意の情報が、状況情報に含まれ得る。
ヒートマップHMは、駐車場11内の位置と走行危険度とが関連付けられたマップ情報である。典型的には、駐車場11内の位置座標と、走行危険度とが関連付けられることで、ヒートマップHMが生成される。
ヒートマップHMを規定するデータとしては、例えば(位置、危険度)の組み合わせ、あるいは(領域、危険度)の組み合わせが挙げられる。もちろんこれに限定される訳ではない。なお、ヒートマップHMは、必ずしも可視化された情報である必要はない。
例えば、車両3や歩行者4が存在する位置は、走行すると衝突してしまう可能性が非常に高いので、走行危険度は相対的に高くなる。構内通路17内の周囲に車両3や歩行者4等が存在しない位置は、走行しても衝突等が発生する可能性は低いので、走行危険度は相対的に低くなる。
例えば、走行危険度0(最低値)から走行危険度MAX(最高値)の間の数値となるように適宜正規化されて走行危険度が設定される。あるいは、走行危険度0レベル(最低レベル)から走行危険度MAXレベル(最高レベル)までの複数のレベルにより、段階的に走行危険度が設定されてもよい。その他、走行危険度の算出や設定については、任意の方法を採用することが可能である。
なお、走行危険度は、走行安全度を表すパラメータとも言える。すなわちヒートマップHMは、駐車場11内の位置と走行安全度とが関連付けられたマップ情報とも言える。例えば、算出された走行危険度の逆数により、走行安全度を算出することが可能である。もちろんこれに限定される訳ではない。
本実施形態では、自動バレー管理装置37により、ヒートマップHMに基づいて、自動バレー運転(自動バレー駐車)が制御される。具体的には、自動バレー管理装置37から自動運転車両3aにビートマップHMが送信され、自動バレー駐車が実行される。
従って、自動バレー管理装置37により、駐車場管制システム100の外部の装置である自動運転車両3aに、ヒートマップHMが送信される。
上記でも述べたが、自動運転車両3aは、受信したヒートマップに基づいた種々の車両制御(車速制限やルート変更等)を実行することが可能である。
駐車場管制部78は、駐車場11の管制に関する種々の処理を実行する。
例えば、車両3の検知、ゲート装置28の制御、監視システム24に含まれる各デバイスの制御、事前精算機22の制御、案内装置23の制御、事前精算の確認、図1に示すネットワーク1上の他の装置との通信、駐車場DB38への情報の書き込みや読出し、その他、駐車場11の管制に関する種々の処理を実行する。
続いて、本実施形態の駐車場管制方法について説明する。
図12は、駐車場管制装置5において実行される処理手順の一例を示すフローチャートである。ここでは、監視対象物として車両3を例に挙げて説明する。
生成された枠画像は、車両の識別情報に紐付けられて駐車場DB38へ格納される。この処理は、各カメラの撮影画像について個々に実行される。
なお、車両3の平面位置座標の算出処理(ステップ105)は、枠画像の管制画面40への表示処理(ステップ104)の前に行われてもよいし、これと同時に行われてもよい。
他の実施形態として、枠画像に基づいて各車両3の平面位置座標を算出する演算処理に加えて、ナンバーのOCR(Optical Character Recognition)処理によって生成されるナンバー位置情報を利用し、さらに高速で正確な平面位置座標を算出する手段も有効であり、以下、図13を基に説明する。
また、枠画像生成部73は、前記ステップ202において対象Tを抽出した後、ナンバー抽出処理と二次元枠生成処理と同時に、前述の三次元枠生成処理(ステップ208)を開始する。その後生成された位置情報は第1の位置情報として出力される(ステップ209)。
3a…自動運転車両
3b…非自動運転車両
4…歩行者
5…駐車場管制装置
7…駐車場管理装置
11…駐車場
37…自動バレー管理装置
40…管制画面
71…画像取得部
73…枠画像生成部
74…座標算出部
75…表示制御部
100…駐車場管制システム
500…駐車場管理システム
Claims (10)
- 複数の管制カメラで撮影された駐車場内の複数の対象物の撮影画像を取得する画像取得部と、
前記撮影画像に基づいて、前記複数の対象物の各々について外形を表す三次元枠画像を生成する枠画像生成部と、
前記三次元枠画像に基づいて算出された前記複数の対象物の平面位置座標を含む第1の位置情報を生成する座標算出部と、
前記撮影画像を含む監視情報を管制画面へ表示させる監視部と
を具備し、
前記枠画像生成部は、前記複数の対象物各々を囲む二次元枠画像をさらに生成し、
前記座標算出部は、前記二次元枠画像に基づいて算出された前記複数の対象物の前記駐車場内における平面位置座標を含む第2の位置情報を生成する
駐車場管制システム。 - 請求項1に記載の駐車場管制システムであって、
前記複数の対象物は車両であり、
前記枠画像生成部は、前記車両のナンバープレートの枠形状および文字情報に基づいて、前記三次元枠画像の向きおよび大きさを決定する
駐車場管制システム。 - 請求項1または2に記載の駐車場管制システムであって、
前記三次元枠画像を前記撮影画像に重畳して前記管制画面へ表示させる表示制御部をさらに具備する
駐車場管制システム。 - 請求項1~3のいずれか1つに記載の駐車場管制システムであって、
前記第1の位置情報は、前記三次元枠画像を射影変換することで算出された前記複数の対象物の前記駐車場内における平面位置座標を含む
駐車場管制システム。 - 請求項1~4のいずれか1つに記載の駐車場管制システムであって、
前記第2の位置情報を前記第1の位置情報で補正し、補正した前記第2の位置情報を前記駐車場内の平面図にマッピングするマップ情報生成部をさらに具備する
駐車場管制システム。 - 請求項5に記載の駐車場管制システムであって、
前記マップ情報生成部は、前記駐車場内の位置と走行危険度とが関連付けられたマップ情報を出力する
駐車場管制システム。 - 請求項6に記載の駐車場管制システムであって、
前記駐車場内での自動運転車両による自動バレー運転を制御するバレー運転制御部をさらに具備し、
前記バレー運転制御部は、前記マップ情報に基づいて、前記自動バレー運転を制御する
駐車場管制システム。 - 複数の管制カメラで撮影された駐車場内の複数の対象物の撮影画像を取得する画像取得部と、
前記撮影画像に基づいて、前記複数の対象物の各々について外形を表す三次元枠画像を生成する枠画像生成部と、
前記三次元枠画像に基づいて算出された前記複数の対象物の平面位置座標を含む第1の位置情報を生成する座標算出部と、
前記三次元枠画像を前記撮影画像に重畳して前記管制画面へ表示させる表示制御部と、
前記撮影画像を含む監視情報を管制画面へ表示させる監視部と
を具備し、
前記枠画像生成部は、前記駐車場内における前記複数の対象物各々について前記三次元枠画像を生成し、
前記表示制御部は、前記複数の対象物に関する前記三次元枠画像を相互に異なる態様で前記管制画面へ表示させる
駐車場管制システム。 - 駐車場を管制するコンピュータシステムにおいて実行される駐車場管制方法であって、
複数の管制カメラで撮影された駐車場内の複数の対象物の撮影画像を取得し、
前記撮影画像に基づいて、前記複数の対象物の各々について外形を表す三次元枠画像を生成し、
前記三次元枠画像に基づいて前記複数の対象物の平面位置座標を算出し、
前記複数の対象物に関する前記三次元枠画像を相互に異なる態様で前記三次元枠画像を前記撮影画像に重畳して前記複数の対象物を監視するための管制画面へ表示させる
駐車場管制方法。 - コンピュータシステムに駐車場管制方法を実行させるプログラムであって、
複数の管制カメラで撮影された駐車場内の複数の対象物の撮影画像を取得するステップと、
前記撮影画像に基づいて、前記複数の対象物の各々について外形を表す三次元枠画像を生成するステップと、
前記三次元枠画像に基づいて前記複数の対象物の平面位置座標を算出するステップと、
前記複数の対象物に関する前記三次元枠画像を相互に異なる態様で前記三次元枠画像を前記撮影画像に重畳して前記複数の対象物を監視するための管制画面へ表示させるステップと
を含むプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019230407A JP7401292B2 (ja) | 2019-12-20 | 2019-12-20 | 駐車場管制システム、駐車場管制方法、及びプログラム |
DE102020133506.7A DE102020133506A1 (de) | 2019-12-20 | 2020-12-15 | Parkplatzsteuerungssystem, Parkplatzsteuerungsverfahren und Programm |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019230407A JP7401292B2 (ja) | 2019-12-20 | 2019-12-20 | 駐車場管制システム、駐車場管制方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021099601A JP2021099601A (ja) | 2021-07-01 |
JP7401292B2 true JP7401292B2 (ja) | 2023-12-19 |
Family
ID=76206665
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019230407A Active JP7401292B2 (ja) | 2019-12-20 | 2019-12-20 | 駐車場管制システム、駐車場管制方法、及びプログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7401292B2 (ja) |
DE (1) | DE102020133506A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113899377B (zh) * | 2021-08-23 | 2023-10-27 | 武汉光庭信息技术股份有限公司 | 一种基于相机的自动泊车终点相对坐标的测量方法及系统 |
CN115331159A (zh) * | 2021-12-24 | 2022-11-11 | 中国银联股份有限公司 | Etc系统的防盗刷方法及etc系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010262387A (ja) | 2009-04-30 | 2010-11-18 | Fujitsu Ten Ltd | 車両検知装置および車両検知方法 |
JP2016057677A (ja) | 2014-09-05 | 2016-04-21 | 本田技研工業株式会社 | 走行支援制御装置 |
-
2019
- 2019-12-20 JP JP2019230407A patent/JP7401292B2/ja active Active
-
2020
- 2020-12-15 DE DE102020133506.7A patent/DE102020133506A1/de active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010262387A (ja) | 2009-04-30 | 2010-11-18 | Fujitsu Ten Ltd | 車両検知装置および車両検知方法 |
JP2016057677A (ja) | 2014-09-05 | 2016-04-21 | 本田技研工業株式会社 | 走行支援制御装置 |
Also Published As
Publication number | Publication date |
---|---|
DE102020133506A1 (de) | 2021-06-24 |
JP2021099601A (ja) | 2021-07-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6503218B2 (ja) | 運転支援システム、運転支援装置及び運転支援方法 | |
KR101624986B1 (ko) | 불법 주정차 단속 및 주차관리 통합관제장치 | |
CN108128245A (zh) | 车辆环境成像系统及方法 | |
CN112585659A (zh) | 一种导航方法、装置和系统 | |
US9569962B2 (en) | Method for identifying a vehicle detected by a sensor device | |
US12033508B2 (en) | Image capturing apparatus of vehicle, server, user terminal apparatus and method for providing parking lot guidance service using them | |
JP7445441B2 (ja) | 駐車場管制システム、駐車場管制方法、及びプログラム | |
US11227496B1 (en) | Parking lot use monitoring for small businesses | |
KR101624991B1 (ko) | 스마트 주차 관제 장치 | |
KR101639729B1 (ko) | 스마트 주차 관제 장치 | |
KR101968203B1 (ko) | 주차관제시스템 | |
KR101624997B1 (ko) | 스마트 주차 관제 장치 | |
KR102289181B1 (ko) | 영상 기반 주차 관리 시스템, 장치 및 방법 | |
JP7401292B2 (ja) | 駐車場管制システム、駐車場管制方法、及びプログラム | |
JPWO2020100922A1 (ja) | データ配信システム、センサデバイス及びサーバ | |
KR20220047188A (ko) | 차량용 영상 촬영 장치, 서버, 사용자 단말 장치 및 이들을 이용한 주차장 안내 서비스 제공 방법 | |
JP7020550B2 (ja) | 配車システムのためのコミュニケーション方法、配車システム及びコミュニケーション装置 | |
JP7445442B2 (ja) | 駐車場監視システム、駐車場監視方法、及びプログラム | |
JP7401291B2 (ja) | 駐車場管制システム、駐車場管制方法、及びプログラム | |
JP7401293B2 (ja) | 駐車場管制システム、駐車場管制方法、及びプログラム | |
CN115131986A (zh) | 封闭停车场智慧管理方法以及系统 | |
JP7545878B2 (ja) | 駐車場管制装置、駐車場管制システム、駐車場管制プログラム及び駐車場管制方法 | |
JP7545879B2 (ja) | 駐車場管理システム及び駐車場管理方法 | |
KR102616348B1 (ko) | Ai 영상인식기술을 이용한 인공지능 주차관리 시스템 | |
KR102677706B1 (ko) | 인공지능과 메타버스를 이용한 지능형 주차장 관제 시스템 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221011 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20221011 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20221011 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230719 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230829 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231025 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231207 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7401292 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |