TW201538364A - 動態車道線偵測系統及方法 - Google Patents

動態車道線偵測系統及方法 Download PDF

Info

Publication number
TW201538364A
TW201538364A TW103112119A TW103112119A TW201538364A TW 201538364 A TW201538364 A TW 201538364A TW 103112119 A TW103112119 A TW 103112119A TW 103112119 A TW103112119 A TW 103112119A TW 201538364 A TW201538364 A TW 201538364A
Authority
TW
Taiwan
Prior art keywords
vehicle
image
signal
wide
integration unit
Prior art date
Application number
TW103112119A
Other languages
English (en)
Other versions
TWI600558B (zh
Inventor
Hao-Han Ji
li-you Xu
Original Assignee
Automotive Res & Testing Ct
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Automotive Res & Testing Ct filed Critical Automotive Res & Testing Ct
Priority to TW103112119A priority Critical patent/TWI600558B/zh
Priority to CN201410165800.9A priority patent/CN103991448B/zh
Priority to US14/317,471 priority patent/US9508016B2/en
Publication of TW201538364A publication Critical patent/TW201538364A/zh
Application granted granted Critical
Publication of TWI600558B publication Critical patent/TWI600558B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10Path keeping
    • B60W30/12Lane keeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/586Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of parking space
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0075Automatic parameter input, automatic initialising or calibrating means
    • B60W2050/0083Setting, resetting, calibration
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)

Abstract

本發明提供一種動態車道線偵測系統及方法,透過安裝於車輛四周之四顆廣角鏡頭所擷取之複數扭曲畫面及車用影像整合單元轉換成一般平面影像,其搭配車道線於影像顯示裝置中,提供駕駛人車道線偏移偵測。根據車身訊號接收裝置中之不同的車輛排檔訊號、車速訊號、方向盤轉角訊號及四顆廣角鏡頭所擷取之影像,依各訊號選擇四周障礙物偵測、全景影像偵測或平行停車與倒車入庫之車道線路徑預測畫面。本發明可透過這些廣角鏡頭及車用影像整合單元有效將車道偏移偵測整合至全景影像系統中,以達成安裝體積小及成本較低之考量。

Description

動態車道線偵測系統及方法
本發明係有關一種車輛四周外部影像偵測之技術,特別是一種整合廣角鏡頭將所擷取之扭曲畫面轉換成非扭曲畫面,且配合車輛訊號提供動態車道線之偵測系統及方法。
現今多數車輛安裝許多車用安全性裝置,如全景影像偵測系統、後方障礙物偵測系統、停車輔助系統及車道偏移之偵測系統等,主要提供駕駛人行車時多一分安全保護。藉由額外加裝在車輛前、後、左及右方鏡頭,同時搭配車用主機以偵測車身外四周之景像,再透過車機程式將全景影像轉換成鳥瞰畫面供駕駛人參考;後方鏡頭則可搭配車用主機偵測車輛正後方之障礙物,並且也可透過後方鏡頭與車機程式執行停車輔助之功能,且於車機之螢幕顯示倒車時之車道線預測功能;前方鏡頭則可以擷取車輛正前方之影像,透過車機程式於螢幕顯示車道偏移之偵測功能。
部分前案所提供車用安全性裝置之技術特徵,可將所有車用安全性裝置同時整合於一系統中,但因為車道線偏移偵測及停車輔助系統皆需搭配專用鏡頭,其與一般全景畫面使用之鏡頭不同,障礙物偵測系統因可搭配車道偏移及停車輔助系統使用,故僅限於前方或後方的行車影像中才擁有此障礙物偵測之功效,所以未能偵測到車輛兩側之障礙物,且需 額外加裝鏡頭於車輛上才能達到障礙物偵測及車道線預測之功效,使車輛上若同時擁有全景畫面、前後方車道線及障礙物偵測,需要加裝至六顆不同功能之鏡頭。目前仍未有僅須一般廣角鏡頭即可涵蓋上述四種技術特徵的裝置,即便可一次將所有車用安全性裝置安裝於車輛上,亦未有一系統可有效整合四顆廣角鏡頭且於轉換各車用安全性裝置,尤其在硬體設備上也因為多加裝鏡頭而增加製造成本,因此造成目前市面上所推出之車款僅提供部分技術支援。
因此,本發明在針對上述之困擾,提供一種動態車道線偵測系統及方法,藉由透過廣角鏡頭及車用影像整合單元中之影像校正方法將車道線偏移技術整合至影像顯示裝置中之方法,更有效整合各車用安全性裝置於同一系統之中。
本發明之主要目的係在提供一種動態車道線偵測系統及方法,其係可根據一般廣角鏡頭所擷取之扭曲畫面經由車用影像整合單元中之影像校正方法轉換成一般的平面影像,再透過車身訊號接收裝置主動接收自車身訊號,則可透過本發明自動執行車道線偵測,主動警示駕駛人車道偏移之危險,不需要額外再搭配車道偏移專用之鏡頭,可減少車輛之負擔及硬體安裝體積變小。
本發明之另一目的係在提供一種動態車道線偵測系統及方法,其係可藉由行駛車輛時之不同的車輛排檔訊號及行駛中之車速訊號,依照駕駛人於不同的行車環境時,提供最有效的自動安全偵測方式,因此使駕駛人可以於行駛時不需要分心及手動進行車用安全性裝置之調整,藉 由車身訊號可以自動轉換車用安全性裝置以即時了解車輛四周環境之行車狀況。
為了達到上述之目的,本發明係揭露一種動態車道線偵測系統,其係由一車用影像整合單元連接於安裝在車輛前、後、左及右方位置之四個廣角鏡頭,且電性連接車身訊號接收裝置及影像顯示裝置,車用影像整合裝置可整合各廣角鏡頭所擷取之扭曲畫面與車身訊號接收裝置所接收之各種車輛訊號,如車輛排檔訊號、車速訊號及方向盤轉角訊號,再根據車用影像整合裝置中之影像校正方法及前方廣角鏡頭所擷取的扭曲畫面校正成一般平面影像,提供車道偏移偵測於影像顯示裝置上;由後方廣角鏡頭執行平行停車與倒車入庫之車道線路徑預測畫面;由前、後、左及右方之廣角鏡頭執行全景畫面影像偵測及四周障礙物偵測。
此外,本發明亦揭露一種動態車道線偵測方法,透過安裝在車輛四周廣角鏡頭擷取之扭曲畫面,根據影像校正方法校正各扭曲畫面。接著,再判斷車身訊號接收裝置所接收之排檔訊號係為非倒車檔,且車速訊號高於預設之速度數值時,進行車道線偏移偵測,接著將校正後之平面影像傳送至影像顯示裝置並搭配車道線位置及提供警示音效,最後再判斷車身訊號接收裝置所接收之排檔訊號若為倒車檔或該車速訊號低於預設之速度數值時,則可選擇性進行四周障礙物偵測、全景影像偵測及或平行停車與倒車入庫之停車路線路徑預測畫面。
底下藉由具體實施例配合所附的圖式詳加說明,當更容易瞭解本發明之目的、技術內容、特點及其所達成之功效。
10‧‧‧動態車道線偵測系統
12‧‧‧車用影像整合單元
14a~d‧‧‧廣角鏡頭
16‧‧‧車身訊號接收裝置
18‧‧‧影像顯示裝置
20‧‧‧車輛排檔訊號
22‧‧‧車速訊號
24‧‧‧方向盤轉角訊號
26‧‧‧扭曲畫面
28‧‧‧平面影像
第一圖為本發明之系統方塊示意圖。
第二圖為本發明使用之車輛廣角鏡頭位置示意圖。
第三圖為本發明之車道線偏移偵測方法流程圖。
第四圖為本發明之扭曲影像轉換示意圖。
第五圖為本發明使用之影像校正原理示意圖。
第六圖為本發明同時整合停車與障礙物偵測的流程圖。
第七圖為本發明之車道偏移照片圖。
第八a圖至第八d圖為本發明之停車及倒車路徑照片圖。
第九a圖及第九b圖為本發明之全景影像及障礙偵測照片圖。
本發明之主要技術手段係有關車道線偵測系統及方法,透過車用影像整合單元整合廣角鏡頭、車身訊號接收裝置及影像校正方法,經由轉換廣角鏡頭所擷取之扭曲畫面成一般平面影像,且同時顯示前方車道線位置於影像顯示裝置上,若車身訊號接收裝置所接收之訊號並非用以作為車道線偏移偵測之方式時,則會自動選擇四周障礙物偵測、全景影像偵測及平行停車或倒車入庫停車之車道線路徑預測畫面。
首先,請同時參照第一圖與第二圖所示,一種動態車道線偵測系統10,包括一車用影像整合單元12,其係包含數位訊號處理(DSP)、場式可程式閘陣列(FPGA)、車用電腦(Car PC)或系統級晶圓(SoC),皆可執行數位化訊號處理。車用影像整合單元12電性連接被安裝於車輛前、後、左及右方位置之複數個廣角鏡頭14a~d,其中包含前方廣角鏡頭 14a、左側廣角鏡頭14b、後方廣角鏡頭14c及右側廣角鏡頭14d;車用影像整合單元12亦電性連接至一車身訊號接收裝置16及一影像顯示裝置18,影像顯示裝置18於本實施例中係為發光二極體顯示器(LED display)或液晶顯示器(LCD)顯示影像,且透過喇叭或蜂鳴器產生音效,車身訊號接收裝置16可接收自車輛所傳送之車輛排檔訊號20、車速訊號22及方向盤轉角訊號24。
在說明完本發明之偵測系統之連接關係後,接續說明本發明動態車道線偵測方法之各步驟,首先澄明,在本實施例中,駕駛人行駛時車輛排檔至非倒車(R)檔及車輛時速高於六十公里時,可在本實施例中界定車用影像整合單元12中之預設車速為時速六十公里,而預設車速則可依駕駛人駕駛習慣不同作調整,當不能以此為限。請同時參照第一圖、第三圖及第四圖所示,如步驟S10所示,安裝於車輛前方之廣角鏡頭14a可擷取車輛前方之扭曲畫面26;如步驟S12所示,再將所擷取之扭曲畫面26傳送至車用影像整合單元12中,利用影像校正方法校正扭曲畫面26成一般平面影像28,且不需要經過視角轉換;由於車身訊號接收裝置16會接收之車輛排檔訊號20、車速訊號22及方向盤轉角訊號24傳送至車用影像整合單元12,當所接收之車輛排檔訊號20為非R檔及車速訊號22高於預設速度時,如步驟S14所示進行車道線偏移偵測,本實施例預設速度設為時速六十公里;接著如步驟S16所示,車用影像整合單元12再將轉換後的平面影像28傳送至影像顯示裝置18;如步驟S18所示,將平面影像28搭配車道線位置並顯示於顯示影像裝置18上,並可進一步地由影像顯示裝置18以警示音效提供即時偏移之警示。
其中,在上述步驟S12中所使用之影像校正方法可參照第五圖所示,此影像校正方法的原理係利用從一凸形畫面上一弧長之長度取得兩個點座標(u,v),且兩個點座標(u,v)以非平行線交叉投射至一平面上,產生兩個新的點座標,而兩個新點座標之長度則以該非平行線交叉入射角θ與折射角Φ比例及該弧長之長度相比計算得出。上述原理可再經由下列之公式(1)、公式(2)及公式(3)計算出: 其中,(u,v)為扭曲座標點,(u 0,v 0)為扭曲畫面之中心之點座標,為校正後之新的點座標,ω為曲率半徑,為扭曲畫面之半徑長及r為校正後之新二點座標距離長度。
接著,請同時參閱第六圖及第一圖所示,首先,如步驟S22所示,車輛四周之複數廣角鏡頭14a~d所擷取之複數扭曲畫面26訊號傳送至該車用影像整合單元12;如步驟S24所示,根據所擷取之那些扭曲畫面26透過公式(1)、公式(2)及公式(3)可將那些扭曲畫面26轉換成一般平面影像28;如步驟S26所示,車身訊號接收裝置16接收車輛排檔訊號20與車速訊號22,並將該些訊號傳送至車用影像整合單元12;如步驟S28所示,車用影像整合單元12則判斷車輛排檔訊號20是否為非R檔,若否,則表示車輛排檔訊號20此時係為R擋,就可進行步驟S34執行平行停車與倒車入庫之車道線路徑預 測畫面與四周障礙物偵測,若是,則表示車輛排檔訊號20可係為1檔、2檔、3檔或D檔等車輛前進檔位,就可進行步驟S30判斷車速訊號22是否高於預設速度,於本實施例設定預設速度為時速六十公里,若否,則表示車輛時速低於預設速度時速六十公里,就可進行步驟S36執行全景影像偵測與四周障礙物偵測,若是,則表示車輛時速高於預設速度時速六十公里,則可進行步驟S32執行車道線偏移偵測。
以下再配合上述之步驟提供實驗照片供參考及同時參閱第一圖所示,請參閱第七圖係為上述步驟S32中提及之車道線偏移偵測,其係顯示於影像顯示裝置18,並於車輛偏移車道線時會提供駕駛人警示音效且於螢幕上顯示危險警示字樣,如Danger字樣,藉由警示功能降低行車危險之風險性;接著,請再參閱本發明之第八a圖至第八d圖所示,此些畫面係為平行停車或倒車入庫之停車之車道線路徑預測畫面之圖式,車身訊號接收裝置16所接收之車輛排檔訊號20為R檔及又接收一方向盤轉角訊號24時,請同時參照第八a圖所示,此為車輛準備平行停車前之畫面照片,請再同時參閱第八b圖所示,透過影像顯示裝置18顯示車輛後方之畫面,並於畫面上顯示欲停之停車線,請參照第八c圖所示,此為車輛準備倒車入庫前之畫面照片,請同時參閱第八d圖所示,再搭配方向盤轉角訊號24以供駕駛人能夠透過預測之車道線位置安全停車。
最後,請參閱本發明之第九a圖、第九b圖及同時參閱第一圖所示此些畫面係全景影像偵測及車輛四周障礙物之偵測之圖式,車用影像整合單元12將所整合後之四個不同方向的平面影像28畫面組成一全景畫面並轉換成鳥瞰視圖於影像顯示裝置18,車身訊號接收裝置16所接收之車速 訊號22低於預設速度值時速六十公里時,如第九a圖所示,一旦車輛排檔訊號20係為R檔或車速低於預設速度值皆可執行全景影像偵測及可同時進行車輛四周障礙物偵測,包含車輛前、後、左及右方之位置;如第九b圖所示,於車身訊號接收裝置16所接收之車輛排檔訊號20為R檔時,準備執行平行停車與倒車入庫之停車之車道線路徑畫面預測時,同時執行四周障礙物偵測,可偵測車輛後方之障礙物位置。在影像顯示裝置18提供障礙物影像與警示音效提供駕駛人於車輛行駛狀況較低速或倒車時,以避免車輛四周之碰撞機率。
經由上述之說明,可見本發明可有效整合一般廣角鏡頭於車道線偏移偵測中,不需要再另外多安裝車道線偏移偵測所搭配的特殊鏡頭,亦或安裝可轉換擷取畫面之鏡頭直接將所擷取之扭曲畫面轉換成一般平面影像,更可直接整合於車用影像整合單元中,且又可以透過安裝於車輛前、後、左及右方之四個廣角鏡頭、各車身訊號及車用影像整合單元將車道線偏移、平行停車與倒車入庫之車道線路徑預測畫面、全景影像偵測及四周動態障礙物偵測,經由車用影像整合單元搭配不同車身訊號及廣角鏡頭之畫面,可自動轉換車輛行車之安全偵測,保障駕駛人之行車安全。
以上所述之實施例僅係為說明本發明之技術思想及特點,其目的在使熟習此項技藝之人士能夠瞭解本發明之內容並據以實施,當不能以之限定本發明之專利範圍,即大凡依本發明所揭示之精神所作之均等變化或修飾,仍應涵蓋在本發明之專利範圍。
10‧‧‧動態車道線偵測系統
12‧‧‧車用影像整合單元
14a~d‧‧‧廣角鏡頭
16‧‧‧車身訊號接收裝置
18‧‧‧影像顯示裝置
20‧‧‧車輛排檔訊號
22‧‧‧車速訊號
24‧‧‧方向盤轉角訊號

Claims (19)

  1. 一種動態車道線偵測系統,包含:至少四廣角鏡頭,其係安裝於一車輛之前、後、左及右方之位置;一車身訊號接收裝置,其係接收車輛排檔訊號、車速訊號及方向盤轉角訊號;一影像顯示裝置,其係提供影像畫面或音效輸出;及一車用影像整合單元,其係連接該至少四廣角鏡頭且電性連接該車身訊號接收裝置、該影像顯示裝置,該車用影像整合單元係整合該至少四廣角鏡頭所擷取之扭曲畫面與該車身訊號接收裝置所接收之該車輛排檔訊號、該車速訊號及該方向盤轉角訊號,並根據該車輛前方廣角鏡頭所擷取之畫面校正該車輛前方之扭曲畫面,再透過該車用影像整合單元整合校正後之平面影像並顯示前方車道線於該影像顯示裝置上。
  2. 如請求項1所述之動態車道線偵測系統,其中該車用影像整合單元係利用一影像校正方法校正該車輛前方廣角鏡頭所擷取之畫面,該影像校正方法係有在一凸形畫面上一弧長之長度取得二點座標,該二點座標以非平行線交叉投射產生新二點座標於一平面上,該平面上之該新二點座標之長度係透過該非平行線交叉之入射角與折射角比例及該弧長之長度相比計算出。
  3. 如請求項2所述之動態車道線偵測系統,其中該影像校正方法係可表示為: ;以及 其中,以上述方法表示之各參數分別為:(u 0,v 0)代表扭曲畫面中心點座標,(u,v)代表扭曲畫面之點座標,代表校正後之新點座標,ω則為曲率半徑,代表扭曲畫面之半徑及r代表校正後之新二點座標距離。
  4. 如請求項1所述之動態車道線偵測系統,其中該車用影像整合單元整合該車身訊號接收裝置中之該排檔訊號及該車輛前、後、左及右方之該廣角鏡頭所擷取之該扭曲畫面,經由該車用影像整合單元校正該扭曲畫面後,傳送該平面影像至該影像顯示裝置,其係顯示車輛之全景。
  5. 如請求項1所述之動態車道線偵測系統,其中該車用影像整合單元整合車身訊號接收裝置中之該車速訊號與該排檔訊號及該車輛左、右、前及後方四廣角鏡頭所擷取之該扭曲畫面,經由該車用影像整合單元校正該扭曲畫面後,傳送該該平面影像至該影像顯示裝置,其係提供四周障礙物偵測。
  6. 如請求項1所述之動態車道線偵測系統,其中該車用影像整合單元整合該車身訊號接收裝置中之該排檔訊號與該方向盤轉角訊號及該車輛後方之廣角鏡頭所擷取之該扭曲畫面,經該車用影像整合單元校正該扭曲畫面後,傳送該平面影像至該影像顯示裝置,其係顯示平行停車或倒車入庫之車道線路徑預測畫面。
  7. 如請求項1所述之動態車道線偵測系統,其中該至少四廣角鏡頭係為190 度廣角鏡頭。
  8. 如請求項1所述之動態車道線偵測系統,其中該廣角鏡頭係為互補金氧半導體感測元件(CMOS)或電荷耦合元件(CCD)。
  9. 如請求項1所述之動態車道線偵測系統,其中該影像顯示裝置之影像處理係為發光二極體顯示器(LED display)或液晶顯示器(LCD)。
  10. 如請求項1所述之動態車道線偵測系統,其中該影像顯示裝置之音效輸出係為喇叭或蜂鳴器。
  11. 如請求項1所述之動態車道線偵測系統,其中該車用影像整合單元係為數位訊號處理(DSP)、場式可程式閘陣列(FPGA)、車用電腦(Car PC)或系統級晶圓(SoC)。
  12. 一種動態車道線偵測方法,其步驟包含:透過安裝於車輛前、後、左及右方之廣角鏡頭擷取扭曲畫面;根據一影像校正方法校正該等扭曲畫面,並各對應產生一平面影像;判斷一車身訊號接收裝置所接收之排檔訊號係為非倒車檔且車速訊號高於預設之速度數值時,進行車道線偏移偵測;以及將該平面影像傳送至一影像顯示裝置,以顯示車道線影像並提供警示音效。
  13. 如請求項12所述之動態車道線偵測方法,其中在判斷該車身訊號接收裝置所接收之該排檔訊號若為倒車檔或該車速訊號低於該預設之速度數值時,則可選擇性進行四周障礙物偵測、全景影像偵測或平行停車與倒車入庫之車道線路徑預測畫面。
  14. 如請求項13所述之動態車道線偵測方法,其中若該車身訊號接收裝置所 接收之該車輛排檔訊號為該倒車檔或該車速訊號低於該預設之速度值時,可選擇該全景影像偵測。
  15. 如請求項13所述之動態車道線偵測方法,其中若該車身訊號接收裝置所接收之該排檔訊號為該倒車檔或車速訊號低於該預設之速度值時,可選擇該四周障礙物偵測。
  16. 如請求項13所述之動態車道線偵測方法,其中若該車身訊號接收裝置所接收之該排檔訊號為該倒車檔及又接收一方向盤轉角訊號時,可選擇該平行停車與倒車入庫之車道線路徑預測畫面。
  17. 如請求項12所述之動態車道線偵測方法,其中該影像校正方法校正該扭曲畫面係透過在一凸形畫面上一弧長之長度取得二點座標,該二點座標以非平行線交叉投射產生新二點座標於一平面上,該平面上之該新二點座標之長度係透過該非平行線交叉之入射角與折射角比例及該弧長之長度相比計算出。
  18. 如請求項17所述之動態車道線偵測方法,其中該影像校正方法係可表示為,其中上述公式之各參數分別為:(u 0,v 0)代表扭曲畫面中心點座標,(u,v)代表扭曲畫面之點座標,代表校正後之新點座標,ω則為曲率半徑,代表扭曲畫面之半徑及r代表校正後之新二點座標距離。
  19. 如請求項12所述之動態車道線偵測方法,其中該預設速度數值係為該車 用影像整合單元所預設之車速。
TW103112119A 2014-04-01 2014-04-01 Dynamic lane detection system and method TWI600558B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW103112119A TWI600558B (zh) 2014-04-01 2014-04-01 Dynamic lane detection system and method
CN201410165800.9A CN103991448B (zh) 2014-04-01 2014-04-23 动态车道线检测系统及方法
US14/317,471 US9508016B2 (en) 2014-04-01 2014-06-27 Dynamic lane line detection system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW103112119A TWI600558B (zh) 2014-04-01 2014-04-01 Dynamic lane detection system and method

Publications (2)

Publication Number Publication Date
TW201538364A true TW201538364A (zh) 2015-10-16
TWI600558B TWI600558B (zh) 2017-10-01

Family

ID=51305863

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103112119A TWI600558B (zh) 2014-04-01 2014-04-01 Dynamic lane detection system and method

Country Status (3)

Country Link
US (1) US9508016B2 (zh)
CN (1) CN103991448B (zh)
TW (1) TWI600558B (zh)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160121887A1 (en) * 2014-11-04 2016-05-05 Hyundai Motor Company Apparatus and method for detecting collision object of vehicle
CN104309606B (zh) * 2014-11-06 2017-05-03 中科院微电子研究所昆山分所 基于360度全景的车道偏离预警方法
JP6344275B2 (ja) * 2015-03-18 2018-06-20 トヨタ自動車株式会社 車両制御装置
US9821812B2 (en) * 2015-04-23 2017-11-21 Ford Global Technologies, Llc Traffic complexity estimation
JP6613795B2 (ja) * 2015-10-16 2019-12-04 株式会社デンソー 表示制御装置および車両制御装置
DE102016202594A1 (de) * 2016-02-19 2017-08-24 Robert Bosch Gmbh Verfahren und Vorrichtung zum Interpretieren einer Fahrzeugumgebung eines Fahrzeugs sowie Fahrzeug
WO2017154317A1 (ja) * 2016-03-09 2017-09-14 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム
WO2017179198A1 (ja) * 2016-04-15 2017-10-19 三菱電機株式会社 駐車支援装置
CN106080774A (zh) * 2016-07-13 2016-11-09 重庆长安汽车股份有限公司 引导式泊车系统及方法
WO2018027500A1 (zh) * 2016-08-08 2018-02-15 深圳市锐明技术股份有限公司 车道线检测方法及装置
KR101949438B1 (ko) 2016-10-05 2019-02-19 엘지전자 주식회사 차량용 디스플레이 장치 및 이를 포함하는 차량
TWI622297B (zh) * 2016-12-19 2018-04-21 能於車輛轉彎時同步顯示後方全景與轉彎畫面的顯示方法
CN106778661A (zh) * 2016-12-28 2017-05-31 深圳市美好幸福生活安全系统有限公司 一种基于形态学变换和自适应阈值的快速车道线检测方法
DE102017200216A1 (de) * 2017-01-09 2018-07-12 Bayerische Motoren Werke Aktiengesellschaft Steuereinheit und Verfahren zur Bereitstellung eines Korrekturzugs für ein Rückfahrassistenzsystem
EP3561774A4 (en) 2017-01-23 2019-11-20 Samsung Electronics Co., Ltd. METHOD AND DEVICE FOR GENERATING AN IMAGE TO INDICATE AN OBJECT ON THE PERIPHERY OF A VEHICLE
CN110969068B (zh) * 2018-09-30 2024-08-02 北京奇虎科技有限公司 绘制倒车线的方法及装置
KR20200056497A (ko) * 2018-11-09 2020-05-25 현대자동차주식회사 자율 발렛 주차를 지원하는 시스템 및 방법, 그리고 이를 위한 인프라 및 차량
KR20200090527A (ko) * 2019-01-21 2020-07-29 현대자동차주식회사 차선 인식 장치 및 그 방법
JP2020163903A (ja) * 2019-03-28 2020-10-08 本田技研工業株式会社 表示制御装置、表示制御方法、及びプログラム
CN110316206B (zh) * 2019-05-20 2020-11-06 广汽蔚来新能源汽车科技有限公司 车载全景影像显示自控方法、装置和计算机设备
CN110775063B (zh) * 2019-09-25 2021-08-13 华为技术有限公司 一种车载设备的信息显示方法、装置及车辆
JP7259698B2 (ja) * 2019-10-17 2023-04-18 トヨタ自動車株式会社 自動駐車システム
US11731639B2 (en) * 2020-03-03 2023-08-22 GM Global Technology Operations LLC Method and apparatus for lane detection on a vehicle travel surface
JP2022123239A (ja) * 2021-02-12 2022-08-24 本田技研工業株式会社 区画線認識装置
US12084077B2 (en) * 2021-05-03 2024-09-10 Nissan North America, Inc. System and method of curb management for a vehicle

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06282793A (ja) * 1993-03-30 1994-10-07 Isuzu Motors Ltd 車線逸脱警報装置
US7576767B2 (en) 2004-07-26 2009-08-18 Geo Semiconductors Inc. Panoramic vision system and method
DE102004057296A1 (de) * 2004-11-26 2006-06-08 Daimlerchrysler Ag Lane-Departure-Warning mit Unterscheidung zwischen Fahrbahnrandmarkierung und baulicher Begrenzung des Fahrbahnrandes
JP2009147628A (ja) * 2007-12-13 2009-07-02 Denso Corp 車載用画像処理装置及び車載用画像表示装置
TW200927537A (en) 2007-12-28 2009-07-01 Altek Corp Automobile backup radar system that displays bird's-eye view image of automobile
CN101487895B (zh) 2008-01-15 2011-07-20 华晶科技股份有限公司 显示鸟瞰车辆图像的倒车雷达系统
TWM353849U (en) * 2008-09-17 2009-04-01 Jyh-Chiang Liou Integrated driving assistance apparatus
JP5068779B2 (ja) * 2009-02-27 2012-11-07 現代自動車株式会社 車両周囲俯瞰画像表示装置及び方法
KR100956858B1 (ko) * 2009-05-19 2010-05-11 주식회사 이미지넥스트 차량 주변 영상을 이용하는 차선 이탈 감지 방법 및 장치
TW201103787A (en) * 2009-07-31 2011-02-01 Automotive Res & Testing Ct Obstacle determination system and method utilizing bird's-eye images
TWI365145B (en) * 2009-11-02 2012-06-01 Ind Tech Res Inst Method and system for asisting driver
US8669857B2 (en) * 2010-01-13 2014-03-11 Denso International America, Inc. Hand-held device integration for automobile safety
CN201646714U (zh) 2010-01-26 2010-11-24 德尔福技术有限公司 泊车导向系统
TW201226237A (en) 2010-12-16 2012-07-01 Weltrend Semiconductor Inc Calibration circuit for automatically calibrating a view image around a car and method thereof
US20120262578A1 (en) 2011-04-18 2012-10-18 Acard Technology Corp. Vehicular around-view driving monitor and recorder
US8611598B2 (en) 2011-07-26 2013-12-17 Harman International (China) Holdings Co., Ltd. Vehicle obstacle detection system
JP5867273B2 (ja) * 2012-04-27 2016-02-24 富士通株式会社 接近物体検知装置、接近物体検知方法及び接近物体検知用コンピュータプログラム
CN202806557U (zh) 2012-06-14 2013-03-20 北京万得嘉瑞汽车技术有限公司 一种集成全景泊车和车道偏离报警功能的驾驶辅助系统
TWM444536U (zh) * 2012-09-12 2013-01-01 Acard Technology Corp 整合式安全行車記錄器系統
US9445011B2 (en) * 2012-10-22 2016-09-13 GM Global Technology Operations LLC Dynamic rearview mirror adaptive dimming overlay through scene brightness estimation
CN103192829A (zh) * 2013-03-22 2013-07-10 上海交通大学 一种基于环视的道路偏离预警方法和装置

Also Published As

Publication number Publication date
US20150278611A1 (en) 2015-10-01
US9508016B2 (en) 2016-11-29
TWI600558B (zh) 2017-10-01
CN103991448A (zh) 2014-08-20
CN103991448B (zh) 2017-04-12

Similar Documents

Publication Publication Date Title
TWI600558B (zh) Dynamic lane detection system and method
US9858639B2 (en) Imaging surface modeling for camera modeling and virtual view synthesis
US20140114534A1 (en) Dynamic rearview mirror display features
JP2016082258A (ja) 車載カメラ較正装置、画像生成装置、車載カメラ較正方法、画像生成方法
KR20160041445A (ko) 영상인식을 통한 트레일러 궤적 추정 시스템 및 방법
US10869002B2 (en) Vehicle camera device for capturing the surroundings of a motor vehicle and driver assistance device for detecting objects with such a vehicle camera device
TWI585723B (zh) 車輛監控系統及其方法
TWI842952B (zh) 攝像裝置
CN207860066U (zh) 一种全景记录辅助控制系统
TW201605247A (zh) 影像處理系統及方法
TWI622297B (zh) 能於車輛轉彎時同步顯示後方全景與轉彎畫面的顯示方法
US10775791B2 (en) Image processing apparatus and method for vehicle
TW201420398A (zh) 行車安全監控系統及方法
JP5477394B2 (ja) 車両周辺監視装置
JP2020010123A (ja) 車載撮影装置、撮影システム及び撮影方法
JP2018113622A (ja) 画像処理装置、画像処理システム、及び、画像処理方法
JP6252756B2 (ja) 画像処理装置並びに運転支援装置およびナビゲーション装置およびカメラ装置
KR102175961B1 (ko) 차량 후방 주차 가이드 장치
JP2018121223A (ja) 画像処理装置および車載撮像装置
TWM484535U (zh) 車輛監視系統及設有該車輛監視系統之車輛
CN204196780U (zh) 一种270度辅助泊车系统
JP2005159541A (ja) 車載撮像装置
KR20230068653A (ko) 차량용 어라운드 뷰 시스템
TWI398371B (zh) 汽車後視系統及具有該後視系統之汽車
JP2024131942A (ja) 移動体、画像処理装置、コンピュータプログラム、及び撮像装置の設置方法