TWI482121B - The method of correcting the color of the image - Google Patents
The method of correcting the color of the image Download PDFInfo
- Publication number
- TWI482121B TWI482121B TW100114793A TW100114793A TWI482121B TW I482121 B TWI482121 B TW I482121B TW 100114793 A TW100114793 A TW 100114793A TW 100114793 A TW100114793 A TW 100114793A TW I482121 B TWI482121 B TW I482121B
- Authority
- TW
- Taiwan
- Prior art keywords
- image
- orthophoto
- color correction
- gray value
- color
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 31
- 238000012937 correction Methods 0.000 claims description 49
- 238000010586 diagram Methods 0.000 description 10
- 230000005855 radiation Effects 0.000 description 10
- 238000006073 displacement reaction Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 2
- 238000000265 homogenisation Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000002860 competitive effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/13—Satellite images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Astronomy & Astrophysics (AREA)
- Remote Sensing (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
Description
本發明係有關於一種多航照於正射影像色彩校正之方法，尤指涉及一種配合幾何對位進行影像色彩平衡，並勻化影像間之接縫線，提升多輻影像鑲嵌之品質，特別係指可有效地改正影像間之色階差異，進而提升大範圍正射影像品質之多航照正射影像色彩校正方法。
在地理資訊系統中，正射影像係常見之資料之一。由航照影像所製作之正射影像，由於其空間解析度高，更被廣泛地使用於都市管理或都市計畫等應用。正射影像為改正攝影傾角造成之傾斜位移與物空間中高程起伏產生之高差位移。傳統之正射影像(O’Neill and Dowman,1988. The generation of epipolar synthetic stereo mates for SPOT images using a DEM,International Archives of Photogrammetry and Remote Sensing,27(B3): 587-598.；Kim et al.,2001. Development of robust algorithm for transformation of a 3D object point onto a 2D image point for linear pushbroom imagery,Photogrammetric Engineering and Remote Sensing,67(4): 449-452.)僅考慮地形所產生之高差位移，而真實正射校正除了考慮地形，亦需校正地表物所造成之幾何變形。
主要之地表物體包含房屋、道路及樹。利用模型完整地描述地表覆蓋面，就現階段而言是不可能的，目前可行之作法係針對不同之目標物使用簡化之模型。例如，在針對都會區房屋密集之區域，在演算法中使用數值房屋模型與數值地表模型(Digital Elevation Models,DEM)以給定目標物正確之位置並予以改正(Zhou et al,2005. A Comprehensive study on urban true orthorectification,IEEE Transactions on Geoscience and Remote Sensing 43(9):2138-2147.)。
李訴卉於2007年提出一「整合房屋、道路及地形模型之高解析影像正射改正」之方法。其選擇一張影像為主影像，利用H-Buffer演算法進行遮蔽偵測，再使用不同視角之副影像補償主影像之遮蔽區，並於補償區之接縫線進行勻化降低不同影像間色彩差異之影像。亦有研究使用影像修補技術(Image Painting)填補真實正射影像之遮蔽區(Wang,2009. The True Orthophoto Generation for Frame Perspective Image,Proceedings of the 30th Asian Conference on Remote Sensing,Oct. 18-23,Beijing,China,CD-ROM.)。
由上述可知，正射影像具高精度之製圖程序，使其應用性更佳，惟傳統上僅考慮地形所產生之高差位移，而真實正射校正除了考慮地形，亦需校正地表建物所造成之幾何變形。以往對於正射影像或真實正射影像之研究，均著重於幾何處理。隨著正射影像之應用性以及空載數位航照系統性能之提升，使用多張航照產生大範圍正射影像，或利用多張影像進行遮蔽補償以降低遮蔽區係不可避免的。然而，利用多張影像產生正射影像，係需考慮影像間之色彩一致性，因為使用多張影像進行正射影像之產製，尤其包含不同時期之影像，影像間之色彩差異對於成果呈現品質之影響甚大，故，一般習用者係無法符合使用者於實際使用時之所需。
面對競爭日益激烈之商業市場及嚴格之位置精度要求，目前傳統上使用之色彩改正係一張影像配合一改正參數，將全幅影像之輻射反應調至相似，後續再勻化影像間之接縫線之工藝已無法滿足技術及市場需求。職是之故，鑑於習知技術中所產生之缺失弊端，實有急待改進之必要，針對既有之缺失，將多張影像之色彩平衡處理加以改良，發展一種能避免已知技術之方法之缺點並且能夠進行符合實用進步性與產業利用性之方法有其必要。
本發明之主要目的係在於，克服習知技藝所遭遇之上述問題並提供一種配合幾何對位進行影像色彩平衡，並勻化影像間之接縫線，提升多輻影像鑲嵌之品質，可有效地改正影像間之色階差異，進而提升大範圍正射影像品質之多航照正射影像色彩校正方法。
本發明之次要目的係在於，提供一種考量物空間對應關係，進行兩階段之色彩調整：第一階段考量影像間彼此之對位關係，將對應同樣地表位置之影像範圍，計算各張影像之色彩改正參數，因此在同一張影像內，不同位置各別有其改正參數，可使本發明色彩平衡之效果較佳；第二階段勻化影像間之接縫線，藉由消除填補後所產生之接縫線，以進一步提升真實正射校正成果之影像品質。
為達以上之目的，本發明係一種多航照於正射影像色彩校正之方法，係利用航照影像、網格式數值地形模型、及含鑲嵌線位置之正射影像或真實正射影像，進行影像色彩平衡並勻化影像間之接縫線。其主要包括全區域色彩校正及局部色彩校正兩步驟，其中該全區域色彩校正步驟係使用該航照影像配合該數值地形模型進行全區域色彩校正，使每張影像個別產生一組灰度值對照表，再將該正射影像或真實正射影像依組成之航照影像與其灰度值對照表，進行整張影像色彩之調整；以及該局部色彩校正步驟係針對該正射影像或真實正射影像中鑲嵌線之位置，進行局部色彩校正。
請參閱『第1圖』所示，係本發明之輻射校正流程示意圖。如圖所示：本發明係一種多航照於正射影像色彩校正之方法，係利用航照影像、網格式數值地形模型(Digital Elevation Models,DEM)、及含鑲嵌線位置之正射影像或真實正射影像，配合幾何對位進行影像色彩平衡，並勻化影像間之接縫線，以提升多輻影像鑲嵌之品質，其至少包括下列步驟：
(A)全區域色彩校正步驟11：使用該航照影像配合該數值地形模型進行全區域色彩校正，使每張影像個別產生一組灰度值對照表，再將該正射影像或真實正射影像依組成之航照影像與其灰度值對照表，進行整張影像色彩之調整，其中，該航照影像係含物像關係相關參數資料之高重疊航遙測影像；以及
(B)局部色彩校正步驟12：針對該正射影像或真實正射影像中鑲嵌線之位置，進行局部色彩校正。
請參閱『第2圖～第4圖』所示，係分別為本發明擷取相同位置之影像模版示意圖、本發明建立之灰度值對照表示意圖、及本發明建立之多組灰度值對照表示意圖。如圖所示：上述步驟(A)全區域色彩校正，係以地面點反投影之方式，在多張航照影像中擷取相同位置之共軛影像模版，如第2圖所示。利用多張影像模版之灰度值統計值作為參考，以第3圖為例，圖中虛線及鏈線代表兩張影像模版各別之灰度值統計，實線則為此模版之參考值。以直方圖匹配法建立此影像模版之灰度值對照表，此灰度值對照表對應其影像模版中心位置；經由上述方式以一固定距離建立多組灰度值對照表，如第4圖所示，圖中線條代表航照影像之拍攝範圍，其中，實線、虛線與短橫虛線代表為不同航帶之影像，顯示有三條航帶共12張影像。而前述之一固定距離，例如以100公尺為距離建立控制點據點，圖中三角形即代表控制點位置，該些控制點之平面位置已知，其高程坐標則由該數值地形模型提供，由地面坐標反投影至影像中，依定義模版大小，如400像元長寬之矩形，擷取共軛影像模版，並統計每張影像模版之灰度值對照表。藉此，將每張正射影像或真實正射影像依灰度值對照表及其對應之航照影像位置，以內插方式調整影像灰度值。
請參閱『第5圖及第6圖』所示，係分別為本發明之局部色彩平衡示意圖、及本發明之輻射校正成果示意圖。如圖所示：上述步驟(B)局部色彩校正，係針對正射影像鑲嵌之接縫線，或真實正射影像遮蔽補償之接縫線進行處理。本發明所採用之方法係在接縫線周圍產生一環域。此環域之影像資訊係來自鑲嵌影像或補償之主影像及副影像，並且以距離之倒數為權重，進行加權平均得到最後之灰度值，如第5圖所示，左側圖例中可明顯看出黑色影像與白色影像交界處之接縫線。本發明係在接縫線周圍產生一環域，如圖中白底黑框線條。在此環域中心接縫線處之顏色取兩邊影像之平均，往兩側則以距離之倒數為權重漸變顏色，如右側圖例所示。第6圖為一進行輻射校正前後之成果實例，其中左側圖例係顯示無輻射校正處理之影像，右側圖例則係顯示加入輻射校正處理之影像。
藉此，本發明之多航照正射影像色彩校正方法係考量物空間對應關係，進行兩階段之色彩調整。第一階段考量影像間彼此之對位關係，將對應同樣地表位置之影像範圍，計算各張影像之色彩改正參數，因此在同一張影像內，不同位置各別有其改正參數。故在多張影像之色彩平衡部分，係配合物空間幾何對位進行輻射改正，非全幅影像一致之調整方式，進而可使本發明色彩平衡之效果較佳；第二階段勻化影像間之接縫線，藉由消除填補後所產生之接縫線，以進一步提升真實正射校正成果之影像品質。
綜上所述，本發明係一種多航照於正射影像色彩校正之方法，可有效改善習用之種種缺點，係針對正射或真實正射影像，以多航照影像進行影像間之色彩平衡，配合正射處理中已有之地物高程資訊，由物空間反投影於各影像上取得共軛影像模版，使共軛區塊之輻射反應相近，並在影像鑲嵌線部分，額外進行勻化處理，以降低光譜值不連續而造成之接縫線；經研究結果顯示，本發明係可有效地改正影像間之色階差異，達到提升大範圍正射影像品質，進而使本發明之產生能更進步、更實用、更符合使用者之所須，確已符合發明專利申請之要件，爰依法提出專利申請。
惟以上所述者，僅為本發明之較佳實施例而已，當不能以此限定本發明實施之範圍；故，凡依本發明申請專利範圍及發明說明書內容所作之簡單的等效變化與修飾，皆應仍屬本發明專利涵蓋之範圍內。
11．．．全區域色彩校正步驟
12．．．局部色彩校正步驟
第1圖，係本發明之輻射校正流程示意圖。
第2圖，係本發明擷取相同位置之影像模版示意圖。
第3圖，係本發明建立之灰度值對照表示意圖。
第4圖，係本發明建立之多組灰度值對照表示意圖。
第5圖，係本發明之局部色彩平衡示意圖。
第6圖，係本發明之輻射校正成果示意圖。
11．．．全區域色彩校正步驟
12．．．局部色彩校正步驟
Claims (7)
- 一種多航照於正射影像色彩校正之方法，係利用航照影像、網格式數值地形模型(Digital Elevation Models,DEM)、及含鑲嵌線位置之正射影像或真實正射影像，進行影像色彩平衡並勻化影像間之接縫線，其至少包括下列步驟：(A)全區域色彩校正步驟：使用該航照影像配合該數值地形模型進行全區域色彩校正，使每張影像個別產生一組灰度值對照表，再將該正射影像或真實正射影像依組成之航照影像與其灰度值對照表，進行整張影像色彩之調整；以及(B)局部色彩校正步驟：針對該正射影像或真實正射影像中鑲嵌線之位置，進行局部色彩校正。
- 依申請專利範圍第1項所述之多航照於正射影像色彩校正之方法，其中，該航照影像係含物像關係相關參數資料之高重疊航遙測影像。
- 依申請專利範圍第1項所述之多航照於正射影像色彩校正之方法，其中，該步驟(A)全區域色彩校正，係以地面點反投影之方式，在多張航照影像中擷取相同位置之共軛影像模版，利用多張影像模版之灰度值統計值作為參考，以直方圖匹配法統計每張影像模版之灰度值對照表，並以一固定距離建立多組灰度值對照表。
- 依申請專利範圍第3項所述之多航照於正射影像色彩校正之方法，其中，每一組灰度值對照表係對應每張影像模版中心位置。
- 依申請專利範圍第1項所述之多航照於正射影像色彩校正之方法，其中，該步驟(A)每張正射影像或真實正射影像依灰度值對照表及其對應之航照影像位置，以內插方式調整影像灰度值。
- 依申請專利範圍第1項所述之多航照於正射影像色彩校正之方法，其中，該步驟(B)局部色彩校正，係針對正射影像鑲嵌之接縫線，或真實正射影像遮蔽補償之接縫線進行處理，其在接縫線周圍產生一環域，以距離之倒數為權重，進行加權平均得到最後之灰度值。
- 依申請專利範圍第6項所述之多航照於正射影像色彩校正之方法，其中，該環域之影像資訊係來自鑲嵌影像或補償之主影像及副影像。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW100114793A TWI482121B (zh) | 2011-04-28 | 2011-04-28 | The method of correcting the color of the image |
| US13/169,772 US8577139B2 (en) | 2011-04-28 | 2011-06-27 | Method of orthoimage color correction using multiple aerial images |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW100114793A TWI482121B (zh) | 2011-04-28 | 2011-04-28 | The method of correcting the color of the image |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TW201243764A TW201243764A (en) | 2012-11-01 |
| TWI482121B true TWI482121B (zh) | 2015-04-21 |
Family
ID=47067937
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW100114793A TWI482121B (zh) | 2011-04-28 | 2011-04-28 | The method of correcting the color of the image |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US8577139B2 (zh) |
| TW (1) | TWI482121B (zh) |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2613295B1 (en) * | 2012-01-03 | 2017-03-08 | Harman Becker Automotive Systems GmbH | Geographical map landscape texture generation on the basis of hand-held camera images |
| CN103823981B (zh) * | 2014-02-28 | 2016-08-17 | 武汉大学 | 一种数字高程模型辅助的卫星影像区域网平差方法 |
| CN103871072B (zh) * | 2014-04-04 | 2017-06-27 | 武汉大学 | 基于投影数字高程模型的正射影像镶嵌线自动提取方法 |
| US9734599B2 (en) | 2014-10-08 | 2017-08-15 | Microsoft Technology Licensing, Llc | Cross-level image blending |
| US10546195B2 (en) * | 2016-12-02 | 2020-01-28 | Geostat Aerospace & Technology Inc. | Methods and systems for automatic object detection from aerial imagery |
| CN110111376B (zh) * | 2019-04-30 | 2022-10-04 | 安徽理工大学 | 一种采煤沉陷水域面积计算方法 |
| CN112802418B (zh) * | 2019-11-13 | 2024-06-11 | 瑞昱半导体股份有限公司 | 面板色温匹配校正方法与系统 |
| US20210349922A1 (en) * | 2020-05-05 | 2021-11-11 | Jane Huang Hsu | METHOD OF RECOGNIZING AN OBJECT IN AN IMAGE USING iMaG AUTOMATED GEOREGSTRATION SYSTEM GENERATED MULTI-ORBIT SATELLITE IMAGERY WITH A CADSTRAL DATA BASED IMAGERY BASE |
| CN112734630B (zh) * | 2020-12-30 | 2022-09-13 | 广州极飞科技股份有限公司 | 正射影像处理方法、装置、设备及存储介质 |
| CN113610714B (zh) * | 2021-05-12 | 2022-02-22 | 珠江水利委员会珠江水利科学研究院 | 一种基于遥感的河口海岸水动力信息增强显示方法 |
| CN113537154B (zh) * | 2021-08-20 | 2022-08-12 | 中国美术学院 | 无人机建筑航拍图神经网络自动校色方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6757445B1 (en) * | 2000-10-04 | 2004-06-29 | Pixxures, Inc. | Method and apparatus for producing digital orthophotos using sparse stereo configurations and external models |
| TW200840993A (en) * | 2007-04-04 | 2008-10-16 | Univ Nat Central | Ortho-rectification method of photogrammetry with high-spatial resolution |
| CN101709962A (zh) * | 2005-09-12 | 2010-05-19 | 特里伯耶拿有限公司 | 测量仪器和使用测量仪器提供测量数据的方法 |
| TW201022708A (en) * | 2008-12-11 | 2010-06-16 | Univ Nat Central | Method of change detection for building models |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| IL155034A0 (en) * | 2003-03-23 | 2004-06-20 | M A M D Digital Data Proc Syst | Automatic aerial digital photography and digital data processing systems |
| US7660441B2 (en) * | 2004-07-09 | 2010-02-09 | Southern California, University | System and method for fusing geospatial data |
| US7343051B1 (en) * | 2005-03-07 | 2008-03-11 | Hsu Shin-Yi | Method of recognizing an object in an image using multi-sensor integration through conditionally optimal geoscene generation and registration |
| US8374428B2 (en) * | 2010-12-05 | 2013-02-12 | Microsoft Corporation | Color balancing for partially overlapping images |
-
2011
- 2011-04-28 TW TW100114793A patent/TWI482121B/zh not_active IP Right Cessation
- 2011-06-27 US US13/169,772 patent/US8577139B2/en not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6757445B1 (en) * | 2000-10-04 | 2004-06-29 | Pixxures, Inc. | Method and apparatus for producing digital orthophotos using sparse stereo configurations and external models |
| CN101709962A (zh) * | 2005-09-12 | 2010-05-19 | 特里伯耶拿有限公司 | 测量仪器和使用测量仪器提供测量数据的方法 |
| TW200840993A (en) * | 2007-04-04 | 2008-10-16 | Univ Nat Central | Ortho-rectification method of photogrammetry with high-spatial resolution |
| TW201022708A (en) * | 2008-12-11 | 2010-06-16 | Univ Nat Central | Method of change detection for building models |
Non-Patent Citations (1)
| Title |
|---|
| 楊善智，"數值高程模型(DEM)之品質評估"，國立成功大學碩士論文，2007/06/30， http://ndltd.ncl.edu.tw/cgi-bin/gs32/gsweb.cgi/ccd=PY0JSN/record?r1=1&h1=1. 李訢卉、陳良健， "整合房屋, 道路及地型模型之航空影像真實正射校正."， Journal of Photogrammetry and Remote Sensing ，第13卷第2期，第101-116頁，2008年6月，http://www.csprs.org.tw/Temp/200806-13-2-101-116.pdf * |
Also Published As
| Publication number | Publication date |
|---|---|
| US20120275698A1 (en) | 2012-11-01 |
| US8577139B2 (en) | 2013-11-05 |
| TW201243764A (en) | 2012-11-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI482121B (zh) | The method of correcting the color of the image | |
| CN110648398B (zh) | 基于无人机航摄数据的正射影像实时生成方法及系统 | |
| CN110300292B (zh) | 投影畸变校正方法、装置、系统及存储介质 | |
| TWI555378B (zh) | 一種全景魚眼相機影像校正、合成與景深重建方法與其系統 | |
| CN106875467B (zh) | 三维城市模型快速更新方法 | |
| CN105243637B (zh) | 一种基于三维激光点云进行全景影像拼接方法 | |
| CN109919911B (zh) | 基于多视角光度立体的移动三维重建方法 | |
| CN104361628A (zh) | 一种基于航空倾斜摄影测量的三维实景建模系统 | |
| CN109255808B (zh) | 基于倾斜影像的建筑物纹理提取方法和装置 | |
| CN105005964B (zh) | 基于视频序列影像的地理场景全景图快速生成方法 | |
| CN109827548A (zh) | 无人机航测数据的处理方法 | |
| CN108182722B (zh) | 一种三维物体边缘优化的真正射影像生成方法 | |
| CN111091076B (zh) | 基于立体视觉的隧道限界数据测量方法 | |
| JP2003141575A (ja) | 三次元データベース生成システム及び三次元データベース生成方法 | |
| Soycan et al. | Perspective correction of building facade images for architectural applications | |
| CN114998399B (zh) | 一种异源光学遥感卫星影像立体像对预处理方法 | |
| CN112097746B (zh) | 用于三维可视化的倾斜摄影数据采集方法 | |
| CN108830921A (zh) | 基于入射角度的激光点云反射强度纠正方法 | |
| CN109949232A (zh) | 图像与rtk结合的测量方法、系统、电子设备及介质 | |
| CN112270698A (zh) | 基于最邻近曲面的非刚性几何配准方法 | |
| CN108629742B (zh) | 真正射影像阴影检测与补偿方法、装置及存储介质 | |
| CN112862683A (zh) | 一种基于弹性配准和网格优化的邻接图像拼接方法 | |
| CN116086411A (zh) | 数字地形图生成方法、装置、设备和可读存储介质 | |
| JP2013196388A (ja) | 画像処理装置、画像処理方法、および画像処理プログラム | |
| CN112150630A (zh) | 用固定翼加多旋翼无人机解决工业园区高精度建模方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | Annulment or lapse of patent due to non-payment of fees |