TWI686773B - 機器視覺辨識功能於製程環境之修正方法 - Google Patents

Abstract

一種機器視覺辨識功能於製程環境之修正方法，首先用視覺辨識裝置於基礎環境取得標準檢測片的影像，之後對影像進行鏡頭扭曲校正過程，及包括二值化轉換的影像處理過程得到基礎比對影像，接著，再用視覺辨識裝置分別取得標準檢測片組於不同的製程環境中的影像後，以相同的過程得到個別欲計算比對圖像，最後逐一將欲計算比對圖像和基礎影像進行差異比對而得到多數圖像補償係數，當將該等圖像補償係數於用視覺辨識裝置在不同的製程環境欲取得影像時加入，即可於不同的製程環境取得正確的影像。

Description

機器視覺辨識功能於製程環境之修正方法

本發明是有關於一種光學影像處理的方法，特別是指一種機器視覺辨識功能於相關於真空及熱輻射環境下的修正方法。

凍乾技術為常見的物料乾燥技術，具有維持物料樣貌、避免變質以及室溫存放等優點，是目前應用於水果、花卉、蔬菜等有機物保存的重要方式之一，在整個脫水乾燥的過程中若能控制得宜，可以最大幅度保留是關於有機物的外觀形狀、顏色、風味、芳香，也因此，如何即時監測脫水乾燥的過程，是業界重要的技術發展方向之一。

一般而言，冷凍乾燥的過程是將有機物放置於腔體後，控制腔體急遽降溫使有機物處於低溫環境中，繼之，再將腔體抽真空、升溫，使有機物中的水分直接自固態轉為氣態離開有機物，而完成乾燥過程。目前，在冷凍乾燥的過程中，雖然可以有效控制關於腔體中的壓力、溫度、濕度等種種製程條件，也能夠藉由例如安裝攝影鏡頭看到腔體中的製程狀況，然而，因為在冷凍乾燥的過程包括了溫度、壓力、濕度、光學等環境條件的劇烈變化，所以，即便安裝了攝影鏡頭監測腔體中的製程狀況，但因為環境的溫度、壓力、濕度、光學的劇烈變化而使得攝影鏡頭擷取到的影像出現誤差，特別是根本無法正確檢測到待乾燥的有機物的外觀形狀、顏色的變化。因此，業界需要可以解決此等關於機器視覺辨識功能的方案，以修正檢測誤差。

因此，本發明的目的，即在提供一種可以修正環境條件變化所造成的機器視覺檢測的誤差，以正確檢測、觀察到因為製程變化所導致物料本身外觀形狀、顏色的修正方法。

於是，本發明一種機器視覺辨識功能於製程環境之修正方法，包含一步驟(a)、一步驟(b)、一步驟(c)、一步驟(d)，及一步驟(e)。

該步驟(a)是選擇一組標準檢測片組，用一組適用於觀察製程中物件狀況的視覺辨識裝置於一個基礎環境下取得一幅對應於該標準檢測片組的影像。

該步驟(b)是對步驟(a)取得的影像進行一個鏡頭扭曲校正過程，及一個至少包括二值化轉換的影像處理過程得到一幅基礎比對影像。

該步驟(c)是用該視覺辨識裝置分別取得該標準檢測片組於不同的製程環境中的影像，以相同於該步驟(b)的鏡頭扭曲校正過程和影像處理過程，得到多數幅欲計算比對圖像。

該步驟(d)是逐一將該等欲計算比對圖像和該基礎影像進行差異比對，得到多個分別對應於不同的製程環境的圖像補償係數。

該步驟(e)是將該等分別對應於不同的製程環境的圖像補償係數於用該視覺辨識裝置在不同的製程環境欲取得影像時加入，即可於不同的製程環境中用該視覺辨識裝置取得正確的影像。

較佳地，該標準檢測片組至少包含分別為紅色、綠色、藍色的圓形標準檢測片。

較佳地，該視覺辨識裝置至少包含一用於在該等製程中於取得物件的清晰影像的鏡頭。

較佳地，該鏡頭扭曲校正過程是以鏡頭校正矩陣將對應於該標準檢測片組的每一圓形標準檢測片的影像校正為正圓。

較佳地，該影像處理過程包括雜訊移除、除法去背處理、轉換灰階圖片，及二值化處理。

較佳地，該步驟(d)以至少包括分割物件方法和像素統計方法逐一將該等欲計算比對圖像和該基礎影像進行差異比對。

較佳地，該分割物件方法是對以至少進行過二值化處理的影像用物件組成函式進行分割，以計算影像上預定圖形的直徑，及面積其中至少一，以得到關於型態的圖像補償係數。

較佳地，該像素統計方法是對以至少進行過二值化處理以選取出預定區域的影像自RGB色彩空間轉換至HSV色彩空間後進行像素統計，再對像素統計結果進行歸一化運算，以得到關於色相的圖像補償係數。

本發明的功效在於：修正製程環境變化而造成機器視覺檢測的誤差，而能正確檢測出不同製程環境下，因製程變化所導致物料真實的外觀形貌、顏色的改變。

在本發明被詳細描述前，應當注意在以下的說明內容中，類似的元件是以相同的編號來表示。

參閱圖1，本發明一種機器視覺辨識功能於製程環境之修正方法的一實施例，包含一步驟(a)11、一步驟(b)12、一步驟(c)13、一步驟(d)14，及一步驟(e)15，用於修正製程環境變化而造成機器視覺檢測的誤差，而能正確檢測出不同製程環境下，因製程變化所導致物料真實的外觀形貌、顏色的改變，特別適用於例如冷凍乾燥等關於真空、熱輻射製程環境變化劇烈的機器視覺檢測過程。

配合參閱附件1，先以該步驟(a)11選擇一套標準檢測片組，用一組適用於觀察製程中物件狀況的視覺辨識裝置於一基礎環境下取得對應於該標準檢測片組的影像；較佳的，該套標準檢測片組至少須包括分別為紅色、綠色、藍色的圓形標準檢測片，該視覺辨識裝置至少包含一個用於在該等製程中於取得物件的清晰影像的鏡頭。在本實施例中，是用印刷四分色模式（CMYK）經「全彩印刷」的紅(0，100，100，0)、黃(0，0，100，0)、綠(100，0，100，0)、藍(100，100，0，0)、紫(45，100，0，0)五色、直徑為47mm的正圓形標準檢測片。

接著以該步驟(b)12對步驟(a)11取得的影像進行一鏡頭扭曲校正過程，及一至少包括二值化轉換的影像處理過程得到一組基礎比對影像，其中，該鏡頭扭曲校正過程是以鏡頭校正矩陣將對應於該標準檢測片組的每一圓形標準檢測片的影像校正為正圓，該影像處理過程包括雜訊移除、除法去背處理、轉換灰階圖片，及二值化處理。

該步驟(c)13是用該視覺辨識裝置分別取得該標準檢測片組於不同的製程環境中的影像，以相同於該步驟(b)12的鏡頭扭曲校正過程和影像處理過程，得到多數欲計算比對圖像。

該步驟(d)14是逐一將該等欲計算比對圖像和該基礎影像以至少包括分割物件方法和像素統計方法進行差異比對，得到多數分別對應於不同的製程環境的圖像補償係數。

其中，該分割物件方法是對以至少進行過二值化處理的影像用物件組成函式進行分割，以計算影像上預定圖形的直徑、面積等，以得到關於型態的圖像補償係數，在本例中是用OpenCV3.0函式，以其中一像素為目標，即會偵測該像素的周圍像素大小(分別有4或8的連結方式)，當偵測到的像素值相同時，便會判定此像素群相連，將影像中的圖形分別組成獨立的物件，以分割物件、進行物理量的計算，進而得到關於大氣(728 Torr)至真空(0.04 Torr)、真空(0.04 Torr)至大氣(728 Torr)的環境變化下的影像上預定圖形的直徑變化為0.35mm(數次平均結果)。

該像素統計方法則是以二值化處理篩選出影像的預定區域，再自RGB色彩空間轉換至HSV色彩空間後進行像素統計，之後，對像素統計結果進行歸一化運算，得到例如以關於色相的直方圖表示的圖像補償係數，參下表。

註: 腔體真空:壓力為0.04 Torr。 腔體真空輻射:壓力為0.04 Torr，中波輻射燈溫度1200 K、主波段2.5 μm、功耗340 W。

最後，該步驟(e)15是將該等分別對應於不同的製程環境的圖像補償係數於用該視覺辨識裝置在不同的製程環境欲取得影像時加入，用以正確檢測出不同製程環境下，因製程變化所導致物料真實的外觀形貌、顏色的改變。

要特別說明的是，若是已得到基礎比對影像，則並非每次於不同的製程中都需要再重複進行步驟(a)、步驟(b)，僅需用相同的標準檢測片組於各不同製程環境取得不同的欲計算比對圖像，之後進行差異比對以得到多數分別對應於不同的製程環境的圖像補償係數即可；另外，該步驟(d)計算得到的圖像補償係數是用於修正所得到影像的誤差，也可以再經過轉換為視覺辨識裝置適用的機械補償參數，以直接取得經過修正、補償的製程影像。

以下再以上述本發明機器視覺辨識功能於製程環境之修正方法的實施例實際用於紅外線真空冷凍乾燥機台，以修正機器視覺系統的檢測誤差作進一步驗證。

本次驗證是以觀察蘋果切片於凍乾製程中的變化，其中，凍乾環境的壓力變化區間是0.04 Torr ~728 Torr、溫度變化區間是-50˚C~+40˚C，所採用的視覺辨識裝置是型號為Watec WAT-01U2的攝影機(搭載型號為watec WAT-124/F2的鏡頭)，擷取影像時配合環型配置的9顆LED燈(供電9V及0.3A)。

參閱附件2、附件3，以相同於上述實施例中的各步驟，得到如附件2所示的最後經過二值化處理，進而用以計算影像上預定圖形(即各蘋果切片)的直徑的影像，以及如附件3所示的以二值化處理篩選出影像的預定區域(即各蘋果切片)，再自RGB色彩空間轉換至HSV色彩空間後進行像素統計、歸一化運算，得到得關於色相的直方圖。

參閱圖2、圖3、圖4、圖5，圖2、圖3分別是未將實施例中關於標準檢測片組得到的圖像補償係數加入前，記錄蘋果切片的直徑隨溫度、壓力的變化，圖4、圖5則分別是將實施例中關於標準檢測片組得到的圖像補償係數加入後，記錄蘋果切片的直徑隨溫度、壓力的變化，由各圖中以對應時間60分鐘上及360分鐘上虛線框圍的橢圓區域中的各紀錄點可以明顯看出，例如：Sample3檢測最高直徑由修正前的47.50 mm，修正後為47.15 mm，與壓力變化前的數值接近，且Sample3直徑變化與其他樣本直徑變化一致，因此可知製程前後由溫度、壓力變化所造成的直徑誤差被消除，而讓視覺辨識裝置取的影像更趨真，以準確顯示蘋果切片於凍乾製程中所產生的形狀變化。

參閱圖6，圖6分別是將實施例中關於標準檢測片組得到的圖像補償係數加入前、及加入後記錄蘋果切片的色相。透過直方圖對比像素總數以及各色相比例，透過調整色相差異修正檢測色差(真空及真空輻射環境直方圖比較)，最後由圖6中可看出蘋果第二色相比例隨溫度變化的情況，證實色差修正讓視覺辨識裝置取的影像更趨真，以準確顯示蘋果切片於凍乾製程中所產生的顏色變化。

綜上所述，本發明提供一種修正製程環境變化而造成機器視覺檢測的誤差，而能正確檢測出不同製程環境下，因製程變化所導致物料真實的外觀形貌、顏色的改變的修正方法，特別適用於例如冷凍乾燥等關於真空、熱輻射製程環境變化劇烈的製程中，而確實能達成本發明的目的。

惟以上所述者，僅為本發明的實施例而已，當不能以此限定本發明實施的範圍，凡是依本發明申請專利範圍及專利說明書內容所作的簡單的等效變化與修飾，皆仍屬本發明專利涵蓋的範圍內。

11:步驟(a) 15:步驟(e) 12:步驟(b) 13:步驟(c) 14:步驟(d)

本發明的其他的特徵及功效，將於參照圖式的實施方式中清楚地呈現，其中： 圖1是一流程圖，說明本發明機器視覺辨識功能於製程環境之修正方法的一實施例； 圖2是一折線圖，說明蘋果切片以視覺辨識裝置紀錄凍乾製程中，直徑及溫度隨時間變化的狀況； 圖3是一折線圖，說明蘋果切片以視覺辨識裝置紀錄凍乾製程中，直徑及壓力隨時間變化的狀況； 圖4是一折線圖，說明加入本發明實施例的圖像補償係數後蘋果切片以視覺辨識裝置紀錄凍乾製程中，直徑因壓力變化的狀況已被消除； 圖5是一折線圖，說明加入本發明實施例的圖像補償係數後蘋果切片以視覺辨識裝置紀錄凍乾製程中，直徑因壓力變化的狀況已被消除；及 圖6是一折線圖，說明蘋果切片以視覺辨識裝置紀錄凍乾製程中，腔體溫度、壓力以及物料色相比例隨時間變化的狀況。 本發明的其他的特徵及功效，將以參照附件的方式更清楚地呈現，其中： 附件1是一影像流程，說明本發明機器視覺辨識功能於製程環境之修正方法的實施例標準片的實際影像處理過程； 附件2是一影像流程，說明本發明機器視覺辨識功能於製程環境之修正方法的實施例於實際凍乾製程的蘋果切片的實際影像處理過程；及 附件3是一影像流程，說明本發明機器視覺辨識功能於製程環境之修正方法的實施例於實際凍乾製程中，以二值化處理篩選出影像的預定區域後再自RGB色彩空間轉換至HSV色彩空間，進行像素統計、歸一化運算，得到關於色相的直方圖。

11:步驟(a)

12:步驟(b)

13:步驟(c)

14:步驟(d)

15:步驟(e)

Claims (8)

1. 一種機器視覺辨識功能於製程環境之修正方法，包含： (a)    選擇一標準檢測片組，用一組適用於觀察製程中物件狀況的視覺辨識裝置於一基礎環境下取得對應於該標準檢測片組的影像； (b)   對步驟(a)取得的影像進行一鏡頭扭曲校正過程，及一至少包括二值化轉換的影像處理過程得到一基礎比對影像； (c)    用該視覺辨識裝置分別取得該標準檢測片組於不同的製程環境中的影像，以相同於該步驟(b)的鏡頭扭曲校正過程和影像處理過程，得到多數欲計算比對圖像； (d)   逐一將該等欲計算比對圖像和該基礎影像進行差異比對，得到多數分別對應於不同的製程環境的圖像補償係數；及 (e)    將該等分別對應於不同的製程環境的圖像補償係數於用該視覺辨識裝置在不同的製程環境欲取得影像時加入。
2. 如請求項1所述的機器視覺辨識功能於製程環境之修正方法，其中，該標準檢測片組至少包含分別為紅色、綠色、藍色的圓形標準檢測片。
3. 如請求項2所述的機器視覺辨識功能於製程環境之修正方法，其中，該視覺辨識裝置至少包含一用於在該等製程中於取得物件的清晰影像的鏡頭。
4. 如請求項3所述的機器視覺辨識功能於製程環境之修正方法，其中，該鏡頭扭曲校正過程是以鏡頭校正矩陣將對應於該標準檢測片組的每一圓形標準檢測片的影像校正為正圓。
5. 如請求項4所述的機器視覺辨識功能於製程環境之修正方法，其中，該影像處理過程包括雜訊移除、除法去背處理、轉換灰階圖片，及二值化處理。
6. 如請求項1所述的機器視覺辨識功能於製程環境之修正方法，其中，該步驟(d)以至少包括分割物件方法和像素統計方法逐一將該等欲計算比對圖像和該基礎影像進行差異比對。
7. 如請求項6所述的機器視覺辨識功能於製程環境之修正方法，其中，該分割物件方法是對以至少進行過二值化處理的影像用物件組成函式進行分割，以計算影像上預定圖形的直徑，及面積其中至少一，以得到關於型態的圖像補償係數。
8. 如請求項7所述的機器視覺辨識功能於製程環境之修正方法，其中，該像素統計方法是對以至少進行過二值化處理以選取出預定區域的影像自RGB色彩空間轉換至HSV色彩空間後進行像素統計，再對像素統計結果進行歸一化運算，以得到關於色相的圖像補償係數。

Images