TW202242793A

TW202242793A - 用於車輛的圖像資料處理系統

Info

Publication number: TW202242793A
Application number: TW111116179A
Authority: TW
Inventors: 許埈豪; 柳承完; 李知原; 金容熙; 鄭權
Original assignee: 韓商Ｌｘ半導體科技有限公司
Priority date: 2021-04-28
Filing date: 2022-04-28
Publication date: 2022-11-01
Also published as: CN115250315A; US20220351337A1; US12020407B2

Abstract

本申請公開了一種圖像資料處理系統，並公開了一種用於車輛的圖像資料處理系統，其藉由反射周圍照度來補償圖像資料。

Description

用於車輛的圖像資料處理系統

各種實施方式總體涉及圖像資料處理系統，更具體地，涉及用於車輛的圖像資料處理系統，其藉由反射周圍照度來補償圖像資料。

根據技術的發展，在各個領域採用了顯示系統。

例如，在車輛的情況下，儀錶盤的中心面板和儀錶面板使用顯示面板來配置。如果需要，儀錶面板和中心面板配置成整合類型。

在車輛中，配置包括顯示面板的圖像資料處理系統。圖像資料處理系統可用於藉由顯示面板顯示各種訊息，諸如車輛的行駛訊息、車輛狀態訊息和安全訊息。

通常，用於車輛的圖像資料處理系統需要認知補償。

為此，可藉由應用幀增益來處理圖像。然而，在這種情況下，可能缺少用於防止圖像雜訊增加的功能。

可替代地，可藉由使用直方圖應用超過或低於特定灰階的函數來處理圖像。然而，在這種情況下，當執行非自然像素映射時，圖像的訊息可能丟失或者平滑圖像變化可能受到限制。

此外，當周圍照度的強度等於或大於閾值時，可能限制可藉由調整顯示面板的螢幕的亮度來補償的螢幕認知程度。

此外，當為周圍照度情況計算最優幀增益時，不考慮周圍照度的強度。

此外，當強烈地補償螢幕亮度或圖像資料時，存在由於顯示面板的表達的限制而降低對比度的問題。

因此，在用於車輛的圖像資料處理系統中，需要應用能夠解決上述問題的技術。

各種實施方式針對僅去除圖像的雜訊並防止在處理用於車輛的圖像資料的過程中的模糊。

各種實施方式針對考慮每個圖像的特性和周圍照度環境來計算最優幀增益並防止高灰階的截波現象。

各種實施方式針對藉由周圍照度來補償非線性認知損害，以保持用戶所感知的灰階之間的差異恆定。

各種實施方式針對使周圍區域的灰階變暗，同時保持圖像的主要訊息的類型，從而最小化由於周圍照度環境引起的易讀性損害。

在實施方式中，用於車輛的圖像資料處理系統可包括：照度感測器，配置成藉由感測周圍照度來提供照度感測訊號；圖像特性分析單元，配置成藉由輸入幀資料以輸入灰階生成與照度感測訊號對應的幀增益點和滾降點；感知差異生成單元，配置成藉由輸出幀資料以輸出灰階生成與照度感測訊號對應的輸出點；以及補償計算單元，配置成藉由使用幀增益點、滾降點和輸出點將輸入灰階分成多個部分，並且輸出經由藉由為每個部分確定的比例關係將輸入幀資料轉換成具有與輸入灰階的變化對應的輸出灰階而獲得的幀資料。

在實施方式中，用於車輛的圖像資料處理系統可包括：照度感測器，配置成藉由感測周圍照度來提供照度感測訊號；雜訊消除單元，配置成提供輸入幀資料；以及補償計算單元，配置成提供藉由響應於照度感測訊號來轉換輸入幀資料而獲得的幀資料，其中，雜訊消除單元提供經由藉由使用周圍像素的周圍像素值來補償包括在輸入幀中的雜訊像素的雜訊像素值而獲得的輸入幀資料。

在實施方式中，用於車輛的圖像資料處理系統可包括：照度感測器，配置成藉由感測周圍照度來提供照度感測訊號；補償計算單元，配置成提供藉由響應於照度感測訊號來轉換輸入幀資料而獲得的幀資料；以及易讀性改進單元，配置成在幀資料中檢測需要易讀性改進的需要區域，生成用於需要區域的高頻分量，並且為需要區域提供藉由將高頻分量添加到幀資料而獲得的輸出幀資料。

在本公開中，能夠預期在處理車輛的圖像資料的過程中僅去除圖像的雜訊並且防止模糊的效果。

此外，在本公開中，能夠預期考慮每個圖像的特性和周圍照度環境來計算最優幀增益並且防止高灰階的截波現象的效果。

此外，在本公開中，能夠預期補償由周圍照度引起的非線性認知損害以保持用戶所感知的灰階之間的差恒定的效果。

此外，在本公開中，能夠預期周圍區域的灰階變暗同時保持圖像的主要訊息的類型，從而最小化由於周圍照度環境引起的易讀性損害的效果。

本公開實施成使得用於車輛的圖像資料處理系統可藉由反射周圍照度來補償圖像資料。

參照圖1，用於車輛的圖像資料處理系統的實施方式可配置成包括照度感測器10、雜訊消除單元20、圖像特性分析單元30、認知差異生成單元40、補償計算單元50和易讀性改進單元60。

在本公開的實施方式中，雜訊消除單元20可補償存在於輸入幀資料中的雜訊分量，從而僅消除圖像的雜訊並防止模糊。

更詳細地，雜訊消除單元20可配置成提供輸入幀資料，其中藉由使用周圍像素的周圍像素值來補償包括在輸入幀中的雜訊像素的雜訊像素值。

為此，雜訊消除單元20可在形成輸入幀的輸入幀資料中選擇預設大小的核心，並且可藉由將該核心應用於整個輸入幀來執行雜訊檢測和消除。

核心可被例示為具有如圖2中所示的3*3的大小，並且像素a1、a2、a3、b1、b2、b3、c1、c2和c3可包括在該核心中。其中，像素b2可被理解為中心像素，而其餘像素可被理解為周圍像素。

如圖3中所示，雜訊消除單元20可配置成包括雜訊檢測器22和雜訊濾波器24。

在它們之間，雜訊檢測器22藉由使用包括在輸入幀中選擇的圖2的核心中的中心像素b2的中心像素值和周圍像素a1、a2、a3、b1、b3、c1、c2和c3的周圍像素值來檢測中心像素b2是否對應於雜訊像素。

雜訊濾波器24用使用周圍像素a1、a2、a3、b1、b3、c1、c2和c3的周圍像素值生成的校正像素值來代替對應於雜訊像素的中心像素b2的中心像素值。

雜訊消除單元20可輸出輸入幀PR1，藉由圖4中所示的方法從該輸入幀PR1中消除雜訊。

更詳細地，雜訊檢測器22藉由對與中心像素b2的中心像素值與周圍像素a1、a2、a3、b1、b3、c1、c2和c3的周圍像素值Pn之間的差的絕對值對應的計算值大於預設的第一閾值Nth1的情況的數目進行計數來生成第一計數值Ci（L10）。

當中心像素b2的中心像素值與周圍像素a1、a2、a3、b1、b3、c1、c2和c3的周圍像素值的平均值Mn之間的差的絕對值大於預設的第二閾值Nth2時，雜訊檢測器22應用預設的第二計數值（L20）。

當藉由對第一計數值Ci和第二計數值求和而獲得的值等於或大於預設的第三閾值Nth3時，雜訊檢測器22可檢測確定中心像素b2對應於雜訊像素的結果（L30）。

上述的第一閾值Nth1、第二閾值Nth2和第三閾值Nth3可由製造商指定。

下面將參考圖4描述雜訊檢測器22的更詳細的操作。

如圖2中所示，雜訊檢測器22使用核心檢測雜訊，並且在初始步驟S10處，將第一計數值Ci複位為“0”，並且讀取中心像素b2的中心像素值B2（S10）。

此後，雜訊檢測器22確定與中心像素b2的中心像素值B2和周圍像素a1的周圍像素值Pn之間的差的絕對值對應的計算值是否大於第一閾值Nth1（S12）。為了便於說明起見，周圍像素值由Pn表示。

當與中心像素b2的中心像素值B2和周圍像素a1的周圍像素值Pn之間的差的絕對值對應的計算值大於第一閾值Nth1時，雜訊檢測器22將第一計數值Ci增加“1”（S14）。

雜訊檢測器22藉由對所有周圍像素a1、a2、a3、b1、b3、c1、c2和c3重複步驟S12和S14來生成第一計數值Ci（S16）。

例如，第一計數值Ci的最小值可以是“0”，並且第一計數值Ci的最大值可以是“8”。

此後，雜訊檢測器22計算周圍像素a1、a2、a3、b1、b3、c1、c2和c3的周圍像素值的平均值Mn（S20）。周圍像素值的平均值Mn可藉由將所有周圍像素a1、a2、a3、b1、b3、c1、c2和c3的周圍像素值之和除以周圍像素a1、a2、a3、b1、b3、c1、c2和c3的數目來生成。然後，雜訊檢測器22確定中心像素b2的中心像素值B2與周圍像素值的平均值Mn之間的差的絕對值是否大於第二閾值Nth2（S22）。

例如，當中心像素b2的中心像素值B2與周圍像素值的平均值Mn之間的差的絕對值大於第二閾值Nth2時，雜訊檢測器22可應用“10”作為第二計數值，並且在相反的情況下可應用“0”作為第二計數值。

雜訊檢測器22計算藉由對第一計數值Ci和第二計數值“0”或“10”求和而獲得的值（S24），並確定藉由對第一計數值Ci和第二計數值“0”或“10”求和而獲得的值是否等於或大於第三閾值Nth3（S30）。

假設第三閾值Nth3設置為“17”，則雜訊檢測器22在藉由對第一計數值Ci和第二計數值進行求和而獲得的值小於17時確定中心像素b2正常（S32），並且在藉由對第一計數值Ci和第二計數值進行求和而獲得的值等於或大於17時確定中心像素b2是雜訊像素（S34）。

雜訊檢測器22可檢測圖2的核心的中心像素b2是否對應於雜訊像素，如以上參考圖4所描述的。

由雜訊檢測器22確定為對應於雜訊像素的中心像素b2的中心像素值B2可藉由雜訊濾波器24的操作用校正像素值代替。

下面將參考圖5和圖6描述雜訊濾波器24的操作。

雜訊濾波器24生成與中心像素b2的中心像素值B2和所有周圍像素a1、a2、a3、b1、b3、c1、c2和c3的周圍像素值Pn之間的差的絕對值對應的周圍像素a1、a2、a3、b1、b3、c1、c2和c3的第一計算值Dn（S40）。為了便於說明起見，用於中心像素b2的中心像素值B2和每個周圍像素的周圍像素值的第一計算值由Dn代表性地表示。

詳細地，雜訊濾波器24藉由計算中心像素b2的中心像素值B2與在圖5的各個方向dir1、dir2、dir3和dir4上的周圍像素a1、a2、a3、b1、b3、c1、c2和c3的周圍像素值Pn之間的差的絕對值來生成第一計算值Dn。也就是說，對於方向dir1，可計算與中心像素b2的中心像素值B2和周圍像素a1的周圍像素值Pn之間的差的絕對值對應的第一計算值Dn，並且可計算與中心像素b2的中心像素值B2和周圍像素c3的周圍像素值Pn之間的差的絕對值對應的第一計算值Dn。此外，即使對於剩餘方向dir2、dir3和dir4，也可以以相同的方式計算第一計算值Dn。

此後，雜訊濾波器24可藉由對在相應方向dir1、dir2、dir3和dir4上關於中心像素b2對稱的周圍像素的第一計算值Dn求和來計算第二計算值SDn（S42）。更詳細地，對於方向Dr1，可藉由對與中心像素b2的中心像素值B2和周圍像素a1的周圍像素值Pn之間的差的絕對值對應的第一計算值Dn和與中心像素b2的中心像素值B2和周圍像素c3的周圍像素值Pn之間的差的絕對值對應的第一計算值Dn求和來計算第二計算值SDn。此外，即使對於剩餘方向dir2、dir3和dir4，也可以以相同的方式計算第二計算值SDn。

此後，雜訊濾波器24在第二計算值SDn中選擇最小值（S44），並使用與所選擇的第二計算值SDn對應的周圍像素的周圍像素值的平均值作為校正像素值。雜訊濾波器24可用校正像素值代替對應於雜訊像素的中心像素b2的中心像素值（S46）。

如上所述的其中由雜訊消除單元20確定為雜訊像素的中心像素值被校正的輸入幀資料可傳送到稍後將描述的圖像特性分析單元30和補償計算單元50。

本公開的實施方式可配置成考慮每個圖像和周圍照度環境的特性來計算最優幀增益，防止高灰階的截波現象，並且補償周圍照度環境的非線性認知損害，以便保持用戶所感知的灰階之間的差恒定。

為此，本公開的實施方式可配置成包括照度感測器10，該照度感測器10藉由感測車輛的顯示面板的周圍照度來提供照度感測訊號SE。

照度感測器10可配置成向圖像特性分析單元30和認知差異生成單元40提供照度感測訊號SE。

圖像特性分析單元30可被配置成藉由從雜訊消除單元20提供的輸入幀資料FR1而產生與輸入灰階中的所述照度感測訊號SE對應的幀增益點XF和滾降點XR。

認知差異生成單元40可被配置成藉由輸出幀資料而產生與輸出灰階中的所述照度感測訊號SE對應的輸出點YD。

在它們之間，下面將詳細描述圖像特性分析單元30。

圖像特性分析單元30用於根據照度來確定補償，並根據圖像的特性來執行補償調整。

為此，圖像特性分析單元30可選擇對應於照度感測訊號SE的初始截波比例值Rf，可藉由參考輸入幀資料FR1的亮度調整初始截波比例值Rf來生成截波比例值Rc，可藉由比較照度感測訊號SE和預設的幀增益限制來輸出調整到幀增益限制R1的截波比例值Rc作為幀增益點XF，並且可生成和輸出用於幀增益點XF的滾降點XR。

可理解的是，藉由圖7的方法獲得了如上所述的其中圖像特性分析單元30生成幀增益點XF和滾降點XR的方法。

在圖7中，可理解的是，相關度Cu對應於藉由參考輸入幀資料FR1的亮度來調整初始截波比例值Rf而獲得的截波比例值Rc，並且相關度Cu1對應於藉由比較幀增益限制而調整到幀增益限制R1的截波比例值Rc。

換言之，藉由對應於照度感測訊號SE的初始截波比例值Rf、藉由參考輸入幀資料FR1的亮度和幀增益限制R1調整的截波比例值Rc，輸出灰階和輸入灰階之間的相關度Cu被改變為相關度Cu1。當相關度Cu被改變為相關度Cu1時，可獲得幀增益點XF。幀增益點XF可被理解為對應於最大輸出灰階的輸入灰階的點。

在獲得幀增益點XF之後，可生成滾降點XR，以使其位置從輸入灰階上的幀增益點XF調整了截波比例值Rc被幀增益限制R1調整的量dx。

對於以上操作，圖像特性分析單元30可包括截波比例值生成器31、亮度值提供器32、比較器34、幀增益限制值提供器35和滾降點生成器36。

截波比例值生成器31配置成選擇和輸出對應於照度感測訊號SE的初始截波比例值Rf。

更詳細地，可參考圖9來描述截波比例值生成器31。

截波比例值生成器31可接收照度感測訊號SE，並且可預先儲存與不同位準的多個參考照度感測訊號（例如SE1、SE2、SE3和SE4）對應的參考初始截波比例值（例如RF1、RF2、RF3和RF4）。

截波比例值生成器31尋找對應於照度感測訊號SE的參考初始截波比例值。

當儲存有對應於照度感測訊號SE的參考初始截波比例值時，截波比例值生成器31配置成輸出相應的參考初始截波比例值作為初始截波比例值Rf，並且當沒有相應的參考初始截波比例值時，截波比例值生成器31配置成輸出藉由插值生成的初始截波比例值Rf。可理解的是，經由藉由使用相鄰的參考初始截波比例值獲得要輸出的初始截波比例值Rf的一般方法來執行插值。

亮度值提供器32配置成基於輸入幀資料FR1的直方圖來提供對應於亮度的調整值Bc。

計算器33配置成生成藉由用亮度值提供器32的調整值Bc調整截波比例值生成器31的初始截波比例值Rf而獲得的截波比例值Rc。計算器33可使用乘法器來配置。

幀增益限制值提供器35配置成提供用於照度感測訊號SE的預設的幀增益限制。

如圖10中所示，幀增益限制值提供器35可接收照度感測訊號SE，並且可預先儲存對應于不同位準的多個參考照度感測訊號（例如，SE1、SE2、SE3和SE4）的參考幀增益限制（例如，G1、G2、G3、G4）。

幀增益限制值提供器35尋找對應於照度感測訊號SE的參考幀增益限制。

當儲存有對應於照度感測訊號SE的參考幀增益限制時，幀增益限制值提供器35配置成輸出相應的參考幀增益限制作為幀增益限制R1，並且當沒有相應的參考幀增益限制時，幀增益限制值提供器35配置成輸出藉由插值生成的幀增益限制R1。可理解的是，經由藉由使用相鄰的參考幀增益限制獲得要輸出的幀增益限制的一般方法來執行插值。

比較器34比較從計算器33提供的截波比例值Rc和從幀增益限制值提供器35提供的幀增益限制R1，以輸出由幀增益限制R1調整的截波比例值作為幀增益點XF。

滾降點生成器36配置成生成和輸出用於調整的幀增益點XF的滾降點XR，如以上參考圖7所描述的。

更詳細地，滾降點生成器36可生成滾降點XR，以使其位置從輸入灰階上的幀增益點XF調整了由計算器33提供的截波比例值Rc被幀增益限制R1調整的量。

如上所述，圖像特性分析單元30可在輸入灰階上提供幀增益點XF和滾降點XR。因此，本公開的實施方式可考慮每個圖像的特性和周圍照度環境來計算最優幀增益，並且可防止高灰階的截波現象。

認知差異生成單元40配置成藉由輸出幀資料在輸出灰階中生成與照度感測訊號SE對應的輸出點YD。

認知差異生成單元40可接收照度感測訊號SE，並且可預先儲存與不同位準的多個參考照度感測訊號（例如，SE1、SE2、SE3和SE4）對應的參考輸出點（例如，YD1、YD2、YD3和YD4）。

認知差異生成單元40在輸出灰階上尋找對應於照度感測訊號SE的輸出點。

用於補償認知差異的值可根據每個灰階的周圍照度而不同地改變。在圖12中，SC表示指示根據強照度的用於認知差異的補償值（例如，YS）的曲線，以及WC表示指示根據弱照度的用於認知差異的補償值（例如，YW）的曲線。

當儲存有對應於照度感測訊號SE的參考輸出點時，認知差異生成單元40配置成輸出相應的參考輸出點作為輸出點YD，並且當沒有相應的參考輸出點時，認知差異生成單元40配置成輸出藉由插值生成的輸出點YD。可理解的是，經由藉由使用相鄰的參考輸出點獲得要輸出的輸出點的一般方法來執行插值。

本公開的實施方式可藉由認知差異生成單元40的上述操作來補償周圍照度的非線性認知損害，以保持用戶所感知的灰階之間的差恒定。

補償計算單元50配置成提供藉由轉換與照度感測訊號SE對應的輸入幀資料而獲得的幀資料。

更詳細地，補償計算單元50配置成藉由使用用於輸入灰階的幀增益點XF和滾降點XR以及用於輸出灰階的輸出點YD將輸入灰階分成多個部分，如圖13中所示，並且輸出藉由根據為每個部分確定的比例關係轉換輸入幀資料而獲得的幀資料FR2，以便具有與輸入灰階的變化對應的輸出灰階。

為此，如圖13中所示，補償計算單元50在具有用於輸出灰階的第一軸和用於輸入灰階的第二軸的直角坐標系中，在輸出灰階的輸出點YD、輸入灰階的幀增益點XF和與輸出灰階的最大值對應的第一點P0之間的直線上設置第二點P1至第四點P3。

第二點P1可設置成在第一點P0和輸出點YD之間的直線上對應於輸入灰階的滾降點XR。

第三點P2可設置成在第一點P0和輸出點YD之間的直線上對應於第二點P1和輸出點YD之間的中間。

第四點P3可設置成在第一點P0和輸出點YD之間的直線上對應於第三點P2和輸出點YD之間的中間。

如圖14中所示，補償計算單元50可將輸入灰階分成在直角坐標系的參考點和第三點P2之間的第一部分sec1、在第三點P2和第二點P1之間的第二部分sec2、以及在第二點P1和最大點Pm之間的第三部分sec3。可理解的是，最大點Pm對應於輸入灰階的最大值和輸出灰階的最大值。

補償計算單元50可配置成藉由使用利用第一部分sec1和第三部分sec3中的點P3和P1形成的貝茲曲線來將輸出灰階匹配到輸入灰階。

補償計算單元50可配置成藉由第二部分sec2中的一維比例關係將輸出灰階匹配到輸入灰階。

易讀性改進單元60可配置成在由補償計算單元50提供的幀資料FR2中檢測需要易讀性改進的需要區域，生成用於需要區域的高頻分量，並為需要區域提供藉由將高頻分量與幀資料相加而獲得的輸出幀資料。

為此，如圖15中所示，易讀性改進單元60可包括需要區域檢測器62、儲存器64和檢測區域調整器66。

儲存器64可儲存預先儲存的採樣核心Ma至Mn（參見圖17）。例如，採樣核心Ma至Mn可具有3*3的尺寸，其中中心像素C為中心。

需要區域檢測器62配置成從幀資料FR2中提取圖16的測試核心CN1，生成其中確定圖案C1至C8設置成與附近像素N1至N8圍繞中心像素C定位的方向對應的比較核心CN2，並且當存在與比較核心CN2對應的採樣核心時，將測試核心CN1檢測為需要易讀性改進的需要區域。

更詳細地，需要區域檢測器62可從幀資料FR2中提取圖16的測試核心CN1，其包括中心像素C、圍繞中心像素C的附近像素N1至N8以及圍繞附近像素N1至N8的遠像素。測試核心CN1可具有5*5的大小，其中中心像素C為中心。

需要區域檢測器62生成圖17的比較核心CN2，其具有藉由基於附近像素N1至N8的附近像素值和遠像素F1至F8的遠像素值來確定中心像素C的中心像素值而獲得的確定圖案。

更詳細地，需要區域檢測器62生成與中心像素C的中心像素值和在方向dir1至dir4中的每個上的每個附近像素值之間的第一比較結果以及中心像素C的中心像素值和在方向dir1至dir4中的每個上的遠像素F1至F8中的每個的遠像素值之間的第二比較結果對應的確定圖案，其中在測試核心CN1上附近像素N1至N8相對於中心像素C定位。

可藉由以下方法獲得確定圖案。

需要區域檢測器62可藉由將中心像素C的中心像素值和附近像素N1至N8的附近像素值中的每個之間的差的第一絕對值與預設的第一閾值進行比較來生成第一比較結果，並且可藉由將中心像素C的中心像素值和遠像素F1至F8的遠像素值中的每個之間的差的第二絕對值與預設的第二閾值進行比較來生成第二比較結果。

當中心像素C的中心像素值與附近像素N1至N8的附近像素值中的每個之間的差的第一絕對值等於或大於第一閾值，並且中心像素C的中心像素值與遠像素F1至F8的遠像素值中的每個之間的差的第二絕對值等於或大於第二閾值時，需要區域檢測器62可生成標記需要易讀性改進的確定圖案。

可理解的是，確定圖案對應於圖17的比較核心CN2的C1至C8中的每個。例如，確定圖案可具有標記為“0”或“1”的值。

即，可藉由在附近像素N1至N8圍繞中心像素C定位的方向中的每個上設置確定圖案來生成比較核心CN2。以與採樣核心Ma至Mn相同的方式，比較核心CN2可具有3*3的大小，其中中心像素C為中心。

如圖17中所示，需要區域檢測器62可確定在儲存在儲存器64中的採樣核心Ma至Mn中是否存在與比較核心CN2對應的採樣核心，並且當在儲存的採樣核心Ma至Mn中存在與比較核心CN2對應的採樣核心時，可將測試核心CN1檢測為需要易讀性改進的需要區域。

需要區域檢測器62可配置成根據需要區域檢測器62的操作當從幀資料FR2提取的測試核心CN1對應于需要區域時生成檢測訊號ED，並且檢測區域調整器66可配置成響應於檢測訊號ED提供藉由將高頻分量添加到幀資料而獲得的輸出幀資料。

為此，檢測區域調整器66可生成幀資料FR2和藉由將幀資料FR2的分辨率改變為低而獲得的平滑的幀資料之間的差作為高頻分量，可將高頻分量改變為對應於照度感測訊號SE的比例，並且可提供藉由將比例改變的高頻分量與幀資料FR2相加而獲得的輸出幀資料。

更具體地，易讀性改進單元60的檢測區域調整器66可配置成包括高頻分量提取器70、比例器72、計算器74和選擇器76。易讀性改進單元60可配置成在選擇器76中使用需要區域檢測器62的檢測訊號ED。

在以上配置中，高頻分量提取器70可配置成生成平滑的幀資料SFR2和幀資料FR2之間的差作為高頻分量。可理解的是，高頻分量對應於邊緣。可根據灰階來調整用於形成平滑幀的陰影的強度。

可認為，將高頻分量提取器70的輸出改變為對應於照度感測訊號SE的比例的比例器72實現了用於更清楚地表達邊緣的功能。

計算器74可配置成藉由將比例改變的高頻分量添加到幀資料FR2來提供輸出幀資料。

如在幀資料FR2不需要易讀性改進的情況下，選擇器76配置成響應於需要區域檢測器62的檢測訊號ED，輸出幀資料FR2作為輸出幀資料，並且在幀資料FR2要求易讀性改進的情況下，提供計算器74的輸出作為輸出幀資料。

因此，在本公開的實施方式中，能夠預期周圍區域的灰階被改變（例如，變暗）同時圖像的主要訊息的類型被保持的效果，從而最小化由於周圍照度環境引起的易讀性損害。

10:照度感測器 20:雜訊消除單元 22:雜訊檢測器 24:雜訊濾波器 30:圖像特性分析單元 31:截波比例值生成器 32:亮度值提供器 33:計算器 34:比較器 35:幀增益限制值提供器 36:滾降點生成器 40:認知差異生成單元 50:補償計算單元 60:易讀性改進單元 62:需要區域檢測器 64:儲存器 66:檢測區域調整器 70:高頻分量提取器 72:比例器 74:計算器 76:選擇器 L10:第一計數值 L20:第二計數值 L30:第三計數值 S10-S46:步驟

圖1是示出根據本公開的用於車輛的圖像資料處理系統的實施方式的框圖。

圖2是示出用於藉由雜訊消除單元消除雜訊的核心的圖。

圖3是示出雜訊消除單元的示例的框圖。

圖4是示出雜訊消除單元的雜訊確定方法的流程圖。

圖5是示出用於說明雜訊消除單元的雜訊消除方法的核心的圖。

圖6是示出雜訊消除單元的雜訊消除方法的流程圖。

圖7是用於說明圖像特性生成單元的操作的圖。

圖8是示出圖像特性生成單元的示例的框圖。

圖9是用於說明提供初始截波比例值的圖。

圖10是用於說明提供幀增益限制的圖。

圖11是用於說明根據照度的認知差異的圖。

圖12是用於說明根據每個灰階的認知差異來設置輸出點的圖。

圖13和圖14是用於說明藉由補償計算單元生成用於減小認知差異的非線性曲線的方法的圖。

圖15是示出易讀性改進單元的示例的框圖。

圖16是示出測試核心的圖。

圖17是示出比較核心和採樣核心的圖。

圖18是示出檢測區域調整器的框圖。

10:照度感測器

20:雜訊消除單元

30:圖像特性分析單元

40:認知差異生成單元

50:補償計算單元

60:易讀性改進單元

Claims

一種用於車輛的圖像資料處理系統，包括：一照度感測器，配置成藉由感測周圍照度來提供一照度感測訊號；一圖像特性分析單元，被配置成藉由一輸入幀資料而產生與一輸入灰階中的所述照度感測訊號對應的一幀增益點和一滾降點；一認知差異生成單元，被配置成藉由一輸出幀資料而產生與一輸出灰階中的所述照度感測訊號對應的一輸出點；以及一補償計算單元，被配置成藉由使用所述幀增益點、所述滾降點和所述輸出點，而將所述輸入灰階分成多個部分，並且被配置成藉由為每個部分確定的一比例關係，將所述輸入幀資料轉換成對應所述輸入灰階的一變化的所述輸出灰階，而輸出所獲得的一幀資料。
根據請求項1所述的圖像資料處理系統，還包括：一雜訊消除單元，被配置成提供所述輸入幀資料，其中，所述雜訊消除單元藉由使用多個周圍像素的多個周圍像素值，來補償包括於所述輸入幀中的一雜訊像素的一雜訊像素值，而提供所獲得的所述輸入幀資料。
根據請求項2所述的圖像資料處理系統，其中，所述雜訊消除單元包括：一雜訊檢測器，被配置成藉由使用包括於所述輸入幀中的一預設大小的一核心中的一中心像素的一中心像素值和所述周圍像素的所述周圍像素值，來檢測所述中心像素是否與所述雜訊像素對應；以及一雜訊濾波器，被配置成使用所述周圍像素的所述周圍像素值生成的校正像素值，來代替與所述雜訊像素對應的所述中心像素的所述中心像素值。
根據請求項3所述的圖像資料處理系統，其中，所述雜訊檢測器對應下列步驟：藉由對與所述中心像素值和所述周圍像素值之間的差的絕對值對應的計算值大於預設的一第一閾值的情況的數目進行計數，來生成一第一計數值；當所述中心像素值與所述周圍像素值的平均值之間的差的絕對值大於預設的一第二閾值時，生成預設的一第二計數值，以及當藉由對所述第一計數值和所述第二計數值求和而獲得的值等於或大於預設的一第三閾值時，檢測所述中心像素對應於所述雜訊像素。
根據請求項3所述的圖像資料處理系統，其中，所述雜訊濾波器對應下列步驟：生成與所述中心像素值與所述周圍像素值之間的差的絕對值對應的所述周圍像素的一第一計算值，藉由對在多個方向上關於所述中心像素對稱的所述周圍像素的所述第一計算值求和來計算一第二計算值，選擇所述第二計算值中的一最小值，使用與所選擇的第二計算值對應的所述周圍像素的所述周圍像素值的平均值作為所述校正像素值，以及用所述校正像素值代替與所述雜訊像素對應的所述中心像素的所述中心像素值。
根據請求項3所述的圖像資料處理系統，其中，所述雜訊消除單元使用大小為3*3的所述核心。
根據請求項1所述的圖像資料處理系統，其中，所述圖像特性分析單元：選擇與所述照度感測訊號對應的初始截波比例值；經由藉由所述參考輸入幀資料的亮度來調整所述初始截波比例值，生成一截波比例值；輸出藉由比較所述照度感測訊號和預設的一幀增益限制而調整到所述幀增益限制的所述截波比例值，作為所述幀增益點，以及生成並輸出用於所述幀增益點的所述滾降點。
根據請求項1所述的圖像資料處理系統，其中，所述圖像特性分析單元包括：一截波比例值生成器，配置成選擇和輸出與所述照度感測訊號對應的一初始截波比例值；一亮度值提供器，配置成基於所述輸入幀資料的一直方圖來提供與亮度對應的一調整值；一計算器，配置成生成經由藉由所述調整值調整所述初始截波比例值而獲得的一截波比例值；一幀增益限制值提供器，配置成提供用於所述照度感測訊號的預設的一幀增益限制；一比較器，配置成比較所述截波比例值和所述幀增益限制，以輸出藉由所述幀增益限制調整的截波比例值作為所述幀增益點；以及一滾降點生成器，配置成生成和輸出用於經調整的幀增益點的所述滾降點。
根據請求項8所述的圖像資料處理系統，其中，所述截波比例值生成器預先儲存與不同位準的多個參考照度感測訊號對應的參考初始截波比例值，並且藉由對應於與所述照度感測訊號相鄰的所述參考照度感測訊號的所述參考初始截波比例值的插值，來提供所述初始截波比例值。
根據請求項8所述的圖像資料處理系統，其中，所述幀增益限制值提供器預先儲存與不同位準的多個參考照度感測訊號對應的參考幀增益限制，並藉由對應於與所述照度感測訊號相鄰的所述參考照度感測訊號的所述參考幀增益限制的插值，來提供所述幀增益限制。
根據請求項8所述的圖像資料處理系統，其中，所述滾降點生成器生成所述滾降點，以使所述滾降點的位置從所述輸入灰階上的所述幀增益點調整了所述截波比例值被所述幀增益限制調整的量。
根據請求項1所述的圖像資料處理系統，其中，所述認知差異生成單元預先儲存與不同位準的多個參考照度感測訊號對應的參考輸出點，並且藉由對應於與所述照度感測訊號相鄰的所述參考照度感測訊號的所述參考輸出點的插值來生成所述輸出點。
根據請求項1所述的圖像資料處理系統，其中，所述補償計算單元對應下列步驟：在具有用於所述輸出灰階的一第一軸和用於所述輸入灰階的一第二軸的直角坐標系中，在所述輸出灰階上的所述輸出點、所述輸入灰階的所述幀增益點和與所述輸出灰階的最大值對應的一第一點之間的直線上設置一第二點至一第四點，將所述第二點設置成在所述直線上與所述輸入灰階的所述滾降點對應，將所述第三點設置成在所述直線上與所述第二點和所述輸出點之間的中間對應，將所述第四點設置成在所述直線上與所述第三點和所述輸出點之間的中間對應，以及將所述輸入灰階分成在所述直角坐標系的參考點和所述第三點之間的一第一部分、在所述第三點和所述第二點之間的一第二部分以及在所述第二點和最大點之間的一第三部分，以及其中，所述最大點對應於所述輸入灰階的最大值和所述輸出灰階的最大值。
根據請求項13所述的圖像資料處理系統，其中，所述補償計算單元藉由使用所述第一部分和所述第三部分中的一貝茲(Bezier)曲線將所述輸出灰階匹配到所述輸入灰階。
根據請求項13所述的圖像資料處理系統，其中，所述補償計算單元藉由所述第二部分中的一維比例關係將所述輸出灰階匹配到所述輸入灰階。
一種用於車輛的圖像資料處理系統，包括：一照度感測器，被配置成藉由感測周圍照度來提供照度感測訊號；一雜訊消除單元，被配置成提供一輸入幀資料；以及一補償計算單元，被配置成將所述照度感測訊號轉換所述輸入幀資料，而提供所獲得的一幀資料；其中，所述雜訊消除單元藉由使用多個周圍像素的多個周圍像素值，來補償包括於輸入幀中的一雜訊像素的一雜訊像素值，而提供所獲得的所述輸入幀資料。
根據請求項16所述的圖像資料處理系統，其中，所述雜訊消除單元包括：一雜訊檢測器，被配置成藉由使用包括於所述輸入幀中的預設大小的核心中的一中心像素的一中心像素值和所述周圍像素的所述周圍像素值來檢測所述中心像素是否與所述雜訊像素對應；以及一雜訊濾波器，被配置成使用所述周圍像素的所述周圍像素值生成的校正像素值，來代替與所述雜訊像素對應的所述中心像素的所述中心像素值。
根據請求項17所述的圖像資料處理系統，其中，所述雜訊檢測器對應下列步驟：藉由對與所述中心像素值和所述周圍像素值之間的差的絕對值對應的計算值大於預設的一第一閾值的情況的數目進行計數，來生成一第一計數值；當所述中心像素值與所述周圍像素值的平均值之間的差的絕對值大於預設的一第二閾值時，生成預設的一第二計數值，以及當藉由對所述第一計數值和所述第二計數值求和而獲得的值等於或大於預設的一第三閾值時，檢測所述中心像素對應於所述雜訊像素。
根據請求項17所述的圖像資料處理系統，其中，所述雜訊濾波器對應下列步驟：生成與所述中心像素值與所述周圍像素值之間的差的絕對值對應的所述周圍像素的一第一計算值，藉由對在多個方向上關於所述中心像素對稱的所述周圍像素的所述第一計算值求和來計算一第二計算值，選擇所述第二計算值中的一最小值，使用與所選擇的第二計算值對應的所述周圍像素的所述周圍像素值的平均值作為所述校正像素值，以及用所述校正像素值代替與所述雜訊像素對應的所述中心像素的所述中心像素值。
根據請求項17所述的圖像資料處理系統，其中，所述雜訊消除單元使用大小為3*3的所述核心。