TWI762956B - 影像中靜止圖像的處理方法 - Google Patents

影像中靜止圖像的處理方法 Download PDF

Info

Publication number
TWI762956B
TWI762956B TW109120344A TW109120344A TWI762956B TW I762956 B TWI762956 B TW I762956B TW 109120344 A TW109120344 A TW 109120344A TW 109120344 A TW109120344 A TW 109120344A TW I762956 B TWI762956 B TW I762956B
Authority
TW
Taiwan
Prior art keywords
image
still image
still
area
brightness
Prior art date
Application number
TW109120344A
Other languages
English (en)
Other versions
TW202201342A (zh
Inventor
陳正岳
曾如汶
Original Assignee
瑞昱半導體股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 瑞昱半導體股份有限公司 filed Critical 瑞昱半導體股份有限公司
Priority to TW109120344A priority Critical patent/TWI762956B/zh
Priority to US17/348,903 priority patent/US11929019B2/en
Publication of TW202201342A publication Critical patent/TW202201342A/zh
Application granted granted Critical
Publication of TWI762956B publication Critical patent/TWI762956B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57Control of contrast or brightness
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • G09G3/3208Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED] organic, e.g. using organic light-emitting diodes [OLED]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/04Maintaining the quality of display appearance
    • G09G2320/043Preventing or counteracting the effects of ageing
    • G09G2320/046Dealing with screen burn-in prevention or compensation of the effects thereof
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/10Special adaptations of display systems for operation with variable images
    • G09G2320/103Detection of image changes, e.g. determination of an index representative of the image change
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/16Determination of a pixel data signal depending on the signal applied in the previous frame

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Analysis (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

一種影像中靜止圖像的處理方法,其中方法包括先對一動態影像的每個影像幀切分為多個區域,通過多種靜止圖像演算的方法演算各區域的靜止圖像指數,以靜止圖像指數表示每個影像幀中每個區域涵蓋靜止圖像的一部分或全部的判斷依據,可以一指數門檻初步篩選出為靜止圖像的區域,再以一時間門檻確認各影像幀中為靜止圖像的區域,之後調整經判斷為靜止圖像的區域的影像數據,例如調降靜止圖像區域的亮度值,可以防止靜止圖像對顯示面板產生的負面影響。

Description

影像中靜止圖像的處理方法
說明書公開一種影像處理方法,特別是指針對影像中有靜止圖像的區域進行亮度調整的影像處理方法。
在動態影像中,若有固定圖像在其中,例如電視台在影像中固定位置所置放的廣告、標誌(logo),或是特定位置不動的圖案,有可能在特定情況下對於顯示面板產生影響,例如在有機發光二極體(organic light-emitting diode,OLED)顯示器上產生的烙痕(burn marks)。
因此,在習知技術中,可在採用會因為靜止圖像產生烙痕的顯示器的電子裝置中執行定時產生影像變動的程式,對整張影像幀(frame)進行些微位置變動,另有方式是將影像切分為多個區域,再調整各區亮度值,如此可避免圖像在固定位置產生的問題。
為了要防止靜止圖像在特定顯示面板產生的影響,需要先判斷出動態影像中的靜止圖像,才能進一步處理這個靜止圖像,揭露書提出一種影像中靜止圖像的處理方法,其中方法包括先對一動態影像的每個影像幀切分為多個區域,通過多種靜止圖像演算的方法演算各區域的靜止圖像指數,以靜止圖像指數表示每個影像幀中每個區域涵蓋靜止圖像的一部分或全部的判斷依據,其中可以一指數門檻初步篩選出為靜止圖像的區域,再以一時間門檻確認各影像幀中為靜止圖像的區域,之後調整經判斷為靜止圖像的區域的影像數據,例如調降靜止圖像區域的亮度值,可以防止靜止圖像對顯示面板產生的負面影響。
根據實現方法的電路系統的實施例,電路系統包括一影像處理電路,其中即執行上述影像中靜止圖像的處理方法,當得出連續影像幀的靜止圖像時,可以調整其影像數據,以排除靜止圖像產生的負面影響,這時,輸出調整後的影像數據到顯示控制電路,以輸出至一顯示器的驅動電路,再由顯示器播出影像。
優選地,所述時間門檻為根據電路系統所應用的顯示面板的幀率而彈性調整,時間門檻可表示動態影像中連續影像幀的數量。
進一步地,在所述的影像中靜止圖像的處理方法中,於演算畫素或區域的該靜止圖像指數時,可通過執行多種判斷靜止圖像的方法計算該靜止圖像指數,例如:亮度分群法、前後幀亮度差異法、前後幀高頻差異法以及一種補洞法,當多種判斷靜止圖像的方法的其中任一方法判斷為靜止圖像時,即累加靜止圖像指數的分數。
接著,可通過各畫素或各區域在前後影像幀或是鄰近畫素或區域的特徵修正誤判靜止圖像的結果,相關方法如時間軸資訊補償法與空間資訊補償法,其中誤判為靜止圖像者,即減去分數,而誤判為非靜止圖像者,則增加分數。
再者,當判斷畫素或區域為非靜止圖像時,畫素或區域的靜止圖像指數分數歸零,但也要排除不能歸零的部分,相關方法採用前後幀亮度差值法、前後幀高頻差值法、利用鄰近畫素或區域之間的亮度值關係,以及偵測是否有特定物件等方法。
為使能更進一步瞭解本發明的特徵及技術內容,請參閱以下有關本發明的詳細說明與圖式,然而所提供的圖式僅用於提供參考與說明,並非用來對本發明加以限制。
以下是通過特定的具體實施例來說明本發明的實施方式,本領域技術人員可由本說明書所公開的內容瞭解本發明的優點與效果。本發明可通過其他不同的具體實施例加以施行或應用,本說明書中的各項細節也可基於不同觀點與應用,在不悖離本發明的構思下進行各種修改與變更。另外,本發明的附圖僅為簡單示意說明,並非依實際尺寸的描繪,事先聲明。以下的實施方式將進一步詳細說明本發明的相關技術內容,但所公開的內容並非用以限制本發明的保護範圍。
應當可以理解的是,雖然本文中可能會使用到“第一”、“第二”、“第三”等術語來描述各種元件或者信號,但這些元件或者信號不應受這些術語的限制。這些術語主要是用以區分一元件與另一元件,或者一信號與另一信號。另外,本文中所使用的術語“或”,應視實際情況可能包括相關聯的列出項目中的任一個或者多個的組合。
針對影像中靜止圖像可能造成顯示面板的問題,例如在有機發光二極體(OLED)顯示器上產生的烙痕,或是採用特定顯示技術的顯示裝置(如陰極射線管(CRT)顯示器)產生的永久損傷,或者,高對比的靜止圖像也有可能在品質不良的液晶顯示器(LCD)上產生印痕,為了解決這類問題,說明書公開一種對影像中有靜止圖像的區域進行亮度調整的影像處理方法與電路系統,所述方法主要目的是提出得到動態影像中的靜止圖像的方法,而應用的電路系統可參考圖1顯示的電路系統實施例之一的電路方塊示意圖。
圖1中顯示一個控制顯示面板101與驅動電路103的電路系統10,電路系統10自一來源接收影像信號100,通過影像處理後,輸出到驅動電路103,最後由顯示面板101播放出去。電路系統10中主要的電路元件包括有顯示控制電路105與影像處理電路107。
經接收到影像信號100後,電路系統10中的影像處理電路107根據最後播出的格式與解析度進行影像處理,產生提供給顯示控制電路105的信號,例如一種低壓差分信號(Low-voltage differential signal),隨後由顯示控制電路105進行時脈控制,再以串行(serial)方式輸出數位影像信號至顯示器的驅動電路103,再由顯示器的顯示面板101播出影像。而所述影像中靜止圖像的處理方法即可運行於電路系統10中,如實現為影像處理電路107的韌體程式的功能。
其中,運行於電路系統10的影像中靜止圖像的處理方法的主要目的 之一是能夠在接收到影像信號100時,即偵測出在連續影像中的靜止圖像(一段時間保持靜止的圖像),進而調整此靜止圖像的影像數據,例如亮度值,使得長時間顯示的靜止圖像不會對顯示面板產生不好的影像。
根據揭露書所提出的影像中靜止圖像的處理方法,主要的概念可參考圖2顯示的靜止圖像處理方法的實施例流程圖。
所述方法可執行於一影像處理電路中,從一影像源接收動態影像後,針對輸入的動態影像的每個影像幀(frame)演算一靜止圖像指數(index),方法可以針對影像的每個畫素(pixel)或區域演算靜止圖像指數,靜止圖像指數由每個影像幀中每個畫素或每個區域被判斷為靜止圖像的分數所表示。其中,較有效率的方式是將影像切分為多個區域(步驟S201),再對每個區域演算靜止圖像指數(步驟S203),過程中,可利用各區域的影像數據判斷是否有靜止圖像,並能排除誤判。根據實施例,根據多種方法判斷此區域是否屬於靜止圖像,若判斷為靜止圖像,增加此區域的靜止圖像指數,如分數加一。
當得出每個影像幀的多個區域個別的靜止圖像指數,方法即可根據每個區域的靜止圖像指數判斷各區域是否為靜止圖像(步驟S205),例如設有一指數門檻,通過此指數門檻可初步判斷出影像中可能為靜止圖像的畫素或區域,也就是初步得出各影像幀中靜止圖像指數大於等於此指數門檻的畫素或區域;再設有一時間門檻,根據動態影像的幀率(frame rate/fps,每秒顯示的幀數)亦可以連續影像幀的數量作為門檻,用以確認這個動態影像中為靜止圖像的畫素或區域。因此,若連續影像中具有靜止圖像指數大於此指數門檻的畫素或區域,同時也持續達到此時間門檻,即判斷所述畫素或區域為靜止圖像(是),即調整這個區域的影像數據(步驟S207),再輸出影像;否則,表示該區域的靜止圖像指數並未大於等於此指數門檻,或是即便有時大於此指數門檻,但也沒有持續達到所設定的時間門檻,即判斷不是靜止圖像(否),即繼續保持原本該區域各畫素的影像數據(步驟S209)。
值得一提的是,所述影像數據如亮度值,在上述步驟S207中,當判斷影像中一或多個區域為靜止圖像時,每個區域可能是整個影像幀中的靜止圖像的全部或一部分,可調整各區域畫素的亮度值。如此,在影像輸出(顯示)之前,已經能夠得出影像中連續靜止的圖像,並適當地調整影像數據,可以有效避免靜止圖像對顯示面板的負面影響。
根據調整各區域亮度值的方法實施例之一,系統可以設計一個對應當前影像幀的一非靜止圖像亮度曲線以及一靜止圖像亮度曲線,因為已經通過上述流程取得各畫素或各區域的亮度值以及靜止圖像指數,參考非靜止圖像亮度曲線以及靜止圖像亮度曲線,根據當前區域(或畫素)的靜止圖像指數,可計算出當前區域或畫素在這兩個曲線之間調整亮度的權重,靜止圖像指數愈高,要調整亮度值的權重也愈高,靜止圖像指數愈低,要調整亮度值的權重也愈低。之後依照權重調整亮度值,而非一致地將整個靜止圖像的亮度值調降而已。
上述步驟描述的影像中靜止圖像的處理方法將對連續影像逐幀演算,之後,相關電路系統可以針對在連續影像中判斷為靜止圖像的區域進行亮度調整,對靜止圖像調整亮度可以有效避免在特定顯示面板上形成烙痕的問題。而所述靜止圖像的定義可以依照所應用的顯示面板的特性來決定,可以事先根據所要應用的顯示面板設定發生靜止圖像的時間門檻,意即,所述時間門檻可根據電路系統所應用的顯示面板的特性而彈性調整,例如,每個顯示面板與其控制電路產生具有特定幀率(frame rate)的顯示能力,而所述用於判斷影像中靜止圖像的時間門檻可表示為連續影像幀的數量。
更者,上述實施例步驟S201提出較有效率的處理方法是將影像切分為多個區域,可參考圖3顯示切分為多個區域的影像示意圖,當接收到一影片檔案,其中包括多數幀的影像數據,可先以影像處理電路中的韌體流程對各影像幀切分為多個區域,如圖3顯示一個影像幀30切分為多個區域(如”mxn”),每個區域包括多個畫素(如”pxq”),其中顯示有一個連續多幀的靜止圖像301,靜止圖像301可能涵蓋多個區域。
根據說明書公開的影像中靜止圖像的處理方法,演算上述實施例所提出的靜止圖像指數的方法包括通過多種判斷靜止圖像的方法決定指數,也包括檢查誤判的方法,相關流程可參考圖4所示演算靜止圖像指數的實施例流程。
在步驟S401中,在經過切分為多個區域的各影像幀中,利用多種方法判斷各影像幀中的各區域是否為靜止圖像,根據實施例,所採用演算靜止圖像的方法如圖5顯示的亮度分群法、圖6顯示的前後幀亮度差值法、圖7顯示的前後幀高頻差值法,以及圖8顯示的補洞法。所述計算各區域靜止圖像指數的方法可適用畫素。
每個影像幀中的每個區域可以演算一靜止圖像指數,在步驟S403中,針對各影像幀中判斷為靜止圖像的區域,增加區域的靜止圖像指數分數,如加一。因此,當採用了多個判斷靜止圖像的方法時,只要被判斷為靜止圖像,即可能累計該區域的靜止圖像指數分數,作為最終判斷為靜止圖像的依據。
然而,仍可能在判斷靜止圖像的時候產生誤判,其中理由之一是影像被噪聲干擾,使得誤判有靜止圖像的區域,或是誤判某區域為非靜止圖像。因此,在步驟S405中,將通過各區域或畫素在前後影像幀,或各區域或畫素的鄰近區域的特徵,修正誤判靜止圖像的結果。舉例來說,當有某個區域為靜止圖像時,理應這個靜止圖像應為維持一段時間的影像,因此可以通過前後幀的相同位置的影像數據(如亮度、頻率)是否一致或在一誤差範圍內來排除誤判,也就是利用設定一個誤差範圍篩選出被誤判為靜止圖像的區域,或是被誤判非靜止圖像的區域。在這個步驟中,即修正其靜止圖像指數,誤判為靜止圖像者即減去分數,誤判為非靜止圖像者,則增加分數。所述補償靜止圖像指數的方法可參考圖9顯示的時間軸資訊補償法,以及圖10顯示的空間資訊補償法。
之後,如步驟S407,在演算各影像幀的各區域的靜止圖像指數時,當指數達到一定門檻時,即判斷為靜止圖像;反之,若指數未達門檻,表示該區域並非靜止圖像,或是僅是一些不容易判斷為靜止圖像的小圖案(不會影像顯示面板),即可將該區域的靜止圖像指數歸零。判斷靜止圖像指數是否歸零的方法可參考圖11所述前後幀亮度差值法、圖12所述前後幀高頻差值法、圖13利用空間資訊防止誤判方法,以及圖14描述以偵測特定物件防止誤判的方法。
最終,可以依據各區域所累計的靜止圖像指數判斷是否為靜止圖像,也就是之後要修改影像數據以排除對顯示面板造成影響的問題。
以下實施例描述演算靜止圖像指數的方法。
[實施例一:亮度分群法]
判斷各影像幀中的區域或畫素是否為靜止圖像的方式之一是依據影像幀的亮度分布,如圖5所示,當接收到動態影像時,除了直接演算各畫素的靜止圖像指數外,更有效綠的方式是將其中影像幀切分為多個區域(步驟S501),並計算出各區域亮度值(步驟S503)。計算各區域(或畫素)亮度值的方式是,以紅-綠-藍色彩空間(RGB color space)為例,可以各區域的畫素的紅色、綠色或藍色通道值得出亮度值;若以YUV色彩空間(YUV color space)為例,其中’Y’表示明亮度(luminance),’U’與’V’則是表示色度(chrominance),即可以其中’Y’值作為亮度值。當計算各區域的亮度值時,可以各區域中畫素的亮度平均值作為區域的亮度值。
得出各影像幀的多區域亮度值之後,可得出影像幀的亮度分布,並可將亮度分布進行分群,將各影像幀中多個區域根據各區域亮度值區分為多種亮度群,再根據前後影像幀各區域的亮度關係(如亮度的一致性)判斷出影像中的靜止圖像,並可接續配合時間門檻,當連續影像幀中有一或多個區域有一致的亮度表現,且達到系統設定的時間門檻(或指連續影像幀的數量門檻)即可判斷該區域為靜止圖像。
根據流程實施例,其中能根據各區亮度資訊分為高亮度群與低亮度群,例如可設定一個亮度門檻,高於或等於此亮度門檻的歸類為高亮度群,低於此亮度門檻的歸類為低亮度群。接著,得出高亮度群的平均亮度、最大值與最小值,以及低亮度群的平均亮度、最大值與最小值,作為判斷是否有靜止圖像的參考(步驟S505)。由於影像幀中,靜止圖像中的鄰近多個畫素或區域彼此應有一致的亮度分布特性,因此可參考鄰近畫素或區域的高亮度群與低亮度群的平均亮度,最大值,最小值的關係,如一致性,作為判斷是否為靜止圖像的參考條件(步驟S507)。
在此一提的是,所述以亮度分群法用於判斷出動態影像中的靜止圖像,在所述影像中靜止圖像的處理方法中,此階段尚有可能有誤判的情況,因此通過靜止圖像指數作為最終判斷是否為靜止圖像的指標,即增加判斷出屬於靜止圖像的區域的靜止圖像指數分數,利用多種判斷方法累計靜止圖像指數,分數累積到一定值時,以最終靜止圖像指數判斷出影像中的靜止圖像。
[實施例二:前後幀亮度差值法]
另一判斷靜止圖像的方法如圖6所示依據前後幀亮度差異判斷靜止圖像的實施例流程圖,由於影像中的靜止圖像在前後影像幀應具有亮度的一致性,也就是前後影像幀中的靜止圖像的亮度差異應該不大,可以設有亮度差異門檻,前後幀的相同區域的亮度差異小者可初判為靜止圖像。
同樣地,除了每個畫素都個別處理外,還可將影像幀切分為多個區域,以下流程即以計算區域靜止圖像指數為例(步驟S601),同樣地取得每個區域的亮度值(步驟S603)。
之後,計算連續多張前後影像幀在各區域的亮度差異(步驟S605),由於靜止圖像在連續多張影像幀應有一致的亮度特徵,因此可引入亮度差異門檻,藉此判斷各區域是否前後影像幀的亮度特徵是一致的,若區域亮度值差異小於這個亮度差異門檻,並連續多張影像幀皆為如此時,即可判斷為靜止圖像(步驟S607)。
[實施例三:前後幀高頻差值法]
除了以上述亮度分群法或前後幀亮度差值法根據鄰近或前後影像幀的亮度一致性來判斷靜止圖像外,還可以參考前後影像幀各區域的影像在頻率域(frequency domain)的表現來判斷靜止圖像,如圖7所示依據影像幀的高頻表現判斷靜止圖像的實施例流程圖。
同樣地,除了將畫素個別判斷外,可將動態影像中各影像幀切分為多個區域(步驟S701),並將其中影像數據轉為頻率域,例如,影像經傅立葉轉換(Fourier Transform)為頻率域後,得到各區域頻率特徵(步驟S703)。
之後,得出其中高頻特徵(步驟S705),高頻的影像為形成靜止圖像的特徵之一。在此一提的是,一般來說,圖像邊緣屬於高頻部分,屬於變化比較大的部位,反之,影像中的低頻部位屬於變化比較小的部位,因此可以高頻特徵來找邊緣變化大的靜止圖像。
若區域屬於靜止圖像,此區域在前後影像幀的頻率表現應具有一致性,因此高頻表現可為判斷靜止圖像的依據。如此,計算各區域在前後幀各區域的高頻差異,經比對一系統設定的高頻差異門檻,若前後幀高頻差異小於此高頻差異門檻,表示連續前後幀的相同區域的高頻表現一致,則可初步判斷為靜止圖像(步驟S707)。
[實施例四:補洞法]
圖8顯示利用鄰近影像特徵判斷靜止圖像的實施例圖,此圖例中,處理流程處理每個區域時,顯示有一當前區域80,此補洞法為得出當前區域80的各個鄰近方向的影像特徵,例如取得其上、下、左、右、右上、右下、左上、左下等多個方向的影像特徵,如高頻特徵,並設一個距離門檻(n),當在當前區域80每個方向距離n之內,具有高頻變化,也就是得出有靜止邊界存在,表示當前區域80屬於靜止圖像的一部分,符合這個條件的,當前區域80的靜止圖像指數分數可加一。
根據方法實施例,可以利用上述多個判斷靜止圖像的方法累計各畫素或區域的靜止圖像指數分數,使得靜止圖像指數表現的分數累加愈高,愈能確定其中區域為靜止圖像的一部分或全部,當分數累積到一定值時,以最終靜止圖像指數判斷出影像中的靜止圖像。
然而,採用多種靜止圖像判斷方法時,還可進一步排除誤判的問題,以下實施例描述修正誤判靜止圖像的方法。
[實施例一:時間軸資訊補償法]
圖9顯示以時間軸資訊補償法補償靜止圖像指數實施例流程圖,動態影像隨著時間包括有多個影像幀,可利用時間軸上的資訊來判斷是否要補償靜止圖像指數。
在此方法中,取得一段時間內多張影像幀中各區域的靜止圖像指數(步驟S901),逐一比對系統設定的指數門檻,也就是判斷為靜止圖像的參考門檻(步驟S903),這時,可以得出各區域(或畫素)被判斷為靜止圖像所累積的次數,若次數大於系統設定的次數門檻或一比例門檻,可補償在此條件下的區域的靜止圖像指數(步驟S905),如增加當前畫素或區域的靜止圖像指數,用以補償可能在當中某一幀有誤判的情況。
舉例來說,一段時間取得1到p張影像幀,其中某區域在其中k張影像幀中判斷為靜止圖像,如通過圖5至圖8的方法判斷為靜止圖像,若k占了p的一定比例(k/p),並高於上述比例門檻,如2/3,則在最後一影像幀(第p張)對該畫素或區域補償靜止圖像指數。
[實施例二:空間資訊補償法]
圖10顯示以空間資訊補償法補償靜止圖像指數實施例流程圖,這是比對當前區域(或畫素)與其鄰近區域的靜止圖像指數而進行補償的方法。方法中,先取得各影像幀中多個區域的靜止圖像指數(步驟S101),處理當前區域時,比對鄰近區域的靜止圖像指數(步驟S103),若指數相近並達一指數相近門檻時,表示鄰近的區域的靜止圖像指數都很相近,即補償當前區域的靜止圖像指數(步驟S105)。
以下實施例描述檢查靜止圖像指數的方法,也就是經檢查確認非靜止圖像時,將重置(reset)其靜止圖像指數。
[實施例一:前後幀亮度差值法]
可參考圖11所示以前後幀亮度差值法重置靜止圖像指數的實施例流程圖,此方法的概念是,若為靜止圖像的一部分,當前區域在前後幀的亮度表現應為一致,亮度差值也應該不大,可以此作為判斷是否要將此區域的靜止圖像指數歸零的其中之一判斷條件。
流程中,取得連續影像幀的各區域(或畫素)的亮度值(步驟S111),接著計算前後幀相同區域的亮度差(步驟S113),再以此亮度差比對一亮度差異門檻,可以是如圖6描述計算靜止圖像指數時採用的門檻(步驟S115),若亮度差大於這個亮度差異門檻,此區域的靜止圖像指數的分數將重置為零(步驟S117)。
[實施例二:前後幀高頻差值法]
同理,前後幀的高頻表現也可作為檢差確認靜止圖像的條件之一,如圖12所示以前後幀高頻差值法重置靜止圖像指數的實施例流程圖。
在流程中,取得連續影像幀的各區域的頻率特徵(步驟S121),並取得前後幀相同區域(或畫素)的位置的高頻特徵,得出高頻差異(步驟S123),可以比對一高頻差異門檻(步驟S125),若大於(或等於)高頻差異門檻,表示前後高頻差異過大,也就是畫素或區域在前後幀的高頻表現不一致,因此可判斷為非靜止圖像,可以重置判斷為非靜止圖像的區域的靜止圖像指數的分數(步驟S127)。
[實施例三:利用空間資訊防止誤判方法]
圖13接著顯示利用空間資訊防止誤判而重置靜止圖像指數的實施例流程圖,這是一種利用考慮當前區域與其鄰近區域的亮度關係而檢查是否有誤判為非靜止圖像的方法。
先取得各影像幀的各區域的亮度值(步驟S131),比對當前區域與其鄰近區域的亮度值(步驟S133),以此檢查亮度相近的區域是否重置其靜止圖像指數(步驟S135)。其中,若當點區域與多數鄰近區域的亮度值相近,若有不當被認為非靜止圖像,將不重置其靜止圖像指數;反之,即重製靜止圖像指數的分數。
[實施例四:以偵測特定物件防止誤判的方法]
圖14提出另一利用偵測特定物件防止誤判而重置靜止圖像指數的實施例流程圖,在此流程中,若偵測到動態影像中有一 特定物件(步驟S141),並判斷出此特定物件在各影像幀所涵蓋的區域(步驟S143),以此檢查被特定物件涵蓋的區域是否重置其靜止圖像指數(步驟S145)。
因為此特定物件在連續影像幀是變動的,並不影響原本判斷得到的靜止圖像指數,當偵測到系統定義的特定物件時,可能會被認定是非靜止圖像而重置其中經過的畫素或區域的靜止圖像指數,因此要排除將此特定物件所經過的畫素或區域的靜止圖像指數重置的情況。
以下列舉所要偵測的特定物件的特徵,若皆符合,包括物件的面積、寬高比、形狀與亮度,則偵測結果判斷為偵測到特定物件,也不會去調整所涵蓋的畫素或區域的靜止圖像指數;反之,若條件不符,判斷結果為沒有偵測到特定物件,也不影響靜止圖像指數的計算。
物件特徵一:面積
利用已知物件的面積,當作判斷物件是否移動經過當前畫素或區域的條件之一,也就是,若此已知物件移動經過當前畫素或區域時,前後影像幀的亮度會有改變,且亮度改變的區塊面積接近已知物件的面積。
物件特徵二:寬高比
利用已知物件的寬高比當作判斷物件是否移動經過當前畫素或區域的條件之一,也就是,若此物件移動經過當前畫素或區域時,前後影像幀中有亮度改變的區塊的寬高比應接近已知物件的寬高比。
物件特徵三: 形狀
利用已知物件的形狀當作判斷物件是否移動經過當前畫素或區域的條件之一,其中,若物件移動經過當前畫素或區域的位置,前後影像幀的亮度改變的區塊位置應為連續。
物件特徵四:亮度
利用已知物件的亮度當作判斷物件是否移動經過當前畫素或區域的條件之一,其中,若物件移動經過當前畫素或區域位置所在的區域,則前後影像幀相關畫素或區域的亮度應會接近物件的亮度。
綜上所述,根據上述實施例所描述的影像中靜止圖像的處理方法,其中通過多種靜止圖像演算的方法演算各區域的靜止圖像指數,以靜止圖像指數表示每個影像幀中每個區域為靜止圖像的判斷依據,並可以指數門檻與時間門檻判斷為靜止圖像的區域,作為調整影像數據的參考,如此,可有效防止靜止圖像對顯示面板產生的負面影響。在一應用中,若應用在特定顯示面板(如OLED面板)的控制電路中,當找尋到動態影像中的靜止圖像,可以提供後續處理,例如亮度調整,可以避免這類面板長時間播放同一圖像而導致的烙痕,所述方法中提出的演算法可偵測影像中長時間具有靜止圖像的區域,再對偵測到的靜止區域進行影像數據的調整。
以上所公開的內容僅為本發明的優選可行實施例,並非因此侷限本發明的申請專利範圍,所以凡是運用本發明說明書及圖式內容所做的等效技術變化,均包含於本發明的申請專利範圍內。
101:顯示面板 103:驅動電路 105:顯示控制電路 107:影像處理電路 10:電路系統 100:影像信號 30:影像幀 301:靜止圖像 80:當前區域 步驟S201~S209:影像中靜止圖像的處理流程 步驟S401~S407:演算靜止圖像指數的流程 步驟S501~S507:依據影像幀的亮度分群判斷靜止圖像的流程 步驟S601~S607:依據前後幀亮度差異判斷靜止圖像的流程 步驟S701~S707:依據影像幀的高頻表現判斷靜止圖像的流程 步驟S901~S905:以時間軸資訊補償法補償靜止圖像指數的流程 步驟S101~S105:以空間資訊補償法補償靜止圖像指數的流程 步驟S111~S117:以前後幀亮度差值法重置靜止圖像指數的流程 步驟S121~S127:以前後幀高頻差值法重置靜止圖像指數的流程 步驟S131~S135:利用空間資訊防止誤判而重置靜止圖像指數的流程 步驟S141~S145:利用偵測特定物件防止誤判而重置靜止圖像指數的流程
圖1顯示控制顯示面板與驅動電路的電路系統電路方塊圖;
圖2顯示的靜止圖像處理方法的實施例流程圖;
圖3顯示切分為多個區域的影像示意圖;
圖4顯示演算靜止圖像指數的實施例流程圖;
圖5顯示依據影像幀的亮度分群判斷靜止圖像的實施例流程圖;
圖6顯示依據前後幀亮度差異判斷靜止圖像的實施例流程圖;
圖7顯示依據影像幀的高頻表現判斷靜止圖像的實施例流程圖;
圖8顯示利用鄰近影像特徵判斷靜止圖像的實施例圖;
圖9顯示以時間軸資訊補償法補償靜止圖像指數實施例流程圖;
圖10顯示以空間資訊補償法補償靜止圖像指數實施例流程圖;
圖11顯示以前後幀亮度差值法重置靜止圖像指數的實施例流程圖;
圖12顯示以前後幀高頻差值法重置靜止圖像指數的實施例流程圖;
圖13顯示利用空間資訊防止誤判而重置靜止圖像指數的實施例流程圖;以及
圖14顯示利用偵測特定物件防止誤判而重置靜止圖像指數的實施例流程圖。
S201:切分影像為多個區域
S203:對影像中每個區域演算一靜止圖像指數
S205:判斷每個區域是否為靜止圖像?
S207:調整影像數據
S209:保持原影像數據

Claims (9)

  1. 一種影像中靜止圖像的處理方法,應用於一電路系統中,包括:對一動態影像的每個影像幀中的每個畫素或經切分後的每個區域各演算一靜止圖像指數,該靜止圖像指數由每個影像幀中每個畫素或每個區域被判斷為靜止圖像的分數所表示;以及以一指數門檻初步判斷出每個影像幀中為靜止圖像的畫素或區域,再以一時間門檻判斷出該動態影像中為靜止圖像的畫素或區域;其中該時間門檻表示該動態影像中連續影像幀的一數量門檻,且該時間門檻為根據該電路系統所應用的一顯示面板的幀率而彈性調整。
  2. 如請求項1所述的影像中靜止圖像的處理方法,其中,更包括調整經判斷為靜止圖像的畫素或區域的影像數據,而所調整的影像數據為調整經判斷為靜止圖像的畫素或區域的亮度值,其中,參考一非靜止圖像亮度曲線以及一靜止圖像亮度曲線,根據判斷為靜止圖像的畫素或區域的靜止圖像指數計算調整亮度的權重,之後依照權重調整畫素或區域的亮度值。
  3. 如請求項1或2所述的影像中靜止圖像的處理方法,其中,於演算畫素或區域的該靜止圖像指數時,通過執行多種判斷靜止圖像的方法計算該靜止圖像指數,當該多種判斷靜止圖像的方法的其中任一方法判斷為靜止圖像時,即累加該靜止圖像指數的分數;並通過各畫素或各區域在前後影像幀或是鄰近畫素或區域的特徵修正誤判靜止圖像的結果,其中誤判為靜止圖像者,即減去分數,而誤判為非靜止圖像者,則增加分數; 以及,當判斷畫素或區域為非靜止圖像時,該畫素或區域的靜止圖像指數分數歸零。
  4. 如請求項3所述的影像中靜止圖像的處理方法,其中之一判斷靜止圖像的方法為一亮度分群法,為根據該影像幀中鄰近多個畫素或區域的高亮度群與低亮度群的平均亮度,最大值,最小值的一致性,判斷是否屬於靜止圖像。
  5. 如請求項3所述的影像中靜止圖像的處理方法,其中之一判斷靜止圖像的方法為一前後幀亮度差值法,為根據各畫素或區域在多張前後影像幀的亮度差異是否小於一亮度差異門檻判斷是否屬於靜止圖像。
  6. 如請求項3所述的影像中靜止圖像的處理方法,其中之一判斷靜止圖像的方法為一補洞法,為根據畫素或區域在各鄰近方向的一距離內是否有靜止邊界判斷是否屬於靜止圖像。
  7. 如請求項3所述的影像中靜止圖像的處理方法,其中之一修正誤判靜止圖像的方法為一時間軸資訊補償法,得出各畫素或區域在一段時間內被判斷為靜止圖像的次數高於一比例門檻,即增加該畫素或區域的靜止圖像指數。
  8. 如請求項3所述的影像中靜止圖像的處理方法,其中之一修正誤判靜止圖像的方法為一空間資訊補償法,經比對鄰近畫素或區域的靜止圖像指數,若靜止圖像指數相近,即補償該畫素或區域的靜止圖像指數。
  9. 如請求項3所述的影像中靜止圖像的處理方法,其中,更利用鄰近畫素或區域之間的亮度值是否相近判斷是否有不當被誤判為非靜止圖像的畫素或區域。
TW109120344A 2020-06-17 2020-06-17 影像中靜止圖像的處理方法 TWI762956B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW109120344A TWI762956B (zh) 2020-06-17 2020-06-17 影像中靜止圖像的處理方法
US17/348,903 US11929019B2 (en) 2020-06-17 2021-06-16 Method for processing static pattern in an image and circuit system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW109120344A TWI762956B (zh) 2020-06-17 2020-06-17 影像中靜止圖像的處理方法

Publications (2)

Publication Number Publication Date
TW202201342A TW202201342A (zh) 2022-01-01
TWI762956B true TWI762956B (zh) 2022-05-01

Family

ID=79023892

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109120344A TWI762956B (zh) 2020-06-17 2020-06-17 影像中靜止圖像的處理方法

Country Status (2)

Country Link
US (1) US11929019B2 (zh)
TW (1) TWI762956B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110493488B (zh) * 2018-05-15 2021-11-26 株式会社理光 视频稳像方法、视频稳像装置和计算机可读存储介质
CN115956266A (zh) * 2021-07-21 2023-04-11 京东方科技集团股份有限公司 控制装置及其驱动方法、显示装置
US20230047673A1 (en) * 2021-08-13 2023-02-16 Samsung Electronics Co., Ltd. Detecting stationary regions for organic light emitting diode (oled) television (tv) luminance reduction
KR20230058228A (ko) * 2021-10-22 2023-05-03 삼성디스플레이 주식회사 표시 장치 및 표시 장치의 구동 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI262722B (en) * 2005-07-29 2006-09-21 Chunghwa Picture Tubes Ltd Burn-in reducing device for display panel and related burn-in reducing method
CN101308625A (zh) * 2007-05-18 2008-11-19 索尼株式会社 显示装置、用于显示装置的驱动方法和计算机程序
TWI322976B (zh) * 2006-01-02 2010-04-01 Marketech Int Corp
US8115708B2 (en) * 2005-12-02 2012-02-14 Intel Corporation System and method for the prevention of display burn-in
CN110800038A (zh) * 2019-03-04 2020-02-14 京东方科技集团股份有限公司 基于时分数据输出的显示驱动电路、显示设备和显示方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006013913A (ja) * 2004-06-25 2006-01-12 Funai Electric Co Ltd プラズマディスプレイ装置
US20060007080A1 (en) * 2004-07-06 2006-01-12 Liang-Hua Yeh Apparatus and method for improving image-sticking effect of liquid crystal display
JP2007171700A (ja) * 2005-12-23 2007-07-05 Toshiba Corp 映像表示装置及び映像表示方法
CN101578645B (zh) * 2007-02-27 2011-09-28 松下电器产业株式会社 等离子显示装置和等离子显示面板的驱动方法
US8356319B2 (en) * 2008-01-11 2013-01-15 Csr Technology Inc. Screen saver trigger using partial still picture detection
US8301577B2 (en) * 2008-11-21 2012-10-30 National Yunlin University Of Science And Technology Intelligent monitoring system for establishing reliable background information in a complex image environment
US10082860B2 (en) * 2011-12-14 2018-09-25 Qualcomm Incorporated Static image power management
JP2014038229A (ja) * 2012-08-17 2014-02-27 Sony Corp 画像処理装置、画像処理方法、及びプログラム
CN107111982B (zh) * 2015-03-16 2020-11-10 华为技术有限公司 图像显示方法及装置
KR102307055B1 (ko) * 2015-04-28 2021-10-01 삼성전자주식회사 이벤트 기반 센서의 출력에 기초하여 정적 패턴을 추출하는 방법 및 장치
KR102391476B1 (ko) * 2015-12-02 2022-04-28 삼성디스플레이 주식회사 표시 장치 및 그 구동 방법
KR20180047263A (ko) * 2016-10-31 2018-05-10 삼성전자주식회사 디스플레이 장치 및 방법
GB2575117B (en) * 2018-06-29 2021-12-08 Imagination Tech Ltd Image component detection
US10623683B1 (en) * 2019-08-09 2020-04-14 Qualcomm Incorporated Methods and apparatus for improving image retention

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI262722B (en) * 2005-07-29 2006-09-21 Chunghwa Picture Tubes Ltd Burn-in reducing device for display panel and related burn-in reducing method
US8115708B2 (en) * 2005-12-02 2012-02-14 Intel Corporation System and method for the prevention of display burn-in
TWI322976B (zh) * 2006-01-02 2010-04-01 Marketech Int Corp
CN101308625A (zh) * 2007-05-18 2008-11-19 索尼株式会社 显示装置、用于显示装置的驱动方法和计算机程序
CN110800038A (zh) * 2019-03-04 2020-02-14 京东方科技集团股份有限公司 基于时分数据输出的显示驱动电路、显示设备和显示方法

Also Published As

Publication number Publication date
US11929019B2 (en) 2024-03-12
US20210400229A1 (en) 2021-12-23
TW202201342A (zh) 2022-01-01

Similar Documents

Publication Publication Date Title
TWI762956B (zh) 影像中靜止圖像的處理方法
US9105122B2 (en) Image processing apparatus and image processing method
JP3993145B2 (ja) 画面間の相関度を用いた画質改善回路及び方法
US20090304274A1 (en) Image Processing Apparatus and Image Display Apparatus
TWI553604B (zh) 自適應對比強化裝置以及方法
JP3928424B2 (ja) 動画におけるフリッカ補正
US20090169099A1 (en) Method of and apparatus for detecting and adjusting colour values of skin tone pixels
US9313467B2 (en) Pixel value calibration device and method
JP5669599B2 (ja) 画像処理装置及びその制御方法
CN108009997B (zh) 一种调整图像对比度的方法及装置
CN109005458B (zh) 一种图像花屏检测方法及装置
TW202046698A (zh) 影像調整方法以及相關的影像處理電路
CN110363197B (zh) 基于改进视觉背景提取模型的视频感兴趣区域提取方法
JP2014010776A (ja) 画像処理装置、画像処理方法、及び、プログラム
US8189068B2 (en) Apparatus and method for detecting flicker noise and computer readable medium stored thereon computer executable instructions for performing the method
JP2005107019A5 (zh)
JP2002247361A5 (zh)
CN105208362B (zh) 基于灰度平衡原理的图像色偏自动校正方法
TWI389576B (zh) 影像處理裝置以及影像處理方法
CN113902624A (zh) 影像中静止图像的处理方法
JP2004501575A (ja) 画像感知器信号欠陥修正
JP2008160607A (ja) 階調補正装置およびそれを備える映像表示装置
KR20110079317A (ko) 불량화소 검출 및 보정 방법
JP5911352B2 (ja) 画像処理装置及びその制御方法
CN115379186B (zh) 一种图像自动白平衡的方法及终端