TWI835567B - 不固定幀速率的影像幀讀寫方法與系統 - Google Patents
不固定幀速率的影像幀讀寫方法與系統 Download PDFInfo
- Publication number
- TWI835567B TWI835567B TW112106040A TW112106040A TWI835567B TW I835567 B TWI835567 B TW I835567B TW 112106040 A TW112106040 A TW 112106040A TW 112106040 A TW112106040 A TW 112106040A TW I835567 B TWI835567 B TW I835567B
- Authority
- TW
- Taiwan
- Prior art keywords
- writing
- reading
- temporary storage
- storage area
- image frame
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 230000000873 masking effect Effects 0.000 claims description 9
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 abstract description 15
- 238000010586 diagram Methods 0.000 description 19
- 230000009471 action Effects 0.000 description 7
- 101001095983 Staphylococcus aureus Protein rep Proteins 0.000 description 3
- 101000788191 Staphylococcus aureus Uncharacterized 12.4 kDa protein Proteins 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/10527—Audio or video recording; Data buffering arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/60—Memory management
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/39—Control of the bit-mapped memory
- G09G5/393—Arrangements for updating the contents of the bit-mapped memory
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/10527—Audio or video recording; Data buffering arrangements
- G11B2020/1062—Data buffering arrangements, e.g. recording or playback buffers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0105—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level using a storage device with different write and read speed
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Hardware Design (AREA)
- Television Systems (AREA)
Abstract
一種不固定幀速率的影像幀讀寫方法與系統,系統提出一視頻處理系統,視頻處理系統具有存取單一暫存區的寫入端與讀取端,在其中執行的不固定幀速率的影像幀讀寫方法中,於讀取端開始讀取暫存區中的影像幀時,控制讀取端等待寫入端寫入資料達一進度門檻時才開始讀取暫存區中的影像幀,以及,當判斷讀取端尚未讀取的部分會被寫入端寫入的資料蓋掉時,終止寫入端的寫入動作,直到讀取端完成讀取該影像幀時。
Description
說明書公開一種暫存影像幀的技術,特別是一種在幀速率不固定時控制暫存區讀寫影像的影像幀讀寫方法與系統。
當有影像裝置或影像處理器自一影音來源接收影音數據,需要根據其中輸入的視頻規格以及輸出端顯示的需求(如顯示更新率或幀率)進行幀速率控制(frame rate control,FRC),輸入端與輸出端完成匹配後才能適當地輸出影像。其中方法是將視頻逐幀儲存至暫存器(buffer)中,一般基於資料輸入輸出速率(data rate)固定情況下,即通過有限的暫存大小來做輸出幀速率轉換。其中,在單一暫存區(buffer block)存取幀影像的情況下,讀寫暫存區的幀速率控制基本會分成輸入快(input fast)與輸入慢(input slow)兩種運作模式,會造成輸入快與輸入慢模式的主要原因是影像處理裝置中影像處理器的輸入端的電路與記憶體存取速度與輸出端的需求(如要求的更新率、影像解析度)不同。其中輸入快模式表示影像處理器的輸入端電路傳輸速率較輸出端快,反之,輸入慢模式表示影像處理器的輸入端電路傳輸速率較輸出端還慢。如此,當資料輸入輸出速率不是固定的,並且採用單一暫存區每次僅能存取一張圖像,可能會導致視頻更新率降低、破圖等降低影片品質的問題。
可參考圖1顯示利用單一暫存區存取影像時發生視頻更新率降低的時序示意圖,圖例中顯示有寫入時序101與讀取時序102,兩個時序中向上的箭頭表示垂直同步(vertical sync,簡稱v sync)訊號,也就是影像處理器通過垂直同步訊號控制逐幀寫入暫存區與自暫存區讀取的過程。當相關影像處理電路或軟體完成寫入一影像幀時就會產生一個垂直同步訊號,如此,兩個朝上箭頭之間就是寫入(或讀取)一影像幀的時間。
圖1顯示是在輸入慢模式(input slow)模式下,由於視頻逐幀寫入(write)暫存區的速度比讀出(read)資料的速度還慢,因此讀取端需要等待寫入端完成寫入暫存區後,才能讀取其中資料,會產生丟失幀的問題,也造成視頻更新率下降的問題。
根據圖中顯示的寫入時序101,通過系統控制,寫入端的電路先寫入幀A至暫存區,當寫入端運作達到一個進度時,再如讀取時序102所示,讀取端從暫存區讀出幀A,但此時,系統繼續接收影像,寫入端卻需要等待讀取端完成讀取幀A後才能繼續寫入資料,不過在單一暫存區的應用中,當讀取端完成讀取幀A時,寫入端卻可能無法繼續寫入下一幀B,而是寫入下一幀C。同理,當寫入端運作達到一個進度時,讀取端才繼續讀出幀C;同理,由於暫存區被讀取端佔用,寫入端並無法繼續寫入幀D,等到讀取端完成讀取幀C後,寫入端僅能寫入下一幀E,在讀取端讀出幀E時,寫入端無法寫入幀F。如此,在單一暫存區輸入慢的存取模式下,可能會發生輸入兩張影像幀卻僅輸出一張的情況,有影像幀丟失的問題,使得整體輸出會有視頻更新率下降的問題。
同樣在輸入慢模式下,圖2顯示另一情況,圖中顯示在寫入端執行寫入影像幀至單一暫存區,但寫入端並不等待讀取端完成讀取後才寫入下一影像幀,而是連續寫入,如圖中寫入時序201所示。如此,如圖中顯示的讀取時序202,讀取端等待寫入端的寫入動作達一定進度時,將從暫存區中讀取
資料。
圖2顯示在輸入慢模式下,當寫入端寫入幀A達一寫入進度時,讀取端自暫存區讀取幀A,寫入端完成寫入幀A即繼續寫入下一幀B,在讀取端完成讀取幀A後繼續讀取暫存區中正在寫入的幀B資料。在寫入端完成寫入幀B後,繼續寫入幀C,然而,如此例顯示,讀取端的讀取速率較快,讀取端自暫存區讀取正在寫入的幀C影像時,寫入端尚未完成幀C的寫入,在輸入慢的模式下,讀取端可能在完成讀取已經寫入的幀C後還讀取到寫入端尚未蓋掉的前一幀影像,即圖示中讀取時序202中幀C後的一小段幀B,如圖示的破圖位置203。如此,使得此時輸出的影像幀會同時具備幀C與幀B的內容,在視覺上產生破圖(frame tear)的問題。
同理,繼續圖2所示輸入慢的運作模式,後續還會出現破圖的影像,如圖所示,在後續讀取幀F時,因為讀取速率較快,會讀取到寫入端尚未蓋掉的前一幀E的資料,使得輸出該幀影像會同時具備幀E與幀F的內容,也產生了破圖的現象,如圖示的破圖位置204。
圖3顯示在輸入快模式下逐幀儲存至單一暫存區的時序示意圖,圖中寫入時序301顯示寫入端寫入速率較快,讀取時序302則顯示讀取端讀取速率較慢。依照時序示意圖,寫入端持續在單一暫存區中順序寫入幀A,B,C,D,E,F,G與H,在速率較慢的讀取端自單一暫存區先讀出幀A,在讀取幀B時,寫入端也及時寫入幀B的資料。之後讀取幀C時,因為寫入端速率較快,完成寫入幀C時立即寫入下一幀D的資料至暫存區,而讀取速率較慢的讀取端讀取幀C的後半段過程讀到寫入端已經開始寫入的幀D資料,形成圖中產生破圖現象的破圖位置303;同理,根據圖中讀取時序302所示,當讀取端讀取幀G時,寫入端已經開始寫入幀H的資料,使得讀取端讀取幀G到後半段就讀取到暫存區中的幀H的資料,形成圖示的破圖位置304。
除以上在單一暫存區中讀寫形成的問題外,在多暫存區的影像處理系統中,若有重複讀取影像幀的需求下,例如在特定編碼格式中利用兩幀資料分別傳送影像明度與亮度資訊,仍可能形成破圖的問題,可參考圖4所示習知自多暫存區重複讀取幀的時序示意圖。
圖中顯示利用兩個暫存區0與1讀寫影像資料的時序圖,其中寫入時序401顯示輪流以暫存區1與0順序寫入幀A,B,C,D,E,F與G,在重複讀取同一幀的需求下,如讀取時序402所示,因為重複讀取暫存區時,會發生第二次讀取暫存區中影像資料時,讀取端讀取到已經被寫入端更新的資料,亦產生了如上述範例顯示在單一暫存區產生的破圖現象,如圖中標示的破圖位置403,404,405。
因此,若系統的輸入與輸出速率不是固定時,也就是會有更新率變動的情況時,傳統的幀速率控制的方式可能會導致影像顯示時會有視頻更新率下降或破圖的問題,造成使用者觀影體驗不佳的問題。
當影像處理電路或軟體在處理輸入視頻時,會因為資料輸入輸出速率不是固定而在幀速率控制下發生影像更新率下降或破圖等的問題,有鑑於此,揭露書提出一種不固定幀速率的影像幀讀寫方法與系統,利用控制寫入端與讀取端存取暫存區的運作時機解決所述問題。
執行不固定幀速率的影像幀讀寫方法與系統的系統包括一視頻處理系統,視頻處理系統具有存取一或多個暫存區的寫入端與讀取端。視頻處理系統可以電路或軟體實現寫入端與讀取端,寫入端與該讀取端分別連接實現單一暫存區的記憶體。
進一步地,視頻處理系統包括一幀速率控制器,用以控制視頻
中各幀影像通過單一暫存區的寫入與讀取運作以及執行幀速率轉換。
在所述不固定幀速率的影像幀讀寫方法中,於讀取端開始讀取暫存區中影像幀時,控制讀取端等待寫入端寫入資料達一進度門檻時才開始讀取暫存區中的影像幀;進一步地,當判斷讀取端尚未讀取的部分會被寫入端寫入的資料蓋掉時,終止寫入端的寫入動作,直到讀取端完成讀取影像幀時。
進一步地,於不固定幀速率的影像幀讀寫方法中,當寫入端寫入影像幀至暫存區時,視頻處理系統中控制電路或控制軟體判斷寫入端寫入影像幀至暫存區的進度,若寫入端寫入資料的進度達到系統設定的進度門檻,即通知讀取端開始讀取暫存區中的影像幀。
其中,在一實施例中,引入一暫存區讀取時脈,當寫入端的寫入進度尚未達到所述的進度門檻時,讀取端根據暫存區讀取時脈修正讀取端原來的垂直同步訊號,以延緩讀取端的讀取動作。
而視頻處理系統中可通過控制電路或控制軟體判斷寫入端寫入新影像幀至暫存區的位置儲存了讀取端尚未讀取的資料,即控制寫入端停止寫入新影像幀。
在一實施例中,引入一寫入遮蔽時脈,當讀取端尚未完成讀取暫存區的影像幀時,可通過此寫入遮蔽時脈終止寫入端的寫入動作。
為使能更進一步瞭解本發明的特徵及技術內容,請參閱以下有關本發明的詳細說明與圖式,然而所提供的圖式僅用於提供參考與說明,並非用來對本發明加以限制。
A,B,C,D,E,F,G,H,Z:幀
101,201,301,401,701,901,1001:寫入時序
102,202,302,402,702,902,1002:讀取時序
203,204,303,304,403,404,405:破圖位置
500:影音來源
50:影音處理裝置
501:視頻處理系統
509:音頻處理器
510:幀速率控制器
507:暫存器
503:輸入端電路
505:輸出端電路
5:影音終端
703:暫存區讀取時脈
704,705,1005:原讀取垂直同步訊號
903:寫入遮蔽時脈
1003:寫入遮蔽時脈
1004:暫存區讀取時脈
步驟S601~S609:不固定幀速率的影像幀讀寫流程之一
步驟S801~S809:不固定幀速率的影像幀讀寫流程之二
圖1顯示習知在輸入慢模式下逐幀儲存至單一暫存區的時序示
意圖;圖2顯示習知在輸入慢模式下逐幀儲存至單一暫存區的另一時序示意圖;圖3顯示習知在輸入快模式下逐幀儲存至單一暫存區的時序示意圖;圖4顯示習知自多暫存區重複讀取幀的時序示意圖;圖5顯示運行不固定幀速率的影像幀讀寫方法的系統實施例示意圖;圖6顯示不固定幀速率的影像幀讀寫方法的第一實施例流程圖;圖7顯示在利用設計暫存區讀取時脈實現不固定幀速率的影像幀讀寫方法的實施例時脈示意圖;圖8顯示不固定幀速率的影像幀讀寫方法的第二實施例流程圖;圖9顯示在利用設計寫入遮蔽時脈實現不固定幀速率的影像幀讀寫方法的實施例時脈示意圖;以及圖10顯示不固定幀速率的影像幀讀寫方法的實施例時脈示意圖。
以下是通過特定的具體實施例來說明本發明的實施方式,本領域技術人員可由本說明書所公開的內容瞭解本發明的優點與效果。本發明可通過其他不同的具體實施例加以施行或應用,本說明書中的各項細節也可基於不同觀點與應用,在不悖離本發明的構思下進行各種修改與變更。另外,本發明的附圖僅為簡單示意說明,並非依實際尺寸的描繪,事先聲明。以下的實施方式將進一步詳細說明本發明的相關技術內容,但所公開的內容並非
用以限制本發明的保護範圍。
應當可以理解的是,雖然本文中可能會使用到“第一”、“第二”、“第三”等術語來描述各種元件或者訊號,但這些元件或者訊號不應受這些術語的限制。這些術語主要是用以區分一元件與另一元件,或者一訊號與另一訊號。另外,本文中所使用的術語“或”,應視實際情況可能包括相關聯的列出項目中的任一個或者多個的組合。
針對特定影音來源提供具有可變更新率(Variable refresh rate,VRR)的影音數據,處理其中視頻的影像裝置中的影像處理電路或是軟體執行幀速率控制(frame rate control,FRC),以使輸入的視頻匹配輸出的需求。然而,若資料輸入輸出速率不是固定的,或是暫存空間僅夠存取一張圖像,即單一暫存區(single buffer),將導致影片更新率降低或破圖(frame tear)等問題,也影響了輸出影片的品質。據此,揭露書提出一種不固定幀速率的影像幀讀寫方法與系統,其中通過控制系統讀取暫存區的時間以及控制暫存器運作的方式解決習知因為輸出入速率不固定而導致影像輸出品質下降的問題。
根據執行所述控制寫入端與讀取端的系統實施例,可參考圖5,所述系統可以是硬體(如單晶片系統(SoC))或軟體實現的視頻處理系統,應用在規劃有單一暫存區的裝置中,如圖5顯示執行不固定幀速率的影像幀讀寫方法的系統實施例示意圖。
其中顯示自一影音來源500接收影音數據的影音處理裝置50,影音處理裝置50中包括分別處理視頻與音頻訊號的電路,實作執行揭露書提出的不固定幀速率的影像幀讀寫方法的視頻處理系統501以及處理音頻訊號的音頻處理器509,視頻處理系統501中設有幀速率控制器(FRC)510,並通過控制電路或控制軟體控制視頻中各幀影像通過暫存器507的寫入與讀取運作
以及執行幀速率轉換。視頻處理系統501的具體實現可以是影像處理卡、機上盒(set-top box)等,亦可為運行在單晶片系統(SoC)中的軟體方法。
影音處理裝置50設有輸入端電路503與輸出端電路505,影音處理裝置50通過輸入端電路503接受影音來源500傳送的影音數據,視頻的部分提供至視頻處理系統501,音頻的部分提供至音頻處理器509,完成影音數據處理後,通過輸出端電路505輸出至影音終端5。
影音處理裝置50中的視頻處理系統501包括有以電路或軟體實現的寫入功能(寫入端)以及讀取功能(讀取端),分別電性連接影音處理裝置50中或是內建於視頻處理系統501的記憶體所實現的暫存器507。其中暫存器507可規劃有一或多個暫存區,而揭露書所提出的不固定幀速率的影像幀讀寫方法主要是解決在讀寫單一暫存區中資料在不固定幀速率情況下產生的問題,即影片更新率降低或破圖,視頻處理系統501通過幀速率控制器510運行單一暫存區的影像幀讀寫程序,將根據輸入的視頻規格與輸出的需求(如特定更新率或幀率)進行匹配。在利用單一暫存區存取影像幀的情況下,讀寫單一暫存區的幀速率控制會分成輸入快(input fast)與輸入慢(input slow)兩種模式。在輸入快模式下,顯示寫入端需要等待讀取端的讀取工作,寫入端根據讀取端(作為主控端(master))的暫存區索引選擇寫入的暫存區;在輸入慢模式下,則是讀取端要根據寫入端(作為主控端)的暫存區索引選擇讀取的暫存區。所述暫存區索引可以軟體方法或硬體儲存在系統中的某個記憶體中,如DDR或SRAM,並可以做為判斷寫入端與讀取端存取暫存器507的進度。
運用上述系統執行不固定幀速率的影像幀讀寫方法,所述方法主要是通過控制暫存區(特別針對採用單一暫存區的系統)的寫入端與讀取端的運作解決因為系統的輸入端與輸出端速率不固定產生的問題,例如為基
於圖1至圖4揭示的習知方法所造成影像更新率降低與破圖的問題,其中提出兩種控制寫入端與讀取端運作的模式。
在此一提的是,在視頻處理系統中,以硬體或軟體手段控制暫存區的寫入端與控制端,在解決採用單一暫存區的系統中因為不固定幀速率造成的問題時,主要方法流程可參考圖6與圖8,以及圖7、圖9與圖10的時序示意圖。在所述流程中,主要概念是,於讀取端開始讀取暫存區中的一影像幀時,控制讀取端等待寫入端寫入資料達一進度門檻時才開始讀取暫存區中的影像幀,以及/或,當判斷讀取端尚未讀取的部分會被寫入端寫入的資料蓋掉時,終止寫入端的寫入動作,直到讀取端完成讀取影像幀的時候。
在第一控制模式下,規定寫入端在寫入暫存區的進度達到所述進度門檻,即通知讀取端讀取暫存區資料,避免讀取沒有資料或是尚未有新資料的暫存區位置;在第二控制模式下,系統的控制電路或控制軟體取得暫存區寫入和讀取資料的位置,藉此判斷是否要終止寫入端的動作,以確保不會把尚未讀取的資料蓋掉。
舉例來說,在第一控制模式下,視頻處理系統中的控制電路或控制軟體,判斷寫入關寫入資料至暫存區的進度,當寫入暫存區的進度達到預先設定的進度門檻,即通過控制電路或控制軟體通知讀取端,讓讀取端可以開始讀取暫存區中的資料,可避免發生讀取到還沒有寫入新資料的暫存位置。
再列舉第二控制模式下的範例,寫入端寫入影像幀(如影像幀E)的時間比讀取端讀取前一幀(如影像幀D)的時間還晚,但由於寫入端的寫入速率較快,若持續不斷地寫入單一暫存區,會將尚未被讀取的資料蓋掉,因此,若判斷寫入端寫入新資料(新影像幀)的位置儲存了讀取端尚未讀取資料的範圍,將主動控制寫入端停止寫入新資料的動作;反之,當判斷寫入新
資料的位置中的資料已經被讀取端讀取完畢,寫入端就可以開始寫入新資料。
上述第一控制模式的運作方式可參考圖6所示不固定幀速率的影像幀讀寫方法的第一實施例流程圖。
在第一控制模式下,視頻處理系統通過其中控制電路或軟體控制寫入端執行寫入動作(步驟S601),基於幀速率控制(FRC)匹配輸入端與輸出端影像格式的需求,控制寫入端將輸入視頻逐幀寫入暫存區,並能根據寫入端的垂直同步訊號檢查寫入端寫入資料至暫存區的進度(步驟S603),並判斷寫入進度是否達到一進度門檻(步驟S605)。
當寫入端寫入進度還未達到系統設定的進度門檻(否),即回到步驟S601繼續影像幀讀寫流程;若判斷寫入端寫入進度達到進度門檻(是),即控制讀取端開始讀取動作(步驟S607),並於完成讀取暫存區中的影像幀後,再控制寫入端寫入下一幀影像的動作(步驟S609),並反覆上述流程。
對應圖6顯示的實施例流程,可參考圖7所示利用設計一暫存區讀取時脈實現不固定幀速率的影像幀讀寫方法的實施例時脈示意圖。
圖中顯示不固定幀速率的影像幀讀寫方法運作在輸入慢的模式的時脈圖,寫入端依照寫入時序701寫入影像幀至暫存區,而讀取端則預設依照讀取時序702讀取暫存區的資料。然而,在輸入慢模式下,可能產生如圖2顯示產生破圖的問題,因此,在此圖例中,引入一暫存區讀取時脈703,系統可以通過暫存區讀取時脈703控制讀取端讀取資料的時機。
舉例來說,圖式中讀取時序702顯示讀取端根據其垂直同步訊號(圖中箭頭表示的同步訊號),但為了避免讀取端讀取到還沒有寫入新資料的暫存位置,寫入端寫入進度尚未達到進度門檻,即使讀取端根據所述暫存區讀取時脈703修正讀取端原來的垂直同步訊號,如圖式中兩處原讀取垂直同
步訊號704,705,也就是,若讀取垂直同步訊號在暫存區讀取時脈703訊號高的水位時,執行正常的讀取動作;若讀取垂直同步訊號在暫存區讀取時脈703訊號低的水位時,即延緩讀取動作,可通過延緩讀取端的讀取動作避免破圖的問題,還能提升系統更新率。
圖8接著顯示不固定幀速率的影像幀讀寫方法的第二實施例流程圖,在此實施例流程中,視頻處理系統通過寫入端的垂直同步訊號控制寫入端執行寫入動作(步驟S801),另一方面可以根據讀取端的垂直同步訊號檢查讀取端讀取暫存區中資料的進度(步驟S803),此時,視頻處理系統通過讀取端的垂直同步訊號判斷暫存區內是否有讀取端尚未讀取的資料(步驟S805)。
當視頻處理系統判斷暫存區中並未有讀取端未讀取的資料(否),即繼續步驟S801開始的流程,繼續判斷寫入端是否會寫入資料而蓋掉讀取端尚未讀取到的資料;若讀取端的垂直同步訊號判斷暫存區有讀取端尚未讀取的資料(是),即終止寫入端的寫入動作(步驟S807),當完成讀取後才重啟寫入動作(步驟S809)。
控制寫入端寫入動作的時脈可參考圖9所示在利用設計寫入遮蔽時脈實現不固定幀速率的影像幀讀寫方法的實施例時脈示意圖。
圖例中顯示寫入端依照寫入時序901執行寫入影像幀至暫存區,同時讀取端依照讀取時序902讀取暫存區中的影像幀。然而,在圖例顯示的輸入快模式下,寫入端寫入的速率大於讀取速率會導致讀取端尚未完成讀取暫存區資料時,就被寫入的新資料所覆蓋,因此在讀寫的動作中引入寫入遮蔽時脈903,主要目的是藉此控制寫入端原本的寫入動作。如圖例顯示在寫入遮蔽時脈903訊號低的水位時,寫入動作不被影響,而在寫入遮蔽時脈903訊號高的水位時,寫入動作將被終止,目的是等待讀取端完成讀取動作後才
重啟寫入。
圖10顯示結合所述暫存區讀取時脈與寫入遮蔽時脈的實施例時脈示意圖,圖中顯示寫入端與讀取端運作的寫入時序1001與讀取時序1002,同樣地引入了控制寫入端寫入動作的寫入遮蔽時脈1003以及控制讀取端讀取時機的暫存區讀取時脈1004。
根據圖中顯示的情況,當視頻處理系統判斷寫入端會寫入讀取端尚未讀取資料的暫存區位置時,如在寫入影像幀E的時間,依照寫入遮蔽時脈1003的遮蔽效應,可使得寫入端寫入影像幀E時被終止,直到讀取端完成讀取目前的影像幀D後,才繼續寫入影像幀E的資料。
此時,在另一情況下,當讀取端完成讀取影像幀D後正要讀取下一影像幀時,如影像幀E,若判斷寫入端尚未完成寫入,將依照暫存區讀取時脈1004延緩讀取時機,如圖式將原讀取垂直同步訊號1005延緩至下一個垂直同步訊號,才繼續讀取資料。而此例顯示,讀取端經過上述方式後,可能也略過其中某影像幀。
在此一提的是,上述第一控制模式還可適用多暫存區的應用上,若上述視頻處理系統有特殊輸出格式的要求,例如要重複送同一張幀,導致讀取端會需要連續讀取多個暫存區的資料,為了避免讀取到寫入端尚未更新的資料,可通過上述暫存區讀取時脈的控制機制確保正確讀取暫存區內的資料,可避免重複輸出的影像幀前後不同的問題。
綜上所述,根據以上實施例所描述的不固定幀速率的影像幀讀寫方法與系統,系統因為輸入與輸出速率不同而需要幀速率控制(FRC)機制,而採用單一暫存區的系統會因為不固定幀速率造成如影片更新率降低或破圖的問題時,主要技術概念是控制讀取端可以等待寫入端寫入資料達一進度時才開始讀取暫存區,或是判斷讀取端尚未讀取的部分會被寫入資料蓋掉時,
終止寫入端的寫入動作,能有效避免上述問題,解決使用者觀看影片的不良體驗。
以上所公開的內容僅為本發明的優選可行實施例,並非因此侷限本發明的申請專利範圍,所以凡是運用本發明說明書及圖式內容所做的等效技術變化,均包含於本發明的申請專利範圍內。
500:影音來源
50:影音處理裝置
501:視頻處理系統
509:音頻處理器
510:幀速率控制器
507:暫存器
503:輸入端電路
505:輸出端電路
5:影音終端
Claims (10)
- 一種不固定幀速率的影像幀讀寫方法,應用於一視頻處理系統,該視頻處理系統具有存取一暫存區的一寫入端與一讀取端,該方法包括:於該讀取端開始讀取該暫存區中一影像幀時,控制該讀取端等待該寫入端寫入資料達一進度門檻時才開始讀取該暫存區中的該影像幀,以及,當判斷該讀取端尚未讀取的部分會被該寫入端寫入的資料蓋掉時,終止該寫入端的寫入動作,直到該讀取端完成讀取該影像幀時。
- 如請求項1所述的不固定幀速率的影像幀讀寫方法,其中,當該寫入端寫入該影像幀至該暫存區時,該視頻處理系統中一控制電路或一控制軟體判斷該寫入端寫入該影像幀至該暫存區的進度,若該寫入端寫入資料的進度達該進度門檻,通知該讀取端開始讀取該暫存區中的該影像幀。
- 如請求項2所述的不固定幀速率的影像幀讀寫方法,其中該視頻處理系統通過該寫入端的垂直同步訊號判斷該寫入端寫入該影像幀的進度。
- 如請求項3所述的不固定幀速率的影像幀讀寫方法,其中引入一暫存區讀取時脈,當該寫入端的寫入進度尚未達到該進度門檻時,該讀取端根據該暫存區讀取時脈修正該讀取端原來的垂直同步訊號,以延緩該讀取端的讀取動作。
- 如請求項1所述的不固定幀速率的影像幀讀寫方法,其中,通過該視頻處理系統中一控制電路或一控制軟體判斷該寫入端寫入一新影像幀至該暫存區的位置儲存了該讀取端尚未讀取的資料,即控制該寫入端停止寫入該新影像幀。
- 如請求項5所述的不固定幀速率的影像幀讀寫方法,其中該視頻處理系統通過該讀取端的垂直同步訊號判斷該暫存區 內是否有該讀取端尚未讀取的資料。
- 如請求項6所述的不固定幀速率的影像幀讀寫方法,其中引入一寫入遮蔽時脈,當該讀取端尚未完成讀取該暫存區的該影像幀時,通過該寫入遮蔽時脈終止該寫入端的寫入動作。
- 一種執行一不固定幀速率的影像幀讀寫方法的系統,包括:一視頻處理系統,該視頻處理系統具有存取一單一暫存區的一寫入端與一讀取端,其中執行的該不固定幀速率的影像幀讀寫方法包括:於該讀取端開始讀取該暫存區中一影像幀時,控制該讀取端等待該寫入端寫入資料達一進度門檻時才開始讀取該暫存區中的該影像幀,以及,當判斷該讀取端尚未讀取的部分會被該寫入端寫入的資料蓋掉時,終止該寫入端的寫入動作,直到該讀取端完成讀取該影像幀時。
- 如請求項8所述的系統,其中,於該視頻處理系統中,以電路或軟體實現該寫入端與該讀取端,該寫入端與該讀取端分別連接實現該單一暫存區的一記憶體,並且該視頻處理系統包括一幀速率控制器,用以控制視頻中各幀影像通過該單一暫存區的寫入與讀取運作以及執行幀速率轉換。
- 如請求項8所述的系統,其中,於該不固定幀速率的影像幀讀寫方法中,當該寫入端寫入該影像幀至該暫存區時,該視頻處理系統中一控制電路或一控制軟體通過該寫入端的垂直同步訊號判斷該寫入端寫入該影像幀至該暫存區的進度,若該寫入端寫入資料的進度達該進度門檻,通知該讀取端開始讀取該暫存區中的該影像幀;並且引入一暫存區讀取時脈,當該寫入端的寫入進度尚未達到該進度門檻時,該讀取端根據該暫存區讀取時脈修正該讀取端原來的垂直同步訊號,以延緩該讀取端的讀取動作。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW112106040A TWI835567B (zh) | 2023-02-20 | 2023-02-20 | 不固定幀速率的影像幀讀寫方法與系統 |
US18/444,860 US20240282339A1 (en) | 2023-02-20 | 2024-02-19 | Method for reading and writing frame images having variable frame rates and system therefor |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW112106040A TWI835567B (zh) | 2023-02-20 | 2023-02-20 | 不固定幀速率的影像幀讀寫方法與系統 |
Publications (2)
Publication Number | Publication Date |
---|---|
TWI835567B true TWI835567B (zh) | 2024-03-11 |
TW202435048A TW202435048A (zh) | 2024-09-01 |
Family
ID=91269574
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW112106040A TWI835567B (zh) | 2023-02-20 | 2023-02-20 | 不固定幀速率的影像幀讀寫方法與系統 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20240282339A1 (zh) |
TW (1) | TWI835567B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW201423723A (zh) * | 2012-10-26 | 2014-06-16 | Qualcomm Mems Technologies Inc | 在運動中用於可視對象之失真校正 |
US20160189685A1 (en) * | 2014-12-31 | 2016-06-30 | Texas Instruments Incorporated | Methods and Apparatus for Displaying Video Including Variable Frame Rates |
CN108449566A (zh) * | 2014-03-12 | 2018-08-24 | 索尼互动娱乐有限责任公司 | 通过调整垂直消隐进行视频帧速率补偿 |
US20190244579A1 (en) * | 2018-02-08 | 2019-08-08 | Samsung Display Co., Ltd. | Display device supporting normal and variable frame modes |
CN114127666A (zh) * | 2019-07-24 | 2022-03-01 | 高通股份有限公司 | 使用可变帧率的中央凹渲染 |
-
2023
- 2023-02-20 TW TW112106040A patent/TWI835567B/zh active
-
2024
- 2024-02-19 US US18/444,860 patent/US20240282339A1/en active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW201423723A (zh) * | 2012-10-26 | 2014-06-16 | Qualcomm Mems Technologies Inc | 在運動中用於可視對象之失真校正 |
CN108449566A (zh) * | 2014-03-12 | 2018-08-24 | 索尼互动娱乐有限责任公司 | 通过调整垂直消隐进行视频帧速率补偿 |
US20160189685A1 (en) * | 2014-12-31 | 2016-06-30 | Texas Instruments Incorporated | Methods and Apparatus for Displaying Video Including Variable Frame Rates |
US20190244579A1 (en) * | 2018-02-08 | 2019-08-08 | Samsung Display Co., Ltd. | Display device supporting normal and variable frame modes |
CN114127666A (zh) * | 2019-07-24 | 2022-03-01 | 高通股份有限公司 | 使用可变帧率的中央凹渲染 |
Also Published As
Publication number | Publication date |
---|---|
US20240282339A1 (en) | 2024-08-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020207251A1 (zh) | 图像更新方法、装置、终端及存储介质 | |
WO2020207250A1 (zh) | 垂直同步方法、装置、终端及存储介质 | |
US8259123B2 (en) | Image processing apparatus | |
US8665282B2 (en) | Image generating apparatus and image generating method and reading of image by using plural buffers to generate computer readable medium | |
JPH0348370A (ja) | メモリアクセス制御回路 | |
US11573758B2 (en) | Display device and multi-display system | |
JPS5987569A (ja) | デ−タ自動連続処理回路 | |
CN110636364B (zh) | 一种图像画质处理方法、智能电视及存储介质 | |
TWI835567B (zh) | 不固定幀速率的影像幀讀寫方法與系統 | |
JP2006301724A (ja) | メモリコントローラ、画像処理コントローラ及び電子機器 | |
US8675026B2 (en) | Image processing apparatus, image processing method, and computer program storage medium | |
JPH03185987A (ja) | 画像受信再生装置 | |
MXPA02005310A (es) | Sistema de procesamiento de datos, programa de computadora y medio de registro. | |
WO2022193461A1 (zh) | 一种演示视频源输出的优化方法 | |
TW202435048A (zh) | 不固定幀速率的影像幀讀寫方法與系統 | |
JPH09116827A (ja) | 縮小映像信号処理回路 | |
TWI855531B (zh) | 多暫存區的影像幀讀寫方法與系統 | |
CN118555354A (zh) | 不固定帧速率的影像帧读写方法与系统 | |
US20050231637A1 (en) | Method for live image display and apparatus for performing the same | |
WO1999040518A1 (en) | Method and apparatus to synchronize graphics rendering and display | |
TW202433455A (zh) | 多暫存區的影像幀讀寫方法與系統 | |
JP2015034891A (ja) | レジスタ設定制御装置 | |
CN118524235A (zh) | 多暂存区的影像帧读写方法与系统 | |
TW202412519A (zh) | 視訊切換方法與視訊處理系統 | |
JP2861053B2 (ja) | 画像処理装置 |