TW201842445A - 在晶片上系統中用於智慧資料/訊框壓縮之系統及方法 - Google Patents
在晶片上系統中用於智慧資料/訊框壓縮之系統及方法 Download PDFInfo
- Publication number
- TW201842445A TW201842445A TW107112364A TW107112364A TW201842445A TW 201842445 A TW201842445 A TW 201842445A TW 107112364 A TW107112364 A TW 107112364A TW 107112364 A TW107112364 A TW 107112364A TW 201842445 A TW201842445 A TW 201842445A
- Authority
- TW
- Taiwan
- Prior art keywords
- compression
- data block
- data
- block
- compressed
- Prior art date
Links
- 238000007906 compression Methods 0.000 title claims abstract description 341
- 230000006835 compression Effects 0.000 title claims abstract description 341
- 238000000034 method Methods 0.000 title claims abstract description 196
- 230000015654 memory Effects 0.000 claims abstract description 69
- 238000004422 calculation algorithm Methods 0.000 claims description 96
- 238000012545 processing Methods 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 11
- 238000013144 data compression Methods 0.000 claims description 7
- 230000009467 reduction Effects 0.000 claims description 5
- 238000012986 modification Methods 0.000 claims description 3
- 230000004048 modification Effects 0.000 claims description 3
- 230000001066 destructive effect Effects 0.000 claims description 2
- 238000004364 calculation method Methods 0.000 claims 4
- 238000004519 manufacturing process Methods 0.000 claims 2
- 208000018910 keratinopathic ichthyosis Diseases 0.000 description 63
- 238000010586 diagram Methods 0.000 description 29
- 238000007726 management method Methods 0.000 description 17
- 230000008569 process Effects 0.000 description 8
- 238000005259 measurement Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 230000007774 longterm Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 238000012546 transfer Methods 0.000 description 6
- 230000002411 adverse Effects 0.000 description 5
- 238000013459 approach Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 238000004880 explosion Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000007707 calorimetry Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000011144 upstream manufacturing Methods 0.000 description 2
- 101100498823 Caenorhabditis elegans ddr-2 gene Proteins 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000000875 corresponding effect Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000013341 scale-up Methods 0.000 description 1
- 238000013515 script Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/127—Prioritisation of hardware or computational resources
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01K—MEASURING TEMPERATURE; MEASURING QUANTITY OF HEAT; THERMALLY-SENSITIVE ELEMENTS NOT OTHERWISE PROVIDED FOR
- G01K13/00—Thermometers specially adapted for specific purposes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/064—Management of blocks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0653—Monitoring storage devices or systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
- H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Discrete Mathematics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
一種用於智慧壓縮之例示性方法界定用於一關鍵效能指標之一臨限值。基於該關鍵效能指標值,可將由一生產者組件產生之資料塊按比例縮小以當根據一無損壓縮模組壓縮時減少功率及/或頻寬消耗。隨後將該等經壓縮資料塊連同後設資料一起儲存於一記憶體組件中,該後設資料傳信在壓縮之前使用之按比例縮放因數。稍後自該記憶體組件擷取該等經壓縮資料塊之消費者組件可將該等資料塊解壓縮,且在需要的情況下基於由該後設資料傳信之該按比例縮放因數進行按比例增大。
Description
本發明涉及在晶片上系統中用於智慧資料/圖框壓縮之系統及方法。
攜帶型計算裝置(「PCD」)正在個人及專業之水準上變成人們的必需品。此等裝置可包括蜂巢式電話、攜帶型數位助理(PDA)、攜帶型遊戲控制台、掌上型電腦以及其他攜帶型電子裝置。PCD通常含有積體電路或晶片上系統(「SoC」),其包括經設計以一起工作之許多組件以向使用者傳遞功能性。舉例而言,SoC可含有任何數目之處理引擎,例如數據機、由核心組成之中央處理單元(「CPU」)、圖形處理單元(「GPU」)等,其自SoC上之記憶體組件讀取資料及指令以及向記憶體組件寫入資料及指令。資料及指令經由稱為匯流排之一系列導線在裝置之間傳輸。
PCD中之匯流排頻寬及記憶體組件之有效設定大小對於優化SoC上之處理組件之功能能力以及保證至少要求之服務品質(「QoS」)水準係重要的。通常,藉由壓縮資料來進一步優化記憶體容量及匯流排頻寬之利用,使得資料需要較少匯流排頻寬來傳輸且需要記憶體中之較少空間用於儲存。然而,並非所有資料/圖框以相同效率進行壓縮,並且因此,PCD設計者面臨折衷決策--使用當經解壓縮時產生較低品質輸出之有損壓縮方法進行壓縮並且作為回報而自較小之記憶體組件及匯流排頻寬要求受益,或替代地,使用當經解壓縮時產生高品質輸出之無損壓縮方法進行壓縮但需要相對較大之記憶體組件及匯流排頻寬來維持令人滿意之QoS。無論哪種方式,設計者皆必須鑒於壓縮之「實際最差情況」來對匯流排及記憶體組件設定大小,否則,藉由任何數目之關鍵效能指標所量測之QoS存在降低的之風險。
簡單而言,此項技術中已知的用於資料/圖框壓縮之當前系統及方法規定了PCD設計者為了確保可接受QoS水準之遞送,必須針對大多數使用情況利用過大之記憶體組件及匯流排頻寬,而不管使用之壓縮方法係什麼。因此,此項技術中需要使得PCD設計者能夠對記憶體組件及匯流排頻寬正確地設定大小以使得對於給定使用情況可使用最佳壓縮方法之系統及方法。更具體地說,此項技術中需要利用混合模式壓縮方法來鑒於任何一或多個關鍵效能指標而優化QoS之智慧壓縮系統及方法。
揭示用於攜帶型計算裝置(「PCD」)中之智慧資料壓縮之方法及系統的各種實施例。例示性方法藉由界定用於PCD內之關鍵效能指標之臨限值而開始,該關鍵效能指標例如由PCD內之溫度感測器產生的溫度讀數。取決於實施例,溫度讀數可與PCD之皮膚或外殼溫度、PoP記憶體裝置溫度、晶粒接面溫度等相關聯。其他關鍵效能指標可為但不限於由壓縮模組壓縮之資料塊的壓縮比、電壓位準、平均電壓供應位準、圖框速率及用於壓縮資料塊之處理時間。
接下來,第一資料塊由生產者組件產生且被接收至根據無損壓縮模式之壓縮模組中。在由生產者組件產生之後,可以預設比例設定按比例縮放第一資料塊。監控關鍵效能指標之作用中水準且與經界定臨限值進行比較。基於關鍵效能指標之作用中水準與經界定臨限值之比較,可將用於由生產者組件產生之資料塊之比例設定修改為經減少之比例設定。隨後,可以經減少之比例設定按比例縮放由生產者組件產生之第二資料塊,然後由壓縮模組根據無損壓縮演算法進行壓縮。經壓縮資料塊可與後設資料一起儲存於記憶體組件中,後設資料傳信在壓縮之前資料塊之比例設定。以此方式,消費者區塊可稍後自記憶體組件擷取資料塊,使用無損演算法解壓縮資料塊,且接著使用由後設資料傳信之比例因數將經解壓縮塊按比例增大。
詞語「例示性」在本文中用於意指充當實例、例子或說明。本文中描述為「例示性」之任何態樣不一定解釋為相對於其他態樣為排他性的、較佳的或有利的。
在此描述中,術語「應用程式」亦可包括具有可執行內容之檔案,例如:目標碼、指令碼、位元組碼、標記語言檔案以及修補程式。此外,本文中提到之「應用程式」還可包括實質上不可執行之檔案,例如可能需要打開之文檔或其他需要存取之資料檔案。
在本說明書中,對「DRAM」或「DDR」記憶體組件之參考將理解為設想較廣類別之揮發性隨機存取記憶體(「RAM」)中之任一者,且將不會把本文揭示之解決方案之範疇限制於特定類型或特定一代之RAM。亦即,應理解,系統及方法之各種實施例提供用於管理已經根據無損及/或有損壓縮演算法壓縮之資料異動之解決方案,且在應用態樣不一定限於與雙資料速率記憶體相關聯之經壓縮資料異動。此外,設想本文揭示之解決方案之某些實施例可適用於DDR、DDR-2、DDR-3、低功率DDR(「LPDDR」)或任何後續一代之DRAM。
如在本說明書中所使用,術語「組件」、「資料庫」、「模組」、「區塊」、「系統」及類似術語既定大體上指代電腦相關實體,其為硬體、韌體、硬體與軟體之組合、軟體或執行中之軟體,除非具體限於某一電腦相關實體。例如,組件可為但不限於在處理器上運行之進程、處理器、物件、可執行碼、執行線緒、程式或電腦。作為說明,在計算裝置上運行之應用程式以及該計算裝置皆可為組件。一或多個組件可駐留在進程及/或執行線緒內,且組件可局部化於一個電腦上及/或分佈在兩個或更多個電腦之間。此外,此等組件可自各種電腦可讀媒體執行,電腦可讀媒體具有儲存在其上之各種資料結構。組件可例如根據具有一或多個資料封包之信號(例如,來自與本端系統、分佈式系統中之另一組件及/或跨越例如網際網路等網路藉助於信號與其他系統進行交互之一個組件的資料)藉助於本端及/或遠端進程而通信。
在本說明書中,術語「中央處理單元(「CPU」)」、「數位信號處理器(「DSP」)」、「圖形處理單元(「GPU」)」及「晶片」可互換地使用。此外,CPU、DSP、GPU或晶片可包含在本文中大體上被稱作「核心」之一或多個相異之處理組件。
在本說明書中,術語「引擎」、「處理引擎」、「處理組件」、「生產者」及類似術語用以指代晶片上系統(「SoC」)內的產生資料及/或圖框且在匯流排上將資料及/或圖框傳送至記憶體組件或自記憶體組件傳送之任何組件。因此,引擎可指代(但不限於指代)CPU、DSP、GPU、數據機、控制器、相機、錄像機等。
在本說明書中,術語「匯流排」指代一系列導線,資料藉由導線自處理引擎傳輸至位於SoC之上或之外的記憶體組件或其他裝置。應理解,匯流排由兩個部分組成--位址匯流排及資料匯流排,其中資料匯流排傳送實際資料且位址匯流排傳送指定資料在記憶體組件中之位置的資訊(亦即,位址及相關聯後設資料)。術語「寬度」或「匯流排寬度」或「頻寬」指代藉由給定匯流排每循環可傳輸之資料的量,亦即「組塊大小」。舉例而言,16位元組匯流排可每次傳輸16位元組之資料,而32位元組匯流排可每循環傳輸32位元組之資料。此外,「匯流排速度」指代資料組塊每一秒可傳輸通過給定匯流排之次數。類似地,「匯流排循環」或「循環」指代一個資料組塊通過給定匯流排之傳輸。
在本說明書中,術語「攜帶型計算裝置」(「PCD」)用以描述基於例如電池等有限容量電力供應器而操作之任何裝置。雖然以電池操作之PCD已經使用了數十年,但伴隨著第三代(「3G」)及第四代(「4G」)無線技術出現的可再充電電池中之技術進步已經使得大量PCD具有多種能力。因此,PCD可能為蜂巢式電話、衛星電話、尋呼機、PDA、智慧電話、導航裝置、智慧本或閱讀器、媒體播放器、前述裝置之組合、具有無線連接之膝上型電腦等等。
在本說明書中,術語「無損」及「有損」指代不同類別之壓縮演算法或方法,且並不有意指代任何特定演算法。此項技術之技術人員將認識到給定特定壓縮演算法係「無損」還是「有損」的。一般而言且如此項技術之技術人員將理解,「無損」及「有損」係描述在資料集或圖框之壓縮中當檔案經解壓縮時是否可復原所有原始資料之術語。藉由「無損」壓縮,原始在圖框中之每個單個資料位元在圖框經解壓縮之後仍保留,亦即,所有資訊完全恢復。圖形互換檔案(「GIF」)係提供無損壓縮之例示性影像格式。相比之下,有損壓縮演算法藉由永久地消除某些資訊、尤其係冗餘資訊而減少圖框或資料集。因此,當以有損演算法壓縮之檔案經解壓縮時,原始資訊之僅一部分仍存在(但使用者體驗不會受此影響)。有損壓縮演算法可適合於例如基於視訊及聲音之使用情況,因為使用者不會偵測到某一量之資訊損失。JPEG影像檔案係提供有損壓縮之例示性影像格式。使用有損壓縮演算法,設計者可決定引入多少損失且在檔案大小與輸出影像品質之間做出折衷。
在本說明書中,術語「影像」、「資料集」、「資料」、「圖框」、「影像圖框」、「緩衝區」、「檔案」及類似術語可互換地使用。雖然本文中在以例如可由相機或視訊子系統產生之影像圖框的形式產生資料集之生產者組件的上下文內描述解決方案之實施例,但應理解,本文所描述之解決方案在應用中不限於圖框。實情為,據設想解決方案之實施例可適用於可大體上得益於資料壓縮之任何使用情況。
在本說明書中,術語「圖塊」及「單元」可互換地使用以指代形成例如圖框等較大資料塊之子集的資料塊。
在本說明書中,術語「未經壓縮」指代處於原始壓縮前狀態之圖框,而術語「經解壓縮」指代首先使用壓縮演算法自未經壓縮狀態壓縮且接著後來經解壓縮之圖框。取決於使用之壓縮類別,經解壓縮圖框之資料集可相同於圖框的原始未經壓縮狀態之資料集(無損壓縮)或者可不相同(有損壓縮)。
如圖框壓縮之領域之技術人員將理解,藉由任何給定壓縮演算法產生之所得壓縮比必然在圖框之間不同。以數位方式捕獲之視訊序列的給定圖框中之紋理水準、光狀況、ISO設定等可能顯著不同於同一序列中之不同圖框,且因此圖框之壓縮之相對水準亦將顯著不同。舉例而言,捕捉兩個站著說話的人之視訊序列中之圖框與捕捉相同的兩個人沿著街道快跑遠離背景中之爆炸的後續圖框相比更可能經歷高壓縮水準。簡單而言,關於跑動的主體及爆炸之圖框恰好具有大量資料,若圖框當後來經解壓縮時要遞送高品質再現則不可提供其壓縮之損失。
藉由足夠大之處理組件、記憶體組件、匯流排頻寬及電力供應,PCD設計者將不必考慮一個壓縮演算法對另一壓縮演算法之折衷,他們簡單地以可能之最高品質水準產生圖框且在此情況下以無損壓縮演算法進行壓縮。以此方式,他們可保證使用者體驗到的QoS始終處於其最大可能水準。但PCD的有限外觀尺寸之現實迫使設計者在對PCD中之組件設定大小時權衡各種壓縮演算法之折衷以針對所有預測使用情況皆傳遞至少可接受之QoS。
因此,PCD設計者在評估對於所有已知使用情況需要之頻寬要求及組件大小時通常使用「實際最差情況」壓縮比。因此,實際最差情況係針對需要壓縮的最困難之圖框(例如,捕捉沿著街道快跑遠離背景中之爆炸的人之圖框)維持至少可接受之QoS所需的壓縮比。使用實際最差情況,設計者做出保守的設定大小選擇以確保無論給定圖框之複雜性如何,記憶體及匯流排頻寬將始終足夠。應注意,若設計者對頻寬設定大小不足,則在成問題之使用情況期間在處理中之所得等待時間可造成圖框丟失、每秒圖框數(「FPS」)速率之減少或類似情況。相反,對於比實際最差情況好之所有使用情況,系統對於傳遞至少可接受之QoS可能顯著過大,從而導致較高成本系統。
有利地,解決方案之實施例為設計者提供對生產者、記憶體組件及匯流排頻寬「正確設定大小」之能力以跨越某一範疇之使用情況優化功率消耗及QoS水準。應注意,解決方案之實施例利用混合模式壓縮方法。在如此做時且如下文鑒於附圖將更詳盡地闡釋,某些實施例實現在單個使用情況中使用無損及有損壓縮演算法,演算法之選擇及持續時間係鑒於關鍵效能指標來做出。某些其他實施例實現動態圖框品質水準作為對無損壓縮區塊之輸入以便產生更「可壓縮」之圖框。
轉而參看圖1,說明對由多個資料子單元或圖塊組成之影像圖框進行壓縮的作用。在本說明書中,可在由256位元組圖塊組成之影像圖框之上下文內描述各種實施例。然而應注意,應理解,256位元組圖塊大小以及各種經壓縮資料異動大小在本質上係例示性的,且並不表明解決方案之實施例在應用中限於256位元組圖塊大小。此外應理解,在本說明書中對DRAM之任何特定最小存取長度(「MAL」)或存取塊大小(「ABS」)之參考係為了描述解決方案之便利性而使用,且不表明解決方案之實施例在應用中限於具有特定MAL要求之DRAM裝置。因此,此項技術之技術人員將認識到,在本說明書中提及之特定資料傳送大小、組塊大小、匯流排寬度、MAL等係僅為了例示性目的而提供,且並不將設想之解決方案之範疇限制為適用於具有相同資料傳送大小、組塊大小、匯流排寬度、MAL等之應用。
返回至圖1之說明,未經壓縮影像圖框(亦稱為「緩衝區」)描繪為包含三十個未經壓縮圖塊或單元,其中每一個具有大小「K」,如最暗陰影所表示。例示性大小K可為256位元組,然而如上文所解釋,圖塊不限於任何特定大小且可根據應用而變化。如此項技術之技術人員將理解,未經壓縮影像圖框可藉由以逐個圖塊基礎應用壓縮演算法之壓縮器區塊(圖1中描繪為影像編解碼器模組113)減少大小,進而優化其在匯流排上之傳送且最小化其對記憶體容量之影響。壓縮結果為經壓縮影像圖框加上後設資料檔案,如圖1之說明中可見。經壓縮影像圖框包含原始未經壓縮影像圖框中的在已經受壓縮區塊113之壓縮演算法之後的圖塊。
在未經壓縮影像圖框中,每一圖塊可具有大小K,而在經壓縮影像圖框中,每一圖塊可具有大小K或更小(用於可能無壓縮之K、K-1位元組、K-2位元組、K-3位元組、...、K=1位元組)。在說明中,取決於由壓縮區塊113將其壓縮演算法應用於由給定圖塊保持之資料而產生的壓縮程度,形成經壓縮影像圖框之各種圖塊由不同水準之陰影表示。應注意,壓縮區塊113產生經壓縮影像圖框後設資料之伴隨緩衝區,如此項技術之技術人員將理解。經壓縮影像圖框後設資料含有經壓縮影像圖框中之每一經壓縮圖塊的大小、類型及屬性之記錄。因為DRAM存取可能限於最小存取長度MAL之單元,所以給定經壓縮圖塊之大小可在後設資料中表示為表示經壓縮圖塊大小所需之ABS的數目(例如,1 MAL、2 MAL、...n MAL)。後設資料中之此大小描述允許緩衝區之未來讀取者要求僅用於將每一圖塊解壓縮回到原始大小K所需要的最小所需資料量之記憶體。
圖2說明關於DRAM記憶體組件之經壓縮資料異動,其滿足每一異動為每異動最小存取長度(「MAL」)之整倍數的要求。如自圖2說明可瞭解,經壓縮圖塊可具有比其儲存於其中的DRAM之最小存取長度要求之整倍數小的長度。因此,對經壓縮資料之請求需要包括某一量之無用資料或「填補」之異動,需要該無用資料或填補以滿足MAL之整倍數要求。不載有資訊之填補添加至經壓縮圖塊資料以使異動大小變為系統MAL之整倍數(i
*MAL)。取決於特定晶片技術(例如LPDDR2、LPDDR3、LPDDR4等)及記憶體匯流排寬度(x16、x32、x64),例示性MAL可為32位元組或64位元組。作為一實例,可用1個位元組之填補資料填補具有63位元組大小之經壓縮圖塊,以便形成完整的64位元組異動大小(2x32B MAL或1x64B MAL)。類似地,可用MAL為32位元組(3x32B MAL)之31位元組或在MAL為64位元組之情況下用63位元組之填補資料填補具有65位元組大小的經壓縮圖塊,以便形成完整128位元組異動大小(2x64B MAL)。應注意在上述實例中,經壓縮圖塊大小之差異僅僅為2位元組;然而,因為65位元組經壓縮圖塊超過64位元組,所以其異動必須包括顯著較多之填補。
圖3說明與例示性影像圖框相關聯之一系列經壓縮資料異動。應注意,圖3之說明中的異動或單元可視為已經根據無損或有損壓縮演算法進行壓縮(以及圖1及圖2之說明中描繪的彼等單元)。
影像圖框示出為具有「N」行及「M」列之圖塊。第一列圖塊中之前四個順序圖塊根據此項技術中已知之方法圖示為處於其未經壓縮長度、經壓縮長度及異動長度(經壓縮長度加上填補)。為說明方便起見在前四個順序圖塊之上下文內進行說明,描繪之概念與影像圖框之第一列圖塊中之前四個順序圖塊除外的圖塊群組相關,如此項技術之技術人員將理解。
檢視處於未經壓縮狀態之例示性四個順序圖塊,每一圖塊(#1,0;#2,0;#3,0;#4,0)具有256位元組長度(亦設想其他長度)。當經壓縮時,例示性四個順序圖塊分別具有112位元組、56位元組、33位元組及177位元組之長度。假定MAL為64位元組,用於例示性四個順序圖塊中之每一者的異動長度分別可為128位元組(112位元組經壓縮資料加上16位元組填補)、64位元組(56位元組經壓縮資料加上8位元組填補)、64位元組(33位元組經壓縮資料加上31位元組填補)及192位元組(177位元組經壓縮資料加上15位元組填補)。應注意,為了實現例示性順序圖塊中之全部四者之異動,此項技術中已知之方法進行四個異動,每一經壓縮圖塊一個。
圖4A說明視訊流中之例示性圖框序列,個別圖框具有變化之複雜性且根據無損壓縮演算法經壓縮。將與圖4A曲線圖結合描述的圖4B說明圖4A之說明的例示性圖框序列,圖框係根據利用包括無損及有損演算法之混合模式壓縮之智慧壓縮方法經壓縮。應注意,雖然圖4之說明中的塊稱為圖框,但據設想該塊亦可表示圖框內之圖塊。亦即,據設想解決方案之實施例可按逐圖框基礎實施,或若如此組態則可按逐圖塊基礎實施。因此,本文所描述的解決方案之範疇將不限於僅在圖框層級之應用,因為解決方案之實施例亦可在圖塊層級應用。
如自與圖4相關聯之圖例可理解,描繪為實心塊之彼等圖框係根據無損壓縮演算法壓縮之圖框,而以透明塊描繪之彼等圖框係根據有損壓縮演算法壓縮之圖框。由實線連接的彼等圖框係形成經產生、壓縮且輸出至記憶體裝置(舉例而言,例如DDR記憶體組件)之圖框的序列的彼等圖框。圖4A及圖4B曲線圖上的「y軸」表示圖框之壓縮比,而「x軸」表示時間。
首先參看圖4A曲線圖,舉例而言,例如相機或視訊子系統等圖框生產者正在產生根據無損壓縮演算法壓縮之順序圖框。對於自圖框1開始的前七個圖框,圖框之壓縮比高於最小目標壓縮比臨限值,如曲線圖中的水準虛線所表示。因此,對於前七個圖框,原始產生之圖框的複雜性使得無損壓縮演算法之應用並不產生太低以致使系統頻寬負擔過大且不利地影響QoS水準之壓縮比。然而,自圖框8開始且繼續至圖框20,原始產生之圖框的相對複雜性增加,使得無損壓縮演算法不能夠將圖框大小減少至高於所需目標最小壓縮比的水準。原始產生之圖框的相對複雜性在圖框21處減少,使得正應用之無損壓縮演算法充分地減少圖框之大小以將壓縮比維持高於圖4A說明中的圖框8至20之目標線,此等圖框係根據不能夠減少圖框大小超出目標最小壓縮比之無損壓縮演算法進行壓縮,存在使用者經歷不可接受地低的QoS之風險。用於適應圖框8至20之不充足頻寬可造成系統藉由丟棄圖框中之一或多個而進行回應,從而增加等待時間以使得有效圖框速率降低等等。
參考圖4B曲線圖,圖4A曲線圖中說明的同一序列之原始產生圖框係根據解決方案之實施例使用智慧壓縮方法進行壓縮。類似於圖4A曲線圖中,圖框1至7係根據無損壓縮演算法壓縮。在未經壓縮狀態中具有相對複雜性之圖框8係使用無損壓縮演算法最低限度地壓縮,且因此展現低於目標最小壓縮比之壓縮比。回應於圖框8壓縮比,可使用產生超過目標最小值之壓縮比的有損壓縮演算法來壓縮圖框9。圖框序列以根據有損壓縮演算法壓縮的後續圖框繼續直至圖框21,應認識到,較佳之無損壓縮演算法將產生可接受之壓縮比。在此點上,混合模式方法預設回到無損壓縮演算法且在圖框22處使用無損演算法繼續壓縮。
對圖框21中之經減少複雜性之偵測可以多個方式實現。一個實例將為以無損方式對每一圖框/圖塊進行編碼且記錄所得壓縮比,但不將實際無損經壓縮資料寫入至儲存裝置或DRAM;一旦在一圖框上的所記錄壓縮圖框高於目標最小值,系統便可切換至使用無損壓縮用於圖框22,如圖4B中所示。替代地,圖框21中之經減少複雜性之偵測可藉由檢查有損圖框之壓縮比來實現。對於低複雜性圖框,有損壓縮比將顯著高於高複雜性圖框之情況。系統可隨後使用用於有損壓縮比之預定義臨限值,以在一旦對於給定圖框(例如如圖4B中所示之圖框22)超過有損壓縮比臨限值時便指示系統可切換至使用無損壓縮。
有利地,藉由使用混合模式方法,智慧壓縮解決方案之實施例可最小化序列中經壓縮至低於目標最小壓縮比的壓縮比之圖框的數目(例如,圖4B曲線圖中之圖框8),同時還最小化序列中當無損壓縮演算法原本將產生可接受壓縮比時使用有損壓縮演算法壓縮的圖框之數目(例如,圖4B曲線圖中之圖框21)。
圖5係鑒於任何一或多個關鍵效能指標(「KPI」)說明利用圖4B之混合模式壓縮方法的智慧壓縮方法500之邏輯流程圖,關鍵效能指標例如(但不限於)最小目標壓縮比、頻寬利用、電壓位準、圖框速率(「FPS」)、壓縮等待時間等。應注意,圖4B曲線圖說明之混合模式壓縮方法係使用輸出圖框之壓縮比作為KPI來描述,然而,據設想可使用除壓縮比外的KPI作為用於雙態觸發壓縮模式之觸發器而採用同一方法。
在區塊505處開始,可將原始產生之圖框接收至影像編解碼器113中,該影像編解碼器包含一或多個無損壓縮區塊及一或多個有損壓縮區塊。在區塊505處,使用預設或較佳的無損壓縮區塊壓縮所接收圖框。接下來,在區塊510處,監控相關KPI以判定QoS是否保持在可接受水準,且在決策區塊515處,將所監控KPI與預定臨限值進行比較。若KPI高於(或按情況可能為低於)預定臨限值,亦即,KPI處於可接受水準,則方法500可遵循「是」分支回到區塊505,且使用無損壓縮演算法繼續對傳入未經壓縮圖框之壓縮。然而,若受監控KPI當相比於預定臨限值時不處於可接受之水準,則自決策區塊515遵循「否」分支至區塊520。在例示性實施方案中,在遇到處於不可接受水準之KPI的第一實例之後緊接著遵循「否」分支。在其他例示性實施方案中,在調用「否」分支之前KPI對於X個連續時間之可程式化序列或對於Y個連續序列之窗口中的X個時間必須不可接受之情況下,對「否」決策添加滯後。
在區塊520處,將下一產生之未經壓縮圖框接收至編解碼器113中且使用有損壓縮區塊進行壓縮。有利地,雖然使用有損壓縮演算法壓縮之圖框可稍後產生與原始產生之未經壓縮圖框相比具有相對較低品質水準的經解壓縮圖框,但與有損壓縮相關聯之經減少頻寬可造成相關KPI趨於返回至可接受水準。
接下來,在區塊525處,監控相關KPI以判定QoS是否已返回至可接受水準,且在決策區塊530處,將所監控KPI與預定臨限值進行比較。若KPI尚未返回至可接受水準,則方法500可遵循「否」分支回到區塊520且使用有損壓縮演算法繼續對傳入之未經壓縮圖框之壓縮。然而,若受監控KPI指示KPI可能已返回至當相比於預定臨限值時之可接受水準,則自決策區塊530遵循「是」分支至決策區塊505。
在決策區塊535,方法500可考慮是否已使用有損壓縮演算法產生足夠之圖框以證明可返回至無損壓縮演算法。雖然解決方案之一些實施例可在一旦KPI指示可接受水準就觸發回復至較佳無損壓縮模式,但據設想,其他實施例可包括滯後考慮以減輕KPI可能跨越臨限值來回反彈且在如此時觸發無損與有損模式之間的過量雙態觸發事件之概率。在例示性實施方案中,在遇到高於臨限值之KPI的第一實例之後緊接著遵循「是」分支。對於其他例示性實施方案,在調用「是」分支之前KPI對於K個連續時間之可程式化序列或對於L個連續序列之窗口中的K個時間必須可接受之情況下,對「是」決策添加滯後。
返回至方法500在決策區塊535處,若已使用有損壓縮壓縮了預定數目之圖框,但KPI處於當相比於臨限值時之可接受水準,則可遵循「是」分支且方法返回至區塊505,其中將無損壓縮演算法應用於下一輸入之未經壓縮圖框。然而,若在決策區塊535,尚未使用有損壓縮演算法壓縮預定數目之圖框,但KPI保持在可接受水準,則可遵循「否」分支至區塊540且接收下一未經壓縮圖框並使用有損壓縮區塊進行壓縮。在區塊545處,監控KPI,且方法500循環回至決策區塊530。
以此方式,使用混合模式壓縮方法之智慧壓縮方法的解決方案之實施例可折衷一些經解壓縮圖框之未來品質以便優化藉由相關的一或多個KPI量化之QoS。
圖6係鑒於熱能量測及臨限值說明利用圖4B之混合模式壓縮方法之智慧壓縮方法600的邏輯流程圖。應注意,圖4B曲線圖說明之混合模式壓縮方法係使用輸出圖框之壓縮比作為用於判定何時在無損與有損壓縮模式之間雙態切換之觸發器來進行描述,然而據設想,可鑒於熱預算約束及/或熱量測作為減輕及管理熱能產生之方式而採用同一方法。亦即,據設想,可利用圖4B之混合模式壓縮方法作為熱管理技術。
在區塊605處開始,可將原始產生之圖框接收至影像編解碼器113中,該影像編解碼器包含一或多個無損壓縮區塊及一或多個有損壓縮區塊。在區塊605處,使用預設或較佳之無損壓縮區塊壓縮所接收圖框。接下來,在區塊610處,監控一或多個溫度感測器以判定熱能水準是否保持在可接受水準,且在決策區塊615處,將由感測器產生之溫度讀數與預定臨限值進行比較。所監控之溫度感測器可與PCD 100之皮膚溫度、處理核心之接面溫度、PoP記憶體組件之溫度等相關聯。若溫度低於預定臨限值,亦即,受監控熱狀況處於可接受水準,則方法600可遵循「否」分支回到區塊605且繼續使用無損壓縮演算法對傳入之未經壓縮圖框之壓縮。然而,若受監控熱狀況不處於當相比於預定臨限值時之可接受水準,則自決策區塊615遵循「是」分支至區塊620。替代實施方案可選擇在滿足熱KPI之後並不緊接著採取「是」分支,而是在採取「是」分支之前的預定時間段等待直至熱KPI高於臨限值。
在區塊620處,將下一產生之未經壓縮圖框接收至編解碼器113中且使用有損壓縮區塊進行壓縮。有利地,雖然使用有損壓縮演算法壓縮之圖框可稍後產生與原始產生之未經壓縮圖框相比具有相對較低品質水準的經解壓縮圖框,但與有損壓縮相關聯之經減少頻寬可減小功率消耗且致使所監控熱狀況趨於返回至可接受水準。
接下來,在區塊625處,監控溫度感測器以判定熱狀況是否已返回至可接受水準,且在決策區塊630處,將溫度讀數與預定臨限值進行比較。若由溫度感測器監控之熱狀況尚未返回至可接受水準,則方法600可遵循「是」分支回到區塊620且繼續使用有損壓縮演算法對傳入之未經壓縮圖框之壓縮。然而,若來自溫度感測器之讀數指示熱狀況可能已返回至當相比於預定臨限值時之可接受水準,則自決策區塊630遵循「否」分支至決策區塊635。
在決策區塊635處,方法600可考慮是否已使用有損壓縮演算法產生足夠之圖框以證明可返回至無損壓縮演算法。雖然解決方案之一些實施例可在一旦溫度讀數指示對於正監控之熱狀況的可接受水準就觸發回復至較佳無損壓縮模式,但據設想,其他實施例可包括滯後考慮以減輕熱狀況可能跨越臨限值來回反彈且在如此時觸發無損與有損模式之間的過量雙態觸發事件之概率。
返回至方法600在決策區塊635處,若已使用有損壓縮壓縮了預定數目之圖框,或若已經過預定量之時間,雖然與溫度感測器相關聯之熱狀況處於當相比於臨限值時之可接受水準,但可遵循「是」分支且方法返回至區塊605,其中將無損壓縮演算法應用於下一輸入之未經壓縮圖框。然而,若在決策區塊635處,尚未使用有損壓縮演算法壓縮預定數目之圖框,或尚未經過預定量之時間,雖然熱狀況保持在可接受水準,但可遵循「否」分支至區塊640,且接收下一未經壓縮圖框並使用有損壓縮區塊進行壓縮。在區塊645處,使用由溫度感測器產生之溫度讀數監控熱狀況,且方法600循環回到決策區塊630。
以此方式,使用混合模式壓縮方法之智慧壓縮方法的解決方案之實施例可折衷一些經解壓縮圖框之未來品質以便減輕不利的熱能產生及隨後裝置之溫度。
圖7係鑒於與平均電壓設定相關聯之系統可靠性目標說明利用圖4B之混合模式壓縮方法之智慧壓縮方法700的邏輯流程圖。應注意,圖4B曲線圖說明之混合模式壓縮方法係使用輸出圖框之壓縮比作為用於判定何時在無損與有損壓縮模式之間雙態切換之觸發器來描述,然而據設想,可鑒於與平均電壓設定相關聯之系統可靠性目標而採用同一方法。亦即,據設想,可利用圖4B之混合模式壓縮方法作為維持上臨限值與下臨限值之間的平均電壓供應之技術。如此項技術之技術人員將理解,為了確保晶片102之可靠性,可能需要保持平均電壓供應低於最大平均值但不會低太多而使使用者經歷的平均QoS不必要地受影響。
在區塊705處開始,可將原始產生之圖框接收至影像編解碼器113中,該影像編解碼器包含一或多個無損壓縮區塊及一或多個有損壓縮區塊。在區塊705處,使用預設或較佳之無損壓縮區塊壓縮所接收圖框。接下來,在區塊710處,監控一或多個電壓感測器以用於計算供應至晶片102之電壓隨時間的運行平均值。基於運行平均值,方法700可藉由在決策區塊715處將電壓平均值與預定臨限值進行比較而判定晶片之長期可靠性是否為可接受的。若電壓供應平均值低於預定臨限值,亦即,晶片之預測長期可靠性處於可接受水準,則方法700可遵循「否」分支回到區塊705且繼續使用無損壓縮演算法對傳入之未經壓縮圖框之壓縮。然而,若電壓供應平均值不處於當相比於預定臨限值時之可接受水準,則自決策區塊715遵循「是」分支至區塊720。
在區塊720處,將下一產生之未經壓縮圖框接收至編解碼器113中且使用有損壓縮區塊進行壓縮。有利地,雖然使用有損壓縮演算法壓縮之圖框可稍後產生與原始產生之未經壓縮圖框相比具有相對較低品質水準的經解壓縮圖框,但與有損壓縮相關聯之經減少頻寬可減小功率消耗且致使電壓供應平均值趨於返回至可接受水準。
接下來,在區塊725處,監控電壓感測器以判定電壓供應平均值是否已返回至可接受水準,且在決策區塊730處,將電壓供應平均值與預定低臨限值進行比較。若自所監控電壓感測器計算之電壓供應平均值保持高於較低臨限值,則方法700可遵循「否」分支回到區塊720且繼續使用有損壓縮演算法對傳入之未經壓縮圖框之壓縮。然而,若電壓供應平均值指示對晶片102之平均電壓供應已下落至低於該低平均臨限值,則自決策區塊730遵循「是」分支回到區塊705,其中將無損壓縮應用於下一傳入之未經壓縮圖框。
以此方式,使用混合模式壓縮方法之智慧壓縮方法的解決方案之實施例可折衷一些經解壓縮圖框之未來品質以便將平均電壓供應維持在與目標晶片可靠性目的相關聯之範疇中。
圖8說明視訊流中之例示性圖框序列,個別圖框具有變化之複雜性且在影像品質設定之動態調整之後根據無損壓縮演算法進行壓縮。應注意,雖然圖8之說明中的塊稱為圖框,但據設想塊亦可表示圖框內之圖塊。亦即,據設想解決方案之實施例可按逐圖框基礎實施,或若如此組態則按逐圖塊基礎實施。因此,本文所描述之解決方案的範疇將不限於僅在圖框層級之應用,因為解決方案之實施例亦可在圖塊層級應用。
如自與圖8相關聯之圖例可理解,描繪為實心正方形塊之彼等圖框係當使用預設「高」影像品質水準產生未經壓縮圖框時根據無損壓縮演算法壓縮之圖框。相比之下,以透明正方形塊描繪之彼等圖框係當使用相對於預設影像品質水準的品質「較低」之經調整影像品質水準產生未經壓縮圖框時根據無損壓縮演算法壓縮之圖框。實心圓指示例如相機或視訊子系統等生產者正在產生未經壓縮圖框之影像品質水準。由實線連接的彼等圖框係形成根據作用中影像品質水準設定產生、經壓縮且輸出至記憶體裝置(舉例而言,例如DDR記憶體組件)之圖框之序列的彼等圖框。圖8曲線圖上之左側「y軸」表示輸出圖框之壓縮比,右側「y軸」表示未經壓縮圖框之生產者的影像品質水準設定,且「x軸」表示時間。
參考圖8曲線圖,舉例而言,例如相機或視訊子系統等圖框生產者正在以預設影像品質水準產生順序圖框,圖框隨後根據無損壓縮演算法進行壓縮。對於自圖框1開始的前七個圖框,圖框之壓縮比高於最小目標壓縮比臨限值,如曲線圖中之水準虛線所表示。因此,對於前七個圖框,處於預設影像品質設定之原始產生圖框之複雜性使得無損壓縮演算法的應用並不產生太低以致使系統頻寬負擔過大且不利地影響QoS水準之壓縮比。然而,自圖框8開始且繼續至圖框20,當在預設影像品質水準下產生時圖框之相對複雜性使得無損壓縮演算法不能夠顯著減少圖框大小。作為回應,可減少與圖框9相關聯之影像品質水準設定以使得原始產生之未經壓縮圖框之相對複雜性降低,使得無損壓縮演算法可充分維持壓縮比高於目標線。
據設想在解決方案之一些實施例中,在影像生產者內可調整任何數目及/或組合之「旋鈕」,以便降低編解碼器模組113之上游的未經壓縮影像之影像品質水準。舉例而言,可調整例如(但不限於)紋理設定、顏色位元解析度、中央窩設定等影像品質設定,以便降低由生產者產生之未經壓縮圖框的複雜性。
還設想在解決方案之一些實施例中,生產者藉由根據預定水準、垂直及/或雙向按比例縮放因數按比例縮小未經壓縮影像可有效地降低未經壓縮影像之影像品質水準。一旦按比例縮小,編解碼器模組113便可根據無損壓縮演算法壓縮現在「較小」之未經壓縮影像,並且接著傳輸至儲存裝置或DRAM 112。用以「按比例縮小」未經壓縮影像之預定按比例縮放因數可儲存於與經壓縮影像相關聯之後設資料中。在解決方案之此類實施例中,影像品質水準之動態減少需要生產者區塊及消費者區塊兩者之協作,因為一旦影像經解壓縮,消費者區塊就將經組態以藉由相同之預定按比例縮放因數使影像「按比例增大」。再次據設想,在無損壓縮之前生產者區塊用來「按比例縮小」未經壓縮影像之按比例縮放因數可經由信號提供至消費者區塊,該信號以與經壓縮檔案相關聯之經壓縮影像後設資料(圖1中說明之後設資料)體現。
返回至圖8之說明,在圖框21,生產者中之較低影像品質水準設定致使無損壓縮演算法產生具有高於低品質圖框之預定最大壓縮比的壓縮比之經壓縮圖框。作為回應,用於以未壓縮形式產生圖框22之影像品質設定可返回至預設設定。在圖框序列中向前移動,影像品質設定可保持在預設水準,除非且直至無損壓縮演算法再次產生具有低於最小目標之壓縮比的經壓縮圖框為止。
有利地,藉由使用動態品質設定方法,智慧壓縮解決方案之實施例可最小化序列中經壓縮至低於目標最小壓縮比的壓縮比之圖框的數目(例如,圖8曲線圖中之圖框8),同時還最小化序列中自使用較低品質設定產生的未經壓縮圖框壓縮之圖框的數目(例如,圖8曲線圖中之圖框21)。
圖9係鑒於任何一或多個關鍵效能指標(「KPI」)說明利用圖8之動態品質輸入壓縮方法之智慧壓縮方法900的邏輯流程圖,關鍵效能指標例如(但不限於)最小目標壓縮比、頻寬利用、電壓位準、圖框速率(「FPS」)、壓縮等待時間等。應注意,圖8曲線圖說明之動態輸入圖框品質方法係使用輸出圖框之壓縮比作為KPI來描述,然而,據設想可使用除壓縮比外的KPI作為用於調整生產者品質設定之觸發器而採用同一方法。
在區塊905處開始,可將根據預設影像品質設定產生之未經壓縮圖框接收至包含一或多個無損壓縮區塊的影像編解碼器113中且相應地進行壓縮。接下來,在區塊910處,監控相關KPI以判定KPI是否保持在可接受水準,且在決策區塊915處,將所監控KPI與預定臨限值進行比較。若KPI高於(或按情況可能為低於)預定臨限值,亦即,KPI處於可接受水準,則方法900可遵循「否」分支回到區塊905,且繼續以預設影像品質設定產生之傳入未經壓縮圖框之壓縮。然而,若所監控KPI不處於當相比於預定臨限值時之可接受水準,則自決策區塊915遵循「是」分支至區塊920。
在區塊920處,根據經減少影像品質水準設定產生下一產生之未經壓縮圖框,且在區塊925處接收至編解碼器113中且使用無損壓縮演算法進行壓縮。有利地,雖然使用較低品質水準設定產生未經壓縮圖框將在稍後經解壓縮時影響圖框之最終品質,但與相對較不複雜的未經壓縮圖框之無損壓縮相關聯之經減少頻寬可致使相關KPI趨於返回至可接受水準。
接下來,在決策區塊930處,將所監控KPI與預定臨限值進行比較以判定QoS是否已返回至可接受水準。若KPI尚未返回至可接受水準,則方法900可遵循「否」分支回到區塊925(其中維持降低之影像品質設定)或區塊920(其中進一步降低影像品質設定)。然而,若受監控KPI指示KPI可能已返回至當相比於預定臨限值時之可接受水準,則自決策區塊930遵循「是」分支至決策區塊935。
在決策區塊935處,方法900可考慮自以降低影像品質設定產生之未經壓縮圖框是否已經壓縮足夠之圖框以證明可返回至預設影像品質設定。雖然解決方案之一些實施例可在一旦KPI指示可接受水準就觸發回復至預設影像品質設定,但據設想,其他實施例可包括滯後考慮以減輕KPI可能跨越臨限值來回反彈且在如此時觸發預設影像品質設定與降低之影像品質設定之間的過量雙態觸發事件之概率。
返回至方法900在決策區塊935處,若自以降低之影像品質設定產生之未經壓縮圖框已經壓縮預定數目之圖框以證明可返回至預設影像品質設定,則可遵循「是」分支至區塊945,其中將用於產生之未經壓縮圖框之影像品質設定返回至預設設定。然而,若在決策區塊935處,自以降低之影像品質設定產生之未經壓縮圖框尚未壓縮預定數目之圖框以證明可返回至預設影像品質設定,則可遵循「否」分支至區塊940且在以無損演算法進行壓縮之前使用減少之影像品質設定產生下一未經壓縮圖框。方法900循環回到決策區塊930。
以此方式,使用動態品質設定方法之智慧壓縮方法的解決方案之實施例可折衷一些經解壓縮圖框之未來品質以便優化藉由相關的一或多個KPI量化之QoS。
圖10係鑒於熱能量測及臨限值說明利用圖8之動態品質輸入壓縮方法之智慧壓縮方法1000的邏輯流程圖。應注意,圖8曲線圖說明之動態輸入圖框品質方法係使用輸出圖框之壓縮比作為用於判定何時調整生產者之影像品質設定的觸發器來描述,然而據設想,鑒於熱預算約束及/或熱量測作為減輕及管理熱能產生之方式可採用同一方法。亦即,據設想,可利用圖8之動態輸入壓縮方法作為熱管理技術。
在區塊1005處開始,可將根據預設影像品質設定產生之未經壓縮圖框接收至包含一或多個無損壓縮區塊的影像編解碼器113中且相應地進行壓縮。接下來,在區塊1010處,監控一或多個溫度感測器以判定熱能水準是否保持在可接受水準,且在決策區塊1015處,將由感測器產生之溫度讀數與預定臨限值進行比較。所監控之溫度感測器可與PCD 100之皮膚溫度、處理核心之接面溫度、PoP記憶體組件之溫度等相關聯。若溫度低於預定臨限值,亦即,受監控熱狀況處於可接受水準,則方法1000可遵循「否」分支回到區塊1005且繼續對以預設影像品質設定產生之傳入未經壓縮圖框之壓縮。然而,若所監控熱狀況不處於當相比於預定臨限值時之可接受水準,則自決策區塊1015遵循「是」分支至區塊1020。
在區塊1020處,根據經減少影像品質水準設定產生下一產生之未經壓縮圖框,且在區塊1025處接收至編解碼器113中且使用無損壓縮演算法進行壓縮。有利地,雖然使用較低品質水準設定產生未經壓縮圖框將在稍後經解壓縮時影響圖框之最終品質,但與相對較不複雜的未經壓縮圖框之無損壓縮相關聯的經減少頻寬可致使正監控之熱狀況趨於返回至可接受水準。
接下來,在決策區塊1030處,將所監控熱狀況與預定臨限值進行比較以判定熱狀況是否已返回至可接受水準。若熱狀況尚未返回至可接受水準,則方法1000可遵循「是」分支回到區塊1025(其中維持降低之影像品質設定)或區塊1020(其中進一步降低影像品質設定)。然而,若所監控之溫度感測器讀數指示熱狀況可能已返回至當相比於預定臨限值時之可接受水準,則自決策區塊1030遵循「否」分支至決策區塊1035。
在決策區塊1035處,方法1000可考慮自以降低影像品質設定產生之未經壓縮圖框是否已經壓縮足夠之圖框以證明可返回至預設影像品質設定。雖然解決方案之一些實施例可在一旦溫度感測器讀數指示正監控之熱狀況已返回至可接受水準就觸發回復至預設影像品質設定,但據設想,其他實施例可包括滯後考慮以減輕熱狀況可能跨越臨限值來回反彈且在如此時觸發預設影像品質設定與降低之影像品質設定之間的過量雙態觸發事件之概率。
返回至方法1000在決策區塊1035處,若自以降低之影像品質設定產生之未經壓縮圖框已經壓縮預定數目之圖框,或者若已經經過預定量之時間,則為了證明可返回至預設影像品質設定,可遵循「是」分支至區塊1045,其中將用於產生之未經壓縮圖框之影像品質設定返回至預設設定。然而,若在決策區塊1035處,自以降低之影像品質設定產生之未經壓縮圖框尚未壓縮預定數目之圖框,或者若尚未經過預定量之時間,則為了證明可返回至預設影像品質設定,可遵循「否」分支至區塊1040,且在以無損演算法進行壓縮之前使用經減少影像品質設定產生下一未經壓縮圖框。方法1000循環回到決策區塊1030。
以此方式,使用動態品質設定方法之智慧壓縮方法的解決方案之實施例可折衷一些經解壓縮圖框之未來品質以便減輕不利的熱能產生。
圖11係鑒於與平均電壓設定相關聯之系統可靠性目標說明利用圖8之動態品質輸入壓縮方法的智慧壓縮方法1100之邏輯流程圖。應注意,圖8曲線圖說明之動態輸入壓縮方法係使用輸出圖框之壓縮比作為用於判定何時調整生產者之影像品質設定的觸發器來描述,然而據設想,鑒於與平均電壓設定相關聯之系統可靠性目標可採用同一方法。亦即,據設想,可利用圖8之動態輸入壓縮方法作為維持上臨限值與下臨限值之間的平均電壓供應之技術。如此項技術之技術人員將理解,為了確保晶片102之可靠性,可能需要保持平均電壓供應低於最大平均值但不會低太多而使使用者經歷的平均QoS不必要地受影響。
在區塊1105處開始,可將根據預設影像品質設定產生之未經壓縮圖框接收至包含一或多個無損壓縮區塊的影像編解碼器113中且相應地進行壓縮。接下來,在區塊1110處,監控一或多個電壓感測器以用於計算供應至晶片102之電壓隨時間的運行平均值。基於運行平均值,方法1100可藉由在決策區塊1115處比較電壓平均值與預定上臨限值而判定晶片之長期可靠性是否為可接受的。若電壓供應平均值低於預定上臨限值,亦即,晶片之預測長期可靠性處於可接受水準,則方法1100可遵循「否」分支回到區塊1105且繼續對使用預設品質設定產生之傳入未經壓縮圖框之壓縮。然而,若電壓供應平均值不處於當相比於預定上臨限值時之可接受水準,則自決策區塊1115遵循「是」分支至區塊1120。
在區塊1120處,根據經減少影像品質水準設定產生下一未經壓縮圖框,且在區塊1125處接收至編解碼器113中且使用無損壓縮演算法進行壓縮。有利地,雖然使用較低品質水準設定產生未經壓縮圖框將在稍後經解壓縮時影響圖框之最終品質,但與相對較不複雜的未經壓縮圖框之無損壓縮相關聯的經減少頻寬可減小功率消耗且致使電壓供應平均值趨於返回至可接受水準。
接下來,在決策區塊1130處,將電壓供應平均值與預定低臨限值進行比較。若自所監控之電壓感測器計算之電壓供應平均值保持高於較低臨限值,則方法1100可遵循「否」分支回到區塊1125(其中維持降低之影像品質設定)或區塊1120(其中進一步降低影像品質設定)。然而,若電壓供應平均值指示對晶片102之平均電壓供應已經下落至低於該低平均值臨限值,則自決策區塊1130遵循「是」分支至區塊1135。在區塊1135處,可將生產者之品質水準設定增加回至預設水準。方法1100循環回到區塊1105。
以此方式,使用動態品質設定方法之智慧壓縮方法的解決方案之實施例可折衷一些經解壓縮圖框之未來品質以便將平均電壓供應維持在與目標晶片可靠性目的相關聯之範疇中。
圖12係鑒於任何一或多個關鍵效能指標(「KPI」)說明利用圖8之動態按比例縮放輸入壓縮方法之智慧壓縮方法1200的邏輯流程圖,關鍵效能指標例如(但不限於)最小目標壓縮比、頻寬利用、電壓位準、圖框速率(「FPS」)、壓縮等待時間等。應注意,圖8曲線圖說明之動態輸入圖框按比例縮放方法係使用輸出圖框之壓縮比作為KPI來描述,然而,據設想可使用除壓縮比外的KPI作為用於調整生產者比例設定之觸發器而採用同一方法。
在區塊1205處開始,可將根據預設比例設定產生之未經壓縮圖框接收至包含一或多個無損壓縮區塊的影像編解碼器113中且相應地進行壓縮。接下來,在區塊1210處,監控相關KPI以判定KPI是否保持在可接受水準,且在決策區塊1215處,將所監控KPI與預定臨限值進行比較。若KPI高於(或按情況可能為低於)預定臨限值,亦即,KPI處於可接受水準,則方法1200可遵循「否」分支回到區塊1205,且繼續以預設按比例縮放設定產生且按比例縮放之傳入未經壓縮圖框之壓縮。然而,若所監控KPI不處於當相比於預定臨限值時之可接受水準,則自決策區塊1215遵循「是」分支至區塊1220。
在區塊1220處,根據預定比例設定產生且按比例縮小下一產生之未經壓縮圖框,且在區塊1225處接收至編解碼器113中並使用無損壓縮演算法進行壓縮。應注意,用以減少未經壓縮圖框之大小的按比例縮放因數可在與自編解碼器113出來的經壓縮圖框相關聯之後設資料中指示且保存於儲存裝置中。以此方式,在稍後時間自儲存裝置請求經壓縮圖框之消費者區塊可解壓縮圖框,且接著使用適當按比例縮放因數將圖框按比例增大。有利地,未經壓縮圖框之按比例縮小減少了與相對較小之未經壓縮圖框之無損壓縮相關聯的頻寬,且如此可致使相關KPI趨於回到可接受水準。
接下來,在決策區塊1230處,將所監控KPI與預定臨限值進行比較以判定QoS是否已返回至可接受水準。若KPI尚未返回至可接受水準,則方法1200可遵循「否」分支回到區塊1225(其中維持預定按比例縮放因數)或區塊1220(其中進一步減少預定按比例縮放因數)。然而,若受監控KPI指示KPI可能已返回至當相比於預定臨限值時之可接受水準,則自決策區塊1230遵循「是」分支至決策區塊1235。
在決策區塊1235處,方法1200可考慮自按比例縮小之未經壓縮圖框是否已經壓縮足夠之圖框以證明可返回至預設比例設定。雖然解決方案之一些實施例可在一旦KPI指示可接受水準就觸發回復至預設比例設定,但據設想,其他實施例可包括滯後考慮以減輕KPI可能跨越臨限值來回反彈且在如此時觸發預設比例設定與經減少比例設定之間的過量雙態觸發事件之概率。
返回至方法1200在決策區塊1235處,若自按比例縮小之未經壓縮圖框已經壓縮預定數目之圖框以證明可返回至預設比例設定,則可遵循「是」分支至區塊1245,其中將用於未經壓縮圖框之比例設定返回至預設設定。然而,若在決策區塊1235處,自按比例縮小之未經壓縮圖框尚未壓縮預定數目之圖框以證明可返回至預設比例設定,則可遵循「否」分支至區塊1240,且在以無損演算法進行壓縮之前根據預定按比例縮放因數按比例縮小下一未經壓縮圖框。方法1200循環回到決策區塊1230。
以此方式,使用動態比例設定方法之智慧壓縮方法的解決方案之實施例可減少未經壓縮圖框之大小以便優化藉由相關的一或多個KPI量化之QoS。
圖13係鑒於熱能量測及臨限值說明利用圖8之動態按比例縮放輸入壓縮方法之智慧壓縮方法1300的邏輯流程圖。應注意,圖8曲線圖說明之動態輸入比例方法係使用輸出圖框之壓縮比作為用於判定何時調整由生產者區塊產生之未經壓縮圖框的比例設定之觸發器來描述,然而據設想,鑒於熱預算約束及/或熱量測作為減輕及管理熱能產生之方式可採用同一方法。亦即,據設想,可利用圖8之動態按比例縮放輸入壓縮方法作為熱管理技術。
在區塊1305處開始,可將根據預設比例設定產生之未經壓縮圖框接收至包含一或多個無損壓縮區塊之影像編解碼器113中且相應地進行壓縮。接下來,在區塊1310處,監控一或多個溫度感測器以判定熱能水準是否保持在可接受水準,且在決策區塊1315處,將由感測器產生之溫度讀數與預定臨限值進行比較。所監控之溫度感測器可與PCD 100之皮膚溫度、處理核心之接面溫度、PoP記憶體組件之溫度等相關聯。若溫度低於預定臨限值,亦即,受監控熱狀況處於可接受水準,則方法1300可遵循「否」分支回到區塊1305且繼續對以預設比例設定產生且按比例縮放之傳入未經壓縮圖框之壓縮。然而,若所監控熱狀況不處於當相比於預定臨限值時之可接受水準,則自決策區塊1315遵循「是」分支至區塊1320。
在區塊1320處,根據預定比例設定產生且按比例縮小下一產生之未經壓縮圖框,且在區塊1325處接收至編解碼器113中並使用無損壓縮演算法進行壓縮。應注意,用以減少未經壓縮圖框之大小的按比例縮放因數可在與自編解碼器113出來的經壓縮圖框相關聯之後設資料中指示且保存於儲存裝置中。以此方式,在稍後時間自儲存裝置請求經壓縮圖框之消費者區塊可解壓縮圖框,且接著使用適當按比例縮放因數將圖框按比例增大。有利地,未經壓縮圖框之按比例縮小減少了與相對較小未經壓縮圖框之無損壓縮相關聯的頻寬,且如此可致使正監控之熱狀況趨於返回至可接受水準。
接下來,在決策區塊1330處,將所監控熱狀況與預定臨限值進行比較以判定熱狀況是否已返回至可接受水準。若熱狀況尚未返回至可接受水準,則方法1300可遵循「是」分支回到區塊1325(其中維持預定按比例縮放因數)或區塊1320(其中進一步減少預定按比例縮放因數)。然而,若所監控之溫度感測器讀數指示熱狀況可能已返回至當相比於預定臨限值時之可接受水準,則自決策區塊1330遵循「否」分支至決策區塊1335。
在決策區塊1335處,方法1300可考慮自按比例縮小之未經壓縮圖框是否已經壓縮足夠之圖框以證明可返回至預設比例設定。雖然解決方案之一些實施例可在一旦溫度感測器讀數指示正監控之熱狀況已返回至可接受水準就觸發回復至預設比例設定,但據設想,其他實施例可包括滯後考慮以減輕熱狀況可能跨越臨限值來回反彈且在如此時觸發預設比例設定與經減少比例設定之間的過量雙態觸發事件之概率。
返回至方法1300在決策區塊1335處,若自按比例縮小之未經壓縮圖框已經壓縮預定數目之圖框,或者若已經過預定量之時間,則為了證明可返回至預設比例設定,可遵循「是」分支至區塊1345,其中將用於未經壓縮圖框之比例設定返回至預設設定。然而,若在決策區塊1335處,自按比例縮小之未經壓縮圖框尚未壓縮預定數目之圖框,或者若尚未經過預定量之時間,則為了證明可返回至預設比例設定,可遵循「否」分支至區塊1340,且在以無損演算法進行壓縮之前根據預定按比例縮放因數按比例縮小下一未經壓縮圖框。方法1300循環回到決策區塊1330。
以此方式,使用動態比例設定方法之智慧壓縮方法的解決方案之實施例可減少未經壓縮圖框之大小以便減輕不利的熱能產生。
圖14係鑒於與平均電壓設定相關聯之系統可靠性目標說明利用圖8之動態按比例縮放輸入壓縮方法的智慧壓縮方法1400之邏輯流程圖。應注意,圖8曲線圖說明之動態輸入壓縮方法係使用輸出圖框之壓縮比作為用於判定何時調整由生產者產生之未經壓縮圖框的比例設定之觸發器來描述,然而據設想,鑒於與平均電壓設定相關聯之系統可靠性目標可採用同一方法。亦即,據設想,可利用圖8之動態按比例縮放輸入壓縮方法作為維持上臨限值與下臨限值之間的平均電壓供應之技術。如此項技術之技術人員將理解,為了確保晶片102之可靠性,可能需要保持平均電壓供應低於最大平均值但不會低太多而使使用者經歷的平均QoS不必要地受影響。
在區塊1405處開始,可將根據預設比例設定產生之未經壓縮圖框接收至包含一或多個無損壓縮區塊之影像編解碼器113中且相應地進行壓縮。接下來,在區塊1410處,監控一或多個電壓感測器以用於計算供應至晶片102之電壓隨時間的運行平均值。基於運行平均值,方法1400可藉由在決策區塊1415處比較電壓平均值與預定上臨限值而判定晶片之長期可靠性是否為可接受的。若電壓供應平均值低於預定上臨限值,亦即,晶片之預測長期可靠性處於可接受水準,則方法1400可遵循「否」分支回到區塊1405,且繼續對根據預設比例設定產生且按比例縮放之傳入未經壓縮圖框之壓縮。然而,若電壓供應平均值不處於當相比於預定上臨限值時之可接受水準,則自決策區塊1415遵循「是」分支至區塊1420。
在區塊1420處,根據預定比例設定產生且按比例縮小下一未經壓縮圖框,且在區塊1425處接收至編解碼器113中並使用無損壓縮演算法進行壓縮。應注意,用以減少未經壓縮圖框之大小的按比例縮放因數可在與自編解碼器113出來的經壓縮圖框相關聯之後設資料中指示且保存於儲存裝置中。以此方式,在稍後時間自儲存裝置請求經壓縮圖框之消費者區塊可解壓縮圖框,且接著使用適當按比例縮放因數將圖框按比例增大。有利地,未經壓縮圖框之按比例縮小減少了與相對較小之未經壓縮圖框的無損壓縮相關聯之頻寬,且如此可致使相關KPI趨於回至可接受水準。
接下來,在決策區塊1430處,將電壓供應平均值與預定低臨限值進行比較。若自所監控之電壓感測器計算之電壓供應平均值保持高於較低臨限值,則方法1400可遵循「否」分支回到區塊1425(其中維持預定按比例縮放因數)或區塊1420(其中進一步減少預定按比例縮放因數)。然而,若電壓供應平均值指示對晶片102之平均電壓供應已經下落至低於該低平均值臨限值,則自決策區塊1430遵循「是」分支至區塊1435。在區塊1435處,可將生產者之比例水準設定增加回到預設水準。方法1400循環回到區塊1405。
以此方式,使用動態比例設定方法之智慧壓縮方法的解決方案之實施例可減少未經壓縮圖框之大小以便將平均電壓供應維持在由目標晶片可靠性目的相關聯之範疇中。
圖15係說明用於智慧壓縮之晶片上系統102的實施例之功能方塊圖。系統102可經組態以實施本文所描述之智慧壓縮方法中之任何一或多者,包括混合模式方法及/或動態品質或比例設定方法。取決於正實施之解決方案的實施例,監視器模組114可監控與電源管理積體電路(「PMIC」)相關聯且正供應至晶片102之功率或電壓位準、來自感測器157之溫度讀數、自影像編解碼器模組113出來的經壓縮圖框之壓縮比,或任何其他相關KPI。
智慧壓縮(「IC」)模組101可與例如資料/圖框引擎201等圖框生產者一起工作,以在輸入至影像編解碼器模組113用於壓縮之前動態調整產生未經壓縮圖框之影像品質設定。替代地,智慧壓縮(「IC」)模組101可與例如資料/圖框引擎201等圖框生產者一起工作,以在產生之後但在輸入至影像編解碼器模組113用於壓縮之前動態調整經按比例縮放未經壓縮圖框之比例設定。替代地,IC模組101可與影像編解碼器模組113一起工作以在無損與有損壓縮演算法之間雙態切換。與上文相對於圖4至圖14已描述之內容一致,IC模組101可基於來自監視器模組114的關於經壓縮圖框之壓縮比、來自感測器157之溫度讀數、電壓位準或任何相關KPI之輸入資料而指示生產者引擎201及/或影像編解碼器模組113。
圖16A係說明圖15之影像編解碼器模組之實施例的功能方塊圖,影像編解碼器模組經組態以用於實施利用包括無損及有損演算法之混合模式壓縮的智慧壓縮方法。當系統102經組態以用於執行使用混合模式方法之智慧壓縮方法時,與相對於圖4至圖7已描述之內容一致,生產者引擎201A可將其未經壓縮圖框輸入提供至影像編解碼器113A,影像編解碼器又可根據無損壓縮器區塊或有損壓縮區塊壓縮圖框。關於哪一壓縮器區塊可用以壓縮給定圖框之判定取決於自IC模組101A接收之指令。IC模組101A可鑒於自監視器模組114接收之任何一或多個輸入而產生指令。
圖16B係說明圖15之影像編解碼器模組之實施例的功能方塊圖,影像編解碼器模組經組態以用於在影像品質設定之動態調整之後實施利用無損壓縮演算法的智慧壓縮方法。當系統102經組態以用於執行使用動態品質設定方法之智慧壓縮方法時,與相對於圖8至圖14已描述之內容一致,生產者引擎201B可將其未經壓縮(且可能經按比例縮放)圖框輸入提供至影像編解碼器113B,影像編解碼器又將根據無損壓縮器區塊壓縮圖框。由引擎201B產生之未經壓縮圖框之複雜性可藉由由IC模組101B對其規定之影像品質水準設定或比例設定來規定。
如圖16B說明中所示,包含於影像編解碼器模組113B內且在無損壓縮器上游之影像品質濾波器及多工器邏輯在其他實施例中可包含於引擎201B內。無論特定配置如何,IC模組101B規定以預設影像品質設定產生之未經壓縮圖框或以經減少影像品質設定產生之未經壓縮圖框或隨後經按比例縮放之未經壓縮圖框是否最終由影像編解碼器模組113B壓縮。IC模組101B可鑒於自監視器模組114接收之任何一或多個輸入產生用於調整產生未經壓縮圖框之影像品質設定的指令。
圖17係說明用於實施智慧壓縮方法及系統的呈無線電話形式之攜帶型計算裝置(「PCD」)100之例示性非限制性態樣的功能方塊圖。如圖所示,PCD 100包括晶片上系統102,該晶片上系統包括耦接在一起之多核心中央處理單元(「CPU」)110及類比信號處理器126。如本領域中之一般技術人員所理解,CPU 110可包含第零核心222、第一核心224及第N核心230。此外,如此項技術之技術人員所瞭解,亦可採用數位信號處理器(「DSP」)而非CPU 110。
大體而言,智慧壓縮(「IC」)模組101可由硬體及/或韌體形成,且可負責動態調整生產者產生未經壓縮圖框之影像品質設定及/或負責致使影像編解碼器模組113在有損與無損壓縮演算法之間雙態切換。如圖17中說明,顯示器控制器128及觸控式螢幕控制器130耦接至數位信號處理器110。在晶片上系統102外部之觸控式螢幕顯示器132耦接至顯示器控制器128及觸控式螢幕控制器130。PCD 100可進一步包括視訊編碼器134,例如相位交替線(「PAL」)編碼器、順序傳送彩色與儲存(「SECAM」)編碼器、國家電視系統委員會(「NTSC」)編碼器或任何其他類型之視訊編碼器134。視訊編碼器134耦接至多核心CPU 110。視訊放大器136耦接至視訊編碼器134及觸控式螢幕顯示器132。視訊埠138耦接至視訊放大器136。如圖17中所描繪,通用串列匯流排(「USB」)控制器140耦接至CPU 110。並且,USB埠142耦接至USB控制器140。
可包括PoP記憶體、快取記憶體、屏蔽ROM/引導ROM、引導OTP記憶體、DDR類型之DRAM記憶體之記憶體112亦可耦接至CPU 110。用戶身分模組(「SIM」)卡146亦可耦接至CPU 110。此外,如圖17所示,數位相機148可耦接至CPU 110。在例示性態樣中,數位相機148為電荷耦合裝置(「CCD」)相機或互補金屬氧化物半導體(「CMOS」)相機。
如圖17中進一步所示,立體聲音訊編解碼器150可耦接至類比信號處理器126。此外,音訊放大器152可耦接至立體聲音訊編解碼器150。在例示性態樣中,第一立體聲揚聲器154及第二立體聲揚聲器156耦接至音訊放大器152。圖17示出了麥克風放大器158亦可耦接至立體聲音訊編解碼器150。另外,麥克風160可耦接至麥克風放大器158。在特定態樣中,調頻(「FM」)無線電調諧器162可耦接至立體聲音訊編解碼器150。並且,FM天線164耦接至FM無線電調諧器162。此外,立體聲頭戴受話器166可耦接至立體聲音訊編解碼器150。
圖17進一步指示射頻(「RF」)收發器168可耦接至類比信號處理器126。RF開關170可耦接至RF收發器168及RF天線172。如圖17所示,小鍵盤174可耦接至類比信號處理器126。並且,具有麥克風之單聲道耳機176可耦接至類比信號處理器126。此外,振動器裝置178可耦接至類比信號處理器126。圖17還示出例如電池之電力供應器188藉由電源管理積體電路(「PMIC」)180耦接至晶片上系統102。在特定態樣,電力供應器188包括可再充電DC電池或者自連接至AC電源之交流電(「AC」)至DC變壓器得到的DC電力供應。
CPU 110亦可耦接至一或多個內部晶片上熱感測器157A以及一或多個外部晶片外熱感測器157B。晶片上熱感測器157A可包含一或多個與絕對溫度成比例(「PTAT」)之溫度感測器,該等溫度感測器係基於豎直PNP結構的並且通常專用於互補金屬氧化物半導體(「CMOS」)超大型積體(「VLSI」)電路。晶片外熱感測器157B可包含一或多個熱敏電阻。熱感測器157可產生藉由一類比至數位轉換器(「ADC」)控制器(未圖示)轉換成數位信號之一電壓降。然而,可採用其他類型之熱感測器157。
觸控式螢幕顯示器132、視訊埠138、USB埠142、相機148、第一立體聲揚聲器154、第二立體聲揚聲器156、麥克風160、FM天線164、立體聲頭戴受話器166、RF開關170、RF天線172、小鍵盤174、單聲道耳機176、振動器178、熱感測器157B、PMIC 180及電力供應器188在晶片上系統102之外部。然而應理解,在圖17中之PCD 100之例示性實施例中描繪為在晶片上系統102外部的此等裝置中之一或多者在其他例示性實施例中可駐留於晶片102上。
在一特定態樣中,本文所描述之方法步驟中之一或多者可藉由儲存於記憶體112中的可執行指令及參數來實施或者作為形成IC模組101及/或影像編解碼器模組113。此外,IC模組101、影像編解碼器模組113、記憶體112、儲存於其中之指令或其組合可充當用於執行本文所描述之方法步驟中的一或多者之構件。
圖18係說明用於執行智慧壓縮方法的圖17之PCD之例示性軟體架構的示意圖1500。如圖18中說明,CPU或數位信號處理器110經由主要匯流排211耦接至記憶體112。如上所述,CPU 110為具有N個核心處理器之多核心處理器。亦即,CPU 110包括第一核心222、第二核心224及第N核心230。正如此項技術之技術人員所知,第一核心222、第二核心224及第N核心230中之每一者可用於支援專用應用程式或程式。替代地,可分佈一或多個應用程式或程式以用於跨越可用核心中之兩者或更多者之處理。
CPU 110可自可包含軟體及/或硬體之IC模組101接收命令。若實施為軟體,則模組101包含由CPU 110執行之指令,CPU將命令發出至正由CPU 110及其他處理器執行之其他應用程式。
CPU 110之第一核心222、第二核心224至第N核心230可整合於一單一積體電路晶粒上,或者其可整合或耦接於多電路封裝中之單獨晶粒上。設計者可經由一或多個共用快取記憶體耦接第一核心222、第二核心224至第N核心230,且其可經由例如匯流排、環、網及縱橫式拓樸等網路拓樸而實施訊息或指令傳遞。
匯流排211可包括經由一或多個有線或無線連接之多個通信路徑,如此項技術中已知及上文在定義中描述。匯流排211可具有額外元件來實現通信,額外元件為簡單起見而省略,例如控制器、緩衝器(快取記憶體)、驅動器、中繼器及接收器。此外,匯流排211可包括位址、控制及/或資料連接以實現前述組件之間的適當通信。
當由PCD 100使用之邏輯如圖15中示出係以軟體實施時,應注意啟動邏輯250、管理邏輯260、IC介面邏輯270、應用程式儲存器280中之應用程式以及檔案系統290之部分中的一或多者可儲存於任何電腦可讀媒體上以供任何電腦相關系統或方法使用或者與其結合使用。
在本文檔之上下文中,電腦可讀媒體為電子、磁性、光學或其他實體裝置或者可含有或儲存電腦程式及資料以供電腦相關系統或方法使用或與其結合使用之構件。各種邏輯元件及資料儲存器可實施於任何電腦可讀媒體中以供指令執行系統、設備或裝置使用或者與其結合使用,指令執行系統、設備或裝置例如基於電腦之系統、含有處理器之系統或者可自指令執行系統、設備或裝置獲取指令且執行指令之其他系統。在本文檔之上下文中,「電腦可讀媒體」可為可儲存、傳送、傳播或輸送程式以供指令執行系統、設備或裝置使用或者與其結合使用之任何構件。
電腦可讀媒體可為(例如但不限於)電子、磁性、光學、電磁、紅外線或半導體系統、設備、裝置或傳播媒體。電腦可讀媒體之更具體實例(非窮盡性清單)將包括以下各項:具有一或多個導線之電連接(電子),攜帶型電腦磁碟(磁性),隨機存取記憶體(RAM)(電子),唯讀記憶體(ROM)(電子),可抹除可程式化唯讀記憶體(EPROM、EEPROM或快閃記憶體)(電子),光纖(光學),及攜帶型壓縮光碟唯讀記憶體(CDROM)(光學)。應注意,電腦可讀媒體可甚至為紙或可在上面印刷程式之另一適合媒體,因為程式可經由例如對紙或其他媒體之光學掃描而被電子捕獲,隨後被編譯、解譯或視需要另外以適合方式處理,且隨後儲存在電腦記憶體中。
在其中啟動邏輯250、管理邏輯260及可能IC介面邏輯270中之一或多者係以硬體實施之替代實施例中,各種邏輯可以此項技術中各自眾所周知的以下技術中之任一者或組合進行實施:具有用於對資料信號實施邏輯功能之邏輯閘的離散邏輯電路,具有適當組合邏輯閘的特殊應用積體電路(ASIC),可程式化閘陣列(PGA),場可程式化閘陣列(FPGA)等。
記憶體112為非揮發性資料儲存裝置,例如快閃記憶體或固態記憶體裝置。雖然描繪為單個裝置,但記憶體112可為具有耦接至數位信號處理器110(或額外處理器核心)之單獨資料儲存裝置的分佈式記憶體裝置。
啟動邏輯250包括用於選擇性識別、加載及執行用於智慧壓縮之選擇程式的一或多個可執行指令。啟動邏輯250可識別、加載及執行選擇智慧壓縮程式。例示性選擇程式可在嵌入式檔案系統290之程式儲存器296中找到。例示性選擇程式當由CPU 110中之核心處理器中之一或多者執行時可根據由IC模組101提供的一或多個信號操作以實施智慧壓縮方法。
管理邏輯260包括用於終止相應處理器核心中之一或多者上的IC程式以及選擇性識別、加載及執行較合適之替換程式的一或多個可執行指令。管理邏輯260經配置以在運行時間或者在PCD 100被供電且由裝置之操作者使用的同時執行此等功能。替換程式可在嵌入式檔案系統290之程式儲存器296中找到。
介面邏輯270包括用於呈現、管理外部輸入及與外部輸入進行交互以觀察、組態或另外更新儲存於嵌入式檔案系統290中之資訊的一或多個可執行指令。在一個實施例中,介面邏輯270可與經由USB埠142接收之製造商輸入結合而操作。此等輸入可包括待自程式儲存器296刪除或添加至程式儲存器296的一或多個程式。替代地,該等輸入可包括對程式儲存器296中之程式中的一或多者之編輯或改變。此外,該等輸入可識別對啟動邏輯250及管理邏輯260中之一者或兩者的一或多個改變或者完全替換。舉例而言,該等輸入可包括在圖框層級或圖塊層級對所使用特定類型之壓縮演算法及/或對作用中智慧壓縮方法之目標應用程式的改變。
介面邏輯270使製造商能夠在PCD 100上在經界定操作狀況下可控地組態及調整最終使用者之體驗。當記憶體112為快閃記憶體時,可編輯、替換或另外修改啟動邏輯250、管理邏輯260、介面邏輯270、應用程式儲存器280中之應用程式或嵌入式檔案系統290中的資訊中之一或多者。在一些實施例中,介面邏輯270可准許PCD 100之最終使用者或操作者搜尋、定位、修改或替換啟動邏輯250、管理邏輯260、應用程式儲存器280中之應用程式及嵌入式檔案系統290中之資訊。操作者可使用所得介面來做出將在PCD 100之下次啟動之後即刻實施的改變。替代地,操作者可使用所得介面來做出在運行時間期間實施的改變。
嵌入式檔案系統290包括階層式配置之記憶體管理儲存器292。在此態樣,檔案系統290可包括其總檔案系統容量之保留區段,用於儲存用於由PCD 100使用之各種IC演算法的組態及管理之資訊。
為了讓本發明如所描述一樣起作用,本說明書中描述之過程或過程流程中之某些步驟自然在其他步驟之前。然而,本發明不限於所描述之步驟的次序,其限制狀況為此次序或序列不會更改本發明之功能性。亦即,應認識到,在不脫離本發明之範疇及精神的情況下,某些步驟可在其他步驟之前、之後或與其並行執行(大體上與其同時執行)。在一些情況下,在不脫離本發明的情況下,可省略或不執行某些步驟。另外,詞語例如「之後」、「隨後」、「接下來」等並非意圖限制步驟之次序。此等詞用來引導讀者瀏覽對例示性方法之描述。
另外,舉例而言,程式化領域之技術人員基於本說明書中之流程圖及相關聯描述可輕鬆地編寫電腦碼或識別適當硬體及/或電路以實施本發明。因此,對特定一組程式碼指令或詳細硬體裝置之揭示不被視為對於充分理解如何製作及使用本發明而言係必要的。上文描述中配合可說明不同過程流程之圖更詳細解釋了所要求之電腦實施過程之創造性功能性。
在一或多個例示性態樣中,所描述之功能可用硬體、軟體、韌體或其任何組合實施。若在軟體中實施,則可將功能作為一或多個指令或碼而儲存在電腦可讀媒體上或經由電腦可讀媒體傳輸。電腦可讀媒體包括電腦儲存媒體與通信媒體兩者,通信媒體包括促進將電腦程式自一處傳送至另一處之任何媒體。儲存媒體可為可由電腦存取之任何可用媒體。藉助於實例而非限制,此類非暫時性電腦可讀媒體可包含RAM、ROM、EEPROM、CD-ROM或其他光碟儲存器、磁碟儲存器或其他磁性儲存裝置,或可用於以指令或資料結構形式攜載或儲存所要程式碼且可由電腦存取的任何其他媒體。
因此,雖然已經詳細說明及描述了所選擇之態樣,但人們將理解到,在不脫離如所附申請專利範圍所界定的本發明之精神及範疇的情況下,可在其中進行各種替代及更改。
1-22‧‧‧圖框
100‧‧‧攜帶型計算裝置(「PCD」)
101‧‧‧智慧壓縮(「IC」)模組
101A‧‧‧IC模組
101B‧‧‧IC模組
102‧‧‧晶片上系統/晶片
110‧‧‧多核心中央處理單元(「CPU」)/數位信號處理器(「DSP」)
112‧‧‧儲存裝置或DRAM/記憶體
113‧‧‧影像編解碼器模組/壓縮區塊
113A‧‧‧影像編解碼器
113B‧‧‧影像編解碼器
114‧‧‧監視器模組
126‧‧‧類比信號處理器
128‧‧‧顯示器控制器
130‧‧‧觸控式螢幕控制器
132‧‧‧觸控式螢幕顯示器
134‧‧‧視訊編碼器
136‧‧‧視訊放大器
138‧‧‧視訊埠
140‧‧‧通用串列匯流排(「USB」)控制器
142‧‧‧USB埠
146‧‧‧用戶身分模組(「SIM」)卡
148‧‧‧數位相機
150‧‧‧立體聲音訊編解碼器
152‧‧‧音訊放大器
154‧‧‧第一立體聲揚聲器
156‧‧‧第二立體聲揚聲器
157‧‧‧感測器
157A‧‧‧內部晶片上熱感測器
157B‧‧‧外部晶片外熱感測器
158‧‧‧麥克風放大器
160‧‧‧麥克風
162‧‧‧調頻(「FM」)無線電調諧器
164‧‧‧FM天線
166‧‧‧立體聲頭戴受話器
168‧‧‧射頻(「RF」)收發器
170‧‧‧RF開關
172‧‧‧RF天線
174‧‧‧小鍵盤
176‧‧‧單聲道耳機
178‧‧‧振動器裝置
180‧‧‧電源管理積體電路(「PMIC」)
188‧‧‧電力供應器
201‧‧‧資料/圖框引擎
201A‧‧‧生產者引擎
201B‧‧‧生產者引擎
211‧‧‧匯流排
222‧‧‧第零核心
224‧‧‧第一核心
230‧‧‧第N核心
250‧‧‧啟動邏輯
260‧‧‧管理邏輯
270‧‧‧IC介面邏輯
280‧‧‧應用程式儲存器
290‧‧‧檔案系統
292‧‧‧記憶體管理儲存器
296‧‧‧程式儲存器
500‧‧‧智慧壓縮方法
505‧‧‧區塊
510‧‧‧區塊
515‧‧‧決策區塊
520‧‧‧區塊
525‧‧‧區塊
530‧‧‧決策區塊
535‧‧‧決策區塊
540‧‧‧區塊
545‧‧‧區塊
600‧‧‧智慧壓縮方法
605‧‧‧區塊
610‧‧‧區塊
615‧‧‧決策區塊
620‧‧‧區塊
625‧‧‧區塊
630‧‧‧決策區塊
635‧‧‧決策區塊
640‧‧‧區塊
645‧‧‧區塊
700‧‧‧智慧壓縮方法
705‧‧‧區塊
710‧‧‧區塊
715‧‧‧決策區塊
720‧‧‧區塊
725‧‧‧區塊
730‧‧‧決策區塊
900‧‧‧智慧壓縮方法
905‧‧‧區塊
910‧‧‧區塊
915‧‧‧決策區塊
920‧‧‧區塊
925‧‧‧區塊
930‧‧‧決策區塊
935‧‧‧決策區塊
940‧‧‧區塊
945‧‧‧區塊
1000‧‧‧智慧壓縮方法
1005‧‧‧區塊
1010‧‧‧區塊
1015‧‧‧決策區塊
1020‧‧‧區塊
1025‧‧‧區塊
1030‧‧‧決策區塊
1035‧‧‧決策區塊
1040‧‧‧區塊
1045‧‧‧區塊
1100‧‧‧智慧壓縮方法
1105‧‧‧區塊
1110‧‧‧區塊
1115‧‧‧決策區塊
1120‧‧‧區塊
1125‧‧‧區塊
1130‧‧‧決策區塊
1135‧‧‧區塊
1200‧‧‧智慧壓縮方法
1205‧‧‧區塊
1210‧‧‧區塊
1215‧‧‧決策區塊
1220‧‧‧區塊
1225‧‧‧區塊
1230‧‧‧決策區塊
1235‧‧‧決策區塊
1240‧‧‧區塊
1245‧‧‧區塊
1300‧‧‧智慧壓縮方法
1305‧‧‧區塊
1310‧‧‧區塊
1315‧‧‧決策區塊
1320‧‧‧區塊
1325‧‧‧區塊
1330‧‧‧決策區塊
1335‧‧‧決策區塊
1340‧‧‧區塊
1345‧‧‧區塊
1400‧‧‧智慧壓縮方法
1405‧‧‧區塊
1410‧‧‧區塊
1415‧‧‧決策區塊
1420‧‧‧區塊
1425‧‧‧區塊
1430‧‧‧決策區塊
1435‧‧‧區塊
1500‧‧‧示意圖
在附圖中,除非另外指明,否則相同參考標號指代各個視圖中之相同部分。對於例如「102A」或「102B」之具有字母字符名稱之參考標號而言,字母字符名稱可區分相同圖中存在之兩個相同部件或元件。當希望參考標號涵蓋所有圖式中具有相同參考標號之所有部分時,可省略參考標號之字母字符名稱。
圖1說明壓縮包含多個資料子單元或圖塊之影像圖框之作用;
圖2說明關於DRAM記憶體組件之經壓縮資料異動,記憶體組件具有每異動之所需最小存取長度(「MAL」);
圖3說明與例示性影像圖框相關聯之一系列經壓縮資料異動;
圖4A說明視訊流中之例示性圖框序列,個別圖框具有變化之複雜性且根據無損壓縮演算法經壓縮;
圖4B說明圖4A說明之例示性圖框序列,圖框係根據利用包括無損及有損演算法之混合模式壓縮之智慧壓縮方法進行壓縮;
圖5係鑒於任何一或多個關鍵效能指標說明利用圖4B之混合模式壓縮方法之智慧壓縮方法之邏輯流程圖;
圖6係鑒於熱能量測及臨限值說明利用圖4B之混合模式壓縮方法之智慧壓縮方法之邏輯流程圖;
圖7係鑒於與平均電壓設定相關聯之系統可靠性目標說明利用圖4B之混合模式壓縮方法之智慧壓縮方法之邏輯流程圖;
圖8說明視訊流中之例示性圖框序列,個別圖框具有變化之複雜性且在影像品質設定之動態調整之後根據無損壓縮演算法進行壓縮;
圖9係鑒於任何一或多個關鍵效能指標說明利用圖8之動態品質輸入壓縮方法之智慧壓縮方法之邏輯流程圖;
圖10係鑒於熱能量測及臨限值說明利用圖8之動態品質輸入壓縮方法之智慧壓縮方法之邏輯流程圖;
圖11係鑒於與平均電壓設定相關聯之系統可靠性目標說明利用圖8之動態品質輸入壓縮方法之智慧壓縮方法之邏輯流程圖;
圖12係鑒於任何一或多個關鍵效能指標說明利用圖8之動態按比例縮放輸入壓縮方法之智慧壓縮方法之邏輯流程圖;
圖13係鑒於熱能量測及臨限值說明利用圖8之動態按比例縮放輸入壓縮方法之智慧壓縮方法之邏輯流程圖;
圖14係鑒於與平均電壓設定相關聯之系統可靠性目標說明利用圖8之動態按比例縮放輸入壓縮方法之智慧壓縮方法之邏輯流程圖;
圖15係說明用於智慧壓縮之晶片上系統之實施例的功能方塊圖;
圖16A係說明圖15之影像編解碼器模組之實施例的功能方塊圖,該影像編解碼器模組經組態以用於實施利用包括無損及有損演算法之混合模式壓縮之智慧壓縮方法;
圖16B係說明圖15之影像編解碼器模組之實施例的功能方塊圖,該影像編解碼器模組經組態以用於在影像品質設定之動態調整之後實施利用無損壓縮演算法之智慧壓縮方法;
圖17係說明用於實施智慧壓縮方法及系統之呈無線電話形式的攜帶型計算裝置(「PCD」)之例示性非限制性態樣的功能方塊圖;以及
圖18係說明用於執行智慧壓縮方法的圖17之PCD之例示性軟體架構的示意圖。
Claims (36)
- 一種用於一攜帶型計算裝置(「PCD」)中之智慧資料壓縮之方法,該方法包含: 界定用於該PCD內之一關鍵效能指標的一臨限值; 將由一生產者組件產生且以一預設比例水準設定按比例縮放之一第一資料塊接收至一壓縮模組中,且根據一無損壓縮演算法壓縮該第一資料塊; 監控該關鍵效能指標之一作用中水準且將該作用中水準與該經界定臨限值進行比較; 基於該關鍵效能指標之該作用中水準與該經界定臨限值之該比較,將用於由該生產者組件產生之資料塊的比例設定修改為一經減少比例設定;以及 將由該生產者組件產生且以該經減少比例設定按比例縮放的一第二資料塊接收至該壓縮模組中,且根據該無損壓縮演算法壓縮該第二資料塊。
- 如請求項1之方法,其進一步包含將該經壓縮第二資料塊儲存在一記憶體組件中,其中與該經壓縮第二資料塊相關聯的後設資料包含該經減少比例設定之一指示符。
- 如請求項2之方法,其進一步包含一消費者組件自該記憶體組件擷取該經壓縮第二資料塊,將該第二資料塊解壓縮,且基於該後設資料內包含的該經減少比例設定之該指示符將該經解壓縮第二資料塊按比例增大。
- 如請求項1之方法,其中該關鍵效能指標係選自包含以下各項之一群組:由該壓縮模組壓縮的資料塊之一壓縮比、一電壓位準、一平均電壓供應位準、一圖框速率,以及用於壓縮一資料塊之一處理時間。
- 如請求項1之方法,其中該關鍵效能指標係由該PCD內之一溫度感測器產生之一溫度讀數。
- 如請求項1之方法,其中修改用於由該生產者組件產生之資料塊的比例設定進一步係基於一滯後計算。
- 如請求項1之方法,其中該第一及第二資料塊為影像圖框。
- 如請求項1之方法,其中該第一及第二資料塊為一影像圖框之單元。
- 如請求項1之方法,其中該PCD呈一無線電話之形式。
- 一種用於一攜帶型計算裝置(「PCD」)中之智慧資料壓縮之系統,該系統包含: 一智慧壓縮模組、一監視器模組及一影像編解碼器模組,該等模組共同經組態以: 界定用於該PCD內之一關鍵效能指標的一臨限值; 將由一生產者組件產生且以一預設比例水準設定按比例縮放之一第一資料塊接收至一壓縮模組中,且根據一無損壓縮演算法壓縮該第一資料塊; 監控該關鍵效能指標之一作用中水準且將該作用中水準與該經界定臨限值進行比較; 基於該關鍵效能指標之該作用中水準與該經界定臨限值之該比較,將用於由該生產者組件產生的資料塊之比例設定修改為一經減少比例設定;以及 將由該生產者組件產生且以該經減少比例設定按比例縮放的一第二資料塊接收至該壓縮模組中,且根據該無損壓縮演算法壓縮該第二資料塊。
- 如請求項10之系統,其進一步包含將該經壓縮第二資料塊儲存在一記憶體組件中,其中與該經壓縮第二資料塊相關聯的後設資料包含該經減少比例設定之一指示符。
- 如請求項11之系統,其進一步包含一消費者組件自該記憶體組件擷取該經壓縮第二資料塊,將該第二資料塊解壓縮,且基於該後設資料內包含的該經減少比例設定之該指示符將該經解壓縮第二資料塊按比例增大。
- 如請求項10之系統,其中該關鍵效能指標係選自包含以下各項之一群組:由該壓縮模組壓縮之資料塊的一壓縮比、一電壓位準、一平均電壓供應位準、一圖框速率,以及用於壓縮一資料塊之一處理時間。
- 如請求項10之系統,其中該關鍵效能指標為由該PCD內之一溫度感測器產生的一溫度讀數。
- 如請求項10之系統,其中修改用於由該生產者組件產生的資料塊之比例設定進一步係基於一滯後計算。
- 如請求項10之系統,其中該第一及第二資料塊為影像圖框。
- 如請求項10之系統,其中該第一及第二資料塊為一影像圖框之單元。
- 如請求項10之系統,其中該PCD呈一無線電話之形式。
- 一種用於一攜帶型計算裝置(「PCD」)中之智慧資料壓縮的系統,該系統包含: 用於界定用於該PCD內之一關鍵效能指標的一臨限值的構件; 用於將由一生產者組件產生且以一預設比例水準設定按比例縮放之一第一資料塊接收至一壓縮模組中且根據一無損壓縮演算法壓縮該第一資料塊的構件; 用於監控該關鍵效能指標之一作用中水準且將該作用中水準與該經界定臨限值進行比較的構件; 用於基於該關鍵效能指標之該作用中水準與該經界定臨限值之該比較,將用於由該生產者組件產生的資料塊之比例設定修改為一經減少比例設定的構件;以及 用於將由該生產者組件產生且以該經減少比例設定按比例縮放之一第二資料塊接收至該壓縮模組中,且根據該無損壓縮演算法壓縮該第二資料塊的構件。
- 如請求項19之系統,其進一步包含用於將該經壓縮第二資料塊儲存在一記憶體組件中的構件,其中與該經壓縮第二資料塊相關聯之後設資料包含該經減少比例設定之一指示符。
- 如請求項20之系統,其進一步包含一消費者組件,該消費者組件具有用於以下操作的構件:自該記憶體組件擷取該經壓縮第二資料塊,將該第二資料塊解壓縮,且基於該後設資料內包含的該經減少比例設定之該指示符將該經解壓縮第二資料塊按比例增大。
- 如請求項19之系統,其中該關鍵效能指標係選自包含以下各項之一群組:由該壓縮模組壓縮之資料塊的一壓縮比、一電壓位準、一平均電壓供應位準、一圖框速率,以及用於壓縮一資料塊之一處理時間。
- 如請求項19之系統,其中該關鍵效能指標為由該PCD內之一溫度感測器產生的一溫度讀數。
- 如請求項19之系統,其中修改用於由該生產者組件產生之資料塊的比例設定進一步係基於一滯後計算。
- 如請求項19之系統,其中該第一及第二資料塊為影像圖框。
- 如請求項19之系統,其中該第一及第二資料塊為一影像圖框之單元。
- 如請求項19之系統,其中該PCD呈一無線電話之形式。
- 一種包含電腦可用媒體之電腦程式產品,該電腦可用媒體具有實施於其中的電腦可讀程式碼,該電腦可讀程式碼適於執行以實施用於一攜帶型計算裝置(「PCD」)中之智慧資料壓縮的方法,該方法包含: 界定用於該PCD內之一關鍵效能指標的一臨限值; 將由一生產者組件產生且以一預設比例水準設定按比例縮放的一第一資料塊接收至一壓縮模組中,且根據一無損壓縮演算法壓縮該第一資料塊; 監控該關鍵效能指標之一作用中水準且將該作用中水準與該經界定臨限值進行比較; 基於該關鍵效能指標之該作用中水準與該經界定臨限值之該比較,將用於由該生產者組件產生的資料塊之比例設定修改為一經減少比例設定;以及 將由該生產者組件產生且以該經減少比例設定按比例縮放的一第二資料塊接收至該壓縮模組中,且根據該無損壓縮演算法壓縮該第二資料塊。
- 如請求項28之電腦程式產品,其進一步包含將該經壓縮第二資料塊儲存在一記憶體組件中,其中與該經壓縮第二資料塊相關聯的後設資料包含該經減少比例設定之一指示符。
- 如請求項29之電腦程式產品,其進一步包含一消費者組件自該記憶體組件擷取該經壓縮第二資料塊,將該第二資料塊解壓縮,且基於該後設資料內包含的該經減少比例設定之該指示符將該經解壓縮第二資料塊按比例增大。
- 如請求項28之電腦程式產品,其中該關鍵效能指標係選自包含以下各項之一群組:由該壓縮模組壓縮之資料塊的一壓縮比、一電壓位準、一平均電壓供應位準、一圖框速率,以及用於壓縮一資料塊之一處理時間。
- 如請求項28之電腦程式產品,其中該關鍵效能指標為由該PCD內之一溫度感測器產生的一溫度讀數。
- 如請求項28之電腦程式產品,其中修改用於由該生產者組件產生的資料塊之比例設定進一步係基於一滯後計算。
- 如請求項28之電腦程式產品,其中該第一及第二資料塊為影像圖框。
- 如請求項28之電腦程式產品,其中該第一及第二資料塊為一影像圖框之單元。
- 如請求項28之電腦程式產品,其中該PCD呈一無線電話之形式。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/490,625 US10484685B2 (en) | 2017-04-18 | 2017-04-18 | System and method for intelligent data/frame compression in a system on a chip |
US15/490,625 | 2017-04-18 |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201842445A true TW201842445A (zh) | 2018-12-01 |
TWI696114B TWI696114B (zh) | 2020-06-11 |
Family
ID=62063181
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW107112364A TWI696114B (zh) | 2017-04-18 | 2018-04-11 | 在系統單晶片中用於智慧資料/訊框壓縮之系統及方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10484685B2 (zh) |
EP (1) | EP3613212B1 (zh) |
CN (1) | CN110521208B (zh) |
SG (1) | SG11201908233YA (zh) |
TW (1) | TWI696114B (zh) |
WO (1) | WO2018194816A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI717021B (zh) * | 2019-09-18 | 2021-01-21 | 義隆電子股份有限公司 | 影像處理系統及其人工智慧晶片 |
TWI816954B (zh) * | 2018-12-13 | 2023-10-01 | 美商艾斯卡瓦公司 | 用於重建無損地縮減的資料塊的序列的方法和設備,用於確定主要資料元件的元資料的方法和設備,及儲存媒體 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10609418B2 (en) | 2017-04-18 | 2020-03-31 | Qualcomm Incorporated | System and method for intelligent data/frame compression in a system on a chip |
WO2023285731A1 (en) | 2021-07-13 | 2023-01-19 | Aiforia Technologies Oyj | Processing pathology images |
US11373306B1 (en) | 2021-07-13 | 2022-06-28 | Aiforia Technologies Oyj | Processing pathology images |
Family Cites Families (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6879266B1 (en) | 1997-08-08 | 2005-04-12 | Quickshift, Inc. | Memory module including scalable embedded parallel data compression and decompression engines |
GB2339989B (en) | 1998-05-19 | 2002-11-27 | Lsi Logic Corp | Method and apparatus for decoding video data |
JP4644939B2 (ja) * | 2001-01-17 | 2011-03-09 | 日本電気株式会社 | 動画像符号化装置および動画像符号化方法 |
US20030021486A1 (en) * | 2001-07-27 | 2003-01-30 | Tinku Acharya | Method and apparatus for image scaling |
US7372999B2 (en) | 2002-09-09 | 2008-05-13 | Ricoh Company, Ltd. | Image coder and image decoder capable of power-saving control in image compression and decompression |
JP2005346698A (ja) | 2004-05-07 | 2005-12-15 | Ricoh Co Ltd | 画像情報制御装置、画像情報制御システム、プリンタドライバ、画像情報制御方法、その方法をコンピュータで実行するプログラム、および記録媒体 |
US20060215755A1 (en) * | 2005-03-24 | 2006-09-28 | Mediatek Incorporation | Video encoding methods and systems for battery-powered apparatus |
US20070120980A1 (en) * | 2005-10-31 | 2007-05-31 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Preservation/degradation of video/audio aspects of a data stream |
US7903733B2 (en) | 2006-01-26 | 2011-03-08 | Qualcomm Incorporated | Adaptive filtering to enhance video encoder performance |
US8031937B2 (en) | 2007-04-04 | 2011-10-04 | Telefonaktiebolaget Lm Ericsson (Publ) | Frame buffer compression and decompression method for graphics rendering |
US9055301B2 (en) * | 2008-03-18 | 2015-06-09 | Texas Instruments Incorporated | Changing motion estimation precision to maintain encoding within desired time |
US8194736B2 (en) | 2008-04-15 | 2012-06-05 | Sony Corporation | Video data compression with integrated lossy and lossless compression |
US9232226B2 (en) | 2008-08-19 | 2016-01-05 | Marvell World Trade Ltd. | Systems and methods for perceptually lossless video compression |
US8687702B2 (en) * | 2008-10-27 | 2014-04-01 | Advanced Micro Devices, Inc. | Remote transmission and display of video data using standard H.264-based video codecs |
JPWO2011114817A1 (ja) * | 2010-03-18 | 2013-06-27 | 日本電気株式会社 | 発熱が小さい、テレビ電話機能を持つ携帯電話機 |
JP5492139B2 (ja) * | 2011-04-27 | 2014-05-14 | 富士フイルム株式会社 | 画像圧縮装置、画像伸長装置、方法、及びプログラム |
US9185424B2 (en) | 2011-07-05 | 2015-11-10 | Qualcomm Incorporated | Image data compression |
US9578336B2 (en) * | 2011-08-31 | 2017-02-21 | Texas Instruments Incorporated | Hybrid video and graphics system with automatic content detection process, and other circuits, processes, and systems |
US9161060B2 (en) * | 2011-09-30 | 2015-10-13 | Broadcom Corporation | Multi-mode error concealment, recovery and resilience coding |
AU2012201684A1 (en) | 2012-03-21 | 2013-10-10 | Canon Kabushiki Kaisha | Image compression |
US9299166B2 (en) * | 2012-12-13 | 2016-03-29 | Qualcomm Incorporated | Image compression method and apparatus for bandwidth saving |
US9899007B2 (en) | 2012-12-28 | 2018-02-20 | Think Silicon Sa | Adaptive lossy framebuffer compression with controllable error rate |
US9177393B2 (en) | 2013-02-04 | 2015-11-03 | Qualcomm Incorporated | Mixed mode for frame buffer compression |
WO2014138817A1 (en) * | 2013-03-15 | 2014-09-18 | Micropace Pty Limited | System and method for monitoring user activity on a plurality of networked computing devices |
JP2014197740A (ja) * | 2013-03-29 | 2014-10-16 | セイコーエプソン株式会社 | 印刷制御装置および印刷制御プログラム |
US8856825B1 (en) * | 2013-05-02 | 2014-10-07 | This Technology, Inc. | Server side adaptive bit rate reporting |
JP6315911B2 (ja) | 2013-07-09 | 2018-04-25 | キヤノン株式会社 | 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム |
US10002137B2 (en) * | 2014-02-13 | 2018-06-19 | International Business Machines Corporation | Efficient data storage utilization and recycling by gradual data degradation |
KR102389312B1 (ko) | 2014-07-08 | 2022-04-22 | 삼성전자주식회사 | 멀티미디어 데이터를 전송하는 방법 및 장치 |
US9524536B2 (en) * | 2014-07-25 | 2016-12-20 | Intel Corporation | Compression techniques for dynamically-generated graphics resources |
US9990917B2 (en) * | 2015-04-13 | 2018-06-05 | Intel Corporation | Method and system of random access compression of transducer data for automatic speech recognition decoding |
US10509588B2 (en) * | 2015-09-18 | 2019-12-17 | Qualcomm Incorporated | System and method for controlling memory frequency using feed-forward compression statistics |
US10158861B2 (en) * | 2016-02-03 | 2018-12-18 | Evertz Microsystems Ltd. | Systems and methods for improving video compression efficiency |
US11310298B2 (en) * | 2016-03-07 | 2022-04-19 | Intel Corporation | Technologies for providing hints usable to adjust properties of digital media |
US9947069B2 (en) | 2016-06-10 | 2018-04-17 | Apple Inc. | Providing variants of digital assets based on device-specific capabilities |
US10003768B2 (en) * | 2016-09-28 | 2018-06-19 | Gopro, Inc. | Apparatus and methods for frame interpolation based on spatial considerations |
US10609418B2 (en) * | 2017-04-18 | 2020-03-31 | Qualcomm Incorporated | System and method for intelligent data/frame compression in a system on a chip |
US10728492B2 (en) * | 2017-04-24 | 2020-07-28 | Intel Corporation | Synergistic temporal anti-aliasing and coarse pixel shading technology |
-
2017
- 2017-04-18 US US15/490,625 patent/US10484685B2/en active Active
-
2018
- 2018-03-29 WO PCT/US2018/025240 patent/WO2018194816A1/en unknown
- 2018-03-29 SG SG11201908233Y patent/SG11201908233YA/en unknown
- 2018-03-29 CN CN201880025342.5A patent/CN110521208B/zh active Active
- 2018-03-29 EP EP18720445.8A patent/EP3613212B1/en active Active
- 2018-04-11 TW TW107112364A patent/TWI696114B/zh active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI816954B (zh) * | 2018-12-13 | 2023-10-01 | 美商艾斯卡瓦公司 | 用於重建無損地縮減的資料塊的序列的方法和設備,用於確定主要資料元件的元資料的方法和設備,及儲存媒體 |
TWI717021B (zh) * | 2019-09-18 | 2021-01-21 | 義隆電子股份有限公司 | 影像處理系統及其人工智慧晶片 |
Also Published As
Publication number | Publication date |
---|---|
SG11201908233YA (en) | 2019-11-28 |
WO2018194816A1 (en) | 2018-10-25 |
TWI696114B (zh) | 2020-06-11 |
US10484685B2 (en) | 2019-11-19 |
EP3613212C0 (en) | 2023-06-07 |
CN110521208B (zh) | 2021-09-17 |
EP3613212A1 (en) | 2020-02-26 |
US20180302625A1 (en) | 2018-10-18 |
CN110521208A (zh) | 2019-11-29 |
EP3613212B1 (en) | 2023-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI702837B (zh) | 用於系統單晶片中之智慧資料/框架壓縮之系統及方法 | |
US11006127B2 (en) | System and method for foveated compression of image frames in a system on a chip | |
TWI696114B (zh) | 在系統單晶片中用於智慧資料/訊框壓縮之系統及方法 | |
US20130222629A1 (en) | Methods, apparatuses, and computer program products for facilitating concurrent video recording and still image capture | |
CN108604211B (zh) | 用于片上系统中的多区块数据事务的系统和方法 | |
JP2008065834A (ja) | フュージョンメモリ装置及び方法 | |
TW201729187A (zh) | 用於使用前饋壓縮統計控制記憶體頻率之系統及方法 | |
JP2015535673A (ja) | ゲットアンドセットアーキテクチャに基づくトランスポートメカニズム内のコマンド実行 | |
US20200250101A1 (en) | System and method for intelligent tile-based memory bandwidth management | |
US10747671B1 (en) | System and method for intelligent tile-based prefetching of image frames in a system on a chip | |
US20150363112A1 (en) | Electronic device and file storing method thereof | |
US20180041612A1 (en) | System and method for out-of-stream order compression of multi-media tiles in a system on a chip | |
CN117278693A (zh) | 图像数据处理电路、方法、电子设备及介质 | |
JP2012039291A (ja) | 電子カメラ |