TW201944355A - 應用於彩色景深圖框包裝及解包裝之選擇景深值指定為rgb次像素與rgb次像素還原選擇景深值的方法及電路 - Google Patents

應用於彩色景深圖框包裝及解包裝之選擇景深值指定為rgb次像素與rgb次像素還原選擇景深值的方法及電路 Download PDF

Info

Publication number
TW201944355A
TW201944355A TW107112600A TW107112600A TW201944355A TW 201944355 A TW201944355 A TW 201944355A TW 107112600 A TW107112600 A TW 107112600A TW 107112600 A TW107112600 A TW 107112600A TW 201944355 A TW201944355 A TW 201944355A
Authority
TW
Taiwan
Prior art keywords
pixel
value
depth
depth value
sub
Prior art date
Application number
TW107112600A
Other languages
English (en)
Other versions
TWI673684B (zh
Inventor
Jar-Ferr Yang
Original Assignee
Univ Nat Cheng Kung
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Univ Nat Cheng Kung filed Critical Univ Nat Cheng Kung
Priority to TW107112600A priority Critical patent/TWI673684B/zh
Priority to CN201910165624.1A priority patent/CN110381318A/zh
Priority to US16/380,767 priority patent/US10869058B2/en
Application granted granted Critical
Publication of TWI673684B publication Critical patent/TWI673684B/zh
Publication of TW201944355A publication Critical patent/TW201944355A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/88—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/005—Aspects relating to the "3D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Of Color Television Signals (AREA)
  • Image Generation (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Color Television Systems (AREA)

Abstract

本發明提出的方法包括：由第一像素深度值與第四像素深度中分別取出兩個深度值；由第二像素深度值與第三像素深度中分別取出一個深度值；以及將由第一像素深度值中取得的深度值指定為第一像素的R次像素與B次像素；將由第二像素深度值中取得的深度值指定為第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的深度值指定為第一像素的G次像素的次像素值與第四像素的R次像素、G次像素與B次像素的次像素值。

Description

應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素與RGB次像素還原選擇景深值的方法及電路
本發明關於一種應用於彩色景深圖框包裝（Packing）及解包裝（Depacking）之選擇景深值（Selected Depth Values）指定（Assignment）為RGB次像素與RGB次像素還原選擇景深值的方法及電路。
人類可見的色彩都可用紅、綠、藍（R、G、B）三種顏色來加以混合而成。然而，人類的視覺系統對於亮度（luminance）比較敏感，而對於彩度比較不敏感，況且，三原色所構成的向量空間無法對影像強度（亮度）做處理，例如柔和化、銳利化等等。同時，由RGB格式構成的影像資料也在傳輸時佔用較大頻寬、儲存時佔用較多的記憶體。因此，有必要將RGB 格式的影像資料轉換成YUV（或YCbCr）格式，以達到高效率的影像傳輸。
於習知技術中，視訊或影像壓縮系統會將RGB次像素的相鄰四個像素轉換為YUV（YCbCr）的相鄰四個像素（又稱YUV 444或YCbCr 4:4:4格式）後進行壓縮傳輸，接收端再將YUV格式轉換回RGB格式。在習知的於H.265視訊壓縮系統中，如圖1A與圖1B所示，其分別顯示RGB與YUV（YCbCr）格式中，次像素的景深（depth）垂直與景深水平像素之間的轉換示意圖。在圖1A與圖1B中，配合以下表一與表二之轉換的矩陣與反轉換矩陣方程式，排除計算的誤差外，景深像素對應在RGB格式的與YUV 444格式之間的轉換及反轉換並不會產生失真。表一：RGB轉換至YCbCr表二：YUV反轉換至RGB
然而，為達到高效率的視訊壓縮傳輸，在一些實施例中，視訊或影像壓縮系統會保留YUV格式的四個像素的四個亮度值（Y，luminance），但對四個色度值（U、V或Cb、Cr，chrominance）則採次取樣（Subsampling）的方式，僅保留二個像素的U、V色度值（又稱YUV 422格式或YCbCr 4:2:2），或僅保留一個像素的U、V色度值（又稱YUV 420或YCbCr 4:2:0格式），藉此，使利用YUV422或YUV420格式傳輸影像資料時可佔用較少頻寬、儲存時可佔用較少的記憶體，以達到高效率的視訊壓縮與傳輸。
請參照圖2A與圖2B所示，其分別顯示景深垂直與景深水平包裝傳送YUV444格式、YUV422格式及YUV420格式的示意圖。在這兩個圖示中的圓圈內顯示有剖面線的UV色度值已依取樣的不同而被捨去。由於YUV 420格式會佔用最少的頻寬與記憶體，因此，視訊或影像壓縮系統最常被採用的格式正是YUV 420格式。
當接收端的影像解壓縮系統接收到YUV420 （或YUV 422）格式的影像資料時，會先將缺少的U、V色度值以保留的鄰近U、V色度值取代，以近似為YUV444格式之後再轉換成RGB格式的影像資料。例如，若是YUV 420格式時，解壓縮系統會先將U1 值填入U2 、U3 及U4 位置，並將V1 值填入V2 、V3 及V4 位置，再以上述YUV反轉換為RGB的表二，將四組YUV值轉換回四組RGB值。其中，僅有第一組R1 、G1 、B1 可完全回復外，其他三組反轉回之RGB值因填入U1 及V1 值而有不同程度的失真。
另外，若是YUV 422格式時，解壓縮系統會先將U1 值填入U2 ，並將U3 值填入U4 位置，且將V1 值填入V2 ，V3 值填入V4 位置，再以上述YUV反轉為RGB公式(2)，將四組YUV值轉換回四組RGB值。其中，僅有第一組R1 、G1 、B1 及第三組R3 、G3 、B3 可完全回復，第二組因彩度值填入U1 及V1 值，將無法保證R2 、G2 、B2 的正確性，而第四組因彩度值填入U3 及V3 值，也無法保證R4 、G4 、B4 的正確性。
因RGB格式分別表示相對位置之景深值，若於景深包裝時，經壓縮及解壓縮系統之RGB格式與YUV格式的轉換，若編碼與解碼系統採用 YUV 420格式或YUV422格式，因補回UV值的不同，再轉換回RGB格式時會於景深較大落差附近，產生無法控制的景深誤差。
上述習知技術的RGB格式與YUV格式的轉換與反轉換的方式已經長久被業界所採用，雖然表一、二的參數值略有變化，但是在轉換與反轉換的做法上都是以上述的矩陣方式以及RGB或YUV三個變數去做轉換，而且都只是強調傳輸的效率佳，並不考慮其他層面的問題。
本發明之目的為提供一種可應用於先前技術的視訊壓縮與解壓縮系統的彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素與RGB次像素還原選擇景深值的方法及電路。將本發明之選擇景深值指定為RGB次像素及RGB次像素還原選擇景深值的程序應用於習知之視訊壓縮傳輸系統的包裝及解包裝過程時，可以從接收到的RGB格式中直接恢復影像資料的多個深度值，因此可以改善在景深落差劇變區位置上的失真現象。
本發明提出一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括：由第一像素深度值與第四像素深度中分別取出兩個深度值；由第二像素深度值與第三像素深度中分別取出一個深度值，其中由第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值中取得的六個深度值是位於交錯位置；以及將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
本發明另提出一種應用於執行前述方法的電路，包括：取得單元，其由第一像素深度值與第四像素深度中分別取出兩個深度值；由第二像素深度值與第三像素深度中分別取出一個深度值，其中由第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值中取得的六個深度值是位於交錯位置；以及存入單元，其將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
本發明又提出一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括：分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素、第二像素的G次像素值、第三像素的G次像素值及第四像素的B次像素值；以及將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第一像素的B次像素值指定為第一像素深度值中，與第一像素的B次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
本發明又提出一種應用於執行前述方法的電路，包括：取得單元，其分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素、第二像素的G次像素值、第三像素的G次像素值及第四像素的B次像素值；以及存入單元，其將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第一像素的B次像素值指定為第一像素深度值中，與第一像素的B次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
本發明又提出一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括：由第一像素深度值、第二像素深度值、第三像素深度與第四像素深度中分別取出兩個深度值；以及將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第二像素的G次像素的次像素值；將由第二像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第二像素的B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第二像素的R次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
本發明又提出一種應用於執行前述方法的電路，包括：取得單元，其由第一像素深度值、第二像素深度值、第三像素深度與第四像素深度中分別取出兩個深度值；以及存入單元，其將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第二像素的G次像素的次像素值；將由第二像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第二像素的B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第二像素的R次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
本發明又提出一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括：分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素值、第二像素的R次像素值、G次像素值與B次像素、第三像素的R次像素值與第四像素的B次像素值；以及將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第一像素的B次像素值指定為第一像素深度值中，與第一像素的B次像素值對應之幾何位置內；將第二像素的R次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第二像素的B次像素值指定為第二像素深度值中，與第二像素的B次像素值對應之幾何位置內；將第三像素的R次像素值指定為第三像素深度值中，與第三像素的R次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
本發明又提出一種應用於執行前述方法的電路，包括：取得單元，其分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素值、第二像素的R次像素值、G次像素值與B次像素、第三像素的R次像素值與第四像素的B次像素值；以及存入單元，其將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第一像素的B次像素值指定為第一像素深度值中，與第一像素的B次像素值對應之幾何位置內；將第二像素的R次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第二像素的B次像素值指定為第二像素深度值中，與第二像素的B次像素值對應之幾何位置內；將第三像素的R次像素值指定為第三像素深度值中，與第三像素的R次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
本發明又提出一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括：由第一像素深度值、第二像素深度值、第三像素深度與第四像素深度中分別取出兩個深度值；以及將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的G次像素；將由第二像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的B次像素的次像素值；將由第二像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的R次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第三像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的B次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
本發明又提出一種應用於執行前述方法的電路，包括：取得單元，其由第一像素深度值、第二像素深度值、第三像素深度與第四像素深度中分別取出兩個深度值；以及存入單元，其將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的G次像素；將由第二像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的B次像素的次像素值；將由第二像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的R次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第三像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的B次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
本發明又提出一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括：分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素值、第二像素的B次像素值、第三像素的R次像素值、G次像素值與B次像素值與第四像素的B次像素值；以及將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第一像素深度值中，與第一像素的G次像素值對應之幾何位置內；將第一像素的B次像素值指定為第二像素深度值中，與第二像素的R次像素值對應之幾何位置內；將第二像素的B次像素值指定為第二像素深度值中，與第二像素的B次像素值對應之幾何位置內；將第三像素的R次像素值指定為第三像素深度值中，與第三像素的R次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第三像素的B次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
本發明又提出一種應用於執行前述方法的電路，包括：取得單元，其分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素值、第二像素的B次像素值、第三像素的R次像素值、G次像素值與B次像素值與第四像素的B次像素值；以及存入單元，其將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第一像素深度值中，與第一像素的G次像素值對應之幾何位置內；將第一像素的B次像素值指定為第二像素深度值中，與第二像素的R次像素值對應之幾何位置內；將第二像素的B次像素值指定為第二像素深度值中，與第二像素的B次像素值對應之幾何位置內；將第三像素的R次像素值指定為第三像素深度值中，與第三像素的R次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第三像素的B次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
本發明又提出一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括：由第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值中分別取出一個深度值，其中由第一像素深度值與第三像素深度值取得的兩個深度值是位於交錯位置；由第二像素深度值與第四像素深度值取得的兩個深度值是位於交錯位置；以及將由第一像素深度值中取得的深度值指定為轉換後RGB格式的第一像素的R次像素、G次像素、B次像素的次像素值；將由第二像素深度值中取得的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素、B次像素的次像素值。
本發明又提出一種應用於執行前述方法的電路，包括：取得單元，其由第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值中分別取出一個深度值，其中由第一像素深度值與第三像素深度值取得的兩個深度值是位於交錯位置；由第二像素深度值與第四像素深度值取得的兩個深度值是位於交錯位置；以及存入單元，其將由第一像素深度值中取得的深度值指定為轉換後RGB格式的第一像素的R次像素、G次像素、B次像素的次像素值；將由第二像素深度值中取得的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素、B次像素的次像素值。
本發明又提出一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括：分別取得RGB格式的該組四像素的第一像素的R次像素值、第二像素的G次像素值、第三像素的G次像素值及第四像素的B次像素值；以及將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
本發明又提出一種應用於執行前述方法的電路，包括：取得單元，其分別取得RGB格式的該組四像素的第一像素的R次像素值、第二像素的G次像素值、第三像素的G次像素值及第四像素的B次像素值；以及存入單元，其將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置的次像素內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置的次像素內。
承上所述，在本發明之應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素與RGB次像素還原選擇景深值的方法及電路中，仍然使用習知之視訊壓縮傳輸系統將RGB格式轉換成YCbCr格式的轉換與反轉換的過程，而且將本發明之選擇景深值指定為RGB次像素與RGB次像素還原景深值的方法及電路應用於習知之視訊壓縮傳輸系統的包裝及解包裝過程中，可以從接收到的RGB格式中不需做任何調整就可直接恢復多個選擇的深度值，相較於先前技術所敘，將缺少的色度值以保留的鄰近色度值取代的作法來說，本發明因為可以從接收到的RGB格式中直接恢復影像資料的多個深度值，因此可以改善在景深落差劇變區位置上的失真現象。
以下將參照相關圖式，說明依本發明應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素與RGB次像素還原選擇景深值的方法及電路，其中相同的元件將以相同的參照符號加以說明。
本發明之指定（或稱轉換）與還原（或稱反轉換）方法與其電路可應用於3D景深系統的包裝（packing）與解包裝（unpacking）技術上。另外，本案技術之指定方法、還原方法與其電路可應用於灰階影像訊號的壓縮與傳輸上。此外，本發明除了可應用於先前技術所提到的高效率的視訊壓縮與解壓縮系統，較佳可應用於發明人在美國專利申請號第14/504,901、14/504,936、14/505,117與14/505,153號中所提出的3D影像系統的包裝與解包裝技術中。上述專利申請號均透過引用方式納入本說明書全文之中。
在先前技術提到的高效率的視訊壓縮與解壓縮系統中，需先將RGB格式轉換成YCbCr（YUV）格式後傳輸，接收端接收到YCbCr（YUV）格式的影像資料後，再轉換回RGB格式，本發明仍使用上述的包裝與解包裝過程，但是，為了達到較佳的轉換以恢復原始景深值，本發明先將景深圖框的每四個像素中的RGB格式的次像素利用幾何位置對應的選擇景深值指定至（存入）對應的RGB次像素內，再將RGB格式轉換成YCbCr 4:2:2、YCbCr 4:2:0或YCbCr 4:0:0後編碼傳輸，接收端接收到YCbCr 4:2:2、YCbCr 4:2:0或YCbCr 4:0:0的影像資料後，再解壓縮並轉換回RGB格式，之後，再利用本發明的還原（反轉換）方法進行景深值的還原以得到上述的選擇景深值，藉此達到改善景深落差劇變區位置上的失真現象的目的。因此，以下實施例所謂的指定方法就是以選擇的景深值指定為（存入）RGB格式的次像素位置的過程，而以下實施例所謂的還原方法就是將解壓縮後且經色度空間反轉換的RGB格式還原而得到選擇景深值的過程。以下利用不同實施例來說明本發明應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素與RGB次像素還原選擇景深值的方法及電路。
以下說明編碼與解碼系統採用YCbCr 4:0:0格式者。
請參照圖3A與圖3B所示，其中，圖3A為本發明一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法的流程示意圖，而圖3B為本發明一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的電路1a之功能方塊示意圖。
灰階影像資料為景深圖框（depth frame），其可具有原始的RGB格式，RGB格式依序包括有R次像素、G次像素與B次像素。具RGB格式的影像資料可包含至少一組四個像素的群組，亦即每一個群組中具有四個相鄰的像素。因此，可將影像資料中所有群組的四個像素都轉換而成為YCbCr格式後再編碼傳輸。其中，每一群組的四個像素分別可為垂直排列或水平排列，而四個相鄰像素可分別為一第一像素、一第二像素、一第三像素及一第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列。於此，每組的四個像素共有十二個次像素，而每一個像素的R次像素、G次像素、B次像素分別為垂直排列是表示，每一個像素的R次像素、G次像素、B次像素是位於同一直行中，每一個像素的R次像素、G次像素、B次像素分別為水平排列是表示，每一個像素的R次像素、G次像素、B次像素是位於同一橫列中。另外，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的一第一像素深度值（深度值也可稱景深值）、一第二像素深度值、一第三像素深度值與一第四像素深度值，亦即第一像素的幾何位置對應有第一像素深度值、第二像素的幾何位置對應有第二像素深度值、…以此類推。由於各像素具有水平排列或垂直排列的次像素，因此，幾何位置分別對應於第一像素、第二像素、第三像素及第四像素的第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值也分別具有對應於R次像素、G次像素、B次像素位置的三個深度值。
圖3A的轉換方法可適用於四個像素為垂直排列與水平排列，且編碼與解碼系統採用YCbCr 4:0:0格式者。如圖3A所示，應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法可包括步驟S01與步驟S02。其中，步驟S01為：由第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值中分別取出一個深度值，其中由第一像素深度值與第三像素深度值取得的兩個深度值是位於交錯位置；由第二像素深度值與第四像素深度值取得的兩個深度值是位於交錯位置。這裏的「位於交錯位置」指的是不在同一直行或同一橫列中。而步驟S02為：將由第一像素深度值中取得的深度值指定為轉換後RGB格式的第一像素的R次像素、G次像素、B次像素的次像素值；將由第二像素深度值中取得的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素、B次像素的次像素值。在取得深度值的步驟S01中，是分別取得第一像素深度值中對應於第一像素的R次像素之幾何位置的深度值、第二像素深度值中對應於第二像素的G次像素之幾何位置的深度值、第三像素深度值中對應於第三像素的G次像素之幾何位置的深度值與第四像素深度值中對應於第四像素的B次像素之幾何位置的深度值。
另外，如圖3B所示，本實施例的電路1a可包括一取得單元11及一存入單元12，取得單元11與存入單元12電性連接。取得單元11可分別由第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值中分別取出一個深度值，其中由第一像素深度值與第三像素深度值取得的兩個深度值是位於交錯位置；由第二像素深度值與第四像素深度值取得的兩個深度值是位於交錯位置。存入單元12可將由第一像素深度值中取得的深度值指定為轉換後RGB格式的第一像素的R次像素、G次像素、B次像素的次像素值；將由第二像素深度值中取得的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素、B次像素的次像素值。於此，取得單元11與存入單元12可應用硬體電路或韌體的方式來實現其功能。另外，電路1a也可包括一記憶單元（圖未示），其可分別與取得單元11及存入單元12電性連接，並可儲存指定前、後與還原前、後的次像素值與深度值。在一實施例中，電路1a可包含例如為加/減法器及乘/除法器。
請參照圖4A至圖4C所示，其中，圖4A為本發明一實施例之景深圖框中的一組四像素的示意圖，而圖4B與圖4C分別為本發明一實施例的一組四像素之RGB格式與其幾何位置對應之景深值的示意圖。於此，圖4B是顯示垂直排列的四個像素與四個像素深度值，而圖4C是顯示水平排列的四個像素與四個像素深度值。
如圖4A所示，景深圖框的尺寸（解析度）例如可為H×W，每一組四像素包含有四個相鄰的像素：{Ci,j , Ci+1,j , Ci,j+1 , Ci+1,j+1 }，各像素之次像素的數量分別為三個，其可為紅、綠、藍三個次像素（以R、G、B表示），每一像素的R、G、B次像素可分別如圖4B的垂直排列，即第一像素為{Ri,j , Gi,j , Bi,j }、第二像素為{Ri+1,j , Gi+1,j , Bi+1,j }、第三像素為{Ri,j+1 , Gi,j+1 , Bi,j+1 }、第四像素為{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }，或者如圖4C的水平排列，即第一像素為{Ri,j , Gi,j , Bi,j }、第二像素為{Ri,j+1 , Gi,j+1 , Bi,j+1 }、第三像素{Ri+1,j , Gi+1,j , Bi+1,j }、第四像素為{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }。四個相鄰的第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的四組像素深度值：第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值。由於每一個像素有3個次像素，因此，幾何位置對應的每一像素深度值也分別具有3個深度值。於此，在垂直排列（如圖4B所示）中，其分別為：第一像素深度值：{D3i,j , D3i+1,j , D3i+2,j }、第二像素深度值{D3i+3,j , D3i+4,j , D3i+5,j }、第三像素深度值：{D3i,j+1 , D3i+1,j+1 , D3i+2,j+1 }、第四像素深度值：{D3i+3,j+1 , D3i+4,j+1 , D3i+5,j+1 }，因此，其尺寸將變成3H×W；另外，在水平排列（如圖4C所示）中，其分別為：第一像素深度值：{Di,3j , Di,3j+1 , Di,3j+2 }、第二像素深度值：{Di,3j+3 , Di,3j+4 , Di,3j+5 }、第三像素深度值：{Di+1,3j , Di+1,3j+1 , Di+1,3j+2 }、第四像素深度值：{Di+1,3j+3 , Di+1,3j+4 , Di+1,3j+5 }，因此，其尺寸將變成H×3W；其中，i＝0,2, 4..., (H-2)，j＝0,2, 4..., (W-2)。
於圖4B中，RGB格式的第一像素為左上角垂直排列的三個次像素（以1表示），第二像素為左下角垂直排列的三個次像素（以2表示），第三像素為右上角垂直排列的三個次像素（以3表示），第四像素為右下角垂直排列的三個次像素（以4表示）；於圖4C中，RGB格式的第一像素為左上角水平排列的三個次像素（以1表示），第二像素為右上角水平排列的三個次像素（以2表示），第三像素為左下角水平排列的三個次像素（以3表示），第四像素為右下角水平排列的三個次像素（以4表示），然並不以此為限。在一些實施例中，第一像素～第四像素的位置也可以互換，只要符合第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列即可。
具體來說，若編碼與解碼系統採用YCbCr 4:0:0格式時，在本實施例的四像素中，如圖4B與圖4C所示，取得單元11是分別取得第一像素深度值中對應於第一像素的R次像素之幾何位置的深度值：（垂直為D3i,j ，水平為Di,3j ）、第二像素深度值中對應於第二像素的G次像素之幾何位置的深度值（垂直為D3i+4,j ，水平為Di,3j+4 ）、第三像素深度值中對應於第三像素的G次像素之幾何位置的深度值（垂直為D3i+1,j+1 ，水平為Di+1,3j+1 ）與第四像素深度值中對應於第四像素的B次像素之幾何位置的深度值（垂直為D3i+5,j+1 ，水平為Di+1,3j+5 ），亦即取得四像素深度值之垂直排列中的D3i,j 、D3i+4,j 、D3i+1,j+1 與D3i+5,j+1 等4個深度值，或水平排列的Di,3j 、Di,3j+4 、Di+1,3j+1 與Di+1,3j+5 ，其中，D3i,j 與D3i+1,j+1 是位於交錯位置，D3i+4,j 與D3i+5,j+1 是位於交錯位置；Di,3j 與Di+1,3j+1 是位於交錯位置，Di,3j+4 與Di+1,3j+5 是位於交錯位置。換言之，垂直排列或水平排中只有4個深度值被選擇參與後續包裝與解包裝的過程。
之後，存入單元12可將由第一像素深度值中取得的深度值指定為轉換後RGB格式的第一像素的R次像素、G次像素、B次像素的次像素值；將由第二像素深度值中取得的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素、B次像素的次像素值。具體來說，是在包裝階段時，如圖4B的垂直排列中，是將4個選擇的深度值指定為（存入）12個RGB次畫素的次像素中，即： Ri,j ＝Gi,j ＝Bi,j ＝D3i,j , (1) Ri+1,j ＝Gi+1,j ＝Bi+1,j ＝ D3i+4,j , (2) Ri.j+1 ＝Gi,j+1 ＝Bi,j+1 ＝ D3i+1,j+1 , (3) Ri+1,j+1 ＝Gi+1,j+1 ＝Bi+1,j+1 ＝ D3i+5,j+1 (4)
而如圖4C的水平排列中，是將4個選擇的深度值指定成12個RGB次畫素的次像素中，即： Ri,j ＝Gi,j ＝Bi,j ＝ Di,3j , (5) Ri.j+1 ＝Gi,j+1 ＝Bi,j+1 ＝ Di,3j+4 , (6) Ri+1,j ＝Gi+1,j ＝Bi+1,j ＝ Di+1,3j+1 , (7) Ri+1,j+1 ＝Gi+1,j+1 ＝Bi+1,j+1 ＝ Di+1,3j+5 (8)
因此，可由選擇的4個深度值中得到指定（轉換）後RGB格式的十二個次像素值。
請參照圖4B、圖4C並配合圖5A與圖5B所示，其中，圖5A與圖5B分別為本發明不同實施例之視頻編碼系統中，RGB格式與YCbCr格式之色彩空間的轉換與反轉換示意圖。
由於上述公式(1)～(4)或(5)～(8)是選擇將每一個像素的RGB次像素值皆設定為相同的深度值，因此經過RGB與YcbCr的色度空間轉換之轉換矩陣（表一）時，將使所有的色度參數值（Cb、Cr）皆為128。因此，具有選擇深度值之四個RGB格式的像素可轉換而得到四個YCbCr格式的資料：{Yi,j , 128, 128}、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}。如圖5A所示，正常情況下，如果忽略編碼的誤差，這四組的YCbCr格式：{Yi,j , 128, 128}、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}經影像編碼系統後將得到編碼後的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }。
若接收端接收且在解壓縮的過程中可以直接取得這四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }時（圖5A），則經色度參數的調整後，將可回復而得到編碼後原來的四組YCbCr格式資料。得到編碼前原來的四組YCbCr格式資料後，再經YCbCr格式與RGB格式的色度空間反轉換，即經表二的反轉換矩陣計算後，可還原而得到原有的四組RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }。在此十二個次像素值中，其滿足上述公式(1)～(4)與公式(5)～(8)的算式而包含有上述的4個選擇深度值，即垂直排列的D3i,j , D3i+4,j , D3i+1,j+1 與D3i+5,j+1 ，水平排列的Di,3j , Di,3j+4 , Di+1,3j+1 與Di+1,3j+5 。
另外，如圖5B所示，在正常情況下，如果忽略編碼的誤差，這四組YCbCr格式：{Yi,j , 128, 128}、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}經影像編碼系統後同樣可得到編碼後的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }。再經色度空間的轉換（YCbCr轉換成RGB）後，可得到四組的R’G’B’格式的資料（圖5B）。因此，接收端在解壓縮的過程中將無法直接取得上述的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }，只能取得轉換後的四組的R’G’B’格式的資料，故接收端在取得轉換後的四組的R’G’B’格式的資料後，需先進行另一次的色度空間轉換，以將R’G’B’格式再轉換成YCb’Cr’格式，亦即得到{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }，之後，再經色度參數的調整後，才可回復而得到編碼後原來的四組YCbCr格式資料：{Yi,j , 128, 128}、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}。得到編碼前原來的四組YCbCr格式資料後，再經YCbCr格式與RGB格式的色度空間反轉換，即經表二的反轉換矩陣計算後，可還原而得到原有的四組RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }。在此十二個次像素值中，其滿足上述公式(1)～(4)與公式(5)～(8)的算式而包含有上述的4個選擇深度值，即垂直排列的D3i,j , D3i+4,j , D3i+1,j+1 與D3i+5,j+1 與水平排列的Di,3j , Di,3j+4 , Di+1,3j+1 與Di+1,3j+5 。
因此，可再利用本發明應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法而不經調整地直接得到這4個選擇的深度值。以下說明RGB次像素還原選擇景深值之方法的技術內容。
請參照圖6A、圖6B並配合圖4B與圖4C所示，其中，圖6A為本發明一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法的流程示意圖，而圖6B為本發明一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原景深值的電路2a之功能方塊示意圖。圖6A的還原方法是適用於四個像素為垂直排列或水平排列，且編碼與解碼系統採用YCbCr 4:0:0格式者。圖6A的還原（反轉換）方法是對應於上述圖3A的指定（轉換）方法。
如前述，經過圖5A與圖5B的視訊壓縮、解壓縮系統及色度空間的轉換與反轉換後，可得到原有之RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }，在此十二個次像素值中，其滿足上述公式(1)～(4)與公式(5)～(8)的算式而包含有上述的4個選擇深度值，即垂直排列的D3i,j , D3i+4,j , D3i+1,j+1 與D3i+5,j+1 與水平排列的Di,3j , Di,3j+4 , Di+1,3j+1 與Di+1,3j+5 。因此，本案技術的RGB次像素還原選擇景深值是將得到的RGB格式還原而得到4個選擇的景深值。
如圖6A所示，應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法可包括步驟T01與步驟T02。其中，步驟T01為：分別取得RGB格式的該組四像素的第一像素的R次像素值、第二像素的G次像素值、第三像素的G次像素值及第四像素的B次像素值；而步驟T02為：將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
具體來說，若編碼與解碼系統採用YCbCr 4:0:0格式時，在本實施例的四像素中，如圖6B所示，本實施例的電路2a可包括一取得單元21及一存入單元22，取得單元21與存入單元22電性連接。取得單元21可由影像資料的每一群組中分別取得RGB格式的四像素的第一像素的R次像素值、第二像素的G次像素值、第三像素的G次像素值及第四像素的B次像素值，而存入單元12可將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置的次像素內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置的次像素內。於此，取得單元21與存入單元22是可應用硬體電路或韌體的方式來實現其功能。此外，電路2a更可包括一記憶單元（圖未示），其可分別與取得單元21及存入單元22電性連接，並可儲存指定前、後與還原前、後的次像素值與深度值。在一實施例中，電路2a可包含例如為加/減法器及乘/除法器。
請再分別參照圖4B與圖4C所示，以說明上述的還原方法。具體來說，是在解包裝階段中，如圖4B的垂直排列中，係將接收端經色度空間反轉換所得到的12個RGB次畫素的次像素值還原而得到4個選擇的深度值，亦即： D3i,j ＝Ri,j , (9) D3i+4,j ＝ Gi+1,j , (10) D3i+1,j+1 ＝ Gi,j+1 , (11) D3i+5,j+1 ＝Bi+1,j+1 . (12)
而如圖4C的水平排列中，也是接收端經色度空間反轉換所得到的12個RGB次畫素的次像素值還原而得到4個選擇的深度值，即： Di,3j ＝Ri,j , (13) Di,3j+4 ＝ Gi,j+1 , (14) Di+1,3j+1 ＝ Gi+1,j , (15) Di+1,3j+5 ＝Bi+1,j+1 (16)
因此，可從接收端接收且經色度空間反轉換而得到的RGB格式中不做任何調整而直接還原上述的4個選擇的深度值，其他的8個景深值可以根據這4個選擇景深值及相關轉換資訊以內插法而得到，藉此可以獲得較佳的轉換以恢復原始景深值，相較於先前技術所敘，將缺少的色度值以保留的鄰近色度值取代的作法來說，本實施例因為可以從接收到的RGB格式中直接恢復影像資料的多個深度值，因此可以改善在景深落差劇變區位置上的失真現象。內插法的具體技術內容可參照發明人先前申請的台灣申請案號：106135377，上述專利申請號透過引用方式納入本說明書全文之中。
以下再說明編碼與解碼系統採用YCbCr 4:2:0格式者。
請參照圖7A所示，其為本發明另一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法的流程示意圖。
每一群組的四個像素分別可為垂直排列或水平排列，四個像素可分別為第一像素、第二像素、第三像素及第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列。於此，每組的四個像素共有十二個次像素，而每一個像素的R次像素、G次像素、B次像素分別為垂直排列是表示，每一個像素的R次像素、G次像素、B次像素是位於同一直行中，每一個像素的R次像素、G次像素、B次像素分別為水平排列是表示，每一個像素的R次像素、G次像素、B次像素是位於同一橫列中。另外，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的第一像素深度值（深度值也可稱景深值）、第二像素深度值、第三像素深度值與第四像素深度值，亦即第一像素的幾何位置對應有第一像素深度值、第二像素的幾何位置對應有第二像素深度值、…以此類推。由於各像素具有水平排列或垂直排列的次像素，因此，幾何位置分別對應於第一像素、第二像素、第三像素及第四像素的第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值也分別具有對應於R次像素、G次像素、B次像素位置的3個深度值。
圖7A的轉換方法可適用於四個像素為垂直排列與水平排列的情況，且編碼與解碼系統採用YCbCr 4:2:0格式者。如圖7A所示，應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法可包括步驟U01與步驟U02。其中，步驟U01為：由第一像素深度值與第四像素深度中分別取出兩個深度值；由第二像素深度值與第三像素深度中分別取出一個深度值，其中由第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值中取得的6個深度值是位於交錯位置。這裏的「位於交錯位置」指的是不在同一直行或同一橫列中。而步驟U02為：將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
在取得深度值的步驟U01中，是由第一像素深度值中取得對應於第一像素的R次像素與B次像素之幾何位置的深度值；由第二像素深度值與第三像素深度值中分別取得對應於第二像素及第三像素的G次像素之幾何位置的深度值；由第四像素深度值中取得對應於第四像素的R次像素與B次像素之幾何位置的深度值。另外，在指定為轉換後RGB格式的步驟U02中，是將由第一像素深度值中取得對應於第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得對應於第一像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得對應於第二像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得對應於第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得對應於第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得對應於第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
另外，請再參照圖3B所示，電路1a的取得單元11可由第一像素深度值與第四像素深度中分別取出兩個深度值；由第二像素深度值與第三像素深度中分別取出一個深度值，其中由第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值中取得的6個深度值是位於交錯位置。存入單元12可將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
請參照圖7B與圖7C所示，其分別為本發明另一實施例的一組四像素之RGB格式與其幾何位置對應之景深值的示意圖。於此，圖7B是顯示垂直排列的四個像素與四個像素深度值，而圖7C是顯示水平排列的四個像素與四個像素深度值。
在景深圖框的一組四個像素中，每一像素的R、G、B次像素可分別如圖7B的垂直排列，即第一像素為{Ri,j , Gi,j , Bi,j }、第二像素為{Ri+1,j , Gi+1,j , Bi+1,j }、第三像素為{Ri,j+1 , Gi,j+1 , Bi,j+1 }、第四像素為{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }，或者如圖7C的水平排列，即第一像素為{Ri,j , Gi,j , Bi,j }、第二像素為{Ri,j+1 , Gi,j+1 , Bi,j+1 }、第三像素{Ri+1,j , Gi+1,j , Bi+1,j }、第四像素為{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }，而四個相鄰的第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的四組像素深度值：第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值。由於每一個像素有3個次像素，因此，幾何位置對應的像素深度值也分別具有3個深度值。於此，在垂直排列（如圖7B所示）中，其分別為：{D3i,j , D3i+1,j , D3i+2,j }、{D3i+3,j , D3i+4,j , D3i+5,j }、{D3i,j+1 , D3i+1,j+1 , D3i+2,j+1 }、{D3i+3,j+1 , D3i+4,j+1 , D3i+5,j+1 }，因此，其尺寸將變成3H×W；在水平排列（如圖7C所示）中，其分別為：{Di,3j , Di,3j+1 , Di,3j+2 }、{Di,3j+3 , Di,3j+4 , Di,3j+5 }、{Di+1,3j , Di+1,3j+1 , Di+1,3j+2 }、{Di+1,3j+3 , Di+1,3j+4 , Di+1,3j+5 }，因此，其尺寸將變成H×3W；其中，i＝0,2, 4..., (H-2)，j＝0,2, 4..., (W-2)。
具體來說，若編碼與解碼系統採用YCbCr 4:2:0格式時，在本實施例的四像素中，如圖7B與圖7C所示，取得單元11可由第一像素深度值中取得對應於第一像素的R次像素與B次像素之幾何位置的深度值；由第二像素深度值與第三像素深度值中分別取得對應於第二像素及第三像素的G次像素之幾何位置的深度值；由第四像素深度值中取得對應於第四像素的R次像素與B次像素之幾何位置的深度值，亦即取得四像素深度值之垂直排列中的D3i,j 、D3i+2,j 、D3i+4,j 、D3i+1,j+1 、D3i+3,j+1 與D3i+5,j+1 等6個深度值，或水平排列的Di,3j 、Di,3j+2 、Di,3j+4 、Di+1,3j+1 、Di+1,3j+3 與Di+1,3j+5 ，其中，D3i,j 、D3i+2,j 、D3i+4,j 、D3i+1,j+1 、D3i+3,j+1 與D3i+5,j+1 是位於交錯位置，Di,3j 、Di,3j+2 、Di,3j+4 、Di+1,3j+1 、Di+1,3j+3 與Di+1,3j+5 是位於交錯位置。換言之，垂直排列或水平排中只有6個交錯位置的深度值被選擇參與包裝與解包裝的過程。
之後，存入單元12可將由第一像素深度值中取得對應於第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的R次像素；由第一像素深度值中取得對應於第一像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的B次像素；由第二像素深度值中取得對應於第二像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；由第三像素深度值中取得對應於第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；由第四像素深度值中取得對應於第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的G次像素的次像素值；由第四像素深度值中取得對應於第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。具體來說，是在包裝階段時，如圖7B的垂直排列中，是將6個選擇的深度值指定為（存入）12個RGB次畫素的次像素中，即： Ri,j ＝D3i,j , (17) Gi,j ＝D3i+3,j+1 , (18) Bi,j ＝ D3i+2,j , (19) Ri+1,j ＝Gi+1,j ＝Bi+1,j ＝ D3i+4,j , (20) Ri.j+1 ＝Gi,j+1 ＝Bi,j+1 ＝ D3i+1,j+1 , (21) Ri+1,j+1 ＝Gi+1,j+1 ＝Bi+1,j+1 ＝ D3i+5,j+1 , (22)
而如圖7C的水平排列中，是將6個選擇的深度值指定成12個RGB次畫素的次像素中，即： Ri,j ＝Di,3j , (23) Gi,j ＝Di+1,3j+3 , (24) Bi,j ＝ Di,3j+2 , (25) Ri.j+1 ＝Gi,j+1 ＝Bi,j+1 ＝ Di,3j+4 , (26) Ri+1,j ＝Gi+1,j ＝Bi+1,j ＝ Di+1,3j+1 , (27) Ri+1,j+1 ＝Gi+1,j+1 ＝Bi+1,j+1 ＝ Di+1,3j+5 , (28)
因此，可由選擇的6個深度值中得到指定（調整）後RGB格式的十二個次像素值。
請參照圖7B、圖7C並配合圖5A與圖5B所示，由於上述公式(17)～(22)或(23)～(28)是選擇將第二像素、第三像素與第四像素的RGB次像素值設定為相同的深度值，因此經過RGB與YcbCr的色度空間轉換之轉換矩陣（表一）時，將使三組的色度參數值（Cb、Cr）皆為128。因此，具有選擇深度值之四個RGB格式的像素可轉換而得到四個YCbCr格式的資料：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}。如圖5A所示，正常情況下，如果忽略編碼的誤差，這四組的YCbCr格式：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}經影像編碼系統後將得到編碼後的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }。在此編碼過程中，影像系統在編碼時有二種取樣模式：第一種是採用直接取樣（direct subsampling）模式，第二種是採用平均取樣（average subsampling）模式。若採用第一種的直接取樣時，則Cb’i,j ＝Cbi,j ，Cr’i,j ＝Cri,j 。若採用第二種的平均取樣時，則Cb’i,j ＝Cbi,j /4＋96，Cr’i,j ＝Cri,j /4＋96。
若接收端接收且在解壓縮的過程中可以直接取得這四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }時（圖5A），則經色度參數的調整後，將可回復而得到編碼後原來的四組YCbCr格式資料。在此過程中若編碼系統採用直接取樣模式時，則可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝Cb’i,j 與Cri,j ＝Cr’i,j 而得到編碼前原來的四組YCbCr格式資料，即{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}；在此過程中若採用平均取樣模式時，則可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝4Cb’i,j -384與Cri,j ＝4Cr’i,j -384而得到編碼前原來的四組YCbCr格式資料。需注意的是，圖5A接收端的解碼系統應該知道編碼系統在編碼時是採用直接取樣或是平均取樣模式。得到編碼前原來的四組YCbCr格式資料後，再經YCbCr格式與RGB格式的色度空間反轉換，即經表二的反轉換矩陣計算後，可還原而得到原有的四組RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }。在此十二個次像素值中，其滿足上述公式(17)～(22)與公式(23)～(28)的算式而包含有上述的6個選擇深度值，即垂直排列的D3i,j 、D3i+2,j 、D3i+4,j 、D3i+1,j+1 、D3i+3,j+1 與D3i+5,j+1 ，水平排列的Di,3j 、Di,3j+2 、Di,3j+4 、Di+1,3j+1 、Di+1,3j+3 與Di+1,3j+5 。
另外，如圖5B所示，在正常情況下，如果忽略編碼的誤差，這四組YCbCr格式：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}經影像編碼系統後同樣可得到編碼後的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }。在此編碼過程中，影像編碼系統在編碼時一樣有二種取樣模式，第一種是採用直接取樣（direct subsampling）模式，第二種是採用平均取樣（average subsampling）模式。若採用第一種的直接取樣時，則Cb’i,j ＝Cbi,j ，Cr’i,j ＝Cri,j 。若採用第二種的平均取樣時，則Cb’i,j ＝Cbi,j /4＋96，Cr’i,j ＝Cri,j /4＋96。再經色度空間的轉換（YCbCr轉換成RGB）後，可得到四組的R’G’B’格式的資料（圖5B）。
因此，接收端在解壓縮的過程中將無法直接取得上述的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }，只能取得轉換後的四組的R’G’B’格式的資料，故接收端在取得轉換後的四組的R’G’B’格式的資料後，需先進行另一次的色度空間轉換，以將R’G’B’格式再轉換成YCb’Cr’格式，亦即得到{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }，之後，再經色度參數的調整後，才可回復而得到編碼後原來的四組YCbCr格式資料。在此過程中若編碼系統採用直接取樣模式時，則同樣可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝Cb’i,j ，Cri,j ＝Cr’i,j 而得到編碼前原來的四組YCbCr格式資料，即{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}；在此過程中若採用平均取樣模式時，則可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝4Cb’i,j -384，Cri,j ＝4Cr’i,j -384而得到編碼前原來的四組YCbCr格式資料。需注意的是，圖5B接收端的解碼系統也應該知道編碼系統在編碼時是採用直接取樣或是平均取樣模式。得到編碼前原來的四組YCbCr格式資料後，再經YCbCr格式與RGB格式的色度空間反轉換，即經表二的反轉換矩陣計算後，可還原而得到原有的四組RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }。在此十二個次像素值中，其滿足上述公式(17)～(22)與公式(23)～(28)的算式而包含有上述的6個選擇深度值，即垂直排列的D3i,j 、D3i+2,j 、D3i+4,j 、D3i+1,j+1 、D3i+3,j+1 與D3i+5,j+1 ，水平排列的Di,3j 、Di,3j+2 、Di,3j+4 、Di+1,3j+1 、Di+1,3j+3 與Di+1,3j+5 。
因此，可再利用本發明應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法不需調整而直接得到這6個選擇的深度值。以下說明RGB次像素還原選擇景深值之方法的技術內容。
請參照圖7B、圖7C並配合圖7D與圖6B所示，其中，圖7D為本發明另一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法的流程示意圖。圖7D的還原方法是適用於四個像素為垂直排列或水平排列，且編碼與解碼系統採用YCbCr 4:2:0格式者。圖7D的還原（反轉換）方法是對應於上述圖7A的指定（轉換）方法。
如前述，經過圖5A與圖5B的視訊壓縮、解壓縮系統及色度空間的轉換與反轉換後，可得到原有之RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }，在此十二個次像素值中，其滿足上述公式(17)～(22)與公式(23)～(28)的算式而包含有上述的6個選擇深度值，即垂直排列的D3i,j 、D3i+2,j 、D3i+4,j 、D3i+1,j+1 、D3i+3,j+1 與D3i+5,j+1 ，水平排列的Di,3j 、Di,3j+2 、Di,3j+4 、Di+1,3j+1 、Di+1,3j+3 與Di+1,3j+5 。因此，本案技術的RGB次像素還原選擇景深值是將得到的RGB格式還原而得到這6個選擇的景深值。
如圖7D所示，應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法可包括步驟V01與步驟V02。其中，步驟V01為：分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素、第二像素的G次像素值、第三像素的G次像素值及第四像素的B次像素值；而步驟V02為：將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第一像素的B次像素值指定為第一像素深度值中，與第一像素的B次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
具體來說，若編碼與解碼系統採用YCbCr 4:2:0格式時，在本實施例的四像素中，如圖6B所示，本實施例的電路2a的取得單元21可由影像資料的每一群組中分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素、第二像素的G次像素值、第三像素的G次像素值及第四像素的B次像素值，而存入單元12可將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第一像素的B次像素值指定為第一像素深度值中，與第一像素的B次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
請再分別參照圖7B與圖7C所示，以說明上述的還原方法。具體來說，是在解包裝階段中，如圖7B的垂直排列中，是將接收端經色度空間反轉換所得到的12個RGB次畫素的次像素值還原而得到6個選擇的深度值，亦即： D3i,j ＝Ri,j , (29) D3i+2,j ＝ Bi,j , (30) D3i+4,j ＝ Gi+1,j , (31) D3i+1,j+1 ＝ Gi,j+1 , (32) D3i+3,j+1 ＝ Gi,j , (33) D3i+5,j+1 ＝Bi+1,j+1 . (34)
而如圖7C的水平排列中，也是接收端經色度空間反轉換所得到的12個RGB次畫素的次像素值還原而得到6個選擇的深度值，即： Di,3j ＝Ri,j , (35) Di,3j+2 ＝ Bi,j , (36) Di,3j+4 ＝ Gi,j+1 , (37) Di+1,3j+1 ＝ Gi+1,j , (38) Di+1,3j+3 ＝Gi,j , (39) Di+1,3j+5 ＝Bi+1,j+1 (40)
因此，可從接收端接收且經色度空間反轉換而得到的RGB格式中不做任何調整而直接還原上述的6個選擇的深度值，其他的6個景深值可以根據這6個選擇的景深值及相關轉換資訊以內插法而得到，藉此可以獲得較佳的轉換以恢復原始景深值，相較於先前技術所敘，將缺少的色度值以保留的鄰近色度值取代的作法來說，本實施例因為可以從接收到的RGB格式中直接恢復影像資料的多個深度值，因此可以改善在景深落差劇變區位置上的失真現象。
以下再說明編碼與解碼系統採用YCbCr 4:2:2格式者。於此，先說明垂直排列者。
請參照圖8A所示，其為本發明又一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法的流程示意圖。
每一群組的四個像素可分別為第一像素、第二像素、第三像素及第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列。於此，每組的四個像素共有十二個次像素。另外，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的第一像素深度值（深度值也可稱景深值）、第二像素深度值、第三像素深度值與第四像素深度值，亦即第一像素的幾何位置對應有第一像素深度值、第二像素的幾何位置對應有第二像素深度值、…以此類推。由於各像素具有垂直排列的次像素，因此，幾何位置分別對應於第一像素、第二像素、第三像素及第四像素的第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值也分別具有對應於R次像素、G次像素、B次像素位置的深度值。
圖8A的轉換方法可適用於四個像素為垂直排列者，且編碼與解碼系統採用YCbCr 4:2:2格式者。如圖8A所示，應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法可包括步驟W01與步驟W02。其中，步驟W01為：由第一像素深度值、第二像素深度值、第三像素深度與第四像素深度中分別取出兩個深度值。而步驟W02為：將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第二像素的G次像素的次像素值；將由第二像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第二像素的B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第二像素的R次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
在取得深度值的步驟W01中，是由第一像素深度值中取得對應於第一像素的R次像素與B次像素之幾何位置的深度值；由第二像素深度值中取得對應於第二像素的G次像素與B次像素之幾何位置的深度值；是由第三像素深度值中取得對應於第三像素的R次像素與G次像素之幾何位置的深度值；由第四像素深度值中取得對應於第四像素的R次像素之幾何位置的深度值與對應於第四像素的B次像素之幾何位置的深度值。另外，在指定為轉換後RGB格式的步驟W02中，是將由第一像素深度值中取得對應於第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得對應於第一像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得對應於第二像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的G次像素的次像素值；將由第二像素深度值中取得對應於第二像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的B次像素的次像素值；將由第三像素深度值中取得對應於第三像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得對應於第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得對應於第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的R次像素的次像素值；將由第四像素深度值中取得對應於第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
另外，請再參照圖3B所示，電路1a的取得單元11可由第一像素深度值、第二像素深度值、第三像素深度與第四像素深度中分別取出兩個深度值。存入單元12可將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的B次像素；將由第二像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第二像素的G次像素的次像素值；將由第二像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第二像素的B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第二像素的R次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
請參照圖8B所示，其為本發明又一實施例的一組四像素之RGB格式與其幾何位置對應之景深值的示意圖。於此，圖8B是顯示垂直排列的四個像素與四個像素深度值。
在景深圖框的一組四個像素中，每一像素的R、G、B次像素可分別如圖8B的垂直排列，即第一像素為{Ri,j , Gi,j , Bi,j }、第二像素為{Ri+1,j , Gi+1,j , Bi+1,j }、第三像素為{Ri,j+1 , Gi,j+1 , Bi,j+1 }、第四像素為{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }，而四個相鄰的第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的四組像素深度值：第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值。由於每一個像素有3個次像素，因此，幾何位置對應的像素深度值也分別具有3個深度值。於此，在垂直排列（如圖8B所示）中，其分別為：第一像素深度值：{D3i,j , D3i+1,j , D3i+2,j }、第二像素深度值：{D3i+3,j , D3i+4,j , D3i+5,j }、第三像素深度值：{D3i,j+1 , D3i+1,j+1 , D3i+2,j+1 }、第四像素深度值：{D3i+3,j+1 , D3i+4,j+1 , D3i+5,j+1 }，因此，其尺寸將變成3H×W；其中，i＝0,2, 4..., (H-2)，j＝0,2, 4..., (W-2)。
具體來說，若編碼與解碼系統採用YCbCr 4:2:2格式時，在本實施例的四像素中，如圖8B所示，取得單元11可由第一像素深度值中取得對應於第一像素的R次像素與B次像素之幾何位置的深度值；由第二像素深度值中取得對應於第二像素的G次像素與B次像素之幾何位置的深度值；由第三像素深度值中取得對應於第三像素的R次像素與G次像素之幾何位置的深度值；由第四像素深度值中取得對應於第四像素的R次像素與B次像素之幾何位置的深度值，亦即取得四像素深度值之垂直排列中的D3i,j 、D3i+2,j 、D3i+4,j 、D3i+5,j 、D3i,j+1 、D3i+1,j+1 、D3i+3,j+1 與D3i+5,j+1 等8個深度值。換言之，垂直排列中只有8個交錯位置的深度值被選擇參與包裝與解包裝的過程。
之後，存入單元12可將由第一像素深度值中取得對應於第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的R次像素；由第一像素深度值中取得對應於第一像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的B次像素；由第二像素深度值中取得對應於第二像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的G次像素的次像素值；由第二像素深度值中取得對應於第二像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的B次像素的次像素值；由第三像素深度值中取得對應於第三像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的R次像素、G次像素、B次像素的次像素值；由第三像素深度值中取得對應於第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的G次像素的次像素值；由第四像素深度值中取得對應於第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的R次像素的次像素值；由第四像素深度值中取得對應於第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。具體來說，是在包裝階段時，如圖8B的垂直排列中，將8個選擇的深度值指定為（存入）12個RGB次畫素的次像素中，即： Ri,j ＝D3i,j , (41) Gi,j ＝D3i+1,j+1 , (42) Bi,j ＝ D3i+2,j , (43) Ri+1,j ＝D3i+3,j+1 , (44) Gi+1,j ＝D3i+4,j , (45) Bi+1,j ＝ D3i+5,j , (46) Ri.j+1 ＝Gi,j+1 ＝Bi,j+1 ＝ D3i,j+1 , (47) Ri+1,j+1 ＝Gi+1,j+1 ＝Bi+1,j+1 ＝ D3i+5, j+1 . (48)
因此，可由選擇的8個深度值中得到指定（調整）後RGB格式的十二個次像素值。
請參照圖8B並配合圖5A與圖5B所示，由於上述公式(41)～(48)是選擇將第三像素與第四像素的RGB次像素值設定為相同的深度值，因此經過RGB與YcbCr的色度空間轉換之轉換矩陣（表一）時，將使二組的色度參數值（Cb、Cr）皆為128。因此，具有選擇深度值之四個RGB格式的像素可轉換而得到四個YCbCr格式的資料：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , Cbi+1,j , Cri+1,j }與{Yi+1,j+1 , 128, 128}。如圖5A所示，正常情況下，如果忽略編碼的誤差，這四組的YCbCr格式：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , Cbi+1,j , Cri+1,j }與{Yi+1,j+1 , 128, 128}經影像編碼系統後將得到編碼後的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }。在此編碼過程中，影像系統在編碼時有二種取樣模式：第一種是採用直接取樣（direct subsampling）模式，第二種是採用平均取樣（average subsampling）模式。若採用第一種的直接取樣時，則Cb’i,j ＝Cbi,j ，Cb’i+1,j ＝Cbi+1,j ，Cr’i,j ＝Cri,j ，Cr’i+1,j ＝Cri+1,j 。若採用第二種的平均取樣時，則Cb’i,j ＝Cbi,j /2＋64，Cb’i+1,j ＝Cbi+1,j /2+64，Cr’i,j ＝Cri,j /2+64，Cb’i+1,j ＝Cbi+1,j /2+64。
若接收端接收且在解壓縮的過程中可以直接取得這四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }時（圖5A），則經色度參數的調整後，將可回復而得到編碼後原來的四組YCbCr格式資料。在此過程中若編碼系統採用直接取樣模式時，則可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝Cb’i,j ，Cbi+1,j ＝Cb’i+1,j ，Cri,j ＝Cr’i,j ，Cri+1,j ＝Cr’i+1,j 而得到編碼前原來的四組YCbCr格式資料，即{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , Cbi+1,j , Cri+1,j }與{Yi+1,j+1 , 128, 128}；在此過程中若採用平均取樣模式時，則可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝2Cb’i,j -128，Cbi+1,j ＝2Cb’i+1,j -128，Cri,j ＝2Cr’i,j -128，Cbi+1,j ＝2Cb’i+1,j -128而得到編碼前原來的四組YCbCr格式資料。需注意的是，圖5A接收端的解碼系統應該知道編碼系統在編碼時是採用直接取樣或是平均取樣模式。得到編碼前原來的四組YCbCr格式資料後，再經YCbCr格式與RGB格式的色度空間反轉換，即經表二的反轉換矩陣計算後，可還原而得到原有的四組RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }。在此十二個次像素值中，其滿足上述公式(41)～(48)的算式而包含有上述的8個選擇深度值，即垂直排列的D3i,j 、D3i+2,j 、D3i+4,j 、D3i+5,j 、D3i,j+1 、D3i+1,j+1 、D3i+3,j+1 與D3i+5,j+1 。
另外，如圖5B所示，在正常情況下，如果忽略編碼的誤差，這四組YCbCr格式：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , Cbi+1,j , Cri+1,j }與{Yi+1,j+1 , 128, 128}經影像編碼系統後同樣可得到編碼後的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }。在此編碼過程中，影像編碼系統在編碼時一樣有二種取樣模式，第一種是採用直接取樣（direct subsampling）模式，第二種是採用平均取樣（average subsampling）模式。若採用第一種的直接取樣時，則Cb’i,j ＝Cbi,j ，Cb’i+1,j ＝Cbi+1,j 與Cr’i,j ＝Cri,j ，Cr’i+1,j ＝Cri+1,j 。若採用第二種的平均取樣時，則Cb’i,j ＝Cbi,j /2＋64，Cb’i+1,j ＝Cbi+1,j /2+64，Cr’i,j ＝Cri,j /2+64，且Cb’i+1,j ＝Cbi+1,j /2+64。再經色度空間的轉換（YCbCr轉換成RGB）後，可得到四組的R’G’B’格式的資料（圖5B）。
因此，接收端在解壓縮的過程中將無法直接取得上述的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }，只能取得轉換後的四組的R’G’B’格式的資料，故需先進行另一次的色度空間轉換，以將R’G’B’格式再轉換成YCb’Cr’格式，亦即得到{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }，之後，再經色度參數的調整後，才可回復而得到編碼後原來的四組YCbCr格式資料。在此過程中若編碼系統採用直接取樣模式時，則同樣可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝Cb’i,j ，Cbi+1,j ＝Cb’i+1,j ，Cri,j ＝Cr’i,j ，Cri+1,j ＝Cr’i+1,j 而得到編碼前原來的四組YCbCr格式資料：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}；在此過程中若採用平均取樣模式時，則可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝2Cb’i,j -128，Cbi+1,j ＝2Cb’i+1,j -128，Cri,j ＝2Cr’i,j -128，Cbi+1,j ＝2Cb’i+1,j -128而得到編碼前原來的四組YCbCr格式資料。需注意的是，圖5B接收端的解碼系統也應該知道編碼系統在編碼時是採用直接取樣或是平均取樣模式。得到編碼前原來的四組YCbCr格式資料後，再經YCbCr格式與RGB格式的色度空間反轉換，即經表二的反轉換矩陣計算後，可還原而得到原有的四組RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }。在此十二個次像素值中，其滿足上述公式(41)～(48)的算式而包含有上述的8個選擇深度值，即垂直排列的D3i,j 、D3i+2,j 、D3i+4,j 、D3i+5,j 、D3i,j+1 、D3i+1,j+1 、D3i+3,j+1 與D3i+5,j+1 。
因此，可再利用本發明應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法而直接得到這8個選擇的深度值。以下說明RGB次像素還原選擇景深值之方法的技術內容。
請參照圖8B並配合圖8C與圖6B所示，其中，圖8C為本發明又一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法的流程示意圖。圖8C的還原方法是適用於四個像素為垂直排列，且編碼與解碼系統採用YCbCr 4:2:2格式者。圖8C的還原（反轉換）方法是對應於上述圖8A的指定（轉換）方法。
如前述，經過圖5A與圖5B的視訊壓縮、解壓縮系統及色度空間的轉換與反轉換後，可得到原有之RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }，在此十二個次像素值中，其滿足上述公式(41)～(48)的算式而包含有上述的8個選擇深度值，即垂直排列的D3i,j 、D3i+2,j 、D3i+4,j 、D3i+5,j 、D3i,j+1 、D3i+1,j+1 、D3i+3,j+1 與D3i+5,j+1 。因此，本案技術的RGB次像素還原選擇景深值是將得到的RGB格式還原而得到8個選擇的景深值。
如圖8C所示，應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法可包括步驟W01與步驟W02。其中，步驟W01為：分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素值、第二像素的R次像素值、G次像素值與B次像素、第三像素的R次像素值與第四像素的B次像素值；而步驟W02為：將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第一像素的B次像素值指定為第一像素深度值中，與第一像素的B次像素值對應之幾何位置內；將第二像素的R次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第二像素的B次像素值指定為第二像素深度值中，與第二像素的B次像素值對應之幾何位置內；將第三像素的R次像素值指定為第三像素深度值中，與第三像素的R次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
具體來說，若編碼與解碼系統採用YCbCr 4:2:2格式時，在本實施例的四像素中，如圖6B所示，本實施例的電路2a的取得單元21可由影像資料的每一群組中分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素值、第二像素的R次像素值、G次像素值與B次像素、第三像素的R次像素值與第四像素的B次像素值，而存入單元12可將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第一像素的B次像素值指定為第一像素深度值中，與第一像素的B次像素值對應之幾何位置內；將第二像素的R次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第二像素的G次像素值指定為第二像素深度值中，與第二像素的G次像素值對應之幾何位置內；將第二像素的B次像素值指定為第二像素深度值中，與第二像素的B次像素值對應之幾何位置內；將第三像素的R次像素值指定為第三像素深度值中，與第三像素的R次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
請再參照圖8B所示，以說明上述的還原方法。具體來說，是在解包裝階段中，如圖8B的垂直排列中，是將接收端經色度空間反轉換所得到的12個RGB次畫素的次像素值還原而得到8個選擇的深度值，亦即： D3i,j ＝Ri,j , (49) D3i+2,j ＝ Bi,j , (50) D3i+4,j ＝ Gi+1,j , (51) D3i+5,j ＝Bi+1,j (52) D3i,j+1 ＝ Ri,j+1 , (53) D3i+1,j+1 ＝ Gi,j , (54) D3i+3,j+1 ＝ Ri+1,j , (55) D3i+5,j+1 ＝Bi+1,j+1 (56)
因此，可從接收端接收且經色度空間反轉換而得到的RGB格式中不做任何調整而直接還原上述的8個選擇的深度值，其他的4個景深值可以根據這8個選擇的景深值及相關轉換資訊以內插法而得到，藉此可以獲得較佳的轉換以恢復原始景深值，相較於先前技術所敘，將缺少的色度值以保留的鄰近色度值取代的作法來說，本實施例因為可以從接收到的RGB格式中直接恢復影像資料的多個深度值，因此可以改善在景深落差劇變區位置上的失真現象。
以下再說明編碼與解碼系統採用YCbCr 4:2:2格式中的水平排列者。
請參照圖9A所示，其為本發明又一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法的流程示意圖。
每一群組的四個像素可分別為第一像素、第二像素、第三像素及第四像素，第一像素分別與第二像素及第三像素相鄰排列，且第四像素分別與第二像素及第三像素相鄰排列。於此，每組的四個像素共有十二個次像素。另外，第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的第一像素深度值（深度值也可稱景深值）、第二像素深度值、第三像素深度值與第四像素深度值，亦即第一像素的幾何位置對應有第一像素深度值、第二像素的幾何位置對應有第二像素深度值、…以此類推。由於各像素具有水平排列的次像素，因此，幾何位置分別對應於第一像素、第二像素、第三像素及第四像素的第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值也分別具有對應於R次像素、G次像素、B次像素位置的3個深度值。
圖9A的轉換方法可適用於四個像素為水平排列，且編碼與解碼系統採用YCbCr 4:2:2格式者。如圖9A所示，應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法可包括步驟Y01與步驟Y02。其中，步驟Y01為：由第一像素深度值、第二像素深度值、第三像素深度與第四像素深度中分別取出兩個深度值。而步驟W02為：將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的G次像素；將由第二像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的B次像素的次像素值；將由第二像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的R次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第三像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的B次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
在取得深度值的步驟Y01中，是由第一像素深度值中取得對應於第一像素的R次像素與G次像素之幾何位置的深度值；由第二像素深度值中取得對應於第二像素的R次像素與B次像素之幾何位置的深度值；是由第三像素深度值中取得對應於第三像素的R次像素與G次像素之幾何位置的深度值；是由第四像素深度值中取得對應於第四像素的R次像素與B次像素之幾何位置的深度值。另外，在指定為轉換後RGB格式的步驟Y02中，是將由第一像素深度值中取得對應於第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的R次像素；由第一像素深度值中取得對應於第一像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的G次像素；由第二像素深度值中取得對應於第二像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的B次像素的次像素值；由第二像素深度值中取得對應於第二像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；由第三像素深度值中取得對應於第三像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的R次像素的次像素值；由第三像素深度值中取得對應於第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的G次像素的次像素值；由第四像素深度值中取得對應於第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的B次像素的次像素值；由第四像素深度值中取得對應於第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
另外，請再參照圖3B所示，電路1a的取得單元11是由第一像素深度值、第二像素深度值、第三像素深度與第四像素深度中分別取出兩個深度值。存入單元12可將由第一像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的R次像素；將由第一像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第一像素的G次像素；將由第二像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第一像素的B次像素的次像素值；將由第二像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的R次像素的次像素值；將由第三像素深度值中取得的兩個深度值中的其中另一指定為轉換後RGB格式的第三像素的G次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中之一指定為轉換後RGB格式的第三像素的B次像素的次像素值；將由第四像素深度值中取得的兩個深度值中的其中另一的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。
請參照圖9B所示，其為本發明又一實施例的一組四像素之RGB格式與其幾何位置對應之景深值的示意圖。於此，圖9B是顯示水平排列的四個像素與四個像素深度值。
在景深圖框的一組四個像素中，每一像素的R、G、B次像素可分別如圖9B的水平排列，即第一像素為{Ri,j , Gi,j , Bi,j }、第二像素為{Ri,j+1 , Gi,j+1 , Bi,j+1 }、第三像素為{Ri+1,j , Gi+1,j , Bi+1,j }、第四像素為{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }，而四個相鄰的第一像素、第二像素、第三像素及第四像素的幾何位置分別具有對應的四組像素深度值：第一像素深度值、第二像素深度值、第三像素深度值與第四像素深度值。由於每一個像素有3個次像素，因此，幾何位置對應的像素深度值也分別具有3個深度值。於此，在水平排列（如圖9B所示）中，其分別為：第一像素深度值：{Di,3j , Di,3j+1 , Di,3j+2 }、第二像素深度值：{Di,3j+3 , Di,3j+4 , Di,3j+5 }、第三像素深度值：{Di+1,3j , Di+1,3j+1 , Di+1,3j+2 }、第四像素深度值：{Di+1,3j+3 , Di+1,3j+4 , Di+1,3j+5 }，因此，其尺寸將變成H×3W；其中，i＝0,2, 4..., (H-2)，j＝0,2, 4..., (W-2)。
具體來說，若編碼與解碼系統採用YCbCr 4:2:2格式時，在本實施例的四像素中，如圖9B所示，取得單元11可由第一像素深度值中取得對應於第一像素的R次像素與G次像素之幾何位置的深度值；由第二像素深度值中取得對應於第二像素的R次像素與B次像素之幾何位置的深度值；是由第三像素深度值中取得對應於第三像素的R次像素與G次像素之幾何位置的深度值；由第四像素深度值中取得對應於第四像素的R次像素與B次像素之幾何位置的深度值，亦即取得四像素深度值之水平排列中的Di,3j 、Di,3j+1 、Di,3j+3 、Di,3j+5 、Di+1,3j 、Di+1,3j+1 、Di+1,3j+3 與Di+1,3j+5 等8個深度值。換言之，水平排列中只有8個交錯位置的深度值被選擇參與包裝與解包裝的過程。
之後，存入單元12可將由第一像素深度值中取得對應於第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的R次像素；由第一像素深度值中取得對應於第一像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的G次像素；由第二像素深度值中取得對應於第二像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第一像素的B次像素的次像素值；由第二像素深度值中取得對應於第二像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第二像素的R次像素、G次像素、B次像素的次像素值；由第三像素深度值中取得對應於第三像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的R次像素的次像素值；由第三像素深度值中取得對應於第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的G次像素的次像素值；由第四像素深度值中取得對應於第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的第三像素的B次像素的次像素值；由第四像素深度值中取得對應於第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的第四像素的R次像素、G次像素與B次像素的次像素值。具體來說，是在包裝階段時，如圖9B的水平排列中，是將8個選擇的深度值指定為（存入）12個RGB次畫素的次像素中，即： Ri,j ＝Di,3j , (57) Gi,j ＝Di,3j+1 , (58) Bi,j ＝ Di,3j+3 , (59) Ri+1,j ＝Di+1,3j , (60) Gi+1,j ＝Di+1,3j+1 , (61) Bi+1,j ＝ Di+1,3j+3 , (62) Ri.j+1 ＝Gi,j+1 ＝Bi,j+1 ＝ Di,3j+5 , (63) Ri+1,j+1 ＝Gi+1,j+1 ＝Bi+1,j+1 ＝ Di+1,3j+5 (64)
因此，可由選擇的8個深度值中得到指定（調整）後RGB格式的十二個次像素值。
請參照圖9B並配合圖5A與圖5B所示，由於上述公式(57)～(64)是選擇將第二像素與第四像素的RGB次像素值設定為相同的深度值，因此經過RGB與YcbCr的色度空間轉換之轉換矩陣（表一）時，將使二組的色度參數值（Cb、Cr）皆為128。因此，具有選擇深度值之四個RGB格式的像素可轉換而得到四個YCbCr格式的資料：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , Cbi+1,j , Cri+1,j }與{Yi+1,j+1 , 128, 128}。如圖5A所示，正常情況下，如果忽略編碼的誤差，這四組的YCbCr格式：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , Cbi+1,j , Cri+1,j }與{Yi+1,j+1 , 128, 128}經影像編碼系統後將得到編碼後的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }。在此編碼過程中，影像系統在編碼時有二種取樣模式：第一種是採用直接取樣（direct subsampling）模式，第二種是採用平均取樣（average subsampling）模式。若採用第一種的直接取樣時，則Cb’i,j ＝Cbi,j ，Cb’i+1,j ＝Cbi+1,j ，Cr’i,j ＝Cri,j ，Cr’i+1,j ＝Cri+1,j 。若採用第二種的平均取樣時，則Cb’i,j ＝Cbi,j /2＋64，Cb’i+1,j ＝Cbi+1,j /2+64，Cr’i,j ＝Cri,j /2+64，Cb’i+1,j ＝Cbi+1,j /2+64。
若接收端接收且在解壓縮的過程中可以直接取得這四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }時（圖5A），經色度參數的調整後，將可回復而得到編碼後原來的四組YCbCr格式資料。在此過程中若編碼系統採用直接取樣模式時，則可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝Cb’i,j ，Cbi+1,j ＝Cb’i+1,j ，Cri,j ＝Cr’i,j ，Cri+1,j ＝Cr’i+1,j 而得到編碼前原來的四組YCbCr格式資料：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , Cbi+1,j , Cri+1,j }與{Yi+1,j+1 , 128, 128}；在此過程中若採用平均取樣模式時，則可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝2Cb’i,j -128，Cbi+1,j ＝2Cb’i+1,j -128，Cri,j ＝2Cr’i,j -128，Cbi+1,j ＝2Cb’i+1,j -128而得到編碼前原來的四組YCbCr格式資料。需注意的是，圖5A接收端的解碼系統應該知道編碼系統在編碼時是採用直接取樣或是平均取樣模式。得到編碼前原來的四組YCbCr格式資料後，再經YCbCr格式與RGB格式的色度空間反轉換，即經表二的反轉換矩陣計算後，可還原而得到原有的四組RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }。在此十二個次像素值中，其滿足上述公式(57)～(64)的算式而包含有上述的8個選擇深度值，即水平排列的Di,3j 、Di,3j+1 、Di,3j+3 、Di,3j+5 、Di+1,3j 、Di+1,3j+1 、Di+1,3j+3 與Di+1,3j+5 。
另外，如圖5B所示，在正常情況下，如果忽略編碼的誤差，這四組YCbCr格式：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , Cbi+1,j , Cri+1,j }與{Yi+1,j+1 , 128, 128}經影像編碼系統後同樣可得到編碼後的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }。在此編碼過程中，影像編碼系統在編碼時一樣有二種取樣模式，第一種是採用直接取樣（direct subsampling）模式，第二種是採用平均取樣（average subsampling）模式。若採用第一種的直接取樣時，則Cb’i,j ＝Cbi,j ，Cb’i+1,j ＝Cbi+1,j ，Cr’i,j ＝Cri,j ，Cr’i+1,j ＝Cri+1,j 。若採用第二種的平均取樣時，則Cb’i,j ＝Cbi,j /2＋64，Cb’i+1,j ＝Cbi+1,j /2+64，Cr’i,j ＝Cri,j /2+64，Cb’i+1,j ＝Cbi+1,j /2+64。再經色度空間的轉換（YCbCr轉換成RGB）後，可得到四組的R’G’B’格式的資料（圖5B）。
因此，接收端在解壓縮的過程中將無法直接取得上述的四組資料：{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }，只能取得轉換後的四組的R’G’B’格式的資料，故需先進行另一次的色度空間轉換，以將R’G’B’格式再轉換成YCb’Cr’格式，亦即得到{Yi,j , Cb’i,j , Cr’i,j }、{Yi,j+1 , Cb’i,j , Cr’i,j }、{Yi+1,j , Cb’i,j , Cr’i,j }與{Yi+1,j+1 , Cb’i,j , Cr’i,j }，之後，再經色度參數的調整後，才可回復而得到編碼後原來的四組YCbCr格式資料。在此過程中若編碼系統採用直接取樣模式時，則同樣可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝Cb’i,j ，Cbi+1,j ＝Cb’i+1,j ，Cri,j ＝Cr’i,j ，Cri+1,j ＝Cr’i+1,j 而得到編碼前原來的四組YCbCr格式資料：{Yi,j , Cbi,j , Cri,j }、{Yi,j+1 , 128, 128}、{Yi+1,j , 128, 128}與{Yi+1,j+1 , 128, 128}；在此過程中若採用平均取樣模式時，則可在解包裝的過程中藉由色度參數調整且透過算式：Cbi,j ＝2Cb’i,j -128，Cbi+1,j ＝2Cb’i+1,j -128，Cri,j ＝2Cr’i,j -128與Cbi+1,j ＝2Cb’i+1,j -128而得到編碼前原來的四組YCbCr格式資料。需注意的是，圖5B接收端的解碼系統也應該知道編碼系統在編碼時是採用直接取樣或是平均取樣模式。得到編碼前原來的四組YCbCr格式資料後，再經YCbCr格式與RGB格式的色度空間反轉換，即經表二的反轉換矩陣計算後，可還原而得到原有的四組RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }。在此十二個次像素值中，其滿足上述公式(57)～(64)的算式而包含有上述的8個選擇深度值，即水平排列的Di,3j 、Di,3j+1 、Di,3j+3 、Di,3j+5 、Di+1,3j 、Di+1,3j+1 、Di+1,3j+3 與Di+1,3j+5 。
因此，可再利用本發明應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法而直接得到這8個選擇的深度值。以下說明RGB次像素還原選擇景深值之方法的技術內容。
請參照圖9B並配合圖9C與圖6B所示，其中，圖9C為本發明又一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法的流程示意圖。圖9C的還原方法是適用於四個像素為水平排列，且編碼與解碼系統採用YCbCr 4:2:2格式者。圖9C的還原（反轉換）方法是對應於上述圖9A的指定（轉換）方法。
如前述，經過圖5A與圖5B的視訊壓縮、解壓縮系統及色度空間的轉換與反轉換後，可得到原有之RGB格式的十二個次像素：{Ri,j , Gi,j , Bi,j }、{Ri+1,j , Gi+1,j , Bi+1,j }、{Ri,j+1 , Gi,j+1 , Bi,j+1 }與{Ri+1,j+1 , Gi+1,j+1 , Bi+1,j+1 }，在此十二個次像素值中，其滿足上述公式(57)～(64)的算式而包含有上述的8個選擇深度值，即水平排列的Di,3j 、Di,3j+1 、Di,3j+3 、Di,3j+5 、Di+1,3j 、Di+1,3j+1 、Di+1,3j+3 與Di+1,3j+5 。因此，本案技術的RGB次像素還原選擇景深值是將得到的RGB格式還原而得到8個選擇的景深值。
如圖9C所示，應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法可包括步驟Z01與步驟Z02。其中，步驟Z01為：分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素值、第二像素的B次像素值、第三像素的R次像素值、G次像素值與B次像素值與第四像素的B次像素值；而步驟Z02為：將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第一像素深度值中，與第一像素的G次像素值對應之幾何位置內；將第一像素的B次像素值指定為第二像素深度值中，與第二像素的R次像素值對應之幾何位置內；將第二像素的B次像素值指定為第二像素深度值中，與第二像素的B次像素值對應之幾何位置內；將第三像素的R次像素值指定為第三像素深度值中，與第三像素的R次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第三像素的B次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
具體來說，若編碼與解碼系統採用YCbCr 4:2:2格式時，在本實施例的四像素中，如圖6B所示，本實施例的電路2a的取得單元21可由影像資料的每一群組中分別取得RGB格式的該組四像素的第一像素的R次像素值、G次像素與B次像素值、第二像素的B次像素值、第三像素的R次像素值、G次像素值與B次像素值與第四像素的B次像素值，而存入單元12可將第一像素的R次像素值指定為第一像素深度值中，與第一像素的R次像素值對應之幾何位置內；將第一像素的G次像素值指定為第一像素深度值中，與第一像素的G次像素值對應之幾何位置內；將第一像素的B次像素值指定為第二像素深度值中，與第二像素的R次像素值對應之幾何位置內；將第二像素的B次像素值指定為第二像素深度值中，與第二像素的B次像素值對應之幾何位置內；將第三像素的R次像素值指定為第三像素深度值中，與第三像素的R次像素值對應之幾何位置內；將第三像素的G次像素值指定為第三像素深度值中，與第三像素的G次像素值對應之幾何位置內；將第三像素的B次像素值指定為第四像素深度值中，與第四像素的R次像素值對應之幾何位置內；將第四像素的B次像素值指定為第四像素深度值中，與第四像素的B次像素值對應之幾何位置內。
請再參照圖9B所示，以說明上述的還原方法。具體來說，是在解包裝階段中，如圖9B的水平排列中，是將接收端經色度空間反轉換所得到的12個RGB次畫素的次像素值還原而得到8個選擇的深度值，亦即： Di,3j ＝Ri,j , (65) Di,3j+1 ＝ Gi,j , (66) Di,3j+3 ＝ Bi,j , (67) Di,3j+5 ＝Bi,j+1 , (68) Di+1,3j ＝ Ri+1,j , (69) Di+1,3j+1 ＝Gi+1,j , (70) Di+1,3j+3 ＝ Bi+1,j , (71) Di+1,3j+5 ＝Bi+1,j+1 (72)
因此，可從接收端接收且經色度空間反轉換而得到的RGB格式中不做任何調整而直接還原上述的8個選擇的深度值，其他的4個景深值可以根據這8個選擇的景深值及相關轉換資訊以內插法而得到，藉此可以獲得較佳的轉換以恢復原始景深值，相較於先前技術所敘，將缺少的色度值以保留的鄰近色度值取代的作法來說，本實施例因為可以從接收到的RGB格式中直接恢復影像資料的多個深度值，因此可以改善在景深落差劇變區位置上的失真現象。
特別說明的是，先前技術的表一與表二的矩陣中參數只是舉例，在不同的視訊壓縮傳輸系統中，矩陣內的參數可能不同。例如下表三與表四所示，其為不同視訊壓縮傳縮系統的RGB格式與YCbCr格式的轉換矩陣與反轉換矩陣方程式，藉由下表三與表四的轉換與反轉換矩陣算式，使用者可依照上述的內容而得到對應的結果。表三：RGB轉換至YUV表四：YUV反轉換RGB
綜上所述，在本發明之應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素與RGB次像素還原選擇景深值的方法及電路中，仍然使用習知之視訊壓縮傳輸系統將RGB格式轉換成YCbCr格式的轉換與反轉換的過程，而且將本發明之選擇景深值指定為RGB次像素與RGB次像素還原景深值的方法及電路應用於習知之視訊壓縮傳輸系統的包裝及解包裝過程中，可以從接收到的RGB格式中不需做任何調整就可直接恢復多個選擇的深度值，相較於先前技術所敘，將缺少的色度值以保留的鄰近色度值取代的作法來說，本發明因為可以從接收到的RGB格式中直接恢復影像資料的多個深度值，因此可以改善在景深落差劇變區位置上的失真現象。
以上所述僅為舉例性，而非為限制性者。任何未脫離本發明之精神與範疇，而對其進行之等效修改或變更，均應包含於後附之申請專利範圍中。
1‧‧‧第一像素
1a、2a‧‧‧電路
11、21‧‧‧取得單元
12、22‧‧‧存入單元
2‧‧‧第二像素
3‧‧‧第三像素
4‧‧‧第四像素
B、B’、B1～B4、Bi,j、Bi+1,j、Bi,j+1、Bi+1,j+1‧‧‧藍次像素值
Ci,j、Ci+1,j、Ci,j+1、Ci+1,j+1‧‧‧像素
D3i,j、D3i+1,j、D3i+2,j、D3i+3,j、D3i+4,j、D3i+5,j、D3i,j+1、D3i+1,j+1、D3i+2,j+1、D3i+3,j+1、D3i+4,j+1、D3i+5,j+1、Di,3j、Di,3j+1、Di,3j+2、Di,3j+3、Di,3j+4、Di,3j+5、Di+1,3j、Di+1,3j+1、Di+1,3j+2、Di+1,3j+3、Di+1,3j+4、Di+1,3j+5‧‧‧深度值
G、G’、G1～G4、Gi,j、Gi+1,j、Gi,j+1、Gi+1,j+1‧‧‧綠次像素值
H‧‧‧高度
R、R’、R1～R4、Ri,j、Ri+1,j、Ri,j+1、Ri+1,j+1‧‧‧紅次像素值
S01～S02、T01～T02、U01～U02、V01～V02、W01～W02、X01～X02、Y01～Y02、Z01～Z02‧‧‧步驟
Cb、Cr、Cb’、Cr’、U1～U4、V1～V4‧‧‧色度值
W‧‧‧高度
Y、Y1～Y4‧‧‧亮度
圖1A與圖1B分別顯示RGB與YUV（CbCr）格式中，次像素的景深垂直與景深水平像素之間的轉換示意圖。 圖2A與圖2B分別顯示景深垂直與景深水平包裝傳送YUV444格式、YUC422格式及YUV420格式的示意圖。 圖3A為本發明一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法的流程示意圖。 圖3B為本發明一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的電路之功能方塊示意圖。 圖4A為本發明一實施例之景深圖框中的一組四像素的示意圖。 圖4B與圖4C分別本發明為一實施例的一組四像素之RGB格式與其幾何位置對應之景深值的示意圖。 圖5A與圖5B分別為本發明不同實施例之視頻編碼系統中，RGB格式與YCbCr格式之色彩空間的轉換與反轉換示意圖。 圖6A為本發明一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法的流程示意圖。 圖6B為本發明一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原景深值的電路之功能方塊示意圖。 圖7A為本發明另一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法的流程示意圖。 圖7B與圖7C分別為本發明另一實施例的一組四像素之RGB格式與其幾何位置對應之景深值的示意圖。 圖7D為本發明另一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法的流程示意圖。 圖8A為本發明又一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法的流程示意圖。 圖8B為本發明又一實施例的一組四像素之RGB格式與其幾何位置對應之景深值的示意圖。 圖8C為本發明又一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法的流程示意圖。 圖9A為本發明又一實施例之一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法的流程示意圖。 圖9B為本發明又一實施例的一組四像素之RGB格式與其幾何位置對應之景深值的示意圖。 圖9C為本發明又一實施例之一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法的流程示意圖。

Claims (30)

  1. 一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的該景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，該第一像素分別與該第二像素及該第三像素相鄰排列，且該第四像素分別與該第二像素及該第三像素相鄰排列，該第一像素、該第二像素、該第三像素及該第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括： 由該第一像素深度值與該第四像素深度中分別取出兩個深度值；由該第二像素深度值與該第三像素深度中分別取出一個深度值，其中由該第一像素深度值、該第二像素深度值、該第三像素深度值與該第四像素深度值中取得的六個深度值是位於交錯位置；以及 將由該第一像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的R次像素；將由該第一像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第一像素的B次像素；將由該第二像素深度值中取得的該深度值指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得的該深度值指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的G次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中另一的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  2. 如申請專利範圍第1項所述的方法，其中在取得深度值的步驟中，是由該第一像素深度值中取得對應於該第一像素的R次像素與B次像素之幾何位置的深度值；由該第二像素深度值與該第三像素深度值中分別取得對應於該第二像素及該第三像素的G次像素之幾何位置的深度值；由該第四像素深度值中取得對應於該第四像素的R次像素與B次像素之幾何位置的深度值。
  3. 如申請專利範圍第2項所述的方法，其中在指定為轉換後RGB格式的步驟中，是將由該第一像素深度值中取得對應於該第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的R次像素；將由該第一像素深度值中取得對應於該第一像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的B次像素；將由該第二像素深度值中取得對應於該第二像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得對應於該第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；將由該第四像素深度值中取得對應於該第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的G次像素的次像素值；將由該第四像素深度值中取得對應於該第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  4. 一種電路，應用於執行如申請專利範圍第1項至第3項中任一項所述的方法，該電路包括： 一取得單元，其由該第一像素深度值與該第四像素深度中分別取出兩個深度值；由該第二像素深度值與該第三像素深度中分別取出一個深度值，其中由該第一像素深度值、該第二像素深度值、該第三像素深度值與該第四像素深度值中取得的六個深度值是位於交錯位置；以及 一存入單元，其將由該第一像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的R次像素；將由該第一像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第一像素的B次像素；將由該第二像素深度值中取得的該深度值指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得的該深度值指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的G次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中另一的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  5. 如申請專利範圍第4項所述的電路，其中該取得單元由該第一像素深度值中取得對應於該第一像素的R次像素與B次像素之幾何位置的深度值；由該第二像素深度值與該第三像素深度值中分別取得對應於該第二像素及該第三像素的G次像素之幾何位置的深度值；由該第四像素深度值中取得對應於該第四像素的R次像素與B次像素之幾何位置的深度值。
  6. 如申請專利範圍第5項所述的電路，其中該存入單元由該第一像素深度值中取得對應於該第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的R次像素；由該第一像素深度值中取得對應於該第一像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的B次像素；由該第二像素深度值中取得對應於該第二像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；由該第三像素深度值中取得對應於該第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；由該第四像素深度值中取得對應於該第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的G次像素的次像素值；由該第四像素深度值中取得對應於該第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  7. 一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的該景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，該第一像素分別與該第二像素及該第三像素相鄰排列，且該第四像素分別與該第二像素及該第三像素相鄰排列，該第一像素、該第二像素、該第三像素及該第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括： 分別取得RGB格式的該組四像素的該第一像素的R次像素值、G次像素與B次像素、該第二像素的G次像素值、該第三像素的G次像素值及該第四像素的B次像素值；以及 將該第一像素的R次像素值指定為該第一像素深度值中，與該第一像素的R次像素值對應之幾何位置內；將該第一像素的G次像素值指定為該第四像素深度值中，與該第四像素的R次像素值對應之幾何位置內；將該第一像素的B次像素值指定為該第一像素深度值中，與該第一像素的B次像素值對應之幾何位置內；將該第二像素的G次像素值指定為該第二像素深度值中，與該第二像素的G次像素值對應之幾何位置內；將該第三像素的G次像素值指定為該第三像素深度值中，與該第三像素的G次像素值對應之幾何位置內；將該第四像素的B次像素值指定為該第四像素深度值中，與該第四像素的B次像素值對應之幾何位置內。
  8. 一種電路，應用於執行如申請專利範圍第7項所述之方法，包括： 一取得單元，其分別取得RGB格式的該組四像素的該第一像素的R次像素值、G次像素與B次像素、該第二像素的G次像素值、該第三像素的G次像素值及該第四像素的B次像素值；以及 一存入單元，其將該第一像素的R次像素值指定為該第一像素深度值中，與該第一像素的R次像素值對應之幾何位置內；將該第一像素的G次像素值指定為該第四像素深度值中，與該第四像素的R次像素值對應之幾何位置內；將該第一像素的B次像素值指定為該第一像素深度值中，與該第一像素的B次像素值對應之幾何位置內；將該第二像素的G次像素值指定為該第二像素深度值中，與該第二像素的G次像素值對應之幾何位置內；將該第三像素的G次像素值指定為該第三像素深度值中，與該第三像素的G次像素值對應之幾何位置內；將該第四像素的B次像素值指定為該第四像素深度值中，與該第四像素的B次像素值對應之幾何位置內。
  9. 一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的該景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，該第一像素分別與該第二像素及該第三像素相鄰排列，且該第四像素分別與該第二像素及該第三像素相鄰排列，該第一像素、該第二像素、該第三像素及該第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括： 由該第一像素深度值、該第二像素深度值、該第三像素深度與該第四像素深度中分別取出兩個深度值；以及 將由該第一像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的R次像素；將由該第一像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第一像素的B次像素；將由該第二像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第二像素的G次像素的次像素值；將由該第二像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第二像素的B次像素的次像素值；將由該第三像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第一像素的G次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第二像素的R次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中另一的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  10. 如申請專利範圍第9項所述的方法，其中在取得深度值的步驟中，是由該第一像素深度值中取得對應於該第一像素的R次像素與B次像素之幾何位置的深度值；由該第二像素深度值中取得對應於該第二像素的G次像素與B次像素之幾何位置的深度值；是由該第三像素深度值中取得對應於該第三像素的R次像素與G次像素之幾何位置的深度值；由該第四像素深度值中取得對應於該第四像素的R次像素之幾何位置的深度值與對應於該第四像素的B次像素之幾何位置的深度值。
  11. 如申請專利範圍第10項所述的方法，其中在指定為轉換後RGB格式的步驟中，是將由該第一像素深度值中取得對應於該第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的R次像素；將由該第一像素深度值中取得對應於該第一像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的B次像素；將由該第二像素深度值中取得對應於該第二像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的G次像素的次像素值；將由該第二像素深度值中取得對應於該第二像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的B次像素的次像素值；將由該第三像素深度值中取得對應於該第三像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得對應於該第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的G次像素的次像素值；將由該第四像素深度值中取得對應於該第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的R次像素的次像素值；將由該第四像素深度值中取得對應於該第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  12. 一種電路，應用於執行如申請專利範圍第9項至第11項中任一項所述的方法，該電路包括： 一取得單元，其由該第一像素深度值、該第二像素深度值、該第三像素深度與該第四像素深度中分別取出兩個深度值；以及 一存入單元，其將由該第一像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的R次像素；將由該第一像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第一像素的B次像素；將由該第二像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第二像素的G次像素的次像素值；將由該第二像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第二像素的B次像素的次像素值；將由該第三像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第一像素的G次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第二像素的R次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中另一的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  13. 如申請專利範圍第12項所述的電路，其中該取得單元由該第一像素深度值中取得對應於該第一像素的R次像素與B次像素之幾何位置的深度值；由該第二像素深度值中取得對應於該第二像素的G次像素與B次像素之幾何位置的深度值；由該第三像素深度值中取得對應於該第三像素的R次像素與G次像素之幾何位置的深度值；由該第四像素深度值中取得對應於該第四像素的R次像素與B次像素之幾何位置的深度值。
  14. 如申請專利範圍第13項所述的電路，其中該存入單元由該第一像素深度值中取得對應於該第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的R次像素；由該第一像素深度值中取得對應於該第一像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的B次像素；由該第二像素深度值中取得對應於該第二像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的G次像素的次像素值；由該第二像素深度值中取得對應於該第二像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的B次像素的次像素值；由該第三像素深度值中取得對應於該第三像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；由該第三像素深度值中取得對應於該第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的G次像素的次像素值；由該第四像素深度值中取得對應於該第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的R次像素的次像素值；由該第四像素深度值中取得對應於該第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  15. 一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的該景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，該第一像素分別與該第二像素及該第三像素相鄰排列，且該第四像素分別與該第二像素及該第三像素相鄰排列，該第一像素、該第二像素、該第三像素及該第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括： 分別取得RGB格式的該組四像素的該第一像素的R次像素值、G次像素與B次像素值、該第二像素的R次像素值、G次像素值與B次像素、該第三像素的R次像素值與該第四像素的B次像素值；以及 將該第一像素的R次像素值指定為該第一像素深度值中，與該第一像素的R次像素值對應之幾何位置內；將該第一像素的G次像素值指定為該第三像素深度值中，與該第三像素的G次像素值對應之幾何位置內；將該第一像素的B次像素值指定為該第一像素深度值中，與該第一像素的B次像素值對應之幾何位置內；將該第二像素的R次像素值指定為該第四像素深度值中，與該第四像素的R次像素值對應之幾何位置內；將該第二像素的G次像素值指定為該第二像素深度值中，與該第二像素的G次像素值對應之幾何位置內；將該第二像素的B次像素值指定為該第二像素深度值中，與該第二像素的B次像素值對應之幾何位置內；將該第三像素的R次像素值指定為該第三像素深度值中，與該第三像素的R次像素值對應之幾何位置內；將該第四像素的B次像素值指定為該第四像素深度值中，與該第四像素的B次像素值對應之幾何位置內。
  16. 一種電路，應用於執行如申請專利範圍第15項所述之方法，包括： 一取得單元，其分別取得RGB格式的該組四像素的該第一像素的R次像素值、G次像素與B次像素值、該第二像素的R次像素值、G次像素值與B次像素、該第三像素的R次像素值與該第四像素的B次像素值；以及 一存入單元，其將該第一像素的R次像素值指定為該第一像素深度值中，與該第一像素的R次像素值對應之幾何位置內；將該第一像素的G次像素值指定為該第三像素深度值中，與該第三像素的G次像素值對應之幾何位置內；將該第一像素的B次像素值指定為該第一像素深度值中，與該第一像素的B次像素值對應之幾何位置內；將該第二像素的R次像素值指定為該第四像素深度值中，與該第四像素的R次像素值對應之幾何位置內；將該第二像素的G次像素值指定為該第二像素深度值中，與該第二像素的G次像素值對應之幾何位置內；將該第二像素的B次像素值指定為該第二像素深度值中，與該第二像素的B次像素值對應之幾何位置內；將該第三像素的R次像素值指定為該第三像素深度值中，與該第三像素的R次像素值對應之幾何位置內；將該第四像素的B次像素值指定為該第四像素深度值中，與該第四像素的B次像素值對應之幾何位置內。
  17. 一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的該景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，該第一像素分別與該第二像素及該第三像素相鄰排列，且該第四像素分別與該第二像素及該第三像素相鄰排列，該第一像素、該第二像素、該第三像素及該第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括： 由該第一像素深度值、該第二像素深度值、該第三像素深度與該第四像素深度中分別取出兩個深度值；以及 將由該第一像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的R次像素；將由該第一像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第一像素的G次像素；將由該第二像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的B次像素的次像素值；將由該第二像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第三像素的R次像素的次像素值；將由該第三像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第三像素的G次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第三像素的B次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中另一的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  18. 如申請專利範圍第17項所述的方法，其中在取得深度值的步驟中，是由該第一像素深度值中取得對應於該第一像素的R次像素與G次像素之幾何位置的深度值；由該第二像素深度值中取得對應於該第二像素的R次像素與B次像素之幾何位置的深度值；是由該第三像素深度值中取得對應於該第三像素的R次像素與G次像素之幾何位置的深度值；是由該第四像素深度值中取得對應於該第四像素的R次像素與B次像素之幾何位置的深度值。
  19. 如申請專利範圍第18項所述的方法，其中在指定為轉換後RGB格式的步驟中，是將由該第一像素深度值中取得對應於該第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的R次像素；由該第一像素深度值中取得對應於該第一像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的G次像素；由該第二像素深度值中取得對應於該第二像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的B次像素的次像素值；由該第二像素深度值中取得對應於該第二像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；由該第三像素深度值中取得對應於該第三像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的R次像素的次像素值；由該第三像素深度值中取得對應於該第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的G次像素的次像素值；由該第四像素深度值中取得對應於該第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的B次像素的次像素值；由該第四像素深度值中取得對應於該第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  20. 一種電路，應用於執行如申請專利範圍第17項至第19項中任一項所述的方法，該電路包括： 一取得單元，其由該第一像素深度值、該第二像素深度值、該第三像素深度與該第四像素深度中分別取出兩個深度值；以及 一存入單元，其將由該第一像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的R次像素；將由該第一像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第一像素的G次像素；將由該第二像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第一像素的B次像素的次像素值；將由該第二像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第三像素的R次像素的次像素值；將由該第三像素深度值中取得的該兩個深度值中的其中另一指定為轉換後RGB格式的該第三像素的G次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中之一指定為轉換後RGB格式的該第三像素的B次像素的次像素值；將由該第四像素深度值中取得的該兩個深度值中的其中另一的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  21. 如申請專利範圍第20項所述的電路，其中該取得單元是由該第一像素深度值中取得對應於該第一像素的R次像素與G次像素之幾何位置的深度值；由該第二像素深度值中取得對應於該第二像素的R次像素與B次像素之幾何位置的深度值；是由該第三像素深度值中取得對應於該第三像素的R次像素與G次像素之幾何位置的深度值；由該第四像素深度值中取得對應於該第四像素的R次像素與B次像素之幾何位置的深度值。
  22. 如申請專利範圍第21項所述的電路，其中該存入單元由該第一像素深度值中取得對應於該第一像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的R次像素；由該第一像素深度值中取得對應於該第一像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的G次像素；由該第二像素深度值中取得對應於該第二像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第一像素的B次像素的次像素值；由該第二像素深度值中取得對應於該第二像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；由該第三像素深度值中取得對應於該第三像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的R次像素的次像素值；由該第三像素深度值中取得對應於該第三像素的G次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的G次像素的次像素值；由該第四像素深度值中取得對應於該第四像素的R次像素之幾何位置的深度值指定為轉換後RGB格式的該第三像素的B次像素的次像素值；由該第四像素深度值中取得對應於該第四像素的B次像素之幾何位置的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素與B次像素的次像素值。
  23. 一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的該景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，該第一像素分別與該第二像素及該第三像素相鄰排列，且該第四像素分別與該第二像素及該第三像素相鄰排列，該第一像素、該第二像素、該第三像素及該第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括： 分別取得RGB格式的該組四像素的該第一像素的R次像素值、G次像素與B次像素值、該第二像素的B次像素值、該第三像素的R次像素值、G次像素值與B次像素值與該第四像素的B次像素值；以及 將該第一像素的R次像素值指定為該第一像素深度值中，與該第一像素的R次像素值對應之幾何位置內；將該第一像素的G次像素值指定為該第一像素深度值中，與該第一像素的G次像素值對應之幾何位置內；將該第一像素的B次像素值指定為該第二像素深度值中，與該第二像素的R次像素值對應之幾何位置內；將該第二像素的B次像素值指定為該第二像素深度值中，與該第二像素的B次像素值對應之幾何位置內；將該第三像素的R次像素值指定為該第三像素深度值中，與該第三像素的R次像素值對應之幾何位置內；將該第三像素的G次像素值指定為該第三像素深度值中，與該第三像素的G次像素值對應之幾何位置內；將該第三像素的B次像素值指定為該第四像素深度值中，與該第四像素的R次像素值對應之幾何位置內；將該第四像素的B次像素值指定為該第四像素深度值中，與該第四像素的B次像素值對應之幾何位置內。
  24. 一種電路，應用於執行如申請專利範圍第23項所述之方法，包括： 一取得單元，其分別取得RGB格式的該組四像素的該第一像素的R次像素值、G次像素與B次像素值、該第二像素的B次像素值、該第三像素的R次像素值、G次像素值與B次像素值與該第四像素的B次像素值；以及 一存入單元，其將該第一像素的R次像素值指定為該第一像素深度值中，與該第一像素的R次像素值對應之幾何位置內；將該第一像素的G次像素值指定為該第一像素深度值中，與該第一像素的G次像素值對應之幾何位置內；將該第一像素的B次像素值指定為該第二像素深度值中，與該第二像素的R次像素值對應之幾何位置內；將該第二像素的B次像素值指定為該第二像素深度值中，與該第二像素的B次像素值對應之幾何位置內；將該第三像素的R次像素值指定為該第三像素深度值中，與該第三像素的R次像素值對應之幾何位置內；將該第三像素的G次像素值指定為該第三像素深度值中，與該第三像素的G次像素值對應之幾何位置內；將該第三像素的B次像素值指定為該第四像素深度值中，與該第四像素的R次像素值對應之幾何位置內；將該第四像素的B次像素值指定為該第四像素深度值中，與該第四像素的B次像素值對應之幾何位置內。
  25. 一種應用於彩色景深圖框包裝及解包裝之選擇景深值指定為RGB次像素的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的該景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，該第一像素分別與該第二像素及該第三像素相鄰排列，且該第四像素分別與該第二像素及該第三像素相鄰排列，該第一像素、該第二像素、該第三像素及該第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括： 由該第一像素深度值、該第二像素深度值、該第三像素深度值與該第四像素深度值中分別取出一個深度值，其中由該第一像素深度值與該第三像素深度值取得的兩個深度值是位於交錯位置；由該第二像素深度值與該第四像素深度值取得的兩個深度值是位於交錯位置；以及 將由該第一像素深度值中取得的深度值指定為轉換後RGB格式的該第一像素的R次像素、G次像素、B次像素的次像素值；將由該第二像素深度值中取得的深度值指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得的深度值指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；將由該第四像素深度值中取得的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素、B次像素的次像素值。
  26. 如申請專利範圍第25項所述的方法，其中在取得深度值的步驟中，是分別取得該第一像素深度值中對應於該第一像素的R次像素之幾何位置的深度值、該第二像素深度值中對應於該第二像素的G次像素之幾何位置的深度值、該第三像素深度值中對應於該第三像素的G次像素之幾何位置的深度值與該第四像素深度值中對應於該第四像素的B次像素之幾何位置的深度值。
  27. 一種電路，應用於執行如申請專利範圍第25項至第26項中任一項所述的方法，該電路包括： 一取得單元，其由該第一像素深度值、該第二像素深度值、該第三像素深度值與該第四像素深度值中分別取出一個深度值，其中由該第一像素深度值與該第三像素深度值取得的兩個深度值是位於交錯位置；由該第二像素深度值與該第四像素深度值取得的兩個深度值是位於交錯位置；以及 一存入單元，其將由該第一像素深度值中取得的深度值指定為轉換後RGB格式的該第一像素的R次像素、G次像素、B次像素的次像素值；將由該第二像素深度值中取得的深度值指定為轉換後RGB格式的該第二像素的R次像素、G次像素、B次像素的次像素值；將由該第三像素深度值中取得的深度值指定為轉換後RGB格式的該第三像素的R次像素、G次像素、B次像素的次像素值；將由該第四像素深度值中取得的深度值指定為轉換後RGB格式的該第四像素的R次像素、G次像素、B次像素的次像素值。
  28. 如申請專利範圍第27項所述的電路，其中該取得單元是分別取得該第一像素深度值中對應於該第一像素的R次像素之幾何位置的深度值、該第二像素深度值中對應於該第二像素的G次像素之幾何位置的深度值、該第三像素深度值中對應於該第三像素的G次像素之幾何位置的深度值與該第四像素深度值中對應於該第四像素的B次像素之幾何位置的深度值。
  29. 一種應用於彩色景深圖框包裝及解包裝之RGB次像素還原選擇景深值的方法，其中RGB格式依序包括有R次像素、G次像素與B次像素，RGB格式的該景深圖框包含一組四像素，該組四像素的R次像素、G次像素、B次像素分別為垂直排列或水平排列，該組四像素分別為一第一像素、一第二像素、一第三像素及一第四像素，該第一像素分別與該第二像素及該第三像素相鄰排列，且該第四像素分別與該第二像素及該第三像素相鄰排列，該第一像素、該第二像素、該第三像素及該第四像素的幾何位置分別具有對應的一第一像素深度值、一第二像素深度值、一第三像素深度值與一第四像素深度值，該方法包括： 分別取得RGB格式的該組四像素的該第一像素的R次像素值、該第二像素的G次像素值、該第三像素的G次像素值及該第四像素的B次像素值；以及 將該第一像素的R次像素值指定為該第一像素深度值中，與該第一像素的R次像素值對應之幾何位置內；將該第二像素的G次像素值指定為該第二像素深度值中，與該第二像素的G次像素值對應之幾何位置內；將該第三像素的G次像素值指定為該第三像素深度值中，與該第三像素的G次像素值對應之幾何位置內；將該第四像素的B次像素值指定為該第四像素深度值中，與該第四像素的B次像素值對應之幾何位置內。
  30. 一種電路，應用於執行如申請專利範圍第29項所述之方法，該電路包括： 一取得單元，其分別取得RGB格式的該組四像素的該第一像素的R次像素值、該第二像素的G次像素值、該第三像素的G次像素值及該第四像素的B次像素值；以及 一存入單元，其將該第一像素的R次像素值指定為該第一像素深度值中，與該第一像素的R次像素值對應之幾何位置內；將該第二像素的G次像素值指定為該第二像素深度值中，與該第二像素的G次像素值對應之幾何位置內；將該第三像素的G次像素值指定為該第三像素深度值中，與該第三像素的G次像素值對應之幾何位置的次像素內；將該第四像素的B次像素值指定為該第四像素深度值中，與該第四像素的B次像素值對應之幾何位置的次像素內。
TW107112600A 2018-04-12 2018-04-12 應用於彩色景深圖框包裝及解包裝之選擇景深值指定為rgb次像素與rgb次像素還原選擇景深值的方法及電路 TWI673684B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW107112600A TWI673684B (zh) 2018-04-12 2018-04-12 應用於彩色景深圖框包裝及解包裝之選擇景深值指定為rgb次像素與rgb次像素還原選擇景深值的方法及電路
CN201910165624.1A CN110381318A (zh) 2018-04-12 2019-03-06 应用于彩色景深图框包装及解包装的方法及电路
US16/380,767 US10869058B2 (en) 2018-04-12 2019-04-10 Method and circuit of assigning selected depth values to RGB subpixels and recovering selected depth values from RGB subpixels for colored depth frame packing and depacking

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW107112600A TWI673684B (zh) 2018-04-12 2018-04-12 應用於彩色景深圖框包裝及解包裝之選擇景深值指定為rgb次像素與rgb次像素還原選擇景深值的方法及電路

Publications (2)

Publication Number Publication Date
TWI673684B TWI673684B (zh) 2019-10-01
TW201944355A true TW201944355A (zh) 2019-11-16

Family

ID=68162288

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107112600A TWI673684B (zh) 2018-04-12 2018-04-12 應用於彩色景深圖框包裝及解包裝之選擇景深值指定為rgb次像素與rgb次像素還原選擇景深值的方法及電路

Country Status (3)

Country Link
US (1) US10869058B2 (zh)
CN (1) CN110381318A (zh)
TW (1) TWI673684B (zh)

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW527518B (en) * 2000-07-14 2003-04-11 Massachusetts Inst Technology Method and system for high resolution, ultra fast, 3-D imaging
US6788307B2 (en) * 2002-04-09 2004-09-07 Evans & Sutherland Computer Corporation System and method for improved pixel rendering performance
US7002627B1 (en) * 2002-06-19 2006-02-21 Neomagic Corp. Single-step conversion from RGB Bayer pattern to YUV 4:2:0 format
US7298379B2 (en) * 2005-02-10 2007-11-20 Samsung Electronics Co., Ltd. Luminance preserving color conversion from YUV to RGB
EP2222087A1 (en) * 2009-02-19 2010-08-25 Thomson Licensing Bit depth upscaling in RGB colour space for reducing propagation of errors due to transformation to YUV colour space
US20130050415A1 (en) * 2011-08-30 2013-02-28 Himax Technologies Limited System and Method of Handling Data Frames for Stereoscopic Display
JP6028965B2 (ja) * 2012-07-04 2016-11-24 国立研究開発法人情報通信研究機構 奥行マップの再標本化装置およびその方法、プログラム、並びに奥行マップの再標本化システム
ITTO20130503A1 (it) * 2013-06-18 2014-12-19 Sisvel Technology Srl Metodo e dispositivo per la generazione, memorizzazione, trasmissione, ricezione e riproduzione di mappe di profondita¿ sfruttando le componenti di colore di un¿immagine facente parte di un flusso video tridimensionale
TWI603290B (zh) * 2013-10-02 2017-10-21 國立成功大學 重調原始景深圖框的尺寸爲尺寸重調景深圖框的方法、裝置及系統
TWI503788B (zh) * 2013-10-02 2015-10-11 Jar Ferr Yang 還原尺寸重調景深圖框爲原始景深圖框的方法、裝置及系統
TWI629892B (zh) * 2016-05-09 2018-07-11 國立成功大學 景深包裝及解包裝之ｒｇｂ格式與ｙｕｖ格式的轉換與反轉換的方法及電路

Also Published As

Publication number Publication date
US20190320202A1 (en) 2019-10-17
TWI673684B (zh) 2019-10-01
US10869058B2 (en) 2020-12-15
CN110381318A (zh) 2019-10-25

Similar Documents

Publication Publication Date Title
TWI629892B (zh) 景深包裝及解包裝之ｒｇｂ格式與ｙｕｖ格式的轉換與反轉換的方法及電路
US7471843B2 (en) System for improving an image displayed on a display
US11403987B2 (en) System and method for a multi-primary wide gamut color system
US11651718B2 (en) System and method for a multi-primary wide gamut color system
CN101170707B (zh) 图像格式的转换和恢复方法及装置
US11488510B2 (en) System and method for a multi-primary wide gamut color system
TW200926797A (en) Imaging device and imaging element
US20100165078A1 (en) Image compression using checkerboard mosaic for luminance and chrominance color space images
US20240205471A1 (en) Method for implementing coding and decoding of yuv444 image on basis of h.265
TWI673684B (zh) 應用於彩色景深圖框包裝及解包裝之選擇景深值指定為rgb次像素與rgb次像素還原選擇景深值的方法及電路
CN111654705B (zh) 基于色彩空间转换的马赛克图像压缩方法
CN107948652A (zh) 一种进行图像转换的方法和设备
TWI633791B (zh) 景深圖框包裝及解包裝之rgb格式的調整與重建方法及電路
US11315467B1 (en) System and method for a multi-primary wide gamut color system
CN113591878B (zh) 动态hdr图像特征提取方法
US7257251B2 (en) Chrominance smoothing
CN110490945B (zh) 一种图像色彩的调整方法
JP4997167B2 (ja) 画像分割処理用の画像信号処理装置、方法及びプログラム
KR100726067B1 (ko) 이미지 포멧 변환 방법
CN105323568A (zh) 一种数码相机中色彩滤镜阵列的彩色重建方法
US20220343822A1 (en) System and method for a multi-primary wide gamut color system
US20240339063A1 (en) System and method for a multi-primary wide gamut color system
CN115063325A (zh) 一种视频信号处理方法、装置、计算机设备和存储介质
Kwak et al. 53‐2: Wide‐Color‐Gamut and High‐Dynamic‐Range Color‐Image Encoding Scheme based on CIECAM02
JPS63304769A (ja) カラ−画像のデ−タ圧縮方式