TWI602145B - 包裝圖框之解包裝方法、裝置及系統 - Google Patents

包裝圖框之解包裝方法、裝置及系統 Download PDF

Info

Publication number
TWI602145B
TWI602145B TW102135719A TW102135719A TWI602145B TW I602145 B TWI602145 B TW I602145B TW 102135719 A TW102135719 A TW 102135719A TW 102135719 A TW102135719 A TW 102135719A TW I602145 B TWI602145 B TW I602145B
Authority
TW
Taiwan
Prior art keywords
frame
depth
field
field frame
color
Prior art date
Application number
TW102135719A
Other languages
English (en)
Other versions
TW201514914A (zh
Inventor
楊家輝
王泓民
曾喜駿
廖恪應
Original Assignee
國立成功大學
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 國立成功大學 filed Critical 國立成功大學
Priority to TW102135719A priority Critical patent/TWI602145B/zh
Priority to KR1020140130341A priority patent/KR101679122B1/ko
Priority to CN201410519743.XA priority patent/CN104519289B/zh
Priority to JP2014203552A priority patent/JP5993423B2/ja
Priority to US14/505,153 priority patent/US9774844B2/en
Priority to EP14187435.4A priority patent/EP2858359A1/en
Publication of TW201514914A publication Critical patent/TW201514914A/zh
Application granted granted Critical
Publication of TWI602145B publication Critical patent/TWI602145B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/324—Colour aspects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/003—Aspects relating to the "2D+depth" image format

Description

包裝圖框之解包裝方法、裝置及系統
本發明係關於一種包裝圖框(packed frame)之解包裝方法、裝置及系統。
由於科技的進步，現今電子產品的發展，莫不以提升產品的性能及品質為優先考量。其中，有關顯示裝置的設置，除了提供使用者更清晰、更舒適的顯示畫面之外，各家廠商不斷推出多種三維(three-dimension,3D)的顯示裝置，其可提供多視角的3D影像，以提供使用者另一種擬實境的視覺感受。
以現階段而言，一種3D影像生成系統係透過由原始的2D影像資料，即彩色圖框(color frame)，產生與該彩色圖框對應的一景深圖框(depth frame)，並透過現有的傳輸設備將彩色圖框與景深圖框傳送至使用者的3D顯示裝置。當3D顯示裝置接收到彩色圖框與景深圖框之後可透過一景深影像繪圖法(Depth-Image-based Rendering,DIBR)得到可供任何裸眼3D顯示裝置使用之二個以上的多視角影像，或是眼鏡式3D顯示裝置之一左眼影像及一右眼影像。
為了降低資料的傳輸量，以提高影像傳輸效率，一般會將彩色圖框與景深圖框先進行包裝(packing)而得到一包裝圖框之後，再透過現有的傳輸設備將包裝圖框傳輸至使用者的3D顯示裝置。當3D顯示裝置接收到包裝圖框後可進行解包裝(unpacking)程序，以還原及產生可供任何裸眼3D顯示裝置使用之二個以上的多視角影像，或是眼鏡式3D顯示裝置之一左眼影像及一右眼影像。
本發明之目的為提供一種有別於習知技術的包裝圖框之解包裝方法、裝置及系統。
本發明之另一目的為提出之包裝圖框可於一2D顯示螢幕中顯示，並包含一彩色圖框，且彩色圖框的中心顯示於顯示螢幕的中央區域。經由人眼實際觀看證明，看到的彩色圖框(即2D影像)相當的自然，不會產生不舒服的感覺。
為達上述目的，依據本發明之一種包裝圖框之解包裝方法，包裝圖框可顯示於一顯示螢幕，並包含一彩色圖框及一尺寸重調景深圖框，彩色圖框與尺寸重調景深圖框對應，彩色圖框的中心顯示於顯示螢幕的中央區域，解包裝方法包括：由包裝圖框分離出彩色圖框及尺寸重調景深圖框；以及還原尺寸重調景深圖框，以得到一原始景深圖框。
為達上述目的，依據本發明之一種包裝圖框之解包裝裝置，包裝圖框可顯示於一顯示螢幕，並包含一彩色圖框及一尺寸重調景深圖框，彩色圖框與尺寸重調景深圖框對應，彩色圖框的中心係顯示於顯示螢幕的中央區域，解包裝裝置包括一分離處理單元以及一還原處理單元。分離處理單元係分離包裝圖框，以得到彩色圖框及尺寸重調景深圖框。還原處理單元係還原尺寸重調景深圖框，以得到一原始景深圖框。
為達上述目的，依據本發明之一種包裝圖框之解包裝系統，包裝圖框可顯示於一顯示螢幕，並包含一彩色圖框及一尺寸重調景深圖框，彩色圖框與尺寸重調景深圖框對應，彩色圖框的中心係顯示於顯示螢幕的中央區域，解包裝系統包括一記憶單元以及一處理單元。記憶單元儲存包裝圖框。處理單元分離包裝圖框，以得到彩色圖框及尺寸重調景深圖框，並還原尺寸重調景深圖框而得到一原始景深圖框。
承上所述，因本發明之包裝圖框之解包裝方法、裝置及系統中，包裝圖框包含一彩色圖框及一尺寸重調景深圖框，彩色圖框與尺寸重調景深圖框對應。另外，係由包裝圖框分離出彩色圖框及尺寸重調景深圖框，以及還原尺寸重調景深圖框，以得到一原始景深圖框。藉此，使得本發明的包裝圖框之解包裝方法、裝置及系統有別於習知技術。另外，本發明提出之包裝圖框可於一顯示螢幕中顯示，而且彩色圖框的中心係顯示於 顯示螢幕的中央區域，較佳係彩色圖框的中心點與顯示螢幕的中心點為重疊，更佳係完全重疊。經由人眼實際觀看證明，看到的彩色圖框(即2D影像)相當的自然，不會產生不舒服的感覺。
1‧‧‧包裝圖框之解包裝裝置
11‧‧‧分離處理單元
12‧‧‧還原處理單元
13‧‧‧轉動處理單元
14‧‧‧組合處理單元
2‧‧‧包裝圖框之解包裝系統
21‧‧‧記憶單元
22‧‧‧處理單元
CA‧‧‧中央區域
D1‧‧‧列方向
D2‧‧‧行方向
O‧‧‧中心點
S01~S02‧‧‧步驟
圖1A為本發明較佳實施例之一種包裝圖框之解包裝方法的流程示意圖。
圖1B為本發明較佳實施例之一種包裝圖框之解包裝裝置的功能方塊示意圖。
圖2至圖4B為第一實施例的包裝圖框之解包裝的處理過程示意圖。
圖5A係將第一實施例之包裝圖框顯示於2D顯示裝置時，彩色圖框與顯示螢幕之相對示意圖。
圖5B係本發明實施例中顯示螢幕之中央區域之示意圖。
圖6至圖8B為第二實施例的包裝圖框之解包裝的處理過程示意圖。
圖9係將第二實施例之包裝圖框顯示於2D顯示裝置時，彩色圖框與顯示螢幕之相對示意圖。
圖10至圖12B為第三實施例的包裝圖框之解包裝的處理過程示意圖。
圖13係將第三實施例之包裝圖框顯示於2D顯示裝置時，彩色圖框與顯示螢幕之相對示意圖。
圖14為本發明較佳實施例之一種包裝圖框之解包裝系統的功能方塊示意圖。
以下將參照相關圖式，說明依本發明較佳實施例之包裝圖框之解包裝方法、裝置及系統，其中相同的元件將以相同的參照符號加以說明。
請參照圖1A及圖1B所示，其中，圖1A為本發明較佳實施例之一種包裝圖框之解包裝方法的流程示意圖，而圖1B為本發明較佳實施例之一種包裝圖框之解包裝裝置1(以下簡稱裝置1)的功能方塊示意圖。
如圖1A所示，本實施例之包裝圖框之解包裝方法包括步驟S01及步驟S02。另外，如圖1B所示，裝置1包括一分離處理單元11以及一還原處理單元12。再者，裝置1更可包括一轉動處理單元13及一組合處理單元14。於此，分離處理單元11、還原處理單元12、轉動處理單元13及組合處理單元14可以軟體程式來實現其功能，並藉由一處理器來執行；或者，也可應用硬體或韌體的方式來實現上述分離處理單元11、還原處理單元12、轉動處理單元13及組合處理單元14的功能，本發明並不限制。
請配合參照圖2至圖4B所示，以說明包裝圖框的解包裝方法及裝置1的詳細內容。其中，圖2至圖4B為第一實施例的包裝圖框之解包裝的處理過程示意圖。於此，圖2為一包裝圖框之示意圖，圖3A為一尺寸重調景深圖框(resized depth frame)的兩部分之示意圖，圖3B為尺寸重調景深圖框之示意圖，圖3C為一中間景深圖框之示意圖，圖3D為一原始景深圖框(original depth frame)之示意圖，圖4A為一彩色圖框之示意圖，而圖4B為一原始彩色圖框(original color frame)之示意圖。另外，圖示中顯示一列方向D1及一行方向D2，列方向D1為顯示影像的水平方向，而行方向D2為顯示影像的垂直方向。此外，特別注意的一點是，雖然圖2、圖4A及圖4B顯示為黑白的影像，但實際上，圖2、圖4A及圖4B於彩色的2D顯示裝置上係顯示為彩色的影像。
在本實施例中，圖2之包裝圖框的尺寸例如但不限於為1920×1080，此與目前高畫質2D顯示裝置的影像解析度相同，故可直接顯示於2D顯示螢幕。包裝圖框包含一彩色圖框及一尺寸重調景深圖框。本實施例之彩色圖框為彩色的2D影像，並位於包裝圖框的中間部分，而尺寸重調景深圖框則位於彩色圖框的上、下兩側。
如圖1A所示，包裝圖框之解包裝方法的步驟S01為：由包裝圖框分離出彩色圖框及尺寸重調景深圖框(由圖2分離出圖3A之尺寸重調景深圖框的兩部分及圖4A之彩色圖框)。本實施例係藉由分離處理單元11由包裝圖框之上側及下側分離出尺寸重調景深圖框之二部分(水平分割)，以得到圖3A之尺寸重調景深圖框的二部分及圖4A之彩色圖框。於此，係沿列方向D1分離出尺寸重調景深圖框之二部分。
在得到尺寸重調景深圖框的二部分之後，再藉由組合處理單元14將其組合成尺寸重調景深圖框(即由圖3A至圖3B)。不過，在組合成尺寸重調景深圖框之前，需先藉由轉動處理單元13分別翻轉(flipping)尺寸重調景深圖框之二部分後，再藉由組合處理單元14將尺寸重調景深圖框之二部分組合成尺寸重調景深圖框。於此，翻轉係表示將尺寸重調景深圖框之二部分分別轉動180度，使上下顛倒。本實施例之尺寸重調景深圖框的二部分的尺寸係相同，均為1920×135，故組合成的尺寸重調景深圖框的尺寸為1920×270，而彩色圖框的尺寸為1920×810(810=1080-135-135)。
接著，進行步驟S02：還原尺寸重調景深圖框，以得到一原始景深圖框(由圖3B還原成圖3D)。不過，在得到圖3D之原始景深圖框之前，本實施例需先將圖3B之尺寸重調景深圖框進行次畫素重排列(subpixel rearrangement)，以得到圖3C之一中間景深圖框，並重調中間景深圖框的尺寸，才能得到圖3D之原始景深圖框。其中，次畫素重排列係取得尺寸重調景深圖框之一畫素的一第一次畫素值及一第二次畫素值，並將第一次畫素值儲存於中間景深圖框之一第一畫素的所有次畫素內，且將第二次畫素值儲存於中間景深圖框之一第二畫素的所有次畫素內。換言之，以一個畫素具有三個次畫素為例，次畫素重排列係將尺寸重調景深圖框之第一畫素的第一次畫素值儲存於中間景深圖框之第一畫素的所有次畫素內，並將尺寸重調景深圖框之第一畫素的第二次畫素值儲存於中間景深圖框之第二畫素的所有次畫素內，再將尺寸重調景深圖框之第一畫素的第三次畫素值儲存於中間景深圖框之第三畫素的所有次畫素內，以此類推。
因此，本實施例係將圖3B之尺寸重調景深圖框的尺寸沿行方向D2重調為原來的三倍，使得圖3C之中間景深圖框的尺寸沿行方向D2為尺寸重調景深圖框的三倍(資料量亦為三倍)。故圖3C之中間景深圖框的解析度為1920×810(810=270×3)。
接著，再透過還原處理單元12將中間景深圖框還原成原始景深圖框(由圖3C還原成圖3D)。其中，將中間景深圖框還原成原始景深圖框，係透過將中間景深圖框的尺寸按比例增加，或透過將中間景深圖框 的解析度增加來達成。在本實施例中，係沿行方向D2按比例放大圖3C之中間景深圖框而得到圖3D之原始景深圖框。於此，原始景深圖框的尺寸係沿行方向D2按比例增加為中間景深圖框的三分之四倍。因此，如圖3D所示，原始景深圖框的尺寸為1920×1080(1080=810×4/3)。其中，原始景深圖框係為灰階圖框(灰階圖框之各畫素之次畫素值均相等)。
另外，在本實施例中，解包裝方法更可包括：還原彩色圖框，以得到一原始彩色圖框(由圖4A至圖4B)。於此，係透過還原處理單元12還原彩色圖框，以將彩色圖框的尺寸(1920×810)沿行方向D2按比例放大為原來的三分之四倍，而得到原始彩色圖框，故圖4B之原始彩色圖框的尺寸為1920×1080(1080=810×4/3)。本實施例之原始彩色圖框具有一預設圖框尺寸，而且包裝圖框的尺寸與預設圖框尺寸相同，都是1920×1080。另外，原始景深圖框與原始彩色圖框係對應。於此，「對應」係表示，除了兩者的尺寸或解析度相同之外，原始景深圖框係根據原始彩色圖框之所有物件的景深值而得到的，而且，將原始彩色圖框與原始景深圖框透過景深影像繪圖法(DIBR)便可合成可供一3D顯示裝置播放的3D影像。由於原始景深圖框與原始彩色圖框對應，故原始景深圖框亦與彩色圖框對應。
另外，請參照圖5A所示，其係將第一實施例之包裝圖框顯示於2D顯示裝置時，彩色圖框與顯示螢幕之相對示意圖。
如圖5A所示，第一實施例之包裝圖框可直接於2D顯示螢幕中顯示，且彩色圖框的中心點(即彩色圖框對角線的交點)與顯示螢幕的中心點(即顯示螢幕對角線的交點)為重疊(均為中心點O)。因此，經由人眼實際觀看證明，看到的彩色圖框(即2D影像)相當的自然，也不會產生不舒服的感覺。當然，為達到人眼觀看2D顯示螢幕不會有不舒服感覺，除上述中心點重疊之外，經試驗結果得知，當彩色圖框的中心顯示於顯示螢幕的中央區域時，即可提供一定的效果。在此，所稱之中央區域係包括顯示螢幕之中心點及其向外延伸一定畫素數量所成之範圍。中央區域可以例如為圓形或四邊形。舉例來說，請參考圖5B所示，其為本發明實施例中將包裝圖框顯示於2D顯示裝置時，顯示螢幕之中央區域的示意圖。在圖5B中，顯示螢幕的中央區域CA為包括其螢幕中心點O並向外延伸而達 螢幕尺寸的例如三分之一的範圍，當彩色圖框的中心落於此區域時，對於觀看者不會產生不舒適的感覺。
另外，請再參照圖1A及圖1B，並配合圖6至圖8B所示，以說明包裝圖框之解包裝方法及裝置的第二實施例之詳細內容。其中，圖6至圖8B為第二實施例的包裝圖框之解包裝的處理過程示意圖。於此，圖6為包裝圖框之示意圖，圖7A為尺寸重調景深圖框的兩部分之示意圖，圖7B為尺寸重調景深圖框之示意圖，圖7C為中間景深圖框之示意圖，圖7D為原始景深圖框之示意圖，圖8A為彩色圖框之示意圖，而圖8B為原始彩色圖框之示意圖。
首先，於步驟S01中，仍由包裝圖框分離出彩色圖框及尺寸重調景深圖框(由圖6分離出圖7A及圖8A)。本實施例仍係藉由分離處理單元11分離，並由包裝圖框之左側及右側分離出尺寸重調景深圖框之二部分(垂直分割)，以得到圖7A之尺寸重調景深圖框的二部分及圖8A之彩色圖框。於此，係沿行方向D2分離出尺寸重調景深圖框之二部分，且尺寸重調景深圖框之二部分的尺寸係相同，均為240×1080。
在得到尺寸重調景深圖框的二部分之後，再藉由組合處理單元14將其組合成尺寸重調景深圖框(即由圖7A至圖7B)。不過，在組合成尺寸重調景深圖框之前，需先左、右互換尺寸重調景深圖框之二部分的位置後，再藉由組合處理單元14將尺寸重調景深圖框之二部分組合成尺寸重調景深圖框。由於尺寸重調景深圖框之二部分的尺寸係相同，均為240×1080，故尺寸重調景深圖框的尺寸為480×1080，而彩色圖框的尺寸為1440×1080(1440=1920-240-240)。
接著，進行步驟S02：還原尺寸重調景深圖框，以得到一原始景深圖框(由圖7B還原至圖7D)。不過，在還原尺寸重調景深圖框之前，本實施例仍需先將圖7B之尺寸重調景深圖框進行次畫素重排列，以得到圖7C之中間景深圖框，並重調中間景深圖框的尺寸之後，再得到圖7D之原始景深圖框。其中，次畫素重排列係取得尺寸重調景深圖框之一畫素的一第一次畫素值及一第二次畫素值，並將第一次畫素值儲存於中間景深圖框之一第一畫素的所有次畫素內，且將第二次畫素值儲存於中間景深圖框之 一第二畫素的所有次畫素內。換言之，以一個畫素具有三個次畫素為例，次畫素重排列係將尺寸重調景深圖框之第一畫素的第一次畫素值儲存於中間景深圖框之第一畫素的所有次畫素內，並將尺寸重調景深圖框之第一畫素的第二次畫素值儲存於中間景深圖框之第二畫素的所有次畫素內，再將尺寸重調景深圖框之第一畫素的第三次畫素值儲存於中間景深圖框之第三畫素的所有次畫素內，以此類推。
在本實施例中，次畫素重排列係將圖7B之尺寸重調景深圖框的尺寸沿列方向D1(水平方向)變為原來的三倍，使得圖7C之中間景深圖框的尺寸沿列方向D1為尺寸重調景深圖框的三倍(資料量亦為三倍)。故圖7C之中間景深圖框的解析度為1440×1080(1440=480×3)。
接著，再透過還原處理單元12將中間景深圖框還原成原始景深圖框(由圖7C還原至圖7D)。在本實施例中，係沿列方向D1按比例放大圖7C之中間景深圖框而得到圖7D之原始景深圖框。於此，原始景深圖框的尺寸係沿列方向D1增加比例。其中，係沿列方向D1增加為原來的三分之四倍。因此，如圖7D所示，原始景深圖框的尺寸為1920×1080(1920=1440×4/3)。
另外，解包裝方法更可包括：還原彩色圖框，以得到一原始彩色圖框(由圖8A還原至圖8B)。於此，係透過還原處理單元12還原彩色圖框，以將彩色圖框的尺寸(1440×1080)沿列方向D1按比例放大為原來的三分之四倍，以得到原始彩色圖框，故圖8B之原始彩色圖框的尺寸為1920×1080。本實施例之原始彩色圖框之預設圖框尺寸與包裝圖框的尺寸亦相同，仍為1920×1080。另外，本實施例之原始景深圖框亦與彩色圖框對應。
此外，若彩色圖框的尺寸沿一方向為原始彩色圖框的a倍，而中間景深圖框的尺寸沿同一方向為原始景深圖框的b倍時，則只要滿足a+b/3=1即可，並不特別限制a及b之值。前述第一實施例中，中間景深圖框沿行方向D2的還原比例a與彩色圖框沿行方向D2的還原比例b相同，即a=b=3/4，而第二實施例中，中間景深圖框沿列方向D1的還原比例a與彩色圖框列方向D1的還原比例b亦相同，也是a=b=3/4。
另外，請參照圖9所示，其係將第二實施例之包裝圖框顯示 於2D顯示裝置時，彩色圖框與顯示螢幕之相對示意圖。
如圖9所示，第二實施例之包裝圖框可於2D顯示螢幕中顯示，且彩色圖框的中心點(即彩色圖框對角線的交點)與顯示螢幕的中心點(即顯示螢幕對角線的交點)為重疊(均為中心點O)。因此，經由人眼實際觀看證明，看到的彩色圖框(即2D影像)相當的自然，也不會產生不舒服的感覺。當然，如前述實施例，為達相同的效果，亦可以使彩色圖框的中心被顯示於顯示螢幕的中央區域即可，非以中心點重疊為限。
另外，請再參照圖1A及圖1B，並配合圖10至圖12B所示，以說明包裝圖框之解包裝方法及裝置的第三實施例之詳細內容。其中，圖10至圖12B為第三實施例的包裝圖框之解包裝的處理過程示意圖。於此，圖10為包裝圖框之示意圖，圖11A為尺寸重調景深圖框的兩部分之示意圖，圖11B為尺寸重調景深圖框之示意圖，圖11C為中間景深圖框之示意圖，圖11D為原始景深圖框之示意圖，圖12A為彩色圖框之示意圖，而圖12B為原始彩色圖框之示意圖。
第三實施例之處理程序與第二實施例大致相同，第三實施例一樣藉由分離處理單元11由包裝圖框之左側及右側分離出尺寸重調景深圖框之二部分(一樣是垂直分割)，以得到圖11A之尺寸重調景深圖框的二部分及圖12A之彩色圖框。但是，與第二實施例不同的是，圖11A之尺寸重調景深圖框的二部分之尺寸均為120×1080。另外，在藉由組合處理單元14將其組合成尺寸重調景深圖框之前，需先藉由轉動處理單元13分別旋轉(rotating)尺寸重調景深圖框之二部分後，再藉由組合處理單元14將尺寸重調景深圖框之二部分組合成尺寸重調景深圖框。於此，旋轉係表示將尺寸重調景深圖框之二部分分別逆時針轉動90度。由於本實施例之尺寸重調景深圖框之二部分的尺寸係相同，均為120×1080，故尺寸重調景深圖框的尺寸為1080×240，而彩色圖框的尺寸為1680×1080(1680=1920-120-120)。
另外，再將圖11B之尺寸重調景深圖框進行次畫素重排列之後，可得到圖11C之中間景深圖框，並重調中間景深圖框的尺寸，得到圖11D之原始景深圖框。在本實施例中，次畫素重排列係將圖11B之尺寸 重調景深圖框的尺寸沿行方向D2變為原來的三倍(列方向D1的尺寸不變)，使得圖11C之中間景深圖框的尺寸沿行方向D2為尺寸重調景深圖框的三倍。故圖11C之中間景深圖框的解析度為1080×720(720=240×3)。
此外，再透過還原處理單元12將中間景深圖框還原成原始景深圖框(由圖11C至圖11D)。其中，係分別沿列方向D1及行方向D2按比例放大圖11C之中間景深圖框而得到圖11D之原始景深圖框。於此，係沿行方向D2增加為原來的二分之三倍，並沿列方向D1增加為原來的九分之十六倍。因此，如圖11D所示，原始景深圖框的尺寸為1920×1080(1920=1080×16/9，1080=720×3/2)。再一提的是，在其它的實施例中，上述之放大比例可以為其它不同比例，或者也可只沿列方向D1放大比例，或沿行方向D2放大比例，並不特別限制。
另外，將圖12A之彩色圖框還原，以得到圖12B之原始彩色圖框。於此，係將彩色圖框的尺寸(1680×1080)沿列方向D1放大為原來的七分之八倍，以得到原始彩色圖框，故圖12B之原始彩色圖框的尺寸為1920×1080。本實施例之原始彩色圖框之預設圖框尺寸仍與包裝圖框相同，都是1920×1080。
另外，請參照圖13所示，其係將第三實施例之包裝圖框顯示於2D顯示裝置時，彩色圖框與顯示螢幕之相對示意圖。
如圖13所示，第三實施例之包裝圖框可於2D顯示螢幕中顯示，且彩色圖框的中心點(即彩色圖框對角線的交點)與顯示螢幕的中心點(即顯示螢幕對角線的交點)為重疊(均為中心點O)。因此，經由人眼實際觀看證明，看到的彩色圖框(即2D影像)相當的自然，也不會產生不舒服的感覺。當然，如前述實施例，為達相同的效果，亦可以使彩色圖框的中心被顯示於顯示螢幕的中央區域即可，非以中心點重疊為限。
另外，再一提的是，於上述第一實施例、第二實施例及第三實施例中，由於包裝圖框的尺寸與原始彩色圖框的預設圖框尺寸相同，都是1920×1080，故若將第一實施例、第二實施例及第三實施例之包裝圖框應用於傳輸時，不會造成傳輸頻寬上負擔，也不會因解壓縮運算量過大而造成使用者的3D顯示裝置無法負荷。
接著，請參照圖14所示，其為本發明較佳實施例之一種包裝圖框之解包裝系統2(以下簡稱系統2)的功能方塊示意圖。其中，包裝圖框可顯示於一2D顯示螢幕，並包含一彩色圖框及一尺寸重調景深圖框，彩色圖框與尺寸重調景深圖框對應，彩色圖框的中心係顯示於顯示螢幕的中央區域。
系統2包括一記憶單元21以及一處理單元22，記憶單元21與處理單元22電性連接。記憶單元21係儲存包裝圖框。當然，記憶單元21也可儲存原始彩色圖框、原始景深圖框、彩色圖框、尺寸重調景深圖框及其二部分、中間景深圖框。其中，記憶單元21可為一非暫態電腦可讀取記錄媒體(non-transitory computer readable storage medium)，並例如可為一記憶體、一記憶卡、一光碟片、一錄影帶、一電腦磁帶，或其任意組合，以儲存資訊。其中，記憶體可包含唯讀記憶體(ROM)、隨機存取記憶體(RAM)、快閃(Flash)記憶體、或可程式化邏輯閘陣列(Field-Programmable Gate Array,FPGA)，或其它形式的記憶體，並不限定。
處理單元22可包含系統2之核心控制組件，例如可包含至少一中央處理器及一記憶體，或包含其它控制硬體、軟體或韌體。其中，處理單元22可分離包裝圖框，以得到彩色圖框及尺寸重調景深圖框，並還原尺寸重調景深圖框而得到一原始景深圖框。在一實施例中，處理單元22係由包裝圖框之上側及下側分離出尺寸重調景深圖框之二部分，並分別翻轉尺寸重調景深圖框之二部分後，組合尺寸重調景深圖框之二部分，以得到尺寸重調景深圖框。另外，在另一實施例中，處理單元22係由包裝圖框之左側及右側分離出尺寸重調景深圖框之二部分，並分別旋轉尺寸重調景深圖框之二部分後，組合尺寸重調景深圖框之二部分，以得到尺寸重調景深圖框。另外，處理單元22更將尺寸重調景深圖框進行次畫素重排列，以得到一中間景深圖框。其中，處理單元22係取得尺寸重調景深圖框之一畫素的一第一次畫素值及一第二次畫素值，並將第一次畫素值儲存於中間景深圖框之一第一畫素的所有次畫素內，且將第二次畫素值儲存於中間景深圖框之一第二畫素的所有次畫素內。另外，處理單元22更將中間景深圖框還原成原始景深圖框。此外，處理單元22更還原彩色圖框，以得到一原始 彩色圖框。
此外，於系統2中，原始景深圖框、中間景深圖框、尺寸重調景深圖框、彩色圖框、原始彩色圖框及包裝圖框的其它技術特徵已於上述中詳述，不再贅述。
綜上所述，因本發明之包裝圖框之解包裝方法、裝置及系統中，包裝圖框包含一彩色圖框及一尺寸重調景深圖框，彩色圖框與尺寸重調景深圖框對應。另外，係由包裝圖框分離出彩色圖框及尺寸重調景深圖框，以及還原尺寸重調景深圖框，以得到一原始景深圖框。藉此，使得本發明的包裝圖框之解包裝方法、裝置及系統有別於習知技術。另外，本發明提出之包裝圖框可於一顯示螢幕中顯示，而且彩色圖框的中心係顯示於顯示螢幕的中央區域，較佳係彩色圖框的中心點與顯示螢幕的中心點為重疊，更佳係完全重疊。經由人眼實際觀看證明，看到的彩色圖框(即2D影像)相當的自然，不會產生不舒服的感覺。
以上所述僅為舉例性，而非為限制性者。任何未脫離本發明之精神與範疇，而對其進行之等效修改或變更，均應包含於後附之申請專利範圍中。
S01~S02‧‧‧步驟

Claims (9)

  1. 一種包裝圖框之解包裝方法，該包裝圖框可顯示於一顯示螢幕，並包含一彩色圖框及一尺寸重調景深圖框，該彩色圖框與該尺寸重調景深圖框對應，該彩色圖框的中心係顯示於該顯示螢幕的中央區域，該解包裝方法包括：由該包裝圖框分離出該彩色圖框及該尺寸重調景深圖框；以及還原該尺寸重調景深圖框，以得到一原始景深圖框；其中，係取得該尺寸重調景深圖框之一畫素的一第一次畫素值及一第二次畫素值，並將該第一次畫素值儲存於一中間景深圖框之一第一畫素的所有次畫素內，且將該第二次畫素值儲存於該中間景深圖框之一第二畫素的所有次畫素內，以得到該中間景深圖框，並重調該中間景深圖框的尺寸，以得到該原始景深圖框。
  2. 如申請專利範圍第1項所述之解包裝方法，其中該彩色圖框的中心點與該顯示螢幕的中心點係重疊。
  3. 如申請專利範圍第1項所述之解包裝方法，更包括：還原該彩色圖框，以得到一原始彩色圖框。
  4. 一種包裝圖框之解包裝裝置，該包裝圖框可顯示於一顯示螢幕，並包含一彩色圖框及一尺寸重調景深圖框，該彩色圖框與該尺寸重調景深圖框對應，該彩色圖框的中心係顯示於該顯示螢幕的中央區域，該解包裝裝置包括：一分離處理單元，係分離該包裝圖框，以得到該彩色圖框及該尺寸重調景深圖框；以及一還原處理單元，係還原該尺寸重調景深圖框，以得到一原始景深圖框；其中，該還原處理單元係取得該尺寸重調景深圖框之一畫素的一第一次畫素值及一第二次畫素值，並將該第一次畫素值儲存於一中間景深圖框之一第一畫素的所有次畫素內，且將該第二次畫素值儲存於該中間景深圖框之一第二畫素的所有次畫素內，以得到該中間景深圖框，並重調該中間景深圖框的尺寸，以得到該原始景深圖框。
  5. 如申請專利範圍第4項所述之解包裝裝置，其中該彩色圖框的中心點與 該顯示螢幕的中心點係重疊。
  6. 如申請專利範圍第4項所述之解包裝裝置，其中該還原處理單元更還原該彩色圖框，以得到一原始彩色圖框。
  7. 一種包裝圖框之解包裝系統，該包裝圖框可顯示於一顯示螢幕，並包含一彩色圖框及一尺寸重調景深圖框，該彩色圖框與該尺寸重調景深圖框對應，該彩色圖框的中心係顯示於該顯示螢幕的中央區域，該解包裝系統包括：一記憶單元，儲存該包裝圖框；以及一處理單元，分離該包裝圖框，以得到該彩色圖框及該尺寸重調景深圖框，並還原該尺寸重調景深圖框而得到一原始景深圖框；其中，該處理單元係取得該尺寸重調景深圖框之一畫素的一第一次畫素值及一第二次畫素值，並將該第一次畫素值儲存於一中間景深圖框之一第一畫素的所有次畫素內，且將該第二次畫素值儲存於該中間景深圖框之一第二畫素的所有次畫素內，以得到該中間景深圖框，並重調該中間景深圖框的尺寸，以得到該原始景深圖框。
  8. 如申請專利範圍第7項所述之解包裝系統，其中該彩色圖框的中心點與該顯示螢幕的中心點係重疊。
  9. 如申請專利範圍第7項所述之解包裝系統，其中該處理單元更還原該彩色圖框，以得到一原始彩色圖框。
TW102135719A 2013-10-02 2013-10-02 包裝圖框之解包裝方法、裝置及系統 TWI602145B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
TW102135719A TWI602145B (zh) 2013-10-02 2013-10-02 包裝圖框之解包裝方法、裝置及系統
KR1020140130341A KR101679122B1 (ko) 2013-10-02 2014-09-29 컬러 프레임과 오리지널 심도 프레임을 패키징 및 언패키징하는 방법, 장치 및 시스템
CN201410519743.XA CN104519289B (zh) 2013-10-02 2014-09-30 包装图框的解包装方法、装置及系统
JP2014203552A JP5993423B2 (ja) 2013-10-02 2014-10-02 カラーフレームとオリジナルデプスフレームをパック及びアンパックする方法、装置並びにシステム
US14/505,153 US9774844B2 (en) 2013-10-02 2014-10-02 Unpacking method, unpacking device and unpacking system of packed frame
EP14187435.4A EP2858359A1 (en) 2013-10-02 2014-10-02 Unpacking method, unpacking device and unpacking system of packed frame

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW102135719A TWI602145B (zh) 2013-10-02 2013-10-02 包裝圖框之解包裝方法、裝置及系統

Publications (2)

Publication Number Publication Date
TW201514914A TW201514914A (zh) 2015-04-16
TWI602145B true TWI602145B (zh) 2017-10-11

Family

ID=51690832

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102135719A TWI602145B (zh) 2013-10-02 2013-10-02 包裝圖框之解包裝方法、裝置及系統

Country Status (4)

Country Link
US (1) US9774844B2 (zh)
EP (1) EP2858359A1 (zh)
CN (1) CN104519289B (zh)
TW (1) TWI602145B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3323105A4 (en) * 2015-07-15 2019-02-20 Blinxel Pty Ltd. SYSTEM AND METHOD FOR IMAGE PROCESSING
TWI629892B (zh) * 2016-05-09 2018-07-11 國立成功大學 景深包裝及解包裝之ｒｇｂ格式與ｙｕｖ格式的轉換與反轉換的方法及電路
EP3406283A1 (en) 2017-05-26 2018-11-28 Becton, Dickinson and Company Pen needle
WO2019245757A1 (en) 2018-06-22 2019-12-26 Becton, Dickinson And Company Pen needle
US20220092738A1 (en) * 2020-11-19 2022-03-24 Intel Corporation Methods and apparatus for super-resolution rendering

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201310973A (zh) * 2011-08-30 2013-03-01 Himax Tech Ltd 處理立體顯示用之資料框的系統及方法
CN103210653A (zh) * 2010-11-15 2013-07-17 Lg电子株式会社 用于转换帧格式的方法及使用该方法的装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4569561B2 (ja) 2006-12-01 2010-10-27 富士フイルム株式会社 画像ファイル作成装置
KR101545009B1 (ko) 2007-12-20 2015-08-18 코닌클리케 필립스 엔.브이. 스트레오스코픽 렌더링을 위한 이미지 인코딩 방법
US9124870B2 (en) 2008-08-20 2015-09-01 Samsung Electronics Co., Ltd. Three-dimensional video apparatus and method providing on screen display applied thereto
WO2010085361A2 (en) * 2009-01-26 2010-07-29 Thomson Licensing Frame packing for video coding
WO2010108024A1 (en) * 2009-03-20 2010-09-23 Digimarc Coporation Improvements to 3d data representation, conveyance, and use
JP5894537B2 (ja) 2010-02-09 2016-03-30 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． ３ｄビデオ・フォーマット検出
IT1401367B1 (it) 2010-07-28 2013-07-18 Sisvel Technology Srl Metodo per combinare immagini riferentesi ad un contenuto tridimensionale.
TWI486053B (zh) * 2011-09-27 2015-05-21 Realtek Semiconductor Corp 立體影像傳輸方法及立體影像傳輸電路
CN102868899A (zh) * 2012-09-06 2013-01-09 华映光电股份有限公司 一种三维图像处理方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103210653A (zh) * 2010-11-15 2013-07-17 Lg电子株式会社 用于转换帧格式的方法及使用该方法的装置
TW201310973A (zh) * 2011-08-30 2013-03-01 Himax Tech Ltd 處理立體顯示用之資料框的系統及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
heresy，"立體顯示的訊號"，VIML-http://viml.nchc.org.tw/blog/paper_info.php?CLASS_ID=1&SUB_ID=1&PAPER_ID=164，2010/03/29 *

Also Published As

Publication number Publication date
US20150092028A1 (en) 2015-04-02
US9774844B2 (en) 2017-09-26
EP2858359A1 (en) 2015-04-08
CN104519289A (zh) 2015-04-15
CN104519289B (zh) 2018-06-22
TW201514914A (zh) 2015-04-16

Similar Documents

Publication Publication Date Title
TWI602145B (zh) 包裝圖框之解包裝方法、裝置及系統
US20120044241A1 (en) Three-dimensional on-screen display imaging system and method
JP2009163724A (ja) グラフィックスインターフェイス、グラフィックスデータをラスタ化する方法およびコンピュータ読み取り可能な記録媒体
TWI603290B (zh) 重調原始景深圖框的尺寸爲尺寸重調景深圖框的方法、裝置及系統
TWI602144B (zh) 包裝彩色圖框及原始景深圖框之方法、裝置及系統
JP5993423B2 (ja) カラーフレームとオリジナルデプスフレームをパック及びアンパックする方法、装置並びにシステム
TWI503788B (zh) 還原尺寸重調景深圖框爲原始景深圖框的方法、裝置及系統
TWI502545B (zh) 儲存３ｄ影像內容的方法
TWI512678B (zh) 非暫態儲存媒體
TWI530155B (zh) 包裝多視角圖框的方法、裝置及儲存包裝圖框之非暫態儲存媒體
KR101684834B1 (ko) 오리지널 심도 프레임을 리사이징 및 복원하는 방법, 장치 및 시스템
TWI524731B (zh) 儲存尺寸重調景深圖框的非暫態儲存媒體
TWI547141B (zh) 包裝圖框的解包裝方法、裝置及儲存解包裝指令之非暫態儲存媒體
WO2021146978A1 (zh) 显示系统、图形处理器gpu、显示控制器以及显示方法
TW201325202A (zh) 三維影像處理方法
JP4956574B2 (ja) 立体画像描画装置および描画方法