TWI407795B - 中央解碼控制器及其控制方法 - Google Patents

中央解碼控制器及其控制方法 Download PDF

Info

Publication number
TWI407795B
TWI407795B TW099101789A TW99101789A TWI407795B TW I407795 B TWI407795 B TW I407795B TW 099101789 A TW099101789 A TW 099101789A TW 99101789 A TW99101789 A TW 99101789A TW I407795 B TWI407795 B TW I407795B
Authority
TW
Taiwan
Prior art keywords
video frame
frame
channel
adjacent
current video
Prior art date
Application number
TW099101789A
Other languages
English (en)
Other versions
TW201127056A (en
Inventor
Jiann Jone Chen
Jyun Jie Jhuang
Shih Chieh Lee
Chen Hsiang Sun
Ching Hua Chen
Original Assignee
Univ Nat Taiwan Science Tech
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Univ Nat Taiwan Science Tech filed Critical Univ Nat Taiwan Science Tech
Priority to TW099101789A priority Critical patent/TWI407795B/zh
Priority to US12/838,412 priority patent/US8576905B2/en
Publication of TW201127056A publication Critical patent/TW201127056A/zh
Application granted granted Critical
Publication of TWI407795B publication Critical patent/TWI407795B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/395—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving distributed video coding [DVC], e.g. Wyner-Ziv video coding or Slepian-Wolf video coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/39—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving multiple description coding [MDC], i.e. with separate layers being structured as independently decodable descriptions of input picture data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

中央解碼控制器及其控制方法
本發明係與一種中央解碼控制器及其控制方法有關，特別係與一種採用相關性運算的中央解碼控制器及其控制方法有關。
為了要克服在壅塞或不穩定的網路中傳輸，多媒體資訊常使用多重描述編碼(multiple description coding,MDC)來進行傳送，MDC係將資訊源切割成多個獨立的串流並透過多重路徑傳輸，藉此提升多媒體資訊傳輸的穩定性與可靠性。而分散式視訊編碼(distributed video coding,DVC)的架構則善用了資訊源間的相關性，將編碼端的複雜度轉移至解碼端，以增加視訊傳輸在行動裝置(如手機、PDA等)上的應用性。
本發明之一目的在於提供一種中央解碼控制器及其控制方法，以實現動態選擇品質較佳的視訊框輸出。。
本創作之另一目的在於提供一種中央解碼控制器及其控制方法，以改善在無線傳輸或網路不穩的環境下視訊品質不佳的情形。
根據上述目的，本發明提供一種中央解碼器控制方法，其中一影像串流係經由至少兩互相並列之通信通道進行處理與傳輸，該中央解碼器控制方法包含步驟：接收經由一第一通信通道解碼後的一目前視訊框，以及鄰近該目前視訊框的複數個內部視訊框；接收經由與該第一通信通道並列之一第二通信通道，以對相應於該目前視訊框的原始訊框進行錯誤分析，並進行校正而取得的一預測視訊框；接收經由該第二通信通道之解碼後的鄰近該目前視訊框的複數個中間視訊框；對該目前視訊框、該等內部視訊框及該等中間視訊框進行相關性運算；以及根據該相關性運算的結果，選擇該目前視訊框或該預測視訊框作為輸出訊框。
本發明進一步提供一種中央解碼控制器，其中一影像串流係經由至少兩互相並列之通信通道來進行處理與傳輸，該中央解碼控制器包含：一第一端，其會接收經由一第一通信通道解碼後的一目前視訊框，以及鄰近該目前視訊框的複數個內部視訊框；一第二端，其會接收經由與該第一通信通道並列之一第二通信通道，以對相應於該目前視訊框的原始訊框進行錯誤分析，並進行校正而取得的一預測視訊框，以及經由該第二通信通道之解碼後的鄰近該目前視訊框的複數個中間視訊框；一相關器，其會連接該第一端及該第二端，並且係用於對該目前視訊框、該等內部視訊框及該等中間視訊框進行相關性運算；一判斷邏輯與控制器，其係與該相關器連接，以用來根據該相關性運算的結果進行判斷與操作控制；以及一多工器，其係與該判斷邏輯與控制器相連接，並接收來自該第一端的該目前視訊框，以及來自該第二端的該預測視訊框，該多工器係受該判斷邏輯與控制器的控制，以選擇該目前視訊框或該預測視訊框作為輸出訊框。
在本發明中，MDC與DVC可以有效地做結合(MDVC)並提供穩定的網路傳輸以及有效率的視訊編碼，資訊源會先由MDC分解為兩個串流，每個串流再由DVC來進行關鍵視訊框(key frame)的傳送，而Wyner-Ziv(WZ)訊框則由另一個串流提供。
在本發明中，在MDVC架構中採用了的預測編碼，透過此方式可以有效移除畫面間的冗餘，而達到提升解碼端影像品質的目的。
在本發明中，於MDVC的中央解碼器中，採取了影像選擇的機制，當影像在傳遞過程中受到了破壞，若只有片段資料受損，其他部份影像仍舊可以被利用，則在解碼端所收到的關鍵視訊框之間，其等之關連性將能提供影像是否有被破壞的跡象，本發明即利用此關聯性來選擇較好品質的影像當作輸出。
請參閱第1圖，其係顯示本發明應用於一視訊傳輸系統1的結構示意圖。該視訊傳輸系統1是一種結合多重描述編碼策略(multiple description codec,MDC)與分散式視訊編碼策略(distributed video codec,DVC)的系統，簡稱MDVC，其係為於無線傳輸或網路不穩的環境下，能夠提供可靠且穩定的多媒體傳輸。
如第1圖所示，視訊傳輸系統1包括一編碼器31及一解碼器32，編碼器31具有一解多工器5、一第一側編碼器(E1)11及一第二側編碼器(E2)21，解碼器32具有一第一側解碼器(D1)12、一第二側解碼器(D2)22及一中央解碼控制器(Dc)40。
首先，一原始的輸入視訊係經由該解多工器5來解調成影像串流之分流，並分別經由該視訊傳輸系統1所具有的複數個通道(如一第一通信通道10及一第二通信通道20)來進行處理與傳輸，其中之一分流在經由第一通信通道10上的第一側編碼器(E1)11編碼後，會透過第一傳輸通道傳送到第一通信通道10上的第一側解碼器(D1)12以進行解碼，而另一分流則經由第二通信通道20上的第二側編碼器(E2)21編碼後，透過第二傳輸通道傳送到第二通信通道20上的第二側解碼器(D2)22來進行解碼，兩影像分流解碼後的資訊係被傳送至中央解碼控制器(Dc)40，而由中央解碼控制器(Dc)40選擇影像品質較佳的視訊框，以輸出視訊。
請參閱第2圖，其顯示第1圖中視訊傳輸系統1之編碼器31的結構示意圖。在該編碼器31中，各側編碼器(E1,E2)11,21均包含一可縮放影像編碼器52及一錯誤糾正(error correcting codes,ECC)編碼器58，可縮放影像編碼器52可實施為MC-EZBC編碼器，ECC編碼器58可實施為Wyner-Ziv編碼器。而且，各側編碼器(E1,E2)11,21均具有一編碼調變模式選擇器55，而透過該編碼調變模式選擇器55來選擇模式0，1，2等三種模式，以對訊框進行編碼調變，其中模式0係為進行脈衝編碼調變(pulse-code modulation,PCM)，記為MDVC-DCT；模式1為進行差動脈衝編碼調變(differential pulse-code modulation,DPCM)，記為MDVC-RDCT1；而模式2則為進行簡化差動脈衝編碼調變(simplified DPCM)，記為MDVC-RDCT2。在視訊傳輸系統1中，因為第一側編碼器(E1)11及第二側編碼器(E2)21，都是進行相同或類似的操作以分別輸出D 1 、D 2 資訊，因此在此將省略第二側編碼器(E2)21的細部描述。
在第一側編碼器(E1)11中，輸入視訊會被解多工器5解調成奇數序列及偶數序列訊框，即I2i 與I2i+1 ，其等係分別經由第一側編碼器(E1)11及第二側編碼器(E2)21的可縮放影像編碼器52，以提供關鍵訊框(key frame)之串流，其等分別記為Se與So。另一方面，偶數序列的訊框(I2i )也會流入第一側編碼器(E1)11，以利用由I2i 及預測的影像內插出的殘餘的訊號(residual signal)，並被編碼成WZ訊框(re )。類似地，奇數序列的訊框(I2i-1 )也會流入第二側編碼器(E2)21，而被編碼成WZ訊框(ro )。殘餘的訊號係為對I2i 影像的預測誤差，其為I2i 及預測的影像的差。而預測的影像係經由一預測影像選擇器54，對透過一可縮放影像解碼器53解碼重建的影像進行預測而得。在Wyner-Ziv編碼器處理殘餘的訊號的過程中，其係經由一轉換器56執行分散式餘弦轉換(discrete cosine transform,DCT)以取得相關係數，一量化器57執行量化操作，及一ECC編碼器58會執行錯誤糾正，以產生該WZ訊框(re )。透過上述操作，第一通信通道10上的第一側編碼器(E1)11所產生的D 1 資訊，會包括有關鍵訊框(So)及其殘留訊息的WZ訊框(re )，而第二通信通道20上的第二側編碼器(E2)21所產生的D 2 資訊，則會包括下(上)一個關鍵訊框(Se)及其殘留訊息的WZ訊框(ro )。
請參閱第3圖，其係顯示第1圖中視訊傳輸系統1的解碼器32的結構示意圖。視訊傳輸系統1的包括一第一側碼器(D1)12、一第二側解碼器(D2)22及一中央解碼控制器(Dc)40。該解碼器321中，各側解碼器(D1,D2)12,22均包含一可縮放影像解碼器62及一ECC解碼器68，可縮放影像解碼器62可被實施為MC-EZBC編碼器，ECC解碼器68可實施為Wyner-Ziv解碼器。D 1 資訊係被輸入至第一側解碼器(D1)12，該可縮放影像解碼器62會將關鍵訊框(So)解碼重建成影像，以輸出至中央解碼控制器(Dc)40。關鍵訊框(So)並提供旁側資訊(side information,SI)予ECC解碼器68，使其自殘留訊息的WZ訊框(re )重建成偶數訊框。第二側解碼器(D2)22亦會進行類似操作以處理D 2 資訊，在此不再贅述。第一通信通道10上的第一側解碼器(D1)12所產生的奇數重建訊框及偶數訊框，以及第二通信通道20上的第二側解碼器(D2)22所產生的偶數重建訊框及奇數訊框，將會被傳送至中央解碼控制器(Dc)40以進行選擇輸出。
當重建之訊框與原始訊框差異不大，即約等於I2i 、約等於I2i+1 ，WZ訊框就會被捨棄，因為中央解碼控制器(Dc)40只要選擇就能得到最好的視訊品質。但是在只有接收到一個影像描述(description)(如D 1 資訊)下，中央解碼控制器(Dc)40則能夠藉由訊框來維持視訊顯示的穩定，雖然其視訊品質不會很好。
各側解碼器(D1,D2)12,22中的編碼調變模式選擇器65，65’，係與各側編碼器(E1,E2)11,21中的編碼調變模式選擇器55作用相同，其等都可選擇模式0，1，2等三種模式來對訊框進行編碼調變。此外，內插器63係用以執行內插操作，各側解碼器(D1,D2)12,22中的預測影像選擇器64、轉換器66及量化器67之功能，分別係與各側編碼器(E1,E2)11,21中的預測影像選擇器54、轉換器56及量化器57相同或類似，在此不再贅述。
請參閱第4圖，其係顯示一種Wyner-Ziv編解碼策略的概略示意圖。如第4圖所示，要被Wyner-Ziv編碼器編碼的是殘餘的訊號，其為輸入訊框I2i 及預測的影像間的預測誤差，殘餘的訊號再經轉換器56而取得相關係數，並以量化器57對其執行量化操作，量化後取得的DCT區塊係被渦輪編碼器(turbo encoder)71分解成位元面(bit-planes)，其中每個位元面都只有同位檢查位元(parity check bits)會被傳送給渦輪解碼器(turbo decoder)73，如果渦輪解碼器73無法正確回復資料，則會被要求傳送多一點的同位檢查位元，緩衝器72係可儲存同位檢查位元，上述操作係以Slepian-Wolf編解碼策略實施。在訊框重建的過程中，在解碼器端的旁側資訊是經由內插、雙向運動之估算，並根據來自可縮放影像解碼器62所重建的訊框來計算殘留訊號而得。
另外，在編碼器31及解碼器32中的預測影像選擇器54，64會進行兩相鄰影像的相關性運算，以減小不同影像間的訊號亂度。若原始訊框(I2i )需要被編碼，則需要先找到最佳的預測的影像，使其與原始訊框(I2i )的差異最小，以得到最佳的率失真效率(rate-distortion efficiency)。預測的影像係選自可縮放影像解碼器53重建的訊框，而在編碼端及解碼端則需參考相同的影像。最佳的預測的影像可選自三個重建影像，如及其兩者的平均。以預測影像選擇器54為例，以下將介紹其決定最佳的預測的影像所採用的策略。
首先，分別計算原始訊框(I2i )與該兩者平均之差，原始訊框(I2i )與之差，原始訊框(I2i )與之差，表示為ΔI 0 =|I2i -P 0 (I2i )|、ΔI 1 =|I2i -P 1 (I2i )|及ΔI 2 =|I2i -P 2 (I2i )|，預測模式P0 、P1 、P2 分別代表。
當原始訊框(I2i )與之差及與之差都小於等於預定值，即，則選擇預測模式Pi ，使得差最小，亦即ΔI i =min{ΔI 1 ,ΔI 2 }。
當原始訊框(I2i )與之差及與之差都大於預定值，即ΔI 1 >ε1 及ΔI 2 >ε2 ，以及，則選擇預測模式P0 。
當原始訊框(I2i )與之差及與之差都大於預定值，即ΔI 1 >ε1 及ΔI 2 >ε2 ，以及|ΔI 1 -ΔI 2 |>ε0 ，則選擇預測模式Pi ，使得差最小，亦即ΔI i =min{ΔI 1 ,ΔI 2 }。
上述選擇方式是基於影像相關結果的觀點所作的選擇，而不僅是選擇可以使得ΔI i =min{ΔI 1 ,ΔI 2 }的預測模式Pi 。ΔI i 係與當時視訊的複雜度成正比，所以當時，當時視訊是穩定的，因為其視訊序列的相關度很高，故選擇預測模式P1 或P2 。當ΔI 1 及ΔI 2 都大於預定值時，如果|ΔI 1 -ΔI 2 |很小，表示視訊是在高運動期間(high-motion period)，因此其影像內容變動較大，但仍有相同的相關度，而如果|ΔI 1 -ΔI 2 |很大，表示這三張影像的相關度較小，故選擇使得ΔI i 最小的預測模式P1 或P2 。
請參閱第5圖，其係顯示本發明之中央解碼器控制方法的概略示意圖。根據上述，第一通信通道10上的D 1 資訊會包括關鍵訊框(So)及其鄰近訊框的錯誤更正碼，如殘留訊息的WZ訊框(re )，而第二通信通道20上的D 2 資訊會包括下(上)一個關鍵訊框(Se)及其鄰近訊框的錯誤更正碼，如殘留訊息的WZ訊框(ro )。相應地，第一通信通道10上的第一側解碼器(D1)12會產生奇數重建訊框，及進行錯誤校正後的偶數訊框，而第二通信通道20上的第二側解碼器(D2)22會產生偶數重建訊框，以及進行錯誤校正後的奇數訊框。中央解碼控制器(Dc)40會接收偶數重建訊框、奇數重建訊框、偶數訊框及奇數訊框，並對該等訊框進行相關性運算，根據相關性運算的結果選擇其一作為輸出訊框。
當一個影像描述資訊(如D 2 資訊)無法被正確地接收時，其可以由第一側解碼器(D1)12來提供奇數重建訊框及進行錯誤校正後的偶數訊框以作為輸出視訊框，此時訊噪比可能會增大而視訊品質也不佳。在不同期間，有可能是D 1 資訊也有可能是D 2 資訊發生傳輸錯誤，雜訊會使得中央解碼控制器40無法重建出高品質的視訊框，但是本發明之中央解碼控制器40則可以藉由動態地從中選擇品質較佳的視訊框輸出，藉以改善在無線傳輸或網路不穩的環境下視訊品質不佳的情形。
請參閱第6圖、第7圖及第8圖，第6圖係顯示本發明之中央解碼器控制方法的流程圖，第7圖係顯示本發明之中央解碼控制器40的結構示意圖，第8圖係顯示本發明之中央解碼器控制方法中進行相關性運算的示意圖。如第7圖所示，本發明之中央解碼控制器40具有一第一端41及一第二端42，其等會分別接收第一通信通道10及第二通信通道20所傳來的視訊框。中央解碼控制器40係包含一相關器44，一判斷邏輯與控制器46及一多工器48。相關器44會與第一端41及第二端42連接，相關器44會對該第一端41及該第二端42傳來的視訊框進行相關性運算。判斷邏輯與控制器46，係與該相關器44連接，以用於根據該相關性運算的結果進行判斷與操作控制。多工器48係受該判斷邏輯與控制器46的控制，以選擇品質較佳的視訊框作為輸出訊框，其中多工器會接收第一通信通道10傳來的視訊框以及第二通信通道20傳來的視訊框。
以下將結合第7圖所示之中央解碼控制器40，第8圖所示之進行相關性運算的示意圖，並對照參閱第6圖的步驟流程，來對本發明之中央解碼器控制方法進行說明。
首先，在步驟S10中，中央解碼控制器40的第二端42係在第二通信通道20上，接收到經由第二側解碼器(D2)22重建的一目前視訊框()及鄰近該目前視訊框同在該第二通信通道20上的內部視訊框(intra-description frame)()，該目前視訊框()係為原始視訊框(I 2 i )於該第二通信通道20上經解碼後重建而來。
此外，中央解碼控制器40的第一端41在與該第二通信通道20並列的第一通信通道10上接收到一預測視訊框()，其係為原始視訊框(I 2 i )在第一通信通道10上進行錯誤分析與校正而來的相應於該目前視訊框()的預測性影像。
中央解碼控制器40的第一端41係在第一通信通道10上，並接受到鄰近該目前視訊框()的中間視訊框(inter-description frame)(，)，其係為奇數視訊框(I 2 i -1 ，I 2 i +1 )在第一通信通道10上經解碼後重建而來。
在步驟S12中，中央解碼控制器40的相關器44會接收自該第一端41及該第二端42所傳來的目前視訊框()、內部視訊框()及中間視訊框()，並對該等視訊框進行相關性運算。例如：計算中間視訊框()彼此之差異，；內部視訊框()相較於目前視訊框()的差異，；中間視訊框()相較於目前視訊框()的差異，。
在步驟S14及步驟S16中，會判斷邏輯與控制器46接收該相關器44所傳來的上述相關性運算之結果，並根據該相關性運算的結果進行判斷與操作控制。
在步驟S14中，判斷邏輯與控制器46會判斷中間視訊框與目前視訊框的相關度，是否高於內部視訊框與目前視訊框的相關度，例如：中間視訊框相較於目前視訊框的差異之和，是否小於內部視訊框相較於目前視訊框的差異之和，即是否，若是，則判斷邏輯與控制器46會控制多工器48以選擇目前視訊框作為輸出訊框(步驟S20)。
在步驟S16中，當步驟S14的判定結果為否，則判斷邏輯與控制器46會判斷內部視訊框與目前視訊框的相關度，是否高於兩倍之中間視訊框的相關度，例如：內部視訊框相較於目前視訊框的差異之和，是否小於中間視訊框彼此之差異的兩倍，即是否，若是，則判斷邏輯與控制器46控制多工器48將選擇目前視訊框作為輸出訊框(步驟S20)，若否，則判斷邏輯與控制器46控制多工器48則選擇預測視訊框作為輸出訊框(步驟S21)。在此例中，係以偶數訊框當做目前視訊框來例示說明，若以奇數訊框當做目前視訊框的操作則類似，在此不再贅述。
此外，判斷邏輯與控制器46係根據上述條件之判定結果輸出一指示符(0或1)作為控制訊號，以控制多工器48。例如：當判斷邏輯與控制器46輸出的指示符為1時，多工器48會選擇目前視訊框輸出，而當判斷邏輯與控制器46輸出的指示符為0時，多工器48則選擇預測視訊框輸出。
下面將對中央解碼控制器40選擇目前視訊框或預測視訊框作為輸出訊框的策略進行說明。(1)當步驟S14之條件判斷結果為是，即當中間視訊框相較於目前視訊框的差異之和，小於內部視訊框相較於目前視訊框的差異之和，即，則表示目前視訊框未被雜訊破壞而降低品質，其品質應該優於預測視訊框，因此中央解碼控制器40選擇目前視訊框作為輸出訊框。(2)當步驟S14之條件判斷結果為否，表示中間視訊框相較於目前視訊框的差異之和較大，表示品質被破壞的視訊框可能出現在這三個視訊框、其中之一，這一判斷條件係為找出是哪個視訊框的品質被破壞，當此判斷條件成立時，品質會被破壞的視訊框應該不是就是，這樣的話預測視訊框也會被影響，故選擇中央解碼控制器40會選擇目前視訊框作為輸出訊框。(3)當上述兩個判斷條件都不成立時，則表示目前視訊框的品質係被破壞，因此中央解碼控制器40會選擇預測視訊框作為輸出訊框。
綜上所述，雖然本發明已用較佳實施例揭露如上，然其並非用以限定本發明，本發明所屬技術領域中具有通常知識者，在不脫離本發明之精神和範圍內，當可作各種之更動與潤飾，因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。
1．．．視訊傳輸系統
5．．．解多工器
10．．．第一通信通道
11．．．第一側編碼器(E1)
12．．．第一側解碼器(D1)
20．．．第二通信通道
21．．．第二側編碼器(E2)
22．．．第二側解碼器(D2)
31．．．編碼器
32．．．解碼器
40．．．中央解碼控制器(Dc)
41．．．第一端
42．．．第二端
44．．．相關器
46．．．判斷邏輯與控制器
48．．．多工器
52．．．可縮放影像編碼器
53．．．可縮放影像解碼器
54．．．預測影像選擇器
55．．．編碼調變模式選擇器
56．．．轉換器
57．．．量化器
58．．．錯誤糾正編碼器
62．．．可縮放影像編碼器
63．．．內插器
64．．．預測影像選擇器
65．．．編碼調變模式選擇器
65’．．．編碼調變模式選擇器
66．．．轉換器
67．．．量化器
68．．．錯誤糾正解碼器
71．．．渦輪編碼器
72．．．緩衝器
73．．．渦輪解碼器
D 1 ．．．資訊
D 2 ．．．資訊
re ．．．WZ訊框
ro ．．．WZ訊框
Se．．．關鍵訊框
So．．．關鍵訊框
S10~S21．．．皆為步驟
下面結合附圖對本發明的技術方案進行詳細說明。
第1圖係顯示本發明應用於一視訊傳輸系統的結構示意圖。
第2圖係顯示第1圖中視訊傳輸系統的編碼器的結構示意圖。
第3圖係顯示第1圖中視訊傳輸系統的解碼器的結構示意圖。
第4圖係顯示一種Wyner-Ziv編解碼策略的概略示意圖。
第5圖係顯示本發明之中央解碼器控制方法的概略示意圖。
第6圖係顯示本發明之中央解碼器控制方法的流程圖。
第7圖係顯示本發明之中央解碼控制器的結構示意圖。
第8圖係顯示本發明之中央解碼器控制方法中進行相關性運算的示意圖。
S10~S21．．．皆為步驟

Claims (16)

  1. 一種中央解碼器控制方法，其中一影像串流係經由至少兩互相並列之通信通道來進行處理與傳輸，該中央解碼器控制方法包含步驟：接收經由一第一通信通道解碼後的一目前視訊框，以及鄰近該目前視訊框的複數個視訊框；接收經由與該第一通信通道並列之一第二通信通道，而對相應於該目前視訊框的原始訊框進行錯誤分析並校正而取得的一預測視訊框；接收經由該第二通信通道解碼後的鄰近該目前視訊框的複數個視訊框；對該目前視訊框與通一通道中該等鄰近的視訊框進行相關性運算，對該目前視訊框與跨通道之該等鄰近的視訊框進行相關性運算，對跨通道之該等鄰近的視訊框進行相關性運算；以及根據該等相關性運算的結果，選擇該目前視訊框或該預測視訊框作為輸出訊框，其中當滿足此一條件時，則選擇該目前視訊框作為輸出訊框，其中表示跨通道之該等鄰近的視訊框相較於該目前視訊框的差異之和，表示同一通道中該等鄰近的視訊框相較於該目前視訊框的差異之和。
  2. 如申請專利範圍第1項所述之中央解碼器控制方法，其中於該選擇視訊框輸出的步驟中，當跨通道之該等鄰近的視訊框與該目前視訊框的相關度，高於通一通道中該等鄰近的視訊框與該目前視訊框的相關度時，則選擇該目前視訊框作為輸出訊框。
  3. 如申請專利範圍第1項所述之中央解碼器控制方法，其中於該選擇視訊框輸出的步驟中，當跨通道之該等鄰近的視訊框與該目前視訊框的相關度小於同一通道中該等鄰近的視訊框與該目前視訊框的相關度，且同一通道中該等鄰近的視訊框與該目前視訊框的相關度高於兩倍之跨通道之該等鄰近的視訊框的相關度，則選擇該目前視訊框作為輸出訊框。
  4. 如申請專利範圍第3項所述之中央解碼器控制方法，其中當滿足及此二條件時，則選擇該目前視訊框作為輸出訊框，其中表示跨通道之該等鄰近的視訊框相較於該目前視訊框的差異之和，表示同一通道中該等鄰近的視訊框相較於該目前視訊框的差異之和，△1 表示跨通道之該等鄰近的視訊框彼此之差異。
  5. 如申請專利範圍第1項所述之中央解碼器控制方法，其中於該選擇視訊框輸出的步驟中，當跨通道之該等鄰近的視訊框與該目前視訊框的相關度低於通一通道中該等鄰近的視訊框與該目前視訊框的相關度，且當同一通道中該等鄰近的視訊框與該目前視訊框的相關度低於兩倍之跨通道之該等鄰近的視訊框的相關度時，則選擇該預測視訊框作為輸出訊框。
  6. 如申請專利範圍第5項所述之中央解碼器控制方法，其中當滿足及此二條件時，則選擇該預測視訊框作為輸出訊框，其中表示跨通道之該等鄰近的視訊框相較於該目前視訊框的差異之和，表示同一通道中該等鄰近的視訊框相較於該目前視訊框的差異之和，△1 表示跨通道之該等鄰近的視訊框彼此之差異。
  7. 如申請專利範圍第1項所述之中央解碼器控制方法，其中跨通道之該等鄰近的視訊框間的相關性運算係計算跨通道之該等鄰近的視訊框之間的影像差異，跨通道之該等鄰近的視訊框與該目前視訊框間的相關性連算係計算跨通道之該等鄰近的視訊框與該目前視訊框之間的影像差異，同一通道中該等鄰近的視訊框與該目前視訊框間的相關性運算係計算同一通道中該等鄰近的視訊框與該目前視訊框之間的影像差異。
  8. 如申請專利範圍第1項所述之中央解碼器控制方法，其係採用Wyner-Ziv編解碼策略以取得該預測視訊框。
  9. 一種中央解碼控制器，其中一影像串流係經由至少兩互相並列之通信通道進行處理與傳輸，該中央解碼控制器包含：一第一端，其會接收經由一第一通信通道解碼後的一目前視訊框，以及鄰近該目前視訊框的複數個視訊框；一第二端，其會接收經由與該第一通信通道並列之一第二通信通道，而對相應於該目前視訊框的原始訊框進行錯誤分析並校正，而取得的一預測視訊框，以及經由該第二通信通道解碼後的鄰近該目前視訊框的複數個視訊框；一相關器，其係與該第一端及該第二端連接，以用於對該目前視訊框與通一通道中該等鄰近的視訊框進行相關性運算，對該目前視訊框與跨通道之該等鄰近的視訊框進行相關性運算，對跨通道之該等鄰近的視訊框進行相關性運算；一判斷邏輯與控制器，其係與該相關器連接，以用於根據該等相關性運算的結果進行判斷與操作控制；以及 一多工器，其係與該判斷邏輯與控制器相連接，並接收來自該第一端的該目前視訊框，以及來自該第二端的該預測視訊框，該多工器係受該判斷邏輯與控制器的控制，以選擇該目前視訊框或該預測視訊框作為輸出訊框，其中當滿足此一條件時，則選擇該目前視訊框作為輸出訊框，其中表示跨通道之該等鄰近的視訊框相較於該目前視訊框的差異之和，表示通一通道中該等鄰近的視訊框相較於該目前視訊框的差異之和。
  10. 如申請專利範圍第9項所述之中央解碼控制器，其中當該判斷邏輯與控制器判定跨通道之該等鄰近的視訊框與該目前視訊框的相關度，高於同一通道中該等鄰近的視訊框與該目前視訊框的相關度時，則控制該多工器以選擇該目前視訊框作為輸出訊框。
  11. 如申請專利範圍第9項所述之中央解碼控制器，其中當該判斷邏輯與控制器，判定跨通道之該等鄰近的視訊框與該目前視訊框的相關度小於同一通道中該等鄰近的視訊框與該目前視訊框的相關度，且通一通道中該等鄰近的視訊框與該目前視訊框的相關度高於兩倍之跨通道之該等鄰近的視訊框的相關度時，則控制該多工器以選擇該目前視訊框作為輸出訊框。
  12. 如申請專利範圍第11項所述之中央解碼器控制方法，其中當該判斷邏輯與控制器，判定滿足及 此二條件時，則控制該多工器以選擇該目前視訊框作為輸出訊框，其中表示跨通道之該等鄰近的視訊框相較於該目前視 訊框的差異之和，表示同一通道中該等鄰近的視訊框相較於該目前視訊框的差異之和，△1 表示跨通道之該等鄰近的視訊框彼此之差異。
  13. 如申請專利範圍第9項所述之中央解碼控制器，其中當該判斷邏輯與控制器判定跨通道之該等鄰近的視訊框與該目前視訊框的相關度低於同一通道中該等鄰近的視訊框與該目前視訊框的相關度，且判定同一通道中該等鄰近的視訊框與該目前視訊框的相關度低於兩倍之跨通道之該等鄰近的視訊框的相關度時，則控制該多工器以選擇該預測視訊框作為輸出訊框。
  14. 如申請專利範圍第13項所述之中央解碼控制器，其中當該判斷邏輯與控制器判定滿足及△1 此二條件時，則控制該多工器以選擇該預測視訊框作為輸出訊框，其中表示跨通道之該等鄰近的視訊框相較於該目前視訊框的差異之和，表示通一通道中該等鄰近的視訊框相較於該目前視訊框的差異之和，△1 表示跨通道之該等鄰近的視訊框彼此之差異。
  15. 如申請專利範圍第9項所述之中央解碼控制器，其中跨通道之該等鄰近的視訊框間的相關性運算係計算跨通道之該等鄰近的視訊框之間的影像差異，跨通道之該等鄰近的視訊框與該目前視訊框間的相關性運算係計算跨通道之該等鄰近的視訊框與該目前視訊框之間的影像差異，同一通道中該等鄰近的視訊框與該目前視訊框間的相關性運算係計算同一通道中該等鄰近的視訊框與該目前視訊框之間的影像差異。
  16. 如申請專利範圍第9項所述之中央解碼控制器，其係採用Wyner-Ziv編解碼策略以取得該預測視訊框。
TW099101789A 2010-01-22 2010-01-22 中央解碼控制器及其控制方法 TWI407795B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW099101789A TWI407795B (zh) 2010-01-22 2010-01-22 中央解碼控制器及其控制方法
US12/838,412 US8576905B2 (en) 2010-01-22 2010-07-16 Central decoding controller and controlling method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW099101789A TWI407795B (zh) 2010-01-22 2010-01-22 中央解碼控制器及其控制方法

Publications (2)

Publication Number Publication Date
TW201127056A TW201127056A (en) 2011-08-01
TWI407795B true TWI407795B (zh) 2013-09-01

Family

ID=44308912

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099101789A TWI407795B (zh) 2010-01-22 2010-01-22 中央解碼控制器及其控制方法

Country Status (2)

Country Link
US (1) US8576905B2 (zh)
TW (1) TWI407795B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8527705B2 (en) * 2010-03-16 2013-09-03 Cleversafe, Inc. Temporarily caching an encoded data slice
GB2502620B (en) * 2012-06-01 2020-04-22 Advanced Risc Mach Ltd A parallel parsing video decoder and method
CN114521327A (zh) * 2019-07-05 2022-05-20 威诺瓦国际有限公司 视频译码中的残差的量化

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060002469A1 (en) * 2004-06-30 2006-01-05 Comet Video Technology Method of video data transmitting

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060002469A1 (en) * 2004-06-30 2006-01-05 Comet Video Technology Method of video data transmitting

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Feng Yang, Guiguang Ding, Qionghai Dai and Yaguang Yin, "Adaptive Key Frame Selection Wyner-Ziv Video Coding," Multimedia Signal Processing, 2005 IEEE 7th Workshop, Oct. 30 2005-Nov. 2 2005, pp 1-4 *
Olivier Crave, Christine Guillemot, Béatrice Pesquet-Popescu and Christophe Tillier, "Distributed Temporal Multiple Description Coding for Robust video Transmission," EURASIP Journal on Wireless Communications and Networking, July 2007, pp 1-13 *

Also Published As

Publication number Publication date
US8576905B2 (en) 2013-11-05
US20110182359A1 (en) 2011-07-28
TW201127056A (en) 2011-08-01

Similar Documents

Publication Publication Date Title
KR101644208B1 (ko) 이전에 계산된 모션 정보를 이용하는 비디오 인코딩
US9071841B2 (en) Video transcoding with dynamically modifiable spatial resolution
CN101010964B (zh) 在可分级视频编码中的使用帧速率上变换技术的方法与设备
US9854274B2 (en) Video coding
US8619854B2 (en) Scalable video encoding and decoding method using switching pictures and apparatus thereof
US7106907B2 (en) Adaptive error-resilient video encoding using multiple description motion compensation
JP5710733B2 (ja) 階層的映像符号化における空間予測方法及び装置
CN100555332C (zh) 使用包括多个宏块的预测和非预测画面对画面序列编码的方法和装置
JP2008523687A (ja) ファイングラニュラースケーラビリティのためのデジタルビデオのリアルタイムトランスコーディングのシステム及び方法
JP2021521751A (ja) ビデオ符号化において追加中間候補を有するマージモードの方法及び装置
KR20090061306A (ko) 부호화율 제어 기능을 갖는 분산 비디오 코딩 장치 및 방법
TWI407795B (zh) 中央解碼控制器及其控制方法
CN1672421A (zh) 采用混合预测码执行多描述运动补偿的方法和装置
JP2010010917A (ja) 動画像符号化装置、動画像復号装置、動画像符号化方法、及び動画像復号方法
Sechelea et al. On the rate-distortion function for binary source coding with side information
Pereira Distributed video coding: Basics, main solutions and trends
KR101103974B1 (ko) 분산 비디오 부호화/복호화 방법 및 분산 비디오 부호화/복호화 장치
Vatis et al. Enhanced reconstruction of the quantised transform coefficients for Wyner-Ziv coding
KR101072626B1 (ko) 비트율 제어 방법과 장치 및 이를 이용한 분산 비디오 코딩 방법과 장치
KR101311410B1 (ko) 픽쳐 그룹의 구조를 변화시키는 분산 비디오 부호화/복호화 방법 및 이러한 방법을 수행하는 장치
JP7523844B2 (ja) デブロッキング操作の高度制御
KR100488421B1 (ko) 이진영상의 손실 부호화 방법
Slowack et al. Bitplane intra coding with decoder-side mode decision in distributed video coding
MX2008012360A (es) Metodo de asignar prioridad para controlar la velocidad binaria de un flujo de bits, metodo para controlar la velocidad binaria de un flujo de bits, metodo de decodificacion de video y aparato que usa el mismo.
KR20060063604A (ko) 영상 신호의 인코딩 및 디코딩 방법

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees