TWI586175B - 視訊會議頻寬管理方法及系統 - Google Patents

視訊會議頻寬管理方法及系統 Download PDF

Info

Publication number
TWI586175B
TWI586175B TW103131990A TW103131990A TWI586175B TW I586175 B TWI586175 B TW I586175B TW 103131990 A TW103131990 A TW 103131990A TW 103131990 A TW103131990 A TW 103131990A TW I586175 B TWI586175 B TW I586175B
Authority
TW
Taiwan
Prior art keywords
video
evaluation value
compressed
quality evaluation
image quality
Prior art date
Application number
TW103131990A
Other languages
English (en)
Other versions
TW201613345A (en
Inventor
許銘忠
Original Assignee
鴻海精密工業股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 鴻海精密工業股份有限公司 filed Critical 鴻海精密工業股份有限公司
Priority to TW103131990A priority Critical patent/TWI586175B/zh
Priority to US14/810,136 priority patent/US9357170B2/en
Publication of TW201613345A publication Critical patent/TW201613345A/zh
Application granted granted Critical
Publication of TWI586175B publication Critical patent/TWI586175B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
    • H04N21/6175—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/752—Media network packet handling adapting media to network capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/765—Media network packet handling intermediate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/152—Multipoint control units therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

視訊會議頻寬管理方法及系統
本發明涉及視訊會議，尤其是涉及一種視訊會議頻寬管理方法及系統。
視訊會議系統或是一般的視訊會議軟體在進行會議時，為了要求視訊畫面能夠保持一定的品質，會對影像的資料頻寬(即視訊影像壓縮後的位元速率)做出管控。目前對數據頻寬進行管理的機制主要有兩種：一種是將視訊串流的位元速率設為一個定值(如3M bps)，另一種即時偵測當前網路頻寬，再根據當前網路頻寬決定視訊串流的位元速率。對於第一種機制，由於視訊影像壓縮後的資料量，是根據當時視訊畫面的複雜程度來決定的，因此當視訊串流的位元速率設定為一定值時(如3M bps)，可能會造成一系列問題，比如當視訊畫面相當複雜時，壓縮後傳輸的影像不清晰(實際可能需要4M bps才足夠)，又比如當視訊畫面相當簡單時，壓縮後資料量很小，保證清晰可能只需要2M bps就足夠，如此便造成了網路頻寬的浪費。對於第二種機制，其會動態偵測當前網路頻寬，因此當網路頻寬變的良好時(如5M bps)，視訊影像壓縮後的位元速率也會隨著不斷提高，如此當視訊影像不需很高的位元速率就能保證傳輸的視訊影像清晰時，提高視訊影像壓縮後的位元速率必然造成網路頻寬的浪費，另外，由 於提高了視訊影像壓縮的位元速率，也代表了串流封包傳送資料量的增加，由此也提高了資料封包丟失的概率。
有鑑於此，本發明的目的是提供一種視訊會議頻寬管理方法及系統，可以實現高清視訊會議，同時節約網路頻寬。
本發明實施方式中提供的視訊會議頻寬管理方法，包括：步驟一：從至少一個用戶端發送的視訊中獲取預定數目的連續原始視訊訊框；步驟二：依據預設的視訊壓縮參數對該用戶端發送的視訊進行壓縮，並獲取該原始視訊訊框對應的壓縮後視訊訊框；步驟三：偵測當前網路頻寬並將當前網路頻寬與壓縮後視訊的資料頻寬進行比較；以及步驟四：當該當前網路頻寬大於該壓縮後視訊的資料頻寬時，進行以下步驟：步驟五：依據獲取的該原始視訊訊框和壓縮後視訊訊框計算該壓縮後視訊的影像品質評估值；步驟六：判斷該壓縮後視訊的影像品質評估值是否在預設品質要求範圍內；步驟七：當該壓縮後視訊的影像品質評估值不在該預設品質要求範圍內，調整該視訊壓縮參數並再次壓縮該視訊並重複所述步驟三至步驟七直至該壓縮後視訊的影像品質評估值在該預設品質要求範圍內為止。
優選地，當該壓縮後視訊的影像品質評估值大於該預設品質要求範圍時，降低該視訊壓縮參數，當該壓縮後視訊的影像品質評估值小於該預設品質要求範圍時，調高該視訊壓縮參數。
優選地，該預設品質要求範圍包括高品質要求範圍和低品質要求範圍。
優選地，判斷該壓縮後視訊的影像評估值是否在該預設品質要求範圍內的步驟包括：判斷當前視訊畫面是否為視訊會議主講者畫面，若當前視訊畫面為該視訊會議主講者畫面，判斷該壓縮後視訊的影像品質評估值是否在該高品質要求範圍內。
優選地，調整該視訊壓縮參數的步驟包括：在該壓縮後視訊的影像品質評估值大於該高品質要求範圍時，降低該視訊壓縮參數，在該壓縮後視訊的影像品質評估值小於該高品質要求範圍時，調高該視訊壓縮參數。
優選地，判斷該壓縮後視訊的影像評估值是否在該預設品質要求範圍內的步驟進一步包括：若該當前視訊畫面非該視訊會議主講者畫面，判斷該壓縮後視訊的影像品質評估值是否在該低品質要求範圍內。
優選地，調整該視訊壓縮參數的步驟還包括：在該壓縮後視訊的影像品質評估值大於該低品質要求範圍時，降低該視訊壓縮參數，在該壓縮後視訊的影像品質評估值小於該低品質要求範圍時，調高該視訊壓縮參數。
優選地，該壓縮後視訊的影像品質評估值為預定數目該壓縮後視訊訊框的圖片品質評估值的平均值，該壓縮後視訊訊框的圖片品質評估值是通過與該原始視訊訊框對比得出。
本發明實施方式中提供的視訊會議頻寬管理系統，包括：壓縮模組、第一判斷模組、計算模組、第二判斷模組、調整模組。壓縮模組用於從至少一個用戶端發送的視訊中獲取預定數目的連續原始視訊訊框，並依據預設的視訊壓縮參數對該用戶端發送的視訊進行壓縮，同時獲取該原始視訊訊框對應的壓縮後視訊訊框；第一判斷模組用於偵測當前網路頻寬並將當前網路頻寬與壓縮後視訊的資料頻寬進行比較；計算模組用於在該當前網路頻寬大於該壓縮後視訊的資料頻寬時，依據獲取的該原始視訊訊框和壓縮後視訊訊框計算該壓縮後視訊的影像品質評估值；第二判斷模組用於判斷該壓縮後視訊的影像品質評估值是否在預設品質要求範圍內；調整模組用於在該壓縮後視訊的影像品質評估值不在該預設品質要求範圍內時，調整該視訊壓縮參數再次壓縮該視訊直至該壓縮後視訊的影像品質評估值在該預設品質要求範圍內。
優選地，該調整模組用於：當該壓縮後視訊的影像品質評估值大於該預設品質要求範圍時，降低該視訊壓縮參數，當該壓縮後視訊的影像品質評估值小於該預設品質要求範圍時，調高該視訊壓縮參數。
優選地，該預設品質要求範圍包括高品質要求範圍和低品質要求範圍。
優選地，該第二判斷模組還用於：判斷當前視訊畫面是否為視訊會議主講者畫面，若當前視訊畫面為該視訊會議主講者畫面，判斷該壓縮後視訊的影像品質評估值是否在該高品質要求範圍內。
優選地，該調整模組還用於：在該壓縮後視訊的影像品質評估值大於該高品質要求範圍時，降低該視訊壓縮參數，在該壓縮後視訊的影像品質評估值小於該高品質要求範圍時，調高該視訊壓縮參數。
優選地，該判斷模組進一步用於：若該當前視訊畫面非該視訊會議主講者畫面，判斷該壓縮後視訊的影像品質評估值是否在該低品質要求範圍內。
優選地，該調整模組進一步用於：在該壓縮後視訊的影像品質評估值大於該低品質要求範圍時，降低該視訊壓縮參數，在該壓縮後視訊的影像品質評估值小於該低品質要求範圍時，調高該視訊壓縮參數。
優選地，該壓縮後視訊的影像品質評估值為預定數目壓縮後視訊訊框的圖片品質評估值的平均值，該壓縮後視訊訊框的圖片品質評估值是通過與該原始視訊訊框對比得出。
相較於現有技術，上述視訊會議頻寬管理方法及系統，能夠即時的調整視訊影像的資料頻寬，保證了在網路頻寬不夠的情況實現視訊資料的傳輸，同時在網路頻寬充足的情況下，既能夠確保視訊資料的高品質傳輸，又能避免寶貴的網路頻寬資源的浪費。
以下結合附圖和具體實施例對本發明進行詳細描述，但不作為對本發明的限定。
1‧‧‧伺服器
2‧‧‧用戶端
10‧‧‧視訊會議頻寬管理系統
20‧‧‧視訊轉送單元
30‧‧‧多點控制單元
40‧‧‧信令服務單元
50‧‧‧記憶體
60‧‧‧處理器
101‧‧‧壓縮模組
102‧‧‧第一判斷模組
103‧‧‧計算模組
104‧‧‧第二判斷模組
105‧‧‧調整模組
圖1係為本發明視訊會議頻寬管理系統較佳實施例的運行環境圖。
圖2係為本發明視訊會議頻寬管理系統較佳實施例的功能模組圖。
圖3係為本發明視訊會議用戶端的顯示示意圖。
圖4係為本發明視訊會議頻寬管理系統實現其功能所採用JND-SSIM演算法的說明圖。
圖5係為本發明視訊會議頻寬管理方法較佳實施例的流程圖。
圖6係為本發明針對圖5的細節流程圖。
參閱圖1所示，是本發明視訊會議頻寬管理系統較佳實施例的運行環境圖。視訊會議頻寬管理系統10運行於伺服器1中。伺服器1中還包括通過資料線或信號線相連的視訊轉送單元(Video Forwarder)20、多點控制單元(Multipoint Control Unit，MCU)30、信令服務單元40、記憶體50和處理器60等。
伺服器1通過網路連接於至少一個用戶端2(圖1中示出兩個作為代表)，用於實現該多個用戶端2之間的視訊會議。視訊轉送單元20用於接收各個用戶端2發送的視訊資料以及向多點控制單元30或各個用戶端2轉送視訊資料。多點控制單元30用於對該視訊轉送單元20轉送過來的多路視訊資料進行合成。信令服務單元40用於對各個用戶端2進行連接管理，在進行視訊會議時，每個用戶端2均需先向信令服務單元40進行登錄，並由信令服務單元40進行溝通處理，建立連線。記憶體50用於存儲視訊會議頻寬管理系統10的程式碼等資料。處理器60用於執行視訊會議頻寬管理系統10的各功能模組，以完成本發明。
參閱圖2所示，是本發明視訊會議頻寬管理系統較佳實施例的功能模組圖。
該視訊會議頻寬管理系統10包括壓縮模組101、第一判斷模組102、計算模組103、第二判斷模組104和調整模組105。
壓縮模組101從用戶端2傳送的視訊中獲取預定數目的連續原始視訊訊框，並對該視訊進行壓縮。在數字通信領域，視訊訊號數位化後資料頻寬很高，通常在700MB/秒以上，因此電腦很難對之進行保存和處理。採用壓縮技術通常可使資料頻寬降到1-10MB/秒，這樣就可以將視訊訊號保存在電腦中並作相應的處理。在本實施方式中，視訊壓縮方法並不受限制，可以是本領域中的任何一種視訊壓縮方法，另外，上述獲取的原始視訊訊框的預定數目為人為設定。在本實施方式中，優選的視訊壓縮方法為H.264，優選的原始視訊訊框的預定數目為15訊框。
第一判斷模組102偵測當前網路頻寬並判斷當前網路頻寬是否大於壓縮後視訊的資料頻寬(即壓縮後視訊的位元速率)。由於獲悉當前網路頻寬的方法乃本領域的一種習知技術，本文將不做詳細的說明。在本實施方式中， 視訊的資料頻寬與當前網路頻寬的相對大小，會影響到資料的傳送效果。一旦所需傳輸視訊的資料頻寬比當前網路頻寬大，則必定會導致資料封包的丟失，以至於接收的視訊出現失真的情況。
計算模組103在當前網路頻寬大於壓縮後視訊資料頻寬的情況下，計算壓縮後視訊的影像品質，進而得到一個影像品質評估值，該影像品質評估值是視訊中多個視訊訊框圖片品質評估值的一個平均值，其反映了一個視訊壓縮後的一個品質，其值越大越好，最大為1。其中，圖片品質評估值的計算可以依據現有的圖像品質評估演算法進行計算，比如SSIM(structural similarity，結構相似性)以及MS-SSIM(multi-scale structural similarity，多尺度結構相似度)。 在本實施方式中，圖片品質評估值的優選演算法依據的是一種結合人眼視覺特性的圖像品質演算法，在本文中，我們稱之為JND-SSIM演算法。其中JND(Just-Noticeable Difference)為最小可覺差，是差別閾限值(difference threshold)的別稱。SSIM(structural similarity)為一種結構相似性衡量理論。針對本文中的JND-SSIM演算法，後文將做更進一步的詳細說明，在此便不多做闡述。
第二判斷模組104判斷計算模組103計算的影像品質評估值是否在當前視訊的預設品質要求範圍內。在本實施方式中，第二判斷模組104還會偵測當前視訊畫面是否為視訊會議主講者畫面。在用戶端2上，主講者一般以清晰的畫質加以顯示，而非主講者則對畫質要求較低。如圖3所示，左上角的畫面大而清晰，則為會議主講者，而其周圍小而不清晰的畫面則為會議非主講者。 在本實施方式中，會議主講者的畫面會預設一個高品質要求範圍，而會議非主講者的畫面則會預設一個低品質要求範圍。在本實施方式中，高品質要求的範圍為0.92~0.98，低品質要求的範圍為0.70~0.80，當然，在其他實施方式中，高品質要求範圍或者低品質要求範圍也可以根據實際需要設為其他數值範圍。
調整模組105在壓縮後視訊的影像品質評估值不在當前視訊的預設品質要求範圍內時，調整視訊的壓縮參數並把調整的壓縮參數傳遞給壓縮模組101，以至於壓縮後視訊的影像品質評估值處於預設品質要求範圍內。在本實施方式中，當第二判斷模組104判斷壓縮後視訊的影像品質評估值不在預設的高品質要求範圍內時，調整視訊的壓縮參數，即調整視訊壓縮後的目標位元速率。 具體表現為：當壓縮後視訊的影像品質評估值大於高品質要求範圍的上限時，降低該視訊壓縮參數，進而降低視訊壓縮後的影像品質評估值，以及當壓縮後 視訊的影像品質評估值小於高品質要求範圍的下限時，提高該視訊壓縮參數，進而提升視訊壓縮後的影像品質評估值。在本實施方式中，當第二判斷模組104判斷壓縮後視訊的影像品質評估值不在低品質要求範圍內時，調整視訊的壓縮參數。具體表現為：當壓縮後視訊的影像品質評估值大於低品質要求範圍的上限時，降低該視訊壓縮參數，進而降低視訊壓縮後的影像品質評估值，以及當壓縮後視訊的影像品質評估值小於低品質要求範圍的下限時，提高該視訊壓縮參數，進而提升視訊壓縮後的影像品質評估值。在本實施方式中，調整視訊的壓縮參數均以一定幅度調整，如100Kbps。
參閱圖4所示，是本發明視訊會議頻寬管理系統10實現其功能所採用JND-SSIM演算法的說明圖。下文將結合圖4對JND-SSIM演算法進行一個簡單的說明。
SSIM(structural similarity，結構相似性)是一種常見的圖像品質評價演算法，此演算法從圖像的亮度、對比度及結構性來判別圖像壓縮後的品質。 JND(Just-Noticeable Difference，最小可覺差)實質是心理物理學研究中的一種統計模型，可反映出人眼在接收圖像資訊時，所能察覺到的最小差異。而在HVS(Human Visual System，人體視覺系統)的研究中，人眼對圖像邊界部分和紋理部分的變化感知能力較強，即人眼對圖像從邊界部分或紋理部分轉變為平滑部分時，敏感度最高。故針對JND和SSIM的特點，結合JND和SSIM的特點並進行區塊分類轉換(Block Classification)，對壓縮後圖像做出一個符合人眼生理特性的評價。
如圖4所示，上述JND-SSIM演算法包括圖中阿拉伯數字表示的六個步驟：第1，上述視訊會議頻寬管理系統10中的計算模組103獲取原始視訊訊框和壓縮後視訊訊框；第2，視訊會議頻寬管理系統10依據如下公式計算壓縮後視訊訊框的NPD值： 其中|ref(x,y)-dis(x,y)|代表原始視訊訊框與壓縮後視訊訊框的圖元數的絕對差值，JND ref(x,y)為原始視訊訊框的JND數值，該數值可依據現有的JND演算法 得出；第3，對於圖片而言，一般具有三個區域，即平滑區域、紋理區域以及邊緣區域，故視訊會議頻寬管理系統10便將原始視訊訊框和壓縮後視訊訊框分為平滑區域、紋理區域以及邊緣區域；第4，視訊會議頻寬管理系統10計算壓縮後視訊訊框的SSIM數值分佈，其中SSIM數值分佈對應壓縮後視訊訊框的每一個圖元點；第5，根據第3步中兩個視訊訊框的對比以及第4步的SSIM數值分佈，找出從原始視訊訊框的平滑區域經壓縮後變成壓縮後視訊訊框的紋理區域的SSIM分佈(P2T區域)、從原始視訊訊框的邊緣區域經壓縮後變成壓縮後視訊訊框的平滑區域的SSIM分佈(E2P區域)、從原始視訊訊框的邊緣區域經壓縮後變成壓縮後視訊訊框的邊緣區域的SSIM分佈(E2E區域)、從原始視訊訊框的紋理區域經壓縮後變成壓縮後視訊訊框的平滑區域的SSIM分佈(T2P區域)以及其他變動區域(rest region)的SSIM分佈；第6，依據下列公式對P2T區域、E2P區域、E2E區域以及T2P區域的SSIM進行調整，並依據各個區域調整後的SSIM分佈計算影像品質評估值，即JND-SSIM數值，具體如以下公式所示：
在上述公式中，N P2T 代表P2T區域的畫素數，N E2P 、N E2E 、N T2P 和N R 同樣代表著對應區域的畫素數，SSIM P2T 、SSIM E2P 、SSIM E2E 、SSIM T2P 以及SSIM R 分別代表對應區域的SSIM數值分佈，M和N分別代表著每個訊框圖像的維度，而S和W均為對應區域的調節參數，其中W P2T 、W E2P 、W E2E 、W T2P 、W R 的值均為人為設定。根據以上公式的運算，視訊會議頻寬管理系統10可以很快計算出一個符合人眼生理特性的圖片品質評估值，再對所有壓縮後視訊訊框的圖片品質評估值求平均數即得壓縮後視訊的影像品質評估值。
參閱圖5所示，是本發明視訊會議頻寬管理方法較佳實施例的流程圖。該視訊會議頻寬管理方法可通過該處理器60執行圖2所示的模組101~105而實現。
步驟S500，壓縮模組101從用戶端2傳送的視訊中獲取預定數目的連續原始視訊訊框，並對該視訊進行壓縮。在數位通信領域，視訊訊號數位化後資料頻寬很高，通常在700MB/秒以上，因此電腦很難對之進行保存和處理。 採用壓縮技術通常可使資料頻寬降到1-10MB/秒，這樣就可以將視訊訊號保存在電腦中並作相應的處理。在本實施方式中，視訊壓縮方法並不受限制，可以是本領域中的任何一種視訊壓縮方法，另外，上述獲取的原始視訊訊框的預定數目為人為設定。在本實施方式中，優選的視訊壓縮方法為H.264，優選的原始視訊訊框的預定數目為15訊框。
步驟S502，第一判斷模組102偵測當前網路頻寬並判斷當前網路頻寬是否大於壓縮後視訊的資料頻寬(即壓縮後視訊影像的位元速率)。由於獲悉當前網路頻寬的方法乃本領域的一種習知技術，本文將不做詳細的說明。 在本實施方式中，視訊影像的資料頻寬與當前網路頻寬的相對大小，會影響到資料的傳送效果。一旦所需傳輸的視訊資料頻寬比當前網路頻寬大，則肯定會導致資料封包的丟失，以至於接收的視訊影像出現失真的情況。
步驟S504，計算模組103在當前網路頻寬大於壓縮後視訊資料頻寬的情況下，計算該壓縮後視訊的影像品質評估值，該影像品質評估值是視訊中多個視訊訊框圖片品質評估值的一個平均值，其反映了一個視訊壓縮後的一個品質。在本實施方式中，圖片品質評估值的演算法依據的是一種結合人眼視覺特性的圖像品質演算法，在本文中，我們稱之為JND-SSIM演算法，其具體內容上文已作解釋，此處便不再做出說明。
步驟S506，第二判斷模組104判斷計算模組103計算的影像評估數值是否不在當前視訊的預設品質要求範圍內。在本實施方式中，一旦計算的影像品質評估值不在當前視訊的預設品質要求範圍內，則說明壓縮後的視訊畫質不符合預定要求。
步驟S508，調整模組105在壓縮後視訊的影像品質評估值不在當前視訊的預設品質要求範圍內時，調整視訊的壓縮參數，進而使壓縮模組101依據新的壓縮參數對所需傳送視訊進行壓縮，同時獲取壓縮後視訊訊框，並持續執行步驟S502-S508，直至壓縮後視訊的影像品質評估值在當前視訊的預設品質要求範圍內時為止。另外，若在步驟S502中判斷當前網路頻寬小於壓縮後視訊的資料頻寬時，調整模組105也調整視訊的壓縮參數，進而使壓縮模組101依據新的壓縮參數對該視訊進行壓縮，並持續執行步驟S502以及S508直至當前網路頻寬大於壓縮後視訊的資料頻寬。
參閱圖6所示，是針對圖5中S506和S508的細節流程圖。
步驟S600，第二判斷模組104通過判斷當前視訊畫面是否為視訊會議主講者畫面。在本實施方式中，會議主講者的畫面會有預設一個高品質要求範圍，而會議非主講者的畫面則會預設一個低品質要求範圍。在本實施方式中，高品質要求範圍為0.92~0.98，低品質要求範圍為0.7~0.8，當然，在其他實施方式中，高品質要求範圍或者低品質要求範圍也可以根據實際需要設為其他數值範圍。
步驟S602，在當前視訊畫面為主講者畫面時，第二判斷模組104判斷計算的影像品質評估值是否不在當前視訊預設的高品質要求範圍內。在本實施方式中，高品質要求範圍代表使用者對當前視訊影像畫質的要求很高，如圖3中視訊終端顯示的畫面較大的主畫面。
步驟S604，當計算的影像品質評估值不在當前視訊預設的高品質要求範圍或當前視訊預設的低品質要求範圍時，調整模組105調整視訊的壓縮參數，進而使壓縮模組101依據新的壓縮參數對所需傳送視訊進行壓縮，以至於壓縮後的視訊頻寬得到調整，進而使壓縮後視訊的影像品質評估值處於預設品質要求範圍內。在本實施方式中，在影像品質評估值超過了高品質要求範圍或低品質要求範圍的上限時，調整模組105降低視訊壓縮參數，進而降低視訊壓縮後的影像品質評估值，在影像品質評估值低於最高品質要求範圍或最低品質要求 範圍的下限時，調整模組105提高視訊壓縮參數，進而提升視訊壓縮後的影像品質評估值。在本實施方式中，對壓縮參數的調整都是依據一定幅度進行調整，如100Kbps。
步驟S606，在當前畫面非主講者畫面時，第二判斷模組104判斷計算的影像品質評估值是否不在當前視訊預設的低品質要求範圍內。在本實施方式中，低品質要求範圍代表使用者對當前視訊影像畫質的要求不高，如圖3中視訊終端顯示的畫面較小的分畫面。
通過將上述方法應用於上述裝置，不僅可以使視訊會議的視訊畫面滿足使用者的預設需求，同時也能最大限度的避免網路頻寬的浪費，進而實現網路頻寬的最大利用率。
值得注意的是，以上實施例僅用以說明本發明的技術方案而非限制，儘管參照較佳實施例對本發明進行了詳細說明，本領域的普通技術人員應當理解，可以對本發明的技術方案進行修改或等同替換，而不脫離本發明技術方案的精神和範圍。
1‧‧‧視訊會議頻寬管理系統
101‧‧‧壓縮模組
102‧‧‧第一判斷模組
103‧‧‧計算模組
104‧‧‧第二判斷模組
105‧‧‧調整模組

Claims (16)

  1. 一種視訊會議頻寬管理方法，應用於連接至少一個用戶端的伺服器中，該方法包括：步驟一：從該至少一個用戶端發送的視訊中獲取預定數目的連續原始視訊訊框；步驟二：依據預設的視訊壓縮參數對該用戶端發送的視訊進行壓縮，並獲取該等原始視訊訊框對應的壓縮後視訊訊框；步驟三：偵測當前網路頻寬並將當前網路頻寬與壓縮後視訊的資料頻寬進行比較；以及步驟四：當該當前網路頻寬大於該壓縮後視訊的資料頻寬時，進行以下步驟：步驟五：依據獲取的該等原始視訊訊框和該等壓縮後視訊訊框計算該壓縮後視訊的影像品質評估值；步驟六：判斷該壓縮後視訊的影像品質評估值是否在預設品質要求範圍內；及步驟七：當該壓縮後視訊的影像品質評估值不在該預設品質要求範圍內，調整該視訊壓縮參數並再次壓縮該視訊並重複所述步驟三至步驟七直至該壓縮後視訊的影像品質評估值在該預設品質要求範圍內為止。
  2. 如申請專利範圍第1項所述之視訊會議頻寬管理方法，其中，調整該視訊壓縮參數的步驟包括：當該壓縮後視訊的影像品質評估值大於該預設品質要求範圍時，降低該視訊壓縮參數；及當該壓縮後視訊的影像品質評估值小於該預設品質要求範圍時，調高該視訊壓縮參數。
  3. 如申請專利範圍第1項所述之視訊會議頻寬管理方法，其中，該預設品質要求範圍包括高品質要求範圍和低品質要求範圍。
  4. 如申請專利範圍第3項所述之視訊會議頻寬管理方法，其中，判斷該壓縮後視訊的影像評估值是否在該預設品質要求範圍內的步驟包括：判斷當前視訊畫面是否為視訊會議主講者畫面；及若當前視訊畫面為該視訊會議主講者畫面，判斷該壓縮後視訊的影像品質評估值是否在該高品質要求範圍內。
  5. 如申請專利範圍第4項所述之視訊會議頻寬管理方法，其中，調整該視訊壓縮參數的步驟包括：在該壓縮後視訊的影像品質評估值大於該高品質要求範圍時，降低該視訊壓縮參數；及在該壓縮後視訊的影像品質評估值小於該高品質要求範圍時，調高該視訊壓縮參數。
  6. 如申請專利範圍第4項所述之視訊會議頻寬管理方法，其中，判斷該壓縮後視訊的影像評估值是否在該預設品質要求範圍內的步驟進一步包括：若該當前視訊畫面非該視訊會議主講者畫面，判斷該壓縮後視訊的影像品質評估值是否在該低品質要求範圍內。
  7. 如申請專利範圍第6項所述之視訊會議頻寬管理方法，其中，調整該視訊壓縮參數的步驟包括：在該壓縮後視訊的影像品質評估值大於該低品質要求範圍時，降低該視訊壓縮參數；及在該壓縮後視訊的影像品質評估值小於該低品質要求範圍時，調高該視訊壓縮參數。
  8. 如申請專利範圍第1項所述之視訊會議頻寬管理方法，其中，該壓縮後視訊的影像品質評估值為預定數目該壓縮後視訊訊框的圖片品質評估值的平均值，該壓縮後視訊訊框的圖片品質評估值是通過與該原始視訊訊框對比得出。
  9. 一種視訊會議頻寬管理系統，運行於連接至少一個用戶端的伺服器中，該系統包括：壓縮模組，用於從該至少一個用戶端發送的視訊中獲取預定數目的連續原始視訊訊框，並依據預設的視訊壓縮參數對該用戶端發送的視訊進行壓縮，同時獲取該等原始視訊訊框對應的壓縮後視訊訊框；第一判斷模組，用於偵測當前網路頻寬並將當前網路頻寬與壓縮後視訊的資料頻寬進行比較； 計算模組，用於在該當前網路頻寬大於該壓縮後視訊的資料頻寬時，依據獲取的該等原始視訊訊框和該等壓縮後視訊訊框計算該壓縮後視訊的影像品質評估值；第二判斷模組，用於判斷該壓縮後視訊的影像品質評估值是否在預設品質要求範圍內；及調整模組，用於在該壓縮後視訊的影像品質評估值不在該預設品質要求範圍內時，調整該視訊壓縮參數並再次壓縮該視訊直至該壓縮後視訊的影像品質評估值在該預設品質要求範圍內。
  10. 如申請專利範圍第9項所述之視訊會議頻寬管理系統，其中，該調整模組用於：當該壓縮後視訊的影像品質評估值大於該預設品質要求範圍時，降低該視訊壓縮參數；及當該壓縮後視訊的影像品質評估值小於該預設品質要求範圍時，調高該視訊壓縮參數。
  11. 如申請專利範圍第9項所述之視訊會議頻寬管理系統，其中，該預設品質要求範圍包括高品質要求範圍和低品質要求範圍。
  12. 如申請專利範圍第11項所述之視訊會議頻寬管理系統，其中，該第二判斷模組還用於：判斷當前視訊畫面是否為視訊會議主講者畫面；若當前視訊畫面為該視訊會議主講者畫面，判斷該壓縮後視訊的影像品質評估值是否在該高品質要求範圍內。
  13. 如申請專利範圍第12項所述之視訊會議頻寬管理系統，其中，該調整模組還用於：在該壓縮後視訊的影像品質評估值大於該高品質要求範圍時，降低該視訊壓縮參數；及在該壓縮後視訊的影像品質評估值小於該高品質要求範圍時，調高該視訊壓縮參數。
  14. 如申請專利範圍第12項所述之視訊會議頻寬管理系統，其中，該判斷模組進一步用於：若該當前視訊畫面非該視訊會議主講者畫面，判斷該壓縮後視訊的影像品質評估值是否在該低品質要求範圍內。
  15. 如申請專利範圍第14項所述之視訊會議頻寬管理系統，其中，該調整模組進一步用於：在該壓縮後視訊的影像品質評估值大於該低品質要求範圍時，降低該視訊壓縮參數；及在該壓縮後視訊的影像品質評估值小於該低品質要求範圍時，調高該視訊壓縮參數。
  16. 如申請專利範圍第9項所述之視訊會議頻寬管理系統，其中，該壓縮後視訊的影像品質評估值為預定數目壓縮後視訊訊框的圖片品質評估值的平均值，該壓縮後視訊訊框的圖片品質評估值是通過與該原始視訊訊框對比得出。
TW103131990A 2014-09-16 2014-09-16 視訊會議頻寬管理方法及系統 TWI586175B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW103131990A TWI586175B (zh) 2014-09-16 2014-09-16 視訊會議頻寬管理方法及系統
US14/810,136 US9357170B2 (en) 2014-09-16 2015-07-27 Device and method for managing bandwidth of video conference

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW103131990A TWI586175B (zh) 2014-09-16 2014-09-16 視訊會議頻寬管理方法及系統

Publications (2)

Publication Number Publication Date
TW201613345A TW201613345A (en) 2016-04-01
TWI586175B true TWI586175B (zh) 2017-06-01

Family

ID=55456104

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103131990A TWI586175B (zh) 2014-09-16 2014-09-16 視訊會議頻寬管理方法及系統

Country Status (2)

Country Link
US (1) US9357170B2 (zh)
TW (1) TWI586175B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106101602B (zh) * 2016-08-30 2019-03-29 北京北信源软件股份有限公司 一种带宽自适应改善网络视频质量的方法
US11394863B2 (en) * 2018-09-06 2022-07-19 Arlo Technologies, Inc. No-reference image quality assessment for iterative batch video analysis
CN114073097A (zh) * 2019-07-17 2022-02-18 皇家Kpn公司 通过边缘计算促进视频流式传输和处理
CN114600468B (zh) 2019-09-03 2024-06-25 皇家Kpn公司 将复合视频流中的视频流与元数据组合的组合器系统、接收器设备、计算机实现的方法和计算机可读介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101047845A (zh) * 2006-03-29 2007-10-03 腾讯科技（深圳）有限公司 一种调节视频通讯数据码率的装置和方法
CN101072320A (zh) * 2007-06-19 2007-11-14 中兴通讯股份有限公司 会议电视升降速方法
CN101115196A (zh) * 2006-07-27 2008-01-30 腾讯科技（深圳）有限公司 调节视频质量的方法、系统及终端
TW201021576A (en) * 2008-11-18 2010-06-01 Univ Nat Taiwan System and method for dynamic video encoding in multimedia streaming
CN103248877A (zh) * 2013-05-14 2013-08-14 重庆讯美电子有限公司 一种动态调整码率的解码方法及系统
US20140247318A1 (en) * 2008-09-12 2014-09-04 Centurylink Intellectual Property Llc System and method for initiating a video conferencing through a streaming device

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6014694A (en) * 1997-06-26 2000-01-11 Citrix Systems, Inc. System for adaptive video/audio transport over a network
US20090052540A1 (en) * 2007-08-23 2009-02-26 Imagine Communication Ltd. Quality based video encoding

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101047845A (zh) * 2006-03-29 2007-10-03 腾讯科技（深圳）有限公司 一种调节视频通讯数据码率的装置和方法
CN101115196A (zh) * 2006-07-27 2008-01-30 腾讯科技（深圳）有限公司 调节视频质量的方法、系统及终端
CN101072320A (zh) * 2007-06-19 2007-11-14 中兴通讯股份有限公司 会议电视升降速方法
US20140247318A1 (en) * 2008-09-12 2014-09-04 Centurylink Intellectual Property Llc System and method for initiating a video conferencing through a streaming device
TW201021576A (en) * 2008-11-18 2010-06-01 Univ Nat Taiwan System and method for dynamic video encoding in multimedia streaming
CN103248877A (zh) * 2013-05-14 2013-08-14 重庆讯美电子有限公司 一种动态调整码率的解码方法及系统

Also Published As

Publication number Publication date
US20160080692A1 (en) 2016-03-17
TW201613345A (en) 2016-04-01
US9357170B2 (en) 2016-05-31

Similar Documents

Publication Publication Date Title
WO2021244341A1 (zh) 图像编码方法及装置、电子设备及计算机可读存储介质
US10878543B2 (en) Group management method, terminal, and storage medium
WO2018103243A1 (zh) 一种带宽节省方法、系统、直播终端及可读取存储介质
WO2023134523A1 (zh) 内容自适应视频编码方法、装置、设备和存储介质
EP3952307A1 (en) Video processing apparatus and processing method of video stream
WO2018120946A1 (zh) 视频画面异常判断、装置及终端设备
US10003765B2 (en) System and method for brightening video image regions to compensate for backlighting
TWI586175B (zh) 視訊會議頻寬管理方法及系統
CN108198155B (zh) 一种自适用色调映射方法及系统
US12022096B2 (en) Human visual system adaptive video coding
US11431993B2 (en) Method and apparatus for processing encoded data, computer device, and storage medium
US20110018962A1 (en) Video Conferencing Signal Processing System
CN112771570A (zh) 视频保真度度量
US20210258584A1 (en) Static video recognition
WO2020108010A1 (zh) 视频处理方法、装置、电子设备以及存储介质
WO2020108060A1 (zh) 视频处理方法、装置、电子设备以及存储介质
CN110740316A (zh) 数据编码方法及装置
CN107197266B (zh) 一种hdr视频编码方法
CN105491320B (zh) 视频会议带宽管理方法及系统
JP7334470B2 (ja) 映像処理装置、ビデオ会議システム、映像処理方法、およびプログラム
KR101742258B1 (ko) 웹 기반 가상 데스크탑 프로토콜을 이용한 컨텐츠 제공 방법 및 장치
US20190306462A1 (en) Image processing apparatus, videoconference system, image processing method, and recording medium
CN104836982A (zh) 一种视频聊天的图像处理方法及装置
Malekmohamadi et al. A new reduced reference metric for color plus depth 3D video
WO2023093240A1 (zh) 视频数据处理方法、装置、设备和计算机存储介质

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees