TWI483597B - 視訊會議速率匹配 - Google Patents

視訊會議速率匹配 Download PDF

Info

Publication number
TWI483597B
TWI483597B TW098138297A TW98138297A TWI483597B TW I483597 B TWI483597 B TW I483597B TW 098138297 A TW098138297 A TW 098138297A TW 98138297 A TW98138297 A TW 98138297A TW I483597 B TWI483597 B TW I483597B
Authority
TW
Taiwan
Prior art keywords
clients
video
video stream
client
stream
Prior art date
Application number
TW098138297A
Other languages
English (en)
Other versions
TW201029409A (en
Inventor
Ming-Chieh Lee
Mu Han
Tim Moore
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of TW201029409A publication Critical patent/TW201029409A/zh
Application granted granted Critical
Publication of TWI483597B publication Critical patent/TWI483597B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827—Network arrangements for conference optimisation or adaptation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25833—Management of client data involving client hardware characteristics, e.g. manufacturer, processing or storage capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/44029—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

視訊會議速率匹配
本發明是有關於視訊會議速率匹配。
視訊會議上的速率匹配是一種用以改善視訊會議效能的處理程序。在有些情況下，一透過網際網路所連接的視訊會議客戶端可能具備不穩定的頻寬量，而其他的客戶端則是位於一擁有穩定頻寬量的企業內網路上。該網際網路客戶端可能無法收到如該等企業內網路客戶端般之相同品質的視訊串流，並因而此視訊會議系統可能會促使將所有參與者的視訊品質劣化至最低效能之客戶端所能處理的水準。換言之，該系統可能會迫使該等企業內網路客戶端妥協並犧牲其功能性，並僅以具有低解析度及低視框(frame)速率經驗的低位元速率串流進行編碼/接收。
例如，該等企業內網路客戶端或許能夠依每秒30個視框的視框速率(fps)而按照VGA解析度(每個視框640×480個像素)進行編碼及播放。然而企業內網路客戶端也許僅能以15fps的速率而按照CIF解析度(320×240)編碼與接收。傳統的策略為強制每一客戶端按照較低、CIF解析度來編碼及接收，或是令一視訊會議系統自一VGA解析度串流丟棄替代性視框。
本發明提供一種視訊會議速率匹配。本「發明內容」係經提供以介紹一種按照一較簡化形式，而在後文「實施方式」所進一步描述的選擇性概念。本「發明內容」並非為以識別所主張之申請標的之關鍵特性或必要特性。本「發明內容」亦非用以限制所主張之申請標的之範圍。
本發明提供一種視訊會議速率匹配。一視訊會議伺服器可在一視訊會議上自客戶端接收視訊來源串流。該伺服器可分析各個客戶端的功能性，並且根據該等功能性選擇一視訊串流以發送至各個客戶端。例如，一能夠編碼且解碼一高清晰度視訊串流的客戶端可提供三個來源視訊串流-一高解析度串流、一中解析度串流及一低解析度串流。該伺服器可僅將該低解析度串流發送至一具有低可獲用頻寬量的客戶端。該伺服器可藉由足夠用於高清晰度串流的頻寬，將中解析度串流發送至另一並無解碼高清晰度串流之能力的客戶端。
前述概要以及後文實施方式兩者皆提供多項範例並僅具解釋性質。從而，前述概要以及後文實施方式不應將被解讀為限制性。此外，除本揭示所述者外，亦可提供多項特性或變化方式。例如，具體實施例可為針對於詳實施方式之中所描述的各種特性組合與子組合。
後文實施方式參照於多幅隨附圖式。在可能情況下，在該等圖式及後文說明裡使用相同的參考編號以參照於相同或類似的構件。在此雖說明多項本發明具體實施例，然而修改、調適和其他實作亦為可行。例如，可對該等圖式中所繪示的構件進行替換、新增或修改，同時可藉由將多個階段替換、重排或新增於所揭示方法以修改本揭示所述之方法。從而，後文實施方式並不對本發明加以限制。相反地，本發明的適當範疇是由後載之申請專利範圍所定義。
本發明提供一種視訊會議速率匹配。根據本發明之具體實施例，可利用一多重位元速率(MBR)法則以依據客戶端之能力將資料串流傳送至客戶端以接收且處理該資料。
第1圖係一操作環境的方塊圖。該操作環境可包含一視訊會議系統100。該視訊會議系統100可包含一企業內網路客戶端110，以及一透過一企業內網路連接115所連接的視訊會議伺服器120。該視訊會議系統100可進一步包含一第一網際網路客戶端130、一第二網際網路客戶端140以及一第三網際網路客戶端150。該等網際網路客戶端各者可經由網際網路160而連接至該視訊會議伺服器120。根據本發明之具體實施例，該等視訊會議伺服器120、企業內網路客戶端110、第一網際網路客戶端130、第二網際網路客戶端140和第三網際網路客戶端150各者可含有一計算裝置600，即如後文中依照於第6圖所詳述者。
當多個客戶端意欲於彼此之間共享資料串流時，即可運用該視訊會議系統100。各個客戶端可連接至該視訊會議伺服器120。該視訊會議伺服器120可維護一哪些客戶端係經連接並且各個客戶端之功能性如何的列表。根據本發明之具體實施例，該視訊會議伺服器120可週期性地更新在該客戶端之功能性方面的任何變化。例如，該視訊會議伺服器120可對該企業內網路連接115進行分析，並且決定該企業內網路客戶端110比起先前所決定者而具備較多的可獲用頻寬。該視訊會議伺服器120可儲存此項資訊以有助於資料共享。該視訊會議伺服器120可負責決定哪些客戶端可負責將資料串流發送至該視訊會議伺服器120，同時負責將資料串流送出至各個所連接的客戶端。
各個客戶端可編碼至少一資料串流，而予以發送至該視訊會議伺服器120。例如，各個客戶端可具備一經連接至該客戶端的音訊/視訊輸出，像是一網路攝像機及/或麥克風。該輸入可用於產生一視訊串流(此串流可含有音訊)，並且先對該視訊串流進行編碼，然後再將其發送至該視訊會議伺服器120。該視訊會議伺服器120可自各個客戶端接收該等經編碼串流，並且決定將哪些串流中繼傳送至各個客戶端。例如，該企業內網路客戶端110可將一視訊串流編碼為一系列其中含有一目前正在發言之人士的視框。該視訊會議伺服器120可將顯示有該目前發言者的經編碼串流自該企業內網路客戶端110發送至該等第一網際網路客戶端130、第二網際網路客戶端140及第三網際網路客戶端150。該視訊會議伺服器120可將一經編碼之來源串流自該等第一網際網路客戶端130、第二網際網路客戶端140及第三網際網路客戶端150各者發送至該企業內網路客戶端110以顯示出該等觀眾成員。
第2A-2C圖為說明利用不同視框類型之視訊串流編碼演算法的圖式。一視訊串流可經編碼為一系列的視框，而其中各個視框可含有一單一影像。各個視框可為由資料位元所表示。該視訊串流可經如此編碼而無需發送每個視框之內的每一資料位元以表示該視訊串流的來源。可利用不同的視框類型來編碼及/或壓縮該視訊串流。
視框類型可包含I-視框、P-視框及B-視框。I-視框代表「框內-視框」，並且可含有一視框，此者可藉其本身所解碼而無須參照於一視訊串流之內的任何其他視框。P-視框是代表「預測視框」，並且可藉由參照於該視訊串流序之內的至少一先前視框所解碼。而B-視框則表示「雙向式預測視框」，並且可藉由參照於該視訊串流之內的至少一先前視框及至少一後續視框所解碼。
第2A圖包含一I(框內)視框210。該I-視框210可經編碼而無須參照於其他視框，同時可為獨立於任何其他視框所解碼。I-視框可供在一視訊串流之內隨機存取。I-視框在大小方面可為最多視框且經最低壓縮。
第2B圖包含一P(預測)視框230。該P-視框230可為利用一作為參考的先前視框220所編碼，並且僅在可獲用該先前視框220時方得經正確地解碼。比起I-視框210，P-視框230可為較小並更經壓縮。該先前視框220可包含一I視框及/或一P-視框。
第2C圖包含一B(雙向式)視框250。該B-視框250可為利用來自一先前視框240及一次一視框260的資訊所編碼。若能獲用該等先前視框240及次一視框260，則B-視框250可被正確地解碼。比起P-視框230及I-視框210，B-視框250可為更小且更為壓縮。
利用不同的視框類型來編碼該視訊串流即能充分運用其中在兩個後續視框之間具有極高類似度的來源，藉以減少需予發送至一觀看客戶端的資料量。例如，該企業內網路客戶端110可對一位於一靜態背景前正在進行發言之人士的視訊串流進行編碼並予傳送。由於該發言人士可能不會大幅移動，因此該視訊串流可為利用P-視框所編碼，故而P-視框230可僅含有表示當相較於先前視框220時在影像中有所變動的資料位元。
第3圖係一說明視訊會議速率匹配的圖式。即如前文中按照第1圖所述，該視訊會議系統100可包含該企業內網路客戶端110、該視訊會議伺服器120、該第一網際網路客戶端130、以及該第二網際網路客戶端140。根據本發明之具體實施例，該視訊會議系統100內的客戶端可為依不同頻寬及/或不同視訊編碼且/或解碼功能性所連接。該視訊會議系統100內的各個客戶端可註冊於該視訊會議伺服器120，同時建立至少一功能性，像是可獲用頻寬、最大編碼解析度、最大解碼解析度以及可獲用資料編碼和/或解碼演算法。例如，該企業內網路客戶端110可註冊於該視訊會議伺服器120，並建立一2Mbps的可獲用頻寬而具備對一按照30fps而具VGA(640x480)解析度和按照15fps而具CIF(320x240)解析度之視訊串流進行編碼/解碼的功能性。該第一網際網路客戶端130可註冊於該視訊會議伺服器120，並且建立一150Kbps的可獲用頻寬而具備對一按照30fps而具720p(1280x720)解析度、按照30fps而具VGA(640x480)解析度和按照15fps而具CIF(320x240)解析度之視訊串流進行編碼/解碼的功能性。該第二網際網路客戶端140可註冊於該視訊會議伺服器120，並且建立一200Kbps的可獲用頻寬而具備對一按照15fps而具CIF(320x240)解析度之視訊串流進行編碼/解碼的功能性。
根據本發明之具體實施例，該等客戶端可編碼一視訊串流，然該等可能並無法加以解碼，且反之亦然。例如，該第二網際網路客戶端140或許能夠接收並解碼VGA解析度視訊串流，然或僅能編碼一CIF解析度視訊串流。在此一情境下，該企業內網路客戶端110及該第一網際網路客戶端130可僅按照VGA解析度編碼一單一視訊串流，而該視訊會議伺服器120將此串流發送至該第二網際網路客戶端140。來自該第二網際網路客戶端140而經CIF解析度編碼的視訊串流可繼續被發送至該企業內網路客戶端110及該第一網際網路客戶端130。
在建立一視訊會議通話並且各個客戶端的功能性既經註冊於該視訊會議伺服器120之後，該視訊會議伺服器120可將一編碼請求通訊至各個客戶端。例如，該企業內網路客戶端110及該第一網際網路客戶端130可經請求以各者編碼兩個視訊串流，並將其發送至該視訊會議伺服器120-該視訊串流的一第一版本可為依30fps而按照VGA解析度所編碼，而該視訊串流的一第二版本則可依15fps而按照CIF解析度所編碼。該第二網際網路客戶端140可經請求以依15fps而按照CIF解析度編碼一個視訊串流。
接著，該視訊會議伺服器120可自各個客戶端接收該(等)串流，並且根據各個客戶端所註冊及/或所決定的功能性，像是決定哪些編碼演算法可供各個客戶端進行解碼，選擇至少一所接收串流以發送至各個客戶端。例如，該視訊會議伺服器120可決定該第二網際網路客戶端140僅能解碼一CIF解析度視訊串流，而同時該企業內網路客戶端110及該第一網際網路客戶端則能夠解碼VGA解析度和CIF解析度視訊串流兩者。然後，該視訊會議伺服器120可將自該第二網際網路客戶端140所接收到的CIF解析度串流發送至該企業內網路客戶端110及該第一網際網路客戶端130。該視訊會議伺服器120可將該VGA解析度串流自該企業內網路客戶端110發送至該第一網際網路客戶端130，並且將該CIF串流自該企業內網路客戶端110發送至該第二網際網路客戶端140。同樣地，該視訊會議伺服器120可將該VGA解析度串流自該第一網際網路客戶端130發送至該企業內網路客戶端110，並且將該CIF串流自該第一網際網路客戶端130發送至該第二網際網路客戶端140。
該視訊會議伺服器120可決定各個客戶端是否具備足夠的頻寬以接收一視訊串流，並且可根據該決定結果來選擇一不同串流。根據本發明之進一步具體實施例，該視訊會議伺服器120及/或該等客戶端之一者，像是該第一網際網路客戶端130，可週期性地重新評估可獲用頻寬的量值。例如，該視訊會議伺服器120可決定該第一網際網路客戶端130可獲用的頻寬既已從150Kbps縮減成75Kbps，並且可開始將該CIF解析度視訊串流，然非VGA解析度視訊串流，自該企業內網路客戶端110發送至該第一網際網路客戶端130。
該視訊會議伺服器120亦可週期性地重新評估各個客戶端的編碼/解碼功能性，同時對於各客戶端的視訊串流而請求的哪些編碼演算法動態地進行變換。例如，該第二網際網路客戶端140可為唯一從該企業內網路客戶端110及該第一網際網路客戶端130接收CIF解析度視訊串流的客戶端。而若該第二網際網路客戶端140離開該視訊會議通話，則該視訊會議伺服器120可請求該企業內網路客戶端110及該第一網際網路客戶端130停止編碼及發送其個別視訊串流的CIF解析度版本。
根據本發明之具體實施例，該視訊會議伺服器120可指示該等客戶端中與該視訊會議通話相關聯的至少一者編碼一視訊串流，而此串流係經決定為由與該視訊會議通話相關聯之其他客戶端的其一者所使用中。例如，該視訊會議伺服器120可決定該第二網際網路客戶端140目前正使用CIF解碼；該視訊會議伺服器120可指示該第一網際網路客戶端130以編碼一CIF解析度視訊串流，藉以發送至該視訊會議伺服器120而予中繼傳送至該第二網際網路客戶端140。
進一步根據本發明之具體實施例，該視訊會議伺服器120可在將一視訊串流發送至一客戶端前先對其進行改變。例如，該企業內網路客戶端110或能按照一720p、VGA及CIF解析度編碼且發送視訊串流，同時擁有大型、穩定的可獲用頻寬量。該第一網際網路客戶端130可按照一720p、VGA及CIF解析度接收且解碼視訊串流，然擁有高度變異的可獲用頻寬量。當該第一網際網路客戶端130可獲用的頻寬量縮減時，該視訊會議伺服器120可將自該企業內網路客戶端110中繼傳送至該第一網際網路客戶端130的視訊串流更改為最佳地適用於該可獲用頻寬量。例如，自可獲用的最高頻寬量值至最低者，該視訊會議伺服器可使用下列邏輯：
1.發送未經更改的720p串流，
2.對於該720p串流，丟棄1個B-視框，
3.對於該720p串流，丟棄2個B-視框，
4.發送未經更改的VGA串流，
5.對於該VGA串流，丟棄1個B-視框，
6.對於該VGA串流，丟棄2個B-視框，
7.發送未經更改的CIF串流，
8.對於該CIF串流，丟棄1個B-視框，
9.對於該CIF串流，丟棄2個B-視框，
10.對於該720p串流，丟棄所有B-及P-視框(僅保留I-視框)，
11.對於該VGA串流，丟棄所有B-及P-視框(僅保留I-視框)，以及
12.對於該CIF串流，丟棄所有B-及P-視框(僅保留I-視框)。
發送至各個客戶端之串流的選擇可為依據各個客戶端的觀看偏好以及該客戶端的功能性而定。例如，該第一網際網路客戶端130可經組態設定為逐側地且同時地觀看該視訊會議系統100裡的其他兩個參與者，而該第二網際網路客戶端140則可經組態設定為僅顯示出目前發言者。在此情況下，該視訊會議伺服器可將來自該企業內網路客戶端110的VGA解析度串流，以及來自該第二網際網路客戶端140的CIF解析度串流發送至該第一網際網路客戶端130。而該第二網際網路客戶端140可在當該等客戶端各者於該視訊會議通話上發言時另替地自該企業內網路客戶端110及該第一網際網路客戶端130接收CIF解析度串流。
第4圖為一流程圖，其中敘述在一根據本發明具體實施例而用以提供視訊會議速率匹配之方法400中所牽涉到的一般階段。該方法400可為利用一計算裝置600所實作，即如後文中按照第6圖所進一步詳述者。現將進一步詳細說明實作該方法400之多項階段的方式。該方法400可起始於開始區塊410，並且前進到階段420，在此該計算裝置600可註冊至少一客戶端。例如，該至少一客戶端可為經由一網路連接而運作連接至該計算裝置600，並可請求參與一由該計算裝置600所主控的視訊會議通話。
從階段420，該方法400可前進到階段430，在此該計算裝置600可收集並/或分析各個經註冊客戶端的功能性。例如，該計算裝置600可決定各個客戶端可獲用的頻寬量值。該計算裝置600亦可決定各個客戶端的資料處理功能性，像是視訊編碼及/或解碼功能性且/或資料處理速度。視訊編碼及/或解碼功能性可包含一最大解析度。
從階段430，該方法400可前進到階段440，在此該計算裝置600可自至少一客戶端接收一資料串流。例如，該計算裝置600可自一來源客戶端接收一視訊串流。各個客戶端可發送至少一個串流，並且各個客戶端可運作以發送該資料串流的多個版本，像是一視訊串流的不同解析度。
從階段440，該方法400可前進到副程式450，在此該計算裝置600可選擇一資料串流以發送至至少一客戶端。例如，該計算裝置600可決定其一客戶端並不具備足夠的頻寬以接收來自一第二客戶端的高解析度版本視訊串流，並且該計算裝置600可選擇該視訊串流的一低解析度版本以供發送。後文中可按照第5圖以說明關於副程式450的進一步細節。
自副程式450，該方法400可前進到階段460，在此該計算裝置600可將所選定串流發送至該客戶端。例如，該計算裝置600可將一透過網路連接而自一客戶端所收到的視訊串流中繼傳送至一第二客戶端。
從階段460，該方法400可前進到階段470，在此該計算裝置600可決定一客戶端的功能性是否既已改變。若該計算裝置600決定一客戶端的功能性既已變更及/或該系統的需求既已出現變化，則該方法400可返回至副程式450，而在此該計算裝置600可選擇不同的視訊串流以發送至客戶端。例如，該計算裝置600可決定一視訊會議通話裡運用CIF解碼的唯一客戶端既已離開。然後，該計算裝置600可請求該視訊會議通話裡的任何其他客戶端停止發送CIF編碼串流。根據本發明之具體實施例，一客戶端的可獲用頻寬可為縮減，並且該客戶端可向該計算裝置600通知此一現況的發生。該計算裝置600可對於該客戶端選擇一較低解析度的資料串流，及/或對於該客戶端更改目前的選定資料串流，藉以將經縮減頻寬納入考量。
自階段470，該方法400可結束於階段480。
第5圖係一運用於第4圖方法以對於一客戶端選擇一資料串流之副程式的流程圖。從階段440，該計算裝置600可在階段510進入副程式450，在此該計算裝置600可收集至少一客戶端的編碼及/或解碼功能性。該至少一客戶端可包含另一計算裝置618，像是該企業內網路客戶端110。例如，該計算裝置600可決定該企業內網路客戶端110能夠按照VGA及CIF解析度進行編碼，並且按照720p、VGA及CIF解析度進行解碼。
從階段510，該副程式450可前進到階段520，在此該計算裝置600可決定至少一客戶端的可獲用頻寬量。例如，該計算裝置600可決定該企業內網路客戶端110具有可獲用於發送一資料串流的400Kbps以及可獲用於接收一資料串流的750Kbps。
從階段520，該副程式450可前進到階段530，在此該計算裝置600可選定一客戶端所能獲用的最高解析度資料串流。例如，該第一網際網路客戶端可將三個資料串流發送至該計算裝置600：一720p解析度視訊串流、一VGA解析度視訊串流，以及一CIF解析度視訊串流。該計算裝置可首先選定該720p解析度視訊串流以予發送至該企業內網路客戶端110。
從階段530，該副程式450可前進到階段540，在此該計算裝置600可決定一客戶端是否能夠處理所選定的資料串流。例如，該計算裝置600可決定該企業內網路客戶端110是能夠解碼所選定的720p解析度視訊串流。若在階段540該計算裝置600決定一客戶端並無法處理所選定的視訊串流，則該副程式540可返回至階段530，在此該計算裝置600可選定一替代性資料串流，像是該720p解析度視訊串流的VGA解析度版本。
若在階段540該計算裝置600決定一客戶端能處理所選定的視訊串流，則該副程式540可前進至階段550，在此該計算裝置600可決定該客戶端是否具有足夠的可獲用頻寬以接收該選定資料串流而無顯著的效能劣化問題。例如，該計算裝置600可決定該客戶端具有700Kbps的可獲用頻寬，同時此為一足夠以使用即時方式接收並播放一720Kps解析度視訊串流，而在該視訊裡僅具略微或毫無跳躍及/或暫停的頻寬。若該計算裝置600在階段550處決定該客戶端具有對於該所選定串流的足夠頻寬，則副程式450可返回至方法400的階段460。
若在階段550處該計算裝置決定該客戶端並未具備足夠頻寬以接收並處理該選定串流，則副程式450可前進到階段560，在此該計算裝置600可在將該選定串流發送至該客戶端之前先對其進行變更。例如，該計算裝置600可自該視訊串流中移除每秒至少一個B-視框，藉以減少待予被發送至該客戶端的資料量。副程式450可前進到階段570，在此該計算裝置600可決定一客戶端是否擁有足夠頻寬以接收該經變更的資料串流。若該客戶端仍未具備足夠頻寬以接收該經變更串流，則副程式450可返回至階段530，在此該計算裝置600可選定一替代性資料串流，像是該720p解析度視訊串流的VGA解析度版本。根據本發明之具體實施例，該計算裝置600可移除額外的視框及/或移除不同類型的視框，並且在返回至階段530之前先決定是否確能滿足該等頻寬限制。若在階段550處該計算裝置決定該客戶端並不具有足夠頻寬以接收及處理該經變更資料串流，則副程式450可返回至方法400的階段460。
一根據本發明之具體實施例可包含一系統以將資料提供至複數個客戶端。該系統可包含一記憶體儲存裝置，以及一經耦接於該記憶體儲存裝置的處理單元。該處理單元可運作以接收資料串流，分析與該等複數個客戶端之至少一者相關聯的至少一功能性，根據所分析的功能性選擇一資料串流以供發送至該客戶端，以及將該所選定資料串流發送至該客戶端。例如，該等資料串流可為視訊會議資料串流，同時各個串流可為關聯於該等複數個客戶端的至少一者。該等客戶端的至少一者可發送含有該資料串流之不同版本的多個資料串流，像是一視訊串流之不同解析度。
該等客戶端可透過一像是企業內網路及/或網際網路的通訊媒體以連接至該系統。該系統可運作以分析與該等複數個客戶端中至少一者相關聯之通訊媒體的可獲用頻寬。該系統可運作以分析與該等複數個客戶端之至少一者相關聯的資料處理功能性，像是視訊編碼及/或視訊解碼功能性。該系統可決定一給定客戶端是否能夠解碼一可獲用資料串流，以及一客戶端是否能夠按照一由另一客戶端所請求的演算法來編碼一資料串流。
另一根據本發明之具體實施例可包含一系統以將視訊串流提供至複數個客戶端。該系統可包含一記憶體儲存裝置，以及一經耦接於該記憶體儲存裝置的處理單元。該處理單元可運作以自該等複數個客戶端各者接收至少一視訊串流，收集與該等複數個客戶端各者相關聯的視訊會議功能性資料，根據與該等複數個客戶端各者相關聯的所收集視訊會議功能性資料來選定至少一視訊串流以供發送至該等複數個客戶端各者，以及將所選定的至少一視訊串流發送至該等複數個客戶端各者。該系統可運作以自該等複數個客戶端的至少一者接收至少一第一視訊串流及至少一第二視訊串流，其中該至少一第一視訊串流包含該至少一第二視訊串流的較高解析度版本。例如，該至少一第一視訊串流可包含一按照一1280×720及/或一640×480解析度所編碼的視訊串流，而該第二視訊串流可包含一按照一320×240解析度所編碼的視訊串流。
該系統可進一步運作以決定該等複數個客戶端之至少一者是否具有足夠頻寬以接收包含該至少一第一視訊串流在內的所有視框。回應於決定該等複數個客戶端之至少一者有足夠頻寬以接收包含該至少一第一視訊串流在內的所有視框，該系統可將該至少一視訊串流未經變更地發送至該等複數個客戶端之至少一者。若該等複數個客戶端之至少一者並未具有足夠頻寬以接收包含該至少一第一視訊串流在內的所有視框，則該系統可將該至少一第二、較低解析度的視訊串流發送至該等複數個客戶端之至少一者。根據本發明之具體實施例，若該等複數個客戶端之至少一者並未具有足夠頻寬以接收包含該至少一第一視訊串流在內的所有視框，則該系統可在將該至少一第一視訊串流發送至該等複數個客戶端至少一者之前，先自該視訊串流移除每秒至少一視框。
該系統可運作以對於該等複數個客戶端各者決定至少一使用中視訊解碼演算法及至少一可獲用視訊編碼演算法。該系統可指示該等複數個客戶端的至少一者對於與該等複數個客戶端各者相關聯而經決定為由該等複數個客戶端之至少一者所使用中的至少一視訊編碼演算法編碼至少一視訊串流。例如，若其一客戶端目前是使用CIF解碼以接收並處理視訊串流，則該系統可請求具有CIF編碼功能性的至少一其他客戶端來編碼一經CIF編碼的視訊串流並將其發送至該系統，以供中繼傳送至該CIF解碼的客戶端。
根據本發明之又另一具體實施例可包含一供以在一視訊會議裡提供速率匹配的系統。該系統可包含一記憶體儲存裝置，以及一經耦接於該記憶體儲存裝置的處理單元。該處理單元可運作以註冊至少一第一視訊會議客戶端及至少一第二視訊會議客戶端，該等可透過該網路連接裝置以運作連接於該系統，自該等至少一第一視訊會議客戶端接收複數個視訊串流，根據該至少一第二視訊會議客戶端的所建立至少一功能性決定該至少一第二視訊會議客戶端是否能夠接收該至少一第一視訊串流，並且回應於決定該至少一第二視訊會議客戶端能夠接收該至少一第一視訊串流，將該至少一第一視訊串流發送至該至少一第二視訊會議客戶端，而無須由該系統解碼該至少一第一視訊串流。該系統可運作以對於該至少一第一視訊會議客戶端及該至少一第二視訊會議客戶端建立至少一功能性，其中該至少一功能性包含下列至少一者：一可獲用頻寬、一最大編碼解析度及一最大解碼解析度。該等複數個視訊串流可包含至少一第一視訊串流以及一至少一第二視訊串流，其中該至少一第一視訊串流包含一比起該至少一第二視訊串流為較高解析度的視訊串流。
該系統可運作以決定該至少一第二視訊會議客戶端是否能夠解碼該至少一第一視訊串流。根據本發明之具體實施例，該系統可運作以決定該至少一第二視訊會議客戶端是否具有足夠的可獲用頻寬，藉以接收該至少一第一視訊串流而無須自該至少一第一視訊串流丟棄至少一B-視框。
第6圖係一含有該計算裝置600之系統的方塊圖。根據本發明之具體實施例，前述記憶體儲存裝置與處理單元可為在一計算裝置中所實作，像是第6圖的計算裝置600。任何硬體、軟體或韌體的適當組合皆可運用以實作該記憶體儲存裝置及該處理單元。例如，該等記憶體儲存裝置和處理單元可為藉由該計算裝置600，或是任何其他的計算裝置618而與該計算裝置600相組合所實作。前述系統、裝置及處理器皆為範例，並且根據本發明之具體實施例，其他的系統、裝置及處理器可包含前述記憶體儲存裝置和處理單元。此外，該計算裝置600可含有一對於如前所述之系統100的操作環境。該系統100可在其他環境下運作，同時不受限於該計算裝置600。
參照於第6圖，一根據本發明具體實施例的系統可包含一計算裝置，像是一計算裝置600。在一基本組態中，該計算裝置600可含有至少一處理單元602及一系統記憶體604。根據該計算裝置的組態與類型而定，該系統記憶體604可包含揮發性(即如隨機存取記憶體(RAM))、非揮發性(即如唯讀記憶體(ROM))、快閃記憶體或是任何組合，然而不限於此。該系統記憶體604可包含作業系統605、一或更多個程式設計模組606，並且可含有一頻寬測量程式607。例如，該作業系統605可適用於控制該計算裝置600的操作。在一具體實施例裡，該程式設計模組606可例如包含一資料分析模組及/或一視訊會議伺服器620。此外，本發明之具體實施例可為連結於一圖形資料庫、其他作業系統或任何其他應用程式所實作，並且不受限於任何特定的應用程式或系統。此一基本組態可如在第6圖中由虛線608之內的該等元件所示。
該計算裝置600可具有額外特點或功能性。例如，該計算裝置600亦可包含額外資料儲存裝置(可移除及/或非可移除)，例如像是磁碟、光碟或磁帶。此一額外儲存裝置是在第6圖中由一可移除儲存裝置609及一非可移除儲存裝置610所示。電腦儲存媒體可包含揮發性及非揮發性、可移除及非可移除媒體，該等可按照任何方法或技術所實作，以供儲存像是電腦可讀取指令、資料結構、程式模組或其他資料之資訊。系統記憶體604、可移除儲存裝置609及非可移除儲存裝置610皆為電腦儲存媒體的範例(亦即記憶體儲存裝置)。電腦儲存媒體可包含，然而不限於此，RAM、ROM、電子可擦拭唯讀記憶體(EEPROM)、快閃記憶體或其他記憶體技術、CD-ROM、數位光碟片(DVD)或其他光學儲存、磁匣、磁帶、磁碟儲存或其他磁性儲存裝置，或者是任何其他可用以儲存資訊並可由該裝置600所存取的媒體。任何此等電腦儲存媒體皆可為該裝置600的一部份。該計算裝置600亦可具有(多個)輸入裝置612，像是鍵盤、滑鼠、點筆、聲音輸入裝置、觸控輸入裝置等等。亦可含有(多個)輸出裝置614，像是顯示器、喇叭、印表機等等。前述裝置皆為範例並且亦可採用其他者。
該計算裝置600亦可含有一通訊連接616，藉此讓該裝置600能夠像是透過一分散式計算環境之內的網路，例如一企業內網路或網際網路，以與其他的計算裝置618進行通訊。該通訊連接616為通訊媒體之一範例。通訊媒體通常可由在一像是載波或其他傳送機制之經調變資料信號中的電腦可讀取指令、資料結構、程式模組或其他資料所具體實作，並且含有任何資訊遞送媒體。該詞彙「經調變資料信號」可描述一種信號，此者可令其一或更多項的特徵按照一將資訊編碼至該信號內之方式所設定或變化。藉由範例，而非限制，通訊媒體包含像是有線網路或直接網路連接之有線媒體，以及像是音響、射頻(RF)、紅外線及其他無線媒體的無線媒體。該詞彙「電腦可讀取媒體」，即如在此所用，可包含儲存媒體及通訊媒體兩者。
即如前述，多個程式模組及資料檔案可經儲存於該系統記憶體604中，包含該作業系統605在內。當運行於該處理單元602上時，該等程式設計模組606(即如該視訊會議伺服器620)可執行多項處理程序，包含例如前文所述方法400之多個階段的一或更多者在內。前述處理程序係一範例，並且該處理單元602可執行其他的處理程序。根據本發明之具體實施例而可運用的其他程式設計模組可包含電子郵件及聯絡人應用程式、文書處理應用程式、試算表應用程式、資料庫應用程式、幻燈片簡報應用程式、繪圖或電腦輔助應用程式等等。
一般說來，根據本發明之具體實施例，程式模組包含可執行特定任務或是可實作出特定抽象資料型態之副程式、程式、元件、資料結構以及其他型態的結構。同時，本發明之具體實施例亦可藉由其他的電腦系統組態所實作，包含手持式裝置、多重處理器系統、微處理器式或可程式設計消費性電子裝置、迷你電腦、大型主機電腦等等。亦可在分散式計算環境下實作本發明之具體實施例，其中是由透過一通訊網路所鏈結之各項遠端處理裝置來執行各項任務。在一分散式計算環境裡，程式模組可位於本地與遠端兩者的記憶體儲存裝置內。
此外，本發明之具體實施例可為在一電路中，其中包含離散電子構件、含有多個邏輯閘器的經封裝或整合式電子晶片、一運用一微處理器的電路，或是在一含有多個電子構件或微處理器的單一晶片上，所實作。本發明之具體實施例亦可為利用其他能夠執行例如像是AND、OR及NOT之邏輯運算的技術所實作，包含機械性、光學性、流體性和量子技術，然而不限於此。此外，本發明之具體實施例可為在一般目的性電腦內或是在任何其他的電路或系統中所實作。
例如，可按照如一電腦程序(方法)、一計算系統，或者按照如一像是一電腦程式產品或電腦可讀取媒體的製造物項，以實作本發明之具體實施例。該電腦程式產品可為一電腦儲存媒體，此者可由一電腦系統讀取，並且編碼一電腦指令程式以執行一電腦程序。該電腦程式產品亦可為一於一載波上之所傳播信號，此者可由一計算系統讀取並且編碼一電腦指令程式以執行一電腦程序。從而，本發明可為按硬體及/或按軟體(包含韌體、常駐式軟體、微程式碼等等)所具體實作。換句話說，本發明之具體實施例可採行一種電腦可使用或電腦可讀取儲存媒體上之電腦程式產品的形式，其中在該媒體裡具體實作多項電腦可使用或電腦可讀取程式碼，以供交由一指令執行系統使用或相與關聯。一電腦可使用或電腦可讀取媒體可為任何能夠含有、儲存、傳通、傳播或送交該程式的媒體，而交由該指令執行系統、設備或裝置加以運用或相與關聯。
該電腦可使用或電腦可讀取媒體可例如為，然而不限於此，一電子、磁性、光學、電磁、紅外線或半導體系統、設備裝置或傳播媒體。對於更特定的電腦可讀存取媒體範例(一非窮舉性列表)，該電腦可讀取媒體可包含下列項目：具有一或更多接線的電性連接、一可攜式電腦磁碟、一隨機存取記憶體(RAM)、一唯讀記憶體(ROM)、一電子可擦拭可程式化唯讀記憶體(EPROM或快閃記憶體)、一光纖以及一可攜式光碟片唯讀記憶體(CD-ROM)。注意到該電腦可使用或電腦可讀取媒體可甚為紙張或另一適當媒體，而將程式列印於其上，該程式可例如透過紙張或其他媒體之光學掃描所電子捕捉，接著予以編譯、解譯或若有必要另按適當方式處理，然後儲存在一電腦記憶體內。
本發明之具體實施例係例如依前文而參照於根據本發明之具體實施例的方法、系統和電腦程式產品之方塊圖及/或操作說明所描述。該等方塊圖內所註明之功能/動作可為異於任何流程圖中所示次序而出現。例如，根據所牽涉到的功能性/動作而定，兩個經連續顯示的區塊可事實上大致同時地執行，或者該等區塊有時可按相反次序執行。
在此雖既已說明本發明之部份具體實施例，然亦可存在有其他的具體實施例。此外，本發明之具體實施例雖既經說明如關聯於經儲存在記憶體及其他儲存媒體之內的資料，然而資料亦可為儲存於或讀取自其他類型的電腦可讀存取媒體，像是次級儲存裝置，即如硬碟、軟碟或一CD-ROM，一來自網際網路的載波或是其他形式的RAM或ROM。同時，本揭示方法的階段可為按照任何方式所修改，包含藉由重新排序該等階段及/或插入或刪除階段而不致悖離本發明。
所有權利，包含本揭示所納入之程式碼的著作權，皆經授予本案申請人且為其財產。本案申請人持有並保留本揭示所納入之程式碼的所有權利，同時僅授允重製與所核准專利之重製相關聯的資料內容同時非為其他目的。
本說明書雖含有多項範例，然本發明範疇係由後文之申請專利範圍所註明。並且，本說明書雖既已按照特定於結構特性及/或方法動作的語言所描述，然而該等申請專利範圍並不受限於前文所述特性或動作。相反地，前述各項特定特性及動作係經揭示作為本發明之具體實施例的範例。
100．．．視訊會議系統
110．．．企業內網路客戶端
115．．．企業內網路連接
120．．．視訊會議伺服器
130．．．第一網際網路客戶端
140．．．第二網際網路客戶端
150．．．第三網際網路客戶端
160．．．網際網路
210．．．I-視框
220．．．先前視框
230．．．P-視框
240．．．先前視框
250．．．B-視框
260．．．次一視框
600．．．計算裝置
602．．．處理單元
604．．．系統記憶體
605．．．作業系統
606．．．程式設計模組
607．．．頻寬測量程式
608．．．基本組態(虛線)
609．．．可移除儲存裝置
610．．．非可移除儲存裝置
612．．．(多個)輸入裝置
614．．．(多個)輸出裝置
616．．．(多個)通訊連接
618．．．其他計算裝置
620．．．視訊會議伺服器
經併入於本揭示並且構成其一部份之隨附圖式說明本發明的各種具體實施例。在該等圖式中：
第1圖係一操作環境的方塊圖；
第2A-2C圖為說明利用不同視框類型之視訊串流編碼演算法的圖式；
第3圖係一說明視訊會議速率匹配的圖式；
第4圖係一在視訊會議中提供速率匹配之方法的流程圖；
第5圖係一運用於第4圖方法以對於一客戶端選擇一資料串流之副程式的流程圖；以及
第6圖係一含有一計算裝置之系統的方塊圖。
100．．．視訊會議系統
110．．．企業內網路客戶端
115．．．企業內網路連接
120．．．視訊會議伺服器
130．．．第一網際網路客戶端
140．．．第二網際網路客戶端
150．．．第三網際網路客戶端
160．．．網際網路

Claims (19)

  1. 一種用於將資料提供至複數個客戶端的方法，該方法包含以下步驟：接收複數個資料串流，該等複數個資料串流係為來自複數個客戶端之至少兩者之每一者的不同視訊解析度之每一者；分析與該等複數個客戶端之至少一者相關聯的至少一個功能性；根據該所分析至少一個功能性，選擇來自該等複數個客戶端之該等至少兩者之每一者的該等複數個資料串流之至少一者，以發送至該等複數個客戶端之該至少一者；以及在選擇該等複數個資料串流之該至少一者之後，將該等複數個資料串流之該所選定至少一者發送至該等複數個客戶端之該至少一者。
  2. 如申請專利範圍第1項所述之方法，其中該等複數個資料串流包含：複數個視訊會議資料串流。
  3. 如申請專利範圍第1項所述之方法，其中該等複數個資料串流之每一者係關聯於該等複數個客戶端之至少一者。
  4. 如申請專利範圍第1項所述之方法，其中分析與該等複數個客戶端之該至少一者相關聯的至少一個功能性之步驟包含以下步驟：分析與該等複數個客戶端之至少一者相關聯的至少一個通訊媒體之一頻寬。
  5. 如申請專利範圍第4項所述之方法，其中與該等複數個客戶端之至少一者相關聯的該至少一個通訊媒體包含：網際網路。
  6. 如申請專利範圍第4項所述之方法，其中與該等複數個客戶端之至少一者相關聯的該至少一個通訊媒體包含：一企業內網路(intranet)。
  7. 如申請專利範圍第1項所述之方法，其中分析與該等複數個客戶端之該至少一者相關聯的該至少一個功能性之步驟包含以下步驟：分析與該等複數個客戶端之至少一者相關聯的一資料處理功能性。
  8. 如申請專利範圍第7項所述之方法，其中分析與該等複數個客戶端之該至少一者相關聯的該至少一個功能性之步驟包含以下步驟：決定至少一個視訊解碼功能性。
  9. 如申請專利範圍第1項所述之方法，其中該等複數個客戶端之至少一個第一客戶端係關聯於複數個資料串 流，並且其中該等複數個資料串流之至少一個第一資料串流包含：相較於該等複數個資料串流之至少一個第二資料串流而為更高解析度的一較高解析度版本。
  10. 如申請專利範圍第9項所述之方法，其中分析與該等複數個客戶端之該至少一者相關聯的該至少一個功能性之步驟包含以下步驟：決定是否該等複數個客戶端之至少一個第二客戶端能夠解碼該至少一個第一資料串流。
  11. 如申請專利範圍第9項所述之方法，其中分析與該等複數個客戶端之該至少一者相關聯的該至少一個功能性之步驟包含以下步驟：決定是否該等複數個客戶端之至少一個第二客戶端具有足夠頻寬以接收該至少一個第一資料串流。
  12. 一種電腦可讀取儲存媒體，其非為一訊號且儲存有一組指令，而當執行該組指令時可實行用於將視訊串流提供至複數個客戶端的一方法，由該組指令所執行的該方法包含以下步驟：接收來自該等複數個客戶端之每一者的至少一個視訊串流，且多於一個視訊串流係為來自該等複數個客戶端之至少一者的不同解析度；收集與該等複數個客戶端之每一者相關聯的視訊會議功能性資料； 針對該等複數個客戶端之每一者，來根據與該等複數個客戶端之每一者相關聯的該所收集視訊會議功能性資料，選定至少一個視訊串流以發送至該等複數個客戶端之每一者；以及在選定該至少一個視訊串流之後，將該所選定至少一個視訊串流發送至該等複數個客戶端之每一者。
  13. 如申請專利範圍第12項所述之電腦可讀取儲存媒體，該方法進一步包含以下步驟：接收來自該等複數個客戶端之至少一者的至少一個第一視訊串流及至少一個第二視訊串流，其中該至少一個第一視訊串流包含：相較於該至少一個第二視訊串流而為更高解析度的一較高解析度版本。
  14. 如申請專利範圍第13項所述之電腦可讀取儲存媒體，其中該至少一個第一視訊串流包含：按照包含下列至少一者之一解析度所編碼的一視訊串流：1280×720及640×480，並且其中該至少一個第二視訊串流包含：按照320×240的一解析度所編碼的一視訊串流。
  15. 如申請專利範圍第14項所述之電腦可讀取儲存媒體，該方法進一步包含以下步驟：決定是否該等複數個客戶端之至少一者具有足夠頻寬以接收包含至少一個第一視訊串流的所有視框；以及 回應於決定出該等複數個客戶端之該至少一者是具有足夠頻寬以接收包含該至少一個第一視訊串流的所有視框，將該至少一個第一視訊串流未經變更地發送至該等複數個客戶端之該至少一者。
  16. 如申請專利範圍第15項所述之電腦可讀取儲存媒體，該方法進一步包含以下步驟：回應於決定出該等複數個客戶端之該至少一者並未具有足夠頻寬以接收包含該至少一個第一視訊串流的所有視框，將至少一個第二視訊串流發送至該等複數個客戶端之該至少一者，其中該至少一個第二視訊串流包含：相較於該至少一個第一視訊串流而為更低解析度的一較低解析度版本。
  17. 如申請專利範圍第15項所述之電腦可讀取儲存媒體，該方法進一步包含以下步驟：回應於決定出該等複數個客戶端之該至少一者並未具有足夠頻寬以接收包含該至少一個第一視訊串流的所有視框，在將該至少一個第一視訊串流發送至該等複數個客戶端之該至少一者之前，自該視訊串流每秒移除至少一個視框。
  18. 如申請專利範圍第17項所述之電腦可讀取儲存媒體，該方法進一步包含以下步驟： 對於該等複數個客戶端之每一者，決定至少一個使用中視訊解碼演算法；對於該等複數個客戶端之每一者，決定與該等複數個客戶端之每一者相關聯的至少一個視訊編碼演算法；以及指示該等複數個客戶端之至少一者，來對於與該等複數個客戶端之每一者相關聯而經決定為由該等複數個客戶端之至少一者所使用中的該至少一個視訊編碼演算法，編碼至少一個視訊串流。
  19. 一種用於在一視訊會議中提供速率匹配的系統，該系統包含：一記憶體儲存；一網路連接裝置；以及一處理單元，該處理單元耦接於該記憶體儲存，其中該處理單元可運作以進行以下步驟：註冊透過該網路連接裝置以運作地連接於該系統的視訊會議客戶端，該等視訊會議客戶端包含一第一視訊會議客戶端、一第二視訊會議客戶端、一第三視訊會議客戶端，其中運作以註冊該等視訊會議客戶端之步驟包含以下步驟：運作以對於該等視訊會議客戶端之每一者建立至少一個功能性，其中該至少一個功能性包含下列至少一者：一可使用頻寬、一最大編碼解析度、及一最大解碼解析度； 接收來自該等視訊會議客戶端之至少兩者的複數個視訊串流，其中該等複數個視訊串流包含：至少一個第一視訊串流及至少一個第二視訊串流，其中該至少一個第一視訊串流包含：相較於該至少一個第二視訊串流而為更高解析度的一較高解析度視訊串流；基於對於該等視訊會議客戶端之至少一者的該所建立至少一個功能性，來決定是否該至少一個視訊會議客戶端能夠接收該至少一個第一視訊串流，其中運作以決定出該至少一個視訊會議客戶端能夠接收該至少一個第一視訊串流之步驟包含以下步驟：運作以決定下列至少一者：是否該至少一個視訊會議客戶端能夠解碼該至少一個第一視訊串流，以及是否該至少一的第二視訊會議客戶端具有足夠可使用的頻寬以接收該至少一個第一視訊串流，而無須自該至少一個第一視訊串流拋除至少一個B-視框；以及回應於決定出該至少一個視訊會議客戶端能夠接收該至少一個第一視訊串流，將該至少一個第一視訊串流發送至該至少一個視訊會議客戶端，而無須由該系統解碼該至少一個第一視訊串流。
TW098138297A 2008-12-15 2009-11-11 視訊會議速率匹配 TWI483597B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US12/334,969 US8380790B2 (en) 2008-12-15 2008-12-15 Video conference rate matching

Publications (2)

Publication Number Publication Date
TW201029409A TW201029409A (en) 2010-08-01
TWI483597B true TWI483597B (zh) 2015-05-01

Family

ID=42241896

Family Applications (1)

Application Number Title Priority Date Filing Date
TW098138297A TWI483597B (zh) 2008-12-15 2009-11-11 視訊會議速率匹配

Country Status (11)

Country Link
US (1) US8380790B2 (zh)
EP (1) EP2359596B1 (zh)
JP (1) JP2012512561A (zh)
KR (1) KR20110103953A (zh)
CN (1) CN102246521B (zh)
AU (1) AU2009330648B2 (zh)
BR (1) BRPI0921982A2 (zh)
CA (1) CA2742111C (zh)
RU (1) RU2524359C2 (zh)
TW (1) TWI483597B (zh)
WO (1) WO2010074828A1 (zh)

Families Citing this family (51)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100149301A1 (en) * 2008-12-15 2010-06-17 Microsoft Corporation Video Conferencing Subscription Using Multiple Bit Rate Streams
KR20100121384A (ko) * 2009-05-08 2010-11-17 삼성전자주식회사 홈 네트워크 상에서 ＵＰｎＰ를 이용하여 복수의 장치로 전화 관련 서비스를 제공하는 시스템 및 방법
US9723319B1 (en) * 2009-06-01 2017-08-01 Sony Interactive Entertainment America Llc Differentiation for achieving buffered decoding and bufferless decoding
WO2010141522A1 (en) * 2009-06-01 2010-12-09 Gaikai, Inc. Qualified video delivery
US11013995B2 (en) * 2009-06-01 2021-05-25 Sony Interactive Entertainment LLC Qualified video delivery methods
US20110138018A1 (en) * 2009-12-04 2011-06-09 Qualcomm Incorporated Mobile media server
SG172507A1 (en) * 2010-01-04 2011-07-28 Creative Tech Ltd A method and system for distributing media content over a wireless network
US11606537B2 (en) 2010-05-25 2023-03-14 Cisco Technology, Inc. System and method for scalable media switching conferencing
NO333235B1 (no) * 2010-05-25 2013-04-15 Cisco Systems Int Sarl System og fremgangsmate for konferanser med skalerbar mediesvitsjing
US8947492B2 (en) 2010-06-18 2015-02-03 Microsoft Corporation Combining multiple bit rate and scalable video coding
US8576271B2 (en) * 2010-06-25 2013-11-05 Microsoft Corporation Combining direct and routed communication in a video conference
US9009341B2 (en) * 2011-10-11 2015-04-14 Avaya Inc. Video bandwidth management system and method
CN103051937A (zh) * 2011-10-12 2013-04-17 腾讯科技（深圳）有限公司 一种视频播控方法及装置
US11314405B2 (en) * 2011-10-14 2022-04-26 Autodesk, Inc. Real-time scrubbing of online videos
US9906815B2 (en) * 2011-11-08 2018-02-27 Texas Instruments Incorporated Delayed duplicate I-picture for video coding
CN104205834B (zh) 2012-01-30 2018-08-31 三星电子株式会社 用于对每个空间子区域进行视频解码的方法
US8842159B2 (en) * 2012-02-13 2014-09-23 Microsoft Corporation Encoding processing for conferencing systems
US9189051B2 (en) * 2012-12-14 2015-11-17 International Business Machines Corporation Power reduction by minimizing bit transitions in the hamming distances of encoded communications
US9118809B2 (en) 2013-10-11 2015-08-25 Edifire LLC Methods and systems for multi-factor authentication in secure media-based conferencing
US8929257B1 (en) 2013-10-11 2015-01-06 Edifire LLC Methods and systems for subconferences in secure media-based conferencing
US9118654B2 (en) 2013-10-11 2015-08-25 Edifire LLC Methods and systems for compliance monitoring in secure media-based conferencing
GB201318658D0 (en) * 2013-10-22 2013-12-04 Microsoft Corp Controlling resolution of encoded video
US20150146012A1 (en) * 2013-11-27 2015-05-28 Sprint Communications Company L.P. Video presentation quality display in a wireless communication device
US9489387B2 (en) 2014-01-15 2016-11-08 Avigilon Corporation Storage management of data streamed from a video source device
US9525848B2 (en) * 2014-05-30 2016-12-20 Highfive Technologies, Inc. Domain trusted video network
US20150350604A1 (en) * 2014-05-30 2015-12-03 Highfive Technologies, Inc. Method and system for multiparty video conferencing
US9167098B1 (en) 2014-09-29 2015-10-20 Edifire LLC Dynamic conference session re-routing in secure media-based conferencing
US9131112B1 (en) 2014-09-29 2015-09-08 Edifire LLC Dynamic signaling and resource allocation in secure media-based conferencing
US9282130B1 (en) 2014-09-29 2016-03-08 Edifire LLC Dynamic media negotiation in secure media-based conferencing
US9137187B1 (en) 2014-09-29 2015-09-15 Edifire LLC Dynamic conference session state management in secure media-based conferencing
US9774588B2 (en) 2014-10-06 2017-09-26 Cisco Technology, Inc. Single sign off handling by network device in federated identity deployment
EP3205110B1 (en) * 2014-10-07 2019-05-22 Telefonaktiebolaget LM Ericsson (publ) Video bitstream processing for enabling tune-in
KR20160062579A (ko) * 2014-11-25 2016-06-02 삼성전자주식회사 패킷 기반 네트워크에서의 영상 통화 방법 및 이를 지원하는 장치
JP6501904B2 (ja) * 2015-05-27 2019-04-17 グーグル エルエルシー 球面ビデオのストリーミング
US9609275B2 (en) * 2015-07-08 2017-03-28 Google Inc. Single-stream transmission method for multi-user video conferencing
GB2547934B (en) 2016-03-03 2021-07-07 V Nova Int Ltd Adaptive video quality
US10291923B2 (en) * 2016-05-24 2019-05-14 Qualcomm Incorporated Mapping of tile grouping and samples in HEVC and L-HEVC file formats
EP3437321B1 (en) 2016-07-26 2023-09-13 Hewlett-Packard Development Company, L.P. Teleconference transmission
CN107105338A (zh) * 2017-03-17 2017-08-29 深圳市先河系统技术有限公司 用于显示图像、视频及响应网络请求的方法及终端
US10523820B2 (en) 2017-06-02 2019-12-31 Apple Inc. High-quality audio/visual conferencing
CN109246449A (zh) * 2017-07-11 2019-01-18 中国移动通信集团重庆有限公司 视频流分发方法、装置、设备及计算机存储介质
JP7037642B2 (ja) * 2017-09-08 2022-03-16 Ｌｉｎｅ株式会社 ビデオ品質制御
US10931725B2 (en) * 2017-09-29 2021-02-23 Apple Inc. Multiway audio-video conferencing
CN107948578B (zh) * 2017-12-28 2019-01-04 深圳华望技术有限公司 视频会议系统传送带宽及分辨率的调整方法及调整装置
US11388464B2 (en) * 2018-09-25 2022-07-12 Microsoft Technology Licensing, Llc Increasing video bit rates while maintaining video quality
EP3791568A4 (en) * 2018-10-03 2022-02-23 Videolocalize Inc. PIECE-BY-PIECE HYBRID VIDEO AND AUDIO SYNCHRONIZATION
CN111294657A (zh) * 2018-12-07 2020-06-16 北京字节跳动网络技术有限公司 信息处理方法和装置
CN111385518B (zh) * 2018-12-29 2021-10-22 中兴通讯股份有限公司 视频处理系统及方法、装置、存储介质、电子装置
US11240540B2 (en) * 2020-06-11 2022-02-01 Western Digital Technologies, Inc. Storage system and method for frame trimming to optimize network bandwidth
US11652722B2 (en) * 2020-06-19 2023-05-16 Apple Inc. High frequency probing for network bandwidth estimation using video data in real-time video conference
CN112104835A (zh) * 2020-08-14 2020-12-18 视联动力信息技术股份有限公司 一种视频传输方法、装置、设备和可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002035844A2 (en) * 2000-10-24 2002-05-02 Eyeball Networks Inc. Dynamic quality adaptation using personal quality profiles and composite performance metric
US20070022215A1 (en) * 2005-07-19 2007-01-25 Singer David W Method and apparatus for media data transmission
US20080112336A1 (en) * 2006-08-24 2008-05-15 Interwise Ltd. Software bridge for multi-point multi-media teleconferencing and telecollaboration

Family Cites Families (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5687095A (en) * 1994-11-01 1997-11-11 Lucent Technologies Inc. Video transmission rate matching for multimedia communication systems
US5838664A (en) * 1997-07-17 1998-11-17 Videoserver, Inc. Video teleconferencing system with digital transcoding
US5600646A (en) * 1995-01-27 1997-02-04 Videoserver, Inc. Video teleconferencing system with digital transcoding
US6343313B1 (en) * 1996-03-26 2002-01-29 Pixion, Inc. Computer conferencing system with real-time multipoint, multi-speed, multi-stream scalability
US5963547A (en) * 1996-09-18 1999-10-05 Videoserver, Inc. Method and apparatus for centralized multipoint conferencing in a packet network
JPH10155149A (ja) * 1996-11-25 1998-06-09 Matsushita Electric Ind Co Ltd フレームレート変換方式、及びフレームレート変換装置
WO1998038798A1 (en) * 1997-02-26 1998-09-03 Mitsubishi Denki Kabushiki Kaisha Device, system, and method for distributing video data
US6091777A (en) * 1997-09-18 2000-07-18 Cubic Video Technologies, Inc. Continuously adaptive digital video compression system and method for a web streamer
JP4244394B2 (ja) * 1998-02-17 2009-03-25 富士ゼロックス株式会社 多地点会議システム
US6622171B2 (en) * 1998-09-15 2003-09-16 Microsoft Corporation Multimedia timeline modification in networked client/server systems
US6501797B1 (en) * 1999-07-06 2002-12-31 Koninklijke Phillips Electronics N.V. System and method for improved fine granular scalable video using base layer coding information
US6731734B1 (en) * 1999-08-19 2004-05-04 Siemens Information & Communication Networks, Inc. Apparatus and method for intelligent conference call codec selection
US7089285B1 (en) * 1999-10-05 2006-08-08 Polycom, Inc. Videoconferencing apparatus having integrated multi-point conference capabilities
AU4338800A (en) * 1999-12-22 2001-07-03 General Instrument Corporation Video compression for multicast environments using spatial scalability and simulcast coding
RU2226320C2 (ru) * 2000-04-28 2004-03-27 Свисском Мобиле Аг Способ и система для осуществления видеоконференций
US7007098B1 (en) * 2000-08-17 2006-02-28 Nortel Networks Limited Methods of controlling video signals in a video conference
US7313593B1 (en) * 2000-10-24 2007-12-25 International Business Machines Corporation Method and apparatus for providing full duplex and multipoint IP audio streaming
GB0026550D0 (en) 2000-10-31 2000-12-13 Natural Fruit & Beverage Compa Jelly fruit drink
US20020131496A1 (en) * 2001-01-18 2002-09-19 Vinod Vasudevan System and method for adjusting bit rate and cost of delivery of digital data
US6766407B1 (en) * 2001-03-27 2004-07-20 Microsoft Corporation Intelligent streaming framework
US6535238B1 (en) * 2001-10-23 2003-03-18 International Business Machines Corporation Method and apparatus for automatically scaling processor resource usage during video conferencing
EP1454451A1 (en) * 2001-12-15 2004-09-08 Thomson Licensing S.A. Videoconference bandwidth selection mechanism
US20030135863A1 (en) * 2002-01-17 2003-07-17 Koninklijke Philips Electronics N.V. Targeted scalable multicast based on client bandwidth or capability
EP1395000B1 (en) 2002-08-27 2006-01-04 Matsushita Electric Industrial Co., Ltd. A method of transmitting data streams dependent on the monitored state of the client application buffer
JP4329358B2 (ja) * 2003-02-24 2009-09-09 富士通株式会社 ストリーム配信方法、及びストリーム配信システム
US7034860B2 (en) * 2003-06-20 2006-04-25 Tandberg Telecom As Method and apparatus for video conferencing having dynamic picture layout
US7054774B2 (en) * 2003-06-27 2006-05-30 Microsoft Corporation Midstream determination of varying bandwidth availability
US20050013309A1 (en) * 2003-07-14 2005-01-20 Channasandra Ravishankar System and method for high quality video conferencing with heterogeneous end-points and networks
CN100388780C (zh) * 2003-08-13 2008-05-14 华为技术有限公司 码流的带宽均衡方法
IL158276A (en) * 2003-10-02 2010-04-29 Radvision Ltd Method for dynamically optimizing bandwidth allocation in variable bitrate (multi-rate) conferences
NO318911B1 (no) * 2003-11-14 2005-05-23 Tandberg Telecom As Distribuert sammensetting av sanntids-media
JP2005333358A (ja) * 2004-05-19 2005-12-02 Ntt Communications Kk 画像通信装置、その処理方法及びクライアント装置並びにプログラム
BRPI0418974A8 (pt) 2004-07-27 2017-12-26 Telecom Italia Spa Método para executar uma comunicação entre um primeiro usuário e um segundo usuário e equipamento de telefone para executar uma comunicação, em uma rede de comunicação
US7571246B2 (en) * 2004-07-29 2009-08-04 Microsoft Corporation Media transrating over a bandwidth-limited network
US20060143678A1 (en) * 2004-12-10 2006-06-29 Microsoft Corporation System and process for controlling the coding bit rate of streaming media data employing a linear quadratic control technique and leaky bucket model
US7653129B2 (en) * 2004-12-28 2010-01-26 General Instrument Corporation Method and apparatus for providing intra coding frame bit budget
US7949117B2 (en) * 2005-04-28 2011-05-24 Apple Inc. Heterogeneous video conferencing
US20070024705A1 (en) * 2005-08-01 2007-02-01 Richter Roger K Systems and methods for video stream selection
CN103023666B (zh) * 2005-09-07 2016-08-31 维德约股份有限公司 用于低延迟和分布式会议应用的会议服务器架构的系统和方法
AU2006330457B2 (en) * 2005-12-22 2011-07-14 Vidyo, Inc. System and method for videoconferencing using scalable video coding and compositing scalable video conferencing servers
US8619865B2 (en) * 2006-02-16 2013-12-31 Vidyo, Inc. System and method for thinning of scalable video coding bit-streams
US7800642B2 (en) * 2006-03-01 2010-09-21 Polycom, Inc. Method and system for providing continuous presence video in a cascading conference
US8311102B2 (en) * 2006-07-26 2012-11-13 Microsoft Corporation Bitstream switching in multiple bit-rate video streaming environments
KR100800748B1 (ko) * 2006-07-28 2008-02-01 삼성전자주식회사 블루투스를 이용한 동영상 스트림 전송 장치 및 방법
US20080043090A1 (en) * 2006-08-07 2008-02-21 Yair Wiener Systems and methods for optimizing video processing
CN200953634Y (zh) * 2006-08-17 2007-09-26 弘瀚科技有限公司 多重数字数据流输出装置
US7898950B2 (en) * 2006-08-18 2011-03-01 Microsoft Corporation Techniques to perform rate matching for multimedia conference calls
US8773494B2 (en) * 2006-08-29 2014-07-08 Microsoft Corporation Techniques for managing visual compositions for a multimedia conference call
US7788395B2 (en) * 2007-02-14 2010-08-31 Microsoft Corporation Adaptive media playback
US20090184962A1 (en) * 2008-01-22 2009-07-23 Dell Product L.P. Systems and Methods for Managing Video Resolution in a Multiple-Output Information Handling System
US8144187B2 (en) * 2008-03-14 2012-03-27 Microsoft Corporation Multiple video stream capability negotiation
WO2009152158A1 (en) * 2008-06-09 2009-12-17 Vidyo, Inc. Improved view layout management in scalable video and audio communication systems
US8319820B2 (en) * 2008-06-23 2012-11-27 Radvision, Ltd. Systems, methods, and media for providing cascaded multi-point video conferencing units
US8249144B2 (en) * 2008-07-08 2012-08-21 Imagine Communications Ltd. Distributed transcoding
US20100091888A1 (en) * 2008-10-13 2010-04-15 General Instrument Corporation Multi-Rate Encoder with GOP Alignment

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002035844A2 (en) * 2000-10-24 2002-05-02 Eyeball Networks Inc. Dynamic quality adaptation using personal quality profiles and composite performance metric
US20070022215A1 (en) * 2005-07-19 2007-01-25 Singer David W Method and apparatus for media data transmission
US20080112336A1 (en) * 2006-08-24 2008-05-15 Interwise Ltd. Software bridge for multi-point multi-media teleconferencing and telecollaboration

Also Published As

Publication number Publication date
EP2359596B1 (en) 2020-01-08
AU2009330648A1 (en) 2010-07-01
US8380790B2 (en) 2013-02-19
EP2359596A4 (en) 2013-10-30
US20100153574A1 (en) 2010-06-17
BRPI0921982A2 (pt) 2016-01-05
RU2011124074A (ru) 2012-12-20
AU2009330648B2 (en) 2014-04-10
JP2012512561A (ja) 2012-05-31
WO2010074828A1 (en) 2010-07-01
EP2359596A1 (en) 2011-08-24
CA2742111A1 (en) 2010-07-01
RU2524359C2 (ru) 2014-07-27
CA2742111C (en) 2016-05-17
CN102246521B (zh) 2014-09-03
KR20110103953A (ko) 2011-09-21
CN102246521A (zh) 2011-11-16
TW201029409A (en) 2010-08-01

Similar Documents

Publication Publication Date Title
TWI483597B (zh) 視訊會議速率匹配
US8947492B2 (en) Combining multiple bit rate and scalable video coding
TWI479840B (zh) 使用多位元率串流之視訊會議訂閱
US9621854B2 (en) Recording a videoconference using separate video
JP6059219B2 (ja) ビデオ符号化及び復号化における待ち時間の低減
RU2506715C2 (ru) Передача изменяющегося визуального контента
US7558760B2 (en) Real-time key frame generation
JP5268915B2 (ja) マルチメディア音声会議向け視覚的構成の管理技術
US9609338B2 (en) Layered video encoding and decoding
WO2019231619A1 (en) Systems and methods game streaming
US10819951B2 (en) Recording video from a bitstream
US10326815B2 (en) Techniques for scalably sharing video through a streaming server
TWI735297B (zh) 具有初始化片段之視訊及音訊之寫碼
Kent et al. On-demand hd video using jini based grid

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees