TWI549518B - 產生一多媒體會議事件之一視覺組合的技術 - Google Patents

產生一多媒體會議事件之一視覺組合的技術 Download PDF

Info

Publication number
TWI549518B
TWI549518B TW098100962A TW98100962A TWI549518B TW I549518 B TWI549518 B TW I549518B TW 098100962 A TW098100962 A TW 098100962A TW 98100962 A TW98100962 A TW 98100962A TW I549518 B TWI549518 B TW I549518B
Authority
TW
Taiwan
Prior art keywords
participant
visual combination
conference
multimedia
active
Prior art date
Application number
TW098100962A
Other languages
English (en)
Other versions
TW200939775A (en
Inventor
泰卡爾普林
哲真 辛夫諾Ｅ
貞修堤
義斯
柏哈塔察爾吉艾佛羅尼爾
Original Assignee
微軟技術授權有限責任公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 微軟技術授權有限責任公司 filed Critical 微軟技術授權有限責任公司
Publication of TW200939775A publication Critical patent/TW200939775A/zh
Application granted granted Critical
Publication of TWI549518B publication Critical patent/TWI549518B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/567—Multimedia conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827—Network arrangements for conference optimisation or adaptation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/765—Media network packet handling intermediate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2203/00—Aspects of automatic or semi-automatic exchanges
    • H04M2203/50—Aspects of automatic or semi-automatic exchanges related to audio conference
    • H04M2203/5072—Multiple active speakers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Description

產生一多媒體會議事件之一視覺組合的技術
本發明關於產生一多媒體會議事件之一視覺組合的技術。
一種多媒體會議系統基本上允許多個參與者在網路上以協同及即時會議的方式傳遞及共享不同型式的媒體內容。該多媒體會議系統可使用多種圖形化使用者介面(GUI,“Graphical user interface”)視窗或觀視來顯示不同型式的媒體內容。例如，一GUI觀視可以包括參與者的視訊影像，另一個GUI觀視可以包括簡報投影片，又另一個GUI觀視可以包括參與者之間的文字訊息等等。依此方式，多個地理上分開的參與者可以在類似於所有參與者皆在同一房間中的一實體會議環境的一虛擬會議環境中來互動及傳遞資訊。
但是在一虛擬會議環境中，其很難識別一會議的不同參與者。此問題基本上隨著會議參與者的數目增加而增加，藉此有可能造成參與者之間的混淆及尷尬。再者，其很難即時地在任何給定時間識別一特定說話者，特別是當多個參與者同時說話或是很快地輪流說話時。關於在一虛擬會議環境中改善識別技術的技術可以增進使用者經驗及便利性。
概言之有多種具體實施例係關於多媒體會議系統。一些具體實施例特別關於用於產生一多媒體會議事件的視覺組合之技術。該多媒體會議事件可以包括多個參與者，其中一些可聚集在一會議室中，而其它人可由一遠端位置來參與在該多媒體會議事件當中。
例如在一具體實施例中，像是一會議主控台的設備可以包含一顯示器及一視覺組合組件，用於產生一多媒體會議事件的一視覺組合。該視覺組合組件可以包含一視訊解碼器模組，以用於解碼一多媒體會議事件的多個媒體串流。該視覺組合組件另可包含一通訊式耦合至該視訊解碼器模組的活動中說話者偵測器模組，該活動中說話者偵測器模組用於偵測在一解碼的媒體串流中做為一活動中說話者的一參與者。該視覺組合組件又另包含一通訊式耦合至該活動中說話者偵測器模組的媒體串流管理員模組，該媒體串流管理員模組用於對映該活動中說話者之解碼的媒體串流到一活動中顯示框，且對映其它的解碼媒體串流到非活動中顯示框。該視覺組合組件又另可包含一通訊式耦合至該媒體串流管理員模組的視覺組合產生器模組，該視覺組合產生器模組用於產生具有以一預定順序放置的活動中及非活動中顯示框之一參與者名冊的一視覺組合。本發明亦描述及主張其它具體實施例。
此發明內容係用來介紹在一簡化型式中選出的觀念，其在以下的詳細說明中會進一步說明。此發明內容並非要識別所主張之標的的關鍵特徵或基本特徵，也並非要做為限制所主張之標的的範疇。
多種具體實施例包括配置成執行某些作業、功能或服務之實體或邏輯結構。該等結構可以包含實體結構、邏輯結構或兩者的組合。該等實體或邏輯結構使用硬體元件、軟體元件或兩者之組合來實施。但是參照特定硬體或軟體元件之具體實施例的說明係要做為範例而非限制。使用硬體或軟體元件來實際上實施一具體實施例的決定係根據一些外在因素，例如所需要的運算速率、功率位準、耐熱度、處理循環預算、輸入資料速率、輸出資料速率、記憶體資源、資料匯流排速度、及其它設計或效能限制。再者，該等實體或邏輯結構可具有相對應的實體或邏輯連接來以電子信號或訊息的型式在該等結構之間傳遞資訊。該等連接可以包含對於該資訊或特定結構適當的有線及/或無線連接。值得注意的是任何提到「一具體實施例」者皆代表配合該具體實施例所述的一特定特徵、結構或特性係包括在至少一具體實施例中。在本說明書中多處有用語「在一具體實施例中」的出現並非皆必然參照到相同的具體實施例。
多種具體實施例可概略關於配置成在一網路上提供會議及協同服務給多個參與者之多媒體會議系統。一些多媒體會議系統可設計成利用多種封包式網路來運作，例如網際網路或全球資訊網(World Wide Web)(或「網頁(web)」)來提供網頁式的線上會議服務。這種實施有時候稱之為網頁線上會議系統。一網頁線上會議系統的範例可以包括美國華盛頓州Redmond市的Microsoft公司所提供的MICROSOFT OFFICE LIVE MEETING產品。其它多媒體線上會議系統可設計成運作在一私有網路、商務、組織或企業，並可利用一多媒體線上會議伺服器，例如美國華盛頓州Redmond市的Microsoft公司所提供的MICROSOFT OFFICE COMMUNICATIONS SERVER產品。但是可瞭解到該等實施並不限於這些範例。
除了其它網路元件之外，一多媒體線上會議系統可以包括一多媒體線上會議伺服器或其它配置成提供網頁線上會議服務的處理裝置。例如，除了其它伺服器元件之外，一多媒體線上會議伺服器可以包括一伺服器會議組件，其用於控制及混合不同型式的一會議及協同事件之媒體內容，例如一網頁線上會議。一會議及協同事件可以參照到任何多媒體會議事件，其可用即時或現場線上環境來提供多種型式的多媒體資訊，且在此處有時候簡稱為一「會議事件」、「多媒體事件」或「多媒體會議事件」。
在一具體實施例中，該多媒體會議系統另可包括實施成一會議主控台的一或多個運算裝置。每個會議主控台可藉由連接至該多媒體會議伺服器而參與在一多媒體事件中。來自多種會議主控台的不同型式之媒體資訊可於該多媒體事件期間由該多媒體會議伺服器所接收，其依序散佈該媒體資訊到部份或所有參與在該多媒體事件中的其它會議主控台。因此，任何給定的會議主控台可具有一顯示器，其提供不同型式的媒體內容之多個媒體內容觀視。依此方式，多個地理上分開的參與者可以在類似於所有參與者皆在同一房間中的一實體會議環境的一虛擬會議環境中來互動及傳遞資訊。
在一虛擬會議環境中，其很難識別一會議的不同參與者。在一多媒體會議事件中的參與者基本上會表列在具有一參與者名冊的一GUI觀視中。該參與者名冊具有每個參與者的一些識別資訊，其中包括名字、位置、影像、職稱等等。該等參與者及該參與者名冊的識別資訊基本上係由用於加入該多媒體會議事件的一會議主控台來取得。例如，一參與者基本上使用一會議主控台來加入一多媒體會議事件的一虛擬會議室。在加入之前，該參與者提供多種識別資訊來執行該多媒體會議伺服器之認證作業。一旦該多媒體會議伺服器認證該參與者之後，該參與者即被允許存取到該虛擬會議室，且該多媒體會議伺服器加入該識別資訊到該參與者名冊。
但是由該參與者名冊所顯示的該識別資訊基本上在一多媒體會議事件中係與該等實際參與者的任何視訊內容分離。例如，該參與者名冊及每個參與者之相對應識別資訊基本上係顯示在與具有多媒體內容之其它GUI觀視分開的一GUI觀視中。在來自該參與者名冊的一參與者與在該串流視訊內容中該參與者的影像之間沒有直接的對映。因此，其有時候很難對映在一GUI觀視中一參與者之視訊內容到該參與者名冊中一識別資訊的特定組合。
再者，其很難即時地在任何給定時間識別一特定活動中說話者，特別是當多個參與者同時說話或是很快地輪流說話時。此問題在當一參與者的識別資訊與一參與者的視訊內容之間沒有直接鏈結時會更為嚴重。觀視者無法立即識別那一個特定GUI觀視具有一目前為活動中的說話者，因此阻礙了在該虛擬會議室中與其它參與者之自然交談。
為了解決這些及其它問題，有一些具體實施例係關於產生一多媒體會議事件之視覺組合的技術。更特定而言，某些具體實施例係關於產生在該數位領域中會議參與者之更為自然呈現的一視覺組合之技術。該視覺組合整合及聚集關於一多媒體會議事件中每個參與者之不同型式的多媒體內容，其中包括視訊內容、音訊內容、識別資訊等等。該視覺組合呈現該整合及聚集的資訊之方式可允許一觀視者聚焦在該視覺組合的一特定區域上，以收集一參與者的參與者特定資訊，而在另一特定區域中來收集另一參與者的參與者特定資訊，依此類推。依此方式，該觀視者可以聚焦在該多媒體會議事件的互動式部份，而不會花費時間在收集來自不同來源的參與者資訊。因此，該視覺組合技術可以改善一操作者、裝置或網路之內容提供性、可調整性、模組化程度、可擴充性或交互運作性。
第1圖所示為一多媒體會議系統100之方塊圖。多媒體會議系統100可代表適合來實施多種具體施例的一般性系統架構。多媒體會議系統100可包含多種元件。一元件可以包含配置成執行某些作業的任何實體或邏輯結構。每個元件可視一給定組合的設計參數或效能限制所需要而實施成硬體、軟體或其任何組合。硬體元件的範例可以包括裝置、組件、處理器、微處理器、電路、電路元件(例如電晶體、電阻、電容器、電感器等等)、積體電路、特定應用積體電路(ASIC,“Application specific integrated circuits”)、可程式化邏輯裝置(PLD,“Programmable logic device”)、數位信號處理器(DSP,“Digital signal processor”)、場域可程式化閘極陣列(FPGA,“Field programmable gate array”)、記憶體單元、邏輯閘極、暫存器、半導體裝置、晶片、微晶片、晶片組等等。軟體的範例可以包括任何軟體組件、程式、應用、電腦程式、應用程式、系統程式、機器程式、作業系統軟體、中繼軟體、韌體、軟體模組、例式、子例式、函數、方法、介面、軟體介面、應用程式介面(API,“Application program interface”)、指令集、運算碼、電腦碼、碼段落、電腦碼段落、字元、數值、符號或其任何組合。雖然如第1圖所示的多媒體會議系統100在某種拓樸中具有有限數目的元件，其可瞭解到多媒體會議系統100在其它拓樸中可視一給定實施的需要而包括或多或少的元件。該等具體實施例並不限於此內容。
在多種具體實施例中，多媒體會議系統100可包含或形成為一有線通訊系統、無線通訊系統或兩者之組合的一部份。例如，多媒體會議系統100可以包括配置成在一或多種有線通訊鏈結之上傳遞資訊的一或多種元件。一有線通訊鏈結的範例可以包括但不限於一線路、纜線、匯流排、印刷電路板(PCB，“Printed circuit board”)、Ethernet連接、點對點(P2P,“Peer-to-peer”)連接、背平面(backplane)、交換纖維、半導體材料、雙絞線、同軸電纜、光纖連接等等。多媒體會議系統100亦可以包括配置成在一或多種無線通訊鏈結之上傳遞資訊的一或多種元件。一無線通訊鏈結的範例可以包括但不限於一無線電頻道、紅外線頻道、無線射頻(RF,“Radio frequency”)頻道、Wireless Fidelity(WiFi)頻道、RF頻譜的一部份及/或一或多個有執照或無執照頻率波段。
在多種具體實施例中，多媒體會議系統100可配置成傳遞、管理或處理不同型式的資訊，例如媒體資訊及控制資訊。媒體資訊的範例概略可以包括代表對於一使用者有意義之內容的任何資料，例如語音資訊、視訊資訊、音訊資訊、影像資訊、文字資訊、數值資訊、應用資訊、文數字符號、圖形等等。媒體資訊有時候亦可稱之為”媒體內容”。控制資訊可指任何代表對於一自動化系統有意義的命令、指令或控制字元之任何資料。例如，控制資訊可用於導引媒體資訊經過一系統，以建立裝置之間的連接，指示一裝置來以一預定的方式處理該媒體資訊等等。
在多種具體實施例中，多媒體會議系統100可以包括一多媒體會議伺服器130。多媒體會議伺服器130可包含任何邏輯或實體個體，其被配置成在一網路120上會議主控台110-1-m之間建立、管理或控制一多媒體會議呼叫。網路120可包含例如一封包交換網路、一電路交換網路或兩者之組合。在多種具體實施例中，多媒體會議伺服器130可包含或被實施成任何處理或運算裝置，例如電腦、伺服器、伺服器陣列或伺服器農莊、工作站、迷你級電腦、主機級電腦、超級電腦等等。多媒體會議伺服器130可包含或實施適用於傳遞及處理多媒體資訊之一般性或特定的運算架構。例如在一具體實施例中，多媒體會議伺服器130可使用參照第5圖所述之運算架構來實施。多媒體會議伺服器130之範例可以包括但不限於MICROSOFT OFFICE COMMUNICATIONS SERVER、MICROSOFT OFFICE LIVE MEETING伺服器等等。
多媒體會議伺服器130之特定實施可根據用於多媒體會議伺服器130之一組通訊協定或標準而改變。在一範例中，多媒體會議伺服器130可根據Internet Engineering Task Force(IETF)Multiparty Multimedia Session Control(MMUSIC)Working Group Session Initiation Protocol(SIP)系列的標準及/或其變化者來實施。SIP為一種提出的標準，用於初始化、修改及終止包含有多媒體元件的一互動使用者會期，例如視訊、語音、即時傳訊、線上遊戲及虛擬實境。在另一範例中，多媒體會議伺服器130可根據International Telecommunication Union(ITU)H.323系列的標準及/或變化者來實施。H.323標準定義一多點控制單元(MCU,“Multipoint control unit”)來協調會議呼叫作業。特別是，MCU包括一多點控制器(MC,“Multipoint controller”)，其處理H.245發信，及一或多個多點處理器(MP,“Multipoint processor”)，其混合及處理該等資料串流。SIP及H.323標準基本上皆為網路電話(VoIP,“Voice over Internet Protocol”)或封包上語音(VOP,“Voice over Packet”)多媒體會議呼叫作業之發信協定。但是，其可瞭解到其它發信協定可對於多媒體會議伺服器130來實施，且仍落在該等具體實施例之範疇內。
在一般性作業中，多媒體會議系統100可用於多媒體會議呼叫。多媒體會議呼叫基本上包含傳遞語音、視訊及/或多個端點之間的資料資訊。例如，一公用或私密封包網路120可用於音訊會議呼叫、視訊會議呼叫、音訊/視訊會議呼叫、協同文件共享及編輯等等。封包網路120亦可透過配置成在電路交換資訊與封包資訊之間轉換的一或多個適當VoIP閘道器來連接至公共交換電話網路(PSTN,“Public Switched Telephone Network”)。
為了在封包網路120上建立一多媒體會議呼叫，每個會議主控台110-1-m可以透過封包網路120連接至多媒體會議伺服器130，其使用多種在不同連接速度或頻寬下運作的有線或無線通訊鏈結，例如像是一較低頻寬PSTN電話連接、一媒體頻寬DSL數據機連接或纜線數據機連接，及在一區域網路(LAN,“Local area network”)上較高頻寬的企業內網路連接。
在多種具體實施例中，多媒體會議伺服器130可以在會議主控台110-1-m之間建立、管理及控制一多媒體會議呼叫。在一些具體實施例中，該多媒體會議呼叫可以包含使用提供完整協同運作能力的一網頁線上會議應用之一現場網頁式會議呼叫。多媒體會議伺服器130係做為一中央伺服器，其可控制及散佈在該會議中的媒體資訊。其自多個會議主控台110-1-m接收媒體資訊，執行多種型式的媒體資訊之混合作業，並轉送該媒體資訊到部份或所有的其它參與者。一或多個會議主控台110-1-m可藉由連接至多媒體會議伺服器130來加入一會議。多媒體會議伺服器130可實施多種許可控制技術來以一安全及受控的方式認證及加入會議主控台110-1-m。
在多種具體實施例中，多媒體會議系統100可以包括實施成會議主控台110-1-m之一或多個運算裝置，以透過網路120在一或多個通訊連接上連接至多媒體會議伺服器130。例如，一運算裝置可實施一客戶端應用，其可主控每一個同時代表一個別會議的多個會議主控台。類似地，該客戶端應用可接收多個音訊、視訊及資料串流。例如，來自所有或一子集合的該等參與者之視訊串流可以顯示成在該參與者的顯示器上的馬賽克，其具有上方視窗中目前活動中說話者之視訊，及在其它視窗中其它參與者的全景觀視。
會議主控台110-1-m可以包含任何邏輯或實體個體，其係配置成參與或從事在由多媒體會議伺服器130所管理的一多媒體會議呼叫中。會議主控台110-1-m可實施成任何裝置，其在最為基本的型式中包括具有一處理器及記憶體之處理系統，一或多個多媒體輸入/輸出(I/O)組件，及一無線及/或有線網路連接。多媒體I/O組件的範例可以包括音訊I/O組件(例如麥克風、喇叭)、視訊I/O組件(例如攝影機、顯示器)、觸知(I/O)組件(例如振動器)、使用者資料(I/O)組件(例如鍵盤、拇指板、小鍵盤、觸控螢幕)等等。會議主控台110-1-m之範例可以包括一電話、VoIP或VOP電話、一封包電話，其設計成在PSTN上運作，一網際網路電話、一視訊電話、一行動電話、一個人數位助理(PDA,“Personal digital assistant”)、一組合行動電話及PDA、一行動運算裝置、一智慧型電話、一單向呼叫器、一雙向呼叫器、一傳訊裝置、一電腦、一個人電腦(PC,“Personal computer”)、一桌上型電腦、一膝上型電腦、一筆記型電腦、一掌上型電腦、一網路家電等等。在一些實施中，會議主控台110-1-m可使用類似於參照第5圖所述之運算架構的一般性或特定運算架構來實施。
會議主控台110-1-m可以包含或實施個別的客戶端會議組件112-1-n。客戶端會議組件112-1-n可設計成與多媒體會議伺服器130之伺服器會議組件132交互運作，其建立、管理或控制一多媒體會議事件。例如，客戶端會議組件112-1-n可以包含或實施該等適當的應用程式及使用者介面控制來允許該等個別的會議主控台110-1-m來參與在由多媒體會議伺服器130所促進的一網頁會議中。此可包括輸入設備(例如攝影機、麥克風、鍵盤、滑鼠、控制器等)，以捕捉由一會議主控台110-1-m之操作者所提供的媒體資訊，及輸出設備(例如顯示器、喇叭等)，以 由其它會議主控台110-1-m之操作者來重新產生媒體資訊。客戶端會議組件112-1-n的範例可以包括但不限於MICROSOFT OFFICE COMMUNICATOR或MICROSOFT OFFICE LIVE MEETING視窗式會議主控台等等。
如第1圖所示的具體實施例，多媒體會議系統100可以包括一會議室150。一企業或公司基本上可利用會議室來主持會議。這種會議包括多媒體會議事件，其具有參與者位在會議室150內部，及位在會議室150之外的遠端參與者。會議室150可具有用於支援多媒體會議事件的多種運算及通訊資源，並提供一或多個遠端會議主控台110-2-m及本地會議主控台110-1之間的多媒體資訊。例如，會議室150可包括位在會議室150之內的一本地會議主控台110-1。
本地會議主控台110-1可連接至能夠捕捉、傳遞或重新產生多媒體資訊的多種多媒體輸入裝置及/或多媒體輸出裝置。該等多媒體輸入裝置可包含配置成捕捉或接收來自會議室150內的操作者之輸入多媒體資訊的任何邏輯或實體裝置，其中包括音訊輸入裝置、視訊輸入裝置、影像輸入裝置、文字輸入裝置及其它多媒體輸入設備。多媒體輸入裝置之範例可包括但不限於攝影機、麥克風、麥克風陣列、線上會議電話、白板、互動式白板、語音到文字組件、文字到語音組件、語音識別系統、指向裝置、鍵盤、觸控螢幕、平板型電腦、手寫識別裝置等等。 一攝影機的範例可以包括一環繞攝影機，例如美國華盛頓州Redmond市的Microsoft Corporation所製造的MICROSOFT ROUNDTABLE。MICROSOFT ROUNDTABLE為具有一360度攝影機的視訊會議裝置，其可提供遠端會議參與者每個坐在一會議桌周圍的全景視訊。該等多媒體輸出裝置可包含配置成重新產生或顯示來自遠端會議主控台110-2-m的操作者之輸出多媒 體資訊的任何邏輯或實體裝置，其中包括音訊輸出裝置、視訊輸出裝置、影像輸出裝置、文字輸入裝置及其它多媒體輸出設備。多媒體輸出裝置的範例可包括但不限於電子顯示器、視訊投影機、喇叭、振動單元、印表機、傳真機等等。
在會議室150中的本地會議主控台110-1可以包括配置成捕捉包括參與者154-1-p之會議室150的媒體內容之多種多媒體輸入裝置，並串流化該媒體內容到多媒體會議伺服器130。在如第1圖所示的例示性具體實施例中，本地會議主控台110-1包括一攝影機106及麥克風104-1-r的陣列。攝影機106可捕捉包括存在於會議室150中的參與者154-1-p之視訊內容的視訊內容，並經由本地會議主控台110-1串流化該視訊內容到多媒體會議伺服器130。類似地，麥克風104-1-r的陣列可捕捉包括存在於會議室150中的參與者154-1-p之音訊內容的音訊內容，並經由本地會議主控台110-1串流化該音訊內容到多媒體會議伺服器130。本地會議主控台亦可包括多種媒體輸出裝置，例如顯示器116或視訊投影機，以顯示來自所有使用透過多媒體會議伺服器130接收的會議主控台110-1-m之參與者具有視訊內容或音訊內容之一或多個GUI觀視。
會議主控台110-1-m及多媒體會議伺服器130可利用對於一給定多媒體會議事件所建立的多種媒體連接傳遞媒體資訊及控制資訊。該等媒體連接可使用多種VoIP發信協定來建立，例如SIP系列的協定。該SIP系列的協定為用於產生、修改及終止一或多個參與者之會期的應用層控制(發信)協定。這些會期包括網際網路多媒體會議、網際網路電話呼叫及多媒體散佈。在一會期中的成員可透過群播、或透過單播關係的網格或這些之組合來通訊。SIP係設計成整體IETF多媒體資料及控制架構之一部份，其目前加入有協定像是用於保留網路資源的資源保留 協定(RSVP)(IEEE RFC 2205)，用於輸送即時資料及提供服務品質(QOS)反饋的即時輸送協定(RTP)(IEEE RFC 1889)，用於控制串流化媒體之傳遞的即時串流化協定(RTSP)(1EEE RFC 2326)，用於廣告經由群播的多媒體會期之會期宣告協定(SAP)，用於描述多媒體會期之會期描述協定(SDP)(IEEE RFC 2327)及其它者。例如，會議主控台110-1-m可使用SIP做為一發信頻道來設置該等媒體連接，及RTP做為一媒體頻道來在該等媒體連接上輸送媒體資訊。
在一般性作業中，一排程裝置108可用於產生多媒體會議系統100之多媒體會議事件保留。排程裝置108可包含例如一運算裝置，其具有用於排程多媒體會議事件的適當硬體及軟體。例如，排程裝置108可以包含利用MICROSOFT OFFICE OUTLOOK之應用軟體之電腦，其由美國華盛頓州Redmond市Microsoft Corporation所製造。MICROSOFT OFFICE OUTLOOK應用軟體包含可用於排程一多媒體會議事件之傳訊及協同客戶端軟體。一操作者可以使用MICROSOFT OFFICE OUTLOOK來轉換一排程請求到被傳送到一會議受邀者列表的MICROSOFT OFFICE LIVE MEETING事件。該排程請求可以包括一超鏈結到一多媒體會議事件的虛擬房間。一受邀者可以點擊在該超鏈結上，且會議主控台110-1-m啟動一網頁瀏覽器，連接至多媒體會議伺服器130，並加入該虛擬房間。一旦到達該處，該等參與者除了其它工具之外，可呈現一簡報投影片、註解文件，或對於在白板上的內容進行腦力激盪。
一操作者可以使用排程裝置108來產生一多媒體會議事件的多媒體會議事件保留。該多媒體會議事件保留可以包括該多媒體會議事件之會議受邀者的一列表。該會議受邀者列表可以包含受邀到一多媒體會議事件之一個人列表。在某些案例中， 該會議受邀者列表可以僅包括那些受到該多媒體事件邀請及接受的個人。一客戶端應用，例如Microsoft Outlook的郵件客戶端，其轉送該保留請求到多媒體會議伺服器130。多媒體會議伺服器130可以接收該多媒體會議事件保留，並由一網路裝置取得該會議受邀者的列表及該會議受邀者的相關資訊，例如企業資源目錄160。
企業資源目錄160可以包含發行操作者及/或網路資源的一公開目錄之網路裝置。由企業資源目錄160所發行的網路資源之常見範例包括網路印表機。例如在一具體實施例中，企業資源目錄160可實施成MICROSOFT ACTIVE DIRECTORY。Active Directory為輕量目錄存取協定(LDAP,“Lightweight directory access protocol”)目錄服務的一種實施，其提供網路電腦之集中式認證及授權服務。Active Directory亦允許管理者來指定政策、佈署軟體，且施加關鍵的更新到一組織。Active Directory儲存資訊及設定在一中央資料庫中。Active Directory網路可由具有數百物件之小型安裝變化到具有數百萬物件之大型安裝。
在多種具體實施例中，企業資源目錄160可以包括多種會議受邀者之識別資訊到一多媒體會議事件。該識別資訊可以包括能夠唯一地識別每個會議受邀者之任何種類的資訊。例如，該識別資訊可以包括但不限於名字、位置，聯絡資訊、帳號、職業資訊、組織資訊(例如職稱)、個人資訊、連接資訊、存在資訊、網路位址、媒體存取控制(MAC,“Media access control”)位址、網際網路協定(IP)位址、電話號碼、電子郵件地址、協定位址(例如SIP位址)、設備識別碼、硬體組態、軟體組態、有線介面、無線介面、支援的協定及其它想要的資訊。
多媒體會議伺服器130可接收該多媒體會議事件保留，包括該會議受邀者的列表，並由企業資源目錄160取得相對應的 識別資訊。多媒體會議伺服器130可使用該會議受邀者的列表及相對應識別資訊來輔助自動地識別一多媒體會議事件的參與者。例如，多媒體會議伺服器130可轉送該會議受邀者的列表及附屬識別資訊到會議主控台110-1-m，用於識別該多媒體會議事件之視覺組合中的該等參與者。
請再次參照會議主控台110-1-m，會議主控台110-1-m之每一者可以包含或實施個別的視覺組合組件114-1-t。視覺組合組件114-1-t概略用於在一顯示器116上產生及顯示一多媒體會議事件的一視覺組合108。雖然視覺組合108及顯示器116藉由範例而非限制地顯示成會議主控台110-1的一部份，其可瞭解到每個會議主控台110-1-m可以包括類似於顯示器116的一電子顯示器，並能夠呈現會議主控台110-1-m之每個操作者的視覺組合108。
例如在一具體實施例中，本地會議主控台110-1可以包含顯示器116與視覺組合組件114-1，用於產生一多媒體會議事件的一視覺組合108。視覺組合組件114-1可以包含配置成產生視覺組合108之多種硬體元件及/或軟體元件，其可在該數位領域中提供會議參與者(例如154-1-p)之更為自然的呈現。該視覺組合108整合及聚集關於一多媒體會議事件中每個參與者之不同型式的多媒體內容，其中包括視訊內容、音訊內容、識別資訊等等。該視覺組合呈現該整合及聚集的資訊之方式可允許一觀視者聚焦在該視覺組合的一特定區域上，以收集一參與者的參與者特定資訊，而在另一特定區域中來收集另一參與者的參與者特定資訊，依此類推。依此方式，該觀視者可以聚焦在該多媒體會議事件的互動式部份，而不會花費時間在收集來自不同來源的參與者資訊。概言之，會議主控台110-1-m及特別是視覺組合組件114可參照第2圖之更為詳細的說明。
第2圖所示為視覺組合組件114-1-t之方塊圖。視覺組合組件114可包含多個模組。該等模組可使用硬體元件、軟體元件或硬體元件與軟體元件之組合來實施。雖然如第2圖所示的視覺組合組件114在某種拓樸中具有有限數目的元件，其可瞭解到視覺組合組件114在其它拓樸中可視一給定實施的需要而包括或多或少的元件。該等具體實施例i並不限於此內容。
在如第2圖所示之例示性具體實施例中，視覺組合組件114包括一視訊解碼器模組210。視訊解碼器210可概略透過多媒體會議伺服器130解碼接收自多個會議主控台110-1-m的媒體串流。例如在一具體實施例中，視訊解碼器模組210可配置成自參與在一多媒體會議事件中多個會議主控台110-1-m接收輸入媒體串流202-1-f。視訊解碼器模組210可解碼輸入媒體串流202-1-f成為適合於由顯示器116顯示的數位或類比視訊內容。再者，視訊解碼器模組210可解碼輸入媒體串流202-1-f成為適用於顯示器116及由視訊組合108使用的該等顯示框的多種空間解析度及時間解析度。
視覺組合組件114-1可以包含一活動中說話者偵測器模組(ASD,“Active speaker detector")模組220，其通訊式耦合至視訊解碼器模組210。ASD模組220概略可以偵測在解碼的媒體串流202-1-f中任何的參與者是否為活動中說話者。多種活動中說話者偵測技術可對ASD模組220來實施。例如一具體實施例中，ASD模組220可偵測及測量在一解碼的媒體串流中的語音能量，並根據最高語音能量到最低語音能量來評等該等測量，並選擇具有最高語音能量之解碼的媒體串流來代表該目前活動中說話者。但是其可使用其它的ASD技術，且該等具體實施例並不限於此內容。
但是在某些案例中，一輸入媒體串流202-1-f有可能包含一 個以上的參與者，例如來自位在會議室150中本地會議主控台110-1之輸入媒體串流202-1。在此例中，ASD模組220可配置成使用音訊(聲源本地化)及視訊(動作及空間樣式)特徵由位在會議室150中的參與者154-1-p當中偵測主要或活動中的說話者。ASD模組220在當數人同時說話時可以決定在會議室150中的主要說話者。其亦可捕償背景雜音及反射聲音的硬表面。例如，ASD模組220可接收來自六個不同麥克風104-1-r的輸入來區分不同的聲音，並透過稱為音束成形(beamforming)的程序來隔離主要的聲音。該等麥克風104-1-r之每一麥克風被建構在會議主控台110-1之不同的部份當中。不論聲音的速度為何，麥克風104-1-r可在相對於彼此不同的時段中自參與者154-1-p之語音資訊。ASD模組220可使用此時間差異來識別該語音資訊的來源。一旦識別該語音資訊的來源，本地會議主控台110-1之控制器可使用來自攝影機106-1-p的視覺提示來針對、放大及強調該主要說話者之臉部。依此方式，本地會議主控台110-1之ASD模組220自會議室150中隔離一單一參與者154-1-p成為在該傳送側的活動中說話者。
視覺組合組件114-1可以包含通訊式耦合至ASD模組220之一媒體串流管理員(MSM,“Media stream manager”)模組230。MSM模組230可以概略地對映解碼的媒體串流到多個顯示框。例如在一具體實施例中，MSM模組230可配置成對映該活動中說話者之解碼的媒體串流到一活動中顯示框，且對映其它解碼的媒體串流到非活動中顯示框。
視覺組合組件114-1可以包含通訊式耦合至MSM模組230之一視覺組合產生器(VCG,“Visual composition generator”)模組240。VCG模組240可概略呈現或產生視覺組合108。例如在一具體實施例中，VCG模組240可配置成產生具有以一預定順 序放置的該等活動中及非活動中顯示框之一參與者名冊的視覺組合108。VCG模組240可以透過一給定會議主控台110-1-m之一作業系統之視訊繪圖控制器及/或GUI模組來輸出視覺組合信號206-1-g到顯示器116。
視覺組合組件114-1可包含通訊式耦合至VCG模組240之一註解模組250。註解模組250可以概略利用識別資訊註解參與者。例如在一具體實施例中，註解模組250可配置成接收一操作者命令來利用識別資訊註解在一活動中或非活動中顯示框中的一參與者。註解模組250可以決定一識別位置來定位該識別資訊。然後註解模組250可以利用在該識別位置處的識別資訊註解該參與者。
第3圖所示為視覺組合108之更為詳細的例示。視覺組合108可比包含配置成某種馬賽克或顯示樣式中的多種顯示框330(例如330-1、330-2、330-3、330-4、330-5、及330-6)來呈現給一觀視者，例如一會議主控台110-2-m之操作者。每個顯示框330係設計成呈現或顯示來自媒體串流202-1-f之多媒體內容，例如來自由MSM模組230對映到一顯示框330的一相對應媒體串流202-1-f的視訊內容及/或音訊內容。
例如在第3圖所示之例示性具體實施例中，視覺組合108可以包括一顯示框330-6，其中包含一主要觀視區域來顯示應用資料，例如來自簡報應用軟體的簡報投影片304。再者，視覺組合108可以包含一參與者名冊306，其中包含顯示框330-1到330-5。其可瞭解到視覺組合108可以包括一給定實施之不同大小及其它配置之或多或少的顯示框330-1-s。
參與者名冊306可以包含多個顯示框330-1到330-5。顯示框330-1到330-5可以提供來自由會議主控台110-2-m所傳遞的多個媒體串流202-1-f的參與者302(例如302-1、302-2、302-3、 302-4、302-5a、302-5b、及302-5c)之視訊內容及/或音訊內容。參與者名冊306之多個顯示框330-1到330-5可以位在由視覺組合108上方到視覺組合108底部之一預定順序，例如在靠近最上方之第一位置處的顯示框330-1，在第二位置處的顯示框330-2，在第三位置處的顯示框330-3，在第四位置處的顯示框330-4，及靠近底部的第五位置處的顯示框330-5。由顯示框330-1到330-5顯示之參與者302-1到302-5的視訊內容可用多種格式來呈現，例如”頭及肩部”圖樣(例如具有或不具有任何背景)，可覆蓋其它物件的透明物件，在透視全景觀視中的長方形區域等等。
參與者名冊306之顯示框330-1到330-5的預定順序並不需要為靜態。例如在一些具體實施例中，該預定順序可為了一些理由而改變。例如，一操作者可人為地基於個人喜好設置部份或所有的預定順序。在另一範例中，視覺組合組件114-2-t可以自動地基於參與者加入或離開一給定多媒體會議事件、顯示框330-1到330-5之顯示尺寸的修改、對於顯示框330-1到330-5所呈現之視訊內容的空間或時間解析度的改變、在顯示框330-1到330-5之視訊內容內顯示的參與者302的數目，不同的多媒體會議事件等等來修改該預定順序。
在一具體實施例中，視覺組合組件114-2-t可以自動地基於由ASD模組220所實施的ASD技術來修改該預定順序。因為基本上一些多媒體會議事件的活動中說話者可經常地改變，其對於一觀視者而言很難確定顯示框330-1到330-5中那一框包含一目前活動中的說話者。為了解決此問題及其它問題，參與者名冊306可在該預定順序中保留給一活動中說話者320之第一位置的顯示框330-1到330-5之預定順序。
VCG模組240可用於產生在該預定順序之第一位置中具有 一活動中顯示框330-1之參與者名冊306的視覺組合108。一活動中顯示框可代表特定指定來顯示活動中說話者320之顯示框330-1。例如在一具體實施例中，VCG模組240可配置成移動具有指定做為該目前活動中說話者之一參與者的視訊內容之一顯示框330之預定順序內的一位置到該預定順序中該第一位置。例如，假設如第一顯示框330-1中顯示的一第一媒體串流202-1的參與者302-1係指定為在第一時段的一活動中說話者320。另假設ASD模組220偵測到在一第二時段中由第四顯示框330-4中所示之第四媒體串流202-4中活動中說話者320由參與者302-1改變到參與者302-4。VCG模組240可由該預定順序中第四位置的第四顯示框330-4移動到保留給活動中說話者320之預定順序中第一位置。然後VCG模組240可由該預定順序中第一位置之第一顯示框330-1移動到剛由第四顯示框330-4空出的該預定順序中第四位置。例如此會需要實施視覺效果，例如在交換作業期間顯示顯示框330-1到330-5之移動，藉此提供該觀視者活動中說話者320已經改變的一視覺提示。
除了交換在該預定順序內顯示框330-1到330-5之位置之外，MSM模組230可配置成交換對映到具有指定成目前活動中說話者320之一參與者的視訊內容之顯示框330-1到330-5之媒體串流202-1-f。使用先前範例，除了回應於在活動中說話者320之改變交換顯示框330-1,330-4的位置，MSM模組230可交換顯示框330-1,330-4之間的個別媒體串流202-1,202-4。例如，MSM模組230可使得第一顯示框330-1顯示來自第四媒體串流202-4的視訊內容，而第四顯示框330-4顯示來自第一媒體串流202-1的視訊內容。例如此會需要降低重新繪製顯示框330所需要的運算資源的數量，藉此釋放其它視訊處理作業之資源。
VCG模組240可用於產生在該預定順序之第二位置中具有 一非活動中顯示框330-2之參與者名冊306的視覺組合108。一非活動中顯示框可代表未指定來顯示活動中說話者320之一顯示框330。非活動中顯示框330-2可以具有對應於產生視覺組合108之一會議主控台110-2-m之一參與者302-2的視訊內容。例如，視覺組合108之觀視者基本上亦為在一多媒體會議事件中一會議參與者。因此，輸入媒體串流202-1-f之一包括該觀視者的視訊內容及/或音訊內容。觀視者會想要觀看他們本身來確保正在使用之適當的呈現技術，評估由該觀視者所發信之非口頭通訊等等。因此，雖然參與者名冊306之預定順序中的第一位置包括一活動中說話者320，參與者名冊306之預定順序中的第二位置可以包括該觀視方的視訊內容。類似於活動中說話者320，該觀視方基本上維持在該預定順序之第二位置上，即使當其它顯示框330-1,330-3,330-4及330-5可在該預定順序內移動。此可確保該觀視者的連續性，並降低掃描視覺組合108之其它區域之需求。
在某些案例中，一操作者可人為地基於個人喜好設置部份或所有的預定順序。VCG模組240可用於接收一操作者命令來由該預定順序中目前位置移動一非活動中顯示框330到該預定順序中一新的位置。然後VCG模組240可以回應於該操作者命令將非活動中顯示框330-1-a到該新的位置。例如，一操作者可使用一輸入裝置，例如滑鼠、觸控螢幕、鍵盤等等，以控制一指標340。該操作者可以拖曳及放下顯示框330-1到330-5來人為地形成任何想要順序的顯示框330-1到330-5。
除了顯示輸入媒體串流202-1-f之音訊內容及/或視訊內容之外，參與者名冊306亦可用於顯示參與者302之識別資訊。註解模組250可用於接收一操作者命令來利用識別資訊註解在一活動中顯示框(例如顯示框330-1)或非活動中顯示框(例如顯 示框330-2到330-5)中一參與者302。例如，假設具有包含視覺組合108之顯示器116的一會議主控台110-1-m之操作者想要觀看顯示在顯示框330中部份或所有參與者302之識別資訊。註解模組250可以接收來自多媒體會議伺服器130及/或企業資源目錄160之識別資訊204。註解模組250可以決定一識別位置308來定位識別資訊204，及利用在識別位置308處之識別資訊來註解該參與者。識別資訊308必須相當靠近於相關的參與者302。識別位置308可以包含顯示框330內的位置來註解識別資訊204。特別是，識別資訊204必須足夠靠近於參與者302，以促進參與者302之視訊內容與參與者302之識別資訊204之間的連接，其係由觀看視覺組合108之人的角度，而降低或避免部份或完全總結參與者302之視訊內容的可能性。識別位置308可為一靜態位置，或是可以根據一些因素來動態地改變，例如像是參與者302的大小，參與者302之移動，在顯示框330中背景物件中的改變等等。
在某些案例中，VCG模組240(或一OS的GUI模組)可以用於產生具有一選項的功能表314，其可利用一選擇的參與者302之識別資訊204來開啟一個別的GUI觀視316。例如，一操作者可以使用該輸入裝置來控制指標340來停留在一給定顯示框之上，例如顯示框330-4，且功能表314將自動地或主動地開啟功能表314。該等選項之一可以包括「開啟聯絡人卡」或某類似的標籤，其在當選擇時可利用識別資訊350開啟GUI觀視316。識別資訊350可以相同或類似於識別資訊204，但基本上包括目標參與者302之更為詳細的識別資訊。
參與者名冊306之動態修改提供一種更有效率的機制來與一多媒體會議事件之一虛擬會議室中多個參與者302進行互動。但是在某些案例中，一操作者或觀視者會想要固定一非活 動中顯示框330在該預定順序中目前的位置處，而非將非活動中顯示框330或非活動中顯示框330之視訊內容在參與者名冊306當中移動。例如可在當一觀視者想要輕易地定位及觀看部份或所有一多媒體會議事件當中一特定參與者時會需要。在這些案例中，該操作者或觀視者可選擇一非活動中顯示框330來維持在參與者名冊306之預定順序中的目前位置處。回應於接收一操作者命令，VCG模組240可暫時或永久地指定選擇的非活動中顯示框330到該預定順序內一選擇的位置。例如，一操作者或觀視者會想要指定顯示框330-3到該預定順序內該第三位置處。一視覺指示器，例如指針圖標312，其可代表顯示框330-3係分配給該第三位置，且將維持在該第三位置直到釋放。
上述具體實施例之作業另可參照一或多個邏輯流程來說明。其可瞭解到該等代表性邏輯流程並不需要以所呈現的順序來執行，或以任何特定順序，除非另有指明。再者，對於該等邏輯流程所描述的多種活動中可用序列或並列方式執行。該等邏輯流程可視對於一給定組合之設計及效能限制之需要來使用上述具體實施例或其它元件之一或多個硬體元件及/或軟體元件來實施。例如，該等邏輯流程可實施成由一邏輯裝置(例如一通用或特定目的電腦)執行的邏輯(例如電腦程式指令)。
第4圖所示為一邏輯流程400之具體實施例。邏輯流程400可表示成由此處所述之一或多個具體實施例所執行之部份或所有的作業。
如第4圖所示，邏輯流程400可解碼一多媒體會議事件之多個媒體串流，如方塊402。例如，視訊解碼器模組210可接收多個編碼的媒體串流202-1-f，並解碼媒體串流202-1-f由視覺組合108所顯示。編碼的媒體串流202-1-f可包含個別的媒體串流，或由多媒體會議伺服器130所結合的一混合媒體串流。
邏輯流程400可偵測在一解碼媒體串流中做為一活動中說話者之參與者，如方塊404。例如，ASD模組220可偵測在一解碼的媒體串流202-1-f中之參與者302為活動中說話者320。活動中說話者320基本上可以經常地在一給定多媒體會議事件當中改變。因此，不同的參與者302可隨時指定成活動中說話者320。
邏輯流程400可對映具有活動中說話者之解碼的媒體串流到一活動中顯示框，且對映其它解碼的媒體串流到非活動中顯示框，如方塊406。例如，MSM模組230可對映具有活動中說話者320之解碼的媒體串流202-1-f到一活動中顯示框330-1，且對映該等其它解碼的媒體串流到非活動中顯示框330-2到330-5。
邏輯流程400可產生包含放置在一預定順序中該等活動中及非活動中顯示框之一參與者名冊的一視覺組合，如方塊408。例如，VCG模組240可產生包含放置在一預定順序中該活動中顯示框330-1及非活動中顯示框330-2到330-5之一參與者名冊306的一視覺組合108。VCG模組240可以回應於改變條件而自動地修改該預定順序，或一操作者可以人為地依需要修改該預定順序。
第5圖另外例示適合於實施會議主控台110-1-m或多媒體會議伺服器130之運算架構510的更為詳細的方塊圖。在一基本組態中，運算架構510基本上包括至少一處理單元532及記憶體534。記憶體534可以使用能夠儲存資料的任何機器可讀取或電腦可讀取媒體來實施，其中同時包括揮發性及非揮發性記憶體。例如，記憶體534可以包括唯讀記憶體(ROM,”Read-only memory”)、隨機存取記憶體(RAM,“Random-access memory”)、動態RAM(DRAM,“Dynamic RAM”)、雙倍速DRAM(DDRAM, “Double-Data-Rate DRAM”)、同步DRAM(SDRAM,“Synchronous DRAM”)、靜態RAM(SRAM,“Static RAM”)、可程式化ROM(PROM,“Programmable ROM”)、可抹除可程式化ROM(EPROM,“Erasable programmable ROM”)、電性可抹除可程式ROM(EEPROM,“Electricaly erasable programmable ROM”)、快閃記憶體、聚合物記憶體，例如鐵電聚合物記憶體，離子記憶體、相位改變或鐵電記憶體、矽氧化物氮氧化物矽(SONOS,“Silicon-oxide-nitride-oxide-silicon”)記憶體、磁鐵或光學卡，或任何其它適用於儲存資訊的媒體。如第5圖所示，記憶體534可以儲存多種軟體程式，例如一或多個應用程式536-1-t及附屬資料。根據該種實施，應用程式536-1-t之範例可以包括伺服器會議組件132、客戶端會議組件112-1-n，或視覺組合組件114。
運算架構510亦可具有其基本組態之外的額外特徵及/或功能。例如，運算架構510可以包括可移除儲存器538及不可移除儲存器540，其亦可包含多種機器可讀取或電腦可讀取媒體，如前所述。運算架構510亦可具有一或多個輸入裝置544，例如鍵盤、滑鼠、筆、語音輸入裝置、觸控輸入裝置、測量裝置、感測器等等。運算架構510亦可包括一或多個輸出裝置542，例如顯示器、喇叭、印表機等等。
運算架構510另可包括一或多個通訊連接546，其允許運算架構510與其它裝置進行通訊。通訊連接546可以包括多種標準通訊元件，例如一或多個通訊介面、網路介面、網路介面卡(NIC,“Network interface card”)、無線電、無線傳送器/接收器(收發器)、有線及/或無線通訊媒體、實體連接器等等。通訊媒體基本上包含電腦可讀取指令、資料結構、程式模組或其它在一調變的資料信號中的資料，例如載波或其它輸送機制，並包括任何資訊傳遞媒體。該名詞「調變資料信號」代表一信號中其一或多項特性為利用方法設定或改變以在該信號中編碼資訊。例如(但非限制)通訊媒體包含有線通訊媒體及無線通訊媒體。有線通訊媒體之範例可以包括一電線、纜線、金屬導線、印刷電路板(PCB,“Printed circuit board”)、背平面、開關纖維、半導體材料、雙絞線、同軸電纜、光纖、一傳遞的信號等等。無線通訊媒體之範例可以包括聲音、無線射頻(RF)頻譜、紅外線及其它無線媒體。如此處所使用之術語「機器可讀取媒體」及「電腦可讀取媒體」係代表同時包括儲存媒體與通訊媒體。
第6圖所示為適合於儲存多種具體實施例之邏輯的一製造物品600，包括邏輯流程400。如圖所示，物品600可以包含一儲存媒體602來儲存邏輯604。儲存媒體602之範例可以包括一或多種能夠儲存電子資料之電腦可讀取儲存媒體，其包括揮發性記憶體或非揮發性記憶體、可移除或不可移除記憶體、可抹除或不可抹除記憶體，可寫入或可覆寫記憶體等等。邏輯604的範例可以包括多種軟體元件，例如軟體組件、程式、應用、電腦程式、應用程式、系統程式、機器程式、作業系統軟體、中繼軟體、韌體、軟體模組、例式、子例式、函數、方法、介面、軟體介面、應用程式介面(API,“Application program interface”)、指令集、運算碼、電腦碼、碼段落、電腦碼段落、字元、數值、符號或其任何組合。
例如在一具體實施例中，物品600及/或電腦可讀取儲存媒體602可以儲存邏輯604，其包含可執行電腦程式指令，其在當由一電腦執行時可使得該電腦根據所述之具體實施例執行方法及/或作業。該等可執行電腦程式指令可以包括任何適當類型的碼、例如原始碼、編譯碼、解譯碼、可執行碼、靜態碼、動態碼及類似者。該等可執行電腦程式指令可根據一預先定義的電腦語言、方法或語法來實施，用於指示一電腦來執行某個功能。該等指令可使用任何適當的高階、低階、物件導向、視覺、編譯及/或解譯的程式化語言來實施，例如C,C++,Java,BASIC,Perl,Matlab,Pascal,Visual BASIC，組合語言及其它。
多種具體實施例可以使用硬體元件、軟體元件或兩者之組合來實施。硬體元件的範例可以包括如先前對於一邏輯裝置提供的任何範例，且另包括微處理器、電路、電路元件(例如電晶體、電阻、電容、電感等等)、積體電路、邏輯閘極、暫存器、半導體裝置、晶片、微晶片、晶片組等等。軟體元件的範例可以包括軟體組件、程式、應用、電腦程式、應用程式、系統程式、機器程式、作業系統軟體、中繼軟體、韌體、軟體模組、例式、子例式、函數、方法、程序、軟體介面、應用程式介面(API)、指令集、運算碼、電腦碼、碼段落、電腦碼段落、字元、數值、符號或其任何組合。決定一具體實施例是否使用硬體元件及/或軟體元件實施係根據任何數目之因素而改變，例如對於一給定實施所需要之想要的運算速率、功率位準、耐熱性、處理循環預算、輸入資料速率、輸出資料速率、記憶體資源、資料匯流排速率、及其它設計或效能限制。
一些具體實施例可使用表述「耦合」及「連接」連同其衍生詞來描述。這些術語不需要為彼此之同義字。例如，一些具體實施例可使用術語「連接」及/或「耦合」做描述來指明兩個以上的元件係為彼此之直接實體或電子接觸。但是術語「耦合」亦代表兩個以上的元件並未彼此直接接觸，但又仍彼此可以共同運作或互動。
在「發明摘要」中強調係提供成符合37 C.F.R. Section 1.72(b)，其需要一摘要將可允許讀者快速地確認該技術內容之性質。其應可瞭解到其將不用於解譯或限制該等申請專利範圍之範圍或意義。此外，在前述的「實施方式」中，可以看出為了使得本發明內容順暢起見，多種特徵在一單一具體實施例中可被群組在一起。本發明方法並不能解譯為反應有意圖使得所主張的具體實施例會比每個申請專利範圍所明確詳列的需要更多的特徵。而是，如以下的申請專利範圍所指出，創新主題意旨係位在少於一單一揭示具體實施例的所有特徵。因此以下的申請專利範圍被加入到詳細說明中，而每個申請專利範圍皆獨立地分別定義成一個別具體實施例。在附屬申請專利範圍中，術語「包括(including)」及「其中(in which)」係分別做為個別用語「包含(comprising)」及「其中(wherein)」的一般英文同等者。再者，用語「第一」、「第二」、「第三」等等僅做為標記，其並非對於它們的物件施加數值的需要。
雖然該主題事項已經以特定於結構化特徵及/或方法性動作的語言來描述，其應瞭解到在附屬申請專利範圍中所定義的標的並不必然限制於上述之特定特徵或動作。而是上述的特定特徵與動作係以實施該等申請專利範圍之範例型式來。
100．．．多媒體會議系統
104-1~r．．．麥克風
106‧‧‧攝影機
108‧‧‧排程裝置
108‧‧‧視覺組合
110-1‧‧‧本地會議主控台
110-1-m‧‧‧會議主控台
110-2-m‧‧‧遠端會議主控台
112-1-n‧‧‧客戶端會議組件
114‧‧‧視覺組合組件
114-1‧‧‧視覺組合組件
114-1-t‧‧‧視覺組合組件
116‧‧‧顯示器
120‧‧‧網路
130‧‧‧多媒體會議伺服器
132‧‧‧伺服器會議組件
150‧‧‧會議室
154-1-p‧‧‧參與者
160‧‧‧企業資源目錄
202-1-f‧‧‧輸入媒體串流
204‧‧‧辨識資訊
206-1-g‧‧‧輸出視覺組合信號
210‧‧‧視訊解碼器模組
220‧‧‧活動中說話者偵測器模組
230‧‧‧媒體串流管理員模組
240‧‧‧視覺組合產生器模組
250‧‧‧註解模組
302-1-b‧‧‧參與者
302-1‧‧‧參與者
302-2‧‧‧參與者
302-4‧‧‧參與者
304‧‧‧簡報投影片
306‧‧‧參與者名冊
312‧‧‧指針圖標
308‧‧‧識別位置
314‧‧‧功能表
316‧‧‧圖形化使用者介面觀視
320‧‧‧活動中說話者
330-1‧‧‧顯示框
330-2‧‧‧顯示框
330-3‧‧‧顯示框
330-4‧‧‧顯示框
330-5‧‧‧顯示框
330-6‧‧‧顯示框
340‧‧‧指標
350‧‧‧識別資訊
510‧‧‧運算架構
532‧‧‧處理單元
534‧‧‧記憶體
536-1-t‧‧‧應用程式
538‧‧‧可移除儲存器
540‧‧‧不可移除儲存器
542‧‧‧輸出裝置
544‧‧‧輸入裝置
546‧‧‧通訊連接
600‧‧‧製造物品
602‧‧‧儲存媒體
604‧‧‧邏輯
第1圖說明一多媒體會議系統的具體實施例。
第2圖說明一視覺組合組件的具體實施例。
第3圖說明一視覺組合的具體實施例。
第4圖說明一邏輯流程的具體實施例。
第5圖說明一運算架構的具體實施例。
第6圖說明一物品的具體實施例。
100‧‧‧多媒體會議系統
104-1-r‧‧‧麥克風
106‧‧‧攝影機
108‧‧‧排程裝置
108‧‧‧視覺組合
110-1‧‧‧本地會議主控台
112-1-n‧‧‧客戶端會議組件
114‧‧‧視覺組合組件
114-1‧‧‧視覺組合組件
114-1-t‧‧‧視覺組合組件
116‧‧‧顯示器
120‧‧‧網路
130‧‧‧多媒體會議伺服器
132‧‧‧伺服器會議組件
150‧‧‧會議室
154-1-p‧‧‧參與者
160‧‧‧企業資源目錄

Claims (17)

  1. 一種用於產生一多媒體會議事件之一視覺組合的方法，其包含以下步驟：解碼該多媒體會議事件的多個媒體串流；偵測在一經解碼媒體串流中做為一活動中說話者之一第一參與者；對映具有該活動中說話者之該經解碼媒體串流到一活動中顯示框，且對映其它經解碼媒體串流到非活動中顯示框；產生具有一參與者名冊的該視覺組合，該視覺組合包含在一預定順序中的複數個位置，其中該等複數個位置中的一第一位置係保留給該活動中顯示框而該等非活動中顯示框係定位在該等複數個位置中的其餘位置；及當被偵測出該活動中說話者從該第一參與者變成一第二參與者時，在該預定順序中交換分別用於該第一參與者及該第二參與者之顯示框的位置。
  2. 如申請專利範圍第1項所述之方法，其包含以下步驟：接收要利用識別資訊來註解在一活動中或非活動中顯示框中的一參與者的一操作者命令。
  3. 如申請專利範圍第1項所述之方法，其包含以下步驟：決定一識別位置來定位在一活動中或非活動中顯示框中一參與者的識別資訊。
  4. 如申請專利範圍第1項所述之方法，其包含以下步驟：利用在一識別位置處的識別資訊來註解在一活動中或非活動中顯示框中之一參與者。
  5. 如申請專利範圍第1項所述之方法，其包含以下步驟：產生一功能表，其具有一選項來開啟一獨立的圖形化使用者 介面視圖，該圖形化使用者介面視圖具有針對一所選參與者的識別資訊。
  6. 如申請專利範圍第1項所述之方法，其包含以下步驟：產生具有該參與者名冊的該視覺組合，該參與者名冊在該預定順序中的一第二位置中具有一非活動中顯示框，該非活動中顯示框具有一參與者的視訊內容，該參與者對應於產生該視覺組合的一會議主控台。
  7. 如申請專利範圍第1項所述之方法，其包含以下步驟：回應於一操作者命令，將一非活動中顯示框從該預定順序中的一目前位置移動到該預定順序中的一新位置。
  8. 如申請專利範圍第1項所述之方法，其包含以下步驟：回應於一操作者命令，固定一非活動中顯示框在該預定順序中的一目前位置處。
  9. 一種用於產生一多媒體會議事件之一視覺組合的物品，該物品包括一包含有指令的儲存媒體，該等指令在執行時可使得一系統進行以下動作：解碼該多媒體會議事件的多個媒體串流；偵測在一經解碼媒體串流中做為一活動中說話者之一第一參與者；對映具有該活動中說話者之該經解碼媒體串流到一活動中顯示框，且對映其它經解碼媒體串流到非活動中顯示框；產生具有一參與者名冊的該視覺組合，該視覺組合包含在一預定順序中的複數個位置，其中該等複數個位置中的一第一位置係保留給該活動中顯示框而該等非活動中顯示框係定位在該等複數個位置中的其餘位置；及當被偵測出該活動中說話者從該第一參與者變成一第 二參與者時，在該預定順序中交換分別用於該第一參與者及該第二參與者之顯示框的位置。
  10. 如申請專利範圍第9項所述之物品，另包含有當執行時可使得該系統進行以下動作的指令：利用識別資訊而註解在一活動中或非活動中顯示框中之一參與者。
  11. 如申請專利範圍第9項所述之物品，另包含有當執行時可使得該系統進行以下動作的指令：產生具有該參與者名冊的該視覺組合，該參與者名冊在該預定順序中的一第二位置中具有一非活動中顯示框，該非活動中顯示框具有一參與者的視訊內容，該參與者對應於產生該視覺組合的一會議主控台。
  12. 如申請專利範圍第9項所述之物品，另包含有當執行時可使得該系統進行以下動作的指令：回應於一操作者命令將一非活動中顯示框由該預定順序上的一目前位置移動到該預定順序上的一新位置。
  13. 一種用於產生一多媒體會議事件之一視覺組合的設備，其包含：一視覺組合組件，其用於產生該多媒體會議事件的該視覺組合，該視覺組合組件包含：一視訊解碼器模組，其用於解碼一多媒體會議事件的多個媒體串流；一活動中說話者偵測器模組，其通訊耦合至該視訊解碼器模組，該活動中說話者偵測器模組用於偵測在一經解碼媒體串流中做為一活動中說話者的一第一參與者；一媒體串流管理員模組，其通訊耦合至該活動中說話者偵測器模組，該媒體串流管理員模組用於對映具有該活動中說話者之該經解碼媒體串流到一活動中顯示框，且 對映其它經解碼媒體串流到非活動中顯示框；及一視覺組合產生器模組，其通訊耦合至該媒體串流管理員模組，該視覺組合產生器模組用於產生具有一參與者名冊的該視覺組合，該視覺組合包含在一預定順序中的複數個位置，其中該等複數個位置中的一第一位置係保留給該活動中顯示框，而該等非活動中顯示框係定位在該等複數個位置中的其餘位置，其中該視覺組合產生器模組也用於當被偵測出該活動中說話者從該第一參與者變成一第二參與者時，在該預定順序中交換分別用於該第一參與者及該第二參與者之顯示框的位置。
  14. 如申請專利範圍第13項所述之設備，其包含一註解模組，其通訊耦合至該視覺組合產生器模組，該註解模組係用於接收一操作者命令來利用識別資訊而註解在一活動中或非活動中顯示框中的一參與者，決定一識別位置來定位該識別資訊，且利用在該識別位置處的識別資訊註解該參與者。
  15. 如申請專利範圍第13項所述之設備，其包含該視覺組合產生器模組，用於產生具有該參與者名冊的該視覺組合，該參與者名冊在該預定順序中之一第二位置中具有一非活動中顯示框，該非活動中顯示框具有一參與者的視訊內容，該參與者對應於產生該視覺組合的一會議主控台。
  16. 如申請專利範圍第13項所述之設備，其包含該視覺組合產生器模組，用於接收要將一非活動中顯示框從該預定順序中一目前位置移動到該預定順序中一新位置的一操作者命令，且回應於該操作者命令移動該非活動中顯示框到該新位置。
  17. 如申請專利範圍第13項所述之設備，其包含具有一顯示器 及該視覺組合組件之一會議主控台，該視覺組合組件用於在該顯示器上呈現該視覺組合。
TW098100962A 2008-02-14 2009-01-12 產生一多媒體會議事件之一視覺組合的技術 TWI549518B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US12/030,872 US20090210789A1 (en) 2008-02-14 2008-02-14 Techniques to generate a visual composition for a multimedia conference event

Publications (2)

Publication Number Publication Date
TW200939775A TW200939775A (en) 2009-09-16
TWI549518B true TWI549518B (zh) 2016-09-11

Family

ID=40956296

Family Applications (1)

Application Number Title Priority Date Filing Date
TW098100962A TWI549518B (zh) 2008-02-14 2009-01-12 產生一多媒體會議事件之一視覺組合的技術

Country Status (10)

Country Link
US (1) US20090210789A1 (zh)
EP (1) EP2253141A4 (zh)
JP (1) JP5303578B2 (zh)
KR (1) KR20100116662A (zh)
CN (1) CN101946511A (zh)
BR (1) BRPI0907024A8 (zh)
CA (1) CA2711463C (zh)
RU (1) RU2518402C2 (zh)
TW (1) TWI549518B (zh)
WO (1) WO2009102557A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI802093B (zh) * 2021-08-31 2023-05-11 大陸商Ｏｏｏｋ（北京）教育科技有限責任公司 圓桌視訊會議的生成方法、裝置、電腦可讀取記錄媒體和電子設備

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1917798A4 (en) * 2005-08-25 2010-01-06 Nokia Corp METHOD AND DEVICE FOR EMBEDDING AN EVENT IMPORT IN MULTIMEDIA CONTENTS
US8612868B2 (en) * 2008-03-26 2013-12-17 International Business Machines Corporation Computer method and apparatus for persisting pieces of a virtual world group conversation
EP2109285A1 (en) * 2008-04-11 2009-10-14 Hewlett-Packard Development Company, L.P. Conference system and method
US20090259937A1 (en) * 2008-04-11 2009-10-15 Rohall Steven L Brainstorming Tool in a 3D Virtual Environment
WO2009129609A1 (en) * 2008-04-21 2009-10-29 Matthew Gibson System, method and computer program for conducting transactions remotely
US10289671B2 (en) * 2008-05-07 2019-05-14 Microsoft Technology Licensing, Llc Graphically displaying selected data sources within a grid
US8402391B1 (en) 2008-09-25 2013-03-19 Apple, Inc. Collaboration system
US8902272B1 (en) 2008-11-24 2014-12-02 Shindig, Inc. Multiparty communications systems and methods that employ composite communications
US9401937B1 (en) 2008-11-24 2016-07-26 Shindig, Inc. Systems and methods for facilitating communications amongst multiple users
US8587634B1 (en) * 2008-12-12 2013-11-19 Cisco Technology, Inc. System and method for intelligent mode switching in a communications environment
US9268398B2 (en) * 2009-03-31 2016-02-23 Voispot, Llc Virtual meeting place system and method
US9344745B2 (en) 2009-04-01 2016-05-17 Shindig, Inc. Group portraits composed using video chat systems
US8779265B1 (en) 2009-04-24 2014-07-15 Shindig, Inc. Networks of portable electronic devices that collectively generate sound
US9077849B2 (en) * 2010-02-12 2015-07-07 One Room, Ltd. Public collaboration system
US9035997B2 (en) * 2010-05-12 2015-05-19 Blue Jeans Network Systems and methods for real-time multimedia communications across multiple standards and proprietary devices
US8878773B1 (en) 2010-05-24 2014-11-04 Amazon Technologies, Inc. Determining relative motion as input
US9124757B2 (en) 2010-10-04 2015-09-01 Blue Jeans Networks, Inc. Systems and methods for error resilient scheme for low latency H.264 video coding
US8995306B2 (en) * 2011-04-06 2015-03-31 Cisco Technology, Inc. Video conferencing with multipoint conferencing units and multimedia transformation units
US20140047025A1 (en) * 2011-04-29 2014-02-13 American Teleconferencing Services, Ltd. Event Management/Production for an Online Event
US9300705B2 (en) 2011-05-11 2016-03-29 Blue Jeans Network Methods and systems for interfacing heterogeneous endpoints and web-based media sources in a video conference
US9369673B2 (en) 2011-05-11 2016-06-14 Blue Jeans Network Methods and systems for using a mobile device to join a video conference endpoint into a video conference
US9007421B2 (en) * 2011-06-21 2015-04-14 Mitel Networks Corporation Conference call user interface and methods thereof
US10088924B1 (en) 2011-08-04 2018-10-02 Amazon Technologies, Inc. Overcoming motion effects in gesture recognition
US8683054B1 (en) * 2011-08-23 2014-03-25 Amazon Technologies, Inc. Collaboration of device resources
US20130097244A1 (en) 2011-09-30 2013-04-18 Clearone Communications, Inc. Unified communications bridging architecture
US9491404B2 (en) 2011-10-27 2016-11-08 Polycom, Inc. Compensating for different audio clocks between devices using ultrasonic beacon
US9203633B2 (en) * 2011-10-27 2015-12-01 Polycom, Inc. Mobile group conferencing with portable devices
US9024998B2 (en) 2011-10-27 2015-05-05 Pollycom, Inc. Pairing devices in conference using ultrasonic beacon
EP2595354A1 (en) * 2011-11-18 2013-05-22 Alcatel Lucent Multimedia exchange system for exchanging multimedia, a related method and a related multimedia exchange server
US20130169742A1 (en) * 2011-12-28 2013-07-04 Google Inc. Video conferencing with unlimited dynamic active participants
US9223415B1 (en) 2012-01-17 2015-12-29 Amazon Technologies, Inc. Managing resource usage for task performance
US11452153B2 (en) 2012-05-01 2022-09-20 Lisnr, Inc. Pairing and gateway connection using sonic tones
KR20150020319A (ko) * 2012-05-01 2015-02-25 엘아이에스엔알, 인크. 콘텐츠 전달 및 관리를 위한 시스템 및 방법
KR101969802B1 (ko) * 2012-06-25 2019-04-17 엘지전자 주식회사 이동 단말기 및 재생 영상의 오디오 줌잉 방법
CN103533294B (zh) * 2012-07-03 2017-06-20 中国移动通信集团公司 视频数据流的发送方法、终端及系统
US9813255B2 (en) 2012-07-30 2017-11-07 Microsoft Technology Licensing, Llc Collaboration environments and views
US8902322B2 (en) 2012-11-09 2014-12-02 Bubl Technology Inc. Systems and methods for generating spherical images
US9065971B2 (en) * 2012-12-19 2015-06-23 Microsoft Technology Licensing, Llc Video and audio tagging for active speaker detection
US20150077509A1 (en) 2013-07-29 2015-03-19 ClearOne Inc. System for a Virtual Multipoint Control Unit for Unified Communications
CN104349107A (zh) * 2013-08-07 2015-02-11 联想(北京)有限公司 一种双摄像头的视频录制的显示方法和电子设备
CN104349117B (zh) 2013-08-09 2019-01-25 华为技术有限公司 多内容媒体通信方法、装置及系统
US9679331B2 (en) * 2013-10-10 2017-06-13 Shindig, Inc. Systems and methods for dynamically controlling visual effects associated with online presentations
WO2015058799A1 (en) * 2013-10-24 2015-04-30 Telefonaktiebolaget L M Ericsson (Publ) Arrangements and method thereof for video retargeting for video conferencing
US10271010B2 (en) 2013-10-31 2019-04-23 Shindig, Inc. Systems and methods for controlling the display of content
US9733333B2 (en) 2014-05-08 2017-08-15 Shindig, Inc. Systems and methods for monitoring participant attentiveness within events and group assortments
US9070409B1 (en) 2014-08-04 2015-06-30 Nathan Robert Yntema System and method for visually representing a recorded audio meeting
US11330319B2 (en) 2014-10-15 2022-05-10 Lisnr, Inc. Inaudible signaling tone
TWI602437B (zh) 2015-01-12 2017-10-11 仁寶電腦工業股份有限公司 視訊與音訊處理裝置及其視訊會議系統
US11956290B2 (en) * 2015-03-04 2024-04-09 Avaya Inc. Multi-media collaboration cursor/annotation control
US10061467B2 (en) * 2015-04-16 2018-08-28 Microsoft Technology Licensing, Llc Presenting a message in a communication session
US10447795B2 (en) * 2015-10-05 2019-10-15 Polycom, Inc. System and method for collaborative telepresence amongst non-homogeneous endpoints
US10771508B2 (en) 2016-01-19 2020-09-08 Nadejda Sarmova Systems and methods for establishing a virtual shared experience for media playback
US9706171B1 (en) 2016-03-15 2017-07-11 Microsoft Technology Licensing, Llc Polyptych view including three or more designated video streams
US9686510B1 (en) 2016-03-15 2017-06-20 Microsoft Technology Licensing, Llc Selectable interaction elements in a 360-degree video stream
US10204397B2 (en) 2016-03-15 2019-02-12 Microsoft Technology Licensing, Llc Bowtie view representing a 360-degree image
US11233582B2 (en) 2016-03-25 2022-01-25 Lisnr, Inc. Local tone generation
US10133916B2 (en) 2016-09-07 2018-11-20 Steven M. Gottlieb Image and identity validation in video chat events
JP2017097852A (ja) * 2016-09-28 2017-06-01 日立マクセル株式会社 投射型画像表示装置
JP6798288B2 (ja) * 2016-12-02 2020-12-09 株式会社リコー 通信端末、通信システム、映像出力方法、及びプログラム
EP3361706A1 (en) * 2017-02-14 2018-08-15 Webtext Holdings Limited A redirection bridge device and system, a method of redirection bridging, method of use of a user interface and a software product
US11189295B2 (en) 2017-09-28 2021-11-30 Lisnr, Inc. High bandwidth sonic tone generation
US10826623B2 (en) 2017-12-19 2020-11-03 Lisnr, Inc. Phase shift keyed signaling tone
DE102017131420A1 (de) * 2017-12-29 2019-07-04 Unify Patente Gmbh & Co. Kg Echtzeit-Kollaborations-Plattform und Verfahren zum Ausgeben von Mediaströmen über ein Echtzeit-Ansagesystem
CN110336972A (zh) * 2019-05-22 2019-10-15 深圳壹账通智能科技有限公司 一种视频数据的播放方法、装置、及计算机设备
JP2022076685A (ja) * 2020-11-10 2022-05-20 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
CN112616035B (zh) * 2020-11-23 2023-09-19 深圳市捷视飞通科技股份有限公司 多画面拼接方法、装置、计算机设备和存储介质
US11700335B2 (en) * 2021-09-07 2023-07-11 Verizon Patent And Licensing Inc. Systems and methods for videoconferencing with spatial audio
US11979441B2 (en) * 2022-01-31 2024-05-07 Zoom Video Communications, Inc. Concurrent region of interest-based video stream capture at normalized resolutions

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6628767B1 (en) * 1999-05-05 2003-09-30 Spiderphone.Com, Inc. Active talker display for web-based control of conference calls
US20050078171A1 (en) * 2003-10-08 2005-04-14 Cisco Technology, Inc. A California Corporation System and method for performing distributed video conferencing
US20060092269A1 (en) * 2003-10-08 2006-05-04 Cisco Technology, Inc. Dynamically switched and static multiple video streams for a multimedia conference
US7185054B1 (en) * 1993-10-01 2007-02-27 Collaboration Properties, Inc. Participant display and selection in video conference calls

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2573177B2 (ja) * 1986-02-28 1997-01-22 株式会社東芝 電子会議システムにおける図形表示装置
JP3036088B2 (ja) * 1991-01-21 2000-04-24 日本電信電話株式会社 複数画像ウインドウ表示用音信号出力方法
JPH0715710A (ja) * 1993-06-22 1995-01-17 Hitachi Ltd テレビ会議システム
US6594688B2 (en) * 1993-10-01 2003-07-15 Collaboration Properties, Inc. Dedicated echo canceler for a workstation
JPH07307935A (ja) * 1994-05-11 1995-11-21 Hitachi Ltd 会議画面表示制御装置
JPH07336660A (ja) * 1994-06-14 1995-12-22 Matsushita Electric Ind Co Ltd テレビ会議システム
JPH0837655A (ja) * 1994-07-26 1996-02-06 Kyocera Corp 話者識別表示機能を有するテレビ会議システム
WO1996038983A1 (en) * 1995-06-02 1996-12-05 Intel Corporation Method and apparatus for controlling participant input in a conferencing environment
RU2171015C2 (ru) * 1995-11-15 2001-07-20 Сони Корпорейшн Многоточечное устройство для видеоконференций
JPH09149396A (ja) * 1995-11-27 1997-06-06 Fujitsu Ltd 多地点テレビ会議システム
US6795106B1 (en) * 1999-05-18 2004-09-21 Intel Corporation Method and apparatus for controlling a video camera in a video conferencing system
US20030125954A1 (en) * 1999-09-28 2003-07-03 Bradley James Frederick System and method at a conference call bridge server for identifying speakers in a conference call
US6760750B1 (en) * 2000-03-01 2004-07-06 Polycom Israel, Ltd. System and method of monitoring video and/or audio conferencing through a rapid-update web site
US6590604B1 (en) * 2000-04-07 2003-07-08 Polycom, Inc. Personal videoconferencing system having distributed processing architecture
US6956828B2 (en) * 2000-12-29 2005-10-18 Nortel Networks Limited Apparatus and method for packet-based media communications
US20040008249A1 (en) * 2002-07-10 2004-01-15 Steve Nelson Method and apparatus for controllable conference content via back-channel video interface
EP1381237A3 (en) * 2002-07-10 2004-05-12 Seiko Epson Corporation Multi-participant conference system with controllable content and delivery via back-channel video interface
JP4055539B2 (ja) * 2002-10-04 2008-03-05 ソニー株式会社 双方向コミュニケーションシステム
US7454460B2 (en) * 2003-05-16 2008-11-18 Seiko Epson Corporation Method and system for delivering produced content to passive participants of a videoconference
US8140980B2 (en) * 2003-08-05 2012-03-20 Verizon Business Global Llc Method and system for providing conferencing services
US20050071427A1 (en) * 2003-09-29 2005-03-31 Elmar Dorner Audio/video-conferencing with presence-information using content based messaging
WO2005036878A1 (en) * 2003-10-08 2005-04-21 Cisco Technology, Inc. System and method for performing distributed video conferencing
US7624166B2 (en) * 2003-12-02 2009-11-24 Fuji Xerox Co., Ltd. System and methods for remote control of multiple display and devices
KR100569417B1 (ko) * 2004-08-13 2006-04-07 현대자동차주식회사 마이크로웨이브를 이용한 폐고무분말의 연속식표면개질장치와 이를 이용한 표면개질방법
US20060047749A1 (en) * 2004-08-31 2006-03-02 Robert Davis Digital links for multi-media network conferencing
US7180535B2 (en) * 2004-12-16 2007-02-20 Nokia Corporation Method, hub system and terminal equipment for videoconferencing
US20060149815A1 (en) * 2004-12-30 2006-07-06 Sean Spradling Managing participants in an integrated web/audio conference
US7475112B2 (en) * 2005-03-04 2009-01-06 Microsoft Corporation Method and system for presenting a video conference using a three-dimensional object
US7593032B2 (en) * 2005-07-20 2009-09-22 Vidyo, Inc. System and method for a conference server architecture for low delay and distributed conferencing applications
US20070100939A1 (en) * 2005-10-27 2007-05-03 Bagley Elizabeth V Method for improving attentiveness and participation levels in online collaborative operating environments
US8125509B2 (en) * 2006-01-24 2012-02-28 Lifesize Communications, Inc. Facial recognition for a videoconference
US7822811B2 (en) * 2006-06-16 2010-10-26 Microsoft Corporation Performance enhancements for video conferencing
US8289363B2 (en) * 2006-12-28 2012-10-16 Mark Buckler Video conferencing
US7729299B2 (en) * 2007-04-20 2010-06-01 Cisco Technology, Inc. Efficient error response in a video conferencing system
US20090193327A1 (en) * 2008-01-30 2009-07-30 Microsoft Corporation High-fidelity scalable annotations
US20090204465A1 (en) * 2008-02-08 2009-08-13 Santosh Pradhan Process and system for facilitating communication and intergrating communication with the project management activities in a collaborative environment

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7185054B1 (en) * 1993-10-01 2007-02-27 Collaboration Properties, Inc. Participant display and selection in video conference calls
US6628767B1 (en) * 1999-05-05 2003-09-30 Spiderphone.Com, Inc. Active talker display for web-based control of conference calls
US20050078171A1 (en) * 2003-10-08 2005-04-14 Cisco Technology, Inc. A California Corporation System and method for performing distributed video conferencing
US20060092269A1 (en) * 2003-10-08 2006-05-04 Cisco Technology, Inc. Dynamically switched and static multiple video streams for a multimedia conference

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI802093B (zh) * 2021-08-31 2023-05-11 大陸商Ｏｏｏｋ（北京）教育科技有限責任公司 圓桌視訊會議的生成方法、裝置、電腦可讀取記錄媒體和電子設備

Also Published As

Publication number Publication date
CN101946511A (zh) 2011-01-12
BRPI0907024A2 (pt) 2015-07-07
JP2011514043A (ja) 2011-04-28
CA2711463A1 (en) 2009-08-20
RU2010133959A (ru) 2012-02-20
KR20100116662A (ko) 2010-11-01
WO2009102557A1 (en) 2009-08-20
BRPI0907024A8 (pt) 2019-01-29
US20090210789A1 (en) 2009-08-20
EP2253141A1 (en) 2010-11-24
TW200939775A (en) 2009-09-16
EP2253141A4 (en) 2013-10-30
JP5303578B2 (ja) 2013-10-02
CA2711463C (en) 2016-05-17
RU2518402C2 (ru) 2014-06-10

Similar Documents

Publication Publication Date Title
TWI549518B (zh) 產生一多媒體會議事件之一視覺組合的技術
JP5639041B2 (ja) マルチメディア会議イベントのメディアコンテンツを管理する技術
RU2488227C2 (ru) Способы для автоматической идентификации участников для события мультимедийной конференц-связи
US9705691B2 (en) Techniques to manage recordings for multimedia conference events
US20090319916A1 (en) Techniques to auto-attend multimedia conference events
US9781385B2 (en) User interfaces for presentation of audio/video streams
US9369673B2 (en) Methods and systems for using a mobile device to join a video conference endpoint into a video conference
TWI452525B (zh) 管理多媒體會議事件之白板的技術
US9160967B2 (en) Simultaneous language interpretation during ongoing video conferencing
TWI533706B (zh) 基於統一通訊之多螢幕視訊系統
US8713440B2 (en) Techniques to manage communications resources for a multimedia conference event
US20090210490A1 (en) Techniques to automatically configure resources for a multimedia confrence event

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees