KR20090019825A - 다중-참가자 화상 회의 방법 및 로직 - Google Patents

다중-참가자 화상 회의 방법 및 로직 Download PDF

Info

Publication number
KR20090019825A
KR20090019825A KR1020087030003A KR20087030003A KR20090019825A KR 20090019825 A KR20090019825 A KR 20090019825A KR 1020087030003 A KR1020087030003 A KR 1020087030003A KR 20087030003 A KR20087030003 A KR 20087030003A KR 20090019825 A KR20090019825 A KR 20090019825A
Authority
KR
South Korea
Prior art keywords
conference
participant
participants
video
conference server
Prior art date
Application number
KR1020087030003A
Other languages
English (en)
Inventor
팀 엠. 무어
달리보르 쿠코레카
웨이 종
워렌 브이. 바클리
대니 레빈
Original Assignee
마이크로소프트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 코포레이션 filed Critical 마이크로소프트 코포레이션
Publication of KR20090019825A publication Critical patent/KR20090019825A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H04W4/08—User group management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/06—Network architectures or network communication protocols for network security for supporting key management in a packet data network
    • H04L63/065—Network architectures or network communication protocols for network security for supporting key management in a packet data network for group communications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64746—Control signals issued by the network directed to the server or the client
    • H04N21/64761—Control signals issued by the network directed to the server or the client directed to the server
    • H04N21/64769—Control signals issued by the network directed to the server or the client directed to the server for rate control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64784—Data processing by the network
    • H04N21/64792—Controlling the complexity of the content stream, e.g. by dropping packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

컨퍼런스 서버는 회의 참가자가 가장 적극적인 참가자로 되는지를 결정한 것에 응답하여 그 회의 참가자에게 키 프레임(key frame)을 요청할 수 있고, 컨퍼런스 서버는 회의 참가자로부터 키 프레임을 수신한 것에 응답하여 그 회의 참가자를 가장 적극적인 참가자가 되게 할 수 있다.
컨퍼런스 서버, 키 프레임, 화상 회의, 암호화, 복호화

Description

다중-참가자 화상 회의 방법 및 로직{PERFORMANCE ENHANCEMENTS FOR VIDEO CONFERENCING}
컨퍼런스 서버는 통상적으로 회의 진행 중에 다수의 참가자로부터 정보를 받고 이 정보를 처리하여 다시 참가자들에게 내보낸다. 컨퍼런스 서버의 일례는 오디오/비디오 컨퍼런스 서버이다. 오디오/비디오 컨퍼런스 서버는 통상적으로 다수의 회의 참가자로부터 오디오 및/또는 비디오 스트림을 받아서, 오디오를 믹싱하고, 다른 참가자들에게 디스플레이하기 위한 하나 이상의 참가자들에 대한 비디오 스트림을 선택한다. 다른 참가자들에게 보여주기 위해 선택된 참가자를 때때로 가장 적극적인 참가자라고 하는데, 그 이유는 그 참가자 가장 크게 말하거나 "발언권을 얻는" 참가자일 수 있기 때문이다.
컨퍼런스 서버, 특히 오디오/비디오 컨퍼런스 서버의 설계 및 동작에서 성능이 주된 문제이다. 더 많은 참가자가 회의에 참가함에 따라, 오디오 믹싱, 비디오 디코딩 및 인코딩, 대역폭 스케일링, 암호화 및 복호화를 제공하기 위해 컨퍼런스 서버에 가해지는 부담이 늘어난다.
<발명의 요약>
이하의 요약은 개시된 실시예들의 일부 양태들을 강조 및 소개하기 위한 것이며 청구범위의 범위를 제한하기 위한 것이 아니다. 이후에, 예시된 실시예들의 상세한 설명이 제공되며, 이 설명은 당업자가 다양한 실시예들을 제조 및 사용할 수 있게 한다.
비디오 디스플레이를 새로운 가장 적극적인 참가자로 전환시키는 것을 가속시켜 성능을 향상시키기 위해, 컨퍼런스 서버는 회의 참가자가 적어도 하나의 가장 적극적인 참가자로 되는지를 결정한 것에 응답하여 적어도 하나의 회의 참가자에게 키 프레임을 요청할 수 있다. 상기 컨퍼런스 서버는 상기 키 프레임의 전부 또는 거의 전부를 수신한 것에 응답하여 상기 회의 참가자를 가장 적극적인 참가자로 되게 할 수 있다.
성능을 더욱 향상시키기 위해, 상기 컨퍼런스 서버는 하나 이상의 스트림 프레임의 유형 및 범위를 결정하기 위해 하나 이상의 스트림 패킷 각각의 작은 부분만을 복호화할 수 있다. 상기 컨퍼런스 서버는 하나 이상의 회의 참가자에 적절한 대역폭 스케일링을 수행하기 위해 상기 스트림으로부터 프레임들을 누락시킬 수 있다. 상기 컨퍼런스 서버는 비디오 메타데이터 정보의 작은 부분을 복호화하고 상기 스트림을 더 낮은 비트 레이트로 디코딩 및 재인코딩하는 대신에 상기 메타데이터로부터 식별된 프레임들을 누락시킬 수 있다. 이와 같이, 상기 서버에의 낮은 대역폭 접속을 갖는 참가자들에 대해 대역폭 스케일링을 수행하는 데 필요한 디코딩 및 재인코딩의 양을 제한함으로써 상기 컨퍼런스 서버의 성능이 향상될 수 있다.
성능을 향상시키는 다른 방식은 상기 컨퍼런스 서버가 가장 적극적이지는 않은 다른 회의 참가자들에게 상기 컨퍼런스 서버에 스트림 정보를 전달하는 것을 중 단하라고 신호하는 단계를 포함한다. 이것은 상기 컨퍼런스 서버가, 가장 적극적인 참가자를 결정하기 위해 다른 참가자들로부터 오디오 정보를 계속 수신하여 이 오디오 정보를 처리하면서, 다른 참가자들에게 비디오 스트림 정보를 전달하는 것을 중단하라고 신호하는 단계를 포함할 수 있다.
성능을 향상시키는 또 다른 방식은 동일한 암호화 키를 사용하기 위해 모든 회의 참가자들을 동기시키는 단계, 및 회의 참가자들로부터의 하나 이상의 스트림의 복호화 및 재암호화를 수행하지 않고 상기 스트림을 컨퍼런스 서버를 통과시키는 단계를 포함할 수 있다. 하나 이상의 기존의 회의 참가자들의 암호화 키가 새로 들어온 회의 참가자에게 제공될 수 있다. 상기 컨퍼런스 서버는 또한 동일한 복호화 키를 사용하기 위해 모든 회의 참가자들을 동기시킬 수 있다. 이와 같이, 스트림을 복호화 및 재암호화하기 위해 상기 컨퍼런스 서버에서 해야 할 처리가 상당히 감소될 수 있다.
다른 시스템/방법/장치 양태들이 본 출원을 구성하는 본문(예를 들어, 상세한 설명 및 청구 범위) 및 도면에 기술되어 있다.
도면에서, 동일한 참조 번호 및 두문자는 용이한 이해를 위해 또한 편의상 동일한 또는 유사한 기능을 갖는 구성요소 또는 동작을 식별한다. 특정의 구성요소 또는 동작에 대한 설명을 쉽게 알아보기 위해, 참조 번호에서 선두 숫자 또는 숫자들은 그 구성요소가 처음으로 소개되는 도면 번호를 말한다.
도 1은 오디오-비디오 컨퍼런스 시스템의 일 실시예의 블록도이다.
도 2는 새로운 가장 적극적인 참가자로 전환하는 것의 일 실시예의 흐름도이다.
도 3은 새로운 가장 적극적인 참가자로 전환하는 것의 일 실시예의 동작 흐름도이다.
도 4는 회의 참가자들의 암호화-복호화 키를 동기화시키는 것의 일 실시예의 흐름도이다.
"하나의 실시예" 또는 "일 실시예"라고 말하는 것이 동일한 실시예일 수도 있지만, 이들이 반드시 동일한 실시예를 말하는 것은 아니다.
문맥이 명백히 달리 해석되지 않는 한, 이 설명 및 청구항들에 걸쳐, 단어 "포함한다", "포함하는" 등은 배타적 또는 전수적 의미가 아니라 포함적 의미로 해석되어야 하는데, 즉 "포함하지만 그에 제한되지 않는다"는 의미로 해석되어야 한다. 단수 또는 복수를 사용하는 단어들도 각각 복수 또는 단수를 포함한다. 또한, 단어 "본 명세서에", "이상에서", "이하에서" 및 유사한 의미의 단어들은, 이 출원에서 사용될 때, 이 출원의 어느 특정 부분이 아니라 이 출원을 전체로서 말하는 것이다. 청구항에서 2개 이상의 항목들의 목록과 관련하여 단어 "또는"이 사용할 때, 이 단어는 이하의 해석들, 즉 목록에 있는 항목들 중 임의의 것, 목록에 있는 항목들 전부, 및 목록에 있는 항목들의 임의의 조합 모두를 포괄한다.
"로직"은 장치의 동작에 영향을 주기 위해 적용될 수 있는 신호 및/또는 정보를 말한다. 소프트웨어, 하드웨어 및 펌웨어는 로직의 예들이다. 하드웨어 로직은 회로로 구현될 수 있다. 일반적으로, 로직은 소프트웨어, 하드웨어, 및/또는 펌웨어의 조합을 포함할 수 있다.
오디오/비디오 컨퍼런스 시스템
도 1은 오디오/비디오 컨퍼런스 시스템의 일 실시예의 블록도이다.
이 시스템은 컨퍼런스 서버(102), 제1 네트워크(106), 제2 네트워크(107), 및 회의 참가자 클라이언트 장치(109, 110, 111)를 포함할 수 있다.
컨퍼런스 서버(102)(예를 들어, 다지점 컨퍼런스 서버 또는 MCU)는 2명 이상의 회의 참가자(109-111) 간의 멀티미디어 통신을 가능하게 한다. 통상적인 실시예에서, 참가자들 각각은 각각의 클라이언트 위치로부터 오는 믹싱된 오디오를 포함하는 오디오를 듣는다. 오디오 믹싱은 통상적으로 컨퍼런스 서버(102)에 의해 수행된다. 통상적으로, 컨퍼런스 서버(102)는 믹싱된 합성 오디오를 각각의 참가자(109-111)에게 전송되는 출력으로서 제공한다. 일부 구현에서, 가장 적극적인 참가자의 오디오는 가장 적극적인 참가자에게로 보내지는 오디오 믹스(audio mix)에 포함되어 있지 않다.
또한, 몇명의 또는 모든 회의 참가자가 참가자 위치들 중 하나 또는 아마도 그 위치들 중 2개 이상으로부터의 비디오를 포함하는 비디오 스트림을 볼 수 있다. 통상적인 실시예에서, 비록 컨퍼런스 서버와 참가자 장소 간의 대역폭 제약조건과 같은 실제적인 이유로 제공 품질이 다를 수도 있지만, 모든 참가자가 동일한 비디오 컨텐츠를 본다. 예를 들어, 특정의 위치에 이용가능한 대역폭이 제한되어 있는 경우, 그 위치로 전달되는 비디오는 해상도가 낮거나, 초당 프레임 수가 더 적거나, 색조가 떨어질 수 있다.
회의 참가자에게 제공되는 비디오 스트림은 하나 이상의 적극적인 회의 참가자 위치로부터의 비디오를 포함할 수 있다. 예를 들어, 10개의 참가자 위치가 있을 수 있지만, 하나 이상의 위치가 발언의 대부분을 하고 있을 수도 있다. 컨퍼런스 서버(102)는 주어진 순간에 누가 가장 크게 말하고 있는지 및/또는 "가장 적극적"인지에 기초하여 비디오를 제공할 위치(들)을 선택할 수 있다. 다른 대안으로서, 회의 사회자가 어느 참가자 비디오를 제공할지를 선택할 수 있다.
회의 참가자(109-111)로부터 컨퍼런스 서버(102)로 또한 컨퍼런스 서버(102)로부터 참가자(109-111)로의 오디오 및 비디오 스트림 둘다를 암호화함으로써 회의가 안전하게 제공될 수 있다.
오디오/비디오 회의의 참가자(109-111)는 많은 서로 다른 통신 기술을 사용하여 컨퍼런스 서버(102)에 접속될 수 있다. 네트워크를 통한 접속이 가장 흔하다. 도 1에서, 컨퍼런스 서버(102)는 2개의 네트워크에 접속되어 있는 것으로 도시되어 있다. 2개의 네트워크가 도시되어 있지만, 컨퍼런스 서버(102)는 이것보다 더 적은 네트워크 인터페이스를 지원할 수 있다. 컨퍼런스 서버(102)는 다양한 통신 인터페이스 및 속도(예를 들어, 19kbps 내지 초당 10 기가비트 이상)를 지원할 수 있다. 2개의 네트워크(106, 107)는 그 각자의 참가자 장치(109-111)에 대해 서로 다른 대역폭 용량을 가질 수 있다. 따라서, 컨퍼런스 서버(102)는 다양한 참가자에 대해 비디오 및/또는 오디오 스트림의 대역폭 스케일링을 수행하도록 요구받을 수 있다.
참가자 장치(109, 110, 111)는 컨퍼런싱을 지원하는 로직, 처리, 메모리 및 통신 기능을 갖는 퍼스널 컴퓨터, 랩톱, PDA(personal digital assistant), 셀룰러 전화, 또는 기타 장치와 같은 다양한 기술을 포함할 수 있다. 컨퍼런싱이 안전하게 수행되는 경우, 클라이언트 장치는 비디오 및 오디오 스트림의 암호화 및 복호화를 지원할 수 있다. 클라이언트 장치는 전용 컨퍼런싱 장비, 즉 컨퍼런싱을 제공하는 것을 주 목적으로 구축된 장비를 포함할 수 있다. 편의상, 클라이언트 장치를 본 명세서에서는 더 긴 용어인 회의 참가자 장치를 사용하기 보다는 회의 참가자라고 한다. 문맥에 따라, 용어 "회의 참가자"는 장치 또는 이 장치를 사용하는 하나 이상의 사람을 말할 수 있다.
컨퍼런스 서버(102)는 본 명세서에 기술되는 다양한 동작들을 수행하는 로직(104)을 포함할 수 있다.
새로운 가장 적극적인 참가자로의 전환
도 2는 새로운 가장 적극적인 참가자로 전환하는 것의 실시예의 흐름도이다.
단계(202)에서, 회의에 새로운 가장 적극적인 참가자가 있는지를 결정한다. 새로운 가장 적극적인 참가자가 있는 것으로 결정된 경우, 단계(204)에서, 컨퍼런스 서버는 새로운 가장 적극적인 참가자에 대한 비디오 키 프레임을 요청한다. 비디오 키 프레임은 키 프레임에 대한 차이로서 정의되는 후속 프레임 또는 선행 프레임에 대한 기초로서 사용될 수 있는 비디오의 전체 프레임이다. 예를 들어, MPEG-2(Motion Picture Experts Group publication ISO/IEC 13818) 키 프레임은 'I-프레임'이라고 할 수 있으며, 차이로서 정의되는 후속 프레임은 'P-프레임'이라고 한다. I-프레임 이후에 전송되는 첫번째 P-프레임은 선행 I-프레임과의 차이(어느 픽셀이 변화되었는지)로서 정의된다. 그 다음 후속 P-프레임은 선행 P-프레임과의 차이로서 정의되며, 이하 마찬가지이다. 선행 I-프레임과의 차이로서 정의된 프레임은, 중간 P-프레임들을 갖는 경우, '수퍼 P-프레임'이라고 할 수 있다. 키 프레임에 대한 요청이 컨퍼런스 서버로부터 새로운 가장 적극적인 참가자인 것으로 식별된 참자가의 클라이언트 장치로 제공될 수 있다.
단계(206)에서, 컨퍼런스 서버는 요청된 비디오 키 프레임을 수신했는지를 판정한다. 수신한 경우, 단계(208)에서, 컨퍼런스 서버는 새로운 가장 적극적인 참자가를 보여주기 위해 컨퍼런스 디스플레이(즉, 출력 비디오 스트림)를 전환한다.
일부 경우에, 가장 적극적인 회의 참가자가 컨퍼런스 디스플레이를 수신하지 못하고 그 대신에 가장 적극적인 회의 참가자 카메라(들)에 의해 생성된 비디오의 로컬 버전을 디스플레이할 수 있다. 이것은 가장 적극적인 참자가로부터 비디오 스트림을 수신하여 처리한 다음에, 디스플레이하기 위해, 이 비디오 스트림을 다시 가장 적극적인 회의 참가자에게로 전송하는 데 컨퍼런스 서버에 의해 이용되는 리소스를 절감하기 위해 행해질 수 있다. 그러나, 출력 비디오 스트림이 2명 이상의 참자가에 대한 비디오를 포함하고 있는 경우 또는 소정의 다른 방식으로 가장 적극적인 참자가로부터 서버로 전송되는 비디오 스트림과 내용이 다른 경우(예를 들어, 4분 또는 분할 화면 디스플레이), 컨퍼런스 서버는 컨퍼런스 디스플레이를 가장 적극적인 참자가에게 전송할 수 있다.
단계(210)에서, 컨퍼런스 서버는 하나 이상의 회의 참가자들에게 통신 및 처리 대역폭을 절감하기 위해 비디오 패킷을 전송하는 것을 중단하라고 신호할 수 있다. 통상적으로, 회의 참가자는 오디오 패킷을 전송하는 것을 중단하라고는 신호받지 않는다. 컨퍼런스 서버는 모든 참자가들로부터의 오디오를 계속 믹싱하여 믹싱된 오디오를 모든 참자가들에게 제공할 수 있다. 컨퍼런스 서버는 새로운 가장 적극적인 회의 참가자로의 전환을 해야 할지를 결정하기 위해 모든 참자가들로부터의 오디오를 계속 처리할 수 있다.
단계(212)에서, 프로세스가 종료된다.
일부 실시예들에서, 다수의 가장 적극적인 참자가가 선택된다. 예를 들어, 컨퍼런스 서버는 2명의 적극적인 참자가를 보여주는 분할된 화면을 갖는 컨퍼런스 디스플레이를 제공할 수 있다.
단계(202)에서, 새로운 가장 적극적인 참자가가 전혀 없을 것인지 또는 하나 또는 아마도 몇명의 새로운 적극적인 참자가가 있을 것인지가 판정될 수 있다. 단계(204)에서, 키 프레임 요청이 각각의 새로운 가장 적극적인 참자가에게 전송될 수 있다. 단계(206)에서, 컨퍼런스 서버는 새로운 가장 적극적인 참자가의 비디오의 디스플레이가 시작될 수 있도록 그 참가자가 키 프레임 전부 또는 거의 전부를 제공했는지를 판정한다. 단계(208)에서, 컨퍼런스 서버는 컨퍼런스 하나 이상의 새로운 가장 적극적인 참자가에 대한 비디오를 디스플레이 상에 제공한다.
일부 실시예들에서는, 단계(210)에서, 컨퍼런스 서버가 한명 이상의 가장 적극적인 회의 참가자에게 비디오 P-프레임의 전송을 중단하고 적어도 I-프레임을 보통의 빈도수로 또는 더 적은 빈도수로 계속 전송하라고 신호할 수 있다. 그 상황에서, 수신된 I-프레임이 나중에 비디오 전환 동안에 사용할 수 있기 위해 컨퍼런스 서버에 의해 캐싱될 수 있다.
비디오 디스플레이를 위한 회의 참가자 결정하기
회의 참가자가 적어도 하나의 가장 적극적인 참자가로 되는지를 결정하는 단계는 회의 참가자가 회의의 가장 적극적인 발표자인지를 판정하는 단계를 포함할 수 있다. 이것은 회의 참가자가 하나 이상의 일정한 또는 가변적인 측정 구간에 걸쳐 모든 또는 대부분의 참자가들 중에서 가장 많은 오디오 에너지를 생성하는지를 판정하는 단계를 포함할 수 있다. 예를 들어, 2명의 발언자가 2분의 구간에 걸쳐 아주 적극적일 수 있고, 한명의 참자가가 디스플레이를 위해 선택될 수 있다. 한명이 더 힘있게(더 크게) 말하고 있고 따라서 가장 많은 에너지를 갖는 오디오 스트림을 제공하는 경우, 그 사람의 비디오가 디스플레이를 위해 선택될 수 있다. 2개 이상의 측정 구간이 필요할 수 있다. 예를 들어, (2분의 예와 같은) 소정의 더 긴 구간에 걸쳐 에너지가 측정될 수 있지만, 결정 알고리즘에서 (마지막 30초와 같은) 더 짧은 가장 최근의 구간에 측정된 에너지에 더 많은 가중치가 제공될 수 있다. 너무 자주 전환하여 비디오를 보는 회의 참가자가 너무 빈번한 전환으로 괴롭게 되는 것을 피하기 위해 측정 구간이 선택될 수 있다.
회의 참가자가 가장 적극적인 발언자인지를 판정하는 다른 방법은 참가자가 하나 이상의 일정한 또는 가변적인 측정 구간에 걸쳐 모든 또는 대부분의 다른 참자가들 중에 가장 많은 말을 하고 있는지를 판정하는 단계를 포함할 수 있다. 예를 들어, 2명의 발언자가 측정 구간에 걸쳐 아주 적극적일 수 있으며, 이 경우 한명의 가장 적극적인 참자가가 선택되어 그의 비디오가 컨퍼런스 디스플레이 상에 제공된다. 제1 발언자가 가장 많은 단어를 부드럽게 말하는 경우, 다른 발언자가 더 큰 오디오 에너지를 가지고 있을지라도 그 사람이 선택될 수 있다.
일부 상황에서, 회의 참가자가 적어도 하나의 가장 적극적인 참자가로 되는지를 결정하는 단계는 단지 회의 사회자가 다른 회의 참가자들에게 디스플레이할 회의 참가자를 선택했는지를 결정하는 단계를 포함할 수 있다.
새로운 회의 참가자로의 디스플레이 전환의 가속화
적어도 한명의 회의 참가자가 적어도 한명의 가장 적극적인 참자가로 되는 것으로 결정한 것에 응답하여, 컨퍼런스 서버는 그 회의 참가자에게 키 프레임을 요청할 수 있다. 회의 참가자로부터 요청된 키 프레임의 전부 또는 거의 전부를 수신한 것에 응답하여, 컨퍼런스 서버는 회의 참가자를 가장 적극적인 참자가로 되게 할 수 있다.
회의 참가자로부터 요청된 키 프레임의 전부 또는 거의 전부를 수신한 것에 응답하여, 컨퍼런스 서버는 회의 참가자의 비디오가 다른 회의 참가자들에게 보이도록 할 수 있다.
적어도 한명의 회의 참가자에게 키 프레임을 요청하는 단계는 컨퍼런스 서버가 회의 참가자에게 비디오 I-프레임을 컨퍼런스 서버에게 제공하라고 신호하는 단계를 포함할 수 있다. 회의 참가자가 현재 P-프레임 또는 수퍼-P 프레임에 위치한 비디오 스트림을 발생하고 있을지라도, 회의 참가자는 그다지 지연 없이 I-프레임을 제공할 것으로 예상된다. 이와 같이, 새로운 가장 적극적인 회의 참가자의 디스플레이로의 전환이 가속화될 수 있는데, 그 이유는 컨퍼런스 서버가 새로운 가장 적극적인 참가자의 비디오를 더 빨리 디스플레이할 수 있고 새로운 가장 적극적인 회의 참가자의 비디오 스트림의 자연스런 진행 동안 키 프레임이 나오기를 기다릴 필요가 없기 때문이다.
일부 실시예들에서, 컨퍼런스 서버는 가장 적극적인 회의 참가자가 아닌 적어도 한명의 회의 참가자의 적어도 하나의 키 프레임을 버퍼링할 수 있다. 회의 참가자가 적어도 한명의 가장 적극적인 참자가로 되는지를 결정한 것에 응답하여, 컨퍼런스 서버는 적어도 한명의 회의 참가자에게 수퍼-P 프레임을 요청할 수 있다. 수퍼-P 프레임이 수신되면, 이는 회의 참가자의 비디오 이미지를 생성하기 위해 컨퍼런스 서버에 의해 버퍼링된 키 프레임과 결합될 수 있다. 이 비디오 이미지는 이어서 다른 회의 참가자들에게 제공될 수 있다. 이와 같이, 새로운 가장 적극적인 회의 참가자의 디스플레이로의 전환이 가속화될 수 있는데, 그 이유는 컨퍼런스 서버가 새로운 가장 적극적인 참가자의 비디오를 더 빨리 디스플레이할 수 있기 때문이다. 이 경우에, 컨퍼런스 서버는 새로운 가장 적극적인 회의 참가자의 비디오 스트림의 자연스런 진행 동안에 키 프레임이 나오기를 기다릴 필요가 없고 그 대신에 요청된 수퍼-P 프레임을 버퍼링된 I-프레임과 결합하여 새로운 가장 적극적인 참가자의 디스플레이가능한 비디오를 생성할 수 있다.
일부 구현예들은 피어-투-피어 구성을 필요로 할 수 있으며, 이 경우 한명의 회의 참가자가 컨퍼런스 서버의 기능을 제공하고 오디오/비디오 컨퍼런스를 가능하게 하기 위해 다른 참자가들의 활동을 감독한다. 예를 들어, 컨퍼런스 서버로서 역할하는 한명의 참가자는 다른 참자가가 가장 적극적인지를 판정할 수 있고, 본 명세서에 기술된 바와 같이 가속된 비디오 전환을 가능하게 하기 위해 다른 참자가들에게 메시지/신호를 발행할 수 있다. 예를 들어, 회의를 위한 컨퍼런스 서버로서 역할하는 참자가는 현재의 가장 적극적인 참자가에게 다른 참자가들에게로 비디오를 전송하는 것을 중단하도록 지시할 수 있고 새로운 가장 적극적인 참자가에게 I-프레임을 전송하고 비디오 전송을 시작하도록 신호할 수 있다. 또한, 또는 다른 대안으로서, 컨퍼런스 서버로서 역할하는 참자가는 다른 참자가들에게 현재 가장 적극적인 참자가로부터의 비디오를 디스플레이하는 것을 중단하고 새로운 가장 적극적인 참자가로부터의 비디오를 디스플레이하기 시작하라고 신호할 수 있다.
컨퍼런스 서버로서 역할하는 참가자 및/또는 다른 참자가들은, 그 내용이 여기에 참조로 포함된, 2005년 5월 9일자로 출원된 발명의 명칭이 "Method and System for Providing and Interface Through Which an Application can Access a Media Stack(애플리케이션이 미디어 스택에 액세스하는 데 사용될 수 있는 인터페이스 및 이를 제공하는 방법 및 시스템)"인 미국 특허 출원 제11/124,902호에 기술된 하나 이상의 인터페이스를 사용하여, 오디오/비디오 입력과 출력, 및/또는 그에 의해 생성된 데이터와 인터페이스할 수 있다.
처리 및 통신 대역폭의 절감
컨퍼런스 서버는 가장 적극적이지는 않은 회의의 다른 참자가들에게 컨퍼런스 서버로 스트림 정보를 전달하는 것을 중단하라고 신호할 수 있다. 이것은, 예를 들어, 사용되지 않는 들어오는 비디오 패킷을 처리해야 하는 포트 드라이버의 부담을 덜어줌으로써 서버 상의 통신 대역폭 및 처리 대역폭을 절감시킬 수 있다.
컨퍼런스 서버는 다른 참자가들에게 비디오 스트림 정보를 전달하는 것을 중단하라고 신호할 수 있지만 다른 참자가들로부터의 오디오 스트림 정보를 계속 수신할 수 있고 이 오디오 정보를 처리하여 가장 적극적인 참자가를 판정할 수 있다.
새로운 가장 적극적인 참자가로의 전환
도 3은 새로운 가장 적극적인 참자가로 전환하는 것의 일 실시예의 동작 흐름도이다. 동작(302)에서, 참자가 'A'는 컨퍼런스 서버에 오디오를 제공한다. 동작(304)에서, 참자가 'B'는 컨퍼런스 서버에 오디오 및 비디오를 제공하고 가장 적극적인 회의 참가자이다. 동작(306)에서, 참자가 'C'는 컨퍼런스 서버에 오디오를 제공한다. 비록 설명을 위해 순차적으로 도시되어 있지만, 동작(302-306)은 실제로 거의 동시에 행해질 수 있다.
동작(306)에서, 참자가 'C'는 새로운 가장 적극적인 참자가인 것으로 결정된다.
동작(308)에서, 컨퍼런스 서버는 참자가 'C'에게 프레임 요청을 제공한다. 이 프레임 요청은 I-프레임에 대한 것일 수 있거나, 일부 실시예들에서는, 수퍼-P 프레임에 대한 것일 수 있다. 프레임을 요청하는 단계는 또한 통상적으로 참자가 'C'로 하여금 그의 비디오 스트림의 전달을 시작 또는 재시작하게 하는 단계를 포함한다.
동작(310)에서, 참자가 'C'는 컨퍼런스 서버에 키 프레임을 제공한다. 동작(312)에서, 컨퍼런스 서버는 비디오 중단 신호를 참자가 'A'에 제공한다. 이 예에서, 참자가 'A'는 이 시점에서 비디오를 전송하고 있지 않은데, 그 이유는 참자가 'A'가 가장 적극적인 회의 참가자가 아니기 때문이다. 따라서, 일부 실시예들에서, 참자가 'A'에게 비디오 중단 신호를 전송하는 동작이 일어나지 않을 수 있다.
동작(314)에서, 컨퍼런스 서버는 참자가 'B'에 비디오 중단 신호를 제공한다. 동작(316)에서, 참자가 'A'는 컨퍼런스 서버에 오디오 스트림을 계속 제공하고, 동작(318)에서, 참자가 'B'는 컨퍼런스 서버에 오디오 스트림을 계속 제공한다. 설명을 위해 순차적으로 도시되어 있지 않지만, 동작(316-318)은 실제로 거의 동시에 일어날 수 있다.
동작(320)에서, 새로운 가장 적극적인 참자가인 참자가 'C'는 컨퍼런스 서버에 오디오 및 비디오 스트림 둘다를 제공한다. 참자가 'A', 'B' 및 'C'의 오디오 스트림이 복호화, 디코딩 및 믹싱된다. 참자가 'B'에 대한 적은 양의 비디오 프레임 정보가 동작(326)에서 복호화되고, 이 복호화된 정보가 적어도 비디오 프레임의 유형을 결정하는 데 사용된다. 예를 들어, 적은 양의 비디오 '메타데이터' 정보가 디코딩되어 프레임 유형을 결정하는 데 사용될 수 있다. 동작(328)에서, 프레임 유형 정보는, 예를 들어, 참자가 'B'가 저대역폭 링크를 통해 컨퍼런스 서버에 연결되어 있는 경우, 대역폭 스케일링을 제공하기 위해 참자가 'B'에 제공되는 비디오 스트림으로부터 선택된 프레임들을 누락시키는 데 사용될 수 있다. 비디오 프레임을 누락시키는 것은 또한 컨퍼런스 서버에서 스트림에서 에러가 검출될 때 이 에러를 전파시키는 것을 방지하는 데 도움이 될 수 있다.
예를 들어, 일부 상황에서, 프레임 유형 정보는 암호화된 데이터의 처음 2 바이트로부터 확인될 수 있다. 프레임 패킷을 복호화하는 데 소요되는 시간은 패킷별 복호화 키를 발생하는 시간 및 그 패킷을 실제로 복호화하는 시간을 포함할 수 있다. 두번째 시간은 복호화될 데이터의 양에 비례한다. SRTP (Secure Real-Time Transport Protocol) 및 많은 다른 형태의 암호화의 경우, 패킷별 복호화 키를 알고 있는 경우, 이 복호화는 데이터의 처음부터 비트별로 행해진다. 이러한 이유는, 복호화를 수행하기 위해, 패킷별 키로부터 의사 랜덤 비트 스트림이 발생되어 암호화된 데이터와 XOR될 수 있기 때문이다.
일부 실시예들에서, 프레임 유형을 구하기 위해, 패킷별 키가 먼저 발생된다. 이어서, 패킷의 길이에 대해 의사 랜덤 스트림을 발생하기 보다는, 그 대신에 프레임 유형을 포함하는 처음 몇 바이트(예를 들어, 처음 2 바이트)에 대해 발생된다. 이 2 바이트는 이어서 나머지 패킷을 복호화하지 않고 나머지 패킷에 대해 의사 랜덤 비트스트림을 발생할 필요없이 복호화될 수 있다.
동작(322)에서, 컨퍼런스 서버는 믹싱된 오디오 및 비디오를 참자가 'A'에 제공한다. 동작(324)에서, 컨퍼런스 서버는 믹싱된 오디오 및 비디오를 참가자 'B'에 제공한다. 동작(332)에서, 컨퍼런스 서버는 믹싱된 오디오를 참자가 'C'에 제공한다(비디오가 제공되지 않는 이유는 참자가 'C'가 가장 적극적인 회의 참가자이고 비디오를 로컬적으로 디스플레이할 수 있기 때문이다). 설명을 위해 순차적으로 도시되어 있지만, 동작(322-332)이 실제로 거의 동시에 일어날 수 있다.
회의 참가자의 암호화/복호화 키의 동기화
도 4는 회의 참가자들의 암호화/복호화 키를 동기화시키는 프로세스의 일 실시예의 흐름도이다.
단계(402)에서, 새로운 참자가가 회의에 들어온다. 단계(404)에서, 이 새로운 참자가가 첫번째 회의 참가자인지에 관한 판정이 행해진다. 단계(404)에서 새로운 참자가가 첫번째 회의 참가자인 것으로 판정되는 경우, 단계(406)에서 컨퍼런스 서버와 새로운 참자가 사이에서 컨퍼런스 암호화/복호화 키가 협상될 수 있다. 그렇지 않은 경우, 단계(408)에서, 새로운 참자가는 컨퍼런스 서버 및 기존의 참자가들에 의해 이미 사용 중인 암호화/복호화 키를 제공받는다. 단계(410)에서, 프로세스가 종료된다.
처리 대역폭을 절감하기 위한 비디오 스트림 통과시키기
모든 회의 참가자들을 동일한 암호화 키를 사용하도록 동기시키고 회의 참가자로부터의 하나 이상의 스트림을 복호화 및 재암호화를 수행하지 않고 컨퍼런스 서버를 통과시킴으로써 컨퍼런스 서버의 처리 대역폭이 절감될 수 있다. 암호화 및 복호화는 종종 처리-집중적인 동작이며, 따라서 적은 암호화/복호화 처리는 처리 대역폭의 절감을 위한 진보이다.
암호화 키의 동기화는 하나 이상의 기존의 회의 참가자의 암호화 키를 새로 들어온 회의 참가자에게 제공함으로써 용이하게 될 수 있다. 키 동기화는 다양한 공지의 키 교환 프로토콜을 사용하여 달성될 수 있다.
회의 참가자들은 또한, 예를 들어, 하나 이상의 기존의 회의 참가자의 복호화 키를 새로 들어온 회의 참가자에게 제공함으로써 동일한 복호화 키를 사용하기 위해 동기될 수 있다.
이상의 상세한 설명은 블록도, 흐름도, 및/또는 예들을 사용하여 장치 및/또는 프로세스의 다양한 실시예들에 대해 기술하고 있다. 이러한 블록도, 흐름도, 및/또는 예들이 하나 이상의 기능 및/또는 동작을 포함하고 있는 한, 당업자라면 이러한 블록도, 흐름도 또는 예 내의 각각의 기능 및/또는 동작이, 광범위한 하드웨어, 소프트웨어, 펌웨어 또는 이들의 거의 모든 조합에 의해, 개별적으로 및/또는 전체적으로 구현될 수 있다는 것을 잘 알 것이다. 본 명세서에 기술된 발명 대상의 몇몇 부분들이 ASIC(Application Specific Integrated Circuit), FPGA(Field Programmable Gate Array), DSP(digital signal processor) 또는 기타 집적된 형식을 통해 구현될 수 있다. 그러나, 당업자라면 본 명세서에 기술된 실시예들의 일부 양태들이 전체로서 또는 부분적으로 표준 집적 회로에서, 하나 이상의 컴퓨터에서 실행되는 하나 이상의 컴퓨터 프로그램으로서(예를 들어, 하나 이상의 컴퓨터 시스템에서 실행되는 하나 이상의 프로그램으로서), 하나 이상의 프로세서에서 실행되는 하나 이상의 프로그램으로서(예를 들어, 하나 이상의 마이크로프로세서에서 실행되는 하나 이상의 프로그램으로서), 펌웨어로서, 또는 이들의 거의 모든 조합으로서 똑같이 구현될 수 있다는 것과 소프트웨어 및/또는 펌웨어에 대한 회로를 설계하는 것 및/또는 코드를 작성하는 것이 본 명세서를 고려하여 당업자에 의해 용이하게 안출될 수 있다는 것을 잘 알 것이다. 또한, 당업자라면 본 명세서에 기술된 발명 대상의 메커니즘이 다양한 형태로 프로그램 제품으로서 배포될 수 있다는 것과 본 명세서에 기술된 발명 대상의 예시적인 실시예가 이 배포를 실제로 수행하는 데 사용되는 특정 유형의 신호 전달 매체에 상관없이 똑같이 적용된다는 것을 잘 알 것이다. 신호 전달 매체의 예로는, 플로피 디스크, 하드 디스크 드라이브, CD-ROM, 디지털 테이프 및 컴퓨터 메모리 등의 기록가능 유형 매체, 및 TDM 또는 IP 기반 통신 링크(예를 들어, 패킷 링크)를 사용하는 디지털 및 아날로그 통신 링크 등의 전송 유형 매체가 있지만, 이에 제한되는 것은 아니다.
일반적으로, 당업자라면 광범위한 하드웨어, 소프트웨어, 펌웨어 또는 이들의 임의의 조합에 의해 개별적으로 및/또는 전체적으로 구현될 수 있는 본 명세서에 기술된 다양한 양태들이 다양한 유형의 "전기 회로"로 이루어져 있는 것으로 볼 수 있다는 것을 잘 알 것이다. 따라서, 본 명세서에서 사용되는 바와 같이, "전기 회로"는 적어도 하나의 이산 전기 회로를 갖는 전기 회로, 적어도 하나의 집적 회로를 갖는 전기 회로, 적어도 하나의 ASIC을 갖는 전기 회로, 컴퓨터 프로그램에 의해 구성되는 범용 컴퓨터 장치(예를 들어, 적어도 부분적으로 본 명세서에 기술된 프로세스 및/또는 장치를 수행하는 컴퓨터 프로그램에 의해 구성되는 범용 컴퓨터, 또는 적어도 부분적으로 본 명세서에 기술된 프로세스 및/또는 장치를 수행하는 컴퓨터 프로그램에 의해 구성되는 마이크로프로세서)를 형성하는 전기 회로, 메모리 장치(예를 들어, 여러 형태의 랜덤 액세스 메모리)를 형성하는 전기 회로, 및/또는 통신 장치(예를 들어, 모뎀, 통신 스위치, 또는 광-전기 장비)를 형성하는 전기 회로를 포함하지만, 이에 제한되는 것은 아니다.

Claims (20)

  1. 컨퍼런스 서버가 회의 참가자가 가장 적극적인 참가자로 되는지를 결정한 것에 응답하여 상기 회의 참가자에게 키 프레임을 요청하는 단계; 및
    상기 컨퍼런스 서버가 상기 회의 참가자로부터 상기 키 프레임을 수신한 것에 응답하여 상기 회의 참가자를 가장 적극적인 참가자로 되게 하는 단계
    를 포함하는 다중-참가자 화상 회의 방법.
  2. 제1항에 있어서, 컨퍼런스 서버가 상기 회의 참가자가 가장 적극적인 참가자로 되는지를 결정한 것에 응답하여 상기 회의 참가자에게 키 프레임을 요청하는 단계는,
    상기 컨퍼런스 서버가 상기 회의 참가자에게 상기 컨퍼런스 서버에 I-프레임을 제공하도록 신호하는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  3. 제1항에 있어서, 상기 회의 참가자가 가장 적극적인 참가자로 되는지를 결정하는 단계는,
    상기 회의 참가자가 상기 회의의 가장 적극적인 발표자인지를 결정하는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  4. 제1항에 있어서,
    컨퍼런스 서버가 하나 이상의 스트림 프레임의 유형을 결정하기 위해 하나 이상의 스트림 프레임 패킷 각각의 2 바이트만을 복호화하는 단계; 및
    상기 컨퍼런스 서버가 하나 이상의 다른 회의 참가자에 적절한 대역폭 스케일링을 수행하기 위해 상기 회의 참가자에 의해 제공되는 비디오 스트림으로부터 상기 하나 이상의 프레임을 누락시키는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  5. 제4항에 있어서, 상기 컨퍼런스 서버가 하나 이상의 스트림 프레임의 유형 및 범위를 결정하기 위해 하나 이상의 스트림 패킷 각각의 작은 부분만을 복호화하는 단계는,
    상기 컨퍼런스 서버가 비디오 메타데이터 정보의 작은 부분을 복호화하는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  6. 제4항에 있어서, 상기 컨퍼런스 서버가 하나 이상의 회의 참가자에 적절한 대역폭 스케일링을 수행하기 위해 상기 스트림으로부터 프레임들을 누락시키는 단계는,
    상기 컨퍼런스 서버가 사실상 더 낮은 비트 레이트의 스트림을 제공하기 위해 프레임들을 누락시키는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  7. 제1항에 있어서,
    상기 컨퍼런스 서버가 적어도 하나의 다른 회의 참가자에게 상기 컨퍼런스 서버에 스트림 정보를 전달하는 것을 중단하라고 신호하는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  8. 제7항에 있어서, 상기 컨퍼런스 서버가 가장 적극적이지는 않은 상기 회의의 다른 참가자들에게 상기 컨퍼런스 서버에 스트림 정보를 전달하는 것을 중단하라고 신호하는 단계는,
    상기 컨퍼런스 서버가 상기 다른 참가자들에게 비디오 스트림 정보를 전달하는 것을 중단하라고 신호하고 상기 컨퍼런스 서버가 상기 다른 참가자들로부터 오디오 정보를 계속 수신하여 가장 적극적인 참가자를 결정하기 위해 상기 오디오 정보를 처리하는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  9. 제1항에 있어서,
    동일한 암호화 키를 사용하기 위해 모든 회의 참가자들을 동기시키는 단계; 및
    상기 회의 참가자들로부터의 하나 이상의 스트림을 복호화 및 재암호화하지 않고 상기 스트림을 컨퍼런스 서버를 통과시키는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  10. 제9항에 있어서, 동일한 암호화 키를 사용하기 위해 모든 회의 참가자들을 동기시키는 단계는,
    새로 들어온 회의 참가자에게 하나 이상의 기존의 회의 참가자들의 암호화 키를 제공하는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  11. 제1항에 있어서,
    동일한 복호화 키를 사용하기 위해 모든 회의 참가자들을 동기시키는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  12. 제11항에 있어서, 동일한 복호화 키를 사용하기 위해 모든 회의 참가자들을 동기시키는 단계는,
    새로 들어온 회의 참가자에게 하나 이상의 기존의 회의 참가자들의 복호화 키를 제공하는 단계
    를 더 포함하는 다중-참가자 화상 회의 방법.
  13. 컨퍼런스 서버가 가장 적극적인 회의 참가자가 아닌 회의 참가자의 적어도 하나의 키 프레임을 버퍼링하는 단계; 및
    상기 회의 참가자가 가장 적극적인 참가자로 되는지를 결정한 것에 응답하여 상기 회의 참가자에게 수퍼-P 프레임(super-P frame)을 요청하는 단계
    를 포함하는 다중-참가자 회의 방법.
  14. 제13항에 있어서,
    상기 회의 참가자의 비디오 이미지를 생성하기 위해 상기 버퍼링된 키 프레임과 상기 수퍼-P 프레임을 결합하는 단계; 및
    상기 비디오 이미지를 다른 회의 참가자에게 제공하는 단계
    를 더 포함하는 다중-참가자 회의 방법.
  15. 다수의 회의 참가자들에게 서비스를 제공하는 컨퍼런스 서버의 동작에 영향을 주기 위해 적용될 때,
    상기 컨퍼런스 서버가 회의 참가자가 가장 적극적인 참가자로 되는지를 결정한 것에 응답하여 회의 참가자에게 키 프레임을 요청하는 단계; 및
    상기 컨퍼런스 서버가 상기 회의 참가자로부터 상기 키 프레임의 전부 또는 거의 전부를 수신한 것에 응답하여 상기 회의 참가자를 가장 적극적인 참가자로 되게 하는 단계
    를 수행하는 로직.
  16. 제15항에 있어서, 상기 컨퍼런스 서버의 동작에 영향을 주기 위해 적용될 때,
    상기 컨퍼런스 서버가 하나 이상의 스트림 프레임의 유형을 결정하기 위해 하나 이상의 스트림 프레임 패킷 각각의 2 바이트만을 복호화하는 단계; 및
    상기 컨퍼런스 서버가 하나 이상의 다른 회의 참가자에 대해 대역폭 스케일링을 수행하기 위해 상기 회의 참가자에 의해 제공되는 비디오 스트림으로부터 상기 하나 이상의 스트림 프레임을 누락시키는 단계
    를 더 수행하는 로직.
  17. 제16항에 있어서, 컨퍼런스 서버의 동작에 영향을 주기 위해 적용될 때,
    상기 컨퍼런스 서버가 하나 이상의 스트림 프레임의 유형 및 범위를 결정하기 위해 하나 이상의 스트림 패킷 각각의 작은 부분만을 복호화하는 단계는,
    상기 컨퍼런스 서버가 비디오 메타데이터 정보의 작은 부분을 복호화하는 단계
    를 더 포함하는 로직.
  18. 제16항에 있어서, 컨퍼런스 서버의 동작에 영향을 주기 위해 적용될 때,
    상기 컨퍼런스 서버가 사실상 더 낮은 비트 레이트의 스트림을 제공하기 위해 프레임들을 누락시키는 단계
    를 더 수행하는 로직.
  19. 제15항에 있어서, 컨퍼런스 서버의 동작에 영향을 주기 위해 적용될 때,
    상기 컨퍼런스 서버가 다른 참가자들에게 상기 컨퍼런스 서버에 스트림 정보를 전달하는 것을 중단하라고 신호하는 단계
    를 더 수행하는 로직.
  20. 제15항에 있어서, 컨퍼런스 서버의 동작에 영향을 주기 위해 적용될 때,
    상기 컨퍼런스 서버가 회의 참가자들에 의한 동일한 암호화 키의 사용의 동기화를 용이하게 하는 단계; 및
    상기 컨퍼런스 서버가 상기 회의 참가자들로부터의 하나 이상의 스트림의 복호화 및 재암호화를 수행하지 않고 상기 스트림을 통과시키는 단계
    를 더 수행하는 로직.
KR1020087030003A 2006-06-16 2007-02-21 다중-참가자 화상 회의 방법 및 로직 KR20090019825A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/454,593 US7822811B2 (en) 2006-06-16 2006-06-16 Performance enhancements for video conferencing
US11/454,593 2006-06-16

Publications (1)

Publication Number Publication Date
KR20090019825A true KR20090019825A (ko) 2009-02-25

Family

ID=38832051

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020087030003A KR20090019825A (ko) 2006-06-16 2007-02-21 다중-참가자 화상 회의 방법 및 로직

Country Status (8)

Country Link
US (1) US7822811B2 (ko)
EP (1) EP2033460A1 (ko)
KR (1) KR20090019825A (ko)
CN (1) CN101467423B (ko)
BR (1) BRPI0712228A2 (ko)
CA (1) CA2652400A1 (ko)
RU (1) RU2008149526A (ko)
WO (1) WO2007145686A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11368510B1 (en) * 2021-04-30 2022-06-21 Zoom Video Communications, Inc. Video frame generation

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8203591B2 (en) 2007-04-30 2012-06-19 Cisco Technology, Inc. Method and system for optimal balance and spatial consistency
US8117446B2 (en) * 2007-07-09 2012-02-14 Interwise Ltd. Method and system for secured real time protocol in scalable distributed conference applications
KR100867004B1 (ko) * 2007-09-19 2008-11-10 한국전자통신연구원 시청자 참여를 위한 양방향성 ｉｐｔｖ 방송 서비스 방법및 그 시스템
US8243119B2 (en) 2007-09-30 2012-08-14 Optical Fusion Inc. Recording and videomail for video conferencing call systems
US20090210789A1 (en) * 2008-02-14 2009-08-20 Microsoft Corporation Techniques to generate a visual composition for a multimedia conference event
US8477661B2 (en) * 2009-08-14 2013-07-02 Radisys Canada Ulc Distributed media mixing and conferencing in IP networks
CN102098485A (zh) * 2009-12-09 2011-06-15 宏正自动科技股份有限公司 用户视频会议系统、远程管理系统及进行视频会议的方法
US11606537B2 (en) * 2010-05-25 2023-03-14 Cisco Technology, Inc. System and method for scalable media switching conferencing
NO333235B1 (no) * 2010-05-25 2013-04-15 Cisco Systems Int Sarl System og fremgangsmate for konferanser med skalerbar mediesvitsjing
US8731152B2 (en) * 2010-06-18 2014-05-20 Microsoft Corporation Reducing use of periodic key frames in video conferencing
EP2448265A1 (en) 2010-10-26 2012-05-02 Google, Inc. Lip synchronization in a video conference
US8655945B2 (en) * 2010-11-16 2014-02-18 International Business Machines Corporation Centralized rendering of collaborative content
US9210302B1 (en) 2011-08-10 2015-12-08 Google Inc. System, method and apparatus for multipoint video transmission
US8666042B2 (en) * 2011-11-02 2014-03-04 Cisco Technology, Inc. Techniques for performing key frame requests in media servers and endpoint devices
US9232244B2 (en) * 2011-12-23 2016-01-05 Cisco Technology, Inc. Efficient frame forwarding in large scale real-time screen content sharing meetings
CN102572356B (zh) 2012-01-16 2014-09-03 华为技术有限公司 记录会议的方法和会议系统
US8917309B1 (en) * 2012-03-08 2014-12-23 Google, Inc. Key frame distribution in video conferencing
US8791982B1 (en) 2012-06-27 2014-07-29 Google Inc. Video multicast engine
US9118940B2 (en) 2012-07-30 2015-08-25 Google Technology Holdings LLC Video bandwidth allocation in a video conference
US9288435B2 (en) * 2013-03-27 2016-03-15 Google Inc. Speaker switching delay for video conferencing
TWI595786B (zh) * 2015-01-12 2017-08-11 仁寶電腦工業股份有限公司 基於時間戳記的音訊與視訊處理方法及其系統
US9900769B2 (en) 2015-05-29 2018-02-20 Nagravision S.A. Methods and systems for establishing an encrypted-audio session
US10122767B2 (en) * 2015-05-29 2018-11-06 Nagravision S.A. Systems and methods for conducting secure VOIP multi-party calls
US9891882B2 (en) 2015-06-01 2018-02-13 Nagravision S.A. Methods and systems for conveying encrypted data to a communication device
US10356059B2 (en) 2015-06-04 2019-07-16 Nagravision S.A. Methods and systems for communication-session arrangement on behalf of cryptographic endpoints
US9609275B2 (en) 2015-07-08 2017-03-28 Google Inc. Single-stream transmission method for multi-user video conferencing
US10085029B2 (en) 2015-07-21 2018-09-25 Qualcomm Incorporated Switching display devices in video telephony
KR20170012979A (ko) 2015-07-27 2017-02-06 삼성전자주식회사 영상 공유 서비스를 위한 전자 장치 및 방법
GB201520509D0 (en) 2015-11-20 2016-01-06 Microsoft Technology Licensing Llc Communication system
US10250848B2 (en) * 2016-06-03 2019-04-02 Avaya Inc. Positional controlled muting
CN108881801B (zh) * 2018-06-29 2020-11-24 苏州科达科技股份有限公司 视频会议的码流传输方法、系统、电子设备、存储介质
CN110070878B (zh) * 2019-03-26 2021-05-04 苏州科达科技股份有限公司 音频码流的解码方法及电子设备
US20220067993A1 (en) * 2020-08-31 2022-03-03 Popshop Technologies, Inc. Live streaming object image capture and image conversion to product catalog
US20220377059A1 (en) * 2021-05-21 2022-11-24 Zoom Video Communications, Inc. Long-term key management for end-to-end encryption of videoconferences
CN113434187B (zh) * 2021-06-18 2022-10-28 聚好看科技股份有限公司 服务器及白板版本兼容方法
CN115834974A (zh) * 2022-10-14 2023-03-21 北京随锐会见科技有限公司 视频通讯带宽配置方法、视频会议带宽配置方法及设备

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5508942A (en) * 1993-11-24 1996-04-16 Intel Corporation Intra/inter decision rules for encoding and decoding video signals
US5805705A (en) * 1996-01-29 1998-09-08 International Business Machines Corporation Synchronization of encryption/decryption keys in a data communication network
US6128649A (en) * 1997-06-02 2000-10-03 Nortel Networks Limited Dynamic selection of media streams for display
JP3775455B2 (ja) 1997-12-12 2006-05-17 富士ゼロックス株式会社 会議端末装置および会議関連情報の送信方法
US6795106B1 (en) * 1999-05-18 2004-09-21 Intel Corporation Method and apparatus for controlling a video camera in a video conferencing system
GB2378601B (en) * 2001-08-08 2004-03-31 Motorola Inc Video transmission system,video transmission unit and method of communicating video data
FI114129B (fi) * 2001-09-28 2004-08-13 Nokia Corp Konferenssipuhelujärjestely
GB2384932B (en) * 2002-01-30 2004-02-25 Motorola Inc Video conferencing system and method of operation
US20050132412A1 (en) * 2002-03-20 2005-06-16 Richardson John W. Videoconference system architecture
US6804781B1 (en) * 2003-05-12 2004-10-12 Hewlett-Packard Development Company, L.P. System and method for security of information in a memory
IL158276A (en) * 2003-10-02 2010-04-29 Radvision Ltd Method for dynamically optimizing bandwidth allocation in variable bitrate (multi-rate) conferences
US8659636B2 (en) * 2003-10-08 2014-02-25 Cisco Technology, Inc. System and method for performing distributed video conferencing
US7860005B2 (en) * 2004-01-30 2010-12-28 Hewlett-Packard Development Company, L.P. Methods and systems that use information about a frame of video data to make a decision about sending the frame

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11368510B1 (en) * 2021-04-30 2022-06-21 Zoom Video Communications, Inc. Video frame generation
US11606405B2 (en) 2021-04-30 2023-03-14 Zoom Video Communications, Inc. Receiving compressed video frames in a video conference
US12021912B2 (en) 2021-04-30 2024-06-25 Zoom Video Communications, Inc. Distributing compressed video frames in a video conference

Also Published As

Publication number Publication date
CN101467423B (zh) 2013-06-19
CA2652400A1 (en) 2007-12-21
BRPI0712228A2 (pt) 2012-01-17
WO2007145686A1 (en) 2007-12-21
US7822811B2 (en) 2010-10-26
EP2033460A1 (en) 2009-03-11
US20070294346A1 (en) 2007-12-20
CN101467423A (zh) 2009-06-24
RU2008149526A (ru) 2010-06-20

Similar Documents

Publication Publication Date Title
KR20090019825A (ko) 다중-참가자 화상 회의 방법 및 로직
US11153533B2 (en) System and method for scalable media switching conferencing
US8614732B2 (en) System and method for performing distributed multipoint video conferencing
EP2100397B1 (en) Audio conferencing utilizing packets with unencrypted power level information
US8471890B1 (en) Adaptive video communication channel
US8335172B2 (en) Switchable conference multicast streaming with dynamic asymmetry
EP2728830B1 (en) Method and system for synchronizing audio and video streams in media relay conferencing
Grozev et al. Last N: relevance-based selectivity for forwarding video in multimedia conferences
US20060221869A1 (en) System and method for audio multicast
KR20060002787A (ko) 컨텐츠 처리 방법, 장치 및 제품
US11882385B2 (en) System and method for scalable media switching conferencing
CN105144702A (zh) 视频会议虚拟端点
US9369511B2 (en) Telecommunication network
US8571189B2 (en) Efficient transmission of audio and non-audio portions of a communication session for phones
JP2007318451A (ja) 音声通信端末装置、音声通信制御方法および音声通信端末プログラム
Adamson et al. Secure Distributed Virtual Conferencing: Multicast or Bust
US20120075408A1 (en) Technique for providing in-built audio/video bridge on endpoints capable of video communication over ip
US7460671B1 (en) Encryption processing apparatus and method for voice over packet networks
JP2009044287A (ja) 映像配信装置，配信映像切替え方法，配信映像切替えプログラムおよび配信映像切替えプログラム記録媒体
Kunkelmann et al. Scalable security mechanisms in transport systems for enhanced multimedia services
Zhang et al. Research on user applying mode for video conference system
Yu Streaming media encryption
Jeronimo et al. Heather Yu
Shutoy The Centralized Conferencing Protocol for Real-Time Communication
Speech Audio Compression

Legal Events

Date Code Title Description
A201 Request for examination
SUBM Surrender of laid-open application requested