KR20140138609A - 무제한의 다이내믹한 적극적인 참가자들과의 비디오 회의 - Google Patents

무제한의 다이내믹한 적극적인 참가자들과의 비디오 회의 Download PDF

Info

Publication number
KR20140138609A
KR20140138609A KR1020147021231A KR20147021231A KR20140138609A KR 20140138609 A KR20140138609 A KR 20140138609A KR 1020147021231 A KR1020147021231 A KR 1020147021231A KR 20147021231 A KR20147021231 A KR 20147021231A KR 20140138609 A KR20140138609 A KR 20140138609A
Authority
KR
South Korea
Prior art keywords
participants
participant
active
visual data
state
Prior art date
Application number
KR1020147021231A
Other languages
English (en)
Inventor
유구앙 우
지안밍 헤
Original Assignee
구글 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 구글 인코포레이티드 filed Critical 구글 인코포레이티드
Publication of KR20140138609A publication Critical patent/KR20140138609A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/152—Multipoint control units therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827—Network arrangements for conference optimisation or adaptation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals

Abstract

일반적으로, 본 명세서은 둘 이상의 참가자 사이의 실시간 통신 세션에서 역동적인 참가자들을 제공하기 위한 기술들을 설명한다. 통신 세션에 연결된 컴퓨팅 디바이스들 보다 실시간 비주얼 통신에 더 많은 참가자들이 있을 때, 참가자들의 서브 셋은 적극적인 참가자들이 되도록 선정된다. 적극적인 참가자들의 비주얼 데이터는 하나 이상의 컴퓨팅 디바이스들에 의해 디스플레이된다. 적극적인 참가자들은 참가 특성에 기초해서 선정된다. 적극적인 참가자들은 소극적이 될 수 있고 소극적인 참가자들은 참가 특성들에 기초해서 적극적이 될 수 있다. 적극적인 참가자들과 관련된 비주얼 데이터의 품질(예를 들어, 압축률, 출력 디스플레이 크기 등)은 소극적인 참가자들이 적극적이 되면서 반복적으로 줄어들 수 있다.

Description

무제한의 다이내믹한 적극적인 참가자들과의 비디오 회의{VIDEO CONFERENCING WITH UNLIMITED DYNAMIC ACTIVE PARTICIPANTS}
[관련출원들에 대한 상호 참조]
본 출원은, 2011년 12월 28일 출원된 미국 특허 가출원 제61/581,035호에 대한 우선권을 주장하며, 상기 가출원은 본 명세서의 양수인에게 양도되고 본 명세서에 참조로서 명시적으로 통합된다.
[기술분야]
본 명세서는 비디오 회의에서의 참가자들을 디스플레이하는 것에 관한 것이다.
셋 이상의 컴퓨팅 디바이스 유저들은, 유저들(또한, 참가자들이라고도 칭함) 이 라이브 비디오와 오디오 전송을 교환하는 비디오 회의와 같은 실시간 비디오 통신에 종종 참여할 수 있다.
본 명세서에 개시된 기술들은 실시간 비주얼 통신 세션에 참가하는 복수의 참가자들 중에서, 실시간 비주얼 통신 세션에 관계하고 그리고 상기 복수의 참가자들 각각에 대한 참가자 관련된 비주얼 데이터를 디스플레이하기 위한 타당성과 각각 관련이 있는 하나 이상의 적극적인 참가 특성들에 적어도 부분적으로 기초하여 적극적인 상태와 각각 관련되는 하나 이상의 적극적인 참가자들을 선택하는 단계를 포함하는 방법을 제공한다. 상기 방법은 디스플레이하기 위하여, 컴퓨팅 디바이스의 디스플레이 디바이스 상에 상기 하나 이상의 적극적인 참가자와 관련되는 제 1의 비주얼 데이터 세트를 제공하는 단계를 더 포함한다. 상기 방법은 상기 실시간 비주얼 통신 세션에 관련되는 상기 하나 이상의 참가 특성들에 적어도 부분적으로 기초해서 적극적인 참가자로 선택되지 않았던 하나 이상의 참가자들 중에서 하나 이상의 새로운 적극적인 참가자들을 선택하는 단계를 또한 포함하고, 상기 하나 이상의 새로운 적극적인 참가자들은 상기 적극적인 상태와 관련되고, 상기 적극적인 상태와 관련되는 상기 적극적인 참가자들의 총 수는 적극적인 참가자들의 임계 수를 초과하지 않는다. 상기 방법은, 디스플레이하기 위해, 상기 컴퓨팅 디바이스의 상기 디스플레이 디바이스 상에 상기 하나 이상의 새로운 적극적인 참가자들과 관련된 제 2의 비주얼 데이터 세트를 제공하는 단계와, 디스플레이하기 위한 상기 제 2의 비주얼 데이터 세트를 제공하는 단계에 응답하여, 상기 디스플레이된 제 1의 비주얼 데이터 세트의 적어도 일부의 품질을 수정하는 단계를 포함한다.
본 명세서의 개시된 다른 예는 프로그래머블 프로세서(programmable processor)로 하여금 동작들을 수행하게 하는 명령들을 포함하는 컴퓨터 판독 가능한 저장 매체를 제공한다. 상기 명령들은, 실시간 비주얼 통신 세션에 참가하는 복수의 참가자들 중에서, 복수의 참가자들 각각에 대한 참가자 관련된 비주얼 데이터를 디스플레이하기 위한 타당성과 관련이 있는 하나 이상의 적극적인 참가 특성들에 적어도 부분적으로 기초해서 적극적인 상태와 각각 관련되는 하나 이상의 적극적인 참가자들을 선택하는 것을 포함한다. 상기 명령들은, 디스플레이하기 위하여, 컴퓨팅 디바이스의 디스플레이 디바이스 상에 상기 하나 이상의 적극적인 참가자들과 관련되는 제 1의 비주얼 데이터 세트를 제공하는 것을 더 포함한다. 상기 명령들은, 실시간 비주얼 통신 세션에 관한 상기 하나 이상의 참가 특성들에 적어도 부분적으로 기초해서 적극적인 참가자들로 선택되지 않았던 하나 이상의 참가자들 중에서 하나 이상의 새로운 적극적인 참가자들을 선택하는 것을 또한 포함하고, 상기 하나 이상의 새로운 적극적인 참가자들은 상기 적극적인 상태와 관련되고, 상기 적극적인 상태와 관련되는 상기 적극적인 참가자들의 총 수는 적극적인 참가자들의 임계 수를 초과하지 않는다. 상기 명령들은, 디스플레이하기 위하여, 상기 컴퓨팅 디바이스의 상기 디스플레이 디바이스 상에 상기 하나 이상의 새로운 적극적인 참가자들과 관련된 제 2의 비주얼 데이터 세트를 제공하는 것과, 디스플레이하기 위한 상기 제 2의 비주얼 데이터 세트를 제공하는 단계에 응답하여, 상기 디스플레이된 제 1의 비주얼 데이터 세트의 적어도 일부의 품질을 수정하는 것을 포함한다.
또 다른 예는 하나 이상의 프로세서들을 포함하는 서버를 제공하고, 상기 하나 이상의 프로세서는, 실시간 비주얼 통신 세션에 참가하는 복수의 참가자들 중에서, 실시간 비주얼 통신 세션에 관한고 그리고 상기 복수의 참가자들 각각에 대한 참가자 관련된 비주얼 데이터를 디스플레이하기 위한 타당성과 관련이 있는 하나 이상의 적극적인 참가 특성들에 적어도 부분적으로 기초하여 적극적인 상태와 각각 관련되는 하나 이상의 적극적인 참가자들을 선택하는 방법을 수행하도록 구성되어 있다. 상기 하나 이상의 프로세서들은, 디스플레이를 위하여, 컴퓨팅 디바이스의 디스플레이 디바이스 상에 상기 하나 이상의 적극적인 참가자와 관련이 있는 제 1의 비주얼 데이터를 또한 제공하도록 구성되어 있다. 상기 방법은 상기 실시간 비주얼 통신 세션에 관련되는 상기 하나 이상의 참가 특성들에 적어도 부분적으로 기초해서 적극적인 참가자로 선택되지 않았던 하나 이상의 참가자들 중에서 하나 이상의 새로운 적극적인 참가자들을 선택하는 단계를 더 포함하고, 상기 하나 이상의 새로운 적극적인 참가자들은 상기 적극적인 상태와 관련되고, 상기 적극적인 상태와 관련되는 상기 적극적인 참가자들의 총 수는 적극적인 참가자들의 임계 수를 초과하지 않는다. 상기 방법은, 디스플레이하기 위해, 상기 컴퓨팅 디바이스의 상기 디스플레이 디바이스 상에 상기 하나 이상의 새로운 적극적인 참가자들과 관련된 제 2의 비주얼 데이터 세트를 제공하는 단계와, 디스플레이하기 위한 상기 제 2의 비주얼 데이터 세트를 제공하는 단계에 응답하여, 상기 디스플레이된 제 1의 비주얼 데이터 세트의 적어도 일부의 품질을 수정하는 단계를 포함한다.
본 명세서의 개시된 하나 이상의 양상들의 세부 사항들은 첨부된 도면에 명시되어 있다. 본 명세서의 개시된 다른 특징들, 목적들 및 이점들은 상세한 설명 및 도면으로부터 명백해질 것이다.
도 1은 본 명세서의 하나 이상의 양상에 따른, 하나 이상의 애플리케이션들을 실행할 수 있고, 하나 이상의 다른 컴퓨팅 디바이스들과의 비디오 회의에 참여할 수 있는 컴퓨팅 디바이스의 일 예를 도시한 블락선도이다.
도 2는 본 명세서의 하나 이상의 양상에 따른, 도 1에 나타난 컴퓨팅 디바이스의 일 예의 추가적인 세부사항들을 도시한 블락선도이다.
도 3은 본 명세서의 하나 이상의 양상에 따른, 실시간의 비주얼 통신 세션에 참가한 복수의 참가자들 중에서 적극적인 참가자들을 선택하기 위해, 컴퓨팅 디바이스에 의해 수행될 수 있는 예시적인 방법을 도시한 플로우 차트(flow chart)이다.
도 4a 내지 4d는 본 명세서의 하나 이상의 양상에 따른, 실시간의 비주얼 통신 세션에 참가한 적극적인 참가자들의 비주얼 데이터를 디스플레이하기 위해, 컴퓨팅 디바이스에 의해 제공될 수 있는 예시적인 GUI(graphical user interface)를 도시한 블락선도이다.
개요
본 명세서의 기술은, 실시간 비주얼 통신 세션에 대한 네트워크 또는 컴퓨터 자원들이 제한될 수 있는, 둘 이상의 참가자들 간의 실시간 비주얼 통신 세션에서 적극적인 참가자들을 제공하기 위한 기능에 초점이 맞춰져 있다. 대역폭, 디스플레이 스크린 크기 또는, 처리 능력(processing capability)과 같은 제한된 리소스들로 인해, 통신 세션의 모든 참가자에 대한 비주얼 데이터는 동시에 출력되지 않을 수 있다. 통신 세션은, 비록 최대 수(maximum number)보다 많은 유저들이 통신 세션에 참가 중일지라도, 단지, 최대 수의 참가자들에 대한 비주얼 데이터를 디스플레이하는 것을 지원할 수 있다. 그러므로, 본 명세서에 제공된 기술들은, 비주얼 통신 세션에서 일부 참가자들이 "적극적인" 참가자들이 되도록 선택한다. 적극적인 참가자와 관련이 있는 비주얼 데이터가, 컴퓨팅 디바이스들에 의해 디스플레이되기 위해, 통신 세션에 연결된 유저 컴퓨팅 디바이스들에 제공된다. 적극적인 참가자들로 선택되지 않은 참가자들은 소극적인 참가자들(passive participants)이고, 소극적인 참가자들과 관련된 비주얼 데이터는 디스플레이를 위한 하나 이상의 컴퓨팅 디바이스들에 제공되지 않는다. 따라서, 통신 세션에 참여한 참가자들의 총 수는, 이미지(image) 및 다른 비디오 데이터로 인하여 통신 세션에 가해진 제한으로 한정 되지 않을 수 있다.
예를 들어, 통신 세션은 최대 10인의 참자가들에 대한 비주얼 데이터를 디스플레이하는 것을 지원할 수 있다. 이러한 특정 예에서, 최대 10인의 참가자들과 관련된 비주얼 데이터는 통신 세션과 연결된 컴퓨팅 디바이스에 의해 디스플레이되는 반면, 나머지 참가자들과 관련된 비주얼 데이터는 디스플레이되지 않는다. 그들의 비주얼 데이터가 디스플레이되고 있는 참가자들은 적극적인 상태(즉, 적극적인 참가자)인 반면, 그들의 비주얼 데이터가 디스플레이되고 있지 않은 참가자들은 소극적인 상태(즉, 소극적인 참가자들)이다. 회의 리소스(conference resource)와 관련된 오디오 데이터 또는 다른 데이터와 같은 적극적인 참가자들과 관련된 다른 데이터는 하나 이상의 컴퓨팅 디바이스들에 의해 출력될 수 있다.
본 명세서에 제공된 기술들은 실시간 비디오 통신 세션의 어느 참가자들에 대해 관련 비주얼 데이터를, 비디오 회의 도중 임의의 주어진 순간에, 유저 컴퓨팅 디바이스 상에 디스플레이할 것인가를 결정할 수 있다. 참가자들은, 실시간 비주얼 통신 세션에 관한 하나 이상의 참가 특성들에 적어도 부분적으로 기초해서, 적극적인 것으로 선택될 수 있다. 참가 특성들은 참가자들의 칭호(designation)(사회자), 적극적이기를 희망하는 참가자들의 큐(queue), 참가자가 마지막으로 적극적이었던 기간 등과 같은 정보를 포함할 수 있다. 몇몇 예들에서는, 참가자들은, 참가자들 중에서 참가 특성들의 순위(ranking)에 기초해서, 적극적인 것으로 선택된다.
적극적인 참가자들과 관련된 비주얼 데이터의 품질은, 다른 참가자들이 적극적인 것으로 됨에 따라 수정될 수 있다. 예를 들어, 이전에 선택된 적극적인 참가자와 관련이 있는 비주얼 데이터의 품질은, 소극적인 참가자가 적극적이 될 때마다 반복적으로 떨어질 수 있다. 즉, 적극적인 참가자가 적극적인 참가자들 사이에서 선배가 됨에 따라, 보다 선배인 적극적인 참가자와 관련이 있는 출력된 비주얼 데이터의 품질은 저감된다. 이 품질은 더 큰 압축률, 출력된 비주얼 데이터의 감소된 비트 레이트(reduced bit rate), 줄어든 출력 디스플레이 크기 또는, 품질에 관한 다른 측정에 기초할 수 있다.
예시적인 시스템들
도 1은 본 명세서의 하나 이상의 양상에 따른, 컴퓨팅 디바이스와 관련된 유저들(2-1 내지 2-N) 사이의 통신을 가능하게 하는 서버 디바이스(24)에 결합된 하나 이상의 컴퓨팅 디바이스들(4-1 내지 4-N)("컴퓨팅 디바이스들 4" 로 통칭함)을 도시한 블락선도이다. 본 명세서에서 사용되는 컴퓨팅 디바이스들(4)은 유저 컴퓨팅 디바이스들을 칭한다. 유저들(2-1 내지 2-N)은 본 명세서에서는 "유저들(2)"로 통칭된다. 본 명세서에서, "유저들(2)"은 실시간 비주얼 통신 세션의 참가자로 또한 칭해질 수 있다. 서버 디바이스(24)는, 실시간 비주얼 통신 세션의 복수의 참가자들 중에서 일부 세트의 참가자들을 적극적인 참가자가 되는 것으로 선택하고, 컴퓨팅 디바이스(4)에 의해 디스플레이하기 위하여 그 선택된 적극적인 참가자들과 관련된 비주얼 데이터를 제공한다.
컴퓨팅 디바이스(4)의 유저들(2)은, 다른 컴퓨팅 디바이스들을 사용하여, 유저들 상호 간 및 다른 유저들과의 실시간 비주얼 통신 세션에 참여할 수 있다. 예를 들어, 컴퓨팅 디바이스(4-1)는, 서버 디바이스(24)를 통해, 컴퓨팅 디바이스(4-3)와 같은 하나 이상의 다른 컴퓨팅 디바이스들에 연결된다. 추가적인 예들에서는, 다른 수의 컴퓨팅 디바이스들(4-1 내지 4-N)이 실시될 수 있다. 예시의 목적으로, 도 1은 컴퓨팅 디바이스들(4-1 내지 4-N) 사이에 현재 진행중인 실시간 비주얼 통신 세션의 측면에서 논의될 것이다.
몇몇 예들에서는, 컴퓨팅 디바이스(4)는 휴대용 컴퓨팅 디바이스(예를 들어, 모바일폰, 넷북(netbook), 랩탑(laptop), PDA(personal data assistant), 타블렛 디바이스(tablet device), 휴대용 게임 디바이스(portable gaming device), 휴대용 미디어 재생기(portable media player), 전자책 리더기(e-book reader) 또는, 시계)뿐 아니라 비 휴대용 디바이스들(예를 들어, 데스크 탑 컴퓨터 또는, 하나 이상의 프로세서들이 내장되거나 결합된 텔레비전)을 포함하거나 그 일부일 수 있다. 본 명세서에서는 단지 예시의 목적으로 개시된 컴퓨팅 디바이스(4)는 휴대용 또는 이동 디바이스들로서 설명되지만, 본 명세서의 개시된 양상들은 그러한 디바이스들에 한정되는 것으로 고려되지 말아야한다. 다른 컴퓨팅 디바이스들(4)은 다른 타입들로 된 디바이스들이거나 동일한 타입들로 된 디바이스들일 수 있다. 6개의 컴퓨팅 디바이스들(4)이 있는 예에서, 컴퓨팅 디바이스(4-1)는 PDA, 컴퓨팅 디바이스(4-2)은 랩탑, 컴퓨팅 디바이스(4-3)는 모바일폰, 컴퓨팅 디바이스(4-4)는 데스크탑 컴퓨터, 컴퓨팅 디바이스(20-6)는 랩탑, 그리고 컴퓨팅 디바이스(20-6)는 태블릿 디바이스일 수 있다. 본 명세서의 기술들에 따른 실시간 비주얼 통신 세션에 참가하는 컴퓨팅 디바이스들의 타입(type)들의 임의의 다른 수 및 조합들이 고려된다. 컴퓨팅 디바이스들(4)은 일부 기능, 모든 기능 및/또는 다른 컴퓨팅 디바이스들(4)에 의해 제공되는 기능과 다른 기능을 포함할 수 있다.
컴퓨팅 디바이스들(4-1 내지 4-N)은 하나 이상의 입력 디바이스들(10-1 내지 10-N)("입력 디바이스들(10)"로 통칭 됨), 하나 이상의 출력 디바이스들(12-1 내지 12-N)("출력 디바이스들(12)"로 통칭 됨) 및 유저 클라이언트들(6-1 내지 6-N)("유저 클라이언트들(6)"로 통칭 됨)을 각각 포함한다. 유저 클라이언트(6-1 내지 6-N)은 통신 모듈들(8-1- 내지 8-N)("통신 모듈들(8)"로 통칭 됨)을 더 포함한다.
예를 들어, 컴퓨팅 디바이스(2-1)의 하나 이상의 출력 디바이스들(12-1)은 입력 특성들(input capabilities), 스피커 등이 없는 디스플레이 디바이스를 포함할 수 있다. 컴퓨팅 디바이스(2-1)의 하나 이상의 디바이스들(10-1)은 키보드, 포인팅 디바이스(pointing device), 마이크로폰 및 하나 이상의 이미지와 비디오를 레코딩할 수 있는 카메라 등을 포함할 수 있다. 몇몇 예들에서는, 입력 장치(10) 및 출력 장치(12)는 존재 감지 스크린(presence-senstive screen) 또는 터치 스크린과 같은 입/출력 장치에 통합될 수 있다. 즉, 몇몇 예들에서는, 출력 디바이스(12-1)(예를 들어, 출력 디바이스(12-1)은 터치 스크린, 트랙 패드(track pad), 트랙 포인트 등을 포함할 수 있다)는 유저(2-1)로부터 터치 입력을 수신할 수 있는 디스플레이 디바이스일 수 있다. 유저(2-1)는, 예를 들어, 출력 디바이스(4) 상에 터치 입력을 실행함으로써, 출력 디바이스(12)와 상호작용(interact)할 수 있다. 컴퓨팅 디바이스(2)의 일 예는 하기 논의된 도 2에서 충분히 더 설명되고 논의된다.
서버 디바이스(24)는 하나 이상의 컴퓨팅 디바이스들일 수 있고 멀티 프로세서들(multiple processors)을 포함할 수 있다. 서버 디바이스(24) 내에 하나 이상의 컴퓨팅 디바이스들은 서버 컴퓨팅 디바이스들일 수 있다. 서버 디바이스(24) 상에 실행되는 소프트웨어는 단일 디바이스 상에 실행될 수 있거나 멀티 디바이스들(예를 들어, 분산(distributed) 또는 병렬(parallel) 프로그램으로서) 상에 실행될 수 있다. 도 1에 나타나 있듯이, 서버 디바이스(24)는 통신 서버(26) 및 비디오 통신 세션(32)을 포함한다. 각각의 컴퓨팅 디바이스들(4) 및 서버 디바이스(24)는 통신 채널(14-1 내지 14-N)(여기서는 "통신 채널들(14)"로 통칭 됨)에 의해 동작적으로 결합(operatively coupled)될 수 있다. 통신채널들(14)는, 통신 데이터(40)을 송신 및 수신할 수 있는 유선 또는 무선 통신 채널들일 수 있다. 통신 채널들(14)의 예들은 3G 무선 네트워크 또는 인터넷 상으로 TCP/IP(Transmission Control Protocol and/or Internet Protocol) 네트워크 연결, 인터넷과 같은 광역 네트워크(wide-area network), 로컬 영역 네트워크(local-area network: LAN), 기업 네트워크, 무선 네트워크, 셀룰라 네트워크, 텔레포니(telephony) 네트워크, 수도권(metropolitan area) 네트워크(예를 들어, 와이파이, WAN(wide area network) 또는, 와이맥스(WiMAX), 하나 이상의 다른 타입의 네트워크들 또는, 둘 이상의 다른 타입들의 네트워크들의 조합(예를 들어, 셀룰라 네트워크 및 인터넷의 조합)을 포함할 수 있다.
컴퓨팅 디바이스들(4)은 통신 채널들(14) 상의 하나 이상의 네트워크 인터페이스들을 통해 서버 디바이스(24)에 접속된다. 컴퓨팅 디바이스들(4-1 내지 4-N)은통신 채널들(14)를 통해 서버 디바이스(24)로부터 데이터를 수신하거나 송신할 수 있다. 서버(24)는 임의의 여러 다른 타입들의 네트워크 디바이스들이 될 수 있고 하나 이상의 프로세서들을 포함한다. 예를 들어, 서버(24)는 종래의 웹서버, 전문화된 미디어 서버, 피어 투 피어(peer to peer)방식으로 동작하는 PC 또는, 다른 타입의 네트워크 디바이스가 될 수 있다. 다른 예에서, 서버 디바이스(24)는 본 명세서의 일 양상에 따른 회의 통화 능력들(conference call capabilities)을 제공할 수 있다. 예를 들어, 서버 디바이스(24)는 컴퓨팅 디바이스들(4-1 내지 4-N) 사이의 N 방향(N-way) 비디오 회의를 운영할 수 있다.
일 예로, 컴퓨팅 디바이스들(4)은 실시간 스트리밍될 수 있는 통신 데이터를 교환한다. 몇몇 예들에서는, 통신 데이터(40)는 비주얼 데이터 및 오디오 데이터를 포함할 수 있다. 비주얼 데이터는 디스플레이 디바이스 상에 시각적으로 나타날 수 있는 임의의 데이터일 수 있다. 비주얼 데이터는 하나 이상의 정지 이미지들(still images), 비디오, 문서, 비주얼 프리젠테이션(visual presentation) 등을 포함할 수 있다. 일 예로, 비주얼 데이터는 하나 이상의 실시간 비디오 자료들(feeds)일 수 있다. 본 명세서에 기재된 바와 같이, 비주얼 데이터는 복수의 비주얼 데이터 신호들을 포함할 수 있다. 몇몇 예들에서는, 비주얼 데이터 신호들은 참가자와 관련되어 있을 수 있다. 몇몇 예들에서는, 각각의 컴퓨팅 디바이스(4)는 통신 데이터(40)의 일부로서 비주얼 데이터 신호를 제공한다.
일 예로, 통신 데이터(40)는 하나 이상의 참가자들로부터의 오디오 자료들을 포함할 수 있다. 몇몇 예들에서, 적어도 통신 데이터(40)는 참가자의 연설(예를 들어, 컴퓨팅 디바이스(4-2)를 사용하는 참가자가 말을 하고 있을 수 있다)을 포함할 수 있다. 본 명세서에 기재된 바와 같이, 통신 데이터(40)는 복수의 오디오 데이터 신호들을 포함할 수 있다. 몇몇 예들에서는, 오디오 데이터 신호들은 참가자와 관련되어 있을 수 있다. 몇몇 예들에서는, 각각의 컴퓨팅 디바이스(4)는 통신 데이터(40)의 일부로서 오디오 데이터 신호를 제공한다.
몇몇 예들에서는, 통신 데이터(40)는 다른 채널들(14)을 통해 컴퓨팅 디바이스들(4) 사이에서 전송될 수 있다. 일 예로, 통신 데이터(40)는 "IETF"(Internet Engineering Task Force)에 의해 개발된 실시간 전송 프로토콜("RTP": Real-time Transport Protocol)표준을 사용하여 전송될 수 있다. RTP(실시간 전송 프로토콜)를 사용한 예들에서, 통신 데이터(40)의 비주얼 데이터는 H.263 or H.264와 같은 포맷을 가질 수 있다. 다른 예들에서는, 다른 프로토콜들 또는 포맷들이 사용되었다. 다른 예들에서는, 통신 데이터(40)의 일부 또는 전부는, 예를 들어, "보안 실시간 전송 프로토콜"(SRTP: Secure Real-time Transport Protocol) 또는, 임의의 다른 "암호화된 전송 프로토콜"(encrypted transfer protocol)을 사용하여 암호화되어 전송될 수 있다.
컴퓨팅 디바이스들(4)은 다른 컴퓨팅 디바이스들(4)에 연결될 수 있거나, 서버 디바이스(24)를 통해서 임의의 다른 숫자의 컴퓨팅 디바이스들에 연결될 수 있다. 컴퓨팅 디바이스들(4)은 상호간에 직접 연결된다. 즉, 컴퓨팅 디바이스들(4)은 직접 또는 네트워크를 통해서 피어 투 피어 방식으로 서로 연결될 수 있다. 피어 투 피어 연결은 피어간(예를 들어, 제 1의 컴퓨터(4-1)와 제 2의 컴퓨터(4-2))의 과제(tasks) 또는 작업량(workloads)을, 서버(예를 들어, 서버(24))에 의한 중앙집중식 중재(centralized coordination) 없이, 분할하는 네트워크 연결일 수 있다. 컴퓨팅 디바이스들(4-1 내지 4-2)은 피어 투 피어 연결을 통해 통신 데이터(40)와 의사소통(exchange communication) 할 수 있습니다. 다른 예들에서는, 컴퓨팅 디바이스들(4)의 임의의 조합은 피어 투 피어 방식으로 통신할 수 있습니다.
본 명세서에 기재된 바와 같이, 글자 N은 예들 간에 서로 다른 양의 정수(positive integer)를 나타낸다. 즉, 일 예로, N은 컴퓨팅 디바이스들(4)에 대해 20, 유저들(2)에 대해 22, 통신 채널들(14)에 대해서는 10 이 될 수 있다.
컴퓨팅 디바이스들(4)은 컴퓨팅 디바이스들(4)과 관련된 사용자들(2) 사이에 통신을 가능하게 하는 실시간 비디오 통신 세션(32)에 동작적으로 결합되어 있다. 본 명세서에 기재된 시스템들과 기술들은 회의 능력들을 지원하지만, 도 1은, 설명의 목적으로만, 컴퓨팅 디바이스들(4-1 내지 4-2) 사이에 실시간 비디오 통신의 측면에서 설명될 것이다. 하지만, 본 명세서에 따라 설명된 기술들과 예들은 둘 이상의 참가자들로 된 임의의 수를 가진 통신에 적용됨을 이해해야한다. 또한, 설명의 목적으로만, 본 명세서은 각 컴퓨팅 디바이스(4) 각각에 대해 단일 참가자(2)(예를 들어, 개인)가 있다는 뜻에서 참가자들이라고 칭한다. 그러나 각 컴퓨팅 디바이스들(4) 각각에 대한 한 명의 참가자 유저(2)보다 더 많을 수 있음을 이해해야한다. 다른 예들에서는, 컴퓨팅 디바이스들(4)은 유저(2) 없이 비디오 회의에 참여될 수 있다.
본 명세서에서는, 각각의 컴퓨팅 디바이스들(4)은, 설명의 목적으로만, 단일 오디오 또는 비디오 자료를 전송하는 것으로 또한 설명한다. 그러나 각각의 컴퓨팅 디바이스들(4)로부터 하나의 오디오 또는 비디오 자료보다 더 많이 나올 수 있음을 알아야한다. 예를 들어, 비디오 회의에 참석하기 위하여, 하나 이상의 유저(2)가, 예를 들어, 컴퓨팅 디바이스(4-3)와 같은 단일 컴퓨팅 디바이스(4)를 사용중일 수 있다. 그러한 예에서, 컴퓨팅 디바이스(4-3)는 하나 이상의 입력 디바이스들(10-3)(예를 들어, 두 개의 마이크로 폰 및 두 대의 카메라)을 포함할 수 있다. 그러한 예에서, 본 명세서에 설명된 기술들이, 마치 별도의 컴퓨팅 디바이스들(4)로부터 온 것처럼, 추가적인 오디오 또는 비디오 자료들에 적용될 수 있다.
도 1에서, 컴퓨팅 디바이스들(4)은, 비디오 통신 세션(32)으로 칭해지는 실시간 비디오 통신을 구축했다. 유저(2-1)는 비디오 통신 세션(32)에 참가하는 참가자로서 제 1의 컴퓨팅 디바이스(4-1)를 동작시키고, 참가자 또는 유저(2-1)로 상호 교환할 수 있게 칭한다. 유사하게, 설명의 목적으로만 기재된 세 명의 추가적인 참가자들은 컴퓨팅 디바이스들(4-2 내지 4-N) 중의 하나를 동작한다. 상기 설명된 바와 같이, 다른 예들에서는, 참가자들의 다른 숫자들 및 컴퓨팅 디바이스들(4)의 다른 숫자들은 실시간 비디오 통신 세션(32)에 참여될 수 있다.
도 1의 컴퓨팅 디바이스들(4)은 유저 클라이언트(6)을 포함할 수 있다. 몇몇 예들에서, 유저 클라이언트(6)는 여기에 설명된 기능을 제공하는 모바일 및 데스크 탑 컴퓨터 애플리케이션들일 수 있다. 유저 클라이언트들(6)은 도 1에 있는 통신 모듈들(8)을 포함할 수 있다. 유저 클라이어트들(6)은 오디오, 비디오, 텍스트 또는 다른 정보를 비디오 통신 세션(32)과 결합된 다른 유저 클라이언트들 및 에이전트 클라이언트(agent clients)과 상호 교환할 수 있다. 통신 모듈(8)은 컴퓨팅 디바이스들(4)로 하여금 그래픽 유저 인터페이스들을 디스플레이하게 할 수 있다. 예를 들어, 통신 모듈(8-1)은 출력 디바이스(12-1)로 하여금 GUI(16)를 디스플레이할 수 있게 한다.
통신 모듈(8)은 유저 클라이언트(6)가 하나 이상의 비디오 통신 세션들(예를 들어, 비디오 통신 세션(32))에 결합 되게 할 수 있게 하는 기능을 더 포함할 수 있다. 둘 이상의 컴퓨팅 디바이스들(예를 들어, 컴퓨팅 디바이스(4-1) 및 컴퓨팅 디바이스(4-3))은, 컴퓨팅 디바이스들 사이의 통신이 가능하도록 동일한 비디오 통신 세션(32)에 합류할 수 있다.
본 명세서에 걸쳐서 설명된 바와 같이, 유저 또는 참가자와 관련이 있는 컴퓨팅 디바이스의 유저 또는 에이전트 클라이언트가 서버 디바이스 및/또는 다른 컴퓨팅 디바이스 상에 실행하는 통신 서버에 결합 할(예를 들어,연결될) 때, 유저 또는 참가자는 비디오 통신 세션에 합류할 수 있다. 몇몇 예들에서, 컴퓨팅 디바이스(4) 상에 실행하는 유저 클라이언트(6)는, 서버 디바이스(24) 및/또는 컴퓨팅 디바이스(4) 상에 실행하는 통신 서버(26)에 의해 운영되는 비디오 통신 세션(32)에 동작적으로 결합됨으로써(operatively coupling to) 비디오 통신 세션(32)에 합류한다.
본 명세서의 몇몇 양상들에서는, 유저 클라이언트들(6)은, 유저들(2)이 여러 사용자들과의 그룹 기반의 멀티미디어 지원 경험(a group-based multimedia support experience)에 참가할 수 있게 할 수 있다. 본 명세서에 추가로 설명된 바와 같이, 다수의 유저 클라이언트들(6)은, 동일하거나 관련된 주제를 토론하기 위해, 비디오 통신 세션(32)에 결합 될 수 있다.
서버 디바이스(24)의 통신 서버(26)는 선택 모듈(34)를 포함할 수 있다. 선택 모듈(34)은, 여러 경우에 있어서, 디스플레이를 제공하기 위해, 컴퓨팅 디바이스들(4)로부터 어떤 비주얼 데이터를 제공될 것인지를 선택하는 능력들을 통신 서버(26)에 제공한다. 예를 들어, 출력 디바이스(12)는 서버 디바이스(24)에 의해 수신된 비주얼 데이터의 서브 셋만 디스플레이할 수 있다. 다른 예들에서는, 통신 서버(26)는 추가적인 능력을 가진 통신 모듈을 더 포함한다.
선택 모듈(34)은 적극적인 참가자들이 될 유저들(2)의 서브 셋을 선택할 수 있다. 적극적인 상태의 참가자는, 컴퓨팅 디바이스들(2)의 출력 디바이스들(12)에 의해 출력되는 참가자와 관련이 있는 비주얼 데이터를 가질 수 있다. 적극적인 참가자들로 선택되지 않은 그러한 참가자들(2)은 소극적인 참가자들이다. 소극적인 참가자들과 관련된 비주얼 데이터는 디스플레이하기 위해 컴퓨팅 디바이스들(2)에 제공되지는 않을 것이다. 선택 모듈(34)은, 하나 이상의 참가 특성들에 기초해서 적극적인 참가자들이 되는 유저들을 선택할 수 있다.
몇몇 예들에서, 유저 클라이언트(6-1)는 출력 디바이스(12-1)로 하여금 GUI(16)을 디스플레이할 수 있게 한다. GUI(16)는 텍스트(18), 비디오 자료(20-1 내지 20-N)("비디오 자료들 20"으로 통칭 됨), 비주얼 데이터(22-1 내지 22-N)("비주얼 데이터 22"로 통칭 됨)와 같은 그래픽 엘리먼트들(elements)를 포함할 수 있다.그래픽 엘리먼트들은, 보다 일반적으로, GUI(16) 내의 출력 디바이스(12-1)에 의해 디스플레이 가능한 임의의 시각적으로 인식 가능한 오브젝트(object)를 포함할 수 있다.
현재의 예에서, 입력 디바이스들(10)은, 비디오 통신 세션(32)에 결합 되어 있는 동안에 비주얼 데이터(22)를 생성한다. 비주얼 데이터(22)는 유저들(2)의 얼굴들의 비디오와 같은 유저들(2)의 비주얼 표현들이 될 수 있다. 다른 예들에서는, 비주얼 데이터(22)는 정지 이미지 또는 이미지들의 그룹(예를 들어, 비디오)일 수 있다. 유저 클라이언트들(6)은 비주얼 표현들을 통신 서버(26)에 보낼 수 있고, 이로써 유저 클라이언트들(6)이 비디오 통신 세션(32)에 결합 되어 있는 것인지를 결정할 수 있다. 결과적으로, 통신 서버(26)는, 적극적인 참가자인 것으로 결정된 유저(2)만의 비주얼 데이터(22)를 유저 클라이언트들(6)에게 비디오 자료로서 보낼 수 있다.
비디오 정보를 교환하는 것에 더하여, 유저 클라이언트들(6)은, 비디오 통신 세션(32)을 통해, 오디오 및 다른 비주얼 정보를 교환할 수 있다. 예를 들어, 마이크로 폰들은, 각각의 컴퓨팅 디바이스들(4)에 있거나 근처에 있는 유저들(2)의 목소리와 같은 사운드를 캡처할 수 있다. 유저 클라이언트들(6)로부터 나오는 사운드에 의해 생성된 오디오 데이터는, 비디오 통신 세션(32)에 결합된 유저 클라이언트들(6)사이에 상호 교환될 수 있다. 예를 들어, 유저(2-2)가 말하는 경우, 입력 디바이스(10-2)는 그 사운드를 수신하고 그것을 오디오 데이터로 변환할 수 있다. 그리고 나서, 유저 클라이언트(6-2)는 오디오 데이터를 통신 서버(26)로 보낼 수 있다.
유저 클라이언트들(6)이 비디오 통신 세션(32)에 결합 됨이 결정될 때 통신 서버(26)는 각각의 유저 클라이언트들(6)에게 오디오 데이터를 보낼 수 있다. 몇몇 예들에서는, 적극적인 참가자들로부터의 오디오 데이터만 출력을 위해서 컴퓨팅 디바이스들(4)에 제공된다. 통신 서버(26)는, 유저 클라이어트(6-2)가 비디오 통신 세션(32)에 결합 되어있다라고 하는 것을 결정할 수 있다. 선택 모듈(34)은 유저(2-2)가 적극적인 유저인지에 대해 결정할 수 있다. 유저(2-2)가 적극적인 유저인 경우, 통신 서버(26)는 유저 클라이언트(6-2)로부터 다른 유저 클라이언트들(6)에게로 오디오 데이터를 제공한다. 그 오디오 데이터를 받은 후, 유저 클라이언트들(6)은 출력 디바이스들(컴퓨팅 디바이스들(4)의 스피커들)로 하여금, 오디오 데이터에 적어도 부분적으로 기초하여 사운드를 출력하게 한다. 또 다른 예들에서는, 실시간 인스턴트 메세지들(instant messages)과 같은 텍스트 또는 파일들은, 유사한 기술들을 사용하여 유저 클라이언트들 사이에 상호 교환될 수 있다. 다른 예들에서, 비디오 통신 세션(32)에 결합된 컴퓨팅 디바이스(4)는, 컴퓨팅 디바이스(4)에 의해 생성된 GUI(그래픽 유저 인터페이스)의 일부 또는 전부의 그래픽 표현을 생성한다. 그리고 나서, 그래픽 유저 인터페이스는, 비디오 통신 세션(32)에 결합된 컴퓨팅 디바이스들(4)과 공유할 수 있으므로, 다른 컴퓨팅 디바이스들(4)이 GUI(그래픽 유저 인터페이스)의 그래픽 표현을 디스플레이할 수 있게 한다.
도 1의 통신 서버(26)는 비디오 통신 세션(32) 내에 적극적인 참가자들이 있을 수 있게 하는 하나 이상의 동작들을 수행할 수 있다. 도 1에 표시된 바와 같이, 서버 디바이스(24)는 통신 서버(26)을 포함한다. 통신 디바이스(26)의 예들은 PC, 랩탑 컴퓨터, 휴대용 컴퓨터(handheld computer), 워크 스테이션, 데이터 저장 시스템, 수퍼 컴퓨터 또는, 메인프레임 컴퓨터(mainframe computer)를 포함할 수 있다. 통신 서버(26)는 비디오 통신 세션(32)과 같은 비디오 통신 세션들을 생성하고, 운영하고, 그리고 종료할 수 있다. 몇몇 예들에서는, 통신 서버(26)는, 본 명세서에 기재된 동작을 수행하는 서버 디바이스(24)와 같은 하나 이상의 컴퓨팅 장치들에서 실행되는 하나 이상의 모듈을 포함할 수 있다.
도 1에 보는 바와 같이, 통신 서버(26)는 세션 모듈(30), 비디오 통신 세션(32), 및 선택 모듈(34)과 같은 컴포넌트들을 포함한다. 통신 서버(26)는 참가자 프로파일 데이터 스토어(participant profile datastore)(36) 및 참가자 상태 데이터 스토어(participant status datastore)(38)와 같은 컴포넌트들을 포함한다. 통신 서버(26)의 컴포넌트들은 물리적으로, 통신적으로 및/또는, 동작적으로 통신 채널(46)에 결합 될 수 있다. 통신 채널(46)의 예들은 시스템 버스, 프로세스간 통신 데이터 구조들 및/또는 네트워크 연결을 포함할 수 있다.
본 명세서의 하나 이상의 기술에 따른, 적극적인 참가자들이 될 유저들(2)의 세트를 선택하기 위해, 선택 모듈(34)은 얼마나 많은 적극적인 참가자들이 비디오 통신 세션(32)을 지원(support)할 것인지를 결정할 수 있다. 즉, 선택 모듈(34)은 대역폭과 프로세싱 파워(processing power)와 같은 네트워크 및 컴퓨팅 리소스들에 적어도 부분적으로 기초하여 적극적인 참가자들의 임계 수를 결정할 수 있다. 오디오와는 반대로, 비디오 신호들은 많은 시스템 리소스들을 소모하기 때문에, 네트워크 대역폭 및 컴퓨팅 파워 중의 적어도 하나에 대한 제약은 비디오 통신 세션에 참가하는, 제대로 기능을 하는 참가자 수를 제한한다. 비디오 통신 세션(32)에 합류할 수 있는 유저들(2)의 수를 제한하는 대신, 본 명세서의 기술들은 임의의 수의 유저들(2)이 비디오 통신 세션(32)에 합류하도록 허용한다. 그러나, 적극적인 참가자들의 임계 수가 유저들(2)의 수를 초과하는 경우, 유저들(2)의 일부는 소극적인 참가자들이 될 수 있다.
소극적인 참가자는, 예를 들어, 소극적인 참가자들과 관련된 비주얼 데이터를 비디오 통신 세션(32)에 주지 않고, 비디오 통신 세션(32)을 듣고 볼 수 있다. 몇몇 예들에서는, 소극적인 참가자와 관련이 있는 하나 이상의 오디오 자료들은, 출력을 위해서 컴퓨팅 디바이스들(4)에 제공될 수 있다. 그러나, 다른 예들에서는, 비디오 통신 세션(32) 내의 다른 참가자들에게 말하도록 권한이 부여되지 않을 수도 있다. 예를 들어, 비디오 통신 세션 내의 모든 참가자들이 언제라도 말할 수 있게 하는 것은 바람직하지 않을 수 있다. 그러한 예는, 비디오 통신 세션이 원거리 학습을 위한 가상 교실, TV/온라인 혼용 비디오 호스팅 또는, 적어도 부분적인 인터액티브(interactive) 비디오 회의 환경으로 사용되는 것이 포함할 수 있다.
선택 모듈(34)은 최초에 유저들(2)의 서브 셋(subset)을 적극적인 참가자들로 설정할 수 있다. 최초 서브 셋은, 예를 들어, 비디오 통신 세션(32)에 처음 합류했던 유저들 중에서 적극적인 참가자들(예를 들어, 10명의 적극적인 유저들)의 임계 수와 동일하다. 다른 예에서, 선택 모듈(34)은, 유저(2)의 최초 서브 셋이 다른 방식(예를 들어, 큐)들로 적극적인 참가자들이 되게 하는 것을 결정한다.
몇몇 예들에서는, 선택 모듈(34)은, 비디오 통신 세션(32)에 합류하기 위한컴퓨팅 디바이스들(4)의 식별자(identifier), 컴퓨팅 디바이스들(4)과 관련된 유저들(2)의 식별자 및 컴퓨팅 디바이스들(4)의 능력(예를 들어, 비디오 지원, 오디오 지원 등)과 같은 정보를 수신할 수 있다. 컴퓨팅 디바이스들(4)의 능력은 적극적인 참가자들의 임계 수를 결정하기 위해 사용될 수 있다. 몇몇 예들에서는, 적극적인 참가자들의 임계 수는 각각의 컴퓨팅 디바이스(4)와 동일하다. 다른 예들에서는, 적극적인 참가자들의 임계 수는, 컴퓨팅 디바이스들(4)의 개별적인 환경설정들(preferences) 또는 능력들에 기초하고 있는 컴퓨팅 디바이스들(4) 사이에서 서로 다르다.
선택 모듈(34)은 비디오 통신 세션(32) 전반에 걸쳐서 어떤 사용자들(2)이 적극적인 참가자로 선택되는지를 다이내믹하게(dynamically) 업데이트 할 수 있다. 예를 들어, 선택 모듈(34)은, 하나 이상의 참가 인자들(factors)에 근거하여 유저가 적극적인 참가자가 될지 아닐지에 대해 결정한다. 선택 모듈(34)은, 어느 유저들이 적극적이고 소극적인 상태들에 관련되어야 하는지를 결정하기 위해, PPD(participant profile datastore)(36) 및 PSD(participant status datastore)(38)에 질의할 수 있다.
PPD(36) 및 PSD(38)는, 데이터베이스, 룩업 테이블(lookup tabel), 어레이, 링크된 리스트 등과 같은 정보를 저장하기 위하여, 임의의 적절한 데이터 구조를 포함할 수 있다. 도 1에 나타난 바와 같이, PPD(36)는 각각의 유저(2)와 관련된 정보를 포함할 수 있다. 일 예로, PPD(36)는 서버 디바이스(24)에 결합된 컴퓨팅 디바이스들(4)와 관련된 유저들(2)를 식별하는 유저 식별자들을 포함할 수 있다. PPD(36)는 참가자의 프로파일과 관련된 정보를 포함할 수 있고, 그 정보는 참가자의 신원, 비디오 통신 세션(32)에 참가하는 참가자의 칭호(예를 들어, 교사, 학생, 사회자, 호스트, 프리젠터(presenter) 등), 유저의 지정학적 위치 등을 포함하지만 그것들에 제한되지는 않는다. 추가적인 정보는, 특정 유저(2)의 통계에 관계된 PPD(36)에 포함될 수 있고, 예를 들어, 유저(2)가 얼마나 자주 적극적인 참가자가 되는가 또는 유저(2)는 이전에 참석했던 통신 세션들의 총 분(a total number of minutes) 대비 몇 분간 말하는가에 대한 비율을 포함한다.
PSD(38)는 비디오 통신 세션(32) 동안에 각각의 유저(2)의 상태에 관계하는 정보를 포함할 수 있고, 그러한 정보는, 예를 들어, 각각의 유저(2)가 현재 관련되어 있는 상태(예를 들어, 소극적인 또는 적극적인)를 포함할 수 있다. PSD(38)는,예를 들어, 현재의 비디오 통신 세션(32)에 관계된 정보를 또한 포함할 수 있고, 그러한 정보는, 예를 들어, 적극적인 상태에 관련되기 위해 대기하는 참가자들의 큐에서의 위치, 유저로부터의 오디오 자료(audio feed)가 연설을 포함하는지에 관한 것, 유저가 마지막으로 말했던 이래로 지속기간(duration) 또는, 유저가 얼마나 오랫동안 현재의 관련 상태에 있어왔는지를 포함한다. 예를 들어, 유저와 관련된 상태 지시자(status inidcator)가 유저가 소극적이거나 적극적임을 표시한다. PSD(38)는 유저가 적극적인 참가자 또는 소극적인 참가자가 되기를 희망한다는 지시자를 또한 포함할 수 있다.
PPD(36) 및/또는 PSD(38)는, 몇몇 예들에서, 하나 이상의 원거리 컴퓨팅 디바이스들 상에 포함될 수 있다. PPD(36) 및/또는 PSD(38)는 비디오 통신세션(32) 전반에 걸쳐서 업데이트 될 것이다. 하나 이상의 원거리 컴퓨팅 디바이스들은 PPD(36) 및/또는 PSD(38)에 대해 질의를 실행할 수 있고 선택 모듈(34)에 그 결과를 송신할 수 있다.
세션 모듈(30)은 비디오 통신 세션(32)과 같은 비디오 통신 세션들을 생성하고, 운영하고, 종료할 수 있다. 예를 들어, 비디오 통신 세션이 생성되었을 때, 세션 모듈(30)은 비디오 통신 세션(32)의 사용 가능성을 지시하는 정보를 유지할 수 있다. 세션 모듈(30)은 비디오 통신 세션(32)을 생성하고, 유저 클라이언트들(6)에게 메시지를 송신하여, 이들 각 유저 클라이언트가 비디오 통신 세션(32)에 결합 될 수 있게한다. 일단 접속되면, 유저들(2)은 요청된 토픽(topic)에 관해 통신할 수 있다. 몇몇 예들에서는, 복수의 프로토콜들(multiple protocols)이, 유저 클라이언트들 및 에이전트 클라이언트들을 비디오 통신 세션(32)에 결합시키기 위해, 선택 모듈(34)에 의해 사용될 수 있다. 예를 들어, 제 1의 프로토콜을 사용하여 서버 디바이스(24)에 결합될 있으며, 유저 클라이언트들 및 에이전트 클라이언트들은, 세션 모듈(30)과 선택 모듈(34)이 제 2의 프로토콜을 사용하여 통신할 수 있다. 통신 서버(26)가 상이한 프로토콜들 사이에 통신이 가능하게 하기 위해 프로토콜 변환 기술들(protocol translation techniques)을 적용할 수 있다.
본 명세서에 기재된 비디오 통신 세션은 분명하고 통상적인 의미를 포괄하는 광범위한 용어이고, 하나 이상의 오브젝트를 포함하지만 이에 제한되는 것은 아니며, 상기 오브젝트는 상기 하나 이상의 오브젝트에 결합된 통신 클라이언트들이 정보를 교환 가능하게 하는 하드웨어 의해 저장 및/또는 실행될 수 있다. 하나 이상의 오브젝트는 데이터를 포함하고/거나 본 명세서에 기재된 비디오 통신 세션의 기능을 제공한다. 예를 들어, 비디오 통신 세션(32)는, 다른 무엇보다도 특히, 비디오 통신 세션(32)에 결합된 유저 클라이언트들(6)을 명시하는 데이터를 포함할 수 있다. 비디오 통신 세션(32)은 비디오 통신 세션(32)의 지속기간과 같은 세션 정보, 비디오 통신 세션(32)의 보안 세팅들 및 비디오 통신 세션(32)의 구성을 명시하는 임의의 다른 정보들과 같은 세션 정보를 더 포함할 수 있다. 통신 서버(26)는 비디오 통신 세션(32)에 결합된 유저 클라이언트들(6)로부터 정보를 송신 및 수신할 수 있으므로, 비디오 통신 세션에 참석하는 유저들이 정보를 교환하게 할 수 있다.
본 명세서의 기술은 비디오 통신 세션에 무제한 수의 참가자들이 참석할 수 있게하고, 그럼으로써, 제한된 수의 참가자들을 가진 통신 세션들에 비해 통신 세션의 유용성을 잠재적으로 향상할 수 있다. 본 명세서이 기술들은, 비디오 통신 세션에 결합된 각각의 컴퓨팅 디바이스에 대한 네트워크 능력 및 컴퓨팅 리소스들에 기초해서, 적극적인 참가자들의 상한 임계 수를 또한 선택적으로 결정할 수 있고, 유저들이 그들의 특정 컴퓨팅 디바이스의 리소스를 사용할 수 있게 한다. 이것은 비디오 통신 세션에 결합된 제 2의 컴퓨팅 디바이스보다 더 높은 처리 능력을 가진 제 1의 컴퓨팅 디바이스를 사용하는 참가자로 하여금, 제 2의 컴퓨팅 디바이스에 부담을 주지 않고 제 1의 컴퓨팅 디바이스의 리소스들을 사용하게 한다. 대안적으로, 본 명세서에 기재된 기술들은 비주얼 데이터의 일정한(uniform) 프리젠테이션을 비디오 통신 세션 내의 유저들에게 제공할 수 있다.
또한, 본 명세서의 기술들은 어떤 유저들이 적극적인 참가자들인지를 또한 자동적으로 다이내믹하게 업데이트 할 수 있다. 다른 예들에서는, 어떤 유저들이 적극적인 참가자들인지는 비디오 통신 세션 내의 사회자와 같은 다른 참가자에 의해 수동적으로 업데이트 될 수 있다. 또 다른 예들에서는, 멀티 오디오 및 비디오 자료들을 제공하는 비디오 통신 세션들은 협업과 지식 공유를 향상할 수 있는 풍부한 미디어 환경을 제공할 수 있다. 본 명세서에 기재된 기술들은, 참가자들(p)의 임의의 수치를 허용하지만은, 사용 가능한 시스템 리소스들에 의해 부과된 적극적인 참가자들(q)의 최대 숫자를 여전히 유지한다. 본 기술은 비디오 회의를 q-to-q way 통신으로부터 q-to-p way 통신으로 확장하며, 여기서 q 는 p의 다이내믹 서브 셋(dynamic subset)이다.
예시적인 서버 디바이스
도 2는 본 명세서의 하나 이상의 양상에 따른, 도 1에 나타난 컴퓨팅 디바이스(4)의 일 예의 추가적인 세부사항들을 도시한 블락선도이다. 도 2는 서버 디바이스(24)의 단지 특정한 하나의 예를 도시하고, 서버 디바이스(24)의 다른 다양한 실시 예들은 다른 경우들에 사용될 수 있다. 추가적으로, 하나 이상의 컴퓨팅 디바이스들(4)은 도 2에 나타난 바와 같이 서버 디바이스(24)와 유사할 수 있다.
도 2의 상세한 예에 나타난 바와 같이, 서버 디바이스(24)는 하나 이상의 프로세서들(60), 메모리(62), 네트워크 인터페이스(64), 하나 이상의 스토리지 디바이스들(66), 입력 디바이스(68) 및 출력 디바이스(70)를 포함한다. 서버 디바이스(24)는, 서버 디바이스(24)에 의해 실행 가능한 운영 체제(74)를 또한 포함한다. 서버 디바이스(24)는, 일 예로, 서버 디바이스(24)에 의해 또한 실행 가능한 통신 서버(26)을 더 포함한다. 컴포넌트들(60,62, 64, 66, 68, 70, 74, 76, 26, 30, 32, 34, 36, 38 및 76)은, 컴포넌트들 간의 통신을 위해, 통신 채널들(46 및 72)에 의해 서로 (물리적으로, 통신적으로 및/또는, 동작적으로) 연결될 수 있다.
프로세서들(60)은, 일 예로, 서버 디바이스(24) 내에 실행을 위한 기능 및/또는 프로세스 명령들을 실현하도록 구성되어 있다. 예를 들어, 프로세서들(60)은 메모리(62)에 저장된 명령들 또는 저장 디바이스들(66)에 저장된 명령들을 프로세싱할 수 있다.
메모리(62)는, 일 예로, 동작중에는 서버 디바이스(24) 내에 정보를 저장하도록 구성되어 있다. 메모리(62)는, 몇몇 예들에서는, 컴퓨터 판독 가능한 저장 미디어로 설명되어 있다. 몇몇 예들에서는, 메모리(62)는, 메모리(62)의 주된 목적이 장기적인 저장이 아니라는 의미인 템포러리(Temporary) 메모리이다. 메모리(62)는, 몇몇 예들에서는, 컴퓨터 전원이 꺼지면 저장된 콘텐츠를 유지하지 않는다는 의미인 휘발성 메모리로 설명되어 있다. 휘발성 메모리의 예들은 RAM(random access memories), DRAM(dynamic random access memories), SRAM(static random access memories) 및 당해 기술 분야에 공지된 휘발성 메모리의 다른 형태들을 포함한다. 몇몇 예들에서는, 메모리(62)는 프로세서들(60)에 의한 실행을 위한 프로그램 명령들을 저장하기 위해 사용된다. 메모리(62)는, 프로그램 실행중에 정보를 일시적으로 저장하기 위해, 일 예로, 서버 디바이스(24)(예를 들어, 애플리케이션(76)) 상에 동작하는 소프트웨어 또는 애플리케이션들에 의해 사용된다.
스토리지 디바이스(66), 일 예로, 하나 이상의 컴퓨터 판독 저장 미디어를 또한 포함한다. 스토리지 디바이스(66)은 메모리(62)보다 더 많은 양의 정보를 저장하도록 구성될 수 있다. 스토리지 디바이스(66)는 정보의 장기적인 저장을 위해 더 구성될 수 있다. 몇몇 예들에서, 스토리지 디바이스(66)는 비 휘발성 저장 엘리멘트들(non-volatile storage elements)을 포함한다. 그러한 비 휘발성 저장 엘리먼트들의 예들은 자기 하드 디스크, 광학 디스크, 플로피 디스크, 플래시 메모리 또는, EPROM(electrically programmable memories) 또는 EEPROM(electrically erasable and programmable memories)을 포함한다.
서버 디바이스(24)는, 몇몇 예들에서, 네트워크 인터페이스(64)를 또한 포함한다. 서버 디바이스(24)는, 하나 이상의 무선 네트워크들과 같은 하나 이상의 네트워크들을 통해 외부 장치들과 통신하기 위해, 일 예로, 네트워크 인터페이스(64)를 사용한다. 네트워크 인터페이스(64)는 이더넷 카드(Ethernet card), 광학 트랜시버(optical transceiver), 무선 주파수 트랜시버(radio frequency transceiver) 또는, 정보를 송신 및 수신할 수 있는 임의의 다른 타입의 디바이스와 같은 네트워크 인터페이스일 수 있다. 그러한 네트워크 인터페이스의 다른 예들은 USB 뿐 아니라, 블루투스, 3G 및 와이파이 라디오들(WiFi® radios)을 포함한다. 몇몇 예들에서, 서버 디바이스(24)는, 도 1의 컴퓨팅 디바이스들(4)과 같은 외부 디바이스와 무선 통신하기 위해, 네트워크 인터페이스(64)를 사용한다.
서버 디바이스(24)는, 일 예로, 하나 이상의 입력 디바이스들(68)을 또한 포함한다. 입력 디바이스(68)는, 몇몇 예들에서, 촉각, 오디오 또는, 비디오 피드백을 통해, 유저로부터 입력을 수신하도록 구성된다. 입력 디바이스(68)의 예들은 존재 감지 스크린(presence-sensitive screen), 마우스, 키보드, 음성 응답 시스템, 비디오 카메라, 마이크로 폰 또는 유저로부터의 명령을 감지하기 위한 임의의 다른 타입의 디바이스를 포함한다.
하나 이상의 출력 디바이스들(70)은 서버 디바이스(24)에 또한 포함될 수 있다. 출력 디바이스(70)는, 몇몇 예들에서, 촉각, 오디오 출력 또는, 비디오 출력을 사용하여 유저에게 출력을 제공하도록 구성된다. 출력 디바이스(70)은, 일 예로, 존재 감지 스크린을 포함하고, 사운드 카드, 비디오 그래픽 어댑터 카드(video graphics adapter card) 또는, 신호를 사람이나 기계가 이해할 수 있는 적당한 형태로 변환하기 위한 임의의 다른 타입의 디바이스를 포함한다. 출력 디바이스(70)의 추가적인 다른 예들은 CRT(cathode ray tube)모니터, LCD(liquid crystal display) 또는, 유저에게 인식가능한 출력을 생성할 수 있는 임의의 다른 타입의 디바이스를 포함한다.
서버 디바이스(24)는 운영 체제(74)을 포함할 수 있다. 운영 체제(74)는, 몇몇 예들에서, 서버 디바이스(24)의 컴포넌트들의 동작을 제어한다. 예를 들어, 운영 체제(74)는, 일 예로, 하나 이상의 애플리케이션들(76)(예를 들어, 통신 서버(26))이 프로세서들(60), 메모리(62), 네트워크 인터페이스(64), 스토리지 디바이스(66), 입력 디바이스(68) 및 출력 디바이스(70)와 인터액션(interaction) 하는 것을 용이하게 한다. 도 2에 나타난 바와 같이, 통신 서버(26)는, 도 1에 도시된 라우팅 모듈(routing module)(28), 세션 모듈(30), 비디오 통신 세션(32) 및 선택 모듈(34)를 포함할 수 있다. 애플리케이션(76), 통신 서버(26), 세션 모듈(30), 비디오 통신 세션(32) 및 선택 모듈(34)은 프로그램 명령들 및/또는 서버 디바이스(24)에 의해 실행가능한 데이터를 각각 포함할 수 있다. 예를 들어, 세션 모듈(30) 및 선택 모듈(34)은 서버 디바이스(24) 상에서 실행되는 통신 서버(26)로 하여금 본 명세서에 개시되어 설명된 하나 이상의 동작과 액션들(operations and actions)을 수행하게 하는 동작들을 포함할 수 있다.
본 명세서에 개시된 양상들에 따라서, 선택 모듈(34)은, 통신 세션 내의 복수의 참가자들 중에서, 적극적인 상태와 관련이 있는 하나 이상의 참가자들을 선택한다. 그 선택은 하나 이상의 참가 특성들에 기초할 수 있다.
예시적인 방법
도 3은, 본 명세서에 개시된 하나 이상의 양상에 따라서, 실시간 비주얼 통신 세션 내에 복수의 참가자들 중에서 적극적인 참가자들을 선택하기 위해, 컴퓨팅 디바이스에 의해 수행될 수 있는 예시적인 방법(100)을 도시하는 플로우 차트이다. 실시간 통신 세션은 비디오 회의 또는 다른 비주얼 통신 세션일 수 있다. 방법(100)은, 컴퓨팅 디바이스 상에 디스플레이하기 위해, 어느 비주얼 데이터가 복수의 실시간 통신 세션 참가자들 중에서 둘 이상의 참가자들과 관련된 것인지를 더 결정할 수 있다. 예를 들어, 방법(100)은, 도 1 및 2에 나타난 바와 같이, 컴퓨팅 디바이스들(4) 또는 서버 디바이스(24)에 의해 수행될 수 있다.
방법(100)은, 실시간 비주얼 통신 세션에 관계하고 그리고 복수의 각 참가자들 각각에 대한 참가자 관련된 비주얼 데이터를 디스플레이하기 위한 타당성(desirability)에 관련이 있는 하나 이상의 참가 특성들에 적어도 부분적으로 기초하여, 실시간 비주얼 통신 세션 내의 복수의 참가자들 중에서, 적극적인 상태와 관련이 있는 하나 이상의 각각의 적극적인 참가자들을 선택하는 것을 포함할 수 있고, 선택되지 않았던 하나 이상의 참가자들은 소극적인 상태와 관련이 있는 하나 이상의 각각의 소극적인 참가자들을 포함한다. 참가자와 관련이 있는 비주얼 데이터에 대한 타당성은, 참가 특성들에 의해 결정될 수 있는 참가자의 참가 레벨과 관련될 수 있다. 참가 등급은 등급, 점수 또는 순위(ranking)가 될 수 있다. 일 예로, 방법(100)은 실시간 통신 세션에 참여한 각각의 참가자는 컴퓨팅 디바이스에 대한 참가 등급을 결정한다. 다른 예에서, 방법(100)은, 방법(100)(예를 들어, 컴퓨팅 디바이스(2))을 수행하고 있는 컴퓨팅 디바이스에 의해 수신되는 각각 별도의 비주얼 데이터 신호에 대한 참가 등급을 결정한다.
참가 특성들은, 비디오 회의 중에 참가자와 관련이 있는 비주얼 데이터의 디스플레이에 대한 타당성을 결정하는 것에 관련된 인자들(factors)을 포함할 수 있다. 참가 특성들은 비디오 회의 중인 참가자의 참여를 정량화할 수 있는 품질들을 더 포함할 수 있다. 수치는 참가 특성들의 일부 또는 전부에 할당될 수 있다. 몇몇 예들에서, 참가 등급을 결정하는 것은, 하나 이상의 참가 특성들의 수치의 합계를 내는 것을 포함할 수 있다. 다른 예에서, 참가 등급을 결정하는 것은 참가 특성들의 수치의 평균을 내는 것을 포함할 수 있다. 또한, 참가 등급은 참가 특성들의 가중 평균(weighted average)일 수 있다. 선택 모듈(34)은 다르거나 대략 동일한 가중치들(weights)을 다른 참가 특성들에 할당할 수 있다.
일 예로, 하나 이상의 참가 특성들 중 하나 이상이, 참가자가 이전에 비디오 회의에 있었을 때보다 참가자가 더 적극적으로 참가하고 있음을 나타낼 때, 참가자에 대한 참가 등급은 증가할 수 있다. 예를 들어, 적극적인 참가자는 말하는 것을 포함할 수 있거나, 비디오 회의를 위한 기능(예를 들어, 중재하고 프리젠트 하는 것)을 수행할 수 있다. 마찬가지로, 하나 이상의 참가 특성들 중 하나 이상이, 참가자는 참가자 이전에 비디오 회의에 있었을 때보다 덜 적극적으로 참가하고 있음을 나타낼 때, 참가자에 대한 참가 등급은 감소할 수 있다. 예를 들어, 덜 적극적으로 참가하는 참가자는, 최소한의 기여(minimal contribution)를 하면서, 비디오 회의를 듣거나 보는 사람일 수 있다. 일 예로, 적극적인 참가자가 되는 것은, 참가자가 비디오 회의 프로세스에 관계 되어 있거나, 아니면 그것에 기여하고 있다는 것을 나타낼 수 있다. 대조적으로, 비 적극적인 참가자는, 비디오 회의에서 소극적인 청취자(listener) 또는 관찰자(watcher) 일 수 있다. 본 명세서에 기재된 "긍정적인 참가자 등급"은 선택될 가능성이 더 많아지게 되는 등급을 칭하지만, 그 등급의 임의의 수학적 특성(mathematical property)에 반드시 따르는 것은 아니다.
하나의 예시적인 대화 특성은 비디오 회의 중의 특정 순간에서, 현재 말하고 있는지를 포함할 수 있다. 그 말하는 것(speaking)은 통신 세션에서 출력을 위해 제공되거나 또는 제공되지 않을 수 있다. 참가자가 말할 때, 선택 모듈(34)은 이 특성의 존재를 표시하거나, 그 특성에 값(가령, 양의 값)을 할당할 수 있다. 일 예로, 현재 말하는 임의의 참가자는 복수의 참가자들중에서 가장 높은 등급 또는 랭킹이 주어질 수 있다. 다른 예에서, 대화 특성에 가중치가 할당될 수 있다. 일 예로, 참가 등급은, 참가자가 말을 시작할 때 증가하고, 참가자가 말을 중단할 때 감소한다. 몇몇 예들에서, MRU(most recently used) 알고리즘은 선택모듈(34)에 의해 사용될 수 있다.
다른 예시적인 대화 특성은, 참가자가 비디오 회의에서 특정 칭호(designation)를 가짐을 지정 또는 결정할 수 있다. 예를 들어, 참가자는 비디오 회의에서 편성자(organizer), 리더 또는, 사회자일 수 있다. 일 예로, 회의를 소집한 참가자는, 그 참가자가 다른 식으로 받는 것보다 더 높은 참가 등급이 주어질 수 있다. 다른 예에서, 사회자는, 참가자가 비디오 회의 중에 대부분 또는 언제나 사회자를 볼 수 있게 하기 위해, 높은 참가 등급이 주어질 수 있다. 다른 예에서, 다른 타입의 칭호가 대화 특성으로서 사용될 수 있다.
추가적인 참가 특성들은 참가자가 얼마나 자주 말해왔는가에 대한 고려사항들을 포함할 수 있다. 예를 들어, 대화 특성은 참가자가 말했을 때의 지속 기간을 포함할 수 있다. 일 예로, 그 지속 기간은 참가자가 말을 시작했던 이래로 얼마나 오랫동안 참가자가 말을 계속 해오고 있었는가를 측정한 기간이다. 다른 예들에서, 참가자가 이미 말해온 지속 기간은 컨퍼런스 콜(conference call)의 시작부터 잴 수 있다. 말하기 대화 특성(speaking conversation property)의 지속 기간에 할당된 값은 참가자가 말했던 시간의 증가량에 따라 증가할 수 있다. 대화 특성 값과 말하는 시간의 길이 사이의 양의 상관(positive correlation)은 임의의 수학적인 관계에 기초하고, 선형 또는 대수 관계를 포함할 수 있다. 마찬가지로, 임의의 다른 대화 특성 값은, 적절한 경우, 그 대화 특성이 측정하고 있는 것과 수학적인 관계를 가질 수 있다.
마찬가지로, 다른 대화 특성은, 참가자가 마지막으로 말했던 이래로 지속 기간을 포함할 수 있다. 그러한 예에서, 더 이상 말하지 않는 참가자에 대한 참가 등급은, 그 참가자가 마지막으로 말했던 이래로 지속 기간에 따라 대응하여 감소할 수 있다. 다른 예에서, 참가 등급은, 참가자가 임계 지속 기간(예를 들어, 말하지 않은 시점부터 1분 후)동안에 말을 하지 않았을 때에만, 이전에 말했던 참가자에 대해 줄어들 수 있다.
다른 대화 특성은, 참가자가 현재 상태에 얼마나 오래 관련되어 왔었는가의 지속 기간을 포함할 수 있다. 예를 들어, 적극적인 참가자는 오랜 시간 동안 적극적이 되어 왔을 수 있고, 사회자는, 그 참가자를 소극적이게 하여, 다른 참가자가 적극적인 참가자가 되는 기회를 잡기를 희망할 수 있다. 몇몇 예들에서, 임계 시간 주기(threshold time period)는 참가자와 관련이 있는 상태를 비교하기 위해 사용된다. 참가자가 임계 시간 주기 동안의 상태와 관련되어온 경우에, 액션이 취해질 수 있다. 그 액션은 참가자의 참가 등급을 올리거나, 상태를 변경하거나, 큐에서 참가자를 상승시키는 것을 포함할 수 있다.
다른 대화 특성은 참가자가 말해왔던 지속 기간과 비디오 회의의 총 지속기간의 비율을 결정하는 것을 포함할 수 있다. 일 예로, 참가자가 말을 많이 하면 할수록, 다른 참가자들은, 컴퓨팅 디바이스들 상에 디스플레이된 그 참가자와 관련이 있는 비주얼 데이터를 더 많이 원할 가능성이 많다. 따라서 참가자의 참가 등급은 그 참가자가 비디오 회의 중에 말해왔던 시간의 증가 퍼센트(percent)에 따라 증가할 수 있다.
또 다른 대화 특성은 하나 이상의 다른 참가자들과 관련된 참가자 간의 관계를 포함할 수 있다. 관계는 둘 이상의 참가자들 사이의 소셜 미디어 상태(social media status)에 기초할 수 있다. 예를 들어, 제 1의 참가자가, 소셜 미디어에서 제 2의 참가자와 "친구(friend)" 또는 "좋아요(like)" 상태(status)를 갖고 있는 경우, 제 1 및 2의 참가자들 양자는 서로 증가된 참가 등급을 갖고 있을 수 있다. 다른 예에서, 결정을 하는 참가자(determining paticipant)(즉, 결정을 내리는 특정 컴퓨팅 디바이스의 유저)의 친구인 참가자들만 포지티브(positive) 등급이 주어질 수 있다. 각각의 참가자들의 컴퓨팅 디바이스(4)는, 그들의 개인적인 소셜 그래프 또는 프로파일(즉, 개별적인 친구들의 세트)에 기초하여 다른 참가자들의 다른 세트를 디스플레이할 수 있다.
다른 예에서, 대화 특성은, 참가자가 다른 참가자의 이름을 말했는지에 대한 것을 포함할 수 있다. 예를 들어, 컴퓨팅 디바이스(4)는, 선택 모듈(34)의 일부일 수 있는 스피치 인식 능력들(speech recognition capabilities)을 포함할 수 있다. 통신 데이터(40)는 스피치를 포함하므로, 서버 디바이스(24)는, 참가자가 말한 단어들을 감지할 수 있다. 일 예로, 서버 디바이스(24)는, 참가자가 다른 참가자에게 직접 말을 할 때, 감지할 수 있다. 그러한 예에서, 서버 디바이스(24)가 참가자와 관련이 있는 호칭 또는 다른 식별자를 감지한다면, 선택 모듈(34)은 그 참가자의 참가 등급을 올린다. 이렇게 해서 증가하더라도, 시간이 지남에 따라 제거되거나 아니면 줄어들 수 있다. 참가자와 관련이 있는 식별자는 이름, 유저 네임(username), 로그인 네임(login name), 비디오 회의에서 참가자가 하는 역할(가령, 사회자 또는 프리젠터(presenter) 등) 등일 수 있다. 잠재적인 식별자들은 서버 디바이스(24)(예를 들어 PPD 36)에 의해 액세스 가능한 데이터베이스 내에 저장될 수 있다. 이러한 잠재적인 식별자들은 하나 이상의 참가자들과 링크될 수 있다. 참가자들은, 그들이 원하는 정보가 서버 디바이스(24)에서 제공되고, PPD 36 또는 PSD 38에 저장되기를 희망하는지에 대한 것을 표시하는 보안 세팅(security setting)을 설정할 수 있다.
컴퓨팅 디바이스로부터의 비주얼 데이터의 품질은 또한 대화 특성일 수 있다. 일 예로, 비디오 품질 대화 특성은, 참가자와 관련이 있는 비주얼 데이터의 품질에 기초한 값이 할당된다. 예를 들어, 유저는 참가자로부터의 형편없이 낮은 품질의 비주얼 데이터를 디스플레이하는 것을 원하지 않을 수 있다. 일 예로, 참가자는, 참가자와 관련이 있는 비주얼 데이터가 임계 품질 수준 아래일 경우, 고려 대상으로부터 완전히 제외될 수 있다. 그러한 경우에도, 컴퓨팅 디바이스는 디스플레이되지 않은 참가자의 비주얼 데이터로부터 오디오 데이터를 여전히 출력할 수 있다. 마찬가지로, 상대적으로 좋은 비디오 품질은 상대적으로 낮은 비디오 품질보다 더 높은 등급이 할당된다. 다른 예들에서는, 상대적으로 높은 비디오 품질은 더 낮은 등급이 할당될 수도 있다. 예를 들어, 제한된 처리 능력을 가진 컴퓨팅 디바이스는 상대적으로 고화질의 비디오 데이터를 디스플레이하기를 원하지 않을 수 있다.
다른 대화 특성은, 참가자가 회의 리소스를 디스플레이하거나 프리젠트 하고 있는지에 대한 것일 수 있다. 회의 리소스들의 예들은 화이트보드 프로그램(whiteboard program) 사용하는 것, 프리젠테이션을 프리젠팅(presenting) 하는 것, 문서들을 공유하는 것 또는, 스크린 공유하는 것 등 포함할 수 있다. 몇몇 예들에서, 회의 리소스는 디스플레이 상에 디스플레이될 수 있다. 다른 예들에서는, 회의 리소스는, 회의 리소스(예를 들어, 참가자는 회의 리소스 이름을 언급한다)의 식별자의 감지시에 디스플레이될 수 있다.
다른 대화 특성은 유저와 다른 참가자 사이의 이메일 스레드(threads)에 기초할 수 있다. 예를 들어, 유저와 참가자가 서로 최근에 이메일을 주고 받았으면, 참가자에 대한 참가 등급은 증가할 수 있다. 비디오 회의 애플리케이션은 비디오 회의 애플리케이션과 관련된 하나 이상의 이메일 계정들로부터 데이터를 수신할 수 있다. 그 데이터는, 유저가 비디오 회의 내의 임의의 참가자들에게 이메일을 보냈는지에 관련된 정보를 포함할 수 있다. 또한, 비디오 회의 애플리케이션은, 비디오 회의에서 참가자들 사이에 오고 간 이메일들의 본문에 액세스(access)할 수 있다. 참가자의 참가 등급은 참가자와 유저 사이의 이메일에 기초하여 변경될 수 있다. 비디오 회의 중에 참가자와 유저 간에 이메일이 전송되었을 때, 참가자에 대한 참가자 등급은 증가할 수 있다.
다른 예에서, 유저가 뮤트(mute) 했거나 아니면 참가자를 막았다면, 그 참가자에 대한 참가 등급은 그 유저에 대해서 감소할 수 있다. 만일 유저가 뮤트하지 않거나 더 이상 참가자를 막지 않는다면, 참가자의 참가 등급은 증가할 수 있다. 다른 예에서, 상대적으로 빨리 말하는 참가자에 대한 참가 등급은 감소할 수 있다.이것은, 어느 참가자가 현재 말하고 있는지에 기초해서 참가자들 간의 빠른 스위칭(switching)에 대한 가능성을 줄이기 위해서 실행될 수 있다. 마찬가지로, 몇몇 예들에서, 새롭게 선택된 참가자가 이전에 선택된 참가자를 교체하기 전에 시간 지연이 패스(pass)될 수 있다. 빠른 스위칭의 확률을 줄이기 위해, 이 지연 기간은 더해질 수 있다. 예를 들어, 새롭게 선택된 참가자에 대한 참가 등급이 감소하는 경우, 그 새롭게 선택된 참가자는 지연 기간 안에 더 이상 선택되지 않을 것이므로, 그 새롭게 선택된 참가자와 관련이 있는 비주얼 데이터는 디스플레이되지 않을 수 있다. 다른 예들에서, 다른 참가 특성들은 빠른 스위칭의 발생을 줄이기 위해 사용된다.
이와 유사하게, 다른 대화 특성은 참가자의 감지를 포함할 수 있거나 그렇지 않으면, 비디오 카메라에 캡처 된 이미지를 변경과 같은 것을 함으로써 다른 참가자의 관심을 끌 수 있다. 다른 예에서, 대화 특성은, 카메라를 통해 참가자의 움직임을 감지하는 것을 포함할 수 있다. 예를 들어, 비디오 회의에 참가한 다른 참가자들의 주위를 끌기 위해, 참가자는 손을 흔드는 것과 같은 제스처(gesture)를 행할 수 있다.
또 다른 대화 특성은, 참가자가 하나 이상의 다른 참가자들에 의해 선택되었는지에 대한 것을 포함할 수 있다. 예를 들어, 컴퓨팅 디바이스(4) 상에 디스플레이된 참가자와 관련이 있는 비주얼 데이터를 가지기 위하여, 유저(2)는 참가자를 참가자 리스트로부터 선택할 수 있다. 일 예로, 유저(2)는 GUI(16) 상에 참가자와 관련이 있는 비주얼 데이터의 그래픽 표시를 터치하고, 컴퓨팅 디바이스(4)는, 그 참가자를 선택하기 위해서 터치 스크린을 포함한다.
또한, 참가 특성은 각각의 컴퓨팅 디바이스가 동작하고 있는 보기 모드(viewing mode)(예를 들어, 꽉 찬 스크린 모드(full screen mode))를 포함할 수 있다. 다른 대화 특성은 참가자가 스크린을 프리젠트 하거나 공유하고 있는지 또는, 스크린을 프리젠트 하거나 공유하려고 시도하고 있는지에 대한 것을 포함할 수 있다. 또한, 제 1의 참가자가 제 2의 참가자에 대해 직접 리포트 하는 관계라면(예를 들어, 상사와 직원의 관계라면), 제 2의 참가자가 말할 때, 제 2의 참가자는 제 1의 참가자를 교체할 수 있다. 또한, 캘린더 애플리케이션과 같은 다른 애플리케이션으로부터의 정보는, 참가 특성들의 일부를 결정하기 위하여, 선택 모듈(34)에 의해 사용될 수 있다.
다른 대화 특성은 어느 참가자들이 공유된 리소스를 보고 있는지에 대한 것을 포함할 수 있다. 예를 들어, 회의 애플리케이션은, 유저들이 "비디오 함께 보기"와 같은 리소스를 선택적으로 공유하기 위한 능력을 포함할 수 있다. 참가자들은, 어느 참가자들이 비디오를 보고 있는가에 기초해서 선택될 수 있다. 참가자는, 본인이 비디오를 또한 볼 수 있게 선택한 경우라면, 비디오를 보고 있는 유저에 대해 보다 높은 참가 등급을 수신할 수 있다. 예를 들어, 회의의 참석자 전부가 비디오를 보고 선택되는 것은 아니고, 비디오를 보는 그 사람들만 유저와 관련된 컴퓨팅 디바이스 상에 디스플레이될 수 있다.
몇몇 경우들에 있어서, 비디오 회의에 참석한 일부 참가자들은 비디오 회의에 참가한 참가자들의 서브 셋 사이에 추가적인 통신을 할 수 있다. 예를 들어, 비디오 회의에 참가한 일부 참가자들은 사적이거나 그룹 문자 채팅에 또한 참여할 수 있다. 다른 대화 특성은, 유저가 다른 참가자들과의 추가적인 통신에 참여하고 있는지에 대한 것을 포함할 수 있다. 만약 그럴 경우, 참가자는, 추가적인 통신으로 인해 보다 유저에 대한 높은 참가 등급을 수신할 수 있다. 예를 들어, 유저가 비디오 회의에 참가하는 참가자와 문자 채팅을 하고 있다면, 그 참가자는 유저가 사용하는 컴퓨팅 디바이스 상에 디스플레이 된다. 또한, 참가자들의 디스플레이는, 유저가 채팅을 나누는 참가자들에 기초해서 구성될 수 있다. 예를 들어, 비디오 회의에서, 유저가 채팅을 나누는 참가자는 유저가 채팅을 나누지 않는 그 참가자들보다 더 큰 이미지로 디스플레이될 수 있다.
참가 등급들은 각 참가자 각각에 대한 개별적으로 결정될 수 있다. 즉, 각각의 유저에 있어서, 그 참가자 및 다른 참가자들에 대한 참가 등급들은 다른 유저의 참가 등급들과 독립적으로 결정될 수 있다. 이러한 별도의 결정들은, 비디오 회의에서 결정하는 참가자 및 다른 참가자들 사이의 관계의 특정 양상들에 기초할 수 있다. 그러한 관계들은, 그 결정하는 참가자(determining participant)가 다른 참가자들과 친구 관계인지, 취업 또는 가족관계의 유무 또는, 결정하는 참가자가 그 참가자를 이미 막았는지 등과 같은 인자들(factors)을 포함할 수 있다. 이렇게 함으로써, 컴퓨팅 디바이스들(4)과 같은 컴퓨팅 디바이스들의 다른 유저들이, 다른 유저들 또는 참가자들과 비교하여, 복수의 참가자들의 다른 세트들을 볼 수 있다. 다른 예에서, 각각의 참가자에 대한 참가 등급들은, 유저들 사이에서(예를 들어, 모든 참가자들 사이에서) 동일할 수 있다. 다른 예들에서, 일부 결정하는 참가자들은 일부 동일한 참가 등급들을 공유하거나 가질 수 있다.
참가 등급들은 알고리즘에 기초해서 결정될 수 있다. 몇몇 예들에서, 알고리즘은 가중치가 부여될 수 있으므로 일부 참가 특성들은 다른 것들보다 더 가중치가 부여된다. 예를 들면, 참가 등급은, 참가 특성에 할당된 값을 함께 추가함으로써 결정될 수 있다. 참가 특성의 값들은 계수들에 의해 곱해질 수 있다.
예를 들어, 참가자에 대한 참가 등급은, 유저가 참가자와 친구인지(예를 들어, 좋아요(like)_인자(factor)), 참가자는 얼마나 자주 말하는지에 관한 비율(a ratio of how often the participant is speaking) 및 참가자는 공유 문서들에 대한 총 편집 수 대비 공유 문서들의 편집 횟수의 비율(a ratio of how many times the participant has edited shared documents over the total number of edits to the shared documents)에 기초할 수 있다. 참가 등급을 결정하기 위한 그러한 등식은 등식 1과 같이 나타날 수 있다:
Figure pct00001
등식 1에 표시된 바와 같이, A, B 및 C 는 다른 인자들을 가중(weigh)하기 위해 사용된 계수들이다. 계수들의 값은 유저들 각각에 대해 서로 다를 수 있고 특정 대화 인자가 유저에게 얼마나 중요한가에 기초할 수 있다. 또한, 하나의 유저는 유저들 각각에 대한 서로 다른 계수들을 가질 수 있다. 등식 1은 3명의 참가 특성들을 보여주는 예시적인 등식이다. 그러나, 참가 등급들은, 다른 참가 특성들에 기초하여 추가적인 인자들을 또한 포함할 수 있다.
몇몇 예들에서, 참가자에 대한 특정 대화 특성의 특정 품질 또는 존재는 그 참가자와 관련이 있는 비주얼 데이터의 선택의 자동적인 결과가 된다. 예를 들면, 현재 말하고 있는 참가자는 그 참가자와 관련이 있는 비주얼 데이터를 디스플레이하게 항상 선택될 수 있다. 다른 예로서, 칭호(designation)과 같은 대화 특성의 존재는 그 칭호(예를 들어, 미팅 편성자, 사회자 또는, 프리젠터)을 받은 참가자를 선택하기 위해 사용될 수 있다. 다른 예에서, 결정하는 참가자와 친구인 참가자들만 선택된다. 또 다른 예에서, 참가자는, 본인과 관련된 식별자의 감지에 응답하는 둘 이상의 선택된 참가자들 중의 하나로 선택될 수 있다.
만일, 둘 이상의 참가자들이 동일한 참가 등급을 가지고 있고, 양 참가자들과 관련된 비주얼 데이터가 적극적인 참가자들의 임계 수에 이미 도달했기 때문에 적극적이지 않으면, 하나의 참가자는 다른 인자에 기초해서 선택될 수 있다. 일 예로, 동점의 참가자 중에서 랜덤하게 참가자가 선정될 수 있다. 다른 예에서, 선택된 대화 특성의 존재 또는 부재에 따라서-그렇지 않으면 동률의 참가 등급이 정해지는-참가등급이 차이나게 할 수 있다. 다른 예들에서는, 적극적인 참가자들을 선택하기 위해, 동점의 균형을 깨는 다른 방법들이 적용된다.
비디오 회의가 발전함에 따라, 비디오 회의 전반에 걸쳐서, 각각의 복수의 참가자들에 대한 각각의 참가 등급은 업데이트될 수 있다. 일 예로, 참가 등급들은 계속해서 업데이트 된다. 다른 예들에서는, 참가 등급들은 간헐적으로 업데이트 되거나 일정한 간격을 두고 업데이트 된다. 마찬가지로, 선택 프로세스는, 비디오 회의 전반에 걸쳐서 정기적으로, 간헐적으로 또는, 계속해서 또한 수행될 수 있다. 몇몇 예들에서, 선택 프로세스는 선택 등급들이 업데이트 될 때 각각에 대해 수행될 수 있다.
다른 선택 옵션들은 라운드 로빈 프로세스(round-robin process)를 포함한다. 예를 들어, q 적극적인 참가자들의 슬라이딩 창(sliding window)은 p 총 참가자들 주위를 상수 또는 변수의 속도로 원을 그리면서 돈다. 슬라이딩 창에 떨어지는 참가자들만 적극적인 참가자들이 될 것이다.
다른 옵션은 큐잉(queuing)을 포함한다. 참가자들은 인터액트(예를 들어, 인터액트 버튼을 선택함으로써)하기 위한 의도(intention)를 등록하고, 선입선출(first-in-first-out) 방식으로 큐 안에 있다. 큐에서 최고의 q 참가자들은 적극적인 참가자들이 된다. 이전에 적극적인 유저들은, 시간 점유율 기준(예를 들어, 현재의 사용할당분을 초과하는 유저는 뒤쪽 큐에 놓여 지고 최고 q 유저들 가운데 들어가기 위해 다음 차례를 기다린다) 또는 다른 방식으로, 등록 취소(인터액트 버튼을 토글링함)를 통해 아이들(idle)이 될 수 있다.
다른 예들에서는, 참가 특성은 유저 투표로 될 수 있다. 적극적인 참가자들은, 다른 참가자들에 의한 투표 프로세스에 의해 선택될 수 있다. 비 적극적인 참가자는 다른 참가자들에 의해 많이 요청되거나 지지 되는 경우, 그 참가자는, 아주 인기가 없거나 지지율이 낮은 적극적인 참가자를 대체함으로써 적극적이 될 수 있다. 통신 세션의 포맷이, 예를 들어, 토론일 때, 이것은 바람직할 수 있다.
대안적인 예에 있어서, 참가자는, 그들이 통신 세션에 합류할 때 또는, 통신 세션 동안 임의의 다른 시간에, 적극적인 참가자로 간주 되기를 원하는지를 지정(designate)할 수 있다. 예를 들어, 참가자는 단지 듣기만 하기를 원할 수 있고, 그래서 적극적인 참가로 간주 되지 않는 옵션을 선택한다.
방법(100)은 실시간 비주얼 통신 세션에 참가하는 복수의 참가자들 중에서, 실시간 비주얼 통신 세션에 관계하고 그리고 복수의 참가자들 각각에 대한 참가자들 관련된 비주얼 데이터를 디스플레이하기 위한 타당성에 관련이 있는 하나 이상의 참가 특성들에 적어도 부분적으로 기초하여 적극적인 상태와 각각 관련되는 하나 이상의 각각의 적극적인 참가자들을 선택하는 단계를 더 포함할 수 있고, 선택되지 않았던 하나 이상의 각각의 참가자들은 소극적인 상태(104)와 관련된 하나 이상의 각각의 소극적인 참가자를 포함한다.
방법(100)은, 디스플레이하기 위해, 컴퓨팅 디바이스(106)의 디스플레이 디바이스 상에 상기 하나 이상의 적극적인 참가자들과 관련된 제 1의 비주얼 데이터 세트를 제공하는 단계를 더 포함할 수 있다. 방법(100)은 상기 실시간 비주얼 통신 세션에 관한 상기 하나 이상의 참가 특성들에 적어도 부분적으로 기초하여 상기 소극적인 참가자들 중에서 하나 이상의 새로운 적극적인 참가자들을 선택하는 단계를 더 포함할 수 있고, 상기 하나 이상의 새로운 적극적인 참가자들은 적극적인 상태와 관련되고, 그 적극적인 상태와 관련이 있는 참가자들의 총 수는 적극적인 참가자들(108)의 임계 수를 초과하지 않는다.
방법(100)은, 디스플레이하기 위해, 상기 컴퓨팅 디바이스(110)의 디스플레이 디바이스 상에 상기 하나 이상의 새로운 적극적인 참가자들과 관련된 제 2의 비주얼 데이터 세트를 제공하는 단계를 더 포함할 수 있다. 방법(100)은, 디스플레이를 위한 상기 제 2의 비주얼 데이터 세트를 제공하는 단계에 응답하여, 상기 디스플레이된 제 1의 비주얼 데이터 세트(112)의 적어도 일부의 품질을 수정하는 단계를 또한 포함할 수 있다.
다른 예들에서, 참가자와 관련이 있는 비주얼 데이터가 어떻게 디스플레이될 것인가는 하나 이상의 참가 특성들 및 선택의 순서에 기초하고 있을 수 있다. 예를 들어, 보다 새로운 적극적인 참가자들은, 오래된 적극적인 참가자들보다 더 크게 디스플레이된 이미지를 가지면서 디스플레이되게 선택될 수 있다. 일 예로, 일부 적극적인 참가자들이 보다 큰 이미지들로 디스플레이되는 반면, 모든 참가자들은 컴퓨팅 디바이스 상에 적어도 썸네일(thumbnail) 이미지들로 디스플레이될 수 있다. 다른 예들에서, 선택된 적극적인 참가자들과 관련된 비주얼 데이터를 특정 위치나 방향에 디스플레이하기 위해서, 적극적인 참가자들은 선택될 수 있다. 추가적인 예들에서, 보다 새로운 적극적인 참가자들과 관련된 비주얼 데이터는 보다 오래된 적극적인 참가자들과 관련된 비주얼 데이터와 다른 명도(brightness)를 가질 수 있다. 다른 예들에서는, 선택된 참가자들과 관련된 비주얼 데이터의 디스플레이는, 보다 오래된 적극적인 참가자들과 관련된 비주얼 데이터의 디스플레이와는 다른 식으로 상이할 수 있고, 색깔, 품질, 압축률, 디스플레이의 지속 기간 등을 포함할 수 있다.
이전에 적극적인 참가자는 소극적인 참가자가 될 때, 이전에 적극적인 참가자는 다음으로 가장 오래된 적극적인 참가자 또는, 다음으로 가장 낮은 참가 등급을 가진 참가자의 비주얼 데이터로 대체된다.
참가자는, 본인과 관련된 비주얼 데이터가 하나 이상의 다른 참가자들을 위해 선택되어 진 것인지에 대해 통지될 수 있다. 다른 예에서, 하나 이상의 다른 참가자들의 참가 등급이 무엇인지에 관해 각각의 참가자들에게 표시가 제공되고, 모든 유저들 중에서 그 참가자에 대한 참가 등급은 참가 등급들의 평균일 수 있다.
몇몇 예들에서, 특정 참가자는, 통신 세션 동안, 사회자의 역할을 한다(예를 들어, 통신 세션의 개시자(initiator), 학급의 교사, 온라인 라디오 토크 프로그램의 호스트). 사회자는, 통신 세션 전반에 걸쳐서, 어느 참가자가 적극적이고 임의의 순간에 완전히 인터액트 할 수 있는지를 제어하고 선택할 수 있다. 적극적인 참가자들은, 모든 참가자들에게 본인들의 비디오 및 오디오 입력을 전송되게 할 것이다. 즉, 적극적인 참가자들은, 본인들의 비디오들을 실시간으로 업데이트 해두고, 모든 참가자들(적극적이고 소극적인 양쪽)의 스크린 상에 디스플레이될 수 있다. 일 예로, 사회자는, 모든 참가자들의 상태에 관계없이, 참가자들의 상태(적극적 또는 소극적)의 표시뿐 아니라, 디스플레이 디바이스 상에는 디스플레이된 그들에 대한 축소된 뷰(view)가 있다. 그 축소된 뷰의 예들은, 참가자들에 대한 압축되거나 거친 비디오, 고정된 그림 또는, 표시된 온라인 상태와는 다른 식별자(예를 들어, 이메일 주소)를 포함한다.
예를 들어, 사회자의 디스플레이 디바이스는 한쪽 면 상에 보다 크거나 미세한 그라뉼라(granular) 뷰로 나타난 현재 적극적인 참가자들을 포함하는 한편, 비 적극적인 참가자들은 스크린의 반대쪽 면(예를 들어, 맨 아래쪽) 상에 보다 작고/거친 뷰들(views)로 나타난다. 비 적극적인 유저들에 대해 축소된 뷰(view)들을 사용함으로써, 유저 인터액션들은 여전히 열심히 참여하는 것으로 남아 있는 반면에, 네트워크 대역폭은 극적으로 절약할 수 있다. 가상 터치 타겟들같은 버튼들은, 적극적인 상태와 소극적인 상태 사이에 있는 참가자들을 토글(toggle)하기 위해, 사회자에게 제공될 수 있다. 다른 참가자들의 디스플레이 디바이스들은 소극적이고 적극적인 참가자들 양쪽 모두 에게 사회자와 동일한 유저 인터페이스를 보여줄 수 있지만, 참가자들의 상태를 수정하기 위한 임의의 제어 버튼들은 없다. 대안적으로, 비 사회자 참가자들(non-moderator participants)의 스크린들은 단지 적극적인 참가자들에게만 디스플레이될 수 있다.
다른 예들에서는, 각 참가자들은, 통신 세션에 걸쳐서 사적인 또는 그룹 텍스트를 통해서 통신할 수 있다. 또한, 각 참가자는, 자신의 상태가 변경되었는지를 본인이 표시 가능하게 할 수 있는, GUI 상에 제공된 하나 이상의 인터액트 버튼들을 가질 수 있다. 버튼을 토글링 함으로써, 참가자를 적극적인 참가자가 되게 하는 큐에 위치시킬 수 있다. 사회자의 예를 들면, 참가자의 희망사항들에 대한 표시가 사회자에게 전달될 수 있다. 그 표시는 사회자의 축소된 뷰 상에 플래시 라이트(flashing light) 또는 색깔의 변화를 포함할 수 있다. 추가적으로, 참가자의 의향은 통신 세션 내의 모든 참가자들에게 방송될 수 있다.
참가자의 적극적인/소극적인 상태는 비디오 통신 세션을 제공하는 서버(24)와 같은 중앙 서버에 보관될 수 있다. 대안적으로, 참가자들의 상태들은 사회자의 브라우저에 보관될 수 있다.
참가자의 상태가 그 참가자에게 표시될 수 있으므로, 그 참가자는, 본인이 다른 참가자들에게 디스플레이된 적극적인의 참가자 가운데 있는지에 대해 알 수 있다.
본 명세서에 기재된 하나 이상의 기술들의 예시적인 기능이 여기에 제공된다. 통신 세션 동안의 언제 어느 때나, 현재 적극적인 참가자들의 리스트는 제한되어 있고 참가자들의 총 숫자(예를 들어, 10명의 적극적인 참가자들)보다 적다. 일 예로, 적극적인 참가자들과 관련된 비주얼 데이터는 나머지의 소극적인 참가자들보다 더 크거나/높은 그라뉼래러티(grandularity)로 디스플레이될 수 있다. 대안적으로, 현재 말하고 있는 적극적인 참가자는 가장 큰 크기(예를 들어, 적극적인 참가자의 비주얼 데이터에 대해 지정된 스크린의 디스플레이 크기의 30%)로 디스플레이된다. 바로 이전의 화자가 현재의 화자(예를 들어, 스크린 스페이스(space)의 25%의 디스플레이 크기)보다 작은 크기로 디스플레이되어 있다. 이 크기는 가장 큰 크기보다 한 레벨 아래의 크기일 수 있다. 다른 적극적인 참가자가 말할 때, 그 참가자는 현재의 화자가 되며, 가장 큰 크기(예를 들어, 30%)로 디스플레이된다. 이전 모든 화자들의 크기는 디스플레이에서 한 레벨 아래로 감소한다. 이것은 LRU(least-recently-used) 캐시 교체 알고리즘과 닮아있다: 가장 오래된(최근과 가장 먼) 화자는 "가장 작게" 디스플레이되는 반면에, 가장 최근의 화자는 "가장 크게" 디스플레이된다. 그러므로, 이러한 예에서, 디스플레이 레이아웃은, 다른 사람(현재의 화자를 제외한 어떤 사람)이 말할 때마다 바뀐다.
일 예로, 다른 사람이 말할 때, 그림 크기의 순간적인 변하는 대신에, 디스플레이된 이미지들 모두가 서서히 부드럽게 변한다.
예시적인 GUI (그래픽 유저 인터페이스)
도 4a 내지 4d는 본 명세서의 하나 이상의 양상에 따라서, 실시간의 비주얼 통신 세션에 참가하는 적극적인 참가자들의 비주얼 데이터를 디스플레이하기 위해, 컴퓨팅 디바이스에 의해 제공될 수 있는 예시적인 GUI를 도시한 블락선도이다. 예시적인 목적으로, 도 4a 내지 4d는 다른 10명의 참가자들 사이의 통신 세션의 측면에서 설명된다. 기 정의된 적극적인 참가자들의 임계 수는 4이다.
도 4a는, 첫번째 시간(Time 1)에서, 도 1의 컴퓨팅 디바이스(4-1)와 같은 유저 컴퓨팅 디바이스의 GUI(120)이다. Time 1에서는 통신 세션에 참석하는 적극적인 참가자들 3명(즉, A, B 및 C)이 있다. 지금 이 시간까지, 적극적인 참가자들의 기 정의된 임계 수는 4명이지만, 단 3 명의 참가자들만 적극적인 참가자들로 선택이 되었다. Time 1에서, A는 현재 말하고 있는 중이다. A가 적극적인 참가자이므로, A와 관련된 비주얼 데이터(122)는 디스플레이된다. 비주얼 데이터(122)는 "사이즈 5"로 디스플레이된다. 유사하게, B(124)와 관련된 비주얼 데이터와 C(126)과 관련된 비주얼 데이터는 디스플레이된다. 비주얼 데이터(124)는 "사이즈 4"에 디스플레이되고, 비주얼 데이터(126)은 "사이즈 3"에 디스플레이 된다. 그 크기들은 디스플레이 사이즈의 비율들, 선택된 사이즈들의 레벨들 또는, 다른 특징과 일치할 수 있다. 다른 예들에서는, 참가 특성들에 기초하여, 적어도 하나의 비주얼 품질 또는 사이즈가 수정될 수 있다.
도 4b는, 첫 번째 시간보다 늦은 비주얼 통신 세션(Time 2) 동안에, 두 번째 시간에서의 유저 컴퓨팅 디바이스의 GUI(120)를 보여준다. Time 2에서, D(새로운 적극적인 참가자)는 말하는 중이다. 몇몇 예들에서, D는, 말하기 시작했기 때문에, 적극적인 참가자로 선택되었을 수도 있다. D(130)와 관련된 비주얼 데이터는, D가 적극적인 참가자이기 때문에 디스플레이된다. 비주얼 데이터(130)는 "사이즈 5"로 디스플레이된다. 유사하게, A(132)와 관련된 비주얼 데이터, B(134)와 관련된 비주얼 데이터 및 C(136)와 관련된 비주얼 데이터는 디스플레이된다. Time 2에서, 디스플레이된 이미지들의 사이즈들은 다음과 같다: A(4), B(3), C(2), D(5).
도 4c는, 두 번째 시간(Time 3)보다 늦은 비주얼 통신 세션 동안에, 세 번째의 유저 컴퓨팅 디바이스의 GUI(120)를 보여준다. Time 3에서, C(새로운 적극적인 참가자)는 말을 시작한다. C(150)와 관련된 비주얼 데이터(130)는 "사이즈 5"로 디스플레이된다. 유사하게, D(152)와 관련된 비주얼 데이터, A(154)와 관련된 비주얼 데이터 및 B(156)와 관련된 비주얼 데이터는 역시 디스플레이된다. Time 3에서, 디스플레이된 이미지들은 다음과 같다: A(3), B(2), C(5), D(4).
도 4d에서, 세 번째 시간(Time 4)보다 늦은 비주얼 통신 세션 동안에, 네 번째의 유저 컴퓨팅 디바이스의 GUI(160)을 보여준다. 또한, 도 4d는, 예시의 목적으로, GUI(120)와는 다른 레이아웃을 가지는 GUI(160)를 보여준다. 몇몇 예들에서, GUI(160)는 Time 4에 있지 않고, GUI(120)의 예와는 독립적인 예이다. 도 4d에 나타난 GUI(170)의 예에서, 6명의 참가자들이 디스플레이를 위해 선택되었다. 4개의 비디오 데이터 세트는 2x2 매트릭스로 디스플레이된다.
Time 4에서, 새로운 적극적인적인 참가자인 E는 선택되었고, 말하는 중이다. 적극적인 참가자들의 기 정의된 임계 수는 "4"로 정의되었기 때문에, 이전의 적극적인 참가자들 중의 한 명은 떨어진다. E(170)와 관련된 비주얼 데이터는 "사이즈 5"로 디스플레이된다. 유사하게, C(172)와 관련된 비주얼 데이터, D(174)와 관련된 비주얼 데이터, A(176)와 관련된 비주얼 데이터, B(178)와 관련된 비주얼 데이터 및 F(180)와 관련된 비주얼 데이터는 또한 디스플레이된다. GUI(160)에서 디스플레이된 보다 많은 적극적인 참가자들이 있기 때문에, F(180)와 관련된 비주얼 데이터는 이 예에서 소개되었다. 이 예에서, B가 가장 덜 적극적인 참가자였고 가장 작은 디스플레이 사이즈를 가졌기 때문에, B는 보다 작은 사이즈로 변경되었다. 디스플레이된 이미지들은 Time 4에서는 다음과 같다: A(2), B(2), C(4), D(2), E(5), F(2). 이 "페이딩(fading)" 계획은 부드러운 인상(impression)을 남기고, 누가 최근에 말했는가에 대한 명확한 타임라인(timeline)을 도시할 것이다.
디스플레이의 물리적인 레이아웃에 관해, 많은 옵션들이 사용될 수 있다. 예를 들어, 적극적인 참가자들은, 왼쪽에서 오른쪽으로 리스트(가장 최근의 통신에서 분류된)될 수 있고, 그래서 디스플레이들은 큰 것으로부터 작은 것으로(왼쪽에서 오른쪽)된다. 다른 예에서, 적극적인 참가자들은 왼쪽에서 오른쪽의 순서로 고정되지만, 그 디스플레이 사이즈는 가장 최근의 통신의 시간에 기초하고 있다. 예를 들어, "적극적인의 화자들"의 사이즈는, 구체적인 숫자(hard number)(예를 들어, 10 또는 5) 또는 타임 윈도우(time window)(마지막 5분 전에 말한 사람)를 세팅함으로써 제어될 수 있다.
본 명세서에 개시된 기술들은 비디오 회의중의 개선된 유저 경험을 제공할 수 있다. 참가자들의 세트(a set of participants)는 유저가 관련된 정보를 볼 수 있도록 적당한 사이즈로 디스플레이될 수 있다. 본 기술은, 유저로 하여금 비디오 회의 내의 대화 일부에 가담한 사람들을 볼 수 있게 해준다. 임의의 특정 시간에 그 대화와 관련된 참가자들은 디스플레이되는 반면, 그 대화에 덜 관련된 참가자들은 디스플레이에서 빠진다. 이런 방식으로, 개시된 기술들은, 각각의 유저에게 동일하거나 다를 수 있는 패널리스트(panelist)들의 그룹을 다이내믹하게(dynamically) 생성한다.
본 개시내용에서 설명되는 기술들은, 적어도 부분적으로, 하드웨어, 소프트웨어, 펌웨어 혹은 이들의 임의의 조합으로 구현될 수 있다. 예를 들어, 설명된 실시 예들의 다양한 실시형태들은, 하나 이상의 마이크로프로세서(microprocessor)들, 디지털 신호 프로세서(Digital Signal Processor, DSP)들, 애플리케이션 특정 집적 회로(Application Apecific Integrated Circuit, ASIC)들, 현장 프로그래밍가능 게이트 어레이(Field Programmable Gate Array, FPGA)들, 혹은 임의의 다른 등가의 통합된 혹은 개별적 로직 회로 그리고 이러한 컴포넌트들의 임의의 조합을 포함하는, 하나 이상의 프로세서들 내에서 구현될 수 있다. 용어 "프로세서" 혹은 "프로세싱 회로"는 일반적으로, 앞서 설명된 로직 회로 중 어느 하나만을 말할 수 있거나, 혹은 다른 로직 회로와 결합된 것 또는 임의의 다른 등가 회로를 말할 수 있다. 하드웨어를 포함하는 제어 유닛은 또한, 본 개시내용의 기술들 중 하나 이상을 수행할 수 있다.
이러한 하드웨어, 소프트웨어 및 펌웨어는 본 명세서에서 설명되는 다양한 기술들을 지원하기 위해 동일 디바이스 내에서 혹은 별개의 디바이스들 내에서 구현될 수 있다. 추가적으로, 앞서 설명된 유닛들, 모듈들 혹은 컴포넌트들 중 어느 하나는, 분리된 하지만 상호동작가능한 로직 디바이스들로서 함께 또는 개별적으로 구현될 수 있다. 서로 다른 특징들을 모듈들 혹은 유닛들로서 설명한 것은, 서로 다른 기능적 측면들을 강조하려는 것이며, 이러한 모듈들 혹은 유닛들이 개별적인 하드웨어, 펌웨어, 혹은 소프트웨어 컴포넌트들에 의해 구현돼야만 함을 반드시 시사하는 것이 아니다. 오히려, 하나 이상의 모듈들 혹은 유닛들과 관련된 기능은, 개별적 하드웨어, 펌웨어, 혹은 소프트웨어 컴포넌트들에 의해 구현될 수 있거나, 공통의 혹은 별개의 하드웨어, 펌웨어, 혹은 소프트웨어 컴포넌트들 내에 통합될 수 있다.
본 개시내용에서 설명되는 기술들은 또한, 제조물에 수록되거나 인코딩될 수 있는바, 이러한 제조물은 명령들이 인코딩되어 있는 컴퓨터 판독가능 저장 매체를 포함한다. 인코딩된 컴퓨터 판독가능 저장 매체를 포함하는 제조물에 수록 혹은 인코딩된 명령들은, 예를 들어, 컴퓨터 판독가능 저장 매체에 포함 혹은 인코딩된 명령들이 하나 이상의 프로세서들에 의해 실행될 때, 하나 이상의 프로그래밍가능 프로세서들 혹은 다른 프로세서들로 하여금 본 명세서에서 설명되는 기술들 중 하나 이상을 구현하도록 할 수 있다. 컴퓨터 판독가능 저장 매체들은, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 프로그래밍가능한 판독 전용 메모리(PROM), 소거가능하고 프로그래밍가능한 판독 전용 메모리(EPROM), 전기적으로 소거가능하고 프로그래밍가능한 판독 전용 메모리(EEPROM),플래시 메모리, 하드 디스크, 콤팩트 디스크 ROM(Compact Disc ROM, CD-ROM), 플로피 디스크, 카세트, 자기 매체들, 광학 매체들, 혹은 다른 컴퓨터 판독가능 매체들을 포함할 수 있다. 몇몇 예들에서, 제조물은 하나 이상의 컴퓨터 판독가능 저장 매체들을 포함할 수 있다.
몇몇 예들에서, 컴퓨터-판독가능 저장 매체들은 비 일시적 매체들(non-transitory media)을 포함할 수 있다. 용어 "비 일시적"은 저장 매체가 반송파 혹은 전파 신호로 구현되지 않음을 나타낼 수 있다. 특정 예들에서, 비 일시적 저장 매체는 시간 경과에 따라 변할 수 있는 데이터를 (예를 들어, RAM 혹은 캐시 내에) 저장할 수 있다.
본 개시내용의 다양한 실시형태들이 설명되었다. 본 명세서에서 설명된 예들의 양상들 혹은 특징은 또 다른 예에서 설명된 임의의 다른 양상 혹은 특징과 결합될 수 있다. 이러한 실시 예들 및 다른 실시 예들은 아래의 청구항들의 범위 내에 있다.

Claims (22)

  1. 방법으로서,
    하나 이상의 컴퓨팅 디바이스들을 사용하여, 실시간 비주얼 통신 세션의 복수의 참가자들 중에서, 상기 실시간 비주얼 통신 세션에 관계하고 그리고 상기 복수의 참가자들 각각에 대한 참가자 관련된 비주얼 데이터를 디스플레이하기 위한 타당성(desirability)과 관련이 있는 하나 이상의 참가 특성들에 적어도 부분적으로 기초하여 적극적인 상태와 각각 관련되는 적어도 제 1, 제 2 및 제 3의 참가자를 선택하는 단계와;
    유저 컴퓨팅 디바이스의 디스플레이 디바이스 상에 디스플레이 하기 위해서 상기 하나 이상의 컴퓨팅 디바이스들을 사용하여 상기 제 1의 적극적인 참가자와 관련이 있는 제 1 비주얼 데이터, 상기 제 2의 적극적인 참가자와 관련이 있는 제 2 비주얼 데이터 및 , 상기 제 3의 적극적인 참가자와 관련이 있는 제 3 비주얼 데이터를 제공하는 단계와;
    상기 하나 이상의 컴퓨팅 디바이스들을 사용하여, 상기 실시간 비주얼 통신 세션에 관한 상기 하나 이상의 참가 특성들에 적어도 부분적으로 기초하여 적극적인 참가자들로 선택되지 않았던 하나 이상의 참가자들 중에서 하나 이상의 새로운 적극적인 참가자들을 선택하는 단계-상기 하나 이상의 새로운 적극적인 참가자들은 상기 적극적인 상태와 관련됨-와;
    상기 하나 이상의 컴퓨팅 디바이스들을 사용하여 디스플레이하기 위해, 상기 컴퓨팅 디바이스의 상기 디스플레이 디바이스 상에 상기 하나 이상의 새로운 적극적인 참가자들과 관련된 제 4의 비주얼 데이터를 제공하는 단계와;
    디스플레이를 위한 상기 제 4의 비주얼 데이터를 제공하는 단계에 응답하여, 상기 디스플레이된 제 1, 제 2 및 제 3의 비주얼 데이터의 품질을 수정하는 단계를 포함하는 것을 특징으로 하는 방법.
  2. 제 1 항에 있어서,
    상기 복수의 참가자들 중에서 제 1의 참가자를 사회자로 지정하는 단계-상기 사회자는 상기 복수의 참가자들 중에서 다른 참가자들의 상태를 변경하도록 권한이 부여되고, 상기 사회자와 관련된 비주얼 데이터는, 상기 실시간 비주얼 통신 세션 동안에 상기 컴퓨팅 디바이스의 상기 디스플레이 상에 디스플레이 하기 위해 항상 제공됨-를 더 포함하는 것을 특징으로 하는 방법.
  3. 제 1 항에 있어서,
    상기 적극적인 상태와 관련이 있는 참가자들의 수를 적극적인 참가자들의 임계 수와 비교하는 단계와;
    상기 비교에 응답하여, 적극적인 상태와 관련이 있는 참가자들의 수가 적극적인 참가자들의 기 정의된 임계 수보다 작을 때, 상기 하나 이상의 새로운 적극적인 참가자들을 선택하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  4. 제 1 항에 있어서,
    상기 적극적인 상태와 관련이 있는 참가자들의 수를 기 정의된 적극적인 참가자들의 임계 수와 비교하는 단계와;
    상기 비교에 응답하여, 상기 적극적인 상태와 관련이 있는 참가자들의 수가 적극적인 참가자들의 임계 수를 초과할 때 상기 하나 이상의 참가 특성들에 적어도 부분적으로 기초해서, 상기 적극적인과 관련이 있는 하나 이상의 참가자들을 소극적인 상태(passive state)와 관련되게 선택하는 단계를 더 포함하는 것을 특징으로하는 방법.
  5. 제 1 항에 있어서,
    상기 적극적인 상태와 관련이 있는 제 1의 참가자가, 상기 참가 특성들 중의 하나에 적어도 부분적으로 기초해서 더 이상 적극적인 참가자가 아니라고 결정하는 단계와;
    상기 제 1의 적극적인 참가자와 관련이 있는 상기 상태를 상기 적극적인 상태로부터 소극적인 상태로 변경하는 단계와;
    상기 참가 특성들 중의 하나에 적어도 부분적으로 기초해서 적극적인 참가자들로 선택되지 않았던 하나 이상의 참가자들 중에서 제 2의 참가자를 선택하고, 상기 제2의 참가자의 상태가 상기 소극적인 상태로부터 상기 적극적인 상태로 변경되는 단계를 더 포함하는 것을 특징으로 하는 방법.
  6. 제 1 항에 있어서,
    상기 복수의 참가자들 중에서 적어도 한 명의 참가자에 대해서, 상기 실시간 비주얼에 관련되는 하나 이상의 참가 특성들은 큐(que)에서의 적어도 하나의 위치, 상기 적극적인 상태에서의 지속 기간, 소극적인 상태에서의 지속 기간, 칭호(designation), 신원, 오디오 출력의 컨텐트, 유저 선택가능 옵션의 상태(status), 라운드 로빈 프로세스(round-robin process), 참가자 투표 결과들, 상기 참가자가 말해왔던 지속 기간과 상기 실시간 비주얼 통신 세션의 총 지속 기간의 비율, 상기 참가자가 마지막으로 말했던 이래로 지속기간, 상기 참가자의 지리적 위치, 상기 참가자와 관련이 있는 회의 리소스의 존재, 상기 참가자와 관련이 있는 컴퓨팅 디바이스의 특성들 및 그것들의 임의의 조합을 포함하는 것을 특징으로 하는 방법.
  7. 제 1 항에 있어서,
    상기 복수의 참가자들 중에 제 1의 참가자는 청취자임을 표시하는 하나 이상의 신호들을 수신하는 단계와;
    상기 하나 이상의 신호를 수신하는 단계에 응답하여, 상기 실시간 비주얼 통신 세션 기간 동안 상기 제 1의 참가자와 관련이 있는 상태를 소극적인 것으로 세팅하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  8. 제 1 항에 있어서, 적극적인 참가자들로 선택되지 않았던 하나 이상의 참가자들은 소극적인 상태와 관련이 있는 하나 이상의 소극적인 참가자들 각각을 더 포함하는 것을 특징으로 하는 방법.
  9. 제 8 항에 있어서,
    상기 실시간 비주얼 통신 세션에 관한 상기 하나 이상의 참가 특성에 적어도 부분적으로 기초하는 상기 소극적인 참가자들 중에서 하나 이상의 새로운 적극적인 참가자들을 선택하는 단계는,
    복수의 참가자들의 각각에 대한 참가 등급(rating)을 결정하는 단계-상기 등급은 상기 하나 이상의 참가 특성들에 적어도 부분적으로 기초하고 있음-와;
    상기 참가자에 대한 상기 하나 이상의 참가 특성들 중의 하나는 상기 참가자가 이전에 참가하고 있었을 때보다 상기 실시간 비주얼 통신 세션에 더 적극적으로 참가하고 있음을 표시할 때, 참가자에 대한 상기 참가 등급을 증가시키는 단계와;
    상기 참가자에 대한 상기 하나 이상의 참가 특성들 중의 하나는 상기 참가자가 이전에 참가하고 있었을 때보다 상기 실시간 비주얼 통신 세션에 덜 적극적으로 참가하고 있음을 표시할 때, 참가자에 대한 상기 참가 등급을 감소시키는 단계와;
    상기 복수의 참가자들의 각각의 상기 참가 등급에 기초해서 적극적인 상기 하나 이상의 참가자들을 선택하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  10. 제 8 항에 있어서,
    상기 하나 이상의 새로운 적극적인 참가자들이 상기 소극적인 참가자들 중에서 선택되는 것을 특징으로 하는 방법.
  11. 제 1항에 있어서,
    상기 디스플레이된 제 1의 비주얼 데이터 세트의 적어도 일부의 상기 품질을 수정하는 단계는, 적극적인 참가자들 중의 적어도 하나에 관한 비주얼 품질 또는 상기 비주얼 데이터의 출력 사이즈(size) 중에서 적어도 하나를 저감시키는(reduce) 단계를 포함하는 것을 특징으로 하는 방법.
  12. 제 1 항에 있어서,
    상기 디스플레이 된 제 1의 비주얼 데이터 세트의 적어도 일부의 상기 품질을 수정하는 단계는 선택된 새로운 적극적인 참가자 각각에 대한 적어도 한 명의 적극적인 참가자와 관련이 있는 비주얼 데이터의 상기 품질을 반복적으로 저감시키는 단계를 더 포함하는 것을 특징으로 하는 방법.
  13. 제 12 항에 있어서,
    소극적인 상태로부터 상기 적극적인 상태로 변경된 각각의 참가자에 대한 상기 디스플레이된 제 2의 비주얼 데이터의 적어도 일부의 상기 품질을 반복적으로 한 번 저감시키는 단계와;
    상기 참가자와 관련이 있는 상기 디스플레이된 비주얼 데이터의 상기 품질이 일단 품질 임계 수준에 도달하면, 참가자의 상태를 상기 적극적인 상태에서 소극적인 상태로 변경하는 단계를 포함하는 것을 특징으로 하는 방법.
  14. 제 1 항에 있어서,
    참가자와 관련이 있는 비주얼 데이터는, 상기 참가자의 상기 상태가 적극적일 때, 상기 컴퓨팅 디바이스의 상기 디스플레이 디바이스 상에 단지 디스플레이 하기위해 제공되는 것을 특징으로 하는 방법.
  15. 제 1 항에 있어서,
    상기 컴퓨팅 디바이스에 의한 출력을 위해, 상기 참가자가 상기 적극적인 상태에 관련이 있는 동안에, 각각의 참가자에게만 관련되는 오디오 데이터를 제공하는 단계
  16. 제 1 항에 있어서,
    상기 컴퓨팅 디바이스에 의한 출력을 위해, 상기 복수의 참가자들 중에서 각각의 참가자들과 관련되는 오디오 데이터를 제공하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  17. 제 1 항에 있어서,
    상기 실시간 비주얼 통신 세션 및 상기 컴퓨팅 디바이스의 컴퓨터 리소스들과 관련이 있는 네트워크 리소스들에 적어도 부분적으로 기초로 해서 적극적인 참가자들의 상기 임계 수를 결정하는 단계를 더 포함하는 것을 특징으로 하는 방법.
  18. 컴퓨터 판독가능한 저장 매체로서,
    프로그래머블 프로세서(programmable processor)로 하여금,
    하나 이상의 컴퓨팅 디바이스들을 사용하여, 실시간 비주얼 통신 세션에 참가하는 복수의 참가자들 중에서, 실시간 비주얼 통신 세션에 관계하고 그리고 상기 복수의 참가자들 각각에 대한 참가자 관련된 비주얼 데이터를 디스플레이하기 위한 타당성과 관련이 있는 하나 이상의 적극적인 참가 특성들에 적어도 부분적으로 기초하여 적극적인 상태와 각각 관련되는 하나 이상의 적극적인 참가자들을 선택하고,
    하나 이상의 컴퓨팅 디바이스들을 사용하여 디스플레이하기 위하여, 유저 컴퓨팅 디바이스의 디스플레이 디바이스 상에 상기 하나 이상의 적극적인 참가자들과 관련되는 제 1의 비주얼 데이터 세트를 제공하고,
    상기 하나 이상의 컴퓨팅 디바이스들을 사용하여, 상기 실시간 비주얼 통신 세션에 관한 상기 하나 이상의 참가 특성에 부분적으로 기초하여 적극적인 참가자들로 선택되지 않았던 하나 이상의 참가자들 중에서 하나 이상의 새로운 적극적인 참가자들을 선택하고, 상기 하나 이상의 새로운 적극적인 참가자들은 상기 적극적인 상태와 관련되고, 상기 적극적인 상태와 관련되는 상기 적극적인 참가자들의 총 수는 적극적인 참가자들의 기 정의된 임계 수를 초과하지 않으며,
    상기 하나 이상의 컴퓨팅 디바이스들을 사용하여 디스플레이하기 위해, 상기 컴퓨팅 디바이스의 상기 디스플레이 디바이스 상에 상기 하나 이상의 새로운 적극적인과 관련이 있는 제 2의 비주얼 데이터 세트를 제공하고, 그리고
    디스플레이하기 위한 상기 제 2의 비주얼 데이터 세트를 제공하는 것에 응답하여, 상기 디스플레이된 제 1의 비주얼 데이터 세트의 적어도 일부의 품질을 수정하는 동작들을 수행하게 하는 명령들을 포함하는 것을 특징으로 하는 컴퓨터 판독 가능한 저장 매체.
  19. 제 18항에 있어서,
    상기 동작들은 상기 적극적인과 관련이 있는 제 1의 참가자는 상기 참가 특성들 중의 하나에 적어도 부분적으로 기초해서 더 이상 적극적인 참가자가 아니어야 함을 결정하고,
    상기 제 1의 적극적인 참가자의 상기 상태를 소극적인 상태와 관련되게 변경하고, 그리고
    상기 참가 특성들 중의 하나에 적어도 부분적으로 기초하여 상기 제 1의 참가자를 교체하기 위해 제 2의 참가자를 선택하는 동작들을 더 포함하고, 상기 제 2의 참가자의 상태는 소극적인 상태에서 적극적인 상태로 변경되어서, 적극적인 상태에 있는 참가자들의 수는 적극적인 참가자들의 임계 수와 동일한 것 특징으로 하는 컴퓨터 판독 가능한 저장 매체.
  20. 제 18항에 있어서,
    상기 디스플레이된 제 1의 비주얼 데이터 세트의 적어도 일부의 품질을 수정하는 동작은,
    소극적인 상태로부터 상기 적극적인 상태로 선택되고 변경된 새로운 적극적인 참가자 각각에 대한 적어도 하나의 적극적인 참가자와 관련이 있는 비주얼 데이터의 상기 품질을 반복적으로 저감시키는 동작과;
    일단 상기 참가자와 관련이 있는 상기 디스플레이된 비주얼 데이터의 상기 품질이 임계 품질 수준에 도착하면, 참가자의 상기 상태를 상기 적극적인 상태로부터 상기 소극적인 상태로 변경하는 동작을 포함하는 컴퓨터 판독 가능한 저장 매체.
  21. 하나 이상의 프로세서들을 포함하는 서버로서,
    상기 하나 이상의 프로세서들은,
    하나 이상의 컴퓨팅 디바이스들을 사용하여, 실시간 비주얼 통신 세션에 참가하는 복수의 참가자들 중에서, 실시간 비주얼 통신 세션에 관계하고 그리고 상기 복수의 참가자들 각각에 대한 참가자 관련된 비주얼 데이터를 디스플레이하기 위한 타당성과 관련이 있는 하나 이상의 참가 특성들에 적어도 부분적으로 기초하여 적극적인 상태와 각각 관련되는 하나 이상의 적극적인 참가자들을 선택하는 단계와;
    하나 이상의 컴퓨팅 디바이스들을 사용하여, 유저 컴퓨팅 디바이스의 디스플레이 디바이스 상에 상기 하나 이상의 적극적인 참가자들과 관련되는 제 1의 비주얼 데이터를 제공하는 단계와;
    상기 하나 이상의 컴퓨팅 디바이스들을 사용하여 디스플레이하기 위하여, 상기 실시간 비주얼 통신 세션에 관한 상기 하나 이상의 참가 특성들에 적어도 부분적으로 기초하여 적극적인 참가자들로 선택되지 않았던 하나 이상의 참가자들 중에서 하나 이상의 새로운 적극적인 참가자들을 선택하는 단계-상기 하나 이상의 적극적인 참가자들은 상기 적극적인 상태와 관련되고, 상기 적극적인 상태와 관련이 있는 참가자들의 총 수는 적극적인 참가자들의 기 정의된 임계 수를 초과하지 않음-와;
    상기 하나 이상의 컴퓨팅 디바이스들을 사용하여 디스플레이하기 위해, 상기 컴퓨팅 디바이스의 디스플레이 디바이스 상에 상기 하나 이상의 새로운 적극적인 참가자들과 관련된 제 2의 비주얼 데이터 세트를 제공하는 단계와;
    디스플레이를 위한 상기 제 2의 비주얼 데이터를 제공하는 단계에 응답하여, 상기 디스플레이된 제 1의 비주얼 데이터 세트의 적어도 일부의 품질을 수정하는 단계를 수행하도록 구성된 것을 특징으로 하는 서버.
  22. 제 21항에 있어서,
    상기 디스플레이된 제 1의 비주얼 데이터의 적어도 일부의 상기 품질을 수정하는 단계는,
    소극적인 상태로부터 적극적인 상태로 선택되고 변경된 새로운 적극적인 참가자 각각에 대한 적어도 하나의 적극적인 참가자와 관련이 있는 비주얼 데이터의 상기 품질을 반복적으로 줄이는 단계와;
    상기 참가자와 관련이 있는 상기 디스플레이된 비주얼 데이터의 상기 품질이 일단 임계 품질 수준에 도달하면, 참가자의 상기 상태를 상기 적극적인 상태로부터 상기 소극적인 상태로 변경하는 단계를 포함하는 것을 특징으로 하는 서버.
KR1020147021231A 2011-12-28 2012-12-28 무제한의 다이내믹한 적극적인 참가자들과의 비디오 회의 KR20140138609A (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161581035P 2011-12-28 2011-12-28
US61/581,035 2011-12-28
US13/618,703 2012-09-14
US13/618,703 US20130169742A1 (en) 2011-12-28 2012-09-14 Video conferencing with unlimited dynamic active participants
PCT/US2012/071983 WO2013102024A1 (en) 2011-12-28 2012-12-28 Video conferencing with unlimited dynamic active participants

Publications (1)

Publication Number Publication Date
KR20140138609A true KR20140138609A (ko) 2014-12-04

Family

ID=48694507

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147021231A KR20140138609A (ko) 2011-12-28 2012-12-28 무제한의 다이내믹한 적극적인 참가자들과의 비디오 회의

Country Status (6)

Country Link
US (1) US20130169742A1 (ko)
EP (1) EP2798516A4 (ko)
JP (1) JP6151273B2 (ko)
KR (1) KR20140138609A (ko)
AU (1) AU2012327220A1 (ko)
WO (1) WO2013102024A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180015477A (ko) * 2016-08-03 2018-02-13 삼성에스디에스 주식회사 참여도 기반의 서비스 제공 방법 및 그 장치
KR20200143435A (ko) * 2018-04-10 2020-12-23 페이스북, 인크. 서술적 모델들에 기초한 자동화된 결정들

Families Citing this family (81)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9401937B1 (en) 2008-11-24 2016-07-26 Shindig, Inc. Systems and methods for facilitating communications amongst multiple users
US8390670B1 (en) 2008-11-24 2013-03-05 Shindig, Inc. Multiparty communications systems and methods that optimize communications based on mode and available bandwidth
US9344745B2 (en) 2009-04-01 2016-05-17 Shindig, Inc. Group portraits composed using video chat systems
US8779265B1 (en) 2009-04-24 2014-07-15 Shindig, Inc. Networks of portable electronic devices that collectively generate sound
US8817966B2 (en) * 2010-07-08 2014-08-26 Lisa Marie Bennett Wrench Method of collecting and employing information about parties to a televideo conference
US9137086B1 (en) 2011-08-25 2015-09-15 Google Inc. Social media session access
US8788680B1 (en) * 2012-01-30 2014-07-22 Google Inc. Virtual collaboration session access
US20130215214A1 (en) * 2012-02-22 2013-08-22 Avaya Inc. System and method for managing avatarsaddressing a remote participant in a video conference
CN103384235B (zh) * 2012-05-04 2017-09-29 腾讯科技（深圳）有限公司 多人会话时数据呈现的方法、服务器及系统
CN104469255A (zh) 2013-09-16 2015-03-25 杜比实验室特许公司 改进的音频或视频会议
US9071887B2 (en) * 2012-10-15 2015-06-30 Verizon Patent And Licensing Inc. Media session heartbeat messaging
US20140114664A1 (en) * 2012-10-20 2014-04-24 Microsoft Corporation Active Participant History in a Video Conferencing System
US8848019B1 (en) * 2013-03-15 2014-09-30 Refined Data Solutions, Inc. System and method for enabling virtual live video
US9288435B2 (en) * 2013-03-27 2016-03-15 Google Inc. Speaker switching delay for video conferencing
US20140337034A1 (en) * 2013-05-10 2014-11-13 Avaya Inc. System and method for analysis of power relationships and interactional dominance in a conversation based on speech patterns
US9477371B2 (en) * 2013-06-18 2016-10-25 Avaya Inc. Meeting roster awareness
US9473363B2 (en) * 2013-07-15 2016-10-18 Globalfoundries Inc. Managing quality of service for communication sessions
AU2014306170B2 (en) 2013-08-05 2018-07-19 Interactive Intelligence, Inc. Encoding of participants in a conference setting
CN103413472B (zh) * 2013-08-14 2015-05-27 苏州阔地网络科技有限公司 一种网络同步课堂实现方法及系统
US20150049162A1 (en) * 2013-08-15 2015-02-19 Futurewei Technologies, Inc. Panoramic Meeting Room Video Conferencing With Automatic Directionless Heuristic Point Of Interest Activity Detection And Management
US9704137B2 (en) * 2013-09-13 2017-07-11 Box, Inc. Simultaneous editing/accessing of content by collaborator invitation through a web-based or mobile application to a cloud-based collaboration platform
US20150079959A1 (en) * 2013-09-13 2015-03-19 At&T Intellectual Property I, L.P. Smart Microphone
US8892679B1 (en) 2013-09-13 2014-11-18 Box, Inc. Mobile device, methods and user interfaces thereof in a mobile device platform featuring multifunctional access and engagement in a collaborative environment provided by a cloud-based platform
US9679331B2 (en) * 2013-10-10 2017-06-13 Shindig, Inc. Systems and methods for dynamically controlling visual effects associated with online presentations
US10866931B2 (en) 2013-10-22 2020-12-15 Box, Inc. Desktop application for accessing a cloud collaboration platform
US10271010B2 (en) 2013-10-31 2019-04-23 Shindig, Inc. Systems and methods for controlling the display of content
US20150156458A1 (en) * 2013-12-03 2015-06-04 Avaya Inc. Method and system for relative activity factor continuous presence video layout and associated bandwidth optimizations
US9800515B2 (en) * 2014-01-31 2017-10-24 Apollo Education Group, Inc. Mechanism for controlling a process on a computing node based on the participation status of the computing node
US9210379B2 (en) * 2014-02-27 2015-12-08 Google Inc. Displaying a presenter during a video conference
TWI504272B (zh) * 2014-05-08 2015-10-11 Aver Information Inc 視訊會議系統及其顯示配置方法
US9733333B2 (en) 2014-05-08 2017-08-15 Shindig, Inc. Systems and methods for monitoring participant attentiveness within events and group assortments
US20150343313A1 (en) * 2014-05-30 2015-12-03 Microsoft Corporation User enforcement reputation scoring algorithm & automated decisioning and enforcement system for non-evidence supported communications misconduct
TWI562640B (en) * 2014-08-28 2016-12-11 Hon Hai Prec Ind Co Ltd Method and system for processing video conference
US10666696B2 (en) 2014-09-05 2020-05-26 Minerva Project, Inc. System and method for a virtual conference interactive timeline
TWI547824B (zh) * 2014-12-16 2016-09-01 緯創資通股份有限公司 適用於互動式電子白板系統的控制權限分享方法及其主機端裝置
CN104506726B (zh) * 2014-12-25 2017-07-14 宇龙计算机通信科技(深圳)有限公司 用于终端的通信事件的处理方法、处理装置和终端
US10645129B2 (en) * 2015-03-03 2020-05-05 Adobe Inc. Techniques for correlating engagement of attendees of an online conference to content of the online conference
US10061467B2 (en) 2015-04-16 2018-08-28 Microsoft Technology Licensing, Llc Presenting a message in a communication session
US20160308920A1 (en) * 2015-04-16 2016-10-20 Microsoft Technology Licensing, Llc Visual Configuration for Communication Session Participants
JP6651989B2 (ja) * 2015-08-03 2020-02-19 株式会社リコー 映像処理装置、映像処理方法、及び映像処理システム
GB201520520D0 (en) * 2015-11-20 2016-01-06 Microsoft Technology Licensing Llc Communication system
GB201520509D0 (en) 2015-11-20 2016-01-06 Microsoft Technology Licensing Llc Communication system
US9710142B1 (en) * 2016-02-05 2017-07-18 Ringcentral, Inc. System and method for dynamic user interface gamification in conference calls
US9686510B1 (en) 2016-03-15 2017-06-20 Microsoft Technology Licensing, Llc Selectable interaction elements in a 360-degree video stream
US9706171B1 (en) * 2016-03-15 2017-07-11 Microsoft Technology Licensing, Llc Polyptych view including three or more designated video streams
US10204397B2 (en) 2016-03-15 2019-02-12 Microsoft Technology Licensing, Llc Bowtie view representing a 360-degree image
JP6634965B2 (ja) * 2016-06-20 2020-01-22 株式会社リコー 通信端末、通信システム、通信制御方法、及びプログラム
US10133916B2 (en) 2016-09-07 2018-11-20 Steven M. Gottlieb Image and identity validation in video chat events
US10499178B2 (en) * 2016-10-14 2019-12-03 Disney Enterprises, Inc. Systems and methods for achieving multi-dimensional audio fidelity
US10116898B2 (en) * 2016-11-18 2018-10-30 Facebook, Inc. Interface for a video call
US10079994B2 (en) 2016-11-18 2018-09-18 Facebook, Inc. Methods and systems for displaying relevant participants in a video communication
US10250846B2 (en) 2016-12-22 2019-04-02 T-Mobile Usa, Inc. Systems and methods for improved video call handling
US9924136B1 (en) 2017-01-30 2018-03-20 Microsoft Technology Licensing, Llc Coordinated display transitions of people and content
CN108446151B (zh) * 2017-02-14 2022-01-25 阿里巴巴集团控股有限公司 通讯方法及装置
US10218852B2 (en) * 2017-02-23 2019-02-26 Fuji Xerox Co., Ltd. Methods and systems for providing teleconference participant quality feedback
KR101910581B1 (ko) * 2017-06-16 2018-10-22 라인 가부시키가이샤 사용자 대화 활동성 및 대화 상황 정보를 활용한 대화방 정렬 방법 및 그 시스템
US10372298B2 (en) 2017-09-29 2019-08-06 Apple Inc. User interface for multi-user communication session
US10567707B2 (en) * 2017-10-13 2020-02-18 Blue Jeans Network, Inc. Methods and systems for management of continuous group presence using video conferencing
CN110413966A (zh) * 2018-04-27 2019-11-05 富士施乐株式会社 文档管理设备和非暂时性计算机可读介质
DK201870364A1 (en) * 2018-05-07 2019-12-03 Apple Inc. MULTI-PARTICIPANT LIVE COMMUNICATION USER INTERFACE
US10440325B1 (en) * 2018-07-17 2019-10-08 International Business Machines Corporation Context-based natural language participant modeling for videoconference focus classification
JP7230394B2 (ja) * 2018-09-25 2023-03-01 京セラドキュメントソリューションズ株式会社 テレビ会議装置及びテレビ会議プログラム
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
US11765213B2 (en) * 2019-06-11 2023-09-19 Nextiva, Inc. Mixing and transmitting multiplex audiovisual information
US11202035B2 (en) * 2020-04-24 2021-12-14 Facebook, Inc. Dynamically modifying live video streams for participant devices in digital video rooms
US20210352244A1 (en) * 2020-05-11 2021-11-11 Sony Interactive Entertainment LLC Simulating real-life social dynamics in a large group video chat
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US11683356B2 (en) * 2020-07-27 2023-06-20 Microsoft Technology Licensing, Llc Intelligently identifying and promoting a meeting participant in an online meeting
JP2022076685A (ja) * 2020-11-10 2022-05-20 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
US11824647B2 (en) * 2020-12-09 2023-11-21 Microsoft Technology Licensing, Llc Promotion of users in collaboration sessions
US11201900B1 (en) * 2020-12-15 2021-12-14 Hio Inc. Methods and systems for multimedia communication while accessing network resources
US11522927B2 (en) 2020-12-15 2022-12-06 Hio Inc. Methods and systems for multimedia communication while accessing network resources
US11233974B1 (en) 2020-12-31 2022-01-25 Capital One Services, Llc Virtual environments associated with processed video streams
US11431891B2 (en) 2021-01-31 2022-08-30 Apple Inc. User interfaces for wide angle video conference
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11449188B1 (en) 2021-05-15 2022-09-20 Apple Inc. Shared-content session user interfaces
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
US11405589B1 (en) * 2021-05-25 2022-08-02 Nooncake Inc Interactive video conferencing interface
US11611600B1 (en) * 2021-08-25 2023-03-21 Microsoft Technology Licensing, Llc Streaming data processing for hybrid online meetings
US11770600B2 (en) 2021-09-24 2023-09-26 Apple Inc. Wide angle video conference
US20230269108A1 (en) * 2022-02-23 2023-08-24 Avaya Management L.P. Controlled access to portions of a communication session recording

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62209985A (ja) * 1986-03-11 1987-09-16 Toshiba Corp テレビ会議装置
JPH0440790A (ja) * 1990-06-07 1992-02-12 Sharp Corp テレビ会議システム用制御装置
JPH09261608A (ja) * 1996-03-27 1997-10-03 Nec Software Ltd テレビ会議端末装置およびテレビ会議画像処理装置
US6646673B2 (en) * 1997-12-05 2003-11-11 Koninklijke Philips Electronics N.V. Communication method and terminal
US20050099492A1 (en) * 2003-10-30 2005-05-12 Ati Technologies Inc. Activity controlled multimedia conferencing
JP2005244744A (ja) * 2004-02-27 2005-09-08 Hitachi Software Eng Co Ltd テレビ会議装置
US7702730B2 (en) * 2004-09-03 2010-04-20 Open Text Corporation Systems and methods for collaboration
US7768543B2 (en) * 2006-03-09 2010-08-03 Citrix Online, Llc System and method for dynamically altering videoconference bit rates and layout based on participant activity
JP2007243854A (ja) * 2006-03-13 2007-09-20 Yamaha Corp テレビ電話会議端末
US20070263824A1 (en) * 2006-04-18 2007-11-15 Cisco Technology, Inc. Network resource optimization in a video conference
US7865551B2 (en) * 2006-05-05 2011-01-04 Sony Online Entertainment Llc Determining influential/popular participants in a communication network
US20090210789A1 (en) * 2008-02-14 2009-08-20 Microsoft Corporation Techniques to generate a visual composition for a multimedia conference event
US8316089B2 (en) * 2008-05-06 2012-11-20 Microsoft Corporation Techniques to manage media content for a multimedia conference event
CN102090069B (zh) * 2008-06-09 2014-04-30 维德约股份有限公司 可缩放视频和音频通信系统中的改进视图布局管理
US8514265B2 (en) * 2008-10-02 2013-08-20 Lifesize Communications, Inc. Systems and methods for selecting videoconferencing endpoints for display in a composite video image
US9641798B2 (en) * 2009-09-24 2017-05-02 At&T Intellectual Property I, L.P. Very large conference spanning multiple media servers in cascading arrangement
US8427522B2 (en) * 2009-12-23 2013-04-23 Lifesize Communications, Inc. Remotely monitoring and troubleshooting a videoconference

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180015477A (ko) * 2016-08-03 2018-02-13 삼성에스디에스 주식회사 참여도 기반의 서비스 제공 방법 및 그 장치
KR20200143435A (ko) * 2018-04-10 2020-12-23 페이스북, 인크. 서술적 모델들에 기초한 자동화된 결정들

Also Published As

Publication number Publication date
US20130169742A1 (en) 2013-07-04
EP2798516A1 (en) 2014-11-05
EP2798516A4 (en) 2015-10-07
JP2015507416A (ja) 2015-03-05
WO2013102024A1 (en) 2013-07-04
JP6151273B2 (ja) 2017-06-21
AU2012327220A1 (en) 2013-07-18

Similar Documents

Publication Publication Date Title
JP6151273B2 (ja) 動的な能動的参加者が無制限のテレビ会議
US10567448B2 (en) Participation queue system and method for online video conferencing
US9113032B1 (en) Selecting participants in a video conference
US11888636B2 (en) Displaying notifications for starting a session at a time that is different than a scheduled start time
US9800622B2 (en) Virtual socializing
US10511643B2 (en) Managing user immersion levels and notifications of conference activities
JP6101973B2 (ja) ボイスリンクシステム
US9329833B2 (en) Visual audio quality cues and context awareness in a virtual collaboration session
US9876827B2 (en) Social network collaboration space
US20140317302A1 (en) Virtual collaboration session access
US20120017149A1 (en) Video whisper sessions during online collaborative computing sessions
US20140122588A1 (en) Automatic Notification of Audience Boredom during Meetings and Conferences
US20140229866A1 (en) Systems and methods for grouping participants of multi-user events
US10230848B2 (en) Method and system for controlling communications for video/audio-conferencing
US20130063542A1 (en) System and method for configuring video data
US20160309116A1 (en) Systems and methods for facilitating communications amongst multiple users
CN114902629A (zh) 用于在通信会话期间提供动态控制的视图状态以改进参与的方法和系统
US20180321806A1 (en) Arranging user representations according to a priority of users that are concurrently generating instant message content
US9137029B1 (en) State and availability monitoring for customer support services for multimedia conferences
US8913102B2 (en) Teleconferencing method and device
TW201114228A (en) Video conference system and method based on instant message and online state
US20230403367A1 (en) Customization of a user interface displaying a rendering of multiple participants of a hybrid communication session
WO2023244315A1 (en) Dynamic control of the delivery of notifications capable of invoking event recordings