KR20060045523A

KR20060045523A - 실시간 오디오-비주얼 통신 및 데이터 공동작업을 위한시스템 및 방법

Info

Publication number: KR20060045523A
Application number: KR1020050028478A
Authority: KR
Inventors: 에릭 루돌프; 헨리큐 에스. 맬바; 이반 타쉬브; 리-웨이 헤; 마이클 에프. 코헨; 용 루이
Original assignee: 마이크로소프트 코포레이션
Priority date: 2004-04-30
Filing date: 2005-04-06
Publication date: 2006-05-17
Also published as: EP1592198A1; CN1694527A; EP1592198B1; US20050262201A1; JP2005318589A; US7634533B2; KR101224815B1; CN1694528B

Abstract

멀티미디어 회의 환경에서 실시간 정보 교환을 용이하게 하는 시스템들 및 방법들이 개시된다. 데이터 클라이언트(들)은 사용자들 간의 데이터 공동작업을 용이하게 하고, 실시간 통신 기능을 제공하는 오디오/비디오(AV) 클라이언트들로부터 분리되어 유지된다. 데이터 클라이언트들은 서로에 대해, 그리고 서버에 대해 원격하게 위치할 수 있다. 원격 사용자 스탠드-인-디바이스가 제공될 수 있는데, 이것은 원격 사용자를 로컬 사용자들에게 제시하는 디스플레이, 예컨대 회의실 내의 이미지들을 캡쳐하고 원격 사무실 내의 AV 클라이언트로 실시간 정보를 제공하는 디지털 자동 팬/틸트/줌 카메라, 및 이와 유사하게 회의실로부터 원격 사무실 내의 AV 클라이언트로 실시간 오디오 정보를 제공하는 마이크로폰 어레이를 포함한다. 또한 본 발명은 하나의 위치 또는 복수의 상이한 위치에 있는 데이터 클라이언트들 간의 파일 전송 및 프레젠테이션 배포를 용이하게 한다.

회의 환경, 정보 교환, 데이터 공동 작업, 데이터 클라이언트, AV 클라이언트, 스탠드-인-디바이스.

Description

실시간 오디오-비주얼 통신 및 데이터 공동작업을 위한 시스템 및 방법{SYSTEMS AND METHODS FOR NOVEL REAL-TIME AUDIO-VISUAL COMMUNICATION AND DATA COLLABORATION}

도 1은 본 발명의 일 국면에 따라 AV 통신을 가능하게 하는 오디도/비디오 (AV) 클라이언트들 및 데이터 공동작업 기능을 제공하는 별개의 데이터 클라이언트들을 포함하는 멀티미디어 회의 환경에서 실시간 정보 교환 및 데이터 공동작업을 용이하게 하는 시스템(100)의 도면.

도 2는 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 실시간 정보 교환 및 데이터 공동작업을 용이하게 하기 위해 프로세서 및 메모리를 포함하는 시스템(200)의 도면.

도 3은 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 실시간 정보 교환 및 데이터 공동작업을 용이하게 하기 위해 추론(inference)을 행하는 인공 지능 컴포넌트를 포함하는 시스템(300)의 도면.

도 4는 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 디지털 자동 팬/틸트/줌 카메라 및/또는 웹 카메라를 이용함으로써 실시간 정보 교환을 용이하게 하는 시스템(400)의 도면.

도 5는 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 마이크로폰 어 레이를 이용함으로써 실시간 정보 교환을 용이하게 하는 시스템(400)의 도면.

도 6는 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 데이터 공동작업을 용이하게 하게 위해 룸 서버 및 적어도 두 개의 데이터 클라이언트를 포함하는 시스템(600)의 도면.

도 7은 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 실시간 정보 교환 및 데이터 공동작업을 용이하게 하는 예시적인 사용자 인터페이스(700)의 도면.

도 8은 본 발명의 일 국면에 따른, 원격에 위치한 적어도 하나의 회의 장소(conference site)에서 인터페이스를 제공하는 원격 스탠드-인 디바이스(Stand-in Device)를 포함하며 실시간 정보 교환 및 데이터 공동작업을 용이하게 하는 멀티미디어 회의 환경(800)의 도면.

도 9는 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 실시간 AV 정보 교환을 용이하게 하기 위해 AV 클라이언트와 연관된 사용자 인터페이스를 통해 볼 수 있는 예시적인 워핑된 비디오 이미지들(warped video images)의 도면.

도 10은 본 발명의 일 국면에 따른, 충분히 설비된 적어도 하나의 회의실 및 원격에 위치한 적어도 하나의 회의 장소를 포함하며 실시간 정보 교환 및 데이터 공동작업을 용이하게 하는 멀티미디어 회의 환경(1000)의 도면.

도 11은 본 발명의 일 국면에 따른, 멀티미디어 회의 환경에서 실시간 정보 교환을 제공하고 사용자들로 하여금 회의에 참석할 수 있게 하기 위한 방법론(methodology; 1100)의 도면.

도 12는 본 발명의 일 국면에 따른, 멀티미디어 회의 환경에서 실시간 정보 교환을 제공하고 프레젠테이션의 공유를 용이하게 하기 위한 방법론(1200)의 도면.

도 13은 본 발명의 일 국면에 따른, 멀티미디어 회의 환경에서 실시간 정보 교환을 제공하고 실시간 문서 캡쳐를 용이하게 하기 위한 방법론(1300)의 도면.

도 14 및 도 15는 본 발명의 국면들에 따른, 예시적인 컴퓨팅 환경(1400 및 1500)의 도면.

<도면의 주요 부분에 대한 부호의 설명>

102 : 룸 서버 PC

104 : 비디오 컴포넌트

106 : 오디오 컴포넌트

108 : 데이터 클라이언트

110 : 가상 디렉터

112 : AV 클라이언트

114 : 사용자 인터페이스

116 : AV 서버

118 : 데이터 서버

본 발명은 일반적으로 정보 교환에 관한 것이고, 보다 구체적으로는 원격지 간의 실시간 멀티미디어 정보 교환에 관한 것이다.

컴퓨터가 더욱 빨라지고, 작아지며, 저렴해지고, 보다 성능이 좋아짐에 따라 사용자의 경험들을 향상시키는 다양한 기술들을 채용할 수 있는 기회가 증가하고 있다. 회의 환경에 있어서, 사용자들의 컴퓨팅 장치들은 폭 넓게 다양해진 능력들을 가질 수 있으나, 이는 특정 유형의 정보를 복수의 사용자에게 제공하는 경우에 문제가 될 수 있다. 회의를 위한 기존의 시스템들 및 방법들은 분산된 참석자들 간의 미팅을 용이하게 하는 것에 대해 심각하게 연구하지 않는다. 때때로, 미팅이나 회의 중에 제시된 정보는 차후의 검토를 위해 적절히 문서화되거나 보존되지 않으며, 이는 회의의 효율 및 정보 교환과 연관된 문제들을 더 악화시킬 수 있다.

따라서, 회의 환경에 있는 사용자들 간의 향상된 실시간 데이터 공동작업(real-time data collaboration) 및 통신을 촉진하는 시스템들 및 방법들에 대한 필요성이 당해 기술 분야에서 존재하나 충족되지 못하고 있다.

본 발명의 몇몇 국면들에 대한 기본적인 이해를 돕기 위해 이하에서 본 발명의 간소화된 요약이 제시된다. 이 요약은 본 발명의 광범위한 개요가 아니다. 이는 본 발명의 핵심/주요 요소들을 밝히거나 본 발명의 범위를 서술하기 위한 것이 아니다. 이 요약의 유일한 목적은, 차후에 제시될 보다 상세한 설명에 대한 서문으로서 본 발명의 몇몇 개념들을 단순화된 형태로 제시하는 것이다.

본 명세서에서 개시되고 청구된 본 발명은 멀티미디어 회의 환경에 있는 복수의 사용자 간의 실시간 정보 교환에 관한 것이다. 본 시스템은 상이한 위치에 있는 사용자들(예컨대, 회의실에 있는 사용자와 원격 사무실에 있는 사용자) 또는 하나의 회의실 내에 위치한 사용자들에 대하여 미팅 기능을 제공할 수 있다. 실시간 정보 교환을 촉진하기 위해, 예를 들면, 하이파이 오디오(high-fidelity audio) 및 방향성 정보(directional information)를 제공하는 마이크로폰 어레이를 포함하는 다양한 기술들이 이용될 수 있다. 본 시스템은 또한, 화자들이 회의실 내의 어떤 곳에 앉아있든지 간에, 그 화자들에 대한 디지털 자동 팬/틸트/줌 프레이밍(digital automatic pan/tilt/zoom framing) 및/또는 사람들의 얼굴 크기를 같게 하기 위한 자동 워핑(warping)이 가능한 실내 카메라를 포함할 수 있다. 또한, 물리적인 화이트보드 콘텐츠의 실시간 송신 및 스냅 샷 캡쳐는, 예컨대, 그 보드 상에 표시된 미팅 기록들을 보존 및/또는 배포하기 위한 웹-카메라를 통해 실현될 수 있다. 문서 주석들을 빨리 캡쳐하여 송신할 수 있도록 "캡쳐 및 송신(Capture-and-send)" 기능이 제공되며, 나아가 이 기능은 잉크 주석들의 송신을 위해 타블렛 PC로 통합되어 제공될 수 있다. 이러한 국면은 인쇄 및 팩스 전송 등을 거치지 않고도 캡쳐된 문서들을 송신할 수 있게 한다. 본 발명의 다른 국면은 사용자로 하여금 데이터 서버(Data Server) 데이터베이스와 그 사용자의 고유한 하드 드라이브 간에 파일들을 전송할 수 있게 하는 드래그 앤 드롭(drag-and-drop) 인터페이스를 포함한다. 또한, 문서, 예컨대, 파워 포인트 프레젠테이션 등을 회의에 참석하고 있는 다른 사용자들에게 배포(broadcast)하기 위해 프레젠테이션 슈트(Presentation Chute)가 제공될 수 있으며, 그 문서를 수신하는 데이터 클라이언트(Data Client)는 문서의 유형 및 문서와 연관된 다른 메타데이터(metadata)에 기초하여 문서에 대하여 적절한 행동들을 취할 수 있다. 또한, 본 발명은 아웃룩 (Outlook) 및/또는 쉐어포인트(SharePoint)와 같은 다양한 인터페이스를 통하여 오디오 콘텐츠가 검색 가능하도록, 미팅의 레코딩 및 자동 인덱싱을 제공한다.

본 발명의 일 국면에 따르면, 물리적으로 동일한 회의실에 위치하거나 및/또는 서로 원격에 위치할 수 있는 둘 이상의 참석자 간의 실시간 회의를 용이하게 하기 위해 사용자에게 하나 이상의 사용자 인터페이스(user interface; UI)가 제시되는 시스템이 제공된다. 이 시스템은 실시간 오디오/비디오 통신 및 실시간 데이터 공동작업 양자를 제공한다. 비디오 이미지들(imagery) 및 스틸 이미지들 양자를 가능하게 하는 비디오 컴포넌트가 제공될 수 있다. 또한, 비디오 컴포넌트는 사용자에 대한 프레젠테이션을 위해 이미지 및/또는 비디오를 자동적으로 워핑할 수 있다. 이러한 방식으로, 시스템은, 사용자들로 하여금, 예를 들어, 문서, 칠판, 화이트 보드, 또는 제1 사용자가 제2 사용자와 공유하기 원할 수도 있는 임의의 다른 관련된 정보를 실시간 비디오 및/또는 스틸 이미지들로 캡쳐하여 전송할 수 있게 하면서 실시간으로 사용자에게 회의실 환경을 제공할 수 있다. 비디오 컴포넌트는, 예컨대 회의실 및 그 내부의 사람의 비디오를 캡쳐하는 비디오 카메라 및, 예컨대 미팅 기록을 포함하는 화이트 보드, 서류 등의 비디오 및/또는 스틸 이미지들을 캡쳐할 수 있는 별개의 웹 카메라를 포함할 수 있다. 시스템은 또한 회의 환경에서 실시간 오디오 기능을 제공하는 오디오 컴포넌트를 포함한다. 그 외에도, 사용자에게 풍부한 회의 경험을 제공하도록 오디오 및 비디오 컴포넌트들을 조정(coordination)할 수 있는 가상 디렉터(Virtual Director)가 제공된다.

본 발명과 관련된 일 국면에 따르면, 데이터 클라이언트 UI(Data Client UI) 는 실시간 문서 공유 및/또는 프레젠테이션 시청을 용이하게 하기 위해 각각의 사용자에게 프레젠테이션 슈트를 제공할 수 있다. 예를 들어, 프레젠테이션 슈트 아이콘이 UI를 통해 제시되어 사용자로 하여금 문서(예를 들면, 사진, 워드 파일, 파워포인트 프레젠테이션 등)를 아이콘으로 드래그하여 그 문서를 그 아이콘에 드롭할 수 있게 하며, 이어서 시스템은 가상 회의에 참석하는 다른 모든 데이터 클라이언트들에게 배포하기 위해 그 문서를 데이터 서버로 업로딩할 수 있다. 예를 들어, 프레젠테이션 문서가 파워포인트 프레젠테이션과 같은 프레젠테이션 슈트에 드롭되면, 송신자는 그 프레젠테이션이 다른 사용자의 UI에서 자동적으로 시작되도록 선택할 수도 있고, 또는 프레젠테이션에 대한 최적의 모드 제공을 도모하기 위하여 데이터 서버로 하여금 우선 다른 사용자의 컴퓨터의 능력을 판단하게 하도록 선택할 수도 있다. 예를 들어, 수신하는 사용자가 핸드헬드 컴퓨터, 이를테면 PDA 또는 휴대폰을 통해 가상 회의에 참석하는 경우에는, 그 사용자에게 제시된 UI는 노트북 등에 비해 제한된 능력을 가질 것이다. 그러한 경우에, 데이터 서버는, 예컨대 파워포인트 뷰어(PowerPoint Viewer) 또는 임의의 다른 적합한 패키지에서 프레젠테이션을 래핑(wrap)함으로써, 수신하는 사용자의 UI의 상대적으로 제한된 능력에도 불구하고 그 수신하는 사용자에 의해 그 프레젠테이션이 시청될 수 있게 할 수 있다. 따라서, 시스템은 두 가지 모드의 데이터 공유를 지원할 수 있다. 예를 들어, 데이터는 원래의 포맷으로 하나의 데이터 클라이언트로부터 다른 클라이언트로 송신될 수도 있고, 대안적으로, 수신자가 편집 능력 없이도 그 데이터를 시청할 수 있도록, 데이터는 시청을 가능하게 하기 위해 적절하게 포매팅될 수도 있다(예 를 들어, 원 파일(raw file)로 송신되지 않는다).

본 발명의 다른 국면에 따르면, 가상 회의와 연관된 컴포넌트들을 중앙집중적으로 제어하는 룸 서버(Room Server)를 포함하는 룸 서버 PC가 제공된다. 룸 서버 PC는 별개의 데이터 서버 및 AV 서버를 더 포함하며 이들은 룸 서버에 의해 조정될 수 있다. 가상 미팅에 참석하는 모든 데이터 클라이언트들은 데이터 서버에 접속되며 그에 의해 조정된다. 또한, 오디오-비디오(AV) 클라이언트는 룸 서버 PC 상에서 실행될 수 있으며, 가상 회의 시스템과 연관된 데이터 클라이언트와는 별개이며 분리되어 있다. AV 클라이언트는, 회의 환경의 비디오 및/또는 스틸 이미지들의 제공을 용이하게 하며 사용자로 하여금 그 회의 환경 내에 위치한 디지털 자동 팬/틸트/줌(digital automatic pan/tilt/zoom (DPTZ)) 카메라를 선택적으로 줌, 팬, 및/또는 틸트할 수 있게 하는 소프트웨어를 포함한다. AV 클라이언트는 또한, 예를 들어, 회의 환경 내의 마이크로폰 어레이 등에 인접하게 위치한 화자의 경우와는 달리, 그 마이크로폰 어레이로부터 멀리 위치한 화자의 음성(voice)의 증폭을 가능하게 하도록, 잡음 감소, 이득 제어와 같은 오디오 데이터의 조작을 가능하게 한다. 데이터 클라이언트는, 예를 들면, 노트북, PDA, 휴대폰, 또는 가상 회의에 참석하기 위한 임의의 다른 적합한 UI 상에서 실행될 수 있으며, 회의실에 위치하거나 다른 건물, 도시, 국가 등의 사무실과 같은 원격지에 위치할 수 있다. 데이터 클라이언트 소프트웨어는 사용자들로 하여금, 프레젠테이션 슈트 등을 통해 문서들을 배포하도록, 드래그-앤-드롭 인터페이스를 통해 파일들을 공유할 수 있게 하는 기능을 제공한다. 따라서, 데이터 클라이언트 및 AV 클라이언트 양자가 UI들 을 포함하는 소프트웨어 모듈들이라 하더라도, 이들은 별개의 엔티티로서 존재할 수 있는데, 이 경우 AV 클라이언트는 AV 콘텐츠의 캡쳐, 송신, 및/또는 렌더링(예컨대, AV 통신)을 담당하며, 데이터 클라이언트는 데이터 공동작업(예컨대, 파일 전송, 프레젠테이션 배포 등)을 담당한다. AV 클라이언트를 데이터 클라이언트로부터 분리함으로써, 사용자는 AV 통신 없이도 데이터 공동작업을 수행하고, (예컨대, 오디오 채널로서 휴대폰을 이용하는 것을 통해) 데이터 공동작업 없이도 AV 통신을 수행하며, 그리고/또는 데이터 공동작업 및 AV 통신 양자를 동시에 수행할 수 있게 된다.

본 발명의 또 다른 국면에 따르면, 회의실 내의 사용자가 그 회의 환경에 있는 적어도 하나의 다른 사용자와 공유하고자 하는, 예컨대, 문서, 화이트 보드 콘텐츠 등의 고해상도 디지털 캡쳐를 용이하게 하는 웹 카메라가 제공된다. 본 발명의 이러한 국면에 따르면, 신속한 배포를 위해, 그리고/또는 가상 회의 중에 그리고/또는 차후의 보다 편리한 시간에 적어도 하나의 사용자에 의해 검토되는 것을 위해, 하드 카피 문서가 전자 카피 문서(electronic copy of the document)로 변환될 수 있다. 이는 알고리즘, 스케치 등과 같은 화이트 보트 콘텐츠에 대하여 특히 유용하며, 그러한 콘텐츠는 검토를 위해 전자적 형태로 영구 보존됨으로써 화이트 보드 콘텐츠가 사고로 인해 또는 부주의로 보드로부터 지워지는 위험을 감소시킨다. 웹 카메라에 의해 캡쳐된 이미지들은 자동적으로 AV 서버에 저장될 수 있으며, 가상 회의 내의 참석자들에게 바로 인쇄가 가능하게(print-ready) 제시될 수 있다. 나아가, 웹 카메라는 이동할 수 있으며, 테이블 상에 수평으로 놓여있는 문 서, 수직 화이트 보드 상의 문장 등의 캡쳐를 용이하게 하기 위해 회의 환경의 이곳 저곳으로 이동될 수 있다. 또한, 웹 카메라는 그 이용을 위해 회의 환경(예를 들면, 회의실, 원격 사무실 등) 내의 임의의 컴퓨터에 플러그인 될 수 있다.

본 발명의 또 다른 국면에 따르면, 가상 미팅에 참석하도록 승인된 사용자가 그 미팅이 진행 중이거나 곧 시작된다는 점 등을 통지 받을 수 있는 자동 발견 기능(automatic discovery functionality)이 제공될 수 있다. 예를 들어, 사용자는 룸 서버로부터, 가상 회의가 곧 시작된다는 등의 이메일 통지를 수신할 수 있다. 또한, 사용자가 룸 서버와 연관된 미리 결정된 경계(perimeter)에 들어가는 경우에, 그 사용자는 가상 회의에 합류하도록 초청될 수 있다. 사용자의 초청은 사용자의 노트북, PDA, 휴대폰 등과 연관된 이메일 어드레스, 인터넷 프로토콜(IP) 어드레스, 또는 특정 사용자의 컴퓨팅 장치를 식별하는 임의의 다른 적합한 수단을 통해 사용자 ID(identification)를 검증할 수 있는 참석자 명단(guest list)에 선택적으로 기초할 수 있다.

앞의 내용 및 그와 연관된 목적의 달성에 대하여, 본 발명의 소정의 예시적인 국면들이 본 명세서에서 이하의 설명 및 첨부된 도면들과 관련하여 기술된다. 그러나 이러한 국면들은 본 발명의 원리들이 이용될 수 있는 다양한 방식들 중 몇 가지만을 나타내며 본 발명은 그러한 모든 국면들 및 그 동등물들(equivalents)을 포함하도록 의도된다. 본 발명의 다른 장점들 및 신규한 특징들은 이하의 발명의 상세한 설명을 도면들과 함께 고려할 때 명백하게 될 것이다.

개념 및 정의 :

소프트웨어 모듈들

룸 서버: 일정(calendar) 관리, 패스워드 검증, 데이터 서버와 AV 서버 간의 조정.

데이터 서버: 이에 접속된 모든 데이터 클라이언트들 간의 데이터 공유를 촉진하고, 특정 미팅에 대한 서버 파일들을 저장하는 모듈.

AV 서버: 멀티포인트 제어 유닛(multipoint control unit: MCU)과 같이 행동하며, 복수의 유입 AV 스트림들(in-coming AV streams)을 적절히 혼합하는 모듈. AV 서버는 적절한 출력 스트림(예를 들면, 한 사람의 비디오, 두드러진 사각형(prominent square)에 복수의 사람들을 프레이밍)을 결정 및/또는 제공할 수 있다.

데이터 클라이언트: 데이터 공유, 파일 전송 등을 수행하도록 사용자에게 사용자 인터페이스(UI)를 제공. 모든 데이터 클라이언트들은 데이터 서버를 통해 접속된다.

AV 클라이언트: AV 통신을 수행. 모든 AV 클라이언트들은 AV 서버를 통해 접속된다. AV 클라이언트들 및 데이터 클라이언트는 서로 통신해야만 하는 것은 아니며 오히려 별개의 독립된 엔티티이다.

데이터 뷰어 (Data Viewer): 데이터 클라이언트가 (예컨대, 데이터 서버를 통해) 다른 데이터 클라이언트로부터 수신한 문서(예컨대, 사진, 파워포인트 프레젠테이션(PPT))에 대하여 적합한 뷰어를 활성화. 예를 들어, 문서가 MDI인 경우에 는, MDI 뷰어가 활성화될 것이다. 문서가 PPT인 경우에는, PPT 뷰어가 활성화될 것이다.

로컬 파일 영역(Local File Region) 및 서버 파일 영역(Server File Region): UI의 로컬 파일 영역으로부터 서버 파일 영역으로의 파일의 "드래그-앤-드롭"을 통해, 로컬 PC로부터 데이터 서버로의 파일(원 비트들은 불변)의 전송을 용이하게 함. 서버 파일 영역 내의 임의의 파일이 임의의 사용자의 로컬 파일 영역으로 드래그-앤-드롭 될 수 있다. 서버 파일 공간은 모든 미팅 참석자들에 대해 공용 폴더(public folder)로 간주될 수 있다. 전송을 용이하게 하기 위해 임의의 원 파일이 비트-대-비트(bit-by-bit)로 복사된다(도 7 참조, 사용자 인터페이스(700)).

프레젠테이션 슈트: (도 7 참조) 다른 사용자들이 문서(예컨대, 사진, 워드 파일, PPT 파일 등)를 볼 수 있게 하고 싶은 사용자로 하여금, 자신의 로컬 파일 공간으로부터 프레젠테이션 슈트로 문서를 드래그-앤-드롭할 수 있도록 함. 그 후, 그 문서는 데이터 서버로 업로딩되고, 적절한 포맷으로 변환되며, 모든 데이터 클라이언트들에게 송신된다. 문서의 포맷에 기초하여, 데이터 클라이언트는 적절한 데이터 뷰어를 띄울 것이다. 파일 전송과는 달리, 프레젠테이션 슈트는 문서의 이미지화된, 편집이 불가능한 버전만을 타 개체들과 공유한다.

하드웨어 모듈들 및 구성들:

룸 서버 PC: 룸 서버, 데이터 서버, 및 AV 서버를 실행한다. 일반적으로, 회의실 AV 클라이언트도 실행한다.

스탠드-인 디바이스: (도 8 참조) 모니터, 스피커들, 마이크로폰 어레이, 및 광각 카메라(wide-angle camera)를 포함한다. 룸 서버는 보통 이러한 스탠드-인 디바이스에 접속한다. 도 9(902)에서 도시된 바와 같이, 회의실의 대부분의 원 비디오는 광각 카메라에 의해 캡쳐된다.

웹 카메라: 물리적인 화이트 보드/문서의 이미지 캡쳐를 용이하게 한다. 웹 캠은 데이터 클라이언트를 실행하는 임의의 PC/노트북/등에 접속될 수 있으며, 이러한 접속은 그 컴퓨팅 장치가 회의실 내에 또는 원격지에 있는지 여부와 무관하다.

예시적인 구성:

회의실에서, 사용자들은 보통 그들의 노트북/타블렛 또는 다른 적합한 컴퓨팅 장치를 가져온다. 룸 서버 PC가 룸 서버, 데이터 서버, AV 서버, 및 AV 클라이언트를 실행하는 동안, 회의실 내의 노트북들/타블렛들 등은 각각의 사용자들이 미팅에 참여(데이터 공동작업)할 수 있도록 데이터 클라이언트들을 실행한다. 룸 서버 PC가 이미 그 모니터(스탠드-인 디바이스의 일부) 상에서 AV 클라이언트를 표시하기 때문에, 회의실 내의 사용자들은 그들의 개별 노트북들 상에서 AV 클라이언트들을 실행할 필요가 없다는 점에 유의하자. 또한, 사람들이 그 회의실로 노트북들을 가져올 필요가 없다는 점에도 유념하자. 그러한 경우에는, 데이터 공동작업을 수행하고자 하는 사용자는 다른 사용자의 노트북을 이용하거나, 룸 서버 PC 상에서 데이터 클라이언트를 실행할 수 있다. 그러나, 이상적으로는 각각의 사용자가 데 이터 공동작업을 수행하기 위해 자신의 노트북을 가지고 있는 것이 미팅 중에 훨씬 편리하고 효율적일 것이다.

원격 사무실들에 있는 사용자들은 그들의 데스크탑 PC, 노트북, 및/또는 다른 컴퓨팅 장치(들) 상에서 AV 클라이언트만을 실행하기, 데이터 클라이언트만을 실행하기, 또는 AV 클라이언트 및 데이터 클라이언트 모두를 실행하기 중에서 선택할 수 있다. 원격 사용자들은 다른 사용자들이 자신을 보거나 그리고/또는 듣리는 것을 바라는 경우에는, 웹 캠 및/또는 마이크로폰이 원격 사용자들의 PC들 상에 제공될 수 있다. 원격 사무실들은 하나의 사무실 내의 하나 또는 복수의 사용자를 포함할 수 있으며, 원격 사무실들은 하나 이상일 수 있다. 원격 사무실이 복수의 원격 사용자를 포함하는 경우에는, 그 원격 사무실은 회의실과 유사하나 그보다 열등한 것이 될 수 있다.

또한, 복수의 회의실이 존재할 수 있는데, 각각의 회의실은 고유한 룸 서버 PC 및 스탠드-인 디바이스를 갖는다. 예시적인 일 실시예에서, 회의실들 중 단 하나만이 주된 회의실로 선택될 필요가 있고, 그 회의실의 룸 서버 PC는 룸 서버, 데이터 서버, 및 AV 서버 각각을 실행한다. 그러한 경우에, 다른 룸 서버 PC들은 AV 클라이언트를 실행하기만 하면 된다. 다른 예시적인 구성에 따르면, 모든 룸 서버 PC는 자신의 룸 서버, 데이터 서버, AV 서버, 및 AV 클라이언트를 실행한다.

본 발명의 국면들과 관련하여, 몇몇 모듈들은 본 발명의 기능상 옵션일 수 있기 때문에, 대해 선택적소프트웨어 및 하드웨어 모듈들 및 그 구성들에 대한 앞의 설명에 의해 제한되는 것은 아니다. 예를 들어, 최소한의 구성은 (룸 서버 및 데이터 서버를 실행하는) 룸 서버 PC 및 두 개의 데이터 클라이언트를 포함할 수 있다. 소프트웨어 및/또는 하드웨어 컴포넌트들의 추가는 사용자의 회의 경험을 풍부하게 할 수 있다.

이제 본 발명이 도면들을 참조하여 기술될 것이며, 본 명세서에 걸쳐 동일한 도면 부호들은 동일한 구성요소들을 지칭하도록 사용된다. 이하의 설명에서, 예시를 목적으로, 본 발명의 충분한 이해를 제공하기 위해 다수의 특정 세부 사항들이 설명된다. 그러나, 이러한 특정 세부 사항들 없이도 본 발명이 실시될 수 있음이 명백할 것이다. 다른 경우들에서는, 본 발명의 설명을 용이하게 하기 위해 잘 알려진 구조들 및 장치들은 블록도 형태로 도시된다.

본 출원에서 사용된 바와 같이, 용어 "컴포넌트" 및 "시스템"은 하드웨어, 하드웨어 및 소프트웨어의 조합, 소프트웨어, 또는 실행 중인 소프트웨어인 컴퓨터-관련 엔티티(computer-related entity)를 지칭하도록 의도된다. 예를 들어, 컴포넌트는 프로세서 상에서 실행되는 프로세스, 프로세서, 객체, 실행 가능(an executable), 실행 스레드(thread of execution), 프로그램, 및/또는 컴퓨터가 될 수 있으나 이에 한정되지는 않는다. 예를 들어, 서버 상에서 실행되고 있는 애플리케이션 및 그 서버 양자가 컴포넌트가 될 수 있다. 하나 이상의 컴포넌트가 프로세스 및/또는 실행 스레드 내에 상주할 수 있으며, 컴포넌트는 하나의 컴퓨터 상에서 로컬화(localization)되거나, 그리고/또는 둘 이상의 컴퓨터 간에 분산될 수 있다.

본 명세서에서 사용된 바와 같이, 용어 "추론(inference)"은 일반적으로 이 벤트들 및/또는 데이터를 통해 캡쳐된 것과 같은 일련의 관측들(observations)로부터 시스템, 환경, 및/또는 사용자의 상태들을 추리(reasoning about)하거나 추론하는 프로세스를 지칭한다. 추론은 특정 문맥(context) 또는 동작을 식별하도록 이용될 수도 있고, 예컨대 상태들에 대한 확률 분포(probability distribution over states)를 생성할 수도 있다. 추론은 확률적(probabillistic)일 수 있는데, 다시 말해, 데이터 및 이벤트들의 고찰(consideration)에 기초하는 흥미로운 상태들(states of interest)에 대한 확률 분포의 계산(computation)이 될 수 있다. 추론은 또한 일련의 이벤트들 및/또는 데이터로부터 상위-레벨 이벤트들을 구성하기 위해 이용되는 기법들을 지칭할 수 있다. 그러한 추론은, 이벤트들이 밀접한 시간적 근접도(close temporal proximity)로 상관되어 있는지 여부 및 이벤트들 및 데이터가 하나의 또는 여러 이벤트 및 데이터 소스들로부터 유래한 것인지 여부와 무관하게, 일련의 관측된 이벤트들 및/또는 저장된 이벤트 데이터로부터 새로운 이벤트들 또는 동작들이 구성(construction)되는 결과를 가져온다.

도 1은 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 실시간 정보 교환을 용이하게 하는 시스템(100)의 도면이다. 시스템(100)은 가상 회의 환경 내의 통신 및 공동작업을 조정하는 중앙 룸 서버(도시되지 않음)를 포함하는 룸 서버 PC(102)를 포함한다. 룸 서버 PC(102)는 회의실, 비즈니스 사무실, 홈 오피스 등과 같은 회의 환경을 모니터링할 수 있는 비디오 컴포넌트(104) 및 오디오 컴포넌트(106)에 동작 가능하게(operatively) 연결된다. 모니터링되고 있는 특정한 환경은 하나의 또는 복수의 사용자를 포함할 수 있으며, 각각의 사용자는 데이터 클라 이언트(108)를 통해 데이터 공동작업에 착수할 수 있다. 룸 서버 PC(102)는, 비디오 컴포넌트(104) 및 오디오 컴포넌트(106)에 대한 실시간 제어를 용이하게 하며 사용자 요청들을 이행하는 가상 디렉터(Virtual Director; 110), 및 가상 회의에 참석하며 회의실 내에 위치하는 사용자들에게 AV 기능을 제공하는 소프트웨어를 포함하는 오디오-비디오(AV) 클라이언트(112)를 포함한다. 가상 디렉터는 룸 서버 PC(102) 내의 AV 클라이언트로 동작 가능하게(operably) 연결된다.

또한, 룸 서버 PC(102)는 AV 클라이언트들 간의 AV 통신 및/또는 정보 교환을 조정하는 AV 서버(116)를 포함하는데, 예를 들어, 자체의 고유한 AV 클라이언트를 실행하는 원격 PC를 통해 원격 사용자는 가상 회의에 참석한다. 이와 유사하게, 룸 서버 PC(102)는, 회의실 내에 존재하는 로컬 PC 또는 원격 PC 상에서 실행되는 데이터 클라이언트들(108) 간의 정보 교환 및 데이터 공동작업을 조정하는 데이터 서버(118)를 포함한다. AV 클라이언트(112) 외에도 데이터 클라이언트가 룸 서버 PC(102) 상에서 실행될 수 있으나, 반드시 그 룸 서버 PC(102) 상에서 실행될 필요는 없다는 점을 인식해야 할 것이다. 룸 서버 PC(102) 상에 상주하는 룸 서버는, 예를 들어, 일정 관리(calendar management), 패스워드 검증, 및 AV 서버(116)와 데이터 서버(118) 간의 조정을 제공할 수 있다. AV 서버(116) 및 데이터 서버(118) 양자를 관리하는 룸 서버를 제공함으로써, 그들 간의 직접적인 통신이 필요하지 않게 되며, 따라서 AV 서버(116)가 데이터 서버(118)로부터 분리된 별개의 엔티티로서 존재할 수 있게 된다.

주어진 데이터 클라이언트(108)가 원격 PC 또는 로컬 PC 상에서 실행되는지 여부에 무관하게, 모든 데이터 클라이언트들(108)은 데이터 서버(118)에 접속된다. 룸 서버 PC(102) 상에서 실행되는 AV 클라이언트는 룸 서버 PC(102) 내의 AV 서버(116)에 접속된다. 원격 사용자는 원격 PC로부터 추가적인 AV 클라이언트를 띄울 수 있으며, 그러한 원격 AV 클라이언트도 룸 서버 PC(102) 내의 AV 서버(116)에 접속될 것이다. 이러한 방식에 있어서, AV 서버(116)는, 복수의 AV 클라이언트로부터의 유입 AV 스트림들(AV streams)이 적절히 혼합되도록 하는 멀티포인트 제어 유닛과 유사하다.

비디오 컴포넌트(104)는 이미지들을 비디오 및/또는 스틸 이미지들로 캡쳐할 수 있는데, 이는, 예컨대 문서, 화이트 보드 등의 이미지들을 캡쳐하는 기능을 제공하면서 비디오 회의가 진행될 수 있도록 한다. 예를 들어, 디지털 자동 팬/틸트/줌 (DPTZ) 카메라와 같은 광각 웹 카메라가 회의실 및 그 내부에 존재하는 사람들의 비디오를 캡쳐할 수 있는 한편, 별개의 이동 웹 카메라는, 예를 들어, 화이트 보드가 미팅 중에 채워지고(populated) 있을 때의 실시간 화이트 보드의 비디오, 차후에 검토되기 위한 문서들 및/또는 채워진 화이트 보트의 스틸 이미지들 등을 캡쳐할 수 있다. 비디오 컴포넌트의 그러한 이중 기능은 사용자로 하여금, 차후에 검토될 수 있는 문서들, 화이트 보드들 등의 이미지들을 제공하면서, 하나의 위치에서 그리고/또는 원격 위치들(예를 들면, 시애틀의 회의실과 런던의 원격 사무실) 간에 행해지는 회의를 계속할 수 있게 한다. 또한, 비디오 컴포넌트는 자동-워핑 기능(auto-warping functionality)을 제공하도록 동작할 수 있는데, 이 기능은, 회의실 내의 비디오 컴포넌트에 더 가까운 참석자들에 비해서, 더 멀리 있는 참석자 들의 보다 나은 뷰(view)를 원격 사용자에게 제공할 수 있도록, 예컨대 회의실 내의 복수의 참석자들의 상대적인 근접도(proximity)를 동등하게 할 수 있다.

비디오 컴포넌트(104) 및 오디오 컴포넌트(106) 양자는, 그 비디오 컴포넌트(104) 및 오디오 컴포넌트(106)에 대한 제어를 행사할 수 있는 가상 디렉터(110) 및 AV 클라이언트(112)에 통신 가능하게 연결된다. 예를 들어, 오디오 컴포넌트(106)으로부터의 정보는 회의 환경 내의 현재 화자(speaker)의 위치를 파악하는데 이용될 수 있다. 그러한 위치 정보는, 가상 디렉터(110)가 비디오 컴포넌트(104)에게, 오디오 정보로부터 유도된(derived) 위치에서 말을 하고 있는 사람의 비디오, 이미지들, 프레임들 등을 캡쳐하도록 지시(direct)하는데 이용될 수 있다. 예를 들어, 비디오 컴포넌트(104)는 화자의 위치를 나타내는 정보에 기초하여 그 화자를 줌(zoom)할 수 있는 디지털 비디오 카메라를 포함할 수 있다.

가상 디렉터(110)는, 예를 들어, 회의실에서 서로 말을 주고 받고 있는 두 사람 사이에서 비디오 컴포넌트(104)가 뷰를 전환하도록 허용된 빈도(frequency)를 한정하는 것과 같은, 영상기법(cinematography)의 다양한 규칙 등을 이용할 수 있다. 이러한 경우에, 두 명의 화자가 나란히(side-by-side) 화면에 비춰질 수 있다. 또한, 원격 사용자는 가상 디렉터(110)를 어느 때라도 무효화(override) 시킬 수 있는 권한을 가질 수 있고, 그 결과 그 원격 사용자가 원하는 임의의 시야를 선택할 수 있다.

오디오 컴포넌트(106)는 회의 환경을 향상시키도록 하이-파이(high-fidelity) 사운드 캡쳐 능력을 제공할 수 있다. 회의실 내의 어떤 지점으로부터도 화자의 음성이 잘 수신될 것을 보장하기 위해 오디오 컴포넌트(106)는 마이크로폰들의 어레이 내에 구성될 수 있다. 그러한 배치는 잡음 감소, 음향 반향 제거(acoustic echo cancellation; AEC), 및 자동 이득 제어(automatic gain control; AGC)를 용이하게 할 수 있고, 이들 모두는 수십 데시벨 정도의 전체 잡음 감소에 공헌할 수 있다. 오디오 컴포넌트(106)는, 글리치(glitch)가 없는 오디오 신호를 제공하고 사용자의 회의 환경을 향상하기 위해, 예를 들어, 네트워크 구성에서의 변수 지연(variable delay) 및/또는 지터(jitter)로부터 유발되는, 수신 지점에서 검출된 품질 결함들(quality deficits)을 완화시킬 수 있는 오디오 복구 능력(audio healing capabilities)도 포함한다.

룸 서버 PC(102)는, 데이터 서버(118)를 통해 룸 서버 PC(102)로부터 정보를 수신하는 적어도 하나의 데이터 클라이언트(108)에 동작 가능하게 더 연결된다. 또한, 데이터 클라이언트(108)는 데이터 서버(114)로부터 수신된 정보의 사용자에게로의 프레젠테이션을 용이하게 하는 사용자 인터페이스(UI; 114)를 포함할 수 있다. 데이터 클라이언트는, 예컨대, 노트북, 핸드헬드 컴퓨팅 장치, PDA, 휴대폰, 또는 데이터 서버(118)로부터 정보를 수신할 수 있는 임의의 다른 적합한 장치 상에서 실행될 수 있고, 회의에 참여하는 사용자에게 그러한 정보를 의미있는 방식으로 보여줄 수 있다. 시스템(100)의 데이터 클라이언트(108)는, 가상 회의에 참석하는 로컬 사용자들이 개별 AV 클라이언트 없이도 AV-관련 데이터를 동시에 수신할 수 있도록, AV 서버(116)에서의 중앙집중식(centralized) AV 제어를 가능하게 하기 위해, AV 클라이언트(112)로부터 분리되어 있으며 별개이다. 본 발명의 이러한 국 면은 풍부한 가상 회의 환경을 제공하는데 요구되는 시스템 컴포넌트들의 수를 감소시킴으로써 시스템(100)을 능률적으로 만든다. 그러나, 사용자가 원하는 경우에는 데이터 클라이언트들(108)을 실행하는 개별 PC들이 추가적으로 AV 클라이언트(112)를 포함할 수도 있다는 점이 인식되어야 할 것이다.

도 2는 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 실시간 정보 교환을 용이하게 하는 시스템(200)의 도면이다. 시스템(200)은, 룸 서버(도시되지 않음)를 통해 중앙집중식 서버 기능을 제공하며 비디오 컴포넌트(204), 오디오 컴포넌트(206), 및 적어도 하나의 데이터 클라이언트(208) 각각과 동작 가능하게 연관된 룸 서버 PC(202)를 포함한다. 룸 서버 PC(202)는 가상 회의 환경의 국면들에 대한 제어 기능을 룸 서버 PC(202)에 위임(impart)하는 가상 디렉터(210), 및 오디오 및 비디오 정보의 사용자 제어 및/또는 가상 디렉터(210), 및 송신을 용이하게 하는 소프트웨어 애플리케이션을 제공하는 AV 클라이언트(212)를 포함한다. 그러한 정보는 AV 클라이언트(212)와 연관된 사용자 인터페이스(도시되지 않음)를 통해 사용자에게 제시될 수 있다.

가상 디렉터(210)는 회의 환경의 다양한 국면들과 연관된 정보를 분석하는 프로세서(216) 및 그 정보를 저장하는 메모리(218)와 더 연관된다. 프로세서(216)는 회의 환경과 관련된 정보의 처리 전용 프로세서, 실시간 멀티미디어 회의 시스템(200)의 하나 이상의 컴포넌트들을 제어하는 프로세서, 또는 회의 환경과 관련된 정보의 처리 및 실시간 멀티미디어 회의 시스템(200)의 하나 이상의 컴포넌트들의 제어 양자를 행하는 프로세서일 수 있다는 점을 인식해야 할 것이다. 또한, 프로 세서(216) 및 메모리(218)가 가상 디렉터(210)와 연관되어 있는 것으로서 도시되었지만, 복수의 프로세서(216) 및/또는 메모리(218)가 본 명세서에 기술된 다른 컴포넌트들 내에 존재할 수 있고, 프로세서(216) 및 메모리(218)가 단지 가상 디렉터(210)와 연관되는 것에 한정되지 않음을 인식해야 할 것이다.

나아가, 메모리 컴포넌트(218)와 관련하여, 본 명세서에 기술된 메모리(예를 들면, 데이터 저장소) 컴포넌트들이 휘발성 메모리 또는 비휘발성 메모리가 될 수 있고, 또는 휘발성 및 비휘발성 메모리 양자를 포함할 수 있음을 인식할 것이다. 예를 들어, 비휘발성 메모리는 판독 전용 메모리(ROM), 프로그램 가능 ROM(PROM), 전기적 프로그램 가능 ROM(EPROM), 전기적 소거 및 프로그램 가능 ROM(EEPROM), 또는 플래시 메모리를 포함할 수 있으나, 이에 한정되지는 않는다. 휘발성 메모리는 외장 캐시 메모리(external cache memory)로서 동작하는 랜덤 액세스 메모리(RAM)를 포함할 수 있다. 예를 들어, RAM은, 동기식 RAM(synchronous RAM; SRAM), 동적 RAM(dynamic RAM; DRAM), 동기식 DRAM(SDRAM), 더블 데이터 레이트 SDRAM(double data rate SDRAM; DDR SDRAM), 강화된 SDRAM(enhanced SDRAM; ESDRAM), 싱크링크 DRAM(Synchlink DRAM; SLDRAM), 및 다이렉트 램버스RAM(direct Rambus RAM; DRRAM)과 같은 여러 형태로 이용 가능하나, 이에 한정되지는 않는다. 본 시스템들 및 방법들의 메모리는 이러한 메모리 및 임의의 다른 적합한 유형의 메모리를 포함하도록 의도되며 그에 한정되는 것은 아니다.

룸 서버PC(202)는 그 룸 서버PC(202) 내의 AV 클라이언트(212)와, 예를 들어, 원격 PC 상의 원격 사용자에 의해 띄워진 원격 AV 클라이언트(도시되지 않음) 간의 AV 통신을 조정하는 AV 서버(220)를 더 포함한다. 또한, 룸 서버PC(202)는, 회의실 내에 존재하는 로컬 PC 또는 원격 PC 상에서 실행되는 데이터 클라이언트들(208) 간의 데이터 공동작업을 조정하는 데이터 서버(222)를 포함한다. AV 클라이언트(212) 외에도 데이터 클라이언트(208)가 룸 서버 PC(202) 상에서 실행될 수 있으나, 반드시 룸 서버 PC(202) 상에서 실행될 필요는 없다는 점을 인식해야 할 것이다.

이제 도 3을 참조하면, 본 명세서에서 사용된 바와 같이, 용어 "추론"은 일반적으로 이벤트들 및/또는 데이터를 통해 캡쳐된 바와 같은 일련의 관측들로부터 시스템, 환경, 및/또는 사용자의 상태들을 추리하거나 추론하는 프로세스를 지칭한다. 추론은 특정 문맥 또는 동작을 식별하도록 이용될 수도 있고, 예컨대 상태들에 대한 확률 분포를 생성할 수도 있다. 추론은 확률적일 수 있는데, 다시 말해, 데이터 및 이벤트들의 고찰에 기초하여 관심의 대상인 상태들에 대한 확률 분포의 계산이 될 수 있다. 추론은 또한 일련의 이벤트들 및/또는 데이터로부터 상위-레벨 이벤트들을 구성하기 위해 이용되는 기법들을 지칭할 수 있다. 그러한 추론은, 이벤트들이 밀접한 시간적 근접도로 상관되어 있는지 여부 및 이벤트들 및 데이터가 하나 또는 여러 이벤트 및 데이터 소스들로부터 유래한 것인지 여부와 무관하게, 일련의 관측된 이벤트들 및/또는 저장된 이벤트 데이터로부터 새로운 이벤트들 또는 동작들이 구성되는 결과를 가져온다. 다양한 분류 방식들(classification schemes) 및/또는 시스템들(예를 들면, 지원 벡터 기계(support vector machine), 신경 회로망(neural network), 전문가 시스템(expert system), 베이지안 신념 네트 워크(Bayesian belief network), 퍼지 논리(fuzzy logic), 데이터 융합 엔진(data fusion engine) 등)이 본 대상 발명과 연관된 자동적인 그리고/또는 추론된 동작의 수행과 관련하여 이용될 수 있다.

도 3을 계속 참조하면, 도 3은 본 발명의 일 국면에 따른 회의 환경에서 실시간 멀티미디어 정보 공유를 용이하게 하는 시스템(300)의 도면이다. 이 도면에 따르면, 시스템(300)은, 비디오 컴포넌트(304), 오디오 컴포넌트(306), 및 적어도 하나의 데이터 클라이언트(308) 각각과 동작 가능하게 연결된 룸 서버 PC(302)를 포함한다. 룸 서버 PC(302)는 가상 회의 환경의 국면들에 대한 제어 기능을 룸 서버 PC(302)에게 제공하는 가상 디렉터(310), 그리고 오디오 및 비디오 정보의 사용자 제어 및/또는 시스템, 및 송신을 용이하게 하는 소프트웨어 애플리케이션을 제공하는 AV 클라이언트(312)를 포함한다. 그러한 정보는 AV 클라이언트(312)와 연관된 사용자 인터페이스(도시되지 않음)를 통해 사용자에게 보여질 수 있다.

가상 디렉터(310)는 회의 환경과 연관된 정보를 각각 분석하고 저장하는 프로세서(316) 및 메모리(318)와 연관된다. 또한, 가상 디렉터(310)는, 예를 들어, 사용자에게 정보를 프레젠테이션하는 것에 관한 추론들을 수행할 수 있는 인공 지능 컴포넌트(320)를 포함한다. 또 다른 예에 따르면, 사용자는, 룸 서버PC(302) 및 그 룸 서버PC(302)가 위치한 회의실로부터 떨어진 위치에 있는 컴퓨팅 장치 상에, 예를 들어, 데이터 클라이언트(308), AV 클라이언트(312), 또는 양자를 띄움으로써 가상 회의에 참석할 수 있다. 이러한 예를 부언하면, 회의 환경과의 AV 통신을 원하는, 상이한(disparate) 위치에 있는 사용자는, 예를 들어, 휴대폰으로부터 원격 AV 클라이언트를 띄울 수 있다. 그러나, 휴대폰은, 예컨대 노트북이나 PC의 그래픽 능력을 가지지 않을 확률이 크며, 룸 서버PC(302) 상의 AV 서버(322)로부터 수신된 정보에 의해 과부하가 걸릴 가능성이 있다. AI 컴포넌트(320)는, 원격 사용자의 휴대폰의, 예컨대, 그래픽 능력, 다운로드 레이트 등에 대한 추론을 할 수 있고, 회의 관련 데이터를 적절한 방식으로 패키징 및/또는 휴대폰으로 송신할 수 있어 휴대폰 상의 사용자 인터페이스의 한계들을 초과하지 않고 원격 사용자에게 정보를 제시하는 것을 용이하게 한다. 앞의 예들은 예시를 위한 것이며, 상술된 시스템에 의해 행해질 수 있는 추론들의 수 또는 상기 추론들이 행해지는 방식을 한정하기 위한 것이 아님을 인식해야 할 것이다.

가상 디렉터(310) 및 AV 클라이언트(312) 외에도, 룸 서버PC(302)는 그 룸 서버PC(302) 내의 AV 클라이언트(312)와, 예를 들어, 원격 PC 상의 원격사용자에 의해 띄워진 원격 AV 클라이언트(도시되지 않음) 간의 AV 통신 및/또는 원격으로 실행되는 둘 이상의 AV 클라이언트들 간의 AV 통신을 조정하는 AV 서버(322)를 포함할 수 있다. 또한, 룸 서버PC(302)는, 회의실 내에 존재하는 로컬 PC 또는 원격 PC 상에서 실행되는 데이터 클라이언트들(308) 간의 데이터 공동작업을 조정하는 데이터 서버(324)를 포함한다. AV 클라이언트(312) 외에도 데이터 클라이언트가 룸 서버 PC(302) 상에서 실행될 수 있으나, 반드시 룸 서버 PC(202) 상에서 실행될 필요는 없다는 점을 인식해야 할 것이다.

도 4는 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 실시간 정보 교환을 용이하게 하는 시스템(400)의 도면이다. 룸 서버PC(402)는 회의 환경으로부 터 시각적 정보를 수집할 수 있는 비디오 컴포넌트(404)에 동작 가능하게 연결된다. 룸 서버PC(402)는 회의 환경을 모니터링하고 그 내부의 소리에 관련된 데이터를 수집하는 오디오 컴포넌트(406)와 동작 가능하게 더 연관된다. 룸 서버PC는, 회의 환경 내의 룸 서버PC(402)에 상주하는 데이터 서버(428)와 그 자체간의 데이터 공동작업을 용이하게 하며 UI(414)를 통해 사용자에게 정보를 제시하는 적어도 하나의 데이터 클라이언트(408)에 동작 가능하게 더 연결된다. 이전의 국면들 및 도면들에 관해 기술된 바와 같이, 룸 서버PC(402)는 UI(도시되지 않음)를 갖는 AV 클라이언트(412) 및 가상 디렉터(410)를 포함한다. 가상 디렉터(410)는 회의 환경과 연관된 데이터를 분석하는 프로세서(416), 메모리 컴포넌트(418), 및 회의 환경 내의 정보 교환에 관한 추론들을 행하는 AI 컴포넌트(420)와 추가적으로 연관된다.

본 발명의 이러한 국면에 따르면, 비디오 컴포넌트(404)는 디지털 자동 팬/틸트/줌(DPTZ) 카메라(422)를 포함할 수 있으며, 이는 자신이 위치한 회의실의 실시간 비디오 정보를 제공할 수 있다. 가상 디렉터(410)는 DPTZ 카메라(422)에게 회의실에서 주어진 시간에 말을 하고 있는 사람을 프레이밍하도록 지시할 수 있고, 그러한 이미지들은 룸 서버PC(402) 내에 상주하는 AV 서버(426)에 의해 수신될 수 있으며 AV 클라이언트(412)와 연관된 UI를 통해 실시간으로 배포될 수 있다. 예를 들어, 고해상도로 회의실의 비디오를 송신하는 것은, 송신될 상당한 양의 정보를 요구한다. 가상 디렉터는, 화자를 고해상도로 보여주는 동안 회의실의 이미지의 나머지 부분을 저해상도로 보여줌으로써 대용량 송신을 감소시킬 수 있다. 이미지의 대부분을 저해상도로 송신함으로써, 송신량의 크기가 상당히 감소될 수 있다. 또한, DPTZ 카메라(422)는, 그 DPTZ 카메라(422)로부터의 각각의 참석자의 상대적인 거리에도 불구하고, 회의실 내에 존재하는 각각의 참석자의 크기가 동등하게 될 수 있는 자동 워프 기능을 제공할 수 있다. 이러한 특정한 본 발명의 국면은 뒤에서 보다 상세하게 논의될 것이다.

비디오 컴포넌트(404)는, 문서들의 하드 카피가, 각각의 사용자에게 실시간으로 제시될 수 있는 전자 카피로 변환될 수 있게 하는, 웹 카메라와 같은 문서 캡쳐 컴포넌트(document capture component; 424)를 더 포함한다. 예를 들어, 문서 캡쳐 컴포넌트는 종이 문서, 미팅 기록들을 포함하는 화이트 보드 등의 스틸 이미지를 찍어서 그러한 문서들을 차후의 검토 등을 위해 전자적으로 보존할 수 있다. 또한, 일단 캡쳐가 되면, 문서들은 사용자들에게 바로 인쇄 가능한 형태(ready-to-print format)로 즉시 배포될 수 있다.

도 5는 본 발명의 일 국면에 따른 회의 환경에서 실시간 멀티미디어 정보 교환을 용이하게 하는 시스템(500)의 도면이다. 룸 서버PC(502)는, 회의실 환경을 모니터링하여, 예컨대 회의와 연관된 비디오 데이터를 캡쳐하는 비디오 컴포넌트(504), 및 회의실을 모니터링하여 그에 관련된 오디오 정보를 수집하는 오디오 컴포넌트(506)와 동작 가능하게 연결된다. 룸 서버PC(502)는, 데이터 공동작업 기능을 제공하며 룸 서버PC(502) 상의 룸 서버(도시되지 않음)로부터 수신된 정보를 사용자 인터페이스(514)를 통해 사용자에게 제시할 수 있는 데이터 클라이언트(508)와 동작 가능하게 더 연관된다.

룸 서버 PC(502)는 AV 정보 배포 및/또는 수집의 자동화된 제어를 용이하게 하는 가상 디렉터(510), 및 오디오 및/또는 비디오 포맷(들)로 정보를 수신 및/또는 배포하는 것을 촉진하도록 소프트웨어 애플리케이션, 프로그램, 프로세스, 스레드 등을 제공하는 AV 클라이언트(512)를 포함한다. AV 클라이언트(512)는 데이터 클라이언트(508)로부터 분리되어 있고 그와 별개이며, 이는 각각의 로컬 사용자의 개인 컴퓨팅 장치에서 별개의 AV 클라이언트에 대한 필요성이 감소될 수 있게 한다는 점에 유념하자. 가상 디렉터(510)는 시스템(500)의 다양한 컴포넌트들의 제어를 용이하게 하며 그리고/또는 그로부터 수신된 정보를 분석하는 프로세서(516)와 연관된다. 가상 디렉터(510)는 시스템 컴포넌트들로부터 수신되며 그리고/또는 프로세서(516)에 의해 분석된 정보를 저장할 수 있는 메모리(518)와 더 연관된다. 또한, 가상 디렉터(510)는, 예를 들어, 적어도 하나의 사용자 등으로의 정보 배포에 관한 추론들을 수행할 수 있는 AI 컴포넌트(520)를 포함한다.

비디오 컴포넌트(504)는, 예를 들어, 회의실 환경을 모니터링할 수 있는 DPTZ 카메라를 포함한다. 개개의 원격 사용자들은 원격 사용자의 컴퓨팅 장치들 상에 띄워진 각각의 AV 클라이언트(512)를 통해 그 원격 사용자에게 제시된 실시간 이미지의 상이한 영역들로 선택적으로 줌, 팬, 틸트 등이 가능하다. 본 발명의 이러한 국면은 회의실의 룸 서버PC(502)의 물리적 위치와 다른 위치에서 회의에 참석하는 사용자에게 특히 유용할 수 있다. 비디오 컴포넌트(504)는, 예컨대, 메모의 하드 카피, 화이트 보드 상의 미팅 기록, 또는 사용자가 전자적 형태로 보존하고 그리고/또는 원격 사용자들과 공유하고자 하는 임의의 다른 문서와 같은 문서들의 이미지들을 캡쳐할 수 있는 문서 캡쳐 컴포넌트(524)를 더 포함한다. 그러한 이미 지들은, 이미지를 캡쳐하면 그 이미지가 즉시 사용자에게 나타나고 그 사용자가 원하는 경우에는 바로 인쇄 가능하도록, 즉시 모든 사용자들에게 제시될 수 있다.

오디오 컴포넌트(506)는 마이크로폰 어레이(526) 및 화자 추적 컴포넌트(speaker tracking component; 528)를 포함한다. 화자 추적 컴포넌트(528)는 오디오 컴포넌트(506)에 의해 포함된 것으로서 도시되어 있지만, 화자 추적 컴포넌트(528)가 AV 클라이언트(512) 및/또는 가상 디렉터(510)에 의해 포함될 수도 있으며 도 5에 도시된 물리적 위치(orientation)에 한정되지 않는다는 점을 인식해야 할 것이다. 마이크로폰 어레이(526)는 오디오 정보의 하이-파이, 노이즈-프리(noise-free) 캡쳐를 제공할 수 있다. 또한, 마이크로폰 어레이는, 예를 들어, 화자 추적 컴포넌트를 통해 회의실에서 말을 하고 있는 사람의 위치를 판정하기 위해 분석될 수 있는 방향 정보(directional information)를 제공할 수 있다.

또한, 시각-기반 추적(vision-based tracking)은, 예를 들어, 비디오 컴포넌트(504)(예를 들면, 광각 웹 카메라, DPTZ 카메라 등)로부터 수신된 데이터에 적어도 일부 기초하여 가상 디렉터(510)에 의해 실현될 수 있다. 이는 마이크로폰 어레이의 정밀도(accuracy)가 희생될 수 있는 큰 소리의 환경 잡음(environment noise), 이를테면 박수 및 실내 반향(room reflection)을 포함하는 경우들에 있어 특히 유용할 수 있다. 광각 룸 카메라에 의해 캡쳐된 비디오는 시각-기반 추적 알고리즘(예를 들면, 동작-기반(motion-based), 외형-기반(appearance-based), 입자 필터 기반(particle filter based) 접근법 등)에 의해 사용될 수 있다. 나아가, 마이크로폰 어레이 및 시각-기반 추적 결과로부터의 방향 정보는, 예를 들어, 가상 디렉터(510)와 연관된 입자 필터(도시되지 않음)(또는 다른 적절한 기계-학습 기법(machine-learning technique))에 의해 통합되어 마이크로폰 어레이 방향 정보 또는 시각-기반 추적 결과 정보 중 하나만에 의한 것보다 더 정확하고 견고한 추적 결과들을 생성할 수 있다.

룸 서버PC(502)는 그 룸 서버PC(502) 내의 AV 클라이언트(512)와, 예를 들어, 원격 PC 상의 원격 사용자에 의해 띄워진 원격 AV 클라이언트(도시되지 않음) 간의 AV 통신을 조정하는 AV 서버(530)를 더 포함한다. 또한, 룸 서버PC(502)는, 회의실 내에 존재하는 로컬 PC 또는 원격 PC 상에서 실행되는 둘 이상의 데이터 클라이언트들(508) 간의 데이터 공동작업을 조정하는 데이터 서버(532)를 포함한다. AV 클라이언트(512) 외에도 데이터 클라이언트(508)가 룸 서버 PC(502) 상에서 실행될 수 있으나, 반드시 룸 서버 PC(502) 상에서 실행될 필요는 없다는 점을 인식해야 할 것이다.

도 6은 본 발명의 일 국면에 따른 기본 회의 환경(600)의 도면이다. 도면에 따르면, 회의 환경(600)은 룸 서버PC(602) 및, 노트북, 타블렛 PC 등과 같은 사용자의 컴퓨팅 장치들 상에 상주할 수 있는 적어도 두 개의 데이터 클라이언트(604)를 포함한다. 선택적으로, 데이터 클라이언트(604)는 룸 서버PC(602) 상에 상주할 수 있다.

도 6에서 노트북으로 도시된, 각각의 데이터 클라이언트(604)는 사용자에게 데이터 공동작업 능력을 제공한다. 본 발명의 일 국면에 따르면, 노트북, 타블렛 PC 등 상에서 실행되는 데이터 클라이언트(604)를 가지고 회의실에 들어가는 사용 자는 룸 서버PC(602) 상에 상주하는 룸 서버에 의해 식별되어 그 회의에 합류하도록 초청될 수 있다. 예를 들어, 사용자는, 데이터 클라이언트(604)와 연관된 IP 어드레스, 데이터 클라이언트(604)와 연관된 이메일 어드레스, 및/또는 룸 서버에 의해 각각의 미팅에 대해 생성된 고유한 URL(universal resource locator) ID 등을 통해 식별될 수 있다. 또한, 데이터 클라이언트(604)의 사용자가 실제로 그 사용자로 주장된 사람(예컨대, 그 회의, 미팅 등에 초청된 사람)인지 여부를 검증하기 위해 사용자는 패스워드를 입력하라는 프롬프트가 제공될 수도 있다.

룸 서버PC(602)는 데이터 클라이언트들(604) 간의 데이터 공동작업을 용이하게 하는 데이터 서버를 포함하며, 이를 통제(govern)할 수 있다. 예를 들어, 각각의 데이터 클라이언트(604)는 드래그-앤-드롭 파일 전송 능력을 포함하는데, 이는 각각의 데이터 클라이언트들(604)과 연관된 사용자 인터페이스(UI)의 일부로서 사용자에게 제시된 "로컬"과 "서버" 영역들 간에 사용자가 파일들을 드래그할 수 있도록 하며 그 파일은 즉시 데이터 클라이언트(604)로부터 룸 서버PC(602) 내의 데이터 서버로, 그리고 그 역으로 복사될 것이다. 파일이 일단 룸 서버PC 내의 데이터 서버로 복사되면, 미팅의 모든 참석자들은 그 파일에의 완전한 액세스를 갖는다. 파일은 문서, 이를테면, 워드 프로세싱 문서, 스프레드시트, 또는 생성, 전송, 저장 등이 가능한 임의의 다른 적합한 파일일 수 있다.

본 발명의 관련된 일 국면은 각각의 데이터 클라이언트(604)와 연관된 사용자 인터페이스(UI)의 일부로서 사용자에게 제시되는 "프레젠테이션 슈트(Presentation Chute)"를 통해 드래그-앤-드롭 파일 배포 능력(drag-and-drop file broadcast capabilities)을 제공한다. 이러한 국면에 따르면, 예를 들어, 파워포인트 프레젠테이션과 같은 프레젠테이션 파일이 프레젠테이션 슈트 상에 드래그되어 놓일 수 있다. 일단 슈트 상에 놓이면, 그 프레젠테이션은 다른 데이터 클라이언트들(604)이 원격 또는 로컬인지 여부와 무관하게 즉시 룸 서버PC(602) 내의 데이터 서버를 통해 미팅에 참석 중인 다른 데이터 클라이언트들(604)에게 제시될 수 있다. 또한, 프레젠테이션의 송신자는 그 프레젠테이션에 대해 문서의 수신자들에게 부여되는 제어권의 정도에 비해 강화된 제어권을 가질 수 있다. 예를 들어, 제1 사용자가 제2 사용자에게 프레젠테이션을 송신하는 경우에, 제1 사용자는 그 프레젠테이션 슬라이드들이 제1 사용자의 프롬프팅(prompting)(예를 들면, 마우스-클릭, 스타일러스 탭(stylus tap), 음성 프롬프팅 등) 시에만 진행되도록 요구할 수 있다. 대안적으로, 제1 사용자는 프레젠테이션 제어를 "해제(unlock)"하여 다른 사용자들로 하여금 그 프레젠테이션을 마음대로 진행하게 할 수 있다. 본 예에 따르면, 복수의 수신 사용자들(recipient users)이 그들 각자의 필요에 따라 상이한 속도(rate)로 프레젠테이션을 볼 수 있다. 프레젠테이션 슈트는 도 7을 참조하여 이하에서 보다 상세하게 논의될 것이다.

도 7은 데이터 클라이언트를 통해 사용자에게 제시될 수 있는 예시적인 UI(700)을 도시한다. UI(700)는 회의실 내의 룸 서버 상에 저장된 파일들을 나타내는 서버 파일 아이콘들(704)을 포함하는 "서버 파일들" 영역(702)을 포함한다. UI(700)는 그 UI(700)가 사용자에게 제시되는 데이터 클라이언트 상에 로컬하게 저장된 파일들을 나타내는 로컬 파일 아이콘들(708)을 포함하는 "로컬 파일들" 영역 (706)을 더 포함한다. 따라서, 서버 파일 영역(702) 내의 서버 파일 아이콘들(704)은 회의에 참석하고 있는 각각의 데이터 클라이언트에 대하여 동일할 것이나, 로컬 파일 영역(706) 내의 로컬 파일 아이콘들(708)은 데이터 클라이언트마다 달라질 수 있다. 그러나, 둘 이상의 데이터 클라이언트가 UI(700)의 로컬 파일 영역(706) 내의 로컬 파일 아이콘들(708)로 표현되는 로컬 파일들의 동일한 세트를 가지는 것도 가능하다. 사용자는 로컬 파일 영역(706)으로부터 아이콘(708)을 드래그하여 그것을 서버 파일 영역(702) 내에 놓음으로써 그 로컬 파일이 서버로 업로딩되게 할 수 있고, 이는 다른 사용자들로 하여금 그들의 개별 서버 파일 영역들(702)에서 그 파일을 수신 및/또는 액세스할 수 있게 한다. 또한, 사용자는 서버 파일 아이콘(704)을 로컬 파일 영역(706) 상에 드래그-앤- 드롭하여 서버 파일을 그 사용자의 로컬 하드 드라이브로 복사할 수 있다.

UI(700)는 데이터 클라이언트들 간의 프레젠테이션 공유를 용이하게 하는 프레젠테이션 슈트(710)를 포함한다. 예를 들어, 사용자는 프레젠테이션 파일(예를 들면, 전자 슬라이드 프레젠테이션 , 파워포인트 프레젠테이션 등)을 프레젠테이션 슈트(710) 상으로 드래그하여, 데이터 서버로의 업로딩을 위해 그 파일을 프레젠테이션 슈트(710) 상에 놓을 수 있다. 데이터 서버로의 송신은, 업로딩이 진행중임을 사용자에게 알리기 위해 음향 효과를 수반할 수 있다. 데이터 서버는 이어서 미팅에 참석하고 있는 다른 데이터 클라이언트들로의 파일 배포(file broadcast)를 개시할 수 있다. 그 후 각각의 데이터 클라이언트는 프레젠테이션을 보여주기 위해 적절한 데이터 뷰어를 개별적으로 띄울 수 있다. 프레젠테이션 파일을 프레젠 테이션 슈트(710)에 처음으로 놓는 사용자는 그 프레젠테이션의 소유자(owner)로 간주될 수 있으며, 프레젠테이션 동안의 스크롤 동작들(예를 들어, 뒤로(previous), 앞으로(next) 등)을 제어할 수 있다. 대안적으로, 소유자는, 수신 사용자들이 앞으로 건너뛰고, 뒤의 슬라이드로 되돌아가고, 일반적으로 그들의 고유한 속도로 프레젠테이션을 볼 수 있도록, 데이터 클라이언트들에서의 사용자들 간의 비동기화(desynchronization)를 허용할 수 있다. 이러한 경우에, 각각의 UI는, 클릭될 때 수신 데이터 클라이언트 상의 프레젠테이션을 그 프레젠테이션의 소유자의 뷰에 자동적으로 동기화할 "동기(Sync)" 아이콘(도시되지 않음)을 제공할 수 있다. 또한, 소유자의 데이터 클라이언트는 마스터 "동기" 아이콘(도시되지 않음)을 가질 수 있는데, 이는 활성화될 때 모든 데이터 클라이언트 뷰(Data Client views)를 그 소유자의 뷰로 동기화할 것이다.

이제 도 8을 참조하면, 본 발명의 일 국면에 따른 회의 환경(800)이 도시된다. 도면에 따르면, 회의 환경(800)은 룸 서버PC(804)를 갖는 회의실(802)을 포함한다. 회의실(802)은, 예를 들어, 노트북, 타블렛 PC, 핸드헬드 컴퓨팅 장치, 또는 본 명세서에서 설명된 본 발명의 국면들과 관련해 사용자에게 사용자 인터페이스를 제시하는데 적합한 임의의 다른 장치에 상주하는, 적어도 하나의 데이터 클라이언트(806)를 더 포함한다. 회의실(802)은 회의실에 위치한 사용자들에게 실제에 가까운 크기(near-life size)로 원격 사용자를 보여주는 것 및 그 반대의 경우를 용이하게 하는 원격 사용자 스탠드-인-디바이스(remote user Stand-in Device; 808)를 더 포함한다. 스탠드-인-디바이스(808)는 DPTZ 카메라(812), 마이크로폰 어레이(814), 및 스피커들(816)이 장착된 디스플레이(810)(예를 들어, 모니터, 평면 표시 장치(flat panel display) 등)를 포함한다. 미팅에 참석하는 원격 사용자들의 수에 따라 하나의 또는 복수의 원격 스탠드-인-디바이스가 있을 수 있다는 점을 인식할 것이다. 또한, 하나의 원격 스탠드-인-디바이스가 (예를 들어, 분할된 화면, 화면-속-화면 기술(picture-in-picture technology) 등을 통해) 복수의 원격 사용자들을 나타내도록 이용될 수 있다. 스탠드-인-디바이스(808)는 룸 서버PC(802)에 동작 가능하게 연결된다.

DPTZ 카메라(812)는 회의실 및 그 내부의 사람의 이미지들을 캡쳐하며, 이러한 정보는, 원격 사용자의 PC 상에서 실행되는 AV 클라이언트를 통해 원격 사용자에게 보여주기 위해서, 룸 서버PC(802) 내의 AV 서버와 통신하는 로컬 AV 클라이언트에게 송신된다. 도 9를 참조하여 보다 상세하게 설명될 바와 같이, DPTZ 카메라(812)로부터의 개인의 실제 거리에도 불구하고, DPTZ 카메라(812)는 회의실에 위치하는 참석자들이 대략 동등한 크기로 보여지도록 회의실의 이미지들을 자동적으로 워핑(warping)할 수 있다. 자동 워핑은 원격 사용자(또는, 도 1 내지 도 5를 참조하여 설명된 바와 같은 가상 디렉터)가 DPTZ 카메라(812)로부터 멀리 위치한 사람들을 포함하는 임의의 사람을 확대(zooming)하는 것을 용이하게 한다.

마이크로폰 어레이(814)는 화자의 음성과 같은 소리를 회의실로부터 캡쳐하며, 그것과 연관된 정보를 원격 사용자에게 프레젠테이션하기 위해 룸 서버 PC(804) 내의 AV 클라이언트에 제공한다. 또한, 마이크로폰 어레이(814)는 화자의 위치와 관련된 위치 정보를, 예를 들어, 룸 서버PC(804) 내의 가상 디렉터에 제공 할 수 있고, 가상 디렉터는 그 위치 정보를 이용하여 DPTZ 카메라(812)에게 화자의 위치를 확대(zooming)하도록 지시할 수 있다. 이러한 확대는 본 발명의 관련된 국면에 따라 원격 사용자에 의해 추가적으로 수행될 수 있다.

또한, 시각-기반 추적은 DPTZ 카메라(812)로부터 수신된 데이터에 기초하여 가상 디렉터에 의해 실현될 수 있다. 화자의 위치를 판정하기 위해 DPTZ 카메라(812)에 의해 캡쳐된 비디오가 시각-기반 추적 알고리즘(예를 들면, 동작-기반, 외형-기반, 입자 필터 기반 접근법 등)에 의해 사용될 수 있다. 나아가, 마이크로폰 어레이로부터의 방향 정보 및 DPTZ 카메라(812)로부터의 시각-기반 추적 정보는, 입자 필터(또는 다른 적절한 기계-학습 기법(들))에 의해 서로 통합됨으로써, 마이크로폰 어레이 방향 정보 또는 시각-기반 추적 정보 중 하나에만 의존한 경우보다 더 정확하고 견고한 추적 결과들을 생성할 수 있다.

본 발명의 다른 국면에 따르면, 저해상도인 회의실 화면과 함께, 화자는 고해상도로 원격 사용자에게 보여질 수 있으며, 따라서 화자가 말을 시작할 때, 가상 디렉터는 룸 서버PC(804) 내의 AV 클라이언트에 의해 수신된 위치 정보(예를 들면, 마이크로폰 어레이 방향 정보 및/또는 시각-기반 추적 정보)를 회의실 내의 화자의 위치를 판정하는데 사용하고, DPTZ 카메라(812)는 저해상도인 회의실 화면과 함께 고해상도로 그 위치를 보여주도록 지시된다. 이미지의 해상도가 감소될 수 있게 함으로써, 대역폭 제약(bandwidth constraints)이 존재하는 경우에는 그것이 완화될 수 있다. 마이크로폰 어레이(814)는 실시간 통신 오디오 스택에 의해 지원될 수 있으며, 멀리 떨어진 화자들에 대한 가청도(audibility)를 향상시키도록 자동적 인 반향 상쇄(echo cancellation), 음원 로컬화(sound source localization), (예를 들면, 로컬화된 잡음 소스(들)의) 잡음 억제(noise suppression), 및/또는 이득 제어(gain control)를 제공할 수 있다.

스피커들(816)은 원격지로부터 회의실 내의 사용자들에게 오디오 정보를 제시하도록 스탠드-인-디바이스(808)와 관련해 제공된다. 이러한 방식으로, 원격 사용자는 원격 사무실(818a 내지 818n)에서 회의실 내의 참석자들과 말을 할 수 있다. 각각의 원격 사용자는 회의실로부터 AV-관련 정보를 수신하는 것을 용이하게 하는 그 자체의 고유한 AV 클라이언트를 포함할 수 있는 컴퓨터를 갖는다. 또한, 원격 사용자의 컴퓨터는 데이터 클라이언트를 포함할 수 있는데, 이는 그 원격 데이터 클라이언트와 룸 서버PC(804) 내의 데이터 서버 및/또는 회의실 내의 데이터 클라이언트(들)(806) 간의 데이터 공동작업을 용이하게 한다. 각각의 원격 사무실(818a 내지818n)에는, 원격 사무실에서 실행되는 AV 클라이언트를 통한 룸 서버PC(804) 내의 AV 서버로의 송신 및 원격 스탠드-인-디바이스(808) 상의 프레젠테이션을 위해, 원격 사무실의 AV 정보를 캡쳐하기 위한 마이크로폰(도시되지 않음) 및 웹 카메라(도시되지 않음)가 장착될 수 있다.

원격 사용자는, 예컨대, 필요한 경우에는 UI로서 휴대폰을 이용할 수 있고, 그 휴대폰이 비디오 기능을 갖는 경우에는 원격 스탠드-인-디바이스 상의 광각 디지털 비디오 카메라를 통해 회의실을 볼 수 있다는 점이 인식될 것이다. 한편, 원격 사용자가 회의실(802)에서 들리고 들을 수 있도록, 휴대폰은 최소한도의 오디오 기능을 제공하도록 이용될 수 있다. 이러한 경우에 원격 사용자는, 예를 들어, 미 팅의 다른 참석자 등에 의한, 서버(804)에 의해 걸린 휴대폰으로의 통화에 의해 그 미팅의 시작을 통지 받을 수 있다. 또한, 이러한 예에서, 원격 사용자가 데이터 클라이언트를 원하지 않기 때문에, 그 원격 사용자는 AV 클라이언트만을 띄울 것이다.

도 9는 AV 클라이언트, 가상 디렉터 등에 의한 자동 워핑 전후에 회의실의 AV 클라이언트와 연관된 사용자 인터페이스 상에 제시되는 이미지의 예시적인 도면이다. 도시된 바와 같이, 제1 이미지(902)는 네 명의 참석자가 DPTZ 카메라로부터 다양한 거리에 앉아 있는 회의실을 나타낸다. 테이블의 끝에 있는 참석자는 회의의 다른 참석자들에 비해 과장된 거리에 있는 것으로 인식된다. 워핑 후에, 회의실의 이미지(904)는 DPTZ 카메라로부터의 참석자들의 상대적인 거리가 여전히 인식 가능하도록, 보다 균등해진 배치로 모든 참석자들을 보여주지만, 각각의 참석자 개인은 다른 모든 참석자와 상대적으로 동등한 크기를 가지는 것으로 제시된다. 따라서, 이미지(904)는 회의실 내에 물리적으로 존재하는 사람에 의해 인식될 뷰와 더 가깝게 닮아 있다.

자동 워핑은, 워핑되지 않은 이미지 내의 각각의 수직 주사선(vertical scanline)에 적용될 상이한 배율(magnification power)을 식별함으로써 동작한다. 예를 들어, 대부분의 경우에 이미지의 중심은 더 확장되는 반면, 가장자리들은 확대되지 않을 수 있다. 배율은 이미지에 걸쳐 평활하게(smoothly) 달라지며, 따라서 임의의 로컬 영역에서의 왜곡(distortion)을 최소화한다. 이는 광각 왜곡을 갖는 뷰에 반해, 보다 넓지만 보다 균일한 회의실의 뷰를 가져온다. 회의실 이미지 들의 자동 워핑은 원격 사용자(들)에 대해 풍부한 회의 경험을 도모한다.

도 10은 본 발명의 일 국면에 따른, 도 6에서 설명된 것과 유사한 회의 환경(1000)을 도시한다. 회의 환경(1000)은 데이터 서버 및 AV 서버에 대한 중앙집중화된 제어를 용이하게 하는 룸 서버를 포함하는 룸 서버PC(1004), 및 적어도 하나의 데이터 클라이언트(1006)를 구비하는 회의실(1002)을 포함한다. 도시된 스탠드-인-디바이스(1008)는, 도 8을 참조하여 설명된 바와 같이, 원격 사무실(1014a 내지 1014n) 내의 원격 사용자를 나타내며, 이 스탠드-인-디바이스는 앞에서 설명된 특징들 및 기능들을 포함한다. 한편, 현재 설명되는 회의 환경(1000)이 원격 사용자 없이 회의실에 위치한 둘 이상의 데이터 클라이언트(1006)를 포함할 수 있음을 인식할 것이다.

회의 환경(1000)은, 예를 들어, 종이 문서(도시되지 않음) 및/또는 화이트 보드(1012)의 이미지들을 캡쳐하는 것을 용이하게 하는 고해상도 웹 카메라(1010)를 더 포함한다. 본 명세서에서 사용된 바와 같이, "문서"는 화이트 보드 상에 기록된 문서, 스케치 등을 포함하는 것이다. 웹 카메라(1010)는, 예를 들어, 화이트 보드(1012)를 향할 수 있고, 그에 의해 캡쳐된 이미지들은 회의실(1002) 또는 원격 사무실(1014a 내지 1014n) 내의 각각의 위치에서 실행되는 AV 클라이언트들과 연관된 사용자 인터페이스들을 통해 모든 사용자들에게 보여질 수 있다. 그러한 이미지들은 실시간으로 보여질 수 있는데, 이는 화이트 보드에의 실시간 업데이트들을 용이하게 하여, 삭제, 추가, 및/또는 화이트 보드의 다른 변경들이 회의실(1002) 내에 물리적으로 존재하는 사용자들 뿐 아니라 원격 사용자(들)에 의해서도 인식될 수 있도록 한다. 또한, 웹 카메라(1010)는 스틸 이미지들을 캡쳐할 수 있으며, 화이트 보드 콘텐츠에 더 이상 변경이 생기지 않는 경우에는, 화이트 보드의 위치에서 실행동작 중인 AV 클라이언트가 화이트 보드(1012)의 스틸 이미지를 캡쳐하여, 저장 및/또는 차후의 검토를 위해 다른 사용자들의 로컬 AV 클라이언트(들)에게 배포하기 위하여 룸 서버PC(1004) 내의 AV 서버에게 제시할 수 있다.

본 발명은 하나의 회의실(1002)에 대한 애플리케이션으로 한정되지 않으며, 오히려, 지리적 위치 및/또는 서로에 대한 근접도에 무관하게, 임의의 수의 상이한 위치의 회의실들 및/또는 사무실들 간의 실시간 멀티미디어 정보 교환을 촉진할 수 있다. 하나의 주된 회의실(1002)은 단지 예시를 목적으로 본 명세서에서 제시된 것이며, 본 발명이 그 내부 및/또는 그 사이에서 동작할 수 있는 회의 위치들, 회의실들, 사무실들 등의 수를 제한하게 위한 것이 아니다. 또한, 웹 카메라는, 다른 AV 클라이언트들로의 프레젠테이션을 위한 원격 위치에서의 문서 및/또는 화이트 보드 이미지 캡쳐를 용이하게 하도록, 임의의 원격 사무실, 보조 회의 장소 등에 제공될 수 있다.

또한, 물리적인 문서는 웹 카메라(1010)에 의해 디지털로 사진이 찍혀서, 사용자 검토, 인쇄, 서명 등을 위해 AV 서버를 통해 즉시 AV 클라이언트(들)로 송신될 수 있다. 그러한 "캡쳐-및-송신(capture-and-send)" 프로토콜은 문서 및/또는 화이트보드의 이미지 캡쳐, 이미지의 향상(enhancement), 및 즉각적인 송신을 포함할 수 있다. 예를 들어, 원격 사용자의 서명을 요구하는 문서의 캡쳐된 이미지를 수신하는 원격 사용자는, 그 문서를 인쇄하고, 그곳에 서명하며, 원격 위치에 있는 제2 웹 카메라(도시되지 않음)를 사용하여 그 서명된 문서의 이미지를 캡쳐하고, 즉시 문서의 원 송신자에게 그 이미지를 도로 송신할 수 있다. 원 송신자는 이어서 서명된 문서를 인쇄하고, 그것을 전자적 방식 등으로 저장할 수 있다. 서명하는 사용자가 AV 클라이언트를 실행하기 위해 타블렛 PC를 사용하는 경우에는, 그 서명하는 사용자는 타블렛 스타일러스를 이용하여 전자적으로 서명할 수 있고, 그 서명된 문서를 재송신하기 전에 문서를 인쇄하거나 그리고/또는 제2 웹 카메라를 사용할 필요가 없다.

예시적인 시나리오:

앞서 설명된 시스템(들)의 동작을 설명하기 위해, 이하의 예가 제안된다. 이하의 예들은 본 명세서에 개시된 시스템 및 방법에 관한 가능한 사용법 시나리오(usage scenario)이나, 본질적으로 예시적인 것이며 본 발명의 범위를 제한하는 것을 의도하지 않으며, 다른 가능한 사용법 시나리오도 본 발명의 범위 및 사상에 속하도록 고안될 수 있다. 사용자 1, 사용자 2, 사용자 3은 상태 미팅(status meeting )을 하고 있다. 사용자 1 및 사용자 2는 본 명세서에서 설명된 바와 같이 회의실에 있는 반면, 사용자 3은 그의 원격 사무실로부터 참석 중이다. 회의실 내에는, 룸 서버 PC, 고해상도 웹 카메라, 및 원격자용 스탠드-인-디바이스(remote person Stand-in Device)가 있다. 사용자 1은 회의실에 타블렛 PC를 가져오고 사용자 2는 노트북을 가져온다. 사용자 1 및 사용자 2는 스탠드-인-디바이스 상에서 사용자 3을 보며, 사용자 3은 그의 데스크탑 디스플레이 상에서 사용자 1 및 사용 자 2를 본다. 사용자 3은 사용자 1 및 사용자 2로부터 분명한 오디오를 들으며, 그는 파노라마 윈도우에서 두 사람 모두를 볼 수 있고 현재 말을 하고 있는 사용자를 보다 큰 뷰에서 볼 수 있다. 사용자 1 및 사용자 2는 사용자 3의 뚜렷한, 실제 크기에 가까운 비디오를 보며 그의 소리를 분명하게 들을 수 있다. AV 클라이언트들은 룸 서버 및 사용자 3의 사무실 PC 및 상에서 실행된다. 데이터 클라이언트들은 사용자 1의 타블렛, 사용자 2의 노트북 및 사용자 3의 사무실 PC 상에서 실행된다.

사용자 2는 미팅 직전에 워드 문서를 편집하였고 그것을 미팅에서 공유하고자 한다. 사용자 2는 사용자 2에게 디스플레이된 프레젠테이션 슈트로 그 새 문서를 드래그-앤-드롭한다. 수초 이내에, 그 문서는 사용자 1 및 사용자 3의 데이터 클라이언트들 상에 나타난다.

사용자 1은 그의 데이터 클라이언트의 프레젠테이션 슈트내로 파워포인트 파일을 드래그-앤-드롭한다. 사용자 2 및 사용자 3의 컴퓨터들 상에는 적절한 데이터 뷰어가 그 파워포인트 프레젠테이션과 함께 띄워진다. 사용자 3은 그 프레젠테이션 콘텐츠들을 빨리 보기 위해 슬라이드들을 건너뛰고 앞으로 브라우징(browse)할 수 있고, 그 후 그 프레젠테이션을 도로 사용자 1의 현재 슬라이드로 동기화하기 위해 "동기" 버튼을 누를 수 있다.

사용자 3은 그의 사무실 화이트 보드 상에 블록도를 그리고, 고해상도 웹 카메라를 그 화이트 보드로 향하게 한다. 사용자 3이 "화이트 보드 ... 시작(Start ... whiteboard)" 아이콘을 클릭하면, 그 화이트 보드 콘텐츠는 서버로 송신되어, 사용자 1 및 사용자 2의 노트북들 상에 나타난다. 화이트 보드 콘텐츠는 실시간으로 제시될 수 있으며, 사용자 3이 블록을 삭제하는 경우, 그것은 사용자 1 및 사용자 2의 뷰들 상에서도 없어진다. 사용자 1은 그의 타블렛을 가지고 화이트 보드 이미지 상에 주석을 달 수 있으며, 그러한 주석들은 미팅이 기록되는 경우에 저장될 수 있다.

미팅이 끝날 즈음에, 사용자 3은 사용자 2로부터 미팅중에 이뤄진 결정을 승인하는 서명을 받고자 한다. 사용자 3은 그의 데이터 클라이언트 인터페이스의 로컬 파일 영역으로부터 서버 파일 영역으로 양식(form)을 드래그-앤-드롭한다. 사용자 2은 그 양식을 바로 수신하여, 이를 가장 가까운 프린터에서 인쇄하며, 서명을 한다. 사용자 2는 그녀의 노트북으로 고해상도 웹 카메라를 플러그인하여, 그 카메라를 서명된 양식으로 향하게 하고, 그녀의 데이터 클라이언트 내의 "(캡쳐-및-송신(capture-and-send)) ... 시작" 아이콘(들)을 클릭한다. 사용자 3은 그 "팩스"를 거의 즉시 수신한다.

설명의 간소화를 목적으로, 예를 들어, 흐름도(flow chart)의 형태로 본 명세서에서 도시된 하나 이상의 방법론들이 일련의 동작들로서 도시되고 설명되었지만, 몇몇 동작들은, 본 발명에 따라서, 본 명세서에서 도시되고 설명된 것과 상이한 순서로, 그리고/또는 다른 동작들과 동시에 발생할 수 있기 때문에, 본 발명이 동작들의 순서에 의해 제한되는 것은 아니라는 점이 이해되고 인식되어야 할 것이다. 예를 들어, 당업자는 방법론이 대안적으로, 상태도(state diagram)에서와 같이, 일련의 상호관련된 상태들 또는 이벤트들로 표시될 수 있음을 이해하고 인식할 것이다. 게다가, 본 발명에 따른 방법론을 구현하기 위해 도시된 모든 동작들이 필요하지 않을 수도 있다.

도 11은 본 발명의 일 국면에 따른 방법론(1100)의 도면이다. 단계(1002)에서, 룸 서버는 회의 환경 내의 실시간 멀티미디어 정보 교환을 용이하게 하기 위해 AV 클라이언트를 활성화한다. AV 클라이언트 활성화는 두 가지 방식으로 발생할 수 있다. 예를 들어, 원격 AV 클라이언트는 로컬 AV 클라이언트가 상주하는 룸 서버에 의해 제어되는 AV 서버에 접속할 수 있고, 그 로컬 AV 클라이언트를 띄우도록 룸 서버를 재촉한다. 또한, 로컬 AV 클라이언트는, 예를 들어, 미리 결정된 미팅 시간 등에 AV 서버를 통해 원격 AV 클라이언트에의 접속을 개시할 수 있다. AV 클라이언트를 포함하는 소프트웨어가 룸 서버 상에 상주하고, 룸 서버도 데이터 클라이언트 소프트웨어를 띄우거나 그리고/또는 실행할 수 있으나, 그 데이터 클라이언트 및 AV 클라이언트는 분리된 개별 소프트웨어 모듈들이라는 점을 인식해야 할 것이다. 따라서, 룸 서버가 데이터 클라이언트를 실행하지 않고 AV 클라이언트를 실행하는 것 및 그 반대가 가능하다.

단계(1104)에서, 룸 서버는 데이터 서버에게 회의에 로그인된, 그리고 로그인될 수 있는 임의의 데이터 클라이언트들을 식별하도록 지시한다. 회의에 참석할 권한을 갖는 각각의 데이터 클라이언트는 단계(1106)에서 로그인하도록 허용되며, 그러한 로그인은 패스워드에 의해 보호될 수 있다. 적어도 두 개의 데이터 클라이언트의 로그인 시에, 미팅이 단계(1108)에서 개시될 수 있고, 여기서 적어도 두 개의 데이터 클라이언트의 사용자들은 각각의 데이터 클라이언트를 통해 실시간으로 정보를 교환할 수 있으며, 단계(1110)에서 AV 서버 상에서 실행되는 AV 클라이언트로부터 AV 정보를 제공받을 수 있다. 적어도 두 개의 데이터 클라이언트가 동일 위치에 위치할 필요는 없으며, 오히려 데이터 클라이언트가 원격 사무실로부터 미팅에 참석할 수 있다는 점을 인식할 것이다. 그러한 시나리오에서는, 원격 데이터 클라이언트는 전형적으로 원격 사용자의 사무실 컴퓨터 상에서 실행될 것이고, 원격 데이터 클라이언트가 그 자체와 회의실 내의 다른 데이터 클라이언트들 및/또는 룸 서버 PC 내의 데이터 서버 간의 데이터 공동작업을 가능하게 하는 동안, 별개의 AV 클라이언트가 회의실로부터의 AV 데이터를 원격 사용자에게 제공하도록 띄워질 수 있다.

도 12는 본 발명의 일 국면에 따른 회의 환경에서 거의 즉각적인 문서 보기(near-instant document viewing)를 위한 방법론(1200)의 도면이다. 도면에 따르면, 단계(1202)에서, 데이터 클라이언트의 사용자는 그 데이터 클라이언트에 의해 사용자에게 제시된 사용자 인터페이스(UI) 상의 프레젠테이션 슈트 아이콘으로 프레젠테이션(예를 들어, 전자 슬라이드 프레젠테이션 등)을 드래그할 수 있다. 사용자는 그 아이콘 상에 프레젠테이션을 드롭할 수 있고, 단계(1204)에서 그 프레젠테이션은 데이터 서버로 업로딩될 것이다. 단계(1206)에서, 프레젠테이션은 그 프레젠테이션의 이미지 버전으로서 각각의 데이터 클라이언트로 송신될 수 있다. 단계(1208)에서는, 소유자(예를 들어, 송신자, 발신자(originator)...)가 각각의 수신 데이터 클라이언트 사용자들로 하여금 마음대로 프레젠테이션을 볼 수 있도록 사용 권한(permission)을 부여했는지 여부, 및 소유자가 자신만이 프레젠테이션을 진행할 수 있도록 그 프레젠테이션을 잠그었는지 여부에 대하여 결정이 이루어진다. 소유자가 수신 데이터 클라이언트 사용자에게 마음대로 프레젠테이션을 볼 수 있도록 사용 권한을 부여하지 않은 경우에는, 단계(1210)에서 프레젠테이션에 대한 제어권은 그 소유자에게 남아있을 것이다. 한편, 소유자가 그러한 사용 권한을 부여한 경우에는, 수신자들이, 예를 들어, 프레젠테이션의 콘텐츠를 읽기 위해 그 프레젠테이션을 스크롤할 수 있도록, 단계(1212)에서 프레젠테이션의 비동기화가 허용될 수 있고, 그 동안 프레젠테이션의 소유자는 상이한 속도로 진행할 수 있다. 수신자가 소유자의 프레젠테이션 속도도 돌아가기를 원하는 때에는 재동기화가 언제든지 가능하다.

도 13은 본 발명의 일 국면에 따른 멀티미디어 회의 환경에서 실시간 문서 캡쳐를 용이하게 하는 방법론(1300)의 도면이다. 본 명세서에서 사용된 바와 같이, "문서"는 물리적인 종이 문서, 스케치, 및/또는 회의실 및/또는 사무실 내의 화이트 보드 상의 기록들 등을 포함한다는 점을 이해할 것이다. 단계(1302)에서, 고해상도 웹 카메라가 활성화될 수 있다. 단계(1304)에서, 문서 이미지들이 캡쳐될 수 있다. 이미지들은 화이트 보드 콘텐츠와 같은 실시간 비디오로 캡쳐될 수 있다. 화이트 보드의 이미지들은, "화이트-밸런싱(white-balancing)" 프로토콜을 거칠 수 있는데, 이를 통해 그러한 이미지들은 사용자의 시각적 경험을 향상시키도록 처리, 정리(cleaning), 선명화(sharpening) 등이 될 수 있으며, 그 후 이미지들은 실시간으로 사용자들에게 제시될 수 있다. 이러한 방식으로, 화이트 보드 콘텐츠들을 변경하는 것(예를 들어, 추가, 삭제 등에 의한 변경)은 그것이 행해질 때 사용자들에게 보여질 수 있다. 사용자들은 또한 추후의 검토를 위해 임의의 시간에 그러한 이미지들을 저장하도록 허용될 수 있다. 또한, 이미지들은, 서명을 요구하는 종이 문서의 이미지와 같은, 스틸 이미지들로서 캡쳐될 수 있다. 그러한 스틸 이미지들은 잉크 서명을 위해 인쇄되거나, 전자적으로 서명되거나, 타블렛 스타일러스로 서명되도록 사용자들에게 제시될 수 있다.

단계(1308)에서 다른 AV 클라이언트들에게 배포되기 위해, 단계(1306)에서, 캡쳐된 문서들은 웹 카메라에 대해 로컬한 AV 클라이언트를 통해 AV 서버로 업로딩될 수 있다. 일단 수신되면, 단계(1310)에서, 각각의 AV 클라이언트를 실행하는 사용자들은 조작, 추후의 검토 등을 위해 캡쳐된 이미지들을 보거나, 인쇄, 저장 등을 할 수 있다. 이러한 방식으로, 본 발명은, 전통적인 팩시밀리 프로시져와 연관된 시간이 걸리는 작업들을 감소시키며 사용자의 회의 경험을 향상시키는 즉각적인 캡쳐-및-송신 기능을 촉진할 수 있다.

도 14를 참조하면, 개시된 아키텍처를 실행하도록 동작 가능한 컴퓨터의 블록도가 도시되어 있다. 본 발명의 다양한 국면들에 대한 추가적인 문맥을 제공하기 위하여, 도 14 및 이하의 논의는, 본 발명의 다양한 국면들이 구현될 수 있는 적합한 컴퓨팅 환경(1400)에 대한 간략하고도 일반적인 설명을 제공하도록 의도된다. 앞에서 본 발명은 하나 이상의 컴퓨터들 상에서 실행될 수 있는 컴퓨터-실행가능 명령문의 일반적인 문맥으로 설명되었지만, 당업자는 본 발명이 다른 프로그램 모듈들과의 조합 및/또는 하드웨어 및 소프트웨어의 조합으로 구현될 수도 있음을 인식할 것이다. 일반적으로, 프로그램 모듈들은 특정한 작업(task)을 수행하거 나 특정한 추상적 데이터 유형들(abstract data types)을 구현하는 루틴, 프로그램, 컴포넌트, 데이터 구조 등을 포함한다. 게다가, 당업자는 본 발명의 방법들이, 단일-프로세서 또는 멀티프로세서 컴퓨터 시스템, 미니컴퓨터, 메인프레임 컴퓨터뿐만 아니라 퍼스널 컴퓨터, 핸드-헬드 컴퓨팅 장치, 마이크로프로세서-기반 또는 프로그램 가능 가전 제품 등을 가지고 실시될 수 있음을 인식할 것이고, 그것들은 각각 하나 이상의 연관된 장치와 동작 가능하게 연결될 수 있다. 본 발명의 도시된 국면들은, 특정 작업들이 통신 네트워크를 통해 링크된 원격 처리 장치들에 의해 수행되는 분산 컴퓨팅 환경에서 실시될 수도 있다.

도 14를 참조하면, 본 발명의 다양한 국면들을 구현하기 위한 예시적인 환경(1400)이 도시되고, 이는 컴퓨터(1402)를 포함하며, 컴퓨터(1402)는 처리 유닛(processing unit; 1404), 시스템 메모리(1406), 및 시스템 버스(1408)를 포함한다. 시스템 버스(1408)는, 시스템 메모리(1406) 및 처리 유닛(1404)을 포함하나 이에 한정되지는 않는 시스템 컴포넌트들을 연결한다. 처리 유닛(1404)은 임의의 상용 가능한 프로세서가 될 수 있다. 이중(dual) 마이크로프로세서 및 다른 멀티-프로세서 아키텍처들도 처리 유닛(1404)으로서 이용될 수 있다.

시스템 버스(1408)는, 임의의 다양한 상용 버스 아키텍처를 사용하는 로컬 버스, 주변장치 버스(peripheral bus), 및 메모리 버스(메모리 컨트롤러를 구비하거나 구비하지 않음)에 더 상호접속 가능한 여러 종류의 버스 구조 중에서 임의의 것이 될 수 있다. 시스템 메모리(1406)는 판독 전용 메모리(ROM; 1410) 및 랜덤 액세스 메모리(RAM; 1412)를 포함한다. BIOS(basic input/output system)는 ROM, EPROM, EEPROM과 같은 비휘발성 메모리(1410)에 저장되는데, BIOS는, 이를 테면 시동(start-up) 중에, 컴퓨터(1402) 내의 요소들 간의 정보 전달을 보조하는 기본 루틴을 포함한다.

컴퓨터(1402)는 하드디스크 드라이브(1414), 자기 디스크 드라이브(1416; 예를 들면, 착탈식 디스트(removable disk; 1418)로부터 판독하거나 그에 기록하기 위한 것), 및 광 디스크 드라이브(1420; 예를 들면, CD-ROM 디스크(1422)를 판독하거나, 디지털 비디오 디스크(Digital Video Disk; DVD)와 같은 다른 대용량 광 매체로부터 판독하거나 그에 기록하기 위한 것)를 포함한다. 하드디스크 드라이브(1414), 자기 디스크 드라이브(1416), 및 광 디스크 드라이브(1420)는 각각 하드디스크 드라이브 인터페이스(1424), 자기 디스크 드라이브 인터페이스(1426), 및 광 디스크 드라이브 인터페이스(1428)에 의해 시스템 버스(1408)에 접속될 수 있다. 드라이브들 및 그들의 연관된 컴퓨터-판독가능 매체는 데이터, 데이터 구조, 컴퓨터-실행가능 명령문 등의 비휘발성 저장을 제공한다. 컴퓨터(1402)에 대하여, 드라이브들 및 매체는 브로드캐스트 프로그래밍(broadcast programming)의 저장을 적절한 디지털 포맷으로 수용할 수 있다. 컴퓨터-판독가능 매체에 대한 앞의 설명이 하드 디스크, 착탈식 자기 디스크 및 CD를 언급하고 있으나, 집 드라이브(zip drive), 자기 카세트, 플래시 메모리 카드, 디지털 비디오 디스크, 카트리지 등과 같은, 컴퓨터에 의해 판독 가능한 다른 종류의 매체도 예시적인 운영 환경(operating environment)에서 사용될 수 있고, 나아가 그러한 임의의 매체는 본 발명의 방법들을 수행하기 위한 컴퓨터-실행가능 명령문을 포함할 수 있다는 점이 당 업자에 의해 인식되어야 할 것이다.

운영 체계(operating system; 1430), 하나 이상의 애플리케이션 프로그램(1432), 다른 프로그램 모듈들(1434), 및 프로그램 데이터(1436)을 포함하는 다수의 프로그램 모듈들이 드라이브들 및 RAM(1412)에 저장될 수 있다. 본 발명이 다양한 상용 운영 체계들 또는 운영 체계들의 조합들에 의해 구현될 수 있다는 점이 인식될 것이다.

사용자는 키보드(1438) 및 마우스(1440)와 같은 포인팅 디바이스를 통해 컴퓨터(1402)로 명령들 및 정보를 입력할 수 있다. 다른 입력 장치들(도시되지 않음)은 마이크로폰, IR 원격 제어, 조이스틱, 게임 패드, 위성 접시, 스캐너 등을 포함할 수 있다. 이들 및 다른 입력 장치들은 종종 시스템 버스(1408)에 연결된 직렬 포트 인터페이스(1442)를 통해 처리 유닛(1404)에 접속되나, 병렬 포트, 게임 포트, USB(universal serial bus), IR 인터페이스 등과 같은 다른 인터페이스들에 의해 접속될 수도 있다. 모니터(1444) 또는 다른 종류의 디스플레이 장치도 비디오 어댑터(1446)와 같은 인터페이스를 통해 시스템 버스(1408)에 접속될 수 있다. 모니터(144) 외에도, 컴퓨터는 통상적으로 스피커, 프린터 등의 다른 주변 출력 장치들(도시되지 않음)을 포함한다.

컴퓨터(1402)는 원격 컴퓨터(1448)와 같은 하나 이상의 원격 컴퓨터로의 유선 및/또는 무선 통신을 통한 논리적 접속을 사용하는 네트워크 환경(networked environment)에서 동작할 수 있다. 원격 컴퓨터(1448)는 워크스테이션, 서버 컴퓨터, 라우터, 퍼스널 컴퓨터, 휴대용 컴퓨터, 마이크로프로세서-기반 엔터테인먼트 전자제품(entertainment appliance), 피어 장치, 또는 다른 공용 네트워크 노드(common network node)가 될 수 있고, 통상적으로 컴퓨터(1402)에 관련해 설명된 요소들의 다수 또는 전부를 포함하나, 간소화를 목적으로 메모리 기억 장치(1450) 만이 도시되어 있다. 기술된 논리적 접속들은 근거리 통신망(LAN; 1452) 및 광역 통신망(WAN; 1454)을 포함한다. 그러한 네트워킹 환경들은 사무실들, 기업-내 컴퓨터 네트워크(enterprise-wide computer network), 인트라넷, 및 인터넷에서는 흔한 것이다.

LAN 네트워킹 환경에서 사용되는 경우에, 컴퓨터(1402)는 유선 또는 무선 통신 네트워크 인터페이스 또는 어댑터(1456)를 통해 로컬 네트워크(1452)에 접속된다. 어댑터(1456)는 LAN(1452)으로의 유선 또는 무선 통신을 용이하게 할 수 있는데, LAN(1452)도 무선 어댑터(1456)와의 통신을 위해 LAN(1452) 상에 배치된 무선 액세스 포인트를 포함할 수 있다. WAN 네트워킹 환경에서 사용되는 경우에, 컴퓨터(1402)는 통상적으로 모뎀(1458)을 포함하거나, LAN 상의 통신 서버에 접속되거나, 인터넷과 같은, WAN(1454)을 통해 통신을 설정하기 위한 다른 수단을 갖는다. 내장형 또는 외장형, 그리고 유선 또는 무선 장치일 수 있는 모뎀(1458)은 직렬 포트 인터페이스(1442)를 통해 시스템 버스(1408)에 접속된다. 네트워크 환경에서, 컴퓨터(1402)와 관련해 설명된 프로그램 모듈들, 또는 그 일부분들은 메모리 기억 장치(1450)에 저장될 수 있다. 도시된 네트워크 접속들은 예시적인 것이며 컴퓨터들 간에 통신 링크를 설정하는 다른 수단들이 사용될 수 있음을 인식할 것이다.

컴퓨터(1402)는 임의의 무선 장치들 또는 무선 통신에서 동작 가능하게 배치 된 엔티티들, 예를 들어, 프린터, 스캐너, 데스크탑 및/또는 휴대용 컴퓨터, PDA(portable data assistant), 무선으로 검출 가능한 태그와 연관된 장소(예를 들면, 키오스크, 신문 가판대, 화장실) 또는 장치의 임의의 부분, 및 전화와 통신하도록 동작 가능하다. 이는 적어도 와이-파이(Wi-Fi) 및 블루투스(Bluetooth^TM) 무선 기술들을 포함한다. 따라서 그 통신은 기존의 네트워크에서와 같이 미리 정의된 구조이거나, 단순히 적어도 두 개의 장치 간의 임시 통신(ad hoc communication)일 수 있다.

와이-파이(Wi-Fi), 즉 와이어리스 피델리티(Wireless Fidelity)는 가정의 소파, 호텔방의 침대, 또는 직장에서의 회의실로부터 무선으로 인터넷에 접속할 수 있게 한다. 와이-파이는, 컴퓨터와 같은 장치들로 하여금 실내 및 실외에서, 기지국(base station)의 범위 내의 임의의 장소에서 데이터를 송신 및 수신할 수 있게 하는 휴대폰과 같은 무선 기술이다. 와이-파이 네트워크는 안전하고, 신뢰성 있고, 신속한 무선 접속성(connectivity)을 제공하도록 IEEE 802.11(a, b, g 등)로 지칭되는 무선 기술들(radio technologies)을 사용한다. 와이-파이 네트워크는 컴퓨터들을 상호 간에, 인터넷에, 그리고 (IEEE 802.3 또는 이더넷(Ethernet)을 사용하는) 유선 네트워크들에 접속하는데 사용될 수 있다. 와이-파이 네트워크는 사용권 설정되지 않은(unlicensed) 2.4 및 5 GHz 무선 주파수 대역에서, 11 Mbps (802.11b) 또는 54 Mbps (802.11a) 데이터 레이트(data rate)로 동작하거나, 양 대역(이중 대역(dual band))을 포함하는 제품들로 동작하며, 따라서 네트워크들은 많 은 사무실에서 사용되는 기본 10BaseT 유선 이더넷 네트워크들과 유사한 실제 성능(real-world performance)을 제공할 수 있다.

도시된 컴퓨터(1402)는 또한 하이퍼랜(HiperLAN) 기술을 가지고 이용될 수도 있다. 하이퍼랜은 유럽의 국가들에서 주로 사용되는 일련의 무선 근거리 통신망(wireless local area network (WLAN)) 통신 표준들이다. HiperLAN/1 및HiperLAN/2의 두 가지 사양(specification)이 존재하며, 이들 양자가 유럽 전기통신 표준 위원회(European Telecommunications Standards Institute)에 의해 채택되었다. 하이퍼랜 표준들은 미국 및 다른 채용된 국가들에서 사용되는 IEEE 802.11 WLAN 표준들과 유사한 특징들 및 능력들을 제공한다. HiperLAN/1은 무선 주파수 스펙트럼(radio frequency spectrum)의 5-GHz 범위에서 최대20 Mbps의 통신을 제공한다. HiperLAN/2는 동일한 RF 대역에서 최대 54 Mbps로 동작하며, 데이터, 이미지, 및 음성 통신을 송신 및 수신하기 위한 3G(third-generation) WLAN 시스템과 호환 가능하다. HiperLAN/2는 5-GHz RF 대역에서 유사 시스템들과 연관되는 전세계적인 구현을 위한 잠재력을 가지며, 그 구현을 위해 의도된 것이다.

이제 도 15를 참조하면, 본 발명에 따른 예시적인 컴퓨팅 환경(1500)의 도식적인 블록도가 도시되어 있다. 시스템(1500)은 하나 이상의 클라이언트(1502)를 포함한다. 클라이언트(1502)는 하드웨어 및/또는 소프트웨어(예를 들면, 스레드, 프로세스, 컴퓨팅 장치)일 수 있다. 클라이언트(1502)는, 예를 들어, 본 발명을 이용함으로써 쿠키(들) 및/또는 연관된 문맥적 정보를 수용할 수 있다. 시스템(1500)은 또한 하나 이상의 서버(1504)를 포함한다. 서버(1504) 역시 하드웨어 및 /또는 소프트웨어(예를 들면, 스레드, 프로세스, 컴퓨팅 장치)일 수 있다. 서버(1504)는, 예를 들어, 본 발명을 이용함으로써, 변환(transformation)을 수행하기 위한 스레드들을 수용할 수 있다. 클라이언트(1502)와 서버(1504) 간의 하나의 가능한 통신은 둘 이상의 컴퓨터 프로세스 간에 송신되도록 조정된 데이터 패킷의 형태로 이루어질 수 있다. 데이터 패킷은, 예를 들어, 쿠키 및/또는 연관된 문맥적 정보를 포함할 수 있다. 시스템(1500)은 클라이언트(1502)와 서버(1504) 간의 통신을 용이하게 하도록 이용될 수 있는 통신 프레임워크(1506)(예를 들면, 인터넷과 같은 전역적 통신 네트워크)를 포함한다.

통신들은 유선(광섬유를 포함함) 및/또는 무선 기술을 통해 용이하게 될 수 있다. 클라이언트(1502)는 클라이언트(1502)에 대해 로컬한 정보(예를 들면, 쿠키(들) 및/또는 연관된 문맥적 정보)를 저장하도록 이용될 수 있는 하나 이상의 클라이언트 데이터 저장소(data store; 1508)에 동작 가능하게 접속된다. 이와 유사하게, 서버(1504)는 서버(1504)에 대해 로컬한 정보를 저장하도록 이용될 수 있는 하나 이상의 서버 데이터 저장소(1510)에 동작 가능하게 접속된다.

앞서 설명된 내용은 본 발명의 예들을 포함한다. 물론, 본 발명을 설명하기 위해, 컴포넌트들 및 방법론들의 생각할 수 있는 모든 조합을 기술하는 것은 불가능하지만, 당업자는 본 발명의 여러 추가적인 조합들 및 변형들이 가능하다는 점을 인식할 수 있을 것이다. 따라서, 본 발명은 첨부된 청구항들의 기술 사상 및 범위에 속하는 모든 변경들, 수정들, 및 변화들을 포함하도록 의도된다.

본 발명은 멀티미디어 회의 환경에서 실시간 정보 교환을 용이하게 하는 시스템들 및 방법들을 개시한다. 또한 본 발명은 하나의 위치 또는 복수의 상이한 위치에 있는 데이터 클라이언트들 간의 파일 전송 및 프레젠테이션 배포를 용이하게 한다.

Claims

회의 환경에서 사용자들 간의 실시간 정보 교환을 용이하게 하는 시스템으로서,

회의-관련 정보를 수신하여 그 정보를 각각의 사용자들에게 제시하는 적어도 두 개의 데이터 클라이언트(Data Client) - 각각의 데이터 클라이언트는 프레젠테이션 슈트 아이콘(Presentation Chute icon)을 그 내부에 갖는 사용자 인터페이스를 포함함-; 및

각각의 상기 적어도 두 개의 데이터 클라이언트와 통신하며 적어도 하나의 실시간 통신 채널을 통한 데이터 전송을 가능하게 하는 데이터 서버(Data Server) 및 룸 서버(Room Server)

를 포함하는 시스템.
제1항에 있어서, 적어도 하나의 데이터 클라이언트는 상기 룸 서버에 대해 로컬하게(locally) 위치하고, 적어도 하나의 데이터 클라이언트는 상기 룸 서버로부터 원격에 위치하는 시스템.
제2항에 있어서, 상기 회의 환경은 원격 사용자를 나타내는 적어도 하나의 원격자용 스탠드-인-디바이스(remote person Stand-in Device), 및 상기 적어도 하나의 원격자용 스탠드-인-디바이스에 의해 표현되는 적어도 하나의 원격 사용자에 게 오디오 및 비디오 통신 정보를 제공하는 오디오/비디오(AV) 클라이언트를 포함하는 시스템.
제3항에 있어서, 상기 적어도 하나의 원격에 위치한 데이터 클라이언트는 마이크로폰 및 웹 카메라를 포함하는 원격 퍼스널 컴퓨터 상에서 실행되는 시스템.
제4항에 있어서, 상기 원격 퍼스널 컴퓨터는 원격 위치에서 오디오 및 비디오 정보를 조정(coordination)하는 AV 클라이언트를 포함하는 시스템.
제2항에 있어서, 데이터 클라이언트는 퍼스널 컴퓨터, 노트북, 타블렛(tablet), 핸드헬드 컴퓨팅 장치, PDA(personal desktop assistant), 및 휴대폰 중 적어도 하나에서 실행되는 시스템.
제6항에 있어서, 상기 로컬 위치에서 스틸 이미지들 및/또는 비디오를 캡쳐하며 하나 이상의 원격 위치에 있는 하나 이상의 AV 클라이언트로의 배포(dissemination)를 위해 상기 캡쳐된 데이터를 상기 로컬 위치에 있는 상기 AV 클라이언트에 제공하는 비디오 컴포넌트를 더 포함하는 시스템.
제7항에 있어서, 상기 비디오 컴포넌트는 회의실 테이블에 있는 사용자들의 광각 비디오(wide-angle video)를 캡쳐하는 디지털 카메라를 포함하는 시스템.
제8항에 있어서, 상기 디지털 카메라를 제어하는 가상 디렉터(Virtual Director)를 더 포함하는 시스템.
제8항에 있어서, 상기 비디오 컴포넌트는 실시간 배포를 위해 문서들의 고해상도 이미지들을 캡쳐하는 웹 카메라를 더 포함하는 시스템.
제6항에 있어서, 회의실 내의 오디오 정보를 캡쳐하며 하나 이상의 원격 위치에 있는 하나 이상의 AV 클라이언트로의 배포를 위해 상기 캡쳐된 데이터를 상기 회의실에 있는 상기 AV 클라이언트에 제공하는 오디오 컴포넌트를 더 포함하는 시스템.
제11항에 있어서, 상기 오디오 컴포넌트에 대한 제어를 행하거나 상기 오디오 컴포넌트와 관련된 추론을 행하거나, 또는 상기 제어와 추론을 모두 행하는 가상 디렉터를 더 포함하는 시스템.
제11항에 있어서, 상기 오디오 컴포넌트는 상기 회의실 내의 주변 소음(ambient noise)을 감소시키는 시스템.
제11항에 있어서, 상기 오디오 컴포넌트는 상기 회의실 내의 반향 완화(echo mitigation)를 제공하는 시스템.
제11항에 있어서, 상기 오디오 컴포넌트는 데이터 캡쳐, 소음 감소, 및 자동적인 반향 완화 중 적어도 하나를 용이하게 하는 마이크로폰 어레이(microphone array)를 포함하는 시스템.
제15항에 있어서, 상기 오디오 컴포넌트는 상기 회의실 내의 스피커 위치를 결정하는 시스템.
제1항에 있어서, 상기 사용자 인터페이스는 서버 파일 아이콘들을 포함하는 제1 영역 및 로컬 파일 아이콘들을 포함하는 제2 영역을 더 포함하는 시스템.
제17항에 있어서, 상기 프레젠테이션 슈트 아이콘은 제1 데이터 클라이언트의 사용자로 하여금, 상기 서버로의 즉각적인 업로딩 및 적어도 하나의 제2 데이터 클라이언트로의 배포를 위해, 상기 프레젠테이션 슈트 아이콘 상으로 파일을 드래그-앤-드롭(drag-and-drop)할 수 있게 하는 시스템.
제18항에 있어서, 상기 파일은 전자 슬라이드 프레젠테이션인 시스템.
회의 환경에서 실시간 멀티미디어 정보 교환을 용이하게 하는 시스템으로서,

회의실에 위치한 룸 서버;

상기 회의실에 위치하며, 데이터 공동작업(data collaboration)을 촉진하도록 퍼스널 컴퓨팅 장치 상에서 실행되는 하나 이상의 로컬 데이터 클라이언트;

상기 회의실로부터 떨어진 적어도 하나의 상이한 위치(disparate location)에서 하나 이상의 원격 퍼스널 컴퓨팅 장치 상에서 실행되는 하나 이상의 원격 데이터 클라이언트; 및

상기 회의실 및 상기 적어도 하나의 상이한 위치 중 적어도 하나에서 실행되는 영(zero) 이상의 오디오/비디오(AV) 클라이언트

를 포함하는 시스템.
제20항에 있어서, 상기 하나 이상의 원격 퍼스널 컴퓨팅 장치는 마이크로폰, 웹 카메라, 및 AV 클라이언트가 장착된 퍼스널 컴퓨터를 포함하는 시스템.
제20항에 있어서, 상기 하나 이상의 원격 퍼스널 컴퓨팅 장치는 휴대폰을 포함하는 시스템.
제20항에 있어서, 원격 사용자로 하여금, 상기 회의실로부터 실시간 오디오 및 비디오 데이터를 수신할 수 있게 하며 상기 회의실 내의 사용자들에 의해 상기 회의실에서 보일 수 있게 하는, 상기 룸 서버에 접속된 원격 스탠드-인-디바이스를 더 포함하는 시스템.
제23항에 있어서, 상기 원격 스탠드-인-디바이스는 평면 표시 장치(flat panel display), 디지털 자동 팬/틸트/줌(digital automatic pan/tilt/zoom; DPTZ) 카메라, 마이크로폰 어레이, 및 하나 이상의 스피커를 포함하는 시스템.
제24항에 있어서, 상기 원격 사용자는 상기 DPTZ 카메라에 의해 캡쳐된 디지털 이미지의 특정 영역들을 팬, 틸트, 및/또는 줌 하도록 상기 DPTZ 카메라를 제어하는 시스템.
제25항에 있어서, 상기 DPTZ 카메라는,

상기 회의실 내의 화자(speaking person)의 위치에 관하여 상기 마이크로폰 어레이로부터 수집된 위치 정보(position information); 및

상기 DPTZ 카메라에 의해 캡쳐된 비디오로부터 수집된 시각-기반 추적 정보(vision-based tracking information)

중 적어도 하나에 적어도 일부 기초하여 상기 회의실 내의 상기 화자를 자동적으로 팬, 틸트, 및/또는 줌 하도록 가상 디렉터에 의해 제어되는 시스템.
제26항에 있어서, 상기 시각-기반 추적 정보는 화자의 동작(motion), 화자의 외형(appearance), 및 입자 필터(particle filter)-기반 분석 중 적어도 하나에 기초하는 시스템.
제26항에 있어서, 상기 가상 디렉터는 디지털 비디오 이미지의 로컬화된 영역(localized region)을 제시하며, 상기 영역에서 화자는 상기 디지털 비디오 이미지의 나머지 부분보다 높은 해상도로 위치하는 시스템.
제20항에 있어서, 상기 회의 환경은, 각각 적어도 하나의 데이터 클라이언트 또는 AV 클라이언트를 포함하는 복수의 회의실 및 복수의 원격지 중 적어도 하나를 포함하는 시스템.
제29항에 있어서, 각각의 상기 복수의 회의실 및 상기 복수의 원격지는 AV 클라이언트를 포함하는 시스템.
회의실에서 실시간 멀티미디어 정보 교환을 용이하게 하는 시스템으로서,

룸 서버 PC 상에 상주하며 정보 교환의 중앙집중화된 제어(centralized control)를 제공하는 룸 서버;

AV 통신을 제어하며 상기 룸 서버 PC에 상주하는 로컬 오디오/비디오(AV) 클라이언트; 및

상기 룸 서버에 접속되고, 상기 AV 클라이언트로부터 분리되며 별개인 하나 이상의 데이터 클라이언트

를 포함하는 시스템.
제31항에 있어서, 상기 룸 서버는 상기 하나 이상의 데이터 클라이언트와 통신하는 데이터 서버를 포함하는 시스템.
제32항에 있어서, 상기 룸 서버는 영(zero) 이상의 원격 AV 클라이언트 및 로컬 AV 클라이언트에 접속된 AV 서버를 포함하는 시스템.
제31항에 있어서, 하나 이상의 원격 사용자를 나타내는 원격 스탠드-인-디바이스를 더 포함하는 시스템.
제34항에 있어서, 상기 원격 스탠드-인-디바이스는 모니터, 상기 회의실의 비디오를 캡쳐하는 광각 웹 카메라(wide-angle web camera), 상기 회의실의 오디오를 캡쳐하는 마이크로폰 어레이, 및 하나 이상의 스피커를 포함하는 시스템.
제35항에 있어서, 문서들의 고해상도 이미지들 및/또는 비디오를 캡쳐하는 웹 카메라를 더 포함하는 시스템.
실시간 멀티미디어 회의 환경 내의 데이터 클라이언트의 자동적인 발견을 용이하게 하는 방법으로서,

복수의 데이터 클라이언트를 중앙집중식으로 통제(govern)할 수 있는 회의실 내의 서버를 활성화시키는 단계;

상기 회의 환경으로 새로운 데이터 클라이언트를 도입하는 단계;

상기 새로운 데이터 클라이언트의 신원(identity)을 판정하는 단계;

상기 새로운 데이터 클라이언트의 상기 회의에의 참석에 대한 인가(authorization)를 검증하는 단계; 및

상기 인가의 검증시에 상기 서버 및 상기 새로운 데이터 클라이언트 간의 통신 링크를 개시하는 단계

를 포함하는 방법.
제37항에 있어서, 사용자와 연관된 데이터 클라이언트로의 통지(notification)를 통해 상기 사용자를 회의에 참가하도록 초청하는 단계를 더 포함하는 방법.
제37항에 있어서, 상기 데이터 클라이언트의 상기 신원은 상기 데이터 클라이언트에 할당된 URL(universal resource locator) 신원, 인터넷 프로토콜 어드레스, 및 이메일 어드레스 중 적어도 하나를 통해 결정되는 방법.
제37항에 있어서, 상기 데이터 클라이언트의 상기 사용자가 상기 데이터 클라이언트와 연관되어 있는 사람임을 보증하기 위하여, 사용자 신원을 검증하기 위해 사용자에게 패스워드를 입력하라는 프롬프트(prompt)를 제공하는 단계를 더 포 함하는 방법.
실시간 멀티미디어 정보 교환을 용이하게 하는 시스템으로서,

제1 위치 및 상기 제1 위치로부터 원격한 제2 위치 중 적어도 하나에서 오디오/비디오 정보를 캡쳐하기 위한 수단;

상기 제1 위치 및 제2 위치 중 적어도 하나에 각각 위치하는 적어도 두 명의 사용자에게 캡쳐된 오디오/비디오 정보를 제시하기 위한 수단;

상기 적어도 두 명의 사용자 간에 데이터 공동작업을 가능하게 하기 위한 수단; 및

상기 적어도 두 명의 사용자 간에 통신 링크를 제공하기 위한 수단

을 포함하는 시스템.
제41항에 있어서,

제1 사용자로부터 적어도 한 명의 제2 사용자로, 이진 포맷(binary format)으로 실시간 문서 전송을 가능하게 하기 위한 수단; 및

전송된 문서를 특정 유형의 문서로 인식하고 그것을 상기 특정 유형에 따라 수신 사용자(recipient user)에게 제시하기 위한 수단

을 더 포함하는 시스템.
제41항에 있어서, 회의에 참가하도록 사용자를 초청하기 위한 수단을 더 포 함하는 시스템.
멀티미디어 회의 환경 내의 실시간 정보 교환을 위한 방법으로서,

데이터 공동작업을 가능하게 하는 데이터 클라이언트를 제공하는 단계; 및

AV 통신을 가능하게 하는 AV 클라이언트를 제공하는 단계

를 포함하며,

상기 AV 클라이언트 및 데이터 클라이언트는 서로에 대해 독립적으로 동작하는 방법.