KR20110069875A

KR20110069875A - 회의 단말기, 회의 서버, 회의 시스템 및 데이터 처리 방법

Info

Publication number: KR20110069875A
Application number: KR1020117010848A
Authority: KR
Inventors: 얀보 롱; 푸린 왕; 샤오샤 웨이; 우저우 잔; 동키 왕
Original assignee: 후아웨이 디바이스 컴퍼니 리미티드
Priority date: 2008-10-20
Filing date: 2009-10-16
Publication date: 2011-06-23
Also published as: EP2348671A1; CN101370115A; JP5472882B2; JP2012506224A; US8860776B2; EP2348671B1; KR20120102821A; CN101572794A; CN102291562B; KR101227625B1; EP2348671A4; US20110193932A1; WO2010045857A1; CN102291562A; CN101572794B; KR101243065B1

Abstract

회의 단말기, 회의 서버, 회의 시스템, 및 데이터 처리 방법이 제공된다. 회의 단말기는 마크 데이터 신호를 획득하도록 구성된 마크 획득 모듈; 이미지 데이터 신호를 획득하도록 구성된 이미지 획득 모듈; 상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성하도록 구성된 중첩 모듈; 및 상기 하이브리드 이미지 데이터 신호를 출력하도록 구성된 출력 모듈을 포함한다. 본 발명은 화상 회의 사용자들 간의 상호작용성 및 토론 효율성을 향상시킨다.

Description

회의 단말기, 회의 서버, 회의 시스템 및 데이터 처리 방법{CONFERENCE TERMINAL, CONFERENCE SERVER, CONFERENCE SYSTEM AND METHOD FOR DATA PROCESSING}

본 발명은 회의 단말기, 회의 서버, 회의 시스템 및 데이터 처리 방법에 관한 것이다.

초기의 화상 회의에서는, 사람들이 이미지와 소리만으로 서로 상호작용하였다. 후에, H.261 프로토콜에 의해 화상 회의 참가자는 모션 비디오 채널(motion video channel)을 통해 4CIF 크기의 정적 그래픽 파일을 전달할 수 있게 되었고, 이에 따라 참가자는 슬라이드를 서로 공유할 수 있다. 그렇지만, 이러한 공유는 모션 비디오 채널을 위해 경쟁하여야 실현된다. 슬라이드의 해상도는 높지 않으며, 또한 슬라이드의 전송은 모션 비디오의 일시정지의 원인이 되곤 하였다.

후에, H.239 프로토콜에 의해 참가자는 H.239 보조 스트림 채널을 생성하여 슬라이드를 독점적으로 전송하고 메커니즘 채널을 사용하여 모션 비디오를 전송할 수 있게 되었다. 그러므로 모션 비디오의 전송과 슬라이드의 전송 간에 상충(mutual impact)이 존재하지 않는다. 통상적인 어플리케이션 시나리오가 도 1에 도시되어 있다. 회의 단말기(12)는 카메라(11)가 촬영한 회의 이미지 및 컴퓨터(10)의 파일(예를 들어 PPT 파일 또는 워드 파일)을 동시에 수신하고, 이 회의 이미지 및 파일에 대한 비디오 인코딩을 (통상적으로 H.263 및 H.264에 기초하여) 수행한다. 그 후, H.239 프로토콜이 제공하는 채널을 통해, 회의 단말기(12)는 두 개의 비디오 스트림을 MCU(Multipoint Control Unit)(13)에 동시에 보내고, 이 MCU(13)는 이 비디오 스트림을 회의 중에 있는 다른 단말기(14)에 보낸다. 이 두 개의 비디오 스트림을 수신한 후, 단말기(14)는 이 두 개의 비디오 스트림을 디코딩하여 두 개의 상이한 비디오 이미지 스트림을 획득하고, 이 비디오 이미지 스트림을 프로젝터(16) 또는 TV 수상기(15)에 표시한다. 이 방식에서는, 어떠한 참가자라도 모든 다른 참가자와 파일을 공유할 수 있으며, 간단한 데이터 교환이 실현된다. 그렇지만, 슬라이드를 공유하는 이러한 모드에는 현저한 단점이 있는데, 참가자들이 서로 상호작용할 수 없다는 것이다. 연설자가 슬라이드를 설명할 때, 다른 참가자들이 이 슬라이드를 볼 수는 있지만 그 슬라이드에 표시할 수는 없으며, 이에 따라 토론 효율성이 떨어지고 상호작용성이 저하된다.

이러한 단점의 관점에서, 종래 기술에 다른 솔루션이 제시되었는 데, 전자칠판에 표시할 수 있게 함으로써 화상 회의의 참가자들 간의 상호작용이 가능하게 하는 것이다. 도 2에 도시된 바와 같이, 전자칠판 서버(20)를 회의 서버 측에 설치하고, 전자칠판 클라이언트를 각각의 화상 회의 단말기, 예를 들어, 클라이언트(21), 클라이언트(22), 클라이언트(23), 클라이언트(24), 및 클라이언트(25)에 설치한다. 이러한 클라이언트들은 일반적으로 퍼스널 컴퓨터(PC)이고, 일부의 클라이언트는 회의 서브시스템에서의 회의 서버 또는 회의 클라이언트일 수 있다. 모든 클라이언트는 네트워크를 통해 전자칠판 서버(20)에 접속되어 있다. 전자칠판 서버(20)는 공백 배경(blank background)일 수 있는 전자칠판을 개시한다. 대안으로, 사진(picture) 또는 슬라이드를 배경으로서 사용할 수도 있다. 전자칠판 서버(20)는 전자칠판 상의 컨텐츠를 사진 형태로 모든 클라이언트에 보낸다. 그러므로 각각의 클라이언트는 동일한 컨텐츠를 볼 수 있고, 참가자는 이 클라이언트를 통해 전자칠판 위에 표시할 수 있는 데, 예를 들어, 전자칠판에 선이나 원을 그리거나 텍스트를 입력할 수 있다. 클라이언트가 수행하는 동작을 수신한 후, 전자칠판 서버(20)는 전자칠판의 컨텐츠를 갱신하고, 그 갱신된 컨텐츠를 모든 클라이언트에 보낸다. 이 방법에서, 모든 참가자는 전자칠판을 공유하여 토론을 한다. 그렇지만, 이 모드는 사용 범주에 제한이 있다. 예를 들어, 사용자는 슬라이드를 직접 표시할 수 없는 데, 즉, 시스템은 표시된 슬라이드를 공유할 수 없다. 이 외에, 시스템은 다른 전자칠판 시스템을 생성해야 하며, 적어도 하나의 컴퓨터가 각각의 회의 장소에 구성되어야 하기 때문에, 시스템 복잡성 및 구성 비용이 증가하게 된다.

종래 기술에서, 다른 방법, 즉 원격 협력(remote collaboration)은 전자칠판을 표시하는 방법과 유사하다. 도 3에 도시된 바와 같이, 시스템은 원격 협력 서버(30)를 포함하며, 각각의 화상 회의 장소마다 컴퓨터, 예를 들어 컴퓨터(31), 컴퓨터(32), 컴퓨터(33), 및 컴퓨터(34)를 구성한다. 이러한 컴퓨터들은 네트워크를 통해 원격 협력 서버(30)에 접속되어 있다. 다른 참가자들과 데스크톱을 공유해야 하는 회의 장소에서는, 원격 협력 서버를 기동하고, 이 회의 장소의 컴퓨터 데스크톱 이미지(예를 들어, PPT 파일 또는 워드 파일)를 모든 다른 참가자들과 공유한다. 로컬 컴퓨터를 통해 원격 협력 서버(30)에 접속된 후에는, 다른 회의 장소에 있는 참가자들도 이 원격 협력 서버(30)가 제공하는 컴퓨터 데스크톱을 볼 수 있고 공유할 수 있다. 동시에, 로컬 마우스 및 키보드를 통해 수행되는 동작들은 원격 협력 서버(30)에 전송된다. 그러므로 모든 참가자들은 PPT 또는 워드와 같은 동일한 어플리케이션을 공동으로 동작할 수 있다. 그렇지만, 이 시스템도 또한 여분의 원격 협력 시스템을 필요로 하며, 회의 장소마다 적어도 하나의 컴퓨터를 구성해야 하기 때문에 시스템 복잡성 및 구성 비용이 증가하게 된다. 또한, 각각의 회의 장소의 각각의 컴퓨터에 대해 특별한 원격 협력 파라미터를 구성해야 하고, 사용자는 두 개의 시스템, 예를 들어 공유된 원격 시스템 및 로컬 시스템을 동작시켜야 한다. 공유하고 있는 PPT 파일 또는 워드 파일과 같은 파일은 회의 장소에 있는 컴퓨터에 미리 복사해 두어야 하며, 노트북 컴퓨터사에서 이용 가능한 플러그 앤 플레이 특성이 실현될 수 없어, 동작이 불편하다.

그러므로 종래 기술에는 적어도 이하와 같은 문제를 안고 있다:

화상 회의 시스템에서, 참가자들이 데이터를 교환할 때, 종래 기술의 화상 회의 시스템이 참가자들에게 제공하는 인터랙티브 데이터가 제한된다. 예를 들어, 전자칠판을 가진 시스템에서, 슬라이드를 표시할 수 없다. 또한, 전자칠판과 같은 화상 회의 시스템은 복잡하고 비용이 많이 든다.

본 발명의 실시예는 임의의 회의 단말기들 간에 데이터를 교환할 수 있고 회의 시스템을 복잡하게 하지 않으면서 회의 참가자의 토론 효율성을 높일 수 있는, 회의 단말기, 회의 서버, 회의 시스템 및 데이터 처리 방법을 제공한다.

본 발명의 실시예는 이하와 같은 기술적 솔루션을 제공한다:

본 발명의 실시예는 회의 단말기를 제공하며, 상기 회의 단말기는,

마크 데이터 신호를 획득하도록 구성된 마크 획득 모듈;

이미지 데이터 신호를 획득하도록 구성된 이미지 획득 모듈;

상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성하도록 구성된 중첩 모듈; 및

상기 하이브리드 이미지 데이터 신호를 출력하도록 구성된 출력 모듈

을 포함한다.

본 발명의 실시예는 회의 시스템을 제공하며, 상기 회의 시스템은,

제1 회의 단말기, 회의 서버, 및 적어도 하나의 제2 회의 단말기를 포함한다.

상기 제1 회의 단말기는,

상기 회의 서버에 의해 포워딩된 이미지 데이터 신호를 획득하도록 구성된 이미지 획득 모듈; 및

마크 데이터 신호를 획득하고, 상기 마크 데이터 신호를 상기 회의 서버에 송신하도록 구성된 마크 송신 모듈

을 포함한다.

상기 회의 서버는,

상기 회의 시스템 내의 임의의 회의 단말기에 의해 송신된 상기 이미지 데이터 신호를 수신하도록 구성된 이미지 데이터 수신 모듈;

상기 마크 데이터 신호를 수신하도록 구성된 마크 수신 모듈;

상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하도록 구성된 중첩 모듈; 및

상기 하이브리드 이미지 데이터를 상기 제1 회의 단말기 및 상기 적어도 하나의 제2 회의 단말기에 송신하도록 구성된 송신 모듈

을 포함한다.

상기 적어도 하나의 제2 회의 단말기는 상기 하이브리드 이미지 데이터를 수신하고 디스플레이하도록 구성되어 있다.

본 발명의 실시예는 다른 회의 시스템을 제공하며, 상기 다른 회의 시스템은,

상기 제1 회의 단말기는,

상기 회의 서버에 의해 송신된 이미지 데이터 신호를 획득하도록 구성된 이미지 획득 모듈; 및

을 포함한다.

상기 회의 서버는 상기 이미지 데이터 신호 및 상기 마크 데이터 신호를 수신하고 상기 이미지 데이터 신호 및 상기 마크 데이터 신호를 포워딩하도록 구성되어 있다.

상기 적어도 하나의 제2 회의 단말기는,

제1 시간 간격 값을 생성하도록 구성된 제1 타이머;

상기 회의 서버에 의해 포워딩된 상기 이미지 데이터 신호를 획득하도록 구성된 이미지 획득 모듈;

상기 회의 서버에 의해 포워딩된 상기 마크 데이터 신호를 획득하고, 상기 제1 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제1 마크 데이터 신호를 생성하도록 구성된 제1 외부 마크 획득 모듈;

상기 제1 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 제1 하이브리드 이미지 데이터 신호를 생성하도록 구성된 제1 중첩 모듈; 및

상기 제1 하이브리드 이미지 데이터 신호를 디스플레이하도록 구성된 디스플레잉 모듈

을 포함한다.

상기 제1 회의 단말기는,

제1 시간 간격 값을 생성하도록 구성된 제1 타이머;

제2 시간 간격 값을 생성하도록 구성된 제2 타이머;

로컬 회의 단말기에 의해 송신된 마크 데이터 신호를 획득하고, 상기 제1 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제1 마크 데이터 신호를 생성하도록 구성된 제1 내부 마크 획득 모듈;

상기 로컬 회의 단말기에 의해 송신된 상기 마크 데이터 신호를 획득하고, 상기 제2 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제2 마크 데이터 신호를 생성하도록 구성된 제2 내부 마크 획득 모듈;

상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 제2 하이브리드 이미지 데이터를 생성하도록 구성된 제2 중첩 모듈; 및

상기 제1 하이브리드 이미지 데이터를 상기 로컬 회의 단말기의 디스플레이 화면에 송신하거나, 상기 제2 하이브리드 이미지 데이터를 보조 스트림 채널을 통해 상기 회의 서버에 송신하도록 구성된 제2 송신 모듈

을 포함한다.

상기 회의 서버는, 상기 제2 하이브리드 이미지 데이터를 수신하고 포워딩하도록 구성되어 있다.

상기 적어도 하나의 제2 회의 단말기는 상기 제2 하이브리드 이미지 데이터를 수신하고 디스플레이하도록 구성되어 있다.

본 발명의 실시예는 데이터 처리 방법을 제공하며, 상기 데이터 처리 방법은,

이미지 데이터 신호를 획득하는 단계;

마크 데이터 신호를 획득하는 단계;

상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성하는 단계; 및

상기 하이브리드 이미지 데이터 신호를 출력하는 단계

를 포함한다.

본 발명의 실시예는 다른 데이터 처리 방법을 제공하며, 상기 다른 데이터 처리 방법은,

회의 단말기에 의해 송신되는 이미지 데이터 신호 및 마크 데이터 신호를 수신하는 단계;

상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하는 단계; 및

상기 하이브리드 이미지 데이터, 또는 상기 이미지 데이터 신호, 또는 상기 마크 데이터 신호를 상기 회의 단말기에 송신하는 단계

를 포함한다.

본 발명의 실시예는 이하의 이점을 제공한다:

전술한 기술적 솔루션에서, 회의 단말기는 마크 데이터 신호를 이미지 데이터 신호에 중첩시켜 하이브리드 이미지 데이터 신호(예를 들어, 하이브리드 이미지 데이터 신호는 마크 슬라이드(marked slide)이다)를 생성한다. 이 방법에서, 회의 단말기에 의해 참가자는 슬라이드를 보면서 슬라이드에 마크를 부가할 수 있고, 화상 회의 사용자들 간의 상호작용성이 향상되며, 회의 시스템의 복잡성을 증가시키지 않으면서 토론 효율성이 향상된다.

본 발명 하의 또는 종래 기술에서의 기술적 솔루션을 더 분명하게 하기 위해, 본 발명의 실시예에 대한 상세한 설명 또는 종래 기술에 포함된 첨부된 도면에 대하여 설명한다. 분명하게, 이하에 설명된 첨부 도면은 단지 예시에 지나지 않으며 비제한적이며, 당업자는 어떠한 창조적 노력 없이도 이러한 첨부 도면으로부터 다른 도면을 도출할 수 있다.
도 1은 종래 기술의 회의 시스템의 어플리케이션 시나리오의 개략 구조도이다.
도 2는 종래 기술의 회의 시스템에서 상호작용을 위한 전자칠판을 사용하는 어플리케이션 시나리오의 개략 구조도이다.
도 3은 종래 기술의 회의 시스템에서 상호작용을 위한 원격 협력 서버를 사용하는 어플리케이션 시나리오의 개략 구조도이다.
도 4는 본 발명의 실시예에 따른 회의 단말기의 개략적인 전체 구조도이다.
도 5는 도 4에 도시된 회의 단말기의 특정한 개략 구조도이다.
도 6은 도 5에 도시된 회의 단말기가 로컬 마크 데이터 신호를 수신하고, 그 로컬 마크 데이터 신호를 국부적으로 중첩하여 하이브리드 이미지 데이터를 생성하는 방법에 관한 특정한 개략 구조도이다.
도 7은 도 5에 도시된 회의 단말기가 로컬 마크 데이터 신호를 보낸 다음 기록하고 토큰을 획득한 후 로컬 마크 데이터 신호를 보낼 때, 제1 토큰 제어 모듈이 H.239 보조 스트림 채널로부터 토큰을 신청하는 방법에 관한 개략 구조도이다.
도 8은 도 5에 도시된 회의 단말기가 외부 마크 데이터 신호를 수신하고, 그 외부 마크 데이터 신호를 국부적으로 중첩하여 하이브리드 이미지 데이터를 생성하는 방법에 관한 특정한 개략 구조도이다.
도 9는 도 8에 도시된 제1 외부 마크 획득 모듈의 특정한 개략 구조도이다.
도 10은 도 5에 도시된 회의 단말기가 로컬 중첩을 수행한 다음, 중첩을 수행하고 토큰을 획득한 후 하이브리드 이미지 데이터를 생성할 때, 제2 토큰 제어 모듈이 H.239 보조 스트림 채널로부터 토큰을 신청하는 방법에 관한 개략 구조도이다.
도 11은 도 1에 도시된 회의 단말기의 다른 특정한 개략 구조도이다.
도 12는 회의 단말기의 다른 특정한 개략 구조도이다.
도 13은 회의 단말기의 특정한 어플리케이션 시나리오의 개략도이다.
도 14는 회의 단말기의 다른 특정한 어플리케이션 시나리오의 개략도이다.
도 15는 회의 단말기의 다른 특정한 어플리케이션 시나리오의 개략도이다.
도 16은 본 발명의 실시예에 따른 회의 서버의 개략 구조도이다.
도 17은 도 16에 도시된 회의 서버의 특정한 개략 구조도이다.
도 18은 본 발명의 실시예에 따른 회의 시스템의 개략 구조도이다.
도 19는 도 18에 도시된 회의 시스템에 연결된 복수의 MCU의 어플리케이션 시나리오의 개략도이다.
도 20은 본 발명의 실시예에 따른 회의 시스템의 다른 개략 구조도이다.
도 21은 도 20에 도시된 회의 시스템에 연결된 복수의 MCU의 어플리케이션 시나리오의 개략도이다.
도 22는 본 발명의 실시예에 따른 회의 시스템의 다른 개략 구조도이다.
도 23은 도 22에 도시된 회의 시스템에 연결된 복수의 MCU의 어플리케이션 시나리오의 개략도이다.
도 24는 본 발명의 실시예에 따른 데이터 처리 방법의 개략 흐름도이다.
도 25는 본 발명의 실시예에 따른 데이터 처리 방법의 다른 개략 흐름도이다.

본 발명의 실시예에 의해 해결되는 기술적 문제, 본 발명의 기술적 솔루션 및 이점을 분명하게 하기 위해, 이하에 첨부된 도면 및 예시적 실시예를 참조하여 본 발명을 더 상세하게 설명한다.

종래 기술에서는 사용자의 의지로는 H.239 표준의 듀얼-스트림 기능을, 전자칠판을 마킹하는 것과 유사한 마킹 기능과 결합할 수 없다는 것과, 사용자 간의 충분한 상호작용성이 가능하지 않다는 것을 고려하여, 본 발명의 실시예는 회의 단말, 회의 서버, 회의 시스템 및 이 회의 시스템에서의 데이터 처리 방법을 제공한다.

회의 단말기의 제1 실시예

도 4는 회의 단말기의 개략 구조도이다. 본 실시예의 회의 단말기(40)는,

마크 데이터 신호를 획득하도록 구성된 마크 획득 모듈(41);

이미지 데이터 신호를 획득하도록 이미지 획득 모듈(42);

마크 데이터 신호를 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성하도록 구성된 중첩 모듈(43);

하이브리드 이미지 데이터 신호를 로컬 회의 단말기 또는 다른 회의 단말기에 신호를 포워딩하는 MCU와 같은 회의 서버의 표시 화면에 출력하도록 구성된 출력 모듈(44)

을 포함한다.

여기서 회의 단말기(40)는 화상 회의의 회의 장소에 있는 단말기일 수 있다. 회의 장소에 있는 복수의 입력 장치의 신호를 관리하는 것을 담당하는 회의 단말기 서버일 수 있다. 입력 장치는 오디오 입력 장치, 비디오 입력 장치, 전자칠판 또는 기록 화면일 수 있다. 이 회의 장소는 비디오 신호를 출력하는 이미지 디스플레이 장치(예를 들어 통상의 디스플레이), 오디오 신호를 출력하는 사운드 박스를 더 포함하며, 이미지 데이터 신호는 PPT 파일 또는 유사한 파일일 수 있으며, 마크 데이터 신호는 원(circle) 또는 코멘트(comment)일 수 있다. 회의 단말기(40)는 마크 데이터 신호를 그 수신된 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성한다. 예를 들어, 하이브리드 이미지 데이터 신호는 마크된 슬라이드이다. 회의 시스템의 복잡도를 증가시키지 않으면서, 회의 단말기는 참가자가 슬라이드를 보면서 슬라이드를 표시할 수 있으며, 이에 따라 화상 회의 사용자 간의 상호작용성 및 토론 효율성을 향상시킨다.

회의 단말기의 제2 실시예

도 5에 도시된 바와 같이, 회의 단말기의 제1 실시예에 기초하여, 회의 단말기(40)는 제1 시간 간격 값을 생성하도록 구성된 제1 타이머(45), 제2 시간 간격 값을 생성하도록 구성된 제2 타이머(46)를 더 포함할 수 있다. 실제로, 두 개의 타이머는 동일한 타이머일 수 있으며, 이 타이머는 두 개의 시간 간격 값을 출력한다.

따라서, 마크 획득 모듈(41)은 제1 마크 획득 모듈(411) 및 제2 마크 획득 모듈(412)을 포함한다.

제1 마크 획득 모듈(411)은, 마크 데이터 신호를 수신하고, 상기 마크 데이터 신호를 제1 시간 간격 값에 따라 출력하여, 제1 마크 데이터 신호를 생성하도록 구성되어 있다. 제1 시간 간격 값은 로컬 회의 단말기의 표시 화면상에 마크 데이터 신호를 디스플레이하는 것을 제어한다. 제1 시간 간격 값은 대체로 작으며, 즉 제1 시간 간격은 대체로 짧다. 회의 단말기의 표시 화면(40)이 TV 수상기인 경우, 제1 시간 간격의 최상의 값은 TV 수상기의 프레임 간격과 동일하다.

제2 마크 획득 모듈(412)은, 마크 데이터 신호를 출력하여 제2 시간 간격 값에 따라 마크 데이터 신호를 출력하여, 제2 마크 데이터 신호를 생성하도록 구성되어 있다. 원격 회의 단말기에 전송될 때 마크 데이터 신호가 H.239 보조 스트림 채널로 전송되어야 하기 때문에, 제2 시간 간격 값이 너무 짧지 않은 것이 바람직하다. 제2 시간 간격 값은 전송된 데이터의 크기가 감소하도록 1초 정도로 클 수도 있다.

회의 단말기의 제3 실시예

도 6에 도시된 바와 같이, 회의 단말기의 제2 실시예의 제1 마크 획득 모듈(411)은 제1 내부 마크 획득 모듈(4110)일 수 있고, 로컬 회의 단말기가 보낸 마크 데이터 신호를 획득하고, 제1 시간 간격 값에 따라 마크 데이터 신호를 출력하여, 제1 마크 데이터 신호를 생성하도록 구성되어 있다. 예를 들어, 로컬 회의 단말기의 터치 스크린을 통해, 사용자는 이미지 획득 모듈(42)에 의해 수신된 이미지 데이터 신호에 원과 같은 마크를 부가한다. 이미지 데이터 신호는 슬라이드일 수 있으며, 이 슬라이드는 로컬 슬라이드 또는 원격 회의 단말기로부터 수신된 슬라이드이다. 제1 내부 마크 획득 모듈(4110)은 제1 시간 간격 값에 따라 원 마크를 출력하여 제1 마크 데이터 신호를 생성한다.

게다가, 제2 마크 획득 모듈(412)은 제2 내부 마크 획득 모듈(4120)일 수 있으며, 로컬 회의 단말기에 의해 송신된 마크 데이터 신호를 수신하고, 제2 시간 간격 값에 따라 마크 데이터 신호를 출력하여 제2 마크 데이터 신호를 생성하도록 구성되어 있다.

회의 단말기는 마크 인코딩 모듈(47) 및 마크 송신 모듈(48)을 포함한다. 제2 내부 마크 획득 모듈(4110)에 의해 생성된 제2 마크 데이터 신호는 마크 인코딩 모듈(47)에 전송되고, 마크 인코딩 모듈(47)은 제2 마크 데이터 신호를 인코딩하여 제2 마크 데이터 신호를 생성한다. 제3 마크 데이터 신호는 마크 송신 모듈(48)에 전송된다. 마크 송신 모듈(48)은 H.239 보조 스크린 채널을 통해 제3 마크 데이터 신호를 회의 시스템에서의 회의 서버에 송신하고, 제3 마크 데이터 신호는 회의 서버에 의해 다른 회의 단말기에 포워딩된다.

회의 단말기의 제4 실시예

도 7에 도시된 바와 같이, 이전의 회의 단말기에서, H.239 보조 스트림 채널, 또는 회의 단말기와 회의 서버 또는 다른 회의 단말기 간의 사용자-정의 채널을 통해 데이터가 전송되고, H.239 프로토콜의 메인스트림 채널은 모션 비디오를 전송하도록 설계되어 있다. 이 방식에서, 정적 이미지 데이터의 전송과 모션 비디오의 전송 간에는 충돌이 없다. 그렇지만, H.239 프로토콜의 H.239 보조 스트림 채널을 사용하여, 로컬 회의 단말기에 의해 생성된 마크 데이터 신호 또는 하이브리드 이미지 데이터를 전송하는 경우, 토큰의 상호 배제에 기반하여 회의 시스템에서의 회의 단말기 간의 전송 충돌을 방지한다. 먼저, H.239 보조 스트림 채널이 마크 보조 스트림을 지원하는지의 여부를 검사하도록 판정이 이루어진다. H.239 보조 스트림 채널이 마크 보조 스트림을 지원하는 경우, 회의 단말기(40)는,

H.239 보조 스트림 채널로부터 회의 장소 토큰을 신청하고, 이 회의 장소 토큰을 성공적으로 획득한 후 제1 제어 신호를 생성하도록 구성된 제1 토큰 제어 모듈(49)

을 더 포함할 수 있다.

마크 송신 모듈(48)은 제3 마크 데이터 신호를 제1 제어 신호에 따라 H.239 보조 스트림 채널을 통해 회의 서버에 송신한다.

즉, 마크 데이터 신호를 송신하기 전에, 현재의 회의 단말기 T1이 토큰을 적용한다. 이 방법에서, T1의 마크 데이터 신호가 국부적으로 디스플레이되는 것이 허용되어 원격 회의 서버로 송신되고, 그런 다음 회의 서버에 의해 다른 회의 단말기에 포워딩된다. 시스템 내의 다른 회의 단말기 T2가 자체의 마크 데이터 신호를 송신하고자 하는 경우, T2는 먼저 토큰을 적용해야 하고 현재의 토큰 소유자는 회의 단말기 T1로부터 회의 단말기 T2로 변경하고, 이에 따라 상이한 회의 단말기들이 송신한 마크 데이터 신호의 충돌을 방지한다.

회의 단말기의 제5 실시예

도 8에 도시된 바와 같이, 모든 이전의 회의 단말기의 실시예에서, 회의 단말기는 수신 기능을 제공해야 한다. 구체적으로, 제1 마크 획득 모듈(411)은,

로컬 회의 단말기를 제외한 적어도 하나의 회의 단말기에 의해 송신되고 회의 서버에 의해 포워딩된 마크 데이터 신호를 수신하고, 제1 타이머(45)에 의해 생성된 제1 시간 간격 값에 따라 마크 데이터 신호를 출력하여 제1 마크 데이터 신호를 생성하도록 구성된 제1 외부 마크 획득 모듈(4111)이다.

중첩 모듈(43)은 제1 중첩 모듈(430)이며, 제1 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 제1 하이브리드 이미지 데이터 신호를 생성하도록 구성되어 있다.

출력 모듈(44)은 제1 송신 모듈(440)이고, 제1 하이브리드 이미지 데이터를 로컬 회의 단말기의 표시 화면에 보내어 표시 화면에 제1 하이브리드 이미지 데이터가 표시되도록 구성되어 있다.

회의 단말기의 제6 실시예

도 9에 도시된 바와 같이, 복수의 회의 장소에 있는 회의 단말기는 토론 프로세스 중에 마크를 동시에 만들어야 한다. 여러 회의 장소에서 마크 데이터 신호들의 무질서를 방지하기 위해 상호 배제가 수행되어야 한다. 회의 단말기의 이전의 제5 실시예에 기초해서, 제1 마크 획득 모듈(411)이 복수의 회의 단말기가 보낸 마크 데이터 신호를 수신하면, 제1 외부 마크 획득 모듈(4111)은,

로컬 회의 단말기를 제외한 적어도 하나의 회의 단말기에 의해 송신되고 회의 서버에 의해 포워딩된 마크 데이터 신호를 수신하도록 구성된 제1 외부 마크 획득 서브모듈(41110);

회의 장소에 각각 대응하는 적어도 하나의 디코더, 예를 들어 디코더 1, 디코더 2, 및 디코더 3으로서, 회의 장소(즉, 다른 회의 단말기)에 의해 송신된 마크 데이터 신호가 디코더에 수신되어 디코딩되고, 각각의 디코더는 그 수신된 마크 데이터 신호를 디코딩한 후 마크 데이터 신호 큐를 생성하는, 상기 적어도 하나의 디코더; 및

제1 시간 간격 값 및 상기 마크 데이터 신호 큐의 순서에 따라 마크 데이터 신호를 출력하고, 적어도 하나의 제1 마크 데이터 신호를 생성하도록 구성된 마크 출력 모듈(41111)

을 포함한다.

그런 다음 제1 마크 데이터 신호들은 제1 중첩 모듈(430)에 순차적으로 송신되어 중첩된다. 수신기가 중첩에 있어서 각각의 회의 단말기에 의해 송신된 마크 데이터 신호를 확실하게 식별할 수 있도록 하기 위해, 각각의 회의 단말기에 의해 송신된 마크 데이터 신호는 회의 번호, 단말기 번호, 및 이 회의 단말기의 대응하는 마크 데이터 신호 컨텐츠를 포함하여야 한다. 마크 데이터 신호의 컨텐츠는, 벡터 그래프, 바이너리 비트맵, YUV 단색 비트맵, 적녹청(RGB) 단색 비트맵과 같은 컬러 비트맵(color bitmap)에 의해 표현될 수 있다. 마크 데이터 신호의 컨텐츠가 벡터 비트맵 또는 바이너리 비트맵에 의해 표현되는 경우, 회의 서버(MCU)는 필링 컬러(filling color)를 각각의 회의 단말기에 무작위로 할당할 수 있다. 회의 단말기의 중첩 모듈은 여러 회의 장소의 트랙들을 중첩할 때 채우기 위해 회의 서버에 의해 할당된 컬러를 사용한다. 트랙을 YUV 또는 RGB 비트맵과 같은 단색 비트맵으로 표현하는 경우, 수신기가 트랙의 위치를 식별하고 이 위치를 슬라이드에 중첩하도록 투명한 컬러가 시스템에 일정하게 지정되어야 하며, 이 방법에서, 마크 데이터 신호가 이미지 데이터 신호에 중첩된 후, 각각의 회의 장소의 하이브리드 이미지 데이터의 보존성(integrity)이 확실하게 된다.

회의 단말기가 다른 회의 단말기에 의해 송신된 마크 데이터 신호를 수신하는 것과 동시에 이미지 데이터 신호를 수신하면, 회의 단말기는 마크 데이터 신호를 그 수신된 이미지 데이터 신호와 중첩하여 완전한 하이브리드 이미지 데이터를 형성한다. 이 방법에서, 회의 단말기는 현재의 이미지 데이터 상에서 원격의 상대방에 의해 이루어진 마크를 알게 된다.

회의 단말기의 제7 실시예

도 10에 도시된 바와 같이, 회의 시스템이 마크 보조 스트림을 지원하지 않을 때, 회의 단말기는 다른 단말기들에 하이브리드 이미지 데이터를 보낼 수 있을 뿐이다. 하이브리드 이미지 데이터는 로컬 회의 단말기 상의 중첩을 통해 생성된다. 여러 단말기들이 보내는 하이브리드 이미지 데이터의 순서를 정확하게 하기 위해, 회의 단말기(40)는, H.239 프로토콜의 다른 H.239 보조 스트림 채널로부터 회의 장소 토큰을 신청하고, 이 회의 장소 토큰을 성공적으로 획득한 후 제2 제어 신호를 생성하도록 구성된 제2 토큰 제어 모듈(50)을 더 포함할 수 있다. 제2 제어 신호를 획득한 후, 중첩 모듈(43)은 마크 데이터 신호 및 이미지 데이터 신호를 기록하는 것을 시작하고, 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성할 수 있다.

즉, 수신된 슬라이드에 마크를 부가하기 전에, 회의 단말기 T1은 H.239 보조 스트림 채널의 제어 토큰을 적용한다. 이 제어 토큰을 획득한 후, 회의 단말기 T1은 사용자에 의해 부가된 마크 데이터 신호의 기록을 개시하고, 이 마크 데이터 신호를 슬라이드에 중첩하여 하이브리드 이미지 데이터를 생성한다. 회의 단말기 T1은 그 인코딩된 하이브리드 이미지 데이터를 H.239 보조 스트림 채널을 통해 회의 서버에 보내고, 회의 서버는 이 하이브리드 이미지 데이터를 다른 회의 단말기에 포워딩한다. 다른 회의에 있는 회의 단말기가 마크 데이터 신호를 부가하고자 하는 경우, 그 회의 단말기는 동일한 행동을 취하면 된다. 이 방법에서, H.239 보조 스트림 채널의 송신 토큰을 지속적으로 전환함으로써, 각각의 회의 장소의 회의 단말기는 그 마크를 슬라이드에 부가할 수 있다.

따라서, 중첩 모듈(43)은 구체적으로 제2 중첩 모듈(43)이며, 제2 토큰 제어 모듈(50)에 의해 생성된 제2 제어 신호에 따라, 제1 마크 데이터 신호를 이미지 데이터 신호에 중첩하여, 마킹된 슬라이드와 같은 제2 하이브리드 이미지 데이터를 생성하도록 구성되어 있다.

출력 모듈(44)은 구체적으로 제2 송신 모듈(441)이며, 제2 하이브리드 이미지 데이터를 로컬 회의 단말기의 디스플레이 화면에 보내거나, 제2 하이브리드 이미지 데이터를 H.239 보조 스트림 채널을 통해 회의 서버에 보내도록 구성되어 있다. 이 방법에서, 제2 하이브리드 이미지 데이터는 로컬 회의 단말기 상에 표시될 수 있다. 마크를 터치 스크린에 부가한 후, 사용자는 자신이 제시간에 그린 마크의 트랙을 볼 수 있다. 대안으로, 제2 하이브리드 이미지 데이터는 H.239 보조 스트림 채널을 통해 회의 서버에 송신될 수 있으며, 다른 회의 단말기에 회의 서버에 의해 포워딩될 수 있다. 이 방법에서, 다른 회의 단말기는 사용자가 현재 표시한 슬라이드를 볼 수 있다.

회의 단말기의 제8 실시예

도 11에 도시된 바와 같이, 이전의 실시예에서 도해된 회의 단말기(40)는,

하이브리드 이미지 데이터를 로컬 회의 단말기에 저장하도록 구성되어 있으며, 회의가 진행되는 동안 각각의 마킹된 슬라이드가 로컬 회의 단말기에 저장되어 회의 진행 상황이 기록될 수 있는, 이미지 데이터 저장 모듈(51);

하이브리드 이미지에서 마크 데이터 신호를 삭제하도록 구성되어 있으며, 마크 데이터 신호를 부가하는 중에, 부가된 마크 데이터 신호를 사용자가 삭제할 수 있고, 토큰 소유자는 토큰 제어 모드에서, 그 부가된 마크를 삭제하도록 중첩 모듈(43)에 명령하는 명령어를 보낼 수 있는, 마크 삭제 모듈(52); 및

내부 이미지 획득 모듈(420)에 의해 수신된 이미지 데이터 신호를 로컬 회의 단말기로부터 회의 서버로 송신하도록 구성되어 있으며, 이미지 데이터 신호가 회의 서버에 의해 다른 회의 단말기들로 포워딩되어 이 다른 회의 단말기들이 로컬 회의 단말기의 이미지 데이터를 볼 수 있는, 이미지 송신 모듈(53)

을 더 포함할 수 있다.

이 외에, 이미지 획득 모듈(42)은, 로컬 회의 단말기에 의해 송신된 이미지데이터 신호를 획득하도록 구성된 내부 이미지 획득 모듈(420); 및 다른 회의 단말기들에 의해 송신되고 회의 서버에 의해 포워딩된 이미지 데이터 신호를 획득하도록 구성된 내부 이미지 획득 모듈(421)을 포함한다.

모든 이전의 실시예에서, 이미지 획득 모듈(42)에 의해 수신된 이미지 데이터 신호는 슬라이드 또는 전자칠판일 수 있다. 전자칠판은 회의 단말기의 입력 장치에 의해 생성된다. 예를 들어, 사용자가 터치 스크린을 통해 마크를 만든 후 시스템은 전자칠판을 자동으로 생성한다. 사용자가 쉽고 편리하게 마크를 만들 수 있도록 사용자의 모든 마크 데이터 신호가 전자칠판에 중첩된다.

회의 단말기의 제9 실시예

도 12에 도시된 바와 같이, 모든 이전의 실시예에서, 회의 단말기(40)의 회의 장소는 복수의 입력 장치를 포함할 수 있다. 입력 장치는 오디오 입력 장치, 비디오 입력 장치, 전자칠판 또는 기록 화면일 수 있다. 이러한 입력 장치는 회의 단말기에 직간접적으로 접속될 수 있다. 회의 단말기(40)의 회의 장소에서 여러 입력 장치 간의 전환을 용이하게 하기 위해, 회의 단말기(40)는 토큰의 상호 배제를 통해 회의 장소에 있는 복수의 입력 장치를 제어할 수 있다. 그러므로 회의 단말기는,

로컬 회의 단말기가 위치해 있는 회의 장소에서 입력 장치의 서브토큰 신청을 수신하고, 서브토큰의 신청이 성공하였음을 확인한 후 입력 장치에 서브토큰을 할당하도록 구성된 토큰 관리 모듈(54)

을 더 포함할 수 있다.

그러므로 제1 내부 마크 획득 모듈(4110)은 로컬 단말기가 위치해 있는 회의 장소에 있는 입력 장치의 마크 데이터 신호를 획득하고, 제1 시간 간격 값에 따라 마크 데이터 신호를 출력하며 제1 마크 데이터 신호를 생성한다.

제2 내부 마크 획득 모듈(4112)은 로컬 회의 단말기가 위치해 있는 회의 장소에 있는 입력 장치의 마크 데이터 신호를 획득하고, 제2 시간 간격 값에 따라 마크 데이터 신호를 출력하여 제2 마크 데이터 신호를 생성한다.

즉, 회의 장소에 있는 회의 단말기(40)에 접속된 입력 장치들 중 어느 입력 장치가 토큰을 획득하든 간에, 회의 단말기는 상기 토큰을 획득하는 입력 장치의 마크 데이터 신호를 수신한다. 그럼에도, 비디오/오디오 신호에 있어서, 회의 단말기는 토큰의 상호 배제를 통해 신호를 제어할 수 있다.

이 외에, 입력 단말기(40)의 회의 장소에 있는 입력 장치가 타겟 입력 장치와의 비밀 세션(private session)을 수행해야 할 때, 회의 단말기(40)는 비밀 토큰 제어 모듈(55)을 더 포함할 수 있으며, 상기 비밀 토큰 제어 모듈(55)은, 타겟 입력 장치와의 비밀 세션을 수행하기 위해 회의 단말기가 위치해 있는 회의 장소에 있는 입력 장치에 의해 송신된 비밀 토큰 신청을 수신하고, 비밀 토큰의 적용이 성공하였음을 확인한 후 H.239 보조 스트림 채널 또는 사용자-정의 채널을 사용하여 비밀 토큰을 입력 장치에 할당하도록 구성되어 있다. 이 방법에서, 입력 장치는 H.239 보조 스트림 채널 또는 사용자-정의 채널을 통해 타겟 입력 장치와의 비밀 세션을 수행할 수 있다.

타겟 입력 장치는 여기서, 회의 단말기(40)가 있는 회의 장소가 아닌, 마크 데이터 신호를 실시간으로 획득할 수 있는 다른 회의 장소에 있는 입력 장치일 수 있거나, 또는 회의 단말기(40)가 있는 회의 장소 상의 입력 장치일 수 있다.

이 외에, 회의 단말기(40)의 마크 획득 모듈(41)은 마크 데이터 신호를 실시간으로 획득할 수 있는 실시간 마크 획득 모듈일 수 있거나, 또는 매뉴얼 수신 옵션을 제공하고 이 매뉴얼 수신 옵션이 선택되면 마크 데이터 신호를 획득하는 매뉴얼 마크 획득 모듈일 수 있다.

이전의 회의 단말기(40) 내의 이미지 획득 모듈(42)은 이미지 데이터 신호를 실시간으로 획득할 수 있는 실시간 이미지 획득 모듈일 수 있거나, 또는 매뉴얼 수신 옵션을 제공하고 이 매뉴얼 수신 옵션이 선택되면 이미지 데이터 신호를 획득하는 매뉴얼 이미지 획득 모듈일 수 있다.

회의 단말기의 제10 실시예

이하에서는 도 13을 참조하여 회의 단말기(40)가 있는 회의 장소의 특정한 어플리케이션 시나리오에 대해 설명한다. 도 13에 도시된 바와 같이, 회의 단말기(40)는 MCU(130)에 연결되어 이 회의 장소 상에서 네트워크를 통해 MCU(130)에 비디오 및 오디오 신호 및 데이터 신호(기존의 데이터 신호 및 인터랙티브 전자칠판에 의해 생성된 인터랙티브 데이터 신호를 포함함)를 전송하고, MCU(130)로부터 다른 회의 장소의 비디오 및 오디오 신호 및 데이터 신호를 수신함으로써, 이러한 신호들을 회의 장소의 출력 장치에 전송되어 디스플레이되도록 한다.

이 회의 장소는 적어도 하나의 입력 장치를 포함한다. 비디오 및 오디오 신호에 있어서, 입력 장치는,

회의 장소 상의 사운드 신호를 포착하고 이 사운드 신호를 회의 단말기(40)에 전송하는 일반적인 마이크로폰인 오디오 입력 장치(131); 및

회의 장소 상의 비디오 신호를 포착하고 이 비디오 신호를 회의 단말기(40)에 전송하는 일반적인 하나 이상의 카메라인 비디오 입력 장치(132)

를 포함한다.

회의 단말기(40)는 수신된 비디오 및 오디오 신호를 인코딩하고 이 신호들을 네트워크를 통해 MCU(130)에 보낸 다음, MCU(130)는 회의 장소 상의 그 인코딩된 신호를 다른 회의 장소에 보내어 디스플레이되도록 한다.

데이터 신호에 있어서:

회의 단말기(40)에 연결된 데이터 서버(135)가 회의 장소에 설치되어 있으며, 송신기(sender)로서, 회의 장소에 있는 사용자는 전자칠판(133) 및 기록 화면(134) 상의 데이터를 편집하고, 예를 들어 데이터 서버(135)를 통해 회의 단말기(40)에 보내지는 마크 데이터 신호를 부가하며, 이 신호가 회의 단말기(40)에 의해 MCU(130)에 보내질 때, MCU(130)는 이 신호를 다른 회의 장소에 있는 회의 단말기(40)에 동시에 분배한다.

수신기로서, 회의 단말기(40)는 MCU(130)로부터 수신된 데이터 신호를 데이터 서버(135)에 전송하고, 데이터 서버(135)는 이 데이터 신호를 회의 장소에 있는 전자칠판(133) 및 회의 장소에 있는 하나 이상의 기록 화면(134)에 전송한다.

회의 장소는 일부의 신호 출력 장치를 더 포함한다. 비디오 및 오디오 신호에 있어서, 수신기로서 기능하는 오디오 출력 장치(136)는 회의 장소에 의해 전송된 사운드 신호를 회의 장소에 있는 참가자에게 제공하는 일반적인 스테레오 스피커이고, 비디오 출력 장치(도면에는 도시되어 있지 않음)는 회의 단말기(40)에 의해 전송되는 비디오 신호를 회의 장소에 있는 참여자에게 제공하는 일반적인 하나 이상의 표시 화면 또는 프로젝터이다.

협력을 수반하는 회의에서는, 한 명의 참가자가 하나의 역할에서 다른 역할로 바뀌어야 하는 데, 예를 들어 연설자에서 비연설자로, 또는 비연설자에서 연설자로 바뀐다. 실생활 회의 시나리오에서는, 앞사람이 그 동작을 마친 후에만 연설자의 역할이 한 사람에서 다른 사람으로 바뀐다. 그러므로 본 발명의 실시예는 바람직한 솔루션으로서 동작 방법을 제공하며, 역할을 바꾸기 위해 제어 토큰을 사용한다:

(a) 전체 회의 시스템에 대해 주 제어 토큰(main control token)이 설정되고, 회의 시스템은 적어도 두 개의 회의 장소를 포함한다. 회의 단말기(40)는 회의 장소마다 설정된다. 하나의 회의 장소에 있는 회의 단말기(40)는 MCU(130)를 통해 다른 회의 장소에 있는 회의 단말기에 연결되어 신호를 전송한다. 주 제어 토큰은 상기 회의 장소 토큰과 동등하다. 회의 장소에 있는 연설자가 이 회의 장소를 신청하는 것이 성공하면, 이 회의 장소는 현재 연설을 할 준비가 되어 있다는 것을 의미한다.

현재의 회의 장소 1 상의 제1 연설자가 회의 장소 토큰을 획득하였을 때, 회의 장소 2 상의 제2 연설자가 회의 장소 토큰을 획득하여 연설을 하려 하면, 제2 연설자는 회의 장소 토큰을 획득한 후 주 연설자에 바뀐다. 주 연설자가 말하는 컨텐츠는 이 회의 장소 상의 다른 단말기들 또는 다른 회의 장소에 있는 회의 단말기들에 보내진다.

이 시나리오에 대응해서, 각각이 사용자-기계 인터랙티브 장치(전자칠판 또는 기록 화면)는 제어 토큰 신청을 제시할 수 있다. 장치는 토큰을 능동적으로 신청하거나, 제어 토큰을 이 회의 장소 또는 다른 회의 장소들에 있는 인터랙티브 회의 단말기에 능동적으로 전달할 수 있다.

(b) 제어 토큰으로 이루어진 계층이 설정된다. 즉, 회의 시스템의 레벨의 주 제어 토큰(이전의 회의 장소 토큰가 동등)이 설정되고, 회의 장소에 있는 각각의 참가자가 서브토큰에 대응한다. 이 방법은 이하의 어플리케이션 시나리오의 관점으로 진행된다:

먼저, 로컬 회의 장소에 대한 솔루션이 생성된다. 회의 장소에 대해 합의에 이른 후, 다른 회의 장소에 최종 솔루션이 분배된다. 이하 두 개의 시나리오가 있다:

시나리오 1: 제1 연설자와 제2 연설자가 동일한 회의 장소에 있고, 제1 연설자가 연설을 하고 있다. 이 시나리오에서는, 이 회의 장소의 서브토큰을 획득한 후에, 제2 연설자가 주 연설자로 바뀔 수 있다. 제1 연설자는 또한 서브토큰을 로컬 회의 장소에 있는 제2 연설자에게 능동적으로 전달할 수 있다.

시나리오 2: 제1 연설자와 제2 연설자가 다른 회의 장소에 있고, 제1 연설자가 연설을 하고 있다. 이 시나리오에서는, 토큰에 대한 어플리케이션을 제시한 후, 제2 연설자가 자신의 회의 장소의 토큰을 먼저 신청한다. 어플리케이션이 성공한 후, 제2 연설자가 회의 장소 내에서 서브토큰을 신청한다. 서브토큰을 획득한 후에, 제2 연설자는 주 연설자로 바뀐다. 제1 연설자는 또한 회의 장소 토큰을 제2 연설자의 회의 장소에 능동적으로 전달할 수 있고, 제2 연설자의 회의 장소는 로컬 서브토큰을 제2 연설자에 분배한다.

특별한 어플리케이션 시나리오가 존재한다: 먼저, 로컬 회의 장소에 대한 솔루션이 생성되고; 회의 장소에 대해 합의에 이른 후, 다른 회의 장소에 최종 솔루션이 분배된다. 이 시나리오에서는, 이 회의 장소에 대한 합의에 도달하여 전송 기능이 가능하게 되기 전에, 이 회의 장소 상의 데이터 서버(135)가 미완료된 마크 정보를 회의 단말기(40)에 보내지 않지만, 이 미완료된 마크 정보를 이 회의 장소의 다른 참가자들에게는 보낸다. 전송 기능이 가능하게 된 후, 회의 단말기(40)는 그 획득된 마크 신호를 MCU(130)에 전송하고, MCU(130)는 그 마크 신호를 다른 회의 장소에 전송한다.

본 실시예에서는, H.239 프로토콜을 통해 회의 단말기(40)와 MCU(130) 사이에 데이터가 전달된다. H.239 프로토콜은 제어 채널, 메인스트림 채널 및 H.239 보조 스트림 채널을 제공한다. 메인스트림 채널은 회의 장소들 사이에 비디오 신호를 전송하고, H.239 보조 스트림 채널은 PPT 파일, 워드 파일 또는 마크와 같은 데이터 신호들을 전송한다. 데이터 신호들을 전송할 때, 그 전송 방법은 이하에 예시한 바와 같이, 회의 단말기(40)의 이전의 제1 내지 제10 실시예에 제공된 방법과 동일하다:

(a) 코멘트 정보가 PPT 파일 상에 중첩되어 함께 인코딩되며, 그 인코딩된 정보는 동일한 채널로 전송된다.

(b) PPT 데이터 및 코멘트 정보가 개별적으로 인코딩되고, 여러 채널로 전송된다. 다른 적절한 실행은: 여러 마크가 그 인코딩된 PPT 데이터 및 코멘트 정보에 개별적으로 첨부되고, PPT 데이터 및 코멘트 정보는 동일한 채널로 전송된다.

(c) 연설자는 일반적으로, 생각을 더 정확하게 말하기 위해 다양한 컬러와 같은 많은 도구를 요구한다. 전자칠판 상의 여러 동작은 다른 회의 장소에 있는 디스플레이 장치상에 실시간으로 반영된다.

각각의 회의 장소에 있는 회의 단말기(40)가 MCU(130)로부터 비디오 및 오디오 신호 또는 데이터 신호를 수신할 때, 실시간 수신 또는 매뉴얼 수신의 어플리케이션 시나리오는 다음과 같다:

(1) 기록 화면(134)이 사용되고, 송신기로서 기능하는 회의 장소가 코멘트와 같은 데이터 신호를 실시간으로 또는 매뉴얼 동작을 통해 전송하는 경우: 기록 화면(34)을 사용하는 사람은 연설자이다. 강연하는 동안, 연설자는 PPT 슬라이드 상에 마크를 만드는 데, 예를 들어 직선을 그린다. 일정한 간격을 두고, 연설자의 행동에 의해 생성되는 이미지는 데이터 서버(135)에 보내지거나, 또는 연설자는 전송 기능을 수동으로 시작하고, 데이터 서버(135)는 이미지를 전자칠판(133) 및 로컬 회의 장소 상의 그외 기록 화면에 보내고 회의 단말기(40)에 보낸다. 회의 단말기(40)는 이미지를 MCU(30)에 보내고, MCU(30)는 이미지를 다른 회의 장소 상의 회의 단말기(40)에 포워딩한다.

수신 상대방의 역할을 하는 회의 장소의 회의 단말기(40)는 MCU(130)에 의해 포워딩된 데이터 신호를 실시간으로 또는 수동으로 수신할 수 있다.

(2) 전자칠판이 사용되고, 코멘트가 실시간으로 또는 매뉴얼 동작을 통해 전송되는 경우: 전자칠판(133)을 사용하는 사람은 연설자이다. 강연하는 동안, 연설자는 PPT 슬라이드 상에 마크를 만드는 데, 예를 들어 직선을 그린다. 일정한 간격을 두고, 연설자의 행동에 의해 생성되는 이미지는 데이터 서버(135)에 보내지거나, 또는 연설자는 전송 기능을 수동으로 시작하고, 데이터 서버(135)는 이미지를 로컬 회의 장소 상의 그외 기록 화면(134) 및 회의 단말기(40)에 보낸다. 회의 단말기(40)는 이미지를 MCU(30)에 보내고, MCU(30)는 이미지를 다른 회의 장소 상의 회의 단말기(40)에 포워딩한다.

수신기의 역할을 하는 회의 장소의 회의 단말기(40)는 MCU(130)에 의해 포워딩된 데이터 신호를 실시간으로 또는 수동으로 수신할 수 있다.

(3) 전술한 시나리오에서, 비연설자가 사용하는 전자칠판 및 기록 화면에 대응하는 다른 참가자는 강연에 대한 코멘트를 만들어야 하고, 자신의 코멘트를 수신 화면에 만들 수 있다.

연설자의 강연 속도는 다른 참가자가 의견을 내는 속도와 항상 일치하는 것은 아니기 때문에, 이하의 두 개의 시나리오가 가능하다:

다른 참가자들이 의견을 내는 제1 페이지는 연설자가 강연하는 동안 제2 페이지와 동일하다.

다른 참가자들이 의견을 내는 제1 페이지는 연설자가 강연하는 동안 제2 페이지와 다르다.

솔루션은, 다른 참가자들의 수신 단말기에 모드 스위치를 제공하는 것이다. 수동적 수신이 예상되는 경우, 러닝 모드(running mode)는 실시간 갱신 모드로 전환된다. 실시간 갱신 모드에서는, 수신 단말기에 의해 디스플레이되는 컨텐츠가 연설자의 강연 컨텐츠와 바뀌고, 다른 참가자들은 강연 동안 코멘트를 만들 수 없다. 코멘트를 만들 수 있도록 하기 위해서는, 모드가 코멘트 홀딩 모드로 전환되어야 한다. 코멘트 홀딩 모드에서, 단말기에 의해 디스플레이되는 컨텐츠가 연설자의 강연 컨텐츠와 바뀌지 않으며, 다른 참가자는 강연 동안 코멘트를 만들 수 있다. 코멘트를 완료한 후, 모드는 갱신 모드로 전환된다.

(4) 시나리오 1-2에서, 코멘트 메이커는 회의 후의 요약 또는 검토의 관점에서 코멘트 또는 전송된 페이지가 언제든지 저장될 것으로 예상할 수 있다. 간단한 방법은, 저장 기능이 코멘트 메이커에 의해 동작되는 전자칠판 또는 기록 화면상에서 가능하게 된 후, 코멘트 메이커가 현재의 코멘트를 로컬 회의 장소 상의 데이터 서버(135)에 저장하는 것이다.

(5) 때때로 두 참가자가 비밀적으로 회의 동안 얘기할 필요가 있다. 이 경우, 비밀 통신을 필요로 하는 참가자에 대해 H.239 보조 스트림 채널이 개시되어야 한다. H.239 보조 스트림에서 비밀 토큰(private token)이 생성된다. 두 명의 비밀 토커가 비밀 토큰을 획득한 후, 비밀 토커 1은 비밀 토커 2에 코멘트를 보내고, 비밀 토커 1이 송신한 코멘트를 수신한 후, 비밀 토커 2는 비밀 토커 1에 코멘트 정보를 보내며, 이에 따라 비밀 정보가 교환된다.

도 14는 도 13의 파생도이다. 도 14에서, 전자칠판(133) 및 기록 화면(134)은 회의 장소 상의 회의 단말기(40)에 직접 연결되어 있고, 데이터 서버(135)는 강연 정보 및 코멘트 정보를 위한 PPT 슬라이드와 같은 기존의 데이터를 저장하도록 구성되어 있을 뿐이다.

도 15는 도 13의 다른 파생도이다. 도 15에서, 회의 단말기(40)는 센터이고, 전자칠판(133) 및 기록 화면(134)은 회의 장소 상의 회의 단말기(40)에 연결되어 있을 뿐이며, 데이터 서버(135)는 회의 단말기(40)에 연결되어 있고, 또한 데이터 서버(135)는 전자칠판(133) 상에 시연된 데이터, 또는 강연 정보 또는 코멘트 정보 하의 PPT와 같은 기존의 데이터를 저장하기 위한 저장 장치일 뿐이다.

회의 단말기(40)는 데이터 서버(135) 대신 데이터 신호를 저장하기 위한 저장 모듈을 포함할 수 있다. 구체적으로, 전자칠판(133)과 같은 입력 장치는 또한, 전자칠판 자체가 생성한 데이터 신호를 저장할 수 있거나, 또는 다른 참가자들에 의해 송신되고 회의 단말기에 의해 포워딩된 데이터 신호를 저장할 수 있다.

회의 단말기의 이전의 실시예에서, 어떠한 여분의 장치를 수반함이 없이, 참가자 간의 데이터 협력(data collaboration)은 H.239 프로토콜의 기존의 듀얼-스트림 기능에 기초하여 수행되며, 회의 장치 상의 입력 소스(예를 들어 전자칠판 및 기록 화면)와 다른 회의 장소 상의 입력 소스 간에 동적 상호작용이 수행되며, 이에 따라, 사용자 간의 상호작용성 및 토론 효율성이 향상된다.

회의 서버의 제1 실시예

도 16에 도시된 바와 같이, 본 발명의 실시예에 회의 서버(60)가 제공된다. 회의 서버는 일반적으로 화상 회의에 적용되는 MCU이고, 이 화상 회의에서 각각의 회의 단말기를 위해 데이터 포워딩 및 서비스를 제공한다. 회의 서버(60)는,

회의 단말기가 송신한 이미지 데이터 신호를 수신하도록 구성된 이미지 데이터 수신 모듈(61);

회의 단말기가 송신한 마크 데이터 신호를 수신하도록 구성된 마크 수신 모듈(62);

마크 데이터 신호를 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하도록 구성된 중첩 모듈(63); 및

하이브리드 이미지 데이터, 또는 이미지 데이터 신호, 또는 마크 데이터 신호를 회의 단말기에 송신하도록 구성된 송신 모듈(64)

을 포함한다.

회의 서버의 제2 실시예

도 17에 도시된 바와 같이, 중첩 모듈(63)이 마크 데이터 신호를 이미지 데이터 신호에 중첩할 때, 복수의 회의 단말기가 송신한 마크 데이터 신호를 수신할 수 있으며, 중첩 모듈(63)은 하나의 회의 단말기에 의해 송신된 마크 데이터 신호를 다른 회의 단말기에 의해 송신된 마크 데이터 신호와 구별할 수 있어야 한다. 중첩 모듈(63)은 필링 모듈(filling module)(631) 및 처리 모듈(632)을 포함한다.

필링 모듈(631)은 필러 컬러(filler color) 또는 투명 컬러를 마크 데이터 신호에 할당하고, 필링 컬러 또는 투명 컬러를 사용하여 이 마크 데이터 신호를 처리하며 단색의 마크 데이터 신호를 생성하도록 구성되어 있다. 마크 데이터 신호의 컨텐츠는, 벡터 그래프, 바이너리 비트맵, YUV 단색 비트맵, RGB 단색 비트맵과 같은 컬러 비트맵(color bitmap)에 의해 표현될 수 있다. 마크 데이터 신호의 컨텐츠가 벡터 비트맵 또는 바이너리 비트맵에 의해 표현되는 경우, 필링 모듈은 필링 컬러(filling color)를 각각의 회의 단말기의 마크 데이터 신호에 무작위로 할당할 수 있다. 중첩 모듈(63)은 여러 회의 장소의 트랙들을 중첩할 때 채우기 위해 필링 컬러를 사용한다. 마크 데이터 신호의 컨텐츠를 YUV 또는 RGB 비트맵과 같은 컬러 비트맵으로 표현하는 경우, MCU는 수신 회의 단말기가 트랙의 위치를 정확하게 식별하도록 투명 컬러를 지정해야 한다. 이 방법에서, 마크 데이터 신호가 이미지 데이터 신호에 중첩된 후에는, 각각의 회의 장소의 하이브리드 이미지 데이터의 보존성(integrity)이 확실하게 된다.

처리 모듈(632)은 컬러 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하도록 구성되어 있다.

하이브리드 이미지 데이터 또는 마크 데이터 신호를 회의 단말기에 보낼 때, 회의 서버(60)는, H.239 보조 스트림 채널을 선택하고, 송신 모듈(64)을 제어하여 H.239 보조 스트림 채널을 통해 하이브리드 이미지 데이터 또는 마크 데이터 신호를 회의 단말기에 송신하도록 구성된 송신 제어 모듈(65)을 더 포함할 수 있다.

실제로, 회의 서버(60)는 회의 단말기에 의해 송신된 회의 장소 토큰 신청을 수신하고, 회의 장소 토큰의 신청이 성공하였음을 확인한 후 회의 장소 토큰을 회의 단말기에 반송하도록 구성된 토큰 관리 모듈(66)을 더 포함할 수 있다. 송신 제어 모듈(65)은 회의 장소 토큰에 따라 H.239 보조 스트림 채널을 선택하고, 송신 모듈(64)을 제어하여 H.239 보조 스트림 채널을 통해 하이브리드 이미지 데이터 또는 마크 데이터 신호를 회의 단말기에 송신한다.

복수의 회의 서버가 시스템 내에 있는 경우, 회의 서버는 그 중첩된 하이브리드 이미지 데이터, 또는 다른 회의 서버에 회의 단말기에 의해 송신된 마크 데이터 신호 또는 회의 단말기에 의해 송신된 이미지 데이터 신호를 포워딩할 수 있거나, 다른 회의 서버들은 이러한 신호들을 회의 서버들에 연결된 회의 단말기들에 보낸다.

회의 단말기가 중첩 기능을 제공하지 않으면, 회의 서버(60)는 각각의 회의 단말기가 송신한 마크 데이터 신호를 이미지 데이터 신호(예를 들어 슬라이드)에 중첩한 다음, 이 신호를 다른 회의 단말기들에 포워딩한다. 이 방법에서, 회의 시스템 내의 각각의 회의 단말기는 다른 회의 단말기들에 의해 부가된 마크를 볼 수 있고, 참가자 간의 협력이 수행되며, 사용자 상호작용성 및 토론 효율성이 향상된다.

회의 시스템의 실시예

전술한 회의 단말기 및 전술한 회의 서버를 포함하는 회의 시스템에 대해 이하에 설명한다:

전술한 회의 단말기 및 전술한 회의 서버는 이하의 3가지 어플리케이션 시나리오를 만들어 낼 수 있다:

(1) 회의 단말기 1은 그 공유 이미지 데이터 신호를 회의 서버에 보내고, 회의 단말기 2는 로컬 마크 데이터 신호를 회의 서버에 보낸다. 회의 서버는 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하고, 이 하이브리드 이미지 데이터를 모든 회의 단말기에 보낸다. 하이브리드 이미지 데이터를 수신한 후, 회의 단말기는 이 하이브리드 이미지 데이터를 디코딩하여 디스플레이한다.

(2) 회의 단말기 1은 그 공유 이미지 데이터 신호를 회의 서버에 보내고, 회의 단말기 2는 로컬 마크 데이터 신호를 회의 서버에 보낸다. 회의 서버는 이러한 신호들을 모든 회의 단말기에 포워딩한다. 이러한 신호들을 수신한 후, 회의 단말기는 이 마크 데이터 신호를 이미지 데이터 신호에 중첩하고, 그 중첩된 신호를 디스플레이한다.

(3) 회의 단말기 1은 로컬 마크 데이터 신호를 그 공유된 이미지 데이터 신호(원격 측으로부터 수신된 로컬 이미지 데이터 또는 이미지 데이터)에 중첩하여 하이브리드 이미지 데이터를 생성하고, 이 하이브리드 이미지 데이터를 H.239 보조 스트림 채널을 통해 회의 서버에 보낸다. 회의 서버는 이 하이브리드 이미지 데이터를 다른 회의 단말기 2에 포워딩한다. 하이브리드 이미지 데이터를 수신한 후에, 다른 회의 단말기 2는 이 하이브리드 이미지 데이터를 디코딩하여 디스플레이한다.

모든 전술한 어플리케이션 시나리오에서, 모든 회의 단말기는 기능적으로 동일하다. 회의 단말기 1은 로컬 중첩이 가능하며, 따라서 회의 단말기 2이며, 회의 단말기 1은 로컬 이미지 데이터 및 마크 데이터 신호를 송신할 수 있으며, 따라서 회의 단말기 2이다.

회의 시스템의 제1 실시예

도 18은 전술한 제1 어플리케이션 시나리오에 따른 회의 시스템의 개략 구조도이다. 회의 시스템은 단말기(71) 및 이 단말기(71)에 연결된 노트북 컴퓨터(72); 회의 서버(73); 회의 단말기(74) 및 터치스크린을 가지면서 회의 단말기(75)에 연결되어 있는 디스플레이(75); 회의 단말기(76) 및 이 회의 단말기(76)에 연결된 통상의 디스플레이(77)를 포함한다. 회의 단말기의 수는 제한이 없다. 각각이 회의 단말기는 회의 장소를 나타낸다. 회의 단말기(71)는, 이미지 데이터 신호를 회의 서버(73) 송신하도록 구성된 이미지 송신 모듈(53)을 포함한다.

회의 서버(74)는 마크 데이터 신호를 회의 서버(73)에 송신하도록 구성된 마크 송신 모듈(48)을 포함한다.

전술한 회의 서버(60)와 마찬가지로, 회의 서버(73)는,

이미지 송신 모듈(53)에 의해 송신된 마크 데이터 신호를 수신하도록 구성된 이미지 데이터 수신 모듈(61);

마크 송신 모듈(48)에 의해 송신된 마크 데이터 신호를 수신하도록 구성된 마크 수신 모듈(62);

하이브리드 이미지 데이터를 회의 단말기(71), 회의 단말기(74), 및 회의 단말기(76)에 송신하도록 구성된 송신 모듈(64)

을 포함한다.

회의 단말기(71) 및 회의 단말기(76)는 하이브리드 이미지 데이터를 수신하고 디스플레이하도록 구성되어 있다.

구체적으로, 이러한 어플리케이션 시나리오는 이하의 과정을 포함한다:

(1) 회의 서버(71)는 다른 참가자들과 슬라이드를 공유해야 하는 회의 장소이다. 사용자는 노트북 컴퓨터를 통상의 VGA(Video Graphics Array) 케이블을 통해 회의 단말기(71)에 연결하여, H.239 보조 스트림 채널을 통해 회의 서버(73)에 슬라이드를 보내면 된다. 회의 서버(73)는 회의 단말기(74) 및 회의 단말기(76)에 슬라이드를 보낸다.

(2) 회의 단말기(74)는 터치스크린 디스플레이(75)를 구비하는 회의 장소이다. 슬라이드를 보는 프로세스에서, 회의 장소의 사용자는 질의를 가지며 다른 사람들과 토론해야 한다. 그러므로 사용자는 원형으로 모여 디스플레이(75) 상에 토론한다. 이 원형은 디스플레이 상의 터치스크린에 의해 기록되며, 회의 단말기(74)를 통해 회의 서버(73)에 전송된다. 이 외에, 회의 서버(73)가 회의 단말기(74)의 사용자가 보는 슬라이드를 가지고 있지 않으면, 회의 단말기(74)는 슬라이드를 회의 서버(73)에 보내야 한다.

(3) 회의 단말기(74)에 의해 송신된 원형 마크를 수신한 후, 회의 서버(73)는 슬라이드의 비디오 스트림을 디코딩하여 슬라이드 이미지를 획득하고, 그런 다음 원형 마크를 중첩하며, 이 하이브리드 이미지를 그 중첩된 원형 마크로 인코딩하며, 그 인코딩된 하이브리드 이미지 스트림을 H.239 보조 스트림 채널을 통해 모든 회의 장소에 보낸다.

(4) 회의 단말기(76)는 통상적인 디스플레이(77)에 연결된 통상적인 회의 장소이다. 이 회의 장소는 H.239 보조 스트림 채널을 통해 회의 서버(73)에 의해 송신된 하이브리드 비디오 스트림을 수신한다. 디코딩된 후, 회의 단말기(74)에 의해 송신된 그 중첩된 원형 마크를 가지는 슬라이드 이미지를 볼 수 있다.

마찬가지로, 회의 단말기(71) 및 모든 다른 회의 장소는 회의 단말기(76)에 의해 수신되는 것과 같은 슬라이드 이미지를 수신한다. 다른 회의 장소도 또한 회의 단말기(74)와 같은 마크 입력 장치를 가지고 있는 경우에는, 이 회의 단말기도 또한 모든 회의 장소에서 볼 수 있는 그 마크를 보낼 수 있다.

회의 시스템의 제2 실시예

도 19는 전술한 회의 시스템의 제1 실시예에 기초하여 회의 시스템의 복수의 연결된 회의 서버에 따른 어플리케이션 시나리오를 도시하고 있다. 도 19에서, 쌍촉 화살표는 하이브리드 이미지 데이터 스트림의 전송을 나타낸다.

시스템 내에 복수의 회의 서버가 존재할 때, 복수의 회의 서버는 서로 연결되어 있다. 각각의 회로 서버는 하나 이상의 회의 단말기에 연결될 수 있다. 회의 서버 중 하나는 마스터 회의 서버이고, 다른 회의 서버들은 슬레이브 회의 서버이다. 마스터 회의 서버는 그 부가된 마크 데이터 신호를, 회의 단말기에 의해 송신된 그 공유된 이미지 데이터 신호에 중첩하는 것을 담당한다.

본 실시예에서는, 두 개의 MCU(회의 서버)가 연결되어 있는 것으로 가정한다. 시스템은 MCU1, MCU2, 회의 단말기 T1, 회의 단말기 T2, 및 회의 단말기 T3을 포함한다. MCU1은 마스터 MCU이고, MCU2는 슬레이브 MCU이다. 두 개의 MCU보다 많은 MCU가 연결되는 경우에는, 이러한 MCU 중 하나가 마스터 MCU이고, 나머지 MCU가 슬레이브 MCU이다.

회의 중에, 회의 단말기 T1은 그 공유된 이미지 데이터 신호를 그 연결된 MCU2에 보내고, 회의 단말기 T2는 그 마크 데이터 신호를 그 연결된 MCU2에 보낸다. 슬레이브 MCU2는 그 회의 시스템 내의 T1의 그 공유된 이미지 데이터 신호 및 T2의 마크 데이터 신호를 마스터 MCU(즉, MCU1)에 포워딩한다. 회의 시스템 내의 마스터 MCU(MCU1)는 마크 데이터 신호를 이미지 데이터 신호에 중첩하고, 이 신호를 압축하여 하이브리드 이미지 데이터를 생성하는 데, 이 하이브리드 이미지 데이터는 회의 시스템 내의 모든 회의 단말기에 포워딩된다. 슬레이브 MCU(MCU1)에 연결된 회의 단말기에 있어서, 하이브리드 이미지 데이터는 회의 내의 마스터 MCU에 의해 각각의 슬레이브 MCU에 보내지고, 그런 다음 슬레이브 MCU에 의해 포워딩된다. 하이브리드 이미지 데이터를 수신한 후, 회의 시스템 내의 각각의 단말기는 이 하이브리드 이미지 데이터를 디코딩하고 디스플레이한다.

더 많은 MCU가 연결되는 경우에도, 동작은 유사하다. 연결된 회의 시스템 내의 마스터 MCU는 마크 데이터 신호를 회의 중에 이미지 데이터 신호에 중첩하는 것을 담당한다.

전술한 시나리오에서는, 복수의 MCU가 시스템에서 연결되어 있는 데, MCU 중 하나가 마스터 MCU이고, 나머지가 슬레이브 MCU이다. 실제로, 시스템 내의 복수의 MCU가 마스터 MCU가 되는 것이 가능하다. 즉, 각각의 MCU는 중첩 및 포워딩을 담당한다. 복수의 MCU 간의 조정(coordination)을 수행하기 위해, 시스템은, 마크 데이터 신호의 송신 시간을 획득하고, 마크 데이터 신호의 송신 시간의 순서에 따라 제어 신호를 생성하도록 구성된 제어 유닛을 포함할 수 있다.

적어도 두 개의 마스터 회의 서버에 있는 중첩 모듈들은 마크 데이터 신호를 제어 신호에 따라 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하고, 이 하이브리드 이미지 데이터 신호를 시스템 내의 각각의 회의 단말기에 보낸다. 제어 유닛은 시스템 내의 게이트키퍼(gatekeeper)일 수 있다. 게이트키퍼는 소프트스위치에 근거한 스위치 서버이며, VoIP(Voice over Internet Protocol) 네트워크 상에서 신호 스위칭 및 제어를 담당한다. 제어 유닛은 또한 유사한 기능의 다른 제어 모듈일 수 있다.

게이트키퍼 대신 토큰 제어 모드를 사용하여 회의 서버들 간의 협력을 제어할 수 있다. 시스템에서, 각각의 회의 단말기가 마크 데이터 신호를 보내는 시간은 각각의 마스터 회의 서버에 통지된다. 마스터 회의 서버는 마크 신호의 송신 시간에 따라 제어 토큰을 능동적으로 획득한다. 이 마스터 회의 서버가 중첩을 완료한 후, 다음 마스터 회의 서버가 모든 회의 단말기가 마크 데이터 신호를 보내는 시간 순서에 따라 제어 토큰을 획득하고, 최종 마스터 회의 서버가 중첩을 완료할 때까지 중첩은 계속 수행된다. 최종 마스터 회의 서버가 최종 하이브리드 이미지 데이터 신호를 시스템 내의 각각의 회의 단말기 보낸다. 각각의 마스터 회의 서버는 제어 토큰을 능동적으로 획득하거나, 게이트키퍼가 제어 토큰을 각각의 마스터 회의 서버에 할당한다.

회의 시스템의 제3 실시예

도 20은 전술한 제2 어플리케이션 시나리오에서 회의 시스템의 개략 구조도이다. 회의 시스템은, 회의 단말기(81) 및 이 회의 단말기(81)에 연결되어 있는 노트북 컴퓨터(82)와 통상적인 디스플레이(83); 회의 서버(84); 회의 단말기(85), 및 이 회의 단말기(85)에 연결되어 있고 터치스크린을 가지는 디스플레이(86); 회의 단말기(87), 및 이 회의 단말기(87)에 연결되어 있는 통상적인 디스플레이(88)를 포함한다. 각각의 회의 단말기는 회의 장소를 나타낸다. 회의 단말기의 수는 제한되지 않는다. 회의 단말기(81)는, 회의 서버(83)에 이미지 데이터 신호를 보내도록 구성된 이미지 송신 모듈(53)을 포함한다.

회의 단말기(85)는, 마크 데이터 신호를 회의 서버(83)에 송신하도록 구성된 마크 송신 모듈(48)을 포함한다.

회의 서버(83)는 그 수신된 이미지 데이터 신호 및 마크 데이터 신호를 회의 단말기(87) 및 회의 단말기(81)에 포워딩한다.

회의 단말기(87) 및 회의 단말기(81) 모두는,

제1 시간 간격 값을 생성하도록 구성된 제1 타이머(45);

회의 서버에 의해 포워딩된 이미지 데이터 신호를 수신하도록 구성된 이미지 획득 모듈(42);

회의 서버(83)에 의해 포워딩된 마크 데이터 신호를 수신하고, 제1 시간 간격 값에 따라 이 마크 데이터 신호를 출력하여, 제1 마크 데이터 신호를 생성하도록 구성된 제1 외부 마크 획득 모듈(4111);

제1 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 제2 하이브리드 이미지 데이터 신호를 생성하도록 구성된 제2 중첩 모듈(431); 및

상기 제2 하이브리드 이미지 데이터 신호를 디스플레이하도록 구성된, 디스플레이(88)와 같은 디스플레잉 모듈

을 포함한다.

회의 단말기(87)는 복수의 회의 단말기로부터 마크 데이터 신호를 수신하고, 수신기가, 중첩 시에 각각의 회의 단말기에 의해 송신된 마크 데이터 신호를 식별할 수 있게 하며, 각각의 회의 단말기에 의해 송신된 마크 데이터 신호는 회의 번호, 단말기 번호 및 이 회의 단말기의 대응하는 마크 데이터 신호 컨텐츠를 포함해야 한다. 마크 데이터 신호의 컨텐츠는 벡터 그래프, 바이너리 비트맵, YUV 단색 비트맵, RGB 단색 비트맵과 같은 컬러 비트맵(color bitmap)에 의해 표현될 수 있다. 마크 데이터 신호의 컨텐츠가 벡터 비트맵 또는 바이너리 비트맵에 의해 표현되는 경우, 회의 서버는 필러 컬러(filler color)를 각각의 회의 단말기에 무작위로 할당할 수 있다. 회의 단말기의 중첩 모듈은 여러 회의 장소의 트랙들을 중첩할 때 채우기 위해 회의 서버에 의해 할당된 컬러를 사용한다. 트랙을 YUV 또는 RGB 비트맵과 같은 컬러 비트맵으로 표현하는 경우, 수신기가 트랙의 위치를 식별하고 이 위치를 슬라이드에 중첩하도록 투명한 컬러가 시스템에 일정하게 지정되어야 한다. 구체적으로, 제1 외부 마크 획득 모듈(4111)은,

로컬 회의 단말기를 제외한 적어도 하나의 회의 단말기에 의해 송신되고 회의 서버에 의해 포워딩된 마크 데이터 신호를 수신하며, 이 마크 데이터 신호에서 회의 번호 및 단말기 번호와 같은 정보에 따라 대응하는 디코더를 찾아내고, 이 디코더에 대응하는 마크 데이터 신호를 송신하도록 구성된 제1 외부 마크 획득 서브모듈(41110);

적어도 하나의 단말기의 마크 데이터 신호를 각각 디코딩하고, 마크 데이터 신호 큐를 생성하도록 구성된 적어도 하나의 디코더; 및

을 포함한다.

이러한 어플리케이션 시나리오는 이하의 과정을 포함한다:

(1) 회의 서버(81)는 다른 참가자들과 슬라이드를 공유해야 하는 회의 장소이다. 사용자는 노트북 컴퓨터를 (통상적으로 VGA 케이블을 통해) 회의 단말기(81)에 연결하여, H.239 보조 스트림 채널을 통해 모든 참가자에게 슬라이드를 보낸다.

(2) 회의 단말기(85)는 터치스크린 디스플레이(86)를 구비하는 회의 장소이다. 슬라이드를 보는 프로세스에서, 회의 장소의 사용자는 질의를 가지며 다른 사람들과 토론해야 한다. 그러므로 사용자는 원형으로 모여 디스플레이(75) 상에 토론한다. 이 원형은 디스플레이 상의 터치스크린에 의해 기록되며, 회의 단말기(85)를 통해 회의 서버(84)에 전송된다.

(3) 회의 서버(84)는 회의 단말기(85)에 의해 송신된 원형 마크를 회의 단말기(87) 및 회의 단말기(81)에 포워딩한다.

(4) 회의 단말기(87)는 통상적인 회의 장소이고, 이 회의 장소는 회의 단말기(81)로부터 슬라이드 코드 스트림을 수신하고 회의 단말기(85)로부터 원형 마크를 동시에 수신한다. 회의 단말기(87)는 슬라이드 코드 스트림을 디코딩하여 슬라이드 이미지를 획득하고, 이 원형 마크를 슬라이드 이미지에 중첩한다. 이 방법에서, 그 중첩된 원형 마크를 가지는 이미지를 볼 수 있다.

다른 회의 장소도 회의 단말기(85)와 같은 마크 입력 장치를 가지는 경우, 이 회의 장소도 모든 회의 장소가 볼 수 있는 그 마크를 보낼 수 있다.

회의 시스템의 제4 실시예

도 21은 회의 시스템의 이전의 제3 실시예에 기초하여 회의 시스템에서 복수의 연결된 회의 서버에 따른 어플리케이션 시나리오를 도시하고 있다. 도 21에서, 쌍촉 화살표는 하이브리드 이미지 데이터 스트림의 전송을 나타낸다.

시스템 내에 두 개의 MCU가 연결되어 있고, MCU1은 마스터 MCU이고, MCU2는 슬레이브 MCU인 것으로 가정한다. 두 개의 MCU보다 많은 MCU가 연결되는 경우에도, 시나리오는 유사하다. 즉, 이러한 MCU 중 하나가 마스터 MCU이고, 나머지 MCU가 슬레이브 MCU이다.

회의 시스템에서, 회의 단말기 T1은 그 공유된 이미지 데이터 신호를 그 연결된 MCU2에 보내고, 회의 단말기 T2는 로컬 마크 데이터 신호를 그 연결된 MCU2에 보낸다. 슬레이브 MCU2는 T1의 그 공유된 이미지 데이터 신호 및 T2의 마크 데이터 신호를 회의 시스템 내의 마스터 MCU(즉, MCU1)에 포워딩한다. 회의 시스템 내의 마스터 MCU는 그 공유된 수신 이미지 데이터 신호 및 마크 데이터 신호를 회의 시스템 내의 각각의 회의 단말기에 포워딩한다. 슬레이브 MCU(MCU1)에 연결된 회의 단말기에 있어서, 공유된 수신 이미지 데이터 신호 및 마크 데이터 신호는 마스터 MCU에 의해 회의 시스템 내의 각각의 슬레이브 MCU에 보내지고, 슬레이브 MCU에 의해 포워딩된다. 공유된 수신 이미지 데이터 신호 및 마크 데이터 신호를 수신한 후, 회의 시스템 내의 각각의 단말기는 이 데이터 신호를 이미지 데이터 신호에 중첩하고 이 신호들을 디스플레이한다.

더 많은 MCU가 연결되는 경우에도, 동작은 유사하다. 연결된 회의 시스템 내의 마스터 MCU는 회의 시스템 내의 모든 회의 단말기의 공유된 이미지 데이터 신호 및 마크 데이터 신호를 수집하고 포워딩하는 것을 담당한다.

본 실시예에서, 복수의 MCU가 마스터 MCU인 경우, MCU는 마크 데이터 신호를 부가하는 시간 순서에 따라 제어 신호를 생성한다. 각각의 마스터 MCU는 그 수신된 마크 데이터 신호를 제어 신호에 따라 순차적으로 수신 회의 단말기에 포워딩한다. 수신 회의 단말기는 이 신호를 중첩하고 디스플레이한다. 마크 데이터 신호를 부가하는 시간 순서에 따라 제어 토큰이 획득된다. 제어 토큰은 마스터 MCU에 의해 능동적으로 획득될 수 있거나, 시스템 내의 제어 유닛에 의해 전달될 수 있다. 각각의 마스터 MCU는 제어 토큰에 따라 그 수신된 마크 데이터 신호를 포워딩하고, 각각의 수신 회의 단말기는 신호를 수신하고 중첩한다.

회의 시스템의 제5 실시예

도 22는 전술한 제2 어플리케이션 시나리오에서 회의 시스템의 개략 구조도이다. 회의 시스템은, 회의 단말기(91) 및 이 회의 단말기(91)에 연결되어 있는 노트북 컴퓨터(92); 회의 서버(93); 회의 단말기(94), 및 이 회의 단말기(94)에 연결되어 있고 터치스크린을 가지는 디스플레이(95); 회의 단말기(96), 및 이 회의 단말기(96)에 연결되어 있는 통상적인 디스플레이(97)를 포함한다. 회의 단말기의 수는 제한되지 않으며, 각각의 회의 단말기는 회의 장소를 나타낸다. 회의 단말기(91)는,

제2 시간 간격 값을 생성하도록 구성된 제2 타이머(46);

로컬 회의 단말기에 의해 송신된 마크 데이터 신호를 수신하고, 제1 시간 간격 값에 따라 이 마크 데이터 신호를 출력하여, 제1 마크 데이터 신호를 생성하도록 구성된 제1 내부 마크 수신 모듈(4110);

로컬 회의 단말기에 의해 송신된 마크 데이터 신호를 수신하고, 제2 시간 간격 값에 따라 이 마크 데이터 신호를 출력하여, 제2 마크 데이터 신호를 생성하도록 구성된 제2 내부 마크 수신 모듈(4120);

제1 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 제1 하이브리드 이미지 데이터 신호를 생성하도록 구성된 제1 중첩 모듈(430); 및

H.239 보조 스트림 채널을 통해 상기 제2 하이브리드 이미지 데이터를 로컬 회의 단말기의 디스플레이 화면에 보내거나, 제1 하이브리드 이미지 데이터를 회의 서버에 보내도록 구성된 제1 송신 모듈(440)

을 포함한다.

회의 단말기(93)는 적어도 하나의 회의 단말기(94)에 의해 송신된 제1 하이브리드 이미지 데이터를 수신하고, 이 제1 하이브리드 이미지 데이터를 포워딩하도록 구성되어 있다.

회의 단말기(96) 및 회의 단말기(91)는 제1 하이브리드 이미지 데이터를 수신하고 디코딩하여 디스플레이하도록 구성되어 있다.

(1) 초기 상태에서, 회의 단말기(91)는 노트북 컴퓨터에 연결되어 있고, H.239 보조 스트림 토큰을 획득하며, H.239 보조 스트림 채널을 통해 다른 회의 장소와 슬라이드를 공유한다(이것은 H.239 보조 스트림 채널을 통해 다른 단말기들에 그 공유된 슬라이드를 송신하는 것과 동일하다). 그러므로 회의 단말기(94) 및 회의 단말기(96) 모두는 회의 단말기(91)의 슬라이드를 볼 수 있다.

(2) 슬라이드를 볼 때, 회의 단말기(94)의 사용자는 슬라이드 상에 마크를 만들기를 원할 수 있다. 이 마크를 다른 사람들에게 전송하기 위해, 회의 단말기(94)는 이하의 과정을 수행한다:

(2.1) H.239 보조 스트림 채널의 제어 토큰을 적용한다.

(2.2) 회의 제어기(현재의 토큰 소유자)가 어플리케이션을 승인하는지의 여부를 판정한다. 회의 제어기가 어플리케이션을 승인하면, 토큰을 획득하고, 회의 단말기(94)의 터치 스크린(95)의 마크 데이터 신호를 기록하기 시작하고, 이 마크 데이터 신호를 회의 단말기(94) 상에 디스플레이되는 슬라이드 이미지에 중첩한다.

(2.3) 마크 데이터 신호가 중첩되는 슬라이드를 인코딩한다.

(2.4) 인코딩된 슬라이드 스트림을 H.239 보조 스트림 채널을 통해 회의 서버(93)에 보낸다.

이 경우, 회의 서버(94)는 H.239 보조 스트림의 송신기이다. 다른 회의 장소에 있는 회의 단말기가 마크를 부가하기를 원하는 경우, 회의 단말기는 동일한 행동을 취한다. 이 방법에서, H.239 보조 스트림의 송신 토큰을 지속적으로 스위칭함으로써, 각각의 회의 장소의 회의 단말기는 그 마크를 슬라이드에 부가할 수 있다.

그렇지만, 이 시스템에서는, 회의 단말기(94)가 토큰 제어 모드를 사용하여 터치스크린(95)을 통해 부가된 마크를 개별적으로 송신하고, 이 마크를 제2 H.239 보조 스트림으로서 사용할 수도 있다(슬라이드는 제1 H.239 보조 스트림이다). 회의를 소집할 때 스위칭을 가능하게 하기 위해서는 두 개의 파라미터가 부가되어야 한다. 하나의 파라미터는 제2 H.239 보조 스트림이 지원되는지의 여부를 나타내고, 다른 파라미터는 제2 H.239 보조 스트림이 마크 정보인지의 여부를 나타낸다.

제2 H.239 보조 스트림이 마크 정보인 경우, 토큰 제어 모드가 디폴트로서 사용된다. 즉, 마크는 토큰을 신청하는 모드에서도 사용된다. 이 솔루션에서, "제2 H.239 보조 스트림"은 슬라이드의 H.239 보조 스트림에 대해 반대의 용어이며, 실제로 임의의 H.239 보조 스트림일 수 있다.

토큰 제어 모드에서 마크를 송신하는 과정은 이하와 같다:

(3.1) 마크의 제어 토큰을 H.239 보조 스트림으로서 적용한다.

(3.2) 토큰을 성공적으로 획득하고, 터치스크린(95)을 통해 부가된 마크 데이터 신호를 기록하기 시작한다.

(3.3) 사용자의 마크 데이터 신호(마크 트랙)를 개별적인 H.239 보조 스트림으로서 회의 서버(93)에 보내고, 회의 서버(93)는 H.239 보조 스트림을 다른 회의 단말기에 포워딩한다.

실제로, 마크 데이터 신호의 송신을 제어하기 위해 토큰을 사용하는 모드는 하이브리드 슬라이드를 제어하기 위해 토큰을 사용하는 모드와 결합될 수 있다.

회의 시스템의 제6 실시예

도 23은 전술한 회의 시스템의 제5 실시예에 기초하여 회의 시스템의 복수의 연결된 회의 서버에 따른 어플리케이션 시나리오를 도시하고 있다. 도 23에서, 쌍촉 화살표는 하이브리드 이미지 데이터 스트림의 전송을 나타낸다.

회의 단말기 T1은 로컬 마크 데이터 신호를 그 공유된 이미지 데이터 신호에 국부적으로 중첩하여 하이브리드 이미지 데이터를 생성한 다음, 이 하이브리드 이미지 데이터를 H.239 보조 스트림 채널을 통해 MCU2에 보낸다. MCU2는 이 하이브리드 이미지 데이터를 회의에서 마스터 MCU(MCU1)에 포워딩한다. 마스터 MCU(MCU1)는 그 수신된 하이브리드 이미지 데이터를 회의 시스템 내의 각각의 회의 단말기에 보낸다. 회의 시스템 내의 슬레이브 MCU에 연결된 회의 단말기는 슬레이브 MCU에 의해 포워딩된 하이브리드 이미지 데이터를 수신한다.

더 많은 MCU가 연결되는 경우에도, 동작은 유사하다. 연결된 회의 시스템 내의 마스터 MCU는 회의 시스템 내의 모든 회의 단말기에 송신된 하이브리드 이미지 데이터를 일정하게 포워딩한다. 대안으로, 시스템 내의 모든 MCU는 마스터 MCU이고, 하이브리드 이미지 데이터는 특정한 순서로 MCU에 의해 포워딩되며, MCU 중 하나를 선택하여 하이브리드 이미지 데이터를 최종적으로 포워딩하여 네트워크 폭주를 회피할 수 있다.

회의 시스템의 모든 실시예에서, 회의 단말기와 회의 서버 간에 데이터가 전송될 때, 네트워크 폭주 또는 패킷 손실이 발생되면, 네트워크 폭주 또는 패킷 손실은 이하의 방식에 따라 해결되어, 시스템 내의 사용자는 더 좋은 경험을 하게 된다:

(1) 신뢰할 수 있는 전송: 예를 들어, 이미지 데이터 신호 및 하이브리드 이미지 데이터와 같은 대형화된 데이터가 UDP(User Datagram Protocol)를 통해 전송되어 네트워크 폭주를 방지한다.

(2) 패킷 손실 방지 기술: 패킷 손실 복구 기술을 사용하여 용장 데이터를 전송한다. 작은 패킷이 손실되면, 예를 들어, 마크 데이터 신호가 손실되면, 손실 데이터의 크기가 작으므로, 수신기는 그 수신된 데이터와 함께 용장 데이터를 사용하여 손실 데이터를 복구한다. TCP(Transmission Control Protocol)와 같은 신뢰할 수 있는 전송 프로토콜을 사용하여 데이터를 전송하므로 장치 간의 마크 데이터 신호를 안정적으로 전송할 수 있다. 마크 데이터 신호도 또한 UDP와 같은 다른 신뢰할만한 프로토콜을 통해 전송될 수 있다.

기존의 시스템에서의 모든 패킷 손실 방지는 이러한 인터랙티브 어플리케이션에 적용될 수 있으므로 패킷 손실 또는 네트워크 폭주의 경우 어플리케이션 경험을 향상시킬 수 있다.

마크 데이터 신호가 회의 단말기에 의해 회의 서버에 전송되고, 이 회의 서버에 의해 다른 회의 단말기에 포워딩되는 경우, 마크 데이터 신호는 네트워크의 TDP 프로토콜 또는 UDP 프로토콜을 통해, 또는 H.320 시스템의 HMLP(High-Speed Multilayer Protocol) 프로토콜을 통해 전송될 수 있다. 실시간 효과를 확보하기 위해, 마크 데이터 신호를 일반적으로 IP 네트워크에서 UDP를 통해 전송한다.

대안으로, MCU 측 또는 수신 회의 단말기 측에서, 데이터를 수신하는 시간이 기록되며, 마크 데이터 신호는 그 수신 시간의 순서에 따라 이미지 데이터 신호에 중첩된다. 이 방법에서, 각각의 회의 단말기에 의해 부가된 마크 데이터 신호는 정확하게 중첩될 수 있으며, 사용자 경험은 향상된다. 대안으로, 회의 단말기가 이미지 데이터 신호 및 마크 데이터 신호를 송신할 때 타임스탬프를 부가하여 송신 시간을 기록한다. MCU는 이미지 데이터 신호 또는 마크 데이터 신호를 수신할 때 타임스탬프를 획득할 수 있다. 특히, 마크 데이터 신호는 마크 데이터 신호를 송신하는 시간에 따라 이미지 데이터에 중첩된다. 이 방법에서, 각각의 회의 단말기의 마크 데이터 신호는 이미지 데이터 신호에 정확하게 중첩될 수 있으며, 사용자 경험 및 상호작용성이 향상된다.

전술한 회의 시스템에서, 사용자 간의 인터랙티브 협력의 프로세스에서 여분의 데이터 회의 시스템 또는 장치를 구성하지 않아도 되며; 참가자 간의 데이터 협력은 H.239 표준의 기존의 듀얼-스트림 기능을 통해 실행되며, 사용자 상호작용성 및 토론 효율성이 향상된다.

방법 실시예 :

도 24에 도시된 바와 같이, 데이터 처리 방법이 본 실시예에 제공된다. 방법은,

단계 S160: 이미지 데이터 신호를 획득한다.

단계 S161: 마크 데이터 신호를 획득한다.

단계 S162: 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성한다.

단계 S163: 하이브리드 이미지 데이터 신호를 출력한다. 하이브리드 이미지 데이터 신호는 로컬 회의 단말기에 출력되어 디스플레이될 수 있거나, 하이브리드 이미지 데이터를 다른 회의 단말기에 포워딩하는 회의 서버로 출력될 수 있다.

전술한 방법에서, 마크 데이터 신호는 그 획득된 이미지 데이터 신호에 중첩되어 하이브리드 이미지 데이터 신호를 생성한다(예를 들어, 하이브리드 이미지 데이터 신호는 부가된 마크를 가진 슬라이드이다). 이 방법에서, 참가자는 슬라이드를 보면서 마크를 슬라이드에 부가할 수 있고, 화상 회의 사용자들 간의 상호작용성이 향상되며, 토론 효율성이 향상된다.

이하에서는 도 24에 도시된 방법을 실행하는 프로세스를 상세히 설명한다.

단계 S170: 이미지 데이터 신호를 획득한다.

단계 S171: 로컬 회의 단말기에 의해 입력된 마크 데이터 신호를 획득한다.

단계 S172: 제1 시간 간격 값을 생성한다.

단계 S173: 제2 시간 간격 값을 생성한다.

단계 S174: 제1 시간 간격 값에 따라 마크 데이터 신호를 출력하여 제1 마크 데이터 신호를 생성한다.

단계 S175: 제2 시간 간격 값에 따라 마크 데이터 신호를 출력하여 제2 마크 데이터 신호를 생성하며, 제2 마크 데이터 신호를 인코딩하여 제3 마크 데이터 신호를 생성한다.

단계 S176: 마크 보조 스트림이 지원되는지의 여부를 판정한다. 마크 보조 스트림이 지원되는 경우, 단계 S177을 수행하고, 마크 보조 시스템이 지원되지 않는 경우에는 단계 S178을 수행하거나 사용자-정의 채널을 통해 제3 마크 데이터 신호를 보낸다.

단계 S177: H.239 보조 스트림 채널에서 회의 장소를 적용한다. 회의 장소 토큰이 성공적으로 획득된 후, 제1 제어 신호를 생성하고 이 제1 제어 신호에 따라 제3 마크 데이터 신호를 H.239 보조 스트림 채널을 통해 회의 서버에 보낸다.

단계 S178: 다른 H.239 보조 스트림 채널에서 회의 장소 토큰을 적용한다. 회의 장소 토큰을 성공적으로 획득한 후, 제2 제어 신호를 생성하고, 이 제2 제어 신호에 따라 제1 마크 데이터 신호를 마크 데이터 신호에 중첩하여 제1 하이브리드 이미지 데이터를 생성한다.

단계 S179: 제1 하이브리드 이미지 데이터를 로컬 회의 단말기의 디스플레이 화면에 보내거나, 제1 하이브리드 이미지 데이터를 H.239 보조 스트림 채널을 통해 회의 서버에 보내며, 제1 하이브리드 이미지 데이터는 회의 서버에 의해 다른 회의 단말기에 포워딩된다.

실행 프로세스에서, 단계 S171은 이 단계에 선행할 수 있다: 로컬 회의 단말기가 위치해 있는 회의 장소에 있는 입력 장치의 서브토큰 신청을 수신하고, 서브토큰의 신청이 성공이었음을 확인한 후 입력 장치에 서브토큰을 할당한다. 이 경우, 단계 S171는: 로컬 회의 단말기가 위치해 있는 회의 장소 상의 입력 장치의 마크 데이터 신호를 서브토큰에 따라 획득하는 단계일 수 있다.

이 외에, 그 수신된 마크 데이터 신호가 다른 단말기에 의해 송신되는 경우, 도 24에 도시된 방법을 실행하는 다른 프로세스를 이하에 상세히 설명한다.

단계 S180: 이미지 데이터 신호를 획득한다.

단계 S181: 로컬 회의 단말기를 제외한 적어도 하나의 회의 단말기에 의해 송신되고 회의 서버에 의해 포워딩된 마크 데이터 신호를 획득한다. 구체적으로, 이러한 마크 데이터 신호는 실시간으로 수동으로 수신될 수 있다.

단계 S182: 제1 시간 간격 값을 생성한다.

단계 S183: 적어도 하나의 회의 단말기의 마크 데이터 신호를 각각 디코딩하고 마크 데이터 신호 큐를 생성한다.

단계 S184: 제1 시간 간격 값 및 마크 데이터 신호 큐의 순서에 따라 마크 데이터 신호를 출력하고, 적어도 하나의 제1 마크 데이터 신호를 생성한다.

단계 S185: 제1 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 제2 하이브리드 이미지 데이터 신호를 생성한다.

단계 S186: 제2 하이브리드 이미지 데이터를 로컬 회의 단말기의 디스플레이 화면에 보낸다.

각각의 마크 데이터 신호는, 회의 번호, 회의 단말기 번호, 및 마크 데이터 신호의 컨텐츠를 포함한다. 회의 번호 및 회의 단말기 번호는 수신기가 중첩 프로세스에 있어서 각각의 회의 단말기에 의해 송신된 마크 데이터 신호를 확실하게 식별할 수 있도록 설계되며, 마크 데이터 신호의 컨텐츠는, 벡터 그래프, 바이너리 비트맵, YUV 단색 비트맵, RGB 단색 비트맵과 같은 컬러 비트맵(color bitmap)에 의해 표현될 수 있다. 마크 데이터 신호의 컨텐츠가 벡터 비트맵 또는 바이너리 비트맵에 의해 표현되는 경우, 회의 서버는 필링 컬러(filling color)를 각각의 회의 단말기에 무작위로 할당할 수 있고, 회의 단말기의 중첩 모듈은 여러 회의 장소의 트랙들을 중첩할 때 채우기 위해 회의 서버에 의해 할당된 컬러를 사용한다. 마크 데이터 신호의 컨텐츠를 YUV 또는 RGB 비트맵과 같은 단색 비트맵으로 표현하는 경우, 수신기가 마크 데이터 신호의 위치를 정확하게 식별하고 이 위치를 슬라이드에 중첩하도록 투명한 컬러가 시스템에 일정하게 지정되어야 한다.

다른 방법 실시예 :

도 25에 도시된 바와 같이, 본 실시예에 다른 데이터 처리 방법이 제공된다. 이 방법은,

단계 S190: 회의 단말기에 의해 송신된 이미지 데이터 신호 및 마크 데이터 신호를 수신한다.

단계 S191: 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성한다.

단계 S192: 하이브리드 이미지 데이터, 또는 이미지 데이터 신호, 마크 데이터 신호를 회의 단말기에 보낸다.

단계 S191은,

필링 컬러 또는 투명 컬러를 마크 데이터 신호에 할당하고, 필링 컬러 또는 투명 컬러를 마크 데이터 신호를 처리하는데 사용하여 단색 마크 데이터 신호를 생성하는 단계로서, 마크 데이터 신호의 컨텐츠는 벡터 그래프, 바이너리 비트맵, YUY 단색 비트맵, 또는 RGB 단색 비트맵으로 표현될 수 있는, 상기 생성하는 단계; 및

상기 단색 마크 데이터 신호를 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하는 단계

를 포함한다.

마크 데이터 신호의 컨텐츠를 벡터 그래프 또는 바이너리 비트맵으로 표현하는 경우, MCU는 각각의 회의 단말기의 필링 컬러 또는 마크 데이터 신호를 무작위로 할당할 수 있으며, 여러 회의 장소의 트랙을 중첩할 때 채우기 위해 회의 단말기의 중첩 모듈을 그 할당된 필링 컬러를 사용한다. 마크 데이터 신호를 YUV 또는 RGB와 같은 단색 비트맵으로 표현하는 경우, MCU는 수신 회의 단말기가 트랙의 위치를 정확하게 식별할 수 있도록 그리고 마크 데이터 신호가 이미지 데이터 신호에 중첩된 후 각각의 회의 장소의 하이브리드 이미지 데이터의 보존성이 확보될 수 있도록 투명 컬러를 지정해야 한다.

단계 S192 전에, 이하의 단계가 포함될 수 있다: 회의 단말기에 의해 송신된 회의 장소 토큰 신청을 수신하고, 회의 장소 토큰의 신청이 성공하였음을 확인한 후 회의 장소 토큰을 회의 단말기에 반송한다. 이 경우, 단계 S192는 다음과 같다: 하이브리드 이미지 데이터 또는 마크 데이터 신호를 회의 장소 토큰에 따라 회의 단말기에 보낼 때, 회의 서버는 H.239 보조 스트림 채널을 선택하고, 하이브리드 이미지 데이터 또는 마크 데이터 신호를 H.239 보조 스트림 채널을 통해 회의 단말기에 보낼 수 있다. 시스템은 H.239 프로토콜을 지원하며, 시스템의 구조는 간단하며, 회의 시스템 내의 모든 회의 단말기는 다른 회의 단말기에 의해 부가된 마크를 볼 수 있다. 참가자 간의 협력이 수행되며, 사용자 상호작용성 및 토론 효율성이 향상된다.

당업자는 전술한 실시예 중 임의의 실시예에 제공된 방법의 단계들 중 일부 또는 전부가 관련 하드웨어에 명령을 내리는 프로그램으로 실현될 수 있다는 것을 이해할 것이다. 이러한 프로그램은 컴퓨터가 판독 가능한 저장 매체에 저장될 수 있다. 프로그램이 실행되면, 전술한 방법 실시예에서의 단계들이 수행된다.

본 발명을 일부의 예시적 실시예를 통해 서술하였으나, 본 발명은 이러한 실시예에 제한되지 않는다. 당업자는 본 발명의 정신 및 범주를 벗어남이 없이 본 발명에 대해 변형 및 수정을 행할 수 있다. 본 발명은 이하의 청구의 범위 및 그 등가물에 의해 규정되는 보호 범위 내에 해당되는 변형 및 수정을 망라하도록 의도된다.

Claims

회의 단말기에 있어서,
마크 데이터 신호를 획득하도록 구성된 마크 획득 모듈;
이미지 데이터 신호를 획득하도록 구성된 이미지 획득 모듈;
상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성하도록 구성된 중첩 모듈; 및
상기 하이브리드 이미지 데이터 신호를 출력하도록 구성된 출력 모듈
을 포함하는 회의 단말기.
제1항에 있어서,
제1 시간 간격 값을 생성하도록 구성된 제1 타이머; 및
제2 시간 간격 값을 생성하도록 구성된 제2 타이머
를 더 포함하며,
상기 마크 획득 모듈은,
상기 마크 데이터 신호를 획득하고, 상기 제1 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제1 마크 데이터 신호를 생성하도록 구성된 제1 마크 획득 모듈; 및
상기 마크 데이터 신호를 획득하고, 상기 제2 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제2 마크 데이터 신호를 생성하도록 구성된 제2 마크 획득 모듈
을 포함하는, 회의 단말기.
제2항에 있어서,
상기 제1 마크 획득 모듈은, 로컬 회의 단말기에 의해 송신된 마크 데이터 신호를 획득하고, 상기 제1 시간 값에 따라 상기 마크 데이터 신호를 출력하여 상기 제1 마크 데이터 신호를 생성하도록 구성된 제1 내부 마크 획득 모듈이며,
상기 제2 마크 획득 모듈은, 상기 로컬 회의 단말기에 의해 송신된 마크 데이터 신호를 획득하고, 상기 제2 시간 값에 따라 상기 마크 데이터 신호를 출력하여 상기 제2 마크 데이터 신호를 생성하도록 구성된 제2 내부 마크 획득 모듈인, 회의 단말기.
제3항에 있어서,
상기 제2 마크 데이터 신호를 인코딩하여 제3 마크 데이터 신호를 생성하도록 구성된 마크 인코딩 모듈; 및
상기 제3 마크 데이터 신호를 보조 스트림 채널 또는 사용자-정의 채널을 통해 회의 서버에 송신하도록 구성된 마크 송신 모듈
을 더 포함하는, 회의 단말기.
제4항에 있어서,
상기 보조 스트림 채널에서 회의 장소 토큰(conference site token)을 신청하여 상기 회의 장소 토큰을 성공적으로 획득한 후 제1 제어 신호를 생성하도록 구성된 제1 토큰 제어 모듈을 더 포함하며,
상기 마크 송신 모듈은 제3 마크 데이터 신호를 상기 제1 제어 신호에 따라 상기 보조 스트림 채널을 통해 상기 회의 서버에 송신하는, 회의 단말기.
제2항에 있어서,
상기 제1 마크 획득 모듈은,
로컬 회의 단말기를 제외한 적어도 하나의 회의 단말기에 의해 송신되고 회의 서버에 의해 포워딩된 상기 마크 데이터 신호를 획득하고, 상기 마크 데이터 신호를 상기 제1 시간 간격 값에 따라 출력하여 상기 제1 마크 데이터 신호를 생성하도록 구성된 제1 외부 마크 획득 모듈인, 회의 단말기.
제6항에 있어서,
상기 제1 외부 마크 획득 모듈은,
상기 적어도 하나의 회의 단말기에 의해 송신되고 상기 회의 서버에 의해 포워딩된 마크 데이터 신호를 획득하도록 구성된 제1 외부 마크 획득 서브모듈;
상기 적어도 하나의 회의 단말기의 마크 데이터 신호를 각각 디코딩하고, 마크 데이터 신호 큐(queue)를 생성하도록 구성된 적어도 하나의 디코더; 및
상기 마크 데이터 신호 큐의 순서에 따라 상기 마크 데이터 신호를 출력하여 적어도 하나의 제1 마크 데이터 신호를 생성하도록 구성된 마크 출력 모듈
을 포함하는, 회의 단말기.
제7항에 있어서,
상기 중첩 모듈은, 상기 제1 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 제1 하이브리드 이미지 데이터 신호를 생성하도록 구성된 제1 중첩 모듈이며,
상기 출력 모듈은, 상기 제1 하이브리드 이미지 데이터를 상기 로컬 회의 단말기의 디스플레이 화면에 송신하도록 구성된 제1 송신 모듈인, 회의 단말기.
제3항에 있어서,
보조 스트림 채널에서 회의 장소 토큰을 신청하여 상기 회의 장소 토큰을 성공적으로 획득한 후 제2 제어 신호를 생성하도록 구성된 제2 토큰 제어 모듈을 더 포함하는 회의 단말기.
제9항에 있어서,
상기 중첩 모듈은, 상기 제2 제어 신호에 따라 상기 제1 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 제2 하이브리드 이미지 데이터를 생성하도록 구성된 제2 중첩 모듈이며,
상기 출력 모듈은, 상기 제1 하이브리드 이미지 데이터를 상기 로컬 회의 단말기의 디스플레이 화면에 송신하거나, 상기 제2 하이브리드 이미지 데이터를 상기 보조 스트림 채널을 통해 회의 서버에 송신하도록 구성된 제2 송신 모듈인, 회의 단말기.
제3항에 있어서,
상기 로컬 회의 단말기가 위치해 있는 회의 장소에 있는 입력 장치의 서브토큰 신청을 수신하고, 상기 서브토큰의 신청이 성공하였음을 확인한 후 상기 입력 장치에 서브토큰을 할당하도록 구성된 토큰 관리 모듈을 더 포함하며,
상기 제1 내부 마크 획득 모듈은, 상기 로컬 회의 단말기가 위치해 있는 상기 회의 장소에 있는 입력 장치의 마크 데이터 신호를 획득하고, 상기 제1 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 상기 제1 마크 데이터 신호를 생성하며, 그리고
상기 제2 내부 마크 획득 모듈은, 상기 서브토큰에 따라, 상기 로컬 회의 단말기가 위치해 있는 상기 회의 장소에 있는 입력 장치의 마크 데이터 신호를 획득하고, 상기 제2 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 상기 제2 마크 데이터 신호를 생성하는, 회의 단말기.
제1항에 있어서,
상기 마크 획득 모듈은, 상기 마크 데이터 신호를 실시간으로 획득하도록 구성된 실시간 마크 획득 모듈이며,
상기 이미지 획득 모듈은, 상기 이미지 데이터 신호를 실시간으로 획득하도록 구성된 실시간 이미지 획득 모듈인, 회의 단말기.
제1항에 있어서,
상기 마크 획득 모듈은, 매뉴얼 수신 옵션(manual receiving option)을 제공하고, 상기 매뉴얼 수신 옵션이 선택되면 상기 마크 데이터 신호를 수동으로 획득하도록 구성되어 있으며,
상기 이미지 획득 모듈은, 매뉴얼 수신 옵션을 제공하고, 상기 매뉴얼 수신 옵션이 선택되면 상기 이미지 데이터 신호를 수동으로 획득하도록 구성되어 있는, 회의 단말기.
제1항 내지 제13항 중 어느 한 항에 있어서,
상기 로컬 회의 단말기가 위치해 있는 상기 회의 장소에 있는 입력 장치에 의해 송신된 비밀 토큰 신청을 수신하여 타겟 입력 장치와의 비밀 회의를 수행하며, 상기 비밀 토큰을 신청하는 것이 성공하였음을 확인한 후, 보조 스트림 채널 또는 사용자-정의 채널을 사용하여 비밀 토큰을 상기 입력 장치에 할당하도록 구성된 비밀 토큰 제어 모듈을 더 포함하는 회의 단말기.
회의 서버에 있어서,
회의 단말기에 의해 송신된 이미지 데이터 신호를 수신하도록 구성된 이미지 데이터 수신 모듈;
상기 회의 단말기에 의해 마크 데이터 신호를 수신하도록 구성된 마크 수신 모듈;
상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하도록 구성된 중첩 모듈; 및
상기 하이브리드 이미지 데이터, 또는 상기 이미지 데이터 신호, 또는 상기 마크 데이터 신호를 송신하도록 구성된 송신 모듈
을 포함하는 회의 서버.
제15항에 있어서,
상기 중첩 모듈은,
상기 마크 데이터 신호에 필러 컬러(filler color) 또는 투명 컬러를 할당하고, 상기 필러 컬러 또는 상기 투명 컬러를 사용하여 상기 마크 데이터 신호를 처리하며 컬러 마크 데이터 신호를 생성하도록 구성된 필링 모듈(filling module); 및
상기 컬러 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하도록 구성된 처리 모듈
을 포함하는, 회의 서버.
제15항 또는 제16항에 있어서,
보조 스트림 채널을 선택하고, 상기 송신 모듈을 제어하여 상기 보조 스트림 채널을 통해 상기 하이브리드 이미지 데이터, 또는 상기 이미지 데이터 신호 또는 상기 마크 데이터 신호를 상기 회의 단말기 또는 다른 회의 서버에 송신하도록 구성된 송신 제어 모듈을 더 포함하는 회의 서버.
제17항에 있어서,
상기 회의 단말기에 의해 송신된 회의 장소 토큰 신청을 수신하고, 상기 회의 장소 토큰의 신청이 성공하였음을 확인한 후 회의 장소 토큰을 회의 단말기에 반송하도록 구성된 토큰 관리 모듈을 더 포함하며,
상기 송신 제어 모듈은 상기 회의 장소 토큰에 따라 상기 보조 스트림 채널을 선택하고, 상기 송신 모듈을 제어하여 상기 보조 스트림 채널을 통해 상기 하이브리드 이미지 데이터, 또는 상기 이미지 데이터 신호 또는 상기 마크 데이터 신호를 다른 회의 단말기 또는 다른 회의 서버에 송신하는, 회의 서버.
회의 시스템에 있어서,
제1 회의 단말기, 회의 서버, 및 적어도 하나의 제2 회의 단말기를 포함하며,
상기 제1 회의 단말기는,
상기 회의 서버에 의해 포워딩된 이미지 데이터 신호를 획득하도록 구성된 이미지 획득 모듈; 및
마크 데이터 신호를 획득하고, 상기 마크 데이터 신호를 상기 회의 서버에 송신하도록 구성된 마크 송신 모듈
을 포함하며,
상기 회의 서버는,
상기 회의 시스템 내의 임의의 회의 단말기에 의해 송신된 상기 이미지 데이터 신호를 수신하도록 구성된 이미지 데이터 수신 모듈;
상기 마크 데이터 신호를 수신하도록 구성된 마크 수신 모듈;
상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하도록 구성된 중첩 모듈; 및
상기 하이브리드 이미지 데이터를 상기 제1 회의 단말기 및 상기 적어도 하나의 제2 회의 단말기에 송신하도록 구성된 송신 모듈
을 포함하며,
상기 적어도 하나의 제2 회의 단말기는 상기 하이브리드 이미지 데이터를 수신하고 디스플레이하도록 구성된, 회의 시스템.
제19항에 있어서,
상기 회의 서버들은, 적어도 두 개의 연결된 회의 서버인, 회의 시스템.
제20항에 있어서,
상기 적어도 두 개의 연결된 회의 서버는, 하나의 마스터 회의 서버 및 적어도 하나의 슬레이브 회의 서버를 포함하며,
상기 마스터 회의 서버는 상기 하이브리드 이미지 데이터를 상기 적어도 하나의 슬레이브 회의 서버 및 상기 마스터 회의 서버에 연결된 회의 단말기에 송신하며,
상기 슬레이브 회의 서버는 상기 수신된 하이브리드 이미지 데이터를 상기 슬레이브 회의 서버에 연결된 회의 단말기에 송신하는, 회의 시스템.
제20항에 있어서,
상기 적어도 두 개의 회의 연결된 서버는 모두 마스터 회의 서버이고,
상기 회의 시스템은,
상기 마크 데이터 신호의 송신 시간을 획득하고, 상기 마크 데이터 신호의 송신 시간의 순서에 따라 제어 신호를 생성하도록 구성된 제어 유닛을 더 포함하며,
상기 적어도 두 개의 마스터 회의 서버의 각각에 있는 상기 중첩 모듈은 상기 마크 데이터 신호를 상기 제어 신호에 따라 상기 이미지 데이터 신호에 중첩하여 상기 하이브리드 이미지 데이터를 생성하는, 회의 시스템.
제22항에 있어서,
상기 적어도 두 개의 마스터 회의 서버는 상기 제어 신호에 따라 제어 토큰을 획득하고,
상기 중첩 모듈은 상기 마크 데이터 신호를 상기 제어 토큰에 따라 상기 이미지 데이터 신호에 중첩하여 상기 하이브리드 이미지 데이터를 생성하는, 회의 시스템.
회의 시스템에 있어서,
제1 회의 단말기, 회의 서버, 및 적어도 하나의 제2 회의 단말기를 포함하며,
상기 제1 회의 단말기는,
상기 회의 서버에 의해 송신된 이미지 데이터 신호를 획득하도록 구성된 이미지 획득 모듈; 및
마크 데이터 신호를 획득하고, 상기 마크 데이터 신호를 상기 회의 서버에 송신하도록 구성된 마크 송신 모듈
을 포함하며,
상기 회의 서버는 상기 이미지 데이터 신호 및 상기 마크 데이터 신호를 수신하고 상기 이미지 데이터 신호 및 상기 마크 데이터 신호를 포워딩하도록 구성되어 있으며,
상기 적어도 하나의 제2 회의 단말기는,
제1 시간 간격 값을 생성하도록 구성된 제1 타이머;
상기 회의 서버에 의해 포워딩된 상기 이미지 데이터 신호를 획득하도록 구성된 이미지 획득 모듈;
상기 회의 서버에 의해 포워딩된 상기 마크 데이터 신호를 획득하고, 상기 제1 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제1 마크 데이터 신호를 생성하도록 구성된 제1 외부 마크 획득 모듈;
상기 제1 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 제1 하이브리드 이미지 데이터 신호를 생성하도록 구성된 제1 중첩 모듈; 및
상기 제1 하이브리드 이미지 데이터 신호를 디스플레이하도록 구성된 디스플레잉 모듈
을 포함하는, 회의 시스템.
제24항에 있어서,
상기 제1 외부 마크 획득 모듈은,
적어도 하나의 다른 회의 단말기에 의해 송신되고 상기 회의 서버에 의해 포워딩된 마크 데이터 신호들을 획득하도록 구성된 제1 외부 마크 획득 서브모듈;
상기 적어도 하나의 다른 회의 단말기의 마크 데이터 신호들을 각각 디코딩하고, 마크 데이터 신호 큐를 생성하도록 구성된 적어도 하나의 디코더; 및
상기 제1 시간 간격 값 및 상기 마크 데이터 신호 큐의 순서에 따라 상기 마크 데이터 신호들을 출력하여 적어도 하나의 제1 마크 데이터 신호를 생성하도록 구성된 마크 출력 모듈
을 포함하는, 회의 시스템.
제24항 또는 제25항에 있어서,
상기 회의 서버들은 적어도 두 개의 연결된 회의 서버인, 회의 시스템.
제26항에 있어서,
상기 적어도 두 개의 연결된 회의 서버는, 하나의 마스터 회의 서버 및 적어도 하나의 슬레이브 회의 서버를 포함하며,
상기 마스터 회의 서버는 상기 이미지 데이터 신호 및 상기 마크 데이터 신호를 상기 적어도 하나의 슬레이브 회의 서버 및 상기 마스터 회의 서버에 연결된 회의 단말기에 송신하며,
상기 슬레이브 회의 서버는 상기 이미지 데이터 신호 및 상기 마크 데이터 신호를 상기 슬레이브 회의 서버에 연결된 회의 단말기에 송신하는, 회의 시스템.
제26항에 있어서,
상기 적어도 두 개의 회의 연결된 서버는 마스터 회의 서버이고,
상기 회의 시스템은,
상기 마크 데이터 신호의 송신 시간을 획득하고, 상기 마크 데이터 신호의 송신 시간의 순서에 따라 제어 신호를 생성하도록 구성된 제어 유닛을 더 포함하며,
상기 적어도 두 개의 마스터 회의 서버는 상기 제어 신호에 따라 상기 이미지 데이터 신호 및 상기 마크 데이터 신호를 포워딩하는, 회의 시스템.
제28항에 있어서,
상기 적어도 두 개의 마스터 회의 서버는 상기 제어 신호에 따라 제어 토큰을 획득하고, 상기 제어 토큰에 따라 상기 이미지 데이터 신호 및 상기 마크 데이터 신호를 포워딩하는, 회의 시스템.
회의 시스템에 있어서,
제1 회의 단말기, 회의 서버, 및 적어도 하나의 제2 회의 단말기를 포함하며,
상기 제1 회의 단말기는,
제1 시간 간격 값을 생성하도록 구성된 제1 타이머;
제2 시간 간격 값을 생성하도록 구성된 제2 타이머;
로컬 회의 단말기에 의해 송신된 마크 데이터 신호를 획득하고, 상기 제1 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제1 마크 데이터 신호를 생성하도록 구성된 제1 내부 마크 획득 모듈;
상기 로컬 회의 단말기에 의해 송신된 상기 마크 데이터 신호를 획득하고, 상기 제2 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제2 마크 데이터 신호를 생성하도록 구성된 제2 내부 마크 획득 모듈;
상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 제2 하이브리드 이미지 데이터를 생성하도록 구성된 제2 중첩 모듈; 및
상기 제1 하이브리드 이미지 데이터를 상기 로컬 회의 단말기의 디스플레이 화면에 송신하거나, 상기 제2 하이브리드 이미지 데이터를 보조 스트림 채널을 통해 상기 회의 서버에 송신하도록 구성된 제2 송신 모듈
을 포함하며,
상기 회의 서버는, 상기 제2 하이브리드 이미지 데이터를 수신하고 포워딩하도록 구성되어 있으며,
상기 적어도 하나의 제2 회의 단말기는 상기 제2 하이브리드 이미지 데이터를 수신하고 디스플레이하도록 구성되어 있는, 회의 시스템.
제30항에 있어서,
상기 제1 회의 단말기는,
다른 보조 스트림 채널에서 회의 장소 토큰을 신청하여 상기 회의 장소 토큰을 성공적으로 획득한 후 제2 제어 신호를 생성하도록 구성된 제2 토큰 제어 모듈을 더 포함하며,
상기 제2 중첩 모듈은, 상기 제1 마크 데이터 신호를 상기 제2 제어 신호에 따라 상기 이미지 데이터 신호에 중첩하여 제2 하이브리드 이미지 데이터를 생성하는, 회의 시스템.
제30항 또는 제31항에 있어서,
상기 회의 서버들은, 적어도 두 개의 연결된 회의 서버인, 회의 시스템.
제32항에 있어서,
상기 적어도 두 개의 연결된 회의 서버는, 하나의 마스터 회의 서버 및 적어도 하나의 슬레이브 회의 서버를 포함하며,
상기 마스터 회의 서버는 상기 제2 하이브리드 이미지 데이터를 상기 적어도 하나의 슬레이브 회의 서버 및 상기 마스터 회의 서버에 연결된 회의 단말기에 송신하며,
상기 슬레이브 회의 서버는 상기 수신된 제2 하이브리드 이미지 데이터를 상기 슬레이브 회의 서버에 연결된 회의 단말기에 송신하는, 회의 시스템.
데이터 처리 방법에 있어서,
이미지 데이터 신호를 획득하는 단계;
마크 데이터 신호를 획득하는 단계;
상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성하는 단계; 및
상기 하이브리드 이미지 데이터 신호를 출력하는 단계
를 포함하는 데이터 처리 방법.
제34항에 있어서,
상기 마크 데이터 신호를 획득하는 단계 이후에,
제1 시간 간격 값을 생성하는 단계;
제2 시간 간격 값을 생성하는 단계;
상기 제1 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제1 마크 데이터 신호를 생성하는 단계; 및
상기 제2 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제2 마크 데이터 신호를 생성하는 단계
를 더 포함하는 데이터 처리 방법.
제35항에 있어서,
상기 마크 데이터 신호를 획득하는 단계는,
로컬 회의 단말기에 의해 송신되는 상기 마크 데이터 신호를 획득하는 단계인, 데이터 처리 방법.
제36항에 있어서,
상기 제2 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하고, 상기 제2 마크 데이터 신호를 생성하는 단계 이후에,
상기 제2 마크 데이터 신호를 인코딩하고, 제3 마크 데이터 신호를 생성하는 단계; 및
상기 제3 마크 데이터 신호를 보조 스트림 채널을 통해 회의 서버에 송신하는 단계
를 더 포함하는 데이터 처리 방법.
제37항에 있어서,
상기 제3 마크 데이터 신호를 보조 스트림 채널을 통해 상기 회의 서버에 송신하는 단계는,
상기 보조 스트림 채널에서의 토큰을 신청하여 상기 토큰을 성공적으로 획득한 후 제1 제어 신호를 생성하는 단계; 및
상기 제1 제어 신호에 따라 상기 보조 스트림 채널을 통해 상기 제3 마크 데이터 신호를 상기 회의 서버에 송신하는 단계인, 데이터 처리 방법.
제35항에 있어서,
상기 마크 데이터 신호를 획득하는 단계는,
로컬 회의 단말기를 제외한 적어도 하나의 회의 단말기에 의해 송신되고 회의 서버에 의해 포워딩된 상기 마크 데이터 신호들을 획득하는 단계인, 데이터 처리 방법.
제39항에 있어서,
상기 로컬 회의 단말기를 제외한 적어도 하나의 회의 단말기에 의해 송신되고 회의 서버에 의해 포워딩된 상기 마크 데이터 신호들을 획득하는 단계 이후에,
상기 적어도 하나의 회의 단말기의 상기 마크 데이터 신호들을 각각 디코딩하는 단계; 및
상기 제1 시간 간격 값 및 상기 마크 데이터 신호 큐의 순서에 따라 상기 마크 데이터 신호들을 출력하고, 적어도 하나의 제1 마크 데이터 신호를 생성하는 단계
를 더 포함하는 데이터 처리 방법.
제40항에 있어서,
상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터 신호를 생성하는 단계는,
상기 적어도 하나의 제1 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 제1 하이브리드 이미지 데이터 신호를 생성하는 단계이고,
상기 하이브리드 이미지 데이터 신호를 출력하는 단계는,
상기 제1 하이브리드 이미지 데이터를 상기 로컬 회의 단말기의 디스플레이 화면에 송신하는 단계인, 데이터 처리 방법.
제36항에 있어서,
상기 제1 시간 간격 값에 따라 상기 마크 데이터 신호를 출력하여 제1 마크 데이터 신호를 생성하는 단계 이후에,
상기 보조 스트림 채널에서의 토큰을 신청하여 상기 토큰을 성공적으로 획득한 후 제2 제어 신호를 생성하는 단계를 더 포함하며,
상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 상기 하이브리드 이미지 데이터 신호를 생성하는 단계는,
상기 제1 마크 데이터 신호를 상기 제2 제어 신호에 따라 상기 이미지 데이터 신호에 중첩하여 제2 하이브리드 이미지 데이터를 생성하는 단계이며,
상기 하이브리드 이미지 데이터 신호를 출력하는 단계는,
상기 제2 하이브리드 이미지 데이터를 상기 로컬 회의 단말기의 디스플레이 화면에 송신하거나, 상기 제2 하이브리드 이미지 데이터를 상기 보조 스트림 채널을 통해 회의 서버에 송신하는 단계인, 데이터 처리 방법.
제36항에 있어서,
상기 로컬 회의 단말기에 의해 송신된 상기 마크 데이터 신호를 획득하는 단계 이전에,
상기 로컬 회의 단말기가 위치해 있는 회의 장소 상의 입력 장치의 서브토큰 신청을 수신하고, 상기 서브토큰의 신청이 성공하였음을 확인한 후 상기 입력 장치에 서브 토큰을 할당하는 단계
를 더 포함하며,
상기 로컬 회의 단말기에 의해 송신된 상기 마크 데이터 신호를 획득하는 단계는,
상기 로컬 회의 단말기가 위치해 있는 회의 장소 상의 입력 장치에 의해 입력되는 상기 마크 데이터 신호를 상기 서브토큰에 따라 획득하는 단계인, 데이터 처리 방법.
제39항에 있어서,
상기 로컬 회의 단말기를 제외한 상기 적어도 하나의 회의 단말기에 의해 송신되고 상기 회의 서버에 의해 포워딩된 상기 마크 데이터 신호들을 획득하는 단계는,
상기 로컬 회의 단말기를 제외한 상기 적어도 하나의 회의 단말기에 의해 송신되고 상기 회의 서버에 의해 포워딩된 상기 마크 데이터 신호를 실시간으로 또는 수동으로 수신하는 단계인, 데이터 처리 방법.
데이터 처리 방법에 있어서,
회의 단말기에 의해 송신되는 이미지 데이터 신호 및 마크 데이터 신호를 수신하는 단계;
상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 하이브리드 이미지 데이터를 생성하는 단계; 및
상기 하이브리드 이미지 데이터, 또는 상기 이미지 데이터 신호, 또는 상기 마크 데이터 신호를 상기 회의 단말기에 송신하는 단계
를 포함하는 데이터 처리 방법.
제45항에 있어서,
상기 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 상기 하이브리드 이미지 데이터를 생성하는 단계는,
상기 마크 데이터 신호에 필링 컬러(filling color) 또는 투명 컬러를 할당하고, 상기 필링 컬러 또는 상기 투명 컬러를 사용하여 상기 마크 데이터 신호를 처리하며, 단색 마크 데이터 신호를 생성하는 단계; 및
상기 단색 마크 데이터 신호를 상기 이미지 데이터 신호에 중첩하여 상기 하이브리드 이미지 데이터를 생성하는 단계
를 포함하는, 데이터 처리 방법.
제45항 또는 제46항에 있어서,
상기 하이브리드 이미지 데이터, 또는 상기 이미지 데이터 신호, 또는 상기 마크 데이터 신호를 상기 회의 단말기에 송신하는 단계는,
보조 스트림 채널을 선택하고, 상기 보조 스트림 채널을 통해 상기 하이브리드 이미지 데이터 또는 상기 마크 데이터 신호를 상기 회의 단말기에 송신하는 단계인, 데이터 처리 방법.
제47항에 있어서,
상기 하이브리드 이미지 데이터, 또는 상기 이미지 데이터 신호, 또는 상기 마크 데이터 신호를 상기 회의 단말기에 송신하는 단계 이전에,
상기 회의 단말기에 의해 송신되는 회의 장소 토큰 신청을 수신하고, 회의 장소 토큰의 신청이 성공하였음을 확인한 후에 상기 회의 장소 토큰을 상기 회의 단말기에 반송하는 단계
를 더 포함하며,
상기 하이브리드 이미지 데이터, 또는 상기 이미지 데이터 신호, 또는 상기 마크 데이터 신호를 상기 회의 단말기에 송신하는 단계는,
상기 하이브리드 이미지 데이터, 또는 상기 이미지 데이터 신호, 또는 상기 마크 데이터 신호를 상기 회의 장소 토큰에 따라 다른 회의 장소의 상기 회의 단말기에 송신하는 단계인, 데이터 처리 방법.