KR20060135485A

KR20060135485A - 전자 회의 시스템에서의 회의 단말 장치, 전자 회의 시스템및 표시 화상 제어 방법

Info

Publication number: KR20060135485A
Application number: KR1020060015068A
Authority: KR
Inventors: 에리코 다마루; 가즈노리 호리키리; 요시키 와타나베; 마사토미 이나가키
Original assignee: 후지제롯쿠스 가부시끼가이샤
Priority date: 2005-06-24
Filing date: 2006-02-16
Publication date: 2006-12-29
Also published as: JP4604877B2; KR100751525B1; JP2007004573A; CN1885942A; CN100548042C; US8041767B2; US20070035614A1

Abstract

본 발명은 제 1 회의 단말 장치에서 화면 표시한 화상 정보를 배신(配信)함으로써, 시청자가 사용하는 1 내지 복수대의 제 2 회의 단말 장치에 화면 표시하게 한, 발언자 사용의 제 1 회의 단말 장치에서, 복수의 화상 정보를 화면 표시하는 화면 제어 수단과, 화면 제어 수단이 화면 표시하고 있는 각 화상 정보에 대하여, 제 2 회의 단말 장치가 상기 화상 정보를 화면 표시할지의 여부의 판단 기준이 되는 우선도를 할당하는 우선도 할당 수단과, 화면 제어 수단이 화면 표시하고 있는 화상 정보와, 우선도 할당 수단이 각 화상 정보에 할당한 우선도를 제 2 회의 단말 장치로 송신하는 정보 배신 처리 수단을 갖고 있는 것에 관한 것이다.

회의 단말 장치, 화상 정보, 화면 제어, 우선도

Description

전자 회의 시스템에서의 회의 단말 장치, 전자 회의 시스템 및 표시 화상 제어 방법{CONFERENCE TERMINAL APPARATUS IN ELECTRONIC CONFERENCE SYSTEM, ELECTRONIC CONFERENCE SYSTEM, AND DISPLAY IMAGE CONTROL METHOD}

도 1은 본 실시예의 전자 회의 시스템의 전체 구성을 나타낸 구성도.

도 2는 회의실에서 행해지고 있는 프리젠테이션의 흐름을 나타낸 도면.

도 3은 송신 정보의 데이터 구성의 개요도.

도 4는 로컬 회의 단말 및 리모트 회의 단말의 구성을 나타낸 블럭도.

도 5는 촬상(撮像) 데이터를 해석함으로써, 발표자의 행위를 검출하는 처리의 흐름을 나타낸 플로차트.

도 6은 추기 화상 정보를 사용하여, 발표자의 행위를 검출하는 처리의 흐름을 나타낸 플로차트.

도 7은 포커스 결정 처리부에서의 처리의 흐름을 나타낸 플로차트.

도 8은 프라이오리티(priority) 결정부에 의한, 화상 정보의 우선도가 상승할 경우에서의 처리의 흐름을 나타낸 플로차트.

도 9는 프라이오리티 결정부에 의한, 화상 정보의 우선도가 저하될 경우에서의 처리의 흐름을 나타낸 플로차트.

도 10은 송신 정보의 데이터 구성의 상세도.

도 11은 리모트 회의 단말의 화면수에 따른 처리의 흐름을 나타낸 플로차트.

도 12는 로컬 회의 단말의 화면수가 리모트 회의 단말의 화면수보다 많은 경우에서의 화면 할당 처리의 흐름을 나타낸 플로차트.

도 13은 로컬 회의 단말이 놓여져 있는 회의실에서의 화면과 발표자의 위치를 나타낸 도면.

도 14는 리모트 회의 단말의 화면에 표시되는 화상 정보 및 화면의 표시 형태를 나타낸 도면.

*도면의 주요 부분에 대한 부호의 설명*

10…전자 회의 시스템

12a, 12b, 12c, 12f…회의실

14a, 14b, 14c, 14f…회의 단말

16a, 16b, 16c, 16f, 20a, 20b, 20c, 20d…화면

18a, 18b, 18c, 18d…송신 정보

22a, 22b, 22c, 22d…화면ID

본 발명은 컴퓨터가 수신한 복수의 화상 정보를 컴퓨터가 갖는 표시 화면에 표시하기 위한 표시 화상 제어에 관한 것으로, 특히, 수신한 화상 정보의 수와 컴퓨터가 관리하는 표시 화면의 수가 다른 경우에서의 표시 화상 제어에 관한 것이 다.

일반적으로, 전자 회의 시스템에서는 통신 회선을 통하여 격지(隔地)에 있는 회의실의 컴퓨터끼리를 접속하고, 각 컴퓨터 사이에서 화상 정보는 리얼 타임으로 송수신되어 있다. 그리고, 수신된 화상 정보는 각 회의실의 컴퓨터가 관리하는 액정 디스플레이 등의 표시 화면에 표시된다. 예를 들면, 어떤 회의실에서 발표자가 프리젠테이션을 행하고, 그 회의실의 표시 화면에 표시되어 있는 화상 정보가 다른 회의실의 컴퓨터로 송신되어, 다른 회의실의 표시 화면에도 화상 정보가 표시된다. 그 때문에, 수신측 회의실에 있는 참가자는 상기한 프리젠테이션의 내용을 확인할 수 있다.

또한, 발표자가 복수의 화면을 병용하여 프리젠테이션을 행하면, 각각의 화면에 표시된 화상 정보를 다른 회의실에 있는 참가자도 복수의 화면을 보면서 프리젠테이션의 내용을 확인할 수 있다. 이렇게 복수의 화면을 이용하면, 다른 회의실에 있는 참가자는 한번에 많은 정보를 확인할 수 있기 때문에, 프리젠테이션의 내용을 파악하기 쉽다.

그런데, 송신측의 회의실과 수신측의 회의실에서 사용되는 화면수가 동일한, 즉 대칭된 화면수이면, 송신측의 회의실로부터 송신된 화상 정보를 수신측의 회의실의 화면에 그대로 할당하여 표시하게 할 수 있기 때문에, 문제는 발생하지 않는다.

그러나, 송신측의 회의실과 수신측의 회의실에서 사용되는 화면수가 다른 경우, 특히 수신측의 회의실에서 사용되는 화면수가 적은 경우, 송신측의 회의실로부 터 송신된 화상 정보의 모두를 수신측의 회의실에 설치된 표시 화면에서 동시에 표시할 수 없다.

그래서, 이러한 결함을 해소하는 방법으로서, 수신측의 회의실의 시청자가 송신된 화상 정보 중에서 수신측의 회의실의 표시 화면의 수만 선택하는 것을 생각할 수 있다. 그러나, 시청자는 발표자가 선택하길 바라는 화면을 선택하기 위한 기준이 없기 때문에, 화상 정보를 마음대로 선택해야 한다. 이 때문에, 시청자에 의해 선택된 화상 정보는 발표자가 선택하길 바라는 화상 정보라고 할 수 없다.

그래서, 프리젠테이션의 진행에 따라, 발표자가 선택하길 바라는 화상 정보를 선택하는 것을 생각할 수 있다. 그러나, 발표자는 프리젠테이션을 하면서 화상 정보를 선택해야 하기 때문에, 혼란하기 쉽다. 복수의 화상 정보를 선택할 필요가 있는 경우는 특히 발표자는 혼란하기 쉽다. 또한, 복수의 수신측의 회의실이 있는 경우, 발표자가 모든 회의실에 맞게 화상 정보를 선택하는 것은 어렵다.

본 발명의 제 1 회의 단말 장치에서 화면 표시한 화상 정보를 배신(配信)함으로써, 시청자가 사용하는 1 내지 복수대의 제 2 회의 단말 장치에 화면 표시하게 한, 발언자 사용의 제 1 회의 단말 장치에서, 복수의 화상 정보를 화면 표시하는 화면 제어 수단과, 화면 제어 수단이 화면 표시하고 있는 각 화상 정보에 대하여, 제 2 회의 단말 장치가 상기 화상 정보를 화면 표시할지의 여부의 판단 기준이 되는 우선도를 할당하는 우선도 할당 수단과, 화면 제어 수단이 화면 표시하고 있는 화상 정보와, 우선도 할당 수단이 각 화상 정보에 할당한 우선도를 제 2 회의 단말 장치로 송신하는 정보 배신 처리 수단을 갖는다.

본 발명의 발언자 사용의 제 1 회의 단말 장치로부터 배신되어 온 화상 정보를 화면 표시하는 시청자 사용의 제 2 회의 단말 장치에서, 제 1 회의 단말 장치로부터 배신되어 온 복수의 화상 정보와, 각 화상 정보에 대하여 상기 화상 정보를 화면 표시할지의 여부의 판단 기준이 되는 우선도 정보를 수신하는 정보 수신 처리 수단과, 정보 수신 처리 수단이 수신한 화상 정보 중에서 제 2 회의 단말 장치가 갖는 화면수만큼의 화상 정보를 우선도 정보에 의거하여 추출하고 각 화면에 할당하고, 표시하는 표시 처리 수단을 갖는다.

본 발명의 전자 회의 시스템은 복수의 화상 정보를 화면에 표시하고, 표시된 화상 정보의 각각에, 리모트 화면 위에 표시하기 위한 우선도를 할당하고, 표시된 화상 정보와 각 화상 정보에 할당된 우선도를 리모트 회의 단말 장치로 송신하는 송신 단말 장치와, 다른 회의 단말 장치로부터 송신된 복수의 화상 정보와, 수신한 화상 정보를 표시하기 위한 우선도 정보를 수신하고, 수신한 화상 정보를 우선도 정보 및 화상 정보를 표시하기 위하여 사용되는 화면수에 따라 표시하는 단말 장치를 포함한다.

본 발명의 표시 화상 제어 방법은 전자 회의에서 사용되는 화상 정보를 송신하는 방법으로서, 전자 회의에서 사용되는 복수의 화상 정보의 각각에, 리모트 화면에 표시하기 위한 우선도를 할당하고, 표시된 화상 정보 및 화상 정보의 각각에 할당되는 우선도를 리모트 회의 단말 장치로 송신한다.

본 발명의 표시 화상 제어 방법은 전자 회의에서 수신한 화상 정보를 표시하는 방법으로서, 화면 위에 표시되는 복수의 화상 정보 및 표시되는 화상 정보의 우선도 정보를 수신하고, 화상 정보를 표시하기 위하여 사용되고 있는 화면수 및 우선도 정보에 의거하여, 수신한 화상 정보를 표시한다.

이상에서와 같이, 로컬 회의 단말 장치는 리모트 회의 단말 장치에, 각 화상 정보에 할당된 우선도 정보를 송신함으로써, 리모트 회의 단말 장치에, 화면 표시할지의 여부의 기준이 되는 우선도 정보에 의거하여 화상 정보를 선택하게 할 수 있다.

이하, 도면에 의거하여 본 발명의 적절한 실시예에 대하여 설명한다. 도 1은 본 실시예에 관계되는 전자 회의 시스템(10)의 전체 구성을 나타낸 도면이다. 도 1에 나타낸 바와 같이 전자 회의 시스템(10)에서는 통신 회선을 통하여 격지에 있는 복수의 회의실(12a 내지 12f)에 회의 단말(14a 내지 14f)이 설치되고, 각 회의 단말(14a 내지 14f)이 서로 접속되어 있다. 여기에서, 각 회의 단말(14a 내지 14f)은 전자 회의에서 취급되는 화상 정보나 음성 정보를 관리하기 위한 컴퓨터 등의 정보 처리 단말이다. 또한, 음성 정보에 대해서는 본 발명의 취지가 되는 정보가 아니기 때문에, 이후, 설명을 생략한다.

전자 회의에서, 어떤 회의실(12a)에서 화면 표시된 화상 정보는 통신 회선을 통하여 다른 회의실(12b 내지 12f)로 송신된다. 다른 회의실(12b 내지 12f)은 화상 정보를 수신하고, 화상 정보를 화면(16b 내지 16f)에 표시한다. 이와 같이, 각 회의실(12a 내지 12f)의 화면(16a 내지 16f)에 공통의 화상 정보가 표시되고, 각 회의실(12a 내지 12f)에 있는 참가자가 화상 정보를 공유할 수 있다.

각 회의 단말(14a 내지 14f)은 복수의 화면을 구비하고, 복수의 화상 정보를 동시에 표시하는 것이 가능하다. 그러나, 모든 회의 단말(14a 내지 14f)이 갖는 화면수가 동일하다고는 할 수 없다.

송신측의 회의 단말이 송신하는 화상 정보의 수보다, 수신측의 회의 단말이 갖는 화면수가 많으면 화상 정보 모두를 동시에 표시하는 것이 가능하지만, 송신되는 화상 정보의 수가 수신측의 회의 단말이 갖는 화면수보다 많을 경우, 수신측의 회의 단말은 송신된 화상 정보 모두를 동시에 표시할 수 없다.

그래서 본 실시예에서는 수신측의 회의 단말에, 송신측의 회의 단말이 송신하는 화상 정보로부터 화면 표시하는 화상 정보를 선택하게 하기 위한 기준을 제공하도록 했다.

수신측의 회의 단말에, 화면에 표시하는 화상 정보를 선택하게 하는 기준에 대하여, 도 2를 사용하여 설명한다. 또한, 각 회의 단말(14a 내지 14f)은 공통의 구성이지만, 설명의 편의상, 화상 정보를 송신하는 회의 단말을 로컬 회의 단말(14a)이라 하고, 다른 회의 단말(14b 내지 14f)을 대표하고, 화상 정보를 수신하는 회의 단말을 리모트 회의 단말(14b)로서 설명한다. 그리고, 로컬 회의 단말(14a)은 4개의 화면(16a)(이후, 설명의 편의상 화면(20)으로서 설명한다)을 구비하고, 리모트 회의 단말(14b)은 2개의 화면(16b)(이후, 설명의 편의상 화면(30)으로서 설명한다)을 구비하는 것으로 한다. 도 2는 로컬 회의 단말(14a)이 어떤 회의실(12a)에서 행해지고 있는 프리젠테이션의 흐름을 나타낸 도면이다.

회의실(12a)에는 4개의 화면(20a 내지 20d)이 있고, 발표자는 이 화면을 이용하여 발표를 행한다. 또한, 도면에 나타낸 좌측의 화면에서부터 화면(20a), 화면(20b), 화면(20c), 화면(20d)으로 한다. 발표자는 프리젠테이션을 시작하고 나서부터 종료할 때까지의 사이에, 4개의 화면에 표시된 표시 화상을 설명에 사용한다. 그러나, 발표자는 설명할 때에 모든 표시 화상을 동시에 사용하고 있는 것은 아니다. 보통, 발표자는 1개의 표시 화상을 사용하여 설명한다.

예를 들면, 프리젠테이션의 개시(開始)시에, 발표자는 프리젠테이션의 의제에 대하여 설명하기 위하여, 의제가 표시되어 있는 화면(20a)의 옆으로 이동하고, 화면(20a)에 표시된 표시 화상을 이용하면서 의제를 설명한다(도 2의 100). 계속하여 프리젠테이션의 본제에 대하여 설명하기 위하여, 발표자는 화면(20b)의 우측으로 이동하고, 화면(20b)의 표시 화상을 이용하면서 설명한다. 또한, 지시봉이나 포인팅 디바이스를 이용하여 화면(20b)의 특정 지점을 지시하면서 설명할 수도 있다(도 2의 101). 발표의 도중에, 본제의 설명을 보충하기 위하여, 발표자는 보충 내용이 표시되어 있는 화면(20c)으로 몸의 방향을 바꿔, 화면(20c)에 표시되어 있는 표시 화상을 이용하면서 설명한다(도 2의 102). 발표자는 표시 화상에 기입하는 경우도 있다(도 2의 103).

이와 같이, 발표자가 설명에 사용하는 화면은 프리젠테이션의 진행에 따라서 변화한다. 발표자가 표시 화상을 사용하여 설명할 경우, 발표자는 설명에 사용하고 있는 표시 화상이 표시되는 화면에 대하여 어떤 행위를 하게 된다. 한편, 발표자는 그 외의 화면을 방치하고 있다.

발표자가 있는 화면에 대하여 아무것도 하지 않고나서 경과된 시간이 길면, 그 화면에 표시되어 있는 표시 화상은 그때 설명하려고 하는 내용에 대하여 관계가 약하다고 할 수 있다. 그래서, 발표자가 화면에 대하여 아무것도 하지 않고나서 경과된 시간의 길이를 리모트 회의 단말(14b)의 표시 화면(30a, 30b)에 화상 정보를 표시하게 할지의 여부의 판단 기준이 되는 우선도를 설정하기 위한 기준으로서 이용한다.

다음에, 리모트 회의 단말(14b)로 송신된 4개의 화상 정보로부터, 리모트 회의 단말(14b)이 2개의 표시 화면에 표시하는 화상 정보 및 다른 화상 정보와 다른 형태로 표시하는 화상 정보를 선택하는 방법에 대하여 도 3을 사용하여 설명한다. 도 3은 로컬 회의 단말(14a)로부터 리모트 회의 단말(14b)로 송신되는 송신 정보(18)의 데이터 구성의 개요를 나타낸 도면이다.

송신 정보(18)는 로컬 회의 단말(14a)에 표시하는 화면마다 존재한다. 각 송신 정보(18a 내지 18d)는 화면ID(22), 화상 정보(24), 우선도 정보(26), 포커스 정보(28)를 포함한다.

화면ID(22)는 로컬 회의 단말(14a)에서 표시되는 화면(20)에 대응하는 식별자로서, 각 화면(20a 내지 20d)에 고유한 화면ID(22a 내지 22d)가 할당된다. 화상 정보(24)는 화면ID(22)에서 특정되는 화면(20)에서 표시된 화상 정보이다. 우선도 정보(26)는 화상 정보(24)를 리모트 회의 단말(14b)에서 화면 표시할지의 여부의 판단 기준이 되는 정보이다. 또한, 본 실시예에서는 우선도 정보(26)의 값이 작을수록, 화면ID(22)에 대응하는 화상 정보(24)는 리모트 회의 단말(14b)에서 화면 표 시될 가능성이 높은 것을 나타내고 있다. 포커스 정보(28)는 로컬 회의 단말(14a)에서, 화면(20)에 표시된 화상 정보(24)가 발표자가 설명에 사용하고 있는 화상 정보인지의 여부를 나타내는, 화상 사용의 유무에 관한 정보이다. 포커스 정보(28)가 「1」이면 화상 정보는 설명에 사용되고 있는 것을 나타내고, 「0」이면 화상 정보는 설명에 사용되고 있지 않은 것을 나타낸다.

로컬 회의 단말(14a)은 각 화면ID(22a 내지 22d)에 화상 정보(24), 우선도 정보(26) 및 포커스 정보(28)를 대응시킴으로써 각 송신 정보(18a 내지 18d)를 생성하여, 리모트 회의 단말(14b)로 송신한다. 리모트 회의 단말(14b)은 각 송신 정보(18a 내지 18d)를 수신하고, 각 화면ID(22a 내지 22d)에 대응하는 각 우선도 정보(26a 내지 26d)에 의거하여 리모트 회의 단말(14b)의 화면(30)에 표시하는 화상 정보를 선택한다. 또한, 포커스 정보(28)가 「1」인 화면ID(22)에 대응하는 송신 정보(18)의 화상 정보(24)를 다른 화상 정보(24)와 다른 형태로 화면 표시한다. 예를 들면, 화상 정보(24)를 화면의 가장자리를 채색하듯이 일정 폭의 색의 화상과 함께 화상 정보(24)를 표시한다.

일례를 들어서 리모트 회의 단말(14b)에 의한 화상 정보(24)의 선택 방법에 대하여 설명한다. 각 화면ID(22a 내지 22d)에 대응하는 우선도 정보(26a 내지 26d)가 「3, 1, 2, 3」과 같은 송신 정보(18)를 로컬 회의 단말(14a)이 생성하고, 리모트 회의 단말(14b)로 송신한다고 가정한다. 리모트 회의 단말(14b)은 각 송신 정보(18a 내지 18d)로부터, 우선도 정보(26a 내지 26d)의 값이 작은 송신 정보(18)를 리모트 회의 단말(14b)의 화면수만큼 선택한다. 상술한 송신 정보(18)를 우선 도 정보(26)의 값이 작은(우선도가 높은) 순으로 나열하면, 화면ID(22)은 화면ID(22b)(우선도 정보=1), 화면ID(22c)(우선도 정보=2), 화면ID(22a)(우선도 정보=3), 화면ID(22d)(우선도 정보=3)의 순으로 다시 나열할 수 있다. 리모트 회의 단말(14b)은 2개의 표시 화면(30a, 30b)을 구비하고 있기 때문에, 이들 화면에 화면ID(22b)와 화면ID(22c)에 대응하는 화상 정보(24)를 표시한다. 또한, 리모트 회의 단말(14b)은 화면ID(22b)에서 식별되는 송신 정보(18b)의 포커스 정보(28)가 「1」인 것을 검출하고, 화상 정보(24b)를 다른 것과 다른 형태로 표시한다.

이와 같이, 리모트 회의 단말(14b)이 화면(30)에 표시하는 화상 정보(24)를 선택하기 위해서는, 로컬 회의 단말(14a)이 각 화상 정보(24a 내지 24d)에 대하여, 리모트 회의 단말(14b)에서 화상 정보(24)를 화면 표시할지의 여부의 기준이 되는 우선도 정보(26a 내지 26d)를 할당하고, 리모트 회의 단말(14b)로 송신한다. 리모트 회의 단말(14b)은 각 우선도 정보(26a 내지 26d)에 의거하여 우선도 정보(26)의 값이 작은(우선도가 높은) 순으로 리모트 회의 단말(14b)의 화면수만큼 화상 정보(26)를 선택한다. 이상에서, 본 실시예에서의 개요의 설명을 종료한다.

계속하여, 본 실시예에서의 로컬 회의 단말(14a) 및 리모트 회의 단말(14b) 의 구성에 대해서 도 4를 사용하여 설명한다. 도 4는 로컬 회의 단말(14a) 및 리모트 회의 단말(14b)의 구성을 나타낸 블럭도이다. 로컬 회의 단말(14a)은 표시 제어 처리부(40), 행위 검출부(48), 포커스 결정 처리부(52), 프라이오리티 결정부(54), 송신 정보 생성부(56), 통신 처리부(60)를 구비한다. 한편, 리모트 회의 단말(14b)은 통신 처리부(61), 표시 제어 처리부(62)를 구비한다. 그리고, 표시 제 어 처리부(62)는 화면 할당 처리부(64), 포커스 할당 처리부(66), 표시 상태 유지부(68)를 구비한다.

또한, 본 실시예에서, 로컬 회의 단말(14a)과 리모트 회의 단말(14b)은 동일한 구성이기 때문에, 도 4의 블럭도에서 구성을 정렬하여 기재하고 있다. 그리고, 정보의 흐름의 차이를 화살표의 표기에 의해 나타내고 있다. 리모트 회의 단말(14b)과 로컬 회의 단말(14a)은 설명의 편의상, 송신 정보(18)의 송신측 단말과 수신측 단말로 분류한 것에 지나지 않고, 리모트 회의 단말(14b)으로부터 로컬 회의 단말(14a)로 송신 정보(18)를 송신하는 것도 가능하다.

표시 제어 처리부(40)는 복수의 화면(20a 내지 20d)을 구비하여 화상 정보를 표시하는 기능을 갖는다. 표시 제어 처리부(40)는 외부의 기억부(41)와 접속되고, 화면 표시하는 자료 데이터나 주석 데이터(이후, 이를 합해서 자료 데이터라고 한다)를 취득한다.

각 화면(20a 내지 20d)은(이후, 대표하여 화면(20a)이라 한다), 표시 제어 처리부(40)로부터 송신되는 화상 정보를 표시하는 기능을 구비한다. 또한 화면(20a)은 펜 디바이스(44)의 펜 끝이 화면(20a)에 접촉한 경우에, 화면(20a)을 식별하는 정보인 화면ID(22)와, 펜 디바이스(44)의 펜 끝이 접촉한 위치를 표시하는 좌표 정보와, 사용된 펜 디바이스(44)의 색의 종류를 나타내는 색식별 정보를 표시 제어 처리부(40)로 송신하는 기능을 구비한다.

표시 제어 처리부(40)는 화면ID(22), 좌표 정보 및 색식별 정보를 수신하면, 화면ID(22)에 의해 특정되는 화면(20a)에서의 좌표 정보에 의해 특정되는 위치에, 색식별 정보에 의해 특정되는 색의 화상을 표시한다.

표시된 색의 화상은 펜 디바이스(44)의 펜 끝이 이동한 후에도 그대로 남는다. 그 때문에, 발표자가 펜 디바이스(44)의 펜 끝을 화면에 접촉시키면서 펜 디바이스(44)를 이동시킨 경우, 펜 끝이 이동한 궤적이 화면에 남는다. 그 때문에, 발표자는 펜 디바이스(44)를 사용하여 화면(20a)에 기입할 수 있다.

표시 제어 처리부(40)는 자료 데이터와, 발표자가 펜 디바이스(44)를 사용하여 기입함으로써 추가된 화상 정보(이후, 추기 화상 정보라고 한다)와 함께 각 화면(20a 내지 20d)에 표시한다. 본 실시예에서 로컬 회의 단말(14a)이 리모트 회의 단말(14b)로 송신하는 화상 정보(24)는 자료 데이터와 추기 화상 정보를 겹쳐 표시한 정보인 것을 가리킨다. 표시 제어 처리부(40)는 각 화면(20a 내지 20d)에 표시한 화상 정보(24a 내지 24d)를 각 화면(20a 내지 20d)의 화면ID(22)에 대응시켜 송신 정보 생성부(56)로 송신한다. 또한, 표시 제어 처리부(40)는 각 화면(20a 내지 20d)에 표시한 각 추기 화상 정보를 각 화면(20a 내지 20d)의 화면ID(22a 내지 22d)에 대응시켜 행위 검출부(48)로 송신한다

행위 검출부(48)는 카메라(50)에 접속된다. 카메라(50)는 회의실(12a)에 설치되고, 카메라(50)의 프레임내에 전체 화면(20a 내지 20d) 및 발표자를 반영하여 촬상(撮像) 데이터를 생성한다. 행위 검출부(48)는 카메라(50)로부터 촬상 데이터를 수신하고, 촬상 데이터를 화상 해석함으로써, 발표자가 행위를 하고 있는 행위 화면과 발표자의 행위의 종류를 나타내는 행위 종류를 특정하는 기능을 갖는다. 또한, 행위 검출부(48)는 표시 제어 처리부(40)로부터 추기 화상 정보를 수신하고, 추기 화상 정보를 이용하여, 행위 화면과 행위 종류를 특정하는 기능을 갖는다. 행위 검출부(48)는 내부에 기억부 ml(도시 생략)를 구비하고 있고, 행위 화면의 화면ID(22)와 행위 종류를 기억부 m1에 유지한다. 또한, 행위 검출부(48)는 행위 화면의 화면ID(22)와 화면ID(22)에 대응하는 행위 종류의 정보를 포커스 결정 처리부(52) 및 프라이오리티 결정부(54)로 송신한다.

포커스 결정 처리부(52)는 발표자가 설명에 사용하고 있는 화상 정보(24)를 표시하고 있는 화면(20)을 특정하는 포커스 정보(28)의 값을 결정한다. 포커스 결정 처리부(52)는 행위 검출부(48)로부터 행위 화면의 화면ID(22)와 행위 종류를 수신하고, 이들 정보를 기초로 발표자가 설명에 사용하고 있는 화상 정보(24)를 식별하기 위한 포커스 정보(28)를 생성한다. 포커스 결정 처리부(52)는 내부에 기억부 m2(도시 생략)를 구비하고 있고, 각 화면ID(22a 내지 22d)와 대응하는 포커스 정보(28)를 기억부 m2에 유지한다. 또한, 포커스 결정 처리부(52)는 각 화면ID(22a 내지 22d)와 각 화면ID(22a 내지 22d)에 대응하는 포커스 정보(28)를 송신 정보 생성부(56)로 송신한다.

프라이오리티 결정부(54)는 화상 정보(24)를 리모트 회의 단말(14b)에서 화면 표시하게 할지의 여부를 결정하는 기준이 되는 우선도 정보(26)의 값을 결정한다. 프라이오리티 결정부(54)는 행위 검출부(48)로부터 행위 화면의 화면ID(22)와 행위 종류를 수신하고, 이들 정보로부터, 각 화면(20a 내지 20d)에 표시되는 각 화상 정보(24a 내지 24d)에 대하여, 리모트 회의 단말(14b)이 화상 정보(24)를 화면 표시할지의 여부의 판단 기준이 되는 우선도를 나타내는 우선도 정보(26)를 생성한 다. 프라이오리티 결정부(54)는 화면ID(22), 우선도 정보(26), 이벤트 종류(25)(상세한 설명은 후술한다), 이벤트 수신 시각(27)(상세한 설명은 후술한다)을 프라이오리티 결정부(54)의 내부에 설치된 기억부 m3(도시 생략)에 각 화면ID(22a 내지 22d)에 대응시켜 유지하는 동시에, 동일한 정보를 송신 정보 생성부(56)로 송신한다.

송신 정보 생성부(56)는 리모트 회의 단말(14b)로 송신하는 송신 정보(18)를 생성한다. 송신 정보 생성부(56)는 포커스 결정 처리부(52)로부터 포커스 정보(28)를 수신하고, 프라이오리티 결정부(54)로부터 우선도 정보(26)를 수신하고, 표시 제어 처리부(40)로부터 화상 정보(24)를 수신하고, 수신한 이들 정보를 따라서 송신 정보(18)를 생성하여, 통신 처리부(60)로 송신한다. 송신 정보 생성부(56)는 내부에 기억부 m4(도시 생략)를 구비하고, 기억부 m4에, 각 화면ID(22a 내지 22d)에 대응시켜, 화면 역할(23), 우선도 정보(26), 이벤트 종류(25), 이벤트 수신 시각(27)을 유지한다. 송신 정보 생성부(56)는 기억부 m4에 유지된 정보와 표시 제어 처리부(40)로부터 수신한 화상 정보(24)를 기초로, 송신 정보(18)를 생성한다.

통신 처리부(60)는 송신 정보 생성부(56)로부터 송신 정보(18)를 수신하고, 리모트 회의 단말(14b)로 송신한다.

또한, 로컬 회의 단말(14a)에서의 각부의 기능은 로컬 회의 단말(14a)에 내장된 어플리케이션(application)과 하드웨어 자원이 협동하여 동작함으로써 실현된다.

계속하여, 리모트 회의 단말(14b)의 구성에 대해서 설명한다.

리모트 회의 단말(14b)의 통신 처리부(61)는 로컬 회의 단말(14a)로부터 송신 정보(18)를 수신하고, 송신 정보(18)를 표시 제어 처리부(62)로 송신한다.

표시 제어 처리부(62)는 리모트 회의 단말(14b)이 갖는 화면(30)에 화상 정보(24)를 표시한다. 표시 제어 처리부(62)는 복수(본 실시예에서는 2개로 한다)의 화면(30a, 30b), 화면 할당 처리부(64), 포커스 할당 처리부(66), 표시 상태 유지부(68)를 구비한다.

표시 제어 처리부(62)는 통신 처리부(61)로부터 송신 정보(18)를 수신하고, 화면 할당 처리부(64)에 의해 결정된 화면 할당에 따라 화상 정보(24)를 표시하고, 포커스 할당 처리부(66)에 의해 결정된 화상 정보(24)를 다른 것과 다른 형태로 표시한다.

화면 할당 처리부(64)는 리모트 회의 단말(14b)의 각 화면(30a, 30b)에, 수신한 송신 정보(18)에 포함되는 화면ID(22)를 할당한다. 화면 할당 처리부(64)는 내부에 기억부 m5(도시 생략)를 구비하고, 리모트 회의 단말(14b)의 각 화면(30a, 30b)을 특정하기 위한 식별자인 리모트 화면ID(32)와, 리모트 회의 단말(14b)의 화면(30)에 표시하게 하는 화상 정보(24)를 포함하는 송신 정보(18)의 화면ID(22)를 대응시켜 유지한다.

포커스 할당 처리부(66)는 내부에 기억부 m6(도시 생략)를 설치하고 있고, 기억부 m6에 리모트 화면ID(32)과, 화상 정보(24)를 다른 것과 다른 형태로 표시하게 할지의 여부를 나타내는 포커스 정보(28)를 대응시켜 유지한다.

표시 상태 유지부(68)는 각 리모트 화면ID(32a, 32b)에 대응하는 송신 정보 (18)에 포함되는 화면ID(22), 송신 정보(18)에 포함되는 포커스 정보(28)를 유지하는 기억부이다.

표시 제어 처리부(62)는 리모트 회의 단말(14b)의 각 화면(30a, 30b)에, 로컬 회의 단말(14a)로부터 송신된 화상 정보(24)를 표시한다. 그 때, 표시 상태 유지부(68)의 정보를 기초로 화상 정보를 선택하고, 화면(30)에 표시한다.

또한, 리모트 회의 단말(14b)에서의 각 구성 요소는 리모트 회의 단말(14b)에 내장된 어플리케이션과 하드웨어 자원이 협동하여 동작함으로써 실현된다.

이상에서 리모트 회의 단말(14b)의 구성에 관한 설명을 종료한다.

여기에서, 로컬 회의 단말(14a)로부터 리모트 회의 단말(14b)로 송신되는 송신 정보(18)의 데이터 구성에 대해서 도 10을 사용하여 설명한다. 도 10에 나타낸 송신 정보(18)는 도 3에 나타낸 송신 정보(18)를 상세하게 한 정보이다. 그 때문에, 동일한 역할을 갖는 정보에 관해서는 동일한 부호로 기재하고 있다. 송신 정보(18)는 화면ID(22), 화상 정보(24), 우선도 정보(26), 포커스 정보(28), 화면 역할(23), 이벤트 종류(25), 이벤트 수신 시각(27)으로 구성된다.

화면ID(22)는 로컬 회의 단말(14a)에서 표시되는 각 화면(20a 내지 20d)에 대응하는 식별자이다. 본 실시예에서는 로컬 회의 단말(14a)의 화면수가 4개 있고, 각 화면(20a 내지 20d)에 대응하는 고유한 화면ID(22a 내지 22d)가 할당된다.

화면 역할(23)은 화면ID(22)에 의해 특정되는 화면이 프리젠테이션을 할때, 중심적으로 사용되는 화면인지의 여부를 나타내는 정보이다. 그 화면이 프리젠테이션을 할때 중심적으로 사용되는 화면(이후 메인 화면이라고 한다)이면 「1」, 그 이외의 화면(이후 서브 화면이라고 한다)이면 「0」이다. 각 화면ID(22a 내지 22d)에 대응하는 화면 역할(23)의 값은 미리 설정된 값에 고정된다.

우선도 정보(26)는 화면ID(22)에 대응하는 화상 정보(24)를 리모트 회의 단말(14b)에서 화면 표시할지의 여부의 판단 기준이 되는 정보이다. 우선도 정보(26)는 우선도가 높은 순서로부터 「1,2,3, nil」의 값을 얻을 수 있다. 본 실시예에서 우선도 정보(26)의 값이 작은 송신 정보(18)의 화상 정보(24)만큼, 리모트 회의 단말(14b)에서 우선적으로 화면 표시되는, 즉 그 화상 정보(24)의 우선도가 높은 것을 나타내고 있다. 우선도 정보(26)에서 「nil」은 값이 확정되어 있지 않는 상태를 나타내고 있다.

포커스 정보(28)는 로컬 회의 단말(14a)에서, 화면ID(22)에 의해 특정되는 화면(20)의 화상 정보(24)가 발표자가 사용하고 있는 화상 정보(24)인지의 여부를 나타내는 정보이다. 포커스 정보(28)의 값이 「0」인 경우, 발표자가 그 화상 정보(24)를 사용하고 있지 않는 것을 나타내고, 「1」인 경우, 발표자가 그 화상 정보(24)를 사용하고 있는 것을 나타낸다.

행위 종류(25)는 화면(20)에 대한 발표자의 행위의 종류를 나타내는 정보이고, 상술한 행위 종류와 동일 의미이다. 이 정보는 발표자가 화면(20)에 대하여 몸을 향한 것을 나타내는 「몸의 방향」, 발표자가 화면(20)에 대하여 기입을 행한 것을 나타내는 「기입」, 발표자가 화면(20)의 일부를 지시한 것을 나타내는 「지시」등의 발표자의 행위 종류의 이외에, 화면(20)의 표시 내용이 변경된, 즉 페이지가 전환된 것을 나타내는 「화면 표시」, 우선도가 「1」이 되고나서 발표자가 화면(20)에 대하여 아무것도 하지 않은 상태로 시간 △t1이 경과된 것을 나타낸 「△t1경과」, 우선도가 「2」가 되고나서 발표자가 화면(20)에 대하여 아무것도 하지 않은 상태로 시간 △t2이 경과된 것을 나타낸 「△t2경과」의 정보를 얻을 수 있다.

이벤트 수신 시각(27)은 상기에 나타낸 이벤트 종류(25)를 프라이오리티 결정부(92)가 수신한 시각을 나타낸다. 이 수치가 클수록, 프라이오리티 결정부(92)가 행위 종류(25)를 수신한 시각이 느린 것을 나타낸다.

화상 정보(24)는 화면ID(22)에 의해 특정되는 화면(20)에 표시된 화상의 정보이다. 이상에서 송신 정보(18)의 데이터 구성에 대해서 설명을 종료한다.

계속하여, 로컬 회의 단말(14a) 및 리모트 회의 단말(14b)에서의 처리의 상세 및 처리의 흐름에 대하여 설명한다.

표시 제어 처리부(40)는 각 화면(20a 내지 20d)에 화상 정보를 표시한다. 표시 제어 처리부(40)는 송신 정보 생성부(56)에 각 화면(20a 내지 20d)의 화면ID(22)와, 각 화면(20a 내지 20d)에 표시한 화상 정보(24)를 대응시켜 송신 정보 생성부(56)로 송신한다. 또한, 표시 제어 처리부(40)는 각 화면(20a 내지 20d)에 대응하는 화면ID(22)와, 각 화면(20a 내지 20d)에 표시한 추기 화상 정보를 대응시켜, 행위 검출부(48)로 송신한다.

행위 검출부(48)가 발표자의 행위를 검출하는 방법은 2개 있고, 각각의 방법에 대해서 설명한다.

제 1 방법은 로컬 회의 단말(14a)에 접속된 카메라(50)로부터 송신되는 촬상 데이터를 해석함으로써, 발표자의 행위를 검출하는 방법이다. 이 방법에 대해서 도 5의 플로차트를 사용하여 설명한다.

행위 검출부(48)는 카메라(50)로부터 촬상 데이터를 취득하고(S1), 촬상 데이터를 화상 해석하여, 발표자의 행위 종류 조정 및 행위 화면을 특정한다(S2).

행위 검출부(48)가 행위 종류와 행위 화면을 특정하는 방법은 이하와 같다. 행위 검출부(48)는 수신한 촬상 데이터를 기초로 화상 해석을 행함으로써, 각 화면(20a 내지 20d)의 위치 및 형상, 발표자의 위치 및 형상 및 각 화면(20a 내지 20d)과 발표자 이외의 배경을 식별하고, 위치 정보 및 화상 정보로서 유지한다(S3). 행위 검출부(48)는 화면(20) 및 발표자의 위치 정보로부터, 각 화면(20a 내지 20d)에 대한 발표자의 상대적인 위치를 검출한다(S4).

계속하여, 행위 검출부(48)는 발표자 형상의 정보를 기초로, 발표자의 몸의 방향을 검출한다. 예를 들면, 발표자 형상의 화상 정보로부터 발표자의 코의 위치와, 몸의 좌우의 양단부의 위치를 검출하고, 양단부에 대한 코의 상대적인 위치로부터 몸의 방향을 검출한다(S5).

행위 검출부(48)는 발표자 형상의 화상 정보를 기초로, 발표자의 행위 종류를 검출한다(S6). 그리고, 행위 검출부(48)는 각 화면에 대한 발표자의 상대적인 위치와, 발표자의 몸의 방향으로부터, 행위 화면을 특정한다(S7). 예를 들면, 도 2의 102에 나타낸 촬상 데이터가 취득된 경우, 행위 검출부(48)는 화상 해석에 의해, 발표자가 화면(20b 및 20c)의 사이에 있는 것, 및 발표자는 카메라(50)로부터 봤을 때 우측에 몸을 향하고 있는 것을 검출하고, 검출한 정보로부터, 행위 화면이 「화면(20c)」이고, 행위 종류가 「몸의 방향」인 것을 검출한다.

행위 검출부(48)는 기억부 m1로부터, 검출한 행위 화면의 화면ID(22)에 대응하는 행위 종류를 취득한다(S8).

그리고, 화상 해석에 의해 얻어진 행위 종류와, 기억부 m1로부터 취득한 행위 종류가 일치하는지의 여부를 판단한다. 즉, S2의 처리에 의해, 즉 촬상 데이터의 화상 처리에 의해 얻어진 행위 종류와, S8의 처리에 의해, 즉 이미 기억되어 있는 직전의 행위 종류가 일치하는지의 여부를 판단한다(S9).

서로의 행위 종류가 다른 경우(S9/NO), 행위 검출부(48)는 기억부 m1에 대하여, 행위 화면에 대응하는 행위 종류의 정보를 화상 해석의 결과 얻어진 행위 종류로 갱신한다(S10). 그리고, 행위 화면의 화면ID(22)와 행위 화면에 대응하는 행위 종류의 정보를 포커스 결정 처리부(52)와 프라이오리티 결정부(54)로 송신한다(S11). 한편, 서로의 행위 종류가 일치할 경우(S9/YES), 행위 검출부(48)는 S10의 처리를 실행하지 않고, 즉 기억부 m1의 정보를 갱신하지 않고, S11의 처리를 실행한다.

계속하여, 제 2 방법에 대하여, 도 6의 플로차트를 사용하여 설명한다. 도 6의 플로차트는 표시 제어 처리부(40)로부터 행위 검출부(48)로 송신된 추기 화상 정보를 해석함으로써, 발표자의 행위를 검출하는 처리의 흐름을 나타낸 도면이다.

행위 검출부(48)는 표시 제어 처리부(40)로부터 화면ID(22)와 화면ID(22)에 대응한 추기 화상 정보를 정기적으로 수신한다. 또한, 행위 검출부(48)는 행위 검출부(48)의 내부의 기억부 m1로부터, 화면ID(22)에 대응하는 추기 화상 정보, 즉 직전에 수신하고 있던 추기 화상 정보를 취득한다(S20).

그리고, 기억부 m1로부터 취득한 추기 화상 정보와, 표시 제어 처리부(40)로부터 수신한 추기 화상 정보가 일치하는지의 여부를 판단한다(S21).

양쪽의 추기 화상 정보가 다른 경우(S21/NO), 기억부 m1에 대하여, 화면ID(22)에 대응하는 행위 종류를 「기입」으로 갱신한다(S22). 그리고, 기억부 m1에 대하여, 화면ID(22)에 대응하는 추기 화상 정보를 표시 제어 처리부(40)로부터 수신한 추기 화상 정보로 갱신한다(S23). 그리고, 기억부 m1로부터 「기입」 행위가 있던 화면(20)의 화면ID(22)와, 그 화면ID(22)에 대응하는 행위 종류를 취득하고, 포커스 결정 처리부(52)와 프라이오리티 결정부(54)로 송신한다. 즉, 화면ID(22)에 의해 특정되는 화면(20)에 대하여 기입이 되었다고 판단하고, 기억부 m1에 유지되어 있는 정보를 개서(改書)한 후에, 행위 화면의 화면ID(22) 및 행위 종류를 송신한다(S24). 한편, 양쪽의 추기 화상 정보가 일치할 경우(S21/YES), 행위 화면의 화면ID(22) 및 행위 종류의 정보를 송신하지 않고 처리를 종료한다.

이상에서와 같이, 행위 검출부(48)는 카메라(50)에서 송신되는, 화면 및 발표자를 반영한 촬상 데이터 및 표시 제어 처리부(40)에서 송신되는 추기 화상 정보로부터, 발표자의 행위를 검출한다.

포커스 결정 처리부(52)의 처리의 흐름에 대하여, 도 7을 사용하여 설명한다. 도 7은 포커스 결정 처리부(52)에서의 처리의 흐름을 나타낸 플로차트이다. 포커스 결정 처리부(52)는 행위 검출부(48)로부터 행위 화면의 화면ID(22)와 행위 종류를 취득하면, 수신한 행위 종류가 「화면 표시」인지의 여부를 판단한다(S30). 행위 종류가 「화면 표시」이면(S30/YES), 포커스 결정 처리부(52)는 기억부 m2에 유지되어 있는 정보를 갱신하지 않고 S32의 처리를 실행한다.

행위 종류 정보가 「화면 표시」이외의 것이면(S30/NO), 기억부 m2에 대하여, 수신한 화면ID(22)에 대응하는 포커스 정보(28)를 「1」로, 그 이외의 화면ID(22)에 대응하는 포커스 정보(28)를 「0」으로 갱신한다(S31).

그리고, 포커스 결정 처리부(52)는 기억부 m2로부터 각 화면ID(22a 내지 22d) 및 각 화면ID(22a 내지 22d)에 대응하는 포커스 정보(28)를 취득하고, 송신 정보 생성부(56)로 송신한다(S32).

프라이오리티 결정부(54)의 처리의 흐름에 대하여, 도 8, 도 9를 사용하여 설명한다. 도 8은 프라이오리티 결정부(54)에 의한, 화상 정보의 우선도가 상승하는(우선도 정보(26)의 값이 저하되는) 경우의 처리의 흐름을 나타낸 플로차트이고, 도 9는 화상 정보의 우선도가 저하되는(우선도 정보(26)의 값이 상승하는) 경우의 처리의 흐름을 나타낸 플로차트이다. 프라이오리티 결정부(54)는 행위 검출부(48)로부터 행위 화면의 화면ID(22)와 행위 종류를 취득함으로써, 이하의 처리를 시작한다.

프라이오리티 결정부(54)에서 실행되는 화상 정보(24)의 우선도가 상승하는 (우선도 정보(26)의 값이 저하되는) 경우의 처리에 대하여 도 8을 사용하여 설명한다. 이 처리는 행위 검출부(48)로부터 행위 화면의 화면ID(22)와 행위 종류를 취득함으로써 개시된다.

프라이오리티 결정부(54)는 수신한 행위 종류가 「화면 표시」인지의 여부를 판단한다(S40). 행위 종류가 「화면 표시」인 경우(S40/YES), 기억부 m3에 대하여, 수신한 행위 화면의 화면ID에 대응하는 우선도 정보를, 화면 표시에 할당되어 있는 우선도 정보(26)의 값인 「2」로 갱신한다(S41). 한편, 행위 종류가 「화면 표시」가 아닐 경우(S40/NO), 행위 검출부(48)로부터 송신되는 행위 종류는 「기입」「몸의 방향」「지시」중 어느 것인 것으로 판단하고, 기억부 m3에 대하여, 수신한 행위 화면의 화면ID(22)에 대응하는 우선도 정보(26)를 「1」로 갱신한다(S42). 프라이오리티 결정부(54)는 기억부 m3에 대하여, 행위 종류를 수신한 시각을 이벤트 수신 시각(27)으로서 설정한다(S43). 또한, 프라이오리티 결정부(54)는 기억부 m3에 대하여 수신한 행위 종류를 이벤트 종류(25)로서 설정한다(S44). 계속하여, 프라이오리티 결정부(54)는 기억부 m3로부터 각 화면ID(22a 내지 22d)와 각 화면ID(22a 내지 22d)에 대응하는 우선도 정보(26)를 취득하고, 송신 정보 생성부(56)로 송신한다(S45).

프라이오리티 결정부(54)에 의한 우선도가 저하되는(우선도 정보(26)의 값이 상승하는) 경우의 처리에 대하여 도 9를 사용하여 설명한다. 도 9는 우선도 정보(26)를 감시하는 처리의 흐름을 나타낸 플로차트이다. 이 처리는 프라이오리티 결정부(54)에서 정기적으로 실행된다.

프라이오리티 결정부(54)는 기억부 m3로부터 각 화면ID(22a 내지 22d)의 우선도 정보(26)를 취득한다(S50). 프라이오리티 결정부(54)는 취득한 우선도 정보(26)의 값을 판단하여 처리를 분기시킨다(S51).

우선도 정보(26)의 값이 「1」이면(S51/우선도 정보의 값=1), 프라이오리티 결정부(54)는 현재 시각 Tn을 취득한다. 현재 시각 Tn은 로컬 회의 단말(14a)의 시스템 정보에서 취득된다(S52). 계속하여, 프라이오리티 결정부(54)는 기억부 m3로부터, 이벤트 수신 시각 Tx을 취득한다. 이벤트 수신 시각 Tx은 프라이오리티 결정부(54)가 행위 검출부(48)로부터 행위 화면 및 행위 종류의 정보를 수신한 시각을 나타내고 있다(S53). 그리고, 프라이오리티 결정부(54)는 현재 시각 Tn과 이벤트 수신 시각 Tx의 차(差)인 경과 시간(Tn-Tx)을 계산하고, 경과 시간과 제 1 우선도 저하 시간 △t1을 비교한다(S54). 경과 시간(Tn-Tx)이 제 1 우선도 저하 시간 △t1보다 큰 경우(S54/YES), 프라이오리티 결정부(54)는 기억부 m3에 유지되어 있는, 수신한 행위 화면의 화면ID(22)에 대응하는 우선도 정보(26)의 값을 1단계 상승시켜 「2」로 갱신한다. 즉 우선도를 1단계 내린다(S55). 또한, 이벤트 수신 시각 Tx을 현재 시각 Tn의 값에, 이벤트 종류를 「△t1경과」로 갱신한다(S56). 경과 시간(Tn-Tx)이 제 1 우선도 저하 시간 △t1보다 작은 경우(S54/NO), 프라이오리티 결정부(54)는 기억부 m3에 기억된 정보를 갱신하지 않고, S65의 처리를 실행한다.

우선도 정보(26)의 값이 「2」인 경우(S51/우선도 정보의 값=2), 프라이오리티 결정부(54)는 현재 시각 Tn을 취득한다(S60). 계속하여, 기억부 m3로부터, 수신한 행위 화면의 화면ID(22)에 대응하는 이벤트 수신 시각 Tx를 취득한다(S61). 그리고, 현재 시각 Tn으로부터 이벤트 수신 시각 Tx의 차인 경과 시간(Tn-Tx)을 계산하고, 경과 시간과 제 2 우선도 저하 시간 △t2을 비교한다(S62). 경과 시간이 제 2 우선도 저하 시간 △t2보다 큰 경우(S62/YES), 프라이오리티 결정부(54)는 기 억부 m3에 대하여, 수신한 행위 화면의 화면ID(22)에 대응하는 우선도 정보(26)의 값을 「3」으로 갱신한다(S63). 또한, 이벤트 수신 시각 Tx을 현재 시각 Tn의 값에, 이벤트 종류(25)를 「△t2경과」로 갱신한다(S64). 경과 시간이 제 2 우선도 저하 시간 △t2보다 작은 경우(S62/NO), 프라이오리티 결정부(54)는 기억부 m3에 기억된 정보를 갱신하지 않고, S65의 처리를 실행한다.

우선도 정보(26)의 값이 그 이외인 경우(S51/우선도 정보의 값=1,2 이외), 프라이오리티 결정부(54)는 기억부 m3에 기억된 정보를 갱신하지 않고, S65의 처리를 실행한다.

이상의 우선도 정보(26)의 값에 따라 분기(分岐)한 처리 후, 프라이오리티 결정부(54)는 기억부 m3로부터, 각 화면ID(22a 내지 22d), 각 화면ID(22a 내지 22d)에 대응하는 우선도 정보(26), 이벤트 종류(25) 및 이벤트 수신 시각 Tx을 취득하고, 송신 정보 생성부(56)로 송신한다(S65).

송신 정보 생성부(56)는 포커스 결정 처리부(52)로부터 각 화면ID(22a 내지 22d) 및 대응하는 포커스 정보(28)를 수신하면, 기억부 m4에 유지되어 있는 포커스 정보(28)의 값을 수신한 포커스 정보(28)의 값으로 갱신한다. 송신 정보 생성부(56)는 프라이오리티 결정부(54)로부터 각 화면ID(22a 내지 22d) 및 대응하는 우선도 정보(26)를 수신하면, 기억부 m4에 유지되어 있는 우선도 정보(26)의 값을 수신한 우선도 정보(26)의 값으로 갱신한다.

송신 정보 생성부(56)는 표시 제어 처리부(40)로부터, 각 화면ID(22a 내지 22d) 및 대응하는 각 화상 정보(24a 내지 24d)를 정기적으로 수신한다. 그리고, 송신 정보 생성부(56)는 기억부 m4로부터, 각 화면ID(22a 내지 22d)와 대응하는 각 화면 역할(23a 내지 91d), 각 우선도 정보(26a 내지 26d), 각 포커스 정보(28a 내지 28d), 각 이벤트 종류(25a 내지 25d), 각 이벤트 수신 시각(27a 내지 27d)을 취득한다. 그리고, 송신 정보 생성부(56)는 이 정보에, 화면ID(22)이 일치하고 있는 화상 정보(24)를 추가하여 송신 정보(18)를 생성하고, 통신 제어 처리부(58)로 송신한다.

통신 제어 처리부(58)는 송신 정보 생성부(56)로부터 송신 정보(18)를 수신하고, 송신 정보(18)를 접속중의 리모트 회의 단말(14b)로 송신한다.

이상에서, 로컬 회의 단말(14a)의 구성 및 로컬 회의 단말(14a)이 실행하는 처리에 대해서 설명을 종료한다.

계속하여, 리모트 회의 단말(14b)에서 실행되는 처리에 대해서 설명한다.

통신 처리부(61)는 로컬 회의 단말(14a)로부터 송신 정보(18)를 수신하고, 송신 정보(18)를 표시 제어 처리부(62)로 송신한다.

화면 할당 처리부(64)에 의한 화면 할당의 방법을 도 11, 도 12의 플로차트를 사용하여 설명한다. 도 11은 리모트 회의 단말(14b)의 화면수에 따른 처리의 흐름을 나타낸 플로차트이다. 도 12는 로컬 회의 단말(14a)의 화면수가 리모트 회의 단말(14b)의 화면수보다 많은 경우에서의 화면 할당 처리부(64)에 의한 화면 할당 처리의 흐름을 나타낸 플로차트이다.

화면 할당 처리부(64)는 리모트 회의 단말(14b)의 화면수(=r)를 취득한다. 리모트 회의 단말(14b)의 화면수 r는 리모트 회의 단말(14b)에 미리 설정되어 있는 값이다. 화면 할당 처리부(64)는 통신 처리부(61)로부터 송신 정보(18)를 수신하고, 송신 정보(18)에 포함되는 화면ID(22)가 몇 종류 있는지에 의해, 로컬 회의 단말(14a)의 화면수(=n)를 취득한다(S70). 그리고, 리모트 회의 단말(14b)의 화면수 r와 로컬 회의 단말(14a)의 화면수 n를 비교한다(S71).

리모트 회의 단말(14b)의 화면수 r가 1개(r=1)인 경우, 리모트 회의 단말(14b)은 로컬 회의 단말(14a)에서 포커스 표시되어 있던 화면(20)의 화상 정보(24)를 리모트 회의 단말(14b)에서 표시한다. 그 때문에, 화면 할당 처리부(64)는 각 송신 정보(18a 내지 18d)로부터 포커스 정보(28)가 「1」인 화면ID(22)를 특정한다. 화면 할당 처리부(64)는 리모트 회의 단말(14b)의 화면(30)에, 특정된 화면ID(22)를 할당한다(S72).

리모트 회의 단말(14b)의 화면수 r가 로컬 회의 단말(14a)의 화면수 n보다 적은 경우(n>r)의 처리의 상세에 대해서는 후술한다(S75).

리모트 회의 단말(14b)의 화면수 r가 로컬 회의 단말(14a)의 화면수 n와 동일(n=r), 또는 많은(n<r) 경우의 처리는 이하와 같다. 미리, 송신 정보(18)에 포함되는 화면ID(22)에, 리모트 회의 단말(14b)의 화면(30)을 대응시켜 둔다. 그리고, 송신 정보(18)를 수신한 경우, 리모트 회의 단말(14b)은 미리 대응시킨 리모트 회의 단말(14b)의 화면(30)에, 화면ID(22a 내지 22d)를 할당한다(S73, S74).

이와 같이, 화면 할당 처리부(64)는 로컬 회의 단말(14a)로부터 송신되는 화상 정보(24)의 수와, 리모트 회의 단말(14b)의 화면수를 비교하고, 화면의 할당을 결정한다.

리모트 회의 단말(14b)의 화면수 r가 로컬 회의 단말(14a)의 화면수 n보다 적은 경우(r<n)의 처리의 상세에 대해여, 도 12를 사용하여 설명한다. 또한, 본 실시예에서는 로컬 회의 단말(14a)이 갖는 화면수 n는 4이고, 4개의 송신 정보(18a 내지 18d)가 송신된다. 또한, 리모트 회의 단말(14b)이 갖는 화면수 r는 2이며, 각각 화면(30a), 화면(30b)이라고 한다.

화면 할당 처리부(64)는 화면 역할(23)의 값이 「1」인 송신 정보(18)의 화면ID(22)를 취득한다. 본 실시예에서는 송신 정보(18c)의 화면 역할(23)의 값이 「1」이기 때문에, 화면 할당 처리부(64)는 화면ID(22c)를 취득한다. 또한, 화면 역할(23)의 값은 로컬 회의 단말(14a)에서 미리 각 송신 정보(18a 내지 18d)에 할당되어 있고, 리모트 회의 단말(14b)에서 그 값은 변화하지 않는다. 계속하여, 화면 할당 처리부(64)는 포커스 정보(28)의 값이 「1」인 화면ID(22)를 취득한다. 또한, 화면 할당 처리부(64)는 리모트 회의 단말(14b)에서의 메인 화면의 식별자인 리모트 화면ID(32)를 취득한다. 본 실시예에서는 리모트 회의 단말(14b)의 화면(30b)이 메인 화면으로 하고 있기 때문에, 화면 할당 처리부(64)는 화면(30b)에 대응하고 있는 리모트 화면ID(32b)를 취득한다(S80).

계속하여, 화면 할당 처리부(64)는 수신한 각 송신 정보(18a 내지 18d)를 소팅(sorting)하여 순서를 결정한다. 다시 나열할 때의 대소의 기준은 이하와 같다. 우선, 우선도 정보(26)의 값이 작을(우선도가 높을)수록 순위는 높다. 우선도 정보(26)의 값이 동일한 경우에는 이벤트 수신 시각(27)의 값이 클수록 순위는 높다. 즉, 이벤트의 발생이 뒤의 것일수록 순위는 높다. 이벤트 수신 시각(27)도 동일한 경우에는 이벤트 종류(25)의 값이 「기입」「몸의 방향」「지시」「화면 표시」「△t1경과」「△t2경과」의 순으로 순위는 높다. 이벤트 종류(25)도 동일한 경우는 미리 초기값으로서 설정해 둔 각 송신 정보(18a 내지 18d)의 순서에 따른다. 예를 들면, 화면ID(22)의 번호가 적은 것일수록 순위는 높다고 가정한다(S81).

다음에, 화면 할당 처리부(64)는 다시 나열한 각 송신 정보(18a 내지 18d)를 상위로부터 차례로, 리모트 회의 단말(14b)의 화면수(=r)만큼 추출한다(S82).

다음에, 추출한 송신 정보(18) 중에, 화면 역할(23)의 값이 「1」, 즉 로컬 회의 단말(14a)에서의 메인 화면의 송신 정보(18)가 S82에서 추출된 표시해야 할 리스트에 포함되어 있는지의 여부를 확인한다(S83).

추출된 송신 정보(18) 중에 화면 역할(23)의 값이 「1」인 송신 정보(18)가 포함되어 있는 경우(S83/YES), 그 송신 정보(18)에서의 우선도 정보(26)의 값이 3보다 작은지의 여부를 확인한다. 즉, 로컬 회의 단말(14a)에서의 메인 화면에 표시중의 화상 정보(24)의 우선도 정보(26)를 조사한다(S84). 한편, 화면 역할(23)의 값이 「1」인 송신 정보(18)가 포함되어 있지 않을 경우(S83/NO) S86의 처리로 이동한다.

화면 역할(23)의 값이 「1」인 송신 정보(18)에서의 우선도 정보(26)의 값이 3보다 작은(우선도가 높은) 경우(S84/YES), 화면 할당 처리부(64)는 리모트 회의 단말(14b)에서의 메인 화면인 화면(30b)에, 화면 역할(23)의 값이 「1」인 송신 정보(18)를 할당한다(S85). 즉 화면 할당 처리부(64)의 기억부 m5에, 화면ID(32b)와 화면 역할(23)의 값이 「1」인 송신 정보(18)의 화면ID(22)를 대응시켜 기억하게 한다. 한편, 화면 역할(23)의 값이 「1」인 송신 정보(18)에서의 우선도 정보(26)의 값이 3이상인(우선도가 낮은) 경우(S84/NO), S86의 처리로 이동한다.

계속하여, 리모트 회의 단말(14b)에서의 서브 화면에 대한 화면 할당 처리가 실행된다. 이 처리는 S81에서 다시 나열된 각 송신 정보(18a 내지 18d)를 순서대로 비교하면서 실행된다. 단, S83 내지 S85의 처리의 사이에 화면 할당된 송신 정보(18)는 제외한다.

화면 할당 처리부(64)는 추출된 송신 정보(18)의 나열 순서에 따라, 하나의 송신 정보(18)를 취득한다(S86).

화면 할당 처리부(64)는 S86에서 취득한 비교 대상인 송신 정보(18)에서의 화상 정보(24)가 리모트 회의 단말(14b)의 각 화면(30a, 30b)의 어느 것에 표시되어 있는지의 여부를 판단한다. 구체적으로는 이하의 처리를 실행한다. 화면 할당 처리부(64)는 표시 상태 유지부(68)로부터 리모트 화면ID(32a, 32b)에 대응되어 있는 화면ID(22)를 취득한다. 즉 리모트 회의 단말(14b)의 각 화면(30a, 30b)에서 이미 표시되어 있는 화상 정보(24)를 포함하는 송신 정보(18)를 취득한다. 계속하여, 화면 할당 처리부(64)는 스텝 722에서 취득한 송신 정보(18)의 화면ID(22)와 표시 상태 유지부(68)로부터 취득한 화면ID(22)를 비교하고, 일치하는지의 여부를 판단한다. 즉 비교 대상인 송신 정보(18)의 화면ID(22)가 리모트 회의 단말(14b)의 각 화면(30a, 30b)에서 이미 표시되어 있는 화상 정보(24)에 대응하는 화면ID(22)의 어느 것과 일치하는지의 여부를 판단한다(S87).

일치하는 화면ID(22)가 있는 경우(S87/YES), 화면 할당 처리부(64)는 그 화 면ID(22)에 대응하는 리모트 회의 단말(14b)의 리모트 화면ID(32)를 변경하지 않는다. 구체적으로는 화면 할당 처리부(64)의 기억부 m5에서, S86에서 취득한 송신 정보(18)의 화면ID(22)와, 거기에 대응하는 리모트 화면ID(32)의 정보를 유지한다. 즉 리모트 회의 단말(14b)의 화면(30)에 동일한 화면ID(22)에 대응하는 화상 정보를 표시하고 있는 경우는 그대로 동일한 화면ID(22)에 대응하는 화상 정보를 표시하게 한다(S88).

한편, 일치하는 화면ID(22)이 없는 경우(S87/NO), 할당이 결정되어 있지 않은 리모트 회의 단말(14b)의 화면(30) 중, 메인 화면에 가까운 화면에 화면ID(22)를 할당한다. 즉, 화면 할당 처리부(64)의 기억부 m5에서, 화면ID(22)와 대응되어 있지 않는 리모트 화면ID(32)으로서, 메인 화면에 가까운 화면(30)의 리모트 화면ID(32)에 대응하여, 화면ID(22)를 기억시킨다. 또한, 메인 화면에 가까운/먼 것을나타내는 순서의 정보는 미리 리모트 회의 단말(14b)에 등록되어 있고, 화면 할당 처리부(64)는 이 순서의 정보에 따라서 각 화면(30a, 30b)의 순서를 판단한다 (S89).

그리고, 화면 할당 처리부(64)는 S86 내지 S89의 처리를 리모트 회의 단말(14b)의 화면수만큼만 반복하고, 기억부 m5에 모든 리모트 화면ID(32)에 대하여, 대응하는 송신 정보(18)의 화면ID(22)를 기억하게 한다.

표시 제어 처리부(62)는 화면 할당 처리부(64)의 기억부 m5으로부터 리모트 화면ID(32a, 32b)와 대응하는 송신 정보(18)의 화면ID(22)를 취득하고, 표시 상태 유지부(68)에 유지되어 있는 정보를 취득한 화면 할당의 정보로 갱신한다. 표시 상태 유지부(68)에 유지되어 있는 정보를 여기부터 표시하는 화상 정보(24)에 대응하는 화면ID(22)로 갱신한다(S90). 또한, 갱신후, 화면 할당 처리부(64)는 기억부 m5의 정보를 클리어한다.

포커스 할당 처리부(66)는 리모트 회의 단말(14b)의 각 화면(30a, 30b)에, 화상 정보(24)의 표시 형태를 대응하게 하는 기능을 갖는다. 포커스 할당 처리부(66)는 각 송신 정보(18a 내지 18d)로부터, 포커스 정보(28)의 값이 「1」인 송신 정보(18)의 화면ID(22)를 취득한다.

포커스 할당 처리부(66)는 표시 상태 유지부(68)로부터 리모트 화면ID(32a, 32b)에 대응하고 있는 화면ID(22)와 리모트 화면ID(32)를 취득한다. 즉, 리모트 회의 단말(14b)의 화면(30)에 표시되는 화상 정보(24)에 대응하는 화면ID(22)를 취득한다.

포커스 할당 처리부(66)는 표시 상태 유지부(68)로부터 취득한 화면ID(22)에 대응하는 송신 정보(18)에서의 포커스 정보(28)의 값이 「1」인지의 여부를 판정한다.

포커스 정보(28)의 값이 「1」인 경우, 기억부 m6에 대하여 화면ID(22)와 함께 표시 상태 유지부(68)로부터 취득한 리모트 화면ID(32)에 대응하는 포커스 정보(28)를 「1」(강조 표시하는, 또는 다른 화면과 다른 형태로 표시한다)로 갱신한다. 포커스 정보(28)의 값이 「1」이외인 경우, 포커스 정보(28)를 「0」(보통 표시하는, 또는 다른 화면으로 동일한 형태로 표시한다)로 갱신한다. 이와 같이, 각 리모트 화면ID(32a, 32b)에 대응하는 포커스 정보(28)가 기억부 m6에 기억된다.

표시 제어 처리부(62)는 포커스 할당 처리부(66)의 기억부 m6으로부터 리모트 회의 단말(14b)의 각 리모트 화면ID(32a, 32b)와, 각 리모트 화면ID(32a, 32b)에 대응하는 포커스 정보(28)를 취득하고, 표시 상태 유지부(68)에, 취득한 포커스 정보(28)의 값을 등록한다.

표시 제어 처리부(62)는 표시 상태 유지부(68)로부터 각 리모트 화면ID(32a, 32b)에 대응하고 있는 화면ID(22)를 취득한다. 그리고, 리모트 회의 단말(14b)의 각 화면(30a, 30b)에, 취득한 화면ID(22)에 의해 식별되는 송신 정보(18)에 포함되는 화상 정보(24)를 표시한다(S91).

또한, 표시 제어 처리부(62)는 표시 상태 유지부(68)로부터 각 리모트 화면ID(32a, 32b)에 대응하고 있는 포커스 정보(28)를 취득한다. 어떤 리모트 화면ID(32)에 대응하고 있는 포커스 정보(28)의 값이 「1」이면, 그 리모트 화면ID(32)에 의해 특정되는 화면(30)에 표시하는 화상 정보(24)를 다른 화면과 다른 형태로 표시한다.

이상에서와 같이, 로컬 회의 단말(14a)은 리모트 회의 단말(14b)에, 화상 정보(24)와 화상 정보(24)에 할당된 우선도 정보(26), 이벤트 종류(25), 이벤트 수신 시각(27)을 송신하고, 리모트 회의 단말(14b)에, 이 정보에 의거하여 화상 정보(24)를 선택하게 할 수 있다.

다음에, 프리젠테이션에서의 발표자의 동작에 동반하는, 각 화면(20a 내지 20d)에 대응하는 우선도 정보(26)의 값의 변화 및 포커스 정보(28)의 값의 변화에 대해서 도 13을 사용하여 설명한다. 도 13은 회의실(12a)에서의 화면(20)과 발표 자의 위치를 나타낸 도면이다. 도 13에 나타낸 화면은 로컬 회의 단말(14a)의 화면(20a 내지 20d)이고, 좌측으로부터 화면(20a), 화면(20b), 화면(20c), 화면(20d)이라 한다.

프리젠테이션의 개시시에서, 모든 화면은 표시되어 있지 않기 때문에, 모든 화면ID(22)의 우선도 정보(26)의 값은 「nil」이다. 발표자가 프리젠테이션을 시작하고, 화면(20b)과 화면(20c)에 화상 정보가 표시된다. 그리고, 발표자가 화면(20b)과 화면(20c)의 사이에 서서, 화면(20b)에 몸을 향하고 있다. 그 결과, 행위 검출부(48)는 행위 화면=화면ID(22b), 행위 종류=몸의 방향,을 검출한다. 또한, 화면(20c)에 화상 정보가 표시되었기 때문, 행위 화면=화면ID(22c), 행위 종류=화면 표시,를 검출한다. 그리고, 이들 행위 화면 및 행위 종류의 정보를 포커스 결정 처리부(52) 및 프라이오리티 결정부(54)로 송신한다.

프라이오리티 결정부(54)는 상기한 행위 화면 및 행위 종류의 정보를 수신하면, 화면ID(22b)에 대한 행위 종류가 「몸의 방향」이기 때문에, 화면ID(22b)에 대응하는 우선도 정보(26)의 값으로서 「1」에, 이벤트 종류(25)의 값을 「몸의 방향」으로 설정한다. 한편, 화면ID(22c)에 대한 행위 종류는 「화면 표시」이기 때문에, 화면ID(22c)에 대응하는 우선도 정보(26)의 값으로서 「2」에, 이벤트 종류(25)의 값을 「화면 표시」로 설정한다. 화면(20a, 20d)에 대해서는 화면이 표시되어 있지 않기 때문에, 화면ID(22a), 화면ID(22d)에 대응하는 우선도 정보(26)의 값은 초기값인 「nil」의 그대로이다(도 8의 플로차트 참조).

포커스 결정 처리부(52)는 화면ID(22b)에 대한 행위 종류가 「몸의 방향」이 기 때문에, 화면ID(22b)에 대응하는 포커스 정보(28)의 값으로서 「1」을 설정한다. 그 이외의 화면ID(22)에 대응하는 포커스 정보(28)의 값을 「0」으로 설정한다 (도 13의 800).

발표자가 화면(20c)에 표시되어 있는 화상 정보를 사용하여 설명하기 때문에, 화면(20c)에 몸을 향하고, 화면(20c)의 일부를 지시하고 있다. 행위 검출부(48)는 행위 화면=화면ID(22c), 행위 종류=지시,를 검출한다. 그리고, 이들 행위 화면 및 행위 종류의 정보를 포커스 결정 처리부(52) 및 프라이오리티 결정부(54)로 송신한다.

프라이오리티 결정부(54)는 상기한 행위 화면 및 행위 종류의 정보를 수신하면, 화면ID(22c)에 대한 행위 종류가 「지시」이기 때문에, 화면ID(22c)에 대응하는 우선도 정보(26)의 값으로서 「1」을, 이벤트 종류(25)의 값으로서 「지시」를 설정한다. 또한, 화면ID(22c)에 대응하는 포커스 정보(28)의 값을 「1」로 설정하고, 그 이외의 화면ID(22)에 대응하는 포커스 정보(28)의 값을 「0」으로 설정한다(도 13의 801).

발표자가 화면(20c)에 몸을 향한 그대로의 상태에서, 제 1 우선도 저하 시간 △t1이 경과된다. 프라이오리티 결정부(54)는 화면ID(22b)에 대응하는 우선도 정보(26)의 값을 「2」로 변경한다. 발표자가 행위를 하는 화면(20)은 변경하지 않기 때문에, 행위 검출부(48)가 검출하는 행위 화면은 바뀌지 않는다. 그 때문에, 포커스 결정 처리부(52)는 각 화면ID(22a 내지 22d)에 대응하는 포커스 정보(28)의 값을 갱신하지 않는다(도 13의 802).

발표자가 화면(20c)에 몸을 향한 그대로의 상태에서, 화면(20d)에 화상 정보가 표시된다. 이 때, 행위 검출부(48)는 행위 화면=화면ID(22d), 행위 종류=화면 표시,를 검출한다. 그리고, 이 행위 화면 및 행위 종류의 정보를 포커스 결정 처리부(52) 및 프라이오리티 결정부(54)로 송신한다.

프라이오리티 결정부(54)는 행위 검출부(48)로부터 상기한 행위 화면 및 행위 종류의 정보를 수신하면, 행위 화면인 화면ID(22d)에 대한 행위 종류가 「화면 표시」이기 때문에, 화면ID(22d)에 대응하는 우선도 정보(26)의 값을 「2」로, 이벤트 종류(25)의 값을 「화면 표시」로 갱신한다. 포커스 결정 처리부(52)는 「화면 표시」의 통지를 수신한 경우에는 각 화면ID에 대응하는 포커스 정보(28)의 값을 갱신하지 않는다(도 13의 803).

화면(20b)의 우선도 정보(26)의 값이 「2」로 갱신되고나서, △t2의 시간이 더 경과된 경우, 프라이오리티 결정부(54)는 화면ID(22b)에 대응하는 우선도 정보(26)의 값을 「3」으로 갱신한다. 발표자가 행위를 하는 화면은 변경하지 않기 때문에, 행위 검출부(48)가 검출하는 행위 화면은 바뀌지 않는다. 그 때문에, 포커스 결정 처리부(52)는 각 화면ID(22)에 대응하는 포커스 정보(28)의 값을 갱신하지 않는다(도 13의 804).

발표자가 화면(20d)에 몸을 향하고, 화면(20d)에 기입을 행한다. 행위 검출부(48)는 행위 화면=화면ID(22d), 행위 종류=기입,을 검출한다. 프라이오리티 결정부(54)는 상기한 행위 화면 및 행위 종류의 정보를 수신하면, 화면ID(22d)에 대한 행위 종류가 「기입」이기 때문에, 화면ID(22d)에 대응하는 우선도 정보(26)의 값을 「1」로 갱신한다. 또한, 포커스 결정 처리부(52)는 화면ID(22d)에 대응하는 포커스 정보(28)의 값을 「1」로, 그 이외의 화면ID(22)에 대응하는 포커스 정보(28)의 값을 「0」으로 갱신한다(도 13의 805).

발표자가 화면(20d)쪽에 몸을 향한 그대로의 상태에서, 화면(20a)에 화상 표시된다. 행위 검출부(48)는 행위 화면=화면ID(22a), 행위 종류=화면 표시,를 검출한다. 그리고, 이들 행위 화면 및 행위 종류의 정보를 포커스 결정 처리부(52) 및 프라이오리티 결정부(54)로 송신한다.

프라이오리티 결정부(54)는 상기한 행위 화면 및 행위 종류의 정보를 수신하면, 화면ID(22a)에 대한 행위 종류가 「화면 표시」이기 때문에, 화면ID(22a)에 대응하는 우선도 정보(26)의 값을 「2」로, 이벤트 종류(25)의 값을 「화면 표시」로 갱신한다. 포커스 결정 처리부(52)는 「화면 표시」의 통지를 수신했을 경우, 각 화면ID에 대응하는 포커스 정보(28)를 갱신하지 않는다(도 13의 806).

발표자가 화면(20d)을 사용하여 설명을 시작하고나서, 시간(△t1+△t2)이 경과된다. 즉, 화면(20c)에 대하여 아무것도 하지 않고나서, 시간(△t1+△t2)이 경과된다. 프라이오리티 결정부(54)는 화면ID(22c)에 대응하는 우선도 정보(26)의 값을 「3」으로 변경한다. 또한, 프라이오리티 결정부(54)는 화면(20a)에 화상 표시되고나서 시간 △t2 경과된 시점에서, 화면ID(22a)에 대응하는 우선도 정보(26)의 값을 「3」으로 갱신한다. 발표자가 행위를 하는 화면은 변경하지 않기 때문에, 행위 검출부(48)가 검출하는 행위 화면은 변하지 않는다. 그 때문에, 포커스 결정 처리부(52)는 각 화면ID(22a 내지 22d)에 대응하는 포커스 정보(28)의 값을 갱신하지 않는다(도 13의 807).

발표자가 화면(20a)을 사용하면서 발표한다. 행위 검출부(48)는 행위 화면=화면ID(22a), 행위 종류=몸의 방향,을 검출한다. 그리고, 이들 행위 화면 및 행위 종류의 정보를 포커스 결정 처리부(52) 및 프라이오리티 결정부(54)로 송신한다.

프라이오리티 결정부(54)는 상기한 행위 화면 및 행위 종류의 정보를 수신하면, 화면ID(22a)에 대한 행위 종류가 「몸의 방향」이기 때문에, 화면ID(22a)에 대응하는 우선도 정보(26)의 값으로서 「1」을, 이벤트 종류(25)의 값으로서 「몸의 방향」을 설정한다. 포커스 결정 처리부(52)는 화면ID(22a)에 대응하는 포커스 정보(28)의 값을 「1」로, 그 이외의 화면ID에 대응하는 포커스 정보(28)의 값을 「0」으로 변경한다(도 13의 808).

발표자가 화면(20c)을 사용하면서 발표한다. 또한, 그것과 거의 동시에 화면(20d)의 표시 내용이 전환된다. 행위 검출부(48)는 행위 화면=화면ID(22c), 행위 종류=몸의 방향,을 검출한다. 또한, 화면(20d)에 화상 표시되었기 때문에, 행위 화면=화면ID(22d), 행위 종류=화면 표시,를 검출한다. 그리고, 이들 행위 화면 및 행위 종류의 정보를 포커스 결정 처리부(52) 및 프라이오리티 결정부(54)로 송신한다.

프라이오리티 결정부(54)는 상기한 행위 화면 및 행위 종류의 정보를 수신하면, 화면ID(22c)에 대한 행위 종류가 「몸의 방향」이기 때문에, 화면ID(22c)에 대응하는 우선도 정보(26)의 값으로서 「1」을, 이벤트 종류(25)의 값으로 「몸의 방향」을 설정한다. 한편, 화면ID(22d)에 대한 행위 종류는 「화면 표시」이기 때문 에, 화면ID(22d)에 대응하는 우선도 정보(26)의 값으로서 「2」를 설정한다. 포커스 결정 처리부(52)는 화면ID(22c)에 대응하는 포커스 정보(28)를 「1」로, 그 이외의 화면ID에 대응하는 포커스 정보(28)를 「0」으로 변경한다(도 13의 809).

계속하여, 리모트 회의 단말(14b)에서, 리모트 회의 단말(14b)의 화면에 표시되는 화상 정보와, 각 화면에서의 표시의 형태에 대해서 도 14를 사용하여 설명한다. 도 14는 로컬 회의실(12a)에서 도 13에 나타낸 그대로 프리젠테이션이 행해진 경우에서의 리모트 회의 단말(14b)의 화면에 표시되는 화상 정보 및 화면의 표시 형태를 나타내고 있다. 또한, 리모트 회의 단말(14b)에서의 화면 표시 처리에 대해서 설명할 경우, 로컬 회의 단말(14a)의 송신 정보 생성 처리에 대응하는 스텝에 대하여 「A」를 부여한다. 또한, 리모트 회의 단말(14b)에서 화면(30b)이 메인 화면으로서 미리 설정된다.

화면 할당 처리부(64)는 화면ID(22)이 「화면ID(22a), 화면ID(22b), 화면ID 22c, 화면ID(22d)」, 화면 역할(23)의 값이 「0, 0, 1, 0」, 우선도 정보(26)의 값이 「nil, 1, 2, nil」, 포커스 정보(28)의 값이 「0, 0, 1, 0」을 포함하는 송신 정보(18)를 수신한다.

리모트 회의 단말(14b)의 화면 할당 처리부(64)는 우선도 정보(26)의 값이 작은(우선도가 높은) 쪽에서부터 순서대로, 송신 정보(18)를 리모트 회의 단말(14b)의 화면수(=2)만큼 선택한다. 송신 정보(18) 중 화면ID(22b) 및 화면ID(22c)에 의해 특정되는 송신 정보(18b, 18c)의 우선도 정보(26)의 값이 다른 송신 정보(18a, 18d)의 우선도 정보(26)의 값보다 작기(우선도가 높기) 때문에, 화면ID(22b) 및 화면ID(22c)에 대응하는 송신 정보(18)가 선택된다.

화면ID(22c)에 의해 특정되는 송신 정보(18c)에서의 화면 역할(23)의 값이 「1」(메인 화면을 나타낸다)이고, 리모트 회의 단말(14b)의 화면(30b)이 메인 화면이기 때문에, 리모트 회의 단말(14b)의 화면(30b)에 대응하는 리모트 화면ID(32b)에 화면ID(22c)가 할당된다. 또한, 리모트 회의 단말(14b)의 다른 화면(30a)에 대응하는 리모트 화면ID(32a)에 화면ID(22b)가 할당된다. 그리고 화면(30a), 화면(30b)에, 할당된 화면ID(22)에 대응하는 송신 정보(18)에 포함되는 화상 정보(24)가 표시된다.

포커스 할당 처리부(66)는 화면ID(22b)에 의해 특정되는 송신 정보(18b)의 포커스 정보(28b)의 값이 「1」이기 때문에, 화면ID(22b)에 대응하고 있는 화면(30a)에서, 화상 정보(24b)가 다른 화면과 다른 형태로 표시된다.(도 14의 800A).

표시 제어 처리부(62)는 화면ID(22b)에 의해 특정되는 송신 정보(18b)의 포커스 정보(28b)의 값이 「0」으로 변경되고, 화면ID(22c)에 의해 특정되는 송신 정보(18c)의 우선도 정보(26c)의 값이 「1」로, 포커스 정보(28c)의 값이 「1」로 변경된 송신 정보(18)를 수신한다. 송신 정보(18c)의 화면 역할의 값은 「1」이고, 우선도 정보(26c)의 값은 3보다 작기(우선도가 높기) 때문에, 화면 할당 처리부(64)는 리모트 회의 단말(14b)의 화면(30b)에 대응하는 화면ID(22)를 갱신하지 않는다(도 12의 S83, S84 참조). 한편, 화면ID(22b)에 의해 특정되는 송신 정보(18b)의 포커스 정보(28b)의 값이 「0」이기 때문에, 화면ID(22b)이 할당되어 있는 화면(30a)에서 화상 정보(24b)를 일반적인 표시 형태에 의해 표시한다. 한편, 화 면ID(22c)에 의해 특정되는 송신 정보(18c)의 포커스 정보(28c)의 값이 「1」이기 때문에, 화면ID(22c)이 할당되어 있는 화면(30b)에서 화상 정보(24c)를 다른 것과 다른 표시 형태에 의해 표시한다(도 14의 801A).

표시 제어 처리부(62)는 화면ID(22b)에 의해 특정되는 송신 정보(18b)의 우선도 정보(26)의 값이 「2」로 변경된 송신 정보(18)를 수신한다. 송신 정보(18b)의 우선도 정보(26)의 값은 「2」이고, 화면ID(22a) 및 화면ID(22d)에 의해 특정되는 송신 정보(18a, 18d)의 우선도 정보(26)의 값이 「nil」이기 때문에, 계속하여 리모트 회의 단말(14b)의 화면(30a)에 화면ID(22b)가 할당된다(도 14의 802A).

표시 제어 처리부(62)는 화면ID(22d)에 의해 특정되는 송신 정보(18b)의 우선도 정보(26)의 값이 「2」로 변경된 송신 정보(18)를 수신한다. 화면ID(22b)dhk 화면ID(22d)에 의해 특정되는 송신 정보(18b, 18d)의 우선도 정보(26)의 값은 모두 「2」로서 동등하다. 우선도 정보(26)의 값이 동등한 경우, 이벤트 수신 시각(27)의 큰 쪽이 상위로 다시 나열된다. 이 경우, 송신 정보(18d)의 이벤트 수신 시각(27d)의 쪽이 송신 정보(18b)의 이벤트 수신 시각(27b)보다도 크기 때문에, 리모트 회의 단말(14b)의 화면(30a)에 화면ID(22d)가 할당된다(도 14의 803A).

표시 제어 처리부(62)는 화면ID(22b)에 의해 특정되는 송신 정보(18b)의 우선도 정보(26)의 값이 「3」으로 변경된 송신 정보(18)를 수신한다. 이 경우, 화면ID(22d)에 의해 특정되는 송신 정보(18d)의 우선도 정보(26)의 값이 송신 정보(18b)의 우선도 정보(26)의 값보다 크기(우선도가 낮기) 때문에, 리모트 회의 단말(14b)의 화면(30a)에 화면ID(22d)가 할당된다(도 14의 804A).

표시 제어 처리부(62)는 화면ID(22c)에 의해 특정되는 송신 정보(18c)의 포커스 정보(28c)의 값이 「0」으로 변경되고, 화면ID(22d)에 의해 특정되는 송신 정보(18d)의 포커스 정보(28d)의 값이 「1」로, 우선도 정보(26d)의 값이 「1」로 변경된 송신 정보(18)를 수신한다. 표시 제어 처리부(62)는 송신 정보(18d)의 우선도 정보(26d)의 값이 「1」이기 때문에, 리모트 회의 단말(14b)의 화면(30a)에 화면ID(22d)를 할당한다. 또한, 송신 정보(18d)의 포커스 정보(28d)의 값이 「1」이기 때문에, 화면(30a)에서 화상 정보(24d)를 다른 화면(30)과 다른 형태로 표시한다(도 14의 805A).

표시 제어 처리부(62)는 화면ID(22a)에 의해 특정되는 송신 정보(18a)의 우선도 정보(26)의 값이 「2」로 변경된 송신 정보(18)를 수신한다. 송신 정보(18a)의 우선도 정보(26)의 값은 화면ID(22c) 및 화면ID(22d)에 의해 특정되는 송신 정보(18c, 18d)의 우선도 정보(26)의 값보다 크기(우선도가 낮기) 때문에, 화면ID(22a)는 리모트 회의 단말(14b)에서 화면 표시되지 않는다(도 14의 806A).

표시 제어 처리부(62)는 화면ID(22a)에 의해 특정되는 송신 정보(18a)의 우선도 정보(26)의 값이 「3」으로 변경되고, 화면ID(22c)에 의해 특정되는 송신 정보(18c)의 우선도 정보(26)의 값이 「3」으로 변경된 송신 정보(18)를 수신한다. 화면ID(22a), 화면ID(22b) 및 화면ID(22c)에 의해 특정되는 송신 정보(18a, 18b, 18c)에 대응하는 우선도 정보(26)의 값은 모두 「3」으로서 동등하다. 거기에서, 각 화면ID(22a 내지 22d)에 대응하는 이벤트 수신 시각(27a 내지 27d)을 비교하면, 송신 정보(18c)의 이벤트 수신 시각(27c)의 값이 가장 큰, 리모트 회의 단말(14b) 의 화면(30b)에 화면ID(22c)가 할당된다(도 14의 807A).

표시 제어 처리부(62)는 화면ID(22a)에 의해 특정되는 송신 정보(18a)의 포커스 정보(28)의 값이 「1」로, 우선도 정보(26)의 값이 「1」로 변경되고, 화면ID(22d)에 의해 특정되는 송신 정보(18d)의 포커스 정보(28)의 값이 「0」으로 변경된 송신 정보(18)를 수신한다. 송신 정보(18a)와 송신 정보(18d)의 우선도 정보(26)의 값은 다른 화면ID(22)의 우선도 정보(26)의 값보다 작기(우선도가 높기) 때문에, 송신 정보(18a)와 송신 정보(18d)의 화면ID(22a) 및 화면ID(22d)가 리모트 회의 단말(14b)의 화면(30)에 할당된다. 그 때, 화면ID(22d)는 이미 리모트 회의 단말(14b)의 화면(30a)에 표시되어 있기 때문에, 계속하여 화면(30a)에 표시된다. 또한, 화면ID(22a)에 대응하는 포커스 정보(28)의 값이 「1」이기 때문에, 화면ID(22a)에 대응하는 화면(30b)에서, 다른 것과 다른 표시 형태에서 화상 정보를 표시한다(도 14의 808A).

표시 제어 처리부(62)는 화면ID(22a)에 의해 특정되는 송신 정보(18a)의 포커스 정보(28)가 「0」으로 변경되고, 화면ID(22c)에 의해 특정되는 송신 정보(18c)의 포커스 정보(28)가 「1」로, 우선도 정보(26)의 값이 「1」로 변경된 송신 정보(18)를 수신한다. 표시 제어 처리부(62)는 각 송신 정보(18a 내지 18d)로부터 우선도 정보(26)의 값이 작은(우선도가 높은) 송신 정보(18a) 및 송신 정보(18c)를 선택한다. 송신 정보(18c)의 화면 역할은 「1」이기 때문에, 리모트 회의 단말(14b)의 메인 화면인 화면(30b)로 송신 정보(18c)를 특정하는 화면ID(22c)가 할당된다(도 14의 809A).

이상에서와 같이, 로컬 회의 단말(14a)으로부터 리모트 회의 단말(14b)에, 화면ID(22)마다 우선도 정보(26), 포커스 정보(28), 이벤트 종류(25), 이벤트 수신 시각(27) 및 화상 정보(24)를 포함하는 송신 정보(18)를 송신함으로써, 리모트 회의 단말(14b)에서, 송신 정보(18)에 포함되는 화상 정보(24)를 리모트 회의 단말(14b)의 화면에 표시할지의 여부의 기준이 되는 정보를 얻을 수 있기 때문에, 화면(30)에 표시하는 화상 정보(24)와, 표시하지 않는 화상 정보(24)를 리모트 회의 단말(14b)에 선택하게 할 수 있다.

본 실시예에서, 로컬 회의 단말(14a)이 갖는 화면은 로컬 회의 단말(14a)에 접속된 표시 장치가 구비하는 화면이라 하고, 로컬 회의 단말(14a)이 갖는 표시 장치 l개의 화면에 1개의 화상 정보를 표시하고 있다. 그러나, 본 발명에서의 로컬 회의 단말(14a)이 갖는 화면은 1개의 표시 장치의 화면의 표시 영역을 복수로 분할하여 생성된, 각각의 표시 영역으로 하는 것도 가능하다.

또한, 리모트 회의 단말(14b)의 화면수가 로컬 회의 단말(14a)의 화면수보다 많은 경우, 남아 있는 리모트 회의 단말(14b)의 화면에는 우선도가 높은 화상 정보를 표시할 수도 있고, 화상을 표시하지 않을 수도 있다. 또한, 표시 가능한 화상 정보의 일람을 표시할 수도 있다.

본 실시예에서, 로컬 회의 단말(14a)에서, 제 1 우선도 저하 시간 △t1 및 제 2 우선도 저하 시간 △t2은 모든 화면ID(22a 내지 22d)에 대하여 공통의 시간으로 하고 있다. 그러나, 우선도가 저하(우선도 정보가 상승)될 경우의 처리는 화면ID(22)마다 처리되기 때문에, 화면ID(22)마다 다른 제 1 우선도 저하 시간 △t 1 및 제 2 우선도 저하 시간 △t2을 설정하는 것이 가능하다. 예를 들면, 메인 화면의 화면ID(22c)에 대해서, 제 1 우선도 저하 시간 △t1을 크게 함으로써, 화면ID(22c)에 대응하는 우선도 정보(26c)의 값이 「1」인 시간이 길어진다. 그 때문에, 메인 화면에 표시되는 화상 정보(26c)가 리모트 회의 단말(14b)의 화면(30)에 표시될 가능성이 높아진다.

본 발명의 로컬 회의 단말 장치는 발언자의 행위를 검출하는 행위 검출 수단을 더 갖고, 우선도 할당 수단은 행위 검출 수단이 검출한 행위를 해석함으로써 각 화상 정보에 할당된 우선도를 결정한다.

또한, 상기 행위 검출 수단은 발언자를 촬상하는 촬상 수단으로부터 전송되는 촬상 데이터를 해석함으로써 발언자의 행위를 검출한다.

본 발명의 로컬 회의 단말 장치는 행위 검출 수단이 검출한 행위를 해석함으로써 발언자가 설명에 사용하고 있는 화상 정보를 특정하는 화상 정보 특정 수단을 더 갖고, 정보 배신 처리 수단은 화상 정보 특정 수단이 특정한 화상 정보를 식별하기 위한 포커스 정보를 각 리모트 회의 단말 장치로 송신한다.

본 발명의 로컬 회의 단말 장치는 화면 제어 수단이 화면 표시하고 있는 각 화상 정보에, 우선도 할당 수단에 의해 할당된 우선도와, 상기 화상 정보가 발언자가 설명에 사용하고 있는 화상 정보인지의 여부를 나타내는 포커스 정보를 할당하고, 송신 정보를 생성하는 송신 정보 생성 수단을 더 갖고, 정보 배신 처리 수단은 송신 정보 생성 수단에 의해 생성된 송신 정보를 각 리모트 회의 단말 장치로 송신한다.

또한, 상기 정보 수신 처리 수단은 각 화상 정보에 대하여 발언자가 설명에 사용하고 있는 화상 정보인지의 여부를 나타낸 포커스 정보를 수신하고, 표시 처리 수단은 정보 수신 처리 수단이 수신한 정보 중에서 1개의 화상 정보를 수신한 포커스 정보에 의거하여 추출하고, 다른 화면과 다른 형태로 표시한다.

또한, 본 발명의 표시 화상 제어 방법은 전자 회의의 발언자의 행위를 더 검출하고, 검출된 행위에 의거하여, 화상 정보에 우선도를 할당한다.

또한, 발언자를 촬상하고, 촬상된 화상에 의거하여, 발언자의 행위를 검출한다.

또한, 검출된 행위에 의거하여, 발언자가 설명에 사용하고 있는 화상 정보를 특정하고, 발언자가 사용하고 있는 화상 정보의 정보를 상기 리모트 회의 단말 장치로 송신한다.

또한, 발언자가 어느 화상 정보를 설명에 사용하고 있을지를 나타낸 포커스 정보를 수신하고, 다른 화상 정보는 다른 모드에서, 발언자가 사용하고 있는 화상 정보를 표시한다.

본 발명에 따르면, 로컬 회의 단말 장치는 리모트 회의 단말 장치에, 각 화상 정보에 할당된 우선도 정보를 송신함으로써, 리모트 회의 단말 장치에, 화면 표시할지의 여부의 기준이 되는 우선도 정보에 의거하여 화상 정보를 선택하게 할 수 있는 전자 회의 시스템에서의 회의 단말 장치, 전자 회의 시스템 및 표시 화상 제어 방법을 제공할 수 있다.

Claims

제 1 회의 단말 장치에서 화면 표시한 화상 정보를 배신(配信)함으로써, 시청자가 사용하는 1 내지 복수대의 제 2 회의 단말 장치에 화면 표시하게 하는, 발언자 사용의 제 1 회의 단말 장치에 있어서,

복수의 화상 정보를 화면 표시하는 화면 제어 수단과,

화면 제어 수단이 화면 표시하고 있는 각 화상 정보에 대하여, 제 2 회의 단말 장치가 상기 화상 정보를 화면 표시할지의 여부의 판단 기준이 되는 우선도를 할당하는 우선도 할당 수단과,

화면 제어 수단이 화면 표시하고 있는 화상 정보와, 우선도 할당 수단이 각 화상 정보에 할당한 우선도(優先度)를 제 2 회의 단말 장치로 송신하는 정보 배신 처리 수단을 갖는 제 1 회의 단말 장치.
제 1 항에 있어서,

발언자의 행위를 검출하는 행위 검출 수단을 갖고,

우선도 할당 수단은 행위 검출 수단이 검출한 행위를 해석함으로써 각 화상 정보에 할당하는 우선도를 결정하는 제 1 회의 단말 장치.
제 2 항에 있어서,

행위 검출 수단은 발언자를 촬상(撮像)하는 촬상 수단으로부터 전송되는 촬 상 데이터를 해석함으로써 발언자의 행위를 검출하는 제 1 회의 단말 장치.
제 2 항에 있어서,

행위 검출 수단이 검출한 행위를 해석함으로써 발언자가 설명에 사용하고 있는 화상 정보를 특정하는 화상 정보 특정 수단을 갖고,

정보 배신 처리 수단은 화상 정보 특정 수단이 특정한 화상 정보를 식별하기 위한 포커스 정보를 제 2 회의 단말 장치로 송신하는 제 1 회의 단말 장치.
제 4 항에 있어서,

화면 제어 수단이 화면 표시하고 있는 각 화상 정보에, 우선도 할당 수단에 의해 할당된 우선도와, 상기 화상 정보가 발언자가 설명에 사용하고 있는 화상 정보인지의 여부를 나타내는 포커스 정보를 할당하고, 송신 정보를 생성하는 송신 정보 생성 수단을 갖고,

정보 배신 처리 수단은 송신 정보 생성 수단에 의해 생성된 송신 정보를 제 2 회의 단말 장치로 송신하는 제 1 회의 단말 장치.
발언자 사용의 제 1 회의 단말 장치로부터 배신되는 화상 정보를 화면 표시하는 시청자 사용의 제 2 회의 단말 장치에 있어서,

제 1 회의 단말 장치로부터 배신되는 복수의 화상 정보와, 각 화상 정보에 대하여 상기 화상 정보를 화면 표시할지의 여부의 판단 기준이 되는 우선도 정보를 수신하는 정보 수신 처리 수단과,

정보 수신 처리 수단이 수신한 화상 정보 중에서 제 2 회의 단말 장치가 갖는 화면수만큼의 화상 정보를 우선도 정보에 의거하여 추출하여 각 화면에 할당하고, 표시하는 표시 처리 수단을 갖는 제 2 회의 단말 장치.
제 6 항에 있어서,

정보 수신 처리 수단은 각 화상 정보에 대하여 발언자가 설명에 사용하고 있는 화상 정보인지의 여부를 나타낸 포커스 정보를 수신하고,

표시 처리 수단은 정보 수신 처리 수단이 수신한 정보 중에서 1개의 화상 정보를 수신한 포커스 정보에 의거하여 추출하고, 다른 화면과 다른 형태로 표시하는 제 2 회의 단말 장치.
전자 회의 시스템으로서,

복수의 화상 정보를 화면에 표시하고, 표시된 화상 정보의 각각에, 리모트 화면 위에 표시하기 위한 우선도를 할당하고, 표시된 화상 정보와 각 화상 정보에 할당된 우선도를 리모트 회의 단말 장치로 송신하는 송신 단말 장치와,

다른 회의 단말 장치로부터 송신된 복수의 화상 정보와, 수신한 화상 정보를 표시하기 위한 우선도 정보를 수신하고, 수신한 화상 정보를 우선도 정보 및 화상 정보를 표시하기 위하여 사용되는 화면수에 따라 표시하는 단말 장치를 포함하는 전자 회의 시스템.
전자 회의에서 사용되는 화상 정보를 송신하는 표시 화상 제어 방법으로서,

전자 회의에서 사용되는 복수의 화상 정보의 각각에, 리모트 화면에 표시하기 위한 우선도를 할당하고,

표시된 화상 정보 및 화상 정보의 각각에 할당된 우선도를 리모트 회의 단말 장치로 송신하는 표시 화상 제어 방법.
제 9 항에 있어서,

전자 회의의 발언자의 행위를 더 검출하고,

검출된 행위에 의거하여, 화상 정보에 우선도를 할당시키는 표시 화상 제어 방법.
제 10 항에 있어서,

발언자를 더 촬상하고,

촬상된 화상에 의거하여, 발언자의 행위를 검출하는 표시 화상 제어 방법.
제 10 항에 있어서,

검출된 행위에 의거하여, 발언자가 설명에 사용하고 있는 화상 정보를 더 특정하고,

발언자가 사용하고 있는 화상 정보의 정보를 상기 리모트 회의 단말 장치로 송신하는 표시 화상 제어 방법.
전자 회의에서 수신한 화상 정보를 표시하는 표시 화상 제어 방법으로서,

화면 위에 표시되는 복수의 화상 정보 및 표시되는 화상 정보의 우선도 정보를 수신하고,

화상 정보를 표시하기 위하여 사용되고 있는 화면수 및 우선도 정보에 의거하여, 수신한 화상 정보를 표시하는 표시 화상 제어 방법.
제 13 항에 있어서,

발언자가 어느 화상 정보를 설명에 사용하고 있을지를 나타내는 포커스 정보를 더 수신하고,

다른 화상 정보는 다른 모드에서, 발언자가 사용하고 있는 화상 정보를 표시하는 표시 화상 제어 방법.