JP5034256B2 - 会議室制御システム - Google Patents

Description

本発明は、表示装置の表示を制御できる会議室制御システムに関し、特に、複数の表示装置の表示を視覚的に一元管理しながらも個別の表示要求に応じる会議室制御システムを提供することにある。

会議室においては複数の互いに関連した資料を、距離を隔てた会議室間で共有する必要があるそこで、近年の会議室は多数のプロジェクタや大画面ディスプレイ等の表示装置を備え、テレビ会議システムを導入する等している。しかし、このように複数の会議会場に散在する表示装置をそれぞれ別個に制御することは困難であり、時に会議の進行の妨げとなっていた。よって、各会議室の表示装置を一元管理する必要が生じている。

このような機能を有する統合システムとしては、ライブビデオ画像内に写し出された物理的装置を表す画像領域に対し、物理的装置へ表示させる画像等をドラッグ・アンド・ドロップ操作することで物理的装置の表示を操作する技術が知られている（例えば、特許文献１参照）。
特開２００５‐５１７７８

また、このような機能を有するマルチスクリーン制御システムとしては、ネットワークプロトコル（例えば、ＴＣＰ／ＩＰ）によりマトリックススイッチャへ命令を送信することで複数の表示装置を制御する技術が知られている（例えば、特許文献２参照）。
特許３２９０３３４

ところで、上記のように画像等をドラッグ・アンド・ドロップ操作することで物理的装置の表示を制御する統合システムでは、表示制御させる画像を視覚的に一元制御できるが、例えば、物理的装置の表示を説明する者等が選択する画像を表示させるような制御を行うことができなかった。このため、一元制御された物理的装置の表示と説明者が個別に望む表示とが齟齬する場合があると言う問題が生じていた。

また、上記のようにマトリックススイッチャを用いて複数の表示装置を制御するマルチスクリーン制御システムでは、表示情報の入力元と出力先との対応を記憶しておく必要があり操作が困難であった。

本発明は、上記問題に鑑みて成されたものであり、その目的とするところは、表示装置に実行結果を表示させるプログラムの実行を制御することで、複数の表示装置の表示を視覚的に一元管理しながらも個別の表示要求に応じる会議室制御システムを提供することにある。

本発明に係る会議室制御装置は、第１の会議室に設置された複数の第１の入力手段及び複数の第１の表示手段と、第１の会議室に設置された撮像手段であって、複数の第１の入力手段及び複数の第１の表示手段が設置された当該第１の会議室内の様子を撮像する撮像手段と、第２の会議室に設置された第２の表示手段であって、撮像手段が撮像したライブ画像を第１の領域に表示し、第１の表示手段に表示すべき複数のサムネイル画像を第２の領域に表示し、複数のサムネイル画像に関連付けられたアイコン画像を第３の領域に表示する第２の表示手段と、アイコン画像に関連付けられた複数のサムネイル画像の表示用プログラム、及びサムネイル画像に関連付けられたサムネイル作成元画像の表示用プログラムを実行する実行手段と、第２の会議室に設置された第２の入力手段であって、アイコン画像をドラッグし、当該アイコン画像を、第１の領域内に表示された複数の第１の表示手段のいずれか１つの画像上にドロップすることにより、実行手段に対して、複数のサムネイル画像の表示用プログラムの実行指令を入力する第２の入力手段と、を備え、実行手段は、第２の入力手段から実行指令を受信した場合に、複数のサムネイル画像の表示用プログラムを実行し、第１の表示手段は、実行手段によって複数のサムネイル画像の表示用プログラムが実行された場合に、複数のサムネイル画像を表示し、実行手段は、さらに、第１の表示手段に表示された複数のサムネイル画像のうち、いずれかのサムネイル画像が第１の入力手段によって選択された場合に、当該サムネイル画像に関連付けられたサムネイル作成元画像の表示用プログラムを実行し、第１の表示手段は、さらに、実行手段によってサムネイル作成元画像の表示用プログラムが実行された場合に、サムネイル作成元の画像を表示することを特徴としている。
この構成によれば、アイコン画像と第１の表示手段を表す画像とを選択することで第１の表示手段に結果を表示させるサムネイル画像の表示用プログラムの実行を命令できるため、第１の表示手段の物理的距離に関わらず容易にプログラムの実行結果を第１の表示手段に表示させる制御を行うことができる。
また、サムネイル画像の表示用プログラムの入力元と実行結果の出力先とを、アイコン画像とライブ画像内の第１の表示手段を表す画像とを選択することで指定できるため、入力元と出力先との対応を記憶しておく必要がなく命令を入力する操作が容易となる。
さらに、この構成によれば、複数の表示手段の表示するプログラムの実行結果を視覚的に一元制御できる。
さらに、この構成によれば、ドラッグ・アンド・ドロップすることによって視覚的に実行指令を入力できるため、実行指令の入力操作が容易になる。
さらに、この構成によれば、第１の表示手段に表示されるサムネイル作成元画像の表示用プログラムの実行結果を第１の入力手段を通じて選択できるため、例えば、第１の表示手段に表示される情報を説明対象とする説明者が第１の入力手段を通じて本システムを操作することで、一元管理された情報以外に説明者の所望の情報を選択できる。
さらに、この構成によれば、第１の表示手段に表示される資料を第１の入力手段を通じて選択できるため、例えば、第１の表示手段に表示される資料を説明する説明者が第１の入力手段を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の資料を第１の表示手段に表示させることができる。
さらに、この構成によれば、第１の表示手段に表示させる資料をサムネイルとして表示して選択可能とするため、操作者が表示可能な資料を記憶しておく必要が無いだけでなく資料を選択する操作が容易となる。

上記構成において、アイコン画像は、文字画像、記号画像、絵画像、絵文字画像、又は、絵記号画像のいずれかである構成を採用できる。
この構成によれば、アイコン画像は文字画像、記号画像、絵画像、絵文字画像、又は、絵記号画像のいずれかであるため、サムネイル画像の表示用プログラムとアイコン画像とを容易に表示によって関連付けることができるだけでなく、実行指令を入力する操作が容易となる。

上記構成において、第１の表示手段、及び、第１の入力手段は、遠隔地に設置されることを特徴とする構成を採用できる。
この構成によれば、アイコン画像と第１の表示手段を表す画像とを選択することで第１の表示手段に結果を表示させるサムネイル画像の表示用プログラムの実行を命令できるため、第１の表示手段が遠隔地に配置されるにも関わらず容易にプログラムの実行結果を第１の表示手段へ表示をさせる制御を行うことができる。

上記構成において、第２の表示手段は、第２の入力手段でアイコン画像をドラッグし、アイコン画像を第１の表示手段を表す画像にドロップすることによって選択された第１の表示手段に対応して表示させる画像を時系列順序に従って表示する第４の領域を有し、第２の表示手段における第４の領域に表示された時系列順序に従って第１の表示手段へ同期して画像を表示させる制御を行う制御手段をさらに備えることを特徴とする構成を採用できる。
この構成によれば、第１の表示手段に表示させる画像を予め時系列順序に沿って第２の表示手段へ表示するため、複数の表示手段に表示させる画像を容易に一元管理できる。

本発明によれば、表示装置に実行結果を表示させるプログラムの実行を制御することで、複数の表示装置の表示を視覚的に一元管理しながらも個別の表示要求に応じる会議室制御システムを提供できる。

以下、本発明の最良の実施形態について、添付図面を参照しつつ説明する。図１は本発明の一実施例に係る会議室制御システムの構成図である。

本発明の会議室制御システム１００は、制御手段である制御装置１１０、実行手段であるアプリケーションサーバ１２１ないし１２４（以下単に、ＡＰサーバと言う）、表示切替装置１３０、第２の入力手段である第１入力装置２１０、第２の表示手段である第１表示装置２２０、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、第１の入力手段である第２入力装置３２１ないし３２３、表示手段の一つであり第１の表示手段である第２表示装置３３１ないし３３３、及び、撮像手段である撮像装置３４０等で構成されている。

本発明の会議室制御システム１００を構成する第１入力装置２１０、及び、第１表示装置２２０は、制御装置１１０等とネットワーク５００を介して接続している。ここで、ネットワーク５００を、例えば、ＬＡＮとすることで第１表示装置２２０等と制御装置１１０等とを同じ構内に設置する、又は例えば、インタネットとして第１表示装置２２０等を遠隔地に設置する構成を採用することができる。尚、第１入力装置２１０、及び、第１表示装置２２０は、通常、同一会議室内に設置される。

更に、本発明の会議室制御システム１００を構成するプリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、第２入力装置３２１ないし３２３、第２表示装置３３１ないし３３３、及び、撮像装置３４０は、制御装置１１０等とネットワーク５００を介して接続している。ここで、ネットワーク５００を、例えば、ＬＡＮとすることで第１表示装置２２０等と制御装置１１０等とを同じ構内に設置する、又は例えば、インタネットとして第２表示装置３３１等を遠隔地に設置する構成を採用することができる。

尚、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、及び、第２表示装置３３１ないし３３３は、撮像装置３４０が撮像可能な位置に配置される。また、通常、第２入力装置３２１ないし３２３と第２表示装置３３１ないし３３３とは、同一の会議室内に配置される。

また、本発明の会議室制御システム１００へ画像を入力する画像入力装置４１１及び４１２は、制御装置１１０等とネットワーク５００を介して接続している。ここで、ネットワーク５００を、例えば、ＬＡＮとすることで画像入力装置４１２と制御装置１１０等とを同じ構内に設置する、又は例えば、インタネットとして画像入力装置４１２を遠隔地に設置する構成を採用することができる。

制御装置１１０は、例えば、コンピュータで構成され、ＡＰサーバ１２１ないし１２４、及び、表示切替装置１３０に接続している。また、制御装置１１０は、ネットワーク５００を介して、第１入力装置２１０及び第１表示装置２２０、並びに、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、第２入力装置３２１ないし３２３、第２表示装置３３１ないし３３３、及び、撮像装置３４０に接続している。

制御装置１１０は、ＡＰサーバ１２１ないし１２４及び表示切替装置１３０、第１入力装置２１０及び第１表示装置２２０、並びに、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、メールサーバ３１３、第２入力装置３２１ないし３２３、第２表示装置３３１ないし３３３、及び、撮像装置３４０を制御する。尚、具体的な制御については後述する。

ＡＰサーバ１２１は、制御装置１１０及び表示切替装置１３０に接続している。アプリケーションサーバ１２１は、制御装置１１０から選択命令と会議を識別する情報である会議ＩＤとを受信する。その後、ＡＰサーバ１２１は、受信した選択情報に基づいて会議ＩＤで識別される会議で使用される資料（以下単に、会議資料と言う）、会議資料のサムネイル、第２表示装置３３１ないし３３３に表示されている会議資料に関連する資料（以下単に、関連資料）、及び、関連資料のサムネイル等をコマンドに基づいてプログラムを実行することで表示情報として制御装置１１０及び表示切替装置１３０へ送信する。

また、ＡＰサーバ１２１は、議事録、及び、議事録のサムネイルを受信したコマンドに基づいてプログラムを実行することで表示情報として制御装置１１０及び表示切替装置１３０へ送信する。尚、コマンド、及び、ＡＰサーバ１２２の処理については後述する。

ＡＰサーバ１２１は、図示は省略するが、例えば、ハードディスク等の記録媒体で構成される記憶部を備えている。これにより、アプリケーションサーバ１２１は、記憶部に会議で使用される電子データである会議資料及び議事録を蓄積している。

また、ＡＰサーバ１２１は、図示は省略するが例えば、リレーショナルデータベースで構成されるデータベースを備えている。
ここで、図２を参照してＡＰサーバ１２１の備えるデータベースが蓄積する情報について説明する。図２は、ＡＰサーバ１２１の備えるデータベースの一例を説明するための図である。

ＡＰサーバ１２１のデータベースは、資料管理テーブルＴ１０１、資料−スライドテーブルＴ１０２、関連テーブルＴ１０３、会議管理テーブルＴ２０１、会議−資料テーブルＴ３０１、及び、議事録管理テーブルＴ４０１を有している。

資料管理テーブルＴ１０１は、会議資料を管理するテーブルである。資料管理テーブルＴ１０１は、会議資料を識別する情報である資料ＩＤと会議資料の記憶先を表すファイル名を含むファイルパス（絶対パス又は相対パスのいずれでも構わない）とを関連付けられて蓄積している。

資料−スライドテーブルＴ１０２は、会議資料を識別する資料ＩＤと会議資料を構成するスライドを識別するスライドＩＤとを関連付けられて蓄積している。

関連テーブルＴ１０３は、資料ＩＤとスライドＩＤとで特定されるスライドに関連したスライドを資料ＩＤとスライドＩＤとで特定して関連付けている。尚、特定された一つのスライドに関連付けられるスライドは、存在しない、一つ、又は、複数のいずれかである。

この構成によって、特定のスライドに関連したスライドの有無、及び、特定のスライドに関連したスライドの全てを取得することができる。

会議管理テーブルＴ２０１は、会議を識別する情報である会議ＩＤと会議の書誌的情報である開催日付や会議の開始時刻等を関連付けられて蓄積している。

会議−資料テーブルＴ３０１は、会議ＩＤと資料ＩＤとを関連付けて蓄積している。これによって、会議で使用される資料を特定することができる。

議事録管理テーブルＴ４０１は、会議ＩＤと議事録の記憶先を表すファイル名を含むファイルパス（絶対パス又は相対パスのいずれでも構わない）とを関連付けられて蓄積している。これによって、会議で作成された議事録を特定することができる。

ここで、図１に戻って本会議室制御システムの構成を説明する。
ＡＰサーバ１２２は、制御装置１１０及び表示切替装置１３０に接続している。ＡＰサーバ１２２は、制御装置１１０からコマンドを受信する。その後、ＡＰサーバ１２２は、テレビ会議の接続先を表現した画像である接続先画像、及び、テレビ会議の接続先から受信した画像（以下単に、テレビ会議画像と言う）を受信したコマンドに基づいてプログラムを実行することで表示情報として制御装置１１０及び表示切替装置１３０へ送信する。尚、ＡＰサーバ１２２の処理の詳細については後述する。

ＡＰサーバ１２３は、制御装置１１０、表示切替装置１３０及び画像入力装置４１１又は４１２に接続している。ＡＰサーバ１２３は、制御装置１１０から選択命令を受信する。その後、ＡＰサーバ１２３は、画像入力装置４１１又は４１２を表現した画像である入力装置画像、及び、画像入力装置４１１又は４１２から受信した画像をコマンドに基づいてプログラムを実行することで表示情報として制御装置１１０及び表示切替装置１３０へ送信する。尚、ＡＰサーバ１２３の処理の詳細については後述する。

ＡＰサーバ１２４は、制御装置１１０及び撮像装置３４０に接続している。ＡＰサーバ１２４は、制御装置１１０からコマンドを受信する。その後、ＡＰサーバ１２４は、撮像装置３４０を制御するコマンドと表示によって関連付けられた画像である制御画像を受信したコマンドに基づいてプログラムを実行することで表示情報として表示切替装置１３０へ送信する。また、ＡＰサーバ１２４は、撮像装置３４０を制御する命令をプログラムを実行することで撮像装置３４０へ送信する。尚、ＡＰサーバ１２４の処理の詳細については後述する。

表示切替装置１３０は、例えば、ＣＰＵ切替装置等で構成され、制御装置１１０、ＡＰサーバ１２１ないし１２４、及び、一又は複数の第２表示装置３３１ないし３３３に接続している。表示切替装置１３０は、ＡＰサーバ１２１ないし１２４から表示情報を受信する。次に、表示切替装置１３０は、制御装置１１０から受信した切替命令に従って、受信した表示情報を第２表示装置３３１ないし３３３のいずれか一つ以上に送信する。

第１入力装置２１０は、例えば、タッチパネル、ボタン、マウス又はキーボード等から構成される。第１入力装置２１０は、ネットワーク５００を介して制御装置１１０へ接続している。入力装置１４０は、ユーザにより、以下で説明する第１表示装置で表示された第１コマンド画像を選択する第１選択命令を入力される。

尚、第１選択命令は、第１コマンド画像とライブ画像内の第２表示装置を表す画像とをドラッグ・アンド・ドロップ操作によって関連付けて選択する。また、第１コマンド画像、ライブ画像、ライブ画像内の第２表示装置を表す画像、及び、第１選択命令の入力方法については後述する。その後、第１入力装置２１０は、入力された第１選択命令をネットワーク５００を介して制御装置１１０へ送信する。

第１表示装置２２０は、例えばＣＲＴディスプレイや液晶画面等で構成される。第１表示装置２２０はネットワーク５００を介して制御装置１１０へ接続している。第１表示装置２２０は、制御装置１１０から表示情報を受信して表示情報を表示する。尚、第１表示装置２２０が表示する表示情報については後述する。

プリンタ３１０は、制御装置１１０に接続している。プリンタ３１０は、制御装置１１０からデータを受信し、受信したデータから画像データを展開し、展開した画像データを出力する。

ファクシミリ装置３１１は、制御装置１１０に接続している。ファクシミリ装置３１１は、制御装置１１０からデータを受信し、受信したデータから画像データを展開し、展開した画像データをＦＡＸ出力する。

ファイルサーバ３１２は、制御装置１１０に接続している。ファイルサーバ３１２は、制御装置１１０からデータを受信し、受信したデータを所定のディレクトリに蓄積する。

メールサーバ３１３は、制御装置１１０に接続している。メールサーバ３１３は、制御装置１１０からデータを受信し、受信したデータを電子メールとして、又は電子メールに添付して所定のあて先に送信する。

第２入力装置３２１ないし３２３は、例えば、タッチパネル、ボタン、マウス又はキーボード等から構成される。第２入力装置３２１ないし３２３は、ネットワーク５００を介して制御装置１１０へ接続している。第２入力装置３２１ないし３２３は、ユーザにより、以下で説明する第２表示装置３３１ないし３３３に表示された第２コマンド画像を選択する第２選択命令を入力される。

また、第２コマンド画像及び第２選択命令の入力方法については後述する。その後、第２入力装置３２１ないし３２３は、入力された第２選択命令をネットワーク５００を介して制御装置１１０へ送信する。

第２表示装置３３１ないし３３３は、例えばＣＲＴや液晶画面等で構成される。第２表示装置３３１ないし３３３はネットワーク５００を介して制御装置１１０へ接続している。第２表示装置３３１ないし３３３は、表示切替装置１３０から表示情報を受信して、受信した表示情報を表示する。尚、第２表示装置３３１ないし３３３が表示する表示情報については後述する。

ここで、図３を参照して第２入力装置３２１ないし３２３と第２表示装置３３１ないし３３３との構成を説明する。図３は、第２入力装置３２１ないし３２３と第２表示装置３３１ないし３３３との構成を説明するための図である。

図３において、第２表示装置３３１ないし３３３は、液晶ディスプレイで構成される。また、第２入力装置３２１ないし３２３は、液晶画面に設置されたタッチパネルで構成され、Ｘ軸とＹ軸からなる二次元座標軸に基づいて表されたユーザのタッチ位置を入力される。つまり、第２入力装置３２１ないし３２３は、タッチ位置座様によって第２コマンド画像を選択する第２選択命令を入力する。

次に、図１に戻り会議室制御システムの構成の説明を引き続き行う。
撮像装置３４０は、例えば、ＣＣＤカメラ等のビデオカメラで構成され、ＡＰサーバ１２４に接続している。撮像装置３４０は、一又は複数の第２表示装置３３１ないし３３３、プリンタ３１０、ファクシミリ装置３１１、ファイルサーバ３１２、及び、メールサーバ３１３を撮像可能に配置されている。撮像装置３４０は、撮像した画像を制御装置１１０へライブ送信する。

撮像装置３４０は、また、ＡＰサーバ１２４から制御命令を受信する。撮像装置３４０は、受信した命令に従ってズームや方向転換といった動作を行なう。

画像入力装置４１１又は４１２は、例えば、コンピュータで構成され、ＡＰサーバ１２３に接続している。画像入力装置４１２は、ＡＰサーバ１２３へ画像データを送信する。

ネットワーク５００は、例えば、ＬＡＮ、ＷＡＮ、又は、インタネット等で構成される。

ここで、図４を参照して第１表示装置２２０が表示する表示画面を説明する。図４は、第１表示装置が表示する表示画面の一例である。

図４に示す第１表示装置２２０が表示する表示画面Ｍ１００は、ライブ画像画面ＭＳ１１０、遠隔地ライブ画像画面ＭＳ１２０、操作順序指定画面ＭＳ１３０、機能指定画面ＭＳ１４０、及び、オブジェクト指定画面ＭＳ１５０等と言うサブ画面から構成される。

ライブ画像画面ＭＳ１１０は、撮像装置３４０が撮像した撮像画像がライブで表示される。尚、ライブとは、一般に、一旦録音・録画等することなくリアルタイムに画像を伝達することを言うが、一時的な音声又は画像の記憶は、録音・録画等に含まれないものとする。

ライブ画像画面ＭＳ１１０で表示されるライブ画像は、本会議室制御システムが制御対象とする会議室の内の一つであって、特に、本会場とされる会議室を撮像した撮像画像である。尚、本会場とされる会議室が遠隔地に存在する構成を採用することもできる。

また、ライブ画像画面ＭＳ１１０は、本会場に配置された一又は複数の第２表示装置３３１ないし３３３を表す画像（以下単に、表示装置画像と言う）Ｇ１１１ないしＧ１１３、及び、プリンタ３１０を表す画像（以下単に、プリンタ画像と言う）Ｇ１１４を含む。尚、本実施例では、表示装置又はプリンタを例に挙げたが、その他の物理的装置であるファクシミリ装置３１１、ファイルサーバ３１２、又は、メールサーバ３１３を表示する構成を採用できる。

遠隔地ライブ画像画面ＭＳ１２０は、遠隔地にある撮像装置３４０によって会議室を撮像された撮像画像がライブで表示される。
遠隔地ライブ画像画面ＭＳ１２０の構成は、ライブ画像画面ＭＳ１１０の構成と同様であるため省略する。

操作順序指定画面ＭＳ１３０は、ライブ画像画面ＭＳ１１０内の表示装置画像Ｇ１１１ないしＧ１１３の表示操作を順序付けて指定する画面である。

操作順序指定画面ＭＳ１３０は、表示順番を有した行と、表示装置画像Ｇ１１１ないしＧ１１３を表した列とから構成される行列と、表示操作の開始を命令する操作開始ボタンＢＴ１３１と表示操作の停止を命令する操作停止ボタンＢＴ１３２と、表示対象を一つ前に戻す操作を命令する実行順序操作ボタンＢＴ１３５及び表示対象を一つ後に進める操作を命令するＢＴ１３６から構成される。

操作順序指定画面ＭＳ１３０の行列の要素は、それぞれ会議資料のサムネイル、議事録のサムネイル、又は、第１コマンド画像である。つまり、それぞれ第２表示装置３３１ないし３３３に表示する情報又はプログラムの実行結果を表す。尚、第１コマンド画像については後述する。

具体的には、第１行１列の要素は、表示操作の第１番目にライブ画像の最も左に表示された第２表示装置３３１へ表示する情報を表す。また、第１行３列の要素は、表示操作の第１番目にライブ画像の最も右に表示された第２表示装置３３３へ表示する第１コマンド画像に関連付けられたコマンドに従ったプログラムの実行結果を表す。

ここで、図５ないし１０を参照して機能指定画面ＭＳ１４０及びオブジェクト指定画面ＭＳ１５０について説明する。図５は、機能指定画面の資料アイコンを選択した場合に表示されるオブジェクト指定画面の一例を説明するための図である。尚、資料アイコンについては後述する。

機能指定画面ＭＳ１４０は、第１コマンド画像を表示する。図５において、第１コマンド画像は、アイコンとして表示されている。
機能指定画面ＭＳ１４０は、左から順に、資料アイコンＩ１、関連資料アイコンＩ２、議事録アイコンＩ３、テレビ会議アイコンＩ４、外部入力アイコンＩ５、及び、カメラアイコンＩ６と言うアイコンを表示している。

機能指定画面ＭＳ１４０の表示するアイコンＩ１ないし６は、アイコンとして絵により、ＡＰサーバ１２１ないし１２４のいずれかが実行するプログラムの第１機能の提供を指示する第１コマンドと関連付けられている。尚、第１コマンドとは、第２コマンド画像を表示する機能の提供を指示するコマンドを言う。

この構成によれば、第１コマンド画像はアイコンであるため、第１コマンドと第１コマンド画像とを容易に表示によって関連付けることができるだけでなく、第１選択命令を入力する操作が容易となる。

具体的には、資料アイコンＩ１は、第２資料コマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１資料コマンドと言う）と、資料をイメージする絵によって関連付けられている。

尚、第２資料コマンド画像とは、ＡＰサーバ１２１が実行するプログラムの第２機能である選択された会議資料を表示する機能の提供を指示する第２コマンド（以下単に、第２資料コマンドと言う）に表示により関連付けられた画像を言う。

オブジェクト指定画面ＭＳ１５０は、図５に示すように、ユーザが機能指定画面ＭＳ１４０の表示する資料アイコンＩ１を選択した場合には、会議資料のサムネイルである第２資料コマンド画像ＳＳを表示する。

次に、図６を参照して関連資料アイコンＩ２を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図６は、機能指定画面の関連資料アイコンＩ２を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。

関連資料アイコンＩ２は、第２関連資料コマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１関連資料コマンドと言う）と、複数の資料間の関連をイメージする絵によって関連付けられている。

尚、第２関連資料コマンド画像とは、ＡＰサーバ１２１が実行するプログラムの第２機能である第２表示装置３３１に表示された会議資料と関連のある会議資料（以下単に、関連資料と言う）を表示する機能の提供を指示する第２コマンド（以下単に、第２関連資料コマンドと言う）に表示により関連付けられた画像を言う。

オブジェクト指定画面ＭＳ１５０は、図６に示すように、ユーザが機能指定画面ＭＳ１４０の表示する関連資料アイコンＩ２を選択した場合には、第２表示装置に表示されている資料の内で関連資料の表示を望む資料を第２表示装置を表す画像（以下単に、第２表示装置選択画像ＳＭと言う）を表示する。

その後、ユーザが選択した第２表示装置選択画像ＳＭに関連した関連資料のサムネイルである第２関連資料コマンド画像ＳＲを表示する。

次に、図７を参照して議事録アイコンＩ３を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図７は、機能指定画面の議事録アイコンＩ３を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。

議事録アイコンＩ３は、第２議事録コマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１議事録コマンドと言う）と、記録用のペン、記録された資料及び記録された音声をイメージする絵によって関連付けられている。

尚、第２議事録コマンド画像とは、ＡＰサーバ１２１が実行するプログラムの第２機能である議事録を表示する機能の提供を指示する第２コマンド（以下単に、第２議事録コマンドと言う）に表示により関連付けられた画像を言う。

オブジェクト指定画面ＭＳ１５０は、図７に示すように、ユーザが機能指定画面ＭＳ１４０の表示する議事録アイコンＩ３を選択した場合には、議事録のサムネイルである第２議事録コマンド画像ＳＣを表示する。

次に、図８を参照してテレビ会議アイコンＩ４を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図８は、機能指定画面のテレビ会議アイコンＩ４を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。

テレビ会議アイコンＩ４は、第２テレビコマンド画像を表示する手順を表示するコマンド及び第２テレビコマンド画像を表示する機能の提供を指示するコマンド（以下単に、両コマンドを第１テレビコマンドと言う）と、テレビをイメージする絵によって関連付けられている。

尚、第２テレビコマンド画像とは、ＡＰサーバ１２２が実行するプログラムの第２機能であるテレビ会議の接続先から受信した画像を表示する機能の提供を指示する第２コマンド（以下単に、第２テレビコマンドと言う）に表示により関連付けられた画像を言う。

オブジェクト指定画面ＭＳ１５０は、図８に示すように、ユーザが機能指定画面ＭＳ１４０の表示するテレビ会議アイコンＩ４を選択した場合には、接続先画像である第２テレビコマンド画像ＳＴを表示する。

次に、図９を参照して外部入力アイコンＩ５を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図９は、機能指定画面の外部入力アイコンＩ５を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。

外部入力アイコンＩ５は、第２外部入力コマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１外部入力コマンドと言う）と、画像入力装置４１１又は４１２を構成する一例であるコンピュータをイメージする絵によって関連付けられている。

尚、第２外部入力コマンド画像とは、ＡＰサーバ１２３が実行するプログラムの第２機能である画像入力装置４１１又は４１２から受信した画像を表示する機能の提供を指示する第２コマンド（以下単に、第２外部入力コマンドと言う）に表示により関連付けられた画像を言う。

オブジェクト指定画面ＭＳ１５０は、図９に示すように、ユーザが機能指定画面ＭＳ１４０の表示する外部入力アイコンＩ５を選択した場合には、入力装置画像である第２外部入力コマンド画像ＳＦを表示する。

次に、図１０を参照してカメラアイコンＩ６を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０について説明する。図１０は、機能指定画面のカメラアイコンＩ６を選択した場合に表示されるオブジェクト指定画面ＭＳ１５０の一例を説明するための図である。

カメラアイコンＩ６は、第２カメラコマンド画像を表示する機能の提供を指示するコマンド（以下単に、第１カメラコマンドと言う）と、撮像装置３４０を構成する一例であるカメラをイメージする絵によって関連付けられている。

尚、第２カメラコマンド画像とは、ＡＰサーバ１２４が実行するプログラムの第２機能である撮像装置３４０を制御する機能の提供を指示する第２コマンド（以下単に、第２カメラコマンドと言う）に表示により関連付けられた画像を言う。

オブジェクト指定画面ＭＳ１５０は、図１０に示すように、ユーザが機能指定画面ＭＳ１４０の表示するカメラアイコンＩ６を選択した場合には、制御画像である第２カメラコマンド画像ＳＤを表示する。

ここで、図１１を参照して第１コマンド画像について説明する。図１１は、第１コマンド画像の表示を説明するための図である。
図１１に示すように、第１コマンド画像は、絵画像、文字画像、記号画像、絵文字画像、及び、絵記号画像である第１コマンド画像Ｉ３、ＩＣ３、ＩＭ３、ＩＰＣ３、及び、ＩＰＭ３としても表される。

第１コマンド画像Ｉ３は、会議議事録を表示する機能を議事録を記録するための鉛筆、議事録を構成する資料、及び、議事録に関連付けられた音声をイメージする絵によって表している。

第１コマンド画像ＩＣ３は、会議議事録を表示する機能を、会議議事録を表す文字「Ｒｅｃ」よって表している。
第１コマンド画像ＩＭ３は、会議議事録を表示する機能を、記録を表す記号「○」によって表している。

第１コマンド画像ＩＰＣ３は、会議議事録を表示する機能を、会議議事録を表す文字「Ｒｅｃ」を、議事録を記録するための鉛筆をイメージする絵によって絵文字として表している。

第１コマンド画像ＩＰＭ３は、会議議事録を表示する機能を、記録を表す記号「○」、議事録を記録するための鉛筆をイメージする絵によって絵記号として表している。

この構成によれば、第１コマンド画像は文字画像、記号画像、絵画像、絵文字画像、又は、絵記号画像のいずれかであるため、第１コマンドと第１コマンド画像とを容易に表示によって関連付けることができるだけでなく、第１選択命令を入力する操作が容易となる。

ここで、図４に戻り、第１表示装置２２０に表示される表示画面Ｍ１００について引き続き説明する。
機能指定画面ＭＳ１４０に表示された第１コマンド画像及びオブジェクト指定画面ＭＳ１５０に表示された第２コマンド画像は、それぞれドラッグ・アンド・ドロップ操作の対象となる。

この構成によれば、ドラッグ・アンド・ドロップすることによって視覚的に第１の選択命令を入力できるため、選択命令の入力操作が容易になる。

具体的には、第１コマンド画像及び第２コマンド画像をドラッグし、操作順序指定画面ＭＳ１３０の要素としてドロップ、若しくは、ライブ画像画面ＭＳ１１０又は遠隔地ライブ画像画面ＭＳ１２０のライブ画像に表示された複数の表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３、若しくは、プリンタ画像Ｇ１２４の内の一つにドロップする操作が可能である。

これにより、ユーザは、第１コマンド画像又は第２コマンド画像と表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３、若しくは、プリンタ画像Ｇ１１４とを関連付けて選択する。

この構成によれば、第１コマンド画像と第２表示装置を表す画像とを選択することで第２表示装置に結果を表示させる第１コマンドの実行を命令できるため、第２表示装置の物理的距離に関わらず容易にプログラムの実行結果を第２表示装置へ表示させる制御を行なうことができる。
また、この構成によれば、第１コマンドの入力元と第１実行結果の出力先とを、第１コマンド画像とライブ画像内の第２表示装置を表す画像とを選択することで指定できるため、入力元と出力先との対応を記憶しておく必要がなく命令を入力する操作が容易となる。

つまり、ライブ画像内のデバイスを表す画像、即ちホットスポット(機器に対応した制御可能領域)は、デバイスとその表示領域(領域を表す位置座標)が予め登録され、該当領域が指示されたとき、対応するデバイスが選択される。

更にまた、この構成によれば、複数の表示装置の表示するプログラムの実行結果を視覚的に一元制御できる。

ここで、図１２を参照して、機能指定画面ＭＳ１４０に表示された第１コマンド画像をドラッグし、ライブ画像画面ＭＳ１１０又は遠隔地ライブ画像画面ＭＳ１２０のライブ画像に表示された表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３へドロップする操作をユーザがした場合に実行される制御装置１１０の制御処理を説明する。図１２は、制御装置１１０の制御処理を説明するための図である。

先ず、制御装置１１０は、第１入力装置２１０から第１コマンド画像とライブ画像内の第２表示装置を表す画像とをドラッグ・アンド・ドロップによって関連付けて選択すること指示する選択命令を第１入力装置２１０から受信する（ステップＳＴ１）。

次に、制御装置１１０は、第１選択命令によって選択された第２表示装置（以下単に、選択第２表示装置と言う）を取得する（ステップＳＴ２）。これは、第１入力装置２１０から入力されたドロップ操作のされた画面上の位置座標と第１表示装置２２０へ表示するよう制御しているライブ画像の画面上の位置座標とを比較することで得られる。

その後、制御装置１１０は、第１選択命令によって選択された第１コマンド画像（以下単に、選択第１コマンド画像）を取得する（ステップＳＴ３）。これも同様に、第１入力装置２１０から入力されたドラッグ操作のされた画面上の位置座標と第１表示装置２２０へ表示するよう制御している機能指定画面ＭＳ１４０の画面上の位置座標とを比較することで得られる。

次に、制御装置１１０は、ステップＳＴ３で取得した選択第１コマンド画像に関連付けられた第１コマンドを取得する（ステップＳＴ４）。
その後、制御装置１１０は、ステップＳＴ３で取得した第１コマンドを実行可能なＡＰサーバ（以下単に、実行サーバと言う）を取得する（ステップＳＴ５）。

具体的には、選択第１コマンド画像が資料アイコンＩ１、関連資料アイコンＩ２、又は、議事録アイコンＩ３である場合にはＡＰサーバ１２１を、テレビ会議アイコンＩ４の場合にはＡＰサーバ１２２を、外部入力アイコンＩ５の場合にはＡＰサーバ１２３を、又は、カメラアイコンＩ６の場合にはＡＰサーバ１２４を実行サーバとする。

次に、制御装置１１０は、ステップＳＴ２で取得した選択第２表示装置へ、ステップＳＴ４で取得した実行サーバの表示を切り替えるように、表示切替装置１３０へ切替通知を通知する（ステップＳＴ６）。

また、この構成によれば、第１コマンドの入力元と第１実行結果の出力先とを、第１コマンド画像とライブ画像内の第２表示装置を表す画像とを選択することで指定できるため、入力元と出力先との対応を記憶しておく必要がなく命令を入力する操作が容易となる。

その後、制御装置１１０は、実行サーバへ第１コマンドを通知する（ステップＳＴ７）。尚、第１コマンドが第１資料コマンドである場合には、会議ＩＤも実行サーバへ送信する。

次に、制御装置１１０は、第２入力装置から第２選択命令を受信する（ステップＳＴ８）。その後、制御装置１１０は、受信した第２選択命令を実行サーバへを送信する（ステップＳＴ９）。
その後、制御装置１１０は、処理を終了する。

この構成によれば、第２表示装置に表示される第２コマンドの実行結果を第２入力装置を通じて選択できるため、例えば、第２表示装置に表示される情報を説明対象とする説明者が第２入力装置を通じて本システムを操作することで、一元管理された情報以外に説明者の所望の情報を選択できる。

次に、図１３を参照して、第１コマンド画像をドラッグし、表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３へドロップする操作をユーザがした場合に実行される実行サーバの実行処理を説明する。図１３は、実行サーバの制御処理を説明するための図である。

先ず、実行サーバは、制御装置１１０から第１コマンドを受領する（ステップＳＴ１０１）。尚、第１コマンドが第１資料コマンドである場合には、会議ＩＤも制御装置１１０から受信する。

次に、実行サーバは、第１コマンドを実行する（ステップＳＴ１０２）。
具体的には、第１コマンドが第１資料コマンドであり実行サーバがＡＰサーバ１２１である場合には、受信した会議ＩＤに基づいて会議−資料テーブルＴ３０１を検索して会議資料を取得する。その後、取得した会議資料を基礎としてサムネイルを作成する。

また、この構成によれば、第２表示装置に表示させる資料をサムネイルとして表示して選択可能とするため、操作者が表示可能な資料を記憶しておく必要が無いだけでなく資料を選択する操作が容易となる。

特に、ＡＰサーバ１２１は、作成したサムネイルと作成したサムネイルの作成の基礎とされた会議資料の表示指示をする第２資料コマンドとを関連つけることで、サムネイルを第２資料コマンド画像として作成する。

この構成によれば、第２表示装置に表示させる資料をサムネイルとして表示して選択可能とするため、操作者が資料を選択する操作が容易となるだけでなく、資料間の関連性を記憶しておく必要が無くなる。

第１コマンドが第１関連資料コマンドであり実行サーバがＡＰサーバ１２１である場合には、第２表示装置３３１ないし３３に表示させている会議資料の関連資料を、表示させている会議資料の資料ＩＤ及びスライドＩＤを基に関連テーブルＴ１０２を検索することで取得する。その後、取得した会議資料を基礎としてサムネイルを作成する。

特に、ＡＰサーバ１２１は、作成したサムネイルと作成したサムネイルの作成の基礎とされた関連資料の表示指示をする第２資料コマンドとを関連つけることで、サムネイルを第２関連資料コマンド画像として作成する。

第１コマンドが第１議事録コマンドであり実行サーバがＡＰサーバ１２１である場合には、議事録を、議事録管理テーブルＴ４０１を検索することで取得する。その後、取得した議

特に、ＡＰサーバ１２１は、作成したサムネイルと作成したサムネイルの作成の基礎とされた議事録の表示指示をする第２資料コマンドとを関連つけることで、サムネイルを第２議事録コマンド画像として作成する。

また、この構成によれば、第２表示装置に表示させる議事録をサムネイルとして表示して選択可能とするため、操作者が表示可能な議事録を記憶しておく必要が無いだけでなく議事録を選択する操作が容易となる。

第１コマンドが第１テレビコマンドであり実行サーバがＡＰサーバ１２２である場合には、それぞれ接続先画像を表示するまでの手順を表した画像を生成する。次に、ＡＰサーバ１２２は、生成した画像を表示切替装置１３０へ送信する。その後、ユーザが接続先画像を表示するまでの手順を実行した後に、接続先画像を生成し、第２テレビコマンドと関連つけることで第２テレビコマンド画像として生成する。

第１コマンドが第１外部入力コマンドであり実行サーバがＡＰサーバ１２３である場合、及び、第１コマンドが第１カメラコマンドであり実行サーバがＡＰサーバ１２４である場合には、それぞれ入力装置画像、又は、制御画像を生成し、それぞれ第２外部入力コマンド、又は、第２カメラコマンドと関連つけることで第２外部入力コマンド画像、又は、第２カメラコマンド画像として生成する。

この構成によれば、接続先画像を表示するまでの操作手順が表示されるため、接続先画像を表示する操作をユーザが記憶する必要がなくなり、ユーザの操作負担が軽減する。

また、この構成によれば、テレビ会議の接続先を画像として表示して選択可能とするため、操作者が接続可能なテレビ会議の接続先を記憶しておく必要が無いだけでなく接続先を選択する操作が容易となる。

また、この構成によれば、撮像装置を制御するコマンドと関連付けられた制御画像を表示することで制御画像の選択により実行する制御コマンドを選択可能とするため、操作者が制御コマンドを記憶しておく必要が無いだけでなく制御コマンドを選択する操作が容易となる。

更に、この構成によれば、画像入力装置を画像として表示して選択可能とするため、操作者が入力可能な画像入力装置を記憶しておく必要が無いだけでなく入力先を選択する操作が容易となる。

次に、実行サーバは、第１コマンドの実行結果である第１実行結果を表示切替装置へ送信する（ステップＳＴ１０３）。

その後、実行サーバは、制御装置１１０から第２選択命令を受領する（ステップＳＴ１０４）。

次に、実行サーバは、第２選択命令が選択する第２コマンド画像を取得する（ステップＳＴ１０５）。これは、第２入力装置３２１ないし３２３から入力された画面上のタッチ位置の位置座標と第２表示装置３３１ないし３３３へ表示するよう制御している第１実行結果の位置座標とを比較することで得られる。

その後、実行サーバは、第２コマンド画像に関連付けられた第２コマンドを取得する（ステップＳＴ１０６）。これは、実行サーバが、第１コマンドの実行によって第２コマンド画像を生成した際に、第２コマンド画像と第２コマンドとの関連を記憶しておくことで可能となる。

次に、実行サーバは、ステップＳＴ１０５で取得した第２コマンドを実行する（ステップＳＴ１０７）。
具体的には、第２コマンドが第２資料コマンドである場合には選択されたサムネイルの基礎とされた会議資料を表示情報として表示切替装置１３０へ送信する。同様に、第２関連資料コマンドである場合には選択されたサムネイルの基礎とされた関連資料を表示情報として表示切替装置１３０へ送信する。同様に、第２議事録コマンドである場合には選択されたサムネイルの基礎とされた議事録を表示情報として表示切替装置１３０へ送信する。同様に第２テレビコマンドである場合には接続先から受信した画像を表示情報として表示切替装置１３０へ送信する。同様に、第２外部入力コマンドである場合には画像入力装置４１１又は４１２から受信した画像を表示情報として表示切替装置１３０へ送信する。第２コマンドが第２カメラコマンドである場合には撮像装置３４０を制御するコマンドを撮像装置３４０へ送信する。

この構成によれば、第１表示装置に表示されるライブ画像を第２入力装置を通じて制御できるため、例えば、ライブ画像で撮像される画像を説明する説明者が第２入力装置を通じて本システムを操作することで、説明者の所望のライブ画像を第１表示装置に表示させることができる。

実行サーバは、第２コマンドが第２カメラコマンドであるかを判断する（ステップＳＴ１０８）。実行サーバは、第２コマンドが第２カメラコマンドであると判断した場合には処理を終了し、そうでない場合にはステップＳＴ１０９の処理を実行する。

ステップＳＴ１０８において、実行サーバは、第２コマンドが第２カメラコマンドでないと判断した場合には、第２コマンドの実行結果である第２実行結果を表示切替装置へ送信する（ステップＳＴ１０９）。その後、実行サーバは処理を終了する。

この構成によれば、第２表示装置に表示される資料を第２入力装置を通じて選択できるため、例えば、第２表示装置に表示される資料を説明する説明者が第２入力装置を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の資料を第２表示装置に表示させることができる。

この構成によれば、第２表示装置に表示される情報を第２入力装置を通じて選択できるため、例えば、第２表示装置に表示される情報を説明する説明者が第２入力装置を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の画像入力装置から受信した画像を第２表示装置に表示させることができる。

この構成によれば、第２表示装置に表示されるテレビ会議の接続先を第２入力装置を通じて選択できるため、例えば、第２表示装置に表示される情報を説明する説明者が第２入力装置を通じて本システムを操作することで、一元管理された資料のみならず説明者の所望の接続先から受信した画像を第２表示装置に表示させることができる。

次に、図１４を参照して、機能指定画面ＭＳ１４０に表示された第１コマンド画像をドラッグし、操作順序指定画面ＭＳ１３０へドロップする操作をユーザがした場合に実行される制御装置１１０の制御処理を説明する。図１４は、制御装置１１０の制御処理の他例を説明するための図である。

先ず、制御装置１１０は、第１入力装置２１０から第１コマンド画像と操作順序指定画面ＭＳ１３０の第２表示装置を表す列と実行順序とをドラッグ・アンド・ドロップによって関連付けて選択すること指示する選択命令を第１入力装置２１０から受信する（ステップＳＴ２０１）。

次に、制御装置１１０は、選択命令によって選択された実行順序（操作順序）を取得する（ステップＳＴ２０２）。
その後の制御装置１１０の実行する処理であるステップＳＴ２０３ないしステップＳＴ２０６は、図１２に示したステップＳＴ２ないしステップＳＴ５と同様であるため省略する。

ステップＳＴ２０６を実行した後には、ステップＳＴ２０５で取得した第１コマンドを実行順序を行とし、選択表示装置を列とする第１コマンド行列の所定の位置に挿入する（ステップＳＴ２０７）。

次に、制御装置１１０は、操作順序指定画面ＭＳ１３０の操作開始ボタンＢＴ１３２を選択することで実行開始命令を制御装置１１０から受領したかを判断する（ステップＳＴ２０８）。実行開始命令を受領していると判断した場合にはステップＳＴ２０９の処理を、そうでない場合にはステップＳＴ２０１に戻り上記処理を繰り返す。

ステップＳＴ２０８において、制御装置１１０は、実行開始命令を受領していると判断した場合には、第１コマンド行列から処理対象としていない行（以下単に、未処理行と言う）が存在するかを判断する（ステップＳＴ２０８）。制御装置１１０は、未処理行が存在すると判断する場合にはステップＳＴ２１０の処理を、そうでない場合には処理を終了する。

ステップＳＴ２０９において、制御装置１１０は、未処理行が存在すると判断した場合には、未処理行の第１コマンドと、それぞれの選択表示装置とについて、ステップＳＴ２１０ないしステップＳＴ２１３の処理を実行する。制御装置１１０は、ステップＳＴ２１３の処理を実行した後には、ステップＳＴ２０９に戻り上記処理を繰り返す。尚、ステップＳＴ２１０ないしステップＳＴ２１３の処理は、図１２で説明したステップＳＴ６ないしステップＳＴ９と同様であるため省略する。

また、機能指定画面ＭＳ１４０に表示された第１コマンド画像をドラッグし、操作順序指定画面ＭＳ１３０へドロップする操作をユーザがした場合に実行される実行サーバの実行処理は、図１３で示した処理と同様であるため説明は省略する。

この構成によれば、第２表示装置に表示させる画像を予め時系列順序に沿って第１表示装置へ表示するため、複数の表示装置に表示させる画像を容易に一元管理できる。

次に、オブジェクト指定画面ＭＳ１５０に表示された第２コマンド画像をドラッグし、ライブ画像画面ＭＳ１１０又は遠隔地ライブ画像画面ＭＳ１２０のライブ画像に表示された表示装置画像Ｇ１１１ないし１１３又は１２１ないしＧ１２３、若しくは、プリンタ画像Ｇ１１４へドロップする操作をユーザがした場合に実行される制御装置１１０の制御処理を説明する。

先ず、制御装置１１０は、第１入力装置２１０から第２コマンド画像とライブ画像内の第２表示装置又はプリンタを表す画像とをドラッグ・アンド・ドロップによって関連付けて選択すること指示する選択命令を第１入力装置２１０から受信する。

次に、制御装置１１０は、選択命令によって選択されたプリンタ３１０又は選択第２表示装置を取得する。その後、制御装置１１０は、選択命令によって選択された第２コマンド画像（以下単に、選択第２コマンド画像）を取得する。

次に、制御装置１１０は、取得した選択第２コマンド画像に関連付けられた第２コマンドを取得する。
その後、制御装置１１０は、第２コマンドを実行可能なＡＰサーバ（以下単に、実行サーバと言う）を取得する。

具体的には、選択第２コマンド画像が第２資料コマンド画像、第２関連資料コマンド画像、又は、第２議事録コマンド画像である場合にはＡＰサーバ１２１を、第２テレビコマンド画像の場合にはＡＰサーバ１２２を、第２外部入力コマンド画像の場合にはＡＰサーバ１２３を、又は、第２カメラコマンド画像の場合にはＡＰサーバ１２４を実行サーバとする。

ここで、選択命令が選択第２表示装置を選択した場合は、制御装置１１０は、選択第２表示装置へ実行サーバの表示を切り替えるように、表示切替装置１３０へ切替通知を通知する。その後、制御装置１１０は、実行サーバへ第２コマンドを通知する。

ここで、選択命令がプリンタを選択した場合は、制御装置１１０は、実行サーバへ第２コマンドを通知し、実行サーバの第２実行結果である会議資料、関連資料、議事録、テレビ会議画像、又は、入力装置画像を受信する。その後、制御装置１１０は、受信した第２実行結果をプリンタ３１０へ送信する。

尚、ファクシミリ装置３１１、ファイルサーバ３１２、又は、メールサーバ３１３を撮像したライブ画像領域を選択命令が選択した場合については、上記選択命令がプリンタを選択した場合と同様であるため省略する。

この構成によれば、第１入力装置を操作することで、表示装置、プリンタ、ファクシミリ装置、ファイルサーバ、メールサーバのいずれかを操作することができるため、複数の機器を第１入力装置で一元的に操作できる。

上記実施形態では、ＣＣＤカメラを用いた場合について説明したが、これに限定されるわけではなく、例えば、ＣＭＯＳイメージセンサを用いたカメラ等を採用することも可能である。

上記実施形態では、第２入力装置３２１ないし３２３はタッチパネルで構成される場合について説明したが、これに限定されるわけではなく、例えば、第２入力装置３２１ないし３２３をポインティングディバイスとしてＷｉｎｄｏｗｓ（登録商標） ＡＰＩ等のプログラム利用することで、ポインティングディバイスの指示位置を取得する構成を採用することも可能である。

本発明の一実施例に係る会議室制御システムの構成図である。 ＡＰサーバの備えるデータベースの一例を説明するための図である。 第２入力装置と第２表示装置との構成を説明するための図である。 第１表示装置が表示する表示画面の一例である。 資料アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。 関連資料アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。 議事録アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。 テレビ会議アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。 外部入力アイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。 カメラアイコンを選択した場合のオブジェクト指定画面の一例を説明するための図である。 第１コマンド画像の表示を説明するための図である。 制御装置の制御処理の一例を説明するためのフローチャートである。 実行サーバの実行処理を説明するためのフローチャートである。 制御装置の制御処理の他例を説明するためのフローチャートである。

符号の説明

１００…会議室制御システム
１１０…制御装置（制御手段）
１２１〜１２４…アプリケーションサーバ（実行手段）
１３０…表示切替装置
２００…遠隔地等
２１０…第１入力装置（第２の入力手段）
２２０…第１表示装置（第２の表示手段）
３００…遠隔地等
３１０…プリンタ
３１１…ファクシミリ装置
３１２…ファイルサーバ
３１３…メールサーバ
３２１〜３２３…第２入力装置（第１の入力手段）
３３１〜３３３…第２表示装置（第１の表示手段）
３４０…撮像装置（撮像手段）
４００…システム外（遠隔地等）
４１１、４１２…画像入力装置
５００…ネットワーク
ＢＴ１３１…操作開始ボタン
ＢＴ１３２…操作停止ボタン
ＢＴ１３５、１３６…実行順序操作ボタン
Ｄ…ディスプレイ
Ｇ１１１〜１１３，１２１〜１２３…表示装置画像
Ｇ１１４…プリンタ画像
Ｉ１…資料アイコン
Ｉ２…関連資料アイコン
Ｉ３…議事録アイコン
Ｉ４…テレビ会議アイコン
Ｉ５…外部入力アイコン
Ｉ６…カメラアイコン
Ｉ３，ＩＣ３，ＩＭ３，ＩＰＣ３，ＩＰＭ３…第１コマンド画像
Ｍ１００…表示画面
ＭＳ１１０…ライブ画像画面
ＭＳ１２０…遠隔地ライブ画像画面
ＭＳ１３０…操作順序指定画面
ＭＳ１４０…機能指定画面
ＭＳ１５０…オブジェクト指定画面
ＳＣ１〜４…議事録のサムネイル
ＳＤ１〜３…制御画像
ＳＦ１〜３…入力装置画像
ＳＭ１〜３…表示装置選択画像
ＳＲ１〜８…関連資料のサムネイル
ＳＳ１〜８…会議資料のサムネイル
ＳＴ１〜３…接続先画像
Ｔ１０１…資料管理テーブル
Ｔ１０２…資料−スライドテーブル
Ｔ１０３…関連テーブル
Ｔ２０１…会議管理テーブル
Ｔ３０１…会議−資料テーブル
Ｔ４０１…議事録管理テーブル

Claims (4)

1. 第１の会議室に設置された複数の第１の入力手段及び複数の第１の表示手段と、
   前記第１の会議室に設置された撮像手段であって、前記複数の第１の入力手段及び前記複数の第１の表示手段が設置された当該第１の会議室内の様子を撮像する撮像手段と、
   第２の会議室に設置された第２の表示手段であって、前記撮像手段が撮像したライブ画像を第１の領域に表示し、前記第１の表示手段に表示すべき複数のサムネイル画像を第２の領域に表示し、前記複数のサムネイル画像に関連付けられたアイコン画像を第３の領域に表示する第２の表示手段と、
   前記アイコン画像に関連付けられた前記複数のサムネイル画像の表示用プログラム、及び前記サムネイル画像に関連付けられたサムネイル作成元画像の表示用プログラムを実行する実行手段と、
   前記第２の会議室に設置された第２の入力手段であって、前記アイコン画像をドラッグし、当該アイコン画像を、前記第１の領域内に表示された複数の前記第１の表示手段のいずれか１つの画像上にドロップすることにより、前記実行手段に対して、前記複数のサムネイル画像の表示用プログラムの実行指令を入力する第２の入力手段と、を備え、
   前記実行手段は、前記第２の入力手段から実行指令を受信した場合に、前記複数のサムネイル画像の表示用プログラムを実行し、
   前記第１の表示手段は、前記実行手段によって前記複数のサムネイル画像の表示用プログラムが実行された場合に、前記複数のサムネイル画像を表示し、
   前記実行手段は、さらに、前記第１の表示手段に表示された前記複数のサムネイル画像のうち、いずれかのサムネイル画像が前記第１の入力手段によって選択された場合に、当該サムネイル画像に関連付けられたサムネイル作成元画像の表示用プログラムを実行し、
   前記第１の表示手段は、さらに、前記実行手段によって前記サムネイル作成元画像の表示用プログラムが実行された場合に、サムネイル作成元の画像を表示することを特徴とする会議室制御システム。
2. 前記アイコン画像は、文字画像、記号画像、絵画像、絵文字画像、又は、絵記号画像のいずれかであることを特徴とする請求項１に記載の会議室制御システム。
3. 前記第１の表示手段、及び、前記第１の入力手段は、遠隔地に設置されることを特徴とする請求項１又は２に記載の会議室制御システム。
4. 前記第２の表示手段は、前記第２の入力手段で前記アイコン画像をドラッグし、前記アイコン画像を前記第１の表示手段を表す画像にドロップすることによって選択された第１の表示手段に対応して表示させる画像を時系列順序に従って表示する第４の領域を有し、
   前記第２の表示手段における第４の領域に表示された時系列順序に従って前記第１の表示手段へ同期して前記画像を表示させる制御を行う制御手段をさらに備えることを特徴とする請求項１ないし３のいずれか１項に記載の会議室制御システム。

Images