JP2005323139A - 会議記録装置、会議記録方法、設計方法およびプログラム - Google Patents

Abstract

【課題】 冗長性の少ない会議情報を捕捉できる会議記録装置を提供することを目的とする。
【解決手段】 会議記録装置１は、複数の撮影装置２と、複数の照明装置３と、複数の音響収録装置４と、各撮影装置２が撮影対象を協調して撮影するように各撮影装置の撮影領域を表現する領域情報を生成し、各照明装置３が撮影対象を協調して照明するように各照明装置３の照明領域を表現する領域情報を生成し、各音響収録装置４が協調して音響情報を収録するように各音響収録装置４の収録領域を表現する音響収録領域情報を生成する生成部と、生成部が生成した各領域情報を用いて各撮影装置２の撮影領域、各照明装置３の照明領域および各音響収録装置４を制御する制御手段とを有する。
【選択図】 図１

Description

本発明は、会議記録装置、会議記録方法、設計方法およびプログラムに関する。

従来、テレビ会議等の会議をビデオで撮影し、撮影された会議映像を利用する会議記録おいて、撮影される会議映像の品質を良好に維持するために、会議参加者の位置ないし音源位置を推定することによってカメラを制御するなどの方法が採られていた。具体的には、カメラ等を制御する装置や方法、あるいは会議で用いる什器や部屋の設計に関する従来技術には以下のようなものがある。

特許文献１記載の装置では、マイクロホン・アレーの各マイクに入力された音声信号の位相をシフトさせて合成することにより話者を特定し、不特定多数が参加する会議のカメラとマイクの制御を行うというものである。

特許文献２記載の装置は、複数のカメラ・アングルに対するアングル制御情報が複数のマイクに関連付けられて記憶された記憶装置を有し、使用されたマイクに関連したアングル制御情報に基づいてカメラ・アングルの制御を行うというものである。

特開平１０−１４５７６３号公報 特開２００２−１７１４９９号公報

しかしながら、特許文献１記載の装置は、テレビ会議において、音声データ等から音源を推定し、参加者の位置を推定することによってカメラ等を制御することを可能にするというものであるが、複数のカメラや複数の照明を会議の撮影用に用いた場合、撮影条件や照明条件等に重複が生じ、冗長性の少ない会議情報を捕捉することができないという問題がある。

また特許文献２記載の装置では、使用されたマイクに関連してカメラ・アングルを制御できるものの、会議室の環境は変化するため、マイクに関連付けるという固定的な制御では撮影条件等に重複が生じ、冗長性の少ない会議情報を捕捉することができないという問題がある。

そこで、本発明は上記問題点に鑑みてなされたもので、冗長性の少ない会議情報を捕捉できる会議記録装置、会議記録方法、設計方法またはプログラムを提供することを目的とする。

上記課題を解決するために、本発明は、請求項１に記載のように、複数の撮影手段と、前記各撮影手段が撮影対象を協調して撮影するように前記各撮影手段の撮影領域を表現する撮影領域情報を生成する生成手段と、前記生成手段が生成した各撮影領域情報を用いて前記各撮影手段の撮影領域を制御する制御手段とを有することを特徴とする会議記録装置である。請求項１記載の発明によれば、各撮影手段が撮影対象を協調して撮影するように各撮影手段の撮影領域を表現する撮影領域情報を生成し、各撮影領域情報を用いて各撮影手段の撮影領域を制御するので、冗長性の少ない複数の映像を得ることができる。

本発明は、請求項２に記載のように、複数の照明手段と、前記各照明手段が撮影対象を協調して照明するように前記各照明手段の照明領域を表現する照明領域情報を生成する生成手段と、前記生成手段が生成した各照明領域情報を用いて前記各照明手段の照明領域を制御する制御手段とを有することを特徴とする会議記録装置である。請求項２記載の発明によれば、各照明手段が撮影対象を協調して照明するように各照明手段の照明領域を表現する照明領域情報を生成し、各照明領域情報を用いて各照明手段の照明領域を制御するので、冗長性の少ない複数の照明が可能となる。

本発明は、請求項３に記載のように、複数の音響収録手段と、前記各音響収録手段が協調して音響情報を収録するように前記各音響収録手段の音響収録領域を表現する音響収録領域情報を生成する生成手段と、前記生成手段が生成した各音響収録領域情報を用いて前記各音響収録手段の音響収録領域を制御する制御手段とを有することを特徴とする会議記録装置である。請求項３記載の発明によれば、各音響収録手段が協調して音響情報を収録するように各音響収録手段の音響収録領域を表現する音響収録領域情報を生成し、各音響収録領域情報を用いて各音響収録手段の音響収録領域を制御するので、冗長性の少ない複数の音響情報の収録が可能となる。

本発明は、請求項４に記載のように、請求項１記載の会議記録装置において、更に、複数の照明手段を有し、前記生成手段は、前記各照明手段が撮影対象を協調して照明するように前記各照明手段の照明領域を表現する照明領域情報を生成し、前記制御手段は、前記生成手段が生成した各照明領域情報を用いて前記各照明手段の照明領域を制御することを特徴とする。請求項４記載の発明によれば、各照明手段が撮影対象を協調して照明するように各照明手段の照明領域を表現する照明領域情報を生成し、各照明領域情報を用いて各照明手段の照明領域を制御するので、冗長性の少ない複数の照明が可能となる。

本発明は、請求項５に記載のように、請求項１または請求項４記載の会議記録装置において、更に、複数の音響収録手段を有し、前記生成手段は、前記各音響収録手段が協調して音響情報を収録するように前記各音響収録手段の音響収録領域を表現する音響収録領域情報を生成し、前記制御手段は、前記各音響収録領域情報を用いて前記各音響収録手段の音響収録領域を制御することを特徴とする。請求項５記載の発明によれば、各音響収録手段が協調して音響情報を収録するように各音響収録手段の音響収録領域を表現する音響収録領域情報を生成し、各音響収録領域情報を用いて各音響収録手段の音響収録領域を制御するので、冗長性の少ない複数の音響情報の収録が可能となる。

本発明は、請求項６に記載のように、請求項５記載の会議記録装置において、前記生成手段は、前記各撮影手段、前記各照明手段および前記各音響収録手段をそれぞれ時間的に排他制御するように前記各撮影領域情報、前記各照明領域情報および前記音響収録領域情報を生成することを特徴とする。請求項６記載の発明によれば、時間的な排他制御が可能となる。これにより全体の制御が容易となる。制御中以外のものを固定することで時間的な排他制御が可能となる。

本発明は、請求項７に記載のように、請求項１、請求項５または請求項６記載の会議記録装置において、前記生成手段は、前記各撮影手段が三次元空間上の異なる空間を撮影するように前記各撮影領域情報を生成することを特徴とする。請求項７記載の発明によれば、各撮影手段が三次元空間上の異なる空間を撮影するように撮影領域情報を生成することで、各撮影手段を空間的に排他制御することができる。これにより冗長性の少ない複数の映像が得られる。

本発明は、請求項８に記載のように、請求項２または請求項４から請求項７のいずれか一項に記載の会議記録装置において、前記生成手段は、前記各照明手段が三次元空間上の異なる空間を照明するように前記各照明領域情報を生成することを特徴とする。請求項８記載の発明によれば、各照明手段が三次元空間上の異なる空間を照明するように各照明領域情報を生成することで、各照明手段を空間的に排他制御することができる。これにより冗長性の少ない複数の照明が可能となる。

本発明は、請求項９記載のように、請求項３から請求項８のいずれか一項に記載の会議記録装置において、前記生成手段は、前記各音響収録手段が三次元空間上の異なる空間で発生する音響情報を収録するように前記各音響収録領域情報を生成することを特徴とする。請求項９記載の発明によれば、各音響収録手段が三次元空間上の異なる空間で発生する音響情報を収録するように各音響収録領域情報を生成するので、各音響収録手段を空間的に排他制御することができる。これにより冗長性の少ない複数の音響収録が可能となる。

本発明は、請求項１０に記載のように、請求項１から請求項９のいずれか一項に記載の会議記録装置において、前記生成手段は、冗長性を表現する関数を含む評価関数を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項１０記載の発明によれば、撮影領域、照明領域、音響収録領域が重ならないようにし、内容的な冗長性を小さくできる。

本発明は、請求項１１に記載のように、請求項５から請求項１０のいずれか一項に記載の会議記録装置において、前記生成手段は、前記各撮影手段で撮影した映像を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項１１記載の発明によれば、各撮影手段で撮影された映像を用いて会議室内の事情を考慮した撮影領域情報、照明領域情報または音声領域情報を生成できる。

本発明は、請求項１２に記載のように、請求項１１記載の会議記録装置において、前記生成手段は、前記撮影手段で撮影された映像中の人物が存在する領域に基づいて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項１２記載の発明によれば、人物の存在を考慮した空間的な排他制御が可能となる。これにより冗長性の少ない映像が得られる。

本発明は、請求項１３に記載のように、請求項１１記載の会議記録装置において、前記生成手段は、前記撮影手段で撮影された映像中の人物相互の見詰め合いまたは人物のホワイトボードへの凝視を検出し、該検出結果を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項１３記載の発明によれば、人物相互の見詰め合いまたは人物のホワイトボードへの凝視を含んだ映像を取得することができる。

本発明は、請求項１４に記載のように、請求項５から請求項１３記載のいずれか一項に記載の会議記録装置において、前記生成手段は、前記各音響収録手段で収録した音響情報を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項１４記載の発明によれば、音響収録手段で収録した音響情報を考慮した撮影領域情報、照明音響収録領域情報を生成できる。

本発明は、請求項１５に記載のように、請求項１４記載の会議記録装置において、前記生成手段は、前記音響収録手段で収録した音響情報を用いて推定された音源位置から前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項１５記載の発明によれば、音源位置から人物の存在を検出し、人物の存在を考慮した空間的な排他制御が可能となる。これにより冗長性の少ない映像が得られる。

本発明は、請求項１６に記載のように、請求項１４記載の会議記録装置において、前記生成手段は、前記各音響収録手段で収録した音響情報を音声認識技術を利用して議論または独り言を検出し、該検出結果に応じて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項１６記載の発明によれば、議論または独り言を含む映像を取得できる。

本発明は、請求項１７に記載のように、請求項５から請求項１６のいずれか一項に記載の会議記録装置において、前記生成手段は、会議参加者の位置、会議参加者の姿勢、会議参加者の頭部の位置および方向、会議参加者の可視聴範囲、並びに会議参加者の可動範囲のうちの少なくともいずれか一つを用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項１７記載の発明によれば、参加者の状態を考慮した妥当な撮影領域情報、照明領域情報または音響収録領域情報が生成できる。

本発明は、請求項１８に記載のように、請求項５から請求項１７のいずれか一項に記載の会議記録装置において、前記生成手段は、前記各撮影手段の位置情報、前記照明手段の位置情報または前記音響収録手段の位置情報を用いて、前記撮影領域情報、前記照明領域情報または前記音響収録領域情報を生成することを特徴とする。請求項１８記載の発明によれば、各撮影手段の位置情報、照明手段の位置情報または音響収録手段の位置情報を考慮した妥当な撮影領域情報、照明領域情報または音響収録領域情報の生成が可能となる。

本発明は、請求項１９に記載のように、請求項５から請求項１８のいずれか一項に記載の会議記録装置において、前記生成手段は、第１の時点における前記各撮影領域情報、前記各照明領域情報および前記各音響収録領域情報を用いて、第１の時点の次の第２の時点の前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項１９記載の発明によれば、第２の時点の撮影領域情報、照明領域情報または音響領域情報は、第１の時点の撮影領域情報、照明領域情報または音響領域情報により決定される。

本発明は、請求項２０に記載のように、請求項５から請求項１９のいずれか一項に記載の会議記録装置において、前記生成手段は、所定の会議室内に配置された什器に関する情報を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする。請求項２０記載の発明によれば、会議室内に配置された什器を考慮した妥当な撮影領域情報、照明領域情報、音響収録領域情報を生成できる。

また本発明は、請求項２１に記載のように、請求項２０記載の会議記録装置において、前記会議室に設置された什器に関する情報は、会議参加者に共有されるテーブル、ホワイトボードまたは会議参加者に使用される椅子の位置、向き、大きさ、形状または色を含む。

本発明は、請求項２２に記載のように、請求項５から請求項２１のいずれか一項に記載の会議記録装置において、前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報は、前記各撮影手段、前記各照明手段または前記各音響収録手段の識別子、座標、法線とのなす角度、方位角、立体角、仕様および対象までの距離うちの少なくともいずれか一つを含む。

本発明は、請求項２３に記載のように、請求項２または請求項４から請求項２２のいずれか一項に記載の会議記録装置において、前記生成手段は、会議室内の照度または輝度に応じて前記照明領域情報を生成することを特徴とする。請求項２３記載の発明によれば、会議室内の照度または輝度に応じて各照明手段を制御できる。

本発明は、請求項２４に記載のように、請求項５から請求項２３のいずれか一項に記載の会議記録装置において、前記制御手段は、前記各撮影手段、前記各照明手段および前記各音響収録装置のそれぞれに対応して設けられていることを特徴とする。

本発明は、請求項２５に記載のように、請求項５から請求項２４のいずれか一項に記載の会議記録装置において、前記生成手段は、前記各撮影手段、前記各照明手段および前記各音響収録装置のそれぞれに対応して設けられていることを特徴とする。

本発明は、請求項２６に記載のように、請求項２５記載の会議記録装置において、前記会議記録装置は更に、前記各生成手段が生成した撮影領域情報、照明領域情報または音響収録領域情報を他の生成手段との間で送受信する通信手段を有することを特徴とする。請求項２６記載の発明によれば、通信手段により各生成手段が生成した撮影領域情報、照明領域情報または音響収録領域情報を他の生成手段との間で送受信できる。

本発明は、請求項２７に記載のように、請求項５から請求項２６のいずれか一項に記載の会議記録装置において、前記会議記録装置は更に、前記各撮影手段、前記各照明手段または前記各音響収録手段を駆動させる駆動手段を有することを特徴とする。請求項２７記載の発明によれば、各撮影手段、各照明手段または各音響収録手段を移動させることができる。

本発明は、請求項２８に記載のように、請求項５から請求項２７のいずれか一項に記載の会議記録装置において、前記会議記録装置は更に、前記各撮影手段、前記各照明手段または前記各音響収録手段を制御するためのグラフィカル・ユーザ・インタフェースを表示する手段を有することを特徴とする。請求項２８記載の発明によれば、グラフィカル・ユーザ・インタフェースを用いて各撮影手段、各照明手段または各音響収録手段を制御することができる。

本発明は、請求項２９に記載のように、請求項２８記載の会議記録装置において、前記グラフィカル・ユーザ・インタフェースは、会議室を設定するアイコン、什器を設定するアイコン、前記撮影手段を設定するアイコン、前記照明手段を設定するアイコン、前記音響収録手段を設定するアイコン、これらをドラッグ・アンド・ドロップして作業するための作業領域、前記撮影手段による撮影領域を設定するアイコン、前記照明手段による照明領域を設定するアイコンおよび前記音響収録手段による音響収録領域を設定するアイコンのうちの少なくともいずれか一つを含む。請求項２９記載の発明によれば、グラフィカル・ユーザ・インタフェース中のアイコンを用いて会議記録装置を制御することができる。これにより冗長性の少ない複数の映像が得られる。

本発明は、請求項３０に記載のように、請求項２８または請求項２９記載の会議記録装置において、前記作業領域は、前記各アイコンを二次元的または三次元の空間で表現することを特徴とする。

本発明は、請求項３１に記載のように、複数の撮影手段が撮影対象を協調して撮影するように該各撮影手段の撮影領域を表現する撮影領域情報を生成する生成ステップと、複数の照明手段が撮影対象を協調して照明するように該各照明手段の照明領域を表現する照明領域情報を生成する生成ステップと、複数の音響収録手段が協調して音響情報を収録するように該各音響収録手段の音響収録領域を表現する音響収録領域情報を生成する生成ステップと、前記各生成ステップで生成した各撮影領域情報、各照明領域情報および各音響収録領域情報を用いて前記各撮影手段の撮影領域、前記各照明手段の照明領域および前記各音響収録手段の音響収録領域を制御する制御ステップとを有することを特徴とする会議記録方法である。請求項３１記載の発明によれば、冗長性の少ない複数の映像を得ることができる。

本発明は、請求項３２に記載のように、複数の撮影手段が撮影対象を協調して撮影するように該各撮影手段の撮影領域を表現する撮影領域情報を生成する生成ステップ、複数の照明手段が撮影対象を協調して照明するように該各照明手段の照明領域を表現する照明領域情報を生成する生成ステップ、複数の音響収録手段が協調して音響情報を収録するように該各音響収録手段の音響収録領域を表現する音響収録領域情報を生成する生成ステップ、前記各生成ステップで生成した各撮影領域情報、各照明領域情報および各音響収録領域情報を用いて前記各撮影手段の撮影領域、前記各照明手段の照明領域および前記各音響収録手段の音響収録領域を制御する制御ステップをコンピュータに実行させるためのプログラムである。請求項３２記載の発明によれば、冗長性の少ない複数の映像を得ることができる。

本発明は、請求項３３に記載のように、グラフィカル・ユーザ・インタフェース内の作業領域にドラッグ・アンド・ドロップされた会議室アイコンに応じて会議室の情報を設定するステップと、前記作業領域にドラッグ・アンド・ドロップされた什器アイコンに応じて什器の情報を設定するステップと、前記作業領域にドラッグ・アンド・ドロップされた撮影装置アイコンに応じて撮影装置の情報を設定するステップと、前記作業領域にドラッグ・アンド・ドロップされた会議参加者アイコンに応じて会議参加者の情報を設定するステップと、所定の属性アイコンの操作に応じて参加者の属性情報を設定するステップと、前記設定された情報に応じて設計対象を設計する設計ステップと、前記設計ステップで設計された設計対象を表示するステップとを含むことを特徴とする設計方法である。請求項３３記載の発明によれば、設定された情報に応じて設計対象を設計し、これを表示させることができる。

本発明は、請求項３４に記載のように、請求項３３記載の設計方法において、更に、 前記作業領域にドラッグ・アンド・ドロップされた照明装置アイコンに応じて照明装置の情報を設定するステップと、前記作業領域にドラッグ・アンド・ドロップされた音響収録装置アイコンに応じて音響収録装置の情報を設定するステップと、前記作業領域にドラッグ・アンド・ドロップされた備品アイコンに応じて備品の情報を設定するステップとを含む。請求項３４記載の発明によれば、照明装置、音響装置および備品を考慮して設計対象を設計できる。

本発明は、請求項３５に記載のように、請求項３３または請求項３４記載の設計方法において、前記設計方法は更に、前記作業領域上で所定の属性アイコンの操作に応じて会議参加者の位置、会議参加者の見る範囲、会議参加者の姿勢、会議参加者の可視聴範囲および会議参加者の可動範囲のうちの少なくともいずれか一つを設定するステップを含む。請求項３５記載の発明によれば、会議参加者の位置、会議参加者の見る範囲、会議参加者の姿勢、会議参加者の可視聴範囲、会議参加者の可動範囲を考慮して設計対象を設計できる。

本発明は、請求項３６に記載のように、請求項３３から請求項３５のいずれか一項に記載の設計方法において、前記会議室の情報を設計するステップは、会議室の大きさ、形状、色、分光分布、反射率または透過率を設定することを特徴とする。請求項３６記載の発明によれば、会議室または什器の大きさ、形状、色、分光分布、反射率または透過率を考慮して前記設計対象を設計できる。

本発明は、請求項３７に記載のように、請求項３３から請求項３６のいずれか一項に記載の設計方法において、前記什器の情報を設定するステップは、什器の大きさ、形状、色、分光分布、反射率または透過率を設定することを特徴とする。請求項３７記載の発明によれば、会議室または什器の大きさ、形状、色、分光分布、反射率または透過率を考慮して前記設計対象を設計できる。

本発明は、請求項３８に記載のように、請求項３２から請求項３７のいずれか一項に記載の設計方法において、前記設計対象は、会議室、ホワイトボードまたはテーブルもしくは椅子を含む什器である。請求項３８記載の発明によれば、例えば会議室、ホワイトボードまたはテーブルもしくは椅子を含む什器を設計できる。

本発明は、請求項３９に記載のように、グラフィカル・ユーザ・インタフェース内の作業領域にドラッグ・アンド・ドロップされた会議室アイコンに応じて会議室の情報を設定するステップ、前記作業領域にドラッグ・アンド・ドロップされた什器アイコンに応じて什器の情報を設定するステップ、前記作業領域にドラッグ・アンド・ドロップされた撮影装置アイコンに応じて撮影装置の情報を設定するステップ、前記作業領域にドラッグ・アンド・ドロップされた会議参加者アイコンに応じて会議参加者の情報を設定するステップ、所定の属性アイコンの操作に応じて参加者の属性情報を設定するステップ、前記設定された情報に応じて設計対象を設計する設計ステップをコンピュータに実行させるためのプログラムである。請求項３９記載の発明によれば、設定された情報に応じて設計対象を設計し、これを表示させることができる。

本発明によれば、冗長性の少ない会議情報を捕捉できる会議記録装置、会議記録方法、設計方法またはプログラムを提供できる。

以下、本発明を実施するための最良の形態について実施例を用いて説明する。

図１は実施例１に係る会議記録装置の構成例を示すブロック図である。図１に示すように、会議記録装置１は撮影装置２、照明装置３および音響収録装置４から構成される。撮影装置２、照明装置３および音響収録装置４は、複数設けられている。

各撮影装置２は、各撮影装置の撮影領域情報、各照明装置の照明領域情報、各音響収録装置の音響領域情報を参照し、各撮影装置が撮影対象を協調して撮影するように各撮影装置の撮影領域を表現する撮影領域情報を生成し、各撮影領域情報を用いて撮影領域を制御する。また各照明装置３は、各撮影装置の撮影領域情報、各照明装置の照明領域情報、各音響収録装置の音響領域情報を参照し、各照明装置が撮影対象を協調して照明するように各照明装置の照明領域を表現する照明領域情報を生成し、各照明領域情報を用いて照明領域を制御する。また各音響収録装置４は、各撮影装置の撮影領域情報、各照明装置の照明領域情報、各音響収録装置の音響領域情報を参照し、各音響収録装置が協調して音響情報を収録するように各音響収録装置の音響収録領域を表現する音響収録領域情報を生成し、各音響収録領域情報を用いて音響収録領域を制御する。これにより空間的または、時間的な排他制御が可能となる。次に撮影装置２、照明装置３および音響収録装置４について説明する。

図２は、撮影装置２の構成例を示すブロック図である。撮影装置２は、制御部５、撮影部６、視聴覚データ記録部７、表示部８、通信部９、撮影領域情報入力部１０、生成部１１、撮影領域情報記憶部１２、通信部１３、１４および１５、参加者情報入力部１６、参加者情報記憶部１７、駆動部１８、什器情報入力部１９、什器情報記憶部２０、環境情報入力部２１、環境情報記憶部２２およびデータ処理部２３から構成される。これらは、撮影装置２の内部のネットワーク、回線または回路等を介して相互に接続される。なお、他の撮影装置も同様の構成であるため説明は省略する。

撮影装置２は、撮影装置の撮影領域情報、各照明装置の照明領域情報、各音響収録装置の音響領域情報を参照し、各撮影装置が撮影対象を協調して撮影するように撮影領域を表現する撮影領域情報を生成し、この撮影領域情報を用いて撮影領域を制御する。制御部５は、撮影装置２全体を制御する。制御部５は、ＣＰＵ（Central Processing Unit）およびメモリー等から構成される。撮影部６は、会議を撮影し、撮影した視聴覚データを記憶部７に出力する。撮影部６は、ビデオ・カメラ等から構成される。以下では視聴覚データは動画データを含むものとする。記憶部７は、撮影部６から入力された視聴覚データを記録する。記録部７に記録された視聴覚データは、制御部５の制御に応じて、表示部８、通信部９またはデータ処理部２３に出力される。記憶部７は、例えばメモリーから構成される。なお、以下他の記憶部も同様にメモリーから構成される。表示部８は、記録部７から入力された視聴覚データを利用者に表示する。表示部８は、例えばディスプレイから構成される。

通信部９は、記録部７から入力された視聴覚データを制御部５の制御に応じて外部機器に伝送する。通信部１３は、例えばＬＡＮアダプター等から構成される。なお、通信部１３を構成するＬＡＮアダプターは、有線または無線の通信機器を用いて構成することができる。以下他の通信部も同様にＬＡＮアダプター等から構成される。

撮影領域情報入力部１０は、撮影装置２に固有な撮影領域を表現する光軸ないし立体角等の撮影領域情報を入力するためのものである。撮影領域情報入力部１０は、例えばキーボード、グラフィカル・ユーザー・インターフェース等から構成される。なお、以下において入力部は、同様に例えばキーボード、グラフィカル・ユーザー・インターフェース等から構成される。撮影領域情報入力部１０を介して初期の撮影領域情報を入力してもよい。生成部１１は、撮影領域情報入力部１０から入力された撮影領域情報を処理し、処理の結果、更新した撮影領域情報を記憶部１２に格納する。この生成部１１は、例えばＣＰＵおよびメモリー等から構成される。記憶部１２は、撮影領域情報を記憶し、制御部５の制御に応じて、撮影領域情報を通信部１３に出力する。

通信部１３は、撮影領域情報を他の撮影装置２、照明装置３または音響収録装置４に送信する。通信部１３は、他の撮影装置２から送信された撮影領域情報を受信し、生成部１１に出力する。通信部１４は、照明装置３から送信された照明領域情報を受信し、生成部１１に出力する。通信部１５は、音響収録装置から送信された照明領域情報を受信し、生成部１１に出力する。参加者情報入力部１６は、会議参加者の位置、会議参加者の姿勢、会議参加者の頭部の位置および方向、会議参加者の可視聴範囲、会議参加者の可動範囲等会議参加者の関連情報を会議参加者関連情報として入力するものである。これにより参加者の状態を考慮した制御が可能となる。

記憶部１７は、参加者情報入力部１６から入力された会議参加者関連情報を記憶する。記憶部１７に記憶された会議参加者関連情報は、制御部５の制御に応じて、生成部１１に出力される。

什器情報入力部１９は、会議参加者に共有されるテーブルもしくはホワイトボードまたは会議参加者によって使用される椅子等什器の位置、向き、大きさ、形状、色ないし領域等の什器情報を入力するものである。これらの情報を用いることで、会議室内の什器を考慮した制御が可能となる。記憶部２０は、什器情報を記憶する。記憶部２０に記憶された什器情報は、制御部５の制御に応じて、生成部１１に出力される。環境情報入力部２１は、会議が開催される場所の大きさ、形状、色、可視光等の電磁波ないし音波の反射率、什器のアフォーダンスに関する情報等の会議環境情報を入力するものである。記憶部２２は、環境情報入力部２１から入力された会議環境情報を記憶するものである。記憶部２２に記憶された会議環境情報は、制御部５の制御に応じて、生成部１１に出力される。

データ処理部２３は、記憶部７から入力された聴覚データを処理する。視聴覚データの処理結果は、制御部５の制御に応じて生成部１１に出力される。データ処理部２３は、ＣＰＵおよびメモリー等から構成される。

生成部１１は、記憶部１２から入力された撮影領域情報、通信部１３から入力された他の撮影装置の撮影領域情報、通信部１４から入力された照明装置３の照明領域情報、通信部１５から入力された音響収録装置４の音響収録領域情報、記憶部１７から入力された会議参加者関連情報、記憶部２０から入力された什器情報、記憶部２２から入力された会議環境情報、データ処理部２３から入力された視聴覚データ処理結果等に基づいて、各撮影装置２が撮影対象を協調して撮影するように新たな撮影領域情報を生成し、この撮影領域情報を記憶部１２に格納する。

駆動部１８は、ビデオ・カメラのパン、チルト、ズームを行うモーター等および撮影装置２を移動させるためのモーター等から構成される。この駆動部１８は、ビデオ・カメラのパン、チルト、ズーム制御および撮影装置２の移動を行うことで、撮影装置の撮影領域を変更する。したがって制御部５は、記憶部１２に記憶された撮影領域情報を用いて駆動部１８を介して撮影部６の撮影領域を制御する。各撮影装置２が、撮影対象を協調して撮影するように制御されているので、冗長性の少ない複数の映像を得ることができる。

次に照明装置３について説明する。図３は、照明装置３の構成例を示すブロック図である。照明装置３は、制御部２４、照明部２５、照明領域情報入力部２６、生成部２７、照明領域情報記憶部２８、通信部２９、３０および３１、駆動部３２、データ処理部３３、参加者情報入力部１６、参加者情報記憶部１７、什器情報入力部１９、什器情報記憶部２０、環境情報入力部２１および環境情報記憶部２２から構成される。これらは、照明装置３の内部のネットワーク、回線または回路等を介して相互に接続されている。なお各照明装置３は、同様の構成であるため他の照明装置３についての説明は省略する。照明装置３は、各撮影装置の撮影領域情報、各照明装置の照明領域情報、各音響収録装置の音響領域情報を参照し、各照明装置が撮影対象を協調して照明するように各照明装置の照明領域を表現する照明領域情報を生成し、この照明領域情報を用いて照明領域を制御する。制御部２４は、照明装置３全体を制御するものである。制御部２４は、ＣＰＵおよびメモリー等から構成される。照明部２５は、ランプないし蛍光灯および反射板等から構成され、会議室中の会議参加者や什器等を照明する。

照明領域情報入力部２６は、当該照明装置３に対応する固有の照明領域を表現する立体角等の照明領域情報を入力するものである。この照明領域情報入力部２６を介して初期の照明領域情報を入力してもよい。生成部２７は、照明領域情報入力部２６から入力された照明領域情報を処理して、記憶部２８に格納する。記憶部２８は、生成部２７から入力された照明領域情報を記憶する。通信部２９は、記憶部２８から入力された照明領域情報を他の照明装置３、撮影装置２または、音響収録装置４に送信する。

通信部２９は、他の照明装置３から送信された照明領域情報を受信し、生成部２７に出力する。通信部３０は、撮影装置２から送信された撮影領域情報を受信し、生成部２７に出力する。通信部３１は、音響収録装置４から送信された照明領域情報を受信し、生成部２７に出力する。

参加者情報入力部１６は、会議参加者の位置、会議参加者の姿勢、会議参加者の頭部の位置および方向、会議参加者の可視聴範囲、会議参加者の可動範囲等会議参加者の関連情報を会議参加者関連情報として入力するものである。これにより参加者の状態を考慮した制御が可能となる。記憶部１７は、入力された会議参加者関連情報を記憶する。記憶部１７に記憶された会議参加者関連情報は、制御部２４の制御に応じて、生成部２７に出力される。

什器情報入力部１９は、会議参加者に共有されるテーブルもしくはホワイトボードまたは会議参加者によって使用される椅子等什器の位置、向き、大きさ、形状、色ないし領域等の什器情報を入力するものである。これにより什器を考慮した制御が可能となる。記憶部２０は、什器情報入力部１９から入力された什器情報を記憶する。什器情報は、制御部２４の制御に応じて什器情報を生成部２７に出力する。

環境情報入力部２１は、会議が開催される場所の大きさ、形状、色、可視光等の電磁波ないし音波の反射率、什器のアフォーダンスに関する情報等の会議環境情報を入力するものである。これにより会議環境を考慮した制御が可能となる。記憶部２２は、環境情報入力部２１から入力された会議環境情報を記憶する。この会議環境情報は、制御部２４の制御に応じて、生成部２７に出力される。データ処理部３３は、照明に関するデータを処理し、処理結果を制御部２４の制御に応じて、生成部２７に出力する。

生成部２７は、記憶部２８から入力された照明領域情報、通信部２９から入力された他の照明装置３の照明領域情報、通信部３０から入力さらた撮影装置２の撮影領域情報、通信部３１から入力された音響収録装置４の音響収録領域情報、記憶部１７から入力された会議参加者関連情報、記憶部２０から入力された什器情報、記憶部２２から入力された会議環境情報、またはデータ処理部３３から入力された照明データ処理結果等に基づいて、各撮影装置２が撮影対象を協調して照明するように照明領域情報を生成し、この照明領域情報を記憶部２８に格納する。

駆動部３２は、ライトないし蛍光灯のパン、チルトを行うモーター等および照明装置３を移動させるためのモーター等から構成される。駆動部３２は、ライトないし蛍光灯のパン、チルト制御および照明装置３の移動を行い、照明装置３の照明領域を制御する。したがって制御部２４は、記憶部２８に記憶された照明領域情報を用いて駆動部３２を介して照明部２５の撮影領域を制御する。各照明装置３が、撮影対象を協調して照明するように制御されているので、冗長性の少ない複数の照明が可能となる。

次に音響収録装置４について説明する。図４は、音響収録装置４の構成例を示すブロック図である。音響収録装置４は、制御部３４、音響収録部３５、視聴覚データ記録部３６、提示部３７、通信部３８、音響収録領域入力部３９、生成部４０、音響収録領域情報記憶部４１、通信部４２、４３および４４、駆動部４５、データ処理部４６、参加者情報入力部１６、参加者情報記憶部１７、什器情報入力部１９、什器情報記憶部２０、環境情報入力部２１および環境情報記憶部２２から構成される。これらは、音響収録装置４の内部のネットワーク、回線または回路等を介して相互に接続されている。なお他の音響収録装置４も同様の構成であるため説明を省略する。

各音響収録装置４は、各撮影装置の撮影領域情報、各照明装置の照明領域情報、各音響収録装置の音響領域情報を参照し、各音響収録装置が協調して音響情報を収録するように各音響収録装置の音響収録領域を表現する音響収録領域情報を生成し、この音響収録領域情報を用いて音響収録領域を制御する。制御部３４は、音響収録装置４全体を制御する。この制御部３４は、ＣＰＵおよびメモリー等から構成される。音響収録部３５は、会議参加者により発話される音響、会議の場で発生する音等の視聴覚データを収録する。視聴覚データは、音響データを含む。音響収録部３５は、マイク、アンプ、音響データのモニター用のスピーカーないしヘッドホン等から構成される。

記録部３６は、音響収録部３５から入力された視聴覚データを記憶する。記録部３６に記録された視聴覚データは、制御部３４の制御に応じて、提示部３７、通信部３８およびデータ処理部４６に出力される。提示部３７は、記録部３６から入力した視聴覚データを利用者に提示する。提示部３７は、スピーカー等から構成される。通信部３８は、制御部３４の制御に応じて、記録部３６から入力された視聴覚データを外部機器に伝送する。

音響収録領域入力部３９は、音響収録装置4に固有な音響収録領域を表現する立体角等の音響収録領域情報を入力する。この音響収録領域入力部３９を介して初期の音響収録領域情報を入力する。生成部４０は、音響収録領域入力部３９から入力された音響収録領域情報を処理し、処理した音響収録領域情報を記憶部４１に出力する。生成部４０は、ＣＰＵおよびメモリー等から構成される。記憶部４１は、生成部４０から入力された音響収録領域情報を記憶するものである。記憶部４１に記憶された音響収録領域情報は、制御部３４の制御に応じて通信部４２に出力される。

通信部４２は、記憶部４１から入力された音響収録領域情報を撮影装置２、照明装置３または、他の音響収録装置４に送信する。また通信部４２は、他の音響収録装置４から送信された音響収録領域情報を受信し、生成部４０に出力する。通信部４３は、撮影装置２から送信された撮影領域情報を受信し、生成部４０に出力する。通信部４４は、照明装置３から送信された照明領域情報を受信し、生成部４０に出力する。

参加者情報入力部１６は、会議参加者の位置、会議参加者の姿勢、会議参加者の頭部の位置および方向、会議参加者の可視聴範囲、会議参加者の可動範囲等会議参加者の関連情報を会議参加者関連情報として入力するものである。これにより参加者の状態を考慮した制御が可能となる。記憶部１７は、参加者情報入力部１６から入力された会議参加者関連情報を記憶する。記憶部１７に記録された会議参加者関連情報は、制御部３４の制御に応じて、生成部４０に出力する。

什器情報入力部１９は、会議参加者に共有されるテーブル、ホワイトボードまたは会議参加者によって使用される椅子等什器の位置、向き、大きさ、形状、色または領域等の什器情報を入力するものである。これにより什器を考慮した制御が可能となる。記憶部２０は、什器情報入力部１９から入力された什器情報を記憶する。記憶部２０に記憶された什器情報は、制御部３４の制御に応じて生成部４０に出力される。

環境情報入力部２１は、会議が開催される場所の大きさ、形状、色、可視光等の電磁波ないし音波の反射率、什器のアフォーダンスに関する情報等の会議環境情報を入力するものである。これにより会議室の環境を考慮した制御が可能となる。記憶部２２は、環境情報入力部２１から入力された会議環境情報を記憶する。記憶部２２に記憶された会議環境情報は、制御部３４の制御に応じて、生成部４０に出力される。データ処理部４６は、記録部３６から入力された視聴覚データを処理し、制御部３４の制御に応じて、視聴覚データの処理結果を生成部４０に出力する。

また生成部４０は、記憶部４１から入力された音響収録領域情報、通信部４２から入力された他の音響収録装置４の音響収録領域情報、通信部４３から入力された撮影装置２の撮影領域情報、通信部４４から入力された照明装置３の照明領域情報、記憶部１７から入力された会議参加者関連情報、記憶部２０から入力された什器情報、記憶部２２から入力された会議環境情報、またはデータ処理部４６から入力された視聴覚データ処理結果等に基づいて、各音響収録装置４が協調して音響情報を収録するように音響収録領域情報を生成し、この音響収録領域情報を記憶部４１に格納する。

駆動部４５は、マイクの方向や角度の制御を行うモーター等および音響収録装置４を移動させるためのモーター等から構成される。駆動部４５は、マイクの位置および角度制御および音響収録部４の移動を行うことで、音響収録部４の音響収録範囲を変更する。したがって制御部３４は、記憶部４１に記憶された音響収録領域情報を用いて駆動部４５を介して音響収録部３５の音響収録領域を制御する。各音響収録装置４が、協調して音響情報を収録するように制御されるので、冗長性の少ない複数の視聴覚データないし音響データあるいは音声データの収録が可能となる。

次に撮影領域情報を表現するデータについて説明する。図５は、撮影領域情報に関するパラメータ説明する図である。図５において、撮影装置２は、三次元空間上の点Pの位置に配置されているものとする。また撮影装置２の撮影方向上の点Ｑと点Ｐとを結ぶ直線ＰＱとＸＹ平面上の点Ｐと交差するＸＹ平面に対する法線（直線ＰＺ）とのなす角度をＴとする。また撮影対象は、点Ｑに位置するものとする。点ＱをＸＹ平面上に射影した点を点Ｕとする。直線ＰＵとＸ軸とのなす角度をＶとする。点Ｐを中心とした単位球と直線ＰＱの交点を含む円錐を考え、当該円錐に関連する立体角をＷと表現するものとする。また直線ＰＱ間の距離をＲで表現するものとする。

撮影領域情報は、上記の点Ｐの座標（Ｘ，Ｙ，Ｚ）、法線となす角度Ｔ、直線ＰＵとＸ軸とのなす角度Ｖ、立体角Ｗ、対象までの距離Ｒおよび撮影装置２ないしカメラの仕様並びに各パラメータを特定した時刻ｔで表現することができる。ここで、直線ＰＵとＸ軸とのなす角度Ｖを便宜的に方位角と呼ぶことにする。なお、照明領域および音響収録領域についても撮影領域情報を同様に表現されるので説明を省略する。

図６は、撮影領域情報記憶部１２で保持される撮影領域情報を表現する撮影領域情報テーブル４７を示す図である。この撮影領域情報テーブル４７は、記憶部１２に格納されている。撮影領域情報テーブル４７は、生成部１１により書き換えられる。撮影領域情報テーブル４７は、撮影装置識別子４７ａ、座標４７ｂ、法線とのなす角度４７ｃ、方位角４７ｄ、 立体角４７ｅ、距離４７ｆ、カメラ仕様４７ｇおよび時刻４７ｈを含む。

図６に示すように、第１の撮影装置において、撮影装置識別子４７ａは「ＣＡＭ０」、座標４７ｂ「（０，０，０）」、法線とのなす角度４７ｃは「Ｔ＝４５°」、方位角４７ｄは「Ｖ＝１０°」、 立体角４７ｅ「Ｗ＝１」、距離４７ｆ「Ｒ＝１」、カメラ仕様４７ｇ「パン・チルト・ズーム可能カメラＡ」および時刻４７ｈ「１」を含む。

また第２の撮影装置において、撮影装置識別子４７ａは「ＣＡＭ１」、座標４７ｂ「（０，１，０）」、法線とのなす角度４７ｃは「Ｔ＝６０°」、方位角４７ｄは「Ｖ＝２°」、 立体角４７ｅ「Ｗ＝２」、距離４７ｆ「Ｒ＝２」、カメラ仕様４７ｇ「パン・チルト・ズーム可能カメラＢ」および時刻４７ｈ「２」を含む。また、第３の撮影装置において、撮影装置識別子４７ａは「ＣＡＭ２」、座標４７ｂ「（１，１，０）」、法線とのなす角度４７ｃは「Ｔ＝７０°」、方位角４７ｄは「Ｖ＝３°」、 立体角４７ｅ「Ｗ＝３」、距離４７ｆ「Ｒ＝２」、カメラ仕様４７ｇ「パン・チルト・ズーム可能カメラＣ」および時刻４７ｈ「３」を含む。

次に照明領域情報を表現するデータについて説明する。照明領域情報は撮影領域情報と同様に、照明装置３の座標（Ｘ’，Ｙ’，Z’）、法線となす角度Ｔ’、方位角Ｖ’、立体角Ｗ’、距離Ｒ’および照明装置３ないしライトの仕様 並びに各パラメータを特定した時刻ｔ’で表現することができる。

図７は、照明領域情報記憶部２８に記憶される照明領域情報を表現する照明領域情報テーブル４８を示す図である。この照明領域情報テーブル４８は、記憶部２８に格納されている。この照明領域情報テーブル４８は、生成部２７により書き換えられる。照明領域情報テーブル４８は、照明装置識別子４８ａ、座標４８ｂ、法線とのなす角度４８ｃ、方位角４８ｄ、立体角４８ｅ、距離４８ｆ、ライト仕様４８ｇおよび時刻４８ｈを含む。

図７に示すように、第１の照明装置は、照明装置識別子４８ａ「ＬＩＧＨＴ０」、座標４８ｂ「（０，０，１）」、法線とのなす角度４８ｃ「Ｔ’＝４５°」、方位角４８ｄ「Ｖ’＝１１°」、立体角４８ｅ「Ｗ’＝１」、距離４８ｆ「Ｒ’＝１」、ライト仕様４８ｇ「照明Ａ」および時刻４８ｈ「４」を含む。また第２の照明装置は、照明装置識別子４８ａ「ＬＩＧＨＴ１」、座標４８ｂ「（０，１，１）」、法線とのなす角度４８ｃ「Ｔ’＝６０°」、方位角４８ｄ「Ｖ’＝３°」、立体角４８ｅ「Ｗ’＝２」、距離４８ｆ「Ｒ’＝２」、ライト仕様４８ｇ「照明Ｂ」および時刻４８ｈ「５」を含む。

次に音響収録領域情報を表現するデータについて説明する。音響収録領域情報は、撮影領域情報と同様に、音響収録装置４の座標（Ｘ’’, Ｙ’’,Ｚ’’）、法線となす角度Ｔ’’、方位角V’’、立体角W’’、距離R’’および音響収録装置４ないしマイクの仕様並びに各パラメータを特定した時刻ｔ’’で表現することができる。図８は、記憶部４１で保持される音響収録領域情報を表現する音響収録領域情報テーブル４９を示す図である。

音響収録領域情報テーブル４９は、記憶部４１に格納されている。音響収録領域情報テーブル４９は、生成部４０により書き換えられる。音響収録領域情報テーブル４９は、音響収録装置識別子４９ａ、座標４９ｂ、法線とのなす角度４９ｃ、方位角４９ｄ、立体角４９ｅ、距離４９ｆ、マイク仕様４９ｇおよび時刻４９ｈで構成される。図８に示すように、第１の音響収録装置は、音響収録装置識別子４９ａ「ＭＩＣ０」、座標４９ｂ「（０，０，０）」、法線とのなす角度４９ｃ「Ｔ’’＝４５°」、方位角４９ｄ「Ｖ’’＝１°」、立体角４９ｅ「Ｗ’’＝１」、距離４９ｆ「Ｒ’’＝１」、マイク仕様４９ｇ「マイクＡ」および時刻４９ｈ「６」を含む。また第２の音響収録装置は、音響収録装置識別子４９ａ「ＭＩＣ１」、座標４９ｂ「（０，０，１）」、法線とのなす角度４９ｃ「Ｔ’’＝６０°」、方位角４９ｄ「Ｖ’’＝３°」、立体角４９ｅ「Ｗ’’＝２」、距離４９ｆ「Ｒ’’＝２」、マイク仕様４９ｇ「マイクＢ」および時刻４９ｈ「７」を含む。

ここで、法線とのなす角度４９ｃ、方位角４９ｄ、立体角４９ｅ等は、従来技術の音源位置定位方法を利用することによって特定することができる。例えば音源位置定位方法の一つとして中島らの”音圧差情報負荷による音源定位システムの性能改善”,電子情報通信学会論文誌VOL.J87-D-II No.3, 2004,pp.919-922を利用することができる。上記生成部１１、２７および４０は、各撮影装置２の位置情報（座標４７ｂ）、照明装置３の位置情報（座標４８ｂ）または音響収録装置４の位置情報（座標４８ｂ）を用いて、撮影領域情報、照明領域情報または音響収録領域情報を生成する。

次に、撮影装置２における撮影手続きについて説明する。図９は、撮影装置２における撮影手続きを示すフローチャートである。図９に示すように、撮影手続きは撮影装置初期化ステップＳ１、視聴覚データ取得ステップＳ２、撮影領域情報生成・更新ステップＳ３、撮影領域情報伝送ステップＳ４および撮影装置駆動ステップＳ５を含む。ステップＳ１で、撮影装置２の制御部５は、撮影装置２の各部を初期化する。ステップＳ２で、撮影部６は、会議を撮影し、撮影した動画データないし視聴覚データを記憶部７に出力する。一方、記憶部７は、制御部５の制御に応じて、視聴覚データを表示部８、視聴覚データ通信部９または視聴覚データ処理部２３に出力する。

ステップＳ３で、生成部１１は、記憶部１２から入力された更新前の撮影領域情報、通信部１３から入力された他の照明装置の撮影領域情報、通信部１４から入力された照明装置の照明領域情報、通信部１５から入力された音響収録装置の音響収録領域情報、記憶部１７から入力された会議参加者関連情報、記憶部２０から入力された什器情報、記憶部２２から入力された会議環境情報、または視聴覚データ処理部２３から入力された視聴覚データ処理結果等に基づいて、各撮影装置２が撮影対象を協調して撮影するように新たな撮影領域情報を生成する。

生成部１１は、生成した撮影領域情報を記憶部１２に格納する。これにより図６に示した撮影領域情報テーブル４７の内容が更新される。さらに記憶部１２は、制御部５の制御に応じて保持した撮影領域情報を通信部１３に出力する。なお、各撮影装置２で撮影した視聴覚データから人の特徴量に基づいて人が存在する領域を抽出し、当該抽出された領域情報から撮影領域情報を生成するようにしてもよい。また照明装置３または音響収録装置４でも、上記人が存在する領域を用いて、照明領域情報または音響収録領域情報を生成するようにしてもよい。

この人の特徴量に基づいて人が存在する領域を抽出する方法として、従来技術である井出らの”ニュース映像における人物の分離による背景の場面推定”,電子情報通信学会論文誌D-II Vol. J84-D-II No.8 pp.1856-1863 2001年8月,に記載されている「顔領域を基準として人物領域を決定するテンプレート」等を応用することができる。つまり、撮影対象を人物であるとした場合、当該顔領域を基準として人物領域を決定するテンプレート等を用いて人物領域を特定することにより、人物領域に対応する立体角Ｗを特定することができる。生成部１１は、撮影装置２の撮影部６で撮影した視聴覚データを基に立体角Ｗを特定し、記憶部１２内の撮影領域情報テーブル４７に格納する。

また法線とのなす角Ｔや方位角Ｖなどはカメラなどの撮影部６から特定することができる。また対象となる人物までの距離Ｒは従来のステレオ視によるいわゆる距離画像などを用いて特定することができる。ステレオ視による距離画像の取得方法としては佐川らの”複数視点からの距離画像を用いた高速表面再構築法-ロボット用実時間時空間再構成の研究(その5)-”,第１７回日本ロボット学会学術講演会(1999年9月)などを用いることができる。生成部１１は、法線とのなす角Ｔや方位角Ｖなどはカメラなどの撮影部６から特定し、記憶部１２内の撮影領域情報テーブル４７に格納する。

次に、撮影領域情報生成部１１の手続きについて補足説明する。生成部１１は、各撮影装置２が会議記録として必要十分な視聴覚データないし映像データを記録可能なように自己の撮影装置２の初期の(もしくは前回ないし過去の)撮影領域情報および他の撮影装置２の撮影領域情報等に基づいて、新たな撮影領域情報を生成する。撮影領域情報の演算方法として、各撮影装置２の撮影領域が可能な限り重ならないように、すなわち全体の視聴覚データに内容的な冗長性が小さくなるように撮影領域情報を生成する。

また撮影領域情報の演算方法として、各撮影装置２の撮影領域において、前述の方法によって特定した人物領域が最大となるように撮影領域情報を演算処理するとよい。そこで、撮影領域情報の演算方法を決定するための評価関数として、冗長性を表現する関数の逆数と各撮影装置２における人物領域を表現する関数とで構成される評価関数を定義する。生成部１１は、当該評価関数を用いて、当該評価関数が最大となるように撮影領域情報を演算する。

例えば時刻tにおける撮影装置２相互の撮影領域の重なりをOverlapBtwnCamAndCam(t)として冗長性を表現するものとすると、その逆数は１／OperlapBtwnCamAndCam(t)となる。また撮影装置２を番号付けし、その指標ないし番号をｉとし、時刻ｔにおけるｉ番目の撮影装置２の画面の全画素数をPixelsOfCamera(t, i)で表現し、時刻tにおけるｉ番目の撮影装置２に撮影されている人物領域をPixelsOfFigure(t, i)で表現したとすると、時刻tにおける撮影装置２における人物領域の有効度を表現する関数をPixelsOfFigure(t, i)/PixelsOfCamera(t, i)の総和として定義することができる。そこで、撮影領域情報の演算方法を決定するための評価関数Ecamera(t)を式１のように定義することができる。

ここで、式1中のａ、ｂおよびwは係数であり、ｉｍａｘは撮影装置２の総数である。また生成部１１は、通信部１４から入力された照明領域情報、通信部１５から入力された音響収録領域情報、記憶部１７から入力された会議参加者関連情報、記憶部２０から入力された什器情報および記憶部２２から入力された会議環境情報を利用して別の評価関数を定義ないし、その結果に基づいて撮影領域情報を変更することもできる。

例えば通信部１４から入力した照明領域情報に基づいて、時刻tにおけるｉ番目の撮影装置２の撮影領域とｊ番目の照明装置３の照明領域の相互の重なりを表現するOverlapBtwnCamAndLight(t, i, j)を定義することができる。同様に、通信部１５から入力された音響収録領域情報に基づいて、時刻ｔにおけるｉ番目の撮影装置２の撮影領域とｋ番目の音響収録装置４の音響収録領域の相互の重なりを表現するOverlapBtwnCamAndMic(t, i, k)を定義することができる。

前述の撮影領域に関する評価関数Ecamera(t)およびこれらのOverlapBtwnCamAndLight(t, i, j)およびOverlapBtwnCamAndMic(t, i, k)を用いて式２のように撮影領域に関する第二の評価関数Ecamera2(t)を定義することができる。

ここで、式２中のｃおよびｄは係数であり、ｊはｊ番目の照明装置３を表現する指標であり、ｊｍａｘは照明装置３の総数を表現する。またｋはｋ番目の音響収録装置４を表現する指標であり、ｋｍａｘは音響収録装置４の総数を表現する。また記憶部１７から入力された会議参加者関連情報の内容に基づいて式1中の係数ｗを制御することができる。

例えば、いわゆるＲＦＩＤ（Radio Frequency Identification）や人事情報データベース等を用いて会議参加者の役職など会議における会議参加者の重要度が特定できた場合、その会議参加者の重要度に応じて、係数ｗを制御することができる。具体的には、取締役社長の場合にｗを１００とし、技術執行役員の場合にｗを９０とし、部門長の場合にｗを８０などと指定することができる。人事情報データベースに社員番号が識別子として入力されており、社員番号ごとに役職が記録されているとし、さらにＲＦＩＤが社員番号を記録し、そのデータを送受信する場合、ＲＦＩＤを持つ社員が会議に参加し、ＲＦＩＤのデータ受信によって社員番号が特定され、そのデータを受信した時刻ｔが特定できる。

一方、撮影装置２は、会議室の場所、あるいはＲＦＩＤのデータ受信の電波強度あるいは撮影装置２が撮影した画像の顔認識処理と人事情報データベースの参照等から特定できる。特定された社員番号から係る人事データベースの検索によって会議参加者の役職を特定することができる。この特定された役職に基づいて会議参加者に対応する係数ｗを特定することができる。さらに、生成部１１は、記憶部２０から入力した什器情報および記憶部２２から入力された会議環境情報を利用して撮影領域を演算するための評価関数を定義することができる。

記憶部２０から入力された什器情報に基づいて、時刻ｔにおけるｉ番目の撮影装置２の撮影領域とｍ番目の什器の什器領域の相互の重なりを表現するOverlapBtwnCamAndFur1(t, i, m)を定義することができる。また記憶部２０から入力された什器情報に基づいて、時刻ｔにおけるｉ番目の撮影装置２の撮影領域とｎ番目の什器の什器領域の相互の重なりを表現するOverlapBtwnCamAndFur2(t, i, n)を定義することができる。

また記憶部２２から入力された会議環境情報に基づいて、時刻ｔにおけるｉ番目の撮影装置２の撮影領域と会議環境情報から導出されたｏ番目の注目領域の相互の重なりを表現するOverlapBtwnCamAndAttention(t, i, o)を定義することができる。前述の撮影領域に関する第二の評価関数Ecamera2(t)および当該OverlapBtwnCamAndFur1(t, i, m)、OverlapBtwnCamAndFur2(t, i, n)およびOverlapBtwnCamAndAttention(t, i, o)を用いて式３のように撮影領域に関する第三の評価関数Ecamera3(t)を定義することができる。

ここで、ｅ、ｆおよびｇは係数であり、ｍはｍ番目のテーブル等の什器を表現する指標であり、ｎはｎ番目の椅子等の什器を表現する指標であり、ｏはｏ番目の注目領域を表現する指標であり、ｍｍａｘはテーブル等の什器の総数であり、ｎｍａｘは椅子等の什器の総数であり、ｏｍａｘはホワイトボードやプロジェクターのスクリーンなどの注目すべき領域(注目領域と称する)の総数である。ここで、テーブル等の什器の表面は視聴覚データないし映像データとして記録したい場合が予想され、撮影領域に関する第三の評価関数Ecamera3(t)の一部がOverlapBtwnCamAndFur1(t,i,m)として表現されている。

一方、椅子等の什器は、視聴覚データないし映像データとして記録したくない場合が予想され、撮影領域に関する第三の評価関数Ecamera3(t)の一部がOverlapBtwnCamAndFur2(t,i,m)の逆数として表現されている。

また、生成部１１は、会議参加者相互の見詰め合いまたは会議参加者のホワイトボードへの凝視を撮影可能とするように撮影領域情報を生成する。なお、従来技術を応用することによって、会議参加者相互の見詰め合いまたは会議参加者のホワイトボードへの凝視の特定することができる。例えば、三宅らの”顔の向きに依存しない特徴量を用いた注視判定方法”、電子情報通信学会論文誌VOL．Ｊ86-D-II,No.12,DECEMBER.2003,pp1737-1744では顔面の定められた位置に左右一対のマークを貼付して、画像処理を行うことによって黒目変位量を計測し、その計測結果に基づき注視しているか否かを判定することができる。

この技術を応用し、ホワイトボードもしくは会議参加者に対する凝視を判定することができると考えられる。三宅らの提案する方法では「左右一対のマークを貼付する」必要があるが、本発明ではそれらのマークの代わりに、画像処理によって左右の「目頭」を特定することによって、その左右の目頭の中点を利用して黒目変位量を計測し、その黒目変位量に基づいて凝視方向を特定することを提案する。具体的には、三宅らの論文で明らかなように従来技術で、目頭を含む二値化した画像を取得することは容易である。

また左右の目を含む(外接する)長方形を特定することも可能である。これらのことを前提にすると左右の目を含む長方形の領域を特定した後に、それらの左右の目に対応する二つの長方形の互いの長方形の近い辺から目の領域ないし画素を探索することによって目頭に対応する部分(画素)を特定することが可能である。そこで、左右の目頭の領域が特定されると左右の目頭の中点を特定することができる。これ以後の処理は三宅らの方法と同様にして、黒目変位量を計測することができる。左右目頭間の中点と計測された黒目変位量に基づいて対象となる会議参加者の注視方向ないし凝視方向を特定することができる。特定の時間単位、例えば一秒毎に注視方向を特定し、その方向が変化しているか否かを判定することによって、注視ないし凝視しているか否かを判定することが可能である。

さらに、撮影装置２の位置などの撮影領域情報と前述の会議参加者の注視方向から新たな撮影領域情報を生成することができる。つまり、現時点で、撮影領域として会議参加者が特定されていると仮定した場合、撮影領域情報には、撮影装置２の位置(X, Y, Z)、法線とのなす角度Ｔ、方位角Ｖ、立体角Ｗおよび会議参加者との距離Ｒが特定されており、さらに前述の方法によって会議参加者の注視方向が特定されるので、会議室が壁などで囲まれていて、会議参加者がホワイトボードなどを注視しているとき、会議参加者が注視している新たな撮影領域を特定することができる。

また大野らの”ヒューマンインタフェースとしての視線測定技術とその応用”, 計測自動制御学会 システムインテグレーション部門講演会(SI2002), p.117-118.を応用することによって視線を計測することができる。これらの計測した視線の結果と従来の顔認識技術を用いて会議参加者同士の「見詰め合い」や「凝視」を特定することができる。

具体的には、図１０に示すようにある時刻ｔにおいて会議参加者の顔領域Face(t)に、注視点AttentionPoint(t)が含まれるか否かを判定し、見詰め合いを特定することができる。図１０は見詰め合いにおける顔領域と注視点を示す図である。例えばある会議において参加者Ａと参加者Ｂが参加している場合、見詰め合い条件1として、会議参加者Ａの顔領域Face_A(t)に、会議参加者Ｂの注視点AttionPoint_B(t)が含まれ、かつ、見詰め合い条件２として、会議参加者Ｂの顔領域Face_B(t)に、会議参加者Ａの注視点AttentionPoint_A(t)が含まれていて、かつ、ある所要時間の閾値以上に見詰め合い条件１および見詰め合い条件３が成立するとき、参加者Ａおよび参加者Ｂは見詰め合っていると特定することができる。

ここで参加者Ｂの代わりに注目すべき領域(注目領域)を定義し、その注目領域内に参加者Ａの注視点が同様に含まれるか否かを判定することによって凝視を特定することができる。さらに視線計測技術および顔認識技術に加えて、音声認識技術を利用することによって会議参加者が「議論」している時間帯を特定することができる。具体的には、無音区間が所定の既定時間以内であり、かつ、発話者が交代されている時間帯を議論と定義することができる。議論部分以外の発話区間を「独り言」と定義することができる。なお、これらの処理は、視聴覚データ処理部２３、生成部１１により行われる。

図９に戻り、ステップＳ４で、駆動部１８は、制御部５の制御に応じて、ビデオ・カメラのパン、チルト、ズーム制御および撮影部６の移動を行う。これにより撮影部６の撮影領域が制御できる。ステップＳ５で、通信部１３は、記憶部１２から入力された撮影領域情報を他の撮影装置２の通信部１３に送信する。また通信部１３は、他の撮影装置２の通信部１３から送信された撮影領域情報を受信し、生成部１１に出力する。生成部１１は、次の時点の撮影領域情報を生成し、記憶部１２に格納する。

次に、照明装置３における照明手続きについて説明する。図１１は、照明装置３における照明手続きを示すフローチャートである。図１１に示すように、照明手続きは、照明装置初期化ステップＳ１１、照明データ取得ステップＳ１２、照明領域情報生成・更新ステップＳ１３、照明領域情報伝送ステップＳ１４および照明装置駆動ステップＳ１５を含む。

ステップＳ１１で、制御部２４は、照明装置３の各部を初期化する。ステップＳ１２で、照明データ処理部３３は、照明に関するデータを処理し、処理した照明データの処理結果を生成部２７に出力する。ステップＳ１３で、生成部２７は、記憶部２８から入力された照明領域情報、通信部２９から入力された照明領域情報、報通信部３０から入力された撮影領域情報、通信部３１から入力された音響収録領域情報、記憶部１７から入力された会議参加者関連情報、記憶部２０から入力された什器情報、記憶部２２から入力された会議環境情報、照明データ処理部３３から入力された照明データ処理結果等に基づいて、各照明装置が撮影対象を協調して照明するように新たな照明領域情報を生成する。

生成部２７は、生成した照明領域情報を記憶部２８に格納する。これにより、図７で示した照明領域情報テーブル４８が書き換えられる。制御部２４の制御に応じて記憶部２８に記憶された照明領域情報は、通信部２９に出力される。なお、生成部２７は、撮影装置２から撮影された視聴覚データから人の特徴量に基づいて人が撮影されている領域を抽出し、当該抽出された領域情報から照明領域情報を生成するようにしてもよい。係る人の特徴量に基づいて人が撮影されている領域を抽出する方法として、前述と同様に、従来技術である井出らの”ニュース映像における人物の分離による背景の場面推定”,電子情報通信学会論文誌D-II Vol. J84-D-II No.8 pp.1856-1863 2001年8月,に記載されている「顔領域を基準として人物領域を決定するテンプレート」等を応用することができる。

次に照明領域情報生成部２７の手続きについて補足説明する。生成部２７は、各照明装置３が会議記録として必要十分な視聴覚データないし映像データを記録可能なように自己の照明装置３の初期の(もしくは前回ないし過去の)照明領域情報および他の照明装置３の照明領域情報等に基づいて、新たな照明領域情報を生成する。照明領域情報の演算方法として、各照明装置３の照明領域が可能な限り重ならないように、すなわち全体の視聴覚データにおける照明としての内容的な冗長性が小さくなるように照明領域情報を演算処理するように設定できる。

また照明領域情報の演算方法として、各照明装置３の照明領域において、前述の方法によって特定した人物領域が最大となるように照明領域情報を演算処理するように設定することができる。そこで、照明領域情報の演算方法を決定するための評価関数として、冗長性を表現する関数の逆数と各照明装置３における人物領域を表現する関数とで構成される評価関数を定義することができる。生成部２７は、当該評価関数を用いて、当該評価関数が最大となるように照明領域情報を演算する。

ここで、照明領域は、次のように定義する。まず、照明領域を定義すべき照明装置３を暗室の三次元空間上の原点に配置し、その暗室の空間を単位距離、例えば、1センチメートルを一辺とする立方体で仮想的に分割し、その分割された立方体の頂点に位置する点に照度計ないし輝度計を配置し、照度もしくは輝度を計測するものとする。照度計としては、テックジャム社製ディジタル照度計EL-1000など一般的な照度計を用いることができる。一方、輝度計としては、テプコン社製分光放射計SR-3など一般的な輝度計を用いることができる。また輝度計から計測される輝度の代替として、ビデオ・カメラ等で撮影した画像の平均輝度を輝度値として用いることもできる。

次に照度ないし輝度の閾値を定義する。続いて、その照度の閾値ないし輝度の閾値に一致する領域を上記のように計測した照度または輝度に対応させることによって照明領域を定義する。例えば、時刻tにおける照明装置３相互の照明領域の重なりをOverlapBtwnLightAndLight(t)として冗長性を表現するものとすると、その逆数は、1/OperlapBtwnLightAndLight(t)となる。

また照明装置３を番号付けし、その指標ないし番号をｊとし、時刻ｔにおけるｊ番目の照明装置３に対応する照明領域をSpaceOfLight(t, j)で表現し、時刻ｔにおけるｉ番目の撮影装置２に撮影されている人物領域をSpaceOfFigure(t, i)で表現したとすると、時刻ｔにおける照明装置３における人物領域に対する照明の有効度を表現する関数をSpaceOfLight(t, j)∩SpaceOfFigure(t, i)の総和として定義することができる。ここで、∩は空間的な重なりを意味するものとする。そこで、照明領域情報の演算方法を決定するための評価関数Elight(t)を式4のように定義することができる。

ここで、式４中のａ’、ｂ’およびｗ’は係数であり、ｊｍａｘは照明装置３の総数である。

また生成部２７は、通信部３０から入力された撮影領域情報、通信部３１から入力された音響収録領域情報、記憶部１７から入力された会議参加者関連情報、記憶部２０から入力された什器情報および記憶部２２から入力された会議環境情報を利用して別の評価関数を定義し、その結果に基づいて照明領域情報を変更することもできる。例えば、通信部３０から入力した撮影領域情報に基づいて、時刻ｔにおけるｊ番目の照明装置３の照明領域とｉ番目の撮影装置２の撮影領域の相互の重なりを表現するOverlapBtwnLightAndCam(t, j, i)を定義することができる。

同様に通信部３１から入力した音響収録領域情報に基づいて、時刻ｔにおけるｊ番目の照明装置３の照明領域とｋ番目の音響収録装置４の音響収録領域の相互の重なりを表現するOverlapBtwnLightAndMic(t, j, k)を定義することができる。前述の照明領域に関する評価関数Elight(t)およびこれらのOverlapBtwnLightAndCam(t, j, i)およびOverlapBtwnLightAndMic(t, j, k)を用いて式５のように照明領域に関する第二の評価関数Elight2(t)を定義することができる。

ここで、式５中のｃ’およびｄ’は係数であり、ｉはｉ番目の撮影装置２を表現する指標であり、ｉｍａｘは撮影装置２の総数を表現する。またｋはｋ番目の音響収録装置４を表現する指標であり、ｋｍａｘは音響収録装置４の総数を表現する。また前述の撮影領域情報生成・更新ステップＳ３と同様に、記憶部１７から入力された会議参加者関連情報の内容に基づいて式４中の係数ｗ’を制御することができる。

例えばいわゆるＲＦＩＤや人事情報データベース等を用いて会議参加者の役職など会議における会議参加者の重要度が特定できた場合、その会議参加者の重要度に応じて、係数ｗ’を制御することができる。具体的には、取締役社長の場合にｗ’を１００とし、技術執行役員の場合にｗ’を９０とし、部門長の場合にｗ’を８０などと指定することができる。さらに生成部２７は、記憶部２０から入力した什器情報および記憶部２２から入力した会議環境情報を利用して撮影領域を演算するための評価関数を定義することができる。

記憶部２０から入力された什器情報に基づいて、時刻ｔにおけるｊ番目の照明装置３の照明領域とｍ番目の什器の什器領域の相互の重なりを表現するOverlapBtwnLightAndFur1(t, j, m)を定義することができる。また記憶部２０から入力された什器情報に基づいて、時刻ｔにおけるｊ番目の照明装置３の照明領域とｎ番目の什器の什器領域の相互の重なりを表現するOverlapBtwnLightAndFur2(t, j, n)を定義することができる。

また記憶部２２から入力された会議環境情報に基づいて、時刻ｔにおけるｊ番目の照明装置３の照明領域と会議環境情報から導出されたｏ番目の注目領域の相互の重なりを表現するOverlapBtwnLightAndAttention(t, j, o)を定義することができる。前述の照明領域に関する第二の評価関数Elight2(t)および当該OverlapBtwnLightAndFur1(t, j, m)、OverlapBtwnLightAndFur2(t, j, n)およびOverlapBtwnLightAndAttention(t, j, o)を用いて式６のように照明領域に関する第三の評価関数Elight3(t)を定義することができる。

ここで、e’、f’およびg’は係数であり、mはm番目のテーブル等の什器を表現する指標であり、nはn番目の椅子等の什器を表現する指標であり、oはo番目の注目領域を表現する指標であり、mmaxはテーブル等の什器の総数であり、nmaxは椅子等の什器の総数であり、omaxはホワイトボードやプロジェクターのスクリーンなどの注目すべき領域(注目領域)の総数である。

ここで、テーブル等の什器の表面は視聴覚データないし映像データとして記録したい場合が予想され、照明領域に関する第三の評価関数Elight3(t)の一部がOverlapBtwnLightAndFur1(t,j,m)として表現されている。一方、椅子等の什器は視聴覚データないし映像データとして記録したくない場合が予想され、照明領域に関する第三の評価関数Elight3(t)の一部がOverlapBtwnLightAndFur2(t,j,m)の逆数として表現されている。これらの処理は主に生成部２７により行われる。

ステップＳ１４で、駆動部３２は、制御部２４の制御に応じて、ライトないし蛍光灯のパン、チルト制御および照明部２５の移動を行う。これにより照明部２５の照明領域が制御される。ステップＳ１５で、通信部２９は、記憶部２８から入力された照明領域情報を他の照明装置３の通信部２９に送信する。また通信部２９は、他の照明装置３の通信部２９から送信された照明領域情報を受信し、生成部２７に出力する。生成部１１は、次の時点の照明領域情報を生成する。

次に、音響収録装置４における音響収録手続きについて説明する。図１２は、音響収録装置４における音響収録手続きを示すフローチャートである。図１２に示すように、音響収録手続きは、音響収録装置初期化ステップＳ２１、視聴覚データ取得ステップＳ２２、音響収録領域情報生成・更新ステップＳ２３、音響収録領域情報伝送ステップＳ２４および音響収録装置駆動ステップＳ２５を含む。

ステップＳ２１で、音響収録装置４の制御部３４は、音響収録装置４の各部を初期化する。ステップＳ２２で、音響収録部３５は、会議参加者により発話される音声、会議の場で発生する音等の音響データを含む視聴覚データを収録し、収録した視聴覚データを記録部３６に出力する。一方、記録部３６は、制御部３４の制御に応じて、視聴覚データを視聴覚データ提示部３７、通信部３８および視聴覚データ処理部４６に出力する。

ステップＳ２３で、生成部１１は、記憶部４１から入力された音響収録領域情報、通信部４２から入力された音響収録領域情報、通信部４３から入力された撮影領域情報、通信部４４から入力された照明領域情報、記憶部１７から入力された会議参加者関連情報、記憶部２０から入力された什器情報、記憶部２２から入力された会議環境情報、視聴覚データ処理部４６から入力された視聴覚データ処理結果に基づいて各音響収録装置が協調して視聴覚データないし音響データもしくは音声データを収録するように新たな音響収録領域情報を生成し、この音響収録領域情報を記憶部４１に格納する。これにより、図８で示した音響収録領域情報デーブル４９の内容が書き換えられる。記憶部４１に記憶された音響収録領域情報は、制御部３４の制御に応じて、通信部４２に出力される。

なお、撮影装置２から撮影された視聴覚データから人の特徴量に基づいて人が撮影されている領域を抽出し、当該抽出された領域情報から音響収録領域情報を生成するようにしてもよい。係る人の特徴量に基づいて人が撮影されている領域を抽出する方法として、前述と同様に、従来技術である井出らの”ニュース映像における人物の分離による背景の場面推定”,電子情報通信学会論文誌D-II Vol. J84-D-II No.8 pp.1856-1863 2001年8月,に記載されている「顔領域を基準として人物領域を決定するテンプレート」等を応用することができる。

次に生成部４０の手続きについて補足説明する。生成部４０は、各音響収録装置４が会議記録として必要十分な視聴覚データないし音声データを記録可能なように自己の音響収録装置４の初期の(もしくは前回ないし過去の)音響収録領域情報および他の音響収録装置４の音響収録領域情報等に基づいて、新たな音響収録領域情報を演算する。音響収録領域情報の演算方法として、各音響収録装置４の音響収録領域が可能な限り重ならないように、すなわち全体の視聴覚データにおける音声としての内容的な冗長性が小さくなるように音響収録領域情報を演算処理するように設定することができる。

また音響収録領域情報の演算方法として、各音響収録装置４の音響収録領域において、前述の方法によって特定した人物領域が最大となるように音響収録領域情報を演算処理するように設定することができる。そこで、音響領域情報の演算方法を決定するための評価関数として、冗長性を表現する関数の逆数と各音響収録装置４における人物領域を表現する関数とで構成される評価関数を定義することができる。生成部４０は、当該評価関数を用いて、当該評価関数が最大となるように音響収録領域情報を演算することができる。

ここで、音響収録領域は、マイクロフォーンあるいはマイクのいわゆる指向性パターンあるいは感度特性を空間的に表現したものとする。例えば時刻tにおける音響収録装置４相互の音響収録領域の重なりをOverlapBtwnMicAndMic(t)として冗長性を表現するものとすると、その逆数は、1/OperlapBtwnMicAndMic(t)となる。また音響収録装置４を番号付けし、その指標ないし番号をkとし、時刻tにおけるk番目の音響収録装置４に対応する音響収録領域をSpaceOfMic(t, k)で表現し、時刻tにおけるi番目の撮影装置２に撮影されている人物領域をSpaceOfFigure(t, i)で表現したとすると、時刻ｔにおける音響収録装置４における人物領域に対する音響収録の有効度を表現する関数をSpaceOfMic(t, k)∩SpaceOfFigure(t, i)の総和として定義することができる。ここで、∩は空間的な重なりを意味するものとする。そこで、音響収録領域情報の演算方法を決定するための評価関数Emic(t)を式７のように定義することができる。

ここで、式７中のａ’’、ｂ’’およびｗ’’は係数であり、ｋｍａｘは音響収録装置４の総数である。

また生成部４０は、通信部４３から入力された撮影領域情報、通信部４４から入力された照明領域情報、記憶部１７から入力された会議参加者関連情報、記憶部２０から入力された什器情報および記憶部２２から入力された会議環境情報を利用して別の評価関数を定義ないし、その結果に基づいて照明領域情報を変更することもできる。

例えば通信部４３から入力した撮影領域情報に基づいて、時刻ｔにおけるｋ番目の音響収録装置４の音響収録領域とｉ番目の撮影装置２の撮影領域の相互の重なりを表現するOverlapBtwnMicAndCam(t, k, i)を定義することができる。同様に、通信部４４から入力した照明領域情報に基づいて、時刻ｔにおけるｋ番目の音響収録装置４の音響収録領域とｊ番目の照明装置３の照明領域の相互の重なりを表現するOverlapBtwnMicAndLight(t, k, j)を定義することができる。

前述の音響収録領域に関する評価関数Emic(t)およびこれらのOverlapBtwnMicAndCam(t, k, i)およびOverlapBtwnMicAndLight(t, k, j)を用いて式８のように音響収録領域に関する第二の評価関数Emic2(t)を定義することができる。

ここで、式８中のｃ’’およびｄ’’は係数であり、ｉはｉ番目の撮影装置2を表現する指標であり、ｉｍａｘは撮影装置２の総数を表現する。またｊはｊ番目の照明装置３を表現する指標であり、ｊｍａｘは照明装置３の総数を表現する。

またステップＳ３やステップＳ８と同様に、参加者情報入力部１７から入力された会議参加者関連情報の内容に基づいて式７中の係数ｗ’’を制御することができる。例えばいわゆるＲＦＩＤや人事情報データベース等を用いて会議参加者の役職など会議における会議参加者の重要度が特定できた場合、その会議参加者の重要度に応じて、ｗ’’を制御することができる。具体的には、取締役社長の場合にｗ’’を１００とし、技術執行役員の場合にｗ’’を９０とし、部門長の場合にｗ’’を８０などと指定することができる。さらに生成部４０は、記憶部２０から入力した什器情報および記憶部２２から入力した会議環境情報を利用して撮影領域を演算するための評価関数を定義することができる。

記憶部２２から入力された会議環境情報に基づいて、時刻tにおけるk番目の音響収録装置４の音響収録領域と会議環境情報から導出されたｏ番目の注目領域の相互の重なりを表現するOverlapBtwnMicAndAttention(t, k, o)を定義することができる。記憶部２２から入力された会議環境情報に基づいて、時刻ｔにおけるｋ番目の音響収録装置４の音響収録領域と会議環境情報から導出されたｐ番目の音響的な妨害領域の相互の重なりを表現するOverlapBtwnMicAndObstacle(t, k, o)を定義することができる。

前述の音響収録領域に関する第二の評価関数Emic2(t)および当該OverlapBtwnMicAndAttention(t, k, o)およびOverlapBtwnMicAndObstacle(t, k, p)を用いて式９のように音響収録領域に関する第三の評価関数Emic3(t)を定義することができる。

ここで、ｇ’’およびｈ’’は係数であり、ｏはｏ番目の注目領域を表現する指標であり、ｐはｐ番目の音響的な妨害領域を表現する指標であり、ｏｍａｘはスピーカーなどの音響的に注目すべき領域(注目領域)の総数である。またｐｍａｘは、プロジェクターなどの雑音源となり音響収録を避けるべき音響的な妨害領域の総数である。ここで、スピーカーなどは視聴覚データないし音声データとして記録したい場合が予想され、音響収録領域に関する第三の評価関数Emic3(t)の一部がOverlapBtwnMicAndAttention(t,k,o)として表現されている。一方、プロジェクター等の雑音源は視聴覚データないし音声データとして記録したくない場合が予想され、音響収録領域に関する第三の評価関数Emic3(t)の一部がOverlapBtwnMicAndObstacle(t,k,p)の逆数として表現されている。これらの処理は生成部４０、処理部４６等により行われる。

図１２に戻り、ステップＳ２４で、駆動部４５は、制御部３４の制御に応じて、マイクの位置および角度制御および音響収録部３５の移動を行う。これにより音響収録部３５の音響収録範囲が制御される。ステップＳ２５で、通信部４２は、記憶部４１から入力された音響収録領域情報を他の音響収録装置４の通信部４２に送信する。また通信部４２は、他の音響収録装置４の通信部４２から送信された音響収録領域情報を受信し、生成部４０に出力する。生成部２７は、次の時点の音響収録領域情報を生成する。

図１３は、本発明の会議記録を会議室の一例を示す平面図である。ここで、会議室５０には、会議用のテーブル５１、椅子５２ａおよび５２ｂ並びにワイトボード５３が備わっているものとする。また会議室５０には二個の撮影装置２ａおよび２ｂ、二個の照明装置３ａおよび３ｂ、ならびに二個の音響収録装置４ａおよび４ｂが備わっているものとする。

ステップＳ３における生成部１１の撮影領域情報の処理においては、各撮影装置の生成部１１は、三次元空間上の異なる空間を撮影するように撮影領域情報を生成することができる。例えば、図１３における撮影装置２ａおよび２ｂは、それぞれ立体角に対応する円錐の平面への射影５４ａ、５４ｂに対応する領域を撮影するように撮影領域情報を生成する。

同様に、ステップＳ１３における生成部２７の照明領域情報の処理においては、各照明装置の生成部２７は、三次元空間上の異なる空間を照明するように照明領域情報を生成する。例えば、図１３における照明装置３ａおよび３ｂは、それぞれ立体角に対応する円錐の平面への射影５５ａ、５５ｂに対応する領域を照明するように照明領域情報を生成する。

同様に、ステップＳ２３における生成部４０の音響収録領域情報の処理においては、各音響収録装置の生成部４０が三次元空間上の異なる空間で発生する視聴覚データを音響収録するように音響収録領域情報を生成する。例えば、図１３における音響収録装置４ａおよび４ｂは、それぞれ立体角に対応する円錐の平面への射影５６ａ、５６ｂに対応する領域からの視聴覚データを音響収録するように音響収録領域情報を生成する。

次に撮影装置２、照明装置３および音響収録装置４の時間的な制御方法について説明する。ここで、図６の撮影領域情報テーブル４７のように、撮影装置２は、三台の撮影装置２がそれぞれＣＡＭ０、ＣＡＭ１およびＣＡＭ２として撮影装置識別子４７ａで識別されている。また図７の照明領域情報テーブル４８のように、照明装置３は、二台の照明装置３がそれぞれＬＩＧＨＴ０およびＬＩＧＨＴ１として照明装置識別子４８ａで識別されている。また図８の音響収録領域情報テーブル４９のように、音響収録装置４は、二台の音響収録装置４がそれぞれＭＩＣ０およびＭＩＣ１の音響収録装置識別子４９ａで識別されている。

図１４は、タイムスロットと各装置の制御の割り当てを示す図である。そこで、撮影装置２、照明装置３および音響収録装置４の制御を行う場合、時間が既定の単位時間、例えば、１００ミリ秒ごとにタイムスロットとして区切られ、図１４のように各タイムスロットがｔｓ１、ｔｓ２、ｔｓ３、…ｔｓ１１のように識別されているものとする。撮影装置２、照明装置３および音響収録装置４の制御はタイムスロットを単位として時間的に排他的に制御されるものとする。すなわち、タイムスロットｔｓ１において、ＣＡＭ０の撮影装置２の制御ないしパンやチルトなど状態の変更を行っている場合には、他のＣＡＭ１およびＣＡＭ２の撮影装置２、照明装置３および音響収録装置４の状態を固定する。

続くタイムスロットｔｓ２において、ＣＡＭ１の撮影装置２の制御ないしパンやチルトなど状態の変更を行っている場合には、他のＣＡＭ０およびＣＡＭ２の撮影装置２、照明装置３および音響収録装置４の状態を固定する。以下同様に、それぞれのタイムスロットを各撮影装置２、照明装置３および音響収録装置４に割り当てて時間的に排他制御する。

ここで、撮影装置２は、撮影領域情報伝送ステップＳ５において、前記のタイムスロットに対応する撮影装置２を制御した時刻等の撮影領域情報を更新し、他の撮影装置２等に撮影領域情報を伝送する。同様に、照明装置３は、ステップＳ１５において、前記のタイムスロットに対応する照明装置３を制御した時刻等の照明領域情報を更新し、他の照明装置３等に照明領域情報を伝送する。同様に音響収録装置４は、ステップＳ２５において、前記のタイムスロットに対応する音響収録装置４を制御した時刻等の音響収録領域情報を更新し、他の音響収録装置４等に音響収録領域情報を伝送する。これにより各撮影装置２、各照明装置３および各音響収録装置４をそれぞれ時間的に排他制御することができる。

なお、実施例１では制御部５、２４および３４が各撮影装置２、各照明装置３および各音響収録装置４のそれぞれに対応して設けられている例について説明したが、会議記録装置１に１つの制御部を設けて、この１つ制御部で全ての撮影装置２、照明装置３、音響収録装置４を制御してもよい。また実施例１では生成部１１、２７および４０が各各撮影装置２、各照明装置３および各音響収録装置４のそれぞれに対応して設けられている例について説明したが、会議記録装置１に生成部を１つ設けて、この１つの生成部で全ての撮影領域情報、照明領域情報、音響収録領域情報を生成するようにしてもよい。

次に、実施例２について説明する。撮影装置２の撮影領域、照明装置３の照明領域および音響収録装置４の音響収録領域を立方体でモデル化し、当該立方体のモデルを用いて撮影装置２、照明装置３および音響収録装置４を制御する場合について説明する。まず会議室が図１５のように、一辺が既定の単位長である立方体で分割されているとする。例えば、会議室５０が図１５のように１８個の立方体で分割されたものとみなすことにする。ここで、図１５は、会議室５０を立方体で分割した図である。次にこの分割された各立方体に対して識別子を割り当てる。例えば各立方体をＢＯＸ１からＢＯＸ１８までのように識別子を定義したとする。続いて、各撮影装置２、照明装置３および音響収録装置４を相異なる立方体を担当する撮影領域、照明領域または音響収録領域として割り当てる。

このように会議室５０を分割された立方体としてモデリングないし表現し、対応する撮影領域、照明領域ないし音響収録領域を割り当てることにより簡単に複数の撮影装置２、照明装置３および音響収録装置４を空間的に排他制御することができる。また撮影装置２の撮影領域、照明装置３の照明領域および音響収録装置４の音響収録領域は、会議室を上から見下ろした平面図上の扇型の形状もしくは三角形としてモデリングないし表現し、複数の撮影装置２、照明装置３および音響収録装置４を制御することも可能である。

図１６は、実施例２に係る会議記録装置１０１のブロック図である。会議記録装置１０１は、撮影装置２の撮影領域、照明装置３の照明領域および音響収録装置４の音響収録領域を扇型としてモデリングないし表現し、複数の撮影装置２、照明装置３および音響収録装置４を制御する。図１６に示すように、会議記録装置１０１は、複数の撮影装置２、複数の照明装置３、複数の音響収録装置４、制御部１０２および表示部１０３を含む。撮影装置２、照明装置３および音響収録装置４は、実施例１と同様であるため、ここでは説明を省略する。

制御部１０２は、撮影装置２の撮影領域、照明装置３の照明領域および音響収録装置４の音響収録領域を扇型としてモデリングないし表現し、複数の撮影装置２、照明装置３および音響収録装置４を制御するためのグラフィカル・ユーザ・インタフェースを表示部１０３に表示する。この制御部１０２は、ＣＰＵ等から構成される。

図１７は、このグラフィカル・ユーザ・インタフェース７０を示す。表示部１０３は、このグラフィカル・ユーザ・インタフェース７０を表示する。図１７に示すように、グラフィカル・ユーザ・インタフェース７０は、作業領域７１、会議室アイコン室７２ａおよび会議室アイコン７２ｂ、什器アイコン７３、撮影装置アイコン７４、照明装置アイコン７５、音響収録装置アイコン７６、什器レイヤー・ボタン７７、撮影装置レイヤー・ボタン７８、照明装置レイヤー・ボタン７９および音響収録装置レイヤー・ボタン８０から構成される。

会議室アイコン７２ａおよび７２ｂは、会議室を設定する。什器アイコン７３は、什器を設定するものである。撮影装置アイコン７４は、撮影装置を設定するものである。照明装置アイコン７５は、照明装置を設定するものである。音響収録装置アイコン７６は、音響収録装置を設定するものである。作業領域７１は、これらのアイコンをドラッグ・アンド・ドロップして作業するための領域である。この作業領域は、各アイコンを二次元的または三次元の空間で表現する。

図１８は、当該グラフィカル・ユーザ・インタフェースの利用手続きを示す。グラフィカル・ユーザ・インタフェース７０の利用手続きは、図１８に示すように、会議室設定ステップＳ３１、什器設定ステップＳ３２、撮影装置設定ステップＳ３３、照明装置設定ステップＳ３４および音響収録装置設定ステップＳ３５を含む。ステップＳ３１で、利用者はグラフィカル・ユーザ・インタフェース７０の会議室アイコン７２ａあるいは会議室アイコン７２ｂを作業領域７１にいわゆるドラッグ・アンド・ドロップして会議室を設定する。ここで、会議室アイコン７２ａおよび会議室アイコン７２ｂは、会議室の場所や形状や大きさを表現するものとする。会議室アイコンは、二つに限らず必要な数だけ、グラフィカル・ユーザ・インタフェース７０上に配置することができる。

ステップＳ３２で、利用者は、什器レイヤー・ボタン７７を選択し、作業領域７１に什器アイコン７３をドラッグ・アンド・ドロップして配置する。ここで、作業領域は、それぞれ透明な基準となる会議室レイヤー、什器レイヤー、撮影装置レイヤー、照明装置レイヤーおよび音響収録装置レイヤーから構成されているものとする。会議室レイヤーは、既定のレイヤーである。利用者は、什器レイヤー・ボタン７７を選択することによって、什器レイヤーに什器アイコン７３を配置できるようになる。また利用者は、什器アイコン７３の属性を設定することによって、テーブルまたは椅子などを図的に識別できるようになる。また利用者は什器アイコン７３の属性をメニューやダイアログ等を使用して設定することによって、その作業領域７１での大きさや形状や色などを設定することができる。ここで、利用者は、什器アイコン７３を必要な数だけ作業領域７１にドラッグ・アンド・ドロップして配置することが可能である。

ステップＳ３３で、利用者は、撮影装置レイヤー・ボタン７８を選択し、作業領域７１に撮影装置アイコン７４をドラッグ・アンド・ドロップして配置する。利用者は撮影装置レイヤー・ボタン７８を選択することによって、撮影装置レイヤーに撮影装置アイコン７４を配置できるようになる。さらに図１９に示すように、利用者は撮影領域を表現する扇型の属性アイコン８１を操作することによって撮影領域を設定することができる。

図１９は、作業領域における作業画面を示す図である。利用者は、撮影装置アイコン７４を必要な数だけ作業領域７１にドラッグ・アンド・ドロップして配置することが可能である。ステップＳ３４で、利用者は、照明装置レイヤー・ボタン７９を選択し、作業領域７１に照明装置アイコン７５をドラッグ・アンド・ドロップして配置する。利用者は、照明装置レイヤー・ボタン７９を選択することによって、照明装置レイヤーに照明装置アイコン７９を配置できるようになる。さらに図１９に示すように、利用者は、照明領域を表現する扇型の属性アイコン８２を操作することによって照明領域を設定することができる。ここで、利用者は、照明装置アイコン７５を必要な数だけ作業領域７１にドラッグ・アンド・ドロップして配置することが可能である。

ステップＳ３５で、利用者は、音響収録装置レイヤー・ボタン８０を選択し、作業領域７１に音響収録装置アイコン７６をドラッグ・アンド・ドロップして配置する。利用者は、音響収録装置レイヤー・ボタン８０を選択することによって、音響収録装置レイヤーに音響収録装置アイコン７６を配置できるようになる。さらに、図１９に示すように、利用者は、音響収録領域を表現する扇型の属性アイコン８３を操作することによって音響収録領域を設定することができる。ここで、利用者は、音響収録装置アイコン７６を必要な数だけ作業領域７１にドラッグ・アンド・ドロップして配置することが可能である。

制御部１０２は、グラフィカル・ユーザ・インタフェース７０を介して入力された情報を撮影装置２、照明装置３および音響収録装置４に送る。各撮影装置２、照明装置３および音響収録装置４は、グラフィカル・ユーザ・インタフェース７０を介して入力された情報を、図２から図４に示した撮影領域情報入力部１０、参加者情報入力部１６、什器情報入力部１９、環境情報入力部２１、照明領域情報入力部２６および音響収録領域情報入力部３９を介して受け付ける。撮影装置２、照明装置３および音響収録装置４の各生成部１１、２７、４０は、制御部１０２から入力された情報に応じて上述した撮影領域情報、照明領域情報、音響収録情報が生成される。これにより、グラフィカル・ユーザ・インタフェース７０の操作に応じた撮影装置２、照明装置３および音響収録装置４の制御が可能となる。

また上記のようにグラフィカル・ユーザ・インタフェース７０を使って設定した情報を会議記録設定ファイルとして記録し、次回の会議の準備時に、当該会議記録設定ファイルを参照することによって再利用することもできる。また撮影装置２の撮影領域、照明装置３の照明領域および音響収録装置４の音響収録領域を円錐ないしコーン等の三次元的な立体としてモデリングないし表現し、複数の撮影装置２、照明装置３および音響収録装置４を制御することも可能である。

図２０は、三次元設計用作業領域における作業画面を示す。前述で説明したような二次元的な作業領域７１における二次元的な属性アイコンの指定による制御ではなく、図２０に示すように三次元的な撮影領域、照明領域、音響収録領域等の設定が可能な三次元設計作業領域８４を使って利用者は、円錐として表現される三次元的な撮影領域、照明領域あるいは音響収録領域を示す属性アイコン８５を配置することによって、複数の撮影装置２、照明装置３および音響収録装置４を制御することができる。

図２０においては、利用者は、三次元設計作業領域８４に対して、三つの撮影装置アイコン７４を配置し、それぞれの撮影装置アイコン７４に対応する撮影装置２に対して属性アイコン８５を設定することによって撮影領域を設定する。これにより撮影装置アイコン７４に対応する撮影装置２を制御することができる。また図示は省略するが、同様に利用者は、三次元設計作業領域８４に対して、照明アイコンを配置し、それぞれの照明装置アイコンに対応する撮影装置２に対して属性アイコンを設定することによって照明領域を設定する。これにより照明装置アイコンに対応する照明装置３を制御することができる。

また同様に利用者は、三次元設計作業領域８４に対して、音響収録アイコンを配置し、それぞれの音響収録アイコンに対応する音響収録装置４に対して属性アイコンを設定することによって音響収録領域を設定する。これにより音響収録装置アイコンに対応する音響収録装置４を制御することができる。

次に実施例３について説明する。次に実施例３に係る設計装置について説明する。図２１は、実施例３の設計装置の一例を示すブロック・ダイアグラムである。設計装置２０１は、制御部２０２、演算部２０３、設計データ記憶部２０４、表示部２０５、撮影領域情報入力部２０６、撮影領域情報記憶部２０７、照明領域情報入力部２０８、照明領域情報記憶部２０９、音響収録領域情報入力部２１０、音響収録領域情報記憶部２１１、参加者情報入力部２１２、参加者情報記憶部２１３、什器情報入力部２１４、什器情報記憶部２１５、環境情報入力部２１６および環境情報記憶部２１７を含む。

設計装置２０１は、会議室、ホワイトボードまたはテーブル、椅子もしくは投影用スクリーンを含む什器等の設計対象を設計するものである。制御部２０２は、設計装置２０１全体を制御する。制御部２０２は、会議室、ホワイトボードまたはテーブル、椅子もしくは投影用スクリーンを含む什器等の設計対象を設計するためのグラフィカル・ユーザ・インタフェースを表示部２０５に表示する。表示部２０５は、設計対象を設計するためのグラフィカル・ユーザ・インタフェースと、設計された設計対象を表示するものである。

図２２にこのグラフィカル・ユーザ・インタフェース８６の表示例を示す。このグラフィカル・ユーザ・インタフェース８６は、撮影領域情報入力部２０６、照明領域情報入力部２０８、音響収録領域情報入力部２１０、参加者情報入力部２１２、什器情報入力部２１４、環境情報入力部２１６として機能する。なお、これら入力部にグラフィカル・ユーザ・インタフェース８６以外のキーボード等を併用するようにしてもよい。各入力部から入力された情報はそれぞれ撮影領域情報記憶部２０７、照明領域情報記憶部２０９、音響収録領域情報記憶部２１１、参加者情報記憶部２１３、什器情報記憶部２１５、環境情報記憶部２１７に記憶される。

演算部２０３は、記憶部２０７から入力された撮影領域情報、記憶部２０９から入力された照明領域情報、記憶部２１１から入力された音響収録領域情報、記憶部２１３から入力された会議参加者関連情報、記憶部２１５から入力された什器情報および記憶部２１７から入力された会議環境情報に基づいて、設計対象を設計する。設計された設計対象のデータは記憶部２０４に格納する。表示部２０５は、記憶部２０４から入力された設計データを利用者に表示する。表示部６１は、一般的なディスプレイ等から構成されている。

次にテーブル設計データを撮影領域情報および参加者関連情報から設計する方法について説明する。図２２は、テーブルを設計する場合に使用するグラフィカル・ユーザ・インタフェースの一例である。図２２に示すように、グラフィカル・ユーザ・インタフェース８６は、作業領域７１、会議室アイコン７２ａおよび会議室アイコン７２ｂ、什器アイコン７３、撮影装置アイコン７４、照明装置アイコン７５、音響収録装置アイコン７６、什器レイヤー・ボタン７７、撮影装置レイヤー・ボタン７８、照明装置レイヤー・ボタン７９、音響収録装置レイヤー・ボタン８０、会議参加者アイコン８７ａおよび８７ｂ、備品アイコン８８、会議参加者レイヤー・ボタン８９並びに備品レイヤー・ボタン９０を含む。

実施例２において説明したグラフィカル・ユーザ・インタフェース７０に対して、会議参加者アイコン８７ａおよび８７ｂ、備品アイコン８８、会議参加者レイヤー・ボタン８９並びに備品レイヤー・ボタン９０が追加されている。利用者は、グラフィカル・ユーザ・インタフェース８６の作業領域７１に対して、会議室アイコン７２ａおよび７２ｂ、什器アイコン７３、撮影装置アイコン７４、照明装置アイコン７５、音響収録装置アイコン７６、会議参加者アイコン８７ａおよび８７ｂ、備品アイコン８８を配置し、それらのアイコンに関連する属性を設定することによって、テーブル設計データを設定することができる。

グラフィカル・ユーザ・インタフェース８６における作業領域７１は、会議室レイヤーを基準とし、すなわち、既定のレイヤーとし、それぞれ透明にすることが可能な撮影装置レイヤー、照明装置レイヤー、音響収録装置レイヤー、会議参加者レイヤーおよび備品レイヤーから構成されている。

次にグラフィカル・ユーザ・インタフェース８６を用いたテーブル設計データを撮影領域情報等から設定する手順について説明する。図２３は、グラフィカル・ユーザ・インタフェースの利用手続きを示すフローチャートである。グラフィカル・ユーザ・インタフェース８６の利用手続きは、会議室設定ステップＳ４１、什器設定ステップＳ４２、撮影装置設定ステップＳ４３、照明装置設定ステップＳ４４、音響収録設定ステップＳ４５、会議参加者設定ステップＳ４６および備品設定ステップＳ４７を含む。

図２３は、グラフィカル・ユーザ・インタフェース８６の利用手続きを示すフローチャートは図１８のグラフィカル・ユーザ・インタフェースの利用手続きを示すフローチャートに対して、会議参加者ステップＳ４６および備品設定ステップＳ４７が追加されている。なお、ステップＳ４２では什器として椅子のみをここでは設定するものとする。

ステップＳ４１で、利用者はグラフィカル・ユーザ・インタフェース８６の会議室アイコン７２ａあるいは会議室アイコン７２ｂを作業領域７１にいわゆるドラッグ・アンド・ドロップする。ここで、会議室アイコン７２ａおよび会議室アイコン７２ｂは会議室の場所や形状や大きさを表現するものとする。会議室アイコンは二つに限らず必要なだけ、グラフィカル・ユーザ・インタフェース８６上に配置することができる。グラフィカル・ユーザ・インタフェース８６から入力された会議室に関する情報は、環境情報入力部２１６から記憶部２１７に格納される。環境情報入力部２１６からは、会議が開催される場所の大きさ、形状、色、可視光等の電磁波ないし音波の反射率、什器のアフォーダンスに関する情報等の会議環境情報が入力できる。

ステップＳ４２で、利用者は什器レイヤー・ボタン７７を選択し、作業領域７１に什器アイコン７３をドラッグ・アンド・ドロップして配置する。ここで、作業領域はそれぞれ透明な基準となる会議室レイヤー、什器レイヤー、撮影装置レイヤー、照明装置レイヤーおよび音響収録装置レイヤーから構成されているものとする。会議室レイヤーは既定のレイヤーである。利用者は什器レイヤー・ボタン７７を選択することによって、什器レイヤーに什器アイコン７３を配置できるようになる。また利用者は什器アイコン７３の属性を設定することによって、テーブルまたは椅子などを図的に識別できるようになる。

また、利用者は、什器アイコン７３の属性をメニューやダイアログ等を使用して設定することによって、その作業領域７１での大きさや形状や色などを設定することができる。ここで、利用者は、什器アイコン７３を必要な数だけ作業領域７１にドラッグ・アンド・ドロップして配置することが可能である。グラフィカル・ユーザ・インタフェース８６から入力された什器に関する情報は、什器情報入力部２１４から記憶部２１５に格納される。

ステップＳ４３で、利用者は、撮影装置レイヤー・ボタン７８を選択し、作業領域７１に撮影装置アイコン７４をドラッグ・アンド・ドロップして配置する。利用者は撮影装置レイヤー・ボタン７４を選択することによって、撮影装置レイヤーに撮影装置アイコン７４を配置できるようになる。さらに図１９に示したように、利用者は、撮影領域を表現する扇型の属性アイコン８１を操作することによって撮影領域を設定することができる。

利用者は、撮影装置アイコン７４を必要な数だけ作業領域７１にドラッグ・アンド・ドロップして配置することが可能である。グラフィカル・ユーザ・インタフェース８６から入力された撮影装置または撮影領域に関する情報は撮影領域情報入力部２０６から記憶部２０７に格納される。

ステップＳ４４で、利用者は、照明装置レイヤー・ボタン７９を選択し、作業領域７１に照明装置アイコン７５をドラッグ・アンド・ドロップして配置する。利用者は照明装置レイヤー・ボタン７９を選択することによって、照明装置レイヤーに照明装置アイコン７９を配置できるようになる。さらに図１９に示したように、利用者は、照明領域を表現する扇型の属性アイコン８２を操作することによって照明領域を設定することができる。ここで、利用者は照明装置アイコン７５を必要な数だけ作業領域７１にドラッグ・アンド・ドロップして配置することが可能である。グラフィカル・ユーザ・インタフェース８６から入力された照明装置または照明領域に関する情報は照明領域情報入力部２１０から記憶部２０９に格納される。

ステップＳ４５で、利用者は音響収録装置レイヤー・ボタン８０を選択し、作業領域７１に音響収録装置アイコン７６をドラッグ・アンド・ドロップして配置する。利用者は音響収録装置レイヤー・ボタン８０を選択することによって、音響収録装置レイヤーに音響収録装置アイコン７６を配置できるようになる。グラフィカル・ユーザ・インタフェース８６から入力された音響収録装置または音響収録領域に関する情報は音響収録領域情報入力部２１０から記憶部２１１に格納される。

ステップＳ４６で、利用者はグラフィカル・ユーザ・インタフェース８６の作業領域７１に対して、会議参加者アイコン８７ａおよび８７ｂを配置することによって会議参加者の情報を設定することができる。なお、利用者は、会議参加者レイヤー・ボタン８９を選択することよって、作業領域７１の会議参加者レイヤーに対して会議参加者アイコン８７ａおよび８７ｂを設定することが可能となる。利用者は会議参加者に対応する数だけ作業領域７１に対して会議参加者アイコンを配置することができる。ここでは、仮に会議参加者が二名であるとし、会議参加者アイコン８７ａおよび８７ｂを作業領域７１に配置するものとする。

また会議参加者の属性として、会議参加者の位置、会議参加者の見る範囲、会議参加者の姿勢、会議参加者の可視聴範囲、会議参加者の可動範囲等の会議参加者関連情報を属性アイコンを使用して設定することができる。グラフィカル・ユーザ・インタフェース８６から入力された参加者に関する情報は、参加者情報入力部２１２から記憶部２１３に格納される。

次に、ステップＳ４７で、利用者はグラフィカル・ユーザ・インタフェース８６の作業領域７１に対して、備品アイコン８６を配置することによって備品の情報を設定することができる。なお、利用者は備品レイヤー・ボタン９０を選択することによって、作業領域７１の備品レイヤーに対して備品アイコン８８を設定することが可能となる。利用者はホワイトボード、プロジェクターやプロジェクター用スクリーンなどの備品を必要な数だけ作業領域７１に備品アイコン８８を配置することができる。グラフィカル・ユーザ・インタフェース８６から入力された備品に関する情報は、環境情報入力部２１６から記憶部２１７に格納される。

演算部２０３は、制御部２０２の制御下、記憶部２０７から入力された撮影領域情報、記憶部２０９から入力された照明領域情報、記憶部２１１から入力された音響収録領域情報、記憶部２１３から入力された会議参加者関連情報、記憶部２１５から入力された什器情報および記憶部２１７から入力された会議環境情報に基づいて、設計対象であるテーブルを設計する。設計された設計対象のデータは、記憶部２０４に格納される。表示部２０５は、記憶部２０４から入力された設計データを利用者に表示する。

前述のグラフィカル・ユーザ・インタフェースの利用手続きによって、作業領域７１に対して図１３に示したテーブル５１を除いて図１３のように椅子５２ａおよび５２ｂ、撮影装置２ａおよび２ｂ、照明装置３ａおよび３ｂ、音響収録装置４ａおよび４Ｂ並びにホワイトボード５３が配置されているものとする。会議参加者が二名の場合を想定して説明する。会議参加者は、椅子５２ａおよび５２ｂにそれぞれ着席するものとする。また図２４における撮影装置２ａおよび２ｂは、各会議参加者のジェスチャーや姿勢を捕捉できるように、それぞれ立体角に対応する円錐の平面への射影５４ａおよび５４ｂに対応する領域を撮影するものとする。

図２４には会議参加者が他の会議参加者(相手)とホワイトボード５３を見る範囲の立体角に対応する円錐の平面への射影６２ａおよび６２ｂに対応する領域が扇形で示されている。ここで、会議参加者が他の会議参加者(相手)とホワイトボード５３を見る範囲の立体角に対応する円錐の平面への射影６２ａおよび６２ｂは、ステップＳ４６で、会議参加者アイコン８７ａおよび８７ｂの属性ないし属性アイコンとして設定することができる。

また会議参加者の属性として、「会議参加者の見る範囲」の他にも、会議参加者の位置、会議参加者の姿勢、会議参加者の可視聴範囲、会議参加者の可動範囲等の会議参加者関連情報を属性アイコンを使用して設定することができる。なお、上記のように設定した会議参加者の見る範囲は、会議参加者の頭部の位置および方向とみなすことができる。テーブル上部の領域６３は、上述の射影５４ａ、５４ｂ、６２ａおよび６２ｂの平面図上で、扇形の領域の重なる領域６３を含むように設計することができる。またこのように定義されたテーブル上部の領域６３を包含するようにテーブルを設定することができる。

設定されたテーブルに対して、テーブルを表現する什器アイコン７３を利用者に提示することができる。なお、利用者に提示されるテーブルの形状は、一種類以上の基本形状のテーブルの中から最適なテーブルを選んで表示するようにしてもよい。テーブルの基本形状は、三角形または四角形または六角形のテーブルであると良い。

一方、利用者は提示されたテーブルを表現する什器アイコン７３に対して、テーブルの属性を表現する色ないし分光分布並びに反射率または透過率等をメニューあるいはダイアログ等を使用して設定することができる。また什器アイコン７３の属性として係る什器の什器のアフォーダンスに関する情報をメニューあるいはダイアログ等を用いて設定することができる。ここで、例えば、図２５のような半径５０センチメートルの円の一部が欠けた三日月形のテーブルがある場合、円周側には三人の参加者が座ることが可能で、あるいはテーブルによって自然に促され、一方、欠けた側には、二人の会議参加者が座ることが可能である、あるいは、テーブルによって自然に促されているというようなアフォーダンスに関する情報をテーブルの属性情報として設定することができる。

以上のようなテーブルの設定方法と同様な方法で他の椅子などの什器あるいは会議室を設計することができる。また会議室設計においては、会議室の床や壁あるいは天井の属性として、利用者がメニューやダイアログなどの特定のグラフィカル・ユーザ・インタフェースを使用することによって、会議が開催される場所の大きさ、形状、色ないし分光分布、可視光等の電磁波ないし音波の反射率または透過率を設定することができる。

次に、会議室の設計について説明する。図２６は、グラフィカル・ユーザ・インタフェース８６の作業領域７１における会議室アイコン７２ｂの操作画面を示す図である。図２７は、床プロパティ情報ダイアログボックス３０１を示す図である。図２８は、壁プロパティ情報ダイアログボックス３０４を示す図である。前述したように、ステップＳ４１において、利用者は、会議室アイコン７２ｂを作業領域７１にドラッグ・アンド・ドロップする。

次に、利用者は、ドラッグ・アンド・ドロップした会議室アイコン７２ｂの大きさないしサイズを変更することにより、会議室の大きさを指定することができる。また、会議室アイコン７２ｂを作業領域７１にドラッグ・アンド・ドロップすることで、グラフィカル・ユーザ・インタフェース８６の所定の領域に、図２７に示す床プロパティ情報ダイアログボックス３０１および図２８に示す壁プロパティ情報ダイアログボックス３０４が表示される。次に、利用者は床プロパティ情報ダイアログボックス３０１および壁プロパティ情報ダイアログボックス３０４を用いて会議室の詳細な情報を指定することができる。床プロパティ情報ダイアログボックス３０１は会議室の床の詳細な属性情報を入力するために使用される。

図２７に示すように、床プロパティ情報ダイアログボックス３０１は、素材フィールド３０２ａ、色フィールド３０２ｂおよび仕様フィールド３０２ｃ並びに色確認ビュー３０３から構成される。図２７では、床の素材として「カーペット」が指定され、床の色として「グレイ」が指定され、床の仕様として「カーペットＡ」が指定されていることを示す。色確認ビュー３０３は、床の色を利用者に提示する。ここで、色確認ビュー３０３で利用者に提示する床の色は、前述の照明領域情報などからコンピューター・グラフィックスのレイトレーシング手法などを利用してシミュレーションすることによって設定することができる。

また、壁プロパティ情報ダイアログボックス３０４は会議室の壁の詳細な属性情報を入力するために使用される。図２８に示すように、壁プロパティ情報ダイアログボックス３０４は、素材フィールド３０５ａ、色フィールド３０５ｂおよび仕様フィールド３０５ｃ並びに色確認ビュー３０６から構成される。図２８では、壁の素材として「コンクリート」が指定され、壁の色として「白」が指定され、壁の仕様として「壁Ａ」が指定されていることを示す。色確認ビュー３０６は、壁の色を利用者に提示する。

ここで、色確認ビュー３０６で利用者に提示する壁の色は、前述の照明領域情報などからコンピューター・グラフィックスのレイトレーシング手法などを利用してシミュレーションすることによって設定することができる。グラフィカル・ユーザ・インタフェース８６から入力された会議室に関する情報は、環境情報入力部２１６から記憶部２１７に格納される。なお、上述したように利用者が所定の操作を行うことで、各記憶部に情報が入力される。

演算部２０３は、制御部２０２の制御下、記憶部２０７から入力された撮影領域情報、記憶部２０９から入力された照明領域情報、記憶部２１１から入力された音響収録領域情報、記憶部２１３から入力された会議参加者関連情報、記憶部２１５から入力された什器情報および記憶部２１７から入力された会議環境情報等に基づいて、設計対象である会議室を設計する。設計された設計対象の会議室のデータは、記憶部２０４に格納される。表示部２０５は、記憶部２０４から入力された設計データを利用者に表示する。以上のように利用者は、グラフィカル・ユーザ・インタフェース８６の作業領域７１における会議室アイコン７２ｂ等を操作することによって会議室を設計することができる。

また、テーブルや椅子の設計は次のように行うことができる。図２９は、グラフィカル・ユーザ・インタフェース８６の作業領域７１における什器アイコン７３ａおよび７３ｂの操作画面を示す図である。図３０は、什器プロパティ情報ダイアログボックス３０７を示す図である。図３１は、什器プロパティ情報ダイアログボックス３０８を示す図である。グラフィカル・ユーザ・インタフェース８６の作業領域７１に什器アイコン７３をドラッグ・アンド・ドロップすることで、図３０に示す什器プロパティ情報ダイアログボックス３０７および図３１に示す什器プロパティ情報ダイアログボックス３０８がグラフィカル・ユーザ・インタフェース８６内の所定の領域に表示される。

また、前述したように、ステップＳ４２において、利用者は、什器アイコンを作業領域７１にドラッグ・アンド・ドロップする。これにより、図２９に示すように、作業領域７１内に什器アイコン７３ａおよび７３ｂが配置される。什器アイコン７３ａはテーブルを表すアイコンである。什器アイコン７３ｂは椅子を表すアイコンである。利用者は、什器アイコン７３ａおよび７３ｂの位置とサイズないし大きさを変更することによってテーブルや椅子の什器の位置とサイズないし大きさを指定することができる。次に、利用者は、什器プロパティ情報ダイアログボックス３０７または３０８を用いて什器の詳細な情報を指定する。

図３０に示すように、什器プロパティダイアログボックス３０７は、素材フィールド３０８ａ、色フィールド３０８ｂ、仕様フィールド３０８ｃおよび種類フィールド３０８ｄ並びに色確認ビュー３０９から構成される。図３０では、什器の種類として、「テーブル」が指定され、什器の素材として「木」が指定され、什器の色として「アイボリー」が指定され、什器の仕様として「テーブルＡ」が指定されていることを示す。また、色確認ビュー３０９は、利用者に什器の色を提示する。会議室の壁や床と同様に、照明領域情報などからコンピューター・グラフィックスのレイトレーシング手法などを利用してシミュレーションすることによって色確認ビュー３０９に提示する色を設定することができる。なお、什器プロパティ情報ダイアログボックス３０７を用いて他の反射率等の什器に関する属性情報を指定することもできる。

図３１に示すように、什器プロパティダイアログボックス３０８は、素材フィールド３１１ａ、色フィールド３１１ｂ、仕様フィールド３１１ｃおよび種類フィールド３１１ｄ並びに色確認ビュー３１２から構成される。図３１では、什器の種類として、「椅子」が指定され、什器の素材として「木」が指定され、什器の色として「ブルー」が指定され、什器の仕様として「椅子Ａ」が指定されていることを示す。また、色確認ビュー３１２は、利用者に什器の色を提示する。会議室の壁や床と同様に、照明領域情報などからコンピューター・グラフィックスのレイトレーシング手法などを利用してシミュレーションすることによって色確認ビュー３１２に提示する色を設定することができる。なお、什器プロパティ情報ダイアログボックス３０８を用いて他の反射率等の什器に関する属性情報を指定することもできる。

グラフィカル・ユーザ・インタフェース８６から入力された什器に関する情報は、什器情報入力部２１４から記憶部２１５に格納される。なお、上述したユーザーの操作により各記憶部に所定の情報が入力される。演算部２０３は、制御部２０２の制御下、記憶部２０７から入力された撮影領域情報、記憶部２０９から入力された照明領域情報、記憶部２１１から入力された音響収録領域情報、記憶部２１３から入力された会議参加者関連情報、記憶部２１５から入力された什器情報および記憶部２１７から入力された会議環境情報等に基づいて、設計対象であるテーブルや椅子を含む什器を設計する。設計された設計対象のデータは、記憶部２０４に格納される。表示部２０５は、記憶部２０４から入力された設計データを利用者に表示する。以上のように利用者は、グラフィカル・ユーザ・インタフェース８６の作業領域７１における什器アイコン７３ａおよび７３ｂ等を操作することによってテーブルや椅子を含む什器を設計することができる。

また、ホワイトボード等の備品は次のように設計することができる。図３２は、グラフィカル・ユーザ・インタフェース８６の作業領域７１における備品アイコン８８ａの操作画面を示す図である。前述したように、ステップＳ４７において、利用者は、備品アイコン８８を作業領域７１にドラッグ・アンド・ドロップする。これにより、備品アイコン８８ａが作業領域７１内に表示される。次に、利用者は、ドラッグ・アンド・ドロップした備品アイコン８８ａの位置および大きさないしサイズを変更することにより、備品の位置とサイズを指定することができる。また、備品アイコン８８を作業領域７１内にドラッグ・アンド・ドロップすることで、グラフィカル・ユーザ・インタフェース８６内の所定の領域に備品プロパティ情報ダイアログボックス３１３が表示される。

図３３は、備品プロパティ情報ダイアログボックス３１３を示す図である。利用者は、備品プロパティ情報ダイアログボックス３１３を用いて備品の詳細な情報を指定することができる。備品プロパティ情報ダイアログボックス３１３は備品の詳細な属性情報を入力するために使用される。図３３に示すように、備品プロパティ情報ダイアログボックス３１３は、素材フィールド３１４ａ、色フィールド３１４ｂ、仕様フィールド３１４ｃ、種類フィールド３１４ｄおよび高さフィールド３１４ｅおよび色確認ビュー３１５から構成される。

図３３では、備品の種類として「ホワイトボード」が指定され、備品の素材として「鉄ほか」が指定され、備品の色として「ホワイト」が指定され、備品の仕様として「ホワイトボードＡ」が指定され、備品の高さとして「１００センチメートル」が指定されていることを示す。色確認ビュー３１５は、備品の色を利用者に提示する。ここで、色確認ビュー３１５で利用者に提示する備品の色は、前述の照明領域情報などからコンピューター・グラフィックスのレイトレーシング手法などを利用してシミュレーションすることによって設定することができる。

グラフィカル・ユーザ・インタフェース８６から入力された備品に関する情報は、環境情報入力部２１６から記憶部２１７に格納される。なお、上述したユーザーの操作により各記憶部に所定の情報が入力される。演算部２０３は、制御部２０２の制御下、記憶部２０７から入力された撮影領域情報、記憶部２０９から入力された照明領域情報、記憶部２１１から入力された音響収録領域情報、記憶部２１３から入力された会議参加者関連情報、記憶部２１５から入力された什器情報および記憶部２１７から入力された会議環境情報等に基づいて、設計対象であるホワイトボードを設計する。設計された設計対象のデータは、記憶部２０４に格納される。表示部２０５は、記憶部２０４から入力された設計データを利用者に表示する。以上のように利用者は、グラフィカル・ユーザ・インタフェース８６の作業領域７１における備品アイコン８８ａ等を操作することによってホワイトボードを設計することができる。

なお、会議記録装置、会議記録方法、設計装置または設計方法は、例えば、ＣＰＵ、ＲＯＭ(Read Only Memory)、ＲＡＭ(Random Access Memory)等を用いて実現され、プログラムをハードディスク装置や、ＣＤ−ＲＯＭ、ＤＶＤまたはフレキシブルディスクなどの可搬型記憶媒体等からインストールし、または通信回路からダウンロードし、ＣＰＵがこのプログラムを実行することで、各ステップが実現される。ここでＣＰＵが実行するステップは以下の通りである。

会議記録プログラムは、複数の撮影手段が撮影対象を協調して撮影するように該各撮影手段の撮影領域を表現する撮影領域情報を生成する生成ステップ、複数の照明手段が撮影対象を協調して照明するように該各照明手段の照明領域を表現する照明領域情報を生成する生成ステップ、複数の音響収録手段が協調して音響情報を収録するように該各音響収録手段の音響収録領域を表現する音響収録領域情報を生成する生成ステップ、前記各生成ステップで生成した各撮影領域情報、各照明領域情報および各音響収録領域情報を用いて前記各撮影手段の撮影領域、前記各照明手段の照明領域および前記各音響収録手段の音響収録領域を制御する制御ステップをＣＰＵに実行させる。これにより冗長性の少ない複数の映像を得ることができる。

また設計プログラムは、グラフィカル・ユーザ・インタフェース内の作業領域にドラッグ・アンド・ドロップされた会議室アイコンに応じて会議室の情報を設定するステップ、前記作業領域にドラッグ・アンド・ドロップされた什器アイコンに応じて什器の情報を設定するステップ、前記作業領域にドラッグ・アンド・ドロップされた撮影装置アイコンに応じて撮影装置の情報を設定するステップ、前記作業領域にドラッグ・アンド・ドロップされた会議参加者アイコンに応じて会議参加者の情報を設定するステップ、所定の属性アイコンの操作に応じて参加者の属性情報を設定するステップ、前記設定された情報に応じて設計対象を設計する設計ステップ、前記設計ステップで設計された設計対象を表示するステップをＣＰＵに実行させる。これにより設定された情報に応じて設計対象を設計し、これを表示させることができる。

なお撮影装置２、生成部１１、２７および４０、制御部５、２４および３４、照明装置３、音響収録装置４、通信部１３、１４、１５、２９、３０、３１、４２、４３および４４、駆動部１８、２１、および４５は、特許請求の範囲における撮影手段、生成手段、制御手段、照明手段、音響手段、通信手段、駆動手段にそれぞれ対応する。

以上本発明の好ましい実施例について詳述したが、本発明は係る特定の実施例に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形、変更が可能である。

実施例１に係るシステムの全体構成図である。 撮影装置２の構成例を示すブロック図である。 照明装置３の構成例を示すブロック図である。 音響収録装置４の構成例を示すブロック図である。 撮影領域情報に関するパラメータ説明する図である。 撮影領域情報記憶部１２で保持される撮影領域情報を表現する撮影領域情報テーブル４７を示す図である。 照明領域情報記憶部２８に記憶される照明領域情報を表現する照明領域情報テーブル４８を示す図である。 音響収録領域情報記憶部４１で保持される音響収録領域情報を表現する音響収録領域情報テーブル４９を示す図である。 撮影装置２における撮影手続きを示すフローチャートである。 見詰め合いにおける顔領域と注視点を示す図である。 照明装置３における照明手続きを示すフローチャートである。 音響収録装置４における音響収録手続きを示すフローチャートである。 本発明の会議記録を会議室の一例を示す平面図である。 タイムスロットと各装置の制御の割り当てを示す図である。 会議室５０を立方体で分割した図である。 実施例２に係る会議記録装置１０１のブロック図である。 このグラフィカル・ユーザ・インタフェース７０を示す図である。 グラフィカル・ユーザ・インタフェースの利用手続きを示す図である。 作業領域における作業画面を示す図である。 三次元設計用作業領域における作業画面を示す図である。 実施例３の設計装置の一例を示すブロック・ダイアグラムである。 グラフィカル・ユーザ・インタフェース８６の表示例を示す図である。 グラフィカル・ユーザ・インタフェースの利用手続きを示すフローチャートである。 テーブル設計方法を説明する図である。 テーブル設計方法を説明する図である。 グラフィカル・ユーザ・インタフェース８６の作業領域７１における会議室アイコン７２ｂの操作画面を示す図である。 床プロパティ情報ダイアログボックス３０１を示す図である。 壁プロパティ情報ダイアログボックス３０４を示す図である。 グラフィカル・ユーザ・インタフェース８６の作業領域７１における什器アイコン７３ａおよび７３ｂの操作画面を示す図である。 什器プロパティ情報ダイアログボックス３０７を示す図である。 什器プロパティ情報ダイアログボックス３０８を示す図である。 グラフィカル・ユーザ・インタフェース８６の作業領域７１における備品アイコン８８ａの操作画面を示す図である。 備品プロパティ情報ダイアログボックス３１３を示す図である。

符号の説明

１ 会議記録装置
２ 撮影装置
３ 照明装置
４ 音響収録装置
５、２４、３４ 制御部
６ 撮影部
１１、２７、４０ 生成部
２５ 照明部
４５ 音響収録部

Claims (39)

1. 複数の撮影手段と、
   前記各撮影手段が撮影対象を協調して撮影するように前記各撮影手段の撮影領域を表現する撮影領域情報を生成する生成手段と、
   前記生成手段が生成した各撮影領域情報を用いて前記各撮影手段の撮影領域を制御する制御手段と
   を有することを特徴とする会議記録装置。
2. 複数の照明手段と、
   前記各照明手段が撮影対象を協調して照明するように前記各照明手段の照明領域を表現する照明領域情報を生成する生成手段と、
   前記生成手段が生成した各照明領域情報を用いて前記各照明手段の照明領域を制御する制御手段と
   を有することを特徴とする会議記録装置。
3. 複数の音響収録手段と、
   前記各音響収録手段が協調して音響情報を収録するように前記各音響収録手段の音響収録領域を表現する音響収録領域情報を生成する生成手段と、
   前記生成手段が生成した各音響収録領域情報を用いて前記各音響収録手段の音響収録領域を制御する制御手段と
   を有することを特徴とする会議記録装置。
4. 前記会議記録装置は更に、
   複数の照明手段を有し、
   前記生成手段は、前記各照明手段が撮影対象を協調して照明するように前記各照明手段の照明領域を表現する照明領域情報を生成し、
   前記制御手段は、前記生成手段が生成した各照明領域情報を用いて前記各照明手段の照明領域を制御することを特徴とする請求項１記載の会議記録装置。
5. 前記会議記録装置は更に、
   複数の音響収録手段を有し、
   前記生成手段は、前記各音響収録手段が協調して音響情報を収録するように前記各音響収録手段の音響収録領域を表現する音響収録領域情報を生成し、
   前記制御手段は、前記各音響収録領域情報を用いて前記各音響収録手段の音響収録領域を制御することを特徴とする請求項１または請求項４記載の会議記録装置。
6. 前記生成手段は、前記各撮影手段、前記各照明手段および前記各音響収録手段をそれぞれ時間的に排他制御するように前記各撮影領域情報、前記各照明領域情報および前記音響収録領域情報を生成することを特徴とする請求項５記載の会議記録装置。
7. 前記生成手段は、前記各撮影手段が三次元空間上の異なる空間を撮影するように前記各撮影領域情報を生成することを特徴とする請求項１、請求項５または請求項６記載の会議記録装置。
8. 前記生成手段は、前記各照明手段が三次元空間上の異なる空間を照明するように前記各照明領域情報を生成することを特徴とする請求項２または請求項４から請求項７のいずれか一項に記載の会議記録装置。
9. 前記生成手段は、前記各音響収録手段が三次元空間上の異なる空間で発生する音響情報を収録するように前記各音響収録領域情報を生成することを特徴とする請求項３から請求項８のいずれか一項に記載の会議記録装置。
10. 前記生成手段は、冗長性を表現する関数を含む評価関数を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項１から請求項９のいずれか一項に記載の会議記録装置。
11. 前記生成手段は、前記各撮影手段で撮影した映像を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項５から請求項１０のいずれか一項に記載の会議記録装置。
12. 前記生成手段は、前記撮影手段で撮影された映像中の人物が存在する領域に基づいて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項１１記載の会議記録装置。
13. 前記生成手段は、前記撮影手段で撮影された映像中の人物相互の見詰め合いまたは人物のホワイトボードへの凝視を検出し、該検出結果を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項１１記載の会議記録装置。
14. 前記生成手段は、前記各音響収録手段で収録した音響情報を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項５から請求項１３記載のいずれか一項に記載の会議記録装置。
15. 前記生成手段は、前記音響収録手段で収録した音響情報を用いて推定された音源位置から前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項１４記載の会議記録装置。
16. 前記生成手段は、前記各音響収録手段で収録した音響情報を音声認識技術を利用して議論または独り言を検出し、該検出結果に応じて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項１４記載の会議記録装置。
17. 前記生成手段は、会議参加者の位置、会議参加者の姿勢、会議参加者の頭部の位置および方向、会議参加者の可視聴範囲、並びに会議参加者の可動範囲のうちの少なくともいずれか一つを用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項５から請求項１６のいずれか一項に記載の会議記録装置。
18. 前記生成手段は、前記各撮影手段の位置情報、前記照明手段の位置情報または前記音響収録手段の位置情報を用いて、前記撮影領域情報、前記照明領域情報または前記音響収録領域情報を生成することを特徴とする請求項５から請求項１７のいずれか一項に記載の会議記録装置。
19. 前記生成手段は、第１の時点における前記各撮影領域情報、前記各照明領域情報および前記各音響収録領域情報を用いて、第１の時点の次の第２の時点の前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項５から請求項１８のいずれか一項に記載の会議記録装置。
20. 前記生成手段は、所定の会議室内に配置された什器に関する情報を用いて前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報を生成することを特徴とする請求項５から請求項１９のいずれか一項に記載の会議記録装置。
21. 前記会議室に設置された什器に関する情報は、会議参加者に共有されるテーブル、ホワイトボードまたは会議参加者に使用される椅子の位置、向き、大きさ、形状または色を含む請求項２０記載の会議記録装置。
22. 前記各撮影領域情報、前記各照明領域情報または前記各音響収録領域情報は、前記各撮影手段、前記各照明手段または前記各音響収録手段の識別子、座標、法線とのなす角度、方位角、立体角、仕様および対象までの距離うちの少なくともいずれか一つを含む請求項５から請求項２１のいずれか一項に記載の会議記録装置。
23. 前記生成手段は、会議室内の照度または輝度に応じて前記照明領域情報を生成することを特徴とする請求項２または請求項４から請求項２２のいずれか一項に記載の会議記録装置。
24. 前記制御手段は、前記各撮影手段、前記各照明手段および前記各音響収録装置のそれぞれに対応して設けられていることを特徴とする請求項５から請求項２３のいずれか一項に記載の会議記録装置。
25. 前記生成手段は、前記各撮影手段、前記各照明手段および前記各音響収録装置のそれぞれに対応して設けられていることを特徴とする請求項５から請求項２４のいずれか一項に記載の会議記録装置。
26. 前記会議記録装置は更に、前記各生成手段が生成した撮影領域情報、照明領域情報または音響収録領域情報を他の生成手段との間で送受信する通信手段を有することを特徴とする請求項２５記載の会議記録装置。
27. 前記会議記録装置は更に、前記各撮影手段、前記各照明手段または前記各音響収録手段を駆動させる駆動手段を有することを特徴とする請求項５から請求項２６のいずれか一項に記載の会議記録装置。
28. 前記会議記録装置は更に、前記各撮影手段、前記各照明手段または前記各音響収録手段を制御するためのグラフィカル・ユーザ・インタフェースを表示する手段を有することを特徴とする請求項５から請求項２７のいずれか一項に記載の会議記録装置。
29. 前記グラフィカル・ユーザ・インタフェースは、会議室を設定するアイコン、什器を設定するアイコン、前記撮影手段を設定するアイコン、前記照明手段を設定するアイコン、前記音響収録手段を設定するアイコン、これらをドラッグ・アンド・ドロップして作業するための作業領域、前記撮影手段による撮影領域を設定するアイコン、前記照明手段による照明領域を設定するアイコンおよび前記音響収録手段による音響収録領域を設定するアイコンのうちの少なくともいずれか一つを含む請求項２８記載の会議記録装置。
30. 前記作業領域は、前記各アイコンを二次元的または三次元の空間で表現することを特徴とする請求項２８または請求項２９記載の会議記録装置。
31. 複数の撮影手段が撮影対象を協調して撮影するように該各撮影手段の撮影領域を表現する撮影領域情報を生成する生成ステップと、
    複数の照明手段が撮影対象を協調して照明するように該各照明手段の照明領域を表現する照明領域情報を生成する生成ステップと、
    複数の音響収録手段が協調して音響情報を収録するように該各音響収録手段の音響収録領域を表現する音響収録領域情報を生成する生成ステップと、
    前記各生成ステップで生成した各撮影領域情報、各照明領域情報および各音響収録領域情報を用いて前記各撮影手段の撮影領域、前記各照明手段の照明領域および前記各音響収録手段の音響収録領域を制御する制御ステップと
    を有することを特徴とする会議記録方法。
32. 複数の撮影手段が撮影対象を協調して撮影するように該各撮影手段の撮影領域を表現する撮影領域情報を生成する生成ステップ、
    複数の照明手段が撮影対象を協調して照明するように該各照明手段の照明領域を表現する照明領域情報を生成する生成ステップ、
    複数の音響収録手段が協調して音響情報を収録するように該各音響収録手段の音響収録領域を表現する音響収録領域情報を生成する生成ステップ、
    前記各生成ステップで生成した各撮影領域情報、各照明領域情報および各音響収録領域情報を用いて前記各撮影手段の撮影領域、前記各照明手段の照明領域および前記各音響収録手段の音響収録領域を制御する制御ステップをコンピュータに実行させるためのプログラム。
33. グラフィカル・ユーザ・インタフェース内の作業領域にドラッグ・アンド・ドロップされた会議室アイコンに応じて会議室の情報を設定するステップと、
    前記作業領域にドラッグ・アンド・ドロップされた什器アイコンに応じて什器の情報を設定するステップと、
    前記作業領域にドラッグ・アンド・ドロップされた撮影装置アイコンに応じて撮影装置の情報を設定するステップと、
    前記作業領域にドラッグ・アンド・ドロップされた会議参加者アイコンに応じて会議参加者の情報を設定するステップと、
    所定の属性アイコンの操作に応じて参加者の属性情報を設定するステップと、
    前記設定された情報に応じて設計対象を設計する設計ステップと、
    前記設計ステップで設計された設計対象を表示するステップと
    を含むことを特徴とする設計方法。
34. 前記設計方法は更に、 前記作業領域にドラッグ・アンド・ドロップされた照明装置アイコンに応じて照明装置の情報を設定するステップと、
    前記作業領域にドラッグ・アンド・ドロップされた音響収録装置アイコンに応じて音響収録装置の情報を設定するステップと、
    前記作業領域にドラッグ・アンド・ドロップされた備品アイコンに応じて備品の情報を設定するステップと、
    を含む請求項３３記載の設計方法。
35. 前記設計方法は更に、前記作業領域上で所定の属性アイコンの操作に応じて会議参加者の位置、会議参加者の見る範囲、会議参加者の姿勢、会議参加者の可視聴範囲および会議参加者の可動範囲のうちの少なくともいずれか一つを設定するステップを含む請求項３３または請求項３４記載の設計方法。
36. 前記会議室の情報を設計するステップは、会議室の大きさ、形状、色、分光分布、反射率または透過率を設定することを特徴とする請求項３３から請求項３５のいずれか一項に記載の設計方法。
37. 前記什器の情報を設定するステップは、什器の大きさ、形状、色、分光分布、反射率または透過率を設定することを特徴とする請求項３３から請求項３６のいずれか一項に記載の設計方法。
38. 前記設計対象は、会議室、ホワイトボードまたはテーブルもしくは椅子を含む什器である請求項３２から請求項３７のいずれか一項に記載の設計方法。
39. グラフィカル・ユーザ・インタフェース内の作業領域にドラッグ・アンド・ドロップされた会議室アイコンに応じて会議室の情報を設定するステップ、
    前記作業領域にドラッグ・アンド・ドロップされた什器アイコンに応じて什器の情報を設定するステップ、
    前記作業領域にドラッグ・アンド・ドロップされた撮影装置アイコンに応じて撮影装置の情報を設定するステップ、
    前記作業領域にドラッグ・アンド・ドロップされた会議参加者アイコンに応じて会議参加者の情報を設定するステップ、
    所定の属性アイコンの操作に応じて参加者の属性情報を設定するステップ、
    前記設定された情報に応じて設計対象を設計する設計ステップをコンピュータに実行させるためのプログラム。

Images