JP5862489B2

JP5862489B2 - 撮影領域自動制御機能を有するテレビ会議制御装置

Info

Publication number: JP5862489B2
Application number: JP2012150037A
Authority: JP
Inventors: 齋藤　隆; 隆齋藤; 浩克齊藤
Original assignee: 株式会社ナカヨ
Priority date: 2012-07-04
Filing date: 2012-07-04
Publication date: 2016-02-16
Anticipated expiration: 2032-07-04
Also published as: JP2014013980A

Description

本発明は、会議出席者を撮影する映像カメラのアングル／ズームを電気的に制御可能なテレビ会議制御装置に関する。

テレビ会議において、発言者の音声をマイクで認識し、発言者の方向にカメラを向け、発言者周辺の狭い領域を撮影するズームインを自動で行うテレビ会議装置が知られている（例えば、特許文献１）。

この特許文献１に記載された技術は、指向性の高い複数のマイクを備え、１つのマイクから音を認識した場合、マイクの方向を撮影するようにカメラのアングル／ズームを自動的に制御してズームインし、複数のマイクから同時に音を認識した場合、全体を写すようにズームアウトを行うものである。

しかしながら、特許文献１に記載された技術は、指向性の高いマイクを多数使用すると共に、高度な信号処理が必要なため、システム構築に要するコストが高価となる。また、複数のマイク位置とカメラのアングル／ズームの設定の相関を取るため、システムとしての処理が複雑になる。更に、複数のマイク位置とカメラのアングル／ズーム設定の相関に係わる設定をユーザが行う必要があり、マイクレイアウトが変更された場合の設定作業が煩雑であると共に、ドアを閉める音や机の上の物音、くしゃみ、咳等により不適切なアングル／ズームとなる可能性もある。

特開平３−７６３８５号公報

そこで、本発明の課題は、テレビ会議中の映像カメラのアングル／ズームの制御を経済的に自動化すると共に、シンプルな操作性を有するテレビ会議制御装置を提供することにある。

上記課題を解決するために、本発明は、会議出席者を撮影する映像カメラのアングルおよびまたはズームを電気的に制御する機能を備えるテレビ会議制御装置であって、前記映像カメラのアングルおよびまたはズームを自テレビ会議制御装置の操作者が手動で制御する撮影領域手動制御手段と、前記映像カメラのアングルおよびまたはズームに係わるデータを記憶するデータ記憶手段と、前記映像カメラのアングルおよびまたはズームを前記データ記憶手段に記憶されているデータに従って制御する撮影領域データ制御手段と、を有し、前記データ記憶手段は、所定の領域よりも広い撮影領域を前記映像カメラが撮影しているズームアウトの状態で予め定められた第１の特定操作が為された場合に、当該特定操作が為された時の前記映像カメラのアングルおよびまたはズームに係わるデータをズームアウト設定データとして記憶し、前記所定の領域よりも狭い撮影領域を前記映像カメラが撮影しているズームインの状態で前記第１の特定操作が為された場合に、当該特定操作が為された時の前記映像カメラのアングルおよびまたはズームに係わるデータをズームイン設定データとして記憶し、前記撮影領域データ制御手段は、前記ズームインの状態で予め定められた第２の特定操作が為された場合または通信先へ送信する送話音声を所定時間以上検知しない場合に、前記データ記憶手段に記憶されている前記ズームアウト設定データに対応するアングルおよびまたはズームとなるように前記映像カメラのアングルおよびまたはズームを自動的に制御し、前記ズームアウトの状態で前記第２の特定操作が為された場合に、前記データ記憶手段に記憶されている前記ズームイン設定データに対応するアングルまたはズームとなるように前記映像カメラのアングルおよびまたはズームを自動的に制御することを特徴とする。

本発明によれば、高度な信号処理が不要であり、テレビ会議中のカメラのアングル／ズームの制御を経済的に自動化できると共に、ズームインとズームアウトを自動的に識別するので操作性がシンプルで、誤操作の恐れが少ないという利点がある。

本発明によるテレビ会議制御装置の内部ブロック構成図本発明による操作部５の外観図本発明によるテレビ会議制御装置の動作フローチャート

以下、本発明の実施形態について、図面を用いて説明する。図１は、本発明による撮影領域自動制御機能を有するテレビ会議制御装置（以下、本装置と略す）の内部ブロック構成を含む全体図である。

まず、本装置１を含むシステムの全体構成を説明する。本装置１は、ネットワーク７に接続され、ネットワーク７を介してテレビ会議機能を有する相手装置８とテレビ会議に係わる通信を実行すると共に、本装置１と接続された映像カメラ２，スピーカ３，マイク４，操作部５，映像表示装置６とのインターフェースに係る制御を実行する。

映像カメラ２は、本装置１に接続されている映像カメラであって、会議出席者の映像を映像信号に変えて本装置１へ送信する。また、本装置１からの制御信号に応じて、アングル／ズームを電気的に制御する。

スピーカ３は本装置１に接続されているスピーカであって、相手装置８から受信した音声信号を拡声出力する。マイク４は本装置１に接続されているマイクであって、本装置１側の会議出席者が発した音声の音声信号を本装置１へ出力する。

操作部５は本装置１を制御する者が操作する手段であって、映像カメラ２のアングル／ズームに係わる操作データ、および、会議音声の音量調整やミュート等の操作データを本装置１へ出力する。操作部５は本装置１に内蔵されていてもよい。映像表示装置６は相手装置８から受信した相手装置８側の会議映像や映像カメラ２が撮影している本装置１側のモニタ映像を表示する。

以下、本装置１の内部ブロック構成について詳細に説明する。本装置１は、テレビ会議システム制御部１１、通信制御部１２、映像信号入出力部１３、アングル／ズームデータ記憶部１４、アングル／ズーム制御部１５、音声信号入出力部１６から構成される。

ＴＶ会議システム制御部１１は、操作部５からの操作内容に従って、本装置１の全体を制御し、通信制御部１２，映像信号入出力部１３、アングル／ズーム制御部１５，アングル／ズームデータ記憶部１４，音声信号入出力部１６とデータを入出力する。

通信制御部１２は、ネットワーク７を経由して、相手装置８とのテレビ会議全般に係わる通信および通信制御を実行する。

映像信号入出力部１３は、映像カメラ２から入力する会議出席者を撮影した映像信号を符号化して、通信制御部１２およびネットワーク７を介して、相手装置８へ送信すると共に、その映像信号を映像表示装置６へも出力し、本装置１が送信している映像のモニタを可能とする。

また、映像信号入出力部１３は、相手装置８よりネットワーク７、通信制御部１２経由で送信されてくる映像信号を受信し、符号化された映像信号を復号して映像表示装置６へ出力する。

アングル／ズームデータ記憶部１４は、映像カメラ２のアングル／ズ−ムに係る制御データであるアングル／ズ−ムデータを記憶する手段である。ＴＶ会議システム制御部１１からの指示により、入力されたアングル／ズ−ムデータを記憶する。また、ＴＶ会議システム制御部１１からの指示により、指定されたアングル／ズ−ムデータを出力する。

このアングル／ズームデータ記憶部１４が記憶するアングル／ズ−ムデータは、所定の領域よりも広い撮影領域を映像カメラ２が撮影するズームアウトの状態に対応するズームアウト設定データと、所定の領域よりも狭い撮影領域を映像カメラ２が撮影しているズームインの状態に対応するズームイン設定データの少なくとも２つある。なお、映像カメラ２が現在撮影している領域が所定の領域よりも広いか否かは、例えば、映像カメラ２のズーム調整が１０段階であるとすれば、現在のズーム状態のレベル値がズームレベルの最小値と最大値の中間値であるレベル５より大であるか否かで判定すればよい。

アングル／ズーム制御部１５は、ＴＶ会議システム制御部１１から入力されるアングル／ズ−ムデータに従って、映像カメラ２のアングル／ズ−ムを制御する手段である。

音声信号入出力部１６は、ＴＶ会議システム制御部１１からの制御に応じて、スピーカ３，マイク４，通信制御部１２との間で音声信号の入出力に係わる制御を実行する。また、音声信号入出力部１６は、マイク４から入力してくる音声信号のレベルを検出し、検出した音声レベルに係わる情報をＴＶ会議システム制御部１１へ出力する。

図２は、操作部５の外観図である。操作部５は上ボタン５１、下ボタン５２、左ボタン５３、右ボタン５４、ズームアウトボタン５５、ズームインボタン５６、定位置ボタン５７、ミュートボタン５８を有する。本装置１の操作者は、テレビ会議の状況に応じて、これらの各ボタンを操作する。例えば、発言者が本装置１側の出席者であれば、その出席者にアングルを合わせてズームインした映像を相手装置８側へ送信し、発言者が相手装置８側の出席者であれば、その発言を聞いている本装置１側の出席者の全体が映るようにズームアウトした映像を相手装置８側へ送信する。

上ボタン５１、下ボタン５２、左ボタン５３、右ボタン５４は、映像カメラ２の撮影方向であるアングルを手動で調整するボタンである。なお、上ボタン５１、下ボタン５２、左ボタン５３、右ボタン５４は、一体構成された所謂方向キーであってもよい。

ズームアウトボタン５５およびズームインボタン５６は、映像カメラ２のズームアウト／ズームインを手動で調整するボタンであり、ズームアウトボタン５５を押下し続けると、撮影領域を拡大して、多数の会議出席者を撮影するズームアウトの方向に映像カメラ２は動作する。また、ズームインボタン５６を押下し続けると、発言者等の特定の会議出席者を拡大（撮影領域は縮小）して撮影するズームインの方向に映像カメラ２は動作する。

定位置ボタン５７は、アングル／ズームデータ記憶部１４が記憶するアングル／ズ−ムデータの記憶、および読出しに係わるボタンである。上ボタン５１、下ボタン５２、左ボタン５３、右ボタン５４，ズームアウトボタン５５，ズームインボタン５６を操作して、映像カメラ２のアングルおよびまたはズームを操作者が手動で制御した後、一定時間内（例えば、１０秒）に、定位置ボタン５７が押下された場合、ＴＶ会議システム制御部１１は、その時の映像カメラ２のアングル／ズ−ムデータをアングル／ズームデータ記憶部１４に書き込む。

ここで、その時の映像カメラ２のズ−ム状態が所定の領域よりも広い撮影領域を撮影しているズームアウトの状態であれば、そのアングル／ズ−ムデータをズームアウト設定データとして書き込み、所定の領域よりも狭い撮影領域を撮影しているズームインの状態であれば、ズームイン設定データとして書き込む。これにより、操作者は、そのアングル／ズ−ムデータをズームアウトまたはズームインのどちらの状態に対応した定位置であるかを識別して登録する必要が無く、操作がシンプルで誤操作の恐れが少ない。

上ボタン５１、下ボタン５２、左ボタン５３、右ボタン５４，ズームアウトボタン５５，ズームインボタン５６のいずれの操作も伴わずに、定位置ボタン５７が押下された場合、ＴＶ会議システム制御部１１は、アングル／ズームデータ記憶部１４からズームアウト設定データまたはズームイン設定データを読取り、アングル／ズーム制御部１５を介して、読取ったアングル／ズームデータのアングル／ズ−ムとなるように映像カメラ２を制御する。

ここで、その時の映像カメラ２のズ−ム状態が所定の領域よりも広いズームアウトの状態であれば、ＴＶ会議システム制御部１１は、ズームイン設定データをアングル／ズームデータ記憶部１４から読取り、所定の領域よりも狭いズームインの状態であれば、ＴＶ会議システム制御部１１は、ズームアウト設定データをアングル／ズームデータ記憶部１４から読取る。これにより、操作者は、アングル／ズ−ムデータをズームアウトまたはズームインのどちらの状態に対応した定位置であるかを識別して読み出す必要が無く、操作がシンプルで誤操作の恐れが少ない。

ミュートボタン５８は、本装置１側から相手装置８へ送信する音声信号を停止するボタンであり、例えば、相手装置８側の会議出席者が発言している場合、本装置１側の雑音の抑制やハウリングの防止やするためにミュートボタン５８を押下する。なお、本装置１は、このミュートボタン５８の押下と連動して、映像カメラ２のズームイン／ズームアウトを制御する（後述）。

図３は本装置１の動作フローチャートである。以下、図１、図２を併用して、本装置１の動作フローを説明する。本フローは本装置１の電源が投入された状態からスタートする（Ｓ３００）。

本フローのスタート後、待機状態において、操作部５の上ボタン５１、下ボタン５２、左ボタン５３、右ボタン５４、ズームアウトボタン５５、ズームインボタン５６を操作する撮影領域に係る操作の有無（Ｓ３１０）、定位置ボタン５７押下の有無（Ｓ３２０）、相手装置８へ送信する送話音声を一定時間以上検知しない状態の検知（Ｓ３２１）を繰り返す。

Ｓ３１０において、撮影領域の操作が為されると（Ｓ３１０，ＹＥＳ）、ＴＶ会議システム制御部１１は、操作部５から入力してくる操作データをアングル／ズームデータとしてアングル／ズーム制御部１５へ出力し、アングル／ズーム制御部１５はそのアングル／ズームデータに従って、映像カメラ２のアングル／ズームを制御すると共に、操作タイマを起動または動作中の操作タイマを再起動し（Ｓ３１１）、Ｓ３２０へ進む。これにより、本装置１の操作者は手動で映像カメラ２のアングル／ズームを制御することが出来る。なお、Ｓ３１１において、その都度操作タイマを起動／再起動するのは、一連の操作が停止してからの時間経過を測定するためである。Ｓ３１０において、撮影領域の操作が無ければ（Ｓ３１０，ＮＯ）、Ｓ３１１をスキップして、Ｓ３２０へ進む。

Ｓ３２０において、定位置ボタン５７が押下された場合（Ｓ３２０，ＹＥＳ）、Ｓ３３０へ進み、定位置ボタン５７が押下されなければ（Ｓ３２０，ＮＯ）、Ｓ３２１へ進む。

Ｓ３３０において、操作タイマが満了（例えば、１０秒）であれば（Ｓ３３０，ＹＥＳ）、撮影領域の操作が終了して一定時間以上が経過しているので、撮影領域の操作を伴わない定位置ボタン５７の押下、即ち、映像カメラ２のアングル／ズームを切り替える操作であると判定し、Ｓ３５０へ進む。操作タイマが満了でなければ（Ｓ３３０，ＮＯ）、撮影領域の操作をして間の無い定位置ボタン５７の押下、即ち、現在の映像カメラ２のアングル／ズームを定位置として登録する操作であると判定し、Ｓ３４０へ進む。

Ｓ３４０において、現在の映像カメラ２のズーム状態がズームアウトの状態であれば（Ｓ３４０，ＹＥＳ）、ＴＶ会議システム制御部１１は現在の映像カメラ２のアングル／ズームをズームアウト設定データとしてアングル／ズームデータ記憶部１４に記憶する（Ｓ３４１）。これによりこのズームアウトの状態がズームアウトにおける定位置として登録される。

Ｓ３４０において、現在の映像カメラ２のズーム状態がズームインの状態であれば（Ｓ３４０，ＮＯ）、ＴＶ会議システム制御部１１は映像カメラ２の現在のアングル／ズームをズームイン設定データとしてアングル／ズームデータ記憶部１４に記憶する（Ｓ３４２）。これによりこのズームインの状態がズームインにおける定位置として登録される。

Ｓ３５０において、現在の映像カメラ２のズーム状態がズームアウトの状態であれば（Ｓ３５０，ＹＥＳ）、ＴＶ会議システム制御部１１はズームイン設定データをアングル／ズームデータ記憶部１４から読み出してアングル／ズーム制御部１５へ出力し、映像カメラ２のアングル／ズームを登録されているズームイン設定データに一致するように制御し（Ｓ３５１）、Ｓ３１０へ戻る。Ｓ３５０において、現在の映像カメラ２のズーム状態がズームアウトの状態でなければ（Ｓ３５０，ＮＯ）、ＴＶ会議システム制御部１１はズームアウト設定データをアングル／ズームデータ記憶部１４から読み出してアングル／ズーム制御部１５へ出力し、映像カメラ２のアングル／ズームを登録されているズームアウト設定データに一致するように制御し（Ｓ３５２）、Ｓ３１０へ戻る。これにより、操作者は現在のズーム状態を意識することなく、定位置ボタン５７を押下するだけで、ズームイン／ズームアウトを切り替えることができる。

ところで、定位置ボタン５７の押下が無く（Ｓ３２０，ＮＯ）、音声信号入出力部１６が一定時間（例えば、５分）以上、相手装置８への送話音声を検知しない場合（Ｓ３２１，ＮＯ）、ＴＶ会議システム制御部１１は映像カメラ２のアングル／ズームを登録されているズームアウト設定データに一致するように制御する（Ｓ３５２）。これにより、本装置１側の出席者の発言が終了し、相手装置８側の出席者が発言している状況において、定位置ボタン５７の押下を忘れ、映像カメラ２がズームインの状態になったままの状態を防止できる。なお、Ｓ３２１で相手装置８への送話音声の有無は、マイク４のスイッチが切られた状態（図示せず）またはミュートボタン５８が押下された状態か否かで判定してもよいし、音声信号入出力部１６における相手装置８への送話音声の信号レベルで判定してもよい。

以上、本発明の実施形態について説明した。本発明によれば、高度な信号処理が不要であり、テレビ会議中のカメラのアングル／ズームの制御を経済的に自動化できると共に、ズームインとズームアウトを自動的に識別するので操作性がシンプルで、誤操作の恐れが少ないという利点がある。

なお、本発明の実施形態において、映像カメラの撮影領域をアングル／ズームで制御するとして説明したが、アングルは固定的であってもよい。

１・・・撮影領域自動制御機能を有するテレビ会議制御装置
２・・・映像カメラ
３・・・スピーカ
４・・・マイク
５・・・操作部
６・・・映像表示装置
７・・・ネットワーク
８・・・相手装置
１１・・・ＴＶ会議システム制御部
１２・・・通信制御部
１３・・・映像信号入出力部
１４・・・アングル／ズームデータ記憶部
１５・・・アングル／ズーム制御部
１６・・・音声信号入出力部
５１・・・上ボタン
５２・・・下ボタン
５３・・・左ボタン
５４・・・右ボタン
５５・・・ズームアウトボタン
５６・・・ズームインボタン
５７・・・定位置ボタン
５８・・・ミュートボタン

Claims

会議出席者を撮影する映像カメラのアングルおよびまたはズームを電気的に制御する機能を備えるテレビ会議制御装置であって、
前記映像カメラのアングルおよびまたはズームを自テレビ会議制御装置の操作者が手動で制御する撮影領域手動制御手段と、前記映像カメラのアングルおよびまたはズームに係わるデータを記憶するデータ記憶手段と、前記映像カメラのアングルおよびまたはズームを前記データ記憶手段に記憶されているデータに従って制御する撮影領域データ制御手段と、を有し、
前記データ記憶手段は、所定の領域よりも広い撮影領域を前記映像カメラが撮影しているズームアウトの状態で予め定められた第１の特定操作が為された場合に、当該特定操作が為された時の前記映像カメラのアングルおよびまたはズームに係わるデータをズームアウト設定データとして記憶し、前記所定の領域よりも狭い撮影領域を前記映像カメラが撮影しているズームインの状態で前記第１の特定操作が為された場合に、当該特定操作が為された時の前記映像カメラのアングルおよびまたはズームに係わるデータをズームイン設定データとして記憶し、
前記撮影領域データ制御手段は、前記ズームインの状態で予め定められた第２の特定操作が為された場合または通信先へ送信する送話音声を所定時間以上検知しない場合に、前記データ記憶手段に記憶されている前記ズームアウト設定データに対応するアングルおよびまたはズームとなるように前記映像カメラのアングルおよびまたはズームを自動的に制御し、前記ズームアウトの状態で前記第２の特定操作が為された場合に、前記データ記憶手段に記憶されている前記ズームイン設定データに対応するアングルまたはズームとなるように前記映像カメラのアングルおよびまたはズームを自動的に制御することを特徴とする撮影領域自動制御機能を有するテレビ会議制御装置。
請求項１に記載のテレビ会議装置であって、
前記第１の特定操作は前記映像カメラのアングルおよびまたはズームに係わる操作を自テレビ会議制御装置の操作者が手動で制御した後の予め定められた時間が経過する以前に為された所定の操作であって、前記第２の特定操作は前記映像カメラのアングルおよびまたはズームに係わる操作を伴わずに為された前記所定の操作であることを特徴とする撮影領域自動制御機能を有するテレビ会議制御装置。