JP2002262138A

JP2002262138A - 撮像システム、テレビ会議システム、監視システムおよび撮像機能を有した情報端末機器

Info

Publication number: JP2002262138A
Application number: JP2001056819A
Authority: JP
Inventors: Takashi Kawai; 川井　　隆
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2001-03-01
Filing date: 2001-03-01
Publication date: 2002-09-13

Abstract

(57)【要約】【課題】複数の被写体をそれぞれ撮影するのに人手に
よる撮影範囲の調整作業が必要になる。【解決手段】撮影範囲を変更可能な撮像手段１０１
と、この撮像手段による撮影画像から特定領域を抽出す
る領域抽出手段と、この領域抽出手段により抽出された
特定領域の撮影範囲内での位置および大きさに基づい
て、上記特定領域が撮影範囲内において所定の位置およ
び所定の大きさで撮影されるように撮像手段に撮像範囲
の設定動作（例えば、パン、チルトおよびズーム動作）
を行わせる制御手段１０１，１０２とを有する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、テレビ会議システ
ムや監視システム等に使用される撮像システムに関する
ものであり、特に、空間的に異なる位置に複数存在する
被写体をそれぞれ撮影画面内にて適正な位置および大き
さで撮影可能とする撮像システムに関するものである。

【０００２】

【従来の技術】空間的に異なる位置に存在する被写体を
撮影する方法としては、撮影者がビデオカメラ等の撮像
装置を手で持って任意の被写体に撮影範囲を合わせる方
法や、撮像装置を机や壁、天井などに固定し、撮像装置
に搭載された駆動部（雲台等）によって撮像装置を回転
等させることにより撮影範囲を移動させ、注目する被写
体を撮影する方法がある。

【０００３】そして、後者の撮影方法は、例えば、通信
ネットワークを利用したテレビ（遠隔）会議システムに
利用される。すなわち、地理的に隔たった複数人が、会
議机上に配置された撮像装置を用い、撮影された互いの
姿を確認しながら、マイクおよびスピーカーを用いて音
声を交換し、会議するシステムである。

【０００４】このような会議システムでは、多くの場
合、撮影されるべき被写体は発言者であり、発言者以外
のメンバーすなわち聞き手は、各自モニターなどの表示
装置に映し出された発言者の表情や動作を見ながら意見
の交換を進めていく。

【０００５】図１３には、例えば東京−大阪間で行われ
ている遠隔会議における東京での会議室の様子を表して
いる。

【０００６】東京では、図中のテーブル１２０１を囲ん
だ１２名のメンバー（Ａ〜Ｌ氏）が参加し、図示してい
ないが同様に大阪でも複数のメンバーが会議に参加して
いる。テーブル１２０１の中央にはビデオカメラ１２
０２が設置されていて、メンバーの姿が撮影され、その
映像は大阪へ伝送されている。

【０００７】一方、各メンバーの前にはモニター１２０
３が設置されており、大阪のメンバーが表示されてい
る。

【０００８】図１４にはビデオカメラの具体的構成を、
図１５にはモニター画面の様子を示している。

【０００９】図１４に示すビデオカメラは、カメラ本体
１３０１が固定台１３０３および回転軸１３０２からな
る雲台上に搭載され、会議のメンバーを撮影するときに
は回転軸１３０２が水平方向に回転したり回転軸１３０
２とカメラ本体１３０１との連結部が上下方向に回転し
たりすることによって、カメラ本体１３０１が図中矢印
方向（パン方向およびチルト方向）に向きを変えて撮影
範囲を変更する。これにより、図１５に示すように、カ
メラ本体１３０１によって撮影された被写体（発言者）
の映像がモニター表示される。

【００１０】このように、複数の会議参加者から交互に
変わる発言者に対し、聞き手に発言者の姿を表示するた
めには、発言者のいる方向に撮影範囲がパンおよびチル
トして発言者を撮影するが、多くの場合、人手（リモコ
ン操作等）によって撮像装置の向きを操作している。

【００１１】また、近年では、指向性マイクを用い、発
言者の音声に基づいて発言者の方向を検知したり、メン
バー各人に用意されたマイクから音声入力中のマイクを
判定したりして、自動で撮像装置の向きを変え、発言者
を撮影するシステムも提案されている。

【００１２】

【発明が解決しようとする課題】しかしながら、図１３
に示すように、カメラから各メンバーの距離は様々であ
ることが多く、例えば、メンバーＤ，Ｊに比べてメンバ
ーＡ，Ｇは遠い。この場合、メンバーＤ，Ｊの撮影画像
が図１６（Ａ）に示すように表示されている状態から、
カメラが向きを変えてメンバーＡ，Ｇをそのまま撮影す
ると、図１６（Ｂ）に示すように、被写体画像が小さく
なってしまう。

【００１３】そして、このようにメンバーの位置によっ
て撮影範囲中のメンバーの画像の大きさが異なってしま
うと、表情などを読み取る上で不都合である。

【００１４】また、マイクなどを介して音声がどのメン
バーからも同一に聞こえるにもかかわらず、メンバーの
画像だけ距離感が異なってしまうのは不自然である。さ
らに、カメラの方向設定の精度やメンバーの動きによっ
て、図１６（Ｃ）に示すように発言者の画像が表示領域
（撮影範囲）から外れてしまうこともある。

【００１５】このような不都合および不自然さを取り除
くために、人手による調整作業を行ったのでは、調整専
用の人員が必要となったり会議の円滑な進行が妨げられ
たりするおそれがあり、好ましくない。

【００１６】そこで、本発明は、空間的に位置（距離）
が異なる複数の被写体のいずれをも撮影範囲内の予め決
められた位置にて予め決められた大きさで安定的に撮影
できるようにした撮像システムを提供することを目的と
している。

【００１７】

【課題を解決するための手段】上記の目的を達成するた
め、本願第１の発明の撮像システムは、撮影範囲を変更
可能な撮像手段と、この撮像手段による撮影画像から特
定領域を抽出する領域抽出手段と、この領域抽出手段に
より抽出された特定領域の撮影範囲内での位置および大
きさに基づいて、上記特定領域が撮影範囲内において所
定の位置および所定の大きさで撮影されるように撮像手
段に撮像範囲の設定動作（例えば、パン、チルトおよび
ズーム動作）を行わせる制御手段とを有している。

【００１８】これにより、撮影範囲内で特定領域（例え
ば、主被写体の領域）が所定の位置からずれていたり所
定の大きさと異なっていたりしたときには、自動的に撮
影範囲が補正され、上記特定領域が所定の位置および所
定の大きさで撮影される。このため、空間的に位置（距
離）が異なる様々な被写体のいずれの画像も、モニター
等の画像表示画面上の同じ位置に同じ大きさで安定的に
表示させることが可能となる。

【００１９】また、本願第２の発明の撮像システムは、
画像撮影を行う撮像手段と、この撮像手段による撮影画
像から特定領域を抽出する領域抽出手段と、この領域抽
出手段により抽出された特定領域の撮影範囲内での位置
および大きさに基づいて、上記特定領域の画像が画像表
示画面内において所定の位置に所定の大きさで表示され
るように撮影画像を電子的に処理する画像処理手段とを
有している。

【００２０】これにより、撮影範囲内で特定領域（例え
ば、主被写体の領域）が所定の位置からずれていたり所
定の大きさと異なっていたりしたときには、撮影画像の
切り出し、拡大縮小等の画像処理が行われる。このた
め、空間的に位置（距離）が異なる様々な被写体のいず
れの画像も、モニター等の画像表示画面上の同じ位置に
同じ大きさで安定的に表示させることが可能となる。

【００２１】なお、上記第１および第２の発明におい
て、使用者操作や音声発生源の位置に応じて撮像手段の
撮影方向を指定するための方向情報を出力する情報出力
手段を有する場合には、この方向情報によって大まかな
撮影方向が指定されれば、その後は上記制御手段による
撮影範囲の設定制御や上記画像処理手段による画像処理
動作によって自動的に特定領域の画像を正確に画像表示
画面上の同じ位置に同じ大きさで表示させることが可能
となる。

【００２２】したがって、テレビ会議システムや監視シ
ステム等において、発言者等の主被写体の位置にかかわ
らず違和感なく主被写体の画像を表示させることが可能
である。

【００２３】

【発明の実施の形態】（第１実施形態）図１には、本発
明の第１実施形態である撮像システムの構成を示してい
る。この図において、１０１は撮像部（撮像手段）であ
る。この撮像部１０１は、先に図１４にて説明したもの
と同様に、カメラ本体と雲台とから構成され、雲台の動
作によってカメラ本体がパン、チルトされることにより
視野方向（撮影方向）を変更することができるととも
に、光学的にズームすることで視野角（撮影画角）を変
更することが可能となっている。なお、視野方向および
視野角の変更により視野範囲（撮影範囲）が変更される
ことになる。

【００２４】撮像部１０１は、カメラ本体に備えられた
ＣＣＤ等の撮像素子によって被写体像を光電変換し、映
像信号として外部に出力する。

【００２５】１０２は撮影条件制御部であり、後述する
制御情報生成部１０４からの制御情報に応じて撮像部１
０１にパン、チルトおよびズーム動作を行わせる。ま
た、撮影条件制御部１０２は、ホワイトバランス制御お
よびダイナミックレンジ制御などの制御情報も受け取っ
てこれらに応じた映像信号を形成する。

【００２６】撮像部１０１から出力された映像信号は、
図示しないモニター等の映像表示装置やコンピュータな
ど外部機器に向けて出力されるほか、撮影された画像か
ら主被写体を認識するための被写体抽出部（領域抽出手
段）１０３にも出力される。

【００２７】被写体抽出部１０３は、図２に示すよう
に、撮影画像２０１全体から人物である主被写体の領域
（特定領域）を背景と区別して抽出する。被写体抽出部
１０３によって人物が抽出されると、撮影画像は図２に
２０２で示すように人物（白）と人物以外（黒）の２値
で表現される。

【００２８】ここで、被写体抽出の方法については、特
に限定しないが様々な方法が考えられている。図３に
は、そのうちの背景差分法による被写体抽出方法を示し
ている。図３の３０１は背景に什器（図中斜線部）など
があり、前面に人物が存在する状況での撮影画像を表し
ている。この背景差分法による被写体抽出では、予め背
景だけの映像を撮影して記録保持しておき（図３の３０
２）、主被写体を含む撮影画像３０１と背景画像３０２
との差分を取ることによって主被写体領域を得る方法で
ある。

【００２９】この背景差分法を用いる場合、視線方向が
可動である撮像系では、事前に撮影された背景画像との
位置決めをするために、背景にマーカーを予め配置して
おいたり、低解像度による差分処理を行ったりするなど
の配慮が必要である。

【００３０】また、背景差分法のほかに、Snakes法やフ
ラクタルを応用した手法で被写体を抽出する方式を用い
てもよい。

【００３１】被写体抽出された信号は次に制御情報生成
部１０４に入力される。制御情報生成部１０４は、被写
体位置判定部１０５、被写体領域判定部１０６および撮
影条件決定部１０７から構成されている。

【００３２】被写体位置判定部１０５は、被写体抽出部
１０３による抽出結果に基づいて撮影された主被写体が
視野範囲内に収まっているか否かを判定する。図４の４
０１は、主被写体が視野範囲に対して左へずれている場
合を表している。この場合、被写体位置判定部１０５
は、被写体が左へずれていることを示す情報を撮影条件
決定部１０７に出力し、撮影条件決定部１０７はこの情
報に基づいて、図４の４０２から撮像部１０１を左方向
にパンさせる制御情報を撮影条件制御部１０２に出力す
る。

【００３３】撮影条件制御部１０２はこの制御情報に応
じて、主被写体領域が図３の４０３のように視野範囲内
に収まるまで撮像部１０１をパン動作させ、撮像部１０
１の視野範囲を適切に設定する。

【００３４】図５には、被写体位置判定部１０５におけ
る被写体位置判定方法の例を示している。この例では、
撮影範囲全体を表す５０１の左右端部のやや内側に境界
５０２，５０３を設ける。

【００３５】そして、被写体抽出によって得られた主被
写体領域に境界５０２，５０３が含まれる（図中の５０
４）か接する（図中の５０５）ときは、図６に示す手順
によって境界領域内に収まるまで視野範囲を移動させ
る。

【００３６】具体的には、まずステップ（図ではＳと略
す）１では、主被写体領域に左境界５０２が含まれる
（接する）か否かを判別し、含まれる場合はステップ２
に含まれない場合にはステップ５に進む。

【００３７】ステップ２では、主被写体領域に右境界５
０３が含まれる（接する）か否かを判別し、含まれる場
合はステップ３に進み、被写体領域判定部１０６での判
定に移行する。また、含まれない場合はステップ４に進
み、被写体が左へずれていることを示す情報を撮影条件
決定部１０７に出力する。撮影条件決定部１０７は、こ
の情報に基づいて撮影条件制御部１０２に撮像部１０１
を左方向にパンさせる制御情報を出力する。

【００３８】また、ステップ５では、主被写体領域に右
境界５０３が含まれる（接する）か否かを判別し、含ま
れる場合はステップ６に進んで被写体が右へずれている
ことを示す情報を撮影条件決定部１０７に出力する。撮
影条件決定部１０７は、この情報に基づいて撮影条件制
御部１０２に撮像部１０１を右方向にパンさせる制御情
報を出力する。また、ステップ５において主被写体領域
に右境界５０３が含まれない場合は、ステップ７に進
み、撮影領域判定部１０６での判定に移行する。

【００３９】ここで、被写体位置判定部１０５によって
被写体位置判定された結果は、図７に示すように３種類
に分類される。

【００４０】まず第１は、図７の７０１に示すように主
被写体領域が撮影範囲における左右の境界５０２，５０
３の内側にちょうど収まる場合である。この場合、多く
の状況で満足する撮影画像と思われる。

【００４１】第２の場合は、７０２のようにパン調整を
しても被写体が撮影範囲内に収まりきらない場合であ
る。これは、撮像部１０１から被写体までの距離が近い
とき（例えば、図１３に示すＤ氏やＪ氏の撮影時）に起
こり易い。この場合は、視野角の調整をするため、次の
被写体領域判定部１０６によって調整される。

【００４２】また、第３の場合は、７０３のように主被
写体領域が境界内に収まっているが、被写体が小さすぎ
る場合である。これは、撮像部１０１から被写体までの
距離が遠いとき（例えば、図１３に示すＡ氏やＧ氏の撮
影時）に起こり易い。この場合も視野角の調整をするた
め次の被写体領域判定部１０６によって調整される。

【００４３】被写体領域判定部１０６では、主に被写体
の大きさ調整が行われる。図８には、被写体領域判定方
法の例を示している。

【００４４】被写体領域判定部１０６では、撮影範囲８
０１の内側に底辺の開いた矩形境界を２つ（８０２，８
０３）設定する。このうち外側の矩形境界８０２の左右
辺は前述の被写体位置判定部１０５の境界５０２，５０
３と一致する。

【００４５】そして、被写体領域判定は、主被写体領域
の左右端および上端のうち少なくとも２つがこれら２つ
の矩形境界８０２，８０３の間に収まっているか否かを
判定し、収まっていない場合（主被写体領域が大きすぎ
たり小さすぎたりする場合）には、その旨を示す情報を
撮影条件決定部１０７に出力する。撮影条件決定部１０
７は、この情報に基づいて、主被写体領域の少なくとも
２端が上記矩形境界８０２，８０３の間に収まるように
撮像部１０１をズーム動作させるための制御情報を撮影
条件制御部１０２に出力する。撮影条件制御部１０２は
この制御情報に応じて撮像部１０１を光学的にズーム動
作させ、図７の７０４，７０５に示すように、主被写体
領域が視野範囲内で所定の大きさになるように視野画角
を適切に設定する。

【００４６】なお、主被写体領域の上端が２つの矩形境
界８０２，８０３の間に収まっていない場合において、
視野方向が被写体に対して上下方向にずれているときに
は、撮像部１０１にチルト動作させることによって視野
範囲を適切に設定するようにしてもよい。

【００４７】以上説明したように、本実施形態によれ
ば、撮像部１０１の視野範囲内で主被写体領域が所定の
位置からずれていたり所定の大きさと異なっていたりし
たときには、自動的に視野範囲が補正され、主被写体領
域が所定の位置および所定の大きさで撮影される。この
ため、空間的に位置（距離）が異なる複数の被写体のい
ずれの画像も、モニター等の映像表示画面上の同じ位置
に同じ大きさで表示させることができる。

【００４８】したがって、テレビ会議システム等におい
て、発言者の位置にかかわらず違和感のない発言者画像
を相手方の映像表示装置上に表示させることができる。

【００４９】（第２実施形態）第１実施形態では、視野
範囲を光学的なズーム動作又は機械的なパン、チルト動
作によって適切に設定する場合について説明したが、撮
像部１０１から出力された映像信号を電気的に処理する
ことによって、すなわち電子ズーム処理や主被写体画像
の切り出しによって主被写体の画像をモニター等の映像
表示装置上で適切な位置に適切な大きさで表示されるよ
うにしてもよい。

【００５０】図９には、本発明の第２実施形態である撮
像システムの構成を示している。なお、第１実施形態と
共通する構成要素については第１実施形態と同符号を付
して説明に代える。

【００５１】本実施形態では、撮像部１０１と不図示の
映像表示装置との間に画像処理部１１０を設けている。

【００５２】この画像処理部１１０では、被写体抽出部
１０３、被写体位置判定部１０５および被写体領域判定
部１０６での判定結果に応じて撮像部１０１から出力さ
れた映像信号を、主被写体の画像が図５の５０６および
図７の７０４，７０５と同様の位置および大きさで映像
表示装置上に表示されるように、電子ズーム処理や画像
切り出しによる位置変更処理を行う。

【００５３】これにより、撮像部１０１の視野囲内で主
被写体領域が所定の位置からずれていたり所定の大きさ
と異なっていたりしたときには、自動的に撮影画像の電
子ズーム処理や画像切り出し処理が行われ、空間的に位
置（距離）が異なる複数の被写体のいずれの画像も、モ
ニター等の映像表示画面上の同じ位置に同じ大きさで表
示させることができる。

【００５４】したがって、テレビ会議システム等におい
て、発言者の位置にかかわらず違和感のない発言者画像
を相手方の映像表示装置上に表示させることができる。

【００５５】なお、本実施形態のような映像信号の電気
的処理を、第１実施形態の光学的・機械的な方法に組み
合わせて使用してもよい。

【００５６】（第３実施形態）図１０には、本発明の第
３実施形態である撮像システムの構成を示している。本
実施形態は、第１実施形態のシステムに圧縮符号化部９
０１を追加し、撮像部１０１からの映像信号を圧縮符号
化してネットワーク通信網などの伝送系に送るようにし
ている。

【００５７】動画像のネットワーク通信網における圧縮
符号化方式としては、ＭＰＥＧ−４(Moving Picture Ex
perts Group-4)方式が知られている。ＭＰＥＧ−４圧縮
符号化方式においては、映像中のオブジェクト毎に符号
化するオブジェクト符号化機能があり、従来の符号化方
式に比べて高圧縮率が達成され、情報量の軽減がされて
いる。

【００５８】このオブジェクト符号化を行うためには、
映像中からオブジェクト（被写体）を抽出することが必
須であり、前述の被写体抽出部１０３を圧縮符号化部９
０１の前段に配置し、被写体抽出結果を符号化と撮像部
１０１の制御情報の生成との両方に用いることにより、
画像処理の重複を回避し、全体の処理スピードを上げ、
ハード的、ソフト的コストのパフォーマンスを向上させ
ることができる。

【００５９】（第４実施形態）図１１には、本発明の第
４の実施形態である撮像システムの構成を示している。
本実施形態では、第３実施形態に加えて、制御情報入力
部１００１および操作部１００２を設けている。なお、
第１実施形態の撮像システムに、制御情報入力部１００
１および操作部（情報出力手段）１００２を設けてもよ
い。

【００６０】操作部１００２は、ジョイスティックやマ
ウスなどのマンマシンインターフェースであり、操作者
はこの操作部１００２を通じて意図する被写体の一部が
撮像部１０１の視野範囲内に入るまで視野方向や撮影画
角を調整することができる。制御情報入力部１００１
は、操作部１００２からの操作信号を受けてパン、チル
ト、ズームの制御情報に変換する。

【００６１】そして、制御情報入力部１００１は、変換
した制御情報を撮影条件制御部１０２に入力し、その制
御情報に応じて撮像部１０１に視野範囲の変更動作を行
わせる。

【００６２】本実施形態によれば、操作者がおおまかに
意図する被写体の一部を視野範囲内に入れると、それ以
降は、第１実施形態にて説明したのと同様の手順で自動
的に視野範囲が最適設定される。

【００６３】（第５実施形態）図１２には、本発明の第
５実施形態である撮像システムの構成を示している。本
実施形態では、第３実施形態に加えて、制御情報入力部
１００１、第２の被写体位置判定部（情報出力手段）１
１０１およびマイクロフォン１１０２を設けている。な
お、第１実施形態の撮像システムに、制御情報入力部１
００１、第２の被写体位置判定部１１０１およびマイク
ロフォン１１０２を設けてもよい。

【００６４】マイクロフォン１１０２は、ステレオマイ
クのような音源の位置を大まかに判別する程度の指向性
マイクである。

【００６５】マイクロフォン１１０２によって拾われた
音声は、第２の被写体位置判定部１１０１に入力され、
第２の被写体位置判定部１１０１は音の強弱などから主
被写体の位置又は方向を判定する。制御情報入力部１０
０１は、その判定結果に基づいて撮像部１０１が主被写
体の方向に向くよう撮影条件制御部１０２にパン制御情
報を入力する。

【００６６】本実施形態によれば、各被写体（会議メン
バー）がマイクロフォン１１０２を通して発言すると、
その音声に基づいて自動的に撮像部１０１の視野範囲が
最適設定される。

【００６７】（第６実施形態）第５実施形態において、
マイクロフォンを全ての被写体（会議メンバー）が持つ
ようにしてもよい。この場合、第２の被写体位置判定部
１１０１は、複数のマイクからの音声を同時に受け付
け、それぞれのマイクからの音声を判断して主被写体の
位置又は方向を判定する。

【００６８】（第７実施形態）上記各実施形態では、テ
レビ会議システムについて説明したが、本発明の撮像シ
ステムは、監視システムに用いることもできる。

【００６９】具体的には、監視カメラ（撮像手段）で主
被写体（侵入者等）を捉えたときに、上記各実施形態に
て説明したのと同様の、主被写体画像の領域抽出方法お
よび撮影範囲制御又は画像処理方法を用いて、主被写体
がフレーム枠内に収まる位置にフレーム枠いっぱいとな
る大きさで撮像表示されるようにしてもよい。

【００７０】（第８実施形態）また、本発明の撮像シス
テムは、撮像機能を有する情報端末機器（携帯電話やモ
バイルコンピュータ等）に搭載することができる。

【００７１】具体的には、情報端末機器に搭載されたデ
ジタルカメラ部（撮像手段）によって、操作者の顔を撮
影し静止画又は動画を送信する場合に、上記各実施形態
にて説明したのと同様の、主被写体画像の領域抽出方法
および撮影範囲制御又は画像処理方法を用いることによ
り、いわゆる手振れによる像振れを防止した画像を送信
することができる。

【００７２】また、次世代通信にて用いられる画像圧縮
（ＭＰＥＧ４）と組み合わせることも可能である。

【００７３】

【発明の効果】以上説明したように、本願第１および第
２の発明によれば、撮影範囲内での特定領域を抽出し、
この特定領域が所定の位置からずれていたり所定の大き
さと異なっていたりしたときには、撮影範囲を自動的に
補正したり、撮影画像を電子的に処理したりするので、
人手による細かな撮影範囲の調整作業を必要とすること
なく、空間的に位置（距離）が異なる様々な被写体のそ
れぞれの画像をモニター等の画像表示画面上の同じ位置
に同じ大きさで安定的に表示させることができる。

【００７４】したがって、テレビ会議システムや監視シ
ステム等において、主被写体の位置にかかわらず違和感
なく主被写体の画像を表示させることができる。

【００７５】特に、上記第１および第２の発明におい
て、使用者操作や音声発生源の位置に応じて撮像手段の
撮影方向を指定することができる場合には、これによっ
て大まかな撮影方向が指定されれば、その後は撮影範囲
の設定制御や画像処理によって自動的に特定領域の画像
を正確に画像表示画面上の同じ位置に同じ大きさで表示
させることができ、撮影範囲の調整に関して、操作性の
向上や完全自動化を図ることができる。

【図面の簡単な説明】

【図１】本発明の第１実施形態である撮像システムの構
成を示すブロック図である。

【図２】上記撮像システムにおける被写体抽出処理を示
す説明図である。

【図３】上記被写体抽出方式の一例を説明する図であ
る。

【図４】上記撮像システムにおける視野方向の変更処理
を示す説明図である。

【図５】上記撮像システムにおける視野画角の変更処理
を示す説明図である。

【図６】上記撮像システムにおけるの被写体位置判定方
式の例を説明するフローチャートである。

【図７】上記撮像システムにおける撮影画像内で被写体
が不適当な大きさとなっている場合での動作を説明する
図である。

【図８】上記撮像システムにおける被写体領域判定方式
の一例を説明する図である。

【図９】本発明の第２実施形態である撮像システムの構
成を示すブロック図である。

【図１０】本発明の第３実施形態である撮像システムの
構成を示すブロック図である。

【図１１】本発明の第４実施形態である撮像システムの
構成を示すブロック図である。

【図１２】本発明の第５実施形態である撮像システムの
構成を示すブロック図である。

【図１３】従来の撮像装置の応用例を説明する図であ
る。

【図１４】従来の撮像装置を説明する図である。

【図１５】従来の撮像装置により撮影された画像の表示
例である。

【図１６】従来の撮像装置の問題点を説明する図であ
る。

【符号の説明】

１０１撮像部１０２撮影条件制御部１０３被写体抽出部１０４制御情報生成部１０５被写体位置判定部１０６被写体領域判定部１０７撮影条件決定部１１０画像処理部５０２，５０３被写体位置境界線８０２，８０３被写体領域境界線９０１圧縮符号化部１００１制御情報入力部１００２操作部１１０１第２の被写体位置判定部１１０２マイクロフォン

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｇ０３Ｂ 15/00 Ｇ０３Ｂ 15/00 ＰＱ 19/06 19/06 Ｇ０６Ｔ 1/00 ３４０Ｇ０６Ｔ 1/00 ３４０ＺＨ０４Ｎ 5/232 Ｈ０４Ｎ 5/232 Ａ 7/15 ６３０ 7/15 ６３０Ａ 7/18 7/18 ＥＦターム(参考） 2H054 AA01 BB11 BB13 5B057 AA19 AA20 BA02 BA19 DA07 DB02 DC04 5C022 AA12 AB21 AB62 AB63 AB66 AC27 AC41 AC69 AC74 5C054 AA04 CA04 CC02 CG02 CH01 EA01 FC12 FF02 HA18 HA25 5C064 AA02 AB04 AC02 AC07 AC12 AD02 AD08 AD14

Claims

【特許請求の範囲】

【請求項１】撮影範囲を変更可能な撮像手段と、この撮像手段による撮影画像から特定領域を抽出する領
域抽出手段と、この領域抽出手段により抽出された特定領域の撮影範囲
内での位置および大きさに基づいて、前記特定領域が撮
影範囲内において所定の位置および所定の大きさで撮影
されるように前記撮像手段に撮像範囲の設定動作を行わ
せる制御手段とを有することを特徴とする撮像システ
ム。
【請求項２】前記制御手段は、前記領域抽出手段により抽出された前記特定領域の撮影
範囲内での位置および大きさに基づいて、前記特定領域
が撮影範囲内において所定の位置および所定の大きさと
なるように撮影範囲を設定させるための制御情報を生成
する制御情報生成部と、この制御情報生成部により生成された制御情報に応じて
前記撮像手段に撮影範囲の設定動作を行わせる撮像範囲
制御部とを有して構成されていることを特徴とする請求
項１に記載の撮像システム。
【請求項３】前記制御手段は、前記撮像手段に、撮影
範囲の設定動作としてパン、チルトおよびズーム動作を
行わせることを特徴とする請求項１又は２に記載の撮像
システム。
【請求項４】前記特定領域が、撮影画像のうち主被写
体の領域であることを特徴とする請求項１から３のいず
れかに記載の撮像システム。
【請求項５】少なくとも前記撮像手段による撮影方向
を指定するための方向情報を出力する情報出力手段を有
しており、前記制御手段は、この情報出力手段からの情報に応じて
前記撮像手段に撮影方向の設定動作を行わせることを特
徴とする請求項１から４のいずれかに記載の撮像システ
ム。
【請求項６】前記情報出力手段は、使用者操作に応じ
て前記方向情報を出力することを特徴とする請求項５に
記載の撮像システム。
【請求項７】前記情報出力手段は、音声発生源の位置
に応じて前記方向情報を出力することを特徴とする請求
項５に記載の撮像システム。
【請求項８】前記領域抽出手段は、デジタル量子化さ
れた撮影画像の各画素について前記特定領域に含まれる
か否かを判定して前記特定領域を抽出することを特徴と
する請求項１から７のいずれかに記載の撮像システム。
【請求項９】画像撮影を行う撮像手段と、この撮像手段による撮影画像から特定領域を抽出する領
域抽出手段と、この領域抽出手段により抽出された特定領域の撮影範囲
内での位置および大きさに基づいて、前記特定領域の画
像が画像表示画面内において所定の位置に所定の大きさ
で表示されるように撮影画像を電子的に処理する画像処
理手段とを有することを特徴とする撮像システム。
【請求項１０】少なくとも前記撮像手段による撮影方
向を指定するための方向情報を出力する情報出力手段
と、この情報出力手段からの情報に応じて前記撮像手段に撮
影方向の設定動作を行わせる制御手段とを有することを
特徴とする請求項９に記載の撮像システム。
【請求項１１】前記情報出力手段は、使用者操作に応
じて前記方向情報を出力することを特徴とする請求項１
０に記載の撮像システム。
【請求項１２】前記情報出力手段は、音声発生源の位
置に応じて前記方向情報を出力することを特徴とする請
求項１０に記載の撮像システム。
【請求項１３】前記領域抽出手段は、デジタル量子化
された撮影画像の各画素について前記特定領域に含まれ
るか否かを判定して前記特定領域を抽出することを特徴
とする請求項９から１２のいずれかに記載の撮像システ
ム。
【請求項１４】請求項１から１３のいずれかに記載の
撮像システムを用いたことを特徴とするテレビ会議シス
テム。
【請求項１５】請求項１から１３のいずれかに記載の
撮像システムを用いたことを特徴とする監視システム。
【請求項１６】請求項１から１３のいずれかに記載の
撮像システムを用いたことを特徴とする撮像機能を有し
た情報端末機器。