JP3994469B2 - 撮像装置、表示装置及び記録装置 - Google Patents

撮像装置、表示装置及び記録装置 Download PDF

Info

Publication number
JP3994469B2
JP3994469B2 JP09913497A JP9913497A JP3994469B2 JP 3994469 B2 JP3994469 B2 JP 3994469B2 JP 09913497 A JP09913497 A JP 09913497A JP 9913497 A JP9913497 A JP 9913497A JP 3994469 B2 JP3994469 B2 JP 3994469B2
Authority
JP
Japan
Prior art keywords
imaging
video signal
control
detected
difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP09913497A
Other languages
English (en)
Other versions
JPH10290387A (ja
Inventor
利幸 飯島
忠房 富高
正和 小柳
直泰 細沼
研 玉山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP09913497A priority Critical patent/JP3994469B2/ja
Publication of JPH10290387A publication Critical patent/JPH10290387A/ja
Application granted granted Critical
Publication of JP3994469B2 publication Critical patent/JP3994469B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、例えばコンピュータネットワークを利用して遠隔地からの監視を行う際に使用して好適な撮像装置、表示装置及び記録装置に関するものである。
【0002】
【従来の技術】
事象の観察や監視、案内等の目的で、遠隔地からの画像を例えばコンピュータネットワーク(インターネット)を利用して観視を行うことが考えられている。そのような遠隔地からの観視を行う場合に、水平方向の画角を広げたいわゆるパノラマ画像が観視には好適である。
【0003】
そこでこのようなパノラマ画像を得る方法としては、例えば広角系のレンズを用いる方法が知られているが、一般的に広角系のレンズは高価であり、また通常の広角系のレンズでは垂直方向の画角も広げられるために、パノラマ画像の範囲の走査線数が減少し解像度が低下してしまう恐れがある。
【0004】
これに対して、パノラマ画像を予め撮像してハードディスク等の記憶装置に保存しておき、新たに撮像された画像をその中に嵌め込み合成してパノラマ画像を形成する方法が実施されている。しかしながらこの方法では、疑似的なパノラマ画像が形成されているに過ぎず、また天候や時間の変化に対して、嵌め込み合成された新たな画像と保存画像との間で違和感を生じる等の問題があった。
【0005】
【発明が解決しようとする課題】
この出願はこのような点に鑑みて成されたものであって、解決しようとする問題点は、従来の装置では、高価な広角系のレンズを用いても解像度が低下してしまう恐れがあり、また保存画像に嵌め込み合成してパノラマ画像を形成する方法では、例えば天候や時間の変化に対して違和感を生じる等の問題があったというものである。
【0006】
【課題を解決するための手段】
このため本発明においては、撮像手段の撮像範囲を変化させ、このような撮像手段からの映像信号を合成して広い画角を有する映像信号を形成するようにしたものであって、これによれば、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で得ることができる。
【0007】
また、本発明においては、撮像手段の撮像範囲を湾曲させ、このような撮像手段からの映像信号を正規化して広い画角を有する映像信号を形成するようにしたものであって、これによれば、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で得ることができる。
【0008】
さらに本発明においては、設定された時間ごと、あるいは特定の条件の元で、撮像手段での撮像とパノラマ画像の形成が行われることによって、監視に必要な事象の撮像が行われて、常に良好な観視を行うことができる。
【0009】
【発明の実施の形態】
すなわち本発明は、映像信号を発生する撮像手段と、撮像手段からの映像信号を記憶する記憶手段と、撮像手段の撮像範囲を変化させるための、パン・チルト2軸方向またはそのいずれかのみの回転方向に自由度を持つ駆動手段と、駆動手段によって、撮像手段の方向を変化して得られる複数の映像を連結してパノラマ映像信号を形成する映像信号処理手段と、撮像手段での撮像と駆動手段での駆動と映像信号処理手段での処理とを制御する制御手段とを有する撮像装置において、撮像手段からの映像信号と記憶手段に記憶された映像信号との差異を検出する比較手段を設け、比較手段は、撮像装置から得られる映像情報を現在と過去と比較して、その差異検出しその差が一定以上に開いたときに、新たなパノラマ画像の作成要求を行うものである。
【0011】
また本発明は、映像信号を発生する撮像手段と、撮像手段からの映像信号を記憶する記憶手段と、撮像手段の撮像範囲を変化させるための、パン・チルト2軸方向またはそのいずれかのみの回転方向に自由度を持つ駆動手段と、駆動手段によって、撮像手段の方向を変化して得られる複数の映像を連結してパノラマ映像信号を形成する映像信号処理手段と、撮像手段での撮像と駆動手段での駆動と映像信号処理手段での処理とを制御する制御手段と、映像信号処理手段で形成された映像信号を表示する表示手段とからなる表示装置において、撮像手段からの映像信号と記憶手段に記憶された映像信号との差異を検出する比較手段を設け、比較手段は、撮像装置から得られる映像情報を現在と過去と比較して、その差異検出しその差が一定以上に開いたときに、新たなパノラマ画像の作成要求を行うものである。
【0013】
また本発明は、映像信号を発生する撮像手段と、撮像手段の撮像範囲を変化させる駆動手段と、撮像手段からの映像信号を直接順次記録、若しくは撮像範囲の変化された映像信号から撮像手段の一つの撮像範囲より広い画角を有する映像信号を形成する映像信号処理手段を通じて記録する記録手段と、撮像手段での撮像と駆動手段での駆動と映像信号処理手段での処理と記録手段での記録とを制御する制御手段とからなる記録装置において、撮像手段からの映像信号を記憶する記憶手段と、撮像手段からの映像信号と記憶手段に記憶された映像信号との差異を検出する比較手段とを設け、比較手段は、撮像装置から得られる映像情報を現在と過去とで比較して、その差異を検出しその差が一定以上に開いたときに、新たなパノラマ画像の作成要求を行うものである。
【0021】
さらに本発明は、設定された時間ごと、または撮像された映像信号に差異が検出されたとき、または撮像手段の設けられた場所の音声が検出または認識されたとき、または撮像手段の設けられた場所の物理的状態の変化が検出または認識されたときに、上述の制御手段による制御が行われてなるものである。
【0022】
【実施例】
以下、図面を参照して本発明を説明するに、図1は本発明を適用した装置の一例の構成を示すブロック図である。
【0023】
この図1において、撮像手段としての撮像装置10は全体としてビデオカメラを示し、被写体(図示せず)から到達する撮像光は、レンズブロック部11のレンズ、絞り等を通して固体撮像素子、例えばCCD12に結像される。そしてこのCCD12で、任意の視野映像が映像信号に変換された後、信号分離(サンプルホールド:SH)/自動利得制御(AGC)装置13に与えられる。
【0024】
信号分離/自動利得制御装置13では、CCD12からの映像出力信号が、例えば所定の画素クロックに従ってサンプルホールドされると共に、例えばオートアイリス(AE)の制御信号によって所定のゲインを持つように自動利得制御が行われる。かくして得られた映像出力信号は、A/D変換装置14を介して信号処理装置15に供給される。
【0025】
信号処理装置15では、入力されてきた信号が、輝度、色差、ビデオ信号といった各信号に変換され、映像信号としてテレビジョンモニタ20や、後述するコンピュータ30のビデオキャプチャーボード31に供給される。これによってこのビデオキャプチャーボード31に供給された映像信号が、順次コンピュータ装置30に取り込まれる。
【0026】
また、撮像装置10のレンズブロック部11は、変倍用のレンズを駆動することによって撮像する画角を変化させることが可能なズームレンズである。そして後述するカメラコントローラ41からの駆動命令によって、モータ、例えばズーム用ステッピングモータ16が回転されて、上述の変倍用のレンズが駆動される如く構成されている。
【0027】
カメラコントローラ41は、撮像装置10のレンズ制御(フォーカス、ズーム)、露出制御(絞り、ゲイン、電子シャッタースピード)、白バランス制御、画質制御等を常時行うと共に、モードコントローラ42とのインターフェースが行われる。そして例えばズームの駆動要求に対しては、変倍用レンズを要求位置に駆動する制御信号がモータ16の駆動回路(図示せず)に出力されると共に、変倍用レンズの位置情報が常時モードコントローラ42に通信される。
【0028】
さらに撮像装置10は、駆動手段として例えばパン(左右)及びチルト(上下)といった2軸の回転方向の自由度を持つ装置、例えば回転雲台50の上に設置される。そして後述するパンチルタコントローラ43からの駆動命令によって、モータ、例えばパン用ステッピングモータ51及びチルト用ステッピングモータ52が回転されて、回転雲台50が各方向に駆動される如く構成されている。
【0029】
パンチルタコントローラ43では、モードコントローラ42とのインターフェースが行われる。そして例えばパン、チルトの各方向の駆動要求に対しては、回転雲台50を要求された方向に駆動する制御信号がモータ51、52の駆動回路(図示せず)に出力されると共に、回転雲台50の例えばパン、チルトの各方向の位置情報が常時モードコントローラ42に通信される。
【0030】
さらにモードコントローラ42は、撮像装置10及び回転雲台50の内部状態や、装置外部からのインターフェース情報に従ってシステム全体の制御を行う。そしてこのモードコントローラ42は、例えばRS232Cによってコンピュータ装置30に接続され、コンピュータ装置30からの絶対位置駆動要求に対して制御が行われる。
【0031】
すなわちモードコントローラ42では、コンピュータ装置30からの絶対位置駆動要求に対し、撮像装置10でその位置を撮像するべく、レンズブロック部11のモータ16及び回転雲台50のモータ51、52を駆動する駆動命令が、カメラコントローラ41及びパンチルタコントローラ43に振り分けられる。それと共に、これらのコントローラ41及び43からの位置情報が、モードコントローラ42を通じてコンピュータ装置30に送信される。
【0032】
さらにこのコンピュータ装置30には、記憶装置32と画像処理装置33と制御装置34とが設けられ、これらの装置によってこのコンピュータ装置30は、例えばパノラマ画像の形成のための映像信号処理手段、及び制御手段として使用される。また、このコンピュータ装置30で形成された映像信号がコンピュータモニタ60に供給されてユーザーインターフェースとされ、この管面上にグラフィック表示される画像を用いて内部処理の条件等が決定される。
【0033】
またこのコンピュータ装置30には、例えば撮像装置10から入力される映像信号がビデオキャプチャーボード31を通じて取り込まれる。ビデオキャプチャーボード31では、取り込まれた映像信号を任意のクォリティでモニタ60に表示すると共に、キャプチャー信号により任意の画像フォーマット(例えばビットマップ形式、JPEG形式の静止画、動画等)に任意のクォリティでキャプチャーし、ハードディスク等の記憶装置32に記憶することができる。
【0034】
さらにこのコンピュータ装置30で実行される制御アルゴリズムについて図2を用いて説明する。
【0035】
図2においてプログラムがスタートされると、まずステップ〔1〕で撮像映像とパノラマ画像の各々の表示領域をモニタ60上に設定する処理が行われる。これによってモニタ60上には、例えば図1中に示すように、撮像映像の表示領域61と、パノラマ画像の表示領域62とが設定される。そしてこの内の表示領域61に例えば撮像装置10から入力される映像信号が表示される。
【0036】
さらにステップ〔2〕で、例えばモードコントローラ42と周期的に通信を行うためのタイマーが設定される。そしてこれらの初期設定が完了すると、ステップ〔3〕で、各種の発生されるイベントの待機状態に推移される。なお発生されるイベントは、上述のステップ〔2〕で設定されたタイマーイベント(詳細は後述)と、後述のパノラマ画像の作成要求イベントである。
【0037】
ここでタイマーイベントの詳細について図4を用いて説明する。なおこのタイマーイベントは、例えばモードコントローラ42と周期的に通信を行うために発生されるイベントである。
【0038】
そこでこのイベントが発生されると、ステップ〔11〕で通信ポートの設定が完了しているか否か判断され、初回のみ通信ポートの設定が完了していないのでステップ〔12〕で通信ポートの開設処理が行われる。なお、上述の装置では、通信ポートとして例えばコンピュータ装置30上のRS232Cポートの開設が行われる。
【0039】
さらに2回目以降のタイマーイベントでは、ステップ〔13〕で受信データの有無が判断され、受信データが有る時はステップ〔14〕で受信データの解析処理が行われる。すなわちこのステップ〔14〕では、例えばモードコントローラ42との通信によって、レンズブロック部11の変倍用レンズの位置情報、回転雲台50のパン、チルトの各方向の位置情報が取得される。そしてこれらの情報からそれぞれズームの倍率情報、パン、チルトの角度情報が取り出される。
【0040】
次にステップ〔15〕では、データの転送要求(Flag so)の有無が確認される。そして転送要求が有る(True)のときは、データはすでに送信バッファに格納されているので、ステップ〔16〕で直ちにこの送信バッファのデータを用いて転送処理が行われると共に、転送要求が無し(Flag so=False)にされる。
【0041】
そしてステップ〔15〕で転送要求が無い(False)のときは、ステップ〔17〕〔18〕〔19〕でそれぞれ内部カウンタ(req cnt)の値が判断される。ここで(req cnt=0)のときは、ステップ〔17〕からステップ〔20〕に進められて、回転雲台50のモータ51、52を駆動するための絶対位置駆動要求の通信データの転送処理が行われる。
【0042】
また(req cnt=1)のときは、ステップ〔18〕からステップ〔21〕に進められて、レンズブロック部11のモータ16を駆動するための絶対位置駆動要求の通信データの転送処理が行われる。また(req cnt=2)のときは、ステップ〔19〕からステップ〔22〕に進められて、後述するパノラマ画像の作成処理が行われる。
【0043】
そしてステップ〔20〕〔21〕が実行された後は、ステップ〔23〕で(req cnt)をカウントアップする処理が行われる。またステップ〔22〕が実行された後は、ステップ〔24〕で(req cnt)を0に戻す処理が行われる。これによって、これらのステップ〔20〕〔21〕〔22〕の処理が、各イベントの処理ごとに循環して実行される。
【0044】
さらに上述のパノラマ画像の作成処理は以下に述べるようにして行われる。すなわちこのパノラマ画像の作成処理は、例えば図3に示すステップ〔30〕において、パノラマ作成要求(Flag pa)が設定されることによって、上述のタイマーイベントのステップ〔22〕においてこの処理が実行される。
【0045】
ここでパノラマ画像の作成処理の詳細について図5を用いて説明する。なおこの例では、処理の手順が、内部カウンタ(Pano cnt)に従って行われるものである。
【0046】
そこでまずステップ〔31〕〔32〕で内部カウンタ(Pano cnt)の値が判断される。ここで(Pano cnt=1)のときは、ステップ〔31〕からステップ〔33〕に進められて、撮像装置10の画角を最広角に設定するようにレンズブロック部11のモータ16を駆動する処理が行われると共に、(Pano cnt)をカウントアップする処理が行われる。なお、画角が最広角に設定されることで、より少ない回数の画像取得でパノラマ画像が形成される。
【0047】
また、(Pano cnt=2)のときは、ステップ〔32〕からステップ〔34〕に進められて、撮像装置10の撮像範囲をパノラマ画像の作成処理で最初に画像取得を行う位置に設定するように、回転雲台50のモータ51、52を駆動する処理が行われると共に、(Pano cnt)をカウントアップする処理が行われる。
【0048】
さらに(Pano cnt)が3以上のときは、ステップ〔35〕〔36〕で上述のステップ〔33〕〔34〕で設定されたズーム位置及び撮像範囲に移動されたことが確認される。そしてこれらの設定位置に到達した場合には、ステップ〔37〕で最初の画像取得が行われる。さらにステップ〔38〕で次の画像取得位置に回転雲台50のモータ51、52を駆動する処理が行われる。
【0049】
また、ステップ〔39〕で先に取得した画像の水平、垂直方向への圧縮処理等が行われ、ステップ〔40〕でパノラマ画像の作成状況がモニタ60の表示領域62に表示される。さらにステップ〔41〕で(Pano cnt)をカウントアップする処理が行われ、ステップ〔42〕でパノラマ画像が完成されたか否か判断され、完成していないときは以上の動作が繰り返される。
【0050】
そしてステップ〔42〕でパノラマ画像が完成されると、ステップ〔43〕でパノラマ作成要求(Flag pa)が無し(Flag pa=False)にされると共に、ステップ〔44〕で完成されたパノラマ画像が保存されて、動作が終了される。
【0051】
このようにして、例えば回転雲台50によって撮像装置10の撮像範囲が順次移動されながら取得された画像が圧縮処理されながら連結されて、パノラマ画像が形成される。なお、ここで回転雲台50は、指令される目標位置に対して常に同じ方向から進入するように動作される。これによって、例えば画像の連結の際に発生し得る駆動系の機構の遊び(ギアのバックラッシュ等)による連結画像のずれを補正することができるものである。
【0052】
従ってこの装置において、撮像手段の撮像範囲を変化させ、このような撮像手段からの映像信号を合成して広い画角を有する映像信号を形成することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で得ることができる。
【0053】
これによって、従来は従来の装置では、高価な広角系のレンズを用いても解像度が低下してしまう恐れがあり、また保存画像に嵌め込み合成してパノラマ画像を形成する方法では、例えば天候や時間の変化に対して違和感を生じる等の問題があったものを、本発明によればこれらの問題点を解消することができる。
【0054】
なお、上述の装置においては、例えば撮像装置10の1台を回転雲台50によって撮像範囲を変化させてパノラマ画像の撮像を行うこととしたが、これは回転雲台50を用いる代わりに複数台の撮像装置を、パノラマ画像を形成する各方向に向けて配置し、これらの撮像装置からの映像信号を順次切り換えて駆動手段としても、同様の映像信号の取得を行うことができるものである。
【0055】
あるいは上述の装置において、撮像装置10のレンズブロック部11自体、またはその前に、魚眼レンズ等の周囲の画像を湾曲させて広範囲の画像を撮像する手段を設置することが考えられる。この場合には、映像信号処理手段を構成する例えばコンピュータ装置30の画像処理装置33にて、緯度、経度方向の座標の変換を行い、平面に投射されるように画像処理を施してパノラマ画像を形成することができる。
【0056】
従ってこの装置においては、撮像手段の撮像範囲を湾曲させ、このような撮像手段からの映像信号を正規化して広い画角を有する映像信号を形成することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で得ることができるものである。
【0057】
さらに上述の装置において、上述の図3のステップ〔30〕におけるパノラマ作成要求(Flag pa)の設定は、例えば使用者がモニタ60上に示されるボタンを操作したり、いわゆるリモートコントロールによって行うこともできるが、さらに撮影時刻の指定による設定や、画像認識(処理)、各種のセンサーの検知等によって自動的に設定が行われるようにすることもできる。
【0058】
すなわち、例えば撮影時刻の指定による設定を行う場合には、例えば図1のコンピュータ装置30に付属されるキーボードやいわゆるマウス等のポインティングデバイス等の入力装置35によってパノラマ撮影を行う時刻を設定することにより、その時刻が記憶装置32に保存される。
【0059】
そして例えば図2のイベント判定のステップ〔3〕において、コンピュータ装置30に内蔵された時計(図示せず)と保存された設定時刻とを比較し、両者が一致したときにパノラマ画像の作成要求が指令され、撮影が行われる。なお、時刻は複数を設定したり、また一定の時間間隔を指示することによって、自動的に連続撮影を行うことも可能である。
【0060】
あるいは、撮像装置10から得られる映像情報を現在と過去とで比較して、その差異を検出して自動的にパノラマ画像の作成要求が指令されるようにすることもできる。ここで得られる映像情報とは、画像の輝度、色差、輪郭、カラーバランス等である。
【0061】
そこで例えば輝度情報を利用する方法では、撮像装置10から現在映出されている画像の部分の輝度平均が、撮影されて記憶装置32に保存されているパノラマ画像の一部分の輝度平均と比較される。そしてその差が一定以上に開いたときにパノラマ画像の作成要求が指令され、撮影が行われる。そして作成されたパノラマ画像は直ちに、モニタ60等に映出される。
【0062】
なおこの方法では、風景等の撮影において、時間経過と共に周囲の明るさが変化しているような場合に、自動的にパノラマ画像が撮影更新されるので、常に現在の撮像装置10で撮像されている映像に近いパノラマ画像を提供することが可能となるものである。
【0063】
また、例えば図6に示すように、撮像装置10で撮像されている被写体について代表点を指定し、その輝度と色差情報を組み合わせてモデル化して、その位置情報と共に記憶装置32に保存する。そして同一の範囲を撮像装置10により常に撮像し、被写体モデルの位置座標に差異が生じたときにパノラマ画像の作成要求が指令され、撮影を行うことが可能である。
【0064】
すなわち図6のAにおいて、元の被写体モデルの位置座標(X0、Y0)が、図6のBに示すように位置座標(X1、Y1)になったときに、X0≠X1またはY0≠Y1を判断して、図6のCに示すように被写体が移動したと認識し、パノラマ画像の作成要求を指令して、撮影を開始することができる。この方法によって、上述の装置を動態監視システムとして利用することができる。
【0065】
この他、マイクロフォンのような音声情報を得られる手段を備え、音声の検出に伴ってパノラマ画像の作成要求を指令して撮影を開始することも可能である。この場合には、例えば図7に示すように、撮像装置10が回転雲台50等の駆動手段によって移動されて撮像可能な範囲に、例えば指向性マイクロフォンを複数設置する。これらの指向性マイクロフォンで収音された音声情報が図1のコンピュータ装置30に入力される。
【0066】
そしてこのコンピュータ装置30では、マイクロフォンで収音された音声情報の中に特定の音声情報を検出すると、パノラマ画像の作成要求を指令すると共に、その音声情報を検出したマイクロフォンの指向性がどの方向であるか記憶し、必要ならばその方向から撮影を行ってパノラマ画像を更新することができる。
【0067】
このようにして、特定の音声情報の検出によって被写体の変化を認識し、パノラマ画像の作成要求を指令して、撮影を開始することができる。またこの方法では、同様に光センサや焦電センサ等の各種センサを用いて、それぞれ必要に応じた検出と、パノラマ画像の更新を行うことができるものである。
【0068】
さらに上述の説明では、例えば撮像装置10の視野全域に亙ってパノラマ画像の撮像、更新が行われることとしたが、例えば図8に示すように、モニタ60上に映出されるパノラマ画像上で、キーボードやポインティングデバイス(マウス)等の入力装置35を利用して、撮像及び更新したい領域を指定できるようにすることも可能である。
【0069】
また、撮像された画像や、各種センサからの情報によって、撮像可能範囲内の一部分で変化が検出された場合には、必要に応じてその部分をパノラマ画像上に表示すると共に、その部分を含む領域のみを撮像及び更新できるようにすることも可能である。
【0070】
さらにこのような特定の領域のみを撮像及び更新領域とする方法では、特に、上述した被写体のモデル化による動態検出や、各種の指向性センサの検出による自動撮影といった監視目的の用途として有効である。
【0071】
従って上述の装置においては、設定された時間ごと、あるいは特定の条件の元で、撮像手段での撮像とパノラマ画像の形成が行われることによって、監視に必要な事象の撮像が行われて、常に良好な観視を行うことができるものである。
【0072】
さらに上述の図1の装置において、表示手段としてのコンピュータモニタ60を設けたことによって、この装置は表示装置として実施することができる。
【0073】
従ってこの装置において、撮像手段の撮像範囲を変化させ、このような撮像手段からの映像信号を合成して広い画角を有する映像信号を形成すると共に、この映像信号を表示手段に表示することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で観視することができる。
【0074】
あるいはこの装置において、撮像手段の撮像範囲を湾曲させ、このような撮像手段からの映像信号を正規化して広い画角を有する映像信号を形成すると共に、この映像信号を表示手段に表示することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で得ることができる。
【0075】
そしてこれらの装置において、設定された時間ごと、あるいは特定の条件の元で、撮像手段での撮像とパノラマ画像の形成が行われることによって、監視に必要な事象の撮像が行われて、常に良好な観視を行うことができるものである。
【0076】
さらに上述の図1の装置において、記録手段としての記憶装置32を設けたことによって、この装置は記録装置として実施することができる。なおこの場合に記憶装置32では、撮像装置10からの映像信号が直接順次記録されるか、映像信号処理装置33で形成されたパノラマ画像が記録されるものである。
【0077】
従ってこの装置において、撮像手段の撮像範囲を変化させ、このような撮像手段からの映像信号を直接順次記録、または映像信号処理手段で合成されたパノラマ画像を記録することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で記録することができる。
【0078】
あるいはこの装置において、撮像手段の撮像範囲を湾曲させ、このような撮像手段からの映像信号を直接順次記録、または映像信号処理手段で正規化されたパノラマ画像を記録することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で記録することができる。
【0079】
そしてこれらの装置において、設定された時間ごと、あるいは特定の条件の元で、撮像手段での撮像とパノラマ画像の形成が行われることによって、監視に必要な事象の撮像が行われて、常に良好な記録を行うことができるものである。
【0080】
さらに上述の図1の装置において、再生手段としての記憶装置32を設けたことによって、この装置は再生装置として実施することができる。なおこの場合に記憶装置32では、撮像装置10からの映像信号が直接順次記録されて再生されるか、映像信号処理装置33で形成されたパノラマ画像が記録されて再生されるものである。
【0081】
従ってこの装置において、撮像範囲が順次変化された映像信号を再生し、この再生映像信号を合成して広い画角を有する映像信号を形成することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で再生することができる。
【0082】
あるいはこの装置において、撮像手段の撮像範囲の湾曲された映像信号を再生し、この再生映像信号を正規化して広い画角を有する映像信号を形成することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で再生することができる。
【0083】
さらに上述の図1の装置において、コンピュータ装置30からコンピュータモニタ60に送られる信号をモデム(図示せず)を介して、例えばインターネットのようなコンピュータネットワークに送出することによって、この装置は伝送装置として実施することができる。
【0084】
すなわちこのようなコンピュータネットワークにおいて、遠隔地に設置された撮像装置10〜コンピュータ装置30〜回転雲台50の構成に対して、任意のコンピュータ装置と表示装置とモデムを有する使用者側の装置からネットワークを通じてアクセスを行う。これによって、その時の撮像画像と、例えばコンピュータ装置30の記憶装置32に保存されているパノラマ画像を、例えば図1のモニタ60と同様の画面構成で使用者側の表示装置に得ることができる。
【0085】
従ってこの装置において、遠隔地に設置された撮像手段で撮像された映像信号を合成して広い画角を有する映像信号を形成することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で観視することができる。
【0086】
あるいはこの装置において、遠隔地に設置された撮像手段で撮像された撮像範囲の湾曲された映像信号を正規化して広い画角を有する映像信号を形成することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で観視することができる。
【0087】
そしてこれらの装置において、設定された時間ごと、あるいは特定の条件の元で、撮像手段での撮像とパノラマ画像の形成が行われることによって、監視に必要な事象の撮像が行われて、常に良好な観視を行うことができるものである。
【0088】
さらに上述の図1の装置において、記憶装置32の記録媒体を着脱自在のものとし、この記録媒体を取り出すことによって、この装置は記録媒体として実施することができる。
【0089】
従ってこの装置において、撮像手段の撮像範囲を変化させ、このような撮像手段からの映像信号を直接順次記録、または映像信号処理手段で合成されたパノラマ画像を記録することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で記録した記録媒体を得ることができる。
【0090】
あるいはこの装置において、撮像手段の撮像範囲を湾曲させ、このような撮像手段からの映像信号を直接順次記録、または映像信号処理手段で正規化されたパノラマ画像を記録することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で記録した記録媒体を得ることができる。
【0091】
そしてこれらの装置において、設定された時間ごと、あるいは特定の条件の元で、撮像手段での撮像とパノラマ画像の形成が行われることによって、監視に必要な事象の撮像が行われて、常に良好な記録媒体を得ることができるものである。
【0092】
【発明の効果】
請求項1の発明によれば、パン・チルト2軸方向またはそのいずれかのみの回転方向に自由度を持つ駆動手段により撮像手段の撮像範囲を変化させ、このような撮像手段からの映像信号を合成して広い画角を有する映像信号を形成することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で得ることができるようになった。
【0093】
これによって、従来は従来の装置では、高価な広角系のレンズを用いても解像度が低下してしまう恐れがあり、また保存画像に嵌め込み合成してパノラマ画像を形成する方法では、例えば天候や時間の変化に対して違和感を生じる等の問題があったものを、本発明によればこれらの問題点を解消することができるものである。
【0094】
請求項2の発明によれば、撮像手段の撮像範囲を湾曲させ、このような撮像手段からの映像信号を正規化して広い画角を有する映像信号を形成することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で得ることができるものである。
【0095】
請求項2〜6の発明によれば、設定された時間ごと、あるいは特定の条件の元で、撮像手段での撮像とパノラマ画像の形成が行われることによって、監視に必要な事象の撮像が行われて、常に良好な観視を行うことができるものである。
【0096】
請求項の発明によれば、パン・チルト2軸方向またはそのいずれかのみの回転方向に自由度を持つ駆動手段により撮像手段の撮像範囲を変化させ、このような撮像手段からの映像信号を合成して広い画角を有する映像信号を形成すると共に、この映像信号を表示手段に表示することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で観視することができる。
【0098】
請求項〜1の発明によれば、設定された時間ごと、あるいは特定の条件の元で、撮像手段での撮像とパノラマ画像の形成が行われることによって、監視に必要な事象の撮像が行われて、常に良好な観視を行うことができるものである。
【0099】
請求項1の発明によれば、パン・チルト2軸方向またはそのいずれかのみの回転方向に自由度を持つ駆動手段により撮像手段の撮像範囲を変化させ、このような撮像手段からの映像信号を直接順次記録、または映像信号処理手段で合成されたパノラマ画像を記録することによって、簡単な構成で、天候や時間等の変化に対して違和感を生じることのないパノラマ画像を、高解像度で記録することができるものである。
【0101】
請求項1〜1の発明によれば、設定された時間ごと、あるいは特定の条件の元で、撮像手段での撮像とパノラマ画像の形成が行われることによって、監視に必要な事象の撮像が行われて、常に良好な記録を行うことができるものである。
【図面の簡単な説明】
【図1】本発明の適用される撮像、表示装置の一例のシステム全体の構成図である。
【図2】その動作の説明のためのフローチャート図である。
【図3】その動作の説明のためのフローチャート図である。
【図4】その動作の説明のためのフローチャート図である。
【図5】その動作の説明のためのフローチャート図である。
【図6】その説明のための図である。
【図7】その説明のための図である。
【図8】その説明のための図である。
【符号の説明】
10 撮像装置、11 レンズブロック部、12 CCD、13 信号分離/自動利得制御装置、14 A/D変換装置、15 信号処理装置、16 ズーム用ステッピングモータ、20 テレビジョンモニタ、30 コンピュータ、31ビデオキャプチャーボード、32 記憶装置、33 画像処理装置、34 制御装置、35 入力装置、41 カメラコントローラ、42 モードコントローラ、43 パンチルタコントローラ、50 回転雲台、51 パン用ステッピングモータ、52 チルト用ステッピングモータ、60 コンピュータモニタ、61 撮像映像の表示領域、62 パノラマ画像の表示領域

Claims (16)

  1. 映像信号を発生する撮像手段と、
    上記撮像手段からの映像信号を記憶する記憶手段と、
    上記撮像手段の撮像範囲を変化させるための、パン・チルト2軸方向またはそのいずれかのみの回転方向に自由度を持つ駆動手段と、
    上記駆動手段によって、上記撮像手段の方向を変化して得られる複数の映像を連結してパノラマ映像信号を形成する映像信号処理手段と、
    上記撮像手段での撮像と上記駆動手段での駆動と上記映像信号処理手段での処理とを制御する制御手段とを有する撮像装置において、
    上記撮像手段からの映像信号と上記記憶手段に記憶された映像信号との差異を検出する比較手段を設け、
    上記比較手段は、上記撮像装置から得られる映像情報を現在と過去と比較して、その差異検出しその差が一定以上に開いたときに、新たなパノラマ画像の作成要求を行うことを特徴とする撮像装置。
  2. 時間設定手段を設け、
    上記時間設定手段に設定された時間によって上記制御手段による制御が行われることを特徴とする請求項1に記載の撮像装置。
  3. 上記撮像手段の設けられた場所の音声を検出または認識する手段を設け、
    上記音声が検出または認識されたときに上記制御手段による制御が行われることを特徴とする請求項1に記載の撮像装置。
  4. 上記撮像手段の設けられた場所の物理的状態の変化を検出または認識する手段を設け、
    上記物理的状態の変化が検出または認識されたときに上記制御手段による制御が行われることを特徴とする請求項1に記載の撮像装置。
  5. 上記映像信号処理手段で形成された映像信号中の任意の範囲を指定する手段を設け、
    設定された時間ごと、または上記撮像された映像信号に差異が検出されたとき、または上記撮像手段の設けられた場所の音声が検出または認識されたとき、または上記撮像手段の設けられた場所の物理的状態の変化が検出または認識されたときに、上記任意の範囲に対する上記制御手段による制御が行われることを特徴とする請求項1に記載の撮像装置。
  6. 上記撮像された映像信号に差異が検出されたとき、または上記撮像手段の設けられた場所の物理的状態の変化が検出または認識されたときに、上記差異または変化の検出または認識された範囲に対する上記制御手段による制御が行われると共に、
    上記差異または変化の検出または認識された範囲を上記映像信号処理手段で形成される映像信号中に表示する手段を設けたことを特徴とする請求項1に記載の撮像装置。
  7. 映像信号を発生する撮像手段と、
    上記撮像手段からの映像信号を記憶する記憶手段と、
    上記撮像手段の撮像範囲を変化させるための、パン・チルト2軸方向またはそのいずれかのみの回転方向に自由度を持つ駆動手段と、
    上記駆動手段によって、上記撮像手段の方向を変化して得られる複数の映像を連結してパノラマ映像信号を形成する映像信号処理手段と、
    上記撮像手段での撮像と上記駆動手段での駆動と上記映像信号処理手段での処理とを制御する制御手段と、
    上記映像信号処理手段で形成された映像信号を表示する表示手段とからなる表示装置において、
    上記撮像手段からの映像信号と上記記憶手段に記憶された映像信号との差異を検出する比較手段を設け、
    上記比較手段は、上記撮像装置から得られる映像情報を現在と過去と比較して、その差異検出しその差が一定以上に開いたときに、新たなパノラマ画像の作成要求を行うことを特徴とする表示装置。
  8. 時間設定手段を設け、
    上記時間設定手段に設定された時間によって上記制御手段による制御が行われることを特徴とする請求項に記載の表示装置。
  9. 上記撮像手段の設けられた場所の音声を検出または認識する手段を設け、
    上記音声が検出または認識されたときに上記制御手段による制御が行われることを特徴とする請求項に記載の表示装置。
  10. 上記撮像手段の設けられた場所の物理的状態の変化を検出または認識する手段を設け、
    上記物理的状態の変化が検出または認識されたときに上記制御手段による制御が行われることを特徴とする請求項に記載の表示装置。
  11. 上記映像信号処理手段で形成された映像信号中の任意の範囲を指定する手段を設け、
    設定された時間ごと、または上記撮像された映像信号に差異が検出されたとき、または上記撮像手段の設けられた場所の音声が検出または認識されたとき、または上記撮像手段の設けられた場所の物理的状態の変化が検出または認識されたときに、上記任意の範囲に対する上記制御手段による制御が行われることを特徴とする請求項に記載の表示装置。
  12. 上記撮像された映像信号に差異が検出されたとき、または上記撮像手段の設けられた場所の物理的状態の変化が検出または認識されたときに、上記差異または変化の検出または認識された範囲に対する上記制御手段による制御が行われると共に、
    上記差異または変化の検出または認識された範囲を上記映像信号処理手段で形成される映像信号中に表示する手段を設けたことを特徴とする請求項に記載の表示装置。
  13. 映像信号を発生する撮像手段と、
    上記撮像手段の撮像範囲を変化させる駆動手段と、
    上記撮像手段からの映像信号を直接順次記録、若しくは上記撮像範囲の変化された映像信号から上記撮像手段の一つの撮像範囲より広い画角を有する映像信号を形成する映像信号処理手段を通じて記録する記録手段と、
    上記撮像手段での撮像と上記駆動手段での駆動と上記映像信号処理手段での処理と上記記録手段での記録とを制御する制御手段とからなる記録装置において、
    上記撮像手段からの映像信号を記憶する記憶手段と、
    上記撮像手段からの映像信号と上記記憶手段に記憶された映像信号との差異を検出する比較手段とを設け、
    上記比較手段は、上記撮像装置から得られる映像情報を現在と過去と比較して、その差異検出しその差が一定以上に開いたときに、新たなパノラマ画像の作成要求を行うことを特徴とする記録装置。
  14. 時間設定手段を設け、
    上記時間設定手段に設定された時間によって上記制御手段による制御が行われることを特徴とする請求項1に記載の記録装置。
  15. 上記撮像手段の設けられた場所の音声を検出または認識する手段を設け、
    上記音声が検出または認識されたときに上記制御手段による制御が行われることを特徴とする請求項1に記載の記録装置。
  16. 上記撮像手段の設けられた場所の物理的状態の変化を検出または認識する手段を設け、
    上記物理的状態の変化が検出または認識されたときに上記制御手段による制御が行われることを特徴とする請求項1に記載の記録装置。
JP09913497A 1997-04-16 1997-04-16 撮像装置、表示装置及び記録装置 Expired - Fee Related JP3994469B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP09913497A JP3994469B2 (ja) 1997-04-16 1997-04-16 撮像装置、表示装置及び記録装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP09913497A JP3994469B2 (ja) 1997-04-16 1997-04-16 撮像装置、表示装置及び記録装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2005254056A Division JP4148251B2 (ja) 2005-09-01 2005-09-01 撮像装置及び表示装置

Publications (2)

Publication Number Publication Date
JPH10290387A JPH10290387A (ja) 1998-10-27
JP3994469B2 true JP3994469B2 (ja) 2007-10-17

Family

ID=14239270

Family Applications (1)

Application Number Title Priority Date Filing Date
JP09913497A Expired - Fee Related JP3994469B2 (ja) 1997-04-16 1997-04-16 撮像装置、表示装置及び記録装置

Country Status (1)

Country Link
JP (1) JP3994469B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220082692A1 (en) * 2020-09-11 2022-03-17 Fluke Corporation System and method for generating panoramic acoustic images and virtualizing acoustic imaging devices by segmentation

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002102520A (ja) * 2000-09-28 2002-04-09 Glory Ltd 遊技場の情報提供システム、情報提供方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
JP2003198905A (ja) * 2001-12-25 2003-07-11 Mazda Motor Corp 撮像方法、撮像システム、撮像制御サーバ、並びに撮像プログラム
JP2003198904A (ja) * 2001-12-25 2003-07-11 Mazda Motor Corp 撮像方法、撮像システム、撮像装置、撮像制御サーバ、並びに撮像プログラム
US7218352B2 (en) 2002-05-02 2007-05-15 Sony Corporation Monitoring system for a photography unit, monitoring method, computer program, and storage medium
DE60320169T2 (de) 2002-05-02 2009-04-09 Sony Corp. Überwachungssystem und Verfahren sowie zugehöriges Programm- und Aufzeichnungsmedium
US7697025B2 (en) 2002-08-28 2010-04-13 Sony Corporation Camera surveillance system and method for displaying multiple zoom levels of an image on different portions of a display
JP2008236783A (ja) * 2008-04-28 2008-10-02 Sony Corp 制御装置、制御方法及び監視システム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220082692A1 (en) * 2020-09-11 2022-03-17 Fluke Corporation System and method for generating panoramic acoustic images and virtualizing acoustic imaging devices by segmentation

Also Published As

Publication number Publication date
JPH10290387A (ja) 1998-10-27

Similar Documents

Publication Publication Date Title
EP1536633A1 (en) Photographing apparatus and method, supervising system, program and recording medium
KR20070061382A (ko) 카메라 시스템, 카메라 제어 장치, 파노라마 화상 작성방법 및 컴퓨터 프로그램
JP2006333132A (ja) 撮像装置及び撮像方法、プログラム、プログラム記録媒体並びに撮像システム
JP2004266317A (ja) 監視装置
JP4736381B2 (ja) 撮像装置及び方法、監視システム、プログラム並びに記録媒体
JP2006245648A (ja) 情報処理システム、情報処理装置および情報処理方法、プログラム、並びに記録媒体
KR20120108747A (ko) 3차원 영상을 생성하는 감시 카메라 및 그 방법
JP3994469B2 (ja) 撮像装置、表示装置及び記録装置
JP4583717B2 (ja) 撮像装置及び方法、画像情報提供システム、プログラム、並びに制御装置
JPH1118003A (ja) パノラマ撮像装置
JP3948050B2 (ja) 撮像、記憶、処理、表示、再生、伝送装置及び記録媒体
JP4148251B2 (ja) 撮像装置及び表示装置
JP2001036898A (ja) パノラマ映像生成用カメラシステム
JP2005348449A5 (ja)
JP4172352B2 (ja) 撮像装置及び方法、撮像システム、プログラム
JP2002101408A (ja) 監視カメラシステム
JP4293280B2 (ja) 制御装置、制御方法及び監視システム
JP2005348448A (ja) パノラマ撮像装置
JP2008236783A (ja) 制御装置、制御方法及び監視システム
JP3826506B2 (ja) 情報表示方法
JP4333255B2 (ja) 監視装置
JP2006050655A (ja) 撮像装置及び表示装置
JP4127080B2 (ja) 撮像装置及び方法
JP2004241834A (ja) 動画像生成装置及び方法、動画像送信システム、プログラム並びに記録媒体
JP2005277582A (ja) パノラマ撮像装置、パノラマ撮像方法、監視システム、パノラマ撮像装置の制御プログラム並びにプログラム記録媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040412

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051025

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070220

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070423

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070710

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070723

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100810

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100810

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110810

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120810

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees