JPH08223481A - パノラマ静止画像作成装置 - Google Patents

Abstract

(57)【要約】 【目的】 パノラマ撮影時のパンニング状態をビューフ
ァインダ等に表示することにより、適正なパンニング操
作を行なえるようにする。 【構成】 パノラマ静止画像作成装置をパンニングして
パノラマ静止画像を作成するときに、筐体の動きを検出
し、パンニング状態をビューファインダ等に表示する。
パンニングインジケータがＣ０のように画面中央にある
場合は、パンニング速度が適正であることを示す。ま
た、Ｃ１のようにパンニング方向にある場合には速度が
早すぎることを示し、Ｃ２のようにパンニング方向と反
対方向にある場合には速度が遅すぎることを示す。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ＣＣＤ等の撮像素子に
より被写体を撮像して得た画像をつなぎ合わせて一枚の
広角な静止画像であるパノラマ静止画像を作成する装置
に関するものである。

【０００２】

【従来の技術】従来、この種のパノラマ静止画像作成装
置としては、例えば本願出願人が先に出願した特願平４
−２９７７７３号（特開平６−２８４３２１号）に開示
されたものがあった。このパノラマ静止画像作成装置
は、例えば図７に示されているように、カメラ一体型ビ
デオテープレコーダ（以下「カムコーダ」という）をパ
ンニングさせながら撮影した画像Ａ１〜Ａ８の動きベク
トルを利用して画像を水平方向につなぎ合わせることに
より、図８に示されているような１枚の広角な静止画像
を作成する。

【０００３】

【発明が解決しようとする課題】しかしながら、前記従
来のパノラマ静止画像作成装置では、パンニングの速度
にムラがあると、つなぎ合わせる画像の幅にもムラがで
きてしまい、画像がうまくつながらない。

【０００４】また、パンニング時にカムコーダが上下に
ぶれることにより、撮影された画像の垂直方向に動きが
生じた場合には、図８に示されているように、そのまま
その動きが最終的に表示される画像のつなぎ部分に凹凸
として現れてしまい、パノラマ静止画像としてはいま一
つ美しくないと思える部分があった。そこで、この凹凸
を塗りつぶすことが考えられているが、それを行なうと
図９に示されているようにパノラマ静止画像の上下の幅
が狭くなってしまう。

【０００５】本発明はこのような問題点に鑑みてなされ
たものであって、パノラマ撮影時のパンニング状態をビ
ューファインダ等に表示することにより、適正なパンニ
ング操作を行なえるようにしたパノラマ静止画像作成装
置を提供することを目的とする。

【０００６】

【課題を解決するための手段】前記課題を解決するため
に本発明は、被写体を撮像して作成した複数枚の画像を
つなぎ合わせてパノラマ静止画像を作成する装置であっ
て、筐体の水平方向及び垂直方向の動きを検出する第１
の手段と、第１の手段の出力を基にパンニング速度と適
正値との関係を判別する第２の手段と、第２の手段の出
力を基にパンニング速度と適正値との関係を表示する第
３の手段とを備えることを特徴とするものである。

【０００７】また、本発明は、前記第２の手段がさらに
手ぶれを判別する機能を有し、第３の手段がさらに手ぶ
れを表示する機能を有することを特徴とするものであ
る。

【０００８】

【作用】本発明によれば、パノラマ静止画像作成装置に
おいて、第１の手段により筐体の水平方向及び垂直方向
の動きが検出され、この検出出力を基に第２の手段によ
りパンニング速度と適正値との関係が判別され、この判
別出力を基に第３の手段においてパンニング速度と適正
値との関係が表示される。

【０００９】また、本発明によれば、第１の手段の手段
の検出出力を基に第２の手段により手ぶれが判別され、
この判別出力を基に第３の手段において手ぶれが表示さ
れる。

【００１０】

【実施例】

〔１〕本発明を適用したカムコーダ 図１は本発明を適用したカムコーダのシステム構成を示
す図である。レンズ１を通してＣＣＤイメージャ２に蓄
えられた映像信号は、Ｓ／Ｈ，ＡＧＣ回路３を経てＡ／
Ｄコンバータ４でデジタル映像信号にＡ／Ｄ変換され
る。このデジタル映像信号は、カメラ信号処理ブロック
５でガンマ補正、ホワイトバランス等のカメラ信号処理
が施された後にメモリシステムブロック６に入力され
る。

【００１１】一方、水平方向及び垂直方向の角速度セン
サー７から得られたカムコーダ本体の角速度情報は、Ｈ
ＰＦ，アンプ８で直流成分をカットされて増幅された
後、Ａ／Ｄコンバータ９でデジタル角速度情報にＡ／Ｄ
変換される。このデジタル角速度情報はマイコン１０で
積分して角度情報に変換され、更に加工を加えて動きベ
クトルとしてメモリシステムブロック６へ送られる。

【００１２】さらに、操作部１１に設けられたパノラマ
モード制御スイッチからの制御信号がマイコン１０を介
してメモリシステムブロック６に与えられる。そして、
この制御信号と前述した動きベクトル情報を基にメモリ
の書き込み／読み出しが制御され、画像が縮小、合成さ
れてメモリにパノラマ静止画像が合成されていく。この
メモリシステムブロック６におけるパノラマ静止画像合
成動作についての詳細は後述する。

【００１３】そして、パノラマ静止画像合成中はメモリ
システムスルーの映像信号が、また合成終了後はメモリ
から読み出されたパノラマ静止画映像信号が、ビデオ信
号処理ブロック１２へ入力され、コンポジット映像信号
として成形されて、合成回路１３へ送られる。

【００１４】合成回路１３は、パンニング撮影時に基準
インジケータ作成回路１４が作成した基準インジケータ
をビデオ信号と合成する。合成回路１３の出力は、Ｄ／
Ａコンバータ１５によりアナログのビデオ信号に変換さ
れ、合成回路１６へ送られる。合成回路１６は、パンニ
ング撮影時にパンニングインジケータ作成回路１７が作
成したパンニングインジケータをビデオ信号と合成す
る。

【００１５】図２に基準インジケータとパンニングイン
ジケータの一例を示す。ここで、基準インジケータＬ
ｘ，Ｌｙはそれぞれ画面の中央を通る水平方向と垂直方
向の点線である。また、パンニングインジケータＣ０〜
Ｃ２は円形のインジケータであって、その位置がパンニ
ング速度とぶれを示す。すなわち、Ｃ０のように画面中
央にある場合は、パンニング速度が適正であり、かつぶ
れもないことを示す。また、Ｃ１のようにパンニング方
向にある場合には、速度が早すぎることを示す。さら
に、Ｃ２のようにパンニング方向と反対方向にある場合
には、速度が遅すぎることを示す。そして、図示されて
いないが、円の中心が基準インジケータＬｘから上又は
下にずれているときは、カムコーダが上又は下にぶれて
いることを示す。

【００１６】基準インジケータは、前述したようにパン
ニング撮影時に作成するが、これはユーザーが操作部１
１のパノラマモード設定スイッチを操作してパノラマ作
成モードになったことをマイコン１０が検出し、マイコ
ン１０が基準インジケータ作成回路１４へ制御信号を送
ることにより行う。また、パンニングインジケータは、
マイコン１０が、Ａ／Ｄコンバータ９から入力される水
平方向の動きベクトル情報を基にパンニング速度の大き
さと方向を判定すると共に、垂直方向の動きベクトルを
基に手ぶれの大きさと方向を判定し、パンニングインジ
ケータ作成回路１７へ制御信号を送ることにより作成す
る。なお、パンニングインジケータの作成の制御と基準
インジケータの作成の制御を別のマイコンが行なうよう
に構成してもよい。

【００１７】以上のようなインジケータが合成されたビ
デオ信号がビューファインダやカムコーダ筐体に設けら
れた液晶モニタに出力される。したがって、パンニング
撮影中のユーザーは、ビューファインダや液晶モニタを
見て、パンニングインジケータが画面の中央になるよう
にカムコーダを操作すれば、速度が一定で、かつぶれの
ないパンニング撮影を行なうことができる。この結果、
作成されるパノラマ静止画像はつなぎが美しくて、かつ
上下の幅も広いものとなる。

【００１８】パノラマ静止画像合成終了後記録モードに
なった時には、パノラマ静止画映像信号はビデオ信号処
理ブロック１２で輝度信号のエンファシスとＦＭ変調、
及び色信号の低域変換等のビデオ信号処理を施され、Ｄ
／Ａコンバータ１８でＤ／Ａ変換された後、Ｒ／Ｐアン
プ１９を経てビデオヘッド２０に送られて、電磁変換に
よりビデオテープ２１に記録される。

【００１９】再生時は、ビデオテープ２１からビデオヘ
ッド２０により再生された映像信号は、Ｒ／Ｐアンプ１
９を経てＡ／Ｄコンバータ２２でデジタル信号に変換さ
れ、ビデオ再生処理ブロック２３で、色信号の低域変換
の逆変換、及び輝度信号のＦＭ復調とディエンファシス
等のビデオ信号再生処理を施され、メモリシステムブロ
ック６へ送られる。

【００２０】メモリシステムブロック６では、記録時に
パノラマ静止画像合成処理を施されている映像信号はそ
のままビデオ信号処理回路１２へ出力する。ビデオ信号
処理回路１２は入力された映像信号を合成回路１３へ出
力する。合成回路１３へ入力されたビデオ信号はＤ／Ａ
コンバータ１５、合成回路１６を通って出力される。こ
の時はパンニング撮影中ではないので、基準インジケー
タ及びパンニングインジケータの作成と合成は行なわれ
ない。

【００２１】〔２〕メモリシステムの構成／動作〔パノ
ラマ静止画像合成時〕 図３にパノラマ静止画像合成時のメモリシステムの構成
と動作を示す。ここで、スイッチＳＷ１〜ＳＷ３は実線
側に接続されている。また、メモリコントローラ３１か
ら出力れさている点線は制御信号を示す。

【００２２】図１のカメラ信号処理ブロック５から入力
された映像信号は、スイッチＳＷ１，ＳＷ２を通ってＳ
ＲＡＭ／４点補間回路３２へ入力されると共に、モニタ
出力のためにスイッチＳＷ３を通ってスルーで外部へ出
力される。これにより、パノラマ静止画像合成中でも撮
影した画像を見ることができる。また、この画像にイン
ジケータを合成することができる。

【００２３】ＳＲＡＭ／４点補間回路３２では、ＳＲＡ
Ｍを利用してパノラマ縮小率に応じて水平方向の縮小が
行われ、４点補間回路で動きベクトルに対応した水平と
垂直の１ドット以下／１ライン以下の位相ずらしが行わ
れる。パノラマ静止画像合成前に垂直方向の縮小を行わ
ないのは画質をなるべく損なわないようにするためで、
パンニングによるパノラマ静止画像を合成する時は垂直
方向にはメモリ上に余裕があるので、垂直方向の縮小は
合成終了後のパノラマ静止画像をフィールドメモリ３３
から読み出す時に行い、ＳＲＡＭ／４点補間回路３２で
垂直方向の１ライン以下の位相ずらしを行う。

【００２４】合成用のフィールドメモリ３３は１カラム
単位のランダムアクセスができないため、縮小された原
画像を任意の位置に書き込むことができない。そこで、
画像の合成はフィールドメモリ３３から読み出された映
像信号とＳＲＡＭ／４点補間回路３２で水平方向に縮小
・補間された映像信号をバススイッチ３４を切り替えて
フィードバックパスに出力し、毎回フィールドメモリ３
３上に全て上書きする方式を採用した。

【００２５】すなわち、フィールドメモリ３３では、動
きベクトルに応じて合成画像が読み出される。この時、
縮小原画像が固定タイミングなので合成画像側がタイミ
ングをズラして位置合わせを行うために、実際には動き
ベクトルと逆方向にタイミングをズラして読み出すこと
になる。フィールドメモリ３３から読み出された映像信
号はバススイッチ３４のＣに、ＳＲＡＭ／４点補間回路
３２からの縮小原映像信号はＢに入力され、縮小原映像
信号の有効画面サイズに連動してバススイッチ３４が切
り替わり、ＤからＢ，Ｃの合成映像信号が出力される。

【００２６】この合成映像信号はフィードバックパスを
通って再びフィールドメモリ３３の同じ位置に上書きさ
れ、１フィールド分の合成が終了する。この処理を繰り
返すことによりフィールドメモリ３３上にパノラマ静止
画像が形成される。

【００２７】これらパノラマ静止画像合成の制御は、全
てメモリコントローラ３１が行っており、図１のマイコ
ン１０からの情報を１フィールド毎に受け、１ライン単
位で処理し、それぞれのブロックヘリアルタイムで制御
信号を送る。

【００２８】以上説明したパノラマ静止画像の合成動作
を図４に示す。この図において、（１）〜（８）は図１
１の画像Ａ１〜Ａ８に対応する画像の処理を示す。左側
の入力画像Ａは図２のメモリシステムへ入力される画像
を示す。また、中央部の水平縮小画像Ｂは入力画像Ａを
ＳＲＡＭ／四点補間回路３２で水平方向に１／３に縮小
・補間し、バススイッチ３４のＣへ入力される画像を示
す。そして、右側の合成メモリ画像Ｄは、バススイッチ
３４のＤからフィードバックパスを通ってフィールドメ
モリ３３上で合成される画像を示す。この時、例えば
（１）の合成メモリ画像Ｄには（２）の縮小画像Ｃが合
成され、（２）の合成メモリ画像Ｄとなる。そして、こ
の動作を（８）まで繰り返すことにより、図５の（８）
の右端に描かれている合成画像がフィールドメモリ３３
上に形成され、パノラマ静止画像の合成が完了する。

【００２９】〔３〕メモリシステムの構成／動作 〔パ
ノラマ静止画像表示時〕 図５にパノラマ静止画像表示時のメモリシステムの構成
と動作を示す。フィールドメモリ３３に形成されたパノ
ラマ静止画像は垂直方向に縮小されていないので、垂直
方向の縮小率に応じて間引き読み出される。この時、フ
ィールドメモリ３３から読み出されるデータが奇数フィ
ールドのデータか偶数フィールドのデータかに応じてイ
ンターレースするように間引く。

【００３０】フィールドメモリ３３から読み出されたデ
ータは、縮小率が整数分の１でない場合や間引き読み出
しではインターレースが正確にできない場合、ＳＲＡＭ
／４点補間回路３２において垂直補間が実行される。な
お、垂直縮小で補間を行う場合には、常時近接した２ラ
インのデータが必要なためフィールドメモリには読み出
し２ポートのものを使用する。

【００３１】このようにして垂直方向に縮小処理を受け
た映像信号はスイッチＳＷ３からビデオ信号処理回路へ
送られる。図６にフィールドメモリ３３で合成されたパ
ノラマ静止画像及びＳＲＡＭ／４点補間回路３２で垂直
縮小されたパノラマ静止画像の一例を示す。

【００３２】なお、本発明は前記実施例に限定さるもの
ではなく、本発明の趣旨に基づいて種々の変形が可能で
あり、それらを本発明の範囲から排除するものではな
い。例えば、前記実施例では基準インジケータは適正な
位置の中心を示す線であるが、中心から所定幅のエリア
を適正な位置の許容範囲に定め、基準インジケータがそ
の許容範囲を示すように構成してもよい。

【００３３】また、前記実施例では基準インジケータは
デジタル信号で合成し、パンニングインジケータはアナ
ログ信号で合成しているが、共にアナログ信号又はデジ
タル信号で合成してもよい。また、インジケータ作成回
路をメモリシステム中の映像信号をスルーで通す経路に
設けてもよい。

【００３４】さらに、前記実施例では、パンニング速度
及び手ぶれを表示しているが、例えば手ぶれを補正する
機能を有するカムコーダの場合には、パンニング速度の
みを表示するように構成すればよい。

【００３５】また、前記実施例は本発明をカムコーダに
適用したものであるが、記録媒体として磁気ディスク、
光磁気ディスク等の回転記録媒体を用いた映像信号記録
再生装置に適用してもよい。

【００３６】

【発明の効果】以上詳細に説明したように、本発明によ
れば、パンニング撮影時にパンニング状態（速度、手ぶ
れ）をビューファインダ等に表示するので、ユーザーは
この表示を見ながら適正なパンニング操作を行なうこと
ができる。したがって、作成されるパノラマ静止画像は
つなぎが美しく上下の幅が広いものとなる。

【図面の簡単な説明】

【図１】本発明を適用したカムコーダのシステム構成を
示す図である。

【図２】インジケータの一例を示す図である。

【図３】パノラマ静止画像合成時のメモリシステムの構
成と動作を示す図である。

【図４】パノラマ静止画像の合成動作を示す図である。

【図５】パノラマ静止画像表示時のメモリシステムの構
成と動作を示す図である。

【図６】フィールドメモリで合成されたパノラマ静止画
像及びＳＲＡＭ／４点補間回路で垂直縮小されたパノラ
マ静止画像の一例を示す図である。

【図７】従来のパノラマ静止画像作成方法を説明する図
である。

【図８】従来の方法で作成されたパノラマ静止画像の表
示画面の一例を示す図である。

【図９】従来の方法で作成されたパノラマ静止画像の表
示画面の他の一例を示す図である。

【符号の説明】

１３，１６…合成回路、１４…基準インジケータ作成回
路、１７…パンニングインジケータ作成回路、Ｌｘ，Ｌ
ｙ…基準インジケータ、Ｃ０〜Ｃ２…パンニングインジ
ケータ

Claims (2)

【特許請求の範囲】
1. 【請求項１】 被写体を撮像して作成した複数枚の画像
   をつなぎ合わせてパノラマ静止画像を作成する装置であ
   って、 筐体の水平方向及び垂直方向の動きを検出する第１の手
   段と、 該第１の手段の出力を基にパンニング速度と適正値との
   関係を判別する第２の手段と、 該第２の手段の出力を基にパンニング速度と適正値との
   関係を表示する第３の手段とを備えることを特徴とする
   パノラマ静止画像作成装置。
2. 【請求項２】 第２の手段がさらに手ぶれを判別する機
   能を有し、第３の手段がさらに該手ぶれを表示する機能
   を有する請求項１記載のパノラマ静止画像作成装置。