JP3497217B2 - 画像取扱装置及び画像合成方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、高精細画像を形成する
ための業務用カメラ（以下，ＯＡカメラと呼ぶ）等に用
いられる、複数の撮像素子による各部分画像の貼り合わ
せ処理等を行う画像取扱装置及び画像合成方法に関する
ものである。

【０００２】

【従来の技術】従来、少数の画素構成で多数の画素構成
による画像を得るための所定の手法を用いた画像取扱装
置として、次のようなＯＡカメラが本出願人により提案
されている。

【０００３】すなわち、その所定の手法とは、撮像対象
画像に対して、各部分画像毎にミラーによるスキャンを
行い、取り込まれた各部分画像を、複数の撮像素子の内
で各々に対応する撮像素子毎に露光し、このようにして
得られた部分画像を、再び順次貼り合わせていくことに
より、大きなエリアの多画素な撮像対象画像を入力する
ことができるという手法である。その利用例としてのＯ
Ａカメラの構成を説明するためのブロック図を図１９に
示す。

【０００４】以下、同図及び図２０を用いて、この画像
取扱装置としてのＯＡカメラの構成及び動作を説明す
る。

【０００５】図１９において、全反射ミラー１０１は、
入射光１０２を所定の方向へ反射させて、撮像対象画像
に対して反射角度を変える（以下、全反射ミラー１０１
の角度を変えることを、ミラースキャンする、ともい
う）ために移動可能に構成されており、全反射ミラー１
０１の光軸上には、全反射ミラー１０１に近い方から、
絞りやフォーカス用のレンズ等からなるレンズ部１０
３、ハーフミラー１０４の順に、各々が設けられてお
り、第１ＣＣＤ１０５と第２ＣＣＤ１０６は、２枚のイ
メージャーとして配設されている。第１ＣＣＤ１０５
は、入射光１０２の内、ハーフミラー１０４を通過した
通過光１０２ａを受光し、第２ＣＣＤ１０６は、入射光
１０２の内、ハーフミラー１０４で反射した反射光１０
２ｂを受光できるように構成されている。又、図２０に
示すように、全反射ミラー１０１の各位置において、第
１ＣＣＤ１０５には、撮像対象画像２００の一部分であ
るところの、部分画像Ａ、Ｂ、Ｃ、及びＤの略上半分の
領域に対応する上半分画像Ａ１、Ｂ１、Ｃ１、及びＤ１
が露光され、第２ＣＣＤ１０６には、同じ部分画像Ａ、
Ｂ、Ｃ、及びＤの略下半分の領域に対応する下半分画像
Ａ２、Ｂ２、Ｃ２、及びＤ２が同時に露光されるように
するため、２枚のイメージャーの位置関係は、各々の光
軸に対して所定量だけずらせた状態で構成されている。
ここで、図２０は、各部分画像の重なり領域等を説明す
るための説明図である。

【０００６】更に、例えば初期角度の位置にある全反射
ミラー１０１により、取り込まれた入射光１０２は、各
々のイメージャーから出力され、各々対応する第１プロ
セス回路１０７、又は第２プロセス回路１０８を経て映
像信号に変換される。そして、イメージャーとしての２
個のＣＣＤの画素が、共に７５２画素×５８０画素であ
る場合、７５２画素×５８０画素からなる上半分画像Ａ
１（図２０において、実線による斜線を施した領域）
と、同画素サイズの下半分画像Ａ２（図２０において、
点線による斜線を施した領域）を、１００画素×５８０
画素の重なりしろＡ１２（図２０において、実線と点線
による斜線を施した領域の重なり合った領域）で、一律
に貼り合わせるための、縦の貼り合わせ部１０９へ入力
される。すなわち、縦の貼り合わせ部１０９に入力され
た各映像信号は、上半分画像Ａ１と下半分画像Ａ２が、
一律に貼り合わせられて、あたかも１４０４画素×５８
０画素の１枚のイメージャーで取り込まれたかのような
映像信号（図２０に示す撮像対象画像２００の部分画像
Ａに対応）に変換される。

【０００７】このような動作は、所定の位置に全反射ミ
ラー１０１がスキャンされるごとに同様の処理が繰り返
される。

【０００８】次に、部分画像Ａに対応した上半分画像Ａ
１と、下半分画像Ａ２が取り込まれた後、ＣＰＵ１１６
からの指示に基づくミラー駆動部１１０の働きで、全反
射ミラー１０１は、初期位置から所定角度移動した位置
に設定される。全反射ミラー１０１は、このようにミラ
ースキャンされた位置で、再び上記と同様の処理によ
り、今度は撮像対象画像２００の部分画像Ｂの略上半分
の領域に対応する上半分画像Ｂ１と、略下半分の領域に
対応する下半分画像Ｂ２が一律に貼り合わせられて、あ
たかも１枚のイメージャーで取り込まれたかのような映
像信号（図２０に示す、撮像対象画像２００の部分画像
Ｂに対応）に変換される。

【０００９】更に、部分画像Ｃ、及びＤを取り込むため
に、順次全反射ミラー１０１を所定角度づつ動かす（ミ
ラースキャンする）毎に取り込むエリアが変わり、各々
上記と同様の処理を繰り返して、全体として大きな絵が
得られる。

【００１０】但し、ここで重要なことは、上記取り込ま
れ、一律に貼り合わされた各部分画像（部分画像Ａ、
Ｂ、Ｃ、及びＤ）を、更に貼り合わせるために、図２０
に示すように、例えば初期位置で全反射ミラー１０１
が、１回目に取り込み、縦の貼り合わせが行われた部分
画像Ａと、２回目に取り込み、同様にして形成された部
分画像Ｂ等、要するに重なり合う部分画像は、各々の画
像において、予め定められた所定の重なり部分、すなわ
ち図２０に示すように１４０４画素×７２画素からなる
重なり領域を持つように構成されている点である。

【００１１】すなわち、このような重ね合わせを行うた
めに、図１９に示すように、先に取り込まれた部分画像
の重なり領域（図２０に示すように、例えば、部分画像
Ａに属する重なり領域Ａｂ）を一時的に保持するための
境界バッファ１１１、その境界バッファ１１１の内容
と、次に取り込まれた部分画像の、先に取り込まれた部
分画像との重なり領域（例えば、部分画像Ａに属する重
なり領域Ａｂ）に対応する重なり領域（例えば、部分画
像Ｂに属する重なり領域Ｂａ）の内容を比較して、画像
の特徴部すなわち、同じ絵の部分を見つけて、それらの
絵同士のずれを検出するための動きベクトル検出部１１
２、その検出結果を利用してずれ量を算出するためのず
れ量算出部１１３、その算出されたずれ量から、先に取
り込まれた部分画像（例えば、部分画像Ａ）に合わせ
て、次に取り込まれた部分画像（例えば、部分画像Ｂ）
の位置を補正し、重なり合う画像を正しく重ね合わせる
ための座標変換部１１０等により、互いに接合された画
像データが出力部１１４から出力されるものである。
尚、ここでいう座標変換とは、平行移動や、回転移動で
あり、対象としている画像同士の大きさが異なる場合に
は拡大縮小といった変換処理も含む。このようにして、
ミラースキャンする毎に、順次重なり合う部分画像をつ
なぎ合わせていく。

【００１２】ここで、取り込まれた重なり合う部分画像
の相互の位置関係に、ずれが生じる要因としては、次の
ようなことが考えられる。

【００１３】例えば、ミラースキャンにより、取り込ま
れた重なり合う部分画像は、互いに予め定められた所定
の重なり部分、すなわち図２０に示すように１４０４画
素×７２画素からなる重なり領域を持つように構成され
ていることは、既に説明した通りであるが、全反射ミラ
ー１０１のスキャン量（所定の角度移動量）の誤差ある
いは、ばらつきであるとか、部分画像を所定のタイミン
グで、順次取り込む間に、撮像対象（被写体）が変化し
たり、又、逆に、操作者による手ぶれ等の取り込み装置
側の位置ずれ等である。

【００１４】一方、レンズ部１０３には、上述した通
り、絞りや、フォーカスレンズ等があり、これらを撮像
の際に制御するために、イメージャーとしての第１ＣＣ
Ｄ１０５及び第２ＣＣＤ１０６の出力信号が、累積加算
部１１５へ送られる。

【００１５】累積加算部１１５にて、いわゆる累積加算
処理が施されたデータは、ＣＰＵ１１６へ送られ、これ
らに基づくＣＰＵ１１６からの制御信号により、ＡＥ
（自動露出合わせ）の駆動及びＡＦ（自動焦点合わせ）
の駆動が行われる。

【００１６】ここで、例えばＡＦにおける累積加算処理
とは、イメージャーとしてのＣＣＤを構成する画素の集
まりを、所定の領域に分割して、一つのエリアとし、そ
の各エリア毎に、各画素により得られた画像データの高
周波成分に着目して、それらの波形を累積加算すること
でコントラストデータ（累積加算されたデータが大きけ
れば大きいほどコントラストがあるという判断がされ
る）を得ようとするものである。

【００１７】このようにして、得られた各コントラスト
データは、所定のメモリ（図示省略）に格納し、必要に
応じてこのメモリから各々のコントラストデータを読み
出して、そのデータに基づいてＡＦを制御するための制
御信号をレンズ部１０３のフォーカスレンズの方に送る
システムになっている。

【００１８】

【発明が解決しようとする課題】しかしながら、このよ
うな構成では、部分画像の重なり領域の中に、貼り合わ
せ処理に利用するための画像の特徴部が存在しない場
合、貼り合わせすべき部分画像が相互にどれだけ位置ず
れを生じているかがわからないという問題があり、これ
に対する対処方法がないといった課題があった。又、上
記画像の特徴部の有無を判定するための基準もその手段
も無かったために、存在するかしないかもわからない特
徴部を長時間探し続けることにより、撮影時間が長くか
かるといった欠点もあった。

【００１９】本発明は、従来の画像取扱装置のこのよう
な課題を考慮し、部分画像の重なり領域の中に貼り合わ
せ処理に利用するための画像の特徴部が存在するか否か
を判定でき、効率の良い画像合成処理が可能な画像取扱
装置及び画像合成方法を提供することを目的とする。

【００２０】

【課題を解決するための手段】前述の課題を解決するた
め、本発明による画像取扱装置は、一の画像と該一の画
像と部分的に重複する領域を有する他の画像について、
該重複する領域の特徴部で両者を位置合わせして貼り合
わせ処理を行う画像合成機能を有する画像取扱装置にお
いて、前記一の画像側の前記重複する領域を表す画像信
号及び／又は前記他の画像側の前記重複する領域を表す
画像信号のそれぞれに対応する１または複数のコントラ
ストデータを求めるコントラストデータ抽出部と、前記
一の画像側の前記重複する領域及び／又は前記他の画像
側の前記重複する領域に、前記一の画像と前記他の画像
とを貼り合わせるために必要な特徴部が存在するか否か
を、前記求められた各コントラストデータを所定のコン
トラスト値と比較することにより判定するための判定手
段と、前記判定手段による前記判定結果に基づき、前記
貼り合わせ処理を制御する画像合成制御手段と、を備
え、前記判定手段は、前記求められた各コントラストデ
ータが所定のコントラスト値よりも全て小さい場合には
前記特徴部が存在しないと判定し、そうでない場合には
前記特徴部が存在すると判定することを特徴とする。ま
た、本発明による画像取扱装置は、前記画像合成制御手
段が、前記判定手段により前記特徴部が存在すると判定
された場合は、前記貼り合わせ処理を行い、前記特徴部
が存在しないと判定された場合は、貼り合わせが不可能
である旨の警告を行うことを特徴とする。さらに、本発
明による画像取扱装置は、前記コントラストデータ抽出
部が、前記各画像信号から、所定の高周波成分だけを取
り出すためのＢＰＦと、前記ＢＰＦの出力信号のマイナ
ス波形をプラス波形に変換して絶対値をとるための絶対
値演算器と、前記絶対値演算器の各出力信号を所定数の
累積加算エリアに分割し、各累積加算エリア毎に累積加
算してそれぞれコントラストデータを得るための累積加
算器と、からなることを特徴とする。 本発明による画像
取扱装置の画像合成方法は、一の画像と、該一の画像と
部分的に重複する領域を有する他の画像について、該重
複する領域の特徴部で両者を位置合わせして貼り合わせ
処理を行う画像合成機能を有する画像取扱装置の画像合
成方法において、前記一の画像側の前記重複する領域を
表す画像信号及び／又 は前記他の画像側の前記重複する
領域を表す画像信号のそれぞれに対応する１または複数
のコントラストデータを求めるコントラストデータ抽出
ステップと、前記一の画像側の前記重複する領域及び／
又は前記他の画像側の前記重複する領域に、前記一の画
像と前記他の画像とを貼り合わせるために必要な特徴部
が存在するか否かを、前記求められた各コントラストデ
ータを所定のコントラスト値と比較することにより判定
するための判定ステップと、前記判定ステップによる前
記判定結果に基づき、前記貼り合せ処理を制御する画像
合成制御ステップと、を備え、前記判定ステップは、前
記求められた各コントラストデータが所定のコントラス
ト値よりも全て小さい場合には前記特徴部が存在しない
と判定し、そうでない場合には前記特徴部が存在すると
判定することを特徴とする。また、本発明による画像取
扱装置の画像合成方法は、前記画像合成制御ステップ
は、前記判定ステップにより前記特徴部が存在すると判
定された場合は、前記貼り合わせ処理を行い、前記特徴
部が存在しないと判定された場合は、貼り合わせが不可
能である旨の警告を行うことを特徴とする。さらに、本
発明による画像取扱装置の画像合成方法は、前記コント
ラスト抽出ステップが、前記各画像信号から、所定の高
周波成分だけを取り出すためのＢＰＦ処理ステップと、
前記ＢＰＦ処理ステップによる出力信号のマイナス波形
をプラス波形に変換して絶対値をとるための絶対値演算
ステップと、前記絶対値演算ステップによる各出力信号
を所定数の累積加算エリアに分割し、各累積加算エリア
毎に累積加算してそれぞれコントラストデータを得るた
めの累積加算ステップとからなることを特徴とする。

【００２１】

【作用】本発明では、コントラストデータ抽出手段が、
前記一の画像側の前記重複する領域を表す画像信号及び
／又は前記他の画像側の前記重複する領域を表す画像信
号のそれぞれに対応する１または複数のコントラストデ
ータを求め、判定手段が、前記求められた各コントラス
トデータを所定のコントラスト値と比較して、前記求め
られた各コントラストデータが所定のコントラスト値よ
りも全て小さい場合には前記特徴部が存在しないと判定
し、そうでない場合は、前記特徴部が存在すると判定
し、画像合成制御手段が、前記判定手段により前記特徴
部が存在すると判定された場合は、前記貼り合わせ処理
を行い、前記特徴部が存在しないと判定された場合は、
貼り合わせが不可能である旨の警告を行う。

【００２２】

【実施例】以下、本発明にかかる実施例について図面を
参照しながら説明する。

【００２３】図１は、本発明にかかる画像取扱装置の一
実施例としてのＯＡカメラの構成を示すためのブロック
図、又図２は、本実施例の累積加算部１１５の構成等を
示すためのブロック図であり、同図を用いて本実施例の
構成を説明する。

【００２４】尚、図１９と同じものには、同じ符号を付
し、その説明を省略する。又、図１９の構成との主な相
違点は、累積加算部１１５で得られたコントラストデー
タをＡＦの制御用として利用する従来の方法に加えて、
接合すべき部分画像同士の重なり領域の中に特徴部が存
在するか否かを判定し、その結果をＣＰＵ２の接合情報
出力端子部１から出力できるようにしてある点である。

【００２５】ここで、本発明の判定手段は、ＣＰＵ２に
含まれ、本発明の予め定められた所定の特徴評価基準と
は、上記コントラストデータに関して定められた基準で
あり、本発明の接合画像形成手段は、座標変換部１１０
境界バッファ１１１、動きベルトル検出部１１２及びず
れ量算出部１１３を含む。

【００２６】又、図２において、バンドパスフィルター
（ＢＰＦ）１１５ａは、入力された画像データから、所
定の高周波成分だけを取り出すためのものであり、絶対
値演算器１１５ｂは、入力信号のマイナス波形をプラス
波形に変換して絶対値をとるための回路であり、累積演
算器１１５ｃは、絶対値演算器１１５ｂで求めた各入力
波形を、所定の累積加算エリア３１（図３（ａ）に示
す、第１ＣＣＤ１０５と、第２ＣＣＤ１０６を各々、６
４個のエリアに分割し、この分割された９４画素×７２
画素の一つのエリアを、以下、累積加算エリア３１と呼
ぶ）内で、算出するためのものであり、コントラストデ
ータメモリ１１５ｄは、その累積加算されて得られたコ
ントラストデータが一つのＣＣＤに対して６４個作成さ
れるため、２個のＣＣＤとして、全部で１２８個のコン
トラストデータを格納するための記憶手段である。ここ
で、図３（ａ）は、部分画像の構成を説明するための説
明図であり、同図（ｂ）は、累積加算エリアを説明する
ための説明図である。

【００２７】以上のような構成において、主に図２を用
いて、本実施例の動作を説明する。

【００２８】同図において、入力画像データ２１は、Ｂ
ＰＦ１１５ａにおいて高周波成分波形２２のみが取り出
され、これが絶対値演算器１１５ｂを通過することによ
り絶対値変換された波形２３となり、累積演算器１１５
ｃを経て、絶対値変換された波形の斜線部分２４が、各
々の累積加算エリア３１内で累積加算されて、一つの部
分画像として全部で１２８個のコントラストデータがコ
ントラストデータメモリ１１５ｄに格納される。

【００２９】そして、ＣＰＵ２は、必要に応じてこのコ
ントラストデータメモリ１１５ｄから各々のコントラス
トデータを読み出して、そのデータに基づいてＡＦを制
御するための制御信号をＡＥ・ＡＦ駆動部１１７へ送
り、レンズ部１０３のフォーカスレンズを制御する。

【００３０】更に、ＣＰＵ２は、接合すべき部分画像同
士の重なり領域の中に特徴部が存在するか否かを判定
し、その結果を接合情報出力端子部１から出力する。

【００３１】すなわち、ＣＰＵ２は、接合すべき部分画
像として、例えば、部分画像Ａと部分画像Ｂの重なり領
域における、部分画像Ａに属する重なり領域Ａｂ（図３
（ｂ）に示す部分画像Ａの右端の１番から１６番の符号
を付してある、１６個の累積加算エリアの部分に相当す
る）の１６個のコントラストデータに着目して、予め定
められた所定の特徴評価基準としての所定のコントラス
ト値（閾値）と比較し、これら１６個の値が、上記所定
のコントラスト値よりも全て小さい場合、重なり領域Ａ
ｂには、コントラストがない、すなわち特徴部が存在し
ないと判定する。

【００３２】このように、ＣＰＵ２は、例えば重なり領
域Ａｂ（他の重なり領域であっても同様である）におけ
る、いずれの累積加算エリアにも、所定の閾値を越える
コントラストデータが存在しないために貼り合わせが不
可能であると判断した場合に、接合情報出力端子部１か
らその旨の情報を出力する。

【００３３】接合情報出力端子部１からの出力信号によ
り、操作者に対して、貼り合わせが不可能である旨の情
報がアラームとして出力される。又、接合情報出力端子
部１からの出力信号は、本実施例のＯＡカメラのシャッ
ターが作動しないように自動的にガードするといったシ
ャッター動作の制御信号としても使われる。ここで、ア
ラームというのは、例えばファインダーの中にＬＥＤを
発光させたり、注意を喚起するための音を出す等、様々
な方法がある。

【００３４】一方、例えば重なり領域Ａｂにおける累積
加算エリアに、閾値を越えるコントラストデータが存在
し、貼り合わせが可能であるとＣＰＵ２により判断され
た場合には、座標変換部１１０や、ずれ量算出部１１３
等が図１９と同じ方法で、部分画像の貼り合わせ接合処
理を行うものである。

【００３５】以上のことから、本実施例によれば、重な
り領域において、特徴部が存在しない場合は、特別な回
路等を追加することなく、その旨を判定して、貼り合わ
せが不可能であることを操作者に伝えるためのアラーム
等の情報が出力される。

【００３６】尚、本発明における判定手段は、上記実施
例ではＡＦの制御データとしてのコントラストデータに
着目し、特別な専用回路を用いないで、図２の累積加算
部１１５やＣＰＵ２を利用する、場合について説明した
が、これに限らず上記判定用の専用の回路を構成して実
現してもよいし、所定の特徴評価基準としては、コント
ラストデータに関するものに限らず実現してもよいし、
要するに部分画像の重なり領域の中に貼り合わせ接合に
利用するための画像の特徴部が存在するか否かを判定で
きさえすれば、実現回路の内容や、所定の特徴評価基準
の内容は問わない。

【００３７】又、上記実施例では、特徴部の存在を判定
する際に、重なり合う２つの部分画像の内の先に取り込
まれた部分画像に属する重なり領域の中を対象にして行
う場合について説明したが、これに限らず、例えば後に
取り込まれた部分画像に属する重なり領域の中を対象に
してもよいし、その両方を対象にしてももちろんよい。

【００３８】又、上記実施例では、接合情報出力端子部
１からの、貼り合わせが不可能である旨の情報の出力
は、シャッターの動作をロックしたり、操作者に対して
注意を喚起する趣旨でアラームを出す等のために用いら
れる場合について説明したが、これに限らず、接合情報
出力端子部１からの出力の用いられ方については、その
条件、場面あるいは、目的等を問わない。

【００３９】又、本発明は、ハードウェア的に、各構成
部を用いて実現してもよいし、これに限らず、ソフトウ
ェア的に実現するようにしてもよい。

【００４０】次に説明する内容は、上述したところのＯ
Ａカメラを用いて、部分画像の貼り合わせ接合を行う際
に、上記所定の閾値を越えるコントラストデータが存在
しない場合、ＯＡカメラ側から撮像対象に対して、積極
的にコントラストをつくってしまうという例に関するも
のである。

【００４１】上記実施例では、重なり領域において、所
定の閾値を越えるコントラストデータが存在しない場合
には、貼り合わせができないため、自動的にＯＡカメラ
のシャッター動作をロックし、例えば操作者が誤って撮
影することを未然に防止するというものである。従っ
て、ずれた画像同士をずれたまま貼り合わせてしまうこ
とを防止できるという大きな利点はあるが、ずれた画像
同士を正しく貼り合わせることができないという意味に
おいては、未だ改善の余地があった。

【００４２】そこで、本例は、上述した点等を考慮し、
部分画像の重なり領域の中に重ね合わせ接合に利用する
ための画像の特徴部が存在するか否かを判定することが
でき、更にその特徴部が存在しない場合であっても、部
分画像同士の位置ずれを修正して正しく貼り合わせるこ
とができるという画像取扱装置を提供することを目的と
する。

【００４３】図４は、画像取扱装置にかかる一例として
のＯＡカメラの構成を示すためのブロック図であり、同
図を用いて本例の構成を説明する。

【００４４】尚、図１と同じものには、同じ符号を付
し、その説明を省略する。又、図１９の構成との主な相
違点は、ＣＰＵ２等により、重なり領域において、特徴
部が存在しないと判定された場合でも、貼り合わせの接
合処理が正しく行えるようにするために、撮像対象に対
して、積極的に特徴部としてのコントラストを擬似的に
作るという趣旨で、補助光用素子としてのＬＥＤ１１
（マーカー投射手段の一部である）と、そのＬＥＤ１１
の発光のタイミング等を制御するための補助光駆動部１
２（マーカー投射手段の一部である）等を設けた点であ
る。

【００４５】ＬＥＤ１１は、イメージャーとしての第１
ＣＣＤ１０５（又は、第２ＣＣＤ１０６）が識別可能な
波長を有する光を投射するものである。又、ＬＥＤ１１
は、撮像対象に対して、部分画像の重なり領域に対応す
る部分に、自身が投射する光が当たるように、ＯＡカメ
ラの内部に設けられている。補助光駆動部１２は、ＣＰ
Ｕ２からの、上記重なり領域に特徴部が存在しない旨等
の指示に基づき、補助光用素子としてのＬＥＤ１１の発
光動作等を制御するものである。

【００４６】以上のような構成において、図５、図６を
用いて、本例の動作を説明する。

【００４７】ここで、図５は、本例の動作を説明するた
めのタイムチャートである。

【００４８】まず、ＯＡカメラの電源（ＯＡカメラの電
源のＯＮ／ＯＦＦ状態を、図５において、ＰＯＷＥＲ信
号５１にて示す）が入ると、撮影するしないにかかわら
ず、ミラースキャンが始まる。ここで、図５では、ミラ
ースキャンの動作状況は、所定のタイミングで取り込ま
れる各部分画像（部分画像Ａ，Ｂ，Ｃ，Ｄ，・・・）と
の対応関係を示すためにＡ，Ｂ，Ｃ，Ｄと表示したミラ
ースキャンタイムチャート５２に示すように、Ａ，Ｂ，
Ｃ，Ｄ，Ａ，Ｂ，Ｃ，Ｄ，・・・という順番にスキャン
を繰り返していく。尚、ミラースキャンタイムチャート
５２において、Ａ〜Ｄの各アルファベット文字の間をつ
なぐ「ぼう線」は、全反射ミラー１０１が移動中である
こと、更に、各アルファベット文字を「四角」で囲んで
あるのは、例えばＡの部分では、部分画像Ａの領域の絵
をイメージャー（第１ＣＣＤ１０５及び第２ＣＣＤ１０
６）に映していることを表すものである。ミラースキャ
ンタイムチャート５２におけるＡのタイミングでイメー
ジャーに光が蓄積される。

【００４９】これを順次繰り返し、ＡからＢへスキャン
し、又、ＢからＣへスキャンして、全反射ミラー１０１
が順次移動する毎に、所定の部分画像をイメージャーに
映していくという順序になる。このようにミラースキャ
ンをすることにより、ＣＣＤ（第１ＣＣＤ１０５及び第
２ＣＣＤ１０６）の出力５３は、例えば部分画像Ａが露
光されてからＡの出力が所定のタイミングだけ遅れて出
力されるというように、部分画像の露光タイミングに対
して所定のタイミングだけ遅れて出力されるが、Ａ，
Ｂ，Ｃ，Ｄという順序は基本的には変わらない。

【００５０】ここで、仮に、重ね合わせに必要な画像の
特徴部としての、例えば所定の閾値を越えるコントラス
トデータは、部分画像の重なり領域の中に存在しないと
いう判定がＣＰＵ２によって下された場合、接合情報出
力端子部１（図４参照）からアラーム信号５４として、
Ｈｉｇｈの信号が出力される。ここで、アラームという
のは、例えばファインダーの中にＬＥＤを発光させた
り、注意を喚起するための音を出す等、様々な方法があ
る。

【００５１】このアラーム信号５４として、Ｈｉｇｈの
信号が出力されて、必要に応じて何回か特徴部の探索が
繰り返され、それでも見つからない場合は、特徴部すな
わち、コントラストがないという判断がなされる。この
場合に、レリーズボタンが押されると（図５において、
レリーズ信号５５がＨｉｇｈレベルを示している場合に
対応する）、この時点で貼り合わせ領域にコントラスト
が存在しないという判定がＣＰＵ２により出されている
ため、補助光としてのＬＥＤ１１を発光させて、擬似的
なコントラストを作り出し、これを利用して部分画像の
貼り合わせを行う。

【００５２】ＬＥＤ１１を発光させるタイミングとして
は、ミラースキャンタイムチャート５２で示すとおり、
部分画像Ａが露光されているタイミング５１ａと、部分
画像Ｂが露光されているタイミング５１ｂとでＬＥＤ１
１を２回発光させる（ＬＥＤ１１を発光させるタイミン
グは、図５の補助光信号５６がＨｉｇｈレベルを示して
いる場合に対応する）。

【００５３】補助光（ＬＥＤ１１）を投射する場所は、
部分画像相互の重なり領域でなければならないので、図
６に示すように、例えば部分画像Ａに対してはその画像
面の右端６１、部分画像Ｂに対してはその画像面の左端
６２となる。

【００５４】このようにして、部分画像のそれぞれの位
置に補助光が映し出される。

【００５５】本来、この部分画像相互の重なり領域は、
貼り合わせるための特徴部が存在せず、コントラストが
ない「べたっとした画像」であったが、この補助光が映
しだされたことによって、擬似的な特徴部が存在し、位
置ずれを検出することが可能となり、位置ずれを生じる
ことなく、部分画像を正しく貼り合わせることができ
る。 従って、例えば、操作時の手ぶれ等により、カメ
ラがずれて、部分画像Ａと部分画像Ｂが、本来の位置か
ら縦方向へＹだけずれて撮影された場合でも、この補助
光の情報に基づいて貼り合わせれば正しく貼り合わせる
ことができる。

【００５６】このようにして、一の画像と他の画像との
部分的に重複する領域の、前記一の画像側及び／又は前
記他の画像側に、前記一の画像と前記他の画像とを重ね
合わせるために必要な特徴部が存在するか否かを、予め
定められた所定の特徴評価基準に基づいて判定するため
の判定手段と、前記重複する領域に対応する撮像対象に
対して、前記重ね合わせに利用するマーカーを投射する
ためのマーカー投射手段と、前記判定手段による前記判
定結果を利用して、前記一の画像と前記他の画像を重ね
合わせて、貼り合わせ処理を行うための接合画像形成手
段とを備えている画像取扱装置を実現することができ
る。

【００５７】従って、本例によれば、部分画像の重なり
領域の中に重ね合わせ接合に利用するための画像の特徴
部が存在するか否かを判定することができ、更にその特
徴部が存在しない場合であっても、部分画像同士の位置
ずれを修正して正しく貼り合わせることができるという
ものである。

【００５８】尚、本発明におけるマーカーは、上記実施
例ではＬＥＤの光として、説明したが、これに限らず、
要するにイメージャーが識別可能でさえあればどのよう
なものでもよい。

【００５９】又、マーカーとして光を用いる場合、要す
るにイメージャーが識別可能でさえあれば、例えばどの
ような波長を有する光であってもよく、光の種類等は、
問わない。

【００６０】上記の例では、部分画像の重なり領域に特
徴部が存在しない場合に、装置側から撮像対象に対し
て、ＬＥＤの光を投射させることにより、積極的にコン
トラストを作って、部分画像相互の位置ずれを検出し、
ずれのない正しい貼り合わせの処理を行うことができる
というものである。

【００６１】しかしながら、このような構成では、撮像
対象には本来存在しなかったところのコントラストが出
力画像に出力されてしまう場合が考えられる。

【００６２】そこで、貼り合わせの接合処理としては必
要であるが、出力画像としては、不要なコントラスト、
すなわち本来存在すべきでない邪魔な画像を出力画像に
表れないようにすることを目的として、その邪魔な画像
を事前に消去することができる例について、次に説明す
る。

【００６３】部分画像の重なり領域が、特徴部の存在し
ない、すなわちコントラストのない領域として判定され
た場合、その領域は、おそらく変化の少ない「べったり
とした画像」であろうとの判断に基づき、上記邪魔な画
像の周辺の画像に置き換えて光っている部分を消去し、
本来の画像に極めて近い画像に戻してから、それを出力
するための補間部７１（図７参照）を設けるというもの
である。ここで、図７は、補間部７１の構成を示すため
のブロック図であり、同図において、を付した部分
は、図４における出力部１１４の出力側としてのを付
した部分に対応し、相互に回路的な接続状態にあること
を示している。

【００６４】又、他の例として、２値化された信号を扱
うＯＡカメラの場合について、図８を用いて次に説明す
る。ここで、図８は、２値化部７５の構成を示すための
ブロック図であり、同図において、とを付した部分
は、図４における出力部１１４の出力側としてのと、
接合情報出力端子部１の出力側としてのを付した部分
に対応し、相互に回路的な接続状態にあることを示して
いる。

【００６５】この場合、出力信号が２値化されており、
２値化されている出力画像信号にＬＥＤ１１の光が載る
と、周囲が「黒」であるにもかかわらず、光の当たった
部分だけが「白」になり、本来のものとは異なる画像に
なる。

【００６６】この場合、上記の例でも説明したように、
重なり領域にはコントラストがないわけであり、例えば
その部分画像Ａの右端と、部分画像Ｂの左端の重なり領
域だけは、強制的に「黒」にするという処理を行えば２
値化の場合でも、上記の例と同様に対応できる。

【００６７】次に、部分画像を貼り合わせて接合処理さ
れた画像を高密度に記録するために、例えばＪＰＥＧ
（Joint photography expert group）のフォーマットに
基づいて帯域圧縮を行って出力する装置に関して、部分
画像の重なり領域に特徴部が存在しない場合について説
明する。

【００６８】図９は、本例の画像取扱装置の構成を示す
ためのブロック図であり、同図を用いて、本例の構成を
説明する。尚、図４と同じものには、同じ符号を付し、
その説明を省略する。又、図４で示す構成との主な相違
点は、本例の場合、コントラストデータを得る際に、Ｊ
ＰＥＧのフォーマットに基づくＤＣＴ（Discrete cosin
e transfer）処理（ここで、ＤＣＴ処理とは、主に画像
の時間領域での並びを周波数領域での並びに変換する処
理等をいう）を施し、画像データの帯域圧縮を行う過程
において得られるＤＣＴ係数を利用する点である。

【００６９】図９において、ＤＣＴ処理部８１は、ブロ
ック化された画像データに対してＤＣＴ処理を施すもの
であり、ジグザグスキャン部８２は、周波数領域での並
びに変換されたものを、低周波数成分から高周波数成分
の順にシリアルに並べ替えを行うものであり、累積加算
部８３は、ジグザグスキャン後の信号の必要な部分のみ
を累積加算するもので、これにより、ＡＥ用のデータや
ＡＦ用のコントラストデータが得られる。又、ハフマン
符号化部８４は、ジグザグスキャン後のデータを符号化
するためのものである。

【００７０】以上のような構成において、図１０を用い
て、本例の動作を説明する。

【００７１】まず、ＪＰＥＧのフォーマットに基づく、
８画素×８画素の６４画素のブロック９１に対応するブ
ロック化されたデータに対してＤＣＴ処理が施され、ブ
ロック化されたデータに関して個々に付されている番号
１から番号６４の順番で周波数別に分解される。ここ
で、図１０（ａ）は、ＪＰＥＧのフォーマットに基づ
く、８画素×８画素の６４画素のブロック９１を示す説
明図であり、同図（ｂ）は、ブロック化されたデータに
対するＤＣＴ処理を説明するための説明図である。

【００７２】番号１で示したところのデータほど周波数
が低く、番号の数字が大きくなるところのデータほど高
い周波数成分を有している。これをジグザグスキャン部
８２によりジグザグスキャンすると、番号１から番号６
４のデータが順番にシリアルに並び替えがなされる（図
１０（ｂ）参照）。ここで、番号１というのは、８×８
画素のブロック９１の中のＤＣ成分であり、番号２、３
・・・のように順に数が大きくなるに従い、周波数成分
が高くなっていく。

【００７３】従って、例えば、信号の低周波成分を利用
するところのＡＥ制御を行うための必要なデータを得る
ためには、番号１から番号４までといった比較的低い周
波数成分のみを用いて累積加算部８３にて累積加算する
ことにより、ＡＥ制御用のデータが得られる。

【００７４】一方、ＡＦ制御の場合には比較的大きなコ
ントラストが必要となるので、比較的周波数の高い領域
のみを用いて累積加算部８３にて累積加算し、ＡＦ制御
用のデータが得られる。

【００７５】このようにして、ジグザグスキャン部８２
によるジグザグスキャンの結果、所定の制御に必要な部
分だけが累積加算部８３にて累積加算され、その情報が
ＣＰＵ２に送られて、ＡＥやＡＦの駆動が行われる。

【００７６】以上のことから明らかなように、ＣＰＵ２
により、部分画像相互の重なり領域にコントラストが存
在しないと判断された場合、アラーム情報を出力すると
か、あるいは、更に撮像対象に向けて補助光を投射し、
擬似的なコントラストを積極的に形成することにより、
位置ずれのない正しい接合画像を作ることができる。

【００７７】このようにして、一の画像と、その一の画
像と部分的に重複する他の画像について、前記一の画像
を表す画像信号及び／又は前記他の画像を表す画像信号
を利用して直交変換データを得るための直交変換手段
と、前記重複する領域の前記一の画像側及び／又は前記
他の画像側に、前記一の画像と前記他の画像とを重ね合
わせるために必要な特徴部が存在するか否かを、前記直
交変換データに関して定められた基準に基づいて判定す
るための判定手段と、前記判定手段による前記判定結果
を利用して、前記一の画像と前記他の画像を重ね合わせ
て、貼り合わせ処理を行うための接合画像形成手段とを
備えている画像取扱装置を実現することができる。

【００７８】従って、本例によれば、例えば上記ＤＣＴ
係数のような直交変換データに関して定められた基準に
基づいて、部分画像の重なり領域の中に重ね合わせ接合
に利用するための画像の特徴部が存在するか否かを判定
することができ、更にその特徴部が存在しない場合であ
っても、部分画像同士の位置ずれを修正して正しく貼り
合わせることができるというものである。

【００７９】又、本発明は、カメラに限らず複写機、プ
リンタ、ファクシミリ、フィルムスキャナーなど他の画
像取扱装置にも適用可能である。

【００８０】尚、本例の直交変換データに関して定めら
れたに基準として、上記実施例では、ＤＣＴ係数等、を
用いる場合について説明したが、これに限らず、例えば
ＤＳＴ（Discrete sine transfer）処理によるＤＳＴ係
数やフーリエ変換係数等を用いて実現してももちろんよ
い。

【００８１】ところで、前述のＯＡカメラ等では、部分
画像同士の貼り合わせによる接合処理を行う場合、次の
ような処理が本出願人から提案されている。

【００８２】このＯＡカメラの構成については、図２１
に示すが、既に説明した図１９の内容と、２値化部１１
９を除いてほぼ同じであるため、その説明を省略する。

【００８３】すなわち、図１９との主な相違点は、図２
１では、座標変換部１１０にて座標変換された画像デー
タは、２値化部１１９にて、２値化され出力部１１４を
経て出力されると共に、境界バッファ１１１に保持され
て、その保持された２値化データに基づいて動きベクト
ルを検出する点である。

【００８４】通常、部分画像同士の、重なり領域での相
互の位置ずれ量をずれ量算出部１１３にて算出し、相互
の画像を切り換える位置は一律に固定した所で行うこと
が考えられる。

【００８５】例えば、図２３（ａ）に示すように、部分
画像Ａの左端の所定の切り替え場所に、仮に、文字
「１」がまたがってしまった際、部分画像Ａをその所定
の切り替え場所から部分画像Ｂに切り換えると、文字
「１」のまん中で相互の画像が接合されることになる。
ここで図２３（ａ）は、部分画像Ａと部分画像Ｂとの貼
り合わせの過程で、ずれが生じていない場合を説明する
図である。図２３（ａ）は、部分画像Ａと部分画像Ｂと
の貼り合わせの過程で、ずれが生じていない場合を説明
する図であり、同図（ｂ）は、部分画像Ａと部分画像Ｂ
との貼り合わせの過程で、ずれが生じている場合を説明
する図である。

【００８６】図２２（ａ）は、接合処理における出力状
態の概要を説明するためのタイムチャートであり、同図
（ｂ）は、画像の領域を示すための説明図である。以下
同図（ａ）、（ｂ）を用いて、図２１のＯＡカメラでの
処理動作等を説明する。

【００８７】まず、撮像に際してミラースキャンが行わ
れ、図２２（ｂ）に示すように部分画像Ａ，Ｂ，Ｃ，Ｄ
というようにスキャンされるので、各部分画像のデータ
は、図２２（ａ）の、出力１４１に示すようにＡ，
Ｂ，Ｃ，Ｄの順番に出力される。

【００８８】このように出力される各部分画像に対し
て、相互の位置ずれを調整した後、接合に際して、部分
画像を切り替える位置としては、所定の重なり領域内で
あればどこで切り替えを行っても基本的には接合ができ
る。

【００８９】そこで、この例では、図２２（ｂ）に示す
ように、部分画像Ｂのスタート点、部分画像Ｃのスター
ト点、部分画像Ｄのスタート点を、部分画像の切り替え
位置とすると、各部分画像の領域は、Ａｘ，Ｂｘ，Ｃ
ｘ，Ｄとなる。従って、Ｘ出力１４２のタイムチャート
としては、出力１４１から出力されたＡ，Ｂ，Ｃ，Ｄ
というデータに対して、Ａｘ，Ｂｘ，Ｃｘ，Ｄとなり、
図２２（ｂ）に示すように完全に貼り合わせが行えて、
全ての部分画像の接合が完了する。

【００９０】しかしながら、このような構成では、部分
画像の切り替える位置あるいはタイミングは、常に固定
であるため、仮に、部分画像の切り替える位置に文字が
存在して、位置ずれ補正が若干でもずれていた場合に
は、図２３（ｂ）に示すように、ずれた文字が出力され
てしまうといった欠点があった。すなわち、動きベクト
ルを検出して、部分画像同士のずれ量を算出して、座標
変換を行い、これによりずれた画像の位置を元に戻すと
いう操作をする過程において何らかの貼り合わせ誤差が
生じて、例えば１画素程度のずれが発生した場合等は上
記のような問題は、避けられず、とりわけ画像が文字で
ある場合には、顕著であった。

【００９１】本例は、図２１の画像取扱装置のこのよう
な課題を考慮し、部分画像同士を貼り合わせる場合、部
分画像同士の重なり領域の中に存在する特徴部にずれを
生じない画像取扱装置を提供することを目的とする。

【００９２】図１１は、画像取扱装置にかかる一例とし
てのＯＡカメラの構成を示すためのブロック図、そして
図１３は、後述する切り替え制御手段５の回路構成を示
すための図であり、同図を用いて本例のＯＡカメラの構
成を説明する。尚、既に説明した図４と同じものには、
同じ符号を付して、その説明を省略する。又、図４に示
す構成との主な相違点としては、図１１に示す構成で
は、部分画像の貼り合わせによる接合処理に際し、利用
する部分画像の切り替えを重なり領域の中の特徴部の形
態に基づいて、制御するために切り替え制御手段５を備
えた点である。又、図１１に示す構成では、座標変換部
１１０にて座標変換された画像データは、２値化部１１
９にて、２値化され出力部１１４を経て出力されると共
に、境界バッファ１１１に保持されて、その保持された
２値化データに基づいて動きベクトルを検出するという
点等も異なる。

【００９３】図１３において、とを付した部分は、
図１１における切り替え制御手段５への入力部としての
とを付した部分に対応し、相互に回路的な接続状態
にあることを示している。又、同図に関して、信号の切
り替え用のＳＷ１２１は、部分と部分から入力され
てくる信号、すなわちデータ１２５と、データ１２
６（図１５参照）を切り替えて出力するためのスイッチ
手段であり、ＳＷ制御回路１２２は、ＡＮＤ回路１２３
からの信号と、水平同期信号（ＨＳＹＮＣ）１２８（図
１５参照）の入力信号により、ＳＷ１２１の接続状態を
切り替え制御するためのものであり、ＳＷ制御信号１２
９（図１５参照）を出力する。ＡＮＤ回路１２３は、自
身の入力側が、常に同一のタイミングで部分画像の信号
を切り替えようとして出力されるセレクト信号（ＳＥＬ
ＥＣＴ）１２７（図１５参照）の出力側と、出力部１１
４の出力側（部分に対応）とに接続されるように構成
されている。

【００９４】以上のような構成において、主として図１
２（ａ）、及び図１３等を用いて、本例の動作を説明す
る。尚、図１２（ａ）は、本例の接合処理における出力
状態の概要を説明するためのタイムチャートであり、同
図（ｂ）は、画像の領域を説明するための説明図であ
る。又、同図（ａ）において、出力１２５と、出力
１２６（境界バファ１１１内のデータの出力に対応）
は、上記のデータ１２５と、データ１２６（図１５
参照）に対応しているので、同じ符号を付し、これらを
用いて貼り合わされた画像データをＹ出力１２４とす
る。ここで、図２２との主な相違点は、出力１２６を
活用する点等である。まず、出力１２６、すなわち境
界バファ１１１内の出力は、例えば、部分画像Ａを１回
ミラースキャンした時に、部分画像Ｂとの動きベクトル
の検出を行うために、部分画像Ａの右端の画像情報とし
てのＡｒを、部分画像Ｂがスキャンされた時のために、
２値化データとして境界バッファ１１１内に保存してお
く必要がある。 次に、部分画像Ｂがスキャンされて出
てきた時に、部分画像Ｂの左端と、境界バッファ１１１
内に保存されている部分画像Ａの右端Ａｒとを各々利用
して、相互の位置ずれや、動きベクトルを検出するよう
に構成されているので、部分画像Ｂが出力部１１４から
出力される時は、境界バッファ１１１の中にはＡｒが入
っているため、図１２（ａ）の出力１２５と、出力
１２６で示すように、部分画像Ｂが出力部１１４から出
力されるタイミングで、境界バッファ１１１からはＡｒ
が出力される。

【００９５】その後、順次、部分画像Ｃが出力されるタ
イミングで部分画像Ｂの右端Ｂｒが出力され、部分画像
Ｄが出てくるタイミングでＣｒが出てくる。

【００９６】ここで、重要な点は、出力部１１４と境界
バファ１１１の出力をＳＷ１２１にて巧みに切り替える
ことにより、従来のような部分画像の貼り合わせに際し
て、接合部の画像がずれないように構成されている。

【００９７】すなわち、図１２（ｂ）に示すように、要
するに、部分画像Ａと部分画像Ｂとの重なり領域では、
一律のタイミングで部分画像を切り替えるのではない、
ということである。

【００９８】更に、そのタイミング等に関して、図１
３、図１５、図１６を用いて説明する。ここで、図１５
は、本例の接合処理における出力状態を説明するための
タイムチャートであり、図１３は、切り替え制御手段５
の回路構成を説明するための説明図である。又、図１６
は、部分画像Ａと部分画像Ｂの切り替えのタイミングを
説明するための説明図である。

【００９９】図１５において、１回のミラースキャンで
一つの部分画像の領域が取り込まれるが、例えば、部分
画像Ｂの領域がスキャンされ、出力されているタイミン
グについて説明する。

【０１００】画像信号は水平方向にスキャンされて、例
えば部分画像Ｂのデータが、水平同期信号（ＨＳＹＮ
Ｃ）１２８の立ち下がりタイミング１５４で示す時点で
データ１２５として出力される。ここで、データ１
２５の信号波形としては、文字の時にＨｉｇｈ、白地の
時にＬｏｗを示すものとする。データ１２６により示
されるデータは、境界バファ１１１に保持されている部
分画像Ａの境界のデータであり、部分的にデータ１２
５の信号波形と同じになる。

【０１０１】次に、図１６を用いて、セレクト信号１２
７等の動作について、説明する。

【０１０２】同図に示すように、部分画像１５１（図１
２（ｂ）の部分画像Ａに対応）と部分画像１５２（図１
２（ｂ）の部分画像Ｂに対応）が所定の領域で重なって
いる。 ここで、仮に水平同期信号（ＨＳＹＮＣ）１２
８の立ち下がりタイミング１５４で示す時点で、部分画
像１５１から部分画像１５２へ一律に切り替えたので
は、従来と同じになる。

【０１０３】そこで、部分画像の重なり領域１５３の中
であれば，部分画像１５１を出しても部分画像１５２を
出しても基本的には変わらないことから、水平同期信号
（ＨＳＹＮＣ）１２８の立ち下がりタイミング１５４を
利用して、部分画像１５１の出力が終わる時点よりも充
分早い時点で、セレクト信号（ＳＥＬＥＣＴ）１２７の
立ち上がりタイミング１５５で示す時点にて、切り替え
の信号を作るとすると、基本的には、正しい貼り合わせ
が行われる。

【０１０４】しかし、水平同期信号（ＨＳＹＮＣ）１２
８と同期するセレクト信号（ＳＥＬＥＣＴ）１２７のＬ
ｏｗのパルス幅がこのセレクト信号を各Ｈに応じて時間
的に固定しておくと、結果的には境界線が常に一定であ
り、それのみを切り替え信号として利用するならば、上
述した理由から、切り替えによる部分画像の接合部が直
線的になるので、文字ずれや、段差が発生する可能性が
ある。

【０１０５】本例は、これを回避するために、更に次の
ように制御する。再び、図１５に戻って説明する。

【０１０６】水平同期信号（ＨＳＹＮＣ）１２８の最初
の立ち上がりタイミングではセレクト信号（ＳＥＬＥＣ
Ｔ）１２７がＬｏｗからＨｉｇｈに切り替わって、部分
画像Ａから部分画像Ｂに切り替えるタイミング１２９ａ
では、データ１２５は、Ｌｏｗすなわち、文字がない
「白」の部分であるため、このタイミングでは無条件に
切り替えても問題は発生し得ない。

【０１０７】次の、セレクト信号（ＳＥＬＥＣＴ）１２
７がＬｏｗからＨｉｇｈに切り替わるタイミング１２９
ｂでは、データ１２５は、Ｈｉｇｈすなわち、文字が
存在することを示しており、このタイミングで切り替え
てしまうと、上述のような要因で、場合によれば接合さ
れた画像にずれが発生する恐れを有している。

【０１０８】そこで、データ１２５が、Ｈｉｇｈから
Ｌｏｗになるまで、すなわちタイミング１２９ｃの時点
まで切り替えるのを待ち、それから次の部分画像Ｂに切
り替えようにするものである。

【０１０９】以上述べた、部分画像の切り替えるタイミ
ングの操作等に関して、図１３に示す切り替え制御手段
５により実現することにより、ずれや段差が起こること
はなくなる。尚、切り替え制御手段５の回路によれば、
図１７に示すように、切り替え場所（図１７では、切り
替え場所を破線２０１で示す。又、「１」の画像は全て
部分画像Ａの画像データに基づいて再現される）という
のは文字の右側を沿って変化することになる。ここで図
１７は、図１３に示す構成の切り替え制御手段５の回路
を用いた場合の、画像データの切り替え場所を示すため
の説明図である。

【０１１０】上記の例では、「１」のような形状の単純
なものの場合であったが、例えば「２」のような複雑な
文字の場合には、上記のような方法では、うまく判定か
出来ないことがあり、次にその対応例について説明す
る。

【０１１１】すなわち、このような場合は、例えば、文
字毎のいわゆるプロジェクション処理等を行う。ここ
で、プロジェクション処理とは、所定の文字に対して、
Ｘ方向とＹ方向のそれぞれの投影を行い、その幅を検出
する処理である。

【０１１２】例えば、文字が「２」の場合、図１８に示
すように、「２」に外接する矩形の領域（図１８では、
この外接矩形領域２０２を一点鎖線で表す）が、認識さ
れてデータとして得られる。このようにして得られた外
接矩形データ２０３を、図１４に示すＡＮＤ回路１２３
の入力データとして用い（外接矩形データ２０３がある
ときにはセレクト信号が切り替わらずに、待機させると
いうような構成にする）、それ以外は、上記の例で説明
した図１３の構成と同じもので、同じ方法により処理す
ることで、更に正確に画像のずれ防止を実現できるもの
である。ここで、図１４は、図１１における切り替え制
御手段５の別の回路構成を説明するための説明図であ
る。又、図１８は、図１４に示す構成の切り替え制御手
段５の回路を用いた場合の、画像データの切り替え場所
を示すための説明図である。

【０１１３】すなわち、以上のような構成で、切り替え
タイミングを決定することにより、図１８に示すよう
に、必ず文字の外接矩形領域２０２に沿って切り替わる
ので、決して文字をまたぐことはなくなり、仮に位置ず
れ検出の誤差が発生しても、そのことが文字等の画像の
接合状態に影響をおよぼさないため、先に説明した図１
３等による構成よりも、更に精度良く位置ずれの防止等
ができる。

【０１１４】このようにして、一の画像と、その一の画
像と部分的に重複する他の画像について、前記一の画像
と前記他の画像を重ね合わせて、貼り合わせ処理を行う
ための接合画像形成手段と、前記貼り合わせ処理された
結果としての接合画像を形成する際に、前記重ね合わせ
る画像部分を前記一の画像を利用するか、又は前記他の
画像を利用するかを、前記重複する領域の画像の形態に
基づいて、切り替え制御を行うための切り替え制御手段
とを備えている画像取扱装置を実現することができる。

【０１１５】従って、本例によれば、部分画像同士を貼
り合わせる場合、部分画像同士の重なり領域の中に存在
する特徴部にずれを生じない画像取扱装置を提供するこ
とができる。

【０１１６】尚、上記例では、出力データが２値データ
である場合について説明したが、これに限らず、多値デ
ータであってももちろんよく、同様の効果が得られる。

【０１１７】又、本例は、ハードウェア的に、各構成部
を用いて実現してもよいし、これに限らず、ソフトウェ
ア的に実現するようにしてもよい。

【０１１８】

【発明の効果】以上述べたところより明らかなように、
本発明は、一の画像と、該一の画像と部分的に重複する
領域を有する他の画像について、該重複する領域の特徴
部で両者を位置合わせして貼り合わせ処理を行う場合
に、各部分画像の重複する領域の中に貼り合わせ処理に
利用するための画像の特徴部が存在するか否かを判定で
き、前記特徴部が存在すると判定された場合はそのまま
ずれのない貼り合わせ処理が可能となり、特徴部が存在
しないと判定された場合は警告することができるため、
ずれた画像同士をずれたまま貼り合わせてしまうことを
防止できるという顕著な効果を有する。

【図面の簡単な説明】

【図１】本発明にかかる一実施例の画像取扱装置の一実
施例としてのＯＡカメラの構成を示すためのブロック図

【図２】同実施例の累積加算部１１５の構成等示すため
のブロック図

【図３】図３（ａ）；同実施例の部分画像の構成を説明
するための説明図 図３（ｂ）；同実施例の累積加算エリアを説明するため
の説明図

【図４】本例の画像取扱装置にかかる一例としてのＯＡ
カメラの構成を示すためのブロック図

【図５】本例の動作を説明するためのタイムチャート

【図６】図４において補助光を投射する場所を説明する
ための説明図

【図７】図４において補間部を追加した例の構成を示す
ためのブロック図

【図８】他の例の２値化部の構成を示すためのブロック
図

【図９】本例の画像取扱装置の構成を示すためのブロッ
ク図

【図１０】図１０（ａ）；ＪＰＥＧのフォーマットに基
づく、８画素×８画素の６４画素のブロックを示す説明
図 図１０（ｂ）；ブロック化されたデータに対するＤＣＴ
処理を説明するための説明図

【図１１】本例の画像取扱装置にかかる一例としてのＯ
Ａカメラの構成を示すためのブロック図

【図１２】図１２（ａ）；本例の接合処理における出力
状態の概要を説明するためのタイムチャート 図１２（ｂ）；画像の領域を説明するための説明図

【図１３】図１１における切り替え制御手段の回路構成
を説明するための説明図

【図１４】図１１における切り替え制御手段の別の回路
構成を説明するための説明図

【図１５】図１１の構成による接合処理における出力状
態を説明するためのタイムチャート

【図１６】図１１の構成による部分画像Ａと部分画像Ｂ
の切り替えのタイミングを説明するための説明図

【図１７】図１３に示す構成の切り替え制御手段の回路
を用いた場合の、画像データの切り替え場所を示すため
の説明図

【図１８】図１４に示す構成の切り替え制御手段の回路
を用いた場合の、画像データの切り替え場所を示すため
の説明図

【図１９】既提案によるＯＡカメラの構成を説明するた
めのブロック図

【図２０】図１９で示す例の各部分画像の重なり領域等
を説明するための説明図

【図２１】既提案による他のＯＡカメラの構成を説明す
るためのブロック図

【図２２】図２２（ａ）；図２１で示すＯＡカメラの接
合処理における出力状態の概要を説明するためのタイム
チャート 図２２（ｂ）；図２１で示すＯＡカメラの接合処理にお
ける出力状態の概要を説明する際の画像の領域を示す図

【図２３】図２３（ａ）；図２１で示すＯＡカメラにお
ける部分画像Ａと部分画像Ｂとの貼り合わせの過程で、
ずれが生じていない場合を説明する図 図２３（ｂ）；図２１で示すＯＡカメラにおける部分画
像Ａと部分画像Ｂとの貼り合わせの過程で、ずれが生じ
ている場合を説明する図

【符号の説明】

１ 接合情報出力端子部 ２ ＣＰＵ（判定手段） １０１ 全反射ミラー １０２ 入射光 １０２ａ 通過光 １０２ｂ 反射光 １０３ レンズ部 １０４ ハーフミラー １０５ 第１ＣＣＤ １０６ 第２ＣＣＤ １１０ 座標変換部（接合画像形成手段） ２００ 撮像対象画像

Claims (6)

(57)【特許請求の範囲】
1. 【請求項１】一の画像と該一の画像と部分的に重複する
   領域を有する他の画像について、該重複する領域の特徴
   部で両者を位置合わせして貼り合わせ処理を行う画像合
   成機能を有する画像取扱装置において、 前記一の画像側の前記重複する領域を表す画像信号及び
   ／又は前記他の画像側の前記重複する領域を表す画像信
   号のそれぞれに対応する１または複数のコントラストデ
   ータを求めるコントラストデータ抽出部と、 前記一の画像側の前記重複する領域及び／又は前記他の
   画像側の前記重複する領域に、 前記一の画像と前記他の
   画像とを貼り合わせるために必要な特徴部が存在するか
   否かを、前記求められた各コントラストデータを所定の
   コントラスト値と比較することにより判定するための判
   定手段と、 前記判定手段による前記判定結果に基づき、前記貼り合
   わせ処理を制御する画像合成制御手段と、 を備え、 前記判定手段は、前記求められた各コントラストデータ
   が所定のコントラスト値よりも全て小さい場合には前記
   特徴部が存在しないと判定し、そうでない場合には前記
   特徴部が存在すると判定する ことを特徴とする画像取扱
   装置。
2. 【請求項２】 前記画像合成制御手段は、前記判定手段に
   より前記特徴部が存在すると判定された場合は、前記貼
   り合わせ処理を行い、前記特徴部が存在しないと判定さ
   れた場合は、貼り合わせが不可能である旨の警告を行う
   ことを特徴とする請求項１に記載の画像取扱装置。
3. 【請求項３】 前記コントラストデータ抽出部は、 前記各画像信号から、所定の高周波成分だけを取り出す
   ためのＢＰＦと、 前記ＢＰＦの出力信号のマイナス波形をプラス波形に変
   換して絶対値をとるための絶対値演算器と、 前記絶対値演算器の各出力信号を所定数の累積加算エリ
   アに分割し、各累積加 算エリア毎に累積加算してそれぞ
   れコントラストデータを得るための累積加算器と、 からなることを特徴とする請求項１または２に記載の画
   像取扱装置。
4. 【請求項４】 一の画像と、該一の画像と部分的に重複す
   る領域を有する他の画像について、該重複する領域の特
   徴部で両者を位置合わせして貼り合わせ処理を行う画像
   合成機能を有する画像取扱装置の画像合成方法におい
   て、 前記一の画像側の前記重複する領域を表す画像信号及び
   ／又は前記他の画像側の前記重複する領域を表す画像信
   号のそれぞれに対応する１または複数のコントラストデ
   ータを求めるコントラストデータ抽出ステップと、 前記一の画像側の前記重複する領域及び／又は前記他の
   画像側の前記重複する領域に、前記一の画像と前記他の
   画像とを重ね合わせるために必要な特徴部が存在するか
   否かを、前記求められた各コントラストデータを所定の
   コントラスト値と比較することにより判定するための判
   定ステップと、 前記判定ステップによる前記判定結果に基づき、前記貼
   り合わせ処理を制御する画像合成制御ステップと、 を備え、 前記判定ステップは、前記求められた各コントラストデ
   ータが所定のコントラスト値よりも全て小さい場合には
   前記特徴部が存在しないと判定し、そうでない場合には
   前記特徴部が存在すると判定することを特徴とする画像
   取扱装置の画像合成方法。
5. 【請求項５】 前記画像合成制御ステップは、前記判定ス
   テップにより前記特徴部が存在すると判定された場合
   は、前記貼り合わせ処理を行い、前記特徴部が存在しな
   いと判定された場合は、貼り合わせが不可能である旨の
   警告を行うことを特徴とする請求項４に記載の画像取扱
   装置の画像合成方法。
6. 【請求項６】 前記コントラスト抽出ステップは、 前記各画像信号から、所定の高周波成分だけを取り出す
   ためのＢＰＦ処理ステ ップと、 前記ＢＰＦ処理ステップによる出力信号のマイナス波形
   をプラス波形に変換して絶対値をとるための絶対値演算
   ステップと、 前記絶対値演算ステップによる各出力信号を所定数の累
   積加算エリアに分割し、各累積加算エリア毎に累積加算
   してそれぞれコントラストデータを得るための累積加算
   ステップと、 からなることを特徴とする請求項４または５に記載の画
   像取扱装置の画像合成方法。