JPH0870401A - 画像のタイミング一致検出方法及び装置 - Google Patents
画像のタイミング一致検出方法及び装置Info
- Publication number
- JPH0870401A JPH0870401A JP6205277A JP20527794A JPH0870401A JP H0870401 A JPH0870401 A JP H0870401A JP 6205277 A JP6205277 A JP 6205277A JP 20527794 A JP20527794 A JP 20527794A JP H0870401 A JPH0870401 A JP H0870401A
- Authority
- JP
- Japan
- Prior art keywords
- image
- time
- image signal
- timing
- standard deviation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
(57)【要約】
【構成】 平均輝度値算出回路２は入力端子１ａから供
給されるＳＤ画像信号と入力端子１ｂから供給されるＨ
Ｄ画像信号の平均輝度値ｍを算出する。標準偏差算出回
路４はＳＤ画像信号とＨＤ画像信号の標準偏差σを算出
する。フレーム間差分算出回路６はＳＤ画像信号とＨＤ
画像信号のフレーム間差分Δを算出する。動きベクトル
算出回路８はＳＤ画像信号とＨＤ画像信号の動きベクト
ルｖを算出する。時系列値記憶部３、５、７及び９は、
ＳＤ画像信号とＨＤ画像信号の上記平均輝度値ｍ、標準
偏差σ、フレーム間差分Δ及び動きベクトルｖの一定時
間の時系列データを保有する。時間方向マッチング回路
１０はＳＤ画像の信号及びＨＤ画像信号の各種時系列デ
ータの時間方向のマッチングをとり、タイミング一致点
を検出する。 【効果】 タイムコードの記録を不要としながらも、画
像の時間方向のタイミングの一致を検出できる。
給されるＳＤ画像信号と入力端子１ｂから供給されるＨ
Ｄ画像信号の平均輝度値ｍを算出する。標準偏差算出回
路４はＳＤ画像信号とＨＤ画像信号の標準偏差σを算出
する。フレーム間差分算出回路６はＳＤ画像信号とＨＤ
画像信号のフレーム間差分Δを算出する。動きベクトル
算出回路８はＳＤ画像信号とＨＤ画像信号の動きベクト
ルｖを算出する。時系列値記憶部３、５、７及び９は、
ＳＤ画像信号とＨＤ画像信号の上記平均輝度値ｍ、標準
偏差σ、フレーム間差分Δ及び動きベクトルｖの一定時
間の時系列データを保有する。時間方向マッチング回路
１０はＳＤ画像の信号及びＨＤ画像信号の各種時系列デ
ータの時間方向のマッチングをとり、タイミング一致点
を検出する。 【効果】 タイムコードの記録を不要としながらも、画
像の時間方向のタイミングの一致を検出できる。
Description
【０００１】
【産業上の利用分野】本発明は、複数の画像の時間方向
のタイミングの一致を検出する画像のタイミング一致検
出方法及び装置に関する。
のタイミングの一致を検出する画像のタイミング一致検
出方法及び装置に関する。
【０００２】
【従来の技術】一般に、入力系統の異なる複数の画像撮
像装置で、ある動画のシーンを撮像する場合、同一のシ
ーンを撮像するためには、同時刻に撮像するしかない。
このため動画像を記録した場合、同じシーンを取り出す
には記録時にリアルタイムを同時に記録しておき、後で
タイムコードを参照して切り出しを行う必要がある。
像装置で、ある動画のシーンを撮像する場合、同一のシ
ーンを撮像するためには、同時刻に撮像するしかない。
このため動画像を記録した場合、同じシーンを取り出す
には記録時にリアルタイムを同時に記録しておき、後で
タイムコードを参照して切り出しを行う必要がある。
【０００３】
【発明が解決しようとする課題】ところで、複数の画像
撮像装置を用いて同一シーンを撮像した場合、物理的に
１本の光軸上に複数の画像撮像装置を配置することがで
きないので、厳密には全く同一のシーンではない。特
に、３次元物体を撮像しようとすれば、光軸上で分光す
る等の工夫が必要である。
撮像装置を用いて同一シーンを撮像した場合、物理的に
１本の光軸上に複数の画像撮像装置を配置することがで
きないので、厳密には全く同一のシーンではない。特
に、３次元物体を撮像しようとすれば、光軸上で分光す
る等の工夫が必要である。
【０００４】また、光軸は分光するにしても、入力系統
の異なる複数の画像撮像装置にリアルタイムを記録する
必要があるが、このようなタイムコードが記録できない
場合には、複数の撮像した画像の時間方向のタイミング
を合わせることができない。
の異なる複数の画像撮像装置にリアルタイムを記録する
必要があるが、このようなタイムコードが記録できない
場合には、複数の撮像した画像の時間方向のタイミング
を合わせることができない。
【０００５】本発明は、タイムコードの記録を不要とし
ながらも、複数の画像撮像装置を用いて撮像した画像の
時間方向のタイミングの一致を検出できる画像のタイミ
ング一致検出方法及び装置の提供を目的とする。
ながらも、複数の画像撮像装置を用いて撮像した画像の
時間方向のタイミングの一致を検出できる画像のタイミ
ング一致検出方法及び装置の提供を目的とする。
【０００６】
【課題を解決するための手段】本発明に係る画像のタイ
ミング一致検出方法は、第１の画素数からなる第１の撮
像素子が出力する第１の画像と第２の画素数からなる第
２の撮像素子が出力する第２の画像との時間方向の一致
を検出する画像のタイミング一致検出方法において、上
記第１の画像と上記第２の画像の単位画像における平均
値、標準偏差、時間差分、動き量の内の少なくとも１つ
の情報を用いて、上記画像間の時間方向のタイミングの
一致を検出することにより上記課題を解決する。
ミング一致検出方法は、第１の画素数からなる第１の撮
像素子が出力する第１の画像と第２の画素数からなる第
２の撮像素子が出力する第２の画像との時間方向の一致
を検出する画像のタイミング一致検出方法において、上
記第１の画像と上記第２の画像の単位画像における平均
値、標準偏差、時間差分、動き量の内の少なくとも１つ
の情報を用いて、上記画像間の時間方向のタイミングの
一致を検出することにより上記課題を解決する。
【０００７】この場合、上記情報は、上記第１の画像と
上記第２の画像の単位画像における平均値、標準偏差、
時間差分、動き量の時系列変化値の内の少なくとも１つ
である。
上記第２の画像の単位画像における平均値、標準偏差、
時間差分、動き量の時系列変化値の内の少なくとも１つ
である。
【０００８】また、上記平均値、標準偏差、時間差分、
動き量の情報には、相関係数を用いた評価が施される。
動き量の情報には、相関係数を用いた評価が施される。
【０００９】また、本発明に係る画像のタイミング一致
検出方法は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出方法において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断して上記
画像間の時間方向のタイミングの一致を検出することに
より上記課題を解決する。
検出方法は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出方法において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断して上記
画像間の時間方向のタイミングの一致を検出することに
より上記課題を解決する。
【００１０】また、本発明に係る画像のタイミング一致
検出装置は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出装置において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の内の少なくとも１つの情報を用
いて、上記画像間の時間方向のタイミングの一致を検出
することにより上記課題を解決する。
検出装置は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出装置において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の内の少なくとも１つの情報を用
いて、上記画像間の時間方向のタイミングの一致を検出
することにより上記課題を解決する。
【００１１】この場合、上記情報は、上記第１の画像と
上記第２の画像の単位画像における平均値、標準偏差、
時間差分、動き量の時系列変化値の内の少なくとも１つ
である。
上記第２の画像の単位画像における平均値、標準偏差、
時間差分、動き量の時系列変化値の内の少なくとも１つ
である。
【００１２】また、上記平均値、標準偏差、時間差分、
動き量の情報には、相関係数を用いた評価が施される。
動き量の情報には、相関係数を用いた評価が施される。
【００１３】また、本発明に係る画像のタイミング一致
検出装置は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出装置において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断して上記
画像間の時間方向のタイミングの一致を検出することに
より上記課題を解決する。
検出装置は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出装置において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断して上記
画像間の時間方向のタイミングの一致を検出することに
より上記課題を解決する。
【００１４】この場合、上記第１及び上記第２の撮像素
子は、同じ被写体を撮像する。また、上記被写体には、
基準の画素位置を示すマーカが付されている。
子は、同じ被写体を撮像する。また、上記被写体には、
基準の画素位置を示すマーカが付されている。
【００１５】
【作用】本発明に係る画像のタイミング一致検出方法
は、第１の画素数からなる第１の撮像素子が出力する第
１の画像と第２の画素数からなる第２の撮像素子が出力
する第２の画像の単位画像における平均値、標準偏差、
時間差分、動き量の内の少なくとも１つの情報を用いる
ので、タイムコードの記録を不要としながらも、画像の
時間方向のタイミングの一致を検出できる。
は、第１の画素数からなる第１の撮像素子が出力する第
１の画像と第２の画素数からなる第２の撮像素子が出力
する第２の画像の単位画像における平均値、標準偏差、
時間差分、動き量の内の少なくとも１つの情報を用いる
ので、タイムコードの記録を不要としながらも、画像の
時間方向のタイミングの一致を検出できる。
【００１６】本発明に係る画像のタイミング一致検出方
法は、第１の画素数からなる第１の撮像素子が出力する
第１の画像と第２の画素数からなる第２の撮像素子が出
力する第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断するの
で、タイムコードの記録を不要としながらも、画像の時
間方向のタイミングの一致を検出できる。
法は、第１の画素数からなる第１の撮像素子が出力する
第１の画像と第２の画素数からなる第２の撮像素子が出
力する第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断するの
で、タイムコードの記録を不要としながらも、画像の時
間方向のタイミングの一致を検出できる。
【００１７】本発明に係る画像のタイミング一致検出装
置は、第１の画素数からなる第１の撮像素子が出力する
第１の画像と第２の画素数からなる第２の撮像素子が出
力する第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の内の少なくとも１つの情報を用
いるので、タイムコードの記録を不要としながらも、画
像の時間方向のタイミングの一致を検出できる。
置は、第１の画素数からなる第１の撮像素子が出力する
第１の画像と第２の画素数からなる第２の撮像素子が出
力する第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の内の少なくとも１つの情報を用
いるので、タイムコードの記録を不要としながらも、画
像の時間方向のタイミングの一致を検出できる。
【００１８】本発明に係る画像のタイミング一致検出装
置は、第１の画素数からなる第１の撮像素子が出力する
第１の画像と第２の画素数からなる第２の撮像素子が出
力する第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断するの
で、タイムコードの記録を不要としながらも、画像の時
間方向のタイミングの一致を検出できる。
置は、第１の画素数からなる第１の撮像素子が出力する
第１の画像と第２の画素数からなる第２の撮像素子が出
力する第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断するの
で、タイムコードの記録を不要としながらも、画像の時
間方向のタイミングの一致を検出できる。
【００１９】
【実施例】以下、本発明に係る画像のタイミング一致検
出方法及び装置が適用できる好ましい実施例について説
明する。この実施例は、入力系統の異なる２つの画像撮
像装置が同一被写体を撮像して得た２つの画像の時間方
向のタイミングの一致を検出する画像のタイミング一致
検出装置である。ここで、上記入力系統の異なる２つの
画像撮像装置の内の少なくとも一は、画像撮像と同時に
タイムコードを記録できない画像撮像装置であり、本実
施例となる画像のタイミング一致検出装置は、リアルタ
イムを参照してのタイミング一致の検出が不可能であ
る。
出方法及び装置が適用できる好ましい実施例について説
明する。この実施例は、入力系統の異なる２つの画像撮
像装置が同一被写体を撮像して得た２つの画像の時間方
向のタイミングの一致を検出する画像のタイミング一致
検出装置である。ここで、上記入力系統の異なる２つの
画像撮像装置の内の少なくとも一は、画像撮像と同時に
タイムコードを記録できない画像撮像装置であり、本実
施例となる画像のタイミング一致検出装置は、リアルタ
イムを参照してのタイミング一致の検出が不可能であ
る。
【００２０】このため本実施例の画像のタイミング一致
検出装置は、ある一定時間の画像の読み出しを行い、フ
レーム又はフィールド単位に画像の特徴量を算出し、該
特徴量について一定時間の時系列データを保有し、該時
系列データを用いてマッチングをとり、タイミング一致
点を検出することによって、タイミング位相差を出力す
る。特徴量としては、供給される画像信号の平均輝度
ｍ、標準偏差σ、フレーム間差分Δ、動きベクトルｖを
用いる。
検出装置は、ある一定時間の画像の読み出しを行い、フ
レーム又はフィールド単位に画像の特徴量を算出し、該
特徴量について一定時間の時系列データを保有し、該時
系列データを用いてマッチングをとり、タイミング一致
点を検出することによって、タイミング位相差を出力す
る。特徴量としては、供給される画像信号の平均輝度
ｍ、標準偏差σ、フレーム間差分Δ、動きベクトルｖを
用いる。
【００２１】すなわち、本実施例の画像のタイミング一
致検出装置は、図１に示すように、入力端子１ａから供
給される第１の画像の信号と入力端子１ｂから供給され
る第２の画像の信号の平均輝度値ｍを算出する平均輝度
値算出回路２と、上記平均輝度値ｍの一定時間の時系列
データを保有する時系列値記憶部３と、上記第１の画像
の信号と上記第２の画像の信号の標準偏差σを算出する
標準偏差算出回路４と、上記標準偏差σの一定時間の時
系列データを保有する時系列値記憶部５と、上記第１の
画像の信号と上記第２の画像の信号のフレーム間差分Δ
を算出するフレーム間差分算出回路６と、上記フレーム
間差分Δの一定時間の時系列データを保有する時系列値
記憶部７と、上記第１の画像の信号と上記第２の画像の
信号の動きベクトルｖを算出する動きベクトル算出回路
８と、上記動きベクトルｖの一定時間の時系列データを
保有する時系列値記憶部９と、上記時系列値記憶部３、
５、７及び９から供給される上記第１の画像の信号の各
種時系列データと上記第２の画像の信号の各種時系列デ
ータの時間方向のマッチングをとり、タイミング一致点
を検出することによってタイミング位相差を出力する時
間方向マッチング回路１０とを有してなる。
致検出装置は、図１に示すように、入力端子１ａから供
給される第１の画像の信号と入力端子１ｂから供給され
る第２の画像の信号の平均輝度値ｍを算出する平均輝度
値算出回路２と、上記平均輝度値ｍの一定時間の時系列
データを保有する時系列値記憶部３と、上記第１の画像
の信号と上記第２の画像の信号の標準偏差σを算出する
標準偏差算出回路４と、上記標準偏差σの一定時間の時
系列データを保有する時系列値記憶部５と、上記第１の
画像の信号と上記第２の画像の信号のフレーム間差分Δ
を算出するフレーム間差分算出回路６と、上記フレーム
間差分Δの一定時間の時系列データを保有する時系列値
記憶部７と、上記第１の画像の信号と上記第２の画像の
信号の動きベクトルｖを算出する動きベクトル算出回路
８と、上記動きベクトルｖの一定時間の時系列データを
保有する時系列値記憶部９と、上記時系列値記憶部３、
５、７及び９から供給される上記第１の画像の信号の各
種時系列データと上記第２の画像の信号の各種時系列デ
ータの時間方向のマッチングをとり、タイミング一致点
を検出することによってタイミング位相差を出力する時
間方向マッチング回路１０とを有してなる。
【００２２】ここで、入力端子１ａから供給される第１
の画像の信号と、入力端子１ｂから供給される第２の画
像の信号を得るための方法を図２に示す。
の画像の信号と、入力端子１ｂから供給される第２の画
像の信号を得るための方法を図２に示す。
【００２３】一方の画像撮像装置１１は、ハーフミラー
１５を透過した被写体１６の画像を撮像し、他方の画像
撮像装置１２は、ハーフミラー１５に反射された被写体
１６の画像を撮像する。すなわち、物理的に１本の光軸
上に２つの画像撮像装置１１及び１２を配置することが
できないので、ハーフミラー１５で分光して同一の画像
を得るようにしている。
１５を透過した被写体１６の画像を撮像し、他方の画像
撮像装置１２は、ハーフミラー１５に反射された被写体
１６の画像を撮像する。すなわち、物理的に１本の光軸
上に２つの画像撮像装置１１及び１２を配置することが
できないので、ハーフミラー１５で分光して同一の画像
を得るようにしている。
【００２４】ここで、一方の画像撮像装置１１は、例え
ば第１の画素数からなる第１の撮像素子を備えて第１の
画像を出力する。また、画像撮像装置１２は、例えば第
２の画素数からなる第２の撮像素子を備えて第２の画像
を出力する。ここでは、具体的に上記第１の画像とし
て、標準テレビジョン方式の一つである例えばＮＴＳＣ
方式の５２５本からなる画像を低解像度画像（以下、Ｓ
Ｄ（標準解像度）画像という）、上記第２の画像とし
て、高精細度方式である例えば１１２５本からなる高解
像度画像（以下、ＨＤ（高精細度）画像という）を扱う
場合を例に挙げる。
ば第１の画素数からなる第１の撮像素子を備えて第１の
画像を出力する。また、画像撮像装置１２は、例えば第
２の画素数からなる第２の撮像素子を備えて第２の画像
を出力する。ここでは、具体的に上記第１の画像とし
て、標準テレビジョン方式の一つである例えばＮＴＳＣ
方式の５２５本からなる画像を低解像度画像（以下、Ｓ
Ｄ（標準解像度）画像という）、上記第２の画像とし
て、高精細度方式である例えば１１２５本からなる高解
像度画像（以下、ＨＤ（高精細度）画像という）を扱う
場合を例に挙げる。
【００２５】第１の撮像素子又は第２の撮像素子を備え
てそれぞれ撮像された画像は、上記画像撮像装置１１又
は１２の記録部にそれぞれ記録される。ここで、画像撮
像装置１１及び１２の構成を図３を参照しながら説明し
ておく。
てそれぞれ撮像された画像は、上記画像撮像装置１１又
は１２の記録部にそれぞれ記録される。ここで、画像撮
像装置１１及び１２の構成を図３を参照しながら説明し
ておく。
【００２６】画像撮像装置１１は、上記被写体を撮像す
る第１の画素数からなる第１の撮像素子部１１ａと、該
第１の撮像素子部１１ａで撮像した第１の画像に相当す
るＳＤ画像を蓄積するＳＤ画像蓄積部１１ｂと、後述す
るマーカ位置判定部１４から供給される制御信号に応じ
て例えば物理的位置、角度、ズーム率等を調整するカメ
ラ調整部１１ｃとで構成される。
る第１の画素数からなる第１の撮像素子部１１ａと、該
第１の撮像素子部１１ａで撮像した第１の画像に相当す
るＳＤ画像を蓄積するＳＤ画像蓄積部１１ｂと、後述す
るマーカ位置判定部１４から供給される制御信号に応じ
て例えば物理的位置、角度、ズーム率等を調整するカメ
ラ調整部１１ｃとで構成される。
【００２７】また、画像撮像装置１２は、上記被写体を
撮像する第２の画素数からなる第２の撮像素子部１２ａ
と、該第２の撮像素子部１２ａで撮像した第２の画像に
相当するＨＤ画像を蓄積するＨＤ画像蓄積部１２ｂと、
マーカ位置判定部１４から供給される制御信号に応じて
カメラの調整を行うカメラ調整部１２ｃとで構成され
る。
撮像する第２の画素数からなる第２の撮像素子部１２ａ
と、該第２の撮像素子部１２ａで撮像した第２の画像に
相当するＨＤ画像を蓄積するＨＤ画像蓄積部１２ｂと、
マーカ位置判定部１４から供給される制御信号に応じて
カメラの調整を行うカメラ調整部１２ｃとで構成され
る。
【００２８】画像撮像装置１１、１２で撮影されたＳＤ
画像とＨＤ画像は、それぞれＳＤ画像蓄積部１１ｂとＨ
Ｄ画像蓄積部１２ｂとを介してマーカ検出部１３に入力
される。マーカ検出部１３は、同一被写体に対するＳＤ
画像とＨＤ画像の画像データから、基準の画素位置を示
すマーカを検出する。このマーカは被写体撮影時に一緒
に記録される。マーカ検出部１３で検出されたマーカ
は、マーカ位置判定部１４に供給される。このマーカ位
置判定部１４は、マーカ検出部１３の検出結果を基にマ
ーカ位置判定を行う。
画像とＨＤ画像は、それぞれＳＤ画像蓄積部１１ｂとＨ
Ｄ画像蓄積部１２ｂとを介してマーカ検出部１３に入力
される。マーカ検出部１３は、同一被写体に対するＳＤ
画像とＨＤ画像の画像データから、基準の画素位置を示
すマーカを検出する。このマーカは被写体撮影時に一緒
に記録される。マーカ検出部１３で検出されたマーカ
は、マーカ位置判定部１４に供給される。このマーカ位
置判定部１４は、マーカ検出部１３の検出結果を基にマ
ーカ位置判定を行う。
【００２９】このようにしてマーカ位置を判定するの
は、画像の特徴量を求めるときの対象領域は、画像のフ
ォーマットが異なる場合、例えば一方がＳＤ信号で他方
がＨＤ信号の場合、１フレーム／１フィールド全体を対
象とすると画像内容が異なってしまうためである。
は、画像の特徴量を求めるときの対象領域は、画像のフ
ォーマットが異なる場合、例えば一方がＳＤ信号で他方
がＨＤ信号の場合、１フレーム／１フィールド全体を対
象とすると画像内容が異なってしまうためである。
【００３０】ここで、マーカについて図４及び図５を参
照しながら説明しておく。
照しながら説明しておく。
【００３１】マーカは、例えば図４に示すようなマーカ
領域２０に白地に黒線が十字に入ったものを用いてい
る。このマーカを図５の（ａ）及び（ｂ）に示すよう
に、被写体位置上で水平方向、垂直方向の４箇所Ｍ１、
Ｍ２、Ｍ３及びＭ４に付け、該マーカＭ１、Ｍ２、Ｍ３
及びＭ４を含んだ画像をそれぞれ撮影する。各マーカは
被写体の上の画枠２１内に配される。マーカＭ１、Ｍ２
が同一の高さで水平方向に、マーカＭ３、Ｍ４が、同じ
列に、すなわち垂直方向にそれぞれ配されている。
領域２０に白地に黒線が十字に入ったものを用いてい
る。このマーカを図５の（ａ）及び（ｂ）に示すよう
に、被写体位置上で水平方向、垂直方向の４箇所Ｍ１、
Ｍ２、Ｍ３及びＭ４に付け、該マーカＭ１、Ｍ２、Ｍ３
及びＭ４を含んだ画像をそれぞれ撮影する。各マーカは
被写体の上の画枠２１内に配される。マーカＭ１、Ｍ２
が同一の高さで水平方向に、マーカＭ３、Ｍ４が、同じ
列に、すなわち垂直方向にそれぞれ配されている。
【００３２】ＨＤ画像では、例えば図５（ａ）に示すよ
うに、水平方向のマーカＭ１、Ｍ２の交点間がｗ１、垂
直方向のマーカＭ３、Ｍ４の交点間がｈ１と設定されて
いる。また、ＳＤ画像では、例えば図５の（ｂ）に示す
ように、水平方向のマーカＭ１、Ｍ２の交点間がｗ２、
垂直方向のマーカＭ３、Ｍ４の交点間がｈ２というよう
に、上記ＨＤ画像とは画角フォーマットが異なるため異
なる位置に設定されることになる。
うに、水平方向のマーカＭ１、Ｍ２の交点間がｗ１、垂
直方向のマーカＭ３、Ｍ４の交点間がｈ１と設定されて
いる。また、ＳＤ画像では、例えば図５の（ｂ）に示す
ように、水平方向のマーカＭ１、Ｍ２の交点間がｗ２、
垂直方向のマーカＭ３、Ｍ４の交点間がｈ２というよう
に、上記ＨＤ画像とは画角フォーマットが異なるため異
なる位置に設定されることになる。
【００３３】このようにして、マーカを含み、水平方向
にあるマーカの水平性と、垂直方向にあるマーカの垂直
性がとれるように、同一被写体１６をそれぞれ撮像す
る。十字マーカの交差点を検出し、その座標から有効領
域を抽出すれば、２つの画像は同じ画像となるのであ
る。
にあるマーカの水平性と、垂直方向にあるマーカの垂直
性がとれるように、同一被写体１６をそれぞれ撮像す
る。十字マーカの交差点を検出し、その座標から有効領
域を抽出すれば、２つの画像は同じ画像となるのであ
る。
【００３４】このようにマーカを用いて画像撮像装置１
１又は１２が同一被写体１６を撮像して得た上記第１の
画像信号と上記第２の画像信号は、入力端子１ａ、１ｂ
から本実施例の画像のタイミング一致検出装置に供給さ
れる。
１又は１２が同一被写体１６を撮像して得た上記第１の
画像信号と上記第２の画像信号は、入力端子１ａ、１ｂ
から本実施例の画像のタイミング一致検出装置に供給さ
れる。
【００３５】平均輝度値算出回路２は、上記第１の画像
信号であるＳＤ画像信号の平均輝度値ｍSと上記第２の
画像信号であるＨＤ画像信号の平均輝度値ｍHを算出す
る。ＳＤ画像信号の有効領域の画素数をＮSとすると、
上記平均輝度値ｍSは、
信号であるＳＤ画像信号の平均輝度値ｍSと上記第２の
画像信号であるＨＤ画像信号の平均輝度値ｍHを算出す
る。ＳＤ画像信号の有効領域の画素数をＮSとすると、
上記平均輝度値ｍSは、
【００３６】
【数１】
【００３７】となる。ここで、ＹSiはＳＤ画像信号の有
効領域画素数ＮS内のｉ番目の輝度値であり、以下でも
同じである。
効領域画素数ＮS内のｉ番目の輝度値であり、以下でも
同じである。
【００３８】また、ＨＤ画像信号の有効領域の画素数を
ＮHとすると上記平均輝度値ｍHは、
ＮHとすると上記平均輝度値ｍHは、
【００３９】
【数２】
【００４０】となる。ここで、ＹHiはＨＤ画像信号の有
効領域画素数ＮH内のｉ番目の輝度値であり、以下でも
同じである。
効領域画素数ＮH内のｉ番目の輝度値であり、以下でも
同じである。
【００４１】この平均輝度値算出回路２で算出された平
均輝度値ｍS及びｍHは、時系列値記憶部３に供給され、
該時系列値記憶部３にて一定時間分の時系列データとし
て保有される。
均輝度値ｍS及びｍHは、時系列値記憶部３に供給され、
該時系列値記憶部３にて一定時間分の時系列データとし
て保有される。
【００４２】標準偏差算出回路４は、上記ＳＤ画像信号
の標準偏差σSと上記ＨＤ画像信号の標準偏差σHを算出
する。ＳＤ画像信号の有効領域の画素数をＮSとする
と、上記標準偏差σSは、
の標準偏差σSと上記ＨＤ画像信号の標準偏差σHを算出
する。ＳＤ画像信号の有効領域の画素数をＮSとする
と、上記標準偏差σSは、
【００４３】
【数３】
【００４４】となる。
【００４５】同様に、ＨＤ画像信号の有効領域の画素数
をＮHとすると、上記標準偏差σHは、
をＮHとすると、上記標準偏差σHは、
【００４６】
【数４】
【００４７】となる。
【００４８】この標準偏差算出回路４で算出された標準
偏差σS及びσHは、時系列値記憶部５に供給され、該時
系列値記憶部５にて一致時間分の時系列データとして保
有される。
偏差σS及びσHは、時系列値記憶部５に供給され、該時
系列値記憶部５にて一致時間分の時系列データとして保
有される。
【００４９】フレーム間差分算出回路６は、上記ＳＤ画
像信号のフレーム間差分ΔSと上記ＨＤ画像信号のフレ
ーム間差分ΔHを算出する。ＳＤ画像信号の有効領域の
画素数をＮSとすると、上記フレーム間差分ΔSは、
像信号のフレーム間差分ΔSと上記ＨＤ画像信号のフレ
ーム間差分ΔHを算出する。ＳＤ画像信号の有効領域の
画素数をＮSとすると、上記フレーム間差分ΔSは、
【００５０】
【数５】
【００５１】となる。ここで、ＹSi (t)は、ＳＤ画像信
号のｔフレームのｉ番目の輝度値を表し、Ｙ
Si (t-1)は、ＳＤ画像信号の（ｔ−１）フレームのｉ番
目の輝度値を表している。
号のｔフレームのｉ番目の輝度値を表し、Ｙ
Si (t-1)は、ＳＤ画像信号の（ｔ−１）フレームのｉ番
目の輝度値を表している。
【００５２】同様に、ＨＤ画像信号の有効領域の画素数
をＮHとすると、上記フレーム間差分ΔHは、
をＮHとすると、上記フレーム間差分ΔHは、
【００５３】
【数６】
【００５４】となる。ここで、ＹHi (t)は、ＨＤ画像信
号のｔフレームのｉ番目の輝度値を表し、Ｙ
Hi (t-1)は、ＨＤ画像信号の（ｔ−１）フレームのｉ番
目の輝度値を表している。
号のｔフレームのｉ番目の輝度値を表し、Ｙ
Hi (t-1)は、ＨＤ画像信号の（ｔ−１）フレームのｉ番
目の輝度値を表している。
【００５５】このフレーム間差分算出回路６で算出され
たフレーム間差分ΔS及びΔHは、時系列値記憶部７に供
給され、該時系列値記憶部７にて一定時間分の時系列デ
ータとして保有される。
たフレーム間差分ΔS及びΔHは、時系列値記憶部７に供
給され、該時系列値記憶部７にて一定時間分の時系列デ
ータとして保有される。
【００５６】動きベクトル算出回路８は、上記ＳＤ画像
信号の動きベクトル（ｖSx、ｖSy）と、上記ＨＤ画像信
号の動きベクトル（ｖHx、ｖHy）を算出する。これらの
動きベクトルは、ブロックマッチング法のフルサーチで
求めるものとする。
信号の動きベクトル（ｖSx、ｖSy）と、上記ＨＤ画像信
号の動きベクトル（ｖHx、ｖHy）を算出する。これらの
動きベクトルは、ブロックマッチング法のフルサーチで
求めるものとする。
【００５７】この動きベクトル算出回路８で算出された
動きベクトル（ｖSx、ｖSy）及び（ｖHx、ｖHy）は、時
系列値記憶部９に供給され、該時系列値記憶部９にて一
定時間分の時系列データとして保有される。
動きベクトル（ｖSx、ｖSy）及び（ｖHx、ｖHy）は、時
系列値記憶部９に供給され、該時系列値記憶部９にて一
定時間分の時系列データとして保有される。
【００５８】時間方向マッチング回路１０は、上記時系
列値記憶部３、５、７及び９にて保有している各種特徴
量の時系列データを用いて、マッチングによるタイミン
グ一致検出を行う。この時間方向マッチング回路１０の
タイミング一致検出処理を図６のフローチャートを参照
しながら説明する。
列値記憶部３、５、７及び９にて保有している各種特徴
量の時系列データを用いて、マッチングによるタイミン
グ一致検出を行う。この時間方向マッチング回路１０の
タイミング一致検出処理を図６のフローチャートを参照
しながら説明する。
【００５９】先ず、ステップＳ１では、時系列値記憶部
３、５、７及び９に記憶された各特徴量の時系列データ
から時系列変動を算出する。例えば、ＳＤ画像信号の時
系列変動は、図７の（Ａ）に示すようになる。また、例
えば、ＨＤ画像信号の時系列変動は、図７の（Ｂ）に示
すようになる。
３、５、７及び９に記憶された各特徴量の時系列データ
から時系列変動を算出する。例えば、ＳＤ画像信号の時
系列変動は、図７の（Ａ）に示すようになる。また、例
えば、ＨＤ画像信号の時系列変動は、図７の（Ｂ）に示
すようになる。
【００６０】次に、ステップＳ２では、図７の（Ａ）に
示したようなＳＤ画像信号の時系列変動における一定の
時間幅Ｔ内のある時間分のデータ列を対象データ列とし
て設定し、図７の（Ｂ）に示したようなＨＤ画像信号の
時系列変動における時間幅Ｔ内で上記対象データ列より
も多くデータをとるような範囲を探索範囲ＳHとして設
定し、上記探索範囲ＳHから上記対象データ列と同数の
データ列を参照する。
示したようなＳＤ画像信号の時系列変動における一定の
時間幅Ｔ内のある時間分のデータ列を対象データ列とし
て設定し、図７の（Ｂ）に示したようなＨＤ画像信号の
時系列変動における時間幅Ｔ内で上記対象データ列より
も多くデータをとるような範囲を探索範囲ＳHとして設
定し、上記探索範囲ＳHから上記対象データ列と同数の
データ列を参照する。
【００６１】ステップＳ３では、探索範囲ＳH内で上記
対象データ列と同数のデータ列の探索が終了したか否か
を判定する。ここでの探索に対しては、その都度ステッ
プＳ４及びステップＳ５に示す処理が行われ、最適位置
が決定されていく。そして、最終的に探索が終了する
と、ステップＳ６に進んでタイミング一致画像を出力す
る。
対象データ列と同数のデータ列の探索が終了したか否か
を判定する。ここでの探索に対しては、その都度ステッ
プＳ４及びステップＳ５に示す処理が行われ、最適位置
が決定されていく。そして、最終的に探索が終了する
と、ステップＳ６に進んでタイミング一致画像を出力す
る。
【００６２】ステップＳ３で探索が終了していないとさ
れると、ステップＳ４に進んで相関係数による評価が行
われる。
れると、ステップＳ４に進んで相関係数による評価が行
われる。
【００６３】例えば、上記（１）及び（２）式で示した
平均輝度値ｍS及びｍHが、図７の（Ａ）及び（Ｂ）に示
したようにレベルＤ1及びＤ2の高さを除けば、その波形
がほぼ同じである場合、その波形の形状のみを比較する
だけでマッチングをとることができる。これは、標準偏
差σ、フレーム間差分Δについても同様である。しか
し、上記平均輝度ｍ、標準偏差σ、フレーム間差分Δが
図８の（Ａ）及び（Ｂ）に示すように、時間と共にそれ
ぞれ変化する場合には、ＳＤ画像信号とＨＤ画像信号の
特性の違いからそのマッチングをとるのが難しくなる。
そこで、本実施例では、各特徴量を正規化して評価を行
う。正規化を行える評価関数として、ステップＳ４では
相関係数を用いている。この評価関数ＮＣＣＦ（ｉ）
は、
平均輝度値ｍS及びｍHが、図７の（Ａ）及び（Ｂ）に示
したようにレベルＤ1及びＤ2の高さを除けば、その波形
がほぼ同じである場合、その波形の形状のみを比較する
だけでマッチングをとることができる。これは、標準偏
差σ、フレーム間差分Δについても同様である。しか
し、上記平均輝度ｍ、標準偏差σ、フレーム間差分Δが
図８の（Ａ）及び（Ｂ）に示すように、時間と共にそれ
ぞれ変化する場合には、ＳＤ画像信号とＨＤ画像信号の
特性の違いからそのマッチングをとるのが難しくなる。
そこで、本実施例では、各特徴量を正規化して評価を行
う。正規化を行える評価関数として、ステップＳ４では
相関係数を用いている。この評価関数ＮＣＣＦ（ｉ）
は、
【００６４】
【数７】
【００６５】となる。ここで、Ｎは有効領域の画素数を
表す。また、ＸSはＳＤ画像信号の平均輝度値ｍS、標準
偏差σS、フレーム間差分ΔSを、ＸHはＨＤ画像信号の
平均輝度値ｍH、標準偏差σH、フレーム間差分ΔHを表
している。したがって、（７）式に示す評価関数ＮＣＣ
Ｆ（ｉ）は、平均値、標準偏差、フレーム間差分の特徴
量について適用される。
表す。また、ＸSはＳＤ画像信号の平均輝度値ｍS、標準
偏差σS、フレーム間差分ΔSを、ＸHはＨＤ画像信号の
平均輝度値ｍH、標準偏差σH、フレーム間差分ΔHを表
している。したがって、（７）式に示す評価関数ＮＣＣ
Ｆ（ｉ）は、平均値、標準偏差、フレーム間差分の特徴
量について適用される。
【００６６】なお、動きベクトルの評価には、別の評価
関数が必要とされる。動きベクトルの正規化は、それぞ
れの有効領域の水平、垂直画素数の比で行われる。すな
わち、この評価関数ＶＮＲＭは、
関数が必要とされる。動きベクトルの正規化は、それぞ
れの有効領域の水平、垂直画素数の比で行われる。すな
わち、この評価関数ＶＮＲＭは、
【００６７】
【数８】
【００６８】となる。ここで、Ｍは有効領域の水平、垂
直画素数の比である。また、ｖx (t)はＳＤ画像信号又は
ＨＤ画像信号のｔフレームにおけるｘ方向の動きベクト
ルを表し、ｖx (t-1)はＳＤ画像信号又はＨＤ画像信号の
（ｔー１）フレームにおけるｘ方向の動きベクトルを表
す。また、ｖy (t)はＳＤ画像信号又はＨＤ画像信号のｔ
フレームにおけるｙ方向の動きベクトルを表し、ｖy
(t-1)はＳＤ画像信号又はＨＤ画像信号の（ｔー１）フ
レームにおけるｙ方向の動きベクトルを表す。
直画素数の比である。また、ｖx (t)はＳＤ画像信号又は
ＨＤ画像信号のｔフレームにおけるｘ方向の動きベクト
ルを表し、ｖx (t-1)はＳＤ画像信号又はＨＤ画像信号の
（ｔー１）フレームにおけるｘ方向の動きベクトルを表
す。また、ｖy (t)はＳＤ画像信号又はＨＤ画像信号のｔ
フレームにおけるｙ方向の動きベクトルを表し、ｖy
(t-1)はＳＤ画像信号又はＨＤ画像信号の（ｔー１）フ
レームにおけるｙ方向の動きベクトルを表す。
【００６９】そして、タイミング一致検出の精度を向上
させるため、上記特徴量、すなわち平均輝度値ｍ、標準
偏差σ、フレーム間差分Δ及び動きベクトルｖの総合的
な判定を行う。上記平均輝度値ｍ、標準偏差σ、フレー
ム間差分Δの評価値は、最大値が１であり、１に近い程
最適解となる。例えば、上記平均輝度値ｍ、標準偏差
σ、フレーム間差分Δの評価値が図８の（Ａ）に示すよ
うな場合、評価値は１に近づくので相関があるという。
一方、図８の（Ｂ）に示すような場合には、評価値は１
から遠ざかるので、相関がないという。一方、動きベク
トルｖは評価値が小さい程最適となる。このため、図９
の（Ａ）と図９の（Ｂ）の間では、ＳＤ画像信号とＨＤ
画像信号の動きベクトルｖの評価値が小さくなり、マッ
チングしていると判定する。一方、図１０の（Ａ）と図
１０の（Ｂ）の間では、ＳＤ画像信号とＨＤ画像信号の
動きベクトルｖの評価値が大きくなり、マッチングして
いないと判定する。例えば、図９の（Ａ）のＳＤ画像信
号の一つの画素の動きベクトルが（２、３）であり、こ
の画素に対応するＨＤ画像信号の図９の（Ｂ）の画素の
動きベクトルも（２、３）であれば、上記（８）式のＶ
ＮＲＭは０となる。一方、図１０の（Ａ）のＳＤ画像信
号の一つの画素の動きベクトルが（１、２）であり、こ
の画素に対応するＨＤ画像の画素の動きベクトルは
（０、０）であり、全く対応しないＨＤ画像の画素の動
きベクトルが（−１、−２）であるときには、ＶＮＲＭ
は１０となってしまう。
させるため、上記特徴量、すなわち平均輝度値ｍ、標準
偏差σ、フレーム間差分Δ及び動きベクトルｖの総合的
な判定を行う。上記平均輝度値ｍ、標準偏差σ、フレー
ム間差分Δの評価値は、最大値が１であり、１に近い程
最適解となる。例えば、上記平均輝度値ｍ、標準偏差
σ、フレーム間差分Δの評価値が図８の（Ａ）に示すよ
うな場合、評価値は１に近づくので相関があるという。
一方、図８の（Ｂ）に示すような場合には、評価値は１
から遠ざかるので、相関がないという。一方、動きベク
トルｖは評価値が小さい程最適となる。このため、図９
の（Ａ）と図９の（Ｂ）の間では、ＳＤ画像信号とＨＤ
画像信号の動きベクトルｖの評価値が小さくなり、マッ
チングしていると判定する。一方、図１０の（Ａ）と図
１０の（Ｂ）の間では、ＳＤ画像信号とＨＤ画像信号の
動きベクトルｖの評価値が大きくなり、マッチングして
いないと判定する。例えば、図９の（Ａ）のＳＤ画像信
号の一つの画素の動きベクトルが（２、３）であり、こ
の画素に対応するＨＤ画像信号の図９の（Ｂ）の画素の
動きベクトルも（２、３）であれば、上記（８）式のＶ
ＮＲＭは０となる。一方、図１０の（Ａ）のＳＤ画像信
号の一つの画素の動きベクトルが（１、２）であり、こ
の画素に対応するＨＤ画像の画素の動きベクトルは
（０、０）であり、全く対応しないＨＤ画像の画素の動
きベクトルが（−１、−２）であるときには、ＶＮＲＭ
は１０となってしまう。
【００７０】ここで、行われる上記特徴量、すなわち平
均輝度値ｍ、標準偏差σ、フレーム間差分Δ及び動きベ
クトルｖの総合的な判定は、動きベクトルｖと他の特徴
量との正規化を必要とする。
均輝度値ｍ、標準偏差σ、フレーム間差分Δ及び動きベ
クトルｖの総合的な判定は、動きベクトルｖと他の特徴
量との正規化を必要とする。
【００７１】平均輝度値ｍ、標準偏差σ、フレーム間差
分Δ及び動きベクトルｖの評価値をそれぞれ、Ｅm、
ＥS、Ｅf及びＥvとすると、総合評価値ＥＳＴＭは、
分Δ及び動きベクトルｖの評価値をそれぞれ、Ｅm、
ＥS、Ｅf及びＥvとすると、総合評価値ＥＳＴＭは、
【００７２】
【数９】
【００７３】となる。ただし、Ｅv（ＭＩＮ）は出現し
たＥvの中の最小値で評価する。
たＥvの中の最小値で評価する。
【００７４】そして、ステップＳ５に進み、最適位置を
決定し、ステップＳ３の探索終了がＹＥＳと判断される
まで、ステップＳ３からステップＳ５が繰り返される。
決定し、ステップＳ３の探索終了がＹＥＳと判断される
まで、ステップＳ３からステップＳ５が繰り返される。
【００７５】ステップＳ３の探索終了判断がＹＥＳとな
ると、ステップＳ６に進み、上記（９）式が最大となる
位置がタイミング一致の開始点となるように画像記録装
置１２が探索範囲ＳH内でＨＤ画像データを読み出し、
タイミングが一致した画像が出力される。
ると、ステップＳ６に進み、上記（９）式が最大となる
位置がタイミング一致の開始点となるように画像記録装
置１２が探索範囲ＳH内でＨＤ画像データを読み出し、
タイミングが一致した画像が出力される。
【００７６】以上より、本実施例の画像のタイミング一
致検出装置は、入力系統の異なる画像撮像装置で撮像し
たＳＤ画像とＨＤ画像において、タイムコードによるタ
イミング合わせが行えない場合、画像の特徴量を抽出
し、その時間変動を時系列データとして保有し、互いの
時系列データのマッチングをとることでタイミングの合
った位置を検出することができる。
致検出装置は、入力系統の異なる画像撮像装置で撮像し
たＳＤ画像とＨＤ画像において、タイムコードによるタ
イミング合わせが行えない場合、画像の特徴量を抽出
し、その時間変動を時系列データとして保有し、互いの
時系列データのマッチングをとることでタイミングの合
った位置を検出することができる。
【００７７】なお、本発明は、画像フォーマットが一致
している必要はないが、フォーマットが異なる場合、フ
ィールド周波数が異なる場合もあるので、短時間の一定
時間内ではフィールド周波数はほとんど同じであるとい
う仮定に基づいている。
している必要はないが、フォーマットが異なる場合、フ
ィールド周波数が異なる場合もあるので、短時間の一定
時間内ではフィールド周波数はほとんど同じであるとい
う仮定に基づいている。
【００７８】
【発明の効果】本発明に係る画像のタイミング一致検出
方法は、第１の画素数からなる第１の撮像素子が出力す
る第１の画像と第２の画素数からなる第２の撮像素子が
出力する第２の画像との時間方向の一致を検出する画像
のタイミング一致検出方法において、上記第１の画像と
上記第２の画像の単位画像における平均値、標準偏差、
時間差分、動き量の内の少なくとも１つの情報を用い
て、上記画像間の時間方向のタイミングの一致を検出す
るので、タイムコードの記録を不要としながらも、複数
の画像撮像装置を用いて撮像した画像の時間方向のタイ
ミングの一致を検出できる。
方法は、第１の画素数からなる第１の撮像素子が出力す
る第１の画像と第２の画素数からなる第２の撮像素子が
出力する第２の画像との時間方向の一致を検出する画像
のタイミング一致検出方法において、上記第１の画像と
上記第２の画像の単位画像における平均値、標準偏差、
時間差分、動き量の内の少なくとも１つの情報を用い
て、上記画像間の時間方向のタイミングの一致を検出す
るので、タイムコードの記録を不要としながらも、複数
の画像撮像装置を用いて撮像した画像の時間方向のタイ
ミングの一致を検出できる。
【００７９】また、本発明に係る画像のタイミング一致
検出方法は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出方法において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断して上記
画像間の時間方向のタイミングの一致を検出するので、
タイムコードの記録を不要としながらも、画像の時間方
向のタイミングの一致を検出できる。
検出方法は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出方法において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断して上記
画像間の時間方向のタイミングの一致を検出するので、
タイムコードの記録を不要としながらも、画像の時間方
向のタイミングの一致を検出できる。
【００８０】また、本発明に係る画像のタイミング一致
検出装置は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出装置において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断して上記
画像間の時間方向のタイミングの一致を検出するので、
タイムコードの記録を不要としながらも、画像の時間方
向のタイミングの一致を検出できる。
検出装置は、第１の画素数からなる第１の撮像素子が出
力する第１の画像と第２の画素数からなる第２の撮像素
子が出力する第２の画像との時間方向の一致を検出する
画像のタイミング一致検出装置において、上記第１の画
像と上記第２の画像の単位画像における平均値、標準偏
差、時間差分、動き量の時系列変化値に相関係数を用い
た評価を施すと共に、該評価値を総合的に判断して上記
画像間の時間方向のタイミングの一致を検出するので、
タイムコードの記録を不要としながらも、画像の時間方
向のタイミングの一致を検出できる。
【図１】本発明の実施例の画像のタイミング一致検出装
置の概略構成を示すブロック図である。
置の概略構成を示すブロック図である。
【図２】本実施例の画像のタイミング一致検出装置に画
像を供給する２つの画像撮像装置の配置図である。
像を供給する２つの画像撮像装置の配置図である。
【図３】本実施例の画像のタイミング一致検出装置に画
像を供給する２つの画像撮像装置の構成図である。
像を供給する２つの画像撮像装置の構成図である。
【図４】図３に示した２つの画像撮像装置が被写体を撮
像するときに、用いるマーカの模式図である。
像するときに、用いるマーカの模式図である。
【図５】マーカを用いての対象領域設定を説明をするた
めの図である。
めの図である。
【図６】図１に示した本実施例の画像のタイミング一致
検出装置の時間方向マッチング回路の処理を示すフロー
チャートである。
検出装置の時間方向マッチング回路の処理を示すフロー
チャートである。
【図７】ＳＤ画像信号及びＨＤ画像信号の時系列変動を
示す図である。
示す図である。
【図８】ＳＤ及びＨＤ画像の特徴量である平均輝度、標
準偏差及びフレーム間差分の時間特性を示す図である。
準偏差及びフレーム間差分の時間特性を示す図である。
【図９】特徴量の一つである動きベクトルの評価値が小
さい場合を説明するための図である。
さい場合を説明するための図である。
【図１０】特徴量の一つである動きベクトルの評価値が
大きい場合を説明するための図である。
大きい場合を説明するための図である。
２ 平均輝度算出回路 ４ 標準偏差算出回路 ６ フレーム間差分算出回路 ８ 動きベクトル算出回路 ３、５、７、９ 時系列値記憶部 １０ 時間方向マッチング回路
Claims (10)
- 【請求項１】 第１の画素数からなる第１の撮像素子が
出力する第１の画像と第２の画素数からなる第２の撮像
素子が出力する第２の画像との時間方向の一致を検出す
る画像のタイミング一致検出方法において、 上記第１の画像と上記第２の画像の単位画像における平
均値、標準偏差、時間差分、動き量の内の少なくとも１
つの情報を用いて、上記画像間の時間方向のタイミング
の一致を検出することを特徴とする画像のタイミング一
致検出方法。 - 【請求項２】 上記情報は、上記第１の画像と上記第２
の画像の単位画像における平均値、標準偏差、時間差
分、動き量の時系列変化値の内の少なくとも１つである
ことを特徴とする請求項１記載の画像のタイミング一致
検出方法。 - 【請求項３】 上記平均値、標準偏差、時間差分、動き
量の情報には、相関係数を用いた評価が施されることを
特徴とする請求項１記載の画像のタイミング一致検出方
法。 - 【請求項４】 第１の画素数からなる第１の撮像素子が
出力する第１の画像と第２の画素数からなる第２の撮像
素子が出力する第２の画像との時間方向の一致を検出す
る画像のタイミング一致検出方法において、 上記第１の画像と上記第２の画像の単位画像における平
均値、標準偏差、時間差分、動き量の時系列変化値に相
関係数を用いた評価を施すと共に、該評価値を総合的に
判断して上記画像間の時間方向のタイミングの一致を検
出することを特徴とする画像のタイミング一致検出方
法。 - 【請求項５】 第１の画素数からなる第１の撮像素子が
出力する第１の画像と第２の画素数からなる第２の撮像
素子が出力する第２の画像との時間方向の一致を検出す
る画像のタイミング一致検出装置において、 上記第１の画像と上記第２の画像の単位画像における平
均値、標準偏差、時間差分、動き量の内の少なくとも１
つの情報を用いて、上記画像間の時間方向のタイミング
の一致を検出することを特徴とする画像のタイミング一
致検出装置。 - 【請求項６】 上記情報は、上記第１の画像と上記第２
の画像の単位画像における平均値、標準偏差、時間差
分、動き量の時系列変化値の内の少なくとも１つである
ことを特徴とする請求項５記載の画像のタイミング一致
検出装置。 - 【請求項７】 上記平均値、標準偏差、時間差分、動き
量の情報には、相関係数を用いた評価が施されることを
特徴とする請求項５記載の画像のタイミング一致検出装
置。 - 【請求項８】 第１の画素数からなる第１の撮像素子が
出力する第１の画像と第２の画素数からなる第２の撮像
素子が出力する第２の画像との時間方向の一致を検出す
る画像のタイミング一致検出装置において、 上記第１の画像と上記第２の画像の単位画像における平
均値、標準偏差、時間差分、動き量の時系列変化値に相
関係数を用いた評価を施すと共に、該評価値を総合的に
判断して上記画像間の時間方向のタイミングの一致を検
出することを特徴とする画像のタイミング一致検出装
置。 - 【請求項９】 上記第１及び上記第２の撮像素子は、同
じ被写体を撮像することを特徴とする請求の範囲５又は
８記載の画像のタイミング一致検出装置。 - 【請求項１０】 上記被写体には、基準の画素位置を示
すマーカが付されていることを特徴とする請求項９記載
の画像のタイミング一致検出装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP20527794A JP3508225B2 (ja) | 1994-08-30 | 1994-08-30 | 画像のタイミング一致検出方法及び装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP20527794A JP3508225B2 (ja) | 1994-08-30 | 1994-08-30 | 画像のタイミング一致検出方法及び装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0870401A true JPH0870401A (ja) | 1996-03-12 |
| JP3508225B2 JP3508225B2 (ja) | 2004-03-22 |
Family
ID=16504317
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP20527794A Expired - Lifetime JP3508225B2 (ja) | 1994-08-30 | 1994-08-30 | 画像のタイミング一致検出方法及び装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3508225B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007275196A (ja) * | 2006-04-04 | 2007-10-25 | Shimadzu Corp | 光または放射線画像表示装置及びこれを備えた光または放射線撮像装置 |
| JP2012178789A (ja) * | 2011-02-28 | 2012-09-13 | Fujitsu Ltd | 画像処理システムおよび画像処理装置 |
| WO2014208378A1 (ja) * | 2013-06-28 | 2014-12-31 | ソニー株式会社 | 情報処理装置、情報処理方法、プログラム、及び、情報処理システム |
-
1994
- 1994-08-30 JP JP20527794A patent/JP3508225B2/ja not_active Expired - Lifetime
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2007275196A (ja) * | 2006-04-04 | 2007-10-25 | Shimadzu Corp | 光または放射線画像表示装置及びこれを備えた光または放射線撮像装置 |
| JP2012178789A (ja) * | 2011-02-28 | 2012-09-13 | Fujitsu Ltd | 画像処理システムおよび画像処理装置 |
| WO2014208378A1 (ja) * | 2013-06-28 | 2014-12-31 | ソニー株式会社 | 情報処理装置、情報処理方法、プログラム、及び、情報処理システム |
| US10212361B2 (en) | 2013-06-28 | 2019-02-19 | Sony Corporation | Information processing device, information processing method, and information processing system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3508225B2 (ja) | 2004-03-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8189051B2 (en) | Moving object detection apparatus and method by using optical flow analysis | |
| JP3279479B2 (ja) | 映像監視方法及び装置 | |
| CN107707871B (zh) | 图像处理设备、摄像设备、图像处理方法和存储介质 | |
| US7260243B2 (en) | Intruding-object detection apparatus | |
| US20100079624A1 (en) | Image processing apparatus, image processing method, imaging apparatus | |
| JP2001082955A (ja) | ステレオ画像の位置ずれ調整装置 | |
| EP0905977A2 (en) | Image synthesis apparatus | |
| US20050123201A1 (en) | Image processing apparatus for detecting and recognizing mobile object | |
| JP5183152B2 (ja) | 画像処理装置 | |
| JP2940736B2 (ja) | 画像処理装置及びこの画像処理装置における歪み補正方法 | |
| JP2003304561A (ja) | ステレオ画像処理装置 | |
| US20110085026A1 (en) | Detection method and detection system of moving object | |
| KR20160000423A (ko) | 화상처리장치, 그 제어 방법 및 기억매체 | |
| JPH11150676A (ja) | 画像処理装置及び追尾装置 | |
| JP2008174028A (ja) | 対象物検出システム、及び対象物検出方法 | |
| JP3508225B2 (ja) | 画像のタイミング一致検出方法及び装置 | |
| JP2008026999A (ja) | 障害物検出システム、及び障害物検出方法 | |
| JP2009260671A (ja) | 画像処理装置及び撮像装置 | |
| JP3631541B2 (ja) | ステレオ画像による物体の移動追跡方法 | |
| JP3296675B2 (ja) | 被写体追尾装置および被写体追尾方法 | |
| KR20100046544A (ko) | 영상 왜곡 보정 방법 및 장치 | |
| US7990417B2 (en) | Targeted object pursuit system | |
| JP2002027449A (ja) | 移動物体識別方法および移動物体識別装置 | |
| JP2007336125A (ja) | 撮像装置およびその制御方法 | |
| KR100457302B1 (ko) | 영상 처리를 이용한 다채널 자동 트랙킹 및 자동 줌 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20031202 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20031215 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080109 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090109 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100109 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100109 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110109 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110109 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120109 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130109 Year of fee payment: 9 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |