JPH10243341A

JPH10243341A - 画像検出装置及び画像検出方法

Info

Publication number: JPH10243341A
Application number: JP9046668A
Authority: JP
Inventors: Naohisa Arai; 尚久荒井; Masami Tomita; 真巳冨田
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1997-02-28
Filing date: 1997-02-28
Publication date: 1998-09-11
Anticipated expiration: 2017-02-28
Also published as: JP3804155B2

Abstract

(57)【要約】【課題】動画像からコマ落としをして間欠画像を生成
する場合に、内容の把握をしやすい画像検出装置及び画
像検出方法を提供することを目的とする。【解決手段】入力信号処理回路２には、動画像の映像
信号が入力される。画像メモリ３，４は、映像信号をフ
レーム単位つまり画面単位で記憶する。また、画像メモ
リ４は、必ず、画像メモリ３に記憶されている画面から
時間的に１画面前の画面を記憶する。変化量検出回路５
は、画像メモリ３と画像メモリ４とに記憶されている画
面間のデータの差分を演算して変化量を求める。代表画
面検出制御回路６は、画像メモリ３，４の画像データの
変化量と所定の閾値とを比較して代表画面検出を行う。
また、この閾値を動的に変化させて、代表画面として平
均的に画像を検出する処理を行う。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、動画像から間欠画
像を生成する際に用いる画像検出装置及び画像検出方法
に関する。

【０００２】

【従来の技術】映像信号を高速で再生して検索を行いた
い場合や、映像信号を画像をコマ落としで再生して記録
媒体に記録したり伝送したい場合に、一定の時間間隔ご
との画像を再生したり表示したりするための間欠画像の
生成手法が知られている。

【０００３】

【発明が解決しようとする課題】ところが、このように
間欠画像を生成する際に、必ずしも適切な画面が選択さ
れるとは限らない。このため、動画像を間欠画像にする
ことにより、この動画像の内容把握が困難となる場合が
ある。

【０００４】また、記録されている映像のシーンチェン
ジ位置を検出して、映像信号をカット点によって意味の
あるシーンごとに分割して編集する編集用機器などもあ
るが、特殊効果等によりカット点の特徴量の変化が小さ
い場合や光などの特徴量の変化が激しいがカット点では
ない画面の検出等は困難であった。

【０００５】本発明は、このような実情を鑑みてなされ
たものであり、動画像からコマ落としをして間欠画像を
生成する場合や高速再生をする場合に、内容の把握をし
やすい間欠画像及び高速再生画像を検出する画像検出装
置及び画像検出方法を提供することを目的とする。

【０００６】

【課題を解決するための手段】上述の課題を解決するた
めに、本発明に係る画像検出装置は、動画像中の１の画
面である第１の画面と、この第１の画面の直前の第２の
画面との第１の変化量を検出する変化量検出手段と、上
記第１の変化量を第１の閾値と比較し、この第１の変化
量が第１の閾値より大きい場合に上記第１の画面を検出
する画面検出手段と、上記画面検出手段により検出した
第１の画面を検出画面として出力する出力手段とを備え
ることを特徴とする。

【０００７】この画像検出装置では、画面検出手段が動
画像の変化量を第１の閾値と比較して画面を検出し、出
力手段がこの動画像の内容に応じた間欠画像を出力す
る。

【０００８】さらに、本発明に係る画像検出装置は、上
記画面検出手段が、上記第１の変化量が第１の閾値より
小さいときはこの第１の閾値を所定量少なくし、上記第
１の変化量が第１の閾値より大きいときは第１の画面を
検出するとともに第１の閾値を所定量多くすることを特
徴とする。

【０００９】この画像検出装置では、画面検出手段が変
化量の比較をする第１の閾値を可変して画面を検出し、
出力手段が平均的な間欠間隔の間欠画像を出力する。

【００１０】さらに、本発明に係る画像検出装置は、上
記第１の画面と先に検出した検出画面との第２の変化量
を検出する第２の変化量検出手段を備え、上記画面検出
手段が、上記第２の変化量を第２の閾値と比較し、この
第２の変化量がこの第２の閾値より大きい場合にはさら
に上記第１の変化量を第１の閾値と比較し、この第１の
変化量が第１の閾値より小さいときは第１の画面を検出
することを特徴とする。

【００１１】この画像検出装置では、画面検出手段が第
１の変化量と第１の閾値を比較するとともに第２の変化
量を第２の変化量と比較して、変化が収束した場合に画
面を検出し、出力手段が間欠画像を出力する。

【００１２】さらに、本発明に係る画像検出装置は、上
記画面検出手段が、上記第２の変化量が第２の閾値より
小さいときはこの第２の閾値を所定量少なくし、第２の
変化量がこの第２の閾値より大きいと連続して２度判断
した場合にはさらに上記第１の変化量を第１の閾値と比
較し、第１の変化量が第１の閾値より大きいときは第１
の閾値を所定量多くし、第１の変化量が第１の閾値より
小さいときは第１の画面を検出するとともに第２の閾値
を所定量多くすることを特徴とする。

【００１３】この画像検出装置では、画面検出手段が変
化量の比較をする第１及び第２の閾値を可変して画面を
検出し、出力手段が平均的な間欠間隔の間欠画像を出力
する。

【００１４】また、上述の課題を解決するために、本発
明に係る画像検出方法は、動画像中の１の画面である第
１の画面と、この第１の画面の直前の第２の画面との第
１の変化量を検出し、上記第１の変化量を第１の閾値と
比較してこの第１の変化量が第２の閾値より大きい場合
に上記第１の画面を検出し、上記画面検出手段により検
出した第１の画面を検出画面として出力することを特徴
とする。

【００１５】この画像検出方法では、動画像の変化量を
第１の閾値と比較して画面を検出し、この動画像の内容
に応じた間欠画像を出力する。

【００１６】さらに、本発明に係る画像検出方法は、上
記第１の変化量が第１の閾値より小さいときはこの第１
の閾値を所定量少なくし、上記第１の変化量が第１の閾
値より大きいときは第１の画面を検出するとともに第１
の閾値を所定量多くすることを特徴とする。

【００１７】この画像検出方法では、変化量の比較をす
る第１の閾値を可変して画面を検出し、平均的な間欠間
隔の間欠画像を出力する。

【００１８】さらに、本発明に係る画像検出方法は、上
記第１の画面と、先に検出した検出画面との第２の変化
量を検出し、上記第２の変化量を第２の閾値と比較し、
この第２の変化量がこの第２の閾値より大きい場合には
さらに上記第１の変化量を第１の閾値と比較し、この第
１の変化量が第１の閾値より小さいときは第１の画面を
検出することを特徴とする。

【００１９】この画像検出方法では、第１の変化量と第
１の閾値を比較するとともに第２の変化量を第２の変化
量と比較して、変化が収束した場合に画面を検出し、間
欠画像を出力する。

【００２０】さらに、本発明に係る画像検出方法は、上
記第２の変化量が第２の閾値より小さいときはこの第２
の閾値を所定量少なくし、第２の変化量がこの第２の閾
値より大きいと連続して２度判断した場合にはさらに上
記第１の変化量を第１の閾値と比較し、第１の変化量が
第１の閾値より大きいときは第１の閾値を所定量多く
し、第１の変化量が第１の閾値より小さいときは第１の
画面を検出するとともに第２の閾値を所定量多くするこ
とを特徴とする。

【００２１】この画像検出方法では、変化量の比較をす
る第１及び第２の閾値を可変して画面を検出し、平均的
な間欠間隔の間欠画像を出力する。

【００２２】

【発明の実施の形態】以下、本発明の第１の実施の形態
である画像検出装置について、図面を参照しながら説明
する。

【００２３】図１は、本発明の第１の実施の形態である
画像検出装置１のブロック構成図である。画像検出装置
１は、映像信号が入力される入力信号処理回路２と、第
１の画像メモリ３と、第２の画像メモリ４と、各画像メ
モリ３，４に記憶された画像から変化量を検出する変化
量検出回路５と、各画像メモリ３，４及び変化量検出回
路５等を制御して間欠画像を出力する代表画面検出制御
回路６とを備える。

【００２４】このような構成の画像検出装置１は、入力
された動画像である映像信号から間欠画像を生成するた
めに代表画面を検出するものである。

【００２５】この画像検出装置１に入力される映像信号
は、動画像の映像信号であり例えば記録媒体に記録され
ている映像信号や伝送された映像信号である。この映像
信号が入力信号処理回路２に供給される。

【００２６】入力信号処理回路２は、入力された映像信
号を適切な信号レベルに変換する処理、エラー訂正処
理、画像圧縮がされている場合は対応したデコード処
理、また、輝度信号と色信号とに分離する処理等を行
う。すなわち、入力信号処理回路２は、第１，第２の画
像メモリ３，４で画像データを記憶するに適した信号に
変換する処理を行うものである。

【００２７】入力信号処理回路２で処理された映像信号
は、第１の画像メモリ３及び第２の画像メモリ４にフレ
ーム単位、つまり、画面単位で供給される。また、入力
信号処理回路２は、映像信号から同期信号を分離して、
この同期信号を代表画面検出制御回路６に供給する。

【００２８】第１の画像メモリ３は、入力信号処理回路
２から供給された映像信号を画面単位で画像データを記
憶する。同様に、第２の画像メモリ４も、入力信号処理
回路２から供給された映像信号を画面単位の画像データ
として記憶する。

【００２９】また、第１の画像メモリ３と第２の画像メ
モリ４は、その構成は同一であるが、記憶する画像デー
タは異なる。第２の画像メモリ４に記憶される画面は、
必ず、第１の画像メモリ３に記憶されている画面から時
間的に１画面前の画面である。すなわち、第１の画像メ
モリ３と第２の画像メモリ４に記憶されている画面は、
時系列で連続した画面となっている。なお、時間的に先
の画面を第１と第２の画像メモリ３，４に交互に記憶さ
せるようにしてもよい。

【００３０】変化量検出回路５は、第１の画像メモリ３
と第２の画像メモリ４とに記憶されている時間的に連続
した画面間の変化量を検出する。すなわち、この変化量
は、各画像メモリ３，４に記憶されている画像データの
差分を演算することにより求める。また、画面間の動き
ベクトルを求めて変化量としても良い。

【００３１】代表画面検出制御回路６は、変化量検出回
路５により検出した変化量に基づき、間欠画像を構成す
る代表画面を検出する。また、入力信号処理回路２によ
り検出された同期信号に基づき、第１，第２の画像メモ
リ３，４への画像データの書き込みタイミングや読み出
しタイミングの制御も行う。すなわち、代表画面検出制
御回路６は、動画像を構成する時間的に連続した画面を
順次画像メモリ３，４に書き込んでいき、この処理を繰
り返す。

【００３２】代表画面検出制御回路６は、各画像メモリ
３，４に書き込まれている画像データの変化量と閾値と
を比較して代表画面の検出処理を行う。そして、代表画
面検出制御回路６は、この閾値を動的に変化させて、代
表画面として平均的に画面を検出する処理を行う。

【００３３】この代表画面検出制御回路６の制御内容
を、図２に示すフローチャートに基づき説明する。

【００３４】この代表画面検出制御回路６は、映像信号
が入力されると以下のステップＳ１からの処理を開始す
る。

【００３５】ステップＳ１において、閾値の初期化を行
う。この閾値は、変化量検出回路５が検出した第１の画
像メモリ３と第２の画像メモリ４に記憶されている画面
間の変化量と比較をするための値である。この閾値は、
入力される映像信号の付加情報、外部入力、出力する間
欠画像の間欠間隔等に応じて設定される。

【００３６】ステップＳ１で閾値の初期化を終えるとス
テップＳ２において、変化量検出回路５に第１，第２の
画像メモリ３，４に記憶された画面の変化量を演算さ
せ、この変化量を取得する。この演算では、変化量とし
て各画素毎に減算を行いその絶対値を求めている。

【００３７】この変化量を取得するとステップＳ３にお
いて、この変化量を閾値と比較する。変化量が閾値より
大きくないと判断する場合は、ステップＳ４に進み、変
化量が閾値より大きいと判断する場合は、ステップＳ５
に進む。

【００３８】ステップＳ７において、閾値から所定の値
である減算値を引く。そして、ステップＳ４で閾値を一
定量少なくすると、第１，第２の画像メモリ３，４に記
憶する画面を次の画面に更新し、ステップＳ２からの処
理を繰り返す。

【００３９】ステップＳ５において、第１の画像メモリ
３に記憶している画面を代表画面として検出する。そし
て、ステップＳ６において、検出した代表画面を出力す
る。ステップＳ７において、閾値に所定の値である加算
値を加える。そして、ステップＳ４で閾値を一定量多く
すると、第１，第２の画像メモリ３，４に記憶する画面
を次の画面に更新し、ステップＳ２からの処理を繰り返
す。

【００４０】ここで、ステップＳ４で閾値から一定量を
引くために用いている定数である減算値と、ステップＳ
７で閾値から一定量を加えるために用いている定数であ
る加算値の関係について説明する。閾値は、上述したよ
うに動画像を構成する時間的に連続する各画面の変化量
と比較をするための値である。この代表画面検出制御回
路６では、変化量と閾値との比較をして、この比較結果
に応じて閾値を変化させるようになっている。すなわ
ち、閾値の可変量は、代表画面を検出した場合に加算さ
れる加算値と、代表画面を検出しなかった場合に減算さ
れる減算値とにより決定される。この加算値と減算値の
値により、入力される動画像に対する代表画面の検出量
が決まる。例えば、加算値と減算値との比が１対１００
であれば、入力される動画像１００枚に対し代表画面が
一枚検出される。また、この閾値の可変量である加算値
と減算値の絶対量が大きくなれば検出感度も大きく、平
均的に代表画面が検出できる。さらに、可変量が小さけ
れば差分の検出量に応じて代表画面の検出がばらつくこ
とになる。

【００４１】以上のように、第１の実施の形態の画像検
出装置１では、動画像から間欠画像を生成する際に、動
画像を構成する各画面間の変化量に応じて代表画面を検
出する。このことにより、内容把握のしやすい間欠画像
を生成することができる。また、変化量を比較する際に
用いる閾値を可変するので、動画像の特徴に左右されず
に一定の平均レートで生成した間欠画像が得られる。そ
のため、この生成した間欠画像を記録又は伝送する際に
容量の管理が容易となる。

【００４２】さらに、第１の実施の形態の画像検出装置
１は、動画像を高速再生をする際にも用いることがで
き、また、動画像の検索する際の代表的な画面を検出す
る際にも用いることができる。

【００４３】つぎに、本発明の第２の実施の形態である
画像検出装置について、図面を参照しながら説明する。
なお、この第２の実施の形態である画像検出装置を説明
するにあたり、上述した第１の実施の形態の画像検出装
置１と同一の機能を有する構成要素については、同一の
符号を付けその詳細な説明を省略する。以下、第３の実
施の形態においても同様とする。

【００４４】第２の実施の形態である画像検出装置１０
は、図３に示すように、映像信号が入力される入力信号
処理回路２と、第１の画像メモリ３と、第２の画像メモ
リ４と、各画像メモリ３，４に記憶されたから変化量を
検出する変化量検出回路５と、これら構成要素を制御し
て間欠画像を出力する代表画面検出制御回路６と、第１
の画像メモリ３に記憶されている画面の輝度の平均値を
変算する平均値演算回路７とを備える。

【００４５】この第２の実施の形態である画像検出装置
１０では、画面間の変化量だけでなく画面の明るさの変
化を補正して入力された動画像である映像信号から、代
表画面を検出して間欠画像を生成するものである。

【００４６】平均値演算回路７は、変化量検出回路５に
よる画像間の変化量の検出処理を行う前に、予め画像メ
モリ３内の画像データの輝度の平均値を演算するもので
ある。

【００４７】変化量検出回路５は、平均値演算回路７で
演算した画像データの平均値を利用して変化量の検出を
行う。この平均値を利用して変化量を検出するのは、デ
ータとして輝度信号を利用している場合においては、輝
度が高く明るい画面での画素データの値は高く、差分が
大きくなってしまうからである。従って、変化量を輝度
の平均値で除算することで明るさに左右されない代表画
面の検出ができる。また、この輝度の平均値を代表画面
検出制御回路６に供給して、閾値を可変する加算値及び
減算値の比率を変えずにこの加算値及び減算値の値を変
えることにより、明るさに左右されない代表画面の検出
をすることもできる。

【００４８】また、この平均値を演算する際に、画像メ
モリ内の画像データを複数の領域に分けて領域ごとに演
算することで、明るさや、動きが面面内で部分的に偏っ
ている画像にも対応できる。この領域分割をする際画面
の中心部分の領域を小さくするなど画面を均等に分割し
ないことで検出量に重みづけをすることができる。また
分割した領域ごとに値を設定して演算した平均値の係数
とすることで明確な重み付けをすることも可能である。

【００４９】以上のように、第２の実施の形態である画
像検出装置１０では、動画像から間欠画像を生成する際
に、動画像を構成する各画面間の変化量に応じて代表画
面を検出することにより、内容把握のしやすい間欠画像
を生成することができる。また、変化量を比較する際に
用いる閾値を可変するので、動画像の特徴に左右されず
に一定の平均レートで生成した間欠画像が得られる。そ
のため、この生成した間欠画像を記録又は伝送する際に
容量の管理が容易となる。

【００５０】また、この第２の実施の形態では、画面間
の変化量だけでなく画面の明るさの変化を補正して入力
された動画像である映像信号から代表画面を検出して間
欠画像を生成することにより、画像の明るさの変化によ
る間欠画像の検出結果の変動を減少させることができ
る。

【００５１】つぎに、本発明の第３の実施の形態である
画像検出装置について、図面を参照しながら説明する。

【００５２】図４は、第３の実施の形態の画像検出装置
２０のブロック構成図である。画像検出装置２０は、映
像信号が入力される入力信号処理回路２と、第１の画像
メモリ３と、第２の画像メモリ４と、第３の画像メモリ
８と、第１，第２の画像メモリ３，４に記憶された画面
から変化量を検出する第１の変化量検出回路５と、第
１，第３の画像メモリ３，８に記憶された画面から変化
量を検出する第１の変化量検出回路９と、これら構成要
素を制御して間欠画像を出力する代表画面検出制御回路
１１とを備える。

【００５３】代表画面検出制御回路１１は、第１の変化
量検出手段により検出した変化量と、第２の変化量検出
回路９により検出した変化量に基づき、間欠画像を構成
する代表画面を検出する。また、入力信号処理回路２に
より検出された同期信号に基づき、第１，第２及ぶ第３
の画像メモリ３，４，８への画像の書き込みタイミング
や読みだしタイミングの制御も行う。

【００５４】また、代表画面検出制御回路１１は、各画
像メモリ３，４，８に書き込まれている画像データの変
化量と閾値とを比較して代表画面の検出処理を行う。そ
して、代表画面検出制御回路１１は、この閾値を動的に
変化させて、代表画面として平均的に画面を検出する処
理を行う。

【００５５】第３の画像メモリ８には、代表画面検出制
御回路１１が検出した代表画面が記憶される。代表画面
検出制御回路１１は、代表画面を検出して間欠画像を生
成するが、この代表画面を検出したときは出力するとと
もに第３の画像メモリ８にこの代表画面を記憶させる。
なお、第３の画像メモリ８には、かならず１つの代表画
面のみが記憶されており、先に記憶された代表画面に次
の代表画面が記憶されるときは、先の代表画面に上書き
される。

【００５６】第２の変化量検出回路９は、第１の画像メ
モリ２が記憶している画面と第３の画像メモリ８が記憶
している代表画面の画面間の変化量を検出する。

【００５７】この代表画面検出制御回路１１の制御内容
を、図５に示すフローチャートに基づき説明する。

【００５８】まず、図５に示すフローチャートでの制御
に用いられている各変数について説明する。

【００５９】代表画面検出制御回路１１の制御には、第
１の閾値と第２の閾値とが用いられている。第１の閾値
は、第１の変化量検出回路５が検出した画像間の変化量
と比較を行うための値であり、また、第２の閾値は、第
２の変化量検出回路９が検出した第１の画像メモリ３と
第３の画像メモリ８とに記憶された画面間の変化量の比
較を行うための値である。

【００６０】代表画面検出制御回路１１の制御では、第
２の閾値から一定量を引くために用いている定数である
減算値と、閾値から一定量を加えるために用いている定
数である加算値が用いられている。減算値と加算値と関
係は、上述した第１の実施の形態と同様である。

【００６１】代表画面検出制御回路１１の制御では、連
続検出フラグを用いている。この連続検出フラグは、第
２の変化量検出回路９により画面間の差分検出によって
閾値を超える画面の入力があった場合にもすぐにこの画
面を検出結果として取り込まず、連続して閾値を超える
差分を検出した場合に画面を検出するために使用する。

【００６２】代表画面検出制御回路１１の制御では、検
出ウエイトを用いている。代表画面検出制御回路１１で
は、一度代表画面を検出すると第１の画像メモリ３と第
３の画像メモリ８に記憶された画面の変化量と比較する
第２の変化量検出回路９が連続して画面を検出しても、
時間的に連続する第１の画像メモリ３と第２の画像メモ
リ４の変化量が減少したのちに取り込みを行うように処
理をしている。しかしながら、連続した動きの激しい動
画像などの場合では、第１の閾値が減少しないため代表
画面の検出出力が発生しなくなってしまう。そのため、
この検出ウエイトにより第１の閾値を操作して動きの激
しい動画像に対応させている。

【００６３】代表画面検出制御回路１１は、ステップＳ
１１において、閾値等の各変数の設定値の初期化を行
う。この閾値は、入力される動画像の付加情報、外部入
力、出力する間欠画像の間欠間隔等に応じて設定しても
良い。また、この閾値の変化量も同様に設定しても良
い。

【００６４】ステップＳ１１で初期化を終えるとステッ
プＳ１２において、第２の変化量検出回路９に第１，第
３の画像メモリ３，８に記憶された画面の変化量を演算
させ、第２の変化量を取得する。この演算では、変化量
として各画素毎に減算を行いその絶対値を求めている。
なお、第３の画像メモリ８に記憶されている画面は、先
に検出した代表画面が記憶されている。先に、検出した
代表画面が存在しない場合は、例えば、すべての画素値
を０として演算するようにしてもよい。

【００６５】この第２の変化量を取得するとステップＳ
１３において、この第２の変化量と第２の閾値を比較す
る。第２の変化量が第２の閾値より大きくないと判断す
る場合は、ステップＳ１４に進み、第１の変化量が第１
の閾値より大きいと判断する場合は、ステップＳ１８に
進む。

【００６６】第１の変化量が第１の閾値より大きくない
と判断する場合は、ステップＳ１４において連続検出フ
ラグをクリアし、続くステップＳ１５において検出ウエ
イトをクリアし、続くステップＳ１６において第１の閾
値から所定の値である第１の減算値を引く。そして、ス
テップＳ１７において、第１，第２の画像メモリ３，４
に記憶する画面を次の画面に更新し、ステップＳ１２か
らの処理を繰り返す。ステップＳ１３で第１の変化量が
第１の閾値より大きいと判断する場合は、ステップＳ１
８において、連続検出フラグがセットされているかどう
かを判断する。連続検出フラグがセットされていないと
判断する場合は、ステップＳ１９において、連続検出フ
ラグをセットして、上述したステップＳ１５、ステップ
Ｓ１６、ステップＳ１７と進み、ステップＳ１２からの
処理を繰り返す。

【００６７】ステップＳ１８で連続検出フラグがセット
されていると判断する場合は、ステップＳ２０におい
て、第１の変化量検出回路５に第１，第２の画像メモリ
３，４に記憶された画面の変化量を演算させ、この第１
の変化量を取得する。この演算では、変化量として各画
素毎に減算を行いその絶対値を求めている。

【００６８】この第１の変化量を取得するとステップＳ
２１において、この第１の変化量と第１の閾値を比較す
る。この第１の閾値は、第２の変化量より第１の変化量
が減少しているか否かを判断するための比較値で、第２
の閾値よりも小さい値である。また、この第１の閾値
は、第２の閾値と連動した値であることが望ましく、例
えば、第２の閾値をＫとすると、第１の閾値は１/Ｋと
いった値が望ましい。

【００６９】第１の変化量が第１の閾値より小さくない
と判断する場合は、動画像の動きが収束していない。従
って、依然動きが少なくなっていないものとして、ステ
ップＳ２２において、検出ウエイトを第１の閾値に加算
する。この検出ウエイトは、第１の閾値に所定量の値を
加算するものであり、いつまでも、動画像が収束しない
場合であっても、第１の閾値にこの検出ウエイトを加算
することにより適当な画面の間隔で代表画面の検出を行
うようにしている。ステップＳ２２で第１の閾値に検出
ウエイトを加算すると上述したステップＳ１６、ステッ
プＳ１７に進みステップＳ１２からの処理を繰り返す。

【００７０】第１の変化量が第１の閾値より小さいと判
断する場合は、ステップＳ２３に進む。ステップＳ２３
において、第１の画像メモリ３に記憶している画面を代
表画面として検出して代表画面を出力する。また、この
ステップＳ２３において、検出した代表画面を第３の画
像メモリ８に記憶させる。

【００７１】ステップＳ２３で代表画面の検出処理をす
るとステップＳ２４において連続検出フラグをクリア
し、続くステップＳ２５第２の閾値に所定の値である加
算値を加える。次に、ステップＳ１７において、第１，
第２の画像メモリ３，４に記憶する画面を次の画面に更
新し、ステップＳ１２からの処理を繰り返す。

【００７２】このような画像検出装置２０から出力され
る間欠画像について以下に説明する。

【００７３】第１の例は、図６（ａ）に示すようにこの
画像検出装置２０にＡシーンとＢシーンがカット点ｔ₁
で切り替わる動画像が入力された例を示している。

【００７４】この場合は、図６（ｂ）に示すように、第
３の画像メモリ８には図中Ｘ₁で画面Ａのデータが書き
込まれている。このとき第１の画像メモリ３に入力され
る図中Ｘ₂で画面Ｂに切り替わると、第３の画像メモリ
８の画像データとは差分が発生するので第２の閾値より
大きくなる。しかしながら、次の第２の画像メモリ４と
も差分が発生するため代表画面の検出はされない。次
に、第１の画像メモリ３に図中Ｘ₃の画面Ｂが書き込ま
れると、第３の画像メモリ８の画面Ａとは差分が発生
し、第２の画像メモリ４の図中Ｘ₂の画面Ｂとは差分が
発生しないので第１の閾値より小さくなり代表画面が検
出される。よってシーンＡからシーンＢに切り替わった
後の１フレーム後に画面が収束してから検出がされる。

【００７５】第２の例は、図７（ａ）に示すように、こ
の画像検出装置２０に画面Ａの間に例えばフラッシュの
光や雷など閃光である画面Ｂが含まれる動画像が入力さ
れた例を示している。

【００７６】この場合は、図７（ｂ）に示すように、第
３の画像メモリ８には図中Ｙ₁に画面Ａが書き込まれて
いる。図中Ｙ₂で画面Ｂが第１の画像メモリ３に書き込
まれた場合、第３の画像メモリ８及び第２の画像メモリ
４のどちらも差分が発生するため代表画面の検出はされ
ない。また、次の図中Ｙ₃の画面Ａが第１の画像メモリ
３に入力された場合も同様に差分が発生しないため代表
画面の検出はされない。すなわち閃光部分では検出がさ
れない。

【００７７】第３の例は、図８（ａ）に示すように、こ
の画像検出装置２０に特殊効果などの画面が徐々に変化
するフェードやワイプ、パンなどの画面が常に変化して
いる動画像が入力された例を示している。

【００７８】この場合は、図８（ｂ）に示すように、第
３の画像メモリ８には図中Ｚ₁の画面Ａが書き込まれて
いる。次に画面Ｂが第１の画像メモリ３に入力される場
合は、第３の画像メモリ８及び第２の画像メモリ４のど
ちらも差分が発生する。次の画面Ｃ、画面Ｄ、画面Ｅ、
図中Ｚ₂の画面Ｆも差分が発生するため検出はされな
い。次の図中Ｚ₃の画面Ｆでは第２の画像メモリ４との
差分が発生せず、この画面Ｆが代表画面となる。よって
所望の動画像が静止した時点で検出がされる。

【００７９】以上のように、第３の実施の形態の画像検
出装置２０では、動画像から間欠画像を生成する際に、
動画像を構成する各画面間の変化量に応じて代表画面を
検出する。このことにより、内容把握のしやすい間欠画
像を生成することができる。また、変化量を比較する際
に用いる閾値を可変するので、動画像の特徴に左右され
ずに一定の平均レートで生成した間欠画像が得られる。
そのため、この生成した間欠画像を記録又は伝送する際
に容量の管理が容易となる。

【００８０】また、第３の実施の形態の画像検出装置２
０では、先に検出した代表画面との変化量が大きくても
その変化量が収束した後に検出処理を行うため、入力さ
れた動画像である映像信号から代表画面を検出して間欠
画像を生成する際に、画面間の変化等を検出してシーン
の変化点を検出したり、誤検出等の不要な画面の検出を
防ぐことができる。例えば、特殊効果などによる面面切
り替えや閃光などの特殊な画面を検出を防止することが
できる。

【００８１】なお、この第３の実施の形態の画像検出装
置２０では、第１の画像メモリ３と第２の画像メモリ４
を用いて１フレーム分の画像を除去する場合を示した
が、第２の画像メモリ４の他に複数のメモリを用いるこ
とにより複数フレーム分の不要な画像を除去することが
でき、また、第２の画像メモリ４に記憶するフレームを
時間的にずらすことにより複数フレーム分の画像を除去
することができる。

【００８２】次に、本発明を適用した第４の実施の形態
である映像信号記録再生装置について説明する。この第
４の実施の形態である映像信号記録再生装置は、上述し
た第１の画像検出装置１を映像音声信号記録再生装置に
適用したものである。

【００８３】映像音声信号記録再生装置５０は、図９に
示すように、入力された映像信号及び音声信号の入力処
理をする入力信号処理部５１と、入力信号処理部５１に
より処理をした信号から映像信号及び音声信号を再生す
る映像音声信号処理部５２と、映像音声信号処理部５２
により再生した映像信号から間欠画像を生成する画像検
出処理部５５と、映像音声信号処理部５２により再生し
た映像信号に補間処理をする間欠画像処理部５３と、間
欠画像処理部５３により補間処理をした映像信号を出力
する出力信号処理部５４と、映像信号を記録再生するた
めに変復調等の信号処理を行う記録再生信号処理部５６
と、映像音声信号を記録媒体５９に記録再生をする記録
再生部５７と、間欠画像処理部５３と記録再生信号処理
部５６等を制御するシステムコントロール部５８とを備
える。

【００８４】入力される映像音声信号は、例えば動画像
の映像信号と音声信号であり入力信号処理部５１により
信号レベルの変換等の処理をされ映像音声信号処理部５
２に供給される。

【００８５】映像音声信号処理部５２は、入力信号処理
部５１により処理をされた映像信号及び音声信号から以
後の処理で行う際に適した信号に変換する処理を行う。
また、記録再生信号処理部５６からの記録媒体５９から
再生される信号も同様に処理を行う。例えば、エラー訂
正処理や画像圧縮処理をされている場合は対応したデコ
ード処理、また、輝度信号と色信号とに分離する処理等
を行う。映像音声信号処理部５２は、出力する映像信号
を画像検出処理部５５、間欠画像処理部５３、記録再生
信号処理部５６に供給する。

【００８６】画像検出処理部５５は、例えば上述した第
１の実施の形態の画像検出装置１である。この画像検出
処理部５５により動画像から代表画面が検出されて間欠
画像が生成される。この間欠画像は、記録再生信号処理
部５６に供給される。

【００８７】記録再生信号処理部５６は、システムコン
トロール部５８の制御に基づき、記録再生部５７を介し
て記録媒体５９から再生された信号を映像音声信号処理
部５２に供給する為のデータの変換処理を行う。また、
システムコントロール部５８の制御に基づき、映像音声
信号処理部５２から供給される信号を記録媒体５９に記
録させる為のデータの変換処理を行う。

【００８８】記録再生部５７は、記録媒体５９に間欠的
な映像信号及び音声信号を記録し、或いは記録媒体５９
に記録された間欠的な映像信号及び音声信号を再生す
る。

【００８９】間欠画像処理部５３は、記録媒体５９から
再生される間欠画像に補間処理を施す。ここで補間処理
とは、例えば、静止画像を出力する場合、画像メモリを
用いて同じ画像を複数回出力して、動画像のアップコン
バート等を行う処理である。出力信号処理部５４は、映
像信号をモニタにより再生することができるようにする
ため、映像信号のデジタル／アナログ変換処理や増幅処
理等を行う。この出力信号処理部５４からの出力をモニ
タ等に供給することにより、視聴者は内挿処理をされた
映像と音声を視聴することができる。

【００９０】以上のように、映像音声信号記録再生装置
５０は、画像検出処理部５５を備えることにより入力さ
れた動画像から間欠画像を生成して記録することができ
る。なお、この画像検出処理部５５は、上述した第１の
実施の形態の画像検出装置１のみならず、第２及び第３
の実施の形態の画像検出装置１０，２０であってもよ
い。

【００９１】また、この映像信号記憶再生装置５０で
は、映像信号を動画像のまま記録しておき、間欠的な再
生を行うための検出結果を別に記録しておくことによ
り、再生時に間欠画像を生成することができる。そのた
め、この映像音声信号記録再生装置５０では、記録媒体
５９に記録されている映像信号を、例えばダイジェスト
版にして再生し、編集作業等に用いて映像信号の概要の
把握等に役立つ。

【００９２】

【発明の効果】本発明に係る画像検出装置では、画面検
出手段が動画像の変化量を第１の閾値と比較して画面を
検出し、出力手段がこの動画像の内容に応じた間欠画像
を出力することにより、内容の把握し易い間欠画像を生
成することができ、また、高速再生ができる。

【００９３】また、本発明に係る画像検出装置では、画
面検出手段が変化量の比較をする第１の閾値を可変して
画面を検出し、出力手段が平均的な間欠間隔の間欠画像
を出力することにより、画像の特徴に左右されずに間欠
画像を生成することができる。さらに、生成した間欠画
像を記録及び伝送する場合に容量の管理を容易にするこ
とができる。

【００９４】また、本発明に係る画像検出装置では、画
面検出手段が第１の変化量と第１の閾値を比較するとと
もに第２の変化量を第２の変化量と比較して変化が収束
した場合に画面を検出し、出力手段が間欠画像を出力す
ることにより、有効な画面のみの検出をすることがで
き、内容の把握し易い間欠画像を生成することができ
る。

【００９５】また、本発明に係る画像検出装置では、画
面検出手段が変化量の比較をする第１及び第２の閾値を
可変して画面を検出し、出力手段が平均的な間欠間隔の
間欠画像を出力することにより、有効な画面のみの検出
をすることができ、画像の特徴に左右されずに間欠画像
を生成することができる。さらに、生成した間欠画像を
記録及び伝送する場合に容量の管理を容易にすることが
できる。

【００９６】本発明に係る画像検出方法では、動画像の
変化量を第１の閾値と比較して画面を検出し、この動画
像の内容に応じた間欠画像を出力することにより、内容
の把握し易い間欠画像を生成することができ、また、高
速再生ができる。

【００９７】また、本発明に係る画像検出方法では、変
化量の比較をする第１の閾値を可変して画面を検出し、
平均的な間欠間隔の間欠画像を出力することにより、画
像の特徴に左右されずに間欠画像を生成することができ
る。さらに、生成した間欠画像を記録及び伝送する場合
に容量の管理を容易にすることができる。

【００９８】また、本発明に係る画像検出方法では、第
１の変化量と第１の閾値を比較するとともに第２の変化
量を第２の変化量と比較して、変化が収束した場合に画
面を検出し間欠画像を出力することにより、有効な画面
のみの検出をすることができ、内容の把握し易い間欠画
像を生成することができる。

【００９９】また、本発明に係る画像検出方法では、変
化量の比較をする第１及び第２の閾値を可変して画面を
検出し、平均的な間欠間隔の間欠画像を出力することに
より、有効な画面のみの検出をすることができ、画像の
特徴に左右されずに間欠画像を生成することができる。
さらに、生成した間欠画像を記録及び伝送する場合に容
量の管理を容易にすることができる。

【図面の簡単な説明】

【図１】本発明を適用した画像検出装置のブロック構成
図である。

【図２】本発明を適用した画像検出装置の代表画面検出
制御回路の制御内容を示すフローチャートである。

【図３】本発明を適用した画像検出装置のブロック構成
図である。

【図４】本発明を適用した画像検出装置のブロック構成
図である。

【図５】本発明を適用した画像検出装置の代表画面検出
制御回路の制御内容を示すフローチャートである。

【図６】本発明を適用した画像検出装置から出力される
間欠画像についての説明図である。

【図７】本発明を適用した画像検出装置から出力される
間欠画像についての説明図である。

【図８】本発明を適用した画像検出装置から出力される
間欠画像についての説明図である。

【図９】本発明を適用した映像音声信号記録再生装置の
ブロック構成図である。

【符号の説明】

１，１０，２０画像検出装置、２入力信号処理回
路、３第１の画像メモリ、４第２の画像メモリ、５
変化量検出回路、６，１１代表画面検出制御回路、
７平均値演算回路、８第３の画像メモリ、９第２
の変化量検出回路

Claims

【特許請求の範囲】

【請求項１】動画像中の１の画面である第１の画面
と、この第１の画面の直前の第２の画面との第１の変化
量を検出する変化量検出手段と、上記第１の変化量を第１の閾値と比較し、この第１の変
化量が第１の閾値より大きい場合に上記第１の画面を検
出する画面検出手段と、上記画面検出手段により検出した第１の画面を検出画面
として出力する出力手段とを備える画像検出装置。
【請求項２】上記変化量検出手段は、第１の変化量と
して第１の画面と第２の画面との輝度の差分を検出する
ことを特徴とする請求項１に記載の画像検出装置。
【請求項３】上記画面検出手段は、上記第１の変化量
が第１の閾値より小さいときはこの第１の閾値を所定量
少なくし、上記第１の変化量が第１の閾値より大きいと
きは第１の画面を検出するとともに第１の閾値を所定量
多くすることを特徴とする請求項１に記載の画像検出装
置。
【請求項４】上記第１の画面と、先に検出した検出画
面との第２の変化量を検出する第２の変化量検出手段を
備え、上記画面検出手段は、上記第２の変化量を第２の閾値と
比較し、この第２の変化量がこの第２の閾値より大きい
場合にはさらに上記第１の変化量を第１の閾値と比較
し、この第１の変化量が第１の閾値より小さいときは第
１の画面を検出することを特徴とする請求項１に記載の
画像検出装置。
【請求項５】上記画面検出手段は、上記第２の変化量
が第２の閾値より小さいときはこの第２の閾値を所定量
少なくし、第２の変化量が連続してこの第２の閾値より
大きい場合にはさらに上記第１の変化量を第１の閾値と
比較し、第１の変化量が第１の閾値より大きいときは第
１の閾値を所定量多くし、第１の変化量が第１の閾値よ
り小さいときは第１の画面を検出するとともに第２の閾
値を所定量多くすることを特徴とする請求項４に記載の
画像検出装置。
【請求項６】上記検出画面を記録媒体に記録する記録
手段を備えることを特徴とする請求項１に記載の画像検
出装置。
【請求項７】検出した画面を伝送する伝送手段を備え
ることを特徴とする請求項１に記載の画像検出装置。
【請求項８】動画像中の１の画面である第１の画面
と、この第１の画面の直前の第２の画面との第１の変化
量を検出し、上記第１の変化量を第１の閾値と比較してこの第１の変
化量が第２の閾値より大きい場合に上記第１の画面を検
出し、上記画面検出手段により検出した第１の画面を検出画面
として出力することを特徴とする画像検出方法。
【請求項９】第１の変化量として第１の画面と第２の
画面との輝度の差分を検出することを特徴とする請求項
８に記載の画像検出方法。
【請求項１０】上記第１の変化量が第１の閾値より小
さいときはこの第１の閾値を所定量少なくし、上記第１
の変化量が第１の閾値より大きいときは第１の画面を検
出するとともに第１の閾値を所定量多くすることを特徴
とする請求項８に記載の画像検出方法。
【請求項１１】上記第１の画面と、先に検出した検出
画面との第２の変化量を検出し、上記第２の変化量を第２の閾値と比較し、この第２の変化量がこの第２の閾値より大きい場合には
さらに上記第１の変化量を第１の閾値と比較し、この第１の変化量が第１の閾値より小さいときは第１の
画面を検出することを特徴とする請求項８に記載の画像
検出方法。
【請求項１２】上記第２の変化量が第２の閾値より小
さいときはこの第２の閾値を所定量少なくし、第２の変化量が連続してこの第２の閾値より大きい場合
にはさらに上記第１の変化量を第１の閾値と比較し、第１の変化量が第１の閾値より大きいときは第１の閾値
を所定量多くし、第１の変化量が第１の閾値より小さいときは第１の画面
を検出するとともに第２の閾値を所定量多くすることを
特徴とする請求項１１に記載の画像検出方法。
【請求項１３】上記検出画面を記録媒体に記録するこ
とを特徴とする請求項８に記載の画像検出方法。
【請求項１４】上記検出画面を伝送することを特徴と
する請求項８に記載の画像検出方法。