JP3157928B2

JP3157928B2 - 動画像の拾い見装置

Info

Publication number: JP3157928B2
Application number: JP29873792A
Authority: JP
Inventors: 博荒川; 眞藤本
Original assignee: Panasonic Corp; Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Corp; Panasonic Holdings Corp
Priority date: 1992-11-09
Filing date: 1992-11-09
Publication date: 2001-04-23
Anticipated expiration: 2016-04-23
Also published as: JPH06153155A

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ビデオテープレコーダ
（以下ＶＴＲと略す）、ビデオディスクなどの、動画像
の広い見装置に関するものである。

【０００２】

【従来の技術】書籍などの活字メディアに比べて動画メ
ディアは拾い見が行いにくい、という点が指摘されてい
る。動画像の拾い見を容易にするには、内容の同じ場面
を１枚の画像で代表させればよい。これにより短時間で
内容を理解することができる。これを実現するには、場
面の内容の切れ目であるカットを検出できればよい。こ
のような手法の動画像の拾い見装置が、特開昭６４−６
８０８４公報に開示されている。この従来装置は、カッ
ト検出により動画像を内容ごとに分割して各場面とし、
この場面ごとの代表画像を記憶し、記憶代表画像を一画
面に同時に複数表示することによって、動画像の拾い見
を可能にするものである。次に、この装置を説明する。

【０００３】図７に従来の動画像の拾い見装置の構成図
を示す。まず、各構成要素を説明する。動画像再生装置
７０１は、動画像を再生する、ＶＴＲやビデオディスク
などの装置である。フレーム間差異検出部７０２は、動
画像再生装置７０１から入力された入力画像の各点の画
素輝度値のフレーム間での差（以下、フレーム間差分と
略す）を計算する手段である。判定部７０３は、そのフ
レーム間差異検出部７０２から出力された、画像中の各
点のフレーム間差分の絶対値和をもとに、現在の入力画
像と前回の入力画像の間がカットであるかどうかの判定
を行う手段である。代表画像記憶部７０４は、判定部７
０３から現在がカットであるとの信号を受けとった時
に、その時の動画像再生装置７０１からの入力画像を代
表画像として記憶する手段である。画像表示部７０５
は、図８に示すように表示画面を格子状に分割し、それ
ぞれの小長方形内に、代表画像記憶部７０４の代表画像
を縮小して表示することで、複数の画像を１画面に同時
に表示するものである。次に動作を説明する。

【０００４】動画像再生装置７０１は各フレームごとに
画像を再生し、これをフレーム間差異検出部７０２へ出
力する。この再生画像をもとにフレーム間差異検出部７
０２、判定部７０３は上記の動作によりカットを検出す
る。代表画像記憶部７０４は、カットが検出されるとそ
の時の再生画像を記憶し、カットが検出されないと、な
にもしない。以上が動画像再生装置７０１の出力する１
つの再生画像に対する処理であり、順次、動画像再生装
置７０１の出力する再生画像が同様に処理される。そし
て代表画像記憶部７０４に代表画像が１６枚記憶される
と、これを画像表示部７０５に出力する。このようにし
てこの装置を用いれば、動画像から検出したカットによ
り、動画像を異なる場面ごとに分割でき、この結果それ
ぞれの場面を代表する画像を取り出せ、これを見ること
で動画像の拾い見が可能となる。

【０００５】このように従来例は、現フレームと前フレ
ームの違いをフレーム間差分により評価し、この評価結
果を用いカットを検出するものである。

【０００６】

【発明が解決しようとする課題】しかし、この様な従来
の装置では、例えば動き物体が多いシーンではフレーム
間差分が大くなるため、このシーンをカットとして誤検
出する恐れがある。また動き物体が多いシーン以外に
も、物体が変形する場合や、パンニングするカメラによ
り撮影されたシーンのように画面全体が緩やかに移動す
る場合でも、この誤検出は生じる。

【０００７】これを防ぐためにフレーム間差分以外の手
法として、画面全体の色ヒストグラムのフレーム間での
差分を用いた手法も提案されている。しかし、現在と過
去の２点間のデータをもとに判定を行うために、移動物
体の動きにより色が隠れたり新しい色が現れたりする場
合には、誤検出が生じる。また処理の高速化には、処理
画像を間引く方法として、ｎフレーム（n>1）離れた２
枚の画像の差分（以下、間とばし差分）を用いる方法が
有効である。しかしこの場合は２枚の画像の間隔が大き
くなるため、カットでない場合でも差分が大きくなり誤
検出を生じやすい。

【０００８】このように従来手法では、物体の動きなど
の影響でカットを誤検出する場合がある。また従来手法
は、処理の高速化に適さない手法であった。

【０００９】本発明は上記従来の手法の課題を考慮し、
移動物体の影響などによりカットを誤検出することのな
い、または、高速処理可能な、動画像の拾い見装置を提
供することを目的とする。

【００１０】

【課題を解決するための手段】本発明は、入力画像の画
面全体の輝度または色等の画像特徴に関するヒストグラ
ムを特徴量として抽出する特徴量抽出部と、現在の特徴
量と少なくとも１つ以上の過去の前記特徴量を記憶する
特徴量記憶部と、特徴量記憶部に記憶された少なくとも
一つ以上の特徴量を用い入力画像の場面の切れ目である
カットを検出するカット検出部と、カット検出部からの
信号をもとに場面を代表する画像を少なくとも１つ以上
記憶する代表画像記憶部と、代表画像記憶部に記憶され
た代表画像を表示する画像表示部とを備えたものであ
る。

【００１１】

【作用】本発明は、ヒストグラムを特徴量として抽出
し、特徴量記憶手段に記憶された複数の特徴量をもと
に、現在の特徴量の値がそれまでの複数の値と比較して
極端に異なる場合にカットと判断するものである。この
判断のために、同一場面内での特徴量の性質が同じであ
ることを利用する。

【００１２】

【実施例】以下、本発明の実施例について図面を参照し
て説明する。

【００１３】図１は、本発明の第１の実施例である動画
像の拾い見装置の構成図を示すものである。

【００１４】図１において、画像信号入力端子１０１は
画像信号を入力するための端子、特徴抽出部１０２はそ
の入力画像を特徴量に変換する抽出部、特徴量記憶部１
０３はそれら複数の特徴量を記憶する記憶部、カット検
出部１０４は複数の特徴量の時間変化をもとにカットを
検出するための検出部、代表画像記憶部１０５は検出さ
れたカットにより区切られた場面を代表する静止画像を
複数枚記憶する代表画像記憶部、画像表示部１０６は代
表画像を表示する表示部である。

【００１５】次に各構成要素を更に具体的に詳しく説明
する。上記特徴量抽出部１０２が生成する画像の特徴量
は、同一場面では同じ値を示し、異なる場面では違う値
を示す必要がある。また、場面中の物体の移動に対して
安定である必要がある。ここではこのような特徴量とし
てヒストグラムを用いる。ヒストグラムには輝度と色の
ヒストグラムがあり、性能には差異があるものの動作説
明上の違いはないので、以下、輝度の場合のみを説明す
る。特徴量抽出部１０２は入力画像の輝度値ヒストグラ
ムを毎フレームごと求める。求め方は、輝度値の取り得
る値を２５６個の区間に分割し、各輝度区間内の輝度値
を持つ画素の数を、その輝度区間の頻度とする。この処
理では、画面全体の画素が対象となる。このようにして
画面全体での輝度値ヒストグラムを得る。図２にこのヒ
ストグラムの例を示す。図２に於て、２０１は入力画
像、２０３は出力である輝度値ヒストグラム、２０２は
図１の特徴量抽出部１０２と同じものある。この図２を
用い入力画像２０１とヒストグラム２０３の関係を説明
する。入力画像２０１は山と空を背景に人物が写ったシ
ーンで、２０４は"空"で平均輝度値ａ、２０５は"人"で
平均輝度値ｂ、２０６は"山"で平均輝度値ｃである。こ
こで、ａ＞ｂ＞ｃである。このとき、出力である輝度値
ヒストグラム２０３は、輝度値ａ，ｂ，ｃにピークがあ
る、図に示した形状となる。

【００１６】図１における特徴量記憶部１０３は、毎フ
レームごとに求まる輝度値ヒストグラムの内、時間上最
近の１６個を記憶するためのものある。図３に特徴量記
憶部１０３の例を示す。３０２は先入れ先だしのFIFOメ
モリであり、容量は２５６ワード×１６段である。ま
た、０番には入力端子３０１からの最新のヒストグラム
が格納され、１５番には１５フレーム前のヒストグラム
が格納される。また、このメモリ１０３は内部データを
ランダムアクセスできる機能を備え、nフレーム前の輝
度区間iの頻度を読み出すことができる。以後、この値
をh(n,i)と書き、また、ヒストグラムに関して述べるこ
とが明かな場合には、輝度区間iを輝度iと略す。

【００１７】図１におけるカット検出部１０４は、特徴
量記憶部１０３から輝度値ヒストグラムのデータを読み
だし、これらのデータをもとにカットを検出する。検出
手法は以下の通りである。まず、０〜７フレーム前の輝
度ヒストグラムデータをもとに、輝度ヒストグラムの時
間平均を求める。つまり、輝度iごとに頻度の時間平均
をもとめる。これをa₂(i)と書く。また８〜１５フレー
ム前の輝度ヒストグラムデータに対し、同様にしてa
₁(i)を求める。この２つの輝度ヒストグラムの距離差が
一定値（α）以上の時、７フレーム前をカットと判断す
る。距離差Ｌは（数１）で表される。

【００１８】

【数１】

【００１９】上式より、ヒストグラムの形状が異なるほ
ど、各輝度iごとの輝度ヒストグラム差abs（a₁(i)-a
₂(i)）が大きくなるので、距離差は大きくなることがわ
かる。上記の手法により７フレーム前がカットであると
判断した場合、カット検出部１０４は代表画像記憶部１
０５へカット検出信号を出力する。代表画像記憶部１０
５は、静止画像データを１６枚記憶できる記憶装置であ
り、カット検出部１０４からカット検出信号を受け取る
と、その時入力されている画像を１枚記憶する。この
時、記憶した代表画像に、検出順に番号を割り付けてお
く。また図１の画像表示部１０６は、図８に示すように
画面を格子状に１６分割し、それぞれの小長方形に代表
画像記憶部１０５に記憶された静止画像を縮小して表示
する。表示位置は、先ほど代表画像に割り付けた番号と
図８の番号とが一致するようにする。これにより１６枚
の画像を同時に見ることができる。

【００２０】次に図１を用い動作を説明する。

【００２１】画像信号入力端子１０１より順次入力され
る画像データは、特徴量抽出部１０２へ入力され、ここ
でフレーム単位に輝度ヒストグラムが抽出され、これが
特徴量記憶部１０３へ出力される。特徴量記憶部１０３
では、FIFOの働きにより０番のデータが１番へとデータ
がシフトされ（図３参照）、その後０番に特徴量抽出部
１０２からの現フレームのヒストグラムが記憶される。
その後カット検出部１０４が、特徴量記憶部１０３の０
〜１５フレーム前の輝度ヒストグラムをもとに７フレー
ム前がカットであるかどうかを判定する。カットでなけ
れば、何もせずに次の入力画像を処理する。カットの場
合は、カット検出部１０４がカット検出信号を代表画像
記憶部１０５へ出力する。代表画像記憶部１０５はこの
信号を受け取ると、その時の入力画像を記憶する。この
画像は、カット検出部１０４の判定方法により、検出さ
れたカットから数えて８フレーム目の画像であり、これ
を現カットの代表画像とする。その後、順次入力される
画像を同様に処理し、カットを検出し代表画像を記憶し
ていく。このようにして得られた複数の代表画像を画像
表示部１０６により表示する。この複数の画像を同時に
見ることにより、入力された動画像の概略を把握でき、
所望の動画像の拾い見が可能となる。

【００２２】なお、本実施例では入力画像を１フレーム
ごとに処理する場合を説明したが、本手法は入力画像を
ｎフレーム（n>1）ごとに処理しても以下の理由から正
しく動作する。このことを図４を用いて説明する。ま
ず、グラフ４０１、４０２、４０３を用いて従来手法で
はうまく動作しないことを説明し、その後、グラフ４０
４、４０５を用い本実施例ではうまく動作することを説
明する。

【００２３】グラフ４０１は、特徴量としてある色の頻
度を選び、これの時間変化を表わしたものである。また
４０７がカットであり、区間４０６の場面では選んだ色
を持つ移動物体があり、区間４０７の場面では選んだ色
を持つ移動物体が存在しない場面を考える。ここで、移
動物体が人物などの柔軟構造物の場合、歩行により大き
さが周期的に変動する。このため特徴量はグラフ４０１
に示すような変動を示す。また区間４０８では選んだ色
がほとんど存在しないので、小さい一定値を示す。さ
て、このような特徴量に対して従来手法での過去と現在
の２特徴量の差分絶対値を求めた結果をグラフ４０２に
示す。この場合はカットでの値が区間４０６、４０８で
の値に比べて十分大きいので、カット検出用のしきい値
の決定は容易である。ところが、高速処理のために画像
を間引いた場合をグラフ４０３に示す。この場合区間４
０６での特徴量の差が大きくなり、しきい値の決定が困
難になる。なおここでは、特徴量の変動周期とサンプリ
ングの間隔がちょうど一致する場合を図示した。このた
め区間４０６での特徴量の差は一定値となっている。し
かし一般には特徴量の変動周期とサンプリングの間隔は
一致せず、それぞれの周波数の差のビート周波数で変動
する。この場合でも、あるフレームでは大きな値をとる
ため、結局しきい値の決定は困難になる。

【００２４】次に本実施例での動作をグラフ４０４、４
０５を用いて説明する。グラフ４０４は特徴量の時間変
化を表すものであって、さきほどのグラフ４０３と同じ
サンプリング周期でグラフ４０１の特徴量をサンプルし
た結果を黒丸で表している。本実施例での処理は、カッ
ト検出部１０４の説明に書いたように現在から７個前ま
での特徴量の平均と、８個前から１５個前までの特徴量
の平均を求め、これらの差を求め、この値をカット判定
に用いるものである。つまり、８個分の移動平均を求
め、８個離れた移動平均値との差が、カット判定に用い
る値となる。まずグラフ４０４に白丸で移動平均の計算
結果をしめす。図に示すように区間４０６では一定値で
あり、区間４０８に入ると徐々に減少し、一定値に落ち
つく。この結果をもとに特徴量の差を求めると、グラフ
４０５のようになり、適当なしきい値４１０によりカッ
トが検出できる。このように本手法では、区間４０６で
は平均操作により特徴量が一定値で特徴量の差は０とな
るので、物体移動中の区間４０６をカットとして誤検出
することはない。

【００２５】なお、グラフ４０５に示したしきい値４１
０では、真のカットから６個ずれているが、カットの代
表画像として選ぶ画像に関しては同じ場面内であればど
れであってもかまわないと考えている。グラフ４０５で
は、検出カット位置は区間４０８の新しい場面内なので
問題はない。

【００２６】また、カット検出の別手法として、同一カ
ット内での特徴量の安定性を用いる手法がある。次にこ
れを説明する。

【００２７】これは、異なる時間にサンプルされた特徴
量の統計的仮説検定により、カットを検出する方法であ
る。まず仮説は、「同一カット内であれば、０フレーム
での輝度iの頻度h(0,i)と、１〜１５フレームでのそれ
とは、統計的に差異がない」である。この仮説の真偽を
すべての輝度iについて判定し、仮説が偽である場合を
数えこれが一定値以上の時、カットと判定する。次にこ
の仮説検定方法について説明する。まず１フレーム前か
ら１５フレーム前の輝度ヒストグラムを用い、各輝度i
ごとに、頻度の平均と分散の推定値（それぞれμ(i)、
σ(i)）を求める。これは、（数２）のようになる。

【００２８】

【数２】

【００２９】h(0,i)とμ(i)の差が、σ(i)に比べて十分
に大きい場合には、直感的にも仮説は正しくない。つま
り、この輝度i の頻度は、それまでの変動に比べて十分
大きな変化があったと見なせる。このような仮説の真偽
を統計的仮説検定では、以下のように評価する。ここで
輝度値i の、１〜１５フレームでの頻度が正規分布であ
ると仮定すると、仮説が真の時、h(0,i)は平均μ(i)、
標準偏差σ(i)の正規分布に従う。つまり、（h(0,i)-μ
(i)）／σ(i) は平均０、標準偏差１の正規分布とな
る。よって危険率を決めれば正規分布表より棄却域がも
とまり、h(0,i)が棄却域内の時、仮説は棄却される。こ
の結果、現在の入力値はそれまでの値に比べて統計的に
差異があると認められ、カットと判断される。例えば、
両側検定で、危険率約4.5％の時、棄却域はabs（（h(0,
i)-μ(i)）／σ(i)）＞2.0となる。h(0,i) が棄却域に
ある場合は、仮説がほとんどの場合正しくなく、危険率
4.5％で仮説が正しいということになる。このように本
手法は、仮説検定を用い現在の値が過去の値から見て異
常値である場合に、カットと判定する手法である。なお
上記の説明において、現在の値を現在と過去の値の平均
値で置き換えることにより、よりロバストな手法を提供
することができる。

【００３０】図５は本発明の第２の実施例である動画像
の拾い見装置の構成図を示すものである。この装置は１
フレーム単位でのカット位置を検出できるものであり、
概略動作は以下の通りである。第１の実施例に示したカ
ット検出手段により、カットをｎフレーム単位で検出
し、その後フレーム間の特徴量の差を用い１フレーム単
位でカットを検出する。

【００３１】まず各構成要素を説明する。特徴量抽出部
５０２、特徴量記憶部５０３、カット検出部５０４は第
１の実施例の特徴量抽出部１０２、特徴量記憶部１０
３、カット検出部１０４と同じであるので説明を省略す
る。５０１はＶＴＲやビデオディスクなどの動画像再生
装置であって、動画像の開始位置を、各画像に付けられ
たアドレスにより指定できるものである。５０５は各画
素の輝度値のフレーム間での差をもとにカットを検出す
るフレーム間差異検出部であり、これは従来例の図７の
フレーム間差異検出部７０２と同じものである。代表画
像記憶部５０６は、カットの代表画像として静止画像を
複数記憶でき、かつカットごとの画像の開始アドレスと
終了アドレスを内部テーブルに記録するものである。ま
た画像表示部５０７は、第１の実施例の画像表示部１０
６の機能に加えて、代表画像記憶部５０６と動画像再生
装置５０１の画像データを切り替えて表示できるもので
ある。入力端子５０８はユーザのカット選択を入力する
ためのもので、例えば１６個の入力点を持ったタッチパ
ネルである。

【００３２】次に図５を用い本実施例の動作を説明す
る。第１の実施例と同様に、動画像再生装置５０１が順
次出力する再生画像をもとに、特徴量抽出部５０２、特
徴量記憶部５０３、カット検出部５０４がｎフレームご
とのカットを検出する（n>1）。この時特徴量抽出部５
０２はｎフレームごとのデータしか必要としないので、
（n-1）フレーム分の再生画像は不要である。そこで動
画像再生装置５０１に間とばし再生信号を与えること
で、再生にかかる時間を短縮でき、全体としての高速動
作が可能となる。この間とばし再生信号は、代表画像記
憶部５０６が出力する。さてカット検出部５０４がカッ
トを検出すると、カット検出信号を代表画像記憶部５０
６へ送る。代表画像記憶部５０６はこの信号を受け取る
と、その時の再生画像を検出したカットから始まる場面
の代表画像として記憶する。ここまでは第１の実施例と
同様であるが、このあと代表画像記憶部５０６は、１フ
レーム単位のカット位置を検出するために以下の動作を
行う。まず、カット検出部５０４が検出したカット位置
から逆方向に画像を再生するように動画像再生装置５０
１に指示を与える。そして再生画像はフレーム間差異検
出部５０５に順次入力され、フレーム間差分にもとづき
カットが検出される。カットが検出されるまで、逆方向
の再生が続けられる。そしてカットが検出されると、そ
の時の再生画像の位置を表すアドレスが、それまでの場
面の終了アドレスかつ新しい場面の開始アドレスとして
代表画像記憶部５０６の内部テーブルに記憶される。こ
の時、カットの検出順に代表画像に番号を割り当ててお
く。その後、代表画像記憶部５０６は動画像再生装置５
０１に再びｎフレームごとの間とばし再生を指示し、次
のカット検出を再開する。このようにして代表画像記憶
部５０６は、カットの開始アドレス、終了アドレスを求
め、カットごとの代表画像と共に内部テーブルに記憶す
る。そしてカットの代表画像が１６枚求まると、画像表
示部５０７はこれらを表示する。表示方法は、第１の実
施例同様に画面を格子状に１６分割し、それぞれにカッ
トの代表画像を縮小表示する。ここでユーザは、表示さ
れた代表画像を見て、詳しく見たい場面の代表画像を選
択する。この選択情報は入力端子５０８から入力され
る。入力端子５０８には、例えば表示画面のブラウン管
にとりつけられたタッチパネルなどを用いる。この場合
入力端子５０８の出力は、図８の番号のうち、タッチパ
ネルが押された場所の番号である。例えば、右下すみが
押されると値１６が出力され、この時は１６番の代表画
像が指定されたことになる。さて、入力端子５０８によ
り指定されたカットの番号を代表画像記憶部５０６が受
け取ると、この番号から、内部テーブルをもとに選択場
面の開始・終了アドレスを求め、この値を用い動画像再
生装置５０１に指定場面の再生指示を与える。このよう
にして、ユーザの指定したの場面の始めから終わりまで
の再生が可能となる。

【００３３】図６は本発明の第３の実施例である動画像
の拾い見装置の構成図を示すものである。本実施例はカ
ット単位での動画像の早送り／巻戻し可能な動画像の拾
い見装置に関するものであって、ユーザの指示により再
生画像を場面ごとに早送り／巻き戻しすることにより、
すばやく次の場面を提示できる装置を提供するためのも
のである。まず、各構成要素を説明する。なお以下で
は、早送りの場合について説明するが、巻き戻しの場合
の説明は、以下で早送りを巻き戻しに置き換えたものと
なるので、その説明を省略する。

【００３４】特徴量抽出部６０２、特徴量記憶部６０３
は第１の実施例の特徴量抽出部１０２、特徴量記憶部１
０３と同じであるので説明を省略する。６０１はＶＴＲ
やビデオディスクなどの動画像再生装置であって、ｎフ
レーム単位での間どばし再生が可能なものである。６０
７はユーザからの早送り開始の指示を入力するための入
力端子である。６０６は動画像再生装置の再生速度を変
更するための間とばし再生信号を出力する制御部であ
る。６０４は、第１の実施例同様に複数の特徴量の時間
変化をもとにカットを検出するカット検出部６０４であ
るが、カットを検出した場合に制御部６０６に早送り停
止信号を送る機能が追加されたものである。画像表示部
６０５は動画像再生装置の再生画像を表示するものであ
る。

【００３５】次に、図６を用い上記実施例の動作を説明
する。入力端子６０７でのユーザからの早送り開始指示
は制御部６０６に伝えられる。この時制御部６０６は画
像を早送りするために、ｎフレーム単位（n>1）での間
とばし再生指示を動画像再生装置６０１に出力する。こ
の指示を受け取った動画像再生装置６０１はｎフレーム
ごとの間とばし再生画像を順次出力する。この間とばし
再生画像をもとに特徴量抽出部６０２、特徴量記憶部６
０３、カット検出部６０４は、第１の実施例と同様にし
てカットを検出する。さてカット検出部６０４は、カッ
トを検出すると制御部６０６へ早送り停止信号を送る。
この信号を受けた制御部６０６は、間とばし再生指示の
出力を止め、通常速度での再生指示を動画像再生装置６
０１へ送る。このようにしてカットまで画像が早送りさ
れる。つまり次の場面の始めまで早送りされたことにな
り、しかもこの後、通常速度の再生状態となる。このよ
うにしてこの実施例の動画像の拾い見装置を用いれば、
場面ごとに通常の再生速度で画像を見、必要に応じて現
在の場面を早送りすることができ、効率よく動画像の拾
い見が可能となる。

【００３６】なお、本発明の各部は、コンピュータを用
いてソフトウェア的に実現し、あるいはそれら各機能を
有する専用のハード回路を用いて実現する事が出来る。

【００３７】

【発明の効果】以上述べたところから明らかなように、
本発明は、物体の移動、変形シーンや画面全体の緩やか
な移動シーンをカットとして誤検出することのない長所
を有する。

【００３８】又、本発明は、第２実施例で示したよう
に、高速にフレーム単位での正確なカット位置を検出で
きる長所を有する。

【００３９】又、本発明は、第３の実施例で示したよう
に、場面ごとの高速早送りにも応用可能である。

【図面の簡単な説明】

【図１】本発明の第１の実施例である、動画像の拾い見
装置の構成図である。

【図２】特徴量抽出部の入出力例を示す図である。

【図３】特徴量記憶部を説明するための図である。

【図４】本発明の第１の実施例を説明するための図であ
る。

【図５】本発明の第２の実施例である、動画像の拾い見
装置の構成図である。

【図６】本発明の第３の実施例である、動画像の拾い見
装置の構成図である。

【図７】従来例の動画像拾い見装置の構成図である。

【図８】従来例の動画像拾い見装置を説明するための図
である。

【符号の説明】

１０１画像信号入力端子１０２特徴量抽出部１０３特徴量記憶部１０４カット検出部１０５代表画像記憶部１０６画像表示部

───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04N 5/76 - 5/956

Claims

(57)【特許請求の範囲】

【請求項１】入力画像の画面全体の、輝度、色等の所定
の画像特徴のヒストグラムを特徴量として抽出する特徴
量抽出部と、現在の前記特徴量と少なくとも１つ以上の
過去の前記特徴量を記憶する特徴量記憶部と、前記特徴
量記憶部に記憶された少なくとも一つ以上の前記特徴量
を用い、前記入力画像の各場面の切れ目であるカットを
検出するカット検出部と、前記カット検出部からの信号
をもとに前記場面を代表する画像を少なくとも１つ以上
記憶する代表画像記憶部と、前記代表画像記憶部に記憶
された代表画像を表示する画像表示部とを備えたことを
特色とする動画像の拾い見装置。
【請求項２】入力画像の特徴量を抽出する特徴量抽出部
と、現在の前記特徴量と少なくとも１つ以上の過去の前
記特徴量を記憶する特徴量記憶部と、前記特徴量記憶部
に記憶された前記特徴量を用い、現在の前記特徴量を少
なくとも１つ以上の過去の前記特徴量により統計的仮説
検定を行うことで現在の前記特徴量が過去の前記特徴量
の統計的性質からみて異常値である時を検出し、この時
を前記入力画像の場面の切れ目であるカットとしカット
検出信号を出力するカット検出部と、前記カット検出部
からの前記カット検出信号をもとに場面を代表する画像
を少なくとも一つ以上記憶する代表画像記憶部と、前記
代表画像記憶部に記憶された代表画像を表示する画像表
示部とを備えたことを特色とする動画像の拾い見装置。
【請求項３】画像の再生位置を指定可能な動画像再生部
と、前記動画像再生部の出力する再生画像の特徴量を抽
出する特徴量抽出部と、現在の前記特徴量と少なくとも
１つ以上の過去の前記特徴量を記憶する特徴量記憶部
と、前記特徴量記憶部に記憶された前記特徴量を用い入
力画像の場面の切れ目であるカットを検出するカット検
出部と、前記動画像再生部の出力する再生画像のフレー
ム間での特徴量の差をもとにカットを検出するフレーム
間差異検出部と、前記カット検出部がカットを検出した
時点から前方向または後方向に画像を再生するように前
記動画像再生部に指示を与え、その後の再生画像をもと
に前記フレーム間差異検出部がカットを検出した時の再
生画像の位置を記憶する代表画像記憶部と、ユーザによ
る場面選択のための入力部と、前記動画像再生部と前記
代表画像記憶部からの画像信号を選択して表示する画像
表示部とを備え、前記代表画像記憶部が前記入力部から
のユーザ選択場面を再生するように前記動画像再生部に
指示を与えることによりユーザの選択した場面を再生す
ることを特色とする動画像の拾い見装置。
【請求項４】少なくとも１フレームごとの間とばし再生
の機能を有する動画像再生部と、前記動画像再生部の出
力する再生画像の特徴量を抽出する特徴量抽出部と、現
在の前記特徴量と少なくとも１つ以上の過去の前記特徴
量を記憶する特徴量記憶部と、前記特徴量記憶部に記憶
された少なくとも一つ以上の前記特徴量を用い入力画像
の場面の切れ目であるカットを検出するカット検出部
と、前記動画像再生部の出力する再生画像を表示するた
めの画像表示部と、ユーザの早送り指示を入力するため
の入力部と、前記動画像再生部の再生速度を変更するた
めの間とばし再生信号を出力する制御部とを備え、前記
入力部からの早送り指示により前記制御部が前記動画像
再生部に間飛ばし再生を指示し、この間飛ばし再生指示
により前記動画像再生部が出力する間とばし再生画像か
ら前記特徴量抽出部が特徴量を抽出し、前記特徴量を再
生画像ごとに前記特徴量記憶部に記憶し、この少なくと
も一つ以上の前記特徴量をもとに前記カット検出部がカ
ットを検出し、カットを検出した時に前記カット検出部
が前記制御部に信号を送り、この信号により前記制御部
が前記動画像再生部に通常速度の再生を指示することに
より、カット単位での早送りを行うことを特色とする動
画像の拾い見装置。