JPH04235589A - 動画像の内容表示方法 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】この発明は、動画像の検索を支援
するための動画像の内容表示方法に関するものである。

【０００２】

【従来の技術】ビデオ等の動画像の編集方法として、コ
ンピュ−タのディスプレイ上に動画像のカットやシ−ン
（以下シ−ンと総称する）の先頭画像や、それらの代表
的な画面を静止画として複数枚表示し、複数のシ−ンの
内容が視覚的に分かるようにして、編集のための補助手
段として使う例がある。この方法は、静止画であるため
、各シ−ンの途中の状況については時間軸を示すタイム
ラインを示し、指定したタイムライン上の点に相当する
静止画を見ることができるようにした例である。

【発明が解決しようとする課題】しかし、このタイムラ
イン上の指定した点に相当する静止画の指定方法は、意
図する画面が「シ−ン全体の前半にあった」とか、「全
体の３／４の位置ぐらいにあった」とかいうあいまいな
情報を元に検索する方法を採ることになる。したがって
、この方法では適確な画面を得ることは困難であり、結
局、早送りモ−ドにより選択した画面の前後を見て目的
の画面を探すことになる。この方法は、シ−ンの最初か
ら早送りモ−ドで映像を見るのに比べて、時間短縮をし
て目的の画面を探すことが可能であるが、指定位置が悪
いと単純に早送りモ−ドで映像を最初から見る検索と変
わらなくなるケ−スを生じてしまう問題がある。

【０００３】本発明では、このような位置指定方法から
あいまい性をできるだけ減少させようとする内容表示方
法であり、かつその表示の内容に人が介在せずに機械が
認識した内容を利用し、かつその表示内容から意図する
シ−ンがある程度判別できるようにすることにある。

【０００４】

【課題を解決するための手段】この発明にかかる動画像
の表示方法は、画像中の各画素の明度，彩度，色相等の
物理量の情報を複数の段階で表し、各段階に対応する画
素数に比例してディスプレイの輝度情報または色情報の
強度として表すヒストグラムや高さ情報として表すヒス
トグラムを時系列に表示するものである。

【０００５】

【作用】この方法を用いると、シ−ンの中のカットが別
のカットに変わる画面で、その分布が急激に変化するた
め、その変化点が明確に見えるとともに、最初のカット
が徐々に消え、次のカットが徐々に現れる部分では徐々
に減少する明度等の情報と、新たに生成する明度等の情
報が交差するパタ−ンが見られる。さらに、シ−ン中に
車や人が現れる場合には、それに対応する明度等の情報
の明確な増大が示され、本発明の表示方法を付随させた
場合には、そのシ−ン内の変化に対応する情報が示され
ることになるため、意図する画面の位置が判断可能にな
り、非常に検索しやすくなる利点がある。

【０００６】

【実施例】図３は横軸がビデオ画像のフレ−ムを単位と
する時間、縦軸が輝度レベルを示し、ここでは全体を１
０段階としたヒストグラム図である。また、網点と塗り
つぶしと白で示した部分は、各輝度レベルの画素数と対
応しており、同一画面内に多く存在する輝度レベルは濃
度を濃く示してある。図３のＡから始まるカットは、７
番目の輝度レベルが高く、このカットは静画像的に変化
しない画像がＢまでつづく。Ｂから始まるカットはＡか
ら始まるカットと同じく静止画的な映像であるが、映像
が異なるためＢの時間において明らかな違いを生じ、シ
−ンチェンジを起こしたことが分かる。またＣから始ま
るカットは初期には変化が少ない映像であるが、後半で
明るい部分が加わったため、Ｇの時間から輝度が９と１
０番目のレベルで増大する変化があることが分かる。Ｄ
から始まるカットでは、初期に輝度が７のレベルが最大
であったが、Ｈの時間から最大が低いレベルに移動し、
Ｅの時間には輝度が最小の１のレベルに低下し、他のレ
ベルはなくなった。このＨからＥまでの間では、画面が
徐々に暗くなるフェ−ドアウトが行われたことを示して
いる。また、Ｅから始まるカットでは、Ｉの時間からそ
れまでの映像がフェ−ドアウトし、Ｊの時間から新たな
映像がフェ−ドインし、Ｋの時間には完全に映像が交換
された状態を示している。以上の説明で分かるように、
この表示により内容のある程度の理解ができる。このた
め、シ−ンの変化を生じたＡからＦまでの時点における
画面やＧからＫまでの時点における画面等は容易にどの
位置であるか分かる。これを利用すれば、実際の映像を
見ることなくその位置が指定できるため、この表示を検
索の手段として利用可能である。

【０００７】図１と図２は具体的な表示例である。図１
の１と２はディスプレイ上の一部に各々ウインドウとし
て形成した画像表示とヒストグラム図、３は時間軸を示
すタイムライン、４は各フレ−ムのヒストグラムの差分
を合計して得られる変化量を示す図、５はタイムライン
上のカ−ソル、７はディスプレイの枠である。ここで、
図１，図２は各々が同一のディスプレイに表示された状
態であり、これらは複数を組み合わせて同一のディスプ
レイに表示することも可能である。逆に表示の一部を除
くことも可能である。画像表示１は特定なシ−ンの１フ
レ−ム目または代表画面を表示するが、タイムライン３
上のカ−ソル５の位置に相当する画面を表示する。この
カ−ソル５はキ−ボ−ド上のキ−やマウス等（図示省略
）によりタイムライン３上の任意の位置に移動が可能で
あり、画面表示１は任意のフレ−ムに変更可能である。 この際に、ヒストグラム図３から分かる情報を基にして
、カ−ソル５を移動し、かつ変化量を示す図４がシ−ン
の変化した位置等を明確に示すことを用いて、精度よく
目的の画面を選択することができる。ここで、カ−ソル
５はタイムライン３上にのみ示してあるが、ヒストグラ
ム図３や変化量を示す図４にまで及ぶ表示方法も使用可
能であるし、逆にタイムライン３が及ばない図があって
も良い。また、ここで表示する物理量としては、明度，
色相，彩度等が含まれるが、それ以外にそれらの物理量
を加工した量も入る。具体的には、同一フレ−ム内の明
度，色彩，彩度等のヒストグラムや画面内の分布情報等
やフレ−ム間の物理量やヒストグラムの変化量などや、
それらを記述する関数の係数等が入る。

【０００８】図２はシ−ンが多数のフレ−ムから成り立
っているため、フレ−ムの束６として表示す方法がある
。この表示では、前面に画面表示があらわれ、側面にヒ
ストグラム図３が示されている。また、ここでは色相が
ヒストグラムとして示されており、下側が長波長の赤で
あり、上側が短波長の青で示してある。この表示では、
特徴的な色の車や人等が画面中に表れるとその特徴が明
白に分かる。ここで、図２のヒストグラム図２は、他の
明度，色彩，彩度等の情報や、それらの情報を処理した
図１の変化量図４等であってもかまわない。さらに、図
１のカ−ソル５に相当する線や印等を入れることも可能
である。

【０００９】本発明を実現する装置の構成を図４に示す
。図４において、８は動画像のメモリであり、例えばビ
デオテ−プレコ−ダ，ビデオディスク，磁気ディスク，
書替型光ディスク，半導体メモリ等である。この動画像
のメモリ８から出力した動画像は画像中の物理量を測定
する処理装置９と、コンピュ−タ１０に入力される。処
理装置９はコンピュ−タ１０による制御信号を受けて必
要な物理量測定と処理を行い、その結果をコンピュ−タ
１０に返す。その結果は必要に応じて動画像のメモリ８
にその内容を記憶させることができる。また、１１は前
記コンピュ−タ１０の処理した表示内容を表示するディ
スプレイである。ここで、処理装置９は動画像のメモリ
８に必要な物理情報を蓄えた後は不要であり、取り除く
ことも可能である。

【００１０】

【発明の効果】以上説明したように、本発明の動画像の
内容表示方法によれば、実際の動画像を見ることなく、
その内容の特定の情報について判断が可能になるため、
必要とする画像を検索するにあたり、適確にその位置指
定が可能になる。かつ表示すべき情報量が少ないため、
必要とされるメモリ量が少なく、その表示を実行する機
械にとっての負担が軽い特徴がある。

【図面の簡単な説明】

【図１】表示とヒストグラム図等を示す表示例の図であ
る。

【図２】別の表示例の図である。

【図３】ヒストグラムを示す図である。

【図４】本発明を実現する装置の一例を示すブロック図
である。

【符号の説明】

１　　　　表示画面 ２　　　　ヒストグラム図 ３　　　　タイムライン ４　　　　変化量図 ５　　　　カ−ソル ６　　　　フレ−ムの束 ７　　　　ディスプレイの枠 ８　　　　動画像のメモリ ９　　　　処理装置 １０　　コンピュ−タ １１　　ディスプレイ

Claims (2)

【特許請求の範囲】
1. 【請求項１】　　ディスプレイ上に映像を表示し、この
   映像の各フレ−ムの物理量を時間変化として前記映像に
   隣接して表示することを特徴とする動画像の内容表示方
   法。
2. 【請求項２】　　前記物理量としてヒストグラム図を用
   いることを特徴とする請求項１に記載の動画像の内容表
   示方法。