JP2003283993A - 映像情報記録再生装置及び映像情報記録再生方法 - Google Patents

Abstract

(57)【要約】 【課題】 番組のジャンルが異なっても、特徴シーンを
適切に抽出して要約映像を作成してダイジェスト再生す
ることができ、また、ユーザーにとってより適切な要約
映像を作成してダイジェスト再生をすることができる映
像情報記録再生装置を提供する。 【解決手段】 インデキシング部１８は、映像データに
ついて、各シーンに分割するとともに、各シーンに顔領
域があるか、無音区間の最後が含まれているか等を検出
して各種特徴量を検出する。また、各特徴量を重み付け
積算することにより得た値を評価することにより、重要
シーンを抽出してダイジェスト再生に用いるシナリオを
作成する。シナリオはシナリオ保持部２４に保持され
る。該重み付けは、ジャンルに応じて異なる値が設けら
れていて、また、あるジャンルについても、優先順位が
設けられた複数の重み付けパターンを設けておく。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、映像データの再生
装置に関するものであり、特に、映像データのダイジェ
スト版を生成して再生する装置に関するものである。

【０００２】

【従来の技術】従来より、映像情報のダイジェスト版を
作成して再生する装置が存在する。つまり、プロフェッ
ショナル用途と一般の消費者用途とを問わず、大量の映
像データの中から視聴したいものを見つけるには、多大
な時間と労力を必要とする。例えば、ＶＴＲの早送り再
生により見たい番組を見つけることも可能ではあるが、
時間と労力を要することになる。これに対処するため、
要約映像を作成することにより、該要約映像を通じて大
まかに映像の内容を把握する装置や方法が提案されてい
る（特開平１０−３２７７３号、特開平１１−２３９３
２２号、特開平１１−１７６０３８号）。

【０００３】また、特開２０００−３５０１２４号で
は、テレビジョン番組を録画する際に、番組の映像や音
声を解析し、番組の中で特徴的と思われるシーンを抽出
し、該シーンを縮小静止画像として生成、保存してお
き、映像をブラウジングする際には、該縮小静止画像を
再生データに用いている。例えば、特徴シーンを抽出す
る際には、シーンの変わり目、カメラの動き、色の変
化、テロップの有無や内容等の点を抽出している。

【０００４】

【発明が解決しようとする課題】しかし、上記従来の場
合では、１つの基準に基づいて特徴シーンを抽出してい
るので、番組によっては必ずしも重要なシーンを抜き出
しているとはいえない場合がある。例えば、通常、ニュ
ースでは、各ニュース項目が開始される先頭シーンが重
要であるのに対して、ドラマや歌番組では、出演者のア
ップシーン等が重要であるといえ、番組のジャンル（種
類としてもよい）によって重要なシーンも異なるにも拘
わらず、１つの基準によって特徴シーンを抽出すると、
番組によっては、重要でないシーンを抽出してしまうお
それがある。

【０００５】そこで、本発明は、番組のジャンルが異な
っても、特徴シーン、すなわち、その番組にとって重要
なシーンを適切に抽出して要約映像を作成してダイジェ
スト再生することができる映像情報記録再生装置を提供
するとともに、ユーザーにとってより適切な要約映像を
作成してダイジェスト再生をすることができる映像情報
記録再生装置を提供することを目的とする。

【０００６】

【課題を解決するための手段】本発明は上記問題点を解
決するために創作されたものであって、第１には、映像
情報の記録・再生を行う映像情報記録再生装置であっ
て、映像情報を記憶する映像情報記憶手段と、映像情報
における各シーンごとに複数種類の特徴量を検出する特
徴量検出手段と、映像情報のジャンルごとに定められた
基準で、該特徴量を評価するための基準に従い、検出さ
れた特徴量を評価する評価手段と、該評価手段による評
価結果に基づき、該シーン又は該シーンの一部を特定す
る情報である特定情報を記憶することにより、該特定情
報からなるシナリオデータを記憶するシナリオ記憶手段
と、該シナリオ記憶手段に記憶されたシナリオデータに
基づいて、該映像情報記憶手段に記憶された映像データ
から、所定のシーン又は該シーンの一部を読み出して再
生を行うシナリオ再生手段と、を有することを特徴とす
る。

【０００７】この第１の構成の映像情報記録再生装置に
おいては、上記映像情報記憶手段に映像情報が記憶され
る。また、上記特徴量検出手段は、映像情報における各
シーンごとに複数種類の特徴量を検出する。そして、上
記評価手段は、映像情報のジャンルごとに定められた基
準で、該特徴量を評価するための基準に従い、検出され
た特徴量を評価する。さらに、シナリオ記憶手段は、該
評価手段による評価結果に基づき、該シーン又は該シー
ンの一部を特定する情報である特定情報を記憶すること
により、該特定情報からなるシナリオデータを記憶す
る。このようにして、ダイジェスト再生をする際のシナ
リオが各基準ごとにシナリオ記憶手段に記憶されるの
で、上記シナリオ再生手段は、映像情報記憶手段に記憶
された映像データから、所定の基準に基づくシナリオデ
ータに基づいて、所定のシーン又は該シーンの一部を読
み出して再生を行う。よって、映像情報のジャンルごと
に定められた基準に従ってシナリオが作成されて、該シ
ナリオに基づきダイジェスト再生されるので、番組のジ
ャンルが異なっても、番組のジャンルごとに最適なダイ
ジェスト再生を行うことが可能となる。

【０００８】また、第２には、映像情報の記録・再生を
行う映像情報記録再生装置であって、映像情報を記憶す
る映像情報記憶手段と、映像情報における各シーンごと
に複数種類の特徴量を検出する特徴量検出手段と、該特
徴量検出手段により検出された特徴量を複数種類の基準
に従いそれぞれ評価する評価手段と、該評価手段による
評価結果に基づき、該シーン又は該シーンの一部を特定
する情報である特定情報を各基準ごとに記憶することに
より、各基準ごとに該特定情報からなるシナリオデータ
を記憶するシナリオ記憶手段と、該シナリオ記憶手段に
記憶されたシナリオデータのうちの所定の基準に基づく
シナリオデータに基づいて、該映像報記憶手段に記憶さ
れた映像データから、所定のシーン又は該シーンの一部
を読み出して再生を行うシナリオ再生手段と、を有する
ことを特徴とする。

【０００９】この第２の構成の映像情報記録再生装置に
おいては、上記映像情報記憶手段に映像情報が記憶され
る。また、上記特徴量検出手段は、映像情報における各
シーンごとに複数種類の特徴量を検出する。そして、上
記評価手段は、該特徴量検出手段により検出された特徴
量を複数種類の基準に従いそれぞれ評価する。さらに、
シナリオ記憶手段は、該評価手段による評価結果に基づ
き、該シーン又は該シーンの一部を特定する情報である
特定情報を各基準ごとに記憶することにより、各基準ご
とに該特定情報からなるシナリオデータを記憶する。こ
のようにして、ダイジェスト再生をする際のシナリオが
各基準ごとにシナリオ記憶手段に記憶されるので、上記
シナリオ再生手段は、映像情報記憶手段に記憶された映
像データから、所定の基準に基づくシナリオデータに基
づいて、所定のシーン又は該シーンの一部を読み出して
再生を行う。よって、複数の基準に基づいてダイジェス
ト再生のシナリオが複数作成されるので、ユーザーは、
異なる基準に基づいたシナリオによるダイジェスト再生
を見ることができ、映像情報を概観しやすくなるととも
に、重要シーンを見つけやすくなる。よって、ユーザー
にとってより適切なダイジェスト再生が可能となる。例
えば、登場人物を把握したい場合には、顔領域が存在す
るシーンに重きをおいた基準に従ったシナリオを再生す
ればよい。

【００１０】また、第３には、上記第２の構成におい
て、上記評価手段が、さらに、映像情報のジャンルごと
に定められた基準で、該特徴量を評価するための基準に
従い、検出された特徴量を評価することを特徴とする。
よって、映像情報のジャンルごとに定められた基準に従
ってシナリオが作成されて、該シナリオに基づきダイジ
ェスト再生されるので、番組のジャンルが異なっても、
番組のジャンルごとに最適なダイジェスト再生を行うこ
とが可能となる。さらに、ある番組について、複数の基
準に基づいてダイジェスト再生のシナリオが複数作成さ
れるので、ユーザーは、異なる基準に基づいたシナリオ
によるダイジェスト再生を見ることができ、映像情報を
概観しやすくなるとともに、重要シーンを見つけやすく
なる。

【００１１】また、第４には、上記第１又は第３の構成
において、上記評価手段が、各特徴量について重み付け
を行なうための重み係数が各特徴量ごとに設けられた重
み係数群が、複数種類のジャンルについてそれぞれ設け
られた重み係数記憶部を有し、上記評価手段は、映像情
報のジャンルに対応する重み係数群を用いて特徴量を評
価することを特徴とする。

【００１２】また、第５には、上記第２の構成におい
て、上記評価手段が、各特徴量について重み付けを行な
うための重み係数が各特徴量ごとに設けられた重み係数
群が優先順位に従い複数設けられた重み係数記憶部を有
し、上記評価手段は、各重み係数群を用いてそれぞれ特
徴量を評価することにより、該特徴量を複数種類の基準
に従い評価することを特徴とする。

【００１３】また、第６には、上記第３の構成におい
て、上記評価手段が、重み係数群集合であって、各特徴
量について重み付けを行なうための重み係数が各特徴量
ごとに設けられた重み係数群が優先順位に従い複数設け
られた重み係数群集合を複数のジャンルについてそれぞ
れ有する重み係数記憶部を有し、上記評価手段は、映像
情報のジャンルに対応する重み係数群集合における複数
の重み係数群を用いてそれぞれ特徴量を評価することに
より、該特徴量を複数種類の基準に従い評価することを
特徴とする。

【００１４】また、第７には、上記第４の構成におい
て、上記評価手段は、各特徴量と対応する重み係数とを
乗算した値を積算した値を、所定のしきい値と比較し、
該積算した値が該所定のしきい値よりも大きいか否かを
判定することを特徴とする。

【００１５】また、第８には、上記第５又は第６の構成
において、上記評価手段は、各特徴量と対応する重み係
数とを乗算した値を積算した値を、所定のしきい値と比
較し、該積算した値が該所定のしきい値よりも大きいか
否かを判定することを特徴とする。このようにして、検
出された特徴量を評価する。

【００１６】また、第９には、上記第７又は第８の構成
において、上記シナリオ記憶手段は、上記積算した値が
上記所定のしきい値よりも大きい場合に、そのシーン又
は該シーンの一部を特定する情報である特定情報を記憶
していくことを特徴とする。

【００１７】また、第１０には、上記第７から第９まで
のいずれかの構成において、上記評価手段は、評価に用
いる複数種類のしきい値を有し、各しきい値に基づいて
評価を行い、また、上記シナリオ記憶手段は、各しきい
値に基づく評価結果に基づき、各しきい値ごとにシナリ
オデータを記憶することを特徴とする。

【００１８】また、第１１には、上記第１又は第３又は
第４又は第６又は第７又は第８又は第９又は第１０の構
成において、上記映像情報記録再生装置が、さらに、入
力された受信データであって、映像情報と、該映像情報
のジャンルを特定するための情報とを含む受信データ
を、該映像情報と、該映像情報のジャンルを特定するた
めの情報とに分離する分離手段を有し、上記評価手段
は、該分離手段で分離された映像情報のジャンルを特定
するための情報に基づいて、評価を行うことを特徴とす
る。これにより、映像情報のジャンルについては、該映
像情報のジャンルを特定するための情報に基づいて検出
すればよい。

【００１９】また、第１２には、上記第２又は第３又は
第４又は第５又は第６又は第７又は第８又は第９又は第
１０又は第１１の構成において、上記映像情報記録再生
装置は、ある映像情報について上記シナリオ記憶手段に
記憶された複数のシナリオデータのうち、シナリオ再生
手段により再生を行うのに使用するシナリオデータを選
択するシナリオ選択手段を有することを特徴とする。こ
れにより所定のシナリオデータを選択して、該シナリオ
データに基づきダイジェスト再生することが可能とな
る。

【００２０】また、第１３には、上記第２又は第３又は
第４又は第５又は第６又は第７又は第８又は第９又は第
１０又は第１１又は第１２の構成において、上記シナリ
オ再生手段は、ある映像情報について上記シナリオ記憶
手段に記憶された複数のシナリオデータのうち、再生に
用いているシナリオデータの種類をユーザーに通知する
機能を有していることを特徴とする。これにより、ユー
ザーは、再生されている現在のシナリオを知ることがで
きる。

【００２１】また、第１４には、上記第１から第１３ま
でのいずれかの構成において、上記映像情報記憶手段に
複数の映像情報が記憶された場合に、上記シナリオ再生
手段は、該複数の映像情報を各映像情報のシナリオに基
づいて、表示画面を分割表示することにより、同時に再
生することを特徴とする。これにより、複数の映像情報
のダイジェスト再生を同時に閲覧することが可能とな
る。

【００２２】また、第１５には、上記第１から第１４ま
でのいずれかの構成において、上記シナリオ再生手段
は、ある映像情報を再生する際に、シナリオデータに記
憶された特定情報により特定されたシーン又はシーンの
一部のうちの少なくとも２以上を表示画面に同時に表示
することを特徴とする。このようにすることにより、あ
る番組の重要シーンを一度に見ることができ、その番組
の概要を即座に知ることが可能となる。

【００２３】また、第１６には、上記第１から第１５ま
でのいずれかの構成において、上記特徴量検出手段が、
映像情報における各シーン間の境界を検出することによ
り、各シーンごとに分割する分割手段と、分割された各
シーンの長さを検出することにより、該シーンの長さに
関する特徴量であるシーン長さ特徴量を検出するシーン
長さ特徴量検出手段と、分割された各シーンにおいて、
音声レベルに関する特徴点を検出することにより、音声
レベルに関する特徴量である音声レベル特徴量を検出す
る音声レベル特徴量検出手段と、分割された各シーンに
おいて、顔領域を検出することにより、顔領域に関する
特徴量である顔領域特徴量を検出する顔領域特徴量検出
手段と、を有することを特徴とする。

【００２４】このようにして、シーン長さ特徴量と、音
声レベル特徴量と、顔領域特徴量の各特徴量を検出する
ことが可能となる。

【００２５】また、第１７には、上記第１６の構成にお
いて、上記シーン長さ特徴量検出手段が、映像情報を構
成する複数のフレームについて順次前フレームとの連続
性を検出して、該前フレームとの連続性がないフレーム
をカット点として検出し、該カット点となるフレームか
ら次のカット点となるフレームの前のフレームまでを１
つのシーンとして、該シーンの長さを検出し、該シーン
の長さに応じて定められた特徴量を割り出すことを特徴
とする。

【００２６】また、第１８には、上記第１６又は第１７
の構成において、上記音声レベル特徴量検出手段が、音
声レベルが所定値以下である無音状態を逐次検出するこ
とにより、所定の特徴量を検出することを特徴とする。

【００２７】また、第１９には、上記第１６から第１８
までのいずれかの構成において、上記音声レベル特徴量
検出手段が、音声レベルが所定値以下である無音状態を
逐次検出していき、音声レベルが該所定値を越えている
状態が所定時間以上続く有音区間が検出された場合に、
該有音区間の直前に検出された無音状態の位置のフレー
ムをコーナー先頭として検出し、該コーナー先頭が検出
された場合に所定の特徴量を割り出すことを特徴とす
る。このようにして、無音区間の最後の位置を特徴量と
することが可能となる。

【００２８】また、第２０には、上記第１６から第１９
までのいずれかの構成において、上記顔領域特徴量検出
手段が、映像情報を構成する複数のフレームについて逐
次顔領域が存在するか否かを検出し、顔領域が存在する
フレームがある場合に所定の特徴量を割り出すことを特
徴とする。

【００２９】また、第２１には、上記第１から第２０ま
でのいずれかの構成において、上記特定情報が、上記映
像情報記憶手段に記憶された映像情報の読出し先頭位置
のフレームを特定するための情報であることを特徴とす
る。

【００３０】また、第２２には、上記第１から第２１ま
でのいずれかの構成において、上記特徴量検出手段によ
る特徴量の検出と、上記評価手段による判定と、上記シ
ナリオ記憶手段によるシナリオデータの記憶とは、映像
情報記録再生装置に入力された映像情報を映像情報記憶
手段に記憶する際に、並行して行われることを特徴とす
る。

【００３１】また、第２３には、映像情報の記録・再生
を行う映像情報記録再生方法であって、映像情報を所定
の記憶装置に記憶する映像情報記憶工程と、映像情報に
おける各シーンごとに複数種類の特徴量を検出する特徴
量検出工程と、映像情報のジャンルごとに定められた基
準で、該特徴量を評価するための基準に従い、検出され
た特徴量を評価する評価工程と、該評価工程における評
価結果に基づき、該シーン又は該シーンの一部を特定す
る情報である特定情報を所定の記憶装置に記憶すること
により、該特定情報からなるシナリオデータを記憶する
シナリオ記憶工程と、該シナリオ記憶工程において記憶
されたシナリオデータに基づいて、該映像情報記憶工程
において記憶された映像データから、所定のシーン又は
該シーンの一部を読み出して再生を行うシナリオ再生工
程と、を有することを特徴とする。

【００３２】この第２３の構成の映像情報記録再生方法
によれば、映像情報のジャンルごとに定められた基準に
従ってシナリオが作成されて、該シナリオに基づきダイ
ジェスト再生されるので、番組のジャンルが異なって
も、番組のジャンルごとに最適なダイジェスト再生を行
うことが可能となる。

【００３３】また、第２４には、映像情報の記録・再生
を行う映像情報記録再生方法であって、映像情報を所定
の記憶装置に記憶する映像情報記憶工程と、映像情報に
おける各シーンごとに複数種類の特徴量を検出する特徴
量検出工程と、該特徴量検出工程において検出された特
徴量を複数種類の基準に従いそれぞれ評価する評価工程
と、該評価工程による評価結果に基づき、該シーン又は
該シーンの一部を特定する情報である特定情報を各基準
ごとに所定の記憶装置に記憶することにより、各基準ご
とに該特定情報からなるシナリオデータを記憶するシナ
リオ記憶工程と、該シナリオ記憶工程において記憶され
たシナリオデータのうちの所定の基準に基づくシナリオ
データに基づいて、該映像報記憶工程において記憶され
た映像データから、所定のシーン又は該シーンの一部を
読み出して再生を行うシナリオ再生工程と、を有するこ
とを特徴とする。

【００３４】この第２４の構成の映像情報記録再生方法
によれば、複数の基準に基づいてダイジェスト再生のシ
ナリオが複数作成されるので、ユーザーは、異なる基準
に基づいたシナリオによるダイジェスト再生を見ること
ができ、映像情報を概観しやすくなるとともに、重要シ
ーンを見つけやすくなる。よって、ユーザーにとってよ
り適切なダイジェスト再生が可能となる。

【００３５】また、第２５には、上記第２４の構成にお
いて、上記評価工程において、さらに、映像情報のジャ
ンルごとに定められた基準で、該特徴量を評価するため
の基準に従い、検出された特徴量を評価することを特徴
とする。

【００３６】

【発明の実施の形態】本発明の実施の形態としての実施
例を図面を利用して説明する。本発明に基づく映像情報
記録再生装置Ａは、データ分離部（分離手段）１０と、
Ａ／Ｄ変換部１１と、番組付加情報抽出部１２と、ＥＰ
Ｇデータ保持部１４と、Ａ／Ｄ変換部１５と、エンコー
ダ１６と、インデキシング部１８と、データ保持部１９
と、重み係数テーブル（重み係数記憶部）２０と、ＡＶ
データ保持部（映像情報記憶手段）２２と、シナリオ保
持部（シナリオ記憶手段）２４と、再生データ選択部
（シナリオ選択手段）２６と、ナビゲーション制御部２
８と、ＡＶデータ読出し部３０と、デコーダ３２と、Ｄ
／Ａ変換部３４と、モニタ３６と、を有している。

【００３７】ここで、上記データ分離部１０は、ＥＰＧ
（電子番組ガイド）データとＡＶデータとが含まれたデ
ジタルＡＶデータ（映像情報）が入力されると、これを
ＥＰＧデータとＡＶデータとに分離する。ここで、図１
に示す構成は、映像情報記録再生装置Ａに、現行テレビ
ジョンのアナログ放送波のデータのようなアナログＡＶ
データ（映像情報）が入力される場合の例であり、実際
には、データ分離部１０の前段に受信部と復調処理部が
設けられ、受信部から入力されたアナログＡＶデータが
該復調部で復調処理された後にこのデータ分離部１０に
入力されることになる。具体的には、このデータ分離部
１０は、ＶＢＩ（垂直帰線消去区間）に多重化されたＥ
ＰＧデータを分離する機能を有している。また、データ
分離部１０は、ＥＰＧデータを上記番組付加情報抽出部
１２に送り、一方、ＡＶデータをエンコーダ１６に送
る。

【００３８】なお、この映像情報記録再生装置Ａに入力
されるデータが、デジタルＡＶデータの場合には、図１
の構成からＡ／Ｄ変換部１１と、Ａ／Ｄ変換部１５と、
エンコーダ１６が省略されることになる。また、上記の
ような復調部も省略される。つまり、受信されたデジタ
ルＡＶデータが直接データ分離部１０に入力され、この
データ分離部１０においてＥＰＧデータとＡＶデータと
に分離され、ＥＰＧデータは番組付加情報抽出部１２に
入力され、また、ＡＶデータは、ＡＶデータ保持部２２
に入力されるとともに、インデキシング部１８に入力さ
れる。なお、デジタルＡＶデータが映像情報記録再生装
置Ａに入力される場合には、エンコードされたデータが
入力されることになるので、図１のようなエンコーダ１
６は必要ない。

【００３９】次に、Ａ／Ｄ変換部１１は、アナログデー
タとしてのＥＰＧデータをデジタルデータに変換する。

【００４０】また、番組付加情報抽出部１２は、ＥＰＧ
データから必要なデータを抽出する。例えば、ジャンル
や番組タイトルのデータを抽出するものである。番組付
加情報抽出部１２は、抽出したデータをＥＰＧデータ保
持部１４に送る機能も有している。また、ＥＰＧデータ
保持部１４は、抽出されたデータを保持するものであ
る。

【００４１】また、Ａ／Ｄ変換部１５は、アナログデー
タとしてのＡＶデータをデジタルデータに変換する。

【００４２】また、エンコーダ１６は、ＭＰＥＧエンコ
ーダであり、送られたＡＶデータをＭＰＥＧの規格に従
い圧縮符号化する。そして、エンコーダ１６は、符号化
されたＡＶデータをＭＰＥＧストリームとしてＡＶデー
タ保持部２２とインデキシング部１８に送る機能を有し
ている。

【００４３】インデキシング部１８は、エンコーダ１６
から送られたＡＶデータを解析処理するものであり、無
音検出や、カット点検出や、顔領域の検出等を行うこと
により、所定の評価関数を演算するために使用する特徴
量の基礎を検出するとともに、各ショットの評価、特
に、該特徴量について評価関数を演算してシナリオデー
タを作成する。

【００４４】つまり、インデキシング部１８は、ＡＶデ
ータに対して無音検出を行うことにより無音区間の最後
のフレーム位置（これが「コーナー先頭フレーム」とな
る）を検出したり、画像の連続性がない位置のフレーム
位置（これが「カット点」となる）を検出したり、該カ
ット点を基準とした代表フレームに顔領域が存在するか
否かの検出を行う。コーナー先頭フレームが存在するこ
とや、カット点が存在することや、代表フレームに顔領
域が存在することが、特徴量の基礎となる。

【００４５】また、上記評価関数の演算に関しては、イ
ンデキシング部１８は、カット点のフレームから次のカ
ット点の前までのフレームで構成されるショットにおい
て、特徴量の基礎に基づいて特徴量を算出し、算出され
た特徴量について所定の評価関数に従い演算を行って、
評価値を算出する。評価関数の演算に際しては、ＥＰＧ
データ保持部１４からのデータと、重み係数テーブル２
０の情報を参照する。ここで、特徴量としては、ショッ
ト長（例えば、該ショットのフレームの数）の値や、コ
ーナー先頭フレームの場合に与えられる値や、代表フレ
ームに顔領域が存在する場合に与えられる値が挙げられ
る。なお、ショットは、特許請求の範囲における「シー
ン」に当たる。

【００４６】また、上記シナリオデータの作成に際して
は、インデキシング部１８は、算出した評価値を評価
し、所定の基準を満たす場合にそのショットを特定する
ための情報を抽出していく。なお、シナリオデータは、
複数種類作成される。

【００４７】なお、インデキシング部１８における処理
の詳しい内容については、追って説明する。

【００４８】また、データ保持部１９は、インデキシン
グ部１８により検出されたデータ等を保持するものであ
り、具体的には、インデキシング部１８により検出され
た検出結果を記憶しておくための検出結果記憶テーブル
（図２参照）や、該検出結果記憶テーブルに記憶された
データに基づいて所定のデータを記憶するための特徴量
記憶テーブル（図３参照）が設けられている。

【００４９】また、重み係数テーブル２０は、上記評価
関数を演算する際に使用される重み係数のデータを保持
するものであり、具体的には、図４に示すような重み係
数テーブルが記憶されている。この重み係数テーブル
は、ショット長、コーナー先頭か否か、顔領域があるか
について重み係数が記憶されていて、ジャンルごとに優
先度に応じて複数の組み合わせが記憶されている。つま
り、優先度が最も高い場合には、そのジャンルにとって
最も適切な重み係数の組み合わせとなっている。

【００５０】ここで、ショット長、コーナー先頭か否
か、顔領域についての重み係数の１つの組み合わせが、
上記「重み係数群」に当たる。例えば、図４の例で、ニ
ュースにおける優先度１の重み係数０．１、０．７、
０．２が重み係数群を構成する。また、あるジャンルに
おいて、優先順位に従い設けられた複数の重み係数群が
上記重み係数群集合に当たる。つまり、図４の例で、ニ
ュースにおける優先度１〜３の各重み係数の組み合わせ
が重み係数群集合を構成する。

【００５１】また、ＡＶデータ保持部２２は、エンコー
ダ１６から送られたＡＶデータを保持するためのもので
ある。また、シナリオ保持部２４は、上記シナリオデー
タを保持するものである。シナリオデータは複数種類作
成されるので、作成された複数種類のシナリオデータが
保持されることになる。つまり、シナリオ保持部２４
は、複数のシナリオデータを記憶するシナリオデータテ
ーブル（図５参照）を有している。

【００５２】また、再生データ選択部２６は、ユーザー
が操作を行うための操作部であり、例えば、リモコンに
より構成される。この操作部は、特に、ユーザーがダイ
ジェスト再生を行う場合に用いるものである。つまり、
見たい番組を選択したり、再生するシナリオを選択した
りするのに用いる。

【００５３】また、ナビゲーション制御部２８は、再生
データ選択部２６からのデータに基づき、所定のシナリ
オデータをシナリオ保持部２４から読み出し、ＡＶデー
タ読出し部３０に送る。

【００５４】また、ＡＶデータ読出し部３０は、ナビゲ
ーション制御部２８から送られたデータに基づきＡＶデ
ータ保持部２２に保持されたＡＶデータから所定のデー
タを読み出して、デコーダ３２に送るものである。

【００５５】また、デコーダ３２は、ＭＰＥＧデコーダ
であり、送られたＡＶデータを復号するものである。

【００５６】なお、上記ナビゲーション制御部２８と、
ＡＶデータ読出し部３０と、デコーダ３２と、Ｄ／Ａ変
換部３４と、モニタ３６等は、上記シナリオ再生手段と
して機能する。

【００５７】なお、映像情報記録再生装置Ａを構成する
上記各部については、それぞれを各機能を有する装置と
して構成してもよいし、一部の構成を所定の処理を実行
するためのプログラムと、該プログラムに基づき処理を
実行するＣＰＵにより構成してもよい。

【００５８】つまり、各部を装置により構成する場合に
は、例えば、上記データ分離部１０は、ＥＰＧデータと
ＡＶデータとに分離する機能を有する装置として構成
し、エンコーダ１６についても、符号化装置により構成
する。また、ＥＰＧデータ保持部１４，重み係数テーブ
ル２０、ＡＶデータ保持部２２、シナリオ保持部２４
は、記憶装置により構成されることになる。

【００５９】また、一部の構成を所定の処理を実行する
ためのプログラムと、該プログラムに基づき動作するＣ
ＰＵにより構成する場合には、各種プログラムが格納さ
れた記憶装置と、該プログラムに基づき処理を実行する
ＣＰＵにより構成し、該各種プログラムとしては、デー
タ分離部１０が行なう処理を実行するためのプログラム
や、番組付加情報抽出部１２が行なう処理を実行するた
めのプログラムや、エンコーダ１６が行なう処理を実行
するためのプログラムや、インデキシング部１８が行な
う処理を実行するためのプログラムや、ナビゲーション
制御部２８が行なう処理を実行するためのプログラム
や、ＡＶデータ読出し部３０が行なう処理を実行するた
めのプログラムや、デコーダ３２が行なう処理を実行す
るためのプログラム等が挙げられる。

【００６０】上記構成の映像情報記録再生装置Ａの動作
について説明する。まず。ＥＰＧデータとＡＶデータと
が含まれたアナログＡＶデータが受信部（図示せず）を
介して映像情報記録再生装置Ａに入力されると、図示し
ない復調部において復調された後に、データ分離部１０
に入力される。そして、該ＡＶデータは、データ分離部
１０において、該ＥＰＧデータとＡＶデータとに分離さ
れる。ＥＰＧデータは、Ａ／Ｄ変換部１１においてＡ／
Ｄ変換された後に番組付加情報抽出部１２に送られ、ま
た、ＡＶデータは、Ａ／Ｄ変換部１５においてＡ／Ｄ変
換された後にエンコーダ１６に送られる。

【００６１】番組付加情報抽出部１２は、ＥＰＧデータ
から必要なデータ、例えば、ジャンルや番組タイトルの
データを抽出し、該抽出したデータをＥＰＧデータ保持
部１４に送る。送られたデータは、ＥＰＧデータ保持部
１４に保持される。

【００６２】一方、エンコーダ１６は、送られたＡＶデ
ータをＭＰＥＧの規格に従い圧縮符号化し、符号化され
たＡＶデータをＭＰＥＧストリームとしてＡＶデータ保
持部２２とインデキシング部１８に送る。ＡＶデータ保
持部２２では、ＡＶデータが記憶される。このＡＶデー
タ保持部２２への記憶が、上記映像情報記憶工程に当た
る。

【００６３】なお、上記デジタルＡＶデータの場合の構
成では、デジタルＡＶデータが直接分離部１０に入力さ
れ、ＥＰＧデータは番組付加情報抽出部１２に送られ、
また、ＡＶデータは、インデキシング部１８とＡＶデー
タ保持部２２に送られる。

【００６４】また、インデキシング部１８では、図６に
示すフローチャートの処理や図７のフローチャートの処
理が行われる。

【００６５】つまり、エンコーダ１６からＡＶデータが
送られているか否かを判定すること等により、録画中の
番組が終了したか否かが判定され（Ｓ１０）、番組が終
了したら処理は終了する。一方、番組が終了していない
場合には、ステップＳ１１に移行して、処理の対象とな
る対象フレームを特定する（Ｓ１１）。これは最初のフ
レームから順次対象フレームとして特定されることにな
る。

【００６６】次に、そのフレームの位置（時間的な位
置）において無音検出を行うか否かが判定される（Ｓ１
２）。これは、無音検出はフレーム間隔よりも長い時間
間隔ごとに行なうために、このような判定が設けられて
いるもので、このステップＳ１２においては、複数回に
１度の割合で無音検出を行う旨の判定がなされる。

【００６７】そして、無音検出を行う場合には、そのフ
レームの位置が無音となっているか否かが判定される
（Ｓ１３）。つまり、音声レベルが予め設定したしきい
値を越えているか否かを判定することにより、無音が否
かが判定される。

【００６８】そして、無音である場合には、対応するフ
レーム番号を記憶しておく（Ｓ１４、Ｓ１５）。これ
は、インデキシング部１８自身において保持しておいて
もよいし、データ保持部１９に記憶させておいてもよ
い。一方、無音でない場合には、ステップＳ１６に移行
する。

【００６９】ステップＳ１６では、最後の無音から所定
時間が経過したか否かが判定される（Ｓ１６）。つま
り、ステップＳ１５において、無音と検出された位置の
フレームのフレーム番号が記憶されていくので、この記
憶されたデータに従って、最後に無音と判定された位置
から所定時間経過しているか否かが判定される。これ
は、最後に無音になってから所定時間無音が検出されな
い場合に初めて該最後の無音の位置をコーナー先頭とす
ることから、このような判定を設けるのである。そし
て、最後の無音から所定時間が経過している場合には、
その最後の無音の位置のフレーム番号をコーナー先頭で
ある旨のデータとともに検出結果記憶テーブル（図２参
照）に記憶する。なお、コーナー先頭のデータを記憶し
た後にも有音区間が続いている場合に、さらに、コーナ
ー先頭のデータを記憶する必要はないので、上記ステッ
プＳ１６では、最後の無音の位置のフレーム番号がコー
ナー先頭として記憶されていないことも判定され、記憶
されていない場合に、ステップＳ１７に移行することに
なる。つまり、ステップＳ１６では、最後の無音から所
定時間が経過したか否かが判定されるとともに、最後の
無音の位置のフレーム番号がコーナー先頭として記憶さ
れていないことも判定され、最後の無音から所定時間が
経過し、かつ、最後の無音の位置のフレーム番号がコー
ナー先頭として記憶されていない場合に、ステップＳ１
７で、その最後の無音の位置のフレーム番号をコーナー
先頭として記憶することになる。

【００７０】例えば、図２、図９に示す例において、フ
レーム番号ｌ＋２のフレームの位置において無音と検出
され、その後所定時間無音が検出されなかったことによ
り、該フレーム番号ｌ＋２のデータとコーナー先頭であ
る旨のデータが検出結果記憶テーブルに記憶されたもの
である。フレーム番号ｎ＋２のフレームについても同様
である。

【００７１】次に、カット検出を行う（Ｓ１８）。これ
は、前のフレームと連続性があるか否かを判定すること
により行われ、ＡＶデータにおいてカメラが切り替わる
等物理的にフレーム間で連続性がなくなった場合に、連
続性がないものと判定される。前のフレームと連続性が
ないと判定された場合に、対象フレームがカット点とな
る。このようなカット検出の方法については、すでに種
々の手法が提案されており、例えば、Ｊ．Ｍｅｎｇらに
よる「“Ｓｃｅｎｅ Ｃｈａｎｇｅ Ｄｅｔｅｃｔｉｏ
ｎ ｉｎ ａ ＭＰＥＧ Ｃｏｍｐｒｅｓｓｅｄ Ｖｉ
ｄｅｏ Ｓｅｑｕｅｎｃｅ”，ＳＰＩＥ Ｐｒｏｃｅｅ
ｄｉｎｇ Ｖｏｌ．２４１９ Ｆｅｂｒｕａｒｙ １９
９５」が提案する方法を用いることでＭＰＥＧ−１やＭ
ＰＥＧ−２の映像ストリームから効率的にカット検出を
実行することが可能となる。ステップＳ１８におけるカ
ット検出によりカット点が検出されたら、対象フレーム
のフレーム番号をカット点である旨のデータとともに検
出結果記憶テーブルに記憶する（Ｓ１９、Ｓ２０）。一
方、カット点でないと検出された場合には、ステップＳ
２１に移行する（Ｓ１９）。

【００７２】例えば、図２、図９に示す例において、フ
レーム番号ｍ＋１のフレームにおける判定においては、
前フレームであるフレーム番号ｍのフレームとの連続性
がないと判定されたことにより、フレーム番号ｍ＋１の
データがカット点である旨のデータとともに検出結果記
憶テーブルに記憶されたものである。フレーム番号ｎ＋
１のフレームについても同様である。

【００７３】次に、対象フレームが代表フレームか否か
が判定される（Ｓ２１）。この代表フレームとは、カッ
ト点に当たるフレームから所定フレーム目のフレームを
いい、例えば、カット点に当たるフレームから３番目の
フレームを代表フレームと規定した場合には、対象フレ
ームが、カット点に当たるフレームから３番目のフレー
ムであるか否かが判定される。

【００７４】そして、代表フレームであると判定された
場合には、フレーム中に顔領域が存在するか否かが判定
される（Ｓ２２）。つまり、フレーム中に顔の画像が存
在するか否かを判定する。この顔領域検出もすでに種々
の手法が提案されており、例えば、Ｈ．Ｗａｎｇらによ
る「“Ａ Ｈｉｇｈｌｙ Ｅｆｆｉｃｉｅｎｔ Ｓｙｓ
ｔｅｍ ｆｏｒ Ａｕｔｏｍａｔｉｃ Ｆａｃｅ Ｒｅ
ｇｉｏｎ Ｄｅｔｅｃｔｉｏｎ ｉｎ ＭＰＥＧ Ｖｉ
ｄｅｏ”，ＩＥＥＥ ＴＣＳＶＴ」が提案する方法を用
いることが可能である。ステップＳ２２における顔領域
検出により対象フレームにおいて顔領域が検出された場
合には、そのフレームのフレーム番号を顔領域を含むフ
レームである旨のデータとともに検出結果記憶テーブル
に記憶する（Ｓ２３、Ｓ２４）。一方、顔領域を含まな
い場合には、その対象フレームについての処理を終了
し、ステップＳ１０に戻る。

【００７５】なお、ステップＳ２１の判定において対象
フレームが代表フレームでない場合には、その対象フレ
ームについての処理を終了し、ステップＳ１０に戻る。

【００７６】例えば、図２、図９に示す例において、フ
レーム番号ｎ＋４のフレームにおける判定においては、
該フレームが代表フレームであり、かつ、顔領域が検出
されたとして、フレーム番号ｎ＋１のデータが顔領域が
存在する旨のデータとともに検出結果記憶テーブルに記
憶されたものである。なお、図９において、フレーム番
号ｍ＋４のフレームも代表フレームであるが、顔領域が
存在しないとして、フレーム番号ｍ＋４についてのデー
タは検出結果記憶テーブルには記憶されていない。

【００７７】ある対象フレームについて、ステップＳ１
２〜Ｓ２４までの処理が終了したら、ステップＳ２５に
移行して、ショットの評価を行う。このショットの評価
の詳細については後述する。その後は、ステップＳ１１
において、その次のフレームを対象フレームに特定して
同じようにステップＳ１２〜Ｓ２４までの処理を繰り返
していく。このようにして、最後のフレームまで処理を
行っていき、検出結果記憶テーブルに検出結果を記憶し
ていく。

【００７８】なお、各フレームごとに順次処理を行って
いくに従い、検出結果記憶テーブルにデータが記憶され
ていくわけであるが、インデキシング部１８において
は、検出結果記憶テーブルへ順次記憶されるデータに基
づいて図３に示す特徴量記憶テーブルにも記憶を行って
いく。この特徴量記憶テーブルは、各ショット番号ごと
に、先頭フレームと、最終フレームと、ショット長と、
ショット長判定値と、コーナー先頭である場合の特徴量
と、顔領域が存在する場合の特徴量と、評価の処理が完
了しているか否かが記憶されるようになっている。

【００７９】つまり、１つのショットは、カット点のフ
レームから次のカット点の手前のフレームにより構成さ
れるので（先頭のショットについては、先頭のフレーム
から最初のカット点の手前のフレームまで）、各ショッ
トごとに各データを記憶していく。つまり、先頭フレー
ムについては、そのショットの先頭フレームのフレーム
番号を記憶し、最終フレームはそのショットの最終フレ
ームのフレーム番号を記憶し、ショット長は、そのショ
ットにおけるフレーム数を記憶する。ショット長判定値
は、ショット長があるしきい値よりも大きい場合には１
とし、該しきい値以下の場合には０とする。このよう
に、ショット長があるしきい値よりも大きい場合に与え
られる値が、上記シーン長さ特徴量に当たる。また、コ
ーナー先頭である場合の特徴量については、そのショッ
ト内にコーナー先頭である旨のデータが記憶されている
フレームがある場合には１とし、一方、そのショット内
にコーナー先頭である旨のデータが記憶されているフレ
ームが１つもない場合には０とする。このように、その
ショット内にコーナー先頭である旨のデータが記憶され
ているフレームがある場合に与えられる値が、上記音声
レベル特徴量に当たる。同じように、顔領域が存在する
場合の特徴量についても、そのショット内に顔領域が存
在する旨のデータが記憶されているフレームがある場合
には１とし、一方、そのショット内に顔領域が存在する
旨のデータが記憶されているフレームが１つもない場合
には０とする。このように、そのショット内に顔領域が
存在する旨のデータが記憶されているフレームがある場
合に与えられる値が、上記顔領域特徴量に当たる。つま
り、ショット長判定値と、コーナー先頭と、顔領域につ
いては、２値とする。

【００８０】なお、上記シーン長さ特徴量や、音声レベ
ル特徴量や、顔領域特徴量は、インデキシング部１８に
より検出されるわけであるが、この場合のインデキシン
グ部１８は、上記シーン長さ特徴量検出手段や、音声レ
ベル特徴量検出手段や、顔領域特徴量検出手段として機
能するといえる。また、上記のように、各特徴量が検出
される工程が上記特徴量検出工程に当たる。

【００８１】なお、評価の処理が完了しているか否かに
関しては、そのショットについてステップＳ２５におけ
る評価が完了した場合には、その旨のデータ（例えば、
１）を記憶する。このようにして、検出結果記憶テーブ
ルにデータを順次記憶していくに伴い、特徴量記憶テー
ブルにも順次データが記憶されていく。

【００８２】この特徴量記憶テーブルへの記憶のタイミ
ングは、特徴量記憶テーブルへの記憶が可能になったタ
イミングで任意に行えばよいが、例えば、上記ステップ
Ｓ１７、Ｓ２０、Ｓ２４における検出結果記憶テーブル
への記憶のタイミングにおいて同時に行えばよい。例え
ば、あるカット点が検出された場合には、そのカット点
の手前にあるショットの最終フレームと、次のショット
の先頭フレームの番号が分かるので、ステップＳ２０に
おいて検出結果記憶テーブルにカット点のデータを書き
込むのと同時に、特徴量記憶テーブルにも書込みを行な
う。ショット長やショット長判定値についても、最終フ
レームのデータが分かれば算出可能であるので、書込み
可能である。また、顔領域が存在する場合の特徴量につ
いても、あるカット点が検出された場合には、その手前
のショット内に顔領域の存在するフレームがある場合に
は、ステップＳ２０において検出結果記憶テーブルにカ
ット点のデータを書き込むのと同時にその旨のデータを
書き込む。なお、コーナー先頭である場合の特徴量につ
いては、最後の無音から所定時間経過しないとコーナー
先頭であることが分からないので、ステップＳ１７にお
いて検出結果記憶テーブルに書き込みを行なうのと同時
に行なう。また、評価の処理が完了しているか否かにつ
いては、あるショットについてステップＳ２５の処理が
完了した場合に、その旨のデータを書き込む。

【００８３】以上のようにインデキシング部１８が特徴
量の検出を行うわけであるが、その際のインデキシング
部１８は、上記特徴量検出手段として機能する。

【００８４】次に、ステップＳ２５におけるショットの
評価について、図７等を使用して説明する。

【００８５】まず、未処理のショットがあるか否かが判
定される（Ｓ３０）。つまり、ステップＳ２５における
評価を行っていないショットがあるか否かが判定され、
ある場合には、ステップＳ３１に移行し、ない場合には
ステップＳ２５の処理を一旦終了して、ステップＳ１０
（図６参照）に戻る。ここで、ステップＳ２５における
評価を行っていないショットがあるか否かについては、
特徴量記憶テーブルにおける評価の処理が完了している
か否かのデータに基づいて判定すればよい。

【００８６】また、ステップＳ３１では、未処理のショ
ットの直後のフレーム、つまり、未処理のショットの直
後のカット点から所定時間が経過したか否かが判定され
る（Ｓ３１）。これは、あるフレームがコーナー先頭で
あるか否かは、最後の無音から所定時間が経過しないと
判明しないので、直後のカット点から所定時間が経過す
るまでは、該未処理のショットにコーナー先頭のデータ
が含まれる可能性があるからである。ステップＳ３１に
おいて、所定時間が経過している場合には、Ｓ３２に移
行し、経過していない場合にはステップＳ２５の処理を
一旦終了して、ステップＳ１０に戻る。

【００８７】ステップＳ３２においては、ＥＰＧデータ
保持部１４に保持されているデータから処理対象のＡＶ
データのジャンルについてのデータを読み出して取得す
る（Ｓ３２）。

【００８８】次に、対象ショットについての特徴量を取
得する（Ｓ３３）。つまり、未処理ショットについての
特徴量を特徴量記憶テーブルから読み出す。なお、未処
理ショットが複数ある場合には、最初の未処理ショット
についての特徴量を読み出す。

【００８９】次に、シナリオ番号を初期値にセットする
（Ｓ３４）。例えば、シナリオ番号を１とする。そし
て、各特徴量についての重み係数を重み係数テーブルか
ら取得する（Ｓ３５）。なお、重み係数はＳ３２で取得
したジャンルと、シナリオ番号に応じて選択して取得さ
れる。例えば、ステップＳ３２で取得したＡＶデータの
ジャンルがニュースで、シナリオ番号が１の場合には、
図４に示す重み係数テーブルに従い、ショット長につい
ては、０．１、コーナー先頭については０．７、顔領域
については０．２の各重み係数を取得する。つまり、シ
ナリオ番号１〜３は、重み係数テーブルにおける優先度
１〜３に対応している。

【００９０】そして、所定の評価関数に従い評価値を算
出する。つまり、各特徴量に重み付けを行って計算し評
価値を算出する（Ｓ３６）。評価関数の具体例として
は、以下の評価関数を用いる。

【００９１】 Ｆ＝ｗ１＊ｖ１＋ｗ２＊ｖ２＋ｗ３＊ｖ３ 上記の評価関数において、ｗ１、ｗ２、ｗ３は各重み係
数を示し、ｖ１、ｖ２、ｖ３は各特徴量を示す。つま
り、各特徴量について、対応する重み係数を乗算した値
の和を求める。例えば、ジャンルがニュースであるＡＶ
データの場合に、図３に示すショット番号１のショット
においては、Ｆ＝０．１＊１＋０．７＊１＋０．２＊０
となり、Ｆの値が評価値となる。

【００９２】そして、算出された評価値と所定のしきい
値とを比較し、評価値が該しきい値よりも大きい場合に
は、該ショットを特定するためのデータをシナリオデー
タテーブルに記憶する。具体的には、シナリオデータテ
ーブルにおける所定のシナリオ番号に対応させて該ショ
ットを特定するためのデータを書き込む。なお、該ショ
ットを特定するためのデータとしては、該ショットにお
ける代表フレームのアドレスデータとする。これは、ダ
イジェスト再生する際には、該ショット内の所定の範囲
のみを再生するものとするためである。なお、該所定の
範囲を代表フレームから所定数のフレーム分（又は所定
時間分）とし、この範囲を該ショットにおけるセグメン
トと呼ぶこととする。なお、このセグメントは、特許請
求の範囲における「シーンの一部」に当たる。また、シ
ナリオデータテーブルに書き込まれる代表フレームのア
ドレスデータは、上記「シーン又はシーンの一部を特定
する情報である特定情報」に当たる。

【００９３】次に、全てのシナリオについて評価が完了
したか否かが判定されて（Ｓ３９）、完了してない場合
には、シナリオ番号をインクリメントして次のシナリオ
について評価を行なう。例えば、ニュースの場合に、シ
ナリオ番号２について評価する場合には、図４に示す重
み係数テーブルに従い、ショット長については、０．
１、コーナー先頭については０．５、顔領域については
０．４の各重み係数を取得して（Ｓ３５）、その後同じ
ように評価値を計算し（Ｓ３６）、しきい値との比較を
行って（Ｓ３７）、しきい値を越えている場合に、シナ
リオデータテーブルへの書込みを行う。シナリオ番号３
についても同様である。

【００９４】以上のようにして、全てのシナリオについ
て評価が完了したら、ステップＳ２５の処理を完了し
て、ステップＳ１０に戻る。このステップＳ２５の処理
も各ショットについて処理が行われて、逐次シナリオデ
ータテーブルにデータが書き込まれていくことになる。
このようにして、シナリオデータが記憶されていく。あ
るＡＶデータの最後まで処理が完了した際には、シナリ
オデータテーブルには、各シナリオ番号ごとに、評価値
がしきい値を越えたショットの代表フレームのアドレス
データが記憶されていることになる。

【００９５】例えば、図５、図１０の例においては、例
えば、ショット番号１１のショットでは、シナリオ番号
１〜３の全てのシナリオについて評価値がしきい値を越
えたことから、該ショットの代表フレームのアドレスデ
ータが書き込まれている。また、ショット番号１２のシ
ョットでは、シナリオ番号３の場合のみ評価値がしきい
値を越えたことから、シナリオ番号３についてのみショ
ット番号１２のショットの代表フレームのアドレスデー
タが書き込まれている。

【００９６】なお、複数の番組について上記の処理が行
われた場合には、各番組ごとにシナリオデータテーブル
が記憶されることになる。

【００９７】なお、上記の説明では、ステップＳ２５の
処理は、図６に示す一連の処理の流れの中に存在するも
のとして説明したが、図６のフローチャートからステッ
プＳ２５を削除するとともに、図７のフローチャートを
図６のフローチャートとは別に並行して行うようにして
もよい。

【００９８】以上のように、上記ステップＳ２５の処理
は、インデキシング部１８により行われるが、この場合
のインデキシング部１８は上記評価手段として機能す
る。また、上記ステップＳ２５は、上記評価工程に当た
る。また、上記のようなシナリオテーブルへの書込み
が、上記シナリオ記憶工程に当たる。

【００９９】次に、ＡＶデータをダイジェスト再生する
場合の動作について説明する。ユーザーが再生データ選
択部２６により、ダイジェスト再生したい番組を選択す
る。例えば、選択可能な番組がモニタ３６に表示される
ので、これらから番組を選択する。

【０１００】そして、ダイジェスト再生の操作を行う
と、図８に示す処理に従い再生が行われる。つまり、ユ
ーザーがダイジェスト再生の操作を行うと、その情報が
ナビゲーション制御部２８に送られる。すると、ナビゲ
ーション制御部２８は、シナリオ保持部２４から最も優
先度の高いシナリオデータを読み出す（Ｓ５０）。つま
り、シナリオ番号１のシナリオにおけるアドレスデータ
を読み出してＡＶデータ読出し部３０に送る。そして、
ＡＶデータ読出し部３０では、最初のアドレスデータに
基づいて、該アドレスデータを先頭フレームとするセグ
メントをＡＶデータ保持部２２から読み出して、デコー
ダ３２に転送する（Ｓ５１）。すると、デコーダ３２で
該セグメントのデコードが行われて、Ｄ／Ａ変換部３４
でＤ／Ａ変換された後にモニタ３６に再生される。そし
て、再生データ制御部２６によりシナリオ変更の指示が
ない限り（Ｓ５３）、ＡＶデータ読出し部３０は、順次
送られたアドレスデータに基づいて対応するセグメント
をＡＶデータ保持部２２から読み出してデコーダ３２に
送ることにより、以後同様に再生される。つまり、シナ
リオ番号１として記憶されたアドレスデータに応じたセ
グメントのみが順次再生されるのである。

【０１０１】一方、再生データ選択部２６において、シ
ナリオ変更の指示があった場合（Ｓ５３）、つまり、次
に優先度の高いシナリオ、つまり、シナリオ番号２のシ
ナリオのシナリオデータがシナリオ保持部２４から読み
出される（Ｓ５４）。つまり、選択されたシナリオにつ
いて記憶されたアドレスデータが読み出されて、ＡＶデ
ータ読出し部３０に送られる。ＡＶデータ読出し部３０
は、送られたアドレスデータに従って所定のセグメント
を読み出し、デコーダ３２に送り、デコーダ３２でデコ
ードされた後に再生されることになる。この場合に、変
更されたシナリオに基づき最初から再生が行われる。さ
らに、シナリオ変更の指示があった場合には、次に優先
度の高いシナリオ、つまり、シナリオ番号３のシナリオ
のシナリオデータが読み出されて再生される。なお、さ
らに下位の優先度のシナリオがない場合には、最も優先
度の高いシナリオに戻って再生を行う。つまり、シナリ
オ番号が１〜３までの場合には、シナリオ番号３の再生
中にシナリオ変更の指示があった場合には、シナリオ番
号１に戻る。

【０１０２】つまり、ダイジェスト再生の操作を行う
と、最初は最も優先度の高いシナリオに基づき再生を行
うが、途中でシナリオ変更が行われると、順次優先度が
下位のシナリオに基づき再生が行われ、最下位のシナリ
オ再生中にシナリオ変更の指示があった場合には、最上
位のシナリオに戻るのである。なお、上記ステップＳ５
３においては、シナリオをユーザが選択できるようにし
て、ステップＳ５４において、選択されたシナリオに基
づいて再生するようにしてもよい。

【０１０３】なお、上記及び以下の説明におけるシナリ
オデータに従ったダイジェスト再生が上記シナリオ再生
工程に当たる。

【０１０４】なお、以下のように「通常モード」と「シ
ナリオ選択モード」を設けて各モードを選択できるよう
にしてもよい。

【０１０５】つまり、「通常モード」と「シナリオ選択
モード」を選択する画面が表示されるので、ここで「通
常モード」を選択したとする。

【０１０６】すると、再生データ選択部２６は、番組を
特定するためのデータと、通常モードである旨のデータ
をナビゲーション制御部２８に送る。すると、ナビゲー
ション制御部２８は、番組を特定するためのデータに従
い該番組についてのシナリオデータテーブルを選択す
る。そして、通常モードである旨のデータに基づいて、
シナリオ番号１のシナリオを選択し、記憶されている代
表フレームのアドレスデータをＡＶデータ読出し部３０
に送る。

【０１０７】ＡＶデータ読出し部３０は、送られたアド
レスデータに従って、ＡＶデータ保持部２２から所定の
データを読み出して、デコーダ３２に送る。つまり、該
アドレスデータが示すフレームから１セグメント分のデ
ータを読み出して、デコーダ３２に送る。

【０１０８】すると、デコーダ３２では、ＡＶデータ読
出し部３０から送られたデータがデコードされて、Ｄ／
Ａ変換部３４に送られてＤ／Ａ変換された後にモニタ３
６に送られて再生される。

【０１０９】つまり、シナリオ番号１として記憶された
アドレスデータに応じたセグメントのみが順次再生され
るのである。例えば、図５の例では、ショット番号１１
におけるセグメントの次には、ショット番号１５におけ
るセグメントが再生される。

【０１１０】一方、上記シナリオ選択モードを選択した
場合には、シナリオ選択画面が表示されるので、このシ
ナリオ選択画面においてシナリオを選択することによ
り、選択されたシナリオに応じて再生が行われる。例え
ば、シナリオ番号２を選択した場合には、シナリオ番号
２に記憶されたアドレスデータがシナリオ保持部２４か
らナビゲーション制御部２８を介してＡＶデータ読出し
部３０に送られるので、ＡＶデータ読出し部３０は、シ
ナリオ番号２に記憶されたアドレスデータに従ってＡＶ
データを読み出して再生されるのである。

【０１１１】以上のように、本実施例の映像情報記録再
生装置によれば、映像情報のジャンルごとに定められた
基準に従ってシナリオデータが作成されて、該シナリオ
データに基づきダイジェスト再生されるので、番組のジ
ャンルが異なっても、番組のジャンルごとに最適なダイ
ジェスト再生を行うことが可能となる。また、複数の基
準に基づいてダイジェスト再生のシナリオが複数作成さ
れるので、ユーザーは、異なる基準に基づいたシナリオ
データによるダイジェスト再生を見ることができ、映像
情報を概観しやすくなるとともに、重要シーンを見つけ
やすくなる。つまり、ある映像情報について、複数のシ
ナリオデータが作成されるので、ダイジェスト再生に用
いるシナリオデータを切り替えていくことにより、種々
の基準に基づくダイジェスト再生を見ることができ、映
像情報を概観しやすくなる。

【０１１２】なお、ダイジェスト再生に際して、複数の
番組を同時に再生するようにしてもよい。つまり、デコ
ーダ３２に動画サムネイル表示機能を設けることによ
り、図１１も示すように、複数の番組のダイジェスト再
生を同時にサムネイル再生するようにしてもよい。図１
１に示す例は、モニタ３６の表示画面において、上段に
おいては、ニュース＊＊＊の番組がダイジェスト再生さ
れ、中段においては、ドラマＡＡＡの番組がダイジェス
ト再生され、下段においては、ドラマ○○○の番組がダ
イジェスト再生される例である。

【０１１３】つまり、再生データ選択部２６により、複
数の番組の同時ダイジェスト再生を指示することによ
り、各番組についてのシナリオデータがシナリオ保持部
２４から読み出されて、ＡＶデータ読出し部３０に送ら
れて、ＡＶデータ読出し部３０では、ＡＶデータ保持部
２２に記憶された各番組のＡＶデータからシナリオデー
タに従ってセグメントが読み出されて、デコーダ３２に
送られることになる。

【０１１４】また、図１２に示すように、あるシナリオ
データに記憶されたアドレスデータに対応するセグメン
トをそれぞれ一列に表示する表示領域Ｍ１〜Ｍ３等を表
示画面Ｍに設け、各表示領域にセグメントを繰り返し表
示するようにしてもよい。例えば、図５の例で、ショッ
ト番号１１に対応するセグメントを表示領域Ｍ１に繰り
返し表示し、ショット番号１５に対応するセグメントを
表示領域Ｍ２に繰り返し表示する。また、表示領域Ｍ３
には、ショット番号１５の次にシナリオデータに記憶さ
れているショット番号に対応するセグメントが表示され
ることになる。つまり、各セグメントを時間的に前から
後ろに行くに従い、表示画面Ｍの左から右に配置し、そ
のうちの複数個（例えば、図１２に示すように３つ）の
みを表示するようにし、他のセグメントはユーザーが入
力装置を左又は右に操作することにより１画面ずつずれ
て表示できるようにする。

【０１１５】このようにすることにより、ある番組の重
要シーンを一度に見ることができ、その番組の概要を即
座に知ることが可能となる。

【０１１６】なお、同じシナリオに基づきながらもダイ
ジェスト再生時間が異なるシナリオを用意することによ
り、再生時間の長いシナリオを選択した場合には、より
詳細に各シーンを見ることができるようにしてもよい。

【０１１７】これは、同じ重み係数の組み合わせを用い
ながらステップＳ３７で用いるしきい値を異ならせるこ
とにより可能である。例えば、図４の例で、ニュースに
おいて優先度１の重み係数（ショット長については、
０．１、コーナー先頭については０．７、顔領域につい
ては０．２）を用いて評価値を算出し、しきい値と比較
するが、この際、複数のしきい値を用意して判定を行
う。例えば、しきい値ａとしきい値ｂ（しきい値ａ＞し
きい値ｂ）とを用意し、評価値としきい値ａとの比較結
果に基づいたシナリオデータをシナリオ番号１−１と
し、評価値としきい値ｂとの比較結果に基づいたシナリ
オデータをシナリオ番号１−２としてそれぞれをシナリ
オデータテーブルに書き込む。この場合、しきい値ｂの
方がしきい値ａよりも小さいので、シナリオデータとし
て書き込まれるアドレスデータの数もしきい値ｂの方が
多くなる可能性が高くなる。

【０１１８】そして、ダイジェスト再生に際して、シナ
リオ番号１−１とシナリオ番号１−２のいずれかを選択
できるようにすることにより、同じ重み係数の組み合わ
せにより作成されたシナリオであるにも拘わらず、再生
時間の異なるように構成することが可能となる。

【０１１９】なお、ダイジェスト再生をする場合に、ど
のようなシナリオに基づいて再生をしているのかが分か
るようにしておくことが好ましい。つまり、シナリオの
内容が分かるように、再生画面中に表示を行う。例え
ば、図４の例では、ニュースにおいて、シナリオ番号１
のシナリオ（つまり、優先度１のシナリオ）では、コー
ナー先頭をかなり評価するので、例えば、「コーナー先
頭多いモード」と再生画面の端位置等に表示し、シナリ
オ番号２のシナリオでは、コーナー先頭を評価するもの
のシナリオ番号１ほどではないので、例えば、「コーナ
ー先頭やや多いモード」と表示し、シナリオ番号３のシ
ナリオでは、コーナー先頭と顔領域とを等分に評価して
いるので、例えば、「コーナー先頭、顔領域やや多いモ
ード」等と表示する。

【０１２０】なお、上記の説明では、特徴量の基礎とし
て、ショット長や、コーナー先頭であることや、顔領域
があることを例に挙げたが、これだけには限られず、例
えば、テロップがあること等他の特徴量の基礎を併用し
てもよい。

【０１２１】

【発明の効果】本発明に基づく映像情報記録再生装置及
び映像情報記録再生方法によれば、映像情報のジャンル
ごとに定められた基準に従ってシナリオが作成されて、
該シナリオに基づきダイジェスト再生されるので、番組
のジャンルが異なっても、番組のジャンルごとに最適な
ダイジェスト再生を行うことが可能となる。

【０１２２】また、本発明に基づく映像情報記録再生装
置及び映像情報記録再生方法によれば、複数の基準に基
づいてダイジェスト再生のシナリオが複数作成されるの
で、ユーザーは、異なる基準に基づいたシナリオによる
ダイジェスト再生を見ることができ、映像情報を概観し
やすくなるとともに、重要シーンを見つけやすくなる。
例えば、登場人物を把握したい場合には、顔領域が存在
するシーンに重きをおいた基準に従ったシナリオを再生
すればよい。

【図面の簡単な説明】

【図１】本発明の実施例に基づく映像情報記録再生装置
の構成を示すブロック図である。

【図２】検出結果記憶テーブルの構成を示す説明図であ
る。

【図３】特徴量記憶テーブルの構成を示す説明図であ
る。

【図４】重み係数テーブルの構成を示す説明図である。

【図５】シナリオデータテーブルの構成を示す説明図で
ある。

【図６】本発明の実施例に基づく映像情報記録再生装置
の動作を説明するためのフローチャートである。

【図７】本発明の実施例に基づく映像情報記録再生装置
の動作を説明するためのフローチャートである。

【図８】本発明の実施例に基づく映像情報記録再生装置
の動作を説明するためのフローチャートである。

【図９】本発明の実施例に基づく映像情報記録再生装置
の動作を説明するための説明図である。

【図１０】本発明の実施例に基づく映像情報記録再生装
置の動作を説明するための説明図である。

【図１１】再生における表示の一例を示す説明図であ
る。

【図１２】再生における表示の一例を示す説明図であ
る。

【符号の説明】

Ａ 映像情報記録再生装置 １０ データ分離部 １１、１５ Ａ／Ｄ変換部 １２ 番組付加情報抽出部 １４ ＥＰＧデータ保持部 １６ エンコーダ １８ インデキシング部 １９ データ保持部 ２０ 重み係数テーブル ２２ ＡＶデータ保持部 ２４ シナリオ保持部 ２６ 再生データ選択部 ２８ ナビゲーション制御部 ３０ ＡＶデータ読出し部 ３２ デコーダ ３４ Ｄ／Ａ変換部 ３６ モニタ

Claims (25)

【特許請求の範囲】
1. 【請求項１】 映像情報の記録・再生を行う映像情報記
   録再生装置であって、 映像情報を記憶する映像情報記憶手段と、 映像情報における各シーンごとに複数種類の特徴量を検
   出する特徴量検出手段と、 映像情報のジャンルごとに定められた基準で、該特徴量
   を評価するための基準に従い、検出された特徴量を評価
   する評価手段と、 該評価手段による評価結果に基づき、該シーン又は該シ
   ーンの一部を特定する情報である特定情報を記憶するこ
   とにより、該特定情報からなるシナリオデータを記憶す
   るシナリオ記憶手段と、 該シナリオ記憶手段に記憶されたシナリオデータに基づ
   いて、該映像情報記憶手段に記憶された映像データか
   ら、所定のシーン又は該シーンの一部を読み出して再生
   を行うシナリオ再生手段と、を有することを特徴とする
   映像情報記録再生装置。
2. 【請求項２】 映像情報の記録・再生を行う映像情報記
   録再生装置であって、 映像情報を記憶する映像情報記憶手段と、 映像情報における各シーンごとに複数種類の特徴量を検
   出する特徴量検出手段と、 該特徴量検出手段により検出された特徴量を複数種類の
   基準に従いそれぞれ評価する評価手段と、 該評価手段による評価結果に基づき、該シーン又は該シ
   ーンの一部を特定する情報である特定情報を各基準ごと
   に記憶することにより、各基準ごとに該特定情報からな
   るシナリオデータを記憶するシナリオ記憶手段と、 該シナリオ記憶手段に記憶されたシナリオデータのうち
   の所定の基準に基づくシナリオデータに基づいて、該映
   像報記憶手段に記憶された映像データから、所定のシー
   ン又は該シーンの一部を読み出して再生を行うシナリオ
   再生手段と、を有することを特徴とする映像情報記録再
   生装置。
3. 【請求項３】 上記評価手段が、さらに、映像情報のジ
   ャンルごとに定められた基準で、該特徴量を評価するた
   めの基準に従い、検出された特徴量を評価することを特
   徴とする請求項２に記載の映像情報記録再生装置。
4. 【請求項４】 上記評価手段が、各特徴量について重み
   付けを行なうための重み係数が各特徴量ごとに設けられ
   た重み係数群が、複数種類のジャンルについてそれぞれ
   設けられた重み係数記憶部を有し、 上記評価手段は、映像情報のジャンルに対応する重み係
   数群を用いて特徴量を評価することを特徴とする請求項
   １又は３に記載の映像情報記録再生装置。
5. 【請求項５】 上記評価手段が、各特徴量について重み
   付けを行なうための重み係数が各特徴量ごとに設けられ
   た重み係数群が優先順位に従い複数設けられた重み係数
   記憶部を有し、 上記評価手段は、各重み係数群を用いてそれぞれ特徴量
   を評価することにより、該特徴量を複数種類の基準に従
   い評価することを特徴とする請求項２に記載の映像情報
   記録再生装置。
6. 【請求項６】 上記評価手段が、重み係数群集合であっ
   て、各特徴量について重み付けを行なうための重み係数
   が各特徴量ごとに設けられた重み係数群が優先順位に従
   い複数設けられた重み係数群集合を複数のジャンルにつ
   いてそれぞれ有する重み係数記憶部を有し、 上記評価手段は、映像情報のジャンルに対応する重み係
   数群集合における複数の重み係数群を用いてそれぞれ特
   徴量を評価することにより、該特徴量を複数種類の基準
   に従い評価することを特徴とする請求項３に記載の映像
   情報記録再生装置。
7. 【請求項７】 上記評価手段は、各特徴量と対応する重
   み係数とを乗算した値を積算した値を、所定のしきい値
   と比較し、該積算した値が該所定のしきい値よりも大き
   いか否かを判定することを特徴とする請求項４に記載の
   映像情報記録再生装置。
8. 【請求項８】 上記評価手段は、各特徴量と対応する重
   み係数とを乗算した値を積算した値を、所定のしきい値
   と比較し、該積算した値が該所定のしきい値よりも大き
   いか否かを判定することを特徴とする請求項５又は６に
   記載の映像情報記録再生装置。
9. 【請求項９】 上記シナリオ記憶手段は、上記積算した
   値が上記所定のしきい値よりも大きい場合に、そのシー
   ン又は該シーンの一部を特定する情報である特定情報を
   記憶していくことを特徴とする請求項７又は８に記載の
   映像情報記録再生装置。
10. 【請求項１０】 上記評価手段は、評価に用いる複数種
    類のしきい値を有し、各しきい値に基づいて評価を行
    い、また、上記シナリオ記憶手段は、各しきい値に基づ
    く評価結果に基づき、各しきい値ごとにシナリオデータ
    を記憶することを特徴とする請求項７又は８又は９に記
    載の映像情報記録再生装置。
11. 【請求項１１】 上記映像情報記録再生装置が、さら
    に、 入力された受信データであって、映像情報と、該映像情
    報のジャンルを特定するための情報とを含む受信データ
    を、該映像情報と、該映像情報のジャンルを特定するた
    めの情報とに分離する分離手段を有し、 上記評価手段は、該分離手段で分離された映像情報のジ
    ャンルを特定するための情報に基づいて、評価を行うこ
    とを特徴とする請求項１又は３又は４又は６又は７又は
    ８又は９又は１０に記載の映像情報記録再生装置。
12. 【請求項１２】 上記映像情報記録再生装置は、 ある映像情報について上記シナリオ記憶手段に記憶され
    た複数のシナリオデータのうち、シナリオ再生手段によ
    り再生を行うのに使用するシナリオデータを選択するシ
    ナリオ選択手段を有することを特徴とする請求項２又は
    ３又は４又は５又は６又は７又は８又は９又は１０又は
    １１に記載の映像情報記録再生装置。
13. 【請求項１３】 上記シナリオ再生手段は、ある映像情
    報について上記シナリオ記憶手段に記憶された複数のシ
    ナリオデータのうち、再生に用いているシナリオデータ
    の種類をユーザーに通知する機能を有していることを特
    徴とする請求項２又は３又は４又は５又は６又は７又は
    ８又は９又は１０又は１１又は１２に記載の映像情報記
    録再生装置。
14. 【請求項１４】 上記映像情報記憶手段に複数の映像情
    報が記憶された場合に、上記シナリオ再生手段は、該複
    数の映像情報を各映像情報のシナリオに基づいて、表示
    画面を分割表示することにより、同時に再生することを
    特徴とする請求項１又は２又は３又は４又は５又は６又
    は７又は８又は９又は１０又は１１又は１２又は１３に
    記載の映像情報記録再生装置。
15. 【請求項１５】 上記シナリオ再生手段は、ある映像情
    報を再生する際に、シナリオデータに記憶された特定情
    報により特定されたシーン又はシーンの一部のうちの少
    なくとも２以上を表示画面に同時に表示することを特徴
    とする請求項１又は２又は３又は４又は５又は６又は７
    又は８又は９又は１０又は１１又は１２又は１３又は１
    ４に記載の映像情報記録再生装置。
16. 【請求項１６】 上記特徴量検出手段が、 映像情報における各シーン間の境界を検出することによ
    り、各シーンごとに分割する分割手段と、 分割された各シーンの長さを検出することにより、該シ
    ーンの長さに関する特徴量であるシーン長さ特徴量を検
    出するシーン長さ特徴量検出手段と、 分割された各シーンにおいて、音声レベルに関する特徴
    点を検出することにより、音声レベルに関する特徴量で
    ある音声レベル特徴量を検出する音声レベル特徴量検出
    手段と、 分割された各シーンにおいて、顔領域を検出することに
    より、顔領域に関する特徴量である顔領域特徴量を検出
    する顔領域特徴量検出手段と、を有することを特徴とす
    る請求項１又は２又は３又は４又は５又は６又は７又は
    ８又は９又は１０又は１１又は１２又は１３又は１４又
    は１５に記載の映像情報記録再生装置。
17. 【請求項１７】 上記シーン長さ特徴量検出手段が、映
    像情報を構成する複数のフレームについて順次前フレー
    ムとの連続性を検出して、該前フレームとの連続性がな
    いフレームをカット点として検出し、該カット点となる
    フレームから次のカット点となるフレームの前のフレー
    ムまでを１つのシーンとして、該シーンの長さを検出
    し、該シーンの長さに応じて定められた特徴量を割り出
    すことを特徴とする請求項１６に記載の映像情報記録再
    生装置。
18. 【請求項１８】 上記音声レベル特徴量検出手段が、音
    声レベルが所定値以下である無音状態を逐次検出するこ
    とにより、所定の特徴量を検出することを特徴とする請
    求項１６又は１７に記載の映像情報記録再生装置。
19. 【請求項１９】 上記音声レベル特徴量検出手段が、音
    声レベルが所定値以下である無音状態を逐次検出してい
    き、音声レベルが該所定値を越えている状態が所定時間
    以上続く有音区間が検出された場合に、該有音区間の直
    前に検出された無音状態の位置のフレームをコーナー先
    頭として検出し、該コーナー先頭が検出された場合に所
    定の特徴量を割り出すことを特徴とする請求項１６又は
    １７又は１８に記載の映像情報記録再生装置。
20. 【請求項２０】 上記顔領域特徴量検出手段が、映像情
    報を構成する複数のフレームについて逐次顔領域が存在
    するか否かを検出し、顔領域が存在するフレームがある
    場合に所定の特徴量を割り出すことを特徴とする請求項
    １６又は１７又は１８又は１９に記載の映像情報記録再
    生装置。
21. 【請求項２１】 上記特定情報が、上記映像情報記憶手
    段に記憶された映像情報の読出し先頭位置のフレームを
    特定するための情報であることを特徴とする請求項１又
    は２又は３又は４又は５又は６又は７又は８又は９又は
    １０又は１１又は１２又は１３又は１４又は１５又は１
    ６又は１７又は１８又は１９又は２０に記載の映像情報
    記録再生装置。
22. 【請求項２２】 上記特徴量検出手段による特徴量の検
    出と、上記評価手段による判定と、上記シナリオ記憶手
    段によるシナリオデータの記憶とは、映像情報記録再生
    装置に入力された映像情報を映像情報記憶手段に記憶す
    る際に、並行して行われることを特徴とする請求項１又
    は２又は３又は４又は５又は６又は７又は８又は９又は
    １０又は１１又は１２又は１３又は１４又は１５又は１
    ６又は１７又は１８又は１９又は２０又は２１に記載の
    映像情報記録再生装置。
23. 【請求項２３】 映像情報の記録・再生を行う映像情報
    記録再生方法であって、 映像情報を所定の記憶装置に記憶する映像情報記憶工程
    と、 映像情報における各シーンごとに複数種類の特徴量を検
    出する特徴量検出工程と、 映像情報のジャンルごとに定められた基準で、該特徴量
    を評価するための基準に従い、検出された特徴量を評価
    する評価工程と、 該評価工程における評価結果に基づき、該シーン又は該
    シーンの一部を特定する情報である特定情報を所定の記
    憶装置に記憶することにより、該特定情報からなるシナ
    リオデータを記憶するシナリオ記憶工程と、 該シナリオ記憶工程において記憶されたシナリオデータ
    に基づいて、該映像情報記憶工程において記憶された映
    像データから、所定のシーン又は該シーンの一部を読み
    出して再生を行うシナリオ再生工程と、を有することを
    特徴とする映像情報記録再生方法。
24. 【請求項２４】 映像情報の記録・再生を行う映像情報
    記録再生方法であって、 映像情報を所定の記憶装置に記憶する映像情報記憶工程
    と、 映像情報における各シーンごとに複数種類の特徴量を検
    出する特徴量検出工程と、 該特徴量検出工程において検出された特徴量を複数種類
    の基準に従いそれぞれ評価する評価工程と、 該評価工程による評価結果に基づき、該シーン又は該シ
    ーンの一部を特定する情報である特定情報を各基準ごと
    に所定の記憶装置に記憶することにより、各基準ごとに
    該特定情報からなるシナリオデータを記憶するシナリオ
    記憶工程と、 該シナリオ記憶工程において記憶されたシナリオデータ
    のうちの所定の基準に基づくシナリオデータに基づい
    て、該映像報記憶工程において記憶された映像データか
    ら、所定のシーン又は該シーンの一部を読み出して再生
    を行うシナリオ再生工程と、を有することを特徴とする
    映像情報記録再生方法。
25. 【請求項２５】 上記評価工程において、さらに、映像
    情報のジャンルごとに定められた基準で、該特徴量を評
    価するための基準に従い、検出された特徴量を評価する
    ことを特徴とする請求項２４に記載の映像情報記録再生
    方法。