JP2003219348A - 情報信号処理装置および情報信号処理方法 - Google Patents

情報信号処理装置および情報信号処理方法

Info

Publication number
JP2003219348A
JP2003219348A JP2002009777A JP2002009777A JP2003219348A JP 2003219348 A JP2003219348 A JP 2003219348A JP 2002009777 A JP2002009777 A JP 2002009777A JP 2002009777 A JP2002009777 A JP 2002009777A JP 2003219348 A JP2003219348 A JP 2003219348A
Authority
JP
Japan
Prior art keywords
information signal
information
recording
signal
recorded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002009777A
Other languages
English (en)
Other versions
JP3772117B2 (ja
Inventor
Noboru Murabayashi
昇 村林
Hiroshige Okamoto
裕成 岡本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2002009777A priority Critical patent/JP3772117B2/ja
Priority to PCT/JP2003/000204 priority patent/WO2003065711A1/ja
Priority to CNB038060248A priority patent/CN100512402C/zh
Priority to KR1020047011200A priority patent/KR100909144B1/ko
Priority to US10/501,840 priority patent/US7630613B2/en
Publication of JP2003219348A publication Critical patent/JP2003219348A/ja
Application granted granted Critical
Publication of JP3772117B2 publication Critical patent/JP3772117B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Studio Circuits (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

(57)【要約】 【課題】 大容量の記録媒体に大量に記録する情報信号
を効果的に、かつ、効率的に活用できるようにし、一方
では、情報信号を記録する記録媒体についても効率的な
活用を実現する情報信号処理装置を提供する。 【解決手段】 画像信号の記録媒体８への記録時におい
て、画像分類処理部５において、画像信号の類似画像を
判別し、類似画像区間同士の類似についても分類するよ
うにする。そして、類似する類似画像区間毎に、各類似
画像区間のうちの１枚の画像をサムネイルとして分類表
示部１９に表示していき、記録媒体８に記録される画像
信号の内容をサムネイルの一覧表示により効果的、効率
的に把握できるようにする。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】この発明は、例えば、画像信
号や音声信号などの情報信号を記録媒体に記録する情報
信号処理装置、情報信号処理方法、および、記録媒体に
記録された情報信号を再生する情報信号処理装置、情報
信号処理方法に関する。
【０００２】
【従来の技術】従来の地上波テレビ放送などの他、ＢＳ
（Broadcasting Satellite）デジタル放送や通信ネット
ワークなど様々な経路を通じて、種々の画像信号や音声
信号が豊富に提供されるようになってきている。また、
通信ネットワークについて言えば、ブロードバンド化に
より、大量のデジタル画像信号やデジタル音声信号を高
速にエンドユーザに提供することも行なわれるようにな
ってきている。
【０００３】また、ハードディスクなどの磁気ディスク
やＤＶＤ（Digital Versatile Disk）などの光ディス
ク、ＭＯなどと呼ばれる光磁気ディスクなどの種々の記
録媒体（記録メディア）の大容量化や、記録媒体や記録
再生装置の低コスト化も急速に進められている。これに
より、種々の経路を通じて豊富に提供される画像信号や
音声信号などの情報信号をエンドユーザが自己の記録再
生装置を通じて自己の記録媒体に大量に記録し、これを
利用することができるようになってきている。
【０００４】
【発明が解決しようとする課題】ところで、前述したよ
うに、大容量化されたハードディスクなどのディスク記
録媒体に放送番組の画像信号や音声信号などの情報信号
を記録した場合に、ディスク記録媒体のアクセス性の良
さを活用し、目的とする放送番組の目的とするシーンを
迅速に検索して、再生するようにするなど、情報信号を
有効に、かつ、効率的に利用できるようにしたいとする
要求が高くなると考えられる。
【０００５】また、大容量とはいってもその記憶容量が
有限である記録媒体をできるだけ有効に活用できるよう
にするとともに、記録容量が不足することによる不都合
を防止することについても考慮しておく必要がある。
【０００６】以上のことにかんがみ、この発明は、大容
量の記録媒体に大量に記録する情報信号を効果的に、か
つ、効率的に活用できるようにし、また一方では、情報
信号を記録する記録媒体についても効率的な活用を実現
する情報信号処理装置および情報信号処理方法を提供す
ることを目的とする。
【０００７】
【課題を解決するための手段】上記課題を解決するた
め、請求項１に記載の発明の情報信号処理装置は、記録
の対象となっている第１の情報信号の所定の処理単位毎
に当該第１の情報信号の特性を示す特性情報を検出する
特性情報検出手段と、前記特性情報検出手段からの検出
結果に基づいて、前記第１の情報信号について特性の類
似する区間を分類するようにする分類処理手段と、前記
第１の情報信号の所定の処理単位毎に、当該第１の情報
信号と対応関係のある第２の情報信号を生成する情報信
号生成手段と、分類された区間毎に一覧表示に用いる第
２の情報信号を識別するとともに、その第２の情報信号
の表示位置を識別するための識別情報を、前記分類処理
手段においての分類処理の結果に基づいて形成する識別
情報形成手段と、前記第１の情報信号と、前記第２の情
報信号と、前記識別情報とを記録媒体に記録する記録手
段とを備えることを特徴とする。
【０００８】この請求項１に記載の発明の情報信号処理
装置によれば、第１の情報信号として、例えば画像信号
の場合を例にすると、特性情報検出手段により、フレー
ム単位、あるいは、Ｉ(Intra-code）ピクチャ単位とい
った所定の処理単位毎に第１の情報信号の特性情報が検
出され、この特性情報に基づいて、分類処理手段により
第１の情報信号が特性の類似する区間に分類するように
される。
【０００９】そして、情報信号生成手段により、第１の
情報信号から第２の情報信号が生成される。つまり、フ
レーム単位、あるいは、Ｉピクチャ単位にサムネイル表
示を行なうための縮小画像データが第２の情報信号とし
て生成される。そして、分類処理手段による分類の結果
に基づいて、分類された区間毎にサムネイルの一覧表示
に用いる１枚のサムネイルを形成する縮小画像データを
識別し、そのサムネイルを表示する画面上の位置（ある
いは表示順）を識別するための識別情報が、識別情報形
成手段により形成される。
【００１０】そして、第１の情報信号と、第２の情報信
号と、識別情報とが記録手段により記録媒体に記録さ
れ、例えば、記録終了時において、第２の情報信号によ
るサムネイル表示を行なうことによって、第１の情報信
号の全部の再生を行なうことなく、記録した第１の情報
信号の記録内容を効果的に、かつ、効率的に把握するこ
とができるようにされる。
【００１１】また、第１の情報信号は画像信号だけでな
く、例えば、音声信号であってもよい。音声信号の場合
には、所定時間分毎に特性情報の検出を行ない、音楽音
声部分部分、話音声部分、あるいは、男性音声部分、女
性音声部分などに分類して、その分類区間を示す表示情
報を第２の情報信号として形成し、一覧表示することに
より、記録した第１の情報信号の記録内容を効果的に、
かつ、効率的に把握することができるようにされる。ま
た、所定の処理単位毎に特性情報を検出し、分類可能な
各種の情報信号を第１の情報信号として用いる場合に効
果がある。
【００１２】また、請求項２に記載の発明の情報信号処
理装置は、記録の対象となっている第１の情報信号の所
定の処理単位毎に当該第１の情報信号の特性を示す特性
情報を検出する特性情報検出手段と、前記特性情報検出
手段からの検出結果に基づいて、前記第１の情報信号に
ついて特性の類似する区間を分類するようにする分類処
理手段と、前記分類処理手段により分類された区間毎
に、前記特性情報検出手段からの検出結果に基づいて決
められる１つの処理単位の前記第１の情報信号に基づい
て、第２の情報信号を形成する情報信号形成手段と、一
覧表示に用いる第２の情報信号の表示位置を識別するた
めの識別情報を、前記分類処理手段においての分類処理
の結果に基づいて形成する識別情報形成手段と、前記第
１の情報信号と、前記第２の情報信号と、前記識別情報
とを記録媒体に記録する記録手段とを備えることを特徴
とする。
【００１３】この請求項２に記載の情報信号処理装置に
よれば、請求項１に記載の情報信号処理装置の情報信号
形成手段が、所定の処理単位毎に第２の情報信号を形成
するのに対し、この請求項２に記載の情報信号形成手段
は、特性情報に基づいて、特性が類似する区間毎に、た
だ１つの処理単位の第１の情報信号を用いて、第２の情
報信号が形成される。
【００１４】例えば、第１の情報信号が、画像信号であ
る場合には、類似画像が連続する１つの類似区間におい
て、そのうちの１つのフレーム、あるいは、１つのＩピ
クチャのサムネイル用の縮小画像データが形成される。
つまり、類似画像の全部についてサムネイル用の縮小画
像を作成しても、一覧表示のために使用するのは１つで
よいので、無駄に第２の情報信号を形成しないようにす
ることが可能となる。
【００１５】これにより、第２の情報信号のデータ量を
できるだけ減らし、記録容量が有限である記録媒体を効
率よく使用することができるとともに、第２の情報信号
を用いた一覧表示を行なうことによって、第１の情報信
号の全部の再生を行なうことなく、記録した第１の情報
信号の記録内容を効果的に、かつ、効率的に把握するこ
とができるようにされる。
【００１６】また、請求項５に記載の発明の情報信号処
理装置は、記録の対象となっている第１の情報信号の所
定の処理単位毎に当該第１の情報信号の特性を示す特性
情報を検出する特性情報検出手段と、前記特性情報検出
手段からの検出結果に基づいて、前記第１の情報信号の
うちの所定の信号区間を識別するための識別情報を生成
する識別情報生成手段と、前記第１の情報信号を所定の
記録媒体の予め決められた記録方式により設定される第
１の記録領域に記録するとともに、前記識別情報により
識別される前記第１の情報信号のうちの所定の信号区間
の情報信号を第２の情報信号として前記記録媒体の予め
決められた記録方式により設定される第２の記録領域に
記録する記録手段とを備えることを特徴とする。
【００１７】この請求項５に記載の情報信号処理装置に
よれば、特性情報検出手段により検出された特性情報に
基づいて、例えばダイジェスト再生に用いるなどのため
の第１の情報信号の所定の信号区間が識別するようにさ
れる。そして、対になる第１の情報信号と、第１の情報
信号から識別情報に基づいて抽出されて形成される第２
の情報信号とは、記録手段により、予め決められた記録
方式に従って設定される第１の記録領域と、第２の記録
領域とにそれぞれ別々に記録される。
【００１８】これにより、対になる第１の情報信号と第
２の情報信号との記録領域を別々に管理し、例えば、第
２の情報信号は全て残すが、第１の情報信号は最新のも
ののみを残すなどというように、記録媒体の記録容量を
効率的に活用することができるようにされる。
【００１９】また、請求項６に記載の情報信号処理装置
は、請求項５に記載の情報信号処理装置であって、前記
記録手段は、複数の前記第１の情報信号を記録可能な記
録容量を有する１まとまりの前記第１の記憶領域に前記
第１の情報信号を記録し、複数の前記第２の情報信号を
記録可能な記録容量を有する１まとまりの前記第２の記
録領域に前記第２の情報信号を記録することを特徴とす
る。
【００２０】この請求項６に記載の情報信号処理装置
は、第１の記録領域は、複数の第１の情報信号を記録す
ることが可能なものとして設定され、第２の記録領域
は、複数の第２の情報信号を記録することが可能なもの
として設定される。これにより、より多くの情報を残し
たい方の記録領域を多く確保するなどして、第１の情報
信号と第２の情報信号との記録管理を行ない、記録媒体
を効率的に活用することができるようにされる。
【００２１】また、請求項７に記載の発明の情報信号処
理装置は、請求項５に記載の情報信号処理装置であっ
て、前記記録手段は、１つ分の前記第１の情報信号を記
録する第１の記録領域と１つ分の前記第２の情報信号を
記録する第２の記録領域とを設けるようにし、前記第１
の記録領域に前記第１の情報信号を記録し、前記第２の
記録領域に前記第２の情報信号を記録することを特徴と
する。
【００２２】この請求項７に記載の情報信号処理装置に
よれば、例えば、記録時において、第１の記録領域は、
１つ分の第１の情報信号を記録することが可能な記録領
域として設定するようにされ、第２の記録領域もまた、
１つ分の第２の情報信号を記録することが可能な記録領
域として設定するようにされる。
【００２３】これにより、第１、第２の記録領域を予め
大きく取っておくことは無いので、記録媒体を効率的に
使用することができるとともに、記録媒体の全体の記録
領域を管理しておけば、記録領域の不足が予想される場
合を検出することが可能となるようにされる。
【００２４】また、請求項８に記載の発明の情報信号処
理装置は、請求項５に記載の情報信号処理装置であっ
て、記録方式の選択入力を受け付ける選択入力受付手段
を備え、前記記録手段は、前記選択入力受付手段を通じ
て受け付けた前記選択入力に応じた記録方式で前記記録
媒体に第１の記録領域と第２の記録領域とを設定し、第
１の記録領域に第１の情報信号を記録し、第２の記録領
域に第２の情報信号を記録することを特徴とする。
【００２５】この請求項８に記載の情報信号処理装置に
よれば、選択入力受付手段を通じて用いる記録方式をユ
ーザが選択することができるようにされ、選択入力受付
手段を通じて受け付けた記録方式で記録媒体に確保され
る第１の記録領域に第１の情報信号が記録され、同様に
して記録媒体に記録される第２の記録領域に第２の情報
信号が記録される。
【００２６】これにより、ユーザの利用形態に応じて、
第１、第２の記録領域の確保の方式を選択し、その選択
した記録方式に応じて確保される第１、第２の記録領域
に第１、第２の情報信号を記録することができるように
される。そして、ユーザの意図した記録方式で記録媒体
に情報信号を記録し記録媒体を効率的に利用することが
できるようにされる。
【００２７】また、請求項９に記載の発明の情報信号処
理装置は、請求項８に記載の情報信号処理装置であっ
て、前記記録方式として、少なくとも、前記第１の記録
領域を複数の第１の情報信号を記録可能な記録容量を有
する１まとまりの前記第１の情報信号を記録し、前記第
２の記録領域を複数の第２の情報信号を記録可能な記録
容量を有する１まとまりの前記第２の情報信号を記録す
る第１の記録方式と、１つ分の前記第１の情報信号を記
録する第１の記録領域と１つ分の前記第２の情報信号を
記録する第２の記録領域とを隣接して交互に設けるよう
にし、前記第１の記録領域に前記第１の情報信号を記録
し、前記第２の記録領域に前記第２の情報信号を記録す
る第２の記録方式とのうちの一方を選択することができ
るようにされていることを特徴とする。
【００２８】この請求項９に記載の発明の情報信号処理
装置によれば、選択可能な記録方式として、少なくとも
第１の記録方式と第２の記録方式との２つが用意され、
ユーザはそのうちのいずれかを選択して用いることがで
きるようにされる。これにより、ユーザは、情報信号の
自己の利用形態に応じて、第１の記録方式と第２の記録
方式とを選択して用いることができるようにされ、ユー
ザの意図した記録方式で、情報信号を記録し、結果とし
て記録媒体を効率よく使用することができるようにされ
る。
【００２９】また、請求項１０に記載の発明の情報信号
処理装置は、請求項５、請求項６、請求項７、請求項８
または請求項９に記載の情報信号処理装置であって、前
記記録媒体の空き記録容量を検出する記録容量検出手段
と、前記第１の情報信号を前記記録媒体に記録する際
に、前記記録容量検出手段により前記記録媒体の空き領
域が第１の情報信号を記録するのに不足することが検出
された場合には、前記第１の記録領域に最古に記録され
た前記第１の情報信号の記録領域に最新の前記第１の情
報信号を記録するようにするとともに、第２の記録領域
には侵食しないように制御する記録制御手段とを備える
ことを特徴とする。
【００３０】この請求項１０に記載の発明の情報信号処
理装置によれば、第１の情報信号を記録するに際して記
録媒体の空き容量が不足する恐れがあることが検出され
た場合には、最古に記録媒体に記録された第１の情報信
号の記録領域に最新の第１の情報信号を上書き記録（重
ね書き記録）するようにし、最新の第１の情報信号を最
古の情報信号の記録領域に記録しきれない場合に、空き
領域にその最新の第１の情報信号の続きを記録するよう
にされる。
【００３１】これにより、第１の情報信号の所定の信号
区間の信号が抽出されて形成される第２の情報信号を優
先的に記録媒体に残すようにし、記録媒体の記録容量を
有効に使用することができるようにされる。すなわち、
本編データである第１の情報信号は記録容量が不足する
場合には上書き記録されて消滅するようにされるが、そ
の第１の情報信号と対をなす第２の情報信号は記録媒体
に残され、少なくとも第２の情報信号の利用可能状態が
維持するようにされる。
【００３２】また、請求項１７に記載の情報信号処理装
置は、記録の対象となっている第１の情報信号の所定の
処理単位毎に当該第１の情報信号の特性を示す特性情報
を検出する特性情報検出手段と、前記特性情報検出手段
からの検出結果に基づいて、前記第１の情報信号のうち
の所定の情報信号を識別するための識別情報を生成する
識別情報生成手段と、前記識別情報生成手段により生成
された前記識別情報を前記第１の情報信号に付加する識
別情報付加手段と、前記識別情報付加手段により前記識
別情報が付加された前記第１の情報信号を第１の記録媒
体に記録する第１の記録手段と、所定のタイミングにお
いて、前記第１の記録媒体の空き容量を検出する記憶容
量検出手段と、前記記憶容量検出手段により、前記第１
の空き容量が所定値以下になったことが検出された場合
に、前記第１の記録媒体に記録されている１つ以上の前
記第１の情報信号の全部を第２の記録媒体に移動するよ
うにするとともに、移動するようにされた前記第１の情
報信号のうちの前記識別情報により識別される信号区間
の情報信号は第２の情報信号として前記第１の記録媒体
にも残すようにする第２の記録手段とを備えることを特
徴とする。
【００３３】この請求項１７に記載の情報信号処理装置
によれば、特性情報検出手段により第１の情報信号の所
定単位毎の特性情報が検出され、この特性情報に基づい
て第１の情報信号のうち例えばダイジェスト再生などに
用いられるなどする所定の情報信号を識別するための識
別情報が生成される。
【００３４】生成された識別情報は第１の情報信号に付
加され第１の記録手段により第１の記録媒体に記録され
ることになる。そして、第１の情報信号の記録時などの
所定のタイミングで第１の記録媒体の空き容量（残容
量）が検出される。
【００３５】検出された空き容量が所定値以下である場
合には、既に第１の記録媒体に記録されている１つ以上
の第１の情報信号の全信号区間が第２の記録手段により
第２の記録媒体に移動するようにされるとともに、移動
するようにされる第１の情報信号の識別情報により識別
される信号区間の情報信号は第２の情報信号として第１
の記録媒体にも残すようにされる。
【００３６】これにより、第１の記録媒体の記憶容量が
不足してきた場合にも、これに記録された第１の情報信
号は第２の記録媒体に移し変えられるので、第１の情報
信号自体が使用不能になることを防止することができる
とともに、第１の記録媒体にいつも所定量以上の空き領
域を確保し、新たな第１の情報信号が記録できなくなる
状態を回避することができるようにされる。すなわち、
記録媒体の効率的な利用が実現される。
【００３７】また、第１の情報信号のうち、識別情報に
より識別される信号区間の情報信号は、第２の情報信号
として第１の記録媒体に残すようにされるので、必要に
応じて第１の記録媒体に記録された第２の情報信号はい
つでも利用することができるようにされる。第１の記録
媒体がハードディスクなどのアクセス性の良い記録媒体
である場合には、そのアクセス性を十分に利用すること
ができるようにされる。
【００３８】また、請求項１８に記載の情報信号処理装
置は、記録の対象となっている第１の情報信号の所定の
処理単位毎に当該第１の情報信号の特性を示す特性情報
を検出する特性情報検出手段と、前記特性情報検出手段
からの検出結果に基づいて、前記第１の情報信号のうち
の所定の情報信号を識別するための識別情報を生成する
識別情報生成手段と、前記第１の情報信号を第１の記録
媒体に記録するとともに、前記識別情報により識別され
る前記第１の情報信号のうちの所定の情報信号を第２の
情報信号として前記第１の記録媒体に記録する第１の記
録手段と、所定のタイミングにおいて、前記第１の記録
媒体の空き容量を検出する記憶容量検出手段と、前記記
憶容量検出手段により、前記第１の空き容量が所定値以
下になったことが検出された場合に、前記第１の記録媒
体に記録されている１つ以上の前記第１の情報信号のみ
を第２の記録媒体に移動するようにする第２の記録手段
とを備えることを特徴とする。
【００３９】この請求項１８に記載の情報信号処理装置
によれば、特性情報検出手段により第１の情報信号の所
定単位毎の特性情報が検出され、この特性情報に基づい
て第１の情報信号のうち例えばダイジェスト再生などに
用いられるなどする所定の情報信号を識別するための識
別情報が生成される。
【００４０】そして、第１の記録手段により第１の情報
信号と、第１の情報信号のうちの識別情報により識別さ
れる信号区間の情報信号が第２の情報信号としてそれぞ
れ別個に第１の記録媒体に記録される。そして、第１の
情報信号の記録時などの所定のタイミングで第１の記録
媒体の空き容量（残容量）が検出される。
【００４１】検出された空き容量が所定値以下である場
合には、既に第１の記録媒体に記録されている１つ以上
の第１の情報信号の全信号区間が第２の記録手段により
第２の記録媒体に移動するようにされ、第２の情報信号
は第１の記録媒体に残すようにされる。
【００４２】これにより、第１の記録媒体の記憶容量が
不足してきた場合にも、これに記録された第１の情報信
号は第２の記録媒体に移し変えられるので、第１の情報
信号自体が使用不能になることを防止することができる
とともに、第１の記録媒体にいつも所定量以上の空き領
域を確保し、新たな第１の情報信号が記録できなくなる
状態を回避することができるようにされる。すなわち、
記録媒体の効率的な利用が可能となる。
【００４３】また、第１の情報信号のうち、第２の情報
信号は、第１の記録媒体に残すようにされるので、必要
に応じて第１の記録媒体に記録された第２の情報信号は
いつでも利用することができるようにされる。第１の記
録媒体がハードディスクなどのアクセス性の良い記録媒
体である場合には、そのアクセス性を十分に利用するこ
とができるようにされる。
【００４４】また、請求項２１に記載の発明の情報信号
処理装置は、記録の対象となっている第１の情報信号の
所定の処理単位毎に当該第１の情報信号の特性を示す特
性情報を検出する特性情報検出手段と、前記特性情報検
出手段からの検出結果に基づいて、前記第１の情報信号
について類似区間を検出する類似区間検出手段と、前記
類似区間検出手段からの検出出力に応じて決められる所
定の位置の前記第１の情報信号部分と対応関係のある第
２の情報信号を生成する情報信号生成手段と、前記第１
の情報信号と前記第２の情報信号とを時間的に、あるい
は、位置的に対応付ける対応付け情報を生成する対応付
け情報生成手段と、前記第１の情報信号と、前記情報信
号生成手段からの第２の情報信号と、前記対応付け情報
生成手段からの対応付け情報とを記録媒体に記録する記
録手段と、前記第２の情報信号に応じた情報を時系列順
に表示素子に一覧表示するようにする表示制御手段とを
備えることを特徴とする。
【００４５】この請求項２１に記載の情報信号処理装置
によれば、特性情報検出手段により検出された特性情報
に基づいて類似区間検出手段により類似区間が検出さ
れ、この類似区間内の所定の位置の情報信号と対応関係
のある第２の情報信号が形成される。
【００４６】そして、第１の情報信号と第２の情報信号
とを時間的あるいは位置的に対応付ける対応付け情報が
対応付け情報生成手段により生成される。この対応付け
情報により、第２の情報信号は、第１の情報信号のどの
部分に対応するものかの区別がつくようにされる。
【００４７】この後、第１の情報信号と第２情報信号と
対応付け情報信号とが記録媒体に記録するようにされる
が、記録実行時に平行して、あるいは、記録終了時など
の所定のタイミングにおいて、第２の情報信号に応じた
画像が時系列順に一覧表示するようにされる。これによ
り、第２の情報信号に応じた画像の一覧表示により第１
の情報信号の内容を迅速かつ正確に把握することができ
るようにされる。すなわち、情報信号の効果的、かつ、
効率的な利用が可能とされる。
【００４８】また、請求項２２に記載の情報信号処理装
置は、請求項２１に記載の情報信号処理装置であって、
前記表示素子に一覧表示された前記第２の情報信号に応
じた少なくとも1つの画像を選択するための選択入力を
受け付ける選択入力受付手段と、前記選択入力受付手段
を通じて受け付けた選択入力に応じた画像に対応する位
置から前記第1の情報信号を再生するようにする再生制
御手段とを備えることを特徴とする。
【００４９】この請求項２２に記載の情報信号処理装置
によれば、一覧表示される第２の情報信号に応じた画像
の中から、目的とする画像を選択することにより、その
画像の第２の情報信号に対応する第１の情報信号から再
生を行なうようにすることができるようにされる。これ
により、第１の情報信号の目的とする部分から迅速に再
生を行なうようにすることができるようにされ、情報信
号の効果的、かつ、効率的な利用を実現することができ
るようにされる。
【００５０】また、請求項２５に記載の情報信号処理装
置は、所定の処理単位毎に特性を検出し、検出した前記
特性に基づいて特性の類似する区間に分類され、その分
類が識別可能なように識別情報が付加するようにされて
記録媒体に記録された情報信号を再生する情報信号処理
装置であって、前記記録媒体に記録されている情報信号
を読み出す読み出し手段と、特殊再生実行指示入力を受
け付ける実行指示入力受付手段と、前記実行指示入力受
付手段を通じて、特殊再生を行なうことが指示された場
合に、前記記録媒体に記録されている再生しようとする
前記情報信号に付加されている属性情報、あるいは、使
用者からの指示入力に基づいて、複数の特殊再生モード
の中から用いる特殊再生モードを選択するモード選択手
段と、前記モード選択手段により選択された特殊再生モ
ードに応じて、前記読み出し手段を制御し、読み出す前
記情報信号の範囲を変えるように制御する制御手段とを
備えることを特徴とする。
【００５１】この請求項２５に記載の発明の情報信号処
理装置によれば、記録媒体に記録されている情報信号
は、その情報信号の特性情報に基づいて類似区間が分類
され、その分類が識別可能なように識別情報が付加する
ようにされている。
【００５２】そして、特殊再生モードの実行が指示され
た場合には、記録媒体に記録されている属性情報、ある
いは、ユーザからの指示情報に基づいて、モード選択手
段により用いる特殊再生モードが選択される。
【００５３】この選択された特殊再生モードで、記録媒
体に記録されている情報信号の特殊再生を行なうよう
に、制御手段が読み出し手段を制御し、特殊再生しよう
としている情報信号に応じた特殊再生モードで特殊再生
が行なわれる。
【００５４】これにより、特殊再生する情報信号の属
性、あるいは、使用者からの指示に基づいて、例えば、
各類似区間のみの再生、各類似区間とその前後の所定区
間との再生、各類似区間とその直前の所定区間の再生、
あるいは、各類似区間の所定区間の再生、各類似区間の
所定区間とその直前の所定区間との再生などのように、
再生する情報信号区間が適宜変えられて特殊再生を行な
うことができるようにされる。これらのことにより、情
報信号の効果的、かつ、効率的な使用が実現される。
【００５５】また、請求項２７に記載の発明の情報信号
処理装置は、所定の処理単位毎に特性を検出し、検出し
た前記特性に基づいて特性の類似する類似区間に分類さ
れ、その分類が識別可能なように識別情報が付加するよ
うにされて記録媒体に記録された情報信号を再生する情
報信号処理装置であって、特殊再生実行指示入力を受け
付ける実行指示入力受付手段と、前記記録媒体から再生
する前記情報信号を読み出す読み出し手段と、前記実行
指示入力受付手段を通じて情報信号の特殊再生実行指示
入力を受け付けた場合に、前記読み出し手段により読み
出された前記情報信号の前記分類区間毎に、予め決めら
れる間隔区間長おきに、予め決められる設定区間長分の
前記情報信号の再生を行なうように制御する再生制御手
段とを備えることを特徴とする。
【００５６】この請求項２７に記載の情報信号処理装置
によれば、実行指示入力受付手段を通じて、特殊再生で
あるダイジェスト再生の実行が指示された場合に、再生
が指示された情報信号が読み出し手段により読み出され
再生するようにされるが、実際に再生されるのは、識別
情報により識別される類似区間の間隔区間長おきの設定
区間長分の情報信号のみとなるように、再生制御手段に
より制御される。
【００５７】これにより、類似区間が非常に長い場合で
あっても、効果的、かつ、効率的なダイジェスト再生を
行なって、再生される情報信号の内容を的確に把握する
ことができるようにされる。しかも、機器の構成が複雑
になることもなく、比較的に簡単な構成で実現すること
ができる。すなわち、情報信号の効果的、かつ、効率的
な利用ができるようにされる。
【００５８】また、請求項２８に記載の発明の情報信号
処理装置は、請求項２７に記載の情報信号処理装置であ
って、前記情報信号の前記類似区間のうちの重要区間を
検出する重要区間検出手段を備え、前記再生制御手段
は、前記重要区間検出手段により検出された前記重要区
間を含むように、前記設定区間長の再生区間を設定する
ようにすることを特徴とする。
【００５９】この請求項２８に記載の情報信号処理装置
によれば、類似区間の内でも、例えば所定の音声信号ま
たは所定の画像信号における所定の信号レベルが高くな
るなどの重要区間が重要区間検出手段により検出され、
この重要区間が必ず再生されるように、再生制御手段に
より設定区間長の再生区間に含められるようにされる。
【００６０】これにより、同じ類似区間内であっても、
より重要度の高い区間を再生することが可能となり効果
的、効率的な特殊再生すなわちダイジェスト再生を行な
うことができるようにされる。すなわち、情報信号の効
果的、かつ、効率的な利用ができるようにされる。
【００６１】
【発明の実施の形態】以下、図を参照しながら、この発
明による情報信号処理装置、情報信号処理方法の一実施
の形態について説明する。以下に説明する実施の形態に
おいては、この発明による情報信号処理装置、情報信号
処理方法を、例えば、テレビ放送番組の画像信号と音声
信号とを記録媒体に記録し、記録した画像信号と音声信
号とを再生する記録再生装置に適用した場合を例にして
説明する。
【００６２】［第１の実施の形態］（請求項１〜請求項
４、図１から図１１） 図１は、この発明による情報信号処理装置、情報信号処
理方法の一実施の形態が適用された第１の実施の形態の
記録再生装置１００を説明するためのブロック図であ
り、図２、図３は、この実施の形態の記録再生装置１０
０の動作原理を説明するための図である。
【００６３】この第１の実施の形態の記録再生装置１０
０は、ハードディスクなどのアクセス性の良い大容量記
録媒体にテレビ放送番組などの情報信号を記録した場合
に、その情報信号の全部を一々再生することなく、その
情報信号の記録内容を迅速に、しかも簡単かつ正確に把
握することができるようにすることにより、記録した情
報信号の効果的、かつ、効率的な活用（利用）を促進す
ることができるようにするものである。
【００６４】［動作原理について］まず、この第１の実
施の形態の記録再生装置１００の動作原理について説明
する。図１に示す記録再生装置１００は、情報信号とし
て、例えばテレビ放送番組のアナログ画像信号とアナロ
グ音声信号の供給を受け、これらをデジタル化し、ＭＰ
ＥＧ（Moving Picture Experts Group）方式でデータ圧
縮した後に、データ圧縮した画像データと音声データと
を時分割多重化して、記録媒体８に記録することができ
るものである。記録媒体８は、例えばハードディスクな
どの大容量のディスク記録媒体である。
【００６５】また、図１に示す記録再生装置１００は、
記録媒体８に記録された多重化信号を読み出し、画像デ
ータと音声データに分離するとともに、そのそれぞれを
圧縮伸張し、データ圧縮前の画像データと音声データと
を復元し、これらをアナログ信号に変換して出力するこ
とができるものである。
【００６６】そして、図１に示した記録再生装置１００
は、画像信号と音声信号の記録媒体８への記録時におい
て、画像信号を類似画像毎に分類処理する。この分類処
理は、データ圧縮後の画像データ（ＭＰＥＧデータ）を
用いて行なう。なお、画像が１フレーム毎に頻繁に変化
することはないと想定できるほど少ないと考えられるの
で、この実施の形態の記録再生装置１００においては、
Ｉ（Intra-code）ピクチャ単位に類似画像の検出を行な
い類似画像毎の分類処理を行なう。
【００６７】図１の記録再生装置１００は、後述もする
ように、画像分類処理部５において、類似画像検出処理
および画像分類処理を行なう。これにより、類似する画
像が続く類似画像区間を特定するとともに、どの類似画
像区間とどの類似画像区間とが類似しているかをも特定
するようにしている。
【００６８】例えば、図２（ａ）に示すように入力画像
信号系列として、３１枚のＩピクチャがあり、区間Ａ
１、区間Ａ２、区間Ａ３、区間Ｂ１、区間Ｂ２、区間Ｂ
３のＩピクチャはその区間内においてはいずれのＩピク
チャにも類似する類似画像であるが、区間Ｃ１、区間Ｃ
２のＩピクチャはその区間内においてはいずれのＩピク
チャにも類似しない非類似画像であるというように類似
画像区間とそうでない区間（非類似画像区間）とを特定
し分類する。
【００６９】また、直前のＩピクチャとの間で類似でな
いＩピクチャは、シーンチェンジ点のＩピクチャである
と判別することもできる。このことを利用することによ
り、図１に示す記録再生装置１００においては、図２
（ａ）に示す例の場合、図２（ａ）において矢印で示す
ように、１番目、４番目、５番目、６番目、７番目、１
０番目、１１番目、１２番目、１７番目、２１番目、２
９番目のＩピクチャが、シーンチェンジ点であると検出
することができる。
【００７０】さらに、区間Ａ１と区間Ａ２と区間Ａ３と
は相互に類似する類似画像区間であり、また、区間Ｂ１
と区間Ｂ２と区間Ｂ３とは相互に類似する類似画像区間
であり、区間Ｃ１と区間Ｃ２とも相互に類似する類似画
像区間であるというように、類似画像区間同士の分類を
も行ない類似区間グループを判別することもできるよう
にしている。
【００７１】したがって、この実施の形態の記録再生装
置１００においては、例えば、図２（ａ）に示した入力
画像信号系列の提供を受けた場合には、３種類の類似区
間グループ（区間Ａ１、Ａ２、Ａ３、区間Ｂ１、Ｂ
２、Ｂ３、区間Ｃ１、Ｃ２）があり、各類似区間グル
ープを構成する各類似画像区間は、いくつのＩピクチャ
を含んでいるかを検出し把握する。
【００７２】そして、図１に示したこの実施の形態の記
録再生装置１００においては、情報信号の記録時におい
て、上述したように、画像の類似検出処理と分類処理と
を行ない、当該情報信号の記録終了時などの所定のタイ
ミングで、例えば、図３に示すように、類似画像の分類
結果を表示する。
【００７３】この場合、類似区間グループ毎であって、
類似画像区間毎にその先頭の画像（Ｉピクチャ）の縮小
画像の一覧表示を行なう。具体的には、類似検出頻度、
すなわち、類似画像（類似するＩピクチャ）の多い類似
区間グループからフレーム番号の若い順に画像分類グル
ープの切り換わり時点または画像分類によるシーンチェ
ンジ点の画像の縮小画像を表示する。
【００７４】なお、ここで注意を要することは、カメラ
パンがある画像区間は、カメラパンに応じて画像シーン
が変化しているので、類似画像という観点から考えた場
合は、各々の画像シーンは類似画像ではないとも考えら
れるが、カメラパンがあるだけで、その区間ではカット
点（シーンチェンジ）は無いとも考えられる。すなわ
ち、ある画像が類似であるか、類似でないかの絶対的な
基準は無く、画像分類グループの切り換わり時点とシー
ンチェンジ時点は、場合によっては必ずしも同じでない
場合もある。
【００７５】また、上述したこの例において、類似検出
頻度が同じ類似区間グループが複数存在する場合には、
フレーム番号の若いＩピクチャを含む類似区間グループ
から表示するようにする。
【００７６】図３に示した例は、表示画面を８×８個の
小画面に分割し、図２（ａ）に示したように分類される
Ｉピクチャについて、垂直方向には類似区間グループ毎
に、水平方向には類似画像区間毎にシーンチェンジ点の
画像の縮小画像を表示するようにしたものである。
【００７７】したがって、図３に示した例において、最
上段のｃ１行には、類似画像区間Ａ１、Ａ２、Ａ３のそ
れぞれの先頭画像（シーンチェンジ点の画像）である１
番目、１２番目、２１番目のＩピクチャの画像の縮小画
像が表示される。
【００７８】また、ｃ２行には、類似画像区間Ｂ１、Ｂ
２、Ｂ３のそれぞれの先頭画像であるシーンチェンジ点
の画像である７番目、１７番目、２９番目のＩピクチャ
の画像の縮小画像が表示され、ｃ３行には、類似画像区
間Ｃ１、Ｃ２のそれぞれの先頭画像であるシーンチェン
ジ点の画像である４番目、１０番目のＩピクチャの画像
の縮小画像が表示される。
【００７９】このように、この第１の実施の形態の記録
再生装置１００においては、記録時に画像の類似検出処
理、分類処理を行ない、記録実行時や、記録終了時、あ
るいは、記録終了後の適宜のタイミングで、画像の分類
処理結果を表示することにより、記録媒体に記録した放
送番組はどのようなものであるかを迅速かつ確実に知る
ことができるようにしている。つまり、記録した情報信
号の全部を再生することなく、記録内容の概要を迅速か
つ確実に把握し、情報信号の有効かつ効率的な利用がで
きるようにしている。
【００８０】そして、図３に示したように、分類結果の
一覧表示（マルチ画面表示）を行なうためには、一覧表
示用の縮小画像（サムネイル画像）が必要になる。ＭＰ
ＥＧ方式でデータ圧縮された画像データを考えると、図
２（ａ）に示したＩピクチャと同一の時間系列で、図２
（ｂ）に示すように縮小画像を形成し、記録媒体に記録
しておけば、分類処理後すぐに、縮小画像（サムネイル
画像）の一覧表示を行なうことができる。
【００８１】ここで、記録終了時に図３に示したように
縮小画像の表示を行なうことを考えると、記録時におい
て、元の画像データともに、縮小画像を形成してこれを
元の画像データとともに記録媒体に記録するようにする
ことにより、信号処理時間の短縮ができる。元の画像の
記録時に縮小画像を形成しないとすると、元の画像がデ
ータ圧縮されたものであるので、元の画像のデコード処
理と、縮小画像の形成処理とを行なわなければならなく
なり、縮小画像の迅速な表示ができなくなる。
【００８２】そこで、図２（ｂ）に示したように、元の
画像データともに、縮小画像を形成してこれを元の画像
データとともに記録媒体に記録するようにすることによ
り、信号処理時間の短縮ができるとともに、元画像であ
るＩピクチャとその縮小画像との対応付けを容易に行な
うことができる。
【００８３】しかし、図２（ｂ）の場合、縮小画像デー
タが多くなり、記録容量が有限である記録媒体を有効に
活用することができなくなる場合があると考えられる。
そこで、図１に示すこの実施の形態の記録再生装置１０
０は、基本的に、シーンチェンジ点の画像の縮小画像の
みを元の画像と対応付けるようにして記録媒体に記録
し、縮小画像のデータ量をできるだけ少なくすることも
できるようにしている。
【００８４】ここで、図３に示した一覧表示（マルチ画
面表示）を“０”、“１”で表現されるベースバンド領
域の縮小画像のデータ量について考える。図３に示した
例の場合には、縮小画像は、元の画像データを垂直方
向、および、水平方向に１／８（８分の１）にしたもの
である。
【００８５】元の画像データを、それぞれ８ビットのＹ
信号（輝度信号）、Ｃｂ信号（青の色差信号）、Ｃｒ
（赤の色差信号）により表されるものとし、元の画像の
解像度を３５２（水平方向）×２４０（垂直方向）する
と、縮小画像１枚当たりのデータ量は、以下の（１）式
により算出することができる。すなわち、 3×8(bit)×(352×240)×(1/8)×(1/8)＝31680(bit) ≒ 4(KByte) …（１） となる。
【００８６】そして、放送番組の記録を例えば２時間行
なうとした場合、３０フレーム／秒でＭＰＥＧストリー
ムの１５ＧＯＰ（Group Of Picture）とすると、全縮小
画像のデータ量は、次の（２）式のように求めることが
できる。すなわち、 2(H)×60(min)×60(s)×31680(bit)×30(Frame/s)×(1/15)＝54(MByte)…（２） となり、縮小画像の画像データだけでもかなりのデータ
量となる。
【００８７】しかし、図２（ａ）に示した各類似画像区
間の複数の画像はいずれも類似した画像であるので、各
類似画像区間の先頭の画像であるシーンチェンジ点の画
像の縮小画像のみを生成して、これを元の画像とともに
記録するようにすることで、縮小画像のデータ量を少な
くすることができる。
【００８８】つまり、図２（ｃ）に示すように、区間Ａ
１については、１番目の画像と、２番目の画像と、３番
目の画像とはいずれも類似している画像であるので、シ
ーンチェンジ点の画像である１番目の画像についてのみ
縮小画像を形成し、これを記録媒体に記録するようにす
る。他の類似画像区間である区間Ａ２、区間Ａ３、区間
Ｂ１、区間Ｂ２、区間Ｂ３についても同様に行なう。
【００８９】また、区間Ｃ１、区間Ｃ２を構成する画像
は、この例の場合、いずれも類似した画像ではないの
で、その全部の画像の縮小画像を形成して、これを縮小
前の元の画像とともに記録するようにする。すなわち、
区間Ｃ１の場合には、４番目の画像と、５番目の画像
と、６番目の画像の縮小画像を形成して記録するように
する。区間Ｃ２についても同様である。
【００９０】このようにした場合には、図２（ｃ）に示
すように、１番目、４番目、５番目、６番目、７番目、
１０番目、１１番目、１２番目、１７番目、２１番目、
２９番目の画像について縮小画像を形成し、これを元の
画像とともに、記録するようにすればよいことになる。
【００９１】このように、基本的に、類似画像区間の先
頭の画像（シーンチェンジ点の画像）の縮小画像のみを
作成するようにする図２（ｃ）に示した場合の方が、図
２（ｂ）に示した場合よりも縮小画像のデータ量が格段
に少なくすることができる。前述のように、２時間の放
送番組を記録する場合であって、類似画像の平均継続時
間を３秒程度と仮定すると、図２（ｃ）に示したように
縮小画像を形成した場合には、縮小画像のデータ量は、
約１８(MByte)となる。
【００９２】なお、縮小画像について、ＪＰＥＧ(Joint
Photographic Expert Group)方式などのデータ圧縮方
式を用いてさらにデータ圧縮処理を行なうことにより、
さらに縮小画像のデータ量を少なくすることができる。
【００９３】この第１の実施の形態の記録再生装置１０
０は、図２（ｂ）の方式、図２（ｃ）の方式のいずれを
も用いることができるものであるが、以下の説明におい
ては、主に図２（ｃ）の方式を用いる場合を例にして説
明する。
【００９４】［第１の実施の形態の記録再生装置１００
の構成と動作について］図１に示したこの第１の実施の
形態の記録再生装置１００の構成と動作について説明す
る。図１において、記録媒体８の左側の部分が主に記録
系であり、記録媒体８の右側が再生系であると大別する
ことができる。
【００９５】［記録系について］まず記録系について説
明する。この第１の実施の形態の記録再生装置１００に
入力されたアナログ音声信号（音声入力）は、音声アナ
ログ／デジタル変換器（以下、音声Ａ／Ｄ変換器と言
う。）１に供給され、ここでデジタル音声信号に変換さ
れて音声エンコーダ２と音声分類処理部２０とに供給さ
れる。
【００９６】音声エンコーダ２は、これに供給されたデ
ジタル音声信号について、ＭＰＥＧオーディオ方式など
の所定の圧縮方式で帯域圧縮処理を行ない、帯域圧縮さ
れたデジタル音声信号である音声データを形成し、これ
を多重化処理部６に供給する。
【００９７】音声分類処理部２０は、例えば所定区間毎
のデジタル音声信号について、周波数スペクトルピーク
の継続性を検出し、音楽信号であるかどうかの判定を行
ない、その判定結果を多重化処理部６、システムコント
ローラ１７、画像シーン分類表示および再生位置表示部
（以下、分類表示部という。）１９に供給する。
【００９８】なお、音声分類処理部２０は、音声Ａ／Ｄ
変換器１からのデジタル音声信号ではなく、図１におい
て点線で示すように、音声エンコーダ２からの帯域圧縮
されて形成された音声データの供給を受け、この音声デ
ータについて前述したように分類処理を行なうように構
成することもできる。
【００９９】一方、この第１の実施の形態の記録再生装
置１００に入力されたアナログ画像信号（画像入力）
は、画像アナログ／デジタル変換器（以下、画像Ａ／Ｄ
変換器と言う。）３に供給され、ここでデジタル画像信
号に変換されて画像エンコーダ４に供給される。
【０１００】画像エンコーダ４は、これに供給されたデ
ジタル画像信号について、ＭＰＥＧ２方式などの所定の
圧縮方式で帯域圧縮処理を行ない、帯域圧縮されたデジ
タル画像信号である画像データを形成し、これを画像分
類処理部５、多重化処理部６、Ｉピクチャ検出部２１、
縮小画処理部２２に供給する。
【０１０１】画像分類処理部５は、画像エンコーダ４か
らの画像データのＩピクチャについて、画像の特性情報
を検出し、これに基づいて類似画像を判別するととも
に、図２を用いて説明したように、類似画像区間、非類
似画像区間、類似区間グループの特定などの一連の画像
の分類処理を行ない、類似画像区間、非類似画像区間、
類似区間グループを識別できるようにするための識別情
報信号を形成して、これを多重化処理部６、分類表示部
１９に供給する。
【０１０２】この識別情報信号には、各類似画像区間に
おいて、何フレーム類似画像が継続しているかを示す情
報などの画像データの位置情報も含まれる。また、画像
分類処理部５は、類似画像の判別過程において、シーン
チェンジ点をも検出し、これをシステムコントローラ１
７に通知することができるようにしている。
【０１０３】なお、画像分類処理部５は、画像エンコー
ダ４からの圧縮されて形成された画像データではなく、
図１において点線で示すように、画像Ａ／Ｄ変換器３か
らのデジタル画像信号の供給を受け、これに基づいて、
例えばフレーム単位に前述したように画像の類似画像の
判別処理や分類処理を行なうようにしてもよい。
【０１０４】また、画像信号の分類処理、または、音声
信号の分類処理の結果得られる識別情報信号は、システ
ムコントローラ１７が、画像分類処理部５、音声分類処
理部２０から供給される分類処理の結果に基づいて、生
成し、これを多重化処理部６に供給するように構成する
こともできる。
【０１０５】システムコントローラ１７は、図示しない
が、ＣＰＵ(Central Processing Unit)、ＲＯＭ(Read O
nly Memory)、ＲＡＭ(Random Access Memory)、不揮発
性メモリ、時計回路などを備えたマイクロコンピュータ
であり、記録再生装置１００の各部を制御するものであ
る。
【０１０６】また、図１において、Ｉピクチャ検出部２
１は、画像データからＩピクチャを検出し、検出タイミ
ングなどの検出情報をシステムコントローラ１７に通知
する。これは、前述もしたように、この実施の形態の記
録再生装置１００が、Ｉピクチャ単位に画像の類似検出
処理および分類処理を行なうようにしているためであ
る。システムコントローラ１７は、Ｉピクチャ検出部２
１からの検出情報に基づいて画像分類処理部５、縮小画
処理部２２を制御することができるようにしている。
【０１０７】縮小画処理部２２は、システムコントロー
ラ１７からの制御に応じて、供給された画像データ（シ
ーンチェンジ点のＩピクチャ）から縮小画像データを形
成し、これを多重化処理部６、分類表示部１９に供給す
る。
【０１０８】この実施の形態において、分類表示部１９
は、音声分類処理部２０からの分類結果、画像分類処理
部５からの識別情報信号、縮小画処理部２２からの縮小
画像データの供給を受けて、図３に示したように、類似
区間グループ毎であって、類似画像区間毎の縮小画像の
分類表示を行なう。すなわち、この実施の形態の記録再
生装置１００においては、記録処理と平行して記録画像
についてのサムネイル表示をも行なうことができるよう
にしている。
【０１０９】また、多重化処理部６は、これに供給され
た音声データ、画像データ、縮小画像データ、画像分類
処理部５からの識別情報信号を例えば時分割多重化して
多重化データを形成し、これを記録処理部７に供給す
る。記録処理部７は、これに供給された多重化データに
ついて誤り訂正符号の付加やインターリーブ処理などを
行なって記録用の信号を形成し、これを記録媒体８の所
定の領域に記録する。
【０１１０】そして、この実施の形態の場合には、前述
もしたように、多重化データに多重化されている識別情
報信号により、類似画像区間、非類似画像区間、類似区
間グループの識別ができるようにされるとともに、元の
画像と縮小画像の対応付けもなされている。これによっ
て、記録時において、あるいは、記録終了時、記録終了
後の所定のタイミングなどにおいて、図３に示したよう
に、類似区間グループ毎であって、類似画像区間毎の縮
小画像の分類表示を行なうことができるようにしてい
る。
【０１１１】［画像分類処理について］上述した記録再
生装置１００の画像分類処理部５において行なわれる画
像の分類処理について具体的に説明する。図４は、画像
分類処理部５の具体的な構成を説明するための図であ
り、図５、図６は、画像分類処理部５において行なわれ
る画像分類処理の原理を説明するための図である。
【０１１２】この実施の形態において、画像分類処理部
５は、例えば、ＭＰＥＧ２方式でデータ圧縮されて形成
された画像データからその画像データの所定の特性デー
タを検出して、画像の分類を行なうようにしている。
【０１１３】画像分類処理部５の特性データ検出部５１
は、画像エンコーダ４からのＩピクチャの供給を受ける
と、そのフレームデータについて、図５に示すような２
５個の画像領域（２５分割画像領域）に分け、各画像領
域におけるＹ成分（輝度成分）、Ｃｂ成分（青の色差成
分）、Ｃｒ成分（赤の色差成分）のＤＣＴ(DiscreteCos
ine Transform)係数のうちのＤＣ係数の平均値を成分と
する例えば２５次の３つのベクトルＡｙ(輝度ベクト
ル)、Ａｂ(青の色差ベクトル)、Ａｒ（赤の色差ベクト
ル）を生成する。
【０１１４】そして、Ａｙ(輝度ベクトル)は、図６(１)
式のように表すことができ、Ａｂ(青の色差ベクトル)
は、図６(２)式のように表すことができる。また、Ａｒ
（赤の色差ベクトル）は、図６(３)式のように表すこと
ができる。
【０１１５】このように、遂次、生成されるベクトルデ
ータは、図４に示すように、データバッファ５２に供給
されて記録されるとともに、演算処理部５３にも供給さ
れる。演算処理部５３は、分類処理する時点のベクトル
データ（特性データ検出部５１から演算処理部５３に最
新に供給されたベクトルデータ）を基準とし、データバ
ッファ５２内に既に記録されている全てのフレームのベ
クトルデータとの間において、図６(４)式に従ってベク
トル間距離Ｖｄを算出し、その最小距離Ｖｄｍｉｎを検
出する。
【０１１６】ＩＤバッファ５５には、データバッファ５
２に記録されているフレーム毎のベクトルデータに対し
て、１対１に対応するＩＤ（識別情報）が記録されてい
る。すなわち、データバッファ５２に記録されたフレー
ム単位に１対１に対応するＩＤが存在するようにされて
いる。
【０１１７】そして、システムコントローラ１７は、演
算処理部５３からの検出結果に基づいて、基準のベクト
ルとの間で最小距離Ｖｄｍｉｎを構成するフレームに対
するＩＤをＩＤバッファ５５を参照して取得する。そし
て、システムコントローラ１７は、最小距離Ｖｄｍｉｎ
が、予め決められる閾値Ｔｈ以下であるときには、基準
のベクトルのフレーム（Ｉピクチャ）と、この基準のベ
クトルのフレーム（Ｉピクチャ）との間で最小距離Ｖｄ
ｍｉｎを構成するフレームとは類似していると判断し
て、そのフレームＩＤであるＩＤｄｅｔをＩＤ生成部５
４をバイパスして識別情報信号として出力するととも
に、ＩＤバッファ５５にも記録する。
【０１１８】図４において、ＩＤ生成部５４は、初期値
を“０”（ゼロ）とする１６ビットカウンタである。そ
して、システムコントローラ１７において、最小距離Ｖ
ｄｍｉｎが、予め決められた閾値Ｔｈより大きいときと
判別された場合には、基準のベクトルのフレーム（Ｉピ
クチャ）と、この基準のベクトルのフレーム（Ｉピクチ
ャ）との間で最小距離Ｖｄｍｉｎを構成するフレームと
は類似していないと判断して、ＩＤ生成部５４が保持す
る値をその基準のベクトルのフレーム（Ｉピクチャ）に
割り当てられたＩＤとして、出力するとともに、ＩＤバ
ッファ５５にも記録する。この後、ＩＤ生成部５４にお
いては、次にＩＤとして提供しようとする値が１インク
リメントされる。
【０１１９】このように、類似度が高い画像（Ｉピクチ
ャ）には、同じＩＤが付与される。これにより、同じＩ
Ｄを持つ画像信号区間は、類似画像からなる類似画像区
間であると判別可能となり、また、同じＩＤを持つ飛び
飛びの類似画像信号区間が、類似区間グループを形成し
ていることも判別することができるようにされる。
【０１２０】また、画像分類処理部５においては、分類
処理したＩピクチャのＩＤと、その直前のＩピクチャの
ＩＤとの違いにより、分類処理したＩピクチャがシーン
チェンジ点（カット点）か否かをも検出することができ
るようにされている。このように、シーンチェンジ点を
検出することにより、図２（ｃ）に示したように、シー
ンチェンジ点の画像から縮小画像データを生成して、分
類表示部１９にサムネイル表示を行なったり、縮小画像
データを多重化データに多重化し、これを記録媒体に記
録したりすることを容易に実現することができるように
している。
【０１２１】そして、この実施の形態においては、シス
テムコントローラ１７において、画像分類処理部５から
の情報に基づいて、例えば、記録したテレビ放送番組を
識別する情報と、そのテレビ放送番組の縮小画像のそれ
ぞれを特定する情報と、特定される縮小画像のマルチ画
面における表示位置を示す情報と、その縮小画像に対応
する元の画像を特定する情報などからなる情報を識別情
報信号として形成し、これを多重化処理部６に供給す
る。
【０１２２】なお、特定される縮小画像のマルチ画面に
おける表示位置を示す情報は、類似画像区間のＩピクチ
ャの数と、類似区間グループとに基づいて決めることが
できる情報であり、縮小画像に対応する元の画像を特定
する情報は、フレーム番号やタイムスタンプなどを用い
ることができる。
【０１２３】［音声分類処理について］次に、上述した
記録再生装置１００の音声分類処理部２０において行な
われる音声の分類処理について具体的に説明する。図７
は、音声分類処理部２０の具体的な構成を説明するため
の図である。この実施の形態の音声分類処理部２０は、
音楽の音声信号（音楽信号）部分と、話し声の音声信号
（話音声信号）部分とを分類することができるものであ
る。
【０１２４】図１に示したように、音声Ａ／Ｄ変換器１
から供給されるデジタル音声信号は、音声分類処理２０
の所定信号区間検出部２０１に供給される。所定信号区
間検出部２０１は、これに供給されたデジタル音声信号
のうちの０．５秒位〜５秒位の長さの音声信号区間を切
り出し、これをＦＦＴ信号処理部２０２に供給する。
【０１２５】音声信号を上述のように所定時間分切り出
すようにするのは、あまり短い音声信号だけでは、それ
が音楽信号か、話音声信号であるのかを正確に判定でき
ないからである。
【０１２６】ＦＦＴ信号処理部２０２は、これに供給さ
れたデジタル音声信号について、ＦＦＴ(Fast Fourier
Transformation)処理を行なって、周波数成分の情報に
変換し、変換後の信号をピーク周波数検出部２０３に供
給する。ピーク周波数検出部２０３は、これに供給され
た音声信号の周波数成分の信号から、スペクトルピーク
周波数を検出し、これをピーク周波数継続性判定部２０
４に供給する。
【０１２７】ピーク周波数継続性判定部２０４は、これ
に供給されるスペクトルピーク周波数に基づいて、所定
区間にわたりピーク周波数が継続しているか否かによ
り、処理の対象となっている音声信号が、音楽信号であ
るか、そうでないかの判定を行なう。
【０１２８】ピーク周波数継続性判定部２０４における
判定結果は、図１を用いて前述したように、多重化処理
部６に供給され、音楽部分とそうでない部分とを分類す
るための情報として多重化信号に多重化されるととも
に、システムコントローラ１７を介すか、あるいは、直
接に分類表示部１９に供給され、音楽部分のサムネイル
と音楽部分でないサムネイル部分とを分けて表示するな
どの音声信号の所定の分類表示に用いられるようにされ
る。
【０１２９】また、音声分類処理部２０の分類処理の結
果を用いて、音楽信号区間と非音楽信号区間とを分類し
て、前述のシーンチェンジ点のサムネイルの表示の場合
と同様に、音声信号の分類の異なる時点において、その
シーンを縮小画像として表示するようにすることもでき
る。この場合には、放送番組における音楽部分とその解
説部分とを明確に分離して表示し、音楽部分のみを再生
するようにしたり、解説部分のみを再生したりするなど
のことができるようになる。
【０１３０】［再生系について］次に、再生系について
説明する。システムコントローラ１７からの制御信号に
より、再生制御部９は、使用者から指示された多重化デ
ータを記録媒体８から読み出して、再生処理部１０に供
給するようにする。再生処理部１０は、これに供給され
た多重化データについてのデインターリーブ処理などの
所定の処理を行ない、処理後の多重化データを分離処理
部１１に供給する。分離処理部１１は、これに供給され
た多重化データから、音声データ、画像データ、縮小画
像データ、識別情報信号などを分離する。
【０１３１】分離処理部１１において分離された音声デ
ータは、音声デコーダ１２に供給される。音声デコーダ
１２に供給された音声データは、所定の圧縮方式により
データ圧縮されているものである。音声デコーダ１２
は、これに供給されたデータ圧縮されている音声データ
を伸張処理し、伸張処理後の音声データを音声デジタル
／アナログ変換器（以下、音声Ｄ／Ａ変換器と言う。）
１３に供給する。
【０１３２】音声Ｄ／Ａ変換器１３は、これに供給され
たデジタル音声信号をアナログ音声信号に変換し、これ
を出力する。出力されたアナログ音声信号は、スピーカ
に供給され、そのスピーカから当該アナログ音声信号に
応じた音声が放音するようにされる。
【０１３３】また、分離処理部１１において分離された
画像データは、画像デコーダ１４に供給される。画像デ
コーダ１４に供給された画像データは、所定の圧縮方式
によりデータ圧縮されているものである。画像デコーダ
１４は、これに供給されたデータ圧縮されている画像デ
ータを伸張処理し、伸張処理後の画像データを画像デジ
タル／アナログ変換器（以下、画像Ｄ／Ａ変換器と言
う。）１５に供給する。
【０１３４】画像Ｄ／Ａ変換器１５は、これに供給され
たデジタル画像信号をアナログ画像信号に変換し、これ
を出力する。出力されたアナログ画像信号は、モニタ受
像機に供給され、そのモニタ受像機の表示画面に当該ア
ナログ画像信号に応じた画像が表示するようにされる。
【０１３５】また、分離処理部１１において分離された
識別情報信号は、識別信号検出部１６に供給される。識
別信号検出部１６は、これに供給された識別情報信号か
ら必要となる識別情報信号を検出し、これをシステムコ
ントローラ１７、分類表示部１９に供給する。
【０１３６】また、識別信号検出部１６は、これに供給
された信号から所定のタイムスタンプ信号あるいはフレ
ーム番号を検出し、これをシステムコントローラ１７に
供給する。このタイムスタンプ信号に基づいて、再生時
点を検出し、分類表示部１９に再生位置を表示すること
もできるようにされている。
【０１３７】そして、ユーザ入力インターフェース１８
を通じて、記録媒体８に記録されている放送番組の分類
表示が指示された場合には、システムコントローラ１７
は、これに供給された識別情報信号に基づいて、再生制
御部９を制御し、記録媒体８に記録されている目的とす
る放送番組の縮小画像を読み出し、これを再生処理部１
０、分離処理部１１を通じて分類表示部１９に供給する
とともに、分類表示部１９を制御して、図３に示したよ
うに、記録媒体８に記録した放送番組の分類表示が行な
われる。
【０１３８】このように、記録終了後の所定のタイミン
グにおいても、記録時において行なわれた画像の類似判
別処理および分類処理に基づいて形成されて記録媒体に
記録された識別情報信号、および、縮小画像信号を用い
て、図３に示したように、画像の分類表示を行なうこと
ができるようにされる。
【０１３９】なお、この実施の形態においては、１つの
テレビ放送番組を記録する場合を例にして説明したがこ
れに限るものではない。例えば、所定の放送チャンネル
を通じて放送されるものは全部、あるいは、所定の番組
の一部分、あるいは、所定の放送チャンネルの所定の時
間区間の全部など、プログラム区間、番組区間、時間区
間を指定して、画像の類似判別処理、分類処理を行なっ
て、分類表示を行なうようにすることもできる。すなわ
ち、画像の類似判別処理、分類処理を適宜の区間に行な
って、分類表示するようにすることができる。
【０１４０】また、例えば、ダイジェスト再生のための
画像データ、スキミング再生のための画像データを記録
時に作成して、放送番組の本編の画像データとともに記
録しておくことにより、その放送番組のダイジェスト再
生やスキミング再生を行なうようにすることができる。
【０１４１】なお、この明細書において、ダイジェスト
再生は、記録媒体に記録された放送番組を飛び飛びに再
生することによりその記録された放送番組の概要を把握
することができるようにするものであり、例えば、シー
ンチェンジ点の前後の信号区間であって、音声レベルが
所定レベル以上の飛び飛びの信号区間を連続して再生す
るようにすることにより実現することができるものであ
る。
【０１４２】また、スキミング再生は、記録媒体に記録
された放送番組において、ユーザが指定したシーンに類
似するシーンのみを選択的に再生するようにするもので
ある。
【０１４３】そして、ダイジェスト再生やスキミング再
生などの所定の特殊再生動作を実行したい場合には、ユ
ーザは、ユーザ入力Ｉ／Ｆ１８を通じてコマンド入力を
行なう。システムコントローラ１７は、ユーザからのコ
マンド情報を受け取った場合には、再生制御部９を制御
し、目的とする再生方式のための画像データを読み出し
て再生することにより、目的とする再生方式で画像の再
生を行なうことができる。
【０１４４】［記録再生装置１００の動作について］次
に、上述したこの第１の実施の形態の記録再生装置１０
０の記録時の動作について、図８〜図１１のフローチャ
ートを参照しながら説明する。図８、図９は、この第１
の実施の形態の記録再生装置１００の記録時の動作を説
明するためのフローチャートであり、図２（ｃ）に示し
たように、シーンチェンジ点の画像を縮小画像としても
記録するようにし、記録処理の終了時に画像の分類表示
を行なうことができるようにした場合の例を説明するた
めのものである。
【０１４５】システムコントローラ１７は、ユーザ入力
Ｉ／Ｆ１８を通じてユーザからの動作指示コマンドを受
け付けると、図８、図９に示す処理を実行し、まず、実
行が指示された動作は、再生か、記録かを判断する（ス
テップＳ１）。ステップＳ１において、指示された動作
が記録であると判断したときには、システムコントロー
ラ１７は各部を制御し、自機を記録モードにして音声信
号と画像信号の記録媒体８への記録を開始するようにす
る（ステップＳ２）。
【０１４６】そして、画像処理部５において、図４〜図
６を用いて説明したように、Ｉピクチャ毎に、画像の特
性を検出し（ステップＳ３）、画像の類似判別、分類処
理を行なうようにする（ステップＳ４）。このステップ
Ｓ３、Ｓ４の処理は、前述したように識別情報信号を生
成する処理に相当する。
【０１４７】そして、分類処理の結果に基づいて、シス
テムコントローラ１７は、直前のＩピクチャと今回の処
理の対象となっているＩピクチャとが類似画像ではな
く、今回の処理の対象となっているＩピクチャがカット
点（シーンチェンジ点）か否かを検出する（ステップＳ
５）。
【０１４８】システムコントローラ１７は、ステップＳ
５においての検出結果に基づいて、今回の処理の対象と
なっているＩピクチャがカット点であるか否かを判別し
（ステップＳ６）、カット点であると判別したときに
は、縮小画処理部２２を制御して、そのＩピクチャの縮
小画像を生成し、これを多重化処理部６に供給する（ス
テップＳ７）。
【０１４９】ステップＳ７の処理の後、あるいは、ステ
ップＳ６判断処理において、今回の処理の対象となって
いるＩピクチャがカット点ではないと判断した場合に
は、システムコントローラ１７は、何フレーム類似画像
が継続しているかなどの情報を位置情報として形成し、
これを多重化処理部６に供給する（ステップＳ８）。な
お、位置情報としては、ＭＰＥＧデータの場合、タイム
スタンプ情報を利用するようにしてもよい。
【０１５０】多重化処理部６には、本来の記録の目的信
号である音声データや画像データが供給されているの
で、ここで音声データ、画像データ、位置情報やタイム
スタンプ信号などを含む識別情報信号を多重化した多重
化信号を形成し、これを記録処理部７を通じて記録媒体
８に記録する（ステップＳ９）。
【０１５１】そして、システムコントローラ１７は、ユ
ーザ入力Ｉ／Ｆ１８を通じて、ユーザにより記録処理の
停止が指示されたか否かを判断し（ステップＳ１０）、
記録処理の停止が指示されていないと判断したときに
は、ステップＳ３からの処理を繰り返し、引き続きこの
記録再生装置１００に供給される音声信号、画像信号の
記録媒体への記録を続行する。
【０１５２】ステップＳ１０の判断処理において、記録
処理の停止が指示されたと判断したときには、分類表示
を行なうことが指示されているか否かを判断する（ステ
ップＳ１１）。分類表示を記録処理の停止時に行なうか
否かは、例えば、記録処理の開始前にユーザにより予め
設定するようにされている。
【０１５３】ステップＳ１１の判断処理において、分類
表示を行なうことが指示されていないと判断したときに
は、この図８、図９に示す処理を終了して、例えば、ユ
ーザからの指示入力待ちとなる。ステップＳ１１の判断
処理において、分類表示を行なうことが指示されている
と判断した場合には、識別情報信号に基づいて、図３に
示したように、記録媒体に記録されている縮小画像を用
いて分類表示部１９に分類表示を行なう（ステップＳ１
２）。
【０１５４】そして、分類表示を行なった後、システム
コントローラ１７は、ユーザから再生指示が入力された
か否かを判断する（ステップＳ１３）。ステップＳ１３
の判断処理において、再生指示が入力されていないと判
断したときには、この図８、図９に示す処理を終了し、
例え、ユーザからの指示入力待ちとなる。
【０１５５】なお、この実施の形態の記録再生装置１０
０においては、分類表示された縮小画像の選択入力を行
なうことにより、その選択した画像の類似期間グループ
のみを再生するようにすることもできるようにされてい
る。
【０１５６】そして、ステップＳ１において、実行が指
示された動作が再生であると判断した場合、あるいは、
ステップＳ１３の判断処理において、再生が指示された
と判断した場合には、システムコントローラ１７は、図
９に示す処理に移り、再生系の各部を制御して自機を再
生モードにする（ステップＳ１４）。
【０１５７】そして、システムコントローラ１７は、指
示された再生は、ダイジェスト再生、スキミング再生、
分類表示再生などの特殊再生か、通常再生かを判断する
（ステップＳ１５）。
【０１５８】ステップＳ１５の判断処理において、指示
された再生は、特殊再生であると判断したときには、シ
ステムコントローラ１７は、再生系の各部を制御して、
その指示された特殊再生モードとなり、指示された特殊
再生を行なう（ステップＳ１６）。このステップＳ１６
において、ダイジェスト再生、スキミング再生、分類表
示再生などのユーザによって実行が指示された特殊再生
が行なわれることになる。
【０１５９】そして、システムコントローラ１７は、ユ
ーザから特殊再生の停止の指示が入力されたか否かを判
断し（ステップＳ１７）、停止が指示されたと判断した
ときには、この図８、図９に示す処理を終了して、例え
ば、ユーザからの指示入力待ちとなる。
【０１６０】ステップＳ１７の判断処理において、特殊
再生の停止は指示されていないと判断した時には、記録
処理の実行が指示されたか、すなわち、再生モードから
記録モードへの変更が指示されたか否かを判断する（ス
テップＳ１８）。
【０１６１】ステップＳ１８の判断処理において、記録
処理の実行が指示されていないと判断したときには、ス
テップＳ１８からの処理を繰り返し、指示された特殊再
生が続行するようにされる。また、ステップＳ１８の判
断処理において、記録処理の実行が指示されたと判断し
たときには、図８に示すステップＳ１からの処理を繰り
返す。
【０１６２】また、ステップＳ１５の判断処理におい
て、指示された再生は、特殊再生でないと判断したとき
には、システムコントローラ１７は、再生系の各部を制
御し、自機を通常再生モードとし、通常再生を行なう
（ステップＳ１９）。
【０１６３】そして、システムコントローラ１７は、ユ
ーザから通常再生の停止指示が入力されたか否かを判断
し（ステップＳ２０）、停止が指示されたと判断したと
きには、この図８、図９に示す処理を終了して、例え
ば、ユーザからの指示入力待ちとなる。
【０１６４】ステップＳ２０の判断処理において、通常
再生の停止は指示されていないと判断した時には、記録
処理の実行が指示されたか、すなわち、再生モードから
記録モードへの変更が指示されたか否かを判断する（ス
テップＳ２１）。
【０１６５】ステップＳ２１の判断処理において、記録
処理の実行が指示されていないと判断したときには、ス
テップＳ１９からの処理を繰り返し、通常再生が続行す
るようにされる。また、ステップＳ２１の判断処理にお
いて、記録処理の実行が指示されたと判断したときに
は、図８に示すステップＳ１からの処理を繰り返すよう
にする。
【０１６６】なお、図１０、図１１に示すフローチャー
トは、図２（ｂ）に示したように、元の画像データと縮
小画像データを同じフレーム順序で記録する場合の動作
を示すものである。図１０、図１１に示すフローチャー
トは、図８、図９に示したフローチャートとほぼ同様の
ものであるが、元の画像データと縮小画像データを同じ
フレーム順序で記録する場合には、位置情報は不要であ
るため、図８に示したステップＳ８の処理が、図１０の
フローチャートには存在していない。
【０１６７】その他のステップは、全て図８、図９に示
したフローチャートと同じである。このため、図１０、
図１１において、前述した図８、図９と同じ処理を行な
うステップには、同じ参照符号を付し、その説明につい
ては省略する。
【０１６８】［第１の実施の形態のまとめ］上述のよう
に、この第１の実施の形態の記録再生装置１００は、テ
レビ放送番組などの画像信号と音声信号とを記録媒体に
記録する際に、画像信号について、その特性情報を検出
し、この特性情報に基づいて画像の類似判別処理を行な
い、類似画像の分類処理を行なう。
【０１６９】同時にシーンチェンジ点の検出を行なうよ
うにし、類似画像が複数フレーム連続する場合には、分
類した画像のシーンチェンジ点の画像の縮小画像を形成
し、その縮小画像と元の画像との時間的な位置情報、あ
るいは、フレーム位置などの位置情報を検出する。そし
て、元の画像データとともに、ベースバンド領域での縮
小画像データと、位置情報データなどの識別情報信号を
も記録媒体に記録記録して行く。
【０１７０】この記録処理と同時に、あるいは、記録処
理の終了時に、あるいは、記録処理後の所定のタイミン
グで、縮小画像を記録時に行なった分類処理の分類毎に
迅速に表示する。つまり図３に示したように、マルチ画
面表示による分類表示を行なえるようにする。この分類
表示を見て、記録内容の把握を効率的かつ効果的に行な
うことができる。また、ダイジェスト再生を即座に行な
うようにしたりするなどのこともできるようにされる。
【０１７１】したがって、従来のＶＴＲ(Video Type Re
corder)などのように、再生しなければ記録した画像の
内容を認識することができないなどの不都合を解消し、
記録と同時に、あるいは、記録終了後即座に、あるい
は、記録終了後の所定のタイミングにおいて、記録した
画像の内容を迅速かつ正確に把握することができる。
【０１７２】なお、この第１の実施の形態においては、
記録の主な対象である第１の情報信号は、テレビ放送信
号などの画像信号と音声信号とからなるものとして説明
したが、これに限るものではない。記録の主な対象であ
る第１の情報信号としては、画像信号と音声信号とのう
ちの一方だけでもよい。
【０１７３】また、第１の情報信号が音声信号だけであ
る場合には、第２の情報信号としては、例えば、「１番
目の音楽部分」、「２番目の音楽部分」、「男性音声部
分」、「女性音声部分」などのように、この記録再生装
置において形成される表示メッセージなどとすることが
できる。
【０１７４】なお、音楽音声部分と話音声部分との検出
は、前述した通りであるが、男性音声部分と女性音声部
分との検出は、例えば、音声信号の周波数成分に基づい
て検出することが可能である。
【０１７５】また、第１の情報信号として、画像信号と
プログラムデータ、テキストデータ、音声信号とプログ
ラムデータ、テキストデータなどの組み合わせデータで
あってもよい。すなわち、所定の単位毎に類似判断を行
なって、類似区間を分類することが可能な情報信号を第
１の情報信号として記録処理する場合にこの発明を適用
することができる。
【０１７６】また、類似判別、分類処理は、番組単位に
行なう場合だけでなく、記録時には常時行なうようにし
てもよいし、時間を区切って行なうようにしてもよい
し、１つの番組の中でも、最初の所定時間分行なうよう
にするなど、適宜の単位で行なうようにすることができ
る。
【０１７７】また、分類表示画１画面に収まらないこと
も考えられるが、この場合には、表示の水平方向（横方
向）のスクロール、表示の垂直方向（縦方向）のスクロ
ールを行なって、全部の縮小画像をユーザが見ることが
できるようにすることができる。
【０１７８】［第２の実施の形態］（請求項５〜請求項
１６ 図１２から図１７） 図１２は、この発明による情報信号処理装置、情報信号
処理方法の一実施の形態が適用された第２の実施の形態
の記録再生装置２００を説明するためのブロック図であ
り、図１３、図１４、図１５は、この実施の形態の記録
再生装置の動作原理を説明するための図である。
【０１７９】図１２に示すこの第２の実施の形態の記録
再生装置は、図１に示した第１の実施の形態の記録再生
装置１００が備えていたＩピクチャ検出部２１、縮小画
処理部２２を備えていない点、および、記録残容量検出
部３１、記録媒体初期化検出部３２、表示系３３が新た
に設けられている点を除けば、図１に示した第１の実施
の形態の記録再生装置１００とほぼ同様に構成されたも
のである。
【０１８０】このため、図１２に示すこの第２の実施の
形態の記録再生装置２００においても、図１に示した第
１の実施の形態の記録再生装置１００と同様に構成され
る部分には同じ参照符号を付し、その詳細な説明につい
ては省略する。
【０１８１】そして、この第２の実施の形態の記録再生
装置２００は、テレビ放送番組の全画像信号と全音声信
号からなる本編情報（第１の情報信号）に加えて、その
テレビ放送番組をダイジェスト再生するためのダイジェ
スト再生用画像信号（要約画像情報）と、ダイジェスト
再生用音声信号（要約音声情報）とからなるダイジェス
ト用信号（要約情報（第２の情報信号））を記録媒体８
に記録し、ダイジェスト再生を行なうことができるよう
にしたものである。
【０１８２】要約情報は、テレビ放送番組の本編信号と
対をなし、要約情報を再生して視聴することにより、本
編情報の内容の概要を知ることができるものであり、本
編情報を通常再生して見る必要があるか否かを判別する
ことができるものである。従って、要約情報を再生して
視聴することにより、本編情報の概要を把握することが
できるので、本編情報を再生する必要がなくなるという
ことも多く発生する。
【０１８３】また、記録媒体８は大容量であるといって
も、その記録容量には限りがあり、本編情報と要約情報
とを常に対で管理していたのでは、必要な要約情報まで
消去してしまう可能性があるし、また、本編情報と要約
情報と記録領域の管理を全く別個に行なうのでは、その
関連付けが難しくなる。
【０１８４】そこで、この第２の実施の形態の記録再生
装置においては、本編情報と要約情報との記録領域を関
連付けて管理するが、記録媒体８の記録容量が不足して
きた場合には、要約情報を優先的に記録媒体８に残すよ
うにすることにより、記録媒体８を効率よく有効に活用
し、これに記録された画像信号等の情報信号の効果的か
つ効率的な利用を可能にするものである。
【０１８５】なお、要約情報は、ダイジェスト再生を行
うための情報であり、例えば、カメラワークの変化した
後など、シーンチェンジのあった前後の区間であって、
音声レベルが所定値以上の本編信号の区間の画像信号と
音声信号とが抽出されて形成されたものである。
【０１８６】具体的に示せば、要約情報は、例えば、図
１３（ａ）に示す本編情報のシーンチェンジのあった前
後の区間であって、音声レベルが所定値以上となる区間
Ａ１、Ａ２、Ａ３の画像信号と音声信号とが抽出され
て、図１３（ｂ）に示すように形成されるものである。
【０１８７】また、例えばテレビ放送信号の音声信号の
類似部分を検出し、その音声信号の類似部分の音声信
号、および、画像信号をダイジェスト再生用の要約情報
とすることも考えられる。この場合には、例えば、ニュ
ース番組を考えた場合に、ニュースキャスターの登場シ
ーンのみを再生するだけでもそのニュースの概要を把握
することが可能であると考えられるし、また、歌謡番組
などでは、音楽が放送されているシーンだけをダイジェ
スト再生すれば番組の内容を把握することができる。
【０１８８】なお、この第２の実施の形態においては、
例えば図１３に示したように、シーンチェンジ前後の所
定の区間であって、音声レベルが一定値以上の信号区間
を要約情報として用いるようにする場合を例にして説明
する。
【０１８９】［動作原理について］まず、この第２の実
施の形態の記録再生装置２００の動作原理について説明
する。前述もしたように、この第２の実施の形態の記録
再生装置２００は、テレビ放送番組を構成するすべての
画像信号と音声信号とからなる本編情報と、その本編情
報のいわば抜粋であって、そのその本編情報によって再
生されるテレビ放送番組の概要が分かるダイジェスト再
生用信号である要約情報の両方を記録媒体８に記録する
ことができるものである。
【０１９０】そして、この第２の実施の形態の記録再生
装置２００においては、例えば、図１４に示すように、
記録媒体８の記録領域を要約情報の記録領域である領域
Ｒ１と、本編データの記録領域である領域Ｒ２とに分
け、要約情報は記録媒体８の領域Ｒ１に記録して行き、
本編情報は記録媒体８の領域Ｒ２に記録して行く。
【０１９１】記録再生装置２００のシステムコントロー
ラ１７は、記録残容量検出部３１を通じて記録媒体８の
残記憶容量を監視する。ここで、図１４（ａ）に示すよ
うに、番組１〜番組４までの要約情報と本編情報とを記
録した後、番組５の要約情報と本編情報とを記録する際
に、本編情報の記録領域Ｒ２の記録容量が不足すること
が検知された場合について考える。
【０１９２】このような場合には、図１４（ｂ）に示す
ように、番組５の要約情報はそのまま記録媒体８の要約
情報の記録領域である領域Ｒ１に記録するが、番組５の
本編情報は、既に記録されている記録日時の最も古い番
組の本編情報である番組１の本編情報が記録されている
記録領域に上書き（重ね書き）する。
【０１９３】また、番組１の本編情報が記録されていた
領域に、番組５の本編情報の全部を記録することができ
ないときには、番組５の本編情報の残りの情報を番組４
の本編情報の記録領域の後ろから続けて記録するように
する。
【０１９４】このようにした場合には、番組１の本編情
報は消去されてしまうことになるが、最新の番組である
番組５の本編情報は記録媒体８に記録することができ
る。しかも番組１の要約情報は消去されないので、番組
１の概要は番組１の要約情報を再生するダイジェスト再
生によりいつでも知ることができるようにされる。
【０１９５】なお、要約情報の記録領域Ｒ１自体の記録
容量が不足する恐れがあることが検出された場合には、
システムコントローラ１７は、表示系３３を通じてこれ
を通知し、ユーザに注意を促し、記録媒体８の整理や領
域の拡張などを行なうことを要求するようにすることも
できる。
【０１９６】なお、図１４の例の場合には、要約情報の
記録領域Ｒ１と本編情報の記録領域Ｒ２とを予め分けて
置くようにした場合を例にして説明したが、これに限る
ものではない。例えば、図１５（ａ）に示すように、番
組毎に要約情報と本編情報とを隣接するようにして記録
して行き、容量が不足することが予想される場合には、
図１５（ｂ）に示すように、記録日時が最古の番組１の
本編情報の記録領域に、最新に記録される番組５の本編
情報を上書き記録するようにしてもよい。
【０１９７】要は、要約情報は常に残し、本編情報を最
古のものと最新のものとを入れ換えるようにして行くこ
とにより、要約情報までもが消去され、目的とする番組
の概要までもが把握することができない状況を回避する
ことができるようにしておけばよい。
【０１９８】［第２の実施の形態の記録再生装置２００
の構成と動作について］図１２に示したこの第２の実施
の形態の記録再生装置２００の構成と動作について説明
する。図１２に示すように、この第２の実施の形態の記
録再生装置２００には、記録媒体初期化検出３２が設け
られている。記録媒体初期化検出部３２は、記録媒体８
が初期化されたままの状態、すなわち、画像データや音
声データなどの情報が何も記録されていない状態か否か
を検出する。
【０１９９】記録媒体初期化検出部３２からの検出結果
は、システムコントローラ１７に通知される。システム
コントローラ１７は、記録媒体８に情報信号が何も記録
されていない初期化された状態であることが検出された
場合には、これを表示系３３を通じてユーザに通知し、
図１４、図１５に示した記録方式のいずれを用いて情報
信号の記録媒体８の記録を行なうようにするかの選択入
力を促す。
【０２００】例えば、図１４に示した第１の記録方式の
場合には、要約情報の記録領域Ｒ１と本編情報の記録領
域Ｒ２とを分けて管理することができる。このため、本
編情報については、例えば数週間程度分記録されていれ
ばよいが、要約情報については数ヶ月分、あるいは、そ
れ以上取っておきたいなどという場合に便利である。
【０２０１】この第１の記録方式の場合には、要約情報
の記録領域が不足するまで警告が発せられることは無い
ので、記録媒体８の情報の整理を頻繁に行なわなくて
も、少なくとも過去の要約情報については確実に記録保
持し、本編情報についても最新のものは確実に記憶保持
しておくことができるという利点がある。
【０２０２】一方、図１５に示した第２の記録方式の場
合には、第１の記録領域と第２の記録領域とを予め大き
く取っておく必要は無いので記録媒体を効率よく使用す
ることができる。また、要約情報の記録領域と本編情報
の記録領域とは区別されないので、比較的に長期間に渡
って要約情報と本編情報との記録が可能であるという利
点がある。しかし、その記録容量がいっぱいになった時
には、本編情報、要約情報との両方が記録できなくなる
場合も発生する。
【０２０３】これら第１、第２のいずれの記録方式を用
いるかは、ユーザの記録再生装置の利用形態に応じて決
めればよい。そして、いずれの記録方式を用いるかの設
定入力は、ユーザ入力Ｉ／Ｆ１８を通じて受け付けら
れ、システムコントローラ１７の不揮発性メモリ等の設
定され、記録処理時の都度、参照され、ユーザの指示に
応じた記録方式で情報信号の記録を行なうことができる
ようにされる。
【０２０４】なお、デフォルト設定として、例えば、図
１４に示した記録方式（第１の記録方式）で記録するよ
うにしておき、必要があれば、図１５に示した記録方式
（第２の記録方式）に変更するようにしてもよい。もち
ろんこの逆に、デフォルト設定として、図１５に示した
記録方式（第２の記録方式）を用い、図１４に示した記
録方式（第１の記録方式）に変更するようにしてもよ
い。
【０２０５】そして、前述した第１の実施の形態の記録
再生装置１００の場合と同様に、この第２の実施の形態
の記録再生装置２００においても、テレビ放送番組のア
ナログ音声信号は、音声Ａ／Ｄ変換器１、音声エンコー
ダ２により処理され、データ圧縮されて形成された音声
データとして多重化処理部６に供給され、アナログ画像
信号は、画像Ａ／Ｄ変換器３、画像エンコーダ４により
処理され、データ圧縮されて形成された画像データとし
て多重化処理部６に供給される。そして、これら音声デ
ータと、画像データとが多重化されて本編情報とされ
る。
【０２０６】また、画像分類処理５においては、前述し
た第１の実施の形態の記録再生装置１００の画像分類処
理部５と同様に、類似画像判別、類似画像区間、非類似
画像区間とを判別し、その判別結果をシステムコントロ
ーラ１７に通知する。この場合、本編情報に付加するな
どのために必要になる識別情報も画像分類処理部５から
多重化処理部６に供給される。
【０２０７】また、音声分類処理部２０は、前述した第
１の実施の形態の記録再生装置１００の音声分類処理部
２０と同様に音楽信号区間と話音声信号区間とを検出す
ることができるものであるが、この第２の実施の形態に
おいては、音声信号の音声レベルをも検出し、これをシ
ステムコントローラ１７に通知する。この場合、本編情
報に付加するなどのために必要になる識別情報も音声分
類処理部２０から多重化処理部６に供給される。
【０２０８】システムコントローラ１７は、画像分類処
理部５からの分類結果と、音声分類処理部２０からの音
声レベル情報とに基づいて、シーンチェンジのあった画
像の所定の前後区間であって、音声信号レベルが所定レ
ベル以上の区間をダイジェスト再生に用いる画像信号区
間、音声信号区間として特定し、その区間特定情報を多
重化処理部６に供給する。
【０２０９】多重化処理部６は、システムコントローラ
１７からの区間特定情報に基づいて、ダイジェスト再生
用に用いる本編情報の所定の区間の情報を抽出して、こ
れを要約情報とする。すなわち、多重化処理部６は、シ
ステムコントローラ１７の制御に応じて本編情報から要
約情報を形成する。
【０２１０】多重化処理部６において形成された本編情
報と要約情報とは、記録処理部７を通じて記録媒体８に
記録されることになるが、ここで、システムコントロー
ラ１７は、前述したように、図１４に示した第１の記録
方式、あるいは、図１５に示した第２の記録方式のうち
の予め指示された記録方式で、本編情報と要約情報とを
記録媒体８に記録するように、記録処理部７を制御す
る。
【０２１１】これによって、図１４、あるいは、図１５
に示したように、本編情報と要約情報とが記録媒体に記
録されることになる。この第２の実施の形態において、
記録処理部７は、記録用信号を形成するだけでなく、形
成した記録用信号を記録媒体に記録する記録ヘッド部を
も備えたものであり、この記録ヘッドの位置をシステム
コントローラ１７が制御することにより、記録領域が制
御するようにされる。
【０２１２】なお、シーンチェンジ点の画像を前述した
第１の実施の形態の記録再生装置の分類表示と同様に、
記録時に分類表示部１９に行なうようにしてもよいし、
ダイジェスト再生に用いるため抽出された画像と音声を
分類表示部１９を通じて出力するようにすることもでき
る。
【０２１３】また、記録媒体８に記録された情報信号の
再生は、前述した第１の実施の形態の記録再生装置１０
０の場合と同様である。しかし、ダイジェスト再生がユ
ーザ入力Ｉ／Ｆ１８を通じて指示された場合には、シス
テムコントローラ１７は、再生制御部９を制御して、指
示された番組の要約データを記録媒体８から読み出し、
これを再生処理部１０を通じて分離処理部１１に供給
し、要約データの音声データと画像データとを分離す
る。
【０２１４】そして、音声データは、音声デコーダ１
２、音声Ｄ／Ａ変換器１３を通じて出力し、画像データ
は、映像デコーダ１４、映像Ｄ／Ａ変換器１５を通じて
出力することによりダイジェスト再生を行なうことがで
きるようにされる。
【０２１５】なお、画像分類部５、音声分類部２０のい
ずれにおいても、データ圧縮前のデータを用い分類処理
を行なうようにすることもできる。
【０２１６】［記録再生装置２００の動作について］次
に、この第２の実施の形態の記録再生装置２００の動作
について、図１６、図１７のフローチャートを参照しな
がら説明する。この図１６、図１７のフローチャート
は、説明を簡単にするため、タイマー記録（予約録画）
のように、予め記録開始時刻と記録終了時刻とを設定す
る記録時間の設定がなされている場合の例として説明す
る。
【０２１７】タイマー記録の開始が指示されると、シス
テムコントローラ１７は、指示された記録開始時刻と記
録終了時刻とから記録時間（記録開始から記録終了まで
の時間）を算出する(ステップＳ１０１)。
【０２１８】そして、システムコントローラ１７は、記
録残容量検出部３１からの検出出力に基づいて、要約情
報の記録領域Ｒ１の残記録容量を検出し（ステップＳ１
０２）、この残記録容量が、予め決められた容量以上か
否か、あるいは、ステップＳ１０１で算出された記録時
間に応じて予想される要約情報のデータ量以上か否かを
判断する（ステップＳ１０３）。
【０２１９】ステップＳ１０３の判断処理において、要
約情報の記録領域Ｒ１の残記録容量が、所定量以上ある
と判断した時には、システムコントローラ１７は、記録
残容量検出部３１からの検出出力に基づいて、本編情報
の記録領域Ｒ２の残記録容量を検出し（ステップＳ１０
４）、この残記録容量が、予め決められた用量以上か否
か、あるいは、ステップＳ１０１で算出された記録時間
に応じた本編情報のデータ量以上か否かを判断する（ス
テップＳ１０５）。
【０２２０】ステップＳ１０５の判断処理において、本
編情報の記録領域Ｒ２の残記録容量が、所定量以上ある
と判断した時には、システムコントローラ１７は、今回
記録する本編情報の記録領域を記録媒体８に設定し（ス
テップＳ１１４）、その本編情報の記録媒体８への記録
を実行する（ステップＳ１０８）。
【０２２１】ステップＳ１０５の判断処理において、本
編情報の記録領域Ｒ２の残記録容量が、不足すると判断
した時には、システムコントローラ１７は、既に記録さ
れている本編情報のうち最も古い本編情報の記録領域を
特定し（ステップＳ１０６）、その特定した記録領域に
本編情報を記録するように記録処理部７の制御を開始し
（ステップＳ１０７）、今回記録する本編情報を最も古
い本編情報が記録されている記録領域に上書きする（ス
テップＳ１０８）。
【０２２２】そして、画像分類処理部５においての類似
判別および分類処理と、音声分類処理部２０においての
音声レベル検出処理を行なうことにより、本編情報の特
性信号を検出し（ステップＳ１０９）、この検出結果に
基づいて、システムコントローラ１７が、ダイジェスト
再生用の信号区間を特定し、処理の対象となっている本
編情報が要約情報となるべき区間の情報であるか識別す
る（ステップＳ１１０）。
【０２２３】ステップＳ１１０の判断処理において、処
理の対象となっている本編情報が要約情報となるべき区
間の情報であると識別したときには、その区間の本編情
報を抽出して要約情報を形成し、この要約情報が当該本
編情報の要約情報であることが識別可能な情報を付加す
るなどの識別処理を行なって（ステップＳ１１１）、そ
の要約情報を要約情報の記録領域Ｒ２に記録する（ステ
ップＳ１１２）。
【０２２４】また、ステップＳ１１０の判断処理におい
て、処理の対象となっている本編情報が要約情報となる
べき区間の情報でないと識別した場合、および、ステッ
プＳ１１２の処理の後、システムコントローラ１７は、
ユーザから記録の停止指示が入力されたか否かを判断し
（ステップＳ１１３）、停止指示が入力されていないと
判断したときには、ステップＳ１０８からの処理を繰り
返す。
【０２２５】また、ステップＳ１１３の判断処理におい
て、停止指示が入力されたと判断したときには、この図
１６、図１７の処理を終了して、例えばユーザからの指
示入力待ちとなる。
【０２２６】また、ステップＳ１０３の判断処理におい
て、要約情報の記録領域Ｒ１の残記録容量が、不足する
と判断した時には、図１７に示す処理に移り、システム
コントローラ１７は、表示系３３を通じてユーザに警告
を行ない（ステップＳ１１５）、ユーザからの記録中止
指示があったか否かを判断する（ステップＳ１１６）。
ステップＳ１１６の判断処理において、中止指示があっ
たと判断したときには、システムコントローラ１７は、
この図１６、図１７に示す処理を終了する。
【０２２７】ステップＳ１１６の判断処理において、ユ
ーザからの中止指示がないと判断した場合（記録続行指
示があった場合）、システムコントローラ１７は、既に
要約情報の記録領域Ｒ１に記録されている要約情報のう
ち最も古い要約情報を特定し（ステップＳ１１７）、そ
の特定した要約情報が記録されている記録領域を今回の
要約情報を記録する記録領域として設定し（ステップＳ
１１８）、図１６に示したステップＳ１０４からの処理
を行なう。
【０２２８】次に、記録媒体８が初期化されたままの状
態にあるときに、記録方式を選択できるようにする場合
の記録再生装置２００の動作について説明する。図１８
は、記録媒体８が初期化されたままの状態にあるとき
に、記録方式を選択できるようにする場合の記録再生装
置２００の動作について説明するためのフローチャート
である。
【０２２９】この図１８に示す処理は、例えば、タイマ
ー記録などの設定処理など、記録を行なうための指示が
入力された場合に実行される処理である。図１８に示す
処理が実行されると、まず、システムコントローラ１７
は、記録媒体初期化検出部３２からの検出結果に基づい
て、まず記録媒体８の状態を検出する（ステップＳ１３
１）。
【０２３０】そして、システムコントローラ１７は、記
録媒体８が、情報信号が記録されておらず、初期化され
た状態のままであるか否かを判断する（ステップＳ１３
２）。
【０２３１】ステップＳ１３２の判断処理において、情
報信号が既に記録されていると判断した場合には、この
図１８に示す処理を抜けて、例えば、図１６、図１７に
示した処理が行なうようにされる。
【０２３２】また、ステップＳ１３２の判断処理におい
て、記録媒体８は初期化されたままの状態であると判断
した場合には、システムコントローラ１７は、表示系３
３を通じて記録方式の選択入力を促すメッセージをユー
ザに提供し、ユーザ入力インターフェース１８を通じ
て、ユーザからの記録方式の選択入力を受け付ける（ス
テップＳ１３３）。
【０２３３】そして、システムコントローラ１７は、受
け付けた選択入力が、第１の記録方式を選択するもの
か、第２の記録方式を選択するものかを判断する（ステ
ップＳ１３４）。システムコントローラ１７は、ステッ
プＳ１３４の判断処理において、第１の記録方式を選択
するものであると判断したときには、自己の不揮発性メ
モリに第１の記録方式が選択されたことを設定する（ス
テップＳ１３５）。
【０２３４】また、システムコントローラ１７は、ステ
ップＳ１３４の判断処理において、第２の記録方式を選
択するものであると判断したときには、自己の不揮発性
メモリに第１の記録方式が選択されたことを設定する
（ステップＳ１３６）。ステップＳ１３５、ステップＳ
１３６の処理の後、この図１８に示す処理を抜けて、例
えば、図１６、図１７に示した処理が行なうようにされ
る。なお、この図１８に示す処理は、例えば、用いる記
録方式の選択および設定が行なわれている場合には行な
わないようにしてもよい。
【０２３５】［第２の実施の形態のまとめ］このよう
に、この第２の実施の形態の記録再生装置２００におい
ては、本編情報と要約情報との記録領域を関連付けて管
理するが、記録媒体８の記録容量が不足してきた場合に
は、要約情報を優先的に記録媒体８に残すようにするこ
とにより、記録媒体８を効率よく有効に活用し、これに
記録された画像信号等の情報信号の有効かつ効率的な利
用を可能にすることができる。
【０２３６】つまり、要約情報は優先的に記録媒体に残
すようにすることで、必要な情報が不用意に消去される
ことを防止することができるとともに、記録媒体を効率
よく使用することができる。
【０２３７】また、要約情報が優先的に残されるので、
要約情報を用いたダイジェスト再生をいつでも行なっ
て、短時間で効率的に情報の概要を知ることができ、本
編情報の再生の頻度を低減させたり、また、本編情報が
消去された場合にも、目的とする情報のほとんどを得た
りすることができるようにされる。
【０２３８】また、既に記録媒体に記録した情報信号を
他の記録媒体にコピー（複写）したりムーブ（移動）し
たりする場合でも、繁雑に記録情報を処理することを抑
制し、記録情報の処理や整理を効率的に行なうことがで
きるようにされる。
【０２３９】なお、この第２の実施の形態においては、
情報信号としてテレビ放送信号の画像信号と音声信号を
記録の対象とする場合を例にして説明したが、これに限
るものではない。情報信号は、画像信号だけであっても
よいし、音声信号だけであってもよい。また、テキスト
データなどであってもよい。
【０２４０】また、記録媒体８には、主に画像信号と音
声信号を記録するものとして説明したが、記録媒体８に
は、例えばプログラムの記録領域や種々のデータの記録
領域が設けられていてもよい。
【０２４１】また、前述した図１５の場合には、対にな
る要約情報と本編情報とを隣接して記録するものとして
説明したが、必ずしも隣接してそれらの記録領域を確保
する必要はない。１つ分の要約情報を記録する領域と、
１つ分の本編情報を記録する領域とを離れて設けるよう
にしてももちろんよい。
【０２４２】また、要約情報としては、本編情報の全部
によって提供される情報の概要を把握することができる
程度に形成されたものであればよい。したがって、この
第２の実施の形態において、要約情報は本編情報から抜
粋するようにして形成したが、これに限るものではな
く、要約情報を本編情報とは別個に作成し、これを用い
るようにしてももちろんよい。
【０２４３】［第３の実施の形態］（請求項１７〜請求
項２０ 図１９から図２２） 図１９は、この発明による情報信号処理装置、情報信号
処理方法の一実施の形態が適用された第３の実施の形態
の記録再生装置３００を説明するためのブロック図であ
る。
【０２４４】図１９に示すこの第３の実施の形態の記録
再生装置は、図１２に示した第２の実施の形態の記録再
生装置２００が備えていた記録媒体初期化検出部３２を
備えていない点、および、第２の記録処理部４１、第２
の記録媒体４２、第２の再生処理部４３、記録媒体残量
検出部４４が新たに設けられている点を除けば、図１２
に示した第２の実施の形態の記録再生装置２００とほぼ
同様に構成されたものである。
【０２４５】また、前述もしたように、図１２に示した
第２の実施の形態の記録再生装置２００は、図１に示し
た第１の実施の形態の記録再生装置１００と同様に構成
された部分を多く備えたものである。このため、図１８
に示すこの第３の実施の形態の記録再生装置３００にお
いても、図１に示した第１の実施の形態の記録再生装置
１００と同様に構成される部分、および、図１２に示し
た第２の実施の形態の記録再生装置２００と同様に構成
される部分には同じ参照符号を付し、その詳細な説明に
ついては省略する。
【０２４６】［動作原理について］この第３の実施の形
態の記録再生装置３００は、第２の記録再生装置２００
の場合と同様に、テレビ放送番組のその番組を提供する
ための全ての画像信号と全ての音声信号とからなる本編
情報を記録媒体に記録する場合に、この本編情報に対し
て、図１３を用いて前述したように当該本編情報の飛び
飛びに発生することになるダイジェスト再生用の要約情
報となる部分を後で抽出可能にするための識別情報を付
加して記録媒体８に記録する。
【０２４７】前述した第２の実施の形態に記録再生装置
２００が、要約情報をも形成し本編情報に加えて要約情
報をも記録するようにしたのに対し、この第３の実施の
形態に記録再生装置３００においては、記録後において
本編情報から要約情報部分を抽出してダイジェスト再生
することができるようにしている。
【０２４８】そして、この第３の実施の形態の記録再生
装置３００は、記録媒体の記録容量が不足することが予
想されても、前述した第２の実施の形態の記録再生装置
２００のように、新しい本編情報を古い本編情報の記録
領域に上書きすることなく、古い本編情報も保持するよ
うにしながら新しい本編情報の追加記録をも可能にしよ
うとするものである。
【０２４９】簡単には、第１の記録媒体（メイン記録媒
体）と第２の記録媒体（サブ記録媒体）とを用意し、通
常は、要約情報部分の抽出が可能なようにされた本編情
報を第１の記録媒体に記録して行くが、第１の記録媒体
の記憶容量が所定量以下になった時には、既に第１の記
録媒体に記録されている本編情報を第２の記録媒体に移
動させて、第１の記録媒体に常に所定量以上の空き領域
を用意する。これにより、第１の記憶媒体の記録容量が
不足することを防止し、本編情報が上書きされたり、削
除されたりすることにより、消滅してしまうことを防止
する。
【０２５０】また、本編情報が第２の記録媒体に移動さ
れた場合であっても、その要約情報を第１の記録媒体に
残し、いつでも即座にダイジェスト再生を行なうことが
できるとともに、必要に応じて第２の記録媒体に移動さ
れた本編情報の通常再生をも行なうことができるように
したものである。このようにすることにより、第１の記
録媒体がアクセス性の良いディスク記録媒体であること
の利点を損なうことがないようにもしている。
【０２５１】［第３の実施の形態の記録再生装置３００
の構成と動作について］図１９に示すように、この第３
の実施の形態の記録再生装置３００は、第１の記録処理
部７、第１の記録媒体８、第１の再生制御部９、第１の
記録媒体残量検出部３１に加えて、第２の記録処理部４
１、第２の記録媒体４２、第２の再生制御部４３、第２
の記録媒体残量検出部４４を備えたものである。
【０２５２】第１の記録媒体８は、メイン記録媒体とし
ての役割を有するものであり、通常の記録時において
は、この記録媒体８に本編情報と要約情報とが記録する
ようにされる。第２の記録媒体４２は、サブ記録媒体と
しての役割を有するものであり、記録媒体８の残記録容
量が不足しそうな場合に、記録媒体８に既に記録されて
いる本編情報の移動先として用いられるものである。第
２の記録媒体４２は、ハードディスクなどのディスク再
生装置の他、磁気テープなどの大容量記録媒体を用いる
ことができる。
【０２５３】そして、この図１９に示すこの第３の実施
の形態の記録再生装置３００は、テレビ放送番組などの
画像信号と音声信号とを記録する場合に、その本編情報
には、要約情報が抽出可能なように識別情報が付加され
た状態で記録媒体８（第１の記録媒体）に記録すること
ができるものである。
【０２５４】そして、例えば、記録に先立って、記録媒
体残量検出部３１により記録媒体８の残容量を検出し、
残容量が不足されることが検知された場合には、記録媒
体８に記録されている最古の本編情報を記録処理部４１
を通じて記録媒体４２に移動させ、記録媒体８の残容量
を増加させた後に新たな本編情報を記録媒体８に記録す
る。
【０２５５】記録媒体４２に記録された本編情報を通常
再生する場合には、システムコントローラ１７により制
御される再生制御部４３により、記録媒体４２から読み
出される本編データは、記録媒体８に記録されている情
報を再生する場合と同様に、再生処理部１０、分離処理
部１１、音声デコーダ１２、音声Ｄ／Ａ変換器１３、映
像デコーダ１４、映像Ｄ／Ａ変換器１５を通じて再生す
ることができるようにされる。
【０２５６】なお、記録媒体４２の残容量は、記録媒体
残量検出部４４を通じてシステムコントローラ１７によ
り監視される。そして、第２の記録媒体４２の残容量が
不足することが検出された場合には、例えば表示系３３
を通じて警告を発生させ、記録媒体４２の整理や交換を
促すようにする。
【０２５７】このようにして、この第３の実施の形態の
記録再生装置３００は、少なくとも要約情報は第１の記
録媒体に残すようにし、第１の記録媒体に本編情報の記
録領域が不足する場合には、古い本編情報を第２の記録
媒体に移動させて、新しい本編情報を第１の記録媒体に
記録することができるようにしている。
【０２５８】なお、図１９に示すこの第３の実施の形態
の記録再生装置３００において、画像分類処理部５と、
音声信号処理部２０とは、前述した第１の実施の形態の
記録再生装置１００の場合と同様に、同じ類似区間には
同じ識別ＩＤを割り当てるように形成する。また、音声
分類処理部２０は、これに供給された音声信号の信号レ
ベルをも検出することができるようにされている。
【０２５９】システムコントローラ１７は、画像分類処
理部５、音声分類処理部２０から出力信号に基づいて、
シーンチェンジの前後の所定区間であって、音声レベル
が一定値以上の要約情報となる信号区間を特定し、この
特定情報を多重化処理部に供給することにより、多重化
処理部６において、要約情報となる本編情報の部分には
要約情報識別情報が付加するようにされている。
【０２６０】［記録再生装置３００の動作について］次
に、この第３の実施の形態の記録再生装置３００の動作
について図２０〜図２２のフローチャートを参照しなが
ら説明する。図２０〜図２２に示すフローチャートは、
この第３の実施の形態の記録再生装置３００の記録ある
いは再生を行なう場合の動作を説明するためのフローチ
ャートである。なお、この図２０〜図２２に示す処理に
おいては、例えば１〜複数フレーム単位、１〜複数ＧＯ
Ｐ単位などのように所定単位毎に処理するようにしてい
る。
【０２６１】システムコントローラ１７は、ユーザ入力
Ｉ／Ｆ１８を通じてユーザからの動作指示コマンドを受
け付けると、図２０から図２２に示す処理を実行し、ま
ず、実行が指示された動作は、再生か、記録かを判断す
る（ステップＳ２０１）。ステップＳ２０１において、
指示された動作が記録であると判断したときには、シス
テムコントローラ１７は記録残容量検出部３１を通じ
て、第１の記録媒体８の記憶容量の残容量を検出する
（ステップＳ２０２）。
【０２６２】そして、システムコントローラ１７は、ス
テップＳ２０２においての残容量の検出結果に基づい
て、本編情報と要約情報の両方を記録するのに十分な残
容量があるか否かを判断する（ステップＳ２０３）。こ
のステップＳ２０３においては、例えば３時間分の記録
量以上などの閾値を設けておく。なお、例えば、タイマ
ー記録モードの場合には、記録開始時間と記録終了時間
とから分かる録画予定時間により、残容量が十分か否か
を判断するようにしてもよい。
【０２６３】ステップＳ２０３の判断処理において、記
録媒体８の残容量は十分あると判断したときには、シス
テムコントローラ１７は、画像分類処理部５、音声分類
処理部２０を制御し、これらに供給される入力情報（入
力データ）から処理単位となる所定区間分の信号を抽出
し（ステップＳ２０４）、特性検出を行なって得られた
特性情報に基づく類似区間判別処理、類似区間の分類処
理処理を行なう（ステップＳ２０５）。
【０２６４】そして前述もしたように、システムコント
ローラ１７は、画像分類処理部５と音声分類処理部２０
とからの処理結果に基づいて、ダイジェスト再生用の要
約情報部分を特定し、これを多重化処理部６に通知し、
多重化処理部６において特定された信号区間の多重化信
号に識別情報が付加されて（ステップＳ２０６）、この
識別情報が付加された本編情報が記録処理部７を通じて
第１の記録媒体８に記録される（ステップＳ２０７）。
【０２６５】なお、この第３の実施の形態においても、
画像の類似判別と分類処理の結果、および、音声信号の
信号レベルとに基づいて、要約データに用いる本編情報
の信号区間を特定するようにした。しかし、これに限り
ものではない。前述もしたように、音声信号について
も、類似区間を特定するようにし、画像の類似区間であ
って、かつ、音声の類似区間を要約情報区間として用い
るようにしてもよいし、画像情報と音声情報の一方だけ
を用いて類似区間を特定し、要約情報として用いる信号
区間を特定するようにすることもできる。
【０２６６】そして、システムコントローラ１７は、ユ
ーザから記録の停止指示が入力されたか否かを判断し
（ステップＳ２０８）、停止指示があったと判断したと
きには、図２０〜図２２に示す処理を終了して、例えば
ユーザからの指示入力待ちとなる。ステップＳ２０８の
判断処理において、停止指示は入力されていないと判断
したときには、例えば記録終了時間の到来、あるいは、
他の番組コードなどの到来により、目的とする放送番組
の記録が終了したか否かを判断する（ステップＳ２０
９）。
【０２６７】ステップＳ２０９の判断処理において、目
的とする番組の記録が終了したと判断したときには、図
２０〜図２２に示す処理を終了して、例えばユーザから
の指示入力待ちとなる。また、ステップＳ２０９の判断
処理において、目的とする番組がまだ終了していないと
判断したときには、動作モードの変更指示が入力された
か否かを判断する（ステップＳ２１０）。
【０２６８】ステップＳ２１０の判断処理において、ユ
ーザから動作モードの変更指示が入力されていないと判
断したときには、ステップＳ２０４からの処理を繰り返
し、本編情報と要約情報との処理単位毎の記録媒体８の
への記録を続行する。ステップＳ２１０の判断処理にお
いて、ユーザから動作モードの変更指示が入力されたと
判断したときには、ステップＳ２０１からの処理を繰り
返し、再生か記録かの判定処理から処理することにな
る。
【０２６９】ステップＳ２０３において、第１の記録媒
体８の残容量が不足すると判断したときには、図２１の
ステップＳ２１１の処理に進み、記録媒体８に記録され
ている各本編情報の記録日時を参照して、最も古い本編
情報を検出し（ステップＳ２１１）、その最も古い本編
情報の所定の処理単位の本編信号（所定区間の本編信
号）を抽出して（ステップＳ２１２）、これを記録処理
部４１を通じて第２の記録媒体４２にコピーする（ステ
ップＳ２１３）。
【０２７０】そして、コピーするようにした本編情報に
付加されている要約情報区間か否かを識別するための識
別情報を検出し（ステップＳ２１４）、その識別情報
が、第２の記録媒体４２に記録した本編情報は要約情報
としても用いられる要約情報部分であることを示すもの
であるか否かを判断する（ステップＳ２１５）。
【０２７１】ステップＳ２１５の判断処理において、第
２の記録媒体４２にコピーした所定区間の本編情報は、
要約情報区間であると判断した場合には、この部分の信
号を要約情報がばらばらにならないようにするために第
１の記録媒体８の所定の部分にムーブ(移動)し、１つの
番組に要約情報を第１の記録媒体の所定の場所に集める
ようにする（ステップＳ２１６）。
【０２７２】ステップＳ２１５の判断処理において、第
２の記録媒体４２にコピーした所定区間の本編情報は、
要約情報区間ではないと判断した場合には、第１の記録
媒体か消去され記録可能な領域とされるか上書きの対象
領域となるようにされる（ステップＳ２１７）。
【０２７３】ステップＳ２１６、または、ステップＳ２
１７の処理の後、システムコントローラ１７は、画像分
類処理部５、音声分類処理部２０を制御し、これらに供
給される入力情報（入力データ）から処理単位となる所
定区間分の信号を抽出し（ステップＳ２１８）、特性検
出を行なって得られた特性情報に基づく類似区間判別処
理、類似区間の分類処理処理を行なう（ステップＳ２１
９）。
【０２７４】そして、前述もしたように、システムコン
トローラ１７は、画像分類処理部５と音声分類処理部２
０とからの処理結果に基づいて、ダイジェスト再生用の
要約情報部分を特定し、これを多重化処理部６に通知
し、多重化処理部６において特定された信号区間の多重
化信号に識別情報を付加し（ステップＳ２２０）、この
識別情報が付加された本編情報が記録処理部７を通じて
第１の記録媒体８に記録する（ステップＳ２２１）。
【０２７５】そして、システムコントローラ１７は、ユ
ーザから記録の停止指示が入力されたか否かを判断し
（ステップＳ２２２）、停止指示があったと判断したと
きには、図２０〜図２２に示す処理を終了して、例えば
ユーザからの指示入力待ちとなる。ステップＳ２２２の
判断処理において、停止指示は入力されていないと判断
したときには、例えば記録終了時間の到来、あるいは、
他の番組コードなどの到来により、目的とする放送番組
の記録が終了したか否かを判断する（ステップＳ２２
３）。
【０２７６】ステップＳ２２３の判断処理において、目
的とする番組の記録が終了したと判断したときには、図
２０〜図２２に示す処理を終了して、例えばユーザから
の指示入力待ちとなる。また、ステップＳ２２３の判断
処理において、目的とする番組がまだ終了していないと
判断したときには、動作モードの変更指示が入力された
か否かを判断する（ステップＳ２２４）。
【０２７７】ステップＳ２２４の判断処理において、ユ
ーザから動作モードの変更指示が入力されたと判断した
ときには、システムコントローラ１７は、図２０のステ
ップＳ２０１からの処理を繰り返す。また、ステップＳ
２２４の判断処理において、ユーザから動作モードの変
更指示が入力されていないと判断したときには、ステッ
プＳ２１１において特定した最古の本編情報の全部を第
１の記録媒体８から第２の記録媒体４２にコピーし終え
たか否かを判断する（ステップＳ２２５）。
【０２７８】ステップＳ２２５の判断処理において、最
古の本編情報のコピーが終了したと判断したときには、
ステップＳ２１８からの処理を繰り返し、新たな本編情
報の第１の記録媒体８への記録を続行する。ステップＳ
２２５の判断処理において、最古の本編情報のコピーが
終了していないと判断したときには、ステップＳ２１２
からの処理を繰り返し、最古の本編情報の第２の記録媒
体への移動と、新たな本編情報の第１の記録媒体への記
録を続行する。
【０２７９】また、ステップＳ２０１の判断処理におい
て、ユーザから再生が指示されたと判断したときには、
図２２に示すステップＳ２２６の処理に進み、システム
コントローラ１７は、ユーザからの再生する番組の選択
入力を受け付ける（ステップＳ２２６）。この選択入力
は、第１の記録媒体（メイン記録媒体）８と第２の記録
媒体（サブ記録媒体）４２のいずれに記録されているど
の番組を、通常再生とダイジェスト再生のいずれにより
再生するかを選択するものである。
【０２８０】そして、第１の記録媒体８からの再生か、
第２の記録媒体４２からの再生かを判断する（ステップ
Ｓ２２７）。ステップＳ２２７の判断処理において、第
１の記録媒体８からの再生であると判断したときには、
第１の記録媒体からの再生モードとなり、再生制御部９
を制御して、第１の記録媒体８に記録されている選択さ
れた番組の本編情報、または、要約情報を読み出し、選
択された方式で再生を行なう（ステップＳ２２８）。
【０２８１】そして、システムコントローラ１７は、ユ
ーザから再生停止が指示されたか否かを判断し（ステッ
プＳ２２９）、停止が指示されたと判断したときには、
この図２０〜図２２に示す処理を終了して、例えばユー
ザからの指示入力待ちとなる。ステップＳ２２９の判断
処理において、再生停止指示が入力されていないと判断
したときには、動作モードの変更が指示されたか否かを
判断する（ステップＳ２３０）。
【０２８２】ステップＳ２３０の判断処理において、動
作モードの変更が指示されたと判断したときには、図２
０に示すステップＳ２０１からの処理を繰り返し、動作
モードの変更が指示されていないと判断したときには、
再生する番組の変更が指示されたか否かを判断する（ス
テップＳ２３１）。
【０２８３】ステップＳ２３１において、再生する番組
の変更が指示されていないと判断したときには、ステッ
プＳ２２８からの処理を繰り返し、その番組の再生を続
行し、再生する番組の変更が指示されたと判断したとき
には、ステップＳ２２６からの処理を繰り返し、新たな
番組についての再生を開始するようにする。
【０２８４】ステップＳ２２７の判断処理において、第
２の記録媒体４２からの再生であると判断したときに
は、第２の記録媒体４２からの再生モードとなり、再生
制御部４３を制御して、第２の記録媒体４２に記録され
ている選択された番組の本編情報を読み出して通常再生
を行なう（ステップＳ２３２）。
【０２８５】そして、システムコントローラ１７は、ユ
ーザから再生停止が指示されたか否かを判断し（ステッ
プＳ２３３）、停止が指示されたと判断したときには、
この図２０〜図２２に示す処理を終了して、例えばユー
ザからの指示入力待ちとなる。ステップＳ２３３の判断
処理において、再生停止指示が入力されていないと判断
したときには、動作モードの変更が指示されたか否かを
判断する（ステップＳ２３４）。
【０２８６】ステップＳ２３４の判断処理において、動
作モードの変更が指示されたと判断したときには、図２
０に示すステップＳ２０１からの処理を繰り返し、動作
モードの変更が指示されていないと判断したときには、
再生する番組の変更が指示されたか否かを判断する（ス
テップＳ２３５）。
【０２８７】ステップＳ２３５において、再生する番組
の変更が指示されていないと判断したときには、ステッ
プＳ２３２からの処理を繰り返し、その番組の本編情報
による通常再生を続行し、再生する番組の変更が指示さ
れたと判断したときには、ステップＳ２２６からの処理
を繰り返し、新たな番組についての再生を開始するよう
にする。
【０２８８】［第３の実施の形態のまとめ］このように
して、第１の記録媒体８の残容量が予め決められた容量
よりも少なくなった場合には、最古の本編情報を第２の
記録媒体４２に移動させ、第１の記録媒体８の残容量を
多く確保した後に、新たな本編情報を第１の記録媒体８
に記録する。したがって、第１の記録媒体８の記憶容量
が足りずに新たな番組の本編情報が記録できないなどの
不都合を生じさせることがない。
【０２８９】また、本編情報が第２の記録媒体４２に移
動するようにされた番組の要約情報は、第１の記録媒体
８に残すようにされるので、古い番組のダイジェスト再
生はいつでも迅速に行なうことができるとともに、新し
い番組の通常再生、および、ダイジェスト再生はいつで
も迅速に行なうことができるようにされる。すなわち、
第１の記録媒体のアクセス性の良さが阻害されることも
ない。
【０２９０】また、記録媒体に記録した情報信号の整理
や保存の管理をよりしやすくすることができ、豊富に提
供される情報信号の効果的、効率的な利用を促進する環
境を整えることができる。
【０２９１】なお、この第３の実施の形態の記録再生装
置３００においては、本編情報の要約部分の抽出が記録
後においても可能なように識別情報を付加して記録し、
要約情報を本編情報と別個に記録しないようにしたが、
これに限るものではない。
【０２９２】例えば、前述した第２の実施の形態の記録
再生装置２００の場合と同様に、本編情報と要約情報の
両方を第１の記録媒体８に記録して行き、第１の記録媒
体の残容量が不足してきた場合に、第１の記録媒体８か
ら第２の記録媒体４２に最古の本編情報のみを移動する
ようにすることもできる。
【０２９３】また、前述の実施の形態においては、最古
の本編情報のみを移動するものとして説明したが、例え
ば、古いものから順に２番組分の本編情報、あるいは、
３番組分の本編情報と言うように、複数番組分の本編情
報を第２の記録媒体に移動させるようにしてもよい。
【０２９４】また、予め決まられた容量分の残容量を確
保するまで、最古に第１の記録媒体に記録された本編情
報から順に、１つ以上の本編情報を移動させるようにし
てもよい。
【０２９５】また、前述もしたように、第１の記録媒体
８から第２の記録媒体４２に本編情報を写しかえる処理
は、ムーブ（移動）処理であっても、コピー（複写）処
理であってもよい。すなわち、ムーブ処理の場合、本編
情報を第１の記録媒体８から第２の記録媒体４２にコピ
ーした後に、第１の記録媒体に記録されている本編情報
の不要部分を消去することにより空き領域を確保するよ
うにすればよい。
【０２９６】また、複写処理の場合、本編情報を第１の
記録媒体８から第２の記録媒体４２にコピーした後に、
第１の記録媒体に記録されている本編情報の不要部分に
新たな本編情報の上書きを可能にするようにすればよ
い。
【０２９７】また、前述もしたように、要約情報は第１
の記録媒体８に残すようにされるが、同じ本編情報の要
約情報部分が飛び飛びに第１の記録媒体８に残されるこ
とにより、第１の記録媒体の記録領域が虫食い状態とな
り、有効に活用することができなくなることを防止する
ために、いわゆるデフラグ処理を行なって、第１の記録
媒体８の記録領域を有効に活用できるようにすることも
できる。
【０２９８】また、表示系３３を通じて、第１の記録媒
体８の残容量が少なくなったこと、第２の記録媒体の残
容量が少なくなったこと、第１の記録媒体８から第２の
記録媒体に本編情報が転送記録されたこと、さらに、第
１の記録媒体８が虫食い状態とならないようにデフラグ
処理されたこと、あるいは、それらの処理の最中である
ことなどをユーザに通知するように所定の表示を行なう
ようにしてもよい。
【０２９９】また、第２の記録媒体は、第１の記録媒体
よりも記録容量の大きいものであることが望ましい。
【０３００】［第４の実施の形態］（請求項２１〜請求
項２４ 図２３〜図２６） 図２３は、この発明による情報信号処理装置、情報信号
処理方法の一実施の形態が適用された第４の実施の形態
の記録再生装置４００を説明するためのブロック図であ
り、図２４、図２５は、この実施の形態の記録再生装置
４００の動作原理を説明するための図である。
【０３０１】この第４の実施の形態の記録再生装置４０
０は、第１の実施の形態の記録再生装置１００の場合と
同様に、テレビ放送番組の画像信号と音声信号を記録媒
体に記録して行く際に、所定のタイミング毎に画像信号
から縮小画像（サムネイル画像）を形成し、これを一覧
表示していくことができるものであるが、第１の実施の
形態の記録再生装置１００とはその縮小画像の表示態様
が異なるものである。
【０３０２】そして、この第４の実施の形態の記録再生
装置４００と第１の実施の形態の記録再生装置１００と
はほぼ同様の構成を有するものであるが、その動作の違
いを明確にするため、図２３にこの第４の実施の形態の
記録再生装置のブロック図を示し、この図２３に示すブ
ロック図をも参照しながら、この第４の実施の形態の記
録再生装置４００について詳細に説明する。
【０３０３】［動作原理について］この第４の実施の形
態の記録再生装置４００の動作原理について説明する。
図２３に示す記録再生装置４００は、情報信号として、
例えばテレビ放送番組のアナログ画像信号とアナログ音
声信号の供給を受け、これらをデジタル化し、ＭＰＥＧ
方式でデータ圧縮した後に、データ圧縮した画像データ
と音声データとを時分割多重化して、記録媒体８に記録
することができるものである。記録媒体８は、例えばハ
ードディスクなどの大容量のディスク記録媒体である。
【０３０４】また、図２３に示す記録再生装置４００
は、記録媒体８に記録された多重化信号を読み出し、画
像データと音声データに分離するとともに、そのそれぞ
れを圧縮伸張し、データ圧縮前の画像データと音声デー
タとを復元し、これらをアナログ信号に変換して出力す
ることができるものである。
【０３０５】そして、図２３に示した記録再生装置４０
０は、画像信号と音声信号の記録媒体８への記録時にお
いて、画像信号を類似画像毎に分類処理する。この分類
処理は、第１の実施の形態の記録再生装置１００の場合
と同様に、データ圧縮後の画像データ（ＭＰＥＧデー
タ）を用いて行うものであり、Ｉピクチャ単位に類似画
像の検出を行ない類似画像毎の分類処理を行なう。
【０３０６】そして、図２４（ａ）に示すように例えば
ニュース番組を構成する入力画像信号系列として、３１
枚のＩピクチャがあり、区間Ａ１、区間Ａ２、区間Ａ３
のＩピクチャはその区間内においてはいずれのＩピクチ
ャにも類似する類似画像であるとする。
【０３０７】この場合、区間Ａ１、Ａ２、Ａ３のそれぞ
れは、ニュースキャスターがニュースを読み上げている
などの比較的に画像の動きの変化が少なく、その類似画
像シーンだけでも比較的に効率よく番組の内容を把握す
ることができると考えられる。さらに考えると、区間Ａ
１、Ａ２、Ａ３のそれぞれの先頭は、ニューステロップ
（ニュースの見出し）が画面の下端部分に表示され、ニ
ュースキャスターがニュースを読み始めるシーンである
場合が多いと考えられる。
【０３０８】そこで、図２４（ｂ）に示すように、ニュ
ース番組の類似画像区間の先頭またはその付近のＩピク
チャから縮小画像を形成する。そして、時間の経過にし
たがって、順次に形成される縮小画像を図２５（ａ）に
おいて、画像１ａ〜１ｇに示すように時系列順に表示す
る。この場合、画像１ａ〜１ｇのそれぞれには、ニュー
ステロップが表示されている場合も多いと考えられるの
で、この縮小画像の一覧表示（マルチ画面表示）を見た
だけでもどのようなニュースがあったのかを迅速かつ確
実に知ることができる。
【０３０９】ニュース番組が所定時間経過後にまた放送
された場合には、そのニュース番組についても最初のニ
ュース番組について行なった処理を行ない、図２５
（ｂ）において、画像１ａ〜１ｈのように縮小画像を表
示する。この場合、１つ前のニュース番組の縮小画像で
ある図２５（ａ）における画像１ａ〜１ｇは、図２５
（ｂ）における画像２ａ〜２ｇとして表示する。
【０３１０】例えば、８つのニュース番組を順次、上述
したように処理するものとすれば、図２５（ｃ）に示す
垂直放送の１行から８行までにニュース番組毎に、水平
方向のａ列からｈ列に縮小画面が表示するようにされる
ことになる。
【０３１１】このように、以前のニュース番組の縮小画
像は、順次垂直方向下側に表示するようにし、時間の経
過とともに、同じニュースの変化の様子や、どのような
新しいニュースが発生したかなどを容易に知ることがで
きるようにする。
【０３１２】また、図８に示すように一覧表示された縮
小画像の中から目的とする縮小画像を選択することによ
り、その縮小画像の元になった画像を先頭画像とする信
号区間の信号を再生したり、あるいは、ダイジェスト再
生したりすることにより、目的とするニュースの内容の
詳細を知ることもできるようにする。すなわち、効率よ
く通常再生やダイジェスト再生を行なうことができるよ
うにする。
【０３１３】なお、ニューステロップの信号をより正確
に検出するために、類似画像の検出とともに、テロップ
検出を行なうようにしてもよい。ニュース番組における
テロップ文字は、通常、白字であることが多いことか
ら、テロップ表示位置となることが多い画面の下側部分
に相当する位置の画像信号のうちの輝度信号の特性を検
出することで、テロップが表示されている画面（Ｉピク
チャあるいはフレーム）を検出することができる。
【０３１４】［第４の実施の形態の記録再生装置４００
の構成と動作について］図２３に示したこの第４の実施
の形態の記録再生装置４００の構成と動作について説明
する。図２３において、記録媒体８の左側の部分が主に
記録系であり、記録媒体８の右側が再生系であると大別
することができる。
【０３１５】［記録系について］まず記録系について説
明する。この第４の実施の形態の記録再生装置４００に
入力されたアナログ音声信号（音声入力）は、音声Ａ／
Ｄ変換器１に供給され、ここでデジタル音声信号に変換
されて音声エンコーダ２と音声分類処理部２０とに供給
される。
【０３１６】音声エンコーダ２は、これに供給されたデ
ジタル音声信号について、ＭＰＥＧオーディオ方式など
の所定の圧縮方式で帯域圧縮処理を行ない、帯域圧縮さ
れたデジタル音声信号である音声データを形成し、これ
を多重化処理部６に供給する。
【０３１７】音声分類処理部２０は、例えば所定区間毎
のデジタル音声信号について、周波数スペクトルピーク
の継続性を検出し、音楽信号であるかどうかの判定を行
ない、その判定結果を多重化処理部６、システムコント
ローラ１７、画像シーン分類表示および再生位置表示部
（以下、分類表示部という。）１９に供給する。
【０３１８】なお、音声分類処理部２０は、音声Ａ／Ｄ
変換器１からのデジタル音声信号ではなく、図２３にお
いて点線で示すように、音声エンコーダ２からの帯域圧
縮されて形成された音声データの供給を受け、この音声
データについて前述したように分類処理を行なうように
構成することもできる。
【０３１９】一方、この第４の実施の形態の記録再生装
置４００に入力されたアナログ画像信号（画像入力）
は、画像Ａ／Ｄ変換器３に供給され、ここでデジタル画
像信号に変換されて画像エンコーダ４に供給される。
【０３２０】画像エンコーダ４は、これに供給されたデ
ジタル画像信号について、ＭＰＥＧ２方式などの所定の
圧縮方式で帯域圧縮処理を行ない、帯域圧縮されたデジ
タル画像信号である画像データを形成し、これを画像分
類処理部５、多重化処理部６、Ｉピクチャ検出部２１、
縮小画処理部２２に供給する。
【０３２１】画像分類処理部５は、画像エンコーダ４か
らの画像データのＩピクチャについて、画像の特性情報
を検出し、これに基づいて類似画像を判別し、図２４を
用いて説明したように、類似画像区間を特定し、これを
識別できるようにするための識別情報信号を形成して、
これを多重化処理部６、分類表示部１９に供給する。こ
の識別情報信号には、各類似画像区間において、何フレ
ーム類似画像が継続しているかを示す情報などの画像デ
ータの位置情報も含まれる。
【０３２２】なお、画像分類処理部５は、画像エンコー
ダ４からの圧縮されて形成された画像データではなく、
図２３において点線で示すように、画像Ａ／Ｄ変換器３
からのデジタル画像信号の供給を受け、これに基づい
て、例えばフレーム単位に前述したように画像の類似画
像の判別処理や分類処理を行なうようにしてもよい。
【０３２３】また、画像信号の分類処理、または、音声
信号の分類処理の結果得られる識別情報信号は、システ
ムコントローラ１７が、画像分類処理部５、音声分類処
理部２０から供給される分類処理の結果に基づいて、生
成し、これを多重化処理部６に供給するように構成する
こともできる。
【０３２４】また、システムコントローラ１７は、前述
した第１の実施の形態の記録再生装置１００の場合と同
様に、ＣＰＵ、ＲＯＭ、ＲＡＭ、不揮発性メモリ、時計
回路などを備えたマイクロコンピュータであり、記録再
生装置４００の各部を制御するものである。
【０３２５】また、図２３において、Ｉピクチャ検出部
２１は、画像データからＩピクチャを形成し、検出タイ
ミングなどの検出情報をシステムコントローラ１７に通
知する。これは、前述もしたように、この実施の形態の
記録再生装置４００が、Ｉピクチャ単位に画像の類似検
出処理および分類処理を行なうようにしているためであ
る。システムコントローラ１７は、Ｉピクチャ検出部２
１からの検出情報に基づいて画像分類処理部５、縮小画
処理部２２を制御することができるようにしている。
【０３２６】縮小画処理部２２は、システムコントロー
ラ１７からの制御に応じて、供給された画像データ（類
似画像区間の先頭またはその付近のＩピクチャ）から縮
小画像データを形成し、これを多重化処理部６、分類表
示部１９に供給する。
【０３２７】この第４の実施の形態において、分類表示
部１９は、音声分類処理部２０からの分類結果、画像分
類処理部５からの識別情報信号、縮小画処理部２２から
の縮小画像データの供給を受けて、図２５に示したよう
に、類似画像区間の先頭の画像を時系列順に表示してい
く。すなわち、この実施の形態の記録再生装置４００に
おいては、記録処理と平行して記録画像についてのサム
ネイル表示をも行なうことができるようにしている。
【０３２８】また、多重化処理部６は、これに供給され
た音声データ、画像データ、縮小画像データ、画像分類
処理部５からの識別情報信号などの情報を例えば時分割
多重化して多重化データを形成し、これを記録処理部７
に供給する。記録処理部７は、これに供給された多重化
データについて誤り訂正符号の付加やインターリーブ処
理などを行なって記録用の信号を形成し、これを記録媒
体８の所定の領域に記録する。
【０３２９】そして、この実施の形態の場合には、前述
もしたように、多重化データに多重化されている識別情
報信号により、類似画像区間の識別ができるようにされ
るとともに、元の画像と縮小画像の対応付けもなされて
いる。これによって、記録時において、あるいは、記録
終了時、記録終了後の所定のタイミングなどにおいて、
図２５に示したように、類似画像区間の先頭の画像を時
系列順に一覧表示することができるようにしている。
【０３３０】なお、画像分類処理部５においては、前述
した第１の実施の形態において図４〜図６を用いて説明
したように、画像データについてＩピクチャを処理単位
とし、特性情報を検出して、この特性情報に基づいて類
似画像を検出し、類似画像区間を特定する。前述もした
ように、類似画像には同じ識別情報が付与するようにさ
れるので、この識別情報によって、どこからどこまでが
１つの類似画像区間であるかを識別することができる。
【０３３１】また、音声分類処理部２０においては、前
述した第１の実施の形態において図７を用いて説明した
ように、所定時間単位に音声の類似検出を行なったり、
また、前述した第２、第３の実施の形態の場合のよう
に、音声レベルの検出を行なったりすることができるよ
うにしている。
【０３３２】［再生系について］次に、再生系について
説明する。システムコントローラ１７からの制御信号に
より、再生制御部９は、使用者から指示された多重化デ
ータを記録媒体８から読み出して、再生処理部１０に供
給するようにする。再生処理部１０は、これに供給され
た多重化データについてのデインターリーブ処理などの
所定の処理を行ない、処理後の多重化データを分離処理
部１１に供給する。分離処理部１１は、これに供給され
た多重化データから、音声データ、画像データ、縮小画
像データ、識別情報信号などを分離する。
【０３３３】分離処理部１１において分離された音声デ
ータは、音声デコーダ１２に供給される。音声デコーダ
１２に供給された音声データは、所定の圧縮方式により
データ圧縮されているものである。音声デコーダ１２
は、これに供給されたデータ圧縮されている音声データ
を伸張処理し、伸張処理後の音声データを音声デジタル
／アナログ変換器（以下、音声Ｄ／Ａ変換器と言う。）
１３に供給する。
【０３３４】音声Ｄ／Ａ変換器１３は、これに供給され
たデジタル音声信号をアナログ音声信号に変換し、これ
を出力する。出力されたアナログ音声信号は、スピーカ
に供給され、そのスピーカから当該アナログ音声信号に
応じた音声が放音するようにされる。
【０３３５】また、分離処理部１１において分離された
画像データは、画像デコーダ１４に供給される。画像デ
コーダ１４に供給された画像データは、所定の圧縮方式
によりデータ圧縮されているものである。画像デコーダ
１４は、これに供給されたデータ圧縮されている画像デ
ータを伸張処理し、伸張処理後の画像データを画像デジ
タル／アナログ変換器（以下、画像Ｄ／Ａ変換器と言
う。）１５に供給する。
【０３３６】画像Ｄ／Ａ変換器１５は、これに供給され
たデジタル画像信号をアナログ画像信号に変換し、これ
を出力する。出力されたアナログ画像信号は、モニタ受
像機に供給され、そのモニタ受像機の表示画面に当該ア
ナログ画像信号に応じた画像が表示するようにされる。
【０３３７】また、分離処理部１１において分離された
識別情報信号は、識別信号検出部１６に供給される。識
別信号検出部１６は、これに供給された識別情報信号か
ら必要となる識別情報信号を検出し、これをシステムコ
ントローラ１７、分類表示部１９に供給する。
【０３３８】また、識別信号検出部１６は、これに供給
された信号から所定のタイムスタンプ信号あるいはフレ
ーム番号を検出し、これをシステムコントローラ１７に
供給する。このタイムスタンプ信号に基づいて、再生時
点を検出し、分類表示部１９に再生位置を表示すること
もできるようにされている。
【０３３９】そして、ユーザ入力インターフェース１８
を通じて、記録媒体８に記録されている放送番組の分類
表示が指示された場合には、システムコントローラ１７
は、これに供給された識別情報信号に基づいて、再生制
御部９を制御し、記録媒体８に記録されている目的とす
る放送番組の縮小画像を読み出し、これを再生処理部１
０、分離処理部１１を通じて分類表示部１９に供給する
とともに、分類表示部１９を制御して、図２５に示した
ように、記録媒体８に記録した放送番組の分類表示が行
なわれる。
【０３４０】このように、記録終了後の所定のタイミン
グにおいても、記録時において行なわれた画像の類似判
別処理に基づいて形成されて記録媒体に記録された識別
情報信号、および、縮小画像信号を用いて、図２５に示
したように、画像の分類表示を行なうことができるよう
にされる。
【０３４１】なお、この実施の形態においては、ニュー
ス番組を記録する場合を例にして説明したが、これに限
るものではない。例えば、歌番組などを記録する場合に
も同様にして、歌手が歌うシーンを分類表示して、目的
とする歌手が歌うシーンを迅速に探し出してその部分を
迅速に通常再生するなどのことができるようにすること
ができる。
【０３４２】また、野球やテニスなどのスポーツ番組を
記録する場合にも同様にして処理することにより、バッ
ターがバッターボックスに入ったシーンや、ピッチャが
投球動作に入ったシーンなど類似画像区間の先頭の画像
を表示するようにしたり、テニスの試合のサーブシーン
を検索したりする場合などに用いることができるように
される。
【０３４３】また、例えば、ダイジェスト再生のための
画像データ、スキミング再生のための画像データを記録
時に作成して、放送番組の本編の画像データとともに記
録しておくことにより、その放送番組のダイジェスト再
生やスキミング再生を行なうようにすることができる。
【０３４４】そして、ダイジェスト再生やスキミング再
生などの所定の特殊再生動作を実行したい場合には、ユ
ーザは、ユーザ入力Ｉ／Ｆ１８を通じてコマンド入力を
行なう。システムコントローラ１７は、ユーザからのコ
マンド情報を受け取った場合には、再生制御部９を制御
し、目的とする再生方式のための画像データを読み出し
て再生することにより、目的とする再生方式で画像の再
生を行なうことができる。
【０３４５】［記録再生装置４００の動作について］次
に、上述したこの第４の実施の形態の記録再生装置４０
０の記録時の動作について、図２６のフローチャートを
参照しながら説明する。図２６は、この第４の実施の形
態の記録再生装置４００の記録時の動作を説明するため
のフローチャートである。
【０３４６】図２６に示すよりは、例えばニュース番組
の記録および分類表示を行なうことの指示入力をシステ
ムコントローラ１７が受け付けた場合に実行するように
される処理である。
【０３４７】初めに、システムコントローラ１７は、例
えば、デジタルテレビ放送の場合に放送信号に含められ
て提供されるＥＰＧ（Electronic Program Guide）デー
タに基づいて、１つ以上のニュース番組の開始時刻と終
了時刻とを記録開始時刻、記録終了時刻としてシステム
コントローラ１７の不揮発性メモリに設定する（ステッ
プＳ３０１）。
【０３４８】このステップＳ３０１の処理においては、
ユーザ入力Ｉ／Ｆを通じて入力される１つ以上のニュー
ス番組の開始時刻と終了時刻とを記録開始時刻、記録終
了時刻として設定するようにすることもできる。すなわ
ち、ユーザの手入力による設定も可能である。
【０３４９】なお、図２３に図示しないが、システムコ
ントローラ１７は、時計回路を備え、現在年月日、現在
曜日、現在時刻を提供することができるものである。
【０３５０】そして、システムコントローラ１７は、ユ
ーザから例えばニュース番組の記録および分類表示の停
止指示が入力されたか否かを判断する（ステップＳ３０
２）。
【０３５１】ステップＳ３０２の判断処理において、停
止指示は入力されていないと判断した時には、記録開始
時刻が到来したか否かを判断する（ステップＳ３０
３）。
【０３５２】ステップＳ３０３の判断処理において、開
始時刻が到来していないと判断したときには、待機状態
（スタンバイ状態）となり（ステップＳ３０４）、ステ
ップＳ３０２の処理から繰り返すようにする。
【０３５３】ステップＳ３０３の判断処理において、開
始時刻が到来したと判断したときには、システムコント
ローラ１７は、画像分類処理部５、Ｉピクチャ検出部２
１、などを制御して、記録の対象になっているニュース
番組の画像データの特性情報を検出し（ステップＳ３０
５）、類似画像の識別処理を行なう（ステップＳ３０
６）。
【０３５４】なお、ステップＳ３０５、３０６において
は、音声分類処理部２０を制御して、記録の対称になっ
ている音声信号について類似区間の判別等を行なって、
これを考慮するようにしてもよい。例えば、画像、音声
ともともに類似となる区間を類似区間として設定するよ
うにすることもできる。
【０３５５】そして、システムコントローラ１７は、縮
小画処理部２２をも制御して、各類似区間の先頭のＩピ
クチャから縮小画像を形成するサムネイル処理を行ない
（ステップＳ３０７）、記録の終了時刻が到来したか否
かを判断する（ステップＳ３０８）。
【０３５６】ステップＳ３０８の判断処理において、終
了時刻が到来したと判断したときには、システムコント
ローラ１７は、分類表示部１９を制御して、図２５に示
したように縮小画面の一覧表示であるマルチ画面表示を
行なう（ステップＳ３０９）。
【０３５７】そして、ステップＳ３０８の判断処理にお
いて、終了時刻が到来していないと判断した場合、およ
び、ステップＳ３０９の処理の後において、ユーザから
ユーザから記録および分類表示の停止指示が入力された
か否かを判断する（ステップＳ３１０）。
【０３５８】ステップＳ３１０の判断処理において、停
止指示は入力されていないと判断したときには、ステッ
プＳ３０３からの処理を繰り返し、次に放送されるニュ
ース番組の記録および分類表示を行なうようにする。ま
た、ステップＳ３１０の判断処理において、停止指示が
入力されたと判断したときには、この図２６に示す処理
を終了し、例えば、ユーザからの指示入力待ちとなる。
【０３５９】［第４の実施の形態のまとめ］このよう
に、この第４の実施の形態の記録再生装置４００におい
ては、テレビ放送番組の画像信号、音声信号の記録時に
類似画像区間を特定し、その類似画像区間の先頭の画像
を縮小画像（サムネイル）として一覧表示（マルチ画面
表示）し、その一覧表示を順次に更新することができる
ので、記録するようにした複数の番組の内容を時間の経
過に沿って効果的、効率的に把握することができる。
【０３６０】また、全ての内容を再生することなく、情
報信号の内容を一覧表示するようにすることができるの
で、記録するようにした情報信号の内容を、短時間に、
的確かつ正確に把握することができる。
【０３６１】また、縮小画像を指定することにより、そ
の縮小画像に対応する画像を先頭とする時点から記録し
た画像を通常再生したり、ダイジェスト再生したりする
こともでき、使い勝手を向上させることができる。
【０３６２】このように、画像の類似区間判別、一覧表
示、一覧表示の更新を順次に行なうことができるので、
上述のように、内容の把握、再生時点の指定などを迅速
かつ正確に行なうことが可能となる。
【０３６３】また、縮小画像も記録媒体に記録しておく
ので、記録した縮小画像を用いて、いつでも図２５に示
したような一覧表示を行なうこともできる。そして、目
的とする部分から情報信号の再生を行なうようにするこ
ともできる。
【０３６４】また、１画面に縮小画像を表示しきれない
場合には、垂直方向、水平方向にスクロール表示させる
ことによって、縮小画像の全部を表示することもできる
ようにされる。
【０３６５】また、この第４の実施の形態において、画
像信号が第１の情報信号であり、この画像信号の所定の
Ｉピクチャを縮小することにより形成した縮小画像（サ
ムネイル画像）が第２の情報信号に相当する。このよう
に、第２の情報信号は、所定の第１の情報信号につい
て、所定の処理を施すことにより形成されたものであれ
ばよい。したがって、１フレーム分の画像信号の所定部
分の画像信号を縮小してサムネイル画像を形成するよう
にしてもよい。
【０３６６】また、第１の情報信号は画像信号に限るこ
となく音声信号であってもよい。この場合、第２の情報
信号は、例えば、この第４の実施の形態において形成さ
れるメッセージ情報などを用いることができる。その
他、第１の情報信号としては、テキストデータなどであ
ってもよい。
【０３６７】［第５の実施の形態］（請求項２５、請求
項２６ 図２７〜図３２） 図２７は、この発明による情報信号処理装置、情報信号
処理方法の一実施の形態が適用された第５の実施の形態
の記録再生装置５００を説明するためのブロック図であ
り、図２８、図２９は、この実施の形態の記録再生装置
５００の動作原理を説明するための図である。
【０３６８】この第５の実施の形態の記録再生装置５０
０は、テレビ放送番組を記録媒体に記録する場合に、本
編情報から要約情報として用いることが可能な類似画像
区間の画像情報を抽出可能にしておくことにより、ある
いは、本編情報に加えて要約情報をも作成しておくこと
により、いわゆるダイジェスト再生を行なうことができ
るようにされている。
【０３６９】そして、この第５の実施の形態の記録再生
装置５００は、複数のダイジェスト再生方式を持ち、ダ
イジェスト再生を行なうに際しては、記録したテレビ放
送番組のジャンルに応じて、あるいは、再生時間が長く
ならないように考慮して、ダイジェスト再生方式を変え
ることができるようにしたものである。
【０３７０】［動作原理について］この第５の実施の形
態の記録再生装置５００の動作原理について説明する。
図２７に示す記録再生装置５００は、前述した実施の形
態の記録再生装置と同様に、情報信号として、例えばテ
レビ放送番組のアナログ画像信号とアナログ音声信号を
デジタル化し、データ圧縮し、多重化して、記録媒体８
に記録することができるものである。記録媒体８は、例
えばハードディスクなどの大容量のディスク記録媒体で
ある。
【０３７１】また、図２７に示す記録再生装置５００
は、記録媒体８に記録された多重化信号を読み出し、画
像データと音声データに分離するとともに、そのそれぞ
れを圧縮伸張し、データ圧縮前の画像データと音声デー
タとを復元し、これらをアナログ信号に変換して出力す
ることができるものである。
【０３７２】そして、図２７に示す記録再生装置５００
もまた、前述した他の実施の形態の記録再生装置と同様
に、Ｉピクチャ単位に類似画像の検出を行ない類似画像
毎の分類処理を行なって、類似画像区間の識別が可能な
ように識別情報を付加して記録媒体に記録するようにし
ている。
【０３７３】そして、この第５の実施の形態の記録再生
装置５００は、基本的には入力画像系列について、類似
画像判別を行なって、類似画像区間を特定し、類似画像
区間（類似画像シーン）をダイジェスト再生に用いるよ
うにする。
【０３７４】しかし、この第５の実施の形態の記録再生
装置５００は、以下に説明するように、４つのダイジェ
スト再生モードＡ、Ｂ、Ｃ、Ｄを備えている。ここで
は、図２８（ａ）に示すような入力画像系列を記録する
場合を例にして各ダイジェスト再生モードについて説明
する。
【０３７５】図２８（ａ）に示した入力画像系列におい
て、区間Ａ１の画像３、４、５が類似画像であり、区間
Ａ２の画像１３、１４、１５、１６が類似画像であり、
また、区間Ａ３の画像２２、２３、２４、２５、２６が
類似画像であるとする。
【０３７６】このような場合、図２８（ｂ）に示すよう
に、類似画像区間Ａ１、Ａ２、Ａ３を時系列順に順次再
生するようにするのがダイジェスト再生モードＡであ
る。この図２８（ｂ）に示したようなダイジェスト再生
モードＡは、ニュース番組におけるニュースキャスター
の画像シーンや、対談番組における特定の出演者の画像
シーンなどのように、比較的に変化が少なく、その類似
画像シーンだけでも比較的に効率よく、番組の内容が把
握できる場合に有効なものである。
【０３７７】また、図２８（ｃ）に示すように、類似画
像区間に加えて、その類似画像区間の前後の区間をも含
む画像区間Ｂ１、Ｂ２、Ｂ３を時系列順に順次に再生す
るようにするのがダイジェスト再生モードＢである。こ
のダイジェスト再生モードＢは、類似画像区間が、例え
ば、野球の試合番組のバッターシーンや、テニスの試合
番組のサーブシーンなどである場合に有効である。
【０３７８】つまり、野球やテニスなどといったある種
のスポーツ番組のように、番組全体にある程度の連続性
がある場合には、単に類似画像区間だけを表示するよ
り、類似画像区間の前後の画像区間をも再生するように
することにより、ダイジェスト再生された画像により前
後関係も把握でき、違和感なく、また、効果的、効率的
に番組内容を把握することができる。
【０３７９】そして、記録するテレビ放送番組がニュー
ス番組、スポーツ番組かなどの番組のジャンルの判別が
可能な情報を、例えば、デジタルテレビ放送の放送信号
に含まれて提供されるＥＰＧデータから取得して、この
ジャンル情報をも記録媒体に記録しておくようにするこ
とによって、ダイジェスト再生時においては、再生する
番組のジャンルに応じて最適なダイジェスト再生モード
を自動的に選択し、最適なダイジェスト再生モードでダ
イジェスト再生することができる。
【０３８０】もちろん、ダイジェスト再生を行なうよう
にする際に、用いるダイジェスト再生モードをユーザ自
身が選択入力することによって、その選択されたダイジ
ェスト再生モードでダイジェスト再生するようにするこ
とも可能である。また、画像の類似検出、類似画像区間
の検出は、前述した他の実施の形態の記録再生装置の画
像分類処理部においての処理と同様の処理を行なうこと
によって実現することが可能である。
【０３８１】また、上述の例では、画像の類似性に着目
したが、音声信号の属性に着目し、例えば、音楽音声区
間と話音声区間とを分類して、ダイジェスト再生モード
Ａ、あるいは、ダイジェスト再生モードＢを用いるよう
にすることができる。
【０３８２】例えば、ダイジェスト再生モードＡは、音
楽番組で、音楽が放送するようにされているシーンのみ
をダイジェスト再生したり、音楽が放送するようにされ
ているシーンのみを編集したりする場合に効果的なダイ
ジェスト再生動作となる。
【０３８３】また、ダイジェスト再生モードＢは、歌謡
番組などの音楽番組においては、音楽の始まる前に歌手
や演奏者の紹介などがあると想定できるので、歌謡番組
に登場する各歌手が歌う曲のイントロ部のみを歌手に対
応させてダイジェスト再生したり、編集を行なったりす
るなどの場合には効果的なダイジェスト再生動作とな
る。
【０３８４】なお、音声信号の音楽区間、話音声区間な
どの検出分類は、前述した他の実施の形態の記録再生装
置の音声分類部２０においての処理と同様の処理を行な
うことによって、実現することができる。
【０３８５】ところで、図２８（ｂ）、（ｃ）を用いて
説明したダイジェスト再生モードＡ、ダイジェスト再生
モードＢの場合、類似画像区間があまり長くなると、再
生時間が長くなってしまい、短時間で効率的に記録した
番組の内容を把握できない場合も発生することが考えら
れる。
【０３８６】そこで、図２９（ａ）に示すような入力画
像系列があり、図２８の場合と同様に、画像３、４、５
が類似画像であり、画像１３、１４、１５、１６が類似
画像であり、画像２２、２３、２４、２５、２６が類似
画像であるとする。このような場合に、図２９（ａ）に
おいて、区間Ｃ１、Ｃ２、Ｃ３をダイジェスト再生区間
となるようにする。
【０３８７】つまり、図２９（ｂ）にも示すように、ダ
イジェスト再生に用いる画像区間長（ダイジェスト再生
区間長）を予め決めておき、そのダイジェスト再生区間
長を超えないようにダイジェスト再生を行なうようにす
るのがダイジェスト再生モードＣである。
【０３８８】また、ダイジェスト再生モードＤは、図２
９（ｃ）に示すように、図２９（ｂ）に示したダイジェ
スト再生モードＣにおける類似画像区間の先頭から所定
区間前の時点からダイジェスト再生を行なうようにする
ものである。このダイジェスト再生モードＤの場合に
は、前述したダイジェスト再生モードＢのように、類似
画像区間とその前の画像区間とのシーンの流れも把握で
きるようにされ、スポーツ番組などのある種の番組ジャ
ンルによっては、より効果的なダイジェスト再生を行な
うことが可能となるとともに、再生時間が必要以上に長
くなることはないようにすることができる。
【０３８９】［第５の実施の形態の記録再生装置５００
の構成と動作について］図２７に示したこの第５の実施
の形態の記録再生装置５００の構成と動作について説明
する。図２７においても、記録媒体８の左側の部分が主
に記録系であり、記録媒体８の右側が再生系であると大
別することができる。
【０３９０】［記録系について］まず記録系について説
明する。この第５の実施の形態の記録再生装置４００に
入力されたアナログ音声信号（音声入力）は、音声Ａ／
Ｄ変換器１に供給され、ここでデジタル音声信号に変換
されて音声エンコーダ２と音声分類処理部２０とに供給
される。
【０３９１】音声エンコーダ２は、これに供給されたデ
ジタル音声信号について、ＭＰＥＧオーディオ方式など
の所定の圧縮方式で帯域圧縮処理を行ない、帯域圧縮さ
れたデジタル音声信号である音声データを形成し、これ
を多重化処理部６に供給する。
【０３９２】音声分類処理部２０は、例えば所定区間毎
のデジタル音声信号について、周波数スペクトルピーク
の継続性を検出し、音楽信号であるかどうかの判定を行
ない、その判定結果を多重化処理部６、システムコント
ローラ１７、画像シーン分類表示および再生位置表示部
（以下、分類表示部という。）１９に供給する。
【０３９３】なお、音声分類処理部２０は、音声Ａ／Ｄ
変換器１からのデジタル音声信号ではなく、図１におい
て点線で示すように、音声エンコーダ２からの帯域圧縮
されて形成された音声データの供給を受け、この音声デ
ータについて前述したように分類処理を行なうように構
成することもできる。
【０３９４】一方、この第４の実施の形態の記録再生装
置４００に入力されたアナログ画像信号（画像入力）
は、画像Ａ／Ｄ変換器３に供給され、ここでデジタル画
像信号に変換されて画像エンコーダ４に供給される。
【０３９５】画像エンコーダ４は、これに供給されたデ
ジタル画像信号について、ＭＰＥＧ２方式などの所定の
圧縮方式で帯域圧縮処理を行ない、帯域圧縮されたデジ
タル画像信号である画像データを形成し、これを画像分
類処理部５、多重化処理部６、Ｉピクチャ検出部２１、
縮小画処理部２２に供給する。
【０３９６】画像分類処理部５は、画像エンコーダ４か
らの画像データのＩピクチャについて、画像の特性情報
を検出し、これに基づいて類似画像を判別し、図２８、
図２９を用いて説明したように、類似画像区間を特定
し、これを識別できるようにするための識別情報信号を
形成して、これを多重化処理部６、分類表示部１９に供
給する。この識別情報信号には、各類似画像区間におい
て、何フレーム類似画像が継続しているかを示す情報な
どの画像データの位置情報も含まれる。
【０３９７】なお、画像分類処理部５は、画像エンコー
ダ４からの圧縮されて形成された画像データではなく、
図２７において点線で示すように、画像Ａ／Ｄ変換器３
からのデジタル画像信号の供給を受け、これに基づい
て、例えばフレーム単位に前述したように画像の類似画
像の判別処理や分類処理を行なうようにしてもよい。
【０３９８】また、画像信号の分類処理、または、音声
信号の分類処理の結果得られる識別情報信号は、システ
ムコントローラ１７が、画像分類処理部５、音声分類処
理部２０から供給される分類処理の結果に基づいて生成
し、これを多重化処理部６に供給するように構成するこ
ともできる。
【０３９９】システムコントローラ１７は、前述した第
１の実施の形態の記録再生装置１００の場合と同様に、
ＣＰＵ、ＲＯＭ、ＲＡＭ、不揮発性メモリ、時計回路な
どを備えたマイクロコンピュータであり、記録再生装置
５００の各部を制御するものである。
【０４００】この実施の形態において、分類表示部１９
は、音声分類処理部２０からの分類結果、画像分類処理
部５からの分類結果などの供給を受けて、分類の様子な
どを遂次表示することができるようにしている。
【０４０１】また、多重化処理部６は、これに供給され
た音声データ、画像データを多重化するとともに、これ
に画像分類処理部５からの識別情報信号を付加して多重
化データを形成し、これを記録処理部７に供給する。
【０４０２】また、この多重化データには、それがどの
ような番組なのか、すなわち、ニュース番組なのか、ス
ポーツ番組なのかなどの番組のジャンルを示す番組ジャ
ンル情報も付加するようにされている。この番組ジャン
ル情報は、例えば、その番組がデジタルテレビ放送によ
り提供された場合には、デジタル放送信号に含まれるＥ
ＰＧデータから抽出することができるし、また、ユーザ
が入力した情報であってもよい。
【０４０３】記録処理部７は、これに供給された多重化
データについて誤り訂正符号の付加やインターリーブ処
理などを行なって記録用の信号を形成し、これを記録媒
体８の所定の領域に記録する。
【０４０４】そして、この実施の形態の場合には、前述
もしたように、多重化データに付加されている識別情報
信号により、要約情報として用いる類似画像区間の識別
ができるようにされている。これによって、記録終了後
の所定のタイミングにおいて、所定のダイジェスト再生
方式でダイジェスト再生することができるようにしてい
る。
【０４０５】なお、画像分類処理部５においては、前述
した第１の実施の形態において図４〜図６を用いて説明
したように、画像データについてＩピクチャを処理単位
とし、特性情報を検出して、この特性情報に基づいて類
似画像を検出し、類似画像区間を特定する。前述もした
ように、類似画像には同じ識別情報が付与するようにさ
れるので、この識別情報によって、どこからどこまでが
１つの類似画像区間であるかを識別することができる。
【０４０６】また、音声分類処理部２０においては、前
述した第１の実施の形態において図７を用いて説明した
ように、所定時間単位に音声の類似検出を行なったり、
また、前述した第２、第３の実施の形態の場合のよう
に、音声レベルの検出を行なったりすることができるよ
うにしている。
【０４０７】［再生系について］次に、再生系について
説明する。システムコントローラ１７からの制御信号に
より、再生制御部９は、使用者から指示された多重化デ
ータを記録媒体８から読み出して、再生処理部１０に供
給するようにする。再生処理部１０は、これに供給され
た多重化データについてのデインターリーブ処理などの
所定の処理を行ない、処理後の多重化データを分離処理
部１１に供給する。分離処理部１１は、これに供給され
た多重化データから、音声データ、画像データ、縮小画
像データ、識別情報信号などを分離する。
【０４０８】分離処理部１１において分離された音声デ
ータは、音声デコーダ１２に供給される。音声デコーダ
１２に供給された音声データは、所定の圧縮方式により
データ圧縮されているものである。音声デコーダ１２
は、これに供給されたデータ圧縮されている音声データ
を伸張処理し、伸張処理後の音声データを音声デジタル
／アナログ変換器（以下、音声Ｄ／Ａ変換器と言う。）
１３に供給する。
【０４０９】音声Ｄ／Ａ変換器１３は、これに供給され
たデジタル音声信号をアナログ音声信号に変換し、これ
を出力する。出力されたアナログ音声信号は、スピーカ
に供給され、そのスピーカから当該アナログ音声信号に
応じた音声が放音するようにされる。
【０４１０】また、分離処理部１１において分離された
画像データは、画像デコーダ１４に供給される。画像デ
コーダ１４に供給された画像データは、所定の圧縮方式
によりデータ圧縮されているものである。画像デコーダ
１４は、これに供給されたデータ圧縮されている画像デ
ータを伸張処理し、伸張処理後の画像データを画像デジ
タル／アナログ変換器（以下、画像Ｄ／Ａ変換器と言
う。）１５に供給する。
【０４１１】画像Ｄ／Ａ変換器１５は、これに供給され
たデジタル画像信号をアナログ画像信号に変換し、これ
を出力する。出力されたアナログ画像信号は、モニタ受
像機に供給され、そのモニタ受像機の表示画面に当該ア
ナログ画像信号に応じた画像が表示するようにされる。
【０４１２】また、分離処理部１１において分離された
識別情報信号は、識別信号検出部１６に供給される。識
別信号検出部１６は、これに供給された識別情報信号か
らダイジェスト再生などのために必要となる識別情報信
号を検出し、これをシステムコントローラ１７や、必要
に応じて分類表示部１９に供給する。
【０４１３】また、識別信号検出部１６は、これに供給
された信号から所定のタイムスタンプ信号あるいはフレ
ーム番号を検出し、これをシステムコントローラ１７に
供給する。このタイムスタンプ信号に基づいて、再生時
点を検出し、分類表示部１９に再生位置を表示すること
もできるようにされている。
【０４１４】また、ダイジェスト再生が指示された場合
には、指示された番組の多重化信号に付加されている番
組ジャンル情報に基づいて、その番組のジャンルを判別
し、判別したジャンルに応じたダイジェスト再生モード
で再生するように、再生制御部９の制御により識別情報
で識別可能とされる要約情報となる類似画像区間の画画
像データが読み出される。
【０４１５】読み出された要約情報となる画像データ
は、前述したように、再生処理部１９、分類処理部１
１、音声デコーダ１２、音声Ｄ／Ａ変換器１３、画像デ
コーダ１４、画像Ｄ／Ａ変換器１５を通じて、ダイジェ
スト再生するようにされる。
【０４１６】なお、番組ジャンルの自動検出により、用
いるダイジェスト再生モードを自動的に選択するものに
限るものではなく、ユーザがダイジェスト再生を行なう
ことが指示した場合などに用いるダイジェスト再生モー
ドを選択し、これを用いるようにすることもできる。ま
た、予めダイジェスト再生時に用いるダイジェスト再生
モードを設定しておくようにすることもできる。
【０４１７】［第５の実施の形態の記録再生装置５００
の動作について］次に、上述したこの第５の実施の形態
の記録再生装置５００の再生時の動作について、図３０
〜図３２のフローチャートを参照しながら説明する。な
お、以下の説明においては、説明を簡単にするため、用
いるダイジェスト再生モードは、図２８を用いて説明し
たダイジェスト再生モードＡとダイジェスト再生モード
Ｂのいずれかを用いる場合を例にして説明する。
【０４１８】また、この実施の形態においては、デフォ
ルト設定の特殊再生モードは、番組ジャンルに応じて、
図２８を用いて説明したダイジェスト再生モードＡとダ
イジェスト再生モードＢとのうちのいずれかを選択して
用いるようにするものである。
【０４１９】図３０〜図３２に示す処理は、通常再生や
ダイジェスト再生を実行するようにユーザ入力Ｉ／Ｆ１
８を通じてユーザから指示された場合に、記録再生装置
５００において行なわれる処理である。
【０４２０】ユーザから再生動作が指示されると、シス
テムコントローラ１７は、指示された再生動作は、通常
再生か特殊再生かを判断する（ステップＳ４０１）。こ
こで、通常再生は、記録媒体８に記録された本編情報の
全部を再生するようにする通常の再生であり、この実施
の形態において特殊再生は、ダイジェスト再生である。
【０４２１】ステップＳ４０１の判断処理において、通
常再生の動作が指示されたと判断したときには、システ
ムコントローラ１７は、再生制御部９等の関連各部を制
御し、記録媒体８に記録されている番組の本編情報の全
部を再生するようにする通常再生を行なうようにする
（ステップＳ４０２）。
【０４２２】そして、ユーザ入力Ｉ／Ｆ１８を通じて、
通常再生の停止指示が入力されたか否かを判断し（ステ
ップＳ４０３）、停止が指示されていないと判断したと
きには、ステップＳ４０１からの処理を繰り返す。ま
た、ステップＳ４０３の判断処理において、通常再生の
停止が指示されたと判断したときには、この図３０〜図
３２の処理を終了して、例えば、ユーザからの指示入力
待ちとなる。
【０４２３】ステップＳ４０１の判断処理において、特
殊再生、すなわち、ダイジェスト再生動作が指示された
と判断したときには、システムコントローラ１７は、自
己の不揮発性メモリの設定情報を確認するなどして、用
いるダイジェスト再生モードはデフォルト設定のものか
否かを判断する（ステップＳ４０４）。
【０４２４】ダイジェスト再生モードをデフォルト設定
にしたがって行わない場合には、この実施の形態におい
ては、ダイジェスト再生モードＡに固定するようにされ
る。もちろん、デフォルト設定のダイジェスト再生モー
ドを図２９を用いて説明したダイジェスト再生モード
Ｃ、ダイジェスト再生モードＤとを切り換えて用いるも
のとすることもできる。
【０４２５】ステップＳ４０４の判断処理において、デ
フォルト設定を用いると判断したときには、前述もした
ように、記録時において、ＥＰＧデータなどから抽出さ
れ、多重化データに付加されている番組ジャンルを示す
情報に基づいて、ダイジェスト再生しようとしている番
組のジャンルを示す情報を検出し（ステップＳ４０
５）、ダイジェスト再生しようとしている番組がニュー
ス番組か否かを判断する（ステップＳ４０６）。
【０４２６】ステップＳ４０６において、ダイジェスト
再生するようにように指示された番組がニュース番組で
あると判断した場合、および、ステップＳ４０４の判断
処理において、デフォルト設定を用いないと判断した場
合には、ダイジェスト再生モードＡを用いることにな
る。
【０４２７】そして、システムコントローラ１７は、識
別信号検出部１６を通じてダイジェスト再生しようとし
ている番組に付加されているフレーム番号を検出し（ス
テップＳ４０７）、さらに、類似画像区間を識別できる
ようにするために付加されている識別情報を検出する
（ステップＳ４０８）。
【０４２８】この後、検出した識別情報に基づいて類似
画像区間であると判別された画像信号区間が、ニュース
キャスターのシーンであるか否かを判断する（ステップ
Ｓ４０９）。例えば、類似画像区間がニュースキャスタ
ーのシーンであれば、他の類似画像区間のニュースキャ
スターのシーンとも類似すると考えされるので、このス
テップ４０９の判断処理においては、他の複数の類似画
像区間とも類似する類似画像区間をダイジェスト再生す
る類似画像区間として特定する。
【０４２９】ステップＳ４０９の判断処理において、再
生しようとしている類似画像区間が、ニュースキャスタ
ーのシーンであると判断したときには、その類似画像区
間のフレームを再生する（ステップＳ４１０）。ステッ
プＳ４０９の判断処理において、再生しようとしている
類似画像区間が、ニュースキャスターのシーンではない
と判断したときには、その類似画像区間のフレームをス
キップするようにする（ステップＳ４１１）。
【０４３０】そして、ユーザからダイジェスト再生の停
止指示がユーザ入力Ｉ／Ｆ１８を通じて入力されたか否
かを判断し（ステップＳ４１２）、停止指示が入力され
たと判断したときには、この図３０〜図３２に示す処理
を終了し、例えば、ユーザからの入力指示待ちとなる。
【０４３１】ステップＳ４１２の判断処理において、ダ
イジェスト再生の停止指示が指示されていないと判断し
たときには、ダイジェスト再生している番組のダイジェ
スト再生が終了したか否かを判断する（ステップＳ４１
３）。ステップＳ４１３の判断処理において、その番組
のダイジェスト再生が終了したと判断したときには、こ
の図３０〜図３２に示す処理を終了し、例えば、ユーザ
からの入力指示待ちとなる。
【０４３２】ステップＳ４１３の判断処理において、そ
の番組のダイジェスト再生が終了していないと判断した
ときには、再生モードの変更指示がユーザ入力Ｉ／Ｆ１
８を通じて入力されたか否かを判断する（ステップＳ４
１４）。
【０４３３】ステップＳ４１４の判断処理において、再
生モードの変更指示が入力されていないと判断したとき
には、ステップＳ４０７からの処理を繰り返し、ダイジ
ェスト再生モードＡによるダイジェスト再生が続行する
ようにされる。ステップＳ４１４の判断処理において、
再生モードの変更指示が入力されたと判断したときに
は、ステップＳ４０１からの処理を繰り返す。
【０４３４】また、ステップＳ４０６の判断処理におい
て、ダイジェスト再生しようとしている番組がニュース
番組でないと判断したときには、図３１に示すステップ
Ｓ４１５の処理に進み、ダイジェスト再生モードＢによ
りダイジェスト再生を行なうようにする。
【０４３５】この場合、システムコントローラ１７は、
識別信号検出部１６を通じて、ダイジェスト再生しよう
としている番組に付加されているフレーム番号を検出し
（ステップＳ４１５）、ステップＳ４１８以降の処理の
ループ回数をカウントするための変数ｋに０（ゼロ）を
セットし初期化する（ステップＳ４１６）。
【０４３６】そして、システムコントローラ１７は、図
２８(ｃ)を用いて説明したように、類似画像区間の前後
の所定区間を含めた画像区間を順次再生するために当該
画像区間（類似画像区間の前後の所定区間を含めた画像
区間）を示す所定の識別情報が検出されたか否かを判断
する（ステップＳ４１７）。
【０４３７】ステップＳ４１７において、所定の識別情
報が検出されたと判断した場合には、類似画像区間の最
後を検出するために、そのフレームで識別情報が検出さ
れたことを示すフラグに１をセットする（ステップＳ４
１８）。
【０４３８】そして、システムコントローラ１７は、ス
テップＳ４２０以降の処理を初めて行なうか否かを判断
する（ステップＳ４１９）。ステップＳ４１９の判断処
理において、変数ｋが０であり、ステップＳ４２０以降
の処理をまだ実行していないと判断したときには、類似
画像区間の先頭のフレームＮより前のフレームＮ−ａか
らフレームＮ−１までを再生するため、初期設定変数ｎ
に０(ゼロ)をセットし初期化する（ステップＳ４２
０）。
【０４３９】そして、類似画像区間の先頭のフレームＮ
より前の所定フレームの再生を行ない（ステップＳ４２
１）、変数ｎに１加算し（ステップＳ４２２）、変数ｋ
に１加算して（ステップＳ４２３）、フレームＮ−ａか
らフレームＮ−１までの再生が終了したか否かを判断す
る（ステップＳ４２４）。
【０４４０】ステップＳ４２４の判断処理において、類
似画像区間前の所定画像区間の再生がまだ終了していな
いと判断したときには、ステップＳ４２１からの処理を
繰り返す。ステップＳ４２４の判断処理において、類似
画像区間前の所定画像区間の再生が終了したと判断した
ときには、類似画像区間のフレームの再生を行なう（ス
テップＳ４２５）。ステップＳ４１９において、類似画
像区間前の所定画像区間の再生が既に終了していると判
断したときにも、ステップＳ４２５からの処理が行なわ
れることになる。
【０４４１】そして、システムコントローラ１７は、ユ
ーザ入力Ｉ／Ｆ１８を通じてダイジェスト再生の停止指
示が入力されたか否かを判断する（ステップＳ４２
６）。ステップＳ４２６の判断処理において、停止が指
示されたと判断したときには、この図３０〜図３２に示
す処理を終了し、ユーザからの指示入力待ちとなる。
【０４４２】また、ステップＳ４２６の判断処理におい
て、ユーザからの停止指示はないと判断したときには、
処理の対象となっている目的とする番組のダイジェスト
再生が終了したか否かを判断する（ステップＳ４２
７）。ステップＳ４２７の判断処理において、目的とす
る番組のダイジェスト再生が終了したと判断したときに
は、図３０〜図３２に示す処理を終了し、ユーザからの
指示入力待ちとなる。
【０４４３】ステップＳ４２７の判断処理において、目
的とする番組のダイジェスト再生は終了していないと判
断したときには、ユーザから再生モードの変更指示が入
力されたか否かを判断する（ステップＳ４２８）。ステ
ップＳ４２８の判断処理において、再生モードの変更指
示は入力されていないと判断したときには、ステップＳ
４１７からの処理を繰り返し、ダイジェスト再生モード
Ｂによるダイジェスト再生を続行する。
【０４４４】ステップＳ４２８の判断処理において、再
生モードの変更指示が入力されたと判断したときには、
図３０に示すステップＳ４０１からの処理を繰り返すよ
うにする。
【０４４５】また、ステップＳ４１７の判断処理におい
て、再生対象の類似画像区間の識別情報が検出されず、
その再生対象の類似画像区間の再生が終了したと判断し
たときには、図３２に示すステップＳ４２９からの処理
を実行し、再生対象の類似画像区間の直後の所定画像区
間の再生を行なうようにする。
【０４４６】まず、システムコントローラ１７は、ま
ず、ステップＳ４１８においてセットするようにされる
フラグが１であるか否か、すなわち、類似画像区間の直
前の画像区間と、その類似画像区間の再生が終了してい
るか否かを判断する（ステップＳ４２９）。
【０４４７】ステップＳ４２９の判断処理において、フ
ラグが１であると判断したときには、まずフラグを０に
初期化し（ステップＳ４３０）、変数ｎを０に初期化す
る（ステップＳ４３１）。そして、類似画像区間後のフ
レームを再生し（ステップＳ４３２）、変数ｎに１加算
する（ステップＳ４３３）。
【０４４８】そして、変数ｎが値ｂより大きくなったか
否か、すなわち、類似画像区間直後の所定区間分の画像
区間の再生が終了したか否かを判断する（ステップＳ４
３４）。ステップＳ４３４の判断処理において、まだ再
生が終了していないと判断したときには、ステップＳ４
３２からの処理を繰り返す。
【０４４９】ステップＳ４３４の判断処理において、類
似画像区間後の所定画像区間の再生が終了したと判断し
たときには、システムコントローラ１７は、ユーザ入力
Ｉ／Ｆ１８を通じてダイジェスト再生の停止指示が入力
されたか否かを判断する（ステップＳ４３５）。ステッ
プＳ４３５の判断処理において、停止が指示されたと判
断したときには、この図３０〜図３２に示す処理を終了
し、ユーザからの指示入力待ちとなる。
【０４５０】また、ステップＳ４３５の判断処理におい
て、ユーザからの停止指示はないと判断したときには、
処理の対象となっている目的とする番組のダイジェスト
再生が終了したか否かを判断する（ステップＳ４３
６）。ステップＳ４３６の判断処理において、目的とす
る番組のダイジェスト再生が終了したと判断したときに
は、図３０〜図３２に示す処理を終了し、ユーザからの
指示入力待ちとなる。
【０４５１】ステップＳ４３６の判断処理において、目
的とする番組のダイジェスト再生は終了していないと判
断したときには、ユーザから再生モードの変更指示が入
力されたか否かを判断する（ステップＳ４３７）。ステ
ップＳ４３７の判断処理において、再生モードの変更指
示は入力されていないと判断したときには、図３１に示
すステップＳ４１７からの処理を繰り返し、ダイジェス
ト再生モードＢによるダイジェスト再生を続行する。
【０４５２】ステップＳ４３７の判断処理において、再
生モードの変更指示が入力されたと判断したときには、
図３０に示すステップＳ４０１からの処理を繰り返すよ
うにする。
【０４５３】なお、ステップＳ４２９の判断処理におい
て、フラグが１でないと判断したときには、フラグを０
に初期化し（ステップＳ４３８）、処理の対象となって
いるフレームをスキップして（ステップＳ４３９）、図
３２に示すように、ステップＳ４３５からの処理を行な
うようにする。
【０４５４】なお、ここでは、ダイジェスト再生モード
Ａとダイジェスト再生モードＢとを用いるようにした
が、これに限るものではなく、ダイジェスト再生モード
Ｃとダイジェスト再生モードＤを用いるようにしてもよ
い。
【０４５５】また、番組ジャンル情報により、スポーツ
番組の場合には、ダイジェスト再生モードＢ、あるい
は、ダイジェスト再生モードＤを用いるようにすること
も可能である。
【０４５６】［第５の実施の形態のまとめ］このよう
に、この第５の実施の形態の記録再生装置においては、
記録媒体に記録した番組のジャンルやユーザからの指示
情報により、効果的なダイジェスト再生モードを選択し
て用い、効果的、効率的なダイジェスト再生を行なうよ
うにすることができる。
【０４５７】しかも、用いることができるダイジェスト
再生モードを複数にし、効果的、効率的なダイジェスト
再生を行なうようにした場合であっても、記録再生装置
自体の構成が複雑になるなどのことがなく、比較的に簡
単な構成で効果的、効率的なダイジェスト再生を行なう
ようにすることができる。
【０４５８】なお、ダイジェスト再生モードは、図２
８、図２９に示したダイジェスト再生モードＡ、Ｂ、
Ｃ、Ｄの４つに限るものではなく、その他の各種の再生
パターンの再生モードを用いるようにすることができ
る。
【０４５９】また、この第５の実施の形態に記録再生装
置５００においては、画像の類似判別、類似画像区間の
判別は、Ｉピクチャ単位で行なうものとして説明した
が、これに限るものではなく、フレーム単位に行なうよ
うにしてもよい。また、画像の類似判別、類似画像区間
の判別は、Ｉピクチャ単位で行ない、その他の部分にお
いては、フレーム単位で処理をすることができるのは前
述した通りである。
【０４６０】また、この第５の実施の形態においては、
画像情報の特性情報に基づいて類似画像区間を分類する
ようにしたが、これに限るものではなく、音声信号に基
づいて、要約情報として用いることが可能な類似画像区
間を設定し、これを用いるようにすることもできるし、
画像情報と音声情報の双方に基づいて要約情報として用
いることが可能な類似画像区間を設定することももちろ
んできる。
【０４６１】［第６の実施の形態］（請求項２７〜請求
項３０ 図３３〜図３６） 前述した第５の実施の形態においても、記録媒体に記録
されたテレビ放送番組の画像信号の類似画像区間があま
り長くなると、ダイジェスト再生を行なっても迅速にそ
のテレビ放送番組の内容を把握することができないた
め、図２９（ｂ）、（ｃ）に示したように、各類似画像
区間においては、所定区間長しか再生しないようにし
た。
【０４６２】しかし、類似画像が非常に長く続くテレビ
放送番組もあると考えられる。例えば、ニュースの解説
番組や討論番組などのように、出演者が話しているシー
ンが長く続いたり、あるいは、マラソンや駅伝のように
同じようなカメラアングルから捉えた走者の様子の画像
が長く続いたりするものなどがある。
【０４６３】このような場合に、各類似画像区間の先頭
の所定区間長部分だけを再生するようにして行くダイジ
ェスト再生では、そのダイジェスト再生される番組の内
容を効果的にかつ効率的に把握することができない場合
があると考えられる。
【０４６４】そこで、この第６の実施の形態の記録再生
装置においては、類似画像区間が比較的に長く続くよう
な場合であっても、記録再生装置の構成を複雑にするこ
となく、効果的、効率的なダイジェスト再生を行なえる
ようにしている。
【０４６５】なお、この第６の実施の形態の記録再生装
置は、図２７を用いて前述した第５の実施の形態の記録
再生装置５００と同様に構成されるものである。このた
め、この第６の実施の形態の記録再生装置も、図２７に
示した第５の実施の形態の記録再生装置５００と同様に
構成されるものとし、図２７をも参照しながら、以下の
説明を進める。
【０４６６】［動作原理について］図２７に示したよう
に構成されるこの第６の実施の形態の記録再生装置５０
０もまた、前述した第５の実施の形態の記録再生装置と
同様に、テレビ放送番組の画像信号と音声信号とをデジ
タル信号としてデータ圧縮して記録媒体に記録すること
ができるとともに、記録媒体に記録した画像信号と音声
信号とを読み出して再生することができるものである。
【０４６７】画像信号と音声信号の記録に際しては、前
述した他の実施の形態の記録再生装置の場合と同様に、
Ｉピクチャ単位に類似画像の検出を行ない類似画像毎の
分類処理を行なって、類似画像区間の識別が可能なよう
に識別情報を付加して記録媒体に記録するようにしてい
る。
【０４６８】そして、この第６の実施の形態の記録再生
装置５００の場合にも、基本的には、類似画像区間を再
生することによりダイジェスト再生を行なうが、類似画
像区間の長さをも考慮するようにしている。図３３、図
３４は、この第６の実施の形態の記録再生装置５００の
動作原理を説明するための図である。
【０４６９】例えば、図３３（ａ）に示すような入力画
像系列があり、画像１、２、３が類似画像であり、画像
１３、１４、１５、１６、１７が類似画像であり、画像
２２、２３、２４、２５、２６、２７、２８、２９が類
似画像であるとする。そして、図３３（ａ）に示すよう
に、予めダイジェスト再生に適すると考えられる再生区
間長（設定区間長）ｔを設定する。
【０４７０】この設定区間長ｔにより、図３３（ａ）に
示すように、区間Ａ１、Ａ２、Ａ３がダイジェスト再生
用の画像区間とされる。そして、設定区間長ｔよりも長
くその類似区間が続く場合であって、予め決められる間
隔区間長ｓ経過後においても、その類似画像区間が続い
ている場合には、さらに設定区間長ｔ分をダイジェスト
再生用の画像区間とする。
【０４７１】つまり、図３３（ａ）においては、区間Ａ
４がダイジェスト再生用の画像区間として追加された区
間である。そして、図３３に示した例の場合には、図３
３（ｂ）に示すように、図３３（ａ）の入力画像系列か
ら抽出される区間Ａ１、Ａ２、Ａ３、Ａ４の画像信号が
用いられてダイジェスト再生するようにする。
【０４７２】したがって、設定区間ｔと間隔区間ｓとの
加算区間より長い類似区間の場合には、複数のダイジェ
スト再生用の画像区間が設定するようにされる。このよ
うにすることによって、１つの類似画像区間が長い場合
であっても、ダイジェスト再生される番組の内容を効果
的、かつ、効率的に把握することが可能となる。
【０４７３】さらに、類似画像区間に加えて、音声信号
のレベルをも考慮してダイジェスト再生用の画像区間を
設定しようとするのが、図３４に示す例である。図３４
（ａ）は、入力画像系列であり、図３４（ｂ）は、図３
４（ａ）に示した入力画像系列に対応する入力音声系列
である。
【０４７４】そして、図３４（ａ）において、画像１、
２、３が類似画像であり、画像１３、１４、１５、１
６、１７、１８が類似画像区間であり、画像２２、２
３、２４、２５、２６、２７、２８、２９が類似画像区
間である。そして、この場合にも、図３３（ａ）の場合
と同様に、設定区間ｔ、間隔区間ｓとしてダイジェスト
再生用の画像区間を設定するが、類似画像区間内におい
ては、音声信号が所定レベル以上の区間をダイジェスト
再生用の画像区間とする。
【０４７５】したがって、図３４（ａ）の場合、上述の
ように、画像１３〜画像１８までは類似画像区間である
が、音声信号レベルは、図３４（ｂ）に示すように、画
像１６、１７、１８において高くなっている。このた
め、ダイジェスト再生用の画像区間として、図３４
（ａ）に示したように、画像１６、１７、１８からなる
区間を設定するようにする。
【０４７６】すなわち、同じ類似画像区間であっても、
音声信号レベルが所定値以上の部分を含み、その区間の
長さが設定区間長ｔとなるようにダイジェスト再生用の
画像区間を設定し、かつ、その類似画像区間が長い場合
には、設定区間長ｔ分のダイジェスト再生用の画像区間
の直後から間隔区間長ｓ分離れた位置から再度設定区間
長ｔ分のダイジェスト再生用の画像区間を設定する。
【０４７７】このようにすることにより、図３４（ａ）
に示す例の場合には、区間Ｂ１、Ｂ２、Ｂ３、Ｂ４がダ
イジェスト再生用の画像区間となり、図３４（ｃ）に示
すように、区間Ｂ１、Ｂ２、Ｂ３、Ｂ４を連続させする
ことによりダイジェスト再生を行なう。
【０４７８】なお、類似画像区間が長い場合には、図３
３、図３４のいずれの場合にも、１類似画像区間内に複
数のダイジェスト再生用の画像区間と間隔区間長のスキ
ップ区間とが設けられることになる。
【０４７９】［第６の実施の形態の記録再生装置５００
の構成と動作について］図２７に示したこの第５の実施
の形態の記録再生装置５００の構成と動作について説明
する。記録系の動作は、第５の実施の形態において説明
した通りである。ただ、図３４を用いて説明したよう
に、音声信号レベルをも考慮する場合には、音声分類部
２０から多重化処理部６に対して、所定レベル以上の音
声信号区間を識別するための識別情報が供給され、この
識別情報も多重化データに付加することによって、類似
画像区間内において、音声信号レベルが所定値以上の区
間を識別することもできるようにしている。
【０４８０】そして、再生系の動作も、第５の実施の形
態において説明した通りである。そして、ダイジェスト
再生の実行が指示されたときには、システムコントロー
ラ１７により制御される再生制御部９の制御により、分
類処理されて類似画像区間が識別可能なように識別情報
が付加されて記録媒体８に記録されている多重化データ
のうち、ダイジェスト再生用の画像区間の信号が読み出
され、ダイジェスト再生を行なう。この場合、類似画像
区間が設定区間長ｔより長い場合には、間隔区間長ｓ分
のスキップ処理が行なわれることになる。
【０４８１】また、識別信号検出部１６により検出され
る所定のタイムスタンプ信号などは、システムコントロ
ーラ１７に供給され、それらの信号から再生時点を検出
し、分類表示部１９を通じて現在再生位置を表示した
り、スキップした時点の画像シーンを代表画像とし、ダ
イジェスト再生過程がユーザに容易に分かるように、分
類表示部１９などを通じて表示したりすることもできる
ようにされる。
【０４８２】［第６の実施の形態の記録再生装置５００
の動作について］次に、この第６の実施の形態における
記録再生装置５００の再生時または記録時の動作につい
て、図３５、図３６のフローチャートを参照しながら説
明する。図３５、図３６に示す処理は、ユーザ入力Ｉ／
Ｆ１８を通じて再生または記録の実行指示がユーザから
入力された場合に、記録再生装置５００において行なわ
れる処理である。
【０４８３】なお、ここでは、記録媒体８には既に、類
似画像判別されて類似画像には同じ識別情報が付加する
ようにされた多重化データが記録されているものとして
説明する。
【０４８４】ユーザから再生または記録の動作が指示さ
れると、システムコントローラ１７は、指示された動作
は再生か記録かを判断する（ステップＳ５０１）。ステ
ップＳ５０２の判断処理において、再生動作が指示され
たと判断したときには、システムコントローラ１７は、
各部を制御して記録再生装置５００を再生モードにし、
記録媒体８から目的とする番組の多重化データの読み出
しを開始する（ステップＳ５０２）。
【０４８５】そして。指示された再生動作は、特殊再
生、すなわちダイジェスト再生を行なうようにするもの
か否かを判断する（ステップＳ５０３）。ステップＳ５
０３の判断処理において、指示された再生動作は、ダイ
ジェスト再生であると判断したときには、識別信号検出
部１６を通じて再生しようとしている多重化データの識
別情報を検出し（ステップＳ５０４）、類似画像区間の
うちのダイジェスト再生用の画像区間のデータであるか
否かを判断する（ステップＳ５０５）。
【０４８６】ステップＳ５０５の判断処理において、再
生しようとしている情報信号が、類似画像区間のうちの
ダイジェスト再生用の画像区間のデータであると判断し
たときには、その多重化データを再生することによりダ
イジェスト再生を行なうようにし（ステップＳ５０
６）、再生時間を検出する（ステップＳ５０７）。
【０４８７】そして、ステップＳ５０７で検出した再生
時間が、設定区間長ｔを経過したか否かを判断する（ス
テップＳ５０８）。ステップＳ５０８の判断処理におい
て、設定区間長ｔ分の再生が終了したと判断したときに
は、間隔区間長ｓ分スキップ処理を行ない（ステップＳ
５０９）、ユーザから再生停止の指示入力がされたか否
かを判断する（ステップＳ５１０）。
【０４８８】ステップＳ５１０の判断処理において、再
生停止の指示入力はされていないと判断したときには、
モード変更の指示入力がされたか否かを判断する（ステ
ップＳ５１１）。ステップＳ５１１の判断処理におい
て、モード変更の指示入力はされていないと判断したと
きには、ステップＳ５０４からの処理を繰り返し、ダイ
ジェスト再生を続行するようにする。
【０４８９】ステップＳ５１１の判断処理において、モ
ード変更の指示入力がされたと判断したときには、ステ
ップＳ５０１からの処理を繰り返し、ユーザからの指示
に応じて、通常再生処理、記録処、あるいは、他の番組
のダイジェスト再生処理を行なうことができるようにさ
れる。
【０４９０】また、ステップＳ５１０の判断処理におい
て、再生停止の指示入力があったと判断したときには、
システムコントローラ１７は、この図３５、図３６に示
す処理を終了し、例えば、ユーザからの指示入力待ちと
なる。
【０４９１】ステップＳ５０８の判断処理において、設
定区間長ｔ分の再生がまだ終了していないと判断したと
きには、図３６に示すステップＳ５１２の処理に進み、
ユーザから再生停止の指示入力がされたか否かを判断す
る（ステップＳ５１２）。
【０４９２】ステップＳ５１２の判断処理において、再
生停止の指示入力はされていないと判断したときには、
モード変更の指示入力がされたか否かを判断する（ステ
ップＳ５１３）。ステップＳ５１３の判断処理におい
て、モード変更の指示入力はされていないと判断したと
きには、図３５に示したステップＳ５０４からの処理を
繰り返し、ダイジェスト再生を続行するようにする。
【０４９３】ステップＳ５１３の判断処理において、モ
ード変更の指示入力がされたと判断したときには、図３
５に示したステップＳ５０１からの処理を繰り返し、ユ
ーザからの指示に応じて、通常再生処理、記録処理、あ
るいは、他の番組のダイジェスト再生処理を行なうこと
ができるようにされる。
【０４９４】また、ステップＳ５１２の判断処理におい
て、再生停止の指示入力があったと判断したときには、
システムコントローラ１７は、この図３５、図３６に示
す処理を終了し、例えば、ユーザからの指示入力待ちと
なる。
【０４９５】また、図３５に示したステップＳ５０１の
判断処理において、記録動作が指示されたと判断したと
きには、システムコントローラ１７は、図３６に示すス
テップＳ５１４の処理に進み、各部を制御して記録モー
ドとなり、供給される画像信号と音声信号との記録媒体
８への記録を行なうようにする（ステップＳ５１４）。
【０４９６】そして、ユーザから記録停止の指示入力が
されたか否かを判断する（ステップＳ５１５）。ステッ
プＳ５１５の判断処理において、記録停止の指示入力は
されていないと判断したときには、モード変更の指示入
力がされたか否かを判断する（ステップＳ５１６）。
【０４９７】ステップＳ５１６の判断処理において、モ
ード変更の指示入力はされていないと判断したときに
は、ステップＳ５１４からの処理を繰り返し、記録処理
を続行するようにする。
【０４９８】ステップＳ５１６の判断処理において、モ
ード変更の指示入力がされたと判断したときには、図３
５に示したステップＳ５０１からの処理を繰り返し、ユ
ーザからの指示に応じて、通常再生処理、ダイジェスト
再生処理を行なうことができるようにされる。
【０４９９】また、ステップＳ５１４の判断処理におい
て、記録停止の指示入力があったと判断したときには、
システムコントローラ１７は、この図３５、図３６に示
す処理を終了し、例えば、ユーザからの指示入力待ちと
なる。
【０５００】また、図３５に示した、ステップＳ５０３
の判断処理において、指示された再生はダイジェスト再
生ではないと判断したときには、図３６に示すステップ
Ｓ５１７の処理に進み、システムコントローラ１７は、
各部を制御して通常再生モードとなり記録媒体８に記録
された目的とする番組の多重化データの通常再生を行な
う（ステップＳ５１７）。
【０５０１】そして、ユーザから再生停止の指示入力が
されたか否かを判断する（ステップＳ５１８）。ステッ
プＳ５１８の判断処理において、再生停止の指示入力は
されていないと判断したときには、モード変更の指示入
力がされたか否かを判断する（ステップＳ５１９）。
【０５０２】ステップＳ５１９の判断処理において、モ
ード変更の指示入力はされていないと判断したときに
は、ステップＳ５１７からの処理を繰り返し、ダイジェ
スト再生を続行するようにする。
【０５０３】ステップＳ５１９の判断処理において、モ
ード変更の指示入力がされたと判断したときには、図３
５に示したステップＳ５０１からの処理を繰り返し、ユ
ーザからの指示に応じて、記録処理、あるいは、記録さ
れた番組のダイジェスト再生処理を行なうことができる
ようにされる。
【０５０４】また、ステップＳ５１７の判断処理におい
て、再生停止の指示入力があったと判断したときには、
システムコントローラ１７は、この図３５、図３６に示
す処理を終了し、例えば、ユーザからの指示入力待ちと
なる。
【０５０５】［第６の実施の形態のまとめ］このよう
に、この第６の実施の形態の記録再生装置においては、
比較的に長時間にわたる類似画像区間が生じていても、
適正にダイジェスト再生用の画像区間を設定し、記録さ
れた番組の内容を効果的かつ効率的に把握することがで
きるようにダイジェスト再生を行なうことができる。
【０５０６】なお、設定区間長ｔ、間隔区間長ｓは、予
め決められていてもよいし、ユーザが適宜のタイミング
で設定するようにしてももちろんよい。
【０５０７】［その他］前述した第１〜第６の実施の形
態においては、類似画像区間を判別する場合にＭＰＥＧ
データのＩピクチャを用いるようにしたが、これに限る
ものではない。データ圧縮前の画像データのフレーム単
位に特徴データを検出し、類似画像区間を判別するよう
にしてもよい。
【０５０８】また、前述した第１〜第６の実施の形態の
記録再生装置のすべての機能を搭載した記録再生装置を
構成することも可能であるし、前述した第１〜第６の実
施の形態の記録再生装置の機能のうち、２つ以上の適宜
の組み合わせの機能を搭載するようにした記録再生装置
を構成することも可能である。
【０５０９】また、記録再生装置の記録媒体８は、ハー
ドディスクなどの磁気ディスクのほか、光ディスク、光
磁気ディスク、半導体メモリなど、ランダムアクセスが
可能であって、比較的に記録容量が大きな種々の記録媒
体を用いることができる。
【０５１０】また、前述した各実施の形態の記録再生装
置は、単なる記録再生装置に適用可能であるばかりでな
く、家庭において、通信機器や放送の受信機器などの各
種の電子機器に接続されるネットワーク型のホームサー
バなどに適用することができる。
【０５１１】また、この発明は、前述した縮小画像（サ
ムネイル画像）や要約情報、また、縮小画像や要約情報
を本編情報と結び付けるための識別情報などをいわゆる
メタデータとして用いて画像情報や音声情報などの再生
制御を行う場合の方法としても用いることができる。
【０５１２】
【発明の効果】大容量の記録媒体に記録されるデジタル
情報信号を効果的かつ効率的に利用することができると
ともに、記録媒体の効率的な利用も促進することができ
る。
【０５１３】また、ユーザにとって、利便性の高い情報
信号処理装置を提供することができる。
【図面の簡単な説明】
【図１】この発明による情報信号処理装置、情報信号処
理方法の一実施の形態が適用された第１の実施の形態の
記録再生装置を説明するためのブロック図である。
【図２】図１に示した第１の実施の形態の記録再生装置
における動作の概要を説明するための図である。
【図３】図１に示した第１の実施の形態の記録再生装置
における動作の概要を説明するための図である。
【図４】図１に示した第１の実施の形態の記録再生装置
の画像分類処理部を説明するためのブロック図である。
【図５】図１に示した第１の実施の形態の記録再生装置
の画像分類処理部の動作を説明するための図である。
【図６】図１に示した第１の実施の形態の記録再生装置
の画像分類処理部の動作を説明するための図である。
【図７】図１に示した第１の実施の形態の記録再生装置
の音声分類処理部を説明するためのブロック図である。
【図８】図１に示した第１の実施の形態の記録再生装置
の動作を説明するためのフローチャートである。
【図９】図８に続くフローチャートである。
【図１０】図１に示した第１の実施の形態の記録再生装
置の動作の他の例を説明するためのフローチャートであ
る。
【図１１】図１０に続くフローチャートである。
【図１２】この発明による情報信号処理装置、情報信号
処理方法の一実施の形態が適用された第２の実施の形態
の記録再生装置を説明するためのブロック図である。
【図１３】図１２に示した第２の実施の形態の記録再生
装置における動作の概要を説明するための図である。
【図１４】図１２に示した第２の実施の形態の記録再生
装置における動作の概要を説明するための図である。
【図１５】図１２に示した第２の実施の形態の記録再生
装置における動作の概要を説明するための図である。
【図１６】図１２に示した第２の実施の形態の記録再生
装置の動作を説明するためのフローチャートである。
【図１７】図１６に続くフローチャートである。
【図１８】図１２に示した第２の実施の形態の記録再生
装置の動作の他の例を説明するためのフローチャートで
ある。
【図１９】この発明による情報信号処理装置、情報信号
処理方法の一実施の形態が適用された第３の実施の形態
の記録再生装置を説明するためのブロック図である。
【図２０】図１９に示した第３の実施の形態の記録再生
装置の動作を説明するためのフローチャートである。
【図２１】図２０に続くフローチャートである。
【図２２】図２０に続くフローチャートである。
【図２３】この発明による情報信号処理装置、情報信号
処理方法の一実施の形態が適用された第４の実施の形態
の記録再生装置を説明するためのブロック図である。
【図２４】図２３に示した第４の実施の形態の記録再生
装置における動作の概要を説明するための図である。
【図２５】図２３に示した第４の実施の形態の記録再生
装置における動作の概要を説明するための図である。
【図２６】図２３に示した第４の実施の形態の記録再生
装置の動作を説明するためのフローチャートである。
【図２７】この発明による情報信号処理装置、情報信号
処理方法の一実施の形態が適用された第５、第６の実施
の形態の記録再生装置を説明するためのブロック図であ
る。
【図２８】図２７に示した第５の実施の形態の記録再生
装置における動作の概要を説明するための図である。
【図２９】図２７に示した第５の実施の形態の記録再生
装置における動作の概要を説明するための図である。
【図３０】図２７に示した第５の実施の形態の記録再生
装置の動作を説明するためのフローチャートである。
【図３１】図３０に続くフローチャートである。
【図３２】図３１に続くフローチャートである。
【図３３】図２７に示した第６の実施の形態の記録再生
装置における動作の概要を説明するための図である。
【図３４】図２７に示した第６の実施の形態の記録再生
装置における動作の概要を説明するための図である。
【図３５】図２７に示した第６の実施の形態の記録再生
装置の動作を説明するためのフローチャートである。
【図３６】図３５に続くフローチャートである。
【符号の説明】
１…音声Ｄ／Ａ変換器、２…音声エンコーダ、３…画像
Ｄ／Ａ変換器、４…画像エンコーダ、５…画像分類処理
部、６…多重化処理部、７…記録処理部、８…記録媒
体、９…再生制御部、１０…再生処理部、１１…分類処
理部、１２…音声デコーダ、１３…音声Ｄ／Ａ変換器、
１４…画像デコーダ、１５…画像Ｄ／Ａ変換器、１６…
識別信号検出部、１７…システムコントローラ、１８…
ユーザ入力Ｉ／Ｆ、１９…分類表示部、２０…音声分類
処理部
フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ１１Ｂ 27/34 Ｇ１１Ｂ 27/34 Ｐ ５Ｄ１１０ Ｈ０４Ｎ 5/262 Ｈ０４Ｎ 5/262 5/76 Ｂ 5/76 5/91 Ｚ 5/92 5/92 Ｈ Ｆターム(参考） 5C023 AA02 AA34 BA01 CA01 CA04 5C052 AA01 AB02 AB09 AC01 AC08 CC01 5C053 FA05 FA14 FA20 FA23 GB05 GB11 GB37 HA21 HA30 JA07 JA21 LA06 5D044 AB07 DE02 DE03 DE12 DE23 EF05 GK08 GK12 5D077 BA09 HA07 HB01 HD04 5D110 AA29 BB27 DA20 DB02 DE06 EA08 EA17 FA09

Claims (30)

    【特許請求の範囲】
  1. 【請求項１】記録の対象となっている第１の情報信号の
    所定の処理単位毎に当該第１の情報信号の特性を示す特
    性情報を検出する特性情報検出手段と、 前記特性情報検出手段からの検出結果に基づいて、前記
    第１の情報信号について特性の類似する区間を分類する
    ようにする分類処理手段と、 前記第１の情報信号の所定の処理単位毎に、当該第１の
    情報信号と対応関係のある第２の情報信号を生成する情
    報信号生成手段と、 分類された区間毎に一覧表示に用いる第２の情報信号を
    識別するとともに、その第２の情報信号の表示位置を識
    別するための識別情報を、前記分類処理手段においての
    分類処理の結果に基づいて形成する識別情報形成手段
    と、 前記第１の情報信号と、前記第２の情報信号と、前記識
    別情報とを記録媒体に記録する記録手段とを備えること
    を特徴とする情報信号処理装置。
  2. 【請求項２】記録の対象となっている第１の情報信号の
    所定の処理単位毎に当該第１の情報信号の特性を示す特
    性情報を検出する特性情報検出手段と、 前記特性情報検出手段からの検出結果に基づいて、前記
    第１の情報信号について特性の類似する区間を分類する
    ようにする分類処理手段と、 前記分類処理手段により分類された区間毎に、前記特性
    情報検出手段からの検出結果に基づいて決められる１つ
    の処理単位の前記第１の情報信号に基づいて、第２の情
    報信号を形成する情報信号形成手段と、 一覧表示に用いる第２の情報信号の表示位置を識別する
    ための識別情報を、前記分類処理手段においての分類処
    理の結果に基づいて形成する識別情報形成手段と、 前記第１の情報信号と、前記第２の情報信号と、前記識
    別情報信号とを記録媒体に記録する記録手段とを備える
    ことを特徴とする情報信号処理装置。
  3. 【請求項３】記録の対象となっている第１の情報信号の
    所定の処理単位毎に当該第１の情報信号の特性を示す特
    性情報を検出し、 検出した前記特性情報に基づいて、前記第１の情報信号
    について特性の類似する区間を分類し、 前記第１の情報信号の所定の処理単位毎に、当該第１の
    情報信号と対応関係のある第２の情報信号を生成し、 分類された前記特性の類似する区間毎に一覧表示に用い
    る前記第２の情報信号を識別するとともに、その第２の
    情報信号の表示位置を識別するための識別情報を、前記
    特性の類似する区間の分類の結果に基づいて形成し、 記録の対象になっている前記第１の情報信号に加えて、
    前記第２の情報信号と、前記識別情報とを記録媒体に記
    録することを特徴とする情報信号処理方法。
  4. 【請求項４】記録の対象となっている第１の情報信号の
    所定の処理単位毎に当該第１の情報信号の特性を示す特
    性情報を検出し、 検出した前記特性情報に基づいて、前記第１の情報信号
    について特性の類似する区間を分類し、 分類された前記特性の類似する区間毎に、検出された前
    記特性情報に基づいて決められる１つの処理単位の前記
    第１の情報信号に基づいて、第２の情報信号を形成し、 一覧表示に用いる前記第２の情報信号の表示位置を識別
    するための識別情報を、前記特性の類似する区間の分類
    の結果に基づいて形成し、 記録の対象になっている前記第１の情報信号に加えて、
    前記第２の情報信号と、前記識別情報とを記録媒体に記
    録することを特徴とする情報信号処理方法。
  5. 【請求項５】記録の対象となっている第１の情報信号の
    所定の処理単位毎に当該第１の情報信号の特性を示す特
    性情報を検出する特性情報検出手段と、 前記特性情報検出手段からの検出結果に基づいて、前記
    第１の情報信号のうちの所定の信号区間を識別するため
    の識別情報を生成する識別情報生成手段と、 前記第１の情報信号を所定の記録媒体の予め決められた
    記録方式により設定される第１の記録領域に記録すると
    ともに、前記識別情報により識別される前記第１の情報
    信号のうちの所定の信号区間の情報信号を第２の情報信
    号として前記記録媒体の予め決められた記録方式により
    設定される第２の記録領域に記録する記録手段とを備え
    ることを特徴とする情報信号処理装置。
  6. 【請求項６】請求項５に記載の情報信号処理装置であっ
    て、 前記記録手段は、複数の前記第１の情報信号を記録可能
    な記録容量を有する１まとまりの前記第１の記憶領域に
    前記第１の情報信号を記録し、複数の前記第２の情報信
    号を記録可能な記録容量を有する１まとまりの前記第２
    の記録領域に前記第２の情報信号を記録することを特徴
    とする情報信号処理装置。
  7. 【請求項７】請求項５に記載の情報信号処理装置であっ
    て、 前記記録手段は、１つ分の前記第１の情報信号を記録す
    る第１の記録領域と１つ分の前記第２の情報信号を記録
    する第２の記録領域とを設けるようにし、前記第１の記
    録領域に前記第１の情報信号を記録し、前記第２の記録
    領域に前記第２の情報信号を記録することを特徴とする
    情報信号処理装置。
  8. 【請求項８】請求項５に記載の情報信号処理装置であっ
    て、 記録方式の選択入力を受け付ける選択入力受付手段を備
    え、 前記記録手段は、前記選択入力受付手段を通じて受け付
    けた前記選択入力に応じた記録方式で前記記録媒体に第
    １の記録領域と第２の記録領域とを設定し、第１の記録
    領域に第１の情報信号を記録し、第２の記録領域に第２
    の情報信号を記録することを特徴とする情報信号処理装
    置。
  9. 【請求項９】請求項８に記載の情報信号処理装置であっ
    て、 前記記録方式として、少なくとも、 前記第１の記録領域を複数の第１の情報信号を記録可能
    な記録容量を有する１まとまりの前記第１の情報信号を
    記録し、前記第２の記録領域を複数の第２の情報信号を
    記録可能な記録容量を有する１まとまりの前記第２の情
    報信号を記録する第１の記録方式と、 １つ分の前記第１の情報信号を記録する第１の記録領域
    と１つ分の前記第２の情報信号を記録する第２の記録領
    域とを隣接して交互に設けるようにし、前記第１の記録
    領域に前記第１の情報信号を記録し、前記第２の記録領
    域に前記第２の情報信号を記録する第２の記録方式との
    うちの一方を選択することができるようにされているこ
    とを特徴とする情報信号処理装置。
  10. 【請求項１０】請求項５、請求項６、請求項７、請求項
    ８または請求項９に記載の情報信号処理装置であって、 前記記録媒体の空き記録容量を検出する記録容量検出手
    段と、 前記第１の情報信号を前記記録媒体に記録する際に、前
    記記録容量検出手段により前記記録媒体の空き領域が第
    １の情報信号を記録するのに不足することが検出された
    場合には、前記第１の記録領域に最古に記録された前記
    第１の情報信号の記録領域に最新の前記第１の情報信号
    を記録するようにするとともに、第２の記録領域には侵
    食しないように制御する記録制御手段とを備えることを
    特徴とする情報信号処理装置。
  11. 【請求項１１】記録の対象となっている第１の情報信号
    の所定の処理単位毎に当該第１の情報信号の特性を示す
    特性情報を検出し、 検出した前記特性情報に基づいて、前記第１の情報信号
    のうちの所定の情報信号を識別するための識別情報を生
    成し、 前記第１の情報信号を所定の記録媒体の予め決められた
    記録方式により設定される第１の記録領域に記録すると
    ともに、前記識別情報により識別される前記第１の情報
    信号のうちの所定の信号区間の情報信号を第２の情報信
    号として前記記録媒体の予め決められた記録方式により
    設定される第２の記録領域に記録することを特徴とする
    情報信号処理方法。
  12. 【請求項１２】請求項１１に記載の情報信号処理方法で
    あって、 前記第１の情報信号と前記第２の情報信号との記録に際
    しては、複数の前記第１の情報信号を記録可能な記録容
    量を有する１まとまりの前記第１の記憶領域に前記第１
    の情報信号を記録し、複数の前記第２の情報信号を記録
    可能な記録容量を有する１まとまりの前記第２の記録領
    域に前記第２の情報信号を記録することを特徴とする情
    報信号処理方法。
  13. 【請求項１３】請求項１１に記載の情報信号処理方法で
    あって、 前記第１の情報信号と前記第２の情報信号との記録に際
    しては、１つ分の前記第１の情報信号を記録する第１の
    記録領域と１つ分の前記第２の情報信号を記録する第２
    の記録領域とを設けるようにし、前記第１の記録領域に
    前記第１の情報信号を記録し、前記第２の記録領域に前
    記第２の情報信号を記録することを特徴とする情報信号
    処理方法。
  14. 【請求項１４】請求項１１に記載の情報信号処理方法で
    あって、 記録方式の選択入力を受け付けるようにし、 受け付けた前記選択入力に応じた記録方式で前記記録媒
    体に第１の記録領域と第２の記録領域とを設定し、第１
    の記録領域に第１の情報信号を記録し、第２の記録領域
    に第２の情報信号を記録することを特徴とする情報信号
    処理方法。
  15. 【請求項１５】請求項１４に記載の情報信号処理方法で
    あって、 前記記録方式として、少なくとも、 前記第１の記録領域を複数の第１の情報信号を記録可能
    な記録容量を有する１まとまりの前記第１の情報信号を
    記録し、前記第２の記録領域を複数の第２の情報信号を
    記録可能な記録容量を有する１まとまりの前記第２の情
    報信号を記録する第１の記録方式と、 １つ分の前記第１の情報信号を記録する第１の記録領域
    と１つ分の前記第２の情報信号を記録する第２の記録領
    域とを隣接して交互に設けるようにし、前記第１の記録
    領域に前記第１の情報信号を記録し、前記第２の記録領
    域に前記第２の情報信号を記録する第２の記録方式との
    うちの一方を選択することができることを特徴とする情
    報信号処理方法。
  16. 【請求項１６】請求項１１、請求項１２、請求項１３、
    請求項１４または請求項１５に記載の情報信号処理方法
    であって、 前記記録媒体の空き記録容量を検出し、 前記第１の情報信号を前記記録媒体に記録する際に、前
    記記録容量検出手段により前記記録媒体の空き領域が第
    １の情報信号を記録するのに不足することが検出された
    場合には、前記第１の記録領域に最古に記録された前記
    第１の情報信号の記録領域に最新の前記第１の情報信号
    を記録するようにするとともに、第２の記録領域には侵
    食しないように制御することを特徴とする情報信号処理
    方法。
  17. 【請求項１７】記録の対象となっている第１の情報信号
    の所定の処理単位毎に当該第１の情報信号の特性を示す
    特性情報を検出する特性情報検出手段と、 前記特性情報検出手段からの検出結果に基づいて、前記
    第１の情報信号のうちの所定の情報信号を識別するため
    の識別情報を生成する識別情報生成手段と、 前記識別情報生成手段により生成された前記識別情報を
    前記第１の情報信号に付加する識別情報付加手段と、 前記識別情報付加手段により前記識別情報が付加された
    前記第１の情報信号を第１の記録媒体に記録する第１の
    記録手段と、 所定のタイミングにおいて、前記第１の記録媒体の空き
    容量を検出する記憶容量検出手段と、 前記記憶容量検出手段により、前記第１の空き容量が所
    定値以下になったことが検出された場合に、前記第１の
    記録媒体に記録されている１つ以上の前記第１の情報信
    号の全部を第２の記録媒体に移動するようにするととも
    に、移動するようにされた前記第１の情報信号のうちの
    前記識別情報により識別される信号区間の情報信号は第
    ２の情報信号として前記第１の記録媒体にも残すように
    する第２の記録手段とを備えることを特徴とする情報信
    号処理装置。
  18. 【請求項１８】記録の対象となっている第１の情報信号
    の所定の処理単位毎に当該第１の情報信号の特性を示す
    特性情報を検出する特性情報検出手段と、 前記特性情報検出手段からの検出結果に基づいて、前記
    第１の情報信号のうちの所定の情報信号を識別するため
    の識別情報を生成する識別情報生成手段と、 前記第１の情報信号を第１の記録媒体に記録するととも
    に、前記識別情報により識別される前記第１の情報信号
    のうちの所定の情報信号を第２の情報信号として前記第
    １の記録媒体に記録する第１の記録手段と、 所定のタイミングにおいて、前記第１の記録媒体の空き
    容量を検出する記憶容量検出手段と、 前記記憶容量検出手段により、前記第１の空き容量が所
    定値以下になったことが検出された場合に、前記第１の
    記録媒体に記録されている１つ以上の前記第１の情報信
    号のみを第２の記録媒体に移動するようにする第２の記
    録手段とを備えることを特徴とする情報信号処理装置。
  19. 【請求項１９】記録の対象となっている第１の情報信号
    の所定の処理単位毎に当該第１の情報信号の特性を示す
    特性情報を検出し、 検出した前記特性情報に基づいて、前記第１の情報信号
    のうちの所定の情報信号を識別するための識別情報を生
    成し、 生成した前記識別情報を前記第１の情報信号に付加し、 前記識別情報が付加された前記第１の情報信号を第１の
    記録媒体に記録するようにし、 所定のタイミングにおいて、前記第１の記録媒体の空き
    容量を検出し、 前記第１の空き容量が所定値以下になったことが検出さ
    れた場合に、前記第１の記録媒体に記録されている１つ
    以上の前記第１の情報信号の全部を第２の記録媒体に移
    動させるとともに、移動するようにされた前記第１の情
    報信号のうちの前記識別情報により識別される信号区間
    の情報信号は第２の情報信号として前記第１の記録媒体
    にも残すようにすることを特徴とする情報信号処理方
    法。
  20. 【請求項２０】記録の対象となっている第１の情報信号
    の所定の処理単位毎に当該第１の情報信号の特性を示す
    特性情報を検出し、 検出した前記特性情報に基づいて、前記第１の情報信号
    のうちの所定の情報信号を識別するための識別情報を生
    成し、 前記第１の情報信号を第１の記録媒体に記録するととも
    に、前記識別情報により識別される前記第１の情報信号
    のうちの所定の情報信号を第２の情報信号として前記第
    １の記録媒体に記録し、 所定のタイミングにおいて、前記第１の記録媒体の空き
    容量を検出し、 前記第１の空き容量が所定値以下になったことが検出さ
    れた場合に、前記第１の記録媒体に記録されている１つ
    以上の前記第１の情報信号の全部あるいは一部を第２の
    記録媒体に移動させることを特徴とする情報信号処理方
    法。
  21. 【請求項２１】記録の対象となっている第１の情報信号
    の所定の処理単位毎に当該第１の情報信号の特性を示す
    特性情報を検出する特性情報検出手段と、 前記特性情報検出手段からの検出結果に基づいて、前記
    第１の情報信号について類似区間を検出する類似区間検
    出手段と、 前記類似区間検出手段からの検出出力に応じて決められ
    る所定の位置の前記第１の情報信号部分と対応関係のあ
    る第２の情報信号を生成する情報信号生成手段と、 前記第１の情報信号と前記第２の情報信号とを時間的
    に、あるいは、位置的に対応付ける対応付け情報を生成
    する対応付け情報生成手段と、 前記第１の情報信号と、前記情報信号生成手段からの第
    ２の情報信号と、前記対応付け情報生成手段からの対応
    付け情報とを記録媒体に記録する記録手段と、 前記第２の情報信号に応じた情報を時系列順に表示素子
    に一覧表示するようにする表示制御手段とを備えること
    を特徴とする情報信号処理装置。
  22. 【請求項２２】請求項２１に記載の情報信号処理装置で
    あって、 前記表示素子に一覧表示された前記第２の情報信号に応
    じた少なくとも1つの画像を選択するための選択入力を
    受け付ける選択入力受付手段と、 前記選択入力受付手段を通じて受け付けた選択入力に応
    じた画像に対応する位置から前記第1の情報信号を再生
    するようにする再生制御手段とを備えることを特徴とす
    る情報信号処理装置。
  23. 【請求項２３】記録の対象となっている第１の情報信号
    の所定の処理単位毎に当該第１の情報信号の特性を示す
    特性情報を検出し、 検出した前記特性情報に基づいて、前記第１の情報信号
    の類似区間を検出し、検出した前記類似区間に応じて決
    められる所定の位置の前記第１の情報信号から、当該第
    １の情報信号部分と対応関係のある第２の情報信号を生
    成し、 前記第１の情報信号と前記第２の情報信号とを時間的
    に、あるいは、位置的に対応付ける対応付け情報を生成
    し、 前記第１の情報信号と、前記第２の情報信号と、前記対
    応付け情報とを記録媒体に記録し、 前記第２の情報信号に応じた情報を時系列順に表示素子
    に一覧表示するようにして行くことを特徴とする情報信
    号処理方法。
  24. 【請求項２４】請求項２３に記載の情報信号処理方法で
    あって、 前記表示素子に一覧表示された前記第２の情報信号に応
    じた少なくとも１つの画像を選択するための選択入力を
    受け付け、 受け付けた前記選択入力に応じた画像に対応する位置か
    ら前記第１の情報信号を再生するようにすることを特徴
    とする情報信号処理方法。
  25. 【請求項２５】所定の処理単位毎に特性を検出し、検出
    した前記特性に基づいて特性の類似する区間に分類さ
    れ、その分類が識別可能なように識別情報が付加するよ
    うにされて記録媒体に記録された情報信号を再生する情
    報信号処理装置であって、 前記記録媒体に記録されている情報信号を読み出す読み
    出し手段と、特殊再生実行指示入力を受け付ける実行指
    示入力受付手段と、 前記実行指示入力受付手段を通じて、特殊再生を行なう
    ことが指示された場合に、前記記録媒体に記録されてい
    る再生しようとする前記情報信号に付加されている属性
    情報、あるいは、使用者からの指示入力に基づいて、複
    数の特殊再生モードの中から用いる特殊再生モードを選
    択するモード選択手段と、 前記モード選択手段により選択された特殊再生モードに
    応じて、前記読み出し手段を制御し、読み出す前記情報
    信号の範囲を変えるように制御する制御手段とを備える
    ことを特徴とする情報信号処理装置。
  26. 【請求項２６】所定の処理単位毎に特性を検出し、検出
    した特性に基づいて特性の類似する区間に分類されて記
    録媒体に記録された情報信号を再生する情報信号処理方
    法であって、 特殊再生実行指示入力を受け付けるようにし、 前記特殊再生実行指示入力を受け付けた場合に、前記記
    録媒体に記録されている再生しようとする前記情報信号
    に付加されている属性情報、あるいは、使用者からの指
    示入力に基づいて、複数の特殊再生モードの中から用い
    る特殊再生モードを選択し、 選択した特殊再生モードに応じて、前記情報信号の読み
    出し範囲を変えるように制御することを特徴とする情報
    信号処理装置。
  27. 【請求項２７】所定の処理単位毎に特性を検出し、検出
    した前記特性に基づいて特性の類似する類似区間に分類
    され、その分類が識別可能なように識別情報が付加する
    ようにされて記録媒体に記録された情報信号を再生する
    情報信号処理装置であって、 特殊再生実行指示入力を受け付ける実行指示入力受付手
    段と、 前記記録媒体から再生する前記情報信号を読み出す読み
    出し手段と、 前記実行指示入力受付手段を通じて情報信号の特殊再生
    実行指示入力を受け付けた場合に、前記読み出し手段に
    より読み出された前記情報信号の前記分類区間毎に、予
    め決められる間隔区間長おきに、予め決められる設定区
    間長分の前記情報信号の再生を行なうように制御する再
    生制御手段とを備えることを特徴とする情報信号処理装
    置。
  28. 【請求項２８】請求項２７に記載の情報信号処理装置で
    あって、 前記情報信号の前記類似区間のうちの重要区間を検出す
    る重要区間検出手段を備え、 前記再生制御手段は、前記重要区間検出手段により検出
    された前記重要区間を含むように、前記設定区間長の再
    生区間を設定するようにすることを特徴とする情報信号
    処理装置。
  29. 【請求項２９】所定の処理単位毎に特性を検出し、検出
    した前記特性に基づいて特性の類似する類似区間に分類
    され、その分類が識別可能なように識別情報が付加する
    ようにされて記録媒体に記録された情報信号を再生する
    情報信号処理方法であって、 特殊再生実行指示入力を受け付けるようにし、 前記特殊再生実行指示入力を受け付けた場合に、前記記
    録媒体から再生する前記情報信号を読み出し、 読み出した前記情報信号の前記分類区間毎に、予め決め
    られる間隔区間長おきに、予め決められる設定区間長分
    の前記情報信号の再生を行なうように制御することを特
    徴とする情報信号処理方法。
  30. 【請求項３０】請求項２９に記載の情報信号処理方法で
    あって、 前記情報信号の前記類似区間のうちの重要区間を検出
    し、 前記重要区間検出手段により検出された前記重要区間を
    含むように、前記設定区間長の再生区間を設定するよう
    にすることを特徴とする情報信号処理方法。
JP2002009777A 2002-01-18 2002-01-18 情報信号処理装置および情報信号処理方法 Expired - Fee Related JP3772117B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2002009777A JP3772117B2 (ja) 2002-01-18 2002-01-18 情報信号処理装置および情報信号処理方法
PCT/JP2003/000204 WO2003065711A1 (fr) 2002-01-18 2003-01-14 Appareil de traitement de signal d'information et procede de traitement de signal d'information
CNB038060248A CN100512402C (zh) 2002-01-18 2003-01-14 信息信号处理设备和信息信号处理方法
KR1020047011200A KR100909144B1 (ko) 2002-01-18 2003-01-14 정보 신호 처리 장치 및 정보 신호 처리 방법
US10/501,840 US7630613B2 (en) 2002-01-18 2003-01-14 Information-signal process apparatus and information-signal processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002009777A JP3772117B2 (ja) 2002-01-18 2002-01-18 情報信号処理装置および情報信号処理方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2004300257A Division JP4164688B2 (ja) 2004-10-14 2004-10-14 情報信号処理装置および情報信号処理方法

Publications (2)

Publication Number Publication Date
JP2003219348A true JP2003219348A (ja) 2003-07-31
JP3772117B2 JP3772117B2 (ja) 2006-05-10

Family

ID=27647694

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002009777A Expired - Fee Related JP3772117B2 (ja) 2002-01-18 2002-01-18 情報信号処理装置および情報信号処理方法

Country Status (5)

Country Link
US (1) US7630613B2 (ja)
JP (1) JP3772117B2 (ja)
KR (1) KR100909144B1 (ja)
CN (1) CN100512402C (ja)
WO (1) WO2003065711A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006217163A (ja) * 2005-02-02 2006-08-17 Hitachi Ltd 録画再生システム
WO2009139302A1 (ja) * 2008-05-16 2009-11-19 シャープ株式会社 録画再生装置
JP2010154254A (ja) * 2008-12-25 2010-07-08 Kyocera Corp 合成画像作成装置
US7822569B2 (en) 2005-04-20 2010-10-26 Sony Corporation Specific-condition-section detection apparatus and method of detecting specific condition section
JP2011138574A (ja) * 2009-12-28 2011-07-14 Hitachi Consumer Electronics Co Ltd 情報記録再生装置

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3857210B2 (ja) * 2002-10-18 2006-12-13 パイオニア株式会社 情報記録装置、情報再生装置、情報記録用プログラム、情報再生用プログラム、記録媒体及び情報記録媒体
DE602004017058D1 (de) * 2003-12-18 2008-11-20 Matsushita Electric Ind Co Ltd Aufzeichnungsvorrichtung, integrierte schaltung für eine aufzeichnungsvorrichtung, aufzeichnungsverfahren, computerprogramm und computeraufzeichnungsmedium zur ermöglichung der inhaltsaufzeichnung
WO2005074269A1 (ja) * 2004-01-20 2005-08-11 Nec Corporation データ放送記録再生方法、装置、および記録媒体
JP4166707B2 (ja) * 2004-01-20 2008-10-15 パイオニア株式会社 映像内容認識装置、録画装置、映像内容認識方法、録画方法、映像内容認識プログラム、および録画プログラム
JP2005346824A (ja) * 2004-06-02 2005-12-15 Pioneer Electronic Corp 情報処理装置、その方法、その方法を実施するプログラム、およびそのプログラムを記憶した記憶媒体、情報記憶装置
JP2006019948A (ja) * 2004-06-30 2006-01-19 Toshiba Corp 映像信号出力機器
JP4135939B2 (ja) * 2004-10-07 2008-08-20 株式会社東芝 デジタルラジオ放送受信装置
WO2007052395A1 (ja) * 2005-10-31 2007-05-10 Sharp Kabushiki Kaisha 視聴環境制御システム
US8130841B2 (en) * 2005-12-29 2012-03-06 Harris Corporation Method and apparatus for compression of a video signal
JP2008136135A (ja) * 2006-11-29 2008-06-12 Toshiba Corp 再生装置、更新制御プログラムおよびサーバ装置
US8671346B2 (en) * 2007-02-09 2014-03-11 Microsoft Corporation Smart video thumbnail
US20090158157A1 (en) * 2007-12-14 2009-06-18 Microsoft Corporation Previewing recorded programs using thumbnails
FR2926695B1 (fr) * 2008-01-21 2013-08-09 Alcatel Lucent Procede de preparation de contenus de programmes audiovisuels, et systeme associe
JP4331240B2 (ja) * 2008-01-23 2009-09-16 株式会社東芝 電子機器および画像表示方法
US8427478B2 (en) * 2008-01-25 2013-04-23 Hewlett-Packard Development Company, L.P. Displaying continually-incoming time series that uses overwriting of one portion of the time series data while another portion of the time series data remains unshifted
CN103475837B (zh) * 2008-05-19 2017-06-23 日立麦克赛尔株式会社 记录再现装置及方法
CN101621621A (zh) * 2008-07-04 2010-01-06 佛山普立华科技有限公司 拍摄装置及其定时拍摄方法
JP4609556B2 (ja) * 2008-08-29 2011-01-12 ソニー株式会社 情報処理装置及び情報処理方法
US9305603B2 (en) * 2010-07-07 2016-04-05 Adobe Systems Incorporated Method and apparatus for indexing a video stream
JP2012039523A (ja) * 2010-08-10 2012-02-23 Sony Corp 動画像処理装置、動画像処理方法およびプログラム
JP2012039522A (ja) * 2010-08-10 2012-02-23 Sony Corp 動画像処理装置、動画像処理方法およびプログラム
JP2013012805A (ja) * 2011-06-28 2013-01-17 Sony Corp 受信装置、受信方法、及びプログラム
US8884966B2 (en) 2011-08-24 2014-11-11 Hewlett-Packard Development Company, L.P. Visualizing a scatter plot using real-time backward rewrite
US9251850B2 (en) * 2012-12-19 2016-02-02 Bitcentral Inc. Nonlinear proxy-based editing system and method having improved audio level controls
JP2015103217A (ja) * 2013-11-28 2015-06-04 ソニー株式会社 画像処理装置および画像処理方法
KR20170098079A (ko) * 2016-02-19 2017-08-29 삼성전자주식회사 전자 장치 및 전자 장치에서의 비디오 녹화 방법
DE112018000423B4 (de) * 2017-01-18 2022-08-25 Yamaha Corporation Part-Anzeigevorrichtung, Elektronische Musikvorrichtung, Bedienterminal-Vorrichtung und Part-Anzeigeverfahren
CN109994117A (zh) * 2019-04-09 2019-07-09 昆山古鳌电子机械有限公司 一种电子签名系统

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03292572A (ja) * 1990-04-11 1991-12-24 Matsushita Electric Ind Co Ltd 動画データ表示装置
JPH06309797A (ja) 1993-04-26 1994-11-04 Toshiba Corp ディスク再生装置
JPH0745050A (ja) * 1993-08-02 1995-02-14 Victor Co Of Japan Ltd 自動分類記録装置
JPH0759003A (ja) * 1993-08-11 1995-03-03 Sony Corp 画像表示装置
JP3240871B2 (ja) 1995-03-07 2001-12-25 松下電器産業株式会社 映像要約方法
DE69636648T2 (de) * 1995-04-14 2007-12-06 Kabushiki Kaisha Toshiba, Kawasaki Gerät zur Wiedergabe von einem Aufzeichnungsmedium
JP3454396B2 (ja) * 1995-10-11 2003-10-06 株式会社日立製作所 動画像の変化点検出制御方法とそれに基づく再生停止制御方法およびそれらを用いた動画像の編集システム
JPH1032776A (ja) 1996-07-18 1998-02-03 Matsushita Electric Ind Co Ltd 映像表示方法及び記録再生装置
JP3733984B2 (ja) 1997-01-29 2006-01-11 富士ゼロックス株式会社 情報蓄積装置および情報蓄積方法
JP3874317B2 (ja) 1997-05-30 2007-01-31 コニカミノルタフォトイメージング株式会社 デジタルカメラ
US6366296B1 (en) * 1998-09-11 2002-04-02 Xerox Corporation Media browser using multimodal analysis
JP2000285243A (ja) 1999-01-29 2000-10-13 Sony Corp 信号処理方法及び映像音声処理装置
US7356830B1 (en) * 1999-07-09 2008-04-08 Koninklijke Philips Electronics N.V. Method and apparatus for linking a video segment to another segment or information source
US6751776B1 (en) * 1999-08-06 2004-06-15 Nec Corporation Method and apparatus for personalized multimedia summarization based upon user specified theme
JP2001177806A (ja) 1999-12-20 2001-06-29 Sony Corp 情報信号表示方法及び情報信号表示装置
JP2001189909A (ja) * 1999-12-28 2001-07-10 Matsushita Electric Ind Co Ltd 動画カメラ
JP3246602B2 (ja) * 2000-02-04 2002-01-15 ソニー株式会社 情報処理装置、情報処理方法、および、プログラム格納媒体
JP2001306581A (ja) * 2000-04-18 2001-11-02 Sony Corp ミドルウェアおよびミドルウェアを用いたメディアデータ視聴機器
JP4356272B2 (ja) * 2001-08-14 2009-11-04 株式会社ニコン 電子カメラ

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006217163A (ja) * 2005-02-02 2006-08-17 Hitachi Ltd 録画再生システム
US7822569B2 (en) 2005-04-20 2010-10-26 Sony Corporation Specific-condition-section detection apparatus and method of detecting specific condition section
WO2009139302A1 (ja) * 2008-05-16 2009-11-19 シャープ株式会社 録画再生装置
JPWO2009139302A1 (ja) * 2008-05-16 2011-09-22 シャープ株式会社 録画再生装置
JP2010154254A (ja) * 2008-12-25 2010-07-08 Kyocera Corp 合成画像作成装置
JP2011138574A (ja) * 2009-12-28 2011-07-14 Hitachi Consumer Electronics Co Ltd 情報記録再生装置

Also Published As

Publication number Publication date
JP3772117B2 (ja) 2006-05-10
KR100909144B1 (ko) 2009-07-23
CN100512402C (zh) 2009-07-08
WO2003065711A1 (fr) 2003-08-07
KR20040072734A (ko) 2004-08-18
US7630613B2 (en) 2009-12-08
CN1856993A (zh) 2006-11-01
US20050180580A1 (en) 2005-08-18

Similar Documents

Publication Publication Date Title
JP3772117B2 (ja) 情報信号処理装置および情報信号処理方法
JP4069586B2 (ja) 録画視聴支援方法、映像記録装置および録画視聴支援装置
KR101111537B1 (ko) 컨텐츠 시청 지원 장치 및 컨텐츠 시청 지원 방법
EP1487204B1 (en) Speculative recording device
US20120020641A1 (en) Content reproduction apparatus
US7187846B2 (en) Recording apparatus, picture recording apparatus, and method therefor
JP2004312494A (ja) 録画装置及びその制御方法
WO2005074275A1 (ja) コンテンツ再生装置
JP2007336283A (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP2008028985A (ja) コンテンツ視聴支援回路およびコンテンツ視聴支援装置
JP2007250097A (ja) コンテンツ再生装置、コンテンツ再生再開方法およびコンテンツ再生プログラム
US8275242B2 (en) Recording/reproducing apparatus and display control method
JP4198331B2 (ja) 録画装置
JP4164688B2 (ja) 情報信号処理装置および情報信号処理方法
US7810120B2 (en) Method and apparatus for managing a list of recorded broadcasting programs
JP2007288300A (ja) 映像音声再生装置
JP2008135080A (ja) 録画装置
JP2007323704A (ja) 映像音声再生装置、映像音声再生方法及び制御プログラム
JP2007214708A (ja) 映像機器及びそれを用いた番組情報作成方法
JPH09284698A (ja) 映像のダイジェスト作成装置および方法
JP4725554B2 (ja) 番組記録再生システム及び番組記録再生方法
KR100818401B1 (ko) 디지털 방송 수신기에서 녹화물 재생 방법
JP2003101937A (ja) 映像記録再生装置および映像配信システム
JP2006303944A (ja) 番組記録再生装置
KR20070075728A (ko) 디지털 방송 수신기에서 녹화물 탐색 방법 및 그 장치

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040818

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041014

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20041208

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050204

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20050330

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050601

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20050606

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20050930

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051222

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060213

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100217

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100217

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110217

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120217

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130217

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140217

Year of fee payment: 8

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees