JP4129517B2

JP4129517B2 - Data management method and recording / reproducing apparatus

Info

Publication number: JP4129517B2
Application number: JP2002287286A
Authority: JP
Inventors: 博幸山村; 裕利岩野; 次郎木山; 智哉紫村; 孝好山口
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2002-09-30
Filing date: 2002-09-30
Publication date: 2008-08-06
Anticipated expiration: 2022-09-30
Also published as: JP2004127369A

Description

【０００１】
【発明の属する技術分野】
本発明は、動画像、静止画像、音声などのデジタルデータを、光磁気ディスク、光ディスク、ハードディスクなどの磁気ディスク、または半導体メモリなどの記録媒体に記録するとともに、記録したデジタルデータの任意の位置情報を管理し、任意の位置情報から記録したデータを再生するためのデータ管理方法、データ表示方法、記録再生装置、および記録媒体に関する。
【０００２】
【従来の技術】
近年、映像や音声などのデータを記録して再生する記録再生装置として、パーソナルコンピュータ、ＤＶＤ（Digital Video Disk）レコーダー、デジタルカメラなどが普及している。これらの記録再生装置は、記録した映像などにおける任意の位置を登録することを可能とする「ブックマーク機能」を有しているのが一般的である。
【０００３】
ブックマーク機能を用いて登録したブックマークにより、記録再生装置は、動画像のブックマーク位置の画像を表示し、登録したブックマーク位置（または時間）から再生を開始することができる。また、記録再生装置は、データ管理情報に格納されているブックマーク情報を参照し、ブックマーク情報に記録されている代表画像をブックマーク画像として表示する。
【０００４】
以下、図１２を参照しつつ、記録媒体に記録されている従来のデータ構造を説明する。記録媒体に記録されている従来のデータ構造は、図１２に示すように、論理管理情報８００と、データ領域８０１とにより構成されている。
【０００５】
論理管理情報８００は、ＦＡＴ（File Allocation Table）やＵＤＦ（Universal Disk Format）などのファイルシステムにより管理されている管理情報であり、データ領域８０１に記録されているファイルを参照するための情報が格納されている。
【０００６】
データ領域８０１は、論理管理情報８００により管理されているファイルが記録される領域である。また、データ領域８０１には、ファイル＃１（８０２）、ファイル＃２（８０３）、およびファイル＃ｎ（８０４）までの複数のファイルが記録されているとともに、空き領域８０５が設けられている。
【０００７】
ファイル＃１（８０２）には、データ＃１管理情報８０６と、動画、静止画、音声、テキストなどのデータ＃１（８０７）とが記録されている。ファイル＃２（８０３）には、データ＃２管理情報８０８と、動画、静止画、音声、テキストなどのデータ＃２（８０９）とが記録されている。ファイル＃ｎ（８０４）には、データ＃ｎ管理情報８１０と、動画、静止画、音声、テキストなどのデータ＃ｎ（８１１）とが記録されている。空き領域８０５は、何も記録されていない領域である。
【０００８】
このように、動画、静止画、音声などのデータは、データを再生するための管理情報であるデータ管理情報とともにデータファイルに記録されている。
【０００９】
また、データ＃２管理情報８０８には、データ管理情報に記録される管理情報を参照するためのヘッダ情報８１２、ブックマーク画像情報のデータの種類やデータ作成日時などが格納されている属性情報８１３、動画を再生するための動画管理情報８１４、およびブックマークを管理するためのブックマーク管理情報８１５が格納されている。
【００１０】
さらに、ブックマーク管理情報８１５には、ブックマーク＃１位置情報８１６と、ブックマーク＃２位置情報８１７と、ブックマーク＃３位置情報８１８とが格納されている。
【００１１】
また、データ＃２（８０９）には、動画データ８１９と、ブックマークデータ８２０とが格納されている。
【００１２】
また、ブックマーク＃１位置情報８１６には、動画データ８１９内のブックマーク＃１位置８２７に相当する位置情報が格納されている。この位置情報は、動画データ８１９の先頭からのオフセットバイト数、または動画データ８１９を原点とした再生時間として格納されている。
【００１３】
また、ブックマーク＃２位置情報８１７には、動画データ８１９内のブックマーク＃２位置８２８に相当する位置情報が格納されている。この位置情報は、動画データ８１９の先頭からのオフセットバイト数、または動画データ８１９を原点とした再生時間として格納されている。
【００１４】
さらに、ブックマーク＃３位置情報８１８には、動画データ８１９内のブックマーク＃３位置８２９に相当する位置情報が格納されている。この位置情報は、動画データ８１９の先頭からのオフセットバイト数、または動画データ８１９を原点とした再生時間として格納される。
【００１５】
また、ブックマークデータ８２０には、ブックマーク＃１画像８２１と、ブックマーク＃１タイトル８２２と、ブックマーク＃２画像８２３と、ブックマーク＃２タイトル８２４と、ブックマーク＃３画像８２５と、ブックマーク＃３タイトル８２６とが格納されている。
【００１６】
ブックマーク＃１画像８２１には、ブックマーク＃１位置情報８１６に格納されている位置情報に相当する、動画データ８１９における１フレーム分の画像データが格納されている。
【００１７】
さらに、ブックマーク＃２画像８２３には、ブックマーク＃２位置情報８１７に格納されている位置情報に相当する、動画データ８１９の１フレーム分の画像データが格納されている。また、ブックマーク＃３画像８２５には、ブックマーク＃３位置情報８１８に格納されている位置情報に相当する、動画データ８１９における１フレーム分の画像データが格納される。
【００１８】
また、特開平６−１６２０９３号公報（以下、特許文献１とする）、特開平１１−３２８９３３号公報（以下、特許文献２とする）、特開２０００−２２４５５４号公報（以下、特許文献３とする）には、ブックマークを管理する技術が開示されている。
【００１９】
特許文献１には、電子ファイリング装置および文書ファイル装置などの画像処理装置において、頁単位の画像データを検索可能とするために、画像データに対してしおりを付加する位置の座標データをしおり情報として登録する方法が開示されている。
【００２０】
特許文献２には、音楽をデジタルデータ化して記録するミニディスクにおいて、一時停止した際の電力を消費しない方法で、任意の位置および複数の位置を記憶させておく方法が開示されている。
【００２１】
特許文献３には、テレビ放送の伝送方式において、しおり情報を含むユーザーデータを伝送し、番組にしおりを付加する方法と、しおりのある部分からの動作（再生、早送り再生、スロー再生、これらの逆再生、スキップ、繰り返し再生）である区切り動作、しおり情報の変更禁止などの動作制御を実現する方法とが開示されている。
【００２２】
【特許文献１】
特開平６−１６２０９３号公報（平成６年６月１０日公開）
【００２３】
【特許文献２】
特開平１１−３２８９３３号公報（平成１１年１１月３０日公開）
【００２４】
【特許文献３】
特開２０００−２２４５５４号公報（平成１２年８月１１日公開）
【００２５】
【発明が解決しようとする課題】
しかしながら、上記公報に記載された技術は、記録したデータの任意位置を示すブックマーク情報として、任意位置に対応するフレーム画像の特徴部分を示すことができない。
【００２６】
すなわち、特許文献２に記載された技術は、再生時間やその時間に相当するデータまでのデータ量のみを管理しているため、記録したデータの任意位置に対応したデータの特徴部分を示すことができない。
【００２７】
また、特許文献３に記載された技術は、再生時間やその時間に相当するデータまでのデータ量や、再生動作を制御する制御情報を管理しているが、記録したデータの任意位置の特徴部分に関する情報は何ら管理していないので、当該特徴部分を示すことができない。
【００２８】
さらに、特許文献１に記載された技術は、頁単位にブックマーク登録を行う技術であるので、時系列で連続する動画像データに対しては、ブックマークを登録することができない。
【００２９】
たとえば、ＭＰＥＧ（Motion Picture Experts Group）２やＭＰＥＧ４により圧縮して記録された動画像データに対して、特許文献１に記載された技術を用いてブックマークを登録するとともに、当該ブックマーク位置から動画像データを再生することは不可能である。なぜなら、記録媒体に記録されたデータの管理情報およびブックマーク情報からの再生手法が、特許文献１に記載された技術が対象とする文書データと動画像データとの間で異なるからである。
【００３０】
また、特許文献１に記載された技術は、頁単位に登録するしおり情報として座標データを管理している。なお、座標データは、しおりを検索するために設けられているものであり、しおりパターンやしおりマークを合成表示するためのデータである。
【００３１】
すなわち、特許文献１に記載された技術は、動画像のフレーム内の特徴部分をブックマーク情報として管理し、その特徴画像をユーザーに示すものではない。
【００３２】
このように、従来のブックマーク管理方法では、時間軸をもつ動画像の任意の時間間隔をブックマークとして登録し、その時間間隔内のフレーム画像の特徴部分を示すことはできなかった。たとえば、ＭＰＥＧ４などにより圧縮して記録された動画像データのように、オブジェクトごとに伝送されるデータについて、特徴部分のオブジェクトを示すこともできなかった。
【００３３】
本発明は、上記従来の問題点に鑑みなされたものであり、その目的は、記録媒体の動画データについて、ブックマーク画像とともに該ブックマーク画像における特徴画像を管理するというように、記録媒体に記録されたデータをより詳細に管理することを可能とするデータ管理方法、データ表示方法、記録再生装置、および記録媒体を提供することにある。
【００３４】
【課題を解決するための手段】
本発明のデータ管理方法は、上記課題を解決するために、記録媒体に記録された第１部分データの記録位置に関する第１管理情報を、該記録媒体に記録するための方法であって、上記第１部分データに含まれる第２部分データに関する第２管理情報を、上記記録媒体に記録することを特徴としている。
【００３５】
上記構成によれば、記録媒体に記録された第１部分データについて、第１管理情報により、その記録位置を管理することができる。さらに、第１部分データ内における第２部分データについても、第２管理情報に基づき管理することが可能となる。
【００３６】
たとえば、記録媒体に動画データを記録する場合において、上記構成のデータ管理方法によれば、動画データのブックマーク画像に関するデータを、第１部分データとして第１管理情報により管理するとともに、ブックマーク画像における特徴画像に関するデータを、第２部分データとして第２管理情報により管理することができる。
【００３７】
このように、第１管理情報および第２管理情報に基づき、記録媒体に記録されたデータを２段階に細分化したデータの管理が可能となる。したがって、記録媒体に記録されたデータをより詳細に管理することが可能となる。
【００３８】
また、本発明のデータ管理方法は、上記課題を解決するために、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像に対する、上記第２部分データに基づき表示される画像の座標を示す座標情報であることを特徴としている。
【００３９】
上記構成によれば、第２部分データに基づき表示される画像の位置を、座標情報により特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像の位置をユーザーに知らせることが可能となる。
【００４０】
また、本発明のデータ管理方法は、上記課題を解決するために、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像に、上記第２部分データに基づき表示される画像を含むような矩形を設定するための矩形情報であることを特徴としている。
【００４１】
上記構成によれば、上記矩形により、第２部分データに基づき表示される画像を特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となる。
【００４２】
また、本発明のデータ管理方法は、上記課題を解決するために、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像に、上記第２部分データに基づき表示される画像を含むような円を設定するための円情報であることを特徴としている。
【００４３】
上記構成によれば、上記円により、第２部分データに基づき表示される画像を特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となる。
【００４４】
また、本発明のデータ管理方法は、上記課題を解決するために、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像に、上記第２部分データに基づき表示される画像を含むような多角形を設定するための任意形状情報であることを特徴としている。
【００４５】
上記構成によれば、上記多角形により、第２部分データに基づき表示される画像を特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となる。
【００４６】
また、本発明のデータ管理方法は、上記課題を解決するために、上記構成のデータ管理方法において、上記記録媒体に記録されているデータが、動画をオブジェクト単位にて管理可能なデータであるとともに、上記第２管理情報は、上記第２部分データに基づき表示される画像を構成するオブジェクトを識別するためのオブジェクト情報であることを特徴としている。
【００４７】
上記構成によれば、上記オブジェクト情報により、第２部分データに基づき表示される画像を構成するオブジェクトを特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となる。
【００４８】
また、本発明のデータ管理方法は、上記課題を解決するために、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像から、上記第２部分データに基づき表示される画像を抽出するための処理関数を示す関数情報であることを特徴としている。
【００４９】
上記構成によれば、上記関数情報により、第２部分データに基づき表示される画像を抽出するための処理関数を特定することが可能となる。したがって、上記処理関数を実行し、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となる。
【００５０】
また、本発明のデータ管理方法は、上記課題を解決するために、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像において、上記第２部分データに基づき表示される画像が移動する状態を示す動き情報であることを特徴としている。
【００５１】
上記構成によれば、上記動き情報により、第２部分データに基づき表示される画像の移動状態を特定することが可能となる。したがって、第２部分データに表示される画像が第１部分データに基づき表示される画像内を移動している場合であっても、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となる。
【００５２】
また、本発明のデータ管理方法は、上記課題を解決するために、上記構成のデータ管理方法において、上記動き情報が、上記第１部分データに基づき表示される画像に対する、上記第２部分データに基づき表示される画像の座標を、時系列で示す情報であることを特徴としている。
【００５３】
上記構成によれば、上記動き情報により、第２部分データに基づき表示される画像の座標を時系列で特定することができる。したがって、第２部分データに表示される画像が第１部分データに基づき表示される画像内を移動している場合であっても、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみをより容易に抽出することが可能となる。
【００５４】
また、本発明の記録再生装置は、上記課題を解決するために、記録媒体に記録された第１部分データの記録位置を指定する位置情報指定手段と、上記第１部分データに含まれる第２部分データを指定する第２部分データ指定手段と、上記第１部分データの上記記録媒体における記録位置に関する第１管理情報と、上記第２部分データに関する上記第２管理情報とを参照し、第２部分データを抽出する部分データ処理手段と、上記第２部分データの再生画像を表示する表示手段とを備えていることを特徴としている。
【００５５】
上記構成によれば、ユーザーは、位置情報指定手段と第２部分データ指定手段とにより、第１部分データおよび第２部分データを指定することができる。さらに、第１部分データの第１管理情報と、第２部分データの第２管理情報とから、部分データ処理手段により第２部分データが抽出され、さらに、表示手段により第２部分データの再生画像が表示される。
【００５６】
たとえば、記録媒体に記録された動画データを再生してディスプレイ等に表示する場合において、上記構成の記録再生装置によれば、動画データのブックマーク画像に関するデータを、第１部分データとして第１管理情報により表示するとともに、ブックマーク画像における特徴画像に関するデータを、第２部分データとして第２管理情報により表示することができる。
【００５７】
このように、第１管理情報および第２管理情報に基づき、記録媒体に記録されたデータを２段階に細分化したデータの表示が可能となる。したがって、記録媒体に記録されたデータをより詳細にユーザーに提示することが可能となる。
【００５８】
また、本発明の記録再生装置は、上記課題を解決するために、上記構成の記録再生装置において、上記部分データ処理手段が、上記第１部分データに基づき表示される画像から、上記第２部分データに基づき表示される画像を抽出するための複数の処理関数のうち、少なくとも１つの処理関数を実行することを特徴としている。
【００５９】
上記構成によれば、部分データ処理手段にて処理関数が実行されるので、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となる。
【００６０】
【発明の実施の形態】
本発明の実施の一形態について図面に基づいて説明すれば、以下の通りである。
【００６１】
本実施の形態のデータ管理方法を用いて記録媒体に記録されているデータは、図１に示すように、論理管理情報７００とデータ領域７０１とにより構成されている。
【００６２】
論理管理情報７００は、ＦＡＴやＵＤＦなどのファイルシステムにより管理されている管理情報であり、データ領域７０１に記録されているファイルを参照するための情報が格納されている。データ領域７０１は、論理管理情報７００により管理されているファイルが記録される領域である。
【００６３】
データ領域７０１には、ファイル＃１（７０２）、ファイル＃２（７０３）、およびファイル＃ｎ（７０４）までの複数のファイルが記録されているとともに、空き領域７０５が設けられている。
【００６４】
ファイル＃１（７０２）には、データ＃１管理情報７０６と、動画、静止画、音声、テキストなどのデータ＃１（７０７）とが記録されている。ファイル＃２（７０３）には、データ＃２管理情報７０８と、動画、静止画、音声、テキストなどのデータ＃２（７０９）とが記録されている。ファイル＃ｎ（７０４）には、データ＃ｎ管理情報７１０と、動画、静止画、音声、テキストなどのデータ＃ｎ（７１１）とが記録されている。なお、空き領域７０５は、何も記録されていない領域である。
【００６５】
このように、動画、静止画、音声などのデータは、データを再生するための管理情報であるデータ管理情報とともにデータファイルに記録されている。
【００６６】
また、データ＃２管理情報７０８には、データ管理情報に記録される管理情報を参照するためのヘッダ情報７１２、ブックマーク画像情報のデータの種類やデータ作成日時などが格納されている属性情報７１３、動画を再生するための動画管理情報７１４、およびブックマークを管理するためのブックマーク管理情報（第１管理情報）７１５が格納されている。
【００６７】
また、ブックマーク管理情報７１５には、ブックマーク＃１位置情報７１６と、ブックマーク＃１特徴情報（第２管理情報）７３０と、ブックマーク＃２位置情報７１７と、ブックマーク＃２特徴情報（第２管理情報）７３１と、ブックマーク＃３位置情報７１８と、ブックマーク＃３特徴情報（第２管理情報）７３２とが格納されている。
【００６８】
また、データ＃２（７０９）には、動画データ７１９と、ブックマークデータ（第１部分データ）７２０とが格納されている。
【００６９】
ブックマーク＃１位置情報７１６には、動画データ７１９内のブックマーク＃１位置７２７に相当する位置情報が格納されている。この位置情報は、動画データ７１９の先頭からのオフセットバイト数、または動画データ７１９を原点とした再生時間として格納されている。
【００７０】
また、ブックマーク＃２位置情報７１７には、動画データ７１９内のブックマーク＃２位置７２８に相当する位置情報が格納されている。この位置情報は、動画データ７１９の先頭からのオフセットバイト数、または動画データ７１９を原点とした再生時間として格納されている。
【００７１】
さらに、ブックマーク＃３位置情報７１８には、動画データ７１９内のブックマーク＃３位置７２９に相当する位置情報が格納されている。この位置情報は、動画データ７１９の先頭からのオフセットバイト数、または動画データ７１９を原点とした再生時間として格納されている。
【００７２】
また、ブックマーク＃１特徴情報７３０は、ブックマーク＃１画像７２１における特徴画像を特定するための情報である。同様に、ブックマーク＃２特徴情報７３１は、ブックマーク＃２画像７２３における特徴画像を特定するための情報であり、ブックマーク＃３特徴情報７３２は、ブックマーク＃３画像７２５における特徴画像を特定するための情報である。ブックマーク特徴情報の具体的な構成については後述する。
【００７３】
ブックマークデータ７２０には、ブックマーク＃１画像７２１と、ブックマーク＃１タイトル７２２と、ブックマーク＃２画像７２３と、ブックマーク＃２タイトル７２４と、ブックマーク＃３画像７２５と、ブックマーク＃３タイトル７２６とが格納されている。
【００７４】
ブックマーク＃１画像７２１には、ブックマーク＃１位置情報７１６に格納されている位置情報に相当する、動画データ７１９における１フレーム分の画像データが格納されている。
【００７５】
ブックマーク＃２画像７２３には、ブックマーク＃２位置情報７１７に格納されている位置情報に相当する、動画データ７１９の１フレーム分の画像データが格納されている。
【００７６】
ブックマーク＃３画像７２５には、ブックマーク＃３位置情報７１８に格納されている位置情報に相当する、動画データ７１９における１フレーム分の画像データが格納されている。
【００７７】
このように、動画データ７１９に登録されたブックマーク７２７〜７２９のそれぞれに関する、ブックマークデータ７２０内の画像データやタイトルデータは、ブックマーク管理情報７１５内のブックマーク位置情報７１６〜７１８により管理されている。
【００７８】
上記したデータ構成における、動画データと、ブックマークデータと、特徴情報（第２管理情報）との関係について、図２ないし図８を用いて説明する。
【００７９】
図２は、ブックマーク画像における特徴画像を特定するための特徴情報が座標情報である場合の、動画データと、ブックマークデータと、特徴情報との時間関係を示す図である。
【００８０】
動画ファイルには、図２に示すように、撮影した動画データの記録を管理するＶｉｄｅｏトラック７７０と、機器の内部で再生時間を管理する時間（Ｔｉｍｅ）管理７７１と、指定したブックマーク位置に対応する時間に関連付けてタイトルなどのテキストデータを管理するＴｅｘｔトラック７７２と、指定したブックマーク位置に対応する時間に関連付けてブックマーク画像などの静止画データを管理するＴｈｕｍｂｎａｉｌトラック７７３との管理情報が記録されている。
【００８１】
本実施の形態では、動画データのＴｉｍｅ＃１にＢｏｏｋｍａｒｋ＃１を、Ｔｉｍｅ＃２にＢｏｏｋｍａｒｋ＃２を、Ｔｉｍｅ＃３にＢｏｏｋｍａｒｋ＃３を、Ｔｉｍｅ＃４にＢｏｏｋｍａｒｋ＃４をブックマークとして登録している。さらに、タイトルデータとしてＢｏｏｋｍａｒｋ＃１にはＴｉｔｌｅ＃１を、Ｂｏｏｋｍａｒｋ＃２にはＴｉｔｌｅ＃２を、Ｂｏｏｋｍａｒｋ＃３にはＴｉｔｌｅ＃３を、Ｂｏｏｋｍａｒｋ＃４にはＴｉｔｌｅ＃４というように、Ｔｅｘｔトラックにより各ブックマークにタイトルを関連付けて管理している。
【００８２】
また、ブックマーク画像は、Ｔｈｕｍｂｎａｉｌトラック７７３により管理されている。つまり、Ｔｈｕｍｂｎａｉｌトラック７７３には、動画データ先頭からＴｉｍｅ＃１の位置に記録された静止画データがＴｈｕｍｂｎａｉｌ＃１、動画データ先頭からＴｉｍｅ＃２の位置に記録された静止画データがＴｈｕｍｂｎａｉｌ＃２、動画データ先頭からＴｉｍｅ＃３の位置に記録された静止画データがＴｈｕｍｂｎａｉｌ＃３、動画データ先頭からＴｉｍｅ＃４の位置に記録された静止画データがＴｈｕｍｂｎａｉｌ＃４というように、それぞれのブックマークに静止画データが関連付けられて格納されている。
【００８３】
このブックマーク画像は、動画データのフレーム画像がたとえば７０４×４８０ピクセルのビットマップ画像であった場合に、１６０×１２０ピクセルに縮小された画像、ＪＰＥＧ（Joint Photographic Experts Group）画像やＴＩＦＦ（Tag Image File Format）画像などの画像に圧縮された画像、または動画データと同じデータサイズの画像でもよい。
【００８４】
また、図２に示すように、ブックマーク登録した画像を表示するブックマーク画面７７５の中で、特徴画像７７６を特定したい場合には、特徴情報７７４を動画ファイルに格納する。本実施の形態では、Ｂｏｏｋｍａｒｋ＃４に、ブックマーク画像内における特徴画像７７６の位置を示す座標情報７７９が記録されている。
【００８５】
また、ブックマーク管理情報７７７は、動画データ内における複数のブックマークについて、Ｂｏｏｋｍａｒｋ情報としてのＴｉｍｅ、Ｔｅｘｔトラック、Ｔｈｕｍｂｎａｉｌトラック、および特徴情報を管理する情報である。
【００８６】
ブックマーク管理情報７７７には、Ｂｏｏｋｍａｒｋの数を管理する情報と、Ｂｏｏｋｍａｒｋ情報＃１からＢｏｏｋｍａｒｋ情報＃４までの４つのＢｏｏｋｍａｒｋ情報とが格納されている。
【００８７】
たとえば、Ｂｏｏｋｍａｒｋ情報＃１（７７８）は、ブックマークを登録した日時を示すブックマーク登録日時と、動画データを再生したときの動画データの先頭からブックマーク位置までの時間を示すブックマーク時間と、ブックマーク画像における特徴的な画像である特徴画像のデータ（特徴画像データ、第２部分データ）を特定するための座標情報７７９と、タイトルデータを参照するためにタイトルトラック内の管理番号などを示すＴｉｔｌｅ参照情報と、サムネイルデータを参照するためにサムネイルトラック内の管理番号などを示すＴｈｕｍｂｎａｉｌ参照情報とを格納している。
【００８８】
なお、サムネイルトラックとは、サムネイルを記録する管理情報のことである。つまり、たとえばQuickTimeにおいては、MPEGストリームやJPEGデータを管理するVideoトラックが、サムネイルトラックに該当する。Videoトラック以外のサムネイルトラックとしては、音声を管理するAudioトラックや、文字を管理するテキストトラックなどを挙げることができる。
【００８９】
本実施形態では、ブックマーク指定した位置のサムネイルデータを記録した場合、Videoトラックの管理情報に、サムネイルの画像サイズやコーデック情報、サムネイルデータの位置などの管理情報を記録する。また、サムネイルトラックはファイルの管理情報領域（moov）に記録され、サムネイルデータはファイルのデータ領域（mdat）に記録される。
【００９０】
また、Ｂｏｏｋｍａｒｋ情報＃２〜＃４にも、Ｂｏｏｋｍａｒｋ情報＃１と同様に、ブックマーク登録日時と、ブックマーク時間と、座標情報と、Ｔｉｔｌｅ参照情報と、Ｔｈｕｍｂｎａｉｌ参照情報とが格納されている。
【００９１】
座標情報７７９は、ブックマーク画面７７５における左上の角部を原点（０，０）とした場合における、特徴画像７７６の位置の、水平方向のピクセル数であるＰｏｓｉｔｉｏｎｘと、垂直方向のピクセル数であるＰｏｓｉｔｉｏｎｙとを格納している。
【００９２】
さらに、動画データのＴｉｍｅ＃４に登録したＢｏｏｋｍａｒｋ＃４に対応するブックマーク画像を表示する場合には、そのブックマーク画像における特徴画像７７６の近辺に、Ｔｅｘｔトラック７７２により管理されているＴｉｔｌｅ＃４を参照し、タイトルのビットマップデータ７９０をブックマーク画像に合成して表示する。
【００９３】
上記構成により、ブックマーク画像を選択した場合には、特徴情報７７４により特徴画像７７６の位置を特定するとともに、その位置をユーザーに知らせることができる。さらに、Ｔｅｘｔトラック７７２を参照して、登録されている特徴画像をタイトルデータとともに示してもよい。
【００９４】
図３は、ブックマーク画像における特徴画像を特定するための特徴情報が矩形情報である場合の、動画データと、ブックマークデータと、特徴情報との時間関係を示す図である。なお、動画データとブックマークデータの関係、ブックマーク管理情報７７７、Ｂｏｏｋｍａｒｋ情報７７８は、図２に示した構成と同じであるため、説明を省略する。
【００９５】
図３に示す構成においては、Ｂｏｏｋｍａｒｋ情報７７８に矩形情報７８０が格納されている。つまり、図３に示す構成では、特徴画像７７６は、矩形情報７８０により決定される矩形に含まれることで特定することができる。
【００９６】
特徴画像７７６を含むような矩形を決定すべく、矩形情報７８０は、ブックマーク画面７７５の左上を原点（０，０）とした場合、上記矩形における左上座標の水平方向のピクセル数ｘｓ、垂直方向のピクセル数ｙｓと、上記矩形における右下座標の水平方向のピクセル数ｘe、垂直方向のピクセル数ｙeとを管理している。
【００９７】
図４は、ブックマーク画像における特徴画像を特定するための特徴情報が円情報である場合の、動画データと、ブックマークデータと、特徴情報との時間関係を示す図である。
【００９８】
図４に示す構成においては、Ｂｏｏｋｍａｒｋ情報７７８に円情報７８１が格納されている。つまり、図４に示す構成では、特徴画像７７６は、円情報７８１により決定される円に含まれることで特定することができる。
【００９９】
すなわち、円情報７８１は、表示画面の左上を原点（０，０）とした場合、特徴画像７７６を含むように範囲指定される円における中心座標の、水平方向のピクセル数をＰｏｓｉｔｉｏｎｘ、垂直方向のピクセル数をＰｏｓｉｔｉｏｎｙとし、上記円の半径のピクセル数をＲ sizeとして管理している。
【０１００】
図５は、ブックマーク画像における特徴画像を特定するための特徴情報が任意形状情報である場合の、動画データと、ブックマークデータと、特徴情報との時間関係を示す図である。なお、動画データとブックマークデータの関係、ブックマーク管理情報７７７の基本的は、図２に示した構成と同じであるため、説明を省略する。
【０１０１】
図５に示す構成においては、Ｂｏｏｋｍａｒｋ情報７７８に任意形状情報７８２が格納されている。つまり、図５に示す構成では、特徴画像７７６は、任意形状情報７８２により決定される多角形に含まれることで特定することができる。
【０１０２】
上記多角形は、任意形状情報７８２にその位置が記録されているＰｏｓｉｔｉｏｎ＃１〜Ｐｏｓｉｔｉｏｎ＃ｎまでのｎ個の座標を結ぶように決定される。
【０１０３】
より具体的には、任意形状情報７８２は、表示画面の左上を原点（０，０）とした場合における、Ｐｏｓｉｔｉｏｎ＃１〜Ｐｏｓｉｔｉｏｎ＃ｎまでのｎ個の座標を、それぞれ水平方向のピクセル数Ｐｏｓｉｔｉｏｎｘ、および垂直方向のピクセル数Ｐｏｓｉｔｉｏｎｙにより管理している。
【０１０４】
図６は、ブックマーク画像における特徴画像を特定するための特徴情報がオブジェクト情報である場合の、動画データと、ブックマークデータと、特徴情報との時間関係を示す図である。なお、動画データとブックマークデータの関係、ブックマーク管理情報７７７、Ｂｏｏｋｍａｒｋ情報７７８は、図２に示した構成と同じであるため、説明を省略する。
【０１０５】
図６に示す構成では、動画データとして、動画をオブジェクト単位にて管理可能なデータ、たとえばＭＰＥＧ４データを採用している。また、Ｂｏｏｋｍａｒｋ情報７７８は、オブジェクト情報７８３を格納している。さらに、オブジェクト情報７８３は、特徴画像７７６を構成するオブジェクトの数を示す情報を管理しているとともに、オブジェクトの種類を示すオブジェクトＩＤを、特徴画像７７６を構成するオブジェクトの数だけ管理している。
【０１０６】
したがって、図６に示す構成では、特徴画像７７６を、オブジェクト情報７８３内に含まれるオブジェクトＩＤによりオブジェクト単位で指定することができる。なお、オブジェクト情報７８３は、少なくとも１つのオブジェクトＩＤを格納する構成であればよい。
【０１０７】
図７は、ブックマーク画像における特徴画像を特定するための特徴情報が、特徴画像を抽出する関数情報である場合の、動画データと、ブックマークデータと、特徴情報との時間関係を示す図である。なお、動画データとブックマークデータの関係、ブックマーク管理情報７７７の基本的な構成は、図２に示した構成と同じであるため、説明を省略する。
【０１０８】
Ｂｏｏｋｍａｒｋ情報＃１（７７８’）は、ブックマークを登録した日時を示すブックマーク登録日時と、動画データを再生したときの動画データの先頭からブックマーク位置までの時間を示すブックマーク時間と、ブックマーク画像から特徴画像を抽出する処理関数を特定するための関数情報７８４と、タイトルデータを参照するためにタイトルトラック内の管理番号などを示すＴｉｔｌｅ参照情報と、サムネイルデータを参照するためにサムネイルトラック内の管理番号などを示すＴｈｕｍｂｎａｉｌ参照情報と、特徴画像を抽出する関数を処理する方法を示す関数処理フラグとが格納されている。
【０１０９】
関数情報７８４は、特徴画像を抽出する処理関数の数を示す情報を格納しているとともに、処理関数の種類を示す関数ＩＤを、特徴画像の抽出に必要な処理関数の数だけ管理している。なお、本実施の形態では、図７に示すように、特徴画像７７６を抽出するための処理関数として、Ｆｕｎｃｔｉｏｎ＃１（７８５）・Ｆｕｎｃｔｉｏｎ＃２（７８６）・Ｆｕｎｃｔｉｏｎ＃３（７８７）の３つの処理関数が設定されている。
【０１１０】
特徴画像を抽出する処理関数は、たとえば、指定した座標の画像の輪郭を抽出する画像輪郭抽出関数や、画像の色情報に基づき画像を抽出する色抽出関数や、顔画像認識関数など、画像を抽出する関数であればなんでもよい。
【０１１１】
本実施の形態では、上記の処理関数にＩＤ番号（ＦｕｎｃｔｉｏｎＩＤ＃１〜＃３）を割り付けておき、そのＩＤ番号を関数情報７８４に格納する。さらに、格納したＩＤ番号にそれぞれ対応する処理関数として、Ｆｕｎｃｔｉｏｎ＃１（７８５）・Ｆｕｎｃｔｉｏｎ＃２（７８６）・Ｆｕｎｃｔｉｏｎ＃３（７８７）を実行し、特徴画像７７６を抽出する構成とされている。
【０１１２】
また、図２ないし図６を用いて説明したように、特徴情報としての座標情報、矩形情報、円情報、任意形状情報、あるいはオブジェクトＩＤ情報を、特徴画像を抽出する処理関数として定義してもよい。さらに、上記処理関数のＩＤ番号は、１つの関数情報に１つのみ格納する構成であってもよいし、または、１つの関数情報に複数のＩＤ番号を格納し、複数の処理関数を実行することで１つの特徴画像を抽出する構成でもよい。また、抽出した画像をブックマーク画像として格納するとともに、Ｔｈｕｍｂｎａｉｌトラックや他のトラックにより該ブックマーク画像を管理する構成としてもよい。
【０１１３】
図８は、ブックマーク登録した位置から任意の時間間隔にて記録された複数の特徴情報を管理する場合における、動画データと、ブックマークデータと、特徴情報との関係を示す図である。
【０１１４】
動画ファイルには、図８に示すように、撮影した動画データの記録を管理するＶｉｄｅｏトラック７７０と、機器の内部で再生時間を管理する時間管理７７１と、指定したブックマーク位置に対応する時間に関連付けてタイトルなどのテキストデータを管理するＴｅｘｔトラック７７２と、指定したブックマーク位置に対応する時間に関連付けてブックマーク画像などの静止画データを管理するＴｈｕｍｂｎａｉｌトラック７７３との管理情報が記録されている。
【０１１５】
本実施の形態では、動画データのＴｉｍｅ＃１に、Ｂｏｏｋｍａｒｋ＃１をブックマークとして登録している。このブックマークには、タイトルデータであるＴｉｔｌｅ＃１がＴｅｘｔトラック７７２により管理されるとともに、静止画データであるＴｈｕｍｂｎａｉｌ＃１が、ブックマーク画像としてＴｈｕｍｂｎａｉｌトラック７７３により管理されている。なお、Ｔｈｕｍｂｎａｉｌ＃１は、動画データ先頭からＴｉｍｅ＃１に対応する時間に記録されている動画データを静止画データとして変換したものである。
【０１１６】
このブックマーク画像は、動画データのフレーム画像がたとえば７０４×４８０ピクセルのビットマップ画像であった場合に、１６０×１２０ピクセルに縮小された画像、ＪＰＥＧ画像やＴＩＦＦ画像などの画像に圧縮された画像、または動画データと同じデータサイズの画像でもよい。
【０１１７】
さらに、ブックマーク登録したＢｏｏｋｍａｒｋ＃１の時間であるＴｉｍｅ＃１から、ＯｆｆｓｅｔＴｉｍｅ＃１だけ経過した時間の動画データに対応したフレーム画像内の特徴画像７７６ａ、ブックマーク登録したＢｏｏｋｍａｒｋ＃１の時間であるＴｉｍｅ＃１からＯｆｆｓｅｔＴｉｍｅ＃２だけ経過した時間の動画データに対応したフレーム画像内の特徴画像７７６ｂ、ブックマーク登録したＢｏｏｋｍａｒｋ＃１の時間であるＴｉｍｅ＃１からＯｆｆｓｅｔＴｉｍｅ＃３だけ経過した時間の動画データに対応したフレーム画像内の特徴画像７７６ｃの各座標情報を格納する場合における管理情報の構成を以下に説明する。なお、ブックマーク管理情報の構成は、図２を用いて説明した構成と同じであるため説明しない。
【０１１８】
図８に示す構成においては、Ｂｏｏｋｍａｒｋ情報（図示せず）に、第２特徴情報７８８が含まれている。第２特徴情報７８８には、動き特徴情報の数と、複数の動き特徴情報とが格納されている。本実施の形態では、動き特徴情報＃１（７８９ａ）、動き特徴情報＃２（７８９ｂ）、動き特徴情報＃３（７８９ｃ）として、３つの動き特徴情報が格納されている。以下、各動き特徴情報について具体的に説明する。
【０１１９】
動き特徴情報＃１（７８９ａ）は、ＯｆｆｓｅｔＴｉｍｅ＃１と、Ｐｏｓｉｔｉｏｎｘ１と、Ｐｏｓｉｔｉｏｎｙ１とを格納している。なお、Ｐｏｓｉｔｉｏｎｘ１およびＰｏｓｉｔｉｏｎｙ１は、特徴画像７７６ａの位置を表す座標情報である。つまり、表示画面の左上角を原点（０，０）とした場合における、特徴画像７７６ａがある位置の水平方向のピクセル数がＰｏｓｉｔｉｏｎｘ１、垂直方向のピクセル数がＰｏｓｉｔｉｏｎｙ１である。
【０１２０】
動き特徴情報＃２（７８９ｂ）は、ＯｆｆｓｅｔＴｉｍｅ＃２と、Ｐｏｓｉｔｉｏｎｘ２と、Ｐｏｓｉｔｉｏｎｙ２とを格納している。なお、Ｐｏｓｉｔｉｏｎｘ２およびＰｏｓｉｔｉｏｎｙ２は、特徴画像７７６ｂの位置を表す座標情報である。つまり、表示画面の左上角を原点（０，０）とした場合における、特徴画像７７６ｂがある位置の水平方向のピクセル数がＰｏｓｉｔｉｏｎｘ２、垂直方向のピクセル数がＰｏｓｉｔｉｏｎｙ２である。
【０１２１】
動き特徴情報＃３（７８９ｃ）は、ＯｆｆｓｅｔＴｉｍｅ＃３と、Ｐｏｓｉｔｉｏｎｘ３と、Ｐｏｓｉｔｉｏｎｙ３とを格納している。なお、Ｐｏｓｉｔｉｏｎｘ３およびＰｏｓｉｔｉｏｎｙ３は、特徴画像７７６ｃの位置を表す座標情報である。つまり、表示画面の左上角を原点（０，０）とした場合における、特徴画像７７６ｃがある位置の水平方向のピクセル数がＰｏｓｉｔｉｏｎｘ３、垂直方向のピクセル数がＰｏｓｉｔｉｏｎｙ３である。
【０１２２】
ここでは、動き特徴情報内のデータとして座標情報を管理する管理方法について説明したが、動き特徴情報内のデータとして格納する情報は、これまで図２から図７を用いて説明した矩形情報、円情報、任意形状情報、オブジェクト情報、または関数情報であってもよい。
【０１２３】
また、数フレーム間隔で設定されている動き特徴情報に補間処理を施し、動き特徴情報のないフレームの特徴画像の動き特徴情報を算出することにより、フレームごとに特徴画像に関する座標情報などを予測して、よりスムーズに特徴画像を示すことが可能となる。
【０１２４】
また、動き特徴情報に格納されるＯｆｆｓｅｔＴｉｍｅは、ユーザーにより設定される。しかしながら、ブックマーク登録時に動き情報を登録する時間範囲を指定するとともに、あらかじめユーザーまたは機器が設定しておいた時間間隔ごとに動き特徴情報を登録してもよい。この場合、登録した時間に対応する動画データのフレームを表示し、特徴画像の座標情報を指定するようにしてもよい。特徴画像を抽出するための情報としてオブジェクト情報や関数情報を動き特徴情報に格納するのであれば、上記の時間間隔と同様に、あらかじめ設定しておいてもよい。
【０１２５】
これにより、特徴画像が動いている場合であっても、特徴画像に対応した動き特徴情報を管理することが可能となる。したがって、動画データを再生した場合に動き特徴情報を用いることで、特徴画像の動きに連動させて、カーソルの表示や、タイトルの表示が可能となる。
【０１２６】
次に、図９を用いて、本発明の実施形態に係る記録再生装置の構成について説明する。本発明の実施形態に係る記録再生装置においては、図９に示すように、オーディオ信号がオーディオ入力部７５０に入力される一方で、ビデオ信号がビデオ入力部７５１に入力される。各信号は、アナログまたはデジタル信号であり、アナログ信号の場合にはデジタル信号に変換される。
【０１２７】
そして、オーディオ入力部７５０およびビデオ入力部７５１からの信号は、符号化／復号処理部７５２により、ＭＰＥＧ２などの符号化されたビデオおよびオーディオデータに変換される。なお、圧縮する形式は、ＭＰＥＧ２のほかにＭＰＥＧ１やＭＰＥＧ４であってもよいし、ビデオデータのみの符号化を行う場合には、ＪＰＥＧ、ＪＰＥＧ２０００であってもよい。
【０１２８】
さらに、符号化／復号処理部７５２から出力される信号は、誤り訂正処理部７５３により誤り訂正信号が付加されるとともに、変調／復調部７５４により変調されて、記録媒体７５５に対してビデオおよびオーディオデータとして記録される。
【０１２９】
また、記録媒体がディスクメディアの場合には、制御マイコン７５７によりサーボ処理部７５６を制御して、ビデオおよびオーディオデータの記録を行う。なお、制御マイコン７５７は、システムマイコン７５８により制御されている。
【０１３０】
一方、ユーザーからの指示により、記録されたデータを再生または表示する場合には、ユーザーからの指示が入力部（位置情報指定手段、第２部分データ指定手段）７６４から入力され、システムマイコン７５８によりユーザーの指示が処理される。
【０１３１】
システムマイコン７５８は、ユーザーからの指示がデータ再生であれば、制御マイコン７５７にデータ再生の指示を行う。制御マイコン７５７は、記録媒体７５５からデータの読み出しを行うように、サーボ処理部７５６を制御する。
【０１３２】
読み出されたデータは、変調／復調部７５４を経て復調され、誤り訂正処理部７５３により誤り訂正が行われ、符号化／復号処理部７５２により復号される。復号されたデータのうちのオーディオデータは、オーディオ出力部７６２によりオーディオ信号に変換され出力される。
【０１３３】
また、復号されたデータのうちのビデオデータは、テキストやグラフィック、ＯＳＤとの合成を行うため、ビデオ合成部（部分データ処理手段）７６１によりビデオデータとビデオデータ以外のデータとの合成処理あるいは切り換え処理が施され、ビデオ出力部７６３によりビデオ信号として出力される。
【０１３４】
また、メモリ７５９に格納されたテキストデータやグラフィックデータを、ＯＳＤ処理部７６０によりビデオ表示用データへ変換した後、復号されたビデオデータと合成するとともに、ビデオ出力部７６３からビデオ信号として出力することにより、図示しないディスプレイ等の表示手段において、合成画面を表示することができる。
【０１３５】
さらに、ビデオ合成部７６１は、記録したビデオデータとテキストデータやグラフィックデータとを同時に表示する場合に、ビデオデータとその他のデータとを合成するものであるが、いずれか一方の画像を出力することもできる。すなわち、ユーザーの指示に基づき、システムマイコン７５８によりビデオ合成部７６１に対して出力画像の切り換え制御を行うことにより、指定された画像を出力することが可能となる。
【０１３６】
また、本実施の形態では、ブックマークを指定した際に記録するタイトル、サムネイルなどのブックマークデータを、ブックマークを指定する動画ファイル内に格納する構成について説明した。しかしながら、必ずしもこの構成に限定されるものではなく、ブックマークデータを動画ファイル以外のファイルに記録し、ブックマークデータを記録したファイルのファイル名をブックマーク管理情報に記録し参照する構成としてもよい。ただし、その場合、ブックマーク指定している動画ファイルを、ＰＣなどの記録媒体以外のデバイスに記録する場合には、ブックマークデータもデバイスにコピーしなければならない。
【０１３７】
また、ブックマークを登録する動画ファイルは、ＱｕｉｃｋＴｉｍｅやＡＳＦ（Advanced Streaming Format）などの汎用ファイルフォーマットであってもよい。なお、ＱｕｉｃｋＴｉｍｅを動画ファイルのフォーマットとする場合、ブックマーク情報をＴｅｘｔトラックやＶｉｄｅｏトラックとして管理する構成であってもよい。
【０１３８】
また、上記構成による記録媒体は、光ディスク、メモリ、ハードディスクなどの書き込み可能な記録媒体、ＣＤやＤＶＤ−Ｖｉｄｅｏなどのような読み出し専用記録媒体、ＣＤ−ＲやＤＶＤ−Ｒなどのような一回のみ書き込み可能な記録媒体のいずれであってもよい。
【０１３９】
次に、本実施の形態のデータ管理方法、データ表示方法における処理手順を説明する。図１０および図１１は、本実施形態に係るブックマーク管理方法、ブックマーク表示方法における処理手順を示すフローチャートである。
【０１４０】
先ず、動画ファイルにブックマークを付加した際におけるデータ管理情報にブックマーク管理情報を記録する処理手順を、図１０を用いて説明する。
【０１４１】
ユーザーがインデックス画面からブックマークを指定したい動画ファイルを選択すると、動画ファイルが再生される。そして、ブックマークを登録したい画像で一時停止し、ユーザーがブックマーク登録を指示する。
【０１４２】
この時点で、図１０に示すように、ユーザーにより、ブックマークを登録する動画ファイルとブックマーク位置とが指定される（Ｓ４１）。なお、以下の説明ではステップを単にＳと記載する。次に、指定された動画ファイルから、その動画ファイルの管理情報が取得される（Ｓ４２）。
【０１４３】
さらに、指定されたブックマーク位置に基づいて、ブックマークの再生開始からのオフセット時間、または再生する動画データの先頭からのオフセットバイト数を、ブックマーク時間として取得する（Ｓ４３）。その後、取得したブックマーク時間に対応した動画ファイルのフレーム画像を取得する（Ｓ４４）。
【０１４４】
続いて、ブックマーク画像の生成が行われる（Ｓ４５）。このステップでは、動画ファイルのフレーム画像がたとえば７０４×４８０ピクセルのビットマップ画像であった場合に、該ビットマップ画像を１６０×１２０ピクセルの画像とする縮小変換、およびビットマップ画像からＪＰＥＧ画像やＴＩＦＦ画像などの圧縮データへの変換を行っている。なお、ブックマーク画像は縮小した画像に変換しないで、動画ファイルと同じ画像サイズを記録してもよい。
【０１４５】
続いて、動画ファイルにブックマーク画像を付加するために、動画ファイルを読み出し、動画ファイルの管理情報を取得し、動画ファイルの管理情報からトラック数を取得する（Ｓ４６）。そして、後述するＳ４８からＳ５０までのステップにより構成されるループ１を、トラック数と同じ回数だけ実行する（Ｓ４７）。
【０１４６】
ループ１では、１つのトラックの管理情報を取得し（Ｓ４８）、Ｓ４８にて管理情報を取得したトラックが、サムネイルトラックか否かを判別する（Ｓ４９）。ここで、Ｓ４９にてサムネイルトラックであると判断された場合には、ブックマーク画像をサムネイルとして登録する（Ｓ５０）。一方、Ｓ４９にてサムネイルトラックでないと判断された場合には、Ｓ４７に戻り、再びループ１が実行される。
【０１４７】
ループ１の終了（Ｓ５１）後、サムネイルトラックが存在しているか否かを判別し（Ｓ５２）、サムネイルトラックが存在しない場合には、サムネイルトラックを新規に生成する（Ｓ５３）。サムネイルトラックが存在する状態になった段階で、ブックマーク画像をサムネイルとして登録する（Ｓ５４）。
【０１４８】
続いて、ユーザーによる特徴情報の指定があったかを判別し（Ｓ５５）、特徴情報の指定がある場合は、特徴情報をデータ管理情報に登録する（Ｓ５６）。
【０１４９】
最後に動画ファイルの管理情報を更新し（Ｓ５７）、メディアへの記録を行う（Ｓ５８）ことにより、動画ファイルの管理情報にブックマーク情報が記録される。
【０１５０】
なお、上述の手順ではブックマーク登録をユーザー操作により実現しているが、機器が自動的にブックマークを付加することによりブックマーク登録を行うようにしてもよい。
【０１５１】
次に、図１１を用いて、動画ファイルのブックマーク管理情報に基づきブックマーク画像を表示する処理手順を説明する。
【０１５２】
図１１に示すように、先ず、ユーザーにより、表示すべきブックマーク画像に対応するブックマークが指定される（Ｓ６１）。その後、動画ファイルを読み出して、動画ファイルに格納されている管理情報を取得し（Ｓ６２）、管理情報からトラック数を取得し（Ｓ６３）、各トラックに対して、順次、以下のＳ６５からＳ７５までのステップからなるループ１を実行する（Ｓ６４）。
【０１５３】
すなわち、各トラックに対して、管理情報から１つのトラックの情報を取得し（Ｓ６５）、Ｓ６５においてトラック情報を取得したトラックがサムネイルトラックか否かを判別する（Ｓ６６）。ここで、サムネイルトラックでない場合には、次のトラックを検索する。
【０１５４】
一方、Ｓ６５においてトラック情報を取得したトラックがサムネイルトラックの場合には、そのトラックに登録されているブックマークの数を取得し（Ｓ６７）、取得したブックマークの数だけ、順次、後述のＳ６９からＳ７１までのステップにより構成されるループ２を実行する（Ｓ６８）。
【０１５５】
すなわち、動画ファイル内にブックマークが存在するか否かの判別を行い（Ｓ６９）、ブックマークが存在する場合には、ブックマーク画像を取得し（Ｓ７０）、ブックマーク画像を表示する（Ｓ７１）。
【０１５６】
一方、ブックマーク画像が存在しない場合には、次のブックマークを参照する（Ｓ６８〜Ｓ７２）。そして、各ブックマークに対して、ループ２を行うことにより、登録されているブックマークの数だけブックマーク画像を表示することができる。
【０１５７】
さらに、ループ２の終了（Ｓ７２）後、動画ファイル内に特徴情報が存在するか否かを判断する（Ｓ７３）。特徴情報がある場合には、特徴情報を取得するとともに（Ｓ７４）、特徴情報に基づいて特徴画像を特定する（Ｓ７５）。
【０１５８】
このように、Ｓ６５からＳ７５までのステップからなるループ１を、トラック数だけ実行すれば、各トラックについてブックマーク画像を表示することができ、ブックマーク画像に特徴画像がある場合にはその特徴画像を特定することができる。
【０１５９】
このように、本実施の形態のデータ管理方法は、記録媒体に記録された動画データの任意の位置におけるブックマークデータに関するブックマーク管理情報を、記録媒体に記録するための方法であって、ブックマーク画像に含まれる特徴画像のデータに関する特徴情報を、記録媒体に記録する構成である。
【０１６０】
上記構成によれば、記録媒体に記録された動画データについて、ブックマーク管理情報により、ブックマーク画像を管理することができる。さらに、ブックマーク画像内における特徴画像についても、特徴情報に基づき管理することが可能となる。
【０１６１】
たとえば、動画データが運動会を撮影したデータである場合、本実施の形態のデータ管理方法を用いれば、特徴画像としてのユーザーの子供の画像を、特徴情報に基づき管理することができる。したがって、運動会の動画データを遠隔地にいる家族に送付した場合でも、瞬時に表示画像から子供の画像を特定して再生し、子供がどこにいるか簡単に見つけ出すことが可能となる。
【０１６２】
なお、本発明のデータ管理方法は、記録媒体に記録したデータの任意の位置情報を該記録媒体に記録するための管理方法であって、任意の位置情報に対応するデータの任意の部分データを管理する管理情報を記録する方法であってもよい。
【０１６３】
ここで、上記任意の時間に対応するデータの任意の部分データを管理する管理情報は、表示画像データの任意の位置を示す座標情報としてもよい。さらに、上記任意の時間に対応するデータの任意の部分データを管理する管理情報は、表示画像データの任意の範囲を示す矩形情報としてもよい。
【０１６４】
また、上記任意の時間に対応するデータの任意の部分データを管理する管理情報は、表示画像データの任意の範囲を示す円情報としてもよい。また、上記任意の時間に対応するデータの任意の部分データを管理する管理情報は、表示画像データの任意の範囲を示す任意形状情報としてもよい。
【０１６５】
また、上記任意の時間に対応するデータの任意の部分データを管理する管理情報は、画像データを示すオブジェクト情報としてもよい。さらに、上記任意の時間に対応するデータの任意の部分データを管理する管理情報は、表示画像データから領域を抽出する処理関数を示す情報としてもよい。あるいは、上記任意の時間に対応するデータの任意の部分データを管理する管理情報は、任意の時間間隔内における複数の画像データに対応した情報としてもよい。
【０１６６】
また、本発明に係る記録再生装置は、データおよび該データを管理する管理情報を記録媒体に記録するための第１のデータ記録手段と、管理情報を参照し、記録したデータを再生するための第１の再生手段と、記録した任意のデータを再生した際の再生時間から任意の位置情報を指定する位置情報指定手段と、位置情報指定手段により指定された再生時間に対応するデータの部分データを指定する部分データ指定手段と、部分データ指定手段により指定された部分データ情報を記録媒体に格納する第２のデータ記録手段と、記録媒体に記録されている部分データ情報を取得する部分データ取得手段と、位置情報および部分データ情報を参照し、部分データを抽出する部分データ処理手段と、部分データを再生する第２の再生手段とを含む構成であってもよい。
【０１６７】
ここで、上記部分データを抽出する部分データ処理手段が複数存在する記録再生装置において、抽出する部分データは、複数の部分データ処理手段のうち、１つの部分データ処理手段により処理されたデータであってもよい。また、上記部分データを抽出する部分データ処理手段が複数存在する記録再生装置において、抽出する部分データは、複数の部分データ処理手段のうち、少なくとも１つ以上の部分データ処理手段により処理されたデータであってもよい。
【０１６８】
本発明に係る記録媒体は、データの任意の位置情報を記録した記録媒体であって、任意の位置情報に対応するデータの任意の部分データを管理する管理情報を記録する構成であってもよい。
【０１６９】
上記構成によれば、任意の位置情報に対応するデータの任意の部分データをブックマーク情報としてブックマーク管理情報に記録することが可能となり、ブックマーク管理情報を参照することにより、撮影者や撮影した映像を見るユーザーが特に注目させたい画像の部分的な画像を示すことが可能となる。また、ＭＰＥＧ４などのオブジェクトごとに伝送されるデータにおいて、オブジェクト情報をブックマーク情報として管理することによりオブジェクト単位の特徴部分を示すことが可能となる。
【０１７０】
また、時間軸をもつ動画像の任意の時間間隔をブックマークとして登録し、その時間間隔内のフレーム画像の特徴部分をブックマーク情報として管理することで、動画像に対応した特徴部分をユーザーに示すことが可能となる。
【０１７１】
なお、本発明のデータ表示方法は、記録媒体に記録された第１部分データの記録位置を指定するステップと、上記第１部分データに含まれる第２部分データを指定するステップと、上記第１部分データの上記記録媒体における記録位置に関する第１管理情報と、上記第２部分データに関する上記第２管理情報とを参照し、第２部分データを抽出するステップと、上記第２部分データの再生画像を表示するステップとを備えていてもよい。
【０１７２】
上記構成によれば、ユーザーにより第１部分データの記録位置および第２部分データが指定されるとともに、指定された第１部分データの第１管理情報と、第２部分データの第２管理情報とから、第２部分データが抽出され、さらに、第２部分データの再生画像が表示される。
【０１７３】
たとえば、記録媒体に記録された動画データを再生してディスプレイ等に表示する場合において、上記構成のデータ表示方法によれば、動画データのブックマーク画像に関するデータを、第１部分データとして第１管理情報により表示するとともに、ブックマーク画像における特徴画像に関するデータを、第２部分データとして第２管理情報により表示することができる。
【０１７４】
このように、第１管理情報および第２管理情報に基づき、記録媒体に記録されたデータを２段階に細分化したデータの表示が可能となる。したがって、記録媒体に記録されたデータをより詳細にユーザーに提示することが可能となる。
【０１７５】
また、本発明のコンピュータ読み取り可能な記録媒体は、任意位置に記録される第１部分データの記録位置に関する第１管理情報と、上記第１部分データに含まれる第２部分データに関する第２管理情報とを記録していてもよい。
【０１７６】
上記構成によれば、第１部分データについて、第１管理情報によりその記録位置を管理することができる。さらに、第１部分データ内における第２部分データについても、第２管理情報に基づき管理することが可能となる。
【０１７７】
たとえば、本発明の記録媒体が動画データを記録する記録媒体である場合において、上記構成によれば、動画データのブックマーク画像に関するデータを、第１部分データとして第１管理情報により管理するとともに、ブックマーク画像における特徴画像に関するデータを、第２部分データとして第２管理情報により管理することができる。
【０１７８】
このように、第１管理情報および第２管理情報に基づき、記録媒体に記録されたデータを２段階に細分化したデータの管理が可能となる。したがって、記録媒体に記録されたデータをより詳細に管理することが可能となる。
【０１７９】
【発明の効果】
本発明のデータ管理方法は、以上のように、第１部分データに含まれる第２部分データに関する第２管理情報を、記録媒体に記録する方法である。
【０１８０】
上記構成によれば、記録媒体に記録された第１部分データについて、第１管理情報により、その記録位置を管理することができる。さらに、第１部分データ内における第２部分データについても、第２管理情報に基づき管理することが可能となる。
【０１８１】
このように、第１管理情報および第２管理情報に基づき、記録媒体に記録されたデータを２段階に細分化したデータの管理が可能となる。したがって、記録媒体に記録されたデータをより詳細に管理することが可能となるという効果を奏する。
【０１８２】
また、本発明のデータ管理方法は、以上のように、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像に対する、上記第２部分データに基づき表示される画像の座標を示す座標情報である構成である。
【０１８３】
上記構成によれば、第２部分データに基づき表示される画像の位置を、座標情報により特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像の位置をユーザーに知らせることが可能となるという効果を奏する。
【０１８４】
また、本発明のデータ管理方法は、以上のように、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像に、上記第２部分データに基づき表示される画像を含むような矩形を設定するための矩形情報である構成である。
【０１８５】
上記構成によれば、上記矩形により、第２部分データに基づき表示される画像を特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となるという効果を奏する。
【０１８６】
また、本発明のデータ管理方法は、以上のように、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像に、上記第２部分データに基づき表示される画像を含むような円を設定するための円情報である構成である。
【０１８７】
上記構成によれば、上記円により、第２部分データに基づき表示される画像を特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となるという効果を奏する。
【０１８８】
また、本発明のデータ管理方法は、以上のように、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像に、上記第２部分データに基づき表示される画像を含むような多角形を設定するための任意形状情報である構成である。
【０１８９】
上記構成によれば、上記多角形により、第２部分データに基づき表示される画像を特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となるという効果を奏する。
【０１９０】
また、本発明のデータ管理方法は、以上のように、上記構成のデータ管理方法において、上記記録媒体に記録されているデータが、動画をオブジェクト単位にて管理可能なデータであるとともに、上記第２管理情報は、上記第２部分データに基づき表示される画像を構成するオブジェクトを識別するためのオブジェクト情報である構成である。
【０１９１】
上記構成によれば、上記オブジェクト情報により、第２部分データに基づき表示される画像を構成するオブジェクトを特定することが可能となる。したがって、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となるという効果を奏する。
【０１９２】
また、本発明のデータ管理方法は、以上のように、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像から、上記第２部分データに基づき表示される画像を抽出するための処理関数を示す関数情報である構成である。
【０１９３】
上記構成によれば、上記関数情報により、第２部分データに基づき表示される画像を抽出するための処理関数を特定することが可能となる。したがって、上記処理関数を実行し、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となるという効果を奏する。
【０１９４】
また、本発明のデータ管理方法は、以上のように、上記構成のデータ管理方法において、上記第２管理情報が、上記第１部分データに基づき表示される画像において、上記第２部分データに基づき表示される画像が移動する状態を示す動き情報である構成である。
【０１９５】
上記構成によれば、上記動き情報により、第２部分データに基づき表示される画像の移動状態を特定することが可能となる。したがって、第２部分データに表示される画像が第１部分データに基づき表示される画像内を移動している場合であっても、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となるという効果を奏する。
【０１９６】
また、本発明のデータ管理方法は、以上のように、上記構成のデータ管理方法において、上記動き情報が、上記第１部分データに基づき表示される画像に対する、上記第２部分データに基づき表示される画像の座標を、時系列で示す情報である構成である。
【０１９７】
上記構成によれば、上記動き情報により、第２部分データに基づき表示される画像の座標を時系列で特定することができる。したがって、第２部分データに表示される画像が第１部分データに基づき表示される画像内を移動している場合であっても、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみをより容易に抽出することが可能となるという効果を奏する。
【０１９８】
また、本発明の記録再生装置は、以上のように、記録媒体に記録された第１部分データの記録位置を指定する位置情報指定手段と、上記第１部分データに含まれる第２部分データを指定する第２部分データ指定手段と、上記第１部分データの上記記録媒体における記録位置に関する第１管理情報と、上記第２部分データに関する上記第２管理情報とを参照し、第２部分データを抽出する部分データ処理手段と、上記第２部分データの再生画像を表示する表示手段とを備えている構成である。
【０１９９】
上記構成によれば、ユーザーは、位置情報指定手段と第２部分データ指定手段とにより、第１部分データおよび第２部分データを指定することができる。さらに、第１部分データの第１管理情報と、第２部分データの第２管理情報とから、部分データ処理手段により第２部分データが抽出され、さらに、表示手段により第２部分データの再生画像が表示される。
【０２００】
このように、第１管理情報および第２管理情報に基づき、記録媒体に記録されたデータを２段階に細分化したデータの表示が可能となる。したがって、記録媒体に記録されたデータをより詳細にユーザーに提示することが可能となるという効果を奏する。
【０２０１】
また、本発明の記録再生装置は、以上のように、上記構成の記録再生装置において、上記部分データ処理手段が、上記第１部分データに基づき表示される画像から上記第２部分データに基づき表示される画像を抽出するための複数の処理関数のうち、少なくとも１つの処理関数を実行するものである。
【０２０２】
上記構成によれば、部分データ処理手段にて処理関数が実行されるので、第１部分データに基づき表示される画像から、第２部分データに基づき表示される画像のみを容易に抽出することが可能となるという効果を奏する。
【図面の簡単な説明】
【図１】本発明の一実施形態に係る記録媒体のデータ構造を示す模式図である。
【図２】ブックマーク登録した画像の特徴情報が座標情報である場合の動画データ、ブックマークデータ、および特徴情報の時間関係と、特徴情報の管理構造とを示す図である。
【図３】ブックマーク登録した画像の特徴情報が矩形範囲情報である場合の動画データ、ブックマークデータ、および特徴情報の時間関係と、特徴情報の管理構造とを示す図である。
【図４】ブックマーク登録した画像の特徴情報が円情報である場合の動画データ、ブックマークデータ、および特徴情報の時間関係と、特徴情報の管理構造とを示す図である。
【図５】ブックマーク登録した画像の特徴情報が任意形状情報である場合の動画データ、ブックマークデータ、および特徴情報の時間関係と、特徴情報の管理構造とを示す図である。
【図６】ブックマーク登録した画像の特徴情報がオブジェクト情報である場合の動画データ、ブックマークデータ、および特徴情報の時間関係と、特徴情報の管理構造とを示す図である。
【図７】ブックマーク登録した画像の特徴情報が関数情報である場合の動画データ、ブックマークデータ、および特徴情報の時間関係と、特徴情報の管理構造とを示す図である。
【図８】ブックマーク登録した画像の特徴情報が移動する場合の動画データ、ブックマークデータ、および特徴情報の時間関係と、特徴情報の管理構造とを示す図である。
【図９】本発明の一実施形態に係る記録再生装置の構成を示すブロック図である。
【図１０】動画ファイルのブックマーク管理情報への登録手順を示すフローチャートである。
【図１１】動画ファイルのブックマーク管理情報によるブックマークの表示手順を示すフローチャートである。
【図１２】従来の記録媒体のデータ構造を示す模式図である。
【符号の説明】
７１５ブックマーク管理情報（第１管理情報）
７２０ブックマークデータ（第１部分データ）
７３０特徴情報（第２管理情報）
７３１特徴情報（第２管理情報）
７３２特徴情報（第２管理情報）
７６１ビデオ合成部（部分データ処理手段）
７６４入力部（位置情報指定手段、第２部分データ指定手段）[0001]
BACKGROUND OF THE INVENTION
  The present invention records digital data such as moving images, still images, and audio on a magnetic disk such as a magneto-optical disk, an optical disk, and a hard disk, or a recording medium such as a semiconductor memory, and arbitrary position information of the recorded digital data. The present invention relates to a data management method, a data display method, a recording / reproducing apparatus, and a recording medium for managing data and reproducing data recorded from arbitrary position information.
[0002]
[Prior art]
  In recent years, personal computers, DVD (Digital Video Disk) recorders, digital cameras, and the like have become widespread as recording / playback apparatuses for recording and playing back data such as video and audio. These recording / playback apparatuses generally have a “bookmark function” that enables an arbitrary position in a recorded video or the like to be registered.
[0003]
  With the bookmark registered using the bookmark function, the recording / playback apparatus can display the image at the bookmark position of the moving image and start playback from the registered bookmark position (or time). The recording / playback apparatus refers to the bookmark information stored in the data management information, and displays the representative image recorded in the bookmark information as a bookmark image.
[0004]
  Hereinafter, a conventional data structure recorded on a recording medium will be described with reference to FIG. The conventional data structure recorded on the recording medium is composed of logical management information 800 and a data area 801 as shown in FIG.
[0005]
  The logical management information 800 is management information managed by a file system such as FAT (File Allocation Table) or UDF (Universal Disk Format), and stores information for referring to a file recorded in the data area 801. Has been.
[0006]
  The data area 801 is an area in which files managed by the logical management information 800 are recorded. In the data area 801, a plurality of files up to file # 1 (802), file # 2 (803), and file #n (804) are recorded, and a free area 805 is provided.
[0007]
  In the file # 1 (802), data # 1 management information 806 and data # 1 (807) such as a moving image, a still image, sound, and text are recorded. In the file # 2 (803), data # 2 management information 808 and data # 2 (809) such as a moving image, a still image, sound, and text are recorded. In the file #n (804), data #n management information 810 and data #n (811) such as a moving image, a still image, sound, and text are recorded. The empty area 805 is an area where nothing is recorded.
[0008]
  As described above, data such as moving images, still images, and audio are recorded in the data file together with data management information that is management information for reproducing the data.
[0009]
  The data # 2 management information 808 includes header information 812 for referring to the management information recorded in the data management information, attribute information 813 in which the data type and data creation date and time of the bookmark image information are stored, Movie management information 814 for reproducing a movie and bookmark management information 815 for managing a bookmark are stored.
[0010]
  Further, the bookmark management information 815 stores bookmark # 1 position information 816, bookmark # 2 position information 817, and bookmark # 3 position information 818.
[0011]
  Data # 2 (809) stores moving image data 819 and bookmark data 820.
[0012]
  Further, the bookmark # 1 position information 816 stores position information corresponding to the bookmark # 1 position 827 in the moving image data 819. This position information is stored as the number of offset bytes from the beginning of the moving image data 819 or the playback time with the moving image data 819 as the origin.
[0013]
  The bookmark # 2 position information 817 stores position information corresponding to the bookmark # 2 position 828 in the moving image data 819. This position information is stored as the number of offset bytes from the beginning of the moving image data 819 or the playback time with the moving image data 819 as the origin.
[0014]
  Further, the bookmark # 3 position information 818 stores position information corresponding to the bookmark # 3 position 829 in the moving image data 819. This position information is stored as the number of offset bytes from the beginning of the moving image data 819 or the playback time with the moving image data 819 as the origin.
[0015]
  The bookmark data 820 includes a bookmark # 1 image 821, a bookmark # 1 title 822, a bookmark # 2 image 823, a bookmark # 2 title 824, a bookmark # 3 image 825, and a bookmark # 3 title 826. Stored.
[0016]
  In the bookmark # 1 image 821, image data for one frame in the moving image data 819 corresponding to the position information stored in the bookmark # 1 position information 816 is stored.
[0017]
  Further, the bookmark # 2 image 823 stores image data for one frame of the moving image data 819 corresponding to the position information stored in the bookmark # 2 position information 817. The bookmark # 3 image 825 stores image data for one frame in the moving image data 819 corresponding to the position information stored in the bookmark # 3 position information 818.
[0018]
  JP-A-6-162093 (hereinafter referred to as Patent Document 1), JP-A-11-328933 (hereinafter referred to as Patent Document 2), JP-A 2000-224554 (hereinafter referred to as Patent Document 3). ) Discloses a technique for managing bookmarks.
[0019]
  Japanese Patent Application Laid-Open No. 2004-151867 describes, as bookmark information, coordinate data of a position where a bookmark is added to image data so that image data in page units can be searched in an image processing apparatus such as an electronic filing apparatus and a document file apparatus. A method of registration is disclosed.
[0020]
  Patent Document 2 discloses a method for storing an arbitrary position and a plurality of positions in a mini-disc that records music as digital data and that does not consume power when paused.
[0021]
  Patent Document 3 discloses a method of transmitting user data including bookmark information and adding a bookmark to a program, and an operation from a portion with a bookmark (play, fast forward play, slow play, these And a method for realizing operation control such as a delimiter operation that is reverse reproduction, skip, and repetitive reproduction, and prohibition of bookmark information change.
[0022]
[Patent Document 1]
        Japanese Patent Laid-Open No. 6-162093 (published on June 10, 1994)
[0023]
[Patent Document 2]
        JP 11-328933 A (published on November 30, 1999)
[0024]
[Patent Document 3]
        JP 2000-224554 A (released on August 11, 2000)
[0025]
[Problems to be solved by the invention]
  However, the technique described in the above publication cannot indicate a characteristic part of a frame image corresponding to an arbitrary position as bookmark information indicating an arbitrary position of recorded data.
[0026]
  That is, since the technique described in Patent Document 2 manages only the reproduction time and the amount of data up to the data corresponding to the time, it can indicate a characteristic portion of the data corresponding to an arbitrary position of the recorded data. Can not.
[0027]
  The technique described in Patent Document 3 manages the reproduction time, the amount of data up to the data corresponding to that time, and control information for controlling the reproduction operation. Since no information is managed, the characteristic part cannot be shown.
[0028]
  Furthermore, since the technique described in Patent Document 1 is a technique for registering bookmarks in units of pages, bookmarks cannot be registered for time-series continuous moving image data.
[0029]
  For example, with respect to moving image data compressed and recorded by MPEG (Motion Picture Experts Group) 2 or MPEG 4, bookmarks are registered using the technique described in Patent Document 1, and moving image data is recorded from the bookmark position. It is impossible to play. This is because the management method and the reproduction method from the bookmark information of the data recorded on the recording medium differ between the document data and the moving image data targeted by the technique described in Patent Document 1.
[0030]
  Moreover, the technique described in Patent Document 1 manages coordinate data as bookmark information registered in page units. The coordinate data is provided for searching for bookmarks, and is data for combining and displaying bookmark patterns and bookmark marks.
[0031]
  That is, the technique described in Patent Document 1 manages a feature portion in a frame of a moving image as bookmark information and does not indicate the feature image to the user.
[0032]
  As described above, in the conventional bookmark management method, it is impossible to register an arbitrary time interval of a moving image having a time axis as a bookmark and to indicate a characteristic portion of a frame image within the time interval. For example, the object of the characteristic part cannot be indicated for the data transmitted for each object, such as moving image data compressed and recorded by MPEG4 or the like.
[0033]
  The present invention has been made in view of the above-described conventional problems, and the object of the present invention is to record moving image data of a recording medium on a recording medium such as managing a feature image in the bookmark image together with a bookmark image. An object of the present invention is to provide a data management method, a data display method, a recording / reproducing apparatus, and a recording medium that can manage data in more detail.
[0034]
[Means for Solving the Problems]
  The data management method of the present invention is a method for recording, on the recording medium, first management information related to the recording position of the first partial data recorded on the recording medium, in order to solve the above-described problem. The second management information related to the second partial data included in the first partial data is recorded on the recording medium.
[0035]
  According to the above configuration, the recording position of the first partial data recorded on the recording medium can be managed by the first management information. Further, the second partial data in the first partial data can be managed based on the second management information.
[0036]
  For example, when moving image data is recorded on a recording medium, according to the data management method configured as described above, the data related to the bookmark image of the moving image data is managed as the first partial data by the first management information, and the feature of the bookmark image Data relating to the image can be managed as the second partial data by the second management information.
[0037]
  As described above, based on the first management information and the second management information, it is possible to manage data obtained by subdividing the data recorded on the recording medium into two stages. Therefore, the data recorded on the recording medium can be managed in more detail.
[0038]
  In order to solve the above-described problem, the data management method of the present invention is the data management method having the above configuration, wherein the second management information is an image displayed based on the first partial data. It is the coordinate information which shows the coordinate of the image displayed based on data, It is characterized by the above-mentioned.
[0039]
  According to the above configuration, the position of the image displayed based on the second partial data can be specified by the coordinate information. Therefore, it is possible to inform the user of the position of the image displayed based on the second partial data from the image displayed based on the first partial data.
[0040]
  In order to solve the above problems, the data management method of the present invention is the data management method having the above configuration, wherein the second management information is displayed on the image displayed based on the first partial data. Rectangle information is used to set a rectangle that includes an image to be displayed based on the data.
[0041]
  According to the said structure, it becomes possible to specify the image displayed based on 2nd partial data by the said rectangle. Therefore, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data.
[0042]
  In order to solve the above problems, the data management method of the present invention is the data management method having the above configuration, wherein the second management information is displayed on the image displayed based on the first partial data. It is characterized by circle information for setting a circle including an image to be displayed based on data.
[0043]
  According to the above configuration, the image displayed based on the second partial data can be specified by the circle. Therefore, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data.
[0044]
  In order to solve the above problems, the data management method of the present invention is the data management method having the above configuration, wherein the second management information is displayed on the image displayed based on the first partial data. It is an arbitrary shape information for setting a polygon including an image displayed based on data.
[0045]
  According to the said structure, it becomes possible to specify the image displayed based on 2nd partial data by the said polygon. Therefore, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data.
[0046]
  In order to solve the above problem, the data management method of the present invention is a data management method having the above-described configuration, wherein the data recorded on the recording medium is data that can manage a moving image in units of objects. The second management information is object information for identifying an object constituting an image displayed based on the second partial data.
[0047]
  According to the above configuration, it is possible to specify an object constituting an image to be displayed based on the second partial data based on the object information. Therefore, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data.
[0048]
  In order to solve the above problems, the data management method of the present invention is characterized in that, in the data management method configured as described above, the second management information is obtained from an image displayed based on the first partial data. It is characterized by function information indicating a processing function for extracting an image to be displayed based on data.
[0049]
  According to the above configuration, it is possible to specify a processing function for extracting an image to be displayed based on the second partial data, based on the function information. Therefore, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data by executing the processing function.
[0050]
  In order to solve the above-described problem, the data management method of the present invention is the data management method having the above-described configuration, wherein the second management information is displayed in the image displayed based on the first partial data. It is characterized by motion information indicating a moving state of an image displayed based on data.
[0051]
  According to the above configuration, the movement state of the image displayed based on the second partial data can be specified by the motion information. Therefore, even if the image displayed in the second partial data is moving within the image displayed based on the first partial data, the second partial data is extracted from the image displayed based on the first partial data. Only the displayed image can be easily extracted based on the above.
[0052]
  In order to solve the above problem, the data management method of the present invention is the data management method configured as described above, wherein the motion information is included in the second partial data for an image displayed based on the first partial data. This is characterized in that the coordinates of the image displayed based on the time series are information.
[0053]
  According to the said structure, the coordinate of the image displayed based on 2nd partial data can be pinpointed in time series by the said motion information. Therefore, even if the image displayed in the second partial data is moving within the image displayed based on the first partial data, the second partial data is extracted from the image displayed based on the first partial data. It becomes possible to extract only the image displayed based on.
[0054]
  MaIn order to solve the above problems, the recording / reproducing apparatus of the present invention includes a position information designating unit for designating a recording position of the first partial data recorded on the recording medium, and a second information included in the first partial data. Refer to the second partial data specifying means for specifying the partial data, the first management information related to the recording position of the first partial data on the recording medium, and the second management information related to the second partial data. A partial data processing means for extracting the partial data and a display means for displaying the reproduced image of the second partial data are provided.
[0055]
  According to the above configuration, the user can designate the first partial data and the second partial data by the position information designation unit and the second partial data designation unit. Further, the second partial data is extracted by the partial data processing means from the first management information of the first partial data and the second management information of the second partial data, and the reproduced image of the second partial data is further displayed by the display means. Is displayed.
[0056]
  For example, in the case where moving image data recorded on a recording medium is reproduced and displayed on a display or the like, according to the recording / reproducing apparatus configured as described above, data relating to a bookmark image of moving image data is used as first partial information as first partial information. And the data related to the feature image in the bookmark image can be displayed as the second partial data by the second management information.
[0057]
  As described above, based on the first management information and the second management information, it is possible to display data obtained by subdividing the data recorded on the recording medium into two stages. Therefore, the data recorded on the recording medium can be presented to the user in more detail.
[0058]
  In order to solve the above problems, the recording / reproducing apparatus of the present invention is characterized in that, in the recording / reproducing apparatus having the above-described configuration, the partial data processing means generates the second part from an image displayed based on the first partial data. It is characterized by executing at least one processing function among a plurality of processing functions for extracting an image to be displayed based on data.
[0059]
  According to the above configuration, since the processing function is executed by the partial data processing means, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data. Possible.
[0060]
DETAILED DESCRIPTION OF THE INVENTION
  BookAn embodiment of the invention will be described below with reference to the drawings.
[0061]
  Data recorded on a recording medium using the data management method of the present embodiment is composed of logical management information 700 and a data area 701 as shown in FIG.
[0062]
  The logical management information 700 is management information managed by a file system such as FAT or UDF, and stores information for referring to a file recorded in the data area 701. The data area 701 is an area in which files managed by the logical management information 700 are recorded.
[0063]
  In the data area 701, a plurality of files up to file # 1 (702), file # 2 (703), and file #n (704) are recorded, and a free area 705 is provided.
[0064]
  In the file # 1 (702), data # 1 management information 706 and data # 1 (707) such as a moving image, a still image, sound, and text are recorded. In the file # 2 (703), data # 2 management information 708 and data # 2 (709) such as a moving image, a still image, sound, and text are recorded. In the file #n (704), data #n management information 710 and data #n (711) such as a moving image, a still image, sound, and text are recorded. The empty area 705 is an area where nothing is recorded.
[0065]
  As described above, data such as moving images, still images, and audio are recorded in the data file together with data management information that is management information for reproducing the data.
[0066]
  Further, the data # 2 management information 708 includes header information 712 for referring to the management information recorded in the data management information, attribute information 713 storing the data type and data creation date and time of the bookmark image information, Movie management information 714 for reproducing a movie and bookmark management information (first management information) 715 for managing a bookmark are stored.
[0067]
  The bookmark management information 715 includes bookmark # 1 position information 716, bookmark # 1 feature information (second management information) 730, bookmark # 2 position information 717, and bookmark # 2 feature information (second management information). 731, bookmark # 3 position information 718, and bookmark # 3 feature information (second management information) 732 are stored.
[0068]
  Data # 2 (709) stores moving image data 719 and bookmark data (first partial data) 720.
[0069]
  In the bookmark # 1 position information 716, position information corresponding to the bookmark # 1 position 727 in the moving image data 719 is stored. This position information is stored as the number of offset bytes from the beginning of the moving image data 719 or the playback time with the moving image data 719 as the origin.
[0070]
  Further, the bookmark # 2 position information 717 stores position information corresponding to the bookmark # 2 position 728 in the moving image data 719. This position information is stored as the number of offset bytes from the beginning of the moving image data 719 or the playback time with the moving image data 719 as the origin.
[0071]
  Further, the bookmark # 3 position information 718 stores position information corresponding to the bookmark # 3 position 729 in the moving image data 719. This position information is stored as the number of offset bytes from the beginning of the moving image data 719 or the playback time with the moving image data 719 as the origin.
[0072]
  The bookmark # 1 feature information 730 is information for specifying a feature image in the bookmark # 1 image 721. Similarly, the bookmark # 2 feature information 731 is information for specifying a feature image in the bookmark # 2 image 723, and the bookmark # 3 feature information 732 is information for specifying a feature image in the bookmark # 3 image 725. It is. A specific configuration of the bookmark feature information will be described later.
[0073]
  In the bookmark data 720, a bookmark # 1 image 721, a bookmark # 1 title 722, a bookmark # 2 image 723, a bookmark # 2 title 724, a bookmark # 3 image 725, and a bookmark # 3 title 726 are stored. ing.
[0074]
  In the bookmark # 1 image 721, image data for one frame in the moving image data 719 corresponding to the position information stored in the bookmark # 1 position information 716 is stored.
[0075]
  In the bookmark # 2 image 723, image data for one frame of the moving image data 719 corresponding to the position information stored in the bookmark # 2 position information 717 is stored.
[0076]
  In the bookmark # 3 image 725, image data for one frame in the moving image data 719 corresponding to the position information stored in the bookmark # 3 position information 718 is stored.
[0077]
  As described above, the image data and title data in the bookmark data 720 relating to each of the bookmarks 727 to 729 registered in the moving image data 719 are managed by the bookmark position information 716 to 718 in the bookmark management information 715.
[0078]
  The relationship among moving image data, bookmark data, and feature information (second management information) in the above-described data configuration will be described with reference to FIGS.
[0079]
  FIG. 2 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information when feature information for specifying a feature image in a bookmark image is coordinate information.
[0080]
  As shown in FIG. 2, the video file corresponds to a video track 770 that manages recording of captured video data, a time management 771 that manages playback time inside the device, and a designated bookmark position. Management information is recorded on a Text track 772 that manages text data such as a title in association with time and a Thumbnail track 773 that manages still image data such as a bookmark image in association with a time corresponding to a specified bookmark position. .
[0081]
  In this embodiment, Bookmark # 1 is registered in Time # 1 of the moving image data, Bookmark # 2 is registered in Time # 2, Bookmark # 3 is registered in Time # 3, and Bookmarkmark # 4 is registered in Time # 4 as bookmarks. . Furthermore, as title data, Title # 1 is used for Bookmark # 1, Title # 2 is used for Bookmark # 2, Title # 3 is used for Bookmark # 3, Title # 4 is used for Bookmark # 4, and so on. A title is associated with each bookmark and managed.
[0082]
  The bookmark image is managed by the Thumbnail track 773. That is, on the Thumbnail track 773, still image data recorded at the position of Time # 1 from the beginning of the moving image data is Thumbnail # 1, and still image data recorded at the position of Time # 2 from the beginning of the moving image data is Thumbnail # 2, Still image data recorded at time # 3 from the beginning of the video data is Thumbnail # 3, and still image data recorded at time # 4 from the top of the video data is still at each bookmark, such as Thumbnail # 4. The image data is stored in association with each other.
[0083]
  This bookmark image is an image reduced to 160 × 120 pixels, a JPEG (Joint Photographic Experts Group) image, or a TIFF (Tag Image File) when the frame image of the moving image data is a bitmap image of 704 × 480 pixels, for example. The image may be an image compressed into an image such as an image or an image having the same data size as the moving image data.
[0084]
  Also, as shown in FIG. 2, when it is desired to specify the feature image 776 in the bookmark screen 775 displaying the bookmark registered image, the feature information 774 is stored in the moving image file. In the present embodiment, coordinate information 779 indicating the position of the feature image 776 in the bookmark image is recorded in Bookmark # 4.
[0085]
  The bookmark management information 777 is information for managing Time, Text track, Thumbnail track, and feature information as Bookmark information for a plurality of bookmarks in the moving image data.
[0086]
  The bookmark management information 777 stores information for managing the number of Bookmarks, and four pieces of Bookmark information from Bookmark information # 1 to Bookmark information # 4.
[0087]
  For example, Bookmark information # 1 (778) includes bookmark registration date and time indicating the date and time when the bookmark was registered, bookmark time indicating the time from the beginning of the video data to the bookmark position when the video data is played back, and features in the bookmark image. Coordinate information 779 for specifying feature image data (feature image data, second partial data), which is a typical image, Title reference information indicating a management number in the title track, etc. for referring to the title data, In order to refer to the thumbnail data, Thumbnail reference information indicating a management number or the like in the thumbnail track is stored.
[0088]
  The thumbnail track is management information for recording thumbnails. That is, in QuickTime, for example, a video track that manages an MPEG stream or JPEG data corresponds to a thumbnail track. Examples of thumbnail tracks other than the Video track include an Audio track that manages audio and a text track that manages characters.
[0089]
  In this embodiment, when the thumbnail data at the position designated by the bookmark is recorded, the management information such as the thumbnail image size, codec information, and thumbnail data position is recorded in the management information of the video track. The thumbnail track is recorded in the file management information area (moov), and the thumbnail data is recorded in the file data area (mdat).
[0090]
  Also, in the Bookmark information # 2 to # 4, similarly to the Bookmark information # 1, bookmark registration date, bookmark time, coordinate information, Title reference information, and Thumbnail reference information are stored.
[0091]
  The coordinate information 779 is Position x which is the number of pixels in the horizontal direction and the number of pixels in the vertical direction at the position of the feature image 776 when the upper left corner of the bookmark screen 775 is the origin (0, 0). “Position y” is stored.
[0092]
  Further, when displaying a bookmark image corresponding to Bookmark # 4 registered in Time # 4 of the moving image data, refer to Title # 4 managed by the Text track 772 in the vicinity of the feature image 776 in the bookmark image. The title bitmap data 790 is combined with the bookmark image and displayed.
[0093]
  With the above configuration, when a bookmark image is selected, the position of the feature image 776 can be specified by the feature information 774 and the user can be notified of the position. Furthermore, the registered feature image may be shown together with the title data with reference to the Text track 772.
[0094]
  FIG. 3 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information when feature information for specifying a feature image in a bookmark image is rectangular information. Note that the relationship between moving image data and bookmark data, bookmark management information 777, and bookmark information 778 are the same as those shown in FIG.
[0095]
  In the configuration shown in FIG. 3, rectangular information 780 is stored in the Bookmark information 778. That is, in the configuration illustrated in FIG. 3, the feature image 776 can be specified by being included in a rectangle determined by the rectangle information 780.
[0096]
  In order to determine a rectangle including the feature image 776, the rectangle information 780 is obtained by setting the number of pixels xs in the horizontal direction of the upper left coordinates in the rectangle and the vertical direction when the upper left corner of the bookmark screen 775 is the origin (0, 0). The number of pixels ys, the number of pixels xe in the horizontal direction of the lower right coordinate in the rectangle, and the number of pixels ye in the vertical direction are managed.
[0097]
  FIG. 4 is a diagram illustrating a temporal relationship among moving image data, bookmark data, and feature information when feature information for specifying a feature image in a bookmark image is circle information.
[0098]
  In the configuration shown in FIG. 4, circle information 781 is stored in the Bookmark information 778. That is, in the configuration illustrated in FIG. 4, the feature image 776 can be specified by being included in a circle determined by the circle information 781.
[0099]
  That is, when the upper left corner of the display screen is the origin (0, 0), the circle information 781 indicates the number of pixels in the horizontal direction of the center coordinates in the circle designated to include the feature image 776 by Position x and the vertical direction. Is managed as Position y, and the number of pixels of the radius of the circle is managed as R size.
[0100]
  FIG. 5 is a diagram illustrating a temporal relationship among moving image data, bookmark data, and feature information when the feature information for specifying the feature image in the bookmark image is arbitrary shape information. The relationship between the moving image data and the bookmark data and the basics of the bookmark management information 777 are the same as those shown in FIG.
[0101]
  In the configuration shown in FIG. 5, arbitrary shape information 782 is stored in the Bookmark information 778. That is, in the configuration illustrated in FIG. 5, the feature image 776 can be specified by being included in a polygon determined by the arbitrary shape information 782.
[0102]
  The polygon is determined so as to connect n coordinates from Position # 1 to Position #n whose positions are recorded in the arbitrary shape information 782.
[0103]
  More specifically, the arbitrary shape information 782 includes n coordinates from Position # 1 to Position #n when the upper left corner of the display screen is the origin (0, 0), and the number of pixels in the horizontal direction Position. x and the number of pixels in the vertical direction Position y.
[0104]
  FIG. 6 is a diagram illustrating a temporal relationship among moving image data, bookmark data, and feature information when feature information for specifying a feature image in a bookmark image is object information. Note that the relationship between moving image data and bookmark data, bookmark management information 777, and bookmark information 778 are the same as those shown in FIG.
[0105]
  In the configuration shown in FIG. 6, data capable of managing a moving image in object units, for example, MPEG4 data is employed as the moving image data. Further, the Bookmark information 778 stores object information 783. Further, the object information 783 manages information indicating the number of objects constituting the feature image 776 and manages the object ID indicating the type of the object by the number of objects constituting the feature image 776.
[0106]
  Therefore, in the configuration shown in FIG. 6, the feature image 776 can be specified on an object basis by the object ID included in the object information 783. Note that the object information 783 only needs to store at least one object ID.
[0107]
  FIG. 7 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information when the feature information for specifying the feature image in the bookmark image is function information for extracting the feature image. The relationship between the moving image data and the bookmark data and the basic configuration of the bookmark management information 777 are the same as the configuration shown in FIG.
[0108]
  Bookmark information # 1 (778 ') includes a bookmark registration date and time indicating the date and time when the bookmark is registered, a bookmark time indicating the time from the beginning of the video data to the bookmark position when the video data is reproduced, and a feature image from the bookmark image. Function information 784 for specifying a processing function for extracting the title, Title reference information indicating a management number in the title track for referring to the title data, a management number in the thumbnail track for referring to the thumbnail data, etc. And a function processing flag indicating a method of processing a function for extracting a feature image.
[0109]
  The function information 784 stores information indicating the number of processing functions for extracting feature images, and manages function IDs indicating the types of processing functions as many as the number of processing functions necessary for extracting feature images. . In this embodiment, as shown in FIG. 7, three processing functions, Function # 1 (785), Function # 2 (786), and Function # 3 (787), are used as processing functions for extracting the feature image 776. A processing function is set.
[0110]
  The processing function for extracting the feature image is, for example, an image contour extraction function for extracting the contour of an image at a specified coordinate, a color extraction function for extracting an image based on the color information of the image, a face image recognition function, or the like. Any function can be used as long as it is extracted.
[0111]
  In this embodiment, an ID number (Function ID # 1 to # 3) is assigned to the processing function, and the ID number is stored in the function information 784. Furthermore, Function # 1 (785), Function # 2 (786), and Function # 3 (787) are executed as processing functions corresponding to the stored ID numbers, respectively, and a feature image 776 is extracted.
[0112]
  Further, as described with reference to FIGS. 2 to 6, coordinate information, rectangle information, circle information, arbitrary shape information, or object ID information as feature information may be defined as a processing function for extracting a feature image. Good. Further, only one ID number of the processing function may be stored in one function information, or a plurality of ID numbers are stored in one function information and a plurality of processing functions are executed. Thus, a configuration in which one feature image is extracted may be used. In addition, the extracted image may be stored as a bookmark image, and the bookmark image may be managed by a Thumbnail track or another track.
[0113]
  FIG. 8 is a diagram showing the relationship between moving image data, bookmark data, and feature information when managing a plurality of feature information recorded at arbitrary time intervals from the bookmark registration position.
[0114]
  As shown in FIG. 8, the video file includes a video track 770 that manages the recording of the captured video data, a time management 771 that manages the playback time inside the device, and a time that corresponds to the designated bookmark position. Management information of a text track 772 for managing text data such as a title and a thumbnail track 773 for managing still image data such as a bookmark image in association with a time corresponding to a designated bookmark position is recorded.
[0115]
  In the present embodiment, Bookmark # 1 is registered as a bookmark in Time # 1 of the moving image data. In this bookmark, Title # 1 as title data is managed by a Text track 772, and Thumbnail # 1 as still image data is managed by a Thumbnail track 773 as a bookmark image. Thumbnail # 1 is obtained by converting moving image data recorded at a time corresponding to Time # 1 from the beginning of moving image data as still image data.
[0116]
  For example, when the frame image of the moving image data is a bitmap image of 704 × 480 pixels, the bookmark image is an image reduced to 160 × 120 pixels, an image compressed into an image such as a JPEG image or a TIFF image, Or the image of the same data size as moving image data may be sufficient.
[0117]
  Further, the feature image 776a in the frame image corresponding to the moving image data of the time elapsed by Offset Time # 1 from Time # 1 which is the time of Bookmark # 1 registered as a bookmark, and the time of Bookmark # 1 which is registered as a bookmark The feature image 776b in the frame image corresponding to the moving image data of the time elapsed by Offset Time # 2 from # 1, and the moving image data of the time elapsed by Offset Time # 3 from Time # 1 which is the time of Bookmark # 1 registered as a bookmark A configuration of management information when storing each piece of coordinate information of the feature image 776c in the frame image corresponding to is described below. The configuration of the bookmark management information is the same as that described with reference to FIG.
[0118]
  In the configuration shown in FIG. 8, second feature information 788 is included in Bookmark information (not shown). The second feature information 788 stores the number of motion feature information and a plurality of motion feature information. In this embodiment, three pieces of motion feature information are stored as motion feature information # 1 (789a), motion feature information # 2 (789b), and motion feature information # 3 (789c). Hereinafter, each motion feature information will be specifically described.
[0119]
  Motion feature information # 1 (789a) stores Offset Time # 1, Position x1, and Position y1. Note that Position x1 and Position y1 are coordinate information representing the position of the feature image 776a. That is, when the upper left corner of the display screen is the origin (0, 0), the number of pixels in the horizontal direction at the position where the characteristic image 776a is located is Position x1, and the number of pixels in the vertical direction is Position y1.
[0120]
  Motion feature information # 2 (789b) stores Offset Time # 2, Position x2, and Position y2. Position x2 and Position y2 are coordinate information representing the position of the feature image 776b. That is, when the upper left corner of the display screen is the origin (0, 0), the number of pixels in the horizontal direction at the position where the feature image 776b is located is Position x2, and the number of pixels in the vertical direction is Position y2.
[0121]
  The motion feature information # 3 (789c) stores Offset Time # 3, Position x3, and Position y3. Position x3 and Position y3 are coordinate information representing the position of the feature image 776c. That is, when the upper left corner of the display screen is the origin (0, 0), the number of pixels in the horizontal direction at the position where the feature image 776c is located is Position x3, and the number of pixels in the vertical direction is Position y3.
[0122]
  Here, the management method for managing the coordinate information as the data in the motion feature information has been described. However, the information stored as the data in the motion feature information includes the rectangular information, the circle described above with reference to FIGS. It may be information, arbitrary shape information, object information, or function information.
[0123]
  Also, by interpolating the motion feature information set at intervals of several frames and calculating the motion feature information of the feature image of the frame without motion feature information, the coordinate information related to the feature image is predicted for each frame. Thus, the feature image can be shown more smoothly.
[0124]
  Also, the Offset Time stored in the motion feature information is set by the user. However, it is also possible to specify a time range for registering motion information at the time of bookmark registration and register motion feature information for each time interval set in advance by the user or the device. In this case, the frame of the moving image data corresponding to the registered time may be displayed and the coordinate information of the feature image may be designated. If object information or function information is stored in the motion feature information as information for extracting a feature image, it may be set in advance as in the above time interval.
[0125]
  Thereby, even when the feature image is moving, it is possible to manage the motion feature information corresponding to the feature image. Therefore, by using the motion feature information when moving image data is reproduced, it is possible to display a cursor or a title in conjunction with the motion of the feature image.
[0126]
  Next, the configuration of the recording / reproducing apparatus according to the embodiment of the present invention will be described with reference to FIG. In the recording / reproducing apparatus according to the embodiment of the present invention, as shown in FIG. 9, the audio signal is input to the audio input unit 750 while the video signal is input to the video input unit 751. Each signal is an analog or digital signal, and in the case of an analog signal, it is converted into a digital signal.
[0127]
  The signals from the audio input unit 750 and the video input unit 751 are converted into encoded video and audio data such as MPEG2 by the encoding / decoding processing unit 752. The format to be compressed may be MPEG1 or MPEG4 in addition to MPEG2, or JPEG or JPEG2000 when only video data is encoded.
[0128]
  Further, an error correction signal is added to the signal output from the encoding / decoding processing unit 752 by the error correction processing unit 753 and also modulated by the modulation / demodulation unit 754, and video and audio are recorded on the recording medium 755. Recorded as data.
[0129]
  When the recording medium is a disk medium, the control microcomputer 757 controls the servo processing unit 756 to record video and audio data. The control microcomputer 757 is controlled by the system microcomputer 758.
[0130]
  On the other hand, when the recorded data is reproduced or displayed in accordance with an instruction from the user, the instruction from the user is input from the input unit (position information specifying means, second partial data specifying means) 764 and is input by the system microcomputer 758. User instructions are processed.
[0131]
  If the instruction from the user is data reproduction, the system microcomputer 758 instructs the control microcomputer 757 to reproduce data. The control microcomputer 757 controls the servo processing unit 756 so as to read data from the recording medium 755.
[0132]
  The read data is demodulated through a modulation / demodulation unit 754, subjected to error correction by an error correction processing unit 753, and decoded by an encoding / decoding processing unit 752. Audio data of the decoded data is converted into an audio signal by the audio output unit 762 and output.
[0133]
  In addition, since the video data of the decoded data is combined with text, graphics, and OSD, the video combining unit (partial data processing means) 761 combines or switches the video data with data other than the video data. Processing is performed, and the video output unit 763 outputs the video signal.
[0134]
  In addition, text data and graphic data stored in the memory 759 are converted into video display data by the OSD processing unit 760, and then combined with the decoded video data and output from the video output unit 763 as a video signal. Thus, the composite screen can be displayed on display means such as a display (not shown).
[0135]
  Furthermore, when the recorded video data and text data or graphic data are displayed simultaneously, the video synthesis unit 761 synthesizes the video data and other data, and outputs either one of the images. You can also. That is, it is possible to output a designated image by performing output image switching control on the video composition unit 761 by the system microcomputer 758 based on a user instruction.
[0136]
  Further, in the present embodiment, a configuration has been described in which bookmark data such as a title and a thumbnail recorded when a bookmark is designated is stored in a moving image file that designates the bookmark. However, the present invention is not necessarily limited to this configuration, and the bookmark data may be recorded in a file other than the moving image file, and the file name of the file in which the bookmark data is recorded may be recorded and referenced in the bookmark management information. However, in that case, when the moving image file designated as a bookmark is recorded on a device other than a recording medium such as a PC, the bookmark data must also be copied to the device.
[0137]
  The moving image file for registering the bookmark may be a general-purpose file format such as QuickTime or ASF (Advanced Streaming Format). In addition, when QuickTime is set as a moving image file format, the bookmark information may be managed as a Text track or a Video track.
[0138]
  In addition, the recording medium having the above configuration is a writable recording medium such as an optical disk, a memory, and a hard disk, a read-only recording medium such as a CD and a DVD-Video, and a single time such as a CD-R and a DVD-R. Any of the writable recording media may be used.
[0139]
  Next, processing procedures in the data management method and data display method of the present embodiment will be described. 10 and 11 are flowcharts showing processing procedures in the bookmark management method and bookmark display method according to the present embodiment.
[0140]
  First, a processing procedure for recording bookmark management information in data management information when a bookmark is added to a moving image file will be described with reference to FIG.
[0141]
  When the user selects a movie file for which a bookmark is to be specified from the index screen, the movie file is played. Then, the user pauses at an image for which a bookmark is to be registered, and the user instructs bookmark registration.
[0142]
  At this time, as shown in FIG. 10, the user designates a moving image file to register a bookmark and a bookmark position (S41). In the following description, the step is simply denoted as S. Next, management information of the moving image file is acquired from the specified moving image file (S42).
[0143]
  Further, based on the designated bookmark position, the offset time from the start of bookmark reproduction or the offset byte number from the beginning of the moving image data to be reproduced is acquired as the bookmark time (S43). Thereafter, a frame image of the moving image file corresponding to the acquired bookmark time is acquired (S44).
[0144]
  Subsequently, a bookmark image is generated (S45). In this step, when the frame image of the moving image file is a bitmap image of 704 × 480 pixels, for example, the reduction conversion to convert the bitmap image to an image of 160 × 120 pixels, and from the bitmap image to the JPEG image or TIFF Conversion to compressed data such as images is performed. Note that the bookmark image may be recorded with the same image size as the moving image file without being converted into a reduced image.
[0145]
  Next, in order to add a bookmark image to the moving image file, the moving image file is read, moving image file management information is acquired, and the number of tracks is acquired from the moving image file management information (S46). Then, the loop 1 constituted by steps S48 to S50 described later is executed as many times as the number of tracks (S47).
[0146]
  In loop 1, management information of one track is acquired (S48), and it is determined whether or not the track for which management information has been acquired in S48 is a thumbnail track (S49). If it is determined in S49 that the track is a thumbnail track, the bookmark image is registered as a thumbnail (S50). On the other hand, if it is determined in S49 that the track is not a thumbnail track, the process returns to S47 and loop 1 is executed again.
[0147]
  After the end of loop 1 (S51), it is determined whether or not a thumbnail track exists (S52). If no thumbnail track exists, a new thumbnail track is generated (S53). When the thumbnail track exists, the bookmark image is registered as a thumbnail (S54).
[0148]
  Subsequently, it is determined whether or not feature information is designated by the user (S55). If feature information is designated, the feature information is registered in the data management information (S56).
[0149]
  Finally, the management information of the moving image file is updated (S57), and recording is performed on the medium (S58), whereby the bookmark information is recorded in the management information of the moving image file.
[0150]
  In the above-described procedure, bookmark registration is realized by a user operation. However, bookmark registration may be performed by the apparatus automatically adding a bookmark.
[0151]
  Next, a processing procedure for displaying a bookmark image based on bookmark management information of a moving image file will be described with reference to FIG.
[0152]
  As shown in FIG. 11, first, the user specifies a bookmark corresponding to a bookmark image to be displayed (S61). Thereafter, the moving image file is read, the management information stored in the moving image file is acquired (S62), the number of tracks is acquired from the management information (S63), and the following S65 to S75 are sequentially performed for each track. The loop 1 consisting of these steps is executed (S64).
[0153]
  That is, for each track, information of one track is acquired from the management information (S65), and it is determined whether or not the track for which the track information is acquired in S65 is a thumbnail track (S66). If it is not a thumbnail track, the next track is searched.
[0154]
  On the other hand, if the track from which the track information is acquired in S65 is a thumbnail track, the number of bookmarks registered in the track is acquired (S67), and the number of acquired bookmarks is sequentially increased from S69 to S71 described later. The loop 2 constituted by these steps is executed (S68).
[0155]
  That is, it is determined whether or not a bookmark exists in the moving image file (S69). If a bookmark exists, a bookmark image is acquired (S70), and the bookmark image is displayed (S71).
[0156]
  On the other hand, when the bookmark image does not exist, the next bookmark is referred to (S68 to S72). Then, by performing loop 2 for each bookmark, it is possible to display as many bookmark images as the number of registered bookmarks.
[0157]
  Further, after the end of loop 2 (S72), it is determined whether or not feature information exists in the moving image file (S73). When there is feature information, the feature information is acquired (S74), and a feature image is specified based on the feature information (S75).
[0158]
  Thus, if loop 1 consisting of steps S65 to S75 is executed for the number of tracks, a bookmark image can be displayed for each track, and if the bookmark image has a feature image, the feature image is specified. can do.
[0159]
  As described above, the data management method according to the present embodiment is a method for recording bookmark management information related to bookmark data at an arbitrary position of moving image data recorded on a recording medium on the recording medium, and includes a bookmark image. In this configuration, feature information related to the feature image data included is recorded on a recording medium.
[0160]
  According to the above configuration, the bookmark image can be managed by the bookmark management information for the moving image data recorded on the recording medium. Further, the feature image in the bookmark image can be managed based on the feature information.
[0161]
  For example, when the moving image data is data obtained by shooting an athletic meet, the image of the user's child as the feature image can be managed based on the feature information by using the data management method of the present embodiment. Therefore, even when the athletic meet video data is sent to a remote family, it is possible to instantly identify and reproduce the child image from the displayed image and easily find out where the child is.
[0162]
  The data management method of the present invention is a management method for recording arbitrary position information of data recorded on a recording medium on the recording medium, and stores arbitrary partial data of data corresponding to arbitrary position information. A method of recording management information to be managed may be used.
[0163]
  Here, the management information for managing the arbitrary partial data of the data corresponding to the arbitrary time may be coordinate information indicating an arbitrary position of the display image data. Furthermore, the management information for managing the arbitrary partial data of the data corresponding to the arbitrary time may be rectangular information indicating an arbitrary range of the display image data.
[0164]
  Further, the management information for managing the arbitrary partial data of the data corresponding to the arbitrary time may be circle information indicating an arbitrary range of the display image data. Further, the management information for managing the arbitrary partial data of the data corresponding to the arbitrary time may be arbitrary shape information indicating an arbitrary range of the display image data.
[0165]
  Further, the management information for managing any partial data of the data corresponding to the above arbitrary time may be object information indicating image data. Furthermore, the management information for managing the arbitrary partial data of the data corresponding to the arbitrary time may be information indicating a processing function for extracting an area from the display image data. Alternatively, the management information for managing arbitrary partial data of the data corresponding to the arbitrary time may be information corresponding to a plurality of image data within an arbitrary time interval.
[0166]
  The recording / reproducing apparatus according to the present invention also includes a first data recording means for recording data and management information for managing the data on a recording medium, and for reproducing the recorded data with reference to the management information. First reproduction means, position information designation means for designating arbitrary position information from the reproduction time when the recorded arbitrary data is reproduced, and partial data of data corresponding to the reproduction time designated by the position information designation means Partial data designating means for designating, second data recording means for storing the partial data information designated by the partial data designating means on the recording medium, and partial data acquisition for obtaining the partial data information recorded on the recording medium Comprising: means, partial data processing means for extracting partial data with reference to position information and partial data information, and second reproduction means for reproducing partial data It may be.
[0167]
  Here, in the recording / reproducing apparatus having a plurality of partial data processing means for extracting the partial data, the partial data to be extracted is data processed by one partial data processing means among the plurality of partial data processing means. May be. In the recording / reproducing apparatus having a plurality of partial data processing means for extracting the partial data, the extracted partial data is data processed by at least one partial data processing means among the plurality of partial data processing means. It may be.
[0168]
  The recording medium according to the present invention is a recording medium on which arbitrary position information of data is recorded, and may be configured to record management information for managing arbitrary partial data of data corresponding to the arbitrary position information. .
[0169]
  According to the above configuration, it becomes possible to record arbitrary partial data of data corresponding to arbitrary position information as bookmark information in the bookmark management information, and by referring to the bookmark management information, the photographer and the captured video can be recorded. It becomes possible to show a partial image of an image that the viewer wants to pay particular attention. In addition, in data transmitted for each object such as MPEG4, it is possible to indicate a characteristic part of each object by managing object information as bookmark information.
[0170]
  Also, by registering any time interval of a moving image having a time axis as a bookmark and managing the feature portion of the frame image within the time interval as bookmark information, the feature portion corresponding to the moving image is shown to the user Is possible.
[0171]
  The data display method of the present invention includes a step of designating a recording position of the first partial data recorded on the recording medium, a step of designating the second partial data included in the first partial data, and the first A step of extracting the second partial data by referring to the first management information relating to the recording position of the partial data in the recording medium and the second management information relating to the second partial data; and a reproduced image of the second partial data May be included.
[0172]
According to the above configuration, the recording position of the first partial data and the second partial data are designated by the user, the first management information of the designated first partial data, the second management information of the second partial data, Then, the second partial data is extracted, and a reproduced image of the second partial data is further displayed.
[0173]
For example, in the case where moving image data recorded on a recording medium is reproduced and displayed on a display or the like, according to the data display method having the above-described configuration, the data related to the bookmark image of moving image data is used as the first management information as the first partial data. And the data related to the feature image in the bookmark image can be displayed as the second partial data by the second management information.
[0174]
As described above, based on the first management information and the second management information, it is possible to display data obtained by subdividing the data recorded on the recording medium into two stages. Therefore, the data recorded on the recording medium can be presented to the user in more detail.
[0175]
  The computer-readable recording medium of the present invention includes first management information relating to a recording position of first partial data recorded at an arbitrary position, and second management information relating to second partial data included in the first partial data. And may be recorded.
[0176]
According to the above configuration, the recording position of the first partial data can be managed by the first management information. Further, the second partial data in the first partial data can be managed based on the second management information.
[0177]
For example, in the case where the recording medium of the present invention is a recording medium for recording moving image data, according to the above configuration, data related to the bookmark image of moving image data is managed as the first partial data by the first management information, and the bookmark. Data relating to the feature image in the image can be managed as the second partial data by the second management information.
[0178]
As described above, based on the first management information and the second management information, it is possible to manage data obtained by subdividing the data recorded on the recording medium into two stages. Therefore, the data recorded on the recording medium can be managed in more detail.
[0179]
【The invention's effect】
  As described above, the data management method of the present invention is a method of recording the second management information related to the second partial data included in the first partial data on the recording medium.
[0180]
  According to the above configuration, the recording position of the first partial data recorded on the recording medium can be managed by the first management information. Further, the second partial data in the first partial data can be managed based on the second management information.
[0181]
  As described above, based on the first management information and the second management information, it is possible to manage data obtained by subdividing the data recorded on the recording medium into two stages. Therefore, there is an effect that the data recorded on the recording medium can be managed in more detail.
[0182]
  Further, as described above, the data management method of the present invention is based on the second partial data for the image displayed based on the first partial data in the data management method having the above configuration. It is the structure which is the coordinate information which shows the coordinate of the image displayed.
[0183]
  According to the above configuration, the position of the image displayed based on the second partial data can be specified by the coordinate information. Therefore, it is possible to inform the user of the position of the image displayed based on the second partial data from the image displayed based on the first partial data.
[0184]
  In addition, as described above, the data management method of the present invention is based on the second partial data in the data management method having the above configuration, in which the second management information is displayed on the image displayed based on the first partial data. This is a configuration that is rectangle information for setting a rectangle that includes an image to be displayed.
[0185]
  According to the said structure, it becomes possible to specify the image displayed based on 2nd partial data by the said rectangle. Therefore, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data.
[0186]
  In addition, as described above, the data management method of the present invention is based on the second partial data in the data management method having the above configuration, in which the second management information is displayed on the image displayed based on the first partial data. This is a configuration that is circle information for setting a circle including an image to be displayed.
[0187]
  According to the above configuration, the image displayed based on the second partial data can be specified by the circle. Therefore, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data.
[0188]
  In addition, as described above, the data management method of the present invention is based on the second partial data in the data management method having the above configuration, in which the second management information is displayed on the image displayed based on the first partial data. This is a configuration that is arbitrary shape information for setting a polygon including an image to be displayed.
[0189]
  According to the said structure, it becomes possible to specify the image displayed based on 2nd partial data by the said polygon. Therefore, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data.
[0190]
  In addition, as described above, the data management method of the present invention is the data management method configured as described above, wherein the data recorded on the recording medium is data capable of managing moving images in object units. 2 management information is a structure which is object information for identifying the object which comprises the image displayed based on the said 2nd partial data.
[0191]
  According to the above configuration, it is possible to specify an object constituting an image to be displayed based on the second partial data based on the object information. Therefore, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data.
[0192]
  Further, as described above, the data management method of the present invention is based on the second partial data from the image displayed based on the first partial data in the data management method having the above configuration. It is the structure which is the function information which shows the processing function for extracting the image displayed.
[0193]
  According to the above configuration, it is possible to specify a processing function for extracting an image to be displayed based on the second partial data, based on the function information. Therefore, the processing function is executed, and it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data.
[0194]
  Further, as described above, the data management method of the present invention is based on the second partial data in the data management method having the above configuration in which the second management information is displayed on the basis of the first partial data. It is the structure which is the motion information which shows the state which the image displayed moves.
[0195]
  According to the above configuration, the movement state of the image displayed based on the second partial data can be specified by the motion information. Therefore, even if the image displayed in the second partial data is moving within the image displayed based on the first partial data, the second partial data is extracted from the image displayed based on the first partial data. It is possible to easily extract only the image displayed based on the above.
[0196]
  In addition, as described above, the data management method of the present invention is the data management method configured as described above, wherein the motion information is displayed based on the second partial data with respect to an image displayed based on the first partial data. It is the structure which is the information which shows the coordinate of the image to show in a time series.
[0197]
  According to the said structure, the coordinate of the image displayed based on 2nd partial data can be pinpointed in time series by the said motion information. Therefore, even if the image displayed in the second partial data is moving within the image displayed based on the first partial data, the second partial data is extracted from the image displayed based on the first partial data. It is possible to extract more easily only the image displayed based on.
[0198]
  MaIn addition, as described above, the recording / reproducing apparatus of the present invention includes the position information specifying means for specifying the recording position of the first partial data recorded on the recording medium, and the second partial data included in the first partial data. The second partial data designating means, the first management information related to the recording position of the first partial data on the recording medium, and the second management information related to the second partial data are referred to, and the second partial data is A partial data processing means for extracting and a display means for displaying a reproduced image of the second partial data are provided.
[0199]
  According to the above configuration, the user can designate the first partial data and the second partial data by the position information designation unit and the second partial data designation unit. Further, the second partial data is extracted by the partial data processing means from the first management information of the first partial data and the second management information of the second partial data, and the reproduced image of the second partial data is further displayed by the display means. Is displayed.
[0200]
  As described above, based on the first management information and the second management information, it is possible to display data obtained by subdividing the data recorded on the recording medium into two stages. Therefore, it is possible to present the data recorded on the recording medium to the user in more detail.
[0201]
  Further, as described above, the recording / reproducing apparatus of the present invention, in the recording / reproducing apparatus having the above-described configuration, displays the partial data processing unit based on the second partial data from the image displayed based on the first partial data. At least one processing function is executed among a plurality of processing functions for extracting an image to be processed.
[0202]
  According to the above configuration, since the processing function is executed by the partial data processing means, it is possible to easily extract only the image displayed based on the second partial data from the image displayed based on the first partial data. Has the effect of being possible.
[Brief description of the drawings]
[Figure 1]BookIt is a schematic diagram which shows the data structure of the recording medium which concerns on one Embodiment of invention.
FIG. 2 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information in a case where feature information of an image registered as a bookmark is coordinate information, and a management structure of the feature information.
FIG. 3 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information in a case where feature information of an image registered as a bookmark is rectangular range information, and a management structure of the feature information.
FIG. 4 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information in a case where feature information of a bookmark-registered image is circle information, and a management structure of the feature information.
FIG. 5 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information when feature information of an image registered as a bookmark is arbitrary shape information, and a management structure of the feature information.
FIG. 6 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information when feature information of an image registered as a bookmark is object information, and a management structure of the feature information.
FIG. 7 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information in a case where feature information of an image registered as a bookmark is function information, and a management structure of the feature information.
FIG. 8 is a diagram illustrating a temporal relationship between moving image data, bookmark data, and feature information when feature information of an image registered as a bookmark moves, and a management structure of the feature information.
FIG. 9 is a block diagram showing a configuration of a recording / reproducing apparatus according to an embodiment of the present invention.
FIG. 10 is a flowchart showing a procedure for registering a moving image file in bookmark management information.
FIG. 11 is a flowchart illustrating a bookmark display procedure based on bookmark management information of a moving image file.
FIG. 12 is a schematic diagram showing a data structure of a conventional recording medium.
[Explanation of symbols]
715 Bookmark management information (first management information)
720 Bookmark data (first partial data)
730 feature information (second management information)
731 Feature information (second management information)
732 Feature information (second management information)
761 Video composition unit (partial data processing means)
764 Input unit (position information specifying means, second partial data specifying means)

Claims

A method for recording, on the recording medium, first management information relating to a recording position of the first partial data recorded on the recording medium,
Second management information, which is coordinate information indicating coordinates of an image displayed based on the second partial data included in the first partial data, with respect to an image displayed based on the first partial data, is the second partial data. A data management method characterized in that the information is recorded on the recording medium as information on the recording medium.

A method for recording, on the recording medium, first management information relating to a recording position of the first partial data recorded on the recording medium,
Second management information, which is rectangular information for setting a rectangle that includes an image displayed based on the second partial data included in the first partial data, in an image displayed based on the first partial data. A data management method comprising: recording information on the second partial data on the recording medium.

A method for recording, on the recording medium, first management information relating to a recording position of the first partial data recorded on the recording medium,
Second management information that is circle information for setting a circle that includes an image displayed based on the second partial data included in the first partial data in an image displayed based on the first partial data. A data management method comprising: recording information on the second partial data on the recording medium.

A method for recording, on the recording medium, first management information relating to a recording position of the first partial data recorded on the recording medium,
Second management that is arbitrary shape information for setting a polygon that includes an image displayed based on the second partial data included in the first partial data in an image displayed based on the first partial data. A data management method for recording information on the recording medium as information on the second partial data.

A method for recording, on a recording medium, first management information relating to a position at which first partial data, which is data capable of managing moving images in object units, is recorded on the recording medium,
Second management information, which is object information for identifying an object constituting an image displayed based on the second partial data included in the first partial data, is stored in the recording medium as information related to the second partial data. A data management method characterized by recording.

A method for recording, on the recording medium, first management information relating to a recording position of the first partial data recorded on the recording medium,
Second management information which is function information indicating a processing function for extracting an image displayed based on the second partial data included in the first partial data from an image displayed based on the first partial data. A data management method, wherein the information relating to the second partial data is recorded on the recording medium.

The second management information is motion information indicating a state in which an image displayed based on the second partial data moves in an image displayed based on the first partial data. 7. The data management method according to any one of 6.

The motion information is the second part of the image displayed based on the first part data. The data management method according to claim 7, wherein the information is a time-series information indicating coordinates of an image displayed based on the data.

Position information designating means for designating the recording position of the first partial data recorded on the recording medium;
  Second partial data specifying means for specifying the second partial data included in the first partial data;
  Partial data processing means for extracting second partial data by referring to the first management information relating to the recording position of the first partial data in the recording medium and the second management information relating to the second partial data;
  Display means for displaying a reproduced image of the second partial data,
  The partial data processing means executes at least one processing function among a plurality of processing functions for extracting an image displayed based on the second partial data from an image displayed based on the first partial data. And a recording / reproducing apparatus.