JP4243862B2 - コンテンツ利用装置およびコンテンツ利用方法 - Google Patents

Description

この発明は、例えば、音楽コンテンツデータや映像コンテンツデータを利用するための装置および方法に関する。

ＣＤ（Compact Disc）などの記録媒体やインターネットなどの伝送媒体など、種々の媒体を通じて、様々な音楽コンテンツが豊富に提供されている。これら豊富に提供される音楽コンテンツをユーザーのニーズに応じた態様で利用できるようにするための種々の技術が提案されている。

例えば、特許文献１には、ＣＤやＭＤ（Mini Disc:登録商標）などに記録する音楽コンテンツについて、小節の位置を自動計算し、当該音楽コンテンツの小節番号の表示や小節単位の頭出しをできるようにする再生装置についての発明が開示されている。この特許文献１に記載の発明により、目的とする音楽コンテンツの各小節番号を正確に把握し、目的とする小節の先頭に再生位置を簡単に位置付けて、その小節だけを繰り返し再生するなどのことができるようにされている。したがって、音楽の学習や楽曲の練習の効率を上げることができるようにされる。

また、特許文献２には、楽曲（音楽コンテンツ）のオーディオ信号（音響信号）から、その音楽コンテンツの「サビ」の部分等の音響的な変節点を抽出できるようにする装置等の発明が開示されている。この特許文献２に記載の発明により、音声コンテンツについて、歌の出だし、歌の２番、サビなどの頭出しを簡単に行うことができるようにされ、音声コンテンツの好みの部分のみを抽出したり再生したりすることが比較的に簡単に行うことができるようにされる。

このような発明を用いることにより、音楽コンテンツをより柔軟に、かつ、効果的に利用することができるようにされる。なお、上述した特許文献１、２は、以下の通りである。
特開平８−５５４６４号公報 特開２００３−１７７７８４号公報

しかしながら、上述した特許文献１に記載の発明においては、小節区切り情報自体はユーザーが入力しなくてはならない。また、特許文献２に記載の発明においては、音楽コンテンツを元に、ユーザー側において音声コンテンツについての分析を予め行うようにしている。つまり、目的とする音楽コンテンツを目的とする態様で利用できるようにするために、事前の準備が必要である。この事前の準備にユーザーの手間や時間がかかる場合があり、手軽に利用できない場合もある。

そして、近年においては、豊富に提供される音楽コンテンツデータや映像コンテンツデータについて、任意の小節の頭出しや繰り返し、音楽的な変節点への位置付けなどのほか、ユーザー側でリアルタイムに再編集したり、コンテンツ中の好みの一部分だけ加工して再構成したりして利用したいとする要求が高くなってきている。つまり、豊富に提供される音楽コンテンツや映像コンテンツをそのまま利用するのではなく、ユーザーの好みに応じた種々の態様で利用できるようにしたいとの要求が高まっている。

しかし、音楽コンテンツや映像コンテンツ、あるいは、映画などのように音声と映像とを同期を取って再生するようにするいわゆるＡＶ（Audio/Visual）コンテンツを、加工したり、再構成したりする際に、コンテンツの時間的な区切りの情報がないと必要な部分を特定して加工したり再構成したりすることは難しい。そして、各コンテンツの時間的な区切りの情報を得るために、上述した特許文献１，２に記載の発明のように、事前準備が必要になったのでは、コンテンツの手軽な利用を阻害してしまいかねない。

以上のことに鑑み、この発明は、音楽コンテンツ、映像コンテンツ、ＡＶコンテンツなどの種々のコンテンツの目的とする部分を正確に特定できるようにし、特定した部分を加工したり、あるいは、特定した部分を他の特定した部分と入れ換えたりするコンテンツの再編集や再構成を手軽に行って利用できるようにする装置および方法を提供することを目的とする。

上記課題を解決するため、請求項１に記載の発明のコンテンツ利用装置は、
記録媒体に記録されたコンテンツデータに対する区切り情報を取得する取得手段と、
ユーザーの動きを検出するセンサ手段と、
前記取得手段を通じて取得した前記区切り情報と、前記センサ手段からの検出出力から予測するユーザーの次の動作タイミングとに基づいて、処理対象の前記コンテンツデータについて、ユーザーの次の動作タイミングにコンテンツの区切り位置を合わせるように調整して、新たな態様で前記コンテンツを再生できるようにするコンテンツデータを生成する生成処理手段と
を備える。

この発明によれば、コンテンツをユーザー側で再構成したり編集したりする場合にコンテンツの区切り情報を利用することにより、容易に再編集や再構成を行え、各ユーザーの好みなどに応じた質の高いコンテンツを作ることができる。

コンテンツの区切り情報を用いると、ユーザーの動きにコンテンツの区切りを合わせるなどの従来できなかったことが実現可能となり、コンテンツへのシンクロ感を強めることができる。また、コンテンツの区切り情報に合わせて別のコンテンツを再生することで、印象の強いコンテンツを再構成することができる。

また、既存のＣＤに記録された音楽コンテンツデータ、ＡＴＲＡＣ（Adaptive Transform Acoustic Cording）、ＭＰ３（Motion Picture Expert Group Audio Layer 3）等の圧縮方式でデータ圧縮されてネットワークなどを通じて提供されるコンテンツデータに対しても、対応する区切り情報を準備することで、既存の音楽コンテンツデータについてもユーザーが再編集したり再構成したりして利用できる。

以下、図を参照しながら、この発明による装置、方法についての一実施の形態について説明する。

［記録再生装置について］
図１は、この発明による装置、方法の一実施の形態が適用されたこの実施の形態の記録再生装置を説明するためのブロック図である。図１に示すように、この実施の形態の記録再生装置は、制御部１０と、出力部２０と、記憶部３０と、外部インターフェース（以下、外部Ｉ／Ｆと略称する。）４１と、入力インターフェース（以下、入力Ｉ／Ｆと略称する。）４２と、デジタルインターフェース（以下、デジタルＩ／Ｆと略称する。）４３と、無線インターフェース（以下、無線Ｉ／Ｆと略称する。）４４と、送受信アンテナ４５とを備えたものである。

制御部１０は、ＣＰＵ（Central Processing Unit）１１と、ＲＯＭ（Read Only Memory）１２と、ＲＡＭ（Random Access Memory）１３とが、ＣＰＵバス１４を通じて接続されて構成されたマイクロコンピュータであり、この実施の形態の記録再生装置の各部を制御するものである。

また、出力部２０は、音声デコーダ２１と、音声出力部２２と、映像デコーダ２３と、映像表示部２４とを備えたものである。音声出力部２２は、スピーカであり、映像表示部２４は、例えば、ＬＣＤ（Liquid Crystal Display）、ＰＤＰ（Plasma Display Panel）、有機ＥＬ（Electro Luminescence）ディスプレイ、ＣＲＴ（Cathode-Ray Tube）等の表示素子である。

記憶部３０は、インターフェース（以下、Ｉ／Ｆと略称する。）３１と、記録媒体３２とを備えたものである。記録媒体３２としては、例えば、ハードディスク、光ディスク、光磁気ディスク、半導体メモリー、フレキシブルディスクなどの種々の記録媒体を用いることが可能であり、この発明による記録媒体が適用されたものである。

また、記録媒体３０として、例えば、複数のハードディスクを用いる構成としたり、複数の光ディスクを用いる構成としたりするなど、同種の記録媒体を複数用いるようにしたり、あるいは、ハードディスクと光ディスクとを用いる構成としたり、光ディスクと光磁気ディスクとを用いる構成としたりするなど、種類の異なる複数の記録媒体を用いる構成とすることが可能である。

そして、記録媒体３２は、後述もするように、再生対象の音声コンテンツデータ、映像コンテンツデータ、ＡＶコンテンツデータを記憶保持するものである。また、記録媒体３２は、各コンテンツデータに対応するコンテンツ属性情報であって、コンテンツデータの種々の区切りの位置を示す区切り情報をも記憶保持する。この区切り情報は、コンテンツデータとは別個独立に取得される情報である。

外部Ｉ／Ｆ４１は、この実施の形態の記録再生装置においては、インターネット１００に接続するためのものである。したがって、この実施の形態の記録再生装置は、インターネット１００から音声コンテンツデータ、映像コンテンツデータ、ＡＶコンテンツデータ、テキストデータ、その他の種々のデータをダウンロードしてきて、Ｉ／Ｆ３１を通じて記録媒体３２に記憶保持させることができるようにしている。逆に、この実施の形態の記録再生装置から、目的とするサーバー装置に情報を送信して、当該情報を記憶保持させるようにすることも可能である。

入力Ｉ／Ｆ４２は、ユーザーからの操作入力を受け付けるキー操作部である。入力Ｉ／Ｆ４２を通じて受け付けられた操作入力は、電気信号に変換されて制御部１０に供給される。これにより、制御部１０は、ユーザーからの操作入力に応じて、この実施の形態の記録再生装置を制御することができるようにされる。

デジタルＩ／Ｆ４３は、例えば、ＩＥＥＥ（Institute of Electrical and Electronics Engineers）１３９４、あるいは、ＵＳＢ（Universal Serial Bus）、あるいは、その他のデジタルインターフェースに準拠したものであり、専用線を通じて、他の電子機器に接続し、例えば、コンテンツデータや区切り情報などのデータの送受を行うことができるようにしている。

また、無線Ｉ／Ｆ４４、および、送受信アンテナ４５は、例えば、無線ＬＡＮなどに接続し、相互に情報の送受を行うことができる。また、この無線Ｉ／Ｆ４４、および、送受信アンテナ４５を通じて、コンテンツデータや区切り情報を無線ＬＡＮシステムから提供を受けることもできるようにしている。

そして、この実施の形態の記録再生装置においては、記憶部３０の記憶媒体３２にコンテンツデータが記憶保持されるとともに、記憶保持されているコンテンツデータに対応する区切り情報が取得されて記憶保持される。この場合、コンテンツ属性情報である区切り情報は、外部インターフェース４１を用いてインターネット経由でサーバー等他の機器から提供を受けるものである。また、上述もしたように、この実施の形態の記録再生装置から、コンテンツデータや区切り情報を、他の機器へ伝送することもできるようにしている。もちろん、無線インターフェース４４を用いてコンテンツ属性情報である区切り情報を受信・伝送することもできる。

そして、入力Ｉ／Ｆ４２を通じて、記録媒体３２に記録保持されている目的とする音声コンテンツの再生が指示された場合には、制御部１０は、再生対象のコンテンツデータについて、ユーザーからの指示入力と区切り情報とに基づいて、再構成し、この再構成されたコンテンツデータを出力部２０に供給し、当該コンテンツデータに応じた音声、映像を出力して、視聴することができるようにしている。

［コンテンツデータに対する区切り情報について］
コンテンツデータに対するコンテンツ属性情報である区切り情報は、コンテンツデータに応じて様々なものがある。例えば、コンテンツデータが音楽データである場合には、これに対する区切り情報は、音楽的に特徴のある変化点、あるいは、音楽的に意味のある区間を示す情報であり、以下のように種々のものがある。

例えば、当該音楽データを再生することにより得られる音楽について、１小節ごとの区切りを示す情報、２小節ごと、３小節ごと、４小節ごと、…などのような複数小節ごとの区切り位置、イントロの開始点、イントロの終了点、メロディの変化点、さび部分の開始点、さび部分の終了点、歌い出しの位置、歌い終わりの位置、間奏の開始点、間奏の終了点、エンディングの開始点、エンディングの終了点、コーラスの開始点、コーラスの終了点、所定の楽器の演奏開始点、所定の演奏終了点、デュエット曲の各パートの開始点、デュエット曲の各パートの終了点などを示す情報であり、その他、音楽コンテンツについての所定の区間の開始点、終了点を示す情報である。

なお、メロディの変化点は、一般的な楽曲では、イントロ、Ａメロ（Ａメロディ）、Ｂメロ（Ｂメロディ）、サビ、エンディングなどのメロディ（旋律）の異なる部分によって構成されており、このようにメロディの異なる各部分の変化点を示すものである。

また、ここでは、開始点と終了点という文言を用いたが、例えば、小節のように、所定の区間が途切れることなく連続する場合においては、終了点を用いなくても、次の区間の開始位置の直前が、当該区間の終了点として用いるようにすることも可能である。すなわち、必ず、終了点を示す情報が存在するものではなく、区切り情報として開始点を示す情報のみからなる場合ももちろんある。

また、コンテンツデータが映像データである場合には、これに対する区切り情報は、映像的に特徴のある変化点、あるいは、映像的に意味のある区間を示す情報であり、以下のように種々のものがある。

例えば、映像のシーンチェンジ点、映像のカットチェンジ点、目的とする対象物や対象人物の登場点、目的とする対象物や対象人物の退場点、アクションシーンやカーチェイスシーンなどの目的とするシーンの開始点と終了点、輝度、色相、色の飽和度（彩度）などの画質の変化点、フェードインの開始点や終了点、フェードアウトの開始点や終了点などであり、その他、映像コンテンツについての所定の区間の開始点、終了点を示す情報である。

なお、映像コンテンツデータの場合において、映像のシーンチェンジは、屋内から屋外へなどのように、シーン自体は変化する場合であり、カットチェンジは、同じ場面であるが、正面からの視点か側面からの視点に変わるというように、視点（カメラ）が変えられる場合である。

そして、映像コンテンツの場合にも、所定の区間が途切れることなく連続する場合においては、終了点を用いなくても、次の区間の開始位置の直前が、当該区間の終了点として用いるようにすることも可能である。すなわち、必ず、終了点を示す情報が存在するものではなく、区切り情報として開始点を示す情報のみからなる場合ももちろんある。

また、音声と映像とが同期を取って再生するようにされるＡＶコンテンツの場合には、その音声部分と映像部分とのそれぞれについて、上述した音声コンテンツの場合の区切り情報と映像コンテンツの場合の区切り情報とを用いることが可能である。

また、区切り情報は、種々の態様で表現することができる。例えば、コンテンツデータが光ディスクに記録された音楽コンテンツデータなどの場合には、その区切り情報としては、サブコードの時間情報や、光ディスクのセクタアドレス、クラスタアドレス、先頭からのデータ数（バイト数やビット数）などを用いることが可能である。また、コンテンツデータがテレビやビデオなどのＡＶコンテンツや映像コンテンツの場合には、コンテンツのタイムコードやコンテンツの先頭からのバイト数やビット数、サンプル数、ＧＯＰ（Group Of Picture）の数、映像フレームの数、サウンドフレームの数などを用いることができる。また、音声コンテンツデータがデータ圧縮されたものである場合には、先頭からの圧縮ブロックの数を用いることができる。

また、バイト数、ビット数、サンプル数、ＧＯＰ（Group Of Picture）の数、映像フレームの数、サウンドフレームの数、圧縮ブロックの数を用いる場合には、先頭からの数（量）で表すものに限らず、直前の区切り情報からの差分として表現するようにしてもよい。また、予め決められた所定の位置、例えば、最後尾の位置などを基準として、表すようにしてももちろんよい。

また、区切り情報は、数式によっても表現することが可能である。例えば、最初の区切り区間の長さが値ａであり、次に、長さが値ｂである区間がｎ個続き、次に、長さが値ｃである区間がｍ個続くなどという場合には、例えば、ａ＋ｂ・ｎ＋ｃ・ｍなどのように表現できる。この式において、記号「・」は繰り返し（掛け算）を意味している。この他、種々の態様で表現するようにしてもよい。

また、上述のように、区切り情報は、種々のものがあり、その表現形式も様々なものが可能であるので、区切り情報は、１つのコンテンツデータに対して必ず１種類というように決まるものではない。１つのコンテンツデータに対して、複数種類の区切り情報が存在する場合ある。

そして、１つのコンテンツデータに複数種類の区切り情報が存在する場合には、例えば、予め決められた区分情報を付加するようにし、この区分情報によって、どのような内容の、どのように表現された区分情報かを把握できるようにすることによって、１つのコンテンツデータに対する複数の区切り情報を使い分けるようにすることが可能になる。

また、コンテンツデータとそのコンテンツ属性情報である区切り情報とは、個々のコンテンツデータに付され、個々のコンテンツデータのそれぞれを識別できるようにする、例えばＩＳＲＣ（International Standard Recording Code）のような識別子によって、対応付けられ、識別子からコンテンツデータと区切り情報とのいずれをも検索することができるようにされる。

そして、コンテンツデータの提供者やコンテンツデータの提供者から依頼された者が、各コンテンツデータに対応して、正確な区切り情報を作成し、これが光ディスクや光磁気ディスク、あるいは、半導体メモリーなどの記録媒体に記録されて、あるいは、インターネットなどのネットワークを通じて提供するようにされる。

したがって、例えば、複数の楽曲の音楽コンテンツデータが記録されたＣＤが作成され、これが販売されてユーザーの手に渡るような場合であっても、そのＣＤに記録された音楽コンテンツデータに対する区切り情報を作成して、種々の記録媒体やネットワークを介して、コンテンツデータとは別個に提供することが可能できるようにされる。

［記録媒体３２について］
次に、この実施の形態の記録再生装置において用いられる記録媒体３２の具体例について説明する。図２、図３は、この実施の形態の記録再生装置が利用可能な記録媒体の具体例を説明するための図であり、図２Ａがハードディスク（ハードディスクドライブ）３２Ａの場合を、図２Ｂが光ディスク３２Ｂの場合を、また、図３は、光ディスクとハードディスク（ハードディスクドライブ）とを併用する場合を、それぞれ説明するための図である。

まず、図２Ａに示すように、記録媒体３２として、ハードディスク３２Ａを用いる場合について説明する。図２Ａに示すように、音声コンテンツデータ、映像コンテンツデータ、ＡＶコンテンツデータなどのコンテンツデータＤｔがハードディスク３２Ａに格納されている。この場合のコンテンツデータＤｔは、例えば、光ディスクから私的利用のためにコピーしたものや、インターネットを通じてダウンロードしたものである。

そして、図２Ａに示すように、ハードディスク３２Ａに格納されたコンテンツデータＤｔに対するコンテンツ属性情報Ａｔである区切り情報が、同じハードディスク３２Ａ内の別ファイルや、コンテンツデータＤｔ内の別チャンクとして記録するようにされる。コンテンツデータＤｔとコンテンツ属性情報Ａｔとは、上述もしたように、コンテンツデータを識別することが可能な識別子（コンテンツデータの識別ＩＤ）によって対応付けられている。このコンテンツ属性情報Ａｔが、各コンテンツデータＤｔを再構成して再生する際に用いられることになる。

次に、図２Ｂに示すように、記録媒体３２として、光ディスク３２Ｂを用いる場合について説明する。図２Ｂに示すように、音声コンテンツデータ、映像コンテンツデータ、ＡＶコンテンツデータなどのコンテンツデータＤｔが光ディスクのデータ格納領域に格納されている。そして、図２Ｂに示すように、光ディスク３２Ｂには、光ディスクにおいて通常設けられるリードインアリア、ＴＯＣ（Table Of Contents）エリア、コンテンツデータアリア、リードアウトエリアのほかに、コンテンツ属性情報Ａｔである区切り情報の格納領域が設けられ、ここにコンテンツデータＤｔに対する区切り情報が格納するようにされる。

そして、この場合にも、コンテンツデータＤｔとコンテンツ属性情報Ａｔとは、コンテンツデータを識別することが可能な識別子（コンテンツデータの識別ＩＤ）によって対応付けられている。このコンテンツ属性情報Ａｔが、上述もしたように、各コンテンツデータＤｔを再構成して再生する際に用いられることになる。なお、光ディスク３２Ｂは、コンテンツデータが記録されて市販されるものの他、例えば、パーソナルコンピュータなどを用いて、インターネットからダウンロードしたコンテンツデータを記録するなどして作成されたものである。

次に、図３に示すように、記録媒体３２として、光ディスク３２Ｃとハードディスク（ハードディスクドライブ）３２Ｄとを併用する場合について説明する。音声コンテンツデータ、映像コンテンツデータ、ＡＶコンテンツデータなどのコンテンツデータＤｔは、光ディスク３２Ｄに記録されている。そして、光ディスク３２Ｄに記録されているコンテンツデータＤｔに対するコンテンツ属性情報Ａｔである区切り情報は、ハードディスク３２Ｃに格納される。

この場合においても、光ディスク３２Ｄに記録されているコンテンツデータＤｔと、ハードディスク３２Ｃに格納されたコンテンツ属性情報Ａｔとは、コンテンツデータを識別することが可能な識別子（コンテンツデータの識別ＩＤ）によって対応付けられている。このコンテンツ属性情報Ａｔが、上述もしたように、各コンテンツデータＤｔを再構成して再生する際に用いられることになる。

図２、図３を用いて説明したように、コンテンツデータＤｔと、コンテンツ属性情報Ａｔである区切り情報とは、それぞれ独立に存在し、自己が所有するコンテンツデータについての区切り情報を後から取得するなどのことができるようにされる。

［コンテンツデータの再構成と再生について］
そして、上述もしたように、この実施の形態の記録再生装置は、自己の記録媒体３２に記録されたコンテンツデータを再生する場合に、ユーザーからの指示がある場合には、再生対象のコンテンツデータに対する区切り情報と、入力Ｉ／Ｆ４２を通じて受け付けた指示入力情報とに基づいて、再生対象のコンテンツデータを再構成して、新たなコンテンツデータを生成するようにし、これを再生出力することができるようにしている。

図４は、この実施の形態の記録再生装置が有するコンテンツの再構成機能について説明するための図である。図４に示すように、この実施の形態の記録再生装置は、記録媒体３２にコンテンツデータＤｔと、これに対応するコンテンツ属性情報である区切り情報とが関連付けられて記憶保持するようにされている。

そして、記録媒体３２に格納されているコンテンツデータの内の目的とするコンテンツデータについて再生が指示され、そのコンテンツデータの再生が、ユーザーの指示に応じて区切り情報を用いた再構成処理を行うことが指示されているものである場合、制御部１０は、記録媒体３２からＩ／Ｆ３１を通じて再生対象のコンテンツデータＤｔを読み出し、さらに、当該コンテンツデータに対するコンテンツ属性情報Ａｔであって、記録媒体３２などの記録媒体に格納されている区切り情報を読み出す。

そして、制御部１０は、読み出した区切り情報であるコンテンツ属性情報Ａｔと、ユーザーからの指示入力情報とに基づいて、再生対象のコンテンツデータを区切り単位に並べ換えたり、所定の区間を削除したり、所定の区間に情報を付加するなどの加工を行ったりして、新たなコンテンツデータに作りかえる。この新たなコンテンツを作りかえる機能（生成する機能）が、制御部１０においてコンテンツ生成機能１０１として実現される。

そして、新たに生成されたコンテンツデータについて、音声データと映像データとに分離され、音声データが出力部２０のデコーダ２１に供給され、映像データが出力部２０のデコーダ２３に供給される。デコーダ２１は、これに供給された音声データについて、圧縮解凍処理やＤ／Ａ（Digital/Analog）変換処理を施し、出力用の音声信号を形成し、これを音声出力部２２に供給する。同様に、デコーダ２３は、これに供給された映像データについて、圧縮解凍処理やＤ／Ａ（Digital/Analog）変換処理を施し、出力用の映像信号を形成し、これを映像表示部２４に供給する。

これにより、音声出力部２２からは、再生対象のコンテンツデータが再構成されることにより得られたコンテンツデータに応じた音声が放音され、映像表示２４の表示画面には、再生対象のコンテンツデータが再構成されることにより得られたコンテンツデータに応じた映像が映出される。このように、コンテンツの出力機能１０２が、制御部１０と出力部２０とが協働して実現される。

［コンテンツ属性情報である区切り情報の流通経路について］
図５は、コンテンツ属性情報である区切り情報の流通経路を説明するための概念図である。図５において、参照符号Ｃ１，Ｃ２，Ｃ３，…，Ｃｎ（ｎは整数）は、コンテンツデータを示し、参照符号Ｍ１，Ｍ２，Ｍ３，…，Ｍｎ（ｎは整数）は、コンテンツ属性情報である区切り情報を示している。

また、図５において、参照符号ＳＶ１は、区切り情報を配信するコンテンツ属性情報サーバーである。そして、図５に示すように、ユーザーＸは、パーソナルコンピュータＤＸ１、オーディオ装置ＤＸ２、ビデオ装置ＤＸ３、ポータブルＡＶ装置ＤＸ４を有し、ユーザーＹは、パーソナルコンピュータＤＹ１を有し、ユーザーＺはポータブルＡＶ装置ＤＺ１を有している。これら、パーソナルコンピュータＤＸ１、オーディオ装置ＤＸ２、ビデオ装置ＤＸ３、ポータブルＡＶ装置ＤＸ４、パーソナルコンピュータＤＹ１、ポータブルＡＶ装置ＤＺ１のそれぞれは、この実施の形態の記録再生装置が適用されたものである。

コンテンツ属性情報サーバーＳＶ１は、種々のコンテンツデータＣ１，Ｃ２，Ｃ３，…，Ｃｎに対するコンテンツ属性情報である区切り情報Ｍ１，Ｍ２，Ｍ３，…，Ｍｎを記憶保持している。また、パーソナルコンピュータＤＸ１はコンテンツデータＣ１，Ｃ２、Ｃ３を保持し、オーディオ装置ＤＸ２はコンテンツデータＣ２を保持し、ビデオ装置ＤＸ３はコンテンツデータＣ３を保持し、ポータブルＡＶ装置ＤＸ４はコンテンツデータＣ１，Ｃ２，Ｃ３を保持している。また、ユーザーＹのパーソナルコンピュータＤＹ１は、コンテンツデータＣ２を保持し、ユーザーＺのポータブルＡＶ装置ＤＺ１は、コンテンツデータＣ３を保持しているとする。

そして、パーソナルコンピュータＤＸ１、オーディオ装置ＤＸ２、ビデオ装置ＤＸ３、ポータブルＡＶ装置ＤＸ４、パーソナルコンピュータＤＹ１、ポータブルＡＶ装置ＤＺ１のそれぞれは、コンテンツ属性情報サーバーＳＶ１に対して、インターネット１００を通じて、自機が保持するコンテンツデータを識別するための識別子を含むコンテンツ属性情報である区切り情報の提供要求を送信する。

コンテンツ属性情報サーバーＳＶ１は、区切り情報の提供要求を受信すると、これに含まれるコンテンツの識別子に基づいて、該当する区切り情報を検索し、検索の結果得られた区切り情報を識別子に対応させて要求元の記録再生装置に返信する。区切り情報の返信を受けた各記録再生装置（ユーザー装置）においては、自機が保持するコンテンツデータと対応付けて、コンテンツ属性サーバーＳＶ１からの区切り情報を自機の記録媒体３２などに記録する。

これによって、各記録再生装置においては、自機が保持するコンテンツデータを再生するようにした場合に、対応する区切り情報を利用して、再生対象のコンテンツデータを再構成するなどの処理を行い、当該再構成したコンテンツデータの再生を行うことができるようにされる。

また、区切り情報Ｍ１，Ｍ２，…、Ｍｎは、コンテンツ属性サーバーＳＶ１からだけでなく、他のユーザーの持つ記録再生装置に問い合わせてピア・ツー・ピア（peer to peer）として送受するようにすることもできる。例えば、図５において、ユーザーＸのポータブルＡＶ装置ＤＸ４がインターネット１００を通じてコンテンツデータＣ３の区切り情報の提供要求（コンテンツデータＣ１の識別子を含む区切り情報の提供要求）をユーザーＺのポータブルＡＶ装置ＤＺ１に対して送信し、ユーザーＺのポータブルＡＶ装置ＤＺ１からコンテンツデータＣ３に対する区切り情報Ｍ３の提供を受けるようにすることも可能である。

特定に形成されたコミュニティや友人同士であればこの伝送方法を用いてコンテンツ属性情報である区切り情報を共有することができる。つまり、知り合い同士でコンテンツ属性情報である区切り情報を交換することが可能となる。

また、ユーザーが所持する複数の記録再生装置間でコンテンツ属性情報を共有することもできる。例えば、図５において、ユーザーＸは、パーソナルコンピュータＤＸ１、オーディオ装置ＤＸ２、ビデオ装置ＤＸ３、ポータブルＡＶ装置ＤＸ４を所有しているが、これらの記録再生装置ＤＸ１，ＤＸ２，ＤＸ３，ＤＸ４間において、図５において点線で示したように、例えば、ＬＡＮを経由して、あるいは、直接に各記録再生装置間を、デジタルインターフェースなどを介して接続することにより、コンテンツ属性情報である区切り情報を共有することができる。

このようにすることにより、ユーザーが同じコンテンツを複数の記録再生装置で共用して利用している場合は、２度以上コンテンツ属性情報サーバーＳＶ１に対して問い合わせる必要がなくなる。また、コンテンツ属性情報である区切り情報は、例えば、パーソナルコンピュータＤＸ１において一元管理し、各記録再生装置においては、必要なときに要求して取得し利用できるような形態のシステムを構築することも可能である。

さらに、発展させると、各ユーザーは、種々のコンテンツデータに対する区切り情報を作成し、これをコンテンツ属性サーバー装置ＳＶ１に送信して、蓄積するようにし、多数のユーザーに対してこれを公開するようにしたり、友人にピア・ツー・ピアで提供したりすることも可能である。この場合の区切り情報は、例えば、まだ提供されていない（流通していない）区切り情報であり、特定の楽器が演奏される部分の区切り情報であったり、特徴的な旋律の部分の区切り情報であったり、種々のものが考えられる。

［コンテンツ属性サーバーの構成について］
なお、ここでコンテンツ属性情報サーバーＳＶは、例えば、図６に示すように、コンテンツ属性情報である区切り情報を記憶保持するために、ハードディスクなどの大容量の属性情報記録媒体１２１とＩ／Ｆ１２２とを備えたコンピュータであり、その構成を簡単に示せば、ＣＰＵ１１１、ＲＯＭ１１２、ＲＡＭ１１３などを備えた制御部１１０と、操作者からの操作入力を受け付ける入力Ｉ／Ｆ１３１と、インターネットに接続するための外部Ｉ／Ｆ（通信Ｉ／Ｆ）１３２と、他の機器との接続を可能にするデジタルＩ／Ｆ１３３などを備えたものであり、出力部２０と無線Ｉ／Ｆ４４と、送受信アンテナなどを備えない点を除けば、図１に示した記録再生装置と同様の構成を有するものとなる。

そして、外部Ｉ／Ｆ１３２が、区切り情報の提供要求を受信する受信手段としての機能と、区切り情報を送信する送信手段としての機能を実現し、制御部１１０とＩ／Ｆ１２２と記録媒体１２１とが協働して、区切り情報の検索を行う検索手段としての機能を実現している。

［コンテンツ属性情報の取得処理、提供処理について］
次に、図５を用いて説明したように、各ユーザーの記録再生装置（ここではユーザー装置という。）ＤＸ１，ＤＸ２，ＤＸ３、ＤＸ４，ＤＹ１，ＤＺ１が、コンテンツ属性情報サーバー（ここでは単にサーバー装置という。）ＳＶ１からコンテンツ属性情報である区切り情報を取得する処理と、サーバー装置ＳＶ１が各ユーザー装置ＤＸ１，ＤＸ２，ＤＸ３、ＤＸ４，ＤＹ１，ＤＺ１からの要求に応じて区切り情報を提供する処理について図７のフローチャートを参照しながら説明する。

なお、ここでは、ユーザー装置がサーバー装置から区切り情報の提供を受ける場合を例にして説明するが、基本的に異なるユーザーのユーザー装置間で区切り情報の送受を行う場合や、同じユーザーの所有するユーザー装置間で区切り情報の送受を行う場合においてもほぼ同様の処理となる。すなわち、区切り情報の提供を要求するユーザー装置は、以下に説明するユーザー装置の処理と同様の処理を行う、また、区切り情報を提供する装置が、コンテンツ属性情報サーバーＳＶと同様の処理を行うことになる。

図７において、図７Ａが区切り情報の提要を要求するユーザー装置の処理を、また、図７Ｂが区切り情報を提供するサーバー装置の処理を説明するためのフローチャートである。ユーザー装置に対して、区切り情報の提供の要求を行う所定の操作が行われると、ユーザー装置の制御部１０は、図７Ａに示す処理を実行し、まず、目的とするコンテンツデータの識別子を生成する（ステップＳ１１）。

ここでの識別子の生成は、個々のコンテンツデータを識別することが可能なものであればよい。例えば、目的とするコンテンツデータを記録した記録媒体がディスクである場合には、当該コンテンツデータの記録に用いられているトラックの総数や再生時間から一意に生成したり、コンテンツデータの全部ないしは一部から一意に生成したりすることが可能である。例えば、コンテンツデータのデータ量に応じて使用トラック数は異なり、また、コンテンツデータごとに再生時間も異なるので、これらの情報からコンテンツデータを一意に特定可能な識別子を作成したり、これらとＩＳＲＣのような情報を組み合わせて識別子を生成したりすることができる。

あるいは、コンテンツデータの全部や一部を識別子として用いたり、コンテンツデータの全部や一部から所定の処理、例えば、それらのデータを所定の演算式を用いて数値化するなどの処理を行って、識別子を生成したりすることが可能である。また、予めコンテンツに対応付けて記録されている既存の識別子を用いるようにしてももちろんよい。ここでは、予め対応付けられている既存の識別子を用いるものとする。

そして、ユーザー装置の制御部１０は、ステップＳ１１において取得した識別子を含む、区切り情報の提供要求を生成して、これを外部Ｉ／Ｆ４１、インターネット１００を通じて、サーバー装置に送信する（ステップＳ１２）。

一方、サーバー装置の制御部１１０は、常時、図７Ｂに示す処理を実行しており、インターネットおよび自機が備える外部Ｉ／Ｆ１３２を通じてユーザー装置からの区切り情報の提供要求を受信するようにし（ステップＳ２１）、提供要求を受信したか否かを判断する（ステップＳ２２）。ステップＳ２２の判断処理において、区切り情報の提要要求を受信していないと判断したときには、ステップＳ２１からの処理を繰り返し、区切り情報の提供要求の受信待ちとなる。

ステップＳ２２の判断処理において、サーバー装置の制御部１１０がユーザー装置からの区切り情報の提供要求を受信したと判断したときには、サーバー装置の制御部１１０は、受信した区切り情報の提供要求に含まれるコンテンツデータの識別子に基づいて、自機の記録媒体１２１に記憶されている区切り情報の中から目的とするコンテンツデータに対する区切り情報を検索する（ステップＳ２３）。

そして、サーバー装置の制御部１１０は、目的とするコンテンツデータに対する区切り情報が存在するか否かを判断し（ステップＳ２４）、存在すると判断したときには、目的とするコンテンツに対する区切り情報が複数あるか否かを判断する（ステップＳ２５）。このステップＳ２５の判断処理において、目的とするコンテンツデータに対する区切り情報が１つであると判断したときには、その区切り情報を要求元のユーザー装置に対して外部Ｉ／Ｆ１３２、インターネット１００を通じて送信（返信）し（ステップＳ２６）、ステップＳ２１からの処理を繰り返すことになる。

また、ステップＳ２５の判断処理において、目的とするコンテンツデータに対する区切り情報が複数存在すると判断したときには、サーバー装置の制御部１１０は、１つ、ないしは複数の区切り情報を選択し（ステップＳ２７）、その選択した区切り情報を要求元のユーザー装置に外部Ｉ／Ｆ１３２、インターネット１００を通じて送信して（ステップＳ２６）、ステップＳ２１からの処理を繰り返すことになる。

なお、ステップＳ２７においての区切り情報の選択は、例えば、ユーザー装置のユーザーとサーバー装置の管理者との契約により、提供する個数を予め決めておくようにしてもよいし、ユーザー装置から提供を要求する区切り情報の個数の指定に応じて、その指定された個数分の区切り情報を選択したり、また、ユーザー装置からどのような区切り情報の提供を要求するのかの区切り情報の種類の指定を受け付けて、その指定に応じた区切り情報を選択したりするなど、種々の態様をとることが可能である。なお、ユーザー装置からの区切り情報の個数や区切り情報の種類を指定する場合には、それらの情報をユーザー装置において受け付けるステップが設けられ、生成される提供要求に含められてサーバー装置に送信されることなる。

また、ステップＳ２４の判断処理において、目的とするコンテンツデータに対する区切り情報が存在しないと判断したときには、サーバー装置の制御部１１０は、その旨を示す応答メッセージを生成し、要求もとのユーザー装置に対して外部Ｉ／Ｆ１３２、インターネット１００を通じて返信し（ステップＳ２８）、ステップＳ２１からの処理を繰り返すことになる。

一方、要求元のユーザー装置は、サーバー装置からの応答（返信）を外部Ｉ／Ｆ４１を通じて受信し（ステップＳ１３）、受信した応答に基づいて、要求した区切り情報が送信されてきたか否かを判断する（ステップＳ１４）。ステップＳ１４の判断処理において、要求した区切り情報を受信したと判断したときには、その受信した区切り情報を自機の記録媒体３２に、コンテンツデータと対応付けて記録（格納）し（ステップＳ１５）、この図７Ａに示す処理を終了する。

また、ステップＳ１４の判断処理において、要求した区切り情報を受信していない（対応する区切り情報が存在しないことのメッセージを受信した）と判断したときには、ユーザー装置の制御部１０は、図１には図示しなかったが、自機が備えるＬＣＤ（Liquid Crystal Display）などの表示素子やＬＥＤ（Light Emitting Diode）などの発光素子、あるいは、ブザーやアラームなどを用いて、目的とする区切り情報が存在しなかったことをユーザー装置のユーザーに対して通知し（ステップＳ１６）、この図７Ａに示す処理を終了する。

このように、ユーザー装置は、自機が保持するコンテンツデータに対するコンテンツ属性情報である区切り情報のみを独立して取得し、これを自機の記録媒体に格納して利用することができる。すなわち、区切り情報のみが単独で流通することができるようにされ、これを取得して利用することができるようにされる。

［区切り情報の具体例とその利用例について］
図８は、コンテンツデータが音楽コンテンツデータであり、その区切り情報が小節である場合の例を説明するための図である。すなわち、小節区切り位置を示す情報（小節区切り位置情報）が区切り情報Ｍ１である場合、当該小節区切り情報は、上述もしたように、コンテンツデータが光ディスクに記録された音楽コンテンツデータなどの場合には、その区切り情報は、例えば、サブコードの時間情報や、光ディスクのセクタアドレス、クラスタアドレス、先頭からのバイト数やビット数、サンプル数、当該音楽コンテンツデータがデータ圧縮されたものである場合には、先頭からの圧縮ブロックの数などで表現される。

バイト数やビット数、サンプル数、圧縮ブロックの数を用いる場合には、先頭からの数で表すものに限らず、直前の区切り情報からの差分として表現される場合もあるし、また、予め決められた所定の位置、例えば、最後尾の位置などを基準として、表すようにされる場合もある。

そして、この区切り情報を用いて、図８Ａに示す当該音楽コンテンツデータを区切ると、図８Ｂに示すように、データ上において小節ごとに区切ることができ、区切られた個々の小節を特定して、その個々の小節を独立したデータとして扱うことができるようにされる。

図９は、図８に示した区切り情報である小節区切り位置情報を用いて、当該音楽コンテンツデータを再構成する場合の例を説明するための図である。小節区切り位置情報により、各小節の音楽コンテンツデータを特定して独立に用いることができるので、区切り情報Ｍ１に基づいて、図９Ａに示す元の音声コンテンツデータを小節ごとに分解し、図９Ｂに示すように小節単位で再生順序を入れ換えて、音声コンテンツデータを再構成するようにすることが可能になる。

すなわち、図９Ｂに示したように、ユーザーが小節７を好む場合、同じ小節７（オリジナルのコンテンツデータの７番目の小節）を繰り返し利用するようにするなどのことが簡単に行うことができるようにされる。この場合、ユーザー装置のユーザーは、新たな小節の並び順を指定するだけで、小節を並び替えた音声コンテンツデータを再構成し、これを再生することができるようにされる。

なお、このような小節の順番の変更、すなわち再構成のための情報は、再生時において、ユーザーがユーザー装置である記録再生装置に入力し、記録媒体３２などに記録して用いることが可能であるし、予め入力して記録媒体に記録しておき、これを用いるようにすることも可能である。例えば、図９を用いて説明した例の場合には、新たな小節の並び順として、オリジナルコンテンツにおける各小節の順番を示す小節番号が、１→２→３→７→７→８→…というように変更された情報が、小節の再生順を再構成するための情報（再構成のための情報）となる。この際、例えば、小節３と小節７はもともとつながっていないコンテンツデータであるため小さなノイズが入ることがある。このような場合、小節３の終端と小節７の先頭の両方のごく短い時間にミュートをかけることによって自然につながったコンテンツとして聞こえるようにできる。

ここでは、区切り情報が小節区切りの場合の例を説明したが、上述のしたように、複数小節ごとの区切り情報や、イントロ、歌の１番、さび、間奏、歌２番、さびなどのように、音楽コンテンツデータの構成部分ごとの区切り情報を用いることにより、さび部分を繰り返すようにしたり、イントロ部分を繰り返すようにしたりするなどのことも簡単にできるようにされる。

また、複数の音楽コンテンツデータのさびの部分のみをつなげて、１つの音楽コンテンツデータを構成し、これを再生することも可能である。この場合には、再構成のための情報として、音楽コンテンツデータとさびの部分の区切り情報とが必要となる。具体的には、（１曲目の識別子＋１曲目のサビの区切り情報（サビの区切り位置情報））＋（２曲目の識別子＋２曲目のさびの区切り情報）＋（３曲目の識別子＋３曲目のさびの区切り情報）＋（４曲目の…というように音楽コンテンツの識別子とさびの区切り情報とを接続するような再構成のための情報を用意すればよい。

また、映像コンテンツやＡＶコンテンツについても、区切り情報を用いることにより、このみの映像部分を繰り返して再生するなどの再生順序を変えることが簡単にできるようにされる。また、複数の映像コンテンツやＡＶコンテンツのダイジェストなど必要な部分のみをつなぎ合わせたコンテンツを簡単に作成することも可能になる。

［区切り情報の他の利用例について］
［他の利用例１］
ところで、ユーザーの動作に同期してコンテンツデータの再生態様が変わると、ユーザーは再生されるコンテンツとのシンクロ（同期）感を強くする。シンクロ感が増すと、再生されるコンテンツから受ける心地よさや興奮性、エンタテインメント性が向上する。特に、体でリズムを刻むような場合に、刻んだリズムに音楽コンテンツの区切りが一致するとユーザーは強いシンクロ感を感じることができる。

そこで、ユーザーの動きをセンサを用いて検出し、この検出出力をコンテンツデータの再構成のための情報として用いて、かつ、区切り情報を利用することにより、再生される音楽コンテンツから受けるシンクロ感を増すようにする記録再生装置を考える。

図１０は、ユーザーの動きを検出するセンサを備えたこの例の記録再生装置を説明するためのブロック図である。この例の記録再生装置は、センサ部５０を備える点を除けば、図１に示した記録再生装置と同様に構成されたものである。このため、図１０の記録再生装置において、図１に示した記録再生装置と同様に構成される部分には同じ参照符号を付し、その部分の説明については省略する。

図１０に示すように、センサ部５０は、生体情報エンコーダ５１と、生体情報センサ５２と、環境情報エンコーダ５３と、環境情報センサ５４とを備えたものである。生体情報センサ５２は、例えば、加速度センサ、ステップセンサ（振動センサ）、方位センサなどのユーザーの身体に取り付けられ、ユーザーの動きを検出し、これを電気信号に変換して取り込むことができるものである。このほか、ユーザーの映像を撮像するビデオカメラなどでもよい。ビデオカメラで撮像されたビデオデータを解析することにより、ユーザーの動きを検出することができるためである。

ここでユーザーの動作とは、この例の記録再生装置の使用者であるユーザーの、頭部の前後左右運動、手の動き、体幹部の上下運動、前後左右運動、足の動き、手拍子、歩行時の足の踏み込みが挙げられる。また、ボタンやキーボード、打楽器型の専用インターフェースなどからのユーザーからの入力指示なども、ユーザーの動きの情報として用いることも可能である。

生体情報エンコーダ５１は、生体情報センサ５２からの検出データを制御部１０に提供する形式のデータに変換するものであり、生体情報センサ５２と、記録再生装置１０の制御部１０との間を接続するインターフェースの役割を有するものである。

また、環境情報センサ５４は、気温センサ、湿度センサ、風力センサ、明度センサなどのユーザーの置かれた環境に関する情報を検出して、これを電気信号として取り込むことができるものである。環境情報エンコーダ５３は、環境情報センサ５４からの検出データを制御部１０に提供する形式のデータに変換するものであり、環境情報センサ５４と、記録再生装置１０の制御部１０との間を接続するインターフェースの役割を有するものである。

そして、生体情報センサ５２、環境情報センサ５４から得られるセンサ信号は、エンコーダ５１、５２を通じて、記録再生装置の制御部１０に入力され、制御部１０は、センサ部５０からのセンサ信号をコンテンツデータの再構成のための情報として用いると共に、再生対象のコンテンツデータに対する区切り情報をも考慮して、再生対象のコンテンツデータの再構成を行って、再生する処理を行う。

図１１は、この例の記録再生装置について詳細に説明するためのブロック図である。この例の記録再生装置は、記録媒体３２と、４０番台の参照符号を付した各Ｉ／Ｆ部を除いた部分が再生部としての機能を実現する。

記録媒体３２には、コンテンツデータ記憶部と属性情報記憶部とを備え、上述もしたように、コンテンツデータとその属性情報を関連付けて記憶保持している。そして、制御部１０は、制御処理部１０１Ａ、コンテンツデータのデコード部１０１Ｂ、ミキサー及びエフェクト処理部１０１Ｃとしての機能を実現すると共に、この例の場合には、ＲＡＭ１３が、再生履歴情報保持部としての機能を実現するようにしている。

そして、生体情報センサ５２からのセンサ信号は、生体情報取得部としてのエンコーダ５１を通じて制御部１０の制御処理部１０１Ａに供給され、環境情報センサ５４からのセンサ信号は、周辺環境情報取得部としてのエンコーダ５３を通じて制御部１０の制御処理部１０１Ａに供給される。

一方、入力Ｉ／Ｆ４２を通じて受け付けた再生指示に応じたコンテンツデータは、制御部１０の制御処理部１０１Ａからの再生指示に応じて、デコード回路３１１、属性情報取得部３１２、コンテンツデータ取得部３１３としての機能を実現するＩ／Ｆ３１を通じて読み出され、コンテンツ属性情報である区切り情報は制御部１０の制御処理部１０１Ａに供給され、コンテンツデータは制御部１０のデコード部１０１Ｂに供給される。

そして、制御部１０の制御処理部１０１Ａは、生体情報センサ５２からのセンサ信号と、環境情報センサからのセンサ信号と、記録媒体３２から読み出した再生対象のコンテンツデータに対する区切り情報とを用いて、再生対象のコンテンツデータを再構成するようにするための制御信号を形成し、これをミキサー及びエフェクト処理部１０１Ｃに供給する。

再生対象のコンテンツデータは、デコード部１０１Ｂにおいて、圧縮解凍されるなどの処理が施された後に、ミキサー及びエフェクト処理部１０１Ｃに供給され、ここで制御処理部１０１Ａからの制御信号に基づいて、区切り情報に応じた区切り、例えば小節の並び変えや、区切り情報により示される各区切りに同期し、各センサ信号に応じた再生テンポの調整などの処理などが行われる。つまり、ミキサー及びエフェクト処理部１０１Ｃは、コンテンツデータの再構成処理の実行部として機能する。

ミキサー及びエフェクト処理部１０１Ｃからの音声信号は、音声出力装置２１，２２に供給されて再生音声が放音するようにされ、ミキサー及びエフェクト処理部１０１Ｃから映像信号は、映像出力装置２３，２４に供給されて再生映像が映出するようにされる。

この図１０、図１１を用いて説明したように構成されるこの例の記録再生装置を用いることにより、ユーザーの動きと区切り情報とを考慮して、コンテンツデータを再構成して、これを再生することができるようにされる。

図１２は、この例の記録再生装置を用いて、区切り情報として小節区切り位置情報を有する音楽コンテンツを再構成して再生した場合の具体例を説明するための図である。図１２Ａは、区切り情報として小節区切り位置情報を有する音楽コンテンツを示している。そして、図１２Ｃが、リアルタイムに検出される生体情報センサ５２からのセンサ信号であって、ユーザーの動きの状態を示すセンサ信号の波形を示している。

この場合、ユーザーの動きは、最初はゆっくりであるが、次第に早くなり、またゆっくりとなるような変化となっている。このため、このような動きの変化と同期するように、再生対象の音楽コンテンツデータの各小節のテンポが、図１２Ｂに示すように変えられる。

これにより、この例の記録再生装置のユーザーが、体でリズムを刻むような場合に、刻んだリズムに音楽コンテンツの区切りが一致し、ユーザーは強いシンクロ感を感じることができる。したがって、再生される音楽コンテンツに対して、ユーザーのシンクロ感が増すことによって、再生されるコンテンツから受ける心地よさや興奮性、エンタテインメント性が向上する。

このように、この例の記録再生装置は、コンテンツデータに対する区切り情報に基づいて、ユーザーの動作タイミングに区切り位置合わせて再生することができる。ユーザーの動作に合わせるために、センサ入力をもとにリアルタイムでコンテンツが再構成される。各小節はユーザーの動作に合わせて伸張される。なお、ユーザーの次の動作タイミングを予測して行うと、よりスムーズな再生ができる。

なお、予測は、例えば、コンテンツデータの再生前からの生体情報センサ５２のセンサ信号を監視しておき、過去の情報を考慮して、予測するようにしたり、ユーザーの動きの周期性を検出するようにし、この周期性に基づいて、ユーザーの動きを予測したりするなど、種々の方法を用いて行うことが可能である。

また、コンテンツの選択順序は、もとのコンテンツの並び順のままでもよいし、ユーザーのセンサ入力を元に並び替えてもよい。センサ入力を元に並び替える場合、例えば大きな動作の時には大きな音響の小節を選択したり、動きの変化が激しい場合には、よりテンポの速い部分を選択したりするなどのことが考えられる。
なお、生体情報の他に、環境情報をセンシングして例えば照明の明るさ、風量、温度の変化にコンテンツ区切りを一致させることもできる。

コンテンツの再構成はセンサ入力に従ってリアルタイムで行われるため、基本的には毎回異なるコンテンツが生成される。しかし、図１１に示した再生履歴保持部１３で再生履歴を保存しておくことにより、ユーザーの要求に従って再度同じように再生することができる。

［他の利用例２］
図１３に、区切り情報の他の利用例（コンテンツデータの別の再構成例）を示す。音楽の区切りと、映像の区切りが一致すると、ユーザーは同期感を感じ、コンテンツに対してより強い印象を持つようになる。

この例では、音楽コンテンツデータＣ１の区切り情報に合わせて、別の静止画コンテンツを表示し、自動でスライドショーを作成する例を示す。音楽の区切り位置で画像を表示することで、よりシンクロ感のあるスライドショーを実現する。

図１３の例では、２小節ごとに画像群Ｇ１の中から１枚の画像を任意に選び、表示する。スライドショーに用いるコンテンツは静止画像だけではなく、動画像を用いてもよい。区切りに合わせて動画像の表示を開始するほかに、動画像を停止してもよい。音の停止と画像の停止を一致させることでコンテンツの印象を強くすることができる。

［コンテンツ再構成時の処理について］
図１４は、図１に示した記録再生装置、図１０および図１１に示した記録再生装置においてのコンテンツデータの再構成時の処理を説明するためのフローチャートである。この図１４に示す処理は、入力Ｉ／Ｆ４２を通じて、ユーザーからのコンテンツデータの再生指示を受け付けた場合に、制御部１０において実行するようにされる処理である。

再生指示を受け付けると、制御部１０は、再生が指示されたコンテンツデータをＩ／Ｆ３１を通じて記録媒体３２から読み出し（ステップＳ３１）、その再生対象のコンテンツデータの識別子を抽出する（ステップＳ３２）。この例の場合、識別子は、例えばコンテンツデータごとに予め付されている既存の情報である。

そして、ステップＳ３２で抽出した識別子に基づいて、対応するコンテンツ属性情報である区切り情報を読み出し（ステップＳ３３）、読み出した区切り情報と、例えば、小節の並び順を示すユーザーからの指示情報である再構成のための情報、あるいは、生体情報センサや環境情報センサからの検出出力に基づいて、再生対象のコンテンツデータを再構成し、これを再生する（ステップＳ３４）。

このように、従来、まったく提供されていなかったコンテンツデータの区切り情報を、コンテンツデータとは別個に流通させるようにすることによって、ＣＤやインターネットを通じて豊富に提供されている音楽コンテンツデータ、映像コンテンツデータ、ＡＶコンテンツデータを、区切り情報にしたがって再構成し、既存のコンテンツデータを再生するにもかかわらず、まったく新しいコンテンツデータを再生するようにすることができるようにされる。

しかも、ユーザーは複雑な操作などを行うことなく、再生するコンテンツデータを選択するのとほぼ同じような感覚で、再構成についての情報を指示し、コンテンツデータを再構成して、これを利用することができるようになる。

また、コンテンツ属性情報サーバーＳＶ１に記憶保持されるコンテンツ属性情報である区切り情報を、対応するコンテンツデータの識別子を用いて読み出すことができるように記録した記録媒体を作成することにより、その記録媒体を介して、コンテンツ属性情報である区切り情報を配布することにより、区切り情報をコンテンツデータとは別に流通させるようにすることも可能である。

なお、上述もしたように、コンテンツデータに対する区切り情報は、時分秒のタイムスタンプ、コンテンツ先頭からのバイト数、サンプル数、ディスク上のクラスタ、セクタアドレス、前回の区切りからの差分として指定するなど、種々の態様で表現することができるため、コンテンツデータが記録されている記録媒体など、提供経路などに応じて適切なもので表現することが可能である。

また、コンテンツ属性情報である区切り情報は、インターネット、記録再生装置の入出力インターフェース、記録媒体の配布によって伝送され、各記録再生装置側ではコンテンツデータに対応付けて記録するようにしたが、これに限るものではない。例えば、ユーザー側の装置でコンテンツデータを分析して、自動的に区切り情報を作成したり、あるいは、ユーザー自身が区切り情報を入力したりすることももちろんできる。

また、コンテンツデータが音楽コンテンツデータである場合には、非圧縮音楽データであってもよいし、圧縮音楽データであってもよいことはいうまでもない。

また、コンテンツデータや区切り情報を記録する記録媒体は、光ディスク、光磁気ディスク、磁気テープ、ハードディスク、半導体フラッシュメモリ、ネットワーク上のサーバーなどの種々のものが利用可能である。

また、記録媒体としての光ディスク、磁気ディスクは、ＣＤ（Compact Disc）、ＭＤ（Mini Disc），Ｈｉ‐ＭＤ、ＳＡＣＤ（Super Audio Compact Disc）、ＤＶＤ（Digital Versatile Disc）、Ｂｌｕ‐ｒａｙ Ｄｉｓｃなどの種々のものが利用可能である。

また、音楽コンテンツデータのフォーマットは、ＰＣＭ（Pulse Code Modulation），ＷＡＶＥ，ＡＵ，ＡＩＦＦ，ＭＩＤＩ（Musical Instrument Digital Interface），ＡＴＲＡＣ（Adaptive Transform Acoustic Coding），ＡＴＲＡＣ３（Adaptive Transform Acoustic Coding 3），ＡＴＲＡＣ３ｐｌｕｓ（Adaptive Transform Acoustic Coding 3plus），ＭＰＥＧ−２（Moving Picture Experts Group 2），ＡＡＣ（Advanced Audio Coding），ＭＰ３（Moving Picture Experts Group 1 Audio Layer 3），ＴｗｉｎＶＱ（Transform-domain Weighted Interleave Vector Quantization），ＭＳ Ａｕｄｉｏ，ＯｇｇＶｏｒｂｉｓなどのいずれであってもよい。

また、映像コンテンツデータのフォーマットは、ＪＰＥＧ（Joint Photographic Experts Group），ＧＩＦ（Graphics Interchange Format），ＰＮＧ（Portable Network Graphics），ＤＶ（Digital Video），ＭＰＥＧ１（Moving Picture Experts Group 1），ＭＰＥＧ２（Moving Picture Experts Group 2），ＭＰＥＧ４ Ｖｉｓｕａｌ（Moving Picture Experts Group 4 Visual），ＭＰＥＧ４ ＡＶＣ（Moving Picture Experts Group 4 Advanced Video Coding），ＭＰＥＧ７（Moving Picture Experts Group 7），ＡＶＩ（Audio Video Interleaving），Ｒｅａｌ Ｖｉｄｅｏ，Ｑｕｉｃｋ Ｔｉｍｅ Ｍａｃｒｏｍｅｄｉａ Ｆｌａｓｈ，ｎａｎｃｙ，Ｗｉｎｄｏｗｓ（登録商標）Ｖｉｄｅｏなどのいずれであってもよい。

また、コンテンツ識別子は、ディスクのトラックの総数、トラックの再生時間から一意に生成することも可能であるし、音楽データ、映像データの全部ないしは一部から一意に生成することも可能であり、利用態様や機器の能力などに応じて選択することが可能である。もちろん、コンテンツ識別子は、あらかじめコンテンツに対応して記録されたものを用いてもよい。

また、ユーザーが生成した、あるいは、作成した区切り情報を別のユーザーの装置に対して伝送して提供したり、所定のサーバー装置にアップロードして公開したり、記録媒体を介して流通させるようにすることももちろんできる。

区切り情報の生成は、例えば、コンテンツデータが音楽コンテンツデータである場合には、当該音楽コンテンツデータの自動解析を行って、ビートやテンポの検出を行い、これらに従って、ビートやテンポの変化点を区切り情報とすることができる。また、イントロの開始や終了、１番の歌い出し、１番の終了、間奏の開始、間奏の終了をユーザーが入力し、これに応じた区切り情報を生成するようにすることももちろん可能である。

また、この発明のコンテンツ利用装置、コンテンツ利用方法は、上述もしたように、パーソナルコンピュータ、オーディオ装置、ビデオ装置、ポータブルＡＶ装置などの、種々の記録再生装置に適用可能である。

また、上述した実施の形態においては、コンテンツデータは、音声コンテンツデータ、映像コンテンツデータ、ＡＶコンテンツデータの場合を例にして説明したが、これに限るものではない、コンテンツデータしては、例えばテキストデータであってもよい。コンテンツデータがテキストデータである場合の区切り情報としては、例えば、文ごとの区切りを示すもの、段落ごとの区切りを示すもの、ページごとの区切りを示すもの、章ごとの区切りを示すもの、巻ごとの区切りを示すものなどが考えられる。

この場合の区切り情報の表現方法は、例えば、バイト位置や文字数で表現したり、その差分で表現したりすることが考えられる。また、利用態様としては、いわゆる電子ブックや携帯電話端末などの携帯通信端末へのテキストデータの配信などにおいて、後からでも上述した区切り情報を関連付けて記憶保持し、好みのフレーズを含む文章部分や段落部分を抽出して連結し、利用できるようにするなどのことが考えられる。

また、映像コンテンツデータとしては、動画だけでなく、例えば、写真集のような複数の静止画からなるものであってももちろんよい。この場合の区切り情報は、各静止画単位を示すものとなる。

この発明のコンテンツ利用装置、コンテンツ利用方法の一実施の形態が適用された記録再生装置を説明するためのブロック図である。 利用可能な記録媒体とその利用態様について説明するための図である。 利用可能な記録媒体とその利用態様について説明するための図である。 記録再生装置が有するコンテンツの再構成機能について説明するための図である。 コンテンツ属性情報である区切り情報の流通経路を説明するための概念図である。 この発明の配信サーバー装置、情報配信方法の一実施の形態が適用されたコンテンツ属性情報サーバーを説明するためのブロック図である。 コンテンツ属性情報の取得処理、提供処理について説明するためのフローチャートである。 コンテンツデータが音楽コンテンツデータであり、その区切り情報が小節である場合の例を説明するための図である。 小節区切り位置情報を用いて、音楽コンテンツデータを再構成する場合の例を説明するための図である。 ユーザーの動きを検出するセンサを備えた記録再生装置を説明するためのブロック図である。 図１０に示した記録再生装置について詳細に説明するためのブロック図である。 図１０に示した記録再生装置を用いて、区切り情報として小節区切り位置情報を有する音楽コンテンツを再構成して再生した場合の具体例を説明するための図である。 区切り情報の他の利用例（コンテンツデータの別の再構成例）を説明するための図である。 コンテンツデータの再構成時の処理を説明するためのフローチャートである。

符号の説明

１０…制御部、１１…ＣＰＵ、１２…ＲＯＭ、１３…ＲＡＭ、１４…ＣＰＵバス１４、２０…出力部、２１…音声デコーダ、２２…音声出力部、２３…映像デコーダ、２４…映像表示部、３０…記憶部、３１…Ｉ／Ｆ、３２…記録媒体、４１…外部Ｉ／Ｆ、４２…入力Ｉ／Ｆ、４３…デジタルＩ／Ｆ、４４…無線Ｉ／Ｆ、４５…送受信アンテナ４５、５０…センサ部、５１…生体情報デコーダ、５２…生体情報センサ、５３…環境情報デコーダ、５４…環境情報センサ、１１０…制御部、１１１…ＣＰＵ、１１２…ＲＯＭ、１１３…ＲＡＭ、１１４…ＣＰＵバス、１２０…記憶部、１２１…記録媒体、１２２…Ｉ／Ｆ、１３１…入力Ｉ／Ｆ、１３２…外部Ｉ／Ｆ、１３３…デジタルＩ／Ｆ

Claims (20)

1. 記録媒体に記録されたコンテンツデータに対する区切り情報を取得する取得手段と、
   ユーザーの動きを検出するセンサ手段と、
   前記取得手段を通じて取得した前記区切り情報と、前記センサ手段からの検出出力から予測するユーザーの次の動作タイミングとに基づいて、処理対象の前記コンテンツデータについて、ユーザーの次の動作タイミングにコンテンツの区切り位置を合わせるように調整して、新たな態様で前記コンテンツを再生できるようにするコンテンツデータを生成する生成処理手段と
   を備えるコンテンツ利用装置。
2. 請求項１に記載のコンテンツ利用装置であって、
   前記取得手段は、ネットワーク上のサーバー装置に対して、目的とするコンテンツデータの識別子を含む区切り情報の提供要求を送信し、この要求に応じて、前記サーバー装置から返信されてくる区切り情報を取得するコンテンツ利用装置。
3. 請求項１に記載のコンテンツ利用装置であって、
   前記取得手段は、目的とするコンテンツデータに対応する前記区切り情報を、前記コンテンツデータが記録されたファイルとは異なるファイルから取得するコンテンツ利用装置。
4. 請求項１に記載のコンテンツ利用装置であって、
   前記取得手段は、目的とするコンテンツデータを解析することによって、当該コンテンツデータに対応する区切り情報を自動的に生成することにより取得するコンテンツ利用装置。
5. 請求項４に記載のコンテンツ利用装置であって、
   前記取得手段により自動的に生成された前記区切り情報を、ネットワークに接続されたサーバー装置に送信する送信手段を備えるコンテンツ利用装置。
6. 請求項４に記載のコンテンツ利用装置であって、
   前記取得手段により自動的に生成された前記区切り情報を、記録媒体に記録する記録手段を備えるコンテンツ利用装置。
7. 請求項１、請求項２、請求項３、請求項４、請求項５または請求項６に記載のコンテンツ利用装置であって、
   前記コンテンツデータは音楽データであり、
   前記コンテンツデータに対応する前記区切り情報は、音楽の１小節ないしは複数小節の区切り情報、メロディの変化点、さび部分の出だし、さび部分の終了、歌い出し、歌い終わりなどの音楽的に特徴のある変化点であるコンテンツ利用装置。
8. 請求項１、請求項２、請求項３、請求項４、請求項５または請求項６に記載のコンテンツ利用装置であって、
   前記コンテンツデータは映像データであり、
   前記コンテンツデータに対応する前記区切り情報は、映像のシーンチェンジ、カットチェンジなどの映像的に特徴のある変化点であるコンテンツ利用装置。
9. 請求項１、請求項２、請求項３、請求項４、請求項５、請求項６、請求項７または請求項８に記載のコンテンツ利用装置であって、
   前記区切り情報は、前記コンテンツデータが記録されている記録媒体において用いられるサブコード時間情報、セクタアドレス、クラスタアドレス、コンテンツデータに付加されたタイムコード、コンテンツデータの先頭からのバイト数、サンプル数、ＧＯＰ（Group of Picture）、映像フレーム、サウンドフレーム、圧縮音声データの圧縮ブロック単位の内のいずれかにより表現され、所定の基準位置からの量、あるいは、直前の区切り情報からの差分量、あるいは、前記情報を用いた数式で表現されるコンテンツ利用装置。
10. 請求項１、請求項２、請求項３、請求項４、請求項５、請求項６、請求項７、請求項８または請求項９に記載のコンテンツ利用装置であって、
    前記区切り情報は、コンテンツデータに対して１種類以上が対応付けられており、
    １つのコンテンツデータに対して対応付けられた複数の区切り情報から目的とする区切り情報の選択入力を受け付ける選択入力受付手段を備えるコンテンツ利用装置。
11. 記録媒体に記録されているコンテンツデータに対応する区切り情報を、取得手段を通じて取得する取得工程と、
    ユーザーの動きを、センサ手段を通じて検出する動き検出工程と、
    前記取得工程において取得した前記区切り情報と、前記動き検出工程において検出したユーザーの動きから予測するユーザーの次の動きとに基づいて、生成処理手段が、処理対象の前記コンテンツデータについて、ユーザーの次の動作タイミングにコンテンツの区切り位置を合わせるように調整し、新たな態様で前記コンテンツを再生できるようにするコンテンツデータを生成する生成処理工程と
    を有するコンテンツ利用方法。
12. 請求項１１に記載のコンテンツ利用方法であって、
    前記取得工程においては、ネットワーク上のサーバー装置に対して、目的とするコンテンツデータの識別子を含む区切り情報の提供要求を送信し、この要求に応じて、前記サーバー装置から返信されてくる区切り情報を取得するコンテンツ利用方法。
13. 請求項１１に記載のコンテンツ利用方法であって、
    前記取得工程においては、目的とするコンテンツデータに対応する前記区切り情報を、前記コンテンツデータが記録されたファイルとは異なるファイルから取得するコンテンツ利用方法。
14. 請求項１１に記載のコンテンツ利用方法であって、
    前記取得工程においては、目的とするコンテンツデータを解析することによって、当該コンテンツデータに対応する区切り情報を自動的に生成することにより取得するコンテンツ利用方法。
15. 請求項１４に記載のコンテンツ利用方法であって、
    前記取得工程において自動的に生成した前記区切り情報を、送信手段を通じてネットワークに接続されたサーバー装置に送信する送信工程を有するコンテンツ利用方法。
16. 請求項１４に記載のコンテンツ利用方法であって、
    前記取得工程において自動的に生成した前記区切り情報を、記録手段を通じて記録媒体に記録する記録工程を有するコンテンツ利用方法。
17. 請求項１１、請求項１２、請求項１３、請求項１４、請求項１５または請求項１６に記載のコンテンツ利用方法であって、
    前記コンテンツデータは音楽データであり、
    前記コンテンツデータに対応する前記区切り情報は、音楽の一小節ないしは複数小節の区切り情報、メロディの変化点、さび部分の出だし、さび部分の終了、歌い出し、歌い終わりなどの音楽的に特徴のある変化点であるコンテンツ利用方法。
18. 請求項１１、請求項１２、請求項１３、請求項１４、請求項１５または請求項１６に記載のコンテンツ利用方法であって、
    前記コンテンツデータは映像データであり、
    前記コンテンツデータに対応する前記区切り情報は、映像のシーンチェンジ、カットチェンジなどの映像的に特徴のある変化点であるコンテンツ利用方法。
19. 請求項１１、請求項１２、請求項１３、請求項１４、請求項１５、請求項１６、請求項１７または請求項１８に記載のコンテンツ利用方法であって、
    前記区切り情報は、前記コンテンツデータが記録されている記録媒体において用いられるサブコード時間情報、セクタアドレス、クラスタアドレス、コンテンツデータに付加されたタイムコード、コンテンツデータの先頭からのバイト数、サンプル数、ＧＯＰ（Group of Picture）、映像フレーム、サウンドフレーム、圧縮音声データの圧縮ブロック単位の内のいずれかにより表現され、所定の基準位置からの量、あるいは、直前の区切り情報からの差分量、あるいは、前記情報を用いた数式で表現されるコンテンツ利用方法。
20. 請求項１１、請求項１２、請求項１３、請求項１４、請求項１５、請求項１６、請求項１７、請求項１８または請求項１９に記載のコンテンツ利用方法であって、
    前記区切り情報は、コンテンツデータに対して１種類以上が対応付けられており、
    １つのコンテンツデータに対して対応付けられた複数の区切り情報から目的とする区切り情報の選択入力を受け付ける選択入力受付工程を有するコンテンツ利用方法。

Images