JP2009290651A - コンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システム - Google Patents

コンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システム Download PDF

Info

Publication number
JP2009290651A
JP2009290651A JP2008142223A JP2008142223A JP2009290651A JP 2009290651 A JP2009290651 A JP 2009290651A JP 2008142223 A JP2008142223 A JP 2008142223A JP 2008142223 A JP2008142223 A JP 2008142223A JP 2009290651 A JP2009290651 A JP 2009290651A
Authority
JP
Japan
Prior art keywords
content
feature point
information
server
scenario
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008142223A
Other languages
English (en)
Inventor
Toshihiko Yamagami
俊彦 山上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Access Co Ltd
Original Assignee
Access Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Access Co Ltd filed Critical Access Co Ltd
Priority to JP2008142223A priority Critical patent/JP2009290651A/ja
Priority to PCT/JP2009/059706 priority patent/WO2009145226A1/ja
Publication of JP2009290651A publication Critical patent/JP2009290651A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866Management of end-user data
    • H04N21/25883Management of end-user data being end-user demographical data, e.g. age, family status or address
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Television Signal Processing For Recording (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

【課題】各情報機器に保持される映像コンテンツを自動収集し編集するのに好適な方法等を提供する。
【解決手段】少なくとも1つの特徴点について評価されたコンテンツを記憶した複数の情報機器とホームネットワークを介して接続されたサーバが実行する、各情報機器のコンテンツを管理する方法であって、複数の情報機器から各コンテンツの特徴点評価を収集する特徴点評価収集ステップと、収集された特徴点評価を記憶する特徴点評価記憶ステップと、情報機器からコンテンツが要求された場合に、記憶された特徴点評価を検索して該要求に適した特徴点評価を有するコンテンツを選択するコンテンツ選択ステップと、選択されたコンテンツの所在情報を情報機器に通知するコンテンツ所在情報通知ステップとを含むコンテンツ管理方法を提供する。
【選択図】図10

Description

本発明は、ホームネットワーク上に散在するコンテンツを自動収集し編集するのに好適なコンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システムに関する。
近年、半導体メモリやHDD(Hard Disk Drive)等の情報記録メディアの大容量化や価格下落が進んだことから、DCC(Digital CamCorder)やDSC(Digital Still Camera)、HDDレコーダ等の情報家電やPC(Personal Computer)等に大容量の記憶装置が搭載されるようになっている。このため、記憶装置の残容量を気にすることなく例えばDCCやDSC等を用いて次々と撮影を行い、動画ファイルや静止画ファイル等を記憶装置(メモリカード等)に大量に蓄積させることができる。また、放送或いはネットワーク伝送される映像系デジタルコンテンツをHDDレコーダやPC等のHDDに大量に録画してためておくことができる。以下、本明細書において動画ファイルや静止画ファイル、映像系デジタルコンテンツ等を「映像コンテンツ」と記す。なお、本明細書において「コンテンツ」と表現した場合には、映像コンテンツだけでなく、マークアップ文書やオーディオデータ、ドキュメントデータ、ワークシート、またはそれらの組み合わせで構成されるデータ等も含まれる。
ところで、このような大容量の記憶装置に蓄積された大量の映像コンテンツには似通った内容のものが数多く含まれている。そのため、全ての映像コンテンツを視聴することは退屈であり、時間の浪費となる。そこで、オーサリングツール等を使用して複数の映像コンテンツを編集、統合して一つの映像コンテンツ(以下、「統合映像コンテンツ」と記す。)にまとめることが行われる。複数の映像コンテンツを編集して統合映像コンテンツを作成する装置の例は、特許文献1や特許文献2等に開示されている。
特許文献1に記載の動画編集装置は、複数の動画が記憶された動画記憶部を有している。当該編集装置は、ユーザ入力された検索条件にしたがって動画記憶部から動画を検索し、検索結果をリスト表示する。ユーザは、表示されたリストのなかから所望の動画を選択し、選択された各動画を時系列に並べることにより一本の映像を完成させる。
特許文献2に記載の動画編集装置は、全ての動画素材の中からユーザの指定するシーンを含む箇所(切り出し範囲)を抽出し、抽出された切り出し範囲を一覧にした合成リストを作成する。そして、作成された合成リストにしたがって指定シーンに対応する切り出し範囲を連続的に再生する。このように特許文献2においては、動画の選択から、リスト作成、編集再生までの一連の作業が装置側で自動的に行われる。
特開2005−303840号公報 特開2000−125253号公報
このように構成された特許文献1および特許文献2に記載の動画編集装置において映像編集処理を行うためには素材となる全ての映像コンテンツが単一の記憶装置に記憶されていることが前提となる。ところが、映像コンテンツは、実際上HDDレコーダやホームサーバ(例えばPC)等の各情報機器に散在している。このため、従来の映像編集技術を利用する場合には全ての情報機器の映像コンテンツを単一の記憶装置に集める必要があり、ユーザに煩雑な操作、作業を強いることとなっていた。具体的には、記録装置に映像コンテンツを集めるため、ユーザは、各情報機器に映像コンテンツが記憶されているかチェックし、映像コンテンツが確認された情報機器一台一台を記憶装置に接続してコピーまたは移動操作を行う必要があった。そこで、このようなユーザの操作、作業負担の軽減を図るべく、各情報機器に散在するコンテンツを自動的に編集する装置やシステム、方法、プログラム等の提供が望まれていた。
本発明は上記の事情に鑑みてなされたものであり、その目的とするところは、各情報機器に保持される映像コンテンツを自動収集し編集するのに好適なコンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システムを提供することにある。
上記の課題を解決する本発明の一形態に係るコンテンツ管理方法は、少なくとも1つの特徴点について評価されたコンテンツを記憶した複数の情報機器とホームネットワークを介して接続されたサーバが実行する、各情報機器のコンテンツを管理する方法であり、複数の情報機器から各コンテンツの特徴点評価を収集する特徴点評価収集ステップと、収集された特徴点評価を記憶する特徴点評価記憶ステップと、情報機器からコンテンツが要求された場合に、記憶された特徴点評価を検索して該要求に適した特徴点評価を有するコンテンツを選択するコンテンツ選択ステップと、選択されたコンテンツの所在情報を情報機器に通知するコンテンツ所在情報通知ステップとを含むことを特徴とする。
このように一元管理された各コンテンツの特徴点評価を利用してコンテンツの所在情報を情報機器に通知することにより、情報機器によるコンテンツの自動収集、編集処理等を支援することができる。
また、コンテンツ管理方法は、少なくとも1つの特徴点評価に関連付けされたシナリオを複数記憶するシナリオ記憶ステップと、要求がされた場合に複数のシナリオの中から該要求に適した特徴点評価を有するシナリオを選択するシナリオ選択ステップとをさらに含む方法としてもよい。この場合コンテンツ選択ステップにおいては、選択されたシナリオに基づきコンテンツが選択される。
さらに、コンテンツ管理方法においては、シナリオがそれぞれ異なる特徴点評価に関連付けされた複数のシーンによって構成される場合に、コンテンツ選択ステップにおいて、選択されたシナリオの各シーンの特徴点評価に基づき各シーンのコンテンツが選択されるようにしてもよい。
また、上記の課題を解決する本発明の一形態に係るコンテンツ自動編集方法は、少なくとも1つの特徴点について評価されたコンテンツを記憶した他の情報機器、および各情報機器に記憶されたコンテンツを該特徴点に関連付けて管理するサーバとホームネットワークを介して接続された情報機器が実行する方法であり、サーバにコンテンツを要求するコンテンツ要求ステップと、サーバから要求に適した特徴点評価を有するコンテンツの所在情報が通知された場合に、該所在情報に基づき各情報機器から該コンテンツを収集するコンテンツ収集ステップと、収集されたコンテンツを編集するコンテンツ編集ステップとを含むことを特徴とする。
このようにサーバ(すなわち一元管理された各コンテンツの特徴点評価)にアクセスしてコンテンツの所在情報を取得することにより、情報機器は、ユーザの操作を介することなくコンテンツを自動収集し編集することができる。
また、コンテンツ自動編集方法は、編集されたコンテンツを再生するコンテンツ再生ステップをさらに含む方法としてもよい。
また、コンテンツ自動編集方法は、コンテンツを記憶する際に少なくとも1つの特徴点について該コンテンツを評価するコンテンツ評価ステップをさらに含む方法としてもよい。
また、上記の課題を解決する本発明の別の形態に係るコンテンツ自動編集方法は、少なくとも1つの特徴点について評価されたコンテンツを記憶した複数の情報機器と、ホームネットワークを介して該複数の情報機器と接続されたサーバとの連係処理によりコンテンツを自動編集する方法に関する。当該コンテンツ自動編集方法においてサーバに実行されるステップには次の各ステップが含まれる。すなわち、複数の情報機器から各コンテンツの特徴点評価を収集する特徴点評価収集ステップと、収集された特徴点評価を記憶する特徴点評価記憶ステップと、情報機器からコンテンツが要求された場合に、記憶された特徴点評価を検索して該要求に適した特徴点評価を有するコンテンツを選択するコンテンツ選択ステップと、選択されたコンテンツの所在情報を情報機器に通知するコンテンツ所在情報通知ステップとが含まれる。また、当該コンテンツ自動編集方法において情報機器に実行されるステップには次の各ステップが含まれる。すなわち、サーバにコンテンツを要求するコンテンツ要求ステップと、サーバから要求に適した特徴点評価を有するコンテンツの所在情報が通知された場合に、該所在情報に基づき各情報機器から該コンテンツを収集するコンテンツ収集ステップと、収集されたコンテンツを編集するコンテンツ編集ステップとが含まれる。
また、上記の課題を解決する本発明の一形態に係るコンテンツ管理プログラムは、上記何れかに記載のコンテンツ管理方法の各ステップをコンピュータに実行させるためのプログラムである。
また、上記の課題を解決する本発明の一形態に係るコンテンツ管理プログラムは、上記何れかに記載のコンテンツ自動編集方法の各ステップをコンピュータに実行させるためのプログラムである。
また、上記の課題を解決する本発明の一形態に係るサーバは、少なくとも1つの特徴点について評価されたコンテンツを記憶した複数の情報機器とホームネットワークを介して接続されたサーバであり、複数の情報機器から各コンテンツの特徴点評価を収集する特徴点評価収集手段と、収集された特徴点評価を記憶する特徴点評価記憶手段と、情報機器からコンテンツが要求された場合に、特徴点評価記憶手段を検索して該要求に適した特徴点評価を有するコンテンツを選択するコンテンツ選択手段と、選択されたコンテンツの所在情報を情報機器に通知するコンテンツ所在情報通知手段とを有することを特徴とする。
当該サーバは、少なくとも1つの特徴点評価に関連付けされたシナリオを複数記憶するシナリオ記憶手段と、情報機器から要求がされた場合に複数のシナリオの中から該要求に適した特徴点評価を有するシナリオを選択するシナリオ選択手段とさらに有する構成としてもよい。この場合コンテンツ選択手段は、選択されたシナリオに基づきコンテンツを選択する。
また、シナリオがそれぞれ異なる特徴点評価に関連付けされた複数のシーンによって構成される場合に、コンテンツ選択手段は、選択されたシナリオの各シーンの特徴点評価に基づき各シーンのコンテンツを選択するよう構成されてもよい。
また、上記の課題を解決する本発明の一形態に係る情報機器は、少なくとも1つの特徴点について評価されたコンテンツを記憶した他の情報機器、および各情報機器に記憶されたコンテンツを該特徴点に関連付けて管理するサーバとホームネットワークを介して接続された情報機器であり、サーバにコンテンツを要求するコンテンツ要求手段と、サーバから要求に適した特徴点評価を有するコンテンツの所在情報が通知された場合に、該所在情報に基づき各情報機器から該コンテンツを収集するコンテンツ収集手段と、収集されたコンテンツを編集するコンテンツ編集手段とを有することを特徴とする。
このように構成された情報機器は、編集されたコンテンツを再生するコンテンツ再生手段をさらに有する構成としてもよい。
また、該情報機器は、コンテンツを記憶するコンテンツ記憶手段と、コンテンツ記憶手段にコンテンツを記憶する際に少なくとも1つの特徴点についてコンテンツを評価するコンテンツ評価手段とをさらに有する構成としてもよい。
上記サーバまたは情報機器において処理されるコンテンツには、例えば映像コンテンツが含まれる。なお、映像コンテンツは一例であり、他にはマークアップ文書やオーディオデータ、ドキュメントデータ、ワークシート、またはそれらの組み合わせで構成されるデータ等も含まれる。
また、上記の課題を解決する本発明の一形態に係るコンテンツ自動編集システムは、上記何れかに記載の複数の情報機器と、ホームネットワークを介して該複数の情報機器に接続され、各シーンの特徴点評価に基づき各シーンのコンテンツを選択するように構成されたサーバとを有するシステムに関する。当該システムに備えられる情報機器のコンテンツ編集手段は、各シーンに対して選択されたコンテンツがシナリオで定められた順に再生されるよう編集処理を行うように構成される。
本発明のコンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システムによれば、各情報機器に保持される映像コンテンツが自動的に収集、編集されるため、ユーザの操作、作業負担が軽減される。
以下、図面を参照して、本発明の実施形態について説明する。
図1は、本実施形態を説明するためのネットワーク構成図である。図1に示されるように本実施形態のネットワークは、家庭内LAN(Local Area Network)1と外部ネットワーク2により構築される。
家庭内LAN1には、ゲートウェイサーバ10および複数の情報機器(HDDレコーダ21、TV(Television)22、ノートPC23、ホームサーバ100等)が配置されている。ゲートウェイサーバ10は、スイッチングおよびルーティング機能を有しており、家庭内LAN1内の各情報機器を相互接続するとともに外部ネットワーク2上に、あるいは図示省略された他のネットワーク上に配置された端末と通信することができる。
家庭内LAN1には、HDDレコーダ21、TV22、ノートPC23以外の情報機器も接続されている。また、電子レンジや冷蔵庫等の情報家電も接続されている。なお、以降の説明においては便宜上、情報家電も情報機器と記す。家庭内LAN1に接続された全ての情報機器にはホームネットワークに関する共通の技術仕様に準拠したミドルウェアやクライアントソフトウェアが実装され、家庭内LAN接続に適した構成を有する。本実施形態においては、各情報機器は共通の技術仕様であるDLNA(Digital Living Network Alliance)に準拠したものであり、HDDレコーダ21はDMS(Digital Media Server)として、TV22はDMP(Digital Media Player)として、ノートPC23はDMSおよびDMPとして、それぞれ機能する。また、ホームサーバ100は、デスクトップPCであり、ノートPC23と同様にDMSおよびDMPとして機能する。なお、Havi(Home Audio/Video interoperability)、Jini等の別の技術仕様に適合した情報機器によって家庭内LANを構成してもよい。
ホームサーバ100は、HDDレコーダ21をはじめとする家庭内LAN1内の各情報機器に記憶されたコンテンツを収集して蓄積することができる。また、外部ネットワーク2上に配置された情報機器(例えば携帯電話24)に記憶されたコンテンツを外部ネットワーク2、ゲートウェイサーバ10経由で取得して蓄積することもできる。ホームサーバ100へのコンテンツの蓄積は、ホームサーバ100や各情報機器の設定、またはユーザ操作等にしたがって行われる。
図2は、ホームサーバ100の構成を示すブロック図である。ホームサーバ100を構成する各要素は、システムバス110を介してCPU120と相互に接続されている。CPU120は、ホームサーバ100の電源投入後、システムバス110を介して必要なハードウェアにアクセスする。
例えばホームサーバ100の電源投入直後は、CPU(Central Processing Unit)120がROM(Read-Only Memory)130にアクセスする。CPU120は、ROM130に格納されたブートローダをRAM(Random Access Memory)140にロードして起動する。ブートローダを起動したCPU120は、次いでHDD150に格納されたOS(Operating System)をRAM140にロードして起動する。これにより、各要素がOSによるリソース、プロセス管理下で必要に応じて連係動作して各種処理を実行する。OS起動後は、HDD150に格納された各種常駐プログラムがRAM140に常駐する。このような常駐プログラムには、本発明の特徴に係るコンテンツ収集プログラム151、統合映像コンテンツ作成プログラム152、特徴点学習プログラム153、シナリオ学習プログラム154、家族プロファイル学習プログラム155等がある。以下、これらの常駐プログラムについて説明する。
図3は、コンテンツ収集プログラム151により実行されるコンテンツ収集処理を示すフローチャート図である。図3に示されるように、コンテンツ収集プログラム151は、例えばRAM140に常駐した時点で、映像コンテンツ(例えばMPEG−2(Moving Picture Experts Group phase 2)形式)をリクエストするリクエストメッセージを、ネットワークインタフェース160を介して同一セグメント、つまり家庭内LAN1内の各DMSにユニキャストで個別に(またはマルチキャストで)送信する(ステップ1。以下、本明細書および図面においてステップを「S」と略記する。)。リクエストメッセージを受信した情報機器は、自己の保有するコンテンツリスト等を参照して、前回のリクエストメッセージ受信時から映像コンテンツが更新や追加等されたかチェックする。そして、更新や追加等された映像コンテンツがある場合には、該映像コンテンツをホームサーバ100にアップロードする。
次に、コンテンツ収集プログラム151は、各端末から受信した映像コンテンツをHDD150内のコンテンツデータベース156に格納すると同時に該映像コンテンツを解析して様々な特徴点について評価する(S2、S3)。ここで、特徴点とは、例えば「おばあちゃん」(被写体人物)、「二人」(被写体の人数)、「笑い」(被写体の表情)、「食べる」(被写体の動作)、「浴衣」(被写体の服装)、「戸外」(撮影場所)、「夕方」(撮影時刻)、「週末」(撮影日時)、「見下ろし」(被写体と撮影者との位置・角度関係)、「誕生日」(家族の年中行事)、「ズームイン」(撮影パターン)等の映像コンテンツを特徴付ける要素である。特徴点には、映像コンテンツに記録された映像や音声の特徴のみならず、映像コンテンツの撮影者、撮影日時等の情報も含まれる。特徴点の解析処理においては、例えば動作認識や顔表情認識、対象物認識、音声認識等の周知の認識アルゴリズムにより映像コンテンツ中の画像や音声の特徴点が抽出、数値化される。このように数値化された各映像コンテンツの各種特徴点に関する情報を、映像特徴パラメータと呼ぶ。解析処理において対象物認識や音声認識等を行う際には、家族プロファイルデータベース159に記憶された後述する家族プロファイルが参照され、被写体(例えば「弟」)や撮影者(例えば「父」の声)が特定される。また、撮影日時や撮影者については、映像コンテンツ・ファイルのタイムスタンプやプロパティから取得することもできる。あるいは、家族プロファイルを使用することにより、被写体の身長や顔つき等から、撮影時における被写体の年齢(すなわち、映像コンテンツの撮影時期)を推定することもできる。
コンテンツ収集プログラム151は、このように各特徴点について映像コンテンツを解析した結果である映像特徴パラメータのリスト(以下、「メタ情報」という。)を生成する(S4)。具体的には、各特徴点に対応した所定の関数を用いて、当該特徴点に関する映像コンテンツの評価を示す映像特徴パラメータを計算する。図4に、S4の処理により生成されるメタ情報の一例を示す。図4に示されるように、メタ情報は、「父」、「母」、「姉」、「弟」・・・等の各特徴点に対応する映像特徴パラメータ群で構成される。本実施形態においては、各種映像特徴パラメータは、例えば0〜1の数値で表現される。図4のメタ情報は、映像コンテンツが例えば姉と弟を主たる被写体とした無音声の映像であり、ズームインされたシーンが多く含まれる内容であることを示している。生成されたメタ情報は、HDD150内のメタ情報データベース157に格納される(S5)。
このように同一セグメント内の各情報機器が保持する映像コンテンツは、コンテンツ収集プログラム151によって自動的に収集され、コンテンツ収集プログラム151によって特徴点解析が行われてメタ情報が生成される。なお、他のセグメントの情報機器(例えば携帯電話24)が保持する映像コンテンツまでは自動収集しない。他のセグメントの情報機器が保持する映像コンテンツは、該情報機器がマニュアル操作されたときにはじめてホームサーバ100にアップロードされ蓄積される。また、ホームサーバ100や各情報機器を設定変更して、同一セグメントの情報機器が保持する映像コンテンツもマニュアル操作されたときにはじめてホームサーバ100にアップロードされ蓄積されるようにしてもよい。
図5は、統合映像コンテンツ作成プログラム152により実行される統合映像コンテンツ作成処理を示すフローチャート図である。統合映像コンテンツ作成プログラム152は、シナリオに基づいて統合映像コンテンツを作成する。図6(a)、(b)はそれぞれ、HDD150内のシナリオデータベース158に格納されたシナリオの例(シナリオ1581、1582)を示す。各シナリオは、1つ以上のシーン定義Sから構成される。シーン定義Sは、シーンの特徴(当該シーンに割り当てる映像コンテンツに求められる映像特徴パラメータ)を定義する複数種類のシーン特徴パラメータや、各シーンの割当時間パラメータ等から構成されている。シーン特徴パラメータは、映像特徴パラメータと同じく、0〜1の値で表現される。例えば図6(a)のシナリオ1581におけるシーン1を定義するシーン定義Sには、(姉、誕生日、笑い、悲しみ・・・)=(0.8、1、0.8、0.1・・・)といったシーン特徴パラメータが設定されている。なお、シナリオ自体にもシーン特徴パラメータと同様のシナリオ特徴パラメータが関連付けられている。シナリオ特徴パラメータは、例えばシナリオを構成する各シーン定義のシーン特徴パラメータに基づき計算される。または、各シーン定義のシーン特徴パラメータとは独立して付与されたシナリオ全体の流れを表現するパラメータであってもよい。各シナリオやシーン定義は、シナリオデータベース158に例えばテンプレートとして予め格納されている。なお、シナリオやシーン定義は、例えば専用のエディタを使用してユーザが独自に作成することもできるが、映像機器メーカ等が配布するものを例えばインターネット上のサーバからダウンロードして利用することもできる。
ここで、家庭内LAN1に接続されたTV22やノートPC23等のクライアントをユーザが操作して、視聴したい映像コンテンツのテーマや登場人物、再生総時間等が入力された場合を考える。このとき入力された情報はホームサーバ100に送信される。ホームサーバ100によって該入力情報が受信されると、CPU120により統合映像コンテンツ作成プログラム152の実行が開始される。以下、説明の便宜上、該入力情報を「コンテンツ作成指示情報」と記す。
図5に示されるように、統合映像コンテンツ作成プログラム152は、先ず、シナリオデータベース158にアクセスして各シナリオを参照し、コンテンツ作成指示情報に適したシナリオを選択する(S11)。コンテンツ作成指示情報が「姉」、「誕生日」である場合には、例えば「姉」、「誕生日」のシナリオ特徴パラメータがともに所定値(例えば0.6)以上のシナリオ(ここではシナリオ1581)が選択される。
統合映像コンテンツ作成プログラム152は、続いてメタ情報データベース157にアクセスし、選択されたシナリオの各シーンに適したメタ情報を検索する(S12)。例えばシナリオ1581のシーン1に対しては、「姉」、「誕生日」の映像特徴パラメータが所定値以上でかつ2002年に撮影された映像コンテンツのメタ情報が検索される。
統合映像コンテンツ作成プログラム152は、コンテンツデータベース156にアクセスし、検索されたメタ情報に対応する映像コンテンツを選択シナリオのシーン毎に読み込む(S13)。各シーンに対しては、例えば検索順位が最上位のメタ情報に対応する映像コンテンツが読み込まれる。メタ情報の検索順位は、シーン定義S(具体的には、シーン特徴パラメータ)とメタ情報との一致度にしたがって決定される。
統合映像コンテンツ作成プログラム152は、読み込まれた映像コンテンツをシーン毎にクリッピングして配列し、シーン映像を生成する(S14)。ここではシナリオ1581のシーン1〜20それぞれについて対応するシーン映像が生成される。例えばシーン1の場合は、2002年の姉の誕生日に撮影された映像コンテンツ中の25秒間の映像がシーン映像としてクリッピングされる。映像コンテンツの時間軸におけるクリッピングの開始点は、例えばランダムに設定される。また、撮影時間の長い映像は後半冗長になりやすいため、前半の映像が優先的にクリッピングされる。
統合映像コンテンツ作成プログラム152は、生成された各シーン映像をシーン1〜20の順に配列して隣り合うシーン映像を繋げて一連の映像コンテンツ、つまり統合映像コンテンツを作成する(S15)。シーン映像間の接続には切替エフェクト等を使用して視覚効果を高めてもよい。作成された統合映像コンテンツは、クライアント(つまりコンテンツ作成指示情報の送信元)に送信される。クライアントは、受信した統合映像コンテンツを映像コーデックによりデコードして再生する。なお、ユーザは、作成された統合映像コンテンツをHDD150に任意に保存することができる。
このように統合映像コンテンツ作成プログラム152を実行させた場合は、統合映像コンテンツが自動的に作成されるため映像作成作業の煩雑さが無い反面、映像内容が特徴点評価(メタ情報)やシナリオ選択等の固定されたアルゴリズム設計に依存する問題がある。つまり、アルゴリズムの設計次第では、ユーザの意図する内容から外れた統合映像コンテンツが作成される虞がある。ここで、ユーザは、意図した通りに統合映像コンテンツが作成されるように例えばシナリオデータベース158内の各シナリオを編集することができる。しかし、このようなシナリオ編集作業によって統合映像コンテンツの内容を向上させるには相当の試行錯誤が必要である。すなわちシナリオ編集作業による上記問題の解決は、編集作業が煩雑なうえに困難性が伴うため有効とはいえない。このような事情を鑑みて、映像作成作業の煩雑さを無くしつつも統合映像コンテンツの内容向上を図るべく、ホームサーバ100には特徴点学習プログラム153、シナリオ学習プログラム154、家族プロファイル学習プログラム155等の学習プログラムが実装されている。
図7は、特徴点学習プログラム153により実行される特徴点学習処理を示すフローチャート図である。図7に示されるように、特徴点学習プログラム153は、RAM140に常駐後、コンテンツ収集プログラム151によるメタ情報の生成、およびクライアントの所定の共有情報の更新を監視する(S21〜S23)。
特徴点学習プログラム153は、コンテンツ収集プログラム151によりメタ情報が生成されたことを検出した場合(S21、S22:YES)、例えばTF−IDF(Term Frequency-Inverse Document Frequency)法を応用したアルゴリズムにより、図3のS4の処理で用いられる関数の変換係数、つまり映像コンテンツの特徴点を映像特徴パラメータ群に変換するための係数を更新する(S24)。該アルゴリズムによれば、メタ情報データベース157に格納された全てのメタ情報に基づき、コンテンツデータベース156に格納された映像コンテンツの傾向が解析される。例えば笑顔の映像が多いといった解析結果が得られた場合を考える。この場合、コンテンツデータベース156に格納された映像コンテンツのなかで笑顔の多い映像コンテンツは特徴的な映像コンテンツとはいえない。すなわち、「笑い」の映像特徴パラメータによって映像コンテンツを差別化することは難しい。そこで、特徴点学習プログラム153は、「笑い」という特徴を敢えて希薄化させて他の特徴を際立たせるため、「笑い」の映像特徴パラメータの重みが軽くなるように変換係数を更新する。コンテンツ収集プログラム151は、更新された変換係数を用いることにより、映像コンテンツの特徴をより的確に表現したメタ情報を生成するようになる。この結果、統合映像コンテンツ作成プログラム152は、コンテンツ作成指示情報により適した映像コンテンツを選択して統合映像コンテンツを作成するようになる。特徴点学習プログラム153は変換係数更新後、S21の処理に復帰する。
また、S24の処理において笑顔の映像が多いといった解析結果が得られた場合に、「笑い」という単一の映像特徴パラメータを「笑い」、「大笑い」、「くすくす笑い」等の複数の映像特徴パラメータに細分化してもよい。この場合、映像コンテンツを笑いの程度に応じて更に細かく区別し特徴付けられるようになる。
ところで、DLNAガイドライン等に準拠した情報機器が接続されたセグメント内では、各情報機器間において情報交換が相互になされ、各種情報が共有される。このため家庭内LAN1では、TV22やノートPC23等のクライアントにおけるコンテンツの再生履歴に関する詳細な情報をクライアントとホームサーバ100で共有することができる。クライアントは、例えば統合映像コンテンツの再生が終了する毎に共有フォルダに置かれた再生履歴情報を更新する。再生履歴情報は、例えば統合映像コンテンツ中の何れのシーンにおいて再生、スキップ、リピート、早送り、巻き戻し、停止等の操作が行われたかを示す情報を有する。
特徴点学習プログラム153は、各クライアントの共有フォルダに定期的にアクセスして、共有フォルダ内の再生履歴情報が更新されているかどうかを監視する(S21〜S23)。共有フォルダ内の再生履歴情報が更新されている場合には(S21、S22:NO、S23:YES)、該再生履歴情報を用いてメタ情報データベース157内に保持される後述の重み付け値を更新する(S25)。例えばシナリオ1581を用いて作成された統合映像コンテンツがTV22により再生された場合を考える。このときの再生履歴情報によれば、シーン1〜16がリピートされ、シーン17〜20が再生されていない。したがって、特徴点学習プログラム153は、リピート再生されたシーン1〜16の映像コンテンツのメタ情報において例えば一定の水準(例えば、0.6)より高い値をもつ全ての映像特徴パラメータ(またはシーン特徴パラメータ)の重み付け値を上げるとともに、シーン17〜20の映像コンテンツのメタ情報において一定の水準より高い全ての映像特徴パラメータの重み付け値(またはシーン特徴パラメータ)を下げる。なお、HDD150は、各特徴点に対応する重み付け値のリスト(不図示)を保持しており、統合映像コンテンツ作成プログラム152が各シーンに対応するメタ情報を検索する際に該重み付け値のリストを参照して、シナリオのシーン定義Sに含まれるシーン特徴パラメータに該重み付け値を加えた値と一致するメタ情報を検索する。また、特徴点学習プログラム153は、再生履歴情報の更新等があったときに、該重み付け値のリストを参照して、特徴点の重み付け値を更新する。また、リピート回数と映像特徴パラメータとの相関を計算して、相関係数に応じた重み付け値が付与されるようにしてもよい。付与される重み付け値は、リピート回数に応じて、例えばリニアに、指数関数的に、または対数的に増減される。これにより、統合映像コンテンツ作成プログラム152は、コンテンツデータベース156内に同じような内容の映像コンテンツが複数ある場合にもユーザが特に視聴したいと思う映像コンテンツを選択して統合映像コンテンツを作成するようになる。特徴点学習プログラム153は重み付け処理後、S21の処理に復帰する。
特徴点学習プログラム153は、共有フォルダ内の再生履歴情報の監視処理の代替処理として、各クライアントの共有フォルダ内の再生履歴情報を定期的に取得するようにしてもよい。この場合、S25の処理においては、全ての再生履歴情報に基づきメタ情報データベース157内のメタ情報が更新される。例えば再生日時が新しい映像コンテンツのメタ情報の映像特徴パラメータほど高い重み付け値が付与される。この結果、統合映像コンテンツ作成プログラム152は、ユーザの最近の嗜好等に適した映像コンテンツを選択して統合映像コンテンツを作成するようになる。
上記は、特徴点学習プログラム153による映像特徴パラメータの更新処理の例示であり、他にも様々な更新処理が想定される。上記以外には、例えば家族プロファイルを利用した映像特徴パラメータの更新処理が想定される。ここでいう家族プロファイルとは、家庭内LAN1および外部ネットワーク2上の一部の情報機器(携帯電話24等)が保有する家族に関する情報である。HDDレコーダ21には、例えば家族各人が録画した映像コンテンツが「父」、「母」、「姉」、「弟」等の各録画カテゴリに関連付けて記憶されている。また、家族各人の視聴履歴や番組予約等の情報も記録されている。また、ノートPC23の家族各人のドキュメントフォルダには、Webページの閲覧履歴や写真、音楽等が格納されている。各情報機器に散在するこれらの情報は、家族構成や家族各人の嗜好、身体的情報等を反映している。
家族プロファイル学習プログラム155は、各情報機器に散在する家族プロファイルを収集してHDD150内に家族プロファイルデータベース159を構築する。また、再生履歴情報等に基づき家族プロファイルデータベース159内の家族プロファイルを更新し、あるいは家族プロファイルを追加する。一例として、再生されたシーンの内容や再生頻度等に基づき家族の嗜好等を推定して家族プロファイルを更新または追加する。また、コンテンツ作成指示情報を入力するGUI(Graphical User Interface)において操作者情報も併せて入力させるようにする。そして、該コンテンツ作成指示情報に応じた統合映像コンテンツの再生が終了した時に生成される再生履歴情報に操作者情報を関連付ける。再生履歴情報に関連付けられた操作者情報を利用することにより、全ての再生履歴情報のなかから家族各人の再生履歴情報を分類する。このようにして分類された再生履歴情報、さらには家族各人の視聴履歴や番組予約等の他の情報に基づき家族各人の嗜好等を推定して(例えば次段落にて説明される因子分析等を用いて嗜好等を表現する分布を生成し)、家族各人の家族プロファイルを更新または追加することができる。
家族プロファイル学習プログラム155は、さらに、データマイニングの手法等により家族プロファイルに基づく家族の行動パターン解析も行い、解析結果を家族プロファイルとして家族プロファイルデータベース159に蓄積する。このように従来各情報機器に散在していた家族プロファイルを収集して管理、解析することにより、有益な情報が新たに発見される可能性がある。
例えば因子分析等の多変量解析を用いて家族の特徴を分析し、新たな家族プロファイルを生成することができる。具体的には、n種類の映像特徴パラメータの各々を座標軸とするn次元仮想空間を定義し、該n次元仮想空間にメタ情報に基づき映像コンテンツを分布させる。次いで、映像コンテンツの分布を多変量解析することによりm(m<nであり、例えばm=3)種類の主成分を抽出し、各主成分の値をもつ主成分ベクトルを求める。求められた主成分ベクトルの情報に基づき、n次元仮想空間上の映像コンテンツの分布をより低次なm次元仮想空間(ここでは各主成分を座標軸として定義された三次元仮想空間)に写像する。三次元仮想空間上の映像コンテンツの分布は、家族が潜在的に有する特徴を表現している。このような分布で表現された家族プロファイルを利用することにより、特徴点に対する変換係数や各特徴点に対応する重み付け値の更新等を行うことができる。また、該分布で表現された家族プロファイルに適したシナリオ等を選択したりインターネット上のサーバからダウンロードしたりすることもできる。
また、クラスタ分析等の手法を用いて新たな家族プロファイルを生成することもできる。例えばn種類の映像特徴パラメータを映像コンテンツの再生状況等によって重み付け等の更新が頻繁になされるパラメータのクラスタと、頻繁にはなされないパラメータのクラスタの2つのクラスタに分類する。その分類に基づき家族の特徴を抽出して家族プロファイルを生成する。例えば前者のクラスタに注目して家族の特徴を抽出することができる。
家族プロファイルデータベース159に蓄積された家族プロファイルは、様々な処理に活用することができる。これらの家族プロファイルに例えば家族各人の身長や声、好きな服の色やパターン、好きなスポーツ、年齢等が含まれる場合を考える。この場合、家族プロファイルに基づき認識アルゴリズムで用いられる認識用のリファレンスデータを更新し、家族各人の動作認識や対象物認識、音声認識等の認識アルゴリズムの精度を向上させることができる。この結果、統合映像コンテンツ作成プログラム152は、ユーザの指示に対してより適切な映像コンテンツを選択して統合映像コンテンツを作成するようになる。
また、統合映像コンテンツ作成プログラム152は、家族プロファイルデータベース159に蓄積された家族プロファイルを直接的に活用して映像コンテンツを選択することができる。例えばコンテンツ作成指示情報に「父」が含まれる場合を考える。この場合、統合映像コンテンツ作成プログラム152は、家族プロファイルデータベース159にアクセスして父の嗜好等に関する家族プロファイルを検索する。そして、検索された家族プロファイルに基づき父の嗜好等に関する映像コンテンツを選択して統合映像コンテンツを作成する。
家族プロファイルは、映像特徴パラメータの重み付け処理にも活用することができる。すなわち、特徴点学習プログラム153は、家族プロファイルを利用して図7のS22の処理と同じく変換係数を更新し、また、メタ情報データベース157内のメタ情報を更新することができる。一例として、子供が多い家庭の場合には「子供」という特徴を希薄化させて他の特徴を際立たせるため、「子供」の映像特徴パラメータの重み付けが軽くなるように変換係数を更新したり重み付け値を変動させたりする。
家族プロファイルは、さらに、シナリオデータベース158内の各シナリオの編集にも活用することができる。具体的には、シナリオ学習プログラム154が家族プロファイルを利用して各シナリオの編集を行う。一例として、家族プロファイルデータベース159に蓄積された家族プロファイルに子供の写真が多い場合には、子供のシーンが長くなるように既存のシナリオを編集し、または子供がメインのシナリオを新たに作成する。
なお、上述したようにDLNAガイドラインに対応する情報機器間においては各種情報が共有されることから、家族プロファイルも例外無く共有可能である。したがって、各情報機器に散在する家族プロファイルをホームサーバ100に収集することなく、家族プロファイルを有効活用したメタ情報の更新等を行うことができる。
ホームサーバ100は、このようにして収集、追加、更新等された家族全体または家族各人の家族プロファイルをゲートウェイサーバ10を介して外部ネットワーク2上の情報提供サーバ200(図1参照)に送信する。情報提供サーバ200は、受信した家族プロファイルに基づき家族または家族各人の嗜好等に適した広告情報や映像コンテンツ等をホームサーバ100zに発信する。広告情報は、例えば統合映像コンテンツにオンスクリーンで表示される。
シナリオ学習プログラム154は、特徴点学習プログラム153と同様に再生履歴情報等に基づきシナリオ編集やシナリオ特徴パラメータ、シーン特徴パラメータ等を更新する。例えば図6(b)のシナリオ1582を用いて作成された統合映像コンテンツがTV22により再生された場合を考える。このときの再生履歴情報によれば、シーン4、8、12、16、20がリピートされ、それ以外のシーンがスキップされている。この場合、家族全員の映像がユーザの視聴したかった映像と思われる。したがって、シナリオ学習プログラム154は、例えばシーン4、8、12、16、20のクリッピング時間を長くし、それ以外のシーンのクリッピング時間を短くするようにシナリオ1582を編集する。また、例えばシーン4、8、12、16、20のシーン特徴パラメータの重み付け値を上げるとともにそれ以外のシーンのシーン特徴パラメータの重み付け値を下げる。以降、ユーザが春の週末の戸外の映像を視聴するようにコンテンツ作成指示情報を入力した場合には、家族全員が写された統合映像コンテンツが作成されやすくなる。また、シナリオ学習プログラム154は、リピート回数が多いシーンほどクリッピング時間が長くなるようにシナリオ編集してもよい。クリッピング時間は、リピート回数に応じて、例えばリニアに、指数関数的に、または対数的に増減される。
また、シナリオ学習プログラム154は、図5のS11の処理におけるシナリオの選択回数や再生日時等に基づき、各シナリオ特徴パラメータの重み付け値を変動させることができる。例えば選択回数が多いシナリオを良質なシナリオとする場合には、該シナリオがさらに選択されるように各シナリオ特徴パラメータの重み付け値を変動させる。
このように特徴点学習プログラム153とシナリオ学習プログラム154は、再生履歴情報等に基づき各種パラメータを適切な値にフィードバックしている。このようなフィードバック処理は、特徴点学習プログラム153等に限らず統合映像コンテンツ作成プログラム152も行う。具体的には、統合映像コンテンツ作成プログラム152は、メタ情報データベース157に格納された全てのメタ情報に基づき、図5のS11のシナリオ選択処理に用いる閾値を更新する。すなわち、各映像コンテンツの特徴点たる各メタ情報の映像特徴パラメータをK平均法等のクラスタリング手法により例えば2つにクラスタリングして各クラスタの中心を計算し、これらの中心の中間値を閾値として設定する。この場合、コンテンツデータベース156に格納された映像コンテンツの傾向に応じて最適な閾値が設定される。
また、統合映像コンテンツ作成プログラム152とシナリオ学習プログラム154とが連係して以下のフィードバック処理を実行するようにしてもよい。すなわち、統合映像コンテンツ作成プログラム152は、クリッピング対象が例えば笑いのシーンである場合、笑い始めのn秒前から笑うまでのシーンをクリッピングする。統合映像コンテンツ作成プログラム152は、このときの「n秒」をクリッピング毎にランダムに設定する。一方、シナリオ学習プログラム154は、笑いのシーンの再生履歴情報を解析する。シナリオ学習プログラム154は、解析結果に基づき最適と判断されるn’秒を演算して統合映像コンテンツ作成プログラム152に渡す。以降、統合映像コンテンツ作成プログラム152は、笑いのシーンに対しては、笑い始めのn’秒前から笑うまでのシーンをクリッピングする。このようなプログラム間の連係処理により、ユーザの感性や嗜好等に合った統合映像コンテンツが作成されるようになる。
ここで、上記n秒が2秒以上10秒未満の時間で設定される場合を例に考える。この場合においてn秒は、2秒以上10秒未満の間でランダムに設定されてもよく、或いは、ユーザ操作によりユーザの意図をある程度反映させた時間に設定されてもよい。後者の場合の具体的一例として、n秒として第一時間(例えば2秒以上3秒未満の時間)が設定される確率を30%、第二時間(例えば3秒以上5秒未満の時間)が設定される確率を40%、第三時間(例えば5秒以上10秒未満の時間)が設定される確率を30%というように設定することができる。第一〜第三時間の各時間のなかではn秒はランダムに設定される。このようなユーザ設定を可能とすることにより、例えば事象(ここでは笑い)が起こる直前の時間帯を特定のコンテンツ(例えば家族写真等)の再生タイミング等に合わせて設定することができる。この場合のクリッピング時間および期間も各種学習プログラムにより学習され、該学習結果を基にユーザにとって好適なクリッピング時間および期間がさらに設定されるようにしてもよい。
以上説明された実施形態(以下、「第一実施形態」と記す。)によれば、ホームサーバ100は、HDDレコーダ21等の情報機器に記憶された映像コンテンツを自動収集したうえで統合映像コンテンツを作成している。次に、ホームサーバがこのような映像コンテンツの自動収集機能を有さないまたは自動収集処理を行わない別の実施形態(以下、「第二実施形態」と記す。)について説明する。第二実施形態において各情報機器の映像コンテンツをホームサーバに集めるためには、ユーザ自らが各情報機器に対する映像コンテンツの保持状況を確認し、そのうえで映像コンテンツをコピーまたは移動させる必要がある。このため、第二実施形態においては、ユーザの操作、作業負担が増加するように思われる。しかし、第二実施形態においては、ホームサーバと各情報機器が第一実施形態とは異なる連係処理を行うことにより、ユーザに操作、作業負担をかけること無く統合映像コンテンツを自動的に編集し作成することができる。
なお、第二実施形態のネットワーク構成は図1と同一構成である。第二実施形態において第一実施形態の構成と同一または同様の構成には同一または同様の符号を付して説明を省略する。
第二実施形態においては、HDDレコーダ21等の各情報機器がメタ情報データベース157を有し、ホームサーバに代わり映像コンテンツにメタ情報を付与してメタ情報データベース157に格納する。すなわち各情報機器は、映像コンテンツを録画等すると同時に図3のS3〜S5と同様の処理、すなわち映像コンテンツの特徴点解析(S3)、解析された特徴点に基づくメタ情報の生成(S4)、およびメタ情報データベース157へのメタ情報の格納(S5)を行う。映像コンテンツは、S3〜S5の処理後もホームサーバに収集されないためネットワーク上に散在した状態にある。
図8は、第二実施形態の家庭内LAN1に設置されたホームサーバ100zの構成を示すブロック図である。ホームサーバ100zのHDD150には、メタ情報収集プログラム151z、統合映像コンテンツ作成プログラム152z、特徴点学習プログラム153、シナリオ学習プログラム154、家族プロファイル学習プログラム155、メタ情報データベース157z、シナリオデータベース158、家族プロファイルデータベース159が記憶されている。
図9は、メタ情報収集プログラム151zにより実行されるメタ情報収集処理を示すフローチャート図である。図9に示されるように、メタ情報収集プログラム151zは、RAM140に常駐後、各情報機器のメタ情報データベース157に定期的にアクセスする(S31)。次いで、各情報機器と情報を相互に交換してメタ情報データベース157に追加または更新されたメタ情報が存在するか否かを検知する(S32)。何れの情報機器のメタ情報データベース157にも追加または更新されたメタ情報が無い場合には(S32:NO)、メタ情報収集処理を終了する。一方、その何れかにおいて追加または更新されたメタ情報が有る場合には(S32:YES)、該メタ情報を収集する(S33)。メタ情報収集プログラム151zは、このようにして収集された各情報機器のメタ情報をメタ情報データベース157zに蓄積する(S34)。メタ情報収集プログラム151zは、メタ情報を蓄積する際、映像コンテンツを識別するためのコンテンツ識別情報(例えば映像コンテンツ名や映像コンテンツ固有に割り当てたID)と該映像コンテンツの所在情報(例えば情報機器のMACアドレスや他の固有ID、映像コンテンツのURL(Uniform Resource Locator)、或いは、映像コンテンツがリムーバルメディアに記録されている場合にはリムーバルメディアの固有ID等)を該メタ情報に追加する。
このように第二実施形態においては、各情報機器が保持する映像コンテンツのメタ情報はホームサーバ100zにより一元管理される。各情報機器は、一元管理されたメタ情報を利用してホームサーバ100zおよび他の情報機器と連係処理することにより統合映像コンテンツを作成することができる。図10は、統合映像コンテンツを作成する処理を示すシーケンス図である。一つの情報機器(ここではノートPC23)が操作されてコンテンツ作成指示情報が入力されると、図10に示される統合映像コンテンツを作成する処理が開始される(S41)。
ノートPC23は、入力されたコンテンツ作成指示情報をホームサーバ100zに送信する(S42)。ホームサーバ100zによってコンテンツ作成指示情報が受信されるとCPU120により統合映像コンテンツ作成プログラム152zの実行が開始される。統合映像コンテンツ作成プログラム152zは、図5のS11〜S12と同様の処理、すなわちコンテンツ作成指示情報に適したシナリオの選択、メタ情報を一元管理したメタ情報データベース157zへのアクセス、および選択シナリオの各シーンに適したメタ情報の検索を行う(S43)。次いで、レスポンスメッセージ、つまり選択シナリオとともに検索されたメタ情報をノートPC23に返す(S44)。
ノートPC23は、受信されたメタ情報が有する映像コンテンツの所在情報を参照してアクセス先を決定する(S45)。次いで、決定されたアクセス先、つまりメタ情報に対応する映像コンテンツを有する各情報機器に、コンテンツ識別情報またはURLを含むリクエストメッセージを送信する(S46)。ホームサーバ100の検索結果によっては、ノートPC23自身が保持する映像コンテンツのURLがアクセス先に含まれる場合もある。
ノートPC23からリクエストメッセージを受け取った情報機器は、リクエストメッセージ中のコンテンツ識別情報またはURLに応じたレスポンス、すなわち自己が保持する映像コンテンツのなかから、該リクエストメッセージ中で指定された映像コンテンツを検索して(S47)ノートPC23に返す(S48)。このようにして統合映像コンテンツに必要な各シーンの映像コンテンツがノートPC23に集められる。ノートPC23は、収集された映像コンテンツおよびホームサーバ100から受け取った選択シナリオを用いて図5のS14〜S15と同様の処理を行い、統合映像コンテンツを作成する(S49)。作成された統合映像コンテンツは、ノートPC23の映像コーデックによりデコードされ再生される(S50)。
以上のように第二実施形態においては、各情報機器が保持する映像コンテンツをホームサーバ100z、つまり一つの記憶装置に収集すること無く統合映像コンテンツを自動的に編集し作成することができる。このため、映像コンテンツの収集に伴う操作、作業負担がユーザに無い。また、第二実施形態では家庭内LAN1のトラフィック面において有利な効果がある。その例示として、各情報機器が情報量の多い映像コンテンツを同時に収集した際にトラフィックが著しく増加してネットワーク障害が発生するといった心配がないことが挙げられる。また、家庭内LAN1内のネットワーク伝送路を伝送される映像コンテンツが統合映像コンテンツの作成に必要とされる最低限の映像コンテンツに限られる。このため、ネットワーク伝送路を映像コンテンツ以外の他のデータの伝送に割り当てやすくなり、情報機器間においてより多様な情報の交換が可能になる効果も期待できる。
なお、第二実施形態においても第一実施形態と同様に各種学習プログラムによるメタ情報の更新やシナリオ編集、家族プロファイル更新等が行われるようにしてもよい。
以上が本発明の実施形態の説明である。本発明は、上記の構成に限定されるものではなく、本発明の技術的思想の範囲において様々な変形が可能である。例えば本発明の特徴に係る常駐プログラムは、家庭内LAN1内の各情報機器に散在してもよく、あるいは全ての情報機器が該常駐プログラムを有する構成としてもよい。また、各種データベースも家庭内LAN1内の各情報機器に散在する構成としてもよい。また、ホームサーバ100自らが映像コンテンツを録画して蓄積し、再生するようにしてもよい。これは、ホームサーバ100がDMSおよびDMPとして機能することにより本発明がホームサーバ100単体でも成立することを意味する。
また、例えば処理対象となるコンテンツには映像コンテンツだけでなく、上述したコンテンツの定義に含まれるあらゆる形式のコンテンツが含まれる。この場合、例えばサーバサイドで一元管理されたコンテンツリスト等にアクセスしてネットワークに散在する多様なコンテンツのうちユーザが求めるコンテンツだけを収集して処理を施し、複数形式のコンテンツを混合させた新たなコンテンツを作成することができる。
また、再生履歴情報(さらには情報機器の動作情報全般)を収集するタイミングは、定期的なタイミングに限定されない。例えば各情報機器は、再生履歴情報等を生成すると同時にホームサーバ100にアクセスし、該再生履歴情報等をホームサーバ100にリアルタイムに転送することができる。また、再生履歴情報等を収集する装置は、ホームサーバ100zに限定されない。例えば家庭内LAN1内の何れかの情報機器が、各情報機器が持つ再生履歴情報等を定期的にまたはリアルタイムに収集してホームサーバ100に転送するようにしてもよい。
また、第一実施形態において第二実施形態と同様に、各情報機器が映像コンテンツを録画等すると同時にメタ情報を生成するようにしてもよい。この場合、ホームサーバ100は、映像コンテンツとともにメタ情報も収集することとなる。
本発明の実施形態を説明するためのネットワーク構成図である。 本発明の実施形態のホームサーバの構成を示すブロック図である。 本発明の実施形態のコンテンツ収集プログラムにより実行されるコンテンツ収集処理を示すフローチャート図である。 図3のS4の処理により生成されるメタ情報の一例を示す図である。 本発明の実施形態の統合映像コンテンツ作成プログラムにより実行される統合映像コンテンツ作成処理を示すフローチャート図である。 本発明の実施形態のシナリオデータベースに格納されたシナリオ例を示す図である。 本発明の実施形態の特徴点学習プログラムにより実行される特徴点学習処理を示すフローチャート図である。 別の実施形態のホームサーバの構成を示すブロック図である。 別の実施形態のメタ情報収集プログラムにより実行されるメタ情報収集処理を示すフローチャート図である。 別の実施形態における統合映像コンテンツを作成する処理を示すシーケンス図である。
符号の説明
10 ゲートウェイサーバ
100 ホームサーバ
110 システムバス
120 CPU
130 ROM
140 RAM
150 HDD
160 ネットワークインタフェース

Claims (16)

  1. 少なくとも1つの特徴点について評価されたコンテンツを記憶した複数の情報機器とホームネットワークを介して接続されたサーバが実行する、各情報機器のコンテンツを管理するコンテンツ管理方法であって、
    前記複数の情報機器から各コンテンツの前記特徴点評価を収集する特徴点評価収集ステップと、
    前記収集された特徴点評価を記憶する特徴点評価記憶ステップと、
    前記情報機器からコンテンツが要求された場合に、前記記憶された特徴点評価を検索して該要求に適した特徴点評価を有するコンテンツを選択するコンテンツ選択ステップと、
    前記選択されたコンテンツの所在情報を前記情報機器に通知するコンテンツ所在情報通知ステップと、
    を含むことを特徴とするコンテンツ管理方法。
  2. 少なくとも1つの特徴点評価に関連付けされたシナリオを複数記憶するシナリオ記憶ステップと、
    前記要求がされた場合に前記複数のシナリオの中から該要求に適した特徴点評価を有するシナリオを選択するシナリオ選択ステップと、
    をさらに含み、
    前記コンテンツ選択ステップにおいて、前記選択されたシナリオに基づきコンテンツを選択することを特徴とする、請求項1に記載のコンテンツ管理方法。
  3. 前記シナリオがそれぞれ異なる特徴点評価に関連付けされた複数のシーンによって構成される場合に、
    前記コンテンツ選択ステップにおいて、前記選択されたシナリオの各シーンの特徴点評価に基づき各シーンのコンテンツを選択することを特徴とする、請求項2に記載のコンテンツ管理方法。
  4. 少なくとも1つの特徴点について評価されたコンテンツを記憶した他の情報機器、および各情報機器に記憶されたコンテンツを該特徴点に関連付けて管理するサーバとホームネットワークを介して接続された情報機器が実行するコンテンツ自動編集方法であって、
    前記サーバにコンテンツを要求するコンテンツ要求ステップと、
    前記サーバから前記要求に適した特徴点評価を有するコンテンツの所在情報が通知された場合に、該所在情報に基づき各情報機器から該コンテンツを収集するコンテンツ収集ステップと、
    前記収集されたコンテンツを編集するコンテンツ編集ステップと、
    を含むことを特徴とするコンテンツ自動編集方法。
  5. 前記編集されたコンテンツを再生するコンテンツ再生ステップをさらに含むことを特徴とする、請求項4に記載のコンテンツ自動編集方法。
  6. 前記コンテンツを記憶する際に前記少なくとも1つの特徴点について該コンテンツを評価するコンテンツ評価ステップをさらに含むことを特徴とする、請求項4または請求項5の何れかに記載のコンテンツ自動編集方法。
  7. 少なくとも1つの特徴点について評価されたコンテンツを記憶した複数の情報機器と、ホームネットワークを介して該複数の情報機器と接続されたサーバとの連係処理によりコンテンツを自動編集するコンテンツ自動編集方法であって、
    前記サーバにより実行される、
    前記複数の情報機器から各コンテンツの前記特徴点評価を収集する特徴点評価収集ステップと、
    前記収集された特徴点評価を記憶する特徴点評価記憶ステップと、
    前記情報機器からコンテンツが要求された場合に、前記記憶された特徴点評価を検索して該要求に適した特徴点評価を有するコンテンツを選択するコンテンツ選択ステップと、
    前記選択されたコンテンツの所在情報を前記情報機器に通知するコンテンツ所在情報通知ステップと、
    前記情報機器により実行される、
    前記サーバにコンテンツを要求するコンテンツ要求ステップと、
    前記サーバから前記要求に適した特徴点評価を有するコンテンツの所在情報が通知された場合に、該所在情報に基づき各情報機器から該コンテンツを収集するコンテンツ収集ステップと、
    前記収集されたコンテンツを編集するコンテンツ編集ステップと、
    を含むことを特徴とするコンテンツ自動編集方法。
  8. 請求項1から請求項6の何れかに記載の方法の各ステップをコンピュータに実行させるためのコンテンツ管理プログラムまたはコンテンツ自動編集プログラム。
  9. 少なくとも1つの特徴点について評価されたコンテンツを記憶した複数の情報機器とホームネットワークを介して接続されたサーバであって、
    前記複数の情報機器から各コンテンツの前記特徴点評価を収集する特徴点評価収集手段と、
    前記収集された特徴点評価を記憶する特徴点評価記憶手段と、
    前記情報機器からコンテンツが要求された場合に、前記特徴点評価記憶手段を検索して該要求に適した特徴点評価を有するコンテンツを選択するコンテンツ選択手段と、
    前記選択されたコンテンツの所在情報を前記情報機器に通知するコンテンツ所在情報通知手段と、
    を有することを特徴とするサーバ。
  10. 少なくとも1つの特徴点評価に関連付けされたシナリオを複数記憶するシナリオ記憶手段と、
    前記要求がされた場合に前記複数のシナリオの中から該要求に適した特徴点評価を有するシナリオを選択するシナリオ選択手段と、
    さらに有し、
    前記コンテンツ選択手段は、前記選択されたシナリオに基づきコンテンツを選択することを特徴とする、請求項9に記載のサーバ。
  11. 前記シナリオがそれぞれ異なる特徴点評価に関連付けされた複数のシーンによって構成される場合に、
    前記コンテンツ選択手段は、前記選択されたシナリオの各シーンの特徴点評価に基づき各シーンのコンテンツを選択することを特徴とする、請求項10に記載のサーバ。
  12. 少なくとも1つの特徴点について評価されたコンテンツを記憶した他の情報機器、および各情報機器に記憶されたコンテンツを該特徴点に関連付けて管理するサーバとホームネットワークを介して接続された情報機器であって、
    前記サーバにコンテンツを要求するコンテンツ要求手段と、
    前記サーバから前記要求に適した特徴点評価を有するコンテンツの所在情報が通知された場合に、該所在情報に基づき各情報機器から該コンテンツを収集するコンテンツ収集手段と、
    前記収集されたコンテンツを編集するコンテンツ編集手段と、
    を有することを特徴とする情報機器。
  13. 前記編集されたコンテンツを再生するコンテンツ再生手段をさらに有することを特徴とする、請求項12に記載の情報機器。
  14. コンテンツを記憶するコンテンツ記憶手段と、
    前記コンテンツ記憶手段に前記コンテンツを記憶する際に前記少なくとも1つの特徴点についてコンテンツを評価するコンテンツ評価手段と、
    をさらに有することを特徴とする、請求項12または請求項13の何れかに記載の情報機器。
  15. 前記コンテンツは、映像コンテンツであることを特徴とする、請求項9から請求項14の何れかに記載のサーバまたは情報機器。
  16. 請求項12から請求項14の何れかに記載の複数の情報機器と、ホームネットワークを介して該複数の情報機器に接続された請求項11に記載のサーバと、を有するコンテンツ自動編集システムであって、
    前記コンテンツ編集手段は、各シーンに対して選択されたコンテンツが前記シナリオで定められた順に再生されるよう編集処理を行うことを特徴とするコンテンツ自動編集システム。
JP2008142223A 2008-05-30 2008-05-30 コンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システム Pending JP2009290651A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2008142223A JP2009290651A (ja) 2008-05-30 2008-05-30 コンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システム
PCT/JP2009/059706 WO2009145226A1 (ja) 2008-05-30 2009-05-27 コンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008142223A JP2009290651A (ja) 2008-05-30 2008-05-30 コンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システム

Publications (1)

Publication Number Publication Date
JP2009290651A true JP2009290651A (ja) 2009-12-10

Family

ID=41377097

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008142223A Pending JP2009290651A (ja) 2008-05-30 2008-05-30 コンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システム

Country Status (2)

Country Link
JP (1) JP2009290651A (ja)
WO (1) WO2009145226A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012094949A (ja) * 2010-10-25 2012-05-17 Sony Corp 編集装置、編集方法、プログラム、および記録媒体
JP2013513882A (ja) * 2010-03-25 2013-04-22 イ,ジョンヨプ 無線ネットワークシステムのためのデータ統合
US9204198B2 (en) 2010-04-09 2015-12-01 Cyber Ai Entertainment Inc. Server system for real-time moving image collection, recognition, classification, processing, and delivery
WO2022014294A1 (ja) * 2020-07-15 2022-01-20 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007105265A1 (ja) * 2006-03-10 2007-09-20 Fujitsu Limited 再生装置、再生装置の制御方法、プログラム及びコンピュータ読取可能記録媒体
WO2007139105A1 (ja) * 2006-05-31 2007-12-06 Pioneer Corporation 放送受信装置、ダイジェスト生成方法、およびダイジェスト生成プログラム

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013513882A (ja) * 2010-03-25 2013-04-22 イ,ジョンヨプ 無線ネットワークシステムのためのデータ統合
US9204198B2 (en) 2010-04-09 2015-12-01 Cyber Ai Entertainment Inc. Server system for real-time moving image collection, recognition, classification, processing, and delivery
JP5920587B2 (ja) * 2010-04-09 2016-05-18 サイバーアイ・エンタテインメント株式会社 リアルタイム動画像収集・認識・分類・処理・配信サーバシステム
JP2012094949A (ja) * 2010-10-25 2012-05-17 Sony Corp 編集装置、編集方法、プログラム、および記録媒体
CN102567446A (zh) * 2010-10-25 2012-07-11 索尼公司 编辑装置、编辑方法、程序和记录介质
WO2022014294A1 (ja) * 2020-07-15 2022-01-20 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム

Also Published As

Publication number Publication date
WO2009145226A1 (ja) 2009-12-03

Similar Documents

Publication Publication Date Title
JP4944919B2 (ja) メディアファイルの自動選択
US8260828B2 (en) Organizing content using a dynamic profile
JP4859943B2 (ja) メタデータ注入を用いたメディアファイルの管理
EP2325766B1 (en) Method and apparatus for managing content service in network based on content use history
JP5385598B2 (ja) 画像処理装置及び画像管理サーバ装置及びそれらの制御方法及びプログラム
JP5005726B2 (ja) 複数の供給源からのメディアファイルの管理
US8572034B2 (en) Method of managing a distributed storage system
US20110218997A1 (en) Method and system for browsing, searching and sharing of personal video by a non-parametric approach
JP2009512008A (ja) ユーザに向けてレンダリングすることが可能なデータ項目を扱う装置
EP1607937A1 (en) Information processing device, information processing method, and computer program
US20120274790A1 (en) Image sharing system, image managing server, and control method and program thereof
WO2004068354A1 (ja) 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
WO2009145257A1 (ja) コンテンツ自動再生方法、コンテンツ自動再生プログラム、コンテンツ自動再生システム、およびコンテンツ自動再生サーバ
WO2009145226A1 (ja) コンテンツ管理方法、コンテンツ自動編集方法、コンテンツ管理プログラム、コンテンツ自動編集プログラム、サーバ、情報機器、およびコンテンツ自動編集システム
JP2007513397A (ja) コンテンツディレクトリサービスを備えるシステムの変換サービス
US8521844B2 (en) Information processing apparatus and method and program
JP2005033619A (ja) コンテンツ管理装置およびコンテンツ管理方法
KR101377737B1 (ko) 네트워크에 접속된 휴대가능 저장 장치들에 대한 저장프로파일 생성
US20080065695A1 (en) System and method for nondeterministic media playback selected from a plurality of distributed media libraries
WO2014103374A1 (ja) 情報管理装置、サーバ及び制御方法
KR102492022B1 (ko) 다중 채널 네트워크의 컨텐츠 관리 방법, 장치 및 시스템
JPWO2014065165A1 (ja) 情報処理装置、情報処理方法、およびプログラム、並びに情報処理システム
US20140189769A1 (en) Information management device, server, and control method
JP5816852B2 (ja) コンテンツ検索装置、コンテンツ検索方法、プログラム
US20230353795A1 (en) Information processing apparatus, information processing method, and program