JP2000235652A - データ処理装置、データ処理方法及び媒体 - Google Patents
データ処理装置、データ処理方法及び媒体Info
- Publication number
- JP2000235652A JP2000235652A JP11035611A JP3561199A JP2000235652A JP 2000235652 A JP2000235652 A JP 2000235652A JP 11035611 A JP11035611 A JP 11035611A JP 3561199 A JP3561199 A JP 3561199A JP 2000235652 A JP2000235652 A JP 2000235652A
- Authority
- JP
- Japan
- Prior art keywords
- data
- media
- scene
- time
- media data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
(57)【要約】
【課題】 動画、静止画、テキスト、音声といったメデ
ィアデータとそれらの再生タイミングデータからなるコ
ンテンツからダイジェストを生成する方法を提案する。 【解決手段】 複数のメディアデータを組み合わせたコ
ンテンツでは、各メディアデータの再生タイミングデー
タというものを利用することが出来る。したがって、こ
の各メディアデータの再生タイミングを元にコンテンツ
のダイジェスト生成を行う方法を提案する。開示される
実施形態におけるダイジェスト生成方法は次の四つのス
テップから成る。 １．再生タイミングデータよりメディアデータ間の再生
時間関係を解析 ２．各メディアデータの再生開始、終了時刻を用いたシ
ーン分割 ３．各メディアデータの重要度から得るシーンの重要度
算定 ４．各メディアデータからのダイジェストデータの構築
ィアデータとそれらの再生タイミングデータからなるコ
ンテンツからダイジェストを生成する方法を提案する。 【解決手段】 複数のメディアデータを組み合わせたコ
ンテンツでは、各メディアデータの再生タイミングデー
タというものを利用することが出来る。したがって、こ
の各メディアデータの再生タイミングを元にコンテンツ
のダイジェスト生成を行う方法を提案する。開示される
実施形態におけるダイジェスト生成方法は次の四つのス
テップから成る。 １．再生タイミングデータよりメディアデータ間の再生
時間関係を解析 ２．各メディアデータの再生開始、終了時刻を用いたシ
ーン分割 ３．各メディアデータの重要度から得るシーンの重要度
算定 ４．各メディアデータからのダイジェストデータの構築
Description
【０００１】
【発明の属する技術分野】本発明はデータ処理装置、方
法及び媒体に関し、特に、複数のメディアデータの同期
再生を行うことが出来る装置で利用するコンテンツの、
処理方法、装置および媒体に関するものである。
法及び媒体に関し、特に、複数のメディアデータの同期
再生を行うことが出来る装置で利用するコンテンツの、
処理方法、装置および媒体に関するものである。
【０００２】
【従来の技術】近年、コンピュータの処理速度の向上に
より、動画と音声を用いた動的コンテンツの利用が実用
に足るようになってきている。このようなコンテンツに
含まれる情報を得るには、そのすべてを再生する方法が
あるが、概略の情報を得たい場合にはこの方法は適当で
はないため、コンテンツから重要な情報をピックアップ
して利用者に提示するダイジェストの作成が効果的であ
る。そこで、既に動画データからのダイジェスト作成方
法については特開平０８−００９３１０をはじめとして
多くの提案がなされている。
より、動画と音声を用いた動的コンテンツの利用が実用
に足るようになってきている。このようなコンテンツに
含まれる情報を得るには、そのすべてを再生する方法が
あるが、概略の情報を得たい場合にはこの方法は適当で
はないため、コンテンツから重要な情報をピックアップ
して利用者に提示するダイジェストの作成が効果的であ
る。そこで、既に動画データからのダイジェスト作成方
法については特開平０８−００９３１０をはじめとして
多くの提案がなされている。
【０００３】またインターネットの普及により動的なコ
ンテンツの高速な転送の必要性が出てきているが、その
際動画と音声のみからなるコンテンツは、大量のデータ
転送が必要になるため、文字や静止画といった比較的デ
ータ転送量の小さなメディアデータも組み合わせること
によって、動的なコンテンツを生成する手段が実用化さ
れている。
ンテンツの高速な転送の必要性が出てきているが、その
際動画と音声のみからなるコンテンツは、大量のデータ
転送が必要になるため、文字や静止画といった比較的デ
ータ転送量の小さなメディアデータも組み合わせること
によって、動的なコンテンツを生成する手段が実用化さ
れている。
【０００４】このような複数のメディアデータを組み合
わせた動的なコンテンツにおいてもダイジェストの生成
は効果的であると考えられる。
わせた動的なコンテンツにおいてもダイジェストの生成
は効果的であると考えられる。
【０００５】
【発明が解決しようとする課題】既に提案されているダ
イジェスト生成方法では、単一のメディアデータからな
るコンテンツのダイジェスト生成には利用できるが、そ
の他静止画やテキストも含めた複数のメディアデータか
らなるコンテンツのダイジェスト生成を行うことは出来
ない。そこで、本出願に関わる発明の目的は複数のメデ
ィアデータからなるコンテンツを処理して例えばダイジ
ェストを生成することにある。
イジェスト生成方法では、単一のメディアデータからな
るコンテンツのダイジェスト生成には利用できるが、そ
の他静止画やテキストも含めた複数のメディアデータか
らなるコンテンツのダイジェスト生成を行うことは出来
ない。そこで、本出願に関わる発明の目的は複数のメデ
ィアデータからなるコンテンツを処理して例えばダイジ
ェストを生成することにある。
【０００６】
【課題を解決するための手段】上記目的を達成するた
め、本出願に係る第一の発明であるデータ処理装置は、
メディアデータ間の時間関係を解析するメディアデータ
間時間解析手段と、解析結果に基づき代表シーンを選択
するシーン選択手段と、代表シーンを構成する情報を各
メディアデータから抽出するメディアデータ抽出手段
と、抽出したデータを再構成するマルチメディアデータ
再構成手段とを有することを特徴とする。
め、本出願に係る第一の発明であるデータ処理装置は、
メディアデータ間の時間関係を解析するメディアデータ
間時間解析手段と、解析結果に基づき代表シーンを選択
するシーン選択手段と、代表シーンを構成する情報を各
メディアデータから抽出するメディアデータ抽出手段
と、抽出したデータを再構成するマルチメディアデータ
再構成手段とを有することを特徴とする。
【０００７】
【発明の実施の形態】ここでは複数メディアデータの時
間関係を記述したデータとしてＳＭＩＬ（Ｓｙｎｃｈｒ
ｏｎｉｚｅｄ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｇｒａ
ｔｉｏｎ Ｌａｎｇｕａｇｅ）、（ＳＭＩＬ及びＨＴＭ
ＬはＷ３Ｃ（Ｗｏｒｌｄ ＷｉｄｅＷｅｂ Ｃｏｎｓｏ
ｒｔｉｕｍ）によるＲｅｃｏｍｍｅｎｄａｔｉｏｎ（標
準）であり、それぞれ ｈｔｔｐ：１１ＷＷＷ．Ｗ３Ｃ．ｏｒｇ／ＴＲ／ＲＥＣ
−ｓｍｉｌｌ ｈｔｔｐ：１１ＷＷＷ．Ｗ３Ｃ．ｏｒｇ／ＴＲ／ＲＥＣ
−ｈｔｍｌ４０１ に仕様書が示されている）ダイジェストの形式としてＨ
ＴＭＬ（Ｈｙｐｅｒ Ｔｅｘｔ Ｍａｒｋｕｐ Ｌａｎ
ｇｕａｇｅ）を用いる場合について記述する。ＳＭＩＬ
データには用いるメディアデータの存在場所、再生のタ
イミングが複数記述されている。ＨＴＭＬデータには、
テキストのダイジェストと、動画、静止画像データのダ
イジェスト画像データへのリンクが含まれる。本実施例
はＳＭＩＬデータおよび複数のメディアデータから構成
されるコンテンツから、そのダイジェストとなる画像デ
ータとＨＴＭＬファイルを作成するものである。
間関係を記述したデータとしてＳＭＩＬ（Ｓｙｎｃｈｒ
ｏｎｉｚｅｄ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｇｒａ
ｔｉｏｎ Ｌａｎｇｕａｇｅ）、（ＳＭＩＬ及びＨＴＭ
ＬはＷ３Ｃ（Ｗｏｒｌｄ ＷｉｄｅＷｅｂ Ｃｏｎｓｏ
ｒｔｉｕｍ）によるＲｅｃｏｍｍｅｎｄａｔｉｏｎ（標
準）であり、それぞれ ｈｔｔｐ：１１ＷＷＷ．Ｗ３Ｃ．ｏｒｇ／ＴＲ／ＲＥＣ
−ｓｍｉｌｌ ｈｔｔｐ：１１ＷＷＷ．Ｗ３Ｃ．ｏｒｇ／ＴＲ／ＲＥＣ
−ｈｔｍｌ４０１ に仕様書が示されている）ダイジェストの形式としてＨ
ＴＭＬ（Ｈｙｐｅｒ Ｔｅｘｔ Ｍａｒｋｕｐ Ｌａｎ
ｇｕａｇｅ）を用いる場合について記述する。ＳＭＩＬ
データには用いるメディアデータの存在場所、再生のタ
イミングが複数記述されている。ＨＴＭＬデータには、
テキストのダイジェストと、動画、静止画像データのダ
イジェスト画像データへのリンクが含まれる。本実施例
はＳＭＩＬデータおよび複数のメディアデータから構成
されるコンテンツから、そのダイジェストとなる画像デ
ータとＨＴＭＬファイルを作成するものである。
【０００８】図１に本発明の一実施形態のダイジェスト
生成装置構成図を示す。図において１−１は入力コンテ
ンツである。複数のメディアデータとそれらの再生タイ
ミングデータであるＳＭＩＬデータが格納されているデ
ータ保存装置であり、１−２はデータ保存装置１−１か
らコンテンツデータを読み出すデータ入力手段、１−３
はメディアデータ間の時間関係を解析するメディア間時
間解析手段、１−４は解析結果に基づきコンテンツ再生
時間をシーンに分割、代表シーンを選択するシーン選択
手段、１−５は、代表シーンを構成する情報を各メディ
アデータから抽出するメディアデータ抽出手段、１−６
は抽出したデータをダイジェストとして再構成するマル
チメディアデータ再構成手段であり、得られたダイジェ
ストはデータ保存装置１−７に格納される。
生成装置構成図を示す。図において１−１は入力コンテ
ンツである。複数のメディアデータとそれらの再生タイ
ミングデータであるＳＭＩＬデータが格納されているデ
ータ保存装置であり、１−２はデータ保存装置１−１か
らコンテンツデータを読み出すデータ入力手段、１−３
はメディアデータ間の時間関係を解析するメディア間時
間解析手段、１−４は解析結果に基づきコンテンツ再生
時間をシーンに分割、代表シーンを選択するシーン選択
手段、１−５は、代表シーンを構成する情報を各メディ
アデータから抽出するメディアデータ抽出手段、１−６
は抽出したデータをダイジェストとして再構成するマル
チメディアデータ再構成手段であり、得られたダイジェ
ストはデータ保存装置１−７に格納される。
【０００９】図２に図１に示した構成の動作、即ちダイ
ジェスト生成方法の流れ図を示す。図２において２０１
−１が複数のメディアデータと各メディアデータの再生
タイミングデータを保有するデータ保存装置。２−２は
保存装置から先のコンテンツを構成するデータ群を入力
するデータ入力ステップ、２−３はメディアデータ間の
再生時間の関係を解析するメディアデータ間時間解析ス
テップ、２−４は解析結果に基づいてコンテンツの再生
時間をシーンに分割していくシーン分割ステップ、２−
５は各シーンに使われているメディアデータの重要度か
らシーンの重要度を算定するシーン重要度算定ステッ
プ、２−６はシーンの重要度からダイジェストに用いる
シーンを選択するシーン選択ステップ、２−７は選択さ
れた代表シーンを構成するメディアデータをシーンで使
われているメディアデータから抽出するシーンデータ抽
出ステップ、２−８は抽出したメディアデータ群で代表
シーンを再構成する代表シーン構成ステップ、２−９は
代表シーン群から出力のダイジェストデータを作成する
ダイジェスト生成ステップ、２−１０がダイジェストデ
ータを保存するデータ保存装置である。
ジェスト生成方法の流れ図を示す。図２において２０１
−１が複数のメディアデータと各メディアデータの再生
タイミングデータを保有するデータ保存装置。２−２は
保存装置から先のコンテンツを構成するデータ群を入力
するデータ入力ステップ、２−３はメディアデータ間の
再生時間の関係を解析するメディアデータ間時間解析ス
テップ、２−４は解析結果に基づいてコンテンツの再生
時間をシーンに分割していくシーン分割ステップ、２−
５は各シーンに使われているメディアデータの重要度か
らシーンの重要度を算定するシーン重要度算定ステッ
プ、２−６はシーンの重要度からダイジェストに用いる
シーンを選択するシーン選択ステップ、２−７は選択さ
れた代表シーンを構成するメディアデータをシーンで使
われているメディアデータから抽出するシーンデータ抽
出ステップ、２−８は抽出したメディアデータ群で代表
シーンを再構成する代表シーン構成ステップ、２−９は
代表シーン群から出力のダイジェストデータを作成する
ダイジェスト生成ステップ、２−１０がダイジェストデ
ータを保存するデータ保存装置である。
【００１０】本実施例をコンピュータを用いて実施した
装置構成を図３に示す。図３における装置はプログラム
を格納したＨＤ装置３０１およびメモリ３０２、ネット
ワークと接続するネットワークＩ／Ｆ３０３、プログラ
ムによる各種の処理を実行するＣＰＵ３０５、プログラ
ム及び複数のメディアデータを媒体からロードするため
のリムーバブル装置３０７、ディスプレイ装置３１０、
表示用ボード３１２、周辺コントローラ３１４、キーボ
ード３１６、マウス３１８を含む。
装置構成を図３に示す。図３における装置はプログラム
を格納したＨＤ装置３０１およびメモリ３０２、ネット
ワークと接続するネットワークＩ／Ｆ３０３、プログラ
ムによる各種の処理を実行するＣＰＵ３０５、プログラ
ム及び複数のメディアデータを媒体からロードするため
のリムーバブル装置３０７、ディスプレイ装置３１０、
表示用ボード３１２、周辺コントローラ３１４、キーボ
ード３１６、マウス３１８を含む。
【００１１】まずＨＤ装置またはリムーバブル装置３０
７に蓄積されたＳＭＩＬデータを読み出す。これが図２
のステップ２−２に示すデータ入力ステップである。図
４は、複数のメディアデータ４０１とその再生タイミン
グデータ４０３の例を示す図である。このコンテンツを
再生する装置は、再生タイミングデータ４０３を解析
し、各メディアデータ４０１を対応する時刻に再生する
ことによって、この複数メディアデータからなるコンテ
ンツのタイミングのとれた再生を行うことが出来る。こ
こでは、理解しやすくするため再生タイミングデータ４
０３はＳＭＩＬから日本語の文章に、その表現だけを変
換して示してある。これらのデータ４０３から、各メデ
ィア４０１の再生開始時刻、再生終了時刻を得る。図５
は、縦軸に各メディアデータの種類、横軸に時刻を取る
ことによって図４で示したコンテンツでの各メディアの
再生タイミングを図示したものである。図４中太線が各
メディアの再生時間である。本実施例では図２のステッ
プ２−３において全てのメディアの再生開始時刻、再生
終了時刻をコンテンツ再生開始時刻が早いものから順に
並べる、図中時間軸上の時刻がこれに相当する。ここま
での作業がメディアデータ間時間関係解析ステップ２−
３である。
７に蓄積されたＳＭＩＬデータを読み出す。これが図２
のステップ２−２に示すデータ入力ステップである。図
４は、複数のメディアデータ４０１とその再生タイミン
グデータ４０３の例を示す図である。このコンテンツを
再生する装置は、再生タイミングデータ４０３を解析
し、各メディアデータ４０１を対応する時刻に再生する
ことによって、この複数メディアデータからなるコンテ
ンツのタイミングのとれた再生を行うことが出来る。こ
こでは、理解しやすくするため再生タイミングデータ４
０３はＳＭＩＬから日本語の文章に、その表現だけを変
換して示してある。これらのデータ４０３から、各メデ
ィア４０１の再生開始時刻、再生終了時刻を得る。図５
は、縦軸に各メディアデータの種類、横軸に時刻を取る
ことによって図４で示したコンテンツでの各メディアの
再生タイミングを図示したものである。図４中太線が各
メディアの再生時間である。本実施例では図２のステッ
プ２−３において全てのメディアの再生開始時刻、再生
終了時刻をコンテンツ再生開始時刻が早いものから順に
並べる、図中時間軸上の時刻がこれに相当する。ここま
での作業がメディアデータ間時間関係解析ステップ２−
３である。
【００１２】次に、得られた時刻列をシーンチェンジの
タイミングとして、コンテンツの再生時間をシーンに分
割する。すなわちこの場合図４の時刻７までは、時刻０
−２，２−４，４−６，６−７の４つのシーンに分割さ
れている。これがシーン分割ステップ２−４である。
タイミングとして、コンテンツの再生時間をシーンに分
割する。すなわちこの場合図４の時刻７までは、時刻０
−２，２−４，４−６，６−７の４つのシーンに分割さ
れている。これがシーン分割ステップ２−４である。
【００１３】次にダイジェストに用いるシーンを選択す
るための指標となるところのシーンの重要度を算定す
る。分割されたシーンの重要度はそのシーンの再生に利
用される各メディアデータの重要度から求められる。各
メディアの重要度の和として求める場合、次式を用い
る。
るための指標となるところのシーンの重要度を算定す
る。分割されたシーンの重要度はそのシーンの再生に利
用される各メディアデータの重要度から求められる。各
メディアの重要度の和として求める場合、次式を用い
る。
【００１４】Ｓi＝Σjｓj Ｓiはシーンｉの重要度、ｓjはシーンｉで再生されるメ
ディアｊの重要度とする。
ディアｊの重要度とする。
【００１５】各メディアの重要度は、予め各データの例
えば種類に応じて重要度として定義されているか、メデ
ィア同期データに定義されているか、そのメディアデー
タの持つ付加情報から求められるか、もしくは、単純に
各メディアデータを同じ重み付けであってもよい。要は
メディアの重要度を示すものであればよい。メディアの
付加情報から求める場合には、静止画、動画、テキスト
等の表示を行うデータでは例えば表示領域の大きさ、音
声データでは音量の大きさと重要度とが比例すると考え
てもよい。
えば種類に応じて重要度として定義されているか、メデ
ィア同期データに定義されているか、そのメディアデー
タの持つ付加情報から求められるか、もしくは、単純に
各メディアデータを同じ重み付けであってもよい。要は
メディアの重要度を示すものであればよい。メディアの
付加情報から求める場合には、静止画、動画、テキスト
等の表示を行うデータでは例えば表示領域の大きさ、音
声データでは音量の大きさと重要度とが比例すると考え
てもよい。
【００１６】本例では、わかり易くするため単純に各メ
ディアデータを同じ重み付け１で考えるものとする。す
なわち、シーン中に存在するメディアデータの総数がシ
ーンの重要度となる。これに従い図５に示した各シーン
の重要度を算定すると、図６の表に示される値になる。
これがシーン重要度算定ステップ２−５である。
ディアデータを同じ重み付け１で考えるものとする。す
なわち、シーン中に存在するメディアデータの総数がシ
ーンの重要度となる。これに従い図５に示した各シーン
の重要度を算定すると、図６の表に示される値になる。
これがシーン重要度算定ステップ２−５である。
【００１７】このようにして得られた各シーンの重要度
に従って、重要度の高いものをピックアップすることで
コンテンツのダイジェストが生成される。
に従って、重要度の高いものをピックアップすることで
コンテンツのダイジェストが生成される。
【００１８】図６に示す本例では、時刻２−４、時刻４
−６の、二つのシーンの重要度が高いため、この２つの
シーンをダイジェストに利用する。
−６の、二つのシーンの重要度が高いため、この２つの
シーンをダイジェストに利用する。
【００１９】更にここから静的なダイジェストを作るた
めに、選択したシーンの中からシーンの代表となる時刻
を決定してその時刻に再生されるメディアデータを得
る。本実施例ではダイジェストにＨＴＭＬファイルを利
用するので、音声データはダイジェストには利用しな
い。シーン中に動画データが含まれる場合には、その動
画データに対してダイジェスト生成方法、例えば特開平
０８−００９３１０等に提案されている動画データから
のダイジェスト生成方法を用いてシーンの代表時刻を決
定する。シーン中に動画データがない場合には、そのシ
ーン中に再生される内容はどの時刻でも同じなので（シ
ーンはメディアデータの再生タイミングで分割している
ので、シーン中にメディアの再生開始や再生終了はな
く、テキスト、静止画といったデータは、シーン中同じ
内容を再生する）シーン代表時刻はどの時刻を選択して
も良い。ここではシーン代表時刻をそのシーン開始時刻
とする。本例では、選択された二つのシーン時刻２−
４、４−６にはどちらも動画が含まれているため、動画
のダイジェスト生成方法より各シーンの代表時刻が決定
される。本例では、例えば時刻３と時刻５が各シーンの
代表時刻として得られたとする。これが代表シーン選択
ステップ２−６である。
めに、選択したシーンの中からシーンの代表となる時刻
を決定してその時刻に再生されるメディアデータを得
る。本実施例ではダイジェストにＨＴＭＬファイルを利
用するので、音声データはダイジェストには利用しな
い。シーン中に動画データが含まれる場合には、その動
画データに対してダイジェスト生成方法、例えば特開平
０８−００９３１０等に提案されている動画データから
のダイジェスト生成方法を用いてシーンの代表時刻を決
定する。シーン中に動画データがない場合には、そのシ
ーン中に再生される内容はどの時刻でも同じなので（シ
ーンはメディアデータの再生タイミングで分割している
ので、シーン中にメディアの再生開始や再生終了はな
く、テキスト、静止画といったデータは、シーン中同じ
内容を再生する）シーン代表時刻はどの時刻を選択して
も良い。ここではシーン代表時刻をそのシーン開始時刻
とする。本例では、選択された二つのシーン時刻２−
４、４−６にはどちらも動画が含まれているため、動画
のダイジェスト生成方法より各シーンの代表時刻が決定
される。本例では、例えば時刻３と時刻５が各シーンの
代表時刻として得られたとする。これが代表シーン選択
ステップ２−６である。
【００２０】シーン代表時刻を決定すると、ステップ２
−７においてその時刻に再生されるダイジェストを生成
する。ダイジェストは、前述の様に本実施例ではＨＴＭ
Ｌとして生成するので、シーン中に動画データが含まれ
ているならば、その時刻に表示されるべき画像を静止画
データとして得、シーン代表画像データとする。静止画
データは、シーン代表時刻に使用されるファイルをその
ままシーン代表データとして用いる。これらのシーン代
表画像データのファイルのアドレスをダイジェストとし
て出力するＨＴＭＬ中にリンクを貼っておくことで参照
可能にする。テキストデータは、出力するＨＴＭＬファ
イル中にその内容を記述する。本例では、時刻２−４の
シーンではシーン代表画像として、シーン代表時刻３に
再生される。動画データａから得られる画像データと、
静止画データｂを用いる。また、時刻４−６のシーンで
はシーン代表画像として、シーン代表時刻５に再生され
る、動画データａから得られる画像データと、静止画デ
ータａを用いる。これが代表シーン構成ステップ２−８
及びダイジェスト生成ステップ２−９である。
−７においてその時刻に再生されるダイジェストを生成
する。ダイジェストは、前述の様に本実施例ではＨＴＭ
Ｌとして生成するので、シーン中に動画データが含まれ
ているならば、その時刻に表示されるべき画像を静止画
データとして得、シーン代表画像データとする。静止画
データは、シーン代表時刻に使用されるファイルをその
ままシーン代表データとして用いる。これらのシーン代
表画像データのファイルのアドレスをダイジェストとし
て出力するＨＴＭＬ中にリンクを貼っておくことで参照
可能にする。テキストデータは、出力するＨＴＭＬファ
イル中にその内容を記述する。本例では、時刻２−４の
シーンではシーン代表画像として、シーン代表時刻３に
再生される。動画データａから得られる画像データと、
静止画データｂを用いる。また、時刻４−６のシーンで
はシーン代表画像として、シーン代表時刻５に再生され
る、動画データａから得られる画像データと、静止画デ
ータａを用いる。これが代表シーン構成ステップ２−８
及びダイジェスト生成ステップ２−９である。
【００２１】このようにして出来上がったＨＴＭＬファ
イル及びシーン代表画像データは、入力ファイルである
ＳＭＩＬファイルと複数のメディアデータからなるコン
テンツのダイジェストとして機能する。
イル及びシーン代表画像データは、入力ファイルである
ＳＭＩＬファイルと複数のメディアデータからなるコン
テンツのダイジェストとして機能する。
【００２２】本実施例においてはＨＴＭＬファイル、Ｓ
ＭＩＬファイルを用いたがこれに限らず、他のファイル
フォーマットであってもよい。
ＭＩＬファイルを用いたがこれに限らず、他のファイル
フォーマットであってもよい。
【００２３】
【発明の効果】本出願に係る第１の発明によれば、複数
のメディアデータとその時間関係を記述したデータを入
力する入力手段と、メディアデータ間の時間関係を解析
するメディアデータ間時間解析手段と、解析結果に基づ
き代表シーンを選択するシーン選択手段と、代表シーン
を構成する情報を各メディアデータから抽出するメディ
アデータ抽出手段と、抽出したデータを再構成するマル
チメディアデータ再構成手段とを有することにより、複
数のメディアデータが存在するコンテンツの場合にも、
ダイジェストの生成を行うことが出来る。
のメディアデータとその時間関係を記述したデータを入
力する入力手段と、メディアデータ間の時間関係を解析
するメディアデータ間時間解析手段と、解析結果に基づ
き代表シーンを選択するシーン選択手段と、代表シーン
を構成する情報を各メディアデータから抽出するメディ
アデータ抽出手段と、抽出したデータを再構成するマル
チメディアデータ再構成手段とを有することにより、複
数のメディアデータが存在するコンテンツの場合にも、
ダイジェストの生成を行うことが出来る。
【００２４】本出願に係る第２の発明によれば、メディ
アデータのタイプに応じてその内容を解析するメディア
内時間解析手段を有することにより、メディアデータ内
にデータの再生内容が変わるメディアデータを持つコン
テンツに対してもダイジェストの生成を行うことが出来
る。
アデータのタイプに応じてその内容を解析するメディア
内時間解析手段を有することにより、メディアデータ内
にデータの再生内容が変わるメディアデータを持つコン
テンツに対してもダイジェストの生成を行うことが出来
る。
【００２５】本出願に係る第３の発明によれば、メディ
ア内時間解析手段は、ビデオ映像もしくはサウンドデー
タの変化する点を検出する手段を含むことにより、メデ
ィアデータ内にデータの再生内容が変わるビデオ映像も
しくはサウンドデータを持つコンテンツに対してもダイ
ジェストの生成を行うことが出来る。
ア内時間解析手段は、ビデオ映像もしくはサウンドデー
タの変化する点を検出する手段を含むことにより、メデ
ィアデータ内にデータの再生内容が変わるビデオ映像も
しくはサウンドデータを持つコンテンツに対してもダイ
ジェストの生成を行うことが出来る。
【００２６】本出願に係る第４の発明によれば、マルチ
メディアデータ再構成手段がＨＴＭＬ形式のデータを出
力とすることにより、動的であったコンテンツのダイジ
ェストを静的なＨＴＭＬコンテンツとして得ることがで
きる。
メディアデータ再構成手段がＨＴＭＬ形式のデータを出
力とすることにより、動的であったコンテンツのダイジ
ェストを静的なＨＴＭＬコンテンツとして得ることがで
きる。
【００２７】本出願に係る第５の発明によれば、入力手
段がＳＭＩＬ形式のデータを入力とすることにより、Ｓ
ＭＩＬを用いたコンテンツに対してダイジェスティング
を行うことが出来る。
段がＳＭＩＬ形式のデータを入力とすることにより、Ｓ
ＭＩＬを用いたコンテンツに対してダイジェスティング
を行うことが出来る。
【００２８】本出願に係る第６の発明によれば、シーン
選択手段は、各メディアデータの重要度計算手段と各メ
ディアデータの重要度を入力とするシーン全体の重要度
計算手段と重要度の高いものを選択する選択手段とから
構成されることにより、選択するシーンは各メディアデ
ータから得られる情報によって決定することが出来る。
選択手段は、各メディアデータの重要度計算手段と各メ
ディアデータの重要度を入力とするシーン全体の重要度
計算手段と重要度の高いものを選択する選択手段とから
構成されることにより、選択するシーンは各メディアデ
ータから得られる情報によって決定することが出来る。
【００２９】本出願に係る第７の発明によれば、複数の
メディアデータとその時間関係を記述したデータを入力
する入力ステップと、メディア間の時間関係を解析する
メディアデータ間時間解析ステップと、解析結果に基づ
き代表シーンを選択するシーン選択ステップと、代表シ
ーンを構成する情報を各メディアデータから抽出するメ
ディアデータ抽出ステップと、抽出したデータを再構成
するマルチメディアデータ再構成ステップとを有するこ
とにより、複数のメディアデータが存在するコンテンツ
の場合にも、ダイジェストの生成を行うことが出来る。
メディアデータとその時間関係を記述したデータを入力
する入力ステップと、メディア間の時間関係を解析する
メディアデータ間時間解析ステップと、解析結果に基づ
き代表シーンを選択するシーン選択ステップと、代表シ
ーンを構成する情報を各メディアデータから抽出するメ
ディアデータ抽出ステップと、抽出したデータを再構成
するマルチメディアデータ再構成ステップとを有するこ
とにより、複数のメディアデータが存在するコンテンツ
の場合にも、ダイジェストの生成を行うことが出来る。
【００３０】本出願に係る第８の発明によれば、メディ
アデータのタイプに応じてその内容を解析するメディア
内時間解析ステップを少なくとも１つ以上有することに
より、メディアデータ内にデータの再生内容が変わるメ
ディアデータを持つコンテンツに対してもダイジェスト
の生成を行うことが出来る。
アデータのタイプに応じてその内容を解析するメディア
内時間解析ステップを少なくとも１つ以上有することに
より、メディアデータ内にデータの再生内容が変わるメ
ディアデータを持つコンテンツに対してもダイジェスト
の生成を行うことが出来る。
【００３１】本出願に係る第９の発明によれば、メディ
ア内時間解析ステップが、ビデオ映像もしくはサウンド
データの変化する点を検出するステップを含むことによ
り、メディアデータ内にデータの再生内容が変わるビデ
オ映像もしくはサウンドデータを持つコンテンツに対し
てもダイジェストの生成を行うことが出来る。
ア内時間解析ステップが、ビデオ映像もしくはサウンド
データの変化する点を検出するステップを含むことによ
り、メディアデータ内にデータの再生内容が変わるビデ
オ映像もしくはサウンドデータを持つコンテンツに対し
てもダイジェストの生成を行うことが出来る。
【００３２】本出願に係る第１０の発明によれば、マル
チメディアデータ再構成ステップはＨＴＭＬ形式のデー
タを出力とすることにより、動的であったコンテンツの
ダイジェストを静的なＨＴＭＬコンテンツとして得るこ
とができる。
チメディアデータ再構成ステップはＨＴＭＬ形式のデー
タを出力とすることにより、動的であったコンテンツの
ダイジェストを静的なＨＴＭＬコンテンツとして得るこ
とができる。
【００３３】本出願に係る第１１の発明によれば、入力
ステップがＳＭＩＬ形式のデータを入力とすることによ
り、ＳＭＩＬを用いたコンテンツに対してダイジェステ
ィングを行うことが出来る。
ステップがＳＭＩＬ形式のデータを入力とすることによ
り、ＳＭＩＬを用いたコンテンツに対してダイジェステ
ィングを行うことが出来る。
【００３４】本出願に係る第１２の発明によれば、シー
ン選択ステップは、各メディアデータの重要度計算ステ
ップと各メディアデータの重要度を入力とするシーン全
体の重要度計算ステップと重要度の高いものを選択する
選択ステップとから構成されることにより、選択するシ
ーンは各メディアデータから得られる情報によって決定
することが出来る。
ン選択ステップは、各メディアデータの重要度計算ステ
ップと各メディアデータの重要度を入力とするシーン全
体の重要度計算ステップと重要度の高いものを選択する
選択ステップとから構成されることにより、選択するシ
ーンは各メディアデータから得られる情報によって決定
することが出来る。
【００３５】本出願に係る第１３、１４の発明によれ
ば、複数のメディアデータが存在するコンテンツの場合
にも、ダイジェストの生成を行うことが出来る。
ば、複数のメディアデータが存在するコンテンツの場合
にも、ダイジェストの生成を行うことが出来る。
【図１】本発明の一実施形態のダイジェスト生成装置図
【図２】ダイジェスト生成方法流れ図
【図３】用いる装置
【図４】複数のメディアデータとその再生タイミングデ
ータ
ータ
【図５】各メディアデータの再生タイミング
【図６】各シーンの重要度
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 5/91 Ｎ Ｆターム(参考） 5B050 BA06 DA10 EA17 FA02 5B075 ND16 NS01 PP02 PP03 PQ02 PR08 5C052 AA01 AB04 AC08 DD02 DD04 DD06 EE02 EE03 5C053 FA14 FA23 HA29 JA01 JA16 JA22 KA24 LA11 LA14
Claims (14)
- 【請求項１】 複数のメディアデータとその時間関係を
記述したデータを入力する入力手段と、メディアデータ
間の時間関係を解析するメディアデータ間時間解析手段
と、解析結果に基づき代表シーンを選択するシーン選択
手段と、代表シーンを構成する情報を各メディアデータ
から抽出するメディアデータ抽出手段と、抽出したデー
タを再構成するマルチメディアデータ再構成手段とを有
することを特徴とするデータ処理装置。 - 【請求項２】 更にメディアデータのタイプに応じてそ
の内容を解析するメディア内時間解析手段を有すること
を特徴とする請求項１のマルチメディア処理装置。 - 【請求項３】 前記メディア内時間解析手段は、ビデオ
映像もしくはサウンドデータの変化する点を検出する手
段を含むことを特徴とする請求項２のマルチメディアデ
ータ処理装置。 - 【請求項４】 前記マルチメディアデータ再構成手段は
ＨＴＭＬ形式のデータを出力とすることを特徴とする請
求項１乃至請求項４のマルチメディアデータ処理装置。 - 【請求項５】 前記入力手段はＳＭＩＬ形式のデータを
入力とすることを特徴とする請求項１乃至請求項３のマ
ルチメディアデータ処理装置。 - 【請求項６】 前記シーン選択手段は、各メディアデー
タの重要度計算手段と各メディアデータの重要度を入力
とするシーン全体の重要度計算手段と重要度の高いもの
を選択する選択手段とから構成されることを特徴とする
請求項１のマルチメディアデータ処理装置。 - 【請求項７】 複数のメディアデータとその時間関係を
記述したデータを入力する入力ステップと、メディア間
の時間関係を解析するメディア間時間解析ステップと解
析結果に基づき代表シーンを選択するシーン選択ステッ
プと、代表シーンを構成する情報を各メディアデータか
ら抽出するメディアデータ抽出ステップと抽出したデー
タを再構成するマルチメディアデータ再構成ステップと
を有することを特徴とするデータ処理方法。 - 【請求項８】 更にメディアデータのタイプに応じてそ
の内容を解析するメディア内時間解析ステップを有する
ことを特徴とする請求項７のマルチメディア処理方法。 - 【請求項９】 前記メディア内時間解析ステップは、ビ
デオ映像もしくはサウンドデータの変化する点を検出す
るステップを含むことを特徴とする請求項８のマルチメ
ディアデータ処理方法。 - 【請求項１０】 該マルチメディアデータ再構成ステッ
プはＨＴＭＬ形式のデータを出力とすることを特徴とす
る請求項７乃至請求項９のマルチメディアデータ処理方
法。 - 【請求項１１】 該入力ステップはＳＭＩＬ形式のデー
タを入力とすることを特徴とする請求項７乃至請求項９
のマルチメディアデータ処理方法。 - 【請求項１２】 該シーン選択ステップは、各メディア
データの重要度計算ステップと各メディアデータの重要
度を入力とするシーン全体の重要度計算ステップと重要
度の高いものを選択する選択ステップとから構成される
ことを特徴とする請求項７のマルチメディアデータ処理
方法。 - 【請求項１３】 複数のメディアデータとその時間関係
を記述したデータを入力する入力ステップと、メディア
間の時間関係を解析するメディア間時間解析ステップと
解析結果に基づいた代表シーンを用いて前記複数のメデ
ィアデータを再構成するマルチメディアデータ再構成ス
テップとを有することを特徴とする画像処理方法。 - 【請求項１４】 請求項７乃至請求項１２のステップを
コンピュータが実行可能な形式のプログラムとして格納
するプログラム媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11035611A JP2000235652A (ja) | 1999-02-15 | 1999-02-15 | データ処理装置、データ処理方法及び媒体 |
| US09/503,480 US6795092B1 (en) | 1999-02-15 | 2000-02-14 | Data processing apparatus and method, and storage medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11035611A JP2000235652A (ja) | 1999-02-15 | 1999-02-15 | データ処理装置、データ処理方法及び媒体 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2000235652A true JP2000235652A (ja) | 2000-08-29 |
Family
ID=12446648
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP11035611A Withdrawn JP2000235652A (ja) | 1999-02-15 | 1999-02-15 | データ処理装置、データ処理方法及び媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2000235652A (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002199332A (ja) * | 2000-12-27 | 2002-07-12 | Kddi Corp | オーディオ概要情報、オーディオビデオ概要情報の抽出装置、再生装置、および記録媒体 |
| WO2004049187A1 (en) * | 2002-11-28 | 2004-06-10 | Samsung Electronics Co., Ltd. | Method of creating multimedia content using synchronized multimedia integration language and multimedia content made thereby |
| JP2007096611A (ja) * | 2005-09-28 | 2007-04-12 | Fuji Xerox Co Ltd | コンテント再生装置、それにおけるダイジェスト生成方法、及びプログラム |
| JP2010157871A (ja) * | 2008-12-26 | 2010-07-15 | Toshiba Corp | 映像再生装置および映像再生方法 |
| US7779149B2 (en) | 2003-06-27 | 2010-08-17 | Fujitsu Limited | Compound contents delivery method and delivery system |
-
1999
- 1999-02-15 JP JP11035611A patent/JP2000235652A/ja not_active Withdrawn
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002199332A (ja) * | 2000-12-27 | 2002-07-12 | Kddi Corp | オーディオ概要情報、オーディオビデオ概要情報の抽出装置、再生装置、および記録媒体 |
| WO2004049187A1 (en) * | 2002-11-28 | 2004-06-10 | Samsung Electronics Co., Ltd. | Method of creating multimedia content using synchronized multimedia integration language and multimedia content made thereby |
| US7779149B2 (en) | 2003-06-27 | 2010-08-17 | Fujitsu Limited | Compound contents delivery method and delivery system |
| JP2007096611A (ja) * | 2005-09-28 | 2007-04-12 | Fuji Xerox Co Ltd | コンテント再生装置、それにおけるダイジェスト生成方法、及びプログラム |
| JP2010157871A (ja) * | 2008-12-26 | 2010-07-15 | Toshiba Corp | 映像再生装置および映像再生方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107124624B (zh) | 视频数据生成的方法和装置 | |
| JP4279058B2 (ja) | 移動通信端末機のマルチメディアデータ再生装置およびその方法 | |
| JP4430882B2 (ja) | 複合メディアコンテンツの変換装置及び変換方法並びに複合メディアコンテンツ変換プログラム | |
| US20010023450A1 (en) | Authoring apparatus and method for creating multimedia file | |
| JP2008066956A (ja) | 楽曲画像シンクロ動画シナリオ生成方法、プログラムおよび装置 | |
| JPH1098684A (ja) | 電子サーチ・検索に適したフォーマットでのビデオプログラム圧縮表現自動提供方法 | |
| US6795092B1 (en) | Data processing apparatus and method, and storage medium | |
| US20040221225A1 (en) | System and method for using a standard composition environment as the composition space for video image editing | |
| JP2003069938A (ja) | プレゼンテーション生成実行システムおよび方法 | |
| CN113938619A (zh) | 一种基于浏览器的视频合成方法、系统、储存装置 | |
| JP3606729B2 (ja) | リッチテキスト素材の表示方法及び映像情報提供システム | |
| JP2000235652A (ja) | データ処理装置、データ処理方法及び媒体 | |
| JP3036099B2 (ja) | データ管理方法 | |
| WO2022156169A1 (zh) | 一种导出动画视频的方法与装置 | |
| JPH11203782A (ja) | 情報記録再生装置およびその制御方法 | |
| JPH1032773A (ja) | 要約映像ブラウジング方法および装置 | |
| KR101477492B1 (ko) | 동영상 콘텐츠 편집 및 재생을 위한 장치 및 그 방법 | |
| JP2005092495A (ja) | 音声、動画等を具備するベクタグラフィックスのフォーマット方式 | |
| JPH10134030A (ja) | マルチメディアデータ・プレゼンテーションシステムおよび方法 | |
| JP3488020B2 (ja) | マルチメディア情報提示装置 | |
| JPWO2021106051A1 (ja) | サーバおよびデータ割り当て方法 | |
| JP2001014211A (ja) | データ出力方法及びその実施装置並びにその処理プログラムを記録した記録媒体 | |
| WO2022003798A1 (ja) | サーバおよび複合コンテンツデータ作成システム、複合コンテンツデータ作成方法、プログラム | |
| JP2009104595A (ja) | ウェブページ接続システムおよびその接続方法 | |
| JP3496866B2 (ja) | マンガ型映像編集方法及び装置ならびに該編集方法を記録した記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20060509 |