JP3942471B2 - データ編集方法、データ編集装置、データ記録装置および記録媒体 - Google Patents
データ編集方法、データ編集装置、データ記録装置および記録媒体 Download PDFInfo
- Publication number
- JP3942471B2 JP3942471B2 JP2002092267A JP2002092267A JP3942471B2 JP 3942471 B2 JP3942471 B2 JP 3942471B2 JP 2002092267 A JP2002092267 A JP 2002092267A JP 2002092267 A JP2002092267 A JP 2002092267A JP 3942471 B2 JP3942471 B2 JP 3942471B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- partial
- additional
- time length
- original
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Studio Circuits (AREA)
- Television Signal Processing For Recording (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、データ編集方法、データ編集装置、データ記録装置および該データ記録装置に用いる記録媒体に関し、より詳しくは、録画したマルチメディアデータに対して付加データ或いは部分データを任意点から任意の長さ合成することが可能なデータ編集方法、データ編集装置、データ記録装置および該データ記録装置に用いる記録媒体に関する。
【０００２】
【従来の技術】
近年、運動会や結婚式等の画像を記録する機器として、ムービーカメラやデジタルカメラ等が広く普及している。また、記録した画像をパーソナルコンピュータを用いて編集できるようになっており、より簡単にマルチメディアデータを編集することが求められている。このような状況の下に、マルチメディアデータに対して簡単かつ迅速に、エフェクト、グラフィック、テキスト、ＢＧＭ等を自動的に付加できる装置および方法が提案されている。
その代表的なものとして、次の２つを挙げることができる。
【０００３】
第１に、特開２００１−３０９２９８号公報に記載された技術がある。
この特開２００１−３０９２９８号公報には、「シェーカ」と呼ばれる自動編集機能が開示されている。この自動編集機能は、予め１つまたは複数のマルチメディアデータを用意し、５つある効果シナリオの中から１つを選択して自動編集ボタンを押すと、そのシナリオに従って抜き出された元マルチメディアデータの一部に効果が付加されるものである。元マルチメディアデータのどの部分をどの順序で使うかは、乱数計算で自動的に選択される。
例えば、静止画２つと動画１つを用意し、１つのシナリオを選択し、自動編集ボタンを押すと、元マルチメディアデータをランダムに繰り返したり、ランダムにトリミングし、エフェクト、グラフィック、テキスト、ＢＧＭ等が付加された約３０秒のマルチメディアデータが生成される。
【０００４】
第２に、特開２００１−２０２０８２号公報に記載された技術がある。
この特開２００１−２０２０８２号公報に記載された技術は、個々の映像にＢＧＭを付加するもので、マルチメディアデータの属性と付加したいＢＧＭのジャンルを指定すると、そのジャンルに応じたＢＧＭが自動的に付加されるようになっている。
例えば、マルチメディアデータの属性と、ＢＧＭのジャンルを選択すると、元マルチメディアデータの長さに応じたＢＧＭが生成されて付加される。
【０００５】
図１６に、従来の動画編集システムの一例を示す。
従来の動画編集システムの一例である動画編集用サーバ２３は、図１６に示すように、パーソナルコンピュータ２１−１，２１−２の要求に対応して、任意の時間の複数のシーンからなるシナリオを取得し、シナリオにおいて利用の対象とされる任意の数の素材データを編集用テンポラリスペース２６から取得する。動画編集用サーバ２３は、取得された素材データの中から所定のものを選択し、取得されたシーンに対応させ、シナリオのシーンとの対応付けに応じて、素材データを修正する。この場合のシナリオとは、ユーザが選択した編集効果の集合を意味する。
なお、図１６において、２２はインターネット、２３は動画編集用サーバ、２４はユーザ映像管理データベース、２５は共有映像管理データベース、２７はユーザ情報管理データベース、２８−１，２８−２はパーソナルコンピュータ２１−１，２１−２にインストールされたブラウザプログラムを示す。
【０００６】
図１７に、従来の動画編集システムの他の例を示す。
この従来の動画編集システムは、図１７に示すように、特徴抽出部３２により記録媒体３１から特徴情報を抽出し、抽出された特徴情報は、編集部３３へ出力される。編集部３３は、指示情報に基づいて音楽データ蓄積部３４から対応する音楽データを抽出し、特徴情報に基づいて当該抽出した音楽データ等の構成／編集を行い、編集対象映像に合った新たな音楽データを生成する。音源部３５は、編集部３３が出力するＭＩＤＩ規格の編集音楽データを取得し、編集音楽データに基づいてスピーカ等へ入力できる音楽信号を生成する。
【０００７】
【発明が解決しようとする課題】
しかしながら、上述した従来の技術は、元マルチメディアデータ全体、若しくはランダムに切り貼りされた元マルチメディアデータ全体に対して付加したい付加データを選択するものである。また、元マルチメディアデータの、時間的に連続した映像で構成される内容は考慮せず、ランダムに付加データを付加しているものもある。このため、例えば、結婚式のように「ケーキ入刀」「花束贈呈」等の部分的なシーンに意味があり、各シーン毎に違った付加データを付加したい場合には対応できない。
敢えて付加データを付加しようとすれば、すべて手動で選択して付加しなければならない。
このため、元マルチメディアデータのそれぞれのシーンの内容にあった付加データを付加することができないという問題があった。
【０００８】
本発明は、上述した事情に鑑み提案されたもので、内容的なシナリオのあるマルチメディアデータに対して、簡単な操作で効果的な付加データ又は部分データを任意点から任意の長さ付加することが可能なデータ編集方法、データ編集装置、データ記録装置、および該データ記録装置で用いる記録媒体を提供することを目的とする。
【０００９】
【課題を解決するための手段】
本発明に係るデータ編集方法は、元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択して、元データの任意点から任意の長さ付加するデータ編集方法であって、前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前期部分データは、各種時系列内容に応じて整理された単体データの集合であり、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを自動的に付加することを特徴とするものである。
【００１１】
また、本発明に係るデータ編集装置は、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データ全体のデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長の再生区間を調整することを特徴とするものである。
【００１２】
また、本発明に係るデータ編集方法は、前記元データのデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データ全体のデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生割合を調整することを特徴とするものである。
【００１３】
また、本発明に係わるデータ編集方法は、前記任意点が、前記元データの連続性を区切ることが可能なことを特徴とするものである。
【００１４】
また、本発明に係わるデータ編集方法は、前記任意点が、前記元データの強調したい点であることを特徴とするものである。
【００１５】
また、本発明に係るデータ編集方法は、前記付加データ、又は、前記部分データが、前記任意点の種別によって切り替えられることを特徴とするものである。
【００１６】
また、本発明に係るデータ編集方法は、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データにおける所定の任意点と任意点で区切られるデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長を調整することを特徴とするものである。
【００１７】
また、本発明に係るデータ編集方法は、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データにおける所定の任意点と任意点で区切られるデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長の再生区間を調整することを特徴とするものである。
【００１８】
また、本発明に係るデータ編集方法は、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データにおける所定の任意点と任意点で区切られるデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生割合を調整することを特徴とするものである。
【００１９】
また、本発明に係るデータ編集方法は、前記付加データ又は前記部分データが、予め用意された複数のテーマ毎に時系列順にそれぞれ整理されており、前記元データのテーマに応じて、前記付加データ又は前記部分データを選択することを特徴とするものである。
【００２０】
また、本発明に係るデータ編集方法は、前記複数の各テーマには、それぞれサブ情報が用意されており、前記テーマとともにサブ情報を選択することにより、前記付加データ又は前記部分データを絞り込んで選択することを特徴とするものである。
【００２１】
また、本発明に係るデータ編集方法は、前記複数の付加データ又は前記複数の部分データをランダムに組み合わせて前記元データに付加することを特徴とするものである。
【００２２】
また、本発明に係るデータ編集方法は、前記付加データに含まれる部分データの時系列順序を変更可能としたことを特徴とするものである。
【００２３】
また、本発明に係るデータ編集方法は、前記付加データが、部分データ単位で追加・削除を可能としたことを特徴とするものである。
【００２４】
また、本発明に係るデータ編集方法は、前記元データに対して任意点が設定された場合に、予め用意された時系列内容に応じて整理された部分データ、又は、単体データを示す付加部品インデックスを表示して、該付加部品インデックスに基づいて任意の付加部品を選択可能としたことを特徴とするものである。
【００２５】
また、本発明に係るデータ編集装置は、元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択する選択手段と、前記選択した付加データ又は部分データを元データの任意点から任意の長さ付加する付加手段とを備えたデータ編集装置であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを自動的に付加することを特徴とするものである。
【００２６】
また、本発明に係るデータ記録装置は、元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択する選択手段と、前記選択した付加データ又は部分データを元データの任意点から任意の長さ付加する付加手段と、少なくとも前記付加手段を用いて元データに前記付加データ又は前記部分データを付加したデータを記録する記録手段を備えたデータ記録装置であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを自動的に付加することを特徴とするものである。
【００２７】
また、本発明に係る記録媒体は、元データに対して、予め用意された付加データ、或いは予め用意された部分データが選択されて、元データの任意点から任意の長さ付加して記録可能な記録媒体であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを付加して記録可能であることを特徴とするものである。
【００２８】
【発明の実施の形態】
以下、本発明に係るデータ編集方法、データ編集装置、データ記録装置および該データ記録装置で用いる記録媒体の一実施形態を、図面を参照して詳細に説明する。
【００２９】
なお、以下の説明において、「元データ」とは、ビデオカメラやデジタルカメラで撮影したりビデオデッキで録画した動画などのマルチメディアデータを意味し、「単体データ」とは、画像を編集するために用意した、グラフィック、エフェクト、テキスト、ＢＧＭ等を意味し、「部分データ」とは、単体データまたはそれらを組み合わせたものを意味し、「付加データ」とは、部分データを時系列内容に合わせて組み合わせたものを意味する。
【００３０】
詳しくは、付加データとは、単体データの元データと合成する起点、終点、長さ、表示する座標、ファイル名(種類)の管理情報の集合である複数の部分データを、時系列内容に合わせて整理したデータである。
また、「任意点」とは、起点、終点、強調したい点、区切り点など、元データの任意の個所に任意の1以上の個数設定することのできる特徴点である。
【００３１】
図１及び図２は、元データおよび付加データの一例を示す模式図である。
本発明に係るデータ編集装置では、図１に示すように、元データに付加する付加データが、元データの内容を複数想定して、時系列的に整理されている。想定される時系列内容をテーマと呼ぶ。テーマとして、例えば、運動会、誕生会、結婚式、入学式、旅行、海水浴、山登り、クリスマス、お正月、お花見などがある。ここでは「結婚式」を例に、元データと付加データの例を示している。
【００３２】
図１において、符号１は結婚式の元データの一例を示している。この元データ１は、式場への入場に始まり披露宴会場からの退場までを撮影したものである。また、図２において、符号４は結婚式をテーマに用意した付加データの一例を示している。さらに、想定される結婚式中のイベント５-０、５-１、５-２、５-３、５-４を時系列順に並べ、各イベント５-０、５-１、５-２、５-３、５-４毎に、グラフィック６、テキスト７、エフェクト８、ＢＧＭ９を、そのイベント５-０、５-１、５-２、５-３、５-４と時系列の流れに合うように結婚式用の部分データの集合である付加データを用意している。
【００３３】
例えば結婚式の中の「入場」の部分データの場合には、付加データ４の単体データのグラフィック６として、ハート６−ａ、星６−ｂ、光６−ｃ、花６−ｄ、丸６−ｅ、リボン６−ｆが表示され、グラフィックを元データに合成表示する区間の起点、終点、長さが線で、位置が座標で設定されている。テキスト７では、「花嫁入場」が表示され、その起点、終点、長さが線で、位置が座標で設定され、エフェクト８では、「ワイプアウト」という種類のエフェクトが表示され、その起点、終点、長さが線で設定され、ＢＧＭ９では、「ウェディングマーチ」という曲が流れ、その起点、終点、長さが矢印で設定されている。
また、上述した「入場」の例と同様に、その他のイベントに対してそれぞれ部分データの詳細が設定されている。
【００３４】
図３は、本実施形態に係るデータ編集装置及び、データ記録装置を示す機能ブロック図である。
図３において、１１は元データが格納された記録媒体、１２は記録媒体１１の格納内容を読み取るための読み取り部、１３は制御部、１４は付加データを内容別に分類したテーマインデックス、１５は記録媒体１１から読み込んだ元データに付加するための付加データ、１６は制御部１３で制御されたデータを表示するための表示部、１７はデータを入力するための入力部、１８は制御部１３で制御されたデータを記録媒体１１に書き込むための書き込み部である。なお、制御部１３は、読み取り部１２で読み込まれたデータ、付加データ１５、テーマインデックス１４および入力部１７からの入力データを制御するためのものである。
【００３５】
このような構成からなるデータ編集装置では、記録媒体１１に格納されている元データを、読み取り部１２で読み込み、制御部１３に送る。制御部１３では、元データに付加するためのデータのテーマをテーマインデックス１４で選択し、その情報が付加データ１５に送られ、そのテーマと合致する付加データが制御部１３に送られる。また、入力部１７で入力されたデータも制御部１３に送られる。制御部１３では、元データに対して付加データ１５と入力データを付加し、表示部１６に表示する。また、制御部１３で付加されたデータは、書き込み部１８により記録媒体１１に書き込まれる。
【００３６】
この場合、テーマインデックス１４でテーマを選択する時、表示部１６でテーマインデックスを表示し、マウスやキーボードで任意のテーマを選択する。また、表示部１６にタッチパネル機能を付加し、タッチパネル上でデータ入力選択を行えるようにしてもよい。また、タッチパネル上で、元データに付加するデータの配置調整等を行えるようにしてもよい。さらに、ペン型入力装置を用いてもよい。
【００３７】
図４は、マルチメディアデータを自動編集する場合の手順を示すフローチャートである。
マルチメディアデータを自動編集するには、図４に示すように、元データを読み込み（＃１）、そのデータに合うテーマをテーマインデックスの中から選択する（＃２）。この場合、選択したテーマに加えて、サブ情報を選択（＃３）してもよい。サブ情報を選択することにより、よりテーマを絞り込むことができる。
上記ステップ１〜３（＃１〜＃３）により、付加データが選択される（＃４）。次に、元データ（動画像）と付加データのデータ再生時間長を比較し（＃５）、元データ（動画像）のデータ再生時間長が付加データのデータ再生時間長よりも長い場合には、付加データの再生時間長を時間的に伸ばし（または繰り返すなどして足し）（＃６）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００３８】
この付加データの再生時間長を伸ばす時、付加データの再生時間長と、元データ全体の再生時間長や、後述する任意点と任意点で区切られるデータの再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を伸長したり、部分データ内の単位データを繰り返すなどして単位データ数を増やしたりすることにより、再生時間割合を調整する。
また、付加データを繰り返して元データに付加したり、足りない時間分、付加データの一部を抜き出して付加したりしてもよい。
【００３９】
一方、元データ（動画像）のデータ再生時間長が付加データのデータ再生時間長よりも短い場合には、付加データの再生時間長を時間的に縮め（または付加データの再生時間長を、後の方で再生される単位データを省くなどして、途中で切り）（＃７）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００４０】
この付加データの再生時間長を縮める時、付加データの再生時間長と、元データ全体の再生時間長や、後述する任意点と任意点で区切られるデータの再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を収縮したり、単体データを部分データ内のある一定割合で間引くことにより、再生時間割合を調整する。
また、付加データの再生時間長の余る部分に割り当てられている単位データを省くなどして切ったり、付加データの一部を抜き出して付加したりしてもよい。
【００４１】
そして、元データと同一のデータ再生時間長となった付加データを、元データに対して付加（合成編集）し（＃８）、編集結果を再生して（＃９）、確認する。
また、元データと付加データの表示時間を合致させなくてもいい場合は、＃５〜＃７の手順を省き、＃４の次は＃８へ進み処理を行ってもよい。
なお、サブ情報とは、テーマをより細かく絞り込み、元データに合致するテーマテンプレートを選択するためのものである。
【００４２】
例えば、図２における「結婚式」テーマで、「神式」「教会式」「人前式」などをサブ情報として選択すると、式の形態にあった付加データテンプレートを選択することができる。また、雰囲気として、「にぎやかに」「おごそかに」「若々しく」「大人っぽく」などからサブ情報を選択すると、よりユーザの好みにあった付加データを選択することができる。さらに、サブ情報の選択によって、付加データの付加割合を変更してもよい。このサブ情報選択によって、編集の精度がより高くなる。
【００４３】
図５は、元データ中の任意点を任意の個数を1以上に予め設定し、その任意点を利用して自動編集を行い、必要ならば複数のシーンを結合する場合の手順を示すフローチャートである。
元データに任意点を予め設定して自動編集を行うには、図５に示すように元データを読み込み（＃１１）、その元データに合うテーマをテーマインデックスの中から選択する（＃１２）。この場合、選択したテーマに加えて、サブ情報を選択（＃１３）しても良い。サブ情報を選択することにより、よりテーマを絞り込むことができる。上記ステップ（＃１１〜＃１３）により、選択したテーマとして用意された部分データの集合が選択される（＃１４）。ここまでの処理は図４に示す処理と同様である。
【００４４】
次に、全ての任意点の設定が完了していない場合（＃１５）、元データ中の任意点を選択する。この処理を全ての任意点の設定が完了するまで繰り返す。
この時、設定する任意点の種類や個数は、選択したテーマに対応する部分データ管理情報で管理される。例えば部分データ管理情報として、部分データを元データに対して合成する合成時間の長さ、合成する座標情報、該部分データが自動的に元データに対して付加されるべきものなのか、ユーザが指定した任意点を基準に付加されるべきものなのかを管理する。また、元データ中の任意点を選択する場合、ユーザにどのような任意点を選択して欲しいのかを示すメッセージを併せて管理する。例えば、徒競走のスタートと言った任意点を選択して欲しい場合は、「徒競走のスタートを選択してください」と言ったメッセージを用意し、ユーザにこのメッセージを提示することによって、元データの中から徒競走のスタート点に対応する任意点を選択可能とする。
なお、全ての部分データを全自動で付加する場合は、設定する任意点の数は０となる。
上記＃１５〜＃１６を踏まえて部分データを元データのどの個所からどの長さだけ付加するか調整され（＃１７）、調整された部分データを元データに対して付加（合成編集）し（＃１８）、編集結果を再生し（＃１９）、内容を確認する。
【００４５】
例えば元データが図８及び図９に示すような場合、テーマとして「運動会」、サブ情報として「徒競走」を選択する。この例では、選択したテーマおよびサブ情報に対応する部分データ管理情報の集合に、4つの部分データが用意されている。徒競走のスタートとゴールの箇所を任意点としてユーザに選択させるように設定されている。ユーザは、「徒競走のスタートを選択してください」というメッセージに従い、元データの中から徒競走のスタートの箇所を選択する。例えば、元データを再生し目的の任意点の個所で一時停止し、選択処理を行うことで選択、あるいは元データから等間隔で抽出したサムネイル画像を一覧表示し、その中から選択してもよい。図８及び図９の例では、最初のグラフィックと最後のグラフィックがそれぞれユーザによって選択された徒競走のスタートとゴールに対応する任意点に部分データ管理情報で管理される合成時間長だけ付加され、２つ目のグラフィックとテキストに関しては、徒競走のスタート点とゴール点の時間の関係より自動的に付加点を決定し管理されている合成時間長だけ付加される。また、スタートとゴール以外の間の部分データ２つを、スタートゴール間に時間的に均等に合成されるように付加してもよい。このような場合は、部分データ管理情報で管理している部分データを元データに合成付加する時間長情報として自動付加を表す情報を管理することになる。
【００４６】
このように、徒競走のスタートとゴールと言った元データ中のキーイベントとなる任意点のみをユーザに指定してもらうことによって自動編集の精度を高めることが可能となる。図の例では自動で付加する部分データはスタートとゴールの間に定義された２つだけであるが、例えばスタート点とゴール点の間や前後に任意の数の部分データを自動付加するようにしてもよい。
ユーザに選択させる任意点は任意の個数でよく、この徒競走の場合であれば、スタート点のみの指定、ゴール点のみの指定、あるいはスタートやゴールと併せて徒競走の中盤も選択するようにしてもよい。更に部分データ管理情報において任意点をユーザ指定してもらうようになっていても、ユーザの指示によってその任意点を選択せずに自動的に付加するようにしてもよい。
【００４７】
また、編集結果確認後、違うシーンを編集するかどうかを選択する（＃２２）。
編集する場合は、ステップ１１（＃１１）に戻り前記フローを繰り返す。
編集しない場合は、他のシーンの結合するかどうかを選択する（＃２１）。他のシーンがない場合やシーンを結合しない場合は、終了する。
【００４８】
他のシーンと結合する場合は、他のシーンとの順序を調整し（＃２２）、複数のシーンを結合する（＃２３）。結合結果を再生し（＃１９）、確認する。その後は、前述の通り、終了するまで繰り返す。
【００４９】
例えば、複数の異なる競技で構成されている運動会の映像を撮った場合は、徒競走、玉入れ、騎馬戦など複数の競技を、それぞれ競技毎のシーンでテーマを選択し、起点、終点、特徴点を付加して個別に編集し、最後に競技の順序に合わせて結合することができる。
シーン毎のテーマに応じて編集し、結合するので、より元データの内容に則した編集をすることが可能となる。
【００５０】
図６、図７は、マルチメディアデータを半自動編集する場合の手順を示すフローチャートである。
マルチメディアデータを半自動編集するには、図６、図７に示すように、元データを読み込み（＃３１）、そのデータに合うテーマをテーマインデックスの中から選択する（＃３２）。この場合、選択したデータに加えて、サブ情報を選択（＃３３）してもよい。サブ情報を選択することにより、よりテーマを絞り込むことができる。
上記ステップ（＃３１〜＃３３）により、付加データが選択される（＃３４）。ここまでの処理は、図４に示す処理と同様である。
【００５１】
その後、選択された付加データに関するテーマ時系列リストが表示される（＃３５）。次に、付加データにおける部分データ単位の再生時間長の調整の有無を判断し（＃３６）、調整が必要な場合には、部分データ単位での削除あるいは追加を選択する（＃３７）。
【００５２】
削除を選択した場合には、部分データ単位の削除を行う（＃３８）。一方、追加を選択した場合には、部分データ単位の追加を行う（＃３９）。ここでの部分データとは、図２で示す「入場」「神父の言葉」「指輪の交換」等の時系例毎の項目に合わせた付加データ中の1イベントのことである。部分データの集合が付加データである。
【００５３】
部分データ単位の削除あるいは追加（＃３８，＃３９）が終了し、あるいは部分データ単位の調整が不必要な場合には、図７に示すように、元データに任意点を用いて区切りを入れるかどうかを選択する（＃４０）。ここで、元データに区切りを入れない場合は、元データと付加データの全体再生時間長を比較し（＃４１）、元データのデータ再生時間長が付加データのデータ再生時間長よりも長い場合には、付加データの再生時間長を伸ばすか、あるいは付加データを繰り返すなどして足して（＃４２）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００５４】
この付加データの再生時間長を伸ばす時、付加データの再生時間長と、元データ全体の再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を伸長したり、部分データ内の単位データを繰り返すなどして単位データ数を増やすことにより、再生時間割合を調整する。
また、付加データを繰り返して元データに付加したり、足りない時間分、付加データの一部を抜き出して付加したりしてもよい。
【００５５】
一方、元データのデータ長が付加データのデータ再生時間長よりも短い場合には、付加データを構成している部分データ内の単位データの表示時間を全体的に縮めるか、または付加データの再生時間長を、付加データを構成する部分データ内の後ろの方に位置する単位データを省くなどして、途中で切り（＃４３）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００５６】
この付加データの再生時間長を縮める時、付加データの再生時間長と、元データ全体の再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を収縮したり、単体データを部分データ内のある一定割合で間引くことにより、再生時間割合を調整する。
また、付加データの再生時間長の余る部分に割り当てられている単位データを省くなどして切ったり、付加データの一部を抜き出して付加したりしてもよい。
【００５７】
このようにして、元データ全体の再生時間長に対して付加データ全体の再生時間長を揃える。
もし、元データと付加データの表示時間を揃えない場合には、データ再生時間長の調整はせずにデータ付加（＃４７）に進む。
【００５８】
また、任意点を用い元データに区切りを入れる場合は、元データの任意の個所に任意の数の任意点を設定して元データを区切り、又は、時系列項目毎に任意点を設定して区切りを入れた後、元データの再生時間長と付加データの再生時間長を、その項目部分ごとに比較する（＃４４）。ここで、元データのデータ再生時間長が付加データの対応部分データのデータ再生時間長よりも長い場合には、付加データの再生時間長を部分的に伸ばすか繰り返すなどして足して（＃４５）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００５９】
この付加データを伸ばす時、付加データの再生時間長と、元データの任意点と任意点で区切られるデータの再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を時間的に伸長したり、部分データ内の単位データを繰り返すなどして単位データ数を増やすことにより、再生時間割合を調整する。
また、付加データを繰り返して元データに付加したり、足りない時間分、付加データの一部を抜き出して付加したりしてもよい。
【００６０】
一方、元データのデータ再生時間長が付加データの対応部分データのデータ再生時間長よりも短い場合には、付加データを構成する部分データ内の単体データの再生時間長を部分的に縮めるか単位データを省くなどして切り（＃４６）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００６１】
この付加データの再生時間長を縮める時、付加データの再生時間長と、元データの任意点と任意点で区切られるデータの再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を時間的に収縮したり、部分データ内のある一定割合で単体データを間引くことにより、再生時間割合を調整する。
【００６２】
また、付加データの再生時間長の余る部分に割り当てられている単体データを省くことで付加データの再生時間長を切ったり、付加データの一部を抜き出して付加したりしてもよい。
このようにして、元データの任意点と任意点で区切られたデータの再生時間長に対して付加データの再生時間長を揃える。
もし、元データと付加データの再生時間長を揃えない場合には、データ再生時間長の調整はせずにデータ付加（＃４７）に進む。
【００６３】
また、元データに任意点を用いてシーン区切りを入れる場合には、図１に示すように、元データの時系列に従って、シーン区切り３を付加して、元データの各イベント２毎に区切っていく。ここでは、２-２、２-３のイベントをシーン区切り３で区切っている。なお、任意点の他に、フラグ、ブックマークを用いることもできる。
【００６４】
また、シーンチェンジではなく、任意に区切りを入れたい個所(例えば運動会競技でのスタートとゴールなど)に、フラグ、もしくはブックマークなどを挿入することも可能である。
なお、「シーン区切り」とは、元データの時系列内容が次へ進む時の前後の区切りであり、ここでは、任意点を設定することによってシーン区切りを表している。
【００６５】
このようにして元データのデータ再生時間長に対して付加データのデータ再生時間長を揃えた後、または、データ再生時間長の調整をしない場合はその後、元データに付加データを付加（合成編集）する（＃４７）。そして、付加データが付加されたデータを再生し（＃４８）、その処理結果に満足するか否かを判断させて（＃４９）、処理結果に満足が得られた場合には処理を終了する。
【００６６】
一方、処理結果に満足が得られなかった場合には、元データに対して付加した付加データにおいて、部分データの順序の不一致があるかどうかを確認し（＃５０）、部分データの順序の不一致が確認された場合には、部分データの順序を入れ替えて（＃５１）、部分データの順番を合わせ、ステップ４７（＃４７）に戻って、元データに付加データを付加(合成編集)し直す。
【００６７】
例えば、図１及び図２において、元データ１と付加データ４を比較してみると、元データのスピーチ２−２、出し物２−４と、付加データのスピーチ５−４、出し物５−３の順序が違っている。これを元データ１の順序に合わせ、付加データの出し物５−３とスピーチ５−４の順序を入れ替える。このような入れ替えを行った結果を図１０に示す。なお、図１では、フラワーシャワー２−１や歓談２−３のように、付加データに存在しないイベントがあるが、これについては後述する。
【００６８】
編集結果に満足が得られず、その原因が部分データの順序の不一致ではない場合には、元データに対して不必要な部分データや足りない部分データがあるか否かを判断し、部分データを差替える（＃５２）。その後、ステップ４７（＃４７）に戻って、元データに付加データを付加（合成編集）し直す。
【００６９】
ここで、ステップ５２（＃５２）の部分データの差し替えについて、図１及び図２を用いて説明する。
図１及び図２において、元データ１と付加データ４を比較すると、元データには、付加データに存在しないフラワーシャワー２−１、歓談２−３があり、付加データには、元データに存在しないお色直し５−１、再入場５−２がある。ここで、付加データを元データに合わせるため、お色直し５−１、再入場５−２を削除し、フラワーシャワー５−５、歓談５−６を追加する。付加データにないイベントを追加する場合には、イベントリストを表示し、その中から任意のイベントを選択できるようにする。この場合、任意のイベントを選択するのには、マウスやキーボード、或いはタッチパネル機能付きの表示装置を用いる。このような付加データの削除、追加を行った結果を図１１に示す。
このように、マルチメディアデータを半自動編集するには、上述した手順を、編集結果に満足を得られ終了するまで繰り返す。
【００７０】
図１２は、テーマなし付加データの一例を示す模式図である。
本実施形態に係るデータ編集装置では、元データの任意点と任意点で区切られたシーンのいずれにも適合するような付加データセット（付加データ１，２）を複数用意し、元データのシーン区切り毎にランダム付加(合成編集)することができる。図１２に示す付加データセットでは、元データの内容や長さに関係なく、全自動でデータの編集を行うことができる。
この時、図５に示すステップ１５（＃１５）以下のような手順で、任意点を用いて、任意点を追加して合成編集してもよい。
前述の任意点は、前述の様々な調整後、それら調整に合わせて座標や時間などの設定が変化してもよい。
【００７１】
図１３は、ビデオカメラにおける操作ＧＵＩの一例を示す説明図である。
本実施形態に係るデータ編集装置でデータ編集を効率よく行う為に、画像撮影機器（ここではビデオカメラ４３）に対して、録画ボタン４２とは別に、任意点付加ボタン４１を設けている。そして、画像撮影最中に特徴を付加したいシーンとなった時に、任意点付加ボタン４１を押すことにより、撮影画像データに任意点を付加することができる。
【００７２】
例えば、図１３に示す画面１では、画像撮影時にシーンの区切り目を付けたい場合に、任意点付加ボタン４１を押すことにより、シーンチェンジマーク付加ウィンドウ４４が表示され、画像データにシーンチェンジマーク（あるいはフラグ）が付加される。このようにシーンチェンジマークを付加することにより、画像編集時にシーン区切りをつける手間が省け、編集が便利になる。
【００７３】
画面２では、画像撮影時に撮影中のシーンのイベント内容を付加することができる。画像撮影前にこれから撮影する画像のテーマを選択しておくと、シーンチェンジ毎に、イベント内容選択ウィンドウ４５が表示されるとともに、このイベント内容選択ウィンドウ４５内にテーマ関連のイベントインデックスが表示され、ユーザはその中から撮影中のシーンに合ったイベント内容を選択することができる。この時、画面がタッチパネル機能を備えている場合には、タッチパネル方式で画面操作をすることができる。また、ペン型入力装置４６を使って操作してもよい。
【００７４】
画面３は、画像撮影中のシーンにグラフィックを付加した例である。画像撮影前に選択したテーマや、シーンチェンジ時に選択したイベント内容によって、撮影中のシーンに即したグラフィック付加ウィンドウ４７が表示されるとともに、このグラフィック付加ウィンドウ４７内にグラフィックインデックスが表示され、ユーザは任意のグラフィックを選択して付加することができる。この時、ペン型入力装置４６を使って、グラフィックの位置を移動させるようにしてもよい。また、この時、グラフィック以外にテキスト、エフェクト、ＢＧＭなどの付加部品データインデックスを表示し、選択できるようにしてもよい。
【００７５】
画面４は、画像撮影時に任意点付加ボタン４１を押した場合に、任意点付加ウィンドウ４８が表示されるとともに、当該シーンに対して任意点マーク４９が付加された例である。
画像撮影機器４３で画像撮影終了後、データ編集装置で前記画像再生中にも、前記図１３の画像撮影機器における操作と同様の操作をすることが可能である。
【００７６】
また、わざわざシーンチェンジ区切りを任意点付加ボタンで付加しなくとも、画像撮影中に一時停止、または撮影停止した点を、シーン区切りと認識してもよい。
さらに、一時停止または撮影停止中に、テーマ関連のイベントインデックスが表示され、ユーザは任意のグラフィックを選択して付加することができてもよい。
【００７７】
任意点付加ボタン４１は、ボタンの押圧度を区別して記録することが可能である。より強調したいシーンではより強くボタンを押し、また、少し強調したいシーンではボタンを弱く押すことにより、押圧の度合が区別される。
【００７８】
図１４は、ビデオカメラ４３における、任意点付加ボタン４１の押圧度と強調度合の関係を示す説明図である。
図１４に示す例では、結婚式を撮影した場合に、そのシーン毎の感動度をボタンの押圧度によって記録している。例えば、フラワーシャワーのシーンでは感動して「８」の強さでボタンを押したのに対し、主賓の挨拶では退屈だったためボタンを押していない。また、一番感動したケーキ入刀と花束贈呈では、最高値の「１０」の押圧度が記録されている。
【００７９】
図１５は、任意点付加ボタン４１の押圧度に対する重要度の関係を示す説明図である。
図１５に示す例では、押圧度１以上３未満の場合には「少し重要」、押圧度３以上６未満の場合には「重要」、押圧度６以上８未満の場合には「かなり重要」、押圧度８以上１０までの場合には「最重要」に分類している。このように分類することにより、編集内容を区別することが可能である。
【００８０】
例えば、「少し重要」に分類されたシーンでは、付加データの表示頻度を少なくし、逆に「最重要」に分類されたシーンでは、付加データの表示頻度を最高にするなどである。
任意点付加ボタン４１のボタン押圧度による区別記録機能は、録画ボタン４２に備わっていてもよいし、画面上で選択可能としてもよい。
【００８１】
本実施形態に係るデータ編集装置における編集結果は、各種の記録媒体に記録して保存することが可能である。記録媒体は、例えばビデオテープ、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、データ編集装置に対して着脱可能とした板状あるいはスティック状のＲＡＭ等を使用することができる。
【００８２】
また、上述した編集作業に合わせて、以下の自動編集機能を加えることも可能である。すなわち、元データにおけるシーンのバックの音色もしくは色調に応じて、編集サブ情報を追加することができる。また、シーンチェンジを手動で行わずに、自動的に一定区間毎に区切りの挿入を行うことができる。また、画像撮影の月日や時刻などで季節感などを判別し、編集サブ情報に追加することができる。さらに、画像認識（顔認識）の機能を用いて、元データに撮影されている人数を把握し、人数に合わせた編集サブ情報を追加することができる。例えば、１人しか認識されなかった場合は、サブ情報が「1人」となり、「１人」のサブ情報が追加されると、付加データの効果の頻度が高くなり、画面の余白が目立たないようにする。また、10人などの大人数が認識された場合は、サブ情報が「大人数」となり、「大人数」のサブ情報が追加されると、付加データの効果頻度が下がったり、テキストが「ワイワイ」「ガヤガヤ」などの大人数の特色をもったものが出てくるようにする、などである。
【００８３】
【発明の効果】
本発明においては、上述した構成を備えているため、元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択して、元データの任意点から任意の長さ付加することができる。
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合である。
したがって、簡単かつ迅速に、元データの内容に即した編集を行うことが可能となる。
【図面の簡単な説明】
【図１】本実施形態に係るデータ編集方法で用いる元データの一例を示す模式図である。
【図２】本実施形態に係るデータ編集方法で用いる付加データの一例を示す模式図である。
【図３】本実施形態に係るデータ編集装置、及びデータ記録装置を示す機能ブロック図である。
【図４】マルチメディアデータを自動編集する場合の手順を示すフローチャートである。
【図５】マルチメディアデータの任意点を予め設定して自動編集を行い、必要ならば複数のシーンを結合する場合の手順を示すフローチャートである。
【図６】マルチメディアデータを半自動編集する場合の手順を示すフローチャートである。
【図７】マルチメディアデータを半自動編集する場合の手順を示すフローチャートである。
【図８】マルチメディアデータの１シーンに起点、終点、任意点を付加した一例を示す模式図である。のち、付加データを付加する。
【図９】図８に示すマルチメディアデータの１シーンに付加した付加データの一例を示す模式図である。
【図１０】付加データに対して部分データ調整を行った後の模式図である。
【図１１】付加データに対して部分データ調整を行った後の模式図である。
【図１２】テーマなし付加データの一例を示す模式図である。
【図１３】ビデオカメラにおける操作ＧＵＩの一例を示す説明図である。
【図１４】ビデオカメラにおける任意点付加ボタンの押圧度と強調度合の関係を示す説明図である。
【図１５】任意点付加ボタンの押圧度に対する重要度の関係を示す説明図である。
【図１６】従来の動画編集システムの一例を示すブロック図である。
【図１７】従来の動画編集システムの他の例を示すブロック図である。
【符号の説明】
１ 結婚式の元データ
２ 元データのイベント（部分データ）
３ シーンチェンジ区切り
４ 結婚式をテーマに用意した付加データ
５ 付加データのイベント（部分データ）
６ グラフィック
７ テキスト
８ エフェクト
９ ＢＧＭ
１１ 記録媒体
１２ 読み取り部
１３ 制御部
１４ テーマインデックス
１５ 付加データ
１６ 表示部
１７ 入力部
１８ 書き込み部
２１ パーソナルコンピュータ
２２ インターネット
２３ 動画編集用サーバ
２４ ユーザ映像管理データベース
２５ 共有映像管理データベース
２６ 編集用テンポラリスペース
２７ ユーザ情報管理データベース
２８ ブラウザプログラム
２９ 動画編集プログラム
３１ 記録媒体
３２ 特徴抽出部
３３ 編集部
３４ 音楽データ蓄積部
３５ 音源部
４１ 任意点付加ボタン
４２ 録画ボタン
４３ ビデオカメラ
４４ シーンチェンジマーク付加ウィンドウ
４５ イベント内容選択ウィンドウ
４６ ペン型入力装置
４７ グラフィック付加ウィンドウ
４８ 任意点付加ウィンドウ
４９ 任意点マーク
【発明の属する技術分野】
本発明は、データ編集方法、データ編集装置、データ記録装置および該データ記録装置に用いる記録媒体に関し、より詳しくは、録画したマルチメディアデータに対して付加データ或いは部分データを任意点から任意の長さ合成することが可能なデータ編集方法、データ編集装置、データ記録装置および該データ記録装置に用いる記録媒体に関する。
【０００２】
【従来の技術】
近年、運動会や結婚式等の画像を記録する機器として、ムービーカメラやデジタルカメラ等が広く普及している。また、記録した画像をパーソナルコンピュータを用いて編集できるようになっており、より簡単にマルチメディアデータを編集することが求められている。このような状況の下に、マルチメディアデータに対して簡単かつ迅速に、エフェクト、グラフィック、テキスト、ＢＧＭ等を自動的に付加できる装置および方法が提案されている。
その代表的なものとして、次の２つを挙げることができる。
【０００３】
第１に、特開２００１−３０９２９８号公報に記載された技術がある。
この特開２００１−３０９２９８号公報には、「シェーカ」と呼ばれる自動編集機能が開示されている。この自動編集機能は、予め１つまたは複数のマルチメディアデータを用意し、５つある効果シナリオの中から１つを選択して自動編集ボタンを押すと、そのシナリオに従って抜き出された元マルチメディアデータの一部に効果が付加されるものである。元マルチメディアデータのどの部分をどの順序で使うかは、乱数計算で自動的に選択される。
例えば、静止画２つと動画１つを用意し、１つのシナリオを選択し、自動編集ボタンを押すと、元マルチメディアデータをランダムに繰り返したり、ランダムにトリミングし、エフェクト、グラフィック、テキスト、ＢＧＭ等が付加された約３０秒のマルチメディアデータが生成される。
【０００４】
第２に、特開２００１−２０２０８２号公報に記載された技術がある。
この特開２００１−２０２０８２号公報に記載された技術は、個々の映像にＢＧＭを付加するもので、マルチメディアデータの属性と付加したいＢＧＭのジャンルを指定すると、そのジャンルに応じたＢＧＭが自動的に付加されるようになっている。
例えば、マルチメディアデータの属性と、ＢＧＭのジャンルを選択すると、元マルチメディアデータの長さに応じたＢＧＭが生成されて付加される。
【０００５】
図１６に、従来の動画編集システムの一例を示す。
従来の動画編集システムの一例である動画編集用サーバ２３は、図１６に示すように、パーソナルコンピュータ２１−１，２１−２の要求に対応して、任意の時間の複数のシーンからなるシナリオを取得し、シナリオにおいて利用の対象とされる任意の数の素材データを編集用テンポラリスペース２６から取得する。動画編集用サーバ２３は、取得された素材データの中から所定のものを選択し、取得されたシーンに対応させ、シナリオのシーンとの対応付けに応じて、素材データを修正する。この場合のシナリオとは、ユーザが選択した編集効果の集合を意味する。
なお、図１６において、２２はインターネット、２３は動画編集用サーバ、２４はユーザ映像管理データベース、２５は共有映像管理データベース、２７はユーザ情報管理データベース、２８−１，２８−２はパーソナルコンピュータ２１−１，２１−２にインストールされたブラウザプログラムを示す。
【０００６】
図１７に、従来の動画編集システムの他の例を示す。
この従来の動画編集システムは、図１７に示すように、特徴抽出部３２により記録媒体３１から特徴情報を抽出し、抽出された特徴情報は、編集部３３へ出力される。編集部３３は、指示情報に基づいて音楽データ蓄積部３４から対応する音楽データを抽出し、特徴情報に基づいて当該抽出した音楽データ等の構成／編集を行い、編集対象映像に合った新たな音楽データを生成する。音源部３５は、編集部３３が出力するＭＩＤＩ規格の編集音楽データを取得し、編集音楽データに基づいてスピーカ等へ入力できる音楽信号を生成する。
【０００７】
【発明が解決しようとする課題】
しかしながら、上述した従来の技術は、元マルチメディアデータ全体、若しくはランダムに切り貼りされた元マルチメディアデータ全体に対して付加したい付加データを選択するものである。また、元マルチメディアデータの、時間的に連続した映像で構成される内容は考慮せず、ランダムに付加データを付加しているものもある。このため、例えば、結婚式のように「ケーキ入刀」「花束贈呈」等の部分的なシーンに意味があり、各シーン毎に違った付加データを付加したい場合には対応できない。
敢えて付加データを付加しようとすれば、すべて手動で選択して付加しなければならない。
このため、元マルチメディアデータのそれぞれのシーンの内容にあった付加データを付加することができないという問題があった。
【０００８】
本発明は、上述した事情に鑑み提案されたもので、内容的なシナリオのあるマルチメディアデータに対して、簡単な操作で効果的な付加データ又は部分データを任意点から任意の長さ付加することが可能なデータ編集方法、データ編集装置、データ記録装置、および該データ記録装置で用いる記録媒体を提供することを目的とする。
【０００９】
【課題を解決するための手段】
本発明に係るデータ編集方法は、元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択して、元データの任意点から任意の長さ付加するデータ編集方法であって、前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前期部分データは、各種時系列内容に応じて整理された単体データの集合であり、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを自動的に付加することを特徴とするものである。
【００１１】
また、本発明に係るデータ編集装置は、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データ全体のデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長の再生区間を調整することを特徴とするものである。
【００１２】
また、本発明に係るデータ編集方法は、前記元データのデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データ全体のデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生割合を調整することを特徴とするものである。
【００１３】
また、本発明に係わるデータ編集方法は、前記任意点が、前記元データの連続性を区切ることが可能なことを特徴とするものである。
【００１４】
また、本発明に係わるデータ編集方法は、前記任意点が、前記元データの強調したい点であることを特徴とするものである。
【００１５】
また、本発明に係るデータ編集方法は、前記付加データ、又は、前記部分データが、前記任意点の種別によって切り替えられることを特徴とするものである。
【００１６】
また、本発明に係るデータ編集方法は、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データにおける所定の任意点と任意点で区切られるデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長を調整することを特徴とするものである。
【００１７】
また、本発明に係るデータ編集方法は、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データにおける所定の任意点と任意点で区切られるデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長の再生区間を調整することを特徴とするものである。
【００１８】
また、本発明に係るデータ編集方法は、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データにおける所定の任意点と任意点で区切られるデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生割合を調整することを特徴とするものである。
【００１９】
また、本発明に係るデータ編集方法は、前記付加データ又は前記部分データが、予め用意された複数のテーマ毎に時系列順にそれぞれ整理されており、前記元データのテーマに応じて、前記付加データ又は前記部分データを選択することを特徴とするものである。
【００２０】
また、本発明に係るデータ編集方法は、前記複数の各テーマには、それぞれサブ情報が用意されており、前記テーマとともにサブ情報を選択することにより、前記付加データ又は前記部分データを絞り込んで選択することを特徴とするものである。
【００２１】
また、本発明に係るデータ編集方法は、前記複数の付加データ又は前記複数の部分データをランダムに組み合わせて前記元データに付加することを特徴とするものである。
【００２２】
また、本発明に係るデータ編集方法は、前記付加データに含まれる部分データの時系列順序を変更可能としたことを特徴とするものである。
【００２３】
また、本発明に係るデータ編集方法は、前記付加データが、部分データ単位で追加・削除を可能としたことを特徴とするものである。
【００２４】
また、本発明に係るデータ編集方法は、前記元データに対して任意点が設定された場合に、予め用意された時系列内容に応じて整理された部分データ、又は、単体データを示す付加部品インデックスを表示して、該付加部品インデックスに基づいて任意の付加部品を選択可能としたことを特徴とするものである。
【００２５】
また、本発明に係るデータ編集装置は、元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択する選択手段と、前記選択した付加データ又は部分データを元データの任意点から任意の長さ付加する付加手段とを備えたデータ編集装置であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを自動的に付加することを特徴とするものである。
【００２６】
また、本発明に係るデータ記録装置は、元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択する選択手段と、前記選択した付加データ又は部分データを元データの任意点から任意の長さ付加する付加手段と、少なくとも前記付加手段を用いて元データに前記付加データ又は前記部分データを付加したデータを記録する記録手段を備えたデータ記録装置であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを自動的に付加することを特徴とするものである。
【００２７】
また、本発明に係る記録媒体は、元データに対して、予め用意された付加データ、或いは予め用意された部分データが選択されて、元データの任意点から任意の長さ付加して記録可能な記録媒体であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを付加して記録可能であることを特徴とするものである。
【００２８】
【発明の実施の形態】
以下、本発明に係るデータ編集方法、データ編集装置、データ記録装置および該データ記録装置で用いる記録媒体の一実施形態を、図面を参照して詳細に説明する。
【００２９】
なお、以下の説明において、「元データ」とは、ビデオカメラやデジタルカメラで撮影したりビデオデッキで録画した動画などのマルチメディアデータを意味し、「単体データ」とは、画像を編集するために用意した、グラフィック、エフェクト、テキスト、ＢＧＭ等を意味し、「部分データ」とは、単体データまたはそれらを組み合わせたものを意味し、「付加データ」とは、部分データを時系列内容に合わせて組み合わせたものを意味する。
【００３０】
詳しくは、付加データとは、単体データの元データと合成する起点、終点、長さ、表示する座標、ファイル名(種類)の管理情報の集合である複数の部分データを、時系列内容に合わせて整理したデータである。
また、「任意点」とは、起点、終点、強調したい点、区切り点など、元データの任意の個所に任意の1以上の個数設定することのできる特徴点である。
【００３１】
図１及び図２は、元データおよび付加データの一例を示す模式図である。
本発明に係るデータ編集装置では、図１に示すように、元データに付加する付加データが、元データの内容を複数想定して、時系列的に整理されている。想定される時系列内容をテーマと呼ぶ。テーマとして、例えば、運動会、誕生会、結婚式、入学式、旅行、海水浴、山登り、クリスマス、お正月、お花見などがある。ここでは「結婚式」を例に、元データと付加データの例を示している。
【００３２】
図１において、符号１は結婚式の元データの一例を示している。この元データ１は、式場への入場に始まり披露宴会場からの退場までを撮影したものである。また、図２において、符号４は結婚式をテーマに用意した付加データの一例を示している。さらに、想定される結婚式中のイベント５-０、５-１、５-２、５-３、５-４を時系列順に並べ、各イベント５-０、５-１、５-２、５-３、５-４毎に、グラフィック６、テキスト７、エフェクト８、ＢＧＭ９を、そのイベント５-０、５-１、５-２、５-３、５-４と時系列の流れに合うように結婚式用の部分データの集合である付加データを用意している。
【００３３】
例えば結婚式の中の「入場」の部分データの場合には、付加データ４の単体データのグラフィック６として、ハート６−ａ、星６−ｂ、光６−ｃ、花６−ｄ、丸６−ｅ、リボン６−ｆが表示され、グラフィックを元データに合成表示する区間の起点、終点、長さが線で、位置が座標で設定されている。テキスト７では、「花嫁入場」が表示され、その起点、終点、長さが線で、位置が座標で設定され、エフェクト８では、「ワイプアウト」という種類のエフェクトが表示され、その起点、終点、長さが線で設定され、ＢＧＭ９では、「ウェディングマーチ」という曲が流れ、その起点、終点、長さが矢印で設定されている。
また、上述した「入場」の例と同様に、その他のイベントに対してそれぞれ部分データの詳細が設定されている。
【００３４】
図３は、本実施形態に係るデータ編集装置及び、データ記録装置を示す機能ブロック図である。
図３において、１１は元データが格納された記録媒体、１２は記録媒体１１の格納内容を読み取るための読み取り部、１３は制御部、１４は付加データを内容別に分類したテーマインデックス、１５は記録媒体１１から読み込んだ元データに付加するための付加データ、１６は制御部１３で制御されたデータを表示するための表示部、１７はデータを入力するための入力部、１８は制御部１３で制御されたデータを記録媒体１１に書き込むための書き込み部である。なお、制御部１３は、読み取り部１２で読み込まれたデータ、付加データ１５、テーマインデックス１４および入力部１７からの入力データを制御するためのものである。
【００３５】
このような構成からなるデータ編集装置では、記録媒体１１に格納されている元データを、読み取り部１２で読み込み、制御部１３に送る。制御部１３では、元データに付加するためのデータのテーマをテーマインデックス１４で選択し、その情報が付加データ１５に送られ、そのテーマと合致する付加データが制御部１３に送られる。また、入力部１７で入力されたデータも制御部１３に送られる。制御部１３では、元データに対して付加データ１５と入力データを付加し、表示部１６に表示する。また、制御部１３で付加されたデータは、書き込み部１８により記録媒体１１に書き込まれる。
【００３６】
この場合、テーマインデックス１４でテーマを選択する時、表示部１６でテーマインデックスを表示し、マウスやキーボードで任意のテーマを選択する。また、表示部１６にタッチパネル機能を付加し、タッチパネル上でデータ入力選択を行えるようにしてもよい。また、タッチパネル上で、元データに付加するデータの配置調整等を行えるようにしてもよい。さらに、ペン型入力装置を用いてもよい。
【００３７】
図４は、マルチメディアデータを自動編集する場合の手順を示すフローチャートである。
マルチメディアデータを自動編集するには、図４に示すように、元データを読み込み（＃１）、そのデータに合うテーマをテーマインデックスの中から選択する（＃２）。この場合、選択したテーマに加えて、サブ情報を選択（＃３）してもよい。サブ情報を選択することにより、よりテーマを絞り込むことができる。
上記ステップ１〜３（＃１〜＃３）により、付加データが選択される（＃４）。次に、元データ（動画像）と付加データのデータ再生時間長を比較し（＃５）、元データ（動画像）のデータ再生時間長が付加データのデータ再生時間長よりも長い場合には、付加データの再生時間長を時間的に伸ばし（または繰り返すなどして足し）（＃６）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００３８】
この付加データの再生時間長を伸ばす時、付加データの再生時間長と、元データ全体の再生時間長や、後述する任意点と任意点で区切られるデータの再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を伸長したり、部分データ内の単位データを繰り返すなどして単位データ数を増やしたりすることにより、再生時間割合を調整する。
また、付加データを繰り返して元データに付加したり、足りない時間分、付加データの一部を抜き出して付加したりしてもよい。
【００３９】
一方、元データ（動画像）のデータ再生時間長が付加データのデータ再生時間長よりも短い場合には、付加データの再生時間長を時間的に縮め（または付加データの再生時間長を、後の方で再生される単位データを省くなどして、途中で切り）（＃７）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００４０】
この付加データの再生時間長を縮める時、付加データの再生時間長と、元データ全体の再生時間長や、後述する任意点と任意点で区切られるデータの再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を収縮したり、単体データを部分データ内のある一定割合で間引くことにより、再生時間割合を調整する。
また、付加データの再生時間長の余る部分に割り当てられている単位データを省くなどして切ったり、付加データの一部を抜き出して付加したりしてもよい。
【００４１】
そして、元データと同一のデータ再生時間長となった付加データを、元データに対して付加（合成編集）し（＃８）、編集結果を再生して（＃９）、確認する。
また、元データと付加データの表示時間を合致させなくてもいい場合は、＃５〜＃７の手順を省き、＃４の次は＃８へ進み処理を行ってもよい。
なお、サブ情報とは、テーマをより細かく絞り込み、元データに合致するテーマテンプレートを選択するためのものである。
【００４２】
例えば、図２における「結婚式」テーマで、「神式」「教会式」「人前式」などをサブ情報として選択すると、式の形態にあった付加データテンプレートを選択することができる。また、雰囲気として、「にぎやかに」「おごそかに」「若々しく」「大人っぽく」などからサブ情報を選択すると、よりユーザの好みにあった付加データを選択することができる。さらに、サブ情報の選択によって、付加データの付加割合を変更してもよい。このサブ情報選択によって、編集の精度がより高くなる。
【００４３】
図５は、元データ中の任意点を任意の個数を1以上に予め設定し、その任意点を利用して自動編集を行い、必要ならば複数のシーンを結合する場合の手順を示すフローチャートである。
元データに任意点を予め設定して自動編集を行うには、図５に示すように元データを読み込み（＃１１）、その元データに合うテーマをテーマインデックスの中から選択する（＃１２）。この場合、選択したテーマに加えて、サブ情報を選択（＃１３）しても良い。サブ情報を選択することにより、よりテーマを絞り込むことができる。上記ステップ（＃１１〜＃１３）により、選択したテーマとして用意された部分データの集合が選択される（＃１４）。ここまでの処理は図４に示す処理と同様である。
【００４４】
次に、全ての任意点の設定が完了していない場合（＃１５）、元データ中の任意点を選択する。この処理を全ての任意点の設定が完了するまで繰り返す。
この時、設定する任意点の種類や個数は、選択したテーマに対応する部分データ管理情報で管理される。例えば部分データ管理情報として、部分データを元データに対して合成する合成時間の長さ、合成する座標情報、該部分データが自動的に元データに対して付加されるべきものなのか、ユーザが指定した任意点を基準に付加されるべきものなのかを管理する。また、元データ中の任意点を選択する場合、ユーザにどのような任意点を選択して欲しいのかを示すメッセージを併せて管理する。例えば、徒競走のスタートと言った任意点を選択して欲しい場合は、「徒競走のスタートを選択してください」と言ったメッセージを用意し、ユーザにこのメッセージを提示することによって、元データの中から徒競走のスタート点に対応する任意点を選択可能とする。
なお、全ての部分データを全自動で付加する場合は、設定する任意点の数は０となる。
上記＃１５〜＃１６を踏まえて部分データを元データのどの個所からどの長さだけ付加するか調整され（＃１７）、調整された部分データを元データに対して付加（合成編集）し（＃１８）、編集結果を再生し（＃１９）、内容を確認する。
【００４５】
例えば元データが図８及び図９に示すような場合、テーマとして「運動会」、サブ情報として「徒競走」を選択する。この例では、選択したテーマおよびサブ情報に対応する部分データ管理情報の集合に、4つの部分データが用意されている。徒競走のスタートとゴールの箇所を任意点としてユーザに選択させるように設定されている。ユーザは、「徒競走のスタートを選択してください」というメッセージに従い、元データの中から徒競走のスタートの箇所を選択する。例えば、元データを再生し目的の任意点の個所で一時停止し、選択処理を行うことで選択、あるいは元データから等間隔で抽出したサムネイル画像を一覧表示し、その中から選択してもよい。図８及び図９の例では、最初のグラフィックと最後のグラフィックがそれぞれユーザによって選択された徒競走のスタートとゴールに対応する任意点に部分データ管理情報で管理される合成時間長だけ付加され、２つ目のグラフィックとテキストに関しては、徒競走のスタート点とゴール点の時間の関係より自動的に付加点を決定し管理されている合成時間長だけ付加される。また、スタートとゴール以外の間の部分データ２つを、スタートゴール間に時間的に均等に合成されるように付加してもよい。このような場合は、部分データ管理情報で管理している部分データを元データに合成付加する時間長情報として自動付加を表す情報を管理することになる。
【００４６】
このように、徒競走のスタートとゴールと言った元データ中のキーイベントとなる任意点のみをユーザに指定してもらうことによって自動編集の精度を高めることが可能となる。図の例では自動で付加する部分データはスタートとゴールの間に定義された２つだけであるが、例えばスタート点とゴール点の間や前後に任意の数の部分データを自動付加するようにしてもよい。
ユーザに選択させる任意点は任意の個数でよく、この徒競走の場合であれば、スタート点のみの指定、ゴール点のみの指定、あるいはスタートやゴールと併せて徒競走の中盤も選択するようにしてもよい。更に部分データ管理情報において任意点をユーザ指定してもらうようになっていても、ユーザの指示によってその任意点を選択せずに自動的に付加するようにしてもよい。
【００４７】
また、編集結果確認後、違うシーンを編集するかどうかを選択する（＃２２）。
編集する場合は、ステップ１１（＃１１）に戻り前記フローを繰り返す。
編集しない場合は、他のシーンの結合するかどうかを選択する（＃２１）。他のシーンがない場合やシーンを結合しない場合は、終了する。
【００４８】
他のシーンと結合する場合は、他のシーンとの順序を調整し（＃２２）、複数のシーンを結合する（＃２３）。結合結果を再生し（＃１９）、確認する。その後は、前述の通り、終了するまで繰り返す。
【００４９】
例えば、複数の異なる競技で構成されている運動会の映像を撮った場合は、徒競走、玉入れ、騎馬戦など複数の競技を、それぞれ競技毎のシーンでテーマを選択し、起点、終点、特徴点を付加して個別に編集し、最後に競技の順序に合わせて結合することができる。
シーン毎のテーマに応じて編集し、結合するので、より元データの内容に則した編集をすることが可能となる。
【００５０】
図６、図７は、マルチメディアデータを半自動編集する場合の手順を示すフローチャートである。
マルチメディアデータを半自動編集するには、図６、図７に示すように、元データを読み込み（＃３１）、そのデータに合うテーマをテーマインデックスの中から選択する（＃３２）。この場合、選択したデータに加えて、サブ情報を選択（＃３３）してもよい。サブ情報を選択することにより、よりテーマを絞り込むことができる。
上記ステップ（＃３１〜＃３３）により、付加データが選択される（＃３４）。ここまでの処理は、図４に示す処理と同様である。
【００５１】
その後、選択された付加データに関するテーマ時系列リストが表示される（＃３５）。次に、付加データにおける部分データ単位の再生時間長の調整の有無を判断し（＃３６）、調整が必要な場合には、部分データ単位での削除あるいは追加を選択する（＃３７）。
【００５２】
削除を選択した場合には、部分データ単位の削除を行う（＃３８）。一方、追加を選択した場合には、部分データ単位の追加を行う（＃３９）。ここでの部分データとは、図２で示す「入場」「神父の言葉」「指輪の交換」等の時系例毎の項目に合わせた付加データ中の1イベントのことである。部分データの集合が付加データである。
【００５３】
部分データ単位の削除あるいは追加（＃３８，＃３９）が終了し、あるいは部分データ単位の調整が不必要な場合には、図７に示すように、元データに任意点を用いて区切りを入れるかどうかを選択する（＃４０）。ここで、元データに区切りを入れない場合は、元データと付加データの全体再生時間長を比較し（＃４１）、元データのデータ再生時間長が付加データのデータ再生時間長よりも長い場合には、付加データの再生時間長を伸ばすか、あるいは付加データを繰り返すなどして足して（＃４２）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００５４】
この付加データの再生時間長を伸ばす時、付加データの再生時間長と、元データ全体の再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を伸長したり、部分データ内の単位データを繰り返すなどして単位データ数を増やすことにより、再生時間割合を調整する。
また、付加データを繰り返して元データに付加したり、足りない時間分、付加データの一部を抜き出して付加したりしてもよい。
【００５５】
一方、元データのデータ長が付加データのデータ再生時間長よりも短い場合には、付加データを構成している部分データ内の単位データの表示時間を全体的に縮めるか、または付加データの再生時間長を、付加データを構成する部分データ内の後ろの方に位置する単位データを省くなどして、途中で切り（＃４３）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００５６】
この付加データの再生時間長を縮める時、付加データの再生時間長と、元データ全体の再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を収縮したり、単体データを部分データ内のある一定割合で間引くことにより、再生時間割合を調整する。
また、付加データの再生時間長の余る部分に割り当てられている単位データを省くなどして切ったり、付加データの一部を抜き出して付加したりしてもよい。
【００５７】
このようにして、元データ全体の再生時間長に対して付加データ全体の再生時間長を揃える。
もし、元データと付加データの表示時間を揃えない場合には、データ再生時間長の調整はせずにデータ付加（＃４７）に進む。
【００５８】
また、任意点を用い元データに区切りを入れる場合は、元データの任意の個所に任意の数の任意点を設定して元データを区切り、又は、時系列項目毎に任意点を設定して区切りを入れた後、元データの再生時間長と付加データの再生時間長を、その項目部分ごとに比較する（＃４４）。ここで、元データのデータ再生時間長が付加データの対応部分データのデータ再生時間長よりも長い場合には、付加データの再生時間長を部分的に伸ばすか繰り返すなどして足して（＃４５）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００５９】
この付加データを伸ばす時、付加データの再生時間長と、元データの任意点と任意点で区切られるデータの再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を時間的に伸長したり、部分データ内の単位データを繰り返すなどして単位データ数を増やすことにより、再生時間割合を調整する。
また、付加データを繰り返して元データに付加したり、足りない時間分、付加データの一部を抜き出して付加したりしてもよい。
【００６０】
一方、元データのデータ再生時間長が付加データの対応部分データのデータ再生時間長よりも短い場合には、付加データを構成する部分データ内の単体データの再生時間長を部分的に縮めるか単位データを省くなどして切り（＃４６）、付加データのデータ再生時間長を元データのデータ再生時間長と同じ長さにする。
【００６１】
この付加データの再生時間長を縮める時、付加データの再生時間長と、元データの任意点と任意点で区切られるデータの再生時間長と比較して、付加データを構成している部分データ中の各単体データの表示時間長を時間的に収縮したり、部分データ内のある一定割合で単体データを間引くことにより、再生時間割合を調整する。
【００６２】
また、付加データの再生時間長の余る部分に割り当てられている単体データを省くことで付加データの再生時間長を切ったり、付加データの一部を抜き出して付加したりしてもよい。
このようにして、元データの任意点と任意点で区切られたデータの再生時間長に対して付加データの再生時間長を揃える。
もし、元データと付加データの再生時間長を揃えない場合には、データ再生時間長の調整はせずにデータ付加（＃４７）に進む。
【００６３】
また、元データに任意点を用いてシーン区切りを入れる場合には、図１に示すように、元データの時系列に従って、シーン区切り３を付加して、元データの各イベント２毎に区切っていく。ここでは、２-２、２-３のイベントをシーン区切り３で区切っている。なお、任意点の他に、フラグ、ブックマークを用いることもできる。
【００６４】
また、シーンチェンジではなく、任意に区切りを入れたい個所(例えば運動会競技でのスタートとゴールなど)に、フラグ、もしくはブックマークなどを挿入することも可能である。
なお、「シーン区切り」とは、元データの時系列内容が次へ進む時の前後の区切りであり、ここでは、任意点を設定することによってシーン区切りを表している。
【００６５】
このようにして元データのデータ再生時間長に対して付加データのデータ再生時間長を揃えた後、または、データ再生時間長の調整をしない場合はその後、元データに付加データを付加（合成編集）する（＃４７）。そして、付加データが付加されたデータを再生し（＃４８）、その処理結果に満足するか否かを判断させて（＃４９）、処理結果に満足が得られた場合には処理を終了する。
【００６６】
一方、処理結果に満足が得られなかった場合には、元データに対して付加した付加データにおいて、部分データの順序の不一致があるかどうかを確認し（＃５０）、部分データの順序の不一致が確認された場合には、部分データの順序を入れ替えて（＃５１）、部分データの順番を合わせ、ステップ４７（＃４７）に戻って、元データに付加データを付加(合成編集)し直す。
【００６７】
例えば、図１及び図２において、元データ１と付加データ４を比較してみると、元データのスピーチ２−２、出し物２−４と、付加データのスピーチ５−４、出し物５−３の順序が違っている。これを元データ１の順序に合わせ、付加データの出し物５−３とスピーチ５−４の順序を入れ替える。このような入れ替えを行った結果を図１０に示す。なお、図１では、フラワーシャワー２−１や歓談２−３のように、付加データに存在しないイベントがあるが、これについては後述する。
【００６８】
編集結果に満足が得られず、その原因が部分データの順序の不一致ではない場合には、元データに対して不必要な部分データや足りない部分データがあるか否かを判断し、部分データを差替える（＃５２）。その後、ステップ４７（＃４７）に戻って、元データに付加データを付加（合成編集）し直す。
【００６９】
ここで、ステップ５２（＃５２）の部分データの差し替えについて、図１及び図２を用いて説明する。
図１及び図２において、元データ１と付加データ４を比較すると、元データには、付加データに存在しないフラワーシャワー２−１、歓談２−３があり、付加データには、元データに存在しないお色直し５−１、再入場５−２がある。ここで、付加データを元データに合わせるため、お色直し５−１、再入場５−２を削除し、フラワーシャワー５−５、歓談５−６を追加する。付加データにないイベントを追加する場合には、イベントリストを表示し、その中から任意のイベントを選択できるようにする。この場合、任意のイベントを選択するのには、マウスやキーボード、或いはタッチパネル機能付きの表示装置を用いる。このような付加データの削除、追加を行った結果を図１１に示す。
このように、マルチメディアデータを半自動編集するには、上述した手順を、編集結果に満足を得られ終了するまで繰り返す。
【００７０】
図１２は、テーマなし付加データの一例を示す模式図である。
本実施形態に係るデータ編集装置では、元データの任意点と任意点で区切られたシーンのいずれにも適合するような付加データセット（付加データ１，２）を複数用意し、元データのシーン区切り毎にランダム付加(合成編集)することができる。図１２に示す付加データセットでは、元データの内容や長さに関係なく、全自動でデータの編集を行うことができる。
この時、図５に示すステップ１５（＃１５）以下のような手順で、任意点を用いて、任意点を追加して合成編集してもよい。
前述の任意点は、前述の様々な調整後、それら調整に合わせて座標や時間などの設定が変化してもよい。
【００７１】
図１３は、ビデオカメラにおける操作ＧＵＩの一例を示す説明図である。
本実施形態に係るデータ編集装置でデータ編集を効率よく行う為に、画像撮影機器（ここではビデオカメラ４３）に対して、録画ボタン４２とは別に、任意点付加ボタン４１を設けている。そして、画像撮影最中に特徴を付加したいシーンとなった時に、任意点付加ボタン４１を押すことにより、撮影画像データに任意点を付加することができる。
【００７２】
例えば、図１３に示す画面１では、画像撮影時にシーンの区切り目を付けたい場合に、任意点付加ボタン４１を押すことにより、シーンチェンジマーク付加ウィンドウ４４が表示され、画像データにシーンチェンジマーク（あるいはフラグ）が付加される。このようにシーンチェンジマークを付加することにより、画像編集時にシーン区切りをつける手間が省け、編集が便利になる。
【００７３】
画面２では、画像撮影時に撮影中のシーンのイベント内容を付加することができる。画像撮影前にこれから撮影する画像のテーマを選択しておくと、シーンチェンジ毎に、イベント内容選択ウィンドウ４５が表示されるとともに、このイベント内容選択ウィンドウ４５内にテーマ関連のイベントインデックスが表示され、ユーザはその中から撮影中のシーンに合ったイベント内容を選択することができる。この時、画面がタッチパネル機能を備えている場合には、タッチパネル方式で画面操作をすることができる。また、ペン型入力装置４６を使って操作してもよい。
【００７４】
画面３は、画像撮影中のシーンにグラフィックを付加した例である。画像撮影前に選択したテーマや、シーンチェンジ時に選択したイベント内容によって、撮影中のシーンに即したグラフィック付加ウィンドウ４７が表示されるとともに、このグラフィック付加ウィンドウ４７内にグラフィックインデックスが表示され、ユーザは任意のグラフィックを選択して付加することができる。この時、ペン型入力装置４６を使って、グラフィックの位置を移動させるようにしてもよい。また、この時、グラフィック以外にテキスト、エフェクト、ＢＧＭなどの付加部品データインデックスを表示し、選択できるようにしてもよい。
【００７５】
画面４は、画像撮影時に任意点付加ボタン４１を押した場合に、任意点付加ウィンドウ４８が表示されるとともに、当該シーンに対して任意点マーク４９が付加された例である。
画像撮影機器４３で画像撮影終了後、データ編集装置で前記画像再生中にも、前記図１３の画像撮影機器における操作と同様の操作をすることが可能である。
【００７６】
また、わざわざシーンチェンジ区切りを任意点付加ボタンで付加しなくとも、画像撮影中に一時停止、または撮影停止した点を、シーン区切りと認識してもよい。
さらに、一時停止または撮影停止中に、テーマ関連のイベントインデックスが表示され、ユーザは任意のグラフィックを選択して付加することができてもよい。
【００７７】
任意点付加ボタン４１は、ボタンの押圧度を区別して記録することが可能である。より強調したいシーンではより強くボタンを押し、また、少し強調したいシーンではボタンを弱く押すことにより、押圧の度合が区別される。
【００７８】
図１４は、ビデオカメラ４３における、任意点付加ボタン４１の押圧度と強調度合の関係を示す説明図である。
図１４に示す例では、結婚式を撮影した場合に、そのシーン毎の感動度をボタンの押圧度によって記録している。例えば、フラワーシャワーのシーンでは感動して「８」の強さでボタンを押したのに対し、主賓の挨拶では退屈だったためボタンを押していない。また、一番感動したケーキ入刀と花束贈呈では、最高値の「１０」の押圧度が記録されている。
【００７９】
図１５は、任意点付加ボタン４１の押圧度に対する重要度の関係を示す説明図である。
図１５に示す例では、押圧度１以上３未満の場合には「少し重要」、押圧度３以上６未満の場合には「重要」、押圧度６以上８未満の場合には「かなり重要」、押圧度８以上１０までの場合には「最重要」に分類している。このように分類することにより、編集内容を区別することが可能である。
【００８０】
例えば、「少し重要」に分類されたシーンでは、付加データの表示頻度を少なくし、逆に「最重要」に分類されたシーンでは、付加データの表示頻度を最高にするなどである。
任意点付加ボタン４１のボタン押圧度による区別記録機能は、録画ボタン４２に備わっていてもよいし、画面上で選択可能としてもよい。
【００８１】
本実施形態に係るデータ編集装置における編集結果は、各種の記録媒体に記録して保存することが可能である。記録媒体は、例えばビデオテープ、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、データ編集装置に対して着脱可能とした板状あるいはスティック状のＲＡＭ等を使用することができる。
【００８２】
また、上述した編集作業に合わせて、以下の自動編集機能を加えることも可能である。すなわち、元データにおけるシーンのバックの音色もしくは色調に応じて、編集サブ情報を追加することができる。また、シーンチェンジを手動で行わずに、自動的に一定区間毎に区切りの挿入を行うことができる。また、画像撮影の月日や時刻などで季節感などを判別し、編集サブ情報に追加することができる。さらに、画像認識（顔認識）の機能を用いて、元データに撮影されている人数を把握し、人数に合わせた編集サブ情報を追加することができる。例えば、１人しか認識されなかった場合は、サブ情報が「1人」となり、「１人」のサブ情報が追加されると、付加データの効果の頻度が高くなり、画面の余白が目立たないようにする。また、10人などの大人数が認識された場合は、サブ情報が「大人数」となり、「大人数」のサブ情報が追加されると、付加データの効果頻度が下がったり、テキストが「ワイワイ」「ガヤガヤ」などの大人数の特色をもったものが出てくるようにする、などである。
【００８３】
【発明の効果】
本発明においては、上述した構成を備えているため、元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択して、元データの任意点から任意の長さ付加することができる。
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合である。
したがって、簡単かつ迅速に、元データの内容に即した編集を行うことが可能となる。
【図面の簡単な説明】
【図１】本実施形態に係るデータ編集方法で用いる元データの一例を示す模式図である。
【図２】本実施形態に係るデータ編集方法で用いる付加データの一例を示す模式図である。
【図３】本実施形態に係るデータ編集装置、及びデータ記録装置を示す機能ブロック図である。
【図４】マルチメディアデータを自動編集する場合の手順を示すフローチャートである。
【図５】マルチメディアデータの任意点を予め設定して自動編集を行い、必要ならば複数のシーンを結合する場合の手順を示すフローチャートである。
【図６】マルチメディアデータを半自動編集する場合の手順を示すフローチャートである。
【図７】マルチメディアデータを半自動編集する場合の手順を示すフローチャートである。
【図８】マルチメディアデータの１シーンに起点、終点、任意点を付加した一例を示す模式図である。のち、付加データを付加する。
【図９】図８に示すマルチメディアデータの１シーンに付加した付加データの一例を示す模式図である。
【図１０】付加データに対して部分データ調整を行った後の模式図である。
【図１１】付加データに対して部分データ調整を行った後の模式図である。
【図１２】テーマなし付加データの一例を示す模式図である。
【図１３】ビデオカメラにおける操作ＧＵＩの一例を示す説明図である。
【図１４】ビデオカメラにおける任意点付加ボタンの押圧度と強調度合の関係を示す説明図である。
【図１５】任意点付加ボタンの押圧度に対する重要度の関係を示す説明図である。
【図１６】従来の動画編集システムの一例を示すブロック図である。
【図１７】従来の動画編集システムの他の例を示すブロック図である。
【符号の説明】
１ 結婚式の元データ
２ 元データのイベント（部分データ）
３ シーンチェンジ区切り
４ 結婚式をテーマに用意した付加データ
５ 付加データのイベント（部分データ）
６ グラフィック
７ テキスト
８ エフェクト
９ ＢＧＭ
１１ 記録媒体
１２ 読み取り部
１３ 制御部
１４ テーマインデックス
１５ 付加データ
１６ 表示部
１７ 入力部
１８ 書き込み部
２１ パーソナルコンピュータ
２２ インターネット
２３ 動画編集用サーバ
２４ ユーザ映像管理データベース
２５ 共有映像管理データベース
２６ 編集用テンポラリスペース
２７ ユーザ情報管理データベース
２８ ブラウザプログラム
２９ 動画編集プログラム
３１ 記録媒体
３２ 特徴抽出部
３３ 編集部
３４ 音楽データ蓄積部
３５ 音源部
４１ 任意点付加ボタン
４２ 録画ボタン
４３ ビデオカメラ
４４ シーンチェンジマーク付加ウィンドウ
４５ イベント内容選択ウィンドウ
４６ ペン型入力装置
４７ グラフィック付加ウィンドウ
４８ 任意点付加ウィンドウ
４９ 任意点マーク
Claims (18)
- 元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択して、元データの任意点から任意の長さ付加するデータ編集方法であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、
前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを自動的に付加することを特徴とするデータ編集方法。 - 前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データ全体のデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長の再生区間を調整することを特徴とする、請求項１記載のデータ編集方法。
- 前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データ全体のデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生割合を調整することを特徴とする、請求項１記載のデータ編集方法。
- 前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データにおける所定の任意点と任意点で区切られるデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長を調整することを特徴とする請求項１項記載のデータ編集方法。
- 前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データにおける所定の任意点と任意点で区切られるデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生時間長の再生区間を調整することを特徴とする請求項１記載のデータ編集方法。
- 前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整するにあたって、前記元データにおける所定の任意点と任意点で区切られるデータ再生時間長に応じて、前記付加データ又は前記部分データのデータ再生割合を調整することを特徴とする請求項１記載のデータ編集方法。
- 前記任意点は、前記元データの連続性を区切る点であることを特徴とする、請求項１〜６のうちのいずれか１項記載のデータ編集方法。
- 前記任意点は、前記元データの強調したい点であることを特徴とする、請求項１〜６のうちのいずれか１項記載のデータ編集方法。
- 前記付加データ、又は、前記部分データは、前記任意点の種別によって切り替えられることを特徴とする、請求項７又は８記載のデータ編集方法。
- 前記付加データ又は前記部分データは、予め用意された複数のテーマ毎に時系列順にそれぞれ整理されており、前記元データのテーマに応じて、前記付加データ又は前記部分データを選択することを特徴とする、請求項１〜９のいずれか１項記載のデータ編集方法。
- 前記複数の各テーマには、それぞれサブ情報が用意されており、前記テーマとともにサブ情報を選択することにより、前記付加データ又は前記部分データを絞り込んで選択することを特徴とする請求項１０項記載のデータ編集方法。
- 複数の前記付加データ又は複数の前記部分データをランダムに組み合わせて前記元データに付加することを特徴とする請求項１〜９のいずれか１項記載のデータ編集方法。
- 前記付加データに含まれる部分データの時系列順序を変更可能としたことを特徴とする請求項１〜１２のうちのいずれか１項記載のデータ編集方法。
- 前記付加データは、部分データ単位で追加・削除を可能としたことを特徴とする請求項１〜１３のうちのいずれか１項記載のデータ編集方法。
- 前記元データに対して任意点が設定された場合に、予め用意された時系列内容に応じて整理された部分データ、又は、単体データを示す付加部品インデックスを表示して、該付加部品インデックスに基づいて任意の付加部品を選択可能としたことを特徴とする請求項１〜１４のうちのいずれか１項記載のデータ編集方法。
- 元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択する選択手段と、前記選択した付加データ又は部分データを元データの任意点から任意の長さ付加する付加手段とを備えたデータ編集装置であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、
前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを自動的に付加することを特徴とするデータ編集装置。 - 元データに対して、予め用意された付加データ、或いは予め用意された部分データを選択する選択手段と、前記選択した付加データ又は部分データを元データの任意点から任意の長さ付加する付加手段と、少なくとも前記付加手段を用いて元データに前記付加データ又は前記部分データを付加したデータを記録する記録手段を備えたデータ記録装置であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、
前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを自動的に付加することを特徴とするデータ記録装置。 - 元データに対して、予め用意された付加データ、或いは予め用意された部分データが選択されて、元データの任意点から任意の長さ付加して記録可能な記録媒体であって、
前記付加データは、各種時系列内容に応じて整理された部分データの集合であり、前記部分データは、各種時系列内容に応じて整理された１つ以上の単体データの集合であり、
前記元データのデータ再生時間長に応じて前記付加データ又は前記部分データのデータ再生時間長を調整し、前記元データに対して、前記付加データ又は前記部分データを付加して記録可能であることを特徴とする記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002092267A JP3942471B2 (ja) | 2002-03-28 | 2002-03-28 | データ編集方法、データ編集装置、データ記録装置および記録媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002092267A JP3942471B2 (ja) | 2002-03-28 | 2002-03-28 | データ編集方法、データ編集装置、データ記録装置および記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003289499A JP2003289499A (ja) | 2003-10-10 |
| JP3942471B2 true JP3942471B2 (ja) | 2007-07-11 |
Family
ID=29237143
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002092267A Expired - Fee Related JP3942471B2 (ja) | 2002-03-28 | 2002-03-28 | データ編集方法、データ編集装置、データ記録装置および記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3942471B2 (ja) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006005742A (ja) * | 2004-06-18 | 2006-01-05 | Seiko Epson Corp | 映像演出装置、映像演出方法およびコンピュータプログラム |
| JP4433495B2 (ja) * | 2004-10-27 | 2010-03-17 | 富士フイルム株式会社 | ネットプリント注文受付方法 |
| EP2329353A1 (en) * | 2008-09-11 | 2011-06-08 | Thomson Licensing | Touch panel device |
| WO2012070430A1 (ja) | 2010-11-24 | 2012-05-31 | 日本電気株式会社 | 感性表現語処理装置、感性表現語処理方法および感性表現語処理プログラム |
| US9224033B2 (en) | 2010-11-24 | 2015-12-29 | Nec Corporation | Feeling-expressing-word processing device, feeling-expressing-word processing method, and feeling-expressing-word processing program |
| JPWO2012070429A1 (ja) * | 2010-11-24 | 2014-05-19 | 日本電気株式会社 | 感性表現語処理装置、感性表現語処理方法および感性表現語処理プログラム |
-
2002
- 2002-03-28 JP JP2002092267A patent/JP3942471B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2003289499A (ja) | 2003-10-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4250301B2 (ja) | 映像シーケンスを編集する方法及びシステム | |
| US7352952B2 (en) | System and method for improved video editing | |
| JP4514928B2 (ja) | 編集装置及び方法 | |
| JP4424389B2 (ja) | 動画作成装置、動画作成方法、およびプログラム | |
| JP4125140B2 (ja) | 情報処理装置、情報処理方法ならびにプログラム | |
| US20090240736A1 (en) | Method and System for Creating a Personalized Multimedia Production | |
| JP2004032763A (ja) | ビデオクリップレットを使用してビデオコンポジションを自動的にオーサリングするシステム及び方法 | |
| JP2009105901A (ja) | ビデオ合成を表示するための方法 | |
| KR20040077748A (ko) | 화상 배신 장치 | |
| JP2004064396A (ja) | 画像生成方法および装置並びにプログラム | |
| JP4478566B2 (ja) | マルチメディアデータをリンクするための方法および装置 | |
| JP4343027B2 (ja) | スライドショー作成装置および方法ならびにプログラム | |
| JP2018078402A (ja) | コンテンツ制作装置、及び音声付コンテンツ制作システム | |
| JP2010268195A (ja) | 動画コンテンツ編集プログラム、サーバ、装置及び方法 | |
| JP3942471B2 (ja) | データ編集方法、データ編集装置、データ記録装置および記録媒体 | |
| JP2003283994A (ja) | 動画像合成方法および装置並びにプログラム | |
| JPH11266422A (ja) | 放送番組管理装置、放送番組管理方法、及び放送番組管理処理プログラムを記録した記録媒体 | |
| JP2002142188A (ja) | 動画像編集方法及び装置 | |
| JP2003309815A (ja) | 情報記録媒体及びその生産方法 | |
| JP2003288094A (ja) | 電子アルバムを記録した情報記録媒体及びスライドショー実行プログラム | |
| JP2005167822A (ja) | 情報再生装置及び情報再生方法 | |
| AU745436B2 (en) | Automated visual image editing system | |
| JP2009118117A (ja) | スライドショー作成システム及びスライドショー作成方法並びにスライドショー作成プログラム | |
| JP3814168B2 (ja) | ビデオ編集ソフトウェア及び編集方法 | |
| JP2007243570A (ja) | 画像表示システム及び画像検索システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040728 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20061226 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070109 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070301 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070403 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070403 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100413 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110413 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120413 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120413 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130413 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130413 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |