JP4293128B2 - 記録媒体および素材管理装置 - Google Patents

Description

本発明は、素材をコピーあるいは取り込む際に、検索効率を考慮したデータ構造を構築し、素材を管理する素材管理装置に関する。

従来、放送局の番組制作は、まずカメラレコーダでテープに映像を素材として記録し、その映像をＶＴＲでダビングしながら特殊効果を加えて編集し、編集後の映像、いわゆる完パケをテープに書き戻し、それを送出するという工程からなっている。編集の工程では、所望の映像を見つけるために、まず映像の収められたテープを探して、タイムコードを頼りにテープの早送りや巻き戻しを行っていた。

しかし、ノンリニア編集機の登場により、テープで撮った映像の素材を一旦ハードディスク（ＨＤＤ）にクリップとして取り込んで、ＰＣで編集を行うスタイルが確立されてきている。これにより、ＰＣ内でファイルを検索する感覚で映像を検索することが可能になってきた。たとえば、素材をノンリニア編集機でデジタイズしたクリップのファイルに名前をつけ、適切なフォルダに入れておくと、フォルダをたどっていくか、あるいは名前でキーワード検索することにより所望の映像を見つけることができる。

さらに、光ディスクや半導体メモリ、ＨＤＤなどのランダムアクセス媒体を用いた撮影装置の登場により、このような検索スタイルがカメラレコーダや録画再生機などノンＰＣ機器へ応用されることが予想される。

このような映像検索のスタイルをいち早く確立しているものとして、コンテンツサーバーがある。コンテンツサーバーは膨大な数のデータを、適当なキーワードにより瞬時に検索するもので、特許文献１や特許文献２に記載されたものなどがある。コンテンツサーバーは映像に付随する情報（メタデータ）を専用の形式でデータベース内に格納し、データベースマネージメントシステム（ＤＢＭＳ）というソフトを用いて、メタデータを検索することにより映像の高速な検索を実現している。
特表２００１−５３３４９６号公報 特開２００４−２４６４８０号公報

一方、ランダムアクセスメディアを用いた撮影装置は、不特定の機器に装着して使用する可能性のあるリムーバブルメディアを採用しているという性質上、映像のメタデータをｅＸｔｅｎｓｉｂｌｅ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ（ＸＭＬ）など汎用フォーマットのテキストデータで蓄積し、ＤＢＭＳのような特定のソフトウェアに依存せずに汎用性を保った構造を構築している。そのため、コンテンツサーバーのように高速化や効率化のために最適化されたファイル形式を採用して映像の高速検索を実現することができない。

リムーバブルメディアの大容量化に伴い、格納できる映像の数が増大し、検索に対する要求が増してくることが予想される。しかしながらリムーバブルメディアの記録容量はコンテンツサーバーに比べるとまだまだ小さく、コンテンツサーバーで実現されているのとは異なる簡易な検索方法が要求される。

本願発明はこのような課題に鑑みてなされたもので、汎用性を維持しつつ、リムーバブルメディアで扱う映像数に適した検索機構を実現するためのフォーマットおよび機器を提供することを目的とする。

上記目的を達成するために本発明の素材管理装置は、映像及び音声の少なくともいずれか一方を含むマルチメディアデータ及びマルチメディアデータに関するメタデータのファイルを含んだ素材を外部記録媒体から記録媒体に記録する際に素材をグループ分けして記録する素材記録手段と、記録した素材のメタデータから検索キーを抽出する検索キー抽出手段と、グループ毎に、グループに含まれる素材に対応する検索キーの最小値及び最大値を求めることにより、前記グループ毎の前記検索キーの取り得る値の範囲を示すデータを求め、前記グループ毎の前記検索キーの取り得る値の範囲を示すデータを単一の検索キーデータ中にまとめて記載することにより、前記検索キーデータを作成する検索キーデータ作成手段とを具備する構成としたものである。

本発明の素材管理装置によれば、リムーバブルメディアに格納するのにリーズナブルな数（数百から数千程度）の映像の検索を高速かつ容易に実現できる。

撮影装置等で記録したメディアから他のメディアへ素材をコピーするとき、撮影日や撮影者が同じなど撮影メディアに記録されている素材のデータには偏りがあるため、コピー元のメディアに記録されている素材データごとフォルダを分けてコピーすると、検索用のファイルサイズの抑制および検索時間の高速化を見込むことができる。

また、フォルダ構成をコピー元メディアでのそれと同じにすることにより、コピー元のメディアを読み書きすることができるノンリニア編集機などの機器であれば、特に構成を変更することなく素材記録手段中の映像を扱うことができ、互換性を保つことができる。

以下、図面を参照しながら本発明の実施の形態について説明する。

まず、クリップと素材の概念について説明する。撮影装置で記録した映像、音声等のマルチメディアデータ、これらマルチメディアデータに関するサムネール及びメタデータは、それぞれが素材と呼ばれる。また、映像、音声にサムネールやメタデータなどが関連付けられて記録されている一塊のデータをクリップという。光ディスクや半導体メモリのようなランダムアクセスメディアを記録媒体として用いたカメラレコーダ等の撮影装置で撮影した場合、それらはそれぞれが素材であり、その集合がクリップである。また、テープを記録媒体として用いた撮影装置で撮影した場合、テープに記録されるのは例えば映像、音声及びメタデータ等の素材であり、ノンリニア編集機へのデジタイズ等の操作によってこれにサムネールが追加され、メタデータが加工されてクリップが作成される。このようにして作成されたクリップは、主にノンリニア編集に使用される。なお、サムネールやメタデータは素材に含めないこととする場合もあるが、本実施の形態では便宜上、これらも素材に含めることとする。

本実施の形態では、クリップを撮影したメモリーカード等の記録媒体からノンリニア編集機のハードディクスドライブ（ＨＤＤ）等、別の記録媒体へコピーし、その後コピーした素材（クリップ）を検索することを例にとって説明する。

コピー元の媒体におけるクリップの格納形態を、図１を例に説明する。この媒体のルートディレクトリ（単独の“／”で表される）には、Ｃｏｎｔｅｎｔｓというフォルダが設けられている。Ｃｏｎｔｅｎｔｓの下にはさらに４つのフォルダ、Ｃｌｉｐ、Ｖｉｄｅｏ、Ａｕｄｉｏ、Ｉｃｏｎが設けられている。クリップを構成する各ファイルは、これら４つのフォルダに格納される。Ｃｌｉｐフォルダ１０１はメタデータを格納するフォルダを、Ｖｉｄｅｏフォルダ１０２は映像データを格納するフォルダを、Ａｕｄｉｏフォルダ１０３は音声データを格納するフォルダを、Ｉｃｏｎフォルダ１０４は映像データの代表画像としてのサムネールを格納するフォルダを表す。なおサムネールは、例えば映像データの先頭のフレームを縮小することにより得ることができる。

クリップを構成する各ファイルは、先頭から６文字が同じ名前のファイル名で関連付けられており、その６文字はクリップ名を表す。図１の例において、クリップ名０００００１というクリップは、メタデータファイル０００００１．ｘｍｌ、映像ファイル０００００１．ｍｘｆ、１チャンネル目の音声ファイル０００００１＿１．ｍｘｆ、２チャンネル目の音声ファイル０００００１＿２．ｍｘｆ、サムネールファイル０００００１．ｂｍｐで構成されている。このようにすることで、ファイル名の一部を見ることにより、異なるフォルダに格納されていても、同一のクリップに含まれるファイルがどれであるかを識別することができる。

なお、ここではクリップの関連付けをファイル名の先頭６文字としたが、文字数は何文字でも良い。また、クリップごとにフォルダを分け、それをひとつの単位として管理するなど他のフォルダ構成でも同様に処理できる。

図２は、本発明の素材管理装置の構成を示した図である。素材管理装置２００は、内蔵する記録媒体としてのメディア２１２にデータを記録する記録過程と、記録したデータを検索する検索課程の大きく二つの処理を行う。

記録過程は、素材記録手段２０１と検索キー抽出手段２０２と検索キーデータ作成手段２０３とによって行われる。この過程では、素材管理装置２００の外部から素材の入力を受け、素材記録手段２０１がメディア２１２に素材をコピーして記録すると共に、検索キー抽出手段２０２がメディア２１１中のメタデータから検索キーを抽出し、検索キーデータ作成手段が検索キーから検索キーデータを作成してメディア２１２に記録する。

検索過程は、検索条件入力手段２０４とグループ特定手段２０５と素材特定手段２０６とにより構成される。この過程では、検索条件入力手段２０４が素材管理装置２００の外部から素材やクリップを特定するための検索条件を受け、グループ特定手段２０５が記録過程で記録した検索キーデータをもとに素材やクリップの含まれるグループを検索し、さらに素材特定手段２０６がそのグループ内から素材やクリップの検索を行い、その検索結果を返す。

以下、図１の３つのクリップ０００００１、０００００２、０００００３を、本発明の素材管理装置２００によってメディア２１２にコピーする記録過程を図２を用いて説明する。なお、クリップ０００００１、０００００２、０００００３は外部記録媒体としてのメディア２１１に記録されていることとし、コピー先である記録媒体としてのメディア２１２にはすでに０００１フォルダが存在するものとする。

まず、メディア２１１中のクリップを素材記録手段２０１が読み取り、メディア２１２へコピーする。また、検索キー抽出手段２０２がメディア２１１中のメタデータからクリップの検索キーを抽出する。検索キーデータ作成手段２０３は、抽出された検索キーから検索キーデータを作成してメディア２１２に記録する。

素材記録手段２０１は、クリップをメディア２１２にコピーする際、コピーするクリップをコピー元のメディア単位でグループ分けしてメディア２１２に記録する。まず素材記録手段２０１は、メディア２１２上で新規にメディア２１１のクリップを格納するためのフォルダを作成する。ここでは０００１フォルダがすでにメディア２１２上に存在しているため、０００２フォルダを作成する。そして、コピー元メディア２１１上のＣｏｎｔｅｎｔｓフォルダ以下の全クリップをコピー先メディア２１２の０００２フォルダへコピーする。その結果、同一の記録媒体であるメディア２１１に記録されているクリップは同一のグループにグループ分けされてメディア２１２内の対応するフォルダにコピーされ、メディア２１２には図３のようにファイルが配置される。図３はコピー元が同一メディアにあった０００１というグループと０００２というグループにグループ分けされて、フォルダ分けされている。そして、メディア２１１のＣｏｎｔｅｎｔｓフォルダ以下の内容が、メディア２１２の０００２フォルダ以下にフォルダ構成を保った状態でコピーされている。

なお、素材記録手段２０１がコピーするフォルダの名前は０００２でなくても既存のフォルダと重複しないものなら別の名前でも良い。また、グループの分け方としてコピー元のメディアごとに分けたが、検索の効率面から日付や撮影者などの検索キーを単位に分けても良い。複数のキーを使用する場合などはフォルダの下にさらにフォルダを作成するなど、フォルダの階層を深くしても良い。また、メディア中の特定のクリップや素材のみをコピーする場合でも同様の処理を行えばよい。

次に、検索キーデータ（図３ではＫｅｙＤａｔａ．ｘｍｌに格納）を作成する過程を説明する。検索キー抽出手段２０２は、メディア２１２にコピーしたクリップを素材記録手段２０１から取得し、そのクリップのメタデータから検索キーとなる作成時間、開始タイムコード、撮影者、撮影場所を抽出する。図４は、３つのクリップのメタデータの内容を示した図である。メタデータはＸＭＬ構造で記録されている。ＣｌｉｐＣｏｎｔｅｎｔは、クリップ全体を表し、ＣｌｉｐＮａｍｅはクリップの名前を、ＣｒｅａｔｉｏｎＤａｔｅはクリップの作成時間を、Ｔｉｍｅｃｏｄｅはクリップに含まれる映像及び音声の開始タイムコードを、Ｓｈｏｏｔｅｒはクリップの撮影者（作成者）を、Ｌｏｃａｔｉｏｎはクリップの撮影場所をそれぞれ表す。

図４のようにクリップ０００００１、０００００２、０００００３のメタデータがそれぞれメタデータ２２１、２２２、２２３であるとき、これらから抽出される作成時間はそれぞれ（２００４−１０．２０Ｔ１２：００：００、 ２００４−１０．２０Ｔ１２：１０：００、２００４−１１．０１Ｔ１２：００：００）である（これらはそれぞれ２００４年１０月２０日１２：００：００、２００４年１０月２０日１２：１０：００、２００４年１１月１日１２：００：００を表す）。同様に開始タイムコードとして（００：００：００：００、００：１０：００：００、００：２０：００：００）、撮影者として（ｓａｔｏｈ、ｓａｔｏｈ、ｓｕｚｕｋｉ）、撮影場所として（Ｔｏｋｙｏ、Ｔｏｋｙｏ、Ｏｓａｋａ）をそれぞれ抽出する。括弧内の３項目は前から順にクリップ０００００１、０００００２、０００００３に対応している。

検索キーデータ作成手段２０３は、これらの検索キーから検索キーデータを作成する。具体的には、同一のフォルダに格納されたクリップの中で、撮影時間および開始タイムコードの数値データは最小値と最大値とを求め、撮影者、撮影場所のテキストデータは重複を取り除く処理を行い、それぞれを検索キーデータファイルへ書き込む。図４のメタデータから抽出した検索キーからは、次のような検索キーデータが作成される。すなわち、フォルダ０００２における撮影時間の最小値は２００４−１０．２０Ｔ１２：００：００、最大値は２００４−１１．０１Ｔ１２：００：００、開始タイムコードの最小値は００：００：００：００、最大値は００：２０：００：００、撮影者はｓａｔｏｈ、ｓｕｚｕｋｉの二者、撮影場所はＴｏｋｙｏ、Ｏｓａｋａの二箇所がそれぞれ作成される。

このデータは検索キーデータとして図５に図示する形式でメディア２１２のルートディレクトリに記録される。検索キーデータはＸＭＬ構造で記録され、大きくＧｒｏｕｐ要素で区切られる。Ｇｒｏｕｐ要素はグループ分けしたデータ（本例では、コピー元のメディアごとにグループ分けされている）を表し、ｆｏｌｄｅｒ属性はその素材が格納されているフォルダ名を示す。０００２フォルダの場合は、ｆｏｌｄｅｒ＝”０００２”と記述される。Ｇｒｏｕｐ要素下のＣｒｅａｔｉｏｎＤａｔｅ要素及びＴｉｍｅｃｏｄｅ要素中のＦｒｏｍ要素はそれぞれ抽出した検索キーのうち撮影時間の最小値２００４−１０．２０Ｔ１２：００：００およびタイムコードの最小値００：００：００：００を、Ｔｏ要素は同様に撮影時間の最大値２００４−１１．０１Ｔ１２：００：００およびタイムコードの最大値００：２０：００：００を示す。Ｓｈｏｏｔｅｒ要素、Ｌｏｃａｔｉｏｎ要素はそれぞれｐｅｒｓｏｎ要素（ｓａｔｏｈ、ｓｕｚｕｋｉ）とｎａｍｅ要素（Ｔｏｋｙｏ、Ｏｓａｋａ）で検索キーに対応する値を列挙している。図５においてはｐｅｒｓｏｎ要素として、抽出した検索キーから撮影者データであるｓａｔｏｈ及びｓｕｚｕｋｉが列挙され、ｎａｍｅ要素として、撮影場所データであるＴｏｋｙｏ及びＯｓａｋａが列挙されている。

なお、ここでは検索キーデータの形式をＸＭＬとしたが、ＣＳＶ（Ｃｏｍｍａ Ｓｅｐａｒａｔｅｄ Ｖａｌｕｅｓ）などのほかのテキスト形式でも良いし、ＫＬＶ（Ｋｅｙ−Ｌｅｎｇｔｈ−Ｖａｌｕｅ）などのバイナリ形式でも良い。また、メタデータとして撮影時間、撮影者、撮影場所、タイムコードを例に取ったが、番組名やクリップ長などテキストや数値で表されるものであれば良い。また、検索キーデータの格納場所はルートディレクトリに限らず、メディア２１２内であればどこに記録しておいてもよい。

なお、コピー先の記録媒体は素材管理装置２００に内蔵のメディア２１２としたが、リムーバブルメディアに記録するようにしてもよいし、外付けの記録装置に対して記録するようにしてもよい。

以上により、図３に示すようにコピー元のメディアごとにグループ分けしてフォルダに格納したクリップと、グループごとに集計した検索キーデータファイルとを記録したフォルダ構成を持つメディアができる。

次に、図５に示す検索キーデータを用いて素材を検索する過程を、図２を用いて説明する。

検索条件入力手段２０４はユーザからの検索条件の入力を受け付ける。たとえば、作成日２００４年１０月、かつ、撮影者ｓａｔｏｈというような条件を受け付ける。

グループ特定手段２０５は、媒体２１２に格納されている検索キーデータから検索条件に合うグループを検索し、そのグループを格納したフォルダを出力する。図５の検索キーデータによると、ｆｏｌｄｅｒ属性が０００１とｆｏｌｄｅｒ属性が０００２のＧｒｏｕｐ要素の作成日時情報（ＣｒｅａｔｉｏｎＤａｔｅ要素）は、それぞれ２００４−１０−１８Ｔ１１：５０：４７〜２００４−１０−２１Ｔ１２：００：００（２００４年１０月１８日１１:５０:４７から２００４年１０月２１日１２：００：００）、２００４−１０−２０Ｔ１２：００：００〜２００４−１１−０１Ｔ１２：００：００（２００４年１０月２０日１２：００：００から２００４年１１月１日１２：００：００）であるので、ともに２００４年１０月を含んでおり、フォルダ０００１、フォルダ０００２ともに２００４年１０月に合致するクリップを含む可能性がある。一方、撮影者情報（Ｓｈｏｏｔｅｒ要素）にｓａｔｏｈを含むものはフォルダ０００２のみであるので、検索条件に合致するものはフォルダ０００２に存在することが特定される。

素材特定手段２０６は、グループ特定手段２０５で特定されたグループのフォルダ０００２に格納されているクリップのメタデータから検索条件に合うクリップを探し出す。図４のメタデータ２２１から２２３に対して、ＣｒｅａｔｉｏｎＤａｔｅ要素とＳｈｏｏｔｅｒ要素がそれぞれ２００４年１０月、ｓａｔｏｈに合うか調べ、条件に合うものとしてクリップ０００００１とクリップ０００００２を見つける。

さらに検索条件入力手段により条件を絞り込むことも可能である。

なお、本実施の形態では、コピー元が半導体メモリ等のランダムアクセスメディアであり素材のメタデータがオーディオやビデオとは別のファイルとして抜き出されていることを想定したが、たとえばコピー元の記録媒体がテープであるときは、メタデータが別ファイルとして構成されていないような素材が入力される場合もある。このときは、たとえばＵＭＩＤ（Ｕｎｉｖｅｒｓａｌ Ｍａｔｅｒｉａｌ Ｉｄｅｎｔｉｆｉｅｒ ＳＭＰＴＥ３３０Ｍ参照）のうちの日時、場所、人などで構成される拡張ＵＭＩＤなどのビデオデータのフレーム毎に埋め込まれているメタデータを用いて検索キーデータの抽出を行っても良い。このときの検索キー抽出手段２０２は、まず先頭のビデオデータに多重されているタイムコードとＵＭＩＤを抽出し、検索キーとなる作成時間、開始タイムコード、撮影者、撮影場所などを抽出するようにすればよい。

本発明は、リムーバブルメディアに格納するのにリーズナブルな数の映像の検索を高速かつ容易に実現できるため、ランダムアクセスメディアに記録された素材を編集作業などにおいて検索するための素材管理装置等にも適用可能である。

コピー元のメディアのフォルダ構成を示した図 本発明の素材管理装置の構成を示した図 コピー後のフォルダ構成を示した図 クリップのメタデータの内容を示した図 検索キーデータの内容を示した図

符号の説明

１０１ Ｃｌｉｐフォルダ
１０２ Ｖｉｄｅｏフォルダ
１０３ Ａｕｄｉｏフォルダ
１０４ Ｉｃｏｎフォルダ
２００ 素材管理装置
２０１ 素材記録手段
２０２ 検索キー抽出手段
２０３ 検索キーデータ作成手段
２０４ 検索条件入力手段
２０５ グループ特定手段
２０６ 素材特定手段
２１１ コピー元メディア
２１２ コピー先メディア
２２１ クリップ名０００００１のメタデータ
２２２ クリップ名０００００２のメタデータ
２２３ クリップ名０００００３のメタデータ

Claims (3)

1. 映像及び音声の少なくともいずれか一方を含むマルチメディアデータ及び前記マルチメディアデータに関するメタデータのファイルを含んだ素材を外部記録媒体から記録媒体に記録する際に前記素材をグループ分けして記録する素材記録手段と、
   前記記録した素材のメタデータから検索キーを抽出する検索キー抽出手段と、
   前記グループ毎に、前記グループに含まれる素材に対応する検索キーの最小値及び最大値を求めることにより、前記グループ毎の前記検索キーの取り得る値の範囲を示すデータを求め、前記グループ毎の前記検索キーの取り得る値の範囲を示すデータを単一の検索キーデータ中にまとめて記載することにより、前記検索キーデータを作成する検索キーデータ作成手段とを具備する素材管理装置。
2. 前記素材記録手段は、前記素材のメタデータに基づいてグループ分けする、請求項１記載の素材管理装置。
3. ユーザからの検索条件の入力を受け付ける検索条件入力手段と、
   前記検索条件に応じて前記検索キーデータを検索することにより、前記検索条件に合致する前記素材が含まれるグループを特定するグループ特定手段と、
   前記特定したグループから前記素材のメタデータを参照して検索条件に合致する前記素材を検索する素材特定手段とを具備する請求項１及び２のいずれかに記載の素材管理装置。

Images