JP4980697B2 - ネットワーク環境におけるメディアコンテンツを編集する方法及びメディアデータのキャッシュストレージのための装置 - Google Patents

Description

本発明は、ネットワーク環境におけるメディアコンテンツのポストエディティング（post-editing）の技術分野に関する。メディアコンテンツは、スライドショウ、電子書籍又は他の大容量のテキスト又はグラフィックドキュメントのような、オーディオ／ビデオコンテンツ及びコンピュータ生成されたコンテンツを意味すると理解される。

スタジオエンジニアリングの領域では、サーバテクノロジとして知られているのは、一層大きなエントランスを作ることである。作製されるオリジナルマテリアルは、主として磁気テープでもはや記録保存されない。このことは、ビデオサーバ及びオーディオサーバのようなサーバ装置として知られているもの使用して益々行われており、このビデオサーバ又はオーディオサーバは、大容量のハードディスクでオリジナルのデータストリームを記憶する。

前もって、オリジナルマテリアルは、適切な取り外し可能なハードディスク／磁気テープドライブが設けられた主としてスタンドアロンのコンピュータシステムを使用してポストエディティングされている。ストリーミングサーバテクノロジのスタジオへのエントリは、個々のサーバ装置での互いへネットワーク化、及びポストエディティング用のコンピュータへのネットワーク化を伴う。今日、パワフルなネットワークシステムがネットワーキングのために利用可能である。光ファイバ又は銅線のいずれかを使用したイーサネット（登録商標）技術に基づいたネットワークは、今日、１０ＧＢまでの伝送レートで利用可能である。

スタジオにおけるポストエディティング、又はコミュニケーションプロダクションの間のポストエディティングに対するサーバベースのアプローチは、オリジナルマテリアルのより広範な可用性、オリジナルマテリアルへの即座のアクセス、良好な技術品質等の様な様々な利点を有し、それゆえ継続される。

文献ＵＳ−Ａ−２００２／０１１６７１６は、オンラインビデオポストエディティングシステムを開示しており、メディアコンテンツからのオリジナルデータを記憶する一連のサーバ装置は、互いにネットワーク化される。また、このサーバシステムは、インターネットを介して外部からアクセス可能である。インターネットに接続されるコンピュータは、サーバシステムにアクセスし、そこに記憶されるオリジナルデータに基づいて彼自身のメディアコンテンツを作成するためにユーザにより使用することができる。このため、編集リストとして知られているのは、サーバシステムにインターネットにより送信される外部コンピュータで生成され、そこで評価され、次いで適切に複雑にされたメディアデータストリームを伝達するために使用される。アプリケーションサーバは、編集リストを記憶し、それらを再生に応じて処理するためにサーバシステムで提供される。

たとえば、ビデオオンデマンドシステムといった、ビデオサーバ技術の従来の使用の領域から、インターネット技術に基づいて、リアルタイムトランスポートプロトコルＲＴＰ及びリアルタイムストリーミングプロトコルＲＴＳＰを使用して、サーバからクライアントに等時性のデータストリームを送信することは、知られている実用例である。この点で、K.Shroder; H.Gebhardtによる文献“Audio/Video Streaming using IP (Internet Protocol)” in Fernseh- und Kinotechnik, volume 54, No.1 − 2/2000に対して引用がなされる。
ＵＳ−Ａ−２００２／０１１６７１６ K.Shroder; H.Gebhardtによる文献"Audio/Video Streaming using IP (Internet Protocol)" in Fernseh- und Kinotechnik, volume 54, No.1 − 2/2000

メディアコンテンツをポストエディティングするとき、大きな重要性は、特にビデオフィルムのケースでのカットエディティングに属する。典型的に、カットエディティングのプロセスは、粗いカットと細かいカットが比較的頻繁に互いに生じる連続的なプロセスであり、このことは、ビデオコンテンツのセクションがネットワークを介してカット編集装置に繰返し送信される必要があることを意味する。重要なことは、カット位置が個々のフレーム精度で生成され、適切かつ乱れがない場合に遷移が平滑になされることである。広く多様なソースを利用するドキュメントの一部を編集するとき、問題は、特別のものとなる。

本発明の目的は、オーディオ／ビデオコンテンツの同一又は類似のセクションの頻繁な送信の結果として、ネットワークへの負荷を低減することにある。
本発明は、独立の請求項１及び１０に基づく手段によりこの問題を解決する。本発明と調和して、ネットワーク環境において、特にオーディオ及び／又はビデオアーティクルといったメディアコンテンツを編集する方法のケースでは、サーバ装置と編集装置との間のデータ経路は、編集装置による高速検索の目的でロードされるセクションの開始及び終了の前後でメディアコンテンツの一部をバッファで記憶するキャッシュストアを含む。また、キャッシュストアは、用語「キャッシュメモリ」で知られる。ロードされるセクションの開始及び終了前後のこれら重要な通路のバッファストレージは、ネットワーク環境においてビデオコンテンツの多数の繰返しが回避されるのを可能にする。１実施の形態では、キャッシュストアは、実際の編集装置の一部である場合がある。

従属の請求項で提供される措置は、本発明の方法の開発及び改善を可能にする。リアルタイムトランスポートプロトコルＲＴＰは、ネットワークにおけるデータの転送に適しており、リアルタイムストリーミングプロトコルは、様々なセクションの伝送を制御するために使用することができる。両方のプロトコルは、データストリームのリアルタイム送信に適している。

編集装置は、新たな構成のため、たとえばカットリストといった、編集リストとして知られるリストを作成して記憶する。このように編集されたアーティクル（article）を再生するため、ＲＴＳＰコマンドが新たなコンポジション（composition）におけるそれぞれのデータセクションについて生成されるように、編集リストが処理される場合に有利である。次いで、このＲＴＳＰコマンドは、ＲＴＰを使用して所望のデータを伝送するサーバ装置に通過される。

データセクションの開始及び終了は、タイムステートメントにより、特にオーディオ及びビデオ領域といったメディア領域で特徴づけされる。ＲＴＳＰコマンドで示される“Ｒａｎｇｅ”パラメータがＳＭＰＴＥタイムコマンドでのデータセクションの開始時間及び終了時間である場合に有利である。これにより、データを個々のフレーム精度で特徴づけすることができる。

要求されたセクションの開始及び終了の前後でデータセクションを緩衝記憶する目的のため、セクションの要求のためのそれぞれのＲＴＳＰコマンドが評価され、セクションの開始及び終了のためにそれらが含むタイムステートメントは、要求されたセクションの開始及び終了の少なくとも前後でメディアコンテンツの重要な部分の再ロードに関連する新たなＲＴＳＰコマンドを生成するための基礎として利用される。これにより、再ロードプロセスが十分に自動化されるのを可能にする。特に関連する時間の前後での数秒といった特定の周期が規定される場合に有利である。

スタジオ領域において、品質の損失が許容される必要がないように、データが圧縮された形式で送信可能なことが望ましい。本明細書で記載される方法は、制限されることなしにプロキシファイルを使用して公知の実施に適用することもできる。プロキシファイルを使用するとき、圧縮されたオリジナルファイルのバージョンは、より大きなリソースの節約で動作することができるために使用される。圧縮されたファイルに基づいて作成されるカットリストは、マスタリングの間に圧縮されていないオリジナルファイルに適用される。

また、本発明は、ネットワーク環境におけるメディアコンテンツを編集する方法のための、メディアコンテンツを緩衝記憶するための装置に関する。この装置について、本発明は、要求されたセクションの開始及び終了の前後で要求されたメディアコンテンツの一部を緩衝記憶するキャッシュストアを有する点を提供する。かかる装置の他の有利な利点は、従属の請求項１１乃至１５に記載されている。
本発明の例示的な実施の形態は図面で例示され、以下の記載で更に詳細に説明される。

図１では、参照符号ＲＳＡ、ＲＳＢ及びＲＳＣは、プロトコルＲＴＰ及びＲＴＳＰの実現を含む３つの異なるサーバ装置を示している。これらサーバ装置は、たとえばカメラにより記録されるビデオマテリアル又はオーディオマテリアルといった開始マテリアルを記憶する。参照符号ＶＦ１は、第一のビデオドキュメントを示し、これに応じて参照符号ＶＦ２及びＶＦ３は、第二及び第三のビデオドキュメントを示す。さらに、図１は、オーディオドキュメントが記憶されるのが可能なことも示している。例示を通して、サーバ装置ＲＳＣは、オーディオドキュメントＡＦ１を記憶し、サーバ装置ＲＳＡは、オーディオドキュメントＡＦ２を記憶する。個々のサーバ装置は、ネットワークにより互いに接続される。ネットワークＧＥは、１０ＧＢのイーサネット（登録商標）ネットワークのような高速ネットワークである。ネットワークＧＥは、それに接続されるポストエディット装置ＥＡ及びＥＢを有する。このケースでは、図は、第二のポストエディット装置ＥＢが高速伝送リンクによりネットワークＧＥに無線で接続されており、かかるネットワークのアクセスポイントは、図１におけるＷＬＡＰにより識別される。伝送システムＷＩＦＩは、たとえばこれに適している。

それぞれのポストエディット装置は、ネットワークＧＥを介して個々のサーバ装置ＲＳＡ〜ＲＳＣに記憶されるデータへのアクセスを有する。かかるポストエディット装置について、ドキュメント毎のオーディオマテリアル及びビデオマテリアルの非破壊的な、非線形のポストエディティングを可能にするアプリケーションが知られており、編集リストが作成される。

このケースでは、編集リストは、関連されるデータコンテンツを含む、それ自身をもたない新たなコンポジションである。記録されたビデオ及び／又はオーディオマテリアルは、サーバ装置でのオリジナルコンテンツで記憶されたままである。ポストエディティング装置では、ユーザは編集リストを生成し、シンプルなケースでは、たとえば以下のエントリを含む場合がある。

時間Ｔ＝０で、ポジションｔｖ＿１からポジションｔｖ＿２へ、ＲＴＰサーバＡでビデオファイルＶＦ１のセクションを再生する。
時間Ｔ＝０で、ＲＴＰサーバＲＳＣで記憶されているオーディオファイルＡＦ１のセクションを再生する。
時間Ｔ＝ｔｖ＿２で、ポジションｔｖ＿３からポジションｔｖ＿４へ、ＲＴＰサーバＲＳＢでビデオファイルＶＦ２のセクションを再生する。

この編集リストは、図１における参照符号ＣｏｍｐＡにより識別されるコンポジションを記述するために使用される。コンポジションは、タイムラインの形式で示されている。

コンポジションＣｏｍｐＢの編集リストの第二の例は、以下のエントリを有する。
時間Ｔ＝０で、ポジションｔｖ＿５からポジションｔｖ＿６へ、ＲＴＰサーバＲＳＣでビデオドキュメントＶＦ３のセクションを再生する。
時間Ｔ＝０で、ポジションｔａ＿３からポジションｔａ＿４へ、ＲＴＰサーバＲＳＡに記憶された、オーディオドキュメントＡＦ２のセクションを再生する。

コンポジションＣｏｍｐＢは、図１に同様に示される。それぞれの編集装置における再生について、この方式で構成される各アーティクルは、ネットワークを介して関連されるサーバ装置に送信される個々のＲＳＴＰコマンドに適切なソフトウェアプログラムにより変換される。このケースでは、編集リストにおけるタイムステートメントは、データが個々のフレーム精度で送信することができるように、時間：分：秒：フレーム番号の形式でＳＭＰＴＥタイムフォーマットに基づいて示されることが好ましい。ＲＴＳＰプロトコル自身は既知であり、これは、このプロトコルの詳細が以下で説明される必要がないことを意味する。幾つかのＲＴＳＰコマンドは、セッション、リクエストデータの初期化、及びその後の応答について規定される。以下のテキストは、ＲＴＳＰセッションが構成されており、存在することが想定されている。コンポジションＢの編集リストにおける第一のエントリについて、関連されるＲＴＳＰプレイバックリクエストは、以下の外観を有する。

このコマンドの第一のラインは、ＲＴＰサーバＲＳＣでのビデオドキュメントＶＦ３のＵＲＬを含む。第二のラインＣ−Ｓｅｑｕｅｎｃｅ：２におけるステートメントは、リクエスト装置により割り当てられるシーケンス番号の指示に関連する。第三のラインは、セッションの識別番号を含み、次いで第四のラインは、ビデオドキュメントＶＦ３が再生されることが意図されるＳＭＰＴＥフォーマットにおける２つのタイムステートメントをもつレンジ“Ｒａｎｇｅ”パラメータを含む。

コンポジションＢを編集している人物は注釈トラックを彼のコンポジションに挿入しており、これは、サーバ装置に記憶することもできる。これは、ＲＴＳＰコマンド“Ｒｅｃｏｒｄ”を使用して行うことができ、注釈テキストは、音のための更なる記録トラックとして記録することができる。

図２は、ネットワークＧＥにより接続される３つのストリーミングサーバ装置ＲＳＡ〜ＲＳＣのアレンジメントを示している。編集装置ＥＡは、同様にネットワークＧＥに接続され、メディアコンテンツを緩衝記憶するための装置ＣＳは、編集装置ＥＡとネットワークＧＥとの間でアレンジされる。本発明と調和して、緩衝記憶のための装置ＣＳは、ネットワークＧＥがメディアコンテンツの繰返しの送信が緩和されるために使用されることが意図される。これは、キャッシュメモリアレンジメント又はプロキシサーバにおけるように、メディアコンテンツの頻繁に繰り返されるセクションを準備が整った状態に保持するように行われる。

このケースにおける１つの問題は、頻繁に必要とされるメディアコンテンツがどのように識別されるかについてのルールを規定することである。この状況において、本発明は、編集装置により要求されているメディアコンテンツのセクションの開始及び終了の前後の領域が予防策としてキャッシュストレージＣＳのために装置に再ロードされる経路を採用する。このため、装置は、編集装置からサーバ装置に送出されるＲＴＳＰコマンドを評価する。実験は、新たなコンポジションが記録された開始マテリアルの個々のセクションの編集を含む。新たなビデオコンポジションのケースで要求される個々のフレーム精度によるカットの境界は、先に記載されたように、少しずつ正確に規定されることがある。したがって、本発明と調和して、編集されるべきメディアドキュメントのそれぞれのセクションについて、メディアドキュメントのそれぞれ考慮されるセクションの境界前後の領域は、予防策としてキャッシュストアＣＳに転送される。これら境界の領域は、図１におけるグレイスケールのパターンによりそれぞれ識別される。特別の図は、オーディオドキュメントＡＦ１について示されている。これは、そのケースにおいて図示されるデータセクションの中心からのエリアは時間ｔａ＿１と時間ｔａ＿２との間でバッファストアＣＳに同様にロードされるためである。オーディオセクションと並列に再生される２つのビデオセクションについて、キャッシュストレージの条件はオーディオセクションの再生の間に合致し、オーディオセクションの中心からの関連する部分もバッファ記憶される。

関連するデータセクションは、ＲＴＳＰプロトコルを使用してバッファストアＣＳに再ロードされる。このケースでは、極限値の前後のどのエリアが要求される必要があるかを定義することが可能である。１つの実現は、ストリーミングサーバからそれぞれの極限値の前及び後の数秒に関連するエリアを供給することを含む場合がある。例となる値は、たとえば、要求されたデータセクションのそれぞれの開始、終了の前及び後の値５秒である。

編集装置ＥＡにより頻繁に要求されるエリアを送信するため、ちょうど１つのそれぞれのデータストリームがメモリＣＳと編集装置ＥＡとの間で要求される。ネットワークＧＥの残りは、このデータトラフィックの開放されたものである。

バッファストアは、ＨＴＴＰ要求（ＨＴＴＰプロキシ）をバッファ記憶するための公知の方法に類似のやり方で、ＲＴＳＰコマンドを扱うことができる。このケースでは、編集装置からの全ての要求は、傍受、解釈及び送出される。送出された要求は、本明細書で記載された方法と調和して修正される。
別の実現では、バッファストアアレンジメントは、編集装置ＥＡに統合することができる。

複数のサーバ装置及び２つの編集装置を有するネットワークシステムを示す図である。 複数のサーバ装置及び編集装置、並びにサーバ装置に記憶され、ポストエディットのための特定の重要性からなるメディアコンテンツの一部をバッファ記憶するアップストリーム装置を示す図である。

符号の説明

ＲＳＡ，ＲＳＢ，ＲＳＣ：ストリーミングサーバ
ＧＥ：高速ネットワーク
ＣｏｍｐＡ：コンポジション
ＥＡ，ＥＢ：編集コンピュータ
ＣＳ：緩衝記憶（バッファリング）装置
ＷＬＡＰ：ネットワークアクセスポイント

Claims (11)

1. ネットワーク環境で、特にオーディオコンテンツ及び／又はビデオコンテンツといったメディアコンテンツを後編集する方法であって、
   前記メディアコンテンツは複数のサーバ装置に記憶され、前記メディアコンテンツのデータセクションは前記ネットワークを介して編集装置にロードされ、
   前記編集装置は、前記データセクションをロードするためのメッセージを要求し、メディアコンテンツのデータセクションを示す新たなコンポジションを記述し、前記複数のサーバ装置に送出するための編集リストが作成され、
   第一のデータセクションは、最初に再生され、続いて第二のデータセクションが連続して再生され、前記第一及び第二のデータセクションの再生と並行して第三のデータセクションが再生され、
   前記第三のデータセクションは、前記第一及び第二のデータセクションの再生の開始時間と終了時間により定義される時間よりも長い、同じタイムラインに沿った期間を定義する再生の開始時間及び終了時間を有しており、
   前記複数のサーバ装置と前記編集装置との間のデータ経路は、キャッシュストア装置を含み、
   編集されるべき前記第一、第二及び第三のデータセクションのそれぞれの開始及び終了の前後の前記メディアコンテンツの前記第一及び第二のデータセクションの一部及び前記第三のデータセクションの一部は、高速な検索のために前記キャッシュストア装置にロードされ、
   前記第三のデータセクションの前記一部とは異なる前記第三のデータセクションの更なる部分は、前記キャッシュストア装置にロードされ、前記更なる部分は、前記第一のデータセクションの終了時間と前記第二のデータセクションの開始時間とにより定義され、前記更なる部分の制限時間は、前記第一のデータセクションの終了時間と前記第二のデータセクションの開始時間との前後により前記キャッシュストア装置により定義され、前記キャッシュストア装置は、前記一部をロードするために前記メッセージを傍受及び解釈する、
   ことを特徴とする方法。
2. 前記ネットワーク環境で、前記メディアコンテンツの前記第一、第二及び第三のデータセクションを送信するため、リアルタイムトランスポートプロトコル（ＲＴＰ）が使用され、前記メディアコンテンツの前記第一、第二及び第三のデータセクションの送信を制御するため、リアルタイムストリーミングプロトコル（ＲＴＳＰ）が使用される、
   請求項１記載の方法。
3. 前記編集リストは、前記新たなコンポジションを再生するために処理され、
   前記リアルタイムストリーミングプロトコル（ＲＴＳＰ）は、前記新たなコンポジションにおける前記第一、第二及び第三のデータセクションをそれぞれ要求するために使用される、
   請求項２記載の方法。
4. 前記ＲＴＳＰのコマンド“Ｒｅｃｏｒｄ”は、前記複数のサーバ装置のうちの１つでの記録保存するために前記新たなコンポジションに関連する注釈テキストを送信するために使用され、前記注釈テキストは、前記複数のサーバ装置のうちのサーバ装置に追加的に特にオーディオトラックであるトラックとして記憶される、
   請求項１乃至３のいずれか記載の方法。
5. 編集されるべき前記第一、第二及び第三のデータセクションの一部を緩衝記憶するため、前記第一、第二及び第三のデータセクションのいずれかを要求する前記それぞれのＲＴＳＰコマンドが評価され、前記第一、第二及び第三のデータセクションの前記一部の再ロードに関連する新たなＲＴＳＰコマンドは、前記第一、第二及び第三のデータセクションの開始及び終了についてのタイムステートメントに基づいて生成される、
   請求項４記載の方法。
6. 前記第一、第二及び第三のデータセクションの一部は、所与の時間の前の数秒及び前記所与の時間の後の数秒といった規定された期間に関連する、
   請求項５記載の方法。
7. 前記メディアコンテンツの前記第一、第二及び第三のデータセクションは、前記ネットワークを介して圧縮されていない形式で送信される、
   請求項１乃至６のいずれか記載の方法。
8. 編集装置により生成された要求メッセージを傍受及び解釈する評価手段を有する、メディアデータのキャッシュストレージ装置であって、
   前記要求メッセージは、複数のサーバ装置に記憶されるメディアコンテンツのデータセクションを要求し、
   第一の要求されたデータセクションは、最初に再生され、続いて第二の要求されたデータセクションが連続して再生され、前記第一及び第二の要求されたデータセクションの再生と並行して、第三の要求されたデータセクションが再生され、
   前記第三の要求されたデータセクションは、前記第一及び第二の要求されたデータセクションの再生の開始時間と終了時間により定義される時間よりも長い、同じタイムラインに沿った期間を定義する再生の開始時間及び終了時間を有しており、
   当該装置は、ネットワークを介して前記複数のサーバに接続され、
   当該装置は、前記第一、第二及び第三の要求されたデータセクションのそれぞれの終了時間及び開始時間の前後の前記メディアコンテンツの前記第一、第二及び第三のデータセクションの一部が高速な検索のためにロードされるキャッシュストアを更に有し、
   前記評価手段により送出される要求に応答して、前記キャッシュストアは、前記複数のサーバ装置と前記編集装置との間の前記ネットワークのデータ経路に含まれ、
   前記評価手段は、前記第三の要求されたデータセクションの一部とは異なる前記第三の要求されたデータセクションの更なる部分であって、前記第一の要求されたデータセクションの終了時間と前記第二のデータセクションの開始時間とにより定義される更なるデータ部分が前記キャッシュストアに更にロードされるように構成され、、
   前記更なる部分の制限時間は、前記要求メッセージに含まれる前記第一の要求されたデータセクションの終了時間と前記第二の要求されたデータセクションの開始時間とを示すタイムステートメントから前記評価手段により定義される、
   ことを特徴とする装置。
9. 前記評価手段は、該手段による評価に基づいて、前記第一、第二及び第三の要求されたデータセクションの一部を前記キャッシュストアに自動的にロードするため、個別の要求メッセージを作成する、
   請求項８記載の装置。
10. 前記評価手段は、メディアコンテンツの前記第一、第二及び第三のデータセクションを要求するために使用されるＲＴＳＰコマンドを評価する、
    請求項８又は９記載の装置。
11. 前記評価手段は、ＲＴＳＰのコマンドのフォーマットで、前記第一、第二及び第三の要求されたデータセクションの前記一部をロードするために要求メッセージを作成する、
    請求項８乃至１０のいずれか記載の装置。
    

Images