JP3726957B2 - 異なるフォーマットで記憶されたコンテンツセグメントの選択を指定するための方法とシステム - Google Patents
異なるフォーマットで記憶されたコンテンツセグメントの選択を指定するための方法とシステム Download PDFInfo
- Publication number
- JP3726957B2 JP3726957B2 JP2002104773A JP2002104773A JP3726957B2 JP 3726957 B2 JP3726957 B2 JP 3726957B2 JP 2002104773 A JP2002104773 A JP 2002104773A JP 2002104773 A JP2002104773 A JP 2002104773A JP 3726957 B2 JP3726957 B2 JP 3726957B2
- Authority
- JP
- Japan
- Prior art keywords
- content
- time code
- format
- video
- marker
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Television Signal Processing For Recording (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は一般にデジタル・アーカイブに関するもの、詳細にはビデオ・データなどのコンテンツのデジタル化、目録づくり、記憶、アクセス、検索、および編集に関するものである。
【０００２】
【従来の技術】
ニュースまたは娯楽番組のプロデューサなどのマルチメディア産業におけるプレイヤーは何千時間というビデオ・コンテンツを自由に使うことができる。例えばよく知られたテレビ娯楽番組は１０万時間のビデオコンテンツの所有を報告し、１週間あたりおよそ６０時間を追加する。
【０００３】
このような番組制作は、しばしばビデオコンテンツが非常に短い時間枠内で編集のために使用可能であることを要求する。例えば、娯楽テレビ番組の最初のセグメントは、次のセグメントがまだ製作されている段階で、既に放送されていることもある。この高速ペースの環境の中では、情報への高速アクセスが重大になってきている。
【０００４】
不幸にも、ビデオコンテンツは現在、アナログまたは連続デジタルのフォーマットでビデオテープに存在し、そのビデオコンテンツの効率的なアクセスや検討が妨げられている。そのオリジナルのアナログ録画の劣化はより重大な関心事である。デジタルアーカイブに情報を記憶することにより情報への高速アクセスおよび劣化の問題を減らすことができる。
【０００５】
製品の質を満たすためには、情報を高いまたは放送用の解像度でデジタル化しなければならない。高解像度ではアーカイブから情報を引き出すため、より広いバンド幅が要求されその結果遅いまた費用のかかる検索システムとなる。
【０００６】
【発明が解決しようとする課題】
従って、テレビ放送に適した質の高いコンテンツ・ストリームを提供するとともに、編集のためのコンテンツへの高速アクセスを許すデジタル・ベースのビデオ編集システムを提供することが必要である。
【０００７】
現在、既存のビデオ・コンテンツを編集するために必要ないくつかの機能を提供するために使用可能な様々な解決方法がある。しかしながら、保存のために既存のビデオ・アーカイブをデジタル化し、検討用絵コンテを作り出すためにビデオを区分化し、視聴および選択目的で効率的にコンテンツへアクセスし、ビデオ・ソースの編集決定リストを作成し、その作られたリストから質の高いコンテンツの製品を生産する機能を提供するための解決策はひとつも存在しない。
【０００８】
付加的な望ましい特徴は、コンテンツの既存の記述情報の付加、及び効率的な検索のための記述情報（メタ・データとしても知られている）の記憶を含む。
【０００９】
またユーザが容易にアクセス可能な、ウエブ・ベースのビデオ編集システムを提供することも望ましい。
【００１０】
【課題を解決するための手段】
本発明はテレビ番組等を製作するために、既存ビデオコンテンツのデジタル化及びそのデジタル化したものの編集のための解決策を提供する。図１を参照するとシステムは３つのメインパート、すなわち収集ステージ１０、記憶ステージ２０、検索ステージ３０を含む。製品用途のための質の高いコンテンツと同時に、編集のための高速アクセスを提供するために、２つのパラレル・パスをとおってデータが流れる。１つのパス、図の右側に見られる高解像度フォーマットパス８は、放送用質の使用のためフル解像度データを記憶する。他のパス、図の左側に示された低解像度フォーマット/メタ・データ・パス６は、アクセスおよび選択処理を容易なものとすることを意図した圧縮ビデオの概要およびテキスト記述子を保存する。その２つのパスは実質上は独立しているが、ビデオソース１１による始まりの時および編集決定リスト(EDL)３１を介する検索処理の間連結される。
【００１１】
収集ステージ１０は既存のビデオテープ・コンテンツから入ってくるデータのデジタル化を処理し、選択的にビデオの区分化および既にコンテンツと関連付けられた任意の記述情報を付加するメカニズムを提供する。ビデオは収集ステーション12にある、低解像度エンコーダー（図示せず）と高解像度エンコーダー13によって、低解像度と高解像度の２つのフォーマットにエンコードされる。低および高解像度のコンテンツはその後別々のファイルに記憶される。本実施例では、使用される低解像度フォーマットはMPEG１であり、高解像度フォーマットはMPEG２である。その再フォーマットされたビデオにはユーザ入力、レガシーデータ、絵コンテおよびオーディオストリームの音声ーテキスト変換処理などのメタデータの注釈をつけることができる。音声ーテキスト変換はオーディオストリームの注釈のためにサポートされているが、そのオーディオ・ストリーム中の録音された音声が処理されているときは、その初期の収集とは異なるステップとしてなされる。
【００１２】
MPEG１とメタ・データは代理編集のために使用される。すなわち選択目的でビデオデータを検索およびブラウズする。その一方MPEG２は最終的な編集および放送のために使用される。結果として、MPEG１とMPEG２の間のタイムコードは同期させられる。
【００１３】
収集操作への入力は１）２つの音声入力パスを含む、ビデオ・テープ・レコーダー（VTR)などのビデオ・ソース１１の出力１４と、２）本ケースでは高解像度エンコーダー１３内にある、タイムコード生成器の出力１５と、３）任意の既存のまたはレガシー記述データとを含む。本実施例においては、レガシー記述データが、DOS Xベース・レガシー・データ・ベースからIBM DB２データ・ベースへ一括してインポートされた。それは任意の既存のカスタマー・アーカイブ、例えばすでに使用されている私有のまたは標準のアーカイブ・システムから供給されることもできる。
【００１４】
収集操作からの出力は１）例えば公称４８メガビット/秒（Mbps)の転送レートでMPEG2のパスを提供するMPEG2Iフレーム専用データ・ストリーム１６，２）例えば１．５Mbpsの転送レートでMPEG1/メタ・データ・パスを提供するためのMPEG1ストリーム、３）またMPEG1/メタ・データ・パスを提供するための、ともに矢印１７で示された、テキスト・ファイル、属性及びサムネールを含む記述データを含む。
【００１５】
一旦ビデオがデジタル化され記述データが集められ生成されると、データは記憶ステージ２０へ進み、２つのメイン・エリアに記録される。MPEG２データは磁気テープを基礎としたシステムなど、容量とアクセス性のために最適化されたアーカイブ高解像度記憶装置２１へ送られる。MPEG１データと記述データはテープに記憶され、対象とするコンテンツやメタデータを編集する間、高速アクセスのためにメディアストリーミング能力のあるデジタルライブラリなどの低解像度記憶装置２２にキャッシュされる。本実施例では、一般に入手可能なIBM Content Managerが、デジタルライブラリと、統合IBM Video Chargerメディア・ストリーミング製品を提供する。
【００１６】
Content Manager ２２はビデオ・メタデータの検索およびブラウジングのためのインターフェースを提供する。検索結果の一部として提供されるサムネールおよびテキスト記述は高速アクセスのためにディスク上に記憶される。MPEG１ビデオはテープ・ライブラリ・システム上に保持され、ディスク上にバッファされ、Content Manager ２２を介して必要とされる時にアクセスされる。
【００１７】
検索ステージ ３０は、MPEG１/メタ・データ・パス６内のブロック３２によって示された編集/選択操作と、MPEG２パス８内の呼び出しステーション３３によって表わされる一括呼び出し操作の、２つのメイン・パートからなる。
【００１８】
編集/選択操作３２によって、プロデューサーはデジタル化されたアーカイブを検索およびブラウズし、次の処理のためのセグメントを選択することができる。プロデューサは、テキストまたは属性により、IBM Content Manager ２２または同様のデジタル・ライブラリ製品を検索し、検索基準にあった一組のビデオを取り戻す。各々のビデオはサムネールおよびテキストによって表される。ある特定のサムネールを選択することにより、プロデューサーは対応するビデオの絵コンテを見ることを要求することができる。絵コンテから、プロデューサーはその後そのシーンのMPEG１ビデオを見ることを要求することができる。そのビデオはその絵コンテ内の選択されたシーンを再生し始める。
【００１９】
プロデューサーはそのデータを検討して、どのセグメントを候補リストへ置くことによって使用することを望むのかを指示する。プロデューサーはその後、候補リスト内にあるビデオセグメントの整理およびトリミングをすることができるようになり、編集/選択操作の出力、すなわち編集決定リスト（EDL）３１を作成する。
【００２０】
EDL３１はMPEG２パス８内にあって一括検索操作を行う呼び出しステーション３３へ送られる。呼び出しステーション３３はEDL３１を使ってMPEG２記憶域２１から適切なセグメントを引き出す。データはテープから引き出され、最終的な編集のための編集ベイ３５への連続送信のためにプロファイル・デコーダー３４へ送られる。
【００２１】
本発明は、高解像度および低解像度のフォーマットの代表的な二つのパスをもって説明されているが、本実施例は三つの解決方法を含んでいる。サムネールはMPEG1コンテンツよりも低解像度で保存され、選択及び編集処理に使用される。さらに本発明の一般的な考えは多重解像度フォーマットをサポートできるよう容易に拡張することができる。ユーザはコンテンツの一部の選択のため、1つのまたはそれ以上の低解像度フォーマットで記憶されたコンテンツを使用することができる。その後呼び出し処理において本発明の原理を使用すれば、製作のために選択されたコンテンツに対応する任意の記憶されている高解像度のフォーマットの部分を引き出すことができる。
【００２２】
【発明の実施の形態】
本発明を特定の実施例、特にビデオ・コンテンツをもって以下に説明する。しかしながら当業者であれば本発明の精神と範囲から離れない様々な変更や置換を思いつくであろうし、また本発明は特許請求の範囲の記載によってのみに制限される。更に発明はすべてのタイプのコンテンツの管理に適している。
【００２３】
収集ステージ１０は、たとえば既存のビデオ・テープまたはライブ・ビデオ供給装置からの受信アナログ・ビデオ・ストリーム１４をデジタル化し、たとえばオペレーター入力、既存の記述、絵コンテを作るためのビデオ・イメージ・キャプチャ、オーディオ・ストリームの音声ーテキスト処理等から供給される記述情報を収集する。
【００２４】
収集のハードウェアの説明をする。図２を参照すると、ある数ｎのビデオ収集ステーション４０がある。本実施例では４つのステーションが与えられているが、ネットワークやサーバの能力に応じてより多くのステーションをサポートすることができる。
【００２５】
各ステーション４０はネットワークに接続できるPCベースのワークステーション４２（本ケースではMicrosoft Windows(R)NTが走っている）に接続されているビデオ・テープ・レコーダー（VTR）４１を含む。ワークステーションまたは収集PC４２は低解像度エンコーダー４５とドライビング・ビデオ・カタログ・ソフトウエア（下記で詳しく説明する）を含む。本実施例では低解像度エンコーダーはPCI MPEG１エンコーダ・ーカードである。
【００２６】
ステーション４０は高解像度エンコーダー１３へのリンク４３を含む。本実施例ではこのリンクはイーサネット(R)またはRS422接続であり、高解像度エンコーダー１３はMPEG２エンコーダからなる。ステーション４０は、たとえば他のイーサネット(R)またはRS422接続使ってＶＴＲに対する制御リンク４７を提供することができる。
【００２７】
本実施例の高解像度エンコーダー13は多重MPEG２ストリームのエンコードをサポートする。その結果１台のマシンでいくつかのビデオ収集ユニットにサービスを提供できる。本実施例中のMPEG1エンコード及びビデオ処理のためのPCIカードはシーン検出及び音声ーテキスト変換ソフトウエア（以下参照）と互換性がある。
【００２８】
ステーション４０は高解像度エンコーダー１３とインターフェースをとることにより、低解像度と高解像度のフォーマット、本実施例ではMPEG１とMPEG２、へアナログ・ビデオ・ストリームを同時変換することができる。高解像度のエンコーダー１３への入力の前に、本実施例のアナログ・ストリーム１４は最初にノイズ削減のためのアンプ/スプリッター（図示なし）とアナログーデジタル変換器４８へ渡される。そしてその変換器４８によって高解像度エンコーダー１３へ直列デジタル・ストリーム１５が供給される。代わりにVTRからエンコーダー１３へ直接デジタル入力を提供することもできる。
【００２９】
本実施例の高解像度エンコーダー１３はMPEG２のエンコードとデコードの両方を提供することで異なるMPEG2標準間の非互換性の可能性を減らしているが、混合解決法を使用することもできる。高解像度エンコーダー13はまた、デジタルーアナログ変換器（図示なし）とタイムコード生成器４４を含む。これらはデジタル化されたビデオ・ストリームをアナログへ変換してその映像にタイムコードを追加し、それリンク４３を介して低解像度エンコーダー４５への入力として供給するために使用される。
【００３０】
前述したように、高解像度ストリーム１６と低解像度ストリーム１７は同期させる必要がある。本実施例ではこの二つを同期させるためにタイムコードを使用する。しかしながらMPEG2ではタイムコードをサポートしているが、MPEG1ではサポートしていない。したがって、もともとタイムコードをサポートしていないフォーマットにおいて、タイムコードをエンコードするための装置が提供される。タイムコード生成器44は高解像度エンコーダー13へタイムコードを供給する。タイムコード生成器44は、本実施例においては高解像度エンコーダー13の一部とすることができる。代わりに、タイムコードはVTRそれ自身によって供給されたり、または既にビデオ映像内に存在することもできる。後者の場合において、このようなタイムコードは同期させるために連続かつ、単調に増加していくことが好ましい。
【００３１】
本実施例のタイムコードはSMPTEタイムコードからなる。高解像度エンコーダー１３は生成したMPEG２ストリーム中にタイムコードをエンコードし、アナログビデオの映像自身に、たとえばタイムコード・キャラクター生成器を使ってタイムコードを焼きつけることにより、タイムコードをスーパーインポーズする。タイムコードは後に選択されたMPEG1フレームから、たとえば光学式文字認識（OCR）技術を使って抽出される。代わりの実施例では、タイムコードは「ウォーターマーク」としてエンコードされ、その後でデコーディング装置によって抽出される。ウォーターマークについては、たとえば米国特許第5,825,892号明細書（特開平10-191017号公報）に記載されている。更に他の代替例として、MPEG１エンコーダーを使用し、エンコーダーのMPEG1標準とVideoChangerを統合することによりタイムコードをMPEG１ファイルから抽出することもできる。本実施例においては新しいタイムコードが生成されたが、ビデオ映像の既存の非連続的なタイムコードもまた、カスタマーがこれらタイムコードへの索引をつけているためサポートされMPEG１の映像に焼き付けられる。
【００３２】
使用されるMPEG１解決策には関係なく、エンコードの処理は可能な限りキャプチャー・タイムコードが整列していることを確実にする必要がある。その目的は選択されたハードウエア及びソフトウエアの能力が許す限りフレームが正確であるためである。本実施例では確認処理が以下のように起こる。ユーザーはMPEG１記録の一部を検討する。そしてアプリケーションによって入力として現在のビデオ・フレーム上に現れているタイムコードを記入個所に入力するよう求められる。あるいはアプリケーション自身が、たとえばサムネールまたは絵コンテの生成の間、自動的にサンプル・ビデオフレームを選択しそのタイムコードを検出する（たとえばOCR技術、ウオーター・マーク・デコーディングなどを用いて）。アプリケーションはその後現在のフレームに対するMPEG1のフレーム番号を調べる。その後もしシステムがすでにビデオの開始フレームとタイムコードを知っているならば、システムは対応関係または「デルタ」を計算しMPEG２ファイルに関連付けられるメタ・データ・ファイルに入れる。あるいは他のサンプル・フレーム及び対応するタイムコード情報が決定され、デルタを計算するためその2つの調整ポイントが使用される。このデルタは後にMPEG２へのオフセットを計算するために使用される。
【００３３】
MPEG１ファイルとMPEG2ファイルの対応するセグメントの例が図3に示されている。MPEG１ファイルの部分１０１が示されている。そのセグメント１０１内にはたくさんの映像があり、その各々が本ケースでは映像に関連付けられるメタ・データとともに記憶されるフレーム番号と関連付けられている。代表的な映像フレーム１０２が示されており、フレーム番号１０７２を有している。その映像フレームの拡大図１０３もまた示されている。その拡大図はその映像フレーム上にスーパーインポーズされたタイムコード１０４を含んでいる。表示されているタイムコード１０４は"０１:００:５０:０２"であるが、これはその映像フレームがMPEG１ストリーム"０１"内で５０秒と２フレームであることを示している。ひとつまたはそれ以上のタイムコードを読み、それらの対応するフレーム番号を知ることによって、システムは自身を調整することができ、その結果任意のフレーム番号に対応する適切なタイムコードを計算することができる。システムはその後高解像度MPEG2ファイル105内にある対応するフレーム106を見つけることができる。
【００３４】
本発明の実施例を実装するために使用されたハードウエアは4つのIBM PC、４つのMPEG２ストリームをサポートする１つのMPEG２エンコーダー・システム（たとえばProfileXP）、４つのPCI MPEG1エンコーダー・カードおよび4つの100 BaseT Ethernet(R)アダプターを含む。
【００３５】
収集アプリケーション・ソフトウエアは多数の方法で実装することが可能である。本実施例のソフトウエアはいくつかのカスタマイズされ統合されたモジュール、すなわちMicrosoft Windows(R)NT Workstation4.0 w/service packs、Virage VideoLogger SDK、IBM Content Manager V6.1、Java(R)、 Virage SDK(IBM製品のJava(R) Runtime Environment 1.1.8）と互換性のある、CまたはC++コンパイラー、およびカスタムIBM Ingest Applicationからなる。ソフトウエアの基本はVirage VideoLoggerおよびそのソフトウエア開発者用のツールキット（SDK）によって提供されるが、他の同様の機能を提供するソフトウエアを使用することもできる。収集アプリケーションはVirage SDKを使用し、既存のビデオテープ・アーカイブのデータ・モデルをサポートする。アプリケーションはまたユーザ入力のためのユーザー・インターフェースを提供し、各ビデオの記述情報を収集し、Content Manager２２のローダーにその記述情報を送る。さらにMPEG1とMPEG2のエンコーダーが外部のタイムコードに対する同期を保たれること確実にする。Content Manager２２はライブラリー・サーバー、テキストサーチ・サーバー、VideoChargerおよびクライエットを含む。
【００３６】
付加的なソフトウエア・データ・ベース機能を説明する。本実施例では、いくつかの付加的な機能が新しいシステムへ組み入れられた。データ入力機能によってユーザーはテープID、キーワード、記述、および著名人の名前などを入力することができる。またIBM社のViaVoiceなどのソフトウエアを使って、またはVTR41からの音声入力を用いてマイクロフォン入力を混合することによって音声注釈を提供することも可能である。検索機能によって、たとえば名前またはキーワードによるサーチが可能となる。検索結果はテープ・レコードの一組の結果セットの形式で与えられる。貸し出し管理機能が物理的なテープ収集のために提供される。システムは付加的にテープ番号によって返却と借り出しのサポートをする。本実施例のレガシー・ライブラリーは各テープの１つの複製を管理する。本システムとは関係のない標準データベース・ツールを使って報告を生成することができる。
【００３７】
収集の処理を説明する。図4に移ると以下のステップが各ビデオテープの処理を概説する。
【００３８】
選択５１。収集操作は所定の選択基準に基づいて処理のためにテープを選択する。たとえば劣化した媒体上に記憶されたコンテンツを優先的に選択することができる。
【００３９】
初期化５２。固有のテープ識別子が収集アプリケーションに入力される。識別子はその後そのテープ・コンテンツと関連付けられた既存のメタデータを取り出す際にContent Manager（CM)に照会するために使われる。識別子はまたCMおよびMPEG2ファイル内の項目の名前つけの基礎として使用することもできる。収集アプリケーションは収集 PC上のシーン検出とMPEG1エンコードのためのハードウエアを初期化する。アプリケーションはプロファイルMPEG2エンコーダーにファイルネームおよび目的位置情報を与えることによってプロファイルMPEG2エンコーダーを初期化する。
【００４０】
処理５３。収集操作員はテープをテープ・プレイヤーにロードする。本実施例の各ビデオテープは１度だけ読み込まれ、テープ・プレイヤーの出力は２つの異なる入力へ送られる。すなわち収集 PC MPEG１カードとプロファイル・ビデオ・フォーマットである。両エンコードは前述したように、タイムコード生成器44によって与えられる整合したタイムコードを共有しなければならない。
【００４１】
エンコード後、MPEG２ストリームはプロファイル記憶システムにあるファイル内に記憶される。そこからMPEG２記憶システムへ転送され磁気テープ上に移される。収集 PCとMPEG１エンコーダーが1.5Mbpsでデジタル化されたファイル内に記憶されるMPEG１ストリームを作る。メタ・データはいくつかの項目、すなわち絵コンテ、基本サムネール、ビデオ・コンテンツに関する情報を記憶するために使用されるレガシー・データベース（選択的に変更される）からのテキスト、オーディオ・トラック音声ーテキスト変換トランスクリプト、オプションとしてMicrosoft Wordまたは他のワードプロセッサーのフォーマットのトランスクリプトおよびオプションとして音声ーテキスト変換注釈からなる。本実施例のメタデータは、基本的に検討と選択の目的で使用されるため、MPEG１ファイルと関連付けられる方法で記憶される。収集アプリケーションとそのユーザー・インターフェースはメタ・データの収集を容易にし、下で相互作用している異なる構成要素の詳細を隠す。
【００４２】
基本サムネール。基本サムネールは初めは属性値から決定されるアイコンによって表される。特定アイコン値は詳細なデザインの一部として決定される。このアイコンは後に編集インターフェースを介してイメージ・サムネールと置き換えることができる。ユーザーは、この後より詳しく説明するが、またこの編集インターフェースを介して他のメタ・データを編集することもできる。
【００４３】
絵コンテ。ビデオ・カタログ・ソフトウエア内のシーン検出技術はビデオ内でシーン変更に印をつけ、各シーンの最初のフレームのサムネールを作り出す。あるいは、サムネールを固定間隔でキャプチャーすることもできる。たとえば本実施例においては、AVIエンコーダーを使ってビデオの30秒ごとにサムネールを作り出している。これらサムネールの集合はビデオの絵コンテを形成する。好ましい実施例では、サムネールが作られる時又はバックグラウンド処理としてにウエブページの絵コンテが作られ、その結果選択処理の間に直ちに絵コンテの検索が可能となる。
【００４４】
レガシーテキスト。最初レガシー・データベースからロードされた記述データがオペレーターによる検討と編集のために表示される。
【００４５】
トランスクリプト。ビデオ・カタログ・ソフトウエア内の音声ーテキスト変換技術はリアルタイムで音声コンテンツのテキスト・ファイルを作るためにオーディオ・ストリームを処理する。このファイルはテキスト検索に使われる。クローズド・キャプションのエンコードも、Virage社のソフトウエア製品はこの機能をサポートしていないので望むならば代替ソフトウエアを使用してキャプチャーすることもできる。
【００４６】
いくつかのビデオ資産もまたMicrosoft Wordまたは他のワードプロセッサー形式のトランスクリプトをもつことができる。これらのトランスクリプトは、使用可能な場合は音声ーテキスト変換出力に追加され、テキスト検索の入力として使用される。収集アプリケーションは任意の既存のトランスクリプト・ファイルを特定するための場所を提供し、ファイル・システム上でそのファイルが使用可能であることを期待する。一旦これらのトランスクリプト・ファイルがロードされると、詳細は後に述べるが、ユーザーは編集インターフェースからそれらを検索し印刷することができる。
【００４７】
音声ーテキスト変換注釈。オペレーターはオプションとして、音声ーテキスト変換技術を使用してキャプチャされる話言葉記述を介してビデオに注釈をつけることができる。この注釈付けは音声ーテキスト変換の完了に続けて行うことができる。
【００４８】
最終処理５５。ストーリーの処理が終了したとき、結果のファイルは最終処理の用意ができている。MPEG1ファイル、テキスト・メタ・データ、サムネール、絵コンテおよび音声ーテキスト変換出力は一緒にグループ化され、最終検討のためユーザーに提供される。ユーザーはロードするデータをIBM Content Managerに渡す前に、正確さと質を求めて出力を抽出検査することができる。この時点でユーザーはエンコードの質が受け入れられるかまたは繰り返しが必要かどうかを決定すると共に、レガシー・データベースからの属性データを更に変更することができる。
【００４９】
一旦ビデオテープの終わりにくると、アプリケーションは初期状態へリセットされ次のテープに対して用意される。
【００５０】
収集操作はテープ・プレイヤーが連続して動作し、各テープが一度だけ再生されるよう十分にすばやくビデオを処理することができなければならない。本実施例の４ステーション収集システムは1週間のうち6日、1日に16時間、4つの収集ステーションで収集処理が実行されるようにデザインされている。各ステーションは1日に8ないし10時間分のビデオをエンコードする。データのスループットが許せばステーションを追加することができる。
【００５１】
「ストレージ」について説明する。記憶容量は本発明において重要な面である。たとえば100,000時間のビデオを1.5MbpsのMPEG1と48MbpsのIフレーム専用MPEG２の両方のフォーマットでエンコードするためには、２ペタ・バイトの記憶容量を必要とする。
【００５２】
このコンテンツを効率的にエンコード、保存および検索するにはストレージは十分な容量を必要とするだけでなく、収集ステーションからテープへ、そしてフルフィルメントへ効率よくファイルを転送することができなければならない。更に低速アクセスがMPEG2の検索に許される一方で、MPEG1のパスに対し高速アクセスが提供されなければならない。多数のストレージ・アーキテクチャが前述の要求を処理するため実装することができるが、以下にMPEG１とMPEG２に対する本実施例のハードウエアと記憶方式の説明をする。
【００５３】
ストレージ・エリア・ネットワーク（SAN）について説明する。図5を参照すると本実施例は異なるプラットホーム上にあるいくつかのシステムに対してかなりの量のディスク・ストレージを供給する。非常に大きなデータがシステム間を動くので、弾力性、拡張性のあるストレージ・アーキテクチャーが実装されている。1.5TBのストレージはAIX上の700GBのIBM Videocharger６２、AIX上の２００GBのIBM Content Managerデジタル・ライブラリー６１およびともにAIX上で動作するLinear Tape-Open（LTO）テープバッファ６３に接続されている６００GBの Tivoli Storage Manager(TSM)２１からなる。付加的に1１００GBまたはそれ以上が高解像度エンコーダー１３において使用可能である。
【００５４】
SANデバイス６４が、ここでは７１３３ーD40を含んでいるが、シリアル・ストレージ・アーキテクチャ（SSA）を介してシステムとインターフェースをとっているストレージを統合する。SANデバイスはシステムに対してローカルディスクドライブにみえる。SANはいくつかの重要な利点を提供する。たとえば、ストレージはディスク・スペースの効率的な割り振りを認めつつ、必要に応じてシステムに割り振られる。システムはスペースが足りなくなることも過剰なスペースをもつこともない。システムのストレージはさらにドライブを追加するためにそれを開けることなく増加することができる。SANはRAID、ホット・スワップ、ホット・スタンバイ、冗長コンポーネントおよびパフォーマンス・モニター能力を提供する。データを外部化することによって、システムが故障してもデータへのアクセスは妨げられない。外部化されたデータは高可用性アーキテクチャを容易にする。
【００５５】
「MPEG１ファイルとメタ・データの記憶」について説明する。MPEG1ファイル及び関連付けられるメタ・データはリンク６６経由で記憶ステージ２０に渡され、IBM Content Manager V6.1 22によって管理されているIBM VideoCharger ６２に記憶される。図にあるようにIBM Content Manager ソリューションはAIX4.3.2が走っている２つのモデルH50 R/6000マシン上にある。1つはContent Managerのデジタル・ライブラリー部６１のためであり、1つはVideoCharger６２のためである。
【００５６】
ステージングとバッファリングはディスク上でおこる。LTOテープ・ライブラリ６３とTSM21はウルトラSCCIリンク６５を介して接続されている。そして長期保管のために使用される。1000BaseT イーサネット（R）接続もまた提供される。検索結果に使用されるサムネールとメタ・データはディスク上に保存され、効率的な検索時間を確実にする。VCは即時ストリーミングのために使用可能な1000時間のMPEG1ビデオのディスク・バッファ容量を提供する。
【００５７】
「MPEG２の記憶」について説明する。本実施例のMPEG２データはAIXとTSMが走っているR/6000システム上に記憶される。高解像度エンコーダー１３はファイバ・チャネル接続を介してTSMに接続されている。初期のステージングとバッファリングは長期保管のためのLTOテープライブラリ６３を有するディスクに対して行われる。
【００５８】
「編集/選択操作」について説明する。編集/選択操作は図６に示された検索処理の一部である。ビデオ編集システムは1つまたはそれ以上のサーバー６８によってホスティングされ、それゆえ編集/選択クライアント・マシン３２上にカスタム・ソフトウエアを持つことなしに操作することができる。複数の編集/選択ステーション３２がアーカイブ対象ビデオ資産の配置、検討および選択を容易にするために提供される。このウエブ・ベースのシステムにより、ビデオ・クリップのセットを共有することでビデオ編集者間のコラボレーションが可能になる。また当該システムによって複数のユーザが同じビデオ記憶ハードウエア２０、ビデオコンテンツ、ビデオ処理ハードウエア34およびビデオソフトウエアの集まりを共有することができる。
【００５９】
プロデューサーはコンテンツを、たとえばテキスト・ストリングおよびキーワードにより検索し、その後戻されたサムネール、テキスト記述、絵コンテを検討し選択範囲を絞っていく。一旦十分に範囲を狭めたら、どのセグメントを使用するかについて最終的な決定をするためにMPEG１ビデオを視聴する。選択されたセグメントはその後候補リストに置かれEDLの生成に使用される。プロデューサーは候補リストからセグメントを見て、選択し、トリミングし、順序付けして最終的なEDL３１を製作することができる。当該処理の任意の時点で、プロデューサーは現在のEDLをプレビューすることができる。結果として生じたEDLは高解像度呼び出し処理３３へSAN６４を介して送られ、どのMPEG２ファイルがテープから呼び出されるのかを指示するのに使用される。
【００６０】
本実施例の検索、ブラウズおよびEDL生成操作はたとえばウエブ、Java(R)言語またはC言語のアプリケーションの組み合わせにより実現される。最終的なEDL３１のフォーマットはユーザの要求に合わせることができる。同様にユーザーの要求はたとえばすでにユーザが使っているアプリケーションに依存する。EDL３１はファイル名、開始タイムコード及び停止タイムコードをもったビデオ・セグメントの単純で非階層的なリストからなる。
【００６１】
「編集/選択のハードウエア」について説明する。編集/選択ステーション３２は各々たとえばWindows(R) ９８とJava(R) １.１.８の機能をもったウエブ・ブラウザとが走っているパーソナル・コンピューターからなる。選択するソフトウエアによって、追加PCIカードが含まれる。本実施例においては、２５のステーションが編集/選択操作を同時に実行するように構築されている。
【００６２】
「編集/選択のソフトウエア」について説明する。編集/選択ステーション32のソフトウエアはInternet Explore V5.0、Java(R) Runtime Environment1.1.8、IBM社のNetDataおよび MPEG1プレイヤーを含むいくつかの基礎コンポーネントを統合した。本実施例では、検索機能はすべてNet.Dataを介したウエブ・ベースのものである。一方でビデオ選択はローカルに走っているVideoCharger プレイヤーの修正版を使ってなされる。
【００６３】
編集/選択ソフトウエアはユーザー・インターフェースといくつかの基礎機能を提供して、ユーザーがテキストベースの検索をし、その結果を検討し、セグメントを選択し、そこからEDLを生成して最終的なEDLをMPEG２呼び出し操作３３へ送ることを可能にしている。フレキシビルディスクによるEDLの配布もスタンドアロンの編集ベイ３５のためにサポートされている。
【００６４】
EDL３１はウエブ・サーバー６８上に保存されており、その結果EDL３１を他のユーザーと共有することができる。また他のユーザのアクセスまたは変更を制限することができるように、EDL３１をアクセス保護しておいてもよい。
【００６５】
編集/選択ソフトウエアの付加的な機能によりユーザはアーカイブを検索して、各ビデオに関連付けられたメタ・データを更新することができる。特にユーザーはサムネールを置き換えたり、音声ーテキスト変換注釈とビデオ解析から作成されたレガシー属性データとテキスト・ソースを修正したりすることができる。テキストはたとえばキーボード入力により変更される。検索クライアントはContent Managerデジタル・ライブラリー６１とVideoCharger６２に接続されているアプリケーションである。
【００６６】
「編集/選択操作」について説明する。編集/選択処理を図７を使って説明する。
【００６７】
初期化８１。初期化において、プログラムは現在のEDLを消去したり、ストリースラグとして知られているジョブ識別ストリングを入力として要求したりする。ストリースラグは編集/選択操作、MPEG２呼び出し処理３３、および編集ベイ３５の間で活動を調整するために使用される。
【００６８】
テキスト照会８２。プロデューサーは自分が探している主題を表す言葉やフレーズを入力することによりスタートする。この入力からContent Manager２２へ送られる照会文（クエリー）が作り出される。Content Manager２２はその照会分にどれだけ近く適合するかによってランクづけられた一組の候補を返す。各候補はサムネールによって表され、収集ステージ１０で入力された記述テキストを含む。テキストのサイズのため、必要なときには追加ページで候補のサブセットが提供される。代わりのフォーマットもまた可能である。
【００６９】
正確なテキスト照会の実行とサーチ結果はCM内で使用される基本のデータモデルに依存する。データ・モデルとユーザー・インターフェースはカスタマーの要求に依存する。
【００７０】
予想される使用のためのビデオのステージング（先取り）。特別のトピックに関するコンテンツに対する要求があることが知られているとき、このトピックに関するすべての資料は容易に使用できることが必要とされる。そのためにプロデューサーまたはライブラリアンはそのトピックに関してサーチを実行し、予想される使用のため対応するビデオをステージングする。これは現時点でビデオを再生するというよりもむしろ将来の高速アクセスのためにテープからディスクへ当該ビデオを呼び出すためである。それゆえ本実施例の編集/選択処理は再生リクエストとステージングまたは取り込みリクエストの両方をサポートする。再生操作はMPEG1プレイヤーでビデオを再生する。一方ステージング操作はVideoChargerのステージング領域内にビデオを取り込むだけである。本実施例においてはディスク上にはMPEG1ビデオ1000時間分の容量があるが、ユーザーの要求に依存して更に追加することもできる。
【００７１】
サムネールの検討８３。プロデューサーはサムネールと記述データを検討しどの候補が更なる調査が必要であるかを決定する。プロデューサーはサムネールをクリックし、更なる処理のため選択する。これにより絵コンテが作成される。絵コンテはこのビデオテープのためにキャプチャーされた一組のサムネールからなる。プロデューサーがMPEG１ビデオをみることを選択した場合、絵コンテが要求されると高速の視聴を可能とするためにすぐ関連するビデオファイルがVideoChargerサーバー６２ヘステージングされる。
【００７２】
絵コンテの検討84。絵コンテは各々がビデオ内のシーン（収集ビデオログソフトウエアによって以前に決定されている）を表す、一続きのサムネールにより構成される。もし絵コンテが引き続き興味をもたらしたときには、プロデューサーは関連するセクションをクリックして、そのMPEG1のプレイヤーを起動する。プレイヤーはVCサーバーからビデオを取り込みその選択されたセクションのビデオを再生し始める。
【００７３】
候補選択８５。プレイヤーは絵コンテ内のサムネールと一致した時点のMPEG１ビデオをロードし再生し始める。プロデューサーはビデオを再生したりまたは特定した位置へジャンプしてそこから再生することができる。プロデューサーはビデオのどのセクションに興味があるかを決定し、そのスタートとストップの時刻をマークし、編集/選択クライアント32内にある候補リストにそのセクションを加える。プロデューサーはその後同じテープ内の追加のセクションをマークしたり、判断ブロック８６で表されているように、絵コンテの検討ステップ８４にもどって新しいセクションにジャンプしたり、サムネール検討８３に戻ったり若しくはステップ８２で新しいテキスト照会を実行したりできる。一旦候補が現在のストリースラグに対して選択されると、プロデューサーはMPEG１の検討およびEDLの生成ステップ８７に進む。
【００７４】
MPEG１の検討/EDLの生成８７。MPEG１の検討およびEDLの生成ステップ87は候補リスト内のビデオセクションを検討し、選択し、トリミングし、順序付ける機能を提供する。完了したとき、その結果物であるEDLは決められた標準形式のEDLに変換される。
【００７５】
編集/選択クライアント３２は候補リストからビデオを選択し、それをプレイヤーを使って再生し、開始フレーム番号及び終了フレーム番号の形でひとつまたはそれ以上のスタートとストップの時刻をマークし、その後それをEDLに追加するためにグラフィカル・ユーザー・インターフェース(GUI）を提供する。そのスタートとストップの時刻はたとえばプレイヤー上のマークボタンを使って、または２つのSMPTE（タイムコード）フィールドに記入することによって設定される。一旦１つのビデオの処理がなされると、所望の全ビデオがEDLに追加されるまで他のビデオが選択されマークされる。EDL内のビデオはその後再順序付けしたり、取り除いたり、入れ替えたりすることができる。
【００７６】
EDL３１の一例が図8に示されている。これは基本的には、ビデオID番号（縦の列11）、開始マーカー(縦の列12）及び終了マーカー（縦の列13）によって識別される選択されたビデオ・セグメントのリストである。開始マーカー及び終了マーカーは後に対応するタイムコードに変換されるフレームによって表されている。あるいは読み取られるか計算されるタイムコードそれ自体で表すこともできる。
【００７７】
この処理の間ずっとEDLはプレビューモードで再生することができる。もしそれが満足いくものに見えない場合は、上記の処理をEDLが完成するまで繰り返すことができる。更に、もし他のビデオセグメントを候補リストに追加する必要がある場合には、図７の判断ブロック８８によって示されているように、プロデューサーは追加検索を実行し、新たなセグメントを既存の候補リストに追加することができる。
【００７８】
MPEG１プレイヤーによって提供される機能は、再生、停止、ポーズ、フレームを進める、フレームを戻す、ある場所にジャンプする、スタートをマークする、ストップをマークすることなどを含むが、それらに制限されることはない。更にスライダー制御がビデオのさまざまな部分への移動を容易にするために提供される。
【００７９】
最終処理８９。一旦EDL作成が完了するとプロデューサーは結果物であるEDLの保管とオプションとして提出を要求することができる。このとき次のことが起こる。EDLは決められた標準EDL形式へ変換される。EDLはたとえば、後の検討や修正のためにディスクまたはContent Managerサーバー６１へ保管される。提出のとき、EDL３１はMPEG２呼び出しステーショ３３へ送られ、その結果対応するMPEG２ビデオ・セグメントをアーカイブから検索し、プロファイル・デコーダー３４へ送ることができる。そのEDLのコピー３８はまた編集ベイ３５、たとえばフレキシビルディスク上へ送ることができる。アプリケーションはその後それ自身を初期化し次のジョブの準備をする。
【００８０】
「MPEG２呼び出し操作」について説明する。図６、８、９を参照するとMPEG2呼び出しステーション３３は図９の最初のステップ９１において、編集/選択ステーション３２からEDL３１を受け取る。ステップ９２に示してあるように、コンテンツに基づいて呼び出しステーション３３はテープ６３からディスク２１へのMPEG２ファイルの呼び出しを開始する。EDL内の各ビデオセグメントの開始マーカーと終了マーカーはテープにあるMPEG２ファイルへのバイト・オフセットを計算するために使用される。本実施例にしたがうと、システムのパフォーマンスを増加させるためにファイルの要求される部分のみがテープ６３から検索される。このサブファイル検索操作はTSMクライアント２１内でサポートされている。
【００８１】
ハンドルをもったセグメントは有効なプロファイルMPEG2フォーマットファイルへ再フォーマットされる。ステーション33はその後プロファイル・デコーダー34へのMPEG2の適切な転送を監視する。
【００８２】
「呼び出しハードウエア」について説明する。本実施例のMPEG2呼び出しステーション３３は1000baseT Ethernet（R）を介してIBM PCサーバーとつながっているWindows(R) NTベースのPCである。これはEDL内で指定された低解像度のビデオ・セグメントからタイムコードを抽出するための装置を含む。またたとえばInterphase5527といったファイバー・チャネル・カードを含む。
【００８３】
「呼び出しソフトウエア」について説明する。MPEG２呼び出しソフトウエアは前述の呼び出しステーションの機能を提供するIBM製カスタム・ソフトウエアからなる。
【００８４】
「MPEG２呼び出し操作」について図９を参照して説明する。
【００８５】
ファイル受信９１。呼び出しシステム３３は編集/選択ステーション３２に接続されたサーバー６８からEDL３１を受け取る。
【００８６】
ファイル処理。アプリケーションはステップ９２でEDLファイルを開き、ステップ９３で各セグメントのテープ識別子を読む。次のステップ９４で、アプリケーションはファイル・セグメントがすでにバッファされているかみるために記憶バッファをチェックする。バッファされていた場合には、その後処理はステップ９３に戻されて次のEDLセグメントのIDが読まれる。セグメントがバッファされていない場合には、その後次のステップ９５において、アプリケーションはTSMのAPIを使ってMPEG２記憶領域から適切なファイルセグメントの部分オブジェクト呼び出しを要求し、受信するとデータを修正してそのセグメントを記憶されているのと同じフォーマットの有効なMPEG2ファイルにする。前述したように、関連あるセグメントといくつかの追加のバッファのみがテープから取り出される。この処理は、ステップ９６に示されているように、EDLのすべてのセグメントが取り出されるまで続く。
【００８７】
最終処理。MPEG２のすべてのファイル・セグメントが呼び出されたとき、ステップ９７においてEDLファイルは閉じられる。MPEG２ファイルはその後次のステップ９８において、たとえばファイバー・チャネルのファイル転送プロトコル（FTP）により、プロファイル・デコーダー３４に転送される。
【００８８】
「プロファイル/編集ベイ」について説明する。図６に戻って、プロファイル・デコーダー３４はそのディスクからMPEG２ファイルを読み込み、それをMJPEGに変換し、最終の編集のため編集ベイ３５へシリアルのデジタル出力を送る。
プロデューサーはMPEG２呼び出し操作によってプロファイル上におかれたそのファイルにアクセスする。
【００８９】
「ハードウエア」について説明する。本実施例のプロファイル・デコーダー３４は多チャンネル・ハードドライブ・コントローラーをもったMPEG２デコーダー３４からなり、編集ベイステーション３５はデコーダー３４の制御を行うPCからなる。
【００９０】
結論として、説明されたシステムは効率的な、コンテンツの編集及び製作のための効率的なソリューションを提供する。
【図面の簡単な説明】
【図１】収集ステージ、記憶ステージ及び検索ステージを含む、本発明の２つのパスをもつコンテンツ管理システムを表したブロック図である。
【図２】収集ステージを表したブロック図である。
【図３】高解像度と低解像度のコンテンツのセグメントの対応フレームを表した図である。
【図４】収集処理を表した流れ図である。
【図５】記憶ステージを表したブロック図である。
【図６】記憶ステージ及び検索ステージを表したブロック図である。
【図７】編集/選択処理を表した流れ図である。
【図８】編集決定リストを表した図である。
【図９】呼び出し処理を表した流れ図である。
【発明の属する技術分野】
本発明は一般にデジタル・アーカイブに関するもの、詳細にはビデオ・データなどのコンテンツのデジタル化、目録づくり、記憶、アクセス、検索、および編集に関するものである。
【０００２】
【従来の技術】
ニュースまたは娯楽番組のプロデューサなどのマルチメディア産業におけるプレイヤーは何千時間というビデオ・コンテンツを自由に使うことができる。例えばよく知られたテレビ娯楽番組は１０万時間のビデオコンテンツの所有を報告し、１週間あたりおよそ６０時間を追加する。
【０００３】
このような番組制作は、しばしばビデオコンテンツが非常に短い時間枠内で編集のために使用可能であることを要求する。例えば、娯楽テレビ番組の最初のセグメントは、次のセグメントがまだ製作されている段階で、既に放送されていることもある。この高速ペースの環境の中では、情報への高速アクセスが重大になってきている。
【０００４】
不幸にも、ビデオコンテンツは現在、アナログまたは連続デジタルのフォーマットでビデオテープに存在し、そのビデオコンテンツの効率的なアクセスや検討が妨げられている。そのオリジナルのアナログ録画の劣化はより重大な関心事である。デジタルアーカイブに情報を記憶することにより情報への高速アクセスおよび劣化の問題を減らすことができる。
【０００５】
製品の質を満たすためには、情報を高いまたは放送用の解像度でデジタル化しなければならない。高解像度ではアーカイブから情報を引き出すため、より広いバンド幅が要求されその結果遅いまた費用のかかる検索システムとなる。
【０００６】
【発明が解決しようとする課題】
従って、テレビ放送に適した質の高いコンテンツ・ストリームを提供するとともに、編集のためのコンテンツへの高速アクセスを許すデジタル・ベースのビデオ編集システムを提供することが必要である。
【０００７】
現在、既存のビデオ・コンテンツを編集するために必要ないくつかの機能を提供するために使用可能な様々な解決方法がある。しかしながら、保存のために既存のビデオ・アーカイブをデジタル化し、検討用絵コンテを作り出すためにビデオを区分化し、視聴および選択目的で効率的にコンテンツへアクセスし、ビデオ・ソースの編集決定リストを作成し、その作られたリストから質の高いコンテンツの製品を生産する機能を提供するための解決策はひとつも存在しない。
【０００８】
付加的な望ましい特徴は、コンテンツの既存の記述情報の付加、及び効率的な検索のための記述情報（メタ・データとしても知られている）の記憶を含む。
【０００９】
またユーザが容易にアクセス可能な、ウエブ・ベースのビデオ編集システムを提供することも望ましい。
【００１０】
【課題を解決するための手段】
本発明はテレビ番組等を製作するために、既存ビデオコンテンツのデジタル化及びそのデジタル化したものの編集のための解決策を提供する。図１を参照するとシステムは３つのメインパート、すなわち収集ステージ１０、記憶ステージ２０、検索ステージ３０を含む。製品用途のための質の高いコンテンツと同時に、編集のための高速アクセスを提供するために、２つのパラレル・パスをとおってデータが流れる。１つのパス、図の右側に見られる高解像度フォーマットパス８は、放送用質の使用のためフル解像度データを記憶する。他のパス、図の左側に示された低解像度フォーマット/メタ・データ・パス６は、アクセスおよび選択処理を容易なものとすることを意図した圧縮ビデオの概要およびテキスト記述子を保存する。その２つのパスは実質上は独立しているが、ビデオソース１１による始まりの時および編集決定リスト(EDL)３１を介する検索処理の間連結される。
【００１１】
収集ステージ１０は既存のビデオテープ・コンテンツから入ってくるデータのデジタル化を処理し、選択的にビデオの区分化および既にコンテンツと関連付けられた任意の記述情報を付加するメカニズムを提供する。ビデオは収集ステーション12にある、低解像度エンコーダー（図示せず）と高解像度エンコーダー13によって、低解像度と高解像度の２つのフォーマットにエンコードされる。低および高解像度のコンテンツはその後別々のファイルに記憶される。本実施例では、使用される低解像度フォーマットはMPEG１であり、高解像度フォーマットはMPEG２である。その再フォーマットされたビデオにはユーザ入力、レガシーデータ、絵コンテおよびオーディオストリームの音声ーテキスト変換処理などのメタデータの注釈をつけることができる。音声ーテキスト変換はオーディオストリームの注釈のためにサポートされているが、そのオーディオ・ストリーム中の録音された音声が処理されているときは、その初期の収集とは異なるステップとしてなされる。
【００１２】
MPEG１とメタ・データは代理編集のために使用される。すなわち選択目的でビデオデータを検索およびブラウズする。その一方MPEG２は最終的な編集および放送のために使用される。結果として、MPEG１とMPEG２の間のタイムコードは同期させられる。
【００１３】
収集操作への入力は１）２つの音声入力パスを含む、ビデオ・テープ・レコーダー（VTR)などのビデオ・ソース１１の出力１４と、２）本ケースでは高解像度エンコーダー１３内にある、タイムコード生成器の出力１５と、３）任意の既存のまたはレガシー記述データとを含む。本実施例においては、レガシー記述データが、DOS Xベース・レガシー・データ・ベースからIBM DB２データ・ベースへ一括してインポートされた。それは任意の既存のカスタマー・アーカイブ、例えばすでに使用されている私有のまたは標準のアーカイブ・システムから供給されることもできる。
【００１４】
収集操作からの出力は１）例えば公称４８メガビット/秒（Mbps)の転送レートでMPEG2のパスを提供するMPEG2Iフレーム専用データ・ストリーム１６，２）例えば１．５Mbpsの転送レートでMPEG1/メタ・データ・パスを提供するためのMPEG1ストリーム、３）またMPEG1/メタ・データ・パスを提供するための、ともに矢印１７で示された、テキスト・ファイル、属性及びサムネールを含む記述データを含む。
【００１５】
一旦ビデオがデジタル化され記述データが集められ生成されると、データは記憶ステージ２０へ進み、２つのメイン・エリアに記録される。MPEG２データは磁気テープを基礎としたシステムなど、容量とアクセス性のために最適化されたアーカイブ高解像度記憶装置２１へ送られる。MPEG１データと記述データはテープに記憶され、対象とするコンテンツやメタデータを編集する間、高速アクセスのためにメディアストリーミング能力のあるデジタルライブラリなどの低解像度記憶装置２２にキャッシュされる。本実施例では、一般に入手可能なIBM Content Managerが、デジタルライブラリと、統合IBM Video Chargerメディア・ストリーミング製品を提供する。
【００１６】
Content Manager ２２はビデオ・メタデータの検索およびブラウジングのためのインターフェースを提供する。検索結果の一部として提供されるサムネールおよびテキスト記述は高速アクセスのためにディスク上に記憶される。MPEG１ビデオはテープ・ライブラリ・システム上に保持され、ディスク上にバッファされ、Content Manager ２２を介して必要とされる時にアクセスされる。
【００１７】
検索ステージ ３０は、MPEG１/メタ・データ・パス６内のブロック３２によって示された編集/選択操作と、MPEG２パス８内の呼び出しステーション３３によって表わされる一括呼び出し操作の、２つのメイン・パートからなる。
【００１８】
編集/選択操作３２によって、プロデューサーはデジタル化されたアーカイブを検索およびブラウズし、次の処理のためのセグメントを選択することができる。プロデューサは、テキストまたは属性により、IBM Content Manager ２２または同様のデジタル・ライブラリ製品を検索し、検索基準にあった一組のビデオを取り戻す。各々のビデオはサムネールおよびテキストによって表される。ある特定のサムネールを選択することにより、プロデューサーは対応するビデオの絵コンテを見ることを要求することができる。絵コンテから、プロデューサーはその後そのシーンのMPEG１ビデオを見ることを要求することができる。そのビデオはその絵コンテ内の選択されたシーンを再生し始める。
【００１９】
プロデューサーはそのデータを検討して、どのセグメントを候補リストへ置くことによって使用することを望むのかを指示する。プロデューサーはその後、候補リスト内にあるビデオセグメントの整理およびトリミングをすることができるようになり、編集/選択操作の出力、すなわち編集決定リスト（EDL）３１を作成する。
【００２０】
EDL３１はMPEG２パス８内にあって一括検索操作を行う呼び出しステーション３３へ送られる。呼び出しステーション３３はEDL３１を使ってMPEG２記憶域２１から適切なセグメントを引き出す。データはテープから引き出され、最終的な編集のための編集ベイ３５への連続送信のためにプロファイル・デコーダー３４へ送られる。
【００２１】
本発明は、高解像度および低解像度のフォーマットの代表的な二つのパスをもって説明されているが、本実施例は三つの解決方法を含んでいる。サムネールはMPEG1コンテンツよりも低解像度で保存され、選択及び編集処理に使用される。さらに本発明の一般的な考えは多重解像度フォーマットをサポートできるよう容易に拡張することができる。ユーザはコンテンツの一部の選択のため、1つのまたはそれ以上の低解像度フォーマットで記憶されたコンテンツを使用することができる。その後呼び出し処理において本発明の原理を使用すれば、製作のために選択されたコンテンツに対応する任意の記憶されている高解像度のフォーマットの部分を引き出すことができる。
【００２２】
【発明の実施の形態】
本発明を特定の実施例、特にビデオ・コンテンツをもって以下に説明する。しかしながら当業者であれば本発明の精神と範囲から離れない様々な変更や置換を思いつくであろうし、また本発明は特許請求の範囲の記載によってのみに制限される。更に発明はすべてのタイプのコンテンツの管理に適している。
【００２３】
収集ステージ１０は、たとえば既存のビデオ・テープまたはライブ・ビデオ供給装置からの受信アナログ・ビデオ・ストリーム１４をデジタル化し、たとえばオペレーター入力、既存の記述、絵コンテを作るためのビデオ・イメージ・キャプチャ、オーディオ・ストリームの音声ーテキスト処理等から供給される記述情報を収集する。
【００２４】
収集のハードウェアの説明をする。図２を参照すると、ある数ｎのビデオ収集ステーション４０がある。本実施例では４つのステーションが与えられているが、ネットワークやサーバの能力に応じてより多くのステーションをサポートすることができる。
【００２５】
各ステーション４０はネットワークに接続できるPCベースのワークステーション４２（本ケースではMicrosoft Windows(R)NTが走っている）に接続されているビデオ・テープ・レコーダー（VTR）４１を含む。ワークステーションまたは収集PC４２は低解像度エンコーダー４５とドライビング・ビデオ・カタログ・ソフトウエア（下記で詳しく説明する）を含む。本実施例では低解像度エンコーダーはPCI MPEG１エンコーダ・ーカードである。
【００２６】
ステーション４０は高解像度エンコーダー１３へのリンク４３を含む。本実施例ではこのリンクはイーサネット(R)またはRS422接続であり、高解像度エンコーダー１３はMPEG２エンコーダからなる。ステーション４０は、たとえば他のイーサネット(R)またはRS422接続使ってＶＴＲに対する制御リンク４７を提供することができる。
【００２７】
本実施例の高解像度エンコーダー13は多重MPEG２ストリームのエンコードをサポートする。その結果１台のマシンでいくつかのビデオ収集ユニットにサービスを提供できる。本実施例中のMPEG1エンコード及びビデオ処理のためのPCIカードはシーン検出及び音声ーテキスト変換ソフトウエア（以下参照）と互換性がある。
【００２８】
ステーション４０は高解像度エンコーダー１３とインターフェースをとることにより、低解像度と高解像度のフォーマット、本実施例ではMPEG１とMPEG２、へアナログ・ビデオ・ストリームを同時変換することができる。高解像度のエンコーダー１３への入力の前に、本実施例のアナログ・ストリーム１４は最初にノイズ削減のためのアンプ/スプリッター（図示なし）とアナログーデジタル変換器４８へ渡される。そしてその変換器４８によって高解像度エンコーダー１３へ直列デジタル・ストリーム１５が供給される。代わりにVTRからエンコーダー１３へ直接デジタル入力を提供することもできる。
【００２９】
本実施例の高解像度エンコーダー１３はMPEG２のエンコードとデコードの両方を提供することで異なるMPEG2標準間の非互換性の可能性を減らしているが、混合解決法を使用することもできる。高解像度エンコーダー13はまた、デジタルーアナログ変換器（図示なし）とタイムコード生成器４４を含む。これらはデジタル化されたビデオ・ストリームをアナログへ変換してその映像にタイムコードを追加し、それリンク４３を介して低解像度エンコーダー４５への入力として供給するために使用される。
【００３０】
前述したように、高解像度ストリーム１６と低解像度ストリーム１７は同期させる必要がある。本実施例ではこの二つを同期させるためにタイムコードを使用する。しかしながらMPEG2ではタイムコードをサポートしているが、MPEG1ではサポートしていない。したがって、もともとタイムコードをサポートしていないフォーマットにおいて、タイムコードをエンコードするための装置が提供される。タイムコード生成器44は高解像度エンコーダー13へタイムコードを供給する。タイムコード生成器44は、本実施例においては高解像度エンコーダー13の一部とすることができる。代わりに、タイムコードはVTRそれ自身によって供給されたり、または既にビデオ映像内に存在することもできる。後者の場合において、このようなタイムコードは同期させるために連続かつ、単調に増加していくことが好ましい。
【００３１】
本実施例のタイムコードはSMPTEタイムコードからなる。高解像度エンコーダー１３は生成したMPEG２ストリーム中にタイムコードをエンコードし、アナログビデオの映像自身に、たとえばタイムコード・キャラクター生成器を使ってタイムコードを焼きつけることにより、タイムコードをスーパーインポーズする。タイムコードは後に選択されたMPEG1フレームから、たとえば光学式文字認識（OCR）技術を使って抽出される。代わりの実施例では、タイムコードは「ウォーターマーク」としてエンコードされ、その後でデコーディング装置によって抽出される。ウォーターマークについては、たとえば米国特許第5,825,892号明細書（特開平10-191017号公報）に記載されている。更に他の代替例として、MPEG１エンコーダーを使用し、エンコーダーのMPEG1標準とVideoChangerを統合することによりタイムコードをMPEG１ファイルから抽出することもできる。本実施例においては新しいタイムコードが生成されたが、ビデオ映像の既存の非連続的なタイムコードもまた、カスタマーがこれらタイムコードへの索引をつけているためサポートされMPEG１の映像に焼き付けられる。
【００３２】
使用されるMPEG１解決策には関係なく、エンコードの処理は可能な限りキャプチャー・タイムコードが整列していることを確実にする必要がある。その目的は選択されたハードウエア及びソフトウエアの能力が許す限りフレームが正確であるためである。本実施例では確認処理が以下のように起こる。ユーザーはMPEG１記録の一部を検討する。そしてアプリケーションによって入力として現在のビデオ・フレーム上に現れているタイムコードを記入個所に入力するよう求められる。あるいはアプリケーション自身が、たとえばサムネールまたは絵コンテの生成の間、自動的にサンプル・ビデオフレームを選択しそのタイムコードを検出する（たとえばOCR技術、ウオーター・マーク・デコーディングなどを用いて）。アプリケーションはその後現在のフレームに対するMPEG1のフレーム番号を調べる。その後もしシステムがすでにビデオの開始フレームとタイムコードを知っているならば、システムは対応関係または「デルタ」を計算しMPEG２ファイルに関連付けられるメタ・データ・ファイルに入れる。あるいは他のサンプル・フレーム及び対応するタイムコード情報が決定され、デルタを計算するためその2つの調整ポイントが使用される。このデルタは後にMPEG２へのオフセットを計算するために使用される。
【００３３】
MPEG１ファイルとMPEG2ファイルの対応するセグメントの例が図3に示されている。MPEG１ファイルの部分１０１が示されている。そのセグメント１０１内にはたくさんの映像があり、その各々が本ケースでは映像に関連付けられるメタ・データとともに記憶されるフレーム番号と関連付けられている。代表的な映像フレーム１０２が示されており、フレーム番号１０７２を有している。その映像フレームの拡大図１０３もまた示されている。その拡大図はその映像フレーム上にスーパーインポーズされたタイムコード１０４を含んでいる。表示されているタイムコード１０４は"０１:００:５０:０２"であるが、これはその映像フレームがMPEG１ストリーム"０１"内で５０秒と２フレームであることを示している。ひとつまたはそれ以上のタイムコードを読み、それらの対応するフレーム番号を知ることによって、システムは自身を調整することができ、その結果任意のフレーム番号に対応する適切なタイムコードを計算することができる。システムはその後高解像度MPEG2ファイル105内にある対応するフレーム106を見つけることができる。
【００３４】
本発明の実施例を実装するために使用されたハードウエアは4つのIBM PC、４つのMPEG２ストリームをサポートする１つのMPEG２エンコーダー・システム（たとえばProfileXP）、４つのPCI MPEG1エンコーダー・カードおよび4つの100 BaseT Ethernet(R)アダプターを含む。
【００３５】
収集アプリケーション・ソフトウエアは多数の方法で実装することが可能である。本実施例のソフトウエアはいくつかのカスタマイズされ統合されたモジュール、すなわちMicrosoft Windows(R)NT Workstation4.0 w/service packs、Virage VideoLogger SDK、IBM Content Manager V6.1、Java(R)、 Virage SDK(IBM製品のJava(R) Runtime Environment 1.1.8）と互換性のある、CまたはC++コンパイラー、およびカスタムIBM Ingest Applicationからなる。ソフトウエアの基本はVirage VideoLoggerおよびそのソフトウエア開発者用のツールキット（SDK）によって提供されるが、他の同様の機能を提供するソフトウエアを使用することもできる。収集アプリケーションはVirage SDKを使用し、既存のビデオテープ・アーカイブのデータ・モデルをサポートする。アプリケーションはまたユーザ入力のためのユーザー・インターフェースを提供し、各ビデオの記述情報を収集し、Content Manager２２のローダーにその記述情報を送る。さらにMPEG1とMPEG2のエンコーダーが外部のタイムコードに対する同期を保たれること確実にする。Content Manager２２はライブラリー・サーバー、テキストサーチ・サーバー、VideoChargerおよびクライエットを含む。
【００３６】
付加的なソフトウエア・データ・ベース機能を説明する。本実施例では、いくつかの付加的な機能が新しいシステムへ組み入れられた。データ入力機能によってユーザーはテープID、キーワード、記述、および著名人の名前などを入力することができる。またIBM社のViaVoiceなどのソフトウエアを使って、またはVTR41からの音声入力を用いてマイクロフォン入力を混合することによって音声注釈を提供することも可能である。検索機能によって、たとえば名前またはキーワードによるサーチが可能となる。検索結果はテープ・レコードの一組の結果セットの形式で与えられる。貸し出し管理機能が物理的なテープ収集のために提供される。システムは付加的にテープ番号によって返却と借り出しのサポートをする。本実施例のレガシー・ライブラリーは各テープの１つの複製を管理する。本システムとは関係のない標準データベース・ツールを使って報告を生成することができる。
【００３７】
収集の処理を説明する。図4に移ると以下のステップが各ビデオテープの処理を概説する。
【００３８】
選択５１。収集操作は所定の選択基準に基づいて処理のためにテープを選択する。たとえば劣化した媒体上に記憶されたコンテンツを優先的に選択することができる。
【００３９】
初期化５２。固有のテープ識別子が収集アプリケーションに入力される。識別子はその後そのテープ・コンテンツと関連付けられた既存のメタデータを取り出す際にContent Manager（CM)に照会するために使われる。識別子はまたCMおよびMPEG2ファイル内の項目の名前つけの基礎として使用することもできる。収集アプリケーションは収集 PC上のシーン検出とMPEG1エンコードのためのハードウエアを初期化する。アプリケーションはプロファイルMPEG2エンコーダーにファイルネームおよび目的位置情報を与えることによってプロファイルMPEG2エンコーダーを初期化する。
【００４０】
処理５３。収集操作員はテープをテープ・プレイヤーにロードする。本実施例の各ビデオテープは１度だけ読み込まれ、テープ・プレイヤーの出力は２つの異なる入力へ送られる。すなわち収集 PC MPEG１カードとプロファイル・ビデオ・フォーマットである。両エンコードは前述したように、タイムコード生成器44によって与えられる整合したタイムコードを共有しなければならない。
【００４１】
エンコード後、MPEG２ストリームはプロファイル記憶システムにあるファイル内に記憶される。そこからMPEG２記憶システムへ転送され磁気テープ上に移される。収集 PCとMPEG１エンコーダーが1.5Mbpsでデジタル化されたファイル内に記憶されるMPEG１ストリームを作る。メタ・データはいくつかの項目、すなわち絵コンテ、基本サムネール、ビデオ・コンテンツに関する情報を記憶するために使用されるレガシー・データベース（選択的に変更される）からのテキスト、オーディオ・トラック音声ーテキスト変換トランスクリプト、オプションとしてMicrosoft Wordまたは他のワードプロセッサーのフォーマットのトランスクリプトおよびオプションとして音声ーテキスト変換注釈からなる。本実施例のメタデータは、基本的に検討と選択の目的で使用されるため、MPEG１ファイルと関連付けられる方法で記憶される。収集アプリケーションとそのユーザー・インターフェースはメタ・データの収集を容易にし、下で相互作用している異なる構成要素の詳細を隠す。
【００４２】
基本サムネール。基本サムネールは初めは属性値から決定されるアイコンによって表される。特定アイコン値は詳細なデザインの一部として決定される。このアイコンは後に編集インターフェースを介してイメージ・サムネールと置き換えることができる。ユーザーは、この後より詳しく説明するが、またこの編集インターフェースを介して他のメタ・データを編集することもできる。
【００４３】
絵コンテ。ビデオ・カタログ・ソフトウエア内のシーン検出技術はビデオ内でシーン変更に印をつけ、各シーンの最初のフレームのサムネールを作り出す。あるいは、サムネールを固定間隔でキャプチャーすることもできる。たとえば本実施例においては、AVIエンコーダーを使ってビデオの30秒ごとにサムネールを作り出している。これらサムネールの集合はビデオの絵コンテを形成する。好ましい実施例では、サムネールが作られる時又はバックグラウンド処理としてにウエブページの絵コンテが作られ、その結果選択処理の間に直ちに絵コンテの検索が可能となる。
【００４４】
レガシーテキスト。最初レガシー・データベースからロードされた記述データがオペレーターによる検討と編集のために表示される。
【００４５】
トランスクリプト。ビデオ・カタログ・ソフトウエア内の音声ーテキスト変換技術はリアルタイムで音声コンテンツのテキスト・ファイルを作るためにオーディオ・ストリームを処理する。このファイルはテキスト検索に使われる。クローズド・キャプションのエンコードも、Virage社のソフトウエア製品はこの機能をサポートしていないので望むならば代替ソフトウエアを使用してキャプチャーすることもできる。
【００４６】
いくつかのビデオ資産もまたMicrosoft Wordまたは他のワードプロセッサー形式のトランスクリプトをもつことができる。これらのトランスクリプトは、使用可能な場合は音声ーテキスト変換出力に追加され、テキスト検索の入力として使用される。収集アプリケーションは任意の既存のトランスクリプト・ファイルを特定するための場所を提供し、ファイル・システム上でそのファイルが使用可能であることを期待する。一旦これらのトランスクリプト・ファイルがロードされると、詳細は後に述べるが、ユーザーは編集インターフェースからそれらを検索し印刷することができる。
【００４７】
音声ーテキスト変換注釈。オペレーターはオプションとして、音声ーテキスト変換技術を使用してキャプチャされる話言葉記述を介してビデオに注釈をつけることができる。この注釈付けは音声ーテキスト変換の完了に続けて行うことができる。
【００４８】
最終処理５５。ストーリーの処理が終了したとき、結果のファイルは最終処理の用意ができている。MPEG1ファイル、テキスト・メタ・データ、サムネール、絵コンテおよび音声ーテキスト変換出力は一緒にグループ化され、最終検討のためユーザーに提供される。ユーザーはロードするデータをIBM Content Managerに渡す前に、正確さと質を求めて出力を抽出検査することができる。この時点でユーザーはエンコードの質が受け入れられるかまたは繰り返しが必要かどうかを決定すると共に、レガシー・データベースからの属性データを更に変更することができる。
【００４９】
一旦ビデオテープの終わりにくると、アプリケーションは初期状態へリセットされ次のテープに対して用意される。
【００５０】
収集操作はテープ・プレイヤーが連続して動作し、各テープが一度だけ再生されるよう十分にすばやくビデオを処理することができなければならない。本実施例の４ステーション収集システムは1週間のうち6日、1日に16時間、4つの収集ステーションで収集処理が実行されるようにデザインされている。各ステーションは1日に8ないし10時間分のビデオをエンコードする。データのスループットが許せばステーションを追加することができる。
【００５１】
「ストレージ」について説明する。記憶容量は本発明において重要な面である。たとえば100,000時間のビデオを1.5MbpsのMPEG1と48MbpsのIフレーム専用MPEG２の両方のフォーマットでエンコードするためには、２ペタ・バイトの記憶容量を必要とする。
【００５２】
このコンテンツを効率的にエンコード、保存および検索するにはストレージは十分な容量を必要とするだけでなく、収集ステーションからテープへ、そしてフルフィルメントへ効率よくファイルを転送することができなければならない。更に低速アクセスがMPEG2の検索に許される一方で、MPEG1のパスに対し高速アクセスが提供されなければならない。多数のストレージ・アーキテクチャが前述の要求を処理するため実装することができるが、以下にMPEG１とMPEG２に対する本実施例のハードウエアと記憶方式の説明をする。
【００５３】
ストレージ・エリア・ネットワーク（SAN）について説明する。図5を参照すると本実施例は異なるプラットホーム上にあるいくつかのシステムに対してかなりの量のディスク・ストレージを供給する。非常に大きなデータがシステム間を動くので、弾力性、拡張性のあるストレージ・アーキテクチャーが実装されている。1.5TBのストレージはAIX上の700GBのIBM Videocharger６２、AIX上の２００GBのIBM Content Managerデジタル・ライブラリー６１およびともにAIX上で動作するLinear Tape-Open（LTO）テープバッファ６３に接続されている６００GBの Tivoli Storage Manager(TSM)２１からなる。付加的に1１００GBまたはそれ以上が高解像度エンコーダー１３において使用可能である。
【００５４】
SANデバイス６４が、ここでは７１３３ーD40を含んでいるが、シリアル・ストレージ・アーキテクチャ（SSA）を介してシステムとインターフェースをとっているストレージを統合する。SANデバイスはシステムに対してローカルディスクドライブにみえる。SANはいくつかの重要な利点を提供する。たとえば、ストレージはディスク・スペースの効率的な割り振りを認めつつ、必要に応じてシステムに割り振られる。システムはスペースが足りなくなることも過剰なスペースをもつこともない。システムのストレージはさらにドライブを追加するためにそれを開けることなく増加することができる。SANはRAID、ホット・スワップ、ホット・スタンバイ、冗長コンポーネントおよびパフォーマンス・モニター能力を提供する。データを外部化することによって、システムが故障してもデータへのアクセスは妨げられない。外部化されたデータは高可用性アーキテクチャを容易にする。
【００５５】
「MPEG１ファイルとメタ・データの記憶」について説明する。MPEG1ファイル及び関連付けられるメタ・データはリンク６６経由で記憶ステージ２０に渡され、IBM Content Manager V6.1 22によって管理されているIBM VideoCharger ６２に記憶される。図にあるようにIBM Content Manager ソリューションはAIX4.3.2が走っている２つのモデルH50 R/6000マシン上にある。1つはContent Managerのデジタル・ライブラリー部６１のためであり、1つはVideoCharger６２のためである。
【００５６】
ステージングとバッファリングはディスク上でおこる。LTOテープ・ライブラリ６３とTSM21はウルトラSCCIリンク６５を介して接続されている。そして長期保管のために使用される。1000BaseT イーサネット（R）接続もまた提供される。検索結果に使用されるサムネールとメタ・データはディスク上に保存され、効率的な検索時間を確実にする。VCは即時ストリーミングのために使用可能な1000時間のMPEG1ビデオのディスク・バッファ容量を提供する。
【００５７】
「MPEG２の記憶」について説明する。本実施例のMPEG２データはAIXとTSMが走っているR/6000システム上に記憶される。高解像度エンコーダー１３はファイバ・チャネル接続を介してTSMに接続されている。初期のステージングとバッファリングは長期保管のためのLTOテープライブラリ６３を有するディスクに対して行われる。
【００５８】
「編集/選択操作」について説明する。編集/選択操作は図６に示された検索処理の一部である。ビデオ編集システムは1つまたはそれ以上のサーバー６８によってホスティングされ、それゆえ編集/選択クライアント・マシン３２上にカスタム・ソフトウエアを持つことなしに操作することができる。複数の編集/選択ステーション３２がアーカイブ対象ビデオ資産の配置、検討および選択を容易にするために提供される。このウエブ・ベースのシステムにより、ビデオ・クリップのセットを共有することでビデオ編集者間のコラボレーションが可能になる。また当該システムによって複数のユーザが同じビデオ記憶ハードウエア２０、ビデオコンテンツ、ビデオ処理ハードウエア34およびビデオソフトウエアの集まりを共有することができる。
【００５９】
プロデューサーはコンテンツを、たとえばテキスト・ストリングおよびキーワードにより検索し、その後戻されたサムネール、テキスト記述、絵コンテを検討し選択範囲を絞っていく。一旦十分に範囲を狭めたら、どのセグメントを使用するかについて最終的な決定をするためにMPEG１ビデオを視聴する。選択されたセグメントはその後候補リストに置かれEDLの生成に使用される。プロデューサーは候補リストからセグメントを見て、選択し、トリミングし、順序付けして最終的なEDL３１を製作することができる。当該処理の任意の時点で、プロデューサーは現在のEDLをプレビューすることができる。結果として生じたEDLは高解像度呼び出し処理３３へSAN６４を介して送られ、どのMPEG２ファイルがテープから呼び出されるのかを指示するのに使用される。
【００６０】
本実施例の検索、ブラウズおよびEDL生成操作はたとえばウエブ、Java(R)言語またはC言語のアプリケーションの組み合わせにより実現される。最終的なEDL３１のフォーマットはユーザの要求に合わせることができる。同様にユーザーの要求はたとえばすでにユーザが使っているアプリケーションに依存する。EDL３１はファイル名、開始タイムコード及び停止タイムコードをもったビデオ・セグメントの単純で非階層的なリストからなる。
【００６１】
「編集/選択のハードウエア」について説明する。編集/選択ステーション３２は各々たとえばWindows(R) ９８とJava(R) １.１.８の機能をもったウエブ・ブラウザとが走っているパーソナル・コンピューターからなる。選択するソフトウエアによって、追加PCIカードが含まれる。本実施例においては、２５のステーションが編集/選択操作を同時に実行するように構築されている。
【００６２】
「編集/選択のソフトウエア」について説明する。編集/選択ステーション32のソフトウエアはInternet Explore V5.0、Java(R) Runtime Environment1.1.8、IBM社のNetDataおよび MPEG1プレイヤーを含むいくつかの基礎コンポーネントを統合した。本実施例では、検索機能はすべてNet.Dataを介したウエブ・ベースのものである。一方でビデオ選択はローカルに走っているVideoCharger プレイヤーの修正版を使ってなされる。
【００６３】
編集/選択ソフトウエアはユーザー・インターフェースといくつかの基礎機能を提供して、ユーザーがテキストベースの検索をし、その結果を検討し、セグメントを選択し、そこからEDLを生成して最終的なEDLをMPEG２呼び出し操作３３へ送ることを可能にしている。フレキシビルディスクによるEDLの配布もスタンドアロンの編集ベイ３５のためにサポートされている。
【００６４】
EDL３１はウエブ・サーバー６８上に保存されており、その結果EDL３１を他のユーザーと共有することができる。また他のユーザのアクセスまたは変更を制限することができるように、EDL３１をアクセス保護しておいてもよい。
【００６５】
編集/選択ソフトウエアの付加的な機能によりユーザはアーカイブを検索して、各ビデオに関連付けられたメタ・データを更新することができる。特にユーザーはサムネールを置き換えたり、音声ーテキスト変換注釈とビデオ解析から作成されたレガシー属性データとテキスト・ソースを修正したりすることができる。テキストはたとえばキーボード入力により変更される。検索クライアントはContent Managerデジタル・ライブラリー６１とVideoCharger６２に接続されているアプリケーションである。
【００６６】
「編集/選択操作」について説明する。編集/選択処理を図７を使って説明する。
【００６７】
初期化８１。初期化において、プログラムは現在のEDLを消去したり、ストリースラグとして知られているジョブ識別ストリングを入力として要求したりする。ストリースラグは編集/選択操作、MPEG２呼び出し処理３３、および編集ベイ３５の間で活動を調整するために使用される。
【００６８】
テキスト照会８２。プロデューサーは自分が探している主題を表す言葉やフレーズを入力することによりスタートする。この入力からContent Manager２２へ送られる照会文（クエリー）が作り出される。Content Manager２２はその照会分にどれだけ近く適合するかによってランクづけられた一組の候補を返す。各候補はサムネールによって表され、収集ステージ１０で入力された記述テキストを含む。テキストのサイズのため、必要なときには追加ページで候補のサブセットが提供される。代わりのフォーマットもまた可能である。
【００６９】
正確なテキスト照会の実行とサーチ結果はCM内で使用される基本のデータモデルに依存する。データ・モデルとユーザー・インターフェースはカスタマーの要求に依存する。
【００７０】
予想される使用のためのビデオのステージング（先取り）。特別のトピックに関するコンテンツに対する要求があることが知られているとき、このトピックに関するすべての資料は容易に使用できることが必要とされる。そのためにプロデューサーまたはライブラリアンはそのトピックに関してサーチを実行し、予想される使用のため対応するビデオをステージングする。これは現時点でビデオを再生するというよりもむしろ将来の高速アクセスのためにテープからディスクへ当該ビデオを呼び出すためである。それゆえ本実施例の編集/選択処理は再生リクエストとステージングまたは取り込みリクエストの両方をサポートする。再生操作はMPEG1プレイヤーでビデオを再生する。一方ステージング操作はVideoChargerのステージング領域内にビデオを取り込むだけである。本実施例においてはディスク上にはMPEG1ビデオ1000時間分の容量があるが、ユーザーの要求に依存して更に追加することもできる。
【００７１】
サムネールの検討８３。プロデューサーはサムネールと記述データを検討しどの候補が更なる調査が必要であるかを決定する。プロデューサーはサムネールをクリックし、更なる処理のため選択する。これにより絵コンテが作成される。絵コンテはこのビデオテープのためにキャプチャーされた一組のサムネールからなる。プロデューサーがMPEG１ビデオをみることを選択した場合、絵コンテが要求されると高速の視聴を可能とするためにすぐ関連するビデオファイルがVideoChargerサーバー６２ヘステージングされる。
【００７２】
絵コンテの検討84。絵コンテは各々がビデオ内のシーン（収集ビデオログソフトウエアによって以前に決定されている）を表す、一続きのサムネールにより構成される。もし絵コンテが引き続き興味をもたらしたときには、プロデューサーは関連するセクションをクリックして、そのMPEG1のプレイヤーを起動する。プレイヤーはVCサーバーからビデオを取り込みその選択されたセクションのビデオを再生し始める。
【００７３】
候補選択８５。プレイヤーは絵コンテ内のサムネールと一致した時点のMPEG１ビデオをロードし再生し始める。プロデューサーはビデオを再生したりまたは特定した位置へジャンプしてそこから再生することができる。プロデューサーはビデオのどのセクションに興味があるかを決定し、そのスタートとストップの時刻をマークし、編集/選択クライアント32内にある候補リストにそのセクションを加える。プロデューサーはその後同じテープ内の追加のセクションをマークしたり、判断ブロック８６で表されているように、絵コンテの検討ステップ８４にもどって新しいセクションにジャンプしたり、サムネール検討８３に戻ったり若しくはステップ８２で新しいテキスト照会を実行したりできる。一旦候補が現在のストリースラグに対して選択されると、プロデューサーはMPEG１の検討およびEDLの生成ステップ８７に進む。
【００７４】
MPEG１の検討/EDLの生成８７。MPEG１の検討およびEDLの生成ステップ87は候補リスト内のビデオセクションを検討し、選択し、トリミングし、順序付ける機能を提供する。完了したとき、その結果物であるEDLは決められた標準形式のEDLに変換される。
【００７５】
編集/選択クライアント３２は候補リストからビデオを選択し、それをプレイヤーを使って再生し、開始フレーム番号及び終了フレーム番号の形でひとつまたはそれ以上のスタートとストップの時刻をマークし、その後それをEDLに追加するためにグラフィカル・ユーザー・インターフェース(GUI）を提供する。そのスタートとストップの時刻はたとえばプレイヤー上のマークボタンを使って、または２つのSMPTE（タイムコード）フィールドに記入することによって設定される。一旦１つのビデオの処理がなされると、所望の全ビデオがEDLに追加されるまで他のビデオが選択されマークされる。EDL内のビデオはその後再順序付けしたり、取り除いたり、入れ替えたりすることができる。
【００７６】
EDL３１の一例が図8に示されている。これは基本的には、ビデオID番号（縦の列11）、開始マーカー(縦の列12）及び終了マーカー（縦の列13）によって識別される選択されたビデオ・セグメントのリストである。開始マーカー及び終了マーカーは後に対応するタイムコードに変換されるフレームによって表されている。あるいは読み取られるか計算されるタイムコードそれ自体で表すこともできる。
【００７７】
この処理の間ずっとEDLはプレビューモードで再生することができる。もしそれが満足いくものに見えない場合は、上記の処理をEDLが完成するまで繰り返すことができる。更に、もし他のビデオセグメントを候補リストに追加する必要がある場合には、図７の判断ブロック８８によって示されているように、プロデューサーは追加検索を実行し、新たなセグメントを既存の候補リストに追加することができる。
【００７８】
MPEG１プレイヤーによって提供される機能は、再生、停止、ポーズ、フレームを進める、フレームを戻す、ある場所にジャンプする、スタートをマークする、ストップをマークすることなどを含むが、それらに制限されることはない。更にスライダー制御がビデオのさまざまな部分への移動を容易にするために提供される。
【００７９】
最終処理８９。一旦EDL作成が完了するとプロデューサーは結果物であるEDLの保管とオプションとして提出を要求することができる。このとき次のことが起こる。EDLは決められた標準EDL形式へ変換される。EDLはたとえば、後の検討や修正のためにディスクまたはContent Managerサーバー６１へ保管される。提出のとき、EDL３１はMPEG２呼び出しステーショ３３へ送られ、その結果対応するMPEG２ビデオ・セグメントをアーカイブから検索し、プロファイル・デコーダー３４へ送ることができる。そのEDLのコピー３８はまた編集ベイ３５、たとえばフレキシビルディスク上へ送ることができる。アプリケーションはその後それ自身を初期化し次のジョブの準備をする。
【００８０】
「MPEG２呼び出し操作」について説明する。図６、８、９を参照するとMPEG2呼び出しステーション３３は図９の最初のステップ９１において、編集/選択ステーション３２からEDL３１を受け取る。ステップ９２に示してあるように、コンテンツに基づいて呼び出しステーション３３はテープ６３からディスク２１へのMPEG２ファイルの呼び出しを開始する。EDL内の各ビデオセグメントの開始マーカーと終了マーカーはテープにあるMPEG２ファイルへのバイト・オフセットを計算するために使用される。本実施例にしたがうと、システムのパフォーマンスを増加させるためにファイルの要求される部分のみがテープ６３から検索される。このサブファイル検索操作はTSMクライアント２１内でサポートされている。
【００８１】
ハンドルをもったセグメントは有効なプロファイルMPEG2フォーマットファイルへ再フォーマットされる。ステーション33はその後プロファイル・デコーダー34へのMPEG2の適切な転送を監視する。
【００８２】
「呼び出しハードウエア」について説明する。本実施例のMPEG2呼び出しステーション３３は1000baseT Ethernet（R）を介してIBM PCサーバーとつながっているWindows(R) NTベースのPCである。これはEDL内で指定された低解像度のビデオ・セグメントからタイムコードを抽出するための装置を含む。またたとえばInterphase5527といったファイバー・チャネル・カードを含む。
【００８３】
「呼び出しソフトウエア」について説明する。MPEG２呼び出しソフトウエアは前述の呼び出しステーションの機能を提供するIBM製カスタム・ソフトウエアからなる。
【００８４】
「MPEG２呼び出し操作」について図９を参照して説明する。
【００８５】
ファイル受信９１。呼び出しシステム３３は編集/選択ステーション３２に接続されたサーバー６８からEDL３１を受け取る。
【００８６】
ファイル処理。アプリケーションはステップ９２でEDLファイルを開き、ステップ９３で各セグメントのテープ識別子を読む。次のステップ９４で、アプリケーションはファイル・セグメントがすでにバッファされているかみるために記憶バッファをチェックする。バッファされていた場合には、その後処理はステップ９３に戻されて次のEDLセグメントのIDが読まれる。セグメントがバッファされていない場合には、その後次のステップ９５において、アプリケーションはTSMのAPIを使ってMPEG２記憶領域から適切なファイルセグメントの部分オブジェクト呼び出しを要求し、受信するとデータを修正してそのセグメントを記憶されているのと同じフォーマットの有効なMPEG2ファイルにする。前述したように、関連あるセグメントといくつかの追加のバッファのみがテープから取り出される。この処理は、ステップ９６に示されているように、EDLのすべてのセグメントが取り出されるまで続く。
【００８７】
最終処理。MPEG２のすべてのファイル・セグメントが呼び出されたとき、ステップ９７においてEDLファイルは閉じられる。MPEG２ファイルはその後次のステップ９８において、たとえばファイバー・チャネルのファイル転送プロトコル（FTP）により、プロファイル・デコーダー３４に転送される。
【００８８】
「プロファイル/編集ベイ」について説明する。図６に戻って、プロファイル・デコーダー３４はそのディスクからMPEG２ファイルを読み込み、それをMJPEGに変換し、最終の編集のため編集ベイ３５へシリアルのデジタル出力を送る。
プロデューサーはMPEG２呼び出し操作によってプロファイル上におかれたそのファイルにアクセスする。
【００８９】
「ハードウエア」について説明する。本実施例のプロファイル・デコーダー３４は多チャンネル・ハードドライブ・コントローラーをもったMPEG２デコーダー３４からなり、編集ベイステーション３５はデコーダー３４の制御を行うPCからなる。
【００９０】
結論として、説明されたシステムは効率的な、コンテンツの編集及び製作のための効率的なソリューションを提供する。
【図面の簡単な説明】
【図１】収集ステージ、記憶ステージ及び検索ステージを含む、本発明の２つのパスをもつコンテンツ管理システムを表したブロック図である。
【図２】収集ステージを表したブロック図である。
【図３】高解像度と低解像度のコンテンツのセグメントの対応フレームを表した図である。
【図４】収集処理を表した流れ図である。
【図５】記憶ステージを表したブロック図である。
【図６】記憶ステージ及び検索ステージを表したブロック図である。
【図７】編集/選択処理を表した流れ図である。
【図８】編集決定リストを表した図である。
【図９】呼び出し処理を表した流れ図である。
Claims (24)
- 異なるフォーマットで記憶されたコンテンツ・セグメントの選択を指定するための方法であって、
第１のフォーマットで記憶された第１のコンテンツの複数の部分についての明細を受け取るステップであって、前記明細は各部分の開始フレームと終了フレームを識別する、前記受け取るステップと、
前記第１のコンテンツの各選択された部分の開始マーカーと終了マーカーを含むリストを作成するステップであって、前記リストは、第２のフォーマットで第２のコンテンツとして記憶されている同じコンテンツの対応する部分にアクセスするために使用され、前記開始マーカーと前記終了マーカーがフレーム番号を含む、前記作成するステップと
を含み、
前記第１のコンテンツがそのフレーム上にスーパーインポーズされたタイムコードを含み、前記第１のコンテンツのフレーム番号とタイムコードとの間の対応関係を決定し、そして該決定された前記対応関係を用いて前記開始マーカーと前記終了マーカーをタイムコードに変換するステップをさらに含むことを特徴とする、方法。 - 異なるフォーマットで記憶されたコンテンツ・セグメントの選択を指定するための方法であって、
第１のフォーマットで記憶された第１のコンテンツの複数の部分についての明細を受け取るステップであって、前記明細は各部分の開始フレームと終了フレームを識別する、前記受け取るステップと、
前記第１のコンテンツの各選択された部分の開始マーカーと終了マーカーを含むリストを作成するステップであって、前記リストは、第２のフォーマットで第２のコンテンツとして記憶されている同じコンテンツの対応する部分にアクセスするために使用され、前記開始マーカーと前記終了マーカーがタイムコードを含む、前記作成するステップと
を含み、
前記第１のコンテンツがそのフレーム上にスーパーインポーズされたタイムコードを含み、前記第１のコンテンツのフレーム番号とタイムコードとの間の対応関係を決定し、そして該決定された前記対応関係を用いて前記各選択された部分の開始フレームと終了フレームに対するタイムコードを計算するステップをさらに含むことを特徴とする、方法。 - 前記タイムコードが、前記第１のコンテンツから抽出される、請求項２に記載の方法。
- 前記抽出が、光学式文字認識技術を使って抽出される、請求項３に記載の方法。
- 前記第２のフォーマットが前記第１のフォーマットより高い解像度を有する、請求項１〜４のいずれか一項に記載の方法。
- 前記第１のフォーマットがＭＰＥＧ１であり、かつ前記第２のフォーマットがＭＰＥＧ２である、請求項１〜５のいずれか一項に記載の方法。
- 前記第１のコンテンツ及び前記第２コンテンツが、ビデオ・コンテンツである、請求項１〜６のいずれか一項に記載の方法。
- 前記作成されたリストに従い、該リストに対応する第２のコンテンツを検索するステップをさらに含む、請求項１〜７のいずれか一項に記載の方法。
- 異なるフォーマットで記憶されたコンテンツ・セグメントの選択を指定するための方法を実施する命令であって、コンピューターによって実行可能な前記命令を記録したコンピ ューター・プログラムであって、
第１のフォーマットで記憶された第１のコンテンツの複数の部分についての明細を受け取るステップであって、前記明細は各部分の開始フレームと終了フレームを識別する、前記受け取るステップと、
前記第１のコンテンツの各選択された部分の開始マーカーと終了マーカーを含むリストを作成するステップであって、前記リストは、第２のフォーマットで第２のコンテンツとして記憶されている同じコンテンツの対応する部分にアクセスするために使用され、前記開始マーカーと前記終了マーカーがフレーム番号を含む、前記作成するステップと
を含む命令を記録し、
前記第１のコンテンツがそのフレーム上にスーパーインポーズされたタイムコードを含み、前記第１のコンテンツのフレーム番号とタイムコードとの間の対応関係を決定し、そして該決定された前記対応関係を使って前記開始マーカーと前記終了マーカーをタイムコードに変換するステップをさらに含む命令を記録したコンピューター・プログラム。 - 異なるフォーマットで記憶されたコンテンツ・セグメントの選択を指定するための方法を実施する命令であって、コンピューターによって実行可能な前記命令を記録したコンピューター・プログラムであって、
第１のフォーマットで記憶された第１のコンテンツの複数の部分についての明細を受け取るステップであって、前記明細は各部分の開始フレームと終了フレームを識別する、前記受け取るステップと、
前記第１のコンテンツの各選択された部分の開始マーカーと終了マーカーを含むリストを作成するステップであって、前記リストは、第２のフォーマットで第２のコンテンツとして記憶されている同じコンテンツの対応する部分にアクセスするために使用され、前記開始マーカーと前記終了マーカーがタイムコードを含む、前記作成するステップと
を含む命令を記録し、
前記第１のコンテンツがそのフレーム上にスーパーインポーズされたタイムコードを含み、前記第１のコンテンツのフレーム番号とタイムコードとの間の対応関係を決定し、そして該決定された前記対応関係を用いて前記各選択された部分の開始フレームと終了フレームに対するタイムコードを計算するステップをさらに含む命令を記録したコンピューター・プログラム。 - 前記タイムコードが、前記第１のコンテンツから抽出される、請求項１０に記載のコンピューター・プログラム。
- 前記抽出が、光学式文字認識技術を使って抽出される、請求項１１に記載のコンピューター・プログラム。
- 前記第２のフォーマットが前記第１のフォーマットより高い解像度を有する、請求項９〜１２のいずれか一項に記載のコンピューター・プログラム。
- 前記第１のフォーマットがＭＰＥＧ１であり、かつ前記第２のフォーマットがＭＰＥＧ２である、請求項９〜１３のいずれか一項に記載のコンピューター・プログラム。
- 前記第１のコンテンツ及び前記第２コンテンツが、ビデオ・コンテンツである、請求項９〜１４のいずれか一項に記載のコンピューター・プログラム。
- 前記作成されたリストに従い、該リストに対応する第２のコンテンツを検索するステップをさらに含む命令を記録した請求項９〜１５のいずれか一項に記載のコンピューター・プログラム。
- 異なるフォーマットで記憶されたコンテンツ・セグメントの選択を指定するためのシステムであって、
第１のフォーマットで記憶された第１のコンテンツの複数の部分についての明細を受け取る手段であって、前記明細は各部分の開始フレームと終了フレームを識別する、前記明細を受け取る手段と、
第１のコンテンツの各選択された部分の開始マーカーと終了マーカーを含むリストを作成する手段であって、前記リストは、第２のフォーマットで第２のコンテンツとして記憶されている同じコンテンツの対応する部分にアクセスするために使用され、前記開始マーカーと前記終了マーカーがフレーム番号を含む、前記作成する手段と
を含み、
前記第１のコンテンツがそのフレーム上にスーパーインポーズされたタイムコードを含み、前記第１のコンテンツのフレーム番号とタイムコードとの間の対応関係を決定し、そして該決定された前記対応関係を用いて前記開始マーカーと前記終了マーカーをタイムコードに変換する手段をさらに含むことを特徴とする、システム。 - 異なるフォーマットで記憶されたコンテンツ・セグメントの選択を指定するためのシステムであって、
第１のフォーマットで記憶された第１のコンテンツの複数の部分についての明細を受け取る手段であって、前記明細は各部分の開始フレームと終了フレームを識別する、前記明細を受け取る手段と、
第１のコンテンツの各選択された部分の開始マーカーと終了マーカーを含むリストを作成する手段であって、前記リストは、第２のフォーマットで第２のコンテンツとして記憶されている同じコンテンツの対応する部分にアクセスするために使用され、前記開始マーカーと前記終了マーカーがタイムコードを含む、前記作成する手段と
を含み、
前記第１のコンテンツがそのフレーム上にスーパーインポーズされたタイムコードを含み、前記第１のコンテンツのフレーム番号とタイムコードとの間の対応関係を決定し、そして該決定された前記対応関係を用いて前記各選択された部分の開始フレームと終了フレームに対するタイムコードを計算する手段をさらに含むことを特徴とする、システム。 - 前記タイムコードが、前記第１のコンテンツから抽出される、請求項１８に記載のシステム。
- 前記抽出が、光学式文字認識技術を使って抽出される、請求項１９に記載のシステム。
- 前記第２のフォーマットが前記第１のフォーマットより高い解像度を有する、請求項１７〜２０のいずれか一項に記載のシステム。
- 前記第１のフォーマットがＭＰＥＧ１であり、かつ前記第２のフォーマットがＭＰＥＧ２である、請求項１７〜２１のいずれか一項に記載のシステム。
- 前記第１のコンテンツ及び前記第２コンテンツが、ビデオ・コンテンツである、請求項１７〜２２のいずれか一項に記載のシステム。
- 前記作成されたリストに従い、該リストに対応する第２のコンテンツを検索する手段をさらに含む、請求項１７〜２３のいずれか一項に記載のシステム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US09/829,676 US7280738B2 (en) | 2001-04-09 | 2001-04-09 | Method and system for specifying a selection of content segments stored in different formats |
| US09/829676 | 2001-04-09 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003061041A JP2003061041A (ja) | 2003-02-28 |
| JP3726957B2 true JP3726957B2 (ja) | 2005-12-14 |
Family
ID=25255212
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002104773A Expired - Fee Related JP3726957B2 (ja) | 2001-04-09 | 2002-04-08 | 異なるフォーマットで記憶されたコンテンツセグメントの選択を指定するための方法とシステム |
Country Status (2)
| Country | Link |
|---|---|
| US (2) | US7280738B2 (ja) |
| JP (1) | JP3726957B2 (ja) |
Families Citing this family (71)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7266704B2 (en) * | 2000-12-18 | 2007-09-04 | Digimarc Corporation | User-friendly rights management systems and methods |
| US7280738B2 (en) * | 2001-04-09 | 2007-10-09 | International Business Machines Corporation | Method and system for specifying a selection of content segments stored in different formats |
| US8972862B2 (en) * | 2001-06-27 | 2015-03-03 | Verizon Patent And Licensing Inc. | Method and system for providing remote digital media ingest with centralized editorial control |
| JP4057268B2 (ja) * | 2001-09-26 | 2008-03-05 | 富士フイルム株式会社 | 鑑賞用データ保管方法および装置、注文情報生成方法および装置、鑑賞用データ処理方法および装置並びにプログラム |
| US7149957B2 (en) | 2001-11-19 | 2006-12-12 | Ricoh Company, Ltd. | Techniques for retrieving multimedia information using a paper-based interface |
| US7788080B2 (en) | 2001-11-19 | 2010-08-31 | Ricoh Company, Ltd. | Paper interface for simulation environments |
| US7743347B2 (en) * | 2001-11-19 | 2010-06-22 | Ricoh Company, Ltd. | Paper-based interface for specifying ranges |
| US8539344B2 (en) | 2001-11-19 | 2013-09-17 | Ricoh Company, Ltd. | Paper-based interface for multimedia information stored by multiple multimedia documents |
| US7861169B2 (en) | 2001-11-19 | 2010-12-28 | Ricoh Co. Ltd. | Multimedia print driver dialog interfaces |
| US7747655B2 (en) | 2001-11-19 | 2010-06-29 | Ricoh Co. Ltd. | Printable representations for time-based media |
| US7703044B2 (en) | 2001-11-19 | 2010-04-20 | Ricoh Company, Ltd. | Techniques for generating a static representation for time-based media information |
| KR100453966B1 (ko) * | 2002-01-09 | 2004-10-20 | 엘지전자 주식회사 | 방송 프로그램의 대표화면 표시방법 |
| JP2003224810A (ja) * | 2002-01-29 | 2003-08-08 | Matsushita Electric Ind Co Ltd | 音声／映像データ記録再生装置および方法、音声／映像データ記録再生装置および方法により記録が行われた記録媒体、音声／映像データ再生装置、音声／映像データ記録再生システムおよび方法、音声／映像データ記録再生システムおよび方法により記録が行われた記録媒体、ならびにデータ構造体 |
| JP3885597B2 (ja) | 2002-02-05 | 2007-02-21 | ソニー株式会社 | 無線通信システム及び無線通信制御方法、無線通信装置及び無線通信方法、並びにコンピュータ・プログラム |
| JP4040907B2 (ja) * | 2002-05-21 | 2008-01-30 | オリオン電機株式会社 | 記録再生装置 |
| US20040120698A1 (en) * | 2002-12-20 | 2004-06-24 | Microsoft Corporation | System and method of transferring DV metadata to DVD-video data |
| EP1494237A1 (en) * | 2003-07-01 | 2005-01-05 | Deutsche Thomson-Brandt Gmbh | Method and apparatus for editing a data stream |
| US8077341B2 (en) | 2003-09-25 | 2011-12-13 | Ricoh Co., Ltd. | Printer with audio or video receiver, recorder, and real-time content-based processing logic |
| JP2005108230A (ja) | 2003-09-25 | 2005-04-21 | Ricoh Co Ltd | オーディオ／ビデオコンテンツ認識・処理機能内蔵印刷システム |
| US7864352B2 (en) | 2003-09-25 | 2011-01-04 | Ricoh Co. Ltd. | Printer with multimedia server |
| US8327411B2 (en) * | 2003-12-01 | 2012-12-04 | Sharp Laboratories Of America, Inc. | Low-latency random access to compressed video |
| US8274666B2 (en) | 2004-03-30 | 2012-09-25 | Ricoh Co., Ltd. | Projector/printer for displaying or printing of documents |
| JP4459179B2 (ja) * | 2005-03-30 | 2010-04-28 | 株式会社東芝 | 情報処理装置及びその方法 |
| JP2006331591A (ja) * | 2005-05-30 | 2006-12-07 | Sony Corp | 情報処理装置および方法、並びにプログラム |
| US7656462B2 (en) * | 2005-06-17 | 2010-02-02 | Martin Weston | Systems and methods for modifying master film for viewing at different viewing locations |
| US8577967B1 (en) | 2005-06-30 | 2013-11-05 | Google Inc. | Method and system for managing real-time communications in an email inbox |
| US12069124B2 (en) * | 2006-03-31 | 2024-08-20 | Stt Webos, Inc. | Method and apparatus for information exchange over a web based environment |
| US20070233741A1 (en) * | 2006-03-31 | 2007-10-04 | Masstech Group Inc. | Interface for seamless integration of a non-linear editing system and a data archive system |
| CA2651860A1 (en) * | 2006-05-12 | 2007-11-22 | Barjinderpal S. Gill | System and method for distributing a media product by providing access to an edit decision list |
| JP4285512B2 (ja) | 2006-07-31 | 2009-06-24 | ソニー株式会社 | 記録装置、記録方法、再生装置、再生方法、記録再生装置、記録再生方法、撮像記録装置及び撮像記録方法 |
| JP4967572B2 (ja) | 2006-09-29 | 2012-07-04 | ソニー株式会社 | 記録再生装置及び記録再生方法 |
| JP4659714B2 (ja) | 2006-09-29 | 2011-03-30 | ソニー株式会社 | 記録再生装置及びコンテンツ管理方法 |
| US20080141334A1 (en) * | 2006-12-12 | 2008-06-12 | Wicker James M | Method and Apparatus for Dissociating Binding Information from Objects to Enable Proper Rights Management |
| US8943410B2 (en) | 2006-12-22 | 2015-01-27 | Apple Inc. | Modified media presentation during scrubbing |
| US8020100B2 (en) | 2006-12-22 | 2011-09-13 | Apple Inc. | Fast creation of video segments |
| US7992097B2 (en) | 2006-12-22 | 2011-08-02 | Apple Inc. | Select drag and drop operations on video thumbnails across clip boundaries |
| US20080193100A1 (en) * | 2007-02-12 | 2008-08-14 | Geoffrey King Baum | Methods and apparatus for processing edits to online video |
| JP5005396B2 (ja) * | 2007-03-09 | 2012-08-22 | パイオニア株式会社 | 映像音声記録装置 |
| US8086902B2 (en) * | 2007-04-16 | 2011-12-27 | Microsoft Corporation | Method and apparatus for testing media player software applications |
| US8065741B1 (en) | 2007-04-24 | 2011-11-22 | Adobe Systems Incorporated | Method and apparatus for locally caching digital rights information |
| US10269388B2 (en) * | 2007-08-21 | 2019-04-23 | Adobe Inc. | Clip-specific asset configuration |
| JP5210063B2 (ja) * | 2008-07-10 | 2013-06-12 | パナソニック株式会社 | 音声画像記録装置 |
| US9060201B2 (en) * | 2008-10-28 | 2015-06-16 | Cisco Technology, Inc. | Stream synchronization for live video encoding |
| US9817829B2 (en) * | 2008-10-28 | 2017-11-14 | Adobe Systems Incorporated | Systems and methods for prioritizing textual metadata |
| US8639086B2 (en) | 2009-01-06 | 2014-01-28 | Adobe Systems Incorporated | Rendering of video based on overlaying of bitmapped images |
| JP4618379B2 (ja) * | 2009-01-13 | 2011-01-26 | ソニー株式会社 | 記録装置、記録方法、再生装置、再生方法、記録再生装置、記録再生方法、撮像記録装置及び撮像記録方法 |
| WO2010120168A1 (en) * | 2009-04-16 | 2010-10-21 | Zinias B.V. | Data management system with digitally acquired footage (dmsdaf) for broadcast/cinema purposes and method of managing data with digitally acquired footage |
| WO2011014772A1 (en) * | 2009-07-31 | 2011-02-03 | Citizenglobal Inc. | Systems and methods for content aggregation, editing and delivery |
| US8868746B2 (en) * | 2009-10-15 | 2014-10-21 | International Business Machines Corporation | Allocation of central application resources based on social agreements |
| KR20110047768A (ko) * | 2009-10-30 | 2011-05-09 | 삼성전자주식회사 | 멀티미디어 컨텐츠 재생 장치 및 방법 |
| US8504918B2 (en) * | 2010-02-16 | 2013-08-06 | Nbcuniversal Media, Llc | Identification of video segments |
| US9691430B2 (en) | 2010-04-01 | 2017-06-27 | Microsoft Technology Licensing, Llc | Opportunistic frame caching |
| US20130334300A1 (en) | 2011-01-03 | 2013-12-19 | Curt Evans | Text-synchronized media utilization and manipulation based on an embedded barcode |
| US9800941B2 (en) * | 2011-01-03 | 2017-10-24 | Curt Evans | Text-synchronized media utilization and manipulation for transcripts |
| US9064538B2 (en) * | 2011-04-07 | 2015-06-23 | Infosys Technologies, Ltd. | Method and system for generating at least one of: comic strips and storyboards from videos |
| US20130091431A1 (en) * | 2011-10-05 | 2013-04-11 | Microsoft Corporation | Video clip selector |
| DE102011120911A1 (de) * | 2011-12-12 | 2013-06-13 | fileCAST Media GmbH | Streaming-basiertes Medien-System |
| JP5930748B2 (ja) | 2012-02-08 | 2016-06-08 | キヤノン株式会社 | 記録装置、記録方法および記録システム |
| JP2013162486A (ja) | 2012-02-08 | 2013-08-19 | Canon Inc | 記録装置、記録方法および記録システム |
| FR2991199B1 (fr) * | 2012-05-30 | 2015-05-15 | IFP Energies Nouvelles | Procede de preparation d'un catalyseur mettant en oeuvre une etape de sechage rapide et son utilisation pour la synthese fischer-tropsch |
| JP2014036402A (ja) | 2012-08-10 | 2014-02-24 | Canon Inc | 記録装置及び記録方法 |
| JP6300576B2 (ja) * | 2013-05-02 | 2018-03-28 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
| US10218981B2 (en) * | 2015-02-11 | 2019-02-26 | Wowza Media Systems, LLC | Clip generation based on multiple encodings of a media stream |
| US11146608B2 (en) * | 2017-07-20 | 2021-10-12 | Disney Enterprises, Inc. | Frame-accurate video seeking via web browsers |
| WO2019140268A1 (en) * | 2018-01-12 | 2019-07-18 | ATeam Technologies Inc. | Assessment system and method |
| US11488602B2 (en) | 2018-02-20 | 2022-11-01 | Dropbox, Inc. | Meeting transcription using custom lexicons based on document history |
| US10657954B2 (en) | 2018-02-20 | 2020-05-19 | Dropbox, Inc. | Meeting audio capture and transcription in a collaborative document context |
| US10467335B2 (en) | 2018-02-20 | 2019-11-05 | Dropbox, Inc. | Automated outline generation of captured meeting audio in a collaborative document context |
| US11024341B2 (en) * | 2018-04-06 | 2021-06-01 | Company 3 / Method Inc. | Conformance of media content to original camera source using optical character recognition |
| US10638168B2 (en) * | 2018-09-06 | 2020-04-28 | International Business Machines Corporation | Detecting minimum viable display resolution of media content using optical character recognition |
| US11689379B2 (en) | 2019-06-24 | 2023-06-27 | Dropbox, Inc. | Generating customized meeting insights based on user interactions and meeting media |
Family Cites Families (47)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0748292B2 (ja) * | 1987-04-24 | 1995-05-24 | パイオニア株式会社 | Ｎｔｓｃ方式ビデオフォーマット信号の記録装置 |
| JPH084393B2 (ja) * | 1989-06-01 | 1996-01-17 | 株式会社日立製作所 | 回転型記憶装置 |
| US5218672A (en) * | 1990-01-19 | 1993-06-08 | Sony Corporation Of America | Offline editing system with user interface for controlling edit list generation |
| US5237648A (en) * | 1990-06-08 | 1993-08-17 | Apple Computer, Inc. | Apparatus and method for editing a video recording by selecting and displaying video clips |
| EP0529864B1 (en) * | 1991-08-22 | 2001-10-31 | Sun Microsystems, Inc. | Network video server apparatus and method |
| US5526024A (en) * | 1992-03-12 | 1996-06-11 | At&T Corp. | Apparatus for synchronization and display of plurality of digital video data streams |
| CA2139420C (en) * | 1992-07-01 | 2000-12-12 | Eric C. Peters | Electronic film editing system using both film and videotape format |
| DE69322470T2 (de) * | 1992-08-12 | 1999-07-15 | International Business Machines Corp., Armonk, N.Y. | System und Verfahren zur Lokalisierung von Videosegmentübergängen |
| US5758180A (en) * | 1993-04-15 | 1998-05-26 | Sony Corporation | Block resizing function for multi-media editing which moves other blocks in response to the resize only as necessary |
| US5414455A (en) * | 1993-07-07 | 1995-05-09 | Digital Equipment Corporation | Segmented video on demand system |
| US6044365A (en) * | 1993-09-01 | 2000-03-28 | Onkor, Ltd. | System for indexing and retrieving graphic and sound data |
| DE69531265T2 (de) * | 1994-03-19 | 2004-06-03 | Sony Corp. | Optische Platte und Methode und Gerät zur Aufzeichnung auf und danach Wiedergabe von Informationen von dieser Platte |
| US5583868A (en) * | 1994-07-25 | 1996-12-10 | Microsoft Corporation | Method and system for combining data from multiple servers into a single continuous data stream using a switch |
| US5559562A (en) * | 1994-11-01 | 1996-09-24 | Ferster; William | MPEG editor method and apparatus |
| US6181867B1 (en) * | 1995-06-07 | 2001-01-30 | Intervu, Inc. | Video storage and retrieval system |
| JPH0965303A (ja) | 1995-08-28 | 1997-03-07 | Canon Inc | 映像音声同期方法及び装置 |
| JPH0981361A (ja) * | 1995-09-12 | 1997-03-28 | Toshiba Corp | 画像表示方法、データ収集方法及び対象物特定方法 |
| JP3454396B2 (ja) * | 1995-10-11 | 2003-10-06 | 株式会社日立製作所 | 動画像の変化点検出制御方法とそれに基づく再生停止制御方法およびそれらを用いた動画像の編集システム |
| US5732184A (en) * | 1995-10-20 | 1998-03-24 | Digital Processing Systems, Inc. | Video and audio cursor video editing system |
| US5862450A (en) * | 1995-12-14 | 1999-01-19 | Sun Microsytems, Inc. | Method and apparatus for delivering simultaneous constant bit rate compressed video streams at arbitrary bit rates with constrained drift and jitter |
| US5884056A (en) * | 1995-12-28 | 1999-03-16 | International Business Machines Corporation | Method and system for video browsing on the world wide web |
| US5818539A (en) * | 1996-03-29 | 1998-10-06 | Matsushita Electric Corporation Of America | System and method for updating a system time constant (STC) counter following a discontinuity in an MPEG-2 transport data stream |
| US5801685A (en) * | 1996-04-08 | 1998-09-01 | Tektronix, Inc. | Automatic editing of recorded video elements sychronized with a script text read or displayed |
| US5740388A (en) * | 1996-05-10 | 1998-04-14 | Custom Communications, Inc. | Apparatus for creating individually customized videos |
| US5929850A (en) | 1996-07-01 | 1999-07-27 | Thomson Consumer Electronices, Inc. | Interactive television system and method having on-demand web-like navigational capabilities for displaying requested hyperlinked web-like still images associated with television content |
| KR100274434B1 (ko) * | 1996-07-05 | 2000-12-15 | 모리시타 요이찌 | 디스플레이 시간 스탬핑과 다중 비디오 오브젝트평면의 동기화방법 |
| US5825892A (en) * | 1996-10-28 | 1998-10-20 | International Business Machines Corporation | Protecting images with an image watermark |
| US6211869B1 (en) * | 1997-04-04 | 2001-04-03 | Avid Technology, Inc. | Simultaneous storage and network transmission of multimedia data with video host that requests stored data according to response time from a server |
| US5815689A (en) * | 1997-04-04 | 1998-09-29 | Microsoft Corporation | Method and computer program product for synchronizing the processing of multiple data streams and matching disparate processing rates using a standardized clock mechanism |
| CA2257578C (en) * | 1997-04-07 | 2003-01-21 | At&T Corp. | System and method for processing object-based audiovisual information |
| CA2239317C (en) | 1997-05-30 | 2004-01-20 | Leitch Technology Corporation | Method and apparatus for synchronizing signals |
| US6215523B1 (en) * | 1997-06-10 | 2001-04-10 | Flashpoint Technology, Inc. | Method and system for accelerating a user interface of an image capture unit during review mode |
| US6029194A (en) * | 1997-06-10 | 2000-02-22 | Tektronix, Inc. | Audio/video media server for distributed editing over networks |
| US6360234B2 (en) * | 1997-08-14 | 2002-03-19 | Virage, Inc. | Video cataloger system with synchronized encoders |
| US5991373A (en) * | 1997-09-15 | 1999-11-23 | Teknekron Infoswitch Corporation | Reproduction of a voice and video session |
| JP4078691B2 (ja) * | 1997-09-19 | 2008-04-23 | ソニー株式会社 | 記録再生制御システム、記録再生制御方法および記録再生制御装置 |
| US5933834A (en) * | 1997-10-16 | 1999-08-03 | International Business Machines Incorporated | System and method for re-striping a set of objects onto an exploded array of storage units in a computer system |
| JPH11136631A (ja) | 1997-10-31 | 1999-05-21 | Sony Corp | 光ディスク装置 |
| US5996015A (en) * | 1997-10-31 | 1999-11-30 | International Business Machines Corporation | Method of delivering seamless and continuous presentation of multimedia data files to a target device by assembling and concatenating multimedia segments in memory |
| US6215485B1 (en) * | 1998-04-03 | 2001-04-10 | Avid Technology, Inc. | Storing effects descriptions from a nonlinear editor using field chart and/or pixel coordinate data for use by a compositor |
| US6600869B1 (en) * | 1998-07-22 | 2003-07-29 | Intel Corporation | Method and apparatus to edit digital video data |
| US6281874B1 (en) * | 1998-08-27 | 2001-08-28 | International Business Machines Corporation | Method and system for downloading graphic images on the internet |
| JP2000092433A (ja) | 1998-09-10 | 2000-03-31 | Fujitsu Ltd | 映像編集装置および記録媒体 |
| JP2001086453A (ja) * | 1999-09-14 | 2001-03-30 | Sony Corp | 信号処理装置及び方法並びに記録媒体 |
| WO2002008948A2 (en) * | 2000-07-24 | 2002-01-31 | Vivcom, Inc. | System and method for indexing, searching, identifying, and editing portions of electronic multimedia files |
| US7280738B2 (en) * | 2001-04-09 | 2007-10-09 | International Business Machines Corporation | Method and system for specifying a selection of content segments stored in different formats |
| US6870887B2 (en) * | 2001-04-09 | 2005-03-22 | International Business Machines Corporation | Method and system for synchronization between different content encoding formats |
-
2001
- 2001-04-09 US US09/829,676 patent/US7280738B2/en not_active Expired - Fee Related
-
2002
- 2002-04-08 JP JP2002104773A patent/JP3726957B2/ja not_active Expired - Fee Related
-
2007
- 2007-07-13 US US11/777,937 patent/US8630528B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| US8630528B2 (en) | 2014-01-14 |
| US20020146236A1 (en) | 2002-10-10 |
| US20070297757A1 (en) | 2007-12-27 |
| JP2003061041A (ja) | 2003-02-28 |
| US7280738B2 (en) | 2007-10-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3726957B2 (ja) | 異なるフォーマットで記憶されたコンテンツセグメントの選択を指定するための方法とシステム | |
| JP4267244B2 (ja) | コンテンツ生成及び編集システム、コンテンツ生成及び編集方法、並びに該方法を実行するコンピュータ・プログラム | |
| US6870887B2 (en) | Method and system for synchronization between different content encoding formats | |
| JP3883579B2 (ja) | データ管理機構を改善したマルチメディア・システム | |
| US5852435A (en) | Digital multimedia editing and data management system | |
| US6211869B1 (en) | Simultaneous storage and network transmission of multimedia data with video host that requests stored data according to response time from a server | |
| JP5112287B2 (ja) | ネットワーク上でデジタルメディアの分散編集及び記憶を提供するための方法及びシステム | |
| US8909026B2 (en) | Method and apparatus for simplifying the access of metadata | |
| US8005345B2 (en) | Method and system for dynamic control of digital media content playback and advertisement delivery | |
| US8126313B2 (en) | Method and system for providing a personal video recorder utilizing network-based digital media content | |
| US8977108B2 (en) | Digital media asset management system and method for supporting multiple users | |
| US6370316B1 (en) | Apparatus for retrieving and administrating moving pictures and related network system | |
| US20070113184A1 (en) | Method and system for providing remote digital media ingest with centralized editorial control | |
| US20020133486A1 (en) | Video retrieval and browsing apparatus, video retrieval, browsing and editing apparatus, and recording medium | |
| JPH1021261A (ja) | マルチメディアデータベース検索方法及びシステム | |
| CN106790558B (zh) | 一种影片多版本整合存储和提取系统 | |
| JP2002281433A (ja) | 動画像検索閲覧編集装置および記録媒体 | |
| KR100479608B1 (ko) | 지능형 비디오 브라우징 시스템 | |
| US20080212935A1 (en) | Playback apparatus, playback method, and program | |
| WO2004112034A1 (ja) | 情報作成装置および方法、並びにプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050606 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050614 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20050721 |
|
| RD12 | Notification of acceptance of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7432 Effective date: 20050721 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050725 Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20050725 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20050721 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050909 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20050909 |
|
| RD14 | Notification of resignation of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7434 Effective date: 20050909 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050921 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091007 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091007 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101007 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101007 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111007 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121007 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121007 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131007 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |