JP4245083B2 - 加工再収録機能を有するノンリニア映像編集システム - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、テレビジョン放送に使用する映像編集システムに係り、特に、ランダムアクセスが可能な不揮発性のデジタルデータ記憶装置を用いたノンリニア映像編集システムに関する。
【０００２】
【従来の技術】
従来、映像編集システムとして、長らくビデオテープレコーダ（ＶＴＲ）が使用されてきた。ＶＴＲは、その記録媒体としてシーケンシャルアクセスを行う磁気テープを用いるため、あるシーンを録画した直後に、そのシーンを再生したいような場合に、テープ巻き戻しに伴う待ち時間が発生し、迅速な応答が困難であった。また、録画済みの映像の編集の際にも迅速な編集を行うには、シーケンシャルアクセスおよび低速な記録再生速度が支障となった。
【０００３】
また、従来、映像に対して文字スーパーを挿入したり、モザイクを掛けたり、さらには複数の音声チャンネルの音声信号をミックスしたりアフレコを付加したりする加工装置が知られている。
【０００４】
従来のＶＴＲにおいて、放送のオンエア時に、映像や音声の再生出力に対してリアルタイムに映像や音声を上記加工装置で加工して出力することもできるが、そのような加工した映像や音声を予め再度収録しておき、オンエア時にはこの収録しておいた映像や音声を出力するということも行われている。予め収録しておけば、その収録内容を確認した上でオンエアできるという利点がある。
【０００５】
このような加工再収録処理を従来のシステムで行う場合、加工対象の映像等を一旦別のテープにダビングし、このテープの再生出力に対して加工装置による加工を施し、この加工装置の出力を加工対象の映像等の上に上書きする、という方法が一般的である。
【０００６】
【発明が解決しようとする課題】
しかしながら、上記の方法では、加工対象の映像等を一旦ダビングする必要があるためにそのための時間を必要とした。また、再生と収録のタイミングのずれに起因して、加工出力を、その範囲と正確に対応する元の映像等の範囲に正確に上書き（加工再収録）するのが困難であった。そのため、特に加工箇所が複数箇所に散在するような場合は、個々の加工対象が短時間の範囲であってもそれらの範囲の部分収録のために全体のダビングおよび全体の再生が行われた。それでもなお、加工装置による映像等の遅延による元の映像と再収録部分の映像との間にずれが生じる場合があった。そのずれをなくすために、予めずれ量を測定しておきその分をオフセットするというような手法をとる措置を取る必要があった。
【０００７】
さらに、加工対象に対して誤った上書きを行った場合には、元の映像等が破壊されてしまうという問題もあった。
【０００８】
これに対して、近年、映像のデータ圧縮技術の進歩と相俟って、磁気ディスク装置（ハードディスク装置）のようなより高速なランダムアクセスの可能な記憶媒体を利用したいわゆるノンリニア映像編集システムが使用され始めている。
【０００９】
そこで、本発明は、このようなランダムアクセスの可能な記憶装置を利用した映像編集システムであって、加工対象の映像等を加工処理の前にダビングする必要なく、かつ、映像等の部分的な加工であっても、その部分のみを加工して正確に置き換えることができるノンリニア映像編集システムを提供することを目的とする。
【００１０】
本発明の他の目的は、再度、収録をやり直すことなく、加工処理後に加工対象部分の範囲を変更することができるノンリニア映像編集システムを提供することにある。
【００１１】
【課題を解決するための手段】
本発明による、加工再収録機能を有するノンリニア映像編集システムは、デジタル化された映像データを格納する不揮発性のランダムアクセス記憶装置と、該ランダムアクセス記憶装置に対して外部から映像データを収録する収録手段と、前記ランダムアクセス記憶装置に格納されている映像から切り出された複数のカットシーンの各々の開始位置および終了位置を表わすデータからなるプレイリストを作成する手段と、前記プレイリストに基づいて、前記複数のカットシーンを順次的に再生するタイムライン再生手段と、該再生手段の映像出力を加工するためのタイミング信号を受けて該映像出力を加工する加工装置と、ユーザの指示に応じて前記収録手段、タイムライン再生手段および加工装置を制御する制御手段とを備え、該制御手段は、ユーザの入力に基づく加工対象の範囲を示すデータおよび前記プレイリストに従って、当該加工対象の範囲の映像を前記タイムライン再生手段を介して前記ランダムアクセス記憶装置から再生するとともに、前記加工対象の範囲に対応するタイミング信号を当該時点に前記加工装置に対して出力し、前記収録手段を介して前記加工対象の範囲の前記加工装置の出力を前記ランダムアクセス記憶装置内に元のシーンとは別個に収録し、前記元のシーンの加工対象の範囲と前記加工装置の出力の対応する範囲とを置換するように前記プレイリストを更新することを特徴とする。
【００１２】
このように、本発明によれば、プレイリストに基づいて再生した加工対象の映像を加工した出力を直ちに再収録する。しかも、元の映像データはそのままにして、加工後の映像部分を新たな映像データとして収録する。したがって、再収録の範囲等を誤ったとしても、元の映像データが破壊されることはない。その結果、加工処理の前に加工対象の映像をダビングする必要なくなる。
【００１３】
また、例えば、タイムライン再生時のタイムコードを利用することにより、映像が加工装置で遅延してもタイムコードも同じだけ遅延するので、前記元のシーンの加工対象の範囲と前記加工装置の出力の対応する範囲とを正確に置換することができる。その結果、映像等の部分的な加工であっても、その部分のみを加工して正確に置き換えることができる。
【００１４】
好ましくは、前記制御手段は、少なくとも前記範囲の開始位置より予め定めた時間だけ前の位置から、当該範囲の終了位置より予め定めた時間だけ後の位置まで、前記加工対象の映像の再生を行うとともに、両位置間の範囲の前記加工装置の出力を収録するよう制御を行う。この前記範囲より大きい範囲の収録は、「のりしろ（マージン）」と呼ぶ領域であり、前記プレイリストの内容には何ら影響を与えない。
【００１５】
前記タイムライン再生手段は映像出力と共にタイムコードを出力し、前記収録手段は前記加工装置からの加工済み映像データとともに得られるタイムコードを参照して、収録すべき範囲を特定することができる。
【００１６】
ユーザの指示に応じて、前記プレイリストの１つのシーンの開始位置と終了位置の少なくとも一方を変更する編集手段を設ければ、再度、収録をやり直すことなく、加工処理後に加工対象部分の範囲を変更することができる。すなわち、前記のりしろがある範囲内でそのシーンの前端を前にずらしたり、後端を後にずらしたりすることが可能になる。これにより、ユーザが再収録処理の後で範囲を変更したくなった場合でも、再度、この処理をやり直す必要がなくなる。したがって、ユーザは、加工再収録に先立って、範囲の指定を厳密に決定する必要がなくなる。
【００１７】
なお、映像のみでなく、音声の加工についても同様に本発明を適用することができる。
【００１８】
【発明の実施の形態】
以下、本発明の具体的な実施の形態について、図面により詳細に説明する。
【００１９】
まず、図１に本発明が適用されたノンリニア映像編集システムの全体の概略構成を示す。このシステムは、中心にデジタル録画再生装置１０を有する。デジタル録画再生装置１０は、映像（ビデオ）データおよび音声（オーディオ）データをデジタル的に記憶する不揮発性のランダムアクセス記憶装置１４０を内蔵する。本実施の形態では、ランダムアクセス記憶装置１４０として、ハードディスク装置を用いる。
【００２０】
デジタル録画再生装置１０の前段には、複数台のＶＴＲの出力および後述するオーディオフェーダ１９２の出力のいずれかを選択できるセレクタ４を有する。また、電波による映像データを受信する受信装置（図ではマイクロ波受信装置を模擬的にパラボラアンテナで示している）も接続できる。セレクタ４の出力映像および受信装置の出力映像はそれぞれモニタ６ｃ，６ｄで監視することができる。セレクタ４はデジタル録画再生装置１０により制御される。デジタル録画再生装置１０の後段には、２系統の出力およびセレクタ４の出力を選択的に切替出力するスイッチャ８およびこの出力に加工を施すためのスーパー・モザイク装置（加工装置）１９１およびオーディオフェーダ１９２が配置されている。後述する操作コントローラ１８から、スイッチャ８およびスーパー・モザイク装置１９１に対して、ＧＰＩ(General Purpose Interface)制御として、スーパー文字やモザイクを挿入するタイミング信号が与えられ、このタイミングに従って、予め用意された文字情報あるいはモザイクパターンが映像に重畳される。
【００２１】
デジタル録画再生装置１０の２系統の出力映像はそれぞれモニタ６ａ，６ｂで監視できるようになっている。なお、これらのモニタ６ａ〜６ｄの全てが必須のものではない。また、スーパー・モザイク装置１９１およびオーディオフェーダ１９２も映像や音声の加工が必要な場合に用いればよい。アフレコのための装置を追加してもよい。
【００２２】
デジタル録画再生装置１０には、キーボード１４、マウス１６、およびディスプレイ１２が接続される。マウス１６の代わりにトラックボール等の任意のポインティングデバイスを用いることも可能である。ディスプレイ１２、キーボード１４およびマウス１６は、ＧＵＩ（Ｇｒａｐｈｉｃ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）を援助するための装置であり、収録、編集および再生等の各種操作を表示ディスプレイ画面上で対話的に行うためのものである。
【００２３】
さらに、デジタル録画再生装置１０には操作コントローラ（操作部）１８が接続される。ユーザは、後述するプロセッサの制御下で、操作コントローラ１８により、デジタル録画再生装置１０、スイッチャ８、スーパー・モザイク装置１９１、オーディオフェーダ１９２、外部ＶＴＲ等を操作することができる。操作コントローラ１８においても、マウス１６やキーボード１４を用いたＧＵＩによる操作と殆ど同じ操作を行うことができる。操作コントローラ１８特有の操作としては、ジョグ・シャトルダイアル１８ａによる再生速度の可変制御が可能である。このダイヤル１８ａの機能については後述する。
【００２４】
デジタル録画再生装置１０は、内部にランダムアクセス記憶装置１４０の他、後述するリソース１７１〜１７４を内蔵するとともに、ワイプ、ディゾルブ等の効果を実現するためのミックスエフェクト（Ｍ／Ｅ）カード１８０を内蔵している。
【００２５】
図２に、デジタル録画再生装置１０のハードウエア構成を示す。
【００２６】
デジタル録画再生装置１０には、本例では、１７スロットのＥＩＳＡバス１１０と、１２スロットのデジタルビデオバス（ＣＣＩＲ６０１）１３０を備えている。ＥＩＳＡバス１２５のスロットには、プロセッサカード１２１、ディスプレイコントローラカード１２２、ＲＳ４２２インタフェースカード１２５が装着される。また、カードによっては、ＥＩＳＡバス１２５およびデジタルビデオバス１３０の両スロットにまたがって装着される。図示の例では、このようなカードは、ゲンロックリファレンスカード１２４、ディスクコントローラカード１２３、ビデオ入力インタフェースカード１２６、ビデオ出力インタフェースカード１２７、およびオーディオ入出力インタフェースカード１２８である。
【００２７】
プロセッサカード１２１には、マイクロプロセッサ、ＲＡＭ、入出力インタフェース等が搭載されている。このプロセッサカード１２１には、システム用のハードディスクドライブ１６０およびフロッピーディスク（フレキシブルディスク）ドライブ１５０が接続され、さらにキーボード１４及びマウス１６が接続される。ディスプレイコントローラカード１２２にはディスプレイコントローラが搭載され、ディスプレイ１２の表示動作を制御する。
【００２８】
ビデオ入力インタフェースカード１２６には、外部ＶＴＲからのビデオ入力が接続され、ビデオ出力インタフェースカード１２７から外部のモニタへのビデオ信号が出力される。また、オーディオ入出力インタフェースカード１２８では、外部ＶＴＲからのオーディオ入力および外部のスピーカへのオーディオ出力のインタフェースがとられる。これらの入出力インタフェースカードは増設することができる。
【００２９】
デジタルビデオバス１３０には、入出力ビデオ信号を切り替えるビデオルータ１３３を内蔵している。ビデオルータ１３３は、プロセッサの制御下で、この例では、３２入力の任意の入力を３２出力の任意の出力へ切り替えることができる。
【００３０】
ディスクコントローラボード１２３は、ビデオ用ハードディスクドライブ（ランダムアクセス記憶装置）１４０を制御する。この例では、ＳＣＳＩ−２ＦＡＳＴ／ＷＩＤＥバス１３５を介して４．２Ｇバイトのハードディスクを複数台（図の例では４台：計１６．８Ｇバイト）制御している。ディスクコントローラボード１２３およびハードディスクドライブ（以下、単にディスクともいう）１４０は複数組増設することもできる。
【００３１】
ゲンロックリファレンスインタフェースカード１２４には、内部クロックを外部の通常のＮＴＳＣまたはＰＡＬのブラックバースト信号にロックするためのものである。ＲＳ４２２インタフェースカード１２５は、操作コントローラ１８を接続するためのインタフェースを提供する。
【００３２】
図３に、ディスクコントローラカード１２３に搭載されるディスクコントローラ１２３ａの構成を示す。これは、図２において、ディスクコントローラカード１２３を２枚実装した場合に相当する。１つのディスクコントローラ１２３ａには、２つのチャンネルのために２個のＪＰＥＧ(Joint Photographic Expert Group)圧縮／伸張チップ１２３ｂ，１２３ｃを有している。より長時間の映像信号の収録のために、本例では、モーションＪＰＥＧ圧縮技術を利用し、映像を圧縮してハードディスクに格納する。各チップには、１本のビデオ入出力チャンネルと、４本のオーディオ入出力チャンネルがあり、入力ビデオ信号およびオーディオ信号を圧縮してディスクに格納するとともに、この圧縮格納情報を伸張して出力することができる。
【００３３】
本システムでは、図４に示すように、おのおのレコーダまたはプレーヤとして機能しうる複数（ここでは４個）の物理的なリソース（ＪＰＥＧ圧縮伸張部）１７１〜１７４を有する。これら４個のリソースはそれぞれＡチャンネル〜Ｄチャンネルに対応し、また、これらのリソースの個数は、図３に示した圧縮／伸張チップの個数に対応する。ユーザの目的に応じてこれらのリソースを収録／再生あるいは編集等の異なる機能に割り当てることができる。本システムでは、このような論理的なビデオレコーダ（プレーヤ）を仮想レコーダあるいは仮想プレーヤ（または内部プレーヤ）と呼ぶ。図１の例では、リソース１７１をレコーダ専用に使用し、リソース１７２をレコーダとプレーヤに切り替え使用している。また、リソース１７３はプレーヤとタイムライン再生（編集）用に切り替えて使用し、リソース１７４はプレーヤ専用に使用している。各リソースは、ディスク１４０に対して独立にアクセスすることができる。また、ディスク１４０に対して、周知のストライピング等の手法により、見かけ上、書き込みと読み出しを同時に実行できるように構成されている。例えば、あるリソースで書き込み中のシーンデータを他のリソースで数秒の遅れで読み出すことができる。この数秒の遅れは、データの読み書きの相対的なずれを吸収するためのデータのバッファリングに相当する時間である。
【００３４】
ここで、本明細書における「タイムライン」とは複数の映像シーン（および対応する音声シーン）を時間軸上で組み合わせるカット編集の機能またはそのための作業エリアを表わし、このカット編集により作成されるものが「プレイリスト」である。プレイリストにより定まるパッケージの再生はプレーヤではなくタイムライン（ＴＬ）に割り当てられたリソースにより再生される。したがって、このリソースを「ＴＬ：タイムライン」と称することもある。
【００３５】
このノンリニア映像編集システムにおいては、外部ＶＴＲや回線から一旦デジタイズしてディスク内に取り込んだ映像データについては、タイムライン編集機能を用いて、迅速に、そのディスク内の映像の任意のシーンを切り出して組み合わせることにより、いわゆるカット編集を行うことができる。後に詳述するように、この際のシーンの「切り出し」は実際の映像データの複写を行う訳ではなく、単に、元の映像データの部分であるシーンを特定する情報、すなわちディスク上でのそのシーンの開始位置および終了位置の情報（通常、アドレス情報）を保持することにより、等価的に映像データの複写が行える。編集結果の再生時には、このシーン特定情報を参照して、元の映像データの対応する範囲の内容をディスクから読み出すことにより、再生が行われる。タイムライン上でのこのようなカットシーンを時系列に並べた映像データをパッケージと呼ぶ。したがって、一旦ディスクに取り込まれた映像データからカット編集を行うことは、極めて迅速かつ容易に実現される。
【００３６】
図５に、本実施の形態におけるディスプレイ１２の画面上に表示される基本的な編集画面（ルートウインドウと呼ぶ）の一例を示す。この画面は本システムの初期画面であり、この骨格に相当する映像データはシステム用のディスクに格納されており、種々のデータおよびパラメータの内容が画面内の各種エリア内に可変表示されるようになっている。各種エリアとしては、画面上段の左から「シーン管理」エリア、「ステータス」エリア、「オーディオ・モニタ」エリア、画面中段に「タイムデータ」エリア、画面下段に「タイムライン」エリアがある。
【００３７】
シーン管理エリアは、ディスク内に格納された映像データ（カセット、パッケージ等）の各種データを階層的に管理するためのものである。このエリアを参照しながら、目的のカセット（図１の仮想的な内部カセット１４１）やパッケージの選択、移動、複写、削除等が行える。シーン管理エリア内の右端には、シーン管理エリア内で選択されたパッケージ等の内容のリスト表示が行われるエリアがある。
【００３８】
ステータスエリアは、上述したチャンネルＡ〜Ｄの現在の割当の対象（回線、ＶＴＲ、ＴＬ、転送等）およびその状態（収録中、再生中、転送中等）を示している。図の例では、チャンネルＡがＶＴＲに、チャンネルＢがＴＬに、チャンネルＣが回線に、チャンネルＤが転送に、それぞれ割り当てられている。
【００３９】
オーディオ・モニタエリアは、オーディオの４つのトラックの現在の状態を示すためのエリアである。
【００４０】
タイムデータエリアは、タイムライン編集の対象となる各種パラメータを表示するエリアである。基準トラックの表示部、およびＴＬにおける編集対象の現在位置（ポジション）、編集対象シーンのＩＮ点、ＯＵＴ点、デュレーション、スプリット、スピードが表示される。「スプリット」とは、通常、基準トラックである映像トラックのカット点が音声トラックのシーンのカット点に対してずれている量を示す。このエリアには、さらに、ＴＬに対するソースとしてのデバイスの表示部（図ではデバイスＰＰ１が選択されている）、およびそのデバイスにおける編集対象のシーンのＩＮ点、ＯＵＴ点、デュレーションが表示される。
【００４１】
このエリアに下部には、現在ＴＬに掛けられているパッケージを構成しているシーンのＴＬ上のタイムコード、およびそのシーンの特定情報のリストを表示している。
【００４２】
タイムデータエリアの右側には、任意のデータ等を捨てるためのゴミ箱が配置されている。
【００４３】
タイムラインエリアは、与えられたパッケージの内容を時系列に表示するエリアであり、主としてこのエリアでタイムライン編集を行うことができる。タイムラインエリア内の表示は、タイムライン（時系列）表示とリスト表示とが切り替えられるようになっており、その指示はタイムラインエリアの左上にあるボタンで選択できる。図の例では、タイムライン表示が選択されている。タイムライン表示では、パッケージの先頭からの相対的な時間が時・分・秒・フィールド（またはフレーム）の形式の数値からなるタイムコードで示される。また、シーンの「上書き」および「割り込み」の選択ボタンも用意されている。時系列表示では、１本の映像のトラック（Ｖ）と、４本の音声トラック（Ａ１〜Ａ４）が表示される。図示しないが、各トラックの現在フォーカスされているシーンを強調して表示することが好ましい。Ｖトラック上の逆三角点は、現在の編集点の位置を示している。Ａ４トラックの下にあるバー表示は、タイムラインの再生の進行状況を示している。このタイムラインエリア内の横軸の縮尺は右下の虫眼鏡アイコンで可変操作できる。このバー表示の下に、全体のパッケージのどれだけの割合のどの部分が表示されているかをスクロールバー表示している。このタイムラインエリアの最下段には、タイムラインの再生等を操作するためのボタン（＜＜、＜、||、＞、＞＞）およびシーンのフォーカスを移動させるための（シーンの頭だし）ボタン（|＜、＞|）が配置されている。また、コマ送りのためのボタン（−、＋）、および後に詳述するＶＩＥＷ指示のためのＶＩＥＷボタンもある。
【００４４】
タイムラインエリアの右端には、各トラックの空白（ブランク）シーンの個数の表示部、および空白シーンの検索指示を行うボタンが配置されている。また、シーンの編集時に割り込みを行うか、上書きを行うかの選択ボタンも配置されている。
【００４５】
ルートウインドウ画面の左上の枠部には、「ファイル」や「編集」等のプルダウンメニューが配置されている。「ファイル」のメニューからファイルの作成、保存、名称変更等の操作が行える。さらに、その下には、各種操作ボタンを並べたツールバーが配置されている。
【００４６】
図６に、本実施の形態において用いる操作コントローラ１８の一例の平面図を示す。
【００４７】
操作コントローラ１８の左上の１８ｂは、右下のテンキー１８ｖでユーザが入力したタイムコードなどの数値を表示する液晶表示部である。その下のキー群１８ｃは、図５のタイムラインエリア内の操作対象のトラックを選択するためのものである。その下のＥＸＥＣキーはタイムライン編集における収録の実行指示を行うためのキーである。ＩＮＳＥＲＴキーおよびＯＶＥＲＷＲＩＴＥキーは、図５のタイムラインエリア内の「上書き」「割り込み」と同じ機能を果たす。キー群１８ｄは、操作の対象を選択するためのデバイス選択キーであり、「ＴＬ」はタイムライン、「Ｐ１」，「Ｐ２」は２台の外部ＶＴＲ１、ＶＴＲ２、「ＰＰ１」，「ＰＰ２」は２台の内部の仮想プレーヤを表している。キー群１８ｅの中のＶＩＥＷキーは図５に示したＶＩＥＷボタンと同じである。ＲＥＲＥＣボタンは、本発明に関する再収録のためのウインドウ（図１２）を開くための操作ボタンである。キー群１８ｄの下のＭＡＲＫＩＮキーとＭＡＲＫＯＵＴキーは、それぞれ、ユーザがモニタを見ながら所望のＩＮ点およびＯＵＴ点をシステムに知らせるためのキーである。その下のＡＬＬＳＴＯＰキーは、操作や動作の中断を指示するためのキーである。
【００４８】
操作コントローラ１８の中央上段のキー群１８ｈは、タイムライン編集において用いる編集キーであり、特にＳＣＥＮＥＴＲＩＭキーは、選択したシーンのＩＮ点およびＯＵＴ点を事後的に編集するためのウインドウ（図１６で後述）を開くためのキーである。その下のキー群１８ｉは、カセットの選択や編集点またはシーンの頭出しを行うためのキーである。更にその下のキー群１８ｊは、１倍速再生、静止画再生、タイムコードによるサーチのためのキーである。
【００４９】
中央下部には可変速再生操作のためのダイヤル１８ａがあり、その上に、このダイヤル１８ａをシャトルダイヤルとして機能させるか、あるいは、ジョグダイヤルとして機能させるかを指示するためのキー１８ｆ，１８ｇがある。シャトルダイヤルは、その回転角度に応じて再生速度を決定するものであり、傾きを大きくするほど再生速度が速くなる。傾きを０にすると再生が静止する。ジョグダイヤルはその回転の速さに応じて再生速度を決定するものであり、早く回転させるほど再生速度が速くなる。回転を停止すると再生が静止する。現在の再生の向きはインジケータ１８ｋにより表示される。ユーザは、通常、ダイヤル１８ａの操作を、再生出力の接続されたモニタを見ながら行う。
【００５０】
操作コントローラ１８の右上のキー群１８ｍは、図５等の画面の上に表示されるＧＵＩポインタ（図示せず）の操作キーである。ＧＵＩポインタは、ＴＡＢキー、ＳＨＩＦＴＴＡＢキーにより、後述するルートウインドウ内で順次各エリアにフォーカス（反転表示等）を移動し、そのエリア内でのフォーカスの移動を矢印キーにより行う。キー群１８ｎのＳＥＴＩＮキーはＩＮ点を、ＳＥＴＯＵＴキーはＯＵＴ点をテンキーで数値入力したときの確定用のキーである。キー群１８ｏ，１８ｐについては本発明に直接関係ないので説明を省略する。
【００５１】
図７に、本実施の形態においてビデオ用ハードディスクドライブ１４０に格納される映像等のデータのフォーマットを示す。外部のＶＴＲや回線からは、１トラック分の映像データ、４トラック分の音声データ、および１トラック分のタイムコード（ＴＣ）が組として、ハードディスクドライブ１４０内の仮想的な内部カセット（図１の１４１に対応）に格納される。なお、外部ＶＴＲからのタイムコードは、その外部ＶＴＲに装填された実カセット内の映像を撮影したカメラから生成され、映像とともにテープに収録されたものである。このタイムコードはオリジナルのタイムコードと呼ぶ。
【００５２】
本明細書では、内部カセットに一度に書き込まれる連続した映像等の単位を「レコード」と呼ぶ。また、内部カセットに収録されたレコード内の着目した一部分を「シーン」と呼ぶ。このシーンは、タイムライン編集時にその開始位置であるＩＮ点および終了位置であるＯＵＴ点の情報により特定される。このＩＮ点およびＯＵＴ点のデータはディスクの中で一意に定まるアドレスであり、ここでは「フィールド番号（またはフレーム番号）」である。このＩＮ点、ＯＵＴ点のデータがユーザによりタイムコードで指定された場合には、対応するフィールド番号に変換（換算）される。
【００５３】
図７の下段に示すように、このシーン特定情報を、タイムライン上で仮想的に時系列に並べることにより、シーンのカット編集が行える。このようなカット編集により出来上がったシーンの組合せがパッケージである。ただし、パッケージは、実際には、このような複数のシーンの映像データ等（音声データを含む）の実体データを順次連続して複写したものではない。このパッケージの実体は、前述したように単なるシーンを特定する情報の集合にすぎない。このようなシーン特定情報の集合を本明細書ではプレイリストと呼んでいる。編集の完成したパッケージは、「パッケージ登録」により、名称を付けて保存することができる。この登録したパッケージは、図示しないパッケージウインドウの中に格納される。また、シーン管理エリアで確認することもできる。
【００５４】
図８に、このプレイリストの構成例を示す。プレイリストは、映像Ｖ、音声Ａ１，Ａ２，Ａ３，Ａ４の情報からなり、各面は、個々のシーンについて、そのシーンを格納した内部カセットのカセット名８１、シーン名８２、ＩＮ点８３、ＯＵＴ点８４、デュレーション（ＩＮ点からＯＵＴ点までのシーンの長さ）８５、再生速度８６を規定している。図８では、理解しやすいように、ＩＮ点およびＯＵＴ点をタイムコードの形式（時：分：秒：フィールド）で示しているが、実際にシステムが保持するのはこれをディスク内アドレスとしてのフィールド数に換算したフィールド番号である。システムは、パッケージの再生時にこのプレイリストを参照して順次該当するシーンの指定された部分をディスクから読み出すことにより、あたかもそれらのシーンが組み合わされた１本のビデオテープを再生しているかのように機能する。このようなパッケージのカット編集は、映像データ等の実体的な複写（再生および収録）動作を伴うことなく、単にシーンの特定情報の組合せで実現される。したがって、ディスク内に既に存在するレコードに基づくパッケージの作成および修正は極めて迅速に行うことができる。
【００５５】
さて、図９により、本発明における加工再収録の概念を説明する。
【００５６】
今、図９に示すように、操作制御部（１８，１２１）により、デジタル録画再生装置１０内に存在する内部カセットの仮想的なテープ上の特定のシーン（シーンＡ’）またはその一部を、加工装置１９１（１９２）で加工して、当該仮想的なテープの元の位置に再収録する場合を想定する。この場合、図示のように、リソース１７３によるタイムライン再生出力を加工装置１９１（１９２）で加工し、その加工出力をレコーダ（すなわち本発明の「収録手段」）として機能するリソース１７１を介してループ状にデジタル録画再生装置１０に帰還する。加工装置１９１（１９２）の出力を観察できるようにモニタＭを配置する。このモニタＭとしては図１のモニタ６ｃを利用できる。
【００５７】
なお、実際には、加工後のシーンは元のシーンＡの内容に上書きする訳ではなく、当該カセット（または別のカセット）に対して加工後のシーンが新たなシーンとして収録されることに留意されたい。
【００５８】
本発明による再収録を行うためには、ユーザは、まず、前述した操作コントローラ１８のＲＥＲＥＣキー、または、ルートウインドウ内の「再収録」ボタンを押す。これにより、図１２に示すような再収録ウインドウが開かれる。なお、選択されているパッケージをタイムライン上で再生するために、操作コントローラ１８のデバイス選択キー「ＴＬ」が押されているものとする。そこでダイヤル１８ａの操作または再収録ウインドウ内のボタンによりによりパッケージの再生が行える。ユーザは、加工対象のシーンＡを選択して「セット」ボタンを押す。ついで、ユーザは、そのシーンＡのタイムライン上の再収録対象範囲を指定するために開始位置と終了位置のタイムコードをウインドウ内で入力する。これに代えて、ダイヤル１８ａを用いて当該パッケージをタイムライン再生することにより、目的の映像を確認しながら、開始位置とすべきフィールドの映像に対してＭＡＲＫＩＮキーを押し、終了位置とすべきフィールドの映像に対してＭＡＲＫＯＵＴキーを押すことによっても、両位置は指定することができる。デュレーションは両位置から自動的に定まる。終了位置の代わりにデュレーションを入力するようにしてもよい。
【００５９】
再収録ウインドウ内のＧＰＩ設定では、ポート１〜７の７つのポートについて、別個のタイミング信号を設定することができる。各ポートには、タイミング信号を与えるべき対象の機器を割り当てることができる。図の例では、ポート１にスイッチャを割り当て、ポート２にスーパー装置を割り当てている。再収録の対象のパッケージの映像を確認しながら、現在の再生位置であるカレントポジションにおいて「セット」ボタンを押すことにより、再収録時のタイムライン再生時にその位置でタイミング信号を発生させることができる。「再収録」ボタンを押すことにより、再収録動作が実行される。「プレビュー」ボタンを押すことにより、実際の収録を行うことなく、再収録動作と同じ結果を観察できるようにするものである。但し、これは本発明と直接関係しないのでここでは詳述しない。
【００６０】
図１０に示すように、シーンＡは内部カセットである「カセット１」に収録されているとする。シーンＡのディスク１４０上のアドレスの範囲すなわちＩＮ点およびＯＵＴ点のアドレスはＡＤ１およびＡＤ６（タイムコードはそれぞれＴＣ１，ＴＣ６）であり、この間にシーンＡの実体データが格納されている。シーンＡのＩＮ点（ＡＤ３）より予め定めた時間Δｔだけ前の位置（ＡＤ２）から、ＯＵＴ点（ＡＤ４）より時間Δｔだけ後の位置（ＡＤ５）までのデータを加工して得られたシーンＡ’を含む部分は、新たなレコードとして同じ内部カセット１の別のアドレス（ＡＤ１２〜ＡＤ１５）に格納される。（この代わりに新たな内部カセットに格納されてもよい。）実際のシーンＡ’のＩＮ点およびおよびＯＵＴ点のアドレスはＡＤ１３〜ＡＤ１４であるが、シーンＡ’の前後の時間Δｔの部分は「のりしろ」と呼ぶ部分であり、後に編集点の移動などの場合に備えて予め指定された範囲より余分に取り込んでおく部分である。図１６で後述するように、こののりしろを設けることにより、編集点を移動するような際に空白シーンが生じるのを防止することができる。のりしろの長さはユーザが可変設定できる。前後ののりしろの時間は同じにしたが、異なってもよい。
【００６１】
このようにシーンＡ’を対応するシーンＡの部分と置き換える（上書きする）といっても、実際にはシーンＡをそのまま残したまま、別個にシーンＡ’をディスク内に取り込む。シーンの組合せはプレイリスト上で実現される。したがって、再収録によりシーンＡの実体データが破壊されることはない。
【００６２】
図１１（ａ）に図１０のカセット１からシーンＡ（ＡＤ１〜ＡＤ６）と他のシーン（図１０には示さず）をカット編集して得られたパッケージのプレイリストの例を示す。これに対して、シーンＡの中にシーンＡ’を上書きして得られたパッケージのプレイリストの例を図１１（ｂ）に示す。シーンＡの中間部にシーンＡ’が上書きされたことにより、シーンＡが前後にＡＤ１〜ＡＤ３と、ＡＤ４〜ＡＤ６とに二分され、その間にシーンＡ’のＡＤ１３〜ＡＤ１４が挿入されている。ユーザは、このシーンＡ’の収録完了後に、更新後のパッケージに基づいてシーンＡ’の前後の境界部分を含めてタイムライン再生を行うことができる。すなわち、これらのシーンが所望の態様で組み合わされた状態で映像および音声が再生される。
【００６３】
シーンＡの再収録対象に指定されたＩＮ点からＯＵＴ点の部分と全く同じ部分を加工再収録するために、本実施例では、再収録時に加工装置を経由した後の、シーンＡのタイムコードを監視し、指示された範囲の開始位置に対応するタイムコード（図１０の例ではＴＣ２）の位置から再収録を開始する。これによって、加工装置の処理による映像信号等の遅延があっても、収録の対象部分の先頭（図１０ではＴＣ２）が分かるので、これに基づいて収録アドレスのＩＮ点およびＯＵＴ点（ＡＤ１３、ＡＤ１４）が決まる。したがって、タイムライン上で、加工された部分を正確に元の同じ位置に戻すことができる。
【００６４】
図１３に、このようにして指定されたＧＰＩ設定のデータを記憶したＧＰＩ設定テーブル１３１を示す。このテーブル１３１は、ポート毎に、タイミング信号を発生する時間の順にポジションがリスト化されている。
【００６５】
次に、図１４に本実施の形態における再収録処理を実現するための処理手順の一例を示す。この処理は、上述した収録ウインドウ内の「再収録」ボタンをユーザが押すことにより起動される。
【００６６】
まず、ＧＰＩ制御を起動する（Ｓ１４０）。この詳細については後述する。次に、タイムライン上の指示された加工対象の開始位置および終了位置のタイムコード（ＴＣ）を確認する（Ｓ１４１）。ついで、現在のプレイリストに基づいてタイムライン（ＴＬ）上の再生を開始する（Ｓ１４２）。その後、加工装置の出力のタイムコードを監視し、カレントポジションが開始位置のタイムコードのｎ秒前に達したら（Ｓ１４３）、加工装置の出力の収録（デジタイズ）を開始する（Ｓ１４４）。その後、加工装置の出力のカレントポジションが終了位置のタイムコードのｎ秒後に達したら（Ｓ１４５）、収録を停止し（Ｓ１４６）、タイムラインの再生も停止する（Ｓ１４７）。収録された再生出力を新たなレコードとして内部カセットに格納する（Ｓ１４８）。また、この新たなレコードに含まれる加工済みのシーンを元の加工前のシーン（またはその部分）と置き換えるように、プレイリストを更新する（Ｓ１４９）。
【００６７】
次に、ＧＰＩ制御処理の手順の一例を図１５に示す。この処理は、前述のように、図１４のステップＳ１４０で起動され、図１４の再収録処理と並列に動作する。
【００６８】
まず、ＧＰＩ設定テーブル１３１を参照する（Ｓ１５０）。そこで、このテーブルに未処理の項目があるかを調べる（Ｓ１５１）。あれば、その最初の１項目を取り出して（Ｓ１５２）、タイムラインの再生がその項目に指定されたタイムコードの時刻に達するまで待機し（Ｓ１５３）、達した時点で、当該項目で指定された加工装置へタイミング信号を発行する（Ｓ１５４）。これに応じて当該加工装置が自身の処理を実行する。その後、最初のステップＳ１５０に戻る。ステップＳ１５０でもはや未処理の項目がなければ、本処理を終了する。
【００６９】
図１６に、シーントリムウインドウを示す。これは、タイムライン上で或るシーンがフォーカスされている状態で、ユーザが操作コントローラ１８のキー群１８ｈ内のＳＣＥＮＥＴＲＩＭボタンを押すことにより開かれる。このウインドウ内のタイムラインのＩＮ点およびＯＵＴ点を数値入力により、または映像を見ながらのＭＡＲＫＩＮ、ＭＡＲＫＯＵＴキーの押下により、それらの現在値をユーザが変更し、「実行」ボタンで確定することができる。これにより、シーンの実体データを操作することなく、そのシーンの長さを変えることができる。この際、隣接するシーンに対して、「割り込み」と「上書き」のいずれかが選択できる。シーンのＩＮ点およびＯＵＴ点はトラック毎に独立に変更することができる。このシーントリムウインドウ内の他の表示部分は本発明には関係ないので、説明を省略する。
【００７０】
このようなシーントリムによりあるシーンのＩＮ点またはＯＵＴ点がそのシーンの外側方向に変更された場合、上記のりしろ部分があるため、そののりしろの範囲内の拡大であれば編集により空白シーンが生じることがない。したがって、再収録処理を再度実行する必要がなくなる。
【００７１】
以上、本発明の好適な実施例について説明したが、本発明の要旨を逸脱することなく種々の変形・変更を行うことが可能であることは、当業者には明らかであろう。
【００７２】
【発明の効果】
本発明によれば、ランダムアクセス記憶装置を用いたノンリニア映像編集システムを利用することにより、加工対象の映像等を加工処理の前にダビングする必要なく、かつ、映像等の部分的な加工であっても、その部分のみを加工して正確に置き換えることができる。また、再収録時にのりしろを設けるとともに、再収録後にプレイリストのシーンの開始位置や終了位置を変更できるようにすることにより、再度、収録をやり直すことなく、加工処理後に加工対象部分の範囲を変更することができる。
【００７３】
【図面の簡単な説明】
【図１】本発明による映像編集システムの概略構成を示す説明図である。
【図２】図１のシステム内のデジタル録画再生装置１０の内部構成を示す構成図である。
【図３】図２の装置内のディスクコントローラ１２３ａの内部構成を示す模式図である。
【図４】図１のシステム内のデジタル録画再生装置内のディスクと、レコーダまたはプレーヤとして機能しうる複数の物理的なリソース（資源）との関係を示す模式図である。
【図５】本発明の実施の形態におけるディスプレイ１２上に表示される基本的な編集画面（ルートウインドウと呼ぶ）の一例の中間調画像を示す図である。
【図６】図１のシステムにおいて用いられる操作コントローラの一例の平面図である。
【図７】本発明の実施の形態においてビデオ用ハードディスクドライブ１４０に格納される映像等のデータのフォーマットを示す図である。
【図８】本発明の実施の形態におけるプレイリストの構成例を示す図である。
【図９】本発明における加工再収録の概念を説明する概念図である。
【図１０】本発明における加工再収録の説明に供する図である。
【図１１】再収録前（ａ）のプレイリストと、再収録後（ｂ）のプレイリストの説明図である。
【図１２】本発明の実施の形態におけるディスプレイ上に表示される再収録ウインドウの一例の中間調画像を示す図である。
【図１３】図１２の例に対応するＧＰＩ設定テーブルの構成を示す図である。
【図１４】本実施の形態における再収録処理を実現するための処理手順の一例を示すフローチャートである。
【図１５】本実施の形態におけるＧＰＩ制御処理の手順の一例を示すフローチャートである。
【図１６】本実施の形態における、選択したシーンのＩＮ点およびＯＵＴ点を事後的に編集するためのシーントリムウインドウを示すディスプレイ上の中間調画像を示す図である。
【符号の説明】
４…セレクタ、６…モニタ、８…スイッチャ、１０…デジタル録画再生装置、１２…ディスプレイ、１４…キーボード、１６…マウス、１８…操作コントローラ、８０…プレイリスト、９０…外部ＶＴＲ、９６…切替器、１１０…ＥＩＳＡバス、１２１…プロセッサカード（ＲＡＭ含む）、１２２…ディスプレイコントローラカード、１２３…ディスクコントローラカード、１２４…ゲンロックリファレンスカード、１２５…ＲＳ４２２インタフェースカード、１２６…ビデオ入力インタフェースカード、１２７…ビデオ出力インタフェースカード、１２８…オーディオ入出力インタフェースカード、１３０…デジタルビデオバス、１３１…ＧＰＩ設定テーブル、１３３…ビデオルータ、１３５…ＳＣＳＩ−２バス、１４０…ビデオ用ハードディスクドライブ（ランダムアクセス記憶装置）、１４１…カセット、１５０…フロッピーディスクドライブ、１６０…システム用ハードディスクドライブ。

Claims (5)

1. デジタル化された映像データを格納する不揮発性のランダムアクセス記憶装置と、
   該ランダムアクセス記憶装置に対して外部から映像データを収録する収録手段と、
   前記ランダムアクセス記憶装置に格納されている映像から切り出された複数のカットシーンの各々の開始位置および終了位置を表わすデータからなるプレイリストを作成する手段と、
   前記プレイリストに基づいて、前記複数のカットシーンを順次的に再生するタイムライン再生手段と、
   該再生手段の映像出力を加工するためのタイミング信号を受けて該映像出力を加工する加工装置と、
   ユーザの指示に応じて前記収録手段、タイムライン再生手段および加工装置を制御する制御手段とを備え、
   該制御手段は、ユーザの入力に基づく加工対象の範囲を示すデータおよび前記プレイリストに従って、当該加工対象の範囲の映像を前記タイムライン再生手段を介して前記ランダムアクセス記憶装置から再生するとともに、前記加工対象の範囲に対応するタイミング信号を当該時点に前記加工装置に対して出力し、前記収録手段を介して前記加工対象の範囲の前記加工装置の出力を前記ランダムアクセス記憶装置内に元のシーンとは別個に収録し、前記元のシーンの加工対象の範囲と前記加工装置の出力の対応する範囲とを置換するように前記プレイリストを更新する
   ことを特徴とする、加工再収録機能を有するノンリニア映像編集システム。
2. 前記制御手段は、前記タイムライン再生手段により得られるタイムコードにしたがって前記加工対象の範囲を認識するとともに、前記加工装置を経由したタイムコードに従って前記収録の対象の範囲を認識することを特徴とする請求項１記載のノンリニア映像編集システム。
3. 前記制御手段は、少なくとも前記範囲の開始位置より予め定めた時間だけ前の位置から、当該範囲の終了位置より予め定めた時間だけ後の位置まで、前記加工対象の映像の再生を行うとともに、両位置の間の範囲の前記加工装置の出力を収録するよう制御を行うことを特徴とする請求項１または２記載のノンリニア映像編集システム。
4. 前記タイムライン再生手段は映像出力と共にタイムコードを出力し、前記収録手段は前記加工装置からの加工済み映像データとともに得られるタイムコードを参照して、収録すべき範囲を特定することを特徴とする請求項１、２または３記載のノンリニア映像編集システム。
5. ユーザの指示に応じて、前記プレイリストの１つのシーンの開始位置と終了位置の少なくとも一方を変更する編集手段を有する請求項３記載のノンリニア映像編集システム。

Images