JPH10150631A

JPH10150631A - 画像処理方法および装置

Info

Publication number: JPH10150631A
Application number: JP9256379A
Authority: JP
Inventors: Hidehiro Hirase; 英弘平瀬
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1996-09-20
Filing date: 1997-09-22
Publication date: 1998-06-02
Anticipated expiration: 2017-09-22
Also published as: JP3918246B2

Abstract

(57)【要約】【課題】編集処理を迅速かつ簡単に行うことができる
ようにする。【解決手段】編集モジュールＥＭ、合成モジュールＣ
Ｍ、または特殊効果モジュールＳＭで、それぞれ編集、
合成、特殊効果処理を行ったとき、その処理（作業）に
対応して、ファットクリップを生成し、エディットツリ
ー記憶部ＴＭに記憶させる。このファットクリップに
は、そのファットクリップを作成したモジュールを示す
識別子が記憶されるとともに、素材クリップの識別子が
記憶される。従って、階層構造で編集作業を記述するこ
とができ、階層構造の下位のファットクリップが変更さ
れたとき、その上位のファットクリップを自動的に再生
成することが可能となる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像処理方法およ
び装置に関し、特に、素材クリップの識別子を含むファ
ットクリップを生成することで、修正された結果クリッ
プに関連する他の結果クリップの作業情報に対応する処
理を再実行して、その結果クリップを自動的に再生成す
るようにした、画像処理方法および装置に関する。

【０００２】ビデオカメラから得られたビデオデータを
編集するポストプロダクションの分野において、ディス
クを記録媒体として使用したノンリニア編集システムが
提案されている。このノンリニア編集システムにおいて
行われる編集処理として、さまざまな種類の編集処理が
存在している。例えば、複数の素材をつなぎ合わせて所
望のビデオプログラムを作成するためのビデオ編集処
理、キー信号によって複数の素材を合成するための合成
処理、あるいは素材に対して特殊効果処理を施す特殊効
果処理等が存在する。一般的に、このうちのビデオ編集
処理は編集装置で行われ、合成処理はビデオスイッチャ
で行われ、特殊効果処理は特殊効果装置において行われ
ている。

【０００３】近年のディスク媒体のランダムアクセス性
の向上によって、複数チャンネルに対して同時にアクセ
スすることが可能になり、その結果、複数チャンネルの
ビデオデータをリアルタイムで処理する編集処理が要望
されるようになってきた。例えば、テレビジョン放送の
ためのコマーシャル作成用の編集業界や映画プログラム
作成用の編集業界等では、数十から数百の素材を使用し
て編集処理を行うとともに、異なる種類の編集処理を組
合わせて使用することが要望されている。さらに、これ
らの複数種類の編集処理を何度も繰り返し行うことによ
って、高度で且つ複雑な編集結果データを生成すること
が要求されるようになってきた。

【０００４】このような高度で複雑な編集結果データを
作成するためには、数十から数百の素材を管理するとと
もに、編集処理の履歴を記憶しておく必要がある。

【０００５】

【発明が解決しようとする課題】しかし、従来の編集シ
ステムは、このような多数の素材を管理するための装置
および編集履歴を記憶するための装置を備えておらず、
その結果、編集操作が煩雑なものとなっていた。具体的
には、どの素材を、どの編集処理を使用して編集結果ビ
デオデータが作成されたかという情報を、編集オペレー
タが記憶しておくことは不可能であるので、従来の編集
システムでは、編集作業を行う毎に編集オペレータが、
そのような情報を紙に書き込んで管理していた。また、
その複数の編集結果ビデオデータから、さらに新しい編
集結果ビデオデータを生成するような編集処理を何度も
繰り返すような複雑な編集処理を行った場合には、最終
の編集結果ビデオデータが、どの素材から作成されたか
を示す編集履歴情報が膨大なデータ量になり、編集オペ
レータが紙に書き込んで管理することさえも不可能であ
った。

【０００６】そのため、一度作成された編集結果ビデオ
データに変更を加えたい場合には、さらに編集作業が煩
雑になり、時間がかかってしまうという課題があった。

【０００７】本発明はこのような状況に鑑みてなされた
ものであり、複数の素材を編集作業に最適になるように
管理することによって、編集作業の簡略化および高速化
を実現しようとするものである。

【０００８】

【課題を解決するための手段】請求項１に記載の画像処
理方法は、モジュール毎に、所定の素材クリップに対し
て、編集、合成、または特殊効果のうちの少なくとも１
つの処理を行って、結果クリップを生成するときの作業
情報、および作業情報に対応して生成した結果クリッ
プ、および結果クリップを生成するのに使用した素材ク
リップに関する情報を含むファットクリップであって、
素材クリップとして他のファットクリップが使用された
場合には、素材クリップとしての他のファットクリップ
の情報を含むファットクリップを生成する生成ステップ
と、第１のファットクリップが修正されたとき、第１の
ファットクリップに関連する第２のファットクリップを
検索し、第２のファットクリップの作業情報に対応する
処理を再実行して、第２のファットクリップの結果クリ
ップを再度生成する再実行ステップとを備えることを特
徴とする。

【０００９】請求項６に記載の画像処理装置は、モジュ
ール毎に、所定の素材クリップに対して、編集、合成、
または特殊効果のうちの少なくとも１つの処理を行っ
て、結果クリップを生成するときの作業情報、および作
業情報に対応して生成した結果クリップ、および結果ク
リップを生成するのに使用した素材クリップに関する情
報を含むファットクリップであって、素材クリップとし
て他のファットクリップが使用された場合には、素材ク
リップとしての他のファットクリップの情報を含むファ
ットクリップを生成する生成手段と、第１のファットク
リップが修正されたとき、第１のファットクリップに関
連する第２のファットクリップを検索し、第２のファッ
トクリップの作業情報に対応する処理を再実行して、第
２のファットクリップの結果クリップを再度生成する再
実行手段とを備えることを特徴とする。

【００１０】請求項１に記載の画像処理方法および請求
項６に記載の画像処理装置においては、作業情報、結果
クリップ、素材クリップに関する情報を含むファットク
リップが生成される。このファットクリップには、他の
ファットクリップが素材クリップとして使用された場合
には、素材クリップとして使用された他のファットクリ
ップの情報が含まれる。第１のファットクリップが修正
されたとき、第２のファットクリップが検索され、その
作業情報を再実行して第２のファットクリップの結果ク
リップが再生成される。

【００１１】

【発明の実施の形態】以下に本発明の実施例を説明する
が、特許請求の範囲に記載の発明の各手段またはステッ
プと以下の実施例との対応関係を明らかにするために、
各手段の後の括弧内に、対応する実施例（但し一例）を
付加して本発明の特徴を記述すると、次のようになる。
但し勿論この記載は、各手段を記載したものに限定する
ことを意味するものではない。

【００１２】請求項１に記載の画像処理方法は、モジュ
ール毎に、所定の素材クリップに対して、編集、合成、
または特殊効果のうちの少なくとも１つの処理を行っ
て、結果クリップを生成するときの作業情報、および作
業情報に対応して生成した結果クリップ、および結果ク
リップを生成するのに使用した素材クリップに関する情
報を含むファットクリップであって、素材クリップとし
て他のファットクリップが使用された場合には、素材ク
リップとしての他のファットクリップの情報を含むファ
ットクリップを生成する生成ステップ（例えば図８のス
テップＳ５２）と、第１のファットクリップが修正され
たとき、第１のファットクリップに関連する第２のファ
ットクリップを検索し、第２のファットクリップの作業
情報に対応する処理を再実行して、第２のファットクリ
ップの結果クリップを再度生成する再実行ステップ（例
えば図８のステップＳ５８）とを備えることを特徴とす
る。

【００１３】請求項４に記載の画像処理方法は、所定の
モジュールにおいて、所定のファットクリップが選択さ
れたとき、そのファットクリップを生成したモジュール
を読み出す読み出しステップ（例えば図８のステップＳ
５６）をさらに備えることを特徴とする。

【００１４】請求項５に記載の画像処理方法は、第２の
ファットクリップに対して、第１のファットクリップと
関係しない第３のファットクリップから識別するための
識別記号（例えば識別子）を付与する識別ステップ（例
えば図８のステップＳ５４）をさらに備えることを特徴
とする。

【００１５】請求項６に記載の画像処理装置は、モジュ
ール毎に、所定の素材クリップに対して、編集、合成、
または特殊効果のうちの少なくとも１つの処理を行っ
て、結果クリップを生成するときの作業情報、および作
業情報に対応して生成した結果クリップ、および結果ク
リップを生成するのに使用した素材クリップに関する情
報を含むファットクリップであって、素材クリップとし
て他のファットクリップが使用された場合には、素材ク
リップとしての他のファットクリップの情報を含むファ
ットクリップを生成する生成手段（例えば図８のステッ
プＳ５２）と、第１のファットクリップが修正されたと
き、第１のファットクリップに関連する第２のファット
クリップを検索し、第２のファットクリップの作業情報
に対応する処理を再実行して、第２のファットクリップ
の結果クリップを再度生成する再実行手段（例えば図８
のステップＳ５８）とを備えることを特徴とする。

【００１６】図１は、本発明の画像処理方法を適用する
システムの構成例を示している。ワークステーション１
には、キーボード２、マウス３、パッド４などが接続さ
れており、適宜、必要な指令を入力することができるよ
うになされている。ディスプレイ５には、ワークステー
ション１から所定の文字や画像などが、適宜、表示され
るようになされている。ジョグ・フェーダコントローラ
６は、ディバイスコントローラ兼フレームバッファ７に
対して、ユーザの操作に対応して漸次変化する制御信号
を出力するようになされている。

【００１７】スイッチャ８は、ビデオディスクレコーダ
１２、ビデオテープレコーダ（ＶＴＲ）１３、またはビ
デオカメラ１４からの入力を適宜選択し、ディバイスコ
ントローラ兼フレームバッファ７に出力し、記憶させる
ようになされている。また、スイッチャ８は、ディジタ
ルマルチイフェクタ９，１０に対して、所定の画像デー
タを供給し、イフェクト処理を施させるようになされて
いる。スイッチャ８は、ディバイスコントローラ兼フレ
ームバッファ７より読み出されたデータをモニタ１５に
出力し、表示させるようになされている。オーディオミ
キサ１１は、ビデオディスクレコーダ１２より供給され
たオーディオデータをミキシングし、ビデオディスクレ
コーダ１２またはＶＴＲ１３に出力するようになされて
いる。

【００１８】図２は、ワークステーション１に記憶され
ている編集のためのプログラムの基本的な構成を表して
いる。各種の編集処理を行うモジュールは、編集モジュ
ールＥＭ、合成モジュールＣＭ、および特殊効果モジュ
ールＳＭに、それぞれ分割されている。これらの編集モ
ジュールＥＭ、合成モジュールＣＭ、および特殊効果モ
ジュールＳＭは、モジュール制御部ＭＣにより起動さ
れ、それぞれのＧＵＩをモニタ１５に出力し、表示させ
るようになされている。ユーザは、そのＧＵＩに対応し
て、対話的に、編集、合成、特殊効果作業を行うことに
なる。

【００１９】また、これらのモジュールは、ユーザが対
話的に入力した作業を、エディットツリー記憶部ＴＭの
ファットクリップ（FatClip）に書き込むようになされ
ている。各モジュールは、ファットクリップに書き込ま
れた作業情報に基づいて、ビデオディスクレコーダ１
２、ＶＴＲ１３、ビデオカメラ１４などを適宜制御し、
その出力に対してソフトウエア的な処理を行い、編集、
合成、特殊効果を行った結果としての結果クリップを生
成する。

【００２０】モジュール制御部ＭＣは、エディットツリ
ー記憶部ＴＭのファットクリップの階層的な構造を読み
取り、ユーザが指定したファットクリップを作成したモ
ジュールを起動して、そのファットクリップを変更させ
る。また、ファットクリップに記憶されている作業情報
に対応する再実行が行われる際、エディットツリーに対
応するエディットツリーリストの記述の順番に各モジュ
ールを起動し、各階層における結果クリップを生成さ
せ、さらに最終的な結果クリップを生成させる。

【００２１】エディットツリー記憶部ＴＭでは、階層的
な編集、合成、特殊効果作業のすべての階層にわたる作
業情報をモジュール毎にファットクリップに記憶する。
このファットクリップは、作業に応じて動的に生成さ
れ、階層的な構造に結合される。従って、すべての階層
的な編集、合成、特殊効果作業を記憶することができ
る。また、モジュールの処理の順番を任意に決定するこ
とも可能である。

【００２２】ファットクリップは、次のようなデータを
有している。（１）そのファットクリップを作成した編集、合成、特
殊効果のモジュールを示す識別子。（２）そのファットクリップの素材となる素材クリップ
の識別子。（３）編集、合成、特殊効果のモジュールで、ユーザが
作成した作業情報（編集データ、合成のパラメータ、特
殊効果のパラメータ）。（４）そのファットクリップによる編集、合成、特殊効
果作業の結果クリップの識別子。

【００２３】結果クリップの識別子は、作業の結果クリ
ップが実際に作成された場合においてのみ有効な識別子
とされるが、まだ結果クリップが作成されていない場
合、あるいは作成したが、その後、さらに変更作業が加
えられ、結果クリップが無効となった場合には、無効の
識別子に修正される。すなわち、結果クリップが有効で
あるか否かは、その識別子から判定することができるよ
うになされている。

【００２４】図３は、図２のエディットツリー記憶部Ｔ
Ｍに示したファットクリップＸ，Ｙ，Ｚのファットクリ
ップの内容を表している。この例の場合、ファットクリ
ップＸは、素材クリップＭＣ₂₁乃至ＭＣ₂₃を合成処理す
ることで、結果クリップＣ_Xを生成したとき、これに対
応して生成されたものであるので、このファットクリッ
プを作成したモジュールを示す識別子として、合成モジ
ュールの識別子ＩＤＣＭを記憶している。また、このフ
ァットクリップの素材となるクリップの識別子として、
素材クリップＭＣ₂₁乃至ＭＣ₂₃のＩＤであるＩＤＭＣ₂₁
乃至ＩＤＭＣ₂₃が記憶されているとともに、ユーザが作
成した作業情報として、合成のパラメータが記憶されて
いる。さらに、結果クリップＣ_Xの識別子として、ＩＤ
Ｃ_Xが記憶されている。

【００２５】ファットクリップＹは、素材クリップＭＣ
₃₁乃至ＭＣ₃₄を特殊効果モジュールにより処理して、結
果クリップＣ_Yを生成したとき生成されたものであるの
で、このファットクリップを作成したモジュールを示す
識別子として、特殊効果モジュールの識別子ＩＤＳＭを
記憶している。また、このファットクリップの素材とな
るクリップの識別子として、素材クリップＭＣ₃₁乃至Ｍ
Ｃ₃₄のＩＤであるＩＤＭＣ₃₁乃至ＩＤＭＣ₃₄が記憶され
ている。ユーザが作成した作業情報としては、特殊効果
のパラメータが記憶され、結果クリップの識別子として
は、結果クリップＣ_YのＩＤであるＩＤＣ_Yが記憶されて
いる。

【００２６】ファットクリップＺは、ファットクリップ
Ｘの結果クリップＣ_XとファットクリップＹの結果クリ
ップＣ_Yを編集して、結果クリップＣ_Zを生成したとき、
この作業に対応して生成されたものである。このファッ
トクリップＺには、このファットクリップを作成したモ
ジュールを示す識別子として、編集モジュールの識別子
ＩＤＥＭが記憶され、このファットクリップの素材とな
るクリップの識別子として、ファットクリップＸとファ
ットクリップＹの識別子であるＩＤＦＣ_X，ＩＤＦＣ_Yが
記憶されている。また、編集モジュールＥＭにより、結
果クリップＣ_Xと結果クリップＣ_Yをワイプ（Wipe）する
編集データが、作業情報として記憶されている。さら
に、このファットクリップによる作業結果の結果クリッ
プの識別子として、結果クリップＣ_Zの識別子であるＩ
ＤＣ_Zが記憶されている。

【００２７】なお、図３においては、簡単のために、フ
ァットクリップＸ乃至ファットクリップＺを、それぞれ
合成モジュールＣＭ、特殊効果モジュールＳＭ、または
編集モジュールＥＭに対応させるようにしたが、これら
のファットクリップは、これら３つのモジュールのうち
の２つ以上の複合的処理に対応して、生成することがで
きる。

【００２８】次に、図１の実施の形態の動作について、
図４のフローチャートを参照して説明する。なお、この
図４の処理は、ワークステーション１の内蔵するＣＰＵ
（図示せず）により実行される。この編集システムを起
動させると、最初にステップＳ１において、トップメニ
ューがモニタ１５に表示される。このトップメニュー
は、Editor（編集モジュール）,Composite（合成モジュ
ール）,Effect（特殊効果モジュール）,Library（ライ
ブラリモジュール）,System（システムモジュール）の
５個のエディタの項目で構成されている。モニタ１５
に、このトップメニューが表示されると、ステップＳ２
において、所定のメニューがユーザにより選択されるま
で待機し、５個のメニューのうちのいずれかが選択され
ると、その選択が、Editor,Composite,Effect,Library,
Systemのいずれであるかが、ステップＳ３，Ｓ５，Ｓ
７，Ｓ９，Ｓ１１で、それぞれ判定される。そして、そ
のいずれかであることが判定されたとき、それぞれ、ス
テップＳ４，Ｓ６，Ｓ８，Ｓ１０またはＳ１２に進み、
選択に対応する編集モジュールモード、合成モジュール
モード、特殊効果モジュールモード、ライブラリモジュ
ールモード、またはシステムモジュールモードが設定さ
れる。

【００２９】例えば、ステップＳ４の編集モジュールモ
ードが設定されると、図５のフローチャートに示す処理
が実行される。すなわち、最初にステップＳ２１におい
て、モニタ１５に、編集モジュールモードのＧＵＩが表
示される。ユーザは、このＧＵＩの表示を見て、新規の
編集を行う（ファットクリップを新規に作成する）の
か、既に行われた編集を修正する（既に作成されている
ファットクリップを修正する）のかを入力する。新規の
編集を行うとの入力がなされた場合においては、ステッ
プＳ２３に進み、ファットクリップを新たに作成する処
理が実行される。これに対して、既に行われた編集を修
正する旨の入力がなされた場合においては、ステップＳ
２４に進み、その指定された（修正する）編集に対応す
るファットクリップが読み出される。そしてステップＳ
２５において、編集処理が実行される。

【００３０】また、図４のステップＳ６の合成モジュー
ルモードが設定されると、図６のフローチャートに示す
処理が実行される。ステップＳ３１においては、合成モ
ジュールモードのＧＵＩがモニタ１５に表示される。ユ
ーザは、モニタ１５のＧＵＩの表示を見て、新たな合成
処理を行うのか、既に行った合成処理の修正処理を行う
のかを入力する。ステップＳ３２において、新たな合成
処理を行うとの入力がなされたと判定された場合におい
ては、ステップＳ３３に進み、新たなファットクリップ
が作成される。ステップＳ３２において、既に行われた
合成処理を修正する旨の入力がなされたと判定された場
合においては、ステップＳ３４に進み、指定された（修
正する）合成処理に対応するファットクリップを読み出
す処理が実行される。そして、ステップＳ３５におい
て、合成処理が実行される。

【００３１】同様に、図４のステップＳ８の特殊効果モ
ジュールモードが設定されると、図７のフローチャート
に示す処理が実行される。最初に、ステップＳ４１にお
いて、特殊効果モジュールモードのＧＵＩがモニタ１５
に表示される。ユーザは、このＧＵＩの表示を見て、新
規の特殊効果処理を行うのか、既に行われた特殊効果処
理を修正するのかを入力する。ステップＳ４２におい
て、新規の特殊効果処理を行う旨が入力されたと判定さ
れた場合においては、ステップＳ４３に進み、ファット
クリップが新たに作成される。これに対して、ステップ
Ｓ４２において、既に作成されている特殊効果処理を修
正する旨の入力がなされたと判定された場合において
は、ステップＳ４４に進み、指定された（修正する）特
殊効果処理に対応するファットクリップを読み出す処理
が実行される。そして、ステップＳ４５に進み、特殊効
果処理が実行される。

【００３２】図５のステップＳ２５における編集処理の
詳細は、図８のフローチャートに示されている。

【００３３】なお、図示は省略するが、図６のステップ
Ｓ３５と図７のステップＳ４５の処理も、図８における
編集処理が、合成処理または特殊効果処理となる他、図
８に示す場合と同様の処理となる。

【００３４】図８においては、最初にステップＳ５１に
おいて、編集処理に対応する入力が、ユーザによりなさ
れたか否かが判定され、そのような処理に対応する入力
がなされたと判定された場合、ステップＳ５２に進み、
入力に対応する編集データが、新たに生成されたファッ
トクリップ、または既に生成され、読み出されたファッ
トクリップに、適宜書き込まれる。また、このとき、入
力に対応して所定の画像がモニタ１５に表示されるとと
もに、入力に対応する（作業情報に対応する）エディッ
トツリーが適宜作成され、エディットツリー記憶部ＴＭ
に記憶される。すなわち、これによりユーザが、キーボ
ード２、マウス３、パッド４、ジョグ・フェーダコント
ローラ６などを適宜操作して、所定の編集入力を行う
と、それに対応するファットクリップとエディットツリ
ーが自動的に作成、または修正される。また、このと
き、修正のなされたファットクリップの識別子は、無効
の識別子に変更される。

【００３５】次に、ステップＳ５３に進み、現在修正し
ているファットクリップより上位のファットクリップが
存在するか否かが判定され、上位のファットクリップが
存在すると判定された場合においてはステップＳ５４に
進み、ステップＳ５２で修正されたファットクリップの
結果クリップを素材クリップとするファットクリップ、
あるいはそのファットクリップをさらに素材クリップと
するファットクリップなど（関連するファットクリッ
プ）は、その識別子が無効の識別子に変更される。これ
により、例えば、所定の階層的構造の所定の結果クリッ
プ（その時点においてエディットツリーの一番上の結果
クリップ）を生成した状態において、それより下位のフ
ァットクリップを修正する作業が行われた場合において
は、それより上位のファットクリップ（関連するファッ
トクリップ）の結果クリップ（関連する結果クリップ）
の識別子が無効の識別子に変更される。

【００３６】ステップＳ５３において、上位のファット
クリップが存在しないと判定された場合においては、ス
テップＳ５４の処理はスキップされる。

【００３７】例えば、図９に示すように、エディットツ
リーが作成されているものとする。このエディットツリ
ーにおいては、素材クリップＭＣ_G1，ＭＣ_G2によりファ
ットクリップＭＣ−Ｇが生成されており、ファットクリ
ップＦＣ−Ｅは、素材クリップＭＣ_E1，ＭＣ_E2とファッ
トクリップＦＣ−Ｇを素材クリップとしている。ファッ
トクリップＦＣ−Ｃの素材クリップは、素材クリップＭ
Ｃ_C1とファットクリップＦＣ−Ｅとされている。

【００３８】ファットクリップＦＣ−Ｆは、素材クリッ
プＭＣ_F1乃至ＭＣ_F3を素材クリップとし、ファットクリ
ップＦＣ−Ｄは、ファットクリップＦＣ−Ｅ，ＦＣ−Ｆ
の他、素材クリップＭＣ_D1，ＭＣ_D2を素材クリップとし
ている。ファットクリップＦＣ−Ｂは、素材クリップＭ
Ｃ_B1の他、ファットクリップＦＣ−Ｃ，ＦＣ−Ｄを素材
クリップとし、ファットクリップＦＣ−Ａは、ファット
クリップＦＣ−Ｂと素材クリップＭＣ_B1を素材クリップ
としている。

【００３９】特に修正を加えない場合においては、生成
された各ファットクリップの識別子は、すべて有効の識
別子とされている。しかしながら、例えば、ファットク
リップＦＣ−Ｅを変更すると、このファットクリップＦ
Ｃ−Ｅと、これを素材クリップとするファットクリップ
ＦＣ−Ｃ，ＦＣ−Ｄ、このファットクリップＦＣ−Ｃ，
ＦＣ−Ｄを素材クリップとするファットクリップＦＣ−
Ｂ、さらにファットクリップＦＣ−Ｂを素材クリップと
するファットクリップＦＣ−Ａの識別子は、関連する
（上位の）ファットクリップの識別子であるので、それ
ぞれ無効の識別子に変更される。

【００４０】図８のステップＳ５１において、編集処理
が入力されていないと判定された場合、ステップＳ５５
に進み、表示中のクリップが選択されたか否かが判定さ
れる。表示中のクリップが選択されたとステップＳ５５
において判定された場合においては、ステップＳ５６に
進み、対応するモードのモジュールを起動する処理が実
行される。

【００４１】ステップＳ５６の対応するモードのモジュ
ールを起動する処理の詳細は、図１０のフローチャート
に示されている。同図に示すように、対応するモードの
モジュールの起動処理においては、最初にステップＳ７
１において、選択されたクリップのファットクリップの
識別子が、モジュール制御部ＭＣに通知される。そし
て、ステップＳ７２において、モジュール制御部ＭＣ
は、通知を受けた識別子のファットクリップ内のモジュ
ール識別子を読み取る。さらに、ステップＳ７３におい
て、モジュール制御部ＭＣは、読み取ったモジュール識
別子に対応するモジュールを起動する処理を実行する。

【００４２】例えば、図１１に示すように、図３に示す
ファットクリップＺに対応する画像がモニタ１５に表示
されている状態（編集モジュールＥＭのモードの状態）
において、結果クリップＣ_Xと結果クリップＣ_Yにより構
成されている結果クリップＣ_Zのうち、結果クリップＣ_X
を変更する場合、ユーザは、マウス３を操作して、カー
ソルを結果クリップＣ_X上に移動し、マウス３をダブル
クリックして表示中のクリップ選択を指令する。このと
き、選択された結果クリップＣ_Xに対応するファットク
リップＸのモジュール（合成モジュールＣＭ）が読み出
され、対応する画像が、図１２に示すようにモニタ１５
上に表示される。従って、ユーザは、この図１２に示す
状態（ファットクリップＸに対応する合成モジュールＣ
Ｍのモードの状態）からファットクリップＸを適宜修正
する入力を直ちに開始することができる。この入力に対
する処理は、上述した図８のステップＳ５１，Ｓ５２，
Ｓ５３，Ｓ５４により行われる。

【００４３】なお、図１１の表示例の左下に表示されて
いるトップメニューのボタンEditorを操作すると、編集
モジュールが呼び出され、その下のボタンCompositeを
操作すると、合成モジュールが呼び出され、さらにその
下のボタンEffectを操作すると、特殊効果モジュールが
呼び出される。ボタンLibraryは、ワークステーション
１に接続されているＶＴＲ１３やビデオディスクレコー
ダ１２を制御し、通常のクリップ（ファットクリップで
はないクリップ）を作成するとき、あるいは作成したク
リップをリストアップするとき（ブラウズメニューを読
み出すとき）操作される。ボタンSystemは、システム全
体の設定を行うとき操作される。ボタンLibraryが操作
されたとき、ライブラリーモジュールが動作し、ボタン
Systemが操作されたとき、システムモジュールが動作す
る。

【００４４】図１１のトップメニューの右側のブラウズ
メニューにおけるボタンList,Picture,Free Formは、使
用することができるクリップをリスト表示する場合の表
示形式を選択するとき操作されるボタンである。例えば
クリップの名称などを文字でリスト表示する場合は、ボ
タンListが操作され、クリップの最初の１フレームを縮
小してタイル状に配置表示する場合は、ボタンPicture
が操作される。ボタンFree Formは、自由な形式で表示
させるとき操作される。ボタンViewは、ブラウザにある
クリップを直接動画像表示するとき操作される。

【００４５】図１１の表示例の右側のボタンPreview
は、選択したクリップを動画像表示するとき操作され
る。但し、このボタンPreviewを操作したとき、ファッ
トクリップの再実行処理は行われない（再実行処理につ
いては後述する）。このボタンを操作したとき表示され
る動画像は、最終結果としての動画像と異なる場合があ
るが、ボタンを操作するとすぐに表示が開始されるた
め、編集過程において、クリップの長さをチェックした
い場合に使用される。

【００４６】ボタンViewは、選択したクリップを動画像
表示するとき操作される。このボタンを操作したとき、
ボタンPreview操作したときと異なり、再実行処理が実
行される。このボタンを操作した後、表示が行われるま
でに時間がかかるが、このボタンを操作した場合におい
ては、最終結果としての画像を見ることができる。

【００４７】ボタンAll Previewは、クリップを選択せ
ずとも、編集中の最初から最後までのクリップを動画像
表示させるとき操作される。全編集過程の結果を再実行
させて表示したい場合には、ボタンAll Viewが操作され
る。

【００４８】ボタンBrowserは、編集に使用することの
可能なクリップをリストアップするためのブラウズメニ
ュー（図１１のトップメニューの右側に表示されている
メニュー）を表示するとき操作される。このトップメニ
ューの右側のブラウズメニューの位置には、別のメニュ
ーが表示される場合があるので、任意のタイミングにお
いて、ここにブラウズメニューを表示させることができ
るように、ボタンBrowserが設けられている。

【００４９】ボタンBrowserの下の表示00：00：00：00
は、カレントカーソルの位置する時刻を時、分、秒、フ
レーム数で表している。モニタ１５には、このカレント
カーソルが位置する時刻（横軸上の位置）における静止
画像が表示される。

【００５０】図１２のトップメニューの右側に表示され
ているBorder,x,y,T,Bは、合成方法やパラメータの値を
表している。その右側のグラフ表示の位置において、パ
ラメータを各フレーム毎に変更することができるように
なっている。

【００５１】図８のステップＳ５５において、表示中の
クリップ選択の指令が入力されていないと判定された場
合、ステップＳ５７に進み、再実行指令が入力されたか
否かが判定される。この再実行指令は、例えば、図９の
エディットツリー上のファットクリップＦＣ−Ｅを変更
した後、その変更を、ワークステーション１に内蔵され
ているハードディスクに登録する（セーブする）指令を
入力したとき、入力されたと判定される。この他、上述
したボタンViewまたはAll Viewが操作された場合におい
ても、この再実行指令が入力されたものと判定される。
再実行指令が入力されたと判定された場合、ステップＳ
５８に進み、再実行処理が実行される。この再実行処理
の詳細は、図１３のフローチャートに示されている。

【００５２】再実行処理においては、最初にステップＳ
８１において、エディットツリーの一番上のファットク
リップの識別子（以下、簡単に、ファットクリップとも
称する）がスタックにプッシュされる。例えば、図９の
例においては、ファットクリップＦＣ−Ａがスタック上
に書き込まれる。次にステップＳ８２に進み、スタック
が空か否かが判定される。いまの場合、ステップＳ８１
において、スタックにエディットツリーの一番上のファ
ットクリップが書き込まれているので、スタックは空で
はない。従って、ＮＯの判定が行われ、ステップＳ８３
に進む。ステップＳ８３においては、スタックから１つ
のファットクリップがポップされ、そのファットクリッ
プの結果クリップが有効であるか否かが判定される。図
９の例の場合、ファットクリップＦＣ−Ａの結果クリッ
プは無効とされているので、ＮＯの判定が行われ、ステ
ップＳ８４に進む。

【００５３】ステップＳ８４においては、ステップＳ８
３で取り出されたファットクリップの素材クリップが全
て普通のクリップ（ファットクリップではないクリッ
プ）であるか、または有効な結果クリップを持つファッ
トクリップであるかが判定される。図９の例の場合、フ
ァットクリップＦＣ−Ａの素材クリップは、ファットク
リップＦＣ−Ｂであり、その結果クリップは、無効とさ
れている。そこで、この場合、ＮＯの判定が行われ、ス
テップＳ８６に進む。

【００５４】ステップＳ８６においては、スタックに現
在のファットクリップであるファットクリップＦＣ−Ａ
がプッシュされる。また、ステップＳ８７において、ス
テップＳ８４で無効な結果クリップを有するファットク
リップとして判定されたファットクリップＦＣ−Ｂが書
き込まれる。

【００５５】次に、ステップＳ８２に戻り、スタックが
空であるか否かが判定される。いまの場合、空ではない
ので、ステップＳ８３に進み、スタックからファットク
リップＦＣ−Ｂ（最新のファットクリップ）が取り出さ
れ、その結果クリップが有効であるか否かが判定され
る。ファットクリップＦＣ−Ｂの結果クリップは無効で
あるから、ステップＳ８４に進み、ファットクリップＦ
Ｃ−Ｂの素材クリップであるファットクリップＦＣ−Ｃ
が有効な結果クリップを有するファットクリップである
か否かが判定される。ファットクリップＦＣ−Ｃは、無
効の結果クリップを有するので、ステップＳ８６に進
み、スタックに現在のファットクリップＦＣ−Ｂがプッ
シュされるとともに、ステップＳ８７において、無効な
結果クリップを有するファットクリップＦＣ−Ｃがプッ
シュされる。

【００５６】再び、ステップＳ８２からステップＳ８３
に進み、スタックから例えばファットクリップＦＣ−Ｃ
が取り出され、そのファットクリップが有効な結果クリ
ップを有するか否かが判定される。ファットクリップＦ
Ｃ−Ｃは、無効な結果クリップを有するため、ＮＯの判
定が行われ、ステップＳ８４に進む。ステップＳ８４に
おいては、ファットクリップＦＣ−Ｃの素材クリップＦ
Ｃ−Ｅが有効な結果クリップを有するファットクリップ
であるか否かが判定される。ファットクリップＦＣ−Ｅ
は、無効の結果クリップを有するので、ＮＯの判定が行
われ、ステップＳ８６，Ｓ８７において、スタックにフ
ァットクリップＦＣ−Ｃ，ＦＣ−Ｅがプッシュされる。

【００５７】再び、ステップＳ８２からステップＳ８３
に進み、スタックから１つのファットクリップＦＣ−Ｅ
が取り出され、そのファットクリップの結果クリップが
有効であるか否かが判定される。ファットクリップＦＣ
−Ｅは、無効の結果クリップを有するため、ステップＳ
８４に進み、ファットクリップＦＣ−Ｅの素材クリップ
が全て普通のクリップ、または有効な結果クリップを有
するファットクリップであるか否かが判定される。ファ
ットクリップＦＣ−Ｅの素材クリップは、素材クリップ
ＭＣ_E1，ＭＣ_E2と有効な結果クリップを有するファット
クリップＦＣ−Ｇであるから、この場合、ＹＥＳの判定
が行われ、ステップＳ８５に進む。

【００５８】ステップＳ８５においては、ファットクリ
ップＦＣ−Ｅの作業情報に対応して、素材クリップＭＣ
_E1，ＭＣ_E2およびファットクリップＦＣ−Ｇに対して、
編集処理が行われ、結果クリップが再生成される。

【００５９】そして、ステップＳ８２からステップＳ８
３に戻り、スタックからファットクリップＦＣ−Ｃが取
り出され、その結果クリップが有効であるか否かが判定
される。ファットクリップＦＣ−Ｃの結果クリップは無
効であるから、ステップＳ８４に進み、ファットクリッ
プＦＣ−Ｃの素材クリップが全て普通のクリップもしく
は有効な結果クリップを有するファットクリップである
か否かが判定される。ファットクリップＦＣ−Ｃの素材
クリップは、素材クリップＭＣ_C1と有効な結果クリップ
を有するファットクリップＦＣ−Ｅであるから、ＹＥＳ
の判定が行われ、ステップＳ８５において、ファットク
リップＦＣ−Ｃの作業情報に対応して、素材クリップＭ
Ｃ_C1とファットクリップＦＣ−Ｅ（その結果クリップ）
に対して、編集処理が行われ、結果クリップが再生成さ
れる。

【００６０】再び、ステップＳ８２からステップＳ８３
に進み、スタックからファットクリップＦＣ−Ｂが取り
出される。その結果クリップは無効であるから、ステッ
プＳ８４に進み、ファットクリップＦＣ−Ｂの素材クリ
ップが全て普通の素材クリップと有効な結果クリップを
有するファットクリップであるか否かが判定される。フ
ァットクリップＦＣ−Ｂは、無効のファットクリップＦ
Ｃ−Ｄを素材クリップとして有するので、ＮＯの判定が
行われ、ステップＳ８６，Ｓ８７において、ファットク
リップＦＣ−Ｂ，ＦＣ−Ｄがスタックにプッシュされ
る。

【００６１】ステップＳ８２からステップＳ８３に進
み、スタックからファットクリップＦＣ−Ｄが取り出さ
れる。このファットクリップＦＣ−Ｄは、無効の結果ク
リップを有するので、ステップＳ８４に進み、その素材
クリップが全て有効であるか否かが判定される。ファッ
トクリップＦＣ−Ｄの素材クリップは、素材クリップＭ
Ｃ_D1，ＭＣ_D2とファットクリップＦＣ−Ｅ，ＦＣ−Ｆで
あり、このファットクリップＦＣ−Ｅ，ＦＣ−Ｆは、い
ずれも有効の結果クリップを有するので、ステップＳ８
４において、ＹＥＳの判定が行われ、ステップＳ８５に
進む。そして、ステップＳ８５において、ファットクリ
ップＦＣ−Ｄの作業情報に対応して、素材クリップＭＣ
_D1，ＭＣ_D2並びにファットクリップＦＣ−Ｅ，ＦＣ−Ｆ
に対して、編集処理が行われ、結果クリップが再生成さ
れる。

【００６２】再び、ステップＳ８２を介してステップＳ
８３に進み、スタックからファットクリップＦＣ−Ｂが
取り出され、その結果クリップが有効であるか否かが判
定される。ファットクリップＦＣ−Ｂの結果クリップは
無効であるから、ステップＳ８４に進み、その素材クリ
ップは全て有効であるか否かが判定される。ファットク
リップＦＣ−Ｂの素材クリップＭＣ_B1とファットクリッ
プＦＣ−Ｃ，ＦＣ−Ｄは全て有効であるから、ステップ
Ｓ８４においてＹＥＳの判定が行われ、ステップＳ８５
において、ファットクリップＦＣ−Ｂの作業情報に対応
して、素材クリップＭＣ_B1およびファットクリップＦＣ
−Ｃ，ＦＣ−Ｄに対して、編集処理が行われ、結果クリ
ップが再生成される。

【００６３】さらに、ステップＳ８２からステップＳ８
３に進み、ファットクリップＦＣ−Ａが取り出され、そ
の結果クリップは無効であるから、ステップＳ８４に進
み、ファットクリップＦＣ−Ａの素材クリップは、全て
有効であるか否かが判定される。ファットクリップＦＣ
−Ａの素材クリップとしてのファットクリップＦＣ−Ｂ
は、有効な結果クリップを有するので、ステップＳ８５
に進み、ファットクリップＦＣ−Ａの作業情報に対応し
て、素材クリップとしてのファットクリップＦＣ−Ｂに
対して、編集処理が行われ、結果クリップが再生成され
る。

【００６４】そして、ステップＳ８２に戻り、スタック
が空であるか否かが判定される。全ての再実行処理が終
了しているので、ここで、ＹＥＳの判定が行われ、再実
行処理が終了する。

【００６５】なお、ステップＳ８３において、スタック
から取り出されたファットクリップの結果クリップが有
効であると判定された場合においては、ステップＳ８２
に戻る。例えば、エディットツリーの一番上のファット
クリップが有効である場合、ステップＳ８１でスタック
にプッシュされたファットクリップが、ステップＳ８３
において、有効な結果クリップを有すると判定され、ス
テップＳ８２に戻る。そして、ステップＳ８２におい
て、スタックが空であると判定され、直ちに処理が終了
される。このように、エディットツリーの一番上のファ
ットクリップが有効な結果クリップを有する場合におい
ては、再実行処理は実質的に実行されないことになる。

【００６６】図１４は、以上の図１３のフローチャート
の処理をまとめたものである。同図に示すように、エデ
ィットツリーの一番上のファットクリップＦＣ−Ａのモ
ジュールは、その結果クリップが無効であるとき、ファ
ットクリップＦＣ−Ｂのモジュールに対し、結果クリッ
プの転送を要求し、ファットクリップＦＣ−Ｂのモジュ
ールが、さらにファットクリップＦＣ−Ｃのモジュール
に、結果クリップの転送を要求する。そして、ファット
クリップＦＣ−Ｃのモジュールが、ファットクリップＦ
Ｃ−Ｅのモジュールに、さらにファットクリップＦＣ−
Ｅのモジュールが、ファットクリップＦＣ−Ｇのモジュ
ールに、結果クリップの転送を要求する。ファットクリ
ップＦＣ−Ｇの結果クリップは有効とされているため、
この結果クリップがファットクリップＦＣ−Ｅのモジュ
ールに転送される。ファットクリップＦＣ−Ｅのモジュ
ールは、この結果クリップと他の素材クリップとを元に
して結果クリップを再生成し、これをファットクリップ
ＦＣ−Ｃのモジュールに転送する。ファットクリップＦ
Ｃ−Ｃのモジュールは、この結果クリップと他の素材ク
リップから結果クリップを作成し、ファットクリップＦ
Ｃ−Ｂのモジュールに転送する。

【００６７】ファットクリップＦＣ−Ｂのモジュール
は、他方の素材クリップとしてのファットクリップＦＣ
−Ｄのモジュールに対し、結果クリップの転送を要求す
る。ファットクリップＦＣ−Ｄのモジュールは、さらに
ファットクリップＦＣ−Ｅのモジュールに対して、結果
クリップの転送を要求する。ファットクリップＦＣ−Ｅ
の結果クリップは、再生成され、有効とされているた
め、ファットクリップＦＣ−Ｄのモジュールに直ちに転
送される。

【００６８】ファットクリップＦＣ−Ｄのモジュール
は、さらに他のファットクリップＦＣ−Ｆのモジュール
に、結果クリップの転送を要求する。ファットクリップ
ＦＣ−Ｆの結果クリップは有効であるため、直ちにファ
ットクリップＦＣ−Ｄのモジュールに転送される。

【００６９】ファットクリップＦＣ−Ｄのモジュール
は、ファットクリップＦＣ−Ｅのモジュールとファット
クリップＦＣ−Ｆのモジュールから転送された結果クリ
ップと他の素材クリップを元に、結果クリップを再生成
し、これを上位のファットクリップＦＣ−Ｂのモジュー
ルに転送する。ファットクリップＦＣ−Ｂのモジュール
は、ファットクリップＦＣ−Ｄの結果クリップと他の素
材クリップを元に結果クリップを再生成し、ファットク
リップＦＣ−Ａのモジュールに転送する。ファットクリ
ップＦＣ−Ａのモジュールは、ファットクリップＦＣ−
Ｂの結果クリップを元に結果クリップを再生成する。

【００７０】以上のようにして、ファットクリップＦＣ
−Ｅの修正が行われた場合、その結果クリップと、それ
より上位のファットクリップの結果クリップの識別子は
直ちに無効とされるが、その後、ファットクリップＦＣ
−Ｅのセーブなどを指令したとき、その時点において、
再実行処理が自動的に実行される。

【００７１】修正処理が行われたとき、再実行処理を直
ちに開始するようにすることも可能であるが、再実行処
理には若干の時間を必要とするので、修正時において
は、識別子の変更（関連するファットクリップの検索）
だけを行うようにするのが好ましい。

【００７２】

【発明の効果】以上の如く、請求項１に記載の画像処理
方法および請求項６に記載の画像処理装置によれば、素
材クリップとしての他のファットクリップの情報を保持
するようにしたので、異なるモジュール間において、階
層的なファットクリップの管理が可能となり、下位の階
層においてファットクリップが修正されたとき、それに
対応する上位のファットクリップを自動的に再生成する
ことが可能となる。従って、迅速かつ簡単に編集処理を
行うことができる。

【図面の簡単な説明】

【図１】本発明の画像処理方法を適用するシステムの構
成例を示す図である。

【図２】図１のワークステーション内の画像処理のため
のプログラムの構成を説明する図である。

【図３】図２のエディットツリー記憶部のファットクリ
ップの構成を説明する図である。

【図４】図１の実施の形態の動作を説明するフローチャ
ートである。

【図５】図４のステップＳ４の処理の詳細を説明するフ
ローチャートである。

【図６】図４のステップＳ６の処理の詳細を説明するフ
ローチャートである。

【図７】図４のステップＳ８の処理の詳細を説明するフ
ローチャートである。

【図８】図５のステップＳ２５の処理の詳細を説明する
フローチャートである。

【図９】図８のステップＳ５３とＳ５４の処理を説明す
る図である。

【図１０】図８のステップＳ５６の処理の詳細を説明す
るフローチャートである。

【図１１】図８のステップＳ５５の処理を説明する図で
ある。

【図１２】図８のステップＳ５６の処理を説明する図で
ある。

【図１３】図８のステップＳ５８の処理の詳細を説明す
るフローチャートである。

【図１４】図１３の処理を説明するタイミングチャート
である。

【図１５】従来の画像処理方法を説明するフローチャー
トである。

【符号の説明】

１ワークステーション，２キーボード，３マ
ウス，４パッド，５ディスプレイ，６ジョグ
・フェーダコントローラ，７ディバイスコントロー
ラ兼フレームバッファ，８スイッチャ，９，１０
ディジタルマルチイフェクタ，１１オーディオミ
キサ，１２ビデオディスクレコーダ，１３ＶＴ
Ｒ，１４ビデオカメラ，１５モニタ

Claims

【特許請求の範囲】

【請求項１】モジュール毎に、所定の素材クリップに
対して、編集、合成、または特殊効果のうちの少なくと
も１つの処理を行って、結果クリップを生成するときの
作業情報、および前記作業情報に対応して生成した前記
結果クリップ、および前記結果クリップを生成するのに
使用した前記素材クリップに関する情報を含むファット
クリップであって、前記素材クリップとして他のファッ
トクリップが使用された場合には、前記素材クリップと
しての他のファットクリップの情報を含むファットクリ
ップを生成する生成ステップと、第１のファットクリップが修正されたとき、前記第１の
ファットクリップに関連する第２のファットクリップを
検索し、前記第２のファットクリップの前記作業情報に
対応する処理を再実行して、前記第２のファットクリッ
プの結果クリップを再度生成する再実行ステップとを備
えることを特徴とする画像処理方法。
【請求項２】前記生成ステップは、前記素材クリップ
としての他の前記ファットクリップの識別子を前記ファ
ットクリップに書き込むことを特徴とする請求項１に記
載の画像処理方法。
【請求項３】前記生成ステップは、前記ファットクリ
ップに、前記ファットクリップを生成した前記モジュー
ルの識別子をさらに書き込むことを特徴とする請求項１
に記載の画像処理方法。
【請求項４】所定のモジュールにおいて、所定のファ
ットクリップが選択されたとき、そのファットクリップ
を生成した前記モジュールを読み出す読み出しステップ
をさらに備えることを特徴とする請求項１に記載の画像
処理方法。
【請求項５】前記第２のファットクリップに対して、
前記第１のファットクリップと関係しない第３のファッ
トクリップから識別するための識別記号を付与する識別
ステップをさらに備えることを特徴とする請求項１に記
載の画像処理方法。
【請求項６】モジュール毎に、所定の素材クリップに
対して、編集、合成、または特殊効果のうちの少なくと
も１つの処理を行って、結果クリップを生成するときの
作業情報、および前記作業情報に対応して生成した前記
結果クリップ、および前記結果クリップを生成するのに
使用した前記素材クリップに関する情報を含むファット
クリップであって、前記素材クリップとして他のファッ
トクリップが使用された場合には、前記素材クリップと
しての他のファットクリップの情報を含むファットクリ
ップを生成する生成手段と、第１のファットクリップが修正されたとき、前記第１の
ファットクリップに関連する第２のファットクリップを
検索し、前記第２のファットクリップの前記作業情報に
対応する処理を再実行して、前記第２のファットクリッ
プの結果クリップを再度生成する再実行手段とを備える
ことを特徴とする画像処理装置。