JP6055964B2

JP6055964B2 - 映像制作システムおよび映像制作方法

Info

Publication number: JP6055964B2
Application number: JP2013175728A
Authority: JP
Inventors: 内田　充洋; 充洋内田
Original assignee: 株式会社Ｗｏｗｏｗ
Priority date: 2013-08-27
Filing date: 2013-08-27
Publication date: 2017-01-11
Anticipated expiration: 2033-08-27
Also published as: JP2015046692A; WO2015030003A1

Description

本発明は、映画等の映像制作システムおよび映像制作方法に関するものである。

近年、コンピュータ等の普及に伴い、映像制作ではノンリニア編集が主流となっている。コンピュータ等を用いることで、映像データのデジタル編集、デジタル色処理が可能となったが、カメラから出力されたままの生の映像データはデータ容量が大きく、この生の映像データを用いて、編集や色処理等を行うのは現実的ではない。よって、例えば、生の映像データに対してデイリー動画データと呼ばれる圧縮映像データを生成し、これに基づいて映像の時間軸上での編集を行ってＥＤＬ（ＥｄｉｔＤｅｃｉｓｉｏｎＬｉｓｔ）を生成し、ＥＤＬに基づいて生の映像データの映像編集を行っている。
ノンリニア編集では、様々な場所で並行して映像データの編集を行うため、色調整等、撮影監督等の意図を実際に編集作業を行う者に伝達し難いという問題点があった。

特許文献１〜３は、映画制作チェーンにおいて、創造的な意図を伝達し保存するための方法およびシステムに関する発明であり、ポストプロダクション工程等において、プロダクション工程における撮影監督等の見立てや感覚を維持すること目的とする。
また、特許文献４は、映画の撮影現場等において映像データの色変換に用いられる映像変換装置等の発明であり、撮影現場において、撮影監督自らがリアルタイムに映像の色調整を行うことを可能とする。

米国特許第７，５８３，３５５号明細書米国特許第６，９７２，８２８号明細書米国特許第７，７８２，４３９号明細書特開２０１２−２３１４５９号公報

特許文献１〜３に記載の発明は、映画制作チェーンにおいて撮影監督等のルックや感覚を維持することを目的としているものの、撮影監督等の意図を映像に反映させるのは、撮影後においてであり、例えば、撮影時におけるルックの切り替えや、撮影時におけるリアルタイムの色処理等を想定しておらず、撮影時において撮影監督等が撮影現場において直接色調整を行い、撮影監督等の意図を映像にリアルタイムに反映させることは実現できていない。そのため、撮影監督等が編集時の色処理に関しても立ち会わねばならず、膨大な時間とコストが掛かってしまう。

また、特許文献４に記載の発明は、撮影監督等による撮影現場での色処理等が可能であり、撮影現場での色処理等の内容をポストプロダクション（映像編集工程）に出力しているため、撮影監督及びカラリスト等による全映像を見ながらの色調調整に係る時間を削減することができ、ポストプロダクションでの映像制作を効率化しているが、撮影後の映像編集処理において、各種映像編集機器それぞれの機種特性（例えば、映像編集機器固有の色空間等）を考慮して色変換ＬＵＴ（Ｌｏｏｋ−ＵｐＴａｂｌｅ：ルックアップテーブル）を生成しているわけではないため、撮影時における色処理等を各種映像編集機器においてそのまま正確に再現できているとは限らなかった。

本発明の目的は、上記従来技術の問題点を解消し、各種映像編集機器において、本篇記録映像データに対して撮影現場における色処理等を正確に再現することができる映像制作システムおよび映像制作方法を提供することにある。

上記課題を解決するために、本発明は、カメラの機種特性の除去、入力共通色空間から出力共通色空間への色変換、およびモニタの機種特性に応じた色変換からなる色処理を行う映像制作システムであって、撮影前に複数のルック情報を生成するルック情報生成装置と、撮影時において、カメラから出力される生の映像データを本篇記録映像データとして保存する本篇記録映像データ格納部と、複数のルック情報を切り替えて適用し、ユーザの指示に基づいて色調整することで、カメラから取得した生の映像データの色処理を行い色処理後の映像データを生成する色処理部と、色処理部での色処理後の映像データの色処理の情報を記載した色処理パラメータを生成する色処理パラメータ生成部と、色処理部より取得した色処理後の映像データを圧縮してデイリー動画データを生成する映像データ圧縮部と、映像データ圧縮部により生成されたデイリー動画データに基づいて、編集情報データを生成する編集情報データ生成部と、撮影後に、本篇記録映像データ格納部に記録された本篇記録映像データに基づいて映像制作を行う映像編集機器と、映像編集機器の機種特性を取得し、映像編集機器の機種特性と、色処理パラメータとに基づいて色変換ルックアップテーブルを生成するルックアップテーブル生成装置と、を備え、撮影時の色処理部での色調整は、色処理後の映像データおよびモニタに表示された色処理後の映像にリアルタイムに反映され、映像編集機器は、編集情報データおよび色変換ルックアップテーブルに基づいて、本篇記録映像データに対して撮影時の色処理後の映像の再現を行った上で、映像制作を行うことを特徴とする映像制作システムを提供する。

また、複数台のカメラを備え、色処理部は、複数台のカメラのそれぞれから出力される生の映像データのそれぞれに対してユーザによって選択された複数のルック情報のいずれか１つを適用することが好ましい。

また、複数台のモニタを備え、色処理部は、ユーザにより選択された複数台のモニタの少なくとも１つに色処理後の映像データに基づく色処理後の映像を表示することが好ましい。

また、ルックアップテーブル生成装置は、インターネット上に設置されたサーバであり、インターネットを通じて色処理パラメータを取得し、インターネットを通じて映像編集機器の機種特性を取得して、映像編集機器が取り込み可能な色変換ルックアップテーブルを生成し、インターネットを通じて色変換ルックアップテーブルを映像編集機器へ出力することが好ましい。

また、色処理部は、モニタ色空間変換部を更に備え、モニタ色空間変換部は、色処理後の映像データについて最終出力モニタのエミュレーション処理を行うことが好ましい。

色処理部は、モニタキャリブレーション部を更に備え、モニタキャリブレーション部は、色処理後の映像データについてモニタの誤差補正を行うことが好ましい。

また、本発明は、カメラの機種特性の除去、入力共通色空間から出力共通色空間への色変換、およびモニタの機種特性に応じた色変換からなる色処理を行う映像制作方法であって、撮影前に複数のルック情報を生成するステップと、撮影時において、カメラから出力される生の映像データを本篇記録映像データとして保存するステップと、複数のルック情報を切り替えて適用し、ユーザの指示に基づいて色調整することで、カメラから出力される生の映像データの色処理を行い、色処理後の映像データを生成するステップと、色処理後の映像データの色処理の情報を記載した色処理パラメータを生成すると、色処理後の映像データを圧縮してデイリー動画データを生成するステップと、デイリー動画データに基づいて、編集情報データを生成するステップと、撮影後に、映像編集機器において、本篇記録映像データに基づいて映像制作を行うステップと、映像編集機器の機種特性を取得し、映像編集機器の機種特性と、色処理パラメータとに基づいて色変換ルックアップテーブルを生成するステップと、を備え、撮影時の色調整は、色処理後の映像データおよびモニタに表示された色処理後の映像にリアルタイムに反映され、映像制作を行うステップでは、映像編集機器において、編集情報データおよび色変換ルックアップテーブルに基づいて、本篇記録映像データに対して撮影時の色処理後の映像の再現を行った上で、映像制作を行うことを特徴とする映像制作方法を提供する。

本発明によれば、撮影時において、事前に作成したルック情報を適用したライブ映像を確認することができ、リアルタイムでルックの切り替えや色調整を反映することができ、また、撮影後の映像編集において、撮影時の色処理を正確に再現することができるため、映像制作を効率化することができると共に、コストダウンを図ることができ、映像の品質を向上させることができる。

本発明の一実施形態に係る映像制作システムの全体構成図である。図１に示す映像制作システムにおける映像制作方法を示すフローチャートである。図１に示す映像制作システムの第１変形例を示す部分構成図である。図１に示す映像制作システムの第２変形例を示す部分構成図である。図１に示す映像制作システムの第３変形例を示す部分構成図である。

本発明に係る映像制作システムおよび映像制作方法を、添付の図面に示す好適実施形態に基づいて以下に詳細に説明する。

図１は、本発明の一実施形態に係る映像制作システムの全体構成を示す。図１の映像制作システムは、撮影準備システム１、撮影システム２、および映像編集システム３からなる。
撮影準備システム１は、ルック情報生成装置１１およびルック情報記憶部１２を備える。

ルック情報生成装置１１は、ユーザの指示に基づいて、撮影前に複数のルック情報を作成し、ルック情報記憶部１２は、ルック情報生成装置１１内にあって、ルック情報生成装置１１によって生成された複数のルック情報を記憶する。
また、ルック情報生成装置１１は、撮影システム２の後述する映像変換システム２２に接続される。

ここで、ルックとは、最終的な映像の色そのもので表現される質感、色調をいい、ルック情報とはルックを実現するための数値等に基づく情報をいう。なお、ルック情報としては、カメラの機種特性の除去、レンダリング（出力に適した色再現となるような色処理。入力共通色空間から出力共通色空間への色変換）、およびモニタの機種特性に応じた色変換を含む色変換全体を指す場合もあるが、ここでは、レンダリングを固定して、共通色空間上での色変換部分のみを指す。
また、撮影では、原則として複数のシーンについて複数のカットが撮影される。その際、１つのカットに適用されるルックは１つであるが、異なるカットや異なるシーンでは、複数のルック情報を切り替えて、異なるカットごとに、または、異なるシーンごとに、異なるルックが使用される場合が多い。従って、１日の撮影においては、例えば、数十種類のルックを使用する場合もある。
ルック情報生成装置１１およびルック情報記憶部１２は、例えば、ハードディスク等の情報記憶装置を備える汎用的なコンピュータ等によって構成されてもよい。また、ルック情報は、特定の画像等に基づいて生成されてもよく、また、所定のフィルム調等の従来から広く利用されているものでもよい。

撮影システム２は、複数台のカメラ２１、複数台のカメラ２１に相互に接続される映像変換装置２２、映像変換装置２２に相互に接続されるモニタ２３、映像変換装置２２に接続するコントローラ２４、映像変換装置２２と同様に複数台のカメラ２１に接続される本篇記録映像データ格納部２５、および映像変換装置２２に接続されるデイリー動画データ格納部２６を備える。また、撮影システム２は、編集情報データ生成部２７を備えてもよく、編集情報データ生成部２７はデイリー動画データ格納部２６に接続される。
複数台のカメラ２１（図１に示すカメラＡ、カメラＢ等）は、それぞれメーカーや機種の異なるものでもよく、例えば、撮影現場において別々の場所に設置され、撮影に際して使い分けられ、それぞれのカメラＡ、カメラＢ等から、生の非圧縮の映像データを映像変換装置２２および本篇記録映像データ格納部２５へ出力する。また、撮影に用いられる複数台のカメラ２１の切り替えは、複数台のカメラ２１側から行われてもよく、また、コントローラ２４から映像変換装置２２を通じて行われてもよい。また、撮影に際して、複数台のカメラ２１を同時に使用して、異なる方向から同時に撮影が行われてもよい。

映像変換装置２２は、その内部に、ＩＤＴ（ＩｎｐｕｔＤｅｖｉｃｅＴｒａｎｓｆｏｒｍ）変換部３０、カメラキャリブレーション部３１、ＬＭＴ（ＬｏｏｋＭｏｄｉｆｉｃａｔｉｏｎＴｒａｎｓｆｏｒｍ）変換部３２、レンダリング変換部３３、モニタ色空間変換部３４、モニタキャリブレーション部３５、色処理パラメータ生成部３６、映像データ圧縮部３７、内部メモリ３８、および本体制御部３９をそれぞれ備え、また、撮影準備システム１のルック情報生成装置１１に接続される。
ＩＤＴ変換部３０は、複数台のカメラ２１で撮影された生の映像データ（カメラ２１の色空間）を入力の共通色空間であるＡＣＥＳ（ＡｃａｄｅｍｙＣｏｌｏｒＥｎｃｏｄｉｎｇＳｐｅｃｉｆｉｃａｔｉｏｎ）の映像データに変換するものである。

また、カメラキャリブレーション部３１は、ＩＤＴ変換部３０で入力色空間ＡＣＥＳ（）の映像データに変換された映像データを、撮影された複数台のカメラ２１の個体差に応じて補正するものである。こうすることにより、メーカーや機種の異なる複数台のカメラ２１で撮影された生の映像データは、シーン基準の色空間として定義される入力色空間ＡＣＥＳの映像データに変換されるので、同一シーンであれば、同一の色の映像データに変換される。なお、本発明におけるカメラの機種特性の除去とは、上述のカメラ２１の個体差に応じた補正のことであり、個体差に応じた補正には、カメラの機種の違いに応じた補正だけでなく、カメラ２１の経時変化等の影響の補正も含まれる。
よって、メーカーや機種の異なる複数台のカメラ２１で撮影された生の映像データであっても、高精度にマッチングの取れた入力色空間ＡＣＥＳの映像データとすることができる。

ＬＭＴ変換部３２は、映像コンテンツやストーリ、シーンの雰囲気に合わせた演出のため、現場監督等のユーザ指示に基づく撮影現場での色調整を可能とするもので、撮影監督は、コントローラ２５を操作することで、複数台のカメラ２１から出力された生の映像データに適用する上述のルック（情報）を切り替えることができ、また、映像の色、例えばシーンの色を、撮影現場で映像を確認しながら色調整することができる。なお、ＬＭＴ変換部３２は、入力色空間ＡＣＥＳにおいて、上述の変換された映像データを色調整済み映像データに色変換するものである。
レンダリング変換部３３は、ＬＭＴ変換部３２において色変換のなされた入力色空間ＡＣＥＳの色調整済み映像データに、予め指定された映像コンテンツの最終出力デバイスに応じたレンダリングを施し、最終出力デバイスの、出力デバイスに依存しない出力標準色空間内に変換する。つまり、レンダリング変換部３３は、入力色空間ＡＣＥＳの映像データを出力デバイスに依存しない出力標準色空間ＤＩＣ（ＤｅｖｉｃｅＩｎｄｅｐｅｎｄｅｎｔＣｏｌｏｒ）の映像データに色変換するためのものである。

モニタ色空間変換部３４は、ライブ映像を確認するためのモニタ２３に表示するために、レンダリング変換部３３によって色変換された出力標準色空間（ＤＩＣ）の映像データを、モニタの色空間に変換すると共に、モニタのγ特性に合わせるように変換するものである。また、モニタ色空間変換部３４によって、モニタ２３において、最終出力モニタと同じ色再現ができるように、映像データに対して最終出力モニタのエミュレーション処理が行われる。
また、モニタキャリブレーション部３５は、モニタ色空間変換部３４でモニタ２３の色空間に変換された映像データを、モニタ２３の個体差に応じて補正するものである。なお、ここでいう個体差とは、モニタ２３の経時変化等による個体差をいう。
モニタ色空間変換部３４およびモニタキャリブレーション部３５により、モニタ２３がどのようなメーカーおよび機種であっても、映像の最終出力デバイスであるデジタルプロジェクタ等で再現される色と同じ色を表示することができる。よって、映像を表示するモニタのメーカーや機種に依らず、高精度にマッチングの取れた映像とすることができる。

色処理パラメータ生成部３６は、映像変換装置２２において、上述のＩＤＴ変換部３０からモニタ色空間変換部３４にかけて行われる色変換の情報を色処理パラメータとして生成、出力するものである。なお、色処理パラメータが生成、出力される場合、モニタキャリブレーション部３５での補正は上述のとおり出力先モニタの個体差に応じてなされるものであるため、このモニタキャリブレーション部３５でモニタキャリブレーションを行う前の映像データへの色変換の情報が色処理パラメータとして出力される。色処理パラメータの生成、出力については、上述のコントローラ２５によって操作される。
なお、色処理パラメータとしては、生の映像データに適用したルック情報、ＬＭＴ変換部３２において行われた色調整の情報、レンダリング変換部３３で色変換の情報、モニタ色空間変換部３４での色変換の情報等であり、これら色処理パラメータに基づいて生の映像データを色処理のなされた映像データに変換する色変換ＬＵＴ（ルックアップテーブル）を生成することができる。色処理パラメータは、撮影時の色処理を完全に、正確に、再現するために必要な全ての情報である。

映像データ圧縮部３７は、周波数特性等を利用して上述の色処理後の映像データのビットレートを低減することで色処理後の映像データのデータ容量をリアルタイムに圧縮し、編集効率を高めたデイリー動画データを生成、出力する。なお、デイリー動画データには、クリップ名、タイムコード等を含む本篇記録映像データへの参照情報や、適用されたルック情報を含む色処理パラメータへの参照情報などの編集に必要なメタデータが含まれる。なお、クリップとは、撮影の最小単位である１回のレコードングの開始から終了までをいい、また、タイムコードとは、映像データ等において、同期を取るための時間軸のフォーマットであり、映像データにおける時間軸上の絶対位置を示す情報をいう。
なお、本発明の映像圧縮部３７では、色処理後の映像データをリアルタイムに圧縮しているためデイリー動画データを作成する時間を短縮することができる。

内部メモリ３８は、映像変換装置２２に入力された生の映像データ、複数のルック情報、色処理パラメータ等の各種データを一時的に記憶し、また、必要に応じて出力するものである。
本体制御部３９は、複数台のカメラ２１やモニタ２３等の映像変換装置２２の外部接続機器や、コントローラ２４等の指示に基づいて、映像変換装置２２の各部を制御し、各種データを生成、出力等するものである。

モニタ２３は、複数台のカメラ２１で撮影された映像をライブ映像として表示するものであり、上述のとおり、モニタ２３に表示されるライブ映像は、ルックの適用を含む色処理がなされ、また、出力先であるモニタ２３の機種特性に合わせて色変換がなされ、更に、出力先であるモニタ２３の個体差に合わせて補正がなされたものである。
なお、モニタ２３は、正確なハードウェアキャリブレーションを行うための図示しない測色計を備えてもよい。図示しない測色計は、モニタ２３の表示画面に設置され、コントローラ２４および映像変換装置２２の指示により、モニタキャリブレーションの際、モニタ２３に実際に表示される画像の測色を行うものである。図示しない測色計によって、モニタ２３の測色を行うことで、モニタ２３の経時変化等の個体差の情報を考慮したより正確な補正を行うことができる。なお、本発明におけるモニタの機種特性とは、映像の出力先モニタの機種特性のことである。

コントローラ２４は、上述の映像変換装置２２を操作するためのものであり、コントローラ２４を通じて映像変換装置２２に、撮影を行うカメラの選択、映像データに適用するルックの選択、撮影現場における映像データの色調整（ＬＭＴ変換部３２での色調整）、色処理パラメータの出力や、図示しない測色計を用いたモニタ２３における表示画像の測色、モニタ２３のモニタキャリブレーション等の指示を出す。コントローラ２４を操作することで、映像変換装置２２に接続された各種装置等を操作することができる。
本篇記録映像データ格納部２５は、複数台のカメラ２１から出力された加工等のされていない生の映像データを本篇記録映像データとして記録し、映像編集システム３の各種映像編集機器４２の求めに応じて本篇記録映像データを出力するものである。

デイリー動画データ格納部２６は、映像変換装置２２の映像データ圧縮部３７において編集し易いように圧縮された色処理後の映像データをデイリー動画データとして記録するものである。デイリー動画データとしては、圧縮され、色処理された映像データの他に、上述のとおり、クリップ名、タイムコード等を含む本篇記録映像データへの参照情報や、適用されたルック情報を含む色処理パラメータへの参照情報などの編集に必要なメタデータが含まれる。

編集情報データ生成部２７は、上述のとおり撮影現場に設置されていてもよく、また、撮影現場以外の場所に設置されていてもよい。撮影後、編集情報データ生成部２７は、デイリー動画データ格納部２６よりデイリー動画データを取得し、編集情報データを生成する。具体的には、編集情報データ生成部２７において、撮影監督や編集者などのユーザが、デイリー動画データに基づいて映像情報の切り出し、並び変え等の編集作業を行い、時間軸上での最終作品情報を作成し、この時間軸上での最終作品情報を編集情報データとして出力する。また、編集情報データ生成部２７は、上述の編集作業において、後の映像編集工程において必要な情報、指示等を編集情報データに付加してもよい。
なお、本発明のデイリー動画データは、色処理のなされたものであるため、上述の編集作業のクオリティを高めることができる。

編集情報データは、色処理のなされたデイリー動画データに対して、時間軸上での切り出し、並び変え等を行うことで作成された、ＥＤＬ（ＥｄｉｔＤｅｃｉｓｉｏｎＬｉｓｔ）と呼ばれる、クリップ名、タイムコード等を含む本篇記録映像データへの参照情報や、本篇記録映像データに適用する色処理への参照情報（適用されたルック情報、色調整の情報を含む色処理パラメータへの参照情報）など、本篇記録映像データのメタデータに紐付けられ、映像編集工程において本篇記録映像データを編集・加工するための情報である。
よって、編集情報データに基づいて本篇記録映像データの時間軸上での編集を行い、また、編集情報データに基づいて本篇記録映像データに色処理パラメータから生成された色変換ＬＵＴを適用すれば、映像編集工程において、時間軸上での最終映像データを作成でき、また、最終映像データにおいて撮影時の色処理を正確に再現することができる。

編集システム３は、ＬＵＴ生成装置４１および各種映像編集機器４２を備える。
ＬＵＴ生成装置４１は、各種映像編集機器４２のそれぞれと相互に接続すると共に、撮影システム２の映像変換装置２２に接続される。
また、各種映像編集機器４２は、例えば、ＶＦＸシステム５０、Ｇｒａｄｉｎｇシステム５１、Ｅｄｉｔシステム５２、およびＳｏｕｎｄシステム５３等からなり、撮影システム２の本篇記録映像データ格納部２５および編集情報データ生成部２７に接続されると共に、ＬＵＴ生成装置４１と相互に接続する。

ＬＵＴ生成装置４１は、編集システム２の映像変換装置２２から出力された色処理パラメータを取得し、また、上述の各種映像編集機器４２からの指示を受け、上述の色処理パラメータと各種映像編集機器４２の機種特性の情報とに基づいて色変換ＬＵＴを生成し、各種映像編集機器４２へ出力する。なお、色変換ＬＵＴはどのようなものでもよいが、色変換の精度を上げるため、例えば、３次元の色空間によって構成される３ＤＬＵＴが好ましい。
各種映像編集機器４２は、撮影システム２の本篇記録映像データ格納部２６から本篇記録映像データを取得し、編集情報データ格納部２７から編集情報データを取得し、そして、ＬＵＴ生成装置４１から色変換ＬＵＴを取得して、各種映像編集機器４２において、撮影時の色処理後の映像を正確に再現し、正確に再現された色処理後の映像データに基づいて各種映像編集機器での映像編集を行う。各種映像編集機器４２において、本篇記録映像データの映像編集を行うことで上映用の最終映像データが制作される。

各種映像編集機器４２のＶＦＸシステム５０は、ＣＧ等による映像を作成し、本篇記録映像データに対してこれらの映像を合成するシステムであり、Ｇｒａｄｉｎｇシステム５１は、映像全体の最終的な色調整を行うシステムであり、Ｅｄｉｔシステム５２は、各種映像データの統合、編集を行うシステムであり、Ｓｏｕｎｄシステム５３は、本篇記録映像データに各種サウンドを同期させ、音声情報の入った映像データ生成するシステムであり、これらの各種映像編集機器を経て、上映用の最終映像データが生成される。

図２に示すフローチャートに基づいて図１の映像制作システムにおける映像制作方法を説明する。
始めに、撮影に入る前の撮影準備の段階でルック情報生成装置１１において、撮影の際にライブ映像（モニタ２３に表示させる色処理後の映像）に適用するルックを実現するためのルック情報を複数作成する（ステップＳ１）。作成された複数のルック情報は、ルック情報記憶部１２に記憶され、ルック情報生成装置１１が、撮影システム２の映像変換装置２２に接続された際、所定のフィルム調等の従来から広く利用されているルック情報と共に映像変換装置２２の本体制御部３９へ出力され、本体制御部３９を通じて内部メモリ３８に記憶される。

次に、複数台のカメラ（カメラＡ、カメラＢ等）２１を用いた映像の撮影を行う（ステップＳ２）。撮影の際、複数台のカメラ２１から出力される映像データとしては、何ら編集加工等のされていない生の非圧縮の映像データが映像変換装置２２および本篇記録映像データ格納部２５へ出力される。映像変換装置２２に出力された生の映像データは、映像変換装置２２において各種色処理等がなされ、また、本篇記録映像データ格納部２５へ出力された生の映像データは、本篇記録映像データとして本篇記録映像データ格納部２５に記録される。

撮影がなされ、複数台のカメラ２１から映像変換装置２２および本篇記映像データ格納部へ生の映像データが出力されると、映像変換装置２２は、撮影準備システム１のルック情報生成装置１１において予め生成された複数のルック情報を切り替えて生の映像データに適用して、モニタ２３において表示されるライブ映像の色処理を行う（ステップＳ３）。
具体的には、映像変換装置２２は、ＩＤＴ変換部３０により複数台のカメラ２１から出力された生の映像データを入力色空間ＡＣＥＳの映像データに色変換し、キャリブレーション部３１により、ＩＤＴ変換部３０で色変換された映像データについて、撮影されたカメラ２１の機種依存の影響が無くなるように補正し、ＬＭＴ変換部３２により、キャリブレーション部３１で補正された映像データについて、ルック情報生成装置１１において生成された所定のルックを実現するためのルック情報の適用を含む色調整を行い、レンダリング変換部３３により、ＬＭＴ変換部３２により色調整のなされた映像データについて、最終出力先に対応した出力標準色空間ＤＩＣの映像データに色変換する。また、モニタ色空間変換部３４により、上述の出力標準色空間ＤＩＣにおいて色変換された映像データについて、モニタの色空間に変換すると共に、モニタのγ特性に合わせるように変換し、モニタキャリブレーション部３５において、モニタ色空間変換部３４においてモニタの色空間に変換された映像データについて、モニタ２３の個体差の情報に基づいて補正する。

カメラ２１からの生の映像データについて、上述のとおり映像変換装置２２の各部において色処理がなされ、モニタキャリブレーション部３５からモニタ２３と映像データ圧縮部３７とに色処理後の映像データが出力される。
なお、ユーザは、コントローラ２４を通じて複数台のカメラ２１のそれぞれから出力された生の映像データに適用される上述のルック情報を別のルック情報に切り替えることができ、また、モニタ２３に表示されるライブ映像をモニタリングし、コントローラ２４を通じて微細な色調整を行うことができる。なお、ユーザは、ライブ映像をモニタリングすることで、カメラ２１の設定、照明の設定、役者の動きなどをリアルタイムで確認することができる。

映像変換装置２２の色処理パラメータ生成部３６は、生の映像データに対する上述のＩＤＴ変換部３０からモニタ色空間変換部３４まで各部での色変換等を１つの色処理とする色変換ＬＵＴを生成するための色処理パラメータを生成する（ステップＳ４）。生成された色処理パラメータは、内部メモリ３８に記録され、また、必要に応じて映像編集システム３のＬＵＴ生成装置４１へ出力される。

また、映像変換装置２２の映像データ圧縮部３７は、上述のＩＤＴ変換部３０からモニタ色空間変換部３４にかけて色処理のなされたライブ映像データを圧縮し、データ容量が小さく編集のしやすい色処理のなされたデイリー動画データを生成する（ステップＳ５）。映像データ圧縮部３７で生成された色処理のなされたデイリー動画データは、デイリー動画データ格納部２６へ出力され、記録される。

また、編集情報データ生成部２７は、デイリー動画データ生成部２６から、圧縮された色処理済みのデイリー動画データを取得し、ユーザの指示により、デイリー動画データからの映像の切り出し、並び変え等を行い、時間軸上での最終映像データを作成し、時間軸上での最終映像データに基づいて編集情報データを生成する（ステップＳ６）。生成された編集情報データは、映像編集システム３の各種映像編集機器４２へ出力される。

また、映像編集システム３のＬＵＴ生成装置４１は、撮影システム２の映像変換装置２２の色処理パラメータ生成部３６から色処理パラメータデータを取得し、また、映像編集システム３の各種映像編集機器４２から、それら映像編集機器の機種特性の情報を取得し、撮影時の色処理を正確に再現するための色変換ＬＵＴを生成する（ステップＳ７）。なお、映像編集機器の機種特性の情報とは、それら映像編集機器固有の色空間の情報等であり、それら編集機器の機種特性の情報は、ＬＵＴ生成装置４１に予め記憶されていてもよい。
ＬＵＴ生成装置４１で生成された色変換ＬＵＴは、上述の映像編集機器の機種特性の情報を出力した各種映像編集機器４２のそれぞれの映像編集機器へ出力される。

各種映像編集機器４２では、撮影システム２の本篇記録映像データ格納部２５から本篇記録映像データを取得し、編集情報データ生成部２７から編集情報データを取得し、ＬＵＴ生成装置４１から色変換ＬＵＴを取得して、これらのデータに基づいて、各種映像編集機器４２において、撮影時の色処理後の映像を正確に再現する（ステップＳ８）。
そして、ユーザは、撮影時の色処理後の映像が正確に再現された映像データ等に基づいて、ＣＧの合成、色調整、サウンドの同期等を行って上映を行うための最終映像データを作成する（ステップＳ９）。

本発明の一実施形態に係る映像制作システムおよび映像制作方法は、上述のとおり、撮影時において、事前に作成したルック情報を適用したライブ映像を確認することができ、また、リアルタイムでルック情報の切り替えや色調整を反映することができ、また、撮影後の映像編集において、撮影時の色処理を正確に再現することができるため、撮影後に、撮影監督及びカラリスト等が全映像を見ながらの試行錯誤の色調調整を行う必要がなく、映像制作を効率化することができると共に、コストダウンを図ることができ、映像の品質を向上させることができる。

第１変形例
なお、図１に示す本発明の一実施形態において、撮影準備システム１のルック情報作成装置１１は、撮影システム２の映像変換装置２２に接続されており、映像変換装置２２において、複数のルック情報が内部メモリ３８に記憶され、コントローラ２４からのユーザの指示により本体制御部３９を通じて複数台のカメラ２１のそれぞれから出力された生の映像データに対して、所定のルックを反映させる構成となっているが、本発明はこれに限られない。
本発明の一実施形態の第１変形例として、例えば、図３に示すように、撮影準備システム１０１のルック情報作成装置１１が、撮影システム１０２の複数台のカメラ１２１のそれぞれに接続され、ルック情報作成装置１１は、ルック情報記憶部１２に記憶された複数のルック情報に基づいて、複数台のカメラ１２１のそれぞれに所定のルックを設定する構成であってもよい。この場合、複数台のカメラ１２１から出力される生の映像データは、撮影されたカメラに応じた所定のルックの適用された映像データである。変形例１においても上述の実施形態と同様の効果が得られる。

第２変形例
また、図１に示す本発明の一実施形態において、撮影システム２の映像変換装置２２の色処理パラメータ生成部３６は、映像データに対するルックの適用やユーザによる色調整を含め、映像変換装置２２のＩＤＴ変換部３０からモニタ色空間変換部３４にかけての映像データに対する色変換について、色変換ＬＵＴの基となる色処理パラメータを生成し、出力するものであるが、本発明はこれに限られない。
本発明の一実施形態の第２変形例として、例えば、図４に示すように、撮影システム２０２の映像変換装置１２２の色処理パラメータ生成部１３６は、色処理パラメータではなく色変換ＬＵＴ自体を生成し、各種映像編集機器４２へ直接出力してもよい。この場合、色変換ＬＵＴの生成のため、映像変換装置１２２の内部メモリ３８には、各種映像編集機器４２の映像編集機器それぞれの機種特性が予め記憶されていてもよい。変形例２においても上述の実施形態と同様の効果が得られる。

第３変形例
また、本発明の一実施形態の第３変形例として、例えば、図５に示すように、映像制作システムの撮影システム３０２は、それぞれ種類の異なる複数台のモニタ１２３（例えば、モニタＡ、モニタＢ等）を備えてもよい。映像変換装置２２は、コントローラ２５からのユーザの指示により、上述の複数台のモニタ１２３のうち、ライブ映像を表示する少なくとも１つのモニタを選択し、選択したモニタに対して色処理されたライブ映像を出力することができる。
コントローラ２５によって選択された少なくとも１つのモニタによって色処理されたライブ映像を確認することができるため、ユーザがモニタの設置場所まで移動する必要がなく、色処理されたライブ映像の確認作業を効率よく行うことができる。

第４変形例
また、本発明の一実施形態の第４変形例として、例えば、図１のＬＵＴ生成装置は、インターネット上に設置されたサーバであってもよい。映像変換装置２２および各種映像編集機器４２は、インターネットに接続されており、ＬＵＴ生成装置４１は、インターネットを通じて映像変換装置２２から色処理パラメータを取得し、また、インターネットを通じて各種映像編集機器４２から映像編集機器それぞれの機種特性を取得して、サーバ内で色変換ＬＵＴを生成し、インターネットを通じて各種映像編集機器４２へ色変換ＬＵＴ出力するものであってもよい。
撮影後の映像編集は、各種編集作業に応じて、様々な場所で日付・時間帯等を問わず並行して行われる。よって、ＬＵＴ生成装置をサーバ上に備えることで、撮影後、各種編集作業を行うユーザが専用のＬＵＴ生成装置を持たなくとも、また、場所や時間に制限されないで、各種映像編集機器４２のそれぞれに対応した色変換ＬＵＴを生成、取得することができる。

また、上述の変形例１〜４を含む本発明の映像制作システムおよび映像制作方法では、複数台のカメラから本編記録映像データ格納部および映像変換装置へ生の非圧縮の映像データを出力しているが、例えば、本編記録映像データ格納部へは、生の非圧縮の映像データである４Ｋの映像データを出力し、映像変換装置へは、非圧縮のリサイズしたＨＤの映像データを出力してもよい。

以上、本発明の映像制作システムおよび映像制作方法について詳細に説明したが、本発明は、上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、各種の改良や変更を行ってもよい。

１、１０１、撮影準備システム、２、１０２、２０２、３０２撮影システム、３、２０３映像編集システム、１１ルック情報生成装置、１２ルック情報記憶部、２１、１２１複数台のカメラ、２２映像変換装置、２３、１２３モニタ、２４コントローラ、２５本篇記録映像データ格納部、２６デイリー動画データ格納部、２７編集情報データ生成部、３０ＩＤＴ変換部、３１カメラキャリブレーション、３２ＬＭＴ変換部、３３レンダリング変換部、３４モニタ色空間変換部、３５モニタキャリブレーション部、３６、１３６色処理パラメータ生成部、３７映像データ圧縮部、３８内部メモリ、３９本体制御部、４１ＬＵＴ生成装置、４２各種映像編集機器、５０ＶＦＸシステム、５１Ｇｒａｄｉｎｇシステム、５２Ｅｄｉｔシステム、５３Ｓｏｕｎｄシステム。

Claims

カメラの機種特性の除去、入力共通色空間から出力共通色空間への色変換、およびモニタの機種特性に応じた色変換からなる色処理を行う映像制作システムであって、
撮影前に複数のルック情報を生成するルック情報生成装置と、
撮影時において、前記カメラから出力される生の映像データを本篇記録映像データとして保存する本篇記録映像データ格納部と、
前記複数のルック情報を切り替えて適用し、ユーザの指示に基づいて色調整することで、前記カメラから取得した前記生の映像データの色処理を行い色処理後の映像データを生成する色処理部と、
前記色処理部での前記色処理後の映像データの前記色処理の情報を記載した色処理パラメータを生成する色処理パラメータ生成部と、
前記色処理部より取得した前記色処理後の映像データを圧縮してデイリー動画データを生成する映像データ圧縮部と、
前記映像データ圧縮部により生成された前記デイリー動画データに基づいて、編集情報データを生成する編集情報データ生成部と、
撮影後に、前記本篇記録映像データ格納部に記録された前記本篇記録映像データに基づいて映像制作を行う映像編集機器と、
前記映像編集機器の機種特性を取得し、前記映像編集機器の機種特性と、前記色処理パラメータとに基づいて色変換ルックアップテーブルを生成するルックアップテーブル生成装置と、を備え、
撮影時の前記色処理部での前記色調整は、前記色処理後の映像データおよび前記モニタに表示された前記色処理後の映像にリアルタイムに反映され、
前記映像編集機器は、前記編集情報データおよび前記色変換ルックアップテーブルに基づいて、前記本篇記録映像データに対して撮影時の色処理後の映像の再現を行った上で、映像制作を行うことを特徴とする映像制作システム。
複数台のカメラを備え、
前記色処理部は、前記複数台のカメラのそれぞれから出力される前記生の映像データのそれぞれに対してユーザによって選択された前記複数のルック情報のいずれか１つを適用することを特徴とする請求項１に記載の映像制作システム。
複数台のモニタを備え、
前記色処理部は、ユーザにより選択された前記複数台のモニタの少なくとも１つに前記色処理後の映像データに基づく色処理後の映像を表示することを特徴とする請求項１または２に記載の映像制作システム。
前記ルックアップテーブル生成装置は、インターネット上に設置されたサーバであり、インターネットを通じて前記色処理パラメータを取得し、インターネットを通じて前記映像編集機器の機種特性を取得して、前記映像編集機器が取り込み可能な色変換ルックアップテーブルを生成し、インターネットを通じて前記色変換ルックアップテーブルを前記映像編集機器へ出力することを特徴とする請求項１〜３のいずれか一項に記載の映像制作システム。
前記色処理部は、モニタ色空間変換部を更に備え、
前記モニタ色空間変換部は、前記色処理後の映像データについて最終出力モニタのエミュレーション処理を行うことを特徴とする請求項１〜４のいずれか一項に記載の映像制作システム。
前記色処理部は、モニタキャリブレーション部を更に備え、
前記モニタキャリブレーション部は、前記色処理後の映像データについて前記モニタの誤差補正を行うことを特徴とする請求項１〜５のいずれか一項に記載の映像制作システム。
カメラの機種特性の除去、入力共通色空間から出力共通色空間への色変換、およびモニタの機種特性に応じた色変換からなる色処理を行う映像制作方法であって、
撮影前に複数のルック情報を生成するステップと、
撮影時において、前記カメラから出力される生の映像データを本篇記録映像データとして保存するステップと、
前記複数のルック情報を切り替えて適用し、ユーザの指示に基づいて色調整することで、前記カメラから出力される前記生の映像データの前記色処理を行い、色処理後の映像データを生成するステップと、
前記色処理後の映像データの前記色処理の情報を記載した色処理パラメータを生成すると、
前記色処理後の映像データを圧縮してデイリー動画データを生成するステップと、
前記デイリー動画データに基づいて、編集情報データを生成するステップと、
撮影後に、映像編集機器において、前記本篇記録映像データに基づいて映像制作を行うステップと、
前記映像編集機器の機種特性を取得し、前記映像編集機器の機種特性と、前記色処理パラメータとに基づいて色変換ルックアップテーブルを生成するステップと、を備え、
撮影時の前記色調整は、前記色処理後の映像データおよび前記モニタに表示された前記色処理後の映像にリアルタイムに反映され、
前記映像制作を行うステップでは、前記映像編集機器において、前記編集情報データおよび前記色変換ルックアップテーブルに基づいて、前記本篇記録映像データに対して撮影時の色処理後の映像の再現を行った上で、映像制作を行うことを特徴とする映像制作方法。