JP2014233064A - Video conversion system, photographing system and look-up table generation server - Google Patents

Video conversion system, photographing system and look-up table generation server Download PDF

Info

Publication number
JP2014233064A
JP2014233064A JP2013206347A JP2013206347A JP2014233064A JP 2014233064 A JP2014233064 A JP 2014233064A JP 2013206347 A JP2013206347 A JP 2013206347A JP 2013206347 A JP2013206347 A JP 2013206347A JP 2014233064 A JP2014233064 A JP 2014233064A
Authority
JP
Japan
Prior art keywords
color
video
conversion
camera
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013206347A
Other languages
Japanese (ja)
Other versions
JP6093679B2 (en
JP2014233064A5 (en
Inventor
康晴 岩城
Yasuharu Iwaki
康晴 岩城
内田 充洋
Mitsuhiro Uchida
充洋 内田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2013206347A priority Critical patent/JP6093679B2/en
Publication of JP2014233064A publication Critical patent/JP2014233064A/en
Publication of JP2014233064A5 publication Critical patent/JP2014233064A5/ja
Application granted granted Critical
Publication of JP6093679B2 publication Critical patent/JP6093679B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)
  • Image Processing (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a video conversion system, a photographing system and an LUT(Look-Up Table) generation server which is installable in accordance with the number of cameras and monitors to be installed, which is capable of confirming the influence of color adjustment in a real time even by any monitor at a photographing site, and capable of performing color reproduction/color adjustment in photography even after the end of photography.SOLUTION: A color adjustment parameter input by a controller 81 is output from a sub-data transmission/reception part 17 of a sub-video conversion device A12 via a router 61 and a network 62 to a main video data transmission part 37 of a main video conversion device 32, and a color conversion LUT is regenerated under the consideration of the color adjustment parameter by an LUT generation part 35, and a new color conversion LUT is stored in an LUT memory 16 of an LUT conversion part 15 of a sub-main body control part 14, and camera video data from a camera A are converted into monitor video data on the basis of the new color conversion LUT by the LUT conversion part 15, and output to a monitor A13.

Description

本発明は、映像変換システム、撮影システムおよびルックアップテーブル生成サーバに関するものであり、詳しくは、映像制作過程、即ち、映画やTV番組の制作過程で行われる色設計、色調整作業を効率化するものである。   The present invention relates to a video conversion system, a photographing system, and a lookup table generation server. More specifically, the present invention improves the efficiency of color design and color adjustment work performed in a video production process, that is, a movie or TV program production process. Is.

従来から、映画システムでは、映写機による映画の上映のために、例えば、フィルムプロジェクタに用いられる上映用ポジフィルム(上映用配給フィルム)や、デジタルプロジェクタに用いられる上映用映像データを記録した上映用ハードディスク(可搬式上映用ハードディスク)等の記録媒体が作製されている。   Conventionally, in a movie system, for example, a screening positive film (screening distribution film) used for a film projector or a screening hard disk in which video data for screening used in a digital projector is recorded for the screening of a movie by a projector. Recording media such as (portable display hard disk) have been produced.

このような上映用ポジフィルムや上映用ハードディスクを作製する映画制作ワークフローにおいては、撮影監督の下で、撮影・現像済み映画撮影用ネガフィルムをテレシネ装置等の画像入力装置で読み取ってデジタル処理したデジタル映像データ、映画用デジタル撮像カメラで撮影したデジタル映像データ、コンピュータ等により作成されたコンピュータグラフィックス(CG)等のデジタル映像データを取得し、撮影後の後工程である編集工程(ポストプロダクション:Post Production)で、取得されたデジタル映像データに対してデジタル映像加工・編集・色補正を行い、また、視聴覚を加えて、編集加工後の映像データ、すなわち、映像ソースデータを作成し、これを中間ネガを経由して上映用ポジフィルムに出力し、フィルムプロジェクタで投影し、または出力用データに変換し、上映用ハードディスク等に出力し、もしくは直接配信してデジタルプロジェクタで投影している。   In a movie production workflow for producing such a positive film for screening or a hard disk for screening, a digital film obtained by reading a film film negative film that has been photographed and developed with an image input device such as a telecine device under the supervision of photography. Video data, digital video data shot with a digital camera for movies, digital video data such as computer graphics (CG) created by a computer, etc. are acquired, and an editing process (post-production: Post-production) after the shooting Production), digital video processing / editing / color correction is performed on the acquired digital video data, and audio data is added to create edited video data, that is, video source data. Output to a positive film for screening via a negative film In projected, or converted to the output data, and outputs the screening for a hard disk or the like, or by direct delivery is projecting a digital projector.

撮影後の編集工程である映像制作の後工程(ポストプロダクション)は、撮影監督や、制作者(プロデューサ)や、カラリスト等の多数の人や、様々な会社の協働作業となるのが一般的であり、各人間、各社間のデータのやりとり、各人間、各社間にまたがる工程全体の設計が必要である。
しかしながら、データフォーマットや画像変換ワークフローには標準が無いため、フォーマット変換や色空間の変換等の付帯作業が必要であり、作業の煩雑化、画像品質の低下、作業工数の増大を招いていた。
The post-production process (post-production), which is the editing process after filming, is generally a collaborative work between a number of people, such as filmmakers, producers (producers), colorists, and various companies. It is necessary to design data for each person and each company, and to design the entire process across each person and each company.
However, since there are no standards for data formats and image conversion workflows, additional work such as format conversion and color space conversion is required, which complicates work, lowers image quality, and increases work man-hours.

このため、映像制作の後工程のポストプロダクションにおける色調整の規格化が、映画アカデミー(The Academy of Motion Picture Arts and Sciences:以下、AMPASと略称する)において図られている。図7に、AMPASが提唱するデジタル映画制作ワークフロー規格AMPAS−IIFの色変換アーキテクチャの一例を示す。
図7に示すAMPAS−IIFの色変換アーキテクチャは、基本的に、入力色空間ACES(Academy Color Encoding Specification)100および出力色空間OCES(Output Color Encoding Specification)102の2つの共通色空間と、両者間を対応つける共通変換RRT(Reference Rendering Transform)104および入出力デバイスと共通空間を変換する入力デバイス変換IDT(Input Device Transform)106/出力デバイス変換ODT(Output Device Transform)108とによりデジタル映像データ変換が定義されている。
For this reason, the standardization of color adjustment in post-production of the post-production of video production is attempted in the movie academy (The Academy of Motion Picture Arts and Sciences: hereinafter abbreviated as AMPAS). FIG. 7 shows an example of the color conversion architecture of the AMPAS-IIF digital movie production workflow standard proposed by AMPAS.
The color conversion architecture of the AMPAS-IIF shown in FIG. 7 basically includes two common color spaces of an input color space ACES (Academy Color Encoding Specification) 100 and an output color space OCES (Output Color Encoding Specification) 102, and between them. Digital video data conversion is performed by a common conversion RRT (Reference Rendering Transform) 104 that associates input / output devices and an input device conversion IDT (Input Device Transform) 106 / output device conversion ODT (Output Device Transform) 108 that converts a common space with an input / output device. Is defined.

IDT106は、デジタルカメラ110の撮影映像データ(デジタルカメラの色空間)を入力の共通色空間であるACES100に変換するものであり、ODT108は、出力の共通色空間であるOCES102からデジタルプロジェクタ112の出力映像データ(デジタルプロジェクタの色空間)に変換するものである。
即ち、デジタル映像データ変換系では、デジタルカメラ110の撮影映像データがIDT106によってACES100に変換され、又コンピュータグラフィックス(CG)114の映像データも直接ACES100に変換され、ACES100で色調整等の編集加工が行われた後、RRT104によってOCES102に変換され、OCES102からRDT/ODT108によってデジタルプロジェクタ112の出力映像データに変換される。
The IDT 106 converts captured video data (digital camera color space) of the digital camera 110 into an ACES 100 that is an input common color space. The ODT 108 outputs the output of the digital projector 112 from the OCES 102 that is an output common color space. This is converted into video data (digital projector color space).
That is, in the digital video data conversion system, video data captured by the digital camera 110 is converted to ACES100 by the IDT 106, and video data of computer graphics (CG) 114 is also directly converted to ACES100, and editing processing such as color adjustment by the ACES100. Is converted to OCES 102 by RRT 104, and converted from OCES 102 to output video data of digital projector 112 by RDT / ODT 108.

さらに、標準ネガフィルム濃度APD(AMPAS Printing Density)116とそれをコード化したADX118を定義し、入力色空間ACES100との固定変換(Universal Build)とその逆変換(Universal Unbuild)からなるUB変換/逆変換120を設定し、デジタル画像データ変換系とコンベンショナルな銀塩フィルム系を対応付けている。
この銀塩フィルム系では、フィルムカメラで撮影されたフィルムからフィルムスキャナ122によって読み取られた画像濃度データは、標準ネガフィルム濃度APD116の濃度データに変換され、さらに、ADXコード118に変換された後、UB変換120によってACES100に変換され、ACES100で色調整等の編集加工が行われ、ACES100から、逆変換120によって再びADXコード118に変換され、フィルムレコーダ124によってインターネガ126が作成され、光学プリント128によって映画用ポジフィルムが作成され、フィルムプロジェクタ130に供される。
Further, a standard negative film density APD (AMPAS Printing Density) 116 and an ADX 118 encoding the standard negative film density are defined, and UB conversion / inverse consisting of fixed conversion (Universal Build) and reverse conversion (Universal Unbuild) with the input color space ACES100. Conversion 120 is set, and the digital image data conversion system and the conventional silver salt film system are associated with each other.
In this silver salt film system, image density data read by a film scanner 122 from a film photographed by a film camera is converted into standard negative film density APD 116 density data, and further converted into ADX code 118, It is converted into ACES 100 by UB conversion 120, editing processing such as color adjustment is performed by ACES 100, converted to ADX code 118 by AC 120 again by inverse conversion 120, an inter-negative 126 is created by film recorder 124, and optical print 128. Thus, a positive film for a movie is created and provided to the film projector 130.

ここで、ACES100は、シーン基準の色空間として定義され、シーン自身を測色計で測定したCIEの3刺激値XYZを線形変換した値を持ち、図8に示すように、全てのスペクトル軌跡をカバーするRGB3原色の色度が定められ、16ビット(bit float)でエンコーディングされる。即ち、ACES100で記述できる画像データの色範囲とダイナミックレンジは無制限と言える。また、ACES100の基準白色は、D60とされている。
このように、広大な色空間であるACES100は、フィルムカメラおよびデジタルカメラで撮影された画像とCG画像とを、原画マスターとして保管するための共通色空間でもあり、色調整も、ACES空間で行われる。
一方、OCES102は、1,000,000:1以上のダイナミックレンジを有する理想的なディスプレイデバイスを想定した出力色空間であり、RRT変換104を介してACES色空間100と1対1で対応付けられている。OCES102は、AMPASIIFの内部色空間として位置付けられ、一般ユーザがOCES画像データを直接ハンドリングすることは想定されていない。
Here, ACES100 is defined as a scene-based color space, and has a value obtained by linearly converting the CIE tristimulus values XYZ obtained by measuring the scene itself with a colorimeter. As shown in FIG. The chromaticity of RGB three primary colors to be covered is determined and encoded with 16 bits (bit float). That is, it can be said that the color range and dynamic range of image data that can be described by ACES 100 are unlimited. The reference white color of ACES100 is D60.
In this way, the ACES 100, which is a vast color space, is also a common color space for storing images and CG images taken with film cameras and digital cameras as an original image master, and color adjustment is also performed in the ACES space. Is called.
On the other hand, the OCES 102 is an output color space assuming an ideal display device having a dynamic range of 1,000,000: 1 or more, and is one-to-one associated with the ACES color space 100 via the RRT conversion 104. ing. The OCES 102 is positioned as an internal color space of AMPASIIF, and it is not assumed that a general user directly handles OCES image data.

このように、AMPAS-IIFは、映像制作のポストプロダクションに標準を与えるものであり、様々な映像ソースを色調整の標準作業色空間(シーン基準の色空間:ACES)に変換する仕組み、ACESから映画上映やTV放映向きの観賞用映像を理想的な出力デバイスの色空間(OCES)への変換する仕組み、OCESから実在する表示デバイスへ色変換する仕組みを提供するので、撮影後の編集工程における煩雑な画像変換、色調整作業を効率化することができる。
このように、ポストプロダクションでは、この標準ワークフローに従うことで、標準データフォーマット、かつ標準色空間で作業を行うことができ、画像交換における付帯作業が解消され、色調整作業の効率化、画像品質の向上、および工数削減の効果を上げることができる。
In this way, AMPAS-IIF provides a standard for post-production of video production, from ACES, a mechanism for converting various video sources into a standard working color space for color adjustment (scene-based color space: ACES). In order to provide a mechanism for converting movies for viewing in movies and on TV to the ideal output device color space (OCES), and a mechanism for color conversion from OCES to existing display devices, Complicated image conversion and color adjustment operations can be made efficient.
In this way, in post-production, following this standard workflow, work can be done in the standard data format and standard color space, eliminating incidental work in image exchange, improving the efficiency of color adjustment work, and improving image quality. The effect of improvement and man-hour reduction can be improved.

しかしながら、映像撮影には、様々なメーカ、機種のデジタルカメラが使用され、撮影された映像の確認用モニタも、様々なメーカ、機種のものが使用され、確認用モニタに表示させる信号の色空間も様々である。そのため、撮影現場での映像確認において色を厳密に評価することができず、映像の色調整は、映像制作の後工程であるポストプロダクションで行われている。このポストプロダクションでの映像の色調整は、AMPAS−IIFの色変換アーキテクチャを用いることにより、色調整作業の効率化、画像品質の向上、および工数削減を図ることはできるが、映像制作において、撮影した色を決める決定権を持っているのは撮影現場の撮影監督であるので、現在、撮影後、現場で撮影を指揮した撮影監督がポストプロダクションの現場に赴いて、シーン毎の撮影意図に応じた色再現調整を、ポストプロダクションにいる色調整の専門家であるカラリストと一緒に同席して撮影映像を見ながら、様々なシーンやカットやフレームに必要な色調整を行う作業を行っている。
この色調整作業は、通常、試行錯誤の後、完了する工程であるため、全部の映像を見なくてはならないし、色調整をするカットやフレームを何回も繰り返して見ることになるので、非常に長い時間が掛かる作業になっているという問題があり、また、人件費の高い撮影監督やカラリストによる作業のため、映画制作のコストを引き上げる結果となっているという問題を招いていた。
However, digital cameras of various manufacturers and models are used for video shooting, and the monitor for confirming the captured video is also of various manufacturers and models, and the color space of the signal displayed on the confirmation monitor There are also various. Therefore, the color cannot be strictly evaluated in the video confirmation at the shooting site, and the color adjustment of the video is performed in post-production, which is a post-process of video production. In post-production video color adjustment, the use of the AMPAS-IIF color conversion architecture can improve color adjustment efficiency, improve image quality, and reduce man-hours. Since the filmmaker who has the right to decide the color is the shooting director at the shooting site, the shooting director who directed the shooting at the site now visits the post-production site and responds to the shooting intention for each scene. We are working on color adjustments necessary for various scenes, cuts and frames while attending with colorists who are color adjustment specialists in post-production and watching the shot images. .
This color adjustment work is usually a process that is completed after trial and error, so you have to see all the images, and you will see the cuts and frames for color adjustment repeatedly. There was a problem that it was a work that took a very long time, and because of the work by a cinematographer and colorist with high labor costs, it resulted in a problem of raising the cost of film production.

特許文献1は、映像制作、即ち映画やTV番組の制作において、撮影監督による撮影現場での色調整を可能にし、複数台のカメラを使用して撮影される映像データを、複数台のモニタで映像確認を行いながら色の調整を行う際に、複数台のカメラで撮影されたそれぞれの映像データに対して撮影シーンに対して忠実な色変換を行うことができ、また、複数台のカメラ間の色のマッチングを高精度に実現することができ、それによって映像制作工程を更に効率化することができるとともに、コストダウンを図ることができ、映像の品質を向上させることができる映像変換装置、これを用いる映画システムの撮影システム等を提供することで、上記の問題点を解消している。   In Patent Document 1, in video production, that is, in the production of a movie or a TV program, it is possible to perform color adjustment at a shooting site by a director of photography, and video data shot using a plurality of cameras is displayed on a plurality of monitors. When performing color adjustment while checking the video, color conversion faithful to the shooting scene can be performed for each video data shot with multiple cameras, and between multiple cameras Video conversion device that can achieve high-accuracy color matching, thereby further improving the efficiency of the video production process, reducing costs, and improving video quality, By providing a filming system of a movie system using this, the above problems are solved.

特開2012−231459号公報JP 2012-231459 A

ただ、特許文献1に記載の映像変換装置は、非常に高価であり、1つの撮影現場にあるカメラおよびモニタの設置台数に合わせて複数台の映像変換装置を準備するのは現実的でない。そのため、撮影現場で色調整を行うためには、映像変換装置に接続されたモニタであることを確認したうえで、あるいは、モニタに映像変換装置を接続して、色調整を行う必要があった。
また、特許文献1に記載の映像変換装置を含め、映画等の撮影の際に用いられる撮影機器は、レンタルされているのが一般的であり、撮影現場での色調整が間に合わず、撮影終了後、編集工程に進む前段階として撮影された映像の色調整を行いたい場合がある。
However, the video conversion device described in Patent Document 1 is very expensive, and it is not realistic to prepare a plurality of video conversion devices in accordance with the number of cameras and monitors installed at one shooting site. Therefore, in order to perform color adjustment at the shooting site, it was necessary to make color adjustment after confirming that the monitor was connected to the video conversion device or by connecting the video conversion device to the monitor. .
In addition, photographing devices used for photographing movies and the like including the video conversion device described in Patent Document 1 are generally rented, and color adjustment at the photographing site is not in time, and photographing is finished. Later, there are cases where it is desired to adjust the color of the captured video as the previous stage of proceeding to the editing process.

本発明の目的は、上記従来技術の問題点を解消し、カメラおよびモニタの設置台数に合わせて設置可能で、撮影現場のいずれのモニタによっても色調整の影響をリアルタイムに確認することができ、また、撮影終了後の編集工程においても撮影現場でなされた最終出力デバイスの映像の色再現・色調整が可能な、映像変換システム、撮影システムおよびルックアップテーブル生成サーバを提供することにある。   The object of the present invention is to solve the above-mentioned problems of the prior art, and can be installed according to the number of cameras and monitors installed, and the effect of color adjustment can be confirmed in real time on any monitor at the shooting site. It is another object of the present invention to provide a video conversion system, a shooting system, and a lookup table generation server capable of color reproduction and color adjustment of a video of a final output device performed at the shooting site even in an editing process after shooting.

上記課題を解決するために、本発明は、カメラで撮影されたカメラ映像データから映写用画像を作成する映画システムで、カメラによる撮影が行われる撮影システムに用いられる、映像変換システムであって、映像変換システムは、主映像変換装置と、主映像変換装置と相互に接続される少なくとも1つの副映像変換装置と、主映像変換装置および副映像変換装置の少なくとも一方に接続されるコントローラとからなり、コントローラには、映像の最終出力となる最終出力デバイスの色を事前に異なる表示デバイスで確認させるための確認用表示デバイスの色空間に応じて設定される色再現情報が入力され、副映像変換装置は、カメラ映像データおよびカメラの機種情報および撮影設定情報をそれぞれ取得し、コントローラにおいて入力された確認用表示デバイスの色再現情報を取得する情報取得部と、情報取得部が取得したカメラ映像データ、カメラの機種情報および撮影設定情報、ならびに確認用表示デバイスの色再現情報を主映像変換装置へ出力して、主映像変換装置からこれらに対応した色変換ルックアップテーブルを取得する副データ送受信部と、副データ送受信部が取得した色変換ルックアップテーブルに基づいてカメラ映像データを確認用表示デバイスの色空間に変換して確認用表示デバイスの色空間の映像データを求めるルックアップテーブル変換部とを備え、主映像変換装置は、副映像変換装置からカメラ映像データ、カメラの機種情報および撮影設定情報、ならびに確認用デバイスの色再現情報を取得し、これらに対応した色変換ルックアップテーブルを副映像変換装置へ出力する主データ送受信部と、主データ送受信部が取得したカメラ映像データ、カメラの機種情報および撮影設定情報、ならびに確認用デバイスの色再現情報からこれらに対応した色変換ルックアップテーブルを生成し、主データ送受信部へ出力する色変換ルックアップテーブル生成部とを備え、副映像変換装置のルックアップテーブル変換部は、主映像変換装置の色変換ルックアップテーブル生成部において生成された色変換ルックアップテーブルを用いてカメラ映像データを確認用表示デバイスの色空間の映像データに変換することを特徴とする映像変換システムを提供する。   In order to solve the above-mentioned problems, the present invention is a movie system that creates a projection image from camera video data shot by a camera, and is a video conversion system used for a shooting system in which shooting by a camera is performed, The video conversion system includes a main video conversion device, at least one sub video conversion device connected to the main video conversion device, and a controller connected to at least one of the main video conversion device and the sub video conversion device. The controller receives color reproduction information that is set according to the color space of the display device for confirmation so that the color of the final output device, which is the final output of the video, can be confirmed in advance by a different display device. The device acquires camera video data, camera model information, and shooting setting information, respectively, and inputs them in the controller. An information acquisition unit that acquires color reproduction information of a display device for confirmation, camera video data acquired by the information acquisition unit, camera model information and shooting setting information, and color reproduction information of a display device for confirmation to a main video conversion device A sub-data transmission / reception unit that outputs and acquires a color conversion lookup table corresponding to these from the main video conversion device, and a display device for checking camera video data based on the color conversion lookup table acquired by the sub-data transmission / reception unit And a look-up table conversion unit that obtains video data in the color space of the display device for confirmation by converting to the color space of the main video converter, the main video converter from the sub-video converter to the camera video data, camera model information, and shooting settings Information and the color reproduction information of the device for confirmation are obtained, and the corresponding color conversion lookup table is displayed Main data transmission / reception unit to be output to the conversion device, camera video data acquired by the main data transmission / reception unit, camera model information and shooting setting information, and color reproduction lookup table corresponding to these from the color reproduction information of the confirmation device A color conversion lookup table generation unit that generates and outputs to the main data transmission / reception unit, and the lookup table conversion unit of the sub-video conversion device generates the color generated by the color conversion lookup table generation unit of the main video conversion device Provided is a video conversion system which converts camera video data into video data in a color space of a display device for confirmation using a conversion lookup table.

また、コントローラにおいて、確認用表示デバイスの色空間の映像データの色調整を行うための色調整パラメータが入力され、主映像変換装置の主データ送受信部は、コントローラにおいて入力された色調整パラメータを取得し、主映像変換装置の色変換ルックアップテーブル生成部は、色調整パラメータに基づいて色変換ルックアップテーブルを再度生成し、副映像変換装置の副データ送受信部は、再度生成された色変換ルックアップテーブルを再度取得し、副映像変換装置のルックアップテーブル変換部は、主映像変換装置の色変換ルックアップテーブル生成部において色調整パラメータに基づいて再度生成された色変換ルックアップテーブルに基づいてカメラ映像データを確認用表示デバイスの色空間の映像データに変換することで色調整を行うことが好ましい。   In addition, the controller receives color adjustment parameters for color adjustment of video data in the color space of the display device for confirmation, and the main data transmission / reception unit of the main video conversion device acquires the color adjustment parameters input in the controller The color conversion lookup table generation unit of the main video conversion device generates the color conversion lookup table again based on the color adjustment parameter, and the sub data transmission / reception unit of the sub video conversion device generates the color conversion lookup table generated again. The look-up table conversion unit of the sub-video conversion device acquires the up-table again, and the color conversion look-up table generation unit of the main video conversion device regenerates the up-table based on the color conversion look-up table generated again based on the color adjustment parameters. Color by converting camera image data to image data in the color space of the display device for confirmation It is preferable to perform an integer.

また、主映像変換装置のルックアップテーブル生成部は、カメラ映像データを出力の標準の色空間の映像データに変換し、主映像変換装置の主データ送受信部は、出力の標準の色空間の映像データを副映像変換装置に出力し、副映像変換装置のルックアップテーブル変換部は、主映像変換装置の色変換ルックアップテーブル生成部において生成された色変換ルックアップテーブルを用いて、主映像変換装置の色変換ルックアップテーブル生成部において変換された出力の標準の色空間の映像データを、映画システムの最終出力デバイスで再現される色を確認用デバイスで表示するための確認用表示デバイスの色空間の映像データに変換することが好ましい。   The lookup table generator of the main video converter converts the camera video data into video data in the output standard color space, and the main data transmitter / receiver in the main video converter converts the video in the standard color space of the output. The data is output to the sub-video conversion device, and the lookup table conversion unit of the sub-video conversion device uses the color conversion lookup table generated by the color conversion lookup table generation unit of the main video conversion device to convert the main video The color of the display device for confirmation for displaying on the confirmation device the color reproduced in the final output device of the movie system of the video data in the standard color space of the output converted in the color conversion lookup table generation unit of the apparatus It is preferable to convert the video data into a space.

また、コントローラには、確認用表示デバイスの色空間の映像データおよび出力の標準の色空間の映像データの色調整を行うための色調整パラメータが入力され、主映像変換装置の主データ送受信部は、コントローラにおいて入力された色調整パラメータを取得し、主映像変換装置の色変換ルックアップテーブル生成部は、カメラ映像データを色調整パラメータに基づいて出力の標準の色空間の映像データに再度変換し、副映像変換装置の副データ送受信部は、色変換ルックアップテーブル生成部において色調整パラメータに基づいて再度変換された出力の標準の色空間の映像データを再度取得し、副映像変換装置のルックアップテーブル変換部は、主映像変換装置の色変換ルックアップテーブル生成部において生成された色変換ルックアップテーブルを用いて、主映像変換装置の色変換ルックアップテーブル生成部において色調整パラメータに基づいて再度変換された出力の標準の色空間の映像データを、映画システムの最終出力デバイスで再現される色を確認用デバイスで表示するための確認用表示デバイスの色空間の映像データに変換することで、色調整を行うことが好ましい。   Also, the controller receives color adjustment parameters for color adjustment of the video data in the color space of the display device for confirmation and the video data in the standard color space of the output, and the main data transmission / reception unit of the main video conversion device The color adjustment parameter input in the controller is acquired, and the color conversion lookup table generation unit of the main video conversion device converts the camera video data again to video data in the output standard color space based on the color adjustment parameter. The sub-data transmission / reception unit of the sub-video conversion device obtains again the video data of the standard color space of the output converted again based on the color adjustment parameter in the color conversion lookup table generation unit, and The up-table conversion unit is a color conversion lookup table generated by the color conversion lookup table generation unit of the main video conversion device. Color that is reproduced by the final output device of the movie system from the standard color space of the output that has been converted again based on the color adjustment parameters in the color conversion lookup table generation unit of the main video conversion device using the table Is preferably converted into video data in the color space of the display device for confirmation for displaying on the confirmation device.

また、カメラ映像データは、カメラで撮影された際に映像記憶装置に記憶され、カメラの機種情報および撮影設定情報は、カメラ映像データのメタデータから取得されることが好ましい。   The camera video data is preferably stored in a video storage device when taken by the camera, and the camera model information and shooting setting information are preferably acquired from the metadata of the camera video data.

また、確認用表示デバイスの色再現情報は、確認用表示デバイスをキャリブレーションすることで算出されることが好ましい。   The color reproduction information of the confirmation display device is preferably calculated by calibrating the confirmation display device.

また、最終出力デバイスは、複数台のカメラで撮影された複数種類のカメラ映像データから映写用画像を作成する映画システムで映写用画像を上映するための映写機であり、映像変換システムは、複数台のカメラに、または複数台のカメラのそれぞれに対応して接続され、また、複数台の確認用表示デバイスに、または複数台の確認用表示デバイスのそれぞれに対応して接続されるものであり、確認用表示デバイスは、映画システムの撮影側で、最終出力デバイスの色を確認させるためのものであることが好ましい。   The final output device is a projector for showing a projection image in a movie system that creates a projection image from a plurality of types of camera video data captured by a plurality of cameras. Connected to each camera or corresponding to each of a plurality of cameras, and connected to a plurality of confirmation display devices or corresponding to each of a plurality of confirmation display devices, The confirmation display device is preferably for confirming the color of the final output device on the photographing side of the movie system.

また、カメラは、被写体を撮影してカメラ映像データを取得するデジタルビデオカメラまたはデジタルカメラであることが好ましい。   The camera is preferably a digital video camera or a digital camera that captures a subject and acquires camera video data.

出力の標準の色空間は、出力デバイスに依存しない色空間であることが好ましい。   The standard color space for output is preferably a color space that does not depend on the output device.

また、出力の標準の色空間は、10000:1以上のダイナミックレンジを有する理想的な出力デバイスを想定した出力色空間、標準出力デバイスを想定した出力色空間、または映画システムの映写機で上映される映写用フィルムのプレビューを想定した出力色空間であることが好ましい。   The standard color space of the output is shown in an output color space assuming an ideal output device having a dynamic range of 10,000: 1 or more, an output color space assuming a standard output device, or a movie system projector. An output color space that assumes a preview of a projection film is preferable.

また、本発明は、複数台のカメラと、複数台のカメラに対応してそれぞれ配置された上述の映像変換システムと、映像変換システムの少なくとも1つの副映像変換装置および主映像変換装置に対応してそれぞれ配置された確認用表示デバイスと、映像変換システムの主映像変換装置に接続され、複数台のカメラで撮影されたカメラ映像データ、または、主映像変換装置のルックアップテーブル生成部においてカメラ映像データから変換された出力の標準の色空間の映像データを格納する映像記憶装置、または携帯記憶装置とを備えることを特徴とする映画システムの撮影システムを提供する。   The present invention also corresponds to a plurality of cameras, the above-described video conversion system arranged corresponding to each of the plurality of cameras, and at least one sub-video conversion device and main video conversion device of the video conversion system. Connected to the display device for confirmation and the main video conversion device of the video conversion system, and the camera video data captured by a plurality of cameras, or the camera video in the lookup table generation unit of the main video conversion device Provided is a movie system shooting system comprising: a video storage device for storing video data in an output standard color space converted from data; or a portable storage device.

また、映像変換サーバを更に備え、映像変換サーバは、少なくとも1つの映像編集機器を備える編集システムに接続され、カメラ映像データの撮影シーン毎のカメラの機種情報および撮影設定情報と、カメラ映像データに対応した色調整パラメータとを記憶し、編集システムからの要求に応じて、カメラの機種情報および撮影設定情報と色調整パラメータとに基づいて編集システムが使用する色変換ルックアップテーブルを生成し、編集システムへ出力することが好ましい。   The video conversion server further includes a video conversion server, and the video conversion server is connected to an editing system including at least one video editing device, and includes camera model information and shooting setting information for each shooting scene of camera video data, and camera video data. Stores the corresponding color adjustment parameters, and generates and edits a color conversion lookup table used by the editing system based on the camera model information, shooting setting information, and color adjustment parameters in response to a request from the editing system. It is preferable to output to the system.

また、本発明は、カメラの機種特性の除去、色調整を含む最終出力デバイスに対応した入力共通色空間から出力共通色空間への色変換、および確認用表示デバイスの機種特性に応じた色変換からなる映像データの色処理を行い、確認用表示デバイスによって撮影現場での色処理後の映像を確認可能な映像変換装置と、カメラによって撮影された生の映像データから上映用の最終映像データを制作する編集システムの映像編集機器とに接続されるルックアップテーブル生成サーバであって、色処理された映像データの色処理の情報を記載した色処理パラメータと、映像編集機器の出力色空間の情報とを受信するデータ受信部と、データ受信部により受信された色処理パラメータと、映像編集機器の出力色空間の情報とに基づいて色変換ルックアップテーブルを生成する色変換ルックアップテーブル生成部と、色変換ルックアップテーブルを映像編集機器に送信するデータ送信部とを備え、色変換ルックアップテーブル生成部は、生の映像データに適用することで、映像編集機器において色処理後の映像を再現する色変換ルックアップテーブルを生成することを特徴とするルックアップテーブル生成サーバを提供する。   The present invention also eliminates camera model characteristics, color conversion from the input common color space corresponding to the final output device including color adjustment to the output common color space, and color conversion according to the model characteristics of the display device for confirmation. The video conversion device that can perform color processing of video data and check the color-processed video at the shooting site using the confirmation display device, and the final video data for screening from the raw video data shot by the camera A lookup table generation server connected to a video editing device of an editing system to be produced, which includes color processing parameters describing color processing information of color-processed video data, and information of an output color space of the video editing device A color conversion look-up device based on the data receiving unit receiving the color processing parameters, the color processing parameters received by the data receiving unit, and the output color space information of the video editing device. A color conversion lookup table generation unit that generates a color table and a data transmission unit that transmits the color conversion lookup table to a video editing device, and the color conversion lookup table generation unit is applied to raw video data. Thus, a lookup table generation server is provided that generates a color conversion lookup table that reproduces a color-processed video in a video editing device.

また、色処理パラメータは、撮影するシーン毎に変更されたものであり、シーン番号またはシーンに対応したカメラのタイムコードと対応付けられたものであることが好ましい。   Further, the color processing parameter is changed for each scene to be photographed, and is preferably associated with a scene number or a time code of a camera corresponding to the scene.

また、データ受信部は、色処理パラメータとともに、色処理パラメータに対応するシーンの静止画像データを取得し、データ送信部は、色処理パラメータに基づく色変換ルックアップテーブルを送信する際、静止画像データを合わせて送信することが好ましい。   The data receiving unit obtains still image data of the scene corresponding to the color processing parameter together with the color processing parameter, and the data transmitting unit transmits the still image data when transmitting the color conversion lookup table based on the color processing parameter. Are preferably transmitted together.

また、静止画像データは、色変換前の静止画像データと色変換ルックアップテーブルに基づく色変換後の静止画像データとを含むことが好ましい。   Still image data preferably includes still image data before color conversion and still image data after color conversion based on a color conversion lookup table.

また、データ受信部は、外部のクライアントからアクセスされた際、クライアントに対してパスワードの入力を要求し、入力されたパスワードが、予め設定されたパスワードと一致しない場合には、クライアントからのアクセスを遮断することが好ましい。   In addition, when the data receiving unit is accessed from an external client, the data receiving unit requests the client to input a password, and if the input password does not match a preset password, the data receiving unit requests access from the client. It is preferable to block.

また、データ受信部は、色処理パラメータに対応して、撮影または色調整の際にユーザが入力したコメントを受信し、データ送信部は、色処理パラメータに基づく色変換ルックアップテーブルを送信する際、色処理パラメータに対応するコメントを送信することが好ましい。   The data receiving unit receives a comment input by the user at the time of shooting or color adjustment corresponding to the color processing parameter, and the data transmitting unit transmits a color conversion lookup table based on the color processing parameter. It is preferable to send a comment corresponding to the color processing parameter.

本発明によれば、高額な映像変換装置をカメラおよびモニタの設置台数にあわせて用意しなくとも、撮影現場に設置されたいずれのモニタによっても色調整の影響をリアルタイムに確認することができる。
また、撮影後の編集工程において、時間帯や場所を問わず、撮影現場における監督等のユーザの意向を反映した色変換ルックアップテーブルを取得でき、映像編集機器において、生の映像データに対して色変換ルックアップテーブルを適用することで撮影現場でなされた最終出力デバイスの映像の色再現・色調整を行うことができる。
According to the present invention, the effect of color adjustment can be confirmed in real time by any monitor installed at the shooting site without preparing an expensive video conversion device according to the number of cameras and monitors installed.
In addition, in the editing process after shooting, a color conversion lookup table reflecting the intentions of the user such as the director at the shooting site can be acquired regardless of the time zone or the place, and the video editing device can acquire the raw video data. By applying the color conversion lookup table, it is possible to perform color reproduction and color adjustment of the video of the final output device made at the shooting site.

本発明の好適態様に係る撮影システムを含む映画の撮影・編集システムの構成の一例を模式的に示すブロック図である。It is a block diagram which shows typically an example of a structure of the imaging | photography / editing system of the movie containing the imaging | photography system which concerns on the suitable aspect of this invention. 本発明の実施の形態1に係る映像変換システムの構成を示すブロック図である。It is a block diagram which shows the structure of the video conversion system which concerns on Embodiment 1 of this invention. 本発明の実施の形態2に係る映像変換システムの構成を示すブロック図である。It is a block diagram which shows the structure of the video conversion system which concerns on Embodiment 2 of this invention. 本発明の実施の形態3に係る映像変換システムの構成を示すブロック図である。It is a block diagram which shows the structure of the video conversion system which concerns on Embodiment 3 of this invention. 本発明の実施の形態4に係る映像変換システムの構成を示すブロック図である。It is a block diagram which shows the structure of the video conversion system which concerns on Embodiment 4 of this invention. 本発明の実施の形態5に係るルックアップテーブル生成サーバの構成を示すブロック図である。It is a block diagram which shows the structure of the lookup table production | generation server which concerns on Embodiment 5 of this invention. 映画システムのポストプロダクションで行われるデジタル映画制作ワークフロー規格の色変換アーキテクチャの一例を示すブロック図である。It is a block diagram which shows an example of the color conversion architecture of the digital movie production workflow specification performed by the post production of a movie system. 図7に示す色変換アーキテクチャの入力色空間を含む種々の色空間の色度図である。FIG. 8 is a chromaticity diagram of various color spaces including an input color space of the color conversion architecture shown in FIG. 7.

本発明に係る映像変換システム、撮影システムおよびルックアップテーブル生成サーバを、添付の図面に示す好適態様の好適実施形態に基づいて以下に詳細に説明する。   A video conversion system, a photographing system, and a lookup table generation server according to the present invention will be described below in detail based on preferred embodiments of preferred embodiments shown in the accompanying drawings.

図1は、映画の撮影・編集システムの構成の一例を模式的に示すブロック図である。
図1の映画の撮影・編集システムは、本発明の実施の形態1〜4に係る映像変換システム1A、1B、これらを用いる本発明の好適態様に係る撮影システム(プロダクション、撮影現場)2、および編集システム(ポストプロダクション、編集工程)3において利用される本発明の実施の形態5に係るルックアップテーブル生成サーバ(以下、LUT生成サーバ)4を備える。
FIG. 1 is a block diagram schematically showing an example of the configuration of a movie shooting / editing system.
The movie shooting / editing system of FIG. 1 includes video conversion systems 1A and 1B according to Embodiments 1 to 4 of the present invention, a shooting system (production, shooting site) 2 according to a preferred embodiment of the present invention using these, and A lookup table generation server (hereinafter referred to as LUT generation server) 4 according to Embodiment 5 of the present invention used in an editing system (post-production, editing step) 3 is provided.

図1に示すように、本発明の好適態様に係る撮影システム2は、撮影のためのカメラA11と、カメラA11に接続された副映像変換装置A12と、副映像変換装置A12に接続されたモニタ(確認用表示デバイス)A13と、同じく、撮影のためのカメラB21と、カメラB21に接続された副映像変換装置B22と、副映像変換装置B22に接続されたモニタB23と、同様に、撮影のためのカメラC31と、カメラC31に接続された主映像変換装置32と、主映像変換装置32に接続されたモニタC33とを備え、主映像変換装置32には、副映像変換装置C42と副映像変換装置D52とが接続され、副映像変換装置C42にはモニタD43が、副映像変換装置D52にはモニタE53がそれぞれ接続される。さらに、カメラA11〜C31には、撮影映像記憶装置70が接続され、主映像変換装置32には、編集加工映像記憶装置71と携帯記憶装置72とが接続される。
また、副映像変換装置A12、副映像変換装置B22、および主映像変換装置32とこれらに接続されたルータ61およびネットワーク62とからなる映像変換システム1Aおよび主映像変換装置32とそれにそれぞれ接続された副映像変換装置E42および副映像変換装置D52とからなる映像変換システム1Bには、コントローラ81が接続される。
また、撮影システム2と編集システム3とは、主映像変換装置32、撮影映像記憶装置70、編集情報データ生成装置72、またはLUT生成サーバ4を介した携帯記憶装置72を通じて接続される。
As shown in FIG. 1, a photographing system 2 according to a preferred embodiment of the present invention includes a camera A11 for photographing, a sub-video conversion device A12 connected to the camera A11, and a monitor connected to the sub-video conversion device A12. (Display device for confirmation) A13, camera B21 for shooting, sub-video conversion device B22 connected to camera B21, monitor B23 connected to sub-video conversion device B22, A main video converter 32 connected to the camera C31, and a monitor C33 connected to the main video converter 32. The main video converter 32 includes a sub video converter C42 and a sub video. A conversion device D52 is connected, a monitor D43 is connected to the sub-video conversion device C42, and a monitor E53 is connected to the sub-video conversion device D52. Furthermore, a camera video storage device 70 is connected to the cameras A11 to C31, and an editing / processing video storage device 71 and a portable storage device 72 are connected to the main video conversion device 32.
Also, the video conversion system 1A and the main video conversion device 32, each of which includes the sub-video conversion device A12, the sub-video conversion device B22, the main video conversion device 32, and the router 61 and the network 62 connected thereto, are respectively connected thereto. A controller 81 is connected to the video conversion system 1B including the sub video conversion device E42 and the sub video conversion device D52.
The imaging system 2 and the editing system 3 are connected through the main video conversion device 32, the captured video storage device 70, the editing information data generation device 72, or the portable storage device 72 via the LUT generation server 4.

主映像変換装置32は、ルータ61およびネットワーク62を介して副映像変換装置A12、B22と相互に接続され、また、副映像変換装置C42、D52と直接接続され、また、コントローラ81が接続され、本発明の実施の形態1〜4に係る映像変換システム1A、1Bを構成する。   The main video conversion device 32 is connected to the sub video conversion devices A12 and B22 via the router 61 and the network 62, directly connected to the sub video conversion devices C42 and D52, and connected to the controller 81. The video conversion systems 1A and 1B according to the first to fourth embodiments of the present invention are configured.

カメラA11、B21、C31は、被写体を撮影してカメラ映像データ(生の映像データ)を取得するためのものである。
このようなカメラとしては、カメラ映像データが取得できればどのようなカメラでもよいが、デジタル映像データが取得できるデジタルビデオカメラまたはデジタルカメラであるのが好ましい。なお、図示例の撮影システム2では3台のカメラを備えるが、4台以上のカメラを備えていてもよい。
本発明で用いられるカメラは、異なるメーカや異なる機種であってもよく、異なるメーカや異なる機種であると本発明はより高い効果を発揮する。
カメラA11〜C31には、撮影映像記憶装置70が接続され、カメラA11〜C31で撮影されたカメラ映像データが記憶される。
Cameras A11, B21, and C31 are for capturing a subject and acquiring camera video data (raw video data).
Such a camera may be any camera as long as camera video data can be acquired, but is preferably a digital video camera or a digital camera that can acquire digital video data. In addition, although the imaging system 2 in the illustrated example includes three cameras, it may include four or more cameras.
The camera used in the present invention may be a different manufacturer or a different model, and the present invention exhibits a higher effect if it is a different manufacturer or a different model.
The captured video storage device 70 is connected to the cameras A11 to C31, and camera video data captured by the cameras A11 to C31 is stored.

副映像変換装置A12、B22は、主映像変換装置32とともに本発明の実施の形態1に係る映像変換システム1Aの一部を構成し、副映像変換装置A12、B22はカメラA11、B21に対して1対1(1:1)対応でそれぞれ接続され、また、副映像変換装置A12、B22に対して、モニタA13、B23が1対1(1:1)対応でそれぞれ接続される。
副映像変換装置A12、B22は、カメラA11、B21からのそれぞれのカメラ映像データをモニタA13、B23の表示色空間に合わせてそれぞれ変換し、映像の最終出力となる最終出力デバイス、例えば、デジタルプロジェクタやフィルムプロジェクタで用いる上映ポジフィルムの色空間へ変換した際に得られる、上映システムのデジタルプロジェクタやフィルムプロジェクタ等の映写機で再現される色、上映される映像の色を事前に映写機とは異なる表示デバイスであるモニタA13、B23でそれぞれ確認させるようにするためのものである。
The sub-video conversion devices A12 and B22 form part of the video conversion system 1A according to Embodiment 1 of the present invention together with the main video conversion device 32, and the sub-video conversion devices A12 and B22 are connected to the cameras A11 and B21. One-to-one (1: 1) correspondence is connected, and monitors A13 and B23 are connected to one-to-one (1: 1) correspondence to sub-picture conversion devices A12 and B22, respectively.
The sub-video conversion devices A12 and B22 respectively convert the camera video data from the cameras A11 and B21 in accordance with the display color spaces of the monitors A13 and B23, and a final output device that becomes a final output of the video, for example, a digital projector Display colors that are reproduced by projectors such as digital projectors and film projectors of the screening system, and colors of screened images that are obtained when converted to the color space of the screening positive film used in film projectors. This is intended to be confirmed by the monitors A13 and B23 which are devices.

主映像変換装置32は、副映像変換装置A12、B22とともに本発明の実施の形態1に係る映像変換システム1Aの一部を構成し、また、副映像変換装置C42、D52とともに本発明の実施の形態1に係る映像変換システム1Bの一部を構成する。
主映像変換装置32は、副映像変換装置A12、B22と同様に、カメラC31に接続され、また、主映像変換装置32には、副映像変換装置A12、B22と同様にモニタC33が接続される。
主映像変換装置32は、副映像変換装置A12、B22と同様に、カメラC31からのカメラ映像データをモニタC33に合わせて変換し、映像の最終出力となる最終出力デバイス、例えば、デジタルプロジェクタやフィルムプロジェクタで用いる上映ポジフィルムの色空間へ変換した際に得られる、上映システムのデジタルプロジェクタやフィルムプロジェクタ等の映写機で再現される色、上映される映像の色を事前に映写機とは異なる表示デバイスであるモニタC33で確認させるようにするためのものである。
The main video conversion device 32 constitutes a part of the video conversion system 1A according to Embodiment 1 of the present invention together with the sub video conversion devices A12 and B22, and the sub video conversion devices C42 and D52 together with the implementation of the present invention. A part of the video conversion system 1B according to the first embodiment is configured.
The main video conversion device 32 is connected to the camera C31 similarly to the sub video conversion devices A12 and B22, and the monitor C33 is connected to the main video conversion device 32 similarly to the sub video conversion devices A12 and B22. .
The main video conversion device 32 converts the camera video data from the camera C31 according to the monitor C33 in the same manner as the sub video conversion devices A12 and B22, and outputs a final output device such as a digital projector or film. Use a display device that is different from the projector in advance to display the colors reproduced by projectors such as digital projectors and film projectors of the screening system, and the colors of the screened images obtained when converted to the color space of the screening positive film used in the projector. This is intended to be confirmed on a certain monitor C33.

また、主映像変換装置32は、ルータ61およびネットワーク62を通じて副映像変換装置A12、B22と相互に接続し、本発明の実施の形態1に係る映像変換システム1Aを構成する。主映像変換装置32は、ルータ61およびネットワーク62を介して接続された副映像変換装置A12、B22から、カメラA11、B21のそれぞれの機種情報および撮影設定情報を取得するとともに、カメラA11、B21で撮影されたそれぞれのカメラ映像データを取得し、また、モニタキャリブレーションによって得られたモニタA13、B23のそれぞれの表示色空間に対応した色再現情報に基づいて、モニタA13、B23のそれぞれにおいて、最終出力デバイスで表示される映像の色を確認できるように、副映像変換装置A12、B22のそれぞれに対応した色変換ルックアップテーブル(色変換LUT)を作成し、ルータ61およびネットワーク62を通じて副映像変換装置A12、B12のそれぞれへこれら色変換LUTを出力する。   The main video conversion device 32 is connected to the sub video conversion devices A12 and B22 through the router 61 and the network 62 to constitute the video conversion system 1A according to the first embodiment of the present invention. The main video conversion device 32 acquires the model information and shooting setting information of the cameras A11 and B21 from the sub video conversion devices A12 and B22 connected via the router 61 and the network 62, and at the cameras A11 and B21, Each captured camera video data is acquired, and based on the color reproduction information corresponding to the display color space of each of the monitors A13 and B23 obtained by monitor calibration, each of the monitors A13 and B23 A color conversion lookup table (color conversion LUT) corresponding to each of the sub-video conversion devices A12 and B22 is created so that the color of the video displayed on the output device can be confirmed, and sub-video conversion is performed through the router 61 and the network 62. These color conversion LUTs to each of the devices A12 and B12 To output.

なお、ここでカメラの機種情報とは、文字通りカメラの製造メーカや種類等の機種情報を示し、カメラの撮影設定情報とは撮影シーン毎(映像データのタイムコードまたはファイル名等に紐付けされる)のカメラのホワイトバランス設定や、階調、色再現モード設定等を指す。また、これらカメラの機種情報および撮影設定情報は、カメラ映像データに含まれるメタデータから取得されてもよく、また、撮影監督等のユーザによってコントローラ81から入力されてもよい。
また、モニタの色再現情報とは、モニタ毎にキャリブレーションを行って得られるモニタの表示色空間の情報であり、撮影監督等のユーザによってコントローラ81から入力される。
Here, the camera model information literally indicates model information such as the manufacturer and type of the camera, and the camera shooting setting information is associated with each shooting scene (time code or file name of the video data). ) Camera white balance setting, gradation, color reproduction mode setting, and the like. The camera model information and shooting setting information may be acquired from the metadata included in the camera video data, or may be input from the controller 81 by a user such as a shooting director.
The color reproduction information of the monitor is information on the display color space of the monitor obtained by performing calibration for each monitor, and is input from the controller 81 by a user such as an imaging director.

また、主映像変換装置32は、例えば、カメラC31の機種情報および撮影設定情報とカメラC31で撮影されたカメラ映像データとを取得し、副映像変換装置C42、D52にそれぞれ接続されたモニタD43、E53のそれぞれの表示色空間に対応した色再現情報に基づいて、モニタD43、E53のそれぞれにおいて、最終出力デバイスで表示される映像の色を確認できるように、これらに基づいて副映像変換装置C42、D52のそれぞれに対応した色変換LUTを作成し、副映像変換装置C42、D52のそれぞれへこれら色変換LUTを出力する。   Further, the main video conversion device 32 acquires, for example, model information and shooting setting information of the camera C31 and camera video data shot by the camera C31, and monitors D43, D43 connected to the sub-video conversion devices C42 and D52, respectively. Based on the color reproduction information corresponding to each display color space of E53, each of the monitors D43 and E53 can check the color of the video displayed on the final output device based on the sub-video conversion device C42. , D52, and color conversion LUTs corresponding to the D52 and D52, respectively, and output these color conversion LUTs to the sub-picture conversion devices C42 and D52.

また、主映像変換装置32は、モニタA13〜モニタE53において確認され、色調整のなされた映像データを、ユーザの指示に基づいて時間軸上で編集加工し、撮影シーンに対応したシーン番号やシーンに対応したカメラのタイムコードなどの編集加工の内容を記載した編集情報ファイル(XML(Extensible Markup Language)ファイルやEDL(Edit Decision List)ファイル等)を作成する。   In addition, the main video conversion device 32 edits and processes the video data that is confirmed and color-adjusted on the monitor A13 to the monitor E53 on the time axis based on the user's instruction, and the scene number or scene corresponding to the shooting scene. An editing information file (XML (Extensible Markup Language) file, EDL (Edit Decision List) file, etc.) describing the contents of editing processing such as the time code of the camera corresponding to is created.

副映像変換装置C42、D52は、それぞれ主映像変換装置32に接続して主映像変換装置32とともに本発明の実施の形態1に係る映像変換システム1Bの一部を構成し、また、副映像変換装置C42、D52に対して、モニタD43、E53が1対1(1:1)対応でそれぞれ接続される。
副映像変換装置C42、D52は、カメラC31から出力され、主映像変換部32において色調整され、映像の出力の標準色空間へ変換された映像データをモニタD43、E53に合わせてそれぞれ変換し、映像の最終出力となる最終出力デバイス、例えば、デジタルプロジェクタやフィルムプロジェクタで用いる上映ポジフィルムの色空間へ変換した際に得られる、上映システムのデジタルプロジェクタやフィルムプロジェクタ等の映写機で再現される色、上映される映像の色を事前に映写機とは異なる表示デバイスであるモニタD43、E53でそれぞれ確認させるようにするためのものである。
The sub-video conversion devices C42 and D52 are connected to the main video conversion device 32, respectively, and constitute a part of the video conversion system 1B according to Embodiment 1 of the present invention together with the main video conversion device 32. Monitors D43 and E53 are connected to the devices C42 and D52 in a one-to-one (1: 1) correspondence.
The sub-video conversion devices C42 and D52 convert the video data output from the camera C31, color-adjusted in the main video conversion unit 32, and converted into the standard color space of the video output according to the monitors D43 and E53, respectively. The final output device that is the final output of the video, for example, the color reproduced by a projector such as a digital projector or film projector of a screening system, obtained when converted to the color space of a screening positive film used in a digital projector or film projector, This is for allowing the colors of the video to be screened to be confirmed in advance by the monitors D43 and E53, which are display devices different from the projector.

モニタA13、B23は、副映像変換装置A12、B22にそれぞれ1対1(1:1)対応で設けられるもので、副映像変換装置A12、B22による(実際には、主映像変換装置32による)色調整の結果をそれぞれ表示するための表示デバイスであって、撮影監督等が撮影後直ちに映写機で上映される映像の色を撮影現場で確認するためのモニタであり、撮影現場において映像の色調整を行った場合には、直ちに色調整された映像の色を確認するためのモニタである。
また、モニタC33は、主映像変換装置32に1対1対応で設けられるもので、また、モニタD43、E53は、主映像変換装置32にそれぞれ接続された副映像変換装置C42、D52にそれぞれ1対1対応で設けられるもので、上述の副映像変換装置A12、B22と同様、色調整の結果をそれぞれ表示するための表示デバイスであって、撮影監督等が撮影後直ちに映写機で上映される映像の色を撮影現場で確認するためのモニタであり、撮影現場において映像の色調整を行った場合には、直ちに色調整された映像の色を確認するためのモニタである。
例えば、副映像変換装置および主映像変換装置を含め5台以上の映像変換装置を備えている場合には、副映像変換装置および主映像変換装置それぞれに対応して5台以上のモニタを備えるのがよい。
また、本発明で用いられるモニタは、上映システムの映写機で上映される映像の色を再現し、表示できれば特に制限はなく、従来公知の表示デバイスを用いることができる。なお、本発明で用いられるモニタは、上述のカメラと同様に、異なるメーカや異なる機種であってもよく、その場合には、本発明は、より高い効果を発揮することができる。
The monitors A13 and B23 are provided in a one-to-one (1: 1) correspondence to the sub-video converters A12 and B22, respectively, and are based on the sub-video converters A12 and B22 (actually by the main video converter 32). This is a display device for displaying the results of color adjustments, and is a monitor for the director of photography to check the color of the video shown on the projector immediately after shooting. The color adjustment of the video at the shooting site When this is performed, the monitor immediately confirms the color of the color-adjusted video.
Further, the monitor C33 is provided in a one-to-one correspondence with the main video conversion device 32, and the monitors D43 and E53 are respectively provided to the sub video conversion devices C42 and D52 connected to the main video conversion device 32, respectively. Similar to the above-described sub-video conversion devices A12 and B22, the display device is a display device for displaying the color adjustment results, and the video imaged by the director of photography immediately on the projector after shooting. This is a monitor for confirming the color of the image immediately after the color adjustment of the image when the color adjustment of the image is performed at the photographing site.
For example, in the case where five or more video conversion devices including a sub video conversion device and a main video conversion device are provided, five or more monitors are provided corresponding to each of the sub video conversion device and the main video conversion device. Is good.
The monitor used in the present invention is not particularly limited as long as it reproduces and displays the color of the video screened by the projector of the screening system, and a conventionally known display device can be used. It should be noted that the monitor used in the present invention may be a different manufacturer or a different model, similar to the above-described camera, and in this case, the present invention can exhibit a higher effect.

ルータ61およびネットワーク62は、副映像変換装置A12、B22、および主映像変換装置32を相互に接続し、本発明の実施の形態1に係る映像変換システム1Aの一部を構成する。
ルータ61は、ネットワーク62の中継器であり、ネットワーク62によって接続された副映像変換装置A12、B22、および主映像変換装置32間のデータの送受信を中継する。また、ネットワーク62は、撮影現場のみで利用されるイントラネットであり、例えば、ツイストペアケーブルや光ファイバ等によって構成され、各種端末器およびルータから送受信されるデータを伝達する。
ルータ61およびネットワーク62を通じて、副映像変換装置A12、B22から主映像変換装置32へカメラの機種情報および撮影設定情報、カメラ映像データおよびモニタの表示色空間に対応した色再現情報が出力され、また、主映像変換装置32から副映像変換装置A12、B22へ色変換LUTが出力される。
The router 61 and the network 62 connect the sub-video conversion devices A12 and B22 and the main video conversion device 32 to each other, and constitute a part of the video conversion system 1A according to Embodiment 1 of the present invention.
The router 61 is a repeater of the network 62 and relays transmission / reception of data between the sub-video conversion devices A12 and B22 and the main video conversion device 32 connected by the network 62. The network 62 is an intranet that is used only at the shooting site. The network 62 includes, for example, a twisted pair cable or an optical fiber, and transmits data transmitted and received from various terminals and routers.
Through the router 61 and the network 62, camera model information and shooting setting information, camera video data, and color reproduction information corresponding to the display color space of the monitor are output from the sub-video converters A12 and B22 to the main video converter 32. The color conversion LUT is output from the main video conversion device 32 to the sub video conversion devices A12 and B22.

撮影映像記憶装置70は、カメラA11、B21、C31で撮影して得られた生の映像データであるカメラ映像データ自体を記憶するものであり、ハードディスクドライブ(HDD)やメモリ等によって構成される。
また、編集映像記憶装置71は、主映像変換装置32において、色調整され、映像の出力の標準色空間へ変換された映像データ(または、モニタA13〜モニタE53で確認された表示確認用の映像データ)、撮影シーン毎のカメラの機種情報、撮影設定情報および後述する色調整パラメータなどの色処理の情報(後述する色処理パラメータ)、モニタの機種情報、モニタの表示色空間に対応した色再現情報、および主映像変換装置32において編集加工された映像データの撮影シーン毎に対応したシーン番号やシーンに対応したカメラのタイムコードなどの編集加工の内容を記載した編集情報ファイル(XMLファイルやEDLファイルなど)等を記憶するものであり、上述の撮影映像記憶装置70と同様に、HDDやメモリ等によって構成される。
また、携帯記憶装置72は、主映像変換装置32から出力された撮影シーン毎のカメラの機種情報、撮影設定情報および後述する色調整パラメータなどの色処理の情報、モニタの機種情報、モニタの表示色空間に対応した色再現情報、および編集情報ファイルを記憶するものであり、ポータブルのHDDや、USBメモリ等によって構成され、撮影システム2から切り離して、持ち運びが可能なものである。
The photographed video storage device 70 stores camera video data itself that is raw video data obtained by photographing with the cameras A11, B21, and C31, and includes a hard disk drive (HDD), a memory, and the like.
The edited video storage device 71 is video data that has been color-adjusted and converted into a standard color space for video output in the main video conversion device 32 (or video for display confirmation that has been confirmed on the monitors A13 to E53). Data), camera model information for each shooting scene, shooting setting information and color processing information (color processing parameters described later) such as color adjustment parameters described later, monitor model information, and color reproduction corresponding to the display color space of the monitor Edit information file (XML file or EDL) that describes information and editing processing contents such as a scene number corresponding to each shooting scene of video data edited and processed in the main video conversion device 32 and a camera time code corresponding to the scene File), etc., and is configured by an HDD, a memory, etc., like the above-described photographed video storage device 70. It is.
The portable storage device 72 also includes camera model information, shooting setting information, and color processing information such as color adjustment parameters to be described later, monitor model information, and monitor display output from the main video conversion device 32. The color reproduction information corresponding to the color space and the editing information file are stored, and are configured by a portable HDD, a USB memory, or the like, and can be detached from the photographing system 2 and carried.

コントローラ81は、映像変換システム1A、1Bに接続され、映像変換システム1Aを構成する副映像変換装置A12、B22、および主映像変換装置32、ならびに映像変換システム1Bを構成する主映像変換装置32、副映像変換装置C42、D52をそれぞれ操作するもので、本発明の映像変換システム1A、1Bの一部を構成する。
図1では、コントローラ81は映像変換システム1Aに接続されているが、実際は、例えば、副映像変換システムA12に接続されてもよく、副映像変換システムB22に接続されてもよく、主映像変換装置32に接続されてもよく、また、ルータ61およびネットワーク62を介して映像変換システム1A全体に接続されてもよい。同様に、コントローラ81は、映像変換システム1Bの副映像変換システムC42、D52に接続されてもよい。また、コントローラ81は、有線接続されていてもよく、また、無線接続されていてもよい。
The controller 81 is connected to the video conversion systems 1A and 1B, and the sub video conversion devices A12 and B22 and the main video conversion device 32 constituting the video conversion system 1A, and the main video conversion device 32 constituting the video conversion system 1B, The sub-video conversion devices C42 and D52 are respectively operated and constitute a part of the video conversion systems 1A and 1B of the present invention.
In FIG. 1, the controller 81 is connected to the video conversion system 1A. Actually, however, the controller 81 may be connected to the sub video conversion system A12, may be connected to the sub video conversion system B22, or the main video conversion device. 32, or may be connected to the entire video conversion system 1 </ b> A via the router 61 and the network 62. Similarly, the controller 81 may be connected to the sub-video conversion systems C42 and D52 of the video conversion system 1B. Further, the controller 81 may be connected by wire or may be connected wirelessly.

コントローラ81は、撮影監督等がカメラA11を用いて撮影後、モニタA13に表示された撮影映像の再現色を確認しながら、色調整する際に、色調整のための色調整パラメータを入力するとともに、色調整された映像、および/またはその解析、特に映像の色の解析の結果をモニタA13に表示し、色調整された映像の各画素、もしくは映像の色調整の結果、少なくとも選択部分の解析結果が、最終出力デバイスであるデジタルプロジェクタの色空間から外れる場合などには、警告を表示したり、警報を発したりするためのものである。
コントローラ81は、映像変換システム1A、1Bを制御できれば、どのようなものでもよく、例えば、ルータ61およびネットワーク62を介して接続されるパソコン(PC)、例えば、ノート型PCや、デスクトップ型PCや、iPad(商品名)等のタブレット型PC等を用いることができる。
The controller 81 inputs color adjustment parameters for color adjustment when performing color adjustment while confirming the reproduced color of the captured image displayed on the monitor A13 after the imaging director uses the camera A11. The color-adjusted video and / or the analysis thereof, particularly the result of the video color analysis, is displayed on the monitor A13, and each pixel of the color-adjusted video or the result of the color adjustment of the video is analyzed at least as a selected portion. For example, when the result is out of the color space of the digital projector as the final output device, a warning is displayed or a warning is issued.
The controller 81 may be anything as long as it can control the video conversion systems 1A and 1B. For example, a personal computer (PC) connected via the router 61 and the network 62, for example, a notebook PC, a desktop PC, , Ipad (brand name) tablet type PC, etc. can be used.

コントローラ81は、映像変換システム1A、1Bに対してモニタA13、B23、C33、D43、E53で表示されるモニタ映像の色調整を行うもので、コントローラ81において、モニタキャリブレーションによって予め得られたモニタA13、B23、C33、D43、E53それぞれの表示色空間に対応した色再現情報を入力し、また、色調整パラメータの変更を入力することで、これらモニタA13〜E53に表示されたモニタ映像の色調整をリアルタイム行うことができる。コントローラ81は、色調整を行うモニタ自体を指定して、指定のモニタに表示のモニタ映像のみ色調整を行うこともでき、また、指定のモニタに表示のモニタ映像の色調整の結果を確認したうえで、この色調整の結果が全てのモニタA13〜E53に反映されるように映像変換システム1A、1Bを操作することもできる。   The controller 81 adjusts the color of the monitor video displayed on the monitors A13, B23, C33, D43, and E53 for the video conversion systems 1A and 1B. In the controller 81, the monitor obtained in advance by monitor calibration is used. By inputting color reproduction information corresponding to each display color space of A13, B23, C33, D43, and E53, and inputting a change in color adjustment parameter, the colors of the monitor images displayed on these monitors A13 to E53 Adjustments can be made in real time. The controller 81 can also specify the monitor itself to be color-adjusted, and can adjust the color of only the monitor video displayed on the designated monitor, and has confirmed the color adjustment result of the monitor video displayed on the designated monitor. In addition, the video conversion systems 1A and 1B can be operated so that the result of the color adjustment is reflected on all the monitors A13 to E53.

編集システム3に接続するLUT生成サーバ4は、撮影システム2から切り離されていてもよく、例えば、撮影終了後、携帯記憶装置72から撮影シーン毎のカメラの機種情報、撮影設定情報および後述する色調整パラメータを取得し、編集システム3の各種編集機器に応じて編集システム3において使用される色変換LUTを生成、出力する。
編集システム3は、LUT生成サーバ4から色変換LUTを取得し、撮影映像記憶装置70から予め取得したカメラ映像データを色変換LUTに基づいて色変換することで、撮影現場でなされた最終出力デバイスの映像の色再現を行うことができる。
The LUT generation server 4 connected to the editing system 3 may be disconnected from the shooting system 2. For example, after shooting, the camera model information, shooting setting information, and color to be described later are stored in the portable storage device 72 from the portable storage device 72. The adjustment parameter is acquired, and a color conversion LUT used in the editing system 3 is generated and output according to various editing devices of the editing system 3.
The editing system 3 acquires the color conversion LUT from the LUT generation server 4 and performs color conversion on the camera video data acquired in advance from the captured video storage device 70 based on the color conversion LUT, whereby the final output device made at the shooting site. The color reproduction of the video can be performed.

次に、本発明の好適態様に係る撮影システム2を含む映画の撮影・編集システムの動作を簡単に説明する。なお、映像変換システムおよびLUT生成サーバの動作については各実施の形態において詳述する。
カメラA11〜カメラC31で撮影されたカメラ映像データ(生の映像データ)は、撮影映像記憶装置70に出力され、映像変換システム1A、1Bへ出力される。映像変換システム1A、1Bは、ユーザによる撮影現場での色調整を可能とし、モニタA13〜E53において、最終出力デバイスでの映像の色再現を行い、カメラの機種情報および撮影設定情報、ユーザによる色調整の情報である色調整パラメータを出力し、また、映像データの編集加工等を行って、編集情報ファイル(XMLファイルやEDLファイル等)を出力する。
Next, the operation of the movie shooting / editing system including the shooting system 2 according to the preferred embodiment of the present invention will be briefly described. The operations of the video conversion system and the LUT generation server will be described in detail in each embodiment.
Camera video data (raw video data) captured by the cameras A11 to C31 is output to the captured video storage device 70 and output to the video conversion systems 1A and 1B. The video conversion systems 1A and 1B allow the user to adjust the color at the shooting site. The monitors A13 to E53 reproduce the color of the video on the final output device, and the camera model information and shooting setting information. Color adjustment parameters that are adjustment information are output, video data is edited and processed, and an edit information file (such as an XML file or an EDL file) is output.

カメラの機種情報および撮影設定情報、ユーザによる色調整の情報である色調整パラメータは、例えば、携帯記憶装置72によってLUT生成サーバ4に出力され、LUT生成サーバ4において、編集システム3の映像編集機器の色空間の情報を元に、色変換LUTが生成され、編集システム3の対応する映像編集機器に出力される。撮影システム2の撮影映像記憶装置70からのカメラ映像データを色変換LUTで色変換することで、映像編集機器において、撮影現場でなされた最終出力デバイスの映像の色再現を行うことができる。   The camera model information, shooting setting information, and color adjustment parameters that are color adjustment information by the user are output to the LUT generation server 4 by the portable storage device 72, for example, and the LUT generation server 4 uses the video editing device of the editing system 3. The color conversion LUT is generated on the basis of the information on the color space and is output to the corresponding video editing device of the editing system 3. By color-converting the camera video data from the shot video storage device 70 of the shooting system 2 using the color conversion LUT, the video editing device can reproduce the color of the video of the final output device made at the shooting site.

なお、カメラの機種情報および撮影設定情報、ユーザによる色調整の情報である色調整パラメータ等は、携帯記憶装置72を介さず、映像変換システム1A、1BからLUT生成サーバへ直接出力されてもよい。
また、映像変換システム1A、1Bは、上述の色調整パラメータ等に対応した色変換後の静止画像または色変換前の静止画像および色変換後の静止画像を静止画像データとして色調整パラメータ等とともに記憶し、上述の色調整パラメータ等とともに外部に出力してもよく、また、撮影または色調整の際のユーザにコメントを入力させ、入力させたコメントを上述の色調整パラメータ等とともに記憶し、上述の色調整パラメータ等とともに外部に出力してもよい。
Note that the camera model information and shooting setting information, color adjustment parameters that are color adjustment information by the user, and the like may be directly output from the video conversion systems 1A and 1B to the LUT generation server without using the portable storage device 72. .
The video conversion systems 1A and 1B store a still image after color conversion corresponding to the above color adjustment parameter or the like, a still image before color conversion, and a still image after color conversion as still image data together with the color adjustment parameter and the like. And may be output to the outside together with the above-described color adjustment parameters, etc. Also, the user at the time of shooting or color adjustment inputs a comment, the input comment is stored together with the above-described color adjustment parameter, and the like. You may output outside with a color adjustment parameter etc.

実施の形態1
図2は、本発明の実施の形態1に係る映像変換システム1Aの構成の一部を示すブロック図である。実施の形態1に係る映像変換システム1Aは、副映像変換装置A12と主映像変換装置32とからなる。
副映像変換装置A12は、カメラA11に接続され、また、副映像変換装置A12には、モニタA13が接続されている。
副映像変換装置A12は、副本体制御部14、ルックアップテーブル変換部(以下、LUT変換部)15、LUTメモリ16、および副データ送受信部17からなり、カメラA11は、副映像変換装置A12のLUT変換部15に接続され、また、LUT変換部15には、モニタA13が接続される。なお、副本体制御部14は、本発明の接続情報取得部を兼ねる。
Embodiment 1
FIG. 2 is a block diagram showing a part of the configuration of the video conversion system 1A according to Embodiment 1 of the present invention. The video conversion system 1A according to Embodiment 1 includes a sub-video conversion device A12 and a main video conversion device 32.
The sub-video conversion device A12 is connected to the camera A11, and the monitor A13 is connected to the sub-video conversion device A12.
The sub-video conversion device A12 includes a sub-main body control unit 14, a lookup table conversion unit (hereinafter referred to as LUT conversion unit) 15, an LUT memory 16, and a sub-data transmission / reception unit 17, and the camera A11 includes the sub-video conversion device A12. The monitor A 13 is connected to the LUT converter 15. The sub-main body control unit 14 also serves as a connection information acquisition unit of the present invention.

副本体制御部14は、カメラA11およびモニタA13にそれぞれ接続され、また、LUT変換部15に接続するとともに、副データ送受信部17に相互に接続され、副映像変換装置A12の動作を制御する。副本体制御部14は、カメラA11の機種情報および撮影設定情報や、カメラA11で撮影されたカメラ映像データをそれぞれ取得し、また、コントローラ81よりモニタA13の色再現情報を取得して、副データ送受信部17に出力するとともに、副データ送受信部から色変換LUTを取得し、LUT変換部15へ出力する。
また、副本体制御部14には、コントローラ81が接続され、副本体制御部14は、コントローラ81によって撮影監督等により入力された色調整パラメータを取得し、副データ送受信部17を通じて、色調整パラメータをルータ61およびネットワーク62を介して主映像変換装置32へ出力するとともに、色調整パラメータに基づいて主映像変換装置32のLUT生成部35で再度生成された色変換LUTを上述と同様に取得し、LUT変換部15へ出力する。
The sub main body control unit 14 is connected to the camera A11 and the monitor A13, is connected to the LUT conversion unit 15, and is connected to the sub data transmission / reception unit 17 to control the operation of the sub video conversion device A12. The sub-main body control unit 14 acquires model information and shooting setting information of the camera A11 and camera video data shot by the camera A11, and acquires color reproduction information of the monitor A13 from the controller 81. In addition to outputting to the transmission / reception unit 17, the color conversion LUT is acquired from the sub-data transmission / reception unit and output to the LUT conversion unit 15.
In addition, a controller 81 is connected to the sub main body control unit 14, and the sub main body control unit 14 acquires the color adjustment parameters input by the controller 81 by the imaging supervisor and the like, and through the sub data transmission / reception unit 17, Is output to the main video conversion device 32 via the router 61 and the network 62, and the color conversion LUT generated again by the LUT generation unit 35 of the main video conversion device 32 based on the color adjustment parameters is acquired in the same manner as described above. , Output to the LUT converter 15.

LUT変換部15は、色変換LUTを記憶するLUTメモリ16を備え、副本体制御部14の指示により、この色変換LUTによってカメラA11から取得したカメラ映像データを色変換し、モニタA13へ出力する。また、LUT変換部15は、副本体制御部14から色変換LUTを取得し、副本体制御部14の指示により、LUTメモリ16に記憶された色変換LUTを書き換える。
LUTメモリ16は、LUT変換部15内に設置され、色変換LUTを記憶し、LUT変換部15によるカメラ映像データの色変換の際に色変換LUTを提供し、また、LUT変換部15により色変換LUTが書き換えられる。
The LUT conversion unit 15 includes an LUT memory 16 that stores the color conversion LUT. In response to an instruction from the sub-body control unit 14, the LUT conversion unit 15 performs color conversion on the camera video data acquired from the camera A11 by the color conversion LUT and outputs the color to the monitor A13. . Further, the LUT conversion unit 15 acquires the color conversion LUT from the sub-body control unit 14 and rewrites the color conversion LUT stored in the LUT memory 16 according to an instruction from the sub-body control unit 14.
The LUT memory 16 is installed in the LUT conversion unit 15, stores the color conversion LUT, provides the color conversion LUT when the LUT conversion unit 15 performs color conversion of the camera video data, and the LUT conversion unit 15 provides the color conversion LUT. The conversion LUT is rewritten.

副データ送受信部17は、ルータ61およびネットワーク62を介して主映像変換装置32の主データ送受信部37と相互に接続し、副本体制御部14の指示により、副本体制御部14から取得したカメラA11の機種情報および撮影設定情報、カメラ映像データ、ならびにモニタA13の色再現情報を主映像変換装置32の主データ送受信部37へ出力し、また、主映像変換装置32の主データ送受信部37からこれらカメラA11およびモニタA13に対応した色変換LUTを取得する。   The sub data transmission / reception unit 17 is connected to the main data transmission / reception unit 37 of the main video conversion device 32 via the router 61 and the network 62, and is acquired from the sub main body control unit 14 according to an instruction from the sub main body control unit 14. The model information and shooting setting information of A11, camera video data, and color reproduction information of the monitor A13 are output to the main data transmitting / receiving unit 37 of the main video converting device 32, and from the main data transmitting / receiving unit 37 of the main video converting device 32. The color conversion LUT corresponding to the camera A11 and the monitor A13 is acquired.

主映像変換装置32は、基本的に、映画システムのポストプロダクションで用いられる図7に示すAMPAS-IIFの色変換アーキテクチャを、撮影システム2に適用可能にしたもので、主映像変換装置32は、相互に接続される主本体制御部34、ルックアップテーブル生成部(以下、LUT生成部)35、および主データ送受信部37からなり、カメラC31は、主映像変換装置32のLUT生成部35に接続され、また、LUT生成部35には、モニタC33が接続される。
また、主本体制御部34は、LUT生成部35および主データ送受信部37と相互に接続され、LUT生成部35および主データ送受信部37を制御するための指示を出す。
The main video conversion device 32 is basically one in which the color conversion architecture of AMPAS-IIF shown in FIG. 7 used in the post production of a movie system can be applied to the shooting system 2. The main video conversion device 32 The main body control unit 34, a lookup table generation unit (hereinafter referred to as LUT generation unit) 35, and a main data transmission / reception unit 37 are connected to each other. The camera C31 is connected to the LUT generation unit 35 of the main video conversion device 32. The monitor C33 is connected to the LUT generation unit 35.
The main body control unit 34 is connected to the LUT generation unit 35 and the main data transmission / reception unit 37 and issues an instruction to control the LUT generation unit 35 and the main data transmission / reception unit 37.

LUT生成部35は、順次接続されるIDT(Input Device Transform)変換部91、カメラキャリブレーション部92、LMT(Look Modification Transform)変換部93、レンダリング変換部94、モニタ色空間変換部95、およびモニタキャリブレーション部96からなり、主本体制御部34の指示により、カメラの機種情報および撮影設定情報、カメラ映像データ、およびモニタの色再現情報を取得することでこれらカメラおよびモニタに対応した色変換LUTを生成し、また、カメラから得られたカメラ映像データを、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色をモニタで表示するためのモニタ映像データ(確認用表示デバイス映像データ)に変換してモニタへ出力するものである。
また、LUT生成部35は、主本体制御部34の指示により、カメラ映像データに標準的な色空間への変換とガンマ変換(例えばrec709やsRGB等)のみを施した後述する出力の標準の色空間(出力標準色空間)の映像データを主データ送受信部37を通じて編集加工映像記憶装置71および携帯記憶装置72に出力してもよく、また、この出力の標準の色空間の映像データに更に対応する信号処理等を施したうえで、編集システム3の各種編集機器に直接出力してもよい。ここで対応する信号処理等とは、編集システム3の各種編集機器の要求に基づく画像変換である。
The LUT generation unit 35 includes an IDT (Input Device Transform) conversion unit 91, a camera calibration unit 92, an LMT (Look Modification Transform) conversion unit 93, a rendering conversion unit 94, a monitor color space conversion unit 95, and a monitor that are sequentially connected. A color conversion LUT corresponding to the camera and the monitor by acquiring the camera model information and the shooting setting information, the camera image data, and the monitor color reproduction information according to an instruction from the main body control unit 34. In addition, the camera video data obtained from the camera is converted into monitor video data (display device video data for confirmation) for displaying on the monitor the colors reproduced by the digital projector that is the final output device of the movie system. This is converted and output to the monitor.
Further, the LUT generation unit 35 outputs a standard color of output, which will be described later, by performing only conversion to a standard color space and gamma conversion (for example, rec709, sRGB, etc.) on the camera video data according to an instruction from the main body control unit 34. The video data of the space (output standard color space) may be output to the edited and processed video storage device 71 and the portable storage device 72 through the main data transmission / reception unit 37, and further corresponds to the video data of the standard color space of this output. The signal may be directly output to various editing devices of the editing system 3 after performing signal processing or the like. Here, the corresponding signal processing or the like is image conversion based on requests from various editing devices of the editing system 3.

IDT変換部91は、図7に示すAMPAS-IIFの色変換アーキテクチャのIDT106と同様に、カメラで撮影されたカメラ映像データ(カメラの色空間)を入力の共通色空間であるACES(の映像データ)に変換するものである。
カメラキャリブレーション部92は、IDT変換部91で入力色空間ACES(の映像データ)に変換された映像データを、カメラの機種情報および撮影設定情報に応じて補正するものである。
こうすることにより、メーカや機種の異なる複数台のカメラで撮影されたカメラ映像データは、シーン基準の色空間として定義される入力色空間ACES(の映像データ)に変換されるので、同一シーンであれば、同一の色の映像データに変換される。
こうして、メーカや機種の異なる複数台のカメラで撮影されたカメラ映像データであっても、高精度にマッチングの取れた入力色空間ACESの映像データとすることができる。
The IDT conversion unit 91, like the AMPAS-IIF color conversion architecture IDT 106 shown in FIG. 7, accepts camera video data (camera color space) captured by the camera as ACES (video data of an input common color space). ).
The camera calibration unit 92 corrects the video data converted into the input color space ACES (video data thereof) by the IDT conversion unit 91 in accordance with the camera model information and shooting setting information.
By doing this, camera video data shot by a plurality of cameras of different manufacturers and models is converted to an input color space ACES (video data) defined as a scene-based color space. If there is, it is converted into video data of the same color.
In this way, even camera image data captured by a plurality of cameras of different manufacturers and models can be converted into image data in the input color space ACES that can be matched with high accuracy.

LMT変換部93は、映像コンテンツやストーリ、シーンの雰囲気に合わせた演出のために、コントローラ81による撮影監督等のユーザ指示に基づく色調整を実施するものである。LMT変換部93は、主本体制御部34の指示により主データ送受信部37によって取得された色調整パラメータを取得し、入力色空間ACESにおいて、映像データを色調整済映像データに変換するので、色調整済映像データの色空間もACESである。
レンダリング変換部94は、ACES映像を、予め指定されている、映像コンテンツの出力ターゲット(映画館向けなのかTV放送向けなのか? デジタル上映なのかフィルム映写なのか? フィルムの種類は何なのか?等)に応じたレンダリング(編集加工)を施し、ターゲット出力デバイスの、出力デバイスに依存しない出力標準色空間内に変換する。即ち、レンダリング変換部94は、入力色空間ACESを、出力デバイスに依存しない出力標準色空間(DIC:Device Independent Color:デバイスインディペンデントカラー)に色変換するためのもので、入力色空間ACESの映像データを、出力色に編集加工して、出力標準色空間DICの編集加工された映像データとする。
The LMT conversion unit 93 performs color adjustment based on a user instruction such as shooting supervision by the controller 81 in order to produce an effect that matches the video content, story, and scene atmosphere. The LMT conversion unit 93 acquires the color adjustment parameter acquired by the main data transmission / reception unit 37 according to an instruction from the main body control unit 34, and converts the video data into color-adjusted video data in the input color space ACES. The color space of the adjusted video data is also ACES.
The rendering conversion unit 94 outputs the ACES video, which is designated in advance, as an output target of video content (for movie theaters or TV broadcasts? Is it digital screening or film projection? What is the type of film? Etc.) to perform rendering (editing processing) in accordance with the output standard color space of the target output device independent of the output device. That is, the rendering conversion unit 94 converts the input color space ACES into an output standard color space (DIC: Device Independent Color) independent of the output device. The video data is edited and processed into an output color, and the edited video data of the output standard color space DIC is obtained.

ここで、出力標準色空間DICは、出力デバイスに依存しない標準色空間であれば特に制限はないので、図7に示すAMPAS-IIFの色変換アーキテクチャの出力の共通色空間であるOCES102であっても良い。したがって、この場合には、レンダリング変換部94は、図7に示すRRT変換部104であればよい。
この他、例えば、レンダリング変換部94を、RDT変換部、映画用フィルムのためのフィルムプレビューのための変換部等で構成してもよい。
したがって、出力標準色空間(DIC)は、理想的な出力デバイスのダイナミックレンジを、確認用表示デバイス(確認用モニタ)への色空間変換を行った後の、表示品質を低下させない範囲で削減した色空間でも良く、10000:1以上のダイナミックレンジに削減した色空間でもよい。
また、出力標準色空間(DIC)は、標準出力デバイス(標準出力モニタ)を想定した出力色空間、または映画システムにおいて映写機で上映される映写用フィルムのプレビューを想定した出力色空間であってもよい。
Here, the output standard color space DIC is not particularly limited as long as it is a standard color space that does not depend on the output device. Therefore, the output standard color space DIC is the OCES 102 that is a common color space for the output of the color conversion architecture of the AMPAS-IIF shown in FIG. Also good. Therefore, in this case, the rendering conversion unit 94 may be the RRT conversion unit 104 shown in FIG.
In addition, for example, the rendering conversion unit 94 may be configured by an RDT conversion unit, a conversion unit for film preview for movie films, or the like.
Therefore, the output standard color space (DIC) has reduced the dynamic range of the ideal output device within a range that does not degrade the display quality after color space conversion to the display device for confirmation (confirmation monitor). The color space may be a color space reduced to a dynamic range of 10,000: 1 or more.
The output standard color space (DIC) may be an output color space that assumes a standard output device (standard output monitor) or an output color space that assumes a preview of a projection film to be screened on a movie projector in a movie system. Good.

モニタ色空間変換部95は、映像をモニタに表示するために、出力標準色空間(DIC)の映像データを、モニタの色空間に変換するとともに、モニタのγ特性に合わせるように変換するものである。
モニタキャリブレーション部96は、モニタ色空間変換部95でモニタの色空間に変換された映像データを、コントローラ81によって入力されたモニタの表示色空間に対応した色再現情報に応じて補正するものである。
こうすることにより、メーカや機種の異なる複数台のモニタで表示される映像であっても、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色と同じ色を表示することができる。
こうして、メーカや機種の異なる複数台のモニタで表示された映像であっても、高精度にマッチングの取れた映像とすることができる。
The monitor color space conversion unit 95 converts the video data in the output standard color space (DIC) into the monitor color space and converts it to match the γ characteristics of the monitor in order to display the video on the monitor. is there.
The monitor calibration unit 96 corrects the video data converted into the monitor color space by the monitor color space conversion unit 95 according to the color reproduction information corresponding to the display color space of the monitor input by the controller 81. is there.
By doing so, even the video displayed on a plurality of monitors of different manufacturers and models can display the same color as the color reproduced by the digital projector that is the final output device of the movie system.
Thus, even images displayed on a plurality of monitors of different manufacturers and models can be matched with high accuracy.

LUT生成部35は、主本体制御部34の指示により、主データ送受信部37を通じて得たカメラA11の機種情報および撮影設定情報、カメラA11により撮影されたカメラ映像データ、およびモニタA13の色再現情報を取得した場合には、カメラA11により撮影されたカメラ映像データを、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色をモニタA13で表示するためのモニタ映像データに変換する色変換LUTを生成し、主データ送受信部37を通じて副映像変換装置A12へ出力する。同様に、LUT生成部35は、副映像変換装置A12に接続されたコントローラ81の色調整パラメータを取得した場合には、主本体制御部34の指示により、色調整パラメータを反映させた色変換LUTを生成し、主データ送受信部37を通じて副映像変換装置A12へ出力する。
また、LUT生成部35は、主本体制御部34の指示により、主映像変換装置32に直接接続されたカメラC31により撮影されたカメラ映像データをモニタC33に出力する場合には、カメラC31により撮影されたカメラ映像データを、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色をモニタC33で表示するためのモニタ映像データをモニタC33へ出力する。
The LUT generation unit 35, in response to an instruction from the main body control unit 34, model information and shooting setting information of the camera A11 obtained through the main data transmission / reception unit 37, camera video data shot by the camera A11, and color reproduction information of the monitor A13. Is obtained, the color conversion LUT for converting the camera video data captured by the camera A11 into the monitor video data for displaying on the monitor A13 the color reproduced by the digital projector that is the final output device of the movie system. Is output to the sub-picture conversion device A12 through the main data transmission / reception unit 37. Similarly, when the LUT generation unit 35 acquires the color adjustment parameter of the controller 81 connected to the sub-picture conversion device A12, the color conversion LUT reflecting the color adjustment parameter is instructed by the main body control unit 34. Is output to the sub-picture conversion device A12 through the main data transmission / reception unit 37.
In addition, the LUT generation unit 35 shoots with the camera C31 when the camera video data captured by the camera C31 directly connected to the main video conversion device 32 is output to the monitor C33 according to an instruction from the main body control unit 34. The monitor video data for displaying on the monitor C33 the color reproduced by the digital projector that is the final output device of the movie system is output to the monitor C33.

主データ送受信部37は、主本体制御部34からの指示を受け、ルータ61およびネットワーク62を通じて、副映像変換装置A12の副データ送受信部17から、カメラA11の機種情報および撮影設定情報、カメラA11で撮影されたカメラ映像データ、およびモニタA13の色再現情報をそれぞれ取得し、これらをLUT生成部35へ出力して、カメラA11およびモニタA13に対応した色変換LUTを取得する。主データ送受信部37は、ルータ61およびネットワーク62を通じて、副映像変換装置A12の副データ送受信部17へ色変換LUTを出力する。
本発明の実施の形態1に係る映像変換システム1Aは、基本的に以上のように構成される。
The main data transmission / reception unit 37 receives an instruction from the main body control unit 34, and from the sub-data transmission / reception unit 17 of the sub-picture conversion device A12 through the router 61 and the network 62, the model information and shooting setting information of the camera A11, and the camera A11. The camera image data photographed in step S1 and the color reproduction information of the monitor A13 are acquired and output to the LUT generation unit 35 to acquire the color conversion LUT corresponding to the camera A11 and the monitor A13. The main data transmission / reception unit 37 outputs the color conversion LUT to the sub data transmission / reception unit 17 of the sub video conversion apparatus A12 through the router 61 and the network 62.
The video conversion system 1A according to Embodiment 1 of the present invention is basically configured as described above.

次に、本発明の実施の形態1に係る映像変換システム1Aの基本動作を簡単に説明する。
副映像変換装置A12は、カメラA11およびモニタA13が接続されると、副本体制御部14により、カメラA11の機種情報および撮影設定情報と、カメラA11によって撮影されたカメラ映像データと、モニタA13の色再現情報とがそれぞれ取得され、副本体制御部14は、これらの情報を副データ送受信部17へ出力し、副データ送受信部17、ルータ61およびネットワーク62を通じて、これらの情報を主映像変換装置32へ出力する。
Next, the basic operation of the video conversion system 1A according to Embodiment 1 of the present invention will be briefly described.
When the camera A11 and the monitor A13 are connected, the sub-picture conversion device A12 is connected to the camera body A11 by the sub-main body control unit 14, the camera A11 model information and shooting setting information, the camera video data shot by the camera A11, and the monitor A13. Each of the color reproduction information is acquired, and the sub-body control unit 14 outputs the information to the sub-data transmission / reception unit 17, and these information is transmitted through the sub-data transmission / reception unit 17, the router 61, and the network 62. To 32.

主映像変換装置32の主データ送受信部37は、ルータ61およびネットワーク62を通じて、副映像変換装置A12の副データ送受信部17から、これらカメラA11の機種情報および撮影設定情報と、カメラA11によって撮影されたカメラ映像データと、モニタA13の色再現情報とをそれぞれ取得する。   The main data transmission / reception unit 37 of the main video conversion device 32 is photographed by the camera A11 from the sub data transmission / reception unit 17 of the sub video conversion device A12 through the router 61 and the network 62, and the camera A11 model information and shooting setting information. Camera image data and color reproduction information of the monitor A13 are acquired.

IDT変換部91は、カメラA11によって撮影されたカメラ映像データを、入力の共通色空間であるACESの映像データに変換し、カメラキャリブレーション部92は、カメラA11の機種情報および撮影設定情報を取得して、IDT変換部91で入力色空間ACESの映像データに変換された映像データを、カメラA11の機種情報および撮影設定情報に応じて補正する。
LMT変換部93は、詳細は後述するが、入力色空間ACESにおいて、映像データを色調整済映像データに変換し、レンダリング変換部94は、入力色空間ACESの映像データを、出力色に編集加工して、出力標準色空間DICの編集加工された映像データとする。
The IDT conversion unit 91 converts camera video data captured by the camera A11 into ACES video data that is an input common color space, and the camera calibration unit 92 acquires model information and shooting setting information of the camera A11. Then, the video data converted into the video data of the input color space ACES by the IDT conversion unit 91 is corrected according to the model information and shooting setting information of the camera A11.
As will be described in detail later, the LMT conversion unit 93 converts the video data into color-adjusted video data in the input color space ACES, and the rendering conversion unit 94 edits the video data in the input color space ACES into an output color. Thus, the edited video data of the output standard color space DIC is used.

モニタ色空間変換部95は、映像をモニタに表示するために、出力標準色空間DICの映像データを、モニタの色空間に変換するとともに、モニタのγ特性に合わせるように変換し、モニタキャリブレーション部96は、モニタA13の色再現情報を取得し、モニタ色空間変換部95でモニタの色空間に変換された映像データを、モニタA13の色再現情報に応じて補正し、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色をモニタA13で表示するためのモニタ映像データとする。
LUT生成部35は、主本体制御部34の指示に基づいて、このようにカメラA11の機種情報および撮影設定情報、カメラA11で撮影されたカメラ映像データ、およびモニタA13の色再現情報をもとに、カメラA11で撮影されたカメラ映像データを、モニタA13に対応したモニタ映像データに変換するとともに、カメラA11のカメラ映像データをモニタA13に対応したモニタ映像データに変換するための色変換LUTを生成する。
The monitor color space conversion unit 95 converts the video data in the output standard color space DIC into the monitor color space and converts it to match the γ characteristics of the monitor to display the video on the monitor, and monitor calibration. The unit 96 acquires the color reproduction information of the monitor A13, corrects the video data converted into the monitor color space by the monitor color space conversion unit 95 according to the color reproduction information of the monitor A13, and outputs the final output of the movie system. The color reproduced by the digital projector as the device is assumed to be monitor video data for display on the monitor A13.
Based on the instruction of the main body control unit 34, the LUT generation unit 35 is based on the model information and shooting setting information of the camera A11, the camera video data shot by the camera A11, and the color reproduction information of the monitor A13. In addition, a color conversion LUT for converting camera video data captured by the camera A11 into monitor video data corresponding to the monitor A13 and converting the camera video data of the camera A11 into monitor video data corresponding to the monitor A13 is provided. Generate.

LUT生成部35で生成された色変換LUTは、主本体制御部34の指示により主データ送受信部37へ出力され、ルータ61およびネットワーク62を通じて副映像変換装置A12の副データ送受信部17へ出力され、副本体制御部14を経由してLUT変換部15のLUTメモリ16に記憶される。
副映像変換装置A12は、主映像変換装置32のLUT生成部35で生成された色変換LUTを使って、LUT変換部15においてカメラA11からのカメラ映像データを色変換することにより、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色をモニタA13で表示することができる。
以上が、本発明の実施の形態1に係る映像変換システム1Aの基本動作である。
The color conversion LUT generated by the LUT generation unit 35 is output to the main data transmission / reception unit 37 in accordance with an instruction from the main body control unit 34, and is output to the sub data transmission / reception unit 17 of the sub video conversion apparatus A12 through the router 61 and the network 62. And stored in the LUT memory 16 of the LUT conversion unit 15 via the sub-body control unit 14.
The sub-video conversion device A12 uses the color conversion LUT generated by the LUT generation unit 35 of the main video conversion device 32 to perform color conversion of the camera video data from the camera A11 in the LUT conversion unit 15, thereby The color reproduced by the digital projector as the final output device can be displayed on the monitor A13.
The above is the basic operation of the video conversion system 1A according to Embodiment 1 of the present invention.

次に、本発明の実施の形態1に係る映像変換システム1Aの色調整動作を簡単に説明する。なお、基本動作と同様の動作は説明を省略する。
最初に、カメラA11によって撮影されたカメラ映像データが、副映像変換装置A12のLMT変換部15において主映像変換装置32より出力された色変換LUTにより色変換され、モニタ映像データとされてモニタA13へ出力され、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色の映像がモニタA13に表示される。
Next, the color adjustment operation of the video conversion system 1A according to Embodiment 1 of the present invention will be briefly described. The description of the same operation as the basic operation is omitted.
First, camera video data photographed by the camera A11 is color-converted by the color conversion LUT output from the main video conversion device 32 in the LMT conversion unit 15 of the sub-video conversion device A12, and is converted into monitor video data to be the monitor A13. The color image reproduced by the digital projector which is the final output device of the movie system is displayed on the monitor A13.

撮影監督等のユーザがモニタA13の映像を確認しつつコントローラ81を操作し、LMT変換部93による色調整のための色調整パラメータを入力する。コントローラ81によって色調整パラメータが入力されると、副映像変換装置A12の副本体制御部14は、コントローラ81によって入力された色調整パラメータを、副データ送受信部17からルータ61およびネットワーク62を通じて主映像変換装置32の主映像データ送信部37へ出力する。
主映像変換装置37は、主本体制御部34の指示に基づいてLUT生成部35のLMT変換部93へコントローラ81によって入力された色調整パラメータを出力し、LUT生成部35は、色調整パラメータを考慮して副映像変換装置AのLUT変換部15において用いられる色変換LUTを生成し直す。
LUT生成部35において色調整パラメータを考慮して生成された新たな色変換LUTは、主本体制御部34の指示に基づいて主データ送受信部37より副本体制御部A12の副データ送受信部17へ出力され、LUT変換部15のLUTメモリ16に記憶される。
A user such as an imaging director operates the controller 81 while confirming the image on the monitor A13, and inputs color adjustment parameters for color adjustment by the LMT conversion unit 93. When the color adjustment parameter is input by the controller 81, the sub-body control unit 14 of the sub-video conversion device A 12 receives the color adjustment parameter input by the controller 81 from the sub-data transmission / reception unit 17 through the router 61 and the network 62. The data is output to the main video data transmission unit 37 of the conversion device 32.
The main video conversion device 37 outputs the color adjustment parameter input by the controller 81 to the LMT conversion unit 93 of the LUT generation unit 35 based on an instruction from the main body control unit 34, and the LUT generation unit 35 outputs the color adjustment parameter. Considering this, the color conversion LUT used in the LUT conversion unit 15 of the sub-picture conversion apparatus A is regenerated.
The new color conversion LUT generated in consideration of the color adjustment parameter in the LUT generation unit 35 is transferred from the main data transmission / reception unit 37 to the sub data transmission / reception unit 17 of the sub main body control unit A12 based on an instruction from the main main body control unit 34. Is output and stored in the LUT memory 16 of the LUT converter 15.

副映像変換装置A12のLUT変換部15は、カメラAからのカメラ映像データをLUTメモリ16に記憶された新たな色変換LUTに基づいてモニタ映像データに変換し、モニタA13へ出力する。
以上が、本発明の実施の形態1に係る映像変換システム1Aの色調整動作である。
なお、主映像変換装置32のLUT生成部35は、コントローラ81により入力された色調整パラメータに基づいて、カメラA11からのカメラ映像データをモニタA13に表示するためのモニタ映像データに変換する色変換LUTを生成すると同時に、カメラC31からのカメラ映像データを、入力された色調整パラメータに基づいてモニタC33に対応するモニタ映像データに直接変換し、モニタC33へリアルタイムに出力してもよく、また、ユーザがモニタA13に表示された色調整後のモニタ映像を確認の後、ユーザによるコントローラ81からの指示によりモニタC33に表示されるモニタ映像データに色調整パラメータを反映し、モニタC33に表示してもよい。
The LUT conversion unit 15 of the sub-video conversion device A12 converts the camera video data from the camera A into monitor video data based on the new color conversion LUT stored in the LUT memory 16, and outputs the monitor video data to the monitor A13.
The above is the color adjustment operation of the video conversion system 1A according to Embodiment 1 of the present invention.
Note that the LUT generation unit 35 of the main video conversion device 32 performs color conversion for converting the camera video data from the camera A11 into monitor video data for display on the monitor A13 based on the color adjustment parameter input by the controller 81. At the same time as generating the LUT, the camera video data from the camera C31 may be directly converted into monitor video data corresponding to the monitor C33 based on the input color adjustment parameters and output to the monitor C33 in real time. After the user confirms the monitor image after color adjustment displayed on the monitor A13, the color adjustment parameter is reflected on the monitor image data displayed on the monitor C33 in accordance with an instruction from the controller 81 by the user and displayed on the monitor C33. Also good.

以上のように、実施の形態1に係る映像変換システムによれば、撮影現場の有するカメラおよびモニタの設置台数に合わせて映像変換システムを安価に構築することができ、撮影現場のいずれのモニタによっても撮影監督等による色調整の影響をリアルタイムに確認することができる。   As described above, according to the video conversion system according to the first embodiment, the video conversion system can be constructed at a low cost in accordance with the number of cameras and monitors installed in the shooting site. In addition, the effect of color adjustment by the director of photography can be confirmed in real time.

実施の形態2
図3は、本発明の実施の形態2に係る映像変換システム1Aの構成の一部を示すブロック図である。なお、実施の形態1と同様の構成は説明を省略する。
実施の形態2に係る映像変換システム1Aは、実施の形態1の構成に加えて、更に、カメラB21に接続される副映像変換装置B22と、副映像変換装置B22に接続されるモニタB23とを備える。副映像変換装置B22は、副映像変換装置A12と同様に、ルータ61およびネットワーク62を通じて主映像変換装置32と接続される。
Embodiment 2
FIG. 3 is a block diagram showing a part of the configuration of the video conversion system 1A according to Embodiment 2 of the present invention. Note that the description of the same configuration as that of Embodiment 1 is omitted.
In addition to the configuration of the first embodiment, the video conversion system 1A according to the second embodiment further includes a sub-video conversion device B22 connected to the camera B21 and a monitor B23 connected to the sub-video conversion device B22. Prepare. The sub-video conversion device B22 is connected to the main video conversion device 32 through the router 61 and the network 62, similarly to the sub-video conversion device A12.

次に、実施の形態2の基本動作について説明する。なお、上述と同様、実施の形態1の基本動作と共通する点は説明を省略する。
副映像変換装置A12と同様に、副映像変換装置B22においても、カメラB21の機種情報および撮影設定情報、カメラB21によるカメラ映像データ、およびモニタB23の色再現情報が主映像変換装置32に出力され、LUT生成部35において副映像変換装置B22対する色変換LUTが生成され、副映像変換装置B22に出力され、LUT変換部25のLUTメモリ26に記憶される。副映像変換装置B22は、カメラB21からのカメラ映像データをLUT変換部25においてLUTメモリ26に記憶された色変換LUTに基づいて色変換を行い、モニタ映像データをモニタB23へ出力する。こうして、モニタB23では、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色の映像を表示することができる。
以上が、本発明の実施の形態2に係る映像変換システム1Aの基本動作である。
Next, the basic operation of the second embodiment will be described. Similar to the above, the description of the points common to the basic operation of the first embodiment will be omitted.
Similarly to the sub-video conversion device A12, the sub-video conversion device B22 also outputs the camera B21 model information and shooting setting information, the camera video data from the camera B21, and the color reproduction information of the monitor B23 to the main video conversion device 32. The LUT generation unit 35 generates a color conversion LUT for the sub video conversion device B 22, outputs the color conversion LUT to the sub video conversion device B 22, and stores it in the LUT memory 26 of the LUT conversion unit 25. The sub-video conversion device B22 performs color conversion on the camera video data from the camera B21 based on the color conversion LUT stored in the LUT memory 26 in the LUT conversion unit 25, and outputs the monitor video data to the monitor B23. In this way, the monitor B23 can display a color image reproduced by a digital projector which is the final output device of the movie system.
The above is the basic operation of the video conversion system 1A according to Embodiment 2 of the present invention.

次に、実施の形態2の色調整動作について説明する。なお、上述と同様、実施の形態1の色調整動作と共通する点は説明を省略する。
例えば、最初に、カメラA11によって撮影されたカメラ映像データが、副映像変換装置A12のLMT変換部15において主映像変換装置32より出力された色変換LUTにより色変換され、モニタ映像データとされてモニタA13へ出力され、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色の映像がモニタA13に表示される。同様に、モニタB23、モニタC33でも映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色の映像が表示される。
Next, the color adjustment operation of the second embodiment will be described. Note that, as described above, the description of the points common to the color adjustment operation of the first embodiment is omitted.
For example, first, camera video data captured by the camera A11 is color-converted by the color conversion LUT output from the main video conversion device 32 in the LMT conversion unit 15 of the sub-video conversion device A12, and is converted into monitor video data. A color image that is output to the monitor A13 and reproduced by a digital projector that is the final output device of the movie system is displayed on the monitor A13. Similarly, the monitor B23 and the monitor C33 also display a color image reproduced by a digital projector that is the final output device of the movie system.

撮影監督等のユーザが、例えば、モニタA13の映像を確認しつつコントローラ81を操作し、LMT変換部93による色調整のための色調整パラメータを入力する。コントローラ81によって色調整パラメータが入力されると、副映像変換装置A12の副本体制御部14は、コントローラ81によって入力された色調整パラメータを、副データ送受信部17からルータ61およびネットワーク62を通じて主映像変換装置32の主映像データ送信部37へ出力する。
主映像変換装置32は、主本体制御部34の指示に基づいてLUT生成部35のLMT変換部93へコントローラ81によって入力された色調整パラメータを出力し、LUT生成部35は、色調整パラメータを考慮して副映像変換装置A12のLUT変換部15および副映像変換装置B22のLUT変換部25において用いられる色変換LUTをそれぞれ生成し直す。
For example, a user such as an imaging director operates the controller 81 while confirming the video on the monitor A13, and inputs color adjustment parameters for color adjustment by the LMT conversion unit 93. When the color adjustment parameter is input by the controller 81, the sub-body control unit 14 of the sub-video conversion device A 12 receives the color adjustment parameter input by the controller 81 from the sub-data transmission / reception unit 17 through the router 61 and the network 62. The data is output to the main video data transmission unit 37 of the conversion device 32.
The main video conversion device 32 outputs the color adjustment parameter input by the controller 81 to the LMT conversion unit 93 of the LUT generation unit 35 based on an instruction from the main body control unit 34, and the LUT generation unit 35 outputs the color adjustment parameter. Considering this, the color conversion LUT used in the LUT conversion unit 15 of the sub-video conversion device A12 and the LUT conversion unit 25 of the sub-video conversion device B22 is regenerated.

LUT生成部35において色調整パラメータを考慮して生成された新たな色変換LUTは、主本体制御部34の指示に基づいて主データ送受信部37より副本体制御部A12および副本体制御部B22へそれぞれ出力され、LUT変換部15のLUTメモリ16およびLUT変換部25のLUTメモリ26にそれぞれ記憶される。   The new color conversion LUT generated in consideration of the color adjustment parameters in the LUT generation unit 35 is sent from the main data transmission / reception unit 37 to the sub-main body control unit A12 and the sub-main body control unit B22 based on an instruction from the main main body control unit 34. These are output and stored in the LUT memory 16 of the LUT converter 15 and the LUT memory 26 of the LUT converter 25, respectively.

副映像変換装置A12のLUT変換部15は、カメラA11からのカメラ映像データをLUTメモリ16に記憶された新たな色変換LUTに基づいてモニタ映像データに変換し、モニタA13へ出力する。また、同様に副映像変換装置B22のLUT変換部25は、カメラB21のカメラ映像データをLUTメモリ26に記憶された新たな色変換LUTに基づいてモニタ映像データに変換し、モニタB23へ出力する。
以上が、本発明の実施の形態2に係る映像変換システム1Aの色調整動作である。
なお、実施の形態2において、主映像変換装置32にルータ61およびネットワーク62を通じて接続される副映像変換装置の数は、特に制限がなく、主映像変換装置32が現実的に対応できる数まで増えてもよく、また、コントローラ81は、副映像変換装置A12に設置されるだけでなく、他の副映像変換装置に設置されてもよく、また、主映像変換装置32に設置されてもよい。
また、上述の記載では、コントローラ81において色調整パラメータが入力されると、副映像変換装置A12、B22、および主映像変換装置32に接続された全てのモニタにおいて色調整がリアルタイムに反映されているが、実施の形態1と同様、ユーザがモニタA13に表示された映像において色調整の影響を確認後、コントローラ81を指示して、全てのモニタに色調整を反映させてもよい。
以上のように、実施の形態2に係る映像変換システムも実施の形態1と同様の効果が得られる。
The LUT conversion unit 15 of the sub-video conversion device A12 converts the camera video data from the camera A11 into monitor video data based on the new color conversion LUT stored in the LUT memory 16, and outputs the monitor video data to the monitor A13. Similarly, the LUT conversion unit 25 of the sub-video conversion device B22 converts the camera video data of the camera B21 into monitor video data based on the new color conversion LUT stored in the LUT memory 26, and outputs it to the monitor B23. .
The above is the color adjustment operation of the video conversion system 1A according to Embodiment 2 of the present invention.
In the second embodiment, the number of sub-video conversion devices connected to the main video conversion device 32 through the router 61 and the network 62 is not particularly limited, and increases to a number that the main video conversion device 32 can practically handle. Further, the controller 81 may be installed not only in the sub-video conversion device A12 but also in another sub-video conversion device, or may be installed in the main video conversion device 32.
In the above description, when the color adjustment parameter is input in the controller 81, the color adjustment is reflected in real time on all the monitors connected to the sub-video conversion devices A12 and B22 and the main video conversion device 32. However, as in the first embodiment, after the user confirms the influence of the color adjustment on the video displayed on the monitor A13, the controller 81 may be instructed to reflect the color adjustment on all the monitors.
As described above, the video conversion system according to the second embodiment can obtain the same effects as those of the first embodiment.

実施の形態3
図4は、本発明の実施の形態3に係る映像変換システム1Bの構成の一部を示すブロック図である。なお、実施の形態1と同様の構成は説明を省略する。
実施の形態3に係る映像変換システム1Bは、主映像変換装置32に直接接続される副映像変換装置C42、D52をそれぞれ備え、副映像変換装置C42には、モニタD43が、副映像変換装置D52には、モニタE53がそれぞれ接続される。
また、コントローラ81は、主映像変換装置32の主本体制御部34に直接接続される。
副映像変換装置A12、B22と同様に、副映像変換装置C42、D52は、LUT変換部45、55をそれぞれ備え、LUT変換部45、55は、それぞれの色変換LUTを記憶するLUTメモリ46、56をそれぞれ備える。また、モニタD43、E53は、それぞれの表示色空間が異なり、色再現情報は異なるが、モニタA13〜C33と同様のものである。
Embodiment 3
FIG. 4 is a block diagram showing a part of the configuration of the video conversion system 1B according to Embodiment 3 of the present invention. Note that the description of the same configuration as that of Embodiment 1 is omitted.
The video conversion system 1B according to Embodiment 3 includes sub-video conversion devices C42 and D52 that are directly connected to the main video conversion device 32. The sub-video conversion device C42 includes a monitor D43 and a sub-video conversion device D52. Are connected to a monitor E53.
Further, the controller 81 is directly connected to the main body control unit 34 of the main video conversion device 32.
Similar to the sub-picture conversion devices A12 and B22, the sub-picture conversion devices C42 and D52 include LUT conversion units 45 and 55, respectively. The LUT conversion units 45 and 55 each include an LUT memory 46 that stores the respective color conversion LUTs, 56 respectively. The monitors D43 and E53 are the same as the monitors A13 to C33, although the display color spaces are different and the color reproduction information is different.

次に、本発明の実施の形態3に係る映像変換システム1Bの基本動作を説明する。
主映像変換装置32は、主本体制御部34の指示に基づいて、カメラC31の機種情報および撮影設定情報、カメラC31によって撮影されたカメラ映像データ、および、モニタC33の色再現情報、ならびに、副映像変換装置C42に接続されたモニタD43の色再現情報および副映像変換装置D52に接続されたモニタE53の色再現情報をそれぞれ取得する。
Next, the basic operation of the video conversion system 1B according to Embodiment 3 of the present invention will be described.
Based on an instruction from the main body control unit 34, the main video conversion device 32 performs the model information and shooting setting information of the camera C31, the camera video data shot by the camera C31, the color reproduction information of the monitor C33, and the sub image information. The color reproduction information of the monitor D43 connected to the video conversion device C42 and the color reproduction information of the monitor E53 connected to the sub-video conversion device D52 are respectively acquired.

主映像変換装置32は、これらの情報に基づいて、LUT生成部35において副映像変換装置C42、D52に対する色変換LUTをそれぞれ生成し、これら色変換LUTを副映像変換装置C42、D52にそれぞれ出力する。なお、ここで主映像変換装置32から副映像変換装置C42、D52へ出力される映像データは、例えば、出力標準色空間DICの映像データであり、主映像変換装置32において生成され、出力されるこれら色変換LUTは、副映像変換装置C42、D52において出力標準色空間DICの映像データを、モニタD43、E53において映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色の映像として表示するためのモニタ映像データにそれぞれ変換する色変換LUTであってもよい。これら色変換LUTは、主映像変換装置32よりLUT変換部45、55へ出力され、LUT変換部45、55のLUTメモリ46、56にそれぞれ記憶される。   Based on these pieces of information, the main video conversion device 32 generates color conversion LUTs for the sub video conversion devices C42 and D52 in the LUT generation unit 35, and outputs these color conversion LUTs to the sub video conversion devices C42 and D52, respectively. To do. Here, the video data output from the main video conversion device 32 to the sub-video conversion devices C42 and D52 is, for example, video data in the output standard color space DIC, and is generated and output in the main video conversion device 32. These color conversion LUTs display the video data of the output standard color space DIC in the sub-video conversion devices C42 and D52 as the video of the color reproduced by the digital projector which is the final output device of the movie system on the monitors D43 and E53. It may be a color conversion LUT that converts the monitor image data into the monitor image data. These color conversion LUTs are output from the main video conversion device 32 to the LUT conversion units 45 and 55 and stored in the LUT memories 46 and 56 of the LUT conversion units 45 and 55, respectively.

副映像変換装置C42、52は、主映像変換装置32から出力標準色空間DICの映像データを取得し、LUT変換部45、55においてLUTメモリ46、56に記憶された色変換LUTに基づいてそれぞれ色変換を行い、モニタ映像データ生成して、これらモニタ映像データをモニタD43、E53へそれぞれ出力する。こうして、モニタD43、E53では、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色の映像を表示することができる。
以上が、本発明の実施の形態3に係る映像変換システム1Bの基本動作である。
The sub-video conversion devices C42 and 52 obtain the video data of the output standard color space DIC from the main video conversion device 32, and based on the color conversion LUT stored in the LUT memories 46 and 56 in the LUT conversion units 45 and 55, respectively. Color conversion is performed to generate monitor video data, and these monitor video data are output to the monitors D43 and E53, respectively. In this way, the monitors D43 and E53 can display the color image reproduced by the digital projector which is the final output device of the movie system.
The above is the basic operation of the video conversion system 1B according to Embodiment 3 of the present invention.

次に、実施の形態3の色調整動作について説明する。なお、上述と同様、実施の形態1の色調整動作と共通する点は説明を省略する。
最初に、カメラC31によって撮影されたカメラ映像データが、主映像変換装置32のLMT生成部35において色変換され、モニタ映像データとされてモニタC33へ出力され、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色の映像がモニタC33に表示される。
また、カメラC31によって撮影されたカメラ映像データが、主本体制御部34の指示によりLMT生成部35において出力標準色空間DICの映像データとされ、主データ送受信部37を通じて副映像変換装置C42、D52にそれぞれ出力され、また、副映像変換装置C42、D52のLUT変換部45、55においてそれぞれ色変換され、モニタD53、モニタC23のそれぞれにおいて、映画システムの最終出力デバイスであるデジタルプロジェクタで再現される色の映像が表示される。
Next, the color adjustment operation of the third embodiment will be described. Note that, as described above, the description of the points common to the color adjustment operation of the first embodiment is omitted.
First, the camera video data photographed by the camera C31 is color-converted by the LMT generator 35 of the main video conversion device 32, converted into monitor video data and output to the monitor C33, and is the final output device of the movie system. The color image reproduced by the projector is displayed on the monitor C33.
Further, the camera video data captured by the camera C31 is converted into video data in the output standard color space DIC in the LMT generation unit 35 according to an instruction from the main body control unit 34, and the sub video conversion devices C42 and D52 are transmitted through the main data transmission / reception unit 37. Are also respectively converted by the LUT converters 45 and 55 of the sub-picture converters C42 and D52, and reproduced by the digital projector which is the final output device of the movie system on each of the monitors D53 and C23. Color images are displayed.

次に、撮影監督等のユーザが、例えば、モニタD53の映像を確認しつつコントローラ81を操作し、LMT変換部93による色調整のための色調整パラメータを入力する。コントローラ81によって色調整パラメータが入力されると、主映像変換装置32は、主本体制御部34の指示に基づいてLUT生成部35のLMT変換部93へコントローラ81によって入力された色調整パラメータを出力し、LUT生成部35は、色調整パラメータを考慮して出力標準色空間DICの映像データを新たに生成する。   Next, a user such as an imaging director operates the controller 81 while confirming an image on the monitor D53, for example, and inputs color adjustment parameters for color adjustment by the LMT conversion unit 93. When the color adjustment parameter is input by the controller 81, the main video conversion device 32 outputs the color adjustment parameter input by the controller 81 to the LMT conversion unit 93 of the LUT generation unit 35 based on an instruction from the main body control unit 34. The LUT generation unit 35 newly generates video data of the output standard color space DIC in consideration of the color adjustment parameter.

LUT生成部35において色調整パラメータを考慮して新たに生成された出力標準色空間DICの映像データは、主本体制御部34の指示に基づいて主データ送受信部37より副本体制御部C42、D52へそれぞれ出力される。   The video data of the output standard color space DIC newly generated in consideration of the color adjustment parameters in the LUT generation unit 35 is sub-main body control units C42 and D52 from the main data transmission / reception unit 37 based on an instruction from the main main body control unit 34. Are output respectively.

副映像変換装置C42、D52のLUT変換部45、55は、新たに生成された出力標準色空間DICの映像データをLUTメモリ46、56に記憶された色変換LUTに基づいてモニタ映像データにそれぞれ変換し、モニタD43、E53へそれぞれ出力する。
以上が、本発明の実施の形態2に係る映像変換システム1Aの色調整動作である。
また、上述の記載では、コントローラ81において色調整パラメータが入力されると、副映像変換装置C42、D52、および主映像変換装置32に接続された全てのモニタにおいて色調整がリアルタイムに反映されているが、実施の形態1、2と同様、ユーザがモニタC33に表示された映像において色調整の影響を確認後、コントローラ81を指示して、全てのモニタに色調整を反映させてもよい。
以上のように、実施の形態3に係る映像変換システムも実施の形態1、2と同様の効果が得られる。
The LUT converters 45 and 55 of the sub-video converters C42 and D52 convert the newly generated video data of the output standard color space DIC into monitor video data based on the color conversion LUT stored in the LUT memories 46 and 56, respectively. Converted and output to the monitors D43 and E53, respectively.
The above is the color adjustment operation of the video conversion system 1A according to Embodiment 2 of the present invention.
Further, in the above description, when the color adjustment parameter is input in the controller 81, the color adjustment is reflected in real time on all the monitors connected to the sub-video conversion devices C42 and D52 and the main video conversion device 32. However, as in the first and second embodiments, after the user confirms the influence of the color adjustment on the video displayed on the monitor C33, the controller 81 may be instructed to reflect the color adjustment on all monitors.
As described above, the video conversion system according to the third embodiment can obtain the same effects as those of the first and second embodiments.

実施の形態4
図5は、本発明の実施の形態4に係る映像変換システム1A、1Bを含む撮影・編集システムを示すブロック図である。なお、実施の形態1と同様の構成は説明を省略する。
実施の形態4に係る映像変換システム1A、1Bは、携帯記憶装置72を備え、また、携帯記憶装置72は、撮影中または撮影終了後において、LUT生成サーバ4に接続され、LUT生成サーバ4は、編集システム3に関わる種々の編集機器に接続される。
携帯記憶装置72は、USBメモリや外付けHDD等であり、比較的大容量のデータを記憶することができる。携帯記憶装置72は、主映像変換装置32の指示により、カメラの機種情報、撮影シーン毎の撮影設定情報、映像データの色調整を行う色調整パラメータおよび編集情報ファイル等を記憶する。
Embodiment 4
FIG. 5 is a block diagram showing a photographing / editing system including video conversion systems 1A and 1B according to Embodiment 4 of the present invention. Note that the description of the same configuration as that of Embodiment 1 is omitted.
The video conversion systems 1A and 1B according to the fourth embodiment include a portable storage device 72. The portable storage device 72 is connected to the LUT generation server 4 during or after shooting, and the LUT generation server 4 is These are connected to various editing devices related to the editing system 3.
The portable storage device 72 is a USB memory, an external HDD, or the like, and can store a relatively large amount of data. The portable storage device 72 stores camera model information, shooting setting information for each shooting scene, color adjustment parameters for color adjustment of video data, an editing information file, and the like according to instructions from the main video conversion device 32.

また、LUT生成サーバ4は、携帯記憶装置72からカメラの機種情報、撮影シーン毎の撮影設定情報、映像データの色調整を行う色調整パラメータおよび編集情報ファイル等を取得し、編集システム3に関わる各種編集機器の要求に基づいて色変換LUTを生成し、編集情報ファイル等とともに編集システム3へ出力する。編集システム3は、LUT生成サーバ4から色変換LUTおよび編集情報ファイル等を取得し、撮影映像記憶装置70より予めカメラ映像データを取得して、例えば撮影シーン毎に、色変換LUTに基づいてカメラ映像データの色変換を行う。なお、編集情報ファイルは、撮影システム2の映像変換システム1A、1Bから編集システム3へ直接出力されてもよい。   Further, the LUT generation server 4 acquires camera model information, shooting setting information for each shooting scene, color adjustment parameters for adjusting the color of video data, an editing information file, and the like from the portable storage device 72 and relates to the editing system 3. A color conversion LUT is generated based on requests from various editing devices, and is output to the editing system 3 together with an editing information file and the like. The editing system 3 acquires a color conversion LUT, an editing information file, and the like from the LUT generation server 4 and acquires camera video data from the captured video storage device 70 in advance, for example, for each shooting scene based on the color conversion LUT. Perform color conversion of video data. The editing information file may be directly output from the video conversion systems 1A and 1B of the photographing system 2 to the editing system 3.

次に、本発明の実施の形態4に係る映像変換システム1A、1Bの動作を説明する。
主映像変換装置32は、主本体制御部34の指示により主データ送受信部37より、カメラの機種情報、撮影シーン毎の撮影設定情報、映像データの色調整を行う色調整パラメータおよび編集情報ファイル等を携帯記憶装置72に出力する。なお、カメラの機種情報および撮影シーン毎の撮影設定情報は、カメラ映像データが撮影されたカメラの情報であり、カメラ映像データは、カメラC31によって撮影されたものでもよく、また、図示しないカメラA11、B21等によって撮影されたものでもよい。
携帯記憶装置72は、LUT生成サーバ4に接続され、カメラの機種情報、撮影シーン毎の撮影設定情報、映像データの色調整を行う色調整パラメータがLUT生成サーバ4へ出力される。
LUT生成サーバ4は、カメラの機種情報、撮影シーン毎の撮影設定情報、映像データの色調整を行う色調整パラメータ、ならびに編集システム3からの要求とに基づいて色変換LUTを生成し、編集システム3へ出力する。編集システム3は、撮影映像記憶装置70から予め取得したカメラ映像データを色変換LUTに基づいて色変換し、撮影現場における最終出力デバイスの映像の色再現を行うとともに、色再現のなされた映像データに対して各種編集を行う。
Next, the operation of the video conversion systems 1A and 1B according to Embodiment 4 of the present invention will be described.
The main video conversion device 32 receives camera model information, shooting setting information for each shooting scene, color adjustment parameters for adjusting color of video data, an editing information file, and the like from the main data transmission / reception unit 37 in response to an instruction from the main body control unit 34. Is output to the portable storage device 72. The camera model information and the shooting setting information for each shooting scene are information on the camera from which the camera video data was shot. The camera video data may have been shot by the camera C31, and the camera A11 (not shown). , B21 or the like may be used.
The portable storage device 72 is connected to the LUT generation server 4 and outputs to the LUT generation server 4 camera model information, shooting setting information for each shooting scene, and color adjustment parameters for color adjustment of video data.
The LUT generation server 4 generates a color conversion LUT based on camera model information, shooting setting information for each shooting scene, color adjustment parameters for color adjustment of video data, and a request from the editing system 3, and the editing system. Output to 3. The editing system 3 performs color conversion on the camera video data acquired in advance from the captured video storage device 70 based on the color conversion LUT, reproduces the color of the video of the final output device at the shooting site, and reproduces the video data that has undergone color reproduction. Various edits are made to.

以上のように、実施の形態4に係る映像変換システム1A、1Bを含む撮影・編集システムによれば、撮影現場における色調整、色変換を撮影終了後の編集工程において再現できるため、カメラ映像データの撮影後の色再現、色調整等を大幅に削減することができ、編集作業を効率化できる。   As described above, according to the photographing / editing system including the video conversion systems 1A and 1B according to the fourth embodiment, the color adjustment and color conversion at the photographing site can be reproduced in the editing process after the photographing is completed. The color reproduction and color adjustment after shooting can be greatly reduced, and the editing work can be made more efficient.

実施の形態5
図6は、本発明の実施の形態5に係るLUT生成サーバ4の構成を示すブロック図である。
図6に示すように、LUT生成サーバ4は、データ受信部131と、データ受信部131に接続されるLUT生成部132、データ受信部131およびLUT生成部132に接続されるデータ送信部133を備え、また、データ受信部131、LUT生成部132およびデータ送信部133のそれぞれに接続される内部メモリ134を備える。また、また、データ受信部131、LUT生成部132、データ送信部133および内部メモリ134のそれぞれに接続される制御部135を備える。
Embodiment 5
FIG. 6 is a block diagram showing a configuration of the LUT generation server 4 according to the fifth embodiment of the present invention.
As illustrated in FIG. 6, the LUT generation server 4 includes a data reception unit 131, an LUT generation unit 132 connected to the data reception unit 131, a data reception unit 131, and a data transmission unit 133 connected to the LUT generation unit 132. And an internal memory 134 connected to each of the data reception unit 131, the LUT generation unit 132, and the data transmission unit 133. In addition, a control unit 135 connected to each of the data reception unit 131, the LUT generation unit 132, the data transmission unit 133, and the internal memory 134 is provided.

データ受信部131は、映像変換システム1A、1Bから撮影シーン毎のカメラの機種情報、撮影設定情報および映像データの色調整を行う色調整パラメータを含む色処理の情報である色処理パラメータを取得し、また、編集システム3からの色変換LUTの生成の指示を受け、編集システム3から編集システム3を構成する映像編集機器の出力色空間の情報を取得する。
LUT生成部132は、映像変換システム1A、1Bにおける主映像変換装置32のLUT生成部35と同様の構成であり、色処理パラメータと、上述の映像編集機器の出力色空間の情報とに基づいて色変換LUTを生成する。
The data receiving unit 131 acquires color processing parameters, which are color processing information including the camera model information, shooting setting information, and color adjustment parameters for color adjustment of video data, from the video conversion systems 1A and 1B. In addition, in response to an instruction to generate a color conversion LUT from the editing system 3, information on the output color space of the video editing device constituting the editing system 3 is acquired from the editing system 3.
The LUT generation unit 132 has the same configuration as the LUT generation unit 35 of the main video conversion device 32 in the video conversion systems 1A and 1B, and is based on the color processing parameters and the information on the output color space of the video editing device described above. A color conversion LUT is generated.

データ送信部133は、色変換LUTの生成の指示を出した編集システム3の映像編集機器へ、生成された色変換LUTを出力する。
内部メモリ134は、データ受信部131の受信した色処理パラメータや映像編集機器の出力色空間の情報を含む受信データ、LUT生成部が生成した色変換LUTを記憶する。
The data transmission unit 133 outputs the generated color conversion LUT to the video editing device of the editing system 3 that has instructed the generation of the color conversion LUT.
The internal memory 134 stores received data including color processing parameters received by the data receiving unit 131 and information on the output color space of the video editing device, and a color conversion LUT generated by the LUT generating unit.

制御部135は、データ受信部131、LUT生成部132、データ送信部133および内部メモリ134のそれぞれを制御し、例えば、各部におけるデータの入出力、データ受信部131およびデータ送信部133における外部とのデータの送受信、内部メモリ134におけるデータの入出力などを制御する。   The control unit 135 controls each of the data reception unit 131, the LUT generation unit 132, the data transmission unit 133, and the internal memory 134. For example, the input / output of data in each unit, the external in the data reception unit 131 and the data transmission unit 133, Data transmission / reception, and data input / output in the internal memory 134 are controlled.

次に、実施の形態5に係るLUT生成サーバ4の動作を説明する。
LUT生成サーバ4は、制御部135の指示に基づいて、データ受信部131において、映像変換システム1A、1Bから色処理パラメータを取得し、また、編集システム3から色変換LUTの生成要請を受け、編集システム3から編集システム3の映像編集機器の出力色空間の情報を取得する。データ受信部131で取得された色処理パラメータ、映像編集機器の出力色空間の情報は、LUT生成部132および内部メモリ134へそれぞれ出力される。
Next, the operation of the LUT generation server 4 according to the fifth embodiment will be described.
The LUT generation server 4 acquires color processing parameters from the video conversion systems 1A and 1B in the data reception unit 131 based on an instruction from the control unit 135, and receives a color conversion LUT generation request from the editing system 3, Information on the output color space of the video editing device of the editing system 3 is acquired from the editing system 3. The color processing parameters acquired by the data receiving unit 131 and the information on the output color space of the video editing device are output to the LUT generating unit 132 and the internal memory 134, respectively.

LUT生成部132は、制御部135の指示により、データ受信部131または内部メモリ134から出力された色処理パラメータと映像編集機器の出力色空間の情報とに基づいて、色変換LUTを生成する。生成された色変換LUTは、撮影システム2の映像編集機器において、カメラ映像データを、色調整が反映され最終出力デバイスの映像の色再現のなされた映像データに変換するものである。生成された色変換LUTは、制御部135の指示により、データ送信部133に出力され、また、内部メモリ134に記憶される。
データ送信部133は、制御部135の指示により、LUT生成部132で生成された色変換LUTを取得し、色変換LUTの生成要請を出した編集システム3の映像編集機器へ、色変換LUTを出力する。
The LUT generation unit 132 generates a color conversion LUT based on the color processing parameters output from the data reception unit 131 or the internal memory 134 and information on the output color space of the video editing device, according to an instruction from the control unit 135. The generated color conversion LUT is used to convert camera video data into video data in which color adjustment is reflected and color reproduction of the video of the final output device is performed in the video editing device of the photographing system 2. The generated color conversion LUT is output to the data transmission unit 133 according to an instruction from the control unit 135 and stored in the internal memory 134.
In response to an instruction from the control unit 135, the data transmission unit 133 acquires the color conversion LUT generated by the LUT generation unit 132, and sends the color conversion LUT to the video editing device of the editing system 3 that has issued the color conversion LUT generation request. Output.

以上のように、実施の形態5に係るLUT生成サーバ4を備える撮影・編集システムによれば、撮影現場における色調整、色変換を撮影終了後の編集工程において再現できるため、カメラ映像データの撮影後の色再現、色調整等を大幅に削減することができ、編集作業を効率化できる。   As described above, according to the photographing / editing system including the LUT generation server 4 according to the fifth embodiment, it is possible to reproduce the color adjustment and color conversion at the photographing site in the editing process after the photographing. Subsequent color reproduction, color adjustment, etc. can be greatly reduced, and editing work can be made more efficient.

また、実施の形態5のLUT生成サーバ4において、内部メモリ134は、撮影システム2において上述の色処理パラメータを複数記憶し、編集システム3を構成する各種映像編集機器の出力色空間の情報複数記憶し、また、制御部135は、上述のとおり内部メモリ134に記憶された複数の色処理パラメータと複数の出力色空間の情報とを管理するものであり、制御部13は、LUT生成サーバ4に接続された編集システム3の映像編集機器の指示により、これらを組み合わせて複数の色変換LUTを生成し、出力してもよい。   In the LUT generation server 4 according to the fifth embodiment, the internal memory 134 stores a plurality of the above-described color processing parameters in the photographing system 2 and stores a plurality of pieces of information on output color spaces of various video editing devices constituting the editing system 3. In addition, the control unit 135 manages a plurality of color processing parameters and information on a plurality of output color spaces stored in the internal memory 134 as described above, and the control unit 13 stores the information in the LUT generation server 4. A plurality of color conversion LUTs may be generated and output by combining them according to instructions from the video editing device of the connected editing system 3.

また、実施の形態5のLUT生成サーバ4では、上述のとおり、出力先である編集システム3の各種映像編集機器に対応した複数の出力色空間の情報が上述の色処理パラメータ等とともに内部メモリ134で記憶・管理されており、出力色空間の情報が、図示しないコントローラによって、制御部135を通じて指定されてもよい。
図示しないコントローラによって出力色空間の情報が指定された場合、上述の出力色空間の情報が取得された場合と同様に、色処理パラメータおよび指定された出力色空間の情報に基づいて色変換LUTが生成され、編集システム3の映像編集機器へ出力される。
編集システム3の映像編集機器において、撮影シーンに対応した色変換LUTに限らず、複数の色変換LUTによる色変換を試す場合に有効である。
Further, in the LUT generation server 4 of the fifth embodiment, as described above, information on a plurality of output color spaces corresponding to various video editing devices of the editing system 3 that is an output destination is stored in the internal memory 134 together with the color processing parameters described above. The output color space information may be specified through the controller 135 by a controller (not shown).
When the output color space information is specified by a controller (not shown), the color conversion LUT is based on the color processing parameters and the specified output color space information in the same manner as when the output color space information is acquired. It is generated and output to the video editing device of the editing system 3.
This is effective when the video editing device of the editing system 3 tries color conversion using a plurality of color conversion LUTs as well as the color conversion LUT corresponding to the shooting scene.

また、実施の形態5のLUT生成サーバ4において、映像変換システム1A、1Bより取得される色処理パラメータは、カメラの機種特性の除去、色調整を含む最終出力デバイスに対応した入力共通色空間から出力共通色空間への色変換、および確認用表示デバイスの機種特性に応じた色変換からなる映像データの色処理の情報であり、上述のとおり、撮影シーン毎のカメラの機種情報、撮影設定情報および映像データの色調整を行う色調整パラメータを含むものである。
また、実施の形態5のLUT生成サーバ4において、色処理パラメータは、撮影シーン毎に変更されたものであり、編集情報ファイルのシーン番号およびシーンに対応したカメラのタイムコードと関連付けられて記憶・管理されてもよい。
よって、LUT生成サーバ4において生成された色変換LUTは、シーン番号およびシーンに対応したカメラのタイムコードに対応して生成されたものであり、編集システム3の映像編集機器において、編集情報ファイルとともに用いられ、生の映像データに対して対応する色変換LUTを適用することで、適切な色再現を行うことができる。
In the LUT generation server 4 according to the fifth embodiment, the color processing parameters acquired from the video conversion systems 1A and 1B are obtained from the input common color space corresponding to the final output device including removal of camera model characteristics and color adjustment. Color processing information of video data consisting of color conversion to the output common color space and color conversion according to the model characteristics of the display device for confirmation. As described above, camera model information and shooting setting information for each shooting scene And color adjustment parameters for adjusting the color of the video data.
In the LUT generation server 4 according to the fifth embodiment, the color processing parameters are changed for each shooting scene, and are stored in association with the scene number of the editing information file and the time code of the camera corresponding to the scene. It may be managed.
Therefore, the color conversion LUT generated in the LUT generation server 4 is generated corresponding to the scene number and the time code of the camera corresponding to the scene, and is edited together with the editing information file in the video editing device of the editing system 3. Appropriate color reproduction can be performed by applying a corresponding color conversion LUT to raw video data.

また、実施の形態5のLUT生成サーバ4は、データ受信部131において、映像変換システム1A、1Bから色処理パラメータを受信する際に、色処理パラメータに関連付けられた撮影シーンの静止画像データ(つまり、対応する撮影シーンの静止画像データ)を取得し、色処理パラメータまたは、色処理パラメータによって生成された色変換LUTとともに内部メモリ134に記憶し、また、データ送信部133より、色変換LUTとともに編集システム3の映像編集機器へ出力してもよい。
また、データ受信部131において色処理パラメータとともに受信され、また、色変換LUTとともに出力される上述の撮影シーンの静止画像データは、映像変換システム1A、1Bでの色調整後の静止画像データだけでなく、色調整前の静止画像データおよび色調整後の静止画像データの2種類の静止画像データであってもよい。
ユーザは編集システム3の映像編集機器において、生の映像データの色変換の前に、撮影シーンに対応した色変換LUTが反映され、色変換のなされた静止画像を確認することができ、また、色調整前の静止画像と色調整後の静止画像とを比較することで、色変換LUTによる色変換の影響を検証することができる。
Further, when the LUT generation server 4 of the fifth embodiment receives the color processing parameters from the video conversion systems 1A and 1B in the data receiving unit 131, the still image data of the shooting scene associated with the color processing parameters (that is, the image processing systems 1A and 1B). , Still image data of the corresponding shooting scene) is acquired, stored in the internal memory 134 together with the color processing parameters or the color conversion LUT generated by the color processing parameters, and edited together with the color conversion LUT from the data transmission unit 133 You may output to the video editing apparatus of the system 3.
In addition, the still image data of the above-described shooting scene received together with the color processing parameter in the data receiving unit 131 and output together with the color conversion LUT is only the still image data after color adjustment in the video conversion systems 1A and 1B. There may be two types of still image data: still image data before color adjustment and still image data after color adjustment.
The user can check the color-converted still image in the video editing device of the editing system 3 by reflecting the color conversion LUT corresponding to the shooting scene before color conversion of the raw video data. By comparing the still image before color adjustment with the still image after color adjustment, the effect of color conversion by the color conversion LUT can be verified.

また、実施の形態5のLUT生成サーバ4は、データ受信部131において、映像変換システム1A、1Bから色処理パラメータを受信する際に、色処理パラメータに関連付けられた撮影シーンの撮影時に入力されたコメントを取得し、色処理パラメータまたは、色処理パラメータによって生成された色変換LUTとともに内部メモリ134に記憶し、また、データ送信部133より、色変換LUTとともに編集システム3の映像編集機器へ出力してもよい。
編集システム3の映像編集機器において、撮影時のコメントを確認することで、シーン毎の監督の撮影意図を把握することができる。
Further, when the LUT generation server 4 according to the fifth embodiment receives the color processing parameters from the video conversion systems 1A and 1B in the data receiving unit 131, the LUT generation server 4 is input at the time of shooting the shooting scene associated with the color processing parameters. The comment is acquired and stored in the internal memory 134 together with the color processing parameter or the color conversion LUT generated by the color processing parameter, and is output from the data transmission unit 133 to the video editing device of the editing system 3 together with the color conversion LUT. May be.
In the video editing device of the editing system 3, by confirming a comment at the time of shooting, it is possible to grasp the director's shooting intention for each scene.

また、実施の形態5に係るLUT生成サーバ4は、外部から接続される際に、パスワード認証を行ってもよい。
例えば、LUT生成サーバ4が、外部のクライアントである映像変換システム1A、1Bに接続された場合、データ受信部131は制御部135からの指示によりデータ送信部133を通じて映像変換システム1A、1Bへパスワードの入力要求を出力する。
Further, the LUT generation server 4 according to the fifth embodiment may perform password authentication when connected from the outside.
For example, when the LUT generation server 4 is connected to the video conversion systems 1A and 1B which are external clients, the data reception unit 131 passwords the video conversion systems 1A and 1B through the data transmission unit 133 according to an instruction from the control unit 135. Output the input request.

データ受信部131は、映像変換システム1A、1Bからのパスワードの入力を受け、制御部135の指示に基づいて、パスワードの認証を行う。具体的には、データ受信部131が、内部メモリ134に記録されたパスワードを制御部135を通じて取得し、また、入力されたパスワードとの一致・不一致を判定する。
データ受信部131は、入力されたパスワードが記録されたパスワードと一致した場合には、データ送信部133を通じて映像変換システム1A、1Bへ色処理パラメータの出力指示を出し、入力されたパスワードが記録されたパスワードと一致しない場合には、データ送信部133を通じて映像変換システム1A、1Bへパスワード不一致を通知し、映像変換システム1A、1BとLUT生成サーバ4との接続を遮断する。
The data receiving unit 131 receives passwords from the video conversion systems 1A and 1B, and performs password authentication based on instructions from the control unit 135. Specifically, the data receiving unit 131 acquires the password recorded in the internal memory 134 through the control unit 135, and determines whether the input password matches or does not match.
When the input password matches the recorded password, the data receiving unit 131 issues a color processing parameter output instruction to the video conversion systems 1A and 1B through the data transmission unit 133, and the input password is recorded. If the password does not match, the data transmission unit 133 notifies the video conversion systems 1A and 1B of the password mismatch, and the connection between the video conversion systems 1A and 1B and the LUT generation server 4 is cut off.

入力されたパスワードが記録されたパスワードと一致した場合、データ受信部131は、制御部135の指示に基づいて、映像変換システム1A、1Bから色処理パラメータを受信する。
なお、編集システム3の映像編集機器から映像編集機器の出力色空間の情報を取得する場合も同様である。すなわち、色変換LUTの生成要請を受けた際に、映像編集機器へパスワードの入力を求め、パスワードが一致した場合に、映像編集機器の出力色空間の情報を取得し、パスワードが一致しない場合には、パスワードの不一致を通知し、映像編集機器とLUT生成サーバ4との接続を遮断する。
上述のとおりパスワード認証を行うことで、不正ユーザによる色変換LUTの取得を防ぐことができる。
If the input password matches the recorded password, the data receiving unit 131 receives color processing parameters from the video conversion systems 1A and 1B based on an instruction from the control unit 135.
The same applies to the case where the output color space information of the video editing device is acquired from the video editing device of the editing system 3. That is, when a request for generating a color conversion LUT is received, a password input is requested to the video editing device, and when the password matches, information on the output color space of the video editing device is acquired, and the password does not match Notifies the mismatch of the password, and cuts off the connection between the video editing device and the LUT generation server 4.
By performing password authentication as described above, acquisition of the color conversion LUT by an unauthorized user can be prevented.

なお、実施の形態5に係るLUT生成サーバ4は、本発明の映像変換システム1A、1Bの主映像変換装置32と同様にLUT生成部132を備えるため、図示しない確認用表示デバイスを接続し、撮影映像記憶装置70等の映像記憶装置からカメラ映像データを取得することで、図示しないコントローラによって、本発明の映像変換システム1A、1Bと同様に、色調整を行うことができる。また、実施の形態5に係るLUT生成サーバ4は、上述のとおり、本発明の映像変換システム1A、1Bの主映像変換装置32と同様にLUT生成部132を備えるため、主映像変換装置32において可能な動作の全てを行うことができる。   Since the LUT generation server 4 according to the fifth embodiment includes the LUT generation unit 132 similarly to the main video conversion device 32 of the video conversion systems 1A and 1B of the present invention, a confirmation display device (not shown) is connected, By acquiring camera video data from a video storage device such as the photographed video storage device 70, color adjustment can be performed by a controller (not shown) as in the video conversion systems 1A and 1B of the present invention. Further, as described above, the LUT generation server 4 according to the fifth embodiment includes the LUT generation unit 132 similarly to the main video conversion device 32 of the video conversion systems 1A and 1B of the present invention. All possible actions can be performed.

以上、本発明の映像変換システム、撮影システムおよびLUT生成サーバについて詳細に説明したが、本発明は、上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、各種の改良や変更を行ってもよい。   As described above, the video conversion system, the photographing system, and the LUT generation server of the present invention have been described in detail. However, the present invention is not limited to the above embodiment, and various improvements can be made without departing from the gist of the present invention. And changes may be made.

1A、1B 映像変換システム、 2 撮影システム、 3 編集システム、 4 ルックアップテーブル生成サーバ(LUT生成サーバ)、 11 カメラA、 12 副映像変換装置A、 13 モニタA、 14 副本体制御部、 15 ルックアップテーブル変換部、 16 LUTメモリ、 17 副データ送受信部、 21 カメラB、 22 副映像変換装置B、 23 モニタB、 31 カメラC、 32 主映像変換装置、 33 モニタC、 34 主本体制御部、 35 ルックアップテーブル生成部(LUT生成部)、 37 主データ送受信部、 42 副映像変換装置C、 43 モニタD、 52 副映像変換装置D、 53 モニタE、 61 ルータ、 62 ネットワーク、 70 撮影映像記憶装置、 71 編集加工映像記憶装置、 72 携帯記憶装置、 81 コントローラ、 91 IDT変換部、 92 カメラキャリブレーション部、 93 LMT変換部、 94 レンダリング変換部、 95 モニタ・色空間変換部、 96 モニタキャリブレーション部、 100 入力色空間ACES(Academy Color Encoding Specification)、 102 出力色空間OCES(Output Color Encoding Specification)、 104 共通変換RRT(Reference Rendering Transform)、 106 入力デバイス変換IDT(Input Device Transform)、 108 出力デバイス変換ODT(Output Device Transform)、 110 デジタルカメラ、 112 デジタルプロジェクタ、 114 コンピュータグラフィックス、 116 APD(AMPAS Printing Density)、 118 ADX、 120 UB変換/逆変換、 122 フィルムスキャナ、 124 フィルムレコーダ、 126 インターネガ、 128 光学プリント、 130 フィルムプロジェクタ、 131 データ受信部、 132 LUT生成部、 133 データ送信部、 134 内部メモリ、 135 制御部。   1A, 1B video conversion system, 2 shooting system, 3 editing system, 4 lookup table generation server (LUT generation server), 11 camera A, 12 sub-video conversion device A, 13 monitor A, 14 sub-body control unit, 15 look Up table conversion unit, 16 LUT memory, 17 Sub data transmission / reception unit, 21 Camera B, 22 Sub video conversion device B, 23 Monitor B, 31 Camera C, 32 Main video conversion device, 33 Monitor C, 34 Main body control unit, 35 Look-up table generation unit (LUT generation unit), 37 Main data transmission / reception unit, 42 Sub-image conversion device C, 43 Monitor D, 52 Sub-image conversion device D, 53 Monitor E, 61 Router, 62 Network, 70 Shooting image storage Device, 71 editing and processing video storage device, 7 2 portable storage device, 81 controller, 91 IDT conversion unit, 92 camera calibration unit, 93 LMT conversion unit, 94 rendering conversion unit, 95 monitor / color space conversion unit, 96 monitor calibration unit, 100 input color space ACES (Academy Color Encoding Specification (102), Output Color Space OCES (Output Color Encoding Specification), 104 Common RTR (Reference Rendering Transform), 106 Input Device Transform (IDT), 108 Output Device Transform ODT (Output Device Transform), 110 Digital camera, 112 digital projector, 114 computer graphics, 116 APD (AMPAS Printing Density), 118 ADX, 120 UB conversion / inverse conversion, 122 film scanner, 124 film recorder, 126 internal negative, 128 optical print, 130 film projector, 131 data receiving unit, 132 LUT generation unit, 133 data transmission unit, 134 internal memory, 135 control unit.

Claims (18)

カメラで撮影されたカメラ映像データから映写用画像を作成する映画システムで、前記カメラによる撮影が行われる撮影システムに用いられる、映像変換システムであって、
前記映像変換システムは、主映像変換装置と、前記主映像変換装置と相互に接続される少なくとも1つの副映像変換装置と、前記主映像変換装置および前記副映像変換装置の少なくとも一方に接続されるコントローラとからなり、
前記コントローラには、映像の最終出力となる最終出力デバイスの色を事前に異なる表示デバイスで確認させるための確認用表示デバイスの色空間に応じて設定される色再現情報が入力され、
前記副映像変換装置は、
前記カメラ映像データおよび前記カメラの機種情報および撮影設定情報をそれぞれ取得し、前記コントローラにおいて入力された前記確認用表示デバイスの色再現情報を取得する情報取得部と、
前記情報取得部が取得した前記カメラ映像データ、前記カメラの機種情報および撮影設定情報、ならびに前記確認用表示デバイスの色再現情報を前記主映像変換装置へ出力して、前記主映像変換装置からこれらに対応した色変換ルックアップテーブルを取得する副データ送受信部と、
前記副データ送受信部が取得した前記色変換ルックアップテーブルに基づいて前記カメラ映像データを前記確認用表示デバイスの色空間に変換して前記確認用表示デバイスの色空間の映像データを求めるルックアップテーブル変換部とを備え、
前記主映像変換装置は、
前記副映像変換装置から前記カメラ映像データ、前記カメラの機種情報および撮影設定情報、ならびに前記確認用デバイスの色再現情報を取得し、これらに対応した前記色変換ルックアップテーブルを前記副映像変換装置へ出力する主データ送受信部と、
前記主データ送受信部が取得した前記カメラ映像データ、前記カメラの機種情報および撮影設定情報、ならびに前記確認用デバイスの色再現情報からこれらに対応した前記色変換ルックアップテーブルを生成し、前記主データ送受信部へ出力する色変換ルックアップテーブル生成部とを備え、
前記副映像変換装置の前記ルックアップテーブル変換部は、前記主映像変換装置の前記色変換ルックアップテーブル生成部において生成された前記色変換ルックアップテーブルを用いて前記カメラ映像データを前記確認用表示デバイスの色空間の映像データに変換することを特徴とする映像変換システム。
A movie system that creates a projection image from camera video data shot by a camera, and is a video conversion system used for a shooting system in which shooting by the camera is performed,
The video conversion system is connected to a main video conversion device, at least one sub video conversion device interconnected with the main video conversion device, and at least one of the main video conversion device and the sub video conversion device. A controller,
The controller receives color reproduction information set according to the color space of the display device for confirmation for confirming the color of the final output device that is the final output of the video with a different display device in advance,
The sub-video converter is
An information acquisition unit that acquires the camera video data and the camera model information and shooting setting information, respectively, and acquires the color reproduction information of the display device for confirmation input in the controller;
The camera image data acquired by the information acquisition unit, the model information and shooting setting information of the camera, and the color reproduction information of the confirmation display device are output to the main image conversion device, and these are output from the main image conversion device. A sub-data transmission / reception unit for obtaining a color conversion lookup table corresponding to
A lookup table for converting the camera video data into the color space of the confirmation display device based on the color conversion lookup table acquired by the sub-data transmission / reception unit to obtain the video data of the color space of the confirmation display device A conversion unit,
The main video converter is
The camera video data, the camera model information and shooting setting information, and the color reproduction information of the confirmation device are acquired from the sub-video conversion device, and the color conversion lookup table corresponding to these is obtained as the sub-video conversion device. A main data transmitter / receiver to output to
Generating the color conversion lookup table corresponding to the camera image data acquired by the main data transmitting / receiving unit, the model information and shooting setting information of the camera, and the color reproduction information of the confirmation device; A color conversion lookup table generation unit for outputting to the transmission / reception unit;
The lookup table conversion unit of the sub-video conversion device uses the color conversion lookup table generated by the color conversion lookup table generation unit of the main video conversion device to display the camera video data for the confirmation A video conversion system that converts video data in a device color space.
前記コントローラにおいて、前記確認用表示デバイスの色空間の映像データの色調整を行うための色調整パラメータが入力され、
前記主映像変換装置の前記主データ送受信部は、前記コントローラにおいて入力された前記色調整パラメータを取得し、
前記主映像変換装置の前記色変換ルックアップテーブル生成部は、前記色調整パラメータに基づいて前記色変換ルックアップテーブルを再度生成し、
前記副映像変換装置の前記副データ送受信部は、再度生成された前記色変換ルックアップテーブルを再度取得し、
前記副映像変換装置の前記ルックアップテーブル変換部は、前記主映像変換装置の前記色変換ルックアップテーブル生成部において前記色調整パラメータに基づいて再度生成された前記色変換ルックアップテーブルに基づいて前記カメラ映像データを前記確認用表示デバイスの色空間の映像データに変換することで色調整を行うことを特徴とする請求項1に記載の映像変換システム。
In the controller, a color adjustment parameter for performing color adjustment of video data in the color space of the display device for confirmation is input,
The main data transmission / reception unit of the main video conversion device acquires the color adjustment parameter input in the controller,
The color conversion lookup table generation unit of the main video conversion device generates the color conversion lookup table again based on the color adjustment parameter,
The sub-data transmission / reception unit of the sub-video conversion apparatus acquires the color conversion lookup table generated again,
The lookup table conversion unit of the sub-video conversion device is based on the color conversion lookup table generated again based on the color adjustment parameter in the color conversion lookup table generation unit of the main video conversion device. The video conversion system according to claim 1, wherein color adjustment is performed by converting camera video data into video data in a color space of the display device for confirmation.
前記主映像変換装置の前記ルックアップテーブル生成部は、前記カメラ映像データを出力の標準の色空間の映像データに変換し、
前記主映像変換装置の前記主データ送受信部は、前記出力の標準の色空間の映像データを前記副映像変換装置に出力し、
前記副映像変換装置の前記ルックアップテーブル変換部は、前記主映像変換装置の前記色変換ルックアップテーブル生成部において生成された前記色変換ルックアップテーブルを用いて、前記主映像変換装置の前記色変換ルックアップテーブル生成部において変換された前記出力の標準の色空間の映像データを、映画システムの最終出力デバイスで再現される色を前記確認用デバイスで表示するための前記確認用表示デバイスの色空間の映像データに変換することを特徴とする請求項1または2に記載の映像変換システム。
The lookup table generation unit of the main video conversion device converts the camera video data into video data of an output standard color space,
The main data transmitting / receiving unit of the main video conversion device outputs video data of the standard color space of the output to the sub-video conversion device,
The lookup table conversion unit of the sub-video conversion device uses the color conversion lookup table generated in the color conversion lookup table generation unit of the main video conversion device to use the color of the main video conversion device. The color of the confirmation display device for displaying, on the confirmation device, the color reproduced by the final output device of the movie system of the video data in the standard color space of the output converted by the conversion lookup table generation unit The video conversion system according to claim 1, wherein the video conversion system converts the video data into spatial video data.
前記コントローラには、前記確認用表示デバイスの色空間の映像データおよび前記出力の標準の色空間の映像データの色調整を行うための色調整パラメータが入力され、 前記主映像変換装置の前記主データ送受信部は、前記コントローラにおいて入力された前記色調整パラメータを取得し、
前記主映像変換装置の前記色変換ルックアップテーブル生成部は、前記カメラ映像データを前記色調整パラメータに基づいて前記出力の標準の色空間の映像データに再度変換し、
前記副映像変換装置の前記副データ送受信部は、前記色変換ルックアップテーブル生成部において前記色調整パラメータに基づいて再度変換された前記出力の標準の色空間の映像データを再度取得し、
前記副映像変換装置の前記ルックアップテーブル変換部は、前記主映像変換装置の前記色変換ルックアップテーブル生成部において生成された前記色変換ルックアップテーブルを用いて、前記主映像変換装置の前記色変換ルックアップテーブル生成部において前記色調整パラメータに基づいて再度変換された前記出力の標準の色空間の映像データを、映画システムの最終出力デバイスで再現される色を前記確認用デバイスで表示するための前記確認用表示デバイスの色空間の映像データに変換することで、色調整を行うことを特徴とする請求項3に記載の映像変換システム。
The controller receives color adjustment parameters for color adjustment of video data in the color space of the display device for confirmation and video data in the standard color space of the output, and the main data of the main video conversion device The transmission / reception unit acquires the color adjustment parameter input in the controller,
The color conversion lookup table generation unit of the main video conversion device converts the camera video data again into video data of the standard color space of the output based on the color adjustment parameter,
The sub-data transmission / reception unit of the sub-video conversion device acquires again the video data of the standard color space of the output converted again based on the color adjustment parameter in the color conversion lookup table generation unit,
The lookup table conversion unit of the sub-video conversion device uses the color conversion lookup table generated in the color conversion lookup table generation unit of the main video conversion device to use the color of the main video conversion device. In order to display the video data in the standard color space of the output converted again based on the color adjustment parameter in the conversion look-up table generation unit on the confirmation device as colors reproduced by the final output device of the movie system The video conversion system according to claim 3, wherein color adjustment is performed by converting the data into video data in a color space of the confirmation display device.
前記カメラ映像データは、前記カメラで撮影された際に映像記憶装置に記憶され、
前記カメラの機種情報および撮影設定情報は、前記カメラ映像データのメタデータから取得されることを特徴とする請求項1〜4のいずれか一項に記載の映像変換システム。
The camera video data is stored in a video storage device when captured by the camera,
5. The video conversion system according to claim 1, wherein the camera model information and shooting setting information are acquired from metadata of the camera video data. 6.
前記確認用表示デバイスの色再現情報は、前記確認用表示デバイスをキャリブレーションすることで算出される請求項1〜5のいずれか一項に記載の映像変換システム。   The video conversion system according to any one of claims 1 to 5, wherein the color reproduction information of the confirmation display device is calculated by calibrating the confirmation display device. 前記最終出力デバイスは、複数台の前記カメラで撮影された複数種類の前記カメラ映像データから前記映写用画像を作成する前記映画システムで前記映写用画像を上映するための映写機であり、
前記映像変換システムは、複数台の前記カメラに、または前記複数台の前記カメラのそれぞれに対応して接続され、また、複数台の前記確認用表示デバイスに、または前記複数台の前記確認用表示デバイスのそれぞれに対応して接続されるものであり、
前記確認用表示デバイスは、前記映画システムの撮影側で、前記最終出力デバイスの色を確認させるためのものである請求項1〜6のいずれか一項に記載の映像変換システム。
The final output device is a projector for screening the projection image in the movie system that creates the projection image from a plurality of types of the camera video data captured by a plurality of the cameras;
The video conversion system is connected to a plurality of the cameras or corresponding to each of the plurality of cameras, and is also connected to a plurality of confirmation display devices or the plurality of confirmation displays. Connected to each of the devices,
The video conversion system according to any one of claims 1 to 6, wherein the confirmation display device is for confirming a color of the final output device on a shooting side of the movie system.
前記カメラは、被写体を撮影して前記カメラ映像データを取得するデジタルビデオカメラまたはデジタルカメラである請求項1〜7のいずれか一項に記載の映像変換システム。   The video conversion system according to claim 1, wherein the camera is a digital video camera or a digital camera that captures a subject and acquires the camera video data. 前記出力の標準の色空間は、出力デバイスに依存しない色空間である請求項3または4に記載の映像変換システム。   5. The video conversion system according to claim 3, wherein the standard color space for output is a color space that does not depend on an output device. 前記出力の標準の色空間は、10000:1以上のダイナミックレンジを有する理想的な出力デバイスを想定した出力色空間、標準出力デバイスを想定した出力色空間、または映画システムの映写機で上映される映写用フィルムのプレビューを想定した出力色空間である請求項3または4に記載の映像変換システム。   The standard color space of the output is an output color space assuming an ideal output device having a dynamic range of 10,000: 1 or more, an output color space assuming a standard output device, or a movie screened on a movie system projector 5. The video conversion system according to claim 3 or 4, wherein the video color conversion system is an output color space that assumes a preview of a film for use. 複数台のカメラと、
前記複数台のカメラに対応してそれぞれ配置された請求項1〜10にいずれか一項に記載の映像変換システムと、
前記映像変換システムの少なくとも1つの副映像変換装置および主映像変換装置に対応してそれぞれ配置された確認用表示デバイスと、
前記映像変換システムの前記主映像変換装置に接続され、前記複数台のカメラで撮影された前記カメラ映像データ、または、前記主映像変換装置の前記ルックアップテーブル生成部において前記カメラ映像データから変換された出力の標準の色空間の映像データを格納する映像記憶装置、または携帯記憶装置とを備えることを特徴とする映画システムの撮影システム。
Multiple cameras,
The video conversion system according to any one of claims 1 to 10, wherein the video conversion system is disposed corresponding to each of the plurality of cameras.
A display device for confirmation disposed respectively corresponding to at least one sub-video conversion device and main video conversion device of the video conversion system;
The camera video data captured by the plurality of cameras connected to the main video conversion device of the video conversion system, or converted from the camera video data in the look-up table generation unit of the main video conversion device. A movie system photographing system comprising: a video storage device for storing video data in a standard color space of output or a portable storage device.
ルックアップテーブル生成サーバを更に備え、
前記ルックアップテーブル生成サーバは、少なくとも1つの映像編集機器を備える編集システムに接続され、前記カメラ映像データの撮影シーン毎の前記カメラの機種情報および撮影設定情報と、前記カメラ映像データに対応した前記色調整パラメータとを記憶し、編集システムからの要求に応じて、前記カメラの機種情報および撮影設定情報と前記色調整パラメータとに基づいて前記編集システムが使用する色変換ルックアップテーブルを生成し、前記編集システムへ出力することを特徴とする請求項11に記載の映画システムの撮影システム。
A lookup table generation server;
The lookup table generation server is connected to an editing system including at least one video editing device, and the camera model information and shooting setting information for each shooting scene of the camera video data, and the camera video data corresponding to the camera video data The color adjustment parameters are stored, and in response to a request from the editing system, a color conversion lookup table used by the editing system is generated based on the camera model information and shooting setting information and the color adjustment parameters, The movie system shooting system according to claim 11, wherein the movie system is output to the editing system.
カメラの機種特性の除去、色調整を含む最終出力デバイスに対応した入力共通色空間から出力共通色空間への色変換、および確認用表示デバイスの機種特性に応じた色変換からなる映像データの色処理を行い、前記確認用表示デバイスによって撮影現場での色処理後の映像を確認可能な映像変換装置と、カメラによって撮影された生の映像データから上映用の最終映像データを制作する編集システムの映像編集機器とに接続されるルックアップテーブル生成サーバであって、
前記色処理された映像データの前記色処理の情報を記載した色処理パラメータと、前記映像編集機器の出力色空間の情報とを受信するデータ受信部と、
前記データ受信部により受信された前記色処理パラメータと、前記映像編集機器の出力色空間の情報とに基づいて色変換ルックアップテーブルを生成する色変換ルックアップテーブル生成部と、
前記色変換ルックアップテーブルを前記映像編集機器に送信するデータ送信部とを備え、
前記色変換ルックアップテーブル生成部は、前記生の映像データに適用することで、前記映像編集機器において前記色処理後の映像を再現する色変換ルックアップテーブルを生成することを特徴とするルックアップテーブル生成サーバ。
Color of video data consisting of removal of camera model characteristics, color conversion from input common color space corresponding to final output device including color adjustment to output common color space, and color conversion according to model characteristics of display device for confirmation And a video conversion device capable of confirming the color-processed video at the shooting site by the confirmation display device, and an editing system for producing final video data for screening from the raw video data shot by the camera. A lookup table generation server connected to a video editing device,
A data receiving unit that receives color processing parameters describing information on the color processing of the color-processed video data, and information on an output color space of the video editing device;
A color conversion lookup table generation unit that generates a color conversion lookup table based on the color processing parameter received by the data reception unit and information on the output color space of the video editing device;
A data transmission unit that transmits the color conversion lookup table to the video editing device;
The color conversion lookup table generation unit generates a color conversion lookup table that reproduces the video after the color processing in the video editing device by applying to the raw video data. Table generation server.
前記色処理パラメータは、撮影するシーン毎に変更されたものであり、シーン番号またはシーンに対応した前記カメラのタイムコードと対応付けられたものであることを特徴とする請求項13に記載のルックアップテーブル生成サーバ。   14. The look according to claim 13, wherein the color processing parameter is changed for each scene to be photographed and is associated with a scene number or a time code of the camera corresponding to the scene. Uptable generation server. 前記データ受信部は、前記色処理パラメータとともに、前記色処理パラメータに対応するシーンの静止画像データを取得し、
前記データ送信部は、前記色処理パラメータに基づく色変換ルックアップテーブルを送信する際、前記静止画像データを合わせて送信することを特徴とする請求項13または14に記載のルックアップテーブル生成サーバ。
The data receiving unit obtains still image data of a scene corresponding to the color processing parameter together with the color processing parameter,
The lookup table generation server according to claim 13 or 14, wherein the data transmission unit transmits the still image data together when transmitting a color conversion lookup table based on the color processing parameter.
前記静止画像データは、色変換前の静止画像データと前記色変換ルックアップテーブルに基づく色変換後の静止画像データとを含むことを特徴とする請求項15に記載のルックアップテーブル生成サーバ。   The lookup table generation server according to claim 15, wherein the still image data includes still image data before color conversion and still image data after color conversion based on the color conversion lookup table. 前記データ受信部は、外部のクライアントからアクセスされた際、前記クライアントに対してパスワードの入力を要求し、
入力されたパスワードが、予め設定されたパスワードと一致しない場合には、前記クライアントからのアクセスを遮断することを特徴とする請求項13〜16のいずれか一項に記載のルックアップテーブル生成サーバ。
The data receiving unit, when accessed from an external client, requests the client to input a password,
The lookup table generation server according to any one of claims 13 to 16, wherein if the input password does not match a preset password, access from the client is blocked.
前記データ受信部は、前記色処理パラメータに対応して、撮影または色調整の際にユーザが入力したコメントを受信し、
前記データ送信部は、前記色処理パラメータに基づく前記色変換ルックアップテーブルを送信する際、前記色処理パラメータに対応する前記コメントを送信することを特徴とする請求項13〜17のいずれか一項に記載のルックアップテーブル生成サーバ。
The data receiving unit receives a comment input by a user at the time of shooting or color adjustment corresponding to the color processing parameter,
The said data transmission part transmits the said comment corresponding to the said color processing parameter, when transmitting the said color conversion lookup table based on the said color processing parameter. The lookup table generation server described in 1.
JP2013206347A 2013-05-02 2013-10-01 Video conversion system, imaging system, and lookup table generation server Expired - Fee Related JP6093679B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013206347A JP6093679B2 (en) 2013-05-02 2013-10-01 Video conversion system, imaging system, and lookup table generation server

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013096811 2013-05-02
JP2013096811 2013-05-02
JP2013206347A JP6093679B2 (en) 2013-05-02 2013-10-01 Video conversion system, imaging system, and lookup table generation server

Publications (3)

Publication Number Publication Date
JP2014233064A true JP2014233064A (en) 2014-12-11
JP2014233064A5 JP2014233064A5 (en) 2016-01-07
JP6093679B2 JP6093679B2 (en) 2017-03-08

Family

ID=52126203

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013206347A Expired - Fee Related JP6093679B2 (en) 2013-05-02 2013-10-01 Video conversion system, imaging system, and lookup table generation server

Country Status (1)

Country Link
JP (1) JP6093679B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021199367A1 (en) * 2020-03-31 2021-10-07 ソニーグループ株式会社 Information processing device, information processing terminal, method, program, and model
WO2022054474A1 (en) 2020-09-08 2022-03-17 ソニーグループ株式会社 Information processing system, information processing method, and information processing program
CN114449354A (en) * 2022-02-07 2022-05-06 上海幻电信息科技有限公司 Video editing method and system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002369024A (en) * 2001-06-11 2002-12-20 Hitachi Ltd Image forming system and image distribution method
JP2004064464A (en) * 2002-07-30 2004-02-26 Canon Inc Image processing method and device, and storage medium
JP2005024654A (en) * 2003-06-30 2005-01-27 Toppan Printing Co Ltd Color transformation system and color transforming method
JP2006042294A (en) * 2003-09-11 2006-02-09 Matsushita Electric Ind Co Ltd Image processing device, image processing method, and image processing program
JP2012123380A (en) * 2010-11-19 2012-06-28 Fujifilm Corp Method and device for trial display of image for projection, film for screening, method and device for producing the same, method of projecting image for projection, program, and movie system
JP2012231459A (en) * 2011-04-11 2012-11-22 Fujifilm Corp Video converter, photography system of video system using the same, video conversion method, and video conversion program

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002369024A (en) * 2001-06-11 2002-12-20 Hitachi Ltd Image forming system and image distribution method
JP2004064464A (en) * 2002-07-30 2004-02-26 Canon Inc Image processing method and device, and storage medium
JP2005024654A (en) * 2003-06-30 2005-01-27 Toppan Printing Co Ltd Color transformation system and color transforming method
JP2006042294A (en) * 2003-09-11 2006-02-09 Matsushita Electric Ind Co Ltd Image processing device, image processing method, and image processing program
JP2012123380A (en) * 2010-11-19 2012-06-28 Fujifilm Corp Method and device for trial display of image for projection, film for screening, method and device for producing the same, method of projecting image for projection, program, and movie system
JP2012231459A (en) * 2011-04-11 2012-11-22 Fujifilm Corp Video converter, photography system of video system using the same, video conversion method, and video conversion program

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021199367A1 (en) * 2020-03-31 2021-10-07 ソニーグループ株式会社 Information processing device, information processing terminal, method, program, and model
WO2022054474A1 (en) 2020-09-08 2022-03-17 ソニーグループ株式会社 Information processing system, information processing method, and information processing program
CN114449354A (en) * 2022-02-07 2022-05-06 上海幻电信息科技有限公司 Video editing method and system
CN114449354B (en) * 2022-02-07 2023-12-08 上海幻电信息科技有限公司 Video editing method and system

Also Published As

Publication number Publication date
JP6093679B2 (en) 2017-03-08

Similar Documents

Publication Publication Date Title
JP5784541B2 (en) Video conversion apparatus, movie system shooting system using the same, video conversion method, and video conversion program
US7053927B2 (en) System for optimizing the display and rendering of digital images for digital mastering
US6972828B2 (en) Method and system for preserving the creative intent within a motion picture production chain
JP5094739B2 (en) Continuous color grading method
CN101313593B (en) System and method for determining and transmitting calibration information of video image
US20070211074A1 (en) System and Method for Color Management
AU2006229744C1 (en) Emulation of film image&#39;s tonescale and color
JP6093679B2 (en) Video conversion system, imaging system, and lookup table generation server
US20080007748A1 (en) Compositing image data in a linear-light color space that preserves a desired look
JP6055964B2 (en) Video production system and video production method
US9894315B2 (en) Image capturing apparatus, image processing apparatus and method, image processing system, and control method for image capturing apparatus
WO2009078915A2 (en) Wide gamut film system for motion image capture
Postma et al. Color grading with color management
JP6355431B2 (en) Image processing apparatus and system
Kainz Using OpenEXR and the Color Transformation Language in Digital Motion Picture Production
Bancroft Emulating the Film Color Model in Digital Movie Production
Bakke et al. Simulation of film media in motion picture production using a digital still camera
JP2004159241A (en) Image processing method and printer

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151112

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151112

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20160915

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160927

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20161110

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161115

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20161201

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20161201

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161215

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170213

R150 Certificate of patent or registration of utility model

Ref document number: 6093679

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees