WO2017150471A1 - 評価装置、評価方法およびカメラシステム - Google Patents

評価装置、評価方法およびカメラシステム Download PDF

Info

Publication number
WO2017150471A1
WO2017150471A1 PCT/JP2017/007559 JP2017007559W WO2017150471A1 WO 2017150471 A1 WO2017150471 A1 WO 2017150471A1 JP 2017007559 W JP2017007559 W JP 2017007559W WO 2017150471 A1 WO2017150471 A1 WO 2017150471A1
Authority
WO
WIPO (PCT)
Prior art keywords
luminance
value
video signal
evaluation
unit
Prior art date
Application number
PCT/JP2017/007559
Other languages
English (en)
French (fr)
Inventor
浩二 神谷
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US16/077,531 priority Critical patent/US10771709B2/en
Priority to EP17759937.0A priority patent/EP3425895A4/en
Publication of WO2017150471A1 publication Critical patent/WO2017150471A1/ja
Priority to US16/989,527 priority patent/US11483487B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/002Diagnosis, testing or measuring for television systems or their details for television cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors

Definitions

  • the present technology relates to an evaluation device, an evaluation method, and a camera system, and more particularly, to a luminance evaluation device for performing luminance evaluation of a high dynamic range video signal.
  • the video signal of the high dynamic range (HDR: High Dynamic Range) is 0% to 100% * N (ordinary to the normal dynamic range (SDR: Standard Dynamic Range) video signal having a luminance level range of 0% to 100%. N is a number greater than 1).
  • HDR High Dynamic Range
  • SDR Standard Dynamic Range
  • ⁇ ⁇ ⁇ Camera iris adjustment is a common operation that is manually adjusted by VE (Video Engine) while monitoring the monitor and waveform monitor.
  • VE Video Engine
  • In broadcasting it is necessary to adjust the brightness so as not to give a sense of incongruity on the viewer side in consideration of the connection of cuts and compatibility of programs.
  • An object of the present technology is to enable a user to easily and appropriately perform luminance evaluation of an HDR video signal.
  • the concept of this technology is A processing unit that calculates a luminance evaluation value by processing a high dynamic range video signal;
  • the evaluation apparatus includes a control unit that displays the calculated luminance evaluation value on a display unit.
  • the luminance evaluation value is calculated by processing the high dynamic range video signal by the processing unit. Then, the luminance evaluation value calculated by the processing unit is displayed on the display unit by the control unit.
  • the processing unit may be configured to calculate an average value of luminance for the entire screen as a luminance evaluation value using a linear high dynamic range video signal.
  • a high dynamic range video signal subjected to gradation compression processing may be used, and an average value of luminance for the entire screen may be calculated as a luminance evaluation value.
  • the processing unit may be configured to calculate the average value of luminance for the entire screen as a ratio using a code value corresponding to 100% luminance as a reference value.
  • the processing unit may calculate the average value of the luminance for the entire screen as a converted value to the luminance value before the compression processing.
  • the processing unit uses a high dynamic range video signal that is linear or gradation-compressed, and calculates a ratio of an area having a certain luminance level or more in the entire screen as a luminance evaluation value. May be.
  • the processing unit may use a linear high dynamic range video signal and calculate an average value of luminance for an area having a certain luminance level or higher as a luminance evaluation value. Further, for example, the processing unit may calculate an average value of luminance for an area having a certain luminance level or more as a luminance evaluation value using a high dynamic range video signal subjected to gradation compression processing.
  • the processing unit uses a linear high dynamic range video signal, and calculates the product value of the ratio of the area of a certain luminance level or higher in the entire screen as the luminance evaluation value and the average luminance value for this area. It may be made to calculate.
  • the processing unit uses a high dynamic range video signal subjected to gradation compression processing, and the luminance evaluation value is a ratio of an area of a certain luminance level or more in the entire screen and an average luminance value for this area. The product value may be calculated.
  • An imaging unit for obtaining a linear high dynamic range video signal The luminance evaluation value is obtained by processing the linear high dynamic range video signal obtained by the imaging unit and / or the high dynamic range video signal obtained by performing gradation compression processing on the linear high dynamic range video signal.
  • the camera system includes a control unit that displays the calculated luminance evaluation value on a display unit.
  • a linear high dynamic range video signal can be obtained by the imaging unit.
  • a luminance evaluation value is calculated by processing the linear high dynamic range video signal and / or the high dynamic range video signal obtained by performing gradation compression processing on the linear high dynamic range video signal by the processing unit. Is done.
  • the brightness evaluation value is displayed on the display unit by the control unit.
  • the user can easily and appropriately evaluate the luminance of the HDR video signal.
  • the effects described in the present specification are merely examples and are not limited, and may have additional effects.
  • FIG. 1 shows a configuration example of a camera system 10 as an embodiment.
  • a linear high dynamic range (HDR) video signal as a captured video signal obtained by the camera 100 is transmitted to a baseband processor unit (BPU) 200 as a signal processing unit. It is the composition which becomes.
  • linear means that gradation compression processing is not performed.
  • the camera 100 includes an imaging unit 101, a pre-process unit 102, and a transmission unit 103.
  • the imaging unit 101 has, for example, an image sensor with a resolution of 4K or HD, and outputs an HDR video signal as a captured video signal.
  • the pre-processing unit 102 is a processor configured by a circuit such as an FPGA or an ASIC, for example, correction processing of an optical system such as a lens, variation in an image sensor, or the like for an HDR video signal output from the imaging unit 101. The scratch correction process etc. which arise from is performed.
  • the transmission unit 103 is a circuit having a communication interface, and transmits the HDR video signal processed by the preprocessing unit 102 to the BPU 200.
  • the BPU 200 includes a transmission unit 201, an HDR camera process (HDR CAM process) unit 202, and an SDR camera process (SDR CAM process) unit 203.
  • the transmission unit 201 is a circuit having a communication interface, and receives a linear HDR video signal sent from the camera 100.
  • the HDR camera process unit 202 is a processor including, for example, a circuit such as an FPGA or an ASIC, and performs color gamut conversion, detail (contour) correction, tone compression on the linear HDR video signal received by the transmission unit 201.
  • the output HDR video signal (HDR Video) is obtained by performing processes such as the above.
  • the gradation compression processing here means gradation compression processing in which bit length compression is performed from a linear region using an HDR photoelectric transfer function (Optical-Electron Transfer Function, OETF).
  • the SDR camera process unit 203 is a processor configured by a circuit such as an FPGA or an ASIC, for example, and performs color gamut conversion, knee correction, detail (contour) correction on the linear HDR video signal received by the transmission unit 201.
  • An output SDR video signal (SDR Video) is obtained by performing processing such as gradation compression.
  • the gradation compression processing here means gradation compression processing that performs bit length compression from a linear region using an SDR photoelectric transfer function (for example, gamma characteristic).
  • the BPU 200 processes the HDR video signal, calculates the luminance evaluation value, and displays it on the display unit.
  • the luminance evaluation value includes, for example, the following (1) to (7).
  • a luminance average value (APL: Average Picture Level) that is an average value of luminance for the entire screen, calculated using a linear HDR video signal (HDR video signal before gradation compression processing).
  • V_APL Visual Average Picture Level
  • This luminance average value (V_APL) is obtained as a numerical value close to the sense of brightness felt by humans. Therefore, in this case, it is possible to obtain the average value of the luminance for the entire screen with a value close to the sense of brightness felt by humans.
  • a high luminance share ratio (HL_Ratio: High), which is a ratio of an area having a certain luminance level or higher in the entire screen, calculated using a linear HDR video signal or a gradation compressed HDR video signal Light Share Ratio).
  • High luminance average value (HL_APL: High Light Average Picture Level), which is an average value of luminance for an area of a certain luminance level or higher, calculated using a linear HDR video signal.
  • High luminance average value (HL_V_APL: High Light Visual Average Picture Level), which is an average value of luminance with respect to an area of a certain luminance level or higher, calculated using the HDR video signal subjected to gradation compression processing.
  • FIG. 2 shows a configuration example of a portion related to calculation and display of a luminance evaluation value in the BPU 200.
  • the CPU 204 controls each part of the BPU 200 based on the control program, and also constitutes a luminance evaluation value calculation unit and a luminance evaluation value display control unit.
  • the HDR camera process unit 202 includes a linear matrix unit 211, a detail unit 212, an OETF (Optical-Electron Transfer Function) unit 213, and an RGB / Y color difference conversion unit 214.
  • the linear matrix unit 211 performs color gamut conversion processing on the linear HDR video signal (Linear HDR Video) received by the transmission unit 201 (see FIG. 1).
  • the detail unit 212 performs detail (contour) correction processing on the HDR video signal output from the linear matrix unit 211.
  • the OETF unit 213 performs gradation compression processing on the HDR video signal output from the detail unit 212, that is, gradation compression processing that performs bit length compression from the linear region using an HDR photoelectric transfer function.
  • the HDR video signal is subjected to gradation compression processing with log curve characteristics.
  • the log curve characteristic is not only a logarithmic function itself but also a curve having such a characteristic that the gradation of the low-frequency luminance is dense and the gradation of the high-frequency luminance is sparse.
  • HLG Hybrid Log- Gamma
  • PQ Personal Quantizer
  • the matrix Y (Matrix-Y) unit 205 performs matrix processing on the HDR video signal (RGB domain) output from the linear matrix unit 211 to obtain a luminance signal Y ′.
  • the CPU 204 uses the luminance signal Y ′ obtained by the matrix Y unit 205 to calculate the luminance average value (APL), the high luminance share ratio (HL_Ratio), the high luminance average value (HL_APL), and the product as the luminance evaluation values described above.
  • a value (HL_ENG) is calculated.
  • the CPU 204 calculates a luminance average value (APL) based on the following formula (1).
  • ⁇ (Y′i) indicates the sum of luminance signals (pixel signals) of all screen pixels.
  • % notation of the dynamic range is used as a unit of notation of the luminance average value (APL). Note that the% notation of the dynamic range means a notation by a% value when the SDR luminance range is 0% to 100%.
  • APL ⁇ (Y′i) / total number of pixels on the screen (1)
  • the CPU 204 calculates a high luminance share rate (HL_Ratio) based on the following formula (2).
  • “COUNT [Y ′ ⁇ a]” indicates the number of pixels having a luminance level equal to or higher than “a” among all screen pixels.
  • HL_Ratio COUNT [Y ′ ⁇ a] / total number of pixels on the screen (2)
  • the CPU 204 calculates a high luminance average value (HL_APL) based on the following mathematical formula (3).
  • ⁇ (Y′HL) represents the sum of luminance signals (pixel signals) of pixels having a luminance level equal to or higher than “a”.
  • % notation of the dynamic range is used as a unit of notation of the high luminance average value (HL_APL).
  • HL_APL ⁇ (Y′HL) / COUNT [Y ′ ⁇ a] (3)
  • the CPU 204 calculates a product value (HL_ENG) based on the following mathematical formula (4).
  • HL_ENG [HL_Ratio] * [HL_APL] (4)
  • the CPU 204 uses the luminance signal Y (10 bit / 12 bit code) included in the HDR video signal (Y color difference domain) output from the RGB / Y color difference conversion unit 214 to calculate the luminance average as the luminance evaluation value described above.
  • a value (V_APL), a high luminance share rate (HL_Ratio), a high luminance average value (HL_V_APL), and a product value (HL_BLT) are calculated.
  • the CPU 204 calculates a luminance average value (V_APL) based on the following formula (5).
  • ⁇ (Yi) indicates the sum of luminance signals (pixel signals) of all screen pixels.
  • V_APL ⁇ (Yi) / total number of screen pixels (5)
  • the unit of notation of the luminance average value is, for example, a ratio in which a code value corresponding to 100% luminance is used as a reference code value.
  • the CPU 204 calculates the ratio based on the following mathematical formula (6).
  • V_APL ⁇ [V_APL] ⁇ [black code value] ⁇ / [reference code value] (6)
  • the code value corresponding to 100% luminance is [1F6h]
  • the black code value corresponding to 0% luminance is [040h]
  • the reference code value is [1F6h].
  • the code value corresponding to 100% luminance is [1FDh]
  • the black code value corresponding to 0% luminance is [040h]
  • the reference code value Is [1FDh-040h].
  • the code value corresponding to 100% luminance is [256h]
  • the black code value corresponding to 0% luminance is [05Fh]
  • the reference code The value is [256h-05Fh].
  • V_APL luminance average value
  • the CPU 204 converts the code value of the luminance average value (V_APL) to a luminance value before gradation compression by performing inverse conversion of conversion indicated by the characteristic based on the log curve characteristic.
  • the CPU 204 calculates a high luminance share rate (HL_Ratio) based on the following formula (2).
  • “COUNT [Y ⁇ b]” indicates the number of pixels having a code value of “b” or more among all screen pixels.
  • HL_Ratio COUNT [Y ⁇ b] / Number of pixels on the entire screen (7)
  • the code value “b” is a code value corresponding to the luminance level “a”
  • the high luminance share ratio (HL_Ratio) obtained by the equation (7) is obtained by the above equation (2). It becomes the same value as the high luminance share rate (HL_Ratio). Therefore, in that case, the calculation of the high luminance share rate (HL_Ratio) based on Expression (7) can be omitted.
  • the CPU 204 calculates a high luminance average value (HL_V_APL) based on the following mathematical formula (8).
  • ⁇ (YHL) indicates the sum of luminance signals (pixel signals) of pixels having a code value of “b” or more.
  • HL_V_APL ⁇ (YHL) / COUNT [Y ⁇ b] (8)
  • the unit of description of the high luminance average value is, for example, a ratio in which a code value corresponding to 100% luminance is used as a reference code value.
  • the CPU 204 calculates the ratio based on the following formula (9).
  • [black code value] and [reference code value] in the equation (9) are the same as those in the above equation (6), and are appropriately changed according to the log curve characteristics. .
  • Ratio ⁇ [HL_V_APL] ⁇ [black code value] ⁇ / [reference code value] (9)
  • % notation of the dynamic range is used as a unit of the notation of the high luminance average value (HL_V_APL).
  • the CPU 204 converts the code value of the high luminance average value (HL_V_APL) to a luminance value before gradation compression by performing inverse conversion of conversion indicated by the characteristic based on the log curve characteristic.
  • HL_BLT [HL_Ratio] * [HL_V_APL] (10)
  • the CPU 204 controls the display 206 as a display unit to display all or a part of the luminance evaluation values obtained as described above.
  • the display 206 is not limited to the display that the BPU 200 has, and may be a display (display panel) that exists outside the BPU 200.
  • FIG. 3 shows an example of the display of the luminance evaluation value on the display 206.
  • the luminance average value (APL), the high luminance share ratio (HL_Ratio), the high luminance average value (HL_APL), and the product value (HL_ENG) are displayed as numerical values and bars, and the luminance of all screen pixels is a histogram. It is displayed.
  • the luminance average value (APL) is 115%. Further, in this example, it is indicated that a luminance level of 200% or more is set in the high luminance area, the high luminance share ratio (HL_Ratio) is 15%, and the high luminance average value (HL_APL) is 261%. . In this example, the product value (HL_ENG) is displayed, and the total light amount of the high-luminance area is indicated as 39.
  • FIG. 4 shows another example of display of luminance evaluation values on the display 206.
  • the luminance average value (V_APL), the high luminance share rate (HL_Ratio), the high luminance average value (HL_V_APL), and the product value (HL_BLT) are displayed with numerical values and bars, and the luminance of all screen pixels is a histogram. It is displayed.
  • the unit of notation of the luminance average value (V_APL) and the high luminance average value (HL_V_APL) is a ratio in which a code value corresponding to 100% luminance is used as a reference code value.
  • the luminance average value (V_APL) is 1.07 times.
  • a luminance level of 200% or higher is set in the high luminance area
  • the high luminance share ratio (HL_Ratio) is 15%
  • the high luminance average value (HL_V_APL) is 1.44 times.
  • the product value (HL_BLT) is displayed, and the total light amount of the high-luminance area is shown as 0.216.
  • FIG. 5 shows another example of the display of the luminance evaluation value on the display 206.
  • the luminance average value (V_APL), the high luminance share rate (HL_Ratio), the high luminance average value (HL_V_APL), and the product value (HL_BLT) are displayed with numerical values and bars, and the luminance of all screen pixels is a histogram. It is displayed.
  • % notation of the dynamic range is used as a unit of notation of the luminance average value (V_APL) and the high luminance average value (HL_V_APL).
  • the luminance average value (V_APL) is 107%.
  • a luminance level of 200% or higher is set in the high luminance area
  • the high luminance share rate (HL_Ratio) is 15%
  • the high luminance average value (HL_V_APL) is 271%.
  • the product value (HL_BLT) is displayed, and the total light amount of the high-luminance area is indicated as 40.7.
  • the BPU 200 processes the HDR video signal to obtain the luminance evaluation value, and this luminance evaluation value is displayed on the display 206. Therefore, the user, for example, the VE can easily and appropriately perform the luminance evaluation of the HDR video signal based on the luminance evaluation value displayed on the display 206. Thereby, the VE can satisfactorily adjust the iris of the camera 100 and the like.
  • a linear HDR video signal is sent from the camera 100 to the BPU 200.
  • the BPU 200 Under the supply of the linear HDR video signal, the BPU 200 receives various luminance evaluation values. An example of calculating and displaying is shown. However, even when an HDR video signal that has already undergone gradation compression processing is supplied, it is possible to calculate and display a similar luminance evaluation value.
  • FIG. 6 shows a configuration example of a camera system 10A as the second embodiment. 6, parts corresponding to those in FIG. 1 are denoted by the same reference numerals, and detailed description thereof will be omitted as appropriate.
  • This camera system 10A is configured such that an HDR video signal subjected to gradation compression processing as a captured video signal obtained by the camera 100A is transmitted to a camera control unit (CCU) 300. ing.
  • CCU camera control unit
  • the camera 100 ⁇ / b> A includes an imaging unit 101, a pre-process (Pre-Process) unit 102, an HDR camera process (HDR-CAM-Process) unit 104, and a transmission unit 103.
  • the imaging unit 101 has, for example, a 4K or HD image sensor, and outputs an HDR video signal as a captured video signal.
  • the pre-processing unit 102 is a processor configured by a circuit such as an FPGA or an ASIC, for example, correction processing of an optical system such as a lens, variation in an image sensor, or the like for an HDR video signal output from the imaging unit 101. The scratch correction process etc. which arise from is performed.
  • the HDR camera process unit 104 is a processor including, for example, a circuit such as an FPGA or an ASIC, and performs color gamut conversion, detail (contour) correction, gradation compression, and the like on the HDR video signal processed by the preprocess unit 102. Process. Although not described in detail, the HDR camera process unit 104 has the same configuration as the HDR camera process unit 202 in the BPU 200 of the camera system 10 described above (see FIGS. 1 and 2).
  • the transmission unit 103 is a circuit having a communication interface, and transmits the HDR video signal processed by the HDR camera process unit 104 to the CCU 300.
  • the CCU 300 includes a transmission unit 301, an inverse HDR camera process (Inverse HDR CAM Process) unit 302, and an SDR camera process (SDR Cam process) 303.
  • the transmission unit 301 is a circuit having a communication interface, and receives an HDR video signal transmitted from the camera 100A. This HDR video signal becomes an output HDR video signal from the CCU 300 as it is.
  • the inverse / HDR camera process unit 302 is a processor including, for example, a circuit such as an FPGA or an ASIC.
  • the HDR video signal received by the transmission unit 301 is converted from the Y color difference domain to the RGB domain, and tone compression is performed.
  • a linear HDR video signal is obtained by performing a process such as inverse transformation.
  • the SDR camera process unit 303 is a processor composed of circuits such as an FPGA and an ASIC, for example, and performs color gamut conversion, knee correction, and detail (for the linear HDR video signal obtained by the inverse / HDR camera process unit 302).
  • An output SDR video signal (SDR Video) is obtained by performing processing such as contour correction and gradation compression.
  • the CCU 300 processes the HDR video signal, calculates the luminance evaluation value, and displays it on the display unit.
  • FIG. 7 shows a configuration example of a part related to calculation and display of the luminance evaluation value in the CCU 300.
  • CPU304 controls each part of CCU300 based on a control program, Comprising: The brightness
  • a matrix Y (Matrix-Y) unit 305 performs a matrix process on the linear HDR video signal (RGB domain) output from the inverse / HDR camera process unit 302 to obtain a luminance signal Y ′.
  • the CPU 304 uses the luminance signal Y ′ obtained by the matrix Y unit 305 to calculate the luminance average value (APL), the high luminance share ratio (HL_Ratio), the high luminance average value (HL_APL), and the product as the luminance evaluation values described above.
  • a value (HL_ENG) is calculated.
  • the CPU 304 uses the luminance signal Y (10 bit / 12 bit code) included in the HDR video signal (Y color difference domain) input to the inverse / HDR camera process unit 302 to calculate the luminance average as the luminance evaluation value described above.
  • a value (V_APL), a high luminance share rate (HL_Ratio), a high luminance average value (HL_V_APL), and a product value (HL_BLT) are calculated.
  • the CPU 304 controls the display 306 as a display unit to display all or part of the luminance evaluation values obtained as described above (see FIG. 3-5).
  • the display 306 is not limited to the display that the CCU 300 has, and may be a display (display panel) that exists outside the CCU 300.
  • the CCU 300 processes the HDR video signal to obtain the luminance evaluation value, and this luminance evaluation value is displayed on the display 306. Therefore, the user, for example, the VE can easily and appropriately perform the luminance evaluation of the HDR video signal based on the luminance evaluation value displayed on the display 306. As a result, the VE can satisfactorily adjust the iris of the camera 100A.
  • the HDR photoelectric transfer function in the OETF unit 213 is used as a log curve characteristic for performing gradation compression on a linear HDR video signal.
  • a configuration using characteristics may also be used.
  • a compression unit that performs gradation compression processing on a linear HDR video signal using log curve characteristics is provided.
  • this technique can also take the following structures.
  • a processing unit that calculates a luminance evaluation value by processing a high dynamic range video signal;
  • An evaluation apparatus comprising a control unit that displays the calculated luminance evaluation value on a display unit.
  • the processing unit The evaluation apparatus according to (1), wherein an average value of luminance for the entire screen is calculated as the luminance evaluation value using the linear high dynamic range video signal.
  • (3) The processing unit The evaluation apparatus according to (1) or (2), wherein an average value of luminance with respect to the entire screen is calculated as the luminance evaluation value using the high dynamic range video signal subjected to gradation compression processing.
  • the processing unit The evaluation apparatus according to (3), wherein the average value of luminance for the entire screen is calculated as a ratio using a code value corresponding to luminance of 100% as a reference value.
  • the processing unit The evaluation device according to (3), wherein an average value of luminance with respect to the entire screen is calculated as a converted value to a luminance value before the compression processing is performed.
  • the processing unit Using the high dynamic range video signal that is linear or gradation-compressed, the ratio of the area of a certain luminance level or higher in the entire screen is calculated as the luminance evaluation value.
  • the evaluation apparatus in any one.
  • the processing unit The evaluation apparatus according to any one of (1) to (6), wherein an average value of luminance for an area having a certain luminance level or higher is calculated as the luminance evaluation value using the linear high dynamic range video signal.
  • the processing unit The evaluation according to any one of (1) to (7), wherein the high dynamic range video signal subjected to gradation compression is used to calculate an average value of luminance for an area having a certain luminance level or higher as the luminance evaluation value. apparatus.
  • the processing unit The evaluation apparatus according to (8), wherein an average value of luminance with respect to an area of the certain luminance level or higher is calculated as a ratio using a code value corresponding to luminance of 100% as a reference value.
  • the processing unit The evaluation device according to (8), wherein an average value of luminance with respect to an area of the certain luminance level or higher is calculated as a converted value to a luminance value before the compression processing is performed.
  • the processing unit Using the linear high dynamic range video signal, as the luminance evaluation value, a product value of a ratio of an area of a certain luminance level or more in the entire screen and an average luminance value for the area is calculated (1) To (10).
  • (12) The processing unit Using the high dynamic range video signal subjected to gradation compression processing, the product value of the ratio of the area of a certain luminance level or higher in the entire screen and the average value of the luminance for the area is calculated as the luminance evaluation value.
  • the evaluation apparatus according to any one of (1) to (11).
  • An evaluation method comprising a control step in which the control unit displays the calculated luminance evaluation value on a display unit.
  • a camera system comprising a control unit that displays the calculated luminance evaluation value on a display unit.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Picture Signal Circuits (AREA)
  • Studio Devices (AREA)

Abstract

ユーザがHDR映像信号の輝度評価を容易かつ適切に行い得るようにする。 HDR映像信号を処理して輝度評価値を求める。この輝度評価値を表示部に表示する。例えば、HDR映像信号は、リニアなHDR映像信号および/またはこのリニアなHDR映像信号にログカーブ特性で階調圧縮を行って得られたHDR映像信号である。例えば、輝度評価値には、輝度平均値、高輝度シェア率、高輝度平均値、高輝度シェア率と高輝度平均値の積値などが含まれる。

Description

評価装置、評価方法およびカメラシステム
 本技術は、評価装置、評価方法およびカメラシステムに関し、詳しくは、ハイダイナミックレンジ映像信号の輝度評価を行うための輝度評価装置等に関する。
 0%から100%の輝度レベル範囲を持つ通常ダイナミックレンジ(SDR:Standard Dynamic Range)の映像信号に対して、ハイダイナミックレンジ(HDR:High Dynamic Range)の映像信号は0%から100%*N(Nは1より大きい数)の輝度レベル範囲を持っている。従来、撮像映像信号としてHDR映像信号を出力するカメラが知られている(例えば、特許文献1参照)。
 カメラのアイリス(Iris)調整は、モニターや、波形モニターを監視しながら、VE(Video Engineer)が手動で調整するのが、一般的なオペレーションである。しかし、HDR映像信号の場合、上限に余裕がある分、輝度レベルを一定に保つための基準設定がしにくく、周囲環境等の影響を受けながら人間の感覚だけで輝度レベルを適切に調整するのは困難である。放送では、カットのつながりや、番組の互換性などを考慮して、視聴側で違和感が出ない様な輝度調整が必要となる。
特開2015-115789号公報
 本技術の目的は、ユーザがHDR映像信号の輝度評価を容易かつ適切に行い得るようにすることにある。
 本技術の概念は、
 ハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
 上記算出された輝度評価値を表示部に表示する制御部を備える
 評価装置にある。
 本技術において、処理部により、ハイダイナミックレンジ映像信号が処理されることにより輝度評価値が算出される。そして、制御部により、処理部で算出された輝度評価値が表示部に表示される。
 例えば、処理部は、リニアなハイダイナミックレンジ映像信号を用い、輝度評価値として全画面に対する輝度の平均値を算出される、ようにされてもよい。
 また、例えば、階調圧縮処理されたハイダイナミックレンジ映像信号を用い、輝度評価値として全画面に対する輝度の平均値を算出する、ようにされてもよい。この場合、例えば、処理部は、全画面に対する輝度の平均値を、輝度100%相当のコード値を基準値とした比率として算出する、ようにされてもよい。また、この場合、例えば、処理部は、全画面に対する輝度の平均値を、圧縮処理がされる前の輝度値への換算値として算出する、ようにされてもよい。
 また、例えば、処理部は、リニアな、あるいは階調圧縮処理されたハイダイナミックレンジ映像信号を用い、輝度評価値として一定の輝度レベル以上のエリアが全画面中に占める割合を算出する、ようにされてもよい。
 また、例えば、処理部は、リニアなハイダイナミックレンジ映像信号を用い、輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する、ようにされてもよい。また、例えば、処理部は、階調圧縮処理されたハイダイナミックレンジ映像信号を用い、輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する、ようにされてもよい。
 また、例えば、処理部は、リニアなハイダイナミックレンジ映像信号を用い、輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合とこのエリアに対する輝度の平均値との積値を算出する、ようにされてもよい。また、例えば、処理部は、階調圧縮処理されたハイダイナミックレンジ映像信号を用い、輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合とこのエリアに対する輝度の平均値との積値を算出する、ようにされてもよい。
 また、本技術の他の概念は、
 リニアなハイダイナミックレンジ映像信号を得る撮像部と、
 上記撮像部で得られたリニアなハイダイナミックレンジ映像信号および/または該リニアなハイダイナミックレンジ映像信号に階調圧縮処理を施して得られたハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
 上記算出された輝度評価値を表示部に表示する制御部を備える
 カメラシステムにある。
 本技術において、撮像部により、リニアなハイダイナミックレンジ映像信号が得られる。処理部により、このリニアなハイダイナミックレンジ映像信号および/またはこのリニアなハイダイナミックレンジ映像信号に階調圧縮処理を施して得られたハイダイナミックレンジ映像信号が処理されることにより輝度評価値が算出される。制御部により、この輝度評価値が表示部に表示される。
 本技術によれば、ユーザはHDR映像信号の輝度評価を容易かつ適切に行い得る。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
第1の実施の形態としてのカメラシステムの構成例を示すブロック図である。 BPUにおける輝度評価値の算出および表示に係る部分の構成例を示すブロック図である。 ディスプレイにおける輝度評価値の表示の一例を示す図である。 ディスプレイにおける輝度評価値の表示の他の一例を示す図である。 ディスプレイにおける輝度評価値の表示の他の一例を示す図である。 第2の実施の形態としてのカメラシステムの構成例を示すブロック図である。 CCUにおける輝度評価値の算出および表示に係る部分の構成例を示すブロック図である。
 以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明を以下の順序で行う。
 1.第1の実施の形態
 2.第2の実施の形態
 3.変形例
 <1.第1の実施の形態>
 [カメラシステムの構成例]
 図1は、実施の形態としてのカメラシステム10の構成例を示している。このカメラシステム10は、カメラ100で得られた撮像映像信号としてのリニアなハイダイナミックレンジ(HDR)映像信号が信号処理ユニットとしてのベースバンド・プロセッサ・ユニット(BPU:Baseband Processor Unit)200に伝送される構成となっている。ここで、リニアとは階調圧縮処理が行われていないことを意味する。
 カメラ100は、撮像部101と、プリプロセス(Pre-Process)部102と、伝送部103を有している。撮像部101は、例えば、解像度が4KあるいはHDのイメージセンサを持ち、撮像映像信号としてHDR映像信号を出力する。プリプロセス部102は、例えばFPGAやASIC等の回路で構成されるプロセッサであり、撮像部101から出力されるHDR映像信号に対して、レンズなどの光学系の補正処理や、イメージセンサのばらつきなどから生じる傷補正処理などを行う。伝送部103は、通信インタフェースを有する回路であり、プリプロセス部102で処理されたHDR映像信号をBPU200に送信する。
 BPU200は、伝送部201と、HDRカメラプロセス(HDR CAM Process)部202と、SDRカメラプロセス(SDR CAM Process)部203を有している。伝送部201は、通信インタフェースを有する回路であり、カメラ100から送られてくるリニアなHDR映像信号を受信する。HDRカメラプロセス部202は、例えばFPGAやASIC等の回路で構成されるプロセッサであり、伝送部201で受信されたリニアなHDR映像信号に対して色域変換、ディテール(輪郭)補正、階調圧縮などの処理を行って出力HDR映像信号(HDR Video)を得る。ここでの階調圧縮処理は、HDR用の光電気伝達関数(Optical-Electro Transfer Function,OETF)を用いてリニア領域からビット長圧縮をする階調圧縮処理を意味する。SDRカメラプロセス部203は、例えばFPGAやASIC等の回路で構成されるプロセッサであり、伝送部201で受信されたリニアなHDR映像信号に対して色域変換、ニー補正、ディテール(輪郭)補正、階調圧縮などの処理を行って出力SDR映像信号(SDR Video)を得る。ここでの階調圧縮処理は、SDR用の光電気伝達関数(例えばガンマ特性)を用いてリニア領域からビット長圧縮をする階調圧縮処理を意味する。
 この実施の形態において、BPU200は、HDR映像信号を処理して、輝度評価値を算出して表示部に表示する。輝度評価値には、例えば、以下の(1)-(7)が含まれる。
 (1)リニアなHDR映像信号(階調圧縮処理前のHDR映像信号)を用いて算出される、全画面に対する輝度の平均値である輝度平均値(APL:Average Picture Level)。
 (2)階調圧縮処理されたHDR映像信号(階調圧縮処理後のHDR映像信号)を用いて算出される、全画面に対する輝度の平均値である輝度平均値(V_APL:Visual Average Picture Level)。この輝度平均値(V_APL)は、人間の感じる明るさ感に近い数値で得られる。従って、この場合、人間の感じる明るさ感に近い数値にて全画面に対する輝度の平均値を求めることが可能となる。
 (3)リニアなHDR映像信号、あるいは階調圧縮処理されたHDR映像信号を用いて算出される、一定の輝度レベル以上のエリアが全画面中に占める割合である高輝度シェア率(HL_Ratio:High Light Share Ratio)。
 (4)リニアなHDR映像信号を用いて算出される、一定の輝度レベル以上のエリアに対する輝度の平均値である高輝度平均値(HL_APL:High Light Average Picture Level)。
 (5)階調圧縮処理されたHDR映像信号を用いて算出される、一定の輝度レベル以上のエリアに対する輝度の平均値である高輝度平均値(HL_V_APL:High Light Visual Average Picture Level)。
 (6)リニアなHDR映像信号を用いて算出される、高輝度シェア率(HL_Ratio)と高輝度平均値(HL_APL)との積値([HL_ENG])。
 (7)階調圧縮処理されたHDR映像信号を用いて算出される、高輝度シェア率(HL_Ratio)と高輝度平均値(HL_V_APL)との積値(HL_BLT)。
 図2は、BPU200における輝度評価値の算出および表示に係る部分の構成例を示している。CPU204は、制御プログラムに基づいてBPU200の各部を制御するものであって、輝度評価値の算出部および輝度評価値の表示制御部も構成する。
 HDRカメラプロセス部202は、リニアマトリクス部211と、ディテール部212と、OETF(Optical-Electro Transfer Function)部213と、RGB/Y色差変換部214を有している。リニアマトリクス部211は、伝送部201(図1参照)で受信されたリニアなHDR映像信号(Linear HDR Video)に色域変換の処理をする。ディテール部212は、リニアマトリクス部211から出力されるHDR映像信号にディテール(輪郭)補正の処理をする。
 OETF部213は、ディテール部212から出力されるHDR映像信号に階調圧縮処理、つまりHDR用の光電気伝達関数を用いて、リニア領域からビット長圧縮をする階調圧縮処理を行う。この階調圧縮処理により、HDR映像信号は、ログカーブ特性で階調圧縮処理されたものとなる。ここでログカーブ特性とは対数関数そのものだけではなく、低域輝度の階調が密で、高域輝度の階調が疎になるような特性のカーブのことを言い、例えば、HLG(Hybrid Log-Gamma)カーブ特性、PQ(Perceptual Quantizer)カーブ特性、S-LOG3特性などがある。RGB/Y色差変換部214は、OETF部213から出力されるHDR映像信号を、RGBドメインからY色差ドメインに変換して出力HDR映像信号(HDR Video)を得る。
 マトリクスY(Matrix-Y)部205は、リニアマトリクス部211から出力されるHDR映像信号(RGBドメイン)をマトリクス処理して輝度信号Y´を得る。CPU204は、マトリクスY部205で得られる輝度信号Y´を用いて、上述した輝度評価値としての、輝度平均値(APL)、高輝度シェア率(HL_Ratio)、高輝度平均値(HL_APL)および積値(HL_ENG)を算出する。
 この場合、CPU204は、以下の数式(1)に基づいて、輝度平均値(APL)を算出する。ここで、「Σ(Y´i)」は、全画面画素の輝度信号(画素信号)の和を示す。この輝度平均値(APL)の表記の単位には、例えば、ダイナミックレンジの%表記が使用される。なお、ダイナミックレンジの%表記は、SDRの輝度範囲を0%~100%とした時の%数値による表記を意味する。
  APL=Σ(Y´i)/全画面画素数   ・・・(1)
 また、この場合、CPU204は、以下の数式(2)に基づいて、高輝度シェア率(HL_Ratio)を算出する。ここで、「COUNT[Y´≧a]」は、全画面画素のうち“a”以上の輝度レベルを持つ画素の数を示す。
  HL_Ratio=COUNT[Y´≧a]/全画面画素数   ・・・(2)
 また、この場合、CPU204は、以下の数式(3)に基づいて、高輝度平均値(HL_APL)を算出する。ここで、ここで、「Σ(Y´HL)」は、“a”以上の輝度レベルを持つ画素の輝度信号(画素信号)の和を示す。この高輝度平均値(HL_APL)の表記の単位には、例えば、ダイナミックレンジの%表記が使用される。
  HL_APL=Σ(Y´HL)/COUNT[Y´≧a]   ・・・(3)
 また、この場合、CPU204は、以下の数式(4)に基づいて、積値(HL_ENG)を算出する。
  HL_ENG=[HL_Ratio]*[HL_APL]   ・・・(4)
 また、CPU204は、RGB/Y色差変換部214から出力されるHDR映像信号(Y色差ドメイン)に含まれる輝度信号Y(10bit/12bitコード)を用いて、上述した輝度評価値としての、輝度平均値(V_APL)、高輝度シェア率(HL_Ratio)、高輝度平均値(HL_V_APL)および積値(HL_BLT)を算出する。
 この場合、CPU204は、以下の数式(5)に基づいて、輝度平均値(V_APL)を算出する。ここで、「Σ(Yi)」は、全画面画素の輝度信号(画素信号)の和を示す。
  V_APL=Σ(Yi)/全画面画素数   ・・・(5)
 この輝度平均値(V_APL)の表記の単位は、例えば、輝度100%相当のコード値を基準コード値にした比率とされる。この場合、CPU204は、以下の数式(6)に基づいて、比率を算出する。
  V_APL={[V_APL]-[黒コード値]}/[基準コード値]   ・・・(6)
 例えば、ログカーブ特性がHLG特性である場合、輝度100%相当のコード値は[1F6h]であり、輝度0%相当のコード値である黒コード値は[040h]であり、基準コード値は[1F6h-040h]である。また、例えば、ログカーブ特性がPQカーブ特性である場合、輝度100%相当のコード値は[1FDh]であり、輝度0%相当のコード値である黒コード値は[040h]であり、基準コード値は[1FDh-040h]である。また、例えば、ログカーブ特性がS-LOG3特性である場合、輝度100%相当のコード値は[256h]であり、輝度0%相当のコード値である黒コード値は[05Fh]であり、基準コード値は[256h-05Fh]である。
 また、この輝度平均値(V_APL)の表記の単位には、例えば、ダイナミックレンジの%表記が使用される。この場合、CPU204は、輝度平均値(V_APL)のコード値を、ログカーブ特性に基づき、その特性で示される変換の逆変換を行って階調圧縮がされる前の輝度値に換算する。
 また、この場合、CPU204は、以下の数式(2)に基づいて、高輝度シェア率(HL_Ratio)を算出する。ここで、「COUNT[Y≧b]」は、全画面画素のうち“b”以上のコード値を持つ画素の数を示す。
  HL_Ratio=COUNT[Y≧b]/全画面画素数   ・・・(7)
 なお、この場合、コード値“b”が、輝度レベル“a”相当のコード値である場合、この数式(7)で求められる高輝度シェア率(HL_Ratio)は、上述の数式(2)で求められる高輝度シェア率(HL_Ratio)と同じ値となる。従って、その場合には、数式(7)に基づく高輝度シェア率(HL_Ratio)の算出を省略できる。
 また、この場合、CPU204は、以下の数式(8)に基づいて、高輝度平均値(HL_V_APL)を算出する。ここで、ここで、「Σ(YHL)」は、“b”以上のコード値を持つ画素の輝度信号(画素信号)の和を示す。
  HL_V_APL=Σ(YHL)/COUNT[Y≧b]   ・・・(8)
 この高輝度平均値(HL_V_APL)の表記の単位は、例えば、輝度100%相当のコード値を基準コード値にした比率とされる。この場合、CPU204は、以下の数式(9)に基づいて、比率を算出する。ここで、詳細説明は省略するが、数式(9)内の[黒コード値]、[基準コード値]は、上述の数式(6)内と同じであり、ログカーブ特性に応じて適宜変更される。
  比率={[HL_V_APL]-[黒コード値]}/[基準コード値]   ・・・(9)
 また、この高輝度平均値(HL_V_APL)の表記の単位には、例えば、ダイナミックレンジの%表記が使用される。この場合、CPU204は、高輝度平均値(HL_V_APL)のコード値を、ログカーブ特性に基づき、その特性で示される変換の逆変換を行って階調圧縮がされる前の輝度値に換算する。
 また、この場合、CPU204は、以下の数式(10)に基づいて、積値(HL_BLT)を算出する。
  HL_BLT=[HL_Ratio]*[HL_V_APL]   ・・・(10)
 そして、CPU204は、表示部としてのディスプレイ206に、上述したように求めた輝度評価値の全部または一部を表示するように制御する。なお、ディスプレイ206は、BPU200が持つディスプレイに限定されるものではなく、BPU200の外部に存在するディスプレイ(表示パネル)であってもよい。
 図3は、ディスプレイ206における輝度評価値の表示の一例を示している。この例では、輝度平均値(APL)、高輝度シェア率(HL_Ratio)、高輝度平均値(HL_APL)および積値(HL_ENG)が数値およびバーで表示されていると共に、全画面画素の輝度がヒストグラム表示されている。
 この例では、輝度平均値(APL)が115%であることが示されている。また、この例では、200%以上の輝度レベルが高輝度エリアに設定され、高輝度シェア率(HL_Ratio)が15%で、高輝度平均値(HL_APL)が261%であることが示されている。また、この例では、積値(HL_ENG)の表示により、その高輝度エリアが持つ総光量が39として示されている。
 図4は、ディスプレイ206における輝度評価値の表示の他の一例を示している。この例では、輝度平均値(V_APL)、高輝度シェア率(HL_Ratio)、高輝度平均値(HL_V_APL)および積値(HL_BLT)が数値およびバーで表示されていると共に、全画面画素の輝度がヒストグラム表示されている。この例では、輝度平均値(V_APL)および高輝度平均値(HL_V_APL)の表記の単位は、輝度100%相当のコード値を基準コード値にした比率とされている。
 この例では、輝度平均値(V_APL)が1.07倍であることが示されている。また、この例では、200%以上の輝度レベルが高輝度エリアに設定され、高輝度シェア率(HL_Ratio)が15%で、高輝度平均値(HL_V_APL)が1.44倍であることが示されている。また、この例では、積値(HL_BLT)の表示により、その高輝度エリアが持つ総光量が0.216として示されている。
 図5は、ディスプレイ206における輝度評価値の表示の他の一例を示している。この例では、輝度平均値(V_APL)、高輝度シェア率(HL_Ratio)、高輝度平均値(HL_V_APL)および積値(HL_BLT)が数値およびバーで表示されていると共に、全画面画素の輝度がヒストグラム表示されている。この例では、輝度平均値(V_APL)および高輝度平均値(HL_V_APL)の表記の単位には、ダイナミックレンジの%表記が使用されている。
 この例では、輝度平均値(V_APL)が107%であることが示されている。また、この例では、200%以上の輝度レベルが高輝度エリアに設定され、高輝度シェア率(HL_Ratio)が15%で、高輝度平均値(HL_V_APL)が271%であることが示されている。また、この例では、積値(HL_BLT)の表示により、その高輝度エリアが持つ総光量が40.7として示されている。
 上述したように、図1に示すカメラシステム10では、BPU200において、HDR映像信号が処理されて輝度評価値が求められ、この輝度評価値がディスプレイ206に表示される。そのため、ユーザ、例えばVEは、ディスプレイ206に表示される輝度評価値に基づいてHDR映像信号の輝度評価を容易かつ適切に行うことができる。これにより、VEは、カメラ100のアイリス調整などを良好に行うことが可能となる。
 <第2の実施の形態>
 [カメラシステムの構成例]
 上述の第1の実施の形態においては、カメラ100からBPU200にリニアなHDR映像信号が送られてくるものであって、このリニアなHDR映像信号の供給のもと、BPU200では、各種輝度評価値を算出して表示する例を示した。しかし、階調圧縮処理が既に施されているHDR映像信号が供給される場合にあっても、同様の輝度評価値を算出して表示することは可能である。
 図6は、第2の実施の形態としてのカメラシステム10Aの構成例を示している。この図6において、図1と対応する部分には同一符号を付し、適宜、その詳細説明は省略する。このカメラシステム10Aは、カメラ100Aで得られた撮像映像信号としての、階調圧縮処理が施されたHDR映像信号がカメラ・コントロール・ユニット(CCU:Camera Control Unit)300に伝送される構成となっている。
 カメラ100Aは、撮像部101と、プリプロセス(Pre-Process)部102と、HDRカメラプロセス(HDR CAM Process)部104と、伝送部103を有している。撮像部101は、例えば、4KあるいはHDのイメージセンサを持ち、撮像映像信号としてHDR映像信号を出力する。プリプロセス部102は、例えばFPGAやASIC等の回路で構成されるプロセッサであり、撮像部101から出力されるHDR映像信号に対して、レンズなどの光学系の補正処理や、イメージセンサのばらつきなどから生じる傷補正処理などを行う。
 HDRカメラプロセス部104は、例えばFPGAやASIC等の回路で構成されるプロセッサであり、プリプロセス部102で処理されたHDR映像信号に対して色域変換、ディテール(輪郭)補正、階調圧縮などの処理をする。このHDRカメラプロセス部104は、詳細説明は省略するが、上述したカメラシステム10のBPU200におけるHDRカメラプロセス部202と同様の構成とされている(図1、図2参照)。伝送部103は、通信インタフェースを有する回路であり、HDRカメラプロセス部104で処理されたHDR映像信号をCCU300に送信する。
 CCU300は、伝送部301と、インバース・HDRカメラプロセス(Inverse HDR CAM Process)部302と、SDRカメラプロセス(SDR CAM Process)部303を有している。伝送部301は、通信インタフェースを有する回路であり、カメラ100Aから送られてくるHDR映像信号を受信する。このHDR映像信号は、そのまま、CCU300からの出力HDR映像信号となる。
 インバース・HDRカメラプロセス部302は、例えばFPGAやASIC等の回路で構成されるプロセッサであり、伝送部301で受信されたHDR映像信号に対してY色差ドメインからRGBドメインへの変換、階調圧縮の逆変換などの処理を行って、リニアなHDR映像信号を得る。SDRカメラプロセス部303は、例えばFPGAやASIC等の回路で構成されるプロセッサであり、インバース・HDRカメラプロセス部302で得られたリニアなHDR映像信号に対して色域変換、ニー補正、ディテール(輪郭)補正、階調圧縮などの処理を行って出力SDR映像信号(SDR Video)を得る。
 この実施の形態において、CCU300は、HDR映像信号を処理して、輝度評価値を算出して表示部に表示する。図7は、CCU300における輝度評価値の算出および表示に係る部分の構成例を示している。CPU304は、制御プログラムに基づいてCCU300の各部を制御するものであって、輝度評価値の算出部および輝度評価値の表示制御部も構成する。
 マトリクスY(Matrix-Y)部305は、インバース・HDRカメラプロセス部302から出力されるリニアなHDR映像信号(RGBドメイン)をマトリクス処理して輝度信号Y´を得る。CPU304は、マトリクスY部305で得られる輝度信号Y´を用いて、上述した輝度評価値としての、輝度平均値(APL)、高輝度シェア率(HL_Ratio)、高輝度平均値(HL_APL)および積値(HL_ENG)を算出する。
 また、CPU304は、インバース・HDRカメラプロセス部302に入力されるHDR映像信号(Y色差ドメイン)に含まれる輝度信号Y(10bit/12bitコード)を用いて、上述した輝度評価値としての、輝度平均値(V_APL)、高輝度シェア率(HL_Ratio)、高輝度平均値(HL_V_APL)および積値(HL_BLT)を算出する。
 そして、CPU304は、表示部としてのディスプレイ306に、上述したように求めた輝度評価値の全部または一部を表示するように制御する(図3-5参照)。なお、ディスプレイ306は、CCU300が持つディスプレイに限定されるものではなく、CCU300の外部に存在するディスプレイ(表示パネル)であってもよい。
 上述したように、図6に示すカメラシステム10Aでは、CCU300において、HDR映像信号が処理されて輝度評価値が求められ、この輝度評価値がディスプレイ306に表示される。そのため、ユーザ、例えばVEは、ディスプレイ306に表示される輝度評価値に基づいてHDR映像信号の輝度評価を容易かつ適切に行うことができる。これにより、VEは、カメラ100Aのアイリス調整などを良好に行うことが可能となる。
 <3.変形例>
 なお、上述実施の形態においては、BPU200、あるいはCCU300で輝度評価値が算出されて表示される例を示した。しかし、カメラで輝度評価値を算出して表示する構成も考えられる。例えば、図6のカメラシステム10Aのカメラ100AのようにHDRカメラプロセス部104を備える場合には、図2に示すような構成で、輝度評価値の算出と表示を行うことができる。
 また、上述実施の形態においては、リニアなHDR映像信号に階調圧縮を行うためのログカーブ特性としてOETF部213におけるHDR用の光電気伝達関数を用いる例を示したが、これとは別個のログカーブ特性を用いる構成であってもよい。その場合には、OETF部213とは別に、ログカーブ特性を用いてリニアなHDR映像信号に階調圧縮処理を施す圧縮部を備えるものとなる。
 また、本技術は、以下のような構成を取ることもできる。
 (1)ハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
 上記算出された輝度評価値を表示部に表示する制御部を備える
 評価装置。
 (2)上記処理部は、
 リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として全画面に対する輝度の平均値を算出する
 前記(1)に記載の評価装置。
 (3)上記処理部は、
 階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として全画面に対する輝度の平均値を算出する
 前記(1)または(2)に記載の評価装置。
 (4)上記処理部は、
 上記全画面に対する輝度の平均値を、輝度100%相当のコード値を基準値とした比率として算出する
 前記(3)に記載の評価装置。
 (5)上記処理部は、
 上記全画面に対する輝度の平均値を、上記圧縮処理がされる前の輝度値への換算値として算出する
 前記(3)に記載の評価装置。
 (6)上記処理部は、
 リニアな、あるいは階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアが全画面中に占める割合を算出する
 前記(1)から(5)のいずれかに記載の評価装置。
 (7)上記処理部は、
 リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する
 前記(1)から(6)のいずれかに記載の評価装置。
 (8)上記処理部は、
 階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する
 前記(1)から(7)のいずれかに記載の評価装置。
 (9)上記処理部は、
 上記一定の輝度レベル以上のエリアに対する輝度の平均値を、輝度100%相当のコード値を基準値とした比率として算出する
 前記(8)に記載の評価装置。
 (10)上記処理部は、
 上記一定の輝度レベル以上のエリアに対する輝度の平均値を、上記圧縮処理がされる前の輝度値への換算値として算出する
 前記(8)に記載の評価装置。
 (11)上記処理部は、
 リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合と該エリアに対する輝度の平均値との積値を算出する
 前記(1)から(10)のいずれかに記載の評価装置。
 (12)上記処理部は、
 階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合と該エリアに対する輝度の平均値との積値を算出する
 前記(1)から(11)のいずれかに記載の評価装置。
 (13)処理部が、ハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理ステップと、
 制御部が、上記算出された輝度評価値を表示部に表示する制御ステップを有する
 評価方法。
 (14)リニアなハイダイナミックレンジ映像信号を得る撮像部と、
 上記撮像部で得られたリニアなハイダイナミックレンジ映像信号および/または該リニアなハイダイナミックレンジ映像信号に階調圧縮処理を施して得られたハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
 上記算出された輝度評価値を表示部に表示する制御部を備える
 カメラシステム。
 10,10A・・・カメラシステム
 100,100A・・・カメラ
 101・・・撮像部
 102・・・プリプロセス部
 103・・・伝送部
 104・・・HDRカメラプロセス部
 200・・・ベースバンド・プロセッサ・ユニット(BPU)
 201・・・伝送部
 202・・・HDRカメラプロセス部
 203・・・SDRカメラプロセス部
 204・・・CPU
 205・・・マトリクスY部
 206・・・ディスプレイ
 211・・・リニアマトリクス部
 212・・・ディテール部
 213・・・OETF部
 214・・・RGB/Y色差変換部
 300・・・カメラ・コントロール・ユニット(CCU)
 301・・・伝送部
 302・・・インバース・HDRカメラプロセス部
 303・・・SDRカメラプロセス部
 304・・・CPU
 305・・・マトリクスY部
 306・・・ディスプレイ

Claims (14)

  1.  ハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
     上記算出された輝度評価値を表示部に表示する制御部を備える
     評価装置。
  2.  上記処理部は、
     リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として全画面に対する輝度の平均値を算出する
     請求項1に記載の評価装置。
  3.  上記処理部は、
     階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として全画面に対する輝度の平均値を算出する
     請求項1に記載の評価装置。
  4.  上記処理部は、
     上記全画面に対する輝度の平均値を、輝度100%相当のコード値を基準値とした比率として算出する
     請求項3に記載の評価装置。
  5.  上記処理部は、
     上記全画面に対する輝度の平均値を、上記圧縮処理がされる前の輝度値への換算値として算出する
     請求項3に記載の評価装置。
  6.  上記処理部は、
     リニアな、あるいは階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアが全画面中に占める割合を算出する
     請求項1に記載の評価装置。
  7.  上記処理部は、
     リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する
     請求項1に記載の評価装置。
  8.  上記処理部は、
     階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として一定の輝度レベル以上のエリアに対する輝度の平均値を算出する
     請求項1に記載の評価装置。
  9.  上記処理部は、
     上記一定の輝度レベル以上のエリアに対する輝度の平均値を、輝度100%相当のコード値を基準値とした比率として算出する
     請求項8に記載の評価装置。
  10.  上記処理部は、
     上記一定の輝度レベル以上のエリアに対する輝度の平均値を、上記圧縮処理がされる前の輝度値への換算値として算出する
     請求項8に記載の評価装置。
  11.  上記処理部は、
     リニアな上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合と該エリアに対する輝度の平均値との積値を算出する
     請求項1に記載の評価装置。
  12.  上記処理部は、
     階調圧縮処理された上記ハイダイナミックレンジ映像信号を用い、上記輝度評価値として、一定の輝度レベル以上のエリアが全画面中に占める割合と該エリアに対する輝度の平均値との積値を算出する
     請求項1に記載の評価装置。
  13.  処理部が、ハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理ステップと、
     制御部が、上記算出された輝度評価値を表示部に表示する制御ステップを有する
     評価方法。
  14.  リニアなハイダイナミックレンジ映像信号を得る撮像部と、
     上記撮像部で得られたリニアなハイダイナミックレンジ映像信号および/または該リニアなハイダイナミックレンジ映像信号に階調圧縮処理を施して得られたハイダイナミックレンジ映像信号を処理することにより輝度評価値を算出する処理部と、
     上記算出された輝度評価値を表示部に表示する制御部を備える
     カメラシステム。
PCT/JP2017/007559 2016-03-04 2017-02-27 評価装置、評価方法およびカメラシステム WO2017150471A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US16/077,531 US10771709B2 (en) 2016-03-04 2017-02-27 Evaluation device, evaluation method, and camera system
EP17759937.0A EP3425895A4 (en) 2016-03-04 2017-02-27 EVALUATION DEVICE, EVALUATION METHOD, AND CAMERA SYSTEM
US16/989,527 US11483487B2 (en) 2016-03-04 2020-08-10 Evaluation device, evaluation method, and camera system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016042866A JP6451669B2 (ja) 2016-03-04 2016-03-04 評価装置、評価方法およびカメラシステム
JP2016-042866 2016-03-04

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US16/077,531 A-371-Of-International US10771709B2 (en) 2016-03-04 2017-02-27 Evaluation device, evaluation method, and camera system
US16/989,527 Continuation US11483487B2 (en) 2016-03-04 2020-08-10 Evaluation device, evaluation method, and camera system

Publications (1)

Publication Number Publication Date
WO2017150471A1 true WO2017150471A1 (ja) 2017-09-08

Family

ID=57358506

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/007559 WO2017150471A1 (ja) 2016-03-04 2017-02-27 評価装置、評価方法およびカメラシステム

Country Status (4)

Country Link
US (2) US10771709B2 (ja)
EP (1) EP3425895A4 (ja)
JP (1) JP6451669B2 (ja)
WO (1) WO2017150471A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107040776B (zh) * 2017-03-29 2019-01-18 华南理工大学 一种基于高动态范围的视频质量评估方法
US10778978B2 (en) * 2017-08-21 2020-09-15 Qualcomm Incorporated System and method of cross-component dynamic range adjustment (CC-DRA) in video coding
JP6968678B2 (ja) * 2017-08-23 2021-11-17 キヤノン株式会社 表示装置及びその制御方法、記憶媒体、プログラム
JP7129813B2 (ja) * 2018-04-24 2022-09-02 キヤノン株式会社 画像処理装置およびその制御方法、プログラム並びに記憶媒体
JP6921886B2 (ja) * 2019-03-19 2021-08-18 キヤノン株式会社 情報処理装置および情報処理方法
CN114549359B (zh) * 2022-02-24 2024-04-02 中国传媒大学 一种hdr视频动态范围无参考质量评价方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04280584A (ja) * 1991-03-08 1992-10-06 Sharp Corp 撮像装置
JP2000092378A (ja) * 1998-09-16 2000-03-31 Olympus Optical Co Ltd 撮像装置
JP2010050737A (ja) * 2008-08-21 2010-03-04 Victor Co Of Japan Ltd ビデオ撮像装置および露光ガイド表示方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003125240A (ja) 2001-07-18 2003-04-25 Canon Inc 画像データ処理装置およびヒストグラム表示方法
JP4281480B2 (ja) * 2003-09-05 2009-06-17 ソニー株式会社 撮像装置
JP2006295814A (ja) 2005-04-14 2006-10-26 Canon Inc 画像処理装置及び方法、及び撮像装置
JP2007266680A (ja) 2006-03-27 2007-10-11 Victor Co Of Japan Ltd 撮像装置
JP6282863B2 (ja) * 2010-06-25 2018-02-21 トムソン ライセンシングThomson Licensing ハイダイナミックレンジ映像をトーンマッピングするためのグラフィカルユーザインターフェース
JP2012044480A (ja) * 2010-08-19 2012-03-01 Sony Corp 撮像装置及び撮像方法
JP2013005017A (ja) * 2011-06-13 2013-01-07 Sony Corp 撮像装置、および撮像装置制御方法、並びにプログラム
EP2745507A1 (en) 2011-09-27 2014-06-25 Koninklijke Philips N.V. Apparatus and method for dynamic range transforming of images
PT2880624T (pt) 2012-03-26 2019-08-26 Koninklijke Philips Nv Aparelhos e métodos baseados em região de brilho para codificação e descodificação de imagens hdr
CN104471939B (zh) 2012-07-13 2018-04-24 皇家飞利浦有限公司 改进的hdr图像编码和解码方法和设备
JP6124538B2 (ja) * 2012-09-06 2017-05-10 キヤノン株式会社 撮像装置、撮像装置の制御方法、およびプログラム
JP2015126416A (ja) * 2013-12-26 2015-07-06 キヤノン株式会社 画像処理装置、制御方法およびプログラム
EP3157243B1 (en) 2014-06-10 2024-07-03 Panasonic Intellectual Property Management Co., Ltd. Conversion method and conversion device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04280584A (ja) * 1991-03-08 1992-10-06 Sharp Corp 撮像装置
JP2000092378A (ja) * 1998-09-16 2000-03-31 Olympus Optical Co Ltd 撮像装置
JP2010050737A (ja) * 2008-08-21 2010-03-04 Victor Co Of Japan Ltd ビデオ撮像装置および露光ガイド表示方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3425895A4 *

Also Published As

Publication number Publication date
US20190075229A1 (en) 2019-03-07
JP6451669B2 (ja) 2019-01-16
US20200374444A1 (en) 2020-11-26
EP3425895A1 (en) 2019-01-09
US10771709B2 (en) 2020-09-08
US11483487B2 (en) 2022-10-25
EP3425895A4 (en) 2019-02-27
JP2016197853A (ja) 2016-11-24

Similar Documents

Publication Publication Date Title
JP6451669B2 (ja) 評価装置、評価方法およびカメラシステム
JP6460014B2 (ja) 信号処理装置、信号処理方法およびカメラシステム
KR20100053287A (ko) 다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법
US9532023B2 (en) Color reproduction of display camera system
JP7020417B2 (ja) 映像信号処理装置、映像信号処理方法および映像信号処理システム
JP2016195379A (ja) ビデオシステム、ビデオ処理方法、プログラム、カメラシステムおよびビデオコンバーター
JP4479527B2 (ja) 画像処理方法、画像処理装置、画像処理プログラム、および電子カメラ
JP2012028937A (ja) 映像信号補正装置および映像信号補正プログラム
JP6673424B2 (ja) 信号処理装置、信号処理方法およびカメラシステム
JP2018007133A (ja) 画像処理装置とその制御方法及びプログラム
JP2022173290A (ja) 映像出力装置、映像出力方法および映像出力システム
CN105787883A (zh) 一种宽动态图像装置及算法
Johnson Cares and concerns of CIE TC8-08: spatial appearance modeling and HDR rendering
KR101634652B1 (ko) 영상의 대비 강화 방법 및 장치
US11363245B2 (en) Image processing device, image processing method, and image processing program
JP6791223B2 (ja) 信号処理装置、信号処理方法およびカメラシステム
KR101488641B1 (ko) 영상처리장치 및 영상처리방법
JP2018033164A (ja) カメラシステム、ビデオ処理方法およびプログラム
JP2021048522A (ja) 画像処理装置および画像処理方法
JP2015138108A (ja) 表示装置及び画質調整装置
JP2020074613A (ja) カメラシステム、ビデオ処理方法、プログラム、ビデオシステムおよびビデオコンバーター
KR20110043082A (ko) 영상표시기기에서 콘트라스트 제어 장치 및 방법
JP2012138723A (ja) 撮像装置

Legal Events

Date Code Title Description
NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2017759937

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2017759937

Country of ref document: EP

Effective date: 20181004

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17759937

Country of ref document: EP

Kind code of ref document: A1