WO2018079390A1 - 映像信号処理装置、撮像装置、撮像装置におけるフリッカ確認方法およびサーバ - Google Patents

映像信号処理装置、撮像装置、撮像装置におけるフリッカ確認方法およびサーバ Download PDF

Info

Publication number
WO2018079390A1
WO2018079390A1 PCT/JP2017/037768 JP2017037768W WO2018079390A1 WO 2018079390 A1 WO2018079390 A1 WO 2018079390A1 JP 2017037768 W JP2017037768 W JP 2017037768W WO 2018079390 A1 WO2018079390 A1 WO 2018079390A1
Authority
WO
WIPO (PCT)
Prior art keywords
video signal
frame rate
flicker
frame
frames
Prior art date
Application number
PCT/JP2017/037768
Other languages
English (en)
French (fr)
Inventor
壮平 岡田
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2018547608A priority Critical patent/JP7047766B2/ja
Priority to US16/329,064 priority patent/US11172143B2/en
Publication of WO2018079390A1 publication Critical patent/WO2018079390A1/ja
Priority to US17/448,428 priority patent/US11582401B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/745Detection of flicker frequency or suppression of flicker wherein the flicker is caused by illumination, e.g. due to fluorescent tube illumination or pulsed LED illumination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene

Definitions

  • the present technology relates to a video signal processing device, an imaging device, a flicker confirmation method in the imaging device, and a server.
  • a high frame rate camera capable of imaging at a high frame rate in which the frame rate is higher than the standard frame rate is widespread.
  • a video signal obtained by imaging with this HFR camera By using a video signal obtained by imaging with this HFR camera, a slow motion effect can be easily obtained.
  • flicker occurs as a phenomenon caused by the difference between the light source period and the imaging period. This flicker is particularly remarkable in an HFR camera having an imaging rate higher than the light source frequency.
  • Patent Document 1 discloses a technique for correcting flicker.
  • the HFR camera generally has a monitor output for confirming in real time the brightness and white balance of the captured image.
  • a monitor output for confirming in real time the brightness and white balance of the captured image.
  • the image displayed on the monitor can faithfully display the brightness and white balance of the captured image.
  • the flicker characteristic of the captured video signal of the HFR camera cannot be confirmed accurately.
  • Flicker is a luminance change phenomenon in units of frames that appears when an image is taken under a blinking light source.
  • the luminance difference is lost by the addition, and flicker cannot be expressed correctly.
  • the luminance difference that appears is not correct because it is not a continuous frame relationship.
  • the flicker was confirmed by temporarily recording and reproducing the imaged video signal of the HFR camera on a recording medium, and the flicker correction function was used if necessary.
  • the flicker correction effect is confirmed, it is necessary to record and reproduce it once, which is troublesome for the user.
  • the purpose of this technology is to make it possible to easily confirm flicker of the HFR video signal.
  • the concept of this technology is An imaging unit for obtaining a video signal having a second frame rate higher than the first frame rate; A video signal processing unit that generates a display video signal of the first frame rate from the video signal of the second frame rate by frame thinning processing; The video signal processor is The imaging apparatus determines a frame to be thinned out from the relationship between the second frame rate and the light source frequency.
  • a video signal having a second frame rate higher than the first frame rate is obtained by the imaging unit.
  • the first frame rate is, for example, a standard frame rate and is 60 fps.
  • the second frame rate is, for example, a high frame rate and is 120 fps, 180 fps, 240 fps, or the like.
  • the video signal processing unit generates a display video signal of the first frame rate from the video signal of the second frame rate by frame thinning processing.
  • the thinned frame is determined from the relationship between the second frame rate and the light source frequency.
  • the video signal processing unit obtains the number of frames having a flicker period from the second frame rate and the light source frequency, and determines a frame to be thinned out so that there are consecutive frames having the flicker period. May be.
  • LCM (Element1, Element2) indicates the least common multiple of “Element1, Element2”.
  • ROUND (Element) indicates a value obtained by rounding “Element”.
  • the video signal processing unit may determine a frame to be thinned out so as to extract a frame in which the flicker phase sequentially changes every predetermined frame.
  • a frame to be thinned is determined from the relationship between the second frame rate and the light source frequency, and a display video signal having the first frame rate is generated from the video signal having the second frame rate by frame thinning processing. To do. Therefore, a flicker luminance difference can be left in each frame of the display video signal having the first frame rate, and the flicker can be confirmed in real time by the display video signal having the first frame rate.
  • the video signal processing unit has a normal processing mode and a flicker confirmation mode.
  • the first frame is converted from the video signal having the second frame rate by the frame thinning process.
  • a rate display video signal may be generated, and a frame to be thinned out may be determined from the relationship between the second frame rate and the light source frequency.
  • the flicker confirmation mode the display video signal of the first frame rate can confirm flicker in real time.
  • the display image signal of the first frame rate is generated by averaging in the frame direction or thinning out in the frame direction, as in the conventional case.
  • the display video signal of the first frame rate can confirm the brightness, white balance, and the like of the captured image in real time.
  • the display unit that displays the video by the display video signal may further include a display control unit that displays that the flicker confirmation mode is in effect.
  • the display on the display unit monitoror
  • the user can easily recognize that the user is in the flicker confirmation mode, that is, the special monitor output mode.
  • the present technology further includes, for example, a flicker correction unit that performs a flicker correction process on the video signal of the second frame rate based on the second frame rate and the light source frequency, and the video signal processing unit includes the flicker correction unit.
  • a display video signal having the first frame rate may be generated from the corrected video signal having the second frame rate.
  • the display video signal of the first frame rate generated by the video signal processing unit can confirm the flicker after the flicker correction in the flicker correction unit in real time.
  • an operation unit for operating the flicker correction process of the flicker correction unit may be further provided.
  • the user can change the flicker correction process in the flicker correction unit as necessary according to the flicker confirmed by the display video signal of the first frame rate.
  • An imaging unit for obtaining a video signal having a second frame rate higher than the first frame rate;
  • a video signal processor for generating a display video signal of the first frame rate from the video signal of the second frame rate;
  • a luminance level detecting unit for detecting a luminance level of a predetermined number of consecutive frames at the second frame rate;
  • the imaging apparatus includes a signal superimposing unit that superimposes a display signal indicating a detected luminance level of the predetermined number of frames on the display video signal having the first frame rate.
  • a video signal having a second frame rate higher than the first frame rate is obtained by the imaging unit.
  • the first frame rate is, for example, a standard frame rate and is 60 fps.
  • the second frame rate is, for example, a high frame rate and is 120 fps, 180 fps, 240 fps, or the like.
  • the video signal processing unit generates a display video signal having the first frame rate from the video signal having the second frame rate.
  • a process for averaging in the frame direction or a process for thinning out in the frame direction is performed on the video signal at the second frame rate to generate a display video signal at the first frame rate.
  • the luminance level detection unit detects the luminance level of a predetermined number of frames of the video signal having the second frame rate.
  • the predetermined number of frames may be a number of frames that becomes a flicker cycle obtained from the second frame rate and the light source frequency.
  • the signal superimposing unit superimposes a display signal for displaying the detected luminance level of a predetermined number of frames on the display video signal having the first frame rate.
  • the display signal for displaying the luminance level detected in a predetermined number of frames of the video signal having the second frame rate is superimposed on the display video signal having the first frame rate. Is. Therefore, the luminance level detected in a predetermined number of frames is displayed on the video displayed as the display video signal, for example, with a bar or a numerical value, and flicker can be checked in real time.
  • a recording / reproducing unit for recording an input video signal having a second frame rate higher than the first frame rate in the storage and reproducing the output video signal from the storage;
  • the server includes a processing unit that obtains the display video signal for the first frame rate for flicker confirmation based on the input video signal for the second frame rate.
  • an input video signal having a second frame rate higher than the first frame rate is recorded in the storage by the recording / reproducing unit, and an output video signal is reproduced from the storage.
  • the processing unit obtains a display video signal having a first frame rate for flicker confirmation based on the input video signal having the second frame rate.
  • the processing unit generates a display video signal of the first frame rate from the input video signal of the second frame rate by frame thinning processing, and determines a frame to be thinned out from the relationship between the second frame rate and the light source frequency.
  • the processing unit obtains the number of frames having a flicker period from the second frame rate and the light source frequency, and determines a frame to be thinned out so that there are continuous frames having the number of frames having the flicker period. May be.
  • the processing unit may determine a frame to be thinned out so as to extract a frame in which the flicker phase sequentially changes for each predetermined frame.
  • the processing unit adds a luminance level of a predetermined number of frames of the video signal having the second frame rate to the video signal having the first frame rate generated from the input video signal having the second frame rate.
  • the video signal for display of the first frame rate may be generated by superimposing the display signal for displaying. In this case, for example.
  • the predetermined number of frames may be a number of frames that becomes a flicker cycle obtained from the second frame rate and the light source frequency.
  • a display video signal having a first frame rate for flicker confirmation is obtained based on an input video signal having a second frame rate. Therefore, it is possible to easily confirm flicker in the video signal of the second frame rate.
  • FIG. 6 is a diagram illustrating an example of a UI screen for setting flicker correction conditions displayed on a viewfinder.
  • FIG. It is a figure which shows an example of the finder display at the time of being in normal processing mode and flicker confirmation mode. It is a figure which shows the process example (frame addition system) of the finder output production
  • FIG. 1 shows a configuration example of an imaging apparatus 1 as the first embodiment.
  • the imaging device 1 includes a lens unit 10, an imaging unit 20, a signal correction circuit 30, a knee / gamma correction circuit 40, a finder output generation unit 50, a main line signal processing unit 60, a finder 70, and an operation input.
  • Unit 80 nonvolatile memory 90, and CPU (Central Processing Unit) 100.
  • CPU Central Processing Unit
  • the lens unit 10 is configured by a shooting lens or a combination of a plurality of lenses.
  • the lens unit 10 collects light from the subject and forms an image on the imaging surface of the imaging unit 20.
  • the imaging unit 20 includes, for example, an imaging element such as a CMOS (Complementary Metal Oxide Semiconductor) image sensor or a CCD (Charge Coupled Device) having an imaging surface provided with pixels arranged in a matrix.
  • the imaging unit 20 receives light of a subject incident through the lens unit 10 on the imaging surface, and supplies a high frame rate video signal obtained by performing photoelectric conversion on a pixel basis to the signal correction circuit 30.
  • the signal correction circuit 30 performs various corrections on the video signal generated by the imaging unit 20.
  • the signal correction circuit 30 includes a defect correction circuit 31 and a flicker correction circuit 32 (luminance correction circuit).
  • the defect correction circuit 31 detects a video signal corresponding to the position of the defective pixel in the imaging unit 20 and corrects the video signal.
  • the flicker correction circuit 32 eliminates flicker generated in the video signal due to the difference between the power supply frequency and the frame rate.
  • the signal correction circuit 30 supplies the corrected video signal to the knee / gamma correction circuit 40.
  • the knee / gamma correction circuit 40 performs knee correction and gamma correction on the video signal supplied from the signal correction circuit 30, and supplies the result to the finder output generation unit 50 and the main line signal processing unit 60.
  • the finder output generation unit 50 converts the high frame rate video signal supplied from the knee / gamma correction circuit 40 into a standard frame rate, for example, 60 fps finder display video signal, and the finder display video signal. Output to 70.
  • the finder output generation unit 50 includes a normal processing mode and a flicker confirmation mode. Switching between the two modes is controlled by the CPU 100 in accordance with, for example, a user operation from the operation input unit 80. Details of processing in the finder output generation unit 50 will be described later.
  • the finder output generation unit 50 generates display data of GUI (Graphical User Interface) for accepting input of various kinds of information to the user using the operation input unit 80, and superimposes it on the video signal for display. And output to the finder 70.
  • the finder 70 displays video based on the video signal obtained by the finder output generation unit 50, and performs GUI display based on display data obtained by the finder output generation unit 50.
  • the main line signal processing unit 60 performs processing such as compression coding and error correction coding on the high frame rate video signal supplied from the knee / gamma correction circuit 40, and stores it in a storage (not shown) or transmits it. Transmit to an external device through a cable.
  • the operation input unit 80 accepts input of setting information such as various shooting conditions from the user, for example.
  • the nonvolatile memory 90 is a memory in which a plurality of sets of weighting factors used in the flicker correction circuit 32 are stored, for example.
  • the CPU 100 is a control circuit that performs overall control of the imaging apparatus 1.
  • FIG. 2 shows a configuration example of the flicker correction circuit 32 in the signal correction circuit 30.
  • the flicker correction circuit 32 includes a memory controller 321, a memory 322, and a weighted addition circuit 323, and performs weighted addition type flicker correction. Note that the weighted addition type flicker correction method described here is an example, and the flicker correction circuit 32 may perform flicker correction by a general flicker correction method.
  • the flicker correction circuit 32 performs flicker correction on the video signal based on the flicker correction condition given from the CPU 100.
  • the CPU 100 sets various correction conditions and the like of the signal correction circuit 30 in accordance with various setting information input from the user using the operation input unit 80 provided in the imaging device 1.
  • the user can input setting information regarding flicker correction.
  • Setting information related to flicker correction includes a power supply frequency, a frame rate, and an accumulation type (hereinafter, referred to as “ACM type”) that specifies a flicker correction mode.
  • setting information regarding flicker correction will be described.
  • there are options such as 50 Hz and 60 Hz for the power supply frequency.
  • the user may select a set value of the power supply frequency in accordance with the commercial power supply frequency supplied to the area where the imaging device 1 is used.
  • the ACM type is information for designating a set of weighting factors to be given to each of M frames to be subjected to weighted addition for flicker correction by the weighted addition circuit 323.
  • the CPU 100 operates the operation input unit 80 to determine a set of weighting factors based on setting information input by the user, and sets each weighting factor in the weighted addition circuit 323.
  • the CPU 100 sets the number of frames to be stored in the memory 322 in the memory controller 321 based on the setting information input by the user by operating the operation input unit 80.
  • the memory controller 321 stores the video signal corrected by the preceding correction circuit in the signal correction circuit 30 in the memory 322, and the set M frame video signals are stored in the memory 322.
  • the video signals of M frames are read from the memory 322 and supplied to the weighted addition circuit 323.
  • the memory 322 is a storage area in which the video signal corrected by the previous correction circuit in the signal correction circuit 30 is stored for at least M frames.
  • the memory 322 always stores a newly input video signal for at least M frames.
  • the number of frames stored in the memory 322 may be greater than M.
  • the weighted addition circuit 323 inputs video signals of M frames read from the memory 322 by the memory controller 321 and continuously supplied, and uses the weighting factors set by the CPU 100 for the video signals of these frames.
  • the circuit generates the flicker-corrected video by the weighted addition type flicker correction by executing the weighted addition and averaging.
  • the value of M is an integer of 2 or more set with an integer obtained by rounding a value obtained by dividing the frame rate by the light source frequency (power supply frequency ⁇ 2) as an upper limit.
  • This weighted addition type flicker correction is performed by multiplying video signals of consecutive M frames to be subjected to weighted addition by weighting factors set individually for each rank frame in the M frames.
  • the result obtained by averaging the results is used as the flicker correction result for the video signal of the reference frame among the M frames.
  • the reference frame is, for example, a frame in a predetermined order among the M frames continuously supplied to the flicker correction circuit 32, for example, the frame supplied last.
  • the M consecutive frames to be weighted and added are continuously supplied to the flicker correction circuit 32 in time before the reference frame and the reference frame. (M-1)) frames.
  • FIG. 3 shows a specific example of weighted addition type flicker correction.
  • the value of M indicating the number of frames subject to weighted addition is set to 4
  • the value of the weight coefficient individually set in advance for each rank frame in the M consecutive frames is set to “4” from the reference frame side. “3”, “2”, and “1”.
  • These weight coefficient values may be manually input by the user in advance using the operation input unit 80 or may be previously stored in the nonvolatile memory 90.
  • a group of values of a plurality of weighting factors associated with the frames of each rank in the M consecutive frames is hereinafter referred to as a “weighting factor set”.
  • the weighted addition circuit 323 operates as follows. First, the weighted addition circuit 323 multiplies the video signal of the reference frame by the weight coefficient “4” to generate the weighted video signal of the reference frame. The weighted addition circuit 323 multiplies the video signal of the frame ( ⁇ 1F) input immediately before the reference frame by the weighting coefficient “3” to generate the weighted video signal of the frame ( ⁇ 1F).
  • the weighted addition circuit 323 multiplies the video signal of the frame ( ⁇ 2F) input immediately before the frame ( ⁇ 1F) by the weight coefficient “2” to generate the weighted video signal of the frame ( ⁇ 2F).
  • the weighted addition circuit 323 multiplies the video signal of the frame ( ⁇ 3F) input immediately before the frame ( ⁇ 2F) by the weight coefficient “1” to generate the weighted video signal of the frame ( ⁇ 3F).
  • the weighted addition circuit 323 handles the weighted video signal of the reference frame, the weighted video signal of the frame ( ⁇ 1F), the weighted video signal of the frame ( ⁇ 2F), and the weighted video signal of the frame ( ⁇ 3F). A value is added for each pixel (at the same position) to generate a weighted addition video signal for M frames. Then, the weighted addition circuit 323 divides the weighted addition video signal for M frames by the total value of the weighting coefficients in the weighting coefficient set. This result is a flicker-corrected video for the video signal of the reference frame.
  • each weighting factor in the weighting factor set also causes a flicker component to remain in the flicker correction video.
  • how the motion blur looks depends on various conditions such as the size, color, and speed of the moving image. For this reason, if the value of each weighting factor in the weighting factor set is selected by paying attention only to the appearance of the motion blur, depending on the case, there is a possibility that noticeable flicker remains in the flicker-corrected video.
  • FIG. 4 shows an example of the weighting coefficient set stored in the nonvolatile memory 90 of the imaging device 1.
  • the weight coefficient set can be selected by three types of ACM types from “1” to “3”.
  • a frame whose weighting coefficient value is “0” is no longer subject to weighted addition by multiplying the video signal by “0”.
  • a total of three types of weight coefficient sets can be selected according to the ACM types from “1” to “3” for one combination of the power supply frequency and the frame rate.
  • a coefficient set may be prepared. The value of each weight coefficient in the weight coefficient set is determined for each combination of the power supply frequency and the frame rate.
  • the weighting factor value assigned to the reference frame is the maximum value.
  • the value of the weight coefficient of (M ⁇ 1) frames other than the reference frame is the weight coefficient of a frame that is temporally closer to the reference frame than the frame in which the value of the weight coefficient of the frame that is temporally separated from the reference frame It is decided not to become larger than the value of.
  • the value of the weighting factor set to the frame having a relatively long distance is The distance is set to be equal to or less than the value of the weighting coefficient set for a frame with a relatively short distance.
  • the weight coefficient set with the ACM type “1” has the highest flicker correction strength, and thus the strength that affects the appearance of motion blur is the highest.
  • the value of the weighting factor in the weighting factor set is set so that the strength gradually decreases as the ACM type becomes “2” or “3”. Note that one of the weighting factor sets selected by the ACM type may have the same weighting factor value.
  • FIG. 5 shows an example of a UI screen for setting flicker correction conditions displayed on the finder 70, for example.
  • the power supply frequency, frame rate, and ACM type selected by the user using the operation input unit 80 are given to the CPU 100.
  • the CPU 100 refers to the weight coefficient set corresponding to the combination of the given power supply frequency, frame rate, and ACM type from the nonvolatile memory 90, and weights the value of the weight coefficient for each frame of each rank in the weight coefficient set.
  • the weighted addition circuit 323 performs flicker correction using weighted addition based on the set weight coefficient value on the input video signals of M consecutive frames.
  • the user confirms the appearance of the motion blur and the flicker erasing effect in the flicker-corrected video obtained under the flicker correction conditions set by himself / herself in the video displayed on the finder 70 with the finder output generation unit 50 as the flicker confirmation mode. To do. Thereafter, the user operates the operation input unit 80 as necessary to set the next flicker correction condition in which only the ACM type is changed, and the flicker correction is executed under the flicker correction condition. Check the flicker correction image.
  • the user repeats the change of the ACM type and the confirmation of the flicker-corrected video, and determines the ACM type having the best motion blur appearance and flicker component erasure.
  • the user switches only the ACM type while the power supply frequency and the frame rate are determined, and checks the flicker-corrected video each time to determine the best ACM type.
  • the weight coefficient set having the ACM type “1” has the highest strength that affects the appearance of motion blur, and the ACM types are “2” and “3”.
  • the value of the weighting coefficient in the weighting coefficient set is set so that the intensity gradually decreases as “
  • the user first confirms the flicker-corrected video in which the appearance of the motion blur is greatly changed by selecting the weight coefficient set having the ACM type “1”, and then sequentially selects the ACM types “2” and “3”. You can select and check the flicker correction video. Accordingly, the user can sequentially check flicker-corrected videos in which changes in the appearance of motion blur are suppressed in stages, and the confusion when determining the optimum weight coefficient set is less likely to occur.
  • the values of the weighting factors in the weighting factor set are set so that the strength of the weighting factor set affecting the appearance of the motion blur becomes weaker in the order of the ACM type “1”, “2”, “3”.
  • the weighting factor set is set so that the strength of the weighting factor set affecting the appearance of the motion blur increases in the order of the ACM type “1”, “2”, “3”.
  • the value of the weighting factor may be set.
  • the finder output generation unit 50 includes the normal processing mode and the flicker confirmation mode. Switching between the two modes is controlled by the CPU 100 in accordance with, for example, a user operation from the operation input unit 80.
  • the finder output generation unit 50 when the finder output generation unit 50 is in the flicker confirmation mode, the finder output generation unit 50 creates display data for displaying on the finder 70 that it is in the flicker confirmation mode and superimposes it on the video signal. .
  • the video displayed on the finder 70 has a display indicating that it is in the confirmation mode, and the user can easily confirm that it is in the flicker confirmation mode.
  • FIG. 6B is a finder display image in the normal processing mode and in the flicker confirmation mode, as shown in FIG. 6A, the characters “FC” indicating flicker are displayed on the finder display image. Flashes.
  • the display for clearly indicating to the user that the user is in the flicker confirmation mode is not limited to this example, and may be in other forms. For example, a frame of a specific color may be added to the finder display video.
  • the finder output generation unit 50 converts the input high frame rate video signal into a standard frame rate video signal for finder display by a conventionally known frame addition method or thinning method. Generate.
  • FIG. 7 shows an example of processing by the frame addition method. This example shows a case where the frame rate of the input video signal is 180 fps and the power supply frequency is 60 Hz (the light source frequency is 120 Hz).
  • FIG. 7 (a) shows a main line video signal corresponding to the input video signal.
  • This main line video signal is a video signal with a high frame rate of 180 fps, and is a series of video signals of each frame such as A1, A2, A3, B1, B2, B3, C1, C2, C3,. It has become.
  • the flicker is present in the video signal with a high frame rate of 180 fps due to the influence of the light source due to the light source frequency of 120 Hz.
  • the numbers 1, 2, and 3 attached to A, B, C,... Correspond to the three phases of flicker.
  • the lightness and darkness of each frame on the drawing indicates the difference in the luminance level of each frame due to flicker.
  • FIG. 7B shows a standard frame rate (60 fps) video signal for viewfinder display obtained by the frame addition method.
  • addition averaging is performed for each of the three frames “A1, A2, A3”, “B1, B2, B3”, “C1, C2, C3”,.
  • Each frame is generated.
  • the finder display video signal obtained by the frame addition method in this way, the luminance difference of each frame due to flicker is lost by the addition, so the finder display video cannot express the flicker included in the main video signal. It will be a thing. Conversely, it is possible to display an image in which the influence of flicker is suppressed.
  • FIG. 8 shows an example of processing by the thinning method. This example also shows a case where the frame rate of the input video signal is 180 fps and the power supply frequency is 60 Hz (the light source frequency is 120 Hz), as in the example of FIG.
  • FIG. 8A shows the main line video signal corresponding to the input video signal, as in FIG. 7A.
  • FIG. 8B shows a video signal having a standard frame rate (60 fps) for finder display obtained by the thinning method.
  • A2, B2, C2,... are extracted, and each frame of the video signal for finder display is generated.
  • finder display video signal obtained by the thinning-out method in this way frames with the same flicker phase are extracted, so that the finder display video cannot express the flicker included in the main video signal. . Conversely, it is possible to display an image in which the influence of flicker is suppressed.
  • the finder output generation unit 50 When the finder output generation unit 50 is set to the flicker confirmation mode, the following first to third methods are used so that flickers included in the main line video signal can be expressed with respect to the input high frame rate video signal.
  • a video signal having a standard frame rate for finder display is generated.
  • the finder output generation unit 50 basically performs a frame thinning process on an input video signal having a high frame rate (second frame rate) to obtain a standard frame for finder display.
  • a video signal having a rate (first frame rate) is generated.
  • the frame to be thinned out is determined from the relationship between the frame rate of the input video signal and the light source frequency that is twice the power supply frequency.
  • the number of frames having the flicker cycle is obtained from the frame rate of the input video signal and the light source frequency that is twice the power supply frequency, and there is a continuous frame having the number of frames having the flicker cycle.
  • the frame to be thinned out is determined.
  • LCM (Element1, Element2) indicates the least common multiple of “Element1, Element2”.
  • Number of frames for flicker cycle LCM (light source frequency, frame rate of input video signal) / (light source frequency) (1)
  • FIG. 9 shows an example of processing by the first method.
  • the frame rate of the input video signal is 120 fps and the power supply frequency is 50 Hz (the light source frequency is 100 Hz).
  • the input video signal of 120 fps has flicker due to the influence of the light source due to the light source frequency of 120 Hz, and the number of frames having the flicker period is obtained as 6 from the above equation (1).
  • FIG. 9A shows a main line video signal corresponding to the input video signal.
  • the main line video signal is a high frame rate video signal of 120 fps, and includes A1, A2, A3, A4, A5, A6, B1, B2, B3, B4, B5, B6, C1, C2, C3, C4, C5. , C6,...,
  • the video signal of each frame is continuous.
  • the numbers 1, 2, 3, 4, 5, 6 attached to A, B, C,... Correspond to the six phases of flicker.
  • the lightness and darkness of each frame on the drawing indicates the difference in the luminance level of each frame due to flicker.
  • FIG. 9B shows a video signal having a standard frame rate (60 fps) for finder display obtained by the processing according to the first method.
  • the frames A1 to A6 corresponding to the number of frames corresponding to the flicker cycle are stored in the memory, and the respective frames are sequentially read from the memory at the standard frame rate (60 fps) and output.
  • the frames (B1 to B6) being read from the memory in this way are skipped without being stored in the memory. Thereafter, C1 to C6 frames corresponding to the number of frames that become the next flicker cycle are stored in the memory, and each frame is sequentially read from the memory at a standard frame rate (60 fps) and output. Thereafter, this is repeated, and each frame of the video signal for finder display is generated.
  • a standard frame rate 60 fps
  • the finder display video signal obtained by the first method as described above is composed of flicker phase-continuous frames. Therefore, in the finder display video, the flicker included in the main line video signal is expressed, and the degree of flicker included in the main line video signal can be confirmed in real time.
  • the number of frames that become the flicker cycle can be accurately obtained from Equation (1).
  • the frame rate of the input video signal is 59.94 fps and the power supply frequency is 50 Hz (the light source frequency is 100 Hz).
  • the number of frames that become the flicker cycle may be obtained from the following formula (2).
  • ROUND (Element) indicates a value obtained by rounding “Element”.
  • Number of frames with flicker cycle ROUND (frame rate of input video signal / light source frequency) (2)
  • the finder output generation unit 50 performs frame thinning processing on an input video signal having a high frame rate (second frame rate), and a standard frame for finder display.
  • a video signal having a rate (first frame rate) is generated.
  • the frame to be thinned out is determined from the relationship between the frame rate of the input video signal and the light source frequency that is twice the power supply frequency.
  • a frame to be thinned out is determined every N frames so as to extract frames having different flicker phases.
  • FIG. 10 shows an example of processing by the second method.
  • This example shows a case where the frame rate of the input video signal is 180 fps and the power supply frequency is 60 Hz (the light source frequency is 120 Hz).
  • the frame rate of the input video signal is 180 fps
  • the standard frame rate is 60 fps
  • N 3.
  • the number of frames having the flicker cycle obtained by the above-described equation (1) is 3, which matches the value of N.
  • FIG. 10A shows a main line video signal corresponding to the input video signal.
  • This main line video signal is a video signal having a high frame rate of 180 fps, and each frame is like A1, A2, A3, B1, B2, B3, C1, C2, C3, D1, D2, D3,.
  • the video signal is continuous.
  • the numbers 1, 2, 3, attached to A, B, C, D,... Correspond to the three phases of flicker.
  • the lightness and darkness of each frame on the drawing indicates the difference in the luminance level of each frame due to flicker.
  • FIG. 10B shows a video signal having a standard frame rate (60 fps) for finder display obtained by processing according to the second method.
  • a frame in which the flicker phase sequentially changes from each of the three frames “A1, A2, A3”, “B1, B2, B3”, “C1, C2, C3”,. , B1, C2,... are extracted, and each frame of the video signal for finder display is generated.
  • the video signal for finder display obtained by the second method is composed of flicker phase-continuous frames. Therefore, in the finder display video, the flicker included in the main line video signal is expressed, and the degree of flicker included in the main line video signal can be confirmed in real time.
  • the existing high-speed imaging device has a mechanism in which a high-frame-rate captured video signal is once stored in a memory and a double-speed frame is output in parallel.
  • the processing of the second method can be realized by selecting from the parallel output only when the number of frames that become the flicker cycle is the same as or less than this parallel number.
  • FIG. 11 shows another example of processing by the second method.
  • the frame rate of the input video signal is 120 fps and the power supply frequency is 50 Hz (the light source frequency is 100 Hz).
  • the frame rate of the input video signal is 120 fps
  • the standard frame rate is 60 fps
  • N 2.
  • the number of frames that are the flicker period obtained by the above-described equation (1) is 6, which does not match the value of N.
  • FIG. 11 (a) shows a main line video signal corresponding to the input video signal.
  • the main line video signal is a high frame rate video signal of 120 fps, and includes A1, A2, A3, A4, A5, A6, B1, B2, B3, B4, B5, B6, C1, C2, C3, C4, C5. , C6,...,
  • the video signal of each frame is continuous.
  • the numbers 1, 2, 3, 4, 5, 6 attached to A, B, C,... Correspond to the six phases of flicker.
  • the lightness and darkness of each frame on the drawing indicates the difference in the luminance level of each frame due to flicker.
  • FIG. 11B shows a video signal having a standard frame rate (60 fps) for finder display obtained by processing according to the second method.
  • a frame in which the flicker phase sequentially changes from each of the two frames “A1, A2”, “A3, A4”, “A5, A6”, “B1, B2”,... , A3, A5, B2,... are extracted, and each frame of the video signal for finder display is generated.
  • the video signal for finder display obtained by the second method is composed of frames in which the flicker phase changes sequentially.
  • the video signal for finder display does not consist of frames that are continuous in flicker phase.
  • the approximate flicker included in the main line video signal is expressed, and the approximate degree of flicker included in the main line video signal can be confirmed in real time. That is, although the degree of flicker contained in the main line video signal cannot be correctly grasped, it is useful for relatively grasping the effect of flicker correction.
  • the finder output generation unit 50 uses a conventionally known frame addition method or thinning-out method to obtain a standard frame rate for finder display from an input video signal having a high frame rate (second frame rate). A video signal of (first frame rate) is generated.
  • the finder output generation unit 50 detects the luminance level of a predetermined number of consecutive frames of the input video signal, and superimposes a display signal indicating the luminance detection level of the frame of the predetermined number of frames on the video signal for finder display.
  • the predetermined number of frames is, for example, the number of frames that becomes the flicker cycle obtained by the above formula (1) or (2).
  • the luminance level detected in a predetermined number of consecutive frames is displayed on the video based on the video signal for finder display, for example, as a bar or a numerical value, and the user can determine the degree of flicker included in the main video signal. Can be confirmed in real time.
  • FIG. 12 shows an example of processing by the third method. This example shows a case where the frame rate of the input video signal is 180 fps and the power supply frequency is 60 Hz (the light source frequency is 120 Hz).
  • the number of frames to be the flicker cycle obtained by the above equation (1) is 3.
  • FIG. 12A shows a main line video signal corresponding to the input video signal.
  • This main line video signal is a video signal having a high frame rate of 180 fps, and each frame is like A1, A2, A3, B1, B2, B3, C1, C2, C3, D1, D2, D3,.
  • the video signal is continuous.
  • the numbers 1, 2, 3, attached to A, B, C, D,... Correspond to the three phases of flicker.
  • the lightness and darkness of each frame on the drawing indicates the difference in the luminance level of each frame due to flicker.
  • FIG. 12B shows a video signal having a standard frame rate (60 fps) for finder display obtained by the processing according to the third method.
  • “A1, A2, A3”, “B1, B2, B3”, “C1, C2, C3”,... are added or thinned by a conventionally known frame addition method or thinning method.
  • each frame of the video signal for finder display is generated.
  • the total pixel integration value is obtained as the value of the luminance level of each frame, and a display signal indicating the detection level is superimposed on the video signal for finder display.
  • the value of the luminance level of each frame is displayed as a bar, but may be indicated by a numerical value or the like.
  • a video signal having a standard frame rate (first frame rate) for finder display generated by a conventionally known frame addition method or thinning method is added to a predetermined number of frames, for example, a flicker cycle.
  • a display signal indicating the luminance detection level of the number of frames is superimposed. For this reason, the luminance level detected in a predetermined number of frames is displayed on the video based on the video signal for finder display, for example, as a bar or a numerical value.
  • the user can check the flicker level included in the main line video signal in real time while checking the conventional brightness, white balance, etc. in real time from the display video.
  • the finder output generation unit 50 in the flicker confirmation mode, the degree of flicker included in the main line video signal can be confirmed in real time on the display image of the finder 70. Become. Thereby, the effect of the flicker correction by the flicker correction circuit 32 can be confirmed, and the user can easily and appropriately adjust the flicker correction intensity by changing the ACM type from the operation input unit 80 as necessary. It becomes possible.
  • FIG. 13 shows a configuration example of a video system 500 as the second embodiment.
  • the video system 500 includes a predetermined number of camera systems including a camera and a camera control unit (CCU).
  • CCU camera control unit
  • the CCUs 502A and 502B perform image creation processing on the high-frame rate captured video signals from the cameras 501A and 501B.
  • the video system 500 also includes a server 521 that records and reproduces video files for replay reproduction and the like.
  • the files recorded in the server 521 include files of high frame rate video signals 503A and 503B output from the CCUs 502A and 502B.
  • High frame rate video signals 503A and 503B output from the CCUs 502A and 502B are sent as SDI signals to the server 521 via a switcher 525 described later.
  • the server 521 generates a standard frame rate display signal for flicker confirmation based on the high frame rate video signal 503 (503A, 503B).
  • the server 521 uses the “first method” and “second method” for the display video signal for checking the flicker, similarly to the finder output generation unit 50 in the first embodiment described above. Or by the “third method”.
  • a frame thinning process is performed on a video signal having a high frame rate (second frame rate) to generate a display image signal having a standard frame rate (first frame rate).
  • the frame to be thinned out is determined from the relationship between the frame rate of the input video signal and the light source frequency that is twice the power supply frequency. That is, in the first method, the number of frames having a flicker cycle is obtained from the frame rate of the video signal having the high frame rate (second frame rate) and the light source frequency that is twice the power supply frequency.
  • the frames to be thinned out are determined so that there are consecutive frames of the number of frames that are the period (see FIG. 9).
  • the video signal for display with a standard frame rate for flicker confirmation obtained by the first method is composed of frames that are continuous in phase with flicker. Therefore, the flicker contained in the high frame rate video signal is expressed in the display video, and the degree of the flicker can be easily confirmed.
  • a frame-thinning process is performed on a video signal having a high frame rate (second frame rate) to generate a display video signal having a standard frame rate (first frame rate).
  • the frame to be thinned out is determined from the relationship between the frame rate of the input video signal and the light source frequency that is twice the power supply frequency. That is, in this second method, when the frame rate of the input video signal is N times the standard frame rate, the frame to be thinned out so as to extract frames with different flicker phases is determined every N frames (Refer FIG. 10, FIG. 11).
  • the standard frame rate display video signal for flicker confirmation obtained by the second method is composed of frames in which the flicker phase changes sequentially. Therefore, the flicker contained in the high frame rate video signal is expressed in the display video, and the degree of the flicker can be easily confirmed.
  • a standard frame rate (first frame rate) video signal is generated from a high frame rate (second frame rate) video signal by a conventionally known frame addition method or thinning method. To do. Then, the luminance level of a predetermined number of consecutive frames of a high frame rate video signal is detected, and a display signal indicating the luminance detection level of a predetermined number of frames is superimposed on the standard frame rate video signal, thereby A frame rate display image signal is generated (see FIG. 12).
  • the predetermined number of frames is the number of frames having a flicker cycle obtained from the second frame rate and the light source frequency.
  • the display video signal having a standard frame rate for flicker confirmation obtained by the third method is formed by superimposing a display signal indicating the luminance detection level of a predetermined number of frames. Therefore, the brightness level detected in a predetermined number of consecutive frames is displayed on the display video, for example, as a bar or a numerical value, and the user can easily check the degree of flicker included in the high frame rate video signal. It will be possible.
  • the video system 500 includes a monitor 523 that receives a display video signal of a standard frame rate for flicker confirmation as an SDI signal and presents a display video for flicker confirmation to an operator of the server 521.
  • the monitor 523 may not only present a display video for checking flicker, but may also serve as a monitor for checking video in a file recorded in the storage as appropriate.
  • the video system 500 includes a switcher 525.
  • the high frame rate video signals 503A and 503B obtained by the CCUs 502A and 502B are input to the switcher 525 as SDI signals.
  • a high frame rate video signal 524 reproduced by the server 521 is also input to the switcher 525 as an SDI signal.
  • the switcher 525 selectively extracts a predetermined video signal from a high frame rate video signal input from a plurality of input devices such as a camera system and a server 521 and outputs it as a main line signal 526 or from a plurality of input devices. Arbitrary video signals among the input high frame rate video signals are mixed and output as a main line signal 526.
  • FIG. 14 shows a configuration example of the server 521.
  • the server 521 includes an SDI input unit 531, an encoder 532, a memory controller 533, a storage 534, a decoder 535, an SDI output unit 536, and a changeover switch 537.
  • the SDI input unit 531 receives the high frame rate video signal 503 as an SDI signal, and extracts the high frame rate video signal 503 from the SDI signal.
  • the high frame rate video signal 503 may be input in one system or in a plurality of systems.
  • the high frame rate video signal 503 is supplied as, for example, one system of 180 fps video signal or three systems of 60 fps video signal.
  • the encoder 532 performs a coding process using a compression format such as XAVC on the high frame rate video signal obtained by the SDI input unit 531 to generate a file (recording file).
  • the file generated by the encoder 532 is recorded in the storage 534 and reproduced under the control of the memory controller 533.
  • the memory controller 533 constitutes a recording / reproducing unit.
  • the memory controller 533 reproduces a high frame rate video signal from the storage 534 and outputs it as it is.
  • the flicker confirmation mode a high frame rate video signal is reproduced from the storage 534, and the high frame rate video signal is further processed, so that the first method, the second method, or the third method described above.
  • a video signal for display at a standard frame rate for flicker confirmation by the above method is output.
  • the memory controller 533 constitutes a recording / reproducing unit and a video signal processing unit.
  • the decoder 535 performs a decoding process on the video signal output from the memory controller 533 to obtain a baseband video signal.
  • the SDI output unit 536 outputs the video signal obtained by the decoder 535 as an SDI signal.
  • the changeover switch 537 is connected to the a side in the normal output mode, and outputs a high frame rate video signal (SDI signal) 524 obtained by the SDI output unit 536 as a main line output.
  • the changeover switch 537 is connected to the b side in the flicker confirmation mode, and outputs the display video signal (SDI signal) 522 having the standard frame rate for flicker confirmation obtained by the SDI output unit 536 as the flicker confirmation output. .
  • FIG. 15 shows another configuration example of the server 521.
  • the server 521 includes an SDI input unit 531, an encoder 532, a memory controller 533, a storage 534, decoders 535 and 538, and SDI output units 536 and 539.
  • the SDI input unit 531 receives the high frame rate video signal 503 as an SDI signal, and extracts the high frame rate video signal 503 from the SDI signal.
  • the high frame rate video signal 503 may be input in one system or in a plurality of systems.
  • the high frame rate video signal 503 is supplied as, for example, one system of 180 fps video signal or three systems of 60 fps video signal.
  • the encoder 532 performs a coding process using a compression format such as XAVC on the high frame rate video signal obtained by the SDI input unit 531 to generate a file (recording file).
  • the file generated by the encoder 532 is recorded in the storage 534 and reproduced under the control of the memory controller 533.
  • the memory controller 533 constitutes a recording / reproducing unit.
  • the memory controller 533 reproduces the high frame rate video signal from the storage 534 and outputs it as it is.
  • the decoder 535 performs a decoding process on the high frame rate video signal output from the memory controller 533 to obtain a baseband video signal.
  • the SDI output unit 536 uses the high frame rate video signal obtained by the decoder 535 as an SDI signal, and outputs the high frame rate video signal (SDI signal) 524 as a main line output.
  • the memory controller 533 reproduces a high frame rate video signal from the storage 534, and further processes the high frame rate video signal to perform the first method, the second method, or the third method described above.
  • a video signal for display at a standard frame rate for flicker confirmation by the above method is output.
  • the memory controller 533 constitutes a recording / reproducing unit and a video signal processing unit.
  • the decoder 538 performs a decoding process on the standard frame rate display video signal output from the memory controller 533 to obtain a baseband video signal.
  • the SDI output unit 539 uses the standard frame rate display video signal obtained by the decoder 538 as an SDI signal, and outputs this display video signal (SDI signal) 522 as a flicker confirmation output.
  • FIG. 16 shows still another configuration example of the server 521.
  • the server 521 includes an SDI input unit 531, an encoder 532, a memory controller 533, a storage 534, a decoder 535, SDI output units 536 and 539, and a processing unit 541.
  • the SDI input unit 531 receives the high frame rate video signal 503 as an SDI signal, and extracts the high frame rate video signal 503 from the SDI signal.
  • the high frame rate video signal 503 may be input in one system or in a plurality of systems.
  • the high frame rate video signal 503 is supplied as, for example, one system of 180 fps video signal or three systems of 60 fps video signal.
  • the encoder 532 performs a coding process using a compression format such as XAVC on the high frame rate video signal obtained by the SDI input unit 531 to generate a file (recording file).
  • the file generated by the encoder 532 is recorded in the storage 534 and reproduced under the control of the memory controller 533.
  • the memory controller 533 constitutes a recording / reproducing unit.
  • the memory controller 533 reproduces the high frame rate video signal from the storage 534 and outputs it as it is.
  • the decoder 535 performs a decoding process on the high frame rate video signal output from the memory controller 533 to obtain a baseband video signal.
  • the SDI output unit 536 uses the high frame rate video signal obtained by the decoder 535 as an SDI signal, and outputs the high frame rate video signal (SDI signal) 524 as a main line output.
  • the processing unit 541 processes the high frame rate video signal obtained by the SDI input unit 531 and performs a standard for flicker confirmation by the above-described first method, second method, or third method. Outputs a frame rate display video signal.
  • the SDI output unit 539 uses the standard frame rate display video signal obtained by the processing unit 541 as an SDI signal, and outputs the display video signal (SDI signal) 522 as a flicker confirmation output.
  • the server 521 generates a standard frame rate display signal for flicker confirmation based on the high frame rate video signal 503 (503A, 503B).
  • the display image for flicker confirmation is presented on the monitor 523.
  • the server operator can easily confirm the degree of flicker included in the high frame rate video signal.
  • the interface of the server 521 is described as being SDI.
  • the interface of the server 521 is not limited to SDI, and a configuration using other interfaces for exchanging general video signals. It is also possible to do.
  • the imaging rate is an integer multiple of the standard frame rate.
  • the present technology can be applied even when the imaging frame rate is not an integer multiple of the standard frame rate. is there.
  • this technique can also take the following structures.
  • a video signal processing unit that generates a display video signal having the first frame rate from a video signal having a second frame rate higher than the first frame rate;
  • the video signal processor is By generating a video signal for display at the first frame rate from the video signal at the second frame rate by frame thinning processing, A video signal processing apparatus that determines a frame to be thinned out from the relationship between the second frame rate and the light source frequency.
  • the video signal processing unit From the second frame rate and the light source frequency, obtain the number of frames that become the flicker cycle, The video signal processing apparatus according to (1), wherein frames to be thinned out are determined so that there are continuous frames having the number of frames of the flicker cycle.
  • the video signal processing unit The video signal processing apparatus according to (1), wherein a frame to be thinned out is determined so that a frame in which a flicker phase sequentially changes is extracted for each predetermined frame.
  • the video signal processing unit Has normal processing mode and flicker confirmation mode, When in the flicker confirmation mode, The frame decimation process generates a display video signal having the first frame rate from the video signal having the second frame rate,
  • the video signal processing device according to any one of (1) to (5), wherein a frame to be thinned out is determined from a relationship between the second frame rate and the light source frequency.
  • the video signal processing unit includes a video signal processing step of generating a display video signal having the first frame rate from a video signal having a second frame rate higher than the first frame rate by frame thinning processing.
  • an imaging unit for obtaining a video signal having a second frame rate higher than the first frame rate;
  • a video signal processing unit that generates a display video signal of the first frame rate from the video signal of the second frame rate by frame thinning processing;
  • the video signal processor is An imaging apparatus that determines a frame to be thinned out from the relationship between the second frame rate and the light source frequency.
  • the video signal processing unit From the second frame rate and the light source frequency, obtain the number of frames that become the flicker cycle, The imaging device according to (8), wherein frames to be thinned out are set so that there are continuous frames having the number of frames of the flicker cycle.
  • the video signal processing unit The imaging device according to (8), wherein a frame to be thinned out is determined so as to extract a frame in which the flicker phase sequentially changes for each predetermined frame.
  • the video signal processing unit Has normal processing mode and flicker confirmation mode, When in the flicker confirmation mode, The frame decimation process generates a display video signal having the first frame rate from the video signal having the second frame rate,
  • the imaging device according to any one of (8) to (10), wherein a frame to be thinned out is determined from a relationship between the second frame rate and the light source frequency.
  • the imaging apparatus further including a display control unit that displays the flicker confirmation mode on the display unit that displays the video based on the display video signal when the flicker confirmation mode is set. .
  • a flicker correction unit that performs a flicker correction process on the video signal having the second frame rate based on the second frame rate and the light source frequency;
  • the video signal processing unit generates the display video signal of the first frame rate from the video signal of the second frame rate that has been subjected to the flicker correction.
  • the video signal processing unit according to any one of (8) to (12) Imaging device.
  • the imaging apparatus according to (13), further including an operation unit that operates a flicker correction process of the flicker correction unit.
  • a flicker check method in an imaging apparatus including an imaging unit that obtains a video signal having a second frame rate higher than the first frame rate, A video signal processing unit that generates a display video signal of the first frame rate from the video signal of the second frame rate by frame thinning processing;
  • the display control unit includes a display control step of displaying an image based on the display video signal of the first frame rate on the display unit;
  • a flicker confirmation method in an imaging apparatus that determines a frame to be thinned out from the relationship between the second frame rate and the light source frequency.
  • a video signal processing unit that generates a display video signal having the first frame rate from a video signal having a second frame rate higher than the first frame rate;
  • a luminance level detecting unit for detecting a luminance level of a predetermined number of frames of the video signal having the second frame rate;
  • a video signal processing apparatus comprising: a signal superimposing unit that superimposes a display signal for displaying the detected luminance level of the predetermined number of frames on the display video signal.
  • the predetermined number of frames is a number of frames having a flicker period obtained from the second frame rate and the light source frequency.
  • a video signal processing step in which the video signal processing unit generates the display video signal having the first frame rate from the video signal having the second frame rate higher than the first frame rate;
  • a luminance level detecting step for detecting a luminance level of a predetermined number of consecutive frames of the second frame rate;
  • a video signal processing method wherein the signal superimposing unit includes a signal superimposing step of superimposing a display signal indicating a detected luminance level of the predetermined number of frames on the display video signal.
  • an imaging unit for obtaining a video signal having a second frame rate higher than the first frame rate;
  • a video signal processor for generating a display video signal of the first frame rate from the video signal of the second frame rate;
  • a luminance level detecting unit for detecting a luminance level of a predetermined number of frames of the video signal having the second frame rate;
  • An imaging apparatus comprising: a signal superimposing unit that superimposes a display signal for displaying the detected luminance level of the predetermined number of frames on the display video signal having the first frame rate.
  • a server comprising: a processing unit that obtains a display video signal of the first frame rate for flicker confirmation based on the input video signal of the second frame rate.
  • the processing unit The frame thinning process generates a display video signal having the first frame rate from the input video signal having the second frame rate,
  • the processing unit From the second frame rate and the light source frequency, obtain the number of frames that become the flicker cycle, The server according to (21), wherein frames to be thinned out are determined such that there are consecutive frames having the number of frames in the flicker cycle. (23) The processing unit The server according to (21), wherein a frame to be thinned is determined so as to extract a frame in which a flicker phase sequentially changes for each predetermined frame. (24) The processing unit A display signal for displaying the luminance level of a predetermined number of frames of the video signal having the second frame rate on the video signal having the first frame rate generated from the input video signal having the second frame rate. The server according to (20), wherein the video signal for display having the first frame rate is generated by superimposing. (25) The server according to (24), wherein the predetermined number of frames is a number of frames having a flicker period obtained from the second frame rate and the light source frequency.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Picture Signal Circuits (AREA)

Abstract

HFR映像信号のフリッカを確認可能とする。 第2のフレームレートの映像信号に基づいて、フリッカ確認のための第1のフレームレートの表示用映像信号を得る。例えば、フレーム間引き処理により、第2のフレームレートの映像信号から第1のフレームレートの表示用映像信号を生成する。この場合、第2のフレームレートと光源周波数の関係から間引くフレームを決定する。例えば、第2のフレームレートと光源周波数とからフリッカ周期となるフレーム数を求め、フリッカ周期のフレーム数の連続したフレームが存在するように間引くフレームを決定する。また、例えば、所定フレーム毎に、フリッカ位相が順次変化していくフレームを取り出すように間引くフレームを決定する。

Description

映像信号処理装置、撮像装置、撮像装置におけるフリッカ確認方法およびサーバ
 本技術は、映像信号処理装置、撮像装置、撮像装置におけるフリッカ確認方法およびサーバに関する。
 フレームレートを標準フレームレートより高くしたハイフレームレートでの撮像が可能なハイフレームレートカメラ(HFRカメラ)が普及している。このHFRカメラで撮像して得られる映像信号を用いることで、スローモーション効果を容易に得ることが可能となる。電源周波数に起因して明滅する蛍光灯などの光源の下での撮影では、光源周期と撮像周期の差から生まれる現象としてフリッカが発生する。このフリッカは、特に、光源周波数より撮像レートが高いHFRカメラではより顕著である。例えば、特許文献1には、フリッカを補正する技術が開示されている。
 HFRカメラは、一般的に、撮像されている画像の明るさやホワイトバランスなどをリアルタイムに確認するためのモニタ出力を備える。モニタに表示される画像は、本来、撮像されている画像の明るさやホワイトバランスを忠実に表示できることが望ましい。従来、例えば、フレーム方向に平均化してS/Nの高い高品位な標準フレームレートのモニタ出力を得ること、あるいは、フレーム方向に間引いて動解像度の高い標準フレームレートのモニタ出力を得ることが知られている。
 しかし、これらのモニタ出力では、HFRカメラの撮像映像信号に特徴的なフリッカを正確に確認できない。フリッカは明滅する光源のもとで撮像した場合、それによって現れるフレーム単位の輝度変化現象である。フレーム加算方式のモニタ出力では加算によって輝度差が失われ、フリッカを正しく表現できない。同様に、間引き方式のモニタ出力では、連続したフレーム関係ではないため現れる輝度差は正しいものではない。
 従来は、HFRカメラの撮像映像信号を記録媒体に一旦記録し再生することで、そのフリッカを確認し、必要であればフリッカ補正機能を使用していた。しかし、フリッカ補正効果の確認に際しても、一旦記録し再生する必要があり、ユーザに手間がかかるものであった。
特開2009-135792号公報
 本技術の目的は、HFR映像信号のフリッカを容易に確認可能とすることにある。
 本技術の概念は、
 第1のフレームレートより高い第2のフレームレートの映像信号を得る撮像部と、
 上記第2のフレームレートの映像信号からフレーム間引き処理により上記第1のフレームレートの表示用映像信号を生成する映像信号処理部を備え、
 上記映像信号処理部は、
 上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
 撮像装置にある。
 本技術において、撮像部により、第1のフレームレートより高い第2のフレームレートの映像信号が得られる。第1のフレームレートは、例えば、標準フレームレートであって、60fpsなどである。これに対して、第2のフレームレートは、例えば、ハイフレームレートであって、120fps、180fps、240fpsなどである。
 映像信号処理部により、第2のフレームレートの映像信号からフレーム間引き処理により第1のフレームレートの表示用映像信号が生成される。ここで、間引くフレームは、第2のフレームレートと光源周波数の関係から決定される。例えば、映像信号処理部は、第2のフレームレートと光源周波数とからフリッカ周期となるフレーム数を求め、フリッカ周期のフレーム数の連続したフレームが存在するように間引くフレームを決定する、ようにされてもよい。
 この場合、例えば、フリッカ周期となるフレーム数は、「フリッカ周期となるフレーム数=LCM(光源周波数,第2のフレームレート)/(光源周波数)」の式から求められる、ようにされてもよい。LCM(Element1, Element2)は、“Element1, Element2”の最小公倍数を示す。また、この場合、例えば、フリッカ周期となるフレーム数は、「フリッカ周期となるフレーム数=ROUND(第2のフレームレート/光源周波数)」の式から求められる、ようにされてもよい。ROUND(Element)は、“Element”を丸めた値を示す。
 また、例えば、映像信号処理部は、所定フレーム毎に、フリッカ位相が順次変化していくフレームを取り出すように間引くフレームを決定する、ようにされてもよい。
 このように本技術においては、第2のフレームレートと光源周波数の関係から間引くフレームを決定し、第2のフレームレートの映像信号からフレーム間引き処理により第1のフレームレートの表示用映像信号を生成するものである。そのため、第1のフレームレートの表示用映像信号の各フレームにフリッカの輝度差を残すことができ、この第1のフレームレートの表示用映像信号によりフリッカをリアルタイムに確認することが可能となる。
 なお、本技術において、例えば、映像信号処理部は、通常処理モードとフリッカ確認モードを有し、フリッカ確認モードにあるとき、フレーム間引き処理により、第2のフレームレートの映像信号から第1のフレームレートの表示用映像信号を生成し、第2のフレームレートと光源周波数の関係から間引くフレームを決定する、ようにされてもよい。この場合、フリッカ確認モードとすることで、第1のフレームレートの表示用映像信号は、フリッカをリアルタイムに確認し得るものとなる。
 なお、通常処理モードにあっては、従来同様に、フレーム方向に平均化されて、あるいはフレーム方向に間引かれて、第1のフレームレートの表示用映像信号が生成される。この場合には、第1のフレームレートの表示用映像信号は、撮像されている画像の明るさやホワイトバランスなどをリアルタイムに確認し得るものとなる。
 この場合、例えば、フリッカ確認モードにあるとき、表示用映像信号による映像を表示する表示部に、フリッカ確認モードにあることを表示する表示制御部をさらに備える、ようにされてもよい。この場合、表示部(モニタ)の表示から、ユーザは、フリッカ確認モードにあること、つまり特殊なモニタ出力モードにあることを容易に認識可能となる。
 また、本技術において、例えば、第2のフレームレートの映像信号に対して、第2のフレームレートおよび光源周波数に基づいてフリッカ補正処理を行うフリッカ補正部をさらに備え、映像信号処理部は、フリッカ補正された第2のフレームレートの映像信号から第1のフレームレートの表示用映像信号を生成する、ようにされてもよい。この場合、映像信号処理部で生成される第1のフレームレートの表示用映像信号は、フリッカ補正部におけるフリッカ補正後のフリッカをリアルタイムに確認し得るものとなる。
 この場合、例えば、フリッカ補正部のフリッカ補正処理を操作する操作部をさらに備える、ようにされてもよい。これにより、ユーザは、第1のフレームレートの表示用映像信号で確認さされるフリッカに応じて、必要に応じて、フリッカ補正部におけるフリッカ補正処理の変更操作を行うことが可能となる。
 また、本技術の他の概念は、
 第1のフレームレートより高い第2のフレームレートの映像信号を得る撮像部と、
 上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成する映像信号処理部と、
 上記第2のフレームレートの連続する所定フレーム数のフレームの輝度レベルを検出する輝度レベル検出部と、
 上記第1のフレームレートの表示用映像信号に、上記所定フレーム数のフレームの検出輝度レベルを示す表示信号を重畳する信号重畳部を備える
 撮像装置にある。
 本技術において、撮像部により、第1のフレームレートより高い第2のフレームレートの映像信号が得られる。第1のフレームレートは、例えば、標準フレームレートであって、60fpsなどである。これに対して、第2のフレームレートは、例えば、ハイフレームレートであって、120fps、180fps、240fpsなどである。
 映像信号処理部により、第2のフレームレートの映像信号から第1のフレームレートの表示用映像信号が生成される。この場合、例えば、第2のフレームレートの映像信号に対して、フレーム方向に平均化する処理、あるいはフレーム方向に間引く処理が施されて、第1のフレームレートの表示用映像信号が生成される。
 輝度レベル検出部により、第2のフレームレートの映像信号の連続する所定フレーム数のフレームの輝度レベルが検出される。例えば、所定フレーム数は、第2のフレームレートと光源周波数とから求められるフリッカ周期となるフレーム数である、ようにされてもよい。信号重畳部により、第1のフレームレートの表示用映像信号に、所定フレーム数のフレームの検出輝度レベルを表示する表示信号が重畳される。
 このように本技術においては、第1のフレームレートの表示用映像信号に、第2のフレームレートの映像信号の連続する所定フレーム数のフレームで検出された輝度レベルを表示する表示信号を重畳するものである。そのため、表示用映像信号で表示される映像上に所定フレーム数のフレームで検出された輝度レベルが、例えばバーあるいは数値などで表示され、フリッカをリアルタイムに確認することが可能となる。
 本技術の他の概念は、
 第1のフレームレートより高い第2のフレームレートの入力映像信号をストレージに記録し、該ストレージから出力映像信号を再生する記録再生部と、
 上記第2のフレームレートの入力映像信号に基づいて、フリッカ確認のための上記第1のフレームレートの表示用映像信号を得る処理部を備える
 サーバにある。
 本技術において、記録再生部により、第1のフレームレートより高い第2のフレームレートの入力映像信号がストレージに記録され、このストレージから出力映像信号が再生される。処理部により、第2のフレームレートの入力映像信号に基づいて、フリッカ確認のための第1のフレームレートの表示用映像信号が得られる。
 例えば、処理部は、フレーム間引き処理により、第2のフレームレートの入力映像信号から第1のフレームレートの表示用映像信号を生成し、第2のフレームレートと光源周波数の関係から間引くフレームを決定する、ようにされてもよい。この場合、例えば、処理部は、第2のフレームレートと光源周波数とからフリッカ周期となるフレーム数を求め、フリッカ周期のフレーム数の連続したフレームが存在するように間引くフレームを決定する、ようにされてもよい。また、この場合、例えば、処理部は、所定フレーム毎に、フリッカ位相が順次変化していくフレームを取り出すように間引くフレームを決定する、ようにされてもよい。
 また、例えば、処理部は、第2のフレームレートの入力映像信号から生成された第1のフレームレートの映像信号に、第2のフレームレートの映像信号の連続する所定フレーム数のフレームの輝度レベルを表示する表示信号を重畳して第1のフレームレートの表示用映像信号を生成する、ようにされてもよい。この場合、例えば。所定フレーム数は、第2のフレームレートと光源周波数とから求められるフリッカ周期となるフレーム数である、ようにされてもよい。
 このように本技術においては、第2のフレームレートの入力映像信号に基づいて、フリッカ確認のための第1のフレームレートの表示用映像信号を得るものである。そのため、第2のフレームレートの映像信号におけるフリッカを容易に確認することが可能となる。
 本技術によれば、HFRカメラの撮像映像信号のフリッカをリアルタイムに確認できる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
実施の形態としての撮像装置の構成例を示すブロック図である。 信号補正回路におけるフリッカ補正回路の構成例を示すブロック図である。 加重加算型フリッカ補正の具体例を示す図である。 撮像装置の不揮発性メモリに格納された重み係数セットの一例を示す図である。 ファインダに表示されるフリッカ補正条件設定のUI画面の一例を示す図である。 通常処理モードおよびフリッカ確認モードにあるときのファインダ表示の一例を示す図である。 通常処理モードにあるときのファインダ出力生成部の処理例(フレーム加算方式)を示す図である。 通常処理モードにあるときのファインダ出力生成部の処理例(間引き方式)を示す図である。 フリッカ確認モードにあるときのファインダ出力生成部の処理例(第1の方法)を示す図である。 フリッカ確認モードにあるときのファインダ出力生成部の処理例(第2の方法)を示す図である。 フリッカ確認モードにあるときのファインダ出力生成部の処理例(第2の方法)を示す図である。 フリッカ確認モードにあるときのファインダ出力生成部の処理例(第3の方法)を示す図である。 実施の形態としてのビデオシステムの構成例を示すブロック図である。 サーバの構成例を示すブロック図である。 サーバの他の構成例を示すブロック図である。 サーバの他の構成例を示すブロック図である。
 以下、発明を実施するための形態(以下、「実施の形態」とする)について説明する。なお、説明を以下の順序で行う。
 1.第1の実施の形態
 2.第2の実施の形態
 3.変形例
 <1.第1の実施の形態>
 [撮像装置の構成例]
 図1は、第1の実施の形態としての撮像装置1の構成例を示している。撮像装置1は、レンズ部10と、撮像部20と、信号補正回路30と、ニー・ガンマ補正回路40と、ファインダ出力生成部50と、本線系信号処理部60と、ファインダ70と、操作入力部80と、不揮発性メモリ90と、CPU(Central Processing Unit)100を有している。
 レンズ部10は、撮影用のレンズまたは複数のレンズの組み合わせで構成される。レンズ部10は、被写体からの光を集光し、撮像部20の撮像面に結像させる。撮像部20は、例えば、行列配列された画素が設けられた撮像面を有するCMOS(Complementary Metal Oxide Semiconductor)イメージセンサやCCD(Charge Coupled Device)などの撮像素子からなる。撮像部20は、レンズ部10を介して入射した被写体の光を撮像面で受光し、画素単位で光電変換することで得られたハイフレームレートの映像信号を信号補正回路30に供給する。
 信号補正回路30は、撮像部20にて生成された映像信号に対して各種の補正を行う。信号補正回路30は、欠陥補正回路31とフリッカ補正回路32(輝度補正回路)を有する。欠陥補正回路31は、撮像部20において欠陥画素の位置に対応する映像信号の検出及びその映像信号の補正を行う。フリッカ補正回路32は、電源周波数とフレームレートとの違いに起因して映像信号に発生するフリッカの消去を行う。信号補正回路30は、補正された映像信号をニー・ガンマ補正回路40に供給する。
 ニー・ガンマ補正回路40は、信号補正回路30から供給された映像信号に対してニー補正とガンマ補正を行い、その結果をファインダ出力生成部50及び本線系信号処理部60に供給する。
 ファインダ出力生成部50は、ニー・ガンマ補正回路40より供給されたハイフレームレートの映像信号を標準フレームレート、例えば60fpsのファインダ表示用の映像信号に変換し、このファインダ表示用の映像信号をファインダ70に出力する。この実施の形態において、ファインダ出力生成部50は、通常処理モードおよびフリッカ確認モードを備える。この2つのモードの切り替えは、例えば、ユーザの操作入力部80からの操作に応じてCPU100により制御される。ファインダ出力生成部50における処理の詳細については後述する。
 また、ファインダ出力生成部50は操作入力部80を用いてユーザに各種の情報の入力を受け付けるためのGUI(Graphical User Interface)の表示データを生成し、表示用の映像信号に重畳するなどして、ファインダ70に出力する。ファインダ70は、ファインダ出力生成部50で得られた映像信号による映像を表示し、また、ファインダ出力生成部50で得られ表示データによるGUI表示などを行う。
 本線系信号処理部60は、ニー・ガンマ補正回路40より供給されたハイフレームレートの映像信号に対して圧縮符号化、誤り訂正符号化などの処理を行い、図示しないストレージに保存したり、伝送ケーブルを通じて外部機器に伝送したりする。
 操作入力部80は、例えば、ユーザからの各種の撮影条件などの設定情報の入力を受け付ける。不揮発性メモリ90は、例えば、フリッカ補正回路32において用いられる複数の重み係数のセットなどが格納されたメモリである。CPU100は、撮像装置1の全体的な制御を行う制御回路である。
 「フリッカ補正回路の詳細」
 図2は、信号補正回路30におけるフリッカ補正回路32の構成例を示している。フリッカ補正回路32は、メモリコントローラ321と、メモリ322と、加重加算回路323を有し、加重加算型フリッカ補正を行う。なお、ここで説明する加重加算型フリッカ補正の方式は一例であって、フリッカ補正回路32が一般的なフリッカ補正方式でフリッカ補正を行うものであってもよい。
 フリッカ補正回路32は、CPU100より与えられたフリッカ補正条件に基づいて、映像信号に対するフリッカ補正を行う。CPU100は、例えば、撮像装置1に設けられた操作入力部80を使ってユーザから入力された各種の設定情報に従って、信号補正回路30の各種補正条件等を設定する。ユーザは、フリッカ補正に関する設定情報を入力することができる。フリッカ補正に関する設定情報には、電源周波数と、フレームレートと、フリッカ補正モードを指定するアキュムレーションタイプ(以下、「ACMタイプ(ACM TYPE)」と呼ぶ。)がある。
 ここで、フリッカ補正に関する設定情報について説明する。電源周波数には、例えば、50Hz、60Hzなどの選択肢がある。ユーザは、撮像装置1を使用する地域に供給される商用電源周波数に合せて電源周波数の設定値を選択すればよい。
 フレームレートには、例えば、120Pfps、180fps、240fps、480fpsなどの選択肢がある。フレームレートが電源周波数の2倍つまり蛍光管の発光周波数よりも低い場合には、蛍光管の発光周波数でシャッターを駆動させることによってフリッカを消去できる。しかしながら、フレームレートが電源周波数の2倍(蛍光管の発光周波数)よりも高い場合には、シャッターによるフリッカの消去は不可能である。そのため、フリッカ補正回路32による信号処理によってフリッカ補正を行う必要がでてくる。
 ACMタイプは、加重加算回路323によるフリッカ補正のための加重加算対象となるM個のフレーム各々に付与する重み係数のセットを指定するための情報である。CPU100は、操作入力部80を操作してユーザにより入力された設定情報をもとに、重み係数のセットを判定し、加重加算回路323に各々の重み係数を設定する。
 また、CPU100は、操作入力部80を操作してユーザにより入力された設定情報をもとに、メモリ322に保存するフレームの数をメモリコントローラ321に設定する。メモリコントローラ321は、CPU100による制御の下、信号補正回路30内の前段の補正回路によって補正された映像信号をメモリ322に保存し、設定されたM個のフレームの映像信号がメモリ322に保存されたところでメモリ322からそれらM個のフレームの映像信号を読み込み、加重加算回路323に供給する。
 メモリ322は、信号補正回路30内の前段の補正回路によって補正された映像信号が少なくともMフレーム分保存される記憶領域である。メモリ322には、常に新しく入力された少なくともMフレーム分の映像信号が保存される。メモリ322に保存されるフレーム数はMより多くてもよい。
 加重加算回路323は、メモリコントローラ321によってメモリ322から読み出されて連続して供給されたMフレームの映像信号を入力し、これらのフレームの映像信号に対してCPU100によって設定された重み係数を用いた加重加算および平均化を実行して、加重加算型フリッカ補正によるフリッカ補正映像を生成する回路である。ここで、Mの値は、フレームレートを光源周波数(電源周波数×2)で割って得られる値を丸めた整数を上限として設定された2以上の整数である。
 この加重加算型フリッカ補正は、加重加算対象である連続するM個のフレームの映像信号に対して、M個のフレーム中の各順位のフレームに対して個別に設定された重み係数を掛け、それらの結果を加算平均した結果を、M個のフレーム中の基準フレームの映像信号に対するフリッカ補正結果とする。ここで、基準フレームは、例えば、フリッカ補正回路32に連続して供給されたM個のフレームのうち所定順位のフレーム、例えば、最後に供給されたフレームなどである。最後に供給されたフレームを基準フレームとする場合、加重加算対象であるM個の連続フレームとは、この基準フレームと、基準フレームより時間的に前にフリッカ補正回路32に連続して供給された(M-1))個のフレームのことである。
 図3は、加重加算型フリッカ補正の具体例を示している。この例では、加重加算対象のフレーム数を示すMの値を4とし、M個の連続フレームにおける各順位のフレームに予め個別に設定された重み係数の値を基準フレームの側から“4”、“3”、“2”、“1”とする。これらの重み係数の値は、ユーザが操作入力部80を使って予め手入力したものであってよいし、不揮発性メモリ90に予め格納されたものであってよい。なお、このようにM個の連続フレームにおける各順位のフレームに対応付けられる複数の重み係数の値のまとまりを、以降「重み係数セット」と呼ぶ。
 以上の条件において、加重加算回路323は、次のように動作する。まず、加重加算回路323は、基準フレームの映像信号に重み係数“4”を掛けて、基準フレームの加重映像信号を生成する。また、加重加算回路323は、基準フレームの直前に入力されたフレーム(-1F)の映像信号に重み係数“3”を掛けて、フレーム(-1F)の加重映像信号を生成する。
 また、加重加算回路323は、フレーム(-1F)の直前に入力されたフレーム(-2F)の映像信号に重み係数“2”を掛けて、フレーム(-2F)の加重映像信号を生成する。また、加重加算回路323は、フレーム(-2F)の直前に入力されたフレーム(-3F)の映像信号に重み係数“1”を掛けて、フレーム(-3F)の加重映像信号を生成する。
 次に、加重加算回路323は、基準フレームの加重映像信号、フレーム(-1F)の加重映像信号、フレーム(-2F)の加重映像信号、およびフレーム(-3F)の加重映像信号について、対応する(同じ位置の)画素毎に値を加算してMフレーム分の加重加算映像信号を生成する。そして、加重加算回路323は、Mフレーム分の加重加算映像信号を、重み係数セットにおける重み係数の合算値で除算する。この結果が基準フレームの映像信号に対するフリッカ補正映像となる。
 このような加重加算型フリッカ補正を行うことによって、フリッカ補正映像における動体像全体のブレ方が均一傾向となることを防止することができ、より自然な見え方のモーションブラーを得ることができる。また、M個のフレーム中の各順位のフレームに対して個別に設定された重み係数の値のうち、基準フレームに対して設定された重み係数の値を最大にすることによって、基準フレームの動体像から離れるにつれてかすれ具合が増し、より自然なモーションブラーを得ることができる。
 重み係数セットにおける各重み係数の値の差はフリッカ補正映像にフリッカ成分を残す要因ともなる。一方、モーションブラーの見え方は動体像のサイズ、色、速度などの様々な条件によって変わってくる。そのため、モーションブラーの見え方だけに着目して重み係数セットにおける各重み係数の値を選定すると、場合によっては、フリッカ補正された映像に目立つフリッカが残ってしまう可能性がある。
 そこで、この実施の形態では、モーションブラーの見え方とフリッカ消去効果の両面から最良の重み係数セットをユーザが選択可能としている。図4は、撮像装置1の不揮発性メモリ90に格納された重み係数セットの一例を示している。この例では、“1”から“3”までの3種類のACMタイプによって重み係数セットが選択可能とされている。図4の例において、重み係数の値が“0”のフレームは、映像信号に“0”が掛けられることによって結果的に加重加算対象ではなくなる。
 図4では、電源周波数とフレームレートとの1つの組み合わせに対し、“1”から“3”までのACMタイプによって計3種類の重み係数セットが選択できるものとしたが、さらに多くの種類の重み係数セットが用意されてもよい。なお、重み係数セットにおける各々の重み係数の値は、電源周波数とフレームレートとの組み合わせ毎に決められるものである。
 個々の重み係数セットにおいて、基準フレームに割り当てられる重み係数の値は最大値とされる。基準フレーム以外の(M-1)個のフレームの重み係数の値は、基準フレームから時間的に離れたフレームの重み係数の値が、そのフレームよりも基準フレームに時間的に近いフレームの重み係数の値よりも大きくならないように決められる。
 言い換えれば、所定順位のフレーム以外の(M-1)個のフレーム中の所定順位のフレームからの距離が互いに異なる複数のフレームについて、距離が相対的に長いフレームに設定された重み係数の値は距離が相対的に短いフレームに設定された重み係数の値以下に設定されている。これにより、基準フレームから時間的により離れたフレーム中の動体像成分によるフリッカ補正映像への影響度を抑制することができ、より自然な見た目のモーションブラーを得ることができる。
 また、ACMタイプによって選択される複数の種類の重み係数セットにおいて、ACMタイプが“1”の重み係数セットは、フリッカ補正の強度が最も高く、従ってモーションブラーの見え方に影響を与える強度が最も高く、ACMタイプが“2”、“3”になるにつれて強度が次第に低くなるように、重み係数セット内の重み係数の値が設定されている。なお、ACMタイプにより選択される重み係数セットの1つに、重み係数の値が同一のものが存在してもかまわない。
 図5は、例えば、ファインダ70に表示されるフリッカ補正条件設定のUI画面の一例を示している。この例は、フリッカ補正条件として、電源周波数=50Hz、フレームレート=120fps、ACMタイプ=1が設定された場合を示している。
 操作入力部80を用いてユーザによって選択された電源周波数、フレームレートおよびACMタイプはCPU100に与えられる。CPU100は不揮発性メモリ90から、上記与えられた電源周波数、フレームレートおよびACMタイプの組み合わせに対応する重み係数セットを参照して、その重み係数セットにおける各順位のフレーム毎の重み係数の値を加重加算回路323に設定する。これにより、加重加算回路323は、入力された連続するM個のフレームの映像信号に対して、設定された重み係数の値による加重加算を用いたフリッカ補正を実行する。
 ユーザは、自身で設定したフリッカ補正条件で得られたフリッカ補正映像におけるモーションブラーの見え方とフリッカ消去効果を、ファインダ出力生成部50をフリッカ確認モードとして、ファインダ70に表示される映像などで確認する。この後、ユーザは、必要に応じて、操作入力部80などを操作してACMタイプのみを変更した次のフリッカ補正条件を設定し、このフリッカ補正条件でフリッカ補正を実行させることによって得られたフリッカ補正映像を確認する。
 ユーザは、このようにしてACMタイプの変更とフリッカ補正映像の確認を繰り返し、モーションブラーの表れ方とフリッカ成分の消去の程度が最良のACMタイプを決定する。撮像装置1の多くの運用環境では、電源周波数とフレームレートが決められたなかで、ユーザはACMタイプのみを切り替えて、その都度フリッカ補正映像を確認し、最良のACMタイプを決定することになる。
 ACMタイプによって選択される複数の種類の重み係数セットにおいて、ACMタイプが“1”の重み係数セットは、モーションブラーの見え方に影響を与える強度が最も高く、ACMタイプが“2”、“3”になるにつれて強度が次第に低くなるように、重み係数セット内の重み係数の値が設定されている。
 ユーザは、最初にACMタイプが“1”の重み係数セットを選択することによってモーションブラーの見え方を大きく変えたフリッカ補正映像を確認し、その後、“2”、“3”のACMタイプを順に選択してフリッカ補正映像を確認することができる。これにより、ユーザはモーションブラーの見え方の変化を段階的に抑えたフリッカ補正映像を順番に確認することができ、最適な重み係数セットを決定する際の混乱が生じにくくなる。
 なお、ここではACMタイプが“1”、“2”、“3”の順に、重み係数セットがモーションブラーの見え方に影響を与える強度が弱くなるように重み係数セット内の重み係数の値が設定されることとしたが、逆に、ACMタイプが“1”、“2”、“3”の順に、重み係数セットがモーションブラーの見え方に影響を与える強度が強くなるように重み係数セット内の重み係数の値が設定されてもよい。
 「ファインダ出力生成部の説明」
 上述したように、ファインダ出力生成部50は、通常処理モードおよびフリッカ確認モードを備える。この2つのモードの切り替えは、例えば、ユーザの操作入力部80からの操作に応じてCPU100により制御される。
 例えば、ファインダ出力生成部50がフリッカ確認モードにあるとき、ファインダ出力生成部50では、当該フリッカ確認モードにあることをファインダ70に表示するための表示データが作成されて、映像信号に重畳される。これにより、ファインダ70に表示される映像には、確認モードにあることの表示が存在したものとなり、ユーザは、フリッカ確認モードにあることを容易に確認できる。
 例えば、図6(b)が通常処理モードのファインダ表示映像であるとき、フリッカ確認モードにあるときは、図6(a)に示すように、ファインダ表示映像上にフリッカを示す「FC」の文字が点滅表示される。なお、フリッカ確認モードにあることをユーザに明示するための表示は、この例に限定されるものではなく、その他の態様であってもよい。例えば、ファインダ表示映像に特定色の枠を付加するなどであってもよい。
 通常処理モードについて説明する。ファインダ出力生成部50は、通常処理モードとされるとき、入力されるハイフレームレートの映像信号に対して、従来周知のフレーム加算方式あるいは間引き方式によって、ファインダ表示用の標準フレームレートの映像信号を生成する。
 図7は、フレーム加算方式による処理例を示している。この例は、入力映像信号のフレームレートが180fpsであって電源周波数が60Hz(光源周波数が120Hz)の場合を示している。
 図7(a)は、入力映像信号に対応した本線映像信号を示している。この本線映像信号は、180fpsのハイフレームレートの映像信号であり、A1、A2、A3、B1、B2、B3、C1、C2、C3、・・・のように各フレームの映像信号が連続したものとなっている。
 この180fpsのハイフレームレートの映像信号には、120Hzの光源周波数による光源の影響によりフリッカが存在する。A、B、C、・・・に添えられている1、2、3の数字は、フリッカの3つの位相に対応している。なお、各フレームの図面上の明暗は、フリッカによる各フレームの輝度レベルの違いを示している。
 図7(b)は、フレーム加算方式で得られたファインダ表示用の標準フレームレート(60fps)の映像信号を示している。この場合、「A1,A2,A3」、「B1,B2,B3」、「C1,C2,C3」、・・・の各3フレームで加算平均が行われて、ファインダ用表示用の映像信号の各フレームが生成されていく。
 このようにフレーム加算方式で得られたファインダ表示用の映像信号にあっては、加算によってフリッカによる各フレームの輝度差が失われことから、ファインダ表示映像は本線映像信号に含まれるフリッカを表現できないものとなる。逆に、フリッカの影響が抑制された映像の表示が可能となる。
 図8は、間引き方式による処理例を示している。この例も、図7の例と同様に、入力映像信号のフレームレートが180fpsであって電源周波数が60Hz(光源周波数が120Hz)の場合を示している。
 図8(a)は、図7(a)と同様に、入力映像信号に対応した本線映像信号を示している。図8(b)は、間引き方式で得られたファインダ表示用の標準フレームレート(60fps)の映像信号を示している。この場合、「A1,A2,A3」、「B1,B2,B3」、「C1,C2,C3」、・・・の各3フレームから、フリッカ位相が同一のフレーム、この例ではA2、B2、C2、・・・が取り出されて、ファインダ表示用の映像信号の各フレームが生成されていく。
 このように間引き方式で得られたファインダ表示用の映像信号にあっては、フリッカ位相が同一のフレームを取り出していくことから、ファインダ表示映像は本線映像信号に含まれるフリッカを表現できないものとなる。逆に、フリッカの影響が抑制された映像の表示が可能となる。
 次に、フリッカ確認モードについて説明する。ファインダ出力生成部50は、フリッカ確認モードとされるとき、入力されるハイフレームレートの映像信号に対して、本線映像信号に含まれるフリッカを表現できるように、以下の第1から第3の方法のいずれかによってファインダ表示用の標準フレームレートの映像信号を生成する。
 「第1の方法」
 第1の方法においては、基本的に、ファインダ出力生成部50は、入力されるハイフレームレート(第2のフレームレート)の映像信号に対してフレーム間引き処理を行って、ファインダ表示用の標準フレームレート(第1のフレームレート)の映像信号を生成する。ここで、間引くフレームは、入力映像信号のフレームレートと電源周波数の2倍である光源周波数の関係から決定される。
 第1の方法においては、入力映像信号のフレームレートと電源周波数の2倍である光源周波数とからフリッカ周期となるフレーム数が求められ、当該フリッカ周期となるフレーム数の連続したフレームが存在するように間引くフレームが決定される。
 ここで、フリッカ周期となるフレーム数は、以下の数式(1)から求められる。ここで、LCM(Element1, Element2)は、“Element1, Element2”の最小公倍数を示す。
 フリッカ周期となるフレーム数
  =LCM(光源周波数,入力映像信号のフレームレート)/(光源周波数)・・・(1)
 図9は、第1の方法による処理の一例を示している。この例は、入力映像信号のフレームレートが120fpsであって電源周波数が50Hz(光源周波数が100Hz)の場合を示している。この場合、この120fpsの入力映像信号には120Hzの光源周波数による光源の影響によりフリッカが存在し、上述の数式(1)から、フリッカ周期となるフレーム数は6と求められる。
 図9(a)は、入力映像信号に対応した本線映像信号を示している。この本線映像信号は、120fpsのハイフレームレートの映像信号であり、A1、A2、A3、A4、A5、A6、B1、B2、B3、B4、B5、B6、C1、C2、C3、C4、C5、C6、・・・のように各フレームの映像信号が連続したものとなっている。A、B、C、・・・に添えられている1、2、3、4、5、6の数字は、フリッカの6つの位相に対応している。なお、各フレームの図面上の明暗は、フリッカによる各フレームの輝度レベルの違いを示している。
 図9(b)は、第1の方法による処理で得られたファインダ表示用の標準フレームレート(60fps)の映像信号を示している。この場合、フリッカ周期となるフレーム数分であるA1~A6の各フレームがメモリに保存され、順次、各フレームが標準フレームレート(60fps)でメモリから読み出されて出力される。
 このようにメモリから読み出されている間のフレーム(B1~B6のフレーム)は、メモリには保存されずに、間引かれる。この後、次のフリッカ周期となるフレーム数分であるC1~C6の各フレームがメモリに保存され、順次、各フレームが標準フレームレート(60fps)でメモリから読み出されて出力される。以下、これの繰り返しとなり、ファインダ表示用の映像信号の各フレームが生成されていく。
 このように第1の方法で得られたファインダ表示用の映像信号は、フリッカの位相的に連続したフレームからなるものとなる。そのため、ファインダ表示映像は、本線映像信号に含まれるフリッカが表現され、リアルタイムに本線映像信号に含まれるフリッカの程度を確認できるものとなる。
 なお、理論的には、数式(1)からフリッカ周期となるフレーム数を正確に求めることができる。しかし、入力映像信号のフレームレートと光源周波数との関係によっては、フリッカ周期となるフレーム数が非常に大きくなる場合も出てくることから、必要とするメモリ容量の観点から現実的ではない場合も発生する。例えば、入力映像信号のフレームレートが59.94fpsであって電源周波数が50Hz(光源周波数が100Hz)の場合などである。
 そのような場合、フリッカ周期となるフレーム数は、以下の数式(2)から求められる、ようにされてもよい。ここで、ROUND(Element)は、“Element”を丸めた値を示す。
 フリッカ周期となるフレーム数
  =ROUND(入力映像信号のフレームレート/光源周波数) ・・・(2)
 例えば、入力映像信号のフレームレートが239.76fps(=4×59.94fps)であって電源周波数が60Hz(光源周波数が120Hz)の場合、この数式(2)により、フリッカ周期となるフレーム数は2となる。数式(1)の代わりに数式(2)を用いてフリッカ周期となるフレーム数が求められたとしても、実用上多くの場合で問題はない。
 「第2の方法」
 第2の方法においては、基本的に、ファインダ出力生成部50は、入力されるハイフレームレート(第2のフレームレート)の映像信号に対してフレーム間引き処理を行って、ファインダ表示用の標準フレームレート(第1のフレームレート)の映像信号を生成する。ここで、間引くフレームは、入力映像信号のフレームレートと電源周波数の2倍である光源周波数の関係から決定される。
 第2の方法においては、入力映像信号のフレームレートがファインダ表示用の標準フレームレートのN倍であるとき、Nフレーム毎に、フリッカ位相を異にするフレームを取り出すように間引くフレームが決定される。
 図10は、第2の方法による処理の一例を示している。この例は、入力映像信号のフレームレートが180fpsであって電源周波数が60Hz(光源周波数が120Hz)の場合を示している。この場合、入力映像信号のフレームレートが180fpsで標準フレームレートが60fpsで、N=3となる。さらに、この場合、上述の数式(1)で求められるフリッカ周期となるフレーム数は3であり、Nの値と一致する。
 図10(a)は、入力映像信号に対応した本線映像信号を示している。この本線映像信号は、180fpsのハイフレームレートの映像信号であり、A1、A2、A3、B1、B2、B3、C1、C2、C3、D1、D2、D3、・・・のように各フレームの映像信号が連続したものとなっている。A、B、C、D、・・・に添えられている1、2、3、の数字は、フリッカの3つの位相に対応している。なお、各フレームの図面上の明暗は、フリッカによる各フレームの輝度レベルの違いを示している。
 図10(b)は、第2の方法による処理で得られたファインダ表示用の標準フレームレート(60fps)の映像信号を示している。この場合、「A1,A2,A3」、「B1,B2,B3」、「C1,C2,C3」、・・・の各3フレームから、フリッカ位相が順次変化していくフレーム、この例ではA3、B1、C2、・・・が取り出されて、ファインダ表示用の映像信号の各フレームが生成されていく。
 このように第2の方法で得られたファインダ表示用の映像信号は、フリッカの位相的に連続したフレームからなるものとなる。そのため、ファインダ表示映像は、本線映像信号に含まれるフリッカが表現され、リアルタイムに本線映像信号に含まれるフリッカの程度を確認できるものとなる。
 なお、既存の高速撮像装置は、ハイフレームレートの撮像映像信号を一度メモリに保存し、倍速数のフレームを並列で出力する仕組みを有する。フリッカ周期となるフレーム数がこの並列数と同じあるいは1少ない場合のみ、この並列出力している中から選択することで、第2の方法の処理を実現できる。
 図11は、第2の方法による処理の他の一例を示している。この例は、入力映像信号のフレームレートが120fpsであって電源周波数が50Hz(光源周波数が100Hz)の場合を示している。この場合、入力映像信号のフレームレートが120fpsで標準フレームレートが60fpsで、N=2となる。さらに、この場合、上述の数式(1)で求められるフリッカ周期となるフレーム数は6であり、Nの値とは一致しない。
 図11(a)は、入力映像信号に対応した本線映像信号を示している。この本線映像信号は、120fpsのハイフレームレートの映像信号であり、A1、A2、A3、A4、A5、A6、B1、B2、B3、B4、B5、B6、C1、C2、C3、C4、C5、C6、・・・のように各フレームの映像信号が連続したものとなっている。A、B、C、・・・に添えられている1、2、3、4、5、6の数字は、フリッカの6つの位相に対応している。なお、各フレームの図面上の明暗は、フリッカによる各フレームの輝度レベルの違いを示している。
 図11(b)は、第2の方法による処理で得られたファインダ表示用の標準フレームレート(60fps)の映像信号を示している。この場合、「A1,A2」、「A3,A4」、「A5,A6」、「B1,B2」、・・・の各2フレームから、フリッカ位相が順次変化していくフレーム、この例ではA1、A3、A5、B2、・・・が取り出されて、ファインダ表示用の映像信号の各フレームが生成されていく。
 このように第2の方法で得られたファインダ表示用の映像信号は、フリッカ位相が順次変化していくフレームからなるものとなる。この場合、フリッカ周期となるフレーム数とNの値とが一致しないことから、ファインダ表示用の映像信号は、フリッカの位相的に連続したフレームからなるものとはならない。
 そのため、ファインダ表示映像では、本線映像信号に含まれるフリッカのおおよそが表現され、リアルタイムに本線映像信号に含まれるフリッカのおおよその程度を確認できるものとなる。つまり、本線映像信号に含まれるフリッカの程度を正しくは把握できないが、フリッカ補正の効き具合を相対的に把握するのには有用である。
 「第3の方法」
 第3の方法においては、ファインダ出力生成部50は、入力されるハイフレームレート(第2のフレームレート)の映像信号から、従来周知のフレーム加算方式あるいは間引き方式によって、ファインダ表示用の標準フレームレート(第1のフレームレート)の映像信号を生成する。
 また、ファインダ出力生成部50は、入力映像信号の連続する所定フレーム数の輝度レベルを検出し、ファインダ表示用の映像信号に、所定フレーム数のフレームの輝度検出レベルを示す表示信号を重畳する。例えば、所定フレーム数は、例えば、上述の数式(1)あるいは(2)によって求められるフリッカ周期となるフレーム数とされる。
 これにより、ファインダ表示用の映像信号による映像上に、連続する所定フレーム数のフレームで検出された輝度レベルが、例えばバーあるいは数値などで表示され、ユーザは、本線映像信号に含まれるフリッカの程度をリアルタイムに確認可能となる。
 図12は、第3の方法による処理の一例を示している。この例は、入力映像信号のフレームレートが180fpsであって電源周波数が60Hz(光源周波数が120Hz)の場合を示している。上述の数式(1)で求められるフリッカ周期となるフレーム数は3となる。
 図12(a)は、入力映像信号に対応した本線映像信号を示している。この本線映像信号は、180fpsのハイフレームレートの映像信号であり、A1、A2、A3、B1、B2、B3、C1、C2、C3、D1、D2、D3、・・・のように各フレームの映像信号が連続したものとなっている。A、B、C、D、・・・に添えられている1、2、3、の数字は、フリッカの3つの位相に対応している。なお、各フレームの図面上の明暗は、フリッカによる各フレームの輝度レベルの違いを示している。
 図12(b)は、第3の方法による処理で得られたファインダ表示用の標準フレームレート(60fps)の映像信号を示している。この場合、「A1,A2,A3」、「B1,B2,B3」、「C1,C2,C3」、・・・の各3フレームで従来周知のフレーム加算方式あるいは間引き方式によって加算あるいは間引きが行われて、ファインダ用表示用の映像信号の各フレームが生成されていく。
 また、各3フレームにおいて、各フレームの輝度レベルの値として全画素積分値が求められ、その検出レベルを示す表示信号がファインダ表示用の映像信号に重畳される。なお、図示の例においては、各フレームの輝度レベルの値をバー表示する例を示しているが、数値などで示すものとされてもよい。
 このように第3の方法では、従来周知のフレーム加算方式あるいは間引き方式によって生成されたファインダ表示用の標準フレームレート(第1のフレームレート)の映像信号に、連続する所定フレーム数、例えばフリッカ周期となるフレーム数のフレームの輝度検出レベルを示す表示信号が重畳される。そのため、ファインダ表示用の映像信号による映像上に、所定フレーム数のフレームで検出された輝度レベルが、例えばバーあるいは数値などで表示される。ユーザは、表示映像により従来通りの明るさやホワイトバランス等をリアルタイムに確認しつつ、本線映像信号に含まれるフリッカの程度をリアルタイムに確認可能となる。
 上述したように、図1に示す撮像装置1においては、ファインダ出力生成部50をフリッカ確認モードとすることで、本線映像信号に含まれるフリッカの程度をファインダ70の表示映像でリアルタイムに確認可能となる。これにより、フリッカ補正回路32によるフリッカ補正の効果を確認でき、ユーザは、必要に応じて、操作入力部80からACMタイプの変更などを行ってフリッカ補正強度の調整を簡単かつ適切に行うことが可能となる。
 <2.第2の実施の形態>
 [ビデオシステムの構成例]
 図13は、第2の実施の形態としてのビデオシステム500の構成例を示している。このビデオシステム500は、カメラとカメラ・コントロール・ユニット(CCU:Camera Control Unit)からなるカメラシステムを所定数有している。この実施の形態では、カメラ501AとCCU502Aからなるカメラシステムと、カメラ501BとCCU502Bからなるカメラシステムの2つを有している。CCU502A,502Bは、カメラ501A,501Bからのハイフレームレートの撮像映像信号に対して画づくりの処理をする。
 また、ビデオシステム500は、リプレイ再生等のために映像ファイルの記録再生を行うサーバ(Server)521を有している。このサーバ521に記録されるファイルには、CCU502A,502Bから出力されるハイフレームレートの映像信号503A,503Bのファイルも含まれる。CCU502A,502Bから出力されるハイフレームレートの映像信号503A,503Bは、後述するスイッチャ525を介してサーバ521に、SDI信号として送られる。
 この実施の形態において、サーバ521は、ハイフレームレートの映像信号503(503A,503B)に基づいて、フリッカ確認のための標準フレームレートの表示用信号を生成する。ここで、サーバ521は、このフリッカ確認のための表示用映像信号を、上述の第1の実施の形態におけるファインダ出力生成部50と同様に、「第1の方法」、「第2の方法」、あるいは「第3の方法」により、生成する。
 第1の方法においては、ハイフレームレート(第2のフレームレート)の映像信号に対してフレーム間引き処理を行って、標準フレームレート(第1のフレームレート)の表示用像信号を生成する。ここで、間引くフレームは、入力映像信号のフレームレートと電源周波数の2倍である光源周波数の関係から決定される。すなわち、この第1の方法においては、ハイフレームレート(第2のフレームレート)の映像信号のフレームレートと電源周波数の2倍である光源周波数とからフリッカ周期となるフレーム数が求められ、当該フリッカ周期となるフレーム数の連続したフレームが存在するように間引くフレームが決定される(図9参照)。
 この第1の方法で得られたフリッカ確認のための標準フレームレートの表示用映像信号は、フリッカの位相的に連続したフレームからなるものとなる。そのため、表示映像には、ハイフレームレートの映像信号に含まれるフリッカが表現され、そのフリッカの程度を容易に確認できるものとなる。
 また、第2の方法においては、ハイフレームレート(第2のフレームレート)の映像信号に対してフレーム間引き処理を行って、標準フレームレート(第1のフレームレート)の表示用映像信号を生成する。ここで、間引くフレームは、入力映像信号のフレームレートと電源周波数の2倍である光源周波数の関係から決定される。すなわち、この第2の方法においては、入力映像信号のフレームレートが標準フレームレートのN倍であるとき、Nフレーム毎に、フリッカ位相を異にするフレームを取り出すように間引くフレームが決定される(図10、図11参照)。
 この第2の方法で得られたフリッカ確認のための標準フレームレートの表示用映像信号は、フリッカ位相が順次変化していくフレームからなるものとなる。そのため、表示映像には、ハイフレームレートの映像信号に含まれるフリッカが表現され、そのフリッカの程度を容易に確認できるものとなる。
 また、第3の方法においては、ハイフレームレート(第2のフレームレート)の映像信号から、従来周知のフレーム加算方式あるいは間引き方式によって、標準フレームレート(第1のフレームレート)の映像信号を生成する。そして、ハイフレームレートの映像信号の連続する所定フレーム数の輝度レベルを検出し、上述の標準フレームレートの映像信号に、所定フレーム数のフレームの輝度検出レベルを示す表示信号を重畳して、標準フレームレートの表示用像信号を生成する(図12参照)。例えば、所定フレーム数は、第2のフレームレートと光源周波数とから求められるフリッカ周期となるフレーム数である。
 この第3の方法で得られたフリッカ確認のための標準フレームレートの表示用映像信号は、所定フレーム数のフレームの輝度検出レベルを示す表示信号を重畳してなるものである。そのため、表示映像上に、連続する所定フレーム数のフレームで検出された輝度レベルが、例えばバーあるいは数値などで表示され、ユーザは、ハイフレームレートの映像信号に含まれるフリッカの程度を容易に確認できるものとなる。
 また、ビデオシステム500は、フリッカ確認のための標準フレームレートの表示用映像信号がSDI信号として入力され、サーバ521のオペレータにフリッカ確認のための表示映像を提示するモニタ523を有している。なお、このモニタ523は、フリッカ確認のための表示映像を提示するだけでなく、ストレージに記録されているファイル内の映像を適宜確認するためのモニタを兼用していてもよい。
 また、ビデオシステム500は、スイッチャ(Switcher)525を有している。CCU502A,502Bで得られたハイフレームレートの映像信号503A,503Bは、スイッチャ525にSDI信号として入力される。また、サーバ521で再生されたハイフレームレートの映像信号524もスイッチャ525にSDI信号として入力される。
 スイッチャ525は、カメラシステム、サーバ521などの複数の入力機器から入力されたハイフレームレートの映像信号から選択的に所定の映像信号を取り出して本線信号526として出力するか、あるいは複数の入力機器から入力されたハイフレームレートの映像信号のうち任意の映像信号をミックスして本線信号526として出力する。
 「サーバの構成」
 図14は、サーバ521の構成例を示している。このサーバ521は、SDI入力部531と、エンコーダ532と、メモリコントローラ533と、ストレージ534と、デコーダ535と、SDI出力部536と、切換スイッチ537を有している。
 SDI入力部531は、ハイフレームレートの映像信号503をSDI信号として受け取り、そのSDI信号からハイフレームレートの映像信号503を抽出する。ここで、ハイフレームレートの映像信号503は1系統で入力される場合と、複数系統で入力される場合のいずれであってもよい。例えば、ハイフレームレートの映像信号503が180fpsの映像信号であった場合、例えば、1系統の180fpsの映像信号で供給されるか、あるいは3系統の60fpsの映像信号で供給される。
 エンコーダ532は、SDI入力部531で得られたハイフレームレートの映像信号に対して例えばXAVC等の圧縮フォーマットによる符号化処理を施してファイル(記録ファイル)を生成する。エンコーダ532で生成されたファイルは、メモリコントローラ533の制御のもと、ストレージ534に記録され、再生される。メモリコントローラ533は、記録再生部を構成している。
 メモリコントローラ533は、通常出力モードでは、ストレージ534からハイフレームレートの映像信号を再生してそのまま出力する。一方、フリッカ確認モードでは、ストレージ534からハイフレームレートの映像信号を再生し、さらにこのハイフレームレートの映像信号に対して処理をして、上述した第1の方法、第2の方法あるいは第3の方法によるフリッカ確認のための標準フレームレートの表示用映像信号を出力する。メモリコントローラ533は、記録再生部を構成すると共に映像信号の処理部を構成している。
 デコーダ535は、メモリコントローラ533から出力された映像信号に対して復号化処理を施してベースバンドの映像信号を得る。SDI出力部536は、デコーダ535で得られた映像信号をSDI信号として出力する。切換スイッチ537は、通常出力モードではa側に接続され、SDI出力部536で得られたハイフレームレートの映像信号(SDI信号)524を本線出力として出力する。一方、切換スイッチ537は、フリッカ確認モードではb側に接続され、SDI出力部536で得られたフリッカ確認のための標準フレームレートの表示用映像信号(SDI信号)522をフリッカ確認出力として出力する。
 図15は、サーバ521の他の構成例を示している。この図15において、図14と対応する部分には同一符号を付して示している。このサーバ521は、SDI入力部531と、エンコーダ532と、メモリコントローラ533と、ストレージ534と、デコーダ535,538と、SDI出力部536,539を有している。
 SDI入力部531は、ハイフレームレートの映像信号503をSDI信号として受け取り、そのSDI信号からハイフレームレートの映像信号503を抽出する。ここで、ハイフレームレートの映像信号503は1系統で入力される場合と、複数系統で入力される場合のいずれであってもよい。例えば、ハイフレームレートの映像信号503が180fpsの映像信号であった場合、例えば、1系統の180fpsの映像信号で供給されるか、あるいは3系統の60fpsの映像信号で供給される。
 エンコーダ532は、SDI入力部531で得られたハイフレームレートの映像信号に対して例えばXAVC等の圧縮フォーマットによる符号化処理を施してファイル(記録ファイル)を生成する。エンコーダ532で生成されたファイルは、メモリコントローラ533の制御のもと、ストレージ534に記録され、再生される。メモリコントローラ533は、記録再生部を構成している。
 メモリコントローラ533は、ストレージ534からハイフレームレートの映像信号を再生してそのまま出力する。デコーダ535は、メモリコントローラ533から出力されたハイフレームレートの映像信号に対して復号化処理を施してベースバンドの映像信号を得る。SDI出力部536は、デコーダ535で得られたハイフレームレートの映像信号をSDI信号とし、このハイフレームレートの映像信号(SDI信号)524を本線出力として出力する。
 また、メモリコントローラ533は、ストレージ534からハイフレームレートの映像信号を再生し、さらにこのハイフレームレートの映像信号に対して処理をして、上述した第1の方法、第2の方法あるいは第3の方法によるフリッカ確認のための標準フレームレートの表示用映像信号を出力する。メモリコントローラ533は、記録再生部を構成すると共に映像信号の処理部を構成している。
 デコーダ538は、メモリコントローラ533から出力された標準フレームレートの表示用映像信号に対して復号化処理を施してベースバンドの映像信号を得る。SDI出力部539は、デコーダ538で得られた標準フレームレートの表示用映像信号をSDI信号とし、この表示用映像信号(SDI信号)522をフリッカ確認出力として出力する。
 図16は、サーバ521のさらに他の構成例を示している。この図16において、図15と対応する部分には同一符号を付して示している。このサーバ521は、SDI入力部531と、エンコーダ532と、メモリコントローラ533と、ストレージ534と、デコーダ535と、SDI出力部536,539と、処理部541を有している。
 SDI入力部531は、ハイフレームレートの映像信号503をSDI信号として受け取り、そのSDI信号からハイフレームレートの映像信号503を抽出する。ここで、ハイフレームレートの映像信号503は1系統で入力される場合と、複数系統で入力される場合のいずれであってもよい。例えば、ハイフレームレートの映像信号503が180fpsの映像信号であった場合、例えば、1系統の180fpsの映像信号で供給されるか、あるいは3系統の60fpsの映像信号で供給される。
 エンコーダ532は、SDI入力部531で得られたハイフレームレートの映像信号に対して例えばXAVC等の圧縮フォーマットによる符号化処理を施してファイル(記録ファイル)を生成する。エンコーダ532で生成されたファイルは、メモリコントローラ533の制御のもと、ストレージ534に記録され、再生される。メモリコントローラ533は、記録再生部を構成している。
 メモリコントローラ533は、ストレージ534からハイフレームレートの映像信号を再生してそのまま出力する。デコーダ535は、メモリコントローラ533から出力されたハイフレームレートの映像信号に対して復号化処理を施してベースバンドの映像信号を得る。SDI出力部536は、デコーダ535で得られたハイフレームレートの映像信号をSDI信号とし、このハイフレームレートの映像信号(SDI信号)524を本線出力として出力する。
 処理部541は、SDI入力部531で得られたハイフレームレートの映像信号に対して処理をして、上述した第1の方法、第2の方法あるいは第3の方法によるフリッカ確認のための標準フレームレートの表示用映像信号を出力する。SDI出力部539は、処理部541で得られた標準フレームレートの表示用映像信号をSDI信号とし、この表示用映像信号(SDI信号)522をフリッカ確認出力として出力する。
 上述したように、図13に示すビデオシステム500においては、サーバ521で、ハイフレームレートの映像信号503(503A,503B)に基づいて、フリッカ確認のための標準フレームレートの表示用信号が生成され、モニタ523にフリッカ確認のための表示映像が提示される。これにより、サーバのオペレータは、ハイフレームレートの映像信号に含まれるフリッカの程度を容易に確認できる。なお、上述の説明ではサーバ521のインタフェースがSDIであるとして説明としたが、サーバ521のインタフェースはSDIに限定されるものではなく、一般的なビデオ信号をやり取りするその他のインタフェースを用いた構成とすることも考えられる。
 <3.変形例>
 なお、上述実施の形態においては、本技術を撮像装置1(図1参照)あるいはサーバ521(図13参照)に適用し、ハイフレームレートの映像信号に含まれるフリッカの程度を確認する例を示した。しかし、本技術におけるフリッカ確認のための標準フレームレートの表示用映像信号を生成する処理部(処理回路)を、CCU502,512やスイッチャ525に持つ構成も考えられる。また、例えば、図13のビデオシステム500において、カメラ501A,501BとCCU502A,502Bとの間にBPU(Base Band Processor Unit)が配置される構成であれば、このBPUにフリッカ確認のための標準フレームレートの表示用映像信号を生成する処理部(処理回路)を設けることも考えられる。
 また、上述実施の形態では、撮像レートが標準フレームレートの整数倍である例を示したが、本技術は、撮像フレームレートが標準フレームレートの整数倍でない場合であっても適用し得るものである。
 また、本技術は、以下のような構成を取ることもできる。
 (1)第1のフレームレートより高い第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成する映像信号処理部を備え、
 上記映像信号処理部は、
 フレーム間引き処理により、上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成し、
 上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
 映像信号処理装置。
 (2)上記映像信号処理部は、
 上記第2のフレームレートと上記光源周波数とからフリッカ周期となるフレーム数を求め、
 上記フリッカ周期のフレーム数の連続したフレームが存在するように間引くフレームを決定する
 前記(1)に記載の映像信号処理装置。
 (3)上記フリッカ周期となるフレーム数は、
 フリッカ周期となるフレーム数
=LCM(光源周波数,第2のフレームレート)/(光源周波数)
の式から求められる
 前記(2)に記載の映像信号処理装置。
 (4)上記フリッカ周期となるフレーム数は、
 フリッカ周期となるフレーム数
=ROUND(第2のフレームレート/光源周波数)
の式から求められる
 前記(2)に記載の映像信号処理装置。
 (5)上記映像信号処理部は、
 所定フレーム毎に、フリッカ位相が順次変化していくフレームを取り出すように間引くフレームを決定する
 前記(1)に記載の映像信号処理装置。
 (6)上記映像信号処理部は、
 通常処理モードとフリッカ確認モードを有し、
 上記フリッカ確認モードにあるとき、
 上記フレーム間引き処理により、上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成し、
 上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
 前記(1)から(5)のいずれかに記載の映像信号処理装置。
 (7)映像信号処理部が、第1のフレームレートより高い第2のフレームレートの映像信号からフレーム間引き処理により上記第1のフレームレートの表示用映像信号を生成する映像信号処理ステップを有し、
 上記映像信号処理ステップでは、
 上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
 映像信号処理方法。
 (8)第1のフレームレートより高い第2のフレームレートの映像信号を得る撮像部と、
 上記第2のフレームレートの映像信号からフレーム間引き処理により上記第1のフレームレートの表示用映像信号を生成する映像信号処理部を備え、
 上記映像信号処理部は、
 上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
 撮像装置。
 (9)上記映像信号処理部は、
 上記第2のフレームレートと上記光源周波数とからフリッカ周期となるフレーム数を求め、
 上記フリッカ周期のフレーム数の連続したフレームが存在するように間引くフレームを設定する
 前記(8)に記載の撮像装置。
 (10)上記映像信号処理部は、
 所定フレーム毎に、フリッカ位相が順次変化していくフレームを取り出すように間引くフレームを決定する
 前記(8)に記載の撮像装置。
 (11)上記映像信号処理部は、
 通常処理モードとフリッカ確認モードを有し、
 上記フリッカ確認モードにあるとき、
 上記フレーム間引き処理により、上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成し、
 上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
 前記(8)から(10)のいずれかに記載の撮像装置。
 (12)上記フリッカ確認モードにあるとき、上記表示用映像信号による映像を表示する表示部に、上記フリッカ確認モードにあることを表示する表示制御部をさらに備える
 前記(11)に記載の撮像装置。
 (13)上記第2のフレームレートの映像信号に対して、上記第2のフレームレートおよび光源周波数に基づいてフリッカ補正処理を行うフリッカ補正部をさらに備え、
 上記映像信号処理部は、上記フリッカ補正された上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成する
 前記(8)から(12)のいずれかに記載の撮像装置。
 (14)上記フリッカ補正部のフリッカ補正処理を操作する操作部をさらに備える
 前記(13)に記載の撮像装置。
 (15)第1のフレームレートより高い第2のフレームレートの映像信号を得る撮像部を備える撮像装置におけるフリッカ確認方法であって、
 映像信号処理部が、上記第2のフレームレートの映像信号からフレーム間引き処理により上記第1のフレームレートの表示用映像信号を生成する映像信号処理ステップと、
 表示制御部が、上記第1のフレームレートの表示用映像信号による画像を表示部に表示する表示制御ステップを有し、
 上記映像信号処理ステップでは、
 上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
 撮像装置におけるフリッカ確認方法。
 (16)第1のフレームレートより高い第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成する映像信号処理部と、
 上記第2のフレームレートの映像信号の連続する所定フレーム数のフレームの輝度レベルを検出する輝度レベル検出部と、
 上記表示用映像信号に、上記所定フレーム数のフレームの検出輝度レベルを表示する表示信号を重畳する信号重畳部を備える
 映像信号処理装置。
 (17)上記所定フレーム数は、上記第2のフレームレートと光源周波数とから求められるフリッカ周期となるフレーム数である
 前記(16)に記載の映像信号処理装置。
 (18)映像信号処理部が、第1のフレームレートより高い第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成する映像信号処理ステップと、
 輝度レベル検出部が、上記第2のフレームレートの連続する所定フレーム数のフレームの輝度レベルを検出する輝度レベル検出ステップと、
 信号重畳部が、上記表示用映像信号に、上記所定フレーム数のフレームの検出輝度レベルを示す表示信号を重畳する信号重畳ステップを有する
 映像信号処理方法。
 (19)第1のフレームレートより高い第2のフレームレートの映像信号を得る撮像部と、
 上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成する映像信号処理部と、
 上記第2のフレームレートの映像信号の連続する所定フレーム数のフレームの輝度レベルを検出する輝度レベル検出部と、
 上記第1のフレームレートの表示用映像信号に、上記所定フレーム数のフレームの検出輝度レベルを表示する表示信号を重畳する信号重畳部を備える
 撮像装置。
 (20)第1のフレームレートより高い第2のフレームレートの入力映像信号をストレージに記録し、該ストレージから出力映像信号を再生する記録再生部と、
 上記第2のフレームレートの入力映像信号に基づいて、フリッカ確認のための上記第1のフレームレートの表示用映像信号を得る処理部を備える
 サーバ。
 (21)上記処理部は、
 フレーム間引き処理により、上記第2のフレームレートの入力映像信号から上記第1のフレームレートの表示用映像信号を生成し、
 上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
 前記(20)に記載のサーバ。
 (22)上記処理部は、
 上記第2のフレームレートと上記光源周波数とからフリッカ周期となるフレーム数を求め、
 上記フリッカ周期のフレーム数の連続したフレームが存在するように間引くフレームを決定する
 前記(21)に記載のサーバ。
 (23)上記処理部は、
 所定フレーム毎に、フリッカ位相が順次変化していくフレームを取り出すように間引くフレームを決定する
 前記(21)に記載のサーバ。
 (24)上記処理部は、
 上記第2のフレームレートの入力映像信号から生成された上記第1のフレームレートの映像信号に、上記第2のフレームレートの映像信号の連続する所定フレーム数のフレームの輝度レベルを表示する表示信号を重畳して上記第1のフレームレートの表示用映像信号を生成する
 前記(20)に記載のサーバ。
 (25)上記所定フレーム数は、上記第2のフレームレートと光源周波数とから求められるフリッカ周期となるフレーム数である
 前記(24)に記載のサーバ。
 1・・・撮像装置
 10・・・レンズ部
 20・・・撮像部
 30・・・信号補正回路
 31・・・欠陥補正回路
 32・・・フリッカ補正回路
 40・・・ニー・ガンマ補正回路
 50・・・ファインダ出力生成部
 60・・・本線系信号処理部
 70・・・ファインダ
 80・・・操作入力部
 90・・・不揮発性メモリ
 100・・・CPU
 321・・・メモリコントローラ
 322・・・メモリ
 323・・・加重加算回路
 500・・・ビデオシステム
 501A,510B・・・カメラ
 502A,502B・・・CCU
 521・・・サーバ
 523・・・モニタ
 525・・・スイッチャ
 531・・・SDI入力部
 532・・・エンコーダ
 533・・・メモリコントローラ
 534・・・ストレージ
 535,538・・・デコーダ
 536,539・・・SDI出力部
 537・・・切換スイッチ
 541・・・処理部

Claims (22)

  1.  第1のフレームレートより高い第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成する映像信号処理部を備え、
     上記映像信号処理部は、
     フレーム間引き処理により、上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成し、
     上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
     映像信号処理装置。
  2.  上記映像信号処理部は、
     上記第2のフレームレートと上記光源周波数とからフリッカ周期となるフレーム数を求め、
     上記フリッカ周期のフレーム数の連続したフレームが存在するように間引くフレームを決定する
     請求項1に記載の映像信号処理装置。
  3.  上記フリッカ周期となるフレーム数は、
     フリッカ周期となるフレーム数
    =LCM(光源周波数,第2のフレームレート)/(光源周波数)
    の式から求められる
     請求項2に記載の映像信号処理装置。
  4.  上記フリッカ周期となるフレーム数は、
     フリッカ周期となるフレーム数
    =ROUND(第2のフレームレート/光源周波数)
    の式から求められる
     請求項2に記載の映像信号処理装置。
  5.  上記映像信号処理部は、
     所定フレーム毎に、フリッカ位相が順次変化していくフレームを取り出すように間引くフレームを決定する
     請求項1に記載の映像信号処理装置。
  6.  上記映像信号処理部は、
     通常処理モードとフリッカ確認モードを有し、
     上記フリッカ確認モードにあるとき、
     上記フレーム間引き処理により、上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成し、
     上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
     請求項1に記載の映像信号処理装置。
  7.  第1のフレームレートより高い第2のフレームレートの映像信号を得る撮像部と、
     上記第2のフレームレートの映像信号からフレーム間引き処理により上記第1のフレームレートの表示用映像信号を生成する映像信号処理部を備え、
     上記映像信号処理部は、
     上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
     撮像装置。
  8.  上記映像信号処理部は、
     上記第2のフレームレートと上記光源周波数とからフリッカ周期となるフレーム数を求め、
     上記フリッカ周期のフレーム数の連続したフレームが存在するように間引くフレームを設定する
     請求項7に記載の撮像装置。
  9.  上記映像信号処理部は、
     所定フレーム毎に、フリッカ位相が順次変化していくフレームを取り出すように間引くフレームを決定する
     請求項7に記載の撮像装置。
  10.  上記映像信号処理部は、
     通常処理モードとフリッカ確認モードを有し、
     上記フリッカ確認モードにあるとき、
     上記フレーム間引き処理により、上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成し、
     上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
     請求項7に記載の撮像装置。
  11.  上記フリッカ確認モードにあるとき、上記表示用映像信号による映像を表示する表示部に、上記フリッカ確認モードにあることを表示する表示制御部をさらに備える
     請求項10に記載の撮像装置。
  12.  上記第2のフレームレートの映像信号に対して、上記第2のフレームレートおよび光源周波数に基づいてフリッカ補正処理を行うフリッカ補正部をさらに備え、
     上記映像信号処理部は、上記フリッカ補正された上記第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成する
     請求項7に記載の撮像装置。
  13.  上記フリッカ補正部のフリッカ補正処理を操作する操作部をさらに備える
     請求項12に記載の撮像装置。
  14.  第1のフレームレートより高い第2のフレームレートの映像信号を得る撮像部を備える撮像装置におけるフリッカ確認方法であって、
     映像信号処理部が、上記第2のフレームレートの映像信号からフレーム間引き処理により上記第1のフレームレートの表示用映像信号を生成する映像信号処理ステップと、
     表示制御部が、上記第1のフレームレートの表示用映像信号による画像を表示部に表示する表示制御ステップを有し、
     上記映像信号処理ステップでは、
     上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
     撮像装置におけるフリッカ確認方法。
  15.  第1のフレームレートより高い第2のフレームレートの映像信号から上記第1のフレームレートの表示用映像信号を生成する映像信号処理部と、
     上記第2のフレームレートの映像信号の連続する所定フレーム数のフレームの輝度レベルを検出する輝度レベル検出部と、
     上記表示用映像信号に、上記所定フレーム数のフレームの検出輝度レベルを表示する表示信号を重畳する信号重畳部を備える
     映像信号処理装置。
  16.  上記所定フレーム数は、上記第2のフレームレートと光源周波数とから求められるフリッカ周期となるフレーム数である
     請求項15に記載の映像信号処理装置。
  17.  第1のフレームレートより高い第2のフレームレートの入力映像信号をストレージに記録し、該ストレージから出力映像信号を再生する記録再生部と、
     上記第2のフレームレートの入力映像信号に基づいて、フリッカ確認のための上記第1のフレームレートの表示用映像信号を得る処理部を備える
     サーバ。
  18.  上記処理部は、
     フレーム間引き処理により、上記第2のフレームレートの入力映像信号から上記第1のフレームレートの表示用映像信号を生成し、
     上記第2のフレームレートと光源周波数の関係から間引くフレームを決定する
     請求項17に記載のサーバ。
  19.  上記処理部は、
     上記第2のフレームレートと上記光源周波数とからフリッカ周期となるフレーム数を求め、
     上記フリッカ周期のフレーム数の連続したフレームが存在するように間引くフレームを決定する
     請求項18に記載のサーバ。
  20.  上記処理部は、
     所定フレーム毎に、フリッカ位相が順次変化していくフレームを取り出すように間引くフレームを決定する
     請求項18に記載のサーバ。
  21.  上記処理部は、
     上記第2のフレームレートの入力映像信号から生成された上記第1のフレームレートの映像信号に、上記第2のフレームレートの映像信号の連続する所定フレーム数のフレームの輝度レベルを表示する表示信号を重畳して上記第1のフレームレートの表示用映像信号を生成する
     請求項17に記載のサーバ。
  22.  上記所定フレーム数は、上記第2のフレームレートと光源周波数とから求められるフリッカ周期となるフレーム数である
     請求項21に記載のサーバ。
PCT/JP2017/037768 2016-10-27 2017-10-18 映像信号処理装置、撮像装置、撮像装置におけるフリッカ確認方法およびサーバ WO2018079390A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018547608A JP7047766B2 (ja) 2016-10-27 2017-10-18 映像信号処理装置、撮像装置および撮像装置におけるフリッカ確認方法
US16/329,064 US11172143B2 (en) 2016-10-27 2017-10-18 Image signal processing device, imaging device, flicker check method in imaging device, and server
US17/448,428 US11582401B2 (en) 2016-10-27 2021-09-22 Image signal processing device, imaging device, flicker check method in imaging device, and server

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2016210889 2016-10-27
JP2016-210889 2016-10-27

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US16/329,064 A-371-Of-International US11172143B2 (en) 2016-10-27 2017-10-18 Image signal processing device, imaging device, flicker check method in imaging device, and server
US17/448,428 Division US11582401B2 (en) 2016-10-27 2021-09-22 Image signal processing device, imaging device, flicker check method in imaging device, and server

Publications (1)

Publication Number Publication Date
WO2018079390A1 true WO2018079390A1 (ja) 2018-05-03

Family

ID=62023587

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/037768 WO2018079390A1 (ja) 2016-10-27 2017-10-18 映像信号処理装置、撮像装置、撮像装置におけるフリッカ確認方法およびサーバ

Country Status (3)

Country Link
US (2) US11172143B2 (ja)
JP (1) JP7047766B2 (ja)
WO (1) WO2018079390A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3609175A1 (en) * 2018-08-07 2020-02-12 Samsung Electronics Co., Ltd. Apparatus and method for generating moving image data including multiple section images in electronic device
JP2021182727A (ja) * 2020-05-20 2021-11-25 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co., Ltd 画像処理装置、撮像装置、移動体、プログラム及び方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112740662A (zh) * 2018-09-27 2021-04-30 富士胶片株式会社 成像元件、摄像装置、图像数据输出方法及程序
CN112771847A (zh) * 2018-09-27 2021-05-07 富士胶片株式会社 成像元件、摄像装置、图像数据处理方法及程序
KR20220121712A (ko) * 2021-02-25 2022-09-01 캐논 가부시끼가이샤 피사체의 주기적인 광량변화에 의한 플리커를 검출 가능한 촬상 장치, 플리커 검출 방법 및 비일시적 컴퓨터 판독 가능한 기억매체
JP2022158243A (ja) * 2021-04-01 2022-10-17 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009135792A (ja) * 2007-11-30 2009-06-18 Olympus Imaging Corp 撮像装置および画像信号処理方法
JP2010272999A (ja) * 2009-05-20 2010-12-02 Canon Inc 撮像装置
WO2014199542A1 (ja) * 2013-06-14 2014-12-18 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 撮像装置、集積回路およびフリッカ低減方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1882047B (zh) 2005-06-13 2011-06-15 索尼株式会社 图像处理设备和图像拾取设备
JP5147302B2 (ja) 2007-06-13 2013-02-20 株式会社エルモ社 ビデオカメラおよびビデオカメラにおけるフリッカ低減方法
JP5566133B2 (ja) * 2010-03-05 2014-08-06 キヤノン株式会社 フレームレート変換処理装置
JP5343995B2 (ja) 2010-11-25 2013-11-13 カシオ計算機株式会社 撮像装置、撮像制御方法及びプログラム
JP5814865B2 (ja) * 2012-06-20 2015-11-17 株式会社 日立産業制御ソリューションズ 撮像装置
JP2015115922A (ja) * 2013-12-16 2015-06-22 オリンパス株式会社 撮像装置および撮像方法
JP6403473B2 (ja) 2014-07-22 2018-10-10 キヤノン株式会社 撮像装置、その制御方法及びプログラム
GB201418619D0 (en) 2014-10-20 2014-12-03 Apical Ltd Method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009135792A (ja) * 2007-11-30 2009-06-18 Olympus Imaging Corp 撮像装置および画像信号処理方法
JP2010272999A (ja) * 2009-05-20 2010-12-02 Canon Inc 撮像装置
WO2014199542A1 (ja) * 2013-06-14 2014-12-18 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 撮像装置、集積回路およびフリッカ低減方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3609175A1 (en) * 2018-08-07 2020-02-12 Samsung Electronics Co., Ltd. Apparatus and method for generating moving image data including multiple section images in electronic device
CN110830730A (zh) * 2018-08-07 2020-02-21 三星电子株式会社 电子装置中用于生成移动图像数据的设备和方法
US11159739B2 (en) 2018-08-07 2021-10-26 Samsung Electronics Co., Ltd. Apparatus and method for generating moving image data including multiple section images in electronic device
CN110830730B (zh) * 2018-08-07 2023-04-07 三星电子株式会社 电子装置中用于生成移动图像数据的设备和方法
JP2021182727A (ja) * 2020-05-20 2021-11-25 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co., Ltd 画像処理装置、撮像装置、移動体、プログラム及び方法

Also Published As

Publication number Publication date
JPWO2018079390A1 (ja) 2019-09-12
US20190268525A1 (en) 2019-08-29
US11172143B2 (en) 2021-11-09
US20220006943A1 (en) 2022-01-06
US11582401B2 (en) 2023-02-14
JP7047766B2 (ja) 2022-04-05

Similar Documents

Publication Publication Date Title
WO2018079390A1 (ja) 映像信号処理装置、撮像装置、撮像装置におけるフリッカ確認方法およびサーバ
JP5566133B2 (ja) フレームレート変換処理装置
US7773825B2 (en) Image stabilization apparatus, method thereof, and program product thereof
JP2008067372A (ja) 映像生成装置及び方法
JP6420540B2 (ja) 画像処理装置及びその制御方法、プログラム、記憶媒体
JP2012070241A (ja) 撮像装置及び方法、並びにプログラム
JP5950678B2 (ja) 撮像装置、制御方法、及びプログラム
JP2012084960A (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP2011103558A (ja) 撮像装置、撮像方法、及び撮像プログラム
US20180262710A1 (en) Video signal processing apparatus, video signal processing method, and program
US20130027609A1 (en) Display apparatus and control method thereof
JP2018117276A (ja) 映像信号処理装置、映像信号処理方法およびプログラム
JP4372686B2 (ja) 撮像システム
US9445085B2 (en) Imaging apparatus, method for controlling imaging apparatus, and system therefor
US8699827B2 (en) Imaging apparatus, signal processing method, and program
JP6351212B2 (ja) 撮像装置、撮像装置の制御方法及びシステム
JP2013050531A (ja) 撮像装置及びフォーカス制御方法
JP2006049950A (ja) 動画像変換装置、動画像復元装置、および方法、並びにコンピュータ・プログラム
US10348957B2 (en) Image capturing apparatus, method of controlling the same, and storage medium for shooting a still image without interrupting shooting of moving images
JP2014011780A (ja) 画像合成装置、その制御方法、および制御プログラム、並びに記録媒体
JP2014229930A (ja) 撮像装置、撮像装置の制御方法及びシステム
JP2017011676A (ja) 画像処理装置及び画像処理方法
JP5507865B2 (ja) 画像処理装置、画像処理方法
US20230222765A1 (en) Image processing device, image processing method, and storage medium
JP4942596B2 (ja) 画像処理装置、撮像装置及び表示装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17863549

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018547608

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17863549

Country of ref document: EP

Kind code of ref document: A1