WO2020175231A1 - 撮像装置及びその制御方法及びプログラム - Google Patents

撮像装置及びその制御方法及びプログラム Download PDF

Info

Publication number
WO2020175231A1
WO2020175231A1 PCT/JP2020/006201 JP2020006201W WO2020175231A1 WO 2020175231 A1 WO2020175231 A1 WO 2020175231A1 JP 2020006201 W JP2020006201 W JP 2020006201W WO 2020175231 A1 WO2020175231 A1 WO 2020175231A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
image data
file
dynamic range
recorded
Prior art date
Application number
PCT/JP2020/006201
Other languages
English (en)
French (fr)
Inventor
達也 西口
昇 大森
Original Assignee
キヤノン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019036396A external-priority patent/JP7185563B2/ja
Priority claimed from JP2019085969A external-priority patent/JP7313893B2/ja
Application filed by キヤノン株式会社 filed Critical キヤノン株式会社
Priority to DE112020001019.8T priority Critical patent/DE112020001019T5/de
Priority to GB2111298.2A priority patent/GB2597141B/en
Priority to CN202311008646.XA priority patent/CN116962609A/zh
Priority to CN202080016877.3A priority patent/CN113491103B/zh
Publication of WO2020175231A1 publication Critical patent/WO2020175231A1/ja
Priority to US17/406,449 priority patent/US11871124B2/en
Priority to US18/502,548 priority patent/US20240080574A1/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/92Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/926Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range

Definitions

  • Imaging device Control method thereof, and program
  • the present invention relates to an imaging device, a control method therefor, and a program.
  • An imaging device represented by a recent digital camera is capable of capturing an HDR image and recording the HDR image on a recording medium.
  • H D R stands for High Dynamic Range, which is a technology that produces images with a wider dynamic range than S D R (Standard Dynamic Range).
  • a RAW image is a raw image before development.
  • Patent Document 1 Japanese Unexamined Patent Publication No. 201 8 _ 7 1 94
  • a normal RAW image file can include JP E G compressed data of a developed image as a display image.
  • the J P EG image does not support H D R image quality, it is not possible to save the display image with H D R image quality. Therefore, even if the RAW image taken by HD R is displayed on the HD R display, it is necessary to develop the RAW image once in order to check the HD R image quality.
  • the present invention has been made in view of the above problems, and is selected even when RAW image data is recorded in an imaging device that supports a plurality of dynamic ranges such as SDR and HDR.
  • RAW image data is recorded in an imaging device that supports a plurality of dynamic ranges such as SDR and HDR.
  • an imaging device of the present invention has the following configuration. That is,
  • the image pickup means the image pickup means for developing the image data obtained by the image pickup means, the selecting means for selecting the dynamic range, the selecting means for selecting the dynamic range, and the eight image data obtained by the image pickup means.
  • the image data obtained by subjecting the image data to development processing for the first dynamic range by the developing means is When the image data is recorded as an image file and the second dynamic range is selected by the selecting means, the image data obtained by applying the second dynamic range developing process to the image data by the developing means is A control unit that controls the image data to be recorded as the image file together with the image data.
  • the selected image can be selected for simple display such as file list display. You can check the image of dynamic range
  • the developed image data corresponding to the selected dynamic range is included in the image file and recorded. Therefore, for example, the file list ⁇ 2020/175231 3 (:171? 2020/006201
  • FIG. 18 An external view of the image pickup/display device according to the embodiment.
  • FIG. 18 is an external view of the image pickup/display device according to the embodiment.
  • FIG. 2 A block diagram showing a configuration of an image pickup/display device according to an embodiment.
  • FIG. 68-1 Flowchart of 1 to 10 shooting menu processing in the embodiment.
  • FIG. 68-2 A flow chart for processing 1 to 10 shooting menus in the embodiment.
  • FIG. 68-1 A flow chart of 1 to 10 shooting menu processing in the embodiment.
  • FIG. 78 A flow chart of 1 to 10 photographing processing in the embodiment.
  • FIG. 78 A flow chart of 1 to 10 photographing processing in the embodiment.
  • Fig. 8 is a configuration diagram of a / ⁇ file in the embodiment.
  • FIG. 88 A diagram showing an example of the area 0 8 1 8 ⁇ 0 8 8 in 8 files.
  • FIG. 8(:] 8 is a diagram showing an example of areas in the file 0 1 8 9 ⁇ 0 8 8].
  • FIG.80 A diagram showing an example of the area of 0 files, 8 1 8 9 ⁇ 0 8 8.
  • FIG. 8 £ A diagram showing an example of the area ⁇ 01 8 9 ⁇ 0 8 8 in eight files.
  • FIG. 98 A flow chart of the reproduction mode process in the embodiment.
  • FIG. 98 A flow chart of the reproduction mode process in the embodiment.
  • FIG. 90 A flow chart of the reproduction mode process in the embodiment.
  • FIG. 90 A flow chart of the reproduction mode process in the embodiment.
  • FIG. 9-1 A flow chart of the reproduction mode process in the embodiment.
  • FIG. 9-2 A flow chart of playback mode processing in the embodiment.
  • FIG. 9D A flow chart of the reproduction mode process in the embodiment.
  • FIG. 90 A flow chart of the reproduction mode process in the embodiment.
  • FIG. 11 18 A flow chart of the reproduction menu process in the embodiment.
  • FIG. 118 A diagram showing a data flow in the reproduction menu process in the embodiment.
  • FIG. 12 A flow chart of the developing process in the embodiment.
  • FIG. 14 Eight Flow chart of gradation correction parameter generation processing.
  • FIG. 148 Flow chart of gradation correction parameter generation processing.
  • FIG. 158 A diagram showing a gradation correction amount.
  • FIG. 16-8 Diagram showing an example of appearance at 30.
  • FIG.168 Diagram showing an example of appearance when !! 0 is displayed. ⁇ 2020/175231 5 ⁇ (: 171-1? 2020/006201
  • FIG. 170 A diagram showing an example of the area 0 1 8 9 ⁇ 0 8 8 in a 1 to 1 file.
  • FIG. 170 A diagram showing an example of the area 0 1 8 9 ⁇ 0 8 8 in a 1 to 1 file.
  • FIG.18 [Fig.18]] ⁇ File structure diagram.
  • FIG. 19-8 Flowchart of photographing processing in a modified example.
  • FIG. 198 A flowchart of a photographing process in a modified example.
  • FIGS. 1 A digital camera as an example of an apparatus to which the present embodiment is applied in FIGS.
  • FIG. 18 is a front perspective view of the digital camera 100
  • FIG. 1M is a rear perspective view of the digital camera 100
  • the display unit 28 is a display unit on the back of the camera that displays images and various information.
  • the outside viewfinder display section 43 is a display section provided on the top surface of the camera and displays various settings of the camera such as the shutter speed and aperture.
  • the shutter button 61 is an operation unit for issuing a shooting instruction.
  • the mode switch 60 is an operation unit for switching various modes.
  • the terminal cover _ 40 is a cover that protects a connector (not shown) such as a connection cable that connects the connection cable to the external device and the digital camera 100.
  • the main electronic dial 71 is a rotary operation member included in the operation unit 70, and the user can change setting values such as shutter speed and aperture by turning the main electronic dial 71.
  • the power switch 72 is an operation member for switching the power supply of the digital camera 100 between ⁇ 1! and ⁇ .
  • the sub electronic dial 7 3 is ⁇ 2020/175231 6 ⁇ (:171? 2020 /006201
  • the cross key _74 is a cross key (four-way key) that is included in the operation unit 70 and can be pressed up, down, left, and right. It is possible to operate according to the pressed part of the cross key _ 7 4.
  • the 3-axis button 75 is included in the operation section 70, is a push button, and is mainly used for determining a selection item.
  • (-V button 7 6 is a button included in the operation unit 70 and used to switch between ⁇ and ⁇ for live view ([-V) below in still image shooting mode.
  • the magnifying button 7 7 is included in the operation unit 70, and changes the magnifying power in the magnifying mode ⁇ 1 ⁇ 1, ⁇ , and in the magnifying mode in the live view display of the shooting mode. In the playback mode, it functions as an enlargement button for enlarging the playback image and increasing the enlargement ratio.
  • the reduction button 7 8 is included in the operation unit 70 and This button is used to reduce the magnification of the displayed playback image and reduce the displayed image.
  • the playback button 7 9 is an operation button that is included in the operation unit 70 and switches between shooting mode and playback mode. Pressing the play button 7 9 in shooting mode switches to playback mode and displays the latest image recorded on the recording medium 200 on the display section 28 or external device 300.
  • the quick return mirror 12 is moved up and down by an actuator (not shown) in response to an instruction from the system controller 50.
  • the communication terminal 10 is connected to the lens side (detachable) of the digital camera 100.
  • the eyepiece finder 16 is used to confirm the focus and composition of the optical image of the subject obtained through the lens unit 150 by observing the focusing screen 13.
  • the viewfinder is a viewfinder of the lid 2 0 2 is a slot lid that stores the recording medium 2 0 0
  • the grip 90 is held with the right hand when the user holds the digital camera 1 00. It is a holding part having an easy shape.
  • FIG. 2 is a block diagram showing a configuration example of the digital camera 100 according to the present embodiment.
  • the lens unit 150 is equipped with an interchangeable photographing lens. ⁇ 2020/175231 7 ⁇ (: 171-1?2020/006201
  • the lens 103 is usually composed of a plurality of lenses, but here, for simplicity, only one lens is shown.
  • the communication terminal 6 is a communication terminal for the lens unit 150 to communicate with the digital camera 1500 side
  • the communication terminal 10 is for the digital camera 1500 to communicate with the lens unit 150 side. It is a communication terminal for performing.
  • the lens unit 150 communicates with the system controller 50 via the communication terminals 6 and 10, and the internal lens system control circuit 4 controls the diaphragm 1 via the diaphragm drive circuit 2. (8) The focus is adjusted by displacing the position of the lens 103 via the drive circuit 3.
  • the Hachimi sensor 17 measures the brightness of the subject through the lens unit 150.
  • the focus detection unit 11 outputs the defocus amount information to the system control unit 50.
  • the system control unit 50 controls the lens unit 150 based on it, and makes the phase difference eight.
  • the quick return mirror 12 (hereinafter mirror 12) is instructed by the system controller 50 during exposure, live view shooting, and movie shooting, and is moved up and down by an actuator (not shown).
  • the mirror 12 is a mirror for switching the luminous flux incident from the lens 103 to the finder 16 side and the image pickup section 22 side.
  • the mirror 1 2 is normally arranged so as to reflect the luminous flux to the viewfinder 16 but in the case of shooting or live view display, the luminous flux is guided to the imaging unit 2 2. It bounces upward and retracts from the light flux (mirror up).
  • the mirror 12 is a half mirror so that the central part thereof can transmit a part of the light, and a part of the light flux is transmitted so as to be incident on the focus detection part 11 for performing the focus detection. ..
  • the user observes the focusing screen 13 through the pen tab rhythm 14 and the viewfinder 16 to determine the focus of the optical image of the subject obtained through the lens unit 150. It is possible to check the composition.
  • the shutter 1101 is a focal plane shutter that can freely control the exposure time of the imaging unit 22 under the control of the system controller 50. ⁇ 2020/175231 8 ⁇ (:171? 2020/006201
  • the image pickup unit 22 is an image pickup device configured by XX, ⁇ IV! On the image pickup surface of the image pickup section 22, filters of respective color components of [, 0, and M] are arranged two-dimensionally and periodically. Focusing on 2 x 2 filters adjacent to each other, two diagonal filters have ⁇ component filters, and the other two filters have ⁇ and Mitsumi filters. Then, the 2 ⁇ 2 filters are arranged on the imaging surface of the imaging unit 22. Such an array is generally called a Bayer array. Therefore, the image represented by the signal (analog signal) output from the imaging unit 22 also becomes a Bayer array pixel signal.
  • the eight-to-one converter 23 converts the 1-pixel analog signal output from the imaging unit 22 into a 10-bit digital signal, for example.
  • the image data at this stage is undeveloped image data, as described above, with one pixel per component and Bayer array image data of 10 bits per component. Therefore, the image data at this stage is called [ ⁇ 8 image data.
  • the image data of the Bayer array after compensating for the defective pixel is It may be image data.
  • the /O converter 23 converts the analog signal into digital data of 10 bits, but the number of bits may be 8 bits or more. There is no particular limitation. The higher the number of bits, the higher the gradation can be expressed.
  • the image processing unit 24 is the data from the / O converter 23 or the memory control unit.
  • the image processing unit 24 performs predetermined arithmetic processing using the captured image data, and the system control unit 50 performs exposure control and distance measurement control based on the obtained arithmetic result.
  • the Dixie !_ (Through the Lens) type eight (Saito focus) processing, Hachimi (automatic exposure) processing, and Mi (flash pre-flash) processing are performed.
  • the image processing unit 24 also performs predetermined arithmetic processing using the captured image data, and based on the obtained arithmetic result, also performs a Ding-Cho! Hakata (auto white balance) processing. ing.
  • the image processing unit 24 also performs image data encoding/decoding processing under the control of the system control unit 50.
  • Is included. ”Mina is one color HE VC is for encoding image data of 8 bits per component, and HE VC is for encoding image data of more than 8 bits per color component.
  • the output data from the A/D converter 23 is the image processing unit 24 and the memory control unit.
  • the memory 32 stores image data obtained by the image pickup unit 22 and converted into digital data by the A/D converter 23, and image data to be displayed on the display unit 28 or the external device 300.
  • the memory 32 has a storage capacity sufficient to store a predetermined number of still images, a moving image and a sound for a predetermined time.
  • the memory 32 also serves as a memory (video memory) for displaying images.
  • the D/A converter 19 converts the display image data stored in the memory 32 into an analog signal and supplies the analog signal to the display unit 28.
  • the display image data written in the memory 32 is displayed on the display unit 28 via the D/A converter 19.
  • the display unit 28 displays on a display device such as an LCD according to the analog signal from the D/A converter 19.
  • the digital signal once A/D converted by the A/D converter 23 and stored in the memory 32 is analog-converted by the D/A converter 19 and sequentially transferred to the display unit 28 for display to display an electronic view. It functions as a finder and can display through images (live view display).
  • the in-viewfinder liquid crystal display section 41 indicates, through the in-viewfinder display section drive circuit 42, a frame (AF frame) indicating the focus detection point at which autofocus is currently performed, and the setting state of the camera. Icons etc. are displayed.
  • the liquid crystal display section 43 outside the viewfinder displays various setting values of the camera, such as the shutter speed and the aperture, via the display section outside drive circuit 44.
  • the digital output /F 90 supplies the data for image display stored in the memory 32 to the external device 300 as a digital signal.
  • video data is recorded according to a communication protocol that conforms to the H DM I (registered trademark) (High-Definition Media Interface) standard. ⁇ 2020/175 231 10 (:171? 2020/006201
  • the non-volatile memory 56 is an electrically erasable/recordable memory. Etc. are used.
  • the nonvolatile memory 56 stores constants for operating the system controller 50, programs, and the like.
  • the program is a program for executing various flowcharts described later in this embodiment.
  • the system control unit 50 is a control unit having at least one processor and controls the entire digital camera 100. By executing the program recorded in the nonvolatile memory 56 described above, each processing of the present embodiment described later is realized.
  • Reference numeral 52 is a system memory, and [8 1 ⁇ /1 is used. In the system memory 52, the constants and variables for the operation of the system controller 50, the programs read from the non-volatile memory 56, and the like are expanded. Further, the system control unit 50 also controls the display by controlling the memory 32, the port/converter 19, the digital output unit/90, the display unit 28, and the like. Further, the system control unit 50 converts the image data obtained by shooting into a format for recording on the recording medium 200, or the image is recorded on the recording medium 200 via the recording medium 200. It also controls recording to record data.
  • the system timer 53 is a clock unit that measures the time used for various controls and the time of the built-in clock.
  • the mode changeover switch 60, the first shutter switch 62, the second shutter switch 64, and the operation unit 70 function as an operation unit for inputting various operation instructions to the system control unit 50. ..
  • the mode selector switch 60 switches the operation mode of the system control unit 50 to one of a still image recording mode, a moving image shooting mode, a reproduction mode, and the like.
  • the modes included in the still image recording mode include talent shooting mode, talent scene determination mode, manual mode, aperture priority mode (8 mode), and shutter speed priority mode (Ding V mode). Also, the shooting settings will be different for each shooting scene. ⁇ 2020/175231 1 1 ⁇ (: 171-1?2020/006201
  • the mode selector switch 60 allows you to switch directly to one of these modes.
  • the mode selection switch 60 may be used to temporarily switch to the shooting mode list screen, and then one of the plurality of displayed modes may be selected and switched using another operation member.
  • the moving image shooting mode may include a plurality of modes.
  • the shutter button 61 operated by the user includes a first shutter switch 6 2 and a second shutter switch 6 3.
  • the first shutter switch 6 2 becomes 0 1 ⁇ 1 when the user presses the shutter button 6 1 in the middle of a so-called half-press (shooting preparation instruction), and the first shutter switch signal To occur.
  • the system control unit 50 is the first shutter switch signal.
  • the second shutter switch 64 becomes 0 1 ⁇ 1 when the operation of the shutter button 61 is completed, that is, when the shutter button 6 1 is pressed fully (shooting instruction), and the second shutter switch signal 3 ⁇ /2 is generated.
  • the system control unit 50 starts a series of shooting processing operations from reading the signal from the shooting unit 22 to writing the image data on the recording medium 200. To do.
  • Each operation member of the operation unit 70 is appropriately assigned a function for each scene by selectively operating various function icons displayed on the display unit 28 or the external device 300, Acts as various function buttons.
  • the function buttons include, for example, an end button, a return button, an image advance button, a jump button, a narrowing down button, and an attribute change button.
  • various settable menu screens are displayed on the display unit 28 or the external device 300. The user can directly make various settings using the menu screen displayed on the display unit 28 or the external device 300, and the up/down/left/right four-way buttons and three-axis buttons. ..
  • the display unit 28 in the embodiment has an image display function of 30 image quality, that is, ⁇ 2020/175 231 12 (:171? 2020/006201
  • each color component of Mitsumi can be displayed with 8 bits (2 5 6 gradations).
  • the external device 300 is connected to the digital camera 100, the external device 300 is set as the output target device of the captured image or live image instead of the display section 28. To do. If the user operates the operation unit 70 to explicitly select either the display unit 28 or the external device 300, the selected one is output target data/ ⁇ It shall be a chair.
  • the operation unit 70 is various operation members serving as an input unit that receives an operation from a user.
  • the operation unit 70 includes at least the following operation units. Shutter button 6 1, Main electronic dial 7 1, Power switch 7 2, Sub electronic dial 7 3, Four-way controller 7 4, Three-axis button 7 5, [-V button 7 6, Enlargement button 7 7, Reduction button 7 8 and play button 7 9.
  • the four-way controller 74 is a directional button that allows the up, down, right, and left parts of the four-way controller 74 to be pressed.
  • the upper button, the lower button, the right button, and the left button may be independent buttons.
  • the upper or lower part is referred to as an up/down key
  • the left or right part is referred to as a left/right key.
  • the operation unit 70 also includes the following operation units.
  • the 8_ ⁇ 1 ⁇ 1 button 70 is a push button switch included in the operation unit 70, and can be pressed to instruct execution of 8.
  • the pressing direction of the 8_1 ⁇ 1 button 70 is parallel to the direction (optical axis) of the subject light that enters the imaging unit 2 2 from the lens 10 3.
  • the quick setting button 700 (hereinafter, 0 button 700) is a push button switch included in the operation unit 70, and a list of setting items that can be set in each operation mode by pressing it.
  • the quick setting menu is displayed. For example, when pressed during standby for Live View shooting, the electronic front curtain shutter, monitor brightness,! _ A list of setting items such as screen display, 2-point enlargement, and silent shooting is displayed in a row overlaid on !_ V. The user can change the setting related to the selected setting item or shift to the operation mode by selecting any option from the displayed quick setting menu with the up and down keys and pressing the set button. ⁇ 2020/175231 13 ⁇ (: 171-1? 2020 /006201
  • the active frame switching button 70 is a push button switch included in the operation unit 70, and by pressing it in the two-point enlargement processing described later, the active enlargement position of the two enlargement locations is activated. (Frame) can be switched. Also, different functions are assigned depending on the operation mode, and if you press it in the playback mode, you can add the protect attribute to the displayed image.
  • the menu button 760 is a push button switch included in the operation unit 70, and a menu screen on which various settings can be made is displayed on the display unit 28 or the external device 300.
  • the function buttons 70 are three push button switches included in the operation unit 70, and their respective functions are assigned. Each of the function buttons 70 is located at a position where it can be operated by the finger of the right hand (middle finger, ring finger, or little finger) holding the grip 90, and the pressing direction is from the lens 103 to the imaging unit. It is parallel to the direction (optical axis) of the subject light that is incident on 2 2.
  • the info button 709 is a push button switch included in the operation unit 70, and is used for switching various information displays.
  • the power supply control unit 80 is composed of a battery detection circuit, a 0x100 converter, a switch circuit that switches the block to be energized, and the like, whether or not the battery is installed, the type of the battery, and the remaining battery level. I do.
  • the power supply control unit 80 controls the 0 (3 _ 0 (3 converter, based on the detection result and the instruction of the system control unit 50, and supplies the required voltage for the required period for the recording medium 20 0. Supply to each part including.
  • the power supply unit 30 includes a primary battery such as an alkaline battery or a lithium battery, a 1 ⁇ ! ⁇ ⁇ ⁇ 1 battery or a 1 ⁇ 1 ⁇ 1 ⁇ ( ⁇ ! battery, a 1_ ⁇ battery or other secondary battery, 80 It consists of an adapter, etc.
  • the recording medium / 18 is an interface with a recording medium 200 such as a memory card or a hard disk, etc.
  • the recording medium 200 is a memory card or the like for recording captured images. It is a recording medium of and is composed of a semiconductor memory, a magnetic disk, and the like.
  • the communication unit 54 is connected by a wireless or wired cable and transmits/receives a video signal and an audio signal.
  • the communication unit 54 can be connected to a wireless LAN (Local Area Network) or the Internet.
  • the communication unit 54 can transmit an image captured by the image capturing unit 22 (including a through image) and an image recorded on the recording medium 200, and can receive image data and other various information from an external device. it can.
  • the posture detection unit 55 detects the posture of the digital camera 100 with respect to the direction of gravity. Whether the image taken by the imaging unit 22 is an image taken with the digital camera 100 held horizontally or vertically, based on the posture detected by the posture detection unit 55. Can be determined.
  • the system control unit 50 can add orientation information according to the posture detected by the posture detection unit 55 to the image file of the image captured by the image capturing unit 22 or can record the image by rotating it. It An acceleration sensor, a gyro sensor, or the like can be used as the attitude detection unit 55.
  • the operation units 70 there is a touch panel 70a capable of detecting contact with the display unit 28.
  • the touch panel 70a and the display unit 28 can be integrally configured.
  • the touch panel 70 a is configured so that the light transmittance does not hinder the display of the display unit 28 and is attached to the upper layer of the display surface of the display unit 28.
  • the input coordinates on the touch panel 70a are associated with the display coordinates on the display unit 28.
  • a GUI Graphical User Interface
  • the system control unit 50 can detect the following operations or states on the touch panel 70a.
  • touch panel 70a is being touched with a finger or pen (hereinafter referred to as touch-on (T ouch — ⁇ n)).
  • touch move while touching the touch panel 70a with your finger or pen (hereinafter referred to as touch move).
  • touch-up T ⁇ u c h -U p
  • touch-off T o u h-O f f
  • touch down When the touch down is detected, it is also detected that the touch is on. After touchdown, touchon is normally detected unless touchup is detected. A touch move is also detected when touch-on is detected. Even if touch-on is detected, touch move is not detected if the touch position has not moved. After it is detected that all the touched fingers and pens have touched up, the touch is turned off.
  • the operation/state and the position coordinates of the finger or pen touching the touch panel 70a are notified to the system control unit 50 through the internal bus.
  • the system control unit 50 determines what operation (touch operation) is performed on the touch panel 70a based on the notified information.
  • touch move the moving direction of the finger or pen moving on the touch panel 70a can also be determined for each vertical component/horizontal component on the touch panel 70a based on the change in position coordinates. If it is detected that the touch move is performed for a predetermined distance or more, it is determined that the sliding operation is performed.
  • Flick is an operation in which a finger is touched on the touch panel, quickly moved by a certain distance, and then released.
  • flicking is an operation that swipes quickly on the touch panel 7 0 a, like flipping it with your finger. It is possible to determine that a flick has been performed if a touch move is detected at a predetermined speed or more at a predetermined speed or more, and touch-up is detected as it is (it can be determined that a flick follows a sliding operation). Furthermore, touch operations that touch multiple points (eg, 2 points) at the same time to bring the touch positions closer to each other are called pinch-in, and touch operations that move the touch positions away from each other are called pinch-out. Pinch out and pinch in are collectively ⁇ 2020/175231 16 ⁇ (: 171-1? 2020/006201
  • the touch panel 7 0 3 a resistive film type, capacitance type, a surface acoustic wave type, an infrared type, electromagnetic induction type, an image sure ⁇ type, an optical sensor system or the like, those of any type of a variety of schemes of the touch panel You may use.
  • a method that detects when there is a touch on the touch panel and a method that detects that there is a touch on the touch panel due to the proximity of a finger or a pen. Good.
  • the present invention can be applied not only to the image pickup apparatus main body but also to a control apparatus that communicates with an image pickup apparatus (including a network camera) via wired or wireless communication and remotely controls the image pickup apparatus.
  • Examples of devices that remotely control the imaging device include devices such as smartphones, tablets, and desktops.
  • the imaging device can be controlled remotely by sending commands from the control device to the imaging device based on the operations performed on the control device and the processing performed on the control device side. Is. Further, the live view image taken by the imaging device may be received via wired or wireless communication and may be displayed on the control device side.
  • the present invention can be applied to any device having a display unit such as a mouth, a mobile phone terminal or a portable image viewer, a printer device having a display, a digital photo frame, a music player, a game machine, an electronic book reader, or the like. Applicable.
  • FIG. 3 is a diagram showing a connection example between the digital camera 100 and the external device 300.
  • the display section 28 of the digital camera 100 goes off, and the display of the external device 300 is displayed on the digital camera 300.
  • the display of 100 changes and is displayed.
  • FIGS. 481-148 are flow charts showing the [-V shooting mode processing in the digital camera 100. This processing is executed by the system control unit 50 by expanding the program recorded in the non-volatile memory 56 into the system memory 52. ⁇ 2020/175231 17 ⁇ (: 171-1? 2020/006201
  • the digital camera 100 can set the 1 to 1-port shooting mode or the 3-port shooting mode by a user's menu operation or the like. These modes are for setting the intention of whether the user ultimately obtains image data of 1 to 10 image quality or image data of 30 image quality.
  • Various controls are performed depending on whether it is set.
  • the shooting mode and To shoot in shooting mode use "! ! ⁇ [3 ⁇ 4 shooting shadow", It may be described as "shooting”.
  • it is possible to set a record of only eight types as described below is always 1 to 0 image when shooting at 1-1 0 shooting mode not necessarily be recorded.
  • the system control unit 50 determines whether or not the user's setting on the operation unit 70 is in the 1 to 10 shooting mode. If the system control unit 50 determines that the 1 to 10 shooting mode is set, the process is set to 340 2, and if it is determined to be the 30 shooting mode, the process is set to 3 4 2 2 Proceed to.
  • the system control unit 50 connects the digital camera 100 to an external device.
  • system control unit 50 determines whether the external device 300 is connected, it proceeds to 340, and if it determines that it is not connected, it proceeds to 340.
  • the system control unit 50 is connected to the digital camera 100 and an external device.
  • connection processing of 300 is performed. Then, the system control unit 50 advances the processing to 340 4. Details of this connection process will be described later with reference to FIGS. 5 to 5 (3. Note that the external device is 1 to 1 0 connections if the corresponding 1 to 1 0 connection, 3 ⁇ connections and should correspond become.
  • the system control unit 50 takes an image with the imaging unit 2 2 /0 converter
  • image processing section 24 is used to develop ! 0 image quality on the image data.
  • image quality development ⁇ 2020/175 231 18 ⁇ (: 171-1? 2020 /006201
  • the images obtained by the processing are called 1 to 10 images.
  • the image data means that one pixel has three components.
  • Image data includes A gamma curve for images (eg, Gin 11-[3 ⁇ 4 Recommendation M. 2 1 0 0 or 1 ⁇ 1 !- ⁇ ) is applied.
  • the system control unit 50 determines whether the device displaying the (-V image (display unit 28 or external device 300) is compatible with 1 to 10 and If it is determined not to respond, the process proceeds to 340, and if it is determined to correspond to 1 to 10, the process proceeds to 340.
  • the system control unit 50 checks the 1 to 10 assist display settings. If the system control unit 50 determines that Assist 1 is set, it proceeds to 340, and if Assist 2 is set, it proceeds to 340 8.
  • Assist 1 is a setting for confirming the high-brightness region of the image of 1 to 10, and a process of assigning many gradations (code values) to the high-brightness range of the image is performed.
  • Assist 2 is a setting for confirming the intermediate luminance range of 1 to 0 image, processing to allocate more gradations in the intermediate luminance region from 1 to 1 0 the image is performed
  • Image data means image data of 8 bits per component.
  • Image quality image data includes a gamma curve for 30 images (for example, 3 ⁇ The standard Gamma curve) is applied. Note that 3 The gamma curve of the standard is generally a straight line in the dark part and a power of 2.4 in the bright part, but a power curve of 2.2 may be used for simplicity.
  • the system control unit 50 resizes the 1 to 10 image data obtained by the development processing at 3404 to a size suitable for the output target device (the display unit 28 or the external device 300).
  • the resized 1 to 10 image quality image (hereinafter, 1 to 10 !__!_ V image) is displayed live and the process proceeds to 34 10.
  • the system control unit 50 determines whether or not the menu display button 706 is pressed. If it is determined that the menu display button 706 is pressed, the process proceeds to 34 11 and if it is determined that the menu display button 706 is not pressed. Proceed to 34 1 2. At 34 1 1, the system control unit 50 performs a shooting menu process and advances the process to 34 1 2. Details of this shooting menu processing will be described later with reference to FIGS. 6-11 and 6-2 and FIGS. 6-11 and 6-12.
  • the system control unit 50 determines whether or not the info display button 70 9 has been pressed. If it is determined that the info display button 70 9 has been pressed, the process proceeds to 34 1 3 and if it is determined that it has not been pressed. Advances the process to 34 1 4. At 34 1 3, the system control unit 50 switches the display of the shooting information and proceeds to 34 1 4.
  • the shooting information includes a histogram and a highlight warning table.
  • the system control unit 50 determines whether or not the shutter button 6 1 is half-pressed based on whether or not the signal 3 ⁇ /1 is received, and the shutter button 6 1 is half-pressed. If not, the process proceeds to 3420, and if it is determined that the button is half pressed, the process proceeds to 34 15.
  • the system control unit 50 performs the 8/8 pattern processing described with reference to Fig. 2, and proceeds to 3416.
  • the system control unit 50 determines whether the shutter button 6 1 is fully pressed based on whether or not the signal 3 ⁇ /2 is received. ⁇ 2020/175231 20 (:171? 2020/006201
  • the process proceeds to 3417, and if it is determined that it is in the fully-pressed state, the process proceeds to 3418.
  • the system control unit 50 determines whether the shutter button 6 1 is held in the half-pressed state, and if it is held in the half-pressed state, the process is returned to 3 4 1 5. If it is determined that the half-pushed state is not held, the process proceeds to 3420.
  • the system controller 5 0 Image processing is performed, and an image data file according to the preset recording format is recorded on the recording medium. Figure 8 shows the data structure of the recorded file. Then, the system control unit 50 advances the processing to 3419.
  • the system control unit 50 determines whether the [-V button 7 6 has been pressed, and if it determines that the [-V] button 7 6 has been pressed, it presses the process to 3421. If not determined, the process proceeds to 3 4 2 2.
  • the system control unit 50 controls the image data processed by 3404 to image quality of 1 to 10 (1 pixel 3 components, 1 bit image data of 1 bit per component). ) Record it as a movie file and proceed to 344.
  • the system controller 50 is configured such that the external device 300 is a digital camera.
  • the process proceeds to 3423, and if it is determined that the external device is not connected, the process proceeds to 3424.
  • the system control unit 5 0 connects the digital camera 100 and the external device 300, and advances the processing to 3424. The details of this connection processing will be described later with reference to FIGS. 5 to 5 ( 3. Since the 30 shooting mode is used, 30 connections are made with external devices.
  • the system control unit 50 takes an image with the imaging unit 22 and performs /O conversion. ⁇ 2020/175231 21 ⁇ (: 171-1? 2020/006201
  • the image converted into a digital signal by the device 2 3 is developed by the image processing unit 2 4 to 3 image quality (3 components per pixel, 8 bits per component (2 5 6 gradations)), and processing is performed 3 4 Go to 2 5.
  • image processing unit 2 4 to 3 image quality (3 components per pixel, 8 bits per component (2 5 6 gradations)), and processing is performed 3 4 Go to 2 5.
  • an image after development processing of 30 image quality is referred to as a 30 image.
  • the image is resized to a size suitable for the resolution of the output destination device (display unit 28 or external device 300), and High quality live image (3
  • the system control unit 50 determines whether the menu display button 706 is pressed, and if it is determined that the button is pressed, the process is returned to 34-27 and the process is not pressed. If it is determined to be true, the process proceeds to 3 4 2 8. At 3 4 2 7, the system control unit 50 performs the shooting menu process and advances the process to 3 4 28. Details of the shooting menu processing of this 3 4 27 will be described later with reference to FIGS. 6-11 and 6-12 and FIGS. 6-11 and 6-12.
  • the system control unit 5 0 determines whether the info display button 7 0 9 is pressed, the 3 4 2 9 processing if it is determined to have been pressed, not pressed If so, the process proceeds to 340.
  • the system control unit 50 switches the display of the shooting information and proceeds to 3 4 30.
  • the shooting information includes a histogram and a highlight warning table.
  • the system control unit 50 determines whether or not the shutter button 6 1 is in the half-pressed state. If it is determined that the shutter button 6 1 is not in the half-pressed state, the process is set to 3 4 3 6 If it is determined that the button is half pressed, the process proceeds to 3 4 3 1.
  • system control unit 50 performs the 8/8 process described with reference to FIG. 2, and proceeds to 3 4 3 2.
  • the system control unit 50 determines whether the half-pushed state is held, it returns the process to 3 4 3 1, and if it determines that the half-pushed state is not held, the process is set to 3 4 3 6. Proceed.
  • the system control unit 50 performs 30 photographing processing and proceeds to 3435.
  • the system control unit 50 develops the [ ⁇ 8 image data obtained in the 30 shooting with a 30 image quality, Image of high image quality is “encoded”, and image data is generated, and is recorded on the recording medium as a “file” of “m format”.
  • recording settings If only the image is set to be recorded as a "file”, then the "" file is recorded.
  • recording settings if the recording of “” file and [3 ⁇ 48 ⁇ / ⁇ / image file is set,
  • the obtained data obtained by encoding the image data and the image data is recorded in the recording medium as an image file in the image file format shown in FIG. 88, and the data structure shown in FIG. 3 ,
  • the format is shown in Fig. 8. That is, the image of each size for display has an accuracy of 8 bits, and the coded data obtained by ".” is integrated and stored in one file.
  • the system control unit 50 performs a quick review display process, and proceeds to 3434. The details of this quick review display processing will be described later with reference to FIGS.
  • the system control unit 5 0! _ It is determined whether or not the V button 7 6 has been pressed, and if it is determined that the V button 7 6 has been pressed, the process proceeds to 3 4 37, and if it is determined that the button has not been pressed, the process proceeds to 3 4 3 8.
  • the system control unit 50 compresses the 30 image obtained by the development process of 3 0 image quality at 3 4 2 1 to 1 2 6 4 and records it as a 30 movie file and processes it. To 3 4 3 8.
  • the system control unit 50 determines whether the play button 79 has been pressed. If the system control unit 50 determines that the play button 79 has been pressed, the process proceeds to 3439, and if it determines that the play button 79 has not been pressed, the process proceeds to 3440. ⁇ 2020/175 231 23 ⁇ (:171? 2020 /006201
  • the system control unit 50 performs the reproduction mode processing and advances the processing to 3440. Details of this playback mode processing will be described later with reference to FIGS. 98 to 91 to 1 and FIGS. 108 and 10.
  • the system control unit 50 displays! _ Determine whether there is an instruction to end V mode, and! _ If it is determined that there is no instruction to end the V mode, the process returns to 340 1, and if it is determined that there is an end instruction, this process ends.
  • FIG. 4 and 11 are flow charts showing the quick review display processing of the system control unit 50. As shown in FIG. This processing is realized by expanding the program recorded in the non-volatile memory 56 into the system memory 52 and executing it by the system control unit 50.
  • the system control unit 50 determines whether the quick review display is set. If it is determined that the quick review display is set, the process is set to 3452, and the quick review display is not displayed. If it is determined to be set to, this processing ends.
  • the system control unit 50 determines whether the shooting is in the 1 to 10 shooting modes, and when it is determined that the shooting is in the 1 to 10 shooting modes, the process is set to 34 53, 30 If it is determined that the shooting is performed in the shooting mode, the process proceeds to 3460.
  • the system control unit 50 displays the device for quick review display (display unit 28 or external device 300). To determine whether the corresponding, advance 1 to 0 if it is determined not to be a corresponding processing to 3454, the process if there was to decipher and is 1 to 10 corresponding to 3457.
  • the system controller 50 8 Determine whether the still image was shot, (8) If it is determined that the still image shooting is performed, the process proceeds to 3455. If 1 to 1 ⁇ Mimi still image shooting is performed, the process proceeds to 3456.
  • the system controller 50 For display in image 1 ⁇ 1
  • 0 Image 828 is processed in the same way as 3406 to 3408.
  • the output target device (display unit 28 or external device 300). ⁇ 2020/175 231 24 (:171? 2020/006201
  • the system control unit 50 is for displaying in the 1 to 1 image.
  • the image is processed in the same way as 340 ⁇ 340 After conversion, resizing is performed to a size suitable for the output target device (display unit 28 or external device 300). Display in image quality, and proceed with processing at 3 4 6 3.
  • the system control unit 50 determines whether the still image was taken, If it is determined that the photographed still image shooting process to 3 4 5 8, when it is determined that the photographing in the 1-1 ⁇ snake still image shooting process advances to 3 4 5 9.
  • the system control unit 50 For display in image 1 ⁇ 1 ⁇ [3 ⁇ 4 Image 8 2 8 is resized to a size suitable for the output target device (display unit 28 or external device 300), Display in image quality, and proceed with processing at 3 4 6 3.
  • the system control unit 50 resizes the display image in the images 1 to 1 to the size suitable for the output target device (display unit 28 or external device 300). Display in 1 to 1 0 image quality and proceed to 3 4 6 3.
  • the system control unit 50 determines whether the shirt button 6 1 is pressed, and if it is determined that the shirt button 6 1 is not pressed, the process is pressed at 3 4 6 4. ⁇ 2020/175231 25 ⁇ (:171? 2020 /006201
  • the system control unit 50 determines whether the time set in the quick review display time has elapsed. If it is determined that the time has not elapsed, the system control unit 50 proceeds to 364. If it is determined that the process has been returned and the time has passed, this process ends.
  • FIG. 5 is a sequence diagram showing a control procedure of the digital camera 100 and the external device 300 when the digital camera 100 and the external device 300 are connected.
  • a digital camera It is assumed that they are connected.
  • the digital output 90 starts transmitting the 15V signal.
  • the transmitted +5 V signal is transmitted to the external device 300 through the +5 signal line (not shown) of the connection cable 300.
  • the external device 300 receives the +5 signal of the connection cable 300, and proceeds to 3502.
  • the digital camera 100 is the external device 300.
  • the external device 3 0 0 starts transmission of 1 to 0 signal from the connection cable 3 0 2 1 to 1 0 signal line (not shown).
  • the digital output of the digital camera 100/90 receives the transmitted ( ⁇ ) signal via the connection cable 300.
  • Digital output ⁇ When the 90 receives the ⁇ signal, it notifies the system control unit 50 of reception of 1 to 1 units.
  • the system control section 50 notifies the external device 3 by the notification from 1 to 10.
  • connection response from 0 0 is detected, and the process proceeds to 355 0 5.
  • the system control unit 50 controls the digital output/90 and transmits a 0 I port request signal from the connection cable 30 2.
  • the transmitted 0 I port request signal is transmitted to the external device 300 through the 0 I 0 signal line (not shown) of the connection cable 3 02.
  • the external device 300 receives this general request signal and advances the processing to 350.
  • the external device 300 is connected to the connection cable 3 0 2 0 signal line. ⁇ 2020/175 231 26 ⁇ (: 171? 2020 /006201
  • the system control section 50 receives the notification of receiving the 0 I 0 signal, so that the 0 0 0 signal received in 3 0 6 is received in response to the digital output. Instruct to copy to memory 32. After the copying is completed, the system control unit 50 analyzes the port 0 I developed in the memory 32, determines the image signal capability that the external device 300 can accept, and executes the process. Proceed to 08.
  • the system controller 50 has the video signal capability that the main unit setting is 1 to 1 0 valid and the external device 3 0 0 judged by 3 0 5 7 can accept! If it is compatible, it is determined that the 1 to 10 signal is output to the external device 300, otherwise it is determined to output the 30 signal, and the process proceeds to 3509.
  • the digital camera 100 outputs a video signal to the D/C signal line (not shown) of the connection cable 300.
  • the external device 300 receives the video signal via the signal line (not shown) of the connection cable 300, and proceeds to 3511.
  • the external device 300 analyzes the video signal received at 3 5 0 8 and switches the drive of the display 3 0 1 to a setting that can display the video signal, Go to 1 2.
  • the external device 300 displays the video signal received at 3508 on the display 3101 of the external device 300.
  • Fig. 5 is a sequence diagram showing a process of switching the video output of the digital camera 100 and the external device 300 from the 30 image to the 1 to 10 image.
  • connection between the digital camera 100 and the external device 300 is ⁇ 2020/175 231 27 ⁇ (: 171? 2020 /006201
  • the digital camera 100 outputs a 30 video signal to the 1/103 signal line (not shown) of the connection cable 300.
  • the external device 300 receives the 30 video signal via the signal line (not shown) of the connection cable 302, and advances the processing to 3523.
  • the external device 300 displays the 30 video received at 3522 on the display 3101 of the external device 300.
  • the digital camera 100 outputs the video output from the 3 0 image to the external device 300 from 1 to 1
  • the system control unit 50 stops the video signal to the D-IV! 03 signal line (not shown) of the connection cable 30 2.
  • the external device 300 stops receiving the 30 video signal via the signal line (not shown) of the connection cable 300, and advances the processing to 3526.
  • the external device 300 stops displaying the image on the display 3 0 1 of the external device 3 0 0 because the reception of the image from the digital camera 1 0 0 is stopped. To do.
  • the system control unit 50 sets 1 to 1 for the digital output ⁇ /90.
  • the system controller 50 outputs ! ⁇ 10 video signals to the D-IV!03 signal line (not shown) of the connection cable 302.
  • the external device 300 receives the !0 video signal via the signal cable (not shown) of the connection cable 302! ⁇ 2020/175 231 28 ⁇ (: 171? 2020 /006201
  • the external device 300 analyzes the video signal received at 3 5 2 8 and switches the drive of the display 3 0 1 to a setting capable of displaying 1 to 10 video signals. Change to 3 5 3 0.
  • the external device 300 displays the 1 to 10 video signals received at 3528 on the display 3101 of the external device 300.
  • the processing time of 359 to 335 differs depending on the performance of the external device 300, and it takes about 1 to 5 seconds until an image is displayed.
  • FIG. 50 is a sequence diagram showing a process of switching the video output of the digital camera 100 and the external device 300 from 1 to 10 images to 30 images.
  • the system control unit 50 instructs the digital output unit / 90 to transmit a 1 to 1 port video signal, and advances the processing to 3 5 4 2.
  • the system control unit 50 outputs 1 to 1 video signal to the D-IV! 0 3 signal line (not shown) of the connection cable 3 02.
  • the external device 300 receives the 1 to 10 video signals via the signal line (not shown) of the connection cable 300, and advances the processing to 3523.
  • the external device 300 displays the 1 to 10 images received at 3542 on the display 3101 of the external device 300.
  • Digital camera 100 outputs video output to external device 300 from 1 to 10 images.
  • the external device 300 stops receiving ( ⁇ ) video signal through the signal line (not shown) of the connection cable 300 and advances the processing to 3 5 4 6.
  • the external device 300 stops displaying the video on the display 3 0 1 of the external device 300 because the reception of the video from the digital camera 100 has stopped. ..
  • the system control unit 50 outputs a 30 video signal to the D-IV!03 signal line (not shown) of the connection cable 302.
  • the external device 300 receives the 30 video signal via the signal line (not shown) of the connection cable 300, and advances the processing to 3549.
  • the external device 300 analyzes the video signal received at 3548.
  • the external device 300 displays the 30 video signal received at 3528 on the display 3101 of the external device 300.
  • processing time from 359 to 355 differs depending on the performance of the external device 300, and it takes about 1 to 5 seconds until an image is displayed.
  • FIGS. 681 1 and 681 1 and 6 6 1 1 and 6 2 are shown in FIGS. 4 81 1 to 4 81 4 3 4 1 1 and 4 2 7 of the shooting menu processing. It is a flow chart showing the details. This process is realized by expanding the program recorded in the non-volatile memory 56 into the system memory 52 and executing it by the system control unit 50.
  • the system control unit 50 determines whether to shoot 1 to 10 based on whether the user has enabled the 1 to 10 shooting mode. If the system control unit 50 determines that 1 to 10 shooting is not to be performed, the process proceeds to 3602 and displays a normal 30 0 shooting menu. In addition, the system control unit 50
  • the system control unit 50 determines whether or not the user has selected the setting item as to whether or not 1 to 10 shooting is performed. If it is determined that it has been selected, the system control unit 50 advances the processing to 3605, otherwise advances the processing to 3611. At 3605, the system controller 50 is It is determined whether or not the setting as to whether or not to perform shooting has been effectively switched. If it is determined that the switching has been made valid, the system control unit 50 advances the processing to 3606, and if not, advances the processing to 3607. At 3606, the system control unit 50 changes the setting of whether or not to shoot 1 to 10 to valid, and stores the set value in the system memory 52.
  • the system control unit 50 determines whether the 1 to 10 assist display setting has been changed by the user at 3607. To judge. If it is determined that the change has been made, the process proceeds to 368, otherwise, the process proceeds to 369. still, It is desirable not to be able to change the assist display setting from 1 to 10 when the setting of whether or not to shoot is invalid.
  • the system control unit 50 changes whether to set 1 to 10 assist display at the time of shooting, and stores the set value in the system memory 52. Assist display setting There may be two or more variations of "Yes”.
  • the display setting change result is displayed at the timing of transition to the live view screen. May be reflected in. If you change these settings by using a specific button on the operation unit 70 on the live view screen instead of on the menu screen, the changed timing (the timing when the button is pressed) is changed. The change result may be reflected in the display.
  • the system control unit 50 determines whether or not the user has instructed to end the 1 to 10 setting menu display processing. It is judged that the end instruction has been given. ⁇ 2020/175231 31 ⁇ (: 171-1? 2020/006201
  • the system control unit 50 determines whether or not the user has selected the setting item of the still image recording image quality. If the system control unit 50 determines that the selection is made, the system control unit 50 advances the processing to 3 61 1, and otherwise advances the processing to 3 6 5 1.
  • the system control unit 50 determines whether or not there is an instruction input of 1 to 10 photographing by the user. The system controller 50 If it is determined that there is an instruction input for shooting, the process proceeds to 3 61 2, and if it is determined that there is no instruction input, the process proceeds to 3 61 4.
  • the system controller 5 0 displays the screen for 1 to 10 shooting
  • the compression rate for compressing to reduce the file size capacity ranges from high image quality (low compression rate) to standard (high compression rate) and low image quality (high compression rate).
  • the system control unit 50 displays a screen for 30 shooting
  • the system control unit 50 determines whether or not the user has selected a setting item for moving image recording image quality. If the system control unit 50 determines that the moving image recording quality setting item is selected, the process proceeds to step 3652, and if not, the process proceeds to step 365.
  • the system control unit 50 determines whether or not the user performs 1 to 10 shooting. If the setting indicates to be performed, the system control unit 50 advances the processing to 3655, and if not, advances the processing to 3655. ⁇ 2020/175231 32 (:171? 2020/006201
  • the system control unit 50 displays the screen for 1 to 10 shooting
  • the file format Video, Eight videos Ten proxy videos, 1 to 10 video files and Ten proxy movies + 1 to 10 Prepare 3 movie simultaneous output of movie files. Also regarding the image size, 8 ⁇ , 4 ⁇ , 1 There are 1 to 10 and 08. Furthermore, the compression rate for reducing the file size ranges from high image quality (low compression rate) such as 8!_ !_ _ ⁇ to standard to low image quality (high compression rate) such as ⁇ mi. In addition, there is also a choice of frame rate and a broadcasting system such as 1 ⁇ 1Cho 30/?8 1_.
  • the system control unit 50 displays the screen for 30 shooting in the same manner as in 3655, and in 3655, the user selects the recording image quality for shooting. Accept. 3 0 Even when setting the recording quality for shooting,! ! ⁇ [3 ⁇ 4 Prepare the same selection limb as for shooting.
  • the system control unit 50 is It is determined whether the output setting item is selected.
  • the system control unit 50 advances the processing to 3658 when it is determined that the setting item of 1 to 1 output has been selected by the user, and advances the processing to 3660 when it is not.
  • the system control unit 50 determines whether or not the user has selected the setting item of the viewer system during reproduction. If the system control unit 50 determines that the view assist setting item during playback is selected, the process is terminated.
  • the system control unit 50 determines whether or not the view assist setting during playback has been switched to valid by the user, and if it is determined to be valid, the system control unit 50 executes processing. 2; otherwise, proceed to 3663. At 3 6 6 2 ⁇ 2020/175231 33 ⁇ (: 171-1? 2020/006201
  • the system control unit 50 changes the view assist setting at the time of reproduction to valid and stores the set value in the system memory 52.
  • the system control block 50 is It is determined whether or not the replacement setting item has been selected. If it is determined that the setting item has been selected, the process proceeds to 3646, and if not, the process proceeds to 3665.
  • the system control unit 50 determines whether or not the user has switched the setting for 30 conversion during transfer to valid. If it is determined that the setting has been changed to valid, the system control unit 50 determines at 3 6 6 4. , Change the 30 conversion setting during transfer to valid, and proceed with processing to 3665.
  • the system control unit 50 is It is determined whether or not the setting item related to shooting is selected, and if it is determined that the setting item is selected, the process proceeds to 3666, and if not, the process proceeds to 3666. At 366, the system control unit 50 changes the other processing to valid and advances the processing to 366.
  • the system control unit 50 determines whether or not the user has instructed to exit the menu. If it is determined that the menu is not exited, the process is returned to 3660, and When the determination is made, this processing ends.
  • Figs. 78 and 7 are function charts showing the details of the 1 to 10 photographing processing of the system control unit 50. Written to memory 3 2 This is a flow in which the image processing unit 24 develops 1 to 10 data.
  • Imaging devices such as digital cameras and digital video cameras have a white balance function that corrects the color tone of a captured image according to the light source at the time of capturing.
  • the white balance function is a function that corrects the difference in color tone that changes depending on the light source (natural light source such as sunny or cloudy weather, or artificial light source such as fluorescent light or incandescent light) so that the white looks the same regardless of the light source. Is. 3 7 0 1 In 703, the white balance coefficient required for the white balance processing will be calculated.
  • the system control unit 50 causes the memory control unit 15 to
  • the system control unit 50 performs a white search in-frame determination process of determining white pixels in the acquired RAW image data for calculating the white balance coefficient.
  • the system control unit 50 calculates the white balance coefficient based on the determination result in the white search frame.
  • the system control unit 50 needs to convert the signals into color signals, and therefore performs debayering processing S 1201 to generate signals for all channels of R, G, B per pixel.
  • debayer's methods there are several Debayer's methods, but for example, signals can be generated by linear interpolation using a mouth-pass filter. Since RAW image data is generally affected by noise, optical black (Optical B lack) has a value instead of 0. Therefore, the system control unit 50 performs a process of subtracting the OB component from the debayered signal (S1202). Then, the system control unit 50 calculates Iroshin No. C x, the C y according to the following equation from the obtained RG B signal (S 1 203).
  • ⁇ 2 is the two ⁇ component values in 2 ⁇ 2 pixels of the Bayer array. Further, represents the color temperature, and represents the green-direction correction amount. Also, ⁇ ; is the brightness value.
  • the system controller 50 determines each pixel after debayering. Plot to the coordinate system and determine whether it is within the white search frame.
  • the system control unit 50 performs a light/dark exclusion process of limiting the pixels to be integrated in the brightness direction in the pixels entered in the white search frame. This is done to prevent the calculation accuracy of the white balance coefficient from deteriorating because too dark colors are easily affected by noise. Similarly, colors that are too bright are caused by sensor saturation in one of the channels. Alternatively, this is done to prevent the balance of the T/M ratio from collapsing and moving away from the correct color, thus deteriorating the accuracy of calculating the white balance coefficient. At this time,
  • the brightness of pixels to be subjected to the light/dark exclusion processing is made different. That is, Pixels used for calculating the white balance coefficient, which will be described later, differ between and! This is due to the higher reproducibility in the high-brightness range for 1 to 10 compared to the case of 3 ports.
  • the brightness side for example, + 1 snake V, 1 ⁇ than that interest to a brightness of from 1 to 1 0, + 2 snake V It is possible to calculate the white balance coefficient optimized for a single unit.
  • the system control unit 50 determines that the integrated value of each color evaluation value from the circles within the white search frame and the dark/dark exclusion processing has been performed. 1 3 Li 0 1, 3 Li 0 1 is calculated. Then, at 3120, the system control unit 50 calculates ⁇ 2020/175 231 36 ⁇ (: 171? 2020 /006201
  • the white balance coefficient ⁇ ZVBC ⁇ ⁇ ZVB CO G , ⁇ ZVB CO B is calculated from the integrated value by the following formula.
  • the white balance coefficient is set by the user in the shooting mode (
  • the system control unit 50 calculates a gradation correction table necessary for gradation correction processing. The details of gradation correction will be described with reference to the flow charts of FIGS.
  • the system control unit 50 performs the pit processing using the pit coefficients generated in the processing of 3701 to 3703 in FIG.
  • the system control unit 50 performs histogram detection. Specifically, the white balance gain value obtained in 31 22 1 is applied to the entire image data, and a histogram is created as luminance information for the pixel value that has undergone gamma correction processing.
  • the gamma correction process may be performed using a known look-up table, but it is preferable to use the same gamma characteristic as that used in the image. However, in order to save processing time and memory capacity, simplified gamma characteristics such as the gamma characteristics approximated by a broken line may be used. Note that the edges of the image are generally unimportant. ⁇ 2020/175231 37 ⁇ (: 171-1?2020/006201
  • this is a part that is affected by a decrease in the amount of peripheral light.
  • the system control unit 50 performs face detection preprocessing. This is a process that performs reduction processing, gamma processing, etc. on the image data so that the face can be easily detected.
  • the system control unit 50 executes face detection processing on the preprocessed image data using a known method. By this face detection processing, the position and size of a region that is considered to be a face (face region) and the reliability of detection can be obtained.
  • the system controller 50 sets the gradation correction amount (gradation correction amount (8)) for compensating the exposure correction amount (decrease amount) to the first gradation correction. Calculate as quantity. At this time, the dark areas of the image are properly exposed, but the high-brightness pixels above a predetermined brightness level are not corrected (at least the exposure correction amount is not completely compensated). The gradation correction amount is calculated. As a result, it is possible to further prevent the bright portion after gradation correction from being overexposed.
  • This gradation correction amount can be prepared in advance as a plurality of correction tables according to the exposure correction amount.
  • the system control unit 50 determines that there is a face area whose reliability is higher than the preset evaluation threshold value among the face areas detected by the face detection processing of 3 1 2 2 4. In this case, it is determined that a face has been detected.
  • the system control unit 50 advances the processing to 3 1 2 2 7 when it is determined that a face is detected, and advances the processing to 3 1 2 3 1 when it is determined that a face is not detected.
  • the system control unit 50 calculates a part of the detected face area as a face luminance acquisition area.
  • the face brightness acquisition area is an area for acquiring the brightness of the bright part of the face, and there are no particular restrictions on the number or position of the areas.
  • the system control unit 50 obtains an average value for each of the face brightness acquisition areas for each type of included pixel, ⁇ pixel, and ⁇ pixel. Further, the system control unit 50 applies the white balance gain value to each average value of the Mitsumi pixels in the same manner as the histogram detection, and after performing the gamma correction, ⁇ 2020/175 231 38 ⁇ (: 171? 2020 /006201
  • the gain value of the white balance applied in the histogram detection and the frame detection it is preferable to use the gain value used in the processing for the same image data.
  • the same luminance gamma as that used in development is preferably used, but a simplified gamma characteristic such as a gamma characteristic approximated by a polygonal line may be used to save processing time and memory amount.
  • the system control unit 50 converts the brightness value obtained at 31 228 for each of the average brightness acquisition regions into a value that assumes a proper exposure. This is a process for correcting the fact that, since the image data is captured at an exposure lower than the proper exposure, the face brightness is detected lower than when the image is captured at the proper exposure.
  • the conversion of the brightness value may be performed so as to compensate the exposure correction amount (decrease amount) determined by the exposure control, or may be performed using the gradation correction amount calculated in 31 225.
  • system control unit 50 calculates a representative value of the detected brightness of the face.
  • the representative value for example, the maximum value may be obtained from the respective brightness values of the face brightness acquisition area of the detected face area.
  • the process of 31 231 is a process when 31 226 determines that the system control unit 50 has not detected the back area.
  • the system control unit 50 detects the histogram feature amount.
  • the histogram feature is, for example, the level (30) to which a pixel with a cumulative frequency of 1% belongs from the dark side in the histogram, and the cumulative frequency from the bright side. And so on.
  • the system control unit 50 converts the histogram feature amount calculated at 31 231 into a value that assumes imaging with proper exposure. This is a process to correct that the histogram feature amount is detected lower than when the image data is imaged at the proper exposure because the image data is imaged at the exposure lower than the proper exposure.
  • the brightness value conversion may be performed so as to compensate for the exposure correction amount (decrease amount) determined by the exposure control, or the gradation correction amount calculated in 31 225 may be used.
  • ⁇ 2020/175 231 39 ⁇ (: 171-1? 2020/006201
  • the system control unit 50 calculates the target correction amount.
  • the system control unit 50 obtains a representative brightness value of the face or a target brightness level for the histogram feature amount. Then, the system control unit 50 determines the output brightness level for the input brightness level from the target brightness level and the minimum and maximum values of the brightness in the image data by spline interpolation or the like. I/O characteristics) is created as the gradation correction amount (Mitsumi).
  • the gradation correction amount (Min) is the second gradation correction amount.
  • the target gradation correction amount may be changed to 30 from 1 to 10.
  • the user feels that the subject in Fig. 16 is darker than that in Fig. 168.
  • the gradation characteristic as shown in FIG. 15 by using a gradation characteristic as shown in FIG. 15 and applying a gradation correction amount that raises a darker portion, a desirable result can be obtained.
  • the gradation correction of the present embodiment is an example of correction for compensating for insufficient exposure, but similar gradation correction can be performed for brightness correction for image creation.
  • the target brightness level for the representative brightness value of the face and the histogram feature amount of the image data can be set to a fixed value that is empirically considered to be preferable. Set a different target brightness level depending on the value. ⁇ 2020/175 231 40 ⁇ (: 171? 2020 /006201
  • a lookup table that defines the relationship between the input brightness and the target brightness level may be prepared for each parameter (representative brightness value or histogram feature amount) that sets the target brightness level.
  • the correction characteristics for realizing the conversion to the target brightness level determined in this way are obtained by a method such as spline interpolation, and if necessary, a look-up table ( Or relational formula).
  • the system control unit 50 sets the gradation correction amount (8) calculated in 3 1 2 2 5 and the gradation correction amount (3) calculated in 3 1 2 3 3. To synthesize.
  • the system control unit 50 for example, first applies the gradation correction amount () to each input brightness level, and then applies the gradation correction amount (M) to the corrected brightness level. Obtain a value and create a look-up table of output brightness levels for each input brightness level.
  • a process is performed to limit the upper limit of (composite gradation correction amount).
  • the gradation correction amount (8) and the gradation correction amount (N)
  • the correction amount becomes large and the noise amount becomes noticeable in the corrected image, so the total correction amount is limited.
  • the limiter process the maximum allowable correction amount for each brightness value is prepared as a table, and the output level that exceeds the maximum correction amount among the lookup table values created in 3 1 2 3 4 is used as the maximum correction amount. It can be realized by substituting the output level corresponding to.
  • the gradation correction amount may be calculated as a value for the shooting mode set by the user (3 shots or 1 to 1 shots), Both for 1 to 10 may be calculated.
  • the system control unit 50 performs development using the calculated white balance coefficient, gradation correction parameter, and various 1 to 10 parameters.
  • 1 to 10 developed images are generated by using color matrix, camera data, curve data, color adjustment parameters, noise reduction parameters, sharpness parameters, etc.
  • the camera ⁇ mi gamma curve
  • the recommendation of ⁇ II- is assumed that the inverse characteristic of BT.2 100 PQ (Perceptual Q uantization) E ⁇ TF (Electro-Optical Tranfer Transfer) is used, but the flavor on the camera side is ⁇ TF (O pt ⁇ — O pt I ca IT ransfer Function).
  • the system control unit 50 resizes the image developed in S707 to generate an image for MPF (Multi Photoic Format) for simple display such as a two-screen comparison image. Then, compression-encode in HEVC format.
  • MPF Multi Photoic Format
  • the system control unit 50 further resizes the MPF image generated in S708 to generate a thumbnail image having a smaller pixel number than the MPF image used for index display and the like, and compresses the thumbnail image. ..
  • the system control unit 50 develops the main image in S707.
  • H D R Compress the image.
  • the system control unit 50 determines the recording image quality setting by the user. If the system control unit 50 determines that the setting is such that only RAW images are recorded, the process is S 7 1 2. If it is determined that only the HDR images are recorded, the process is S 7 1 2. If it is determined in 3 that the RAW image and the HDR image are set to be recorded, the process proceeds to S 714.
  • the system control unit 50 compresses the RAW image, adds a header, and creates a RAW image file having a structure as shown in Fig. 8A via the recording medium /F18. Are recorded on the recording medium 200.
  • the detection meta As data record the white balance in-white-box judgment result obtained in S 1 205, the histogram obtained in S 704, and the frame detection result obtained in S 705.
  • the determination result in the white search frame detected here is the determination result before the light/dark exclusion processing in S 1206.
  • the development parameters for HDR such as the white balance coefficient obtained in Fig. 12 and the gradation correction amount obtained in Fig. 14 8 and 14 B, S 708
  • the MPF image for display which is generated by encoding in HEVC format from the image data that has been HDR-developed in, is also recorded as metadata as shown in Fig. 8C.
  • the contents of these data differ depending on whether HDR shooting or SDR shooting.
  • the development parameters when the above-described white search frame determination for SDR and gradation characteristics are used are recorded.
  • thumbnails When displaying thumbnails, it is sufficient to know what kind of image it is because the image is small. Therefore, only the thumbnail image created in S709 may be created and saved as an SDR developed image. (Fig. 8E). With such a configuration, it is possible to display only the thumbnail image even on a display device or a PC that does not support decoding of H.265, which is an HDR compression method.
  • the system control unit 50 compression-encodes the developed HDR image in the HE VC format and adds static metadata or dynamic metadata to the HEIF (H igh fficiencv I mage F i I e F orm Record as HEIF file in at) format on the recording medium 200 via the recording medium / F18.
  • the static metadata includes the X, y coordinates of the three primary colors and white point of the display conforming to CEA-86 1.3, the maximum brightness value of the mastering display, the minimum brightness value, and the maximum brightness value of the content (Maximum Content).
  • Light L evel ), frame average luminance level (Maximum F r ame—average Light L evel ), and the like.
  • the dynamic metadata there is the metadata of dynamic volume mapping for color volume conversion defined in SMPT EST 2094. It is preferable to have a depth of 10 bits or more to express the HDR characteristics with a PQ signal, but since the conventional JPEG format has a depth of 8 bits, it is necessary to newly adopt a container for still image HDR. ..
  • it is an image file format defined by MP EG-H P art 1 2 (IS 0/ IEC 2300 8- 1 2), which was developed by MP EG (Moving Picture Ex xts G roup). Use an HE HE F container.
  • HEIF has the feature that not only the main image but also thumbnails, multiple temporally related images, and metadata such as EX F and XMP can be stored in one file. Therefore, it can store a 1 O bit image sequence encoded by H EVC and can be reused.
  • FIG. 8 A The container file format of the RAW image file illustrated below is the S S Base media file format specified in S 0/ I EC 1 44 96-1 2. Therefore, the container format of this file has a tree structure and each node called a box. Also, each box can have multiple boxes as child elements.
  • Image data file 801 has a file type description at the beginning. ⁇ 2020/175 231 44 ⁇ (: 171? 2020 /006201
  • box 802 of the box has a box 802 of the box, a box ⁇ ! 00 V 803 including all metadata, a box of media data (image data) of the track ⁇ 1 ⁇ 13 808, and a box 807 of other.
  • the above-mentioned box ⁇ V 803 is a child element, Stores information that refers to box folders I ⁇ 1804 and 1 ⁇ 1396 ⁇ 33 that store 805 “81 ⁇ box 806. Contains the metadata of the image, such as the creation date and time of the image, shooting conditions, information on whether the image was taken at 1 to 10 [3 ⁇ 4 or 30 [3 ⁇ 4, the above-mentioned detection metadata, and others. It is composed of the shooting information of. Box mentioned above 3 I 808 is the captured still image data as a child element have.
  • Each 30-quality image is an image in which one color component is 8 bits (256 gradations). Note that the [ ⁇ 8 development parameter 825 in Fig. 8 contains at least 30 development parameters for development.
  • Fig. 8 ⁇ 3 shows 1 to 10 and only 1 to 10 images are recorded as 8 images for display during shooting. It is 809. In this case, I ⁇ ! ⁇ mouth 3 3809 is 1 to 10 image quality development. IV! Image 827, this image 828 and image 824, Development parameters — with evening 825. Each 1-10 quality images, one color component is an image of 1 0 bit (1 02 4 gradations).
  • Figure 8_Rei, 80, 8 only [ ⁇ eight development parameters 825 includes a developing / "parameter of at least 1-10 developing.
  • Fig. 80 shows 1 to 10 and has both 1 to 10 images and 30 images as images for display. It is 809. This place ⁇ 2020/175 231 45 ⁇ (:171? 2020 /006201
  • Fig. 8 is 1 to 10 and is Only images are 30 images, 1 ⁇ /1 and this image are 1 to 1 mouth, which are recorded as ⁇ / ⁇ /images for displaying images. 01 8 9 ⁇ mouth
  • the file format shown in this example is one of the embodiments, and may have other boxes as necessary.
  • the display image may be provided in the box inside the ⁇ V8083 or other box 807.
  • the digital camera 100 With reference to 8 05, it is determined whether the image was taken as 1 to 10 or 30. Then 1 if it is determined that the photographed as ⁇ 1 0, developed as a 1 to 1 0 image using the development parameters for 1 ⁇ 1 0 image contained in the file to [ ⁇ eight images. Also, if it is determined that the image was taken as 30, Develop the image as a 30 image using the development parameters for the 30 image contained in the file. In order to enable such processing, the digital camera 100 according to the present embodiment records development parameters for 30 images in eight image files captured as 30. Taken as a mouth ⁇ 2020/175 231 46 ⁇ (: 171? 2020 /006201
  • Eight image files record development parameters for 1 to 10 images.
  • the developing device may record the still image 1 to 10 image developed using the container of 1 to 1 I described above.
  • Fig. 98 is a flow chart showing details of the reproduction mode process of the system control unit 50 using the display unit 28. This processing is realized by expanding the program recorded in the non-volatile memory 56 into the system memory 52 and executing it by the system controller 50.
  • the system control unit 50 determines whether index reproduction or normal reproduction. In 3901, the system control unit 50 advances the processing to 3902 when it is determined to be the index reproduction. At this 390 2, the system control unit 50 determines the number of images to be reproduced.
  • the system control unit 50 determines an image to be reproduced.
  • the system control unit 50 performs drawing processing of an image to be reproduced.
  • the system control unit 50 determines whether or not all the images to be displayed have been drawn. If it is determined that the drawing has not been completed, the system control unit 50 returns to 3903 and draws. Continue processing. If the system control unit 50 determines that the drawing process is completed, the system control unit 50 advances the process to 390 6. In this 390 6, the system control unit 50 carries out the image output process of 390 6 to the display unit 28 and finishes the display process. After that, the system control unit 50 performs an operation acceptance process.
  • FIG. 9 is a flow chart showing details of the drawing processing of the reproduction mode processing using the display section 28 of the system control section 50.
  • the system control unit 50 acquires information on the image to be reproduced. ⁇ 2020/175 231 47 ⁇ (: 171-1? 2020/006201
  • the system control unit 50 determines an image to be reproduced.
  • the system control unit 50 reads the image to be reproduced from the recording medium 20 0.
  • the system control unit 50 performs expansion processing of the image to be reproduced.
  • the system control unit 50 collects data for each pixel from the image data subjected to the decompression processing at 3911.
  • the image data is, for example, brightness information and is used for histogram processing, highlight warning processing, and the like.
  • the system control unit 50 determines whether the image to be reproduced is a 1 to 10 image or a 30 image. If the system control unit 50 determines that the images to be played back are 1 to 10 images, the process proceeds to 3 9 17 If it is determined to be an image, the process proceeds to 392. At 3 9 1 7, the system control unit 50 checks the 1 to 10 assist display settings during playback.If the assist 1 setting is selected, the process proceeds to 3 9 1 8 and if the assist setting 2 is set, Advances processing to 3 9 19. At 3 9 18, the system control unit 50 makes an assist to the image expanded at 3 9 1 4. Perform conversion processing. Further, at 3 9 19 the system control unit 50 follows the setting of Assist 2 for the image expanded at 3 9 1 4. Perform conversion processing.
  • the system control unit 50 makes the image expanded at 3914 or
  • the image that has been subjected to the 30 conversion processing in 3918 and 3910 is subjected to scaling processing to a size suitable for the display section 28. Then, at 3921, the system control unit 50 determines the arrangement of the generated image and ends the drawing process.
  • Fig. 9 ⁇ 3 to 91 to 1 is a flowchart showing the details of the read image selection processing of the system control unit 50.
  • the system control unit 50 determines the information of the acquired image, determines whether the image is reproducible, and if it is determined that the process is performed, If it is determined that the data cannot be reproduced, the process proceeds to step 939.
  • the system control unit 50 determines whether or not the image to be reproduced is a still image. If the system control unit 50 determines that the image to be played back is a still image, the process proceeds to 394, and if not, the process proceeds to 395. ⁇ 02020/175231 48 ⁇ (: 17 2020/006201
  • the system control unit 50 determines whether or not the image to be reproduced is ⁇ / ⁇ / image. If the system control unit 50 determines that the image to be reproduced is eight ⁇ / ⁇ /images, the process proceeds to 3929, and if not, the process proceeds to 3930.
  • the system controller 50 Judgment is made on whether the images were taken at 8 images or at 3 images.
  • the system control unit 50 makes the determination at this time using the metadata in the [ ⁇ 8 file described with reference to FIGS.
  • the system controller 50 is! If the image is judged to be the eight images taken in [3 ⁇ 4, the process proceeds to 3931, and if it is judged to be the 30 image, the process proceeds to 39332.
  • the system controller 50 Eight Determines whether the still image determined to be not an image is an image taken with 1 to 1 mouth or an image taken with 3 mouths.
  • the images shot at 1 to 10 are recorded as !!
  • the image taken with is recorded as ”, and is recorded as 1 to 1
  • While determining whether the image or 3 0 image may determine whether 1-1 0 image or 3 0 image using the metadata in the 1 to 1 Yoshimi ⁇ .
  • the system control unit 50 selects image data to be used for reproduction from the eight images taken at 1 to 10. At 3 9 3 2, the system controller 50 was photographed with 3 ports Select the image data to be used for playback from the image. At 393, the system control unit 50 selects image data to be used for reproduction from the developed still images 1 to 10. At 3934, the system control unit 50 selects image data to be used for reproduction from the developed still image. At 3935, the system control unit 50 selects the image data to be displayed from the moving image file. At 3936, the system control unit 50 performs non-display processing of the reproduced image. In this case, non-reproducible information is displayed to inform the user that the image cannot be reproduced.
  • FIG. 90 is a flow in which the system control unit 50 selects image data to be used for reproduction from the eight images captured in 1 to 10. ⁇ 2020/175 23 1 49 (:171? 2020/006201
  • the system control unit 50 determines whether index reproduction or normal reproduction. The system control unit 50 advances the processing to 3942 if it is determined to be index reproduction, and advances the processing to 3942 if it is determined to be normal reproduction.
  • the system control unit 50 determines the image data to be used based on the number of reproduced images of index reproduction.
  • the threshold value is set to 36 sheets, but the number is an example, and may be set appropriately by the user, or may be determined depending on the size of the display unit 28. Is also good. If the system control unit 50 determines that the number of images to be displayed is 36 or more, the process proceeds to 394, and if it is determined that the number of images is less than 36, the process proceeds to 394.
  • the system control unit 50 This image (1 to 1 ⁇ )” (8 2 8) is determined as the image data to be used for playback.
  • Fig. 9 Michiichi 1 and 9 Michiichi 2 show the process of selecting the image data to be used for reproduction from the images when the eight images captured from 1 to 10 have 30 display images. It is a flow.
  • the system control unit 50 determines whether it is index reproduction or normal reproduction. The system control unit 50 advances the processing to 3952 if it is determined to be index reproduction, and advances the processing to 3952 if it is determined to be normal reproduction.
  • the system control unit 50 determines the image data to be used based on the number of reproduced images of index reproduction. Here, 36 sheets are used as the threshold for judgment.
  • the process is set to 395, and if it is determined to be less than 36, the process is set to 3 ⁇ 2020/175 231 50 (:171? 2020/006201
  • the system controller 50 plays 8 Check if 30 images are included in the image. The judgment at this time uses the metadata in the [ ⁇ 8 file described in FIGS. 88 to 8).
  • the system control unit 50 displays "For display This image (1 to 1) is determined as the image data used for playback.
  • the system control unit 50 This image ("Mimi ⁇ ")" (
  • the system control unit 50 1 ⁇ /1 image (1 ⁇ 1 ⁇ ⁇ "(827) is determined as the image data to be used for playback.
  • the system control unit 50 displays 1 ⁇ /1? Image ("Mix ⁇ ")" (822) is determined as the image data to be used for reproduction.
  • the system control unit 50 Ding 1 ⁇ 11 ⁇ /1 image (1 ⁇ 1 ⁇ ⁇ ) (826) is decided as the image data to be used for reproduction.
  • Ding 1 ⁇ 11 ⁇ /1 image ("?? ⁇ )" (82 1) is determined as the image data to be used for playback.
  • FIG. 9 is a flow in which the system control unit 50 selects image data to be used for reproduction from 1 to 10 developed still images.
  • the system control unit 50 determines whether index reproduction or normal reproduction.
  • the system control unit 50 advances the processing to 3972 when it is determined to be index reproduction, and advances the processing to 3973 when it is determined to be normal reproduction.
  • the system control unit 50 determines the image data to be used based on the number of reproduced images for index reproduction.
  • the threshold number of sheets is 36 sheets.
  • the system control unit 50 advances the processing to 3975 when it is determined that the number of reproduced images is 36 or more, and advances the processing to 3974 when it is determined to be less than 36.
  • the system control unit 5 0 determines the 1 ⁇ /1 image (1 to 1 ⁇ ⁇ ) (not shown) as the image data to be used for reproduction.
  • the system controller 50 D 1 to 1 1//1 image (1 to 1 M) (not shown) is determined as the image data to be used for playback.
  • Figure 90 was taken with three mouths. This is a flow of selecting image data to be used for reproduction from an image.
  • the system control unit 50 determines whether index reproduction or normal reproduction.
  • the system control unit 50 advances the processing to 3982 when it is determined to be index reproduction, and advances the processing to 3983 when it is determined to be normal reproduction.
  • the system control unit 50 determines the image data to be used based on the number of reproduced images of index reproduction.
  • the threshold value of the number of sheets is 36. If the system control unit 50 determines that the number of images to be displayed is 36 or more, the process proceeds to 395, and if it is determined to be less than 36, the process proceeds to 394.
  • the system control unit 50 The main image (“Mimi ⁇ ”)” (8 2 3) is determined as the image data used for playback.
  • the system control unit 50 is the main image (“Mimi ⁇ ”)” (8 2 3) is determined as the image data used for playback.
  • FIGS. 91 to 1 are a flow for selecting image data to be used for reproduction from 30 developed still images.
  • the system control unit 50 determines whether it is index reproduction or normal reproduction.
  • the system control unit 50 advances the processing to 3992 when it is determined to be index reproduction, and advances the processing to 3939 when it is determined to be normal reproduction.
  • the system control unit 50 determines the image data to be used based on the number of reproduced images for index reproduction. In the embodiment, ⁇ 2020/175231 52 ⁇ (: 171-1? 2020/006201
  • the total is 36. If the system control unit 50 determines that the number of images to be reproduced is 36 or more, the process proceeds to 395, and if it is determined to be less than 36, the process proceeds to 394.
  • the system control unit 50 1 ⁇ /1 image (Not shown) is determined as the image data used for reproduction.
  • the system control unit 50 1 ⁇ /1 image (“Mimi ⁇ ")" (not shown) is determined as the image data to be used for reproduction.
  • the system controller 50 Ding 1 ⁇ 1 1 ⁇ /1 image (“Min ⁇ )" (not shown) is determined as the image data to be used for playback.
  • Fig. 10 is a flowchart showing details of the playback mode processing using the external device 300. This process is implemented by expanding the program recorded in the non-volatile memory 56 into the system memory 52 and executing it by the system controller 50.
  • the system control section 50 determines whether or not the external device 300 is connected to the digital camera 100. If the system control unit 50 determines that the external device 300 is connected, the process proceeds to 3100, and if it is determined that the external device is not connected, the process proceeds to 3105. ..
  • the system controller 50 determines whether the 1 to 10 settings at the time of reproduction are valid. As playback settings, "! ! ⁇ [3 ⁇ 4 play”, “! ! ⁇ [3 ⁇ 4 do not play”, and "shooting mode linked” can be selected.
  • “! ! ⁇ [3 ⁇ 4 play” is set, the external device 300 supports 1 to 10 regardless of whether the image to be played is 1 to 10 or 30 images. For example, it is a mode that outputs 1 to 10 and “1 to 1 unit does not play” is a mode that outputs 30.
  • “Shooting mode linked” is a mode in which the output during playback is linked to the shooting mode. In other words, in the 1 to 10 shooting mode in which “! ! ⁇ [3 ⁇ 4 shooting shadow” is set to “Yes”, the
  • the system control unit 50 determines whether the external device 300 is a display corresponding to 1 to 10. The system control unit 50 If it is determined that the display corresponds to, the process proceeds to 31 004, and if it is determined not to correspond, the process proceeds to 31 005.
  • the system control unit 50 outputs signals 1 to 10 to the external device 300.
  • the system control unit 50 outputs a signal of 30 to the external device 300.
  • 31 006 to 31 011 are the same as 3901 to 906 in FIG. 98, and therefore the description thereof is omitted here.
  • Figure 1 ⁇ is the drawing process (1 to 10 signals output to the external device 300).
  • the system control unit 50 determines whether the image to be reproduced is 1 to 10 images or 30 images.
  • the system controller 50 controls the image to be played back. ⁇ 2020/175 23 1 54 (: 171-1? 2020 /006201
  • 31 028 and 31 029 are the same as 3920 and 392 1 in Fig. 9.
  • the details of the drawing process (31009) when 30 signals are output to the external device 300 are the same as those in FIG.
  • Fig. 11 is a flow chart showing details of the reproduction menu processing. This processing is realized by expanding the program recorded in the non-volatile memory 56 into the system memory 52 and executing it by the system control unit 50.
  • the system control unit 50 allows the user to set a development setting item (not shown). It is determined whether or not it is set to develop. The system control unit 50 If it is determined not to proceed, the process proceeds to 31 103, and if it is determined that development is to be performed, the process proceeds to 31 102.
  • 31 03 the system control unit 50 1 to 10 in 30 conversion setting items (not shown) 0 Judge whether it is set when converting.
  • the system control unit 50 determines whether or not the file transfer setting item (not shown) is set to transfer the file.
  • the system control unit 50 advances the processing to 31 107 when it is determined that the file is not transferred, and advances the processing to 31 10 6 when it is determined that the file is transferred.
  • the system control unit 50 determines whether to exit the menu.
  • the system control unit 50 returns the processing to 31 101 when it is determined that the menu cannot be exited, and ends the reproduction menu processing when it is determined that the menu is exited.
  • the system control unit 50 performs a transfer process for the image file designated by the user. !! ⁇ 10
  • the recipient ⁇ 2020/175 231 55 ⁇ (:171? 2020 /006201
  • the 0 conversion may be performed in the camera and then transferred as a 30 image file.
  • the system control unit 50 sets the 8 image files specified by the user. Develop. Details of the development process will be described below with reference to the block diagram of FIG. Note that each processing unit shown in FIG. 11 is included in the image processing unit 24, but may be realized by a program executed by the system control unit 50.
  • the system control unit 50 reads out 1 0 1 and causes the image processing unit 2 4 to perform development processing. Since an image is a set of pixels in a Bayer array, one pixel has only intensity data of a single color component. still, Eight images have 8 (! ! ⁇ [3 ⁇ 4) when they were captured. Also, To develop 30 as it is, and! ! ⁇ [3 ⁇ 4 It may be developed. Conversely (! ! ⁇ [3 ⁇ 4) develops !! ⁇ [3 ⁇ 4, and in some cases it develops 308. In the white balance section 1 102, white is processed to be white. For development, implementing the e-Wye Balance processed using white balance coefficient 1 to a 0, 1 to 1 0 developing meta recorded in the file.
  • the white balance coefficient for 30 is generated from the judgment result in the white search frame, which is the detection meta stored in the file, and the white balance processing is executed. of course If both white balance factors for recording are recorded, use the one that is necessary as appropriate.
  • the color interpolator 1 103 has three components (for example, [3 ⁇ 4, ⁇ , Mitsumi color information) for each pixel in all pixels by interpolating noise reduction or color mosaic image. Generate a color image. The generated color image is subjected to a matrix conversion unit 1104 and a gamma conversion unit 1105 to generate a basic color image. After that, the color/luminance adjusting unit 1106 processes the color image to improve the appearance of the image. For example, an image that detects the evening scene and emphasizes saturation ⁇ 2020/175 231 56 ⁇ (:171? 2020 /006201
  • Image correction is performed depending on the scene. Gradation correction is performed in the same way, ( If the development is carried out the tone correction using the tone correction amount of 1-1 for 0, 1 to 1 0 developing main evening stored in files. On the other hand, when displaying 30 images, the tone correction amount for 30 is calculated using the histogram and the histogram, which is the detection meta recorded in the file, and the tone correction is performed. If the gradation correction amounts for 1 to 10 and 30 are recorded in Mochiron8, the one that is necessary may be used as appropriate.
  • a high-resolution image is compressed by the compression unit 1107, and is compressed by a method such as ⁇ or 1 to 1 ⁇ and recorded in the recording unit 1108.
  • a developed image to be recorded on a recording medium such as a flash memory is generated. Since a plurality of images can be stored in the above-mentioned 1 to 1 I-container, it is possible to store not only the developed image of 1 to 10 but also the image of 30 developed.
  • the system controller 50 performs 3 0 conversion on the 1 to 10 image files specified by the user. 1 to 1 0 image is 0, color gamut is.
  • Image file of 1 to 10 images or It is a modification about the case where an image file of an image is recorded. 8 When recording 8 image files and 1 to 10 or 30 image files in association with each other, And 1-10 image or 30 images included in Airu, [ ⁇ at 1-10 images or 30 Ima contained in the associated image file on the eighth image file, if there are differences in the developing method or compression encoding method, the management May be complicated or playback compatibility may not be maintained. Therefore, in this modification, the same compression encoding method is applied to the main image, IV! image, and D1 to IV! image for the image file and the related image file, by performing the same development processing. It was decided to record the image generated by encoding in.
  • Figures 189 and 199 are flow charts of the imaging processing in this modified example, which correspond to the imaging processing of 1 to 10 of 34 18 ( Figures 8 and 7 of 7) and the imaging processing of 30 of 3434. It is a chart. This processing is implemented by expanding the program recorded in the non-volatile memory 56 into the system memory 52 and executing it by the system control unit 50.
  • the system control unit 50 determines whether or not the shooting image quality is set to the 1 to 1-port shooting mode.
  • the system control unit 50 advances the processing to 31 903 when it is determined that the mode is set to the 1 to 1 mouth shooting mode, and proceeds to 31 909 when it is determined that the mode is set to the 3 mouth shooting mode.
  • the system control unit 50 performs the same processing as 3702 to 370. That is, get at 31 901
  • the data was used to calculate and detect various parameters and to obtain
  • the image is processed for 1 to 1 aperture and a main image, 1 to 10 [3 ⁇ 4 of 1 ⁇ /1? image, and HDR TH IV! image are generated. And this image,! ⁇ 10 [3 ⁇ 4 1 ⁇ /1? image, ⁇ 2020/175 231 58
  • the system control unit 50 determines the recording image quality setting by the user, as in 37 11. The system control unit 50 If it is determined that only the file is recorded, the process proceeds to 31 905. Then, if it is determined that only the 1 to 10 image files are recorded, the process proceeds to 31 906, File and 1 to 10 image files are set to be recorded, the process proceeds to 331 907.
  • the [ ⁇ 8 image data acquired in 01 is converted into a container file format as shown in Fig. 88. Record as a file.
  • 31 905 as shown in Fig. 80, in 1 1 196 ⁇ 3 3809, [along with ⁇ 8 image data, generated in 31 903 and compression-encoded in 1 to 1 Book image of
  • This image was generated at 03 1 to 1 Snake ⁇ format compression encoded 1-10, of 1-10 IV! Image! ! ⁇ [3 ⁇ 4 GHM image is recorded as an image file of 1 to 1 format. This is recorded as the main image of the 1 to 1 file. IV! Image and! ! ⁇ [3 ⁇ 4 GHM image is recorded in the 1 to 1 file as a display image.
  • Figure 17-8 shows the structure of an image file in the 1 to 1 image format.
  • the container file format of the image file shown below is the base media file format specified in ⁇ 30/ ⁇ 14496-1-2. Therefore, the container_mat of this file has a tree structure and each node called a box. Also, each box can have multiple boxes as child elements. ! ! ⁇ Image data file 1 701 has a box option 1 702 for file type description at the beginning, and a box containing metadata. ⁇ 2020/175231 59 ⁇ (: 171-1? 2020/006201
  • Box ⁇ 16 3 1 703 is a child element Box 1 706 and Box IV! 6 I 303 I 3 1 705 — 1 for storing metadata other than the metadata specified by I.
  • Box 1110131: 1 708 is a child element that stores Box IV! 6 ta D ata ⁇ 705-2, which stores metadata such as the shooting date and time of the image specified by M I, the shooting conditions, and the still image data that was shot.
  • ⁇ ⁇ 1396 ⁇ 3 3 1 709 is Image quality developed 1 to 1 ⁇ ⁇ Compressed display 1 to 1 IV! Image 1 726, 1 ⁇ /1 Image 1 727 and 1 to 10 image quality developed and 1 to 1 ⁇ Compressed main image 1 728 Will be recorded.
  • the system control unit 50 uses 31 9 as in 31 905.
  • the image data recorded as the main image for display of the image file and the image data recorded as the main image of the developed image file (1 to 1 I file) are subjected to the same development processing and the same encoding. Use the same image encoded in the format (1 to 1 ⁇ ).
  • the system control unit 50 uses the 8 ⁇ / ⁇ / image file recorded in 31 907 and the developed image recorded in 31 908. ⁇ 2020/175231 60 ⁇ (: 171-1? 2020/006201
  • Files (1 to 1 files) are recorded in association with each other.
  • Files and 1 to 1 files recorded in 31 906 are also the same as the display images recorded in the files 1 to 10 in the same processing as 31 907, 3 1 908 and the same format (1 to 1 ⁇ ).
  • the encoded image is recorded. Therefore, even if the recording format is changed, the In the image file taken with the shooting settings, the image file will not be able to be played back due to the image file, and playback compatibility can be maintained.
  • system control unit 50 causes the image processing unit 24 to
  • the image data acquired in 1 was processed for 30 images, and 30 images, 30 [[3 ⁇ 4 of 1 ⁇ /1? images, Generate an image. And each image 3 ⁇ 30 compressed image data (“
  • the system control unit 50 determines the recording image quality setting by the user.
  • the system control unit 50 If it is determined that only the image file is recorded, the process is set to 31 9 1 1. If it is determined that only the image file is recorded, the process proceeds to 31 9 1 2. And If it is determined that the settings are such that image files and 30 image files are recorded, the process is set to 33 911 3 If it is determined that the settings are such that image files and multiple types of 30 image files are recorded, the process proceeds to 331 914.
  • the image is recorded on the recording medium 200 via the recording medium 18 as a [ ⁇ 8 image file having a container file structure as shown in FIG. Unlike the 31 905, the 31 9 11 records 30 images generated by the 31 909 as display image data, As a development parameter,
  • the system control unit 50 generates the 30 developed image data (D 1 to 1 IV! image, IV! image, main image) compressed and encoded by 31 909. , "Uses the container of ⁇ , and records it as a" ⁇ file And record it on the recording medium 200. ”
  • Figure 18 shows the file structure of the Mitsu format.
  • the image data file 1 800 in the _M format has the metadata 1 804 such as _M, etc. at the beginning, and 30 image quality.
  • _M_ compressed 1 to 1 IV! images 1 801, 1 ⁇ /1 image 1 802 and main image 1 803 are held.
  • the file format shown in this example is one of the embodiments, and may have other information as necessary.
  • the 8 image data acquired in 901 and the 30 image data generated in 31 909 are compressed on the recording medium 200 via the recording medium -18. Then, in 31 9 14 the system control unit 50, as in the case of 31 9 12, the 30 compressed image data generated in 31 909 is recorded as a recording medium into a recording medium. ⁇ 2020/175 231 62
  • the 8 image data acquired in 901 and the 30 image data generated in 31 909 are compressed on the recording medium 200 via the recording medium -18. Then, in 31 9 16 the system control unit 50, as in the case of 31 9 12, the 30 compressed image data generated by 31 909 is recorded on the recording medium as an image file. Recording on the recording medium 200 via. In addition, in 3119 17, the system control unit 50 generates the 30 image data compressed in 31 909 as the 1 to 1 file as the recording medium. Recording on the recording medium 200 via 18 31 9 17 differs from 31 906 in
  • Image data is recorded in the I 3 1 709 as shown in FIG. That is, 3 1 909 generated
  • the image (“ ⁇ ) 1 722 is recorded as a display image, and 30 main images (" ⁇ ) 1 723 generated in 3 1 909 are recorded as main images.
  • system control unit 50 records [31 files] in
  • H EVC High Efficiency Video Coding
  • a digital camera it may be applied to a computer having an imaging function (such as a smartphone or a notebook PC with a camera), and is not limited to the above embodiment. Absent.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本発明は、撮像装置において、RAW画像データを記録する場合であっても、選択されたダイナミックレンジに対応する現像済み画像データをRAW画像ファイルに含めて記録する。このため、本発明の撮像装置は、撮像部と、ダイナミックレンジを選択する選択部と、撮像部で得たRAW画像データに対して現像処理を施す現像部と、撮像部により取得したRAW画像データをRAW画像ファイルとして記録する際に、選択部により第1のダイナミックレンジが選択された場合は、RAW画像データに対して第1のダイナミックレンジ用の現像処理を現像部により施した画像データを、RAW画像データと共にRAW画像ファイルとして記録し、選択部により第2のダイナミックレンジが選択された場合は、RAW画像データに対して第2のダイナミックレンジ用の現像処理を現像部により施した画像データを、RAW画像データと共にRAW画像ファイルとして記録するように制御する制御部とを有する。

Description

明 細 書
発明の名称 : 撮像装置及びその制御方法及びプログラム
技術分野
[0001] 本発明は、 撮像装置及びその制御方法及びプログラムに関するものである 背景技術
[0002] 昨今のデジタルカメラに代表される撮像装置は、 H D R画像を撮像し、 そ の H D R画像を記録媒体に記録可能になっている。 ここで、 H D Rとは High Dynamic Range (ハイダイナミックレンジ) のことであり、 S D R (スタンダ —ドダイナミックレンジ) に比べてより広いダイナミックレンジを持つ画像 を生成する技術である。 また、 RAW画像とは現像前の生の画像を指す。
[0003] H D Rビデオのコンテンツを記録する場合には、 当該コンテンツが H D R ビデオであるか否かの識別情報と共に記録する (例えば特許文献 1) 。
先行技術文献
特許文献
[0004] 特許文献 1 :特開 201 8 _ 7 1 94号公報
発明の概要
発明が解決しようとする課題
[0005] 通常の RAW画像ファイルは、 表示用画像として現像済みの画像を J P E G圧縮したデータを含めることが可能である。 しかし、 J P EG画像は H D R画質に対応していないため H D R画質で表示用画像を保存することはでき ない。 そのため、 H D R撮影した RAW画像を H D Rディスプレイに表示し ても H D R画質で確認するには、 一度 RAW画像を現像する必要がある。
[0006] 本発明はかかる問題に鑑みなされたものであり、 例えば S D Rと H D Rの ような複数のダイナミックレンジに対応している撮像装置において R A W画 像データを記録する場合であっても、 選択されたダイナミックレンジに対応 する現像済み画像データを R A W画像ファイルに含めて記録することで、 R 〇 2020/175231 2 卩(:171? 2020 /006201
八 画像ファイルの再生時にも選択されたダイナミックレンジの画像を確認 できる技術を提供しようとするものである。
課題を解決するための手段
[0007] この課題を解決するため、 例えば本発明の撮像装置は以下の構成を備える 。 すなわち、
撮像手段と、 前記撮像手段により取得した画像データに現像処理を施す現 像手段と、 ダイナミックレンジを選択する選択手段と、 ダイナミックレンジ を選択する選択手段と、 前記撮像手段で得た 8 画像データに対して現像 処理を施す現像手段と、 前記撮像手段により取得した 画像データを
Figure imgf000004_0001
八 画像ファイルとして記録する際に、 前記選択手段により第 1のダイナミ ックレンジが選択された場合は、
Figure imgf000004_0002
画像データに対して第 1のダイ ナミックレンジ用の現像処理を前記現像手段により施した画像データを、 前
Figure imgf000004_0003
画像ファイルとして記録し、 前記選択 手段により第 2のダイナミックレンジが選択された場合は、 前記 画像 データに対して第 2のダイナミックレンジ用の現像処理を前記現像手段によ り施した画像データを、 前記 画像データと共に前記 画像ファイ ルとして記録するように制御する制御手段と、 を有する。
発明の効果
[0008] 本発明によれば、
Figure imgf000004_0004
のような複数種類のダイナミックレンジ に対応している撮像装置において、
Figure imgf000004_0005
画像データを記録する場合であっ ても、 選択されたダイナミックレンジに対応する現像済み画像データを 八 画像ファイルに含めて記録することで、 例えばファイルー覧表示等の簡易 表示の際に、 選択されたダイナミックレンジの画像を確認できるようになる
[0009] また、 本発明によれば、
Figure imgf000004_0006
のような複数種類のダイナミック レンジに対応している撮像装置において、
Figure imgf000004_0007
画像データを記録する場合 であっても、 選択されたダイナミックレンジに対応する現像済み画像データ を 画像ファイルに含めて記録する。 そのため、 例えばファイルー覧表 〇 2020/175231 3 卩(:171? 2020 /006201
示等の簡易表示の際に、 選択されたダイナミックレンジの画像を確認できる ようになる。
[0010] あるいは、 本発明によると、 複数種類のダイナミックレンジに対応してい る撮像装置において、 複数種類のファイルを記録する際に、 管理の煩雑さを 防ぎ、 再生互換性を保つことが可能となる。
[001 1] 本発明のその他の特徴及び利点は、 添付図面を参照とした以下の説明によ り明らかになるであろう。 なお、 添付図面においては、 同じ若しくは同様の 構成には、 同じ参照番号を付す。
図面の簡単な説明
[0012] 添付図面は明細書に含まれ、 その一部を構成し、 本発明の実施の形態を示 し、 その記述と共に本発明の原理を説明するために用いられる。
[図 1八]実施形態における撮像/表示装置の外観図。
[図 18]実施形態における撮像/表示装置の外観図。
[図 2]実施形態における撮像/表示装置の構成を示すブロック図。
[図 3]外部機器との接続構成図。
[図 4八-1]実施形態における!- V撮影モード処理のフローチヤート。
[図 4八-2]実施形態における!- V撮影モード処理のフローチヤート。
[図 4八-3]実施形態における!- V撮影モード処理のフローチヤート。
[図 4八-4]実施形態における!- V撮影モード処理のフローチヤート。
[図 48-1]クイックレビューのフローチヤート。
[図 48-2]クイックレビューのフローチヤート。
Figure imgf000005_0001
[図 6八-1]実施形態における 1~1 0 撮影メニュー処理のフローチヤート。
[図 6八-2]実施形態における 1~1 0 撮影メニュー処理のフローチヤート。
[図 68-1]実施形態における 1~1 0 撮影メニュー処理のフローチヤート。
[図 68-2]実施形態における ! ! 0 撮影メニュー処理のフローチヤート。 20/175231 4 卩(:171? 2020 /006201
[図 7八]実施形態における 1~1 0 撮影処理のフローチヤート。
[図 78]実施形態における 1~1 0 撮影処理のフローチヤート。
[図 8八]実施形態における /\ ァイルの構成図。
[図 88] 八 ファイルにおける領域丨 01 8 9 ㊀ 0 8 8の例を示す図。
[図 8(:] 八 ファイルにおける領域丨 01 8 9 ㊀ 0 8 8の例を示す図。
[図 80] 八 ファイルにおける領域丨 01 8 9 ㊀ 0 8 8の例を示す図。
[図 8£] 八 ファイルにおける領域丨 01 8 9 ㊀ 0 8 8の例を示す図。
[図 9八]実施形態における再生モード処理のフローチヤート。
[図 98]実施形態における再生モード処理のフローチヤート。
[図 90]実施形態における再生モード処理のフローチヤート。
[図 90]実施形態における再生モード処理のフローチヤート。
[図 9 -1]実施形態における再生モード処理のフローチヤート。
[図 9 -2]実施形態における再生モード処理のフローチヤート。
[図 9ド]実施形態における再生モード処理のフローチヤート。
[図 90]実施形態における再生モード処理のフローチヤート。
[図昍]実施形態における再生モード処理のフローチヤート。
Figure imgf000006_0001
丨再生処理のフローチヤート。
Figure imgf000006_0002
丨再生処理のフローチヤート。
[図 1 1八]実施形態における再生メニユー処理のフローチヤート。
[図 1 18]実施形態における再生メニユー処理におけるデータの流れを示す図。 [図 12]実施形態における現像処理のフローチヤート。
[図 13]〇 〇ソ平面を示す図。
[図 14八]階調補正パラメータ生成処理のフローチヤート。
[図 148]階調補正パラメータ生成処理のフローチヤート。
[図 15八]階調補正量を示す図。
[図 158]階調補正量を示す図。
[図 16八]3 0 での見えの例を示す図。
[図 168] ! ! 0 での見えの例を示す図。 〇 2020/175231 5 卩(:171? 2020 /006201
[図 17八]1~1巳 丨 ファイルの構成図。
Figure imgf000007_0001
[図 170]1~1巳 丨 ファイルにおける領域丨 〇1 8 9 ㊀ 0 8 8の例を示す図。 [図 170]1~1巳 丨 ファイルにおける領域丨 〇1 8 9 ㊀ 0 8 8の例を示す図。 [図 18]」 巳◦ファイルの構成図。
[図 19八]変形例における撮影処理のフローチャート。
[図 198]変形例における撮影処理のフローチャート。
発明を実施するための形態
[0013] 以下、 添付図面を参照して実施形態を詳しく説明する。 尚、 以下の実施形 態は特許請求の範囲に係る発明を限定するものでするものでない。 実施形態 には複数の特徴が記載されているが、 これらの複数の特徴の全てが発明に必 須のものとは限らず、 また、 複数の特徴は任意に組み合わせられてもよい。 さらに、 添付図面においては、 同 _若しくは同様の構成に同 _の参照番号を 付し、 重複した説明は省略する。
[0014] 図 1 八, 1 巳に本実施形態が適用する装置の一例としてのデジタルカメラ
1 0 0の外観図を示す。 図 1 八はデジタルカメラ 1 0 0の前面斜視図であり 、 図 1 巳はデジタルカメラ 1 0 0の背面斜視図である。 図 1 八, 1 巳におい て、 表示部 2 8は画像や各種情報を表示する、 カメラ背面に設けられた表示 部である。 ファインダー外表示部 4 3は、 カメラ上面に設けられた表示部で あり、 シャッター速度や絞りをはじめとするカメラの様々な設定値が表示さ れる。 シャッターボタン 6 1は撮影指示を行うための操作部である。 モード 切替スイッチ 6 0は各種モードを切り替えるための操作部である。 端子カバ _ 4 0は外部機器との接続ケーブルとデジタルカメラ 1 0 0とを接続する接 続ケーブル等のコネクタ (不図示) を保護するカバーである。 メイン電子ダ イヤル 7 1は操作部 7 0に含まれる回転操作部材であり、 ユーザはこのメイ ン電子ダイヤル 7 1 を回すことで、 シャッター速度や絞りなどの設定値の変 更等が行える。 電源スイッチ 7 2はデジタルカメラ 1 0 0の電源の〇1\!及び 〇 を切り替える操作部材である。 サブ電子ダイヤル 7 3は、 操作部 7 0 〇 2020/175231 6 卩(:171? 2020 /006201
に含まれる回転操作部材であり、 選択枠の移動や画像送りなどに利用される 。 十字キ _ 7 4は操作部 7 0に含まれ、 上、 下、 左、 右部分をそれぞれ押し 込み可能な十字キー (4方向キー) である。 十字キ _ 7 4の押した部分に応 じた操作が可能である。 3巳丁ボタン 7 5は操作部 7 0に含まれ、 押しボタ ンであり、 主に選択項目の決定などに用いられる。 (- Vボタン 7 6は操作部 7 0に含まれ、 静止画撮影モードおいてライブビュー (以下、 [- V) の〇 と〇 を切り替えるボタンである。 動画撮影モードにおいては、 動画撮影 (記録) の開始、 停止の指示に用いられる。 拡大ボタン 7 7は操作部 7 0に 含まれ、 撮影モードのライブビュー表示において拡大モードの〇 1\1、 〇 , 及び拡大モード中の拡大率の変更を行うための操作ボタンである。 再生モ -ドにおいては再生画像を拡大し、 拡大率を増加させるための拡大ボタンと して機能する。 縮小ボタン 7 8は操作部 7 0に含まれ、 拡大された再生画像 の拡大率を低減させ、 表示された画像を縮小させるためのボタンである。 再 生ボタン 7 9は操作部 7 0に含まれ、 撮影モードと再生モードとを切り替え る操作ボタンである。 撮影モード中に再生ボタン 7 9を押下することで再生 モードに移行し、 記録媒体 2 0 0に記録された画像のうち最新の画像を表示 部 2 8、 または、 外部機器 3 0 0に表示させることができる。 クイックリタ —ンミラー 1 2は、 システム制御部 5 0から指示されて、 不図示のアクチュ エータによりアップダウンされる。 通信端子 1 0はデジタルカメラ 1 0 0が レンズ側 (着脱可能) と通信を行う為の通信端子である。 接眼ファインダー 1 6はフォーカシングスクリーン 1 3を観察することで、 レンズユニッ ト 1 5 0を通して得た被写体の光学像の焦点や構図の確認を行うための覗き込み 型のファインダーである。 蓋 2 0 2は記録媒体 2 0 0を格納したスロッ トの 蓋である。 グリップ部 9 0は、 ユーザがデジタルカメラ 1 0 0を構えた際に 右手で握りやすい形状とした保持部である。
[0015] 図 2は、 本実施形態によるデジタルカメラ 1 0 0の構成例を示すブロック 図である。
[0016] 図 2において、 レンズユニッ ト 1 5 0は、 交換可能な撮影レンズを搭載す 〇 2020/175231 7 卩(:171? 2020 /006201
るレンズユニットである。
[0017] レンズ 1 0 3は通常、 複数枚のレンズから構成されるが、 ここでは簡略し て一枚のレンズのみで示している。 通信端子 6はレンズユニッ ト 1 5 0がデ ジタルカメラ 1 0 0側と通信を行う為の通信端子であり、 通信端子 1 0はデ ジタルカメラ 1 0 0がレンズユニッ ト 1 5 0側と通信を行う為の通信端子で ある。 レンズユニッ ト 1 5 0は、 この通信端子 6 , 1 0を介してシステム制 御部 5 0と通信し、 内部のレンズシステム制御回路 4によって絞り駆動回路 2を介して絞り 1の制御を行い、 八 駆動回路 3を介して、 レンズ 1 0 3の 位置を変位させることで焦点を合わせる。
[0018] 八巳センサー 1 7は、 レンズユニッ ト 1 5 0を通した被写体の輝度を測光 する。 焦点検出部 1 1は、 システム制御部 5 0にデフォーカス量情報を出力 する。 システム制御部 5 0はそれに基づいてレンズユニッ ト 1 5 0を制御し 、 位相差八 を行う。
[001 9] クイックリターンミラー 1 2 (以下、 ミラー 1 2) は、 露光、 ライブビュ —撮影、 動画撮影の際にシステム制御部 5 0から指示されて、 不図示のアク チュエータによりアップダウンされる。 ミラー 1 2は、 レンズ 1 0 3から入 射した光束をファインダ 1 6側と撮像部 2 2側とに切替えるためのミラーで ある。 ミラー 1 2は通常時はファインダ 1 6へと光束を導くよう反射させる ように配されているが、 撮影が行われる場合やライブビュー表示の場合には 、 撮像部 2 2へと光束を導くように上方に跳ね上がり光束中から待避する ( ミラーアップ) 。 またミラー 1 2はその中央部が光の一部を透過できるよう にハーフミラーとなっており、 光束の一部を、 焦点検出を行うための焦点検 出部 1 1 に入射するように透過させる。
[0020] ユーザ (撮影者) は、 ペンタブリズム 1 4とファインダー 1 6を介して、 フォーカシングスクリーン 1 3を観察することで、 レンズユニッ ト 1 5 0を 通して得た被写体の光学像の焦点や構図の確認が可能となる。
[0021 ] シャッター 1 0 1は、 システム制御部 5 0の制御で撮像部 2 2の露光時間 を自由に制御できるフォーカルプレーンシヤッターである。 〇 2020/175231 8 卩(:171? 2020 /006201
[0022] 撮像部 2 2は光学像を電気信号に変換する〇〇 0や〇 IV!〇 3素子等で構成 される撮像素子である。 この撮像部2 2の撮像面には、 [¾ , 〇, 巳の各色成 分のフィルタが 2次元的に周期的に配置されている。 隣接する 2 X 2個のフ ィルタについて着目したとき、 その対角関係にある 2つには◦成分のフィル 夕が配置され、 残りの 2つに◦成分と巳成分のフィルタが配置される。 そし て、 この 2 X 2個のフィルタが、 撮像部 2 2の撮像面に配列されている。 か かる配列は一般にベイヤ配列と呼ばれる。 それ故、 撮像部 2 2から出力され る信号 (アナログ信号) が表す画像も、 ベイヤ配列の画素信号となる。 八/ 口変換器 2 3は、 撮像部 2 2から出力される 1画素のアナログ信号を、 例え ば 1 0ビッ トのデジタル信号に変換する。 なお、 この段階での画像データは 、 上記のように、 1画素 1成分で、 1成分当たり 1 0ビッ トのベイヤ配列の 画像データであり、 未現像の画像データである。 それ故、 この段階での画像 データを[^八 画像データという。 なお、 欠陥画素を補った後のベイヤ配列 の画像データを
Figure imgf000010_0001
画像データとしても良い。 なお、 実施形態では /〇 変換器 2 3がアナログ信号を 1 〇ビッ トのデジタルデータに変換するものと しているが、 このビッ ト数は 8ビッ トを超えるビッ ト数であれば良く、 特に 制限はない。 ビッ ト数が多いほど、 高階調表現が可能となる。
[0023] 画像処理部 2 4は、 /〇変換器 2 3からのデータ、 又は、 メモリ制御部
1 5からのデータに対し所定の画素補間、 縮小といったリサイズ処理や色変 換処理を行う。 また、 画像処理部 2 4では、 撮像した画像データを用いて所 定の演算処理が行われ、 得られた演算結果に基づいてシステム制御部 5 0が 露光制御、 測距制御を行う。 これにより、 丁丁 !_ (スルー ·ザ · レンズ) 方 式の八 (才一トフォーカス) 処理、 八巳 (自動露出) 処理、 巳 (フラッ シュプリ発光) 処理が行われる。 また、 画像処理部 2 4は、 撮像した画像デ —夕を用いて所定の演算処理を行い、 得られた演算結果に基づいて丁丁 !_方 式の八 巳 (オートホワイ トバランス) 処理も行っている。 更に画像処理部 2 4は、 システム制御部 5 0の制御下で、 画像データの符号化/復号処理を も行う。 この符号化には、
Figure imgf000010_0002
が含まれる。 」 巳〇は1色 成分当たり 8ビツ トの画像データを符号化するためのものであり、 H E VC は 1色成分当たり 8ビツ トを超える画像データを符号化するためのものであ る。
[0024] A/D変換器 23からの出カデータは、 画像処理部 24及びメモリ制御部
1 5を介して、 或いは、 メモリ制御部 1 5を介してメモリ 32に直接書き込 まれる。 メモリ 32は、 撮像部 22によって得られ A/D変換器 23により デジタルデータに変換された画像データや、 表示部 28、 または、 外部機器 300に表示するための画像データを格納する。 メモリ 32は、 所定枚数の 静止画像や所定時間の動画像および音声を格納するのに十分な記憶容量を備 えている。
[0025] また、 メモリ 32は画像表示用のメモリ (ビデオメモリ) を兼ねている。
D/A変換器 1 9は、 メモリ 32に格納されている表示用画像データをアナ ログ信号に変換して表示部 28に供給する。 こうして、 メモリ 32に書き込 まれた表示用画像データは D/ A変換器 1 9を介して表示部 28により表示 される。 表示部 28は、 LCD等の表示器上に、 D/A変換器 1 9からのア ナログ信号に応じた表示を行う。 A/D変換器 23によって一度 A/D変換 されメモリ 32に蓄積されたデジタル信号を D/ A変換器 1 9においてアナ ログ変換し、 表示部 28に逐次転送して表示することで、 電子ビューファイ ンダとして機能し、 スルー画像表示 (ライブビュー表示) を行える。
[0026] ファインダー内液晶表示部 4 1 には、 ファインダー内表示部駆動回路 42 を介して、 現在オートフォーカスが行われている測距点を示す枠 (A F枠) や、 カメラの設定状態を表すアイコンなどが表示される。 ファインダー外液 晶表示部 43には、 ファインダー外表示部駆動回路 44を介して、 シャツタ —速度や絞りをはじめとするカメラの様々な設定値が表示される。
[0027] デジタル出力 丨 /F 90は、 メモリ 32に格納されている画像表示用のデ —夕をデジタル信号のまま外部機器 300に供給する。 例えば、 H DM I ( 登録商標) (H i g h— D e f i n i t i o n Mu l t i me d i a I n t e r f a c e) 規格に準拠した通信プロトコルに従って、 動画データを 〇 2020/175231 10 卩(:171? 2020 /006201
ストリーム形式で出力する。 こうして、 メモリ 3 2に書き込まれた表: 用の 画像データは外部機器 3 0 0に表示される。
[0028] 不揮発性メモリ 5 6は、 電気的に消去 ·記録可能なメモリであり、 例えば 巳巳
Figure imgf000012_0001
等が用いられる。 不揮発性メモリ 5 6には、 システム制御部 5 〇の動作用の定数、 プログラム等が記憶される。 ここでいう、 プログラムと は、 本実施形態にて後述する各種フローチャートを実行するためのプログラ ムのことである。
[0029] システム制御部 5 0は、 少なくとも 1つのプロセッサーを有する制御部で あり、 デジタルカメラ 1 0 0全体を制御する。 前述した不揮発性メモリ 5 6 に記録されたプログラムを実行することで、 後述する本実施形態の各処理を 実現する。 参照符号 5 2はシステムメモリであり、 [¾八1\/1が用いられる。 シ ステムメモリ 5 2には、 システム制御部 5 0の動作用の定数、 変数、 不揮発 性メモリ 5 6から読み出したプログラム等を展開する。 また、 システム制御 部 5 0はメモリ 3 2、 口/ 変換器 1 9、 デジタル出力 丨 / 9 0、 表示部 2 8等を制御することにより表示制御も行う。 さらに、 システム制御部 5 0 は、 撮影して得られた画像データを記録媒体 2 0 0に記録するための形式に 変換したり、 記録媒体丨 / 1 8を介して記録媒体 2 0 0に画像データを記 録するための記録制御も行う。
[0030] システムタイマー 5 3は各種制御に用いる時間や、 内蔵された時計の時間 を計測する計時部である。
[0031 ] モード切替スイッチ 6 0、 第 1シャッタースイッチ 6 2、 第 2シャッター スイッチ 6 4、 操作部 7 0はシステム制御部 5 0に各種の動作指示を入力す るための操作手段としてとして機能する。
[0032] モード切替スイッチ 6 0は、 システム制御部 5 0の動作モードを静止画記 録モード、 動画撮影モード、 再生モード等のいずれかに切り替える。 静止画 記録モードに含まれるモードとして、 才一卜撮影モード、 才ートシーン判別 モード、 マニュアルモード、 絞り優先モード (八 モード) 、 シャッター速 度優先モード (丁 Vモード) がある。 また、 撮影シーン別の撮影設定となる 〇 2020/175231 1 1 卩(:171? 2020 /006201
各種シーンモード、 プログラム八巳モード、 カスタムモード等がある。 モー ド切替スイッチ 6 0で、 これらのモードのいずれかに直接切り替えられる。 あるいは、 モード切替スイッチ 6 0で撮影モードの一覧画面に一旦切り換え た後に、 表示された複数のモードのいずれかを選択し、 他の操作部材を用い て切り替えるようにしてもよい。 同様に、 動画撮影モードにも複数のモード が含まれていてもよい。
[0033] ユーザが操作するシャッターボタン 6 1は、 第 1シャッタースイッチ 6 2 と第 2シャッタースイッチ 6 3を含む。 第 1シャッタースイッチ 6 2は、 ユ —ザがシャッターボタン 6 1の操作途中、 いわゆる半押し (撮影準備指示) で〇1\1となり第 1シャッタースイッチ信号
Figure imgf000013_0001
を発生する。 システム制御 部 5 0は、 第 1シャッタースイッチ信号
Figure imgf000013_0002
を入力した場合、 八 (才一 トフォーカス) 処理、 巳 (自動露出) 処理、 巳 (才一トホワイ トバラ ンス) 処理、 巳 (フラッシュプリ発光) 処理等の動作を開始する。 第 2シ ャッタースイッチ 6 4は、 シャッターボタン 6 1の操作完了、 いわゆる全押 し (撮影指示) で〇1\1となり、 第 2シャッタースイッチ信号 3 \^/ 2を発生す る。 システム制御部 5 0は、 第 2シャッタースイッチ信号 3 \^/ 2により、 撮 像部 2 2からの信号読み出しから記録媒体 2 0 0に画像データを書き込むま での一連の撮影処理の動作を開始する。
[0034] 操作部 7 0の各操作部材は、 表示部 2 8、 または、 外部機器 3 0 0に表示 される種々の機能アイコンを選択操作することなどにより、 場面ごとに適宜 機能が割り当てられ、 各種機能ボタンとして作用する。 機能ボタンとしては 、 例えば終了ボタン、 戻るボタン、 画像送りボタン、 ジャンプボタン、 絞込 みボタン、 属性変更ボタン等がある。 例えば、 メニューボタン 7 0 6が押さ れると各種の設定可能なメニュー画面が表示部 2 8、 または、 外部機器 3 0 0に表示される。 ユーザは、 表示部 2 8、 または、 外部機器 3 0 0に表示さ れたメニュー画面と、 上下左右の 4方向ボタンや 3巳丁ボタンとを用いて直 感的に各種設定を行うことができる。
[0035] なお、 実施形態における表示部 2 8は 3 0 画質の画像表記機能、 すなわ 〇 2020/175231 12 卩(:171? 2020 /006201
ち、 巳の各色成分が 8ビッ ト (2 5 6階調) で表示可能とする。 ま た、 外部機器 3 0 0がデジタルカメラ 1 0 0に接続された場合は、 外部機器 3 0 0が、 表示部 2 8に代わって撮像画像やライブ画像の出力対象デバイス として設定されるものとする。 また、 ユーザが、 操作部 7 0を操作して、 表 示部 2 8、 外部機器 3 0 0のいずれにするかを明示的に選択した場合には、 その選択した方が出力対象デ/《イスとなるものとする。
[0036] 操作部 7 0は、 ユーザからの操作を受け付ける入力部としての各種操作部 材である。 操作部 7 0には、 少なくとも以下の操作部が含まれる。 シャッタ —ボタン 6 1、 メイン電子ダイヤル 7 1、 電源スイッチ 7 2、 サブ電子ダイ ヤル 7 3、 十字キー7 4、 3巳丁ボタン 7 5、 [- Vボタン 7 6、 拡大ボタン 7 7、 縮小ボタン 7 8、 再生ボタン 7 9である。 十字キー7 4は、 十字キー 7 4における上、 下、 右、 左の各部を押し込み可能な方向ボタンである。 本 実施形態では一体的な操作部として説明しているが、 上ボタン、 下ボタン、 右ボタン、 左ボタンがそれぞれ独立したボタンであってもよい。 以下、 上、 または下部分を上下キー、 左または右部分を左右キーと称する。 また、 操作 部 7 0には以下の操作部も含まれる。
[0037] 八 _〇1\1ボタン 7 0匕は、 操作部 7 0に含まれる押しボタンスイッチで あり、 押下することで八 の実行を指示することができる。 八 _ 1\1ボタ ン 7 0匕の押下方向は、 レンズ 1 0 3から撮像部 2 2に入射する被写体光の 方向 (光軸) と平行である。
[0038] クイック設定ボタン 7 0〇 (以下、 0ボタン 7 0〇) は、 操作部 7 0に含 まれる押しボタンスイッチであり、 押下することで、 各動作モードにおいて 設定可能な設定項目の一覧であるクイック設定メニューが表示される。 例え ばライブビュー撮影での撮影待機中に押下されると、 電子先幕シャッター、 モニターの明るさ、 !_ 画面の 巳、 2点拡大、 無音撮影などの設定項目の 一覧が !_ Vに重畳して 1列に表示される。 ユーザは表示されたクイック設定 メニューの内、 任意の選択肢を上下キーで選択してセッ トボタンを押下する ことで、 選択した設定項目に関する設定変更や動作モードへの移行を行うこ 〇 2020/175231 13 卩(:171? 2020 /006201
とができる。
[0039] アクティブ枠切替ボタン 7 0 は、 操作部 7 0に含まれる押しボタンスイ ッチであり、 後述する 2点拡大処理において押下することで、 拡大している 2箇所のうち、 アクティブな拡大位置 (枠) を切り替えることができる。 ま た、 動作モードによって異なる機能が割り当てられており、 再生モードにお いて押下すると、 表示している画像にプロテクト属性を付与することができ る。
[0040] メニューボタン 7 0 6は、 操作部 7 0に含まれる押しボタンスイッチであ り、 各種の設定が可能なメニュー画面が表示部 2 8、 または、 外部機器 3 0 0に表示される。
[0041 ] ファンクションボタン 7 0干は、 操作部 7 0に含まれる 3つの押しボタン スイッチであり、 それぞれ機能が割り当てられている。 ファンクションボタ ン 7 0チのそれぞれは、 グリップ部 9 0を保持する右手の指 (中指または薬 指または小指) によって操作可能な位置に配置されており、 押下方向はレン ズ 1 0 3から撮像部 2 2に入射する被写体光の方向 (光軸) と平行である。
[0042] インフォボタン 7 0 9は、 操作部 7 0に含まれる押しボタンスイッチであ り、 各種情報表示の切り替えなどに使用される。
[0043] 電源制御部 8 0は、 電池検出回路、 〇〇一〇〇コンバータ、 通電するブロ ックを切り替えるスイッチ回路等により構成され、 電池の装着の有無、 電池 の種類、 電池残量の検出を行う。 また、 電源制御部 8 0は、 その検出結果及 びシステム制御部 5 0の指示に基づいて 0(3 _ 0(3コンバータを制御し、 必 要な電圧を必要な期間、 記録媒体 2 0 0を含む各部へ供給する。
[0044] 電源部 3 0は、 アルカリ電池やリチウム電池等の一次電池や 1\! 丨 〇 ¢1電池 や 1\1 丨 1^(·!電池、 1_ 丨電池等の二次電池、 八〇アダプター等からなる。 記録 媒体丨 / 1 8は、 メモリカードやハードディスク等の記録媒体 2 0 0との インターフェースである。 記録媒体 2 0 0は、 撮影された画像を記録するた めのメモリカード等の記録媒体であり、 半導体メモリや磁気ディスク等から 構成される。 [0045] 通信部 54は、 無線または有線ケーブルによって接続し、 映像信号や音声 信号の送受信を行う。 通信部 54は無線 LAN (L o c a l A r e a N e t wo r k) やインターネッ トとも接続可能である。 通信部 54は撮像部 22で撮像した画像 (スルー画像を含む) や、 記録媒体 200に記録された 画像を送信可能であり、 また、 外部機器から画像データやその他の各種情報 を受信することができる。
[0046] 姿勢検知部 55は重力方向に対するデジタルカメラ 1 00の姿勢を検知す る。 姿勢検知部 55で検知された姿勢に基づいて、 撮像部 22で撮影された 画像が、 デジタルカメラ 1 00を横に構えて撮影された画像であるか、 縦に 構えて撮影された画像なのかを判別可能である。 システム制御部 50は、 姿 勢検知部 55で検知された姿勢に応じた向き情報を撮像部 22で撮像された 画像の画像ファイルに付加したり、 画像を回転して記録することが可能であ る。 姿勢検知部 55としては、 加速度センサーやジャイロセンサーなどを用 いることができる。
[0047] なお、 操作部 70の一つとして、 表示部 28に対する接触を検知可能な夕 ッチパネル 70 aを有する。 タッチパネル 70 aと表示部 28とは一体的に 構成することができる。 例えば、 タッチパネル 70 aを光の透過率が表示部 28の表示を妨げないように構成し、 表示部 28の表示面の上層に取り付け る。 そして、 タッチパネル 70 aにおける入力座標と、 表示部 28上の表示 座標とを対応付ける。 これにより、 恰もユーザが表示部 28上に表示された 画面を直接的に操作可能であるかのような G U I (グラフィカルユーザイン 夕ーフエース) を構成することができる。 システム制御部 50はタッチパネ ル 70 aへの以下の操作あるいは状態を検出できる。
-タッチパネル 70 aにタッチしていなかった指やペンが新たにタッチパネ ル 70 aにタッチしたこと。 すなわち、 タッチの開始 (以下、 タッチダウン (T o u c h -D own) と称する) 。
-タッチパネル 70 aを指やペンでタッチしている状態であること (以下、 タッチオン (T o u c h—〇 n) と称する) 。 -タッチパネル 7 0 aを指やペンでタッチしたまま移動していること (以下 、 タッチムーブ (T o u c h— M o v e) と称する) 。
-タッチパネル 7 0 aへタッチしていた指やペンを離したこと。 すなわち、 タッチの終了 (以下、 タッチアップ (T〇 u c h - U p) と称する) 。 タッチパネル 7 0 aに何もタッチしていない状態 (以下、 タッチオフ (T o u c h— O f f ) と称する) 。
[0048] タッチダウンが検出されると、 同時にタッチオンであることも検出される 。 タッチダウンの後、 タッチアップが検出されない限りは、 通常はタッチオ ンが検出され続ける。 タッチムーブが検出されるのもタッチオンが検出され ている状態である。 タッチオンが検出されていても、 タッチ位置が移動して いなければタッチムーブは検出されない。 タッチしていた全ての指やペンが タッチアップしたことが検出された後は、 タッチオフとなる。
[0049] これらの操作 ·状態や、 タッチパネル 7 0 a上に指やペンがタッチしてい る位置座標は内部バスを通じてシステム制御部 5 0に通知される。 システム 制御部 5 0は、 通知された情報に基づいてタッチパネル 7 0 a上にどのよう な操作 (タッチ操作) が行なわれたかを判定する。 タッチムーブについては タッチパネル 7 0 a上で移動する指やペンの移動方向についても、 位置座標 の変化に基づいて、 タッチパネル 7 0 a上の垂直成分 ·水平成分毎に判定で きる。 所定距離以上をタッチムーブしたことが検出された場合はスライ ド操 作が行なわれたと判定するものとする。 タッチパネル上に指をタッチしたま まある程度の距離だけ素早く動かして、 そのまま離すといった操作をフリッ クと呼ぶ。 フリックは、 言い換えればタッチパネル 7 0 a上を指ではじくよ うに素早くなぞる操作である。 所定距離以上を、 所定速度以上でタッチムー ブしたことが検出され、 そのままタッチアップが検出されるとフリックが行 なわれたと判定できる (スライ ド操作に続いてフリックがあったものと判定 できる) 。 更に、 複数箇所 (例えば 2点) を同時にタッチして、 互いのタッ チ位置を近づけるタッチ操作をピンチイン、 互いのタッチ位置を遠ざける夕 ッチ操作をピンチアウトと称する。 ピンチアウトとピンチインを総称してピ 〇 2020/175231 16 卩(:171? 2020 /006201
ンチ操作 (あるいは単にピンチ) と称する。 タッチパネル 7 0 3は、 抵抗膜 方式や静電容量方式、 表面弾性波方式、 赤外線方式、 電磁誘導方式、 画像認 識方式、 光センサ方式等、 様々な方式のタッチパネルのうちいずれの方式の ものを用いても良い。 方式によって、 タッチパネルに対する接触があったこ とでタッチがあったと検出する方式や、 タッチパネルに対する指やペンの接 近があったことでタッチがあったと検出する方式ものがあるが、 いずれの方 式でもよい。
[0050] また、 撮像装置本体に限らず、 有線または無線通信を介して撮像装置 (ネ ッ トワークカメラを含む) と通信し、 撮像装置を遠隔で制御する制御装置に も本発明を適用可能である。 撮像装置を遠隔で制御する装置としては、 例え ば、 スマートフォンやタブレッ ト 〇、 デスクトップ 〇などの装置がある 。 制御装置側で行われた操作や制御装置側で行われた処理に基づいて、 制御 装置側から撮像装置に各種動作や設定を行わせるコマンドを通知することに より、 撮像装置を遠隔から制御可能である。 また、 撮像装置で撮影したライ ブビュー画像を有線または無線通信を介して受信して制御装置側で表示でき るようにしてもよい。
[0051 ] なお、 上記では、 デジタルカメラに適用した場合を例にして説明したが、 本発明はこれに限定されない。 例えば、 口 、 携帯電話端末や携帯型の画 像ビューワ、 ディスプレイを備えるプリンタ装置、 デジタルフォトフレーム 、 音楽プレーヤー、 ゲーム機、 電子ブックリーダーなど、 表示部を備えた装 置であれば、 本発明は適用可能である。
[0052] 図 3はデジタルカメラ 1 0 0と外部機器 3 0 0との接続例を示す図である 。 デジタルカメラ 1 0 0と外部機器 3 0 0を接続ケーブル 3 0 2で接続する と、 デジタルカメラ 1 0 0の表示部 2 8が消灯し、 外部機器 3 0 0のディス プレイ 3 0 1 にデジタルカメラ 1 0 0の表示が切り替わり表示される。
[0053] 図 4八一 1乃至 4八一4は、 デジタルカメラ 1 0 0での [- V撮影モード処 理を示すフローチヤートである。 この処理は、 不揮発性メモリ 5 6に記録さ れたプログラムをシステムメモリ 5 2に展開してシステム制御部 5 0が実行 〇 2020/175231 17 卩(:171? 2020 /006201
することで実現する。
[0054] まず、 本実施形態における 1~1 0 撮影モード及び 3 0 撮影モードについ て説明する。 本実施形態のデジタルカメラ 1 〇〇は、 ユーザからのメニュー 操作などによって 1~1口 撮影モードまたは 3口 撮影モードを設定できる。 これらのモードは、 ユーザが最終的に 1~1 0 画質の画像データを得るか 3 0 画質の画像データを得るかの意図を設定するためのものであり、 以下の処 理はいずれのモードが設定されているかに応じて種々の制御が行われる。 以 下、 撮影モード及び
Figure imgf000019_0001
撮影モードで撮影を行うことを 「! !〇 [¾撮 影」 、
Figure imgf000019_0002
撮影」 と記載することがある。 ただし、 後述するように 八 形式のみの記録を設定することも可能であるため、 1~1 0 撮影モードで撮 影された場合に必ず 1~1 0 画像が記録されるとは限らない。
[0055] 3 4 0 1 にて、 システム制御部 5 0は、 ユーザによる操作部 7 0に対する 設定が 1~1 0 撮影モードとなっているか否かを判定する。 システム制御部 5 0は、 1~1 0 撮影モードに設定されていると判定した場合は処理を 3 4 0 2 に、 3 0 撮影モードになっていると判定した場合は処理を 3 4 2 2に進め る。
[0056] 3 4 0 2にて、 システム制御部 5 0は、 デジタルカメラ 1 0 0に外部機器
3 0 0が接続されているか否かを判定する。 システム制御部 5 0は、 外部機 器 3 0 0が接続されていると判定した場合は 3 4 0 3に、 接続されていない と判定した場合は処理を 3 4 0 4に進める。
[0057] 3 4 0 3にて、 システム制御部 5 0は、 デジタルカメラ 1 0 0と外部機器
3 0 0の接続処理を行う。 そして、 システム制御部 5 0は処理を 3 4 0 4へ 進める。 この接続処理の詳細は図 5 〜 5 (3を用いて後述する。 なお、 外部 機器が 1~1 0 接続に対応していれば 1~1 0 接続され、 対応していなければ 3 〇 接続となる。
[0058] 3 4 0 4にて、 システム制御部 5 0は、 撮像部 2 2で撮像し / 0変換器
2 3でデジタル信号に変換して得たライブの
Figure imgf000019_0003
画像データに対し、 画像 処理部 2 4を用いて ! ! 0 画質の現像処理を行う。 以下、 画質の現像 〇 2020/175231 18 卩(:171? 2020 /006201
処理で得た画像を 1~1 0 画像という。
[0059] なお、 実施形態における、 画像データとは、 1画素が 3成分
Figure imgf000020_0001
▽や丫〇匕〇 「等) で構成され、 且つ、 実施形態では各成分が 1 0ビッ ト ( 1 0 2 4階調) で表されるデータである。
Figure imgf000020_0002
画像データには、
Figure imgf000020_0003
像用のガンマカーブ (例えば、 丨 丁11— [¾の勧告巳丁. 2 1 0 0の 〇や 1~1 !-◦) が適用されている。
[0060] 3 4 0 5にて、 システム制御部 5 0は、 (- V画像を表示するデバイス (表 示部 2 8または外部機器 3 0 0) が 1~1 0 対応かどうかを判定し、
Figure imgf000020_0004
応してないと判定した場合は処理を 3 4 0 6に、 1~1 0 対応していると判定 した場合は処理を 3 4 0 9へ進める。
[0061 ] 3 4 0 6にて、 システム制御部 5 0は、 1~1 0 アシスト表示設定を確認す る。 システム制御部 5 0は、 アシスト 1が設定されていると判定した場合は 処理を 3 4 0 7へ、 アシスト 2が設定されている場合は処理を 3 4 0 8へ進 める。 アシスト 1は、 1~1 0 画像の高輝度領域を確認するための設定であり 、 画像の高輝度範囲に多くの階調 (コード値) を割り当てる処理が行 われる。 アシスト 2は、 1~1 0 画像の中間輝度範囲を確認するための設定で あり、 1~1 0 画像の中間輝度領域に多くの階調を割り当てる処理が行われる
[0062] 3 4 0 7にて、 システム制御部 5 0は、
Figure imgf000020_0005
画像データに対して、 アシスト
Figure imgf000020_0006
変換処理を 行い、 且つ、 出力対象デバイス (表示部 2 8または外部機器 3 0 0) に適し たサイズにリサイズ処理を行って得た 3 0 画質の !_ V画像データを表示し 、 処理を 3 4 1 0に進める。
[0063] 3 4 0 8にて、 システム制御部 5 0は、
Figure imgf000020_0007
画像データに対してアシスト 2の設定に従い 1~1 0
Figure imgf000020_0008
0 変換処理を行い
、 且つ、 出力対象デバイス (表示部 2 8または外部機器 3 0 0) に適したサ イズにリサイズ処理を行って得た 3 0 画質の [- V画像データを表示し、 処 理を 3 4 1 0に進める。 〇 2020/175231 19 卩(:171? 2020 /006201
[0064] ここで、 3407、 3408における 30 画質の画像データ
Figure imgf000021_0001
像データ) とは、 1成分当たり 8ビッ トの画像データをいう。
Figure imgf000021_0002
画質の 画像データには、 30 画像用のガンマカーブ (例えば、 3
Figure imgf000021_0003
◦巳規格のガ ンマカーブ) が適用されている。 なお、 3
Figure imgf000021_0004
巳規格のガンマカーブは、 一 般的には暗部が直線で明部が 2. 4のべき乗の力ーブであるが、 簡易的には 2. 2のべき乗のカーブを用いても良い。
[0065] 3409にて、 システム制御部 50は、 3404での現像処理で得た 1~10 画像データを、 出力対象デバイス (表示部 28または外部機器 300) に 適したサイズにリサイズ処理し、 そのリサイズ後の 1~10 画質の画像 (以降 、 1~10 !__!_ V画像) をライブ表示し、 処理を 34 1 0に進める。
[0066] 34 1 0にて、 システム制御部 50は、 メニュー表示ボタン 706が押さ れたかを判定し、 押されたと判定した場合は処理を 34 1 1 に、 押されてい ないと判定した場合は処理を 34 1 2に進める。 34 1 1 にて、 システム制 御部 50は、 撮影メニュー処理を行い、 処理を 34 1 2に進める。 この撮影 メニュー処理の詳細は図 6 一 1及び 6 一 2, 図 6巳一 1及び 6巳一 2を 用いて後述する。
[0067] 34 1 2にて、 システム制御部 50は、 インフォ表示ボタン 709が押さ れたかを判定し、 押されたと判定した場合は処理を 34 1 3に、 押されてい ないと判定した場合は処理を 34 1 4に進める。 34 1 3では、 システム制 御部 50は、 撮影情報の表示を切り替え、 34 1 4に進む。 撮影情報には、 ヒストグラムやハイライ ト警告表等がある。
[0068] 34 1 4にて、 システム制御部 50は、 信号 3\^/1 を受信しているか否か に基づき、 シャッターボタン 6 1が半押し状態かどうかを判定し、 半押しさ れていないと判定した場合は処理を 3420に、 半押し状態であると判定し た場合は処理を 34 1 5に進める。
[0069] 34 1 5にて、 システム制御部 50は、 図 2で説明した八 /八巳処理を 行い、 34 1 6に進む。 34 1 6にて、 システム制御部 50は、 信号 3\^/2 を受信しているか否かに基づき、 シャッターボタン 6 1が全押し状態かどう 〇 2020/175231 20 卩(:171? 2020 /006201
かを判定し、 全押し状態でないと判定した場合は処理を 3 4 1 7に進み、 全 押し状態であると判定した場合は処理を 3 4 1 8に進める。 3 4 1 7にて、 システム制御部 5 0は、 シャッターボタン 6 1が半押し状態が保持されてい るかを判定し、 半押し状態が保持されていれば処理を 3 4 1 5に戻し、 半押 し状態が保持されていないと判定した場合は処理を 3 4 2 0に進める。 3 4 1 8にて、 システム制御部 5 0は、
Figure imgf000022_0001
撮影処理を行い、 記録媒体に予め 設定した記録形式に応じた画像データファイルを記録する。 図 8 は、 記録 されるファイルのデータ構造を示している。 そして、 システム制御部 5 0は 処理を 3 4 1 9に進める。 なお、 この 1~1 0 撮影処理の詳細は図 7 及び 7 巳を用いて後述する。 そして、 3 4 1 9にて、 システム制御部 5 0は、 クイ ックレビユー表示処理を行い、 処理を 3 4 2 0に進める。 このクイックレビ ユー表示処理の詳細は図 4巳_ 1及び 4巳_ 2を用いて後述する。
[0070] 3 4 2 0にて、 システム制御部 5 0は、 [- Vボタン 7 6が押されたかを判 定し、 押されていると判定した場合は処理を 3 4 2 1 に、 押されていないと 判定した場合は処理を 3 4 2 2に進める。
[0071 ] 3 4 2 1 にて、 システム制御部 5 0は、 3 4 0 4で 1~1 0 画質に現像処理 した画像データ ( 1画素 3成分で、 1成分当たり 1 〇ビッ トの画像データ)
Figure imgf000022_0002
動画ファイルとして記録し、 3 4 3 8に処理を進める。
[0072] 3 4 2 2にて、 システム制御部 5 0は、 外部機器 3 0 0がデジタルカメラ
1 0 0に接続されているか否かを判定する。 システム制御部 5 0は、 外部機 器 3 0 0が接続されていると判定した場合は処理を 3 4 2 3に、 接続されて いないと判定した場合は処理を 3 4 2 4に進める。 3 4 2 3にて、 システム 制御部 5 0は、 デジタルカメラ 1 0 0と外部機器 3 0 0の接続処理を行い、 処理を 3 4 2 4へ進める。 この接続処理の詳細は図 5 〜 5 (3を用いて後述 する。 なお、 3 0 撮影モードのため外部機器とは 3 0 接続されることに なる。
[0073] 3 4 2 4にて、 システム制御部 5 0は、 撮像部 2 2で撮像し、 /〇変換 〇 2020/175231 21 卩(:171? 2020 /006201
器 2 3でデジタル信号に変換した画像を画像処理部 2 4で 3口 画質 ( 1画 素 3成分で、 1成分当たり 8ビッ ト (2 5 6階調) ) に現像し、 処理を 3 4 2 5に進む。 なお、 以降、 3 0 画質の現像処理後の画像を 3 0 画像とい う。
[0074] 3 4 2 5にて、 システム制御部 5 0は、
Figure imgf000023_0001
画像を、 出力先のデバイスの解像度 (表示部 2 8または外部機器 3 0 0) に 適したサイズにリサイズ処理を行い、 3
Figure imgf000023_0002
画質のライブ画像 (3
Figure imgf000023_0003
▽画像) を生成し、 生成した
Figure imgf000023_0004
画像を表示する。
[0075] 3 4 2 6にて、 システム制御部 5 0は、 メニュー表示ボタン 7 0 6が押さ れたかを判定し、 押されたと判定した場合は処理を 3 4 2 7に、 押されてい ないと判定した場合は処理を 3 4 2 8に進める。 3 4 2 7にて、 システム制 御部 5 0は、 撮影メニュー処理を行い、 処理を 3 4 2 8に進める。 この 3 4 2 7の撮影メニュー処理の詳細は図 6 一 1及び 6 一 2 , 図 6巳一 1及び 6巳一 2を用いて後述する。
[0076] 3 4 2 8にて、 システム制御部 5 0は、 インフォ表示ボタン 7 0 9が押さ れたかを判定し、 押されたと判定した場合は処理を 3 4 2 9に、 押されてい ないと判定した場合は処理を 3 4 3 0に進める。 3 4 2 9にて、 システム制 御部 5 0は、 撮影情報の表示を切り替え、 3 4 3 0に進む。 撮影情報には、 ヒストグラムやハイライ ト警告表等がある。
[0077] 3 4 3 0にて、 システム制御部 5 0は、 シャッターボタン 6 1が半押し状 態かどうかを判定し、 半押し状態にないと判定した場合は処理を 3 4 3 6に 、 半押し状態であると判定した場合は処理を 3 4 3 1 に進める。
[0078] 3 4 3 1 にて、 システム制御部 5 0は、 図 2で説明した八 /八巳処理を 行い、 3 4 3 2に進める。 3 4 3 2にて、 システム制御部
Figure imgf000023_0005
2を受信したか否かに基づき、 シャッターボタン 6 1が全押し状態かどうか を判定する。 システム制御部 5 0は、 全押し状態でないと判定した場合は処 理を 3 4 3 3に、 全押し状態であると判定した場合は処理を 3 4 3 4に進め る。 3 4 3 3にて、 システム制御部 5 0は、
Figure imgf000023_0006
を受信したか否かに 〇 2020/175231 22 卩(:171? 2020 /006201
基づき、 シャッターボタン 6 1が半押し状態が保持されているかを判定する 。 システム制御部 5 0は、 半押し状態が保持されていると判定した場合は処 理を 3 4 3 1 に戻し、 半押し状態が保持されていないと判定した場合は処理 を 3 4 3 6に進める。
[0079] 3 4 3 4にて、 システム制御部 5 0は、 3 0 撮影処理を行い 3 4 3 5に 進む。 この 3 0 撮影処理では、 システム制御部 5 0は、 3 0 撮影で得た [^八 画像データを 3 0 画質で現像処理し、
Figure imgf000024_0001
画質の画像を」 巳〇 符号化して」 巳◦画像データを生成し、 」 巳〇形式の」 巳〇ファイル として記録媒体に記録する。 記録設定として、
Figure imgf000024_0002
画像のみを」 巳〇フ ァイルとして記録する設定がされている場合は、 」 巳◦ファイルのみを記 録する。 記録設定として、 」 巳〇ファイルと [¾八 \/\/画像ファイルの記録が 設定されている場合は、 」 巳◦ファイルを記録すると共に、
Figure imgf000024_0003
得た [¾ \^画像データを符号化したデータと、 」 巳◦画像データとを図 8 八に示す 画像ファイル形式で 画像ファイルとして記録媒体に記 ァイルにおいて、 図 8八のデータ構造における 丨 01 3
Figure imgf000024_0004
、 図 8巳に示す形式となる。 すなわち、 表示用の各サ イズの画像は 8ビッ トの精度で、 」 巳◦符号化して得た符号化データを統 合して 1つのファイルに格納される。 そして、 3 4 3 5にて、 システム制御 部 5 0は、 クイックレビュー表示処理を行い、 3 4 3 6に進む。 このクイッ クレビュー表示処理の詳細は図 4巳_ 1及び 4巳_ 2を用いて後述する。
[0080] 3 4 3 6にて、 システム制御部 5 0は、 !_ Vボタン 7 6が押されたかを判 断し、 押されたと判定した場合は処理を 3 4 3 7に、 押されていないと判定 した場合は処理を 3 4 3 8に進める。 3 4 3 7にて、 システム制御部 5 0は 、 3 4 2 5で 3 0 画質の現像処理で得た 3 0 画像を 1~1 2 6 4圧縮し、 3 0 動画ファイルとして記録し、 処理を 3 4 3 8に進める。
[0081 ] 3 4 3 8にて、 システム制御部 5 0は、 再生ボタン 7 9が押されたかを判 定する。 システム制御部 5 0は、 再生ボタン 7 9が押されたと判定した場合 は処理を 3 4 3 9に、 押されていないと判定した場合は処理を 3 4 4 0に進 〇 2020/175231 23 卩(:171? 2020 /006201
める。 3439にて、 システム制御部 50は, 再生モード処理行い、 処理を 3440に進む。 この再生モード処理の詳細は図 9八~91~1、 図 1 0八, 1 0巳を用いて後述する。
[0082] 3440にて、 システム制御部 50は、 !_ Vモードの終了指示があったか 否かを判定し、 !_ Vモードの終了指示がないと判定した場合は処理を 340 1 に戻し、 終了指示があったと判定した場合は本処理を終了する。
[0083] 図 4巳一 1及び 4巳一 2は、 システム制御部 50のクイックレビュー表示 処理を示すフローチヤートである。 この処理は、 不揮発性メモリ 56に記録 されたプログラムをシステムメモリ 52に展開して、 システム制御部 50が 実行することで実現するものである。
[0084] 345 1 にて、 システム制御部 50は、 クイックレビュー表示有りに設定 されているかを判定し、 クイックレビュー表示有りに設定されていると判定 した場合は処理を 3452に、 クイックレビュー表示無しに設定されている と判定した場合は本処理を終了する。
[0085] 3452にて、 システム制御部 50は、 1~10 撮影モードでの撮影である かを判定し、 1~10 撮影モードでの撮影であると判定した場合は処理を 34 53に、 30 撮影モードでの撮影であると判定した場合は処理を 3460 に進める。
[0086] 3453にて、 システム制御部 50は、 クイックレビュー表示するデバイ ス (表示部 28または外部機器 300)
Figure imgf000025_0001
対応かどうかを判定し、 1~1 0 対応でないと判定した場合は処理を 3454に、 1~10 対応であると判 定した場合は処理を 3457へ進む。
[0087] 3454にて、 システム制御部 50は、
Figure imgf000025_0002
八 静止画撮影で撮影したかを 判定し、
Figure imgf000025_0003
八 静止画撮影での撮影であると判定した場合は処理を 3455 に、 1~1 丨 巳 静止画撮影の場合は処理を 3456へ進める。
[0088] 3455にて、 システム制御部 50は、
Figure imgf000025_0004
画像内の表示用 1~1
0 画像 828を、 3406~3408と同等の処理で
Figure imgf000025_0005
を行い、 出力対象デバイス (表示部 28または外部機器 300) に適したサ 〇 2020/175231 24 卩(:171? 2020 /006201
イズにリサイズ処理を行い、 画質で表示し、 処理を 3 4 6 3に進める
[0089] 3 4 5 6にて、 システム制御部 5 0は、 1~1巳 丨 画像内の表示用
Figure imgf000026_0001
像を 3 4 0 6 ~ 3 4 0 8と同等の処理で
Figure imgf000026_0002
変換を行い、 出力対 象デバイス (表示部 2 8または外部機器 3 0 0) に適したサイズにリサイズ 処理を行い、
Figure imgf000026_0003
画質で表示し、 処理を 3 4 6 3に進める。
[0090] 3 4 5 7にて、 システム制御部 5 0は 八 静止画撮影で撮影したかを判 定し、
Figure imgf000026_0004
静止画撮影で撮影したと判定した場合は処理を 3 4 5 8に、 1~1 丨 巳 静止画撮影での撮影であると判定した場合は処理を 3 4 5 9へ進める 。 3 4 5 8にて、 システム制御部 5 0は、
Figure imgf000026_0005
画像内の表示用 1~1 〇 [¾画像8 2 8を、 出力対象デバイス (表示部 2 8または外部機器 3 0 0) に適したサイズにリサイズ処理を行い、
Figure imgf000026_0006
画質で表示し、 処理を 3 4 6 3に進める。 3 4 5 9にて、 システム制御部 5 0は、 1~1巳 丨 画像内の表示 画像を、 出力対象デバイス (表示部 2 8または外部機器 3 0 0) に 適したサイズにリサイズ処理を行い 1~1 0 画質で表示し、 処理を 3 4 6 3に 進める。
[0091 ] 3 4 6 0では、 外部機器 3 0
Figure imgf000026_0007
静止画撮影で撮影したかを判定し
、 [¾八 静止画撮影での撮影であると判定した場合は処理を 3 4 6 1 に進み 、 1~1 丨 巳 静止画撮影での撮影であると判定した場合は処理を 3 4 6 2へ進 める。 3 4 6 1 にて、 システム制御部 5 0は、
Figure imgf000026_0008
画像内の表示 用 3 0 画像 8 2 3を、 出力対象デバイス (表示部 2 8または外部機器 3 0 0) に適したサイズにリサイズ処理を行い 3 0 画質で表示し、 処理を 3 4 6 3に進める。 3 4 6 2にて、 システム制御部 5 0は、 」 巳〇画像内の表 示用 3 0 画像を、 出力対象デバイス (表示部 2 8または外部機器 3 0 0) に適したサイズにリサイズ処理を行い、
Figure imgf000026_0009
画質で表示し、 処理を 3 4 6 3に進める。
[0092] 3 4 6 3にて、 システム制御部 5 0は、 シャツターボタン 6 1が押された かを判定し、 押されていないと判定した場合は処理を 3 4 6 4に、 押された 〇 2020/175231 25 卩(:171? 2020 /006201
と判定した場合は本処理を終了する。
[0093] 3 4 6 4にて、 システム制御部 5 0は、 クイックレビユー表示時間で設定 された時間が経過したかを判定し、 経過していないと判定した場合は処理を 3 4 6 3に戻し、 経過していると判定した場合は本処理を終了する。
[0094] 図 5 は、 デジタルカメラ 1 0 0と外部機器 3 0 0が接続された場合の、 デジタルカメラ 1 0 0と外部機器 3 0 0の制御手順を示すシーケンス図であ る。 ここでは、 デジタルカメラ
Figure imgf000027_0001
丨接続され るものとして説明する。
[0095] 3 5 0 1 にて、 システム制御部
Figure imgf000027_0002
を制御して
+ 5 V信号の送信開始を指示する。 この結果、 デジタル出力 丨
Figure imgf000027_0003
9 0は十 5 V信号の送信を開始する。 送信された + 5 V信号は接続ケーブル 3 0 2の + 5 信号線 (不図示) を通じて、 外部機器 3 0 0に伝送される。 外部機器 3 0 0は、 接続ケーブル 3 0 2の + 5 信号を受信し、 3 5 0 2へ進む。
[0096] 3 5 0 2にて、 外部機器 3 0 0は、 デジタルカメラ 1 0 0が外部機器 3 0
0の接続を確認したと判定し、 処理を 3 5 0 3へ進む。
[0097] 3 5 0 3では、 外部機器 3 0 0は、 接続ケーブル 3 0 2の 1~1 0信号線 ( 不図示) から 1~1 0信号の送信を開始する。 デジタルカメラ 1 0 0のデジタ ル出力 丨 / 9 0は、 送信された㈠ 〇信号を、 接続ケーブル 3 0 2を介し て受信する。 デジタル出力 丨
Figure imgf000027_0004
9 0は、 ㈠ 〇信号を受信すると、 システ ム制御部 5 0に 1~1 口受信を通知する。
[0098] 3 5 0 4にて、 システム制御部 5 0は、 1~1 0の通知によって外部機器 3
0 0からの接続応答を検知し、 処理を 3 5 0 5へ進める。
[0099] 3 5 0 5にて、 システム制御部 5 0は、 デジタル出力 丨 / 9 0を制御し て、 接続ケーブル 3 0 2から巳 0 I 口要求信号を送信する。 送信された巳 0 I 口要求信号は接続ケーブル 3 0 2の巳 0 I 0信号線 (不図示) を通じて、 外部機器 3 0 0に伝送される。 外部機器 3 0 0は、 この巳〇 丨 口要求信号を 受信し、 処理を 3 5 0 6へ進める。
[0100] 3 5 0 6にて、 外部機器 3 0 0は、 接続ケーブル 3 0 2の巳 0 丨 0信号線 〇 2020/175231 26 卩(:171? 2020 /006201
(不図示) から巳〇 丨 口を送信する。 デジタルカメラ 1 0 0のデジタル出力
0を、 接続ケーブル 3 0 2を介して受信する。 そ
Figure imgf000028_0001
9 0は、 巳 0 I 口を受信すると、 システム制御部 5 0に巳 0 丨 口受信を通知する。
[0101 ] 3 5 0 7にて、 システム制御部 5 0は、 巳 0 I 0受信の通知を受けること で、 デジタル出力 丨 / 9 0に対し、 3 5 0 6において受信した巳 0 丨 0の メモリ 3 2へのコピーを指示する。 コピー完了後、 システム制御部 5 0は、 メモリ 3 2に展開された巳 0 I 口を解析し、 外部機器 3 0 0が受付可能な映 像信号の能力の判断処理を行い、 処理を 3 5 0 8へ進める。
[0102] 3 5 0 8にて、 システム制御部 5 0は本体設定が 1~1 0 有効かつ 3 5 0 7 で判断した外部機器 3 0 0が受付可能な映像信号の能力が ! ! 0 信号対応で ある場合、 外部機器 3 0 0に 1~1 0 信号を出力すると判断し、 それ以外の場 合は 3 0 信号を出力すると判断し、 3 5 0 9へ進める。
[0103] 3 5 0 9にて、 システム制御部 5 0はデジタル出力 丨 / 9 0に対し、 3
5 0 8で判断した 1~1 0 または 3 0 映像信号の送信開始を指示する。 映像 信号送信開始指示を受信したデジタル出力 丨
Figure imgf000028_0002
9 0は接続ケーブル 3 0 2 を通して映像信号の送信を開始し、 3 5 1 0へ進める。
[0104] 3 5 1 0にて、 デジタルカメラ 1 0 0は接続ケーブル 3 0 2の丁1\/1 0 3信 号線 (不図示) へ映像信号を出力する。 外部機器 3 0 0は接続ケーブル 3 0 2の丁1\/1 0 3信号線 (不図示) を介して前記映像信号を受信し、 3 5 1 1へ 進む。
[0105] 3 5 1 1 にて、 外部機器 3 0 0は 3 5 0 8において受信した映像信号を解 析し、 映像信号を表示できる設定にディスプレイ 3 0 1の駆動を切り替え、 処理を 3 5 1 2に進める。 3 5 1 2にて、 外部機器 3 0 0は、 3 5 0 8にお いて受信した映像信号を外部機器 3 0 0のディスプレイ 3 0 1 に表示する。
[0106] 図 5巳は、 デジタルカメラ 1 0 0と外部機器 3 0 0の映像出力を 3 0 画 像から 1~1 0 画像に切り替える処理を示すシーケンス図である。
[0107] このシーケンスでは、 デジタルカメラ 1 0 0と外部機器 3 0 0との接続は 〇 2020/175231 27 卩(:171? 2020 /006201
図 5八で説明したシーケンスで完了しているものとする。
[0108] 3 5 2 1 にて、 システム制御部 5 0はデジタル出力 丨 / 9 0に対し 3 0
8映像信号の送信を指示し、 3 5 2 2へ進む。
[0109] 3 5 2 2にて、 デジタルカメラ 1 0 0は接続ケーブル 3 0 2の丁1\/1 0 3信 号線 (不図示) へ 3 0 映像信号を出力する。 外部機器 3 0 0は、 接続ケー ブル 3 0 2の丁 IV! 0 3信号線 (不図示) を介して 3 0 映像信号を受信し、 処理を 3 5 2 3へ進める。
[01 10] 3 5 2 3にて、 外部機器 3 0 0は、 3 5 2 2において受信した 3 0 映像 を外部機器 3 0 0のディスプレイ 3 0 1 に表示する。
[01 1 1 ] デジタルカメラ 1 0 0が 3 0 信号を出力している間は、 3 5 2 1から 3
5 2 3を繰り返すことで、 外部機器 3 0 0のディスプレイ 3 0 1 に 3 0 画 像が表示されることになる。
[01 12] デジタルカメラ 1 0 0が外部機器 3 0 0への映像出力を 3 0 画像から 1~1
0 画像に切り替える場合、 3 5 2 4以降の処理が実行される。
[01 13] 3 5 2 4にて、 システム制御部
Figure imgf000029_0001
8映像信号の停止を指示し、 処理を 3 5 2 5へ進める。
[01 14] 3 5 2 5にて、 システム制御部 5 0は、 接続ケーブル 3 0 2の丁 IV! 0 3信 号線 (不図示) へ映像信号を停止する。 外部機器 3 0 0は接続ケーブル 3 0 2の丁1\/1 0 3信号線 (不図示) を介して 3 0 映像信号の受信を停止し、 処 理を 3 5 2 6へ進める。
[01 15] 3 5 2 6にて、 外部機器 3 0 0は、 デジタルカメラ 1 0 0からの映像の受 信が停止したため、 外部機器 3 0 0のディスプレイ 3 0 1への映像の表示を 停止する。
[01 16] 3 5 2 7にて、 システム制御部 5 0は、 デジタル出力 丨 / 9 0に対し 1~1
〇 映像信号の送信を指示し、 処理を 3 5 2 8へ進める。
[01 17] 3 5 2 8にて、 システム制御部 5 0は、 接続ケーブル 3 0 2の丁 IV! 0 3信 号線 (不図示) へ !~1 0 映像信号を出力する。 外部機器 3 0 0は、 接続ケー ブル 3 0 2の丁 IV! 0 3信号線 (不図示) を介して ! ! 0 映像信号を受信し、 〇 2020/175231 28 卩(:171? 2020 /006201
処理を 3 5 2 9へ進める。
[01 18] 3 5 2 9にて、 外部機器 3 0 0は 3 5 2 8において受信した映像信号を解 析し、 1~1 0 映像信号を表示できる設定にディスプレイ 3 0 1の駆動を切り 替え 3 5 3 0に進める。
[01 19] 3 5 3 0にて、 外部機器 3 0 0は 3 5 2 8において受信した 1~1 0 映像信 号を外部機器 3 0 0のディスプレイ 3 0 1 に表示する。
[0120] この時、 3 5 2 9から 3 5 3 0の処理時間は、 外部機器 3 0 0の性能によ って異なり、 映像が表示されるまで 1秒から 5秒程度の時間がかかる。
[0121 ] 図 5〇は、 デジタルカメラ 1 0 0と外部機器 3 0 0の映像出力を 1~1 0 画 像から 3 0 画像に切り替える処理を示すシーケンス図である。
[0122] このシーケンスでは、 デジタルカメラ 1 0 0と外部機器 3 0 0との接続は 図 5八で説明したシーケンスで完了しているものとする。
[0123] 3 5 4 1 にて、 システム制御部 5 0は、 デジタル出力 丨 / 9 0に対し 1~1 口 映像信号の送信を指示し、 処理を 3 5 4 2へ進める。 3 5 4 2にて、 シ ステム制御部 5 0は、 接続ケーブル 3 0 2の丁 IV! 0 3信号線 (不図示) へ 1~1 映像信号を出力する。 また、 外部機器 3 0 0は接続ケーブル 3 0 2の丁 IV! 0 3信号線 (不図示) を介して 1~1 0 映像信号を受信し、 処理を 3 5 2 3 へ進める。
[0124] 3 5 4 3にて、 外部機器 3 0 0は、 3 5 4 2にて受信した 1~1 0 映像を外 部機器 3 0 0のディスプレイ 3 0 1 に表示する。
[0125] デジタルカメラ 1 0 0が 1~1 0 信号を出力している間は、 3 5 4 1から 3
5 4 3を繰り返すことで、 外部機器 3 0 0のディスプレイ 3 0 1 に 1~1 0 画 像が表示されることになる。
[0126] デジタルカメラ 1 0 0が外部機器 3 0 0への映像出力を 1~1 0 画像から 3
0 画像に切り替える場合には 3 5 4 4以降の処理が実行される。
[0127] 3 5 4 4にて、 システム制御部
Figure imgf000030_0001
8映像信号の停止を指示し、 処理を 3 5 4 5へ進める。 3 5 4 5にて、 シス テム制御部 5 0は、 接続ケーブル 3 0 2の丁!\/1 0 3信号線 (不図示) へ映像 \¥02020/175231 29 卩(:17 2020/006201
信号を停止する。 外部機器 3 0 0は接続ケーブル 3 0 2の丁1\/1 0 3信号線 ( 不図示) を介して㈠ 映像信号の受信を停止し、 処理を 3 5 4 6へ進める
[0128] 3 5 4 6にて、 外部機器 3 0 0は、 デジタルカメラ 1 0 0からの映像の受 信が停止したため、 外部機器 3 0 0のディスプレイ 3 0 1への映像の表示を 停止する。
[0129] 3 5 4 7にて、 システム制御部 5 0は、 デジタル出力 丨 / 9 0に対し 3
〇 映像信号の送信を指示し、 処理を 3 5 4 8へ進める。
[0130] 3 5 4 8にて、 システム制御部 5 0は、 接続ケーブル 3 0 2の丁 IV! 0 3信 号線 (不図示) へ 3 0 映像信号を出力する。 外部機器 3 0 0は、 接続ケー ブル 3 0 2の丁 IV! 0 3信号線 (不図示) を介して 3 0 映像信号を受信し、 処理を 3 5 4 9へ進める。
[0131 ] 3 5 4 9にて、 外部機器 3 0 0は 3 5 4 8にて受信した映像信号を解析し
. 3 0 映像信号を表示できる設定にディスプレイ 3 0 1の駆動を切り替え 、 処理を 3 5 3 0に進める。 3 5 5 0にて、 外部機器 3 0 0は 3 5 2 8にお いて受信した 3 0 映像信号を外部機器 3 0 0のディスプレイ 3 0 1 に表示 する。
[0132] なお、 3 5 4 9から 3 5 5 0の処理時間は、 外部機器 3 0 0の性能によっ て異なり、 映像が表示されるまで 1秒から 5秒程度の時間がかかる。
[0133] 図 6八一 1及び 6八一 2、 図 6巳一 1及び 6巳一 2は、 図 4八一 1乃至 4 八一4の 3 4 1 1 , 4 2 7の撮影メニュー処理の詳細を示すフローチヤート である。 この処理は、 不揮発性メモリ 5 6に記録されたプログラムをシステ ムメモリ 5 2に展開してシステム制御部 5 0が実行することで実現する。
[0134] 3 6 0 1 にて、 システム制御部 5 0は、 ユーザにより 1~1 0 撮影モードが 有効にされているかに基づき、 1~1 0 撮影するか否かを判定する。 システム 制御部 5 0は、 1~1 0 撮影しないと判定した場合は処理を 3 6 0 2に進み、 通常の 3 0 撮影時のメニューを表示する。 また、 システム制御部 5 0は、
! !口 撮影すると判定した場合は処理を 3 6 0 2に進め、 !! 0 撮影時のメ 〇 2020/175231 30 卩(:171? 2020 /006201
ニューを表示する。 この 3 6 0 3で、 1~1 0 撮影時に併用させない機能につ いてグレーアウトなりの無効状態にしてメニュー上に表示させる。
[0135] 3 6 0 4にて、 システム制御部 5 0は、 ユーザにより、 1~1 0 撮影を行う か否かの設定項目が選択されたか否かを判定する。 選択されたと判定した場 合、 システム制御部 5 0は処理を 3 6 0 5に、 そうでない場合は処理を 3 6 1 1 に進める。 3 6 0 5にて、 システム制御部 5 0は、 ユーザにより
Figure imgf000032_0001
撮影を行うか否かの設定が有効に切り替わったか否かを判定する。 有効に切 り替わったと判定された場合は、 システム制御部 5 0は処理を 3 6 0 6に進 み、 そうでない場合は処理を 3 6 0 7に進める。 3 6 0 6にて、 システム制 御部 5 0は、 1~1 0 撮影を行うか否かの設定を有効に変更し、 設定値をシス テムメモリ 5 2に記憶する。
[0136] 1~1 0 撮影を行うか否かの設定が有効の時の 3 6 0 7にて、 システム制御 部 5 0は、 ユーザにより 1~1 0 アシスト表示設定が変更に切り替わったか否 かを判定する。 変更に切り替わったと判定された場合は処理を 3 6 0 8に進 め、 そうでない場合は処理を 3 6 0 9に進める。 尚、
Figure imgf000032_0002
撮影を行うか否 かの設定が無効の時は 1~1 0 アシスト表示設定を変更できないことが望まし い。
[0137] 3 6 0 8にて、 システム制御部 5 0は、 撮影時の 1~1 0 アシスト表示設定 をするか否かに変更し、 設定値をシステムメモリ 5 2に記憶する。
Figure imgf000032_0003
ア シスト表示設定 「する」 のバリエーシヨンは 2つ以上あっても構わない。
[0138] なお、 このように、 メニュー画面において、 1~1 0 撮影設定や 1~1 0 アシ スト表示設定を変更した場合には、 ライブビュー画面へ遷移したタイミング で表示設定の変更結果を表示に反映させてもよい。 メニュー画面ではなくラ イブビュー画面において、 操作部 7 0の特定のボタンを使用する等して、 そ れらの設定を変更した場合には、 その変更したタイミング (そのボタンを押 下したタイミング) で変更結果を表示に反映させてもよい。
[0139] 3 6 0 9にて、 システム制御部 5 0は、 ユーザにより 1~1 0 設定メニュー 表示処理の終了指示がされたか否かを判定する。 終了指示がされたと判定し 〇 2020/175231 31 卩(:171? 2020 /006201
た場合、 システム制御部 5 0は処理を 3 6 1 0に進める。
[0140] 3 6 1 0にて、 システム制御部 5 0は、 ユーザにより、 静止画記録画質の 設定項目が選択されたか否かを判定する。 システム制御部 5 0は、 その選択 があったと判定した場合は処理を 3 6 1 1 に進み、 そうでない場合は処理を 3 6 5 1 に進める。
[0141 ] 3 6 1 1 にて、 システム制御部 5 0は、 ユーザにより 1~1 0 撮影の指示入 力があった否かの設定を判定する。 システム制御部 5 0は、
Figure imgf000033_0001
撮影の指 示入力があったと判定した場合は処理を 3 6 1 2に、 その指示入力が無いと 判定した場合は処理を 3 6 1 4に進める。
[0142] 3 6 1 2にて、 システム制御部 5 0は 1~1 0 撮影用の画面表示を行い、 3
6 1 3にて、 1~1 0 撮影用の記録画質のユーザ選択を受け付ける。 1~1 0 撮 影用の設定記録画質としては、 ファイルフォーマツ トとして、 [^八 、
Figure imgf000033_0002
8静止画ファイルおよび、 [¾八\/\/ + 1~1 0 静止画ファイルの 2画像同時出力 を用意する。 また画像サイズについても、 センサー読み出し時の画素数に近 い !_ 8 「 9㊀から、 少し小さい
Figure imgf000033_0003
丨 ㊀、 さらに小さい 3〇! ^ I 丨など がある。 さらに、 ファイルサイズ容量を下げるために圧縮するための圧縮率 も高画質 (低圧縮率) から標準 (高圧縮率) 、 低画質 (高圧縮率) などがあ る。
[0143] 3 6 1 4にて、 システム制御部 5 0は、 3 0 撮影用の画面表示を行い、
3 6 1 5にて 3 0 撮影用の記録画質のユーザ選択を受け付ける。 3 0 撮 影用の設定記録画質としても、 !! 0 撮影用と同様の選択肢を用意する。
[0144] 3 6 5 1 にて、 システム制御部 5 0は、 ユーザにより、 動画記録画質の設 定項目が選択されたか否かを判定する。 システム制御部 5 0は、 動画記録画 質の設定項目が選択されたと判定した場合は処理を 3 6 5 2に進み、 そうで ない場合は処理を 3 6 5 7に進める。
[0145] 3 6 5 2にて、 システム制御部 5 0は、 ユーザによる 1~1 0 撮影を行うか 否かの設定を判定する。 設定が行うことを示している場合、 システム制御部 5 0は処理を 3 6 5 3に、 そうでない場合は処理を 3 6 5 5に進める。 〇 2020/175231 32 卩(:171? 2020 /006201
[0146] 3 6 5 3にて、 システム制御部 5 0は 1~1 0 撮影用の画面表示を行い、 3
6 5 4にて 1~1 0 撮影用の記録画質のユーザ選択を受け付ける。 1~1 0 撮影 用の設定記録画質としては、 ファイルフォーマッ トとして、
Figure imgf000034_0001
動画、
Figure imgf000034_0002
八 動画十プロキシ動画、 1~1 0 動画ファイルおよび、
Figure imgf000034_0003
十プロキシ動 画 + 1~1 0 動画ファイルの 3動画同時出力を用意する。 また画像サイズにつ いても、 8<、 4<、 リ 1
Figure imgf000034_0004
1~1 0、 〇八などがある。 さらに、 フ ァイルサイズを下げるための圧縮率も、 八!_ !_ _ 丨などの高画質 (低圧縮率 ) から 丨 巳などの標準〜低画質 (高圧縮率) などがある。 その他、 フレー ムレートの選択、 1\1丁3〇/ ?八1_などの放送方式の選択もある。
[0147] 3 6 5 5にて、 システム制御部 5 0は、 3 6 5 3と同様に 3 0 撮影用の 画面表示を行い、 3 6 5 6にて 3 0 撮影用の記録画質のユーザ選択を受け 付ける。 3 0 撮影用の設定記録画質としても、 !!〇 [¾撮影用と同様の選択 肢を用意する。
[0148] 3 6 5 7にて、 システム制御部 5 0は、 ユーザにより、
Figure imgf000034_0005
出力の設定 項目が選択されたか否かを判定する。 システム制御部 5 0は、 ユーザにより 、 1~1口 出力の設定項目が選択されたと判定した場合は処理を 3 6 5 8に、 そうでない場合は処理を 3 6 6 0に進める。 3 6 5 8にて、 システム制御部
5 0は、 ユーザにより 1~1口 出力設定が有効に切り替わったか否かを判定し 、 有効に切り替わったと判定した場合は処理を 3 6 5 9に、 そうでない場合 は処理を 3 6 6 0に進める。 3 6 5 9にて、 システム制御部 5 0は、
Figure imgf000034_0006
出力設定を有効に変更し、 設定値をシステムメモリ 5 2に記憶する。
[0149] 3 6 6 0にて、 システム制御部 5 0は、 ユーザにより、 再生時のビューア シストの設定項目が選択されたか否かを判定する。 システム制御部 5 0は、 再生時のビューアシストの設定項目が選択されたと判定した場合は処理を 3
6 6 1 に、 そうでない場合は処理を 3 6 6 3に進める。 3 6 6 1 にて、 シス テム制御部 5 0は、 ユーザにより再生時のビューアシストの設定が有効に切 り替わったか否かを判定し、 有効に切り替わったと判定した場合は処理を 3 6 6 2に、 そうでない場合は処理を 3 6 6 3に進める。 3 6 6 2にて、 シス 〇 2020/175231 33 卩(:171? 2020 /006201
テム制御部 5 0は、 再生時のビューアシスト設定を有効に変更し、 設定値を システムメモリ 5 2に記憶する。
[0150] 3 6 6 3にて、 システム制御部 5 0は、 ユーザにより、 転送時の
Figure imgf000035_0001
換の設定項目が選択されたか否かを判定し、 選択されたと判定した場合は処 理を 3 6 6 4に、 そうでない場合は処理を 3 6 6 5に進める。 3 6 6 4にて 、 システム制御部 5 0は、 ユーザにより転送時の 3 0 変換の設定が有効に 切り替わったか否かを判定し、 有効に切り替わったと判定された場合は 3 6 6 4にて、 転送時の 3 0 変換設定を有効に変更し、 処理を 3 6 6 5に進め る。
[0151 ] 3 6 6 5にて、 システム制御部 5 0は、 ユーザにより、 その他
Figure imgf000035_0002
撮影 に関連する設定項目が選択されたか否かを判定し、 選択されたと判定した場 合は処理を 3 6 6 6に、 そうでない場合は処理を 3 6 6 7に進める。 3 6 6 6にて、 システム制御部 5 0は、 その他の処理を有効に変更し、 処理を 3 6 6 7に進める。
[0152] 3 6 6 7にて、 システム制御部 5 0は、 ユーザにより、 メニューを抜ける 指示があったか否かを判定し、 抜けないと判定した場合に処理を 3 6 6 0に 戻し、 抜けると判定した場合は本処理を終了する。
[0153] 図 7八及び 7巳は、 システム制御部 5 0の 1~1 0 撮影処理の詳細を示すフ 口ーチヤートである。 メモリ 3 2に書き込まれた
Figure imgf000035_0003
データを画像処理部 2 4で 1~1 0 現像するフローである。
[0154] デジタルカメラやデジタルビデオカメラ等の撮像装置は、 撮影時の光源に 応じて撮影画像の色調を補正するホワイ トバランス機能を備えている。 ホワ イ トバランス機能は、 光源 (晴天や曇天等の自然光源、 蛍光灯や白熱灯等の 人工光源) によって変わる色調の違いを補正し、 光源に関わらず白さが同じ に見えるようにする機能である。 3 7 0 1
Figure imgf000035_0004
7 0 3において、 ホワイ トバ ランス処理に必要なホワイ トバランス係数が算出されることになる。 また、 本実施形態では、 空などの高輝度領域の階調をなるべく白飛びさせないよう 、 人物などの明るさが適正となる露出よりも低い露出で撮影するものとする [0155] まず S 701 にて、 システム制御部 50は、 メモリ制御部 1 5を介して、
R A W画像データを取得する。
[0156] S 702にて、 システム制御部 50は、 ホワイ トバランス係数を算出する ために取得した RAW画像データに対して白らしい画素を判定する、 白サー チ枠内判定処理を行う。
[0157] S 703にて、 システム制御部 50は、 白サーチ枠内判定結果に基づいて ホワイ トバランス用係数を算出する。
[0158] S 702 , 703の処理の詳細について図 1 2のフローチャートを用いて 説明する。
[0159] RAW画像データは、 先に説明したように、 1つの画素は R, G, Bのい ずれか 1つの成分の信号しか有さない。 白サーチを行うため、 システム制御 部 50は、 色信号に変換する必要があるためデべイヤ処理 S 1 201 を行い 、 1画素につき R, G, Bの全チャンネルの信号を生成する。 デベイヤの方 法は幾つかあるが、 例えば口ーパスフィルターによる線形補間で信号生成で きる。 RAW画像データは一般的にノイズによる影響があるため光学的黒 ( O p t i c a l B l a c k) は、 0ではなく値を持っている。 よってシス テム制御部 50は、 デべイヤ後の信号から OB分を減算する処理 (S 1 20 2) を行う。 そして、 システム制御部 50は、 取得した RG B信号から色信 号 Cx、 Cyを次式により算出する (S 1 203) 。
[0160] [数 1]
Figure imgf000036_0001
R+G +G 2+B
Yi =
4 〇 2020/175231 35 卩(:171? 2020 /006201
ここで、
Figure imgf000037_0001
2は、 ベイヤ配列の 2 X 2画素における 2つの◦成分値である 。 また、 は色温度を表し、 は緑方向補正量を表している。 また、 丫;は輝 度値である。
[0161 ] 図 1 3に、
Figure imgf000037_0002
平面を図示する。 同図に示すように、 撮像装置において 予め白色を高色温度下 (例えば日中など) から低色温度下 (例えば日暮れ時 など) まで撮影し、 色評価値〇父、 〇 Vを座標上にプロッ トすることで、 白 色を検出するための基準となる白軸 1 2 0 0を定めることができる。 実際の 光源において白色には若干のばらつきが存在するため、 システム制御部 5 0 は、 白軸 1 2 0 0の両側に或る程度の幅を持たせる (3 1 2 0 4) 。 この白 軸に幅を持たせた枠を白サーチ枠 1 2 0 1 と呼ぶ。
[0162] 3 1 2 0 5にて、 システム制御部 5 0は、 デべイヤ後の各画素について
Figure imgf000037_0003
座標系にプロッ トし、 白サーチ枠内に入っているかどうかを判定する。
3 1 2 0 6にて、 システム制御部 5 0は、 白サーチ枠内に入った画素の中で 、 積分対象とする画素を輝度方向で制限する明暗除外処理を行う。 これは暗 すぎる色はノイズの影響を受けやすくなるのでホワイ トバランス係数の算出 精度が低下してしまうことを防ぐために行う。 同様に明るすぎる色は各チヤ ンネルのいずれかがセンサー飽和することで
Figure imgf000037_0004
もしくは巳/〇比のバラ ンスが崩れ正しい色から離れていってしまいホワイ トバランス係数の算出精 度が低下してしまうことを防ぐために行う。 このとき、
Figure imgf000037_0005
明暗除外処理の対象とする画素の輝度を異ならせる。 つまり、
Figure imgf000037_0006
と ! ! 0 とで後述するホワイ トバランス係数の算出に用いる画素を異ならせる。 こ れは 3口 に比べて 1~1 0 の方が高輝度域の再現性が高いことによる。 本実 施形態では、 3 0 では明度側が例えば + 1 巳 Vまでの明るさまで対象とす るのに対して、 1~1 0 では + 2巳 Vまでの明るさまで対象とすることでより 1~1口 に最適化されたホワイ トバランス係数を算出することが可能となる。
[0163] 3 1 2 0 7にて、 システム制御部 5 0は、 白サーチ枠内でかつ明暗除外処 理のなされた〇 からそれぞれの色評価値の積分値 3リ
Figure imgf000037_0007
1 3リ〇1〇、 3リ〇1巳を算出する。 そして、 3 1 2 0 8にて、 システム制御部 5 0は、 算 〇 2020/175231 36 卩(:171? 2020 /006201
出した積分値から、 次式によりホワイ トバランス係数 \ZVBC〇 \ZVB C OG、 \ZVB C OBを算出する。
[0164] [数 2]
SumY X 1024
WBCoR
SumR
Figure imgf000038_0001
上式における右辺の “ 1 024” は、 1色成分が 1 〇ビッ ト精度となってい るためである。
[0165] 尚、 ホワイ トバランス係数はユーザによって設定されている撮影モード (
3口 撮影もしくは 1~10 撮影) 用の値を算出してもよいし、
Figure imgf000038_0002
用、 1~1 〇 用の両方を算出してもよい。
[0166] 図 7八の説明に戻る。 3704〜 3706において、 システム制御部 50 は、 階調補正処理に必要な階調補正テーブルを算出する。 階調補正の詳細を 図 1 4八及び 1 4巳のフローチヤートを用いて説明する。
[0167] 31 22 1 にて、 システム制御部 50は、 図 7八の3701 ~3703の 処理で生成した 巳係数を用いて 巳処理を行う。 31 222にて、 システ ム制御部 50は、 ヒストグラム検出を行う。 具体的には、 31 22 1で得ら れたホワイ トバランスのゲイン値を画像データ全体に適用し、 さらにガンマ 補正処理を行った画素値について、 輝度情報としてヒストグラムを作成する 。 ガンマ補正処理は公知のルックアップテーブルを用いる方法で良いが、 現 像で用いるものと同じガンマ特性を用いることが好ましい。 ただし、 処理時 間やメモリ量の節約のために、 折れ線で近似したガンマ特性など、 簡略化し たガンマ特性を用いてもよい。 なお、 画像の端の部分は、 一般に重要でない 〇 2020/175231 37 卩(:171? 2020 /006201
ことが多く、 また撮像レンズによっては周辺光量の低下の影響を受ける部分 であるため、 周縁部の画素を除いてヒストグラムを作成してもよい。
[0168] 3 1 2 2 3にて、 システム制御部 5 0は、 顔検出前処理を行う。 これは画 像データに対して縮小処理、 ガンマ処理等を施して、 顔を容易に検出しやす いようにする処理である。 3 1 2 2 4にて、 システム制御部 5 0は、 前処理 した画像データに対し、 公知の方法を用いて顔検出処理を実行する。 この顔 検出処理により、 顔と思われる領域 (顔領域) の位置とサイズ、 検出の信頼 度とが得られる。
[0169] 3 1 2 2 5にて、 システム制御部 5 0は、 露出補正量 (低下量) を補うた めの階調補正量 (階調補正量 (八) ) を第 1の階調補正量として算出する。 この際、 画像の暗部については適正露出になるようにする一方、 予め定めた 輝度レベル以上の高輝度画素については補正されない (少なくとも、 露出補 正量を完全には補わない) 、 入出力特性の階調補正量を算出する。 これによ り、 階調補正後の明部が白トビすることをさらに抑制することができる。 こ の階調補正量は、 露出補正量に応じた複数の補正テーブルとして予め用意し ておくことができる。
[0170] 3 1 2 2 6にて、 システム制御部 5 0は、 3 1 2 2 4の顔検出処理により 検出された顔領域のうち、 信頼度があらかじめ設定した評価閾値より高い顔 領域がある場合に、 顔が検出されたと判定する。 システム制御部 5 0は、 顔 が検出されたと判定した場合は処理を 3 1 2 2 7に、 顔が検出されなかった と判定した場合は処理を 3 1 2 3 1 に進める。
[0171 ] 3 1 2 2 7にて、 システム制御部 5 0は、 検出された顏領域の一部の領域 を、 顔輝度取得領域として算出する。 顔輝度取得領域は、 顔の明るい部分の 輝度を取得するための領域であり、 その数や位置などに関して特に制限はな い。 3 1 2 2 8にて、 システム制御部 5 0は、 顔輝度取得領域の各々につい て、 含まれる 画素、 ◦画素、 巳画素の種類ごとに平均値を求める。 さらに システム制御部 5 0は、 巳画素の各平均値に対し、 ヒストグラム検出と 同様にしてホワイ トバランスのゲイン値を適用し、 ガンマ補正を行った後、 〇 2020/175231 38 卩(:171? 2020 /006201
以下の式により輝度値丫に変換する。
丫 = 0· 299 X8 + 0. 587 X0 + 0. 1 1 4X6
[0172] なお、 ヒストグラム検出および顏検出において適用するホワイ トバランス のゲイン値は、 同一画像データに対して 巳処理で使用したゲイン値を用い ることが好ましい。 輝度ガンマも、 理想的には現像と同じものを用いるのが 好ましいが、 処理時間やメモリ量の節約のために、 折れ線で近似したガンマ 特性など、 簡略化したガンマ特性を用いてもよい。
[0173] 31 229にて、 システム制御部 50は、 31 228で顏輝度取得領域の 各々について求めた輝度値を、 適正露出時を想定した値に変換する。 これは 、 画像データが、 適正露出よりも低い露出で撮像されていることから、 適正 露出で撮像した場合よりも顔の輝度が低く検出されることを補正する処理で ある。 輝度値の変換は、 露出制御が決定した露出補正量 (低下量) を補償す るように行ってもよいし、 31 225で算出した階調補正量を用いて行って もよい。
[0174] 31 230にて、 システム制御部 50は、 検出された顔の輝度の代表値を 算出する。 代表値としては例えば検出されている顔領域の顔輝度取得領域の 各々の輝度値の中から最大値を求めるなどが考えられる。
[0175] 31 23 1の処理は、 31 226にてシステム制御部 5〇が顏領域が検出 されなかったと判定した場合の処理である。 31 23 1 にて、 システム制御 部 50は、 ヒストグラム特徴量を検出する。 ヒストグラム特徴量は例えば、 ヒストグラムで暗部側から累積度数が 1 %である画素が属するレベル (30 ) 、 明部側から累積度数が
Figure imgf000040_0001
等であっ てよい。 続く 31 232にて、 システム制御部 50は、 31 23 1で算出し たヒストグラム特徴量を、 適正露出での撮像を想定した値に変換する。 これ は、 画像データが、 適正露出よりも低い露出で撮像されていることから、 適 正露出で撮像した場合よりもヒストグラム特徴量が低く検出されることを補 正する処理である。 輝度値の変換は、 露出制御が決定した露出補正量 (低下 量) を補償するように行ってもよいし、 31 225で算出した階調補正量を 〇 2020/175231 39 卩(:171? 2020 /006201
用いて行ってもよい。
[0176] 3 1 2 3 3にて、 システム制御部 5 0は、 目標の補正量の算出を行う。 シ ステム制御部 5 0は、 顔の代表輝度値、 もしくはヒストグラム特徴量に対す る目標輝度レベルを求める。 そして、 システム制御部 5 0は、 これらの目標 輝度レベルと、 画像データ中の輝度の最小値と最大値とから、 スプライン補 間などにより、 入力輝度レベルに対する出力輝度レベルを定めたルツクアツ プテーブル (入出力特性) を、 階調補正量 (巳) として作成する。 階調補正 量 (巳) は、 第 2の階調補正量である。
[0177] ここで 1~1 0 では 3 0 と目標の階調補正量を変えても良い。 例えば、 図
1 6八は 3 0 での見え、 図 1 6巳は 1~1 0 での見えの例を示している。 被 写体 (人物) の輝度値はいずれも同じ値であるが、 背景について 3 0 では 高くても 1 0 0〇〇1 /〇12で突き当たるのに対して、 1~1 0 では 1 0 0〇〇! / 2を超えた値となる。 その結果、 被写体の輝度値は同じであっても、
Figure imgf000041_0001
の方が暗く感じる場合がある。 これは明度対比と言って、 人間の視覚特性に 起因する現象である。 例えば図 1 6八と図 1 6巳では被写体の輝度は同じで あるが、 被写体の輝度と背景の輝度の差は、 図 1 6 よりも図 1 6巳の方が 大きい。 このような場合、 ユーザにとっては、 図 1 6八よりも図 1 6巳の方 が被写体を暗く感じてしまう。 つまり、 1~1 0 は空などの高輝度域をより明 るく表現することが可能であるため、 3 0 に比べて被写体が暗く見えてし まう可能性が高い。 そこで本実施形態では、 3 0 の場合は図 1 5 に示す ような階調特性を用いるのに対し、
Figure imgf000041_0002
の場合は、 図 1 5巳で示すような 階調特性を用いて、 より暗部を持ち上げる階調補正量を適用することで、 見 た目として好ましい結果にすることができる。 なお、 本実施形態の階調補正 は露出の不足を補うための補正を例としたが、 画作りのための明るさ補正に おいても同様の階調補正を行うことができる。
[0178] 顔の代表輝度値や画像データのヒストグラム特徴量に対する目標輝度レべ ルは、 経験的に好ましいと考えられる固定値に設定することが可能であるが 、 代表輝度値やヒストグラム特徴量の値に応じて異なる目標輝度レベルを設 〇 2020/175231 40 卩(:171? 2020 /006201
定してもよい。 この場合、 目標輝度レベルを設定するパラメータ (代表輝度 値やヒストグラム特徴量) 毎に、 入カレベルに対する目標輝度レベルの関係 を定めたルックアップテーブルを用意しておけばよい。
[0179] このようにして定めた目標輝度レベルへの変換を実現するための補正特性 を、 スプライン補間などの方法によって求め、 必要であれば階調補正量 (巳 ) を適用するルックアップテーブル (又は関係式) として保存する。
[0180] 3 1 2 3 4にて、 システム制御部 5 0は、 3 1 2 2 5で算出した階調補正 量 (八) と、 3 1 2 3 3で算出した階調補正量 (巳) を合成する。 システム 制御部 5 0は、 例えば各入力輝度レベルに対して、 まず階調補正量 ( ) を 適用した後に、 補正後の輝度レベルに対して階調補正量 (巳) を適用した結 果の輝度値を求め、 各入力輝度レベルに対する出力輝度レベルのルックアッ プテーブルを作成する。
[0181 ] 3 1 2 3 5にて、 システム制御部 5 0は、 3 1 2 3 4で求めた合成補正量
(合成階調補正量) の上限値を制限する処理 (リミッター処理) を行う。 階 調補正量 (八) と階調補正量 (巳) を合成することで、 補正量が大きくなり 、 補正後の画像においてノイズ量が目立ちやすくなるため、 全体の補正量に 制限を設ける。 リミッター処理は、 各輝度値において許容する最大の補正量 をテーブルとして用意しておき、 3 1 2 3 4で作成したルックアップテーブ ルの値のうち、 最大補正量を超える出カレベルを最大補正量に対応する出力 レベルに置換することで実現できる。 尚、 階調補正量はユーザによって設定 されている撮影モード ( 3口 撮影もしくは 1~1口 撮影) 用の値を算出して もよいし、
Figure imgf000042_0001
1~1 0 用の両方を算出してもよい。
[0182] 図 7八及び 7巳の説明に戻る。 3 7 0 7にて、 システム制御部 5 0は、 算 出したホワイ トバランス係数、 階調補正用パラメータおよび種々の 1~1 0 用 のパラメータを用いて現像する。 その他の現像パラメータとして、 色マトリ クス、 カメラ〇巳丁 カーブデータ、 色調整パラメータ、 ノイズリダクショ ンパラメータ、 シャープネスパラメータなどを用いて 1~1 0 現像画像を生成 する。 カメラ〇巳丁 (ガンマカーブ) としては、 例えば丨 丁 II— の勧告 B T . 2 1 00の PQ (P e r c e p t u a l Q u a n t i z a t i o n ) の E〇T F (E l e c t r o— O p t i c a l T r a n s f e r F u n e t i o n) の逆特性を想定しているが、 カメラ側の味付けを〇〇T F ( O p t 〇— O p t I c a I T r a n s f e r F u n c t i o n) として 組み合わせても良い。 もしくは同じく 丨 TU— Rの勧告 BT. 2 1 00の H LG (H y b r i d L o g— G amm a) の〇 ET Fを使用しても構わな い。
[0183] S 708にて、 システム制御部 50は、 S 707で現像した画像からリサ イズして 2画面比較画像用などの簡易表示用として MP F (Mu l t i P i c t u r e F o r m a t ) 用画像を生成し、 H E V C形式で圧縮符号化 する。
[0184] S 709にて、 システム制御部 50は、 S 708で生成した M P F画像を さらにリサイズして、 インデックス表示などに用いる、 MP F画像よりも画 素数の小さなサムネイル画像を生成し、 圧縮する。
[0185] S 7 1 0にて、 システム制御部 50は、 本画像として S 707で現像した
H D R画像を圧縮する。 圧縮する方法はいろいろ考えられるが例えば、 1 0 b i tの YU V422のデータであれば H. 265 ( I S 0/ I E C 23 008-2 H E VC) で圧縮すればよい。
[0186] S 7 1 1 にて、 システム制御部 50は、 ユーザによる記録画質設定を判定 する。 システム制御部 50は、 RAW画像のみが記録される設定であると判 定した場合は処理を S 7 1 2に、 H D R画像のみが記録される設定であると 判定した場合は処理を S 7 1 3に、 R AW画像及び H D R画像が記録される 設定であると判定した場合は処理を S 7 1 4に進める。
[0187] S 7 1 2にて、 システム制御部 50は、 R A W画像を圧縮してヘッダを付 加して図 8 Aのような構造の RAW画像ファイルとして、 記録媒体丨 /F 1 8を介して記録媒体 200に記録される。 圧縮方式としては幾つか考えられ るが劣化のない可逆であるロスレス圧縮や、 非可逆ではあるがファイルサイ ズが軽くなるロッシー圧縮などを用いてもよい。 またヘッダには、 検出メタ データとして S 1 205で求めたホワイ トバランスの白サーチ枠内判定結果 と S 704で求めたヒストグラムおよび S 705で求めた顏検出結果を記録 する。 ここで検出される白サーチ枠内判定結果は、 S 1 206における明暗 除外処理を行う前の判定結果である。 したがって、 H D R撮影でも S D R撮 影でも同じ判定結果が記録されることになる。 また、 ユーザにより H D R撮 影モードとなっていた場合は、 図 1 2で求めたホワイ トバランス係数や図 1 4八及び1 4 Bで求めた階調補正量といった H D R用の現像パラメータ、 S 708で H D R現像した画像データから H E V C形式で符号化して生成した 表示用の MP F用画像もメタデータとして図 8 Cのように併せて記録する。 上述したようにこれらのデータは H D R撮影か S D R撮影かで内容が異なる 。 なお、 S D R撮影であれば、 上述した S D R用の白サーチ枠内判定や階調 特性を用いた場合の現像パラメータが記録される。 なお、 H D R撮影時であ っても、 S D R用に S 702〜 S 706の処理を行い、 S D R用の現像パラ メータも生成して両方を記録しても構わない。 なお、 H D R、 S D R両方の 現像/《ラメータを生成するのは処理負荷が大きいため、 連写時などには行わ ず、 単写時など比較的処理負荷に余裕がある場合に行うようにしてもよい。
[0188] また単写など処理負荷に余裕がある時は H D R用の表示用画像とは別に、
S D R用の現像パラメータを用いて S D R画質の本画像、 MP F用画像、 サ ムネイル用画像を作成し、 H D R用の表示用画像と S D R用の表示用画像を 同じファイルに記録しても構わない (図 8 D) 。
[0189] また、 サムネイルを表示する際は、 画像が小さいのでどのような画像かが 分かれば十分であるため、 S 709で作成するサムネイル用画像のみ S D R 現像画像で作成し保存しても構わない (図 8 E) 。 このような構成にするこ とで、 H D Rの圧縮方式である H . 265のデコードに対応していない表示 装置や P Cでもサムネイル画像のみ表示することも可能になる。
[0190] S 7 1 3にて、 システム制御部 50は、 現像した H D R画像を H E VC形 式で圧縮符号化して静的メタデータもしくは動的メタデータを付加し、 H E I F (H i g h ヒ f f i c i e n c v I m a g e F i I e F o r m a t ) 形式の H E I Fファイルとして、 記録媒体丨 / F 1 8を介して記録媒 体 200に記録する。 静的メタデータとしては、 CEA-86 1. 3に準拠 したディスプレイの 3原色および白色点の X , y座標、 マスタリングディス プレイの最大輝度値、 最小輝度値、 コンテンツ最大輝度値 (Ma x i m u m Co n t e n t L i g h t L e v e l ) 、 フレーム平均輝度レベル ( Ma x i m u m F r ame— a v e r a g e L i g h t L e v e l ) などである。 また、 動的メタデータとしては、 SMPT E S T 2094 で定義されているカラーボリューム変換の動的卜ーンマッビングのメタデー 夕などである。 尚、 H D R特性を PQ信号で表すには 1 0 b i t以上の深度 であることが好ましいが従来の J P E Gフォーマッ トだと 8 b i tであるた め新たに静止画 H D R用のコンテナを採用する必要がある。 ここでは、 MP EG (Mo v i n g P i c t u r e E x p e r t s G r o u p) によ って開発され、 MP EG-H P a r t 1 2 ( I S 0/ I E C 2300 8- 1 2) で定義された画像ファイルフォーマッ トである H E 丨 Fのコンテ ナを使用する。 H E I Fは本画像だけでなく、 サムネイルや複数の時間的に 関連ある画像や EX 丨 Fや XM Pといったメタデータも 1つのファイルの中 に格納することができるという特徴がある。 よって、 H EVCでエンコード された 1 O b i tのイメージシーケンスも格納できるため使い回しが良い。
[0191] S 7 1 4及び S 7 1 5では、 S 7 1 2及び S 7 1 3の処理を順次行い、 R AW画像と H D R画像の両方を記録する。
[0192] 続いて前述した記録処理において記録媒体 200に記録する静止画 RAW 画像デ _夕の R A W画像ファイルの構造を図 8 Aに示す。 以下で例示する R A W画像ファイルのコンテナファイルフォーマツ トは丨 S 0/ I EC 1 44 96- 1 2で規定されている 丨 S〇ベースメディアファイルフォーマッ トで ある。 そのため、 本ファイルのコンテナフォーマッ トは木構造を持ちボック スと呼ばれる各ノードを持っている。 また、 各ボックスは複数のボックスを 子要素として持つことができる。
[0193] 画像データファイル 801は、 先頭にファイルタイプの記述のため 〇 2020/175231 44 卩(:171? 2020 /006201
のボックス干 ソ 802を有し、 さらに、 全てのメタデータを含むボック ス〇! 00 V 803、 トラックのメディアデータ本体 (画像データ) のボック ス〇1 ¢13 808、 その他のボックス 807を有する。 前述のボックス 〇 〇 V 803は子要素として、
Figure imgf000046_0001
805を格納するボックスリ リ I 〇1804と 1 〇1396〇 3 3を参照する情報を格納する 「 81<ボッ クス 806を有する。
Figure imgf000046_0002
には、 画像のメタデータが記 載されており、 例えば画像の作成日時、 撮影時条件、 1~1〇[¾または3〇[¾で 撮影したかどうかの情報、 前述した検出メタデータ、 その他の撮影情報から 構成される。 前述のボックス
Figure imgf000046_0003
3 I 808は子要素として、 撮影した静止 画像データである
Figure imgf000046_0004
を持つ。
[0194] なお、 30 で撮影した 八 画像と、 1~10 で撮影した 八 画像では 、 丨 01396〇 3 3809に記録される画像データが異なる。
[0195] 図 8巳は 3口 で撮影
Figure imgf000046_0005
09である。 この場合の丨 〇1396〇 3 3809は、 30 画質現像し」
IV! 画像 822、 本画像 823と 八
Figure imgf000046_0006
、 ラメータ 825を持つ。 各 30 画質の画 像は、 その 1色成分が 8ビッ ト (256階調) の画像である。 なお、 図 8巳 の[^八 現像パラメータ 825は、 少なくとも 30 現像用の現像パラメー 夕を含む。
[0196] 図 8<3は1~10 で撮影時に 1~10 画像のみ表示用画像として持つ 八 画 像に記録される
Figure imgf000046_0007
809である。 この場合の I 〇! ㊀口 3 3809は、 1~10 画質現像
Figure imgf000046_0008
IV! 画像 827、 本画像 828と 画像 824及び、
Figure imgf000046_0009
現像パラメ —夕 825を持つ。 各 1~10 画質の画像は、 1色成分が 1 0ビッ ト (1 02 4階調) の画像である。 図 8〇、 80, 8巳の[^八 現像パラメータ 825 は、 少なくとも 1~10 現像用の現像/《ラメータを含む。
[0197] 図 80は 1~10 で撮影時に 1~10 画像と 30 画像の両方を表示用画像と して持つ
Figure imgf000046_0010
809である。 この場 〇 2020/175231 45 卩(:171? 2020 /006201
合の 1 〇1 3 9 6〇 3 1 8 0 9は、 3 0 画質現像し」 巳◦圧縮した丁 1~1 IV!画像 8 2 1、 M P F画像 8 2 2、 本画像 8 2 3と 1~1 0 画質現像し 1~1巳 V 〇圧縮した丁 1~1 IV!画像 8 2 6、 IV! 画像 8 2 7、 本画像
Figure imgf000047_0001
像 8 2 4及び、
Figure imgf000047_0002
現像パラメータ 8 2 5を持つ。
[0198] 図 8巳は 1~1 0 で撮影時に丁
Figure imgf000047_0003
画像のみ 3 0 画像で、 1\/1 と本画像 は 1~1口 画像の表示用画像として持つ \/\/画像に記録される 丨 01 8 9㊀口
3 0 画質
Figure imgf000047_0004
~1巳 〇圧縮 した IV! 画像 8 2 7、 本画像
Figure imgf000047_0005
及び、
Figure imgf000047_0006
パラメータ 8 2 5を持つ。
[0199] 本例で示したファイルフォーマッ トは実施形態の 1つであり、 必要に応じ て他のボックスを有しても良い。 また、 表示用画像を 〇〇 V 8 0 3内のボ ックスや、 その他のボックス 8 0 7に持つ構成としてもよい。
[0200] 上記のようなファイルフォーマッ トを有することにより、
Figure imgf000047_0007
として撮 影された 画像ファイルには 3 0 画像用の現像/《ラメータが記録され 、 1~1 0 として撮影された
Figure imgf000047_0008
画像ファイルには 1~1 0 画像用の現像パラ メータが記録されることになる。 このようにすることで、 後から
Figure imgf000047_0009
を現像する場合も、 撮影時の設定を反映した現像パラメータで現像を行うこ とが可能となる。 例えば
Figure imgf000047_0010
現像を行う装置 (デジタルカメラ 1 0 0でも よいし、 〇などの他の装置でもよい) は、
Figure imgf000047_0011
8 0 5を参照し、 1~1 0 として撮影したか、 3 0 として撮影したかを判定 する。 そして 1~1 0 として撮影したと判定した場合は、 [^八 画像をそのフ ァイルに含まれる 1~1 0 画像用の現像パラメータを用いて 1~1 0 画像として 現像する。 また、 3 0 として撮影したと判定した場合は、
Figure imgf000047_0012
画像をそ のファイルに含まれる 3 0 画像用の現像パラメータを用いて 3 0 画像と して現像する。 このような処理を行うことを可能とするために、 本実施形態 におけるデジタルカメラ 1 0 0は、 3 0 として撮影された 八 画像ファ イルには 3 0 画像用の現像パラメータを記録し、 !!口 として撮影された 〇 2020/175231 46 卩(:171? 2020 /006201
八 画像ファイルには 1~1 0 画像用の現像パラメータを記録している。 な お、 現像を行う装置は、 前述した 1~1巳 I のコンテナを使用して現像 した静止画 1~1 0 画像を記録するようにすればよい。
[0201 ] さらに、 検出メタデータとして 1~1 0 撮影でも 3 0 撮影でも同じ判定結 果を記録することとしたため、 1~1 0 撮影モードで撮影された 八 画像フ ァイルであっても、 記録された検出データを用いて 3 0 画像に現像するこ とも可能となる。 したがって、 3 0 画像にしか対応していない装置でも、
! !口 撮影モードで撮影された
Figure imgf000048_0001
画像ファイルを適切に表示することが 可能となる。
[0202] 図 9八は、 システム制御部 5 0の、 表示部 2 8を使用した再生モード処理 の詳細を示すフローチヤートである。 この処理は、 不揮発性メモリ 5 6に記 録されたプログラムをシステムメモリ 5 2に展開してシステム制御部 5 0が 実行することで実現する。
[0203] 3 9 0 1 にて、 システム制御部 5 0は、 インデックス再生か、 通常の再生 かを判定する。 3 9 0 1 にて、 システム制御部 5 0はインデックス再生と判 定した場合は処理を 3 9 0 2に進める。 この 3 9 0 2にて、 システム制御部 5 0は、 再生する画像枚数を決定する。
[0204] 3 9 0 3にて、 システム制御部 5 0は、 再生する画像を決定する。 そして
、 3 9 0 4にて、 システム制御部 5 0は、 再生する画像の描画処理を行う。
[0205] 3 9 0 5にて、 システム制御部 5 0は、 表示する全ての画像の描画が完了 したかを判定し、 完了していないと判定した場合は、 3 9 0 3に戻し、 描画 処理を継続する。 また、 システム制御部 5 0は、 描画処理が完了したと判定 した場合、 処理を 3 9 0 6に進める。 この 3 9 0 6にて、 システム制御部 5 0は、 表示部 2 8へ、 3 9 0 6の画像出力処理を行い表示処理を終了する。 その後、 システム制御部 5 0は、 操作受付処理を行う。
[0206] 図 9巳は、 システム制御部 5 0の、 表示部 2 8を使用した再生モード処理 の描画処理の詳細を示すフローチヤートである。
[0207] 3 9 1 1 にて、 システム制御部 5 0は、 再生する画像の情報を取得する。 〇 2020/175231 47 卩(:171? 2020 /006201
3 9 1 2にて、 システム制御部 5 0は、 再生する画像を決定する。 3 9 1 3 にて、 システム制御部 5 0は、 再生する画像を記録媒体 2 0 0から読み出す 。 3 9 1 4にて、 システム制御部 5 0は、 再生する画像の伸長処理を行う。
3 9 1 5にて、 システム制御部 5 0は、 3 9 1 4で伸長処理を施した画像デ —夕から画素ごとのデータを収集する。 この画像データとは例えば輝度情報 であり、 ヒストグラム処理やハイライ ト警告処理などに用いる。
[0208] 3 9 1 6にて、 システム制御部 5 0は、 再生する画像が 1~1 0 画像である か 3 0 画像であるかを判定する。 システム制御部 5 0は、 再生する画像が 1~1 0 画像であると判定した場合は処理を 3 9 1 7に、
Figure imgf000049_0001
画像であると 判定した場合は処理を 3 9 2 0に進める。 3 9 1 7にて、 システム制御部 5 0は、 再生時の 1~1 0 アシスト表示設定を確認し、 アシスト 1の設定の場合 には処理を 3 9 1 8へ、 アシスト設定 2の場合には処理を 3 9 1 9へ進める 。 3 9 1 8にて、 システム制御部 5 0は、 3 9 1 4で伸長した画像に対して アシス
Figure imgf000049_0002
変換処理を行う。 また、 3 9 1 9 にて、 システム制御部 5 0は、 3 9 1 4で伸長した画像に対してアシスト 2 の設定に従って
Figure imgf000049_0003
変換処理を行う。
[0209] 3 9 2 0にて、 システム制御部 5 0は、 3 9 1 4で伸長した画像または、
3 9 1 8、 3 9 1 0で 3 0 変換処理を行った画像に対し、 表示部 2 8に適 したサイズに拡縮処理を行う。 そして、 3 9 2 1 にて、 システム制御部 5 0 は、 生成した画像の配置を決定し、 描画処理を終了する。
[0210] 図 9 <3〜9 1~1は、 システム制御部 5 0の読込画像選択処理の詳細を示すフ 口ーチヤートでめる。
[021 1 ] 3 9 2 6にて、 システム制御部 5 0は、 取得した画像の情報を判定し、 再 生可能であるかを判定し、 可能であると判定した場合は処理を 3 9 2 7に、 再生不可と判定した場合は処理を 3 9 3 6に進める。
[0212] 3 9 2 7にて、 システム制御部 5 0は、 再生する画像が静止画像か否かを 判定する。 システム制御部 5 0は、 再生する画像が静止画像であると判定し た場合には処理を 3 9 2 8に、 そうでない場合は処理を 3 9 3 5に進める。 \¥02020/175231 48 卩(:17 2020/006201
[0213] 3 9 2 8にて、 システム制御部 5 0は、 再生する画像が \/\/画像か否か を判定する。 システム制御部 5 0は、 再生する画像が 八\/\/画像であると判 定した場合は処理を 3 9 2 9に、 そうでない場合は処理を 3 9 3 0に進める
[0214] 3 9 2 9にて、 システム制御部 5 0は、
Figure imgf000050_0001
で撮影された 八 画像か、 3口 で撮影された 八 画像かを判定する。 システム制御 部 5 0は、 このときの判定を、 図 8八乃至 8巳で説明した、 [^八 ファイル 内にあるメタデータを用いて行う。 システム制御部 5 0は、 !!〇 [¾で撮影さ れた 八 画像であると判定した場合は処理を 3 9 3 1 に、 3 0 画像であ ると判定した場合は処理を 3 9 3 2に進める。
[0215] 3 9 3 0にて、 システム制御部 5 0は、
Figure imgf000050_0002
八 画像でないと判定された静 止画像が 1~1口 で撮影された画像か、 3口 で撮影された画像かを判定する 。 本実施形態では 1~1 0 で撮影した画像は ! !巳 I として記録、
Figure imgf000050_0003
で撮 影した画像は」 巳◦として記録するため、 1~1巳 丨
Figure imgf000050_0004
画像か 3 0 画像かを判定しているが、 1~1巳 丨 内のメタデータを使用して 1~1 0 画像か 3 0 画像かを判定してもよい。
[0216] 3 9 3 1 にて、 システム制御部 5 0は、 1~1 0 で撮影された 八 画像か ら再生に使用する画像データを選択する。 3 9 3 2にて、 システム制御部 5 0は、 3口 で撮影された
Figure imgf000050_0005
画像から再生に使用する画像データを選択 する。 3 9 3 3にて、 システム制御部 5 0は、 1~1 0 現像した静止画像から 再生に使用する画像データを選択する。 3 9 3 4にて、 システム制御部 5 0 は、 3 0 現像した静止画像から再生に使用する画像データを選択する。 3 9 3 5にて、 システム制御部 5 0は、 動画ファイルの中から表示すべき画像 データを選択する。 3 9 3 6にて、 システム制御部 5 0は、 再生画像の非表 示処理を行う。 この場合、 再生できない画像ということをユーザに知らせる ために再生不可の情報を表示する。
[0217] 図 9 0は、 システム制御部 5 0が、 1~1 0 で撮影された 八 画像から再 生に使用する画像データを選択するフローである。 〇 2020/175231 49 卩(:171? 2020 /006201
[0218] 3 9 4 1 にて、 システム制御部 5 0は、 インデックス再生か、 通常の再生 かを判定する。 システム制御部 5 0は、 インデックス再生であると判定した 場合は処理を 3 9 4 2に、 通常再生であると判定した場合は処理を 3 9 4 3 に進める。
[0219] 3 9 4 2にて、 システム制御部 5 0は、 インデックス再生の再生画像枚数 によって、 使用する画像データを判定する。 本実施形態は 3 6枚を閾値とす るものとするが、 その枚数は一例であって、 ユーザにより適宜設定するよう にしても良いし、 表示部 2 8のサイズに依存して決定しても良い。 システム 制御部 5 0は、 表示する画像が 3 6枚以上であると判定した場合は処理を 3 9 4 5に進み、 3 6枚より少ないと判定した場合は 3 9 4 4に処理を進める
[0220] 3 9 4 3にて、 システム制御部 5 0は、 「表示用
Figure imgf000051_0001
本画像 (1~1巳 〇) 」 (8 2 8) を再生に使用する画像データとして決定する。 3 9 4 4 にて、 システム制御部 5 0は、 「表示用
Figure imgf000051_0002
1\/1 画像 (1~1巳 〇 」 (8 2 7) を再生に使用する画像データとして決定する。 3 9 4 5にて、 システム制御部 5 0は、 「表示用
Figure imgf000051_0003
丁1~1 1\/1画像 (1~1巳 〇 」 (8 2 6) を再生に使用する画像データとして決定する。
[0221 ] 図 9巳一 1及び 9巳一 2は、 1~1 0 で撮影された 八 画像が 3 0 の表 示用画像を持つ場合に 画像から再生に使用する画像データの選択処理 を示すフローである。
[0222] 3 9 5 1 にて、 システム制御部 5 0が、 インデックス再生か、 通常の再生 かを判定する。 システム制御部 5 0は、 インデックス再生であると判定した 場合は処理を 3 9 5 2に、 通常再生と判定した場合は処理を 3 9 5 3に進め る。
[0223] 3 9 5 2にて、 システム制御部 5 0は、 インデックス再生の再生画像枚数 によって、 使用する画像データを判定する。 ここでは、 3 6枚を判定の際の 閾値とする。 システム制御部 5 0は、 再生画像数が 3 6枚以上であると判定 した場合は処理を 3 9 5 5に、 3 6枚未満であると判定した場合は処理を 3 〇 2020/175231 50 卩(:171? 2020 /006201
954に進める。
[0224] 3953、 3954、 3955では、 システム制御部 50は、 再生する
Figure imgf000052_0001
八 画像に 30 画像が含まれているかを確認する。 このときの判定は図 8 八乃至 8巳で説明した、 [^八 ファイル内にあるメタデータを用いる。
[0225] 3956にて、 システム制御部 50は、 「表示用
Figure imgf000052_0002
本画像 (1~1巳 〇) 」 (828) を再生に使用する画像データとして決定する。 3957 にて、 システム制御部 50は、 「表示用
Figure imgf000052_0003
本画像 (」 巳〇) 」 (
823) を再生に使用する画像データとして決定する。 3958にて、 シス テム制御部 50は、 「表示用
Figure imgf000052_0004
1\/1 画像 (1~1巳 〇 」 (827 ) を再生に使用する画像データとして決定する。 3959にて、 システム制 御部 50は、 「表示用
Figure imgf000052_0005
1\/1? 画像 (」 巳〇) 」 (822) を再 生に使用する画像データとして決定する。 3960にて、 システム制御部 5 0は、 「表示用
Figure imgf000052_0006
丁1~11\/1画像 (1~1巳 〇 」 (826) を再生に使 用する画像データとして決定する。 396 1 にて、 システム制御部 50は、 「表示用
Figure imgf000052_0007
丁1~11\/1画像 (」 ?巳〇) 」 (82 1) を再生に使用する 画像データとして決定する。
[0226] 図 9 は、 システム制御部 50が、 1~10 現像静止画像から再生に使用す る画像データを選択するフローである。
[0227] 397 1 にて、 システム制御部 50は、 インデックス再生か、 通常の再生 かを判定する。 システム制御部 50は、 インデックス再生と判定した場合は 処理を 3972に、 通常再生であると判定した場合は処理を 3973に進め る。
[0228] 3972にて、 システム制御部 50は、 インデックス再生の再生画像枚数 によって、 使用する画像データを判定する。 実施形態では、 枚数の閾値とし て 36枚とする。 システム制御部 50は、 再生画像枚数が 36枚以上である と判定した場合は処理を 3975に、 36枚未満であると判定した場合は処 理を 3974に進める。
[0229] 3973にて、 システム制御部 50は、 「!!〇 [¾ 本画像 (!~1巳 〇 」 〇 2020/175231 51 卩(:171? 2020 /006201
(不図示) を再生に使用する画像データとして決定する。 3 9 7 4にて、 シ ステム制御部 5 0は、 1\/1 画像 (1~1巳 〇 」 (不図示) を再 生に使用する画像データとして決定する。 3 9 7 5にて、 システム制御部 5 0は、
Figure imgf000053_0001
丁1~1 1\/1画像 (1~1巳 〇 」 (不図示) を再生に使用する画 像データとして決定する。
[0230] 図 9〇は3口 で撮影された
Figure imgf000053_0002
画像から再生に使用する画像データを 選択するフローである。
[0231 ] 3 9 8 1 にて、 システム制御部 5 0は、 インデックス再生か、 通常の再生 かを判定する。 システム制御部 5 0は、 インデックス再生と判定した場合は 処理を 3 9 8 2に、 通常再生と判定した場合は処理を 3 9 8 3に進める。
[0232] 3 9 8 2にて、 システム制御部 5 0は、 インデックス再生の再生画像枚数 によって、 使用する画像データを判定する。 実施形態では、 枚数の閾値とし て 3 6枚とする。 システム制御部 5 0は、 表示する画像が 3 6枚以上と判定 した場合は処理を 3 9 8 5に、 3 6枚未満であると判定した場合は処理を 3 9 8 4に進める。
[0233] 3 9 8 3にて、 システム制御部 5 0は、 「表示用
Figure imgf000053_0003
本画像 (」 巳〇) 」 (8 2 3) を再生に使用する画像データとして決定する。 3 9 8 4 にて、 システム制御部 5 0は、 「表示用
Figure imgf000053_0004
」 (8 2 2) を再生に使用する画像データとして決定する。 3 9 8 5にて、 システム制御部 5 0は、 「表示用
Figure imgf000053_0005
丁1~1 1\/1画像 (」 巳〇) 」 (8
2 1) を再生に使用する画像データとして決定する。
[0234] 図 9 1~1は、 3 0 現像静止画像から再生に使用する画像データを選択する フローである。
[0235] 3 9 9 1 にて、 システム制御部 5 0は、 インデックス再生か、 通常の再生 かを判定する。 システム制御部 5 0は、 インデックス再生と判定した場合は 処理を 3 9 9 2に、 通常再生と判定した場合は処理を 3 9 9 3に進める。
[0236] 3 9 9 2にて、 システム制御部 5 0は、 インデックス再生の再生画像枚数 によって、 使用する画像データを判定する。 実施形態では、 枚数の閾値とし 〇 2020/175231 52 卩(:171? 2020 /006201
て 3 6枚とする。 システム制御部 5 0は、 再生する画像が 3 6枚以上と判定 した場合は処理を 3 9 9 5に、 3 6枚未満であると判定した場合は処理を 3 9 9 4に進める。
[0237] 3 9 9 3にて、 システム制御部 5 0は、
Figure imgf000054_0001
本画像 (」 巳〇) 」
(不図示) を再生に使用する画像データとして決定する。 3 9 9 4にて、 シ ステム制御部 5 0は、
Figure imgf000054_0002
1\/1 画像 (」 巳〇) 」 (不図示) を再 生に使用する画像データとして決定する。 3 9 9 5にて、 システム制御部 5 0は、
Figure imgf000054_0003
丁1~1 1\/1画像 (」 巳〇) 」 (不図示) を再生に使用する画 像データとして決定する。
[0238] 図 1 0 は、 外部機器 3 0 0を使用した再生モード処理の詳細を示すフロ —チヤートである。 この処理は、 不揮発性メモリ 5 6に記録されたプログラ ムをシステムメモリ 5 2に展開してシステム制御部 5 0が実行することで実 現する。
[0239] 3 1 0 0 1 にて、 システム制御部 5 0は、 外部機器 3 0 0がデジタルカメ ラ 1 0 0に接続されているか否かを判定する。 システム制御部 5 0は、 外部 機器 3 0 0が接続されていると判定した場合は処理を 3 1 0 0 2に、 接続さ れていないと判定した場合は処理を 3 1 0 0 5に進める。
[0240] 3 1 0 0 2にて、 システム制御部 5 0は、 再生時 1~1 0 設定が有効かどう かを判定する。 再生設定としては、 「! !〇 [¾再生する」 、 「! !〇 [¾再生しな い」 、 「撮影モード連動」 が選択可能である。 「! !〇 [¾再生する」 を設定し ている場合は、 再生する画像が 1~1 0 画像か 3 0 画像かに関係なく、 外部 機器 3 0 0が 1~1 0 に対応していれば、 1~1 0 出力するモードであり、 「1~1 口 再生しない」 は 3 0 出力するモードとなる。 「撮影モード連動」 は再 生時の出力を撮影モードに連動させるモードである。 すなわち、 「! !〇 [¾撮 影」 が 「する」 に設定されている 1~1 0 撮影モードの場合は、 再生時も
Figure imgf000054_0004
「! !〇 [¾撮影」 が 「しない」 に設定されている 3 0 撮影モード の場合は再生時も 3 0 出力するモードである。 なお、 デフオルトは 「撮影 モード連動」 に設定されており、 ユーザが撮影モードを変更しても再生設定 〇 2020/175231 53 卩(:171? 2020 /006201
は 「撮影モード連動」 のまま維持される。 ユーザが再生設定を 「撮影モード 連動」 から 「!!〇 [¾再生する」 又は 生しない」 へ変更した場合だ け、 その連動が切れる。 また、
Figure imgf000055_0001
再生する」 及び
Figure imgf000055_0002
しない 」 の代わりに 「1~1巳 丨 (再生) 」 及び 「」 巳〇 (再生) 」 等のファイル フォーマツ トを選択肢としてもよい。 なお、 同様に、 「!!〇 [¾撮影する」 及 び 「1~10 撮影しない」 の代わりに 「1~1巳 丨 (撮影) 」 及び 「」 巳◦ ( 撮影) 」 等のファイルフォーマツ トを選択肢としてもよい。
[0241] 31 002において、 システム制御部 50は、
Figure imgf000055_0003
再生する」 の場合 は処理を 31 003に、 「!!〇 [¾再生しない」 の場合は処理を 31 005に 進める。 また、 システム制御部 50は、 「撮影モード連動」 の場合であって 、 3606で設定した 「!!〇 [¾撮影」 が 「する」 の場合は処理を 31 003 に進め、 「しない」 の場合は 31 005に処理を進める。
[0242] 31 003にて、 システム制御部 50は、 外部機器 300が 1~10 に対応 したディスプレイかどうかを判定する。 システム制御部 50は、
Figure imgf000055_0004
に対 応したディスプレイであると判定した場合は処理を 31 004に、 対応して いないと判定した場合は処理を 31 005に進める。
[0243] 31 004にて、 システム制御部 50は、 外部機器 300に 1~10 の信号 を出力する。 31 005にて、 システム制御部 50は、 外部機器 300に 3 〇 の信号を出力する。
[0244] 31 006 ~31 01 1は、 図 9八の 3901〜 906と同じため、 ここ での説明は省略する。
[0245] 図 1 〇巳は、 外部機器 300に 1~10 の信号を出力した場合の描画処理 (
31 009) の詳細を示すフローチヤートである。
[0246]
Figure imgf000055_0005
31 028, 31 029は図 9巳で説明した、
39 1 1 ~39 1 5、 3920、 392 1 と同じため、 ここでの説明は省略 する。
[0247] 31 026にて、 システム制御部 50は、 再生する画像が 1~10 画像であ るか 30 画像であるかを判定する。 システム制御部 50は、 再生する画像 〇 2020/175231 54 卩(:171? 2020 /006201
が 1~10 画像であると判定した場合は処理を 31 028に、 30 画像であ ると判定した場合は処理を 31 027に進める。
[0248] 31 027にて、 システム制御部 50は、
Figure imgf000056_0001
変換処理を行う
。 この後の 31 028, 31 029は、 図 9巳の 3920、 392 1 と同じ である。 なお、 外部機器 300に 30 の信号を出力した場合の描画処理 ( 31 009) の詳細は、 図 9巳と同じであるため、 説明を省略する。
[0249] 図 1 1 八は再生メニュー処理の詳細を示すフローチヤートである。 この処 理は、 不揮発性メモリ 56に記録されたプログラムをシステムメモリ 52に 展開してシステム制御部 50が実行することで実現する。
[0250] 31 1 01 にて、 システム制御部 50は、 ユーザにより 八 現像の設定 項目 (不図示)
Figure imgf000056_0002
現像すると設定された否かを判定する。 システム制 御部 50は、
Figure imgf000056_0003
しないと判定した場合は処理を 31 1 03に、 [¾八 現像すると判定した場合は処理を 31 1 02に進める。
[0251] 31 1 03にて、 システム制御部 50は、
Figure imgf000056_0004
ァイルの 30 変換の 設定項目 (不図示) で 1~10
Figure imgf000056_0005
0 変換すると設定されているか否かを判 定する。 システム制御部 50は、 1~10
Figure imgf000056_0006
0 変換しないと判定した場合 は処理を 31 1 05へ、
Figure imgf000056_0007
変換すると判定した場合は処理を 3
1 1 04へ進める。
[0252] 31 1 05にて、 システム制御部 50は、 ファイル転送の設定項目 (不図 示) でファイル転送すると設定されたか否かを判定する。 システム制御部 5 0は、 ファイル転送しないと判定した場合は処理を 31 1 07へ、 ファイル 転送すると判定した場合は処理を 31 1 06へ進める。
[0253] 31 1 07にて、 システム制御部 50は、 メニューを抜けるか否かを判定 する。 システム制御部 50は、 メニューを抜けないと判定した場合は処理を 31 1 01 に戻し、 メニューを抜けると判定した場合は、 この再生メニュー 処理を終了する。
[0254] 31 1 06にて、 システム制御部 50は、 ユーザ指定の画像ファイルに対 して転送処理を行う。 !~10 画像ファイルを転送する際は、 受信先が 30 〇 2020/175231 55 卩(:171? 2020 /006201
表示しかできない場合は 3 1 1 0 4で示す 1~1 0
Figure imgf000057_0001
0 変換をカメラ内で 実施してから 3 0 画像ファイルとして転送してもよい。
[0255] 3 1 1 0 2にて、 システム制御部 5 0は、 ユーザ指定の 八 画像ファイ ルに対して
Figure imgf000057_0002
現像を行う。
Figure imgf000057_0003
現像処理の詳細を、 図 1 1 巳のブ ロック図を参照して以下に説明する。 なお、 図 1 1 巳に示す各処理部は、 画 像処理部 2 4に含まれるものとするが、 システム制御部 5 0が実行するプロ グラムで実現させても構わない。
[0256] 記録媒体
Figure imgf000057_0004
1 0 1 をシステ ム制御部 5 0が読み出し画像処理部 2 4で 現像処理を行わせる。
Figure imgf000057_0005
八 画像はベイヤ配列の画素の集合であるので、 1つの画素は単一の色成分の 強度データしか有さない。 尚、
Figure imgf000057_0006
八 画像は 3 0 撮影されたときの 八 されたときの 八 (! !〇[¾) が存在する。 また、 現
Figure imgf000057_0007
をそのまま 3 0 現像する場合と、 !!〇[¾現像す る場合も有り得る。 反対に
Figure imgf000057_0008
(! !〇[¾) を ! !〇[¾現像する場合と、 3 0 8現像する場合もある。 ホワイ トバランス部 1 1 0 2では、 白を白くする処 理がなされる。
Figure imgf000057_0009
現像の場合は、 ファイルに記録さ れている 1~1 0 現像メタである 1~1 0 用のホワイ トバランス係数を用いてホ ワイ トバランス処理を実施する。 逆に、
Figure imgf000057_0010
現像する場合は、 ファイルに 格納されている検出メタである白サーチ枠内判定結果から 3 0 用のホワイ トバランス係数を生成して、 ホワイ トバランス処理を実施する。 もちろん
Figure imgf000057_0011
Figure imgf000057_0012
用の両方のホワイ トバランス係数が記録されている 場合は適宜必要な方を用いればよい。
[0257] 色補間部 1 1 0 3は、 ノイズリダクシヨンや色モザイク画像を補間するこ とによって、 全ての画素において、 1画素が 3成分 (例えば[¾、 ◦、 巳の色 情報) を持つカラー画像を生成する。 生成されたカラー画像は、 マトリクス 変換部 1 1 0 4およびガンマ変換部 1 1 0 5を経て基本的なカラー画像が生 成される。 その後、 色輝度調整部 1 1 0 6が、 画像の見栄えを改善するため の処理をカラー画像に対し行う。 例えば、 夕景検出して彩度強調といった画 〇 2020/175231 56 卩(:171? 2020 /006201
像補正がシーンに応じて行われる。 階調補正も同様に実施するが、
Figure imgf000058_0001
Figure imgf000058_0002
現像する場合は、 ファイルに格納されている 1~1 0 現像メ 夕である 1~1 0 用の階調補正量を用いて階調補正を実施する。 逆に 3 0 現 像する場合は、 ファイルに記録されている検出メタである顏検出結果、 ヒス トグラムを用いて 3 0 用の階調補正量を算出し階調補正を実施する。 もち ろん 八 に 1~1 0 用、 3 0 用の両方の階調補正量が記録されている場合 は適宜必要な方を用いればよい。
[0258] 所望の色調整を行った画像に対して、 圧縮部 1 1 0 7で高解像度画像を」 巳◦や 1~1巳 〇等の方法で圧縮し、 記録部 1 1 0 8にてフラッシュメモリ 等の記録媒体に記録する現像画像が生成される。 尚、 先述した 1~1巳 I コン テナには複数の画像を格納できるので、 1~1 0 現像した画像の他に 3 0 現 像した画像も含めて格納しても構わない。
[0259] 3 1 1 0 4にて、 システム制御部 5 0は、 ユーザ指定の 1~1 0 画像ファイ ルに対して 3 0 変換を行う。 1~1 0 画像は〇巳丁 が 0、 色域が巳丁.
2 0 2 0などの色空間で生成された画像であるため、
Figure imgf000058_0003
のア 2 . 2、 3 ◦巳などの色空間に卜ーンマッビングおよびガマッ トマッビング処理を行 う必要がある。 具体的な方法としては公知の技術を用いれば良いが、 例えば 適正露出を 3 0 と揃えるような卜ーンマッビングを行うと 3 0 と比較し て明るさを合わせた結果を得ることができる。
[0260] (変形例)
上述の実施形態では、 !! 0 撮影時に 画像を記録する際には、 図 8 〇のように、
Figure imgf000058_0004
画像ファイルに、
Figure imgf000058_0005
画像データと共に、
Figure imgf000058_0006
現像 した本画像、 1~1 0 現像した表示用の IV! 画像、 !!〇 [¾現像した丁1~1 1\/1 ( サムネイル) 画像、 を記録するものとした。 または、 図 8 0のように、
Figure imgf000058_0007
八 画像と共に、 !!〇 [¾現像した本画像、 IV! 画像、 丁1~1 1\/1画像だけでなく 、
Figure imgf000058_0008
した本画像、 IV! 画像、 丁1~1 1\/1画像と、 を記録するものとし た。 あるいは、 図 8巳のように、 画像と共に、 !!〇 [¾現像した本画像 、 IV! 画像と、 3 0 現像した丁
Figure imgf000058_0009
を記録するものとした。 〇 2020/175231 57 卩(:171? 2020 /006201
[0261] 本変形例は、 撮影処理において、 画像ファイルと共に、
Figure imgf000059_0001
ファイルと関連付けて、 1~10 画像の画像ファイル、 または、
Figure imgf000059_0002
画像の 画像ファイルを記録する場合についての変形例である。 8八 画像ファイル と、 1~10 画像または 30 画像の画像ファイルとを関連付けて記録する場 合、
Figure imgf000059_0003
ァイルに含まれる 1~10 画像または 30 画像と、 [^八 画像ファイルに関連する画像ファイルに含まれる 1~10 画像または 30 画 像において、 現像方式や圧縮符号化方式に差異があると、 管理が煩雑であっ たり、 再生互換が保たれなかったりする場合がある。 そこで、 本変形例では 、 画像ファイルとこれに関連する画像ファイルとでは、 本画像、 IV! 画像、 丁 1~1 IV!画像それぞれについて、 同じ方式の現像処理をおこなって同 じ圧縮符号化方式で符号化して生成した画像を記録するようにすることとし た。
[0262] 図 1 9八及び 1 9巳は、 34 1 8の 1~10 撮影処理 (図 7八及び 7巳) と 、 3434の 30 撮影処理に対応する、 本変形例における撮影処理のフロ —チヤートである。 この処理は、 不揮発性メモリ 56に記録されたプログラ ムをシステムメモリ 52に展開してシステム制御部 50が実行することで実 現する。
[0263] まず、 31 901 において、 システム制御部 50は、 [^八 データを取得 する。 この処理は、 3701 と同様の処理である。
[0264] 次に、 31 902において、 システム制御部 50は、 撮影画質の設定が 1~1 口 撮影モードとなっているか否かを判定する。 システム制御部 50は、 1~1 口 撮影モードに設定されていると判定した場合は処理を 31 903に、 3 口 撮影モードになっていると判定した場合は処理を 31 909に進める。
[0265] 31 903においては、 システム制御部 50は、 3702~37 1 0と同 様の処理を行う。 つまり、 31 901で取得
Figure imgf000059_0004
データを用いて、 各 種パラメータの算出や、 検出処理を行うと共に、 取得した
Figure imgf000059_0005
データに 1~1 口 現像処理を施して、 本画像、 1~1〇[¾の1\/1? 画像、 H D RのTH IV!画像を生成する。 そして、 本画像、 !~1〇[¾の1\/1? 画像、 〇 2020/175231 58 卩(:171? 2020 /006201
丁1~11\/1画像の 1 06 丨 1:のデータを、 それぞれ、
Figure imgf000060_0001
式で圧縮符号化 処理し、 !!〇[¾の圧縮画像データ (1~1巳 〇 を生成する。
[0266] 次に、 31 904において、 システム制御部 50は、 37 1 1 と同様に、 ユーザによる記録画質設定を判定する。 システム制御部 50は、
Figure imgf000060_0002
ファイルのみが記録される設定であると判定した場合は処理を 31 905に 進める。 そして、 1~10 画像ファイルのみが記録される設定であると判定し た場合は処理を 31 906に、
Figure imgf000060_0003
ァイル及び 1~10 画像ファイル が記録される設定であると判定した場合は処理を 331 907に進める。
[0267] 31 905において、 システム制御部 50は、 37 1 2と同様に、 31 9
01で取得した[^八 画像データを図 8八のようなコンテナファイル形式の
Figure imgf000060_0004
ァイルとして記録する。 31 905においては、 1 〇1 96〇 3 3809には、 図 8〇のように、 [^八 画像データと共に、 31 903 で生成して 1~1巳 〇形式で圧縮符号化した、
Figure imgf000060_0005
の本画像、
Figure imgf000060_0006
画像、 !!〇[¾の· GHM画像を、 表示用画像として記録する。
[0268] 31 906において、 システム制御部 50は、 37 1 3と同様に、 31 9
03で生成して 1~1巳 〇形式で圧縮符号化した 1~10 の本画像、 1~10 の IV! 画像、 !!〇[¾の· GHM画像を、 1~1巳 丨 形式の画像ファイルとして記録 する。
Figure imgf000060_0007
の本画像を 1~1巳 丨 ファイルの本画像として記録し、
Figure imgf000060_0008
の IV! 画像と、 !!〇[¾の· GHM画像は、 表示用画像として 1~1巳 丨 ファイル に記録する。
[0269] ここで、 1~1巳 丨 ファイルについて説明する。 1~1巳 丨 形式の画像ファイ ルの構造を図 1 7八に示す。 以下で例示する画像ファイルのコンテナファイ ルフォーマッ トは丨 3〇/丨 巳〇 1 4496 - 1 2で規定されている 丨 3〇 ベースメディアファイルフォーマツ トである。 そのため、 本ファイルのコン テナフォ _マッ トは木構造を持ちボックスと呼ばれる各ノードを持っている 。 また、 各ボックスは複数のボックスを子要素として持つことができる。 !! 巳 丨 画像データファイル 1 701は、 先頭にファイルタイプの記述のため のボックス干 ソ 1 702を有し、 さらに、 メタデータを含むボックス 〇 2020/175231 59 卩(:171? 2020 /006201
6 3 1 703、 トラックのメディアデータ本体 (画像データ) を含むボッ クス〇1〇131: 1 708を有する。 ボックス〇16 3 1 703は子要素として 、
Figure imgf000061_0001
ックス 1 706 と巳乂 I で規定されるメタデータ以外のメタデータを格納するボックス IV! 6 I 303 I 3 1 705— 1 を有する。 ボックス 1110131: 1 708は子要素 として、 巳乂 I で規定される画像の撮影日時、 撮影時条件等のメタデータ を格納するボックス IV! 6 t a D a t a ^ 705-2と、 撮影した静止画像デ
Figure imgf000061_0005
では、 図 1 7〇のような画像が丨 01396〇 3 3 1 709に記録される。 この場合の丨 〇1396〇 3 3 1 709は、
Figure imgf000061_0002
画質現像し 1~1巳 〇圧縮 した表示用の丁 1~1 IV!画像 1 726、 1\/1 画像1 727と、 1~10 画質現像 し 1~1巳 〇圧縮した本画像 1 728が記録される。
[0270] 31 907において、 システム制御部 50は、 31 905と同様に 31 9
01で取得した[^八 画像データを図 8八のようなコンテナファイル形式の [^八 画像ファイルとして記録する。 そして、 31 908において、 システ ム制御部 50は、 31 906と同様に 31 903で生成して 1~1巳 V〇形式で 圧縮符号化した !! 0 の本画像、 1~1〇[¾の1\/1? 画像、 1~1〇[¾の丁1~11\/1画像 を、 1~1巳 丨 形式の画像ファイルとして記録する。 つまり、
Figure imgf000061_0003
画像デー 夕の 八\/\/ファイルと 1~1口 現像済みの画像ファイル (1~1巳 丨 ファイル) とを記録する際には、 表示用 IV! 画像、 及び、 表示用· GH IV!画像として、 同じ現像処理を施し、 同一の符号化形式 (1~1巳 〇 で符号化した同じ画像 が記録される。 また、
Figure imgf000061_0004
画像ファイルの表示用本画像として記録される 画像データと、 現像済みの画像ファイル (1~1巳 I ファイル) の本画像とし て記録される画像データは、 同じ現像処理を施し、 同一の符号化形式 (1~1巳 〇) で符号化した同じ画像とする。 なお、 システム制御部 50は、 31 9 07で記録する 八 \/\/画像ファイルと、 31 908で記録する現像済み画像 〇 2020/175231 60 卩(:171? 2020 /006201
ファイル (1~1巳 丨 ファイル) は、 互いに関連付けて記録する。
[0271] このように、 関連付けて同時に記録する
Figure imgf000062_0001
ファイルと 1~1 I 巳 ファイ ルには、 同一の 1~10 現像処理が施され、 同一の符号化形式 (1~1巳 〇) で 符号化した同じ画像が、 表示用画像として記録されるため、 管理の煩雑さを 防ぎ、 再生互換性を保つことができる。
[0272] また、 31 905において記録する
Figure imgf000062_0002
ファイル、 及び、 31 906に おいて記録する 1~1 丨 巳 ファイルに記録する表示用画像も、 31 907, 3 1 908と同一の 1~10 現像処理および同一形式 (1~1巳 〇) の符号化処理 を行った画像が記録される。 そのため、 記録形式を変更したとしても、 他の 再生装置等で、 同
Figure imgf000062_0003
撮影設定で撮影した画像ファイルの中で、 画像フ ァイルによって、 画像を再生することができなくなるというようなことがな くなり、 再生互換性を保つことができる。
[0273] 31 909では、 システム制御部 50は、 画像処理部 24により、 370
1で取得した 画像データに 30 現像処理を施して、 30 本画像、 3〇 [¾の1\/1? 画像、
Figure imgf000062_0004
画像を生成する。 そして、 それぞれの 画像を 3
Figure imgf000062_0005
◦形式で圧縮符号化処理し、 30 の圧縮画像データ (」 巳
0) を生成する。
Figure imgf000062_0006
画像のため、 現像処理され圧縮符号化された画像デ —夕は、 8匕 丨 1:の丫 II 420のデータとなる。 また、
Figure imgf000062_0007
撮影の時と 同様に、 各種パラメータの算出や検出処理も行う。
[0274] 次に、 31 9 1 0において、 システム制御部 50は、 ユーザによる記録画 質設定を判定する。 システム制御部 50は、
Figure imgf000062_0008
画像ファイルのみが記録 される設定であると判定した場合は処理を 31 9 1 1 に、
Figure imgf000062_0009
画像ファイ ルのみが記録される設定であると判定した場合は処理を 31 9 1 2に進める 。 そして、
Figure imgf000062_0010
画像ファイル及び 30 画像ファイルが記録される設定で あると判定した場合は処理を 331 9 1 3に、
Figure imgf000062_0011
画像ファイル及び複数 種類の 30 画像ファイルが記録される設定であると判定した場合は処理を 331 9 1 4に進める。
[0275] 31 9 1 1 において、 システム制御部 50は、
Figure imgf000062_0012
を圧縮してへッ 〇 2020/175231 61 卩(:171? 2020 /006201
ダを付加して、 31 905と同様に図 8八のようなコンテナファイル構造の [^八 画像ファイルとして、 記録媒体丨 / 1 8を介して記録媒体 200に 記録する。 31 9 1 1では、 31 905と異なり、 表示用画像データとして 31 909で生成した 30 画像を記録し、
Figure imgf000063_0001
現像パラメータとして、
31 909で生成した 30 用の現像パラメータを記録する。 つまり、 31 9 1 1では、
Figure imgf000063_0002
3809には、 図 8巳 のように、 データが記録される。 31 9 1 1では、 31 901で取得した
Figure imgf000063_0003
八 画像データ (可逆圧縮または非可逆圧縮) 824と、 31 909で生成 した 30 用 八 現像パラメータが、
Figure imgf000063_0004
画像ファイル 801の丨 3 9603 I 809に記録される。 さらに、 表示用画像として、 31 909 で生成
Figure imgf000063_0005
( 」 巳〇) 822、 30 本画像 (」 巳◦) 823が、
Figure imgf000063_0006
八 画像ファイ ル 801
Figure imgf000063_0007
809に記録される。
[0276] 31 9 1 2において、 システム制御部 50は、 31 909で生成した」 巳◦で圧縮符号化した 30 現像済み画像データ (丁 1~1 IV!画像、 IV! 画像 、 本画像) を、 」 巳◦のコンテナを使用し、 」 巳◦ファイルとして記録
Figure imgf000063_0008
して記録媒体 200に記録する。 」 巳◦形式のファイ ル構造を図 1 8に示す。 」 巳〇形式の画像データファイル 1 800は、 先 頭に巳乂 丨 等のメタデータ 1 804を有し、 更に、 30 画質の」 巳〇 圧縮した丁 1~1 IV!画像 1 801、 1\/1 画像 1 802、 及び、 本画像 1 803 を持つ。 本例で示したファイルフォーマッ トは実施形態の 1つであり、 必要 に応じて他の情報を有しても良い。
[0277] 31 9 1 3において、 システム制御部 50は、 31 9 1 1 と同様に、 31
901で取得した 八 画像データと、 31 909で生成した」 巳◦圧縮 した 30 画像データを、 」 巳◦画像ファイルとして記録媒体丨 / 1 8 を介して記録媒体 200に記録する。 そして、 31 9 1 4において、 システ ム制御部 50は、 31 9 1 2と同様に、 31 909で生成した」 巳◦圧縮 した 30 画像データを、 」 巳◦画像ファイルとして記録媒体丨 / 1 8 〇 2020/175231 62 卩(:171? 2020 /006201
を介して記録媒体 200に記録する。 このように、
Figure imgf000064_0001
画像データの [¾八 画像ファイルと 3口 現像済みの画像ファイル (」 巳〇ファイル) とを 記録する際には、 表示用 IV! 画像、 及び、 表示用· GH IV!画像として、 同じ 現像処理を施し、 同一の符号化形式 (」 巳〇) で符号化した同じ画像が記 録される。 また、
Figure imgf000064_0002
画像ファイルの表示用本画像として記録される画像 データと、 現像済みの画像ファイル (」 巳〇ファイル) の本画像として記 録される画像データは、 同じ現像処理を施し、 同一の符号化形式 (」 巳〇 ) で符号化した同じ画像とする。 なお、 システム制御部 50は、 31 9 1 3 で記録する 8八 画像ファイルと、 31 9 1 4で記録する現像済み画像ファ イル (」 巳〇ファイル) は、 互いに関連付けて記録する。
[0278] このように、 関連付けて同時に記録する
Figure imgf000064_0003
ファイルと」 巳〇ファイ ルには、 同一の 30 現像処理が施され、 同一の符号化形式 (」 巳〇) で 符号化された同じ画像が、 表示用画像として記録されるため、 管理の煩雑さ を防ぎ、 再生互換性を保つことができる。
[0279] 31 9 1 5において、 システム制御部 50は、 31 9 1 1 と同様に、 31
901で取得した 八 画像データと、 31 909で生成した」 巳◦圧縮 した 30 画像データを、 」 巳◦画像ファイルとして記録媒体丨 / 1 8 を介して記録媒体 200に記録する。 そして、 31 9 1 6において、 システ ム制御部 50は、 31 9 1 2と同様に、 31 909で生成した」 巳◦圧縮 した 30 画像データを、 」 巳◦画像ファイルとして記録媒体丨 / 1 8 を介して記録媒体 200に記録する。 さらに、 31 9 1 7において、 システ ム制御部 50は、 31 909で生成した」 巳◦圧縮した 30 画像データ を、 1~1巳 丨 ファイルとして、 記録媒体丨
Figure imgf000064_0004
1 8を介して記録媒体 200 に記録する。 31 9 1 7においては、 31 906と異なり、
Figure imgf000064_0005
I 3 1 709には、 図 1 7巳のように画像データが記録される。 つまり、 3 1 909で生成
Figure imgf000064_0006
画像 (」 巳〇) 1 722とが表示用画像として記録され、 さらに、 3 1 909で生成した 30 の本画像 (」 巳◦) 1 723が、 本画像として 〇 2020/175231 63 卩(:171? 2020 /006201
記録される。
[0280] なお、 システム制御部 50は、 31 9 1 5で記録する[^八 ファイルと、
31 9 1 6で記録する」 巳〇ファイル、 31 9 1 7で記録する 1~1 I 巳 フ ァイルは、 互いに関連付けて記録する。 このように、 関連付けて同時に記録 する[^八 、 」 巳〇、 1~1 丨 巳 ファイルには、 同一の
Figure imgf000065_0001
現像処理が施 され、 同一の符号化形式 (」 日〇) で符号化された同じ画像が、 表示用画 像として記録されるため、 管理の煩雑さを防ぎ、 再生互換性を保つことがで きる。 また、 31 9 1 1、 31 9 1 3、 31 9 1 5において記録する 八 ファイル、 及び、 31 9 1 2、 31 9 1 4、 31 9 1 6において記録する」 巳〇ファイル、 31 9 1 7で記録する 1~1 丨 巳 ファイルには、 同一の 1~10 現像処理および同一形式 (」 日〇) の符号化処理を行った表示用画像が 記録される。 そのため、 記録形式を変更したとしても、 他の再生装置等で、 同じ 30 撮影設定で撮影した画像ファイルの中で、 画像ファイルによって 、 画像を再生することができなくなるというようなことがなくなり、 再生互 換性を保つことができる。
[0281] なお、 上述の説明では、 31 9 1 2、 31 9 1 4において、 30 画像を 」 巳◦ファイルに記録するとしたが、 31 9 1 7のように、 1~1 I 巳 ファ イルとして記録するようにしてもよい。
[0282] また、 上述の説明では、 31 907で[^八 ファイルに記録する表示用の
1~1〇[¾の丁1~11\/1画像、 1~1〇[¾の1\/1? 画像と、 31 908で 1~1 丨 巳 ファイ ルに記録する表示用の
Figure imgf000065_0002
画像、
Figure imgf000065_0003
それ それ同一の画像データとした。 しかし、 1~10 用の現像処理を施した画像に 、 同一の符号化形式で符号化した画像であれば、 全く同じの画像でなくても よい。 31 9 1 3の 八 ファイルに記録する表示用画像と、 31 9 1 4の 」 巳◦ファイルに記録する表示用画像も同様に、
Figure imgf000065_0004
用の現像処理を施 した画像に、 同一の符号化形式で符号化した画像であれば、 全く同じの画像 でなくてもよい。 31 9 1 5においても同様である。
[0283] また、 31 907では、 31 908において !~1 丨 巳 ファイルに本画像と して記録される H D Rの本画像データを、 R A W画像ファイルの表示用画像 として記録したが、 同一の画像データを記録せずに、 例えば、 サイズの異な る画像データを記録するようにしてもよい。 S 1 9 1 3においても、 同様に 、 S 1 9 1 4において J P EGファイルに本画像として記録される S D Rの 本画像データを、 R AW画像ファイルの表示用画像として記録せずに、 異な る画像データを記録するようにしてもよい。 S 1 9 1 5においても同様であ る。
[0284] また、 H E 丨 Fファイルを記録する際に、 図 1 7 Dのように、 表示用サム ネイル画像として H E VC画像を記録せずに、 J P EG画像を記録するよう にしてもよい。 表示用サムネイルに J P EG画像を記録することにより、 H D Rの圧縮方式である H. 265のデコードに対応していない表示装置や P Cでもサムネイル画像のみ表示することも可能になる。
[0285] (その他の実施形態)
以上、 本発明の好ましい実施形態について説明したが、 本発明はこれらの 実施形態に限定されず、 その要旨の範囲内で種々の変形及び変更が可能であ る。 例えば、 上記実施形態では、 1色成分が 8ビッ トを超える画像データの 符号化に H EVC (H i g h E f f i c i e n c y V i d e o Co d i n g) を採用するものとしたが、 1色成分当たり 8ビッ トを超える画像を 符号化することが可能であれば、 特にその種類は問わない。 また、 上記実施 形態ではデジタルカメラに適用するものとして説明したが、 撮像機能を有す るコンビユータ (スマートフォンやカメラ付きノート PC等) に適用しても 構わず、 上記実施形態に限定されるものではない。
[0286] 発明は上記実施形態に制限されるものではなく、 発明の精神及び範囲から 離脱することなく、 様々な変更及び変形が可能である。 従って、 発明の範囲 を公にするために請求項を添付する。
[0287] 本願は、 201 9年2月 28日提出の日本国特許出願特願 201 9_36
396、 及び、 201 9年 4月 26日提出の日本国特許出願 201 9-85 969を基礎として優先権を主張するものであり、 その記載内容の全てを、 \¥02020/175231 65 卩(:17 2020/006201
ここに援用する。

Claims

〇 2020/175231 66 卩(:171? 2020 /006201 請求の範囲
[請求項 1 ] 撮像手段と、
ダイナミックレンジを選択する選択手段と、
前記撮像手段で得た 8 画像データに対して現像処理を施す現像 手段と、
前記撮像手段により取得した 画像デー (\ 画像ファイ ルとして記録する際に、 前記選択手段により第 1のダイナミックレン ジが選択された場合は、
Figure imgf000068_0001
画像データに対して第 1のダイナ ミックレンジ用の現像処理を前記現像手段により施した画像データを 、 前記
Figure imgf000068_0002
画像データと共に前記
Figure imgf000068_0003
ファイルとして記録し \
前記選択手段により第 2のダイナミックレンジが選択された場合は 、 前記 画像データに対して第 2のダイナミックレンジ用の現像 処理を前記現像手段により施した画像データを、 前記 画像デー 夕と共に前記 画像ファイルとして記録するように制御する制御 手段と、
を有することを特徴とする撮像装置。
[請求項 2] 前記制御手段は、 現像済みの画像データを画像ファイルとして記録 する際に、
前記選択手段により前記第 1のダイナミックレンジが選択された場 合は、 前記撮像手段により取得した
Figure imgf000068_0004
画像データに対して第 1の ダイナミックレンジ用の現像処理を前記現像手段により施した画像デ —夕を第 1の形式の画像ファイルとして記録し、
前記選択手段により前記第 2のダイナミックレンジが選択された場 合は、 前記 八 画像データに対して第 2のダイナミックレンジ用の 現像処理を前記現像手段により施した画像データを第 2の形式の画像 ファイルとして記録するように制御することを特徴とする請求項 1 に 記載の撮像装置。 〇 2020/175231 67 卩(:171? 2020 /006201
[請求項 3] 前記制御手段は、
前記選択手段により前記第 1のダイナミックレンジが選択された場 合は、 前記現像手段により施した画像データを」 巳〇ファイルとし て記録し、
前記選択手段により前記第 2のダイナミックレンジが選択された場 合は、 前記現像手段により施した画像データを 1~1巳 I ファイルとし て記録するように制御することを特徴とする請求項 2に記載の撮像装 置。
[請求項 4] 前記現像手段により現像処理が施された画像データを符号化する符 号化手段を有し、
前記第 1のダイナミックレンジ用の現像処理を施した画像データと 、 前記第 2のダイナミックレンジ用の現像処理を施した画像データと で、 異なる符号化形式で符号化することを特徴とする請求項 2または 3に記載の撮像装置。
[請求項 5] 前記第 1のダイナミックレンジ用の現像処理を施した画像データは
」 巳◦形式で符号化し、 前記第 2のダイナミックレンジ用の現像処 理を施した画像データは 1~1日 0形式で符号化することを特徴とする 請求項 4に記載の撮像装置。
[請求項 6] 前記第 2のダイナミックレンジは前記第 1のダイナミックレンジよ りも広いダイナミックレンジであることを特徴とする請求項 1乃至 5 のいずれか 1項に記載の撮像装置。
[請求項 7] 前記第 1のダイナミックレンジは 3 0 [¾、 前記第 2のダイナミック レンジは 1~1 0 であることを特徴とする請求項 6に記載の撮像装置。
[請求項 8] 前記現像手段は、
前記第 1のダイナミックレンジが選択された場合は、 前記現像手段 により 1色成分が 8ビッ トの画像データが生成されるように現像処理 を施し、
前記第 2のダイナミックレンジが選択された場合は、 前記現像手段 \¥02020/175231 68 卩(:17 2020/006201
により 1色成分が 8ビッ ト超える画像データが生成されるように現像 処理を施す
ことを特徴とする請求項 1乃至 7のいずれか 1項に記載の撮像装置
[請求項 9] 更に、 前記現像処理で得た画像データから、 複数のサイズの画像デ
—夕を生成する生成手段を有し、
前記撮像手段により取得した 画像デー (\ 画像ファイ ルとして記録する際に、 前記制御手段は、 前記生成手段で生成した複 数のサイズの画像データを、 前記 画像データと共に前記 八 画像ファイルとして記録する
ことを特徴とする請求項 1乃至 8のいずれか 1項に記載の撮像装置
[請求項 10] 前記生成手段が生成する複数のサイズには、 少なくとも、 サムネイ ルのサイズ、
Figure imgf000070_0001
八 画像データが表す画像サイズの 2つが含まれるこ とを特徴とする請求項 9に記載の撮像装置。
[請求項 1 1 ] 前記制御手段は、
前記撮像手段により取得した 画像デー (\ 画像ファ イルとして記録する際に、
前記 画像データに対して第 1のダイナミックレンジ用の現 像処理を前記現像手段により施した現像済み画像データを、 前記 八 画像ファイルと異なる画像ファイルとして記録する場合は、 前記第 1のダイナミックレンジ用の現像処理を前記現像手段により施した現 像済み画像データに第 1の符号化形式の圧縮符号化処理を前記符号化 手段により施した圧縮画像データを、 前記 画像ファイル及び前 記画像ファイルに表示用画像としてそれぞれ記録するように制御し、 前記 画像データに対して第 2のダイナミックレンジ用の現 像処理を前記現像手段により施した現像済み画像データを、 前記 八 画像ファイルと異なる画像ファイルとして記録する場合は、 前記第 〇 2020/175231 69 卩(:171? 2020 /006201
2のダイナミックレンジ用の現像処理を前記現像手段により施した現 像済み画像データに第 2の符号化形式の圧縮符号化処理を前記符号化 手段により施した圧縮画像データを、 前記 画像ファイル及び前 記画像ファイルに表示用画像としてそれぞれ記録するように制御する ことを特徴とする請求項 1 に記載の撮像装置。
[請求項 12] 前記制御手段は、
前記 八 画像データに対して前記第 1のダイナミックレンジ用 の現像処理を前記現像手段により施した現像済み画像データに前記第 1の符号化形式の圧縮符号化処理を前記符号化手段により施した圧縮 画像データを前記 8 画像ファイルと異なる画像ファイルとして記 録するように制御し、
前記 八 画像データに対して前記第 2のダイナミックレンジ用 の現像処理を前記現像手段により施した現像済み画像データに前記第 2の符号化形式の圧縮符号化処理を前記符号化手段により施した圧縮 画像データを前記 8 画像ファイルと異なる画像ファイルとして記 録するように制御する
ことを特徴とする請求項 1 1 に記載の撮像装置。
[請求項 13] 前記制御手段は、
前記 八 画像データに対して前記第 1のダイナミックレンジ用 の現像処理を前記現像手段により施した現像済み画像データを前記 八 画像ファイルと異なる第 1のファイル形式の画像ファイルとして 記録し、
前記 八 画像データに対して前記第 2のダイナミックレンジ用 の現像処理を前記現像手段により施した現像済み画像データを前記 八 画像ファイルと異なる第 2のファイル形式の画像ファイルとして 記録するように制御する
ことを特徴とする請求項 1 1 または 1 2に記載の撮像装置。
[請求項 14] 前記制御手段は、 〇 2020/175231 70 卩(:171? 2020 /006201
前記 八 画像データに対して前記第 1のダイナミックレンジ用 の現像処理を前記現像手段により施した現像済み画像データを前記 八 画像ファイルと異なる第 2のファイル形式の画像ファイルとして 記録し、
前記 八 画像データに対して前記第 2のダイナミックレンジ用 の現像処理を前記現像手段により施した現像済み画像データを前記 八 画像ファイルと異なる前記第 2のファイル形式の画像ファイルと して記録するように制御する
ことを特徴とする請求項 1 1 または 1 2に記載の撮像装置。
[請求項 15] 前記制御手段は、
前記撮像手段により取得した 画像デー (\ 画像ファ イルとして記録する際に、 前記 画像ファイルに前記 画像 データと共に記録する表示用画像の符号化形式を、 前記選択手段によ り選択されたダイナミックレンジに応じて切り替えるように制御する ことを特徴とする請求項 1 1ないし 1 4のいずれか 1項に記載の撮像 装置。
[請求項 16] 前記制御手段は、
前記 画像データに対して前記現像手段により現像処理を施 した現像済み画像データを、 前記 8 画像ファイルと異なる画像フ ァイルとして記録する場合は、 前記画像ファイルに表示用画像として 記録される画像データを、 前記 画像データの表示用画像データ として記録するように制御する個を特徴とする請求項 1 1ないし 1 5 のいずれか 1項に記載の撮像装置。
[請求項 17] 前記制御手段は、
前記 画像データに対して前記現像手段により現像処理を施 した現像済み画像データを、 前記 8 画像ファイルと異なる画像フ ァイルとして記録する場合に、 前記画像ファイルの本画像として記録 される現像済み画像データを、 前記 \/\/画像ファイルの表示用画像 〇 2020/175231 71 卩(:171? 2020 /006201
として記録するように制御することを特徴とする請求項 1 1ないし 1 6のいずれか 1項に記載の撮像装置。
[請求項 18] 撮像手段を有する撮像装置の制御方法であって、
ダイナミックレンジを選択する選択工程と、
前記撮像手段で得た 8 画像データに対して現像処理を施す現像 工程と、
前記撮像手段により取得した 画像デー (\ 画像ファイ ルとして記録する際に、 前記選択工程により第 1のダイナミックレン ジが選択された場合は、
Figure imgf000073_0001
画像データに対して第 1のダイナ ミックレンジ用の現像処理を前記現像工程により施した画像データを 、 前記
Figure imgf000073_0002
画像データと共に前記
Figure imgf000073_0003
ファイルとして記録し 、 前記選択工程により第 2のダイナミックレンジが選択された場合は 、 前記 画像データに対して第 2のダイナミックレンジ用の現像 処理を前記現像工程により施した画像データを、 前記 画像デー 夕と共に前記 画像ファイルとして記録するように制御する制御 工程と、
を有することを特徴とする撮像装置の制御方法。
[請求項 19] 撮像手段を有するコンピュータに読み込ませ実行させることで、 前 記コンビュータに、
ダイナミックレンジを選択する選択工程と、
前記撮像手段で得た 8 画像データに対して現像処理を施す現像 工程と、
前記撮像手段により取得した 画像デー (\ 画像ファイ ルとして記録する際に、 前記選択工程により第 1のダイナミックレン ジが選択された場合は、
Figure imgf000073_0004
画像データに対して第 1のダイナ ミックレンジ用の現像処理を前記現像工程により施した画像データを 、 前記
Figure imgf000073_0005
画像データと共に前記
Figure imgf000073_0006
ファイルとして記録し 、 前記選択工程により第 2のダイナミックレンジが選択された場合は 〇 2020/175231 72 卩(:171? 2020 /006201
、 前記 画像データに対して第 2のダイナミックレンジ用の現像 処理を前記現像工程により施した画像データを、 前記 画像デー 夕と共に前記 画像ファイルとして記録するように制御する制御 工程と、
を実行させるためのプログラム。
PCT/JP2020/006201 2019-02-28 2020-02-18 撮像装置及びその制御方法及びプログラム WO2020175231A1 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
DE112020001019.8T DE112020001019T5 (de) 2019-02-28 2020-02-18 Bilderfassungsvorrichtung, Verfahren zur Steuerung dieser und Programm
GB2111298.2A GB2597141B (en) 2019-02-28 2020-02-18 Image capturing apparatus, method of controlling the same, and program
CN202311008646.XA CN116962609A (zh) 2019-02-28 2020-02-18 摄像设备及其控制方法和存储介质
CN202080016877.3A CN113491103B (zh) 2019-02-28 2020-02-18 摄像设备及其控制方法和存储介质
US17/406,449 US11871124B2 (en) 2019-02-28 2021-08-19 Image capturing apparatus, method of controlling the same, and non-transitory computer-readable storage medium
US18/502,548 US20240080574A1 (en) 2019-02-28 2023-11-06 Image capturing apparatus, method of controlling the same, and non-transitory computer-readable storage medium

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2019036396A JP7185563B2 (ja) 2019-02-28 2019-02-28 撮像装置及びその制御方法及びプログラム
JP2019-036396 2019-02-28
JP2019-085969 2019-04-26
JP2019085969A JP7313893B2 (ja) 2019-04-26 2019-04-26 撮像装置及び記録制御方法及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/406,449 Continuation US11871124B2 (en) 2019-02-28 2021-08-19 Image capturing apparatus, method of controlling the same, and non-transitory computer-readable storage medium

Publications (1)

Publication Number Publication Date
WO2020175231A1 true WO2020175231A1 (ja) 2020-09-03

Family

ID=72239889

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/006201 WO2020175231A1 (ja) 2019-02-28 2020-02-18 撮像装置及びその制御方法及びプログラム

Country Status (5)

Country Link
US (2) US11871124B2 (ja)
CN (2) CN116962609A (ja)
DE (1) DE112020001019T5 (ja)
GB (1) GB2597141B (ja)
WO (1) WO2020175231A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006229474A (ja) * 2005-02-16 2006-08-31 Canon Inc 撮像装置及びその制御方法
JP2015179909A (ja) * 2014-03-18 2015-10-08 キヤノン株式会社 撮像装置及びその制御方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4720387B2 (ja) * 2005-09-07 2011-07-13 ソニー株式会社 撮像装置、画像処理装置、および方法、並びにコンピュータ・プログラム
CN100525396C (zh) * 2006-09-28 2009-08-05 精工爱普生株式会社 图像显示控制装置、摄影装置以及图像显示方法
US8269852B2 (en) * 2007-09-14 2012-09-18 Ricoh Company, Ltd. Imaging apparatus and imaging method
US20090086074A1 (en) 2007-09-27 2009-04-02 Omnivision Technologies, Inc. Dual mode camera solution apparatus, system, and method
JP2009147549A (ja) * 2007-12-12 2009-07-02 Samsung Techwin Co Ltd 動画像記録装置、動画像再生装置及びプログラム
JP5383360B2 (ja) * 2009-07-15 2014-01-08 キヤノン株式会社 画像処理装置およびその制御方法
US9036042B2 (en) * 2011-04-15 2015-05-19 Dolby Laboratories Licensing Corporation Encoding, decoding, and representing high dynamic range images
CN102970549B (zh) * 2012-09-20 2015-03-18 华为技术有限公司 图像处理方法及装置
JP6091229B2 (ja) * 2013-01-31 2017-03-08 キヤノン株式会社 撮像装置、その制御方法及びプログラム
JP6366268B2 (ja) * 2013-12-25 2018-08-01 キヤノン株式会社 撮像装置及びその制御方法
JP6373056B2 (ja) * 2014-05-14 2018-08-15 キヤノン株式会社 撮像装置、撮像装置の制御方法及び画像処理方法
CN105528776B (zh) * 2015-08-07 2019-05-10 上海仙梦软件技术有限公司 针对jpeg图像格式的显著性细节保持的质量评价方法
EP3394850B1 (en) * 2015-12-21 2020-05-13 Koninklijke Philips N.V. Optimizing high dynamic range images for particular displays
JP6647162B2 (ja) 2016-07-08 2020-02-14 三菱電機株式会社 映像記録装置、映像再生装置、記録方法、及び再生方法
US10148871B2 (en) * 2016-12-07 2018-12-04 Microsoft Technology Licensing, Llc Advanced raw conversion to produce high dynamic range, wide color gamut output
CN108540781A (zh) * 2017-03-03 2018-09-14 扬智科技股份有限公司 影像信号处理装置与影像信号处理方法
JP2019036396A (ja) 2017-08-10 2019-03-07 株式会社東海理化電機製作所 コネクタ
JP6935272B2 (ja) * 2017-08-29 2021-09-15 キヤノン株式会社 ハイダイナミックレンジ画像を作成する装置、方法、及びプログラム
JP6836492B2 (ja) 2017-11-09 2021-03-03 株式会社神戸製鋼所 液冷式スクリュ圧縮機

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006229474A (ja) * 2005-02-16 2006-08-31 Canon Inc 撮像装置及びその制御方法
JP2015179909A (ja) * 2014-03-18 2015-10-08 キヤノン株式会社 撮像装置及びその制御方法

Also Published As

Publication number Publication date
CN116962609A (zh) 2023-10-27
DE112020001019T5 (de) 2021-11-18
GB2597141B (en) 2022-10-26
US11871124B2 (en) 2024-01-09
US20210385375A1 (en) 2021-12-09
US20240080574A1 (en) 2024-03-07
GB2597141A (en) 2022-01-19
CN113491103B (zh) 2023-08-15
CN113491103A (zh) 2021-10-08

Similar Documents

Publication Publication Date Title
WO2020175298A1 (ja) 撮像装置、画像処理装置、それらの制御方法、プログラム
US8144230B2 (en) Camera, storage medium having stored therein camera control program, and camera control method
US20020171747A1 (en) Image capturing apparatus, and method of display-control thereof
JP7365133B2 (ja) 通信装置およびその制御方法、プログラム
JP2006115475A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
US11438523B2 (en) Display control apparatus, display control method, and a non-transitory computer-readable medium
US8723973B2 (en) Imaging apparatus using a recording medium with a function to transmit image data recorded in a predetermined folder to an external device, and recording reduced image data in a folder different from the predetermined folder after transmitting the image data, and control method and non-transitory computer readable storage medium thereof
US20030071907A1 (en) Image taking system having a digital camera and a remote controller
JP2024015185A (ja) 撮像装置及びその制御方法及びプログラム
JP7250628B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP2011029879A (ja) 撮像装置および撮像方法
WO2020175231A1 (ja) 撮像装置及びその制御方法及びプログラム
JP4678273B2 (ja) 撮像装置、動画記憶方法および動画記憶プログラム
JP2006074710A (ja) デジタルカメラ及びカメラシステム
JP2010021908A (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP2002330322A (ja) 電子カメラ
JP2001197346A (ja) 電子カメラ
JP2004078075A (ja) オンスクリーンディスプレイ装置
JP2002330387A (ja) 電子カメラ
JP2020141334A (ja) 撮像装置及びその制御方法及びプログラム
JP2007151189A (ja) 撮像装置及び撮像処理方法
JP2010198212A (ja) 画像表示装置、撮像装置、画像表示方法及び画像表示プログラム
JP2005204258A (ja) 撮像装置
JP2016181798A (ja) 撮像装置及びその制御方法
JP2008141743A (ja) 撮影装置および方法並びにプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20763382

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 20763382

Country of ref document: EP

Kind code of ref document: A1