WO2017002639A1 - イメージセンサ、および電子機器 - Google Patents

イメージセンサ、および電子機器 Download PDF

Info

Publication number
WO2017002639A1
WO2017002639A1 PCT/JP2016/068050 JP2016068050W WO2017002639A1 WO 2017002639 A1 WO2017002639 A1 WO 2017002639A1 JP 2016068050 W JP2016068050 W JP 2016068050W WO 2017002639 A1 WO2017002639 A1 WO 2017002639A1
Authority
WO
WIPO (PCT)
Prior art keywords
size
image
full
unit
processed image
Prior art date
Application number
PCT/JP2016/068050
Other languages
English (en)
French (fr)
Inventor
弘二 榎
住広　博
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2017526282A priority Critical patent/JP6764572B2/ja
Priority to CN201680036414.7A priority patent/CN107736016B/zh
Priority to US15/578,430 priority patent/US10764516B2/en
Publication of WO2017002639A1 publication Critical patent/WO2017002639A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array

Definitions

  • the present disclosure relates to an image sensor and an electronic device, and more particularly, to an image sensor and an electronic device that can output a plurality of image data according to a timing according to a request from a system.
  • an image sensor equipped with an image sensor such as a CMOS or CCD is equipped with a storage having a capacity sufficient to hold pixel data for all pixels (hereinafter also referred to as a full-size original image) as it is. And cost were problematic and difficult.
  • the present disclosure has been made in view of such a situation, and enables a plurality of different image data based on a full-size original image to be output from an image sensor equipped with a storage.
  • An image sensor includes a pixel unit that generates a full-size original image corresponding to incident light by a large number of photoelectric conversion elements, and a holding unit having a capacity capable of holding at least the full-size original image.
  • An image processing unit that generates a full-size processed image by performing predetermined image processing on the full-size original image read from the holding unit, and changes the size of the full-size processed image
  • a change unit that generates a size processed image, and outputs the full size processed image and the changed size processed image.
  • the holding unit has a capacity capable of holding at least the full-size original image, the full-size processed image, and the changed-size processed image
  • the pixel unit includes The generated full-size original image is held in the holding unit, and the image processing unit generates the full-size process generated by performing predetermined image processing on the full-size original image read from the holding unit.
  • An image is held in the holding unit, and the changing unit can hold the changed size processed image generated by changing the size of the full size processed image in the holding unit, and
  • the image processing apparatus may further include a selection output unit that selectively reads out and outputs the full size processed image or the changed size processed image.
  • the pixel unit holds the generated full-size original image in the holding unit, and the image processing unit reads the full-size original image read from the holding unit. And outputs the full-size processed image generated by performing predetermined image processing to the change unit, and the change unit supplies the size of the full-size processed image supplied from the image processing unit.
  • the modified size processed image generated by changing the value can be output.
  • the pixel unit holds the generated full-size original image in the holding unit, and the image processing unit reads the full-size original image read from the holding unit.
  • Supplying the full-size processed image generated by performing predetermined image processing to the changing unit, and the changing unit changes the size of the full-size processed image supplied from the image processing unit.
  • the full size processed image supplied from the image processing unit can be output as it is.
  • the holding unit has a capacity capable of holding at least the full-size original image and the full-size processed image, and the pixel unit generates the generated full-size image.
  • An original image is held in the holding unit, and the image processing unit stores the full-size processed image generated by performing predetermined image processing on the full-size original image read from the holding unit in the holding unit.
  • the changing unit outputs the changed size processed image generated by changing the size of the full size processed image read from the holding unit, and outputs the full size processed image read from the holding unit. It can be output as it is.
  • the holding unit has a capacity capable of holding at least the full-size original image and the full-size processed image, and the pixel unit generates the generated full-size image.
  • An original image is held in the holding unit, and the image processing unit sends the full-size processed image generated by performing predetermined image processing on the full-size original image read from the holding unit to the changing unit.
  • the holding unit outputs the changed size processed image generated by changing the size of the full size processed image supplied from the image processing unit and from the holding unit.
  • the read full-size processed image can be output as it is.
  • the holding unit has a capacity capable of holding at least the full-size original image and the changed size processed image, and the pixel unit generates the generated full size
  • the original image is held in the holding unit
  • the image processing unit outputs the full-size processed image generated by performing predetermined image processing on the full-size original image read from the holding unit
  • the changing unit can hold the changed size processed image generated by changing the size of the full size processed image supplied from the image processing unit in the holding unit
  • the image processing apparatus may further include an output unit that selectively reads out and outputs the changed size processed image from the holding unit.
  • the image sensor may further include a reduction unit that generates a reduced original image by reducing the full-size original image generated by the pixel unit
  • the holding unit includes:
  • the pixel unit has a capacity capable of holding at least the full-size original image and the reduced original image, and the pixel unit supplies the generated full-size original image to the reduction unit and holds the generated full-size original image in the holding unit.
  • the holding unit holds the reduced original image generated by reducing the full-size original image in the holding unit, and the image processing unit also applies a predetermined image to the reduced original image read from the holding unit. By performing processing, a reduced processed image is generated and supplied to the changing unit, and predetermined image processing is performed on the full-size original image read from the holding unit.
  • the full size processed image generated by the image processing unit is supplied to the changing unit, and the changing unit generates the changed size processed image by changing the size of the reduced processing image supplied from the image processing unit.
  • the full-size processed image supplied from the image processing unit can be output as it is.
  • the electronic device is a pixel unit in which an image sensor is mounted on the electronic device, and the image sensor generates a full-size original image corresponding to incident light using a large number of photoelectric conversion elements. And at least a holding unit having a capacity capable of holding the full-size original image, and image processing for generating a full-size processed image by performing predetermined image processing on the full-size original image read from the holding unit And a changing unit that generates a changed size processed image by changing the size of the full size processed image, and outputs the full size processed image and the changed size processed image.
  • a full-size original image corresponding to incident light is generated and held in a holding unit, and a predetermined image is obtained with respect to the full-size original image read from the holding unit
  • a full-size processed image is generated by performing processing, a changed-size processed image is generated by changing the size of the full-sized processed image, and the full-sized processed image and the changed-size processed image are output.
  • the first aspect of the present disclosure it is possible to output a plurality of different image data based on the full-size original image.
  • a plurality of different image data based on the full-size original image can be output from the mounted image sensor.
  • FIG. 1 It is a block diagram showing the 1st structural example of the image sensor to which this indication is applied.
  • 3 is a flowchart illustrating image output processing by the image sensor of FIG. 1. It is a block diagram showing the 2nd structural example of the image sensor to which this indication is applied. It is a flowchart explaining the image output process by the image sensor of FIG. It is a block diagram showing the 3rd structural example of the image sensor to which this indication is applied. It is a flowchart explaining the image output process by the image sensor of FIG. It is a block diagram showing the 4th structural example of the image sensor to which this indication is applied. It is a flowchart explaining the image output process by the image sensor of FIG.
  • FIG. 10 is a flowchart illustrating image output processing by the image sensor of FIG. 9. It is a block diagram showing the 6th structural example of the image sensor to which this indication is applied.
  • 12 is a flowchart illustrating image output processing by the image sensor in FIG. 11. It is a block diagram showing the 7th structural example of the image sensor to which this indication is applied. It is a flowchart explaining the image output process by the image sensor of FIG. It is a figure showing an example of use of an electronic device to which this indication is applied.
  • FIG. 1 shows a configuration example of a first configuration example of the image sensor according to the first embodiment.
  • the image sensor 10 includes a pixel unit 11, a DRAM 12, an image processing unit 13, and a size changing unit 14.
  • the pixel unit 11 includes a large number of photoelectric conversion elements that generate pixel data by photoelectric conversion according to incident light, and the DRAM 12 holds a full-size original image P1 obtained by imaging.
  • the DRAM 12 is a storage having a capacity that can hold at least the full-size original image P1 and corresponds to writing from the pixel unit 11 and reading from the image processing unit 13.
  • the image processing unit 13 performs predetermined image processing such as defective pixel correction on the full-size original image P1, and outputs the resulting full-size processed image P3 to the subsequent stage.
  • predetermined image processing such as defective pixel correction on the full-size original image P1
  • the specific contents of the image processing in the image processing unit 13 can be changed as appropriate according to the requirements of the system in which the image sensor 10 is mounted.
  • the size changing unit 14 reduces the size of the full-size processed image P3 to a predetermined size, and outputs the reduced-size processed image P2 obtained as a result to the subsequent stage. Note that the size changing unit 14 can increase or deform the size of the full-size processed image P3 to a predetermined size according to the request of the system in which the image sensor 10 is mounted.
  • FIG. 2 is a flowchart for explaining image output processing by the image sensor 10.
  • step S11 the pixel unit 11 generates a full-size original image P1 by exposure and holds the full-size original image P1 in the DRAM 12.
  • step S12 the image processing unit 13 reads the full-size original image P1 from the DRAM 12, performs predetermined image processing in step S13, and changes the size of the resulting full-size processed image P3 in step S14. And output to the outside of the image sensor 10.
  • step S15 the size changing unit 14 reduces the full size processed image P3 to a predetermined size, and outputs the reduced size processed image P2 obtained as a result to the outside of the image sensor 10 in step S16. Thus, the image output process by the image sensor 10 is completed.
  • the image sensor 10 can output the full-size processed image P3 and the reduced-size processed image P2 almost simultaneously by reading the full-size original image P1 from the DRAM 12 only once.
  • the output of the pixel unit 11 (full-size original image P ⁇ b> 1) may be output to the image processing unit 13 without going through the DRAM 12.
  • FIG. 3 shows a configuration example of a second configuration example of the image sensor according to the second embodiment.
  • the image sensor 20 includes a pixel unit 21, a DRAM 22, an image processing unit 23, and a size changing unit 24.
  • the pixel unit 21 includes a large number of photoelectric conversion elements that generate pixel data by photoelectric conversion according to incident light and the like, and causes the DRAM 22 to hold a full-size original image P1 obtained by imaging.
  • the DRAM 22 is a storage having a capacity sufficient to hold at least the full-size original image P1 and corresponds to writing from the pixel unit 21 and reading from the image processing unit 23.
  • the image processing unit 23 performs predetermined image processing such as defective pixel correction on the full-size original image P1, and outputs the resulting full-size processed image P3 to the subsequent stage. Note that the specific contents of the image processing in the image processing unit 23 can be changed as appropriate according to the requirements of the system in which the image sensor 20 is mounted.
  • the size changing unit 24 reduces the size of the full-size processed image P3 to a predetermined size, and outputs the reduced-size processed image P2 obtained as a result to the subsequent stage. Note that the size changing unit 24 can also output the full-size processed image P3 as it is to the subsequent stage. Further, the size changing unit 24 can enlarge or deform the size of the full-size processed image P3 to a predetermined size according to a request of a system in which the image sensor 20 is mounted.
  • FIG. 4 is a flowchart for explaining image output processing by the image sensor 20.
  • step S21 the pixel unit 21 generates a full-size original image P1 by exposure, and holds the full-size original image P1 in the DRAM 22.
  • step S22 the image processing unit 23 reads the full-size original image P1 for the first time from the DRAM 22.
  • the image processing unit 23 performs predetermined image processing, and the resulting full-size processed image P3 is used as the size changing unit. 24.
  • the size changing unit 24 reduces the full size processed image P3 to a predetermined size, and outputs the reduced size processed image P2 obtained as a result to the outside of the image sensor 20 in step S25.
  • step S26 the image processing unit 23 reads the full-size original image P1 for the second time from the DRAM 22.
  • the image processing unit 23 performs predetermined image processing, and the resulting full-size processed image P3 is the size changing unit. 24.
  • step S28 the size changing unit 24 outputs the full-size processed image P3 as it is to the outside of the image sensor 20. Thus, the image output process by the image sensor 20 is completed.
  • the reduced size processed image P2 and the full size processed image P3 can be sequentially output to the outside of the image sensor 20.
  • the full size processed image P3 may be output first, and then the reduced size processed image P2 may be output.
  • FIG. 5 shows a configuration example of a third configuration example of the image sensor according to the third embodiment.
  • the image sensor 30 includes a pixel unit 31, a DRAM 32, an image processing unit 33, and a size changing unit 34.
  • the pixel unit 31 includes a large number of photoelectric conversion elements that generate pixel data by photoelectric conversion according to incident light, and the DRAM 32 holds a full-size original image P1 obtained by imaging.
  • the DRAM 32 is a storage having a capacity sufficient to hold at least the full-size original image P1 and the full-size processed image P3.
  • the DRAM 32 writes data from the pixel unit 31 and the image processing unit 33, and outputs data from the image processing unit 33 and the size changing unit 34. Corresponds to reading.
  • the image processing unit 33 performs predetermined image processing such as defective pixel correction on the full-size original image P1, and outputs and holds the full-size processed image P3 obtained as a result to the DRAM 32.
  • the specific contents of the image processing in the image processing unit 33 can be changed as appropriate according to the requirements of the system in which the image sensor 30 is mounted.
  • the size changing unit 34 reads the full size processed image P3 from the DRAM 32, reduces the size to a predetermined size, generates a reduced size processed image P2, and outputs it to the subsequent stage. Note that the size changing unit 34 can also output the full-size processed image P3 as it is to the subsequent stage. Further, the size changing unit 34 can enlarge or deform the size of the full-size processed image P3 to a predetermined size according to a request of a system in which the image sensor 30 is mounted.
  • FIG. 6 is a flowchart for explaining image output processing by the image sensor 30.
  • step S31 the pixel unit 31 generates a full-size original image P1 by exposure and holds the full-size original image P1 in the DRAM 32.
  • step S32 the image processing unit 33 reads the full-size original image P1 from the DRAM 32, performs predetermined image processing in step S33, and obtains the full-size processed image P3 obtained as a result in the DRAM 32 in step S34. To hold.
  • step S35 the size changing unit 34 reads the full-size processed image P3 for the first time from the DRAM 32.
  • the size changing unit 34 reduces the image to a predetermined size.
  • the resulting reduced size processed image P2 is set as step S37. Output to the outside of the image sensor 30.
  • step S38 the size changing unit 34 reads the full-size processed image P3 from the DRAM 32 for the second time, and outputs it to the outside of the image sensor 30 as it is in step S39. Thus, the image output process by the image sensor 30 is completed.
  • the reduced size processed image P2 and the full size processed image P3 can be sequentially output from the image sensor 30 to the outside.
  • the full size processed image P3 may be output first, and then the reduced size processed image P2 may be output.
  • the predetermined image processing for the full-size original image P ⁇ b> 1 only needs to be performed once. Therefore, compared to the case where the image processing for the full-size original image P ⁇ b> 1 is performed twice as in the image sensor 20, image processing is required. Power consumption can be reduced.
  • FIG. 7 shows a configuration example of a fourth configuration example of the image sensor according to the fourth embodiment.
  • the image sensor 40 includes a pixel unit 41, a DRAM 42, an image processing unit 43, and a size changing unit 44.
  • the pixel unit 41 includes a large number of photoelectric conversion elements that generate pixel data by photoelectric conversion according to incident light and the like, and causes the DRAM 42 to hold a full-size original image P1 obtained by imaging.
  • the DRAM 42 is a storage having a capacity sufficient to hold at least the full-size original image P1 and the full-size processed image P3, and writing from the pixel unit 41 and the image processing unit 43, and from the image processing unit 43 and the size changing unit 44. Corresponds to reading.
  • the image processing unit 43 performs predetermined image processing such as defective pixel correction on the full-size original image P1, holds the resulting full-size processed image P3 in the DRAM 42, and outputs it to the size changing unit 44. .
  • the specific contents of the image processing in the image processing unit 43 can be changed as appropriate according to the requirements of the system in which the image sensor 40 is mounted.
  • the size changing unit 44 reduces the size of the full size processed image P3 input from the image processing unit 43 to a predetermined size, generates a reduced size processed image P2, and outputs it to the subsequent stage.
  • the size changing unit 44 can also read the full-size processed image P3 from the DRAM 42 and output it as it is to the subsequent stage. Further, the size changing unit 44 can enlarge or deform the size of the full-size processed image P3 to a predetermined size according to a request of a system in which the image sensor 40 is mounted.
  • FIG. 8 is a flowchart for explaining image output processing by the image sensor 40.
  • step S41 the pixel unit 41 generates a full-size original image P1 by exposure, and holds the full-size original image P1 in the DRAM 42.
  • step S42 the image processing unit 43 reads the full-size original image P1 from the DRAM 42.
  • step S43 the image processing unit 43 performs predetermined image processing.
  • step S44 the resulting full-size processed image P3 is sized. The data is output to the changing unit 44 and held in the DRAM 32.
  • step S45 the size changing unit 44 reduces the full size processed image P3 to a predetermined size, and outputs the reduced size processed image P2 obtained as a result to the outside of the image sensor 40.
  • step S46 the size changing unit 44 reads the full-size processed image P3 from the DRAM 42, and outputs it to the outside of the image sensor 40 as it is in step S47. Thus, the image output process by the image sensor 40 is completed.
  • the reduced size processed image P2 and the full size processed image P3 can be sequentially output from the image sensor 40 to the outside.
  • the predetermined image processing for the full-size original image P1 may be performed only once. Therefore, the image processing is performed in comparison with the case where the predetermined image processing for the full-size original image P1 is performed twice as in the image sensor 20. It is possible to suppress the power consumption required for.
  • FIG. 9 shows a configuration example of a fifth configuration example of the image sensor according to the fifth embodiment.
  • the image sensor 50 includes a pixel unit 51, a DRAM 52, an image processing unit 53, a size changing unit 54, and an output selecting unit 55.
  • the pixel unit 51 includes a large number of photoelectric conversion elements that generate pixel data by photoelectric conversion according to incident light, and the DRAM 52 holds a full-size original image P1 obtained by imaging.
  • the DRAM 52 is a storage having a capacity sufficient to hold at least the full-size original image P1 and the reduced size processed image P2, and writing from the pixel unit 51 and the size changing unit 54, and from the image processing unit 53 and the output selecting unit 55. Corresponds to reading.
  • the image processing unit 53 performs predetermined image processing such as defective pixel correction on the full-size original image P1, and outputs the full-size processed image P3 obtained as a result to the size changing unit 54 and the output selecting unit 55.
  • the specific contents of the image processing in the image processing unit 53 can be changed as appropriate according to the requirements of the system in which the image sensor 50 is mounted.
  • the size changing unit 54 reduces the size of the full size processed image P3 input from the image processing unit 53 to a predetermined size, and causes the DRAM 52 to hold the reduced size processed image P2 obtained as a result. Further, the size changing unit 54 can enlarge or deform the size of the full-size processed image P3 to a predetermined size according to a request of a system in which the image sensor 50 is mounted.
  • the output selection unit 55 outputs the full-size processed image P3 input from the image processing unit 53 to the subsequent stage.
  • the output selection unit 55 reads the reduced size processed image P2 from the DRAM 52 and outputs it to the subsequent stage.
  • FIG. 10 is a flowchart for explaining image output processing by the image sensor 50.
  • step S51 the pixel unit 51 generates a full-size original image P1 by exposure and holds the full-size original image P1 in the DRAM 52.
  • step S52 the image processing unit 53 reads the full-size original image P1 from the DRAM 52, performs predetermined image processing in step S53, and outputs the full-size processed image P3 obtained as a result thereof to the size changing unit 54 and the output.
  • the data is output to the selection unit 55.
  • step S54 the output selection unit 55 outputs the full-size processed image P3 input from the image processing unit 53 to the outside of the image sensor 50.
  • step S55 the size changing unit 44 reduces the full size processed image P3 to a predetermined size, and causes the DRAM 52 to hold the reduced size processed image P2 obtained as a result.
  • step S ⁇ b> 56 the output selection unit 55 reads the reduced size processed image P ⁇ b> 2 from the DRAM 52 and outputs it to the outside of the image sensor 50. Thus, the image output process by the image sensor 50 is completed.
  • the full size processed image P3 and the reduced size processed image P2 can be sequentially output from the image sensor 50 to the outside.
  • the predetermined image processing for the full-size original image P1 may be performed only once, so that the image processing is performed as compared with the case where the predetermined image processing for the full-size original image P1 is performed twice as in the image sensor 20. It is possible to suppress the power consumption required for.
  • FIG. 11 shows a configuration example of a sixth configuration example of the image sensor according to the sixth embodiment.
  • the image sensor 60 includes a pixel unit 61, a DRAM 62, a 1/4 reduction unit 63, an image processing unit 64, and a size changing unit 65.
  • the pixel unit 61 includes a large number of photoelectric conversion elements that generate pixel data by photoelectric conversion according to incident light, and outputs a full-size original image P1 obtained by imaging to the 1/4 reduction unit 63 and also to the DRAM 62. Hold.
  • the DRAM 62 is a storage having a capacity sufficient to hold at least the full-size original image P1 and the 1 / 4-size original image P4, and writing from the pixel unit 61 and 1/4 reduction unit 63 and reading from the image processing unit 64 Corresponding to
  • the 1/4 reduction unit 63 generates the 1/4 size original image P4 by reducing the vertical and horizontal sizes of the full size original image P1 to 1/2, and holds it in the DRAM 62.
  • the image processing unit 64 reads the 1/4 size original image P4 from the DRAM 62, performs predetermined image processing such as defective pixel correction, and sends the 1/4 size processed image (not shown) obtained as a result to the size changing unit 65. Output.
  • the image processing unit 64 reads the full-size original image P1 from the DRAM 62, performs predetermined image processing such as defective pixel correction, and outputs the resulting full-size processed image P3 to the size changing unit 65.
  • the size changing unit 65 converts the 1/4 size processed image input from the image processing unit 64 into a predetermined size, and outputs the reduced size processed image P2 obtained as a result to the subsequent stage.
  • the size changing unit 65 outputs the full-size processed image P3 input from the image processing unit 64 as it is to the subsequent stage.
  • FIG. 12 is a flowchart for explaining image output processing by the image sensor 60.
  • step S61 the pixel unit 61 generates a full-size original image P1 by exposure, outputs the full-size original image P1 to the 1/4 reduction unit 63, and holds it in the DRAM 62.
  • the 1/4 reduction unit 63 generates a 1/4 size original image P4 from the full size original image P1 and holds it in the DRAM 62.
  • step S62 the image processing unit 64 reads the 1/4 size original image P4 from the DRAM 62, performs predetermined image processing in step S63, and outputs the 1/4 size processed image obtained as a result to the size changing unit 65. To do.
  • step S64 the size changing unit 65 converts the 1/4 size processed image input from the image processing unit 64 into a predetermined size, and the reduced size processed image P2 obtained as a result is converted to an image sensor in step S65. 60 to the outside.
  • step S66 the image processing unit 64 reads the full-size original image P1 from the DRAM 62, performs predetermined image processing in step S67, and outputs the resulting full-size processed image P3 to the size changing unit 65.
  • step S ⁇ b> 68 the size changing unit 65 outputs the full size processed image P ⁇ b> 3 input from the image processing unit 64 as it is to the outside of the image sensor 60. Thus, the image output process by the image sensor 60 is completed.
  • the full size processed image P3 and the reduced size processed image P2 can be sequentially output from the image sensor 40 to the outside.
  • the 1/4 reduction unit 63 may reduce the full-size original image P1 to the same size as the reduced size processed image P2 required by the system in which the image sensor 60 is mounted. In that case, the size converter 65 can be omitted.
  • FIG. 13 shows a configuration example of a seventh configuration example of the image sensor according to the seventh embodiment.
  • the image sensor 70 includes a pixel unit 71, a DRAM 72, an image processing unit 73, a size changing unit 74, and an output selecting unit 75.
  • the pixel unit 71 includes a large number of photoelectric conversion elements that generate pixel data by photoelectric conversion according to incident light, and the DRAM 72 holds a full-size original image P1 obtained by imaging.
  • the DRAM 72 is a storage having a capacity sufficient to hold at least the full-size original image P1, the reduced-size processed image P2, and the full-size processed image P3, and writing from the pixel unit 71, the image processing unit 73, and the size changing unit 74 Corresponds to reading from the image processing unit 73 and the output selection unit 75.
  • the image processing unit 73 reads the full-size original image P1 from the DRAM 72, performs predetermined image processing such as defective pixel correction, and outputs the resulting full-size processed image P3 to the size changing unit 74 and also to the DRAM 72. Hold. Note that the specific contents of the image processing in the image processing unit 73 can be changed as appropriate according to the requirements of the system in which the image sensor 70 is mounted.
  • the size changing unit 74 reduces the size of the full size processed image P3 input from the image processing unit 73 to a predetermined size, and causes the DRAM 72 to hold the reduced size processed image P2 obtained as a result. Further, the size changing unit 74 can enlarge or deform the size of the full-size processed image P3 to a predetermined size according to a request of a system in which the image sensor 70 is mounted.
  • the output selection unit 75 selectively reads out the reduced size processed image P2 or the full size processed image P3 held in the DRAM 72 and outputs it to the subsequent stage.
  • FIG. 14 is a flowchart for explaining image output processing by the image sensor 70.
  • step S71 the pixel unit 71 generates a full-size original image P1 by exposure, and holds the full-size original image P1 in the DRAM 72.
  • step S72 the image processing unit 73 reads the full-size original image P1 from the DRAM 72, performs predetermined image processing in step S73, and obtains the full-size processed image P3 obtained as a result in step S74.
  • the data is output to the changing unit 74 and held in the DRAM 72.
  • the size changing unit 44 reduces the full-size processed image P3 to a predetermined size and causes the DRAM 72 to hold the reduced-size processed image P2 obtained as a result.
  • step S75 the output selection unit 75 reads the reduced size processed image P2 from the DRAM 72 and outputs it to the outside of the image sensor 70.
  • step S ⁇ b> 76 the output selection unit 75 reads the full size processed image P ⁇ b> 3 from the DRAM 72 and outputs it to the outside of the image sensor 70. Thus, the image output process by the image sensor 70 is completed.
  • the reduced size processed image P2 and the full size processed image P3 can be sequentially output from the image sensor 70 to the outside.
  • the full size processed image P3 may be output first, and then the reduced size processed image P2 may be output.
  • a plurality of different image data based on the full-size original image can be output.
  • a still image composed of all pixels can be output during moving image shooting,
  • the present invention can be used for the purpose of simultaneously outputting a preview image in which pixels are thinned out and a recording all pixel image.
  • FIG. 15 shows a usage example in which the image sensors 10 to 70 are used.
  • the image sensors 10 to 70 described above can be mounted on various electronic devices that sense light such as visible light, infrared light, ultraviolet light, and X-rays as follows.
  • Devices for taking images for viewing such as digital cameras and mobile devices with camera functions
  • Devices used for traffic such as in-vehicle sensors that capture the back, surroundings, and interiors of vehicles, surveillance cameras that monitor traveling vehicles and roads, and ranging sensors that measure distances between vehicles, etc.
  • Equipment used for home appliances such as TVs, refrigerators, air conditioners, etc. to take pictures and operate the equipment according to the gestures ⁇ Endoscopes, equipment that performs blood vessel photography by receiving infrared light, etc.
  • Equipment used for medical and health care ⁇ Security equipment such as security surveillance cameras and personal authentication cameras ⁇ Skin measuring instrument for photographing skin and scalp photography Such as a microscope to do beauty Equipment used for sports-Equipment used for sports such as action cameras and wearable cameras for sports applications-Used for agriculture such as cameras for monitoring the condition of fields and crops apparatus

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

本開示は、イメージセンサからフルサイズ原画像に基づく異なる複数の画像データを出力することができるようにするイメージセンサ、および電子機器に関する。 本開示の第１の側面であるイメージセンサは、多数の光電変換素子により、入射光に応じたフルサイズ原画像を生成する画素部と、少なくとも前記フルサイズ原画像を保持可能な容量を有する保持部と、前記フルサイズ原画像に対して所定の画像処理を行うことによりフルサイズ処理画像を生成する画像処理部と、前記フルサイズ処理画像のサイズを変更することにより変更サイズ処理画像を生成する変更部とを備え、前記フルサイズ処理画像および前記変更サイズ処理画像を出力する。本開示は、例えば、DRAMを搭載したCMOSイメージセンサに適用できる。

Description

イメージセンサ、および電子機器
　本開示は、イメージセンサ、および電子機器に関し、特に、システムからの要求に応じたタイミングに従い、複数の画像データを出力できるようにしたイメージセンサ、および電子機器に関する。
　従来、CMOSやCCDなどの撮像素子が搭載されたイメージセンサに、全画素分の画素データ（以下、フルサイズ原画像とも称する）をそのまま保持できる程度の容量を有するストレージを搭載することは、サイズやコストなどが問題となり困難であった。
　しかしながら、近年、イメージセンサ内にフルサイズ原画像を保持可能なストレージを搭載することが可能になりつつある（例えば、特許文献１参照）。
特許第４３３７５４９号公報
　フルサイズ原画像を保持可能なストレージを搭載したイメージセンサの様々な利用方法が模索されている。
　本開示はこのような状況に鑑みてなされたものであり、ストレージが搭載されたイメージセンサから、フルサイズ原画像に基づく異なる複数の画像データを出力できるようにするものである。
　本開示の第１の側面であるイメージセンサは、多数の光電変換素子により、入射光に応じたフルサイズ原画像を生成する画素部と、少なくとも前記フルサイズ原画像を保持可能な容量を有する保持部と、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことによりフルサイズ処理画像を生成する画像処理部と、前記フルサイズ処理画像のサイズを変更することにより変更サイズ処理画像を生成する変更部とを備え、前記フルサイズ処理画像および前記変更サイズ処理画像を出力する。
　本開示の第１の側面であるイメージセンサは、前記保持部は、少なくとも前記フルサイズ原画像、前記フルサイズ処理画像、および前記変更サイズ処理画像を保持可能な容量を有し、前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記保持部に保持させ、前記変更部は、前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を前記保持部に保持させることができ、前記保持部から前記前記フルサイズ処理画像または前記変更サイズ処理画像を選択的に読み出して出力する選択出力部をさらに備えることができる。
　本開示の第１の側面であるイメージセンサは、前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を出力するとともに、前記変更部に供給し、前記変更部は、前記画像処理部から供給された前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を出力することができる。
　本開示の第１の側面であるイメージセンサは、前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記変更部に供給し、前記変更部は、前記画像処理部から供給された前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を出力するとともに、前記画像処理部から供給された前記フルサイズ処理画像をそのまま出力することができる。
　本開示の第１の側面であるイメージセンサは、前記保持部は、少なくとも前記フルサイズ原画像、および前記フルサイズ処理画像を保持可能な容量を有し、前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記保持部に保持させ、前記変更部は、前記保持部から読み出した前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を出力するとともに、前記保持部から読み出した前記フルサイズ処理画像をそのまま出力することができる。
　本開示の第１の側面であるイメージセンサは、前記保持部は、少なくとも前記フルサイズ原画像、および前記フルサイズ処理画像を保持可能な容量を有し、前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記変更部に供給するとともに前記保持部に保持させ、前記変更部は、前記画像処理部から供給された前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を出力するとともに前記保持部から読み出した前記フルサイズ処理画像をそのまま出力することができる。
　本開示の第１の側面であるイメージセンサは、前記保持部は、少なくとも前記フルサイズ原画像、および前記変更サイズ処理画像を保持可能な容量を有し、前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を出力するとともに前記変更部に供給し、前記変更部は、前記画像処理部から供給された前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を前記保持部に保持させることができ、前記保持部から前記変更サイズ処理画像を選択的に読み出して出力する出力部をさらに備えることができる。
　本開示の第１の側面であるイメージセンサは、前記画素部によって生成された前記フルサイズ原画像を縮小することにより縮小原画像を生成する縮小部をさらに備えることができ、前記保持部は、少なくとも前記フルサイズ原画像、および前記縮小原画像を保持可能な容量を有し、前記画素部は、生成した前記フルサイズ原画像を前記縮小部に供給するとともに前記保持部に保持させ、前記縮小部は、前記フルサイズ原画像を縮小することにより生成した前記縮小原画像を前記保持部に保持させ、前記画像処理部は、前記保持部から読み出した前記縮小原画像に対しても所定の画像処理を行うことにより縮小処理画像を生成して前記変更部に供給するとともに、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記変更部に供給し、前記変更部は、前記画像処理部から供給された前記縮小処理画像のサイズを変更することにより前記変更サイズ処理画像を生成して出力するとともに、前記画像処理部から供給された前記フルサイズ処理画像をそのまま出力することができる。
　本開示の第２の側面である電子機器は、イメージセンサが搭載されている電子機器において、前記イメージセンサが、多数の光電変換素子により、入射光に応じたフルサイズ原画像を生成する画素部と、少なくとも前記フルサイズ原画像を保持可能な容量を有する保持部と、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことによりフルサイズ処理画像を生成する画像処理部と、前記フルサイズ処理画像のサイズを変更することにより変更サイズ処理画像を生成する変更部とを備え、前記フルサイズ処理画像および前記変更サイズ処理画像を出力する。
　本開示の第１および第２の側面においては、入射光に応じたフルサイズ原画像が生成されて保持部に保持され、保持部から読み出された前記フルサイズ原画像に対して所定の画像処理を行うことによりフルサイズ処理画像が生成され、前記フルサイズ処理画像のサイズを変更することにより変更サイズ処理画像が生成され、前記フルサイズ処理画像および前記変更サイズ処理画像が出力される。
　本開示の第１の側面によれば、フルサイズ原画像に基づく異なる複数の画像データを出力することができる。
　本開示の第２の側面によれば、搭載するイメージセンサから、フルサイズ原画像に基づく異なる複数の画像データを出力することができる。
本開示を適用したイメージセンサの第１の構成例を表すブロック図である。 図１のイメージセンサによる画像出力処理を説明するフローチャートである。 本開示を適用したイメージセンサの第２の構成例を表すブロック図である。 図３のイメージセンサによる画像出力処理を説明するフローチャートである。 本開示を適用したイメージセンサの第３の構成例を表すブロック図である。 図５のイメージセンサによる画像出力処理を説明するフローチャートである。 本開示を適用したイメージセンサの第４の構成例を表すブロック図である。 図７のイメージセンサによる画像出力処理を説明するフローチャートである。 本開示を適用したイメージセンサの第５の構成例を表すブロック図である。 図９のイメージセンサによる画像出力処理を説明するフローチャートである。 本開示を適用したイメージセンサの第６の構成例を表すブロック図である。 図１１のイメージセンサによる画像出力処理を説明するフローチャートである。 本開示を適用したイメージセンサの第７の構成例を表すブロック図である。 図１３のイメージセンサによる画像出力処理を説明するフローチャートである。 本開示を適用した電子装置の使用例を示す図である。
　以下、本開示を実施するための最良の形態（以下、実施の形態と称する）について、図面を参照しながら詳細に説明する。
　＜第１の実施の形態であるイメージセンサの第１の構成例＞
　図１は、第１の実施の形態であるイメージセンサの第１の構成例の構成例を示している。
　このイメージセンサ１０は、画素部１１、DRAM１２、画像処理部１３、およびサイズ変更部１４を有する。
　画素部１１は、入射光に応じて光電変換により画素データを生成する多数の光電変換素子などから成り、撮像によって得られたフルサイズ原画像Ｐ１をDRAM１２に保持させる。DRAM１２は、少なくともフルサイズ原画像Ｐ１を保持できるだけの容量を有するストレージであり、画素部１１からの書き込みと、画像処理部１３からの読み出しに対応する。
　画像処理部１３は、フルサイズ原画像Ｐ１に対して、欠陥画素補正などの所定の画像処理を行い、その結果得られるフルサイズ処理画像Ｐ３を後段に出力する。なお、画像処理部１３における画像処理の具体的な内容は、該イメージセンサ１０を搭載するシステムの要求に応じて適宜変更することができる。
　サイズ変更部１４は、フルサイズ処理画像Ｐ３のサイズを所定のサイズに縮小し、その結果得られる縮小サイズ処理画像Ｐ２を後段に出力する。なお、サイズ変更部１４は、該イメージセンサ１０を搭載するシステムの要求に応じ、フルサイズ処理画像Ｐ３のサイズを所定のサイズに拡大したり、変形したりすることが可能である。
　図２は、イメージセンサ１０による画像出力処理を説明するフローチャートである。
　ステップＳ１１において、画素部１１は露光によりフルサイズ原画像Ｐ１を生成し、フルサイズ原画像Ｐ１をDRAM１２に保持させる。ステップＳ１２において、画像処理部１３は、DRAM１２からフルサイズ原画像Ｐ１の読み出しを行い、ステップＳ１３において、所定の画像処理を行い、その結果得られたフルサイズ処理画像Ｐ３を、ステップＳ１４においてサイズ変更部１４とイメージセンサ１０の外部に出力する。
　ステップＳ１５において、サイズ変更部１４は、フルサイズ処理画像Ｐ３を所定のサイズに縮小し、その結果得られる縮小サイズ処理画像Ｐ２を、ステップＳ１６としてイメージセンサ１０の外部に出力する。以上で、イメージセンサ１０による画像出力処理は終了される。
　以上説明したように、イメージセンサ１０によれば、DRAM１２からフルサイズ原画像Ｐ１を１回読み出すだけで、フルサイズ処理画像Ｐ３と縮小サイズ処理画像Ｐ２をほぼ同時に出力することができる。
　なお、イメージセンサ１０の場合、画素部１１の出力（フルサイズ原画像Ｐ１）を、DRAM１２を介することなく、画像処理部１３に出力するようにしてもよい。
　＜第２の実施の形態であるイメージセンサの第２の構成例＞
　図３は、第２の実施の形態であるイメージセンサの第２の構成例の構成例を示している。
　このイメージセンサ２０は、画素部２１、DRAM２２、画像処理部２３、およびサイズ変更部２４を有する。
　画素部２１は、入射光に応じて光電変換により画素データを生成する多数の光電変換素子などから成り、撮像によって得られたフルサイズ原画像Ｐ１をDRAM２２に保持させる。DRAM２２は、少なくともフルサイズ原画像Ｐ１を保持できるだけの容量を有するストレージであり、画素部２１からの書き込みと、画像処理部２３からの読み出しに対応する。
　画像処理部２３は、フルサイズ原画像Ｐ１に対して、欠陥画素補正などの所定の画像処理を行い、その結果得られるフルサイズ処理画像Ｐ３を後段に出力する。なお、画像処理部２３における画像処理の具体的な内容は、該イメージセンサ２０を搭載するシステムの要求に応じて適宜変更することができる。
　サイズ変更部２４は、フルサイズ処理画像Ｐ３のサイズを所定のサイズに縮小し、その結果得られる縮小サイズ処理画像Ｐ２を後段に出力する。なお、サイズ変更部２４は、フルサイズ処理画像Ｐ３をそのまま後段に出力することもできる。また、サイズ変更部２４は、該イメージセンサ２０を搭載するシステムの要求に応じ、フルサイズ処理画像Ｐ３のサイズを所定のサイズに拡大したり、変形したりすることが可能である。
　図４は、イメージセンサ２０による画像出力処理を説明するフローチャートである。
　ステップＳ２１において、画素部２１は露光によりフルサイズ原画像Ｐ１を生成し、フルサイズ原画像Ｐ１をDRAM２２に保持させる。
　ステップＳ２２において、画像処理部２３は、DRAM２２からフルサイズ原画像Ｐ１の１回目の読み出しを行い、ステップＳ２３において、所定の画像処理を行い、その結果得られたフルサイズ処理画像Ｐ３をサイズ変更部２４に出力する。ステップＳ２４において、サイズ変更部２４は、フルサイズ処理画像Ｐ３を所定のサイズに縮小し、その結果得られた縮小サイズ処理画像Ｐ２をステップＳ２５としてイメージセンサ２０の外部に出力する。
　ステップＳ２６において、画像処理部２３は、DRAM２２からフルサイズ原画像Ｐ１の２回目の読み出しを行い、ステップＳ２７において、所定の画像処理を行い、その結果得られたフルサイズ処理画像Ｐ３をサイズ変更部２４に出力する。ステップＳ２８において、サイズ変更部２４は、フルサイズ処理画像Ｐ３をそのままイメージセンサ２０の外部に出力する。以上で、イメージセンサ２０による画像出力処理は終了される。
　以上説明したように、イメージセンサ２０によれば、縮小サイズ処理画像Ｐ２とフルサイズ処理画像Ｐ３を順次にイメージセンサ２０の外部に出力することができる。なお、先にフルサイズ処理画像Ｐ３を出力し、次に縮小サイズ処理画像Ｐ２を出力するようにしてもよい。
　＜第３の実施の形態であるイメージセンサの第３の構成例＞
　図５は、第３の実施の形態であるイメージセンサの第３の構成例の構成例を示している。
　このイメージセンサ３０は、画素部３１、DRAM３２、画像処理部３３、およびサイズ変更部３４を有する。
　画素部３１は、入射光に応じて光電変換により画素データを生成する多数の光電変換素子などから成り、撮像によって得られたフルサイズ原画像Ｐ１をDRAM３２に保持させる。DRAM３２は、少なくともフルサイズ原画像Ｐ１およびフルサイズ処理画像Ｐ３を保持できるだけの容量を有するストレージであり、画素部３１および画像処理部３３からの書き込みと、画像処理部３３およびサイズ変更部３４からの読み出しに対応する。
　画像処理部３３は、フルサイズ原画像Ｐ１に対して、欠陥画素補正などの所定の画像処理を行い、その結果得られるフルサイズ処理画像Ｐ３をDRAM３２に出力して保持させる。なお、画像処理部３３における画像処理の具体的な内容は、該イメージセンサ３０を搭載するシステムの要求に応じて適宜変更することができる。
　サイズ変更部３４は、DRAM３２からフルサイズ処理画像Ｐ３の読み出しを行い、そのサイズを所定のサイズに縮小して縮小サイズ処理画像Ｐ２を生成し、後段に出力する。なお、サイズ変更部３４は、フルサイズ処理画像Ｐ３をそのまま後段に出力することもできる。また、サイズ変更部３４は、該イメージセンサ３０を搭載するシステムの要求に応じ、フルサイズ処理画像Ｐ３のサイズを所定のサイズに拡大したり、変形したりすることが可能である。
　図６は、イメージセンサ３０による画像出力処理を説明するフローチャートである。
　ステップＳ３１において、画素部３１は露光によりフルサイズ原画像Ｐ１を生成し、フルサイズ原画像Ｐ１をDRAM３２に保持させる。
　ステップＳ３２において、画像処理部３３は、DRAM３２からフルサイズ原画像Ｐ１の読み出しを行い、ステップＳ３３において、所定の画像処理を行い、その結果得られたフルサイズ処理画像Ｐ３を、ステップＳ３４において、DRAM３２に保持させる。
　ステップＳ３５において、サイズ変更部３４は、DRAM３２からフルサイズ処理画像Ｐ３の１回目の読み出しを行い、ステップS３６において、所定のサイズに縮小し、その結果得られた縮小サイズ処理画像Ｐ２をステップＳ３７としてイメージセンサ３０の外部に出力する。
　ステップＳ３８において、サイズ変更部３４は、DRAM３２からフルサイズ処理画像Ｐ３の２回目の読み出しを行い、ステップＳ３９において、そのままイメージセンサ３０の外部に出力する。以上で、イメージセンサ３０による画像出力処理は終了される。
　以上説明したように、イメージセンサ３０によれば、縮小サイズ処理画像Ｐ２とフルサイズ処理画像Ｐ３を順次にイメージセンサ３０から外部に出力することができる。なお、先にフルサイズ処理画像Ｐ３を出力し、次に縮小サイズ処理画像Ｐ２を出力するようにしてもよい。
　イメージセンサ３０では、フルサイズ原画像Ｐ１に対する所定の画像処理が１回で済むので、イメージセンサ２０のようにフルサイズ原画像Ｐ１に対する画像処理を２回行う場合に比較して、画像処理に要する電力消費を抑えることができる。
　＜第４の実施の形態であるイメージセンサの第４の構成例＞
　図７は、第４の実施の形態であるイメージセンサの第４の構成例の構成例を示している。
　このイメージセンサ４０は、画素部４１、DRAM４２、画像処理部４３、およびサイズ変更部４４を有する。
　画素部４１は、入射光に応じて光電変換により画素データを生成する多数の光電変換素子などから成り、撮像によって得られたフルサイズ原画像Ｐ１をDRAM４２に保持させる。DRAM４２は、少なくともフルサイズ原画像Ｐ１およびフルサイズ処理画像Ｐ３を保持できるだけの容量を有するストレージであり、画素部４１および画像処理部４３からの書き込みと、画像処理部４３およびサイズ変更部４４からの読み出しに対応する。
　画像処理部４３は、フルサイズ原画像Ｐ１に対して、欠陥画素補正などの所定の画像処理を行い、その結果得られるフルサイズ処理画像Ｐ３をDRAM４２に保持させるとともに、サイズ変更部４４に出力する。なお、画像処理部４３における画像処理の具体的な内容は、該イメージセンサ４０を搭載するシステムの要求に応じて適宜変更することができる。
　サイズ変更部４４は、画像処理部４３から入力されるフルサイズ処理画像Ｐ３のサイズを所定のサイズに縮小して縮小サイズ処理画像Ｐ２を生成し、後段に出力する。また、サイズ変更部４４は、DRAM４２からフルサイズ処理画像Ｐ３を読み出して、そのまま後段に出力することもできる。また、サイズ変更部４４は、該イメージセンサ４０を搭載するシステムの要求に応じ、フルサイズ処理画像Ｐ３のサイズを所定のサイズに拡大したり、変形したりすることが可能である。
　図８は、イメージセンサ４０による画像出力処理を説明するフローチャートである。
　ステップＳ４１において、画素部４１は露光によりフルサイズ原画像Ｐ１を生成し、フルサイズ原画像Ｐ１をDRAM４２に保持させる。
　ステップＳ４２において、画像処理部４３は、DRAM４２からフルサイズ原画像Ｐ１の読み出しを行い、ステップＳ４３において、所定の画像処理を行い、その結果得られたフルサイズ処理画像Ｐ３を、ステップＳ４４において、サイズ変更部４４に出力するとともに、DRAM３２に保持させる。
　ステップＳ４５において、サイズ変更部４４は、フルサイズ処理画像Ｐ３を所定のサイズに縮小し、その結果得られた縮小サイズ処理画像Ｐ２をイメージセンサ４０の外部に出力する。
　ステップＳ４６において、サイズ変更部４４は、DRAM４２からフルサイズ処理画像Ｐ３を読み出し、ステップＳ４７において、そのままイメージセンサ４０の外部に出力する。以上で、イメージセンサ４０による画像出力処理は終了される。
　以上説明したように、イメージセンサ４０によれば、縮小サイズ処理画像Ｐ２とフルサイズ処理画像Ｐ３を順次にイメージセンサ４０から外部に出力することができる。
　イメージセンサ４０では、フルサイズ原画像Ｐ１に対する所定の画像処理が１回で済むので、イメージセンサ２０のようにフルサイズ原画像Ｐ１に対する所定の画像処理を２回行う場合に比較して、画像処理に要する電力消費を抑えることができる。
　＜第５の実施の形態であるイメージセンサの第５の構成例＞
　図９は、第５の実施の形態であるイメージセンサの第５の構成例の構成例を示している。
　このイメージセンサ５０は、画素部５１、DRAM５２、画像処理部５３、サイズ変更部５４、および出力選択部５５を有する。
　画素部５１は、入射光に応じて光電変換により画素データを生成する多数の光電変換素子などから成り、撮像によって得られたフルサイズ原画像Ｐ１をDRAM５２に保持させる。DRAM５２は、少なくともフルサイズ原画像Ｐ１および縮小サイズ処理画像Ｐ２を保持できるだけの容量を有するストレージであり、画素部５１およびサイズ変更部５４からの書き込みと、画像処理部５３および出力選択部５５からの読み出しに対応する。
　画像処理部５３は、フルサイズ原画像Ｐ１に対して、欠陥画素補正などの所定の画像処理を行い、その結果得られるフルサイズ処理画像Ｐ３をサイズ変更部５４および出力選択部５５に出力する。なお、画像処理部５３における画像処理の具体的な内容は、該イメージセンサ５０を搭載するシステムの要求に応じて適宜変更することができる。
　サイズ変更部５４は、画像処理部５３から入力されるフルサイズ処理画像Ｐ３のサイズを所定のサイズに縮小し、その結果得られる縮小サイズ処理画像Ｐ２をDRAM５２に保持させる。また、サイズ変更部５４は、該イメージセンサ５０を搭載するシステムの要求に応じ、フルサイズ処理画像Ｐ３のサイズを所定のサイズに拡大したり、変形したりすることが可能である。
　出力選択部５５は、画像処理部５３から入力されるフルサイズ処理画像Ｐ３を後段に出力する。また、出力選択部５５は、DRAM５２から縮小サイズ処理画像Ｐ２を読み出して後段に出力する。
　図１０は、イメージセンサ５０による画像出力処理を説明するフローチャートである。
　ステップＳ５１において、画素部５１は露光によりフルサイズ原画像Ｐ１を生成し、フルサイズ原画像Ｐ１をDRAM５２に保持させる。
　ステップＳ５２において、画像処理部５３は、DRAM５２からフルサイズ原画像Ｐ１の読み出しを行い、ステップＳ５３において、所定の画像処理を行い、その結果得られたフルサイズ処理画像Ｐ３をサイズ変更部５４および出力選択部５５に出力する。
　ステップＳ５４において、出力選択部５５は、画像処理部５３から入力されたフルサイズ処理画像Ｐ３をイメージセンサ５０の外部に出力する。
　ステップＳ５５において、サイズ変更部４４は、フルサイズ処理画像Ｐ３を所定のサイズに縮小し、その結果得られた縮小サイズ処理画像Ｐ２をDRAM５２に保持させる。ステップＳ５６において、出力選択部５５は、DRAM５２から縮小サイズ処理画像Ｐ２を読み出してイメージセンサ５０の外部に出力する。以上で、イメージセンサ５０による画像出力処理は終了される。
　以上説明したように、イメージセンサ５０によれば、フルサイズ処理画像Ｐ３と縮小サイズ処理画像Ｐ２を順次にイメージセンサ５０から外部に出力することができる。
　イメージセンサ５０では、フルサイズ原画像Ｐ１に対する所定の画像処理が１回で済むので、イメージセンサ２０のようにフルサイズ原画像Ｐ１に対する所定の画像処理を２回行う場合に比較して、画像処理に要する電力消費を抑えることができる。
　＜第６の実施の形態であるイメージセンサの第６の構成例＞
　図１１は、第６の実施の形態であるイメージセンサの第６の構成例の構成例を示している。
　このイメージセンサ６０は、画素部６１、DRAM６２、1/4縮小部６３、画像処理部６４、およびサイズ変更部６５を有する。
　画素部６１は、入射光に応じて光電変換により画素データを生成する多数の光電変換素子などから成り、撮像によって得られたフルサイズ原画像Ｐ１を1/4縮小部６３に出力するとともにDRAM６２に保持させる。
　DRAM６２は、少なくともフルサイズ原画像Ｐ１および1/4サイズ原画像Ｐ４を保持できるだけの容量を有するストレージであり、画素部６１および1/4縮小部６３からの書き込みと、画像処理部６４からの読み出しに対応する。
　1/4縮小部６３は、フルサイズ原画像Ｐ１の縦横のサイズを1/2に縮小することにより、1/4サイズ原画像Ｐ４を生成してDRAM６２に保持させる。
　画像処理部６４は、DRAM６２から1/4サイズ原画像Ｐ４を読み出し、欠陥画素補正などの所定の画像処理を行い、その結果得られる1/4サイズ処理画像（不図示）をサイズ変更部６５に出力する。また、画像処理部６４は、DRAM６２からフルサイズ原画像Ｐ１を読み出し、欠陥画素補正などの所定の画像処理を行い、その結果得られるフルサイズ処理画像Ｐ３をサイズ変更部６５に出力する。
　サイズ変更部６５は、画像処理部６４から入力される1/4サイズ処理画像を所定のサイズに変換し、その結果得られる縮小サイズ処理画像Ｐ２を後段に出力する。また、サイズ変更部６５は、画像処理部６４から入力されるフルサイズ処理画像Ｐ３をそのまま後段に出力する。
　図１２は、イメージセンサ６０による画像出力処理を説明するフローチャートである。
　ステップＳ６１において、画素部６１は露光によりフルサイズ原画像Ｐ１を生成し、フルサイズ原画像Ｐ１を1/4縮小部６３に出力するとともにDRAM６２に保持させる。1/4縮小部６３は、フルサイズ原画像Ｐ１から1/4サイズ原画像Ｐ４を生成してDRAM６２に保持させる。
　ステップＳ６２において、画像処理部６４は、DRAM６２から1/4サイズ原画像Ｐ４を読み出し、ステップＳ６３において、所定の画像処理を行い、その結果得られる1/4サイズ処理画像をサイズ変更部６５に出力する。ステップＳ６４において、サイズ変更部６５は、画像処理部６４から入力された1/4サイズ処理画像を所定のサイズに変換し、その結果得られた縮小サイズ処理画像Ｐ２を、ステップＳ６５において、イメージセンサ６０の外部に出力する。
　ステップＳ６６において、画像処理部６４は、DRAM６２からフルサイズ原画像Ｐ１を読み出し、ステップＳ６７において、所定の画像処理を行い、その結果得られるフルサイズ処理画像Ｐ３をサイズ変更部６５に出力する。ステップＳ６８において、サイズ変更部６５は、画像処理部６４から入力されたフルサイズ処理画像Ｐ３をそのままイメージセンサ６０の外部に出力する。以上で、イメージセンサ６０による画像出力処理は終了される。
　以上説明したように、イメージセンサ６０によれば、フルサイズ処理画像Ｐ３と縮小サイズ処理画像Ｐ２を順次にイメージセンサ４０から外部に出力することができる。
　なお、1/4縮小部６３において、該イメージセンサ６０を搭載するシステムが要求する縮小サイズ処理画像Ｐ２と同じサイズにフルサイズ原画像Ｐ１を縮小してもよい。その場合、サイズ変換部６５を省略することができる。
　＜第７の実施の形態であるイメージセンサの第７の構成例＞
　図１３は、第７の実施の形態であるイメージセンサの第７の構成例の構成例を示している。
　このイメージセンサ７０は、画素部７１、DRAM７２、画像処理部７３、サイズ変更部７４、および出力選択部７５を有する。
　画素部７１は、入射光に応じて光電変換により画素データを生成する多数の光電変換素子などから成り、撮像によって得られたフルサイズ原画像Ｐ１をDRAM７２に保持させる。DRAM７２は、少なくともフルサイズ原画像Ｐ１、縮小サイズ処理画像Ｐ２、およびフルサイズ処理画像Ｐ３を保持できるだけの容量を有するストレージであり、画素部７１、画像処理部７３、およびサイズ変更部７４からの書き込みと、画像処理部７３および出力選択部７５からの読み出しに対応する。
　画像処理部７３は、DRAM７２からフルサイズ原画像Ｐ１を読み出して、欠陥画素補正などの所定の画像処理を行い、その結果得られるフルサイズ処理画像Ｐ３をサイズ変更部７４に出力するとともに、DRAM７２に保持させる。なお、画像処理部７３における画像処理の具体的な内容は、該イメージセンサ７０を搭載するシステムの要求に応じて適宜変更することができる。
　サイズ変更部７４は、画像処理部７３から入力されるフルサイズ処理画像Ｐ３のサイズを所定のサイズに縮小し、その結果得られる縮小サイズ処理画像Ｐ２をDRAM７２に保持させる。また、サイズ変更部７４は、該イメージセンサ７０を搭載するシステムの要求に応じ、フルサイズ処理画像Ｐ３のサイズを所定のサイズに拡大したり、変形したりすることが可能である。
　出力選択部７５は、DRAM７２の保持されている縮小サイズ処理画像Ｐ２またはフルサイズ処理画像Ｐ３を選択的に読み出して後段に出力する。
　図１４は、イメージセンサ７０による画像出力処理を説明するフローチャートである。
　ステップＳ７１において、画素部７１は露光によりフルサイズ原画像Ｐ１を生成し、フルサイズ原画像Ｐ１をDRAM７２に保持させる。
　ステップＳ７２において、画像処理部７３は、DRAM７２からフルサイズ原画像Ｐ１の読み出しを行い、ステップＳ７３において、所定の画像処理を行い、その結果得られたフルサイズ処理画像Ｐ３を、ステップＳ７４において、サイズ変更部７４に出力するとともに、DRAM７２に保持させる。サイズ変更部４４は、フルサイズ処理画像Ｐ３を所定のサイズに縮小し、その結果得られた縮小サイズ処理画像Ｐ２をDRAM７２に保持させる。
　ステップＳ７５において、出力選択部７５は、DRAM７２から縮小サイズ処理画像Ｐ２を読み出してイメージセンサ７０の外部に出力する。ステップＳ７６において、出力選択部７５は、DRAM７２からフルサイズ処理画像Ｐ３を読み出してイメージセンサ７０の外部に出力する。以上で、イメージセンサ７０による画像出力処理は終了される。
　以上説明したように、イメージセンサ７０によれば、縮小サイズ処理画像Ｐ２とフルサイズ処理画像Ｐ３を順次にイメージセンサ７０から外部に出力することができる。なお、先にフルサイズ処理画像Ｐ３を出力し、次に縮小サイズ処理画像Ｐ２を出力するようにしてもよい。
　＜イメージセンサの使用例＞
　以上に説明したイメージセンサ１０乃至７０によれば、フルサイズ原画像に基づく異なる複数の画像データを出力することができるので、例えば、動画像撮影中に全画素から成る静止画像を出力させたり、画素が間引きされているプレビュー用の画像と録画用の全画素画像とを同時に出力させたりする用途に用いることができる。
　図１５は、イメージセンサ１０乃至７０を使用する使用例を示している。
　上述したイメージセンサ１０乃至７０は、例えば、以下のように、可視光や、赤外光、紫外光、X線等の光をセンシングする様々な電子機器に搭載することができる。
　・ディジタルカメラや、カメラ機能付きの携帯機器等の、鑑賞の用に供される画像を撮影する装置
　・自動停止等の安全運転や、運転者の状態の認識等のために、自動車の前方や後方、周囲、車内等を撮影する車載用センサ、走行車両や道路を監視する監視カメラ、車両間等の測距を行う測距センサ等の、交通の用に供される装置
　・ユーザのジェスチャを撮影して、そのジェスチャに従った機器操作を行うために、TVや、冷蔵庫、エアーコンディショナ等の家電に供される装置
　・内視鏡や、赤外光の受光による血管撮影を行う装置等の、医療やヘルスケアの用に供される装置
　・防犯用途の監視カメラや、人物認証用途のカメラ等の、セキュリティの用に供される装置
　・肌を撮影する肌測定器や、頭皮を撮影するマイクロスコープ等の、美容の用に供される装置
　・スポーツ用途等向けのアクションカメラやウェアラブルカメラ等の、スポーツの用に供される装置
　・畑や作物の状態を監視するためのカメラ等の、農業の用に供される装置
　なお、本開示の実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
　１０　イメージセンサ，　１１　画素部，　１２　DRAM，　１３　画像処理部，　１４　サイズ変更部，　２０　イメージセンサ，　２１　画素部，　２２　DRAM，　２３　画像処理部，　２４　サイズ変更部，　３０　イメージセンサ，　３１　画素部，　３２　DRAM，　３３　画像処理部，　３４　サイズ変更部，　４０　イメージセンサ，　４１　画素部，　４２　DRAM，　４３　画像処理部，　４４　サイズ変更部，　５０　イメージセンサ，　５１　画素部，　５２　DRAM，　５３　画像処理部，　５４　サイズ変更部，　５５　出力選択部，　６０　イメージセンサ，　６１　画素部，　６２　DRAM，　６３　1/4縮小部，　６４　画像処理部，　６５　サイズ変更部，　７０　イメージセンサ，　７１　画素部，　７２　DRAM，　７３　画像処理部，　７４　サイズ変更部，　７５　出力選択部

Claims (9)

  1. 　多数の光電変換素子により、入射光に応じたフルサイズ原画像を生成する画素部と、
    　少なくとも前記フルサイズ原画像を保持可能な容量を有する保持部と、
    　前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことによりフルサイズ処理画像を生成する画像処理部と、
    　前記フルサイズ処理画像のサイズを変更することにより変更サイズ処理画像を生成する変更部とを備え、
    　前記フルサイズ処理画像および前記変更サイズ処理画像を出力する
    　イメージセンサ。
  2. 　前記保持部は、少なくとも前記フルサイズ原画像、前記フルサイズ処理画像、および前記変更サイズ処理画像を保持可能な容量を有し、
    　前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、
    　前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記保持部に保持させ、
    　前記変更部は、前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を前記保持部に保持させ、
    　前記保持部から前記前記フルサイズ処理画像または前記変更サイズ処理画像を選択的に読み出して出力する選択出力部をさらに備える
    　請求項１に記載のイメージセンサ。
  3. 　前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、
    　前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を出力するとともに、前記変更部に供給し、
    　前記変更部は、前記画像処理部から供給された前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を出力する
    　請求項１に記載のイメージセンサ。
  4. 　前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、
    　前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記変更部に供給し、
    　前記変更部は、前記画像処理部から供給された前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を出力するとともに、前記画像処理部から供給された前記フルサイズ処理画像をそのまま出力する
    　請求項１に記載のイメージセンサ。
  5. 　前記保持部は、少なくとも前記フルサイズ原画像、および前記フルサイズ処理画像を保持可能な容量を有し、
    　前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、
    　前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記保持部に保持させ、
    　前記変更部は、前記保持部から読み出した前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を出力するとともに、前記保持部から読み出した前記フルサイズ処理画像をそのまま出力する
    　請求項１に記載のイメージセンサ。
  6. 　前記保持部は、少なくとも前記フルサイズ原画像、および前記フルサイズ処理画像を保持可能な容量を有し、
    　前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、
    　前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記変更部に供給するとともに前記保持部に保持させ、
    　前記変更部は、前記画像処理部から供給された前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を出力するとともに前記保持部から読み出した前記フルサイズ処理画像をそのまま出力する
    　請求項１に記載のイメージセンサ。
  7. 　前記保持部は、少なくとも前記フルサイズ原画像、および前記変更サイズ処理画像を保持可能な容量を有し、
    　前記画素部は、生成した前記フルサイズ原画像を前記保持部に保持させ、
    　前記画像処理部は、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を出力するとともに前記変更部に供給し、
    　前記変更部は、前記画像処理部から供給された前記フルサイズ処理画像のサイズを変更することにより生成した前記変更サイズ処理画像を前記保持部に保持させ、
    　前記保持部から前記変更サイズ処理画像を選択的に読み出して出力する出力部をさらに備える
    　請求項１に記載のイメージセンサ。
  8. 　前記画素部によって生成された前記フルサイズ原画像を縮小することにより縮小原画像を生成する縮小部をさらに備え、
    　前記保持部は、少なくとも前記フルサイズ原画像、および前記縮小原画像を保持可能な容量を有し、
    　前記画素部は、生成した前記フルサイズ原画像を前記縮小部に供給するとともに前記保持部に保持させ、
    　前記縮小部は、前記フルサイズ原画像を縮小することにより生成した前記縮小原画像を前記保持部に保持させ、
    　前記画像処理部は、前記保持部から読み出した前記縮小原画像に対しても所定の画像処理を行うことにより縮小処理画像を生成して前記変更部に供給するとともに、前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことにより生成した前記フルサイズ処理画像を前記変更部に供給し、
    　前記変更部は、前記画像処理部から供給された前記縮小処理画像のサイズを変更することにより前記変更サイズ処理画像を生成して出力するとともに、前記画像処理部から供給された前記フルサイズ処理画像をそのまま出力する
    　請求項１に記載のイメージセンサ。
  9. 　イメージセンサが搭載されている電子機器において、
    　前記イメージセンサは、
    　　多数の光電変換素子により、入射光に応じたフルサイズ原画像を生成する画素部と、
    　　少なくとも前記フルサイズ原画像を保持可能な容量を有する保持部と、
    　　前記保持部から読み出した前記フルサイズ原画像に対して所定の画像処理を行うことによりフルサイズ処理画像を生成する画像処理部と、
    　　前記フルサイズ処理画像のサイズを変更することにより変更サイズ処理画像を生成する変更部とを備え、
    　　前記フルサイズ処理画像および前記変更サイズ処理画像を出力する
    　電子機器。
PCT/JP2016/068050 2015-06-30 2016-06-17 イメージセンサ、および電子機器 WO2017002639A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017526282A JP6764572B2 (ja) 2015-06-30 2016-06-17 イメージセンサ、および電子機器
CN201680036414.7A CN107736016B (zh) 2015-06-30 2016-06-17 图像传感器和电子装置
US15/578,430 US10764516B2 (en) 2015-06-30 2016-06-17 Image sensor and electronic device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015130949 2015-06-30
JP2015-130949 2015-06-30

Publications (1)

Publication Number Publication Date
WO2017002639A1 true WO2017002639A1 (ja) 2017-01-05

Family

ID=57608853

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/068050 WO2017002639A1 (ja) 2015-06-30 2016-06-17 イメージセンサ、および電子機器

Country Status (4)

Country Link
US (1) US10764516B2 (ja)
JP (1) JP6764572B2 (ja)
CN (1) CN107736016B (ja)
WO (1) WO2017002639A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006087565A (ja) * 2004-09-22 2006-04-06 Konica Minolta Medical & Graphic Inc 放射線画像取得方法及び放射線画像取得装置
JP2008048313A (ja) * 2006-08-21 2008-02-28 Sony Corp 物理量検出装置、物理量検出装置の駆動方法及び撮像装置
JP2013058970A (ja) * 2011-09-09 2013-03-28 Ricoh Co Ltd 画像処理装置およびデジタルカメラ
WO2014007004A1 (ja) * 2012-07-06 2014-01-09 ソニー株式会社 固体撮像装置及び固体撮像装置の駆動方法、並びに、電子機器

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3532781B2 (ja) * 1999-02-12 2004-05-31 株式会社メガチップス 画像入力装置の画像処理回路
US6895256B2 (en) * 2000-12-07 2005-05-17 Nokia Mobile Phones Ltd. Optimized camera sensor architecture for a mobile telephone
US6680748B1 (en) * 2001-09-27 2004-01-20 Pixim, Inc., Multi-mode camera and method therefor
CN100362659C (zh) 2002-04-04 2008-01-16 索尼株式会社 固态成像装置
US7054496B2 (en) * 2002-06-27 2006-05-30 Seiko Epson Corporation Method and apparatus for displaying arbitrarily magnified high resolution images using compressed domain processing
JP4420101B2 (ja) * 2007-10-30 2010-02-24 ソニー株式会社 固体撮像装置およびその駆動方法、並びにカメラシステム
US20110157395A1 (en) * 2009-12-31 2011-06-30 Compton John T Image sensor with fractional resolution image processing
KR101110725B1 (ko) * 2010-06-16 2012-02-27 엠텍비젼 주식회사 썸네일 이미지를 이용한 후보 이미지 제시 방법 및 이를 수행하는 이미지 신호 처리 장치와 촬상 장치
JP5703769B2 (ja) * 2011-01-19 2015-04-22 ソニー株式会社 画像変換装置、画像変換方法、プログラム、および電子機器
US9350928B2 (en) * 2012-05-02 2016-05-24 Semiconductor Components Industries, Llc Image data compression using stacked-chip image sensors

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006087565A (ja) * 2004-09-22 2006-04-06 Konica Minolta Medical & Graphic Inc 放射線画像取得方法及び放射線画像取得装置
JP2008048313A (ja) * 2006-08-21 2008-02-28 Sony Corp 物理量検出装置、物理量検出装置の駆動方法及び撮像装置
JP2013058970A (ja) * 2011-09-09 2013-03-28 Ricoh Co Ltd 画像処理装置およびデジタルカメラ
WO2014007004A1 (ja) * 2012-07-06 2014-01-09 ソニー株式会社 固体撮像装置及び固体撮像装置の駆動方法、並びに、電子機器

Also Published As

Publication number Publication date
US20180167566A1 (en) 2018-06-14
CN107736016B (zh) 2020-10-13
JPWO2017002639A1 (ja) 2018-04-19
CN107736016A (zh) 2018-02-23
US10764516B2 (en) 2020-09-01
JP6764572B2 (ja) 2020-10-07

Similar Documents

Publication Publication Date Title
US11050946B2 (en) High dynamic range processing based on angular rate measurements
KR102526794B1 (ko) 카메라 모듈, 고체 촬상 소자, 전자 기기 및 촬상 방법
US9473725B2 (en) Image-processing and encoded aperture pattern setting device and method, and image pickup device comprising same
US9807303B2 (en) Information processing apparatus, information processing method, and program
JP2013201752A5 (ja)
CN110366740B (zh) 图像处理装置和摄像装置
US20140320715A1 (en) Imaging Systems And Methods Using Square Image Sensor For Flexible Image Orientation
JP2005252625A (ja) 撮像装置および画像処理方法
EP2690861B1 (en) Apparatus and method to photograph an image
JP7118893B2 (ja) 撮像素子および撮像方法、並びに電子機器
WO2018079331A1 (ja) 固体撮像装置およびその信号処理方法、並びに電子機器
JP5952782B2 (ja) 画像処理装置及びその制御方法、プログラム、記憶媒体
JP2008091999A (ja) カメラ
WO2017051722A1 (ja) 固体撮像素子及び電子機器
CN101355644A (zh) 将图像稳定数据嵌入图像数据的图像传感器设备和方法
WO2017002639A1 (ja) イメージセンサ、および電子機器
JP6903417B2 (ja) 固体撮像素子および制御方法、並びに電子機器
US12081883B2 (en) Color fringing processing independent of tone mapping
JP2013238779A (ja) 撮像装置、撮影レンズユニット、および撮像ユニット
JP6329505B2 (ja) 固体撮像素子、撮像モジュール、および電子機器
JP4966172B2 (ja) 撮像装置
WO2017010260A1 (ja) 固体撮像素子および駆動方法、並びに電子機器
WO2023058671A1 (ja) 画像センサ、データ処理装置、および画像センサシステム
WO2023058669A1 (ja) 画像センサ、データ処理装置、および画像センサシステム
JP2009147885A (ja) 撮像装置及び撮像方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16817747

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017526282

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15578430

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16817747

Country of ref document: EP

Kind code of ref document: A1