WO2017110192A1 - 情報処理装置、情報処理方法、プログラムおよび情報処理システム - Google Patents

情報処理装置、情報処理方法、プログラムおよび情報処理システム Download PDF

Info

Publication number
WO2017110192A1
WO2017110192A1 PCT/JP2016/078812 JP2016078812W WO2017110192A1 WO 2017110192 A1 WO2017110192 A1 WO 2017110192A1 JP 2016078812 W JP2016078812 W JP 2016078812W WO 2017110192 A1 WO2017110192 A1 WO 2017110192A1
Authority
WO
WIPO (PCT)
Prior art keywords
image quality
cameras
adjustment value
information processing
value
Prior art date
Application number
PCT/JP2016/078812
Other languages
English (en)
French (fr)
Inventor
伸穂 池田
広志 池田
靖二郎 稲葉
秀幸 佐藤
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to JP2017557743A priority Critical patent/JPWO2017110192A1/ja
Priority to US15/780,945 priority patent/US10742862B2/en
Publication of WO2017110192A1 publication Critical patent/WO2017110192A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/002Diagnosis, testing or measuring for television systems or their details for television cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • H04N23/662Transmitting camera control signals through networks, e.g. control via the Internet by using master/slave camera arrangements for affecting the control of camera image capture, e.g. placing the camera in a desirable condition to capture a desired image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B43/00Testing correct operation of photographic apparatus or parts thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection

Definitions

  • the present disclosure relates to an information processing apparatus, an information processing method, a program, and an information processing system.
  • the second image quality adjustment value of each of the plurality of cameras based on the first image quality adjustment value of each of the plurality of cameras and the reliability of each of the plurality of cameras acquired from the plurality of cameras.
  • An information processing apparatus including an adjustment value determination unit that determines
  • the second image quality adjustment value of each of the plurality of cameras based on the first image quality adjustment value of each of the plurality of cameras and the reliability of each of the plurality of cameras acquired from the plurality of cameras.
  • the computer is configured to determine the second image quality of each of the plurality of cameras based on the first image quality adjustment value of each of the plurality of cameras acquired from the plurality of cameras and the reliability of each of the plurality of cameras.
  • a program for causing an information processing apparatus to function is provided, which includes an adjustment value determination unit that determines an image quality adjustment value.
  • An information processing system includes an information processing apparatus including an adjustment value determination unit that determines a second image quality adjustment value.
  • FIG. 3 is a block diagram illustrating a functional configuration example of an information processing device according to a first embodiment of the present disclosure.
  • FIG. It is a figure which shows the example of the relationship between the reliability of each of several cameras, the image quality adjustment value before adjustment, and the image quality adjustment value after adjustment.
  • FIG. It is a block diagram showing an example of functional composition of an information processor concerning a 2nd embodiment of this indication.
  • FIG. 3 is a block diagram illustrating a hardware configuration example of an information processing apparatus according to an embodiment of the present disclosure.
  • a plurality of constituent elements having substantially the same functional configuration may be distinguished by adding different numerals after the same reference numerals. However, when it is not necessary to particularly distinguish each of a plurality of constituent elements having substantially the same functional configuration, only the same reference numerals are given.
  • a method of adjusting image quality of each of a plurality of cameras manually by a user is known. That is, in the first method, when the user manually adjusts the image quality of each of the plurality of cameras while visually confirming the images taken by each of the plurality of cameras, the image quality adjustment value is used as a fixed value.
  • the image quality of each of the plurality of cameras is reduced. It fluctuates and the quality of the image decreases.
  • FIG. 1 is a diagram illustrating a configuration example of an information processing system according to an embodiment of the present disclosure.
  • an information processing system 1 includes an information processing apparatus 10 and cameras 20-1 to 20-N (where N is an integer of 2 or more).
  • the cameras 20-1 to 20-N image the same subject Bj.
  • images of the same subject Bj captured from a plurality of different positions are obtained.
  • the subject Bj is a person, but the subject Bj may be an object other than a person.
  • the information processing apparatus 10 and the cameras 20-1 to 20-N can communicate via a network (not shown).
  • the information processing apparatus 10 determines the image quality adjustment value of the camera 20-1 from the camera 20-1 via a network (not shown) (first image quality adjustment value, hereinafter referred to as “adjusted image quality adjustment value”).
  • the image quality adjustment value after adjustment (second image quality adjustment value) is obtained by obtaining the image quality adjustment value.
  • the information processing apparatus 10 transmits the adjusted image quality adjustment value to the camera 20-1, thereby performing image quality adjustment using the adjusted image quality adjustment value.
  • image quality adjustment is performed by the same procedure as the camera 20-1.
  • the information processing apparatus 10 exists outside the cameras 20-1 to 20-N. However, the information processing apparatus 10 is a part of the cameras 20-1 to 20-N or It may exist in the whole. In the example illustrated in FIG. 1, the information processing apparatus 10 is a notebook PC (Personal Computer), but the information processing apparatus 10 is not limited to a notebook PC.
  • the information processing apparatus 10 may be a smartphone, a mobile phone, a tablet terminal, or a game machine.
  • FIG. 2 is a block diagram illustrating a functional configuration example of the camera 20-1 according to the present embodiment.
  • the camera 20-1 includes a lens 210, an aperture 220, an imager 230, a lens / aperture control device 240, a preprocessing unit 250, a detection unit 260, an adjustment value calculation lens control unit 271, and an adjustment value selection.
  • the lens 210 is an optical element for refracting and focusing light.
  • the diaphragm 220 is a mechanism that adjusts the amount of light entering the lens 210.
  • the imager 230 is a semiconductor element that converts the light focused by the lens 210 into an electrical signal.
  • the imager 230 may be a CCD (Charge Coupled Device) or a COMS (Complementary Metal Oxide Semiconductor).
  • Lens 210 and aperture 220 can affect the resolution of the image.
  • the pre-processing unit 250 performs a process of reducing manufacturing variation that occurs between an image captured by the camera and an image captured by another camera. For example, the preprocessing unit 250 adjusts the image output from the imager 230 based on the measurement result of the image quality (for example, the brightness and color of the image) of the imager 230 under a predetermined condition.
  • the detection unit 260 performs detection from the imaging result output from the preprocessing unit 250.
  • the adjustment value calculation lens control unit 271 calculates an image quality adjustment value before adjustment based on the detection value output from the detection unit 260. Then, the adjustment value calculation lens control unit 271 provides the information processing apparatus 10 with the image quality adjustment value before adjustment and the detection value obtained by the detection performed by the detection unit 260 via a network (not shown). When the information processing apparatus 10 receives the image quality adjustment value and the detection value before adjustment, the information processing apparatus 10 calculates the image quality adjustment value after adjustment based on the received image quality adjustment value and detection value before adjustment. The calculation of the image quality adjustment value after adjustment will be described in detail later.
  • the adjustment value calculation lens control unit 271 acquires the adjusted image quality adjustment value from the information processing apparatus 10.
  • the adjustment value calculation lens control unit 271 outputs the adjusted image quality adjustment value to the adjustment value selection unit 272.
  • the adjustment value calculation lens control unit 271 outputs the adjusted image quality adjustment value to the adjustment value selection unit 273.
  • the adjustment value selection unit 272 selects either the adjustment value calculated by the adjustment value calculation lens control unit 271 or the adjusted image quality adjustment value received from the information processing apparatus 10. Then, the adjustment value selection unit 272 outputs the selection result to the lens / aperture control device 240.
  • the lens / aperture control device 240 controls the lens 210 or the aperture 220 based on the selection result output from the adjustment value selection unit 272.
  • the control of the lens 210 or the diaphragm 220 may be included in the image quality adjustment.
  • the adjustment value selection unit 273 selects either the adjustment value calculated by the adjustment value calculation lens control unit 271 or the adjusted image quality adjustment value received from the information processing apparatus 10. Then, the adjustment value selection unit 272 outputs the selection result to the image quality adjustment unit 274.
  • the image quality adjustment unit 274 performs image quality adjustment on the image output from the preprocessing unit 250 based on the selection result output from the adjustment value selection unit 273. When the image quality is adjusted, the image quality is directly adjusted.
  • the post-processing unit 280 adjusts the size of the image output to the recording / display unit 290 located at the subsequent stage of the post-processing unit 280. Further, the post-processing unit 280 performs recording encoding on the image output to the recording / display unit 290 located at the subsequent stage of the post-processing unit 280.
  • the recording / display unit 290 records the image output from the post-processing unit 280 in a storage unit (not shown) or displays it on a display unit (not shown).
  • FIG. 3 is a diagram illustrating an example of image quality adjustment. As illustrated in FIG. 3, in the embodiment of the present disclosure, color, brightness, resolution, noise (or texture), and the like are handled as image quality elements. As an image quality adjustment term for adjusting the image quality element “color”, white balance and matrix calculation are assumed.
  • an image quality adjustment term for adjusting the image quality element “brightness” an aperture, ISO sensitivity, gamma correction, knee correction, and the like are assumed.
  • an image quality adjustment term for adjusting the image quality element “resolution” an aperture and edge enhancement are assumed.
  • Noise reduction or the like is assumed as an image quality adjustment term for adjusting the image quality element “noise / texture”.
  • the image quality adjustment value before correction may include a value related to at least one of white balance, matrix calculation, aperture, gain, gamma correction, knee correction, contour enhancement, and noise reduction of an image captured by the camera.
  • the adjusted image quality adjustment value may include a value related to at least one of white balance, matrix calculation, aperture, gain, gamma correction, knee correction, contour enhancement, and noise reduction of an image captured by the camera.
  • the image quality adjustment types include image quality adjustment types according to temporal changes in the imaging area, image quality adjustment types according to user instructions, and the like. Is assumed. In the present specification, the former is sometimes referred to as dynamic image quality adjustment (described as “motion” in FIG. 3), and the latter is referred to as static image quality adjustment (described as “static” in FIG. 3). .
  • the correspondence relationship between the image quality adjustment term and the image quality adjustment type (dynamic / static) shown in FIG. 3 is merely an example, and the image quality adjustment term and the image quality adjustment type (dynamic / static) The correspondence relationship is not limited to the example shown in FIG.
  • the adjustment value determining unit 130A (FIG. 4) adjusts the image quality after adjustment of each of the plurality of cameras based on the image quality adjustment value before adjustment of each of the plurality of cameras and the reliability of each of the plurality of cameras. Determine the value. Thereby, it is possible to improve the accuracy of image quality adjustment of each of the plurality of cameras.
  • the image quality adjustment of each image quality adjustment term (for example, determination of the reliability of each of the plurality of cameras, the threshold value to be compared with the reliability, and the adjusted image quality adjustment value according to the comparison result) Etc.) can be classified into several patterns and made for each pattern.
  • the correspondence relationship between the image quality adjustment term and the pattern shown in FIG. 3 is merely an example, and the correspondence relationship between the image quality adjustment term and the pattern is not limited to the example shown in FIG.
  • FIG. 4 is a block diagram illustrating a functional configuration example of the information processing apparatus according to the first embodiment of the present disclosure.
  • the information processing apparatus 10A according to the first embodiment of the present disclosure includes a data acquisition unit 110A, a reliability acquisition unit 120, and an adjustment value determination unit 130A.
  • the information processing apparatus 10A is connected to the cameras 20-1 to 20-N via a network (not shown).
  • the static image quality adjustment is an image quality adjustment that reflects the user's will more strongly than when the image quality adjustment is automatically performed by the camera. Therefore, it is natural for the user that the image quality adjustment value after adjustment of each of the cameras 20-1 to 20-N is set to the image quality adjustment value of the camera (reference camera) having the reliability “high” selected by the user. is there. Therefore, in the static image quality adjustment, the image quality adjustment value of another camera is matched with the image quality adjustment value of the camera having the reliability “high”.
  • the data acquisition unit 110A acquires images from the cameras 20-1 to 20-N. Further, the reliability acquisition unit 120 acquires the reliability of each of the cameras 20-1 to 20-N. For example, the reliability acquisition unit 120 acquires the reliability of each of the cameras 20-1 to 20-N designated by the user.
  • the adjustment value determination unit 130A determines the image quality adjustment value before adjustment of the camera with the highest reliability as the image quality adjustment value after adjustment of each of the cameras 20-1 to 20-N.
  • FIG. 5 is a diagram showing an example of the relationship between the reliability of each of the cameras 20-1 to 20-N, the image quality adjustment value before adjustment, and the image quality adjustment value after adjustment.
  • “high” is designated by the user as the reliability of the camera 20-1
  • “low” is designated by the user as the reliability of each of the cameras 20-2 to 20-N. Therefore, as shown in FIG. 5, the adjustment value determination unit 130A sets the image quality adjustment values after adjustment of the cameras 20-2 to 20-N as the image quality adjustment values before adjustment of the camera 20-1 having the highest reliability. decide.
  • the image quality adjustment values after adjustment of the cameras 20-1 to 20-N determined by the adjustment value determination unit 130A are transmitted to the cameras 20-1 to 20-N, respectively.
  • image quality adjustment is performed based on the adjusted image quality adjustment value received from the information processing apparatus 10A. Accordingly, the image quality adjustment values of the cameras 20-1 to 20-N are set to the image quality adjustment values of the camera 20-1, so that the accuracy of the image quality adjustment of each of the cameras 20-1 to 20-N is improved.
  • FIG. 6 is a block diagram illustrating a functional configuration example of the information processing apparatus according to the second embodiment of the present disclosure.
  • the information processing apparatus 10B according to the second embodiment of the present disclosure includes a data acquisition unit 110B, a reliability calculation unit 140, and an adjustment value determination unit 130B.
  • the information processing apparatus 10B is connected to the cameras 20-1 to 20-N via a network (not shown).
  • the data acquisition unit 110B acquires either or both of the image and the detection value from each of the cameras 20-1 to 20-N. Further, the reliability calculation unit 140 calculates the reliability of each of the cameras 20-1 to 20-N. For example, the reliability calculation unit 140 calculates the reliability of the camera 20-1 based on the image quality adjustment value before adjustment of the camera 20-1. Similarly, the reliability calculation unit 140 calculates the reliability of the cameras 20-2 to 20-N.
  • the method for calculating the reliability is not particularly limited.
  • the reliability calculation unit 140 may calculate a difference value between an image quality adjustment value before adjustment and a predetermined reference adjustment value as reliability for each camera. In this case, the closer to the reference adjustment value, the higher the reliability, but the smaller the reliability value.
  • the reference adjustment value is not particularly limited.
  • the reference adjustment value is also referred to as one or a plurality of cameras (hereinafter referred to as “cameras other than the own camera”) excluding the cameras 20-1 to 20-N that use the reference adjustment value for calculation of reliability. ) May be a predetermined representative value.
  • the representative value is not particularly limited.
  • the representative value may be an intermediate value, an average value, a minimum value, or a maximum value regarding cameras other than the own camera among the cameras 20-1 to 20-N.
  • the representative value may be an intermediate value, an average value, a minimum value, or a maximum value regarding the cameras 20-1 to 20-N.
  • the adjustment value determination unit 130B determines the image quality adjustment value after adjustment of the camera 20-1 based on the reliability of the camera 20-1. More specifically, the adjustment value determination unit 130B determines the adjusted image quality adjustment value as the reference adjustment value when the reliability exceeds a predetermined threshold (Thresh). On the other hand, when the difference value does not exceed the threshold value (Thresh), the adjustment value determination unit 130B determines the image quality adjustment value after adjustment as the image quality adjustment value before adjustment. Similarly, the adjustment value determining unit 130B determines the image quality adjustment value after adjustment of each of the cameras 20-1 to 20-N.
  • the image quality adjustment values after adjustment of the cameras 20-1 to 20-N determined by the adjustment value determination unit 130B are transmitted to the cameras 20-1 to 20-N, respectively.
  • image quality adjustment is performed based on the adjusted image quality adjustment value received from the information processing apparatus 10B. Accordingly, the image quality adjustment values of the cameras 20-1 to 20-N are set to the image quality adjustment values of the camera 20-1, so that the accuracy of the image quality adjustment of each of the cameras 20-1 to 20-N is improved.
  • FIG. 7 is a flowchart showing a flow of an operation for determining an adjusted image quality adjustment value when white balance is performed as an image quality adjustment term (when coefficient adjustment of a polynomial function is performed as an image quality adjustment pattern).
  • W r , W g and W b are gains (image quality adjustment values) determined by image detection.
  • C r , C g and C b are offsets determined by image detection.
  • ⁇ r , ⁇ g and ⁇ b are correction gains due to manufacturing variations, and
  • ⁇ r , ⁇ g and ⁇ b are correction offsets due to manufacturing variations.
  • r, g and b are signal values detected in the imager.
  • R, G, and B are signal values after white balance is achieved.
  • 1 is set to the variable i at the start of the repetition processing of S1 to S17.
  • a continuation condition for the iterative process that i is N or less is set.
  • a termination process for repeating the process of incrementing i by 1 is set (S11).
  • the image quality adjustment vector W i is set to (W ri , W gi , W bi ) (S12), and the vector W ave indicating the average value for cameras other than the own camera is set to (W ri_ave , W gi_ave , W bi_ave ) ( S13).
  • the reliability calculation unit 140 sets the variable conf i to 1 when the difference value between the image quality adjustment vector W i and the vector W ave is equal to or less than the threshold value, and sets the variable conf i to 1 when the difference value exceeds the threshold value.
  • conf i is set to 0 (S14).
  • adjustment value determination unit 130B shifts the operation to S17.
  • the adjustment value determining unit 130B updates the image quality adjustment vector Wi with the vector W ave (S16), and performs the operation in S17. Transition.
  • FIG. 8 is a diagram illustrating an example of a correspondence relationship between the reliability determination result (conf i ) and the image quality adjustment vectors W i (W r , W g, and W b ) before and after the adjustment.
  • a difference value between the image quality adjustment vector W i and the vector W ave is the threshold value or less
  • i if is 1, the judgment result (conf 1) is for a 1, the image quality adjustment vector W i is not changed before and after the adjustment.
  • the determination result (conf 2 ) is 0 (because the difference value between the image quality adjustment vector W i and the vector W ave exceeds the threshold value)
  • the image quality adjustment vector W i. Is updated to the vector W ave .
  • FIG. 9 is a flowchart showing a flow of an operation for determining an image quality adjustment value after adjustment when updating the matrix operation as the image quality adjustment term (when performing the matrix operation as the image quality adjustment pattern).
  • the reliability S ij may be calculated by Then, the adjustment value determination unit 130B extracts the smallest j in each column from the reliability S ij , obtains the largest j value from the extraction result as k , and gives the adjusted image quality adjustment value for M k A matrix may be used.
  • 1 is set to the variable i at the start of the repetition processing of S21 to S27.
  • a continuation condition for the iterative process that i is N or less is set.
  • a termination process for repeating the process of incrementing i by 1 is set (S21).
  • 1 is set to the variable j at the start of the repetition processing of S22 to S26.
  • a repetitive processing continuation condition that j is N or less is set.
  • a termination process for repeating the process of incrementing j by 1 is set (S22).
  • the adjustment value determining unit 130B increments C j by 1 (S25), and the operation proceeds to S26.
  • the adjustment value determination section 130B acquires the maximum value between the C 1 to C N as k (S28). Then, Y, U, and V, which are signal values after the matrix operation is updated, are obtained from the matrix Mk (S29). Since this matrix M k is applied to all of the cameras 20-1 to 20-N, it is transmitted from the information processing apparatus 10B to all of the cameras 20-1 to 20-N, and the cameras 20-1 to 20-N are transmitted. All of N are used for image quality adjustment.
  • FIG. 10 and FIG. 11 are flowcharts showing the flow of the operation (modification example) for determining the adjusted image quality adjustment value when updating the matrix operation as the image quality adjustment term (when performing the matrix operation as the image quality adjustment pattern). is there.
  • the operations from S21 to S27 are executed in the same manner as the operations from S21 to S27 shown in FIG.
  • the maximum value k between from C 1 to C N is acquired as H (S28). Subsequently, 1 is set to the variable i at the start of the repetition processing of S31 to S36. In addition, a continuation condition for the iterative process that i is N or less is set. In addition, a termination process for repeating the process of incrementing i by 1 is set (S31).
  • the value obtained by summing the difference values of the multiplication results with e 7 (1,1,1) ⁇ 1/3 etc.) from 1 to N is calculated as the reliability SiH (S32).
  • the reliability calculation unit 140 sets 1 to the variable conf i when the reliability S iH is less than or equal to the threshold, and sets 0 to the variable conf i when the reliability S iH exceeds the threshold. (S33).
  • adjustment value determination unit 130B shifts the operation to S36.
  • adjustment value determining unit 130B updates matrix M i with matrix MH (S35), and shifts the operation to S36. .
  • FIG. 12 is a flowchart showing a flow of an operation for determining an adjusted image quality adjustment value when performing gamma correction as an image quality adjustment term (when performing image quality adjustment using an exponential function as an image quality adjustment pattern).
  • y represents the luminance among the signal values detected by the imager.
  • is an image quality adjustment value for adjusting the luminance.
  • the function f is a function for outputting the changed luminance using the luminance y and the image quality adjustment value ⁇ as input values.
  • the reliability calculation unit 140 calculates the integration value for the difference value between the functions f for all combinations of the functions f, thereby increasing the reliability. S ij may be calculated.
  • the adjustment value determining unit 130B extracts the smallest j in each column from the reliability S ij , obtains the largest j value from the extraction result as k , and gives f k the adjusted image quality adjustment value. It can be a function.
  • 1 is set to the variable i at the start of the repetition process of S41 to S47.
  • a continuation condition for the iterative process that i is N or less is set.
  • a termination process for repeating the process of incrementing i by 1 is set (S41).
  • 1 is set to the variable j at the start of the repetitive processing of S42 to S46.
  • a repetitive processing continuation condition that j is N or less is set.
  • a termination process for repeating the process of incrementing j by 1 is set (S42).
  • the reliability calculation unit 140 calculates an integral value for the difference value between the function f i and the function f j as the reliability S ij (S43).
  • the adjustment value determination unit 130B increments C j by 1 (S45), and proceeds to S46.
  • the adjustment value determination section 130B acquires the maximum value between the C 1 to C N as k (S48). Then, Y which is a signal value after the image quality adjustment value ⁇ is adjusted is obtained by the image quality adjustment value ⁇ k after adjustment (S49). Since this adjusted image quality adjustment value ⁇ k is applied to all of the cameras 20-1 to 20-N, it is transmitted from the information processing apparatus 10B to all of the cameras 20-1 to 20-N. All of -1 to 20-N are used for image quality adjustment. Similar to the update of the matrix operation may utilize maximum value during the period from C 1 to C N as the reference adjustment value.
  • FIG. 13 is a diagram illustrating an example of a function table obtained from each of different function shapes. As shown in FIG. 13, when the function shape is different between the function f (y) and the function g (y), the correspondence relationship between the input value y, the output value f (y), and the output value g (y) Prepared as a table. In the fourth example, this function table is used.
  • FIG. 14 is a flowchart showing a flow of operations for performing image quality adjustment using a function table.
  • 1 is set to the variable i at the start of the repetition processing of S51 to S57.
  • a continuation condition for the iterative process that i is N or less is set.
  • a termination process for repeating the process of incrementing i by 1 is set (S51).
  • 1 is set to the variable j at the start of the repetitive processing of S52 to S56.
  • a repetitive processing continuation condition that j is N or less is set.
  • a termination process for repeating the process of incrementing j by 1 is set (S52).
  • the reliability calculation unit 140 calculates the integrated value for the difference value from the function f i (y) and the function f j (y) as the reliability S ij (S53).
  • the adjustment value determination unit 130B increments C j by 1 (S55), and the operation proceeds to S56.
  • the adjustment value determination section 130B acquires the maximum value between the C 1 to C N as k (S58). Then, a function table f k is obtained (S49). Since this function table f k is applied to all of the cameras 20-1 to 20-N, it is transmitted from the information processing apparatus 10B to all of the cameras 20-1 to 20-N, and the cameras 20-1 to 20- 20 All of -N are used for image quality adjustment. Similar to the update of the matrix operation may utilize maximum value during the period from C 1 to C N as the reference adjustment value.
  • the predetermined value related to the calculation of the reliability is not particularly changed, but the predetermined value related to the calculation of the reliability may be changed depending on the situation.
  • the reliability calculation unit 140 when the subjects imaged by the cameras 20-1 to 20-N are within the same or similar range, and the cameras 20-1 to 20-20 whose detection values exceed a predetermined range.
  • a predetermined value related to calculation of reliability in the detected camera may be changed.
  • the adjustment value determining unit 130B determines whether the subject imaged by each of the cameras 20-1 to 20-N is within the same or similar range based on the positions and orientations of the cameras 20-1 to 20-N. It may be determined whether or not. More specifically, the adjustment value determining unit 130B calculates the optical axes of the cameras 20-1 to 20-N based on the positions and orientations of the cameras 20-1 to 20-N, and the cameras 20-1 to 20-N. If there are cases where the points on the N optical axes fall within a predetermined space, it may be determined that the subjects imaged by the cameras 20-1 to 20-N are within the same or similar range.
  • the reliability calculation unit 140 when the subjects imaged by the cameras 20-1 to 20-N are within the same or similar range, and the cameras 20-1 to 20-20 whose detection values exceed a predetermined range. When -N is detected, the reliability of the detected camera may be decreased.
  • FIG. 15 is a flowchart illustrating an example of an operation of reducing the reliability in the detected camera.
  • the reliability calculation unit 140 when the subjects imaged by the cameras 20-1 to 20-N are not within the same or similar range, the reliability calculation unit 140 (“No” based on S61). ), The operation is shifted to S64. On the other hand, when the subjects imaged by the cameras 20-1 to 20-N are within the same or similar range (“Yes” based on S61), the reliability calculation unit 140 operates in S62. To migrate.
  • the reliability calculation unit 140 shifts the operation to S64 when a camera whose detection value exceeds the predetermined range is not detected (“No” in S62). On the other hand, when a camera whose detected value exceeds a predetermined range is detected (“Yes” in S62), the reliability calculation unit 140 decreases the reliability of the detected camera (S63), and proceeds to S64. When the operation is shifted to S64, the reliability calculation unit 140 determines the adjusted image quality adjustment value using the decreased reliability (S64).
  • FIG. 16 is a flowchart illustrating an example of an operation of increasing the detected camera threshold.
  • the reliability calculation unit 140 when the subjects imaged by the cameras 20-1 to 20-N are not within the same or similar range, the reliability calculation unit 140 (“No” based on S61). ), The operation is shifted to S64. On the other hand, when the subjects imaged by the cameras 20-1 to 20-N are within the same or similar range (“Yes” based on S61), the reliability calculation unit 140 operates in S62. To migrate.
  • the reliability calculation unit 140 shifts the operation to S64 when a camera whose detection value exceeds the predetermined range is not detected (“No” in S62). On the other hand, when a camera whose detected value exceeds a predetermined range is detected (“Yes” in S62), the reliability calculation unit 140 increases the threshold value of the detected camera (S65), and proceeds to S64. When the operation is shifted to S64, the reliability calculation unit 140 determines the adjusted image quality adjustment value by using the increased threshold (S64).
  • FIG. 17 is a flowchart illustrating an overall operation example of the information processing system according to the second embodiment of the present disclosure.
  • the cameras 20-1 to 20-N perform detection and calculation of image quality adjustment values (S71).
  • the cameras 20-1 to 20-N transmit the detection value and the pre-adjustment image quality adjustment value via the transmission line (S72).
  • the information processing apparatus 10B When the information processing apparatus 10B receives the detection value and the image quality adjustment value, the information processing apparatus 10B calculates the reliability (S73), determines the magnitude relationship between the reliability and the threshold (S74), and adjusts based on the determination result. An image quality adjustment value is calculated (S75). Subsequently, the information processing apparatus 10B transmits the adjusted image quality adjustment value to the cameras 20-1 to 20-N via the transmission line (S76), and the cameras 20-1 to 20-N transmit the adjusted image quality values. When the adjustment value is received, the image quality adjustment value is set based on the adjusted image quality adjustment value (S77). Thereafter, S71 to S77 are repeatedly executed.
  • FIG. 18 is a block diagram illustrating a hardware configuration example of the information processing apparatus 10 according to the embodiment of the present disclosure.
  • the information processing apparatus 10 includes a CPU (Central Processing unit) 901, a ROM (Read Only Memory) 903, and a RAM (Random Access Memory) 905.
  • the information processing apparatus 10 may include a host bus 907, a bridge 909, an external bus 911, an interface 913, an input device 915, an output device 917, a storage device 919, a drive 921, a connection port 923, and a communication device 925.
  • the information processing apparatus 10 may include a processing circuit called a DSP (Digital Signal Processor) or ASIC (Application Specific Integrated Circuit) instead of or in addition to the CPU 901.
  • DSP Digital Signal Processor
  • ASIC Application Specific Integrated Circuit
  • the CPU 901 functions as an arithmetic processing device and a control device, and controls all or a part of the operation in the information processing device 10 according to various programs recorded in the ROM 903, the RAM 905, the storage device 919, or the removable recording medium 927.
  • the ROM 903 stores programs and calculation parameters used by the CPU 901.
  • the RAM 905 temporarily stores programs used in the execution of the CPU 901, parameters that change as appropriate during the execution, and the like.
  • the CPU 901, the ROM 903, and the RAM 905 are connected to each other by a host bus 907 configured by an internal bus such as a CPU bus. Further, the host bus 907 is connected to an external bus 911 such as a PCI (Peripheral Component Interconnect / Interface) bus via a bridge 909.
  • PCI Peripheral Component Interconnect / Interface
  • the input device 915 is a device operated by the user, such as a mouse, a keyboard, a touch panel, a button, a switch, and a lever.
  • the input device 915 may include a microphone that detects the user's voice.
  • the input device 915 may be, for example, a remote control device using infrared rays or other radio waves, or may be an external connection device 929 such as a mobile phone that supports the operation of the information processing device 10.
  • the input device 915 includes an input control circuit that generates an input signal based on information input by the user and outputs the input signal to the CPU 901. The user operates the input device 915 to input various data to the information processing device 10 or instruct a processing operation.
  • An imaging device 933 which will be described later, can also function as an input device by imaging a user's hand movement, a user's finger, and the like. At this time, the pointing position may be determined according to the movement of the hand or the direction of the finger.
  • the output device 917 is a device that can notify the user of the acquired information visually or audibly.
  • the output device 917 is, for example, a display device such as an LCD (Liquid Crystal Display), a PDP (Plasma Display Panel), an organic EL (Electro-Luminescence) display, a projector, an audio output device such as a hologram display device, a speaker and headphones, As well as a printer device.
  • the output device 917 outputs the result obtained by the processing of the information processing device 10 as a video such as text or an image, or outputs it as a sound such as voice or sound.
  • the output device 917 may include a light or the like to brighten the surroundings.
  • the storage device 919 is a data storage device configured as an example of a storage unit of the information processing device 10.
  • the storage device 919 includes, for example, a magnetic storage device such as an HDD (Hard Disk Drive), a semiconductor storage device, an optical storage device, or a magneto-optical storage device.
  • the storage device 919 stores programs executed by the CPU 901, various data, various data acquired from the outside, and the like.
  • the drive 921 is a reader / writer for a removable recording medium 927 such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory, and is built in or externally attached to the information processing apparatus 10.
  • the drive 921 reads information recorded on the attached removable recording medium 927 and outputs the information to the RAM 905.
  • the drive 921 writes a record in the attached removable recording medium 927.
  • the connection port 923 is a port for directly connecting a device to the information processing apparatus 10.
  • the connection port 923 can be, for example, a USB (Universal Serial Bus) port, an IEEE 1394 port, a SCSI (Small Computer System Interface) port, or the like.
  • the connection port 923 may be an RS-232C port, an optical audio terminal, an HDMI (registered trademark) (High-Definition Multimedia Interface) port, or the like.
  • Various data can be exchanged between the information processing apparatus 10 and the external connection device 929 by connecting the external connection device 929 to the connection port 923.
  • the communication device 925 is a communication interface configured with, for example, a communication device for connecting to the communication network 931.
  • the communication device 925 can be, for example, a communication card for wired or wireless LAN (Local Area Network), Bluetooth (registered trademark), or WUSB (Wireless USB).
  • the communication device 925 may be a router for optical communication, a router for ADSL (Asymmetric Digital Subscriber Line), or a modem for various communication.
  • the communication device 925 transmits and receives signals and the like using a predetermined protocol such as TCP / IP with the Internet and other communication devices, for example.
  • the communication network 931 connected to the communication device 925 is a wired or wireless network, such as the Internet, a home LAN, infrared communication, radio wave communication, or satellite communication.
  • the first image quality adjustment value of each of the cameras 20-1 to 20-N acquired from the cameras 20-1 to 20-N and the reliability of each camera.
  • an information processing apparatus 10A including an adjustment value determination unit 130A that determines the second image quality adjustment value of each of the cameras 20-1 to 20-N is provided. According to such a configuration, it is possible to improve the accuracy of image quality adjustment of each of the cameras 20-1 to 20-N.
  • the following configurations also belong to the technical scope of the present disclosure.
  • (1) Determination of an adjustment value for determining a second image quality adjustment value of each of the plurality of cameras based on a first image quality adjustment value of each of the plurality of cameras acquired from a plurality of cameras and a reliability of each of the plurality of cameras. Comprising a part, Information processing device.
  • the information processing apparatus includes: A reliability calculation unit that calculates the reliability based on the first image quality adjustment value; The information processing apparatus according to (1).
  • the reliability calculation unit calculates a difference value between the first image quality adjustment value and a predetermined reference adjustment value for each camera as the reliability.
  • the information processing apparatus according to (2) Determination of an adjustment value for determining a second image quality adjustment value of each of the plurality of cameras based on a first image quality adjustment value of each of the plurality of cameras acquired from a plurality of cameras and a reliability of each of the plurality of cameras.
  • Information processing device includes: A reliability calculation unit that calculates the reliability based on
  • the adjustment value determination unit determines the second image quality adjustment value as the reference adjustment value when the reliability exceeds a predetermined threshold; The information processing apparatus according to (3). (5) The adjustment value determination unit determines the second image quality adjustment value as the first image quality adjustment value when the difference value does not exceed the threshold. The information processing apparatus according to (4). (6) The reference adjustment value is a predetermined representative value for one or a plurality of cameras excluding a camera that uses the reference adjustment value for calculating the reliability among the plurality of cameras. The information processing apparatus according to any one of (3) to (5).
  • the representative value is an intermediate value, an average value, a minimum value, or a maximum value regarding one or a plurality of cameras excluding a camera that uses the reference adjustment value for calculating the reliability among the plurality of cameras.
  • the reliability calculation unit calculates a difference value between results obtained by multiplying the matrix by a predetermined vector for all combinations of the matrices. Calculating the reliability, The information processing apparatus according to (2).
  • the reliability calculation unit calculates the reliability by calculating an integral value for a difference value between the functions for all combinations of the functions.
  • the information processing apparatus according to (2) When the first image quality adjustment value is given as a function, the reliability calculation unit calculates the reliability by calculating an integral value for a difference value between the functions for all combinations of the functions.
  • the reliability calculation unit calculates the reliability by calculating a total value for a difference value between corresponding values for all the combinations.
  • the reliability calculation unit is configured to detect the detection camera. Changing a predetermined value related to the calculation of the reliability in The information processing apparatus according to (4) or (5).
  • the reliability calculation unit decreases the reliability of the detection camera; The information processing apparatus according to (11).
  • the reliability calculation unit increases the threshold value of the detection camera; The information processing apparatus according to (11).
  • the adjustment value determination unit determines whether or not the subject imaged by each of the plurality of cameras is within the same or similar range based on the positions and postures of the plurality of cameras.
  • the information processing apparatus according to any one of (11) to (13).
  • the information processing apparatus includes: A reliability acquisition unit for acquiring the reliability of each of the plurality of cameras; The information processing apparatus according to (1).
  • the adjustment value determination unit determines the first image quality adjustment value of the camera with the highest reliability as the second image quality adjustment value of each of the plurality of cameras.
  • the first image quality adjustment value includes a value related to at least one of white balance, matrix calculation, aperture, gain, gamma correction, knee correction, contour enhancement, and noise reduction of an image captured by the camera.
  • the information processing apparatus according to any one of (1) to (16).
  • An information processing apparatus comprising a determination unit; An information processing system.
  • Information processing system 10 (10A, 10B) Information processing apparatus 110A, 110B Data acquisition part 120 Reliability acquisition part 130A, 130B Adjustment value determination part 140 Reliability calculation part 20 Camera 210 Lens 230 Imager 240 Control apparatus 250 Preprocessing part 260 Detection unit 271 Adjustment value calculation lens control unit 272 Adjustment value selection unit 273 Adjustment value selection unit 274 Image quality adjustment unit 280 Post-processing unit 290 Display unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Studio Devices (AREA)
  • Details Of Cameras Including Film Mechanisms (AREA)

Abstract

【課題】複数のカメラ各々の画質調整の精度を向上させることが可能な技術が提供されることが望まれる。 【解決手段】複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、情報処理装置が提供される。

Description

情報処理装置、情報処理方法、プログラムおよび情報処理システム
 本開示は、情報処理装置、情報処理方法、プログラムおよび情報処理システムに関する。
 近年、複数のカメラ各々によって撮像された画像を利用する技術が知られている。例えば、複数のカメラ各々によって撮像された画像を合成する技術が開示されている(例えば、特許文献1参照)。複数のカメラ各々の画質調整は、ユーザの手動でなされるか、カメラごとに独立的に自動でなされるのが一般的である。
特開2004-242047号公報
 しかし、複数のカメラ各々の画質調整の精度を向上させることが可能な技術が提供されることが望まれる。
 本開示によれば、複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、情報処理装置が提供される。
 本開示によれば、複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定することを含む、情報処理方法が提供される。
 本開示によれば、コンピュータを、複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、情報処理装置として機能させるためのプログラムが提供される。
 本開示によれば、複数のカメラと、前記複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、情報処理装置と、を有する、情報処理システムが提供される。
 以上説明したように本開示によれば、複数のカメラ各々の画質調整の精度を向上させることが可能な技術が提供される。なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の実施形態に係る情報処理システムの構成例を示す図である。 本実施形態に係るカメラの機能構成例を示すブロック図である。 画質調整の例を示す図である。 本開示の第1の実施形態に係る情報処理装置の機能構成例を示すブロック図である。 複数のカメラそれぞれの信頼度と調整前の画質調整値および調整後の画質調整値との関係の例を示す図である。 本開示の第2の実施形態に係る情報処理装置の機能構成例を示すブロック図である。 画質調整項としてホワイトバランスを行う場合(画質調整パターンとして多項式関数の係数調整を行う場合)における調整後の画質調整値を決定する動作の流れを示すフローチャートである。 信頼度の判定結果と調整前後の画質調整ベクトルとの対応関係の例を示す図である。 画質調整項としてマトリックス演算の更新を行う場合(画質調整パターンとしてマトリックス演算を行う場合)における調整後の画質調整値を決定する動作の流れを示すフローチャートである。 画質調整項としてマトリックス演算の更新を行う場合(画質調整パターンとしてマトリックス演算を行う場合)における調整後の画質調整値を決定する動作(変形例)の流れを示すフローチャートである。 画質調整項としてマトリックス演算の更新を行う場合(画質調整パターンとしてマトリックス演算を行う場合)における調整後の画質調整値を決定する動作(変形例)の流れを示すフローチャートである。 画質調整項としてガンマ補正を行う場合(画質調整パターンとして指数関数を用いた画質調整を行う場合)における調整後の画質調整値を決定する動作の流れを示すフローチャートである。 異なる関数形状それぞれから得られた関数テーブルの例を示す図である。 関数テーブルを用いて画質調整を行う動作の流れを示すフローチャートである。 検出したカメラにおける信頼度を減少させる動作の例を示すフローチャートである。 検出したカメラの閾値を増加させる動作の例を示すフローチャートである。 本開示の第2の実施形態に係る情報処理システムの全体的な動作例を示すフローチャートである。 本開示の実施形態に係る情報処理装置のハードウェア構成例を示すブロック図である。
 以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
 また、本明細書および図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なる数字を付して区別する場合もある。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。
 なお、説明は以下の順序で行うものとする。
 0.背景
 1.本開示の実施形態
  1.1.システム構成例
  1.2.機能構成例
  1.3.画質調整項の例
 2.第1の実施形態
 3.第2の実施形態
 4.ハードウェア構成例
 5.むすび
 <0.背景>
 まず、本開示の実施形態の背景について説明する。近年、複数のカメラ各々によって撮像された画像を利用する技術が知られている。例えば、複数のカメラ各々によって撮像された画像を合成する技術が開示されている(例えば、特開2004-242047号公報参照)。ここで、複数のカメラ各々によって撮像された画像をより高品位にするためには、複数のカメラ間で画質が揃うように複数のカメラ各々の画質調整がなされるのが望ましい。画質としては、色、明るさ、解像度、ノイズ感および質感などが挙げられる。
 現在では、複数のカメラ各々の画質調整として様々な手法が知られている。第一の手法として、ユーザの手動によって複数のカメラ各々の画質調整を行う手法が知られている。すなわち、第一の手法においては、ユーザが複数のカメラ各々によって撮像された画像を目視によって確認しながら複数のカメラ各々の画質調整を手動で行うと、画質調整値が固定値として利用される。しかし、第一の手法では、時間の経過に伴って複数のカメラ各々の撮像領域の明るさが変化したり、撮像領域に入り込む照明光の色が変化したりすると、複数のカメラ各々の画質が変動して画像の品位が低下してしまう。
 かかる状況を改善するためには、複数のカメラ各々の画質を自動的に調整するのが望ましい。そこで、第二の手法として、複数のカメラ各々の画質調整をカメラごとに独立的に自動で行う手法が知られている。しかし、第二の手法では、複数のカメラ間において画質にずれが発生するため、画像の品位が低下してしまう。そこで、本明細書においては、複数のカメラ各々の画質調整の精度を向上させることが可能な技術が提供される技術を主に提案する。
 <1.本開示の実施形態>
 [1.1.システム構成例]
 続いて、図面を参照しながら、本開示の実施形態に係る情報処理システムの構成例について説明する。図1は、本開示の実施形態に係る情報処理システムの構成例を示す図である。図1に示すように、本開示の実施形態に係る情報処理システム1は、情報処理装置10およびカメラ20-1~20-N(ただし、Nは2以上の整数)を備える。図1に示すように、例えば、カメラ20-1~20-Nは、同一の被写体Bjを撮像する。これによって、異なる複数の位置から撮像された同一の被写体Bjの画像が得られる。なお、図1に示した例では、被写体Bjが人物であるが、被写体Bjは人物以外の対象物であってもよい。
 また、情報処理装置10とカメラ20-1~20-Nとは、図示しないネットワークを介して通信を行うことが可能である。情報処理装置10は、カメラ20-1から図示しないネットワークを介してカメラ20-1の画質調整値(第一の画質調整値、以下、「調整後の画質調整値」と区別するために「調整前の画質調整値」とも言う。)を取得し、画質調整値を調整することによって調整後の画質調整値(第二の画質調整値)を得る。そして、情報処理装置10は、調整後の画質調整値をカメラ20-1に送信することによって、調整後の画質調整値による画質調整を行わせる。カメラ20-2~20-Nについてもカメラ20-1と同様の手順によって画質調整がなされる。
 なお、図1に示した例では、情報処理装置10がカメラ20-1~20-Nの外部に存在しているが、情報処理装置10は、カメラ20-1~20-Nの一部または全部の内部に存在していてもよい。また、図1に示した例では、情報処理装置10は、ノート型のPC(Personal Computer)であるが、情報処理装置10はノート型のPCに限定されない。例えば、情報処理装置10は、スマートフォンであってもよいし、携帯電話であってもよいし、タブレット端末であってもよいし、ゲーム機であってもよい。
 以上、本開示の実施形態に係る情報処理システム1の構成例について説明した。
 [1.2.機能構成例]
 続いて、本開示の実施形態に係るカメラ20-1~20-Nの機能はほぼ同様であるため、カメラ20-1~20-Nを代表して、カメラ20-1の機能構成例について説明する。図2は、本実施形態に係るカメラ20-1の機能構成例を示すブロック図である。図2に示したように、カメラ20-1は、レンズ210、絞り220、イメージャ230、レンズ・絞り制御装置240、前処理部250、検波部260、調整値演算レンズ制御部271,調整値選択部272、調整値選択部273、画質調整部274、後処理部280および記録・表示部290を備える。
 レンズ210は、光を屈折させて集束させるための光学素子である。絞り220は、レンズ210に入ってくる光の量を調節する機構である。イメージャ230は、レンズ210によって集束された光を電気信号に変換する半導体素子である。例えば、イメージャ230は、CCD(Charge Coupled Device)であってもよいし、COMS(Complementary Metal Oxide Semiconductor)であってもよい。レンズ210および絞り220は、画像の解像度に影響を与え得る。
 前処理部250は、当該カメラによって撮像される画像と他のカメラによって撮像される画像との間に生じる製造ばらつきを低減する処理を行う。例えば、前処理部250は、所定の条件下でのイメージャ230の画質(例えば、画像の明るさおよび色など)の測定結果に基づいて、イメージャ230から出力される画像の調整を行う。検波部260は、前処理部250から出力された撮像結果から検波を行う。
 調整値演算レンズ制御部271は、検波部260から出力された検波値に基づいて、調整前の画質調整値を算出する。そして、調整値演算レンズ制御部271は、調整前の画質調整値と検波部260によって検波が行われて得られた検波値とを図示しないネットワークを介して情報処理装置10に提供する。情報処理装置10は、調整前の画質調整値と検波値とを受信すると、受信した調整前の画質調整値と検波値とに基づいて、調整後の画質調整値を算出する。なお、調整後の画質調整値の算出については後に詳細に説明する。
 また、調整値演算レンズ制御部271は、情報処理装置10から調整後の画質調整値を取得する。調整値演算レンズ制御部271は、調整後の画質調整値がレンズ210または絞り220の制御に関する場合には、調整後の画質調整値を調整値選択部272に出力する。一方、調整値演算レンズ制御部271は、調整後の画質調整値が画像処理に関する場合には、調整後の画質調整値を調整値選択部273に出力する。
 調整値選択部272は、調整値演算レンズ制御部271によって算出された調整値と情報処理装置10から受信した調整後の画質調整値とのいずれかを選択する。そして、調整値選択部272は、レンズ・絞り制御装置240に対して選択結果を出力する。レンズ・絞り制御装置240は、調整値選択部272から出力された選択結果に基づいて、レンズ210または絞り220を制御する。レンズ210または絞り220が制御されると、画質が間接的に調整される。なお、本明細書においては、レンズ210または絞り220の制御も画質調整に含まれ得る。
 一方、調整値選択部273は、調整値演算レンズ制御部271によって算出された調整値と情報処理装置10から受信した調整後の画質調整値とのいずれかを選択する。そして、調整値選択部272は、画質調整部274に対して選択結果を出力する。画質調整部274は、調整値選択部273から出力された選択結果に基づいて、前処理部250から出力された画像に対して画質調整を行う。画質調整がなされると、画質が直接的に調整される。
 後処理部280は、後処理部280の後段に位置する記録・表示部290に出力される画像のサイズ調整を行う。また、後処理部280は、後処理部280の後段に位置する記録・表示部290に出力される画像に対して記録用エンコードを行う。また、記録・表示部290は、後処理部280から出力された画像を図示しない記憶部に記録したり、図示しない表示部に表示したりする。
 以上、本開示の実施形態に係るカメラ20-1の機能構成例について説明した。
 [1.3.画質調整項の例]
 続いて、本開示の実施形態に係る画質調整項の例について説明する。図3は、画質調整の例を示す図である。図3に示すように、本開示の実施形態においては、画質要素として、色、明るさ、解像感およびノイズ感(または質感)などを扱う。画質要素「色」を調整する画質調整項としては、ホワイトバランスおよびマトリックス演算などが想定される。
 また、画質要素「明るさ」を調整する画質調整項としては、絞り、ISO感度、ガンマ補正およびニー補正などが想定される。画質要素「解像感」を調整する画質調整項としては、絞りおよび輪郭強調などが想定される。画質要素「ノイズ感/質感」を調整する画質調整項としては、ノイズリダクションなどが想定される。
 したがって、補正前の画質調整値は、カメラによる撮像画像のホワイトバランス、マトリックス演算、絞り、ゲイン、ガンマ補正、ニー補正、輪郭強調、ノイズリダクションの少なくともいずれか一つに関する値を含んでよい。同様に、調整後の画質調整値は、カメラによる撮像画像のホワイトバランス、マトリックス演算、絞り、ゲイン、ガンマ補正、ニー補正、輪郭強調、ノイズリダクションの少なくともいずれか一つに関する値を含んでよい。
 また、図3に示すように、画質調整の種別(動的/静的)としては、撮像領域の時間的な変化に応じた画質調整の種別と、ユーザの指示に従った画質調整の種別とが想定される。本明細書においては、前者を動的な画質調整と称し(図3においては「動」と記載)、後者を静的な画質調整と称することがある(図3においては「静」と記載)。図3に示された画質調整項と画質調整の種別(動的/静的)との対応関係は、一例に過ぎないため、画質調整項と画質調整の種別(動的/静的)との対応関係は、図3に示した例に限定されない。
 本実施形態では、調整値決定部130A(図4)が、複数のカメラ各々の調整前の画質調整値と複数のカメラ各々の信頼度とに基づいて、複数のカメラ各々の調整後の画質調整値を決定する。これにより、複数のカメラ各々の画質調整の精度を向上させることが可能となる。このとき、図3に示すように、それぞれの画質調整項の画質調整(例えば、複数のカメラ各々の信頼度、信頼度と比較される閾値および比較結果に応じた調整後の画質調整値の決定など)は、いくつかのパターンに分類され、パターンごとになされ得る。なお、図3に示された画質調整項とパターンとの対応関係も、一例に過ぎないため、画質調整項とパターンとの対応関係も、図3に示した例に限定されない。
 <2.第1の実施形態>
 続いて、本開示の第1の実施形態について説明する。本開示の第1の実施形態は、上記した静的な画質調整に相当する。図4は、本開示の第1の実施形態に係る情報処理装置の機能構成例を示すブロック図である。図4に示すように、本開示の第1の実施形態に係る情報処理装置10Aは、データ取得部110Aと、信頼度取得部120と、調整値決定部130Aとを備える。また、図4に示すように、情報処理装置10Aは、図示しないネットワークを介してカメラ20-1~20-Nと接続されている。
 ここで、静的な画質調整は、カメラによって自動的に画質調整がなされる場合と比較して、よりユーザの意志が強く反映される画質調整である。そこで、カメラ20-1~20-Nそれぞれの調整後の画質調整値が、ユーザの選定した信頼度「高」であるカメラ(基準カメラ)の画質調整値に設定されるのがユーザにとって自然である。そのため、静的な画質調整では、信頼度「高」であるカメラの画質調整値に他のカメラの画質調整値を合わせるようにする。
 まず、データ取得部110Aは、カメラ20-1~20-Nから画像を取得する。また、信頼度取得部120は、カメラ20-1~20-Nそれぞれの信頼度を取得する。例えば、信頼度取得部120は、ユーザにより指定されたカメラ20-1~20-Nそれぞれの信頼度を取得する。調整値決定部130Aは、信頼度の最も高いカメラの調整前の画質調整値をカメラ20-1~20-Nそれぞれの調整後の画質調整値として決定する。
 図5は、カメラ20-1~20-Nそれぞれの信頼度と調整前の画質調整値および調整後の画質調整値との関係の例を示す図である。図5を参照すると、カメラ20-1の信頼度として「高」がユーザにより指定され、カメラ20-2~20-Nそれぞれの信頼度として「低」がユーザにより指定されている。そこで、図5に示すように、調整値決定部130Aは、信頼度の最も高いカメラ20-1の調整前の画質調整値にカメラ20-2~20-Nそれぞれの調整後の画質調整値を決定する。
 調整値決定部130Aによって決定されたカメラ20-1~20-Nそれぞれの調整後の画質調整値は、カメラ20-1~20-Nにそれぞれ送信される。カメラ20-1~20-Nにおいては、情報処理装置10Aから受信された調整後の画質調整値に基づいて、画質調整が行われる。これにより、カメラ20-1~20-Nそれぞれの画質調整値がカメラ20-1の画質調整値に設定されるため、カメラ20-1~20-Nそれぞれの画質調整の精度が向上される。
 <3.第2の実施形態>
 続いて、本開示の第2の実施形態について説明する。本開示の第2の実施形態は、上記した動的な画質調整に相当する。図6は、本開示の第2の実施形態に係る情報処理装置の機能構成例を示すブロック図である。図6に示すように、本開示の第2の実施形態に係る情報処理装置10Bは、データ取得部110Bと、信頼度算出部140と、調整値決定部130Bとを備える。また、図6に示すように、情報処理装置10Bは、図示しないネットワークを介してカメラ20-1~20-Nと接続されている。
 まず、データ取得部110Bは、カメラ20-1~20-Nそれぞれから画像および検波値のいずれか、もしくは両方を取得する。また、信頼度算出部140は、カメラ20-1~20-Nそれぞれの信頼度を算出する。例えば、信頼度算出部140は、カメラ20-1の調整前の画質調整値に基づいてカメラ20-1の信頼度を算出する。同様に、信頼度算出部140は、カメラ20-2~20-Nの信頼度を算出する。
 信頼度を算出する手法については特に限定されない。一例として、信頼度算出部140は、カメラごとに調整前の画質調整値と所定の基準調整値との差分値を信頼度として算出するとよい。この場合には、基準調整値に近いほど信頼度としては高くなるが、信頼度の値としては小さくなる。また、基準調整値も特に限定されない。一例として、基準調整値は、カメラ20-1~20-Nのうち当該基準調整値を信頼度の算出に用いるカメラを除く1または複数のカメラ(以下、「自カメラ以外のカメラ」とも言う。)に関する所定の代表値であってよい。
 代表値も特に限定されない。一例として、代表値は、カメラ20-1~20-Nのうち自カメラ以外のカメラに関する中間値、平均値、最小値または最大値であってもよい。あるいは、代表値は、カメラ20-1~20-Nに関する中間値、平均値、最小値または最大値であってもよい。
 また、調整値決定部130Bは、カメラ20-1の信頼度に基づいてカメラ20-1の調整後の画質調整値を決定する。より具体的には、調整値決定部130Bは、信頼度が所定の閾値(Thresh)を超える場合に、調整後の画質調整値を基準調整値に決定する。一方、調整値決定部130Bは、差分値が閾値(Thresh)を超えない場合に、調整後の画質調整値を調整前の画質調整値に決定する。同様にして、調整値決定部130Bは、カメラ20-1~20-Nそれぞれの調整後の画質調整値を決定する。
 調整値決定部130Bによって決定されたカメラ20-1~20-Nそれぞれの調整後の画質調整値は、カメラ20-1~20-Nにそれぞれ送信される。カメラ20-1~20-Nにおいては、情報処理装置10Bから受信された調整後の画質調整値に基づいて、画質調整が行われる。これにより、カメラ20-1~20-Nそれぞれの画質調整値がカメラ20-1の画質調整値に設定されるため、カメラ20-1~20-Nそれぞれの画質調整の精度が向上される。
 以下、具体例を挙げながら説明する。第一の例では、画質調整項としてホワイトバランスを行う場合(画質調整パターンとして多項式関数の係数調整を行う場合)(図3参照)を説明する。図7は、画質調整項としてホワイトバランスを行う場合(画質調整パターンとして多項式関数の係数調整を行う場合)における調整後の画質調整値を決定する動作の流れを示すフローチャートである。
 ここで、W、WおよびWは、画像検波によって決まるゲイン(画質調整値)である。C、CおよびCは、画像検波によって決まるオフセットである。α、αおよびαは、製造ばらつきによる補正ゲイン、β、βおよびβは、製造ばらつきによる補正オフセットである。r、gおよびbは、イメージャにおいて検出された信号値である。R、GおよびBは、ホワイトバランスがなされた後における信号値である。ここで、ホワイトバランス・ゲインは、1つの入力変数に対して1つの出力変数を算出することが可能な1変数関数y=f(x)によって表現され得る。
 まず、S1~S17の繰り返し処理の開始時において変数iに1が設定される。また、iがN以下であるという繰り返し処理の継続条件が設定される。また、iを1カウントアップするという繰り返し処理の終端処理が設定される(S11)。画質調整ベクトルWが(Wri,Wgi,Wbi)とされ(S12)、自カメラ以外のカメラに関する平均値を示すベクトルWaveが(Wri_ave,Wgi_ave,Wbi_ave)とされる(S13)。
 信頼度算出部140は、画質調整ベクトルWとベクトルWaveとの差分値が閾値以下である場合には、変数confに1を設定し、当該差分値が閾値を超える場合には、変数confに0を設定する(S14)。調整値決定部130Bは、confに1が設定されている場合には(S15において「Yes」)、S17に動作を移行させる。一方、調整値決定部130Bは、confに0が設定されている場合には(S15において「No」)、画質調整ベクトルWiをベクトルWaveで更新して(S16)、S17に動作を移行させる。
 S17に動作が移行されると、iが1カウントアップされ、iがN以下であるという繰り返し処理の継続条件が満たされれば、動作がS12に移行される。一方、iがN以下であるという繰り返し処理の継続条件が満たされなければ、動作がS18に移行される。そして、ホワイトバランスがなされた後における信号値であるR、GおよびBが、画質調整ベクトルWを係数とした関数によって得られる(S18)。
 図8は、信頼度の判定結果(conf)と調整前後の画質調整ベクトルW(W、WおよびW)との対応関係の例を示す図である。図8を参照すると、iが1である場合には、判定結果(conf)が1であるため(画質調整ベクトルWとベクトルWaveとの差分値が閾値以下であるため)、画質調整ベクトルWは、調整前後で変化していない。一方、iが2である場合には、判定結果(conf)が0であるため(画質調整ベクトルWとベクトルWaveとの差分値が閾値を超えているため)、画質調整ベクトルWは、ベクトルWaveに更新されている。
 続いて、第二の例では、画質調整項としてマトリックス演算の更新を行う場合(画質調整パターンとしてマトリックス演算を行う場合)(図3参照)を説明する。図9は、画質調整項としてマトリックス演算の更新を行う場合(画質調整パターンとしてマトリックス演算を行う場合)における調整後の画質調整値を決定する動作の流れを示すフローチャートである。
 ここで、ベクトルy=(y,u,v)はイメージャにおいて検出された信号値であり、yは輝度を示し、uは青系統の色彩と彩度を示し、vは赤系統の色彩と彩度を示している。マトリックス演算が更新された後における信号値であり、Yは輝度を示し、Uは青系統の色彩と彩度を示し、Vは赤系統の色彩と彩度を示している。行列Mは、ベクトルy=(y,u,v)をベクトルY(Y,U,V)に変換するための行列である。
 このように、調整前の画質調整値が複数の行列Mとして与えられる場合、例えば、信頼度算出部140は、行列Mに対して所定のベクトル(例えば、単位ベクトルe=(1,0,0)、e=(0,1,0)~e=(1,1,1)-1/3など)を掛け合わせた結果同士の差分値を、行列Mの組み合わせ全部について算出することによって信頼度Sijを算出してよい。そして、調整値決定部130Bは、信頼度Sijから各列において最小となるjを抽出し、抽出結果から最も多いjの値をkとして取得し、Mを調整後の画質調整値を与える行列とすればよい。
 まず、S21~S27の繰り返し処理の開始時において変数iに1が設定される。また、iがN以下であるという繰り返し処理の継続条件が設定される。また、iを1カウントアップするという繰り返し処理の終端処理が設定される(S21)。続いて、S22~S26の繰り返し処理の開始時において変数jに1が設定される。また、jがN以下であるという繰り返し処理の継続条件が設定される。また、jを1カウントアップするという繰り返し処理の終端処理が設定される(S22)。
 続いて、信頼度算出部140は、行列Mと行列Mとの間において所定のベクトル(例えば、単位ベクトルe=(1,0,0)、e=(0,1,0)~e=(1,1,1)-1/3など)との乗算結果の差分値を1からNまで合計して得られた値を信頼度Sijとして算出する(S23)。調整値決定部130Bは、信頼度Sijがk=1からNまでにおけるSikの最小値以下である場合には(S24)、Cを1カウントアップさせ(S25)、S26に動作を移行させる。
 S26に動作が移行されると、jが1カウントアップされ、jがN以下であるという繰り返し処理の継続条件が満たされれば、動作がS23に移行される。一方、iがN以下であるという繰り返し処理の継続条件が満たされなければ、動作がS27に移行される。S27に動作が移行されると、iが1カウントアップされ、iがN以下であるという繰り返し処理の継続条件が満たされれば、動作がS22に移行される。一方、iがN以下であるという繰り返し処理の継続条件が満たされなければ、動作がS28に移行される。
 続いて、調整値決定部130Bは、CからCまでの間における最大値をkとして取得する(S28)。そして、マトリックス演算が更新された後における信号値であるY、UおよびVが、行列Mによって得られる(S29)。この行列Mは、カメラ20-1~20-Nのすべてに対して適用されるため、情報処理装置10Bからカメラ20-1~20-Nのすべてに送信され、カメラ20-1~20-Nのすべてにおいて、画質調整に利用される。
 このようにして得られたCからCまでの間における最大値を基準調整値として利用してもよい。この例について、第二の例の変形例として説明する。図10および図11は、画質調整項としてマトリックス演算の更新を行う場合(画質調整パターンとしてマトリックス演算を行う場合)における調整後の画質調整値を決定する動作(変形例)の流れを示すフローチャートである。S21からS27までの動作は、図9に示したS21からS27までの動作と同様に実行される。
 続いて、CからCまでの間における最大値kがHとして取得される(S28)。続いて、S31~S36の繰り返し処理の開始時において変数iに1が設定される。また、iがN以下であるという繰り返し処理の継続条件が設定される。また、iを1カウントアップするという繰り返し処理の終端処理が設定される(S31)。
 続いて、信頼度算出部140は、行列Mと行列Mとの間において所定のベクトル(例えば、単位ベクトルe=(1,0,0)、e=(0,1,0)~e=(1,1,1)-1/3など)との乗算結果の差分値を1からNまで合計して得られた値を信頼度SiHとして算出する(S32)。
 信頼度算出部140は、信頼度SiHが閾値以下である場合には、変数confに1を設定し、当該信頼度SiHが閾値を超える場合には、変数confに0を設定する(S33)。調整値決定部130Bは、confに1が設定されている場合には(S34において「Yes」)、S36に動作を移行させる。一方、調整値決定部130Bは、confに0が設定されている場合には(S34において「No」)、行列Mを行列Mで更新して(S35)、S36に動作を移行させる。
 S36に動作が移行されると、iが1カウントアップされ、iがN以下であるという繰り返し処理の継続条件が満たされれば、動作がS32に移行される。一方、iがN以下であるという繰り返し処理の継続条件が満たされなければ、動作がS37に移行される。そして、マトリックス演算が更新された後における信号値であるY、UおよびVが、行列Mによって得られる(S37)。この行列Mは、カメラごとの行列であるため、カメラ20-1~20-Nにおいてそれぞれ画質調整に利用される。
 続いて、第三の例では、画質調整項としてガンマ補正を行う場合(画質調整パターンとして指数関数を用いた画質調整を行う場合)(図3参照)を説明する。図12は、画質調整項としてガンマ補正を行う場合(画質調整パターンとして指数関数を用いた画質調整を行う場合)における調整後の画質調整値を決定する動作の流れを示すフローチャートである。
 ここで、yはイメージャにおいて検出された信号値のうち輝度を示している。γは輝度を調整するための画質調整値である。関数fは、輝度yと画質調整値γとを入力値として変更後の輝度を出力する関数である。このように、調整前の画質調整値が複数の関数fとして与えられる場合、信頼度算出部140は、関数f同士の差分値に対する積分値を、関数fの組み合わせ全部について算出することによって信頼度Sijを算出してよい。そして、調整値決定部130Bは、信頼度Sijから各列において最小となるjを抽出し、抽出結果から最も多いjの値をkとして取得し、fを調整後の画質調整値を与える関数とすればよい。
 まず、S41~S47の繰り返し処理の開始時において変数iに1が設定される。また、iがN以下であるという繰り返し処理の継続条件が設定される。また、iを1カウントアップするという繰り返し処理の終端処理が設定される(S41)。続いて、S42~S46の繰り返し処理の開始時において変数jに1が設定される。また、jがN以下であるという繰り返し処理の継続条件が設定される。また、jを1カウントアップするという繰り返し処理の終端処理が設定される(S42)。
 続いて、信頼度算出部140は、関数fと関数fとの差分値に対する積分値を信頼度Sijとして算出する(S43)。調整値決定部130Bは、信頼度Sijがk=1からNまでにおけるSikの最小値以下である場合には(S44)、Cを1カウントアップさせ(S45)、S46に動作を移行させる。
 S46に動作が移行されると、jが1カウントアップされ、jがN以下であるという繰り返し処理の継続条件が満たされれば、動作がS43に移行される。一方、iがN以下であるという繰り返し処理の継続条件が満たされなければ、動作がS47に移行される。S47に動作が移行されると、iが1カウントアップされ、iがN以下であるという繰り返し処理の継続条件が満たされれば、動作がS42に移行される。一方、iがN以下であるという繰り返し処理の継続条件が満たされなければ、動作がS48に移行される。
 続いて、調整値決定部130Bは、CからCまでの間における最大値をkとして取得する(S48)。そして、画質調整値γが調整された後における信号値であるYが、調整後の画質調整値γによって得られる(S49)。この調整後の画質調整値γは、カメラ20-1~20-Nのすべてに対して適用されるため、情報処理装置10Bからカメラ20-1~20-Nのすべてに送信され、カメラ20-1~20-Nのすべてにおいて、画質調整に利用される。また、マトリックス演算の更新と同様に、CからCまでの間における最大値を基準調整値として利用してもよい。
 続いて、第四の例では、異なる関数形状(例えば、ガンマ補正に用いられる複数の指数関数など)それぞれから得られた関数テーブルを用いて画質調整を行う場合を説明する。図13は、異なる関数形状それぞれから得られた関数テーブルの例を示す図である。図13に示すように、関数f(y)と関数g(y)とにおいて関数形状が異なる場合、入力値yと出力値f(y)と出力値g(y)との対応関係があらかじめ関数テーブルとして用意される。第四の例では、この関数テーブルが利用される。
 図14は、関数テーブルを用いて画質調整を行う動作の流れを示すフローチャートである。まず、S51~S57の繰り返し処理の開始時において変数iに1が設定される。また、iがN以下であるという繰り返し処理の継続条件が設定される。また、iを1カウントアップするという繰り返し処理の終端処理が設定される(S51)。続いて、S52~S56の繰り返し処理の開始時において変数jに1が設定される。また、jがN以下であるという繰り返し処理の継続条件が設定される。また、jを1カウントアップするという繰り返し処理の終端処理が設定される(S52)。
 続いて、信頼度算出部140は、関数f(y)関数f(y)との差分値に対する積算値を信頼度Sijとして算出する(S53)。調整値決定部130Bは、信頼度Sijがk=1からNまでにおけるSikの最小値以下である場合には(S54)、Cを1カウントアップさせ(S55)、S56に動作を移行させる。
 S56に動作が移行されると、jが1カウントアップされ、jがN以下であるという繰り返し処理の継続条件が満たされれば、動作がS53に移行される。一方、iがN以下であるという繰り返し処理の継続条件が満たされなければ、動作がS57に移行される。S57に動作が移行されると、iが1カウントアップされ、iがN以下であるという繰り返し処理の継続条件が満たされれば、動作がS52に移行される。一方、iがN以下であるという繰り返し処理の継続条件が満たされなければ、動作がS58に移行される。
 続いて、調整値決定部130Bは、CからCまでの間における最大値をkとして取得する(S58)。そして、関数テーブルfが得られる(S49)。この関数テーブルfは、カメラ20-1~20-Nのすべてに対して適用されるため、情報処理装置10Bからカメラ20-1~20-Nのすべてに送信され、カメラ20-1~20-Nのすべてにおいて、画質調整に利用される。また、マトリックス演算の更新と同様に、CからCまでの間における最大値を基準調整値として利用してもよい。
 以上、第一の例から第四の例までを説明した。上記においては、信頼度の算出に関する所定の値は特に変化されなかったが、信頼度の算出に関する所定の値は状況に応じて変化されてもよい。例えば、信頼度算出部140は、カメラ20-1~20-Nそれぞれによって撮像される被写体が同一または類似の範囲内である場合、かつ、検波値が所定の範囲を超えるカメラ20-1~20-Nを検出した場合、検出したカメラにおける信頼度の算出に関する所定の値を変化させてもよい。
 このとき、調整値決定部130Bは、カメラ20-1~20-Nの位置および姿勢に基づいて、カメラ20-1~20-Nそれぞれによって撮像される被写体が同一または類似の範囲内であるか否かを判定してもよい。より詳細には、調整値決定部130Bは、カメラ20-1~20-Nの位置および姿勢に基づいて、カメラ20-1~20-Nの光軸を算出し、カメラ20-1~20-Nの光軸上の点が所定の空間に収まる場合が存在すれば、カメラ20-1~20-Nそれぞれによって撮像される被写体が同一または類似の範囲内であると判定してもよい。
 例えば、信頼度算出部140は、カメラ20-1~20-Nそれぞれによって撮像される被写体が同一または類似の範囲内である場合、かつ、検波値が所定の範囲を超えるカメラ20-1~20-Nを検出した場合、検出したカメラにおける信頼度を減少させてもよい。図15は、検出したカメラにおける信頼度を減少させる動作の例を示すフローチャートである。
 図15に示すように、信頼度算出部140は、カメラ20-1~20-Nそれぞれによって撮像される被写体が同一または類似の範囲内ではない場合には(S61に基づいておいて「No」)、S64に動作を移行させる。一方、信頼度算出部140は、カメラ20-1~20-Nそれぞれによって撮像される被写体が同一または類似の範囲内である場合には(S61に基づいておいて「Yes」)、S62に動作を移行させる。
 S62に動作を移行されると、信頼度算出部140は、検波値が所定の範囲を超えるカメラが検出されない場合(S62において「No」)、S64に動作を移行させる。一方、信頼度算出部140は、検波値が所定の範囲を超えるカメラが検出された場合(S62において「Yes」)、検出したカメラの信頼度を減少させ(S63)、S64に進む。S64に動作が移行されると、信頼度算出部140は、減少された信頼度を利用して、調整後の画質調整値を決定する(S64)。
 また、例えば、信頼度算出部140は、カメラ20-1~20-Nそれぞれによって撮像される被写体が同一または類似の範囲内である場合、かつ、検波値が所定の範囲を超えるカメラ20-1~20-Nを検出した場合、検出したカメラの閾値を増加させてもよい。図16は、検出したカメラの閾値を増加させる動作の例を示すフローチャートである。
 図16に示すように、信頼度算出部140は、カメラ20-1~20-Nそれぞれによって撮像される被写体が同一または類似の範囲内ではない場合には(S61に基づいておいて「No」)、S64に動作を移行させる。一方、信頼度算出部140は、カメラ20-1~20-Nそれぞれによって撮像される被写体が同一または類似の範囲内である場合には(S61に基づいておいて「Yes」)、S62に動作を移行させる。
 S62に動作を移行されると、信頼度算出部140は、検波値が所定の範囲を超えるカメラが検出されない場合(S62において「No」)、S64に動作を移行させる。一方、信頼度算出部140は、検波値が所定の範囲を超えるカメラが検出された場合(S62において「Yes」)、検出したカメラの閾値を増加させ(S65)、S64に進む。S64に動作が移行されると、信頼度算出部140は、増加された閾値を利用して、調整後の画質調整値を決定する(S64)。
 続いて、本開示の第2の実施形態に係る情報処理システムの全体的な動作例について説明する。図17は、本開示の第2の実施形態に係る情報処理システムの全体的な動作例を示すフローチャートである。図17に示すように、カメラ20-1~20-Nは、検波および画質調整値の演算を行う(S71)。続いて、カメラ20-1~20-Nは、伝送路を介して検波値および調整前の画質調整値を送信する(S72)。
 情報処理装置10Bは、検波値および画質調整値を受信すると、信頼度を演算し(S73)、信頼度と閾値との大小関係を判定して(S74)、判定結果に基づいて、調整後の画質調整値を算出する(S75)。続いて、情報処理装置10Bは、伝送路を介して調整後の画質調整値をカメラ20-1~20-Nに送信し(S76)、カメラ20-1~20-Nは、調整後の画質調整値を受信すると、調整後の画質調整値に基づいて画質調整値を設定する(S77)。以降においては、S71~S77が繰り返し実行される。
 <4.ハードウェア構成例>
 次に、図18を参照して、本開示の実施形態に係る情報処理装置10のハードウェア構成について説明する。図18は、本開示の実施形態に係る情報処理装置10のハードウェア構成例を示すブロック図である。
 図18に示すように、情報処理装置10は、CPU(Central Processing unit)901、ROM(Read Only Memory)903、およびRAM(Random Access Memory)905を含む。また、情報処理装置10は、ホストバス907、ブリッジ909、外部バス911、インターフェース913、入力装置915、出力装置917、ストレージ装置919、ドライブ921、接続ポート923、通信装置925を含んでもよい。情報処理装置10は、CPU901に代えて、またはこれとともに、DSP(Digital Signal Processor)またはASIC(Application Specific Integrated Circuit)と呼ばれるような処理回路を有してもよい。
 CPU901は、演算処理装置および制御装置として機能し、ROM903、RAM905、ストレージ装置919、またはリムーバブル記録媒体927に記録された各種プログラムに従って、情報処理装置10内の動作全般またはその一部を制御する。ROM903は、CPU901が使用するプログラムや演算パラメータなどを記憶する。RAM905は、CPU901の実行において使用するプログラムや、その実行において適宜変化するパラメータなどを一時的に記憶する。CPU901、ROM903、およびRAM905は、CPUバスなどの内部バスにより構成されるホストバス907により相互に接続されている。さらに、ホストバス907は、ブリッジ909を介して、PCI(Peripheral Component Interconnect/Interface)バスなどの外部バス911に接続されている。
 入力装置915は、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチおよびレバーなど、ユーザによって操作される装置である。入力装置915は、ユーザの音声を検出するマイクロフォンを含んでもよい。入力装置915は、例えば、赤外線やその他の電波を利用したリモートコントロール装置であってもよいし、情報処理装置10の操作に対応した携帯電話などの外部接続機器929であってもよい。入力装置915は、ユーザが入力した情報に基づいて入力信号を生成してCPU901に出力する入力制御回路を含む。ユーザは、この入力装置915を操作することによって、情報処理装置10に対して各種のデータを入力したり処理動作を指示したりする。また、後述する撮像装置933も、ユーザの手の動き、ユーザの指などを撮像することによって、入力装置として機能し得る。このとき、手の動きや指の向きに応じてポインティング位置が決定されてよい。
 出力装置917は、取得した情報をユーザに対して視覚的または聴覚的に通知することが可能な装置で構成される。出力装置917は、例えば、LCD(Liquid Crystal Display)、PDP(Plasma Display Panel)、有機EL(Electro-Luminescence)ディスプレイ、プロジェクタなどの表示装置、ホログラムの表示装置、スピーカおよびヘッドホンなどの音声出力装置、ならびにプリンタ装置などであり得る。出力装置917は、情報処理装置10の処理により得られた結果を、テキストまたは画像などの映像として出力したり、音声または音響などの音声として出力したりする。また、出力装置917は、周囲を明るくするためライトなどを含んでもよい。
 ストレージ装置919は、情報処理装置10の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置919は、例えば、HDD(Hard Disk Drive)などの磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス、または光磁気記憶デバイスなどにより構成される。このストレージ装置919は、CPU901が実行するプログラムや各種データ、および外部から取得した各種のデータなどを格納する。
 ドライブ921は、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなどのリムーバブル記録媒体927のためのリーダライタであり、情報処理装置10に内蔵、あるいは外付けされる。ドライブ921は、装着されているリムーバブル記録媒体927に記録されている情報を読み出して、RAM905に出力する。また、ドライブ921は、装着されているリムーバブル記録媒体927に記録を書き込む。
 接続ポート923は、機器を情報処理装置10に直接接続するためのポートである。接続ポート923は、例えば、USB(Universal Serial Bus)ポート、IEEE1394ポート、SCSI(Small Computer System Interface)ポートなどであり得る。また、接続ポート923は、RS-232Cポート、光オーディオ端子、HDMI(登録商標)(High-Definition Multimedia Interface)ポートなどであってもよい。接続ポート923に外部接続機器929を接続することで、情報処理装置10と外部接続機器929との間で各種のデータが交換され得る。
 通信装置925は、例えば、通信ネットワーク931に接続するための通信デバイスなどで構成された通信インターフェースである。通信装置925は、例えば、有線または無線LAN(Local Area Network)、Bluetooth(登録商標)、またはWUSB(Wireless USB)用の通信カードなどであり得る。また、通信装置925は、光通信用のルータ、ADSL(Asymmetric Digital Subscriber Line)用のルータ、または、各種通信用のモデムなどであってもよい。通信装置925は、例えば、インターネットや他の通信機器との間で、TCP/IPなどの所定のプロトコルを用いて信号などを送受信する。また、通信装置925に接続される通信ネットワーク931は、有線または無線によって接続されたネットワークであり、例えば、インターネット、家庭内LAN、赤外線通信、ラジオ波通信または衛星通信などである。
 以上、情報処理装置10のハードウェア構成の一例を示した。
 <2.むすび>
 以上説明したように、本開示の実施形態によれば、カメラ20-1~20-Nから取得したカメラ20-1~20-N各々の第一の画質調整値とカメラ各々の信頼度とに基づいて、カメラ20-1~20-N各々の第二の画質調整値を決定する調整値決定部130Aを備える、情報処理装置10Aが提供される。かかる構成によれば、カメラ20-1~20-N各々の画質調整の精度を向上させることが可能となる。
 以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
 また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏し得る。
 なお、以下のような構成も本開示の技術的範囲に属する。
(1)
 複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、
 情報処理装置。
(2)
 前記情報処理装置は、
 前記第一の画質調整値に基づいて、前記信頼度を算出する信頼度算出部を備える、
 前記(1)に記載の情報処理装置。
(3)
 前記信頼度算出部は、カメラごとに前記第一の画質調整値と所定の基準調整値との差分値を前記信頼度として算出する、
 前記(2)に記載の情報処理装置。
(4)
 前記調整値決定部は、前記信頼度が所定の閾値を超える場合に、前記第二の画質調整値を前記基準調整値に決定する、
 前記(3)に記載の情報処理装置。
(5)
 前記調整値決定部は、前記差分値が前記閾値を超えない場合に、前記第二の画質調整値を前記第一の画質調整値に決定する、
 前記(4)に記載の情報処理装置。
(6)
 前記基準調整値は、前記複数のカメラのうち前記基準調整値を前記信頼度の算出に用いるカメラを除く1または複数のカメラに関する所定の代表値である、
 前記(3)~(5)のいずれか一項に記載の情報処理装置。
(7)
 前記代表値は、前記複数のカメラのうち前記基準調整値を前記信頼度の算出に用いるカメラを除く1または複数のカメラに関する中間値、平均値、最小値または最大値である、
 前記(6)に記載の情報処理装置。
(8)
 前記信頼度算出部は、前記第一の画質調整値が行列として与えられる場合、前記行列に対して所定のベクトルを掛け合わせた結果同士の差分値を、前記行列の組み合わせ全部について算出することによって前記信頼度を算出する、
 前記(2)に記載の情報処理装置。
(9)
 前記信頼度算出部は、前記第一の画質調整値が関数として与えられる場合、前記関数同士の差分値に対する積分値を、前記関数の組み合わせ全部について算出することによって前記信頼度を算出する、
 前記(2)に記載の情報処理装置。
(10)
 前記信頼度算出部は、前記第一の画質調整値が複数の値の組み合わせとして与えられる場合、対応する値同士の差分値に対する合計値を、前記組み合わせ全部について算出することによって前記信頼度を算出する、
 前記(2)に記載の情報処理装置。
(11)
 前記信頼度算出部は、前記複数のカメラそれぞれによって撮像される被写体が同一または類似の範囲内である場合、かつ、検波値が所定の範囲を超えるカメラを検出カメラとして検出した場合、前記検出カメラにおける前記信頼度の算出に関する所定の値を変化させる、
 前記(4)または(5)に記載の情報処理装置。
(12)
 前記信頼度算出部は、前記検出カメラの前記信頼度を減少させる、
 前記(11)に記載の情報処理装置。
(13)
 前記信頼度算出部は、前記検出カメラの前記閾値を増加させる、
 前記(11)に記載の情報処理装置。
(14)
 前記調整値決定部は、前記複数のカメラの位置および姿勢に基づいて、前記複数のカメラそれぞれによって撮像される前記被写体が同一または類似の範囲内であるか否かを判定する、
 前記(11)~(13)のいずれか一項に記載の情報処理装置。
(15)
 前記情報処理装置は、
 前記複数のカメラそれぞれの信頼度を取得する信頼度取得部を備える、
 前記(1)に記載の情報処理装置。
(16)
 前記調整値決定部は、前記信頼度の最も高いカメラの前記第一の画質調整値を前記複数のカメラそれぞれの前記第二の画質調整値として決定する、
 前記(15)に記載の情報処理装置。
(17)
 前記第一の画質調整値は、前記カメラによる撮像画像のホワイトバランス、マトリックス演算、絞り、ゲイン、ガンマ補正、ニー補正、輪郭強調、ノイズリダクションの少なくともいずれか一つに関する値を含む、
 前記(1)~(16)のいずれか一項に記載の情報処理装置。
(18)
 複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定することを含む、
 情報処理方法。
(19)
 コンピュータを、
 複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、
 情報処理装置として機能させるためのプログラム。
(20)
 複数のカメラと、
 前記複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、情報処理装置と、
 を有する、情報処理システム。
 1   情報処理システム
 10(10A、10B) 情報処理装置
 110A、110B データ取得部
 120 信頼度取得部
 130A、130B 調整値決定部
 140 信頼度算出部
 20  カメラ
 210 レンズ
 230 イメージャ
 240 制御装置
 250 前処理部
 260 検波部
 271 調整値演算レンズ制御部
 272 調整値選択部
 273 調整値選択部
 274 画質調整部
 280 後処理部
 290 表示部

Claims (20)

  1.  複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、
     情報処理装置。
  2.  前記情報処理装置は、
     前記第一の画質調整値に基づいて、前記信頼度を算出する信頼度算出部を備える、
     請求項1に記載の情報処理装置。
  3.  前記信頼度算出部は、カメラごとに前記第一の画質調整値と所定の基準調整値との差分値を前記信頼度として算出する、
     請求項2に記載の情報処理装置。
  4.  前記調整値決定部は、前記信頼度が所定の閾値を超える場合に、前記第二の画質調整値を前記基準調整値に決定する、
     請求項3に記載の情報処理装置。
  5.  前記調整値決定部は、前記差分値が前記閾値を超えない場合に、前記第二の画質調整値を前記第一の画質調整値に決定する、
     請求項4に記載の情報処理装置。
  6.  前記基準調整値は、前記複数のカメラのうち前記基準調整値を前記信頼度の算出に用いるカメラを除く1または複数のカメラに関する所定の代表値である、
     請求項3に記載の情報処理装置。
  7.  前記代表値は、前記複数のカメラのうち前記基準調整値を前記信頼度の算出に用いるカメラを除く1または複数のカメラに関する中間値、平均値、最小値または最大値である、
     請求項6に記載の情報処理装置。
  8.  前記信頼度算出部は、前記第一の画質調整値が行列として与えられる場合、前記行列に対して所定のベクトルを掛け合わせた結果同士の差分値を、前記行列の組み合わせ全部について算出することによって前記信頼度を算出する、
     請求項2に記載の情報処理装置。
  9.  前記信頼度算出部は、前記第一の画質調整値が関数として与えられる場合、前記関数同士の差分値に対する積分値を、前記関数の組み合わせ全部について算出することによって前記信頼度を算出する、
     請求項2に記載の情報処理装置。
  10.  前記信頼度算出部は、前記第一の画質調整値が複数の値の組み合わせとして与えられる場合、対応する値同士の差分値に対する合計値を、前記組み合わせ全部について算出することによって前記信頼度を算出する、
     請求項2に記載の情報処理装置。
  11.  前記信頼度算出部は、前記複数のカメラそれぞれによって撮像される被写体が同一または類似の範囲内である場合、かつ、検波値が所定の範囲を超えるカメラを検出カメラとして検出した場合、前記検出カメラにおける前記信頼度の算出に関する所定の値を変化させる、
     請求項4に記載の情報処理装置。
  12.  前記信頼度算出部は、前記検出カメラの前記信頼度を減少させる、
     請求項11に記載の情報処理装置。
  13.  前記信頼度算出部は、前記検出カメラの前記閾値を増加させる、
     請求項11に記載の情報処理装置。
  14.  前記調整値決定部は、前記複数のカメラの位置および姿勢に基づいて、前記複数のカメラそれぞれによって撮像される前記被写体が同一または類似の範囲内であるか否かを判定する、
     請求項11に記載の情報処理装置。
  15.  前記情報処理装置は、
     前記複数のカメラそれぞれの信頼度を取得する信頼度取得部を備える、
     請求項1に記載の情報処理装置。
  16.  前記調整値決定部は、前記信頼度の最も高いカメラの前記第一の画質調整値を前記複数のカメラそれぞれの前記第二の画質調整値として決定する、
     請求項15に記載の情報処理装置。
  17.  前記第一の画質調整値は、前記カメラによる撮像画像のホワイトバランス、マトリックス演算、絞り、ゲイン、ガンマ補正、ニー補正、輪郭強調、ノイズリダクションの少なくともいずれか一つに関する値を含む、
     請求項1に記載の情報処理装置。
  18.  複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定することを含む、
     情報処理方法。
  19.  コンピュータを、
     複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、
     情報処理装置として機能させるためのプログラム。
  20.  複数のカメラと、
     前記複数のカメラから取得した前記複数のカメラ各々の第一の画質調整値と前記複数のカメラ各々の信頼度とに基づいて、前記複数のカメラ各々の第二の画質調整値を決定する調整値決定部を備える、情報処理装置と、
     を有する、情報処理システム。
PCT/JP2016/078812 2015-12-24 2016-09-29 情報処理装置、情報処理方法、プログラムおよび情報処理システム WO2017110192A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017557743A JPWO2017110192A1 (ja) 2015-12-24 2016-09-29 情報処理装置、情報処理方法、プログラムおよび情報処理システム
US15/780,945 US10742862B2 (en) 2015-12-24 2016-09-29 Information processing device, information processing method, and information processing system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-251343 2015-12-24
JP2015251343 2015-12-24

Publications (1)

Publication Number Publication Date
WO2017110192A1 true WO2017110192A1 (ja) 2017-06-29

Family

ID=59089232

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/078812 WO2017110192A1 (ja) 2015-12-24 2016-09-29 情報処理装置、情報処理方法、プログラムおよび情報処理システム

Country Status (3)

Country Link
US (1) US10742862B2 (ja)
JP (1) JPWO2017110192A1 (ja)
WO (1) WO2017110192A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019188573A1 (ja) * 2018-03-28 2019-10-03 ソニー株式会社 演算装置、演算方法およびプログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001320616A (ja) * 2000-02-29 2001-11-16 Matsushita Electric Ind Co Ltd 撮像システム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6972796B2 (en) * 2000-02-29 2005-12-06 Matsushita Electric Industrial Co., Ltd. Image pickup system and vehicle-mounted-type sensor system
WO2012155951A1 (en) * 2011-05-13 2012-11-22 Valeo Schalter Und Sensoren Gmbh Camera arrangement for a vehicle and method for calibrating a camera and for operating a camera arrangement
US9402018B2 (en) * 2013-12-17 2016-07-26 Amazon Technologies, Inc. Distributing processing for imaging processing

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001320616A (ja) * 2000-02-29 2001-11-16 Matsushita Electric Ind Co Ltd 撮像システム

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019188573A1 (ja) * 2018-03-28 2019-10-03 ソニー株式会社 演算装置、演算方法およびプログラム
JPWO2019188573A1 (ja) * 2018-03-28 2021-04-01 ソニー株式会社 演算装置、演算方法およびプログラム
US11381737B2 (en) 2018-03-28 2022-07-05 Sony Corporation Arithmetic device and arithmetic method
JP7363770B2 (ja) 2018-03-28 2023-10-18 ソニーグループ株式会社 演算装置、演算方法およびプログラム

Also Published As

Publication number Publication date
US20180288297A1 (en) 2018-10-04
JPWO2017110192A1 (ja) 2018-10-11
US10742862B2 (en) 2020-08-11

Similar Documents

Publication Publication Date Title
JP6803982B2 (ja) 光学撮像方法および装置
JP5980294B2 (ja) データ処理装置、撮像装置、およびデータ処理方法
WO2021047345A1 (zh) 图像降噪方法、装置、存储介质及电子设备
US8780225B2 (en) Use of noise-optimized selection criteria to calculate scene white points
CN111327824B (zh) 拍摄参数的选择方法、装置、存储介质及电子设备
JP2020150331A (ja) 画像処理装置、画像処理装置の制御方法、システム、及び、プログラム
US9906732B2 (en) Image processing device, image capture device, image processing method, and program
WO2021104394A1 (zh) 图像处理方法及装置、电子设备、存储介质
JPWO2017169039A1 (ja) 画像処理装置、撮像装置、および画像処理方法、並びにプログラム
JP6655218B2 (ja) 撮像装置及び画像処理方法
CN113538223A (zh) 噪声图像生成方法、装置、电子设备及存储介质
WO2018168222A1 (ja) 情報処理装置、撮像装置および電子機器
JP2020058014A (ja) 映像処理装置、ビデオ会議システム、映像処理方法、およびプログラム
WO2017110192A1 (ja) 情報処理装置、情報処理方法、プログラムおよび情報処理システム
JP5998483B2 (ja) 音声信号処理装置、音声信号処理方法、プログラム及び記録媒体
JP2018185586A (ja) 画像処理装置および画像処理方法、撮像装置
US11523052B2 (en) Electronic apparatus, control method of electronic apparatus, and non-transitory computer readable medium
JP2005142890A (ja) ホワイトバランス調整方法および画像処理装置
CN112150357B (zh) 一种图像处理方法及移动终端
JP6514577B2 (ja) 画像処理装置および画像処理方法ならびに撮像装置
JP6808770B2 (ja) データ処理装置、撮像装置、およびデータ処理方法
WO2021199366A1 (ja) 情報処理装置、方法、プログラム、およびモデル
JP2018137580A (ja) 画像処理装置、画像処理方法、及び、プログラム
WO2022183876A1 (zh) 拍摄方法、装置、计算机可读存储介质及电子设备
WO2022244351A1 (ja) 画像処理装置、画像処理方法、プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16878090

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017557743

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15780945

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16878090

Country of ref document: EP

Kind code of ref document: A1