WO2018205229A1 - 补光控制装置、系统、方法以及移动设备 - Google Patents

补光控制装置、系统、方法以及移动设备 Download PDF

Info

Publication number
WO2018205229A1
WO2018205229A1 PCT/CN2017/083962 CN2017083962W WO2018205229A1 WO 2018205229 A1 WO2018205229 A1 WO 2018205229A1 CN 2017083962 W CN2017083962 W CN 2017083962W WO 2018205229 A1 WO2018205229 A1 WO 2018205229A1
Authority
WO
WIPO (PCT)
Prior art keywords
fill light
brightness
area
fill
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/CN2017/083962
Other languages
English (en)
French (fr)
Inventor
毛成林
暴林超
胡攀
曹子晟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Priority to PCT/CN2017/083962 priority Critical patent/WO2018205229A1/zh
Priority to CN201780067457.6A priority patent/CN109923856A/zh
Publication of WO2018205229A1 publication Critical patent/WO2018205229A1/zh
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene

Definitions

  • the present invention relates to the field of image acquisition technologies, and in particular, to a fill light control device, system, method, and mobile device.
  • the flash is a widely used light-filling device that can fill light in a dark/backlit shooting environment to produce better-performing photos. Taking pictures in a dark/backlit environment is mainly for the subject to get sufficient fill light, while the background fill light is less important, because when the distance is far from the subject, the light intensity will follow the object being photographed. The distance is attenuated, and even if the measured average brightness is low, turning on the flash is meaningless. Therefore, you only need to consider filling the close-up subject.
  • the existing flashing algorithm generally determines whether the fill light and the fill light intensity are needed by calculating the average brightness of the image or calculating the weighted brightness by the fixed divided area, and the precision of the fill light is not high, which is disadvantageous for improving the quality of the captured image.
  • a fill light control device includes a processor for acquiring an image and depth information associated with the image, and dividing the image into one or more regions according to the depth information, and according to the The brightness information corresponding to at least one of the one or more areas determines a fill light strategy for the captured picture.
  • a mobile device includes a camera and a fill light control device for capturing an image.
  • the fill light control device includes a processor for acquiring an image and depth information associated with the image, and dividing the image into one or more regions according to the depth information, and according to the one
  • the brightness information corresponding to at least one of the plurality of areas determines a fill light strategy for the captured picture of the camera.
  • a fill light control system comprising:
  • An acquisition module configured to acquire an image and depth information associated with the image
  • a segmentation module configured to divide the image into one or more regions according to the depth information
  • the fill light control module determines a fill light strategy for the captured image according to the brightness information corresponding to at least one of the one or more regions.
  • a fill light control method includes the following steps:
  • the fill light control device of the present invention By adopting the fill light control device of the present invention to formulate a fill light strategy for the photographing screen, it is possible to appropriately fill the photographed image by automatically adopting an appropriate fill light strategy at the time of photographing, so as to obtain a better exposure effect. image.
  • FIG. 1 is a structural block diagram of a fill light control device according to an embodiment of the present invention, wherein the fill light control device includes a fill light control system.
  • FIG. 2 is a block diagram showing the structure of the fill light control system of FIG. 1.
  • FIG. 3 is a schematic diagram of a depth image generated according to a scene to be photographed.
  • FIG. 4 is a schematic diagram of a grayscale image generated according to the scene to be photographed shown in FIG.
  • FIG. 5 is a structural block diagram of a mobile device according to an embodiment of the present invention.
  • FIG. 6 is a schematic flowchart of a fill light control method according to an embodiment of the present invention.
  • FIG. 7 is a schematic diagram of a refinement of an embodiment of step 602 of FIG. 6.
  • FIG. 8 is a schematic diagram showing the refinement of an embodiment of step 603 in FIG. 6.
  • FIG. 9 is a schematic diagram showing the refinement of another embodiment of step 603 in FIG. 6.
  • FIG. 10 is a schematic diagram showing the refinement of an embodiment of step 901 in FIG. 9.
  • FIG. 1 is a structural block diagram of a fill light control device 30 according to an embodiment of the present invention.
  • the fill light control device 30 is configured to determine a fill light strategy for the captured image of a camera to perform appropriate fill light on the captured image, thereby improving the quality of the captured image.
  • the fill light control device 30 includes a processor 31 and a fill light control system 32.
  • the processor 31 can be a central processing unit (CPU), a microprocessor, a digital signal processor, or other data processing chip.
  • the fill light control system 32 can be installed in a memory in the form of a software program or instruction and executed by the processor 31.
  • the fill light control system 32 can be partitioned into one or more modules, the one or more modules being stored in the memory and configured to be configured by one or more processors (this The embodiment is executed by a processor, and the fill light control device 30 can determine the fill light strategy of the captured picture by using the fill light control system 32.
  • FIG. 2 is a structural block diagram of a fill light control system 32 according to an embodiment of the present invention.
  • the fill light control system 32 includes, but is not limited to, an acquisition module 321, a segmentation module 322, and a fill light control module 323.
  • Each of the above functional modules 321-323 is a series of program instruction segments capable of performing a specific function, which is more suitable than the software program itself to describe the execution process of the software in the computer, such as being executed in the processor, and thus the present invention is directed to the software program.
  • the descriptions are all described in modules.
  • each of the above functional modules 321-323 can also be implemented by hardware or firmware.
  • the obtaining module 321 is configured to acquire an image and depth information associated with the image.
  • the depth information is distance information of an object corresponding to the image in the captured image to the camera, and the distance information may specifically include a distance between one or more points on the object and the camera.
  • the depth information can be detected by a depth detecting device.
  • the depth detecting device includes, but is not limited to, a depth sensor, a time of flight sensor.
  • the segmentation module 322 is configured to divide the image into one or more regions according to the depth information. Specifically, when the depth value (the distance from the object to the camera) is greater than a predetermined value (for example, 5 meters), the area A is set, and when the depth value is smaller than the predetermined value, the area B is set. In some other embodiments, multiple regions may also be divided according to the distribution of depth values, each region corresponding to a predetermined depth value range. Usually the background image has a larger depth value and the subject subject has a smaller depth value.
  • the image acquired by the acquiring module 321 includes an image captured by a camera
  • the fill light control module 323 is further configured to control the depth detecting device to acquire the depth information, and according to the A spatial positional relationship between the depth detecting device and the camera, and the depth information is associated with the image.
  • the segmentation module 322 may divide the image acquired by the camera into a plurality of regions according to the depth information. The association between the depth information and the image may be determined according to the three-dimensional coordinates of the depth detecting device and the three-dimensional coordinates of the camera, and the coordinate transformation matrix between the depth information and the image may be determined.
  • the three-dimensional coordinate value of the depth information and the three-dimensional coordinate value of the image are transformed into the same coordinate system, thereby facilitating the association between the depth information and the image information, that is, obtaining the depth value of each pixel in the image.
  • the coordinate transformation matrix may include an internal parameter matrix and a foreign parameter matrix, wherein the internal parameter matrix is a transformation matrix between the image coordinate system and the camera coordinate system, including internal parameters (f x , f y , u 0 , v 0 ), where f x , f y is the focal length of the camera, and u 0 and v 0 are the coordinate values of the camera coordinate system origin in the image coordinate system.
  • the outer parameter matrix includes a rotation matrix and a translation matrix.
  • the rotation matrix and the translation matrix together describe how to convert a point from a world coordinate system to a camera coordinate system.
  • the rotation matrix describes the direction of the coordinate axis of the world coordinate system relative to the camera coordinate axis.
  • the translation matrix describes the position of the spatial origin in the camera coordinate system.
  • the image acquired by the acquisition module 321 includes a depth image obtained by the depth detecting device (as shown in FIG. 3), and the segmentation module 322 is based on the depth in the depth image.
  • the information segments the depth image into one or more regions.
  • the value of each pixel on the depth image indicates the distance from the point to the camera.
  • the fill control system 32 may further include a marking module (not shown) for marking the segmented region according to the depth information to have Areas of the same depth information range are marked with the same mark, such as a color mark or a digital mark. For example, as shown in FIG. 3, areas having the same depth information range are marked with the same digital mark.
  • a marking module for marking the segmented region according to the depth information to have Areas of the same depth information range are marked with the same mark, such as a color mark or a digital mark. For example, as shown in FIG. 3, areas having the same depth information range are marked with the same digital mark.
  • the image acquired by the acquisition module 321 may further include an image acquired by the camera, and a depth image (shown in FIG. 3) and a grayscale image obtained by the depth detecting device (as shown in FIG. 3). 4) wherein the depth image is automatically aligned with the grayscale image.
  • a predetermined image algorithm for example, a binocular algorithm
  • the depth information divides the image acquired by the camera into a plurality of regions.
  • the image algorithm may also be referred to as an image matching algorithm, that is, the grayscale image is matched with the image captured by the camera.
  • the current matching algorithm may include a region gray-based matching algorithm, a phase-based matching algorithm, and a feature-based matching algorithm.
  • the region gray-based matching algorithm uses the gray neighborhood of a certain point in an image (reference map) as a template, and searches for another (or similar) gray value distribution in another image (to be matched). Corresponding to the neighborhood of the point, thus achieving the matching of the two images.
  • the phase-based matching algorithm uses the local phase as the search object.
  • the feature-based matching algorithm limits the matching search range to a series of extracted image features.
  • the feature pair with the smallest distance is the closest feature pair, that is, the matching pair.
  • Distance metrics between features have maximum and minimum distances, Euclidean distances, and the like.
  • the segmentation module 322 may segment the image according to the depth information only, or segment the image in combination with the depth information and image features of the image.
  • the segmentation of the image in combination with the depth information and the image feature can effectively solve the problem that the resolution of the depth sensor is relatively low, so that it is difficult to directly segment the region according to the depth information.
  • the segmentation module can also segment the image based only on the image features.
  • combining the depth information may determine a foreground area (the depth value is less than a predetermined value) and a background area (the depth value is greater than a predetermined value), and then perform feature (eg, face) recognition on the image in the foreground area, and identify the The face area acts as a separate area, so that the area can be better segmented to determine different fill light strategies for different areas.
  • feature eg, face
  • the fill light control module 323 is configured to determine a fill light strategy for the captured image according to the brightness information corresponding to at least one of the one or more regions.
  • the fill light control module 323 is specifically configured to determine a photographing subject region from the one or more regions, and determine a fill light strategy for the photographed image according to the brightness information of the photographing subject region.
  • the photographing body area is an area where the photographing object is located, and the photographing object may include a person, an animal, a specific building, a specific landscape, and the like.
  • the determining factor of the photographing body region includes at least one of depth information, image features, and area of the one or more regions.
  • the fill light control module 323 may determine an area having a depth value less than or equal to a predetermined depth threshold as the photographing subject area.
  • the fill control module 323 may further calculate an area of each area after the division, and determine an area whose area is greater than a predetermined area threshold, and a depth value less than or equal to the predetermined depth threshold is determined as the photographing body area. .
  • the fill light control module 323 may determine an area that includes a specific image feature and a depth value less than or equal to the predetermined depth threshold as the photographing subject area.
  • the specific image feature may be a feature of a face or a specific animal, a building, or the like.
  • the fill light strategy includes supplemental light according to brightness
  • the fill light control module 323 uses the brightness of the photographing body region as the fill light according to the brightness.
  • the brightness of the photographing body region is not limited to the average brightness of each of the photographing subject regions, and may be the brightness of the darkest portion in each of the photographing subject regions.
  • the fill light is used as a current brightness base value as a current brightness base value, and compared with an expected reference brightness value to obtain a brightness value difference, and the flash light control mode is determined according to the brightness difference value corresponding to the required fill light intensity (for example, a flash lamp) Drive current).
  • the fill light control module 323 uses the brightness of the region with the lowest luminance in each of the photographing body regions as the fill light according to the brightness.
  • the fill light control module 323 uses the average brightness of each of the photographing body regions as the fill light according to the brightness.
  • the photographing body region has normal brightness, the light should not be supplemented according to the brightness according to the fill light, and the corresponding fill light intensity is zero.
  • the fill light control module 323 is specifically configured to determine a light condition of the captured image according to brightness information corresponding to at least one of the one or more regions, and according to the light condition A fill light strategy for the shot picture is determined.
  • the fill light control module 323 may determine an area whose depth value is smaller than the predetermined depth threshold as a foreground area, and determine the light condition according to the brightness information of the foreground area.
  • the fill light strategy includes fill light according to brightness.
  • the fill light control module 323 may use the average brightness of the respective areas or the brightness of at least one of the foreground areas as a fill light basis when the brightness of the foreground area is less than a preset brightness threshold. brightness.
  • the fill light control module 323 may also determine an area having a depth value greater than or equal to the predetermined depth threshold as a background area.
  • the predetermined depth threshold may be set to 5 meters, the area having a depth value of less than 5 meters may be divided into a foreground area, and an area having a depth value greater than or equal to 5 meters may be divided into a background area.
  • the image has both a background area and a foreground area.
  • the fill light control module 323 may use the brightness of the area with the lowest brightness in the foreground area as the fill light according to the brightness, or may select each area in the foreground area.
  • the average brightness is used as the fill light depending on the brightness, or the brightness of the area including the specific image feature in the foreground area may be used as the fill light.
  • the fill light control module 323 does not perform fill light when the brightness of the foreground area is greater than or equal to the preset brightness threshold.
  • determining the fill light strategy according to the brightness information of the photographing body region and the light condition according to the photographing screen are two relatively independent methods, for example, in a case where the photographing body region cannot be determined, The fill light strategy is determined according to the light conditions of the photographed picture. In the case where the foreground area cannot be determined, the fill light policy may be determined according to the brightness information of the photographing subject area. However, there are some places where the two methods can be crossed. For example, in the case where both the shooting subject area and the foreground area can be determined, the fill light strategy can be determined according to one method or a combination of two methods. .
  • the fill light control module 323 is further configured to obtain the flash drive current corresponding to the fill light according to the brightness according to a pre-stored fill light according to a mapping relationship between the brightness value and the flash drive current.
  • a reference brightness value that needs to be exposed may be preset, and according to the difference between the reference brightness value and the fill light according to the brightness value, the required flash intensity may be determined, and the required flash intensity corresponds to a flash drive current. Therefore, the mapping relationship between the fill light and the flash drive current can be established and stored in advance.
  • the fill light strategy further includes a fill light duration
  • the fill light control module 323 is further configured to calculate a fill light duration according to the fill light according to the brightness.
  • the fill light strategy further includes a fill light color temperature
  • the fill light control module 323 is further configured to calculate a fill light color temperature according to a color temperature of at least one of the one or more regions.
  • the determining factor of the fill light strategy may further include camera information, and the camera information includes at least one of the following: aperture, shutter, sensitivity (ISO).
  • an embodiment of the present invention further provides a mobile device 100, which includes, but is not limited to, a flash 22, a flash drive circuit 23, and the fill control device 30 described above.
  • the mobile device 100 can be one of the following: an unmanned aerial vehicle, a handheld cloud platform, a camera, a mobile phone.
  • the flash lamp 22 may include a plurality of flash units capable of emitting light of different color temperatures.
  • the color temperature of the light emitted by the flash unit may range from 3000K to 7000K.
  • the flash may be an LED flash, such as a single LED flash, a multi-LED flash, a monochrome temperature LED flash, a color changeable temperature LED flash.
  • the flash drive circuit 23 is electrically connected to the flash lamp 22 and the fill light control device 30, respectively, and the fill light control module 323 also sends the determined fill light strategy to the flash drive circuit 23,
  • the flash driving circuit 23 is configured to drive the flash 22 to flash according to a fill light policy determined by the fill control device 30 to fill the photographing screen.
  • the fill light control module 323 can send the flash drive current to the flash drive circuit 23.
  • the flash driving circuit 23 can receive the flash driving current sent by the fill control module 323, and adjust an output current of the flash 22 according to the flash driving current to drive the flash 22 to flash The shooting screen is filled with light.
  • the fill light control module 323 may also send the fill light duration to the flash drive circuit 23 .
  • the flash driving circuit 23 can also receive the fill duration of the fill control module 323, and adjust the duration of the output current of the flash 22 according to the fill duration to drive the flash 22 Continuous flashing.
  • the fill light control module 323 can also send the fill color temperature to the flash drive circuit 23 .
  • the flash driving circuit 23 can also receive the fill color temperature, and control the color temperature of the flash 22 according to the fill color temperature, for example, by controlling the amount of light emitted by each flash unit of the flash 22 to adjust the flash 22 The color temperature of the emitted light.
  • the fill control module 323 can also control the flash drive circuit 23 to drive the flash 22 to pre-flash the captured image before acquiring the image.
  • the mobile device 100 may further include a camera 21, a depth detecting device 24, and a memory 25.
  • the camera 21 is used to collect images.
  • the depth detecting device 24 is communicatively coupled to the fill light control device 30, and is configured to detect the depth information and generate a depth image, and the segmentation module 322 of the fill light control device 30 performs an image on the image.
  • the fill information may be associated with the image according to a spatial positional relationship between the depth detecting device 24 and the camera 21 by the fill light control module 323.
  • the depth detecting device 24 may be a depth sensor, and the depth sensor may include at least one of the following: an infrared distance sensor, an ultrasonic distance sensor, a stereo camera distance sensor, and a Time of Fight (ToF) sensor.
  • an infrared distance sensor an ultrasonic distance sensor
  • a stereo camera distance sensor a stereo camera distance sensor
  • ToF Time of Fight
  • the ToF technique is a technique for measuring the distance by calculating the propagation time of light.
  • the ToF sensor has a device that emits light and a sensing device that can receive light. By emitting modulated light, it receives the reflected light, and then calculates the distance of the object based on the time difference between the two.
  • the effective measurement distance of the ToF sensor is 0.15m ⁇ 10m, which is more accurate in the range of 0.5m ⁇ 5m.
  • the ToF sensor can simultaneously generate depth images and grayscale images, and since they are generated from the same sensor, the depth image and the grayscale image are automatically aligned.
  • the depth detecting device 24 may also be omitted, and the depth information is detected by an external device, such as a mobile phone or smart glasses, and the depth image and/or the grayscale image is generated.
  • the mobile device 100 may further include a communication device (not shown) for performing communication interaction with the external device, and acquiring the depth information, the depth image. And/or the grayscale image.
  • the memory 25 can be used to pre-store the software program or instructions of the fill control system 32 described above, and pre-store a mapping relationship between the fill value and the flash drive current.
  • the memory 25 may be the memory of the mobile device 100, and may also be a removable storage device such as a removable media card, an external USB flash drive, and other flash memory or memory.
  • the photographing screen can be appropriately filled with light by automatically adopting an appropriate fill light strategy at the time of photographing, so that the mobile device 100 is enabled.
  • FIG. 6 is a schematic flowchart of a fill light control method according to an embodiment of the present invention.
  • the fill light control method according to an embodiment of the present invention may be implemented by a processor. It should be noted that the method of the embodiment of the present invention is not limited to the steps and the sequence in the flowchart shown in FIG. 6. According to various embodiments, the steps in the flowchart shown in FIG. 6 may add, remove, or change the order.
  • the fill light control method is used to determine a fill light strategy for a captured image of a camera to perform appropriate fill light on the captured image, thereby improving the quality of the captured image.
  • the fill control method may start from step 601.
  • Step 601 Acquire an image and depth information associated with the image.
  • the depth information is distance information of an object corresponding to the image in the captured image to the camera, and the distance information may specifically include a distance between one or more points on the object and the camera.
  • the depth information can be detected by a depth detecting device.
  • Step 602 Segment the image into one or more regions according to the depth information.
  • the image includes an image captured by a camera.
  • the step 602 may specifically include:
  • Step 701 Control the depth detecting device to acquire the depth information.
  • Step 702 Associate the depth information with the image according to a spatial positional relationship between the depth detecting device and the camera.
  • Step 703 Divide the image collected by the camera into a plurality of regions according to the depth information.
  • the image includes a depth image obtained by the depth detecting device, and the step 602 may specifically include: dividing the depth image into one or more regions according to depth information in the depth image. .
  • the value of each pixel on the depth image indicates the distance from the point to the camera.
  • the fill light control method may further include the step of marking the divided regions according to the depth information, so that regions having the same depth information range may be marked with the same mark.
  • regions having the same depth information range may be marked with the same mark.
  • marking the divided regions according to the depth information such as color markers or digital markers. For example, as shown in FIG. 3, areas having the same depth information range are marked with the same digital mark.
  • the image may further include an image acquired by the camera, and a depth image (shown in FIG. 3) and a grayscale image (shown in FIG. 4) obtained by the depth detecting device, wherein The depth image is automatically aligned with the grayscale image.
  • the fill light control method may separately acquire the corresponding image by the depth detecting device and the camera, and calibrate the grayscale image acquired by the synchronization with a predetermined image algorithm (for example, a binocular algorithm).
  • the depth information in the segmentation divides the image acquired by the camera into a plurality of regions.
  • the fill light control method may divide the image according to the depth information only, or divide the image by combining the depth information with an image feature of the image.
  • the segmentation of the image in combination with the depth information and the image feature can effectively solve the problem that the resolution of the depth sensor is relatively low, so that it is difficult to directly segment the region according to the depth information.
  • the fill light control method may further segment the image according to the image features.
  • the fill light control method further includes a step 603 of determining a fill light strategy for the captured image according to the brightness information corresponding to the at least one of the one or more regions.
  • the step 603 may specifically include the following steps:
  • Step 801 Determine a shooting subject area from the one or more areas.
  • the determining factor of the photographing body region includes at least one of depth information, image features, and area of the one or more regions.
  • an area having a depth value less than or equal to a predetermined depth threshold may be determined as the photographing subject area.
  • an area of each area after the division may be calculated, and an area whose area is greater than a predetermined area threshold, and a depth value less than or equal to the predetermined depth threshold is determined as the photographing subject area.
  • an area including a specific image feature and a depth value less than or equal to the predetermined depth threshold may be determined as the photographing subject area.
  • the specific image feature may be a feature of a face or a specific animal, a building, or the like.
  • Step 802 Determine a fill light strategy for the photographing picture according to the brightness information of the photographing subject area.
  • the fill light strategy includes supplementing light according to brightness
  • the fill light control method further includes the step of: using brightness of the photographing body region as fill light according to brightness.
  • the brightness of the photographing body region is not limited to the average brightness of each of the photographing subject regions, and may be the brightness of the darkest portion in each of the photographing subject regions.
  • the brightness of the region having the lowest brightness among the respective photographing subject regions may be used as the fill light depending on the brightness.
  • the average brightness of each of the photographing subject regions may be used as the fill light depending on the brightness.
  • the photographing body region has normal brightness, the light should not be supplemented according to the brightness according to the fill light, and the corresponding fill light intensity is zero.
  • the step 603 may specifically include the following steps:
  • Step 901 Determine a light condition of the photographing picture according to brightness information corresponding to at least one of the one or more areas.
  • the step 901 of determining the ray condition of the shooting picture specifically includes:
  • Step 1001 Determine an area whose depth value is smaller than the predetermined depth threshold as a foreground area
  • Step 1002 Determine the ray condition according to the brightness information of the foreground area.
  • the step 603 may further include a step 902 of determining a fill light strategy for the captured image according to the light condition.
  • the fill light strategy includes fill light according to brightness
  • the step 902 specifically includes the steps of:
  • the average brightness of the respective areas or the brightness of at least one of the foreground areas is used as the fill light.
  • the fill light control method specifically includes the step of determining an area having a depth value greater than or equal to the predetermined depth threshold as a background area.
  • the predetermined depth threshold may be set to 5 meters, the area having a depth value of less than 5 meters may be divided into a foreground area, and an area having a depth value greater than or equal to 5 meters may be divided into a background area.
  • the image has both a background area and a foreground area.
  • the background area brightness ⁇ foreground area brightness ⁇ preset brightness threshold (at this time, shooting in a dark environment)
  • the average brightness of the respective regions is used as the fill light according to the brightness.
  • the foreground area brightness ⁇ preset brightness threshold ⁇ background area brightness (at this time, shooting in a backlight environment)
  • the brightness of at least one of the foreground areas is used as the fill light according to the brightness.
  • the brightness of the area with the lowest brightness in the foreground area may be used as the fill light according to the brightness, or the average brightness of each area in the foreground area may be used as the fill light according to the brightness.
  • the brightness of the area including the specific image feature in the foreground area may be used as the fill light.
  • determining the fill light strategy according to the brightness information of the photographing body region and the light condition according to the photographing screen are two relatively independent methods, for example, in a case where the photographing body region cannot be determined, The fill light strategy is determined according to the light conditions of the photographed picture. In the case where the foreground area cannot be determined, the fill light policy may be determined according to the brightness information of the photographing subject area. However, there are some places where the two methods can be crossed. For example, in the case where both the shooting subject area and the foreground area can be determined, the fill light strategy can be determined according to one method or a combination of two methods. .
  • the fill light control method may further include a step 604, sending the determined fill light strategy to a flash drive circuit, so that the flash drive circuit is based on the fill light.
  • the strategy drives the flash to fill the shot.
  • the fill light control method specifically includes the following steps:
  • a reference brightness value that needs to be exposed may be preset, and according to the difference between the reference brightness value and the fill light according to the brightness value, the required flash intensity may be determined, and the required flash intensity corresponds to a flash drive current. Therefore, the mapping relationship between the fill light and the flash drive current can be established and stored in advance.
  • the fill light strategy further includes a fill light duration
  • the fill light control method specifically includes the following steps:
  • the fill light strategy further includes a fill light color temperature
  • the fill light control method specifically includes the following steps:
  • the determining factor of the fill light strategy may further include camera information, and the camera information includes at least one of the following: aperture, shutter, sensitivity (ISO).
  • the fill light control method may further include the step of: controlling the flash to pre-flash the photographing screen before the step 601.
  • processors may include, but are not limited to, one or more general purpose microprocessors (eg, single or multi-core processors), application specific integrated circuits, dedicated instruction set processors, graphics processing units, physical processing units, digital signal processing Unit, coprocessor, network processing unit, audio processing unit, encryption processing unit, and the like.
  • general purpose microprocessors eg, single or multi-core processors
  • application specific integrated circuits dedicated instruction set processors
  • graphics processing units eg, physical processing units, digital signal processing Unit, coprocessor, network processing unit, audio processing unit, encryption processing unit, and the like.
  • Storage media may include, but are not limited to, any type of disk, including floppy disks, optical disks, DVDs, CD-ROMs, micro hard disks and magneto-optical disks, ROM, RAM, EPROM, EEPROM, DRAM, VRAM, flash memory devices, magnetic or optical cards, nanometers
  • a system including a molecular memory IC) or any type of medium or device suitable for storing instructions and/or data.
  • features of the present invention can be incorporated into software and/or firmware to control the hardware of the processing system and enable the processing system to utilize other results utilizing the results of the present invention.
  • the organization interacts.
  • software or firmware may include, but is not limited to, application code, device drivers, operating systems, and execution environments/containers.
  • ASICs application specific integrated circuits
  • FPGA field programmable gate array
  • the present invention may conveniently use one or more conventional general purpose or special purpose digital computers, computing devices, machines or microprocessors (including one or more processors, memory and/or programmed in accordance with the teachings of the present disclosure).
  • the computer readable medium is implemented. It will be apparent to those skilled in the software arts that a skilled programmer can conveniently prepare appropriate software coding based on the teachings of the present disclosure.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

一种补光控制装置(30)，包括处理器(31)，所述处理器(31)用于获取图像以及与所述图像关联的深度信息(601)，并根据所述深度信息将所述图像分割为一个或多个区域(602)，以及根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对拍摄画面的补光策略(603)。还提供一种移动设备(100)、补光控制系统(32)以及补光控制方法。

Description

补光控制装置、系统、方法以及移动设备 技术领域
本发明涉及一种图像采集技术领域，特别涉及一种补光控制装置、系统、方法以及移动设备。
背景技术
在暗光/逆光环境下的拍照通常会导致被拍摄物体比较黑，拍摄的效果不佳。因此在暗光/逆光环境下拍照时，通常需要对被拍摄物体进行补光，以获得较好的拍摄效果。闪光灯是目前广泛使用的补光设备，可以在暗光/逆光拍摄环境下进行补光，从而拍出效果较好的照片。在暗光/逆光环境下拍照，主要是希望被拍摄物体获得充分的补光，而背景的补光则不太重视，因为当距离被拍摄物体较远时，由于光强会随着被拍摄物体的距离而衰减，即使测得的平均亮度较低，开启闪光灯也是无意义的。因此只需考虑对近景拍摄物体进行补光。然而，现有的闪光灯算法，通常是通过计算图像平均亮度或者通过固定划分区域计算加权亮度来判断是否需要补光和补光强度，补光的精度不高，不利于提高拍摄图像的质量。
发明内容
有鉴于此，有必要提出一种补光控制装置、系统、方法以及移动设备，以解决上述问题。
一种补光控制装置，包括处理器，所述处理器用于获取图像以及与所述图像关联的深度信息，并根据所述深度信息将所述图像分割为一个或多个区域，以及根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对拍摄画面的补光策略。
一种移动设备，包括摄像头以及补光控制装置，所述摄像头用于采集图像。所述补光控制装置包括处理器，所述处理器用于获取图像以及与所述图像关联的深度信息，并根据所述深度信息将所述图像分割为一个或多个区域，以及根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对所述摄像头的拍摄画面的补光策略。
一种补光控制系统，包括：
获取模块，用于获取图像以及与所述图像关联的深度信息；
分割模块，用于根据所述深度信息将所述图像分割为一个或多个区域；
补光控制模块，根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对拍摄画面的补光策略。
一种补光控制方法，包括以下步骤：
获取图像以及与所述图像关联的深度信息；
根据所述深度信息将所述图像分割为一个或多个区域；以及
根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对拍摄画面的补光策略。
通过采用本发明的补光控制装置来制定对拍摄画面的补光策略，能够在拍摄时通过自动采用合适的补光策略对所述拍摄画面进行合适的补光，以采集到曝光效果较好的图像。
 附图说明
图1是本发明实施例提供的一种补光控制装置的结构模块图，其中，所述补光控制装置包括一补光控制系统。
图2是图1的补光控制系统的结构模块图。
图3是根据一待拍摄场景生成的深度图像的示意图。
图4是根据图3所示的待拍摄场景生成的灰度图像的示意图。
图5是本发明实施例提供的一种移动设备的结构模块图。
图6是本发明实施例提供的一种补光控制方法流程示意图。
图7是图6中步骤602的一种实施例的细化流程示意图。
图8是图6中步骤603的一种实施例的细化流程示意图。
图9是图6中步骤603的另一种实施例的细化流程示意图。
图10是图9中步骤901的一种实施例的细化流程示意图。
主要元件符号说明
移动设备 100
摄像头 21
闪光灯 22
闪光灯驱动电路 23
深度检测装置 24
存储器 25
补光控制装置 30
处理器 31
补光控制系统 32
获取模块 321
分割模块 322
补光控制模块 323
步骤 601-604、701-703、801-802、901-902、1001-1002
如下具体实施方式将结合上述附图进一步说明本发明。
具体实施方式
除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本发明。本文所使用的术语“及／或”包括一个或多个相关的所列项目的任意的和所有的组合。
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
具体地，请参阅图1，是本发明实施例提供的一种补光控制装置30的结构模块图。所述补光控制装置30用于给一摄像头的拍摄画面确定补光策略，以对所述拍摄画面进行合适的补光，从而提高拍摄图像的质量。
在本实施例中，所述补光控制装置30包括处理器31以及补光控制系统32。其中，所述处理器31可为中央处理器（Central Processing Unit, CPU）、微处理器、数字信号处理器或其他数据处理芯片。
所述补光控制系统32可以软件程序或指令的形式安装在一存储器中，并由所述处理器31执行。在本实施方式中，所述补光控制系统32可以被分割成一个或多个模块，所述一个或多个模块被存储在所述存储器中并被配置成由一个或多个处理器（本实施例为一个处理器）执行，所述补光控制装置30利用所述补光控制系统32可确定所述拍摄画面的补光策略。
请参阅图2，是本发明实施例提供的一种补光控制系统32的结构模块图。所述补光控制系统32包括但不限于，获取模块321、分割模块322以及补光控制模块323。上述各功能模块321-323是能够完成特定功能的一系列程序指令段，比软件程序本身更适合于描述软件在计算机中的执行过程，如在所述处理器中执行，因此本发明对软件程序的描述都以模块描述。另外，上述各功能模块321-323亦可以由硬件、固件（firmware）方式实现。
在本实施例中，所述获取模块321用于获取图像以及与所述图像关联的深度信息。其中，所述深度信息为拍摄画面中的图像对应的物体到摄像头的距离信息，该距离信息具体可包括上述物体上的一点或多点与摄像头之间的距离。所述深度信息可通过一深度检测装置来检测。所述深度检测装置包括，但不限于，深度传感器，飞行时间（Time of Flight）传感器。
所述分割模块322用于根据所述深度信息将所述图像分割为一个或多个区域。具体地，当深度值（物体到摄像头的距离）大于预定值（例如5米）时，设定为区域A，当深度值小于所述预定值时，设定为区域B。在其他一些实施例中，还可以根据深度值的分布划分多个区域，每一区域对应一预定深度值范围。通常背景图像具有较大的深度值，主体拍摄目标具有较小的深度值。
在一种实施例中，所述获取模块321获取的所述图像包括由摄像头采集的图像，所述补光控制模块323还用于控制所述深度检测装置获取所述深度信息，并根据所述深度检测装置与所述摄像头之间的空间位置关系，将所述深度信息和所述图像进行关联。所述分割模块322可根据所述深度信息将所述摄像头采集的图像分割为多个区域。其中所述深度信息与所述图像的关联，可根据所述深度检测装置的三维坐标及所述摄像头所处的三维坐标确定所述深度信息和所述图像之间的坐标变换矩阵，使所述深度信息的三维坐标值和所述图像的三维坐标值变换到同一坐标系下，从而便于实现所述深度信息和所述图像信息的关联，即得到所述图像中每一像素点的深度值。其中所述坐标变换矩阵可包括内参矩阵和外参矩阵，其中内参矩阵为图像坐标系与相机坐标系之间的转换矩阵，包括内参（fx，fy，u0，v0），其中fx, fy为相机的焦距，u0、v0为相机坐标系原点在图像坐标系中的坐标值。外参矩阵包括旋转矩阵和平移矩阵，旋转矩阵和平移矩阵共同描述了如何把点从世界坐标系转换到摄像机坐标系，其中：旋转矩阵描述了世界坐标系的坐标轴相对于摄像机坐标轴的方向；平移矩阵描述了在摄像机坐标系下，空间原点的位置。
在另一种实施例中，所述获取模块321获取的所述图像包括由所述深度检测装置获得的深度图像（如图3所示），所述分割模块322根据所述深度图像中的深度信息将所述深度图像分割为一个或多个区域。其中，所述深度图像上每个像素点的值表示该点到摄像头的距离。
在所述另一种实施例中，所述补光控制系统32还可包括标记模块（图未示），所述标记模块用于根据所述深度信息对分割后的区域进行标记，以将具有相同深度信息范围的区域标记上相同的标记，例如颜色标记或数字标记等。例如图3所示，将具有相同深度信息范围的区域标记上相同的数字标记。
在其他实施例中，所述获取模块321获取的所述图像还可包括由摄像头采集的图像、以及由所述深度检测装置获得的深度图像（如图3所示）和灰度图像（如图4所示），其中，所述深度图像与所述灰度图像自动对齐。通过同步控制所述深度检测装置与所述摄像头分别获取对应的图像，采用预定的图像算法（例如双目算法）标定出同步获取到的所述灰度图像与所述摄像头采集的图像之间的变换矩阵，采用所述变换矩阵对所述摄像头采集的图像进行变换，使经过变换后的所述摄像头采集的图像与所述深度图像对齐，从而所述分割模块322可根据所述深度图像中的深度信息将所述摄像头采集的图像分割为多个区域。其中所述图像算法，也可称为图像匹配算法，即将所述灰度图像与所述摄像头采集的图像进行匹配。目前的匹配算法可包括基于区域灰度的匹配算法、基于相位的匹配算法及基于特征的匹配算法。其中基于区域灰度的匹配算法把一幅图像(基准图)中某一点的灰度邻域作为模板，在另一幅图像(待匹配图)中搜索具有相同(或相似)灰度值分布的对应点邻域，从而实现两幅图像的匹配。基于相位的匹配算法是以局部相位作为搜索对象。基于特征的匹配算法则是将匹配的搜索范围限制在一系列提取的图像特征上。利用特征间的距离作为度量手段，具有最小距离的特征对就是最相近的特征对，也就是匹配对。特征间的距离度量有最大最小距离、欧氏距离等。通过将所述灰度图像与所述摄像头采集的图像进行匹配后，根据所述灰度图像与所述摄像头采集的图像的三维坐标值进行坐标变换至同一坐标系，从而便于图像的对齐处理。
在本实施例中，所述分割模块322可仅根据所述深度信息来对所述图像进行分割，或者结合所述深度信息与所述图像的图像特征对所述图像进行分割。其中，结合所述深度信息和所述图像特征来对所述图像进行分割，可有效解决在深度传感器的分辨率比较低以致难以直接根据深度信息来分割区域的问题。可以理解的是，在其他实施例中，所述分割模块还可仅根据所述图像特征来对所述图像进行分割。例如，结合深度信息可确定前景区域（深度值小于于一预定值）和背景区域（深度值大于一预定值），然后对前景区域中的图像进行特征（例如，人脸）识别，对识别出的人脸区域作为一个独立的区域，从而能更好地分割区域以针对不同区域确定不同的补光策略。
在本实施例中，所述补光控制模块323用于根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对拍摄画面的补光策略。
在一种实施例中，所述补光控制模块323具体可用于从所述一个或多个区域中确定拍摄主体区域，并根据所述拍摄主体区域的亮度信息确定对拍摄画面的补光策略。其中所述拍摄主体区域即为拍摄对象所处的区域，所述拍摄对象可包括人物、动物、特定建筑物、特定景观等。
其中，所述拍摄主体区域的确定因素至少包括所述一个或多个区域的深度信息、图像特征、区域面积中的至少之一。
例如，所述补光控制模块323可将深度值小于或等于一预定深度阈值的区域确定为所述拍摄主体区域。
可选的，所述补光控制模块323还可计算分割后各个区域的面积，并将面积大于一预定面积阈值，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
可选的，所述补光控制模块323可将包含有特定图像特征，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。其中，所述特定图像特征可为人脸特征或特定动物、建筑物等的特征。
在所述一种实施例中，所述补光策略包括补光依据亮度，所述补光控制模块323将所述拍摄主体区域的亮度作为补光依据亮度。其中，所述拍摄主体区域的亮度不限于各个拍摄主体区域的平均亮度，也可以是各个拍摄主体区域内最暗部分的亮度。所述补光依据亮度用于作为当前亮度基础值，与一预期的基准亮度值进行比较，得到亮度值差，根据该亮度差值对应需要的补光强度来确定闪光灯的控制方式（例如闪光灯的驱动电流）。
例如，当所述拍摄主体区域多于一个区域时，所述补光控制模块323将各个所述拍摄主体区域中亮度最低的区域的亮度作为补光依据亮度。
或者，当所述拍摄主体区域多于一个区域时，所述补光控制模块323将各个所述拍摄主体区域的平均亮度作为补光依据亮度。
可以理解的是，如果所述拍摄主体区域有正常亮度，那么根据补光依据亮度则应该不补光，对应的补光强度为零。
在另一种实施例中，所述补光控制模块323具体可用于根据所述一个或多个区域中的至少一个区域对应的亮度信息确定所述拍摄画面的光线条件，并根据所述光线条件确定对所述拍摄画面的补光策略。
具体地，所述补光控制模块323可将深度值小于所述预定深度阈值的区域确定为前景区域，并根据所述前景区域的亮度信息，确定所述光线条件。
在所述另一种实施例中，所述补光策略包括补光依据亮度。
进一步地，所述补光控制模块323可在所述前景区域的亮度小于一预设亮度阈值时，将所述各个区域的平均亮度或所述前景区域中的至少一个区域的亮度作为补光依据亮度。
在所述另一种实施例中，所述补光控制模块323还可将深度值大于或等于所述预定深度阈值的区域确定为背景区域。
例如，可将所述预定深度阈值设为5米，将深度值小于5米的区域划分为前景区域，将深度值大于或等于5米的区域划分为背景区域。
可以理解的是，在一些情况下，所述图像中只有背景区域或只有前景区域。在一些情况下，所述图像中既有背景区域，又有前景区域。
在第一实施例中，所述补光控制模块323用于在所述背景区域的亮度小于或等于所述前景区域的亮度时，即，背景区域亮度<=前景区域亮度<预设亮度阈值（此时处于暗光环境下拍摄），将所述各个区域的平均亮度作为补光依据亮度。
在第二实施例中，所述补光控制模块323还用于在所述背景区域的亮度大于或等于所述预设亮度阈值时，即，前景区域亮度<预设亮度阈值<=背景区域亮度（此时处于逆光环境下拍摄），将所述前景区域中的至少一个区域的亮度作为补光依据亮度。
其中，在所述第二实施例中，所述补光控制模块323可将所述前景区域中亮度最低的区域的亮度作为补光依据亮度，或者，可将所述前景区域中的各个区域的平均亮度作为补光依据亮度，或者，可将所述前景区域中包含有特定图像特征的区域的亮度作为补光依据亮度。
在第三实施例中，所述补光控制模块323还用于在所述背景区域的亮度大于或等于所述前景区域的亮度，且所述背景区域的亮度小于所述预设亮度阈值时，即，前景区域亮度<=背景区域亮度<预设亮度阈值（此时处于逆光及暗光环境下拍摄），将所述各个区域的平均亮度作为补光依据亮度。
在本实施例中，所述补光控制模块323在所述前景区域的亮度大于或等于所述预设亮度阈值时，不进行补光。
可以理解的是，根据所述拍摄主体区域的亮度信息和根据所述拍摄画面的光线条件来确定补光策略是两种相对独立的方法，例如在无法确定所述拍摄主体区域的情况下，可根据所述拍摄画面的光线条件来确定补光策略。在无法确定所述前景区域的情况下，可根据所述拍摄主体区域的亮度信息来确定补光策略。但这两种方法又有些可以交叉的地方，例如，在既能确定所述拍摄主体区域又能确定所述前景区域的情况下，可以根据其中一种方法或综合两种方法来确定补光策略。
在本实施例中，所述补光控制模块323还用于依据一预先存储的补光依据亮度值与闪光灯驱动电流的映射关系来得到所述补光依据亮度对应的闪光灯驱动电流。
具体来说，可预先设定一个需要曝光到的基准亮度值，则根据该基准亮度值与补光依据亮度值之差，可确定需求的闪光强度，需求的闪光强度又对应一闪光灯驱动电流，因此，可预先建立并存储补光依据亮度值与闪光灯驱动电流的映射关系。
可选地，所述补光策略还包括补光持续时间，所述补光控制模块323还用于依据所述补光依据亮度计算补光持续时间。
可选地，所述补光策略还包括补光色温，所述补光控制模块323还用于依据所述一个或多个区域中的至少一个区域的色温计算补光色温。
可以理解的是，在其他实施例中，所述补光策略的确定因素还可包括相机信息，所述相机信息包括如下至少一种：光圈、快门、感光度（ISO）。
请参阅图5，本发明实施例还提供一种移动设备100，所述移动设备100包括但不限于，闪光灯22、闪光灯驱动电路23以及上述的补光控制装置30。在本实施例中，所述移动设备100可为如下中的一种：无人飞行器、手持云台、相机、手机。
其中，所述闪光灯22可包括多个能够发出不同色温的光的闪光灯单元。所述闪光灯单元发出的光的色温范围可为3000K~7000K。在本实施例中，所述闪光灯可为LED闪光灯，例如单LED闪光灯、多LED闪光灯、单色温LED闪光灯、可变色温LED闪光灯。
所述闪光灯驱动电路23与所述闪光灯22以及所述补光控制装置30分别电连接，所述补光控制模块323还将确定的所述补光策略发送给所述闪光灯驱动电路23，所述闪光灯驱动电路23用于依据所述补光控制装置30确定的补光策略驱动所述闪光灯22闪光，以对所述拍摄画面进行补光。
具体地，所述补光控制模块323可将所述闪光灯驱动电流发送给所述闪光灯驱动电路23。所述闪光灯驱动电路23可接收所述补光控制模块323发送的所述闪光灯驱动电流，并依据所述闪光灯驱动电流调节所述闪光灯22的输出电流，以驱动所述闪光灯22闪光来对所述拍摄画面进行补光。
可选地，所述补光控制模块323还可将所述补光持续时间发送给所述闪光灯驱动电路23。所述闪光灯驱动电路23还可接收所述补光控制模块323发送的所述补光持续时间，并依据所述补光持续时间调节所述闪光灯22输出电流的持续时间，以驱动所述闪光灯22持续闪光。
可选地，所述补光控制模块323还可将所述补光色温发送给所述闪光灯驱动电路23。所述闪光灯驱动电路23还可接收所述补光色温，并依据所述补光色温控制所述闪光灯22的色温，例如通过控制所述闪光灯22的各个闪光灯单元的发光量来调节所述闪光灯22发出的光的色温。
可以理解的是，在其他实施例中，所述补光控制模块323还可在获取所述图像之前控制所述闪光灯驱动电路23来驱动所述闪光灯22对所述拍摄画面进行预闪光。
在本实施例中，所述移动设备100还可包括摄像头21、深度检测装置24以及存储器25。其中，所述摄像头21用于采集图像。
在本实施例中，所述深度检测装置24与所述补光控制装置30通信连接，并用于检测所述深度信息以及生成深度图像，所述补光控制装置30的分割模块322在对图像进行分割之前，可先通过所述补光控制模块323根据所述深度检测装置24与所述摄像头21之间的空间位置关系，将所述深度信息和所述图像进行关联。
其中，所述深度检测装置24可采用深度传感器，所述深度传感器可包括如下至少一种：红外距离传感器、超声波距离传感器、立体摄像距离传感器、飞行时间（Time of Fight，简称为ToF）传感器。
以ToF传感器为例，ToF技术是一种通过计算光线的传播时间来测量距离的技术。ToF传感器拥有一个能够发射光线的装置和一个能够接收光线的感应装置，通过发射调制光，再接收反射回来的光线，然后根据二者的时间差计算出物体的距离。ToF传感器的有效测量距离为0.15m~10m，在0.5m~5m范围内较为精确。ToF传感器可以同时产生深度图像和灰度图像，由于从同一个传感器生成，所以深度图像和所述灰度图像是自动对齐的。
在其他实施例中，所述深度检测装置24也可省略，由一外部设备，例如手机或智能眼镜等检测所述深度信息、以及生成所述深度图像及/或所述灰度图像。在所述其他实施例中，所述移动设备100还可包括通信装置（图未示），所述通信装置用于与所述外部设备进行通信交互，并获取所述深度信息、所述深度图像及/或所述灰度图像。
所述存储器25可用于预先存储上述的补光控制系统32的软件程序或指令，以及预先存储一补光依据亮度值与闪光灯驱动电流的映射关系。所述存储器25可以是所述移动设备100的内存，还可以是可移除的存储装置，例如可移除媒体卡、外置U盘、及其他闪存或存储器。
通过采用本发明的补光控制装置30来制定对拍摄画面的补光策略，能够在拍摄时通过自动采用合适的补光策略对所述拍摄画面进行合适的补光，以使所述移动设备100能够采集到曝光效果较好的图像。
请参阅图6，是本发明实施例提供的一种补光控制方法的流程示意图，本发明实施例的所述补光控制方法可以由一个处理器来实现。应说明的是，本发明实施例的所述方法并不限于图6所示的流程图中的步骤及顺序。根据不同的实施例，图6所示的流程图中的步骤可以增加、移除、或者改变顺序。在本实施方式中，所述补光控制方法用于给一摄像头的拍摄画面确定补光策略，以对所述拍摄画面进行合适的补光，从而提高拍摄图像的质量。其中，所述补光控制方法可以从步骤601开始。
步骤601，获取图像以及与所述图像关联的深度信息。
其中，所述深度信息为拍摄画面中的图像对应的物体到摄像头的距离信息，该距离信息具体可包括上述物体上的一点或多点与摄像头之间的距离。所述深度信息可通过一深度检测装置来检测。
步骤602，根据所述深度信息将所述图像分割为一个或多个区域。
在其中一种实施例中，所述图像包括由摄像头采集的图像，如图7所示，所述步骤602具体可包括：
步骤701，控制深度检测装置获取所述深度信息。
步骤702，根据所述深度检测装置与所述摄像头之间的空间位置关系，将所述深度信息和所述图像进行关联。
步骤703，根据所述深度信息将所述摄像头采集的图像分割为多个区域。
在另一种实施例中，所述图像包括由深度检测装置获得的深度图像，所述步骤602具体可包括：根据所述深度图像中的深度信息将所述深度图像分割为一个或多个区域。
其中，所述深度图像上每个像素点的值表示该点到摄像头的距离。
在所述另一种实施例中，所述补光控制方法具体还可包括步骤：根据所述深度信息对分割后的区域进行标记，从而可将具有相同深度信息范围的区域标记上相同的标记，例如颜色标记或数字标记等。例如图3所示，将具有相同深度信息范围的区域标记上相同的数字标记。
在其他实施例中，所述图像还可包括由摄像头采集的图像、以及由所述深度检测装置获得的深度图像（如图3所示）和灰度图像（如图4所示），其中，所述深度图像与所述灰度图像自动对齐。所述补光控制方法可通过同步控制所述深度检测装置与所述摄像头分别获取对应的图像，采用预定的图像算法（例如双目算法）标定出同步获取到的所述灰度图像与所述摄像头采集的图像之间的变换矩阵，采用所述变换矩阵对所述摄像头采集的图像进行变换，使经过变换后的所述摄像头采集的图像与所述深度图像对齐，从而可根据所述深度图像中的深度信息将所述摄像头采集的图像分割为多个区域。
在本实施例中，所述补光控制方法可仅根据所述深度信息来对所述图像进行分割，或者结合所述深度信息与所述图像的图像特征对所述图像进行分割。其中，结合所述深度信息和所述图像特征来对所述图像进行分割，可有效解决在深度传感器的分辨率比较低以致难以直接根据深度信息来分割区域的问题。可以理解的是，在其他实施例中，所述补光控制方法还可仅根据所述图像特征来对所述图像进行分割。
请再次参阅图6，在本实施例中，所述补光控制方法还包括步骤603，根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对拍摄画面的补光策略。
在一种实施例中，请参阅图8，所述步骤603具体可包括步骤：
步骤801，从所述一个或多个区域中确定拍摄主体区域。
其中，所述拍摄主体区域的确定因素至少包括所述一个或多个区域的深度信息、图像特征、区域面积中的至少之一。
例如，可将深度值小于或等于一预定深度阈值的区域确定为所述拍摄主体区域。
可选的，可计算分割后各个区域的面积，并将面积大于一预定面积阈值，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
可选的，可将包含有特定图像特征，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。其中，所述特定图像特征可为人脸特征或特定动物、建筑物等的特征。
步骤802，根据所述拍摄主体区域的亮度信息确定对拍摄画面的补光策略。
在所述一种实施例中，所述补光策略包括补光依据亮度，所述补光控制方法具体还包括步骤：将所述拍摄主体区域的亮度作为补光依据亮度。
其中，所述拍摄主体区域的亮度不限于各个拍摄主体区域的平均亮度，也可以是各个拍摄主体区域内最暗部分的亮度。
例如，当所述拍摄主体区域多于一个区域时，可将各个所述拍摄主体区域中亮度最低的区域的亮度作为补光依据亮度。
或者，当所述拍摄主体区域多于一个区域时，可将各个所述拍摄主体区域的平均亮度作为补光依据亮度。
可以理解的是，如果所述拍摄主体区域有正常亮度，那么根据补光依据亮度则应该不补光，对应的补光强度为零。
在另一种实施例中，请参阅图9，所述步骤603具体可包括步骤：
步骤901，根据所述一个或多个区域中的至少一个区域对应的亮度信息确定所述拍摄画面的光线条件。
具体地，请参阅图10，所述确定所述拍摄画面的光线条件的步骤901具体包括：
步骤1001，将深度值小于所述预定深度阈值的区域确定为前景区域；以及
步骤1002，根据所述前景区域的亮度信息，确定所述光线条件。
请再次参阅图9，所述步骤603具体还可包括步骤902，根据所述光线条件确定对所述拍摄画面的补光策略。
在所述另一种实施例中，所述补光策略包括补光依据亮度，所述步骤902具体包括步骤：
在所述前景区域的亮度小于一预设亮度阈值时，将所述各个区域的平均亮度或所述前景区域中的至少一个区域的亮度作为补光依据亮度。
在所述另一种实施例中，所述补光控制方法具体还包括步骤：将深度值大于或等于所述预定深度阈值的区域确定为背景区域。
例如，可将所述预定深度阈值设为5米，将深度值小于5米的区域划分为前景区域，将深度值大于或等于5米的区域划分为背景区域。
可以理解的是，在一些情况下，所述图像中只有背景区域或只有前景区域。在一些情况下，所述图像中既有背景区域，又有前景区域。
在第一实施例中，在所述背景区域的亮度小于或等于所述前景区域的亮度时，即，背景区域亮度<=前景区域亮度<预设亮度阈值（此时处于暗光环境下拍摄），将所述各个区域的平均亮度作为补光依据亮度。
在第二实施例中，在所述背景区域的亮度大于或等于所述预设亮度阈值时，即，前景区域亮度<预设亮度阈值<=背景区域亮度（此时处于逆光环境下拍摄），将所述前景区域中的至少一个区域的亮度作为补光依据亮度。
其中，在所述第二实施例中，可将所述前景区域中亮度最低的区域的亮度作为补光依据亮度，或者，可将所述前景区域中的各个区域的平均亮度作为补光依据亮度，或者，可将所述前景区域中包含有特定图像特征的区域的亮度作为补光依据亮度。
在第三实施例中，在所述背景区域的亮度大于或等于所述前景区域的亮度，且所述背景区域的亮度小于所述预设亮度阈值时，即，前景区域亮度<=背景区域亮度<预设亮度阈值（此时处于逆光及暗光环境下拍摄），将所述各个区域的平均亮度作为补光依据亮度。
在本实施例中，在所述前景区域的亮度大于或等于所述预设亮度阈值时，不进行补光。
可以理解的是，根据所述拍摄主体区域的亮度信息和根据所述拍摄画面的光线条件来确定补光策略是两种相对独立的方法，例如在无法确定所述拍摄主体区域的情况下，可根据所述拍摄画面的光线条件来确定补光策略。在无法确定所述前景区域的情况下，可根据所述拍摄主体区域的亮度信息来确定补光策略。但这两种方法又有些可以交叉的地方，例如，在既能确定所述拍摄主体区域又能确定所述前景区域的情况下，可以根据其中一种方法或综合两种方法来确定补光策略。
请再次参阅图6，在本实施例中，所述补光控制方法还可包括步骤604，将确定的所述补光策略发送给一闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光策略驱动闪光灯闪光，以对所述拍摄画面进行补光。
在本实施例中，所述补光控制方法具体还包括步骤：
依据一预先存储的补光依据亮度值与闪光灯驱动电流的映射关系来得到所述补光依据亮度对应的闪光灯驱动电流；以及
将所述闪光灯驱动电流发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述闪光灯驱动电流调节闪光灯的输出电流，以驱动所述闪光灯闪光来对所述拍摄画面进行补光。
具体来说，可预先设定一个需要曝光到的基准亮度值，则根据该基准亮度值与补光依据亮度值之差，可确定需求的闪光强度，需求的闪光强度又对应一闪光灯驱动电流，因此，可预先建立并存储补光依据亮度值与闪光灯驱动电流的映射关系。
可选地，所述补光策略还包括补光持续时间，所述补光控制方法具体还包括步骤：
依据所述补光依据亮度计算补光持续时间；以及
将所述补光持续时间发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光持续时间调节闪光灯的输出电流的持续时间，以驱动所述闪光灯持续闪光。
可选地，所述补光策略还包括补光色温，所述补光控制方法具体还包括步骤：
依据所述一个或多个区域中的至少一个区域的色温计算补光色温；以及
将所述补光色温发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光色温控制所述闪光灯的色温。
可以理解的是，在其他实施例中，所述补光策略的确定因素还可包括相机信息，所述相机信息包括如下至少一种：光圈、快门、感光度（ISO）。
可以理解的是，在其他实施例中，所述补光控制方法在所述步骤601之前还可包括步骤：控制闪光灯对所述拍摄画面进行预闪光。
通过采用本发明的补光控制方法来制定对拍摄画面的补光策略，能够在拍摄时通过自动采用合适的补光策略对所述拍摄画面进行合适的补光，以采集到曝光效果较好的图像。
本发明的许多特征能够以、使用或借助于硬件、软件、固件或它们的组合来执行。因此，本发明的特征可以使用处理系统（例如，包括一个或多个处理器）来实现。示例性的处理器可以包括但不限于一个或多个通用微处理器（例如，单核或多核处理器）、专用集成电路、专用指令集处理器、图形处理单元、物理处理单元、数字信号处理单元、协处理器、网络处理单元、音频处理单元、加密处理单元等。
本发明的特征能够以、使用或借助于计算机程序产品来实现，所述计算机程序产品是在其上/其中储存有指令的一个或多个存储介质或者一个或多个计算机可读介质，所述指令可以用于对处理系统进行编程以执行本文所述的任何特征。存储介质可以包括但不限于任何类型的盘，包括软盘、光盘、DVD、CD-ROM、微硬盘和磁光盘、ROM、RAM、EPROM、EEPROM、DRAM、VRAM、闪存设备、磁卡或光卡、纳米系统（包括分子存储器IC）或者任何类型的适合于储存指令和/或数据的介质或设备。
通过储存于一个或多个机器可读介质中的任何一个上，本发明的特征可以并入软件和/或固件中以控制处理系统的硬件，并使处理系统能够与利用本发明的结果的其他机构进行交互。此类软件或固件可以包括但不限于应用代码、设备驱动程序、操作系统和执行环境/容器。
本发明的特征还可以例如使用诸如专用集成电路（ASIC）和现场可编程门阵列（FPGA）器件等硬件组件而以硬件实现。实现硬件状态机以执行本文所述的功能对于相关领域技术人员而言将会是显而易见的。
此外，本发明可以便利地使用一个或多个常规的通用或专用数字计算机、计算设备、机器或微处理器（包括根据本公开内容的教导而编程的一个或多个处理器、存储器和/或计算机可读介质）来实现。对于软件领域技术人员将会显而易见的是，熟练的编程者可以基于本公开内容的教导而方便地准备适当的软件编码。
最后应说明的是，以上实施例仅用以说明本发明的技术方案而非限制，尽管参照较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或等同替换，而不脱离本发明技术方案的精神和范围。
本专利文件披露的内容包含受版权保护的材料。该版权为版权所有人所有。版权所有人不反对任何人复制专利与商标局的官方记录和档案中所存在的该专利文件或者该专利披露。

Claims (119)

  1. 一种补光控制装置，包括处理器，其特征在于：所述处理器用于获取图像以及与所述图像关联的深度信息，并根据所述深度信息将所述图像分割为一个或多个区域，以及根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对拍摄画面的补光策略。
  2. 如权利要求1所述的补光控制装置，其特征在于：所述处理器还结合所述深度信息与所述图像的图像特征对所述图像进行分割。
  3. 如权利要求1所述的补光控制装置，其特征在于：所述补光策略的确定因素还包括相机信息，所述相机信息包括如下至少一种：光圈、快门、感光度（ISO）。
  4. 如权利要求1所述的补光控制装置，其特征在于：所述处理器具体用于从所述一个或多个区域中确定拍摄主体区域，并根据所述拍摄主体区域的亮度信息确定对拍摄画面的补光策略。
  5. 如权利要求4所述的补光控制装置，其特征在于：所述拍摄主体区域的确定因素至少包括所述一个或多个区域的深度信息、图像特征、区域面积中的至少之一。
  6. 如权利要求4或5所述的补光控制装置，其特征在于：所述处理器将深度值小于或等于一预定深度阈值的区域确定为所述拍摄主体区域。
  7. 如权利要求6所述的补光控制装置，其特征在于：所述处理器还用于计算分割后各个区域的面积，并将面积大于一预定面积阈值，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
  8. 如权利要求6所述的补光控制装置，其特征在于：所述处理器将包含有特定图像特征，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
  9. 如权利要求4所述的补光控制装置，其特征在于：所述补光策略包括补光依据亮度，所述处理器将所述拍摄主体区域的亮度作为补光依据亮度。
  10. 如权利要求9所述的补光控制装置，其特征在于：当所述拍摄主体区域多于一个区域时，所述处理器将各个所述拍摄主体区域中亮度最低的区域的亮度作为补光依据亮度。
  11. 如权利要求9所述的补光控制装置，其特征在于：当所述拍摄主体区域多于一个区域时，所述处理器将各个所述拍摄主体区域的平均亮度作为补光依据亮度。
  12. 如权利要求1所述的补光控制装置，其特征在于：所述处理器具体用于根据所述一个或多个区域中的至少一个区域对应的亮度信息确定所述拍摄画面的光线条件，并根据所述光线条件确定对所述拍摄画面的补光策略。
  13. 如权利要求12所述的补光控制装置，其特征在于：所述处理器在确定所述拍摄画面的光线条件时具体用于：
    将深度值小于一预定深度阈值的区域确定为前景区域；以及
    根据所述前景区域的亮度信息，确定所述光线条件。
  14. 如权利要求13所述的补光控制装置，其特征在于：所述补光策略包括补光依据亮度，所述处理器在所述前景区域的亮度小于一预设亮度阈值时，将所述各个区域的平均亮度或所述前景区域中的至少一个区域的亮度作为补光依据亮度。
  15. 如权利要求14所述的补光控制装置，其特征在于：所述处理器还将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度小于或等于所述前景区域的亮度时，将所述各个区域的平均亮度作为补光依据亮度。
  16. 如权利要求14所述的补光控制装置，其特征在于：所述处理器还将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度大于或等于所述预设亮度阈值时，将所述前景区域中的至少一个区域的亮度作为补光依据亮度。
  17. 如权利要求16所述的补光控制装置，其特征在于：所述处理器将所述前景区域中亮度最低的区域的亮度作为补光依据亮度，或者，将所述前景区域中的各个区域的平均亮度作为补光依据亮度，或者，将所述前景区域中包含有特定图像特征的区域的亮度作为补光依据亮度。
  18. 如权利要求14所述的补光控制装置，其特征在于：所述处理器还将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度大于或等于所述前景区域的亮度，且所述背景区域的亮度小于所述预设亮度阈值时，将所述各个区域的平均亮度作为补光依据亮度。
  19. 如权利要求14所述的补光控制装置，其特征在于：所述处理器在所述前景区域的亮度大于或等于所述预设亮度阈值时，不进行补光。
  20. 如权利要求1所述的补光控制装置，其特征在于：所述图像包括由摄像头采集的图像，所述处理器根据所述深度信息将所述摄像头采集的图像分割为多个区域。
  21. 如权利要求20所述的补光控制装置，其特征在于：所述处理器还用于控制深度检测装置获取所述深度信息，并根据所述深度检测装置与所述摄像头之间的空间位置关系，将所述深度信息和所述图像进行关联。
  22. 如权利要求1所述的补光控制装置，其特征在于：所述图像包括由深度检测装置获得的深度图像，所述处理器根据所述深度图像中的深度信息将所述深度图像分割为一个或多个区域。
  23. 如权利要求22所述的补光控制装置，其特征在于：所述处理器还用于根据所述深度信息对分割后的区域进行标记。
  24. 如权利要求1所述的补光控制装置，其特征在于：所述处理器还将确定的所述补光策略发送给一闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光策略驱动闪光灯闪光，以对所述拍摄画面进行补光。
  25. 如权利要求24所述的补光控制装置，其特征在于：所述补光策略包括补光依据亮度，所述处理器还用于依据一预先存储的补光依据亮度值与闪光灯驱动电流的映射关系来得到所述补光依据亮度对应的闪光灯驱动电流；以及
    所述处理器还将所述闪光灯驱动电流发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述闪光灯驱动电流调节闪光灯的输出电流，以驱动所述闪光灯闪光来对所述拍摄画面进行补光。
  26. 如权利要求24所述的补光控制装置，其特征在于：所述补光策略还包括补光持续时间，所述处理器还用于依据所述补光依据亮度计算补光持续时间，并将所述补光持续时间发送给所述闪光灯驱动电路，所述闪光灯驱动电路用于依据所述补光持续时间调节闪光灯输出电流的持续时间，以驱动所述闪光灯持续闪光。
  27. 如权利要求24所述的补光控制装置，其特征在于：所述补光策略还包括补光色温，所述处理器还用于依据所述一个或多个区域中的至少一个区域的色温计算补光色温，并将所述补光色温发送给所述闪光灯驱动电路，所述闪光灯驱动电路用于依据所述补光色温控制所述闪光灯的色温。
  28. 如权利要求1所述的补光控制装置，其特征在于：所述处理器还用于在获取所述图像之前控制闪光灯对所述拍摄画面进行预闪光。
  29. 一种移动设备，包括：
    摄像头，用于采集图像；以及
    补光控制装置，所述补光控制装置包括处理器，所述处理器用于获取图像以及与所述图像关联的深度信息，并根据所述深度信息将所述图像分割为一个或多个区域，以及根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对所述摄像头的拍摄画面的补光策略。
  30. 如权利要求29所述的移动设备，其特征在于：所述处理器还结合所述深度信息与所述图像的图像特征对所述图像进行分割。
  31. 如权利要求29所述的移动设备，其特征在于：所述补光策略的确定因素还包括相机信息，所述相机信息包括如下至少一种：光圈、快门、感光度（ISO）。
  32. 如权利要求29所述的移动设备，其特征在于：所述处理器具体用于从所述一个或多个区域中确定拍摄主体区域，并根据所述拍摄主体区域的亮度信息确定对拍摄画面的补光策略。
  33. 如权利要求32所述的移动设备，其特征在于：所述拍摄主体区域的确定因素至少包括所述一个或多个区域的深度信息、图像特征、区域面积中的至少之一。
  34. 如权利要求32或33所述的移动设备，其特征在于：所述处理器将深度值小于或等于一预定深度阈值的区域确定为所述拍摄主体区域。
  35. 如权利要求34所述的移动设备，其特征在于：所述处理器还用于计算分割后各个区域的面积，并将面积大于一预定面积阈值，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
  36. 如权利要求34所述的移动设备，其特征在于：所述处理器将包含有特定图像特征，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
  37. 如权利要求32所述的移动设备，其特征在于：所述补光策略包括补光依据亮度，所述处理器将所述拍摄主体区域的亮度作为补光依据亮度。
  38. 如权利要求37所述的移动设备，其特征在于：当所述拍摄主体区域多于一个区域时，所述处理器将各个所述拍摄主体区域中亮度最低的区域的亮度作为补光依据亮度。
  39. 如权利要求37所述的移动设备，其特征在于：当所述拍摄主体区域多于一个区域时，所述处理器将各个所述拍摄主体区域的平均亮度作为补光依据亮度。
  40. 如权利要求29所述的移动设备，其特征在于：所述处理器具体用于根据所述一个或多个区域中的至少一个区域对应的亮度信息确定所述拍摄画面的光线条件，并根据所述光线条件确定对所述拍摄画面的补光策略。
  41. 如权利要求40所述的移动设备，其特征在于：所述处理器在确定所述拍摄画面的光线条件时具体用于：
    将深度值小于一预定深度阈值的区域确定为前景区域；以及
    根据所述前景区域的亮度信息，确定所述光线条件。
  42. 如权利要求41所述的移动设备，其特征在于：所述补光策略包括补光依据亮度，所述处理器在所述前景区域的亮度小于一预设亮度阈值时，将所述各个区域的平均亮度或所述前景区域中的至少一个区域的亮度作为补光依据亮度。
  43. 如权利要求42所述的移动设备，其特征在于：所述处理器还将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度小于或等于所述前景区域的亮度时，将所述各个区域的平均亮度作为补光依据亮度。
  44. 如权利要求42所述的移动设备，其特征在于：所述处理器还将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度大于或等于所述预设亮度阈值时，将所述前景区域中的至少一个区域的亮度作为补光依据亮度。
  45. 如权利要求44所述的移动设备，其特征在于：所述处理器将所述前景区域中亮度最低的区域的亮度作为补光依据亮度，或者，将所述前景区域中的各个区域的平均亮度作为补光依据亮度，或者，将所述前景区域中包含有特定图像特征的区域的亮度作为补光依据亮度。
  46. 如权利要求42所述的移动设备，其特征在于：所述处理器还将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度大于或等于所述前景区域的亮度，且所述背景区域的亮度小于所述预设亮度阈值时，将所述各个区域的平均亮度作为补光依据亮度。
  47. 如权利要求42所述的移动设备，其特征在于：所述处理器在所述前景区域的亮度大于或等于所述预设亮度阈值时，不进行补光。
  48. 如权利要求29所述的移动设备，其特征在于：所述处理器获取的所述图像包括由所述摄像头采集的图像，所述处理器根据所述深度信息将所述摄像头采集的图像分割为多个区域。
  49. 如权利要求48所述的移动设备，其特征在于：所述移动设备还包括与所述补光控制装置通信连接的深度检测装置，所述深度检测装置用于检测所述深度信息；
    所述处理器根据所述深度检测装置与所述摄像头之间的空间位置关系，将所述深度信息和所述图像进行关联。
  50. 如权利要求29所述的移动设备，其特征在于：所述移动设备还包括与所述补光控制装置通信连接的深度检测装置，所述深度检测装置用于检测所述深度信息以及生成深度图像，所述处理器获取的所述图像包括由所述深度检测装置生成的深度图像，所述处理器根据所述深度图像的深度信息将所述深度图像分割为一个或多个区域。
  51. 如权利要求49或50所述的移动设备，其特征在于：所述深度检测装置为深度传感器。
  52. 如权利要求51所述的移动设备，其特征在于：所述深度传感器包括如下至少一种：红外距离传感器、超声波距离传感器、立体摄像距离传感器、飞行时间传感器。
  53. 如权利要求52所述的移动设备，其特征在于：所述处理器还用于根据所述深度信息对分割后的区域进行标记。
  54. 如权利要求29所述的移动设备，其特征在于：所述移动设备还包括闪光灯以及闪光灯驱动电路，所述闪光灯驱动电路与所述闪光灯以及所述补光控制装置分别电连接，所述处理器还将确定的所述补光策略发送给所述闪光灯驱动电路，所述闪光灯驱动电路用于依据所述补光控制装置确定的补光策略驱动所述闪光灯闪光，以对所述拍摄画面进行补光。
  55. 如权利要求54所述的移动设备，其特征在于：所述补光策略包括补光依据亮度，所述处理器还用于依据一预先存储的补光依据亮度值与闪光灯驱动电流的映射关系来得到所述补光依据亮度对应的闪光灯驱动电流；
    所述闪光灯驱动电路用于接收所述处理器发送的所述闪光灯驱动电流，并依据所述闪光灯驱动电流调节所述闪光灯的输出电流，以驱动所述闪光灯闪光来对所述拍摄画面进行补光。
  56. 如权利要求54所述的移动设备，其特征在于：所述补光策略还包括补光持续时间，所述处理器还用于依据所述补光依据亮度计算补光持续时间；
    所述闪光灯驱动电路用于接收所述处理器发送的所述补光持续时间，并依据所述补光持续时间调节所述闪光灯输出电流的持续时间，以驱动所述闪光灯持续闪光。
  57. 如权利要求54所述的移动设备，其特征在于：所述补光策略还包括补光色温，所述处理器还用于依据所述一个或多个区域中的至少一个区域的色温计算补光色温；
    所述闪光灯驱动电路用于接收所述处理器发送的所述补光色温，并依据所述补光色温控制所述闪光灯的色温。
  58. 如权利要求29所述的移动设备，其特征在于：所述移动设备还包括闪光灯以及闪光灯驱动电路，所述闪光灯驱动电路与所述闪光灯以及所述补光控制装置分别电连接，所述处理器还用于在获取所述图像之前控制所述闪光灯驱动电路来驱动所述闪光灯对所述拍摄画面进行预闪光。
  59. 如权利要求54所述的移动设备，其特征在于：所述闪光灯包括多个能够发出不同色温的光的闪光灯单元。
  60. 如权利要求59所述的移动设备，其特征在于：所述闪光灯单元发出的光的色温范围为3000K~7000K。
  61. 如权利要求54所述的移动设备，其特征在于：所述闪光灯为LED闪光灯，包括如下至少一种：单LED闪光灯、多LED闪光灯、单色温LED闪光灯、可变色温LED闪光灯。
  62. 如权利要求55所述的移动设备，其特征在于：所述移动设备还包括存储器，所述存储器用于预先存储一补光依据亮度值与闪光灯驱动电流的映射关系。
  63. 如权利要求29所述的移动设备，其特征在于：所述移动设备为如下中的一种：无人飞行器、手持云台、相机、手机。
  64. 一种补光控制系统，包括：
    获取模块，用于获取图像以及与所述图像关联的深度信息；
    分割模块，用于根据所述深度信息将所述图像分割为一个或多个区域；
    补光控制模块，根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对拍摄画面的补光策略。
  65. 如权利要求64所述的补光控制系统，其特征在于：所述分割模块用于结合所述深度信息与所述图像的图像特征对所述图像进行分割。
  66. 如权利要求64所述的补光控制系统，其特征在于：所述补光策略的确定因素还包括相机信息，所述相机信息包括如下至少一种：光圈、快门、感光度（ISO）。
  67. 如权利要求64所述的补光控制系统，其特征在于：所述补光控制模块具体用于从所述一个或多个区域中确定拍摄主体区域，并根据所述拍摄主体区域的亮度信息确定对拍摄画面的补光策略。
  68. 如权利要求67所述的补光控制系统，其特征在于：所述拍摄主体区域的确定因素至少包括所述一个或多个区域的深度信息、图像特征、区域面积中的至少之一。
  69. 如权利要求67或68所述的补光控制系统，其特征在于：所述补光控制模块将深度值小于或等于一预定深度阈值的区域确定为所述拍摄主体区域。
  70. 如权利要求69所述的补光控制系统，其特征在于：所述补光控制模块还用于计算分割后各个区域的面积，并将面积大于一预定面积阈值，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
  71. 如权利要求69所述的补光控制系统，其特征在于：所述补光控制模块用于将包含有特定图像特征，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
  72. 如权利要求67所述的补光控制系统，其特征在于：所述补光策略包括补光依据亮度，所述补光控制模块将所述拍摄主体区域的亮度作为补光依据亮度。
  73. 如权利要求72所述的补光控制系统，其特征在于：当所述拍摄主体区域多于一个区域时，所述补光控制模块将各个所述拍摄主体区域中亮度最低的区域的亮度作为补光依据亮度。
  74. 如权利要求72所述的补光控制系统，其特征在于：当所述拍摄主体区域多于一个区域时，所述补光控制模块将各个所述拍摄主体区域的平均亮度作为补光依据亮度。
  75. 如权利要求64所述的补光控制系统，其特征在于：所述补光控制模块具体用于根据所述一个或多个区域中的至少一个区域对应的亮度信息确定所述拍摄画面的光线条件，并根据所述光线条件确定对所述拍摄画面的补光策略。
  76. 如权利要求75所述的补光控制系统，其特征在于：所述补光控制模块在确定所述拍摄画面的光线条件时具体用于：
    将深度值小于一预定深度阈值的区域确定为前景区域；以及
    根据所述前景区域的亮度信息，确定所述光线条件。
  77. 如权利要求76所述的补光控制系统，其特征在于：所述补光策略包括补光依据亮度，所述补光控制模块在所述前景区域的亮度小于一预设亮度阈值时，将所述各个区域的平均亮度或所述前景区域中的至少一个区域的亮度作为补光依据亮度。
  78. 如权利要求77所述的补光控制系统，其特征在于：所述补光控制模块还用于将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度小于或等于所述前景区域的亮度时，将所述各个区域的平均亮度作为补光依据亮度。
  79. 如权利要求77所述的补光控制系统，其特征在于：所述补光控制模块还用于将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度大于或等于所述预设亮度阈值时，将所述前景区域中的至少一个区域的亮度作为补光依据亮度。
  80. 如权利要求79所述的补光控制系统，其特征在于：所述补光控制模块将所述前景区域中亮度最低的区域的亮度作为补光依据亮度，或者，将所述前景区域中的各个区域的平均亮度作为补光依据亮度，或者，将所述前景区域中包含有特定图像特征的区域的亮度作为补光依据亮度。
  81. 如权利要求77所述的补光控制系统，其特征在于：所述补光控制模块还将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度大于或等于所述前景区域的亮度，且所述背景区域的亮度小于所述预设亮度阈值时，将所述各个区域的平均亮度作为补光依据亮度。
  82. 如权利要求77所述的补光控制系统，其特征在于：所述补光控制模块在所述前景区域的亮度大于或等于所述预设亮度阈值时，不进行补光。
  83. 如权利要求64所述的补光控制系统，其特征在于：所述图像包括由摄像头采集的图像，所述分割模块根据所述深度信息将所述摄像头采集的图像分割为多个区域。
  84. 如权利要求83所述的补光控制系统，其特征在于：所述补光控制模块还用于控制深度检测装置获取所述深度信息，并根据所述深度检测装置与所述摄像头之间的空间位置关系，将所述深度信息和所述图像进行关联。
  85. 如权利要求64所述的补光控制系统，其特征在于：所述图像包括由深度检测装置获得的深度图像，所述分割模块根据所述深度图像中的深度信息将所述深度图像分割为一个或多个区域。
  86. 如权利要求85所述的补光控制系统，其特征在于：所述补光控制系统还包括标记模块，所述标记模块用于根据所述深度信息对分割后的区域进行标记。
  87. 如权利要求64所述的补光控制系统，其特征在于：所述补光控制模块还将确定的所述补光策略发送给一闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光策略驱动闪光灯闪光，以对所述拍摄画面进行补光。
  88. 如权利要求87所述的补光控制系统，其特征在于：所述补光策略包括补光依据亮度，所述补光控制模块还用于依据一预先存储的补光依据亮度值与闪光灯驱动电流的映射关系来得到所述补光依据亮度对应的闪光灯驱动电流；以及
    所述补光控制模块还将所述闪光灯驱动电流发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述闪光灯驱动电流调节闪光灯的输出电流，以驱动所述闪光灯闪光来对所述拍摄画面进行补光。
  89. 如权利要求87所述的补光控制系统，其特征在于：所述补光策略还包括补光持续时间，所述补光控制模块还用于依据所述补光依据亮度计算补光持续时间，并将所述补光持续时间发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光持续时间调节闪光灯输出电流的持续时间，以驱动所述闪光灯持续闪光。
  90. 如权利要求87所述的补光控制系统，其特征在于：所述补光策略还包括补光色温，所述补光控制模块还用于依据所述一个或多个区域中的至少一个区域的色温计算补光色温，并将所述补光色温发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光色温控制所述闪光灯的色温。
  91. 如权利要求64所述的补光控制系统，其特征在于：所述补光控制模块还用于在获取所述图像之前控制闪光灯对所述拍摄画面进行预闪光。
  92. 一种补光控制方法，包括以下步骤：
    获取图像以及与所述图像关联的深度信息；
    根据所述深度信息将所述图像分割为一个或多个区域；以及
    根据所述一个或多个区域中的至少一个区域对应的亮度信息确定对拍摄画面的补光策略。
  93. 如权利要求92所述的补光控制方法，其特征在于：所述补光控制方法具体包括步骤：
    结合所述深度信息与所述图像的图像特征对所述图像进行分割。
  94. 如权利要求92所述的补光控制方法，其特征在于：所述补光策略的确定因素还包括相机信息，所述相机信息包括如下至少一种：光圈、快门、感光度（ISO）。
  95. 如权利要求92所述的补光控制方法，其特征在于：所述确定对拍摄画面的补光策略的步骤具体包括：
    从所述一个或多个区域中确定拍摄主体区域；以及
    根据所述拍摄主体区域的亮度信息确定对拍摄画面的补光策略。
  96. 如权利要求95所述的补光控制方法，其特征在于：所述拍摄主体区域的确定因素至少包括所述一个或多个区域的深度信息、图像特征、区域面积中的一者。
  97. 如权利要求95或96所述的补光控制方法，其特征在于：所述补光控制方法具体还包括步骤：
    将深度值小于或等于一预定深度阈值的区域确定为所述拍摄主体区域。
  98. 如权利要求97所述的补光控制方法，其特征在于：所述补光控制方法具体还包括步骤：
    计算分割后各个区域的面积，并将面积大于一预定面积阈值，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
  99. 如权利要求97所述的补光控制方法，其特征在于：所述补光控制方法具体还包括步骤：
    将包含有特定图像特征，且深度值小于或等于所述预定深度阈值的区域确定为所述拍摄主体区域。
  100. 如权利要求95所述的补光控制方法，其特征在于：所述补光策略包括补光依据亮度，所述根据所述拍摄主体区域的亮度信息确定对拍摄画面的补光策略的步骤具体包括：
    将所述拍摄主体区域的亮度作为补光依据亮度。
  101. 如权利要求100所述的补光控制方法，其特征在于：当所述拍摄主体区域多于一个区域时，将各个所述拍摄主体区域中亮度最低的区域的亮度作为补光依据亮度。
  102. 如权利要求100所述的补光控制方法，其特征在于：当所述拍摄主体区域多于一个区域时，将各个所述拍摄主体区域的平均亮度作为补光依据亮度。
  103. 如权利要求92所述的补光控制方法，其特征在于：所述确定对拍摄画面的补光策略的步骤具体包括：
    根据所述一个或多个区域中的至少一个区域对应的亮度信息确定所述拍摄画面的光线条件；以及
    根据所述光线条件确定对所述拍摄画面的补光策略。
  104. 如权利要求103所述的补光控制方法，其特征在于：所述确定所述拍摄画面的光线条件的步骤具体包括：
    将深度值小于一预定深度阈值的区域确定为前景区域；以及
    根据所述前景区域的亮度信息，确定所述光线条件。
  105. 如权利要求104所述的补光控制方法，其特征在于：所述补光策略包括补光依据亮度，所述根据所述光线条件确定对所述拍摄画面的补光策略的步骤具体包括：
    在所述前景区域的亮度小于一预设亮度阈值时，将所述各个区域的平均亮度或所述前景区域中的至少一个区域的亮度作为补光依据亮度。
  106. 如权利要求105所述的补光控制方法，其特征在于：所述确定对拍摄画面的补光策略的步骤，具体还包括：将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度小于或等于所述前景区域的亮度时，将所述各个区域的平均亮度作为补光依据亮度。
  107. 如权利要求105所述的补光控制方法，其特征在于：所述确定对拍摄画面的补光策略的步骤，具体还包括：将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度大于或等于所述预设亮度阈值时，将所述前景区域中的至少一个区域的亮度作为补光依据亮度。
  108. 如权利要求107所述的补光控制方法，其特征在于：所述将所述前景区域中的至少一个区域的亮度作为补光依据亮度，具体包括：将所述前景区域中亮度最低的区域的亮度作为补光依据亮度，或者，将所述前景区域中的各个区域的平均亮度作为补光依据亮度，或者，将所述前景区域中包含有特定图像特征的区域的亮度作为补光依据亮度。
  109. 如权利要求105所述的补光控制方法，其特征在于：所述确定对拍摄画面的补光策略的步骤，具体还包括：将深度值大于或等于所述预定深度阈值的区域确定为背景区域，并在所述背景区域的亮度大于或等于所述前景区域的亮度，且所述背景区域的亮度小于所述预设亮度阈值时，将所述各个区域的平均亮度作为补光依据亮度。
  110. 如权利要求105所述的补光控制方法，其特征在于：所述根据所述光线条件确定对所述拍摄画面的补光策略的步骤具体包括：在所述前景区域的亮度大于或等于所述预设亮度阈值时，不进行补光。
  111. 如权利要求92所述的补光控制方法，其特征在于：所述图像包括由摄像头采集的图像，所述根据所述深度信息将所述图像分割为一个或多个区域具体包括步骤：
    根据所述深度信息将所述摄像头采集的图像分割为多个区域。
  112. 如权利要求111所述的补光控制方法，其特征在于：所述补光控制方法具体包括步骤：
    控制深度检测装置获取所述深度信息；以及
    根据所述深度检测装置与所述摄像头之间的空间位置关系，将所述深度信息和所述图像进行关联。
  113. 如权利要求92所述的补光控制方法，其特征在于：所述图像包括由深度检测装置获得的深度图像，所述补光控制方法具体包括步骤：
    根据所述深度图像中的深度信息将所述深度图像分割为一个或多个区域。
  114. 如权利要求113所述的补光控制方法，其特征在于：所述补光控制方法具体还包括步骤：
    根据所述深度信息对分割后的区域进行标记。
  115. 如权利要求92所述的补光控制方法，其特征在于：在确定对拍摄画面的补光策略之后还包括步骤：
    将确定的所述补光策略发送给一闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光策略驱动闪光灯闪光，以对所述拍摄画面进行补光。
  116. 如权利要求115所述的补光控制方法，其特征在于：所述补光策略包括补光依据亮度，所述补光控制方法具体还包括步骤：
    依据一预先存储的补光依据亮度值与闪光灯驱动电流的映射关系来得到所述补光依据亮度对应的闪光灯驱动电流；以及
    将所述闪光灯驱动电流发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述闪光灯驱动电流调节闪光灯的输出电流，以驱动所述闪光灯闪光来对所述拍摄画面进行补光。
  117. 如权利要求115所述的补光控制方法，其特征在于：所述补光策略还包括补光持续时间，所述补光控制方法具体还包括步骤：
    依据所述补光依据亮度计算补光持续时间，并将所述补光持续时间发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光持续时间调节闪光灯输出电流的持续时间，以驱动所述闪光灯持续闪光。
  118. 如权利要求115所述的补光控制方法，其特征在于：所述补光策略还包括补光色温，所述补光控制方法具体还包括步骤：
    依据所述一个或多个区域中的至少一个区域的色温计算补光色温，并将所述补光色温发送给所述闪光灯驱动电路，使所述闪光灯驱动电路依据所述补光色温控制所述闪光灯的色温。
  119. 如权利要求92所述的补光控制方法，其特征在于：在获取所述图像之前还包括步骤：
    控制闪光灯对所述拍摄画面进行预闪光。
PCT/CN2017/083962 2017-05-11 2017-05-11 补光控制装置、系统、方法以及移动设备 Ceased WO2018205229A1 (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/CN2017/083962 WO2018205229A1 (zh) 2017-05-11 2017-05-11 补光控制装置、系统、方法以及移动设备
CN201780067457.6A CN109923856A (zh) 2017-05-11 2017-05-11 补光控制装置、系统、方法以及移动设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/083962 WO2018205229A1 (zh) 2017-05-11 2017-05-11 补光控制装置、系统、方法以及移动设备

Publications (1)

Publication Number Publication Date
WO2018205229A1 true WO2018205229A1 (zh) 2018-11-15

Family

ID=64104171

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2017/083962 Ceased WO2018205229A1 (zh) 2017-05-11 2017-05-11 补光控制装置、系统、方法以及移动设备

Country Status (2)

Country Link
CN (1) CN109923856A (zh)
WO (1) WO2018205229A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110166648A (zh) * 2019-06-06 2019-08-23 杭州国翌科技有限公司 一种基于光学成像的摄像头探测锁定方法及装置
CN114093015A (zh) * 2022-01-21 2022-02-25 杭州魔点科技有限公司 针对人脸识别的智能补光方法、电子设备及存储介质
CN115567772A (zh) * 2021-07-02 2023-01-03 Oppo广东移动通信有限公司 闪光灯控制方法、装置、设备、存储介质及芯片
CN115761610A (zh) * 2022-12-09 2023-03-07 上海万向区块链股份公司 基于生物资产阴影区盘点计数的图像识别方法及系统
CN118433962A (zh) * 2024-05-06 2024-08-02 深圳欧拓圃科技有限公司 一种智能补光控制方法和系统

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4013037B1 (en) * 2020-12-11 2023-05-03 Axis AB Space mapping illumination in image system
CN113222922B (zh) * 2021-04-30 2024-02-27 杭州海康威视数字技术股份有限公司 红外爆闪灯补光范围检测方法、装置及设备
CN113632656B (zh) * 2021-08-20 2022-05-10 浙江树人学院（浙江树人大学） 一种生态园林植物生长动态补光控制系统
CN115225827A (zh) * 2022-07-12 2022-10-21 深圳市权志信息技术有限公司 一种全彩监控摄像机补光方法及终端
CN115914847B (zh) * 2022-12-19 2026-03-10 浙江大华技术股份有限公司 一种图像处理方法及装置
CN116245769A (zh) * 2023-03-16 2023-06-09 北京百度网讯科技有限公司 图像处理方法、装置、设备以及存储介质
CN121940649A (zh) * 2024-10-17 2026-04-28 万有引力（宁波）电子科技有限公司 补光工作参数调整方法、装置、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103546675A (zh) * 2012-07-16 2014-01-29 联想(北京)有限公司 一种亮度调节方法及电子设备
CN104092954A (zh) * 2014-07-25 2014-10-08 北京智谷睿拓技术服务有限公司 闪光控制方法及控制装置、图像采集方法及采集装置
CN104092956A (zh) * 2014-07-31 2014-10-08 北京智谷睿拓技术服务有限公司 闪光控制方法、闪光控制装置以及图像采集设备
CN104113702A (zh) * 2014-07-25 2014-10-22 北京智谷睿拓技术服务有限公司 闪光控制方法及控制装置、图像采集方法及采集装置
CN104618661A (zh) * 2015-03-05 2015-05-13 广东欧珀移动通信有限公司 一种相机补光控制方法和装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7663689B2 (en) * 2004-01-16 2010-02-16 Sony Computer Entertainment Inc. Method and apparatus for optimizing capture device settings through depth information
JP4867365B2 (ja) * 2006-01-30 2012-02-01 ソニー株式会社 撮像制御装置、撮像装置および撮像制御方法
JP4254873B2 (ja) * 2007-02-16 2009-04-15 ソニー株式会社 画像処理装置及び画像処理方法、撮像装置、並びにコンピュータ・プログラム
US8358370B2 (en) * 2007-12-05 2013-01-22 Nxp B.V. Flash light compensation system for digital camera system
CN101489050B (zh) * 2008-01-15 2011-07-20 华晶科技股份有限公司 自动曝光控制方法
JP2012019293A (ja) * 2010-07-06 2012-01-26 Sony Corp 画像処理装置、撮影方法、撮影プログラム、画像処理方法及び画像処理プログラム
CN103188446B (zh) * 2012-11-30 2016-06-08 深圳市捷高电子科技有限公司 摄像机的曝光方法
CN105100632B (zh) * 2014-05-13 2018-07-27 北京展讯高科通信技术有限公司 成像设备自动曝光的调整方法及装置、成像设备
CN103957363A (zh) * 2014-05-16 2014-07-30 深圳市中兴移动通信有限公司 闪光拍摄方法和拍摄装置
CN104463775A (zh) * 2014-10-31 2015-03-25 小米科技有限责任公司 一种实现图片景深效果的方法及装置
CN104333710A (zh) * 2014-11-28 2015-02-04 广东欧珀移动通信有限公司 相机曝光方法、装置及设备
CN105139407B (zh) * 2015-09-08 2018-08-21 江苏大学 一种基于Kinect传感器的颜色深度匹配植株识别方法
CN106534707A (zh) * 2015-09-14 2017-03-22 中兴通讯股份有限公司 拍摄的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103546675A (zh) * 2012-07-16 2014-01-29 联想(北京)有限公司 一种亮度调节方法及电子设备
CN104092954A (zh) * 2014-07-25 2014-10-08 北京智谷睿拓技术服务有限公司 闪光控制方法及控制装置、图像采集方法及采集装置
CN104113702A (zh) * 2014-07-25 2014-10-22 北京智谷睿拓技术服务有限公司 闪光控制方法及控制装置、图像采集方法及采集装置
CN104092956A (zh) * 2014-07-31 2014-10-08 北京智谷睿拓技术服务有限公司 闪光控制方法、闪光控制装置以及图像采集设备
CN104618661A (zh) * 2015-03-05 2015-05-13 广东欧珀移动通信有限公司 一种相机补光控制方法和装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110166648A (zh) * 2019-06-06 2019-08-23 杭州国翌科技有限公司 一种基于光学成像的摄像头探测锁定方法及装置
CN115567772A (zh) * 2021-07-02 2023-01-03 Oppo广东移动通信有限公司 闪光灯控制方法、装置、设备、存储介质及芯片
CN114093015A (zh) * 2022-01-21 2022-02-25 杭州魔点科技有限公司 针对人脸识别的智能补光方法、电子设备及存储介质
CN115761610A (zh) * 2022-12-09 2023-03-07 上海万向区块链股份公司 基于生物资产阴影区盘点计数的图像识别方法及系统
CN115761610B (zh) * 2022-12-09 2026-02-27 上海万向区块链股份公司 基于生物资产阴影区盘点计数的图像识别方法及系统
CN118433962A (zh) * 2024-05-06 2024-08-02 深圳欧拓圃科技有限公司 一种智能补光控制方法和系统

Also Published As

Publication number Publication date
CN109923856A (zh) 2019-06-21

Similar Documents

Publication Publication Date Title
WO2018205229A1 (zh) 补光控制装置、系统、方法以及移动设备
WO2020171583A1 (en) Electronic device for stabilizing image and method for operating same
WO2020171553A1 (en) An electronic device applying bokeh effect to image and controlling method thereof
EP3895130A1 (en) Electronic device for providing avatar animation and method thereof
WO2017010695A1 (en) Three dimensional content generating apparatus and three dimensional content generating method thereof
WO2019050360A1 (en) ELECTRONIC DEVICE AND METHOD FOR AUTOMATICALLY SEGMENTING TO BE HUMAN IN AN IMAGE
WO2019164185A1 (en) Electronic device and method for correcting image corrected in first image processing scheme in external electronic device in second image processing scheme
WO2020032497A1 (en) Method and apparatus for incorporating noise pattern into image on which bokeh processing has been performed
WO2019142997A1 (ko) 광학식 이미지 안정화 움직임에 의한 이미지의 변화를 보상하기 위한 장치 및 방법
WO2020116844A1 (en) Electronic device and method for acquiring depth information by using at least one of cameras or depth sensor
WO2020204659A1 (en) Electronic device, method, and computer-readable medium for providing bokeh effect in video
WO2019017585A1 (en) ELECTRONIC DEVICE FOR CONTROLLING THE DEVELOPMENT OF A LENS AND METHOD OF CONTROLLING THE SAME
WO2019066373A1 (ko) 이미지에 포함된 오브젝트의 카테고리 및 인식률에 기반하여 이미지를 보정하는 방법 및 이를 구현한 전자 장치
WO2020145482A1 (en) Electronic device for controlling frame rate of image sensor and method thereof
WO2020076128A1 (en) Method and electronic device for switching between first lens and second lens
WO2021025285A1 (ko) 얼굴이 포함된 영상의 노출 값을 조절하는 전자 장치
WO2019035551A1 (en) APPARATUS FOR COMPOSING OBJECTS USING DEPTH CARD AND ASSOCIATED METHOD
WO2021080231A1 (en) Method for obtaining face data and electronic device therefor
WO2021133025A1 (en) Electronic device comprising image sensor and method of operation thereof
WO2022014791A1 (en) Multi-frame depth-based multi-camera relighting of images
WO2019194544A1 (en) Method and system for handling 360 degree image content
WO2020190008A1 (en) Electronic device for auto focusing function and operating method thereof
WO2021162263A1 (ko) 이미지의 생성 방법 및 그 전자 장치
WO2021158057A1 (en) Electronic device and method for displaying image at the electronic device
WO2021066565A1 (en) Image processing method and electronic device supporting the same

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17909635

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17909635

Country of ref document: EP

Kind code of ref document: A1