CN108881691A - 控制方法、微处理器、计算机可读存储介质及计算机设备 - Google Patents

控制方法、微处理器、计算机可读存储介质及计算机设备 Download PDF

Info

Publication number
CN108881691A
CN108881691A CN201810771164.2A CN201810771164A CN108881691A CN 108881691 A CN108881691 A CN 108881691A CN 201810771164 A CN201810771164 A CN 201810771164A CN 108881691 A CN108881691 A CN 108881691A
Authority
CN
China
Prior art keywords
microprocessor
present intensity
luminous power
light projector
control method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810771164.2A
Other languages
English (en)
Inventor
周海涛
惠方方
欧锦荣
郭子青
谭筱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810771164.2A priority Critical patent/CN108881691A/zh
Publication of CN108881691A publication Critical patent/CN108881691A/zh
Priority to PCT/CN2019/075391 priority patent/WO2020010848A1/zh
Priority to TW108121513A priority patent/TWI714131B/zh
Priority to EP19185753.1A priority patent/EP3599761A3/en
Priority to US16/508,973 priority patent/US20200021729A1/en
Priority to EP20199678.2A priority patent/EP3771205A1/en
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/315—Modulator illumination systems
    • H04N9/3155—Modulator illumination systems for controlling the light source
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2513—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with several lines being projected in more than one direction, e.g. grids, patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B10/00—Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/50—Transmitters
    • H04B10/564—Power control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/20—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from infrared radiation only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply
    • H04N23/651—Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/957—Light-field or plenoptic cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
    • H04N5/2226—Determination of depth image, e.g. for foreground/background separation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3129—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] scanning a light beam on the display screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/315—Modulator illumination systems
    • H04N9/3164—Modulator illumination systems using multiple light sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Eye Examination Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

本发明公开了一种控制方法，用于结构光投射器。控制方法包括：获取场景的当前亮度；根据当前亮度确定结构光投射器的发光功率；控制结构光投射器按照发光功率发光。本发明还公开了一种微处理器、计算机可读存储介质及计算机设备。本发明实施方式的控制方法、微处理器、计算机可读存储介质及计算机设备可根据场景的当前亮度调节结构光投射器的发光功率，一方面可以提升深度图像的获取精度，另一方面有助于减小计算机设备的功耗。

Description

控制方法、微处理器、计算机可读存储介质及计算机设备
技术领域
本发明涉及三维成像技术领域，特别涉及一种控制方法、微处理器、计算机可读存储介质及计算机设备。
背景技术
结构光深度相机通常包括结构光投射器和图像采集器。结构光投射器向目标空间中投射衍射后的激光图案，图像采集器拍摄经由目标空间中的物体调制后的激光图案，并基于该激光图案与参考图案获得目标空间中物体的深度信息。结构光投射器发射的光通常为红外激光。环境光中也含有红外光的成分，因此，结构光深度相机工作时，环境光中的红外光成分会对图像采集器采集激光图案产生影响，进一步影响深度信息的获取精度。
发明内容
本发明的实施例提供了一种控制方法、微处理器、计算机可读存储介质及计算机设备。
本发明实施方式的控制方法用于结构光投射器，所述控制方法包括：
获取场景的当前亮度；
根据所述当前亮度确定所述结构光投射器的发光功率；和
控制所述结构光投射器按照所述发光功率发光。
本发明实施方式的微处理器与结构光深度相机电连接，所述结构光深度相机包括结构光投射器，所述微处理器用于：
获取场景的当前亮度；
根据所述当前亮度确定所述结构光投射器的发光功率；和
控制所述结构光投射器按照所述发光功率发光。
本发明实施方式的一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行上述的控制方法。
本发明实施方式的计算机设备，包括存储器及处理器，所述存储器中存储有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行上述的控制方法。
本发明实施方式的控制方法、微处理器、计算机可读存储介质及计算机设备可根据场景的当前亮度调节结构光投射器的发光功率，一方面可以提升深度图像的获取精度，另一方面有助于减小计算机设备的功耗。
本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1是本发明某些实施方式的控制方法的流程示意图。
图2是本发明某些实施方式的计算机设备的部分模块示意图。
图3是本发明某些实施方式的控制方法的流程示意图。
图4是本发明某些实施方式的控制方法的流程示意图。
图5是本发明某些实施方式的计算机设备的光源的结构示意图。
图6是本发明某些实施方式的计算机设备的结构示意图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。
请参阅图1，本发明提供一种用于结构光投射器11的控制方法。控制方法包括：
01：获取场景的当前亮度；
02：根据当前亮度确定结构光投射器11的发光功率；和
03：控制结构光投射器11按照发光功率发光。
请参阅图2，本发明还提供一种微处理器20。微处理器20与结构光深度相机10电连接。结构光深度相机10包括结构光投射器11和图像采集器12。步骤01、步骤02和步骤03均可以由微处理器20实现。也即是说，微处理器20可用于获取场景的当前亮度，根据当前亮度确定结构光投射器11的发光功率，以及控制结构光投射器11按照发光功率发光。
本发明实施方式的微处理器20可应用在计算机设备100(图6所示)中。其中，计算机设备100可以是智能手机、平板电脑、笔记本电脑、台式电脑、智能穿戴设备(如智能头盔、智能眼镜、智能手表、智能手环等)、虚拟现实设备等。
结构光深度相机10可以获取场景中物体的深度信息。具体地，结构光投射器11向场景中投射经衍射光学元件衍射后的激光图案，图像采集器12采集经物体调制后的激光图案，参考图案以及调制后的激光图案可用于计算深度图像，深度图像表征了场景中物体的深度信息。其中，激光图案通常为红外激光图案，图像采集器12通常为红外摄像头。结构光深度相机10使用时，由于环境光中也含有红外光的成分，图像采集器12感应到的红外光不仅包含有结构光投射器11投射的红外光分量，还包含有环境光中的红外光分量，因此，环境光中的红外光分量会对图像采集器12采集激光图案产生影响，进一步地影响深度信息的获取精度。尤其是在场景的当前亮度较亮时，环境光中的红外光分量在图像采集器12感应到的红外光总量中的占比较大，对于激光图案的采集的影响更大，深度信息的获取精度更低。
本发明实施方式的控制方法，在开启结构光投射器11之前，首先检测场景的当前亮度，再根据当前亮度确定结构光投射器11的发光功率，最后微处理器20控制结构光投射器11以确定后的光功率发光。其中，发光功率与当前亮度之间的关系为：当前亮度越高，发光功率越大；当前亮度越小，发光功率越小。可以理解，当前亮度较高时，图像采集器12感应到的环境光中的红外光分量也较多，此时，对应提高结构光投射器11的发光功率，则图像采集器12感应到的结构光投射器11投射的红外光分量也较多，如此，环境光中的红外光分量在图像采集器12感应到的红外光总量中的占比会相应减小，对于激光图案的采集的影响也相应减小，深度信息的获取精度更高。另外，在当前亮度较低时，发光功率相应减小，可以节省计算机设备100的功耗。
当然，需要说明的是，发光功率具有下限的功率阈值，结构光投射器11应以大于或等于功率阈值的功率进行发光以保证图像采集器12能够采集到足够亮度的激光图案，有利于基于该激光图案进行深度信息计算，保障深度信息的获取精度的准确性。
请一并参阅图2及图6，本发明实施方式的计算机设备100包括结构光深度相机10、微处理器20和应用处理器30。结构光投射器11和应用处理器30电连接，应用处理器30可以提供使能信号以控制结构光投射器11的开启和关闭。结构光投射器11还与微处理器20电连接，结构光投射器11可以连接在微处理器20的脉冲宽度调制接口73上，微处理器20为结构光投射器11提供脉冲信号以使结构光投射器11发光，并通过脉冲信号的宽度调制来调节结构光投射器11的发光功率。图像采集器12和应用处理器30电连接，应用处理器30可用于控制图像采集器12的电源启闭、关闭图像采集器12或重置图像采集器12。图像采集器12还与微处理器20电连接，图像采集器12可通过集成电路(Inter-Integrated Circuit,I2C)总线71与微处理器20连接，微处理器20可以给图像采集器12提供采集激光图案的时钟信号，图像采集器12采集的激光图案可以通过移动产业处理器接口(Mobile Industry ProcessorInterface，MIPI)72传输到微处理器20中。在本发明的具体实施例中，计算机设备100还包括红外补光灯60，红外补光灯60可向外发射均匀的红外光，红外光被场景中的物体反射后被图像采集器12接收以得到红外图像。红外补光灯60也可通过集成电路总线71与应用处理器30连接，应用处理器30可为红外补光灯60提供使能信号以控制红外补光的开启和关闭，红外补光灯60还可以与微处理器20电连接红外补光灯60连接在微处理器20的脉冲宽度调制接口73上，微处理器20为红外补光灯60提供脉冲信号以使红外补光灯60发光。
微处理器20可以是处理芯片，微处理器20与应用处理器30电连接。具体地，应用处理器30可用于重置微处理器20、唤醒微处理器20、纠错微处理器20等。微处理器20可通过移动产业处理器接口72与应用处理器30连接。具体地，应用处理器30包括可信执行环境(Trusted Execution Environment，TEE)31和非可信执行环境(Rich ExecutionEnvironment，REE)32，可信执行环境31中的代码和内存区域受访问控制单元控制，不能被非可信执行环境32中的程序所访问。微处理器20通过移动产业处理器接口72与应用处理器30的可信执行环境31连接，以将微处理器20中的数据直接传输到可信执行环境31中存储。
可信执行环境31中的数据包括参考图案、图像采集器12采集的激光图案及红外图像等。
参考图案是在计算机设备100出厂前预存到可信执行环境31中的。
微处理器20控制结构光投射器11向场景中投射激光图案，并控制图像采集器12采集经场景中的物体调制的激光图案，微处理器20再通过移动产业处理器接口72获取该激光图案，并通过与应用处理器30连接的移动产业处理器接口72将激光图案传输到应用处理器30的可信执行环境31中。应用处理器30可基于参考图案和激光图案计算深度图像。某些深度图像可作为深度模板，基于该深度模板，可以进行用户的身份验证。用户的身份验证通过后，可以获得计算机设备100的相应操作权限，例如，屏幕解锁、支付等操作权限。深度图像还可用于三维场景建模等。
微处理器20还可控制红外补光灯60向场景中投射均匀的红外光，并控制图像采集器12采集红外图像，微处理器20再通过移动产业处理器接口72获取该红外图像，并通过与应用处理器30连接的移动产业处理器接口72将红外图像传输到应用处理器30的可信执行环境31中。某些红外图像可作为红外模板，例如，红外图像中包含用户人脸的红外图像可作为人脸红外模板，基于该人脸红外模板可进行二维的人脸验证等。
综上，本发明实施方式的控制方法和微处理器20可根据场景的当前亮度调节结构光投射器11的发光功率，一方面可以提升深度图像的获取精度，另一方面有助于减小计算机设备100的功耗。
在某些实施方式中，微处理器20中也包括可信执行环境。微处理器20的可信执行环境中的数据包括参考图案、图像采集器12采集的激光图案及红外图像等。参考图案是在计算机设备100出厂前预存到微处理器20的可信执行环境中的。微处理器20从图像采集器12中接收激光图案后，将激光图案存储在微处理器20的可信执行环境中。微处理器20可基于参考图案和激光图案计算深度图像。包含人脸的深度信息的深度图像可以作为深度模板，微处理器20可将深度模板通过移动产业处理器接口72传送到应用处理器30的可信执行环境31中进行存储。在后续的身份验证时，微处理器20将计算得到的深度图像传输到应用处理器30中，应用处理器30来执行深度图像与深度模板的比对，并基于比对结果进行各种需要身份验证的进程的调度。同样地，微处理器20从图像采集器12中接收红外图像之后，将红外图像存储到微处理器20的可信执行环境中。包含人脸的红外图像可以作为红外模板，微处理器20可将红外模板通过移动产业处理器接口72传送到应用处理器30的可信执行环境31中进行存储。后续身份验证时，微处理器20将采集到的红外图像传送至应用处理器30中，应用处理器30来执行红外图像与红外模板的比对，并基于比对结果进行各种需要身份验证的进程的调度。
在某些实施方式中，参考图案存储在微处理器20中。微处理器20从图像采集器12中接收激光图案后，可将参考图案和激光图案通过移动产业处理器接口72一并传送到应用处理器30的可信执行环境31中进行存储，应用处理器30可基于参考图案和激光图案计算深度图像。其中，应用处理器30在可信执行环境31中进行深度图像的计算，计算出的深度图像也存储在可信执行环境31中。存储在应用处理器30的可信执行环境31中的某些深度图像可以作为深度模板。在后续身份验证时，应用处理器30执行深度图像的计算，并基于计算得到的深度图像与深度模板做比对，进一步基于比对结果进行各种需要身份验证的进程的调度。同样地，微处理器20从图像采集器12中接收红外图像之后，可将红外图像通过移动产业处理器接口72一并传送到应用处理器30的可信执行环境31中进行存储。存储在应用处理器30的可信执行环境31中的某些红外图像可以作为红外模板。在后续身份验证时，应用处理器30基于从微处理器20处接收的红外图像与红外模板作比对，并基于比对结果进行各种需要身份验证的进程的调度。
请参阅图2，在某些实施方式中，场景的当前亮度可以由光线传感器50检测。光线传感器50作为外部设备与微处理器20电连接，具体地，可通过集成电路总线71与微处理器20电连接。光线传感器50还与应用处理器30电连接，具体地，可通过集成电路总线71与应用处理器30电连接，应用处理器30可为光线传感器50提供使能信号以控制光线传感器的开启和关闭。光线传感器50是由投光器和受光器两个组件构成的，其工作原理是利用投光器将光线通过透镜聚焦，光线经过传输到达受光器的透镜，最后被感应器所接收。感应器将接收到的光线信号转换成电信号。电信号传送到微处理器20，微处理器20根据电信号的大小确定场景的当前亮度，最后再基于当前亮度确定结构光投射器11的发光功率。
请参阅图3，在某些实施方式中，步骤01获取场景的当前亮度包括：
011：获取场景的拍摄图像；和
012：根据拍摄图像计算当前亮度。
请参阅图2，在某些实施方式中，步骤011和步骤012均可以由微处理器20实现。也即是说，微处理器20还可以用于获取场景的拍摄图像，以及根据拍摄图像计算当前亮度。
其中，场景的拍摄图像可以由图像采集器12采集。此时拍摄图像为灰度图像。灰度图像的多个像素值反映了场景中各个位置处的亮度，微处理器20可以根据灰度图像的像素值计算场景的当前亮度，例如对整幅灰度图像的像素值求和后再取均值等。基于拍摄图像来计算场景的当前亮度可以无需设置光线传感器，减少计算机设备100的外设数量。
在某些实施方式中，计算机设备100还包括可见光相机40。可见光相机40与应用处理器30连接，具体地，可见光相机40可通过集成电路总线71与应用处理器30连接。应用处理器30可以为可见光相机40提供使能信号以开启或关闭可见光相机40、或者重置可见光相机40。可见光相机40还与微处理器20电连接，具体地，可见光相机40可通过集成电路总线71与微处理器20连接，微处理器20可以给可见光相机40提供拍摄可见光图像的时钟信号，可见光相机40拍摄的可见光图像可通过移动产业处理器接口72传输到微处理器20中。微处理器20还可通过移动产业处理器接口72将可见光图像传输到应用处理器30的非可信执行环境32中，应用处理器30可根据深度图像和可见光图像做场景的三维建模，得到场景的三维彩色模型等，或者，根据深度图像和可见光图像做人脸美颜，具体地，应用处理器30基于深度图像可以更加准确识别出人脸在可见光图像中对应的像素点，再对人脸进行美颜，提升人脸美颜的效果等。在微处理器20也包括可信执行环境和非可信执行环境时，上述的三维场景建模、人脸美颜等也可由微处理器20执行。
其中，拍摄图像也可以为可见光相机40拍摄的可见光图像。可见光图像的像素值通常为RGB格式的数据，微处理器20接收到可见光图像后，首先通过以下公式，基于RGB格式的像素值计算YCrCb格式中的亮度分量Y的值：Y＝0.257×R+0.564×G+0.098×B。随后，微处理器20可根据整幅可见光图像的多个Y值计算场景的当前亮度，例如，对多个Y值求和再取均值，将最终结果作为场景的当前亮度等。
请参阅图4，在某些实施方式中，多个发光功率与多个预设亮度范围一一对应。步骤02根据当前亮度确定结构光投射器11的发光功率包括：
021：确定当前亮度所处的预设亮度范围；和
022：根据预设亮度范围确定与预设亮度范围对应的发光功率。
请参阅图2，在某些实施方式中，步骤021和步骤022均可以由微处理器20实现。也即是说，微处理器20还可用于确定当前亮度所处的预设亮度范围，以及根据预设亮度范围确定与预设亮度范围对应的发光功率。
具体地，微处理器20中预存有预设亮度范围与发光功率的对应表，每个预设亮度范围与一个发光功率相对应。微处理器20计算出当前亮度后，首先判断当前亮度处于哪一个预设亮度范围内，在确定除预设亮度范围之后，再从对应表中查找与当前亮度所处的预设亮度范围对应的发光功率，并控制结构光投射器11以确定出的发光功率发光。其中，预设亮度范围与发光功率的对应表为在计算机设备100生产制造过程中通过实验标定得到的。
本发明实施方式的控制方法通过划分多个预设亮度范围，并设定与多个预设亮度范围一一对应的发光功率，则在结构光深度相机10工作时，微处理器20可以根据对应表找到与当前亮度最为契合的发光功率，一方面可以提升深度图像的获取精度，另一方面可以减小计算机设备100的功耗。
在某些实施方式中，发光功率的控制除了改变脉冲的占空比及幅值之外，还可以通过对结构光投射器11的光源111进行分区控制来得到。此时，光源111分为多个发光区域1112，每个发光区域1112包括多个点光源1111，每个发光区域1112可以独立控制。在确定发光功率后，基于该发光功率确定需要开启的发光区域1112的数量及发光区域1112的位置。以图5为例，光源111分为8个发光区域1112，假设基于确定的发光功率需要开启4个发光区域1112，则对应图5中所示的4个发光区域1112，这四个发光区域1112呈中心对称分布，可以提升结构光投射器11投射到场景中的激光图案的亮度的均匀性，有利于进一步提升深度图像的获取精度。
需要说明的是，光源111的形状除了图5中所示的圆形之外，还可以是三角形、矩形、正方形、平行四边形、多边形等等，在此不做限制。发光区域1112除了呈图5所示的扇形分布外，还可以是呈环形、“回”字形等分布，在此不做限制。
请参阅图6，本发明还提供一种计算机设备100。计算机设备100包括存储器80及处理器90。存储器80中存储有计算机可读指令81。指令被处理器90执行时，使得处理器90执行上述任意一项实施方式所述的控制方法。其中，计算机设备100中的处理器90可为上述的微处理器20。
例如，指令被处理器90执行时，处理器90可执行以下步骤：
01：获取场景的当前亮度；
02：根据当前亮度确定结构光投射器11的发光功率；和
03：控制结构光投射器11按照发光功率发光。
再例如，指令被处理器90执行时，处理器还可执行以下步骤：
021：确定当前亮度所处的预设亮度范围；和
022：根据预设亮度范围确定与预设亮度范围对应的发光功率。
本发明还提供一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当计算机可执行指令被一个或多个处理器90执行时，使得处理器90执行上述任意一项实施方式所述的控制方法。其中，处理器90可为上述的微处理器20。
例如，当计算机可执行指令被一个或多个处理器90执行时，处理器90可执行以下步骤：
01：获取场景的当前亮度；
02：根据当前亮度确定结构光投射器11的发光功率；和
03：控制结构光投射器11按照发光功率发光。
再例如，当计算机可执行指令被一个或多个处理器90执行时，处理器90还可执行以下步骤：
021：确定当前亮度所处的预设亮度范围；和
022：根据预设亮度范围确定与预设亮度范围对应的发光功率。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
此外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (12)

1.一种控制方法，用于结构光投射器，其特征在于，所述控制方法包括：
获取场景的当前亮度；
根据所述当前亮度确定所述结构光投射器的发光功率；和
控制所述结构光投射器按照所述发光功率发光。
2.根据权利要求1所述的控制方法，其特征在于，所述当前亮度可以由光线传感器检测。
3.根据权利要求1所述的控制方法，其特征在于，所述获取场景的当前亮度的步骤包括：
获取所述场景的拍摄图像；和
根据所述拍摄图像计算所述当前亮度。
4.根据权利要求1所述的控制方法，其特征在于，多个所述发光功率与预设亮度范围一一对应，所述根据所述当前亮度确定所述结构光投射器的发光功率的步骤包括：
确定所述当前亮度所处的预设亮度范围；和
根据所述预设亮度范围确定与所述预设亮度范围对应的所述发光功率。
5.根据权利要求1所述的控制方法，其特征在于，所述当前亮度越高，所述发光功率越大。
6.一种微处理器，其特征在于，所述微处理器与结构光深度相机电连接，所述结构光深度相机包括结构光投射器，所述微处理器用于：
获取场景的当前亮度；
根据所述当前亮度确定所述结构光投射器的发光功率；和
控制所述结构光投射器按照所述发光功率发光。
7.根据权利要求6所述的微处理器，其特征在于，所述当前亮度可以由光线传感器检测。
8.根据权利要求6所述的微处理器，其特征在于，所述微处理器还用于：
获取所述场景的拍摄图像；和
根据所述拍摄图像计算所述当前亮度。
9.根据权利要求6所述的微处理器，其特征在于，多个所述发光功率与多个预设亮度范围一一对应，所述微处理器还用于：
确定所述当前亮度所处的预设亮度范围；和
根据所述预设亮度范围确定与所述预设亮度范围对应的所述发光功率。
10.根据权利要求6所述的微处理器，其特征在于，所述当前亮度越高，所述发光功率越大。
11.一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行权利要求1至5中任意一项所述的控制方法。
12.一种计算机设备，包括存储器及处理器，所述存储器中存储有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行权利要求1至5中任意一项所述的控制方法。
CN201810771164.2A 2018-07-13 2018-07-13 控制方法、微处理器、计算机可读存储介质及计算机设备 Pending CN108881691A (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201810771164.2A CN108881691A (zh) 2018-07-13 2018-07-13 控制方法、微处理器、计算机可读存储介质及计算机设备
PCT/CN2019/075391 WO2020010848A1 (zh) 2018-07-13 2019-02-18 控制方法、微处理器、计算机可读存储介质及计算机设备
TW108121513A TWI714131B (zh) 2018-07-13 2019-06-20 控制方法、微處理器、電腦可讀記錄媒體及電腦設備
EP19185753.1A EP3599761A3 (en) 2018-07-13 2019-07-11 Control method, microprocessor, computer-readable storage medium, and computer program
US16/508,973 US20200021729A1 (en) 2018-07-13 2019-07-11 Control method, control device and computer device
EP20199678.2A EP3771205A1 (en) 2018-07-13 2019-07-11 Control method, microprocessor, computer-readable storage medium, and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810771164.2A CN108881691A (zh) 2018-07-13 2018-07-13 控制方法、微处理器、计算机可读存储介质及计算机设备

Publications (1)

Publication Number Publication Date
CN108881691A true CN108881691A (zh) 2018-11-23

Family

ID=64301957

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810771164.2A Pending CN108881691A (zh) 2018-07-13 2018-07-13 控制方法、微处理器、计算机可读存储介质及计算机设备

Country Status (5)

Country Link
US (1) US20200021729A1 (zh)
EP (2) EP3599761A3 (zh)
CN (1) CN108881691A (zh)
TW (1) TWI714131B (zh)
WO (1) WO2020010848A1 (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110062145A (zh) * 2019-05-24 2019-07-26 Oppo广东移动通信有限公司 深度相机、电子设备及图像获取方法
CN110072044A (zh) * 2019-05-30 2019-07-30 Oppo广东移动通信有限公司 深度相机的控制方法及控制装置、终端及可读存储介质
CN110111393A (zh) * 2019-03-31 2019-08-09 惠州市德赛西威汽车电子股份有限公司 一种汽车全景标定方法、装置及系统
CN110462438A (zh) * 2019-06-24 2019-11-15 深圳市汇顶科技股份有限公司 结构光投射装置、结构光投射方法及三维测量系统
CN110541699A (zh) * 2019-07-08 2019-12-06 山东四维卓识信息技术有限公司 一种工程用旋挖施工方法、系统及存储介质
WO2020010848A1 (zh) * 2018-07-13 2020-01-16 Oppo广东移动通信有限公司 控制方法、微处理器、计算机可读存储介质及计算机设备
CN110719454A (zh) * 2019-10-15 2020-01-21 浙江晶鲸科技有限公司 电控红外光发射器自适应驱动装置及驱动方法
CN110944135A (zh) * 2019-11-18 2020-03-31 深圳前海达闼云端智能科技有限公司 一种功率控制方法、电子设备及存储介质
CN111050087A (zh) * 2019-12-26 2020-04-21 杭州涂鸦信息技术有限公司 一种基于rgb统计信息的红外防过曝算法及其系统和装置
WO2020248097A1 (zh) * 2019-06-10 2020-12-17 Oppo广东移动通信有限公司 图像获取方法、终端及计算机可读存储介质
CN112584054A (zh) * 2019-09-29 2021-03-30 深圳市光鉴科技有限公司 基于图像编码的亮度自适应调节方法、系统、设备及介质
WO2021227504A1 (zh) * 2020-05-13 2021-11-18 奥比中光科技集团股份有限公司 一种深度计算系统、方法及计算机可读存储介质
CN114693793A (zh) * 2020-12-25 2022-07-01 瑞芯微电子股份有限公司 一种标定方法、控制方法、介质、结构光模组及电子设备

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114339063A (zh) * 2021-12-30 2022-04-12 深圳市先地图像科技有限公司 一种图像曝光方法、装置、存储介质及相关设备
CN115103170B (zh) * 2022-06-20 2023-10-31 岚图汽车科技有限公司 投影仪控制方法及装置、车辆

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104917960A (zh) * 2015-05-19 2015-09-16 广东欧珀移动通信有限公司 一种控制摄像头旋转的方法及终端
CN105890520A (zh) * 2016-04-20 2016-08-24 感知控股集团有限公司 一种结构光发生装置及结构光测量系统
CN106296716A (zh) * 2016-08-24 2017-01-04 深圳奥比中光科技有限公司 光源的功率调整方法、深度测量方法及装置
CN206149421U (zh) * 2016-08-12 2017-05-03 北京旷视科技有限公司 激光模组功率校准单元及深度相机
US20170142312A1 (en) * 2015-11-12 2017-05-18 Aquifi, Inc. System and method for high dynamic range depth capture using multiple cameras

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102086509B1 (ko) * 2012-11-23 2020-03-09 엘지전자 주식회사 3차원 영상 획득 방법 및 장치
US9392262B2 (en) * 2014-03-07 2016-07-12 Aquifi, Inc. System and method for 3D reconstruction using multiple multi-channel cameras
US20160335492A1 (en) * 2015-05-15 2016-11-17 Everready Precision Ind. Corp. Optical apparatus and lighting device thereof
CN108616726A (zh) * 2016-12-21 2018-10-02 光宝电子(广州)有限公司 基于结构光的曝光控制方法及曝光控制装置
KR102476404B1 (ko) * 2017-07-18 2022-12-12 엘지이노텍 주식회사 ToF 모듈 및 그 ToF 모듈을 이용한 피사체 인식장치
US11151235B2 (en) * 2017-08-01 2021-10-19 Apple Inc. Biometric authentication techniques
CN108227361B (zh) * 2018-03-12 2020-05-26 Oppo广东移动通信有限公司 控制方法、控制装置、深度相机和电子装置
CN108471525B (zh) * 2018-03-27 2020-07-17 百度在线网络技术（北京）有限公司 用于投影仪的控制方法和装置以及实现该方法的投影仪
CN108881691A (zh) * 2018-07-13 2018-11-23 Oppo广东移动通信有限公司 控制方法、微处理器、计算机可读存储介质及计算机设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104917960A (zh) * 2015-05-19 2015-09-16 广东欧珀移动通信有限公司 一种控制摄像头旋转的方法及终端
US20170142312A1 (en) * 2015-11-12 2017-05-18 Aquifi, Inc. System and method for high dynamic range depth capture using multiple cameras
CN105890520A (zh) * 2016-04-20 2016-08-24 感知控股集团有限公司 一种结构光发生装置及结构光测量系统
CN206149421U (zh) * 2016-08-12 2017-05-03 北京旷视科技有限公司 激光模组功率校准单元及深度相机
CN106296716A (zh) * 2016-08-24 2017-01-04 深圳奥比中光科技有限公司 光源的功率调整方法、深度测量方法及装置

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020010848A1 (zh) * 2018-07-13 2020-01-16 Oppo广东移动通信有限公司 控制方法、微处理器、计算机可读存储介质及计算机设备
CN110111393B (zh) * 2019-03-31 2023-10-03 惠州市德赛西威汽车电子股份有限公司 一种汽车全景标定方法、装置及系统
CN110111393A (zh) * 2019-03-31 2019-08-09 惠州市德赛西威汽车电子股份有限公司 一种汽车全景标定方法、装置及系统
WO2020238729A1 (en) * 2019-05-24 2020-12-03 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Depth cameras, electronic devices, and methods for image acquisition
EP3745195A1 (en) * 2019-05-24 2020-12-02 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Depth cameras, electronic devices, and methods for image acquisition
CN110062145A (zh) * 2019-05-24 2019-07-26 Oppo广东移动通信有限公司 深度相机、电子设备及图像获取方法
CN110062145B (zh) * 2019-05-24 2021-07-20 Oppo广东移动通信有限公司 深度相机、电子设备及图像获取方法
CN110072044A (zh) * 2019-05-30 2019-07-30 Oppo广东移动通信有限公司 深度相机的控制方法及控制装置、终端及可读存储介质
WO2020248097A1 (zh) * 2019-06-10 2020-12-17 Oppo广东移动通信有限公司 图像获取方法、终端及计算机可读存储介质
CN110462438A (zh) * 2019-06-24 2019-11-15 深圳市汇顶科技股份有限公司 结构光投射装置、结构光投射方法及三维测量系统
WO2020257969A1 (zh) * 2019-06-24 2020-12-30 深圳市汇顶科技股份有限公司 结构光投射装置、结构光投射方法及三维测量系统
CN110541699B (zh) * 2019-07-08 2023-02-28 山东四维卓识信息技术有限公司 一种工程用旋挖施工方法、系统及存储介质
CN110541699A (zh) * 2019-07-08 2019-12-06 山东四维卓识信息技术有限公司 一种工程用旋挖施工方法、系统及存储介质
CN112584054A (zh) * 2019-09-29 2021-03-30 深圳市光鉴科技有限公司 基于图像编码的亮度自适应调节方法、系统、设备及介质
CN110719454B (zh) * 2019-10-15 2021-09-14 浙江晶鲸科技有限公司 电控红外光发射器自适应驱动装置及驱动方法
CN110719454A (zh) * 2019-10-15 2020-01-21 浙江晶鲸科技有限公司 电控红外光发射器自适应驱动装置及驱动方法
CN110944135B (zh) * 2019-11-18 2022-05-31 深圳前海达闼云端智能科技有限公司 一种功率控制方法、电子设备及存储介质
CN110944135A (zh) * 2019-11-18 2020-03-31 深圳前海达闼云端智能科技有限公司 一种功率控制方法、电子设备及存储介质
CN111050087B (zh) * 2019-12-26 2021-03-09 杭州涂鸦信息技术有限公司 一种基于rgb统计信息的红外防过曝方法及其系统和装置
CN111050087A (zh) * 2019-12-26 2020-04-21 杭州涂鸦信息技术有限公司 一种基于rgb统计信息的红外防过曝算法及其系统和装置
WO2021227504A1 (zh) * 2020-05-13 2021-11-18 奥比中光科技集团股份有限公司 一种深度计算系统、方法及计算机可读存储介质
CN114693793A (zh) * 2020-12-25 2022-07-01 瑞芯微电子股份有限公司 一种标定方法、控制方法、介质、结构光模组及电子设备

Also Published As

Publication number Publication date
WO2020010848A1 (zh) 2020-01-16
EP3599761A3 (en) 2020-04-22
EP3599761A2 (en) 2020-01-29
EP3771205A1 (en) 2021-01-27
TW202023261A (zh) 2020-06-16
TWI714131B (zh) 2020-12-21
US20200021729A1 (en) 2020-01-16

Similar Documents

Publication Publication Date Title
CN108881691A (zh) 控制方法、微处理器、计算机可读存储介质及计算机设备
CN103503030B (zh) 通过进行图像处理来决定位于现实空间中的对象物的进深的图像处理装置、立体视觉装置、集成电路
CN110168562B (zh) 基于深度的控制方法、基于深度的控制装置和电子装置
CN107343189B (zh) 白平衡处理方法和装置
CN104092953B (zh) 调光控制方法和装置及具有拍照功能的设备
CN108769476B (zh) 图像获取方法及装置、图像采集装置、计算机设备和可读存储介质
CN108550101A (zh) 图像处理方法、装置及存储介质
CN105227857B (zh) 一种自动曝光的方法和装置
CN108961157B (zh) 图片处理方法、图片处理装置及终端设备
CN110378944A (zh) 深度图处理方法、装置和电子设备
CN108594451A (zh) 控制方法、控制装置、深度相机和电子装置
CN109068036A (zh) 控制方法及装置、深度相机、电子装置及可读存储介质
CN110166600A (zh) 电子设备及其控制方法
CN107945754A (zh) 屏幕亮度的调节方法、电子设备及计算机可读存储介质
CN208782911U (zh) 镜头组件、传感装置及成像系统
CN108961195A (zh) 图像处理方法及装置、图像采集装置、可读存储介质和计算机设备
CN108551552A (zh) 图像处理方法、装置、存储介质及移动终端
CN108227361A (zh) 控制方法、控制装置、深度相机和电子装置
GB2545394A (en) Systems and methods for forming three-dimensional models of objects
CN108777784B (zh) 深度获取方法和装置、电子装置、计算机设备和存储介质
CN108965525A (zh) 检测方法和装置、终端、计算机设备和可读存储介质
CN113723326A (zh) 一种光补偿方法及装置、计算机装置及存储介质
CN110196422A (zh) 激光测距的测试方法、测试装置及移动终端
WO2023183713A1 (en) Systems and methods for defining, bonding, and editing point cloud data points with primitives
TWI582515B (zh) 用於具有背光冠環的球形照明之方法、電腦系統及電腦程式產品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1262336

Country of ref document: HK

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181123