CN111314623A - 基于驾驶员监控系统的图像采集方法及装置 - Google Patents

基于驾驶员监控系统的图像采集方法及装置 Download PDF

Info

Publication number
CN111314623A
CN111314623A CN202010121988.2A CN202010121988A CN111314623A CN 111314623 A CN111314623 A CN 111314623A CN 202010121988 A CN202010121988 A CN 202010121988A CN 111314623 A CN111314623 A CN 111314623A
Authority
CN
China
Prior art keywords
image
frame
average brightness
exposure
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010121988.2A
Other languages
English (en)
Inventor
赵玺
赵玉鹏
刘建军
吕国敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Adasplus Beijing Technology Co ltd
Original Assignee
Adasplus Beijing Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Adasplus Beijing Technology Co ltd filed Critical Adasplus Beijing Technology Co ltd
Priority to CN202010121988.2A priority Critical patent/CN111314623A/zh
Publication of CN111314623A publication Critical patent/CN111314623A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

本申请公开了一种基于驾驶员监控系统的图像采集方法及装置、电子设备及可读存储介质。该方法包括:通过传感器采集多帧长曝光图像和多帧短曝光图像;将每帧所述长曝光图像和每帧所述短曝光图像组合成一帧图像并输出,以得到第一图像数据;确定所述第一图像数据中的每帧图像的平均亮度;根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据。本申请解决了相关技术中由于驾驶员监控系统采集到的图像质量不高导致无法对驾驶员的危险驾驶行为做出准确预警的技术问题。通过本申请,能够通过控制自动曝光量提高采集图像的质量,进而对驾驶员的危险驾驶行为做出准确预警。

Description

基于驾驶员监控系统的图像采集方法及装置
技术领域
本申请涉及辅助驾驶技术领域,具体而言,涉及一种基于驾驶员监控系统的图像采集方法及装置、电子设备及可读存储介质。
背景技术
驾驶员监控系统(Driver Monitor System,简称DMS),主要实现对驾驶员的身份识别、驾驶员疲劳监测以及危险驾驶行为的监测功能,针对自动驾驶功能等级,乘用车、商用车等不同领域的应用,还可以设计不同的报警机制,并可对关键数据进行存储和上传云端,系统的设计遵循ASIL-B的安全设计要求,能够较好的提升智能驾驶安全等级,提高车辆行驶安全。
DMS摄像头能够在车内对驾驶员的一些危险驾驶的行为动作进行图像采集,通过硬件和软件相结合的方式对图像数据进行优化处理,进而提供给深度学习更好的图像数据,从而达到对驾驶员不安全的驾驶行为进行更准确的预警,因此,DMS摄像头采集的图像质量尤其重要。
发明人发现,相关技术中的DMS摄像头在红外灯下眼镜过曝或者眼镜镜面的反光会导致睁闭眼难以识别,在逆光场景下,摄像头的动态范围比较小、画面的亮度统计不准确,从而导致逆光场景下,会出现过曝或者过暗的现象,所以从图像中很难提取到驾驶员较多的有用信息,对驾驶员行为动作识别比较困难。在阴阳脸场景下,由于太阳光红外的影响和亮度统计不准确,会导致采集的图像数据很差,从而导致很难对一些危险驾驶的动作作出预警。
针对相关技术中由于驾驶员监控系统采集到的图像质量不高导致无法对驾驶员的危险驾驶行为做出准确预警的问题,目前尚未提出有效的解决方案。
发明内容
本申请的主要目的在于提供一种基于驾驶员监控系统的图像采集方法及装置、电子设备及可读存储介质,以解决相关技术中由于驾驶员监控系统采集到的图像质量不高导致无法对驾驶员的危险驾驶行为做出准确预警的问题。
为了实现上述目的,根据本申请的第一方面,提供了一种基于驾驶员监控系统的图像采集方法。
根据本申请的基于驾驶员监控系统的图像采集方法包括:通过传感器采集多帧长曝光图像和多帧短曝光图像;将每帧所述长曝光图像和每帧所述短曝光图像组合成一帧图像并输出,以得到第一图像数据;确定所述第一图像数据中的每帧图像的平均亮度;根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据。
进一步地,所述确定所述第一图像数据中的每帧图像的平均亮度包括:将所述第一图像数据中的每帧图像划分成若干个子区域;根据每个子区域的预设权重计算每帧图像的平均亮度。
进一步地,所述确定所述第一图像数据中的每帧图像的平均亮度包括:根据所述每帧图像的目标位置将所述每帧图像划分成若干个子区域;根据所述每帧图像的目标与每个所述子区域的相对位置,为每个所述子区域设置不同的权重值;根据每个所述子区域的权重值计算每帧图像的平均亮度。
进一步地,所述根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据包括:将所述每帧图像的平均亮度与预设目标亮度冗余范围比较;根据比较结果调整所述传感器的曝光时间,以得到所述第二图像数据。
为了实现上述目的,根据本申请的第二方面,提供了一种基于驾驶员监控系统的图像采集装置。
根据本申请的基于驾驶员监控系统的图像采集装置包括:采集模块,用于通过传感器采集多帧长曝光图像和多帧短曝光图像;处理模块,用于将每帧所述长曝光图像和每帧所述短曝光图像组合成一帧图像并输出,以得到第一图像数据;确定模块,用于确定所述第一图像数据中的每帧图像的平均亮度;控制模块,用于根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据。
进一步地,所述确定模块包括:第一划分单元,用于将所述第一图像数据中的每帧图像划分成若干个子区域;第一计算单元,用于根据每个子区域的预设权重计算每帧图像的平均亮度。
进一步地,所述确定模块包括:第二划分单元,用于根据所述每帧图像的目标位置将所述每帧图像划分成若干个子区域;设置单元,用于根据所述每帧图像的目标与每个所述子区域的相对位置,为每个所述子区域设置不同的权重值;第二计算单元,用于根据每个所述子区域的权重值计算每帧图像的平均亮度。
进一步地,所述控制模块包括:比较单元,用于将所述每帧图像的平均亮度与预设目标亮度冗余范围比较;根据比较结果调整所述传感器的曝光时间,以得到所述第二图像数据。
为了实现上述目的,根据本申请的第三方面,提供了一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如前任一项所述的方法。
为了实现上述目的,根据本申请的第四方面,提供了一种非暂态可读存储介质,其上存储有计算机指令,所述指令被处理器执行时实现如前任一项所述方法的步骤。
在本申请实施例中,采用通过传感器采集多帧长曝光图像和多帧短曝光图像;将每帧所述长曝光图像和每帧所述短曝光图像组合成一帧图像并输出,以得到第一图像数据;确定所述第一图像数据中的每帧图像的平均亮度的方式,通过根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据,达到了优化驾驶员监测系统采集的图像质量的目的,从而实现了对驾驶员的危险驾驶行为做出准确预警的技术效果,进而解决了相关技术中由于驾驶员监控系统采集到的图像质量不高导致无法对驾驶员的危险驾驶行为做出准确预警的技术问题。
附图说明
构成本申请的一部分的附图用来提供对本申请的进一步理解,使得本申请的其它特征、目的和优点变得更明显。本申请的示意性实施例附图及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是根据本申请第一实施例的基于驾驶员监控系统的图像采集方法的流程示意图;
图2是根据本申请实施例的两帧图像合一处理的原理框图;
图3是根据本申请实施例的基于驾驶员监控系统的图像采集流程的原理框图;
图4是根据本申请第二实施例的基于驾驶员监控系统的图像采集方法的流程示意图;
图5是根据本申请第三实施例的基于驾驶员监控系统的图像采集方法的流程示意图;
图6是根据本申请第四实施例的基于驾驶员监控系统的图像采集方法的流程示意图;
图7是根据本申请实施例的红外镜头的截止波长示意图;
图8是根据本申请实施例的基于驾驶员监控系统的图像采集装置的组成结构示意图;以及
图9是根据本申请实施例的电子设备的组成结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
根据本发明实施例,提供了一种基于驾驶员监控系统的图像采集方法,如图1所示,该方法包括如下的步骤S101至步骤S104:
步骤S101,通过传感器采集多帧长曝光图像和多帧短曝光图像。
具体实施时,首先需要通过驾驶员监控系统中的镜头和红外灯采集车内驾驶员的多帧图像信息,并输出给传感器(sensor),之后通过传感器输出多帧长曝光(Longexposure)图像和多帧短曝光(Short exposure)图像。可选地,本申请实施例中的传感器采用的是能够1s输出60帧高感光度的传感器。
步骤S102,将每帧所述长曝光图像和每帧所述短曝光图像组合成一帧图像并输出,以得到第一图像数据。
具体实施时,传感器在1s输出60帧长曝光图像和短曝光图像后,通过驾驶员监控系统中的图像信号处理单元ISP(image signal processing)对每帧长曝光图像和每帧短曝光图像进行两帧合一处理,最终输出1s30帧图像也即上述的第一图像数据,从而增加图像亮度变化的动态范围,对阴阳脸和逆光场景有很大的提升。如图2所示,提供了一种两帧图像合一处理的原理框图。
步骤S103,确定所述第一图像数据中的每帧图像的平均亮度。
具体实施时,在得到上述两帧合一处理后的图像数据后,按照一定规则计算每帧图像的平均亮度。例如,将每帧图像等比例的分成若干区域,根据驾驶员所在的位置,为每个区域分配不同的权重值,之后采用加权求和求平均的方式计算出整个图像的平均亮度值。当然本领域技术人员也可以采用其他计算图像亮度的方法,在此不做具体限定。
步骤S104,根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据。
自动曝光(Automatic Exposure)就是相机代替人的操作,自动调节曝光时间、光圈、ISO进行曝光,使得所摄物体亮度正常。但是目前的自动曝光存在的主要问题是:相机不如人眼这样可以直观的分辨图像明暗,无法判断这幅图像是否亮度合适。而本申请实施例在具体实施时,在得到每帧图像的平均亮度值之后,根据该平均亮度值是否达到预设亮度值就可以判断这幅图像的亮度是否合适,进而确定是否需要调整传感器的曝光时间,从而达到自动曝光的曝光量,以输出亮度合适的图像即上述第二图像数据。
通过上述过程,本申请采用两帧图像合成一帧图像输出的方法,能够根据不同场景的明暗程度,使得长短帧的曝光量可以进行动态调整,这样可以在逆光场景和阴阳脸情况下,能够增大图像亮度变化的动态范围,以提高图像暗区亮度,降低亮区亮度,还可以减小阴阳脸上的一条明暗条纹的两侧亮度差,使亮区不过于曝光、暗区不太暗,解决阴阳脸暗区太暗或者亮区太曝不能识别到人脸的问题,进而提高获取到的图像质量。
可选地,如图3所示,提供了一种基于驾驶员监控系统的图像采集流程的原理框图,首先是通过红外灯(Infrared Lamp)板进行补光,镜头(Lens)将红外光信号投射到传感器板(sensor)的感光区域,然后sensor经过光电转换,将Bayer格式的原始图像输入到图像信号处理单元ISP,ISP经过算法处理,输出YUV(“Y”表示明亮度(Luminance、Luma),“U”和“V”则是色度、浓度(Chrominance、Chroma))数据给后端的视频采集处理单元。具体地,ISP通过I2C(Inter-Integrated Circuit总线)对sensor进行闭环控制,ISP内部的AE算法来计算sensor传输的亮度信息,从而来控制sensor的曝光量,来达到自动曝光功能,同时在ISP中运用降噪、锐化、gamma等算法,从而提高整体的图像质量。
作为本申请实施例的一种优选实施方式,如图4所示,所述确定所述第一图像数据中的每帧图像的平均亮度包括如下的步骤S201至步骤S202:
步骤S201,将所述第一图像数据中的每帧图像划分成若干个子区域。
具体实施时,在确定每帧图像的平均亮度时,首先需要将每帧图像划分成固定比例大小的若干个子区域,并以每个子区域为单位构建从X(1,1)到X(j,i)的矩阵表,如下表1所示。
表1
Figure BDA0002392751710000071
步骤S202,根据每个子区域的预设权重计算每帧图像的平均亮度。
具体实施时,不同子区域对应图像中的不同位置,根据需要检测和识别的目标在图像中的位置为不同子区域设置相应的预设权重,进而根据每个区域的预设权重以及该区域的亮度值计算得到每帧图像的平均亮度值。
作为本申请实施例的一种优选实施方式,如图5所示,所述确定所述第一图像数据中的每帧图像的平均亮度包括如下的步骤S301至步骤S303:
步骤S301,根据所述每帧图像的目标位置将所述每帧图像划分成若干个子区域。
具体实施时,在确定每帧图像的平均亮度值时,需要按照每帧图像的目标位置将每帧图像划分成若干个子区域,如下表2所示,根据实际图像中驾驶员的位置找出这些区域:驾驶员经常停留的区域如表2中的A区域,驾驶员偶尔可能触及到区域如表2中的B区域,驾驶员几乎到达不了的区域如表2中的C区域。
表2
C C C C C C C
C C B B B C C
C C A A A C C
C C A A A C C
C C A A A C C
C B A A A B C
C B B B B B C
步骤S302,根据所述每帧图像的目标与每个所述子区域的相对位置,为每个所述子区域设置不同的权重值。
具体实施时,根据上述划分后得到的多个子区域,以及每个子区域与图像中的目标的相对位置,为每个子区域分别设置不同的权重值,例如,A区域为驾驶员经常停留的区域,可以对该区域设置相对较大的权重,C区域为驾驶员几乎到达不了的区域,则可以设置相对较小的权重。
步骤S303,根据每个所述子区域的权重值计算每帧图像的平均亮度。
具体实施时,根据每个子区域的权重值及平均亮度值采用加权求和求平均的方法计算得到每帧图像的平均亮度值,具体地,假设A区域亮度值为A1到Am(A1到Am是指这块区域统计的平均亮度值),对应权重为α,B区域亮度值为B1到Bn,对应权重为β,C区域亮度值为C1到Ck,对应权重为γ,则该图像的平均亮度值Ave的计算公式如下:
Ave=(A1*α+A2*α+...Am*α+B1*β+B2*β+...Bn*β+C1*γ+C2*γ+...Ck*γ)/(m+n+k)。
作为本申请实施例的一种优选实施方式,如图6所示,所述根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据包括如下的步骤S401至步骤S402:
步骤S401,将所述每帧图像的平均亮度与预设目标亮度冗余范围比较。
具体实施时,在统计出没帧图像的平均亮度值之后,将每帧图像的平均亮度值与预设目标亮度冗余范围进行比较,以判断每帧图像的平均亮度是否落入预设亮度范围。
步骤S402,根据比较结果调整所述传感器的曝光时间,以得到所述第二图像数据。
具体实施时,如果当前计算得到的平均亮度值低于预设目标亮度冗余范围的下限值或者高于预设目标亮度冗余范围的上限值,则需要通过调整传感器的曝光时间,从而达到自动曝光的曝光量,使平均亮度值落入预设的目标亮度冗余范围内,这样能够更准确的去统计一帧图像中有用信息的亮度,从而达到更精准的曝光,来提取更准确的驾驶员的图像信息。
可选地,本申请实施例采用的是940mm红外灯补光,采用透900mm到960mm红外镜头,采用90°均匀聚光罩。其中红外镜头的截至波长如图7所示。此种镜头可以滤除900mm以下和960mm以上的红外光,此设计是为了防止太阳光中较多的860mm的红外光对图像亮度造成影响,尤其是在阴阳脸中,亮区既有红外灯的补光,还有太阳光中较多的860mm的红外补光,采用此镜头可以消除太阳光中较强的860mm红外,从而减弱太阳光中携带部分红外的影响。主要采用90°的聚光罩,从整体上是红外灯集中照射在图像正中间的区域,并且把光打的比较均匀,从某种程度上消除人眼镜表面累积的外界杂光的反射,从而从图像中提取更多与眼睛有关的有用信息,能更准确的识别眼睛的睁闭情况。
从以上的描述中,可以看出,本发明实现了如下技术效果:采用通过传感器采集多帧长曝光图像和多帧短曝光图像;将每帧所述长曝光图像和每帧所述短曝光图像组合成一帧图像并输出,以得到第一图像数据;确定所述第一图像数据中的每帧图像的平均亮度的方式,通过根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据,达到了优化驾驶员监测系统采集的图像质量的目的,从而实现了对驾驶员的危险驾驶行为做出准确预警的技术效果。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
根据本发明实施例,还提供了一种用于实施上述基于驾驶员监控系统的图像采集方法的装置,如图8所示,该装置包括:采集模块1、处理模块2、确定模块3及控制模块4。本申请实施例的采集模块1,用于通过传感器采集多帧长曝光图像和多帧短曝光图像;本申请实施例的处理模块2,用于将每帧所述长曝光图像和每帧所述短曝光图像组合成一帧图像并输出,以得到第一图像数据;本申请实施例的确定模块3,用于确定所述第一图像数据中的每帧图像的平均亮度;本申请实施例的控制模块4,用于根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据。
作为本申请实施例的一种优选实施方式,所述确定模块包括:第一划分单元,用于将所述第一图像数据中的每帧图像划分成若干个子区域;第一计算单元,用于根据每个子区域的预设权重计算每帧图像的平均亮度。
作为本申请实施例的一种优选实施方式,所述确定模块包括:第二划分单元,用于根据所述每帧图像的目标位置将所述每帧图像划分成若干个子区域;设置单元,用于根据所述每帧图像的目标与每个所述子区域的相对位置,为每个所述子区域设置不同的权重值;第二计算单元,用于根据每个所述子区域的权重值计算每帧图像的平均亮度。
作为本申请实施例的一种优选实施方式,所述控制模块包括:比较单元,用于将所述每帧图像的平均亮度与预设目标亮度冗余范围比较;根据比较结果调整所述传感器的曝光时间,以得到所述第二图像数据。
上述各模块及各单元之间的具体连接关系及所发挥的功能请参照方法部分的具体描述,在此不做赘述。
根据本发明实施例,还提供了一种计算机设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如前所述的方法。
根据本发明实施例,还提供了一种计算机可读存储介质,其上存储有计算机指令,所述指令被处理器执行时实现如前所述方法的步骤。
如图9所示,该电子设备包括一个或多个处理器31以及存储器32,图9中以一个处理器31为例。
控制单元还可以包括:输入装置33和输出装置34。
处理器31、存储器32、输入装置33和输出装置34可以通过总线或者其他方式连接,图9中以通过总线连接为例。
处理器31可以为中央处理器(Central Processing Unit,CPU)。处理器31还可以为其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片,或者上述各类芯片的组合。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器32作为一种非暂态计算机可读存储介质,可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块。处理器31通过运行存储在存储器32中的非暂态软件程序、指令以及模块,从而执行服务器的各种功能应用以及数据处理,即实现上述方法实施例的基于驾驶员监控系统的图像采集方法。
存储器32可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据服务器操作的处理装置的使用所创建的数据等。此外,存储器32可以包括高速随机存取存储器,还可以包括非暂态存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中,存储器32可选包括相对于处理器31远程设置的存储器,这些远程存储器可以通过网络连接至网络连接装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置33可接收输入的数字或字符信息,以及产生与服务器的处理装置的用户设置以及功能控制有关的键信号输入。输出装置34可包括显示屏等显示设备。
一个或者多个模块存储在存储器32中,当被一个或者多个处理器31执行时,执行如前所述的基于驾驶员监控系统的图像采集方法。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。计算机指令用于使所述计算机执行上述基于驾驶员监控系统的图像采集方法。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
最后,本发明中应用了具体实施例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种基于驾驶员监控系统的图像采集方法,其特征在于,包括:
通过传感器采集多帧长曝光图像和多帧短曝光图像;
将每帧所述长曝光图像和每帧所述短曝光图像组合成一帧图像并输出,以得到第一图像数据;
确定所述第一图像数据中的每帧图像的平均亮度;
根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据。
2.根据权利要求1所述的基于驾驶员监控系统的图像采集方法,其特征在于,所述确定所述第一图像数据中的每帧图像的平均亮度包括:
将所述第一图像数据中的每帧图像划分成若干个子区域;
根据每个子区域的预设权重计算每帧图像的平均亮度。
3.根据权利要求1所述的基于驾驶员监控系统的图像采集方法,其特征在于,所述确定所述第一图像数据中的每帧图像的平均亮度包括:
根据所述每帧图像的目标位置将所述每帧图像划分成若干个子区域;
根据所述每帧图像的目标与每个所述子区域的相对位置,为每个所述子区域设置不同的权重值;
根据每个所述子区域的权重值计算每帧图像的平均亮度。
4.根据权利要求1所述的基于驾驶员监控系统的图像采集方法,其特征在于,所述根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据包括:
将所述每帧图像的平均亮度与预设目标亮度冗余范围比较;
根据比较结果调整所述传感器的曝光时间,以得到所述第二图像数据。
5.一种基于驾驶员监控系统的图像采集装置,其特征在于,包括:
采集模块,用于通过传感器采集多帧长曝光图像和多帧短曝光图像;
处理模块,用于将每帧所述长曝光图像和每帧所述短曝光图像组合成一帧图像并输出,以得到第一图像数据;
确定模块,用于确定所述第一图像数据中的每帧图像的平均亮度;
控制模块,用于根据所述每帧图像的平均亮度控制所述传感器的曝光时间,以根据控制结果输出第二图像数据。
6.根据权利要求5所述的基于驾驶员监控系统的图像采集装置,其特征在于,所述确定模块包括:
第一划分单元,用于将所述第一图像数据中的每帧图像划分成若干个子区域;
第一计算单元,用于根据每个子区域的预设权重计算每帧图像的平均亮度。
7.根据权利要求5所述的基于驾驶员监控系统的图像采集装置,其特征在于,所述确定模块包括:
第二划分单元,用于根据所述每帧图像的目标位置将所述每帧图像划分成若干个子区域;
设置单元,用于根据所述每帧图像的目标与每个所述子区域的相对位置,为每个所述子区域设置不同的权重值;
第二计算单元,用于根据每个所述子区域的权重值计算每帧图像的平均亮度。
8.根据权利要求5所述的基于驾驶员监控系统的图像采集装置,其特征在于,所述控制模块包括:
比较单元,用于将所述每帧图像的平均亮度与预设目标亮度冗余范围比较;
根据比较结果调整所述传感器的曝光时间,以得到所述第二图像数据。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1至4中任一项所述的方法。
10.一种非暂态可读存储介质,其特征在于,其上存储有计算机指令,所述指令被处理器执行时实现如权利要求1至4中任一项所述方法的步骤。
CN202010121988.2A 2020-02-26 2020-02-26 基于驾驶员监控系统的图像采集方法及装置 Pending CN111314623A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010121988.2A CN111314623A (zh) 2020-02-26 2020-02-26 基于驾驶员监控系统的图像采集方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010121988.2A CN111314623A (zh) 2020-02-26 2020-02-26 基于驾驶员监控系统的图像采集方法及装置

Publications (1)

Publication Number Publication Date
CN111314623A true CN111314623A (zh) 2020-06-19

Family

ID=71147744

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010121988.2A Pending CN111314623A (zh) 2020-02-26 2020-02-26 基于驾驶员监控系统的图像采集方法及装置

Country Status (1)

Country Link
CN (1) CN111314623A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113505674A (zh) * 2021-06-30 2021-10-15 上海商汤临港智能科技有限公司 人脸图像处理方法及装置、电子设备和存储介质
CN114745586A (zh) * 2022-04-14 2022-07-12 福州京东方光电科技有限公司 一种图像的传输方法、装置及可读存储介质
CN115379130A (zh) * 2022-08-25 2022-11-22 上海联影医疗科技股份有限公司 一种自动曝光控制系统、方法、装置和存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101729789A (zh) * 2008-10-21 2010-06-09 索尼株式会社 成像装置、成像方法以及程序
CN102209200A (zh) * 2010-03-31 2011-10-05 比亚迪股份有限公司 一种自动曝光控制方法
CN104917976A (zh) * 2015-06-05 2015-09-16 北京大恒图像视觉有限公司 一种相机自动曝光和自动增益调节方法
CN106791475A (zh) * 2017-01-23 2017-05-31 上海兴芯微电子科技有限公司 曝光调整方法及所适用的车载摄像装置
CN109561260A (zh) * 2018-12-28 2019-04-02 深慧视(深圳)科技有限公司 一种自动曝光控制方法
CN110248108A (zh) * 2019-06-14 2019-09-17 浙江大华技术股份有限公司 宽动态下的曝光调整及动态范围确定方法和相关装置
CN110312080A (zh) * 2018-03-20 2019-10-08 株式会社东芝 拍摄控制装置、拍摄装置及拍摄控制方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101729789A (zh) * 2008-10-21 2010-06-09 索尼株式会社 成像装置、成像方法以及程序
CN102209200A (zh) * 2010-03-31 2011-10-05 比亚迪股份有限公司 一种自动曝光控制方法
CN104917976A (zh) * 2015-06-05 2015-09-16 北京大恒图像视觉有限公司 一种相机自动曝光和自动增益调节方法
CN106791475A (zh) * 2017-01-23 2017-05-31 上海兴芯微电子科技有限公司 曝光调整方法及所适用的车载摄像装置
CN110312080A (zh) * 2018-03-20 2019-10-08 株式会社东芝 拍摄控制装置、拍摄装置及拍摄控制方法
CN109561260A (zh) * 2018-12-28 2019-04-02 深慧视(深圳)科技有限公司 一种自动曝光控制方法
CN110248108A (zh) * 2019-06-14 2019-09-17 浙江大华技术股份有限公司 宽动态下的曝光调整及动态范围确定方法和相关装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113505674A (zh) * 2021-06-30 2021-10-15 上海商汤临港智能科技有限公司 人脸图像处理方法及装置、电子设备和存储介质
CN114745586A (zh) * 2022-04-14 2022-07-12 福州京东方光电科技有限公司 一种图像的传输方法、装置及可读存储介质
CN115379130A (zh) * 2022-08-25 2022-11-22 上海联影医疗科技股份有限公司 一种自动曝光控制系统、方法、装置和存储介质
CN115379130B (zh) * 2022-08-25 2024-03-29 上海联影医疗科技股份有限公司 一种自动曝光控制系统、方法、装置和存储介质

Similar Documents

Publication Publication Date Title
CN111028189B (zh) 图像处理方法、装置、存储介质及电子设备
EP3836534B1 (en) Imaging control method, electronic device, and computer-readable storage medium
CN108322646B (zh) 图像处理方法、装置、存储介质及电子设备
US9363446B2 (en) Automatic exposure control for sequential images
CN109936698B (zh) 一种自动曝光控制方法、装置、电子设备及存储介质
US8094211B2 (en) Method and apparatus for obtaining image using entropy
CN111314623A (zh) 基于驾驶员监控系统的图像采集方法及装置
US20160005362A1 (en) Determination Of Optical Condition And Adjustment Of Display
CN107846556B (zh) 成像方法、装置、移动终端和存储介质
US10453188B2 (en) Methods and devices for improving image quality based on synthesized pixel values
US11689785B2 (en) Dual-spectrum image automatic exposure method and apparatus, and dual-spectrum image camera and machine storage medium
CN108024057B (zh) 背景虚化处理方法、装置及设备
EP3820141A1 (en) Imaging control method and apparatus, electronic device, and readable storage medium
CN109040607B (zh) 成像控制方法、装置、电子设备和计算机可读存储介质
CN106357987A (zh) 一种曝光方法和装置
CN112653845B (zh) 曝光控制方法、装置、电子设备及可读存储介质
CN110740266B (zh) 图像选帧方法、装置、存储介质及电子设备
US20200007732A1 (en) Image processing method and electronic device
KR20180086646A (ko) 카메라의 적응적 노출 제어 장치
CN111526299B (zh) 一种高动态范围图像合成方法和电子设备
KR20240128930A (ko) 화상 노이즈 제거 방법, 장치 및 저장 매체
US10235745B2 (en) Image processing method, computer storage medium, apparatus and terminal
US9191573B2 (en) Image capturing apparatus for determining an exposure condition by calculating aphotmetric value for each object region and method of controlling the same
CN109788206B (zh) 测光方法、装置、拍摄设备和存储介质
CN111630839B (zh) 一种图像处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200619

RJ01 Rejection of invention patent application after publication