CN113170057B - 摄像部控制装置 - Google Patents

摄像部控制装置 Download PDF

Info

Publication number
CN113170057B
CN113170057B CN201980079112.1A CN201980079112A CN113170057B CN 113170057 B CN113170057 B CN 113170057B CN 201980079112 A CN201980079112 A CN 201980079112A CN 113170057 B CN113170057 B CN 113170057B
Authority
CN
China
Prior art keywords
moving body
image
unit
imaging unit
moving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980079112.1A
Other languages
English (en)
Other versions
CN113170057A (zh
Inventor
汤浅一贵
门司竜彦
野中进一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Astemo Ltd
Original Assignee
Hitachi Astemo Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Astemo Ltd filed Critical Hitachi Astemo Ltd
Publication of CN113170057A publication Critical patent/CN113170057A/zh
Application granted granted Critical
Publication of CN113170057B publication Critical patent/CN113170057B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/08Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
    • G03B7/091Digital circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明提供一种与以往相比能够适当地调节摄像部的曝光的摄像部控制装置。摄像部控制装置(100)控制搭载在移动体(10)上的摄像部(11)。摄像部控制装置(100)具备:移动方向运算部(110),其计算移动体(10)的移动方向;图像区域设定部(120),其按照移动体(10)的移动方向,在由摄像部(11)拍摄到的图像中设定成为曝光校正的基准的图像区域;以及曝光校正部(130),其根据图像区域的图像信息进行摄像部(11)的曝光校正。

Description

摄像部控制装置
技术领域
本公开涉及一种摄像部控制装置。
背景技术
以往,已知有使用摄像元件的摄影装置的发明(参照下述专利文献1)。专利文献1中记载的移动体摄像装置具备多个摄像部、系统控制部、显示/记录部,搭载于移动体上。上述摄像部至少具有摄像元件、根据该摄像元件的输出信号生成影像信号的信号处理部、控制这些摄像元件和信号处理部的摄像控制部。
上述系统控制部控制上述多个摄像部。上述显示/记录部显示或记录从上述多个摄像部输出的影像信号。该以往的移动体摄像装置的特征在于,上述系统控制部根据上述移动体的位置信息和包含上述移动体移动的范围的地图信息,使上述多个摄像部相互具有时差来进行控制(参照该文献、技术方案1等)。
根据该以往的发明,对于移动体的现状的周围状况,能够对应于被预测为接下来产生的周围状况的变化按时间序列对多个摄像部造成的影响,适当地控制各个摄像部,所以提高了移动体的操作者对影像的视认性(参照该文献、第0020段落等)。
现有技术文献
专利文献
专利文献1:日本专利特开2007-081695号公报
发明内容
发明要解决的问题
在所述以往的摄像装置中,在由摄像部拍摄的移动体的前方的图像的一部分中存在极端暗的区域或极端亮的区域,存在根据该区域进行摄像部的曝光校正的担忧。在该情况下,当移动体进行方向转换而向与用于曝光校正的图像区域不同的方向移动时,在由摄像部拍摄的到图像中可能会产生曝光过度引起的飞白(白とび)或曝光不足引起的飞黑(黒つぶれ)等不良情况。
本公开提供了一种摄像部控制装置,其与现有技术相比能够适当地调节摄像部的曝光。
解决问题的技术手段
本公开的一个方式是一种控制搭载在移动体上的摄像部的摄像部控制装置,该摄像部控制装置包括:移动方向运算部,其计算所述移动体的移动方向;图像区域设定部,其按照所述移动方向在由所述摄像部拍摄到的图像中设定成为曝光校正的基准的图像区域;以及曝光校正部,其基于所述图像区域的图像信息来进行所述摄像部的曝光校正。
发明的效果
根据本发明的上述一个方式,能够提供一种摄像部控制装置,通过按照移动体的移动方向来设定成为曝光校正的基准的图像区域,与以往相比能够适当地调节摄像部的曝光。
附图说明
图1是本公开的实施方式的摄像部控制装置的框图。
图2是表示图1的摄像部控制装置进行的摄像部的控制方法的一例的流程图。
图3是表示由图1的图像区域设定部设定的图像区域的一例的图。
图4A是说明图1的曝光校正部的曝光校正的曲线图。
图4B是说明图1的曝光校正部的曝光校正的曲线图。
图4C是说明图1的曝光校正部的曝光校正的曲线图。
图5是表示由图1的图像区域设定部设定的图像区域的变形例的图。
图6是表示图1的摄像部控制装置进行的摄像部的控制方法的变形例的流程图。
图7是表示由图1的图像区域设定部设定的图像区域的变形例的图。
图8A是表示在比较方式的摄像装置中成为曝光校正的基准的图像区域的一例的图。
图8B是表示在比较方式的摄像装置中发生的飞白的一例的图。
具体实施方式
在下文中,将参照附图描述本公开的摄像部控制装置的实施方式。
图1是本公开的实施方式的摄像部控制装置100的框图。详细情况将在后面叙述,本实施方式的摄像部控制装置100以下面的构成为主要特征。
摄像部控制装置100是控制搭载在移动体10上的摄像部11的装置。摄像部控制装置100具备:移动方向运算部110,其计算移动体10的移动方向;图像区域设定部120,其按照移动体10的移动方向,在由摄像部11拍摄的图像中设定成为曝光校正的基准的图像区域;以及曝光校正部130,其根据该图像区域的图像信息进行摄像部11的曝光校正。
以下,分别详细说明搭载摄像部控制装置100的移动体10的各部的构成和摄像部控制装置100的各部的构成。
移动体10例如是汽车等车辆,具有摄像部11、横摆率传感器12、舵角传感器13、车轮速度传感器14和方向指示器15。另外,虽然省略了图示,但移动体10例如具备动力产生装置、传动装置、电子控制装置(ECU)、行驶装置、仪表类、前照灯、喇叭等。动力产生装置例如包括发动机和电动机中的至少一方。行驶装置例如包括车架、悬架、转向系统、制动系统、车轮、轮胎等。
摄像部11例如是具备右摄像机及左摄像机的立体摄像机装置或具备单眼摄像机的单眼摄像机装置。摄像部11例如具备镜筒、透镜、光圈、快门、CMOS(Complementary MetalOxide Semiconductor,互补金属氧化物半导体)或CCD(Charge Coupled Device ImageSensor,电荷耦合器件图像传感器)等摄像元件、处理图像数据的图像处理装置等。另外,在摄像部11是右摄像机及左摄像机或单眼摄像机的情况下,摄像部控制装置100也可以是具备摄像部11的立体摄像机装置或单眼摄像机装置。
立体摄像机装置例如具备光轴平行且之间具有距离(基线长度)的右摄像机和左摄像机,通过这些右摄像机和左摄像机同时拍摄对象物。在由右摄像机拍摄到的图像中的对象物的坐标与由左摄像机拍摄到的图像中的相同对象物的坐标之间产生被称为视差的差。立体摄像机装置可以对右摄像机和左摄像机的图像应用模板匹配来求出视差,根据求出的视差使用三角测量法来求出三维空间中的对象物的位置。摄像部11将所拍摄的图像和视差信息输出到摄像部控制装置100。
横摆率传感器12例如是汽车用陀螺传感器,测量移动体10的横摆率并输出到摄像部控制装置100。操舵角传感器13例如安装在汽车即移动体10的转向轴上,测量移动体10的前轮的操舵角并向摄像部控制装置100输出。
车轮速度传感器14例如安装在汽车即移动体10的轮毂或转向节上,向摄像部控制装置100输出与移动体10的各车轮的旋转速度对应的信号。方向指示器15例如由驾驶移动体10的乘员按照移动体10的预定移动方向进行操作,将右或左的预定移动方向输出到摄像部控制装置100。
摄像部控制装置100的各部例如通过包含中央运算装置(CPU)、集成电路(LSI)、存储装置、程序等的微型计算机来构成。如上所述,在摄像部11是立体摄像机装置或单眼摄像机装置的情况下,摄像部控制装置100也可以是搭载于移动体10的ECU的一部分。
移动方向运算部110计算移动体10的移动方向。在此,移动方向例如是直行方向、右方向以及左方向这三个方向。移动方向运算部110例如根据从位置信息获取部140输入的移动体10的位置信息和从移动路径运算部150输入的移动体10的移动路径,进行预测移动体10的移动方向的运算。另外,移动方向运算部110根据由动作信息获取部160获取到的移动体10的动作信息,运算移动体10的实际的移动方向。
图像区域设定部120按照由移动方向运算部110计算出的移动体10的移动方向,在由摄像部11拍摄到的图像IM的一部分中设定成为曝光校正的基准的图像区域IR(参照图3)。更具体地说,图像区域设定部120例如按照直行方向S、右方向R和左方向L中的某一个移动方向,在包含图像IM的消失点的中央区域CR、中央区域CR的右侧的右区域RR、中央区域CR的左侧的左区域LR中的某一个上设定图像区域IR。另外,如下所述,图像区域设定部120可以基于由外界信息识别部170识别的外界信息来设定图像区域IR。
曝光校正部130根据由图像区域设定部120设定的图像区域IR的图像信息,进行摄像部11的曝光校正。更具体地说,曝光校正部130例如求出各像素的红、绿、蓝(RGB)的颜色信息和亮度,作为图像区域IR的图像信息。此外,曝光校正部130例如通过控制摄像部11的光圈、增益和快门速度来进行摄像部11的曝光校正。另外,曝光校正部130例如也可以通过对由摄像部11拍摄到的图像进行电子校正来进行摄像部11的曝光校正。
位置信息获取部140对移动体10的位置信息进行获取。更具体地说,位置信息获取部140例如使用全球定位系统(GPS)或全球导航卫星系统(GNSS)对移动体10的位置信息进行获取。另外,位置信息获取部140例如也可以基于由动作信息获取部160获取到的移动体10的横摆率、操舵角、各车轮的旋转速度等,计算移动体10的移动方向和移动量,由此对移动体10的位置信息进行获取。
移动路径运算部150根据由位置信息获取部140获取到的移动体10的位置信息计算移动体10的移动路径。更具体地说,移动路径运算部150例如设置成能够访问道路地图信息,基于道路地图信息、移动体10的位置信息、由移动体10的乘员输入的目的地的位置信息,计算从移动体10的当前位置到目的地的移动路径。
动作信息获取部160例如从搭载在移动体10上的横摆率传感器12获取移动体10的横摆率作为移动体10的动作信息,并将获取到的横摆率向移动方向运算部110输出。另外,动作信息获取部160例如从舵角传感器13获取移动体10的操舵角作为移动体10的动作信息,并将获取到的操舵角向移动方向运算部110输出。
另外,动作信息获取部160例如从车轮速度传感器14获取各车轮的旋转速度作为移动体10的动作信息,并将获取到的各车轮的旋转速度向移动方向运算部110输出。另外,动作信息获取部160例如从方向指示器15获取移动体10的预定移动方向作为移动体10的动作信息,并将获取到的移动体10的预定移动方向输出到移动方向运算部110。
外界信息识别部170从由摄像部11拍摄到的图像中识别包括移动体10周围的障碍物信息和道路信息的外界信息。更具体地,外界信息识别部170使用由摄像部11拍摄到的图像数据来执行物体检测处理,并识别包括障碍物信息和道路信息的外界信息。障碍物信息例如包括车辆、行人、建筑物、护栏、中央隔离带、路缘石和电线杆等的位置、大小、形状等。道路信息例如包括道路形状、白线、道路标示以及道路标识等。
在下文中,将描述与本公开的摄像部控制装置不同的比较方式的摄像装置的问题,并且将一边与比较方式的摄像装置进行比较,一边说明本实施方式的摄像部控制装置100的作用。比较方式的摄像装置与本实施方式的摄像部控制装置100的不同点在于,例如不具有按照移动体10的移动方向来设定图像区域IR的图像区域设定部120。以下,对于在比较方式的摄像装置和本实施方式的摄像部控制装置100之间共同的构成,标注相同的符号并省略说明。
图8A是表示比较方式的摄像装置中的成为摄像部11的曝光校正的基准的图像区域IR的一例的图。图8B是表示在比较方式的摄像装置中,在摄像部11的图像IM中发生的飞白WO的一例的图。比较方式的摄像装置不具有按照移动体10的移动方向来设定图像区域IR的图像区域设定部120。因此,在比较方式的摄像装置中,成为摄像部11的曝光校正的基准的图像区域IR与移动体10的直行方向S、右方向R以及左方向L等移动方向无关,例如固定在包含图像IM的消失点的中央部。
在此,如图8A所示,在移动体10的直行方向S上,有时在摄像部11的图像IM中存在例如太阳光难以到达的建筑物B的深处部分等极暗的区域DR。此外,极暗区域DR有时被包括在成为摄像部11的曝光校正的基准的图像区域IR中。于是,在比较方式的摄像装置中,由于以包含极暗的区域DR的图像区域IR为基准进行摄像部11的曝光校正,因此摄像部11的曝光增加。
由此,如图8B所示,更容易识别建筑物B的深处部分。但是,在比较方式的摄像装置的图像IM中,例如,在成为摄像部11的曝光校正的基准的图8A所示的图像区域IR的左右的区域中,如图8B所示,有可能发生由曝光过度引起的飞白WO等不良情况。
与图8A所示的例子相反,在移动体10的直行方向S上,有时在图像IM的中央部的图像区域IR中包含极端明亮的区域。于是,在比较方式的摄像装置中,由于以包含极端明亮的区域的图像区域IR为基准进行摄像部11的曝光校正,因此摄像部11的曝光减少。
由此,与图8B所示的例子同样,容易识别图像IM的中央部的极端明亮的区域。但是,在比较方式的摄像装置的图像IM中,例如,在成为摄像部11的曝光校正的基准的图8A所示的图像区域IR的左右的区域中,与图8B所示的例子相反,有可能发生曝光不足引起的飞黑等不良情况。
例如,在先进驾驶辅助系统(ADAS)或自动驾驶中,使用从摄像部11的图像IM识别障碍物或道路的信息的技术。但是,如果在摄像部11的图像IM中发生飞白或飞黑等不良情况,则在移动体10的前方的交叉路口,在移动体10向右方向R或左方向L移动的右转时或左转时,有可能对交叉路口内的车辆或行人等障碍物的识别带来障碍。因此,要求抑制在摄像部11的图像IM中发生的上述不良情况。
图2是表示本实施方式的摄像部控制装置100的摄像部11的控制方法的一例的流程图。图3是表示由本实施方式的摄像部控制装置100的图像区域设定部120对摄像部11的图像IM设定的图像区域IR的一例的图。
首先,在步骤S11中,摄像部控制装置100计算移动体10的移动路径。更具体地说,摄像部控制装置100通过位置信息获取部140获取移动体10的位置信息,通过移动路径运算部150根据该位置信息计算移动体10的移动路径。
接着,在步骤S12中,摄像部控制装置100运算移动体10的移动方向。更具体地说,摄像部控制装置100根据在步骤S11中得到的移动体10的位置信息和移动路径,计算移动体10的移动方向。由此,摄像部控制装置100例如如图3所示,预测移动体10的前方的交叉路口处的移动体10的移动方向为直行方向S、右方向R以及左方向L中的左方向L。
接着,在步骤S13中,摄像部控制装置100对移动体10的动作信息进行获取。更具体地说,摄像部控制装置100通过动作信息获取部160,从搭载在移动体10上的横摆率传感器12获取移动体10的横摆率作为动作信息。另外,摄像部控制装置100通过动作信息获取部160,从搭载在移动体10上的舵角传感器13获取移动体10的操舵角作为动作信息。另外,摄像部控制装置100通过动作信息获取部160,从搭载在移动体10上的车轮速度传感器14获取移动体10的多个车轮的旋转速度作为动作信息。进一步地,摄像部控制装置100通过动作信息获取部160,从搭载在移动体10上的方向指示器15获取移动体10的预定移动方向作为动作信息。
接着,在步骤S14中,摄像部控制装置100判定在步骤S12中计算出的移动体10的移动方向即左方向L与在步骤S13中获取到的移动体10的动作信息是否一致。更具体地说,摄像部控制装置100例如通过移动方向运算部110,根据移动体10的横摆率、操舵角、左右车轮的旋转速度之差、预定移动方向中的至少一个动作信息,计算出摄像部11的图像IM中的交叉路口处的移动体10的实际移动方向。然后,移动方向运算部110判定在步骤S12中预测的移动体10的移动方向即左方向L与根据移动体10的动作信息计算出的移动体10的实际的移动方向是否一致。
在步骤S14中,在移动体10的移动方向与动作信息一致的情况下(是),进入步骤S15,移动方向运算部110向图像区域设定部120输出在步骤S12中计算出的移动体10的移动方向即左方向L。
接着,在步骤S16中,摄像部控制装置100按照移动体10的移动方向,在由摄像部11拍摄到的图像IM中设定成为曝光校正基准的图像区域IR。更具体地说,摄像部控制装置100例如通过图像区域设定部120,在图像IM的中央区域CR、右区域RR以及左区域LR中与移动体10的移动方向即左方向L对应的左区域LR中设定图像区域IR。
接着,在步骤S17中,摄像部控制装置100基于按照移动体10的移动方向设定的图像区域IR的图像信息,进行摄像部11的曝光校正。更具体地说,摄像部控制装置100根据按照移动体10的移动方向即左方向L设定在图像IM的左区域LR中的图像区域IR的图像信息,通过曝光校正部130进行摄像部11的曝光校正。另外,在摄像部11包含两个摄像机的情况下,对这两个摄像机同时进行曝光校正。
图4A至图4C是说明由摄像部控制装置100的曝光校正部130进行的曝光校正的曲线图。曝光校正部130根据图像区域IR的图像信息进行摄像部11的曝光校正。更具体而言,曝光校正部130例如使用亮度信息作为图像区域IR的图像信息,根据基于亮度信息生成的直方图来决定摄像部11的曝光校正值。
例如,在图像区域IR中,如图4A所示,在亮度高的像素数极多的情况下,预想为曝光过度。在这种情况下,曝光校正部130确定负的曝光校正值,以减小曝光。另外,在图像区域IR中,如图4B所示,从低亮度到高亮度,像素数比较均等地没有偏差地分布的情况下,具有适度的对比度,可以预想曝光是适当的。在这种情况下,曝光校正部130将曝光校正值设置为零以保持曝光。另外,如图4C所示,在亮度低的像素数极多的情况下,预想为曝光不足。在这种情况下,曝光校正部130确定正的曝光校正值以增加曝光。
另一方面,在步骤S14中,在移动体10的移动方向与动作信息不一致的情况下(否),进入步骤S18,移动方向运算部110向图像区域设定部120输出基于在步骤S13中获取到的移动体10的动作信息的行进方向即直行方向S或右方向R。这例如是驾驶移动体10的乘员选择了与由移动路径运算部150计算出的移动体10的移动路径不同的路径的情况。
在这种情况下,在步骤S16中,摄像部控制装置100例如通过图像区域设定部120,在图像IM的中央区域CR、右区域RR以及左区域LR中与移动体10的移动方向即直行方向S或右方向R对应的中央区域CR或右区域RR设定图像区域IR。这样,通过在步骤S14中比较移动体10的移动方向和动作信息,能够应对驾驶移动体10的乘员变更了移动路径的情况等。
接着,在步骤S17中,摄像部控制装置100根据按照移动体10的移动方向设定在图像IM的中央区域CR或右区域RR中的图像区域IR的图像信息,如上所述,通过曝光校正部130进行摄像部11的曝光校正。
如上所述,本实施方式的摄像部控制装置100是控制搭载在移动体10上的摄像部11的装置。摄像部控制装置100具有:移动方向运算部110,其计算移动体10的移动方向;图像区域设定部120,其按照移动体10的移动方向,在由摄像部11拍摄到的图像中设定成为曝光校正基准的图像区域IR;以及曝光校正部130,其根据图像区域IR的图像信息进行摄像部11的曝光校正。
通过该构成,例如,如图3所示,能够以按照移动体10的行进方向即左方向L而在图像IM的左区域LR中设定的图像区域IR为基准,进行曝光校正。因此,例如如图8A所示,在与移动体10的移动方向即左方向L不同的直行方向S上,即使在摄像部11的图像IM的中央部存在极端暗的区域DR或极端亮的区域,也能够以设定在不包含该区域的左区域LR中的图像区域IR为基准,进行曝光校正。
由此,与上述比较方式的摄像装置相比,能够适当地进行摄像部11的曝光校正,能够抑制在摄像部11的图像IM中发生飞白或飞黑等不良情况。因此,根据本实施方式,通过按照移动体10的移动方向设定成为曝光校正的基准的图像区域IR,能够提供与以往相比能够适当调节摄像部11的曝光的摄像部控制装置100。
另外,本实施方式的摄像部控制装置100还具备:位置信息获取部140,其对移动体10的位置信息进行获取;移动路径运算部150,其根据移动体10的位置信息计算移动体10的移动路径;以及动作信息获取部160,其对移动体10的动作信息进行获取。通过该构成,摄像部控制装置100能够利用移动体10的位置信息、移动路径以及动作信息来控制摄像部11。
并且,在本实施方式的摄像部控制装置100中,移动方向运算部110根据移动体10的位置信息和移动路径来计算移动方向。根据该构成,摄像部控制装置100例如能够预测移动体10前方的交叉路口处的移动体10的移动方向。
另外,在本实施方式的摄像部控制装置100中,动作信息获取部160构成为从搭载在移动体10上的横摆率传感器12获取移动体10的横摆率作为动作信息。另外,移动方向运算部110构成为基于移动体10的横摆率来计算移动体10的移动方向。通过该构成,摄像部控制装置100能够按照基于移动体10的横摆率的移动体10的实际的移动方向,设定成为曝光校正的基准的图像区域IR。
另外,在本实施方式的摄像部控制装置100中,动作信息获取部160构成为从搭载在移动体10上的舵角传感器13获取移动体10的操舵角作为动作信息。另外,移动方向运算部110构成为根据移动体10的操舵角计算移动体10的移动方向。通过该构成,摄像部控制装置100能够按照基于移动体10的操舵角的移动体10的实际的移动方向,设定成为曝光校正的基准的图像区域IR。
另外,在本实施方式的摄像部控制装置100中,动作信息获取部160构成为从搭载在移动体10上的车轮速度传感器14获取移动体10的多个车轮的旋转速度作为动作信息。另外,移动方向运算部110构成为根据移动体10的多个车轮的旋转速度之差来计算移动体10的移动方向。通过该构成,摄像部控制装置100能够按照基于移动体10的车轮的旋转速度之差的移动体10的实际的移动方向,设定成为曝光校正的基准的图像区域IR。
另外,在本实施方式的摄像部控制装置100中,动作信息获取部160构成为从搭载在移动体10上的方向指示器15获取移动体10的预定移动方向作为动作信息。另外,移动方向运算部110构成为根据移动体10的预定移动方向计算移动体10的移动方向。通过该构成,摄像部控制装置100能够按照基于移动体10的方向指示器15的操作的移动体10的预测移动方向,设定成为曝光校正的基准的图像区域IR。
如上所述,根据本实施方式,通过按照移动体10的移动方向设定成为曝光校正的基准的图像区域IR,能够提供与以往相比能够适当调节摄像部11的曝光的摄像部控制装置100。
本公开的摄像部控制装置不限于根据上述实施方式的摄像部控制装置100的构成。以下,参照图5至图7,对上述实施方式的摄像部控制装置100的几个变形例进行说明。
图5是表示由上述实施方式的摄像部控制装置100的图像区域设定部120设定的图像区域IR的变形例的图。
摄像部控制装置100具备外界信息识别部170,该外界信息识别部170从如上所述由摄像部11拍摄的图像中识别包含移动体10周围的障碍物信息和道路信息的外界信息。另外,在本变形例中,图像区域设定部120构成为根据外界信息设定图像区域IR。通过该构成,即使在摄像部11的摄像机的安装位置产生偏差、或移动体10的车轮的直径发生了变化的情况下,也能够在图像IM中设定适当的图像区域IR。
更具体地,外界信息识别部170基于摄像部11的图像IM的坐标,获得从图像IM识别出的车辆V或行人等的移动体的重心G的位置,并记录重心G的轨迹。外界信息识别部170在记录了规定数量以上的轨迹之后,将在图像IM的横向上移动的重心G描绘在图像IM上。由此,外界信息识别部170可以识别图像IM中车辆或行人等的移动物体通过的区域。
此外,图像区域设定部120将图像区域IR设定在由外界信息识别部170识别出的车辆或行人等移动物体通过的区域中。更具体地说,图像区域设定部120在车辆或行人等移动体通过的区域中,按照移动体10的移动方向设定图像区域IR。更详细地说,图像区域设定部120在移动体10直行时,在图像IM的中央区域CR设定图像区域IR,在移动体10右转时,在图像IM的右区域RR设定图像区域IR,在移动体10左转时,在图像IM的左区域LR设定图像区域IR。
另外,例如在判定为移动体10在笔直的道路上直行、并且显示在道路上的白线的曲率为阈值以下的情况下,图像区域设定部120也可以在以道路的左右两侧的白线的消失点为中心的任意的中央区域CR中设定图像区域IR。另外,例如,可以通过外界信息识别部170来识别白线的消失点。另外,移动体10是否在笔直的道路上直行的判定例如可以使用由动作信息获取部160获取到的动作信息来进行。例如,如果移动体10的操舵角和横摆率的值都在阈值以下,则能够判定为移动体10正在直行。
图6是表示上述实施方式的摄像部控制装置100进行的摄像部11的控制方法的变形例的流程图。图7是表示由该变形例的摄像部控制装置100的图像区域设定部120设定的图像区域IR的图。
在本变形例中,摄像部控制装置100也可以不具有位置信息获取部140、移动路径运算部150以及外界信息识别部170。
首先,在步骤S21中,本变形例的摄像部控制装置100与图2所示的上述步骤S13同样,通过动作信息获取部160对移动体10的动作信息进行获取。接着,在步骤S22中,本变形例的摄像部控制装置100通过移动方向运算部110,根据移动体10的动作信息,计算移动体10的移动方向。
例如,在移动体10在笔直的道路上直行的情况下,由动作信息获取部160获取到的操舵角、横摆率为阈值以下。在该情况下,移动方向运算部110将移动体10的移动方向计算为直行方向S。另外,在移动体10正左转弯行驶的情况下、在交叉路口左转的情况下,操舵角、横摆率为阈值以上。在该情况下,移动方向运算部110将移动体10的移动方向计算为图7所示的左方向L。
接着,在步骤S23中,本变形例的摄像部控制装置100通过图像区域设定部120,按照移动体10的移动方向,在图像IM中设定图像区域IR。例如,在移动体10的移动方向为直行方向S的情况下,图像区域设定部120在图7所示的中央区域CR设定图像区域IR。另外,在移动体10的移动方向为左方向L的情况下,图像区域设定部120在图7所示的左区域LR中设定图像区域IR。图像区域设定部120进行的图像区域IR的设定例如也可以按照移动体10的动作信息的时间性变化动态地进行。
接着,在步骤S24中,本变形例的摄像部控制装置100与图2所示的步骤S17同样,根据按照移动体10的移动方向设定的图像区域IR的图像信息,进行摄像部11的曝光校正。根据本变形例,与上述实施方式同样,通过按照移动体10的移动方向设定成为曝光校正的基准的图像区域IR,也能够提供与以往相比能够适当调节摄像部11的曝光的摄像部控制装置100。
以上参照附图详细描述了本公开的摄像部控制装置的实施方式及其变形例。然而,本公开的摄像部控制装置的具体构成不限于上述实施方式及其变形例,并且即使有不脱离本公开的要旨的范围内的设计改变等,其也包括在本公开中。
符号说明
10 移动体
11 摄像部
12 横摆率传感器
13 舵角传感器
14 车轮速度传感器
15 方向指示器
100 摄像部控制装置
110 移动方向运算部
120 图像区域设定部
130 曝光校正部
140 位置信息获取部
150 移动路径运算部
160 动作信息获取部
170 外界信息识别部
IM 图像
IR 图像区域。

Claims (8)

1.一种摄像部控制装置,其控制搭载在移动体上的摄像部,该摄像部控制装置的特征在于,具备:
移动方向运算部,其计算直行方向、右方向和左方向中的某一个作为所述移动体在前方的交叉路口处的所述移动体的移动方向;
图像区域设定部,其按照所述移动方向,在由所述摄像部拍摄到的图像中设定成为曝光校正的基准的图像区域;以及
曝光校正部,其根据所述图像区域的图像信息进行所述摄像部的曝光校正,
所述图像区域设定部中,在所述移动方向为所述直行方向的情况下,在包含由所述摄像部拍摄到的图像的消失点的中央区域设定所述图像区域,在所述移动方向为所述右方向的情况下,在不包含所述中央区域的右侧的右区域设定所述图像区域,在所述移动方向为所述左方向的情况下,在不包含所述中央区域的左侧的左区域设定所述图像区域,
所述曝光校正部中,在根据基于所述图像区域的所述图像信息即亮度信息生成的直方图而预想为曝光过度的情况下,确定负的曝光校正值以减小所述摄像部的曝光,在根据所述直方图而预想为曝光适当的情况下,将所述曝光校正值设定为零以维持所述摄像部的曝光,在根据所述直方图而预想为曝光不足的情况下,确定正的所述曝光校正值以增加所述摄像部的曝光。
2.根据权利要求1所述的摄像部控制装置,其特征在于,还具备:
位置信息获取部,其对所述移动体的位置信息进行获取;
移动路径运算部,其根据所述位置信息计算所述移动体的移动路径;以及
动作信息获取部,其对所述移动体的动作信息进行获取。
3.根据权利要求2所述的摄像部控制装置,其特征在于,
所述移动方向运算部基于所述位置信息和所述移动路径来计算所述移动方向。
4.根据权利要求2所述的摄像部控制装置,其特征在于,
所述动作信息获取部从搭载在所述移动体上的横摆率传感器获取所述移动体的横摆率作为所述动作信息,
所述移动方向运算部基于所述横摆率来计算所述移动体的移动方向。
5.根据权利要求2所述的摄像部控制装置,其特征在于,
所述动作信息获取部从搭载在所述移动体上的舵角传感器获取所述移动体的操舵角作为所述动作信息,
所述移动方向运算部基于所述操舵角来计算所述移动体的移动方向。
6.根据权利要求2所述的摄像部控制装置,其特征在于,
所述动作信息获取部从搭载在所述移动体上的车轮速度传感器获取所述移动体的多个车轮的旋转速度作为所述动作信息,
所述移动方向运算部基于所述多个车轮的旋转速度之差来计算所述移动体的移动方向。
7.根据权利要求2所述的摄像部控制装置,其特征在于,
所述动作信息获取部从搭载在所述移动体上的方向指示器获取所述移动体的预定移动方向作为所述动作信息,
所述移动方向运算部基于所述预定移动方向来计算所述移动体的移动方向。
8.根据权利要求1所述的摄像部控制装置,其特征在于,
还具备外界信息识别部,该外界信息识别部从由所述摄像部拍摄到的图像中识别包括所述移动体周围的障碍物信息和道路信息的外界信息,
所述图像区域设定部基于所述外界信息来设置所述图像区域。
CN201980079112.1A 2018-12-12 2019-11-20 摄像部控制装置 Active CN113170057B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018232134 2018-12-12
JP2018-232134 2018-12-12
PCT/JP2019/045356 WO2020121758A1 (ja) 2018-12-12 2019-11-20 撮像部制御装置

Publications (2)

Publication Number Publication Date
CN113170057A CN113170057A (zh) 2021-07-23
CN113170057B true CN113170057B (zh) 2023-06-13

Family

ID=71075625

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980079112.1A Active CN113170057B (zh) 2018-12-12 2019-11-20 摄像部控制装置

Country Status (3)

Country Link
JP (1) JP7122394B2 (zh)
CN (1) CN113170057B (zh)
WO (1) WO2020121758A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022053967A (ja) * 2020-09-25 2022-04-06 ソニーセミコンダクタソリューションズ株式会社 撮像制御装置、および撮像制御方法ならびに移動体

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07302325A (ja) * 1994-04-30 1995-11-14 Suzuki Motor Corp 車載用画像認識装置
EP1876829A4 (en) * 2005-04-28 2010-06-09 Aisin Seiki SYSTEM FOR MONITORING THE PERIPHERY OF A VEHICLE
JP5066558B2 (ja) * 2009-09-17 2012-11-07 日立オートモティブシステムズ株式会社 自車影認識装置
JP5737306B2 (ja) * 2013-01-23 2015-06-17 株式会社デンソー 露出制御装置

Also Published As

Publication number Publication date
CN113170057A (zh) 2021-07-23
WO2020121758A1 (ja) 2020-06-18
JP7122394B2 (ja) 2022-08-19
JPWO2020121758A1 (ja) 2021-10-14

Similar Documents

Publication Publication Date Title
EP2950521B1 (en) Camera capable of reducing motion blur in a low luminance environment and vehicle including the same
CN106981082B (zh) 车载摄像头标定方法、装置及车载设备
US9308917B2 (en) Driver assistance apparatus capable of performing distance detection and vehicle including the same
US9734425B2 (en) Environmental scene condition detection
EP2947874A1 (en) Stereo camera and driver assistance apparatus and vehicle including the same
CN113212498B (zh) 车间距离测量方法、车间距离测量装置、电子设备、计算机程序以及计算机可读记录介质
KR101611261B1 (ko) 스테레오 카메라, 이를 구비한 차량 운전 보조 장치, 및 차량
US20170308989A1 (en) Method and device for capturing image of traffic sign
US9077907B2 (en) Image processing apparatus
US10704957B2 (en) Imaging device and imaging method
US10635910B2 (en) Malfunction diagnosis apparatus
WO2017134982A1 (ja) 撮像装置
CN111052174A (zh) 图像处理设备、图像处理方法和程序
JP2014106739A (ja) 車載画像処理装置
CN113170057B (zh) 摄像部控制装置
CN109644241B (zh) 图像处理设备和图像处理方法
JP7003972B2 (ja) 距離推定装置、距離推定方法及び距離推定用コンピュータプログラム
JP7183729B2 (ja) 撮影異常診断装置
WO2015182148A1 (ja) 物体検出装置および物体検出装置を設置した車両
CN116588092A (zh) 车间距离测量方法、车间距离测量装置、电子设备、计算机程序以及计算机可读记录介质
US11410288B2 (en) Image processing apparatus
CN114071013B (zh) 一种用于车载摄像机的目标抓拍与跟踪方法及装置
KR20160092403A (ko) 차량 운전 보조 장치 및 차량 운전 보조 장치의 제어 방법
JP2022157399A (ja) 画像処理装置および画像処理方法、車両用制御装置、プログラム
KR20200119790A (ko) 인식 장치와 인식 방법 그리고 프로그램

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant