CN100527831C - 车辆用图像生成设备和图像生成方法 - Google Patents

车辆用图像生成设备和图像生成方法 Download PDF

Info

Publication number
CN100527831C
CN100527831C CNB2006100745344A CN200610074534A CN100527831C CN 100527831 C CN100527831 C CN 100527831C CN B2006100745344 A CNB2006100745344 A CN B2006100745344A CN 200610074534 A CN200610074534 A CN 200610074534A CN 100527831 C CN100527831 C CN 100527831C
Authority
CN
China
Prior art keywords
brightness
pixel data
frame buffer
reconfigures
stored
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CNB2006100745344A
Other languages
English (en)
Other versions
CN1856097A (zh
Inventor
大泉谦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Publication of CN1856097A publication Critical patent/CN1856097A/zh
Application granted granted Critical
Publication of CN100527831C publication Critical patent/CN100527831C/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57Control of contrast or brightness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/76Circuitry for compensating brightness variation in the scene by influencing the image signals
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02Rear-view mirror arrangements
    • B60R1/06Rear-view mirror arrangements mounted on vehicle exterior

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

一种车辆用图像生成设备和图像生成方法。该车辆用图像生成设备包括:摄像机;亮度调节装置,其调节对来自摄像机的视频信号进行编码而得到的像素数据的亮度;重新配置装置,其重新配置像素数据;以及控制装置,其控制亮度调节装置,其中亮度调节装置被控制为基于已被或将被重新配置装置重新配置的像素数据的亮度来调节像素数据的亮度。

Description

车辆用图像生成设备和图像生成方法
技术领域
本发明涉及一种向驾驶者呈现他/她车辆周围区域的图像的车辆用图像生成设备。本发明涉及一种生成要显示给驾驶者的、车辆周围区域的图像的方法。
背景技术
日本特开2004-155395号公报公开了一种图像生成设备,该设备将从具有AGC(Auto Gain Control,自动增益控制)功能的摄像机输入的图像存储在输入帧缓冲器中并重新配置输入帧缓冲器中的像素数据以生成输出图像。从摄像机输入的图像的亮度由摄像机的AGC功能自动调节。
发明内容
在前述图像生成设备使用输入图像的一部分生成输出图像的过程中,由摄像机的AGC功能调节的图像的亮度对于输出图像来说并非总是合适的。即,存在输出图像的亮度总体太亮或太暗的情况。特别是,当从一个输入图像生成多个输出图像时,AGC功能不能对每个输出图像起作用,这导致难以均衡全部输出图像的亮度。
另外,在将由每个均具有AGC功能的多个摄像机所拍摄的图像存储在输入帧缓冲器中并重新配置输入帧缓冲器中的像素数据以生成输出图像的装置中,存在这样的问题,即根据每个摄像机的视场区域的不同,各摄像机的AGC功能所调节的图像的亮度级也不同,这导致在组合各摄像机所拍摄的图像时,在各摄像机所拍摄的图像之间存在亮度级差异。
为了解决这一问题,考虑了一种在摄像机之间通过通信交换AGC功能的信息的方法,然而,这导致摄像机需要附加功能进而使其结构变复杂的问题。
本发明的目的在于提供一种解决前述问题从而能够获得具有适当亮度的输出图像的车辆用图像生成设备和图像生成方法。
本发明的一个方面提供一种车辆用图像生成设备,其包括:摄像机;亮度调节装置,其调节通过对来自该摄像机的视频信号进行编码而得到的像素数据的亮度;输入帧缓冲器,其存储经该亮度调节装置调节后的像素数据;重新配置装置,其重新配置该输入帧缓冲器中所存储的经该亮度调节装置调节后的像素数据的部分;输出帧缓冲器,其存储由该重新配置装置进行重新配置后的像素数据;控制装置,其控制该亮度调节装置,其中该亮度调节装置被控制为基于存储在该输出帧缓冲器中的像素数据的亮度或存储在该输入帧缓冲器中的像素数据的部分的亮度来进行亮度调节。
本发明的另一方面提供一种车辆用图像生成方法,其包括:对来自摄像机的视频信号进行编码以生成像素数据;执行亮度调节以调节所生成的像素数据的亮度;存储被所述亮度调节调节了亮度的像素数据;重新配置所存储的被所述亮度调节调节了亮度的像素数据的部分;存储被重新配置过的像素数据;以及从所存储的被重新配置过的像素数据生成输出图像以显示所生成的输出图像,其中,对所述亮度调节进行控制,以基于被重新配置过的像素数据的亮度或在重新配置之前所存储的像素数据的部分的亮度来进行亮度调节。
附图说明
参考附图对本发明进行说明:
图1是示出根据本发明第一实施例的车辆用图像生成设备的框图。
图2示出根据本发明第一实施例的输入图像和由重新配置装置使用的输入图像的区域的例子。
图3示出根据本发明第一实施例将图2所示的输入图像的梯形区域转换为矩形输出图像的例子。
图4是示出根据本发明第二实施例的车辆用图像生成设备的框图。
图5示出根据本发明第二实施例从线路1到线路4输入的4个输入图像生成输出图像的例子。
图6是示出根据本发明第三实施例的车辆用图像生成设备的框图。
具体实施方式
下面参考附图来说明本发明的实施例,其中,相似的部分以相似的附图标记表示。
第一实施例
设备的整体结构
如图1所示,根据本发明第一实施例的车辆用图像生成设备S1包括:摄像机1,数据编码器2,亮度调节装置3,输入帧缓冲器4,控制装置5,重新配置装置6,重新配置表7,输出帧缓冲器8,以及显示装置9。
首先说明设备的数据流和主要操作,控制装置5的操作将在之后说明。
设备的数据流和主要操作
摄像机1是安装在车辆上并拍摄车辆周围区域图像的电子摄像机。摄像机1具有AGC功能,通过该功能,响应于摄像对象的亮度在摄像范围内调节视频信号VS的亮度。
从摄像机1输入的视频信号VS通过例如NTSC(NationalTelevision System Committee,国家电视系统委员会)的传输制式被输入到数据编码器2。数据编码器2根据输入帧缓冲器4的分辨率和色深度(color depth)对输入视频信号VS进行编码以生成像素数据PD1,并依次将所生成的像素数据PD1输出到亮度调节装置3。
亮度调节装置3基于从控制装置5发送到亮度调节装置3的调节值AV来处理由数据编码器2编码的像素数据PD1,并将处理过的像素数据作为像素数据PD2存储在输入帧缓冲器4中。
从控制装置5发送到亮度调节装置3的调节值AV对每帧更新,并影响帧中的全部像素。后面将以具体例子对控制装置5的操作进行说明。
调节值AV表示用于校正像素亮度的比率。假设亮度与调节前亮度值的比率以百分比来表示。当调节值AV为50%时,像素亮度被减小到一半。当调节值AV为100%时,像素亮度保持不变。当调节值AV为150%时,像素亮度增加50%。
图像生成设备S1开始工作时的调节值AV(初始值)是100%,之后,控制装置5对每帧使用其输出数据重写调节值AV。当数据编码器2以将视频信号VS分成色差信号和亮度信号的方式对视频信号VS编码时,可能只对亮度信号进行操作,当数据编码器2以将视频信号VS分成R、G和B的方式对视频信号VS编码时,对R、G和B中的每个数据进行相同的操作,从而可以改变像素的亮度。该校正在后面被称为可变校正。
此外,存在对输入图像或输入图像的每个像素进行固定校正的情况。例如,存在这样的情况,即某一现象被电子校正,其中由于镜头周边光量的下降导致帧中央被拍摄得较亮而边缘被拍摄得较暗。因为表示透镜周边光量的下降的明暗(shading)数据是特定透镜的特征值,所以即使输入图像的亮度被摄像机1的AGC功能改变,其有关校正值也保持固定不变。固定校正以类似于可变校正的方式校正像素亮度。每个像素可以具有对应于其位置的唯一校正值(例如120%)。可选地,计算得到的校正值也可以应用于每个像素。固定校正可以独立于可变校正而进行。对于校正的顺序,固定校正可以在可变校正之后进行,或者可变校正可以在固定校正之后进行。例如,当固定校正是120%且可变校正是150%时,对某一像素进行180%的校正。
换句话说,亮度调节装置3具有两种独立的校正功能,包括对应于输入图像的像素位置的固定亮度校正和基于来自控制装置5的调节值AV的可变亮度校正,由数据编码器2生成的像素数据PD1的亮度被相关校正功能改变,校正过的像素数据PD2被存储在输入帧缓冲器4中。
重新配置装置6使用重新配置表7重新配置输入帧缓冲器4中的像素数据PD2,并将用作像素数据PD3的重新配置过的像素数据存储在输出帧缓冲器8中。重新配置表7是表示输出帧缓冲器8中显示区域的每个像素对应于输入帧缓冲器4中的哪个像素的信息集合。重新配置装置6每次访问输入帧缓冲器4时将进行重新配置所使用的像素数据PD2的亮度相加。当得到输出帧缓冲器8中的输出图像的全部像素的像素数据PD3时,计算其平均值。该平均值表示输出帧缓冲器8中重新配置的像素数据PD3的亮度,且该平均值用作输出图像的亮度数据B。
存在根据重新配置表7输入帧缓冲器4中的同一像素被访问多次的情况,这时根据访问次数对亮度进行相加。
这使得可以测量由存储在输出帧缓冲器8中的像素数据PD3生成的输出图像的亮度。测得的输出图像的亮度数据B输出到控制装置5。由于亮度数据B被输出到控制装置5,可以采用在重新配置处理中使用的输入帧缓冲器4中的多个像素数据PD2的亮度平均值,以及输出帧缓冲器8中的像素数据PD3的亮度平均值。
在这种情况下的亮度数据B通过相加在重新配置中使用的像素数据PD2的亮度而测得。即使对输入帧缓冲器4中的同一像素进行多次访问,每个像素数据PD2的亮度也只被相加一次。
即,例如,当如图2所示输入图像21的梯形区域22的像素数据PD2通过重新配置装置6在输出帧缓冲器8中重新配置而得到如图3所示的矩形输出图像31时,梯形区域22的一个像素有时被当作输出图像中的两个像素,以将梯形区域22扩展或变形成输出图像31的形状,在这种情况下,在相加重新配置中所使用的像素数据PD2的亮度时,只加原始的一个像素而不是两个像素的亮度。
由重新配置表7所定义的比例关系在重新配置处理中所使用的输入帧缓冲器4中的多个像素数据PD2的亮度平均值与输出帧缓冲器8中的像素数据PD3的亮度平均值(输出图像的亮度数据)之间建立。当比例关系固定时,无论使用什么值作为亮度数据B,都可以由控制装置5生成相同的调节值AV。因为使用输出图像的亮度数据作为亮度数据B较为容易,在本实施例中使用输出图像的亮度数据作为亮度数据B。
显示装置9从输出帧缓冲器8中的像素数据PD3生成输出图像,并将所生成的输出图像显示给驾驶者。
控制装置5的内部操作
下面将使用图2和图3对控制装置5的内部操作进行说明。
在图2所示的输入图像21中,将要由重新配置装置6使用的区域22由重新配置表7的内容来确定。下面说明当区域22被扩展和变形以生成如图3所示的输出图像31时的简单重新配置表7的例子。
输入图像21的内容是不确定的且输入图像的各像素的亮度分布是不均匀的。在几乎全部情况下,整个输入图像21的亮度与区域22的亮度是不同的。
尽管优化状态根据AGC功能设置而变化,摄像机1调节视频信号的亮度以优化从整体上看帧的亮度,并输出结果。最简单的AGC功能的例子是,视频信号的亮度在例如±25%的范围内调节,以使当输出图像的像素的亮度以0到100来表示时,整个输出图像的亮度(图像的全部像素的亮度平均值)被移到50附近。
如上所述,摄像机1的摄像对象是不确定的,并且被摄图像中像素的亮度分布是不均匀的。因而,在几乎全部情况下,当帧作为整体时最优的校正对区域22并不合适。如图3所示,当梯形区域22的像素数据被重新配置成对应于矩形输出图像31的像素时,并非以相同的频率均匀地使用区域22的像素数据。即,存在这样的情况:输入图像21的某一像素对应于输出图像31的一个像素,而输入图像21的另一像素对应于输出图像31的两个像素。而且,在区域22中,像素的亮度分布是不均匀的。因而,区域22中像素的亮度的平均值与输出图像的亮度数据不一致。
如上所述,已示出在摄像机1中被调节并由数据编码器2接收到的摄像机图像的亮度对从输出帧缓冲器8中的像素数据生成的输出图像的亮度并不合适。在本实施例中,为了优化输出图像的亮度,在输出帧缓冲器8中的各像素数据PD3的亮度平均值(输出图像的亮度数据)被测量并被反馈给亮度调节装置3。
从重新配置装置6输出的输出图像的亮度数据B被输入到控制装置5。例如,当输出图像的亮度数据B是36时(因为除输入图像21的区域22外的区域中存在大的亮区域,通过摄像机1的AGC功能,区域22变得相对暗,导致输出图像变暗),控制装置5进行控制,使得输出图像的亮度数据B为接近50(目标值)。可增加输入图像的亮度以提高输出图像的亮度。
通过将亮度数据的目标值除以当前输出图像的亮度数据得到亮度变化范围。这里,亮度数据的目标值是50,当前输出图像的亮度数据是36。亮度变化范围为1.39(=50/36),控制装置5的输出(调节值AV)为139%。然后,在接收控制装置5的输出时,亮度调节装置3改变可变校正值,并将要写入输入帧缓冲器4中的像素数据PD2的亮度增加到139%。
如上所述,亮度调节装置3根据显示装置9显示的像素区域,基于重新配置装置3输出的输出图像的亮度数据来校正整个帧的亮度。这使得可以设置上述像素区域的亮度作为目标值,以保持显示装置9显示的图像的亮度合适,并改善图像的可视性。这使得除了摄像机1最初包括的亮度调节装置3以外,不需要另外提供对应于重新配置后所显示的像素区域的亮度调节装置,因而使得装置简单。
如上所述,根据本实施例的图像生成设备S1,在摄像机1所拍摄的图像的特定像素被重新配置装置6重新配置并显示的图像生成设备中,图像生成设备S1包括:亮度调节装置3,其处理通过对从摄像机1输入的视频信号VS编码而得到的像素数据PD1;以及控制装置5,其控制亮度调节装置3,控制装置5配置成基于重新配置装置6重新配置的数据的亮度来控制亮度调节装置3。
另外,根据本实施例的车辆用图像生成方法,在摄像机1拍摄的图像的特定像素被重新配置装置6重新配置并显示的图像生成方法中,亮度调节装置3处理通过对从摄像机1输入的视频信号VS编码而得到的像素数据PD1,该亮度调节装置3被控制装置5基于重新配置装置6重新配置的数据的亮度来控制。
而且,本实施例的图像生成设备S1包括:具有AGC功能的摄像机1;存储由摄像机1拍摄的图像的输入帧缓冲器4;数据编码器2,其从来自摄像机1的视频信号VS生成要存储在输入帧缓冲器4中的数据;亮度调节装置3,其改变由数据编码器2生成的数据的亮度;控制装置5,其控制亮度调节装置3;重新配置装置6,其重新配置输入帧缓冲器4中的像素数据PD2;输出帧缓冲器8,其存储重新配置装置6的结果;以及显示装置9,其显示输出帧缓冲器8的内容,其中,控制装置5基于被重新配置装置6重新配置的数据的亮度来控制亮度调节装置3。
即使当使用从摄像机1输入的图像的一部分生成输出图像时,该结构也可以得到亮度合适的输出图像。
而且,在输出帧缓冲器8中生成的输出图像的多个像素数据PD3的亮度平均值被作为控制装置5的输入。根据该结构,因为控制装置5基于在输出帧缓冲器8中生成的输出图像的亮度数据进行操作,因而可以更容易地进行合适的亮度调节。
可选地,重新配置装置6的重新配置所使用的、在输入帧缓冲器4中的多个像素数据PD2的亮度平均值也可以作为控制装置5的输入。根据该结构,因为控制装置5基于输入帧缓冲器4中的、由重新配置装置6的重新配置所使用的多个像素数据PD2的亮度平均值进行操作,因而可以进行合适的亮度调节。
而且,亮度调节装置3具有两种独立的校正功能,包括对像素位置的固定亮度校正和基于来自控制装置5的指令的可变亮度校正。被相关校正功能校正的像素数据存储在输入帧缓冲器4中。根据该结构,亮度调节装置3可以使用基于来自控制装置5的可变亮度校正和固定亮度校正进行合适的亮度调节。
另外,重新配置装置6具有测量输出帧缓冲器8中生成的图像的亮度数据的功能。根据该结构,因为重新配置装置6测量输出帧缓冲器8中生成的输出图像的亮度数据,所以像素数据重新配置和亮度测量可以同时进行,这使得可以有效地测量输出图像的亮度数据。
而且,重新配置装置6具有测量在输入帧缓冲器4中重新配置所使用的多个像素数据PD2的平均亮度的功能。根据该结构,像素数据重新配置和亮度测量可以同时进行,这使得可以有效测量在输入帧缓冲器4中重新配置所使用的多个像素数据PD2的亮度的评价值。
第二实施例
装置的整体结构
如图4所示,根据本发明第二实施例的车辆用图像生成设备S2包括:多个摄像机41,多个数据编码器42,多个亮度调节装置43,多个输入帧缓冲器44,控制装置45,重新配置装置46,重新配置表47,输出帧缓冲器48和显示装置49。
首先说明装置的数据流和主要操作,控制装置45的内部操作将随后说明。
装置的数据流和主要操作
对于将摄像机41的输出分别通过数据编码器42和亮度调节装置43存储在输入帧缓冲器44中的操作,第二实施例与第一实施例的相同。第一实施例与第二实施例的区别如下。第一,提供多组的摄像机41、编码器42、亮度调节装置43和输入帧缓冲器44。第二,流经各路径的数据被并行地输入到重新配置装置46。第三,控制装置45集中控制多个亮度调节装置43。注意,尽管在图4中描述了四组摄像机41、编码器42、亮度调节装置43和输入帧缓冲器44,但是如果提供两组或多组,任何组数均可。这些组分别被称为线路1、线路2、线路3和线路4。为了说明的需要,通过将线路编号添加到每个部件的附图标记,例如摄像机41-1、数据编码器42-4等,来相互区分每个线路的摄像机41、数据编码器42、亮度调节装置43和输入帧缓冲器44。
重新配置装置46使用重新配置表47重新配置多个输入帧缓冲器44中的像素数据PD2-1到PD2-4,并在输出帧缓冲器48中将其存储为像素数据PD3。重新配置表47是表示输出帧缓冲器48中的显示区域的每个像素对应于多个输入帧缓冲器44中的哪个像素的信息集合。与第一实施例相比,重新配置的规则基本不变,唯一的变化是输入帧缓冲器44的容量增加了。
多个输入帧缓冲器44中的像素数据PD2-1到PD2-4在输出帧缓冲器48中被重新配置装置46重新配置以生成输出图像。而且,在重新配置像素数据PD2-1到PD2-4中,重新配置所使用的像素数据PD2-1到PD2-4的亮度对每个线路分别相加,当得到输出帧缓冲器48中的输出图像的全部像素的像素数据PD3时,对每个线路计算平均的亮度值。每个值是在输出帧缓冲器48中重新配置的像素数据PD3的像素区域的亮度的平均值,每个像素区域对应于每个线路。这些值称为各线路的亮度数据B-1到B-4。重新配置装置46将这些亮度数据B-1到B-4输出到控制装置45。
显示装置49从输出帧缓冲器48中的像素数据PD3生成输出图像,并将所生成的输出图像显示给驾驶者。
控制装置45的内部操作
下面将给出控制装置45的内部操作的说明。
亮度数据B-1到B-4被从重新配置装置46输入到控制装置45。与第一实施例类似,从亮度数据的目标值与当前输出图像的每个亮度数据B-1到B-4之间的比率来得到每个线路的亮度调节值AV。在这种情况下,得到四个调节值AV-1到AV-4。控制装置45将调节值AV-1到AV-4中的每个输出到每个线路的亮度调节装置43。每个线路的亮度调节装置43调节对从每个摄像机41输入的视频信号进行编码而得到的像素数据PD1-1到PD1-4的亮度,并将其写入每个线路的输入帧缓冲器44作为像素数据PD2-1到PD2-4。
图5显示一个例子,其中根据从线路1到4输入的四个输入图像来生成输出图像。在图5中,(a)显示的是线路1的输入图像21-1,(b)显示的是线路2的输入图像21-2,(c)显示的是线路3的输入图像21-3,(d)显示的是线路4的输入图像21-4,(e)显示的是输出图像。
例如,通过使用本方法,如图5所示,在通过使用来自多个线路的输入图像21-1到21-4中的每个的一部分来生成输出图像中,计算各输入图像的亮度数据B-1到B-4与像素数据重新配置处理同时完成,控制装置45可以计算调节值AV-1到AV-4。
这使得可以将显示装置9显示的图像的亮度保持为合适,并改善图像的可视性。
如上所说明的,根据本实施例,图像生成设备S2包括:两组或多组具有AGC功能的摄像机41、存储来自摄像机41的图像的输入帧缓冲器44、从来自摄像机41的视频信号VS生成要存储在输入帧缓冲器44中的数据的数据编码器42、改变数据编码器42所生成的数据的亮度的亮度调节装置43;以及控制装置45,其控制多个亮度调节装置43;重新配置装置46,其重新配置多个输入帧缓冲器44中的像素数据PD2;输出帧缓冲器48,其存储重新配置装置46的结果;以及显示装置49,其显示输出帧缓冲器48中的内容,其中,控制装置45基于重新配置装置46重新配置的数据的亮度来控制亮度调节装置43。
根据该结构,即使当使用从多个摄像机41输入的图像作为输入且使用各图像的一部分生成输出图像,也可以得到亮度合适的输出图像。
另外,重新配置装置46包括为多个输入帧缓冲器44中的每个测量在输出帧缓冲器48中生成的图像的亮度数据的功能。根据该结构,即使当提供多个图像输入时,也可以对每个输入独立地进行校正。
而且,重新配置装置46可包括为多个输入帧缓冲器44中的每个测量重新配置所使用的输入帧缓冲器44中的多个像素数据PD2的平均亮度的功能。根据该结构,即使当提供多图像输入时,也可以对每个输入独立地进行校正。
第三实施例
如图6所示,根据本发明第三实施例的车辆用图像生成设备S3包括:多个摄像机61,多个数据编码器62,多个亮度调节装置63,多个输入帧缓冲器64,控制装置65,重新配置装置66,重新配置表67,输出帧缓冲器68,显示装置69,以及车灯点亮检测装置70。
除了车灯点亮检测装置70被连接到控制装置65以外,第三实施例的结构与图4所示的基本相同,除了下面将要说明的地方以外,其操作也与图4所示的结构的操作相同。
车灯点亮检测装置70感测灯的点亮操作或加电以检测哪个车灯被打开,并将结果输出到控制装置65。控制装置65预先存储安装在车辆上的每个摄像机61的位置和安装在车辆上的每个灯的位置的信息。基于这些信息,控制装置65从多个摄像机61中选择被点亮的灯对图像施加影响的摄像机61。
假设当进行例如图5所示的图像转换时头灯是打开的。当头灯打开时,车灯点亮检测装置70通知控制装置65头灯是打开的。控制装置65根据存储在摄像机中的摄像机位置信息和灯位置信息判断出对从线路1(摄像机61-1)输入的图像施加了影响。控制装置65仅将在第二实施例中说明的、由点亮的头灯施加影响的线路1的亮度目标值从正常值50增加到65,并计算要应用于线路1的调节值AV-1。根据灯的点亮和其对图像的影响程度,目标值的增量会有变化。例如,当头灯打开时目标值增加15,当闪光信号灯(blinker)打开时增加5。例如,当没有车灯点亮检测装置70且头灯打开时,摄像机1的拍摄范围被照亮而变得较亮,导致输出图像中的目标区域(这时为线路1)被控制成整体变暗(即调节值减小而目标值不变),使得难以从输出图像辨别头灯是否打开。使用车灯点亮检测装置70,头灯的点亮被检测到,并且目标区域的亮度数据的目标值被设置得更高。这使得可以增加调节值,以便从输出图像中可以识别头灯的点亮。这将得到更自然的输出图像。
如上所述,根据本实施例,控制装置65包括检测车灯点亮的车灯点亮检测装置70,控制装置65的输出(调节值)根据车灯点亮检测装置70的输出而改变。根据该结构,控制装置65检测车灯的点亮,以便可以判断车辆周围区域的图像中被灯照亮的区域,并基于该判断调节对应于有关区域的图像的亮度,因而,通过进行控制以更亮地显示被点亮的灯照亮的区域的图像,提供自然的输出图像。
另外,控制装置65能够根据车灯点亮检测装置70的输出,来改变控制装置65中亮度调节控制所使用的亮度数据的目标值。根据该结构,控制装置65根据车灯的点亮情况来改变亮度调节的目标值,因而,通过更亮地显示被点亮的灯照亮的区域的图像,提供自然的输出图像。
这里说明的优选实施例是说明性的而非限制性的,在不脱离本发明的精神或实质特征的情况下,本发明可以以其它方式实现。由权利要求书表示的本发明的范围以及在权利要求书的范围内的全部变化都包括在其中。

Claims (16)

1.一种车辆用图像生成设备,其包括:
摄像机;
亮度调节装置,其调节通过对来自该摄像机的视频信号进行编码而得到的像素数据的亮度;
输入帧缓冲器,其存储经该亮度调节装置调节后的像素数据;
重新配置装置,其重新配置该输入帧缓冲器中所存储的经该亮度调节装置调节后的像素数据的部分;
输出帧缓冲器,其存储由该重新配置装置进行重新配置后的像素数据;
控制装置,其控制该亮度调节装置,其中该亮度调节装置被控制为基于存储在该输出帧缓冲器中的像素数据的亮度或存储在该输入帧缓冲器中的像素数据的部分的亮度来进行亮度调节。
2.根据权利要求1所述的车辆用图像生成设备,其特征在于,该车辆用图像生成设备还包括:
数据编码器,其对来自所述摄像机的视频信号进行编码以生成输入所述亮度调节装置的像素数据;以及
显示装置,其从存储在该输出帧缓冲器中的像素数据生成输出图像,并显示该输出图像,
其中,所述摄像机是具有自动增益控制功能的摄像机。
3.根据权利要求2所述的车辆用图像生成设备,其特征在于,提供两组或更多组所述摄像机、所述输入帧缓冲器、所述数据编码器和所述亮度调节装置;所述控制装置集中控制多个所述亮度调节装置;所述重新配置装置集中重新配置多个所述输入帧缓冲器中的像素数据。
4.根据权利要求2所述的车辆用图像生成设备,其特征在于,所述控制装置将存储在所述输出帧缓冲器中的像素数据的亮度的平均值作为输入。
5.根据权利要求3所述的车辆用图像生成设备,其特征在于,所述控制装置将存储在所述输出帧缓冲器中的与各所述组相对应的像素数据的亮度的各平均值作为与各所述组相对应的输入。
6.根据权利要求2所述的车辆用图像生成设备,其特征在于,所述控制装置将所述重新配置装置进行重新配置所使用的、存储在所述输入帧缓冲器中的像素数据的亮度的平均值作为输入。
7.根据权利要求3所述的车辆用图像生成设备,其特征在于,所述控制装置将所述重新配置装置进行重新配置所使用的、存储在各所述组的所述输入帧缓冲器中的像素数据的亮度的各平均值作为与各所述组相对应的输入。
8.根据权利要求2所述的车辆用图像生成设备,其特征在于,所述亮度调节装置具有两种独立的校正功能,包括对应于像素位置的固定亮度校正和由所述控制装置进行的亮度校正,通过相关校正功能改变由所述数据编码器生成的像素数据的亮度以将校正后的像素数据存储在所述输入帧缓冲器中。
9.根据权利要求8所述的车辆用图像生成设备,其特征在于,所述重新配置装置具有测量存储在所述输出帧缓冲器中的像素数据的亮度的平均值的功能。
10.根据权利要求6所述的车辆用图像生成设备,其特征在于,所述重新配置装置具有测量进行重新配置所使用的、存储在所述输入帧缓冲器中的像素数据的亮度的平均值的功能。
11.根据权利要求7所述的车辆用图像生成设备,其特征在于,所述重新配置装置具有测量进行重新配置所使用的、存储在各所述组的所述输入帧缓冲器中的像素数据的亮度的各平均值的功能。
12.根据权利要求5所述的车辆用图像生成设备,其特征在于,所述重新配置装置具有为多个所述输入帧缓冲器中的每个测量存储在所述输出帧缓冲器中的与各所述组相对应的像素数据的亮度的各平均值的功能。
13.根据权利要求7所述的车辆用图像生成设备,其特征在于,所述重新配置装置具有为多个所述输入帧缓冲器中的每个测量进行重新配置所使用的、存储在各所述组的所述输入帧缓冲器中的像素数据的亮度的各平均值的功能。
14.根据权利要求3所述的车辆用图像生成设备,其特征在于,该车辆用图像生成设备还包括:用于检测车灯点亮的车灯点亮检测装置,其中所述控制装置基于该车灯点亮检测装置的输出来控制多个所述亮度调节装置。
15.根据权利要求14所述的车辆用图像生成设备,其特征在于,所述控制装置根据所述车灯点亮检测装置的输出来改变进行控制所使用的亮度数据的目标值。
16.一种车辆用图像生成方法,其包括:
对来自摄像机的视频信号进行编码以生成像素数据;
执行亮度调节以调节所生成的像素数据的亮度;
存储被所述亮度调节调节了亮度的像素数据;
重新配置所存储的被所述亮度调节调节了亮度的像素数据的部分;
存储被重新配置过的像素数据;以及
从所存储的被重新配置过的像素数据生成输出图像以显示所生成的输出图像,
其中,对所述亮度调节进行控制,以基于被重新配置过的像素数据的亮度或在重新配置之前所存储的像素数据的部分的亮度来进行亮度调节。
CNB2006100745344A 2005-04-27 2006-04-27 车辆用图像生成设备和图像生成方法 Active CN100527831C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005128868 2005-04-27
JP2005128868A JP4710403B2 (ja) 2005-04-27 2005-04-27 車両用画像生成装置および方法

Publications (2)

Publication Number Publication Date
CN1856097A CN1856097A (zh) 2006-11-01
CN100527831C true CN100527831C (zh) 2009-08-12

Family

ID=36798217

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2006100745344A Active CN100527831C (zh) 2005-04-27 2006-04-27 车辆用图像生成设备和图像生成方法

Country Status (6)

Country Link
US (1) US7821532B2 (zh)
EP (1) EP1718064B1 (zh)
JP (1) JP4710403B2 (zh)
KR (1) KR100791192B1 (zh)
CN (1) CN100527831C (zh)
DE (1) DE602006007748D1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2522126A1 (en) 2010-01-08 2012-11-14 Valeo Schalter und Sensoren GmbH Image forming device for a vehicle as well as driver assistance facility with such an image forming device as well as method for forming an overall image
KR20130080614A (ko) * 2012-01-05 2013-07-15 한국전자통신연구원 휘도 자동 보정 장치 및 방법
US10326969B2 (en) * 2013-08-12 2019-06-18 Magna Electronics Inc. Vehicle vision system with reduction of temporal noise in images
CN105704457A (zh) * 2016-03-09 2016-06-22 国网浙江省电力公司湖州供电公司 特高压输电重要通道场景目标状态识别与在线监测装置
JP6759995B2 (ja) * 2016-11-11 2020-09-23 株式会社デンソー 画像処理装置
JP7184591B2 (ja) * 2018-10-15 2022-12-06 三菱重工業株式会社 車両用画像処理装置、車両用画像処理方法、プログラムおよび記憶媒体
CN111166233B (zh) * 2018-11-13 2021-06-01 海安同盟机械科技有限公司 基于灰度值分析的档位控制系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1426228A (zh) * 2001-10-31 2003-06-25 三星电子株式会社 确定环境亮度的方法和使用该方法控制显示亮度的方法
CN1547387A (zh) * 2003-12-09 2004-11-17 北京中星微电子有限公司 一种动态帧率条件下的自动曝光装置
CN1547074A (zh) * 2003-12-05 2004-11-17 一种数字亮度增益与曝光时间协同工作的自动曝光装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08254499A (ja) * 1995-03-17 1996-10-01 Sharp Corp 表示・外観検査装置
US6806903B1 (en) * 1997-01-27 2004-10-19 Minolta Co., Ltd. Image capturing apparatus having a γ-characteristic corrector and/or image geometric distortion correction
KR100475285B1 (ko) 1997-12-24 2005-06-07 삼성테크윈 주식회사 광원에 따라 컨트라스트를 보정하는 디지탈 스틸카메라
JPH11234601A (ja) * 1998-02-17 1999-08-27 Namco Ltd 映像プリント供給装置
JP2001320616A (ja) * 2000-02-29 2001-11-16 Matsushita Electric Ind Co Ltd 撮像システム
JP2002016908A (ja) * 2000-06-28 2002-01-18 Matsushita Electric Ind Co Ltd 画像合成装置
KR20020023523A (ko) * 2000-09-22 2002-03-29 박규영 조도 보정용 카메라
US7027665B1 (en) * 2000-09-29 2006-04-11 Microsoft Corporation Method and apparatus for reducing image acquisition time in a digital imaging device
KR100423616B1 (ko) 2002-04-12 2004-03-22 주식회사 레이시스 영상 보정기능이 있는 ccd 카메라
CN100361508C (zh) 2002-09-09 2008-01-09 皇家飞利浦电子股份有限公司 包含输入图像信号动态范围控制的信号重建方法
JP2004155395A (ja) 2002-11-08 2004-06-03 Denso Corp 車両周辺画像処理装置
JP2005065183A (ja) * 2003-08-20 2005-03-10 Denso Corp 車両周辺監視システム
KR100568784B1 (ko) * 2004-10-15 2006-04-07 주식회사 팬택앤큐리텔 이동 통신 단말기의 화질 보정 장치 및 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1426228A (zh) * 2001-10-31 2003-06-25 三星电子株式会社 确定环境亮度的方法和使用该方法控制显示亮度的方法
CN1547074A (zh) * 2003-12-05 2004-11-17 一种数字亮度增益与曝光时间协同工作的自动曝光装置
CN1547387A (zh) * 2003-12-09 2004-11-17 北京中星微电子有限公司 一种动态帧率条件下的自动曝光装置

Also Published As

Publication number Publication date
CN1856097A (zh) 2006-11-01
US20060244844A1 (en) 2006-11-02
EP1718064B1 (en) 2009-07-15
US7821532B2 (en) 2010-10-26
KR100791192B1 (ko) 2008-01-02
KR20060113477A (ko) 2006-11-02
JP4710403B2 (ja) 2011-06-29
JP2006311003A (ja) 2006-11-09
DE602006007748D1 (de) 2009-08-27
EP1718064A1 (en) 2006-11-02

Similar Documents

Publication Publication Date Title
CN100527831C (zh) 车辆用图像生成设备和图像生成方法
JP5774817B2 (ja) ディスプレイのカラー・グレーディングを提供する方法、装置及びシステム
CN100593341C (zh) 摄像装置
US8218868B2 (en) Method and apparatus for enhancing images
JP4339454B2 (ja) ダイナミック輝度制御による映像システムおよび方法
CN101350933B (zh) 一种基于图像感应器拍摄显示屏幕的亮度调整方法
US8382289B2 (en) Projector apparatus and projection image correcting program product
US8743100B2 (en) Display control apparatus
CN100486302C (zh) 图像获取装置
CN100515041C (zh) 自动曝光控制方法及自动曝光补偿装置
KR101629825B1 (ko) Hdr 기능을 이용한 차량용 디스플레이 장치 및 방법
JP2006285064A (ja) 画像表示装置
CN101556787A (zh) 一种图像质量调整的方法
CN104349098A (zh) 投影装置及其投影画面的亮度控制方法
CN112422934A (zh) 投影装置及其亮度调整方法
CN111491103B (zh) 一种图像亮度的调节方法、监控设备及存储介质
JP4749142B2 (ja) 視認状況測定装置
JP6411644B2 (ja) ヒストグラム拡散を伴う自動車両カメラ装置
US6064433A (en) Video filming method and apparatus
KR101639983B1 (ko) 사분면 분할 조명 기능을 갖는 cctv 시스템
JP2002268116A (ja) 自動露出制御装置およびそのプログラムを組み込んだ外部記憶媒体
KR100866872B1 (ko) 투사 표시 장치의 화면 밝기 제어 장치 및 방법
JP4880203B2 (ja) カメラ付き携帯端末及びバックライト調節方法
JPH07281629A (ja) 電子機器
CN117351730A (zh) 图像处理系统、方法、车辆以及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant