CN110720112A - 基于机动车辆显示装置的形状调整匹配图像处理的装置和方法 - Google Patents
基于机动车辆显示装置的形状调整匹配图像处理的装置和方法 Download PDFInfo
- Publication number
- CN110720112A CN110720112A CN201880038313.2A CN201880038313A CN110720112A CN 110720112 A CN110720112 A CN 110720112A CN 201880038313 A CN201880038313 A CN 201880038313A CN 110720112 A CN110720112 A CN 110720112A
- Authority
- CN
- China
- Prior art keywords
- display device
- shape
- image processing
- camera
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 25
- 238000001514 detection method Methods 0.000 claims abstract description 12
- 238000004364 calculation method Methods 0.000 claims description 8
- 230000001419 dependent effect Effects 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000002828 fuel tank Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G06T3/08—
-
- G06T5/80—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Arrangement of adaptations of instruments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- B60K2360/21—
-
- B60K35/23—
-
- B60K35/81—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30268—Vehicle interior
Abstract
本发明涉及一种用于基于一机动车辆用显示装置的一形状调整匹配一图像处理的装置,该装置(1)包括:一个检测装置(10),它设置用于,对一显示装置(200)的一种形状,一摄像机的一外部摄像机参数,摄像机的一固有摄像机参数,以及至少一个摄像机视域进行检测。一个计算装置(20),它设置用于,基于检测到的显示装置形状,以及基于至少一个外部摄像机参数、至少一个固有摄像机参数和至少一个摄像机视域计算一重投影面积和匹配表;该装置还包括一图像处理装置(30),它设置用于,基于计算得到的重投影面积和计算得到的匹配表执行一经调整匹配的图像处理。
Description
技术领域
本发明涉及机动车辆中的图像处理和显示系统。
本发明尤其涉及一种基于机动车辆显示装置的形状调整匹配图像处理的装置和方法。
背景技术
在当前用于机动车辆或周围环境显示系统的、英语也称“Surround-View-Systems(全景环视系统)”的全视野图像处理功能中,不接收或考虑显示屏或显示装置的形状。然而,显示屏或显示装置的形状对可视化显示质量具有很大影响。
在此,也可能出现其他活动的汽车部件,例如侧门或后门以及燃料箱盖等的可见重投影的不利影响。
发明内容
本发明的一项任务是,为驾驶员辅助系统提供一种经改进的机动车辆全视野或周围环境显示。
该任务是通过独立权利要求的主题解决的。其他结构形式和实施方式请参见从属权利要求、说明书以及附图。
本发明的第一方面涉及一种用于基于机动车辆显示装置的形状调整匹配图像处理的装置。
用于基于机动车辆显示装置的形状调整匹配图像处理的装置包括检测装置,该检测装置设置用于,对显示装置的形状和摄像机外部摄像机参数、摄像机固有摄像机参数以及摄像机的至少一个视域加以检测。
换句话说,检测装置设置用于,检测摄像机的外部摄像机参数和摄像机的固有摄像机参数,这可包括检测所有外部和固有摄像机参数。
该装置还包括计算装置,它设置用于,基于检测到的显示装置形状,以及基于外部摄像机参数、固有摄像机参数和至少一个视域,计算重投影面积和匹配表。
该装置还包括图像处理装置,它设置用于,基于计算得到的重投影面积和计算得到的匹配表执行一经调整匹配的图像处理。
本发明所使用术语显示装置的“形状”在此包括,例如显示装置表面的形状,例如显示屏宽度上弯曲的曲线。
本发明有益的设计方案请参见从属权利要求。
在本发明一有益的实施方式中规定,检测装置设置用于,检测机动车辆A柱的显示装置形状。
在本发明一有益的实施方式中规定,计算装置设置用于,计算重投影面积,以补偿显示装置的弯曲。
这能实现的优点是,改善周围环境场景的显示质量,并避免所显示图像信息的图像失真。
在本发明一有益的实施方式中规定,计算装置设置用于,基于投影的显示栅格计算重投影面积。
在本发明一有益的实施方式中规定,计算装置设置用于,在视域的一分区上生成投影的显示栅格。
在本发明一有益的实施方式中规定,检测机动车辆A柱的显示装置形状。
在本发明一有益的实施方式中规定,计算重投影面积,以补偿显示装置的弯曲。
在本发明一有益的实施方式中规定,基于投影的显示栅格计算重投影面积。
在本发明一有益的实施方式中规定,在视域的一分区上生成投影的显示栅格。
所述设计方案和其他结构形式彼此可任意组合。
本发明其他可能的设计方案、其他结构形式和实施也包括之前或之后本发明相关实施方式特征未明确说明的组合。
附图说明
附图旨在帮助进一步理解本发明实施方式。
附图对实施方式进行了说明,并与说明一起用于解释本发明的构思。
鉴于附图得出其他实施方式和许多所述优点。附图所示元素之间没有必要完全按比例显示。
各图简要说明
其中:
图1以一示意图方式示出了基于根据本发明一实施例所述机动车辆显示装置的形状调整匹配一图像处理的装置;
图2以一示意图方式示出了基于根据本发明另一实施例所述机动车辆用的显示装置形状调整匹配一图像处理的一种方法流程图;以及
图3以示意图方式示出了基于一根据本发明另一实施例所述机动车辆用的显示装置形状调整匹配一图像处理的一种方法;
图4以一示意图方式示出了根据本发明另一实施例所述摄像机重投影与显示屏形状的图像失真的一种模拟。
具体实施方式
在附图中,除非另有说明,相同的附图标记说明相同或功能相同的元件、部件、组件或方法步骤。
机动车辆或车辆是指例如汽车或混合动力车辆,例如具有航行功能的混合动力车辆,例如一摩托车,一巴士,一卡车或一自行车。
图1以示意图的方式说明基于根据本发明一实施例所述机动车辆用显示装置的形状调整匹配一图像处理的装置。
装置100用于基于机动车辆的显示装置200的形状调整匹配一图像处理,该装置包括检测装置10和计算装置20,以及图像处理装置30。
因此,装置100可提供具有经调整匹配的图像投影的、经改进的摄像机全景环视系统。
检测装置10设置用于,对显示装置200的形状,摄像机的至少一个外部摄像机参数,摄像机的至少一个固有摄像机参数,以及至少一个摄像机视域进行检测。
计算装置20设置用于,基于检测到的显示装置200的形状,以及基于至少一个外部摄像机参数、至少一个固有摄像机参数和至少一个视域,计算一重投影面积和匹配表。
图像处理装置30设置用于,基于计算得到的重投影面积和计算得到的匹配表,执行一经调整匹配的图像处理。
图2以一示意图的方式说明基于一根据本发明另一实施例所述机动车辆用的显示装置形状,调整匹配一图像处理的方法流程图。
基于机动车辆显示装置200的形状调整匹配图像处理的方法包括以下方法步骤:
作为第一方法步骤借助检测装置10对显示装置200的形状进行检测S1。
作为第二方法步骤借助检测装置10对外部摄像机参数、固有摄像机参数以及至少一个摄像机视域进行检测S2。
作为第三方法步骤,借助计算装置20基于检测到的显示装置200的形状以及基于至少一个外部摄像机参数、至少一个固有摄像机参数、以及至少一个摄像机视域对一重投影面积和匹配表进行计算S3。
作为第四方法步骤,借助图像处理装置30基于计算得到的重投影面积和计算得到的匹配表执行S4经调整匹配的图像处理。
图3以示意图的方式说明,基于一根据本发明另一实施例所述机动车辆用的显示装置200的形状调整匹配一图像处理的方法。
图4以一示意图方式示出了根据本发明另一实施例的、摄像机重投影与显示屏形状矫正的模拟。
虽然本发明已根据优选实施例作了如上说明,但它并不局限于此,还可以许多方式进行修改。尤其是,本发明可在不脱离本发明实质前提下以许多方式进行更改或改进。
在此需要补充指出的是,“包含”和“具有”不排除其他元素或步骤,而“一”并不排除多数。
此外还应指出,引用上述实施例之一所述特征或步骤,也可与上述其他实施例的其他特征或步骤组合使用。权利要求中的附图标记不得被视为限制。
Claims (10)
1.一种用于基于机动车辆用显示装置(200)的形状调整匹配图像处理的装置(100),该装置(100)包括:
检测装置(10),该检测装置设置用于,对显示装置(200)的形状和摄像机的外部摄像机参数、摄像机的固有摄像机参数以及摄像机的至少一个视域进行检测;以及
计算装置(20),该计算装置设置用于,基于检测到的显示装置(200)的形状,以及基于外部摄像机参数、固有摄像机参数和至少一个视域,计算一重投影面积和匹配表;以及
图像数据处理装置(30),该图像数据处理装置设置用于,基于计算得到的重投影面积和计算得到的匹配表,执行经调整匹配的图像处理。
2.根据权利要求1所述的装置,其中,检测装置(10)设置用于,检测机动车辆A柱的显示装置(200)的形状。
3.根据权利要求1或2所述的装置,其中,计算装置(20)设置用于,计算重投影面积,以补偿显示装置(200)的弯曲。
4.根据上述权利要求中任一项所述的装置,其中,计算装置(20)设置用于,基于一投影的显示栅格计算重投影面积。
5.根据权利要求4所述的装置,其中,计算装置(20)设置用于,在视域的一分区上生成投影的显示栅格。
6.一种用于基于机动车辆的显示装置(200)的形状调整匹配图像处理的方法,该方法包括以下方法步骤:
借助检测装置(10)检测(S1)显示装置(200)的形状;以及
借助检测装置(10)对外部摄像机参数、固有摄像机参数以及至少一个摄像机视域进行检测(S2),以及
借助计算机装置(20)基于检测到的显示装置(200)形状,以及基于外部摄像机参数、固有摄像机参数和摄像机的至少一个视域,计算(S3)一重投影面积和匹配表;以及
借助图像处理装置(30)基于计算得到的重投影面积和计算得到的匹配表执行(S4)经调整匹配的图像处理。
7.根据权利要求6所述的方法,其中,检测机动车辆A柱的显示装置(200)的形状。
8.根据权利要求6或7所述的方法,其中,计算重投影面积,以补偿显示装置(200)的弯曲。
9.根据上述权利要求6至8中任一项所述的方法,其中,基于投影的显示栅格计算重投影面积。
10.根据权利要求9所述的方法,其中,在视域的一分区上生成投影的显示栅格。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017216822.6 | 2017-09-22 | ||
DE102017216822.6A DE102017216822A1 (de) | 2017-09-22 | 2017-09-22 | Vorrichtung und Verfahren zum Anpassen einer Bildverarbeitung basierend auf einer Form einer Anzeigeneinrichtung für ein Kraftfahrzeug |
PCT/DE2018/200082 WO2019057253A1 (de) | 2017-09-22 | 2018-09-04 | Vorrichtung und verfahren zum anpassen einer bildverarbeitung basierend auf einer form einer anzeigeneinrichtung für ein kraftfahrzeug |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110720112A true CN110720112A (zh) | 2020-01-21 |
Family
ID=63637608
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880038313.2A Pending CN110720112A (zh) | 2017-09-22 | 2018-09-04 | 基于机动车辆显示装置的形状调整匹配图像处理的装置和方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10832372B2 (zh) |
EP (1) | EP3685348A1 (zh) |
JP (1) | JP2020534197A (zh) |
CN (1) | CN110720112A (zh) |
DE (2) | DE102017216822A1 (zh) |
WO (1) | WO2019057253A1 (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102007032527A1 (de) * | 2007-07-12 | 2008-02-21 | Daimler Ag | Bildverarbeitungsanordnung für ein Kraftfahrzeug |
JP2008102931A (ja) * | 2006-10-17 | 2008-05-01 | Seiko Epson Corp | 調整方法、システム、およびチップ |
JP2008174212A (ja) * | 2006-12-20 | 2008-07-31 | Aisin Aw Co Ltd | 運転支援方法及び運転支援装置 |
CN103583041A (zh) * | 2011-06-07 | 2014-02-12 | 罗伯特·博世有限公司 | 用于提供完整的车辆周围环境图像的车辆摄像机系统和方法 |
WO2015044280A1 (de) * | 2013-09-27 | 2015-04-02 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren und vorrichtung zur steuerung einer bilderzeugungseinrichtung eines head-up-displays |
CN105981376A (zh) * | 2014-01-24 | 2016-09-28 | 丰田自动车株式会社 | 驾驶辅助装置 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007000178A1 (de) * | 2005-06-29 | 2007-01-04 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zur verzerrungsfreien darstellung |
DE102007021230B4 (de) * | 2007-05-07 | 2021-02-11 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zur Kalibrierung einer Vielzahl von Projektionseinrichtungen |
EP2667615A1 (en) * | 2012-05-22 | 2013-11-27 | ST-Ericsson SA | Method and apparatus for removing distortions when projecting images on real surfaces |
DE102013220477B4 (de) * | 2013-10-10 | 2021-07-01 | Application Solutions (Electronics and Vision) Ltd. | Verfahren und Vorrichtung zur Korrektur einer bildlichen Darstellung einer Fahrzeugumgebung |
US9915857B2 (en) * | 2013-12-09 | 2018-03-13 | Geo Semiconductor Inc. | System and method for automated test-pattern-free projection calibration |
JP6232994B2 (ja) * | 2013-12-16 | 2017-11-22 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
US9654687B2 (en) * | 2014-12-24 | 2017-05-16 | Agamemnon Varonos | Panoramic windshield viewer system |
DE102015202863A1 (de) | 2015-02-17 | 2016-08-18 | Conti Temic Microelectronic Gmbh | Verfahren und Vorrichtung zum verzerrungsfreien Anzeigen einer Fahrzeugumgebung eines Fahrzeuges |
US9811932B2 (en) * | 2015-04-17 | 2017-11-07 | Nxp Usa, Inc. | Display controller, heads-up image display system and method thereof |
US10572753B2 (en) * | 2015-11-25 | 2020-02-25 | Hitachi, Ltd. | Outside recognition device for vehicle |
-
2017
- 2017-09-22 DE DE102017216822.6A patent/DE102017216822A1/de not_active Withdrawn
-
2018
- 2018-09-04 WO PCT/DE2018/200082 patent/WO2019057253A1/de unknown
- 2018-09-04 DE DE112018003494.1T patent/DE112018003494A5/de active Pending
- 2018-09-04 CN CN201880038313.2A patent/CN110720112A/zh active Pending
- 2018-09-04 EP EP18772724.3A patent/EP3685348A1/de active Pending
- 2018-09-04 US US16/614,859 patent/US10832372B2/en active Active
- 2018-09-04 JP JP2019555475A patent/JP2020534197A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008102931A (ja) * | 2006-10-17 | 2008-05-01 | Seiko Epson Corp | 調整方法、システム、およびチップ |
JP2008174212A (ja) * | 2006-12-20 | 2008-07-31 | Aisin Aw Co Ltd | 運転支援方法及び運転支援装置 |
DE102007032527A1 (de) * | 2007-07-12 | 2008-02-21 | Daimler Ag | Bildverarbeitungsanordnung für ein Kraftfahrzeug |
CN103583041A (zh) * | 2011-06-07 | 2014-02-12 | 罗伯特·博世有限公司 | 用于提供完整的车辆周围环境图像的车辆摄像机系统和方法 |
WO2015044280A1 (de) * | 2013-09-27 | 2015-04-02 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren und vorrichtung zur steuerung einer bilderzeugungseinrichtung eines head-up-displays |
CN105981376A (zh) * | 2014-01-24 | 2016-09-28 | 丰田自动车株式会社 | 驾驶辅助装置 |
Also Published As
Publication number | Publication date |
---|---|
US20200111191A1 (en) | 2020-04-09 |
DE102017216822A1 (de) | 2019-03-28 |
US10832372B2 (en) | 2020-11-10 |
DE112018003494A5 (de) | 2020-04-09 |
JP2020534197A (ja) | 2020-11-26 |
WO2019057253A1 (de) | 2019-03-28 |
EP3685348A1 (de) | 2020-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9811932B2 (en) | Display controller, heads-up image display system and method thereof | |
US8675041B2 (en) | Vehicle periphery monitoring device | |
JP5108605B2 (ja) | 運転支援システム及び車両 | |
US9813619B2 (en) | Apparatus and method for correcting image distortion of a camera for vehicle | |
US9183449B2 (en) | Apparatus and method for detecting obstacle | |
JP2009017020A (ja) | 画像処理装置及び表示画像生成方法 | |
US9387804B2 (en) | Image distortion compensating apparatus and operating method thereof | |
US8837858B2 (en) | Apparatus and method for correcting image distortion of rear camera | |
WO2009116590A1 (ja) | 縞模様検知システム、縞模様検知方法および縞模様検知用プログラム | |
CN111667414A (zh) | 图像畸变校正方法及计算机可读存储介质 | |
CN110347356A (zh) | 图像局部区域打印方法、装置及存储介质 | |
US20200242391A1 (en) | Object detection apparatus, object detection method, and computer-readable recording medium | |
US20120106868A1 (en) | Apparatus and method for image correction | |
CN111353951A (zh) | 电路装置、电子设备以及移动体 | |
JP5155204B2 (ja) | 白線検出装置 | |
US11458892B2 (en) | Image generation device and image generation method for generating a composite image | |
CN110720112A (zh) | 基于机动车辆显示装置的形状调整匹配图像处理的装置和方法 | |
CN107636723B (zh) | 产生车辆的车辆周围环境的整体图像的方法及相应的设备 | |
US20220408062A1 (en) | Display control apparatus, display control method, and program | |
EP2487651A1 (en) | Method for operating a camera system in a motor vehicle, camera system and motor vehicle | |
JP6855254B2 (ja) | 画像処理装置、画像処理システム、及び、画像処理方法 | |
CN114663521A (zh) | 一种用于辅助泊车的环视拼接处理方法 | |
CN113330480A (zh) | 模块化图像修复方法 | |
US20150156391A1 (en) | Vehicle image correction system and method thereof | |
CN105046645B (zh) | 透视图像的逆变换方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |