CN110720112A - 基于机动车辆显示装置的形状调整匹配图像处理的装置和方法 - Google Patents

基于机动车辆显示装置的形状调整匹配图像处理的装置和方法 Download PDF

Info

Publication number
CN110720112A
CN110720112A CN201880038313.2A CN201880038313A CN110720112A CN 110720112 A CN110720112 A CN 110720112A CN 201880038313 A CN201880038313 A CN 201880038313A CN 110720112 A CN110720112 A CN 110720112A
Authority
CN
China
Prior art keywords
display device
shape
image processing
camera
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880038313.2A
Other languages
English (en)
Inventor
D·塞伦斯基
M·弗里贝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Conti-Temik Microelectronics Co Ltd
Conti Temic Microelectronic GmbH
Continental Automotive GmbH
Original Assignee
Conti-Temik Microelectronics Co Ltd
Continental Automotive GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Conti-Temik Microelectronics Co Ltd, Continental Automotive GmbH filed Critical Conti-Temik Microelectronics Co Ltd
Publication of CN110720112A publication Critical patent/CN110720112A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G06T3/08
    • G06T5/80
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Arrangement of adaptations of instruments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • B60K2360/21
    • B60K35/23
    • B60K35/81
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30268Vehicle interior

Abstract

本发明涉及一种用于基于一机动车辆用显示装置的一形状调整匹配一图像处理的装置,该装置(1)包括:一个检测装置(10),它设置用于,对一显示装置(200)的一种形状,一摄像机的一外部摄像机参数,摄像机的一固有摄像机参数,以及至少一个摄像机视域进行检测。一个计算装置(20),它设置用于,基于检测到的显示装置形状,以及基于至少一个外部摄像机参数、至少一个固有摄像机参数和至少一个摄像机视域计算一重投影面积和匹配表;该装置还包括一图像处理装置(30),它设置用于,基于计算得到的重投影面积和计算得到的匹配表执行一经调整匹配的图像处理。

Description

基于机动车辆显示装置的形状调整匹配图像处理的装置和 方法
技术领域
本发明涉及机动车辆中的图像处理和显示系统。
本发明尤其涉及一种基于机动车辆显示装置的形状调整匹配图像处理的装置和方法。
背景技术
在当前用于机动车辆或周围环境显示系统的、英语也称“Surround-View-Systems(全景环视系统)”的全视野图像处理功能中,不接收或考虑显示屏或显示装置的形状。然而,显示屏或显示装置的形状对可视化显示质量具有很大影响。
在此,也可能出现其他活动的汽车部件,例如侧门或后门以及燃料箱盖等的可见重投影的不利影响。
发明内容
本发明的一项任务是,为驾驶员辅助系统提供一种经改进的机动车辆全视野或周围环境显示。
该任务是通过独立权利要求的主题解决的。其他结构形式和实施方式请参见从属权利要求、说明书以及附图。
本发明的第一方面涉及一种用于基于机动车辆显示装置的形状调整匹配图像处理的装置。
用于基于机动车辆显示装置的形状调整匹配图像处理的装置包括检测装置,该检测装置设置用于,对显示装置的形状和摄像机外部摄像机参数、摄像机固有摄像机参数以及摄像机的至少一个视域加以检测。
换句话说,检测装置设置用于,检测摄像机的外部摄像机参数和摄像机的固有摄像机参数,这可包括检测所有外部和固有摄像机参数。
该装置还包括计算装置,它设置用于,基于检测到的显示装置形状,以及基于外部摄像机参数、固有摄像机参数和至少一个视域,计算重投影面积和匹配表。
该装置还包括图像处理装置,它设置用于,基于计算得到的重投影面积和计算得到的匹配表执行一经调整匹配的图像处理。
本发明所使用术语显示装置的“形状”在此包括,例如显示装置表面的形状,例如显示屏宽度上弯曲的曲线。
本发明有益的设计方案请参见从属权利要求。
在本发明一有益的实施方式中规定,检测装置设置用于,检测机动车辆A柱的显示装置形状。
在本发明一有益的实施方式中规定,计算装置设置用于,计算重投影面积,以补偿显示装置的弯曲。
这能实现的优点是,改善周围环境场景的显示质量,并避免所显示图像信息的图像失真。
在本发明一有益的实施方式中规定,计算装置设置用于,基于投影的显示栅格计算重投影面积。
在本发明一有益的实施方式中规定,计算装置设置用于,在视域的一分区上生成投影的显示栅格。
在本发明一有益的实施方式中规定,检测机动车辆A柱的显示装置形状。
在本发明一有益的实施方式中规定,计算重投影面积,以补偿显示装置的弯曲。
在本发明一有益的实施方式中规定,基于投影的显示栅格计算重投影面积。
在本发明一有益的实施方式中规定,在视域的一分区上生成投影的显示栅格。
所述设计方案和其他结构形式彼此可任意组合。
本发明其他可能的设计方案、其他结构形式和实施也包括之前或之后本发明相关实施方式特征未明确说明的组合。
附图说明
附图旨在帮助进一步理解本发明实施方式。
附图对实施方式进行了说明,并与说明一起用于解释本发明的构思。
鉴于附图得出其他实施方式和许多所述优点。附图所示元素之间没有必要完全按比例显示。
各图简要说明
其中:
图1以一示意图方式示出了基于根据本发明一实施例所述机动车辆显示装置的形状调整匹配一图像处理的装置;
图2以一示意图方式示出了基于根据本发明另一实施例所述机动车辆用的显示装置形状调整匹配一图像处理的一种方法流程图;以及
图3以示意图方式示出了基于一根据本发明另一实施例所述机动车辆用的显示装置形状调整匹配一图像处理的一种方法;
图4以一示意图方式示出了根据本发明另一实施例所述摄像机重投影与显示屏形状的图像失真的一种模拟。
具体实施方式
在附图中,除非另有说明,相同的附图标记说明相同或功能相同的元件、部件、组件或方法步骤。
机动车辆或车辆是指例如汽车或混合动力车辆,例如具有航行功能的混合动力车辆,例如一摩托车,一巴士,一卡车或一自行车。
图1以示意图的方式说明基于根据本发明一实施例所述机动车辆用显示装置的形状调整匹配一图像处理的装置。
装置100用于基于机动车辆的显示装置200的形状调整匹配一图像处理,该装置包括检测装置10和计算装置20,以及图像处理装置30。
因此,装置100可提供具有经调整匹配的图像投影的、经改进的摄像机全景环视系统。
检测装置10设置用于,对显示装置200的形状,摄像机的至少一个外部摄像机参数,摄像机的至少一个固有摄像机参数,以及至少一个摄像机视域进行检测。
计算装置20设置用于,基于检测到的显示装置200的形状,以及基于至少一个外部摄像机参数、至少一个固有摄像机参数和至少一个视域,计算一重投影面积和匹配表。
图像处理装置30设置用于,基于计算得到的重投影面积和计算得到的匹配表,执行一经调整匹配的图像处理。
图2以一示意图的方式说明基于一根据本发明另一实施例所述机动车辆用的显示装置形状,调整匹配一图像处理的方法流程图。
基于机动车辆显示装置200的形状调整匹配图像处理的方法包括以下方法步骤:
作为第一方法步骤借助检测装置10对显示装置200的形状进行检测S1。
作为第二方法步骤借助检测装置10对外部摄像机参数、固有摄像机参数以及至少一个摄像机视域进行检测S2。
作为第三方法步骤,借助计算装置20基于检测到的显示装置200的形状以及基于至少一个外部摄像机参数、至少一个固有摄像机参数、以及至少一个摄像机视域对一重投影面积和匹配表进行计算S3。
作为第四方法步骤,借助图像处理装置30基于计算得到的重投影面积和计算得到的匹配表执行S4经调整匹配的图像处理。
图3以示意图的方式说明,基于一根据本发明另一实施例所述机动车辆用的显示装置200的形状调整匹配一图像处理的方法。
图4以一示意图方式示出了根据本发明另一实施例的、摄像机重投影与显示屏形状矫正的模拟。
虽然本发明已根据优选实施例作了如上说明,但它并不局限于此,还可以许多方式进行修改。尤其是,本发明可在不脱离本发明实质前提下以许多方式进行更改或改进。
在此需要补充指出的是,“包含”和“具有”不排除其他元素或步骤,而“一”并不排除多数。
此外还应指出,引用上述实施例之一所述特征或步骤,也可与上述其他实施例的其他特征或步骤组合使用。权利要求中的附图标记不得被视为限制。

Claims (10)

1.一种用于基于机动车辆用显示装置(200)的形状调整匹配图像处理的装置(100),该装置(100)包括:
检测装置(10),该检测装置设置用于,对显示装置(200)的形状和摄像机的外部摄像机参数、摄像机的固有摄像机参数以及摄像机的至少一个视域进行检测;以及
计算装置(20),该计算装置设置用于,基于检测到的显示装置(200)的形状,以及基于外部摄像机参数、固有摄像机参数和至少一个视域,计算一重投影面积和匹配表;以及
图像数据处理装置(30),该图像数据处理装置设置用于,基于计算得到的重投影面积和计算得到的匹配表,执行经调整匹配的图像处理。
2.根据权利要求1所述的装置,其中,检测装置(10)设置用于,检测机动车辆A柱的显示装置(200)的形状。
3.根据权利要求1或2所述的装置,其中,计算装置(20)设置用于,计算重投影面积,以补偿显示装置(200)的弯曲。
4.根据上述权利要求中任一项所述的装置,其中,计算装置(20)设置用于,基于一投影的显示栅格计算重投影面积。
5.根据权利要求4所述的装置,其中,计算装置(20)设置用于,在视域的一分区上生成投影的显示栅格。
6.一种用于基于机动车辆的显示装置(200)的形状调整匹配图像处理的方法,该方法包括以下方法步骤:
借助检测装置(10)检测(S1)显示装置(200)的形状;以及
借助检测装置(10)对外部摄像机参数、固有摄像机参数以及至少一个摄像机视域进行检测(S2),以及
借助计算机装置(20)基于检测到的显示装置(200)形状,以及基于外部摄像机参数、固有摄像机参数和摄像机的至少一个视域,计算(S3)一重投影面积和匹配表;以及
借助图像处理装置(30)基于计算得到的重投影面积和计算得到的匹配表执行(S4)经调整匹配的图像处理。
7.根据权利要求6所述的方法,其中,检测机动车辆A柱的显示装置(200)的形状。
8.根据权利要求6或7所述的方法,其中,计算重投影面积,以补偿显示装置(200)的弯曲。
9.根据上述权利要求6至8中任一项所述的方法,其中,基于投影的显示栅格计算重投影面积。
10.根据权利要求9所述的方法,其中,在视域的一分区上生成投影的显示栅格。
CN201880038313.2A 2017-09-22 2018-09-04 基于机动车辆显示装置的形状调整匹配图像处理的装置和方法 Pending CN110720112A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102017216822.6 2017-09-22
DE102017216822.6A DE102017216822A1 (de) 2017-09-22 2017-09-22 Vorrichtung und Verfahren zum Anpassen einer Bildverarbeitung basierend auf einer Form einer Anzeigeneinrichtung für ein Kraftfahrzeug
PCT/DE2018/200082 WO2019057253A1 (de) 2017-09-22 2018-09-04 Vorrichtung und verfahren zum anpassen einer bildverarbeitung basierend auf einer form einer anzeigeneinrichtung für ein kraftfahrzeug

Publications (1)

Publication Number Publication Date
CN110720112A true CN110720112A (zh) 2020-01-21

Family

ID=63637608

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880038313.2A Pending CN110720112A (zh) 2017-09-22 2018-09-04 基于机动车辆显示装置的形状调整匹配图像处理的装置和方法

Country Status (6)

Country Link
US (1) US10832372B2 (zh)
EP (1) EP3685348A1 (zh)
JP (1) JP2020534197A (zh)
CN (1) CN110720112A (zh)
DE (2) DE102017216822A1 (zh)
WO (1) WO2019057253A1 (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007032527A1 (de) * 2007-07-12 2008-02-21 Daimler Ag Bildverarbeitungsanordnung für ein Kraftfahrzeug
JP2008102931A (ja) * 2006-10-17 2008-05-01 Seiko Epson Corp 調整方法、システム、およびチップ
JP2008174212A (ja) * 2006-12-20 2008-07-31 Aisin Aw Co Ltd 運転支援方法及び運転支援装置
CN103583041A (zh) * 2011-06-07 2014-02-12 罗伯特·博世有限公司 用于提供完整的车辆周围环境图像的车辆摄像机系统和方法
WO2015044280A1 (de) * 2013-09-27 2015-04-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren und vorrichtung zur steuerung einer bilderzeugungseinrichtung eines head-up-displays
CN105981376A (zh) * 2014-01-24 2016-09-28 丰田自动车株式会社 驾驶辅助装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007000178A1 (de) * 2005-06-29 2007-01-04 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur verzerrungsfreien darstellung
DE102007021230B4 (de) * 2007-05-07 2021-02-11 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Kalibrierung einer Vielzahl von Projektionseinrichtungen
EP2667615A1 (en) * 2012-05-22 2013-11-27 ST-Ericsson SA Method and apparatus for removing distortions when projecting images on real surfaces
DE102013220477B4 (de) * 2013-10-10 2021-07-01 Application Solutions (Electronics and Vision) Ltd. Verfahren und Vorrichtung zur Korrektur einer bildlichen Darstellung einer Fahrzeugumgebung
US9915857B2 (en) * 2013-12-09 2018-03-13 Geo Semiconductor Inc. System and method for automated test-pattern-free projection calibration
JP6232994B2 (ja) * 2013-12-16 2017-11-22 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
US9654687B2 (en) * 2014-12-24 2017-05-16 Agamemnon Varonos Panoramic windshield viewer system
DE102015202863A1 (de) 2015-02-17 2016-08-18 Conti Temic Microelectronic Gmbh Verfahren und Vorrichtung zum verzerrungsfreien Anzeigen einer Fahrzeugumgebung eines Fahrzeuges
US9811932B2 (en) * 2015-04-17 2017-11-07 Nxp Usa, Inc. Display controller, heads-up image display system and method thereof
US10572753B2 (en) * 2015-11-25 2020-02-25 Hitachi, Ltd. Outside recognition device for vehicle

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008102931A (ja) * 2006-10-17 2008-05-01 Seiko Epson Corp 調整方法、システム、およびチップ
JP2008174212A (ja) * 2006-12-20 2008-07-31 Aisin Aw Co Ltd 運転支援方法及び運転支援装置
DE102007032527A1 (de) * 2007-07-12 2008-02-21 Daimler Ag Bildverarbeitungsanordnung für ein Kraftfahrzeug
CN103583041A (zh) * 2011-06-07 2014-02-12 罗伯特·博世有限公司 用于提供完整的车辆周围环境图像的车辆摄像机系统和方法
WO2015044280A1 (de) * 2013-09-27 2015-04-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren und vorrichtung zur steuerung einer bilderzeugungseinrichtung eines head-up-displays
CN105981376A (zh) * 2014-01-24 2016-09-28 丰田自动车株式会社 驾驶辅助装置

Also Published As

Publication number Publication date
US20200111191A1 (en) 2020-04-09
DE102017216822A1 (de) 2019-03-28
US10832372B2 (en) 2020-11-10
DE112018003494A5 (de) 2020-04-09
JP2020534197A (ja) 2020-11-26
WO2019057253A1 (de) 2019-03-28
EP3685348A1 (de) 2020-07-29

Similar Documents

Publication Publication Date Title
US9811932B2 (en) Display controller, heads-up image display system and method thereof
US8675041B2 (en) Vehicle periphery monitoring device
JP5108605B2 (ja) 運転支援システム及び車両
US9813619B2 (en) Apparatus and method for correcting image distortion of a camera for vehicle
US9183449B2 (en) Apparatus and method for detecting obstacle
JP2009017020A (ja) 画像処理装置及び表示画像生成方法
US9387804B2 (en) Image distortion compensating apparatus and operating method thereof
US8837858B2 (en) Apparatus and method for correcting image distortion of rear camera
WO2009116590A1 (ja) 縞模様検知システム、縞模様検知方法および縞模様検知用プログラム
CN111667414A (zh) 图像畸变校正方法及计算机可读存储介质
CN110347356A (zh) 图像局部区域打印方法、装置及存储介质
US20200242391A1 (en) Object detection apparatus, object detection method, and computer-readable recording medium
US20120106868A1 (en) Apparatus and method for image correction
CN111353951A (zh) 电路装置、电子设备以及移动体
JP5155204B2 (ja) 白線検出装置
US11458892B2 (en) Image generation device and image generation method for generating a composite image
CN110720112A (zh) 基于机动车辆显示装置的形状调整匹配图像处理的装置和方法
CN107636723B (zh) 产生车辆的车辆周围环境的整体图像的方法及相应的设备
US20220408062A1 (en) Display control apparatus, display control method, and program
EP2487651A1 (en) Method for operating a camera system in a motor vehicle, camera system and motor vehicle
JP6855254B2 (ja) 画像処理装置、画像処理システム、及び、画像処理方法
CN114663521A (zh) 一种用于辅助泊车的环视拼接处理方法
CN113330480A (zh) 模块化图像修复方法
US20150156391A1 (en) Vehicle image correction system and method thereof
CN105046645B (zh) 透视图像的逆变换方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination