JP2020534197A - 動力車両用の表示手段の形状に基づいた画像処理を適合させるための装置と方法 - Google Patents
動力車両用の表示手段の形状に基づいた画像処理を適合させるための装置と方法 Download PDFInfo
- Publication number
- JP2020534197A JP2020534197A JP2019555475A JP2019555475A JP2020534197A JP 2020534197 A JP2020534197 A JP 2020534197A JP 2019555475 A JP2019555475 A JP 2019555475A JP 2019555475 A JP2019555475 A JP 2019555475A JP 2020534197 A JP2020534197 A JP 2020534197A
- Authority
- JP
- Japan
- Prior art keywords
- shape
- camera
- image processing
- display means
- calculated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 30
- 238000000034 method Methods 0.000 title claims description 21
- 238000004364 calculation method Methods 0.000 claims abstract description 11
- 238000012937 correction Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 239000000446 fuel Substances 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/08—Projecting images onto non-planar surfaces, e.g. geodetic screens
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/20—Optical features of instruments
- B60K2360/21—Optical features of instruments using cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/23—Head-up displays [HUD]
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/80—Arrangements for controlling instruments
- B60K35/81—Arrangements for controlling instruments for controlling displays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30268—Vehicle interior
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Closed-Circuit Television Systems (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Image Processing (AREA)
- Instrument Panels (AREA)
- Image Analysis (AREA)
Abstract
Description
Claims (10)
- 動力車両用の表示手段(200)の形状に基づいた画像処理を適合させるための装置(100)であって、
以下を包含していることを特徴とする装置(100):
・ 表示手段(200)の形状、及び、カメラの一つの外在的カメラパラメータ、カメラの一つの内在的カメラパラメータ、並びに、カメラの少なくとも一つの視野を捕捉する様に構成されている捕捉手段(10);並びに、
・ 捕捉された表示手段(200)の形状、及び、外在的カメラパラメータ、内在的カメラパラメータ、並びに、少なくとも一つの視野に基づいて、再投影面と対応表を算出する様に構成されている計算手段(20);並びに、
・ 算出された再投影面と算出された対応表に基づいて、適合された画像処理を実施する様に構成されている画像処理手段(30)。 - 捕捉手段(10)が、動力車両のAピラーの表示手段(200)の形状を、捕捉できる様に構成されていることを特徴とする請求項1に記載の装置。
- 計算手段(20)が、表示手段(200)の湾曲を相殺するために再投影面を算出する様に構成されていることを特徴とする請求項1乃至2に記載の装置。
- 計算手段(20)が、再投影面を、投影されている表示グリッドに基づいて算出できる様に構成されていることを特徴とする先行請求項のうち何れか一項に記載の装置。
- 計算手段(20)が、投影される表示グリッドを、視野の部分面上に生成することがきる様に構成されていることを特徴とする請求項4に記載の装置。
- 動力車両用の表示手段(200)の形状に基づいた画像処理を適合させるための方法であって、
以下の方法ステップを包含していることを特徴とする方法:
・ 表示ユニット(200)の形状を捕捉手段(10)を用いて捕捉するステップ(S1);並びに、
・ 外在的カメラパラメータと内在的カメラパラメータ、並びに、カメラの少なくとも一つの視野を、捕捉手段(10)を用いて捕捉するステップ(S2);並びに、
・ 捕捉された表示手段(200)の形状に基づいて、更に、外材的カメラパラメータ、内在的カメラパラメータ、並びに、カメラの少なくとも一つの視野に基づいて、再投影面と対応表を、計算手段(20)を用いて算出するステップ(S3);並びに、
・ 算出された再投影面と算出てされた対応表に基づいた適合された画像処理を、画像処理手段(30)を用いて実行するステップ(S4)。 - 動力車両のAピラーの表示手段(200)の形状を、捕捉することを特徴とする請求項6に記載の方法。
- 表示手段(200)の湾曲を相殺するために再投影面を算出することを特徴とする請求項6乃至7に記載の方法。
- 再投影面が、投影されている表示グリッドに基づいて算出されることを特徴とする請求項6から8のうち何れか一項に記載の方法。
- 投影される表示グリッドが、視野の部分面上に、生成されることを特徴とする請求項9に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017216822.6 | 2017-09-22 | ||
DE102017216822.6A DE102017216822A1 (de) | 2017-09-22 | 2017-09-22 | Vorrichtung und Verfahren zum Anpassen einer Bildverarbeitung basierend auf einer Form einer Anzeigeneinrichtung für ein Kraftfahrzeug |
PCT/DE2018/200082 WO2019057253A1 (de) | 2017-09-22 | 2018-09-04 | Vorrichtung und verfahren zum anpassen einer bildverarbeitung basierend auf einer form einer anzeigeneinrichtung für ein kraftfahrzeug |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020534197A true JP2020534197A (ja) | 2020-11-26 |
Family
ID=63637608
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019555475A Pending JP2020534197A (ja) | 2017-09-22 | 2018-09-04 | 動力車両用の表示手段の形状に基づいた画像処理を適合させるための装置と方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10832372B2 (ja) |
EP (1) | EP3685348A1 (ja) |
JP (1) | JP2020534197A (ja) |
CN (1) | CN110720112A (ja) |
DE (2) | DE102017216822A1 (ja) |
WO (1) | WO2019057253A1 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008102931A (ja) * | 2006-10-17 | 2008-05-01 | Seiko Epson Corp | 調整方法、システム、およびチップ |
JP2008174212A (ja) * | 2006-12-20 | 2008-07-31 | Aisin Aw Co Ltd | 運転支援方法及び運転支援装置 |
JP2015119225A (ja) * | 2013-12-16 | 2015-06-25 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
US20160191794A1 (en) * | 2014-12-24 | 2016-06-30 | Agamemnon Varonos | Panoramic windshield viewer system |
WO2017090097A1 (ja) * | 2015-11-25 | 2017-06-01 | 株式会社日立製作所 | 車両用外界認識装置 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007000178A1 (de) | 2005-06-29 | 2007-01-04 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zur verzerrungsfreien darstellung |
DE102007021230B4 (de) * | 2007-05-07 | 2021-02-11 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zur Kalibrierung einer Vielzahl von Projektionseinrichtungen |
DE102007032527A1 (de) * | 2007-07-12 | 2008-02-21 | Daimler Ag | Bildverarbeitungsanordnung für ein Kraftfahrzeug |
DE102011077143A1 (de) * | 2011-06-07 | 2012-12-13 | Robert Bosch Gmbh | Fahrzeugkamerasystem und Verfahren zur Bereitstellung eines lückenlosen Bildes der Fahrzeugumgebung |
EP2667615A1 (en) * | 2012-05-22 | 2013-11-27 | ST-Ericsson SA | Method and apparatus for removing distortions when projecting images on real surfaces |
DE102013219556A1 (de) * | 2013-09-27 | 2015-04-02 | Continental Automotive Gmbh | Verfahren und Vorrichtung zur Steuerung einer Bilderzeugungseinrichtung eines Head-Up-Displays |
DE102013220477B4 (de) * | 2013-10-10 | 2021-07-01 | Application Solutions (Electronics and Vision) Ltd. | Verfahren und Vorrichtung zur Korrektur einer bildlichen Darstellung einer Fahrzeugumgebung |
US9915857B2 (en) | 2013-12-09 | 2018-03-13 | Geo Semiconductor Inc. | System and method for automated test-pattern-free projection calibration |
JP6032219B2 (ja) * | 2014-01-24 | 2016-11-24 | トヨタ自動車株式会社 | 運転支援装置 |
DE102015202863A1 (de) * | 2015-02-17 | 2016-08-18 | Conti Temic Microelectronic Gmbh | Verfahren und Vorrichtung zum verzerrungsfreien Anzeigen einer Fahrzeugumgebung eines Fahrzeuges |
US9811932B2 (en) * | 2015-04-17 | 2017-11-07 | Nxp Usa, Inc. | Display controller, heads-up image display system and method thereof |
-
2017
- 2017-09-22 DE DE102017216822.6A patent/DE102017216822A1/de not_active Withdrawn
-
2018
- 2018-09-04 US US16/614,859 patent/US10832372B2/en active Active
- 2018-09-04 WO PCT/DE2018/200082 patent/WO2019057253A1/de unknown
- 2018-09-04 JP JP2019555475A patent/JP2020534197A/ja active Pending
- 2018-09-04 EP EP18772724.3A patent/EP3685348A1/de active Pending
- 2018-09-04 CN CN201880038313.2A patent/CN110720112A/zh active Pending
- 2018-09-04 DE DE112018003494.1T patent/DE112018003494A5/de active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008102931A (ja) * | 2006-10-17 | 2008-05-01 | Seiko Epson Corp | 調整方法、システム、およびチップ |
JP2008174212A (ja) * | 2006-12-20 | 2008-07-31 | Aisin Aw Co Ltd | 運転支援方法及び運転支援装置 |
JP2015119225A (ja) * | 2013-12-16 | 2015-06-25 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
US20160191794A1 (en) * | 2014-12-24 | 2016-06-30 | Agamemnon Varonos | Panoramic windshield viewer system |
WO2017090097A1 (ja) * | 2015-11-25 | 2017-06-01 | 株式会社日立製作所 | 車両用外界認識装置 |
Also Published As
Publication number | Publication date |
---|---|
EP3685348A1 (de) | 2020-07-29 |
DE102017216822A1 (de) | 2019-03-28 |
US20200111191A1 (en) | 2020-04-09 |
WO2019057253A1 (de) | 2019-03-28 |
DE112018003494A5 (de) | 2020-04-09 |
US10832372B2 (en) | 2020-11-10 |
CN110720112A (zh) | 2020-01-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4924896B2 (ja) | 車両の周辺監視装置 | |
EP2009590B1 (en) | Drive assistance device | |
JPWO2010024402A1 (ja) | 画像処理装置および方法、ならびに、画像表示装置 | |
US10904432B2 (en) | Panoramic view system for a vehicle | |
WO2014033886A1 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US10939081B2 (en) | Image processing apparatus, image processing method, and storage medium | |
JP2020513702A (ja) | 車両用のマルチカメラシステムの画像データを融合するための装置及び方法 | |
JP2010244326A (ja) | 車載周辺画像表示装置 | |
JP2015186085A (ja) | 移動量導出装置、及び、移動量導出方法 | |
JP2018509799A5 (ja) | ||
JP2008312099A (ja) | 投影画像補正装置及び投影装置 | |
JP2024041895A (ja) | モジュール式画像補間方法 | |
JP5020792B2 (ja) | 合成画像生成装置および合成画像生成方法 | |
JP2020534197A (ja) | 動力車両用の表示手段の形状に基づいた画像処理を適合させるための装置と方法 | |
KR101488636B1 (ko) | 투시변환을 이용한 탑뷰 주차 지원 시스템 및 그 방법 | |
US10943334B2 (en) | Method and system for representation of vehicle surroundings with reduced artefacts | |
JP2015088029A (ja) | 放射歪み補正装置、道路環境認識装置、放射歪み補正方法およびプログラム | |
US8611700B2 (en) | Distance map-based warping of binary images | |
JP2010250560A5 (ja) | ||
JP2013074539A5 (ja) | ||
WO2020137583A1 (ja) | 画像生成装置及び画像表示システム | |
JP2020520563A (ja) | 車両用サラウンドビューシステム | |
JP2007249392A (ja) | 車両周辺視認装置 | |
JP2007028443A (ja) | 画像表示システム | |
JP2011257940A (ja) | 逆変換テーブル生成方法、逆変換テーブル生成プログラム、画像変換装置、画像変換方法、及び画像変換プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20200707 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210820 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220624 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220629 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220816 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20221130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230323 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20230323 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20230331 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20230405 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20230512 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20231222 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240201 |