CN105405093A - 飞机驾驶舱视界增强系统和方法 - Google Patents

飞机驾驶舱视界增强系统和方法 Download PDF

Info

Publication number
CN105405093A
CN105405093A CN201510770666.XA CN201510770666A CN105405093A CN 105405093 A CN105405093 A CN 105405093A CN 201510770666 A CN201510770666 A CN 201510770666A CN 105405093 A CN105405093 A CN 105405093A
Authority
CN
China
Prior art keywords
image
camera head
frontal windshield
windshield column
occlusion area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510770666.XA
Other languages
English (en)
Other versions
CN105405093B (zh
Inventor
金鼎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Aircraft Design Research Institute Co ltd
Commercial Aircraft Corp of China Ltd
Original Assignee
Comac Shanghai Aircraft Design & Research Institute
Commercial Aircraft Corp of China Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Comac Shanghai Aircraft Design & Research Institute, Commercial Aircraft Corp of China Ltd filed Critical Comac Shanghai Aircraft Design & Research Institute
Priority to CN201510770666.XA priority Critical patent/CN105405093B/zh
Publication of CN105405093A publication Critical patent/CN105405093A/zh
Priority to PCT/CN2016/105141 priority patent/WO2017080444A1/zh
Priority to US15/578,136 priority patent/US10654590B2/en
Priority to EP16863620.7A priority patent/EP3291170B1/en
Application granted granted Critical
Publication of CN105405093B publication Critical patent/CN105405093B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/14—Transformations for image registration, e.g. adjusting or mapping for alignment of images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D47/00—Equipment not otherwise provided for
    • B64D47/08—Arrangements of cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/12—Edge-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/13—Edge detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G09F9/301—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements flexible foldable or roll-able electronic displays, e.g. thin LCD, OLED
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/202—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used displaying a blind spot scene on the vehicle part responsible for the blind spot
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及飞机驾驶舱视界增强系统和方法。飞机驾驶舱视界增强系统包括：正位、左位和右位摄像装置，正位摄像装置设置在驾驶员眼位点和飞机风挡立柱之间，拍摄角度正对飞机风挡立柱，左位和右位摄像装置分别设置在飞机风挡立柱的左侧和右侧，拍摄角度分别指向偏向飞机风挡立柱的右侧和左侧；图像处理装置，用于对正位摄像装置、左位摄像装置和右位摄像装置所拍摄的正位图像、左位图像和右位图像进行图像合成和图像匹准，获得飞机风挡立柱遮挡区域图像；显示装置，用于显示所获得的飞机风挡立柱遮挡区域图像。本发明的飞机驾驶舱视界增强系统和方法能起到以下有益技术效果：能精确显示风挡立柱遮挡区域图像，弥补风挡立柱对驾驶舱视界遮挡的弊端。

Description

飞机驾驶舱视界增强系统和方法
技术领域
本发明涉及飞机驾驶舱视界增强系统和方法，属于飞机总体技术领域。
背景技术
在设计民用飞机的驾驶舱时，需满足适航规章中的驾驶舱视界范围要求，由于飞机风挡立柱的存在势必对视界产生局部遮挡，因此适航规章提出了补充性说明，即驾驶员的头可左、右移动32mm(1.26英寸)，用双目视野尽可能地减少障碍对视野的影响。
基于上述情况，本发明考虑在风挡立柱内侧安装驾驶舱视界增强系统，使飞行员不需要移动头部就能看清被风挡立柱遮挡的景象，由此降低飞行员的负担，提高安全性。同时，也可以在驾驶舱其他需要的位置安装该系统，进一步增强飞行员的视界范围。
目前，与本发明接近的技术为2004年日本东京大学展示的一款“隐身衣”技术，该“隐身衣”上涂有一层回射性物质，还装配了照相机。使用时，将衣服后面的场景由照相机拍摄下来，然后将图像转换到衣服前面的放映机，再将图像投射到由特殊材料制成的衣料上，就能让穿着者看起来是透明人。由于在风挡立柱背面即驾驶舱外不适合摄像组件，因此该技术不适于在本发明所述范围使用。
发明内容
本发明的一个目的在于，提供一种飞机驾驶舱视界增强系统和方法，其可以精确地显示被风挡立柱遮挡区域的图像，弥补风挡立柱对驾驶舱视界遮挡的弊端。
本发明的以上目的通过一种飞机驾驶舱视界增强系统来实现，该飞机驾驶舱视界增强系统包括：
正位摄像装置、左位摄像装置和右位摄像装置，其中，所述正位摄像装置设置在驾驶员眼位点和飞机风挡立柱之间，所述正位摄像装置的拍摄角度正对所述飞机风挡立柱，所述左位摄像装置和所述右位摄像装置分别设置在所述飞机风挡立柱的左侧和右侧，所述左位摄像装置和所述右位摄像装置的拍摄角度分别指向偏向所述飞机风挡立柱的右侧和左侧；
图像处理装置，所述图像处理装置连接至所述正位摄像装置、所述左位摄像装置和所述右位摄像装置，以用于对所述正位摄像装置、所述左位摄像装置和所述右位摄像装置所拍摄的正位图像、左位图像和右位图像进行图像合成和图像匹准，获得飞机风挡立柱遮挡区域图像；
显示装置，所述显示装置连接至所述图像处理装置，以用于显示所获得的飞机风挡立柱遮挡区域图像。
根据上述技术方案，本发明的飞机驾驶舱视界增强系统能起到以下有益技术效果：能精确地显示被风挡立柱遮挡区域的图像，弥补风挡立柱对驾驶舱视界遮挡的弊端。
较佳的是，所述图像处理装置包括图像合成模块、边缘检测模块、图像匹准模块，其中，所述图像合成模块用于对所述左位图像和所述右位图像进行图像合成，以得到视角较大的合成图像，所述边缘检测模块用于对所述正位图像进行边缘检测，以得到飞机风挡立柱遮挡区域的边界，所述图像匹准模块用于对所得到的合成图像和正位图像进行图像匹准，并根据所得到的边界提取飞机风挡立柱遮挡区域图像。
根据上述技术方案，本发明的飞机驾驶舱视界增强系统能起到以下有益技术效果：能精确地提取飞机风挡立柱遮挡区域图像，从而进一步精确地显示被风挡立柱遮挡区域的图像。
较佳的是，所述图像处理装置还包括图像裁剪模块，所述图像裁剪模块用于根据实际视觉效果可调整地裁剪所述飞机风挡立柱遮挡区域图像。
根据上述技术方案，本发明的飞机驾驶舱视界增强系统能起到以下有益技术效果：能根据实际视觉效果可调整地裁剪飞机风挡立柱遮挡区域图像，从而进一步精确地显示被风挡立柱遮挡区域的图像。
较佳的是，所述图像处理装置还包括图像变形模块，所述图像变形模块用于根据所述飞机风挡立柱的形状对所述飞机风挡立柱遮挡区域图像进行图像变形处理，以使经图像变形处理的飞机风挡立柱遮挡区域图像适合于所述飞机风挡立柱的形状。
根据上述技术方案，本发明的飞机驾驶舱视界增强系统能起到以下有益技术效果：能使得飞机风挡立柱遮挡区域图像适合于飞机风挡立柱的形状，从而进一步精确地显示被风挡立柱遮挡区域的图像。
较佳的是，所述显示装置是柔性薄膜显示装置，所述柔性薄膜显示装置贴覆在所述飞机风挡立柱的内侧。
根据上述技术方案，本发明的飞机驾驶舱视界增强系统能起到以下有益技术效果：柔性薄膜显示装置能使得飞机风挡立柱遮挡区域图像适合于飞机风挡立柱的形状，从而进一步精确地显示被风挡立柱遮挡区域的图像。
本发明的以上目的还通过一种飞机驾驶舱视界增强方法来实现，该飞机驾驶舱视界增强方法包括：
利用正位摄像装置、左位摄像装置和右位摄像装置分别拍摄正位图像、左位图像和右位图像，其中，所述正位摄像装置设置在驾驶员眼位点和飞机风挡立柱之间，所述正位摄像装置的拍摄角度正对所述飞机风挡立柱，所述左位摄像装置和所述右位摄像装置分别设置在所述飞机风挡立柱的左侧和右侧，所述左位摄像装置和所述右位摄像装置的拍摄角度分别指向偏向所述飞机风挡立柱的右侧和左侧；
利用图像处理装置对所述正位图像、所述左位图像和所述右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像；
利用显示装置显示所获得的飞机风挡立柱遮挡区域图像。
根据上述技术方案，本发明的飞机驾驶舱视界增强方法能起到以下有益技术效果：能精确地显示被风挡立柱遮挡区域的图像，弥补风挡立柱对驾驶舱视界遮挡的弊端。
较佳的是，利用图像处理装置对所述正位图像、所述左位图像和所述右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像包括：对所述左位图像和所述右位图像进行图像合成，以得到视角较大的合成图像；对所述正位图像进行边缘检测，以得到飞机风挡立柱遮挡区域的边界；对所得到的合成图像和正位图像进行图像匹准，并根据所得到的边界提取飞机风挡立柱遮挡区域图像。
根据上述技术方案，本发明的飞机驾驶舱视界增强方法能起到以下有益技术效果：能精确地提取飞机风挡立柱遮挡区域图像，从而进一步精确地显示被风挡立柱遮挡区域的图像。
较佳的是，利用图像处理装置对所述正位图像、所述左位图像和所述右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像还包括：根据实际视觉效果可调整地裁剪所述飞机风挡立柱遮挡区域图像。
根据上述技术方案，本发明的飞机驾驶舱视界增强方法能起到以下有益技术效果：能根据实际视觉效果可调整地裁剪飞机风挡立柱遮挡区域图像，从而进一步精确地显示被风挡立柱遮挡区域的图像。
较佳的是，利用图像处理装置对所述正位图像、所述左位图像和所述右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像还包括：根据所述飞机风挡立柱的形状对所述飞机风挡立柱遮挡区域图像进行图像变形处理，以使经图像变形处理的飞机风挡立柱遮挡区域图像适合于所述飞机风挡立柱的形状。
根据上述技术方案，本发明的飞机驾驶舱视界增强方法能起到以下有益技术效果：能使得飞机风挡立柱遮挡区域图像适合于飞机风挡立柱的形状，从而进一步精确地显示被风挡立柱遮挡区域的图像。
较佳的是，所述显示装置是柔性薄膜显示装置，所述柔性薄膜显示装置贴覆在所述飞机风挡立柱的内侧。
根据上述技术方案，本发明的飞机驾驶舱视界增强方法能起到以下有益技术效果：柔性薄膜显示装置能使得飞机风挡立柱遮挡区域图像适合于飞机风挡立柱的形状，从而进一步精确地显示被风挡立柱遮挡区域的图像。
附图说明
图1是本发明一实施例的飞机驾驶舱视界增强系统的组成示意图。
图2是本发明一实施例的飞机驾驶舱视界增强系统的原理图。
图3是本发明一实施例的飞机驾驶舱视界增强系统的的图像处理流程图。
图4是本发明一实施例的飞机驾驶舱示意图。
具体实施方式
下面结合具体实施例和附图对本发明作进一步说明，在以下的描述中阐述了更多的细节以便于充分理解本发明，但是本发明显然能够以多种不同于此描述的其它方式来实施，本领域技术人员可以在不违背本发明内涵的情况下根据实际应用情况作类似推广、演绎，因此不应以此具体实施例的内容限制本发明的保护范围。
图1是本发明一实施例的飞机驾驶舱视界增强系统的组成示意图。如图1所示，根据本发明的一实施例，飞机驾驶舱视界增强系统包括：
正位摄像装置、左位摄像装置和右位摄像装置，其中，正位摄像装置设置在驾驶员眼位点和飞机风挡立柱之间，正位摄像装置的拍摄角度正对飞机风挡立柱，左位摄像装置和右位摄像装置分别设置在飞机风挡立柱的左侧和右侧，左位摄像装置和右位摄像装置的拍摄角度分别指向偏向飞机风挡立柱的右侧和左侧；
图像处理装置，图像处理装置连接至正位摄像装置、左位摄像装置和右位摄像装置，以用于对正位摄像装置、左位摄像装置和右位摄像装置所拍摄的正位图像、左位图像和右位图像进行图像合成和图像匹准，获得飞机风挡立柱遮挡区域图像；
显示装置，显示装置连接至图像处理装置，以用于显示所获得的飞机风挡立柱遮挡区域图像。
较佳的是，图像处理装置包括图像合成模块、边缘检测模块、图像匹准模块，其中，图像合成模块用于对左位图像和右位图像进行图像合成，以得到视角较大的合成图像，实现该模块功能所用到的算法可以是基于灰度值的最小二乘法或其他具有相同功能的算法。边缘检测模块用于对正位图像进行边缘检测，以得到飞机风挡立柱遮挡区域的边界，实现该模块功能所用到的算法可以是canny多级边缘检测算法或其他具有相同功能的算法。图像匹准模块用于对所得到的合成图像和正位图像进行图像匹准，并根据所得到的边界提取飞机风挡立柱遮挡区域图像，实现该模块功能所用到的算法可以是基于灰度值的序贯相似性检测算法(SSDA算法)或其他具有相同功能的算法。
较佳的是，图像处理装置还包括图像裁剪模块，图像裁剪模块用于根据实际视觉效果可调整地裁剪飞机风挡立柱遮挡区域图像，实现该模块功能所用到的算法可以是Cyrus-Beck多边形窗口直线裁剪算法或其他具有相同功能的算法。
较佳的是，图像处理装置还包括图像变形模块，图像变形模块用于根据飞机风挡立柱的形状对飞机风挡立柱遮挡区域图像进行图像变形处理，以使经图像变形处理的飞机风挡立柱遮挡区域图像适合于飞机风挡立柱的形状，实现该模块功能所用到的算法可以是基于线性最小移动二乘图像变形算法或其他具有相同功能的算法。
较佳的是，显示装置是柔性薄膜显示装置，柔性薄膜显示装置贴覆在飞机风挡立柱的内侧。
图2是本发明一实施例的飞机驾驶舱视界增强系统的原理图。图3是本发明一实施例的飞机驾驶舱视界增强系统的的图像处理流程图。图4是本发明一实施例的飞机驾驶舱示意图。
下面结合图2－4说明飞机驾驶舱视界增强系统的图像处理原理：
(1)对左位摄像装置LC所拍摄的左位图像和右位摄像装置RC所拍摄的右位图像进行图像合成，得到一个视角较大的合成图像；
(2)从图2可知，正位摄像装置CC所拍摄的正位图像与眼位点E处看到的图像相比，正位图像中被遮挡区域较大，故对正位图像进行边缘检测，得到风挡立柱遮挡区域边界；
(3)对所得到的合成图像和正位图像进行图像匹准，并根据所得到的边界提取风挡立柱遮挡区域图像；
(4)较佳的是，对上一步中所提取的风挡立柱遮挡区域图像进行进一步裁剪，裁剪的边界大小可以由飞行员根据实际视觉效果通过调节旋钮进行调整；
(5)较佳的是，根据风挡立柱形状对风挡立柱遮挡区域图像进图像变形处理，得到符合真实视觉效果的风挡立柱遮挡区域图像，以供最终显示在显示装置上。
如图3所示，根据本发明的一实施例，飞机驾驶舱视界增强方法包括：
利用正位摄像装置、左位摄像装置和右位摄像装置分别拍摄正位图像、左位图像和右位图像，其中，正位摄像装置设置在驾驶员眼位点和飞机风挡立柱之间，正位摄像装置的拍摄角度正对飞机风挡立柱，左位摄像装置和右位摄像装置分别设置在飞机风挡立柱的左侧和右侧，左位摄像装置和右位摄像装置的拍摄角度分别指向偏向飞机风挡立柱的右侧和左侧；
利用图像处理装置对正位图像、左位图像和右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像；
利用显示装置显示所获得的飞机风挡立柱遮挡区域图像。
较佳的是，利用图像处理装置对正位图像、左位图像和右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像包括：对左位图像和右位图像进行图像合成，以得到视角较大的合成图像；对正位图像进行边缘检测，以得到飞机风挡立柱遮挡区域的边界；对所得到的合成图像和正位图像进行图像匹准，并根据所得到的边界提取飞机风挡立柱遮挡区域图像。
较佳的是，利用图像处理装置对正位图像、左位图像和右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像还包括：根据实际视觉效果可调整地裁剪飞机风挡立柱遮挡区域图像。
较佳的是，利用图像处理装置对正位图像、左位图像和右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像还包括：根据飞机风挡立柱的形状对飞机风挡立柱遮挡区域图像进行图像变形处理，以使经图像变形处理的飞机风挡立柱遮挡区域图像适合于飞机风挡立柱的形状。
如图4所示，在驾驶舱实际安装时，较佳的是，将左位摄像装置LC和右位摄像装置RC分别布置在风挡立柱两侧，并将它们的拍摄角度分别指向偏向风挡立柱一侧；将正位摄像装置CC安装在眼位点E和风挡立柱轴线的之间，拍摄角度正对风挡立柱；三个摄像装置分别通过支架固定在驾驶舱壁板上；将柔性薄膜显示装置贴覆在风挡立柱的平整面上；将图像处理装置安装在驾驶舱面板内部，左位摄像装置LC、右位摄像装置RC和正位摄像装置CC以及柔性薄膜显示装置通过线缆与图像处理装置相连；选取合适的位置布置电源开关和调整旋钮，分别实现系统开关功能和显示范围调整功能(即，可调的图像裁剪功能)。
以上对本发明的具体实施方式进行了描述，但本领域技术人员将会理解，上述具体实施方式并不构成对本发明的限制，本领域技术人员可以在以上公开内容的基础上进行多种修改，而不超出本发明的范围。

Claims (10)

1.一种飞机驾驶舱视界增强系统，包括：
正位摄像装置、左位摄像装置和右位摄像装置，其中，所述正位摄像装置设置在驾驶员眼位点和飞机风挡立柱之间，所述正位摄像装置的拍摄角度正对所述飞机风挡立柱，所述左位摄像装置和所述右位摄像装置分别设置在所述飞机风挡立柱的左侧和右侧，所述左位摄像装置和所述右位摄像装置的拍摄角度分别指向偏向所述飞机风挡立柱的右侧和左侧；
图像处理装置，所述图像处理装置连接至所述正位摄像装置、所述左位摄像装置和所述右位摄像装置，以用于对所述正位摄像装置、所述左位摄像装置和所述右位摄像装置所拍摄的正位图像、左位图像和右位图像进行图像合成和图像匹准，获得飞机风挡立柱遮挡区域图像；
显示装置，所述显示装置连接至所述图像处理装置，以用于显示所获得的飞机风挡立柱遮挡区域图像。
2.如权利要求1所述的飞机驾驶舱视界增强系统，其特征在于，所述图像处理装置包括图像合成模块、边缘检测模块、图像匹准模块，其中，所述图像合成模块用于对所述左位图像和所述右位图像进行图像合成，以得到视角较大的合成图像，所述边缘检测模块用于对所述正位图像进行边缘检测，以得到飞机风挡立柱遮挡区域的边界，所述图像匹准模块用于对所得到的合成图像和正位图像进行图像匹准，并根据所得到的边界提取飞机风挡立柱遮挡区域图像。
3.如权利要求2所述的飞机驾驶舱视界增强系统，其特征在于，所述图像处理装置还包括图像裁剪模块，所述图像裁剪模块用于根据实际视觉效果可调整地裁剪所述飞机风挡立柱遮挡区域图像。
4.如权利要求2所述的飞机驾驶舱视界增强系统，其特征在于，所述图像处理装置还包括图像变形模块，所述图像变形模块用于根据所述飞机风挡立柱的形状对所述飞机风挡立柱遮挡区域图像进行图像变形处理，以使经图像变形处理的飞机风挡立柱遮挡区域图像适合于所述飞机风挡立柱的形状。
5.如权利要求1所述的飞机驾驶舱视界增强系统，其特征在于，所述显示装置是柔性薄膜显示装置，所述柔性薄膜显示装置贴覆在所述飞机风挡立柱的内侧。
6.一种飞机驾驶舱视界增强方法，包括：
利用正位摄像装置、左位摄像装置和右位摄像装置分别拍摄正位图像、左位图像和右位图像，其中，所述正位摄像装置设置在驾驶员眼位点和飞机风挡立柱之间，所述正位摄像装置的拍摄角度正对所述飞机风挡立柱，所述左位摄像装置和所述右位摄像装置分别设置在所述飞机风挡立柱的左侧和右侧，所述左位摄像装置和所述右位摄像装置的拍摄角度分别指向偏向所述飞机风挡立柱的右侧和左侧；
利用图像处理装置对所述正位图像、所述左位图像和所述右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像；
利用显示装置显示所获得的飞机风挡立柱遮挡区域图像。
7.如权利要求6所述的飞机驾驶舱视界增强方法，其特征在于，利用图像处理装置对所述正位图像、所述左位图像和所述右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像包括：对所述左位图像和所述右位图像进行图像合成，以得到视角较大的合成图像；对所述正位图像进行边缘检测，以得到飞机风挡立柱遮挡区域的边界；对所得到的合成图像和正位图像进行图像匹准，并根据所得到的边界提取飞机风挡立柱遮挡区域图像。
8.如权利要求7所述的飞机驾驶舱视界增强方法，其特征在于，利用图像处理装置对所述正位图像、所述左位图像和所述右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像还包括：根据实际视觉效果可调整地裁剪所述飞机风挡立柱遮挡区域图像。
9.如权利要求7所述的飞机驾驶舱视界增强方法，其特征在于，利用图像处理装置对所述正位图像、所述左位图像和所述右位图像进行图像合成和图像匹准以获得飞机风挡立柱遮挡区域图像还包括：根据所述飞机风挡立柱的形状对所述飞机风挡立柱遮挡区域图像进行图像变形处理，以使经图像变形处理的飞机风挡立柱遮挡区域图像适合于所述飞机风挡立柱的形状。
10.如权利要求6所述的飞机驾驶舱视界增强方法，其特征在于，所述显示装置是柔性薄膜显示装置，所述柔性薄膜显示装置贴覆在所述飞机风挡立柱的内侧。
CN201510770666.XA 2015-11-12 2015-11-12 飞机驾驶舱视界增强系统和方法 Active CN105405093B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201510770666.XA CN105405093B (zh) 2015-11-12 2015-11-12 飞机驾驶舱视界增强系统和方法
PCT/CN2016/105141 WO2017080444A1 (zh) 2015-11-12 2016-11-09 飞机驾驶舱视界增强系统和方法
US15/578,136 US10654590B2 (en) 2015-11-12 2016-11-09 Aircraft cockpit view enhancing system and method
EP16863620.7A EP3291170B1 (en) 2015-11-12 2016-11-09 Aircraft cockpit view enhancing system and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510770666.XA CN105405093B (zh) 2015-11-12 2015-11-12 飞机驾驶舱视界增强系统和方法

Publications (2)

Publication Number Publication Date
CN105405093A true CN105405093A (zh) 2016-03-16
CN105405093B CN105405093B (zh) 2019-03-15

Family

ID=55470561

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510770666.XA Active CN105405093B (zh) 2015-11-12 2015-11-12 飞机驾驶舱视界增强系统和方法

Country Status (4)

Country Link
US (1) US10654590B2 (zh)
EP (1) EP3291170B1 (zh)
CN (1) CN105405093B (zh)
WO (1) WO2017080444A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106023064A (zh) * 2016-05-12 2016-10-12 中国航空工业集团公司西安飞机设计研究所 一种飞机座舱视界评估方法
WO2017080444A1 (zh) * 2015-11-12 2017-05-18 中国商用飞机有限责任公司 飞机驾驶舱视界增强系统和方法
CN107704681A (zh) * 2017-09-30 2018-02-16 江西洪都航空工业集团有限责任公司 一种飞机地面视野范围的计算方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102161918B1 (ko) * 2019-06-03 2020-10-05 김근형 항공기의 비행 중 외부 전경 콘텐츠 제공 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102591014A (zh) * 2011-01-07 2012-07-18 刘立东 一种全景视觉观察系统及其工作方法
CN104044745A (zh) * 2013-03-12 2014-09-17 霍尼韦尔国际公司 飞机驾驶舱显示器以及用于组合视景显示中的障碍物的增强显示的系统和方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7180476B1 (en) * 1999-06-30 2007-02-20 The Boeing Company Exterior aircraft vision system using a helmet-mounted display
US7394916B2 (en) * 2003-02-10 2008-07-01 Activeye, Inc. Linking tracked objects that undergo temporary occlusion
JP4812510B2 (ja) * 2006-05-17 2011-11-09 アルパイン株式会社 車両周辺画像生成装置および撮像装置の測光調整方法
JP4862774B2 (ja) * 2006-12-20 2012-01-25 アイシン・エィ・ダブリュ株式会社 運転支援方法及び運転支援装置
JP4412365B2 (ja) * 2007-03-26 2010-02-10 アイシン・エィ・ダブリュ株式会社 運転支援方法及び運転支援装置
JP2009078719A (ja) 2007-09-26 2009-04-16 Denso Corp 視認支援装置
US20090187300A1 (en) * 2008-01-22 2009-07-23 David Wayne Everitt Integrated vehicle computer system
FR3000026B1 (fr) * 2012-12-21 2016-12-09 Airbus Aeronef comprenant un poste de pilotage dote d'une surface de vision pour le pilotage au moins partiellement virtuelle
TW201438940A (zh) * 2013-04-11 2014-10-16 Compal Electronics Inc 影像顯示方法及系統
CN103253196A (zh) * 2013-05-30 2013-08-21 吕军 汽车全视纪录镜
WO2015002885A1 (en) 2013-07-01 2015-01-08 Rwd Consulting, Inc. Vehicle visibility improvement system
CN103581651B (zh) 2013-10-28 2015-04-29 西安交通大学 一种用于车载多目摄像机环视系统的虚拟视点合成方法
CN103818320B (zh) * 2014-03-14 2016-03-02 盛凯 驾驶舱用智能控制系统及控制方法
JP6065296B2 (ja) * 2014-05-20 2017-01-25 パナソニックＩｐマネジメント株式会社 画像表示システム、および画像表示システムに用いられるディスプレイ
CN107111742B (zh) * 2014-08-18 2021-04-02 无比视视觉技术有限公司 在导航中对车道限制和施工区域的识别和预测
CN105405093B (zh) * 2015-11-12 2019-03-15 中国商用飞机有限责任公司 飞机驾驶舱视界增强系统和方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102591014A (zh) * 2011-01-07 2012-07-18 刘立东 一种全景视觉观察系统及其工作方法
CN104044745A (zh) * 2013-03-12 2014-09-17 霍尼韦尔国际公司 飞机驾驶舱显示器以及用于组合视景显示中的障碍物的增强显示的系统和方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017080444A1 (zh) * 2015-11-12 2017-05-18 中国商用飞机有限责任公司 飞机驾驶舱视界增强系统和方法
US10654590B2 (en) 2015-11-12 2020-05-19 Commercial Aircraft Corporation of China, Ltd. Aircraft cockpit view enhancing system and method
CN106023064A (zh) * 2016-05-12 2016-10-12 中国航空工业集团公司西安飞机设计研究所 一种飞机座舱视界评估方法
CN106023064B (zh) * 2016-05-12 2019-06-28 中国航空工业集团公司西安飞机设计研究所 一种飞机座舱视界评估方法
CN107704681A (zh) * 2017-09-30 2018-02-16 江西洪都航空工业集团有限责任公司 一种飞机地面视野范围的计算方法
CN107704681B (zh) * 2017-09-30 2021-06-04 江西洪都航空工业集团有限责任公司 一种飞机地面视野范围的计算方法

Also Published As

Publication number Publication date
EP3291170A4 (en) 2018-12-19
EP3291170B1 (en) 2020-01-01
EP3291170A1 (en) 2018-03-07
US10654590B2 (en) 2020-05-19
US20180237157A1 (en) 2018-08-23
WO2017080444A1 (zh) 2017-05-18
CN105405093B (zh) 2019-03-15

Similar Documents

Publication Publication Date Title
CN105405093A (zh) 飞机驾驶舱视界增强系统和方法
DE102017103282B4 (de) Anzeigesteuerung für ein fahrzeug
US20160005316A1 (en) Around view system and operating method thereof
CN109891351B (zh) 基于图像的对象检测和对应的移动调整操纵的方法和系统
WO2017138409A1 (ja) 情報表示装置
CN101276415A (zh) 用多定焦摄像机实现多分辨率图像采集的装置和方法
CN106444837A (zh) 一种无人机避障方法及系统
CN111016788B (zh) 一种电子后视镜系统及交通工具
CN103489314B (zh) 实时路况显示方法及装置
CN201385620Y (zh) 驾驶室视觉障碍消除装置
CN106143307A (zh) 一种驾驶辅助系统及车辆
CN104890574A (zh) 一种基于机器视觉的轿车a柱盲区消除装置
US20160264051A1 (en) Night Driving System and Method
CN112364707B (zh) 一种智能车对复杂路况进行超视距感知的系统及方法
CN106228513A (zh) 一种计算机图像处理系统
JP2019533603A (ja) 運転支援フロントガラス
CN102567714A (zh) 基于双摄像头面部识别的彩色图像与黑白图像的矫正方法
CN110099268A (zh) 色彩自然匹配与显示区自然融合的盲区透视化显示方法
KR20160134005A (ko) 드론 및 주변차량을 이용한 시야 확보 방법 및 이를 이용한 디스플레이 시스템
CN110633015A (zh) 一种驾驶员头部姿态检测装置
CN105022172B (zh) 一种3d透镜与平板显示器的对位贴合方法以及对位贴合装置
CN105323447B (zh) 多鱼眼图像处理方法、装置及车辆
CN103945184B (zh) 一种车载视频的处理方法和装置
CN207523549U (zh) 用于消除汽车a柱视域盲区的显示装置
CN106097259B (zh) 一种基于透射率优化技术的雾天图像快速重建方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190815

Address after: 201210 Zhang Yang Road, Shanghai, Pudong New Area, No. 25

Co-patentee after: Shanghai Aircraft Design Research Institute Co.,Ltd.

Patentee after: COMMERCIAL AIRCRAFT CORPORATION OF CHINA, Ltd.

Address before: 201210 Zhang Yang Road, Shanghai, Pudong New Area, No. 25

Co-patentee before: COMAC SHANGHAI AIRCRAFT DESIGN & Research Institute

Patentee before: Commercial Aircraft Corporation of China, Ltd.