CN110765180B - 一种用于检查单关联的方法和装置 - Google Patents

一种用于检查单关联的方法和装置 Download PDF

Info

Publication number
CN110765180B
CN110765180B CN201911000461.8A CN201911000461A CN110765180B CN 110765180 B CN110765180 B CN 110765180B CN 201911000461 A CN201911000461 A CN 201911000461A CN 110765180 B CN110765180 B CN 110765180B
Authority
CN
China
Prior art keywords
checklist
electronic
image
alert
association
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911000461.8A
Other languages
English (en)
Other versions
CN110765180A (zh
Inventor
马显超
赵春玲
刘洪涛
范瑞杰
李飞
李先学
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Commercial Aircraft Corp of China Ltd
Original Assignee
Commercial Aircraft Corp of China Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Commercial Aircraft Corp of China Ltd filed Critical Commercial Aircraft Corp of China Ltd
Priority to CN201911000461.8A priority Critical patent/CN110765180B/zh
Publication of CN110765180A publication Critical patent/CN110765180A/zh
Application granted granted Critical
Publication of CN110765180B publication Critical patent/CN110765180B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2462—Approximate or statistical queries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2457—Query processing with adaptation to user needs
    • G06F16/24578—Query processing with adaptation to user needs using ranking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/248—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/20—Administration of product repair or maintenance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40—Business processes related to the transportation industry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Databases & Information Systems (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Probability & Statistics with Applications (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Quality & Reliability (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Software Systems (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Operations Research (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Alarm Systems (AREA)

Abstract

本文公开了一种用于检查单关联的方法和装置。在一个实施例中，可利用图像获取模块生成关于机载系统的告警窗口的图像，然后识别该图像中由告警窗口显示的告警信息。可基于识别出的告警信息从数据库中检索与该告警信息相关联的电子检查单，并且可显示与该告警信息相关联的电子检查单。

Description

一种用于检查单关联的方法和装置
技术领域
本发明一般涉及飞行装置，尤其涉及一种用于检查单关联的方法和装置。
背景技术
飞行检查单(Checklist)是经过精心设计并经实践检验的标准操作程序，是机组人员可以依赖的指导性文件，也是保证飞行安全的重要屏障。飞行检查单针对飞行中的各种正常和应急情况简明扼要地罗列出对安全最重要的检查和/或操作项目。在飞行中及时、正确使用检查单能够提供有保障的安全飞行。
传统的飞行检查单是手册形式的，其包含与各个飞行阶段和可能发生的应急情况相对应的大量检查单。然而，人工查找所需的检查单可能是低效率的，尤其是在紧急情况下可能无法及时找到正确的检查单。一些新型飞机驾驶系统采用了电子检查单，电子检查单能够为飞行机组提供检查单的自动触发功能，辅助飞行员有效完成正常检查单与非正常检查单。然而，在目前航线运营的飞机中，不带有电子检查单的飞机占有40％以上，并且仍有部分新出厂的机型没有安装电子检查单系统。
因此，本领域需要用于检查单关联的方法和装置。
发明内容
本文描述了检查单关联方法和装置。可利用图像获取模块生成关于机载系统的告警窗口的图像，然后识别该图像中由告警窗口显示的告警信息。可基于识别出的告警信息从数据库中检索与该告警信息相关联的电子检查单，并且可显示与该告警信息相关联的电子检查单。
在一个实施例中，提供了一种用于检查单关联的装置，其包括：图像处理模块，其接收由图像获取模块生成的关于机载系统的告警窗口的图像，并识别所述图像中由所述告警窗口显示的告警信息；电子检查单处理模块，其基于所述告警信息从数据库中检索与所述告警信息相关联的电子检查单；以及显示模块，其从所述电子检查单处理模块接收并显示与所述告警信息相关联的电子检查单。
在一个方面，所述电子检查单的内容包括与所述告警信息有关的飞机检查项目和/或飞行操作指引。
在一个方面，所述图像中包括由所述告警窗口显示的一条或多条告警信息，其中所述电子检查单处理模块从数据库中检索与每条告警信息相关联的一个或多个电子检查单。
在一个方面，所述电子检查单处理模块还被配置成对检索到的电子检查单进行筛选并将经筛选的电子检查单发送给所述显示模块进行显示，所述筛选包括：将两个或更多个电子检查单合并为一个电子检查单；当发生根源故障和由所述根源故障引起的派生故障时，排除与所述派生故障相关联的电子检查单或者将与所述派生故障相关联的电子检查单合并到与所述根源故障相关联的检查单中；和/或将多个电子检查单按优先级进行排序。
在一个方面，所述告警信息包括以下一者或多者：发动机故障；辅助动力装置(APU)故障；起落架故障；座舱故障；舱门故障；火警；过热；紧急下降；以及紧急撤离。
在一个方面，所述用于检查单关联的装置还包括：操作输入模块，其接收针对所述电子检查单的操作输入。
在一个方面，所述图像包括视频的一个或多个帧。
在一个方面，所述图像获取模块安装在飞机驾驶舱内以拍摄机载系统的告警窗口的图像，并且所述图像获取模块经由有线连接或无线连接将所述图像传送给所述图像处理模块。
在一个方面，所述图像获取模块集成在所述用于检查单关联的装置中。
在一个方面，所述用于检查单关联的装置包括以下一者或多者：台式计算机、移动计算机、平板电脑设备、或智能手机。
在另一个实施例中，提供了一种用于检查单关联的方法，其包括：接收关于机载系统的告警窗口的图像；识别所述图像中由所述告警窗口显示的告警信息；基于所述告警信息从数据库中检索与所述告警信息相关联的电子检查单；以及显示与所述告警信息相关联的电子检查单。
在一个方面，所述电子检查单的内容包括与所述告警信息有关的飞机检查项目和/或飞行操作指引。
在一个方面，所述图像中包括由所述告警窗口显示的一条或多条告警信息，并且从数据库中检索与每条告警信息相关联的一个或多个电子检查单。
在一个方面，还包括在显示与所述告警信息相关联的电子检查单之前对检索到的电子检查单进行筛选，所述筛选包括：将两个或更多个电子检查单合并为一个电子检查单；当发生根源故障和由所述根源故障引起的派生故障时，排除与所述派生故障相关联的电子检查单或者将与所述派生故障相关联的电子检查单合并到与所述根源故障相关联的检查单中；和/或将多个电子检查单按优先级进行排序。
在一个方面，所述告警信息包括以下一者或多者：发动机故障；辅助动力方法(APU)故障；起落架故障；座舱故障；舱门故障；火警；过热；紧急下降；以及紧急撤离。
在一个方面，所述用于检查单关联的方法还包括：接收针对所述电子检查单的操作输入。
在一个方面，所述图像包括视频的一个或多个帧。
在一个方面，接收关于机载系统的告警窗口的图像包括：经由有线连接或无线连接从安装在飞机驾驶舱内的图像获取模块接收关于机载系统的告警窗口的图像。
在一个方面，所述方法由以下一者或多者实现：台式计算机、移动计算机、平板电脑设备、或智能手机。
在另一个实施例中，提供了一种用于检查单关联的装置，其包括：处理器；以及用于存储处理器可执行指令的存储器，其中所述处理器用于执行所述处理器可执行指令以实现如上所述的方法。
由此，本发明可在无需改动飞机原有机载系统的情况下实现电子检查单功能，可以在机载系统发出告警信息时自动触发对电子检查单的关联和显示，能够高效辅助飞行员获取电子检查单，极大地降低了机组人员的工作量。本发明能够在发生紧急情况时快速提供与告警信息相关联的电子检查单，在紧急或复杂情况下迅速为机组提供合理、有序的行动计划，能够防止机组人员在急迫的情况下遗漏关键动作或出现操纵失误，从而提高飞行安全。
附图说明
图1是根据本发明的一个实施例的检查单关联装置的框图。
图2是根据本发明的一个实施例的飞机驾驶舱的示意图。
图3是根据本发明的一个实施例的检查单的示例。
图4是根据本发明的一个实施例的检查单关联方法的框图。
具体实施方式
下面结合具体实施例和附图对本发明作进一步说明，但不应以此限制本发明的保护范围。
图1是根据本发明的一个实施例的检查单关联装置100的框图。检查单关联装置100可包括图像处理模块120、电子检查单处理模块130、数据库140、以及显示模块150。检查单关联装置100的各个模块可以通过系统总线来彼此连接和通信。检查单关联装置100可以由例如台式计算机、移动计算机、平板电脑设备、或智能手机等来实现。
图1还示出了图像获取模块110，其可以与检查单关联装置100分开，或者可以集成到检查单关联装置100中。图像获取模块110可以用于拍摄飞机驾驶舱内的机载系统的告警窗口的图像(或视频)。下文以图像为例进行说明，但是本领域技术人员应当理解，针对图像所描述的技术可适用于视频，或者图像可包括视频的一个或多个帧。
在一个实施例中，图像获取模块110可以安装在飞机驾驶舱内(例如，固定地或可拆卸地)，例如将摄像头对准机载系统的告警窗口以拍摄该告警窗口的图像。图像获取模块110可以持续地或者间歇性地拍摄该告警窗口的图像。在飞行过程中，如果发生飞行异常情况，则机载系统的告警窗口可以显示告警信息。由此，图像获取模块110可以拍摄到显示告警信息的告警窗口的图像。
在另一个实施例中，图像获取模块110可以是便携式的(例如，便携式摄像头、或者作为便携式的检查单关联装置100的一部分)，并且可以在飞机驾驶系统显示告警信息时由机组人员操作，以拍摄显示告警信息的告警窗口的图像。
图像处理模块120可接收由图像获取模块110生成的关于机载系统的告警窗口的图像。在一个实施例中，图像获取模块110可以将所生成的图像存储在存储器中，并且图像处理模块120可从存储器中获取该图像。在另一个实施例中，图像获取模块110可经由有线连接或无线连接将该图像传送给图像处理模块120。有线连接可包括模拟信号线、数字信号线、双绞线、光纤、电力线等连接。无线连接可包括2G、3G、4G、5G、6G、WiFi、蓝牙、红外等连接。
在又一个实施例中，如果图像处理模块120是检查单关联装置100的一部分，则图像获取模块110可经由检查单关联装置100内部的系统总线将所拍摄的图像传送给图像处理模块120。
图像处理模块120可以识别该图像中的告警信息。例如，图像处理模块120可以对所接收的图像进行图像分析处理，以确定该图像中是否包含告警信息。图像处理模块120可以识别该图像中的告警图标、告警文字等。图像处理模块120可以采用各种各样的图像识别技术，例如模板匹配、模式识别、机器学习、人工神经网络等。作为示例而非限定，所接收的图像中可包含由告警窗口显示的一条或多条告警信息，并且图像处理模块120可以识别该图像中的所有告警信息。
如果图像处理模块120识别出该图像中的告警信息，则可以将该告警信息传送给电子检查单处理模块130。例如，如果图像获取模块110持续地监视机载系统的告警窗口并将所拍摄的图像传递给图像处理模块120进行处理，则在告警窗口未显示告警信息时，图像处理模块120不会识别出告警信息，也无需向电子检查单处理模块130发送信号。一旦机载系统的告警窗口显示了告警信息时，图像获取模块110将拍摄到显示告警信息的告警窗口的图像并将该图像传送给图像处理模块120，由此图像处理模块120可以识别出该图像中的告警信息，并且可以将该告警信息的内容传送给电子检查单处理模块130。
作为示例而非限定，告警信息可包括以下一者或多者：发动机故障、辅助动力装置(APU)故障、起落架故障、座舱故障、舱门故障、火警、过热、紧急下降、以及紧急撤离等。以上仅列出了一些告警信息作为示例，在具体实践中可包括更多种类和/或更具体的告警信息。
电子检查单处理模块130可基于该告警信息从数据库140中检索与该告警信息相关联的电子检查单。数据库140中可以存储与各种告警信息相对应的电子检查单。作为示例而非限定，每种告警信息可以与一个或多个电子检查单相关联。在其他实施例中，数据库140中还可以存储与各个飞行阶段(例如，起飞、巡航、着陆和滑行)以及各种可能情况相对应的电子检查单以供机组人员搜索或查阅。作为示例而非限定，数据库140中所存储的电子检查单可以进行更新。
在可选实施例中，电子检查单处理模块130还可被配置成对检索到的电子检查单进行筛选。在一个示例中，筛选可包括将两个或更多个电子检查单合并为一个电子检查单。在另一个示例中，当发生根源故障和由根源故障引起的派生故障时，可排除与派生故障相关联的电子检查单或者将与派生故障相关联的电子检查单合并到与根源故障相关联的检查单中。在另一个示例中，可将多个电子检查单按优先级进行排序，以使得例如高优先级的电子检查单可以排在低优先级的电子检查单之前。
电子检查单的内容可包括飞机检查项目和/或飞行操作指引。例如，飞机检查项目可包括检查刹车是否松开、飞行仪表是否准确设定、机舱门窗是否完全关闭、升降舵等控制面是否已经解锁等。以下参照图3进一步示出了电子检查单的示例。
继续参考图1，显示模块150可以从电子检查单处理模块130接收与告警信息相关联的电子检查单，并且可以显示该电子检查单。如果电子检查单处理模块130被配置成对检索到的电子检查单进行筛选，则可以将经筛选的电子检查单发送给显示模块150进行显示。由此，机组人员可以根据所显示的电子检查单进行飞机检查或者飞行操作。
可选地，检查单关联装置100可包括操作输入模块160，其可以接收针对电子检查单的操作输入。操作输入可包括对电子检查单的选择、确认、切换、关闭等动作。在一个实施例中，如果存在与一条或多条告警信息相关联的多个电子检查单，这些电子检查单的列表可显示在显示模块150上，并且机组人员可以通过操作输入模块160来选择其中一个或多个电子检查单。被选择的电子检查单的具体内容可以被显示。
在一个实施例中，针对在显示模块150上显示的电子检查单，机组人员可以通过操作输入模块160来确认是否已执行该电子检查单中列出的项目。在另一个实施例中，机组人员可以通过操作输入模块160来从数据库140中查找需要的电子检查单，并且该电子检查单可以在显示模块150上进行显示。操作输入模块160可以实现为按键板、键盘、旋钮等，或者也可以与显示模块150一起实现为触摸屏。
由此，本发明可在无需改动飞机原有机载系统的情况下实现电子检查单功能，可以在机载系统发出告警信息时自动触发对电子检查单的关联和显示，能够高效辅助飞行员获取电子检查单，极大地降低了机组人员的工作量。本发明能够在发生紧急情况时快速提供与告警信息相关联的电子检查单，在紧急或复杂情况下迅速为机组提供合理、有序的行动计划，能够防止机组人员在急迫的情况下遗漏关键动作或出现操纵失误，从而提高飞行安全。
图2是根据本发明的一个实施例的飞机驾驶舱200的示意图。驾驶舱200的机载系统可包括多个显示屏以显示各种各样的系统信息，例如燃油量、飞行速度、海拔等。该机载系统的显示屏可包括告警窗口(如放大的告警窗口210所示)，用于显示一条或多条告警信息。作为示例而非限定，告警窗口210可以显示多条告警信息，如CABIN ALTITUDE(座舱高度)、L PACK FAULT(左空调包失效)、TRIM AIR FAULT(配平空气失效)等告警信息。
如上参照图1所描述的图像获取模块110(例如，相机、摄像头等)可以安装在飞机驾驶舱内，例如在告警窗口210附近的支架上(如位置122处)、或者在驾驶舱侧面或顶部能瞄准告警窗口210的地方(如位置124处)。在其他实施例中，图像获取模块110可以是便携式的，而无需固定至驾驶舱内的特定位置。在任一种情况下，图像获取模块110可以对准机载系统的告警窗口210以拍摄该告警窗口210的图像。图像获取模块110所拍摄的告警窗口210的图像可以由如图1描述的图像处理模块120处理以识别出相应的一个或多个告警信息。随后，电子检查单处理模块130可从数据库中检索与识别出的告警信息相关联的一个或多个电子检查单并在显示模块150上呈现。
例如，在一个实施例中，可以使用移动设备(例如，手机)来实现如本文所描述的技术。移动设备通常具有相机，并且该移动设备可以安装有用于检查单关联的应用。在飞行开始时，该移动设备可被放置在飞机驾驶舱内的支架上并启动该应用，以利用移动设备的相机来持续地或间歇性地拍摄告警窗口210的图像。该应用可以持续地分析所拍摄的图像，并且一旦发现图像中出现告警信息，就可以检索与该告警信息相关联的一个或多个电子检查单并在移动设备的屏幕上呈现。
在另一个实施例中，图像获取模块110可以单独地实现(例如，作为摄像头)，而如图1描述的检查单关联装置100的其他模块(例如，图像处理模块120、电子检查单处理模块130、数据库140、显示模块150、操作输入模块160等)可以利用移动设备来实现。在这种情况下，摄像头可以与移动设备分开，由此摄像头可被安装在飞机驾驶舱内的支架上，而移动设备可被放置在其他地方，或者由机组人员携带。摄像头可以持续地或间歇性地拍摄告警窗口210的图像，并将图像传送给移动设备进行处理。移动设备可以分析所拍摄的图像，并且一旦发现图像中出现告警信息，就可以检索与该告警信息相关联的一个或多个电子检查单并在移动设备的屏幕上呈现。
在又一个实施例中，图像获取模块110和图像处理模块120可以一起实现，例如集成在摄像头中。摄像头可被安装在飞机驾驶舱内的支架上，持续地或间歇性地拍摄告警窗口210的图像，并且分析所拍摄的图像中是否有告警信息。一旦识别出告警信息，摄像头就可以将该告警信息传送给移动设备。移动设备可以检索与该告警信息相关联的一个或多个电子检查单并在移动设备的屏幕上呈现。在这种实施例中，摄像头可以将所识别出的告警信息传送给一个或多个移动设备。例如，摄像头可根据告警信息需要哪些人员处理来将不同的告警信息传送给不同机组人员的移动设备，由此相应的机组人员的移动设备可以检索并获得相应的电子检查单。
虽然以上描述了不同的实现方式，但是本领域技术人员可以理解，图1中描述的各个模块可以根据需要而组合地或者分开地实现，而不脱离本发明的范围。
图3是根据本发明的一个实施例的检查单的示例。
检查单示例1示出了与“Window Open(风挡打开)”相关联的电子检查单。当机载系统的告警窗口210显示告警信息“Window Open”时，根据本文描述的技术，图像获取模块可以拍摄到告警窗口210显示该告警信息的图像，并且图像处理模块可以识别出该图像中的告警信息。随后，可以从数据库中检索并显示如检查单示例1所示的“Window Open(风挡打开)”电子检查单，其列出了在“风挡打开”情况下机组人员可以执行的检查和操作步骤。
检查单示例2示出了与“Duct Overheat(管道过热)”相关联的电子检查单。类似地，当机载系统的告警窗口210显示告警信息“Duct Overheat”时，根据本文描述的技术，图像获取模块可以拍摄到告警窗口210显示该告警信息的图像，并且图像处理模块可以识别出该图像中的告警信息。随后可从数据库中检索并显示“Duct Overheat(管道过热)”电子检查单，以供机组人员参考或使用。
应理解，以上检查单仅作为示例而非限制。对于不同的机型或航空公司，可以针对各种情况编制相同或不同的检查单项目，以便为机组人员提供可以信赖的检查或操作指引。
图4是根据本发明的一个实施例的检查单关联方法400的框图。该方法可以由台式计算机、移动计算机、平板电脑设备、或智能手机等设备来实现。或者，该方法可以由如图1描述的相应组件来实现。
在步骤402，可以接收关于机载系统的告警窗口的图像。机载系统的告警窗口可用于显示告警信息。告警信息可包括以下一者或多者：发动机故障、辅助动力方法(APU)故障、起落架故障、座舱故障、舱门故障、火警、过热、紧急下降、以及紧急撤离等。图像获取模块(例如，摄像头、带有摄像头的设备等)可以被用于拍摄关于机载系统的告警窗口的图像。步骤402可包括例如经由有线连接或无线连接从这样的图像获取模块接收关于机载系统的告警窗口的图像。在一些示例中，该图像可包括视频的一个或多个帧。
在步骤404，可以识别该图像中由告警窗口显示的告警信息。例如，可以采用各种各样的图像识别技术来识别告警信息，例如模板匹配、模式识别、机器学习、人工神经网络等。
在步骤406，可基于识别出的告警信息从数据库中检索与该告警信息相关联的电子检查单。电子检查单的内容可包括与告警信息有关的飞机检查项目和/或飞行操作指引等。在一个实施例中，所接收的图像中可包括一条或多条告警信息，并且可从数据库中检索与每条告警信息相关联的一个或多个电子检查单。
在可选步骤408，可对检索到的电子检查单进行筛选。筛选可包括例如对电子检查单进行合并、排除、和/或排序等操作。例如，如果从数据库中检索到与告警信息相关联的多个电子检查单，则可以将其中两个或更多个电子检查单合并为一个电子检查单。在另一示例中，当发生根源故障和由根源故障引起的派生故障时，可排除与派生故障相关联的电子检查单或者将与派生故障相关联的电子检查单合并到与根源故障相关联的检查单中。在又一示例中，可以将多个电子检查单按优先级(例如，紧迫程度)进行排序，以使得例如高优先级的电子检查单可以排在低优先级的电子检查单之前。在步骤410，可显示与告警信息相关联的电子检查单。例如，可在终端设备的显示屏上显示与告警信息相关联的电子检查单，以供机组人员查看或使用。如果在可选步骤408对检索到的电子检查单进行了筛选，则可以显示筛选后的电子检查单。
在可选步骤412，还可接收针对电子检查单的操作输入。例如，可接收操作人员对电子检查单的选择、确认、切换、关闭等动作。
如上所述，本发明提供了检查单关联方法和装置，其可以在机载系统发出告警信息时自动触发对电子检查单的关联和显示。本发明可适用于目前没有安装机载电子检查单系统的飞机，在无需改动原有机载系统的情况下实现电子检查单功能。本发明同样可适用于已经安装机载电子检查单系统的飞机，从而可以提供更灵活的检查单关联装置供机组人员使用。
以上描述的用于检查单关联的方法和装置的各个步骤和模块可以用硬件、软件、或其组合来实现。如果在硬件中实现，结合本公开描述的各种说明性步骤、模块、以及电路可用通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、或其他可编程逻辑组件、硬件组件、或其任何组合来实现或执行。通用处理器可以是处理器、微处理器、控制器、微控制器、或状态机等。如果在软件中实现，则结合本公开描述的各种说明性步骤、模块可以作为一条或多条指令或代码存储在计算机可读介质上或进行传送。实现本公开的各种操作的软件模块可驻留在存储介质中，如RAM、闪存、ROM、EPROM、EEPROM、寄存器、硬盘、可移动盘、CD-ROM、云存储等。存储介质可耦合到处理器以使得该处理器能从/向该存储介质读写信息，并执行相应的程序模块以实现本公开的各个步骤。而且，基于软件的实施例可以通过适当的通信手段被上载、下载或远程地访问。这种适当的通信手段包括例如互联网、万维网、内联网、软件应用、电缆(包括光纤电缆)、磁通信、电磁通信(包括RF、微波和红外通信)、电子通信或者其他这样的通信手段。
还应注意，这些实施例可能是作为被描绘为流程图、流图、结构图、或框图的过程来描述的。尽管流程图可能会把诸操作描述为顺序过程，但是这些操作中有许多操作能够并行或并发地执行。另外，这些操作的次序可被重新安排。
所公开的方法、装置和系统不应以任何方式被限制。相反，本公开涵盖各种所公开的实施例(单独和彼此的各种组合和子组合)的所有新颖和非显而易见的特征和方面。所公开的方法、装置和系统不限于任何具体方面或特征或它们的组合，所公开的任何实施例也不要求存在任一个或多个具体优点或者解决特定或所有技术问题。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护范围之内。

Claims (20)

1.一种用于检查单关联的装置，其特征在于，包括：
图像处理模块，其接收由图像获取模块生成的关于机载系统的告警窗口的图像，并识别所述图像中由所述告警窗口显示的告警信息；
电子检查单处理模块，其基于所述告警信息从数据库中检索与所述告警信息相关联的电子检查单；以及
显示模块，其从所述电子检查单处理模块接收并显示与所述告警信息相关联的电子检查单。
2.如权利要求1所述的用于检查单关联的装置，其特征在于，所述电子检查单的内容包括与所述告警信息有关的飞机检查项目和/或飞行操作指引。
3.如权利要求1所述的用于检查单关联的装置，其特征在于，所述图像中包括由所述告警窗口显示的一条或多条告警信息，其中所述电子检查单处理模块从数据库中检索与每条告警信息相关联的一个或多个电子检查单。
4.如权利要求1所述的用于检查单关联的装置，其特征在于，所述电子检查单处理模块还被配置成对检索到的电子检查单进行筛选并将经筛选的电子检查单发送给所述显示模块进行显示，所述筛选包括：
将两个或更多个电子检查单合并为一个电子检查单；
当发生根源故障和由所述根源故障引起的派生故障时，排除与所述派生故障相关联的电子检查单或者将与所述派生故障相关联的电子检查单合并到与所述根源故障相关联的检查单中；和/或
将多个电子检查单按优先级进行排序。
5.如权利要求1所述的用于检查单关联的装置，其特征在于，所述告警信息包括以下一者或多者：
发动机故障；
辅助动力装置(APU)故障；
起落架故障；
座舱故障；
舱门故障；
火警；
过热；
紧急下降；以及
紧急撤离。
6.如权利要求1所述的用于检查单关联的装置，其特征在于，还包括：
操作输入模块，其接收针对所述电子检查单的操作输入。
7.如权利要求1所述的用于检查单关联的装置，其特征在于，所述图像包括视频的一个或多个帧。
8.如权利要求1所述的用于检查单关联的装置，其特征在于，所述图像获取模块安装在飞机驾驶舱内以拍摄机载系统的告警窗口的图像，并且所述图像获取模块经由有线连接或无线连接将所述图像传送给所述图像处理模块。
9.如权利要求1所述的用于检查单关联的装置，其特征在于，所述图像获取模块集成在所述用于检查单关联的装置中。
10.如权利要求1所述的用于检查单关联的装置，其特征在于，所述用于检查单关联的装置包括以下一者或多者：台式计算机、移动计算机、平板电脑设备、或智能手机。
11.一种用于检查单关联的方法，其特征在于，包括：
接收关于机载系统的告警窗口的图像；
识别所述图像中由所述告警窗口显示的告警信息；
基于所述告警信息从数据库中检索与所述告警信息相关联的电子检查单；以及
显示与所述告警信息相关联的电子检查单。
12.如权利要求11所述的用于检查单关联的方法，其特征在于，所述电子检查单的内容包括与所述告警信息有关的飞机检查项目和/或飞行操作指引。
13.如权利要求11所述的用于检查单关联的方法，其特征在于，所述图像中包括由所述告警窗口显示的一条或多条告警信息，并且从数据库中检索与每条告警信息相关联的一个或多个电子检查单。
14.如权利要求11所述的用于检查单关联的方法，其特征在于，还包括在显示与所述告警信息相关联的电子检查单之前对检索到的电子检查单进行筛选，所述筛选包括：
将两个或更多个电子检查单合并为一个电子检查单；
当发生根源故障和由所述根源故障引起的派生故障时，排除与所述派生故障相关联的电子检查单或者将与所述派生故障相关联的电子检查单合并到与所述根源故障相关联的检查单中；和/或
将多个电子检查单按优先级进行排序。
15.如权利要求11所述的用于检查单关联的方法，其特征在于，所述告警信息包括以下一者或多者：
发动机故障；
辅助动力方法(APU)故障；
起落架故障；
座舱故障；
舱门故障；
火警；
过热；
紧急下降；以及
紧急撤离。
16.如权利要求11所述的用于检查单关联的方法，其特征在于，还包括：
接收针对所述电子检查单的操作输入。
17.如权利要求11所述的用于检查单关联的方法，其特征在于，所述图像包括视频的一个或多个帧。
18.如权利要求11所述的用于检查单关联的方法，其特征在于，接收关于机载系统的告警窗口的图像包括：
经由有线连接或无线连接从安装在飞机驾驶舱内的图像获取模块接收关于机载系统的告警窗口的图像。
19.如权利要求11所述的用于检查单关联的方法，其特征在于，所述方法由以下一者或多者实现：台式计算机、移动计算机、平板电脑设备、或智能手机。
20.一种用于检查单关联的装置，其特征在于，包括：
处理器；以及
用于存储处理器可执行指令的存储器，
其中所述处理器用于执行所述处理器可执行指令以实现如权利要求1-10中任一项所述的方法。
CN201911000461.8A 2019-10-21 2019-10-21 一种用于检查单关联的方法和装置 Active CN110765180B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911000461.8A CN110765180B (zh) 2019-10-21 2019-10-21 一种用于检查单关联的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911000461.8A CN110765180B (zh) 2019-10-21 2019-10-21 一种用于检查单关联的方法和装置

Publications (2)

Publication Number Publication Date
CN110765180A CN110765180A (zh) 2020-02-07
CN110765180B true CN110765180B (zh) 2023-04-18

Family

ID=69331559

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911000461.8A Active CN110765180B (zh) 2019-10-21 2019-10-21 一种用于检查单关联的方法和装置

Country Status (1)

Country Link
CN (1) CN110765180B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111301695B (zh) * 2020-03-10 2022-03-22 中国商用飞机有限责任公司 飞机驾驶舱中使用的操作指引系统
CN111667652A (zh) * 2020-06-11 2020-09-15 中国商用飞机有限责任公司 告警系统及运行方法
CN112035517B (zh) * 2020-07-23 2024-03-29 中国商用飞机有限责任公司 用于辅助飞机操控的便携式操作辅助设备、系统及方法
CN113815874B (zh) * 2021-10-11 2022-06-21 中国商用飞机有限责任公司 用于飞行器的告警信息推送方法和系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101916278A (zh) * 2010-08-17 2010-12-15 中国航空无线电电子研究所 一种定制式飞机驾驶舱电子检查单的实现装置以及方法
EP3223210A1 (en) * 2016-03-22 2017-09-27 Honeywell International Inc. Methods and apparatus for providing critical electronic checklist data during flight
CN108470446A (zh) * 2018-03-28 2018-08-31 帝信科技股份有限公司 一种告警方法及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101916278A (zh) * 2010-08-17 2010-12-15 中国航空无线电电子研究所 一种定制式飞机驾驶舱电子检查单的实现装置以及方法
EP3223210A1 (en) * 2016-03-22 2017-09-27 Honeywell International Inc. Methods and apparatus for providing critical electronic checklist data during flight
CN108470446A (zh) * 2018-03-28 2018-08-31 帝信科技股份有限公司 一种告警方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
胡一飞.计算机网络中告警数据处理技术的研究.福建电脑.2005,(11),全文. *

Also Published As

Publication number Publication date
CN110765180A (zh) 2020-02-07

Similar Documents

Publication Publication Date Title
CN110765180B (zh) 一种用于检查单关联的方法和装置
US8768534B2 (en) Method and apparatus for using electronic flight bag (EFB) to enable flight operations quality assurance (FOQA)
US9321542B2 (en) Diagnostics for aircraft
US11603213B2 (en) System and method for auto-execution of aircraft check lists
EP2810156B1 (en) Methods and systems for requesting and retrieving aircraft data during flight of an aircraft
US8798811B2 (en) Method and device for assisting in the diagnostic and in the dispatch decision of an aircraft
CN103970122B (zh) 一种基于acms的飞机故障实时监控方法和系统
EP2905229B1 (en) Virtual aircraft network
EP2490162A2 (en) Integrated electronic checklist display system
EP3196814A1 (en) Virtual aircraft operations checklist
CN107085744A (zh) 利用数据分析增强的飞机维护和检查
EP2975363B1 (fr) Traitement des messages d'alarmes et de maintenance d'un aeronef
US20160019732A1 (en) Aircraft performance computation
EP2300968A1 (en) Aircraft maintenance laptop
US20170154446A1 (en) Methods and apparatus for providing visual overlay assistance for flight preparation
Yang et al. Assessment of flight crew errors based on THERP
EP3792186B1 (en) Internet connected auxiliary power unit airline maintenance system
WO2013147991A1 (en) Information handling for aircraft flight decks
CN108074422B (zh) 用于分析机场处的转向的系统和方法
Mumaw et al. Identification of Scenarios for System Interface Design Evaluation: CAST SE-210 Output 2 Report 5 of 6
Scandura et al. A unified system to provide crew alerting, electronic checklists and maintenance using IVHM
CN112035517B (zh) 用于辅助飞机操控的便携式操作辅助设备、系统及方法
Martins et al. Human error in aviation: the behavior of pilots facing the modern technology
KR20150054584A (ko) 항공 관제 정보 표시 장치 및 방법
Menzenski Enhancing Cognitive Assistants with Low-Cost Computer Vision

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant