KR20180118793A - 승무원 자동화 시스템 및 방법 - Google Patents
승무원 자동화 시스템 및 방법 Download PDFInfo
- Publication number
- KR20180118793A KR20180118793A KR1020187029828A KR20187029828A KR20180118793A KR 20180118793 A KR20180118793 A KR 20180118793A KR 1020187029828 A KR1020187029828 A KR 1020187029828A KR 20187029828 A KR20187029828 A KR 20187029828A KR 20180118793 A KR20180118793 A KR 20180118793A
- Authority
- KR
- South Korea
- Prior art keywords
- aircraft
- flight
- pilot
- automation system
- crew automation
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 75
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 claims description 62
- 230000001149 cognitive effect Effects 0.000 claims description 54
- 238000012544 monitoring process Methods 0.000 claims description 50
- 238000004891 communication Methods 0.000 claims description 22
- 230000004438 eyesight Effects 0.000 claims description 14
- 238000009434 installation Methods 0.000 claims description 8
- 230000004913 activation Effects 0.000 claims description 4
- 230000009849 deactivation Effects 0.000 claims description 4
- 230000000007 visual effect Effects 0.000 abstract description 2
- 230000006870 function Effects 0.000 description 15
- 238000001514 detection method Methods 0.000 description 12
- 230000009471 action Effects 0.000 description 11
- 230000004044 response Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 10
- 230000000694 effects Effects 0.000 description 8
- 238000013439 planning Methods 0.000 description 8
- 230000002159 abnormal effect Effects 0.000 description 7
- 239000000446 fuel Substances 0.000 description 7
- 239000011521 glass Substances 0.000 description 7
- 230000036541 health Effects 0.000 description 7
- 230000033001 locomotion Effects 0.000 description 7
- 238000012549 training Methods 0.000 description 7
- 238000013461 design Methods 0.000 description 6
- 238000010801 machine learning Methods 0.000 description 6
- 238000012360 testing method Methods 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 238000013459 approach Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000010354 integration Effects 0.000 description 5
- 230000007704 transition Effects 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000004297 night vision Effects 0.000 description 4
- 230000008520 organization Effects 0.000 description 4
- 239000011295 pitch Substances 0.000 description 4
- 230000002787 reinforcement Effects 0.000 description 4
- 238000012552 review Methods 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- 238000013475 authorization Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000005094 computer simulation Methods 0.000 description 2
- 238000013481 data capture Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000008014 freezing Effects 0.000 description 2
- 238000007710 freezing Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000002441 reversible effect Effects 0.000 description 2
- 238000004088 simulation Methods 0.000 description 2
- 206010048909 Boredom Diseases 0.000 description 1
- 241000272470 Circus Species 0.000 description 1
- 241000282412 Homo Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000002730 additional effect Effects 0.000 description 1
- 230000009118 appropriate response Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000007123 defense Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000010006 flight Effects 0.000 description 1
- 238000005755 formation reaction Methods 0.000 description 1
- 230000004313 glare Effects 0.000 description 1
- 239000000383 hazardous chemical Substances 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 231100000206 health hazard Toxicity 0.000 description 1
- 239000010763 heavy fuel oil Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910052751 metal Inorganic materials 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 229910001092 metal group alloy Inorganic materials 0.000 description 1
- 150000002739 metals Chemical class 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 210000003205 muscle Anatomy 0.000 description 1
- 238000011017 operating method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003534 oscillatory effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000000275 quality assurance Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002829 reductive effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012876 topography Methods 0.000 description 1
- 238000012384 transportation and delivery Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64C—AEROPLANES; HELICOPTERS
- B64C13/00—Control systems or transmitting systems for actuating flying-control surfaces, lift-increasing flaps, air brakes, or spoilers
- B64C13/02—Initiating means
- B64C13/16—Initiating means actuated automatically, e.g. responsive to gust detectors
- B64C13/18—Initiating means actuated automatically, e.g. responsive to gust detectors using automatic pilot
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/10—Simultaneous control of position or course in three dimensions
- G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
- B64D43/00—Arrangements or adaptations of instruments
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
- B64D45/00—Aircraft indicators or protectors not otherwise provided for
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64F—GROUND OR AIRCRAFT-CARRIER-DECK INSTALLATIONS SPECIALLY ADAPTED FOR USE IN CONNECTION WITH AIRCRAFT; DESIGNING, MANUFACTURING, ASSEMBLING, CLEANING, MAINTAINING OR REPAIRING AIRCRAFT, NOT OTHERWISE PROVIDED FOR; HANDLING, TRANSPORTING, TESTING OR INSPECTING AIRCRAFT COMPONENTS, NOT OTHERWISE PROVIDED FOR
- B64F5/00—Designing, manufacturing, assembling, cleaning, maintaining or repairing aircraft, not otherwise provided for; Handling, transporting, testing or inspecting aircraft components, not otherwise provided for
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F7/00—Methods or arrangements for processing data by operating upon the order or content of the data handled
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
- B64D45/00—Aircraft indicators or protectors not otherwise provided for
- B64D2045/0075—Adaptations for use of electronic flight bags in aircraft; Supports therefor in the cockpit
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
- B64D45/00—Aircraft indicators or protectors not otherwise provided for
- B64D2045/0085—Devices for aircraft health monitoring, e.g. monitoring flutter or vibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/02—Knowledge representation; Symbolic representation
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T50/00—Aeronautics or air transport
- Y02T50/40—Weight reduction
Landscapes
- Engineering & Computer Science (AREA)
- Aviation & Aerospace Engineering (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Mechanical Engineering (AREA)
- Robotics (AREA)
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Game Theory and Decision Science (AREA)
- Medical Informatics (AREA)
- Transportation (AREA)
- Manufacturing & Machinery (AREA)
- Databases & Information Systems (AREA)
- Computational Linguistics (AREA)
- Computing Systems (AREA)
- Traffic Control Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Treating Waste Gases (AREA)
Abstract
본 발명은 승무원 자동화 시스템 및 방법에 관한 것으로서, 상기 승무원 자동화 시스템은 조종사에게 항공기의 물리적 상태에 대한 높은 충실도의 지식을 제공하고, 예측 모델들에 기초하여 예상되는 상태에서 임의의 편차들을 조종사에게 통지한다. 항공기 자동화는 비침입적 라이드-어롱 승무원 자동화 시스템으로 제공될 수 있어서, 시각적 기술들을 통해 항공기의 상태를 인지하고, 항공기 상태 벡터 및 다른 항공기 정보를 유도하고, 예상되는 항공기 상태로부터의 임의의 편차들을 조종사에게 전달한다.
Description
본 발명은 비행 제어 시스템들, 방법들 및 기구들 분야에 관한 것으로서, 보다 상세하게는, 자동화된 승무원 및/또는 항공기 상태 모니터링을 제공하기 위한 시스템, 방법 및 기구에 관한 것이다.
조종실들에서의 자동화에 대한 최근의 경험은 비행 갑판들에 추가적인 기능을 더하는 이전의 접근법들이 복잡성을 증가시키고, 자동화에 대한 과도한 의존을 야기하며, 그리고 특히 중대한 상황들 동안에 반드시 작업부하를 줄이지 않을 수도 있다는 것을 보여줘 왔다. 추가적인 도전은 항공전자공학 제조사들이 높은 신뢰성과 입증가능성을 제공하기 위해서 엄격한 요구사항들-기반의 설계를 도입했고 임의의 희망하는 개선들에 대한 명령들을 변경했다는 것이다. 따라서, 레거시 항공기의 전환은 일반적으로 지나치게 비용이 많이 들며 그리고 요구사항들, 검증 및 테스트에 큰 자본 투자를 요구한다.
Virginia Manassas의 Aurora Flight Sciences Corporation는 이륙, 항행(cruise) 및 착륙 동안 다이아몬드 DA42 트윈 스타(Diamond DA42 Twin Star)를 작동할 수 있는 오른쪽좌석 조종사 보조(right-seat pilot assistant)를 이전에 개발했다. Centaur라고 불리는 오른쪽좌석 조종사 보조는 원래의 유형의 인증(original type certificate)에 영향을 미치지 않으면서 DA42에 설치되거나 DA42로부터 제거될 수 있으며, 따라서 항공기의 원래의 인증을 유지할 수 있다. Centaur는 그 자체 항법전자 슈트(avionics suite) 및 기본 비행 제어장치들(primary flight controls)의 기계적 작동을 포함하며, 감독 역할의 조종사와 함께 또는 완전한 무인 항공기로써 사용될 수 있다. 예를 들어, Centaur는 랩톱 상에서 비행 계획을 지시(direct)하면서 비행기의 뒷좌석에 있는 조작자에 의해 조종될 수 있다. Centaur는 많은 특징들을 제공하지만, 그것은 특정 결점들에 시달린다. 특히, (1) Centaur 하드웨어는 다른 항공기로 이동가능하지(portable) 않고, 다른 능력들로 확장가능한(extensible) 소프트웨어 플러그-앤드-플레이가 아니다. (2) Centaur 시스템의 부분들은 침입적(invasive)이며 항공기(즉, DA42)에 매우 특정한 방식으로 배선하는 기존의 항공전자로의 컷팅(cutting)을 필요로 한다. (3) Centaur는 탑승해있는 조종사(onboard pilot)가 조작자(operator)가 되는 것 및 비행 계획을 지시하는 것과 같은 업무들(tasks)을 수행하는 것을 허용하지 않는다. (4) Centaur는 동작중인 항공기에 대한 지식을 획득하지 못한다.
따라서, 새로운 능력들의 신속한 도입, 안전성 향상, 기능성 성장, 및 조종사 작업부하(workload)의 감소를 - 많은 비용이나 재인증 없이 - 가능하게 하는 개방형 아키텍처 시스템의 필요성이 존재한다. 효과적으로 디지털 비행 엔지니어로서 기능할 수 있는 연속적인 항공기 상태 모니터링 및 정보 증진을 조종사에게 제공할 필요성도 또한 존재한다. 본 명세서에 개시된 바와 같은 승무원 자동화 시스템은 이러한 필요성들을 해결하고, 기체(airframe)들에 걸쳐 이동가능하면서(예컨대, 임시 설치들을 통해) 새로운 능력들이 최소한의 인증 부담으로 신속하게 도입될 수 있게 한다. 논의될 바와 같이, 승무원 자동화 시스템은 다양한 최종 사용자들에게 상당한 이점을 제공할 수 있다. 일 적용례는 피로와 지루함이 승무원 주의력의 감소를 야기할 수 있는 경우의 항공기의 동작을 포함하는데, 이 경우 승무원 자동화 시스템은 조종사에게 경고함으로써 그리고 어떤 경우에는 항공기의 제어를 가정함으로써 항공기 동작에서의 위험요소를 줄인다. 인적 과실(human error)에 대한 잠재적 가능성이 항공기의 광범위한 사용(예컨대, 저고도 동작들), 동기화된 동작들, 무인 비행들, 유인 비행 리드(manned flight lead)를 갖는 무인 편대들(unmanned formations) 및 종합적인 데이터 로깅(data logging)으로 인해 향상된 보고 능력들을 현재 제한하는 경우에 다른 적용례들이 존재한다.
본 발명은 비행 제어 시스템들(flight control systems), 방법들 및 기구들(apparatuses)을 지향한다. 보다 상세하게는, 자동화된 승무원 및/또는 항공기 상태 모니터링을 제공하기 위한 시스템, 방법 및 기구를 지향한다.
제1 양상에 따르면, 항공기에서 사용하기 위한 승무원 자동화 시스템은: 하나 이상의 인터페이스를 통해 서브 시스템들 또는 복수의 시스템들을 동작적으로 연결하는 코어 플랫폼; 조종사와 상기 승무원 자동화 시스템 사이에 인터페이스를 제공하기 위해 상기 코어 플랫폼과 동작적으로 결합된(operatively coupled) 휴먼 머신 인터페이스; 상기 항공기에 특정한 정보를 결정하기 위해 상기 코어 플랫폼과 동작적으로 결합된 지식 획득 시스템; 및 비행 상황 데이터를 생성하기 위해 상기 항공기의 하나 이상의 조종실 계기들을 모니터링하도록 상기 코어 플랫폼과 동작적으로 결합된 인지 시스템; 을 포함한다.
제2 양상에 따르면, 항공기에서 사용하기 위한 승무원 자동화 시스템은: 하나 이상의 인터페이스를 통해 서브 시스템들 또는 복수의 시스템들을 동작적으로 연결하는 코어 플랫폼; 조종사와 상기 승무원 자동화 시스템 사이에 인터페이스를 제공하기 위해 상기 코어 플랫폼과 동작적으로 결합된 휴먼 머신 인터페이스; 상기 항공기에 특정한 정보를 결정하기 위해 상기 코어 플랫폼과 동작적으로 결합된 지식 획득 시스템; 비행 상황 데이터를 생성하거나 수집하기 위해 코어 플랫폼과 결합된 항공기 상태 모니터링 시스템; 및 코어 플랫폼으로부터의 명령들에 응답하여 항공기의 하나 또는 비행 제어장치들을 작동시키기 위해 코어 플랫폼과 동작 가능하게 결합된 작동 시스템; 을 포함한다.
제3 양상에 따르면, 항공기에서 사용하기 위한 승무원 자동화 시스템은: 하나 이상의 인터페이스를 통해 서브 시스템들 또는 복수의 시스템들을 동작적으로 연결하는 코어 플랫폼; 조종사와 상기 승무원 자동화 시스템 사이에 인터페이스를 제공하기 위해 상기 코어 플랫폼과 동작적으로 결합된 휴먼 머신 인터페이스 - 상기 휴먼 머신 인터페이스는 업무 리스트의 형태로 터치 스크린 디스플레이를 통해 복수의 업무들을 디스플레이하도록 구성됨 -; 상기 항공기에 특정한 정보를 결정하기 위해 상기 코어 플랫폼과 동작적으로 결합된 지식 획득 시스템; 및 비행 상황 데이터를 생성하거나 수집하기 위해 코어 플랫폼과 결합된 항공기 상태 모니터링 시스템; 을 포함한다.
제4 양상에 따르면, 항공기에서 사용하기 위한 승무원 자동화 시스템은: 상기 항공기에 특정한 정보를 결정하는 지식 획득 시스템; 비행 상황 데이터를 생성하기 위해 상기 항공기의 하나 이상의 조종실 계기들을 모니터링하는 인지 시스템; 상기 비행 상황 데이터에 적어도 부분적으로 기초하여 항공기의 상태를 결정하기 위해 상기 인지 시스템 및 상기 지식 획득 시스템과 동작적으로 연결되는 코어 플랫폼; 및 항공기의 상태를 디스플레이하기 위해 상기 코어 플랫폼과 동작적으로 결합되는 휴먼 머신 인터페이스; 를 포함한다.
제5 양상에 따르면, 항공기에서 사용하기 위한 승무원 자동화 시스템은: 상기 항공기에 특정한 정보를 결정하는 지식 획득 시스템; 비행 상황 데이터를 생성하기 위해 하나 이상의 조종실 계기들을 모니터링하는 항공기 상태 모니터링 시스템; 상기 비행 상황 데이터에 적어도 부분적으로 기초하여 항공기의 상태를 결정하기 위해 상기 인지 시스템 및 상기 지식 획득 시스템과 동작적으로 연결되는 코어 플랫폼; 및 항공기의 상태를 디스플레이하기 위해 상기 코어 플랫폼과 동작적으로 결합되는 휴먼 머신 인터페이스; 를 포함한다.
소정의 양상들에서, 승무원 자동화 시스템은 비히클-비종속적(vehicle-agnostic)이다.
소정의 양상들에서, 항공기 상태 모니터링 시스템은 인지 시스템이다.
소정의 양상들에서, 항공기 상태 모니터링 시스템은 하나 이상의 조종실 계기들에 하드와이어드(hardwired)된다.
소정의 양상들에서, 승무원 자동화 시스템은 하드웨어 인터페이스들 또는 하나 이상의 동작 어플리케이션들을 상호연결하기 위한 미들웨어로써 동작하는 동작 시스템을 채용한다.
소정의 양상들에서, 승무원 자동화 시스템은 항공기를 통제하면서 또는 통제하지 않으면서 조종사에게 연속적인 항공기 상태 모니터링 및 정보 보강을 제공하도록 구성된다.
소정의 양상들에서, 자동조종장치 관리자는 항공기 작동 모듈 및 승무원 자동화 작동 모듈을 제어하도록 구성된다.
소정의 양상들에서, 코어 플랫폼으로부터의 명령들은 적어도 부분적으로 항공기의 상태에 기초하여 생성된다.
소정의 양상들에서, 코어 플랫폼은 휴먼 머신 인터페이스의 디스플레이를 통해 현재 항공기 상태를 디스플레이한다.
소정의 양상들에서, 코어 플랫폼은 개방형 아키텍쳐를 채용한다.
소정의 양상들에서, 코어 플랫폼은 비행 컨트롤러 시스템(flight controller system) 및/또는 임무 제어 시스템을 포함한다.
소정의 양상들에서, 코어 플랫폼은 비행 상황 데이터에 적어도 부분적으로 기초하여 하나 이상의 명령을 항공기의 비행 제어 시스템에게 전달하도록 구성된다.
소정의 양상들에서, 코어 플랫폼은 그것에 결합된 하나 이상의 시스템으로부터 수집된 정보들을 사용하여 안전한 동작을 유지하는 데 필요한 항공기의 시스템들, 구성들 및 절차들의 이해를 발전시키도록 구성된다.
소정의 양상들에서, 코어 플랫폼은 현재 항공기 상태를 결정하기 위해 비행 상황 데이터를 수신하고 종합하도록 구성된다.
소정의 양상들에서, (1) 시스템들 또는 서브시스템들의 비활성화 또는 제거, 또는 (2) 시스템들 또는 서브시스템들의 설치 또는 활성화를 가능하게 하기 위해, 코어 플랫폼은 플러그 앤드 플레이 소프트웨어(plug and play software)로 구성된다.
소정의 양상들에서, 비행 컨트롤러 시스템은 자동조종장치 관리자, 비히클 관리자, 상태 추정 모듈, 인지 모듈 또는 항법 모듈 중 하나 이상을 포함한다.
소정의 양상들에서, 비행 상황 데이터는 항공기의 수직 속도, 고도 및 대기 속도를 포함한다.
소정의 양상들에서, 하드웨어 인터페이스들은 일차적 작동 인터페이스, 이차적 작동 인터페이스, 항공기 상태 인터페이스 또는 HMI 인터페이스 중 적어도 하나를 포함한다.
소정의 양상들에서, 휴먼 머신 인터페이스는 태블릿 컴퓨터이다.
소정의 양상들에서, 휴먼 머신 인터페이스는 조종사가 승무원 자동화 시스템을 제어하고 상기 승무원 자동화 시스템과 통신할 수 있게 한다.
소정의 양상들에서, 휴먼 머신 인터페이스는 복수의 선택 가능한 탭들을 갖는 툴바를 포함한다.
소정의 양상들에서, 휴먼 머신 인터페이스는 터치 스크린 디스플레이를 포함한다.
소정의 양상들에서, 휴먼 머신 인터페이스는 야간-가시 고글들(night-vision goggles)과 호환된다.
소정의 양상들에서, 휴먼 머신 인터페이스는 업무 리스트의 형태로 터치 스크린 디스플레이 상에서 복수의 업무들을 디스플레이하도록 구성된다. 소정의 양상들에서, 복수의 업무들 각각은 예를 들어 터치 스크린 디스플레이를 통한 조종사 입력에 적어도 부분적으로 기초하여 완료되거나 또는 완료되지 않은 것으로 마킹된다.
소정의 양상들에서, 휴먼 머신 인터페이스는 체크리스트들, 건전성 경고들, 항공기 상태의 예측들 및 고장 예지들 중 적어도 하나를 디스플레이하도록 구성된다.
소정의 양상들에서, 휴먼 머신 인터페이스는 조종사로부터의 음성 통신을 인식하기 위한 음성 인식 기술들을 채용한다.
소정의 양상들에서, 휴먼 머신 인터페이스는 조종사로부터의 음성 통신에 대한 응답으로 일반적인 음성으로 구성된다.
소정의 양상들에서, 항공기에 특정한 정보는 상기 항공기가 특정 동작 에러에 민감한지 여부를 포함한다.
소정의 양상들에서, 지식 획득 시스템은 비히클-비종속적 승무원 자동화 시스템을 산출하기 위해 항공기에 특정한 정보를 결정하도록 구성된다.
소정의 양상들에서, 지식 획득 시스템은 조종실 계기들의 레이아웃을 결정하도록 구성된다.
소정의 양상들에서, 동작 어플리케이션들은 정상 비행 동작 어플리케이션(normal flight operation application), 이상 탐지 어플리케이션(anomaly detection application), 우발사태 동작 어플리케이션, 기밀(intelligence), 감시(surveillance) 및 정찰(reconnaissance)("ISR") 어플리케이션, 경향 인식 어플리케이션(trend recognition application) 또는 공중 재급유 어플리케이션(aerial refueling application) 중 적어도 하나를 포함한다.
소정의 양상들에서, 인지 시스템은 항공기의 하나 이상의 조종실 계기들을 시각적으로 모니터링하기 위한 카메라를 갖는 시각 시스템을 포함한다.
소정의 양상들에서, 복수의 선택 가능한 탭들은 경로 탭, 절차들 탭, 교정 탭 및 어플리케이션들 탭 중 하나 이상을 포함한다.
소정의 양상들에서, 승무원 자동화 시스템은 코어 플랫폼과 동작적으로 결합된 작동 시스템을 더 포함한다.
소정의 양상들에서, 작동 시스템은 일차적 작동 시스템 및 상기 일차적 작동 시스템과는 별개인 이차적 작동 시스템을 포함한다.
소정의 양상들에서, 승무원 자동화 시스템은 작동 시스템을 통해 항공기를 제어하도록 구성된다.
소정의 양상들에서, 일차적 작동 시스템은 항공기의 일차적 비행 제어장치들을 제어하고, 및/또는, 이차적 작동 시스템은 항공기의 이차적 비행 제어장치들을 제어한다.
소정의 양상들에서, 항공기의 일차적 제어 장치들은 스틱 제어장치들 또는 요크 제어장치들 중 하나 이상을 포함한다.
소정의 양상들에서, 항공기의 이차적 제어 장치들은 스위치들 및/또는 노브들 중 하나 이상을 포함한다.
소정의 양상들에서, 일차적 작동 시스템은, 프레임, 그 근위단에서 프레임에 결합된 관절 아암, 및 항공기의 일차적 비행 제어장치들 중 적어도 하나와 맞물리도록 관절 아암의 원위단에 위치된 그리퍼를 포함한다.
소정의 양상들에서, 일차적 작동 시스템은 항공기의 일차적 비행 제어장치들 중 적어도 하나와 맞물리도록 그리퍼를 갖는 관절 아암을 포함한다.
소정의 양상들에서, 그리퍼는 다중-DOF(자유도) 연결을 통해 관절 아암에 결합된다.
소정의 양상들에서, 관절 아암은 가동 베이스(movable base)를 통해 그 근위단에서 회전 가능하고 슬라이딩 가능하게 프레임에 결합된다.
소정의 양상들에서, 이차적 작동 시스템은, Y축과 X축을 정의하는 XY-플로터, 항공기의 이차적 비행 제어장치들 중 적어도 하나를 결합하는(engage) 툴, 및 Y축과 X축을 따라 상기 툴을 이동시키기 위한 제어 시스템을 포함한다.
소정의 양상들에서, 툴은 스위치 작동기 및 노브 작동기로 구성되어 스위치 또는 노브와 각각 결합하는 다중 툴이다.
본 발명의 일 실시예는 항공기에서 사용하기 위한 승무원 자동화 시스템을 포함하며, 상기 승무원 자동화 시스템은, 하나 이상의 인터페이스를 통해 서브 시스템들 또는 복수의 시스템들을 동작적으로 연결하는 코어 플랫폼; 조종사와 상기 승무원 자동화 시스템 사이에 인터페이스를 제공하기 위해 상기 코어 플랫폼과 동작적으로 결합된 휴먼 머신 인터페이스; 상기 항공기에 특정한 정보를 결정하기 위해 상기 코어 플랫폼과 동작적으로 결합된 지식 획득 시스템; 및 비행 상황 데이터를 생성하기 위해 상기 항공기의 하나 이상의 조종실 계기들을 모니터링하도록 상기 코어 플랫폼과 동작적으로 결합된 인지 시스템; 을 포함할 수 있다. 인지 시스템은 항공기의 하나 이상의 조종실 계기들을 시각적으로 모니터링하기 위한 카메라를 갖는 시각 시스템을 포함할 수 있다. 비행 상황 데이터는 항공기의 수직 속도, 고도 및 대기 속도를 포함할 수 있다. 지식 획득 시스템은 조종실 계기들의 레이아웃을 결정하도록 구성될 수 있다. 코어 플랫폼은 비행 상황 데이터에 적어도 부분적으로 기초하여 하나 이상의 명령을 항공기의 비행 제어 시스템에게 전달하도록 구성될 수 있다. 승무원 자동화 시스템은 코어 플랫폼과 동작적으로 결합된 작동 시스템을 더 포함할 수 있다. 작동 시스템은 일차적 작동 시스템 및 상기 일차적 작동 시스템과는 별개인 이차적 작동 시스템을 포함할 수 있다. 일차적 작동 시스템은 항공기의 일차적 비행 제어장치들의 작동을 제어할 수 있다. 일차적 제어 장치들은 스틱 제어장치 또는 요크 제어장치를 포함할 수 있다. 이차적 작동 시스템은 항공기의 이차적 비행 제어장치들의 작동을 제어할 수 있다. 이차적 제어 장치들은 스위치들 또는 노브들을 포함할 수 있다. 일차적 작동 시스템은 항공기의 일차적 비행 제어장치들 중 적어도 하나와 맞물리도록 그리퍼를 갖는 관절 아암을 포함할 수 있다. 일차적 작동 시스템은, 프레임, 그 근위단에서 프레임에 결합된 관절 아암, 및 항공기의 일차적 비행 제어장치들 중 적어도 하나와 맞물리도록 관절 아암의 원위단에 위치된 그리퍼를 포함할 수 있다. 그리퍼는 다중-DOF(자유도) 연결을 통해 관절 아암에 결합될 수 있다. 관절 아암은 가동 베이스(movable base)를 통해 그 근위단에서 회전 가능하고 슬라이딩 가능하게 프레임에 결합될 수 있다. 이차적 작동 시스템은, Y축과 X축을 정의하는 XY-플로터, 항공기의 이차적 비행 제어장치들 중 적어도 하나를 결합하는(engage) 툴, 및 Y축과 X축을 따라 상기 툴을 이동시키기 위한 제어 시스템을 포함할 수 있다. 툴은 스위치 작동기 및 노브 작동기로 구성되는 다중 툴일 수 있다. 코어 플랫폼은 현재 항공기 상태를 결정하기 위해 비행 상황 데이터를 수신하고 종합하도록 구성될 수 있다. 청구항 1항의 승무원 자동화 시스템에 있어서, 휴먼 머신 인터페이스는 조종사가 상기 승무원 자동화 시스템을 제어하고 상기 승무원 자동화 시스템과 통신할 수 있게 한다. 코어 플랫폼은 휴먼 머신 인터페이스의 디스플레이 상에 현재 항공기 상태를 디스플레이할 수 있다. 휴먼 머신 인터페이스는 터치 스크린 디스플레이를 포함할 수 있다. 휴먼 머신 인터페이스는 업무 리스트의 형태로 터치 스크린 디스플레이 상에서 복수의 업무들을 디스플레이하도록 구성될 수 있다. 복수의 업무들 각각은 완료되거나 또는 완료되지 않은 것으로 마킹될 수 있다. 복수의 업무들 각각은 예를 들어 터치 스크린 디스플레이를 통한 조종사 입력에 적어도 부분적으로 기초하여 완료되거나 또는 완료되지 않은 것으로 마킹될 수 있다. 휴먼 머신 인터페이스는 태블릿 컴퓨터일 수 있다. 휴먼 머신 인터페이스는 야간-가시 고글들(night-vision goggles)과 호환될 수 있다. 휴먼 머신 인터페이스는 조종사로부터의 음성 통신을 인식하기 위한 음성 인식 기술들을 채용한다. 휴먼 머신 인터페이스는 조종사로부터의 음성 통신에 대한 응답으로 일반적인 음성으로 구성될 수 있다. (1) 시스템들 또는 서브시스템들의 비활성화 또는 제거, 또는 (2) 시스템들 또는 서브시스템들의 설치 또는 활성화를 가능하게 하기 위해, 코어 플랫폼은 플러그 앤드 플레이 소프트웨어로 구성될 수 있다. 항공기에 특정한 정보는 상기 항공기가 특정 동작 에러에 민감할지 여부를 포함할 수 있다. 지식 획득 시스템은 비히클-비종속적 승무원 자동화 시스템을 산출하기 위해 항공기에 특정한 정보를 결정하도록 구성될 수 있다.
본 발명의 또 다른 실시예는 항공기에서 사용하기 위한 승무원 자동화 시스템을 포함하고, 상기 승무원 자동화 시스템은, 하나 이상의 인터페이스를 통해 서브 시스템들 또는 복수의 시스템들을 동작적으로 연결하는 코어 플랫폼; 조종사와 상기 승무원 자동화 시스템 사이에 인터페이스를 제공하기 위해 상기 코어 플랫폼과 동작적으로 결합된 휴먼 머신 인터페이스; 상기 항공기에 특정한 정보를 결정하기 위해 상기 코어 플랫폼과 동작적으로 결합된 지식 획득 시스템; 비행 상황 데이터를 생성하거나 수집하기 위해 코어 플랫폼과 결합된 항공기 상태 모니터링 시스템; 및 코어 플랫폼으로부터의 명령들에 응답하여 항공기의 하나 또는 비행 제어장치들을 작동시키기 위해 코어 플랫폼과 동작 가능하게 결합된 작동 시스템; 을 포함한다. 항공기 상태 모니터링 시스템은 인지 시스템일 수 있다. 인지 시스템은 항공기의 하나 이상의 조종실 계기들을 시각적으로 모니터링하기 위한 카메라를 갖는 시각 시스템을 포함할 수 있다. 비행 상황 데이터는 항공기의 수직 속도, 고도 및 대기 속도를 포함할 수 있다. 지식 획득 시스템은 조종실 계기들의 레이아웃을 결정하도록 구성될 수 있다. 코어 플랫폼은 비행 상황 데이터에 적어도 부분적으로 기초하여 하나 이상의 명령을 항공기의 비행 제어 시스템에게 전달하도록 구성될 수 있다. 작동 시스템은 일차적 작동 시스템 및 상기 일차적 작동 시스템과는 별개인 이차적 작동 시스템을 포함할 수 있다. 일차적 작동 시스템은 항공기의 일차적 비행 제어장치들의 작동을 제어할 수 있다. 일차적 제어 장치들은 스틱 제어장치 또는 요크 제어장치를 포함할 수 있다. 이차적 작동 시스템은 항공기의 이차적 비행 제어장치들의 작동을 제어할 수 있다. 이차적 제어 장치들은 스위치들 또는 노브들을 포함할 수 있다. 일차적 작동 시스템은 항공기의 일차적 비행 제어장치들 중 적어도 하나와 맞물리도록 그리퍼를 갖는 관절 아암을 포함할 수 있다. 청구항 43의 승무원 자동화 시스템에 있어서, 일차적 작동 시스템은, 프레임, 그 근위단에서 프레임에 결합된 관절 아암, 및 항공기의 일차적 비행 제어장치들 중 적어도 하나와 맞물리도록 관절 아암의 원위단에 위치된 그리퍼를 포함할 수 있다. 그리퍼는 다중-DOF(자유도) 연결을 통해 관절 아암에 결합될 수 있다. 관절 아암은 가동 베이스(movable base)를 통해 그 근위단에서 회전 가능하고 슬라이딩 가능하게 프레임에 결합될 수 있다. 이차적 작동 시스템은, Y축과 X축을 정의하는 XY-플로터, 항공기의 이차적 비행 제어장치들 중 적어도 하나를 결합하는(engage) 툴, 및 Y축과 X축을 따라 상기 툴을 이동시키기 위한 제어 시스템을 포함할 수 있다. 툴은 스위치 작동기 및 노브 작동기로 구성되는 다중 툴일 수 있다. 코어 플랫폼은 현재 항공기 상태를 결정하기 위해 비행 상황 데이터를 수신하고 종합하도록 구성될 수 있다. 휴먼 머신 인터페이스는 조종사가 상기 승무원 자동화 시스템을 제어하고 상기 승무원 자동화 시스템과 통신할 수 있게 할 수 있다. 코어 플랫폼은 휴먼 머신 인터페이스의 디스플레이 상에 현재 항공기 상태를 디스플레이할 수 있다. 휴먼 머신 인터페이스는 터치 스크린 디스플레이를 포함할 수 있다. 휴먼 머신 인터페이스는 업무 리스트의 형태로 터치 스크린 디스플레이 상에서 복수의 업무들을 디스플레이하도록 구성될 수 있다. 복수의 업무들 각각은 완료되거나 또는 완료되지 않은 것으로 마킹될 수 있다. 복수의 업무들 각각은 예를 들어 터치 스크린 디스플레이를 통한 조종사 입력에 적어도 부분적으로 기초하여 완료되거나 또는 완료되지 않은 것으로 마킹될 수 있다. 휴먼 머신 인터페이스는 태블릿 컴퓨터일 수 있다. 휴먼 머신 인터페이스는 야간-가시 고글들(night-vision goggles)과 호환될 수 있다. 휴먼 머신 인터페이스는 조종사로부터의 음성 통신을 인식하기 위한 음성 인식 기술들을 채용할 수 있다. 휴먼 머신 인터페이스는 조종사로부터의 음성 통신에 대한 응답으로 일반적인 음성으로 구성될 수 있다. (1) 시스템들 또는 서브시스템들의 비활성화 또는 제거, 또는 (2) 시스템들 또는 서브시스템들의 설치 또는 활성화를 가능하게 하기 위해, 코어 플랫폼은 플러그 앤드 플레이 소프트웨어로 구성될 수 있다. 항공기에 특정한 정보는 상기 항공기가 특정 동작 에러에 민감할지 여부를 포함할 수 있다. 지식 획득 시스템은 비히클-비종속적 승무원 자동화 시스템을 산출하기 위해 항공기에 특정한 정보를 결정하도록 구성될 수 있다.
본 발명의 또 다른 실시예는 항공기에서 사용하기 위한 승무원 자동화 시스템을 포함하고, 상기 승무원 자동화 시스템은: 하나 이상의 인터페이스를 통해 서브 시스템들 또는 복수의 시스템들을 동작적으로 연결하는 코어 플랫폼; 조종사와 상기 승무원 자동화 시스템 사이에 인터페이스를 제공하기 위해 상기 코어 플랫폼과 동작적으로 결합된 휴먼 머신 인터페이스 - 상기 휴먼 머신 인터페이스는 업무 리스트의 형태로 터치 스크린 디스플레이를 통해 복수의 업무들을 디스플레이하도록 구성될 수 있음 -; 상기 항공기에 특정한 정보를 결정하기 위해 상기 코어 플랫폼과 동작적으로 결합된 지식 획득 시스템; 및 비행 상황 데이터를 생성하거나 수집하기 위해 코어 플랫폼과 결합된 항공기 상태 모니터링 시스템; 을 포함할 수 있다. 코어 플랫폼은 비행 상황 데이터에 적어도 부분적으로 기초하여 하나 이상의 명령을 항공기의 비행 제어 시스템에게 전달하도록 구성될 수 있다. 승무원 자동화 시스템은 코어 플랫폼과 동작적으로 결합된 작동 시스템을 더 포함할 수 있다. 작동 시스템은 일차적 작동 시스템 및 상기 일차적 작동 시스템과는 별개인 이차적 작동 시스템을 포함할 수 있다. 일차적 작동 시스템은 항공기의 일차적 비행 제어장치들의 작동을 제어할 수 있고, 이차적 작동 시스템은 항공기의 이차적 비행 제어장치들의 작동을 제어할 수 있다. 일차적 작동 시스템은, 프레임, 그 근위단에서 프레임에 결합된 관절 아암, 및 항공기의 일차적 비행 제어장치들 중 적어도 하나와 맞물리도록 관절 아암의 원위단에 위치된 그리퍼를 포함할 수 있다. 이차적 작동 시스템은, Y축과 X축을 정의하는 XY-플로터, 항공기의 이차적 비행 제어장치들 중 적어도 하나를 결합하는(engage) 툴, 및 Y축과 X축을 따라 상기 툴을 이동시키기 위한 제어 시스템을 포함할 수 있다. 항공기 상태 모니터링 시스템은 인지 시스템일 수 있다. 인지 시스템은 항공기의 하나 이상의 조종실 계기들을 시각적으로 모니터링하기 위한 카메라를 갖는 시각 시스템을 포함할 수 있다. 복수의 업무들 각각은 예를 들어 터치 스크린 디스플레이를 통한 조종사 입력에 적어도 부분적으로 기초하여 완료되거나 또는 완료되지 않은 것으로 마킹될 수 있다.
본 발명의 또 다른 실시예는 항공기에서 사용하기 위한 승무원 자동화 시스템을 포함하며, 상기 승무원 자동화 시스템은: 상기 항공기에 특정한 정보를 결정하는 지식 획득 시스템; 비행 상황 데이터를 생성하기 위해 상기 항공기의 하나 이상의 조종실 계기들을 모니터링하는 인지 시스템; 상기 비행 상황 데이터에 적어도 부분적으로 기초하여 항공기의 상태를 결정하기 위해 상기 인지 시스템 및 상기 지식 획득 시스템과 동작적으로 연결되는 코어 플랫폼; 및 항공기의 상태를 디스플레이하기 위해 상기 코어 플랫폼과 동작적으로 결합되는 휴먼 머신 인터페이스; 를 포함할 수 있다. 승무원 자동화 시스템은 또한 코어 플랫폼으로부터의 명령들에 응답하여 항공기의 하나 또는 비행 제어장치들을 작동시키기 위해 코어 플랫폼과 동작 가능하게 결합된 작동 시스템을 더 포함할 수 있다. 코어 플랫폼으로부터의 명령들은 적어도 부분적으로 항공기의 상태에 기초하여 생성될 수 있다. 인지 시스템은 항공기의 하나 이상의 조종실 계기들을 시각적으로 모니터링하기 위한 카메라를 갖는 시각 시스템을 포함할 수 있다.
본 발명의 또 다른 실시예는 항공기에서 사용하기 위한 승무원 자동화 시스템을 포함하며, 상기 승무원 자동화 시스템은, 상기 항공기에 특정한 정보를 결정하는 지식 획득 시스템; 비행 상황 데이터를 생성하기 위해 하나 이상의 조종실 계기들을 모니터링하는 항공기 상태 모니터링 시스템; 상기 비행 상황 데이터에 적어도 부분적으로 기초하여 항공기의 상태를 결정하기 위해 상기 인지 시스템 및 상기 지식 획득 시스템과 동작적으로 연결되는 코어 플랫폼; 및 항공기의 상태를 디스플레이하기 위해 상기 코어 플랫폼과 동작적으로 결합되는 휴먼 머신 인터페이스; 를 포함할 수 있다. 승무원 자동화 시스템은 또한 코어 플랫폼으로부터의 명령들에 응답하여 항공기의 하나 또는 비행 제어장치들을 작동시키기 위해 코어 플랫폼과 동작 가능하게 결합된 작동 시스템을 더 포함할 수 있다. 코어 플랫폼으로부터의 명령들은 적어도 부분적으로 항공기의 상태에 기초하여 생성될 수 있다. 항공기 상태 모니터링 시스템은 인지 시스템일 수 있다. 인지 시스템은 항공기의 하나 이상의 조종실 계기들을 시각적으로 모니터링하기 위한 카메라를 갖는 시각 시스템을 포함할 수 있다. 항공기 상태 모니터링 시스템은 상기 하나 이상의 조종실 계기들에 하드와이어드될 수 있다. 휴먼 머신 인터페이스는 업무 리스트의 형태로 터치 스크린 디스플레이 상에서 복수의 업무들을 디스플레이하도록 구성될 수 있다. 승무원 자동화 시스템은 조종사에게 연속적인 항공기 상태 모니터링 및 정보 보강을 제공하도록 구성될 수 있다. 승무원 자동화 시스템은 항공기를 통제하지 않으면서 조종사에게 연속적인 항공기 상태 모니터링 및 정보 보강을 제공하도록 구성될 수 있다. 승무원 코어 플랫폼은 임무 제어 시스템을 포함할 수 있다. 승무원 자동화 시스템은 비히클-비종속적일 수 있다. 코어 플랫폼은 비행 컨트롤러 시스템을 포함할 수 있다. 비행 컨트롤러 시스템은 자동조종장치 관리자, 비히클 관리자, 상태 추정 모듈, 인지 모듈 또는 항법 모듈 중 하나 이상을 포함할 수 있다. 자동조종장치 관리자는 항공기 작동 모듈 및 승무원 자동화 작동 모듈을 제어하도록 구성될 수 있다. 코어 플랫폼은 개방형 아키텍쳐를 채용할 수 있다. 코어 플랫폼은 그것에 결합된 하나 이상의 시스템으로부터 수집된 정보들을 사용하여 안전한 동작을 유지하는 데 필요한 항공기의 시스템들, 구성들 및 절차들의 이해를 발전시키도록 구성될 수 있다. 승무원 자동화 시스템은 하드웨어 인터페이스들 또는 하나 이상의 동작 어플리케이션들을 상호연결하기 위한 미들웨어로써 동작하는 동작 시스템을 채용할 수 있다. 동작 어플리케이션들은 정상 비행 동작 어플리케이션, 이상 탐지 어플리케이션, 우발사태 동작 어플리케이션, 기밀, 감시 및 정찰("ISR") 어플리케이션, 경향 인식 어플리케이션 또는 공중 재급유 어플리케이션 중 적어도 하나를 포함할 수 있다. 휴먼 머신 인터페이스는 복수의 선택 가능한 탭들을 갖는 툴바를 포함할 수 있다. 복수의 선택 가능한 탭들은 경로 탭, 절차들 탭, 교정 탭 및 어플리케이션들 탭 중 하나 이상을 포함할 수 있다. 휴먼 머신 인터페이스는 체크리스트들, 건전성 경고들, 항공기 상태의 예측들 및 고장 예지들 중 적어도 하나를 디스플레이하도록 구성될 수 있다. 휴먼 머신 인터페이스는 작동 시스템을 통해 항공기를 제어하도록 구성될 수 있다.
본 발명의 상술한 이점들 및 다른 이점들은 이하의 명세서 및 첨부된 도면들을 참조하여 즉각 이해될 것이다.
도 1a는 예시적인 승무원 자동화 시스템의 블록도를 도시한다.
도 1b는 도 1a의 서브시스템 간 정보 데이터의 예시적인 흐름을 도시한다.
도 1c는 예시적인 코어 플랫폼의 블록도를 도시한다.
도 2는 예시적인 코어 플랫폼 아키텍쳐의 다이어그램을 도시한다.
도 3a는 루트 어플리케이션을 도시하는 휴먼-머신 인터페이스의 제1 예를 도시한다.
도 3b는 절차 체크리스트(procedural checklist) 및 항공기 건전성 경보 스크린(aircraft health alert screen)을 도시하는 휴먼-머신 인터페이스의 제2 예를 도시한다.
도 4는 예시적인 인지 시스템(perception system)의 블록도를 도시한다.
도 5a 및 도 5b는 예시적인 일차적 작동 시스템을 도시한다.
도 5c는 예시적인 이차적 작동 시스템을 도시한다.
도 1a는 예시적인 승무원 자동화 시스템의 블록도를 도시한다.
도 1b는 도 1a의 서브시스템 간 정보 데이터의 예시적인 흐름을 도시한다.
도 1c는 예시적인 코어 플랫폼의 블록도를 도시한다.
도 2는 예시적인 코어 플랫폼 아키텍쳐의 다이어그램을 도시한다.
도 3a는 루트 어플리케이션을 도시하는 휴먼-머신 인터페이스의 제1 예를 도시한다.
도 3b는 절차 체크리스트(procedural checklist) 및 항공기 건전성 경보 스크린(aircraft health alert screen)을 도시하는 휴먼-머신 인터페이스의 제2 예를 도시한다.
도 4는 예시적인 인지 시스템(perception system)의 블록도를 도시한다.
도 5a 및 도 5b는 예시적인 일차적 작동 시스템을 도시한다.
도 5c는 예시적인 이차적 작동 시스템을 도시한다.
본 발명의 바람직한 실시예들이 첨부도면들을 참조하여 이하에서 설명될 수 있다. 이하의 설명에서, 잘 알려진 기능들 또는 구성들은 불필요한 세부사항으로 본 발명을 모호하게 할 수 있기 때문에 상세하게 설명되지 않는다. 본 공개를 위하여 이하의 용어들 및 정의들이 적용될 것이다.
본 명세서에서 사용될 때, "회로(circuit)" 및 "회로망(circuitry)"이라는 용어들은 물리적 전자부품들(즉, 하드웨어), 그리고 하드웨어를 구성하고, 하드웨어에 의해 실행되고, 및/또는 이와 달리 하드웨어와 연관이 있을 수 있는 임의의 소프트웨어 및/또는 펌웨어("코드")를 지칭한다. 본 명세서에서 사용될 때, 예를 들어, 특정한 프로세서 및 메모리는 코드의 하나 이상의 라인들의 제1 세트를 실행할 때 제1 "회로"를 포함할 수 있고, 코드의 하나 이상의 라인들의 제2 세트를 실행할 때 제2 "회로"를 포함할 수 있다.
본 명세서에서 사용될 때, "및/또는"은 "및/또는"에 의해 결합된 목록 내의 아이템들 중의 임의의 하나 이상을 의미한다. 예로서, "x 및/또는 y"는 3개-원소의 집합 {(x),(y),(x, y)} 중의 임의의 원소를 의미한다. 다시 말해, "x 및/또는 y"는 "x 및 y 중 하나 또는 둘 다"를 의미한다. 다른 예로서, "x, y, 및/또는 z"는 7개-원소의 집합 {(x),(y),(z),(x, y),(x, z),(y, z),(x, y, z)} 중의 임의의 원소를 의미한다. 다시 말해, "x, y 및/또는 z"는 "x, y, 및 z 중의 하나 이상"을 의미한다. 본 명세서에서 사용될 때, "예시적인(exemplary)"이라는 용어는 비제한적인 예, 예시, 또는 실례로서 기능함을 의미한다. 본 명세서에서 사용될 때, "예컨대" 및 "예를 들어"라는 용어들은 하나 이상의 비제한적인 예, 예시, 또는 실례의 목록들을 제시한다.
본 명세서에서 사용될 때, "약(about)" 및 "근사적으로(approximately)" 라는 용어들이, 값(또는 값들의 범위)을 한정하거나 기술하기 위하여 사용될 때, 그 값 또는 값들의 범위에 합리적으로 가깝다는 것을 의미한다. 그래서, 본 명세서에서 기술된 실시예들은 언급된 값들 및 값들의 범위에만 한정되지 않고, 합리적으로 동작가능한 편차들도 포함한다. 본 명세서에서 사용될 때, 기능의 수행이 (예컨대, 조작자-설정가능 세팅(operator-configurable setting), 공장 트림(factory trim) 등에 의해) 디세이블되어 있는지(disabled) 또는 이네이블되어 있지(enabled) 않은지 여부에 관계없이, 회로망이 기능을 수행하기 위하여 필요한 하드웨어 및 코드(만일 필요하다면)를 포함할 때마다 회로망은 기능을 수행하도록 "동작가능하다(operable)".
본 명세서에서 사용될 때, 용어들 "공중 비히클(aerial vehicle)" 및 "항공기(aircraft)"라는 용어는 전형적인 활주로(runway) 및 수직 이착륙 (vertical take-off and landing: VTOL) 항공기를 모두 포함하며, 이에 한정되지 않고 비행할 수 있는 머신(machine)을 지칭한다. VTOL 항공기는 고정익(fixed-wing) 항공기(예컨대, 해리어 제트(Harrier jet)들), 회전익기(예컨대, 헬리콥터들), 및/또는 틸트-로터(tilt-rotor)/틸트-윙 항공기를 포함할 수 있다.
본 명세서에서 사용될 때, "전달하다(communicate)" 및 "전달하는(communicating)"이라는 용어는 (1) 소스(source)로부터 목적지(destination)에 데이터를 전송하는 것, 또는 이와 달리 전달하는 것, 및/또는 (2) 목적지까지 전달되게 통신 매체, 시스템, 채널, 네트워크, 디바이스, 전선, 케이블, 섬유, 회로, 및/또는 링크에 데이터를 넘겨주는 것을 지칭한다. 본 명세서에서 사용된 "데이터베이스"라는 용어는 데이터 또는 데이터의 조직체(organized body)가 표현되는 방식에 상관없이 관련 데이터의 조직체를 의미한다. 예를 들어, 관련 데이터의 조직체는 표(table), 맵(map), 그리드(grid), 포켓(packet), 데이터그램(datagram), 프레임(frame), 파일(file), 이메일(e-mail), 메시지(message), 문서(document), 리포트(report), 목록(list), 또는 임의의 다른 형태로 표현된 데이터 중의 하나 이상의 형태일 수 있다.
본 명세서에서는 특히 조종사의 보조(또는 부조종사) 또는 비행 기술자로서 기능하도록 구성되는 시스템이 개시된다. 이러한 승무원 자동화 시스템은 항공기를 이륙시부터 착륙시까지 작동하도록 구성될 수 있는데, 우발사태들(contingencies)을 감지하고 그것들에 반응하는 동안 자동적으로 정확한 비행 단계(phase)에서 필요한 비행, 비행 계획 활동들, 체크리스트들 및 절차들을 자동적으로 실행한다. 동시에, 조종사(예컨대, 인간 조종사 또는 조작자(operator))는 승무원 자동화 시스템과 동작적으로 결합된 직관적인(intuitive) 휴먼-머신 인터페이스를 통해 지속적으로 통지받을 수 있다. 즉, 승무원 자동화 시스템은 조종사에게 실시간 정보및/또는 피드백을 제공할 수 있다. 예를 들어, 승무원 자동화 시스템은 달성할 절차와 관련된 항공기의 상태를 나타낼 수 있다. 승무원 자동화 시스템은 원하는 경우 로봇 작동기들(robotic actuators)을 통해 항공기를 다시 제어하도록 구성될 수 있다.
그렇게 함으로써, 조종사는 높은 수준의 의사결정 및 비행 계획 플래닝(flight plan planning)과 같은 사람들에게 가장 적합한 업무들을 수행할 수 있다. 그러나 자동화에 가장 적합한 업무들은 예를 들어 제어장치들의 조작, 체크리스트들 실행 및 항공기 엔진과 성능 데이터 모니터링을 포함하는데, 승무원 자동화 시스템에 의해 다뤄질 수 있다. 추가적으로, 항공기 자동화 시스템은 특정 공항에서 항공 관제 컨트롤이 일반적으로 어떻게 트래픽을 경로지정하는지 또는 특정 항공기에 대한 공통적인 시스템 고장들과 같이 오로지 경험에 따라오거나 또는 현재 조종사들에게 이용불가능한 외부 정보에 액세스하는 능력을 가질 수 있다. 항공기 자동화 시스템은 보조 또는 기본 조종사로 동작하도록 구성될 수 있으며, 만약 그렇게 구성되면, 그렇게 함으로써 인간 조작자의 필요성을 완전히 배제할 수 있다. 대안으로, 승무원 자동화 시스템은 실제적으로 항공기를 제어함 없이 연속적인 항공기 상태를 모니터링과 정보 보강을 조종사에게 제공하기 위해 기능할 수 있다. 예를 들어, 승무원 자동화 시스템은 조종사, 체크리스트들 모니터링, 계기(instrumentation), 엔진 상태, 영공(airspace), 비행 상황(flight regime) 등을 위한 "눈의 두 번째 세트"로써 기능할 수 있다.
침입적이고(invasive), 상당한 설치 전문 지식을 요구하며, 그리고 항공기-특정적인(aircraft-specific) 기존의 로봇 자동조종장치들(robotic autopilots) 및 조종사 보조 시스템들과 달리, 본 발명의 일 양상에 따른 승무원 자동화 시스템은 광범위한 사용을 용이하게 하고 다양한 항공기에서의 사용을 위해 승무원 자동화 시스템이 재빠르게 적용될 수 있게 하는 신속한 비 침입적인 설치(rapid non-invasive installation)를 가능하게 하는 시스템 아키텍쳐 및 지식 획득 시스템을 채용(employ)할 수 있다. 더 나아가, 승무원 자동화 시스템의 데이터 수집 및 인지 시스템들은 기존의 로봇 자동조종장치에서 흔히 있는 일인 GPS, 가속도들, 지향(orientation) 및 헤딩에 제한되지 않는다. 실제로, 승무원 자동화 시스템은 항공기 성능을 보다 잘 포착하기 위해 독립형 센서들(standalone sensors), 계기 이미지 데이터 캡쳐(instrument image data capture)(예컨대, 온도, 고도, 레이더, 플랩 각도(flap angles) 등)를 모두 채용하거나, 측정하거나, 탐지하거나 또는 그 외에는 조종사 입력들을 수신함으로써 기존의 데이터 수집 및 인지 시스템들의 능력을 능가할 수 있다. 더 나아가, 승무원 자동화 시스템의 코어 플랫폼과 일차(primary) 및 이차(secondary) 비행 제어 작동 시스템의 디자인은 다양한 항공기에의 이식성(portability)을 가능하게 한다. 따라서, 기존의 로봇 자동조종장치들 및 조종사 보조 시스템들과 달리, 승무원 자동화 시스템은 항공기의 침입적인 수정(invasive modification)없이 일시적으로 설치될 수 있으며 항공기에서 항공기로 손쉽게 전송될 수 있다. 승무원 자동화 시스템은, 그 모듈식 디자인(modular design)을 통해, 항공기의 진화에 따라 더 이상 쓸모가 없게 되는 단일 포인트 솔루션(single point solution)을 설계할 가능성도 더 줄인다.
승무원 자동화 시스템의 서브시스템들의 조합은 조종사에게 항공기의 물리적인 상태에 대한 높은 충실도의 지식(high-fidelity knowledge)을 제공하고, 예를 들어 예측 모델들에 기초하여 예측 상태에서의 임의의 편차들을 조종사에게 통지한다. 이 상태 인식은 비상 사태들의 발생(developing emergency conditions)에 대한 경고, 연료 상태 산정(fuel state computation), 결빙 사태(icing conditions)에 대한 통지 등과 같은 조종사에게 유용한 정보로 곧바로 번역될 수 있다. 예를 들어, 또한 승무원 자동화 시스템은 디지털 비행 엔지니어의 역할을 할 수도 있으므로, 체크리스트들, 계기(instrumentation), 엔진 상태, 영공, 비행 상황(flight regime) 등을 모니터링하여 조종사에게 조언할 수도 있다.
이전부터 존재하는 항공기에 비 침입적으로(non-invasively) 설치될 수 있는 이 라이드 어롱(ride-along) 승무원 자동화 시스템은 시각적으로 및 다른 센서들을 통해 항공기의 상태를 인지(perceive)하고, 항공기 상태 벡터(aircraft state vector) 및 다른 항공기의 정보를 유도하고, 예상되는 항공기 상태로부터의 임의의 편차를 조종사 또는 관제 타워로 전달한다. 승무원 자동화 시스템은 비 침입적으로 설치될 수도 있지만(예컨대, 인지 시스템을 통해), 대안적으로 침입적일 수 있다. 예를 들어, 승무원 자동화 시스템은 항공기 상태 모니터링 시스템을 통해 조종실 계기판(예컨대, 계기판의 반대편을 통해)과 전자적으로 결합할 수 있다. 대안적으로, 승무원 자동화 시스템은 필수적일 수 있고 항공기의 제작 중에 영구적으로 설치될 수 있다. 작동 시스템과 함께, 승무원 자동화 시스템은 항공기를 더 제어할 수 있고 항공기를 자율적으로 항법할 수 있다.
시스템 레벨 아키텍쳐. 비행 활동의 실행과 관련된 업무들 및 작업량을 공유하기 위해, 승무원 자동화 시스템(100)은 항공기 제품, 모델 또는 타입에 관계없이 조종사가 비행 동안에 일상적으로 수행할 행동들을 실행할 수 있어야 한다. 일 양상에 따른 승무원 자동화 시스템(100)의 예시적인 시스템 아키텍쳐는 도 1a 내지 도 1c에 도시되어 있다. 도 1a에 도시된 바와 같이, 코어 플랫폼(102)은 하나 이상의 인터페이스를 통해 다른 서브시스템들을 연결하는 중앙 서브시스템으로서 동작할 수 있다. 서브시스템들은 유선 및/또는 무선 통신 프로토콜들 및 하드웨어를 사용하여 소프트웨어 및/또는 하드웨어 인터페이스들(156)을 통해 서로 통신할 수 있다. 도 1b는 다양한 서브시스템들 간의 정보(예컨대, 데이터)의 예시적인 흐름을 도시한다.
승무원 자동화 시스템(100)은 아래에 열거된 것과 같은 복수의 서브 시스템들과 동작적으로 결합된 코어 플랫폼(102)을 포함할 수 있다. 승무원 자동화 시스템(100)의 복수의 서브시스템들 각각은 전체 승무원 자동화 시스템(100)이 다른 항공기로 실질적으로(substantially) 복사될 수 있도록 모듈식일 수 있다. 예를 들어, 다양한 서브 시스템들은 하나 이상의 소프트웨어 및/또는 하드웨어 인터페이스들(156)을 사용하여 코어 플랫폼(102)을 통해 서로 제거 가능하도록(romovably) 및 통신 가능하도록(communicatively) 결합될 수 있다. 그러나 소정의 양상들에 따르면, 승무원 자동화 시스템(100)은 이와 달리 항공기의 시스템과 통합될 수 있으며, 그로써 곧바로 항공기에서 모든 센서들 및 지시기들을 채용할 수 있다. 예를 들어, 승무원 자동화 시스템(100) 또는 그 구성요소들은 항공기의 설계 및 제조 중에 항공기에 통합될 수 있다.
복수의 서브시스템들은 예를 들어 인지 시스템(106), 작동 시스템(108), 휴먼 머신 인터페이스("HMI") 시스템(104) 및 비행 제어 시스템(flight control system)(116)을 포함할 수 있으며, 이들 각각은 코어 플랫폼(102)과 동작적으로 결합될 수 있다. 소정의 양상들에 있어서, 인지 시스템(106)의 필요성은 다른 항공기 상태 모니터링 시스템의 사용을 통해 완화되거나 배제될 수 있다. 예를 들어, 승무원 자동화 시스템(100)은 계기판(instrument panel)과 (예컨대, 통신 가능하도록 또는 전자적으로) 결합될 수 있고, 또는 그렇지 않으면 항공기 또는 항공기의 기존 시스템들과 함께 통합될 수 있다. 그러나 예상할 수 있듯이, 이러한 통합은 항공기 또는 항공기 배선의 어느 정도의 수정을 필요로 할 것이다. 승무원 자동화 시스템(100) 및/또는 코어 플랫폼(102)은 또한 지식 획득 시스템(114) 및 통신 시스템(122)을 포함하거나 이들과 동작적으로 결합할 수도 있다. 모듈식 구성은 조작자가 불필요한 시스템들 또는 모듈들을 제거/비활성화하거나 또는 추가적인 시스템들 또는 모듈들을 추가/설치할 수 있게 한다. 예를 들어, 승무원 자동화 시스템(100)이 오직 HMI 시스템(104)을 통해 조종사에게 정보를 제공하도록 구성된 경우(즉, 항공기를 제어하는 능력 없이), 작동 시스템(108)은 무게, 비용 및/또는 전력 소모를 줄이기 위해 제거되거나 또는 비활성화될 수 있다. 따라서, 구성에 따라, 승무원 자동화 시스템(100)은 본 발명의 사상과 범위로부터 벗어남 없이 더 적거나 또는 추가적인 모듈, 구성요소들, 또는 시스템들로 구성될 수 있다.
작동 시, 비행 제어 시스템(116)은 다른 서브시스템(예컨대, 인지 시스템(106) 등)으로부터의 정보 데이터에 기초하여 항공기 상태를 유도하고, 다른 서브 시스템(예컨대, 작동 시스템(108))이 항공기 안정성을 유지하는 방식으로 작동(예컨대, 동적으로)하도록 지시한다. 예를 들어, 비행 제어 시스템(116)은 비행 제어 시스템(116)에 의해 생성된 상태 및 명령 정보를 코어 플랫폼(102)에게 전송하는 동안, 코어 플랫폼(102)으로부터 비히클 모드 명령들 및 구성 데이터를 수신할 수 있다. 예를 들어, 코어 플랫폼은 항공기 상태 모니터링 시스템(112), 인지 시스템(106), 또는 이들의 조합으로부터 얻어질 수 있는 비행 상황 데이터에 적어도 부분적으로 기초하여 하나 이상의 명령을 항공기의 비행 제어 시스템(116)에게 전달하도록 구성될 수 있다.
비행 제어 시스템(116)은 고정익 항공기 및 회전익 항공기(rotary wing aircraft)에 사용된 것과 같은 기존의 비행 제어 장치들 또는 시스템들을 포함하거나 그들과 통신할 수 있다. 통신 시스템(122)은 승무원 자동화 시스템(100)이 다른 장치들(원격 또는 원거리 장치들을 포함하는)과 예를 들어 네트워크를 통해 통신할 수 있게 한다. 통신 시스템(122)은 통신 명령들 및 구성 데이터를 코어 플랫폼(102)으로부터 수신하는 한편, 통신 시스템(122)으로부터의 상태 및 응답 정보를 코어 플랫폼(102)에게 보낼 수 있다.
코어 플랫폼(102). 도 2는 예시적인 코어 플랫폼(102)의 아키텍쳐 다이어그램을 도시한다. 비히클-비종속적인(vehicle-agnostic) 승무원 자동화 시스템(100)을 가능하게 하기 위해, 코어 플랫폼(102)은 초기 전이 및 설정 단계를 통해 특정 항공기 또는 구성에 따라 특정하게 만들어질 수 있는 미들웨어(middleware)를 제공하거나 또는 그렇지 않으면 미들웨어로써 기능(serve)할 수 있다. 다시 말하자면, 임무 제어 시스템(110)은 운영 시스템(206)을 제공할 수 있는데, 이것은 한 세트의 동작 어플리케이션들(202)에게 서비스들을 제공하고 한 세트의 하드웨어 인터페이스들(204) 또는 HMI 시스템(104) 중의 하나 이상에게 출력 신호들을 제공하는 한편, 그 어플리케이션들을 가능하게 하기 위해 필수적인 데이터를 수집하고 로깅(logging)한다.
코어 플랫폼(102)은 전반적인 시스템 상태를 결정하기 위해 인지 시스템(106) 및 HMI 시스템(104)으로부터의 입력들을 그 획득된 지식 베이스(knowledge base)와 합성하는 일차 자율 에이전트(the primary autonomous agent) 및 의사 결정자로서 기능한다. 코어 플랫폼(102)은 다양한 센서 슈트들(sensor suites)로부터의 입력들을 처리할 수 있고, 현재 항공기 상태의 이해가 되도록 결과 정보를 종합할 수 있다. 승무원 자동화 시스템(100)의 상태 추정과 관련되어 있을 때, 결과 정보는 승무원 자동화 시스템(100)의 조종사 의도의 이해, 시스템 건전성 및 적절한 항공 절차들의 이해를 포괄하는 항공기 특정 파일과 비교될 수 있다. 결과 상태 지식 및 관련된 권장 사항들은 인간 조종사에게 HMI 시스템(104)을 통해 전해질 수 있고, 또는, 소정의 양상들에서, 자율적인 작동을 가능하게 하기 위해 비행 제어 시스템(116) 및/또는 작동 시스템(108)에게 전해질 수 있다. 승무원 자동화 시스템(100)은 추후의 분석을 위해 주어진 비행의 로그(log)를 더 생성할 수 있으며, 이는 상세한 훈련 및 작동 비행 보고들을 제공할 수 있는 조종사 훈련을 용이하게 하는데 사용될 수 있다. 로그들은 예를 들어 비행 작동 품질 보증 분석, 유지보수 분석 등과 관련하여 사용될 수 있다.
도시된 바와 같이, 코어 플랫폼(102)은 임무 제어 시스템(110) 및 비행 제어기들(118)을 포함할 수 있으며, 각각은 하나 이상의 소프트웨어 및/또는 하드웨어(예컨대, 영구적이거나 또는 제거 가능한 커넥터들)와 소프트웨어의 조합일 수 있는 하드웨어 인터페이스들(156)을 통해 서로 그리고 다른 서브시스템들과 통신하도록 구성된다. 코어 플랫폼(102)은 트렌드 분석들(trend analytics)(예측 경고들(predictive warnings))을 위한 임의의 모듈들 및 기계 학습 루틴들(machine-learning routines)뿐만 아니라 항공기 및 절차 상태들을 추적하는 다양한 소프트웨어 프로세스들을 호스트(host)할 수 있다. 소정의 양상들에서, 승무원 자동화 시스템(100) 및/또는 코어 플랫폼(102)은 리소스 충돌들을 해결하는데 있어서 물리적인 장치 구성 또는 사용자 개입의 필요 없이 승무원 자동화 시스템(100) 내에서 서브시스템의 하드웨어 구성요소의 발견을 용이하게 하는 컴퓨터 버스(computer bus) 및 사양(specification)(예컨대, 인터페이스로서)을 채용할 수 있다. 이러한 구성은 "플러그 앤 플레이(plug and play)"로 지칭될 수 있다. 따라서, 사용자는 실질적인 수정 또는 집적 노력을 필요로 함 없이 코어 플랫폼(102)을 통해 시스템 또는 서브시스템들(예컨대, 모듈들로서)을 승무원 자동화 시스템(100)에 손쉽게 추가하거나 제거할 수 있다.
코어 플랫폼(102) 출력들은 HMI 시스템(104)에게 메시지들을 제공하기 위해 사용될 수 있다. 메시지들은 예를 들어 체크리스트 진행 상황, 개시될 우발사태들, 제기될 경고들 등을 나타낼 수 있다. 코어 플랫폼(102)은 또한 예를 들어 성능 검토 능력을 제공하기 위하여 그리고 공중 리셋(in-flight reset)에 대한 견고성을 제공하기 위하여, 비행 데이터 레코더(flight data recoder)를 포함할 수도 있다. 하드웨어 및 다양한 컴퓨터들은 또한 높은 내구성을 가질 수도 있으며 인지 컴퓨터와 같은 다른 장치들과 하우징을 공유할 수도 있다. 후술하는 바와 같이, 코어 플랫폼(102)은 글로벌 포지셔닝 시스템(GPS)/관성 항법 시스템(inertial navigation system: INS)(154) 및 전력 관리 시스템(예컨대, 28VDC 전력)과 동작적으로 결합할 수 있다. 코어 플랫폼(102)은 또한 예를 들어 성능 검토 능력을 제공하기 위하여 그리고 공중 리셋에 대한 견고성을 제공하기 위하여 비행 데이터 레코더를 포함할 수도 있다.
임무 제어 시스템(100)은 일반적으로 임무 관리자(132), 표준 인터페이스(130)(예컨대, STANAG 인터페이스), 상태 인식 관리자(158) 및 다른 동작 구성요소들(120)(예컨대, 하드웨어 및 소프트웨어 컨트롤러 및/또는 인터페이스들)을 포함하며, 각각은 하나 이상의 데이터 버스들(124)을 통해 서로 통신 가능하도록 결합된다. 코어 플랫폼(102)의 개방형 아키텍쳐는 데이터 버스(124)를 통해 시스템들로부터 수신된 추가적인 데이터의 결합을 가능하게 한다. 소정의 양상들에서, 임무 제어 시스템(110)은 비행 상황 데이터를 수집하도록 비히클 시스템 인터페이스(vehicle systems interface)를 통해 항공기의 하나 이상의 조종실 계기와 결합될 수 있다. 다른 양상들에서, 임무 제어 시스템(110)은 항공기 및/또는 인지 시스템(106)에 직접 연결을 통해 비행 상황 데이터를 수집하거나 생성할 수 있는 항공기 상태 모니터링 시스템(112)을 통해 항공기 상태 인터페이스를 거쳐 비행 상황 데이터를 수집할 수 있다.
도시된 바와 같이, 임무 제어 시스템(110)은 이차적 작동 시스템(108b)(예컨대, 자율적인 동작이 요구되는 경우), 인지 시스템(106), 및 휴먼-머신 인터페이스(126)(예컨대, 조종사로부터의 입력들을 전하고 조종사에게 정보를 디스플레이하는 소프트웨어 및/또는 하드웨어)와 지상국(128)을 포함하는 HMI 시스템(104)과 동작적으로 결합될 수 있다. 임무 제어 시스템(110)은 임무 관리자(132)를 통해 비행 제어기들(118)과 통신할 수 있다.
비행 제어기들(118)은 예를 들어 자동조종장치 관리자(134) 및 비히클 관리자(136)를 포함할 수 있다. 비히클 관리자(136)는 일반적으로 항법과 항공기의 위치 및 상태를 결정에 책임이 있을 수 있다. 비히클 관리자(136)는 인지 모듈(138)을 통해 인지 시스템(106)으로부터 수신된 그리고 항법 모듈(140)을 통해 GPS/INS 시스템(154)으로부터 수신된 정보를 이용하여 항공기의 추정된 상태를 결정하는 상태 추정 모듈(142)과 결합될 수 있다.
자동조종장치 관리자(134)는 일반적으로 예를 들어 비히클 매니저(136)와 임무 제어 시스템(110)으로부터 수신된 정보에 기초하여 항공기의 비행을 제어할 책임이 있다. 자동조종장치 관리자(autopilot manager)(134)는 승무원 자동화 작동 모듈(aircrew automation actuation module)(144) 및 항공기 작동 모듈(146)뿐만 아니라, 특히 새롭거나 이전부터 존재할 수 있는(그리고 비행 제어기(150)를 포함하는) 비행 제어 시스템(152)을 제어한다. 항공기 작동 모듈(146)이 항공기 제어장치들(148)(aircraft controls)(예컨대, 다양한 비행 표면들 및 작동기들)을 제어할 수 있는 반면, 승무원 자동화 작동 모듈(144)은 일차적 작동 시스템(108a)을 제어할 수 있다.
소정의 양상들에서, 비행 제어기(118)의 구성요소들은 비행 제어 시스템(116)의 특정 구성요소들과 중첩될 수 있다. 예를 들어, 소정의 양상들에서(예컨대, 중복(redundancy)이 바람직하지 않고 비침입적인 통합이 가능한 경우), 코어 플랫폼(102)은 기존의 항공기 소프트웨어 및/또는 하드웨어의 일부를 활용할 수 있고, 그럼으로써 특정 비행 제어기(118) 구성요소들 및/또는 GPS/INS 시스템(154)과 같은 추가적인 하드웨어에 대한 필요성을 배제할 수 있다.
개방형 아키텍쳐. 코어 플랫폼(102)은 개방형 아키텍쳐에서 나머지 서브시스템들(예컨대, 개별 어플리케이션들)을 제어하고 연결하는 승무원 자동화 시스템(100)의 중앙 서브시스템 또는 인터페이스로서 기능한다. 나머지 서브시스템들은 예를 들어 비행 제어 시스템(116)(임의의 비행 계획 능력들을 포함함), HMI 시스템(104), 작동 시스템들(108)(예컨대, 원하는 경우에 자율적인 동작을 제공하기 위한 일차적 및 이차적 작동 시스템들), 인지 시스템(106), 지식 획득 시스템(114), 및 다른 서브시스템들(236)을 포함한다. 따라서, 다른 승무원 자동화 시스템(100) 하드웨어의 제어는 새로운 시스템들 또는 다른 외부 비행 계획 지원 기술의 신속한 통합을 가능하게 하는 하드웨어의 특정 부품에 따라 특정한 별도의 어플리케이션들을 통해 제공될 수 있다.
코어 플랫폼(102)의 아키텍쳐는 새로운 항공기로 전이하거나 새로운 비행 계획 특징/능력을 부가할 때 신속한 이식성 및 확장가능성을 가능하게 한다. 따라서, 어플리케이션은 승무원 자동화 시스템(100)이 그 항공기에 대해 특정하거나 그렇지 않으면 필요한 정보를 획득하거나 또는 새로운 능력을 제공하는 것을 가능하게 하도록 사용될 수 있다. 예를 들어, 전이 및 설정은 개별 어플리케이션들에 의해 다뤄질 수 있는데, 이들은 비행 계획, 항공기 또는 승무원 요구사항들에 따라 교환될 수 있는 승무원 자동화 시스템(100)의 능력들의 증가하는 라이브러리뿐만 아니라 항공기-특정적인 기능들을 나타내는 다른 서브시스템들 또는 코어 플랫폼(102) 내에서 동작한다. 소정의 양상들에서, 전이 절차는 (절차 에디터와 같은) 승무원 자동화 시스템(100) 외부의 소프트웨어 어플리케이션들에 의해 지원될 수 있다.
항공기 데이터 구조(208). 동작 시스템(206)은 동작 어플리케이션들(202), 하드웨어 인터페이스들(204), 및 지식 획득 시스템(114)과 같은 다른 서브시스템들을 상호연결하는 미들웨어로서 동작한다. 동작 시스템(206)은 지식 데이터베이스(201), 절차 데이터베이스(212) 및 상태 데이터베이스(214)를 포함할 수 있는 항공 데이터 구조(208)를 채용할 수 있다.
항공기 데이터 구조(208)는 코어 플랫폼(102)이 항공기의 시스템들, 그들의 구성, 및 안전한 동작을 유지하기 위한 필수적인 절차들의 완전한 이해를, 그리고 그 항공기의 공인 조종사가 가질 것으로 기대되는 모든 다른 지식 및 전문 지식을 발전시킬 수 있게 함으로써 비히클-비종속적인 승무원 자동화 시스템(100)을 용이하게 한다. 항공기 데이터 구조(208)는 현재 동작중인 항공기에 대한 필수적인 정보(예컨대, 비행 제어 모델, 동작 절차들, 항공기 시스템들 등), 내부 상태 센서들로부터 수신한 데이터 및 다른 서브시스템들 또는 센서들을 포함하는 지식 획득 시스템(114)(후술함)에 의해 채워질(populated) 수 있다.
항공기 데이터 구조(208)는 항공기를 동작시키는데 필수적인 모든 정보를 포함하도록 지식 획득 단계 동안(예컨대, 초기 설정 동안) 특정 항공기에 채워지고 조정될 수 있다. 예를 들어, 새로운 항공기로 전이할 때, 지식 획득 시스템(114)은 레이아웃(예컨대, 조종실 계기판들과 같은 제어기들/판독기들의), 성능 파라미터들, 항공기의 다른 특성들을 결정하기 위해 미리 정의된 활동들을 수행할 수 있다. 미리 정의된 활동들은 예를 들어 다음을 포함할 수 있다: (1) 어떤 시스템들이 탑재되었는지 및 어떻게 그것들이 구성되었는지, 작동 한계들 등에 대하여 승무원 자동화 시스템(100)에 통지하는 항공기 시스템 모델의 생성; (2) 정상 및 비정상 상황들에서 항공기를 동작하는 방법을 승무원 자동화 시스템(100)에게 통지하고, 체크리스트들의 체계화를 더 포함하는 절차 체계화; (3) 항공기를 비행하는 방법 및 어떤 항공기 구성들에 대해 기대되는 성능을 승무원 자동화 시스템(100)에게 통지하는 공기역학적 모델; 및 (4) 임무 동작들에 대한 정보.
코어 플랫폼(102)은 이 정보를 한 세트의 내부 상태 센서들로부터의 데이터와 조합할 수 있으며, 이는 또한 중복성(redundancy) 및 시스템 견고성 또한 향상시키며, 그렇게 함으로써 승무원 자동화 시스템(100)이 항공기 상태 및 시스템 상태들의 매우 정확한 추정을 생성하게 하고 예상되는 행동과의 편차를 식별하게 한다. 비행 동작들 동안, 데이터 구조는 승무원 자동화 시스템(100)의 내부 상태 감지뿐만 아니라 특히 승무원 자동화 시스템(100)의 인지 시스템(106), HMI 시스템(104)에 의해 모아진 실시간 데이터로 동적으로 업데이트된다. 주어진 항공기에 대한 항공기 데이터 구조(208)가 채워지면, 항공기 데이터 구조(208)는 항공기 라이브러리에 보유될 수 있으며 승무원 자동화 시스템(100)을 이용할 수 있는 동일한 제조사 및 모델의 모든 다른 항공기에 사용될 수 있다. 항공기 데이터 구조(208)는 승무원 자동화 시스템(100)에 의해 추가 데이터가 생성되거나 및/또는 수집됨에 따라 더 개선될 수 있다.
동작 어플리케이션들(202). 코어 플랫폼(102)은 승무원 자동화 시스템(100)에 복수의 동작 어플리케이션들(202)을 제공할 수 있다. 이러한 동작 어플리케이션들(202)의 예시들은 정상 비행 동작 어플리케이션(normal flight operation application)(216), 이상 탐지 어플리케이션(anomaly detection application)(218), 우발사태 동작 어플리케이션(220), 기밀(intelligence), 감시(surveillance) 및 정찰(reconnaissance)("ISR") 어플리케이션(222)(예컨대, ISR 궤도들), 경향 인식 어플리케이션(trend recognition application)(238) 또는 공중 재급유 어플리케이션(aerial refueling application)(316)과 같은 다른 비행 계획-특정적 활동 어플리케이션들(flight plan-specific activity applications)(224)을 제한 없이 포함할 수 있다.
정상 비행 동작 어플리케이션(216)은 승무원 자동화 시스템(100)이 이륙부터 착륙까지 우발사태들이 없는 것으로 가정하면서 미리 결정된 비행 계획을 비행하게 한다. 정상 비행 동작 어플리케이션(216)은 특정 비행 단계에 의해 요구되는 정상 비행 활동의 연속적인 실행에 특정적이다. 미리 결정된 비행 계획은 날씨, 항공 교통 관제 명령들, 항공 교통 등과 같은 예기치 않은 교란들로 인해 비행 중에 수정될 수 있다.
이상 탐지 어플리케이션(218)은 비정상 상황들의 존재를 탐지하고 우발사태들이 발생했는지를 식별하기 위해 항공 상태를 모니터링하고, 클러스터(cluster)하고 및 센서 입력들을 분류하도록 기계-학습 기술들을 채용한다. 이상 탐지 어플리케이션(218)은 감지된 상태들을 특정 항공기에 대한 동작 문서에 정의된 한 세트의 임계값들과 비교하도록(예컨대, 미리 결정된 대기 속도(airspeed), 엔진 온도 등을 결코 초과하지 않도록) 구성된다. 이상 탐지 어플리케이션(218)은 또한 감지된 상태들을 승무원 자동화 시스템(100)에 이용가능한 추가적인 정보와 비교할 수 있으며, 미리 결정되거나 동적으로 결정된 임계값들(예컨대, 경고 임계값들 등)을 충족시키는 것에 응답하여 경고들 또는 다른 메시지들을 생성할 수 있다.
우발사태 조건의 경우, 우발사태 동작 어플리케이션(220)은 항공기의 안전한 동작을 유지하거나 비행을 안전하게 전환하기 위해 우발사태 어플리케이션(220)에 의해 특정된 필요한 미리 결정된 체크리스트들, 절차들 및 행동들을 실행한다. 특히, 예상 성능으로부터의 일탈이 관측된 경우, 조종사는 비정상 상태를 경고받을 수 있으며, 그럼으로써 잠재적인 실수들을 완화하거나 회피할 수 있다. 항공기가 특정 동작 에러(예컨대, 조종사가 유도한 진동들)에 민감한 경우, 승무원 자동화 시스템(100)이 그러한 이벤트들을 식별하고 완화할 수 있다. 이상이 탐지된 경우, 우발사태 동작 어플리케이션(220)은 HMI 시스템(104)을 통해 조종에게 통지하거나 조종사와 상호작용하고, 궁극적으로 이상에 응답하기 위한 필요 절차(들)을 실행한다. 마지막으로, ISR 어플리케이션(222) 및 다른 비행 계획-특정적 활동 어플리케이션들(224)은 임무와 관련된 동작들을 이행하도록 지시들, 알고리즘들 또는 정보를 제공할 수 있다.
경향 인식 어플리케이션(238)은 예를 들어 지식 획득 시스템(114)에 기초한 기계-학습을 사용하여 발전된 경향 분석을 제공한다. 소정의 양상들에서, 경향 인식 어플리케이션(238)은 데이터 또는 그렇지 않으면 트리거(trigger)를 이상 탐지 어플리케이션에 제공할 수 있다. 예를 들어, 경향 인식 어플리케이션(238)이 바람직하지 않은 경향을 감지하는 경우, 상기 경향은 이상(anomaly)으로 플래그될 수 있고 이상 탐지 어플리케이션(218)에게 보고될 수 있다.
하드웨어 인터페이스들(204). 동작 어플리케이션들(202)과 관계된 다양한 정보는 예를 들어 일차적 작동 인터페이스(226), 이차적 작동 인터페이스(228), 항공기 상태 인터페이스(230), HMI 인터페이스(232) 및 다른 인터페이스(234)를 통해 일차적 작동 시스템(108a), 이차적 작동 시스템(108b), 인지 시스템(106), 항공기 상태 모니터링 시스템(112), HMI 시스템(104), 및 다른 서브시스템들(236) 사이에서 통신된다.
휴먼/머신 인터페이스(HMI) 시스템(104). HMI 시스템(104)은 조종사(예컨대, 탑승한 또는 원격의 인간 조종사)를 위한 제어 및 통신 인터페이스를 제공한다. HMI 시스템(104)은 조종사가 승무원 자동화 시스템(100)을 지시할 수 있게 하는 비행 계획 관리자로서 동작하도록 구성 가능하다. HMI 시스템(104)은 조종사와 승무원 자동화 시스템(100) 간의 효과적이고 효율적이고 그리고 지연에 관대한(latency-tolerant) 통신을 가능하게 하도록 글래스 콕핏들(glass cockpits), 무인 항공 비히클("UAV") 지상국들 및 전자 비행 가방들(electronic flight bags: EFB)의 요소들을 조합할 수 있다. 일반적으로 말하자면, EFB는 비행 승무원들이 전통적으로 종이 참조들을 사용하여 달성되었었던 다양한 기능들을 수행하도록 허락하는 전자 정보 관리 장치이다. HMI 시스템(104)은 터치 스크린 그래픽 사용자 인터페이스(touch screen graphical user interface: GUI) 및/또는 음성 인식 시스템들(speech-recognition systems)에 기초할 수 있는 휴먼-머신 인터페이스(126)를 포함할 수 있다. 휴먼-머신 인터페이스(126)는 예를 들어 태블릿 컴퓨터, 랩탑 컴퓨터, 스마트 폰, 또는 그들의 조합을 채용할 수 있다. 휴먼-머신 인터페이스(126)는 조종사 선호도들에 따라 조종사의 근처에(예컨대, 요크(yoke) 상에 - 종종 체크리스트들로써, 또는 무릎끈(knee-strap) 상에) 고정될 수 있다. 휴먼-머신 인터페이스(126)는 조종실에 제거 가능하도록 결합될 수 있고 또한, 소정의 양상에서, 조종실 내에 통합된 디스플레이(예컨대, 기존의 디스플레이)를 채용할 수 있다.
도 3a는 단일 스크린 터치 인터페이스 및 음성 인식 시스템을 갖는 예시적인 휴먼-머신 인터페이스(126)를 도시한다. HMI 시스템(104)은 조종사가 승무원 자동화 시스템(100)에게 업무들을 명령하고 승무원 자동화 시스템(100)으로부터 피드백 또는 지시들을 수신하고, 조종사와 승무원 자동화 시스템(100) 간의 업무들의 할당을 변경하고, 그리고 현재 승무원 자동화 시스템(100)에 대해 가능한 동작 어플리케이션들(202)을 선택할 수 있도록 하면서, 조종사와 승무원 자동화 시스템(100) 사이의 통신의 일차적 채널로서 기능한다.
도 1b에 도시된 바와 같이, 예를 들어 HMI 시스템(104)은 HMI 시스템(104)에 의해 생성되거나 또는 조종사에 의해 입력된 모드 명령들을 코어 플랫폼(102)에게 전송하는 한편, 코어 플랫폼(102)을 통해 서브시스템으로부터 상태 정보를 수신할 수 있다. 조종사는 원격이거나(예컨대, 지상에서 또는 다른 항공기에서) 또는 탑승해 있을 수 있다(즉, 항공기 내에서). 따라서, 소정의 양상들에서, HMI 시스템(104)은 통신 시스템(122)을 통해 네트워크를 너머 원격으로 용이하게 될 수 있다.
휴먼-머신 인터페이스(126). 도 3a 및 도 3b에 도시된 바와 같이, 휴먼-머신 인터페이스(126)는 음성 통신들을 가능하게 하는 음성 인식 인터페이스 및 태블릿 기반 GUI를 채용할 수 있다. 휴먼-머신 인터페이스(126)의 목적은 조종사가 인간 비행 엔지니어 또는 부조종사와 상호 작용하는 방식과 유사한 방식으로 조종사가 코어 플랫폼(102)의 지식 기반과 상호 작용할 수 있도록 하는 것이다.
휴먼-머신 인터페이스(126)는 어떤 동작 어플리케이션들(202)이 현재 설치되었는지, 어떤 동작 어플리케이션들이 운영중(running)인지 그리고, 그것들이 활성화된 경우 동작 어플리케이션들(202)이 어떤 행동들을 취하고 있는지 뿐만 아니라, 승무원 자동화 시스템(100)의 현재 상태(그것의 현재 설정들과 책임들)를 디스플레이할 수 있다. 휴먼-머신 인터페이스(126)의 GUI 디스플레이는 또한 야간-가시 고글들(night-vision goggles)과 양립될 수도 있으므로 조종사의 안경류에 상관없이 가시적이다. 음성 인식 시스템은 체크리스트들을 훑어보고 비행 갑판에서 통신할 때 인간 비행 승무원에 의해 사용되는 언어적 통신들의 동일한 유형들을 재현하는데 사용될 수 있다. 소정의 양상들에서, 음성 인식은 상기 시스템이 명령들을 인식하는데 실패하거나 또는 동작들의 부적절한 모드들로 변경하는 가능성을 최소화하도록 조종사 팀들에 의해 사용되는 코드화된(codified) 통신들의 동일한 표준들로 제한될 수 있다. 음성 인식 시스템은 음성 훈련 프로토콜을 통해 주어진 조종사의 음성을 학습/인식하도록 구성될 수 있다. 예를 들어, 조종사는 음성 인식 시스템이 조종사의 방언으로 트레이닝될 수 있도록 미리 결정된 스크립트를 말할 수 있다.
휴먼-머신 인터페이스(126)는 승무원 자동화 상태 어플리케이션(302)을 통한 전체 승무원 자동화 시스템(100), 인지 상태 어플리케이션(304)을 통한 인지 시스템(106), 자동조종장치 상태 어플리케이션(306)을 통한 자동조종장치(해당되는 경우), GPS 상태 어플리케이션(308)을 통한 GPS/INS 시스템(154), 및 임의의 다른 어플리케이션 또는 시스템 상태 정보(310)를 포함하는 다양한 동작들의 상태 및/또는 세부사항들을 제공할 수 있다. 휴먼-머신 인터페이스(126)의 디스플레이는 조종사에 의해 커스터마이징될 수 있다. 예를 들어, 조종사는 선택 및 드래그 조작을 통해 또는 승무원 자동화 설정 어플리케이션(312)을 통해 달성될 수 있는 디스플레이 아이콘들 및/또는 동작 어플리케이션들(202)의 일부를 추가, 재구성 또는 제거하기를 바랄 수 있다. 휴먼-머신 인터페이스(126)는 항공기의 동작 상태에 관해 조종사에게 더 알려줄 수 있고 지시들 또는 조언을 조종사에게 제공할 수 있다.
도시된 바와 같이, 휴먼-머신 인터페이스(126)는 경로 탭(route tab)(328), 절차들 탭(procedures tab)(330), 교정 탭(calibration tab)(332) 및 어플리케이션들 탭(applications tab)(334)과 같은 다양한 선택 가능한 탭들을 툴바에 제공할 수 있다. 예를 들어, 조종사가 어플리케이션들 탭(334)을 선택할 때, 휴먼-머신 인터페이스(126)는 예를 들어 정상 비행 동작 어플리케이션(216), 우발사태 동작 어플리케이션(220), 승무원 자동화 설정 어플리케이션(312), 게이지 어플리케이션(314), 및 공중 재급유 어플리케이션(316)을 포함하는 승무원 자동화 시스템(100)(예컨대, 코어 플랫폼(102)) 상에 설치된 다양한 동작 어플리케이션들(202)을 디스플레이할 수 있다.
승무원 자동화 설정 애플리케이션(312)을 선택하는 것은 조종사가 승무원 자동화 시스템(100)의 설정을 변경, 재할당 또는 그렇지 않으면 편집하는 것 및/또는 동작 애플리케이션들(202)을 설치하는 것을 가능하게 한다. 게이지 애플리케이션(314)을 선택하는 것은 휴먼-머신 인터페이스(126)가 예를 들어 위치, 방향, 속도, 고도, 피치, 요(yaw) 등을 포함하는 항공기의 다양한 동작 상태들을 표시하도록 야기할 수 있다. 인지 시스템(106), 또는 다른 센서로부터 모아질 수 있는 항공기의 다양한 동작 조건들은 영숫자 문자들(alphanumeric characters) 또는 그래픽 다이얼들로 (예컨대, 조종사의 선호 설정에 따라) 디스플레이될 수 있다. 결국, 공중 재급유 어플리케이션(316) 아이콘을 선택하는 것은 승무원 자동화 시스템(100)이 공중(mid-air) 재급유 동작을 용이하게 하거나 조화하기 위해 미리 결정된 프로토콜을 수행하도록 야기할 수 있다. 예를 들어, 공중 재급유 어플리케이션(316)을 선택할 때, 승무원 자동화 시스템은 다른 항공기와 조화하여 재급유를 용이하게 할 수 있고 동일한 것(예컨대, 항공기 위치, 대기속도, 연료 창구 개방 등을 보장하는 것)을 하기 위해 필요한 체크리스트들을 수행할 수 있다. 승무원 자동화 시스템에 의한 임무 동작들의 수행을 가능하게 하는 추가적인 임무 어플리케이션들이 포함될 수 있다.
조종사가 루트 탭(328)을 선택할 때, 휴먼-머신 인터페이스(126)는 다양한 지상점들(waypoints)(320)과 관련된 비행 경로를 따라 항공기의 현재 위치를 나타내는 아이콘(322)을 갖는 영역 맵(326)을 디스플레이할 수 있다. 아이콘(322)을 선택하는 것(예를 들어, 탭핑(tapping), 클릭킹(clicking) 등)은 항공기의 다양한 동작 조건들(예컨대, 식별, 고도, 속도, 헤딩 등)을 제공하는 대화창(324)을 디스플레이하도록 야기할 수 있다. 영역 맵(326)은 맵 제어 윈도우(318)를 사용하여 저장되거나, 내보내거나(export), 회전되거나 또는 패닝될 수 있다. 영역 맵(326)은 정적 이미지 또는 데이터 세트(또는 데이터베이스)로써 (예컨대, 통신 시스템(122)을 통해) 저장되거나 내보내질 수 있다. 조종사가 교정 탭(332)을 선택할 때, 휴먼-머신 인터페이스(126)는 항공기의 교정(calibration)을 디스플레이할 수 있으며, 이에 따라 조종사는 동일한 것을 추가로 수정(revise)할 수 있다.
HMI 시스템(104)은 편차 경고들(예컨대, "왼쪽 엔진 EGT가 정상보다 5도 높으며 상승 중")과 고장 예지(failure prognosis) 뿐만 아니라 항공기 상태의 예측들(예컨대, 연료 소비 및 예측된 나머지 범위) 및 코어 플랫폼(102)으로부터의 건전성 경고들 및 체크리스트 검증을 포함하는 직관적인 디스플레이 및 인터페이스를 제공할 수 있다. 따라서, 조종사가 도 3b에 도시 된 바와 같이 절차들 탭(330)을 선택할 때, 조종사는 임의의 건전성 경고들을 검토할 수 있을 뿐만 아니라 체크리스트 아이템들을 검토 및 모니터링할 수 있다. 실제로, HMI 시스템(104)의 기능은 예를 들어 Pilot's Operating Handbook(POH)로부터 이전에 불러온 정보에 기초하여 아이템들이 완료되지 않았으면 조종사에게 경고들을 제공하면서 그리고 인지 시스템(106)이 그들의 완료를 인지할 때 아이템들을 완료로 마킹하면서 체크리스트 모니터링 및/또는 실행을 용이하게 하는 것이다. 승무원 자동화 시스템(100)은 또한 POH 및 다른 지식 소스들에 기초하여 예상되는 것과 현재의 시스템 상태를 비교하면서 시스템 건전성을 모니터링하고, 우발사태들에 대한 적절한 대응들(responses)을 안내한다. 소정의 양상들에서, 조종사 또는 코어 플랫폼(102)은 체크리스트 행동들이 수행될 때 승인할 수 있고, HMI 시스템(104)은 자동적으로 정확한 체크리스트를 적절하게 진행한다. HMI 시스템(104)은 예컨대 일련의 지상점들로써 입력될 수 있는 조종사의 주의를 항공기가 비행 계획을 진행함에 따라 예측된 이벤트들, 정상을 벗어나는 범위 값들을 디스플레이하는 계기들, 또는 다루어지지 않은(unattended) 체크리스트 아이템들에 조종사의 주의가 향하도록 하기 위해 시각적 및 청각적 경고들을 줄 수 있다. 예를 들어, 도시된 바와 같이, 업무들의 리스트는 업무가 완료되었는지, 완료되고 있는지, 또는 완료될 필요가 있는지를 나타내는 지시자들과 나란히 제공될 수 있다(예컨대, 완료를 포함하기 위한 "체크 마크" 아이콘, "진행 중" 아이콘, 및 "완료될" 아이콘). 유사하게, 건전성 위해요소들(health hazards)의 리스트는 범위를 벗어난 하나 이상의 동작 조건들을 지시하도록 하나 또는 상응하는 아이콘들과 더불어 제공될 수 있다. 예를 들어, 연료가 적으면 저연료 지시자(low fuel indicator)가 저연료 아이콘에 나란히 제공될 수 있다.
업무 할당. HMI 시스템(104)은 만일 승무원 자동화 시스템(100)에 의해 실행된 활동들이 만약 있다면 조종사가 그것들을 제한할 수 있게 한다. HMI 시스템(104)은 조종사와 승무원 자동화 시스템(100) 간의 업무들의 할당, 그들의 책임들, 및 그 둘 간의 정보의 통신을 정의할 수 있고, 그렇게 함으로써 조종사의 협력적인 팀원으로서 기능할 수 있다. 따라서, 승무원 자동화 시스템(100)은 구성에 따라, 순전한 자문 역할(즉, 항공기에 대한 임의의 제어 없이), 완전히 자율적인 역할(즉, 조종사 개입 없이 비행 제어를 컨트롤링(controlling)), 또는 비행 컨트롤러들을 제어할 수 있는 능력을 갖는 자문 역할로 동작할 수 있다. HMI 시스템(104)은 조종사가 승무원 자동화 시스템(100)이 책임지고 있는 비행 동작의 양상들을 특정하는 경우인 전이 단계를 조종사가 거칠 수 있도록 추가로 설계될 수 있다. 예를 들어, HMI 시스템(104)은 승무원 자동화 시스템(100) 또는 조종사가 리스트상의 주어진 업무에 책임이 있는지 여부를 조종사가 선택할 수 있는 업무들의 리스트를 디스플레이할 수 있다. 업무들의 리스트는 아래에서 설명되는 절차 에디터로부터 HMI 시스템(104)에 제공될 수 있다. 조종사가 승무원 자동화 시스템(100)을 더 잘 신뢰하도록 항공기 데이터 구조(208)가 채워지고 개선되면, 조종사는 조종사를 기본 모드(primary mode)에서 감독 모드(supervisory mode)(즉, 완전히 자율적인 역할)로 전이하면서 승무원 자동화 시스템(100)이 추가적인 행동들을 수행하도록 허용할 수 있다. 이 감독 모드에서, 조종사 상호 작용들은 높고, 목표 기반(goal-based)의 레벨에 있을 수 있으며, HMI 시스템(104)은 이러한 업무들을 지원할 뿐만 아니라 문제 해결(troubleshooting)을 위한 다른 레벨들에서의 조작자 통찰력(operator insight)을 허용한다. 전술한 바와 같이, 소정의 양상들에서, 모든 업무들은 승무원 자동화 시스템(100)이 자문 역할을 제공하도록 두면서 조종사에 의해 수행될 수 있다.
모드 인식(Mode awareness). 임의의 자동화 시스템을 채용할 때의 리스크는 조종사 측에서의 모드 혼란(예컨대, 조종사가 자동화 시스템이 작업을 다룰 것이라고 믿으면서 상기 작업을 방치하는 경우)에 대한 가능성이다. HMI 시스템(104)은 먼저 승무원 자동화 시스템(100)과 조종사 간의 정확한 기능 및 전술한 업무 할당을 생성함으로써 그러한 모드 혼란을 회피한다. 실제로, HMI 시스템(104)은 조종사가 휴먼-머신 인터페이스(126)를 통해 승무원 자동화 시스템(100)을 직접 명령 및 구성할 수 있게 하고 모드 인식을 보장하기 위해 항공기 자동화 시스템(100)이 어떤 동작들을 취하고 있는지를 조종사가 이해하는 데 필요한 정보를 디스플레이한다. 다르게 말하자면, 모드 인식은 일반적으로 시스템의 모드가 조작자에 의해 기대되는 동작 모드와 일치하는 경우의 상태를 지칭한다. 휴먼-머신 인터페이스(126)는 조종사가 항공기 자동화 시스템(100)이 동작중인 모드를 항상 인식하고 있음을 보장하는데 필요한 정보를 디스플레이할 수 있다. 추가적으로, HMI 시스템(104)은 개별 임무 애플리케이션들(예를 들면, 동작 애플리케이션들(202))을 위한 휴먼 인터페이스로서 기능한다.
항공기 상태 모니터링 시스템(112). 항공기 상태 모니터링 시스템(112)은 실시간 항공기 상태를 수집하고, 결정하고 또는 그렇지 않으면 인지한다. 전술한 바와 같이, 항공기 상태 모니터링 시스템(112)은 특히 항공기로의 직접 연결(예컨대, 항공기에 일체화되거나 또는 그렇지 않으면 하드와이어드됨)을 통해 또는 인지 시스템(106)을 통해 실시간 항공기 상태를 인지할 수 있다. 인지 시스템(106)이 사용될 때, 항공기 상태 모니터링 시스템(112)은 전용 제어기(예컨대, 프로세서)를 포함하거나 또는 인지 시스템(106)의 제어기(402)를 공유할 수 있다. 예를 들어, 인지 시스템(106)은 조종실 계기들에 의해 디스플레이된 비행 상황 정보를 판독하거나 이해(comprehend)하기 위해 식별 알고리즘들, 음향 시스템(acoustic system) 및 시각 시스템(vision system)의 조합을 채용할 수 있다. 예시적인 조종실 계기들은 예를 들어 고도계, 대기속도 지시기, 수직 속도 지시기, 하나 이상의 나침반 시스템(예컨대, 자기 나침반), 하나 이상의 자이로스코프 시스템(예컨대, 자세 지시기(attitude indicator), 헤딩 지시기, 선회 지시기(turn indicator)), 하나 이상의 비행 감독 시스템, 하나 이상의 항법 시스템(예컨대, 초고주파 전방향 범위(very-high frequency omnidirectional range: VOR), 무지향성 라디오 비콘(non-directional radio beacon: NDB)) 등을 포함한다. 인지 시스템(106)은 픽셀 밀도, 눈부심 강인성(glare robustness) 및 중복(redundancy)을 최대화하도록 계기판 상에 트레이닝된 하나 이상의 광 센서(예컨대, 3개 이상의 경량 머신 비전 카메라들(lightweight machine vision cameras)) 및 프로세서를 포함할 수 있다. 하나 이상의 광 센서는 예를 들어 이더넷을 통해 인지 컴퓨터에 유선으로(wiredly) 연결될 수 있다. 하나 이상의 광 센서는 계기판과 함께 가시선(line of sight)과 함께 설치되어야 하지만, 조종사를 방해하지 않아야 한다.
인지 시스템(106)에 의해 인지된 비행 상황 데이터는 실시간으로 인코딩될 수 있고 코어 플랫폼(102)에 제공될 수 있다. 코어 플랫폼(102)의 개방형 아키텍처는 인지 시스템(106)에 의해 생성된 비행 상황 데이터를 보강(augment)하도록 데이터 버스(124)를 통해 수신된 추가적인 데이터의 결합을 가능하게 한다. 예를 들어, 도 1b에 도시된 바와 같이, 항공기 상태 모니터링 시스템(112) 및/또는 인지 시스템(106)은 인지 시스템(106)에 의해 모아진 또는 그렇지 않으면 항공기 상태 모니터링 시스템(112)에 의해 수집된 상태 및 비행 상황 정보(예컨대, 비행 상황 데이터)를 코어 플랫폼(102)에게 보내는 동안, 코어 플랫폼(102)으로부터 구성 데이터 및 명령들을 수신할 수 있다.
도 4는 특히 코어 플랫폼(102)(이것은 비행 제어 시스템(116)과 같은 다른 서브 시스템들에 결합됨)과 동작적으로 결합된 예시적인 인지 시스템(106), GPS/INS 시스템(154) 및 임의의 다른 입력 시스템들(412)을 도시한다. 인지 시스템(106)은 기본(basic) 아날로그 항공기 계기들에서부터 고도로 집적화된 글래스 콕핏 항공전자 슈트들(glass cockpit avionics suites)에 이르기까지 다양할 수 있는 조종실 레이아웃들로부터 항공기 상태를 유도하기 위해 사용될 수 있는 비행 상황 데이터를 생성하도록 특히 조종실 계기들을 시각적 및/또는 음향적으로 모니터링한다. 대기속도 및 고도와 같은 물리적 상태를 유도하는 것 외에도, 인지 시스템(106)은 연료 게이지들 및 라디오들과 같은 항공기 시스템들에 특정한 계기들을 모니터링할 수 있으며, 작동 시스템(108)의 상태 및 포지셔닝에 관한 이차적 피드백을 제공할 수 있다.
도시된 바와 같이, 인지 시스템(106)은 카메라들(410)(시각 시스템을 위해 사용됨), 마이크로폰(408)(음향 시스템을 위해 사용됨) 및/또는 다른 센서들(406)(예컨대, 온도 센서들, 포지션 센서들(positional sensors), 관성 센서들 등)과 같은 복수의 센서들 및 데이터베이스(404)와 동작적으로 결합된 인지 제어기(402)를 포함할 수 있다. 예를 들어, 인지 제어기(402)는 GPS/INS 시스템(154) 및 다른 입력 시스템들(412)과 같은 외부 구성요소들, 데이터베이스(404) 및 복수의 센서들로부터 수신된 조작된 정보와 수신된 정보에 기초하여 코어 플랫폼(102)에게 비행 상황 데이터를 공급(feed)하도록 (또는 그렇지 않은 경우 지시하도록) 구성된 프로세서일 수 있다.
시각 시스템(Vision system). 인지 시스템(106)은 조종실 계기들 상에 디스플레이된 것을 판독함으로써 항공기의 상태를 연속적으로 모니터링하도록, 가능하게는 모션 캡처 마커들(moion capture markers)을 포함하는 단안시(monocular) 또는 양안시(stereovision) 시스템을 채용할 수 있다. 소정의 양상들에서, 두 개의 유리한 지점으로부터의 장면에 관한 정보를 비교함으로써, 두 개의 패널들에서 물체들의 상대적 포지션들을 조사함으로써 3D 정보가 추출될 수 있다. 시각 시스템은 다양한 조명 조건들 및 조종실 레이아웃들 및 크기들에서의 그들의 포지션들뿐 아니라 스위치들 및 계기들(예컨대, 글래스 게이지들, 물리적 증기 게이지들 등)을 정확하게 모니터링하는 데 사용될 수 있다. 양안시 시스템 및/또는 마커들을 사용하는 것은 또한 임의의 로봇 구성 요소들과 조종사 간의 충돌들을 방지하도록 감지하는 것을 제공한다.
시각 시스템은 한 슈트의 고화질의, 양안 카메라들(stereo cameras) 및/또는 LIDAR 레이저 스캐너를 채용할 수 있다. 시스템은 모든 비행 계기들로부터의 데이터를 인식하는 것을 할 수 있고 항공기 특정 시스템들의 상태(예컨대, 잔여 연료)를 디스플레이하는 게이지들 및 스위치 노브들의 상태를 유도할 수 있다. 그것은 또한 조종사 행동들로 기인한 사소한 변화들을 탐지하도록 충분한 해상도로 패널의 상태를 인식하는 것을 할 수 있다. 인지 시스템(106) 컴퓨터 상의 머신 비전 알고리즘들(106)은 코어 플랫폼(102)에게 실시간 조종실 상태 업데이트를 제공하도록 차단기들(breakers), 스위치들, 트림 설정들(trim settings), 및 스로틀 레버들(throttle levers)과 같은 기계 아이템들 및 계기들(게이지들, 조명들, 바람 수정각 패널(wind correction angle panel), 글래스 콕핏에서의 다기능 디스플레이 또는 기본 비행 디스플레이의 개별 요소들)을 '판독'한다.
인지 시스템(106)은 기본 아날로그 항공기 계기들에서부터 고도로 통합된 "글래스 콕핏" 항공전자 슈트들에 이르는 조종실 레이아웃들로부터 항공기 상태를 유도하는 것을 할 수 있다. 시각 시스템을 통해, 항공기로부터의 데이터 피드(data feed)를 위한 요구사항이 배제되는데, 이는 항공기 전체에 걸친 이동성(portability)을 허가/증가시킨다. 그러나, 가능한 경우, 승무원 자동화 시스템(100)은 또한 항공기의 데이터 피드에 (예컨대, 데이터 포트를 통해서) 결합될 수도 있다. 더 나아가, 코어 플랫폼(102)에 대해 설명된 애플리케이션 접근법을 사용하여, 상이한 조종실 레이아웃들이 상이한 하부 동작 애플리케이션들(underlying operation applications)(202)을 사용하여 처리(address)될 수 있고 이해될 수 있다. 예를 들어, 승무원 자동화 시스템(100)은 그래픽 다이얼(예컨대, 아날로그 "스팀(steam)" 게이지들 또는 그 디지털 표현) 또는 글래스 콕핏과 같은 계기들에 디스플레이된 값들을 유도하도록 게이지 애플리케이션(314)을 채용할 수 있다. 이 접근법은 또한 승무원 자동화 시스템(100)이 특히 조종실에 디스플레이된 기상 레이더들, 트래픽 디스플레이들 및 지형도들을 모니터링하는 동작 애플리케이션들을 실행하는 것을 가능하게 한다.
승무원 자동화 시스템(100)이 이동가능하도록 만들기 위해서, 새로운 조종실 레이아웃을 신속하게 학습하고 계기들의 단위 또는 위치 및 스케일링에서의 미묘한 차이들을 코드화하는 과정은 인지 시스템(106) 설계에 의해 처리된다. 예를 들어, 초기 지식 습득 단계 동안, 계기들 및 스위치들의 위치와 규모는 그래픽 다이얼 게이지들, CRT 디스플레이, LCD 등의 번호(글래스 콕핏) 또는 그래픽 다이얼(원형 다이얼)의 포지션의 추출에 대한 실시간 업무를 줄이면서, 특정 항공기를 위하여 인코딩될 수 있고 검증(verify)될 수 있다. 조종실 계기의 구분적 평면 구조는 인지 시스템(106)이 (예컨대, 호모그래피 방법들(Homography methods)을 사용하여) 이미지들을 해석하고 그것을 초기 지식 획득 단계 동안에 생성된 미리 맵핑된(pre-mapped) 데이터에 대조하여 등록할 수 있게 한다. 따라서, 라이브 이미지(live imagery)는 이전에 주석이 첨부된 모델과 비교될 수 있으며 등록될 수 있고, 그렇게 함으로써 데이터의 해석이 크게 단순해진다.
작동 시스템(108). 원하는 때에, 작동 시스템(108)은 항공기의 비행 및 전체적인 동작을 안내하도록 코어 플랫폼(102)을 통해 명령된 행동들을 실행한다. 승무원 자동화 시스템(100)의 작동 시스템(108)은 조종사에 의해 수행되는 활동들을 방해하지 않으면서 항공기의 비행 및 전체적인 동작을 안내하도록 코어 플랫폼(102)에 의해 명령된 행동들을 실행한다. 예를 들어, 도 1b에 도시된 바와 같이, 작동 시스템(108)은 작동 시스템(108)에 의해 생성된 상태 및 응답 정보를 코어 플랫폼(102)에 전송하면서, 코어 플랫폼(102)으로부터 작동 명령들 및 구성 데이터를 수신할 수 있다.
유인 항공기 조종실들은 인간의 도달 영역(human reach envelope)을 위해 설계되었으며, 그러므로, 모든 조종실 제어기들은 맞먹는 사이즈를 가진(comparably sized) 로봇/기계 조작기에 의해 접근 가능하다. 그러나, 긴급 동작에 필요한 신속한 실행과 함께 고중력(high-G) 및 진동 환경들에서 모든 가능한 조종실 상의 모든 개개의 스위치, 노브, 레버 및 버튼을 작동할 수 있는 조작기는 승무원 자동화 시스템(100)에 요구되는 것보다 비싸고, 무겁고, 그리고 더 침입적일 것이다.
항공기에서의 이동성을 보다 효과적으로 달성하기 위해, 승무원 자동화 시스템(100)은 이차적 비행 제어장치들(예컨대, 스위치들, 노브들, 락커들, 퓨즈들 등)의 작동으로부터 일차적 비행 제어장치들(스틱/요크, 스틱, 사이드스틱(side-stick) 또는 집단(collective), 방향타 페달들(rudder pedals), 브레이크들 및 스로틀들)의 작동을 분리할 수 있다. 이 접근법은 항공기가 진화함에 따라 쓸모없게 될 단일 포인트 솔루션을 설계할 가능성을 줄인다. 따라서, 승무원 자동화 시스템(100)은 조종실 내의 작동기들을 물리적으로 제어하도록 일차적 작동 시스템(108a) 및 이차적 작동 시스템(108b)을 채용할 수 있다. 보다 구체적으로, 일차적 작동 시스템(108a)은 조종사에 의한 이러한 제어장치들의 사용을 모호하게 함 없이 이차적 작동 시스템(108b)이 이차적 비행 제어장치들을 작동시킬 수 있는 동안에 일차적 비행 제어장치들을 작동시킬 수 있다. 일차적 작동 시스템(108a) 및 이차적 작동 시스템(108b)은 비행 동작들 중에 오늘날의 비행 갑판들 상에 존재하는 모든 표준 제어장치들을 집단적으로 작동시키도록 구성된다.
후술하는 바와 같이, 이차적 작동 시스템(108b)이 이차적 비행 제어장치들(예컨대, 스위치들, 노브들, 로커들, 퓨즈들 등)과 같은 일차적 작동 시스템(108a)에 의해 쉽게 액세스되지 않는 제어장치들을 작동하는데 중점을 두는 한편, 일차적 작동 시스템(108a)은 일차적 비행 제어장치들(스틱/요크, 스틱, 사이드스틱 또는 집단, 방향타 페달들, 브레이크들 및 스로틀들)을 작동시키는 것에 중점을 둔다.
일차적 작동 시스템(108a). 일차적 작동 시스템(108a)은 항공기를 안전하게 동작시키는데 필요한 일련의 제어장치들에 중점을 둔다. 도 5a 및 도 5b에 도시된 바와 같이, 일차적 작동 시스템(108a)은 관절 아암(articulating arm)(502)(예컨대, 로봇 부속기(appendage) 또는 "아암(arm)"), 및 일차적 비행 제어장치들(스틱/요크, 스틱, 사이드스틱 또는 집단, 방향타 페달들, 브레이크들 및 스로틀들)과 다른 도달이 용이한 제어장치들을 작동시키는 스틱/요크 작동기(stick/yoke actuator)(510)를 갖는 프레임을 포함한다. 작동기들은 전기적, 공기압(pneumatic) 및/또는 유압(hydraulic) 기술들 중 하나 이상을 통해 구동될 수 있는 선형(직선), 회전(원형) 또는 진동 작동기(oscillatory actuators)들 중 하나 이상일 수 있다.
프레임(516)은 표준 항공기의 좌석 내에 맞도록(fit) 사이즈가 이루어지고(sized) 형상화될(shaped) 수 있다. 이를 위해, 프레임의 풋프린트(516)(footprint)는 평균적인 인간의 "앉은(seated)" 풋프린트와 거의 같거나 작은 사이즈이어야 한다. 작동 시스템(108)은 경량 금속들, 금속 합금들 및/또는 복합 재료들을 사용하여 제작될 수 있다.
스틱/요크 작동기(510). 스틱/요크 작동기(510)는 스틱/요크 그리퍼(stick/yoke gripper)(512)를 사용하여 항공기의 기존 스틱/요크(514)에 결합하고 맞물릴(engage) 수 있다. 스틱/요크 그리퍼(512)는 보편적이고 다양한 형식(form)의 스틱/요크들 및/또는 제어 휠들에 맞물릴 수 있도록 사이즈가 이루어지고 형상화될 수 있다. 스틱/요크 작동기(510)는 앞으로(forward), 뒤로(backward), 왼쪽으로, 오른쪽으로, 및 그 사이 포지션들로 스틱/요크(514)를 움직이도록 구성될 수 있다. 스틱/요크 그리퍼(512)는 스틱/요크(514) 상에 위치된 버튼들 및/또는 스위치들을 작동시키기 위한 하나 이상의 작동기를 더 포함할 수 있다.
관절 아암(502). 작동기-제어(actuator-controlled) 관절 아암(502)은 통상적으로 부조종사의 아암들에 의해 차지되는 공간을 차지하도록 사이즈가 이루어지고, 형상화되고 및 구성될 수 있으며, 그렇게 함으로써 항공기 전체에 걸친 이동성을 보장한다. 다중 자유도(multiple degrees of freedom: DOF) 움직임에서의 움직임을 가능하게 하기 위해, 관절 아암(502)은 복수의 힌지 또는 피봇 조인트들(hinged or pivotal joints)(506)을 사용하여 접합된 복수의 아암 세그먼트들(선형적인지(linear), 굽었는지(curved) 또는 각이 졌는지(angled) 여부에 관계없이)을 포함할 수 있다. 관절 아암(502)은 그의 원위단에 그리퍼(gripper)(504)를 포함할 수 있다. 그리퍼(504)는 다중 DOF 연결(multiple-DOF connection)을 통해 관절 아암(502)에 결합될 수 있다. 관절 아암(502)의 베이스(base)는 가동 베이스(movable base)(508)를 통해 회전 가능하고 슬라이딩 가능하게 프레임(516)에 결합될 수 있다. 예를 들어, 관절 아암(502)은 프레임(516)에 고정될 수 있는 하부 베이스(508b)와 슬라이딩 가능하게 결합된 상부 베이스(508a)와 결합될 수 있다. 상부 베이스(508a)는 예를 들어 레일들(rails)과 볼 베어링들(ball bearings)의 조합을 사용하여 하부 베이스(508b)에 대해 슬라이딩할 수 있다. 소정의 양상들에서, 상부 베이스(508a)는 X 축 및 Y 축을 따라 하부 베이스(508b)에 대해 슬라이딩할 수 있다.
관절 아암(502)은 관절 아암(502)의 정확한 포지셔닝을 보장하도록 그 각각의 자유도를 위한 인코더(예컨대, 트윈 18 비트 인코더들(twin 18-bit encoders))로 장착될 수 있다. 관절 아암(502)을 손상시키지 않으면서 원하는 경우에 조종사에 의해 관절 아암(502)이 과출력(overpowered)될 수 있도록, 내부 클러치들은 각각의 힌지 또는 피봇 조인트(506)에 제공될 수 있다. 이러한 경우에, 승무원 자동화 시스템(100)은 인코더를 사용하여 관절 아암(502)의 위치 또는 포지션을 결정할 수 있다.
그리퍼(504)는 예를 들어 스로틀 레버들 등에 결합하도록 그렇지 않으면 맞물리도록 구성될 수 있다. 그리퍼(504)는 또한 승무원 자동화 시스템(100)이 비행 제어 작동기가 어떻게 파지(grasped)되었는지를 추정하고 그것을 적절하게 던지도록 모션을 조정하는 것을 허용하기 위하여 힘 및 압력 검출을 제공할 수도 있다. 모션이 실행되면, 동일한 피드백은 원하는 스위치 구성이 달성되었는지를 결정하는 데 사용될 수 있다. 소정의 양상들에서, 관절 아암(502)에는 타겟을 발견하고 치는 것을 가능하게 하는 전자 장치(예컨대, 호밍 디바이스(homing device))가 설치될 수 있다.
이차적 작동 시스템(108b). 일반적으로 항공기 제조사들과 유형들에 걸쳐 동일한 근방에 위치된 기본 비행 제어장치들과 달리, 이차적 비행 제어장치들(예컨대, 항공전자장비들(avionics), 스위치들, 노브들, 로커들(rockers), 토글들(toggles), 커버된 스위치들, 퓨즈들 등)의 위치는 항공기마다 일관되거나 공간적으로 포함되지 않는다.
이차적 작동 시스템(108b)은 일차적 작동 시스템(108a)에 의해 쉽게 액세스되지 않는 제어장치들을 작동시키는 것에 중점을 둔다. 예를 들어, 몇몇 스위치들은 (특히 난기류 비행 조건들에서) 로봇 아암을 사용하여 그것들을 조작하는 것을 잠재적으로 어렵게 만들면서 심지어 캡틴의 머리 바로 위의 오버헤드 패널 상에 있을 수 있다. 따라서, 다른 작동기들은 자체적으로 포함된(self-contained) 이차적 작동 시스템(108b)에 할당될 수 있는 한편, 몇몇 작동기들은 전술한 일차적 작동 시스템(108a)에 할당될 수 있다.
이차적 작동 시스템(108b)은 관심있는 패널에 직접 탑재되고 작동중인 특정 패널에 맞게 교정된(calibrated) 적응가능한(adaptable) XY-플로터(XY-plotter) 또는 갠트리 시스템(gantry system)의 형태로 제공될 수 있다. 이차적 작동 시스템(108b)은 바람직하게는 보편적이며(universal) 크기 조절이 가능하다(resizable). 예시적인 XY-플로터가 도 5c에 도시되었다. XY-플로터는 플로터의 레일들(520)로서 기능하는 사각 프레임, 관심있는 제어장치들을 조작할 수 있는 다중 인터페이스들(예컨대, 스위치 작동기(532) 및 노브 작동기(530))을 갖는 회전 가능한 다중 툴(multi-tool)(528), 및 레일들(524)의 X축 세트와 레일들(522)의 Y축 세트를 따라 프레임 내에서 이러한 다중 툴(526)을 이동시키는 제어 시스템을 포함할 수 있다.
사용할 때, 플로터는 다중 툴(528)을 위치로 이동시키고, 올바른 조작기 인터페이스를 선택하며, 그리고 관심있는 이차적 비행 제어장치를 조작한다. 예를 들어, 다중 툴(528)은 스위치 작동기(532)를 사용하여 바이너리 스위치들 및/또는 커버된 스위치들을 플립(flip)할 수 있고 노브 작동기(530)를 사용하여 노브들을 돌릴(twist) 수 있다. 스위치 작동기(532) 및/또는 노브 작동기(530)는 회전 가능한 스위치 아암(534)과 같은 관절형 또는 회전하는 부재를 통해 다중 툴(528)에 연결될 수 있다.
사용하지 않을 때, 다중 툴(528)은 패널의 방해를 방지하도록 홈 포지션으로 (예컨대, 먼 코너로 자동적으로 항법하여) 복귀할 수 있다. 다중 툴(528)은 조종사의 손을 감지했을 때 방해되지 않게 움직이도록 센서들(예컨대, 근접 센서들)로 장착될 것이다. 새 항공기에서의 플로터의 초기 설치 동안에, 이차적 비행 제어 패널의 위치, 유형 및 포지션이 인코딩될 수 있다. 특정한 이차적 비행 제어 패널이 인코딩되면, 구성은 항공기 데이터 구조(208)에 저장될 수 있고 그리고 승무원 자동화 시스템(100)이 동일한 항공기 또는 동일한 유형의 항공기에 설치될 때 로드될 수 있다. 특정 양상들에서, 예를 들어 풋 페달들(예컨대, 브레이크 및/또는 방향타 페달들)과 같은 조종실의 발밑 공간에 위치된 제어기들을 작동시키도록 추가적인 작동기들이 제공될 수 있다.
지식 획득 시스템(114). 지식 획득 시스템(114)은 승무원 자동화 시스템(100)이 항공기 특정 정보를 결정할 수 있게 하는데 필요한 지식 기반을 모으고 및/또는 생성한다. 이것은 항공기 성능 특성들, 제한사항들, 체크리스트들, 및 절차들(응급 절차들을 포함함) 및 항공기에서의 우발사태들을 정의하는 기준에 대한 지식을 포함한다. 데이터는 인코딩된 데이터(예컨대, 매뉴얼들, 조종사 브리핑들, 조종사 동작 핸드북(pilot operating handbook) 등으로부터) 및 비행 중에 획득된 데이터(예컨대, 센서들을 통해)의 조합으로부터 유도될 수 있는데, 이는 오프라인 기계 학습 및 트렌드 분석을 지원한다. 인코딩될 데이터는 절차들 내부와 절차들 사이 양쪽 모두에서의 업무들의 흐름 및 절차들의 내용들을 설명하는 .xml 포맷으로 로드될 수 있다.
예를 들어, 도 1b에 도시된 바와 같이, 지식 획득 시스템(114)은 지식 획득 시스템(114)에 의해 생성된 상태 및 응답 정보, 및 구성 데이터를 코어 플랫폼(102)에 전송하는 동안, 코어 플랫폼(102)으로부터 동작 명령들을 수신할 수 있다.
지식 획득 시스템(114)의 동작은 예를 들어 항공기 시스템 모델링(aircraft system modeling), 절차 체계화(procedure codification) 및 공기역학적 모델링(aerodynamic modeling)을 포함하는 3개의 과정들로 일반적으로 분할될 수 있다. 항공기 시스템 모델링 과정은 이용가능한 탑재 시스템들(onboard systems), 상기 탑재 시스템들이 어떻게 구성되었는지 및 작동 한계들 등에 관한 정보를 승무원 자동화 시스템(100)에게 제공한다. 절차 체계화 과정은 정상 및 비정상 상황들에서의 항공기 동작에 대한 정보를 승무원 자동화 시스템(100)에게 제공한다. 절차 체계화는 예를 들어 체크리스트들의 체계화를 포함할 수 있다. 마지막으로, 공기역학적 모델링 과정은 주어진 항공기 유형 및 구성에 대해 어떤 성능을 기대할지 및 항공기 비행에 대한 정보를 승무원 자동화 시스템(100)에게 제공한다.
지식 습득 단계 동안, 상황이 비정상적이거나 또는 우발사태인 것으로 간주되는 조건들 또한 반드시 확립되어야 한다. 이러한 조건들은 엔진 과속도 또는 대기속도 제한 초과와 같이 빈번하게 분리(discrete)될 것이다. 기계 학습을 사용하여, 승무원 자동화 시스템(100)은 조종사에 의해 비행된 일련의 기내 조작들을 관찰함으로써 그것의 공기역학 및 제어 모델들을 미세 조정(fine-tune)할 수 있다. 이 정보는 다른 관련된 데이터들뿐만 아니라 비행 동적 데이터, 동작 제한사항들, 절차들, 항공기 시스템들 및 레이아웃들을 포함한다. 서면 정보 이외에, 승무원 자동화 시스템(100)은 경험이 풍부한 조종사들의 과거 사건들 및 경험에 기초하여 정보를 체계화할 수 있다. 기계 학습은 지식 습득 과정이 효율적이고 빠르게 수행되는 것을 가능하게 한다.
승강기 자동화 시스템(100)의 인지 시스템(106) 및 작동 시스템(108)을 사용하여, 비행기 조종실 또는 사실적인 시뮬레이터에서의 계기들 및 제어장치들은 조종사가 전형적인 비행 프로파일의 모션들을 통과함에 따라 모니터링된다. 조종사의 행동들을 관찰하는 것은 승무원 자동화 시스템(100)이 조종사로부터 직접 학습하고 주어진 동작에 대해 매끄럽고 전문적인 컨트롤을 모방하는 것을 허용한다. 이 과정은 항공기 동작들이 주어진 상황에 무엇을 해야할 것인지에 있어서 고도로 구조화되어 있다는 사실로부터 유익하다 - 기계 학습은 게다가 무언가가 실행되는 방법의 체계화를 가능하게 한다.
항공기 데이터 구조(208)의 채움(population)은 XML(Extensible Markup Language)을 사용하여 달성될 수 있다. 보다 구체적으로는, 채워질(populated) 때 코어 플랫폼(102)이 항공기를 구성하고 동작하게 하는 것을 허용하는 일련의 필드들 및 데이터 트리들의 세트를 포함하는 XML 데이터 구조가 채용될 수 있다. 소정의 양상들에서, 승무원 자동화 시스템(100)은 인간이 데이터를 효율적이고 정확하게 입력할 수 있게 하는 소프트웨어 툴 및/또는 비행 문서들의 자연어 해석(natural language interpretation)을 채용할 수 있다.
소정의 양상들에서, 비행기 비종속적인 특징들(airplane agnostic features)의 세트가 생성되고 코딩될 수 있다. 예를 들어, 랜딩 기어 철회(retraction), 다중엔진 항공기 상의 엔진 출력 절차들(engine out procedures) 및 스톨 복구(stall recovery)와 같은 절차들은 여러 유형의 항공기에서 걸쳐 유사하며 특정 기체(airframe)에 대해 최소한의 수정만을 필요로 할 것이다. 더욱이, 기본적인 기체 제한사항들(속도 초과 절대금지와 같은)은 특정 번호들로서 입력되는 것만을 필요로 하며 공칭 기간(nominal period of time)에서 비행 매뉴얼들에서부터 입력될 수 있다.
절차 에디터. 항공기 특정적 정보는 예를 들어 항공기 동작들의 직접적인 모니터링을 통하는 것뿐만 아니라 서면 문서(예컨대, 조종사 동작 핸드북, 유지보수 매뉴얼 등)를 사용하여 전환 기간 동안 모아질 수 있다. 이 지식 획득 과정의 출력은 항공기 데이터 구조(208)이며, 이는 코어 플랫폼(102)과 관련하여 위에서 설명되었다. 이 항공기 데이터 구조(208)에 포함된 것은 동작 절차들, 이용가능한 시스템들과 그들의 설계들, 조종실 레이아웃들 및 항공기의 안전한 동작에 필요한 모든 다른 정보일 수 있다. 소정의 양상들에서, 항공기 자동화 소프트웨어 개발 키트(aircrew automation software development kit)는 소프트웨어/비행 제어장치들(flight controls) 엔지니어가 하루에 하나의 항공기 서브시스템(예컨대, 전기식의 또는 유압식의(hydraulic))을 특정하고, 코딩하고 및 단위테스트(unit-test)하도록 허용할 수 있다. 승무원 자동화 소프트웨어 개발 키트는 비행 매뉴얼의 절차들을 Matlab State Flow 및 Simulink와 호환가능한 상태 머신들로 전환할 수 있는 툴들(tools)을 제공할 수 있는데, 그리고 나서 이것은 코어 플랫폼(102)에서의 포함을 위해 절차들을 C 언어로 자동 코딩(auto-code)할 수 있다. 승무원 자동화 소프트웨어 개발 키트는 또한 코어 플랫폼(102)에 테스트하기 위한 인터페이스들뿐만 아니라 단위레벨(unit-level)을 위한 테스트 코드(test code)를 생성할 수도 있다. 예를 들어, 승무원 자동화 시스템(100) 또는 조종사가 리스트 상의 주어진 업무에 책임이 있는지 여부를 조종사가 선택할 수 있는 때에 절차 에디터는 업무들의 리스트를 제공할 수 있다.
비행 제어의 지식 획득. 비행 제어(flight control)의 지식 획득의 제1 단계는 조종사와 함께 비행 중에 사용되고 개선되는 무차원 안정성 미계수들(non-dimensional stability derivatives)의 형태로 수학적 모델을 생성하도록 Athena Vortex Lattice("AVL") 방법을 사용한다. 기본 비행 제어 메커니즘들이 교정되면, 시스템 ID 트레이너 어플리케이션(system ID trainer application)은 특정한 안정성 미계수들을 식별하도록 설계된 일련의 비행 조작들을 수행하는데 사용될 수 있다. 상기 데이터는 제어기(controller)에서 사용하기 위해 업데이트된 안정 미계수들로 자동적으로 처리된다. 제어기는 자동튜너(auto-tuner)를 채용할 수 있다. 동일한 업데이트된 안정성 미계수들은 제어기들이 비행에 앞서 적절하게 수행하는 유효성 단계(validation step)로써 6 자유도(6-DOF) 시뮬레이션에서 사용된다. 비행 제어의 지식 획득을 수행하는 것의 추가적인 이점은 그것이 다량의 공식적인 절차적 지식의 개선 및 결합을 가능하게 한다는 것이다. 절차들이 개별 단계들을 배치하더라도, 이러한 단계들이 어떻게 실행될지에 대한 세부사항(fine detail)이 빠져있을 수 있다(예컨대, 단계들 사이의 대기에 시간이 얼마나 걸리는지 또는 스로틀 증가가 얼마나 급격한지).
항공기 비행 성능 특성들의 리버스 엔지니어링. 온보드 데이터 획득 유닛들(on-board data-acquisition units)을 통해 측정될 수 있는 항공기 성능 특성들은 일반적으로 항공기 및 항공전자 제조사들에 의해 소유(proprietary)로 간주된다. 이 정보는 비행 시뮬레이션들, 항공기 건전성 모니터링, 항공기 개발 및 더 많은 것을 위해 활용될 수 있다. 현재, 온보드 데이터 획득을 활용하기를 원하는 서드파티들(third parties)은 그 소유 특성(proprietary nature)으로 인해 제한된다. 이 제한은 독립형 항공기 센서 슈트들(stand-alone aircraft sensor suites)의 사용을 통해 부분적으로만 극복되어 왔다. 이러한 상업적으로 이용가능한 센서 슈트들은 조종실 계기 및 파일럿 입력들을 통해 이용가능한 데이터의 오직 일부만을 측정한다. 그러나, 승무원 자동화 시스템(100)은 항공기 비행 성능 특성들을 결정하도록 다양한 센서들을 활용하기 때문에, 그것은 항공 비히클 성능 특성들을 효과적으로 리버스 엔지니어링(reverse engineer)한다. 승무원 자동화 시스템(100)은 독립형 센서들, 조종실 계기의 이미지들을 통한 데이터 캡처 및 입력 제어장치들의 조합을 통해 항공기 정보를 수집한다.
예시. 본 발명의 양상들은 다음의 예시 비행 계획을 통해 도시될 수 있는데, 이는 승무원 자동화 시스템(100)이 어떻게 조종사와 상호작용할 수 있는지, 비행 계획을 실행하는지, 비행 작동 업무들을 실행하는지, 및 시스템 관여(engagement)와 이륙 중의 우발사태들, 비행 계획 관여(flight plan engagement) 및 이상 탐지와 처리(anomaly detection & handling)에 반응하는지를 도시한다. 그러나, 본 발명의 교시들(teachings)은 이 예시에서 사용된 것들로 제한되어서는 안된다.
시스템 관여 및 이륙. 조종사는 항공기의 좌측 좌석에 타고, 좌석 벨트를 고정하고, 휴먼-머신 인터페이스(126)를 그의 측면에 편안하게 위치시키고, 승무원 자동화 시스템(100) 어플리케이션을 활성화시킨다. 상기 어플리케이션은 일련의 파워-온 진단들(power-on diagnostics)을 통해 부팅 및 실행하며 그리고 기계 인터페이스들은 전원이 켜지고 교정한다. 메시지는 성공적인 테스트를 확인하면서 휴먼-머신 인터페이스(126)에 디스플레이될 수 있으며 그리고 승무원 자동화 시스템(100)의 관여(engagement)를 확인하기 위해 조종사에게 질의할 수 있다. 조종사는 어플리케이션들 탭(334)을 통해 당일의 비행 계획을 선택한다. 승무원 자동화 시스템(100)은 체크리스트 모니터링을 위해 사용될 수 있다. 조종사는 엔진 시동(engine start)을 선택하고, 승무원 자동화 시스템(100)은 실제로 시작하기 전에 최종 확인을 요구하면서 일련의 엔진 시동 행동들을 시작할 수 있다. 한편, 조종사는 허가(clearance)를 위해 타워 호출할 수 있고 훈련 지역으로 비행 계획을 수신할 수 있다.
엔진 시동이 완료되면, 승무원 자동화 시스템(100)은 조종사에게 성공을 보고하고 그리고 예를 들어 "택싱 준비 완료(ready to taxi)"를 (청각적으로 또는 휴먼-머신 인터페이스(126)를 통해) 보고할 수 있다. 조종사는 택싱 허가(taxi clearance)를 요청하고 그것을 청취할 때, 승무원 자동화 시스템(100)은 택싱 허가를 기록하고 확인을 위해 그것을 조종사에게 디스플레이한다. 그리고 나서 조종사는 어플리케이션 상의 "허가를 통한 택싱(taxi via clearance)" 버튼을 누르고(hit) 그리고 승무원 자동화 시스템(100)은 조종사가 트래픽을 모니터링하는 동안 지정된 활주로로 택싱한다. 활주로 시단(runway threshold)에 있을 때, 승무원 자동화 시스템(100)이 사전이륙 점검(pre-takeoff check)을 수행하도록 조종사가 구두로 명령하고, 시스템은 비행 제어장치들과 같은 중요 아이템들을 수동으로 재확인(double-check) 하도록 조종사를 촉구하면서 모든 필요한 점검들을 완료한다. 예를 들어, 승무원 자동화 시스템(100)은 인간 조작자의 체크리스트 실행을 모니터링할 수 있고, "체크리스트 완료"를 출력하거나 비행 계획 또는 에러를 식별할 수 있다.
추가 허가를 수신할 때, 그리고 나서 조종사는 정렬(line-up) 및 대기, 및 그 다음에 궁극적으로 이륙을 위해 승무원 자동화 시스템(100)이 항공기를 안내하도록 명령한다. 승무원 자동화 시스템(100)은 기본 작동 시스템(108a)을 통해 스로틀들을 전방으로 밀어내고, 인지 시스템(106)을 통해 엔진 및 조종실 지시기들을 시각적으로 체크하고, HMI 시스템(104)을 통해 속도들을 불러내고, 그리고 현재 중량, 밸런스, 및 밀도 고도에 적합한 속도에서 회전한다. 조종사는 승무원 자동화 시스템(100)의 입력들을 확인하고 그의 근육 기억(muscle memory)을 유지(retain)하도록 그의 손을 스틱/요크(514) 상에 유지한다. 승무원 자동화 시스템(100)은 현재의 조건들에 따른 항공기 성능을 확인하고 예상 상승 속도(expected climb rate)로부터의 임의의 편차를 보고한다. 바쁜 영공에서의 트래픽을 찾도록 더 많은 헤드업(heads-up) 시간(즉, 눈이 계기들이 아닌 전방을 주시하는)을 가능하게 하면서, 상승하는 동안 승무원 자동화 시스템(100)에 의해 조종사의 작업량이 감소된다. 승무원 자동화 시스템(100)은 또한 주어진 체크리스트, 항공기 또는 위치에 대해 경험있는 조종사의 어드바이스를 제공할 수도 있다. 예를 들어, 특정 공항에서, 승무원 자동화 시스템(100)은 "이 활주로로부터의 가파른 출발 각도"와 같은 공항에 특정한 팁들을 인간 조작자에게 지시할 수 있다.
비행 계획 관여. 상승의 꼭대기에서, 비행 계획에서의 첫번째 지상점으로 향하는 동안 승무원 자동화 시스템(100)은 항공기를 수평비행하고(level off) 트림(trim) 및 동력(power) 설정들을 조정한다. 순항 중에, 승무원 자동화 시스템(100)은 엔진 및 항공기 성능을 예상 값들과 지속적으로 비교하고 임의의 편차들을 조종사에게 경고하면서 모든 조종실 디스플레이들을 계속해서 시각적으로 모니터링한다.
항공기는 훈련 지역에 도착하고 당일의 비행 계획을 시작한다. 그러나, 비행 계획 동안, 항공기는 우뚝 솟은 적운 구름으로 들어가는데, 이곳은 계기 기상 조건들(instrument meteorological conditions: IMC) 조건들이 결빙 온도들 이하이다. 조종사는 날씨를 넘어가기 위해 24,000 피트까지 상승하도록 휴먼-머신 인터페이스(126) 상의 인터넷 중계 채팅(internet relay chat: IRC) 채팅 창을 통해 지상으로부터 허가를 요청하고 수신한다. 소정의 양상들에서, 승무원 자동화 시스템(100)은 지상으로부터 허가를 요구한다.
이상 탐지 및 처리. 일정 시간 후, 승무원 자동화 시스템(100)은 상승을 고려할 때, 지시된 대기속도가 기대값들 보다 낮다는 것을 나타내면서 그들의 피치(pitch) 및 동력 설정들에 대한 모델링된 대기속도로부터 천천히 벗어나고 있음을 탐지할 수 있다. 이것은 피토 히터(pitot heater)가 고장났고 피토 튜브들(pitot tubes)이 빙결되었다는 조짐이다. 조종사는 항공기를 비행하는 데 100시간 미만이 걸리고 이 모델에서의 피토 히터들이 신뢰할 수 없다고 알려진 것을 알지 못한다. 조종사는 대기속도 지시기가 공칭 이하를 트랜딩하는 것을 아직 통지받지 못했다.
그러나 승무원 자동화 시스템(100)은 대기속도 데이터가 비행 데이터 및 그 내부 비행 동적 모델의 나머지에 비정상적이라는 것을 인식하고, "대기속도 지시기 결함"을 조종사에게 청각적으로 경고한다. 조종사는 대기속도 정보가 현재 신뢰할 수 없다는 것을 인식하고 있지만, 그는 지시기가 보여주는 것 보다 항공기가 더 빠르게 또는 더 느리게 비행하는지 여부를 확신하지 못한다.
이전 이상들의 데이터베이스들을 바탕으로, 승무원 자동화 시스템(100)은 일련의 절차적인 옵션들을 제시하고 그 영역의 최소 안전 고도(예컨대, 8,000ft)를 강조한다. 조종사는 가장 보수적인 옵션을 선택하는데, 이는 날개 레벨(wings level), 피치 및 낮은 고도(예컨대, 10,000ft)로의 동력 하강을 초래한다. 승무원 자동화 시스템(100)은 동력 상의 힘을 빼고, 약간 아래로 피치하며, 하강을 개시한다. 15,000 피트를 하강하면서 피토 튜브들은 다시 온라인 상태가 된다. 10,000 피트에서 안정되면, 조종사가 비행 계획으로 복귀하기 전에 상황을 평가하는 동안 승무원 자동화 시스템(100)은 항공기를 직진 및 수평(straight and level)으로 홀딩한다.
당일의 비행 계획의 경쟁에 따라, 승무원 자동화 시스템(100)은 자동 착륙 절차를 실행할 수 있다. 예를 들어, 승무원 자동화 시스템(100)은 항공기가 그 초기 하강을 개시할 수 있는 곳인 미리 결정된 지상점으로 항공기가 항법하도록할 수 있다. 하강하는 동안, 승무원 자동화 시스템(100)은 비행 조건들을 모니터링하고 활주로를 위치시킬 수 있다. 최종 진입할 때, 승무원 자동화 시스템(100)은 항공기를 감속시키고 궁극적으로 항공기를 착륙시킬 수 있다. 승무원 자동화 시스템(100)이 착륙이 실행 가능하지 않다고 판단하면(예컨대, 장애물 또는 수용할 수 없는 비행 조건들), 승무원 자동화 시스템(100)은 놓친 접근 루틴 또는 다른 우발사태 루틴을 개시할 수 있다. 예를 들어, 승무원 자동화 시스템(100)은 동일한 위치에서 착륙을 재시도하거나 대체 착륙 위치로 항공기를 항법할 수 있다. 대체 착륙 지점에서 항공기를 착륙시키기 위한 예시적인 시스템은 "Autonomous Cargo Delivery System"이라는 제목의 공동 소유의 미국 특허 공보 제2015/0323932호에 개시되었다.
승무원 자동화 시스템(100) 및 파생 기술들은 광범위한 항공기 및 비행 시뮬레이터들에 걸쳐 적용될 수 있다. 항공기 비행 테스트로부터 유도된 비행 성능 특성들은 조종사 훈련에 사용되는 비행 시뮬레이터들의 충실도를 향상시키는 데 사용될 수 있다. 비행 시뮬레이터들에게 실제 항공기 성능 데이터에 대한 액세스를 제공하는 것은 비행 시뮬레이터 조작자들을 위해 엄청난 가치를 갖는다. 승무원 자동화 시스템(100)의 또 다른 이점은 공기역학적 성능 및 비행 처리 품질들(예컨대, 항공기 개발)에 영향을 미칠 수 있는 센서들 및 안테나들의 추가와 같은 특별 비행 계획들을 위해 항공기가 변경될 때 비행 성능 특성들을 합성하는 능력이다. 게다가, 승무원 자동화 시스템(100)에 의해 수집된 데이터는 유지보수 필요성들을 감지하기 위한 예후들을 이용하여 항공기 건전성 모니터링에 사용될 수 있다.
승무원 자동화 시스템(100)은 인간 운용 비용들에서 상당한 절약을 제공하면서 상용 항공 동작들(commercial aviation operations)의 안전성 및 유용성을 발전시킨다. 예를 들어, 승무원 자동화 시스템(100)은 이 진보된 조종사 보조 기술의 비용 절감뿐만 아니라 안전성 및 효율성을 향상시키도록 장거리 항공화물 수송기들(long-haul air cargo carriers)에 적용될 수 있다. 더 나아가, 상기 최종 상태 기계는 예를 들어 비행 중 전통적으로 단일 조종사 항공기가 될 것에서 두번째 세트의 눈을 제공하면서 기내 조종사들을 위한 훈련 도구 또는 안전 시스템으로서 기능할 수 있다. 휴먼-머신 인터페이스(126)의 일부들은 모든 유인 비행 동작들, 심지어 다중-선원(multi-crew) 동작들을 간소화한다.
상기 인용된 특허들 및 특허 공보들은 본 명세서의 이 부분에서 그 전체가 참조로서 포함된다. 다양한 실시예들이 부품들의 특정 배열들, 특징들 등의 특정 배치와 관련하여 설명되었지만, 이것들은 모든 가능한 배치들 또는 특징들을 소진시키려는 의도가 아니며, 실제로 많은 다른 실시예들, 수정사항들 및 변형들이 당업자에게 확인될 수 있다. 따라서, 본 발명은 그러므로 명시적으로 상술된 것과 다르게 실시될 수 있음을 이해될 수 있다.
본 발명은 DARPA(Defense Advanced Research Projects Agency)에 의해 수여된 계약 번호: HR0011-15-0027에 따른 정부 지원으로 만들어졌다. 정부는 발명에서 특정 권리들을 갖는다.
본 출원은 각각 "Aircrew Automation System and Method"라는 제목으로 2016년 3월 22일자로 출원된 미국 가출원 제62/311,659호 및 2016년 9월 2일자로 출원된 미국 가출원 제62/383,032호의 우선권을 주장한다. 각 출원은 본 명세서에 참조로 포함된다.
Claims (14)
- 항공기에서 사용하기 위한 승무원 자동화 시스템(100)으로서, 상기 승무원 자동화 시스템(100)은:
하나 이상의 인터페이스(234)를 통해 서브 시스템들(236) 또는 복수의 시스템들(100)을 동작적으로 연결하는 코어 플랫폼(102);
조종사와 상기 승무원 자동화 시스템 사이에 인터페이스(234)를 제공하기 위해 상기 코어 플랫폼(102)과 동작적으로 결합된(operatively coupled) 휴먼 머신 인터페이스(234);
상기 항공기에 특정한 정보를 결정하기 위해 상기 코어 플랫폼(102)과 동작적으로 결합된 지식 획득 시스템(100); 및
비행 상황 데이터를 생성하기 위해 상기 항공기의 하나 이상의 조종실 계기들을 모니터링하도록 상기 코어 플랫폼(102)과 동작적으로 결합된 인지 시스템(100);
을 포함하는, 승무원 자동화 시스템(100). - 제1항에 있어서,
상기 인지 시스템(100)은 상기 항공기의 상기 하나 이상의 조종실 계기들을 시각적으로 모니터링하기 위한 카메라를 갖는 시각 시스템(100)을 포함하는, 승무원 자동화 시스템(100). - 제2항에 있어서,
상기 비행 상황 데이터는 상기 항공기의 수직 속도, 고도 및 대기 속도를 포함하는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
상기 지식 획득 시스템(100)은 상기 조종실 계기들의 레이아웃을 결정하도록 구성되는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
상기 코어 플랫폼(102)은 상기 비행 상황 데이터에 적어도 부분적으로 기초하여 하나 이상의 명령을 상기 항공기의 비행 제어 시스템(100)에게 전달하도록 구성되는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
상기 승무원 자동화 시스템(100)은 상기 코어 플랫폼(102)과 동작적으로 결합된 작동 시스템(100)을 더 포함하는, 승무원 자동화 시스템(100). - 제6항에 있어서,
상기 작동 시스템(100)은 일차적 작동 시스템(100) 및 상기 일차적 작동 시스템과는 별개인 이차적 작동 시스템(100)을 포함하는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
상기 코어 플랫폼(102)은 현재 항공기 상태를 결정하기 위해 상기 비행 상황 데이터를 수신하고 종합하도록 구성되는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
상기 휴먼 머신 인터페이스(234)는 조종사가 상기 승무원 자동화 시스템을 제어하고 상기 승무원 자동화 시스템과 통신할 수 있게 하는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
상기 휴먼 머신 인터페이스(234)는 터치 스크린 디스플레이를 포함하는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
상기 휴먼 머신 인터페이스(234)는 상기 조종사로부터의 음성 통신을 인식하기 위한 음성 인식 기술들을 채용하는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
(1) 시스템들(100) 또는 서브시스템들(236)의 비활성화 또는 제거, 또는
(2) 시스템들(100) 또는 서브시스템들(236)의 설치 또는 활성화를 가능하게 하기 위해,
상기 코어 플랫폼(102)은 플러그 앤드 플레이 소프트웨어(plug and play software)로 구성되는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
상기 항공기에 특정한 정보는 상기 항공기가 특정 동작 에러에 민감한지 여부를 포함하는, 승무원 자동화 시스템(100). - 상술한 항들 중 어느 한 항에 있어서,
상기 지식 획득 시스템(100)은 비히클-비종속적 승무원 자동화 시스템을 산출하기 위해 상기 항공기에 특정한 정보를 결정하도록 구성되는, 승무원 자동화 시스템(100).
Applications Claiming Priority (7)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201662311659P | 2016-03-22 | 2016-03-22 | |
| US62/311,659 | 2016-03-22 | ||
| US201662383032P | 2016-09-02 | 2016-09-02 | |
| US62/383,032 | 2016-09-02 | ||
| US15/464,786 | 2017-03-21 | ||
| US15/464,786 US10359779B2 (en) | 2016-03-22 | 2017-03-21 | Aircrew automation system and method |
| PCT/US2017/023523 WO2017165481A1 (en) | 2016-03-22 | 2017-03-22 | Aircrew automation system and method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20180118793A true KR20180118793A (ko) | 2018-10-31 |
| KR102269419B1 KR102269419B1 (ko) | 2021-06-25 |
Family
ID=59898475
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020187029828A KR102269419B1 (ko) | 2016-03-22 | 2017-03-22 | 승무원 자동화 시스템 및 방법 |
Country Status (9)
| Country | Link |
|---|---|
| US (3) | US10359779B2 (ko) |
| EP (2) | EP3889038B1 (ko) |
| JP (1) | JP6913106B2 (ko) |
| KR (1) | KR102269419B1 (ko) |
| CN (1) | CN109070997B (ko) |
| AU (1) | AU2017238122B2 (ko) |
| IL (1) | IL261322B (ko) |
| RU (1) | RU2732646C2 (ko) |
| WO (1) | WO2017165481A1 (ko) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11608160B2 (en) * | 2019-04-18 | 2023-03-21 | Airbus Operations Limited | System and method for landing gear retraction |
Families Citing this family (51)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9557742B2 (en) | 2013-11-27 | 2017-01-31 | Aurora Flight Sciences Corporation | Autonomous cargo delivery system |
| FR3023912B1 (fr) * | 2014-07-18 | 2020-05-08 | Thales | Calcul de performance pour aeronef |
| DE102015013642A1 (de) * | 2015-10-21 | 2017-04-27 | Mbda Deutschland Gmbh | Sicherheitsfunktionsmodul für ein Fahrzeug, insbesondere für einen Flugkörpe |
| US10509415B2 (en) * | 2017-07-27 | 2019-12-17 | Aurora Flight Sciences Corporation | Aircrew automation system and method with integrated imaging and force sensing modalities |
| US10725091B2 (en) * | 2017-08-28 | 2020-07-28 | Teradyne, Inc. | Automated test system having multiple stages |
| US10845410B2 (en) | 2017-08-28 | 2020-11-24 | Teradyne, Inc. | Automated test system having orthogonal robots |
| GB2568356B (en) * | 2017-09-07 | 2021-12-15 | Borealis Tech Ltd | Improved aircraft ground collision avoidance system |
| US10599138B2 (en) | 2017-09-08 | 2020-03-24 | Aurora Flight Sciences Corporation | Autonomous package delivery system |
| US11094419B2 (en) * | 2017-09-12 | 2021-08-17 | Duro Health, LLC | Sensor fusion of physiological and machine-interface factors as a biometric |
| US10426393B2 (en) | 2017-09-22 | 2019-10-01 | Aurora Flight Sciences Corporation | Systems and methods for monitoring pilot health |
| US20190092337A1 (en) | 2017-09-22 | 2019-03-28 | Aurora Flight Sciences Corporation | System for Monitoring an Operator |
| DE102017126560A1 (de) * | 2017-11-13 | 2019-05-16 | Airbus Defence and Space GmbH | Testsystem und Roboteranordnung zur Durchführung eines Tests |
| EP3489140B1 (en) * | 2017-11-27 | 2022-02-23 | Airbus Operations, S.L. | Aircraft system with asisted taxi, take off, and climbing |
| US10759517B2 (en) * | 2017-12-12 | 2020-09-01 | The Boeing Company | System and method for modifying the location of water impingement limits on an airfoil |
| WO2019147634A1 (en) | 2018-01-23 | 2019-08-01 | Platform Aerospace, Inc. | Modular, palletized system for a deployable sensor |
| US10875662B2 (en) * | 2018-04-19 | 2020-12-29 | Aurora Flight Sciences Corporation | Method of robot manipulation in a vibration environment |
| CN108945397B (zh) * | 2018-04-24 | 2021-05-04 | 中国商用飞机有限责任公司北京民用飞机技术研究中心 | 一种飞行驾驶系统 |
| US10733551B2 (en) * | 2018-05-01 | 2020-08-04 | Honeywell International Inc. | Systems and methods for providing dynamic voice-prompt dialogue for situational awareness onboard an aircraft |
| US11262900B1 (en) | 2018-07-30 | 2022-03-01 | The Boeing Company | Graphical user interface in a computer system in an aircraft |
| US11305886B1 (en) * | 2018-07-30 | 2022-04-19 | The Boeing Company | Graphical user interface in a computer system in an aircraft |
| US11136120B2 (en) | 2018-10-05 | 2021-10-05 | Aurora Flight Sciences Corporation | Ground operations for autonomous object pickup |
| US11417220B2 (en) * | 2018-11-27 | 2022-08-16 | Honeywell International Inc. | Systems and methods for providing an integrated flight management display with interactive time-based functionality |
| US11220357B2 (en) * | 2019-01-18 | 2022-01-11 | The Boeing Company | Aircraft maintenance systems and methods |
| CN109902413B (zh) * | 2019-03-07 | 2022-12-09 | 西安天圆光电科技有限公司 | 一种机载机电框架类产品的配平方法 |
| US11687067B2 (en) * | 2019-04-04 | 2023-06-27 | Honeywell International Inc. | Pattern classification system with smart data collection for environmental control system fault isolation |
| US20200377197A1 (en) * | 2019-05-31 | 2020-12-03 | Hamilton Sundstrand Corporation | System and method for performing device analytics |
| US11097425B2 (en) | 2019-09-16 | 2021-08-24 | Lockheed Martin Corporation | Automated switch activation system |
| US11186384B2 (en) * | 2019-09-19 | 2021-11-30 | Lockheed Martin Corporation | Adaptive flight display for autonomous aircraft operations |
| US11981438B2 (en) * | 2019-09-26 | 2024-05-14 | Rockwell Collins, Inc. | Retention of flight deck preferences |
| US11586196B2 (en) | 2020-01-22 | 2023-02-21 | Honeywell International Inc. | Approach mode activation monitoring function and automatic activation in an event of pilot incapacitation |
| CN111552315B (zh) * | 2020-05-11 | 2023-07-18 | 中国商用飞机有限责任公司北京民用飞机技术研究中心 | 一种飞行驾驶方法、装置、设备和存储介质 |
| US11995998B2 (en) | 2020-05-15 | 2024-05-28 | Hrl Laboratories, Llc | Neural network-based system for flight condition analysis and communication |
| US11655047B2 (en) | 2020-10-21 | 2023-05-23 | Honeywell International, Inc. | System and method for monitoring an electronic checklist and supporting sensors |
| US11899042B2 (en) | 2020-10-22 | 2024-02-13 | Teradyne, Inc. | Automated test system |
| US11953519B2 (en) | 2020-10-22 | 2024-04-09 | Teradyne, Inc. | Modular automated test system |
| US11754596B2 (en) | 2020-10-22 | 2023-09-12 | Teradyne, Inc. | Test site configuration in an automated test system |
| US11754622B2 (en) | 2020-10-22 | 2023-09-12 | Teradyne, Inc. | Thermal control system for an automated test system |
| US11867749B2 (en) | 2020-10-22 | 2024-01-09 | Teradyne, Inc. | Vision system for an automated test system |
| US11971728B1 (en) | 2020-10-23 | 2024-04-30 | Rockwell Collins, Inc. | Platform guidance system incorporating hierarchical modular arbitration architecture |
| RU2751377C1 (ru) * | 2020-10-29 | 2021-07-13 | Федеральное государственное унитарное предприятие "Государственный научно-исследовательский институт авиационных систем" (ФГУП "ГосНИИАС") | Способ интеллектуальной поддержки экипажа летательного аппарата при выполнении им этапа полета |
| KR102517897B1 (ko) * | 2020-11-26 | 2023-04-04 | 엘아이지넥스원 주식회사 | 비행 데이터 분석 기반의 항공 운항 관리 방법 및 그를 위한 장치 |
| RU2767406C1 (ru) * | 2020-12-17 | 2022-03-17 | Фонд содействия развитию науки, инноваций и технологий | Способ интеллектуальной поддержки экипажа |
| CN113119085B (zh) * | 2021-03-24 | 2022-04-19 | 北京航空航天大学 | 一种直升机飞行驾驶机器人系统 |
| CN113358337B (zh) * | 2021-05-27 | 2022-05-10 | 燕山大学 | 飞机机翼静强度实验的加载方法及其加载装置 |
| CN113589835B (zh) * | 2021-08-13 | 2024-05-14 | 北京科技大学 | 一种基于自主感知的智能机器人飞行员飞行方法及装置 |
| US11427305B1 (en) * | 2021-09-16 | 2022-08-30 | Beta Air, Llc | Methods and systems for flight control for managing actuators for an electric aircraft |
| USD953371S1 (en) | 2021-10-22 | 2022-05-31 | BioReference Health, LLC | Display screen or portion thereof with animated graphical user interface |
| CN114035425B (zh) | 2021-11-05 | 2022-07-26 | 广东工业大学 | 一种无人机数字孪生系统的虚实状态同步方法和系统 |
| US20230260337A1 (en) * | 2022-02-17 | 2023-08-17 | Ge Aviation Systems Llc | Configurable status console within an aircraft environment and method |
| CN115236998B (zh) * | 2022-06-21 | 2023-07-14 | 江苏锐天智能科技股份有限公司 | 一种仿真飞行中飞机燃油油耗监控系统及方法 |
| US20230419271A1 (en) * | 2022-06-24 | 2023-12-28 | Gm Cruise Holdings Llc | Routing field support to vehicles for maintenance |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110149067A1 (en) * | 2007-08-17 | 2011-06-23 | George Steven Lewis | System for Optical Recognition, Interpretation, and Digitization of Human Readable Instruments, Annunciators, and Controls |
Family Cites Families (86)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB897627A (en) * | 1958-06-23 | 1962-05-30 | Sperry Gyroscope Co Ltd | Control apparatus for aircraft |
| US3510090A (en) * | 1967-09-08 | 1970-05-05 | Honeywell Inc | Automatic altitude control apparatus for aircraft |
| US3848833A (en) * | 1972-07-14 | 1974-11-19 | Sperry Rand Corp | Aircraft automatic flight control system |
| US4063073A (en) | 1974-11-29 | 1977-12-13 | Strayer Larry G | Computer system to prevent collision between moving objects such as aircraft moving from one sector to another |
| CA1050633A (en) * | 1974-12-19 | 1979-03-13 | Ronald J. Miller | Semi-automatic flight control system utilizing limited authority stabilization system |
| US4490794A (en) * | 1982-01-18 | 1984-12-25 | Sperry Corporation | Altitude preselect system for aircraft without air data computer |
| US5157615A (en) | 1990-01-09 | 1992-10-20 | Ryan International Corporation | Aircraft traffic alert and collision avoidance device |
| JPH07115677B2 (ja) | 1990-10-30 | 1995-12-13 | 嘉三 藤本 | 航空機の飛行情報記録方法とその装置 |
| RU2128854C1 (ru) * | 1996-08-30 | 1999-04-10 | Летно-исследовательский институт им.М.М.Громова | Система поддержки экипажа в опасных ситуациях |
| US7131136B2 (en) * | 2002-07-10 | 2006-10-31 | E-Watch, Inc. | Comprehensive multi-media surveillance and response system for aircraft, operations centers, airports and other commercial transports, centers and terminals |
| WO2001060693A2 (en) | 2000-02-03 | 2001-08-23 | Honeywell International Inc. | Event based aircraft image and data recording system |
| US6480152B2 (en) | 2000-07-20 | 2002-11-12 | American Gnc Corporation | Integrated GPS/IMU method and microsystem thereof |
| FR2821452B1 (fr) | 2001-02-26 | 2003-06-13 | Eads Airbus Sa | Dispositif de surveillance d'une pluralite de systemes d'un aeronef, en particulier d'un avion de transport |
| US20030065428A1 (en) * | 2001-10-01 | 2003-04-03 | Ehud Mendelson | Integrated aircraft early warning system, method for analyzing early warning data, and method for providing early warnings |
| US6604044B1 (en) | 2002-02-14 | 2003-08-05 | The Mitre Corporation | Method for generating conflict resolutions for air traffic control of free flight operations |
| US6820006B2 (en) | 2002-07-30 | 2004-11-16 | The Aerospace Corporation | Vehicular trajectory collision conflict prediction method |
| US6885917B2 (en) * | 2002-11-07 | 2005-04-26 | The Boeing Company | Enhanced flight control systems and methods for a jet powered tri-mode aircraft |
| US7203630B2 (en) | 2002-11-11 | 2007-04-10 | Aeromechanical Services Ltd. | Aircraft flight data management system |
| US7106219B2 (en) | 2003-11-07 | 2006-09-12 | Pearce James W | Decentralized vehicular traffic status system |
| US7460029B2 (en) * | 2003-12-24 | 2008-12-02 | The Boeing Company | Systems and methods for presenting and obtaining flight control information |
| US7193729B1 (en) | 2004-04-29 | 2007-03-20 | Yazaki North America, Inc | Instrument cluster with laser beam illumination |
| RU2263973C1 (ru) * | 2004-05-07 | 2005-11-10 | Федеральное государственное унитарное предприятие Летно-исследовательский институт им. М.М. Громова | Пилотажно-тренировочный комплекс |
| WO2006011141A2 (en) * | 2004-07-25 | 2006-02-02 | Israel Aerospace Industries Ltd. | Method and system for the acquisition of data and for the display of data |
| US7437220B2 (en) | 2004-08-17 | 2008-10-14 | Arinc, Inc. | Systems and methods for crew interaction and coordination using portable electronic data storage and display devices |
| JP2006151125A (ja) | 2004-11-26 | 2006-06-15 | Omron Corp | 車載用画像処理装置 |
| US7789349B2 (en) * | 2005-05-12 | 2010-09-07 | Aspen Avionics, Inc. | Aircraft vertical speed instrument device with multi-functional design aspects |
| US7848698B2 (en) | 2005-07-22 | 2010-12-07 | Appareo Systems Llc | Flight training and synthetic flight simulation system and method |
| US7650232B1 (en) | 2005-09-22 | 2010-01-19 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration (Nasa) | Trajectory specification for high capacity air traffic control |
| FR2898673B1 (fr) * | 2006-03-14 | 2009-04-17 | Thales Sa | Procede d'aide a la navigation d'un aeronef avec une mise a jour du plan de vol |
| US8050863B2 (en) | 2006-03-16 | 2011-11-01 | Gray & Company, Inc. | Navigation and control system for autonomous vehicles |
| US7624943B2 (en) | 2006-03-22 | 2009-12-01 | The Boeing Company | Multi-mode unmanned and manned vehicle systems and methods |
| US7885732B2 (en) * | 2006-10-25 | 2011-02-08 | The Boeing Company | Systems and methods for haptics-enabled teleoperation of vehicles and other devices |
| WO2008127752A2 (en) | 2007-01-25 | 2008-10-23 | Magna Electronics | Radar sensing system for vehicle |
| JP5145599B2 (ja) | 2007-04-27 | 2013-02-20 | 本田技研工業株式会社 | 車両周辺監視装置、車両周辺監視用プログラム、車両周辺監視方法 |
| US8049658B1 (en) | 2007-05-25 | 2011-11-01 | Lockheed Martin Corporation | Determination of the three-dimensional location of a target viewed by a camera |
| US20080316010A1 (en) | 2007-06-23 | 2008-12-25 | Appro Technology Inc. | Recording system and method for capturing images of driving conditions and driving images identification method |
| US8255098B2 (en) * | 2007-10-17 | 2012-08-28 | The Boeing Company | Variably manned aircraft |
| US8290638B2 (en) | 2008-02-04 | 2012-10-16 | Lockheed Martin Corporation | Apparatus, program product, and methods for updating data on embedded control systems |
| US8063798B2 (en) * | 2008-06-03 | 2011-11-22 | Honeywell International Inc. | Methods and apparatus to assist pilots under conditions in which spatial disorientation may be present |
| AT507035B1 (de) | 2008-07-15 | 2020-07-15 | Airbus Defence & Space Gmbh | System und verfahren zur kollisionsvermeidung |
| DE102008036759A1 (de) * | 2008-08-07 | 2010-02-11 | Esg Elektroniksystem- Und Logistik-Gmbh | Vorrichtung und Verfahren zum Testen von Systemen mit visueller Ausgabe |
| JP4434296B1 (ja) | 2008-09-05 | 2010-03-17 | トヨタ自動車株式会社 | 物体検出装置 |
| US8702033B2 (en) * | 2009-01-06 | 2014-04-22 | Ruchit Kumar Regmi | Pilotless aircraft for commercial and military use |
| US8195346B1 (en) * | 2009-01-21 | 2012-06-05 | Garmin International, Inc. | Envelope protection for mechanically-controlled aircraft |
| FR2941912B1 (fr) * | 2009-02-10 | 2011-02-18 | Airbus France | Systeme de commande de vol et aeronef le comportant |
| US8319665B2 (en) | 2009-02-20 | 2012-11-27 | Appareo Systems, Llc | Adaptive instrument and operator control recognition |
| US8319666B2 (en) | 2009-02-20 | 2012-11-27 | Appareo Systems, Llc | Optical image monitoring system and method for vehicles |
| US7954965B1 (en) | 2009-04-13 | 2011-06-07 | Yazaki North America, Inc. | Method for multiple gauges in a scanning laser based display device |
| US8026827B1 (en) | 2009-05-04 | 2011-09-27 | Yazaki North America, Inc. | Virtual push button switch |
| US10002538B2 (en) | 2009-05-14 | 2018-06-19 | Honeywell International Inc. | Aircraft clearance enforcement |
| KR101043450B1 (ko) | 2009-07-31 | 2011-06-21 | 삼성전기주식회사 | 카메라를 이용한 위치와 거리 측정장치 및 위치와 거리 측정방법 |
| US8306672B2 (en) | 2009-09-09 | 2012-11-06 | GM Global Technology Operations LLC | Vehicular terrain detection system and method |
| US8725402B2 (en) | 2009-11-13 | 2014-05-13 | The Boeing Company | Loss of separation avoidance maneuvering |
| US9099009B2 (en) | 2009-12-01 | 2015-08-04 | The Boeing Company | Performance-based simulation system for an aircraft |
| US8616884B1 (en) | 2009-12-01 | 2013-12-31 | The Boeing Company | Integrated live and simulation environment system for an aircraft |
| JP5489708B2 (ja) * | 2009-12-28 | 2014-05-14 | ナブテスコ株式会社 | アクチュエータ制御システム |
| US8219267B2 (en) * | 2010-05-27 | 2012-07-10 | Honeywell International Inc. | Wind estimation for an unmanned aerial vehicle |
| FR2963119B1 (fr) * | 2010-07-20 | 2015-05-01 | Airbus Operations Sas | Procede et dispositif de recalage d'une altitude cible pour une descente d'urgence d'un aeronef |
| US8616883B2 (en) | 2010-12-15 | 2013-12-31 | The Boeing Company | Simulation control system for an integrated live and simulation environment for an aircraft |
| FR2972712B1 (fr) * | 2011-03-16 | 2014-09-05 | Airbus Operations Sas | Surveillance d'un actionneur de commande de vol d'un aeronef |
| US9087450B2 (en) * | 2011-05-17 | 2015-07-21 | Innovative Solutions And Support, Inc. | Upgraded flight management system and method of providing the same |
| JP2013002927A (ja) | 2011-06-15 | 2013-01-07 | Honda Elesys Co Ltd | 障害物検知装置及びコンピュータプログラム |
| US9424753B2 (en) * | 2011-07-08 | 2016-08-23 | General Electric Company | Simplified user interface for an aircraft |
| FR2978736B1 (fr) * | 2011-08-01 | 2013-09-27 | Airbus Operations Sas | Dispositif et procede de determination d'un etat de piste, aeronef comprenant un tel dispositif et systeme d'aide au pilotage exploitant cet etat de piste |
| US8768534B2 (en) | 2011-11-14 | 2014-07-01 | Arinc Incorporated | Method and apparatus for using electronic flight bag (EFB) to enable flight operations quality assurance (FOQA) |
| FR2988836B1 (fr) | 2012-03-28 | 2014-04-25 | Dassault Aviat | Procede de determination d'une masse estimee d'un aeronef et systeme correspondant |
| FR2989500B1 (fr) * | 2012-04-12 | 2014-05-23 | Airbus Operations Sas | Procede, dispositifs et programme d'ordinateur d'aide a l'analyse de la tolerance aux pannes d'un systeme d'un aeronef, utilisant des graphes d'evenements redoutes |
| WO2014023989A1 (en) * | 2012-08-07 | 2014-02-13 | Bombardier Inc. | Checklist display system, method and graphical display therefor |
| US9002543B2 (en) * | 2012-12-20 | 2015-04-07 | Honeywell International Inc. | Situation aftermath management system and method |
| US9052393B2 (en) | 2013-01-18 | 2015-06-09 | Caterpillar Inc. | Object recognition system having radar and camera input |
| US9070283B2 (en) * | 2013-01-29 | 2015-06-30 | Honeywell International Inc. | Flight deck display systems and methods for generating in-trail procedure windows including aircraft flight path symbology |
| US9014879B2 (en) * | 2013-09-17 | 2015-04-21 | Honeywell International Inc. | Messaging and data entry validation system and method for aircraft |
| US9557742B2 (en) | 2013-11-27 | 2017-01-31 | Aurora Flight Sciences Corporation | Autonomous cargo delivery system |
| WO2015097708A1 (en) * | 2013-12-26 | 2015-07-02 | Airbus | Aircraft part with robot arm |
| US9260199B2 (en) * | 2014-02-25 | 2016-02-16 | Honeywell International Inc. | Aircraft data processing and transmission system |
| US9205931B1 (en) * | 2014-07-16 | 2015-12-08 | Honeywell International Inc. | System and method for increasing pilot awareness during non-normal flight situations |
| FR3023911B1 (fr) | 2014-07-18 | 2018-07-13 | Thales | Traitement des donnees d'un plan de vol |
| US9840007B1 (en) * | 2014-08-25 | 2017-12-12 | X Development Llc | Robotic operation libraries |
| BR112017002615A2 (pt) | 2014-09-03 | 2017-12-05 | Quaero Ltd | um dispositivo de interface homem-máquina para aeronaves |
| US9701398B2 (en) * | 2014-11-03 | 2017-07-11 | Douglas Allen SCHULTZ | Method and apparatus for augmented pilot operations of fly-by-wire vehicles |
| FR3030448B1 (fr) * | 2014-12-18 | 2017-01-06 | Airbus Helicopters | Procede de gestion de discontinuites dans une commande de vehicule suite a une transition de commande, et vehicule |
| US9764852B2 (en) * | 2015-03-13 | 2017-09-19 | Honeywell International Inc. | Methods and systems for integrating auto pilot functions on a display |
| US20160275802A1 (en) | 2015-03-20 | 2016-09-22 | Northrop Grumman Systems Corporation | Unmanned aircraft detection and targeting of other aircraft for collision avoidance |
| US20170084183A1 (en) | 2015-09-18 | 2017-03-23 | Robert M. Knox | Automatic aircraft separation assurance |
| US9542851B1 (en) * | 2015-11-03 | 2017-01-10 | The Boeing Company | Avionics flight management recommender system |
| US20190369615A1 (en) * | 2018-06-05 | 2019-12-05 | Facultad Politecnica-Universidad Nacional del Este | System and method for verifying the presence and vital signs of pilots in a cockpit of an airplane |
-
2017
- 2017-03-21 US US15/464,786 patent/US10359779B2/en active Active
- 2017-03-22 EP EP21176083.0A patent/EP3889038B1/en active Active
- 2017-03-22 EP EP17771033.2A patent/EP3433167B1/en active Active
- 2017-03-22 KR KR1020187029828A patent/KR102269419B1/ko active IP Right Grant
- 2017-03-22 WO PCT/US2017/023523 patent/WO2017165481A1/en active Application Filing
- 2017-03-22 JP JP2018549976A patent/JP6913106B2/ja active Active
- 2017-03-22 RU RU2018130606A patent/RU2732646C2/ru active
- 2017-03-22 CN CN201780023666.0A patent/CN109070997B/zh active Active
- 2017-03-22 AU AU2017238122A patent/AU2017238122B2/en active Active
-
2018
- 2018-08-22 IL IL261322A patent/IL261322B/en unknown
-
2019
- 2019-07-08 US US16/504,988 patent/US10642270B2/en active Active
-
2020
- 2020-05-04 US US16/866,458 patent/US11693407B2/en active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110149067A1 (en) * | 2007-08-17 | 2011-06-23 | George Steven Lewis | System for Optical Recognition, Interpretation, and Digitization of Human Readable Instruments, Annunciators, and Controls |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11608160B2 (en) * | 2019-04-18 | 2023-03-21 | Airbus Operations Limited | System and method for landing gear retraction |
Also Published As
| Publication number | Publication date |
|---|---|
| US20200301422A1 (en) | 2020-09-24 |
| EP3433167A4 (en) | 2019-11-20 |
| KR102269419B1 (ko) | 2021-06-25 |
| AU2017238122A1 (en) | 2018-09-06 |
| IL261322A (en) | 2018-10-31 |
| US10642270B2 (en) | 2020-05-05 |
| US10359779B2 (en) | 2019-07-23 |
| RU2732646C2 (ru) | 2020-09-21 |
| US11693407B2 (en) | 2023-07-04 |
| AU2017238122B2 (en) | 2021-10-28 |
| RU2018130606A3 (ko) | 2020-07-13 |
| US20170277185A1 (en) | 2017-09-28 |
| CN109070997A (zh) | 2018-12-21 |
| WO2017165481A1 (en) | 2017-09-28 |
| EP3889038A1 (en) | 2021-10-06 |
| CN109070997B (zh) | 2022-07-22 |
| EP3889038B1 (en) | 2023-07-05 |
| US20200064840A1 (en) | 2020-02-27 |
| JP6913106B2 (ja) | 2021-08-04 |
| IL261322B (en) | 2022-05-01 |
| JP2019513610A (ja) | 2019-05-30 |
| EP3433167A1 (en) | 2019-01-30 |
| RU2018130606A (ru) | 2020-04-22 |
| EP3433167B1 (en) | 2021-10-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11693407B2 (en) | Aircrew automation system and method | |
| US11378988B2 (en) | Aircrew automation system and method with integrated imaging and force sensing modalities | |
| EP3415416B1 (en) | Aircrew automation system | |
| US11181935B2 (en) | System and method for detecting obstacles in aerial systems | |
| EP3637212B1 (en) | Adaptable vehicle monitoring system and method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |