RU2734063C1 - Устройство для визуального наблюдения для пилота летательного аппарата - Google Patents

Устройство для визуального наблюдения для пилота летательного аппарата Download PDF

Info

Publication number
RU2734063C1
RU2734063C1 RU2020117141A RU2020117141A RU2734063C1 RU 2734063 C1 RU2734063 C1 RU 2734063C1 RU 2020117141 A RU2020117141 A RU 2020117141A RU 2020117141 A RU2020117141 A RU 2020117141A RU 2734063 C1 RU2734063 C1 RU 2734063C1
Authority
RU
Russia
Prior art keywords
data
augmented reality
visual observation
pilot
objects
Prior art date
Application number
RU2020117141A
Other languages
English (en)
Inventor
Франк МИШЕЛЬ
Себастьен ЛЁКЮЙЕ
Морис СОВЭН
Original Assignee
Сафран Электроникс Энд Дифенс
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сафран Электроникс Энд Дифенс filed Critical Сафран Электроникс Энд Дифенс
Application granted granted Critical
Publication of RU2734063C1 publication Critical patent/RU2734063C1/ru

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D43/00—Arrangements or adaptations of instruments
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F41—WEAPONS
    • F41G—WEAPON SIGHTS; AIMING
    • F41G3/00—Aiming or laying means
    • F41G3/22—Aiming or laying means for vehicle-borne armament, e.g. on aircraft
    • F41G3/225—Helmet sighting systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0123—Head-up displays characterised by optical features comprising devices increasing the field of view
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0149—Head-up displays characterised by mechanical features
    • G02B2027/0165—Head-up displays characterised by mechanical features associated with a head-down display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0183—Adaptation to parameters characterising the motion of the vehicle
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Processing Or Creating Images (AREA)
  • Traffic Control Systems (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

Изобретение относится к устройству для визуального наблюдения для пилота летательного аппарата, содержащему: держатель (10), предназначенный для размещения на голове пилота летательного аппарата; поверхность (12) отображения; средства (15) отображения, расположенные на держателе и выполненные с возможностью отображения объектов дополненной реальности на поверхности отображения; средства (18) считывания, выполненные с возможностью считывать в режиме реального времени первые данные, отображающие положение и ориентацию держателя, вторые данные, отображающие положение и ориентацию кабины летательного аппарата, третьи данные, определяющие габаритные зоны (30), занятые оборудованием кабины, а также объекты дополненной реальности; средства (19) обработки, выполненные с возможностью определять в режиме реального времени положение объектов дополненной реальности так, что все объекты дополненной реальности располагаются снаружи габаритных зон, когда они отображаются на поверхности отображения. Изобретение обеспечивает отображение объектов дополненной реальности, при котором оно не закрывает полностью или частично оборудование кабины. 4 н. и 5 з.п. ф-лы, 3 ил.

Description

Область техники, к которой относится изобретение
Изобретение относится к области устройств для визуального наблюдения для пилота летательного аппарата.
Уровень техники
В настоящее время все больше проявляется тенденция к применению так называемой технологии «дополненной реальности» в современных летательных аппаратах и, в частности, в истребителях.
Дополненная реальность позволяет вводить в видимую реальную окружающую среду пилота объекты дополненной реальности таким образом, что эти объекты дополненной реальности оказываются доступными для пилота, которому не надо для этого перемещать взгляд.
В частности, объектами дополненной реальности являются изображения или информация в письменном виде.
Изображениями являются, например, изображения взлетно-посадочной полосы, рельефа местности (гора, долина и т.д.), моря, какой-либо цели, других летательных аппаратов и различных транспортных средств, различных зданий и т.д. Письменной информацией является, например, информация о текущем полете, данные контроля различных параметров истребителя, сообщение для пилота и т.д.
Дополненная реальность позволяет также компенсировать недостаточную видимость.
Недостаточная видимость может быть связана с условиями ночного полета или с плохими метеоусловиями.
Недостаточная видимость может быть также связана с положением пилота в кабине истребителя.
Известно, что, как показано на фиг. 1, в истребителе 1 обзор для пилота 2 является относительно ограниченным по причине условий расположения пилота 2 в кабине 3.
В истребителе 1 пилот 2 пристегнут к катапультируемому креслу 4. Шлем 5 пилота 2 поддерживается в продолжении тела при помощи подголовника 6 катапультируемого кресла 4. Как правило, пилот 2 может поворачивать свой шлем 5 только на 15° при наклоне вперед, на 80° при повороте влево или вправо и на 45° при наклоне в сторону. Кроме того, глаза пилота 2 могут поворачиваться примерно на 30° вверх, вниз, влево и вправо. Восприятие пилотом 2 форм и символов ограничено зоной, находящейся на +/-20° вокруг направления взгляда.
Ориентируя взгляд пилота 2 непосредственно на соответствующие чувствительные точки, например, на цель, взлетно-посадочную полосу, другой самолет, дополненная реальность позволяет компенсировать этот ограниченный обзор.
Раскрытие сущности изобретения
Задачей изобретения является улучшение помощи пилоту летательного аппарата, обеспечиваемой устройством для визуального наблюдения, использующим технологию дополненной реальности.
Для решения этой задачи предложено устройство для визуального наблюдения для пилота летательного аппарата, содержащее:
- держатель, предназначенный для размещения на голове пилота летательного аппарата;
- поверхность отображения, расположенную на держателе и предназначенную для размещения вблизи и напротив глаз пилота летательного аппарата;
- средства отображения, расположенные на держателе и выполненные с возможностью отображения объектов дополненной реальности на поверхности отображения;
- средства считывания, выполненные с возможностью считывать в режиме реального времени первые данные, отображающие положение и ориентацию держателя, вторые данные, отображающие положение и ориентацию кабины летательного аппарата, третьи данные, определяющие габаритные зоны, занятые оборудованием кабины, а также объекты дополненной реальности;
- средства обработки, выполненные с возможностью определять в режиме реального времени положение и/или ориентацию и/или форму и/или размер объектов дополненной реальности, используя, в частности, первые данные, вторые данные и третьи данные, таким образом, чтобы все объекты дополненной реальности располагались снаружи габаритных зон, когда они отображаются на поверхности отображения.
Таким образом, заявленное устройство для визуального наблюдения позволяет убедиться, что при отображении объектов дополненной реальности они не накладываются на оборудование кабины.
Оборудование кабины включает в себя приборы, которые выдают пилоту видимые данные. Следовательно, отображение объектов дополненной реальности не мешает доступу к этим видимым данным.
Таким образом, заявленное устройство для визуального наблюдения улучшает обеспечиваемую пилоту помощь.
Изобретением предложен также шлем пилота летательного аппарата, содержащий визор и описанное выше устройство для визуального наблюдения, при этом поверхность отображения находится на визоре.
Кроме того, предложены очки, содержащие стекла и описанное выше устройство для визуального наблюдения, при этом поверхность отображения находится на стеклах.
Изобретением предложена также маска дополненной реальности, содержащая экран и описанное выше устройство для визуального наблюдения, при этом поверхность отображения находится на экране.
Другие отличительные признаки и преимущества изобретения будут более очевидны из нижеследующего описания неограничительного частного варианта осуществления изобретения.
Краткое описание чертежей
Описание представлено со ссылками на прилагаемые чертежи, на которых:
На фиг. 1 показан пилот, сидящий в кабине истребителя;
на фиг. 2 показан шлем пилота летательного аппарата, в который встроено заявленное устройство для визуального наблюдения;
на фиг. 3 показано поле обзора пилота истребителя.
Осуществление изобретения
Как показано на фиг. 2, заявленное устройство для визуального наблюдения для пилота летательного аппарата в данном случае встроено в шлем 5 пилота летательного аппарата, содержащий корпус 10 и визор 11.
В данном случае термин «пилот» обозначает пилота, реально управляющего летательным аппаратом, а также любое другое лицо (например, второго пилота или штурмана), которое может находиться в кабине, когда летательный аппарат находится в полете.
В данном случае летательный аппарат является истребителем.
Корпус 10 шлема 5, который предназначен для размещения на голове пилота, чтобы защищать голову пилота, образует держатель устройства для визуального наблюдения.
Устройство для визуального наблюдения содержит также поверхность 12 отображения, выполненную на корпусе 10 и предназначенную для размещения вблизи и напротив глаз пилота. В данном случае поверхность 12 отображения является внутренней поверхностью визора 11.
Устройство для визуального наблюдения дополнительно содержит первый блок 13, камеру 14, средства 15 отображения и второй блок 16.
Первый блок 13 расположен на корпусе 10 шлема 5.
Под «блоком» в данном случае следует понимать одновременно механический кожух (или корпус), одну или несколько электрических плат, содержащих электронные компоненты и находящихся в блоке, и средства крепления или соединения механического кожуха с окружающей его средой.
Первый блок 13 содержит средства 18 считывания, средства 19 обработки и первые средства 20 измерения.
Средства 18 считывания и средства 19 обработки являются элементами программного (software) и/или аппаратного (hardware) обеспечения, включенными частично или полностью в один или несколько компонентов обработки и, возможно, вложенными один в другой. Компонент или компоненты обработки включают в себя, например, микроконтроллер, схемы ASIC, FPGA, DSP или процессор.
Первые средства 20 измерения содержат первый инерциальный измерительный блок и первые датчики.
Первые средства 20 измерения выдают первые данные, отображающие, в частности, положение и ориентацию шлема 5 и его корпуса 10. Первые данные отображают также направление взгляда пилота. Первый инерциальный измерительный блок выполнен с возможностью обеспечения получения первых данных (в данном случае положения и ориентации шлема 5).
Камера 14 производит аудио/видеопоток изображения реальной видимой окружающей среды и реальной звуковой окружающей среды пилота. Камера 14 соединена с первым блоком 13 через любые проводные или беспроводные средства связи.
Средства 15 отображения расположены на шлеме 10 напротив поверхности 12 отображения. Средства 15 отображения выполнены с возможностью отображения объектов дополненной реальности на поверхности 12 отображения.
Объектами дополненной реальности являются, например, изображения или письменные данные. Объекты дополненной реальности генерированы до полета истребителя и записаны в памяти, либо производятся динамически, например, в зависимости от показаний бортовых приборов истребителя.
Изображения являются, например, изображениями взлетно-посадочной полосы, рельефа местности (гора, долина и т.д.), моря, какой-либо цели, других летательных аппаратов или различных транспортных средств, различных зданий и т.д. Письменные данные относятся, например, к текущему полету, к контролю различных параметров истребителя, к сообщению, адресованному пилоту, и т.д.
В данном случае средства 15 отображения содержат проектор, который проецирует объекты дополненной реальности на поверхность 12 отображения, накладывая их на реальную видимую окружающую среду пилота.
Второй блок 16 расположен в кабине.
Второй блок 16 содержит вторые средства 22 измерения.
Вторые средства 22 измерения включают в себя второй инерциальный измерительный блок и приемник GPS (от Global Positioning System на английском языке).
Вторые средства 22 измерения выдают вторые данные, отображающие, в частности, географическое положение и ориентацию истребителя по трем осям, скорость и направление полета истребителя (и, следовательно, кабины). Второй инерциальный измерительный блок выполнен с возможностью обеспечения получения вторых данных (в данном случае ориентации кабины).
Второй блок 16 связан с первым блоком 13 через любые проводные или беспроводные средства связи.
Далее следует более подробное описание работы заявленного устройства для визуального наблюдения.
Устройство для визуального наблюдения предназначено для отображения объектов дополненной реальности на поверхности 12 отображения таким образом, чтобы с точки зрения пилота они не накладывались на оборудование кабины.
Как показано на фиг. 3, в данном случае оборудование кабины включает в себя приборы 25 управления полетом, зеркало индикатора 26 на лобовом стекле, а также элементы конструкции кабины.
Элементы конструкции кабины включают в себя арку 27 фонаря кабины, оснащенную одним или несколькими зеркалами заднего обзора.
Средства 18 считывания первого блока 13 выполнены с возможностью считывать в режиме реального времени первые данные и вторые данные. Средства 18 считывания считывают также третьи данные, определяющие габаритные зоны 30, занятые оборудованием кабины. Габаритные зоны 30 соответствуют, таким образом, поверхностям, занятым оборудованием кабины.
Третьи данные могут быть записаны в памяти первого блока 13 или второго блока 16 и могут быть генерированы до ввода в строй устройства для визуального наблюдения.
Таким образом, третьи данные могут содержать трехмерное изображение кабины и оборудования кабины.
Изображение в трех измерениях можно получить посредством моделирования модели кабины, соответствующей кабине истребителя. Трехмерное изображение можно также получить посредством обработки изображений, производимых камерой 14 устройства для визуального наблюдения в момент инициализации устройства для визуального наблюдения (или другой камерой, находящейся в кабине).
Третьи данные могут также включать в себя изображение, показывающее ограничения, соответствующие габаритным зонам 30.
В этом случае считывание, производимое средствами 18 считывания, состоит в выведении третьих данных, записанных в памяти.
Третьи данные могут также считываться динамически средствами 18 считывания.
Динамическое считывание может, например, использовать маркеры, положение которых позволяет определить габаритные зоны 30. Маркеры могут быть элементами, добавленными к оборудованию кабины (например, этикетками, приклеенными на оборудовании кабины), или могут представлять собой геометрические формы конструкции оборудования кабины (например, внутренний угол, линию, прямой угол и т.д.). Маркеры распознаются в режиме реального времени и позволяют определить в режиме реального времени габаритные зоны 30.
Динамическое считывание можно также производить посредством обработки изображений, производимых камерой 14 устройства для визуального наблюдения. Благодаря этим изображениям, можно в режиме реального времени распознавать оборудование кабины и определять в режиме реального времени габаритные зоны 30. Таким образом, камера 14 выполнена с возможностью способствовать получению третьих данных.
Средства 18 считывания считывают также объекты дополненной реальности.
Средства 19 обработки устройства для визуального наблюдения выполнены с возможностью определять в режиме реального времени положение и/или ориентацию и/или форму и/или размер объектов дополненной реальности, используя, в частности, первые данные, вторые данные и третьи данные.
Средства 19 обработки анализируют первые данные, вторые данные и третьи данные, чтобы воспроизвести в режиме реального времени и в трех измерениях реальную видимую окружающую среду пилота, и вводят в эту реальную видимую окружающую среду объекты дополненной реальности.
Ввод объектов дополненной реальности производят таким образом, чтобы пилот мог легко наблюдать объекты дополненной реальности, когда объекты дополненной реальности проецируются на поверхность 12 отображения.
Ввод объектов дополненной реальности осуществляют также таким образом, чтобы объекты дополненной реальности располагались снаружи габаритных зон 30, когда их проецируют на поверхность 12 отображения.
Таким образом, отображение объектов дополненной реальности ни в какой момент не закрывает полностью или частично оборудование кабины.
Предпочтительно, устройства для визуального наблюдения можно деактивировать в любой момент посредством действия деактивации, обнаруживаемого устройством для визуального наблюдения.
Действие деактивации может представлять собой жест, обнаруживаемый, например, при помощи камеры 14 устройства для визуального наблюдения, или слово, обнаруживаемое при помощи микрофона устройства для визуального наблюдения.
После деактивации устройство для визуального наблюдения можно реактивировать в любой момент посредством действия реактивации, обнаруживаемого устройством для визуального наблюдения.
Можно также запустить в любой момент автотест устройства для визуального наблюдения посредством действия автотеста. Действие автотеста тоже может быть жестом или словом. В частности, автотест позволяет принудительно выровнять габаритные зоны 30, определенные с третьими данными, по реальному оборудованию кабины. Автотест позволяет также вывести отображение габаритных зон 30, чтобы пилот сам мог проверить, что они совмещены с реальным оборудованием кабины.
Разумеется, изобретение не ограничивается описанным вариантом осуществления и охватывает любую версию, входящую в объем изобретения, определенный формулой изобретения.
В данном случае было описано устройство для визуального наблюдения, встроенное в шлем. Устройство для визуального наблюдения может быть также встроено в другое оборудование, например, в очки или в маску дополненной реальности.
В случае очков поверхность отображения находится на стеклах очков. Под «стеклом» следует понимать прозрачный элемент в основном плоской формы, через который пилот видит окружающую его реальную видимую среду. Держатель содержит оправу или конструкцию очков. В случае очков, как и в случае шлема и его визора, объекты дополненной реальности проецируются на стекла и накладываются на реальную видимую окружающую среду, напрямую наблюдаемую пилотом.
В случае маски дополненной реальности поверхность отображения расположена на экране, находящемся напротив глаз пилота. Отображение объектов дополненной реальности является в этом случае отображением на экране, а не проекцией, получаемой при помощи проектора. Держатель содержит конструкцию маски дополненной реальности. В случае маски происходит съемка реальной видимой окружающей среды и ее отображение на экране в режиме реального времени, при этом пилот наблюдает ее через ее отображение на экране, а не напрямую (прямой обзор пилота закрыт экраном). Объекты дополненной реальности вводятся в реальную видимую окружающую среду, отображаемую на экране.
Выше было упомянуто определенное число элементов оборудования кабины, но можно учитывать и другие элементы оборудования, например, кресло второго пилота или другой элемент конструкции кабины.
Устройство для визуального наблюдения может иметь другую архитектуру. Первый блок и второй блок могут находиться на держателе устройства для визуального наблюдения или могут быть объединены в единый блок. Первый блок может также находиться в кабине, а не на держателе.

Claims (14)

1. Устройство для визуального наблюдения для пилота летательного аппарата, содержащее:
- держатель (10), предназначенный для размещения на голове пилота летательного аппарата;
- поверхность (12) отображения, расположенную на держателе и предназначенную для размещения вблизи и напротив глаз пилота летательного аппарата;
- средства (15) отображения, расположенные на держателе и выполненные с возможностью отображения объектов дополненной реальности на поверхности отображения;
- средства (18) считывания, выполненные с возможностью считывать в режиме реального времени первые данные, отображающие положение и ориентацию держателя, вторые данные, отображающие положение и ориентацию кабины летательного аппарата, третьи данные, определяющие габаритные зоны (30), занятые оборудованием кабины, а также объекты дополненной реальности;
- средства (19) обработки, выполненные с возможностью определять в режиме реального времени положение, и/или ориентацию, и/или форму, и/или размер объектов дополненной реальности, используя, в частности, первые данные, вторые данные и третьи данные, так, что все объекты дополненной реальности располагаются снаружи габаритных зон (30), когда они отображаются на поверхности (12) отображения.
2. Устройство для визуального наблюдения по п. 1, в котором оборудование кабины включает в себя приборы (25) управления полетом, и/или зеркало (26) индикатора на лобовом стекле, и/или элемент конструкции кабины.
3. Устройство для визуального наблюдения по п. 2, в котором элемент конструкции кабины содержит дугу (27) фонаря кабины, оснащенную зеркалом заднего обзора.
4. Устройство для визуального наблюдения по п. 1, содержащее первый инерциальный измерительный блок, установленный на держателе и выполненный с возможностью обеспечения выдачи первых данных.
5. Устройство для визуального наблюдения по п. 1, содержащее второй инерциальный измерительный блок, выполненный с возможностью обеспечения выдачи вторых данных.
6. Устройство для визуального наблюдения по п. 1, содержащее камеру (14), установленную на держателе и выполненную с возможностью обеспечения выдачи третьих данных.
7. Шлем (5) пилота летательного аппарата, содержащий визор (11) и устройство для визуального наблюдения по одному из пп. 1-6, при этом поверхность (12) отображения находится на визоре (11).
8. Очки, содержащие стекла и устройство для визуального наблюдения по одному из пп. 1-6, при этом поверхность отображения находится на стеклах.
9. Маска дополненной реальности, содержащая экран и устройство для визуального наблюдения по одному из пп. 1-6, при этом поверхность отображения находится на экране.
RU2020117141A 2017-11-30 2018-11-28 Устройство для визуального наблюдения для пилота летательного аппарата RU2734063C1 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR1701259A FR3074307B1 (fr) 2017-11-30 2017-11-30 Dispositif de vision pour pilote d aeronef
FR1701259 2017-11-30
PCT/EP2018/082895 WO2019106046A1 (fr) 2017-11-30 2018-11-28 Dispositif de vision pour pilote d'aeronef

Publications (1)

Publication Number Publication Date
RU2734063C1 true RU2734063C1 (ru) 2020-10-12

Family

ID=62683234

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2020117141A RU2734063C1 (ru) 2017-11-30 2018-11-28 Устройство для визуального наблюдения для пилота летательного аппарата

Country Status (7)

Country Link
US (1) US10977870B2 (ru)
EP (1) EP3717956B1 (ru)
CN (1) CN111417890A (ru)
FR (1) FR3074307B1 (ru)
IL (1) IL274713B2 (ru)
RU (1) RU2734063C1 (ru)
WO (1) WO2019106046A1 (ru)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3839411B1 (fr) * 2019-12-17 2023-08-23 John Cockerill Defense SA Système intelligent pour le contrôle de fonctions dans une tourelle de véhicule de combat
US11672297B2 (en) 2021-02-24 2023-06-13 LIFT Airborne Technologies LLC Accessory mounting system for a helmet
US11993394B2 (en) * 2021-11-10 2024-05-28 Rockwell Collins, Inc. Flight safety demonstration and infotainment through mixed reality

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9316834B2 (en) * 2011-11-24 2016-04-19 Panasonic Intellectual Property Management Co., Ltd. Head-mounted display device with foveated pixels
US9766465B1 (en) * 2014-03-25 2017-09-19 Rockwell Collins, Inc. Near eye display system and method for display enhancement or redundancy
JP2017187758A (ja) * 2009-11-09 2017-10-12 クゥアルコム・インコーポレイテッドＱｕａｌｃｏｍｍ Ｉｎｃｏｒｐｏｒａｔｅｄ マルチスクリーン画像表示

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2659934A2 (fr) * 1990-03-06 1991-09-27 Wieczorek Julien Helicopteres bi-rotors synchropteres, a position variable du bloc central moteur.
US5119236A (en) * 1990-10-22 1992-06-02 Rockwell International Corporation Split mirror vision augmentation system
US7180476B1 (en) * 1999-06-30 2007-02-20 The Boeing Company Exterior aircraft vision system using a helmet-mounted display
FR2969792B1 (fr) * 2010-12-23 2012-12-28 Thales Sa Procede de suppression d'un masque de cockpit et systeme de visualisation de casque associe
US9081177B2 (en) 2011-10-07 2015-07-14 Google Inc. Wearable computer with nearby object response
US9785231B1 (en) * 2013-09-26 2017-10-10 Rockwell Collins, Inc. Head worn display integrity monitor system and methods
US9718558B2 (en) * 2014-02-26 2017-08-01 Honeywell International Inc. Pilot centered system and method for decluttering aircraft displays
GB201414609D0 (en) * 2014-08-18 2014-10-01 Tosas Bautista Martin Systems and methods for dealing with augmented reality overlay issues
FR3039643B1 (fr) * 2015-07-31 2018-07-13 Thales Interface homme-machine pour la gestion du vol d'un aeronef
US9865091B2 (en) * 2015-09-02 2018-01-09 Microsoft Technology Licensing, Llc Localizing devices in augmented reality environment
US10204453B2 (en) * 2015-09-04 2019-02-12 Airbus Group India Private Limited Aviation mask
US10382746B1 (en) * 2015-09-22 2019-08-13 Rockwell Collins, Inc. Stereoscopic augmented reality head-worn display with indicator conforming to a real-world object
IL243422B (en) * 2015-12-30 2018-04-30 Elbit Systems Ltd Information management is displayed according to the directions of the user's gaze
CN205942090U (zh) * 2016-04-29 2017-02-08 深圳市大疆创新科技有限公司 可穿戴设备及无人机系统
US10732420B2 (en) * 2016-09-20 2020-08-04 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Head up display with symbols positioned to augment reality
US10642345B2 (en) * 2016-10-18 2020-05-05 Raytheon Company Avionics maintenance training
US10822108B2 (en) * 2017-03-06 2020-11-03 Textron Innovations Inc. Augmented reality system for pilot and passengers

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017187758A (ja) * 2009-11-09 2017-10-12 クゥアルコム・インコーポレイテッドＱｕａｌｃｏｍｍ Ｉｎｃｏｒｐｏｒａｔｅｄ マルチスクリーン画像表示
US9316834B2 (en) * 2011-11-24 2016-04-19 Panasonic Intellectual Property Management Co., Ltd. Head-mounted display device with foveated pixels
US9766465B1 (en) * 2014-03-25 2017-09-19 Rockwell Collins, Inc. Near eye display system and method for display enhancement or redundancy

Also Published As

Publication number Publication date
FR3074307B1 (fr) 2019-12-20
US10977870B2 (en) 2021-04-13
EP3717956A1 (fr) 2020-10-07
US20200357179A1 (en) 2020-11-12
IL274713B1 (en) 2023-06-01
IL274713A (en) 2020-07-30
IL274713B2 (en) 2023-10-01
FR3074307A1 (fr) 2019-05-31
EP3717956B1 (fr) 2021-12-29
CN111417890A (zh) 2020-07-14
WO2019106046A1 (fr) 2019-06-06

Similar Documents

Publication Publication Date Title
RU2734063C1 (ru) Устройство для визуального наблюдения для пилота летательного аппарата
US20070247457A1 (en) Device and Method for Presenting an Image of the Surrounding World
ES2965027T3 (es) Registro mejorado para realidad aumentada vehicular que usa autoarmonización
US6208933B1 (en) Cartographic overlay on sensor video
KR102403915B1 (ko) 멀미를 겪지 않고 차량에서 디지털 콘텐츠 보기
US20190049949A1 (en) Modified-reality device and method for operating a modified-reality device
JP7488925B2 (ja) 映像生成装置、および、映像生成方法
JP7232779B2 (ja) 仮想現実による乗り物酔い防止のためのシステムおよび方法
US20230249618A1 (en) Display system and display method
JP2001103395A (ja) ヘッド・マウント・ディスプレイ装置
TWM545478U (zh) 具擴增實境與虛擬實境的頭盔
CN117916706A (zh) 在行驶期间在机动车中运行智能眼镜的方法、可相应运行的智能眼镜及机动车
JP3252129B2 (ja) ヘリコプタの操縦支援装置
KR102173476B1 (ko) 비행 안전 시야 확보를 위한 항공기용 신호처리 시스템
JP7147527B2 (ja) 支援装置、支援方法およびプログラム
WO2017024458A1 (en) System, method and apparatus for vehicle and computer readable medium
GB2599145A (en) Large space tracking using a wearable optics device
JP2020537390A (ja) 乗り物操作のための合成イメージと実イメージの結合
US20230015904A1 (en) System and method for providing visual assistance to an individual suffering from motion sickness
CN113298955B (zh) 一种真实场景与虚拟现实场景融合方法、系统及飞行模拟器
US11768650B2 (en) Display control device, display system, and display control method for controlling display of information
US10896547B1 (en) Systems and methods of augmented reality visualization based on sensor data
CN209776306U (zh) 护航仪及具有它的护航系统
WO2024132690A1 (fr) Système de réalité immersive embarqué sur un véhicule
CN103017759B (zh) 一种克服空间定向障碍和错觉的方法