KR102276674B1 - 항공기의 외부 전경 콘텐츠 생성 및 제공 장치 - Google Patents

항공기의 외부 전경 콘텐츠 생성 및 제공 장치 Download PDF

Info

Publication number
KR102276674B1
KR102276674B1 KR1020210001908A KR20210001908A KR102276674B1 KR 102276674 B1 KR102276674 B1 KR 102276674B1 KR 1020210001908 A KR1020210001908 A KR 1020210001908A KR 20210001908 A KR20210001908 A KR 20210001908A KR 102276674 B1 KR102276674 B1 KR 102276674B1
Authority
KR
South Korea
Prior art keywords
display
aircraft
information
image
unit
Prior art date
Application number
KR1020210001908A
Other languages
English (en)
Inventor
김근형
Original Assignee
김근형
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김근형 filed Critical 김근형
Priority to KR1020210001908A priority Critical patent/KR102276674B1/ko
Application granted granted Critical
Publication of KR102276674B1 publication Critical patent/KR102276674B1/ko
Priority to PCT/KR2021/011908 priority patent/WO2022149686A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G03B15/006—Apparatus mounted on flying objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H04N5/23238—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

본 발명은 항공기에 설치된 복수의 창에 복수의 카메라를 설치하여 항공기의 비행 중 외부 전경을 항공기 내에 시현하여 승객들이 이를 감상할 수 있도록 하는 항공기의 비행 중 외부 전경 콘텐츠 생성 및 제공 장치에 관한 것으로, 이를 위하여 항공기에 설치된 복수의 창문에 각각 삽입 설치되어 항공기의 외부 전경을 촬영하여 송출하는 복수의 카메라를 포함하는 촬영부와, 단일 디스플레이 및 복수의 서브 디스플레이를 포함하는 멀티 디스플레이를 포함하는 디스플레이부와, 상기 항공기에 장착되어 상기 항공기의 외부 환경 및 상태를 감지하기 위한 복수의 센서들로 구성된 감지부와, 상기 감지부에 의해 감지한 외부 환경 및 상태를 토대로 상기 촬영부로부터 제공받은 촬영 영상을 보정하며, 상기 보정한 촬영 영상의 합성을 통해 이벤트 영상 및 관제 영상을 생성하여 저장부에 저장하며, 상기 디스플레이부를 통해 상기 보정한 촬영 영상 또는 보정한 촬영 영상의 합성을 통해 생성된 파노라믹 뷰를 제공하는 제어부를 포함하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치를 제공할 수 있다.

Description

항공기의 외부 전경 콘텐츠 생성 및 제공 장치{Apparatus for providing and generating external panoramic view content}
본 발명은 항공기의 비행 중 외부 전경 콘텐츠를 생성 및 제공하는 장치에 관한 것으로, 더욱 상세하게는 항공기에 설치된 복수의 창에 복수의 카메라를 설치하여 항공기의 비행 중 외부 전경을 항공기 내에 시현하여 항공기 승객들이 이를 감상할 수 있도록 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치에 관한 것이다.
현재 모든 항공사는 안전 절차에 따라 항공기 이륙 시 순항고도에 도달하기 이전과 착륙 시 10,000피트 이하에서는 항공기의 객실창의 윈도우 쉐이드(window shade)를 개방하고 있는데, 그 이외의 경우에는 객실창 가까이 앉은 승객이 윈도우 쉐이드를 열거나 닫을 수 있다. 객실창 가까이 앉은 승객의 경우 항공기의 비행 중 외부 전경을 선택에 따라 볼 수 있지만 그 시야가 제한되며, 가운데 통로 측 자리에 앉은 승객의 경우에는 항공기의 비행 중 외부 전경을 보기 어렵다.
등록특허 제10-0599540호 "항공기내 센서 네트워크를 활용한 승객 맞춤형 미디어 서비스 방법 및 시스템"은 멀티미디어 컨텐츠를 항공기 탑승 승객에게 선별적으로 디스플레이하는 맞춤형 멀티미디어 서비스 시스템 및 장치에 관한 것으로서, 탑승 예약 시 제공된 승객의 정보를 기초로 하여 멀티미디어 컨텐츠를 입수하고 이를 분류, 저장 및 편집하여 각 항공기별 승객용 컨텐츠를 제작하는 컨텐츠 제작 서버와, 멀티미디어 컨텐츠를 저장하는 기내 멀티미디어 저장장치와, 상기 컨텐츠 제작 서버에서 제작된 멀티미디어 컨텐츠 중 관련 컨텐츠를 이륙 전에 상기 기내 멀티미디어 저장 장치에 저장하고, 비행 중에 상기 멀티미디어 저장장치로부터 수신한 멀티미디어 컨텐츠를 유무선 네트워크를 통해서 방송하는 중앙서버와, 승객으로부터 고유 정보를 수신하여 저장하며, 상기 고유 정보에 기초하여 상기 중앙 서버로부터 상기 멀티미디어 컨텐츠를 선별적으로 수신하는 좌석별 서비스 처리기와, 상기 좌석별 서비스 처리기로부터 상기 선별된 멀티미디어 컨텐츠를 전송받아 디스플레이하는 디스플레이 장치를 포함하는 멀티미디어 서비스 시스템 및 그 운용 방법을 제공한다.
한편, 공개특허 제10-2014-0024444호 "맞춤형 기내 멀티미디어 컨텐츠, 기내 서비스 제공 방법"은 항공기 탑승 전에 있어서, 기내 멀티미디어 컨텐츠 서비스 항목을 소비자에게 제안하는 단계(기내 멀티미디어 서비스 제안 단계)와, 상기 제안된 기내 멀티미디어 컨텐츠 서비스 항목 중 하나 이상이 상기 소비자에 의해 선택되는 단계(기내 멀티미디어 서비스 선택 단계)와, 항공기 탑승 후에 있어서, 상기 소비자에 의해 선택된 기내 멀티미디어 컨텐츠 서비스 항목을 기내 멀티미디어 디스플레이기를 통해 상기 소비자에게 제공하는 단계(기내 멀티미디어 서비스 제공 단계)를 포함하는, 맞춤형 기내 멀티미디어 컨텐츠 서비스 제공 방법을 제공한다.
그러나 항공기 승객들이 항공기의 비행 중 외부 전경을 항공기 내에서 감상할 수 있도록 하는 기내 서비스는 제공되지 못하고 있다.
등록특허 제10-0599540호 "항공기내 센서 네트워크를 활용한 승객 맞춤형 미디어 서비스 방법 및 시스템"(2006. 7. 5. 등록) 공개특허 제10-2014-0024444호 "맞춤형 기내 멀티미디어 컨텐츠, 기내 서비스 제공 방법"(2014. 2. 28. 공개)
본 발명은 항공기에 설치된 복수의 창에 복수의 카메라를 설치하여 항공기의 비행 중 외부 전경을 이용하여 다양한 이벤트 영상과 관제 영상을 생성할 수 있도록 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치를 제공하는 것을 목적으로 한다.
또한 본 발명은 승객의 요청에 따라 이벤트 영상을 생성하여 항공기의 착륙 후에 승객에게 제공하는 것을 목적으로 한다.
또한 본 발명은 승객용 좌석 뒷면 등 객실 내의 평면 공간에 제한되지 않고 객실 내 자투리 공간 등 굴곡된 면에 플렉시블 디스플레이를 설치하여 항공기의 비행 중 외부 전경을 파노라마 형태로 제공하는 것을 목적으로 한다.
또한 본 발명은 승객이 항공기의 비행 중 외부 전경 콘텐츠의 방향별 뷰 및 카메라별 뷰 중 어느 하나를 선택할 수 있도록 함으로써, 항공기의 비행 중 외부 전경을 다양한 각도 및 위치에서 감상할 수 있도록 하는 서비스를 제공하는 것을 목적으로 한다.
또한 본 발명은 기존 항공기 구조에 변화를 주지 않고서도 항공기 승객들에게 항공기의 비행 중 외부 전경 콘텐츠를 제공할 수 있는 장치를 제공하는 것을 목적으로 한다.
또한 본 발명은 기존의 기내 엔터테인먼트 시스템과 통합하여 항공기 승객들에게 항공기의 비행 중 외부 전경 콘텐츠를 제공할 수 있는 장치를 제공하는 것을 목적으로 한다.
본 발명에 의한 항공기의 외부 전경 콘텐츠 생성 및 제공 장치는 항공기에 설치된 복수의 창문에 각각 삽입 설치되어 항공기의 외부 전경을 촬영하여 송출하는 복수의 카메라를 포함하는 촬영부와, 단일 디스플레이 및 복수의 서브 디스플레이를 포함하는 멀티 디스플레이를 포함하는 디스플레이부와, 상기 항공기에 장착되어 상기 항공기의 외부 환경 및 상태를 감지하기 위한 복수의 센서들로 구성된 감지부와, 상기 감지부에 의해 감지한 외부 환경 및 상태를 토대로 상기 촬영부로부터 제공받은 촬영 영상을 보정하며, 상기 보정한 촬영 영상의 합성을 통해 이벤트 영상 및 관제 영상을 생성하여 저장부에 저장하며, 상기 디스플레이부를 통해 상기 보정한 촬영 영상 또는 보정한 촬영 영상의 합성을 통해 생성된 파노라믹 뷰를 제공하는 제어부를 포함하는 것을 특징으로 한다.
또한, 상기 복수의 카메라는 항공기 창문의 복수의 레이어 중 소정의 중간 레이어에 설치되고, 상기 제어부에 광섬유 케이블을 통해 연결되며, 항공기 창문에 설치 시 각각 서로 다른 각도로 설치되어 촬영 영상의 촬영 각도가 달라지도록 하는 것을 특징으로 한다.
또한, 상기 제어부는 복수의 카메라 각각을 식별하는 카메라 식별정보를 관리하고, 복수의 카메라로부터 획득된 복수의 촬영 영상을 파노라믹 뷰로 제공하기 위하여 설치 위치 정보에 기초하여 복수의 촬영 영상을 합성하는 프로세스를 수행하며, 상기 설치 위치 정보는 항공기의 창문에 복수의 카메라가 설치된 설치 위치 및 설치 각도 정보를 포함하는 것을 특징으로 한다.
또한, 상기 제어부는 복수의 카메라로부터 촬영된 영상을 복수의 카메라 각각을 식별하는 카메라 식별정보를 이용하여 구분하여 관리하며, 디스플레이부로부터 수신되는 단일 디스플레이로부터의 제1 영상 출력 요청 신호 및 멀티 디스플레이로부터의 제2 영상 출력 요청 신호에 따라서 복수의 카메라에서 촬영되는 영상 중 적어도 하나의 영상을 디스플레이부로 전달하고, 제2 영상 출력 요청 신호가 수신되는 경우에는 복수의 카메라에서 촬영되는 영상을 이용하여 파노라믹 뷰로 생성하여 생성된 파노라믹 뷰 영상을 멀티 디스플레이의 배열 구성 정보에 기초하여 멀티 디스플레이에 출력하도록 제어하는 것을 특징으로 한다.
또한, 상기 멀티 디스플레이의 배열 구성 정보는 멀티 디스플레이에 포함되는 복수의 서브 디스플레이의 개수 및 복수의 서브 디스플레이의 배열 형태 정보를 포함하고, 상기 제어부는 멀티 디스플레이의 배열 구성 정보에 따라서 촬영된 영상을 처리하여, 멀티 디스플레이에 포함되는 복수의 서브 디스플레이에 분배하는 것을 특징으로 한다.
또한, 상기 제어부는 단일 디스플레이 및 멀티 디스플레이로 영상을 출력할 때 뷰 선택 메뉴를 제공하고, 상기 뷰 선택 메뉴는 항공기에서 카메라 설치 방향에 따른 방향별 뷰를 선택할 수 있는 방향별 뷰 선택 모드 및 카메라별 뷰를 선택할 수 있는 카메라별 뷰 선택 모드를 포함하는 것을 특징으로 한다.
또한, 상기 제어부는 디스플레이부에 포함된 단일 디스플레이 및 멀티 디스플레이의 디스플레이 식별정보 및 디스플레이 특성 정보를 관리하고, 상기 디스플레이 특성 정보는 해당 디스플레이가 단일 디스플레이인지, 멀티 디스플레이인지를 식별하는 디스플레이 종류 정보, 디스플레이 설치 위치 정보 및 멀티 디스플레이인 경우 멀티 디스플레이의 배열 정보를 포함하며, 상기 디스플레이 설치 위치 정보는 디스플레이의 설치 각도 정보 및 인접 디스플레이 식별정보를 포함하는 것을 특징으로 한다.
또한, 상기 촬영부의 복수의 카메라 중 승객의 좌석과 인접한 영역에 설치된 각 카메라는 식별 정보로 좌석 정보가 설정되어 있으며, 촬영 영상과 설정된 상기 좌석 정보를 상기 제어부에 제공하며, 상기 디스플레이부는 상기 항공기의 좌석 뒤편에 장착되며 사용자 입력이 가능하고, 상기 사용자 입력에 따라 좌석 정보를 상기 제어부에 송신하는 단일 디스플레이를 포함하며, 상기 제어부는 상기 좌석 정보와 보정한 촬영 영상을 매칭시켜 상기 저장부에 저장하며, 상기 단일 디스플레이로부터 좌석 정보가 수신됨에 따라 상기 좌석 정보에 매칭된 촬영 영상을 제공하는 것을 특징으로 한다.
또한, 상기 디스플레이부는 상기 항공기의 좌석 뒤편에 장착되고 사용자 입력이 가능하며, 상기 사용자 입력에 따라 좌석 정보를 상기 제어부에 송신하는 단일 디스플레이를 포함하며, 상기 제어부는 상기 사용자 입력으로 이벤트 영상 생성 요청 신호가 수신되는 경우 상기 복수의 카메라에 의해 촬영된 촬영 영상의 보정을 통해 이벤트 영상에 대응되는 파노라믹 뷰를 생성한 후 이를 상기 좌석 정보에 매칭시켜 상기 저장부에 저장하는 것을 특징으로 한다.
또한, 상기 제어부는 상기 항공기가 착륙함에 따라 상기 저장부에 저장된 좌석 정보가 매칭된 이벤트 영상을 콘텐츠 서비스 제공 서버에 전송하며, 상기 콘텐츠 서비스 제공 서버는 상기 좌석 정보에 대응되는 항공기 티켓을 구매한 승객에 의해 등록된 승객용 정보를 이용하여 상기 이벤트 영상을 상기 승객에게 제공하는 것을 특징으로 한다.
또한, 상기 저장부에는 상기 항공기의 비행 경로 상에 이벤트 영상 생성 시점에 대한 정보가 셋팅되어 있으며, 상기 제어부는 상기 이벤트 영상 생성 시점에 의거하여 상기 촬영부에 의해 촬영된 촬영 영상을 기반으로 이벤트 영상을 생성하여 저장부에 저장하는 것을 특징으로 한다.
또한, 상기 제어부는 상기 항공기의 착륙과 더불어 상기 저장부에 저장된 이벤트 영상을 통신망을 통해 연결된 콘텐츠 서비스 제공 서버에 전송하며, 상기 콘텐츠 서비스 제공 서버는 상기 항공기에 탑승한 승객에 의해 등록된 승객용 정보를 이용하여 상기 이벤트 영상을 상기 승객에게 제공하는 것을 특징으로 한다.
또한, 상기 감지부는 상기 항공기의 흔들림 정도를 감지할 수 있는 센서를 포함하며, 상기 제어부는 상기 감지된 흔들림 정도에 의거하여 상기 촬영 영상의 떨림 정도를 계산하며, 상기 계산한 떨림 정도에 의거하여 상기 촬영 영상에 대한 보정을 수행하는 것을 특징으로 한다.
또한, 상기 감지부는 상기 항공기의 흔들림 또는 비행 각도를 감지하기 위한 센서를 포함하며, 상기 제어부는 상기 감지된 흔들림 또는 비행 각도에 의거하여 흔들림 변화 또는 비행 각도 변화 정도를 계산하며, 상기 계산한 흔들림 변화 또는 비행 각도 변화 정도가 기 설정된 임계 범위를 벗어나는 경우 상기 촬영 영상의 보정을 통해 관제 영상을 생성하는 것을 특징으로 한다.
본 발명에 의하면 항공기에 설치된 복수의 창에 복수의 카메라를 설치하여 항공기의 비행 중 외부 전경을 항공기 내에 시현하여 항공기 승객들이 이를 감상할 수 있을 뿐만 아니라 자신이 원하는 지점에서의 이벤트 영상을 생성하여 수집할 수도록 하는 효과가 있다.
또한 본 발명에 의하면 승객용 좌석 뒷면 등 객실 내의 평면 공간에 제한되지 않고 객실 내 자투리 공간 등 굴곡된 면에 플렉시블 디스플레이를 설치하여 항공기의 비행 중 외부 전경을 파노라마 형태로 제공할 수 있는 효과가 있다.
또한 본 발명에 의하면, 승객이 항공기의 비행 중 외부 전경 콘텐츠의 방향별 뷰 및 카메라별 뷰 중 어느 하나를 선택할 수 있도록 함으로써, 항공기의 비행 중 외부 전경을 다양한 각도 및 위치에서 감상할 수 있도록 하는 효과가 있다.
또한, 본 발명에 의하면 기존 항공기 구조에 변화를 주지 않고서도 항공기 승객들에게 항공기의 비행 중 외부 전경 콘텐츠를 제공할 수 있는 효과가 있다.
또한 본 발명에 의하면 기존의 기내 엔터테인먼트 시스템과 통합하여 항공기 승객들에게 항공기의 비행 중 외부 전경 콘텐츠를 제공할 수 있는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 항공기의 비행 중 외부 전경 콘텐츠 생성 및 제공 장치의 구성을 나타내는 블록도,
도 2는 본 발명의 일 실시예에 따른 항공기의 비행 중 외부 전경 콘텐츠를 서비스하기 위한 시스템 구성도,
도 3은 본 발명의 일 실시예에 따른 항공기의 비행 중에 외부 전경 콘텐츠를 생성하고, 이를 기반으로 서비스하는 과정을 도시한 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 도 1의 단일 디스플레이에 항공기의 외부 전경 뷰 영상이 제공되는 화면을 나타내는 도면,
도 5는 본 발명의 일 실시예에 따른 도 1의 멀티 디스플레이에 항공기의 외부 전경 뷰 영상이 제공되는 화면을 나타내는 도면,
도 6은 본 발명의 일 실시예에 따른 뷰 선택 메뉴의 일 예를 나타내는 도면,
도 7은 도 6의 방향별 뷰 선택 메뉴의 일 예를 나타내는 도면,
도 8은 도 6의 카메라별 뷰 선택 메뉴의 일 예를 나타내는 도면,
도 9는 도 1의 제어부의 구성의 일 예를 나타내는 블록도,
도 10은 도 9의 디스플레이 제어부의 구성의 일 예를 나타내는 블록도,
도 11은 본 발명의 일 실시예에 따른 항공기의 창문에 삽입된 카메라를 나타내는 도면,
도 12는 도 11의 항공기의 창문에 삽입된 카메라의 측면을 나타내는 도면,
도 13은 본 발명의 일 실시예에 따른 플렉시블 디스플레이의 구성을 나타내는 도면,
도 14는 도 13의 사용자 입력 감지층에 포함될 수 있는 복수의 디스플레이 센서를 나타내는 도면,
도 15는 본 발명의 일 실시예로서 항공기의 일등석에서 단일 디스플레이 및 멀티 디스플레이를 통해 항공기의 외부 전경 뷰 영상이 제공되는 것을 나타내는 도면,
도 16은 본 발명의 다른 실시예로서 항공기의 비즈니스석에서 단일 디스플레이 및 멀티 디스플레이를 통해 항공기의 외부 전경 뷰가 제공되는 것을 나타내는 도면,
도 17은 본 발명의 또 다른 실시예로서 항공기의 이코노미석에서 멀티 디스플레이를 통해 항공기의 외부 전경 뷰가 제공되는 것을 나타내는 도면이다.
이하, 본 발명의 실시예에 대하여 첨부한 도면을 참고로 하여 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 항공기의 비행 중 외부 전경 콘텐츠 생성 및 제공 장치의 구성을 나타내는 블록도이다.
본 발명의 항공기의 비행 중 외부 전경 콘텐츠 생성 및 제공 장치(100)는 촬영부(110), 제어부(120), 디스플레이부(130)를 포함한다. 항공기의 비행 중 외부 전경 콘텐츠 생성 및 제공 장치(100)는 실시예에 따라 감지부(140), 사용자 입력부(150) 및 저장부(160)를 더 포함할 수 있다.
또한 실시예에 따라 촬영부(110), 제어부(120), 디스플레이부(130), 감지부(140), 사용자 입력부(150) 및 저장부(160)는 유선 네트워크로 연결될 수 있고, 전부 또는 일부의 연결이 무선 네트워크로 연결될 수도 있다. 여기서 촬영부(110), 제어부(120), 디스플레이부(130)는 항공기의 내부 전원을 이용하여 동작될 수 있다.
촬영부(110)는 항공기에 설치된 복수의 창문에 각각 삽입 설치되어 항공기의 외부 전경을 촬영하는 복수의 카메라(112, 114, 116)를 포함한다. 항공기의 창문은 통상적으로 이중창으로 설치되므로, 복수의 카메라(112, 114, 116)는 항공기 창문의 복수의 레이어, 예를 들어 이중창의 중간 레이어에 설치하여 기존 항공기 구조에 변화 없이 설치될 수 있다. 도 1에는 편의 상 촬영부(110)에 제1 카메라(112), 제2 카메라(114) 및 제3 카메라(116)가 포함되어 있는 것으로 도시되어 있으나, 촬영부(110)에 포함되는 카메라의 개수는 이에 제한되지 않는다.
통상적으로 항공기는 유선형으로 되어 있으므로, 복수의 창문에 복수의 카메라(112, 114, 116)를 설치 시 창문에 수직으로 설치하더라도 설치 각도가 서로 다를 수 있고, 설치 각도에 따라 촬영 영상의 촬영 각도가 달라질 수 있다. 또한, 복수의 카메라(112, 114, 116)는 창문에 설치 시 각각 서로 다른 각도로 설치되어 촬영 영상의 촬영 각도가 달라질 수도 있다.
항공기에 설치된 복수의 창문은 항공기의 양 측면에 설치되어 승객 좌석에서 외부를 볼 수 있는 복수의 창문 및 항공기의 조종석 전면에 설치되어 기장이 외부를 볼 수 있는 항공기 전면 창문을 포함한다. 따라서, 복수의 카메라(112, 114, 116) 중 적어도 하나의 카메라는 항공기 조종석 전면 창에 설치될 수 있으며, 복수의 카메라(112, 114, 116)는 각각 제어부(120)에 광섬유 케이블을 통해 연결될 수 있으나, 이에 제한되지 않고 다양한 형태의 유무선 통신망으로 연결될 수 있다.
제어부(120)는 촬영부(110) 및 디스플레이부(130)와 연결되어 촬영부(110) 및 디스플레이부(130)를 제어한다. 제어부(120)는 항공기의 비행 중 외부 전경 콘텐츠 생성 및 제공 장치(100)에 추가로 포함될 수 있는 감지부(140), 사용자 입력부(150) 및 저장부(160)를 제어할 수 있다.
제어부(120)는 복수의 카메라(112, 114, 116)로부터 촬영된 복수의 영상을 수신하여 처리한다. 제어부(120)는 복수의 카메라(112, 114, 116) 각각을 식별하는 카메라 식별정보를 관리하여, 복수의 카메라(112, 114, 116)로부터 촬영된 영상을 복수의 카메라(112, 114, 116) 각각을 식별하는 카메라 식별정보를 이용하여 구분하여 관리할 수 있다. 제어부(120)는 복수의 카메라(112, 114, 116)로부터 영상이 각각 수신되는 경우, 각 영상의 촬영 시간 정보를 영상 프레임에 추가하여 촬영된 영상을 촬영 시간 정보와 함께 관리할 수 있다.
본 발명의 실시예에서, 카메라 식별정보는 복수의 카메라(112, 114, 116) 각각이 설치된 창문과 인접한 좌석 정보일 수 있다. 예를 들어, 하나의 창문에 설치된 카메라(112)와 인접한 좌석이 세 개일 경우 세 개의 좌석 정보가 카메라 식별정보일 수 있다.
제어부(120)는 복수의 카메라(112, 114, 116)의 카메라 식별정보와 함께 복수의 카메라(112, 114, 116)의 설치 정보를 관리할 수 있다. 설치 정보는 항공기의 창문에 복수의 카메라(112, 114, 116)가 설치된 설치 위치 및 설치 각도 정보를 포함할 수 있다. 제어부(120)는 복수의 카메라(112, 114, 116)로부터 획득된 복수의 촬영 영상을 파노라믹 뷰로 제공하기 위하여 설치 정보에 기초하여 복수의 촬영 영상을 합성하는 프로세스를 수행할 수 있다. 이를 위해 제어부(120)는 항공기 내부 창문의 설치 위치를 좌표화하여 항공기의 창문의 설치 정보로 관리할 수 있다.
디스플레이부(130)는 단일 디스플레이(132) 및 복수의 서브 디스플레이를 포함하는 멀티 디스플레이(134)를 포함할 수 있다. 도 1에는 편의 상 하나의 단일 디스플레이(132) 및 하나의 멀티 디스플레이(134)가 도시되어 있으나, 단일 디스플레이(132) 및 멀티 디스플레이(134)의 설치 개수 및 설치 장소는 항공기 내부에 설치될 수 있는 한 제한되지 않는다.
단일 디스플레이(132)는 평판 디스플레이 또는 플렉시블 디스플레이로 구성될 수 있고, 멀티 디스플레이(134)는 플렉시블 디스플레이로 구성되며, 플렉시블 디스플레이는 항공기의 벽면 및 좌석 뒷면 등에 부착하기 위한 접착층을 포함할 수 있다. 플렉시블 디스플레이는 접거나 구부려도 동일한 화질의 영상을 디스플레이할 수 있으며, 플렉시블 디스플레이는 플렉시블 LCD 패널, 플렉시블 OLED 또는 전자종이 등으로 구현될 수 있다.
단일 디스플레이(132) 및 멀티 디스플레이(134)를 플렉시블 디스플레이로 구성하게 되면 평판 디스플레이에 비하여 항공기 무게를 줄일 수 있고, 낮은 전력 사용으로 항공기의 전력 사용을 낮출 수 있으며, 굴곡면에도 설치할 수 있으므로 객실의 형태에 따라 디스플레이부(130)를 다양한 위치 및 형태로 배치할 수 있다.
제어부(120)는 디스플레이부(130)로부터 수신되는 단일 디스플레이(132)로부터의 제1 영상 출력 요청 신호 및 멀티 디스플레이(134)로부터의 제2 영상 출력 요청 신호에 따라서 복수의 카메라(112, 114, 116)에서 촬영되는 영상 중 적어도 하나의 영상을 디스플레이부(130)로 전달하고, 제2 영상 출력 요청 신호가 수신되는 경우에는 복수의 카메라(112, 114, 116)에서 촬영되는 영상을 이용하여 파노라믹 뷰로 생성하여 생성된 파노라믹 뷰 영상을 멀티 디스플레이(134)의 배열 구성 정보에 기초하여 멀티 디스플레이(134)에 출력하도록 제어할 수 있다.
멀티 디스플레이(134)는 항공기 객실 내의 창문과 천장 사이의 공간(예를 들어, 에어버스 320의 객실 내의 창문과 천장 사이의 상하 폭은 45cm임)에 설치되고, 제어부(120)는 항공기 객실 내의 창문과 천장 사이의 공간에 설치된 멀티 디스플레이(134)를 통해서 해당 공간에 인접한 복수의 창문에 설치된 복수의 카메라(112, 114, 116)로부터 촬영되는 영상을 파노라믹 뷰로 제공할 수 있다.
멀티 디스플레이(134)의 배열 구성 정보는 멀티 디스플레이(134)에 포함되는 복수의 서브 디스플레이의 개수 및 복수의 서브 디스플레이의 배열 형태 정보를 포함할 수 있다. 제어부(120)는 멀티 디스플레이(134)의 배열 구성 정보에 따라서 촬영된 영상을 처리하여, 멀티 디스플레이(134)에 포함되는 복수의 서브 디스플레이에 분배할 수 있다.
제어부(120)는 단일 디스플레이(132) 및 멀티 디스플레이(134)로 영상을 출력할 때 뷰 선택 메뉴를 제공하고, 뷰 선택 메뉴는 항공기에서 카메라 설치 방향에 따른 방향별 뷰를 선택할 수 있는 방향별 뷰 선택 모드 및 카메라별 뷰를 선택할 수 있는 카메라별 뷰 선택 모드를 포함할 수 있다.
또한, 제어부(120)는 뷰 선택 메뉴를 통해 카메라 촬영 영상을 출력하고 있는 디스플레이 식별정보를 수집하고, 디스플레이부(130)에 포함된 복수의 디스플레이 중에서 수집된 디스플레이 식별정보를 이용하여 뷰 선택 메뉴를 통해 카메라 촬영 영상을 출력 중인 디스플레이를 결정할 수 있다.
제어부(120)는 디스플레이부(130)에 포함된 단일 디스플레이(132) 및 멀티 디스플레이(134)의 디스플레이 식별정보 및 디스플레이 특성 정보를 관리하고, 디스플레이 특성 정보는 해당 디스플레이가 단일 디스플레이인지, 멀티 디스플레이인지를 식별하는 디스플레이 종류 정보, 디스플레이 설치 위치 정보 및 멀티 디스플레이인 경우 멀티 디스플레이의 배열 정보를 포함할 수 있다. 디스플레이 설치 위치 정보는 디스플레이의 설치 각도 정보 및 인접 디스플레이 식별정보를 포함할 수 있다.
디스플레이부(130)는 복수의 각 디스플레이에 설치되어 각 디스플레이의 설치 형태를 감지하는 복수의 디스플레이 센서 및 인접한 디스플레이를 인식하고 제어부(120)와 통신하는 통신 모듈(도시되지 않음)을 더 포함하도록 구성될 수 있다. 이때, 제어부(120)는 디스플레이부(130)의 통신 모듈(도시되지 않음)과의 통신을 통해 디스플레이 설치 위치 정보를 수집할 수 있다.
디스플레이부(130)에 포함된 복수의 각 디스플레이는 각각 통신 모듈(도시되지 않음)을 포함하고, 인접 디스플레이와 통신 모듈을 통해 서로 각 디스플레이의 식별정보를 송수신하며, 송수신된 각 디스플레이의 식별정보를 이용하여 통신하고 디스플레이 설치 위치 정보를 송수신하도록 구성될 수 있다. 따라서, 디스플레이부(130)에 포함된 복수의 각 디스플레이는 인접한 다른 디스플레이의 식별정보 및 당해 인접한 디스플레이의 설치 위치 정보를 수집하고, 수집된 인접한 다른 디스플레이의 식별정보 및 당해 인접한 디스플레이의 설치 위치 정보를 또 다른 디스플레이로 전송하거나 제어부(120)로 전달할 수 있다.
항공기의 비행 중 외부 전경 콘텐츠 생성 및 제공 장치(100)는 항공기의 외부 환경을 감지하는 복수의 센서(142, 144, 146)로 구성된 감지부(140)를 더 포함할 수 있다.
본 발명의 실시예에서, 복수의 센서(142, 144, 146)를 통해 감지되는 정보의 예로는 항공기 속도 정보, 외부 온도 변화 정보, 비행 각도 정보, 항공기의 흔들림 정보 및 항공기의 고도 정보 등을 들 수 있으나, 이에 한정하지는 않는다.
또한, 본 발명의 실시예에서, 복수의 센서(142, 144, 146)는 IoT(Internet of Things) 기반으로 동작하는 것으로서, 상호간의 통신을 통해 정보를 송수신할 수 있다. 특히, 복수의 센서(142, 144, 146)는 자신이 감지한 정보를 상호간의 통신을 통해 제어부(120)에 전송할 수 있다. 구체적으로, 복수의 센서(142, 144, 146)는 사물간 통신을 이용하는 비IP 기반의 네트워크인 무선 센서 네트워크, 예컨대 블루투스, 블루투스 Le, 지그비(ZigBee), RFID, ZWAVE 등을 기반으로 한 무선 센서 네트워크를 이용하여 상호 연결되어 제어부(120)에 감지한 정보를 전송할 수 있다.
이를 위하여, 본 발명의 실시예에 따른 복수의 센서(142, 144, 146)는 IEEE 802.15.4를 PHY/MAC으로 하는 저전력 WPAN상에 IPv6를 탑재하여 기존 IP 네트워크에 연결할 수 있도록 하기 위한 6LoWPAN(IPv6 over Low power WPAN)과 같은 기술을 탑재하고 있으며, 전반적인 동작에 필요한 안정적인 전력을 공급하는 전원 모듈(미도시됨), 정보를 센싱하기 위한 센싱 모듈(미도시됨), 센싱 모듈에 의해 감지된 정보를 수신하여 처리하기 위한 제어모듈(미도시됨) 및 데이터를 전송하여 물리적인 통신을 수행하는 무선 송수신 모듈(미도시됨)을 구비할 수 있다.
상술한 모듈들은 사물간 통신을 수행하는 하나의 칩 형태, 예컨대 IoT(Internet Of Things) 센서 칩 형태로 구현될 수 있다.
사용자 입력부(150)는 디스플레이부(130)의 단일 디스플레이(132) 및 멀티 디스플레이(134)에 사용자 입력을 할 수 있는 다양한 형태의 사용자 입력 장치, 예를 들어 리모콘, 버튼, 키패드 등을 포함할 수 있다. 사용자 입력부(150)는 단일 디스플레이(132) 및 멀티 디스플레이(134)에 각각 통합되어 터치 패드 형식으로 구성될 수도 있다. 사용자 입력부(150)의 사용자 입력 신호는 제어부(120)로 전달되며, 제어부(120)는 사용자 입력 신호에 따른 애플리케이션 동작이나, 영상 뷰 제공 등을 디스플레이부(130)를 통해 제공할 수 있다.
본 발명의 실시예에서, 사용자 입력의 예로는 이벤트 영상 생성을 위한 것, 파노라믹 뷰 영상 요청을 위한 것, 인접한 항공기의 창문에서 바라보는 영상을 요청하기 위한 것 등을 들 수 있다.
또한, 사용자 입력부(150)는 사용자 입력이 발생될 때 사용자 입력에 대응되는 신호와 더불어 좌석 정보를 제어부(120)에 제공할 수 있다.
저장부(160)는 제어부(120)에서 수행하는 다양한 데이터 처리를 수행하기 위한 복수의 애플리케이션 및 데이터를 저장하고 관리할 수 있다.
또한, 저장부(160)는 제어부(120)의 제어에 따라 촬영부(110)에서 촬영된 영상을 각 카메라별 식별정보 및 촬영 시간 정보와 함께 저장하고 관리할 수 있다. 구체적으로, 저장부(160)는 제어부(120)의 제어에 따라 촬영부(110)에 의해 촬영된 촬영 영상에 설치 정보, 카메라 식별정보, 복수의 센서(142, 144, 146)에 의해 감지한 정보 등을 매핑한 영상 데이터를 저장 및 관리할 수 있다.
상술한 바와 같은 제어부(120)는 촬영부(110)에 의해 촬영된 촬영 영상을 기반으로 다양한 영상을 생성할 수 있는데, 이에 대해 도 2를 참조하여 설명하기로 한다.
도 2는 본 발명의 일 실시예에 따른 항공기의 비행 중 외부 전경 콘텐츠를 서비스하기 위한 시스템 구성도이다.
도 2에 도시된 바와 같이, 제어부(120)는 다양한 영상을 생성하기 위해 영상 보정 모듈(122), 이벤트 영상 생성 모듈(124) 및 관제 영상 생성 모듈(126) 등을 포함할 수 있다.
영상 보정 모듈(122)은 복수의 센서(142, 144, 146)에 의해 감지된 정보에 의거하여 이루어질 수 있다. 구체적으로, 영상 보정 모듈(122)은 복수의 센서(142, 144, 146)에 의해 감지된 정보 중 항공기의 흔들림 정보 및 비행 각도 정보를 기초하여 흔들림 및 비행 각도 변화 정도를 산출하며, 흔들림 및 비행 각도 변화 정도가 기 설정된 임계범위 내에서 벗어날 경우 촬영부(110)에 의해 촬영된 촬영 영상을 보정할 수 있다.
즉, 영상 보정 모듈(122)은 흔들림 및 비행 각도 변화 정도에 대한 데이터 값을 기초하여 촬영 영상의 떨림 정도를 계산하며, 계산한 떨림 정도에 의거하여 촬영 영상을 보정할 수 있다.
이벤트 영상 생성 모듈(124)은 사용자, 예컨대 항공기 승객의 요청에 따라 촬영 영상을 기반으로 이벤트 영상을 생성할 수 있다. 여기에서, 항공기 승객의 요청은 사용자 입력부(150)의 조작을 통해 생성될 수 있다.
이벤트 영상 생성 모듈(124)은 사용자 입력부(150)의 조작에 따라 사용자 입력 신호가 입력되는 시점에서 복수의 카메라(112, 114, 116)에 의해 촬영된 촬영 영상을 기반으로 이벤트 영상을 생성하여 저장부(160)에 저장할 수 있다. 구체적으로, 이벤트 영상 생성 모듈(124)은 사용자 입력부(150)의 조작, 예컨대 이벤트 영상 생성 요청에 따라 복수의 카메라(112, 114, 116)에 의해 촬영된 촬영 영상을 기반으로 이벤트 영상을 생성한 후 이벤트 영상에 이벤트 영상 생성 요청 시 수신되는 승객의 좌석 정보를 매칭시켜 저장부(150)에 저장할 수 있다.
또한, 이벤트 영상 생성 모듈(124)은 기 설정된 이벤트 영상 생성 시점 정보에 의거하여 이벤트 영상을 생성할 수도 있다. 구체적으로, 이벤트 영상 생성 모듈(124)은 이벤트 영상 생성 시점 정보인 항공기의 위치(비행 좌표 정보) 및 비행 시간대에 복수의 카메라(112, 114, 116)에 의해 촬영된 촬영 영상을 기반으로 이벤트 영상을 생성한 후 이를 저장부(160)에 저장할 수 있다.
본 발명의 실시예에서, 이벤트 영상 생성 시점 정보는 항공기가 이륙전에 셋팅되는 정보로서, 다양한 정보 수집을 통해 설정될 수 있다. 여기에서, 정보 수집은 콘텐츠 서비스 제공 서버(170)에 의해 이루어질 수 있다.
즉, 콘텐츠 서비스 제공 서버(170)는 소셜 네트워크 서비스(SNS : Social Network Service)와의 연동을 통해 정보를 수집하거나 다양한 항공기 이용 고객과의 연동을 통해 스팟 위치 정보를 수집하며, 수집한 스팟 위치 정보를 기반으로 이벤트 영상 생성 시점 정보를 생성한 후 이를 제어부(120)의 이벤트 영상 생성 모듈(124)에 셋팅시킬 수 있다. 구체적으로, 콘텐츠 서비스 제공 서버(170)는 항공기 이용 고객들이 추천하는 지역에 해당되는 스팟 위치 정보를 수집하며, 운항 중인 항공기의 비행 경로와 스팟 위치 정보간의 비교 분석을 통해 이벤트 영상 생성이 가능한 정보를 생성할 수 있다.
본 발명의 실시예에서, 이벤트 영상 생성 모듈(124)은 영상 보정 모듈(122)을 통해 보정된 촬영 영상을 기반으로 이벤트 영상을 생성할 수 있다.
관제 영상 생성 모듈(126)은 복수의 센서(142, 144, 146)로부터 감지된 정보에 의거하여 사고 이벤트 발생을 체크하고, 사고 이벤트 발생 시 이벤트 정보를 포함시켜 관제 영상을 생성할 수 있다. 구체적으로, 관제 영상 생성 모듈(126)은 복수의 센서(142, 144, 146)로부터 감지된 정보에 의거하여 급격한 고도 변화, 외부 환경 변화, 흔들림 변화, 비행 각도 변화가 있는지를 체크하고, 체크 결과에 의거하여 사고 이벤트 발생을 감지한 후 사고 이벤트가 발생되는 경우 복수의 카메라(112, 114, 116)에 의해 촬영된 촬영 영상을 기반으로 관제 영상을 생성하여 저장부(160)에 저장할 수 있다.
또한, 관제 영상 생성 모듈(126)은 영상 보정 모듈(122)을 통해 보정된 촬영 영상을 기반으로 관제 영상을 생성하며, 복수의 센서(142, 144, 146)에 의해 감지된 정보를 관제 영상에 매칭시켜 저장부(160)에 저장할 수 있다.
한편, 제어부(120)는 영상 전송 모듈(128)을 통해 항공기가 착륙함에 따라 저장부(160)에 저장된 데이터, 즉 정보가 매칭된 관제 영상, 좌석 정보가 매칭된 이벤트 영상, 파노라믹 뷰 데이터 및 카메라 식별정보가 매칭된 촬영 영상 등을 무선 통신망을 통해 연결된 외부의 콘텐츠 서비스 제공 서버(170)로 전송할 수 있다.
영상 전송 모듈(128)은 저장부(160)에 저장된 데이터를 외부의 콘텐츠 서비스 제공 서버(170)에 전송할 때, 항공기의 고유 식별 정보를 함께 전송할 수 있다.
콘텐츠 서비스 제공 서버(170)는 제어부(120)를 통해 제공받은 영상을 항공기의 고유 식별 정보에 매칭시켜 데이터베이스(180)에 저장할 수 있다.
콘텐츠 서비스 제공 서버(170)는 항공기 티켓 발권 서버(미도시됨)와의 연동을 통해 항공기 티켓 정보 및 항공기 티켓을 구매한 승객에 의해 등록된 승객용 정보를 관리하며, 항공기 티켓 정보 내 좌석 정보를 이용하여 데이터베이스(180)에서 이벤트 영상을 검색한 후 이를 승객용 정보를 이용하여 승객에게 제공할 수 있다.
본 발명의 실시예에서, 승객용 정보는 영상 서비스를 제공받을 수 있는 정보로서, 그 예로 스마트폰 번호, 이메일 정보 등을 들 수 있다.
또한, 콘텐츠 서비스 제공 서버(170)는 데이터베이스(180)에 저장된 영상을 기초하여 비즈니스, 퍼스트 클래스에 탑승한 승객만을 위한 영상 서비스를 제공할 수 있다. 구체적으로, 콘텐츠 서비스 제공 서버(170)는 비즈니스, 퍼스트 클래스에 탑승한 승객에 의해 등록된 승객용 정보를 이용하여 데이터베이스(180)에 저장된 영상, 즉 파노라믹 뷰 영상, 이벤트 영상 생성 시점 정보를 이용하여 생성된 이벤트 영상 등을 제공할 수 있다.
이하에서는 상술한 바와 같은 시스템이 영상을 생성하고, 이를 서비스하는 과정에 대해 도 3을 참조하여 설명한다.
도 3은 본 발명의 일 실시예에 따른 항공기의 비행 중에 외부 전경 콘텐츠를 생성하고, 이를 기반으로 서비스하는 과정을 도시한 흐름도이다.
도 3에 도시된 바와 같이, 콘텐츠 서비스 제공 서버(170)는 항공기 티켓 발권 서버와의 연동을 통해 이륙 준비 중인 항공기의 티켓 발권 정보에서 승객의 좌석 정보를 추출하고, 추출한 좌석 정보와 항공기의 승객으로부터 제공받은 승객용 정보를 데이터베이스(180)에 저장한다(S300).
그런 다음, 콘텐츠 서비스 제공 서버(170)는 제어부(120)와의 통신을 통해 이벤트 영상 생성 시점 정보를 제어부(120)에 셋팅시킨다(S302).
이후, 항공기가 이륙하게 되면, 제어부(120)는 감지부(140)로부터 감지된 정보를 기반으로 촬영부(110)를 통해 촬영된 촬영 영상을 영상 보정 모듈(122)을 이용하여 보정하여 저장부(160)에 저장한다(S304).
이와 더불어, 제어부(120)는 이륙한 항공기가 기 셋팅된 이벤트 영상 생성 시점 정보에 대응되는 위치 또는 시간대에 도달한 경우 촬영부(110)에서 촬영된 촬영 영상에 대한 보정 작업과 더불어 보정된 촬영 영상을 합성 프로세스를 거쳐 이벤트 영상을 생성한 후 이를 저장부(160)에 저장한다(S306).
한편, 항공기가 이륙한 후 제어부(120)는 특정 좌석에 배치된 디스플레이부(130)를 통해 사용자 입력으로 이벤트 영상 생성 요청이 수신되는 경우, 촬영부(110)에서 촬영된 촬영 영상에 대한 보정 작업과 더불어 보정된 촬영 영상을 합성 프로세스를 거쳐 이벤트 영상을 생성한 후 이를 좌석 정보에 매칭시켜 저장부(160)에 저장한다(S308).
상술한 바와 같은 단계들을 반복적으로 수행하여 본 발명의 실시예에 따른 제어부(120)는 이벤트 영상 생성 시점 정보에 대응되는 이벤트 영상과 승객의 요청에 따른 이벤트 영상을 생성하여 저장부(160)에 저장할 수 있다.
이러한 단계들을 수행하는 도중 제어부(120)는 감지부(140)로부터 감지된 정보를 기반으로 관제 영상의 생성이 필요한지를 판단한다(S310).
S310의 판단 결과, 관제 영상의 생성이 필요한 경우 제어부(120)는 촬영부(110)에 의해 촬영된 촬영 영상에 대한 보정 작업과 더불어 보정된 촬영 영상을 합성 프로세스를 거쳐 관제 영상을 생성한 후 이를 감지된 정보에 매칭시켜 저장부(160)에 저장한다(S312).
이러한 단계들을 반복적으로 수행한 후 항공기가 착륙함에 따라, 제어부(120)는 저장부(160)에 저장된 영상을 통신망을 통해 연결된 콘텐츠 서비스 제공 서버(170)에 전송하여 데이터베이스(180)에 저장시킨다(S314).
이에 따라, 콘텐츠 서비스 제공 서버(170)는 승객용 정보를 이용하여 데이터베이스(180)에 저장된 영상을 승객에게 제공한다(S316).
도 4는 본 발명의 일 실시예에 따른 도 1의 단일 디스플레이에 항공기의 외부 전경 뷰 영상이 제공되는 화면을 나타내는 도면이다.
도 1의 단일 디스플레이(132)의 일 예로 도 4와 같은 단일 디스플레이(200)를 통해 항공기 외부 전경 뷰 영상이 제공될 수 있다. 단일 디스플레이(200)는 평판 디스플레이 또는 플렉시블 디스플레이로 항공기 승객의 좌석 뒷면에 설치될 수 있다. 단일 디스플레이(200)가 항공기의 외부 전경 뷰 영상을 제공할 때 뷰 선택 메뉴를 제공하기 위한 뷰 선택 메뉴 아이콘(210)을 함께 제공할 수 있다.
본 발명의 실시예에서, 뷰 선택 메뉴 아이콘(210)에 대한 사용자 조작에 따라 단일 디스플레이(200)는 좌석 정보를 제어부(120)에 전송하고, 제어부(120)는 좌석 정보에 대응되는 카메라에 의해 촬영된 촬영 영상을 저장부(160)에서 검색한 후 이를 단일 디스플레이(200)에 표시할 수 있다.
도 5는 본 발명의 일 실시예에 따른 도 1의 멀티 디스플레이에 항공기의 외부 전경 뷰 영상이 제공되는 화면을 나타내는 도면이다.
도 1의 멀티 디스플레이(134)의 일 예로, 도 5에 멀티 디스플레이(300)가 도시되어 있다. 멀티 디스플레이(300)는 일 실시예에 따라 항공기 객실 내의 창문과 천장 사이의 공간 등 항공기 객실 벽면의 이용 가능한 다양한 위치의 공간에 설치될 수 있다. 도 5의 멀티 디스플레이(300)는 4개의 서브 디스플레이(301, 302, 303, 304)를 포함하며, 서브 디스플레이(301, 302, 303, 304)가 2×2 행렬의 형태로 구성되어 있다. 그러나 멀티 디스플레이(134)에 포함되는 서브 디스플레이의 개수 및 배열 형태는 이에 제한되지 않는다. 예를 들어, 멀티 디스플레이(134)가 설치가능한 공간의 크기 및 형태에 따라서 서브 디스플레이는 1×3, 1×5, 2×3 등 다양한 배열로 설치될 수 있다.
제어부(120)는 멀티 디스플레이(134)로 항공기의 외부 전경 뷰 영상을 출력할 때에는, 자체적으로 정해진 카메라들로부터의 영상을 수집하고, 수집된 영상을 파노라믹 뷰로 생성하여 출력할 수 있다.
선택적으로, 제어부(120)는 복수의 서브 디스플레이(301, 302, 303, 304) 중 하나의 서브 디스플레이(304)에는 뷰 선택 메뉴 아이콘(310)을 제공할 수 있다.
도 6은 본 발명의 일 실시예에 따른 뷰 선택 메뉴의 일 예를 나타내는 도면이다.
뷰 선택 메뉴(400)는 방향별 뷰 선택 메뉴(410) 및 카메라별 뷰 선택 메뉴(420)를 포함할 수 있다.
방향별 뷰 선택 메뉴(410)는 카메라 설치 방향에 따른 방향별 뷰를 선택할 수 있도록 제공되는 메뉴이다. 카메라별 뷰 선택 메뉴(420)는 설치된 카메라별로 촬영된 영상을 선택할 수 있도록 제공되는 메뉴이다.
도 7은 도 6의 방향별 뷰 선택 메뉴의 일 예를 나타내는 도면이다.
도 6의 방향별 뷰 선택 메뉴(410, 도 7에서는 도면부호 500)를 선택하면, 항공기의 전면 뷰 메뉴(510), 좌측면 뷰 메뉴(520) 및 우측면 뷰 메뉴(530)가 제공될 수 있다. 사용자에 의해 전면 뷰 메뉴(510)가 선택되면, 제어부(120)는 항공기 전방의 뷰가 디스플레이부(130)에 제공되도록 디스플레이부(130)를 제어할 수 있다. 사용자에 의해 좌측면 뷰 메뉴(520)가 선택되면, 제어부(120)는 항공기의 좌측면 뷰가 디스플레이부(130)에 제공되도록 디스플레이부(130)를 제어할 수 있다. 사용자에 의해 우측면 뷰 메뉴(530)가 선택되면, 제어부(120)는 항공기의 우측면 뷰가 디스플레이부(130)에 제공되도록 디스플레이부(130)를 제어할 수 있다.
본 발명의 다른 실시예에 따르면, 방향별 뷰 선택 메뉴(410)가 선택되면, 제어부(120)는 카메라 설치 방향에 따른 방향별 뷰를 항공기 전방 좌측 카메라 뷰, 항공기 전방 우측 카메라 뷰, 항공기 후방 좌측 카메라 뷰 및 항공기 후방 우측 카메라 뷰로 구별하여 제공할 수도 있다.
도 8은 도 6의 카메라별 뷰 선택 메뉴의 일 예를 나타내는 도면이다.
도 6의 카메라별 뷰 선택 메뉴(420, 도 8에서는 도면부호 600)를 선택하면, 제1 카메라 뷰(610), 제2 카메라 뷰(620), 제3 카메라 뷰(630), 제4 카메라 뷰(640) 및 제5 카메라 뷰(650)와 같이 카메라별 뷰가 선택될 수 있다. 도 8에는 편의상 5개의 카메라 뷰가 제공되는 메뉴가 도시되어 있으나, 카메라 뷰는 항공기에 설치된 카메라 개수만큼 제공될 수 있다. 또한, 카메라별 뷰(600) 메뉴는 항공기 모형 형태로 제공되어, 제어부(120)는 디스플레이부(130) 상에 항공기 모형에서 복수의 각 카메라 위치를 표시하여 제공하고, 사용자 입력부(150)를 통해 복수의 각 카메라 위치 중에서 소정의 카메라 위치가 선택되면, 제어부(120)의 제어에 따라 선택된 카메라에서 촬영되는 영상이 디스플레이부(130)를 통해 제공될 수 있다.
도 9는 도 1의 제어부의 구성의 다른 예를 나타내는 블록도이다.
도 1 및 도 9를 참조하면, 제어부(120)는 영상 수집부(710), 디스플레이 제어부(720) 및 서비스 제공부(730)를 포함할 수 있다. 영상 수집부(710), 디스플레이 제어부(720) 및 서비스 제공부(730)는 서로 통신하여 데이터를 송수신하도록 구성될 수 있다.
영상 수집부(710)는 촬영부(110)에 포함된 각 카메라(112, 114, 116)로부터 입력되는 영상을 수집한다. 각 영상은 각 카메라(112, 114, 116)를 식별하는 카메라 식별 정보와 함께 수집되어, 촬영 영상이 어느 카메라에서 촬영된 것인지 식별될 수 있다. 또한, 영상 수집부(710)는 복수의 카메라(112, 114, 116)로부터 영상이 각각 수신되는 경우, 각 영상의 촬영 시간 정보를 영상 프레임에 추가하여 촬영된 영상을 촬영 시간 정보와 함께 관리할 수 있다.
디스플레이 제어부(720)는 영상 수집부(710)에서 수집된 영상을 디스플레이부(130)의 각 디스플레이 특성에 맞도록 디스플레이를 제어한다. 이를 위해 디스플레이 제어부(720)는 디스플레이부(130)에 포함된 단일 디스플레이(132), 멀티 디스플레이(134)의 디스플레이 식별정보 및 디스플레이 특성 정보를 관리할 수 있다. 디스플레이 특성 정보는 해당 디스플레이가 단일 디스플레이(132)인지, 멀티 디스플레이(134)인지를 식별하는 디스플레이 종류 정보, 디스플레이 설치 위치 정보, 멀티 디스플레이(134)인 경우 멀티 디스플레이(134)의 배열 정보 등을 포함할 수 있다. 여기에서, 디스플레이 설치 위치 정보는 디스플레이의 설치 각도 정보 및 인접 디스플레이 식별 정보를 포함할 수 있다.
디스플레이 특성정보는 디스플레이부(130)에 포함된 각 디스플레이(132, 134)에 설치되어 각 디스플레이(132, 134)의 설치 형태를 감지하는 복수의 디스플레이 센서 및 인접한 디스플레이를 인식하는 통신 모듈(예를 들어, NFC, Wi-Fi) 등을 통해 수집될 수 있다.
서비스 제공부(730)는 디스플레이부(130)를 통해 제공될 수 있는 다양한 애플리케이션 서비스를 수행하는 복수의 애플리케이션을 실행한다. 여기에서, 복수의 애플리케이션은 사용자의 뷰 선택 메뉴(400)와 연동할 수 있는 엔터테인먼트용 애플리케이션을 포함할 수 있다.
또한, 서비스 제공부(730)는 뷰 선택 메뉴(400)를 통해 카메라 촬영 영상을 출력하고 있는 디스플레이 식별정보를 수집하고, 디스플레이부(130)에 포함된 복수의 디스플레이 중에서 수집된 디스플레이 식별정보를 이용하여 뷰 선택 메뉴(400)를 통해 카메라 촬영 영상을 출력중인 디스플레이를 결정할 수 있다.
또한, 서비스 제공부(730)는 사용자의 뷰 선택 메뉴(400)와 연동할 수 있는 엔터테인먼트용 애플리케이션을 기존의 엔터테인먼트 시스템과 통합하여 다양한 형태의 기내 멀티미디어 구현을 가능케 함으로써, 승객들이 기존의 엔터테인먼트 시스템과 함께 외부 전경 뷰를 포함하는 다양한 애플리케이션 서비스를 이용하게 할 수 있다.
도 10은 도 9의 디스플레이 제어부(720)의 구성의 일 예를 나타내는 블록도이다.
디스플레이 제어부(720)는 통합 제어부(810), 제1 디스플레이 제어부(820), 제2 디스플레이 제어부(830) 및 제3 디스플레이 제어부(840)를 포함할 수 있다. 여기에서는 편의상 3개의 디스플레이 제어부가 도시되어 있으나, 디스플레이 제어부의 개수는 항공기에 설치된 전체 디스플레이의 개수에 대응한다.
통합 제어부(810)는 영상 수집부(710)에서 수집된 영상을 디스플레이부(130)의 각 디스플레이 특성에 맞도록 제1 디스플레이 제어부(820), 제2 디스플레이 제어부(830) 및 제3 디스플레이 제어부(840)를 제어한다.
제1 디스플레이 제어부(820)에 연결된 디스플레이가 단일 디스플레이(132)인 경우에는, 제1 디스플레이 제어부(820)는 사용자에 의해 선택된 뷰, 예를 들어, 방향별 뷰 및 카메라별 뷰를 하나의 전체 화면으로 제공할 수 있다.
제2 디스플레이 제어부(830)에 연결된 디스플레이가 멀티 디스플레이(134)인 경우에는, 제어부(120)는 복수의 카메라의 카메라 식별정보와 함께 복수의 카메라의 설치 정보를 관리하고, 복수의 카메라로부터 획득된 복수의 촬영 영상을 파노라믹 뷰로 제공하기 위하여 설치 정보에 기초하여 복수의 촬영 영상을 합성하는 프로세스를 수행하고, 합성되어 생성된 파노라믹 뷰를 복수 개의 서브 디스플레이 분할하여 분배할 수 있다.
예를 들어, 멀티 디스플레이(134)가 도 5에 도시된 바와 같은, 2×2 구성의 4개의 서브 디스플레이(301, 302, 303, 304)로 구성되는 경우, 파노라믹 뷰 영상을 4개의 서브 디스플레이(301, 302, 303, 304)에 2×2 구성으로 분할하여 분배할 수 있다.
도 11은 본 발명의 일 실시예에 따른 항공기의 창문에 삽입된 카메라를 나타내는 도면이다.
카메라(920)가 삽입된 항공기의 창문(900)은 제1 지지부재(940), 제1 레이어(910), 카메라(920), 제2 레이어(930) 및 제2 지지부재(950)를 포함할 수 있다.
제1 레이어(910) 및 제2 레이어(930)는 소정의 두께를 가지며, 제1 레이어(910)의 제1 홈(901) 및 제2 레이어(930)의 제2 홈(903) 사이에 카메라(920)가 삽입되도록 구성될 수 있다. 제1 레이어(910)의 제1 홈(901) 및 제2 레이어(930)의 제2 홈(903)은 카메라(920)의 외형에 따라 그 형태 및 깊이가 달라질 수 있다.
제1 지지부재(940)는 제1 레이어(910)를 지지하도록 설계되고, 제2 지지부재(950)는 제2 레이어(930)를 지지하도록 설계될 수 있다. 제1 레이어(910) 및 제2 레이어(930)의 테두리는 제1 지지부재(940) 및 제2 지지부재(950) 사이에서 제1 레이어(910) 및 제2 레이어(930)의 사이에 이물질이 들어가지 못하도록 실리콘을 충진시켜 밀봉되도록 할 수 있다. 제1 지지부재(940) 및 제2 지지부재(950)는 볼트와 같은 체결 부재를 이용하여 결합될 수 있으나, 이에 제한되지 않는다.
도 11에서는 창문(900)이 이중 레이어, 즉 이중창의 구조를 가지는 것으로 도시되어 있으나, 창문(900)은 삼중 또는 사중 레이어로 구성될 수 있으며, 카메라(920)는 창문(900)의 복수의 레이어 중 소정의 중간 레이어에 삽입되어 설치될 수 있다.
도 12은 도 11의 항공기의 창문에 삽입된 카메라의 측면을 나타내는 도면이다.
제1 레이어(910) 및 제2 레이어(930) 사이에 카메라(920)가 삽입되고, 카메라(920)에는 광섬유(935)가 연결되어 도 1의 제어부(120)와 연결되어, 카메라(920)를 통해 촬영된 영상이 제어부(120)로 전달될 수 있다.
도 13은 본 발명의 일 실시예에 따른 플렉시블 디스플레이의 구성을 나타내는 도면이다.
도 1의 디스플레이부(130)의 단일 디스플레이(132) 또는 멀티 디스플레이(134)는 도 13에 도시된 바와 같은 구조를 가지는 플렉시블 디스플레이(1100)로 구성될 수 있다. 플렉시블 디스플레이(1100)는 기판(1101), 구동부(1102), 디스플레이 패널(1103) 및 보호층(1104)을 포함한다. 또한, 본 발명의 일 실시예에 따른 플렉시블 디스플레이(1100)는 항공기의 소정의 공간에 손쉽게 부착될 수 있도록 접착층(1105)을 더 포함하여 구성될 수 있다.
플렉시블 디스플레이(1100)는 기존의 평판 디스플레이 장치의 디스플레이 특성을 그대로 유지하면서 종이와 같이 휘어지거나, 구부려지거나, 접혀지거나, 또는 말릴 수 있는 장치를 의미한다.
기판(1101)은 외부 압력에 의해 변형될 수 있는 플라스틱 기판(가령, 고분자 필름)으로 구현될 수 있다. 한편, 기판(1101)은 플라스틱 기판 외에도 유리 박막(thin glass) 또는 금속 박막(metal foil) 등과 같이 플렉시블한 특성을 갖는 소재가 사용될 수도 있다.
구동부(1102)는 디스플레이 패널(1103)을 구동시키는 기능을 한다. 구체적으로, 구동부(1102)는 디스플레이 패널(1103)을 구성하는 복수의 화소에 구동 전압을 인가하며, a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등으로 구현될 수 있다.
디스플레이 패널(1103)은 유기발광다이오드 외에도 EL, EPD(electrophoretic display), ECD(electrochromic display), LCD(liquid crystal disply), AMLCD, PDP(Plasma display Panel) 등으로 구현될 수도 있다. 다만, LCD의 경우, 자체적으로 발광할 수 없다는 점에서 별도의 백라이트가 요구된다. 백라이트가 사용되지 않는 LCD의 경우에는 주변 광을 이용한다.
보호층(1104)은 디스플레이 패널(1103)을 보호하는 기능을 한다. 보호층(1104)은 투명한 필름 형태로 제작되어 디스플레이 패널(1103) 표면 전체를 덮을 수 있다.
한편, 도 13에 도시된 바와 달리 플렉시블 디스플레이(1100)는 전자 종이로 구현될 수도 있다. 전자 종이는 종이에 일반적인 잉크의 특징을 적용한 디스플레이로서, 반사광을 사용하는 점이 일반 평판 디스플레이와는 다른 점이다. 한편, 전자 종이는 트위스트 볼을 이용하거나 캡슐을 이용한 전기영동을 이용하여 그림 또는 문자를 변경할 수 있다.
플렉시블 디스플레이(1100)는 플렉시블 디스플레이(1100)에 대한 사용자 입력을 감지하기 위한 사용자 입력 감지층(1106)을 더 포함할 수 있다. 사용자 입력 감지층(1106)은 보호층(1104) 상면 또는 보호층(1104)과 디스플레이 패널(1103) 사이에 설치될 수 있으나 이에 제한되는 것은 아니고, 사용자 입력 감지층(1106)은 포함되는 센서의 유형 및 개수에 따라서 복수의 레이어로 구성될 수 있다.
도 14는 도 13의 사용자 입력 감지층에 포함될 수 있는 복수의 디스플레이 센서를 나타내는 도면이다.
사용자 입력 감지층(1106)은 터치 센서(1201), 지자기 센서(1202), 가속도 센서(1203), 벤드 센서(1204), 압력 센서(1205), 근접 센서(1206), 그립 센서(1207) 등과 같은 다양한 유형의 센서를 포함할 수 있다.
터치 센서(1201)는 정전식 또는 감압식으로 구현될 수 있다. 정전식은 플렉시블 디스플레이(1100) 표면에 코팅된 유전체를 이용하여, 사용자의 신체 일부가 플렉시블 디스플레이(1100) 표면에 터치되었을 때 사용자의 인체로 여기되는 미세전기를 감지하여 터치 좌표를 산출하는 방식이다. 감압식은 두 개의 전극 판을 포함하여, 사용자가 화면을 터치하였을 경우, 터치된 지점의 상하 판이 접촉되어 전류가 흐르게 되는 것을 감지하여 터치 좌표를 산출하는 방식이다.
지자기 센서(1202)는 플렉시블 디스플레이(1100)의 회전 상태 및 이동 방향 등을 감지하기 위한 센서이고, 가속도 센서(1203)는 플렉시블 디스플레이(1100)의 기울어진 정도를 감지하기 위한 센서이다. 지자기 센서(1202) 및 가속도 센서(1203)는 각각 플렉시블 디스플레이(1100)의 벤딩 방향이나 벤딩 영역 등과 같은 벤딩 특성을 검출하기 위한 용도로 사용될 수도 있지만, 이와 별도로, 플렉시블 디스플레이(1100)의 회전 상태 또는 기울기 상태 등을 검출하기 위한 용도로 사용될 수도 있다.
벤드 센서(1204)는 다양한 형태 및 개수로 구현되어, 플렉시블 디스플레이(1100)의 벤딩 상태를 감지할 수 있다.
압력 센서(1205)는 사용자가 터치 또는 벤딩 조작을 할 때 플렉시블 디스플레이(1100)에 가해지는 압력의 크기를 감지하여 제어부(120)로 제공한다. 압력 센서(1205)는 디스플레이부(130)에 내장되어 압력의 크기에 대응되는 전기 신호를 출력하는 압전 필름(piezo film)을 포함할 수 있다. 도 14에서는 압력 센서(1205)가 터치 센서(1201)와 별개인 것으로 도시하였으나, 터치 센서(1201)가 감압식 터치 센서로 구현된 경우, 그 감압식 터치 센서가 압력 센서(1205)의 역할도 함께 할 수도 있다.
근접 센서(1206)는 디스플레이 표면에 직접 접촉되지 않고 접근하는 모션을 감지하기 위한 센서이다. 근접 센서(1206)는 고주파 자계를 형성하여, 물체 접근 시에 변화되는 자계특성에 의해 유도되는 전류를 감지하는 고주파 발진형, 자석을 이용하는 자기 형, 대상체의 접근으로 인해 변화되는 정전 용량을 감지하는 정전 용량 형과 같은 다양한 형태의 센서로 구현될 수 있다.
그립 센서(1207)는 압력 센서(1205)와 별개로 플렉시블 디스플레이(1100)의 테두리나 손잡이 부분에서 배치되어, 사용자의 그립(grip)을 감지하는 센서이다. 그립 센서(1207)는 압력 센서나 터치 센서로 구현될 수 있다.
사용자 입력 감지층(1106)에서 감지된 각종 감지 신호는 제어부(120)로 전달되고, 제어부(120)는 사용자 입력에 따른 감지 신호에 따라 다양한 항공기 외부 전경 뷰 영상을 제공하거나 각종 애플리케이션의 실행 화면을 디스플레이부(130)를 통해 제공할 수 있다.
도 15는 본 발명의 일 실시예로서 항공기의 일등석에서 단일 디스플레이 및 멀티 디스플레이를 통해 항공기 외부 전경 뷰 영상이 제공되는 것을 나타내는 도면, 도 16은 본 발명의 다른 실시예로서 항공기의 비즈니스석에서 단일 디스플레이 및 멀티 디스플레이를 통해 항공기 외부 전경 뷰 영상이 제공되는 것을 나타내는 도면, 도 17은 본 발명의 또 다른 실시예로서 항공기의 이코노미석에서 멀티 디스플레이를 통해 항공기 외부 전경 뷰 영상이 제공되는 것을 나타내는 도면이다.
도 1 및 도 15, 16을 참조하면, 제어부(120)는 디스플레이부(130)로부터 수신되는 도 15, 16의 단일 디스플레이(1320, 1420)와 같은 단일 디스플레이(132)로부터의 제1 영상 출력 요청 신호 및 도 15, 16의 멀티 디스플레이(1310, 1410)와 같은 멀티 디스플레이(134)로부터의 제2 영상 출력 요청 신호에 따라서 복수의 카메라(112, 114, 116)에서 촬영되는 영상을 처리하여 처리된 영상을 디스플레이부(130)로 전달한다. 제2 영상 출력 요청 신호가 수신되는 경우에는 제어부(120)는 복수의 카메라(112, 114, 116)에서 촬영되는 영상을 이용하여 파노라믹 뷰로 생성하여 생성된 파노라믹 뷰 영상을 멀티 디스플레이(1310, 1410)의 배열 구성 정보에 기초하여 멀티 디스플레이(1310, 1410)에 출력하도록 제어할 수 있다.
멀티 디스플레이(1310, 1410)의 배열 구성 정보는 멀티 디스플레이(1310, 1410)에 포함되는 복수의 서브 디스플레이의 개수 및 복수의 서브 디스플레이의 배열 형태 정보를 포함할 수 있다. 제어부(120)는 멀티 디스플레이(1310, 1410)의 배열 구성 정보에 따라서 촬영된 영상을 처리하여, 멀티 디스플레이(1310, 1410)에 포함되는 복수의 서브 디스플레이에 분배할 수 있다. 도 15에는 7개의 서브 디스플레이가 일렬로, 즉, 7×1의 형태로 배열되어 있는 것으로 도시되어 있으며, 도 16에는 6개의 서브 디스플레이가 일렬로, 즉, 6×1의 형태로 배열되어 있는 것으로 도시되어 있으나, 서브 디스플레이의 개수 및 배열 형태는 이에 제한되지 않는다.
도 15, 16의 실시예에서 멀티 디스플레이(1310, 1410)는 항공기 객실 내의 창문과 천장 사이의 공간에 설치되고, 제어부(120)는 항공기 객실 내의 창문과 천장 사이의 공간에 설치된 멀티 디스플레이(1310, 1410)를 통해서 해당 공간에 인접한 복수의 창문에 설치된 복수의 카메라로부터 촬영되는 영상을 파노라믹 뷰로 제공할 수 있다. 즉, 멀티 디스플레이(1310, 1410)를 통해서 별도의 사용자 입력 신호가 없이도 미리 설정된 복수의 카메라 영상이 파노라믹 뷰로 제공되도록 설정될 수 있다.
이를 위하여, 도 1의 제어부(120)는 복수의 카메라(112, 114, 116)의 카메라 식별정보와 함께 복수의 카메라(112, 114, 116)의 설치 정보를 관리할 수 있다. 설치 위치 정보는 복수의 카메라(112, 114, 116)가 설치된 항공기의 창문의 설치 위치 및 설치 각도 정보를 포함할 수 있다. 제어부(120)는 복수의 카메라(112, 114, 116)로부터 획득된 복수의 촬영 영상을 파노라믹 뷰로 제공하기 위하여 설치 정보에 기초하여 복수의 촬영 영상을 합성하는 프로세스를 수행할 수 있다. 이를 위해, 제어부(120)는 항공기 내부 창문의 설치 위치를 좌표화하여 항공기의 창문의 설치 위치 정보로 관리할 수 있다.
단일 디스플레이(1320, 1420)는 항공기 승객의 좌석에 설치되고, 제어부(120)는 복수의 카메라로부터 촬영되는 복수의 영상 중 사용자 입력 신호에 따라 선택된 영상을 단일 디스플레이(1320, 1420)로 제공할 수 있다.
도 1 및 도 17을 참조하면, 제어부(120)는 디스플레이부(130)로부터 수신되는 도 17의 멀티 디스플레이(1510)와 같은 멀티 디스플레이(134)로부터의 제2 영상 출력 요청 신호에 따라서 복수의 카메라(112, 114, 116)에서 촬영되는 영상을 처리하여 처리된 영상을 디스플레이부(130)로 전달한다. 제2 영상 출력 요청 신호가 수신되는 경우에는 제어부(120)는 복수의 카메라(112, 114, 116)에서 촬영되는 영상을 이용하여 파노라믹 뷰로 생성하여 생성된 파노라믹 뷰 영상을 멀티 디스플레이(1510)의 배열 구성 정보에 기초하여 멀티 디스플레이(1510)에 출력하도록 제어할 수 있다.
멀티 디스플레이(1510)의 배열 구성 정보는 멀티 디스플레이(1510)에 포함되는 복수의 서브 디스플레이의 개수 및 복수의 서브 디스플레이의 배열 형태 정보를 포함할 수 있다. 제어부(120)는 멀티 디스플레이(1510)의 배열 구성 정보에 따라서 촬영된 영상을 처리하여, 멀티 디스플레이(1510)에 포함되는 복수의 서브 디스플레이에 분배할 수 있다. 도 17에는 7개의 서브 디스플레이가 일렬로, 즉, 7×1의 형태로 배열되어 있는 것으로 도시되어 있으나, 서브 디스플레이의 개수 및 배열 형태는 이에 제한되지 않는다.
도 17의 실시예에서 멀티 디스플레이(1510)는 항공기 객실 내의 창문과 천장 사이의 공간에 설치되고, 제어부(120)는 항공기 객실 내의 창문과 천장 사이의 공간에 설치된 멀티 디스플레이(1510)를 통해서 해당 공간에 인접한 복수의 창문에 설치된 복수의 카메라로부터 촬영되는 영상을 파노라믹 뷰로 제공할 수 있다. 즉, 멀티 디스플레이(1510)를 통해서 별도의 사용자 입력 신호가 없이도 미리 설정된 복수의 카메라 영상이 파노라믹 뷰로 제공되도록 설정될 수 있다.
이를 위하여, 도 1의 제어부(120)는 복수의 카메라(112, 114, 116)의 카메라 식별정보와 함께 복수의 카메라(112, 114, 116)의 설치 위치 정보를 관리할 수 있다. 설치 위치 정보는 복수의 카메라(112, 114, 116)가 설치된 항공기의 창문의 설치 위치 및 설치 각도 정보를 포함할 수 있다. 제어부(120)는 복수의 카메라(112, 114, 116)로부터 획득된 복수의 촬영 영상을 파노라믹 뷰로 제공하기 위하여 설치 위치 정보에 기초하여 복수의 촬영 영상을 합성하는 프로세스를 수행할 수 있다. 이를 위해, 제어부(120)는 항공기 내부 창문의 설치 위치를 좌표화하여 항공기의 창문의 설치 위치 정보로 관리할 수 있다.
도 17의 실시예에 따르면, 비록 도시되지는 않았지만 도 15 및 도 16과 같은 단일 디스플레이가 평판 디스플레이 또는 플렉시블 디스플레이 형태로 항공기 승객의 좌석에 추가적으로 설치되고, 제어부(120)는 복수의 카메라로부터 촬영되는 복수의 영상 중 사용자 입력 신호에 따라 선택된 영상을 단일 디스플레이로 제공할 수 있다.
본 발명의 일 양상은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있다. 상기의 프로그램을 구현하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광디스크 등을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드로 저장되고 실행될 수 있다.
100 : 항공기의 비행 중 외부 전경 콘텐츠 생성 및 제공 장치
110 : 촬영부 112, 114, 116 : 제1, 2, 3 카메라
120 : 제어부 130 : 디스플레이부
132 : 단일 디스플레이 134 : 멀티 디스플레이
140 : 감지부 142, 144, 146 : 제1, 2, 3 센서
150 : 사용자 입력부 160 : 저장부
170 : 콘텐츠 서비스 제공 서버 180 : 데이터베이스
200 : 단일 디스플레이 210, 310 : 뷰 선택 메뉴 아이콘
300 : 멀티 디스플레이 301, 302, 303, 304 : 서브 디스플레이
400 : 뷰 선택 메뉴 410, 500 : 방향별 뷰 선택 메뉴
420 : 카메라별 뷰 선택 메뉴 510 : 전면 뷰 메뉴
520 : 좌측면 뷰 메뉴 530 : 우측면 뷰 메뉴
600 : 카메라별 뷰 선택 메뉴

Claims (14)

  1. 항공기에 설치된 복수의 창문에 각각 삽입 설치되어 항공기의 외부 전경을 촬영하여 송출하는 복수의 카메라를 포함하는 촬영부와,
    단일 디스플레이 및 복수의 서브 디스플레이를 포함하는 멀티 디스플레이를 포함하는 디스플레이부와,
    상기 항공기에 장착되어 상기 항공기의 외부 환경 및 상태를 감지하기 위한 복수의 센서들로 구성된 감지부와,
    상기 감지부에 의해 감지한 외부 환경 및 상태를 토대로 상기 촬영부로부터 제공받은 촬영 영상을 보정하며, 상기 보정한 촬영 영상의 합성을 통해 이벤트 영상 및 관제 영상을 생성하여 저장부에 저장하며, 상기 디스플레이부를 통해 상기 보정한 촬영 영상 또는 보정한 촬영 영상의 합성을 통해 생성된 파노라믹 뷰를 제공하는 제어부를 포함하며,
    상기 저장부에는 상기 항공기의 비행 경로 상에 이벤트 영상 생성 시점에 해당되는 비행 좌표 정보 및 비행 시간대가 셋팅되어 있으며,
    상기 제어부는 상기 이벤트 영상 생성 시점에 의거하여 상기 촬영부에 의해 촬영된 촬영 영상을 기반으로 이벤트 영상을 생성하여 저장부에 저장하며,
    상기 제어부는 상기 항공기의 착륙과 더불어 상기 저장부에 저장된 이벤트 영상을 통신망을 통해 연결된 콘텐츠 서비스 제공 서버에 전송하며,
    상기 콘텐츠 서비스 제공 서버는 상기 항공기에 탑승한 승객에 의해 등록된 승객용 정보를 이용하여 상기 이벤트 영상을 상기 승객에게 제공하며, 소셜 네트워크 서비스와의 연동을 통해 정보를 수집하거나 항공기 이용 고객과의 연동을 통해 스팟 위치 정보를 수집한 후 상기 수집한 정보들을 기반으로 상기 이벤트 영상 생성 시점을 생성한 후 이를 상기 제어부의 저장부에 저장시키는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  2. 제1항에 있어서,
    상기 복수의 카메라는 항공기 창문의 복수의 레이어 중 소정의 중간 레이어에 설치되고, 상기 제어부에 광섬유 케이블을 통해 연결되며, 항공기 창문에 설치 시 각각 서로 다른 각도로 설치되어 촬영 영상의 촬영 각도가 달라지도록 하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  3. 제1항에 있어서,
    상기 제어부는 복수의 카메라 각각을 식별하는 카메라 식별정보를 관리하고, 복수의 카메라로부터 획득된 복수의 촬영 영상을 파노라믹 뷰로 제공하기 위하여 설치 위치 정보에 기초하여 복수의 촬영 영상을 합성하는 프로세스를 수행하며,
    상기 설치 위치 정보는 항공기의 창문에 복수의 카메라가 설치된 설치 위치 및 설치 각도 정보를 포함하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  4. 제3항에 있어서,
    상기 제어부는 복수의 카메라로부터 촬영된 영상을 복수의 카메라 각각을 식별하는 카메라 식별정보를 이용하여 구분하여 관리하며, 디스플레이부로부터 수신되는 단일 디스플레이로부터의 제1 영상 출력 요청 신호 및 멀티 디스플레이로부터의 제2 영상 출력 요청 신호에 따라서 복수의 카메라에서 촬영되는 영상 중 적어도 하나의 영상을 디스플레이부로 전달하고, 제2 영상 출력 요청 신호가 수신되는 경우에는 복수의 카메라에서 촬영되는 영상을 이용하여 파노라믹 뷰로 생성하여 생성된 파노라믹 뷰 영상을 멀티 디스플레이의 배열 구성 정보에 기초하여 멀티 디스플레이에 출력하도록 제어하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  5. 제4항에 있어서,
    상기 멀티 디스플레이의 배열 구성 정보는 멀티 디스플레이에 포함되는 복수의 서브 디스플레이의 개수 및 복수의 서브 디스플레이의 배열 형태 정보를 포함하고,
    상기 제어부는 멀티 디스플레이의 배열 구성 정보에 따라서 촬영된 영상을 처리하여, 멀티 디스플레이에 포함되는 복수의 서브 디스플레이에 분배하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  6. 제1항에 있어서,
    상기 제어부는 단일 디스플레이 및 멀티 디스플레이로 영상을 출력할 때 뷰 선택 메뉴를 제공하고,
    상기 뷰 선택 메뉴는 항공기에서 카메라 설치 방향에 따른 방향별 뷰를 선택할 수 있는 방향별 뷰 선택 모드 및 카메라별 뷰를 선택할 수 있는 카메라별 뷰 선택 모드를 포함하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  7. 제1항에 있어서,
    상기 제어부는 디스플레이부에 포함된 단일 디스플레이 및 멀티 디스플레이의 디스플레이 식별정보 및 디스플레이 특성 정보를 관리하고,
    상기 디스플레이 특성 정보는 해당 디스플레이가 단일 디스플레이인지, 멀티 디스플레이인지를 식별하는 디스플레이 종류 정보, 디스플레이 설치 위치 정보 및 멀티 디스플레이인 경우 멀티 디스플레이의 배열 정보를 포함하며,
    상기 디스플레이 설치 위치 정보는 디스플레이의 설치 각도 정보 및 인접 디스플레이 식별정보를 포함하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  8. 제1항에 있어서,
    상기 촬영부의 복수의 카메라 중 승객의 좌석과 인접한 영역에 설치된 각 카메라는 식별 정보로 좌석 정보가 설정되어 있으며, 촬영 영상과 설정된 상기 좌석 정보를 상기 제어부에 제공하며,
    상기 디스플레이부는 상기 항공기의 좌석 뒤편에 장착되며 사용자 입력이 가능하고, 상기 사용자 입력에 따라 좌석 정보를 상기 제어부에 송신하는 단일 디스플레이를 포함하며,
    상기 제어부는 상기 좌석 정보와 보정한 촬영 영상을 매칭시켜 상기 저장부에 저장하며, 상기 단일 디스플레이로부터 좌석 정보가 수신됨에 따라 상기 좌석 정보에 매칭된 촬영 영상을 제공하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  9. 제1항에 있어서,
    상기 디스플레이부는 상기 항공기의 좌석 뒤편에 장착되고 사용자 입력이 가능하며, 상기 사용자 입력에 따라 좌석 정보를 상기 제어부에 송신하는 단일 디스플레이를 포함하며,
    상기 제어부는 상기 사용자 입력으로 이벤트 영상 생성 요청 신호가 수신되는 경우 상기 복수의 카메라에 의해 촬영된 촬영 영상의 보정을 통해 이벤트 영상에 대응되는 파노라믹 뷰를 생성한 후 이를 상기 좌석 정보에 매칭시켜 상기 저장부에 저장하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  10. 제9항에 있어서,
    상기 제어부는 상기 항공기가 착륙함에 따라 상기 저장부에 저장된 좌석 정보가 매칭된 이벤트 영상을 콘텐츠 서비스 제공 서버에 전송하며,
    상기 콘텐츠 서비스 제공 서버는 상기 좌석 정보에 대응되는 항공기 티켓을 구매한 승객에 의해 등록된 승객용 정보를 이용하여 상기 이벤트 영상을 상기 승객에게 제공하되, 비즈니스 또는 퍼스 클래스에 탑승한 승객에 의해 등록된 승객용 정보를 이용하여 상기 이벤트 영상 생성 시점에 생성된 이벤트 영상 또는 파노라믹뷰 영상을 제공하는 특징으로 하는 외부 전경 콘텐츠 생성 및 제공 장치.
  11. 삭제
  12. 삭제
  13. 제1항에 있어서,
    상기 감지부는 상기 항공기의 흔들림 정도를 감지할 수 있는 센서를 포함하며,
    상기 제어부는 상기 감지된 흔들림 정도에 의거하여 상기 촬영 영상의 떨림 정도를 계산하며, 상기 계산한 떨림 정도에 의거하여 상기 촬영 영상에 대한 보정을 수행하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
  14. 제1항에 있어서,
    상기 감지부는 상기 항공기의 흔들림 또는 비행 각도를 감지하기 위한 센서를 포함하며,
    상기 제어부는 상기 감지된 흔들림 또는 비행 각도에 의거하여 흔들림 변화 또는 비행 각도 변화 정도를 계산하며, 상기 계산한 흔들림 변화 또는 비행 각도 변화 정도가 기 설정된 임계 범위를 벗어나는 경우 상기 촬영 영상의 보정을 통해 관제 영상을 생성하는 것을 특징으로 하는 항공기의 외부 전경 콘텐츠 생성 및 제공 장치.
KR1020210001908A 2021-01-07 2021-01-07 항공기의 외부 전경 콘텐츠 생성 및 제공 장치 KR102276674B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020210001908A KR102276674B1 (ko) 2021-01-07 2021-01-07 항공기의 외부 전경 콘텐츠 생성 및 제공 장치
PCT/KR2021/011908 WO2022149686A1 (ko) 2021-01-07 2021-09-03 항공기의 외부 전경 콘텐츠 생성 및 제공 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210001908A KR102276674B1 (ko) 2021-01-07 2021-01-07 항공기의 외부 전경 콘텐츠 생성 및 제공 장치

Publications (1)

Publication Number Publication Date
KR102276674B1 true KR102276674B1 (ko) 2021-07-12

Family

ID=76859251

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210001908A KR102276674B1 (ko) 2021-01-07 2021-01-07 항공기의 외부 전경 콘텐츠 생성 및 제공 장치

Country Status (2)

Country Link
KR (1) KR102276674B1 (ko)
WO (1) WO2022149686A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022149686A1 (ko) * 2021-01-07 2022-07-14 김근형 항공기의 외부 전경 콘텐츠 생성 및 제공 장치
WO2023146144A1 (ko) * 2022-01-27 2023-08-03 삼성전자 주식회사 파노라마 이미지를 생성하기 위한 전자 장치 및 그 동작 방법

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004153498A (ja) * 2002-10-30 2004-05-27 Konica Minolta Holdings Inc 画像の撮影および出力システム、方法
JP2004173086A (ja) * 2002-11-21 2004-06-17 Canon Inc 航空機内における機外映像撮影システム
KR100599540B1 (ko) 2004-04-08 2006-07-13 전자부품연구원 항공기내 센서 네트워크를 활용한 승객 맞춤형 미디어서비스 방법 및 시스템
KR20140024444A (ko) 2014-01-09 2014-02-28 구슬이 맞춤형 기내 멀티미디어 컨텐츠,기내 서비스 제공 방법
KR20150141804A (ko) * 2014-06-10 2015-12-21 엘지전자 주식회사 차량용 어라운드뷰 제공 장치 및 이를 구비한 차량
US20180081615A1 (en) * 2016-09-20 2018-03-22 Airbus Operations Gmbh Visual output assembly for aircraft cabin
KR102161918B1 (ko) * 2019-06-03 2020-10-05 김근형 항공기의 비행 중 외부 전경 콘텐츠 제공 장치

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102276674B1 (ko) * 2021-01-07 2021-07-12 김근형 항공기의 외부 전경 콘텐츠 생성 및 제공 장치

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004153498A (ja) * 2002-10-30 2004-05-27 Konica Minolta Holdings Inc 画像の撮影および出力システム、方法
JP2004173086A (ja) * 2002-11-21 2004-06-17 Canon Inc 航空機内における機外映像撮影システム
KR100599540B1 (ko) 2004-04-08 2006-07-13 전자부품연구원 항공기내 센서 네트워크를 활용한 승객 맞춤형 미디어서비스 방법 및 시스템
KR20140024444A (ko) 2014-01-09 2014-02-28 구슬이 맞춤형 기내 멀티미디어 컨텐츠,기내 서비스 제공 방법
KR20150141804A (ko) * 2014-06-10 2015-12-21 엘지전자 주식회사 차량용 어라운드뷰 제공 장치 및 이를 구비한 차량
US20180081615A1 (en) * 2016-09-20 2018-03-22 Airbus Operations Gmbh Visual output assembly for aircraft cabin
KR102161918B1 (ko) * 2019-06-03 2020-10-05 김근형 항공기의 비행 중 외부 전경 콘텐츠 제공 장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022149686A1 (ko) * 2021-01-07 2022-07-14 김근형 항공기의 외부 전경 콘텐츠 생성 및 제공 장치
WO2023146144A1 (ko) * 2022-01-27 2023-08-03 삼성전자 주식회사 파노라마 이미지를 생성하기 위한 전자 장치 및 그 동작 방법

Also Published As

Publication number Publication date
WO2022149686A1 (ko) 2022-07-14

Similar Documents

Publication Publication Date Title
US20200341578A1 (en) Electronic device
KR102276674B1 (ko) 항공기의 외부 전경 콘텐츠 생성 및 제공 장치
KR102161918B1 (ko) 항공기의 비행 중 외부 전경 콘텐츠 제공 장치
CN110891144B (zh) 一种图像显示方法及电子设备
US9791694B1 (en) Transparent film display system for vehicles
EP2881840B1 (en) Flexible display device and method of controlling same
EP3428967A1 (en) Electronic device having display
CN104583908B (zh) 柔性显示装置及其控制方法
CN102682742B (zh) 透明显示装置及其操作方法
US20160163018A1 (en) Display apparatus and method for displaying a screen thereof
EP4246503A2 (en) Electronic device having display
US20110273267A1 (en) Mobile terminal and method of controlling the same
CN105404412A (zh) 便携式终端及其控制方法
CN104691449A (zh) 车辆控制设备及其方法
CN103488253A (zh) 智能保护盖窥视
EP2715432A2 (en) Wearable heads-up display with integrated finger-tracking input sensor
KR20090047889A (ko) 투명 디스플레이를 이용한 증강 현실 구현 방법, 장치 및시스템
US20110319130A1 (en) Mobile terminal and method of operation
CN103455255A (zh) 使用柔性显示器显示屏幕的设备和方法
CN109002243A (zh) 一种图像参数调节方法及终端设备
US10048767B2 (en) Electronic apparatus and method of controlling multi-vision screen including a plurality of display apparatuses
EP4040774A1 (en) Photographing method and electronic device
CN107003719A (zh) 计算装置、用于控制所述计算装置的方法以及多显示器系统
KR20210070466A (ko) 표시부를 포함한 전자 장치
US10620766B2 (en) Mobile terminal and method for controlling the same

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant