JP2022099774A - 情報表示装置、情報表示方法及びプログラム - Google Patents
情報表示装置、情報表示方法及びプログラム Download PDFInfo
- Publication number
- JP2022099774A JP2022099774A JP2020213770A JP2020213770A JP2022099774A JP 2022099774 A JP2022099774 A JP 2022099774A JP 2020213770 A JP2020213770 A JP 2020213770A JP 2020213770 A JP2020213770 A JP 2020213770A JP 2022099774 A JP2022099774 A JP 2022099774A
- Authority
- JP
- Japan
- Prior art keywords
- information
- sensing data
- display
- sensor
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 9
- 238000010586 diagram Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000007613 environmental effect Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
- B64D47/00—Equipment not otherwise provided for
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64C—AEROPLANES; HELICOPTERS
- B64C27/00—Rotorcraft; Rotors peculiar thereto
- B64C27/04—Helicopters
- B64C27/08—Helicopters with two or more rotors
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
- B64D47/00—Equipment not otherwise provided for
- B64D47/08—Arrangements of cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U10/00—Type of UAV
- B64U10/10—Rotorcrafts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
- H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2101/00—UAVs specially adapted for particular uses or applications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
- G09G2340/125—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels wherein one of the images is motion video
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Aviation & Aerospace Engineering (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Computer Graphics (AREA)
- Signal Processing (AREA)
- Remote Sensing (AREA)
- Instructional Devices (AREA)
- Processing Or Creating Images (AREA)
- Traffic Control Systems (AREA)
- Navigation (AREA)
Abstract
Description
前記取得部は、前記飛行装置が飛行した飛行ルートを示す情報をさらに取得してもよいし、前記表示制御部は、前記飛行ルートを前記地形画像にさらに重畳して前記表示部に表示させてもよい。
前記センサは、カメラであってもよいし、前記センシングデータは、前記カメラによって撮像された撮像画像であってもよいし、前記センサ対象は、前記撮像画像の被写体であってもよい。
前記センシングデータは、前記センサによって計測された情報であって、前記センサから前記センサ対象までの距離を示す情報であってもよい。
前記表示制御部は、前記取得位置によって示される緯度、経度、及び標高をさらに前記表示部に表示させてもよい。
前記表示制御部は、前記センシングデータが取得されたときの天候及び前記飛行装置の状態のうちの少なくともいずれかをさらに前記表示部に表示させてもよい。
前記地形画像は、地図データの表示画像、及びコンピュータグラフィックスの表示画像のうちのいずれかであってもよい。
図1は、情報表示システムSの概要を説明するための図である。情報表示システムSは、飛行装置が備えるセンサによって取得された情報を表示するためのシステムである。情報表示システムSは、例えば、設備の点検及び監視等に用いられる。情報表示システムSは、飛行装置1と、情報表示装置2とを有する。
以下、情報表示装置2の構成について説明する。
図3は、情報表示装置2の構成を示す図である。情報表示装置2は、通信部21と、表示部22と、記憶部23と、制御部24とを有する。制御部24は、取得部241と、情報管理部242と、表示制御部243と、特定部244とを有する。
続いて、情報表示システムSの処理の流れについて説明する。図5は、情報表示システムSの処理の流れを示すシーケンス図である。本処理は、飛行ルートを飛行している飛行装置1のセンサCがセンシングすることによってセンシングデータを取得したことを契機として開始する(S1)。
以上説明したとおり、情報表示装置2は、取得位置に対応する地形画像に対して、センシングデータと取得位置と方向情報とを、方向情報によって特定される地形画像上のセンサ対象の方向が認識可能な態様で重畳して表示する。このようにすることで、情報表示装置2は、センシングされた情報を視覚的に把握しやすくすることができる。
2 情報表示装置
21 通信部
22 表示部
23 記憶部
24 制御部
241 取得部
242 情報管理部
243 表示制御部
244 特定部
C センサ
S 情報表示システム
Claims (15)
- 飛行装置が備えるセンサによって取得されたセンシングデータと、前記センシングデータが取得された取得位置と、前記センシングデータが取得されたときに前記センサがセンシングの対象としたセンサ対象の方向を示すための方向情報とを取得する取得部と、
前記取得位置に対応する地形画像に対して、前記センシングデータと前記取得位置と前記方向情報とを、前記方向情報によって特定される前記地形画像上の前記センサ対象の方向が認識可能な態様で重畳して表示部に表示させる表示制御部と、
を有する情報表示装置。 - 前記表示制御部は、前記取得位置に前記センシングデータと前記方向情報とを対応させて前記表示部に表示させる、
請求項1に記載の情報表示装置。 - 前記取得部は、前記飛行装置が飛行した飛行ルートを示す情報をさらに取得し、
前記表示制御部は、前記飛行ルートを前記地形画像にさらに重畳して前記表示部に表示させる、
請求項1又は2に記載の情報表示装置。 - 前記表示制御部は、前記飛行ルートを3次元で前記表示部に表示させる、
請求項3に記載の情報表示装置。 - 前記センサは、カメラであり、
前記センシングデータは、前記カメラによって撮像された撮像画像であり、
前記センサ対象は、前記撮像画像の被写体である、
請求項1から4のいずれか一項に記載の情報表示装置。 - 前記表示制御部は、前記被写体に関する情報をさらに前記表示部に表示させる、
請求項5に記載の情報表示装置。 - 前記センシングデータは、前記センサによって計測された情報であって、前記センサから前記センサ対象までの距離を示す情報である、
請求項1から4のいずれか一項に記載の情報表示装置。 - 前記表示制御部は、前記取得位置によって示される緯度、経度、及び標高をさらに前記表示部に表示させる、
請求項1から7のいずれか一項に記載の情報表示装置。 - 前記取得部は、複数の前記センシングデータと、前記複数のセンシングデータに対応する1つの前記取得位置と、前記複数のセンシングデータそれぞれに対応する複数の前記方向情報とを取得し、
前記表示制御部は、前記1つの取得位置に関連付けて前記複数のセンシングデータ及び前記複数の方向情報を前記表示部に表示させる、
請求項1から8のいずれか一項に記載の情報表示装置。 - 前記表示制御部は、前記センシングデータが取得されたときの天候及び前記飛行装置の状態のうちの少なくともいずれかをさらに前記表示部に表示させる、
請求項1から9のいずれか一項に記載の情報表示装置。 - 前記取得部は、飛行中の前記飛行装置から、前記センシングデータと前記取得位置と前記方向情報とを取得し、
前記センシングデータと前記取得位置と前記方向情報とを関連付けて記憶部に記憶させる情報管理部をさらに有する、
請求項1から10のいずれか一項に記載の情報表示装置。 - 前記表示制御部は、前記取得部が前記センシングデータと前記取得位置と前記方向情報とを取得したことを契機として、前記センシングデータを前記地形画像に重畳して前記表示部に表示させる、
請求項11に記載の情報表示装置。 - 前記地形画像は、地図データの表示画像、及びコンピュータグラフィックスの表示画像のうちのいずれかである、
請求項1から12のいずれか一項に記載の情報表示装置。 - コンピュータが実行する、
飛行装置が備えるセンサによって取得されたセンシングデータと、前記センシングデータが取得された取得位置と、前記センシングデータが取得されたときに前記センサがセンシングの対象としたセンサ対象の方向を示すための方向情報とを取得するステップと、
前記取得位置に対応する地形画像に対して、前記センシングデータと前記取得位置と前記方向情報とを、前記方向情報によって特定される前記地形画像上の前記センサ対象の方向が認識可能な態様で重畳して表示部に表示させるステップと、
を有する情報表示方法。 - コンピュータを、
飛行装置が備えるセンサによって取得されたセンシングデータと、前記センシングデータが取得された取得位置と、前記センシングデータが取得されたときに前記センサがセンシングの対象としたセンサ対象の方向を示すための方向情報とを取得する取得部、
前記取得位置に対応する地形画像に対して、前記センシングデータと前記取得位置と前記方向情報とを、前記方向情報によって特定される前記地形画像上の前記センサ対象の方向が認識可能な態様で重畳して表示部に表示させる表示制御部、
として機能させるためのプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020213770A JP6913814B1 (ja) | 2020-12-23 | 2020-12-23 | 情報表示装置、情報表示方法及びプログラム |
JP2021114729A JP6976474B1 (ja) | 2020-12-23 | 2021-07-12 | 情報表示装置、情報表示方法及びプログラム |
CN202110879488.XA CN114655457A (zh) | 2020-12-23 | 2021-08-02 | 信息显示装置、信息显示方法以及程序 |
US17/411,686 US20220198193A1 (en) | 2020-12-23 | 2021-08-25 | Information display device, information display method and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020213770A JP6913814B1 (ja) | 2020-12-23 | 2020-12-23 | 情報表示装置、情報表示方法及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021114729A Division JP6976474B1 (ja) | 2020-12-23 | 2021-07-12 | 情報表示装置、情報表示方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6913814B1 JP6913814B1 (ja) | 2021-08-04 |
JP2022099774A true JP2022099774A (ja) | 2022-07-05 |
Family
ID=77057584
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020213770A Active JP6913814B1 (ja) | 2020-12-23 | 2020-12-23 | 情報表示装置、情報表示方法及びプログラム |
JP2021114729A Active JP6976474B1 (ja) | 2020-12-23 | 2021-07-12 | 情報表示装置、情報表示方法及びプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021114729A Active JP6976474B1 (ja) | 2020-12-23 | 2021-07-12 | 情報表示装置、情報表示方法及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220198193A1 (ja) |
JP (2) | JP6913814B1 (ja) |
CN (1) | CN114655457A (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6913814B1 (ja) * | 2020-12-23 | 2021-08-04 | Kddi株式会社 | 情報表示装置、情報表示方法及びプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160297545A1 (en) * | 2015-04-07 | 2016-10-13 | Lg Electronics Inc. | Mobile terminal and method for controlling the same |
JP2017509520A (ja) * | 2014-10-27 | 2017-04-06 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 飛行情報を提供する方法 |
JP2019211486A (ja) * | 2019-08-26 | 2019-12-12 | 株式会社センシンロボティクス | 検査システム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9380275B2 (en) * | 2013-01-30 | 2016-06-28 | Insitu, Inc. | Augmented video system providing enhanced situational awareness |
US11501104B2 (en) * | 2018-11-27 | 2022-11-15 | Here Global B.V. | Method, apparatus, and system for providing image labeling for cross view alignment |
US11807062B2 (en) * | 2019-11-25 | 2023-11-07 | Ford Global Technologies, Llc | Collaborative relationship between a vehicle and a UAV |
JP6913814B1 (ja) * | 2020-12-23 | 2021-08-04 | Kddi株式会社 | 情報表示装置、情報表示方法及びプログラム |
-
2020
- 2020-12-23 JP JP2020213770A patent/JP6913814B1/ja active Active
-
2021
- 2021-07-12 JP JP2021114729A patent/JP6976474B1/ja active Active
- 2021-08-02 CN CN202110879488.XA patent/CN114655457A/zh active Pending
- 2021-08-25 US US17/411,686 patent/US20220198193A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017509520A (ja) * | 2014-10-27 | 2017-04-06 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 飛行情報を提供する方法 |
US20160297545A1 (en) * | 2015-04-07 | 2016-10-13 | Lg Electronics Inc. | Mobile terminal and method for controlling the same |
JP2019211486A (ja) * | 2019-08-26 | 2019-12-12 | 株式会社センシンロボティクス | 検査システム |
Also Published As
Publication number | Publication date |
---|---|
CN114655457A (zh) | 2022-06-24 |
JP2022100205A (ja) | 2022-07-05 |
JP6976474B1 (ja) | 2021-12-08 |
US20220198193A1 (en) | 2022-06-23 |
JP6913814B1 (ja) | 2021-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7078093B2 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
JP6828774B2 (ja) | 情報処理装置、情報処理方法及びコンピュータプログラム | |
CN207117844U (zh) | 多vr/ar设备协同系统 | |
JP6896688B2 (ja) | 位置算出装置、位置算出プログラム、位置算出方法、及びコンテンツ付加システム | |
JP6803800B2 (ja) | 情報処理装置、空撮経路生成方法、空撮経路生成システム、プログラム、及び記録媒体 | |
US10488860B1 (en) | Geocoding data for an automated vehicle | |
KR102203135B1 (ko) | 드론을 이용한 인공지능 기반 재난 피해정보 탐지 방법 및 시스템 | |
KR101880437B1 (ko) | 실제카메라 영상과 가상카메라 영상을 활용하여 넓은 시야각을 제공하는 무인선 관제시스템 | |
US20170153113A1 (en) | Information processing apparatus, information processing method, and program | |
JP6180647B2 (ja) | クラウドポイントを利用した屋内地図構築装置および方法 | |
JP6583840B1 (ja) | 検査システム | |
CN110208739A (zh) | 辅助车辆定位的方法、装置、设备和计算机可读存储介质 | |
JPWO2020022042A1 (ja) | 劣化診断装置、劣化診断システム、劣化診断方法、プログラム | |
JP4969053B2 (ja) | 携帯端末装置及び表示方法 | |
JP2018136191A (ja) | 計測装置、健全性判定装置、及び建物管理システム | |
US20230251655A1 (en) | Geocoding data for an automated vehicle | |
JP6976474B1 (ja) | 情報表示装置、情報表示方法及びプログラム | |
JP2023100642A (ja) | 検査システム | |
CN108012141A (zh) | 显示装置、显示系统和显示装置的控制方法 | |
WO2019061859A1 (zh) | 移动平台、摄像路径生成方法、程序、以及记录介质 | |
JP7206647B2 (ja) | 消防指令補助装置、方法、およびプログラム | |
JP2020016663A (ja) | 検査システム | |
JP7011364B1 (ja) | 体験装置、体験システム、及び、表示方法 | |
JP6800505B1 (ja) | 飛行体の管理サーバ及び管理システム | |
JP7014261B2 (ja) | 制御方法及び制御装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201223 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20201223 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20210107 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210406 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210604 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210629 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210712 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6913814 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |