CN114655457A - 信息显示装置、信息显示方法以及程序 - Google Patents

信息显示装置、信息显示方法以及程序 Download PDF

Info

Publication number
CN114655457A
CN114655457A CN202110879488.XA CN202110879488A CN114655457A CN 114655457 A CN114655457 A CN 114655457A CN 202110879488 A CN202110879488 A CN 202110879488A CN 114655457 A CN114655457 A CN 114655457A
Authority
CN
China
Prior art keywords
information
display
sensor
acquisition
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110879488.XA
Other languages
English (en)
Inventor
松木友明
山崎飒
辻恭平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Publication of CN114655457A publication Critical patent/CN114655457A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D47/00—Equipment not otherwise provided for
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64C—AEROPLANES; HELICOPTERS
    • B64C27/00—Rotorcraft; Rotors peculiar thereto
    • B64C27/04—Helicopters
    • B64C27/08—Helicopters with two or more rotors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D47/00—Equipment not otherwise provided for
    • B64D47/08—Arrangements of cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00—Type of UAV
    • B64U10/10—Rotorcrafts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00—UAVs specially adapted for particular uses or applications
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/12—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G09G2340/125—Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels wherein one of the images is motion video
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Computer Graphics (AREA)
  • Signal Processing (AREA)
  • Remote Sensing (AREA)
  • Instructional Devices (AREA)
  • Processing Or Creating Images (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

通过视觉方式容易地掌握感测信息。信息显示装置2包括：获取部(241)，获取通过飞行装置具备的传感器获取到的感测数据、获取到感测数据的获取位置、以及用于表示在获取到感测数据时被传感器作为感测的对象的传感器对象的方向的方向信息；以及显示控制部(243)，以能够识别通过方向信息确定的地形图像上的传感器对象的方向的方式，将感测数据、获取位置以及方向信息与获取位置对应的地形图像重叠显示于显示部。

Description

信息显示装置、信息显示方法以及程序
技术领域
本发明涉及显示信息的信息显示装置、信息显示方法以及程序。
本申请基于2020年12月23日在日本申请的日本特愿2020-213770号主张优先权，在此援引其内容。
背景技术
近年来，所谓的无人机的利用正在普及。日本特开2016-174360号公报公开了一种将由飞行型无人机的相机拍摄的图像显示在设备上的技术。
发明内容
通过使用上述技术，用户能够确认到设备上显示的图像中包含的被拍摄体。但是，有时用户难以掌握设备上显示的图像中包含的被拍摄体位于何处。因此，需要将由无人机的相机拍摄的图像(以下称为“感测信息”)以用户容易掌握的方式显示在设备上。
因此，本发明是鉴于上述问题而完成的，其目的在于，提供一种能够以视觉方式容易掌握感测的信息的信息显示装置、信息显示方法以及程序。
本发明第一方式的信息显示装置，包括：获取部，获取通过飞行装置具备的传感器获取到的感测数据、获取到所述感测数据的获取位置、以及用于表示在获取到所述感测数据时被所述传感器作为感测的对象的传感器对象的方向的方向信息；以及显示控制部，以能够识别通过所述方向信息确定的地形图像上的所述传感器对象的方向的方式，将所述感测数据、所述获取位置以及所述方向信息与所述获取位置对应的所述地形图像重叠显示于显示部。
所述显示控制部可以将所述感测数据和所述方向信息与所述获取位置对应地显示于所述显示部。
所述获取部可以进一步获取表示所述飞行装置飞行的飞行路线的信息，所述显示控制部可以进一步将所述飞行路线与地形图像重叠显示于所述显示部。
所述显示控制部可以将所述飞行路线以三维方式显示于所述显示部。
所述传感器可以是相机，所述感测数据可以是由所述相机拍摄到的拍摄图像，所述传感器对象可以是所述拍摄图像的被拍摄体。
所述显示控制部可以进一步将与所述被拍摄体有关的信息显示于所述显示部。
所述感测数据可以是由所述传感器测量到的信息，并且可以是表示从所述传感器到所述传感器对象的距离的信息。
所述显示控制部可以进一步将所述获取位置的纬度、经度、以及海拔显示于所述显示部。
所述获取部可以获取多个所述感测数据、与多个所述感测数据对应的一个所述获取位置、以及分别与多个所述感测数据对应的多个所述方向信息，所述显示控制部可以将多个所述感测数据和多个所述方向信息与一个所述获取位置相关联地显示于所述显示部。
所述显示控制部可以进一步将获取到所述感测数据时的天气和所述飞行装置的状态中的至少一项显示于所述显示部。
所述获取部可以从飞行中的所述飞行装置获取所述感测数据、所述获取位置以及所述方向信息，所述信息显示装置还可以具有将所述感测数据、所述获取位置以及所述方向信息相关联并存储于存储部的信息管理部。
所述显示控制部可以以所述获取部获取到所述感测数据、所述获取位置以及所述方向信息为契机，将所述感测数据与所述地形图像重叠显示于所述显示部。
所述地形图像可以是地图数据的显示图像和计算机图形的显示图像中的任一个。
本发明第二方式的信息显示方法，包括由计算机执行的以下步骤：获取通过飞行装置具备的传感器获取到的感测数据、获取到所述感测数据的获取位置、以及用于表示在获取到所述感测数据时被所述传感器作为感测的对象的传感器对象的方向的方向信息；以及以能够识别通过所述方向信息确定的地形图像上的所述传感器对象的方向的方式，将所述感测数据、所述获取位置以及所述方向信息与所述获取位置对应的所述地形图像重叠显示于显示部。
本发明第三方式的程序使计算机作为获取部和显示控制部发挥功能，其中，所述获取部获取通过飞行装置具备的传感器获取到的感测数据、获取到所述感测数据的获取位置、以及用于表示在获取到所述感测数据时被所述传感器作为感测的对象的传感器对象的方向的方向信息，所述显示控制部以能够识别通过所述方向信息确定的地形图像上的所述传感器对象的方向的方式，将所述感测数据、所述获取位置以及所述方向信息与所述获取位置对应的所述地形图像重叠显示于显示部。
根据本发明，起到能够以视觉方式容易掌握感测信息的效果。
附图说明
图1是用于说明实施方式的信息显示系统的概要的图。
图2是示意性地示出本实施方式的信息显示装置所显示的信息的图。
图3是示出本实施方式的信息显示装置的结构的框图。
图4是示意性地示出本实施方式的信息显示装置所显示的信息的图。
图5是示出本实施方式的信息显示系统的处理的时序图。
附图标记说明
1：飞行装置 2：信息显示装置
21：通信部 22：显示部
23：存储部 24：控制部
241：获取部 242：信息管理部
243：显示控制部 244：确定部
C：传感器 S：信息显示系统
具体实施方式
[信息显示系统S的概要]
图1是用于说明信息显示系统S的概要的图。信息显示系统S是用于显示由飞行装置中包含的传感器获取到的信息的系统。信息显示系统S例如用于设备的检查和监视等。信息显示系统S具有飞行装置1和信息显示装置2。
飞行装置1例如是无人机。飞行装置1包括传感器C。飞行装置1可以包括一个传感器C，也可以包括多个传感器C。传感器C是针对作为感测的对象的传感器对象进行感测的设备，例如是相机、麦克风(例如指向性麦克风)、或距离传感器(例如激光)等。当传感器C是相机时，传感器对象是拍摄图像中的被拍摄体，或者当传感器C是麦克风时，传感器对象是声音的音源，或者当传感器C是距离传感器时，传感器对象是位于传感器C所朝向的方向上的物体。飞行装置1将包括通过传感器C进行感测而获取到的感测数据的各种信息，发送给信息显示装置2。感测数据例如是由相机拍摄到的拍摄图像、或由麦克风采集到的声音、或由距离传感器测量出的表示从传感器C到对象物的距离的信息等。
信息显示装置2例如是智能手机、包括显示器的控制器，或个人计算机等。信息显示装置2例如经由手机网络的基站3，与飞行装置1之间进行通信，并显示由飞行装置1发送的信息。
图2是示意性地示出信息显示装置2所显示的信息的图。在图2所示的例子中，显示了飞行装置1的传感器C在利用信息显示系统S的使用者为了检查桥而使飞行装置1飞行的路线R上感测到的信息。图像D1是飞行装置1的传感器C在位置P1拍摄到的图像，图像D2是飞行装置1的传感器C在位置P2拍摄到的图像。对象物T是传感器对象，例如是桥。对象物T也可以是桥的一部分(例如桥墩)。图像G是地形图像。在地形图像中包含建筑物以及道路等人造物体。地形图像是至少包括获取到感测数据的位置的范围的图像。地形图像还可以是进一步包括传感器对象所在位置的范围的图像。在图2中，表示拍摄到包含对象物T的各图像的位置的信息(表示各位置的相机标记)和表示各图像是从哪个方向拍摄的信息(相机标记的朝向)重叠地显示于图像G。
例如，由于桥设置有多个桥墩，因此仅根据拍摄图像，有时无法掌握该拍摄图像所拍摄的桥墩是多个桥墩中的哪个桥墩。因此，如图2所示，除了表示拍摄到拍摄图像的位置的信息以外，信息显示系统S还将表示从哪个方向拍摄到拍摄图像的信息与拍摄图像一起显示。由此，利用信息显示系统S的使用者能够掌握拍摄图像所拍摄的被拍摄体位于何处。
为了显示图2所示的信息，信息显示装置2从飞行装置1获取感测数据、获取到感测数据的获取位置、以及用于表示在获取到感测数据时被传感器C作为感测的对象的传感器对象的方向的方向信息。获取位置例如是表示位置坐标的信息。例如，当传感器C为固定于飞行装置1的设备时，方向信息是表示飞行装置1的朝向的信息，而当传感器C为左右驱动的设备时，方向信息是包含飞行装置1的朝向和传感器C的朝向的信息。例如，当飞行装置1具有多个传感器C时，方向信息还可以进一步包括用于识别多个传感器C中的进行了感测的传感器C的信息。
并且，信息显示装置2以能够识别通过方向信息确定的地形图像上的传感器对象的方向的方式，将感测数据、获取位置以及方向信息与获取位置对应的地形图像重叠显示。与获取位置对应的地形图像可以是至少以获取位置为基准显示了规定的范围的地形的图像，也可以是显示出包括飞行装置1飞行的飞行路线的范围的地形的图像。
在图2所示的例子中，信息显示装置2将位置P1、表示与位置P1对应的感测数据(包含对象物T的感测数据)的图像D1、以及利用基于与位置P1对应的方向信息的朝向来显示的相机标记和位置P2、表示与位置P2对应的感测数据(包含对象物T的感测数据)的图像D2、以及利用基于与位置P2对应的方向信息的朝向来显示的相机标记，与表示获取位置的位置P1和位置P2对应的图像G重叠显示。
以下，对信息显示装置2的结构进行说明。
[信息显示装置2的结构]
图3是示出信息显示装置2的结构的图。信息显示装置2具有通信部21、显示部22、存储部23以及控制部24。控制部24具有获取部241、信息管理部242、显示控制部243以及确定部244。
通信部21是用于经由基站3与飞行装置1之间进行通信的接口。通信部21具有例如用于与互联网连接的LAN(Local Area Network：局域网)控制器。显示部22是显示各种信息的显示器。显示部22显示例如从飞行装置1接收到的信息。
存储部23是ROM(Read Only Memory：只读存储器)、RAM(Random Access Memory：随机存取存储器)以及硬盘等存储介质。存储部23存储控制部24执行的程序。存储部23至少存储飞行装置1飞行的飞行路线的周围的地形图像。地形图像是地图数据的显示图像和计算机图形的显示图像中的任一个。
控制部24例如是CPU(Central Processing Unit：中央处理单元)。控制部24通过执行存储于存储部23的程序，作为获取部241、信息管理部242、显示控制部243、以及确定部244发挥功能。
获取部241经由通信部21获取通过飞行装置1所具备的传感器C获取到的感测数据、获取到感测数据的获取位置、以及用于表示在获取到感测数据时被传感器C作为感测的对象的传感器对象的方向的方向信息。获取部241可以从在飞行路线上飞行中的飞行装置1获取上述信息，也可以从在飞行路线上飞行之后的飞行装置1获取上述信息。
信息管理部242管理获取部241从飞行装置1获取到的信息。具体而言，信息管理部242将感测数据、获取位置以及方向信息相关联地存储于存储部23。而且，信息管理部242还可以将感测到的日期时间相关联地存储于存储部23。
信息管理部242还可以从飞行中的飞行装置1实时地收集信息。具体而言，首先，获取部241从飞行中的飞行装置1获取感测数据、获取位置以及方向信息。然后，信息管理部242将感测数据、获取位置以及方向信息相关联地存储于存储部23。需要说明的是，信息管理部242也可以在飞行装置1在飞行路线上飞行之后，收集该飞行装置1在飞行中积累的信息。
显示控制部243将感测数据和方向信息与获取位置相关联地显示于显示部22。具体而言，显示控制部243以能够识别通过方向信息确定的地形图像上的传感器对象的方向的方式，将感测数据、获取位置以及方向信息与获取位置对应的地形图像重叠显示于显示部22。
更具体而言，显示控制部243将感测数据和方向信息与获取位置对应地显示于显示部22。在图2所示的例子中，信息显示装置2将位置P1、表示与位置P1对应的感测数据(包含对象物T的感测数据)的图像D1、以及利用基于与位置P1对应的方向信息的朝向来显示的相机标记和位置P2、表示与位置P2对应的感测数据(包含对象物T的感测数据)的图像D2、以及利用基于与位置P2对应的方向信息的朝向来显示的相机标记，与表示获取位置的位置P1和位置P2对应的图像G重叠显示。由此，信息显示装置2能够以视觉方式容易地掌握感测信息。
显示控制部243还可以将获取部241获取到的多个感测数据中的感测到特定的传感器对象的感测数据重叠在地形图像上并显示于显示部22。例如，在信息显示装置2中，预先设定有由使用者输入的表示特定的传感器对象的信息。例如，假设特定的传感器对象为“桥”，在获取部241获取到的多个感测数据中包括包含桥的感测数据和不包含桥的感测数据。
在该情况下，首先，显示控制部243从获取部241获取到的多个感测数据中确定出感测到作为传感器对象的“桥”的感测数据。显示控制部243例如基于地形图像上的特定的传感器对象所在的位置、获取位置以及方向信息，确定可能包含特定的传感器对象的感测数据。显示控制部243也可以通过对各感测数据进行图像分析，来确定包含特定的传感器对象的感测数据。然后，显示控制部243以能够识别通过方向信息确定的地形图像上的传感器对象的方向的方式，将该感测数据、获取位置以及方向信息与对应于确定出的感测数据的获取位置所对应的地形图像重叠显示于显示部22。由此，信息显示装置2能够显示获取到的多个感测数据中的使用者所希望显示的包含特定的传感器对象的感测数据。
除了上述信息之外，显示控制部243还可以进一步在显示部22显示各种信息。例如，显示控制部243还可以进一步将通过获取位置表示的纬度、经度以及海拔显示于显示部22。
例如，显示控制部243还可以进一步将飞行路线重叠显示于显示部22。具体而言，首先，获取部241进一步获取表示飞行装置1所飞行的飞行路线的信息。获取部241例如通过从在飞行路线上飞行中的飞行装置1以规定的间隔获取表示飞行装置1所在的位置的信息，来获取表示飞行路线的信息。例如，在存储部23中，存储有表示飞行装置1中设定的飞行路线的信息，获取部241可以通过读出存储于存储部23的信息，来获取表示飞行路线的信息。然后，显示控制部243进一步将飞行路线与地形图像重叠显示于显示部22。由此，使用者能够容易地掌握感测数据是在飞行路线上的哪个位置感测到的数据。
显示控制部243还可以将飞行路线以三维方式显示于显示部22。具体而言，显示控制部243以能够识别通过方向信息确定的地形图像上的传感器对象的方向的方式，将感测数据、获取位置以及方向信息飞行路线与获取位置对应的三维地形图像重叠显示于显示部22。
图4是示意性地示出信息显示装置2所显示的信息的图。在图4所示的例子中，显示有图2所示的信息的一部分(位置P2的周围的信息)。如图4所示，显示控制部243将表示感测数据的图像D2、表示获取位置的位置P2、表示方向信息的位置P2的相机标记的朝向、以及表示飞行路线的路线R，与三维地形图像重叠显示于显示部22。由此，信息显示装置2能够更容易地掌握感测信息。
返回图3，显示控制部243还可以进一步将传感器对象，例如与被拍摄体有关的信息显示于显示部22。与被拍摄体有关的信息例如是被拍摄体的名称(例如，用于从多个桥墩中识别特定的桥墩的名称等)等。例如，与飞行路线上可能会成为被拍摄体的物体有关的信息和该物体所在的位置坐标相关联地存储在存储部23中。
在该情况下，首先，确定部244基于获取位置和方向信息，确定拍摄图像的拍摄范围。然后，显示控制部243将与确定部244确定的拍摄范围中包含的位置坐标相关联地存储于存储部23的物体确定为位于拍摄范围内的物体，并且进一步将与该物体有关的信息作为与被拍摄体有关的信息显示于显示部22。由此，使用者能够容易地掌握拍摄图像中拍摄的被拍摄体。
在飞行装置1的传感器C在一个获取位置上获取到多个感测数据的情况下，显示控制部243可以将多个感测数据与一个获取位置相关联地显示。具体而言，首先，获取部241获取多个感测数据、与该多个感测数据对应的一个获取位置、以及分别与该多个感测数据对应的多个方向信息。然后，显示控制部243将多个感测数据和多个方向信息与获取位置相关联地显示于显示部22。
显示控制部243例如针对每一个感测数据以能够识别由与该感测数据对应的方向信息确定的地形图像上的传感器对象的方向的方式，将多个感测数据、一个获取位置、以及多个方向信息与获取位置对应的地形图像重叠显示于显示部22。由此，使用者能够掌握在某个位置上感测到了多个感测数据的情况。需要说明的是，显示控制部243还可以将多个感测数据中的任一个感测数据与获取位置相关联地显示于显示部22。
显示控制部243还可以进一步将获取到感测数据时的天气和飞行装置1的状态中的至少一项显示于显示部22。获取到感测数据时的天气为气候，获取到感测数据时的飞行装置1的状态例如是飞行装置1的朝向、以及飞行装置1的速度等。例如，在显示控制部243进一步将天气显示于显示部22时，首先，获取部241获取表示获取到感测数据时的天气的环境信息。除了天气之外，环境信息还可以进一步包含气温、湿度、气压等。获取部241可以从飞行装置1获取与获取到感测数据的时刻和位置对应的对应时刻和对应位置的环境信息，也可以从发布天气预报的未图示的服务器获取环境信息。对应时刻例如是与获取到感测数据的时刻相同的时刻，对应位置例如是获取到感测数据的位置，或包含获取到感测数据的位置的区域等。然后，显示控制部243进一步将获取部241获取到的环境信息与地形图像重叠显示于显示部22。由此，使用者能够掌握获取到感测数据时的天气的状态。
另外，例如，在显示控制部243进一步在显示部22显示飞行装置1的状态时，首先，获取部241从飞行装置1获取表示获取到感测数据时的飞行装置1的状态的状态信息。然后，显示控制部243进一步将获取部241获取到的状态信息与地形图像重叠显示于显示部22。由此，使用者能够掌握获取到感测数据时的飞行装置1的状态。
显示控制部243还可以实时地显示飞行装置1的传感器C在飞行中感测到的感测数据。具体而言，显示控制部243以获取部241获取到感测数据、获取位置以及方向信息为契机，将感测数据与地形图像重叠显示于显示部22。由此，使用者能够实时地确认感测到的信息。需要说明的是，显示控制部243还可以在飞行装置1结束飞行之后，将由信息管理部242存储于存储部23的感测数据、获取位置以及方向信息显示于显示部22。
[信息显示系统S的处理]
接着，对信息显示系统S的处理的流程进行说明。图5是示出信息显示系统S的处理的流程的时序图。以通过在飞行路线上飞行中的飞行装置1的传感器C进行感测来获取到感测数据为契机，开始进行本处理(S1)。
飞行装置1经由基站3，将传感器C获取到的感测数据、与该感测数据对应的获取位置、以及与该感测数据对应的方向信息发送到信息显示装置2(S2)。在信息显示装置2中，当获取部241从飞行装置1获取到感测数据、获取位置以及方向信息时，显示控制部243以能够识别通过方向信息确定的地形图像上的传感器对象的方向的方式，将感测数据、获取位置以及方向信息与获取位置对应的地形图像重叠显示于显示部22(S3)。
[本实施方式的效果]
如上所述，信息显示装置2以能够识别通过方向信息确定的地形图像上的传感器对象的方向的方式，将感测数据、获取位置以及方向信息与获取位置对应的地形图像进行重叠显示。由此，信息显示装置2能够以视觉方式容易地掌握感测信息。
以上，利用实施方式对本发明进行了说明，但本发明的技术范围并不限定于上述实施方式所记载的范围，能够在其主旨的范围内进行各种变形以及变更。例如，装置的全部或一部分，能够以任意的单位功能性或物理性地分散、合并而构成。另外，由多个实施方式的任意组合而产生的新的实施方式也包括在本发明的实施方式内。由组合而产生的新的实施方式的效果一并具有原来的实施方式的效果。

Claims (15)

1.一种信息显示装置，其中，包括：
获取部，获取通过飞行装置具备的传感器获取到的感测数据、获取到所述感测数据的获取位置、以及用于表示在获取到所述感测数据时被所述传感器作为感测的对象的传感器对象的方向的方向信息；以及
显示控制部，以能够识别通过所述方向信息确定的地形图像上的所述传感器对象的方向的方式，将所述感测数据、所述获取位置以及所述方向信息与所述获取位置对应的所述地形图像重叠显示于显示部。
2.根据权利要求1所述的信息显示装置，其中，
所述显示控制部将所述感测数据和所述方向信息与所述获取位置对应地显示于所述显示部。
3.根据权利要求1或2所述的信息显示装置，其中，
所述获取部进一步获取表示所述飞行装置飞行的飞行路线的信息，
所述显示控制部进一步将所述飞行路线与所述地形图像重叠显示于所述显示部。
4.根据权利要求3所述的信息显示装置，其中，
所述显示控制部将所述飞行路线以三维方式显示于所述显示部。
5.根据权利要求1或2所述的信息显示装置，其中，
所述传感器是相机，
所述感测数据是由所述相机拍摄到的拍摄图像，
所述传感器对象是所述拍摄图像的被拍摄体。
6.根据权利要求5所述的信息显示装置，其中，
所述显示控制部进一步将与所述被拍摄体有关的信息显示于所述显示部。
7.根据权利要求1或2所述的信息显示装置，其中，
所述感测数据是由所述传感器测量到的信息，并且是表示从所述传感器到所述传感器对象的距离的信息。
8.根据权利要求1或2所述的信息显示装置，其中，
所述显示控制部进一步将通过所述获取位置表示的纬度、经度、以及海拔显示于所述显示部。
9.根据权利要求1或2所述的信息显示装置，其中，
所述获取部获取多个所述感测数据、与所述多个感测数据对应的一个所述获取位置、以及分别与所述多个感测数据对应的多个所述方向信息，
所述显示控制部将所述多个感测数据和所述多个方向信息与所述一个获取位置相关联地显示于所述显示部。
10.根据权利要求1或2所述的信息显示装置，其中，
所述显示控制部进一步将获取到所述感测数据时的天气和所述飞行装置的状态中的至少一项显示于所述显示部。
11.根据权利要求1或2所述的信息显示装置，其中，
所述获取部从飞行中的所述飞行装置获取所述感测数据、所述获取位置以及所述方向信息，
所述信息显示装置还具有将所述感测数据、所述获取位置以及所述方向信息相关联地存储于存储部的信息管理部。
12.根据权利要求11所述的信息显示装置，其中，
所述显示控制部以所述获取部获取到所述感测数据、所述获取位置以及所述方向信息为契机，将所述感测数据与所述地形图像重叠显示于所述显示部。
13.根据权利要求1或2所述的信息显示装置，其中，
所述地形图像是地图数据的显示图像和计算机图形的显示图像中的任一个。
14.一种信息显示方法，其中，包括：
由计算机执行的以下步骤：
获取通过飞行装置具备的传感器获取到的感测数据、获取到所述感测数据的获取位置、以及用于表示在获取到所述感测数据时被所述传感器作为感测的对象的传感器对象的方向的方向信息；以及
以能够识别通过所述方向信息确定的地形图像上的所述传感器对象的方向的方式，将所述感测数据、所述获取位置以及所述方向信息与所述获取位置对应的所述地形图像重叠显示于显示部。
15.一种存储介质，其中，
记录用于使计算机作为获取部和显示控制部发挥功能的程序，
所述获取部获取通过飞行装置具备的传感器获取到的感测数据、获取到所述感测数据的获取位置、以及用于表示在获取到所述感测数据时被所述传感器作为感测的对象的传感器对象的方向的方向信息，
所述显示控制部以能够识别通过所述方向信息确定的地形图像上的所述传感器对象的方向的方式，将所述感测数据、所述获取位置以及所述方向信息与所述获取位置对应的所述地形图像重叠显示于显示部。
CN202110879488.XA 2020-12-23 2021-08-02 信息显示装置、信息显示方法以及程序 Pending CN114655457A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020213770A JP6913814B1 (ja) 2020-12-23 2020-12-23 情報表示装置、情報表示方法及びプログラム
JP2020-213770 2020-12-23

Publications (1)

Publication Number Publication Date
CN114655457A true CN114655457A (zh) 2022-06-24

Family

ID=77057584

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110879488.XA Pending CN114655457A (zh) 2020-12-23 2021-08-02 信息显示装置、信息显示方法以及程序

Country Status (3)

Country Link
US (1) US20220198193A1 (zh)
JP (2) JP6913814B1 (zh)
CN (1) CN114655457A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6913814B1 (ja) * 2020-12-23 2021-08-04 Kddi株式会社 情報表示装置、情報表示方法及びプログラム

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9380275B2 (en) * 2013-01-30 2016-06-28 Insitu, Inc. Augmented video system providing enhanced situational awareness
WO2016065519A1 (en) * 2014-10-27 2016-05-06 SZ DJI Technology Co., Ltd. Uav flight display
KR102246557B1 (ko) * 2015-04-07 2021-04-30 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US11501104B2 (en) * 2018-11-27 2022-11-15 Here Global B.V. Method, apparatus, and system for providing image labeling for cross view alignment
JP2019211486A (ja) * 2019-08-26 2019-12-12 株式会社センシンロボティクス 検査システム
US11807062B2 (en) * 2019-11-25 2023-11-07 Ford Global Technologies, Llc Collaborative relationship between a vehicle and a UAV
JP6913814B1 (ja) * 2020-12-23 2021-08-04 Kddi株式会社 情報表示装置、情報表示方法及びプログラム

Also Published As

Publication number Publication date
JP2022100205A (ja) 2022-07-05
JP6913814B1 (ja) 2021-08-04
JP2022099774A (ja) 2022-07-05
JP6976474B1 (ja) 2021-12-08
US20220198193A1 (en) 2022-06-23

Similar Documents

Publication Publication Date Title
CN106993181B (zh) 多vr/ar设备协同系统及协同方法
US20210012520A1 (en) Distance measuring method and device
KR102203135B1 (ko) 드론을 이용한 인공지능 기반 재난 피해정보 탐지 방법 및 시스템
EP2208021B1 (en) Method of and arrangement for mapping range sensor data on image sensor data
JP3432212B2 (ja) 画像処理装置及び方法
JP6803800B2 (ja) 情報処理装置、空撮経路生成方法、空撮経路生成システム、プログラム、及び記録媒体
CN108810473B (zh) 一种在移动平台上实现gps映射摄像机画面坐标的方法及系统
EP2226246A2 (en) System and methods for displaying video with improved spatial awareness
EP1189021A1 (en) Improvements in or relating to camera systems
JP6950832B2 (ja) 位置座標推定装置、位置座標推定方法およびプログラム
CN110208739A (zh) 辅助车辆定位的方法、装置、设备和计算机可读存储介质
US20020196248A1 (en) Method and system for improving situational awareness of command and control units
KR102308456B1 (ko) 라이다 및 카메라 수집정보 기반 수종탐지 시스템 및 이를 이용한 수종탐지방법, 수종탐지방법을 수행하는 프로그램이 수록된 기록매체
KR20160082886A (ko) 복수의 센서를 탑재한 무인 비행체를 이용하는 매핑 방법 및 시스템
JP6640146B2 (ja) 道路区画線診断方法
CN114655457A (zh) 信息显示装置、信息显示方法以及程序
CN115035626A (zh) 一种基于ar的景区智能巡检系统及方法
JP6943183B2 (ja) 位置特定装置、位置特定方法、位置特定プログラムおよびカメラ装置
JPH11331831A (ja) 画像上の位置判読装置
CN112418096A (zh) 检测跌的方法、装置和机器人
CN109891188A (zh) 移动平台、摄像路径生成方法、程序、以及记录介质
Baeck et al. Drone based near real-time human detection with geographic localization
JP2005056186A (ja) 交通状況観測システム
JPH10300503A (ja) 画像収集機能付きナビゲーションシステム
CN106688018A (zh) 对目标进行成像、监视和/或指示的机载光电设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination