JP2023016686A - Moving route generation method for moving body, program, management server, and management system - Google Patents

Moving route generation method for moving body, program, management server, and management system Download PDF

Info

Publication number
JP2023016686A
JP2023016686A JP2022072808A JP2022072808A JP2023016686A JP 2023016686 A JP2023016686 A JP 2023016686A JP 2022072808 A JP2022072808 A JP 2022072808A JP 2022072808 A JP2022072808 A JP 2022072808A JP 2023016686 A JP2023016686 A JP 2023016686A
Authority
JP
Japan
Prior art keywords
dimensional
data
movement
moving
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022072808A
Other languages
Japanese (ja)
Inventor
庸弘 山本
Nobuhiro Yamamoto
兼太郎 深見
Kentaro Fukami
雅弘 小川
Masahiro Ogawa
琢也 泉
Takuya Izumi
健之 河野
Takeyuki Kono
和敬 姉崎
Kazutaka ANEZAKI
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sensyn Robotics Inc
Original Assignee
Sensyn Robotics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sensyn Robotics Inc filed Critical Sensyn Robotics Inc
Priority to JP2022072808A priority Critical patent/JP2023016686A/en
Publication of JP2023016686A publication Critical patent/JP2023016686A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • G08G1/0969Systems involving transmission of navigation instructions to the vehicle having a display in the form of a map
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G5/00Traffic control systems for aircraft, e.g. air-traffic control [ATC]
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16YINFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y10/00Economic sectors
    • G16Y10/40Transportation
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16YINFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00IoT characterised by the purpose of the information processing
    • G16Y40/60Positioning; Navigation

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Computing Systems (AREA)
  • Automation & Control Theory (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Accounting & Taxation (AREA)
  • Mathematical Physics (AREA)
  • Operations Research (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Navigation (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a moving route generation method, a management server, etc. that are able to set a moving route for an autonomously moving body, including at least a moving route in a structure.
SOLUTION: A moving route generation method for generating a moving route in a structure for a moving body to move, according to the present invention, includes: a step in which, based on three-dimensional modal data indicating arrangement of components in the structure and having dimension information and based on three-dimensional map data, a three-dimensional reference data generation unit generates three-dimensional reference data in which the three-dimensional model data are arranged in the three-dimensional map data; and a step in which based on a reference coordinate system, which is either an orthogonal coordinate system having an arbitrary point as an origin coordinate in the three-dimensional reference data or a latitude-and-longitude system of the map data, the moving route generation unit generates moving route information for the moving body.
SELECTED DRAWING: Figure 7
COPYRIGHT: (C)2023,JPO&INPIT

Description

本発明は、移動体の移動経路生成方法及びプログラム、管理サーバ、管理システムに関する。 The present invention relates to a moving route generation method and program for a moving object, a management server, and a management system.

近年、ドローン(Drone)や無人航空機(UAV:Unmanned Aerial Vehicle)などの飛行体(以下、「飛行体」と総称する)や無人地上車両(UGV:Unmanned Ground Vehicle)などの走行体などの自律制御可能な移動体が産業に利用され始めている。こうした中で、特許文献1には、飛行体が予め設定された複数のウェイポイントにおいて撮影対象を順次撮影するシステムが開示されている。 In recent years, autonomous control of flying objects such as drones and unmanned aerial vehicles (UAVs) (hereinafter collectively referred to as “flying objects”) and running objects such as unmanned ground vehicles (UGVs) Possible mobiles are beginning to be used in industry. Under such circumstances, Japanese Patent Laid-Open No. 2003-100000 discloses a system in which an object to be photographed is sequentially photographed at a plurality of preset waypoints of a flying object.

特開2014-089160号公報JP 2014-089160 A

しかしながら、上記特許文献1の開示技術は、屋外においてGNSS(global navigation satellite system)を自己位置推定に使用し、緯度経度情報に基づいて移動体の移動経路を作成するものであり、屋内での移動体の移動経路においては同様の手法を用いることができない。 However, the technology disclosed in Patent Document 1 uses a global navigation satellite system (GNSS) for self-position estimation outdoors and creates a moving route for a mobile object based on latitude and longitude information. A similar approach cannot be used for body movement paths.

また、屋内(例えば建物等の構造物内)での移動体の移動経路を生成する場合には、例えばVisual SLAM(Simultaneous Localization and Mapping)等の技術を用いて、手動で移動制御される移動体に搭載されたセンサのセンサ情報に基づき、屋内の3次元情報を予め取得し、これに基づいてユーザが移動経路の設定作業を行う方法が考えられるが、SLAMデータはユーザが視認をして作業するには構造物の全体構造がわかりにくく、構造物内において実際移動させたい経路や撮影したい対象物等の識別が難しく、運用に足る精緻な経路設定が難しい。 In addition, when generating a movement route of a mobile object indoors (for example, in a structure such as a building), for example, a technique such as Visual SLAM (Simultaneous Localization and Mapping) is used to manually control the movement of the mobile object. Based on the sensor information of the sensors installed in the , it is possible to acquire indoor 3D information in advance, and based on this, the user can set the movement route. In order to do so, it is difficult to understand the overall structure of the structure, it is difficult to identify the route to be actually moved within the structure, the object to be photographed, etc., and it is difficult to set a precise route that is sufficient for operation.

さらに、構造物の内外で跨る飛行経路を作成したいという要望があるが、上述のとおり、構造物の内外で飛行経路の作成方法が異なるため、これらを統合することが困難である。 Furthermore, there is a desire to create a flight path that straddles the inside and outside of the structure, but as described above, since the flight path creation methods differ between the inside and outside of the structure, it is difficult to integrate them.

本発明はこのような背景を鑑みてなされたものであり、少なくとも構造物内の移動経路を含む自律移動の移動体の移動経路を設定可能な移動経路生成方法及び管理サーバ等を提供することを目的とする。 SUMMARY OF THE INVENTION The present invention has been made in view of such a background, and aims to provide a movement route generation method and a management server, etc., capable of setting a movement route of an autonomous mobile body including at least a movement route in a structure. aim.

上記課題を解決するための本発明の主たる発明は、移動体が移動するための構造物内の移動経路を生成する移動経路生成方法であって、三次元基準データ生成部により、前記構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、前記三次元モデルデータを前記三次元地図データに配置した三次元基準データを生成するステップと、移動経路生成部により、前記三次元基準データにおいて任意の点を原点座標とする直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、前記移動体のための移動経路情報を生成するステップと、を含む、移動経路生成方法である。 The main invention of the present invention for solving the above problems is a movement route generation method for generating a movement route in a structure for movement of a moving body, wherein a three-dimensional reference data generation unit generates a step of generating three-dimensional reference data in which the three-dimensional model data is arranged in the three-dimensional map data based on the three-dimensional model data showing the layout of the structure and having dimension information and the three-dimensional map data; A path generation unit for moving the moving object based on a reference coordinate system that is either an orthogonal coordinate system having an arbitrary point in the three-dimensional reference data as an origin coordinate or a latitude/longitude coordinate system of the map data. and a step of generating route information.

本発明によれば、特に、少なくとも構造物内の移動経路を含む自律移動の移動体の移動経路を設定可能な移動経路生成方法及び管理サーバ等を提供することができる。 According to the present invention, in particular, it is possible to provide a moving route generation method and a management server, etc., capable of setting a moving route of an autonomous mobile object including at least a moving route within a structure.

本発明の実施の形態にかかる管理システムの構成を示す図である。It is a figure which shows the structure of the management system concerning embodiment of this invention. 図1の管理サーバのハードウェア構成を示すブロック図である。2 is a block diagram showing the hardware configuration of a management server in FIG. 1; FIG. 図1のユーザ端末のハードウェア構成を示すブロック図である。2 is a block diagram showing the hardware configuration of the user terminal in FIG. 1; FIG. 図1の飛行体のハードウェア構成を示すブロック図である。FIG. 2 is a block diagram showing the hardware configuration of the flying object of FIG. 1; FIG. 図1の管理サーバの機能を示すブロック図である。2 is a block diagram showing functions of a management server in FIG. 1; FIG. 本発明の実施の形態にかかる移動経路生成方法のフローチャートである。It is a flow chart of the moving route generation method according to the embodiment of the present invention. 本発明の実施の形態にかかる表示画面の一例である。It is an example of a display screen according to the embodiment of the present invention.

本発明の実施形態の内容を列記して説明する。本発明の実施の形態による移動経路生成方法及び管理サーバ等は、以下のような構成を備える。
[項目1]
移動体が移動するための構造物内の移動経路を生成する移動経路生成方法であって、
三次元基準データ生成部により、前記構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、前記三次元モデルデータを前記三次元地図データに配置した三次元基準データを生成するステップと、
移動経路生成部により、前記三次元基準データにおいて任意の点を原点座標とする直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、前記移動体のための移動経路情報を生成するステップと、を含む、
ことを特徴とする移動経路生成方法。
[項目2]
前記三次元基準データを生成するステップは、前記三次元モデルデータと前記三次元地図データとの縮尺を合わせて合成するステップを含む、
ことを特徴とする項目1に記載の移動経路生成方法。
[項目3]
前記三次元モデルデータは、前記構造物のBIMデータに基づく三次元データである、
ことを特徴とする項目1または2に記載の移動経路生成方法。
[項目4]
項目1乃至3のいずれかに記載の移動経路生成方法により生成された前記移動経路情報に基づき前記移動体を移動制御する移動体制御方法であって、
前記移動経路情報が緯度経度座標系で表現される場合、
座標変換部により、前記移動経路情報の少なくとも一部を、任意の座標からの方向情報と距離情報を算出して直交座標系に変換するステップと、
移動実行部により、少なくとも前記方向情報及び前記距離情報に基づき移動体を移動制御するステップと、を含む
ことを特徴とする移動体制御方法。
[項目5]
前記任意の座標は、移動開始地点の座標である、
ことを特徴とする項目4に記載の移動体制御方法。
[項目6]
前記任意の座標は、構造物外のウェイポイント座標である、
ことを特徴とする項目4に記載の移動体制御方法。
[項目7]
前記任意の座標は、前記構造物内に入る直前の構造物外のウェイポイント座標である、
ことを特徴とする項目4に記載の移動体制御方法。
[項目8]
移動体が移動するための構造物内の移動経路を生成する移動経路生成方法をコンピュータが実行するためのプログラムであって、
前記移動経路生成方法は、
三次元基準データ生成部により、前記構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、前記三次元モデルデータを前記三次元地図データに配置した三次元基準データを生成するステップと、
移動経路生成部により、前記三次元基準データにおいて任意の点を原点座標とする直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、前記移動体のための移動経路情報を生成するステップと、を含む、
ことを特徴とするプログラム。
[項目9]
移動体が移動するための構造物内の移動経路を生成する管理サーバであって、
前記構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、前記三次元モデルデータを前記三次元地図データに配置した三次元基準データを生成する三次元基準データ生成部と、
前記三次元基準データにおいて任意の点を原点座標とする直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、前記移動体のための移動経路情報を生成する移動経路生成部と、を含む、
ことを特徴とする管理サーバ。
[項目10]
移動体が移動するための構造物内の移動経路を生成する管理システムであって、
前記構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、前記三次元モデルデータを前記三次元地図データに配置した三次元基準データを生成する三次元基準データ生成部と、
前記三次元基準データにおいて任意の点を原点座標とする直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、前記移動体のための移動経路情報を生成する移動経路生成部と、を含む、
ことを特徴とする管理システム。
The contents of the embodiments of the present invention are listed and explained. The movement route generation method, management server, etc. according to the embodiment of the present invention have the following configuration.
[Item 1]
A movement path generation method for generating a movement path within a structure for movement of a moving object,
The three-dimensional reference data generation unit arranges the three-dimensional model data on the three-dimensional map data based on the three-dimensional model data indicating the arrangement of components in the structure and having dimension information and the three-dimensional map data. generating three-dimensional reference data according to
Based on a reference coordinate system, which is either an orthogonal coordinate system having an arbitrary point in the three-dimensional reference data as an origin coordinate or a latitude/longitude coordinate system of the map data, the moving route generation unit generates a map for the moving body. generating travel route information;
A moving route generation method characterized by:
[Item 2]
The step of generating the three-dimensional reference data includes the step of combining scales of the three-dimensional model data and the three-dimensional map data,
The moving route generation method according to item 1, characterized by:
[Item 3]
The three-dimensional model data is three-dimensional data based on BIM data of the structure,
3. A moving route generation method according to item 1 or 2, characterized by:
[Item 4]
A moving object control method for controlling movement of the moving object based on the moving route information generated by the moving route generating method according to any one of items 1 to 3,
When the movement route information is expressed in a latitude-longitude coordinate system,
a step of calculating direction information and distance information from arbitrary coordinates and converting at least part of the moving route information into an orthogonal coordinate system by a coordinate conversion unit;
A moving object control method, comprising: controlling movement of the moving object by a movement execution unit based on at least the direction information and the distance information.
[Item 5]
The arbitrary coordinates are the coordinates of the movement start point,
A moving body control method according to item 4, characterized by:
[Item 6]
the arbitrary coordinates are waypoint coordinates outside the structure;
A moving body control method according to item 4, characterized by:
[Item 7]
The arbitrary coordinates are waypoint coordinates outside the structure immediately before entering the structure,
A moving body control method according to item 4, characterized by:
[Item 8]
A program for a computer to execute a movement route generation method for generating a movement route in a structure for movement of a mobile object,
The moving route generation method includes:
The three-dimensional reference data generation unit arranges the three-dimensional model data on the three-dimensional map data based on the three-dimensional model data indicating the arrangement of components in the structure and having dimension information and the three-dimensional map data. generating three-dimensional reference data according to
Based on a reference coordinate system, which is either an orthogonal coordinate system having an arbitrary point in the three-dimensional reference data as an origin coordinate or a latitude/longitude coordinate system of the map data, the moving route generation unit generates a map for the moving body. generating travel route information;
A program characterized by
[Item 9]
A management server that generates a movement route within a structure for movement of a mobile body,
Three-dimensional reference data is generated by arranging the three-dimensional model data in the three-dimensional map data based on the three-dimensional model data showing the arrangement of components in the structure and having dimension information and the three-dimensional map data. a three-dimensional reference data generator;
Based on a reference coordinate system that is either an orthogonal coordinate system having an arbitrary point as an origin coordinate in the three-dimensional reference data or a latitude/longitude coordinate system of the map data, moving route information for the moving body is generated. including a movement path generation unit,
A management server characterized by:
[Item 10]
A management system for generating a movement route within a structure for movement of a moving object,
Three-dimensional reference data is generated by arranging the three-dimensional model data in the three-dimensional map data based on the three-dimensional model data showing the arrangement of components in the structure and having dimension information and the three-dimensional map data. a three-dimensional reference data generator;
Based on a reference coordinate system that is either an orthogonal coordinate system having an arbitrary point as an origin coordinate in the three-dimensional reference data or a latitude/longitude coordinate system of the map data, moving route information for the moving body is generated. including a movement path generation unit,
A management system characterized by:

<実施の形態の詳細>
以下、本発明の実施の形態による移動体の移動経路生成方法及び管理サーバ等についての実施の形態を説明する。添付図面において、同一または類似の要素には同一または類似の参照符号及び名称が付され、各実施形態の説明において同一または類似の要素に関する重複する説明は省略することがある。また、各実施形態で示される特徴は、互いに矛盾しない限り他の実施形態にも適用可能である。
<Details of Embodiment>
Embodiments of a movement route generation method for a moving body, a management server, and the like according to embodiments of the present invention will be described below. In the accompanying drawings, the same or similar elements are denoted by the same or similar reference numerals and names, and duplicate descriptions of the same or similar elements may be omitted in the description of each embodiment. Also, the features shown in each embodiment can be applied to other embodiments as long as they are not mutually contradictory.

<構成>
図1に示されるように、本実施の形態における管理システムは、管理サーバ1と、一以上のユーザ端末2と、一以上の移動体4(例えば、飛行体や走行体など)と、一以上の移動体格納装置5とを有している。管理サーバ1と、ユーザ端末2と、移動体4と、移動体格納装置5は、ネットワークを介して互いに通信可能に接続されている。なお、図示された構成は一例であり、これに限らず、例えば、移動体格納装置5を有さずに、ユーザにより持ち運びされる構成などでもよい。
<Configuration>
As shown in FIG. 1, the management system according to the present embodiment includes a management server 1, one or more user terminals 2, one or more mobile objects 4 (for example, flying objects or running objects), and one or more and a mobile body storage device 5. The management server 1, the user terminal 2, the mobile unit 4, and the mobile unit storage device 5 are connected so as to be able to communicate with each other via a network. Note that the illustrated configuration is only an example, and the configuration is not limited to this, and for example, a configuration that is carried by the user without having the mobile unit storage device 5 may be employed.

<管理サーバ1>
図2は、管理サーバ1のハードウェア構成を示す図である。なお、図示された構成は一例であり、これ以外の構成を有していてもよい。
<Management Server 1>
FIG. 2 is a diagram showing the hardware configuration of the management server 1. As shown in FIG. Note that the illustrated configuration is an example, and other configurations may be employed.

図示されるように、管理サーバ1は、ユーザ端末2と、移動体4、移動体格納装置5と接続され本システムの一部を構成する。管理サーバ1は、例えばワークステーションやパーソナルコンピュータのような汎用コンピュータとしてもよいし、或いはクラウド・コンピューティングによって論理的に実現されてもよい。 As illustrated, a management server 1 is connected to a user terminal 2, a mobile unit 4, and a mobile unit storage device 5 to form part of this system. The management server 1 may be, for example, a general-purpose computer such as a workstation or personal computer, or may be logically realized by cloud computing.

管理サーバ1は、少なくとも、プロセッサ10、メモリ11、ストレージ12、送受信部13、入出力部14等を備え、これらはバス15を通じて相互に電気的に接続される。 The management server 1 includes at least a processor 10 , a memory 11 , a storage 12 , a transmission/reception section 13 , an input/output section 14 and the like, which are electrically connected to each other through a bus 15 .

プロセッサ10は、管理サーバ1全体の動作を制御し、各要素間におけるデータの送受信の制御、及びアプリケーションの実行及び認証処理に必要な情報処理等を行う演算装置である。例えばプロセッサ10はCPU(Central Processing Unit)および/またはGPU(Graphics Processing Unit)であり、ストレージ12に格納されメモリ11に展開された本システムのためのプログラム等を実行して各情報処理を実施する。 The processor 10 is an arithmetic device that controls the overall operation of the management server 1, controls transmission and reception of data between elements, executes applications, and performs information processing necessary for authentication processing. For example, the processor 10 is a CPU (Central Processing Unit) and/or a GPU (Graphics Processing Unit), and executes a program for this system stored in the storage 12 and developed in the memory 11 to perform each information process. .

メモリ11は、DRAM(Dynamic Random Access Memory)等の揮発性記憶装置で構成される主記憶と、フラッシュメモリやHDD(Hard Disc Drive)等の不揮発性記憶装置で構成される補助記憶と、を含む。メモリ11は、プロセッサ10のワークエリア等として使用され、また、管理サーバ1の起動時に実行されるBIOS(Basic Input / Output System)、及び各種設定情報等を格納する。 The memory 11 includes a main memory composed of a volatile memory device such as a DRAM (Dynamic Random Access Memory), and an auxiliary memory composed of a non-volatile memory device such as a flash memory or a HDD (Hard Disc Drive). . The memory 11 is used as a work area for the processor 10, and stores a BIOS (Basic Input/Output System) executed when the management server 1 is started, various setting information, and the like.

ストレージ12は、アプリケーション・プログラム等の各種プログラムを格納する。各処理に用いられるデータを格納したデータベースがストレージ12に構築されていてもよい。 The storage 12 stores various programs such as application programs. A database storing data used for each process may be constructed in the storage 12 .

送受信部13は、管理サーバ1をネットワークに接続する。なお、送受信部13は、Bluetooth(登録商標)及びBLE(Bluetooth Low Energy)の近距離通信インターフェースを備えていてもよい。 The transmission/reception unit 13 connects the management server 1 to the network. The transmitting/receiving unit 13 may include a short-range communication interface of Bluetooth (registered trademark) and BLE (Bluetooth Low Energy).

入出力部14は、キーボード・マウス類等の情報入力機器、及びディスプレイ等の出力機器である。 The input/output unit 14 is an information input device such as a keyboard and a mouse, and an output device such as a display.

バス15は、上記各要素に共通に接続され、例えば、アドレス信号、データ信号及び各種制御信号を伝達する。 A bus 15 is commonly connected to the above elements and transmits, for example, address signals, data signals and various control signals.

<ユーザ端末2>
図3に示されるユーザ端末2もまた、プロセッサ20、メモリ21、ストレージ22、送受信部23、入出力部24等を備え、これらはバス25を通じて相互に電気的に接続される。各要素の機能は、上述した管理サーバ1と同様に構成することが可能であることから、各要素の詳細な説明は省略する。
<User terminal 2>
The user terminal 2 shown in FIG. 3 also includes a processor 20 , a memory 21 , a storage 22 , a transmission/reception section 23 , an input/output section 24 and the like, which are electrically connected to each other through a bus 25 . Since the function of each element can be configured in the same manner as the management server 1 described above, detailed description of each element will be omitted.

<移動体4>
移動体4は、ドローンや無人航空機などの飛行体や無人地上車両などの走行体などを含む既知の移動体であって、特に自律制御可能な移動体である。移動体4の具体的な例として、飛行体4を例示して以下で説明する。図4は、飛行体4のハードウェア構成を示すブロック図である。フライトコントローラ41は、プログラマブルプロセッサ(例えば、中央演算処理装置(CPU))などの1つ以上のプロセッサを有することができる。
<Moving body 4>
The moving object 4 is a known moving object including flying objects such as drones and unmanned aerial vehicles, and traveling objects such as unmanned ground vehicles, and particularly autonomously controllable moving objects. As a specific example of the mobile object 4, the flying object 4 is illustrated and demonstrated below. FIG. 4 is a block diagram showing the hardware configuration of the flying object 4. As shown in FIG. Flight controller 41 may have one or more processors, such as programmable processors (eg, central processing units (CPUs)).

また、フライトコントローラ41は、メモリ411を有しており、当該メモリにアクセス可能である。メモリ411は、1つ以上のステップを行うためにフライトコントローラが実行可能であるロジック、コード、および/またはプログラム命令を記憶している。また、フライトコントローラ41は、慣性センサ(加速度センサ、ジャイロセンサ)、GPSセンサ、近接センサ(例えば、ライダー)等のセンサ類412を含みうる。 The flight controller 41 also has a memory 411 and can access the memory. Memory 411 stores logic, code, and/or program instructions executable by the flight controller to perform one or more steps. The flight controller 41 may also include sensors 412 such as an inertial sensor (acceleration sensor, gyro sensor), GPS sensor, proximity sensor (for example, rider).

メモリ411は、例えば、SDカードやランダムアクセスメモリ(RAM)などの分離可能な媒体または外部の記憶装置を含んでいてもよい。カメラ/センサ類42から取得したデータは、メモリ411に直接に伝達されかつ記憶されてもよい。例えば、カメラ等で撮影した静止画・動画データが内蔵メモリ又は外部メモリに記録されてもよいが、これに限らず、カメラ/センサ42または内蔵メモリからネットワークNWを介して、少なくとも管理サーバ1やユーザ端末2、移動体格納装置5のいずれかに1つに記録されてもよい。カメラ42は飛行体4にジンバル43を介して設置される。 Memory 411 may include, for example, separable media or external storage devices such as SD cards and random access memory (RAM). Data acquired from cameras/sensors 42 may be communicated directly to memory 411 and stored. For example, still image/moving image data captured by a camera or the like may be recorded in an internal memory or an external memory. It may be recorded in one of the user terminal 2 and the mobile storage device 5 . A camera 42 is installed on the flying object 4 via a gimbal 43 .

フライトコントローラ41は、飛行体の状態を制御するように構成された図示しない制御モジュールを含んでいる。例えば、制御モジュールは、6自由度(並進運動x、y及びz、並びに回転運動θ、θ及びθ)を有する飛行体の空間的配置、速度、および/または加速度を調整するために、ESC44(Electric Speed Controller)を経由して飛行体の推進機構(モータ45等)を制御する。バッテリー48から給電されるモータ45によりプロペラ46が回転することで飛行体の揚力を生じさせる。制御モジュールは、搭載部、センサ類の状態のうちの1つ以上を制御することができる。 Flight controller 41 includes a control module, not shown, configured to control the state of the vehicle. For example, the control module may be configured to adjust the spatial orientation, velocity, and/or acceleration of a vehicle having six degrees of freedom (translational motions x , y , and z , and rotational motions θx, θy, and θz). , ESC 44 (Electric Speed Controller) to control the propulsion mechanism (motor 45, etc.) of the aircraft. A propeller 46 is rotated by a motor 45 powered by a battery 48 to generate a lift force of the aircraft. The control module can control one or more of the states of the mount, sensors.

フライトコントローラ41は、1つ以上の外部のデバイス(例えば、送受信機(プロポ)49、端末、表示装置、または他の遠隔の制御器)からのデータを送信および/または受け取るように構成された送受信部47と通信可能である。送受信機49は、有線通信または無線通信などの任意の適当な通信手段を使用することができる。 Flight controller 41 is configured to transmit and/or receive data from one or more external devices (e.g., transceiver (propo) 49, terminal, display, or other remote controller). It is possible to communicate with the unit 47 . Transceiver 49 may use any suitable means of communication, such as wired or wireless communication.

例えば、送受信部47は、ローカルエリアネットワーク(LAN)、ワイドエリアネットワーク(WAN)、赤外線、無線、WiFi、ポイントツーポイント(P2P)ネットワーク、電気通信ネットワーク、クラウド通信などのうちの1つ以上を利用することができる。 For example, the transceiver 47 utilizes one or more of a local area network (LAN), a wide area network (WAN), infrared, wireless, WiFi, point-to-point (P2P) networks, telecommunications networks, cloud communications, and the like. can do.

送受信部47は、センサ類42で取得したデータ、フライトコントローラ41が生成した処理結果、所定の制御データ、端末または遠隔の制御器からのユーザコマンドなどのうちの1つ以上を送信および/または受け取ることができる。 The transmitting/receiving unit 47 transmits and/or receives one or more of data obtained by the sensors 42, processing results generated by the flight controller 41, predetermined control data, user commands from a terminal or a remote controller, and the like. be able to.

本実施の形態によるセンサ類42は、慣性センサ(加速度センサ、ジャイロセンサ)、GPSセンサ、近接センサ(例えば、LiDAR(Light Detection And Ranging)等)、またはビジョン/イメージセンサ(例えば、カメラ)を含み得る。 Sensors 42 according to the present embodiment include inertial sensors (acceleration sensors, gyro sensors), GPS sensors, proximity sensors (e.g., LiDAR (Light Detection And Ranging), etc.), or vision/image sensors (e.g., cameras). obtain.

<管理サーバの機能>
図5は、管理サーバ1に実装される機能を例示したブロック図である。本発明の実施の形態においては、構造物(例えばビルなどの建物)内の構成物(例えば、壁、柱、階段、設備など)の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、三次元モデルデータを三次元地図データに配置した三次元基準データを生成し、当該三次元基準データにおいて、三次元モデルの直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、移動体のための移動経路を生成するために各種機能部を有している。
<Management server functions>
FIG. 5 is a block diagram illustrating functions implemented in the management server 1. As shown in FIG. In the embodiment of the present invention, three-dimensional model data showing the arrangement of components (for example, walls, pillars, stairs, equipment, etc.) in a structure (for example, a building such as a building) and having dimensional information, and three-dimensional model data Based on the original map data, 3D reference data is generated by arranging the 3D model data in the 3D map data, and in the 3D reference data, the Cartesian coordinate system of the 3D model and the latitude and longitude coordinate system of the map data. It has various functional units for generating a movement path for a moving object based on one of the reference coordinate systems.

本実施の形態においては、管理サーバ1は、通信部110、三次元基準データ生成部120、移動経路生成部130、移動実行部140、取得情報出力部150、記憶部160を備えている。また、記憶部160は、三次元データ記憶部161、移動経路情報記憶部162、移動情報記憶部163の各種データベースを含む。 In this embodiment, the management server 1 includes a communication section 110 , a three-dimensional reference data generation section 120 , a movement route generation section 130 , a movement execution section 140 , an acquired information output section 150 and a storage section 160 . The storage unit 160 also includes various databases such as a three-dimensional data storage unit 161 , a movement route information storage unit 162 and a movement information storage unit 163 .

通信部110は、ユーザ端末2や、移動体4、移動体格納装置5と通信を行う。通信部110は、ユーザ端末2からの各種要求やデータ等を受け付ける受付部としても機能する。 The communication unit 110 communicates with the user terminal 2 , the mobile unit 4 and the mobile unit storage device 5 . The communication unit 110 also functions as a reception unit that receives various requests, data, and the like from the user terminal 2 .

三次元基準データ生成部120は、構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータと、三次元地図データに基づき、三次元モデルデータを三次元地図データに配置した三次元基準データを生成する。三次元モデルデータ、三次元地図データ、三次元基準データは、それぞれ三次元座標系で表現されるデータであって、三次元データ記憶部161に記憶されて管理される。 The 3D reference data generating unit 120 generates a 3D map data based on the 3D model data indicating the layout of components in the structure and having dimension information, and the 3D map data, in which the 3D model data is arranged on the 3D map data. Generate reference data. The 3D model data, the 3D map data, and the 3D reference data are data expressed in a 3D coordinate system, respectively, and are stored and managed in the 3D data storage unit 161 .

三次元モデルデータは、CAD(Computer―Aided Design)設計ソフトウェアで作成されたデータを基にして作成された、構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータであればどのようなデータであってもよく、例えば、BIM(Building Information Modeling)データ、CADデータ、BIMデータ等から再構築された三次元モデルデータなどであってもよいし、二次元の設計図データに基づき所定の高さを有する構成物を生成することで得られた三次元モデルデータであってもよく、再構築等の三次元モデルデータの生成は、三次元基準データ生成部120等により実行されてもよいし、管理サーバ1の外部で実行されて内部へ取得されてもよい。三次元モデルデータは、設定された任意の点を原点(基準点)とした三次元の直交座標系により表現されるデータであり得る。 The three-dimensional model data is any three-dimensional model data created based on data created by CAD (Computer-Aided Design) design software, showing the arrangement of components in a structure and having dimensional information. Such data may be, for example, BIM (Building Information Modeling) data, CAD data, three-dimensional model data reconstructed from BIM data, etc., or based on two-dimensional blueprint data The three-dimensional model data may be obtained by generating a structure having a predetermined height, and the generation of the three-dimensional model data such as reconstruction is executed by the three-dimensional reference data generation unit 120 or the like. Alternatively, it may be executed outside the management server 1 and acquired inside. The three-dimensional model data can be data represented by a three-dimensional orthogonal coordinate system with an arbitrary set point as the origin (reference point).

三次元地図データは、地表及び地表上の少なくとも一部を三次元の立体空間で仮想的に表現するものであり、例えば、仮想的な地面に対して既知の航空写真データが配置されたものであってもよいし、山や川などの地形が立体的な三次元データとして反映されていてもよい。三次元地図データは、水平方向が緯度経度座標であって、鉛直方向が高度座標である三次元座標表現されるデータであり得る。 3D map data is a virtual representation of the ground surface and at least a portion of the ground surface in a three-dimensional space. Alternatively, topography such as mountains and rivers may be reflected as three-dimensional data. The 3D map data can be data expressed in 3D coordinates, with latitude and longitude coordinates in the horizontal direction and altitude coordinates in the vertical direction.

三次元基準データは、例えば、上記三次元地図データ上に、上記三次元モデルデータを配置して合成した三次元データであり得る。合成は、例えば、ユーザ端末2上でユーザ操作に基づき両者の位置合わせを行い、決定された位置で両者の三次元データを一体的な三次元データ(三次元基準データ)として合成してもよいし、その他、構造物の三次元モデルデータの下面の輪郭と三次元地図データ上に表示して把握される構造物の輪郭(例えば、上空からの俯瞰的な航空写真などから把握でき、ユーザが指定した構造物の輪郭)を対応付けて輪郭に一致させるなどの既知の位置合わせを用いて配置して一体的な三次元データ(三次元基準データ)として合成してもよい。この時、三次元モデルデータと三次元地図データの縮尺が異なる場合が想定され、その場合は三次元モデルデータの寸法情報と三次元地図データの縮尺情報とを比較して縮尺を合わせるようにするとよい。三次元基準データは、上述の三次元モデルの直交座標系と上述の地図データの緯度経度座標系のいずれか一方である基準座標系としての三次元座標で表現されるデータであり得る。 The three-dimensional reference data may be, for example, three-dimensional data obtained by arranging and synthesizing the three-dimensional model data on the three-dimensional map data. Synthesis may be performed, for example, by aligning the two based on a user operation on the user terminal 2, and synthesizing the three-dimensional data of both as integrated three-dimensional data (three-dimensional reference data) at the determined position. In addition, the outline of the structure displayed on the three-dimensional model data of the structure and the outline of the structure grasped on the three-dimensional map data (for example, it can be grasped from a bird's-eye view aerial photograph from the sky), The contours of the designated structure) may be arranged using known alignment such as matching the contours, and synthesized as integral three-dimensional data (three-dimensional reference data). At this time, it is assumed that the scales of the 3D model data and the 3D map data are different.In that case, the dimension information of the 3D model data and the scale information of the 3D map data are compared to match the scales. good. The three-dimensional reference data can be data represented by three-dimensional coordinates as a reference coordinate system that is either the orthogonal coordinate system of the three-dimensional model described above or the latitude/longitude coordinate system of the map data described above.

このように、互いに異なる三次元座標系により表現される三次元モデルデータと三次元地図データとを合成し、統一的な三次元の基準座標系により表現することにより、三次元モデルデータと三次元地図データの三次元座標系が一致されることになる。これにより、例えばユーザ端末2上に表示される三次元基準データをベースにウェイポイントを設定した場合において、移動経路が構造物の内部と外部で跨る場合であっても、統一的な三次元の基準座標系に基づく移動経路生成などの位置指定が可能となる。 In this way, by synthesizing the three-dimensional model data and the three-dimensional map data expressed by mutually different three-dimensional coordinate systems and expressing them by a unified three-dimensional reference coordinate system, the three-dimensional model data and the three-dimensional The 3D coordinate system of the map data will be matched. As a result, for example, when waypoints are set based on the three-dimensional reference data displayed on the user terminal 2, even if the movement route straddles the inside and outside of the structure, a unified three-dimensional It is possible to designate a position such as generation of a movement path based on the reference coordinate system.

移動経路生成部130は、例えばユーザ端末2上に表示される三次元基準データに対してユーザの選択操作により一以上のウェイポイントを設定し、当該ウェイポイントに基づいて既知の方法により移動経路情報を生成し、移動経路情報記憶部162に記憶され、管理するようにしてもよいし、三次元基準データを解析し、例えば構造物内の特定の又は全ての構成物の情報を取得可能なウェイポイントを設定した移動経路を算出し、これを移動経路情報として移動経路情報記憶部162に記憶され、管理するようにしてもよい。 For example, the movement route generation unit 130 sets one or more waypoints for the three-dimensional reference data displayed on the user terminal 2 by a user's selection operation, and generates movement route information by a known method based on the waypoints. may be generated, stored in the movement route information storage unit 162, and managed, or the three-dimensional reference data may be analyzed to obtain, for example, information on a specific or all components in the structure. It is also possible to calculate the moving route for which points are set, store this as moving route information in the moving route information storage unit 162, and manage it.

なお、移動経路は、例えば、移動体格納装置5の位置を移動開始位置及び移動終了位置として、各ウェイポイントを通過する移動経路を生成するようにしてもよいし、逆に移動体格納装置5を有さずに、ユーザにより機体を持ち運びされた位置を移動開始位置としたり、移動終了位置においてユーザが機体を回収したりする構成などでもよいし、管理サーバ1により管理された移動体格納装置5の情報(例えば、位置情報や格納状態情報、格納機情報など)を基に、移動開始位置または移動終了位置として選択された移動体格納装置5の位置も含めた移動経路として生成される構成でもよい。 The movement route may be generated by passing through each waypoint with the position of the mobile body storage device 5 as the movement start position and the movement end position. , the position where the user carries the machine may be set as the movement start position, or the user may collect the machine at the movement end position. 5 (for example, position information, storage state information, storage device information, etc.), a movement route including the position of the mobile unit storage device 5 selected as the movement start position or movement end position is generated. It's okay.

移動実行部140は、座標変換部141を含んでおり、移動経路情報記憶部162及び移動情報記憶部163を参照して、点検、警備、建築進捗管理等を目的とする移動体4の移動を実行する。 The movement execution unit 140 includes a coordinate conversion unit 141, refers to the movement route information storage unit 162 and the movement information storage unit 163, and performs movement of the moving body 4 for inspection, security, construction progress management, and the like. Execute.

ここで、座標変換部141について説明する。例えば、基準座標系として緯度経度座標系を用いる場合において、構造物外での飛行では移動体4はGNSSにて自己位置推定が可能であるため、基準座標系となっている緯度経度座標系で表現される移動経路情報(ウェイポイント座標情報を含む)をそのまま用いることが可能であるが、移動経路が構造物内(屋内)を含む場合には非GNSS環境下となり、そのまま用いることが難しい。そこで、座標変換部141を用いて緯度経度座標系で表現される移動経路情報の少なくとも一部(全部を含む)を、任意の座標(例えば、移動開始地点の座標や、構造物外の任意の地点の座標、特に構造物内に入る直前のウェイポイント座標)からの方向情報と距離情報を順次またはまとめて算出して直交座標系に変換する。すなわち、例えば所定の2点のウェイポイント座標に基づき、一方のウェイポイントから他方のウェイポイントまでの方向情報と距離情報が算出可能であるので、上述の任意の座標から移動経路上で方向情報と距離情報を算出することで、構造物外から構造物内に跨る移動経路であっても、移動体4が次のウェイポイントに向かうためにどちらの方向にどのくらいの距離進むかという情報に基づき自律制御による移動が可能となるため、構造物内外に跨る移動経路であっても同一の移動経路情報に基づき自律制御による移動を実行することが可能となる。また、反対に直交座標系で表現された移動経路情報や、現在位置情報、移動体4が取得情報を取得した情報取得位置情報を、直交座標系において基準となる任意の座標に基づいて緯度経度情報に変換して移動情報記憶部163に記憶することも可能であり、例えば、後述の取得情報出力部150において利用するようにしてもよい。 Here, the coordinate conversion unit 141 will be described. For example, when a latitude/longitude coordinate system is used as the reference coordinate system, the mobile object 4 can estimate its own position using GNSS during flight outside the structure. Although it is possible to use the expressed movement route information (including waypoint coordinate information) as it is, when the movement route includes inside a structure (indoor), it becomes a non-GNSS environment, and it is difficult to use it as it is. Therefore, using the coordinate conversion unit 141, at least part (including all) of the movement route information expressed in the latitude and longitude coordinate system is converted to arbitrary coordinates (for example, the coordinates of the movement start point, arbitrary coordinates outside the structure). The direction information and distance information from the coordinates of the point (especially the coordinates of the waypoint immediately before entering the structure) are calculated sequentially or collectively and converted into an orthogonal coordinate system. That is, since direction information and distance information from one waypoint to the other waypoint can be calculated based on, for example, two predetermined waypoint coordinates, direction information and distance information can be calculated on the movement route from the above arbitrary coordinates. By calculating the distance information, even if the movement route extends from the outside of the structure to the inside of the structure, the moving object 4 can move autonomously based on the information on which direction and how far it will move to the next waypoint. Since movement by control becomes possible, movement by autonomous control can be executed based on the same movement route information even if the movement route extends over the inside and outside of the structure. Conversely, moving route information expressed in an orthogonal coordinate system, current position information, and information acquisition position information acquired by the moving body 4 are expressed in latitude and longitude based on arbitrary coordinates serving as references in the orthogonal coordinate system. It is also possible to convert it into information and store it in the movement information storage unit 163, and for example, it may be used in the acquired information output unit 150, which will be described later.

移動情報記憶部163は、移動経路生成部130により移動経路を生成する際や、移動実行部140により当該移動経路上において自律制御された移動体4の移動が実行される際などに用いられるパラメータ情報や移動経路上で取得した移動時取得情報等を格納している。具体的なパラメータの例としては、例えば、移動速度、飛行高度(移動体4が飛行体である場合)、撮像画像のオーバーラップ率、移動時取得情報(例えば、画像情報や映像情報等)などを含む。 The movement information storage unit 163 stores parameters used when the movement route generation unit 130 generates a movement route, and when the movement execution unit 140 executes autonomously controlled movement of the moving body 4 on the movement route. It stores information and information acquired during movement acquired on the movement route. Examples of specific parameters include movement speed, flight altitude (when the moving object 4 is a flying object), overlap rate of captured images, information obtained during movement (for example, image information, video information, etc.). including.

取得情報出力部150は、移動情報記憶部163に記憶される移動時取得情報に基づいてユーザ端末2に送信するための出力情報を生成する。本実施の形態においては、例えば、移動経路上にて移動体4により取得された取得情報(静止画像、動画像、音声その他の情報)であったり、図7に例示されるような、三次元モデルデータや移動経路情報を可視化する表示を行い、現在位置情報に基づく現在位置の表示や、取得情報の位置情報に対応付けられた位置に対応する取得情報を閲覧するためのリンクとなる記号などの印が付された三次元データ(例えば、三次元モデルデータや三次元基準データ、三次元地図データなど)を閲覧可能に出力してもよい。そして、当該リンクをユーザ端末2上で選択することで、対応する取得情報が表示されるようにしてもよい。この時、三次元データとして、BIMデータに関連する三次元データを用いた場合、BIMデータに関連付けて三次元データを構成する構成物ごとの情報を持つことが可能なので、構成物単位で紐づけ(例えばリンク生成)が可能となる。 The acquired information output unit 150 generates output information to be transmitted to the user terminal 2 based on the information acquired during movement stored in the movement information storage unit 163 . In the present embodiment, for example, acquired information (still image, moving image, sound and other information) acquired by the moving body 4 on the movement route, or three-dimensional information such as that illustrated in FIG. Visualize model data and movement route information, display the current position based on the current position information, and a symbol that becomes a link for viewing the acquired information corresponding to the position associated with the acquired information. 3D data marked with (eg, 3D model data, 3D reference data, 3D map data, etc.) may be output in a browsable manner. By selecting the link on the user terminal 2, the corresponding acquired information may be displayed. At this time, if 3D data related to BIM data is used as 3D data, it is possible to have information for each structure that constitutes 3D data in association with BIM data, so it is possible to link each structure (for example, link generation) becomes possible.

<移動経路生成方法の一例>
図6-7を参照して、本実施形態にかかる移動経路生成方法について、本実施の形態における管理システムの動作も含めて説明する。図6には、本実施形態にかかる移動経路生成方法のフローチャートが例示されている。このフローチャートでは、例示的にユーザ端末2上でアプリケーションを起動する構成を示しているが、これに限らず、例えば管理サーバ1や移動体格納装置5がアプリケーションを起動可能なプロセッサと入出力装置を有し、各種設定等が可能な構成であってもよい。なお、図7は、本発明の実施の形態にかかる移動経路生成方法に関連する表示画面の一例である。
<Example of moving route generation method>
Referring to FIGS. 6-7, the moving route generation method according to the present embodiment will be described, including the operation of the management system according to the present embodiment. FIG. 6 illustrates a flow chart of the moving route generation method according to this embodiment. This flowchart exemplifies a configuration in which an application is started up on the user terminal 2. However, the present invention is not limited to this. It may have a configuration in which various settings and the like are possible. Note that FIG. 7 is an example of a display screen related to the moving route generation method according to the embodiment of the present invention.

まず、ユーザは、ユーザ端末2において、例えば移動経路生成機能を含むアプリケーションを起動する(SQ101)。このアプリケーションは、例えばユーザ端末2に記憶されていてもよいし、ネットワークを介して接続される管理サーバ1または他のサーバ(不図示)から提供されるソフトウェア(いわゆるSaaS)であってもよい。必要に応じてログイン画面が表示され、例えばログインIDやパスワードを要求する構成にしてもよい。 First, the user activates an application including, for example, a moving route generation function on the user terminal 2 (SQ101). This application may be stored in the user terminal 2, for example, or may be software (so-called SaaS) provided from the management server 1 or another server (not shown) connected via a network. A login screen may be displayed as necessary, and a login ID and password may be requested, for example.

次に、ユーザは、新規の移動計画を作成する(SQ102)。例えば、「プラン名」や「エリア名」、「住所」などを設定して、ユーザ端末2上に、対象となる構造物内の三次元基準データを取得して表示し、新規の移動計画の作成を開始する。三次元基準データは、すでに予め生成されて三次元データ記憶部161に記憶されていてもよいし、このタイミングで三次元モデルデータ及び三次元地図データを読み込み、三次元基準データを生成して表示するようにしてもよい。 Next, the user creates a new movement plan (SQ102). For example, by setting "plan name", "area name", "address", etc., the user terminal 2 acquires and displays the three-dimensional reference data in the target structure, and creates a new movement plan. Start creating. The three-dimensional reference data may be generated in advance and stored in the three-dimensional data storage unit 161, or at this timing, the three-dimensional model data and the three-dimensional map data are read to generate and display the three-dimensional reference data. You may make it

次に、ユーザは、移動体4の移動のための移動経路を生成する(SQ103)。例えば、図7に例示されるように、ユーザ端末2上に表示される三次元基準データ(例示ではBIMデータから生成された三次元モデルデータが三次元地図データ上に配置された三次元データ)に対してユーザの選択操作により一以上のウェイポイント(例えば、ユーザ端末2上では緯度経度座標系で表現される)を設定し、当該ウェイポイントに基づいて既知の方法(例示では4つのウェイポイント間をそれぞれ直線にて結ぶ)により移動経路情報を生成される。 Next, the user generates a moving route for moving the moving body 4 (SQ103). For example, as exemplified in FIG. 7, three-dimensional reference data displayed on the user terminal 2 (three-dimensional data in which three-dimensional model data generated from BIM data is arranged on three-dimensional map data in the example) , one or more waypoints (for example, expressed in a latitude-longitude coordinate system on the user terminal 2) are set by the user's selection operation, and a known method based on the waypoints (in the example, four waypoints are connected by straight lines), movement route information is generated.

次に、ユーザは、移動体4に移動の実行開始を指示する(SQ104)。例えば、移動経路情報記憶部162及び移動情報記憶部163を参照して、点検、警備、建築進捗管理等を目的とする移動体4の移動を実行する。この時、移動体4が移動に用いている直交座標系にて表現される現在位置情報に基づき、緯度経度座標系により表現される現在位置情報を算出し、ユーザ端末2上の三次元基準データに対して現在の位置情報を重畳するなどして表示してもよい。特に、移動体4の現在位置を移動経路上に動的に表示されるようにしてもよい。 Next, the user instructs the moving object 4 to start moving (SQ104). For example, the movement route information storage unit 162 and the movement information storage unit 163 are referenced to move the moving body 4 for inspection, security, construction progress management, and the like. At this time, based on the current position information expressed by the orthogonal coordinate system used for movement of the moving object 4, the current position information expressed by the latitude/longitude coordinate system is calculated, and the three-dimensional reference data on the user terminal 2 is calculated. may be displayed by superimposing the current position information on it. In particular, the current position of the moving body 4 may be dynamically displayed on the movement route.

次に、ユーザは、管理サーバ1に取得情報の出力を指示する(SQ105)。例えば、ユーザ端末2上に表示される三次元基準データに移動体4が実際に移動した経路情報を重畳して表示してもよい。そのほか、移動経路上にて移動体4により取得された取得情報(静止画像、動画像、音声その他の情報)を表示したり、当該取得情報の位置情報に対応付けられた位置(特にウェイポイントの位置情報)に対応する取得情報を閲覧するためのリンクとなる記号などの印が付された三次元データ(例えば、三次元モデルデータや三次元基準データなど)を閲覧可能に出力してもよい。そして、当該リンクをユーザ端末2上で選択することで、対応する取得情報が表示されるようにしてもよい。この時、三次元データとして、BIMデータに関連する三次元データを用いた場合、BIMデータに関連付けて三次元データを構成する構成物ごとの情報を持つことが可能なので、構成物単位で紐づけ(例えばリンク生成)が可能となる。 Next, the user instructs the management server 1 to output the obtained information (SQ105). For example, route information of the actual movement of the moving body 4 may be superimposed on the three-dimensional reference data displayed on the user terminal 2 and displayed. In addition, the acquired information (still images, moving images, audio and other information) acquired by the moving body 4 on the movement route is displayed, and the position associated with the position information of the acquired information (especially the waypoint) 3D data (for example, 3D model data, 3D reference data, etc.) marked with a symbol that serves as a link for viewing acquired information corresponding to position information) may be output in a browsable manner. . By selecting the link on the user terminal 2, the corresponding obtained information may be displayed. At this time, if 3D data related to BIM data is used as 3D data, it is possible to have information for each component that constitutes 3D data in association with BIM data, so it is possible to link each component (for example, link generation) becomes possible.

このように、本発明は、少なくとも構造物内の移動経路を含む自律移動の移動体の移動経路を設定可能な移動経路生成方法及び管理サーバ等を提供することができる。なお、上記のようにSQ104の移動体4の自律的な移動の実行を伴う構成に代えて、単に最適な移動経路を作成するように構成してもよく、これに基づき他のユーザがプロポ等で手動で移動体4を構造物内で移動させる際のお手本となる移動経路を他のユーザのユーザ端末2上に表示することが可能となる。 In this way, the present invention can provide a moving route generation method, a management server, and the like that can set a moving route for an autonomous mobile body including at least a moving route within a structure. It should be noted that, in place of the configuration involving the execution of autonomous movement of the moving body 4 in SQ104 as described above, it may be configured to simply create an optimum movement route, and based on this, other users may , it is possible to display on the user terminal 2 of another user a moving route that serves as a model for manually moving the moving body 4 within the structure.

また、上述の実施例では移動体4による構造物内の情報取得を具体例としたが、例えば構造物の点検であってもよく、構造物の内壁および/または外壁の所定の事象の有無を点検するために利用される装置、機器等を備えていてもよい。より具体的には、撮像装置(可視光カメラ、赤外線カメラ、金属探知機、超音波測定器等)や、打鍵装置等、探知装置(金属探知機)、集音装置、臭気測定器、ガス検知器、空気汚染測定器、検出装置(宇宙線、放射線、電磁波等を検出するための装置)等の内壁を有する点検対象構造物の状態を知るために必要な装置は全て採用され得る。 Further, in the above-described embodiment, the acquisition of information inside the structure by the moving body 4 was taken as a specific example. Devices, equipment, etc. used for inspection may be provided. More specifically, imaging devices (visible light cameras, infrared cameras, metal detectors, ultrasonic measuring devices, etc.), keying devices, etc., detection devices (metal detectors), sound collectors, odor measuring devices, gas detectors All devices necessary for knowing the state of the structure to be inspected having inner walls such as instruments, air pollution measuring instruments, detection devices (devices for detecting cosmic rays, radiation, electromagnetic waves, etc.) can be adopted.

また、実施例は例えば構造物内の警備や監視であってもよく、警備や監視のために利用される装置、機器等を備えていてもよい。より具体的には、撮像装置(可視光カメラ、赤外線カメラ、暗視カメラ、金属探知機、超音波測定器等)や、センサ装置(モーションセンサ、赤外線センサ等)等、警備・監視対象構造物の異常や侵入者等を撮像・検知するために必要な装置は全て採用され得る。 Further, the embodiment may be, for example, guarding or monitoring inside a structure, and may include devices, equipment, etc. used for guarding or monitoring. More specifically, security and monitoring structures such as imaging devices (visible light cameras, infrared cameras, night vision cameras, metal detectors, ultrasonic measuring devices, etc.) and sensor devices (motion sensors, infrared sensors, etc.) Any device necessary for imaging and detecting anomalies in the system, intruders, etc., can be employed.

本発明の移動体は、カメラ等を搭載した撮影用の移動体としても好適に使用することができる他、セキュリティ分野、インフラ監視、測量、スポーツ会場・工場・倉庫等の建物や構造物内の点検、災害対応等の様々な産業にも利用することができる。 The mobile body of the present invention can be suitably used as a mobile body for photography equipped with a camera or the like, and can also be used in security fields, infrastructure monitoring, surveying, sports venues, factories, warehouses, and other buildings and structures. It can also be used in various industries such as inspection and disaster response.

上述した実施の形態は、本発明の理解を容易にするための例示に過ぎず、本発明を限定して解釈するためのものではない。本発明は、その趣旨を逸脱することなく、変更、改良することができると共に、本発明にはその均等物が含まれることは言うまでもない。 The above-described embodiments are merely examples for facilitating understanding of the present invention, and are not intended to limit and interpret the present invention. It goes without saying that the present invention can be modified and improved without departing from its spirit, and that equivalents thereof are included in the present invention.

1 管理サーバ
2 ユーザ端末
4 移動体
5 移動体格納装置

1 Management Server 2 User Terminal 4 Mobile 5 Mobile Storage Device

Claims (10)

移動体が移動するための構造物内の移動経路を生成する移動経路生成方法であって、
三次元基準データ生成部により、前記構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、前記三次元モデルデータを前記三次元地図データに配置した三次元基準データを生成するステップと、
移動経路生成部により、前記三次元基準データにおいて任意の点を原点座標とする直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、前記移動体のための移動経路情報を生成するステップと、を含む、
ことを特徴とする移動経路生成方法。
A movement path generation method for generating a movement path within a structure for movement of a moving object,
The three-dimensional reference data generation unit arranges the three-dimensional model data on the three-dimensional map data based on the three-dimensional model data indicating the arrangement of components in the structure and having dimension information and the three-dimensional map data. generating three-dimensional reference data according to
Based on a reference coordinate system, which is either an orthogonal coordinate system having an arbitrary point in the three-dimensional reference data as an origin coordinate or a latitude/longitude coordinate system of the map data, the moving route generation unit generates a map for the moving body. generating travel route information;
A moving route generation method characterized by:
前記三次元基準データを生成するステップは、前記三次元モデルデータと前記三次元地図データとの縮尺を合わせて合成するステップを含む、
ことを特徴とする請求項1に記載の移動経路生成方法。
The step of generating the three-dimensional reference data includes the step of combining scales of the three-dimensional model data and the three-dimensional map data,
2. The moving route generating method according to claim 1, characterized in that:
前記三次元モデルデータは、前記構造物のBIMデータに基づく三次元データである、
ことを特徴とする請求項1または2に記載の移動経路生成方法。
The three-dimensional model data is three-dimensional data based on BIM data of the structure,
3. The moving route generation method according to claim 1 or 2, characterized in that:
請求項1乃至3のいずれかに記載の移動経路生成方法により生成された前記移動経路情報に基づき前記移動体を移動制御する移動体制御方法であって、
前記移動経路情報が緯度経度座標系で表現される場合、
座標変換部により、前記移動経路情報の少なくとも一部を、任意の座標からの方向情報と距離情報を算出して直交座標系に変換するステップと、
移動実行部により、少なくとも前記方向情報及び前記距離情報に基づき移動体を移動制御するステップと、を含む
ことを特徴とする移動体制御方法。
A moving object control method for controlling the movement of the moving object based on the moving route information generated by the moving route generating method according to any one of claims 1 to 3,
When the movement route information is expressed in a latitude-longitude coordinate system,
a step of calculating direction information and distance information from arbitrary coordinates and converting at least part of the moving route information into an orthogonal coordinate system by a coordinate conversion unit;
A moving object control method, comprising: controlling movement of the moving object by a movement execution unit based on at least the direction information and the distance information.
前記任意の座標は、移動開始地点の座標である、
ことを特徴とする請求項4に記載の移動体制御方法。
The arbitrary coordinates are the coordinates of the movement start point,
5. The moving body control method according to claim 4, characterized in that:
前記任意の座標は、構造物外のウェイポイント座標である、
ことを特徴とする請求項4に記載の移動体制御方法。
the arbitrary coordinates are waypoint coordinates outside the structure;
5. The moving body control method according to claim 4, characterized in that:
前記任意の座標は、前記構造物内に入る直前の構造物外のウェイポイント座標である、
ことを特徴とする請求項4に記載の移動体制御方法。
The arbitrary coordinates are waypoint coordinates outside the structure immediately before entering the structure,
5. The moving body control method according to claim 4, characterized in that:
移動体が移動するための構造物内の移動経路を生成する移動経路生成方法をコンピュータが実行するためのプログラムであって、
前記移動経路生成方法は、
三次元基準データ生成部により、前記構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、前記三次元モデルデータを前記三次元地図データに配置した三次元基準データを生成するステップと、
移動経路生成部により、前記三次元基準データにおいて任意の点を原点座標とする直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、前記移動体のための移動経路情報を生成するステップと、を含む、
ことを特徴とするプログラム。
A program for a computer to execute a movement route generation method for generating a movement route in a structure for movement of a mobile object,
The moving route generation method includes:
The three-dimensional reference data generation unit arranges the three-dimensional model data on the three-dimensional map data based on the three-dimensional model data indicating the arrangement of components in the structure and having dimension information and the three-dimensional map data. generating three-dimensional reference data according to
Based on a reference coordinate system, which is either an orthogonal coordinate system having an arbitrary point in the three-dimensional reference data as an origin coordinate or a latitude/longitude coordinate system of the map data, the moving route generation unit generates a map for the moving body. generating travel route information;
A program characterized by
移動体が移動するための構造物内の移動経路を生成する管理サーバであって、
前記構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、前記三次元モデルデータを前記三次元地図データに配置した三次元基準データを生成する三次元基準データ生成部と、
前記三次元基準データにおいて任意の点を原点座標とする直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、前記移動体のための移動経路情報を生成する移動経路生成部と、を含む、
ことを特徴とする管理サーバ。
A management server that generates a movement route within a structure for movement of a mobile body,
Three-dimensional reference data is generated by arranging the three-dimensional model data in the three-dimensional map data based on the three-dimensional model data showing the arrangement of components in the structure and having dimension information and the three-dimensional map data. a three-dimensional reference data generator;
Based on a reference coordinate system that is either an orthogonal coordinate system having an arbitrary point as an origin coordinate in the three-dimensional reference data or a latitude/longitude coordinate system of the map data, moving route information for the moving body is generated. including a movement path generation unit,
A management server characterized by:
移動体が移動するための構造物内の移動経路を生成する管理システムであって、
前記構造物内の構成物の配置を示し寸法情報を有する三次元モデルデータ、及び、三次元地図データに基づき、前記三次元モデルデータを前記三次元地図データに配置した三次元基準データを生成する三次元基準データ生成部と、
前記三次元基準データにおいて任意の点を原点座標とする直交座標系と前記地図データの緯度経度座標系のいずれか一方である基準座標系に基づき、前記移動体のための移動経路情報を生成する移動経路生成部と、を含む、
ことを特徴とする管理システム。

A management system for generating a movement route within a structure for movement of a moving object,
Three-dimensional reference data is generated by arranging the three-dimensional model data in the three-dimensional map data based on the three-dimensional model data showing the arrangement of components in the structure and having dimension information and the three-dimensional map data. a three-dimensional reference data generator;
Based on a reference coordinate system that is either an orthogonal coordinate system having an arbitrary point as an origin coordinate in the three-dimensional reference data or a latitude/longitude coordinate system of the map data, moving route information for the moving body is generated. including a movement path generation unit,
A management system characterized by:

JP2022072808A 2021-07-21 2022-04-27 Moving route generation method for moving body, program, management server, and management system Pending JP2023016686A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022072808A JP2023016686A (en) 2021-07-21 2022-04-27 Moving route generation method for moving body, program, management server, and management system

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
PCT/JP2021/027358 WO2023002615A1 (en) 2021-07-21 2021-07-21 Moving body movement path generation method and program, management server and management system
JP2021571603A JP7072311B1 (en) 2021-07-21 2021-07-21 Movement route generation method and program of moving object, management server, management system
JP2022072808A JP2023016686A (en) 2021-07-21 2022-04-27 Moving route generation method for moving body, program, management server, and management system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2021571603A Division JP7072311B1 (en) 2021-07-21 2021-07-21 Movement route generation method and program of moving object, management server, management system

Publications (1)

Publication Number Publication Date
JP2023016686A true JP2023016686A (en) 2023-02-02

Family

ID=81654309

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2021571603A Active JP7072311B1 (en) 2021-07-21 2021-07-21 Movement route generation method and program of moving object, management server, management system
JP2022072808A Pending JP2023016686A (en) 2021-07-21 2022-04-27 Moving route generation method for moving body, program, management server, and management system

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2021571603A Active JP7072311B1 (en) 2021-07-21 2021-07-21 Movement route generation method and program of moving object, management server, management system

Country Status (2)

Country Link
JP (2) JP7072311B1 (en)
WO (1) WO2023002615A1 (en)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013224827A (en) * 2012-04-19 2013-10-31 Nec Corp Position retrieval result display method, position retrieval information registration method, position retrieval result display system, and position retrieval information registration system
US10013798B2 (en) * 2016-08-30 2018-07-03 The Boeing Company 3D vehicle localizing using geoarcs
JP6745175B2 (en) * 2016-09-12 2020-08-26 株式会社ダイヘン Movement attribute setting device
JP7126112B2 (en) * 2018-02-27 2022-08-26 パナソニックIpマネジメント株式会社 Communication system, display method and program
JP2021064241A (en) * 2019-10-16 2021-04-22 トヨタ自動車株式会社 Article transfer system

Also Published As

Publication number Publication date
JPWO2023002615A1 (en) 2023-01-26
WO2023002615A1 (en) 2023-01-26
JP7072311B1 (en) 2022-05-20

Similar Documents

Publication Publication Date Title
EP3971674B1 (en) Systems and methods for uav flight control
JP6765512B2 (en) Flight path generation method, information processing device, flight path generation system, program and recording medium
JP2018535487A (en) System and method for planning and controlling UAV paths
CN111506109A (en) Selective processing of sensor data
CN110174903A (en) System and method for controlling loose impediment in environment
JP6829513B1 (en) Position calculation method and information processing system
CN109564434A (en) System and method for positioning loose impediment
JP7118490B1 (en) Information processing system, information processing method, program, mobile object, management server
WO2022264413A1 (en) Mobile body movement path generation method and program, management server, and management system
JP6730763B1 (en) Flight body flight path creation method and management server
WO2023002615A1 (en) Moving body movement path generation method and program, management server and management system
JP6991525B1 (en) Waypoint height coordinate setting method and management server, information processing system, program
JP7170369B1 (en) Information processing system and mobile body, information processing method, and program
JP6684012B1 (en) Information processing apparatus and information processing method
JP6730764B1 (en) Flight route display method and information processing apparatus
JP7441579B1 (en) Information processing system and information processing method
WO2023228283A1 (en) Information processing system, movable body, information processing method, and program
JP2021068426A (en) Method of creating flight route for flying object and management server
JP7228298B1 (en) Information processing system, information processing method, program, mobile object, management server
JP2020095519A (en) Shape estimation device, shape estimation method, program, and recording medium
WO2022113482A1 (en) Information processing device, method, and program
JP6810498B1 (en) Flight route creation method and management server for aircraft
JP6810497B1 (en) Flight route creation method and management server for aircraft
Pinrath et al. Real-time Simulation System for Teleoperated Mobile Robots using V-REP
JP2023083072A (en) Method, system and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240718