JP7338927B1

JP7338927B1 - ROOF REPAIR SUPPORT SYSTEM AND ROOF REPAIR SUPPORT METHOD

Info

Publication number: JP7338927B1
Application number: JP2023063498A
Authority: JP
Inventors: 哲矢山田
Original assignee: ラックス建設株式会社
Priority date: 2023-04-10
Filing date: 2023-04-10
Publication date: 2023-09-05
Anticipated expiration: 2043-04-10

Abstract

【課題】不特定多数の屋根の状況を簡易に把握する技術を提供する。【解決手段】ＡＩ処理部１２３は、上空から地上を撮影した上空画像を取得し、機械学習された判別器を用いて、上空画像から屋根分析データを生成する。屋根分析データは、屋根が撮影されている屋根領域の範囲を表す屋根範囲画像、屋根領域が実際に屋根である確率を表す屋根確率、及び屋根領域の劣化具合を表す劣化度を含む。ＡＩ処理部１２３は、屋根領域のそれぞれについて、屋根分析データを含む屋根データを、データベース１１に蓄積する。サービス提供部１２１は、屋根の検索に用いる検索条件の入力を受け付けて、検索条件を満たす屋根データをデータベース１１から読み出して出力する。【選択図】図１[Problem] To provide a technology for easily grasping the status of an unspecified number of roofs. SOLUTION: An AI processing unit 123 acquires an aerial image of the ground taken from above, and generates roof analysis data from the aerial image using a machine-learned classifier. The roof analysis data includes a roof range image representing the range of the roof region where the roof is photographed, a roof probability representing the probability that the roof region is actually a roof, and a degree of deterioration representing the degree of deterioration of the roof region. The AI processing unit 123 accumulates roof data including roof analysis data in the database 11 for each roof area. The service providing unit 121 receives input of search conditions used for searching for roofs, reads roof data that satisfies the search conditions from the database 11, and outputs the roof data. [Selection diagram] Figure 1

Description

本開示は、屋根の修繕に必要な情報を提示する技術に関する。 The present disclosure relates to technology for presenting information necessary for roof repair.

特許文献１には、工場、倉庫、体育館、展示館、ドーム球場等の大面積の屋根を持つ構造物や建築物（以下、建物）の維持管理、補修に関して、建物の屋根材を撮影した撮影画像を、画像処理することで、屋根の劣化度を評価する技術が提案されている。 In Patent Document 1, regarding the maintenance, management, and repair of structures and buildings (hereinafter referred to as buildings) with large roofs such as factories, warehouses, gymnasiums, exhibition halls, and dome stadiums, photographs of roof materials of buildings are taken. A technique for evaluating the degree of deterioration of a roof by image processing an image has been proposed.

特開平７－３１８５１０号公報JP-A-7-318510

従来技術では、評価の対象となる建物屋根材を、飛行物体を用いて上空から撮影したり、クレーンや高所作業者等を用いて近接撮影したりする等、評価対象毎に個別に行っている。したがって、例えば、不特定多数の屋根の劣化具合を評価して修繕の提案をするような用途で従来技術を使用する場合、非常に手間を要するという問題があった。 In the conventional technology, the building roof material to be evaluated is photographed from the sky using a flying object, or a close-up photograph is taken using a crane or a high-place worker. . Therefore, for example, when the conventional technology is used in applications such as evaluating the degree of deterioration of an unspecified number of roofs and proposing repairs, there is a problem that it requires a great deal of time and effort.

本開示の１つの局面は、不特定多数の屋根の状況を簡易に把握する技術を提供する。 One aspect of the present disclosure provides a technique for easily grasping the conditions of an unspecified number of roofs.

本開示の一態様は、屋根修繕支援システムであって、分析部（１２３：Ｓ３１０～Ｓ３７０）と、データベース生成部（１２３：Ｓ３８０）と、データ提供部（１２１：Ｓ１７０～Ｓ１９０）と、を備える。分析部は、上空から地上を撮影した上空画像を取得し、機械学習された判別器を用いて、上空画像から、屋根分析データを生成するように構成される。屋根分析データは、屋根が撮影されている屋根領域の範囲を表す屋根範囲画像、屋根領域が実際に屋根である確率を表す屋根確率、及び屋根領域の劣化具合を表す劣化度を含む。データベース生成部は、分析部によって生成された屋根領域のそれぞれについて、屋根分析データを含む屋根データを、データベース（１１）に蓄積するように構成される。データ提供部は、屋根の検索に用いる検索条件の入力を受け付けて、検索条件を満たす屋根データをデータベースから読み出して出力するように構成される。 One aspect of the present disclosure is a roof repair support system comprising an analysis unit (123: S310 to S370), a database generation unit (123: S380), and a data provision unit (121: S170 to S190). . The analysis unit is configured to acquire an aerial image of the ground from the sky and generate roof analysis data from the aerial image using a machine-learned classifier. The roof analysis data includes a roof range image representing the range of the roof area where the roof is photographed, a roof probability representing the probability that the roof area is actually the roof, and a degree of deterioration representing the degree of deterioration of the roof area. The database generator is configured to store roof data, including roof analytical data, in a database (11) for each of the roof regions generated by the analyzer. The data providing unit is configured to receive an input of search conditions used to search for roofs, read roof data satisfying the search conditions from the database, and output the roof data.

このような構成によれば、不特定多数の屋根について、劣化具合等の屋根の状況を簡易に把握することができる。その結果、屋根修繕の提案に必要な種々の情報を含む屋根データを、簡単かつ効率よく収集することができる。 According to such a configuration, it is possible to easily grasp the state of the roof such as the degree of deterioration for an unspecified number of roofs. As a result, it is possible to easily and efficiently collect roof data including various information necessary for proposing roof repairs.

本開示の一態様は、屋根修繕支援方法であって、上空から地上を撮影した上空画像を取得し、機械学習された判別器を用いて、上空画像から、屋根が撮影されている屋根領域の範囲を表す屋根範囲画像、屋根領域が実際に屋根である確率を表す屋根確率、及び屋根領域の劣化具合を表す劣化度を含む屋根分析データを生成すること（Ｓ３１０～Ｓ３７０）と、屋根領域のそれぞれについて、屋根分析データを含む屋根データを、データベースに蓄積すること（Ｓ３８０）と、屋根の検索に用いる検索条件の入力を受け付けて、検索条件を満たす屋根データをデータベースから読み出して出力すること（Ｓ１７０～Ｓ１９０）と、を含む。 One aspect of the present disclosure is a roof repair support method, in which an aerial image obtained by photographing the ground from the sky is acquired, and a machine-learned discriminator is used to determine the roof area where the roof is photographed from the aerial image. Generating roof analysis data including a roof range image representing the range, a roof probability representing the probability that the roof region is actually a roof, and a degree of deterioration representing the degree of deterioration of the roof region (S310 to S370); For each of them, store roof data including roof analysis data in a database (S380), receive input of search conditions used for roof search, read out from the database and output roof data that satisfies the search conditions (S380). S170 to S190) and

本開示の屋根修繕支援方法によれば、上述の屋根修繕支援システムと同様の効果を得ることができる。 According to the roof repair support method of the present disclosure, it is possible to obtain effects similar to those of the roof repair support system described above.

屋根修繕支援システムの構成を示すブロック図である。1 is a block diagram showing the configuration of a roof repair support system; FIG. データベースに登録される屋根データの内容を示す説明図である。FIG. 4 is an explanatory diagram showing the contents of roof data registered in a database; データ生成部としての機能を実現するために、サービス提供サーバの処理部が実行するサービス提供処理のフローチャートである。4 is a flow chart of service providing processing executed by a processing unit of the service providing server in order to realize a function as a data generating unit; データ生成部としての機能を実現するために、サービス提供サーバの処理部が実行するデータ生成処理のフローチャートである。4 is a flowchart of data generation processing executed by a processing unit of the service providing server to realize a function as a data generation unit; ＡＩ処理部としての機能を実現するために、サービス提供サーバの処理部が実行する分析処理のフローチャートである。10 is a flow chart of analysis processing executed by a processing unit of a service providing server in order to realize a function as an AI processing unit; 検索結果一覧が表示されているときに、サービス提供サーバの処理部が実行する個別処理のフローチャートである。9 is a flowchart of individual processing executed by the processing unit of the service providing server when a search result list is displayed; ログイン時に端末装置に表示されるユーザ画面を示す説明図である。FIG. 10 is an explanatory diagram showing a user screen displayed on the terminal device at the time of login; 詳細検索画面を示す説明図である。FIG. 11 is an explanatory diagram showing a detailed search screen; ユーザ画面に検索結果一覧が表示された状態を示す説明図である。FIG. 10 is an explanatory diagram showing a state in which a list of search results is displayed on the user screen; 管理メニュー画面及びエリア指定画面を示す説明図である。FIG. 4 is an explanatory diagram showing a management menu screen and an area designation screen; エリア指定画面にて屋根探査の対象となる対象領域を指定した状態を示す説明図である。FIG. 11 is an explanatory diagram showing a state in which a target area for roof survey is designated on the area designation screen; カテゴリ設定画面を示す説明図である。FIG. 11 is an explanatory diagram showing a category setting screen; ユーザ画面の地図に重畳表示された屋根マスクの画像がクリックされたときに、屋根データが表示されるポップアップ画面を示す説明図である。FIG. 9 is an explanatory diagram showing a pop-up screen on which roof data is displayed when a roof mask image superimposed on a map on a user screen is clicked;

以下、図面を参照しながら、本開示の実施形態を説明する。
［１．構成］
図１に示す屋根修繕支援システム１は、上空から地上を撮影した画像（以下、上空画像）から、建物の屋上を検出し、屋上の画像を分析することで、防水加工等の修繕提案に必要な情報を収集し、ユーザからの要求に応じて、収集した情報を提供する。 Hereinafter, embodiments of the present disclosure will be described with reference to the drawings.
[1. composition]
A roof repair support system 1 shown in FIG. 1 detects the roof of a building from an image of the ground taken from the sky (hereinafter referred to as an aerial image), and analyzes the image of the roof. and provide the collected information upon request from the user.

屋根修繕支援システム１は、サービス提供サーバ１０と、地図データサーバ２０と、端末装置３０とを備える。サービス提供サーバ１０、地図データサーバ２０、及び端末装置３０は、データ通信を行う通信ネットワーク１００を介して相互に接続される。通信ネットワーク１００は、任意のユーザが使用可能な公衆ネットワークであってもよいし、特定のユーザのみが使用可能な専用ネットワークでもよい。また、サービス提供サーバ１０、地図データサーバ２０、及び端末装置３０は、いずれか二つ又は全部が一体に設けられてもよい。 The roof repair support system 1 includes a service providing server 10 , a map data server 20 and a terminal device 30 . The service providing server 10, the map data server 20, and the terminal device 30 are interconnected via a communication network 100 for data communication. Communication network 100 may be a public network that can be used by any user, or a private network that can be used only by specific users. Further, any two or all of the service providing server 10, the map data server 20, and the terminal device 30 may be integrally provided.

端末装置３０は、画像等を表示するための表示装置、及び各種指示を入力するための入力装置等を備える。端末装置３０は、通信ネットワーク１００を介してサービス提供サーバ１０にアクセスすることで、表示装置に表示されるグラフィカルユーザインターフェース（ＧＵＩ）を介して屋根修繕支援サービスの提供を受ける。端末装置３０は、ディスクトップパーソナルコンピュータであってもよいし、スマートフォン、タブレット等の携帯端末であってもよい。 The terminal device 30 includes a display device for displaying images and the like, an input device for inputting various instructions, and the like. The terminal device 30 accesses the service providing server 10 via the communication network 100 to receive the roof repair support service via a graphical user interface (GUI) displayed on the display device. The terminal device 30 may be a desktop personal computer, or may be a mobile terminal such as a smart phone or a tablet.

地図データサーバ２０は、通信ネットワーク１００を介した外部からの要求に応じて地図データを提供する。地図データには、線図で地図を表すための線図データ、及び上空画像で地図を表すための画像データが含まれる。地図データは、２５６×２５６ピクセルのタイル画像で表される。地球全体を１枚のタイル画像で表した状態をズームレベル０として、ズームレベルが１上がる毎に、地図の縦横がそれぞれ２倍に拡大され、縦横のタイル数が２倍、合計タイル数が４倍に増加する。つまり、ｎを０以上の整数として、ズームレベルｎでは、地球全体が２^２ｎ枚のタイル画像で表される。但し、ズームレベルによらず、各タイルのサイズは、２５６×２５６ピクセルのままである。タイル画像には、タイル画像中の基準点となる位置を緯度及び経度で表す位置データが対応づけられている。 The map data server 20 provides map data in response to external requests via the communication network 100 . The map data includes line drawing data for representing a map in a line drawing and image data for representing a map in an aerial image. Map data is represented by 256×256 pixel tile images. The state where the whole earth is represented by a single tile image is zoom level 0. Each time the zoom level increases by 1, the vertical and horizontal tiles of the map are enlarged by 2, and the number of vertical and horizontal tiles is doubled, for a total of 4 tiles. to double. That is, at zoom level n, where n is an integer greater than or equal to 0, the entire earth is represented by ²²ⁿ tile images. However, regardless of the zoom level, the size of each tile remains 256×256 pixels. A tile image is associated with position data representing a position, which is a reference point in the tile image, in terms of latitude and longitude.

地図データには、地図に示された建物に関する詳細な情報を表す建物関連データが対応づけられていてもよい。建物関連データには、建物の名称、郵便番号、住所、電話番号等が含まれてもよい。 The map data may be associated with building-related data representing detailed information about the buildings shown on the map. Building-related data may include building names, zip codes, addresses, phone numbers, and the like.

サービス提供サーバ１０は、屋根修繕支援サービスを提供するサーバである。サービス提供サーバ１０は、データベース１１と、処理部１２と、通信部１３とを備える。
通信部１３は、通信ネットワーク１００を介して、地図データサーバ２０及び端末装置３０とデータ通信を行う。通信部１３は、無線通信及び有線通信のいずれを行うものであってもよい。 The service providing server 10 is a server that provides a roof repair support service. The service providing server 10 includes a database 11 , a processing section 12 and a communication section 13 .
The communication unit 13 performs data communication with the map data server 20 and the terminal device 30 via the communication network 100 . The communication unit 13 may perform either wireless communication or wired communication.

処理部１２は、マイクロコンピュータにより構成され、ＣＰＵ１２ａと、ＲＯＭ１２ｂと、ＲＡＭ１２ｃと、を備える。処理部１２の各種機能は、ＣＰＵ１２ａが非遷移的実体的記録媒体に格納されたプログラムを実行することにより実現される。本実施形態では、ＲＯＭ１２ｂが、プログラムを格納した非遷移的実体的記録媒体に該当する。また、このプログラムの実行により、プログラムに対応する方法が実行される。 The processing unit 12 is configured by a microcomputer, and includes a CPU 12a, a ROM 12b, and a RAM 12c. Various functions of the processing unit 12 are realized by the CPU 12a executing a program stored in a non-transitional substantive recording medium. In this embodiment, the ROM 12b corresponds to a non-transitional substantive recording medium storing programs. Also, by executing this program, a method corresponding to the program is executed.

処理部１２は、プログラムを実行することによって、サービス提供部１２１、データ生成部１２２、ＡＩ処理部１２３としての機能を実現する。
サービス提供部１２１は、端末装置３０からの要求に応じて、屋根修繕支援サービスに使用するＧＵＩを提供する。 The processing unit 12 realizes functions as a service providing unit 121, a data generating unit 122, and an AI processing unit 123 by executing programs.
The service providing unit 121 provides a GUI used for roof repair support service in response to a request from the terminal device 30 .

データ生成部１２２は、地図上の領域である対象領域ＴＡを指定して、ＡＩ処理部１２３を利用した分析処理を実行することで、屋根の修繕支援に関わる種々のデータを含んだ屋根データを生成する。 The data generation unit 122 specifies the target area TA, which is an area on the map, and executes analysis processing using the AI processing unit 123 to generate roof data including various data related to roof repair support. Generate.

ＡＩ処理部１２３は、対象領域ＴＡの上空画像を入力とし、ＡＩモデルを用いて、上空画像に写り込んだ建物の屋根を抽出すると共に、抽出した屋根のそれぞれについて屋根の状態を分析した結果である屋根分析データを生成して、屋根データの一部として出力する。 The AI processing unit 123 receives the sky image of the target area TA as input, extracts the roofs of the buildings reflected in the sky image using the AI model, and analyzes the state of each of the extracted roofs. Generate some roof analysis data and output it as part of the roof data.

なお、ＡＩモデルへの入力画像には、タイル画像で示された上空画像が用いられる。従って、入力画像として使用するタイル画像のズームレベルに応じて、ＡＩモデルでの分析精度は変化する。本実施形態では、入力画像として使用するタイル画像のズームレベルを、固定レベル（例えば、ズームレベル１８）とするが、ズームレベルを可変設定できるようにしてもよい。 A sky image represented by a tile image is used as an input image to the AI model. Therefore, the analysis accuracy of the AI model changes according to the zoom level of the tile image used as the input image. In this embodiment, the zoom level of the tile image used as the input image is fixed (for example, zoom level 18), but the zoom level may be variably set.

ＡＩモデルの出力は、屋根範囲画像と、屋根確率と、劣化度とを含む。屋根範囲画像は、入力されたタイル画像において、屋根が写り込んでいる領域（以下、屋根領域）のピクセルを１、屋根領域以外（以下、非屋根領域）のピクセルを０で表した画像である。屋根確率は、屋根範囲画像が示す屋根領域に実際に屋根が写り込んでいる確率を示す。劣化度は、屋根領域に写り込んだ屋根の劣化具合を表す。劣化度は連続的な数値で表現してもよいが、本実施形態では、「健全」「進行」「著しく進行」の三段階で表す。 The output of the AI model includes roof coverage images, roof probabilities, and degrees of deterioration. The roof range image is an image in which the pixels in the area where the roof is reflected (hereinafter referred to as the roof area) in the input tile image are represented by 1, and the pixels in the area other than the roof area (hereinafter referred to as the non-roof area) are represented by 0. . The roof probability indicates the probability that the roof is actually reflected in the roof area indicated by the roof range image. The degree of deterioration represents the degree of deterioration of the roof reflected in the roof area. The degree of deterioration may be represented by a continuous numerical value, but in the present embodiment, it is represented by three stages of "healthy", "advanced", and "extremely advanced".

なお、ＡＩモデルは、屋根領域、劣化度が既知である多数のタイル画像を教師データとして、ニューラルネットワークを機械学習することで生成される。本実施形態では、ＡＩモデルは、畳み込みニューラルネットワークを深層学習することで生成される。 The AI model is generated by machine-learning a neural network using a large number of tile images with known roof regions and degrees of deterioration as training data. In this embodiment, the AI model is generated by deep learning a convolutional neural network.

ＡＩ処理部１２３は、ＡＩモデルの出力と、ＡＩモデルの入力画像（すなわちタイル画像）の位置データ及びズームレベルとに基づき、屋根面積と、屋根位置と、屋根マスクとを算出する。屋根面積は、例えば屋根領域のピクセル数と入力画像のズームレベルとに基づいて算出される屋根領域の面積を所定の単位（例えば、［ｍ^２］）で表したデータである。屋根位置は、屋根領域の中心位置を緯度経度で表したデータである。屋根マスクは、屋根領域に外接する四角形の位置及び形状を表すデータである。屋根マスクは、例えば、屋根領域に外接する四角形の各頂点の位置を緯度経度で表した位置データであってもよい。 The AI processing unit 123 calculates the roof area, the roof position, and the roof mask based on the output of the AI model and the position data and zoom level of the input image (that is, the tile image) of the AI model. The roof area is data representing the area of the roof region calculated based on, for example, the number of pixels of the roof region and the zoom level of the input image, expressed in a predetermined unit (eg, [m ² ]). The roof position is data representing the central position of the roof area in terms of latitude and longitude. A roof mask is data representing the position and shape of a quadrangle circumscribing the roof region. The roof mask may be, for example, position data representing the positions of the vertices of a quadrangle circumscribing the roof region in terms of latitude and longitude.

以下では、タイル画像毎に生成される上述の屋根範囲画像、屋根確率、劣化度、屋根面積、屋根位置、屋根マスクを総称して、タイル分析データという。
ＡＩ処理部１２３は、複数のタイル画像に渡って写り込んだ同一の屋根に属するタイル分析データを統合することで屋根毎の屋根分析データを生成し、生成された屋根分析データを、屋根データの一部としてデータベース１１に登録する。 Hereinafter, the roof range image, roof probability, deterioration degree, roof area, roof position, and roof mask generated for each tile image are collectively referred to as tile analysis data.
The AI processing unit 123 generates roof analysis data for each roof by integrating the tile analysis data belonging to the same roof reflected across a plurality of tile images, and converts the generated roof analysis data into roof data. It is registered in the database 11 as a part.

データベース１１に登録される屋根データには、図２に示すように、屋根ＩＤが付与される。屋根ＩＤは、屋根毎に生成される屋根データを個々に識別するためのデータである。屋根データは、屋根分析データと、屋根付加データとを含む。 The roof data registered in the database 11 is given a roof ID as shown in FIG. The roof ID is data for individually identifying roof data generated for each roof. Roof data includes roof analysis data and roof additional data.

屋根分析データは、上述したようにＡＩ処理部１２３で生成される。屋根付加データは、屋根分析データに関連して付与されるデータである。屋根付加データは、ユーザからの要求に応じてＷｅｂ検索等をすることで取得されてもよいし、ユーザによって設定されてもよい。 Roof analysis data is generated by the AI processing unit 123 as described above. Roof additional data is data given in relation to roof analysis data. The additional roof data may be acquired by searching the web or the like in response to a request from the user, or may be set by the user.

屋根付加データには、「建物カテゴリ」「建物名」「郵便番号」「住所」「電話番号」が含まれてもよい。
「建物カテゴリ」は、屋根が属する建物の種類を表すデータであ。「建物カテゴリ」を表すカテゴリ名として「ビル」「工場」「倉庫」「病院」「学校」「ホテル」等が含まれてもよい。「建物カテゴリ」は、ユーザによって設定されるデータである。 The roof additional data may include "building category", "building name", "zip code", "address", and "telephone number".
"Building category" is data representing the type of building to which the roof belongs. The category name representing the "building category" may include "building", "factory", "warehouse", "hospital", "school", "hotel", and the like. "Building category" is data set by the user.

「建物名」は、屋根が属する建物の名称を表すデータである。「郵便番号」「住所」は、屋根が属する建物の所在地を表すデータである。「電話番号」は、屋根が属する建物の所有者又は管理者の連絡先を表すデータである。 "Building name" is data representing the name of the building to which the roof belongs. "Postal code" and "address" are data representing the location of the building to which the roof belongs. "Phone number" is data representing the contact information of the owner or manager of the building to which the roof belongs.

「建物名」「郵便番号」「住所」「電話番号」は、例えば、屋根分析データに含まれる屋根位置を用いたＷｅｂ検索等によって抽出されてもよいし、ユーザの手動入力によって設定されてもよい。 The "building name", "postal code", "address", and "telephone number" may be extracted by, for example, a web search using the roof position included in the roof analysis data, or may be set by the user's manual input. good.

［２．処理］
［２－１．サービス提供処理］
次に、ユーザが、端末装置３０を介して、サービス提供サーバ１０が提供する屋根修繕支援サービスにログインした場合に、サービス提供サーバ１０の処理部１２が実行するサービス提供処理を、図３のフローチャートを用いて説明する。サービス提供処理は、サービス提供部１２１としての機能を実現するための処理である。 [2. process]
[2-1. Service provision processing]
Next, when the user logs in to the roof repair support service provided by the service providing server 10 via the terminal device 30, the service providing process executed by the processing unit 12 of the service providing server 10 is described in the flowchart of FIG. will be used to explain. The service providing process is a process for realizing the function of the service providing unit 121 .

サービス提供処理が起動すると、Ｓ１１０にて、処理部１２は、屋根修繕支援サービスを利用するためのＧＵＩを提供するユーザ画面５を、ログインした端末装置３０の表示装置に表示させる。 When the service providing process is started, in S110, the processing unit 12 causes the display device of the logged-in terminal device 30 to display the user screen 5 that provides a GUI for using the roof repair support service.

図７に示すように、ユーザ画面５は、地図表示領域５１と、検索領域５２と、検索結果表示領域５３と、管理画面表示ボタン５４とを備える。
地図表示領域５１は、地図データサーバ２０から取得した地図データを表示する領域である。地図データは、上空画像が用いられる。地図表示領域５１には、表示された地図に対する操作（例えば、拡大縮小等）するためのアイコン等が表示されてもよい。 As shown in FIG. 7, the user screen 5 includes a map display area 51, a search area 52, a search result display area 53, and a management screen display button .
The map display area 51 is an area for displaying map data acquired from the map data server 20 . A sky image is used as the map data. The map display area 51 may display icons or the like for operating the displayed map (for example, zooming in or out).

検索領域５２は、検索ボックス５２１と、絞込用アイコン群５２２とを備える。
検索ボックス５２１は、データベース１１に登録されている屋根データの検索に用いる検索条件をテキスト入力するための領域である。検索ボックス５２１には、アイコンＩ１～Ｉ３が含まれてもよい。アイコンＩ１は、検索開始を指示する際に操作される。アイコンＩ２は、入力された検索条件をクリアする際に操作される。アイコンＩ３は、詳細な検索条件を設定するための詳細検索画面６を表示する際に操作される。 The search area 52 includes a search box 521 and a group of icons 522 for narrowing down.
The search box 521 is an area for text input of search conditions used to search for roof data registered in the database 11 . Search box 521 may include icons I1-I3. The icon I1 is operated when instructing to start searching. The icon I2 is operated when clearing the input search conditions. The icon I3 is operated when displaying the detailed search screen 6 for setting detailed search conditions.

図８に示すように、詳細検索画面６は、例えば、検索ボックス５２１の下方に表示される。詳細検索画面６には、検索カテゴリ毎に検索メニューが列挙される。検索カテゴリには、「劣化具合」「精度」「種類」「面積の広さ」等が含まれる。 As shown in FIG. 8, the detailed search screen 6 is displayed below the search box 521, for example. Search menus are listed for each search category on the detailed search screen 6 . The search categories include "degree of deterioration", "accuracy", "type", "size of area", and the like.

検索カテゴリ「劣化具合」には検索メニューとして、「健全」「進行」「著しく進行」が列挙される。「劣化具合」の検索では、データベース１１に登録された屋根データの「劣化度」が参照される。 In the search category "degradation", "healthy", "advanced", and "remarkably advanced" are listed as search menus. In searching for the "degree of deterioration", the "degree of deterioration" of the roof data registered in the database 11 is referred to.

検索カテゴリ「精度」には、検索メニューとして、「精度が高い」「精度通常」「精度低い」が列挙される。「精度」の検索では、データベース１１に登録された屋根データの「信頼度」が参照される。 In the search category "accuracy", "high accuracy", "normal accuracy", and "low accuracy" are listed as search menus. In searching for "accuracy", the "reliability" of the roof data registered in the database 11 is referred to.

検索カテゴリ「種類」には、検索メニューとして、「ビル」「工場」「倉庫」「病院」「学校」「ホテル」が列挙される。「種類」の検索では、データベース１１に登録された屋根データの「建物カテゴリ」が参照される。 In the search category "type", "building", "factory", "warehouse", "hospital", "school", and "hotel" are listed as search menus. In searching for "type", the "building category" of the roof data registered in the database 11 is referred to.

検索カテゴリ「面積の広さ」には、検索メニューの代わりに、面積を０～１０００ｍ^２の範囲で連続的に設定可能なスライダが表示される。「面積の広さ」の検索では、データベース１１に登録された屋根データの「面積」が参照される。 In the search category "size of area", instead of the search menu, a slider that can continuously set the area in the range of 0 to 1000 m ² is displayed. In searching for the "size of the area", the "area" of the roof data registered in the database 11 is referred to.

つまり、詳細検索画面６を使用した場合、検索メニューを選択するチェックボックスをチェックしたり、スライダを所望の位置に操作したりした状態で、アイコンＩ１を操作することで検索が実行される。 That is, when the detailed search screen 6 is used, the search is executed by operating the icon I1 while checking the check box for selecting the search menu or operating the slider to a desired position.

図７に戻り、検索結果表示領域５３は、検索結果の一覧が表示される領域である。検索実行前、及びアイコンＩ２が操作され検索条件がクリアされた後など、検索結果が存在しない場合、検索結果表示領域５３は、地図表示領域５１の一部として地図の表示に使用されてもよい。また、ユーザ画面５を立ち上げた直後の初期画面における検索結果表示領域５３には、データベース１１に登録されている屋根データの一覧が表示されてもよい。 Returning to FIG. 7, the search result display area 53 is an area in which a list of search results is displayed. When there are no search results, such as before executing a search and after the icon I2 is operated and the search condition is cleared, the search result display area 53 may be used as part of the map display area 51 to display a map. . Further, a list of roof data registered in the database 11 may be displayed in the search result display area 53 on the initial screen immediately after the user screen 5 is launched.

検索結果表示領域５３に表示される検索結果一覧７は、図９に示すように、検索によって抽出された屋根毎に、屋根データ（すなわち、屋根分析データ及び屋根付加データ）と、「カテゴリ選択」ボタンとが表示される。但し、データベース１１に屋根付加データが未登録である場合は、屋根付加データの代わりに「詳細を取得」ボタンが表示される。また、検索結果一覧７には、抽出された屋根の屋根データを拡大表示するためのアイコンや、抽出された屋根が表示されている地図を、地図表示領域５１に表示させるためのアイコンが含まれていてもよい。地図表示領域５１には、抽出された屋根の位置を強調表示する屋根マスク画像Ｍが、地図に重畳して表示されてもよい。 The search result list 7 displayed in the search result display area 53 includes, as shown in FIG. button is displayed. However, if the roof additional data is not registered in the database 11, a "get details" button is displayed instead of the roof additional data. The search result list 7 also includes an icon for enlarging the roof data of the extracted roofs and an icon for displaying a map showing the extracted roofs in the map display area 51. may be In the map display area 51, a roof mask image M highlighting the position of the extracted roof may be displayed superimposed on the map.

図７に戻り、絞込用アイコン群５２２は、検索結果を、建物カテゴリで絞り込む時に操作される複数のアイコンであり、地図表示領域５１の左上部に、地図に重畳して表示される。絞込用アイコン群５２２に属する各アイコンには、建物カテゴリを示す「ビル」「工場」「倉庫」「病院」「学校」「ホテル」のいずれかの文字が示されている。 Returning to FIG. 7, the narrow-down icon group 522 is a plurality of icons that are operated when narrowing down search results by building category, and is displayed in the upper left part of the map display area 51 so as to be superimposed on the map. Each icon belonging to the group of icons for narrowing down 522 indicates a character of one of "building", "factory", "warehouse", "hospital", "school", and "hotel", which indicates the building category.

管理画面表示ボタン５４は、管理画面８を表示するためのアイコンであり、地図表示領域５１の右上隅に地図データに重畳して表示される。管理画面８については後述する。
続くＳ１２０では、処理部１２は、管理画面表示ボタン５４が操作されたか否かを判定し、操作されていれば処理をＳ１３０に移行し、操作されていなければ処理をＳ１６０に移行する。 The management screen display button 54 is an icon for displaying the management screen 8, and is displayed in the upper right corner of the map display area 51 so as to be superimposed on the map data. The management screen 8 will be described later.
In subsequent S120, the processing unit 12 determines whether or not the management screen display button 54 has been operated.

Ｓ１３０では、処理部１２は、管理画面８を表示する。管理画面８は、図１０に示すように、管理画面表示ボタン５４の近くにて、地図表示領域５１に表示された地図に重畳して表示される。管理画面８は、「ファイルのインポート・エクスポート」「エリアを指定する」「パスワード変更」「ログアウト」等のメニューを有する。 In S130, the processing unit 12 displays the management screen 8. FIG. The management screen 8 is superimposed on the map displayed in the map display area 51 near the management screen display button 54, as shown in FIG. The management screen 8 has menus such as "file import/export", "specify area", "password change", and "logout".

「ファイルのインポート・エクスポート」は、指定されたファイル形式（たとえば、ＣＳＶ形式）で記載された屋根データをインポートしてデータベース１１に登録する場合、及び出力対象を、指定されたファイル形式で出力する場合等に操作される。なお、出力対象とは、検索結果としてデータベース１１から抽出された屋根データのことである。 "File import/export" is for importing roof data described in a specified file format (for example, CSV format) and registering it in the database 11, and outputting an output target in the specified file format. It is operated according to circumstances. The output target is roof data extracted from the database 11 as a search result.

「エリアを指定する」は、新たな屋根データを生成するために屋根を探索するエリアを指定する際に操作される。
「パスワードの変更」は、ログイン時に使用するパスワードを変更する際に操作される。 "Specify area" is operated when specifying an area to search for roofs in order to generate new roof data.
"Change password" is operated when changing the password used for login.

「ログアウト」は、サービス提供処理を終了させる際に操作される。
続くＳ１４０では、処理部１２は、管理画面８を終了させる操作が行われたか否かを判定し、操作が行われていなければ、同ステップを繰り返すことで待機し、操作が行われていれば、処理をＳ１５０に移行する。管理画面８を終了させる操作とは、管理画面８において「ログアウト」を選択する操作、管理画面８以外の領域をクリックする操作等が含まれる。 "Logout" is operated when terminating the service providing process.
In subsequent S140, the processing unit 12 determines whether or not an operation to end the management screen 8 has been performed. , the process proceeds to S150. The operation to terminate the management screen 8 includes an operation of selecting "logout" on the management screen 8, an operation of clicking an area other than the management screen 8, and the like.

Ｓ１５０では、処理部１２は、地図表示領域５１に表示されている管理画面８を消去する。
続くＳ１６０では、処理部１２は、管理画面８を終了させる操作が、ログアウトの要求であるか否かを判定し、ログアウトの要求であれば、ログアウトに必要な処理を実行して、サービス提供処理を終了し、ログアウトの要求でなければ、処理をＳ１２０に戻す。 At S<b>150 , the processing unit 12 erases the management screen 8 displayed in the map display area 51 .
In subsequent S160, the processing unit 12 determines whether or not the operation for terminating the management screen 8 is a logout request. is terminated, and if the logout request is not made, the process returns to S120.

Ｓ１７０では、処理部１２は、検索領域５２を使用した検索条件の入力が行われたか否かを判定し、検索条件の入力が行われていれば、処理をＳ１８０に移行し、検索条件の入力が行われていなければ、処理をＳ１２０に移行する。検索領域５２を使用した検索条件の入力は、検索ボックス５２１を利用した検索ワードの入力でもよいし、詳細検索画面６を利用した検索メニューの選択でもよいし、絞込用アイコン群５２２を操作することによる検索結果の絞り込み要求でもよい。 In S170, the processing unit 12 determines whether or not search conditions have been input using the search area 52. If search conditions have been input, the process proceeds to S180, and the search conditions are input. is not performed, the process proceeds to S120. The search condition input using the search area 52 may be input of a search word using the search box 521, selection of a search menu using the detailed search screen 6, or operation of the group of icons 522 for narrowing down. It may also be a request to narrow down the search results based on the search results.

Ｓ１８０では、処理部１２は、入力された検索条件に従って、データベース１１を検索して、検索条件を満たす屋根データを抽出する。
続くＳ１９０では、処理部１２は、検索結果をユーザ画面５に反映させて、処理をＳ１２０に戻す。具体的には、検索結果表示領域５３に検索結果一覧７を表示する。更に、検索によって抽出された屋根が写り込んでいる上空画像を用いた地図を地図表示領域５１に表示し、上空画像において検索結果に含まれる屋根が位置する部分を、強調表示する。この強調表示には、屋根データに含まれる屋根マスクの情報が用いられる。 At S180, the processing unit 12 searches the database 11 according to the input search conditions and extracts roof data that satisfies the search conditions.
In subsequent S190, the processing unit 12 reflects the search result on the user screen 5, and returns the process to S120. Specifically, the search result list 7 is displayed in the search result display area 53 . Furthermore, a map using an aerial image in which the roof extracted by the search is reflected is displayed in the map display area 51, and the portion of the aerial image where the roof included in the search results is located is highlighted. Information of the roof mask included in the roof data is used for this highlighting.

［２－２．データ生成処理］
管理画面８に表示されたメニューのうち、「エリアを指定する」が選択されたときに、処理部１２が実行するデータ生成処理を、図４のフローチャートを用いて説明する。データ生成処理は、データ生成部１２２としての機能を実現するための処理である。 [2-2. Data generation process]
Data generation processing executed by the processing unit 12 when "specify area" is selected from the menu displayed on the management screen 8 will be described with reference to the flowchart of FIG. The data generation processing is processing for realizing the function of the data generation unit 122 .

データ生成処理が開始されると、Ｓ２１０では、処理部１２は、エリア指定画面８ａをユーザ画面５に重畳して表示する。
エリア指定画面８ａは、図１０に示すように、地図表示領域８１と、地図の検索に用いる検索ボックス８２と、「ピンをクリア」ボタン８３と、「閉じる」ボタン８４と、「実行」ボタン８５とを備える。地図表示領域８１には、地図データサーバ２０から提供される地図が表示される。地図は、線図でもよいし上空画像でもよい。地図表示領域８１に表示される地図の範囲は、地図データサーバ２０が提供する機能を利用して、任意に設定することができる。 When the data generation process is started, the processing unit 12 superimposes the area designation screen 8a on the user screen 5 and displays it in S210.
As shown in FIG. 10, the area designation screen 8a includes a map display area 81, a search box 82 used for map search, a "clear pin" button 83, a "close" button 84, and a "execute" button 85. and A map provided by the map data server 20 is displayed in the map display area 81 . The map may be a diagram or an aerial image. The range of the map displayed in the map display area 81 can be arbitrarily set using the functions provided by the map data server 20 .

地図表示領域８１に表示された地図上の任意の地点がクリックされると、図１１に示すようにピンＰが表示される。地図上の任意の２地点をクリックすると、その２点を対角線上の頂点とする長方形の領域（以下、対象領域）ＴＡが表示される。 When an arbitrary point on the map displayed in the map display area 81 is clicked, a pin P is displayed as shown in FIG. If any two points on the map are clicked, a rectangular area (hereinafter referred to as target area) TA with the two points as vertices on a diagonal line is displayed.

「ピンをクリア」ボタン８３は、地図上に表示されたピンＰ及び対象領域ＴＡを消去する際に操作されるアイコンである。
「閉じる」ボタン８４は、エリア指定画面８ａを閉じる際に操作されるアイコンである。 The "clear pin" button 83 is an icon operated when deleting the pin P and the target area TA displayed on the map.
The "close" button 84 is an icon operated when closing the area designation screen 8a.

「実行」ボタン８５は、地図上に対象領域が表示されている状態で有効となり、対象領域の上空画像から屋根を抽出して屋根データを生成する処理を開始する際に操作されるアイコンである。 The "execute" button 85 is an icon that is activated when the target area is displayed on the map, and is operated when starting the process of extracting the roof from the aerial image of the target area and generating roof data. .

Ｓ２２０では、処理部１２は、エリア指定画面８ａにおいて「閉じる」ボタン８４が操作されたか否かを判定し、操作されていれば、エリア指定画面８ａを閉じて、データ生成処理を終了し、操作されていなければ、処理をＳ２３０に移行する。 At S220, the processing unit 12 determines whether or not the "close" button 84 has been operated on the area designation screen 8a. If not, the process proceeds to S230.

Ｓ２３０では、処理部１２は、対象領域ＴＡが指定されているか否かを判定し、対象領域が指定されていれば、処理をＳ２４０に移行し、対象領域が指定されていなければ、処理をＳ２６０に移行する。 In S230, the processing unit 12 determines whether or not the target area TA is specified. If the target area is specified, the process proceeds to S240. transition to

Ｓ２４０では、処理部１２は、対象領域ＴＡの位置を特定する領域特定データを取得する。領域特定データは、例えば、対象領域ＴＡの指定に用いた２つのピンＰが示す地図上の２地点を、緯度経度で示した位置データを用いる。 In S240, the processing unit 12 acquires area identification data that identifies the position of the target area TA. As the area specifying data, for example, position data indicating the latitude and longitude of two points on the map indicated by the two pins P used to specify the target area TA is used.

続くＳ２５０では、処理部１２は、Ｓ２４０で取得した領域特定データを保存すると共に、エリア指定画面８ａの上部に、領域特定データが示す２地点の位置データを表示して、処理をＳ２２０に戻す。 In subsequent S250, the processing unit 12 saves the area specifying data acquired in S240, displays the position data of the two points indicated by the area specifying data on the upper part of the area specifying screen 8a, and returns the process to S220.

Ｓ２６０では、処理部１２は、エリア指定画面８ａにおいて「実行」ボタン８５が操作されたか否かを判定し、操作されていれば処理をＳ２７０に移行し、操作されていなければ、処理をＳ２２０に戻す。 At S260, the processing section 12 determines whether or not the "execute" button 85 has been operated on the area designation screen 8a. return.

Ｓ２７０では、処理部１２は、対象領域ＴＡが指定済みであるか否かを判定し、指定済みであれば処理をＳ２８０に移行し、指定済みでなければ処理をＳ２２０に戻す。
Ｓ２８０では、処理部１２は、ＡＩ処理部１２３を利用して屋根分析データを生成する分析処理を実行して、処理をＳ２２０に戻す。なお、分析処理の実行中は、エリア指定画面８ａにおける「実行」ボタン８５の表示が、「実行中」と表示されてもよい。 In S270, the processing unit 12 determines whether or not the target area TA has been designated, and if it has been designated, the process proceeds to S280, and if it has not been designated, the process returns to S220.
In S280, the processing unit 12 uses the AI processing unit 123 to execute analysis processing for generating roof analysis data, and returns the processing to S220. Note that while the analysis process is being executed, the display of the "execute" button 85 on the area designation screen 8a may be displayed as "executing".

つまり、端末装置３０を操作するユーザは、エリア指定画面８ａ上で、地図上の任意の領域を対象領域ＴＡとして指定することができる。ユーザは、「ピンをクリア」ボタン８３を操作することで、既に指定されているピンＰ及び対象領域ＴＡを取り消すことができ、その結果、対象領域ＴＡの再指定を行うことができる。ユーザは、対象領域ＴＡが指定された状態で「実行」ボタン８５を操作することで、指定した対象領域ＴＡについての分析処理を、サービス提供サーバ１０に実行させることができる。また、ユーザは、「閉じる」ボタン８４を操作することで、分析処理を実行することなく、エリア指定画面８ａを閉じてユーザ画面５に戻ることができる。 That is, the user operating the terminal device 30 can designate any area on the map as the target area TA on the area designation screen 8a. By operating the "clear pin" button 83, the user can cancel the pin P and target area TA that have already been specified, and as a result, can re-specify the target area TA. The user can cause the service providing server 10 to execute analysis processing for the specified target area TA by operating the "execute" button 85 while the target area TA is specified. Further, by operating the "close" button 84, the user can close the area designation screen 8a and return to the user screen 5 without executing the analysis process.

［２－３．分析処理］
処理部１２が先のＳ２８０で実行する分析処理を、図５のフローチャートを用いて説明する。分析処理は、ＡＩ処理部１２３としての機能を実現するための処理である。 [2-3. Analysis processing]
The analysis processing executed by the processing unit 12 in S280 will be described with reference to the flowchart of FIG. Analysis processing is processing for realizing the function of the AI processing unit 123 .

分析処理が開始されると、Ｓ３１０にて、処理部１２は、先のＳ２５０で保存した対象領域ＴＡの位置データに基づき、対象領域ＴＡを含んだ所定ズームレベルのタイル画像を、地図データサーバ２０から取得する。ここで取得するタイル画像は、上空画像であり、ズームレベルは、例えば１８である。 When the analysis process is started, at S310, the processing unit 12 sends a tile image at a predetermined zoom level including the target area TA to the map data server 20 based on the position data of the target area TA saved at S250. Get from The tile image acquired here is a sky image, and the zoom level is 18, for example.

続くＳ３２０では、処理部１２は、Ｓ３１０で取得した１つ以上のタイル画像のうち、後述するＳ３３０～Ｓ３５０の処理が施されていない１つのタイル画像を選択する。以下、選択されたタイル画像を選択タイル画像という。 In subsequent S320, the processing unit 12 selects one tile image that has not been subjected to the processes of S330 to S350 (to be described later) from among the one or more tile images acquired in S310. The selected tile image is hereinafter referred to as a selected tile image.

続くＳ３３０では、処理部１２は、選択タイル画像を、ＡＩモデルに入力することによって、ＡＩモデルの出力である、屋根範囲、屋根確率、劣化度を取得する。
続くＳ３４０では、処理部１２は、ＡＩモデルの出力と、選択タイル画像に対応づけられた位置データ及びズームレベル等とに基づいて、屋根面積、屋根位置、屋根マスクを生成する。Ｓ３３０及びＳ３４０の処理により、選択タイル画像のタイル分析データが生成される。 In subsequent S330, the processing unit 12 inputs the selected tile image to the AI model to acquire the roof range, roof probability, and degree of deterioration, which are outputs of the AI model.
In S340, the processing unit 12 generates the roof area, roof position, and roof mask based on the output of the AI model, the position data associated with the selected tile image, the zoom level, and the like. The processing of S330 and S340 generates tile analysis data for the selected tile image.

続くＳ３５０では、処理部１２は、Ｓ３１０にて取得されたすべてのタイル画像について、Ｓ３３０～Ｓ３４０の処理を実施済みであるか否か、すなわち、すべてのタイル画像にＡＩモデルを適用したか否かを判定する。処理部１２は、Ｓ３５０にて肯定判定された場合、処理をＳ３６０に移行し、Ｓ３５０にて否定判定された場合、処理をＳ３２０に戻す。 In subsequent S350, the processing unit 12 determines whether or not the processing of S330 to S340 has been performed for all the tile images acquired in S310, that is, whether or not the AI model has been applied to all the tile images. judge. If the determination in S350 is affirmative, the processing unit 12 shifts the process to S360, and if the determination in S350 is negative, the process returns to S320.

Ｓ３６０では、処理部１２は、複数のタイル画像に渡って検出される同一の屋根を表す屋根領域について、タイル分析データを統合することで、屋根毎の屋根分析データを生成する。 In S360, the processing unit 12 generates roof analysis data for each roof by integrating tile analysis data for roof regions representing the same roof detected over a plurality of tile images.

続くＳ３７０では、処理部１２は、Ｓ３６０で生成された屋根毎に生成された屋根分析データのそれぞれに屋根ＩＤを付与し、所定形式のファイル（例えば、ＣＳＶファイル）にしてデータベース１１に登録し、分析処理を終了する。 In subsequent S370, the processing unit 12 assigns a roof ID to each of the roof analysis data generated for each roof generated in S360, converts the data into a file in a predetermined format (for example, a CSV file), and registers it in the database 11. End the analysis process.

［２－４．個別処理］
先のＳ１８０でのデータベース検索の結果、ユーザ画面５上に検索結果一覧７が表示されているときに、繰り返し実行される個別処理を、図６のフローチャートを用いて説明する。個別処理は、サービス提供部１２１としての機能の一部を実現する処理である。 [2-4. Individual processing]
Individual processing that is repeatedly executed when the search result list 7 is displayed on the user screen 5 as a result of the database search in S180 will be described with reference to the flowchart of FIG. Individual processing is processing that implements a part of the function of the service providing unit 121 .

個別処理が開始されると、Ｓ４１０では、処理部１２は、カテゴリ設定画面７ａにて建物カテゴリが選択されたか否かを判定し、選択されていれば処理をＳ４２０に移行し、選択されていなければ処理をＳ４３０に移行する。 When the individual processing is started, in S410, the processing unit 12 determines whether or not a building category has been selected on the category setting screen 7a. If so, the process proceeds to S430.

図１２に示すように、カテゴリ設定画面７ａは、検索結果一覧７における「カテゴリ選択」ボタン等が操作されると、検索結果一覧７に重畳して表示される。「カテゴリ選択」ボタンは、検索結果一覧７に表示されるそれぞれが１つの屋根データに対応した各項目に表示される。以下では、操作されたボタンが属する項目に対応づけられる屋根データを選択屋根データという。 As shown in FIG. 12, the category setting screen 7a is displayed superimposed on the search result list 7 when the "category selection" button or the like in the search result list 7 is operated. The "category selection" button is displayed for each item displayed in the search result list 7, each corresponding to one roof data. Roof data associated with the item to which the operated button belongs is hereinafter referred to as selected roof data.

カテゴリ設定画面７ａには、「ビル」「工場」「倉庫」「病院」「学校」「ホテル」といった建物カテゴリの名称がチェックボックスと共に表示される。また、カテゴリ設定画面７ａには、「変更」ボタン及び「閉じる」ボタンが表示される。そして、処理部１２は、カテゴリ設定画面７ａにおいて、いずれかのチェックボックスにチェックが入れられた状態で、「変更」ボタンが操作された場合に、建物カテゴリが選択されたと判定する。また、処理部１２は、カテゴリ設定画面７ａにおいて、「閉じる」ボタンが操作された場合に、建物カテゴリが選択されなかったと判定する。 On the category setting screen 7a, names of building categories such as "building", "factory", "warehouse", "hospital", "school", and "hotel" are displayed together with check boxes. A "change" button and a "close" button are also displayed on the category setting screen 7a. Then, the processing unit 12 determines that the building category has been selected when the "change" button is operated while any check box is checked on the category setting screen 7a. Further, the processing unit 12 determines that the building category has not been selected when the "close" button is operated on the category setting screen 7a.

図６に戻り、Ｓ４２０では、処理部１２は、Ｓ４１０にて選択された建物カテゴリを、選択屋根データに属する屋根付加データの一項目としてデータベース１１に記憶して、処理を一旦終了する。なお、選択屋根データについて、すでに建物カテゴリがデータベース１１に記憶されている場合は、新たに選択された建物カテゴリを上書きする。また、建物カテゴリが変更されたことにより、対象屋根データが検索条件を充足しなくなった場合、更新内容をユーザ画面５に反映させてもよい。具体的には、結果一覧画面から対象屋根データの項目を削除したり、対象屋根データに対応する地図上のマスク表示を消したりしてもよい。 Returning to FIG. 6, at S420, the processing unit 12 stores the building category selected at S410 in the database 11 as one item of additional roof data belonging to the selected roof data, and ends the process. If the building category for the selected roof data is already stored in the database 11, the newly selected building category is overwritten. Further, when the target roof data no longer satisfies the search conditions due to a change in the building category, the updated content may be reflected on the user screen 5 . Specifically, the item of the target roof data may be deleted from the result list screen, or the mask display on the map corresponding to the target roof data may be deleted.

Ｓ４３０では、処理部１２は、検索結果一覧７の「詳細を取得」ボタンが操作されたか否かを判定し、操作されていれば処理をＳ４４０に移行し、操作されていなければ、処理をＳ４６０に移行する。操作された「詳細を取得」ボタンに対応づけられる屋根データを、要求屋根データとする。 In S430, the processing unit 12 determines whether or not the "obtain details" button in the search result list 7 has been operated. If it has been operated, the process proceeds to S440. transition to The roof data associated with the operated "get details" button is set as the requested roof data.

Ｓ４４０では、処理部１２は、要求屋根データについて、不足している屋根付加データを、通信ネットワーク１００に接続された地図データサーバ２０や他の情報提供サーバから取得する。具体的には、要求屋根データの屋根分析データに含まれる屋根位置を用いて、Ｗｅｂ検索することで、屋根位置が示す地点に存在する建物について、建物関連データを取得する。 At S440, the processing unit 12 acquires missing additional roof data for the requested roof data from the map data server 20 connected to the communication network 100 or other information providing servers. Specifically, by performing a web search using the roof position included in the roof analysis data of the requested roof data, the building-related data is acquired for the building existing at the point indicated by the roof position.

続くＳ４５０では、処理部１２は、取得した建物関連データを、要求屋根データの屋根付加データとして、データベース１１に登録して、個別処理を一旦終了する。このとき、検索結果一覧７において、要求屋根データの項目に表示されていた「詳細を取得」ボタンの代わりに、データベース１１に登録された屋根付加データを表示させることで、データベース１１の更新内容を、検索結果一覧７に反映させてもよい。 In subsequent S450, the processing unit 12 registers the acquired building-related data in the database 11 as additional roof data of the requested roof data, and temporarily terminates the individual processing. At this time, in the search result list 7, by displaying the additional roof data registered in the database 11 instead of the "get details" button displayed in the requested roof data item, the updated contents of the database 11 can be obtained. , may be reflected in the search result list 7 .

Ｓ４６０では、処理部１２は、ユーザ画面５の地図表示領域５１において、屋根マスクの画像Ｍが表示されている部分に、ユーザによって操作されるカーソルが位置しているか否かを判定する。処理部１２は、屋根マスクの画像Ｍが表示されている部分にカーソルが位置すると判定した場合、処理をＳ４７０に移行し、カーソルが位置しないと判定した場合、処理を一旦終了する。 In S460, the processing unit 12 determines whether or not the cursor operated by the user is positioned in the portion where the image M of the roof mask is displayed in the map display area 51 of the user screen 5. If the processing unit 12 determines that the cursor is positioned at the portion where the roof mask image M is displayed, the processing proceeds to S470, and if it is determined that the cursor is not positioned, the processing ends.

Ｓ４７０では、処理部１２は、カーソルによって指定された屋根マスクの画像Ｍに対応する屋根データを指定屋根データとして、図１３に示すように、指定屋根データの内容が示されたポップアップ画面５ａを、カーソル付近に表示して、処理を一旦終了する。 In S470, the processing unit 12 sets the roof data corresponding to the roof mask image M designated by the cursor as designated roof data, and displays the pop-up screen 5a showing the contents of the designated roof data as shown in FIG. Display it near the cursor and terminate the process once.

つまり、検索後のユーザ画面５では、カテゴリの設定又は変更、屋根付加データの取得、地図表示領域５１に表示された地図上での屋根データの表示を行うことができるように構成されている。 In other words, the user screen 5 after retrieval is configured so that category setting or change, roof additional data acquisition, and roof data display on the map displayed in the map display area 51 can be performed.

［３．用語の対応］
本実施形態のニューラルネットが本開示における判別器に相当する。本実施形態のＡＩ処理部１２３としての機能を実現する分析処理のＳ３１０～Ｓ３６０が本開示における分析部に相当し、同じく分析処理のＳ３７０が本開示におけるデータベース生成部に相当する。本実施形態のサービス提供部１２１としての機能の一部を実現するサービス提供処理のＳ１７０～Ｓ１９０が本開示におけるデータ提供部に相当する。本実施形態のサービス提供部１２１としての機能の一部を実現する個別処理のＳ４３０～Ｓ４５０が本開示における付加データ取得部に相当する。本実施形態のデータベース１１に屋根分析データの一部として登録される屋根面積、屋根位置が、本開示における二次分析データに相当する。本実施形態におけるタイル画像に含まれ、他のタイル画像と共に同一の屋根を形成する屋根領域が、本開示における部分屋根領域に相当する。 [3. Correspondence of terms]
The neural network of this embodiment corresponds to the discriminator in the present disclosure. Analysis processing S310 to S360 for realizing the function of the AI processing unit 123 of the present embodiment corresponds to the analysis unit in the present disclosure, and similarly S370 in the analysis processing corresponds to the database generation unit in the present disclosure. S170 to S190 of the service providing process for realizing part of the functions of the service providing unit 121 of this embodiment correspond to the data providing unit in the present disclosure. S430 to S450 of the individual processing for realizing part of the functions of the service providing unit 121 of this embodiment correspond to the additional data acquiring unit in the present disclosure. The roof area and roof position registered as part of the roof analysis data in the database 11 of the present embodiment correspond to secondary analysis data in the present disclosure. A roof region included in a tile image in this embodiment and forming the same roof together with other tile images corresponds to a partial roof region in the present disclosure.

［４．効果］
以上詳述した実施形態によれば、以下の効果を奏する。
（４ａ）屋根修繕支援システム１では、通信ネットワーク１００を介して地図データサーバ２０から取得される上空画像から、ＡＩモデルを用いて、不特定多数の屋根について屋根分析データを生成し、屋根分析データを含む屋根データをデータベース１１に蓄積する。従って、屋根修繕の提案に必要な種々の情報を含む屋根データを、簡単かつ効率よく収集することができる。 [4. effect]
According to the embodiment detailed above, the following effects are obtained.
(4a) In the roof repair support system 1, the AI model is used to generate roof analysis data for an unspecified number of roofs from the aerial image acquired from the map data server 20 via the communication network 100, and the roof analysis data is stored in the database 11. Therefore, it is possible to simply and efficiently collect roof data including various information necessary for proposing roof repairs.

（４ｂ）屋根修繕支援システム１では、データベース１１に蓄積された屋根データを、地理的な条件や、屋根の種類、劣化具合等を指定して検索することができる。したがって、例えば、屋根修繕提案業務の営業対象となる地域毎に、潜在顧客のリストの生成、及び潜在顧客に対する屋根修繕の提案に必要な情報を、効率よく収集することができる。 (4b) In the roof repair support system 1, the roof data stored in the database 11 can be searched by designating geographical conditions, roof type, degree of deterioration, and the like. Therefore, for example, it is possible to efficiently collect the information necessary for generating a list of potential customers and proposing roof repairs to potential customers for each region where the roof repair proposal business is operated.

（４ｃ）屋根修繕支援システム１を用いることで、指定された建物の屋根の面積や劣化具合などの屋根の状況を簡単に把握することができる。
［５．他の実施形態］
以上、本開示の実施形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。 (4c) By using the roof repair support system 1, it is possible to easily grasp the condition of the roof of the designated building, such as the area of the roof and the degree of deterioration.
[5. Other embodiments]
Although the embodiments of the present disclosure have been described above, the present disclosure is not limited to the above-described embodiments, and various modifications can be made.

（５ａ）上記実施形態では、データベース１１と処理部１２とがサービス提供サーバ１０に一体に設けられているが、データベース１１と処理部１２とは、別体に設けられていてもよい。 (5a) In the above embodiment, the database 11 and the processing unit 12 are provided integrally with the service providing server 10, but the database 11 and the processing unit 12 may be provided separately.

（５ｂ）上記実施形態では、処理部１２が、屋根データを生成してデータベース１１に蓄積する機能と、データベース１１に蓄積された屋根データを検索してユーザに提供する機能とをいずれも有しているが、いずれか一方の機能だけを有していてもよい。 (5b) In the above embodiment, the processing unit 12 has both the function of generating roof data and storing it in the database 11 and the function of retrieving the roof data stored in the database 11 and providing it to the user. but may have only one of the functions.

（５ｃ）上記実施形態では、屋根付加データの一つである屋根のカテゴリを、カテゴリ設定画面７ａを用いて入力できるようにされているが、屋根カテゴリと同様に、屋根の材質を入力できるようにしてもよい。また、屋根カテゴリ、及び屋根の材質のデータの入力データは、画像と対応づけて記憶しておき、ＡＩの学習データとして用いて、ＡＩによってカテゴリや材質を判定できるように構成してもよい。 (5c) In the above embodiment, the roof category, which is one of the additional roof data, can be entered using the category setting screen 7a. can be Further, the input data of the roof category and roof material data may be stored in association with the image and used as learning data for AI so that the category and material can be determined by AI.

（５ｄ）上記実施形態では、屋根分析データの屋根位置が緯度経度で表されているが、緯度経度に加えて高さを示す情報が含まれていてもよい。
（５ｅ）上記実施形態における１つの構成要素が有する複数の機能を、複数の構成要素によって実現したり、１つの構成要素が有する１つの機能を、複数の構成要素によって実現したりしてもよい。また、複数の構成要素が有する複数の機能を、１つの構成要素によって実現したり、複数の構成要素によって実現される１つの機能を、１つの構成要素によって実現したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換してもよい。 (5d) In the above embodiment, the roof position of the roof analysis data is represented by latitude and longitude, but information indicating height may be included in addition to latitude and longitude.
(5e) A plurality of functions possessed by one component in the above embodiment may be realized by a plurality of components, or a function possessed by one component may be realized by a plurality of components. . Also, a plurality of functions possessed by a plurality of components may be realized by a single component, or a function realized by a plurality of components may be realized by a single component. Also, part of the configuration of the above embodiment may be omitted. Moreover, at least part of the configuration of the above embodiment may be added or replaced with respect to the configuration of the other above embodiment.

［６．本明細書が開示する技術思想］
［項目１］
上空から地上を撮影した上空画像を取得し、機械学習された判別器を用いて、前記上空画像から、屋根が撮影されている屋根領域の範囲を表す屋根範囲画像、前記屋根領域が実際に屋根である確率を表す屋根確率、及び前記屋根領域の劣化具合を表す劣化度を含む屋根分析データを生成するように構成された分析部（１２３：Ｓ３１０～Ｓ３７０）と、
前記分析部によって生成された前記屋根領域のそれぞれについて、前記屋根分析データを含む屋根データを、データベース（１１）に蓄積するように構成されたデータベース生成部（１２３：Ｓ３８０）と、
屋根の検索に用いる検索条件の入力を受け付けて、前記検索条件を満たす前記屋根データを前記データベースから読み出して出力するように構成されたデータ提供部（１２１：Ｓ１７０～Ｓ１９０）と、
を備える屋根修繕支援システム。 [6. Technical Ideas Disclosed by the Present Specification]
[Item 1]
An aerial image obtained by photographing the ground from the sky is acquired, and a roof range image representing the range of the roof area where the roof is photographed is obtained from the aerial image using a machine-learned discriminator, and the roof area is the actual roof. an analysis unit (123: S310 to S370) configured to generate roof analysis data including a roof probability representing the probability that the roof area is
a database generation unit (123: S380) configured to store roof data, including the roof analysis data, in a database (11) for each of the roof regions generated by the analysis unit;
a data providing unit (121: S170 to S190) configured to receive an input of a search condition used to search for a roof, read out from the database the roof data that satisfies the search condition, and output the roof data;
roof repair support system.

［項目２］
項目１に記載の屋根修繕支援システムであって、
前記屋根分析データには、前記判別器によって抽出される情報、前記上空画像の縮尺率、及び前記上空画像中の各地点の位置データを用いて算出される二次分析データを含み、
前記二次分析データには、前記屋根領域の面積を表す屋根面積、及び前記屋根領域の位置を表す屋根位置のうち少なくとも１つが含まれる、
屋根修繕支援システム。 [Item 2]
The roof repair support system according to item 1,
The roof analysis data includes secondary analysis data calculated using the information extracted by the discriminator, the scale of the sky image, and the position data of each point in the sky image,
The secondary analysis data includes at least one of roof area representing the area of the roof region and roof position representing the position of the roof region.
Roof repair support system.

［項目３］
項目１または項目２に記載の屋根修繕支援システムであって、
前記上空画像は、複数のタイル画像で構成され、
前記分析部は、前記タイル画像のそれぞれについて、前記判別器を適用し、前記複数のタイル画像に渡って同一の屋根に属する領域である部分屋根領域が抽出された場合、前記部分屋根領域を統合することで前記屋根領域を生成するように構成された
屋根修繕支援システム。 [Item 3]
The roof repair support system according to item 1 or item 2,
The sky image is composed of a plurality of tile images,
The analysis unit applies the discriminator to each of the tile images, and if partial roof regions belonging to the same roof are extracted across the plurality of tile images, the analysis unit integrates the partial roof regions. a roof repair support system configured to generate the roof area by

［項目４］
項目１から項目３までのいずれか１項に記載の屋根修繕支援システムであって、
前記屋根領域が属する建物の建物名、前記建物の住所、前記建物の所有者又は管理者の連絡先のうち少なくとも一つを含む付加データを取得するように構成された付加データ取得部（１２１：Ｓ４３０～Ｓ４５０）を更に備え、
前記データベース生成部は、前記付加データを前記屋根データの一部として前記データベースに記憶させるように構成された、
屋根修繕支援システム。 [Item 4]
The roof repair support system according to any one of items 1 to 3,
an additional data acquisition unit (121: S430 to S450) is further provided,
The database generation unit is configured to store the additional data in the database as part of the roof data.
Roof repair support system.

［項目５］
項目４に記載の屋根修繕支援システムであって、
前記付加データは、前記建物の種類を表す建物カテゴリを更に含み
前記データ提供部は、前記建物カテゴリを指定する入力を受け付け、入力された前記建物カテゴリに従って、出力対象となる前記屋根データを絞り込むように構成された、
屋根修繕支援システム。 [Item 5]
The roof repair support system according to item 4,
The additional data further includes a building category representing the type of the building, and the data providing unit receives an input designating the building category, and narrows down the roof data to be output according to the input building category. configured to
Roof repair support system.

［項目６］
項目１から項目５までのいずれか１項に記載の屋根修繕支援システムであって、
前記データ提供部は、出力対象となる前記屋根データをファイル形式で出力するように構成された、
屋根修繕支援システム。 [Item 6]
The roof repair support system according to any one of items 1 to 5,
The data providing unit is configured to output the roof data to be output in a file format,
Roof repair support system.

［項目７］
項目１から項目６までのいずれか１項に記載の屋根修繕支援システムであって、
前記データ提供部は、出力対象となる前記屋根データを、表示装置の画面に表示するように構成された、
屋根修繕支援システム。 [Item 7]
The roof repair support system according to any one of items 1 to 6,
wherein the data providing unit is configured to display the roof data to be output on a screen of a display device;
Roof repair support system.

［項目８］
項目７に記載の屋根修繕支援システムであって、
前記データ提供部は、前記表示装置の画面上で前記上空画像を表示し、該上空画像にて前記出力対象となる前記屋根データに対応する建物の屋根を強調表示するマスク画像を、前記上空画像に重畳表示し、前記表示装置の画面上で、前記マスク画像が指定された場合、指定された前記マスク画像に対応する前記屋根データを、前記表示装置の画面上にポップアップ表示するように構成された、
屋根修繕支援システム。 [Item 8]
The roof repair support system according to item 7,
The data providing unit displays the sky image on the screen of the display device, and generates a mask image highlighting the roof of the building corresponding to the roof data to be output in the sky image. and when the mask image is specified on the screen of the display device, the roof data corresponding to the specified mask image is displayed as a pop-up on the screen of the display device. Ta,
Roof repair support system.

１…屋根修繕支援システム、１０…サービス提供サーバ、１１…データベース、１２…処理部、１３…通信部、２０…地図データサーバ、３０…端末装置、１００…通信ネットワーク、１２１…サービス提供部、１２２…データ生成部、１２３…ＡＩ処理部。 Reference Signs List 1 Roof repair support system 10 Service providing server 11 Database 12 Processing unit 13 Communication unit 20 Map data server 30 Terminal device 100 Communication network 121 Service providing unit 122 ... data generation unit, 123 ... AI processing unit.

Claims

An aerial image obtained by photographing the ground from the sky is acquired, and a roof range image representing the range of the roof area where the roof is photographed is obtained from the aerial image using a machine-learned discriminator, and the roof area is the actual roof. an analysis unit (123: S310 to S370) configured to generate roof analysis data including a roof probability representing the probability that the roof area is
a database generation unit (123: S380) configured to store roof data, including the roof analysis data, in a database (11) for each of the roof regions generated by the analysis unit;
a data providing unit (121: S170 to S190) configured to receive an input of a search condition used to search for a roof, read out from the database the roof data that satisfies the search condition, and output the roof data;
with
The roof analysis data includes secondary analysis data calculated using the information extracted by the discriminator, the scale of the sky image, and the position data of each point in the sky image,
The secondary analysis data includes at least one of roof area representing the area of the roof region and roof position representing the position of the roof region.
Roof repair support system.

The roof repair support system according to claim 1,
The sky image is composed of a plurality of tile images,
The analysis unit applies the discriminator to each of the tile images, and if partial roof regions belonging to the same roof are extracted across the plurality of tile images, the analysis unit integrates the partial roof regions. a roof repair support system configured to generate the roof area by

The roof repair support system according to claim 1,
an additional data acquisition unit (121: S430 to S450) is further provided,
The database generation unit is configured to store the additional data in the database as part of the roof data.
Roof repair support system.

The roof repair support system according to claim 3 ,
The additional data further includes a building category representing the type of the building, and the data providing unit receives an input designating the building category, and narrows down the roof data to be output according to the input building category. configured to
Roof repair support system.

The roof repair support system according to claim 1,
The data providing unit is configured to output the roof data to be output in a file format,
Roof repair support system.

The roof repair support system according to claim 1,
wherein the data providing unit is configured to display the roof data to be output on a screen of a display device;
Roof repair support system.

The roof repair support system according to claim 6 ,
The data providing unit displays the sky image on the screen of the display device, and generates a mask image highlighting the roof of the building corresponding to the roof data to be output in the sky image. and when the mask image is specified on the screen of the display device, the roof data corresponding to the specified mask image is displayed as a pop-up on the screen of the display device. Ta,
Roof repair support system.

In the roof repair support system constructed using a computer,
The analysis unit provided in the computer acquires an aerial image of the ground photographed from the sky, and uses a machine-learned classifier to obtain a roof range image representing the range of the roof area where the roof is photographed from the aerial image. , generating roof analysis data including a roof probability representing the probability that the roof area is actually a roof, and a degree of deterioration representing the degree of deterioration of the roof area (S310 to S370);
a database generator included in the computer storing roof data, including the roof analysis data, in a database for each of the roof regions (S380);
a data providing unit included in the computer receiving input of search conditions used for searching for roofs, and reading and outputting the roof data satisfying the search conditions from the database (S170 to S190);
including
The roof analysis data includes secondary analysis data calculated using the information extracted by the discriminator, the scale of the sky image, and the position data of each point in the sky image,
The secondary analysis data includes at least one of roof area representing the area of the roof region and roof position representing the position of the roof region.
Roof repair support method.