JP2017003306A - Simulation system, material parameter setting method and material parameter setting device - Google Patents

Simulation system, material parameter setting method and material parameter setting device Download PDF

Info

Publication number
JP2017003306A
JP2017003306A JP2015114752A JP2015114752A JP2017003306A JP 2017003306 A JP2017003306 A JP 2017003306A JP 2015114752 A JP2015114752 A JP 2015114752A JP 2015114752 A JP2015114752 A JP 2015114752A JP 2017003306 A JP2017003306 A JP 2017003306A
Authority
JP
Japan
Prior art keywords
objects
dimensional
measurement
sound
map
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015114752A
Other languages
Japanese (ja)
Other versions
JP6604038B2 (en
Inventor
智明 熊谷
Tomoaki Kumagai
智明 熊谷
カルロス トシノリ イシイ
Toshinori Ishi Carlos
カルロス トシノリ イシイ
敦志 渡辺
Atsushi Watanabe
敦志 渡辺
晃朗 長谷川
Akio Hasegawa
晃朗 長谷川
良男 武内
Yoshio Takeuchi
良男 武内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ATR Advanced Telecommunications Research Institute International
Original Assignee
ATR Advanced Telecommunications Research Institute International
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ATR Advanced Telecommunications Research Institute International filed Critical ATR Advanced Telecommunications Research Institute International
Priority to JP2015114752A priority Critical patent/JP6604038B2/en
Publication of JP2017003306A publication Critical patent/JP2017003306A/en
Application granted granted Critical
Publication of JP6604038B2 publication Critical patent/JP6604038B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

PROBLEM TO BE SOLVED: To provide a simulation system, a material parameter setting method and a material parameter setting device.SOLUTION: A simulation system 100 comprises a sound collecting robot 12 and a first measuring robot 14. The sound collecting robot 12 collects striking sound when a worker strikes each object, and transmits measured sound data associated with a striking position to a central control unit 10. The first measuring robot 14 acquires a three-dimensional shape of each object and transmits it to the central control unit 10 along with an acquisition position. The central control unit 10 estimates a material of each object on the basis of each measured sound data, and creates a three-dimensional environmental map that shows positions and the like. of multiple objects provided in a three-dimensional space, on the basis of the three-dimensional shape of each object and the like. And, the unit creates a material parameter table where a material of each object is associated and a material parameter is set, with respect to a plane surface of each object included in the three-dimensional environmental map.SELECTED DRAWING: Figure 1

Description

この発明は、シミュレーションシステム、材質パラメータ設定方法および材質パラメータ設定装置に関し、特にたとえば、無線通信が行われる空間で利用可能な、シミュレーションシステム、材質パラメータ設定方法および材質パラメータ設定装置に関する。   The present invention relates to a simulation system, a material parameter setting method, and a material parameter setting device, and more particularly to a simulation system, a material parameter setting method, and a material parameter setting device that can be used in a space where wireless communication is performed.

背景技術の一例が特許文献1に開示されている。この特許文献1では、理想屋内空間構成体は、オフィス等の現実屋内空間を構成する際に適用される建築材料とそれぞれ等価の可換材を組み合わせてなり、かつその外周面の全領域に電波吸収体が密集囲繞配置されている。また、このような理想屋内空間構成体の内部には、各種電波通信特性測定用の送信アンテナおよび受信アンテナが配置されると共に、オフィス等の現実屋内空間において配置される机、椅子および間仕切壁などの各種構造物が配置される。この状態において、電波伝搬特性などの各種電波通信特性を測定することで、各種構造物の種別、材質および配置場所により決定づけられる当該理想屋内空間の電磁環境を評価することが出来る。   An example of background art is disclosed in Patent Document 1. In this Patent Document 1, an ideal indoor space structure is a combination of building materials applied to construct a real indoor space such as an office, and a commutative material that is equivalent to each other. Absorbers are arranged in a dense surrounding. In addition, a transmitting antenna and a receiving antenna for measuring various radio wave communication characteristics are arranged inside such an ideal indoor space structure, and a desk, a chair, a partition wall, and the like arranged in a real indoor space such as an office Various structures are arranged. In this state, by measuring various radio wave communication characteristics such as radio wave propagation characteristics, it is possible to evaluate the electromagnetic environment of the ideal indoor space determined by the type, material, and location of various structures.

特開平11-231003号公報[G01R 29/08, H04B 17/00]JP 11-231003 [G01R 29/08, H04B 17/00]

ところが、特許文献1では、現実屋内空間が広い場合、対応する理想屋内空間を作成するためには膨大な費用がかかってしまう。また、現実屋内空間には、理想屋内空間とは異なる構造物が配置されることがあり、現実屋内空間の電磁環境は理想屋内空間の電磁環境と異なる可能性が高い。   However, in Patent Document 1, when the actual indoor space is wide, it takes a huge amount of money to create the corresponding ideal indoor space. Further, a structure different from the ideal indoor space may be arranged in the real indoor space, and the electromagnetic environment in the real indoor space is likely to be different from the electromagnetic environment in the ideal indoor space.

それゆえに、この発明の主たる目的は、新規な、シミュレーションシステム、材質パラメータ設定方法および材質パラメータ設定装置を提供することである。   Therefore, a main object of the present invention is to provide a novel simulation system, material parameter setting method, and material parameter setting device.

この発明の他の目的は、空間の電波環境を容易にシミュレーションすることが出来る、シミュレーションシステム、材質パラメータ設定方法および材質パラメータ設定装置を提供することである。   Another object of the present invention is to provide a simulation system, a material parameter setting method, and a material parameter setting device capable of easily simulating a radio wave environment in space.

この発明は、上記の課題を解決するために、以下の構成を採用した。なお、括弧内の参照符号および補足説明等は、この発明の理解を助けるために記述する実施形態との対応関係を示したものであって、この発明を何ら限定するものではない。   The present invention employs the following configuration in order to solve the above problems. The reference numerals in parentheses, supplementary explanations, and the like indicate the corresponding relationship with the embodiments described in order to help understanding of the present invention, and do not limit the present invention.

第1の発明は、3次元空間に設けられた複数の物の3次元形状および当該複数の物の位置を示す3次元地図を記憶する記憶部、複数の物のそれぞれから伝わる音を計測音として集音する移動可能な集音装置、集音装置によって集音された計測音および計測に関する位置を記憶する記憶手段、記憶手段によって記憶されたそれぞれの計測音に基づいて、複数の物の材質を推定する推定手段、推定手段によって推定された複数の物の材質を、当該複数の物のそれぞれに対応付ける対応付け手段、および対応付け手段によって材質が対応付けられた複数の物のそれぞれに材質パラメータを設定する設定手段を備える、シミュレーションシステムである。   The first invention is a storage unit for storing a three-dimensional shape of a plurality of objects provided in a three-dimensional space and a three-dimensional map indicating the positions of the plurality of objects, and sounds transmitted from the plurality of objects as measurement sounds. A movable sound collector that collects sound, a storage device that stores measurement sound collected by the sound collector and a position related to measurement, and a plurality of materials based on each measurement sound stored by the storage device The estimating means for estimating, the associating means for associating the materials of the plurality of objects estimated by the estimating means with each of the plurality of objects, and the material parameters for each of the plurality of objects whose materials are associated by the associating means It is a simulation system provided with the setting means to set.

第1の発明では、シミュレーションシステム(100:実施例において対応する部分を例示する参照符号。以下、同じ。)の記憶部(154)はたとえばRAMなどであり、3次元空間に設けられた複数の物の3次元形状および当該複数の物の位置を示す3次元地図(3次元環境地図)を記憶する。物には、物および物の構成部材が含まれ、たとえば物が窓である場合、その窓にはガラスおよび窓枠などの構成部材が含まれる。また、たとえば3次元空間には、床、天井、壁、窓、OA機器、棚、ロッカー、机および椅子などの複数の物が設けられる。移動可能な集音装置(12)は、たとえば集音ロボットとも言われ、作業者に追従し、複数の物のそれぞれから伝わる音を計測音として集音する。記憶手段(150,S3)は、たとえば集音された計測音に計測に関する位置(打撃位置および計測位置)が関連付けられた計測音データを記憶する。推定手段(150,S41)は、たとえば機械学習手法によって作成された判別モデルに、記憶されたそれぞれの計測音に関する情報(メル周波数ケプストラム係数または反射率)を入力することで、複数の物の材質を推定する。対応付け手段(150,S43)は、たとえば複数の物の位置および計測音と共に記憶された計測に関する位置に基づいて、推定された複数の物の材質を当該複数の物のそれぞれに対応付ける。そして、設定手段(150,S45)は、たとえば材質パラメータが記憶されているデータベース(160)から材質パラメータを読み出すことで、材質が対応付けられた複数の物のそれぞれに材質パラメータを設定する。   In the first invention, the storage unit (154) of the simulation system (100: reference numerals exemplifying corresponding parts in the embodiment, hereinafter the same) is, for example, a RAM or the like, and includes a plurality of units provided in a three-dimensional space. A three-dimensional map (three-dimensional environment map) indicating the three-dimensional shape of the object and the positions of the plurality of objects is stored. An object includes an object and a component of the object. For example, when the object is a window, the window includes a component such as glass and a window frame. For example, in a three-dimensional space, a plurality of objects such as a floor, a ceiling, a wall, a window, an OA device, a shelf, a locker, a desk, and a chair are provided. The movable sound collecting device (12) is also called, for example, a sound collecting robot, and follows a worker and collects sound transmitted from each of a plurality of objects as measurement sound. A memory | storage means (150, S3) memorize | stores the measurement sound data by which the position (battering position and measurement position) regarding a measurement was linked | related with the collected measurement sound, for example. The estimation means (150, S41), for example, inputs information (mel frequency cepstrum coefficient or reflectance) about each measured sound stored in a discriminant model created by a machine learning technique, so that the material of a plurality of objects is obtained. Is estimated. The association means (150, S43) associates the estimated materials of the plurality of objects with each of the plurality of objects based on, for example, the positions of the plurality of objects and the position relating to the measurement stored together with the measurement sound. And a setting means (150, S45) sets a material parameter to each of the several thing with which the material was matched by reading a material parameter from the database (160) in which the material parameter is memorize | stored, for example.

第1の発明によれば、3次元地図および設定された材質パラメータを利用することで、3次元空間の電波環境を容易にシミュレーションすることが出来る。   According to the first invention, the radio wave environment in the three-dimensional space can be easily simulated by using the three-dimensional map and the set material parameters.

第2の発明は、第1の発明に従属し、集音装置は、自律移動するための地図および地図に基づいて3次元空間を2次元的または3次元的に自律移動するための移動機構を含む。   A second invention is dependent on the first invention, and the sound collecting device includes a map for autonomously moving and a moving mechanism for autonomously moving in a three-dimensional space in a three-dimensional space based on the map. Including.

第2の発明では、たとえば集音装置のメモリ(44)には、3次元空間の平面図または自己位置推定用地図が記憶されている。たとえば、集音装置のプロセッサ(40)は、平面図または自己位置推定用地図を参照して2つの車輪を有する移動機構(52)を制御することで、集音装置を3次元空間の中で2次元的に自律移動させる。   In the second invention, for example, the memory (44) of the sound collector stores a plan view of a three-dimensional space or a map for self-position estimation. For example, the processor (40) of the sound collector controls the moving mechanism (52) having two wheels with reference to a plan view or a map for self-position estimation, so that the sound collector is placed in a three-dimensional space. Move autonomously in two dimensions.

第3の発明は、第1の発明または第2の発明に従属し、3次元地図および複数の物のそれぞれに設定された材質パラメータに基づいて、3次元空間の電波環境をシミュレーションするシミュレーション手段、シミュレーション手段によるシミュレーション結果に基づいて、3次元空間の電波環境を示す情報を生成する生成手段、および生成手段によって生成された3次元空間の電波環境を示す情報を出力する出力手段をさらに備える。   A third invention is dependent on the first invention or the second invention, and a simulation means for simulating a radio wave environment in a three-dimensional space based on a material parameter set in each of a three-dimensional map and a plurality of objects, The apparatus further includes a generating unit that generates information indicating the radio wave environment of the three-dimensional space based on a simulation result by the simulation unit, and an output unit that outputs information indicating the radio wave environment of the three-dimensional space generated by the generating unit.

第3の発明では、シミュレーション手段(150,S63)は、たとえば3次元地図および複数の物のそれぞれに設定された材質パラメータに基づいて作成された材質パラメータ地図に基づいて、たとえば3次元レイトレース法などを利用して3次元空間の電波環境をシミュレーションする。生成手段(150,S79)は、シミュレーション結果に基づいて、3次元空間の電波環境を示す情報を生成する。出力手段(150,S81)は、たとえばディスプレイを含み、3次元地図に対して電波環境を示す情報を重ね合わせたものを出力(表示)する。   In the third invention, the simulation means (150, S63) is, for example, based on a material parameter map created based on a material parameter set for each of a three-dimensional map and a plurality of objects, for example, a three-dimensional ray tracing method. Etc. are used to simulate the radio wave environment in a three-dimensional space. The generation means (150, S79) generates information indicating the radio wave environment of the three-dimensional space based on the simulation result. The output means (150, S81) includes, for example, a display, and outputs (displays) information obtained by superimposing information indicating the radio wave environment on the three-dimensional map.

第3の発明によれば、3次元空間の電波環境が出力されるため、たとえばシミュレーションシステムの管理者は3次元空間の電波環境を適切に把握することが出来る。また、出力された電波環境に基づいて、物および基地局の適切な配置などを検討することが可能になる。   According to the third aspect of the invention, since the radio wave environment in the three-dimensional space is output, for example, the administrator of the simulation system can appropriately grasp the radio wave environment in the three-dimensional space. In addition, based on the output radio wave environment, it is possible to consider appropriate arrangement of objects and base stations.

第4の発明は、第3の発明に従属し、3次元空間における複数の計測点の電波強度を計測する移動可能な電波強度計測装置、3次元空間における電波強度の実測値と、シミュレーション手段によるシミュレーション結果に基づく電波強度の推定値とが一致しないとき、設定手段によって設定された材質パラメータを変更する変更手段をさらに備え、シミュレーション手段は、変更手段によって材質パラメータが変更された状態で、3次元空間の電波環境を再びシミュレーションする。   A fourth invention is dependent on the third invention, and is a movable radio wave intensity measuring device that measures radio wave intensity at a plurality of measurement points in a three-dimensional space. When the estimated value of the radio field intensity based on the simulation result does not match, the simulation unit further includes a changing unit that changes the material parameter set by the setting unit, and the simulation unit changes the three-dimensional state with the material parameter changed by the changing unit. Simulate the radio wave environment in space again.

第4の発明では、移動可能な電波強度計測装置(16)は、たとえば第2計測ロボットとも言われ、送信ノードから送信される計測用電波の電波強度を複数の計測点で計測する。変更手段(150,S73)は、3次元空間における電波強度の実測値と、シミュレーション手段によるシミュレーション結果に基づく電波強度の推定値とが一致しないとき、設定された材質パラメータを変更する。そして、シミュレーション手段は、たとえば電波強度の推定値と実測値とが一致または略一致するまで、3次元空間の電波環境のシミュレーションを繰り返す。   In the fourth invention, the movable radio wave intensity measuring device (16) is also referred to as, for example, a second measurement robot, and measures the radio wave intensity of the measurement radio wave transmitted from the transmission node at a plurality of measurement points. The changing means (150, S73) changes the set material parameter when the measured value of the radio wave intensity in the three-dimensional space does not match the estimated value of the radio wave intensity based on the simulation result by the simulation means. Then, the simulation means repeats the simulation of the radio wave environment in the three-dimensional space until, for example, the estimated value of the radio wave intensity and the actually measured value match or substantially match.

第4の発明によれば、電波強度の推定値と実測値とを利用して材質パラメータを更新することで、シミュレーションの精度をより高めることが出来る。   According to the fourth invention, the accuracy of the simulation can be further improved by updating the material parameter using the estimated value and the actual measurement value of the radio field intensity.

第5の発明は、第4の発明に従属し、生成手段は、3次元空間における電波強度の実測値と、シミュレーション手段によるシミュレーション結果に基づく電波強度の推定値とが一致または略一致したとき、当該シミュレーション結果に基づいて、3次元空間の電波環境を示す情報を生成する。   A fifth invention is dependent on the fourth invention, and the generating means has the measured value of the radio wave intensity in the three-dimensional space and the estimated value of the radio wave intensity based on the simulation result by the simulation means match or substantially match, Information indicating the radio wave environment of the three-dimensional space is generated based on the simulation result.

第5の発明では、3次元空間における電波強度の実測値と、シミュレーション手段によるシミュレーション結果に基づく電波強度の推定値とが一致または略一致すると、生成手段は当該シミュレーション結果に基づいて3次元空間の電波環境を示す情報を生成する。   In the fifth invention, when the actually measured value of the radio field intensity in the three-dimensional space and the estimated value of the radio field intensity based on the simulation result by the simulation unit match or substantially match, the generation unit stores the three-dimensional space based on the simulation result. Information indicating the radio wave environment is generated.

第5の発明によれば、推定値と実測値とが一致または略一致するまで、材質パラメータが何度も更新されるため、シミュレーションの精度を高く保つことが出来る。   According to the fifth aspect, since the material parameter is updated many times until the estimated value and the actually measured value match or substantially match, the simulation accuracy can be kept high.

第6の発明は、第4の発明または第5の発明に従属し、電波強度計測装置は、自律移動するための地図および地図に基づいて3次元空間を2次元的または3次元的に自律移動するための移動機構を含む。   A sixth invention is dependent on the fourth invention or the fifth invention, and the radio wave intensity measuring device autonomously moves in a three-dimensional space two-dimensionally or three-dimensionally in a three-dimensional space based on a map for autonomous movement and the map Including a moving mechanism.

第6の発明では、たとえば電波強度計測装置のメモリ(124)には、3次元空間の平面図または自己位置推定用地図が記憶されている。たとえば、電波強度計測装置のプロセッサ(120)は、平面図または自己位置推定用地図を参照して2つの車輪を有する移動機構(132)を制御することで、電波強度計測装置を3次元空間の中で2次元的に自律移動させる。   In the sixth aspect of the invention, for example, the memory (124) of the radio wave intensity measuring device stores a plan view of a three-dimensional space or a self-position estimation map. For example, the processor (120) of the radio wave intensity measuring device controls the moving mechanism (132) having two wheels with reference to a plan view or a map for self-position estimation, so that the radio wave intensity measuring device becomes a three-dimensional space. It moves autonomously in two dimensions.

第7の発明は、第1の発明または第6の発明に従属し、複数の物の3次元形状を取得する移動可能な3次元形状取得装置、3次元形状取得装置によって取得された複数の物の3次元形状および取得位置を記憶する3次元形状記憶手段、3次元形状記憶手段によって記憶された複数の物の3次元形状から平面を検出する検出手段および検出手段によって検出された複数の物の3次元形状の平面および当該複数の物の3次元形状の取得位置に基づいて、3次元空間に設けられた複数の物の3次元形状および当該複数の物の位置を示す3次元地図を作成する3次元地図作成手段をさらに備え、記憶部は、3次元地図作成手段によって作成された3次元地図を記憶する。   A seventh invention is dependent on the first invention or the sixth invention, and a plurality of objects acquired by a movable three-dimensional shape acquisition device and a three-dimensional shape acquisition device that acquire three-dimensional shapes of a plurality of objects The three-dimensional shape storage means for storing the three-dimensional shape and the acquisition position of the plurality of objects detected by the detection means and the detection means for detecting a plane from the three-dimensional shape of the plurality of objects stored by the three-dimensional shape storage means Based on the plane of the three-dimensional shape and the acquisition position of the three-dimensional shape of the plurality of objects, a three-dimensional map indicating the three-dimensional shape of the plurality of objects provided in the three-dimensional space and the positions of the plurality of objects is created. 3D map creation means is further provided, and the storage unit stores the 3D map created by the 3D map creation means.

第7の発明では、移動可能な3次元形状取得装置(14)は、たとえば第1計測ロボットとも言われ、3次元LRF(74)を利用して、3次元空間に設けられた複数の物の3次元形状を取得する。3次元形状記憶手段(150,S7)は、たとえば取得された複数の物の3次元形状に当該物の位置3次元形状が取得されたときの取得位置を対応付けて記憶する。検出手段(150,S33)は、たとえば複数の物の3次元形状から3次元モデルを作成し、その3次元モデルから複数の物のそれぞれに対応する各平面を検出する。3次元地図作成手段(150,S35)は、検出された複数の物の3次元形状の平面および複数の物の3次元形状の取得位置に基づいて、3次元地図を作成する。そして、記憶部は、このようにして作成された3次元地図を記憶する。   In the seventh invention, the movable three-dimensional shape acquisition device (14) is also referred to as a first measurement robot, for example, and uses a three-dimensional LRF (74) for a plurality of objects provided in a three-dimensional space. Acquire a three-dimensional shape. The three-dimensional shape storage means (150, S7) stores, for example, the acquired three-dimensional shape of a plurality of objects in association with the acquired position when the three-dimensional shape of the object is acquired. The detection means (150, S33) creates, for example, a three-dimensional model from a three-dimensional shape of a plurality of objects, and detects each plane corresponding to each of the plurality of objects from the three-dimensional model. The three-dimensional map creating means (150, S35) creates a three-dimensional map based on the detected planes of the three-dimensional shapes of the plurality of objects and the acquisition positions of the three-dimensional shapes of the plurality of objects. The storage unit stores the three-dimensional map created in this way.

第7の発明によれば、3次元空間に設けられている複数の物を考慮して3次元地図を作成することが出来る。そのため、電波伝搬のシミュレーションには3次元空間内に設けられた複数の物が考慮されるため、シミュレーションの精度が向上する。   According to the seventh invention, it is possible to create a three-dimensional map in consideration of a plurality of objects provided in the three-dimensional space. Therefore, the radio wave propagation simulation considers a plurality of objects provided in the three-dimensional space, so that the accuracy of the simulation is improved.

第8の発明は、第7の発明に従属し、3次元形状取得装置は、自律移動するための地図および地図に基づいて3次元空間を2次元的または3次元的に自律移動するための移動機構を含む。   An eighth invention is according to the seventh invention, wherein the three-dimensional shape acquisition device moves autonomously in a two-dimensional or three-dimensional manner in a three-dimensional space based on a map for autonomous movement and a map. Including mechanism.

第8の発明では、たとえば3次元形状取得装置のメモリ(84)には、3次元空間の平面図または自己位置推定用地図が記憶されている。たとえば、3次元形状取得装置のプロセッサ(80)は、平面図または自己位置推定用地図を参照して2つの車輪を有する移動機構(90)を制御することで、3次元形状取得装置を3次元空間の中で2次元的に自律移動させる。   In the eighth invention, for example, the memory (84) of the three-dimensional shape acquisition apparatus stores a plan view of the three-dimensional space or a map for self-position estimation. For example, the processor (80) of the three-dimensional shape acquisition device controls the moving mechanism (90) having two wheels with reference to the plan view or the self-position estimation map, thereby changing the three-dimensional shape acquisition device to the three-dimensional shape. Move autonomously in space in two dimensions.

第9の発明は、第1の発明ないし第8の発明のいずれかに従属し、設定手段によって材質パラメータが設定された複数の物および3次元地図に基づいて、材質パラメータ地図を作成する作成手段を備える。   A ninth invention is dependent on any one of the first to eighth inventions, and a creation means for creating a material parameter map based on a plurality of objects and material maps in which material parameters are set by the setting means and a three-dimensional map. Is provided.

第9の発明では、作成手段(150,S47)は、たとえば材質パラメータが設定された物および3次元地図に基づいて、材質パラメータが対応付けられた物の3次元形状および当該物の位置を示す材質パラメータ地図を作成する。   In the ninth invention, the creation means (150, S47) indicates the three-dimensional shape of the object associated with the material parameter and the position of the object based on the object and the three-dimensional map for which the material parameter is set, for example. Create a material parameter map.

第10の発明は、第1の発明または第9の発明に従属し、複数の物をそれぞれ打撃したときの打音を含み、推定手段は、複数の物をそれぞれ打撃したときの打音に基づいて、複数の物の材質を推定する。   A tenth invention is dependent on the first invention or the ninth invention, and includes a hitting sound when hitting a plurality of objects, and the estimating means is based on a hitting sound when hitting each of a plurality of objects. Thus, the materials of a plurality of objects are estimated.

第10の発明では、計測音は、たとえば作業者が複数の物をそれぞれ打撃したときの打音を含む。そして、推定手段は、たとえば複数の物のそれぞれを打撃したときの打音に対応するデータ(計測音データ)から係数(メル周波数ケプストラム係数)を算出し、その係数を予め作成した判別モデルに入力することで、物の材質を推定する。   In the tenth invention, the measurement sound includes, for example, a hitting sound when the worker hits a plurality of objects. Then, the estimation means calculates a coefficient (mel frequency cepstrum coefficient) from data (measurement sound data) corresponding to the hitting sound when hitting each of a plurality of objects, for example, and inputs the coefficient to a discrimination model created in advance. By doing so, the material of the object is estimated.

第10の発明によれば、たとえば作業者は集音装置と協調して3次元空間内に設けられた複数の物をそれぞれ打撃するだけで、複数の物の材質を推定することが出来る。そのため、材質パラメータ地図を作成する際の手間が軽減される。   According to the tenth invention, for example, the worker can estimate the materials of the plurality of objects only by striking each of the plurality of objects provided in the three-dimensional space in cooperation with the sound collector. For this reason, the trouble of creating the material parameter map is reduced.

第11の発明は、第1の発明ないし第10の発明のいずれかに従属し、3次元地図は、複数の物の3次元形状を表す平面を含み、対応付け手段は、推定手段によって推定された複数の物の材質を、当該複数の物の3次元形状を表す平面のそれぞれに対応付け、設定手段は、対応付け手段によって材質が対応付けられた複数の物の3次元形状を表す平面のそれぞれに材質パラメータを設定する。   An eleventh invention is according to any one of the first to tenth inventions, wherein the three-dimensional map includes a plane representing a three-dimensional shape of a plurality of objects, and the association means is estimated by the estimation means. The material of the plurality of objects is associated with each of the planes representing the three-dimensional shape of the plurality of objects, and the setting unit is a plane representing the three-dimensional shape of the plurality of objects associated with the material by the association unit. Set material parameters for each.

第11の発明では、物の3次元形状は、平面で表される。たとえば、平面の名称が記録されたテーブルにおいて、その平面の名称に材質が対応付けられ、その平面の名称に材質パラメータが設定される。   In the eleventh aspect, the three-dimensional shape of the object is represented by a plane. For example, in a table in which the name of a plane is recorded, a material is associated with the name of the plane, and a material parameter is set for the name of the plane.

第12の発明は、3次元空間に設けられた複数の物の3次元形状および当該複数の物の位置を示す3次元地図を記憶する記憶部(154)および複数の物のそれぞれから伝わる音を計測音として集音する移動可能な集音装置(12)を有する、シミュレーションシステム(100)における材質パラメータ設定方法であって、シミュレーションシステムのプロセッサ(150)が、集音装置によって集音された計測音および計測に関する位置を記憶する記憶ステップ(S3)、記憶ステップによって記憶されたそれぞれの計測音に基づいて、複数の物の材質を推定する推定ステップ(S41)、推定ステップによって推定された複数の物の材質を、当該複数の物のそれぞれに対応付ける対応付けステップ(S43)、および対応付けステップによって材質が対応付けられた複数の物のそれぞれに材質パラメータを設定する設定ステップ(S45)を実行する、材質パラメータ設定方法である。   In a twelfth aspect, a storage unit (154) that stores a three-dimensional shape of a plurality of objects provided in a three-dimensional space and a three-dimensional map indicating the positions of the plurality of objects, and sounds transmitted from each of the plurality of objects A material parameter setting method in a simulation system (100) having a movable sound collecting device (12) that collects sound as measurement sound, wherein the processor (150) of the simulation system collects sound collected by the sound collecting device. A storage step (S3) for storing a position related to sound and measurement, an estimation step (S41) for estimating the material of a plurality of objects based on the respective measurement sounds stored in the storage step, and a plurality of estimation steps estimated by the estimation step An association step (S43) for associating the material of an object with each of the plurality of objects, and an association step Therefore executes setting step of setting the material parameters to each of a plurality of objects made is associated (S45), which is the material parameter setting method.

第12の発明でも、第1の発明と同様、3次元地図および設定された材質パラメータを利用することで、3次元空間の電波環境を容易にシミュレーションすることが出来る。   In the twelfth invention, similarly to the first invention, the radio wave environment in the three-dimensional space can be easily simulated by using the three-dimensional map and the set material parameters.

第13の発明は、3次元空間に設けられた複数の物の3次元形状および当該複数の物の位置を示す3次元地図を記憶する記憶部(154)、複数の物のそれぞれから伝わる音に基づく計測音および計測に関する位置を記憶する記憶手段(150,S3)、記憶手段によって記憶されたそれぞれの計測音に基づいて、複数の物の材質を推定する推定手段(150,S41)、推定手段によって推定された複数の物の材質を、当該複数の物のそれぞれに対応付ける対応付け手段(150,S43)、および対応付け手段によって材質が対応付けられた複数の物のそれぞれに材質パラメータを設定する設定手段(150,S45)を備える、材質パラメータ設定装置である。   In a thirteenth aspect of the present invention, a storage unit (154) that stores a three-dimensional shape of a plurality of objects provided in a three-dimensional space and a three-dimensional map indicating the positions of the plurality of objects, and sounds transmitted from each of the plurality of objects Storage means (150, S3) for storing the measurement sound based on and the position related to measurement, estimation means (150, S41) for estimating the material of a plurality of objects based on the respective measurement sounds stored by the storage means, estimation means Corresponding means (150, S43) for associating the materials of the plurality of objects estimated by the above with each of the plurality of objects, and material parameters are set for each of the plurality of objects with which the materials are associated by the associating means. It is a material parameter setting apparatus provided with a setting means (150, S45).

第13の発明でも、3次元地図および設定された材質パラメータを利用することで、3次元空間の電波環境を容易にシミュレーションすることが出来る。   In the thirteenth invention, the radio wave environment in the three-dimensional space can be easily simulated by using the three-dimensional map and the set material parameters.

この発明によれば、3次元空間の電波環境を容易にシミュレーションすることが出来る。   According to the present invention, it is possible to easily simulate a radio wave environment in a three-dimensional space.

この発明の上述の目的、その他の目的、特徴および利点は、図面を参照して行う以下の実施例の詳細な説明から一層明らかとなろう。   The above object, other objects, features, and advantages of the present invention will become more apparent from the following detailed description of embodiments with reference to the drawings.

図1はこの発明の一実施例のシミュレーションシステムの構成の一例を示す図解図である。FIG. 1 is an illustrative view showing one example of a configuration of a simulation system of one embodiment of the present invention. 図2は図1に示す集音ロボットの外観の一例を示す図解図である。FIG. 2 is an illustrative view showing one example of an appearance of the sound collecting robot shown in FIG. 図3は図2に示す集音ロボットの構成の一例を示すブロック図である。FIG. 3 is a block diagram showing an example of the configuration of the sound collecting robot shown in FIG. 図4は図1に示す第1計測ロボットの外観の一例を示す図解図である。FIG. 4 is an illustrative view showing one example of an appearance of the first measuring robot shown in FIG. 図5は図4に示す第1計測ロボットの構成の一例を示すブロック図である。FIG. 5 is a block diagram showing an example of the configuration of the first measuring robot shown in FIG. 図6は図1に示す第2計測ロボットの外観の一例を示す図解図である。FIG. 6 is an illustrative view showing one example of an appearance of the second measuring robot shown in FIG. 図7は図6に示す第2計測ロボットの構成の一例を示すブロック図である。FIG. 7 is a block diagram showing an example of the configuration of the second measuring robot shown in FIG. 図8は図1に示す中央制御装置の構成の一例を示すブロック図である。FIG. 8 is a block diagram showing an example of the configuration of the central controller shown in FIG. 図9は図1に示すシミュレーションシステムが利用される3次元空間の一例を示す図解図であり、図9(A)は実際の3次元空間の一部を示す図解図であり、図9(B)は図9(A)に示す3次元空間と対応する3次元環境地図の一例を示す図解図である。FIG. 9 is an illustrative view showing an example of a three-dimensional space in which the simulation system shown in FIG. 1 is used, and FIG. 9A is an illustrative view showing a part of an actual three-dimensional space. ) Is an illustrative view showing one example of a three-dimensional environment map corresponding to the three-dimensional space shown in FIG. 図10は図1に示すシミュレーションシステムが利用される3次元空間の3次元環境地図に基づいて作成された自己位置推定用地図の一例を示す図解図である。FIG. 10 is an illustrative view showing one example of a self-position estimation map created based on a three-dimensional environment map in a three-dimensional space in which the simulation system shown in FIG. 1 is used. 図11は図8に示す中央制御装置のメモリに記憶される計測音テーブルの構成の一例を示す図解図である。FIG. 11 is an illustrative view showing one example of a configuration of a measurement sound table stored in the memory of the central controller shown in FIG. 図12は図8に示す中央制御装置のメモリに記憶される材質パラメータテーブルの構成の一例を示す図解図である。FIG. 12 is an illustrative view showing one example of a configuration of a material parameter table stored in the memory of the central controller shown in FIG. 図13は図1に示す第2計測ロボットによって電波強度を実測する手法の概要を示す図解図である。FIG. 13 is an illustrative view showing an outline of a method of actually measuring the radio field intensity by the second measuring robot shown in FIG. 図14は図8に示す中央制御装置の出力装置によって出力される電波環境情報地図の一例を示す図解図である。FIG. 14 is an illustrative view showing one example of a radio wave environment information map output by the output device of the central control device shown in FIG. 図15は複数の第2計測ロボットを利用して電波強度を実測する際の経路の一例を示す図解図である。FIG. 15 is an illustrative view showing one example of a path when actually measuring the radio field intensity using a plurality of second measuring robots. 図16は複数の第2計測ロボットを利用して電波強度を実測する様子の一例を示す図解図である。FIG. 16 is an illustrative view showing one example of a state in which the radio field intensity is actually measured using a plurality of second measuring robots. 図17は複数の第2計測ロボットを利用して電波強度を実測する様子の他の一例を示す図解図であり、図17(A)は所定の位置に第2計測ロボットが移動している様子を示し、図17(B)は2台の第2計測ロボットで電波強度が計測されている様子を示す。FIG. 17 is an illustrative view showing another example of a state in which the field intensity is actually measured using a plurality of second measuring robots, and FIG. 17A shows a state in which the second measuring robot is moved to a predetermined position. FIG. 17B shows a state in which the radio wave intensity is measured by two second measuring robots. 図18は図8に示す中央制御装置のメモリのメモリマップの一例を示す図解図である。18 is an illustrative view showing one example of a memory map of a memory of the central control unit shown in FIG. 図19は図8に示す中央制御装置のプロセッサの記憶処理の一例を示すフロー図である。FIG. 19 is a flowchart showing an example of the storage process of the processor of the central controller shown in FIG. 図20は図8に示す中央制御装置のプロセッサの地図作成処理の一例を示すフロー図である。FIG. 20 is a flowchart showing an example of the map creation process of the processor of the central controller shown in FIG. 図21は図8に示す中央制御装置のプロセッサの電波環境可視化処理の一例を示すフロー図である。FIG. 21 is a flowchart showing an example of the radio wave environment visualization process of the processor of the central controller shown in FIG. 図22は第2実施例のシミュレーションシステムが備えるスピーカロボットの外観の一例を示す図解図である。FIG. 22 is an illustrative view showing one example of an appearance of a speaker robot provided in the simulation system of the second embodiment. 図23は図22に示すスピーカロボットの構成の一例を示すブロック図である。FIG. 23 is a block diagram showing an example of the configuration of the speaker robot shown in FIG. 図24は第2実施例の第1計測ロボットの外観の一例を示す図解図である。FIG. 24 is an illustrative view showing one example of an appearance of the first measuring robot of the second embodiment. 図25は図24に示す第2実施例の第1計測ロボットの構成の一例を示すブロック図である。FIG. 25 is a block diagram showing an example of the configuration of the first measuring robot of the second embodiment shown in FIG. 図26は図22に示すスピーカロボットおよび図24に示す第2実施例の第1計測ロボットによって計測音を集音している様子の一例を示す図解図である。26 is an illustrative view showing one example of a state in which measurement sound is collected by the speaker robot shown in FIG. 22 and the first measurement robot of the second embodiment shown in FIG. 図27は図8に示す中央制御装置のメモリに記憶される第2実施例の計測音テーブルの構成の一例を示す図解図である。FIG. 27 is an illustrative view showing one example of a configuration of a measurement sound table of the second embodiment stored in the memory of the central control unit shown in FIG.

<第1実施例>
図1を参照して、本実施例のシミュレーションシステム100は、オフィスまたは住宅などの3次元空間の電波環境を可視化するために用いられる。3次元空間内には、床、天井、壁、窓、OA機器、棚、ロッカー、机および椅子などの複数の物が設けられている。ここで、「物」には、物および物の構成部材が含まれ、たとえば物が窓である場合、その窓にはガラスおよび窓枠などの構成部材が含まれる。
<First embodiment>
Referring to FIG. 1, a simulation system 100 according to the present embodiment is used to visualize a radio wave environment in a three-dimensional space such as an office or a house. In the three-dimensional space, a plurality of objects such as a floor, a ceiling, a wall, a window, an OA device, a shelf, a locker, a desk, and a chair are provided. Here, the “thing” includes a thing and a constituent member of the thing. For example, when the thing is a window, the window includes a constituent member such as glass and a window frame.

また、3次元空間には、上述した複数の物と共に、無線LANなどの無線通信で利用される基地局が設けられている。また、複数の物の形状および3次元空間内の電波強度などは、後述するロボットを利用して計測され、その計測結果はシミュレーションシステム100の中央制御装置10に記憶される。なお、無線LANで利用される基地局は、アクセスポイントと言われることもある。   In the three-dimensional space, a base station used for wireless communication such as a wireless LAN is provided together with the above-described objects. In addition, the shape of a plurality of objects and the radio wave intensity in the three-dimensional space are measured using a robot described later, and the measurement result is stored in the central control device 10 of the simulation system 100. A base station used in a wireless LAN is sometimes referred to as an access point.

シミュレーションシステム100には、中央制御装置10、集音ロボット12、第1計測ロボット14および第2計測ロボット16が含まれる。集音ロボット12、第1計測ロボット14および第2計測ロボット16は、シミュレーションシステム100の管理者などによって指示された動作命令に従って自律行動を行う。ただし、これらのロボットは、必要に応じて管理者などによって遠隔操作されることもある。   The simulation system 100 includes a central control device 10, a sound collection robot 12, a first measurement robot 14, and a second measurement robot 16. The sound collection robot 12, the first measurement robot 14, and the second measurement robot 16 perform autonomous behavior according to an operation command instructed by an administrator of the simulation system 100 or the like. However, these robots may be remotely operated by an administrator or the like as necessary.

集音ロボット12および第1計測ロボット14は中央制御装置10と無線通信を行い、集音ロボット12および第1計測ロボット14は計測結果を無線通信によって中央制御装置10に送信する。また、第2計測ロボット16は必要に応じて中央制御装置10と有線接続され、計測結果は有線通信によって中央制御装置10に送信される。   The sound collection robot 12 and the first measurement robot 14 perform wireless communication with the central control device 10, and the sound collection robot 12 and the first measurement robot 14 transmit the measurement result to the central control device 10 by wireless communication. The second measuring robot 16 is connected to the central control device 10 by wire as necessary, and the measurement result is transmitted to the central control device 10 by wired communication.

本実施例では、集音ロボット12を利用して物から伝わる音が集音され、第1計測ロボット14を利用して物の形状および物の位置が計測され、第2計測ロボット16を利用して3次元空間の電波強度が計測される。また、詳細な説明は後述するが、集音ロボット12を利用して集音された計測音を利用して、3次元空間内に設けられた複数の物の材質が推定される。   In this embodiment, the sound transmitted from the object is collected using the sound collecting robot 12, the shape and position of the object are measured using the first measuring robot 14, and the second measuring robot 16 is used. Thus, the radio field intensity in the three-dimensional space is measured. Although detailed description will be given later, the material of a plurality of objects provided in the three-dimensional space is estimated using the measurement sound collected using the sound collection robot 12.

なお、本実施例では、中央制御装置10が電波環境をシミュレーションするため、中央制御装置10は「シミュレーション装置」と言われることもある。また、集音ロボットは移動可能な集音装置と言われることもあり、第1計測ロボット14は移動可能な3次元形状取得装置と言われることもあり、第2計測ロボット16は移動可能な電波強度計測装置と言われることもある。   In the present embodiment, since the central control device 10 simulates the radio wave environment, the central control device 10 may be referred to as a “simulation device”. Further, the sound collecting robot may be referred to as a movable sound collecting device, the first measuring robot 14 may be referred to as a movable three-dimensional shape acquisition device, and the second measuring robot 16 may be movable radio waves. Sometimes called intensity measuring device.

また、3次元空間に設けられる「物」には、棚、ロッカー、机および椅子などの家具だけでなく、観葉植物、階段などの設備および絵画などの芸術品なども含まれる。   In addition, “things” provided in a three-dimensional space include not only furniture such as shelves, lockers, desks, and chairs, but also facilities such as ornamental plants and stairs and arts such as paintings.

図2は集音ロボット12の外観を示す図解図である。図2を参照して、集音ロボット12は、約0.2メートルの高さに取り付けられた2次元LRF30、2次元LRF30の近くに設けられた制御装置32、約1.0メートルの高さに90度ロールして取り付けられた3次元LRF34および約1.2メートルの高さに取り付けられたマイク36などを有する。   FIG. 2 is an illustrative view showing an appearance of the sound collecting robot 12. Referring to FIG. 2, the sound collecting robot 12 includes a two-dimensional LRF 30 mounted at a height of about 0.2 meters, a control device 32 provided near the two-dimensional LRF 30, a height of about 1.0 meter. And a three-dimensional LRF 34 mounted 90 degrees on a microphone and a microphone 36 mounted at a height of about 1.2 meters.

2次元LRF30は、自己位置の推定、物をハンマーで打撃する作業者のトラッキングおよび打撃される物の位置を認識するために用いられる。2次元LRF30はレーザを照射し、物体に反射して戻ってくるまでの時間から当該物体までの距離を計測するものである。たとえば、トランスミッタから照射したレーザを回転ミラーで反射させて、前方を扇状に一定角度(たとえば、0.5度)ずつスキャンする。ここで、2次元LRF30としては、たとえば北陽電気製のレーザーレンジファインダ(型式 UTM-30LX)を用いることができる。このレーザーレンジファインダを用いた場合には、距離8メートルを±15ミリメートル程度の誤差で計測可能である。なお、2次元LRF30は、集音ロボット12の後方(移動方向とは逆方向)に設けられているが、他の実施例では後方にも設けられていてもよい。また、他の実施例では、2次元LRF30に代えて、赤外線距離センサ、超音波距離センサまたはミリ波レーダなどを用いることもできる。   The two-dimensional LRF 30 is used for estimating the self-position, tracking the worker who hits the object with a hammer, and recognizing the position of the hit object. The two-dimensional LRF 30 irradiates a laser, and measures the distance to the object from the time it takes for the object to reflect and return. For example, the laser emitted from the transmitter is reflected by a rotating mirror, and the front is scanned in a fan shape at a certain angle (for example, 0.5 degrees). Here, as the two-dimensional LRF 30, for example, a laser range finder (model UTM-30LX) manufactured by Hokuyo Electric may be used. When this laser range finder is used, a distance of 8 meters can be measured with an error of about ± 15 millimeters. The two-dimensional LRF 30 is provided behind the sound collecting robot 12 (in the direction opposite to the moving direction), but may be provided behind the sound collecting robot 12 in other embodiments. In another embodiment, an infrared distance sensor, an ultrasonic distance sensor, a millimeter wave radar, or the like can be used instead of the two-dimensional LRF 30.

制御装置32は、集音ロボット12の移動についての制御のために用いられる。制御装置32としては、たとえばラップトップ型のパーソナルコンピュータが用いられる。   The control device 32 is used for controlling the movement of the sound collection robot 12. As the control device 32, for example, a laptop personal computer is used.

3次元LRF34は、物を打撃するハンマーを検出するために用いられる。3次元LRF34は、2次元LRFおよびモータなどを含む。たとえば、2次元LRFによって平面スキャンが終了する毎に、所定角度ずつスキャン平面を変化させることで、3次元LRF34は3次元3次元空間をスキャンする。ここで、3次元LRF34としては、たとえばVelodyne社製のレーザーライダーユニット(型式 HDL-32e)を用いることが出来る。なお、他の実施例では、3次元LRF74に代えて、Microsoft(登録商標)社製のKinect(登録商標)、ASUS(登録商標)社製のXtion、パナソニック(登録商標)社製のD-IMager(登録商標)などの距離画像センサまたは3次元センサを用いることもできる。   The three-dimensional LRF 34 is used to detect a hammer that strikes an object. The three-dimensional LRF 34 includes a two-dimensional LRF and a motor. For example, the 3D LRF 34 scans the 3D 3D space by changing the scan plane by a predetermined angle each time the plane scan is completed by the 2D LRF. Here, as the three-dimensional LRF 34, for example, a laser lidar unit (model HDL-32e) manufactured by Velodyne can be used. In other embodiments, instead of the three-dimensional LRF 74, Kinect (registered trademark) manufactured by Microsoft (registered trademark), Xtion manufactured by ASUS (registered trademark), and D-IMager manufactured by Panasonic (registered trademark). A distance image sensor such as (registered trademark) or a three-dimensional sensor can also be used.

マイク36は、物をハンマーで打撃したときに、物から伝わる音、つまり打音を計測音として集音するために用いられる。また、本実施例で用いるマイク36は無指向性のものであるが、他の実施例では、マイク36が指向性を有していてもよい。   The microphone 36 is used to collect a sound transmitted from an object, that is, a hitting sound as a measurement sound when the object is hit with a hammer. Moreover, although the microphone 36 used in the present embodiment is non-directional, in other embodiments, the microphone 36 may have directivity.

図3は集音ロボット12の構成を示すブロック図である。図3を参照して、制御装置32による移動ロボットプラットフォームとしては、たとえばT-frogプロジェクトi-Cart mini1を用い、オープンソース移動ロボット走行制御ソフトウェアYP-Spur2で制御することが可能である。また、ミドルウェアとしてROS3を使用し、自己位置推定にROS Navigationstackに含まれるamclを用いることが出来る。自己位置推定のための地図としては、たとえばROS gmappingパッケージを用いて作成したグリッド間隔50ミリメートルの2次元占有格子地図を用いることが出来る。なお、これらの移動ロボットプラットフォームについては、以下に開示がある。   FIG. 3 is a block diagram showing the configuration of the sound collecting robot 12. Referring to FIG. 3, as a mobile robot platform by control device 32, for example, T-frog project i-Cart mini1 can be used and controlled by open source mobile robot travel control software YP-Spur2. Also, ROS3 can be used as middleware, and amcl included in ROS Navigationstack can be used for self-position estimation. As a map for self-position estimation, for example, a two-dimensional occupied grid map with a grid interval of 50 mm created using the ROS gmapping package can be used. These mobile robot platforms are disclosed below.

T-forgプロジェクト:http://t-frog.com/
YP-Spur:https://openspur.org/
ROS:http://www.ros.org/
また、集音ロボット12の自律移動の制御には、周囲の人間に不快感を与えないようにするための移動制御技術が利用されている。この移動制御技術は、出願人が先に出願し既に出願公開された特開2015-45974号公報に開示されている技術を応用したものである。なお、この移動制御技術は、本願発明の本質的な内容ではないため、詳細な説明は省略する。
T-forg project: http://t-frog.com/
YP-Spur: https://openspur.org/
ROS: http://www.ros.org/
For controlling the autonomous movement of the sound collection robot 12, a movement control technique is used to prevent discomfort to surrounding people. This movement control technique is an application of the technique disclosed in Japanese Patent Application Laid-Open No. 2015-45974 filed earlier by the applicant and already published. Since this movement control technique is not an essential content of the present invention, a detailed description is omitted.

このような制御装置32はプロセッサ40などを含む。プロセッサ40は、マイクロコンピュータ或いはCPUとも呼ばれる。また、プロセッサ40には、バス42を介して、メモリ44、センサ入出力ボード46、音声入出力ボード48および無線通信ボード50などが接続されている。また、プロセッサ40には移動機構52が接続され、センサ入出力ボード46には2次元LRF30、3次元LRF34および路程測定センサ54が接続され、音声入出力ボード48にはマイク36が接続され、無線通信ボード50にはアンテナ56が接続される。   Such a control device 32 includes a processor 40 and the like. The processor 40 is also called a microcomputer or CPU. The processor 40 is connected to a memory 44, a sensor input / output board 46, a voice input / output board 48, a wireless communication board 50, and the like via a bus 42. The processor 40 is connected to a moving mechanism 52, the sensor input / output board 46 is connected to a two-dimensional LRF 30, a three-dimensional LRF 34, and a path measurement sensor 54, and the voice input / output board 48 is connected to a microphone 36. An antenna 56 is connected to the communication board 50.

プロセッサ40は、集音ロボット12の全体制御を司る。特に、プロセッサ40は、集音ロボット12の動作を制御し、作業者に追従して移動するための処理およびハンマーによって打撃された位置を推定する処理などを実行する。   The processor 40 governs overall control of the sound collection robot 12. In particular, the processor 40 controls the operation of the sound collecting robot 12 and executes a process for moving following the worker, a process for estimating the position hit by the hammer, and the like.

メモリ44はROM、RAMおよびHDDを含む。HDDおよびROMには、集音ロボット12の動作を制御するための制御プログラムおよび3次元空間を移動するためのマップデータなどが予め記憶される。また、RAMは、プロセッサ40のワークメモリまたはバッファメモリとして用いられる。   The memory 44 includes ROM, RAM, and HDD. In the HDD and ROM, a control program for controlling the operation of the sound collecting robot 12, map data for moving in the three-dimensional space, and the like are stored in advance. The RAM is used as a work memory or a buffer memory for the processor 40.

また、プロセッサ40は、メモリ44に記憶されたプログラムに従って、2次元LRF30からの信号に基づいて作業者の位置を追従するための協調作業者トラッキング部、路程測定センサ54および2次元LRF30からの信号に基づいてマップデータを参照することで現在の自身の位置を推定するための自己位置推定処理部、2次元LRF30からの信号に基づいて打撃される物の位置を検知するための打撃対象認識部、集音ロボット12が作業者と協調動作を行うために必要な位置関係を維持するような位置制御を計画する協調動作計画部、協調動作計画部の計画に従って移動機構52を駆動して集音ロボット12の移動を制御する移動制御部、3次元LRF34からの信号に基づいてハンマーの位置を検出するためのハンマー位置検出部、マイク36からの信号に基づいて打音を検出する打音検出部、打音の検出されたタイミングでハンマー位置検出部からの信号に基づいて打撃位置を推定し、打音の音響情報と計測に関する位置(打音位置および計測位置)とを関連付けて計測音データとしてメモリ44に記憶するための打撃位置推定部として機能する。   The processor 40 also receives signals from the cooperative worker tracking unit, the path measurement sensor 54, and the two-dimensional LRF 30 for following the position of the worker based on the signal from the two-dimensional LRF 30 according to the program stored in the memory 44. A self-position estimation processing unit for estimating the current position of the subject by referring to the map data based on the hitting object recognition unit for detecting the position of the hit object based on the signal from the two-dimensional LRF 30 The sound collection robot 12 plans the position control so as to maintain the positional relationship necessary for performing the cooperative operation with the worker, and the sound collection by driving the moving mechanism 52 according to the plan of the cooperative operation planning unit. Hammer position detection for detecting the position of a hammer based on a signal from a movement control unit for controlling movement of the robot 12 and a three-dimensional LRF 34 A sound hitting detection unit that detects a hitting sound based on a signal from the microphone 36, a hitting position is estimated based on a signal from the hammer position detecting unit at a timing when the hitting sound is detected, and acoustic information of the hitting sound It functions as a striking position estimation unit for associating positions related to measurement (sounding position and measuring position) and storing them in the memory 44 as measurement sound data.

センサ入出力ボード46は、たとえばDSPで構成され、センサからの信号を取り込んでプロセッサ40に与える。たとえば、センサ入出力ボード46には、周囲の物体、作業者および物などまでの距離を計測した結果が2次元LRF30から入力され、物を打撃するハンマーの位置を計測した結果が3次元LRF74から入力され、後述する移動機構52が有する車輪の回転パルスが路程測定センサ54から入力される。センサ入出力ボード46は、これらの入力に対して所定の処理を施してからプロセッサ40に出力する。   The sensor input / output board 46 is constituted by a DSP, for example, and takes in a signal from the sensor and gives it to the processor 40. For example, the sensor input / output board 46 receives the result of measuring the distance to surrounding objects, workers, and objects from the two-dimensional LRF 30 and the result of measuring the position of the hammer hitting the object from the three-dimensional LRF 74. The rotation pulse of the wheel which the moving mechanism 52 mentioned later has is input from the path length measurement sensor 54. The sensor input / output board 46 performs predetermined processing on these inputs and then outputs them to the processor 40.

音声入出力ボード48もまたDSPで構成され、マイク36によって集音された打音に対して所定の処理を施し、集音された打音に対応する音声データをプロセッサ40に入力する。   The voice input / output board 48 is also constituted by a DSP, performs predetermined processing on the hitting sound collected by the microphone 36, and inputs the voice data corresponding to the collected hitting sound to the processor 40.

無線通信ボード50もまたDSPで構成され、プロセッサ40から与えられた送信データを、アンテナ56を介して中央制御装置10などの外部コンピュータに送信する。また、無線通信ボード50は、アンテナ56を介してデータを受信し、受信したデータをプロセッサ40に与える。たとえば、送信データとしては、集音ロボット12の自己位置および計測音データなどである。また、受信データとしては、集音ロボット12を遠隔操作する際のコマンドなどである。   The wireless communication board 50 is also configured by a DSP, and transmits the transmission data given from the processor 40 to an external computer such as the central controller 10 via the antenna 56. The wireless communication board 50 receives data via the antenna 56 and supplies the received data to the processor 40. For example, the transmission data includes the self-position of the sound collecting robot 12 and measured sound data. The received data includes commands for remotely operating the sound collection robot 12.

移動機構52としては、たとえば差動で動作できる2つの車輪による駆動機構が用いられている。移動機構52はプロセッサ40からの指示に従って動作し、集音ロボット12を移動させる。上述した路程測定センサ54は、移動機構52に用いられている車輪の回転パルスを検出可能なように、移動機構52に設けられている。ただし、移動機構52としては、このような構成に限定されるものではなく、自律的に3次元空間内を移動可能であれば、他の構成であってもよい。   As the moving mechanism 52, for example, a driving mechanism using two wheels that can operate differentially is used. The moving mechanism 52 operates according to an instruction from the processor 40 and moves the sound collecting robot 12. The path length measurement sensor 54 described above is provided in the moving mechanism 52 so that the rotation pulse of the wheel used in the moving mechanism 52 can be detected. However, the moving mechanism 52 is not limited to such a configuration, and may be another configuration as long as it can move autonomously in the three-dimensional space.

このような集音ロボット12は、自己位置推定のための地図を参照しながら作業者を追従して、物が打撃されたときの打音に対応する計測音データを記憶する。そして、記憶した打撃音データは、中央制御装置10に送信される。ただし、他の実施例では、集音ロボット12は、地図を参照せずに作業者を追従して打音を自動的に集音してもよい。また、その他の実施例では、管理者などが集音ロボット12を遠隔操作し、管理者などの操作に応じて打音が集音されてもよく、さらには、集音ロボット12がハンマーをさらに備え、物に対して自律的な打撃を加え、打音を集音してもよい。   Such a sound collecting robot 12 follows the operator while referring to a map for self-position estimation, and stores measurement sound data corresponding to the hitting sound when an object is hit. The stored hitting sound data is transmitted to the central controller 10. However, in another embodiment, the sound collecting robot 12 may automatically collect the hitting sound by following the worker without referring to the map. In another embodiment, the administrator or the like may remotely operate the sound collection robot 12 and sound may be collected according to the operation of the administrator or the like, and the sound collection robot 12 may further apply a hammer. It is also possible to collect an impact sound by automatically hitting an object.

また、第1計測ロボット14および第2計測ロボット16においても、基本的な構成は集音ロボット12と略同じである。そのため、第1計測ロボット14および第2計測ロボット16の外観および構成を説明する際には、集音ロボット12と重複する点については、簡単のため詳細な説明を省略する。   The basic configuration of the first measurement robot 14 and the second measurement robot 16 is substantially the same as that of the sound collection robot 12. Therefore, when the appearance and configuration of the first measurement robot 14 and the second measurement robot 16 are described, the points overlapping with the sound collection robot 12 are omitted for the sake of simplicity.

図4は第1計測ロボット14の外観を示す図解図である。図4を参照して、第1計測ロボット14は、約0.1メートルの高さに取り付けられた2次元LRF70、2次元LRF70の近くに設けられた制御装置72および約1.0メートルの高さに取り付けられた3次元LRF74などを有する。   FIG. 4 is an illustrative view showing an appearance of the first measuring robot 14. Referring to FIG. 4, the first measurement robot 14 includes a two-dimensional LRF 70 attached at a height of about 0.1 meter, a control device 72 provided near the two-dimensional LRF 70, and a height of about 1.0 meter. It has a three-dimensional LRF 74 attached to the top.

3次元LRF74は、集音ロボット12のものと略同じものであるが、第1計測ロボット14では3次元空間に設けられた物の形状および物の位置を取得するために用いられる。   The three-dimensional LRF 74 is substantially the same as that of the sound collection robot 12, but the first measurement robot 14 is used to acquire the shape and position of an object provided in the three-dimensional space.

なお、制御装置72は、集音ロボット12の制御装置32と略同じ構成のコンピュータが筐体の内部に収められている。また、2次元LRF70は、集音ロボット12の2次元LRF30と略同じである。   The control device 72 includes a computer having substantially the same configuration as that of the control device 32 of the sound collecting robot 12 housed in the housing. The two-dimensional LRF 70 is substantially the same as the two-dimensional LRF 30 of the sound collecting robot 12.

図5は第1計測ロボット14の構成を示すブロック図である。図5を参照して、制御装置72による移動ロボットプラットフォームは、制御装置32と略同じである。また、制御装置72はマイクロコンピュータ或いはCPUとも呼ばれるプロセッサ80を含む。プロセッサ80には、バス82を介して、メモリ84、センサ入出力ボード86および無線通信ボード88などが接続されている。また、プロセッサ80には移動機構90が接続され、センサ入出力ボード86には2次元LRF70、3次元LRF74および路程測定センサ92が接続され、無線通信ボード88にはアンテナ94が接続される。   FIG. 5 is a block diagram showing the configuration of the first measurement robot 14. Referring to FIG. 5, the mobile robot platform by control device 72 is substantially the same as control device 32. The control device 72 includes a processor 80 called a microcomputer or CPU. A memory 84, a sensor input / output board 86, a wireless communication board 88, and the like are connected to the processor 80 via a bus 82. The processor 80 is connected to the moving mechanism 90, the sensor input / output board 86 is connected to the two-dimensional LRF 70, the three-dimensional LRF 74, and the path length measuring sensor 92, and the wireless communication board 88 is connected to the antenna 94.

プロセッサ80は、第1計測ロボット14の全体制御を司る。メモリ84はROM、RAMおよびHDDを含む。HDDおよびROMには、第1計測ロボット14の動作を制御するための制御プログラムが予め記憶される。たとえば、制御プログラムには、各センサの出力(センサ情報)を検知するための検知プログラムや、中央制御装置10などの外部コンピュータとの間で必要なデータやコマンドを送受信するための通信プログラムなどが含まれる。また、RAMは、プロセッサ80のワークメモリまたはバッファメモリとして用いられる。   The processor 80 governs overall control of the first measurement robot 14. The memory 84 includes ROM, RAM, and HDD. In the HDD and the ROM, a control program for controlling the operation of the first measurement robot 14 is stored in advance. For example, the control program includes a detection program for detecting the output (sensor information) of each sensor, a communication program for transmitting / receiving necessary data and commands to / from an external computer such as the central controller 10, and the like. included. The RAM is used as a work memory or a buffer memory for the processor 80.

センサ入出力ボード86は、集音ロボット12のセンサ入出力ボード46と略同じである。そして、センサ入出力ボード86には、集音ロボット12のものと略同じ2次元LRF70および路程測定センサ92からの入力に加えて、3次元空間の物および3次元空間の位置を取得した結果が3次元LRF74から入力される。また、プロセッサ80は、2次元LRF70および路程測定センサ92の出力を利用して自己位置を推定する。   The sensor input / output board 86 is substantially the same as the sensor input / output board 46 of the sound collecting robot 12. In addition to the input from the two-dimensional LRF 70 and the path length measurement sensor 92 that are substantially the same as those of the sound collection robot 12, the sensor input / output board 86 has a result of acquiring an object in the three-dimensional space and a position in the three-dimensional space. Input from the three-dimensional LRF 74. Further, the processor 80 estimates the self-position by using the outputs of the two-dimensional LRF 70 and the path measurement sensor 92.

集音ロボット12のものと略同じ無線通信ボード88は、プロセッサ80から与えられた送信データを、アンテナ94を介して中央制御装置10などの外部コンピュータに送信する。また、無線通信ボード88は、アンテナ94を介してデータを受信し、受信したデータをプロセッサ80に与える。たとえば、送信データとしては、第1計測ロボット14の自己位置および周囲の3次元形状のデータおよびその3次元形状を取得した取得位置などである。また、受信データとしては、集音ロボット12を遠隔操作する際のコマンドなどである。   The wireless communication board 88 substantially the same as that of the sound collection robot 12 transmits the transmission data given from the processor 80 to an external computer such as the central control device 10 via the antenna 94. The wireless communication board 88 receives data via the antenna 94 and supplies the received data to the processor 80. For example, the transmission data includes the self-position of the first measurement robot 14, the data of the surrounding three-dimensional shape, the acquisition position where the three-dimensional shape is acquired, and the like. The received data includes commands for remotely operating the sound collection robot 12.

なお、移動機構90は、集音ロボット12の移動機構52と略同じものが用いられる。   The moving mechanism 90 is substantially the same as the moving mechanism 52 of the sound collecting robot 12.

このような第1計測ロボット14は、3次元空間内を自律移動し、自己位置推定のための地図を参照しながら複数の物の3次元形状を自動的に取得する。そして、第1計測ロボット14は3次元形状のデータおよび取得位置を中央制御装置10に送信する。ただし、他の実施例では、管理者などが第1計測ロボット14を遠隔操作し、管理者などの操作に応じて複数の物の3次元形状が取得されてもよい。   Such a first measurement robot 14 autonomously moves in the three-dimensional space and automatically acquires the three-dimensional shapes of a plurality of objects while referring to a map for self-position estimation. Then, the first measurement robot 14 transmits the three-dimensional shape data and the acquisition position to the central controller 10. However, in other embodiments, an administrator or the like may remotely operate the first measurement robot 14 and acquire a three-dimensional shape of a plurality of objects according to the operation of the administrator or the like.

図6は第2計測ロボット16の外観を示す図解図である。図6を参照して、第2計測ロボット16は、約0.2メートルの高さに取り付けられた2次元LRF110、2次元LRF110の近くに設けられた制御装置112、約1.1メートルの高さに取り付けられた3次元LRF114および約1.0メートルの高さに取り付けられた計測用アンテナ116などを有する。   FIG. 6 is an illustrative view showing an appearance of the second measuring robot 16. Referring to FIG. 6, the second measuring robot 16 includes a two-dimensional LRF 110 attached at a height of about 0.2 meters, a control device 112 provided near the two-dimensional LRF 110, a height of about 1.1 meters. A three-dimensional LRF 114 attached to the top and a measurement antenna 116 attached to a height of about 1.0 meter.

3次元LRF114は、第1計測ロボット14が備える3次元LRF74と略同じである。ただし、3次元LRF114は、3次元LRF74に対して水平状態から約45度傾けられている。これにより、第1計測ロボット14の3次元LRF74によって取得できなかった物の3次元形状が、第2計測ロボット16の3次元LRF114によって計測することが可能になる。したがって、管理者は、第1計測ロボット14の計測によって3次元形状を取得できない物がある場合、第2計測ロボット16を用いて3次元形状を取得することが出来る。   The three-dimensional LRF 114 is substantially the same as the three-dimensional LRF 74 included in the first measurement robot 14. However, the three-dimensional LRF 114 is inclined about 45 degrees from the horizontal state with respect to the three-dimensional LRF 74. As a result, the three-dimensional shape of the object that could not be acquired by the three-dimensional LRF 74 of the first measurement robot 14 can be measured by the three-dimensional LRF 114 of the second measurement robot 16. Therefore, the administrator can acquire the three-dimensional shape using the second measuring robot 16 when there is an object that cannot acquire the three-dimensional shape by measurement of the first measuring robot 14.

計測用アンテナ116は、電波強度を計測するために用いられる。また、計測用アンテナ116は指向性を有しており、所定の方向(範囲)からの電波を受信し、所定方向へ電波を送信することが可能である。ただし、他の実施例では、計測用アンテナ116は無指向性のものであってもよい。   The measurement antenna 116 is used for measuring the radio field intensity. The measurement antenna 116 has directivity, and can receive radio waves from a predetermined direction (range) and transmit radio waves in a predetermined direction. However, in other embodiments, the measurement antenna 116 may be non-directional.

なお、2次元LRF110および制御装置112は、集音ロボット12の2次元LRF30および制御装置32と略同じものである。   The two-dimensional LRF 110 and the control device 112 are substantially the same as the two-dimensional LRF 30 and the control device 32 of the sound collecting robot 12.

図7は第2計測ロボット16の構成を示すブロック図である。図7を参照して、制御装置112による移動ロボットプラットフォームは、他の2台のロボットのものと略同じである。また、制御装置112も、他のロボットの制御装置と同様、マイクロコンピュータ或いはCPUとも呼ばれるプロセッサ120などを含む。プロセッサ120には、バス122を介して、メモリ124、センサ入出力ボード126、無線通信ボード128およびコントロールポート130が接続される。また、プロセッサ120には移動機構132が接続され、センサ入出力ボード126には2次元LRF110、3次元LRF114および路程測定センサ134が接続され、無線通信ボード128には計測用アンテナ116が接続される。   FIG. 7 is a block diagram showing the configuration of the second measuring robot 16. Referring to FIG. 7, the mobile robot platform by control device 112 is substantially the same as that of the other two robots. The control device 112 also includes a processor 120 called a microcomputer or a CPU, as with other robot control devices. A memory 124, a sensor input / output board 126, a wireless communication board 128, and a control port 130 are connected to the processor 120 via a bus 122. The processor 120 is connected to the moving mechanism 132, the sensor input / output board 126 is connected to the two-dimensional LRF 110, the three-dimensional LRF 114, and the path length measuring sensor 134, and the wireless communication board 128 is connected to the measurement antenna 116. .

プロセッサ120は、第2計測ロボット16の全体制御を司る。メモリ124はROM、RAMおよびHDDを含む。HDDおよびROMには、第2計測ロボット16の動作を制御するための制御プログラムが予め記憶される。たとえば、各センサの出力(センサ情報)を検知するための検知プログラムや、中央制御装置10などの外部コンピュータとの間で必要なデータやコマンドを送受信するための通信プログラムなどが記憶される。また、RAMは、プロセッサ120のワークメモリまたはバッファメモリとして用いられる。   The processor 120 governs overall control of the second measurement robot 16. The memory 124 includes ROM, RAM, and HDD. In the HDD and ROM, a control program for controlling the operation of the second measurement robot 16 is stored in advance. For example, a detection program for detecting the output (sensor information) of each sensor, a communication program for transmitting / receiving necessary data and commands to / from an external computer such as the central control device 10 are stored. The RAM is used as a work memory or a buffer memory for the processor 120.

センサ入出力ボード126は、第1計測ロボット14のものと略同じであり、同じセンサが接続されている。また、プロセッサ120は、集音ロボット12と同様、2次元LRF110および路程測定センサ134の出力を利用して自己位置を推定する。   The sensor input / output board 126 is substantially the same as that of the first measurement robot 14, and the same sensor is connected thereto. Similarly to the sound collection robot 12, the processor 120 estimates the self-position using the outputs of the two-dimensional LRF 110 and the path length measurement sensor 134.

無線通信ボード128は、集音ロボット12のものと略同じである。無線通信ボード128は、計測用アンテナ116を介して、後述する送信ノードから送信された計測用電波を受信する。プロセッサ120は、計測用電波の電波強度と受信位置とを対応付けて、実測値データ352としてメモリ124に記憶する。また、無線通信ボード128は、計測用アンテナ116を介して、計測用電波を送信する場合もある。   The wireless communication board 128 is substantially the same as that of the sound collection robot 12. The wireless communication board 128 receives a measurement radio wave transmitted from a transmission node described later via the measurement antenna 116. The processor 120 associates the radio wave intensity of the measurement radio wave with the reception position, and stores the measured value data 352 in the memory 124. In addition, the wireless communication board 128 may transmit measurement radio waves via the measurement antenna 116.

コントロールポート130には、管理者などが第2計測ロボット16を直接操作する際に、操作用の端末が接続される。操作用の端末は、たとえばラップトップコンピュータなどであり、有線ケーブルを利用して第2計測ロボット16と接続される。たとえば、管理者は、後述する図16および図17(A),(B)に示すように、2台の第2計測ロボット16を利用して電波強度を計測する際に、第2計測ロボット16を直接操作する。   When the administrator or the like directly operates the second measurement robot 16, an operation terminal is connected to the control port 130. The operation terminal is a laptop computer, for example, and is connected to the second measuring robot 16 using a wired cable. For example, as shown in FIG. 16 and FIGS. 17A and 17B, which will be described later, the administrator uses the second measurement robot 16 to measure the radio field intensity and uses the second measurement robot 16. Operate directly.

また、第2計測ロボット16は、コントロールポート130を利用して中央制御装置10と有線接続することも可能である。そして、第2計測ロボット16は、中央制御装置10と有線接続されたときに、電波強度の実測値データを中央制御装置10に送信する。ただし、第2計測ロボット16は、上述した無線通信ボード128および計測用アンテナ116を利用して中央制御装置10と無線通信を行って、実測値データを中央制御装置10に送信してもよい。   The second measuring robot 16 can also be connected to the central control device 10 by wire using the control port 130. Then, when the second measuring robot 16 is connected to the central control device 10 by wire, the second measurement robot 16 transmits the measured value data of the radio field intensity to the central control device 10. However, the second measurement robot 16 may wirelessly communicate with the central control device 10 using the wireless communication board 128 and the measurement antenna 116 described above, and transmit actually measured value data to the central control device 10.

なお、移動機構132は、他のロボットの移動機構と略同じものが用いられる。   The moving mechanism 132 is substantially the same as that of other robots.

このような第2計測ロボット16は、自己位置推定のための地図を参照しながら電波強度を自動的に計測し、計測結果を上述した手法で中央制御装置10に送信する。そして、第2計測ロボット16は自律移動してデータを収集するため、管理者の負担が軽減される。   Such a second measurement robot 16 automatically measures the radio wave intensity while referring to a map for self-position estimation, and transmits the measurement result to the central control device 10 by the method described above. Since the second measuring robot 16 moves autonomously and collects data, the burden on the administrator is reduced.

また、第2計測ロボット16による3次元形状の取得については、第1計測ロボット14による3次元形状の取得と略同じである。ただし、取得された3次元形状と取得位置とは、実測値データと同様の手段で中央制御装置10に送信される。   The acquisition of the three-dimensional shape by the second measurement robot 16 is substantially the same as the acquisition of the three-dimensional shape by the first measurement robot 14. However, the acquired three-dimensional shape and acquisition position are transmitted to the central control device 10 by means similar to the actual measurement value data.

図8は中央制御装置10の構成を示すブロック図である。図8を参照して、中央制御装置10は、マイクロコンピュータ或いはCPUとも呼ばれるプロセッサ150などを含む。プロセッサ150には、バス152を介して、メモリ154、出力装置156、入力装置158、材質パラメータデータベース(DB)160および無線通信ボード162などが接続される。また、無線通信ボード162にはアンテナ164が接続される。   FIG. 8 is a block diagram showing the configuration of the central controller 10. Referring to FIG. 8, the central control device 10 includes a processor 150 called a microcomputer or CPU. A memory 154, an output device 156, an input device 158, a material parameter database (DB) 160, a wireless communication board 162, and the like are connected to the processor 150 via a bus 152. In addition, an antenna 164 is connected to the wireless communication board 162.

プロセッサ150は、中央制御装置10の全体制御を司る。メモリ154は記憶部とも呼ばれ、RAMおよびHDDなどを含む。メモリ154のHDDには中央制御装置10の動作を制御するためのプログラムなどが予め記憶される。また、メモリ154のRAMは、プロセッサ150のワークメモリまたはバッファメモリとして用いられる。   The processor 150 manages the overall control of the central controller 10. The memory 154 is also called a storage unit and includes a RAM, an HDD, and the like. In the HDD of the memory 154, a program for controlling the operation of the central control device 10 is stored in advance. The RAM in the memory 154 is used as a work memory or a buffer memory for the processor 150.

出力装置156は、たとえばディスプレイなどであり、入力装置158は、たとえばマウスやキーボードである。たとえば、管理者は、中央制御装置10の状態を、出力装置156および入力装置158を利用して、可視化された電波環境を確認することが出来る。また、管理者は、集音ロボット12および第1計測ロボット14を遠隔操作する際にも、出力装置156および入力装置158を利用する。   The output device 156 is, for example, a display, and the input device 158 is, for example, a mouse or a keyboard. For example, the administrator can check the state of the central control device 10 using the output device 156 and the input device 158 and the visualized radio wave environment. The administrator also uses the output device 156 and the input device 158 when remotely operating the sound collection robot 12 and the first measurement robot 14.

材質パラメータDB160は、物の材質に対する材質パラメータの初期値を設定するためのデータベースである。たとえば、1つの材質に対して、誘電率εおよび透磁率μなどが対応付けられている。そして、後述する材質パラメータ地図を作成する際に、材質パラメータDB160が参照される。   The material parameter DB 160 is a database for setting initial values of material parameters for the material of an object. For example, a dielectric constant ε and a magnetic permeability μ are associated with one material. Then, the material parameter DB 160 is referred to when creating a material parameter map to be described later.

無線通信ボード162は、プロセッサ150から与えられた送信データを、アンテナ164を介して集音ロボット12および第1計測ロボット14などに送信する。また、無線通信ボード162は、アンテナ164を介してデータを受信してプロセッサ80に与える。たとえば、送信データとしては、集音ロボット12および第1計測ロボット14に対する動作命令(コマンド)などである。また、受信データとしては、集音ロボット12の自己位置、第1計測ロボット14の自己位置、集音した音データおよび周囲の3次元形状などである。   The wireless communication board 162 transmits the transmission data given from the processor 150 to the sound collection robot 12 and the first measurement robot 14 via the antenna 164. Further, the wireless communication board 162 receives data via the antenna 164 and gives the data to the processor 80. For example, the transmission data includes operation commands (commands) for the sound collection robot 12 and the first measurement robot 14. The received data includes the self-position of the sound collection robot 12, the self-position of the first measurement robot 14, the collected sound data, and the surrounding three-dimensional shape.

ここで、本実施例では、3次元空間の電波環境として、電波伝搬の状態を可視化する。以下、電波伝搬の状態を可視化する手順について説明する。   Here, in this embodiment, the state of radio wave propagation is visualized as a radio wave environment in a three-dimensional space. Hereinafter, a procedure for visualizing the state of radio wave propagation will be described.

まず、管理者は、第1計測ロボット14に対して3次元空間内を自律移動し、3次元空間内に設けられた複数の物の3次元形状をそれぞれ取得するように動作命令を出す。中央制御装置10は、第1計測ロボット14から複数の物の3次元形状および取得位置を受信すると、複数の物の3次元形状と取得位置とを対応付けた3次元空間情報データを作成し、自身のメモリ154に記憶する。また、第1計測ロボット14による3次元空間に設けられた複数の物の3次元形状の取得が終わり、たとえば3次元環境地図を作成する操作がされると、中央制御装置10は3次元空間情報データに基づいて3次元空間の3次元環境を示す3次元モデルを作成する。3次元モデルが作成されると、その3次元モデルから床、天井、壁および家具などの複数の物の平面がそれぞれ検出される。そして、検出した複数の物の平面のそれぞれに対して、名称および実空間と対応する3次元座標を対応付けることで、3次元環境地図が作成される。したがって、3次元環境地図データは、複数の物の3次元形状を示す平面のデータを含み、3次元空間に設けられた複数の物の3次元形状および当該複数の物の位置を示す。   First, the administrator autonomously moves in the three-dimensional space with respect to the first measuring robot 14 and issues an operation command to acquire the three-dimensional shapes of a plurality of objects provided in the three-dimensional space. When receiving the three-dimensional shape and the acquisition position of the plurality of objects from the first measurement robot 14, the central control device 10 creates three-dimensional spatial information data in which the three-dimensional shape of the plurality of objects and the acquisition position are associated with each other. Store it in its own memory 154. When the first measurement robot 14 finishes acquiring the three-dimensional shapes of a plurality of objects provided in the three-dimensional space, for example, when an operation for creating a three-dimensional environment map is performed, the central control device 10 displays the three-dimensional space information. A three-dimensional model indicating a three-dimensional environment in a three-dimensional space is created based on the data. When a three-dimensional model is created, planes of a plurality of objects such as a floor, a ceiling, a wall, and furniture are detected from the three-dimensional model. Then, a three-dimensional environment map is created by associating the three-dimensional coordinates corresponding to the name and the real space with each of the detected planes of the plurality of objects. Therefore, the three-dimensional environment map data includes plane data indicating the three-dimensional shape of the plurality of objects, and indicates the three-dimensional shape of the plurality of objects provided in the three-dimensional space and the positions of the plurality of objects.

なお、3次元空間の3次元形状の計測結果から3次元モデルを作成する技術、その3次元モデルから平面を検出する技術については、広く一般的に知られているため、ここでの詳細な説明は省略する。   Since a technique for creating a three-dimensional model from a measurement result of a three-dimensional shape in a three-dimensional space and a technique for detecting a plane from the three-dimensional model are widely known, detailed description here Is omitted.

図9(A)は3次元空間内の或る場所における3次元環境を示す。図9(A)に示す3次元環境から分かるように、3次元空間の床にはパーテーションおよびロッカーなどが設けられおり、3次元空間の壁の近くには箱が配置されている。そして、3次元空間の天井には照明が設けられている。このような3次元空間において第1計測ロボット14によって3次元形状が取得され、作成した3次元モデルから平面が検出されると、図9(B)に示すような3次元環境地図となる。つまり、図9(B)の3次元環境地図を参照して、床と対応する平面にはパーテーションおよびロッカーなどに対応する平面が配置される。また、壁と対応する平面には箱と対応する平面が配置される。そして、天井と対応する平面には、照明と対応する平面が含まれる。   FIG. 9A shows a three-dimensional environment at a certain place in the three-dimensional space. As can be seen from the three-dimensional environment shown in FIG. 9A, partitions and lockers are provided on the floor of the three-dimensional space, and boxes are arranged near the walls of the three-dimensional space. Illumination is provided on the ceiling of the three-dimensional space. When a three-dimensional shape is acquired by the first measurement robot 14 in such a three-dimensional space and a plane is detected from the created three-dimensional model, a three-dimensional environment map as shown in FIG. 9B is obtained. That is, referring to the three-dimensional environment map of FIG. 9B, planes corresponding to partitions, lockers, and the like are arranged on the plane corresponding to the floor. Further, a plane corresponding to the box is arranged on the plane corresponding to the wall. The plane corresponding to the ceiling includes the plane corresponding to the illumination.

なお、作成された3次元環境地図において、各平面には検出された順番を示す番号を用いた名称が割り振られる。   In the created three-dimensional environment map, each plane is assigned a name using a number indicating the detected order.

このように、3次元空間に設けられている複数の物を考慮して3次元環境地図を作成することが出来る。そのため、電波環境のシミュレーションには3次元空間内に設けられた家具などの複数の物が考慮されるため、シミュレーションの精度が向上する。   Thus, a three-dimensional environment map can be created in consideration of a plurality of objects provided in the three-dimensional space. Therefore, the simulation of the radio wave environment considers a plurality of objects such as furniture provided in the three-dimensional space, so that the accuracy of the simulation is improved.

また、このような3次元環境地図を、仮想空間上で天井側からの視点で見た状態で、床面から任意の高さで水平にカットすると、図10に示すような平面地図を得ることが出来る。そして、本実施例では、図10に示すような地図を、各ロボットの自己位置推定用地図として記憶する。このような自己位置推定用地図が作成される前は、各ロボットは3次元空間の平面図データに基づいて3次元空間内を自律移動し、自己位置推定用地図が作成された後は、各ロボットは自己位置推定用地図に基づいて3次元空間内を自律移動する。   Further, when such a three-dimensional environment map is cut horizontally at an arbitrary height from the floor surface in a state viewed from the ceiling side in the virtual space, a planar map as shown in FIG. 10 is obtained. I can do it. In this embodiment, a map as shown in FIG. 10 is stored as a self-position estimation map for each robot. Before such a map for self-position estimation is created, each robot autonomously moves in the three-dimensional space based on the plan view data of the three-dimensional space, and after the map for self-position estimation is created, The robot autonomously moves in the three-dimensional space based on the self-position estimation map.

次に、集音ロボット12によって集音された計測音を利用して、3次元空間内に設けられた複数の物の材質をそれぞれ推定する。まず、作業者はハンマーで複数の物のそれぞれを打撃し、そのときの打音を集音ロボット12に集音させる。このとき、集音ロボット12では、集音した打音のそれぞれに対応する計測音データを作成し、中央制御装置10に送信する。中央制御装置10は、計測音データを受信すると、計測音データを記憶すると共に、計測音データの計測位置、打撃位置および計測音データのデータ名を対応付けて、計測音テーブルに記憶する。   Next, using the measurement sound collected by the sound collection robot 12, the materials of a plurality of objects provided in the three-dimensional space are estimated. First, the worker strikes each of a plurality of objects with a hammer, and the sound collecting robot 12 collects the sound of the hitting at that time. At this time, the sound collecting robot 12 creates measurement sound data corresponding to each collected sound and transmits it to the central controller 10. When the central control apparatus 10 receives the measurement sound data, the central control apparatus 10 stores the measurement sound data, and associates the measurement position of the measurement sound data, the striking position, and the data name of the measurement sound data, and stores them in the measurement sound table.

図11を参照して、計測音テーブルには、計測位置、打撃位置および計測音の列を含む。また、計測位置の欄には集音ロボット12が打音を集音した位置(Xs,Ys,Zs)が記憶され、打撃位置の欄には複数の物がそれぞれ打撃された位置(Xa,Ya,Za)が記憶され、計測音の欄にはそれぞれの計測音データのデータ名(AS)が記憶される。   Referring to FIG. 11, the measurement sound table includes a measurement position, a striking position, and a sequence of measurement sounds. Further, the position (Xs, Ys, Zs) where the sound collecting robot 12 picks up the hitting sound is stored in the measurement position column, and the positions (Xa, Ya) where a plurality of objects are hit are respectively stored in the hitting position column. , Za), and the data name (AS) of each measurement sound data is stored in the measurement sound column.

作業者による物の打撃が終了し、たとえば管理者によって後述する材質パラメータテーブルを作成する操作がされると、中央制御装置10は、集音ロボット12から送信された計測音データを読み出し、打音のスペクトル求め、スペクトル包絡を示すメル周波数ケプストラム係数(MFCC:Mel Frequency Cepstral Coefficient)を算出する。   When the operator finishes hitting the object and, for example, an administrator performs an operation to create a material parameter table (to be described later), the central control device 10 reads out the measurement sound data transmitted from the sound collecting robot 12 and makes a sound hitting. And a Mel Frequency Cepstral Coefficient (MFCC) indicating a spectrum envelope is calculated.

本実施例では、算出したMFCCに材質を対応付けた教師データを作成し、SVM(Support vector machine)またはGMM(Gaussian Mixture Model)などの機械学習手法によって教師データを学習することで、材質を推定するための判別モデルを予め作成しておく。そして、この判別モデルに対して、材質が対応付けられていないMFCCを入力することで、材質の推定結果を得ることが出来る。   In the present embodiment, teacher data in which a material is associated with the calculated MFCC is created, and the teacher data is learned by a machine learning method such as SVM (Support vector machine) or GMM (Gaussian Mixture Model), thereby estimating the material. A discriminant model is created in advance. And the estimation result of a material can be obtained by inputting MFCC with which the material is not matched with respect to this discriminant model.

なお、集音ロボット12を利用して、複数の物をそれぞれ打撃したときの計測音データを記憶(収集)する具体的な手法については、出願人が先に出願した特願2014-177018に記載されているため、ここでの詳細な説明は省略する。   A specific method for storing (collecting) measured sound data when a plurality of objects are struck using the sound collecting robot 12 is described in Japanese Patent Application No. 2014-177018 filed earlier by the applicant. Therefore, detailed description here is omitted.

このように、作業者は、集音ロボット12と協調して、3次元空間内に設けられた複数の物をそれぞれ打撃するだけで、複数の物の材質を推定することが出来る。そのため、後述する材質パラメータ地図を作成する際の手間が軽減される。   As described above, the worker can estimate the materials of the plurality of objects only by striking each of the plurality of objects provided in the three-dimensional space in cooperation with the sound collecting robot 12. For this reason, the trouble of creating a material parameter map described later is reduced.

このようにして、3次元環境地図を作成し、複数の物の材質をそれぞれ推定すると、これらを利用して材質パラメータ地図を作成する。まず、材質パラメータ地図データを作成するために、材質パラメータテーブルが作成される。   In this way, when a three-dimensional environment map is created and the materials of a plurality of objects are estimated, a material parameter map is created using these. First, a material parameter table is created in order to create material parameter map data.

図12を参照して、材質パラメータテーブルには、平面名称、位置、材質および材質パラメータの列が含まれる。平面名称および位置の欄には、3次元環境地図における各平面の名称と位置とが記憶される。また、位置には、物の平面を示す座標、たとえば重心座標が記憶される。材質の欄には、推定された材質が記憶される。このとき、計測音データの打撃位置および平面の位置に基づいて、3次元環境地図における物の平面と、推定された材質とが関連付けられる。そして、材質の欄に記憶された材質に基づいて、材質パラメータDB160から材質パラメータが読み出され、材質パラメータの欄に記憶される。つまり、材質パラメータテーブルを利用することで、複数の物のそれぞれを表す平面に対して、材質を対応付けることができ、材質パラメータを設定することができる。   Referring to FIG. 12, the material parameter table includes columns of plane name, position, material, and material parameter. In the plane name and position column, the name and position of each plane in the three-dimensional environment map are stored. In the position, coordinates indicating the plane of the object, for example, barycentric coordinates are stored. The estimated material is stored in the material column. At this time, based on the striking position and the plane position of the measurement sound data, the plane of the object in the three-dimensional environment map is associated with the estimated material. Based on the material stored in the material column, the material parameter is read from the material parameter DB 160 and stored in the material parameter column. That is, by using the material parameter table, a material can be associated with a plane representing each of a plurality of objects, and a material parameter can be set.

このようにして、材質パラメータテーブルの各欄にデータが記憶されると、その材質パラメータテーブルと3次元環境地図とを含む、材質パラメータ地図データが作成される。これにより、たとえば材質パラメータ地図が表示されている状態では、3次元環境地図を参照しながら任意の各平面の材質パラメータを読み出すことが出来る。そして、この材質パラメータ地図に基づいて、3次元空間の電波環境を容易にシミュレーションすることが可能となる。   In this manner, when data is stored in each column of the material parameter table, material parameter map data including the material parameter table and the three-dimensional environment map is created. Thereby, for example, in the state in which the material parameter map is displayed, the material parameter of each arbitrary plane can be read with reference to the three-dimensional environment map. And based on this material parameter map, it becomes possible to easily simulate the radio wave environment of a three-dimensional space.

本実施例では、電波伝搬のシミュレーションには3次元レイトレース法が用いられる。この3次元レイトレース法によるソフトウェアの一例としては、株式会社 構造計画研究所(登録商標)が提供するRapLabと言うソフトウェアが利用可能である。   In this embodiment, a three-dimensional ray tracing method is used for radio wave propagation simulation. As an example of software based on the three-dimensional ray tracing method, software called RapLab provided by Structural Planning Laboratory Co., Ltd. (registered trademark) can be used.

次に、第2計測ロボット16を利用して、3次元空間の電波環境、つまり電波強度の実測値を計測する。図13を参照して、3次元空間の所定の位置に計測用電波を送信する送信ノードを配置し、3次元空間内に複数の計測点を決め、それぞれの計測点で計測用電波の電波強度が計測される。そして、電波強度と受信位置とが対応付けられて実測値データとされる。   Next, the second measurement robot 16 is used to measure the radio wave environment in the three-dimensional space, that is, the actual value of the radio wave intensity. Referring to FIG. 13, a transmission node for transmitting measurement radio waves is arranged at a predetermined position in the three-dimensional space, a plurality of measurement points are determined in the three-dimensional space, and the radio wave intensity of the measurement radio waves at each measurement point. Is measured. Then, the radio wave intensity and the reception position are associated with each other to obtain actually measured value data.

このようにして得られた電波強度の実測値は、シミュレーション結果に基づく電波強度の推定値と比較される。まず、シミュレーション結果に基づく電波強度の推定値は、電波強度を実測したときの位置、つまり受信点の位置(xi,yi,zi)に対応して数1示す数式を用いて算出される。   The actually measured value of the radio field intensity thus obtained is compared with the estimated value of the radio field intensity based on the simulation result. First, the estimated value of the radio wave intensity based on the simulation result is calculated by using the mathematical formula 1 corresponding to the position when the radio wave intensity is actually measured, that is, the position (xi, yi, zi) of the reception point.

次に、電波強度の推定値と実測値とを比較するために、電波強度の推定値と実測値との差が数2に示す数式を用いて算出される。   Next, in order to compare the estimated value of the radio wave intensity with the actually measured value, the difference between the estimated value of the radio wave intensity and the actually measured value is calculated using the mathematical formula shown in Equation 2.

上述の数2の数式から分かるように、同一の受信点における電波強度の推定値および実測値をそれぞれ比較することで、推定値と実測値との差が算出される。   As can be seen from the above mathematical formula 2, the difference between the estimated value and the actually measured value is calculated by comparing the estimated value and the actually measured value of the radio field intensity at the same reception point.

そして、電波強度の推定値と実測値との差が許容範囲に収まるまで、材質パラメータを更新してシミュレーションを繰り返す。このように、電波強度の推定値と実測値とを利用して材質パラメータを更新することで、シミュレーションの精度をより高めることが出来る。   Then, the material parameter is updated and the simulation is repeated until the difference between the estimated value of the radio wave intensity and the actually measured value falls within the allowable range. Thus, the accuracy of the simulation can be further improved by updating the material parameter using the estimated value and the actually measured value of the radio wave intensity.

なお、材質パラメータを更新、つまりパラメータを最適化する手法としては、最急降下法、逐次2次計画法などの最適化アルゴリズムが用いられる。この技術については、広く一般的に知られているため、ここでの詳細な説明は省略する。   As a method for updating the material parameter, that is, optimizing the parameter, an optimization algorithm such as a steepest descent method or a sequential quadratic programming method is used. Since this technique is widely known, a detailed description thereof is omitted here.

また、電波強度の推定値と実測値との差が許容範囲に収まると、そのときのシミュレーション結果に基づいて、3次元空間の電波環境を示す電波環境情報が作成される。すなわち、本実施例では、電波強度の推定値と実測値とが一致または略一致するまで、材質パラメータが何度も更新されるため、シミュレーションの精度を高く保つことが出来る。   Also, when the difference between the estimated value of the radio wave intensity and the actual measurement value falls within the allowable range, radio wave environment information indicating the radio wave environment in the three-dimensional space is created based on the simulation result at that time. That is, in this embodiment, since the material parameter is updated many times until the estimated value of the radio field intensity and the actually measured value match or substantially match, the simulation accuracy can be kept high.

このようにして、電波環境情報が作成されると、電波環境情報が可視化される。図14を参照して、たとえば3次元環境地図および電波環境情報に基づいて電波環境地図が作成され、その電波環境地図が中央制御装置10の出力装置156によって出力(表示)される。たとえば、電波環境地図は、3次元環境地図の表示に電波環境情報を重ね合わせたものであり、3次元空間内における信号強度分布を示す。このようにして3次元空間の電波環境が可視化されるため、管理者は3次元空間の電波環境を適切に把握することが出来る。また、可視化された電波環境に基づいて、物および基地局の適切な配置などを検討することが出来る。   Thus, when the radio wave environment information is created, the radio wave environment information is visualized. Referring to FIG. 14, for example, a radio wave environment map is created based on a three-dimensional environment map and radio wave environment information, and the radio wave environment map is output (displayed) by output device 156 of central controller 10. For example, a radio wave environment map is obtained by superimposing radio wave environment information on a display of a three-dimensional environment map, and indicates a signal intensity distribution in a three-dimensional space. Since the radio wave environment in the three-dimensional space is visualized in this way, the administrator can appropriately grasp the radio wave environment in the three-dimensional space. Moreover, based on the visualized radio wave environment, appropriate arrangement of objects and base stations can be examined.

さらに、たとえば管理者は、電波環境地図において、強い電波強度を示すにも関わらずアクセスポイントが設置されていない場所を、無許可のアクセスポイントが設置されている場所として発見することが出来る。   Further, for example, the administrator can find a place where an access point is not installed in spite of showing a strong radio field intensity as a place where an unauthorized access point is installed in the radio wave environment map.

なお、電波環境情報は他の手法を用いて可視化されてもよい。たとえば、他の実施例では、3次元環境を撮影しているリアルタイム画像に対して、電波環境情報を重ね合わせたものが表示されてもよい。また、その他の実施例では、自己位置推定用地図または平面図などの2次元地図に対して電波環境情報を重ね合わせたものが表示されてもよい。また、さらにその他の実施例では、ヘッドマウントディスプレイ(HMD: Head Mounted Display)を利用して、電波環境情報が表示されてもよい。また、さらにその他の実施例では、プロジェクションマッピングを利用して、実空間に対して電波環境情報に基づく画像が描画されてもよい。   The radio wave environment information may be visualized using other methods. For example, in another embodiment, an overlay of radio wave environment information may be displayed on a real-time image capturing a three-dimensional environment. In another embodiment, a radio wave environment information superimposed on a two-dimensional map such as a self-position estimation map or a plan view may be displayed. In still another embodiment, the radio wave environment information may be displayed using a head mounted display (HMD). In still another embodiment, an image based on the radio wave environment information may be drawn in real space using projection mapping.

また、他の実施例では、電波環境地図は、3次元環境地図の表示に電波環境情報を重ね合わせたものであってもよい。   In another embodiment, the radio wave environment map may be obtained by superimposing the radio wave environment information on the display of the three-dimensional environment map.

また、その他の実施例では、中央制御装置10の出力装置156にプリンタが含まれている場合、自己位置推定用地図または平面図などの2次元地図に対して電波環境情報を重ね合わせた画像がプリンタから出力されてもよい。   In another embodiment, when the output device 156 of the central controller 10 includes a printer, an image in which radio wave environment information is superimposed on a two-dimensional map such as a self-position estimation map or a plan view is displayed. It may be output from a printer.

また、さらにその他の実施例では、第1計測ロボット14によって3次元形状を取得する際には、複数の第1計測ロボット14を利用して、3次元形状を効率よく取得してもよい。たとえば、図15を参照して、2台の第1計測ロボット14を利用する際には、面積が等しくなるように領域を分割し、それぞれの領域の中で第1計測ロボット14が3次元形状を取得してもよい。また、トータルでかかる時間が最短となるように複数の第1計測ロボット14の最適な経路が計測されてもよい。さらに、Multi−agent TSP解法などに基づく最適分割された領域を複数の第1計測ロボット14によって並列的に動作させてもよい。そして、上述した手法は、第2計測ロボット16によって電波強度を実測する際にも利用されてもよい。   In still another embodiment, when a three-dimensional shape is acquired by the first measurement robot 14, a plurality of first measurement robots 14 may be used to efficiently acquire the three-dimensional shape. For example, referring to FIG. 15, when two first measurement robots 14 are used, regions are divided so that the areas are equal, and the first measurement robot 14 has a three-dimensional shape in each region. May be obtained. Further, the optimum paths of the plurality of first measurement robots 14 may be measured so that the total time required is the shortest. Furthermore, the optimally divided areas based on the multi-agent TSP solution or the like may be operated in parallel by the plurality of first measurement robots 14. The method described above may also be used when the radio field intensity is actually measured by the second measurement robot 16.

また、本実施例では、たとえばシミュレーションを繰り返しても電波強度の推定値と実測値との差が許容範囲に収まらない場合、材質パラメータを実測によって求めることが出来る。   Further, in the present embodiment, for example, when the difference between the estimated value of the radio wave intensity and the actually measured value does not fall within the allowable range even if the simulation is repeated, the material parameter can be obtained by actually measuring.

図16を参照して、計測用電波を送信する第2計測ロボット16aおよび計測用電波を受信する第2計測ロボット16bを用意し、管理者はそれぞれに操作端末を接続して直接操作する。この状態で、たとえば図13に示す送信ノードから送信される計測用電波が届きにくい場所で、第2計測ロボット16aから計測用電波を送信させ、第2計測ロボット16bによって様々な位置から計測用電波を受信する。これにより、計測用電波が届きにくい場所に設けられた物の材質パラメータ、つまり誘電率および透磁率などを求めることが出来る。   Referring to FIG. 16, a second measurement robot 16 a that transmits measurement radio waves and a second measurement robot 16 b that receives measurement radio waves are prepared, and an administrator directly operates by connecting an operation terminal to each. In this state, for example, in a place where the measurement radio wave transmitted from the transmission node shown in FIG. 13 is difficult to reach, the measurement radio wave is transmitted from the second measurement robot 16a, and the measurement radio wave is transmitted from various positions by the second measurement robot 16b. Receive. Thereby, the material parameters of the object provided in the place where the measurement radio wave is difficult to reach, that is, the dielectric constant and the magnetic permeability can be obtained.

また、図17(A),(B)に示すように、特定の物の材質パラメータを上述した2台の第2計測ロボット16a,16bによって計測してもよい。たとえば、管理者は、計測対象の中心を指定すると、中央制御装置10が自己位置推定用地図を参照し、計測対象の両面に各ロボットが移動可能な場所を計算する。そして、中央制御装置10は各ロボットに対して計算した位置に移動させる動作命令を発行し、計測対象の一方から計測用電波を送信し、他方で計測用電波を受信する。これにより、計測対象の材質パラメータを求めることが出来る。   Further, as shown in FIGS. 17A and 17B, the material parameter of a specific object may be measured by the two second measuring robots 16a and 16b described above. For example, when the administrator designates the center of the measurement target, the central control device 10 refers to the self-position estimation map and calculates a place where each robot can move on both sides of the measurement target. Then, the central control device 10 issues an operation command for moving each robot to the calculated position, transmits a measurement radio wave from one of the measurement targets, and receives the measurement radio wave on the other. Thereby, the material parameter of the measurement object can be obtained.

なお、計測用アンテナ116は指向性を有しているため、計測対象に対して計測用電波を送信し、このように送信された計測用電波を受信することが出来る。   Note that since the measurement antenna 116 has directivity, the measurement radio wave can be transmitted to the measurement target and the measurement radio wave thus transmitted can be received.

また、他の実施例では、バッファに記憶された材質パラメータテーブルが、データとしてメモリ154に記憶されてもよい。そして、他の実施例では、材質パラメータ地図に代えて、3次元環境地図データおよび材質パラメータテーブルに基づいて、電波環境がシミュレーションされてもよい。また、上述の実施例では、中央制御装置10は材質パラメータを設定するため、中央制御装置10は「材質パラメータ設定装置」と言われることもある。   In another embodiment, the material parameter table stored in the buffer may be stored in the memory 154 as data. In another embodiment, the radio wave environment may be simulated based on the three-dimensional environment map data and the material parameter table instead of the material parameter map. In the above-described embodiment, since the central control device 10 sets material parameters, the central control device 10 may be referred to as a “material parameter setting device”.

上述では本実施例の特徴を概説した。以下では、図18に示す中央制御装置10のメモリ154のメモリマップおよび図19−図21に示すフロー図を用いて本実施例について詳細に説明する。   The features of the present embodiment have been outlined above. Hereinafter, the present embodiment will be described in detail using the memory map of the memory 154 of the central controller 10 shown in FIG. 18 and the flowcharts shown in FIGS. 19 to 21.

図18は中央制御装置10のメモリ154のメモリマップの一例を示す図解図である。図18に示すように、メモリ154はプログラム記憶領域302およびデータ記憶領域304を含む。プログラム記憶領域302には、中央制御装置10を動作させるためのプログラムとして、集音ロボット12および第1計測ロボット14の動作を管理するためのロボット制御プログラム310、集音ロボット12および第1計測ロボット14が送信したデータを記憶する記憶プログラム312、3次元環境地図、自己位置推定用地図および材質パラメータ地図を作成するための地図作成プログラム314、電波環境を可視化するための電波環境可視化プログラム316および電波環境をシミュレーションするためのシミュレーションプログラム318などが記憶されている。   FIG. 18 is an illustrative view showing one example of a memory map of the memory 154 of the central controller 10. As shown in FIG. 18, the memory 154 includes a program storage area 302 and a data storage area 304. In the program storage area 302, a robot control program 310 for managing the operation of the sound collection robot 12 and the first measurement robot 14, the sound collection robot 12, and the first measurement robot as programs for operating the central control device 10. 14, a storage program 312 for storing data transmitted by 14, a map creation program 314 for creating a three-dimensional environment map, a self-position estimation map, and a material parameter map, a radio wave environment visualization program 316 for visualizing a radio wave environment, and a radio wave A simulation program 318 for simulating the environment is stored.

データ記憶領域304には、通信バッファ330、ロボット情報バッファ332、材質パラメータバッファ334、シミュレーションバッファ336などが設けられる。また、データ記憶領域304には、平面図データ338、計測音データ340、計測音テーブル342、3次元空間情報データ344、3次元環境地図データ346、自己位置推定用地図データ348、材質パラメータ地図データ350、実測値データ352および電波環境情報データ354などが記憶されている。   In the data storage area 304, a communication buffer 330, a robot information buffer 332, a material parameter buffer 334, a simulation buffer 336, and the like are provided. The data storage area 304 also includes plan view data 338, measurement sound data 340, measurement sound table 342, 3D spatial information data 344, 3D environment map data 346, self-position estimation map data 348, material parameter map data. 350, actual measurement value data 352, radio wave environment information data 354, and the like are stored.

通信バッファ330には、集音ロボット12および第1計測ロボット14から受信したデータが一時的に記憶される。ロボット情報バッファ332には、集音ロボット12および第1計測ロボット14の現在位置などのロボットの情報が一時的に記憶される。材質パラメータバッファ334には、たとえば材質パラメータ地図を作成する際に、図12に示すような材質パラメータテーブルが一時的に記憶される。シミュレーションバッファ336には、シミュレーションプログラム318によるシミュレーションの結果が一時的に記憶される。   In the communication buffer 330, data received from the sound collection robot 12 and the first measurement robot 14 is temporarily stored. The robot information buffer 332 temporarily stores robot information such as the current positions of the sound collection robot 12 and the first measurement robot 14. The material parameter buffer 334 temporarily stores a material parameter table as shown in FIG. 12, for example, when creating a material parameter map. The simulation buffer 336 temporarily stores the result of simulation by the simulation program 318.

平面図データ338は、3次元空間と対応する平面地図のデータである。計測音データ340は、集音ロボット12から受信した計測音データである。計測音テーブル342は、図11に示す構成のテーブルであり、計測音データ340に対応して、計測位置、打撃位置およびデータ名が記憶される。   Plan view data 338 is data of a plane map corresponding to the three-dimensional space. The measurement sound data 340 is measurement sound data received from the sound collection robot 12. The measurement sound table 342 is a table having the configuration shown in FIG. 11, and stores a measurement position, a striking position, and a data name corresponding to the measurement sound data 340.

3次元空間情報データ344は、第1計測ロボット14から送信された周囲の3次元形状のデータと、取得したときの第1計測ロボット14の現在位置(取得位置)とを対応付けたものである。3次元環境地図データ346は、たとえば図9(B)に示すような地図のデータである。自己位置推定用地図データ348は、たとえば図10に示すような地図のデータである。また、自己位置推定用地図データ348は作成されると、各ロボットに配信される。材質パラメータ地図データ350は、たとえば3次元環境地図データ346および材質パラメータテーブルを含むデータである。   The three-dimensional spatial information data 344 is obtained by associating the surrounding three-dimensional shape data transmitted from the first measurement robot 14 with the current position (acquisition position) of the first measurement robot 14 when acquired. . The three-dimensional environment map data 346 is map data as shown in FIG. 9B, for example. The self-position estimation map data 348 is map data as shown in FIG. 10, for example. When the self-position estimation map data 348 is created, it is distributed to each robot. The material parameter map data 350 is data including, for example, three-dimensional environment map data 346 and a material parameter table.

実測値データ352は、第2計測ロボット16によって計測された3次元空間内の電波強度と、計測したときの計測位置を含むデータである。電波環境情報データ354は、3次元空間内の電波環境を示す情報である。   The actual measurement value data 352 is data including the radio wave intensity in the three-dimensional space measured by the second measurement robot 16 and the measurement position at the time of measurement. The radio wave environment information data 354 is information indicating the radio wave environment in the three-dimensional space.

なお、図示は省略するが、データ記憶領域304には、様々な計算の結果を一時的に格納するバッファおよび/または中央制御装置10の動作に必要な他のカウンタおよび/またはフラグなども設けられる。   Although not shown, the data storage area 304 is also provided with a buffer for temporarily storing various calculation results and / or other counters and / or flags necessary for the operation of the central controller 10. .

中央制御装置10のプロセッサ150は、Linux(登録商標)ベースのOSまたはその他のOSの制御下で、図19に示す記憶処理、図20に示す地図作成処理および図21に示す電波環境可視化処理などを含む、複数のタスクを処理する。   The processor 150 of the central control apparatus 10 performs storage processing shown in FIG. 19, map creation processing shown in FIG. 20, radio wave environment visualization processing shown in FIG. 21, and the like under the control of a Linux (registered trademark) -based OS or other OS. Process multiple tasks, including

図19は記憶処理のフロー図である。たとえば、中央制御装置10の電源がオンにされて記憶処理の実行命令が発行されると、記憶処理が実行される。   FIG. 19 is a flowchart of the storage process. For example, when the central controller 10 is turned on and an execution command for storage processing is issued, the storage processing is executed.

記憶処理が実行されると、プロセッサ150はステップS1で、集音ロボット12からデータを受信したか否かを判断する。たとえば、集音ロボット12から送信された計測音データが通信バッファ330に記憶されているかが判断される。ステップS1で“YES”であれば、つまり計測音および計測に関する位置を含む計測音データを受信していれば、ステップS3でプロセッサ150は、計測音データを記憶する。つまり、受信したデータが計測音データ340としてメモリ154に記憶される。そのため、ステップS3の処理を実行するプロセッサ150は記憶手段として機能する。また、プロセッサ150はステップS3の処理が終了すると、ステップS9の処理に進む。   When the storage process is executed, the processor 150 determines whether or not data has been received from the sound collecting robot 12 in step S1. For example, it is determined whether the measurement sound data transmitted from the sound collection robot 12 is stored in the communication buffer 330. If “YES” in the step S1, that is, if the measurement sound data including the measurement sound and the position related to the measurement is received, the processor 150 stores the measurement sound data in a step S3. That is, the received data is stored in the memory 154 as measurement sound data 340. Therefore, the processor 150 that executes the process of step S3 functions as a storage unit. In addition, when the process of step S3 ends, the processor 150 proceeds to the process of step S9.

また、ステップS1で“NO”であれば、つまり集音ロボット12から計測音データを受信していなければ、ステップS5でプロセッサ150は、第1計測ロボット14からデータを受信したか否かを判断する。たとえば、第1計測ロボット14から送信された物の3次元形状のデータおよび取得したときの取得位置が、通信バッファ330に記憶されているかが判断される。ステップS5で“YES”であれば、つまり第1計測ロボット14から上記のデータを受信していれば、ステップS7でプロセッサ150は3次元空間情報データを記憶する。つまり、物の3次元形状のデータと、その3次元形状を取得したときの取得位置とが対応付けられて、3次元空間情報データ344としてメモリ154に記憶される。そのため、ステップS7の処理を実行するプロセッサ150は3次元形状記憶手段として機能する。また、プロセッサ150はステップS7の処理が終了すると、ステップS9の処理に進む。   If “NO” in the step S1, that is, if the measurement sound data is not received from the sound collection robot 12, the processor 150 determines whether or not the data is received from the first measurement robot 14 in a step S5. To do. For example, it is determined whether the three-dimensional shape data of the object transmitted from the first measurement robot 14 and the acquisition position when acquired are stored in the communication buffer 330. If “YES” in the step S5, that is, if the above data is received from the first measuring robot 14, the processor 150 stores the three-dimensional spatial information data in a step S7. That is, the data of the three-dimensional shape of the object and the acquisition position when the three-dimensional shape is acquired are associated with each other and stored in the memory 154 as the three-dimensional spatial information data 344. Therefore, the processor 150 that executes the process of step S7 functions as a three-dimensional shape storage unit. In addition, when the process of step S7 ends, the processor 150 proceeds to the process of step S9.

なお、ステップS5で“NO”であっても、つまり第1計測ロボット14からデータを受信していなくても、プロセッサ150はステップS9の処理に進む。   Note that even if “NO” in the step S5, that is, even if data is not received from the first measuring robot 14, the processor 150 proceeds to the process of the step S9.

続いて、ステップS9でプロセッサ150は、終了操作か否かを判断する。つまり、中央制御装置10を終了させる操作がされたかが判断される。ステップS9で“NO”であれば、つまり終了操作がされていなければ、プロセッサ150はステップS1の処理に戻る。一方、ステップS9で“YES”であれば、つまり終了操作がされると、プロセッサ150は記憶処理を終了させる。   Subsequently, in step S9, the processor 150 determines whether or not the operation is an end operation. That is, it is determined whether or not an operation for terminating the central control device 10 has been performed. If “NO” in the step S9, that is, if the end operation is not performed, the processor 150 returns to the process of the step S1. On the other hand, if “YES” in the step S9, that is, if an end operation is performed, the processor 150 ends the storage process.

図20は地図作成処理のフロー図である。たとえば、管理者によって3次元環境地図、自己位置推定用地図および材質パラメータ地図を作成する操作がされると、地図作成処理が実行される。   FIG. 20 is a flowchart of the map creation process. For example, when an administrator performs an operation of creating a three-dimensional environment map, a self-position estimation map, and a material parameter map, a map creation process is executed.

地図作成処理が実行されると、ステップS31でプロセッサ150は、3次元モデルを作成する。3次元空間情報データ344を読み出し、そのデータに含まれる3次元空間の3次元形状と、その3次元形状を取得したときの取得位置とに基づいて、3次元空間の3次元環境を示す3次元モデルを作成する。   When the map creation process is executed, the processor 150 creates a three-dimensional model in step S31. 3D that indicates the 3D environment of the 3D space based on the 3D shape of the 3D space included in the data and the acquisition position when the 3D shape is acquired. Create a model.

続いて、ステップS33でプロセッサ150は、平面検出処理を実行する。つまり、作成された3次元モデルから床、天井、壁、および家具などの複数の物の平面が検出される。続いて、ステップS35でプロセッサ150は、検出された物の平面に基づいて3次元環境地図を作成する。つまり、検出した物の平面に対して、名称および実空間と対応する3次元座標を対応付けて、3次元環境地図が作成される。そして、作成された3次元環境地図は、3次元環境地図データ346としてメモリ154に記憶される。なお、ステップS33の処理を実行するプロセッサ150は検出手段として機能し、ステップS35の処理を実行するプロセッサ150は3次元地図作成手段として機能する。   Subsequently, in step S33, the processor 150 executes plane detection processing. That is, the planes of a plurality of objects such as a floor, a ceiling, a wall, and furniture are detected from the created three-dimensional model. Subsequently, in step S35, the processor 150 creates a three-dimensional environment map based on the detected plane of the object. That is, a three-dimensional environment map is created by associating the detected object plane with the three-dimensional coordinates corresponding to the name and the real space. The created 3D environment map is stored in the memory 154 as 3D environment map data 346. The processor 150 that executes the process of step S33 functions as a detection unit, and the processor 150 that executes the process of step S35 functions as a three-dimensional map creation unit.

続いて、ステップS37でプロセッサ150は、3次元環境地図に基づいて自己位置推定用地図を作成する。たとえば、3次元環境地図を、仮想空間上で天井側からの視点で見た状態で、床面から任意の高さで水平にカットし、その断面に基づいて自己位置推定用地図が作成される。そして、作成された地図は自己位置推定用地図データ348としてメモリ154に記憶される。   Subsequently, in step S37, the processor 150 creates a self-position estimation map based on the three-dimensional environment map. For example, a 3D environment map is cut horizontally at an arbitrary height from the floor surface when viewed from the ceiling side in the virtual space, and a self-position estimation map is created based on the cross section. . The created map is stored in the memory 154 as self-position estimation map data 348.

続いて、ステップS39でプロセッサ150は、検出された平面の名称および3次元位置を材質パラメータバッファ334に記憶する。たとえば、材質パラメータバッファ334には材質パラメータテーブルが記憶されており、その材質パラメータテーブルに対して、3次元環境地図データ346に含まれる各平面の名称と3次元位置とが記憶される。続いて、ステップS41でプロセッサ150は、計測音データ340に基づいて材質を推定する。たとえば、上述した機械学習手法に基づいて作成された判別モデルに対して、計測音データ340に基づいて算出されたメル周波数ケプストラム係数が入力される。そして、判別モデルから出力された結果が、材質の推定結果とされる。なお、ステップS41の処理を実行するプロセッサ150は推定手段として機能する。   Subsequently, in step S39, the processor 150 stores the detected plane name and three-dimensional position in the material parameter buffer 334. For example, the material parameter buffer 334 stores a material parameter table, and the name and 3D position of each plane included in the 3D environment map data 346 are stored in the material parameter table. Subsequently, in step S41, the processor 150 estimates a material based on the measurement sound data 340. For example, the mel frequency cepstrum coefficient calculated based on the measured sound data 340 is input to the discrimination model created based on the machine learning method described above. The result output from the discrimination model is the material estimation result. The processor 150 that executes the process of step S41 functions as an estimation unit.

続いて、ステップS43でプロセッサ150は、打撃位置に基づいて、検出された平面に材質を対応付ける。つまり、計測音データ340に対応する計測音テーブル342から推定結果と対応する打撃音データの打撃位置を読み出し、材質パラメータテーブルに記憶されている平面の位置に基づいて、対応する平面を特定する。そして、材質パラメータテーブルにおいて、特定された平面に対応して推定された材質を記憶する。なお、ステップS43の処理を実行するプロセッサ150は対応付け手段として機能する。   Subsequently, in step S43, the processor 150 associates a material with the detected plane based on the hitting position. That is, the impact position of the impact sound data corresponding to the estimation result is read from the measurement sound table 342 corresponding to the measurement sound data 340, and the corresponding plane is specified based on the position of the plane stored in the material parameter table. In the material parameter table, the estimated material corresponding to the specified plane is stored. The processor 150 that executes the process of step S43 functions as an association unit.

続いて、ステップS45でプロセッサ150は、材質パラメータの初期値を設定する。つまり、材質パラメータテーブルに記憶された材質に基づいて材質パラメータDB160から材質の材質パラメータを読み出し、材質に対応して材質パラメータを材質パラメータテーブルに記憶する。なお、ステップS45の処理を実行するプロセッサ150は設定手段として機能する。   Subsequently, in step S45, the processor 150 sets initial values of material parameters. That is, the material parameter of the material is read from the material parameter DB 160 based on the material stored in the material parameter table, and the material parameter corresponding to the material is stored in the material parameter table. The processor 150 that executes the process of step S45 functions as a setting unit.

続いて、ステップS47でプロセッサ150は、材質パラメータ地図を作成する。たとえば、材質パラメータバッファ334から材質パラメータテーブルを読み出し、そのテーブルを3次元環境地図データ346に対応付けたものを、材質パラメータ地図データ350としてメモリ154に記憶する。なお、ステップS47の処理を実行するプロセッサ150は作成手段として機能する。   Subsequently, in step S47, the processor 150 creates a material parameter map. For example, a material parameter table is read from the material parameter buffer 334, and the table corresponding to the 3D environment map data 346 is stored in the memory 154 as the material parameter map data 350. The processor 150 that executes the process of step S47 functions as a creation unit.

なお、地図作成処理では材質パラメータが設定されることから、地図作成処理は材質パラメータ設定処理と言われることもある。   In addition, since a material parameter is set in the map creation process, the map creation process is sometimes referred to as a material parameter setting process.

図21は電波環境可視化処理のフロー図である。たとえば、管理者によって電波環境情報を表示させる操作がされると、電波環境可視化処理が実行される。   FIG. 21 is a flowchart of radio wave environment visualization processing. For example, when the administrator performs an operation to display the radio wave environment information, the radio wave environment visualization process is executed.

電波環境可視化処理が実行されると、ステップS61でプロセッサ150は、材質パラメータ地図データ350を読み出す。つまり、3次元空間の電波環境をシミュレーションするために材質パラメータ地図データ350が読み出される。また、材質パラメータ地図データ350に含まれる材質パラメータテーブルが、材質パラメータバッファ334に記憶される。続いて、ステップS63でプロセッサ150は、シミュレーションを実行する。つまり、読み出した材質パラメータ地図データ350に基づいて電波環境のシミュレーションが実行される。そして、シミュレーションの結果は、シミュレーションバッファ336に記憶される。なお、ステップS63の処理を実行するプロセッサ150はシミュレーション手段として機能する。   When the radio wave environment visualization process is executed, the processor 150 reads the material parameter map data 350 in step S61. That is, the material parameter map data 350 is read in order to simulate the radio wave environment in the three-dimensional space. A material parameter table included in the material parameter map data 350 is stored in the material parameter buffer 334. Subsequently, in step S63, the processor 150 executes a simulation. That is, the simulation of the radio wave environment is executed based on the read material parameter map data 350. The simulation result is stored in the simulation buffer 336. The processor 150 that executes the process of step S63 functions as a simulation unit.

続いて、ステップS65でプロセッサ150は、シミュレーション結果に基づいて電波強度を推定する。つまり、数1の数式を用いて、材質パラメータ地図(3次元環境地図)における電波強度を実測した位置と対応する位置で、電波強度が推定される。続いて、ステップS67でプロセッサ150は、実測値データ352を読み出す。つまり、第2計測ロボット16によって計測された電波強度の実測値がメモリ154から読み出される。続いて、ステップS69でプロセッサ150は、電波強度の推定値と実測値との差を算出する。つまり、数2の数式を用いて、電波強度の推定値と実測値との差が算出される。   Subsequently, in step S65, the processor 150 estimates the radio wave intensity based on the simulation result. In other words, the radio wave intensity is estimated at a position corresponding to the position where the radio wave intensity is actually measured in the material parameter map (three-dimensional environment map) using the mathematical formula of Formula 1. Subsequently, in step S67, the processor 150 reads the actual measurement value data 352. That is, the actually measured value of the radio field intensity measured by the second measuring robot 16 is read from the memory 154. Subsequently, in step S69, the processor 150 calculates a difference between the estimated value of the radio wave intensity and the actually measured value. That is, the difference between the estimated value of the radio wave intensity and the actually measured value is calculated using the mathematical formula of Formula 2.

続いて、ステップS71でプロセッサ150は、算出した差が許容範囲内か否かを判断する。つまり、算出した差が一致または略一致したかが判断される。ステップS71で“NO”であれば、つまり算出した差が一致または略一致していなければ、ステップS73で材質パラメータが変更される。つまり、材質パラメータバッファ334に記憶されている材質パラメータテーブルにおける材質パラメータの値が、電波強度の推定値と実測値との差が小さくなるように変更される。なお、ステップS73の処理を実行するプロセッサ150は変更手段として機能する。   Subsequently, in step S71, the processor 150 determines whether or not the calculated difference is within an allowable range. That is, it is determined whether the calculated difference matches or substantially matches. If “NO” in the step S71, that is, if the calculated difference does not coincide or substantially coincides, the material parameter is changed in a step S73. That is, the value of the material parameter in the material parameter table stored in the material parameter buffer 334 is changed so that the difference between the estimated value of the radio wave intensity and the actually measured value becomes small. The processor 150 that executes the process of step S73 functions as a changing unit.

続いて、ステップS75でプロセッサ150は、実測値に基づいて変更するか否かを判断する。たとえば、図16または図17(A),(B)などに示すように、管理者が特定の場所の材質パラメータを実測したかが判断される。ステップS75で“NO”であれば、たとえば管理者が任意の場所で材質パラメータを計測していなければ、プロセッサ150はステップS63の処理に戻る。つまり、変更後の材質パラメータに基づいてシミュレーションが再び実行される。   Subsequently, in step S75, the processor 150 determines whether or not to change based on the actual measurement value. For example, as shown in FIG. 16 or FIGS. 17A and 17B, it is determined whether the administrator has actually measured the material parameter of a specific location. If “NO” in the step S75, the processor 150 returns to the process of the step S63 if, for example, the administrator has not measured the material parameter at an arbitrary place. That is, the simulation is executed again based on the changed material parameter.

一方、ステップS75で“YES”であれば、たとえば管理者が任意の場所で材質パラメータを計測すると、ステップS77でプロセッサ150は、実測値に基づいて材質パラメータを変更する。つまり、図16または図17(A),(B)などに示すような状態で計測された材質パラメータが、材質パラメータテーブルに設定される。そして、ステップS77の処理が終了すると、プロセッサ150はステップS63の処理に戻る。つまり、実測に基づいて求められた材質パラメータを利用してシミュレーションが再び実行される。   On the other hand, if “YES” in the step S75, for example, if the administrator measures the material parameter at an arbitrary place, the processor 150 changes the material parameter based on the actually measured value in a step S77. That is, the material parameter measured in the state as shown in FIG. 16 or FIGS. 17A and 17B is set in the material parameter table. Then, when the process of step S77 ends, the processor 150 returns to the process of step S63. That is, the simulation is executed again using the material parameter obtained based on the actual measurement.

また、ステップS71で“YES”であれば、たとえば何度もシミュレーションが実行された結果、電波強度の推定値と実測値との差が一致または略一致した場合、ステップS79でプロセッサ150は、シミュレーション結果に基づいて電波環境情報を生成する。つまり、3次元空間の電波環境を示す情報が作成され、その情報が電波環境情報データ354としてメモリ154に記憶される。また、材質パラメータバッファ334に記憶されている材質パラメータテーブルに基づいて、材質パラメータ地図データ350に含まれる材質パラメータが更新される。つまり、材質パラメータ地図データ350に含まれる材質パラメータが最適値に更新される。   On the other hand, if “YES” in the step S71, for example, if the simulation is executed many times and the difference between the estimated value of the radio wave intensity and the actually measured value is coincident or substantially coincident, the processor 150 causes the simulation in the step S79. Radio wave environment information is generated based on the result. That is, information indicating the radio wave environment in the three-dimensional space is created, and the information is stored in the memory 154 as radio wave environment information data 354. Further, the material parameter included in the material parameter map data 350 is updated based on the material parameter table stored in the material parameter buffer 334. That is, the material parameter included in the material parameter map data 350 is updated to the optimum value.

続いて、ステップS81でプロセッサ150は、電波環境情報を表示する。たとえば、3次元環境地図データ346および電波環境情報データ354に基づいて電波環境地図が作成され、その地図が中央制御装置10の出力装置156から出力(可視化)される。そして、ステップS81の処理が終了すると、プロセッサ150は電波環境可視化処理を終了する。また、ステップS79の処理を実行するプロセッサ150は生成手段として機能し、ステップS81の処理を実行するプロセッサ150は出力手段として機能する。   Subsequently, in step S81, the processor 150 displays the radio wave environment information. For example, a radio wave environment map is created based on the three-dimensional environment map data 346 and the radio wave environment information data 354, and the map is output (visualized) from the output device 156 of the central control device 10. Then, when the process of step S81 ends, the processor 150 ends the radio wave environment visualization process. Further, the processor 150 that executes the process of step S79 functions as a generation unit, and the processor 150 that executes the process of step S81 functions as an output unit.

なお、他の実施例では、シミュレーションを繰り返した回数またはシミュレーションを繰り返した時間が閾値を超えると、材質パラメータを実測するよう管理者に促すようにしてもよい。   In another embodiment, the administrator may be prompted to actually measure the material parameter when the number of times the simulation is repeated or the time the simulation is repeated exceeds a threshold value.

<第2実施例>
第2実施例では、打音に代えて、3次元空間内で発生させた音の直接音および音が物に反射してから伝わる反射音を計測音として、3次元空間に設けられた物の材質を推定する。そのため、第2実施例では、集音ロボット12に代えてスピーカロボットが用いられると共に、第1実施例とは異なる構成の第1計測ロボット14が用いられる。
<Second embodiment>
In the second embodiment, instead of the hitting sound, the direct sound of the sound generated in the three-dimensional space and the reflected sound transmitted after the sound is reflected on the object are used as the measurement sound, and the object provided in the three-dimensional space Estimate the material. Therefore, in the second embodiment, a speaker robot is used instead of the sound collecting robot 12, and a first measurement robot 14 having a configuration different from that of the first embodiment is used.

図22はスピーカロボットの外観を示す図解図である。図22を参照して、スピーカロボットは、約0.2メートルの高さに取り付けられた2次元LRF200、スピーカロボットの下側に設けられた制御装置202および約1メートルの高さに取り付けられたスピーカ204などを有する。   FIG. 22 is an illustrative view showing an appearance of a speaker robot. Referring to FIG. 22, the speaker robot is attached to a two-dimensional LRF 200 mounted at a height of about 0.2 meters, a control device 202 provided on the lower side of the speaker robot, and a height of about 1 meter. A speaker 204 is included.

2次元LRF200は、他のロボットと同様、人間などの物体を検出するために用いられる。制御装置202は、スピーカロボットの移動についての制御のために用いられる。スピーカ204は、3次元空間内で音を発生させるために用いられる。スピーカ204はスピーカロボットの移動方向、つまり前方に音声を発生させることが可能である。   The two-dimensional LRF 200 is used to detect an object such as a human, like other robots. The control device 202 is used for controlling the movement of the speaker robot. The speaker 204 is used for generating sound in a three-dimensional space. The speaker 204 can generate sound in the moving direction of the speaker robot, that is, in the front.

図23はスピーカロボットの構成を示すブロック図である。図23を参照して、制御装置202による移動ロボットプラットフォームとしては、第1実施例の各ロボットと略同じものが利用されている。   FIG. 23 is a block diagram showing the configuration of the speaker robot. Referring to FIG. 23, as the mobile robot platform by the control apparatus 202, substantially the same robot robot as that of the first embodiment is used.

制御装置202はプロセッサ220などを含む。プロセッサ220は、マイクロコンピュータ或いはCPUとも呼ばれる。また、プロセッサ220には、バス222を介して、メモリ224、センサ入出力ボード226、音声入出力ボード228および無線通信ボード230などが接続されている。また、プロセッサ220には移動機構232が接続され、センサ入出力ボード226には2次元LRF200および路程測定センサ234が接続され、音声入出力ボード228にはスピーカ204が接続され、無線通信ボード230にはアンテナ236が接続される。   The control device 202 includes a processor 220 and the like. The processor 220 is also called a microcomputer or CPU. In addition, a memory 224, a sensor input / output board 226, an audio input / output board 228, a wireless communication board 230, and the like are connected to the processor 220 via a bus 222. Further, the processor 220 is connected to the moving mechanism 232, the sensor input / output board 226 is connected to the two-dimensional LRF 200 and the path length measurement sensor 234, the audio input / output board 228 is connected to the speaker 204, and the wireless communication board 230 is connected. Is connected to an antenna 236.

プロセッサ220は、スピーカロボットの全体制御を司る。メモリ224はROM、RAMおよびHDDを含む。HDDおよびROMには、スピーカロボットの動作を制御するための制御プログラムが予め記憶される。たとえば、制御プログラムには、各センサの出力(センサ情報)を検知するための検知プログラムや、中央制御装置10などの外部コンピュータとの間で必要なデータやコマンドを送受信するための通信プログラムなどが含まれる。また、RAMは、プロセッサ220のワークメモリまたはバッファメモリとして用いられる。   The processor 220 is responsible for overall control of the speaker robot. The memory 224 includes ROM, RAM, and HDD. In the HDD and ROM, a control program for controlling the operation of the speaker robot is stored in advance. For example, the control program includes a detection program for detecting the output (sensor information) of each sensor, a communication program for transmitting / receiving necessary data and commands to / from an external computer such as the central controller 10, and the like. included. The RAM is used as a work memory or a buffer memory for the processor 220.

センサ入出力ボード226は、たとえばDSPで構成され、センサからの信号を取り込んでプロセッサ220に与える。たとえば、センサ入出力ボード226には、周囲の物体までの計測結果が2次元LRF200から入力され、移動機構232が有する車輪の回転パルスが路程測定センサ234から入力される。センサ入出力ボード226は、これらの入力に対して所定の処理を施してからプロセッサ220に出力する。なお、プロセッサ220は、2次元LRF200および路程測定センサ234の出力を利用して自己位置を推定する。   The sensor input / output board 226 is configured by a DSP, for example, and takes in a signal from the sensor and gives it to the processor 220. For example, the sensor input / output board 226 receives the measurement results up to surrounding objects from the two-dimensional LRF 200, and the wheel rotation pulse of the moving mechanism 232 is input from the path length measurement sensor 234. The sensor input / output board 226 performs predetermined processing on these inputs, and then outputs them to the processor 220. Note that the processor 220 estimates the self-position using the outputs of the two-dimensional LRF 200 and the path measurement sensor 234.

音声入出力ボード228もまたDSPで構成され、プロセッサ220から与えられるTSP信号に従ったsweep音をスピーカ204から出力させる。   The voice input / output board 228 is also configured by a DSP, and outputs a sweep sound according to the TSP signal given from the processor 220 from the speaker 204.

無線通信ボード230もまたDSPで構成され、プロセッサ220から与えられた送信データを、アンテナ236を介して中央制御装置10などの外部コンピュータに送信する。また、無線通信ボード230は、アンテナ236を介してデータを受信し、受信したデータをプロセッサ220に与える。たとえば、送信データとしては、スピーカロボットの自己位置などである。また、受信データとしては、スピーカロボットを遠隔操作する際のコマンドなどである。   The wireless communication board 230 is also configured by a DSP, and transmits transmission data given from the processor 220 to an external computer such as the central controller 10 via the antenna 236. The wireless communication board 230 receives data via the antenna 236 and supplies the received data to the processor 220. For example, the transmission data includes the self-position of the speaker robot. The received data includes a command for remotely operating the speaker robot.

なお、移動機構232は、第1実施例の各ロボットと略同じものが採用されている。   The moving mechanism 232 is substantially the same as each robot in the first embodiment.

このようなスピーカロボットは、自己位置推定のための地図を参照しながら3次元空間内における任意の位置および/または管理者によって予め指定された位置においてsweep音を発生させる。そして、発生したsweep音は、後述する第2実施例の第1計測ロボット14によって集音される。ただし、他の実施例では、管理者などがスピーカロボットを遠隔操作することでsweep音を発生させてもよい。   Such a speaker robot generates a sweep sound at an arbitrary position in the three-dimensional space and / or a position designated in advance by an administrator while referring to a map for self-position estimation. The generated sweep sound is collected by the first measurement robot 14 of the second embodiment described later. However, in another embodiment, a sweep sound may be generated by a remote control of a speaker robot by an administrator or the like.

図24は第2実施例の第1計測ロボット14の外観を示す図解図である。図24を参照して、第2実施例の第1計測ロボット14は、第1実施例の第1計測ロボット14に対してさらに、制御装置72の上側に設けられたマイクアレイ74および約1.0メートルの高さに取り付けられた3次元LRF74などを有する。   FIG. 24 is an illustrative view showing an appearance of the first measuring robot 14 of the second embodiment. Referring to FIG. 24, the first measurement robot 14 of the second embodiment further includes a microphone array 74 provided on the upper side of the control device 72 and about 1. It has a three-dimensional LRF 74 attached to a height of 0 meters.

マイクアレイ74は、スピーカロボットが発生させた音を集音するために用いられる。また、マイクアレイ74は、音源方向を推定するために、複数のマイクを含む。また、マイクアレイ74は必要に応じて上下方向に移動可能である。そのため、このようなマイクアレイ74によって集音された音のデータに基づいて、3次元の音源方向を推定することが出来る。   The microphone array 74 is used for collecting sounds generated by the speaker robot. The microphone array 74 includes a plurality of microphones in order to estimate the sound source direction. The microphone array 74 can be moved in the vertical direction as needed. Therefore, the three-dimensional sound source direction can be estimated based on the sound data collected by such a microphone array 74.

なお、他の実施例では、第2実施例の第1計測ロボット14に計測用アンテナをさらに設けて、第1計測ロボット14によって、3次元形状の取得、計測音の集音、計測用電波の実測を行うようにしてもよい。   In another embodiment, the first measurement robot 14 of the second embodiment is further provided with a measurement antenna, and the first measurement robot 14 obtains a three-dimensional shape, collects measurement sound, and measures radio waves. Actual measurement may be performed.

図25は第1計測ロボット14の構成を示すブロック図である。図25を参照して、第2実施例の制御装置72のプロセッサ80には、マイクアレイ250が接続されている音声入出力ボード270がさらに接続される。   FIG. 25 is a block diagram showing a configuration of the first measurement robot 14. Referring to FIG. 25, a voice input / output board 270 to which a microphone array 250 is connected is further connected to the processor 80 of the control device 72 of the second embodiment.

音声入出力ボード270は、マイクアレイ250によって集音された音に対して所定の処理を施し、集音された音に対応する音声データをプロセッサ80に入力する。   The voice input / output board 270 performs predetermined processing on the sound collected by the microphone array 250 and inputs voice data corresponding to the collected sound to the processor 80.

このような第1計測ロボット14は、自己位置推定のための地図を参照しながら3次元空間内に設けられた複数の物の3次元形状を取得すると共に、スピーカロボットが発生させた音を計測する。そして、第1計測ロボット14は、計測結果を、取得位置および計測位置と共に中央制御装置10に送信する。ただし、他の実施例では、管理者などが第1計測ロボット14を遠隔操作し、管理者などの操作に応じて複数の物の3次元形状が取得され、スピーカロボットが発生させた音が計測されてもよい。   Such a first measurement robot 14 acquires a three-dimensional shape of a plurality of objects provided in a three-dimensional space while referring to a map for self-position estimation, and measures a sound generated by the speaker robot. To do. Then, the first measurement robot 14 transmits the measurement result to the central controller 10 together with the acquisition position and the measurement position. However, in another embodiment, an administrator or the like remotely operates the first measurement robot 14, and three-dimensional shapes of a plurality of objects are acquired according to the operation of the administrator or the like, and the sound generated by the speaker robot is measured. May be.

次に、スピーカロボットおよび第2実施例の第1計測ロボット14を利用して、3次元空間内に設けられた複数の物の材質の推定について説明する。管理者は、スピーカロボットおよび第2実施例の第1計測ロボット14に対して3次元空間内を自律移動し、3次元空間内で計測音を集音するように動作命令を出す。   Next, estimation of the materials of a plurality of objects provided in the three-dimensional space using the speaker robot and the first measurement robot 14 of the second embodiment will be described. The administrator autonomously moves in the three-dimensional space with respect to the speaker robot and the first measurement robot 14 of the second embodiment, and issues an operation command to collect the measurement sound in the three-dimensional space.

図26を参照して、第2実施例の第1計測ロボット14は、スピーカロボットが発生させた音が周囲の物の平面に反射することで物から伝わる反射音と、スピーカロボットが発生させた音の直接音とを集音できるように、3次元空間内の位置を決定する。そして、第1計測ロボット14が適切な位置に移動した後、スピーカロボットは上述したsweep音を発生させる。このとき、第1計測ロボット14は、直接音と反射音とのそれぞれを集音し、集音した音を計測音として計測位置と共に中央制御装置10に送信する。中央制御装置10は、受信した計測音、つまり直接音と反射音とを計測音データとして記憶すると共に、計測音データのデータ名に計測音に関する位置(計測位置)を対応付けて、計測音テーブルに記憶する。   Referring to FIG. 26, in the first measurement robot 14 of the second embodiment, the sound generated by the speaker robot is reflected on the plane of the surrounding object, and the reflected sound transmitted from the object is generated by the speaker robot. The position in the three-dimensional space is determined so that the direct sound can be collected. Then, after the first measurement robot 14 moves to an appropriate position, the speaker robot generates the above-described sweep sound. At this time, the first measurement robot 14 collects each of the direct sound and the reflected sound, and transmits the collected sound as a measurement sound to the central control device 10 together with the measurement position. The central control apparatus 10 stores the received measurement sound, that is, the direct sound and the reflected sound as measurement sound data, and associates the position of the measurement sound (measurement position) with the data name of the measurement sound data, thereby measuring the sound table. To remember.

図27を参照して、第2実施例の計測音テーブルには、計測位置および計測音の列を含む。また、計測音の列には、直接音および反射音の列が含まれる。そして、計測音テーブルには、計測位置に対応づけて直接音および反射音のデータ名(FD,FR)が記憶されている。   Referring to FIG. 27, the measurement sound table of the second embodiment includes a column of measurement positions and measurement sounds. The measurement sound sequence includes a sequence of direct sound and reflected sound. In the measurement sound table, data names (FD, FR) of direct sound and reflected sound are stored in association with measurement positions.

計測音の集音が終了すると、中央制御装置10では、まず反射音の指向性強度を測定するために、直接音および反射音の方向のそれぞれにビームフォーマなどの音源分離処理を施して音源を分離する。次に、周波数帯域ごとに、直接音と反射音とのパワー値の比率を求め、周波数帯域ごとの反射率を求める。   When the collection of the measurement sound is completed, the central control device 10 first performs a sound source separation process such as a beamformer on each of the direct sound and the reflected sound in order to measure the directivity intensity of the reflected sound. To separate. Next, the ratio of the power value of the direct sound and the reflected sound is obtained for each frequency band, and the reflectance for each frequency band is obtained.

本実施例では、材質と反射率とを対応付けた教師データを作成し、SVMまたはGMMなどの機械学習手法によって教師データを学習することで、材質を推定するための判別モデルを作成する。そして、本実施例では、この判別モデルに対して、材質が対応付けられていない反射率を入力することで、材質の推定結果を得る。   In this embodiment, teacher data in which a material and a reflectance are associated with each other is created, and the teacher data is learned by a machine learning method such as SVM or GMM, thereby creating a discrimination model for estimating the material. In this embodiment, the estimation result of the material is obtained by inputting the reflectance not associated with the material to the discrimination model.

このように、反射音および直接音を利用することで、3次元空間内に設けられた物の材質を容易に推定することが可能となる。特に、本実施例では、音を発生させるスピーカロボットを利用することで、物の材質を推定するためのデータを自動的に収集することが出来るため、電波伝搬のシミュレーションを行う際の手間が軽減される。   Thus, by using the reflected sound and the direct sound, it is possible to easily estimate the material of the object provided in the three-dimensional space. In particular, in this embodiment, by using a speaker robot that generates sound, it is possible to automatically collect data for estimating the material of an object. Is done.

このようにして材質が推定されると、第2実施例でも材質パラメータ地図が作成される。第2実施例では、推定された材質は、計測位置に基づいて平面に関連付けられる。具体的には、計測位置に対する反射音の音源位置を算出し、算出された音源位置および平面の3次元位置に基づいて、推定された材質が物の平面に関連付けられる。そして、平面名称、位置および材質パラメータについては、第1実施例と略同じ手順で材質パラメータテーブルに設定され、第1実施例と同様に材質パラメータ地図データが作成される。   When the material is estimated in this way, a material parameter map is also created in the second embodiment. In the second embodiment, the estimated material is associated with the plane based on the measurement position. Specifically, the sound source position of the reflected sound with respect to the measurement position is calculated, and the estimated material is associated with the plane of the object based on the calculated sound source position and the three-dimensional position of the plane. The plane name, position, and material parameter are set in the material parameter table in substantially the same procedure as in the first embodiment, and material parameter map data is created as in the first embodiment.

なお、他の実施例では、第1実施例の打音と、第2実施例の直接音および反射音とを組み合わせて、物の材質が推定されてもよい。たとえば、他の実施例では、基本的には直接音および反射音を利用して材質を推定し、材質の推定がうまくいかない場合に、打音を利用して材質を推定することが考えられる。   In another embodiment, the material of an object may be estimated by combining the sound of the first embodiment with the direct sound and the reflected sound of the second embodiment. For example, in another embodiment, the material is basically estimated using direct sound and reflected sound, and when the estimation of the material is not successful, the material can be estimated using the hitting sound.

また、その他の実施例では、計測音の集音、3次元形状の取得および電波強度の計測を、1台のロボットで行うようにしてもよい。   In other embodiments, measurement sound collection, three-dimensional shape acquisition, and radio field intensity measurement may be performed by a single robot.

また、第1実施例では、複数の物のそれぞれを自動的に打撃するロボットが用いられてもよい。この場合、第2実施例と同様、物の材質を推定するためのデータを自動的に収集することが出来る。   In the first embodiment, a robot that automatically hits each of a plurality of objects may be used. In this case, as in the second embodiment, data for estimating the material of the object can be automatically collected.

また、オフィスおよび住宅だけでなく、学校の校舎、ショッピングモールなど様々な3次元空間で、電波環境のシミュレーションを行うことが出来る。   In addition to offices and houses, radio wave environments can be simulated in various three-dimensional spaces such as school buildings and shopping malls.

また、さらにその他の実施例では、第2計測ロボット16には可変指向性アンテナが設けられてもよい。また、可変指向性アンテナとしては、ESPARアンテナなどが考えられる。これにより、複数の第2計測ロボット16を利用した協調作業を行う際に、特定の範囲内の物の材質パラメータを容易に求めることが出来る。   In still another embodiment, the second measuring robot 16 may be provided with a variable directivity antenna. Moreover, an ESPAR antenna etc. can be considered as a variable directivity antenna. Thereby, when performing the cooperative work using the plurality of second measuring robots 16, the material parameters of the objects within a specific range can be easily obtained.

また、可変指向性アンテナを利用した場合、各基地局(アクセスポイント)から送信される電波のビーコン信号およびデータフレームを検出することが出来る。この場合、検出されたビーコン信号およびデータフレームに基づいて、基地局の位置の推定し、各基地局における送信出力の電力量の推定し、各基地局の無線チャネルの数を推定し、各基地局のトラフィック状態を推定することが可能になる。この場合、電波環境情報には、基地局の位置、各基地局における送信出力の電力量、各基地局の無線チャネルの数および各基地局のトラフィック状態も含まれる。そのため、電波環境地図を表示した際に、管理者は、3次元空間内における信号強度分布だけでなく、基地局の位置、各基地局における送信出力の電力量、各基地局の無線チャネルの数および各基地局のトラフィック状態も合わせて把握することが出来るようになる。   When a variable directivity antenna is used, it is possible to detect a beacon signal and a data frame of radio waves transmitted from each base station (access point). In this case, based on the detected beacon signal and data frame, the position of the base station is estimated, the amount of power of the transmission output in each base station is estimated, the number of radio channels of each base station is estimated, and each base station It becomes possible to estimate the traffic state of the station. In this case, the radio wave environment information includes the position of the base station, the amount of power of transmission output at each base station, the number of radio channels of each base station, and the traffic state of each base station. Therefore, when the radio wave environment map is displayed, the administrator not only displays the signal intensity distribution in the three-dimensional space, but also the position of the base station, the amount of transmission power at each base station, and the number of radio channels at each base station. In addition, the traffic status of each base station can be grasped together.

また、他の実施例では、3次元CADソフトウェアによって作成された3次元環境地図と、材質パラメータテーブルとに基づいて、材質パラメータ地図が作成されてもよい。   In another embodiment, a material parameter map may be created based on a 3D environment map created by 3D CAD software and a material parameter table.

また、本実施例の無線LANの基地局は、2.4G帯および5G帯の信号を送信することが可能であり、電波環境地図は、2.4G帯および5G帯の電波強度をそれぞれ切り替えて表示することが出来る。   In addition, the wireless LAN base station of the present embodiment can transmit signals of 2.4G band and 5G band, and the radio wave environment map switches the radio field intensity of 2.4G band and 5G band, respectively. Can be displayed.

また、その他の実施例のシミュレーションシステム100では、無線LANの無線通信ではなく、第5世代以降の移動通信における無線通信などの電波環境をシミュレーションしてもよい。   In addition, in the simulation system 100 according to another embodiment, a radio wave environment such as wireless communication in fifth-generation or later mobile communication may be simulated instead of wireless communication in a wireless LAN.

また、さらにその他の実施例では、計測音から算出したMFCCまたは反射率に対して材質パラメータを対応付けた教師データを作成し、材質パラメータを推定する判別モデルを作成してもよい。   In still another embodiment, teacher data in which a material parameter is associated with the MFCC or reflectance calculated from the measurement sound may be created, and a discrimination model for estimating the material parameter may be created.

また、本実施例では、機械学習手法によって作成された判別モデルを作成したり、その判別モデルに入力したりするための「計測音に関する情報」として、MFCCおよび反射率を用いたが、他の実施例では、他の数値が用いられてもよい。   In this embodiment, MFCC and reflectance are used as “information about measurement sound” for creating a discrimination model created by a machine learning method and inputting to the discrimination model. In the embodiment, other numerical values may be used.

また、その他の実施例では、第2計測ロボット16に対して、遠隔操作用の無線通信回路およびアンテナを設けてもよい。この場合、電波強度を実測する際には、遠隔操作用の無線通信回路の電源がオフにされる。   In other embodiments, the second measurement robot 16 may be provided with a wireless communication circuit and an antenna for remote operation. In this case, when actually measuring the radio field intensity, the power supply of the wireless communication circuit for remote operation is turned off.

また、第1実施例で用いた集音ロボット12、第1計測ロボット14および第2計測ロボット16と、第2実施例で用いたスピーカロボットおよび第1計測ロボット14は、3次元空間を2次元的に移動するものであったが、他の実施例では3次元空間を3次元的に移動する移動機構を備えていてもよい。また、3次元空間を3次元的に移動する移動機構を備えるロボットとしては、たとえば自律移動する飛行型のドローンなどであり、3次元空間を3次元的に移動する移動機構は空中をホバリング可能なプロペラが取り付けられたモータ(エンジン)などの動力部を含む。なお、3次元空間を3次元的に移動する移動機構を備える集音ロボット12は、飛行型集音装置と言われることもある。そして、他のロボットについても同様、飛行型第1計測装置および飛行型第2計測装置、飛行型スピーカ装置と言われることもある。   The sound collecting robot 12, the first measuring robot 14, and the second measuring robot 16 used in the first embodiment, and the speaker robot and the first measuring robot 14 used in the second embodiment are two-dimensional in a three-dimensional space. However, in another embodiment, a moving mechanism that moves three-dimensionally in a three-dimensional space may be provided. Moreover, as a robot provided with a moving mechanism that moves three-dimensionally in three dimensions, for example, a flying drone that moves autonomously, the moving mechanism that moves three-dimensionally in three-dimensional space can hover in the air. Includes a power unit such as a motor (engine) to which a propeller is attached. Note that the sound collecting robot 12 having a moving mechanism for moving three-dimensionally in a three-dimensional space may be referred to as a flying sound collecting device. Similarly, other robots may be referred to as a flight type first measurement device, a flight type second measurement device, and a flight type speaker device.

また、さらにその他の実施例では、第1計測ロボット14を定期的(たとえば、1日ごと)に動作させて、3次元環境地図が定期的に更新されるようにしてもよい。   In still another embodiment, the three-dimensional environment map may be periodically updated by operating the first measurement robot 14 periodically (for example, every day).

また、本実施例で説明した複数のプログラムは、データ配信用のサーバのHDDに記憶され、ネットワークを介して本実施例と同等の構成のシステムの中央制御装置に配信されてもよい。また、CD, DVD, BD (Blu-ray(登録商標) Disc)などの光学ディスク、USBメモリおよびメモリカードなどの記憶媒体にこれらのプログラムを記憶させた状態で、その記憶媒体が販売または配布されてもよい。そして、上記したサーバまたは記憶媒体などを通じてダウンロードされた、上記複数のプログラムが、本実施例と同等の構成のシステムの中央制御装置に適用された場合、本実施例と同等の効果が得られる。   The plurality of programs described in the present embodiment may be stored in the HDD of the data distribution server and distributed to the central control device of the system having the same configuration as that of the present embodiment via the network. In addition, storage programs such as CDs, DVDs, and BDs (Blu-ray (registered trademark) Disc) are sold or distributed with these programs stored in storage media such as USB memory and memory card. May be. When the plurality of programs downloaded through the server or storage medium described above are applied to the central control device of the system having the same configuration as that of the present embodiment, the same effect as that of the present embodiment can be obtained.

そして、本明細書中で挙げた、具体的な数値は、いずれも単なる一例であり、製品の仕様変更などに応じて適宜変更可能である。   The specific numerical values given in this specification are merely examples, and can be appropriately changed according to a change in product specifications.

10 …中央制御装置
12 …集音ロボット
14 …第1計測ロボット
16 …第2計測ロボット
100 …シミュレーションシステム
150 …プロセッサ
154 …メモリ
156 …出力装置
160 …材質パラメータデータベース
DESCRIPTION OF SYMBOLS 10 ... Central controller 12 ... Sound collecting robot 14 ... 1st measuring robot 16 ... 2nd measuring robot 100 ... Simulation system 150 ... Processor 154 ... Memory 156 ... Output device 160 ... Material parameter database

Claims (13)

3次元空間に設けられた複数の物の3次元形状および当該複数の物の位置を示す3次元地図を記憶する記憶部、
前記複数の物のそれぞれから伝わる音を計測音として集音する移動可能な集音装置、
前記集音装置によって集音された計測音および計測に関する位置を記憶する記憶手段、
前記記憶手段によって記憶されたそれぞれの計測音に基づいて、前記複数の物の材質を推定する推定手段、
前記推定手段によって推定された前記複数の物の材質を、当該複数の物のそれぞれに対応付ける対応付け手段、および
前記対応付け手段によって材質が対応付けられた前記複数の物のそれぞれに材質パラメータを設定する設定手段を備える、シミュレーションシステム。
A storage unit for storing a three-dimensional map indicating a three-dimensional shape of a plurality of objects provided in a three-dimensional space and positions of the plurality of objects;
A movable sound collector that collects sound transmitted from each of the plurality of objects as measurement sound,
Storage means for storing a measurement sound collected by the sound collection device and a position relating to measurement;
Estimating means for estimating the material of the plurality of objects based on each measurement sound stored by the storage means;
Corresponding means for associating the materials of the plurality of objects estimated by the estimating means with each of the plurality of objects, and setting material parameters for each of the plurality of objects associated with the materials by the associating means A simulation system comprising setting means for performing.
前記集音装置は、自律移動するための地図および前記地図に基づいて前記3次元空間を2次元的または3次元的に自律移動するための移動機構を含む、請求項1記載のシミュレーションシステム。   The simulation system according to claim 1, wherein the sound collecting device includes a map for autonomously moving and a moving mechanism for autonomously moving the three-dimensional space two-dimensionally or three-dimensionally based on the map. 前記3次元地図および前記複数の物のそれぞれに設定された材質パラメータに基づいて、前記3次元空間の電波環境をシミュレーションするシミュレーション手段、
前記シミュレーション手段によるシミュレーション結果に基づいて、前記3次元空間の電波環境を示す情報を生成する生成手段、および
前記生成手段によって生成された前記3次元空間の電波環境を示す情報を出力する出力手段をさらに備える、請求項1または2記載のシミュレーションシステム。
Simulation means for simulating the radio wave environment of the three-dimensional space based on the three-dimensional map and material parameters set for each of the plurality of objects;
Generation means for generating information indicating the radio wave environment of the three-dimensional space based on a simulation result by the simulation means; and output means for outputting information indicating the radio wave environment of the three-dimensional space generated by the generation means. The simulation system according to claim 1, further comprising:
前記3次元空間における複数の計測点の電波強度を計測する移動可能な電波強度計測装置、
前記3次元空間における電波強度の実測値と、前記シミュレーション手段によるシミュレーション結果に基づく電波強度の推定値とが一致しないとき、前記設定手段によって設定された材質パラメータを変更する変更手段をさらに備え、
前記シミュレーション手段は、前記変更手段によって材質パラメータが変更された状態で、前記3次元空間の電波環境を再びシミュレーションする、請求項3記載のシミュレーションシステム。
A movable radio field intensity measuring device for measuring radio field intensity at a plurality of measurement points in the three-dimensional space;
When the measured value of the radio wave intensity in the three-dimensional space and the estimated value of the radio wave intensity based on the simulation result by the simulation unit do not match, the change unit further changes the material parameter set by the setting unit,
The simulation system according to claim 3, wherein the simulation unit simulates the radio wave environment of the three-dimensional space again in a state where the material parameter is changed by the changing unit.
前記生成手段は、前記3次元空間における電波強度の実測値と、前記シミュレーション手段によるシミュレーション結果に基づく電波強度の推定値とが一致または略一致したとき、当該シミュレーション結果に基づいて、前記3次元空間の電波環境を示す情報を生成する、請求項4記載のシミュレーションシステム。   When the measured value of the radio wave intensity in the three-dimensional space and the estimated value of the radio wave intensity based on the simulation result by the simulation unit match or substantially match, the generating unit matches the three-dimensional space based on the simulation result. The simulation system according to claim 4, which generates information indicating a radio wave environment of the computer. 前記電波強度計測装置は、自律移動するための地図および前記地図に基づいて前記3次元空間を2次元的または3次元的に自律移動するための移動機構を含む、請求項4または5記載のシミュレーションシステム。   The simulation according to claim 4 or 5, wherein the radio wave intensity measuring device includes a map for autonomous movement and a moving mechanism for autonomously moving the three-dimensional space two-dimensionally or three-dimensionally based on the map. system. 前記複数の物の3次元形状を取得する移動可能な3次元形状取得装置、
前記3次元形状取得装置によって取得された複数の物の3次元形状および取得位置を記憶する3次元形状記憶手段、
前記3次元形状記憶手段によって記憶された前記複数の物の3次元形状から平面を検出する検出手段および
前記検出手段によって検出された複数の物の3次元形状の平面および当該複数の物の3次元形状の取得位置に基づいて、前記3次元空間に設けられた前記複数の物の3次元形状および当該複数の物の位置を示す3次元地図を作成する3次元地図作成手段をさらに備え、
前記記憶部は、前記3次元地図作成手段によって作成された3次元地図を記憶する、請求項1ないし6のいずれかに記載のシミュレーションシステム。
A movable three-dimensional shape acquisition device for acquiring a three-dimensional shape of the plurality of objects;
3D shape storage means for storing 3D shapes and acquisition positions of a plurality of objects acquired by the 3D shape acquisition device;
Detection means for detecting a plane from the three-dimensional shape of the plurality of objects stored by the three-dimensional shape storage means, and a plane of the three-dimensional shape of the plurality of objects detected by the detection means, and three-dimensional of the plurality of objects 3D map creation means for creating a 3D map showing the 3D shape of the plurality of objects provided in the 3D space and the position of the plurality of objects based on the acquisition position of the shape;
The simulation system according to claim 1, wherein the storage unit stores a three-dimensional map created by the three-dimensional map creating unit.
前記3次元形状取得装置は、自律移動するための地図および前記地図に基づいて前記3次元空間を2次元的または3次元的に自律移動するための移動機構を含む、請求項7記載のシミュレーションシステム。   The simulation system according to claim 7, wherein the three-dimensional shape acquisition device includes a map for autonomously moving and a moving mechanism for autonomously moving the three-dimensional space two-dimensionally or three-dimensionally based on the map. . 前記設定手段によって材質パラメータが設定された前記複数の物および前記3次元地図に基づいて、材質パラメータ地図を作成する作成手段を備える、請求項1ないし8のいずれかに記載のシミュレーションシステム。   The simulation system according to any one of claims 1 to 8, further comprising a creation unit that creates a material parameter map based on the plurality of objects whose material parameters are set by the setting unit and the three-dimensional map. 前記計測音は、前記複数の物をそれぞれ打撃したときの打音を含み、
前記推定手段は、前記複数の物をそれぞれ打撃したときの打音に基づいて、前記複数の物の材質を推定する、請求項1ないし9のいずれかに記載のシミュレーションシステム。
The measurement sound includes a hitting sound when hitting each of the plurality of objects,
The simulation system according to claim 1, wherein the estimation unit estimates a material of the plurality of objects based on a hitting sound when the plurality of objects are struck.
前記3次元地図は、前記複数の物の3次元形状を表す平面を含み、
前記対応付け手段は、前記推定手段によって推定された前記複数の物の材質を、当該複数の物の3次元形状を表す平面のそれぞれに対応付け、
前記設定手段は、前記対応付け手段によって材質が対応付けられた前記複数の物の3次元形状を表す平面のそれぞれに材質パラメータを設定する、請求項1ないし10のいずれかに記載のシミュレーションシステム。
The three-dimensional map includes a plane representing a three-dimensional shape of the plurality of objects,
The association unit associates the materials of the plurality of objects estimated by the estimation unit with each of planes representing the three-dimensional shape of the plurality of objects,
The simulation system according to any one of claims 1 to 10, wherein the setting unit sets a material parameter for each of the planes representing the three-dimensional shapes of the plurality of objects associated with the material by the association unit.
3次元空間に設けられた複数の物の3次元形状および当該複数の物の位置を示す3次元地図を記憶する記憶部および前記複数の物のそれぞれから伝わる音を計測音として集音する移動可能な集音装置を有する、シミュレーションシステムにおける材質パラメータ設定方法であって、前記シミュレーションシステムのプロセッサが、
前記集音装置によって集音された計測音および計測に関する位置を記憶する記憶ステップ、
前記記憶ステップによって記憶されたそれぞれの計測音に基づいて、前記複数の物の材質を推定する推定ステップ、
前記推定ステップによって推定された前記複数の物の材質を、当該複数の物のそれぞれに対応付ける対応付けステップ、および
前記対応付けステップによって材質が対応付けられた前記複数の物のそれぞれに材質パラメータを設定する設定ステップを実行する、材質パラメータ設定方法。
A storage unit that stores a three-dimensional shape of a plurality of objects provided in a three-dimensional space and a three-dimensional map indicating the positions of the plurality of objects, and a movable that collects sound transmitted from each of the plurality of objects as measurement sound A material parameter setting method in a simulation system having a sound collecting device, wherein the processor of the simulation system comprises:
A storage step of storing a measurement sound collected by the sound collection device and a position relating to measurement;
An estimation step of estimating the material of the plurality of objects based on the respective measurement sounds stored in the storage step;
Associating the materials of the plurality of objects estimated by the estimating step with each of the plurality of objects, and setting material parameters for each of the plurality of objects associated with the materials by the associating step A material parameter setting method for executing a setting step.
3次元空間に設けられた複数の物の3次元形状および当該複数の物の位置を示す3次元地図を記憶する記憶部、
前記複数の物のそれぞれから伝わる音に基づく計測音および計測に関する位置を記憶する記憶手段、
前記記憶手段によって記憶されたそれぞれの計測音に基づいて、前記複数の物の材質を推定する推定手段、
前記推定手段によって推定された前記複数の物の材質を、当該複数の物のそれぞれに対応付ける対応付け手段、および
前記対応付け手段によって材質が対応付けられた前記複数の物のそれぞれに材質パラメータを設定する設定手段を備える、材質パラメータ設定装置。
A storage unit for storing a three-dimensional map indicating a three-dimensional shape of a plurality of objects provided in a three-dimensional space and positions of the plurality of objects;
Storage means for storing a measurement sound based on a sound transmitted from each of the plurality of objects and a position related to the measurement;
Estimating means for estimating the material of the plurality of objects based on each measurement sound stored by the storage means;
Corresponding means for associating the materials of the plurality of objects estimated by the estimating means with each of the plurality of objects, and setting material parameters for each of the plurality of objects associated with the materials by the associating means A material parameter setting device comprising setting means for
JP2015114752A 2015-06-05 2015-06-05 Simulation system, material parameter setting method and material parameter setting device Active JP6604038B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015114752A JP6604038B2 (en) 2015-06-05 2015-06-05 Simulation system, material parameter setting method and material parameter setting device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015114752A JP6604038B2 (en) 2015-06-05 2015-06-05 Simulation system, material parameter setting method and material parameter setting device

Publications (2)

Publication Number Publication Date
JP2017003306A true JP2017003306A (en) 2017-01-05
JP6604038B2 JP6604038B2 (en) 2019-11-13

Family

ID=57751853

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015114752A Active JP6604038B2 (en) 2015-06-05 2015-06-05 Simulation system, material parameter setting method and material parameter setting device

Country Status (1)

Country Link
JP (1) JP6604038B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018128279A (en) * 2017-02-06 2018-08-16 公益財団法人鉄道総合技術研究所 Elastic wave measurement system
WO2018181931A1 (en) * 2017-03-31 2018-10-04 日本電気株式会社 Inspection device, and inspection device control method and control program
JP2018179921A (en) * 2017-04-21 2018-11-15 国立研究開発法人産業技術総合研究所 Hammering test device
WO2019181667A1 (en) * 2018-03-23 2019-09-26 パナソニック株式会社 Radio wave measurement method
WO2019229985A1 (en) * 2018-06-01 2019-12-05 三菱電機株式会社 Display system and display terminal
JP2021009167A (en) * 2020-10-29 2021-01-28 日本電気株式会社 Inspection device, control method for inspection device and control program
JP2021087137A (en) * 2019-11-28 2021-06-03 パナソニックIpマネジメント株式会社 Measurement system, measurement method, and program

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58224014A (en) * 1982-06-21 1983-12-26 Kawasaki Steel Corp Automatic controlling method of quality of material to be rolled in hot rolling
JPH02154148A (en) * 1988-12-06 1990-06-13 Mitsubishi Heavy Ind Ltd Inspecting device for structure
JPH0350684A (en) * 1989-07-19 1991-03-05 Hitachi Ltd Stereoscopic video display system
JPH10318993A (en) * 1997-03-19 1998-12-04 Fujitsu Ltd Product inspection instrument and recording medium for recording product inspection program
US6026686A (en) * 1997-03-19 2000-02-22 Fujitsu Limited Article inspection apparatus
JP2001099880A (en) * 1999-10-01 2001-04-13 Nippon Telegr & Teleph Corp <Ntt> Electromagnetic field analyzing method and record medium recording analytical program
JP2002240763A (en) * 2001-02-20 2002-08-28 Ogk Co Ltd Seat device for infant
JP2004301665A (en) * 2003-03-31 2004-10-28 Toshiba Plant Systems & Services Corp Wall surface inspection robot system and wall surface inspection method
US20140021942A1 (en) * 2012-07-23 2014-01-23 Samsung Electronics Co., Ltd. Method and apparatus for creating magnetic field map based on floor plan information of building

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58224014A (en) * 1982-06-21 1983-12-26 Kawasaki Steel Corp Automatic controlling method of quality of material to be rolled in hot rolling
JPH02154148A (en) * 1988-12-06 1990-06-13 Mitsubishi Heavy Ind Ltd Inspecting device for structure
JPH0350684A (en) * 1989-07-19 1991-03-05 Hitachi Ltd Stereoscopic video display system
JPH10318993A (en) * 1997-03-19 1998-12-04 Fujitsu Ltd Product inspection instrument and recording medium for recording product inspection program
US6026686A (en) * 1997-03-19 2000-02-22 Fujitsu Limited Article inspection apparatus
JP2001099880A (en) * 1999-10-01 2001-04-13 Nippon Telegr & Teleph Corp <Ntt> Electromagnetic field analyzing method and record medium recording analytical program
JP2002240763A (en) * 2001-02-20 2002-08-28 Ogk Co Ltd Seat device for infant
JP2004301665A (en) * 2003-03-31 2004-10-28 Toshiba Plant Systems & Services Corp Wall surface inspection robot system and wall surface inspection method
US20140021942A1 (en) * 2012-07-23 2014-01-23 Samsung Electronics Co., Ltd. Method and apparatus for creating magnetic field map based on floor plan information of building

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
奥迫伸一、坂根茂幸: "レーザレンジファインダを用いた移動ロボットによる人の追跡", 日本ロボット学会誌, vol. 第24巻、第5号, JPN6018029329, 2006, pages 605 - 613, ISSN: 0003994398 *
山下淳、原隆浩、金子透: "画像処理と音響処理の融合による打音検査", 日本機械学会論文集(C編), vol. 第72巻(715号), JPN6019008407, 2006, JP, pages 90 - 97, ISSN: 0003994397 *

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018128279A (en) * 2017-02-06 2018-08-16 公益財団法人鉄道総合技術研究所 Elastic wave measurement system
US11486860B2 (en) 2017-03-31 2022-11-01 Nec Corporation Inspection apparatus, method and program of controlling inspection apparatus
WO2018181931A1 (en) * 2017-03-31 2018-10-04 日本電気株式会社 Inspection device, and inspection device control method and control program
JP2018173390A (en) * 2017-03-31 2018-11-08 日本電気株式会社 Inspection device and control method and control program of inspection device
JP2018179921A (en) * 2017-04-21 2018-11-15 国立研究開発法人産業技術総合研究所 Hammering test device
WO2019181667A1 (en) * 2018-03-23 2019-09-26 パナソニック株式会社 Radio wave measurement method
JPWO2019181667A1 (en) * 2018-03-23 2021-01-07 パナソニック株式会社 Radio wave measurement method
US11353488B2 (en) 2018-03-23 2022-06-07 Panasonic Corporation Radio wave measurement method
CN112204424A (en) * 2018-06-01 2021-01-08 三菱电机株式会社 Display system and display terminal
JPWO2019229985A1 (en) * 2018-06-01 2021-02-12 三菱電機株式会社 Display system and display terminal
WO2019229985A1 (en) * 2018-06-01 2019-12-05 三菱電機株式会社 Display system and display terminal
CN112204424B (en) * 2018-06-01 2023-08-04 三菱电机株式会社 Display system and display terminal
JP2021087137A (en) * 2019-11-28 2021-06-03 パナソニックIpマネジメント株式会社 Measurement system, measurement method, and program
JP7403092B2 (en) 2019-11-28 2023-12-22 パナソニックIpマネジメント株式会社 Measurement system, measurement method and program
JP2021009167A (en) * 2020-10-29 2021-01-28 日本電気株式会社 Inspection device, control method for inspection device and control program
JP7207830B2 (en) 2020-10-29 2023-01-18 日本電気株式会社 Inspection device, control method and control program for inspection device

Also Published As

Publication number Publication date
JP6604038B2 (en) 2019-11-13

Similar Documents

Publication Publication Date Title
JP6604038B2 (en) Simulation system, material parameter setting method and material parameter setting device
CN106780735B (en) Semantic map construction method and device and robot
KR101850410B1 (en) Simulation apparatus and method for teaching robot based on virtual reality
JP6330200B2 (en) SOUND SOURCE POSITION ESTIMATION DEVICE, MOBILE BODY, AND MOBILE BODY CONTROL METHOD
JP5747191B2 (en) Mobile remote control system and control program therefor
KR101525891B1 (en) Method and System for Modeling LIDAR Data for Making 3D Indoor Space Information
CN105979442B (en) Noise suppressing method, device and movable equipment
JP2020035441A (en) Method for generating simulated point cloud data, apparatus, device and storage medium
EP3639218A1 (en) Method and system for generating an adaptive projected reality in construction sites
WO2014192316A1 (en) Modeling device, three-dimensional model generation device, modeling method, program, and layout simulator
CN110494813A (en) Planning and adjusted iterm based on constructability analysis
JP6069606B2 (en) Robot control system and robot control method
CN104024984A (en) Portable Device, Virtual Reality System And Method
JP2006524329A (en) System, apparatus and method for estimating the position of an object
Galetto et al. Optimal sensor positioning for large scale metrology applications
JPWO2016084389A1 (en) Modeling device, three-dimensional model generation device, modeling method, program
JP5763384B2 (en) Movement prediction apparatus, robot control apparatus, movement prediction program, and movement prediction method
US20030086096A1 (en) Telemetry equipment for the two-dimensional or three-dimensional mapping of a volume
US11494985B2 (en) System and method for mapping an interior space
JP2016050876A (en) Hammering inspection recording device
KR100757751B1 (en) Apparatus and method for creating a circumstance map of an indoor circumstance
JP2011100306A (en) Simulation system
CN101578591A (en) System for accurately and precisely locating and marking a position in space using wireless communications and robotics
Zwirello et al. Study on UWB/INS integration techniques
JP2009198382A (en) Environment map acquiring device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180516

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190312

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190507

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190924

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190930

R150 Certificate of patent or registration of utility model

Ref document number: 6604038

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250