JP7219910B2 - Optimal Compaction Judgment Construction System for Concrete - Google Patents

Optimal Compaction Judgment Construction System for Concrete Download PDF

Info

Publication number
JP7219910B2
JP7219910B2 JP2018167811A JP2018167811A JP7219910B2 JP 7219910 B2 JP7219910 B2 JP 7219910B2 JP 2018167811 A JP2018167811 A JP 2018167811A JP 2018167811 A JP2018167811 A JP 2018167811A JP 7219910 B2 JP7219910 B2 JP 7219910B2
Authority
JP
Japan
Prior art keywords
concrete
compaction
image
learning
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018167811A
Other languages
Japanese (ja)
Other versions
JP2020041290A (en
Inventor
茂美 長田
俊斉 林
淳 齋藤
亮一 ▲高▼木
裕史 谷口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kanazawa Institute of Technology (KIT)
Hazama Ando Corp
Original Assignee
Kanazawa Institute of Technology (KIT)
Hazama Ando Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kanazawa Institute of Technology (KIT), Hazama Ando Corp filed Critical Kanazawa Institute of Technology (KIT)
Priority to JP2018167811A priority Critical patent/JP7219910B2/en
Publication of JP2020041290A publication Critical patent/JP2020041290A/en
Application granted granted Critical
Publication of JP7219910B2 publication Critical patent/JP7219910B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • On-Site Construction Work That Accompanies The Preparation And Application Of Concrete (AREA)
  • Image Analysis (AREA)

Description

本発明は、フレッシュコンクリートを締固める際に、最適な締固め状態を判定するコンクリートの最適締固め判定施工システムに関する。 The present invention relates to a concrete optimal compaction determination construction system for determining an optimal compaction state when compacting fresh concrete.

通常、フレッシュコンクリートを締固める際は、運搬時、打込み時に巻き込んだ空気をコンクリートから除去し、鉄筋や埋設物などをコンクリートとよく密着させ、コンクリートを均一で密実にすることが求められる。一般に、コンクリートの締固めは、型枠内に打込まれたコンクリートにバイブレータを挿入し振動を加えることで行われている。また、この場合、コンクリートの十分な締固めの判断、つまり、締固めの判定は、ベテランの作業員や技術者のコンクリート表面に対する目視判断によって行われている。この振動締固めが十分になされることにより、コンクリートを型枠、鉄筋の隅々まで密に充填し、かつコンクリートの内部及び表面の気泡などの空隙をなくして、強度、水密性、耐久性に優れたコンクリートを作ることができる。 Normally, when compacting fresh concrete, it is required to remove the air entrained in the concrete from the concrete during transportation and placing, and to ensure that the reinforcing bars and buried objects are well adhered to the concrete to make the concrete uniform and dense. In general, compaction of concrete is performed by inserting a vibrator into the concrete that has been poured into the formwork and applying vibration to the concrete. Further, in this case, determination of sufficient compaction of concrete, that is, determination of compaction, is made by visual judgment of the concrete surface by an experienced worker or engineer. Sufficient vibration compaction allows concrete to be densely packed into every corner of the formwork and reinforcing bars, and voids such as air bubbles inside and on the surface of the concrete are eliminated to improve strength, watertightness, and durability. You can make good concrete.

なお、コンクリートの十分な締固めに関し、一般的な指針として、コンクリート標準示方書では「振動締固めが十分である証拠の一つは、コンクリートとせき板との接触面にセメントペーストの線が現れることである。また、コンクリートの容積の減っていくのが認められなくなり、表面に光沢が現れてコンクリート全体が均一に溶け合ったように見えること等から分かる。」と記載されている。 Regarding sufficient compaction of concrete, as a general guideline, the Standard Specifications for Concrete states, ``One of the evidences that vibration compaction is sufficient is the appearance of a line of cement paste on the contact surface between the concrete and the dam. In addition, it can be seen from the fact that the decrease in the volume of the concrete is no longer recognized, the surface is glossy, and the entire concrete seems to have melted uniformly.”

また、従来においては、作業員の個人的技量に左右されないで、打設コンクリートの所要の品質を確保することを目的としたコンクリートの締固め方法が特許文献1により提案され、また、カメラ撮影や、距離センサによる計測技術により打設コンクリートの締固め判定を行う技術が特許文献2及び特許文献3により提案されている。 Conventionally, Patent Document 1 proposes a concrete compaction method for the purpose of ensuring the required quality of cast concrete without being influenced by the individual skill of workers. Japanese Patent Application Laid-Open Nos. 2003-100001 and 2003-200010 propose techniques for determining the compaction of placed concrete using a measurement technique using a distance sensor.

上記特許文献1のコンクリートの締固め方法では、打設するコンクリートの型枠底部に浮揚式バイブレータを設置し、型枠内にコンクリートを所定高さになるように打設するとともに、バイブレータ付近のコンクリート圧に応じてバイブレータを振動させながらコンクリート内を上方へ浮上させることにより、打設コンクリートを下部から上方へ向けて締固める。 In the concrete compaction method of Patent Document 1, a floating vibrator is installed at the bottom of the concrete formwork to be poured, and the concrete is placed in the formwork to a predetermined height, and the concrete near the vibrator is By levitating the inside of the concrete upward while vibrating the vibrator according to the pressure, the cast concrete is compacted upward from the bottom.

この場合、バイブレータは、型枠内に打設するコンクリートが所定厚さに達すると、圧力センサーにより検出されるコンクリート圧の検出信号により原動機が駆動し、これにより、バイブレータは所定周波数で振動して周囲のコンクリートを締固めるとともに、バイブレータとコンクリートとの摩擦抵抗を減少させる。また、バイブレータのかさ比重がコンクリートの比重より軽量に形成されているので、バイブレータとコンクリートとの摩擦抵抗の減少に伴ってバイブレータに公知の浮力が発生し、バイブレータは振動して周囲のコンクリートを締固めながら上方へ上昇する。そして、バイブレータがコンクリートの上面に位置すると、コンクリート圧が0値の検出信号が圧力センサーから原動機へ送電され、バイブレータが停止してコンクリートの締固めが終了する。 In this case, when the concrete placed in the formwork reaches a predetermined thickness, the vibrator is driven by a detection signal of the concrete pressure detected by the pressure sensor, thereby vibrating the vibrator at a predetermined frequency. It compacts the surrounding concrete and reduces the frictional resistance between the vibrator and the concrete. Further, since the bulk specific gravity of the vibrator is lighter than the specific gravity of the concrete, a well-known buoyant force is generated in the vibrator as the frictional resistance between the vibrator and the concrete decreases, and the vibrator vibrates to tighten the surrounding concrete. As it hardens, it rises upwards. Then, when the vibrator is positioned on the upper surface of the concrete, a detection signal indicating that the concrete pressure is 0 is transmitted from the pressure sensor to the prime mover, the vibrator stops, and compaction of the concrete ends.

このようにこのコンクリートの締固め方法では、浮揚式バイブレータを用いることにより、コンクリートの締固め作業を自動化して、従来の重作業から解放することができ、コンクリートの締固め度合いが個人的技量に依存されないため、施工の信頼性を向上させることができる、としている。 As described above, in this concrete compaction method, by using a floating vibrator, the concrete compaction work can be automated and freed from conventional heavy work, and the degree of compaction of concrete can be determined by individual skills. It is said that the reliability of construction can be improved because it is not dependent.

上記特許文献2のコンクリートの締固め判定を行う技術は、コンクリート内部に挿入したバイブレーターで振動を加えること等によって、締固め作業を行う。ここで、あらかじめ設定した所定の時間間隔でバイブレーターを一時的に停止し、形状データ取得手段(カメラ等)によりコンクリートの表面Sの形状データを取得する。平滑度検出手段による形状データ解析によって、表面の凹凸形状が把握され、取得した表面の平滑度が検出される。検出した平滑度に基づいて締固め度判定手段がコンクリートの締固め度を定量的に判定する。この結果、所定の締固め度に達したら、締固め完了と判定する、としている。 In the technology for judging the compaction of concrete disclosed in Patent Document 2, compaction is performed by applying vibration with a vibrator inserted into the concrete. Here, the vibrator is temporarily stopped at predetermined time intervals set in advance, and the shape data of the surface S of the concrete is acquired by the shape data acquisition means (camera, etc.). By analyzing the shape data by the smoothness detection means, the uneven shape of the surface is grasped, and the acquired smoothness of the surface is detected. The compaction degree determination means quantitatively determines the compaction degree of concrete based on the detected smoothness. As a result, when a predetermined degree of compaction is reached, it is determined that compaction is completed.

また、上記特許文献3のコンクリートの締固め判定を行う技術は、光線を対象物に投射して、点群データの集合である3次元距離データを取得する3次元距離センサと、取得された前記3次元距離データを、3次元直交座標に基づく点群データに変換する座標変換部と、変換された点群データから、平面として認識される点群を抽出する平面抽出部と、抽出された平面を構成する点群の点群数を計算する点群数計算部と、計算された点群数が閾値以上であるか否かを判定する判定部と、を備えた判定システムにおいて、前記判定部で点群数が閾値以上であるときコンクリートの締固めが完了したことを判定する、としている。 In addition, the technology for determining the compaction of concrete in Patent Document 3 includes a three-dimensional distance sensor that projects a light ray onto an object and acquires three-dimensional distance data that is a set of point cloud data, and the acquired A coordinate conversion unit that converts three-dimensional distance data into point cloud data based on three-dimensional orthogonal coordinates, a plane extraction unit that extracts a point group recognized as a plane from the converted point cloud data, and the extracted plane A determination system comprising a point cloud number calculation unit that calculates the number of point clouds of the point cloud that constitutes the , it is determined that the compaction of concrete is completed when the number of point groups is equal to or greater than the threshold.

特開平4-357274号公報JP-A-4-357274 特開2017-025609号公報JP 2017-025609 A 特開2017-053084号公報JP 2017-053084 A

しかしながら、従来のコンクリートの締固めの判定は、ベテランの作業員や技術者のコンクリート表面に対する目視判断によって行われており、その判断基準が作業員や技術者の経験、技量などに依存するため、適切に判断できる者が限られており、また他面で、作業員、技術者間で判定結果に個人差が生じることがあり、さらにはコンクリート内部における振動の伝播状況までは把握できないことから、コンクリートの仕上がり品質にばらつきが生じるおそれがある、という問題がある。 However, conventional determination of concrete compaction is based on the visual judgment of the concrete surface by experienced workers and engineers, and the judgment criteria depend on the experience and skill of the workers and engineers. The number of people who can make appropriate judgments is limited, and on the other hand, there may be individual differences in judgment results between workers and engineers. There is a problem that the finish quality of concrete may vary.

また、特許文献1のコンクリートの締固め方法では、作業員の個人的技量に左右されない点で利点があるものの、バイブレータ自体が浮上するものであるため、コンクリートの締固めの判定がコンクリート内のバイブレータの挿入位置のみの判定に留まり、また、この場合も、コンクリート内部における振動の伝播状況までは把握することができないことから、コンクリートの仕上がり品質にばらつきが生じるおそれがある、という問題がある。 In addition, although the concrete compaction method of Patent Document 1 has an advantage in that it does not depend on the individual skill of the worker, since the vibrator itself floats, determination of compaction of concrete is made by the vibrator in the concrete. In this case as well, since it is not possible to grasp the state of propagation of vibration inside the concrete, there is a possibility that the finished quality of the concrete may vary.

また、特許文献2のコンクリートの締固め判定方法では、打設したコンクリートの判定画像を取得するために、あらかじめ設定した所定の時間間隔でバイブレーターを一時的に停止し、形状データ取得手段(カメラ等)によりコンクリートの表面Sの形状データを取得するため、作業が中断される、という問題がある。 In addition, in the concrete compaction determination method of Patent Document 2, in order to acquire the determination image of the placed concrete, the vibrator is temporarily stopped at predetermined time intervals, and the shape data acquisition means (camera, etc.) ) to obtain the shape data of the surface S of the concrete, there is a problem that the work is interrupted.

また、特許文献3のコンクリートの締固め判定方法では、カメラ等の撮影方法を用いていないこと、及び、3次元距離データを、3次元直交座標に基づく点群データに変換し、その点群データとコンクリートの締固め具合との関係を表す閾値を予め設計することなど、人間(設計者)による事前の作業に手間がかかる、という問題がある。 Further, in the concrete compaction determination method of Patent Document 3, a photographing method such as a camera is not used, and the three-dimensional distance data is converted into point cloud data based on three-dimensional orthogonal coordinates, and the point cloud data There is a problem that preliminary work by a human (designer), such as designing in advance a threshold value representing the relationship between the degree of concrete compaction and the degree of compaction of concrete, is troublesome.

本発明は、このような従来の問題を解決するものであり、その目的は、コンクリートの締固めの判定を、ベテランの作業員や技術者のコンクリート表面に対する目視判断と同様な操作によるコンクリートの締固めの判定を、コンピュータ化して、コンクリートの締固め判定に作業員や技術者の経験や技量などの個人差を排除したコンクリートの最適締固め判定施工システムを提供することである。 The present invention solves such conventional problems, and its object is to determine compaction of concrete by an operation similar to the visual judgment of the concrete surface by experienced workers and engineers. To provide a construction system for determining optimal compaction of concrete, eliminating individual differences such as the experience and skill of workers and engineers in compaction determination of concrete by computerizing determination of compaction.

本発明の第2の目的は、コンピュータによるコンクリートの締固め判定処理を最適化し、品質の高い締固め判定ができるコンクリートの最適締固め判定施工システムを提供することである。 A second object of the present invention is to provide a concrete optimal compaction determination construction system that optimizes concrete compaction determination processing by a computer and enables high-quality compaction determination.

上記目的を達成するために、本発明は、打設されたコンクリートに挿入されて当該コンクリートに振動を与え、コンクリートの締固めを行うバイブレータと、前記締固めされるコンクリートの画像を取得する撮影手段と、画像或いは画像特徴量とコンクリートの締固め具合に関する既知の数値列との集合を学習データとした教師あり学習をするとともに、前記撮影手段から取得された画像を基に、前記コンクリートの締固め具合に関する特徴量である数値列を算出する画像特徴量算出部と、前記画像特徴量算出部によって算出された前記数値列を基に教師あり学習をするとともに、前記コンクリートの締固め具合を表す数値の予測値を導出する学習部と、学習部からの予測値を演算して締固め判定を行う締固め判定部と、を備えるコンクリートの最適締固め判定システムを要旨とする。前記締固め判定システムにおいて、前記学習部は、前記予測値として、前記コンクリートの表面状態に関する数値の予測値を導出してもよい。 In order to achieve the above object, the present invention provides a vibrator that is inserted into placed concrete to vibrate the concrete to compact the concrete, and a photographing means that acquires an image of the compacted concrete. Then, supervised learning is performed using images or sets of image feature values and known numerical sequences related to the degree of compaction of concrete as learning data, and compaction of the concrete based on the images acquired from the photographing means. an image feature amount calculation unit for calculating a numerical value string that is a feature amount related to the condition; and supervised learning based on the numerical value sequence calculated by the image feature amount calculation unit, and a numerical value representing the compaction condition of the concrete. and a compaction determination unit that calculates the predicted value from the learning unit and determines compaction. In the compaction determination system, the learning unit may derive a numerical predicted value related to the surface state of the concrete as the predicted value.

上記目的を達成するために、本発明はまた、撮影手段を用いて、打設されたコンクリートの表面の画像を取得し、画像特徴量算出部により、画像或いは画像特徴量とコンクリートの締固め具合に関する既知の数値列との集合を学習データとした教師あり学習をするとともに、前記撮影手段から取得された画像を基に、前記コンクリートの締固め具合に関する特徴量である数値列を算出し、学習部により、前記画像特徴量算出部によって算出された前記数値列を基に教師あり学習するとともに、前記コンクリートの締固め具合を表す数値の予測値を導出し、締固め判定部により、学習部からの予測値を演算して締固め判定を行うコンクリートの最適締固め判定方法を要旨とする。 In order to achieve the above object, the present invention also acquires an image of the surface of cast concrete using a photographing means, and an image feature amount calculation unit calculates the image or the image feature amount and the compaction condition of the concrete. Supervised learning is performed using a set of known numerical value sequences for learning as learning data, and based on the image acquired from the imaging means, a numerical value sequence that is a feature amount related to the compaction condition of the concrete is calculated and learned The unit performs supervised learning based on the numerical value sequence calculated by the image feature amount calculation unit, derives a predicted value of the numerical value representing the degree of compaction of the concrete , and the compaction determination unit determines from the learning unit The gist of this paper is the optimum compaction determination method for concrete, which calculates the predicted value of .

上記目的を達成するために、本発明はさらに、打設されたコンクリートに挿入されて当該コンクリートに振動を与え、コンクリートの締固めを行うバイブレータと、前記締固めされるコンクリートの画像を取得する撮影手段と、打設されたコンクリートに対して、バイブレータを昇降動作および位置変更動作を行わせるバイブレータ駆動手段と、前記締固めされるコンクリートに対して、撮影手段を昇降動作および位置変更動作を行わせる撮影手段駆動手段と、画像或いは画像特徴量とコンクリートの締固め具合に関する既知の数値列との集合を学習データとした教師あり学習をするとともに、前記撮影手段から取得された画像を基に、前記コンクリートの締固め具合に関する特徴量である数値列を算出する画像特徴量算出部と、前記画像特徴量算出部によって算出された前記数値列を基に教師あり学習をするとともに、前記コンクリートの締固め具合を表す数値の予測値を導出する学習部と、学習部からの予測値を演算して締固め判定を行う締固め判定部と、前記バイブレータ駆動手段および前記撮影手段駆動手段を駆動制御する動作制御部と、を備えるコンクリートの最適締固め判定施工システムを要旨とする。 In order to achieve the above object, the present invention further provides a vibrator that is inserted into placed concrete to vibrate the concrete to compact the concrete, and a camera that acquires an image of the compacted concrete. means, a vibrator driving means for moving the vibrator upward and downward and changing its position with respect to the cast concrete, and a photographing means for moving upward and downward and changing its position with respect to the concrete to be compacted. Supervised learning is performed using as learning data an imaging means driving means and a set of images or image feature quantities and known numerical sequences related to the degree of compaction of concrete, and based on the images acquired from the imaging means, the above An image feature quantity calculation unit that calculates a numerical value string that is a feature quantity related to the degree of compaction of concrete; and supervised learning is performed based on the numerical value sequence calculated by the image feature quantity calculation unit, and compaction of the concrete. A learning unit that derives a predicted value of a numerical value representing the condition , a compaction determination unit that performs compaction determination by calculating the predicted value from the learning unit, and an operation that drives and controls the vibrator driving means and the photographing means driving means. and a control unit.

本発明のコンクリートの最適締固め判定施工システムによれば、型枠内に打込まれたコンクリートにバイブレータを挿入し振動を加えてコンクリートを締固めるに当り、AI(Artifical Intelligence)の機械学習機能を用いてコンクリートの締固め具合を予測して締固め判定に活用するようにしたため、コンクリートの締固め判定に作業員や技術者の経験や技量などの個人差を排除したコンクリートの最適締固め判定および施工を行うことができる。また、コンピュータによるコンクリートの締固め判定処理を最適化し、品質の高い締固め判定ができる。 According to the optimal compaction determination construction system for concrete of the present invention, when inserting a vibrator into the concrete cast into the formwork and applying vibration to compact the concrete, the machine learning function of AI (Artificial Intelligence) is used. Therefore, it is possible to determine the optimum compaction of concrete by eliminating individual differences such as the experience and skill of workers and engineers in determining the compaction of concrete. construction can be carried out. In addition, by optimizing the compaction judgment processing of concrete by a computer, it is possible to judge compaction with high quality.

本発明の一実施の形態に係るコンクリートの最適締固め判定施工システムの全体を示す構成図である。BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a configuration diagram showing the overall configuration of a concrete optimum compaction determination construction system according to an embodiment of the present invention; 上記実施の形態における制御装置に備えられたコンピュータのハードウェア構成の一例を示すブロック図である。It is a block diagram which shows an example of the hardware constitutions of the computer with which the control apparatus in the said embodiment was equipped. 上記図2に示された制御装置の機能的構成を表す機能ブロック図である。3 is a functional block diagram showing the functional configuration of the control device shown in FIG. 2; FIG. 上記実施の形態にかかる締固め判定施工システムの制御装置による締固め判定及び施工制御の処理手順を示すフローチャートである。4 is a flow chart showing a processing procedure of compaction determination and construction control by the control device of the compaction determination construction system according to the embodiment; 上記実施の形態の学習動作で採用されるCNNによる動作手順の一例を示す処理流れ図である。It is a processing flow chart showing an example of the operation procedure by CNN adopted in the learning operation of the above-mentioned embodiment. 上記実施の形態において、画像取得部により取得されるラベル付きフレーム画像が締固め操作により時間経過とともに変化する様子を示す図である。FIG. 10 is a diagram showing how a labeled frame image acquired by the image acquiring unit changes over time due to a compaction operation in the above embodiment. 上記実施の形態において、フレッシュ性の異なる3種類のコンクリートに対し、締固め試験を実施したときの締固め判定結果の良否を表す図である。FIG. 4 is a diagram showing the quality of compaction determination results when a compaction test is carried out on three types of concrete having different freshness in the above-described embodiment.

次に、この発明を実施するための形態について図を用いて説明する。図1は本発明の一実施の形態に係るコンクリートの最適締固め判定施工システム(以下、単に「締固め判定施工システム」という)の全体を示す構成図である。図1に示すように、この締固め判定施工システム1は、コンクリート2を収容する型枠3と、型枠3内において、コンクリート2に挿入されるバイブレータ4と、締固め作業中にバイブレータ4の挿入位置付近のコンクリート2の面を撮影する撮影手段としてのビデオカメラ5と、ビデオカメラ5に接続され、当該ビデオカメラ5からの撮影信号を取得して各種データ処理を行う制御装置6とを備えて成る。 Next, a mode for carrying out the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing the overall configuration of a concrete optimal compaction determination construction system (hereinafter simply referred to as "compaction determination construction system") according to an embodiment of the present invention. As shown in FIG. 1, this compaction determination construction system 1 includes a formwork 3 containing concrete 2, a vibrator 4 inserted into the concrete 2 in the formwork 3, and a vibrator 4 during compaction work. It comprises a video camera 5 as a photographing means for photographing the surface of the concrete 2 near the insertion position, and a control device 6 connected to the video camera 5 for acquiring photographing signals from the video camera 5 and performing various data processing. It consists

バイブレータ4は、当該バイブレータ4を懸架支持する支持棒7の先端(下端)に取り付けられている。ビデオカメラ5は、当該ビデオカメラ5を懸架支持するカメラ支持棒8の先端(下端)に取り付けられている。支持棒7およびカメラ支持棒8はそれぞれ、別々のレール(図示してない)に移動可能に連結され、型枠3の平面区域内部で駆動装置によって移動されるようになっている。支持棒7には昇降機(図示してない)が取り付けられており、この昇降機により支持棒7を上下方向へ運動させることによりバイブレータ4をコンクリート2に対して上下方向へ運動させるようになっている。また、カメラ支持棒8にも別のカメラ昇降部材(図示してない)が取り付けられており、このカメラ昇降部材によりカメラ支持棒8を上下方向へ運動させることによりビデオカメラ5をコンクリート2の面に対して上下方向へ運動させてコンクリート2の面からの高さ調整ができるようになっている。また、ビデオカメラ5は、位置および高さ調整により、バイブレータ4から30cm(センチメートル)程度の範囲のコンクリート2の面を撮影するように設定されている。 The vibrator 4 is attached to the tip (lower end) of a support rod 7 that suspends and supports the vibrator 4 . The video camera 5 is attached to the tip (lower end) of a camera support rod 8 that suspends and supports the video camera 5 . The support bar 7 and the camera support bar 8 are each movably connected to separate rails (not shown) and adapted to be moved within the planar area of the formwork 3 by drives. An elevator (not shown) is attached to the support rod 7, and the elevator moves the support rod 7 vertically, thereby moving the vibrator 4 vertically with respect to the concrete 2. . Another camera elevating member (not shown) is attached to the camera support rod 8 , and the camera elevating member vertically moves the camera support rod 8 to move the video camera 5 to the surface of the concrete 2 . The height from the surface of the concrete 2 can be adjusted by moving it in the vertical direction. Also, the video camera 5 is set so as to photograph the surface of the concrete 2 within a range of about 30 cm (centimeters) from the vibrator 4 by adjusting its position and height.

上述の通り、ビデオカメラ5と制御装置6とは接続関係にあるが、この接続関係は、ビデオカメラ5と制御装置6とが図1中符号9で示されるような信号線により接続されていてもよいし、或いはビデオカメラ5と制御装置6とが公衆通信ネットワーク(インターネット等)や近距離簡易通信システム(ブルーツース等)により接続されていてもよい。また、ビデオカメラ5にはレーザー距離計のような距離測定手段が搭載され、コンクリート2の打設面とビデオカメラ5との距離を計測して取得画像の縮尺の相違に対応するようになっている。縮尺対応は取得画像の中にスケールを入れることによっても行うことができる。この締固め判定施工システム1では、機械学習により対象物としてのコンクリート2の締固め具合が予測され、締固めの完了が判定される。なお、撮影手段としては、上記ビデオカメラ5以外にも、ディジタルカメラ、3D距離センサなど、2次元配列画像のキャプチャが行われるものであれば採用可能である。 As described above, the video camera 5 and the control device 6 are in a connection relationship. Alternatively, the video camera 5 and the control device 6 may be connected via a public communication network (the Internet, etc.) or a short-distance simple communication system (Bluetooth, etc.). Further, the video camera 5 is equipped with a distance measuring means such as a laser rangefinder, and measures the distance between the concrete placing surface 2 and the video camera 5 to cope with the difference in the scale of the captured image. there is Scale correspondence can also be achieved by including a scale in the acquired image. In this compaction determination construction system 1, the degree of compaction of concrete 2 as an object is predicted by machine learning, and the completion of compaction is determined. In addition to the video camera 5, the photographing means may be a digital camera, a 3D distance sensor, or any other means capable of capturing a two-dimensional array image.

本実施形態で使用する機械学習は、画像或いは画像特徴とコンクリートの締固め具合に関する既知の数値列との集合である学習データを学習することで、画像或いは画像特徴を数値列に変換するパターン変換関数を獲得し、そのパターン変換関数を用いて未知の値を予測する処理である。本実施形態では、数値列である教師データを用い、その教師データから得られたパターン変換関数を用いて将来の時点における値を予測する。なお、数値列とは、コンクリート2に関する現象の様々な観測値によって得られた数値の系列であり、その現象をある規則に基づいて観測することにより得られた数値の系列である。本実施形態では、教師データとして、締固め未完了(before)、或いは締固め完了(just)という情報を付与した画像を用いる。機械学習の一例として、畳み込みニューラルネットワーク(Convolution Neural Network: 以下、「CNN」という。)があり、本実施の形態においてはこのニューラルネットワークにおける深層学習(Deep Learning)用いた例を説明する。 The machine learning used in this embodiment is a pattern conversion that converts an image or image features into a numeric string by learning learning data, which is a set of images or image features and known numeric strings related to the degree of compaction of concrete. It is a process of obtaining a function and predicting an unknown value using the pattern conversion function. In this embodiment, teacher data, which is a sequence of numerical values, is used, and a pattern conversion function obtained from the teacher data is used to predict a value at a future point in time. Note that the numerical value sequence is a sequence of numerical values obtained from various observed values of a phenomenon related to the concrete 2, and is a sequence of numerical values obtained by observing the phenomenon based on a certain rule. In this embodiment, an image to which information indicating that compaction is not completed (before) or compaction is completed (just) is used as teaching data. As an example of machine learning, there is a convolution neural network (hereinafter referred to as "CNN"), and in the present embodiment, an example using deep learning in this neural network will be described.

なお機械学習の他の例としては、リカレントニューラルネットワーク(RNN Recurrent Neural Network)、多層パーセプトロン(MLP Multilayer Perceptron)、サポートベクターマシン(SVM Support Vector Machine)、あるいはそのSVMを回帰に対応させたサポートベクター回帰(SVR Support Vector Regression)、決定木学習,相関ルール学習,ベイジアンネットワークなどが挙げられ、本実施の形態に係る締固め判定施工システム1は、その有用性に応じてこれらのアルゴリズムのいずれかを用いてもよい。 Other examples of machine learning include a recurrent neural network (RNN Recurrent Neural Network), a multi-layer perceptron (MLP Multilayer Perceptron), a support vector machine (SVM Support Vector Machine), or a support vector regression corresponding to the SVM. (SVR Support Vector Regression), decision tree learning, association rule learning, Bayesian network, etc., and the compaction determination construction system 1 according to the present embodiment uses one of these algorithms depending on its usefulness. may

本実施の形態に係る締固め判定施工システム1が予測する対象としては、打設されたコンクリート2の締固め具合としてコンクリート2の表面の態様が挙げられる。 An object predicted by the compaction determination construction system 1 according to the present embodiment is the condition of the surface of the concrete 2 as the degree of compaction of the placed concrete 2 .

締固め判定施工システム1は、ビデオカメラ5で取得された画像信号が信号線9或いは通信ネットワークを介して制御装置6によって取得可能に構成されている。また、バイブレータ4の移動及び昇降動作が制御装置6から送られた制御信号によって制御可能に構成されている。さらに、ビデオカメラ5の移動及び昇降動作が制御装置6から送られた制御信号によって制御可能に構成されている。 The compaction determination construction system 1 is configured so that an image signal acquired by the video camera 5 can be acquired by the control device 6 via the signal line 9 or a communication network. Further, the movement and lifting operation of the vibrator 4 can be controlled by control signals sent from the control device 6 . Furthermore, the movement and elevation of the video camera 5 can be controlled by control signals sent from the control device 6 .

制御装置6は1台、またはそれ以上のコンピュータを備えてなる。制御装置6が複数台のコンピュータを備える場合には、後述する制御装置6の各機能要素は分散処理により実現される。個々のコンピュータの種類は限定されない。例えば、据置型または携帯型のパーソナルコンピュータ(PC)を用いてもよいし、ワークステーションを用いてもよいし、高機能携帯電話機(スマートフォン)や携帯電話機、携帯情報端末(PDA)などの携帯端末を用いてもよい。あるいは、様々な種類のコンピュータを組み合わせて制御装置6を構築してもよい。複数台のコンピュータを用いる場合には、これらのコンピュータはインターネットやイントラネットなどの通信ネットワークを介して接続される。 Controller 6 comprises one or more computers. When the control device 6 includes a plurality of computers, each functional element of the control device 6, which will be described later, is implemented by distributed processing. The type of individual computer is not limited. For example, a stationary or portable personal computer (PC) may be used, a workstation may be used, and a mobile terminal such as a high-performance mobile phone (smartphone), mobile phone, or personal digital assistant (PDA) may be used. may be used. Alternatively, the control device 6 may be constructed by combining various types of computers. When using multiple computers, these computers are connected via a communication network such as the Internet or an intranet.

図2は、制御装置6に備えられた個々のコンピュータ50のハードウェア構成の一例を示すブロック図である。コンピュータ50は、オペレーティングシステムや締固め判定用のアプリケーション・プログラムなどを実行する演算装置であるCPU(プロセッサ)51と、上記アプリケーション・プログラムを格納するROM(リード・オンリー・メモリ:読出し専用メモリ)、或いはデータ処理動作で随時処理される各種データが格納されるRAM(ランダム・アクセス・メモリ:随時書換え可能メモリ)で構成される主記憶部52と、ハードディスクやフラッシュメモリなどで構成される補助記憶部53と、ネットワークカードあるいは無線通信モジュールで構成される通信制御部54と、キーボードやマウスなどの入力装置55と、ディスプレイやプリンタなどの出力装置56とを備える。なお、搭載されるハードウェアモジュールはコンピュータ50の種類により異なる場合がある。例えば、据置型のPCおよびワークステーションは入力装置および出力装置としてキーボード、マウスを備えることが多く、出力装置としてディスプレイ等のモニタを備えることが多いが、スマートフォンではタッチパネルが入力装置および出力装置として機能することが多い。 FIG. 2 is a block diagram showing an example of the hardware configuration of each computer 50 provided in the control device 6. As shown in FIG. The computer 50 includes a CPU (processor) 51, which is an arithmetic unit that executes an operating system and an application program for compaction determination, a ROM (read-only memory) that stores the application program, Alternatively, a main storage unit 52 composed of RAM (random access memory: memory rewritable at any time) storing various data processed at any time in data processing operation, and an auxiliary storage unit composed of hard disk, flash memory, etc. 53, a communication control unit 54 composed of a network card or a wireless communication module, an input device 55 such as a keyboard and a mouse, and an output device 56 such as a display and a printer. Note that the hardware modules to be installed may differ depending on the type of computer 50 . For example, stationary PCs and workstations often have keyboards and mice as input and output devices, and monitors such as displays as output devices, but smartphones have touch panels that function as input and output devices. often do.

後述する制御装置6の各機能要素は、CPU51または主記憶部52の上に所定のソフトウェアを読み込ませ、CPU51の制御の下で通信制御部54や入力装置55、出力装置56などを動作させ、主記憶部52または補助記憶部53におけるデータの読み出し及び書き込みを行うことで実現される。データ処理に必要なデータやデータベースは主記憶部52または補助記憶部53内に格納される。 Each functional element of the control device 6, which will be described later, causes the CPU 51 or the main storage unit 52 to read predetermined software, operates the communication control unit 54, the input device 55, the output device 56, etc. under the control of the CPU 51, It is realized by reading and writing data in the main storage unit 52 or the auxiliary storage unit 53 . Data and databases required for data processing are stored in the main storage unit 52 or the auxiliary storage unit 53 .

図3は、上記図2に示された制御装置6の機能的構成を表す機能ブロック図である。この制御装置6は、機能的要素として、ビデオカメラ5に接続され、このビデオカメラ5によって連続して取得された画像を入力する画像取得部21と、上記主記憶部52又は補助記憶部53に設けられ、教師データ及び各種処理に必要なデータが格納されるデータベース22と、データベース22に接続され、このデータベース22から教師データを受け取る教師データ取得部23と、画像取得部21及び教師データ取得部23に接続され、これらの動作部21,23からのデータを基に入力画像の特徴量を算出する画像特徴量算出部24と、画像特徴量算出部24に接続され、撮影手段であるビデオカメラ5から取得された画像と前記画像特徴量算出部によって算出された前記数値列との関係を、機械学習を用いて学習するとともに、前記コンクリートの締固め具合を表す数値の予測値を導出する学習部(予測値導出部)25とを備える。制御装置6はさらに、画像特徴量算出部24及び学習部25における処理結果を基に締固め判定のための演算を行う演算部26と、演算部26に接続され、演算部位の演算結果により締固め具合が締固め未完了(before)であるか,締固め完了(just)であるかの判定を行う締固め判定部27と、締固め判定部27に接続され、この締固め判定部27における判定結果をモニター等の出力装置56に出力する出力部28と、締固め判定部27に接続され、この締固め判定部27における判定結果に基づきバイブレータ4の設置位置を変更したり、ビデオカメラ5の設置位置を変更したりする制御動作を行う動作制御部29とを備える。画像特徴量算出部24は、学習部25で使用される機械学習によって、受け取った画像をそのまま学習部25に渡すか、画像特徴量を算出してから学習部25へ渡すかする。 FIG. 3 is a functional block diagram showing the functional configuration of the control device 6 shown in FIG. 2 above. As functional elements, the control device 6 is connected to the video camera 5, and has an image acquisition section 21 for inputting images continuously acquired by the video camera 5, and the main storage section 52 or the auxiliary storage section 53. A database 22 provided to store teacher data and data necessary for various processes, a teacher data acquisition unit 23 connected to the database 22 and receiving teacher data from the database 22, an image acquisition unit 21, and a teacher data acquisition unit 23, and calculates the feature amount of the input image based on the data from the operation units 21 and 23; 5 using machine learning to learn the relationship between the image obtained from 5 and the numerical value sequence calculated by the image feature amount calculation unit, and learning to derive a predicted numerical value representing the degree of compaction of the concrete. and a section (predicted value derivation section) 25 . The control device 6 further includes a calculation unit 26 that performs calculations for compaction determination based on the processing results of the image feature amount calculation unit 24 and the learning unit 25, and is connected to the calculation unit 26, and performs tightening based on the calculation result of the calculation part. A compaction determination unit 27 that determines whether the compaction condition is incomplete (before) or completed (just), and is connected to the compaction determination unit 27. In the compaction determination unit 27 It is connected to an output unit 28 for outputting the judgment result to an output device 56 such as a monitor and to a compaction judging unit 27. Based on the judgment result in the compaction judging unit 27, the installation position of the vibrator 4 can be changed, and the video camera 5 and an operation control unit 29 that performs a control operation such as changing the installation position of the. The image feature amount calculation unit 24 passes the received image to the learning unit 25 as it is or calculates the image feature amount and then passes it to the learning unit 25 by machine learning used in the learning unit 25 .

図4は本実施の形態にかかる締固め判定施工システムの制御装置6による締固め判定及び施工制御の処理手順を示すフローチャートである。 FIG. 4 is a flow chart showing a processing procedure of compaction determination and construction control by the control device 6 of the compaction determination construction system according to the present embodiment.

まず、ユーザによる指示入力等を契機に制御装置6による締固め判定施工制御の処理が起動されると、型枠3内の所定の位置(挿入点Aとする)でバイブレータ4の巻き下げ、すなわち、降下動作が開始され、バイブレータ4がコンクリート2の中に挿入される(ステップS1)。バイブレータ4には、当該バイブレータ4をコンクリート2の面に対して昇降させる機構が搭載されていて、制御装置6により制御される。 First, when the process of compaction determination construction control by the control device 6 is activated by an instruction input by the user, etc., the vibrator 4 is lowered at a predetermined position (insertion point A) in the formwork 3, that is, , the lowering operation is started, and the vibrator 4 is inserted into the concrete 2 (step S1). The vibrator 4 is equipped with a mechanism for raising and lowering the vibrator 4 with respect to the surface of the concrete 2 and is controlled by the control device 6 .

次にバイブレータ4が始動される(ステップS2)とともに、ビデオカメラ5の動作が開始され、バイブレータによる振動動作を受けているコンクリート2の面が撮影される(ステップS3)。ビデオカメラ5またはカメラ支持棒8には、ビデオカメラ5とコンクリート2の面との距離を維持する機構及び距離計測器(レーザー距離計など)が搭載されていて、制御装置6により制御される。図1中の符号P1は本実施の形態におけるビデオカメラ5による撮影範囲を表す。この撮影範囲P1は、一例として、バイブレータ4から概略30cm(センチメートル)の範囲である。 Next, the vibrator 4 is started (step S2), and the operation of the video camera 5 is started, and the surface of the concrete 2 being vibrated by the vibrator is photographed (step S3). A mechanism for maintaining the distance between the video camera 5 and the surface of the concrete 2 and a distance measuring device (such as a laser rangefinder) are mounted on the video camera 5 or the camera support rod 8 and controlled by the control device 6 . Symbol P1 in FIG. 1 represents the imaging range of the video camera 5 in this embodiment. This photographing range P1 is, for example, a range of approximately 30 cm (centimeters) from the vibrator 4 .

次に、画像取得部21による画像データの取得、及び教師データ取得部22による教師データの取得が行われ、2次元配列画像のキャプチャが行われる(ステップS4)。この2次元配列画像のキャプチャ処理において、画像取得部21は、ビデオカメラ5によって連続して取得された画像を、ラベル付きフレーム画像の画像信号として受信する。この画像取得部21は、受信した画像をアナログ/ディジタル変換して画像データを生成し、2次元配列画像として画像特徴量算出部24に送付する。教師データ取得部23は、データベース22から教師データを取得し、この教師データを2次元配列画像として画像特徴量算出部24に送付する。 Next, image data is acquired by the image acquisition unit 21 and teacher data is acquired by the teacher data acquisition unit 22, and a two-dimensional array image is captured (step S4). In this process of capturing two-dimensional array images, the image acquiring unit 21 receives images successively acquired by the video camera 5 as image signals of labeled frame images. The image acquisition unit 21 analog/digital converts the received image to generate image data, and sends the generated image data to the image feature quantity calculation unit 24 as a two-dimensional array image. The teacher data acquisition unit 23 acquires teacher data from the database 22 and sends the teacher data as a two-dimensional array image to the image feature quantity calculator 24 .

本実施の形態に係る締固め判定施工システムの動作には学習フェーズと、予測(判定実行)フェーズとがある。よって、先ず学習フェーズの動作について説明する。
学習フェーズ
この学習フェーズは、画像或いは画像特徴量と、締固め具合を表す既知の数値列との集合(学習データ)をデータベース22に蓄積し、その後、蓄積した学習データを読み出して、機械学習を用いてCNNにパターン変換関数を獲得させる動作モードである。本実施の形態のように機械学習のためにCNNが用いられる場合は、上記2次元配列画像は、画像特徴量算出部24をスルー(つまり、通過)してAIすなわち、CNNへ入力される(ステップS5)。CNNは、予め、ビデオカメラ5から入力される映像のフレーム画像と、締固め状態との対応関係を学習している。このため、入力されるフレーム画像は、尤度(もっともらしさ)の高いクラスに分類される。画像特徴量算出部24は、画像データを基に、機械学習を用いて対象物であるコンクリート2の締固め具合に関する特徴量である数値ベクトル(数値列)を算出する。例えば、画像特徴量算出部24は、画像データと教師データとを用いて、将来(例えば、それぞれの画像データの取得時点から所定時間後)の、時間差によって生じるコンクリート2の締固め量の差分(以下、「差分締固め量)という)を機械学習による予測対象の数値(目的変数)とした教師あり機械学習を実行する。上記CNNは、機械学習の一例であり、公知の深層学習の手法である畳み込みニューラルネットワークである。
The operation of the compaction judgment construction system according to the present embodiment has a learning phase and a prediction (judgment execution) phase. Therefore, first, the operation of the learning phase will be described.
Learning Phase In this learning phase, a set (learning data) of an image or an image feature amount and a known numerical value string representing the degree of compaction is stored in the database 22. After that, the stored learning data is read out and machine learning is performed. It is a mode of operation that allows the CNN to obtain a pattern transformation function using When CNN is used for machine learning as in the present embodiment, the two-dimensional array image passes through the image feature amount calculation unit 24 and is input to AI, that is, CNN ( step S5). The CNN has previously learned the correspondence relationship between the frame images of the video input from the video camera 5 and the compaction state. Therefore, the input frame image is classified into a class with high likelihood (likelihood). The image feature amount calculator 24 calculates a numerical vector (numerical sequence) as a feature amount relating to the degree of compaction of the concrete 2, which is the object, using machine learning based on the image data. For example, the image feature amount calculation unit 24 uses the image data and the teacher data to calculate the difference in compaction amount of the concrete 2 caused by the time difference (for example, after a predetermined time from the acquisition of each image data) in the future ( Hereinafter, supervised machine learning is performed with a numerical value (objective variable) to be predicted by machine learning (referred to as “differential compaction amount)”. The above CNN is an example of machine learning, and is a known deep learning method A convolutional neural network.

図5はCNNによる学習フェーズの動作手順の一例を示す処理流れ図である。CNNは、図5に示されるように、入力画像データ40に対して、第1畳み込み層における畳み込み処理を実行し(ステップS21)、その次に第1プーリング層におけるプーリング処理を実行し(ステップS22)、さらにその後、第2畳み込み層における畳み込み処理を実行し(ステップS23)、その次に第2プーリング層におけるプーリング処理を実行し(ステップS24)、次に第3畳み込み層3の畳み込み処理を実行し(ステップS25)、その後、全結合層Aの処理を実行し(ステップS26)、また、全結合層Bの処理を実行する(ステップS27)というように、畳み込み処理動作とプーリング処理動作を繰り返すことで画像データから機械的に特徴量を抽出できる手法である。CNNを用いる場合の一例を示すと、画像特徴量算出部24は、畳み込み層とプーリング層とにおける処理を何回か(例えば、5回)繰り返した後に、出力層における処理を経由して、目的変数である差分締固め量の予測値を算出する。この予測値がコンクリート2の将来の締固め具合を表している。その際、画像特徴量算出部24は、CNNの学習アルゴリズムにしたがって、画像と締固め具合に関する数値列との関係を学習し、CNNの結合の重みの更新をすることにより、パターン変換関数を更新できる。ここで、画像特徴量算出部24は、いったんパターン変換関数を構築した後は、実測値のデータを用いたパターン変換関数の更新は停止してもよく、最初からパターン変換関数が構築されている場合には、パターン変換関数の更新の機能は含まれていなくてもよい。さらに、画像特徴量算出部24は、構築された状態での画像データを対象にした出力層の出力を、特徴量である数値ベクトル(例えば、256列の数値ベクトル)として、学習部25に出力する。 FIG. 5 is a processing flow chart showing an example of the operation procedure of the learning phase by CNN. As shown in FIG. 5, the CNN performs convolution processing in the first convolution layer on the input image data 40 (step S21), and then performs pooling processing in the first pooling layer (step S22 ), and then execute convolution processing in the second convolution layer (step S23), then execute pooling processing in the second pooling layer (step S24), and then execute convolution processing in the third convolution layer 3. (step S25), then the processing of the fully connected layer A is executed (step S26), and the processing of the fully connected layer B is executed (step S27), thus repeating the convolution processing operation and the pooling processing operation. This is a method that can mechanically extract feature values from image data. As an example of using a CNN, the image feature amount calculation unit 24 repeats the processing in the convolution layer and the pooling layer several times (for example, 5 times), and then passes through the processing in the output layer to obtain the target Calculate the predicted value of the differential compaction amount, which is a variable. This predicted value represents the future compaction condition of the concrete 2 . At that time, the image feature amount calculation unit 24 learns the relationship between the image and the numerical value sequence related to the degree of compaction according to the CNN learning algorithm, and updates the CNN connection weight, thereby updating the pattern conversion function. can. Here, once the image feature amount calculation unit 24 constructs the pattern conversion function, updating of the pattern conversion function using the measured value data may be stopped, and the pattern conversion function is constructed from the beginning. In some cases, the function of updating the pattern conversion function may not be included. Furthermore, the image feature amount calculation unit 24 outputs the output of the output layer targeting the image data in the constructed state to the learning unit 25 as a numerical vector (for example, a 256-column numerical vector) that is a feature amount. do.

次に、予測(判定実行)フェーズについて説明する。
予測(判定実行)フェーズ
この予測(判定実行)フェーズは、上述の学習フェーズにおいて求められたパターン変換関数を上記機械学習によって獲得したCNNを用いて、数値列を予測する動作モードである。この予測(判定実行)フェーズの動作例が図6に示されている。図6は画像取得部21により取得されるラベル付きフレーム画像が締固め操作により時間経過とともに変化する様子を示す図である。図6に示されるように、コンクリート2の打設直後(0秒後)では締固めはまだ進行しておらず、締固め判定結果も締固め未完了(before)の結果である。コンクリート2の打設が行われて4秒後の状態では、締固めはまだ十分に進行しておらず、締固め判定結果も締固め未完了(before)のままである。コンクリート2の打設が行われてから8秒後の状態では、締固めは十分に進行しており、締固め判定結果は締固め完了(just)の結果になっている。コンクリート2の打設が行われてから16秒後の状態では、締固めはさらに十分に進行しており、締固め判定結果は締固め完了(just)の判定になっている。
Next, the prediction (determination execution) phase will be described.
Prediction (Judgment Execution) Phase This prediction (judgment execution) phase is an operation mode in which the pattern conversion function obtained in the learning phase described above is used to predict a numerical sequence using the CNN obtained by the machine learning. FIG. 6 shows an operation example of this prediction (decision execution) phase. FIG. 6 is a diagram showing how the labeled frame image acquired by the image acquisition unit 21 changes over time due to the compaction operation. As shown in FIG. 6, compaction has not progressed immediately after placing the concrete 2 (after 0 seconds), and the compaction determination result is also the result of compaction incomplete (before). Four seconds after the concrete 2 is placed, the compaction has not yet progressed sufficiently, and the compaction determination result is still incomplete compaction (before). Eight seconds after the concrete 2 is placed, the compaction has progressed sufficiently, and the compaction determination result indicates that compaction is completed (just). In the state 16 seconds after the concrete 2 is placed, the compaction has progressed sufficiently, and the compaction determination result is the compaction completion (just) determination.

学習部25は、画像特徴量算出部24によって算出された数値ベクトルを基に、コンクリート2の締固め具合を表す数値として、差分締固め量の予測値を導出する。この予測値の導出処理動作の一例を説明すると、学習部25は、数値ベクトルと時系列の環境測定データとを組み合わせた数値ベクトルを基に、機械学習を実行することにより、目的変数である差分締固め量の予測値の推移を算出する。その際、学習部25は、教師データを基に、機械学習を実行することによりフィルタパラメータ等のパターン変換関数を更新する。学習部25は、いったんパターン変換関数を構築した後は、実測値のデータを用いたパターン変換関数の更新は停止してもよく、最初からパターン変換関数が構築されている場合には、パターン変換関数の更新の機能は含まれていなくてもよい。そして、学習部25は、パターン変換関数が構築された状態での機械学習による差分締固め量の予測値の推移のデータを、締固め判定部27に出力する。 Based on the numerical vector calculated by the image feature amount calculation unit 24, the learning unit 25 derives a predicted value of the differential compaction amount as a numerical value representing the degree of compaction of the concrete 2. FIG. To explain an example of this predicted value derivation processing operation, the learning unit 25 performs machine learning based on a numerical vector obtained by combining a numerical vector and time-series environmental measurement data, thereby obtaining a difference, which is an objective variable. Calculate the transition of the predicted value of the compaction amount. At that time, the learning unit 25 updates pattern conversion functions such as filter parameters by executing machine learning based on the teacher data. Once the learning unit 25 constructs the pattern conversion function, it may stop updating the pattern conversion function using the measured value data. Function update functionality need not be included. Then, the learning unit 25 outputs to the compaction determination unit 27 data on the transition of the predicted value of the difference compaction amount obtained by machine learning in the state in which the pattern conversion function is constructed.

締固め判定部27では、上記差分締固め量の予測値の推移データにより、コンクリート2の締固め具合が締固め未完了であるか、締固め完了であるかの判定を行い(ステップS6)、締固め未完了である場合は、「before」信号を出力し、ステップS3のビデオカメラ5による撮影動作に戻る。他方,締固め完了である場合は、「just」信号を出力する。さらに、締固め判定部27は、上記「before」信号又は「just」信号を動作制御部29に送付する。 The compaction determination unit 27 determines whether the compaction condition of the concrete 2 is incomplete or completed based on the transition data of the predicted value of the differential compaction amount (step S6). If the compaction is not completed, a "before" signal is output, and the process returns to step S3 for photographing by the video camera 5 . On the other hand, if compaction is complete, a "just" signal is output. Furthermore, the compaction determination unit 27 sends the “before” signal or “just” signal to the operation control unit 29 .

動作制御部29は、締固め判定部27によって出力されたコンクリート2の締固め判定結果を基に、バイブレータ4及びビデオカメラ5の動作を制御するための制御信号を生成する。そして、動作制御部29は、締固め判定部27が「just」信号を出力した場合は、バイブレータを巻き上げる動作を開始し(ステップS7)、この動作を行った後、バイブレータ4を停止させる(ステップS8)。 The operation control unit 29 generates control signals for controlling operations of the vibrator 4 and the video camera 5 based on the compaction determination result of the concrete 2 output by the compaction determination unit 27 . Then, when the compaction determination unit 27 outputs the "just" signal, the operation control unit 29 starts the operation of winding up the vibrator (step S7), and after performing this operation, stops the vibrator 4 (step S7). S8).

次に、制御装置のCPU50は、コンクリート2の全領域の締固めが完了したか否かをチェックし(ステップS9)、コンクリート2の全領域の締固めが完了していなければ、締固め領域の移動を動作制御部29に指示する(ステップS10)。動作制御部29は、支持棒7およびカメラ支持棒8をそれぞれ対応するレールに沿って移動させ、図1に示されるように、バイブレータ4による締固め位置を挿入点Aから挿入点Bへ変更し、また、ビデオカメラ5による撮影領域を撮影範囲P1から撮影範囲P2へと変更する。そして、制御装置6の処理動作によりステップS1~ステップS9の動作が行われる。 Next, the CPU 50 of the control device checks whether or not the compaction of the entire area of the concrete 2 is completed (step S9). The motion control unit 29 is instructed to move (step S10). The motion control unit 29 moves the support rod 7 and the camera support rod 8 along the corresponding rails, and changes the compaction position by the vibrator 4 from the insertion point A to the insertion point B as shown in FIG. Also, the photographing area of the video camera 5 is changed from the photographing range P1 to the photographing range P2. Then, the operations of steps S1 to S9 are performed by the processing operation of the control device 6. FIG.

実施例
フレッシュ性の異なる3種類のコンクリートに対し、締固め試験を実施した。この締固め試験では、ビデオカメラ5により、1秒当たり30フレームの映像を撮影した締固め試験映像を50本取得した。
Example A compaction test was performed on three types of concrete with different freshness. In this compaction test, the video camera 5 captured 50 compaction test images at 30 frames per second.

そして、上記1秒当たり30フレームの映像を撮影した締固め試験映像から、複数名の熟練オペレータが判定した締固め完了(just)の適正時間(フレーム番号で特定される)の平均値を取り、この平均値を、そのコンクリートの締固め試験における締固め未完了(before)と締固め完了(just)の境界の教師データとした。また、画像取得部21により取得したすべてのフレーム画像に「before」、または「just」の正解ラベルを付与し、「締固め判定」、及び「締固め判定の評価」試験とした。また、締固め試験時のバイブレータの位置によるコンクリートの締固め状態の違いを考慮して、フレーム画像を左右の2つの画像に分割し、各々に対する適正時間を判定した。 Then, from the compaction test video of 30 frames per second, the average value of the appropriate time (specified by the frame number) for completion of compaction (just) judged by a plurality of skilled operators is taken, This average value was used as training data for the borderline between uncompacted compaction (before) and compaction completed (just) in the compaction test of the concrete. Further, all the frame images acquired by the image acquiring unit 21 were given correct labels of "before" or "just", and subjected to "compaction determination" and "evaluation of compaction determination" tests. In addition, considering the difference in the compaction state of concrete due to the position of the vibrator during the compaction test, the frame image was divided into two images, left and right, and the appropriate time was determined for each.

図7は、上述のようにフレッシュ性の異なる3種類のコンクリート2に対し、締固め試験を実施したときの締固め判定結果の良否を表す図である。図7において、テスト01、テスト02、テスト03は、それぞれフレッシュ性の異なる3種類のコンクリート2に対する締固め試験を表す。各テストにおいて、上段は教師データにおける締固め判定の「before」又は「just」の境界を表し、下段は本実施の形態に係る締固め判定施工システムによる判定結果の良否を表す。図7中の下段の判定結果の良否について、判定結果「correct」は、締固め判定の「before」および「just」のいずれにおいても、判定結果が良であったことを示す。他方、判定結果「incorrect」は、締固め判定の「before」および「just」のいずれにおいても、判定結果が誤りであったことを示す。図7に示されるように、テスト01では、教師データ(上段)に対して判定施工システムによる判定結果(下段)は上記「before」又は「just」の境界部分及びこの境界部分からそれ程離れていない範囲で判定の誤り(黒塗り部分)が表れていることにより、概略教師データに合致した判定結果が得られている。 FIG. 7 is a diagram showing the quality of the compaction determination result when the compaction test is carried out on the three types of concrete 2 with different freshness as described above. In FIG. 7, Test 01, Test 02, and Test 03 represent compaction tests for three types of concrete 2 with different freshness. In each test, the upper row represents the boundary of compaction determination "before" or "just" in the teacher data, and the lower row represents the pass/fail of the determination result by the compaction determination construction system according to the present embodiment. Regarding the quality of the determination result in the lower part of FIG. 7, the determination result "correct" indicates that the determination result was good both in the compaction determination "before" and "just". On the other hand, the determination result "incorrect" indicates that both the compaction determinations "before" and "just" were erroneous. As shown in FIG. 7, in test 01, the judgment result (lower row) by the judgment construction system for the teacher data (upper row) is the boundary part of "before" or "just" and it is not so far from this boundary part Judgment results that match the outline teaching data are obtained because the judgment errors (black parts) appear in the range.

テスト02では、教師データ(上段)に対して判定施工システムによる判定結果(下段)は上記「before」又は「just」の境界部分のみならず、境界から「before」方向へ(約550フレーム位置)も、また「just」方向へ(約1600フレームより先の位置)も判定の誤り(黒塗り部分)が表れていることにより、かなり不正確な判定結果が得られている。 In test 02, the judgment results (lower) by the judgment construction system for the teacher data (upper) are not only the boundary part of the above "before" or "just", but also in the "before" direction from the boundary (about 550 frame positions) , and also in the "just" direction (positions ahead of about 1600 frames), a judgment error (black portion) appears, so that a considerably inaccurate judgment result is obtained.

テスト03では、教師データ(上段)に対して判定施工システムによる判定結果(下段)は上記「before」又は「just」の境界に近接した部分でのみ判定の誤り(黒塗り部分)が表れていることにより、教師データに非常に合致した判定結果が得られている。 In test 03, the judgment result (lower row) by the judgment construction system for the teacher data (upper row) shows a judgment error (blackened part) only in the part close to the boundary of "before" or "just". As a result, determination results that are very consistent with the training data are obtained.

なお、今回の締固め試験では、フレーム画像の右画像を64×64画素にリサイズした画像のみを使用した。 In this compaction test, only the image obtained by resizing the right image of the frame image to 64×64 pixels was used.

本発明によれば、コンクリートの締固め判定において、AIの機械学習機能を用いてコンクリートの締固め具合を予測して締固め判定に活用するため、コンクリートの締固め判定に作業員や技術者の経験や技量などの個人差を排除したコンクリートの最適締固め判定および施工を行うことができ、有用である。 According to the present invention, in the compaction determination of concrete, the machine learning function of AI is used to predict the compaction condition of concrete and use it for compaction determination. It is useful because it is possible to determine the optimal compaction of concrete and to perform construction without individual differences such as experience and skill.

1 締固め判定施工システム
2 コンクリート
3 型枠
4 バイブレータ
5 ビデオカメラ(撮影手段)
6 制御装置
7 支持棒
8 カメラ支持棒
9 信号線
21 画像取得部
22 データベース
23 教師データ取得部
24 画像特徴量算出部
25 学習部(予測値導出部)
26 演算部
27 締固め判定部
28 出力部
29 動作制御部

1 Compaction judgment construction system 2 Concrete 3 Formwork 4 Vibrator 5 Video camera (photographing means)
6 control device 7 support rod 8 camera support rod 9 signal line 21 image acquisition unit 22 database 23 teacher data acquisition unit 24 image feature quantity calculation unit 25 learning unit (prediction value derivation unit)
26 calculation unit 27 compaction determination unit 28 output unit 29 operation control unit

Claims (4)

打設されたコンクリートに挿入されて当該コンクリートに振動を与え、コンクリートの締固めを行うバイブレータと、
前記締固めされるコンクリートの画像を取得する撮影手段と、
画像或いは画像特徴量とコンクリートの締固め具合に関する既知の数値列との集合を学習データとした教師あり学習をするとともに、前記撮影手段から取得された画像を基に、前記コンクリートの締固め具合に関する特徴量である数値列を算出する画像特徴量算出部と、
前記画像特徴量算出部によって算出された前記数値列を基に教師あり学習をするとともに、前記コンクリートの締固め具合を表す数値の予測値を導出する学習部と、
学習部からの予測値を演算して締固め判定を行う締固め判定部と、
を備えるコンクリートの最適締固め判定システム。
a vibrator that is inserted into the placed concrete to vibrate the concrete to compact the concrete;
a photographing means for acquiring an image of the concrete to be compacted;
Supervised learning is performed using an image or a set of image feature values and known numerical sequences related to the degree of compaction of concrete as learning data, and based on the images acquired from the photographing means, the degree of compaction of concrete is determined. an image feature amount calculation unit that calculates a numerical sequence that is a feature amount;
a learning unit that performs supervised learning based on the numerical sequence calculated by the image feature amount calculation unit and derives a predicted value of a numerical value representing the degree of compaction of the concrete ;
A compaction determination unit that calculates the predicted value from the learning unit and performs compaction determination;
Optimal compaction determination system for concrete.
前記学習部は、前記予測値として、前記コンクリートの表面状態に関する数値の予測値を導出する、
請求項1記載のコンクリートの最適締固め判定システム。
The learning unit derives a predicted numerical value related to the surface state of the concrete as the predicted value.
The optimal compaction determination system for concrete according to claim 1.
撮影手段を用いて、打設されたコンクリートの表面の画像を取得し、
画像特徴量算出部により、画像或いは画像特徴量とコンクリートの締固め具合に関する既知の数値列との集合を学習データとした教師あり学習をするとともに、前記撮影手段から取得された画像を基に、前記コンクリートの締固め具合に関する特徴量である数値列を算出し、
学習部により、前記画像特徴量算出部によって算出された前記数値列を基に教師あり学習するとともに、前記コンクリートの締固め具合を表す数値の予測値を導出し、
締固め判定部により、学習部からの予測値を演算して締固め判定を行う、
ことを特徴とするコンクリートの最適締固め判定方法。
Acquiring an image of the surface of the placed concrete using a photographing means,
The image feature amount calculation unit performs supervised learning using an image or a set of image feature amounts and known numerical sequences related to the degree of compaction of concrete as learning data, and based on the image acquired from the photographing means, calculating a numerical value sequence that is a feature quantity related to the degree of compaction of the concrete;
The learning unit performs supervised learning based on the numerical value sequence calculated by the image feature amount calculation unit, and derives a predicted numerical value representing the degree of compaction of the concrete ,
The compaction determination unit calculates the predicted value from the learning unit and performs compaction determination.
A method for determining optimum compaction of concrete, characterized by:
打設されたコンクリートに挿入されて当該コンクリートに振動を与え、コンクリートの締固めを行うバイブレータと、
前記締固めされるコンクリートの画像を取得する撮影手段と、
打設されたコンクリートに対して、バイブレータを昇降動作および位置変更動
作を行わせるバイブレータ駆動手段と、
前記締固めされるコンクリートに対して、撮影手段を昇降動作および位置変更
動作を行わせる撮影手段駆動手段と、
画像或いは画像特徴量とコンクリートの締固め具合に関する既知の数値列との集合を学習データとした教師あり学習をするとともに、前記撮影手段から取得された画像を基に、前記コンクリートの締固め具合に関する特徴量である数値列を算出する画像特徴量算出部と、
前記画像特徴量算出部によって算出された前記数値列を基に教師あり学習をするとともに、前記コンクリートの締固め具合を表す数値の予測値を導出する学習部と、
学習部からの予測値を演算して締固め判定を行う締固め判定部と、
前記バイブレータ駆動手段および前記撮影手段駆動手段を駆動制御する動作制御部と、
を備えるコンクリートの最適締固め判定施工システム。
a vibrator that is inserted into the placed concrete to vibrate the concrete to compact the concrete;
a photographing means for acquiring an image of the concrete to be compacted;
vibrator drive means for causing the vibrator to move up and down and change its position with respect to the placed concrete;
a photographing means driving means for causing the photographing means to move up and down and change its position with respect to the concrete to be compacted;
Supervised learning is performed using an image or a set of image feature values and known numerical sequences related to the degree of compaction of concrete as learning data, and based on the images acquired from the photographing means, the degree of compaction of concrete is determined. an image feature amount calculation unit that calculates a numerical sequence that is a feature amount;
a learning unit that performs supervised learning based on the numerical sequence calculated by the image feature amount calculation unit and derives a predicted value of a numerical value representing the degree of compaction of the concrete ;
A compaction determination unit that calculates the predicted value from the learning unit and performs compaction determination;
an operation control unit that drives and controls the vibrator driving means and the photographing means driving means;
Optimal compaction determination construction system for concrete.
JP2018167811A 2018-09-07 2018-09-07 Optimal Compaction Judgment Construction System for Concrete Active JP7219910B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018167811A JP7219910B2 (en) 2018-09-07 2018-09-07 Optimal Compaction Judgment Construction System for Concrete

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018167811A JP7219910B2 (en) 2018-09-07 2018-09-07 Optimal Compaction Judgment Construction System for Concrete

Publications (2)

Publication Number Publication Date
JP2020041290A JP2020041290A (en) 2020-03-19
JP7219910B2 true JP7219910B2 (en) 2023-02-09

Family

ID=69797661

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018167811A Active JP7219910B2 (en) 2018-09-07 2018-09-07 Optimal Compaction Judgment Construction System for Concrete

Country Status (1)

Country Link
JP (1) JP7219910B2 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7352912B2 (en) * 2020-03-24 2023-09-29 鹿島建設株式会社 Fresh concrete determination method and fresh concrete determination device
JP7475303B2 (en) 2020-04-14 2024-04-26 太平洋セメント株式会社 Quality prediction method for soil reinforcement compaction materials
CN112241949A (en) * 2020-10-13 2021-01-19 湖南大学 Concrete placement mould intelligent monitoring device that fuses computer vision technique
JP7076867B1 (en) 2021-12-21 2022-05-30 メック株式会社 Physical property value prediction method, physical property value prediction system and program
JP7078944B1 (en) 2021-12-21 2022-06-01 メック株式会社 Physical property value prediction method, physical property value prediction system and program
CN114648637B (en) * 2022-03-28 2022-10-28 江苏禹润智能科技有限公司 Automatic concrete vibrating method and system based on machine vision
CN114898343A (en) * 2022-04-20 2022-08-12 苏州科技大学 Soil compaction degree detection method, system and medium based on image recognition processing
CN114908726A (en) * 2022-05-16 2022-08-16 广西邕洲高速公路有限公司 Real-time global intelligent detection method and system for construction quality of highway broad-width roadbed
JP7148752B1 (en) 2022-06-16 2022-10-05 大栄工機株式会社 Concrete compaction method
CN115034697B (en) * 2022-08-12 2022-11-08 河北工业大学 Multi-domain analysis-based multi-element intelligent compaction index grading optimization method and system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002242435A (en) 2001-02-19 2002-08-28 Okumura Corp Concrete compaction determining method and device
JP2017025609A (en) 2015-07-23 2017-02-02 清水建設株式会社 Method and device for determining compaction degree of concrete
JP2017107443A (en) 2015-12-10 2017-06-15 株式会社大林組 Situation determination system, situation determination method, and situation determination program

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0749716B2 (en) * 1988-07-11 1995-05-31 鹿島建設株式会社 Concrete vibrating equipment
JP3670356B2 (en) * 1995-09-13 2005-07-13 株式会社間組 Compaction management system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002242435A (en) 2001-02-19 2002-08-28 Okumura Corp Concrete compaction determining method and device
JP2017025609A (en) 2015-07-23 2017-02-02 清水建設株式会社 Method and device for determining compaction degree of concrete
JP2017107443A (en) 2015-12-10 2017-06-15 株式会社大林組 Situation determination system, situation determination method, and situation determination program

Also Published As

Publication number Publication date
JP2020041290A (en) 2020-03-19

Similar Documents

Publication Publication Date Title
JP7219910B2 (en) Optimal Compaction Judgment Construction System for Concrete
US11845194B2 (en) Robot system and workpiece picking method
JP6944506B2 (en) Image processing method, image processing device, and image processing program
JP6810087B2 (en) Machine learning device, robot control device and robot vision system using machine learning device, and machine learning method
JP6522488B2 (en) Machine learning apparatus, robot system and machine learning method for learning work taking-out operation
JP6811465B2 (en) Learning device, learning method, learning program, automatic control device, automatic control method and automatic control program
JP2018043338A (en) Machine learning device for learning operation program of robot, robot system, and machine learning method
JP6587195B2 (en) Tactile information estimation device, tactile information estimation method, program, and non-transitory computer-readable medium
CN110009614A (en) Method and apparatus for output information
JP2016142532A (en) Workability evaluation program, workability evaluation method, and workability evaluation device
JP2019124539A5 (en)
JP6895563B2 (en) Robot system, model generation method, and model generation program
JP2017203701A (en) Information processing apparatus, measurement system, information processing method, and program
WO2021241487A1 (en) Timing prediction method, timing prediction device, timing prediction system, program, and construction machinery system
KR20140068746A (en) Method, system and computer-readable recording media for motion recognition
JP2020166315A (en) Learning data generation method, training method, prediction model and computer program
JP7469987B2 (en) Information processing device, information processing method, and program
CN113989367A (en) Method and device for estimating attitude of working machine, and working machine
JP7374847B2 (en) Face evaluation system, face evaluation learning system, face evaluation method, face evaluation learning method, computer program
KR101756326B1 (en) Method, system and computer-readable recording medium for virtual reality game control simulation based on natural user interface and natural user experience
CN114782845B (en) Method, device, equipment and medium for identifying newly-born cracks of building after blasting
JP2020052032A (en) Imaging device and imaging system
US11633862B2 (en) Automatic control method of mechanical arm and automatic control system
JP2023034745A (en) Rock fall prediction device, machine learning device, rock fall prediction method, and machine learning method
JP2010187130A (en) Camera calibrating device, camera calibration method, camera calibration program, and recording medium having the program recorded therein

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210830

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210830

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20210830

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220616

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220628

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220824

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221004

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230120

R150 Certificate of patent or registration of utility model

Ref document number: 7219910

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150