JP2008175537A - Method for forming calibration curve in remote sensing for calculating crop data - Google Patents

Method for forming calibration curve in remote sensing for calculating crop data Download PDF

Info

Publication number
JP2008175537A
JP2008175537A JP2007006616A JP2007006616A JP2008175537A JP 2008175537 A JP2008175537 A JP 2008175537A JP 2007006616 A JP2007006616 A JP 2007006616A JP 2007006616 A JP2007006616 A JP 2007006616A JP 2008175537 A JP2008175537 A JP 2008175537A
Authority
JP
Japan
Prior art keywords
calibration curve
crop
photographing
field
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007006616A
Other languages
Japanese (ja)
Other versions
JP5145716B2 (en
Inventor
Yukio Hosaka
幸男 保坂
Kiyoto Kagawa
清登 香川
Masanori Matsuda
真典 松田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Satake Engineering Co Ltd
Satake Corp
Original Assignee
Satake Engineering Co Ltd
Satake Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Satake Engineering Co Ltd, Satake Corp filed Critical Satake Engineering Co Ltd
Priority to JP2007006616A priority Critical patent/JP5145716B2/en
Publication of JP2008175537A publication Critical patent/JP2008175537A/en
Application granted granted Critical
Publication of JP5145716B2 publication Critical patent/JP5145716B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Investigating Or Analysing Materials By Optical Means (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To form a calibration curve more enhanced in measuring precision than before while a calibration curve maintains general properties capable of corresponding to various photographing conditions in the measurement in remote sensing for calculating crop data. <P>SOLUTION: This method for forming calibration curve includes: the process of measuring the reflected lights from the crops grown in a plurality of sections in a field at every section by the photographing due to a camera; the process of calculating the crop data of the crops in the field at every section by chemical analysis or the like; and the process of calculating the coefficient of multiple regression of a multiple regression formula predetermined using the data of the reflected light obtained by the photographing as an explanation variable, the crop data as an object variable and the dummy variable in the factor related to the photographing condition at the time of photographing. The dummy variable is used as the factor with respect to at least one of the altitude of the sun, the quantity and wavelength balance of solar rays, the positional relation between the sun and the camera and the kind or growing stage of crops to form the calibration curve. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、リモートセンシングによる測定において、測定精度を向上させるための検量線作成方法に関するものである。   The present invention relates to a calibration curve creation method for improving measurement accuracy in measurement by remote sensing.

従来、特許文献1、特許文献2又は特許文献3に記載されているように、圃場脇から斜め下に見下ろす状態で圃場内の作物を撮影し、撮影して得た画像データから前記圃場内の作物の作物情報を求めるリモートセンシングが知られている。これらのリモートセンシングにおける作物情報の演算に使用する演算式(以下、「検量線」という)は、太陽光による作物の反射光を説明変数、該作物の化学分析値を目的変数として、多変量解析を行って作成されている。   Conventionally, as described in Patent Document 1, Patent Document 2 or Patent Document 3, the crop in the field is photographed in a state of looking down obliquely from the side of the field, and the image data in the field is obtained from the photographed image data. Remote sensing for crop information of crops is known. The calculation formula (hereinafter referred to as “calibration curve”) used to calculate crop information in these remote sensing is a multivariate analysis with reflected light of the crop by sunlight as the explanatory variable and the chemical analysis value of the crop as the objective variable. Has been created.

検量線の作成に際しては、測定対象の作物の光特性や太陽光による撮影条件に関する要因の影響を少なくし、様々な撮影条件に対応できる汎用性のある検量線を作成するために、様々な撮影条件又は異なる品種の作物での測定を行ってサンプルデータを集め、これらサンプルデータを用いて多変量解析を行っている。一般的に、重回帰分析などの多変量解析では、説明変数及び目的変数のサンプル数が多いほど測定精度を高めることができると考えられており、特許文献1、特許文献2又は特許文献3に記載されている作成方法で作成した検量線は、様々な撮影条件に対応できるものとなっている。   When creating a calibration curve, various shooting methods are used to create a versatile calibration curve that can respond to various shooting conditions by reducing the influence of factors related to the light characteristics of the crop to be measured and the shooting conditions of sunlight. Sample data is collected by measuring on conditions or crops of different varieties, and multivariate analysis is performed using these sample data. In general, in multivariate analysis such as multiple regression analysis, it is considered that the measurement accuracy can be increased as the number of explanatory variables and objective variables increases, and Patent Document 1, Patent Document 2 or Patent Document 3 The calibration curve created by the described creation method can cope with various imaging conditions.

しかし、前記検量線は、特定の品種のみを測定するような、限定された撮影条件で測定が行われる場合には、その限定された撮影条件で測定されたサンプルデータのみを使用して作成された検量線に比べ測定精度が低下するという問題があった。このため、様々な撮影条件に対応できる汎用性のある検量線でありながら、特定の品種や撮影条件に限定して測定が行われる場合にも、限定された条件専用に作成された検量線と同等の測定精度を保てる検量線を作成することが望まれている。   However, when the measurement is performed under limited imaging conditions such as measuring only a specific variety, the calibration curve is created using only the sample data measured under the limited imaging conditions. There was a problem that the measurement accuracy was lower than the standard curve. For this reason, even though the calibration curve is versatile and can be used for various imaging conditions, even when measurement is performed only for a specific product type or imaging condition, It is desired to create a calibration curve that can maintain the same measurement accuracy.

特開2000−350517号公報JP 2000-350517 A 特開2001−045867号公報JP 2001-045867 A 特開2006−320240号公報JP 2006-320240 A

本発明は上記問題点にかんがみ、リモートセンシングでの測定において、様々な撮影条件に対応できる汎用性のある検量線でありながら、特定の品種や撮影条件に限定して測定が行われる場合にも、限定された条件専用に作成された検量線と同等の測定精度を保てる検量線を作成可能とすることを技術的課題とする。   In view of the above problems, the present invention is a versatile calibration curve that can cope with various imaging conditions in measurement by remote sensing, but also when measurement is performed only for a specific product type or imaging condition. It is a technical problem to enable creation of a calibration curve that can maintain the same measurement accuracy as a calibration curve created exclusively for limited conditions.

上記課題を解決するため本発明は、圃場内の作物情報を算出するリモートセンシングにおいて、圃場内の複数の区域に生育している作物からの反射光を、カメラによる撮影により前記区域毎に測定する工程と、前記圃場内の作物の作物情報を、前記区域毎に化学分析等により求める工程と、前記撮影により得た反射光の情報を説明変数、前記作物情報を目的変数、そして、前記撮影時の撮影条件に関する要因にダミー変数を用いて、あらかじめ定めた重回帰式の重回帰係数を算出する工程とを含み、前記要因として、太陽の高度、太陽光の光量及びスペクトルバランス、太陽とカメラとの位置関係、作物の品種又は生育ステージの少なくとも1つに対してダミー変数を用いて検量線を作成するという手段を講じた。   In order to solve the above problems, the present invention, in remote sensing for calculating crop information in a field, measures reflected light from crops growing in a plurality of areas in the field for each of the areas by photographing with a camera. A process, a step of obtaining crop information of the crop in the field by chemical analysis or the like for each area, information of reflected light obtained by the photographing, explanatory variables, the crop information as objective variables, and the time of photographing And calculating a multiple regression coefficient of a predetermined multiple regression equation using a dummy variable as a factor relating to the shooting conditions of the above, including the solar altitude, the amount of sunlight and the spectral balance, the sun and the camera The method of creating a calibration curve using a dummy variable for at least one of the positional relationship, crop varieties or growth stages was taken.

また、請求項1に記載の作成方法により作成した検量線にて作物の作物情報を演算するリモートセンシングにおいて、圃場内に生育している作物からの反射光を、カメラによる撮影により測定する工程と、前記検量線の定数項及びダミー変数の係数を0とした仮検量線に、前記撮影により得た反射光の情報を適用して、前記圃場内の一定面積の区域に生育している作物の第1の作物情報を演算する工程と、作物の葉身に光を直接照射する方法によって前記区域に生育している作物の第2の作物情報を測定する工程と、前記第1の作物情報と前記第2の作物情報との差異を算出する工程とを含み、前記差異を前記仮検量線の定数項の値としたものを検量線にするという、検量線の作成方法を講じた。   Moreover, in the remote sensing which calculates the crop information of the crop with the calibration curve created by the creation method according to claim 1, the step of measuring the reflected light from the crop growing in the field by photographing with a camera; By applying the reflected light information obtained by the imaging to the temporary calibration curve with the constant term of the calibration curve and the coefficient of the dummy variable set to 0, the crops growing in the area of a certain area in the field Calculating first crop information; measuring second crop information of a crop growing in the area by a method of directly irradiating the leaf blades of the crop; and the first crop information; And a step of calculating a difference from the second crop information, and a calibration curve creation method was adopted in which the difference is defined as a constant term value of the provisional calibration curve.

さらに、請求項2に記載の作成方法で作成した検量線を使用して作物情報の演算を行うリモートセンシングの技術的手法を講じた。   Further, a remote sensing technical method for calculating crop information using a calibration curve created by the creation method according to claim 2 was taken.

本発明によれば、検量線作成時の多変量解析においてダミー変数を用いるので、撮影条件に関する要因による測定値への影響を小さくすることが可能となる。前記撮影条件に関する要因としては、太陽の高度、太陽光の光量度及びスペクトルバランス、太陽の位置に対するカメラの撮影位置、作物の品種又は生育ステージ等が考えられるが、これらの撮影条件に関する要因を誤差要因としてダミー変数に置き換えるので、様々な撮影条件に対応できる汎用性のある検量線でありながら、特定の品種や撮影条件に限定して測定が行われる場合にも、測定精度の優れた検量線が作成可能となった。   According to the present invention, since the dummy variable is used in the multivariate analysis at the time of creating the calibration curve, it is possible to reduce the influence on the measurement value due to the factors related to the imaging conditions. Factors related to the shooting conditions include the altitude of the sun, the intensity and spectrum balance of sunlight, the shooting position of the camera relative to the sun position, the variety of the crop or the growth stage, etc. Because it is replaced with a dummy variable as a factor, it is a versatile calibration curve that can handle various imaging conditions, but it also has excellent measurement accuracy even when measurements are limited to specific varieties and imaging conditions. Can be created.

また、本発明では、太陽光等の影響を受けないように作物を直接測定した測定値を用いて検量線のバイアス分(定数項)に該当する値を求めるので、前記誤差要因の影響を受けにくい測定が可能となった。   Further, in the present invention, a value corresponding to the bias component (constant term) of the calibration curve is obtained using a measurement value obtained by directly measuring a crop so as not to be affected by sunlight or the like. Difficult measurement is possible.

以下、図面を参照して本発明を実施するための最良の形態を説明する。検量線を作成するにあたり、まず、リモートセンシングによる圃場の撮影方法について説明する。ここでは圃場で生育する作物を水稲とし、測定対象が前記水稲(稲体)の窒素含有率である場合を例にして説明する。なお、本願発明は、水稲に限定されるものではなく、陸稲や麦等の作物の場合でも使用でき、また、測定対象は作物の窒素含有率に限定されるものではなく、葉身の窒素含有率や収穫後に穀粒が含有するタンパク予測値等の検量線作成にも使用することができる。   The best mode for carrying out the present invention will be described below with reference to the drawings. In creating a calibration curve, first, a method for photographing a field by remote sensing will be described. Here, the case where the crop grown in the field is paddy rice and the measurement target is the nitrogen content of the paddy rice (rice body) will be described as an example. The present invention is not limited to paddy rice, and can be used in the case of crops such as upland rice and wheat, and the measurement target is not limited to the nitrogen content of the crop, but the nitrogen content of the leaf blades It can also be used to create a calibration curve such as the predicted value of protein contained in the grain after rate and harvest.

地上に設置したカメラで圃場を斜め上方から撮影するリモートセンシングに関しては、特許文献1、特許文献2又は特許文献3にて詳細な説明があるので、ここでは概要のみを説明する。図1は、圃場1を撮影する一例を示しており、水稲を栽培している圃場1に向けてカメラ3が所定の位置に設置されている。また、圃場1は太陽光にさらされている。カメラ3の撮影範囲には圃場1全体が含まれている。カメラ3はデータ処理装置20と接続されている。データ処理装置20は、カメラ3で撮影した画像データを処理できるものであればよく、例えば一般的なノート型パソコンを用いることができる。符号21は、作物の葉身に光を直接照射する方法により該作物の作物情報の測定を行う、後述する携帯型の測定装置である。なお、ここでの圃場1とは、「畔(あぜ)」で区切られた1枚の圃場であってもよいし、複数の圃場が含まれる「圃場群」であってもよい。   Since there is a detailed description in Patent Document 1, Patent Document 2 or Patent Document 3 regarding remote sensing in which a field is photographed from above with a camera installed on the ground, only the outline will be described here. FIG. 1 shows an example of photographing a field 1, and a camera 3 is installed at a predetermined position toward the field 1 where paddy rice is grown. The field 1 is exposed to sunlight. The entire field 1 is included in the shooting range of the camera 3. The camera 3 is connected to the data processing device 20. The data processing device 20 may be any device as long as it can process image data captured by the camera 3. For example, a general laptop computer can be used. Reference numeral 21 denotes a portable measuring device, which will be described later, that measures crop information of the crop by a method of directly irradiating the leaf blades of the crop. Here, the farm field 1 may be a single farm field divided by “edges” or a “farm field group” including a plurality of farm fields.

図2で示すものは、カメラ3の機能を表す簡略なブロック図である。カメラ3はCCD5を備えている。また、カメラ3には複数のフィルタ6を備えたフィルタホイール7が取り付けられている。このフィルタホイール7を回転させてフィルタ6を切り換えることで、各フィルタ6で撮影することができる。フィルタ6を透過した光は、集光レンズ8を介してCCD5によって受光される。フィルタホイール7は、制御回路9によって駆動制御されるステッピングモータ10によって回転する。また、制御回路9は、CCD5が受光して得た画像データ(反射光)をデータ処理装置20に送出する。フィルタ6は、可視光域の波長と近赤外線域の波長とから、それぞれ測定する作物の測定対象に対応させて適宜選択すればよい。図2では4枚のフィルタ6を示しているが、目的に応じて随時変更可能であり、また、フィルタ6により、RGBのR(赤)信号、G(緑)信号及びB(青)信号をそれぞれ撮影できるようにしてもよい。本発明に使用するカメラは、撮影した情報を、CCDを搭載したデジタルカメラで撮影した画像データと同様な状態にデジタル化できるものであれば、特に限定されることはない。なお、2台のカメラを用いて、1台のカメラでR信号、G信号及びB信号を、もう1台のカメラで近赤外線域(NIR)のNIR信号を取得するようにしてもよい。   FIG. 2 is a simplified block diagram showing functions of the camera 3. The camera 3 includes a CCD 5. Further, a filter wheel 7 having a plurality of filters 6 is attached to the camera 3. By rotating the filter wheel 7 and switching the filter 6, it is possible to photograph with each filter 6. The light transmitted through the filter 6 is received by the CCD 5 through the condenser lens 8. The filter wheel 7 is rotated by a stepping motor 10 that is driven and controlled by the control circuit 9. Further, the control circuit 9 sends image data (reflected light) obtained by receiving light by the CCD 5 to the data processing device 20. The filter 6 may be appropriately selected from the wavelength in the visible light region and the wavelength in the near infrared region, corresponding to the measurement target of the crop to be measured. Although four filters 6 are shown in FIG. 2, they can be changed at any time according to the purpose, and the RGB R (red) signal, G (green) signal, and B (blue) signal can be changed by the filter 6. You may enable it to photograph each. The camera used in the present invention is not particularly limited as long as the photographed information can be digitized into the same state as the image data photographed by a digital camera equipped with a CCD. Note that two cameras may be used to acquire the R signal, the G signal, and the B signal with one camera, and the NIR signal in the near infrared region (NIR) with the other camera.

カメラ3での撮影においてCCD5で受光するのは、圃場1内の稲体の太陽光による反射光である。前記反射光は、各フィルタ6を透過した反射光毎にCCD5によってそれぞれ受光する。受光して得られた反射光の情報は、データ処理装置20に送出される。なお、カメラ3への圃場からの反射光は、カメラ3に近い位置の圃場からの反射光と、カメラ3から離れた位置の圃場からの反射光とで、カメラ3への入射角度が異なる。したがって、入射角度が異なることによる入射光の差異を補正することが好ましい。   What is received by the CCD 5 when photographing with the camera 3 is reflected light of the rice in the field 1 due to sunlight. The reflected light is received by the CCD 5 for each reflected light transmitted through each filter 6. Information on the reflected light obtained by receiving the light is sent to the data processing device 20. The incident light to the camera 3 is different between the reflected light from the field to the camera 3 and the reflected light from the field near the camera 3 and the reflected light from the field far from the camera 3. Therefore, it is preferable to correct a difference in incident light due to different incident angles.

本発明では、データ処理装置20に送出された稲体の反射光の情報(画像データ)を用いて検量線の作成を行っている。圃場1内の稲体の反射光を受光して得た前記反射光の情報を、一定面積の複数の区域に分けて、前記一定面積の区域内で生育している稲体の反射光の平均値を求め、また、前記一定面積の区域内に生育している複数の稲体から稲葉を採取し、採取した稲葉の窒素含有率をケルダール法等の化学分析により直接求め、該窒素含有率の平均値を算出する。そして、前記反射光の平均値を説明変数、前記窒素含有率の平均値を目的変数、さらに撮影条件に関係する要因をダミー変数として、前記一定面積の区域のサンプルデータとし、同様にして他の区域の反射光の情報を用いて複数のサンプルデータを準備し、それらのサンプルデータで多変量解析を行って検量線を作成する。   In the present invention, the calibration curve is created using the information (image data) of the reflected light of the rice plant sent to the data processing device 20. The information of the reflected light obtained by receiving the reflected light of the rice plant in the field 1 is divided into a plurality of areas of a certain area, and the average of the reflected light of the rice plants growing in the area of the certain area Value is obtained, and rice leaves are collected from a plurality of rice plants growing in the area of the predetermined area, and the nitrogen content of the collected rice leaves is directly obtained by chemical analysis such as Kjeldahl method, The average value is calculated. Then, the average value of the reflected light is an explanatory variable, the average value of the nitrogen content is a target variable, and a factor related to the imaging conditions is a dummy variable. A plurality of sample data is prepared using the reflected light information of the area, and a calibration curve is created by performing multivariate analysis on the sample data.

検量線の作成方法について具体的に説明をする。本発明の検量線の作成方法では、例えば、下記に示す重回帰式(数式1)により検量線を作成する。   A method for creating a calibration curve will be specifically described. In the calibration curve creation method of the present invention, for example, a calibration curve is created by the multiple regression equation (Formula 1) shown below.

Figure 2008175537
Figure 2008175537

数式1において、Nは測定対象の窒素含有率、F0、F1、F2、F3、F4、E1、E2、・・・、Em−1は重回帰係数、R1、R2、R3及びR4は各フィルタを透過した反射光の情報、そして、D1、D2、・・・、Dm−1はダミー変数を表している。 In Equation 1, N is the nitrogen content of the measurement object, F0, F1, F2, F3, F4, E1, E2,..., Em-1 are multiple regression coefficients, and R1, R2, R3, and R4 are the respective filters. , D1, D2,..., Dm−1 represent dummy variables.

窒素含有率Nは、圃場内の一定面積の区域で生育している複数の稲体からそれぞれ稲葉を採取し、それら複数の稲葉の窒素含有率を化学分析により求めて平均した値である。前記窒素含有率は、前記区域におけるサンプルデータの目的変数となる。   The nitrogen content N is a value obtained by collecting rice leaves from a plurality of rice plants growing in a certain area in the field, and obtaining and averaging the nitrogen contents of the plurality of rice leaves by chemical analysis. The nitrogen content becomes an objective variable of sample data in the area.

R1、R2、R3及びR4で表した各反射光の情報は、前記区域で生育している稲体の反射光の平均値である。本発明では、反射光の情報として、RGB信号のR信号、G信号、B信号、そして近赤外線領域の波長であるNIR信号の4波長域の波長の反射光を測定し、これら反射光を前記区域におけるサンプルデータの説明変数に用いている。   Information of each reflected light represented by R1, R2, R3, and R4 is an average value of the reflected light of the rice plants grown in the area. In the present invention, as reflected light information, R signal of RGB signal, G signal, B signal, and reflected light of four wavelengths in the NIR signal, which is a wavelength in the near infrared region, are measured. It is used as an explanatory variable for sample data in the area.

D1、D2、・・・、Dm−1は、m通りの撮影条件により「1」又は「0」をとるダミー変数である。本実施例では、圃場を撮影した画像毎にダミー変数を設けている。太陽の高度、太陽光の光量及びスペクトルバランス等の撮影条件に関する要因は、時間の経過とともに刻々と変化するので、撮影時刻によって前記要因は変化することになる。また、本発明では太陽光の反射光を測定するため、太陽とカメラとの位置関係により撮影条件が変化することになる。つまり、リモートセンシングによる実際の撮影においては、撮影した画像毎に撮影条件が異なることになる。そこで本実施例では、撮影した画像毎にダミー変数(D1、D2、・・・、Dm−1)を設け、表1に示すようなダミー変数の組み合わせとした。 D1, D2,..., Dm−1 are dummy variables that take “1” or “0” depending on m shooting conditions. In this embodiment, a dummy variable is provided for each image obtained by photographing a farm field. Factors relating to shooting conditions such as the altitude of the sun, the amount of sunlight, and the spectral balance change with time, so the factors change depending on the shooting time. In the present invention, since the reflected light of sunlight is measured, the photographing condition changes depending on the positional relationship between the sun and the camera. That is, in actual shooting by remote sensing, shooting conditions differ for each shot image. Therefore, in this embodiment, dummy variables (D1, D2,..., D m−1 ) are provided for each photographed image, and combinations of dummy variables as shown in Table 1 are used.

Figure 2008175537
Figure 2008175537

なお、太陽の高度、太陽光の光量及びスペクトルバランスは、時間の経過とともに刻々と変化するので、撮影時刻が異なれば、測定時の誤差要因となる太陽の高度、太陽光の光量及びスペクトルバランスは異なることになる。このため、本発明では、各撮影時刻の撮影画像毎に1つのダミー変数を設定することで、太陽の高度、太陽光の光量及びスペクトルバランス等の誤差要因毎にダミー変数を用いることとした。   Since the altitude of the sun, the amount of sunlight, and the spectral balance change over time, if the shooting time is different, the altitude of the sun, the amount of sunlight, and the spectral balance that cause errors during measurement Will be different. For this reason, in the present invention, a dummy variable is set for each error factor such as the altitude of the sun, the amount of sunlight, and the spectral balance by setting one dummy variable for each captured image at each capturing time.

圃場を撮影した1枚の画像データにおいて、該画像データ上で圃場を一定面積の複数の区域に分けて、該区域毎にそれぞれの区域内で生育している稲体の反射光の情報(R1、R2、R3及びR4)及び窒素含有率Nを求めることで、1枚の画像から複数のサンプルデータを得ることができる。なお、前記画像データが複数の圃場を含む圃場群を撮影している場合には、各圃場を1つの区域とすることができる。   In one piece of image data obtained by photographing a field, the field is divided into a plurality of areas having a certain area on the image data, and the reflected light information (R1) of rice grown in each area for each area. , R2, R3 and R4) and the nitrogen content N, a plurality of sample data can be obtained from one image. In addition, when the said image data image | photographs the agricultural field group containing a several agricultural field, each agricultural field can be made into one area.

また、複数の画像データからそれぞれサンプルデータを得れば、多数のサンプルデータを準備することができる。これらサンプルデータを数式1に用いて多変量解析を行うことで、数式1の重回帰係数を求め、そして、検量線を作成することができる。一般的に、多変量解析ではサンプル数が多いほど検量線の精度を高めることができると考えられている。   In addition, if sample data is obtained from each of a plurality of image data, a large number of sample data can be prepared. By performing multivariate analysis using these sample data in Equation 1, the multiple regression coefficient of Equation 1 can be obtained and a calibration curve can be created. In general, in multivariate analysis, it is considered that the accuracy of the calibration curve can be increased as the number of samples increases.

なお、数式1の各反射光の情報(R1、R2、R3及びR4)は、対数をとることが好ましく、数式2で示すような重回帰式を用いて多変量解析を行うことが望ましい。   The information (R1, R2, R3, and R4) of each reflected light in Equation 1 is preferably logarithmic, and it is desirable to perform multivariate analysis using a multiple regression equation as shown in Equation 2.

Figure 2008175537
Figure 2008175537

数式2で示すように、作物からの各波長における反射光を対数化し、その数値を説明変数とすることで、主に太陽光の状態による誤差要因を全てバイアス分としてのダミー変数を含む項に置き換えることができる。   As shown in Equation 2, logarithmically reflected light at each wavelength from the crop, and using the numerical value as an explanatory variable, the error factor mainly due to the state of sunlight includes a dummy variable as a bias. Can be replaced.

ところで、本実施例では、撮影条件に関する要因による影響を少なくするために、ダミー変数を用いた多変量解析により検量線の作成を行っているが、撮影した画像毎にダミー変数を設定しているため、どのダミー変数に「1」を入力すべきか判断が困難である。このため、数式1又は2で表される検量線の、重回帰係数F0で表される定数項と重回帰係数E1〜Em−1で表される各定数項の総和(以下、「バイアス分」という、一次関数でいう「切片」に該当する)を計算することが困難である。このため、正確なバイアス分を計算することができないので、別途バイアス分に該当する値を求める必要がある。 By the way, in this embodiment, a calibration curve is created by multivariate analysis using dummy variables in order to reduce the influence of factors relating to the photographing conditions, but dummy variables are set for each photographed image. Therefore, it is difficult to determine which dummy variable should be input with “1”. For this reason, the sum of the constant terms represented by the multiple regression coefficients F0 and the multiple regression coefficients E1 to Em −1 (hereinafter referred to as “bias component”) of the calibration curve represented by the formula 1 or 2. "Corresponding to" intercept "as a linear function). For this reason, it is not possible to calculate an accurate amount of bias, and it is necessary to obtain a value corresponding to the amount of bias separately.

本発明ではこのバイアス分を、例えば、特開平10−96692に記載されているような携帯型の葉の成分測定装置(以下、「測定装置21」という)を用いて求める。測定装置21によれば、圃場内で生育している稲体の窒素含有率を容易に測定することができ、また、稲葉を直接測定して太陽光等の影響を受けずに稲体の窒素含有率を求めることができる。なお、バイアス分の求め方については、測定装置21のような装置を用いる以外にもその他の一般的に知られている手法により求めてもよい。   In the present invention, this bias amount is obtained using, for example, a portable leaf component measuring device (hereinafter referred to as “measuring device 21”) as described in JP-A-10-96692. According to the measuring device 21, it is possible to easily measure the nitrogen content of the rice growing in the field, and to directly measure the rice leaves and to avoid the influence of sunlight etc. The content rate can be determined. In addition, about how to obtain | require a bias component, you may obtain | require by the method generally known other than using an apparatus like the measuring apparatus 21. FIG.

次に、測定装置21を用いたバイアス分の求め方について説明する。この場合、前述の検量線の作成方法により作成した数式2からバイアス分を計算する項を取り除いた、下記に示す数式3を仮検量線として使用する。当然、数式2の代わりに数式1からバイアス分を計算する項を取り除いた数式でもよい。   Next, how to obtain the bias amount using the measuring device 21 will be described. In this case, Formula 3 shown below obtained by removing the term for calculating the bias from Formula 2 created by the above-described calibration curve creation method is used as the provisional calibration curve. Naturally, instead of the formula 2, a formula obtained by removing the term for calculating the bias amount from the formula 1 may be used.

Figure 2008175537
Figure 2008175537

ここで、仮検量線(数式3)がデータ処理装置20に記憶された状態で、カメラ3により圃場Xを撮影したとする。この場合、図3に示すような、圃場X内の一定面積の区域Yで生育している稲体の窒素含有率は、前記撮影によって求めた各反射光の情報のうち、区域Yの反射光の情報を前記仮検量線に代入して演算することができる。なお、この値は4.0%(以下、「第1の作物情報」という)であったとする。前記区域の形状や広さは特に限定されないが、画像データをパソコンで処理することを考慮すれば、形状は四角形とするのが好ましく、特に正方形が好ましい。また、形状を四角形とする場合、一辺の長さは8m程度が好ましい。   Here, it is assumed that the field X is captured by the camera 3 in a state where the provisional calibration curve (Equation 3) is stored in the data processing device 20. In this case, as shown in FIG. 3, the nitrogen content of the rice growing in the area Y of a certain area in the field X is the reflected light of the area Y among the information of each reflected light obtained by the photographing. Can be calculated by substituting the above information into the provisional calibration curve. It is assumed that this value is 4.0% (hereinafter referred to as “first crop information”). The shape and width of the area are not particularly limited, but considering that image data is processed by a personal computer, the shape is preferably a square, and particularly a square. When the shape is a quadrangle, the length of one side is preferably about 8 m.

次に、前記区域Yで生育している稲体の窒素含有率が、測定装置21による測定で、3.1%(以下、「第2の作物情報」という)であったとする。なお、測定装置21による測定値は、前記区域Yに生育している複数の稲体の葉を測定した平均値である。測定装置21での測定は、1つの稲体につき1枚の葉を測定すればよく、前記葉の枚数は20枚以上とすることが望ましい。   Next, it is assumed that the nitrogen content of the rice growing in the area Y is 3.1% (hereinafter referred to as “second crop information”) as measured by the measuring device 21. The measured value by the measuring device 21 is an average value obtained by measuring a plurality of rice leaves growing in the area Y. The measurement with the measuring device 21 may be performed by measuring one leaf per rice body, and the number of the leaves is preferably 20 or more.

前記第1の作物情報はデータ処理装置20内に記憶でき、前記第2の作物情報は測定装置21に記憶されているから、この第2の作物情報をデータ処理装置20に入力して、データ処理装置20内に記憶する。前記入力方法は、自動又は手動のどちらの方法でも良い。データ処理装置20では、前記第1の作物情報と前記第2の作物情報との差異を算出する。ここでは第1の作物情報を4.0%、第2の作物情報を3.1%としているので、第1の作物情報が第2の作物情報よりも0.9%高い値となっている。よって、差異は−0.9%となり、本実施例では、この差異−0.9%を前記仮検量線のバイアス分(定数項)とする。したがって、前記仮検量線は、下記の数式4で示すように、   Since the first crop information can be stored in the data processing device 20 and the second crop information is stored in the measuring device 21, the second crop information is input to the data processing device 20 to obtain data. Store in the processing device 20. The input method may be either automatic or manual. In the data processing device 20, the difference between the first crop information and the second crop information is calculated. Here, since the first crop information is 4.0% and the second crop information is 3.1%, the first crop information is 0.9% higher than the second crop information. . Therefore, the difference is −0.9%, and in this example, this difference −0.9% is used as the bias (constant term) of the provisional calibration curve. Therefore, the provisional calibration curve is expressed by the following Equation 4,

Figure 2008175537
Figure 2008175537

となる。数式4で表される検量線は、前記バイアス分を求めるために撮影した前記圃場X内の稲体の窒素含有率を求めるのに使用することができる。例えば、区域Zの反射光の情報(R1、R2、R3及びR4)を前記検量線(数式4)に代入することで、区域Zの稲体の窒素含有率を簡単に求めることができる。なお、前記検量線を圃場Xとは異なる圃場を撮影した画像データに用いることもできるが、測定精度が低下するおそれがある。また、圃場Xは、1枚の圃場と限定されるわけではなく、複数の圃場を含む圃場群であってもよい。このようにして、圃場で栽培されている作物の作物情報(ここでは稲体の窒素含有率)を広い範囲に渡って簡単に測定することが可能となる。なお、1枚の圃場ごとに前記窒素含有率の平均値を求め、この平均値を、各圃場の窒素含有率として使用するのが一般的である。 It becomes. The calibration curve expressed by Equation 4 can be used to determine the nitrogen content of the rice plant in the field X taken to determine the bias. For example, by substituting the information (R1, R2, R3, and R4) of the reflected light in the zone Z into the calibration curve (Formula 4), the nitrogen content of the rice plant in the zone Z can be easily obtained. Although the calibration curve can be used for image data obtained by photographing a field different from the field X, there is a risk that the measurement accuracy may be reduced. The field X is not limited to a single field, and may be a field group including a plurality of fields. In this way, it is possible to easily measure the crop information of the crops cultivated in the field (here, the nitrogen content of rice) over a wide range. In general, the average value of the nitrogen content is obtained for each field, and this average value is used as the nitrogen content of each field.

本発明の検量線の作成方法においては、作物の品種や生育ステージ等に自由にダミー変数を用いることができる。下記の表2は、作物の品種に対してダミー変数を設定した場合を示している。   In the method for creating a calibration curve according to the present invention, dummy variables can be freely used for crop varieties, growth stages, and the like. Table 2 below shows the case where dummy variables are set for the crop varieties.

Figure 2008175537
Figure 2008175537

また、複数の撮影条件にダミー変数を用いることもでき、下記の表3には、各画像と作物の品種とに対してダミー変数を設定した場合の組み合わせを示している。   Dummy variables can also be used for a plurality of imaging conditions, and Table 3 below shows combinations when dummy variables are set for each image and crop variety.

Figure 2008175537
Figure 2008175537

表3で示しているように、1つの画像で2つ以上の作物の品種が生育しているような場合、各品種が生育している箇所が区分け可能であれば、一つの画像で、2つ以上のダミー変数を設定することができる。なお、表3で示すようにダミー変数を設定する場合に、品種が不明で生育ステージが判明している場合には、表4に示すようにダミー変数をとることができる。   As shown in Table 3, when two or more crop varieties are growing in one image, if the place where each variety is growing can be classified, one image More than one dummy variable can be set. In addition, when setting a dummy variable as shown in Table 3, when the variety is unknown and the growth stage is known, the dummy variable can be taken as shown in Table 4.

Figure 2008175537
Figure 2008175537

さらに、作物の品種とその品種の生育ステージが確認できる場合には、表5に示すようにダミー変数をとることができる。   Furthermore, when the crop varieties and the growth stages of the varieties can be confirmed, dummy variables can be taken as shown in Table 5.

Figure 2008175537
Figure 2008175537

表2〜表5に示すようにダミー変数を設けた場合であっても、前述の検量線の作成方法により検量線を作成することができる。 Even when dummy variables are provided as shown in Tables 2 to 5, a calibration curve can be created by the calibration curve creation method described above.

本発明の検量線の作成方法においては、下記の数式5に示すように、R(赤)信号の反射光の情報、G(緑)信号の反射光の情報及びB(青)信号の反射光の情報とNIR信号の反射光の情報との比の対数をとった重回帰式としてもよい。   In the method of creating a calibration curve of the present invention, as shown in Equation 5 below, the reflected light information of the R (red) signal, the reflected light information of the G (green) signal, and the reflected light of the B (blue) signal And a multiple regression equation that takes the logarithm of the ratio of the information of the reflected light of the NIR signal.

Figure 2008175537
Figure 2008175537

数式5のように重回帰式を設けた場合あっても、前述の検量線の作成方法により検量線を作成することができる。   Even when a multiple regression equation is provided as in Equation 5, a calibration curve can be created by the calibration curve creation method described above.

本発明のダミー変数を用いた検量線の作成方法は、地上からの撮影の他、気球、ラジコン飛行装置(飛行機、ヘリ)、有人飛行機又は人工衛星等にカメラを搭載して圃場を撮影するリモートセンシングにおいても用いることが可能である。なお、地上からの撮影とは、地面から1m〜30mの高さから圃場を見下ろすようにカメラにて撮影することであって、遠方を撮影する場合には望遠レンズを使用することが望ましい。望遠レンズを使用することで、遠方を撮影した画像分まで解析時の分解能を確保することが可能となり、より広い範囲を一度に測定することができる。   The method for creating a calibration curve using dummy variables according to the present invention is a remote in which a camera is mounted on a balloon, a radio-controlled flying device (airplane, helicopter), a manned airplane, an artificial satellite or the like in addition to photographing from the ground. It can also be used in sensing. The photographing from the ground means photographing with a camera so that the field is looked down from a height of 1 m to 30 m from the ground, and it is desirable to use a telephoto lens when photographing far away. By using a telephoto lens, it becomes possible to secure resolution at the time of analysis up to an image of a far image, and a wider range can be measured at a time.

撮影状態を示した説明図である。It is explanatory drawing which showed the imaging | photography state. 圃場の撮影に使用するカメラの概略ブロック図である。It is a schematic block diagram of the camera used for imaging | photography of a farm field. 圃場の撮影範囲を示した図である。It is the figure which showed the imaging range of the agricultural field.

符号の説明Explanation of symbols

1 圃場
3 カメラ
5 CCD
6 フィルタ
7 フィルタホイール
8 レンズ
9 制御回路
10 ステッピングモータ
20 データ処理装置
21 測定装置
1 Farm 3 Camera 5 CCD
6 Filter 7 Filter wheel 8 Lens 9 Control circuit 10 Stepping motor 20 Data processing device 21 Measuring device

Claims (3)

圃場内の作物情報を算出するリモートセンシングにおいて、
圃場内の複数の区域に生育している作物からの反射光を、カメラによる撮影により前記区域毎に測定する工程と、
前記圃場内の作物の作物情報を、前記区域毎に化学分析等により求める工程と、
前記撮影により得た反射光の情報を説明変数、前記作物情報を目的変数、そして、前記撮影時の撮影条件に関する要因にダミー変数を用いて、あらかじめ定めた重回帰式の重回帰係数を算出する工程とを含み、
前記要因として、太陽の高度、太陽光の光量及びスペクトルバランス、太陽とカメラとの位置関係、作物の品種又は生育ステージの少なくとも1つに対してダミー変数を用いることを特徴とする検量線の作成方法。
In remote sensing to calculate crop information in the field,
Measuring reflected light from crops growing in a plurality of areas in the field for each of the areas by photographing with a camera;
Obtaining the crop information of the crop in the field by chemical analysis or the like for each of the areas;
The multiple regression coefficient of a predetermined multiple regression equation is calculated using the reflected light information obtained by the photographing as an explanatory variable, the crop information as an objective variable, and a dummy variable as a factor relating to the photographing condition at the time of photographing. Process,
Creation of a calibration curve characterized in that dummy variables are used as at least one of the factors such as the altitude of the sun, the light intensity and spectral balance of the sun, the positional relationship between the sun and the camera, the variety of the crop or the growth stage. Method.
請求項1に記載の作成方法により作成した検量線にて作物の作物情報を演算するリモートセンシングにおいて、
圃場内に生育している作物からの反射光を、カメラによる撮影により測定する工程と、
前記検量線の定数項及びダミー変数の係数を0とした仮検量線に、前記撮影により得た反射光の情報を適用して、前記圃場内の一定面積の区域に生育している作物の第1の作物情報を演算する工程と、
作物の葉身に光を直接照射する方法によって前記区域に生育している作物の第2の作物情報を測定する工程と、
前記第1の作物情報と前記第2の作物情報との差異を算出する工程とを含み、
前記差異を前記仮検量線の定数項の値としたものを検量線とすることを特徴とする検量線の作成方法。
In remote sensing that calculates crop information of a crop with a calibration curve created by the creation method according to claim 1,
Measuring the reflected light from the crop growing in the field by photographing with a camera;
By applying the reflected light information obtained by the imaging to a tentative calibration curve in which the constant term of the calibration curve and the coefficient of the dummy variable are 0, the number of crops growing in a certain area in the field Calculating one crop information;
Measuring second crop information of a crop growing in the area by a method of directly irradiating the leaf blades of the crop;
Calculating the difference between the first crop information and the second crop information,
A calibration curve creation method characterized in that a calibration curve is obtained by setting the difference as a value of a constant term of the provisional calibration curve.
請求項2に記載の検量線の作成方法で作成した検量線を使用することを特徴とするリモートセンシングによる作物の測定方法。
A method for measuring a crop by remote sensing, wherein the calibration curve created by the calibration curve creating method according to claim 2 is used.
JP2007006616A 2007-01-16 2007-01-16 Method of creating calibration curve in remote sensing to calculate crop information Active JP5145716B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007006616A JP5145716B2 (en) 2007-01-16 2007-01-16 Method of creating calibration curve in remote sensing to calculate crop information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007006616A JP5145716B2 (en) 2007-01-16 2007-01-16 Method of creating calibration curve in remote sensing to calculate crop information

Publications (2)

Publication Number Publication Date
JP2008175537A true JP2008175537A (en) 2008-07-31
JP5145716B2 JP5145716B2 (en) 2013-02-20

Family

ID=39702680

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007006616A Active JP5145716B2 (en) 2007-01-16 2007-01-16 Method of creating calibration curve in remote sensing to calculate crop information

Country Status (1)

Country Link
JP (1) JP5145716B2 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010166851A (en) * 2009-01-22 2010-08-05 Chiharu Hongo Method and device for predicting crop yield
JP2011027600A (en) * 2009-07-27 2011-02-10 Satake Corp Method for creating calibration curve in remote sensing
CN103134758A (en) * 2013-01-29 2013-06-05 华南农业大学 Rice leaf blast disease resistance identification grading method based on multi-scale hyperspectral image processing
CN103149162A (en) * 2012-12-19 2013-06-12 南京农业大学 Portable crop growth information monitor based on active light source
WO2013182179A1 (en) * 2012-06-04 2013-12-12 Yara International Asa Method for contactless determination of the current nutritional state of a plant population and for processing said information
JP2014202649A (en) * 2013-04-08 2014-10-27 日本電信電話株式会社 Micro alga concentration determination method, device and program
CN104181161A (en) * 2013-05-21 2014-12-03 江碧涛 Method for estimating water content of sandy beach by using visible, near infrared and short-wave infrared hyperspectral data
WO2016194507A1 (en) * 2015-06-02 2016-12-08 株式会社トプコン Wavelength sensor device for plant
CN113686820A (en) * 2021-08-11 2021-11-23 江苏省农业科学院 Crop growth information intelligent sensor

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000245260A (en) * 1999-03-02 2000-09-12 Satake Eng Co Ltd Quality estimation for grain and apparatus for the same
JP2000350517A (en) * 1999-04-09 2000-12-19 Satake Eng Co Ltd Diagnosis of crop

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000245260A (en) * 1999-03-02 2000-09-12 Satake Eng Co Ltd Quality estimation for grain and apparatus for the same
JP2000350517A (en) * 1999-04-09 2000-12-19 Satake Eng Co Ltd Diagnosis of crop

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010166851A (en) * 2009-01-22 2010-08-05 Chiharu Hongo Method and device for predicting crop yield
JP2011027600A (en) * 2009-07-27 2011-02-10 Satake Corp Method for creating calibration curve in remote sensing
WO2013182179A1 (en) * 2012-06-04 2013-12-12 Yara International Asa Method for contactless determination of the current nutritional state of a plant population and for processing said information
CN103149162A (en) * 2012-12-19 2013-06-12 南京农业大学 Portable crop growth information monitor based on active light source
CN103134758A (en) * 2013-01-29 2013-06-05 华南农业大学 Rice leaf blast disease resistance identification grading method based on multi-scale hyperspectral image processing
JP2014202649A (en) * 2013-04-08 2014-10-27 日本電信電話株式会社 Micro alga concentration determination method, device and program
CN104181161A (en) * 2013-05-21 2014-12-03 江碧涛 Method for estimating water content of sandy beach by using visible, near infrared and short-wave infrared hyperspectral data
WO2016194507A1 (en) * 2015-06-02 2016-12-08 株式会社トプコン Wavelength sensor device for plant
JP2016223971A (en) * 2015-06-02 2016-12-28 株式会社トプコン Wavelength sensor device for plant
AU2016273394B2 (en) * 2015-06-02 2018-09-13 Topcon Corporation Wavelength sensor device for plant
CN113686820A (en) * 2021-08-11 2021-11-23 江苏省农业科学院 Crop growth information intelligent sensor
CN113686820B (en) * 2021-08-11 2024-05-14 江苏省农业科学院 Intelligent sensor for crop growth information

Also Published As

Publication number Publication date
JP5145716B2 (en) 2013-02-20

Similar Documents

Publication Publication Date Title
JP5145716B2 (en) Method of creating calibration curve in remote sensing to calculate crop information
JP5162890B2 (en) Correction method in remote sensing
JP5361862B2 (en) Tea leaf plucking aptitude evaluation method, plucking suitability evaluation apparatus, plucking suitability evaluation system, and computer-usable medium
US20120155714A1 (en) Vegetation indices for measuring multilayer microcrop density and growth
Brusa et al. Increasing the precision of canopy closure estimates from hemispherical photography: Blue channel analysis and under-exposure
CN112131746B (en) Chlorophyll a concentration inversion method and system
JP6863280B2 (en) Inspection equipment, inspection method, and program
JP2007171033A (en) Indirect measuring method and system of leaf area index
CN107532997A (en) Plant growth index determining devices and methods therefor and plant growth index determining system
JP5534300B2 (en) How to create a remote sensing calibration curve
Sakamoto et al. Application of day and night digital photographs for estimating maize biophysical characteristics
US10684166B2 (en) Information processing device, information processing method, and program
CN112147078B (en) Multi-source remote sensing monitoring method for crop phenotype information
JP5564812B2 (en) Method for continuous measurement of changes in plant growth
WO2017221756A1 (en) Sensing system, sensing method, and sensing device
WO2019148122A1 (en) Multispectral filters
AU2003211938B2 (en) Method of biomass estimation for forests and trees by remote sensing high-resolution data
CN107529726B (en) Inspection apparatus, inspection method, and recording medium
AU2021204034B2 (en) Information processing device, information processing method and program
JP2006101768A (en) Method for sorting raw unhulled rice in reception with rice center, country elevator or the like
Nguy-Robertson et al. Determining factors that impact the calibration of consumer-grade digital cameras used for vegetation analysis
Qian et al. Development and application of crop monitoring system for detecting chlorophyll content of tomato seedlings
CN114663761A (en) Crop growth condition determining method, device, equipment and storage medium
CN113514402A (en) System and method for predicting chlorophyll content of winter wheat
Fernando Sánchez-Sastre et al. Assessment of RGB Vegetation Indices to Estimate Chlorophyll Content in Sugar Beet Leaves in the Final Cultivation Stage.

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110824

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110901

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111025

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120321

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120517

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121030

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121112

R150 Certificate of patent or registration of utility model

Ref document number: 5145716

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151207

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250