WO2022182190A1 - System and method for determining sync capacity and source capacity - Google Patents

System and method for determining sync capacity and source capacity Download PDF

Info

Publication number
WO2022182190A1
WO2022182190A1 PCT/KR2022/002772 KR2022002772W WO2022182190A1 WO 2022182190 A1 WO2022182190 A1 WO 2022182190A1 KR 2022002772 W KR2022002772 W KR 2022002772W WO 2022182190 A1 WO2022182190 A1 WO 2022182190A1
Authority
WO
WIPO (PCT)
Prior art keywords
crop
greenhouse
parameter
capacity
fruit
Prior art date
Application number
PCT/KR2022/002772
Other languages
French (fr)
Korean (ko)
Inventor
조진형
Original Assignee
농업회사법인 아이오크롭스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020210026712A external-priority patent/KR102351652B1/en
Priority claimed from KR1020210026711A external-priority patent/KR102398294B1/en
Application filed by 농업회사법인 아이오크롭스 주식회사 filed Critical 농업회사법인 아이오크롭스 주식회사
Publication of WO2022182190A1 publication Critical patent/WO2022182190A1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A01AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01GHORTICULTURE; CULTIVATION OF VEGETABLES, FLOWERS, RICE, FRUIT, VINES, HOPS OR SEAWEED; FORESTRY; WATERING
    • A01G7/00Botany in general
    • AHUMAN NECESSITIES
    • A01AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01GHORTICULTURE; CULTIVATION OF VEGETABLES, FLOWERS, RICE, FRUIT, VINES, HOPS OR SEAWEED; FORESTRY; WATERING
    • A01G9/00Cultivation in receptacles, forcing-frames or greenhouses; Edging for beds, lawn or the like
    • A01G9/24Devices or systems for heating, ventilating, regulating temperature, illuminating, or watering, in greenhouses, forcing-frames, or the like
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/02Agriculture; Fishing; Mining
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis

Definitions

  • the present invention relates to a system and method for determining sink capacity and source capacity of a crop, and more particularly, to a system and method for determining a sink and source of a crop based on fruit information and leaf information of a crop in a crop image.
  • a smart farm is an intelligent farm created by combining information and communication technology with farming technology.
  • a greenhouse is a space equipped with a system that can provide a uniform environment in relation to crop growth.
  • a plurality of sensors required for environmental control are required.
  • a plurality of sensors provided in the greenhouse include a temperature sensor, a CO2 concentration sensor, and the like, and the plurality of sensors can measure the environment in the greenhouse.
  • the greenhouse is controlled to provide a uniform environment inside the greenhouse through the measured values measured through the sensor.
  • One object of the present invention is to provide a system and method for determining the sink capacity and source capacity of crops in a more convenient way for the user.
  • Another object of the present invention is to provide a system and method for determining a sink capacity by using different weights according to the size of fruit.
  • Another object of the present invention is to provide a system and method for determining a sink capacity by using different weights according to the height at which fruits are located.
  • Another object of the present invention is to provide a system and method for determining the sink capacity according to the height of the leaves of a crop.
  • a method for determining a sink capacity of a crop in a crop image includes: receiving a crop image including fruits and leaves; obtaining fruit information including a location, size, and maturity level of a fruit based on the crop image; and calculating a sink capacity of a crop based on the fruit information.
  • the calculating of the sink capacity comprises: a total sink capacity of the crop based on a first sink capacity for a first fruit having a first size and a second sink capacity for a second fruit having a second size is determined, the first sink capacity of the first fruit is calculated based on a weight of a first size corresponding to the first size, and the second sink capacity of the second fruit corresponds to the second size. It is calculated based on a second size weight, wherein the first size is greater than the second size, and the first size weight is greater than the second size weight.
  • a system for determining a sink capacity and a source capacity of a crop includes: a measuring device for acquiring a crop image including fruits and leaves of a crop; and a server for calculating a sink capacity and a source capacity of the crop based on fruit information and leaf information calculated based on the crop image.
  • the fruit information includes at least one of location information, size information, and ripeness information of the fruit
  • the sink capacity includes a location weight corresponding to the location information of the fruit and a location weight corresponding to the size information. It is calculated based on the size weight and the maturity weight corresponding to the maturity level information.
  • the method for controlling a greenhouse environment includes acquiring at least one image of a crop, extracting a first feature, a second feature, and a third feature included in the acquired at least one image, the first calculating a first parameter based on at least one of the first to third characteristics, calculating a second parameter based on at least one of the first through third characteristics, and the first and second parameters Calculating a third parameter based on , calculating a second sub-parameter based on the second characteristic, and calculating the first parameter based on at least the first sub-parameter and the second sub-parameter, wherein the second parameter The calculating comprises calculating a third sub-parameter based on the third characteristic and calculating the second parameter based on at least the third sub-parameter, and based on the third parameter, the greenhouse
  • the controlling of the environment may include comparing the third parameter with a reference value, and at least one included in the first group greenhouse control operation or the second group greenhouse control operation based on the comparison result of the third parameter and the reference value.
  • the first characteristic is a characteristic corresponding to a flower of a crop
  • the second characteristic is a characteristic corresponding to a fruit of a crop
  • the third characteristic is a characteristic corresponding to a leaf of a crop may be characteristic.
  • the user can be provided with the sink capacity and the source capacity of the crop based on the crop image rather than a complicated process.
  • the user can calculate the sink capacity of the crop through different weights according to the size of the fruit.
  • FIG. 1 is a schematic diagram of a greenhouse system according to an embodiment.
  • FIG. 2 is a block diagram illustrating a measuring device according to an exemplary embodiment.
  • FIG. 3 is a block diagram illustrating a server according to an embodiment.
  • FIG. 4 is a block diagram of a system for measuring sink capacity and source capacity according to an embodiment.
  • FIG. 5 is a flowchart illustrating a method for measuring sink capacity and source capacity according to an embodiment.
  • FIG. 6 is a view of a crop image processing process according to an embodiment.
  • FIG. 7 is a flowchart illustrating a method of calculating a sink capacity according to an embodiment.
  • FIG. 8 is a view for explaining a method of specifying fruits and leaves of a crop in a measuring device according to an exemplary embodiment.
  • FIG. 9 is a flowchart illustrating a method of calculating a sink capacity and a source capacity based on leaf information according to an embodiment.
  • 10 to 12 are diagrams for explaining a reference position according to an embodiment.
  • FIG. 13 is a flowchart illustrating a method of calculating total sink capacity and source capacity according to an embodiment.
  • FIG. 14 is a view of a crop image according to an embodiment.
  • 15 is a flowchart illustrating a method of calculating a crop source capacity and a sink capacity according to an embodiment.
  • 16 is a view for explaining a crop image according to an embodiment.
  • 17 is a diagram for explaining a parameter calculation system for controlling a greenhouse according to an embodiment.
  • 18 is a diagram for explaining a parameter calculation system for controlling a greenhouse according to an embodiment.
  • a method for determining a sink capacity of a crop in a crop image includes: receiving a crop image including fruits and leaves; obtaining fruit information including a location, size, and maturity level of a fruit based on the crop image; and calculating a sink capacity of a crop based on the fruit information.
  • the calculating of the sink capacity comprises: a total sink capacity of the crop based on a first sink capacity for a first fruit having a first size and a second sink capacity for a second fruit having a second size is determined, the first sink capacity of the first fruit is calculated based on a weight of a first size corresponding to the first size, and the second sink capacity of the second fruit corresponds to the second size. It is calculated based on a second size weight, wherein the first size is greater than the second size, and the first size weight is smaller than the second size weight.
  • the total sink capacity is determined by further considering a third sink capacity for a third fruit having a first location and a fourth sink capacity for a fourth fruit having a second location, and The third sink capacity of three fruits is calculated based on a third position weight corresponding to the first position, and the fourth sink capacity of the fourth fruits is calculated based on a fourth position weight corresponding to the second position.
  • the third position may be higher than the fourth position, and the third position weight may be greater than the fourth position weight.
  • obtaining leaf information about the leaf based on the crop image may further include.
  • the total sink capacity is determined by further considering a fifth sink capacity based on the leaf information, and the fifth sink capacity is calculated by assigning a fifth weight to some leaves of the crop.
  • the fifth sink capacity may be calculated for leaves positioned below a predetermined reference position from the ground of the crop.
  • the step of receiving the crop image including the fruit and leaves may further include specifying at least one crop from the crop image, and specifying one of a plurality of fruits and one of a plurality of leaves included in the crop.
  • a system for determining a sink capacity and a source capacity of a crop includes: a measuring device for acquiring a crop image including fruits and leaves of a crop; and a server for calculating a sink capacity and a source capacity of the crop based on fruit information and leaf information calculated based on the crop image.
  • the fruit information includes at least one of location information, size information, and ripeness information of the fruit
  • the sink capacity includes a location weight corresponding to the location information of the fruit and a location weight corresponding to the size information. It is calculated based on the size weight and the maturity weight corresponding to the maturity level information.
  • the maturity information may be determined based on color information based on the RGB Color Histogram of the crop image.
  • the ripening level information may be aging level information determined based on the number of red pixels in the RGB Color Histogram.
  • the maturity weight includes a first maturity weight and a second maturity weight, wherein the first maturity weight corresponds to the first maturity information and the second maturity weight corresponds to the second maturity information; , when the first ripeness information has a greater number of red pixels than the second ripeness information, the first ripeness weight may be greater than the second ripeness weight.
  • the crop image may include a growth point of the crop, and the location information may be distance information based on the growth point.
  • the location information includes first location information and second location information
  • the location weight includes a first location weight and a second location weight, the first location information and the first location weight correspond to each other;
  • the second location information and the second location weight may correspond to each other, and when the first location information is greater than the second location information, the first location weight may be smaller than the second location weight.
  • the measuring device may generate a panoramic crop image in which at least two or more crop images are connected, and the at least two or more crop images may each be an image of a crop.
  • the server divides a crop area and a target area for the crop image, calculates a green area for the target area, the server applies a weight for each target area to the target area, and the weight for each target area Total source capacity and sink capacity may be calculated based on the information on the target area and the green area.
  • the server may extract key point information from the crop image, and calculate a crop source capacity and sink capacity based on the key point information and the total source capacity and sink capacity.
  • a method for controlling a smart farm based on a sink capacity and a source capacity of a crop may include: receiving an image of a crop including fruits and leaves; obtaining fruit information including a location, size, and maturity level of a fruit based on the crop image; obtaining leaf information including a leaf of a fruit based on the crop image; calculating a sink capacity of a crop based on the fruit information and the leaf information; calculating a source capacity of a crop based on the leaf information; and controlling the smart farm based on the sink capacity and the source capacity.
  • the controlling of the smart farm may include adjusting the temperature in the smart farm to a preset value when the sink capacity is greater than the source capacity.
  • the controlling of the smart farm may include controlling the temperature in the smart farm to increase when the sink capacity is greater than the source capacity.
  • the step of controlling the smart farm may include controlling the temperature in the smart farm to increase so that the deviation from the current temperature of the smart farm is larger when the difference between the sink capacity and the sink capacity is large. .
  • the leaf information may include a plurality of leaf information, a sink capacity may be calculated based on at least some of the leaves among the plurality of leaves, and a source capacity may be calculated based on a remaining part of the plurality of leaves.
  • the calculating of the sink capacity of the crop may include calculating the sink capacity based on leaves positioned below a reference position in a total height from the ground of the crop.
  • the reference position may be changed according to a change in the total height of the crop.
  • the reference position may be maintained at a constant position even if the total height of the crop is changed.
  • the step of controlling the smart farm may output a message to remove leaves based on the sink capacity and the source capacity.
  • the controlling of the smart farm may output a message for removing leaves located below the reference position based on the sink capacity and the source capacity.
  • the controlling of the smart farm may output a message to remove more leaves as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater.
  • the controlling of the smart farm may be a step of outputting a message instructing harvesting of at least some of the fruits of the crop based on the sink capacity and the source capacity.
  • the controlling of the smart farm may be a step of outputting a message designating at least one of a location and number of fruits to be harvested according to a deviation between the sink capacity and the source capacity when the sink capacity is greater than the source capacity.
  • a smart farm control system includes: a measuring device for acquiring a crop image including fruits and leaves of a crop; and a server for calculating a sink capacity and a source capacity of the crop based on information calculated based on the fruit information and leaf information.
  • the crop image is a crop image including at least one crop
  • the server distinguishes a crop area and a non-crop area with respect to the crop image, and extracts a target area from the crop area, and the server is located in the target area. Based on the weight of the target area for , the total crop sink capacity and source capacity may be calculated.
  • the measuring device may recognize a crop feature point in the crop image.
  • the crop characteristic point may include the growth point of the crop.
  • the server may calculate a crop sink capacity and a source capacity based on the number of the crop feature points.
  • the server may output a control message to harvest at least one or more fruits based on the fruit information.
  • the server may output a control message to remove at least one or more leaves based on the leaf information.
  • the method for controlling a greenhouse environment includes acquiring at least one image of a crop, extracting a first feature, a second feature, and a third feature included in the acquired at least one image, the first calculating a first parameter based on at least one of the first to third characteristics, calculating a second parameter based on at least one of the first through third characteristics, and the first and second parameters Calculating a third parameter based on , calculating a second sub-parameter based on the second characteristic, and calculating the first parameter based on at least the first sub-parameter and the second sub-parameter, wherein the second parameter The calculating comprises calculating a third sub-parameter based on the third characteristic and calculating the second parameter based on at least the third sub-parameter, and based on the third parameter, the greenhouse
  • the controlling of the environment may include comparing the third parameter with a reference value, and at least one included in the first group greenhouse control operation or the second group greenhouse control operation based on the comparison result of the third parameter and the reference value.
  • the first characteristic is a characteristic corresponding to a flower of a crop
  • the second characteristic is a characteristic corresponding to a fruit of a crop
  • the third characteristic is a characteristic corresponding to a leaf of a crop may be characteristic.
  • At least one control operation included in the second group greenhouse control operation is performed, and when the third parameter is less than the reference value, it is included in the first group greenhouse control operation At least one control operation may be performed.
  • the first weight for calculating the first sub-parameter may be greater than the second weight for calculating the second sub-parameter.
  • the second weight for calculating the second sub-parameter may be changed based on the magnitude of the second feature.
  • the second weight for calculating the second sub-parameter may increase as the size of the second feature decreases.
  • the first group greenhouse control operation is an operation of changing the standard of fruit removal to remove more fruits in order to reduce the number of remaining fruits per one room, and at least one fruit to reduce the number of remaining fruits per one room.
  • the action of deciding to remove Changing the standard of leaf removal so that there are 3 leaves in the controlling the greenhouse to reduce the temperature and humidity deviation to induce vegetative growth by giving less stress to the crop, and reducing the stress on the crop to induce vegetative growth.
  • the operation of controlling the greenhouse to reduce the deviation may include at least one of the operations.
  • the second group greenhouse control operation is an operation of changing the standard of fruit removal so as to remove fewer fruits in order to increase the number of remaining fruits per one flower room, and a leaf so that the number of leaves to be left on a new side branch is reduced at the upper end.
  • Changing the standard of removal changing the standard of leaf removal so that 0 to 1 leaves are left on the new geodesic in the upper part control operation, controlling the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crops; It may include at least one of an operation of transmitting a guide message for , and an operation of outputting a notification for the aforementioned control.
  • the first parameter may be a parameter corresponding to the sink capacity
  • the second parameter may be a parameter corresponding to the source capacity
  • the method for controlling a greenhouse environment includes acquiring at least one image of a crop, extracting a first feature, a second feature, and a third feature included in the acquired at least one image, the first to calculating a first parameter based on at least one characteristic of a third characteristic, calculating a second parameter based on at least one characteristic of the first to third characteristics, and the first parameter and the second characteristic
  • a method comprising controlling a greenhouse environment based on a parameter, wherein the calculating of the first parameter includes calculating a first sub-parameter based on the first characteristic, and a second sub-parameter based on the second characteristic.
  • the calculating of the second parameter comprises: calculating a sub-parameter and calculating the second parameter based on at least the third sub-parameter, wherein controlling the greenhouse environment based on the first parameter and the second parameter comprises the first performing a first group greenhouse control operation when the parameter is greater than the second parameter and performing a second group greenhouse control operation when the second parameter is greater than the first parameter,
  • the first characteristic may be a characteristic corresponding to a flower of a crop
  • the second characteristic may be a characteristic corresponding to a fruit of a crop
  • the third characteristic may be a characteristic corresponding to a leaf of a crop.
  • the first group greenhouse control operation is an operation of changing the standard of fruit removal to remove more fruits in order to reduce the number of remaining fruits per one room, and at least one fruit to reduce the number of remaining fruits per one room.
  • the action of deciding to remove Changing the standard of leaf removal so that there are 3 leaves in the controlling the greenhouse to reduce the temperature and humidity deviation to induce vegetative growth by giving less stress to the crop, and reducing the stress on the crop to induce vegetative growth.
  • the operation of controlling the greenhouse to reduce the deviation may include at least one of the operations.
  • the second group greenhouse control operation is an operation of changing the standard of fruit removal so as to remove fewer fruits in order to increase the number of remaining fruits per one flower room, and a leaf so that the number of leaves to be left on a new side branch is reduced at the upper end.
  • Changing the standard of removal changing the standard of leaf removal so that 0 to 1 leaves are left on the new geodesic in the upper part control operation, controlling the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crops; It may include at least one of an operation of transmitting a guide message for , and an operation of outputting a notification for the aforementioned control.
  • FIG. 1 is a schematic diagram of a greenhouse system according to an embodiment.
  • a greenhouse system 1 may include a greenhouse 2 , a measurement device 20 , and a server 30 .
  • the greenhouse 2 may be a space in which crops are grown.
  • the greenhouse 2 may be a space in which a system capable of measuring basic information inside the greenhouse, such as humidity and temperature inside the greenhouse for the growth of crops, is built.
  • the greenhouse 2 may be a space in which a system capable of controlling the inside of the greenhouse is built based on the measured internal basic information.
  • the greenhouse 2 has been described as an example, but the greenhouse 2 may be a smart farm. That is, the greenhouse system 1 according to the embodiment may be applied to a space such as an open field rather than a closed space such as the greenhouse 2 .
  • the crop 10 may be a plant capable of growing in the greenhouse 2 .
  • the crop 10 may be a plant grown in soil or a plant grown through a nutrient solution.
  • the crop 10 may be a tomato, paprika, or the like.
  • the crops 10 may be arranged along rows parallel to each other in the greenhouse 2 . That is, the crop 10 may be classified according to heat and grown in a greenhouse.
  • the crop 10 may include a first row crop 11 , a second row crop 12 , and a third row crop 13 .
  • the crops 11 in the first row may be disposed and grown in the first row
  • the crops 12 in the second row may be disposed and grown in the second row
  • the crops 13 in the third row may be disposed and grown in the third row can be
  • Crops 10 may be grown at regular intervals in each row.
  • the crop 10 may move at regular intervals within the row as it grows.
  • the crop 10 may move at regular intervals within a row along the bait line.
  • the measuring device 20 is movable within the greenhouse 2 .
  • the measuring device 20 can move along between rows in which crops are grown.
  • the measuring device 20 may move between the first row crop 11 and the second row crop 12 , and between the second row crop 12 and the third row crop 13 .
  • the measuring device 20 may move through a rail installed between the crops in the first row 11 and the crops 12 in the second row, and between the crops in the second row 12 and the crop 13 in the third row, or without rails. It can move while maintaining a certain distance between crops.
  • the measuring device 20 may acquire an image of a crop including fruits and leaves in the greenhouse 2 .
  • the measuring device 20 may acquire a crop image while moving in the greenhouse 2 .
  • the measuring device 20 moves between the crops in the first row 11 and the crops in the second row 12 and between the crops in the second row 12 and the crop 13 in the third row, and crops images including fruits and leaves. can be obtained.
  • the measuring device 20 may acquire a crop image while maintaining a constant speed, and may acquire a crop image at a fixed position.
  • the measuring device 20 may acquire crop information included in the crop image based on the crop image.
  • the crop information may include at least one of a position, size, maturity, and leaf position of a fruit.
  • the position of the fruit may be a height at which the fruit is located from the ground, and the position of the leaf may also be a height at which the leaf is located from the ground.
  • the measuring device 20 may transmit the crop information to the server 30 .
  • the server 30 may determine the growth information of the crop based on the crop information.
  • the server 30 may determine the growth information of crops by applying different weights to the crop information.
  • the weight may be determined according to the size and position of the fruit included in the crop, and the position of the leaf included in the crop.
  • the growth information may include at least one of a sink capacity and a source capacity of a crop.
  • the source capacity may mean a capacity at which essential nutrients are obtained, and the sink capacity may mean a capacity at which nutrients are used.
  • the sink capacity may mean a capacity difference between the respiratory rate and the photosynthetic amount when the crop's respiration rate is greater than the photosynthetic amount by comparing the crop's respiration rate and the photosynthetic amount.
  • the source capacity compares the photosynthetic amount and the respiration rate of the crop, and when the photosynthetic amount of the crop is greater than the respiration rate, it may mean a difference capacity between the photosynthetic amount and the respiration rate.
  • the server 30 may control the greenhouse 2 based on the growth information.
  • the greenhouse control may include at least one of a determination to harvest fruit of a crop, a determination to remove leaves of a crop, and a determination to control the temperature in the greenhouse 2 based on the growth information.
  • the greenhouse control may include a change in fruit removal criteria, a change in the number of fruits to be left per one flower room, a change in the number of leaves to be left on a side branch, a change in temperature and humidity deviation, a change in moisture content deviation, a change in the greenhouse It may include at least one of controlling the temperature.
  • the following is a detailed description of the measuring device 20 .
  • FIG. 2 is a block diagram illustrating a measuring device according to an exemplary embodiment.
  • the measurement apparatus 20 may include an image acquisition unit 21 , a control unit 22 , and a storage unit 23 .
  • the image acquisition unit 21 may be implemented as at least one camera.
  • the image acquisition unit 21 may acquire an image.
  • the image acquisition unit 21 may acquire a plurality of images.
  • the image may be an image including at least one of fruits and leaves of crops grown in a greenhouse.
  • the image may be an image including a plurality of crops grown in a greenhouse, or the image may be an image including an inducer line installed for each of the plurality of crops.
  • the image acquisition unit 21 may transmit the acquired image to the control unit 22 or the storage unit 23 .
  • the controller 22 may determine crop information based on the image.
  • the crop information may include at least one of a position, size, maturity, and leaf position of a fruit.
  • the crop information may include location information of a fruit included in the crop, information on the size of the fruit, information on the maturity level of the fruit, and location information of a leaf included in the crop.
  • the location information of the fruit and the location information of the leaves are information on the vertical height of the fruit from the ground, information on the vertical distance spaced apart from the specific location of the ceiling in the greenhouse, It may be information about distance.
  • the control unit 22 may transmit the crop information to the storage unit 23 or the server 30 .
  • the storage unit 23 may store the image acquired by the image acquisition unit 21 .
  • the storage unit 23 may store crop information determined by the control unit 22 .
  • the storage unit 23 may transmit the crop information to the server 30 .
  • FIG. 3 is a block diagram illustrating a server according to an embodiment.
  • the server 30 may include a control unit 31 and a storage unit 32 .
  • the control unit 31 may determine the growth information of the crop based on the crop information received from the measuring device 20 .
  • the control unit 31 may determine the growth information of the crop by using at least one weight for the crop information.
  • the growth information of the crop may include at least one of a sink capacity and a source capacity of the crop.
  • the control unit 31 may determine the growth information of the crop by using different weights for the crop information. For example, the controller 31 may determine the growth information of the crop based on different weights according to the fruit size of the crop among the crop information.
  • control unit 31 may determine the growth information of the crop according to the position of the leaf among the crop information. For example, the controller 31 may determine that at least one leaf is a sink capacity or a source capacity according to a location based on location information of the leaf from the ground.
  • the control unit 31 may determine information about the control inside the greenhouse based on the growth information.
  • the information on the control inside the greenhouse may be information about controlling the temperature inside the greenhouse by comparing the sink capacity and the source capacity.
  • the information on the control inside the greenhouse may be information on the determination to harvest the fruit of the crop by comparing the sink capacity and the source capacity, and information about the determination to remove the leaves of the crop by comparing the sink capacity and the source capacity may be
  • the control unit 31 may transmit growth information to the storage unit 32 .
  • the control unit 31 may transmit information related to the control of the inside of the greenhouse to the storage unit 32 .
  • the storage unit 32 may store the growth information.
  • the storage unit 32 may store information about the control inside the greenhouse.
  • the storage unit 32 may transmit the growth information and information on the control inside the greenhouse to the control unit 31 .
  • 4 and 5 are a block diagram of a system for measuring sink capacity and source capacity and a flowchart of a method for measuring sink capacity and source capacity according to an embodiment.
  • the measuring device 20 may acquire an image 100 , and extract fruit information 210 and leaf information 220 based on the acquired image 100 .
  • the image 100 may be an image including at least one fruit.
  • the image 100 may be an image of a crop including at least one fruit and at least one leaf.
  • the image 100 may be a plurality of images related to one crop.
  • the image 100 may be a panoramic image in which several images corresponding to one crop are stitched together. The process of concatenating a plurality of images and processing them into one image will be described later with reference to FIG. 6 .
  • the leaf may refer to all the leaves formed on the stem extending from the largest original branch to the side branch in the crop. Alternatively, the leaf may refer to one of a plurality of leaves formed on the stem extending from the side branch.
  • the image 100 may include at least one crop or an image including only one crop.
  • the image 100 may be an image acquired by the measuring device in a specific area in the greenhouse.
  • the image 100 may be an image including a cluster area of crops in a greenhouse.
  • the image 100 may be an image processed through image processing.
  • image processing may be a process of generating a plurality of images into one panoramic image. More specifically, image processing may be a process of concatenating a plurality of images of one crop to create one image corresponding to the crop.
  • the measuring device 20 may extract fruit information 210 and leaf information 220 about a crop based on the image.
  • Fruit information 210 and leaf information 220 about a crop based on the image may be extracted from the server 30 .
  • the measuring device 20 transmits the image to the server 30 , and the server 30 may extract fruit information 210 and leaf information 220 about the crop based on the received image.
  • a learned neural network is installed in the measuring device 20 or the server 30, and fruit information 210 and leaf information 220 about a crop may be extracted based on the image by the learned neural network. .
  • the fruit information 210 may be information including at least one of the location, size, and maturity of the fruit included in the crop image.
  • the information on the location of the fruit may be information on the location of one fruit included in the crop with respect to one crop included in the crop image. More specifically, it may be information about the height of the fruit separated from the ground, information about the distance away from the ceiling in the greenhouse, or information about the distance away from the growing point of the crop.
  • the information on the size of the fruit may be information on the size of one fruit included in the crop for one crop included in the crop image. More specifically, it may be information about the relative size of the fruit compared with other fruits, or information about the absolute size of the fruit.
  • the information on the maturity level of the fruit may be information on the maturity level of one fruit included in the crop for one crop included in the crop image. More specifically, with respect to the ripening degree of the fruit, it may be relative maturity information with other fruits or absolute ripeness information.
  • the leaf information 220 may be information about a position of a leaf included in a crop image.
  • the information about the position of the leaf may be information about the height at which one leaf included in the crop is spaced apart from the ground, information about the distance away from the ceiling in the greenhouse, or information about the distance away from the growth point of the crop. have.
  • the measuring device 20 may transmit fruit information 210 and leaf information 220 about the crop to the server 30 .
  • the server 30 may calculate the sink capacity 310 and the source capacity 320 based on the fruit information 210 and the leaf information 220 .
  • the server 30 may control the greenhouse 400 based on the sink capacity 310 and the source capacity 320 .
  • the server 30 may calculate the sink capacity of the crop based on the fruit information 210 and the leaf information 220 .
  • the server 30 may calculate the sink capacity of the crop based on at least one of the location, size, and maturity of the fruit among the fruit information.
  • the server 30 may calculate the sink capacity by using different weights for the error information.
  • the server 30 may calculate the sink capacity by using the leaf information.
  • the server 30 may determine the sink capacity based on the position of the leaf among the leaf information. A detailed method for the server 30 to calculate the sink capacity will be described later with reference to FIGS. 7 and 8 .
  • the server 30 may calculate the source capacity by utilizing the leaf information.
  • the server 30 may calculate the source capacity based on leaf position information among the leaf information.
  • the server 30 may calculate the source capacity of the crop by using different weights for the leaf position information among the leaf information.
  • the method of calculating the sink capacity and the source capacity with reference to FIG. 5 will be described.
  • the method for calculating the sink capacity and the source capacity includes the steps of receiving, by the measuring device, a crop image including fruits and leaves of the crop (S101); extracting, by the measuring device, fruit information and leaf information based on the crop image (S102); determining, by the server, a sink capacity and a source capacity of a crop based on the fruit information and the leaf information (S103); and the server controlling the greenhouse based on the sink capacity and the source capacity (S104).
  • the method for calculating the sink capacity and the source capacity includes the steps of: a measuring device receiving a crop image including fruits and leaves of a crop (S101), the measuring device extracting fruit information and leaf information based on the crop image
  • a measuring device receiving a crop image including fruits and leaves of a crop (S101)
  • the measuring device extracting fruit information and leaf information based on the crop image
  • the detailed description of the step (S102), the server determining the sink capacity and the source capacity of the crop based on the fruit information and the leaf information (S103) is the same as the description of the sink capacity and source capacity measurement system described above. Duplicate bars will be omitted.
  • the server may control the greenhouse based on the sink capacity and the source capacity.
  • the meaning that the server controls the greenhouse based on the sink capacity and the source capacity means an operation of directly changing at least some of parameters for the greenhouse, an operation of transmitting a command for controlling the greenhouse, and an operation of controlling the greenhouse. It may include an operation of transmitting a guide message for controlling the .
  • the server controls the greenhouse based on the sink capacity and the source capacity means an operation of directly changing at least some of parameters for the greenhouse, an operation of transmitting a command for controlling the greenhouse, and an operation of controlling the greenhouse. It may include an operation of transmitting a guide message for controlling the .
  • the server may change the error removal criterion based on the sink capacity and the source capacity.
  • the server when the sink capacity is greater than the source capacity, the server according to an embodiment may change the criteria for removing fruits so that more fruits are removed in order to reduce the number of fruits remaining per room, but is not limited thereto. does not
  • the server may determine to remove at least one fruit in order to reduce the number of remaining fruits per one room, but is not limited thereto.
  • the server when the source capacity is greater than the sink capacity, the server according to an embodiment may change the criteria for removing fruits so that fewer fruits are removed in order to increase the number of fruits remaining per one room. not limited
  • the server may change the leaf removal criterion based on the sink capacity and the source capacity.
  • the server when the sink capacity is larger than the source capacity, the server according to an embodiment sets the standard of leaf removal so that the number of leaves to be left on a new branch at the upper end increases in order to further increase leaves that can become sources in the future. It can be changed, but is not limited thereto.
  • the server may change the leaf removal criteria so that, when the sink capacity is greater than the source capacity, 2 to 3 leaves are left on the newly created geodesic at the upper end, but is not limited thereto. does not
  • the server when the source capacity is greater than the sink capacity, the server according to an exemplary embodiment may change the leaf removal criterion so that the number of leaves to be left on the newly created geodesic at the upper end decreases, but is not limited thereto.
  • the server may change the leaf removal criteria so that, when the source capacity is greater than the sink capacity, 0 to 1 leaves are left on a new geodesic at the upper end, but is not limited thereto. does not
  • the server may control the greenhouse so that a temperature and humidity deviation is adjusted based on the sink capacity and the source capacity.
  • the server may control the greenhouse to reduce the temperature and humidity deviation in order to induce vegetative growth by applying less stress to the crop, but is not limited thereto.
  • the server may control the greenhouse to increase the temperature and humidity deviation in order to induce reproductive growth by applying more stress to the crop, but is not limited thereto. does not
  • the server may control the greenhouse so that a moisture content deviation is adjusted based on the sink capacity and the source capacity.
  • the server may control the greenhouse to reduce the moisture content deviation in order to induce vegetative growth by applying less stress to the crop, but is not limited thereto.
  • the server may control the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crop, but is not limited thereto. does not
  • the server may control the temperature of the greenhouse based on the sink capacity and the source capacity.
  • the server may control the greenhouse to lower the average temperature of the greenhouse in order to reduce the respiration rate of crops, but is not limited thereto.
  • the server may control the greenhouse to increase the average temperature of the greenhouse to increase the respiration rate of crops, but is not limited thereto.
  • the server may determine to control the temperature, CO2 concentration, and humidity of the greenhouse accordingly.
  • the server may lower the temperature of the greenhouse when the sink capacity is greater than the source capacity.
  • the server may determine to remove any fruit included in the crop in the greenhouse.
  • the server may determine that at least one of a plurality of fruits of a specific flower room of a crop in the greenhouse should be removed.
  • the server may determine to harvest the removal located below a specific height of the crop.
  • the server may determine to remove any leaves included in the crop in the greenhouse.
  • the arbitrary leaf may be a leaf determined by the server based on the height of the region where the leaf is located. The server may output a message based on the determination to remove the fruit and the determination to remove the leaf.
  • the server may control the greenhouse based on a difference between the sink capacity and the source capacity.
  • the server may further lower the temperature of the greenhouse as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater.
  • the server may lower the temperature of the greenhouse by the first deviation when the sink capacity is greater than the source capacity by a first capacity difference.
  • the server may lower the temperature of the greenhouse by a second deviation when the sink capacity is greater than the source capacity by a second capacity difference.
  • the first capacity difference may be greater than the second capacity difference, and the first deviation may be greater than the second deviation.
  • the temperature of the greenhouse may be further increased.
  • the server may increase the temperature of the greenhouse by a third deviation when the sink capacity is smaller than the source capacity by a third capacity difference.
  • the server may increase the temperature of the greenhouse by a fourth deviation when the sink capacity is smaller than the source capacity by a fourth capacity difference.
  • the third capacity difference may be greater than the fourth capacity difference, and the third deviation may be greater than the fourth deviation.
  • the server may output a message to harvest more fruits as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater.
  • the server may output a message to harvest a number of fruits when the sink capacity is greater than the source capacity by a first capacity difference, and select b fruits when the sink capacity is greater than the source capacity by a second capacity difference You can print a message telling you to harvest.
  • the first capacity difference may be greater than the second capacity difference, and a may be greater than b.
  • the server may harvest more fruits by designating a location of harvest target fruits.
  • the server may output a message to harvest fruit with a height of h1 or less, and when the sink capacity is larger than the source capacity by a second capacity difference, a message to harvest fruits with a height of h2 or less can be printed out.
  • h1 may be greater than h2. That is, the server can designate the number of harvest target fruits by designating the location of the harvest target fruit as a range, so that the sink capacity of the crop can be reduced as a result.
  • the server may output a message to remove more lower lobes as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater.
  • the server may output a message to remove c leaves when the sink capacity is greater than the source capacity by a first capacity difference, and remove d leaves when the sink capacity is greater than the source capacity by a second capacity difference You can print a message asking you to remove it.
  • the first capacity difference may be greater than the second capacity difference, and c may be greater than d.
  • the server may remove more leaves by designating a height of leaves to be removed as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater.
  • the server may output a message to remove leaves with a height of h3 or less, and when the sink capacity is larger than the source capacity by a second capacity difference, a message to remove leaves with a height of h4 or less can be printed out.
  • h3 may be greater than h4. That is, the server may designate the number of leaves to be removed by designating the position of the leaves to be removed as a range, and as a result, the sink capacity of the crop may be lowered.
  • the height may be the reference height that is the boundary between the sink and the source of the leaf, or may be a height lower than the reference height.
  • the greenhouse control determined by the server described above corresponds to an example, and the determination to control the greenhouse based on the sink capacity and the source capacity is not interpreted as being limited to an example.
  • FIG. 6 is a view of a crop image processing process according to an embodiment.
  • the measuring device may acquire at least one image.
  • the image may include several images corresponding to one crop.
  • the measuring device may acquire a first image 101 , a second image 102 , and a third image 103 corresponding to one crop.
  • the first image 101 , the second image 102 , and the third image 103 may correspond to one crop. More specifically, the meaning of corresponding to one crop may mean that the first image 101 , the second image 102 , and the third image 103 include an arbitrary part in one crop.
  • the control unit in the measuring device may generate one crop image 100 by connecting the first image 101 , the second image 102 , and the third image 103 .
  • the crop image 100 may be an image that corresponds to one crop and includes all crops in one image.
  • control unit in the measuring device may acquire the first image 101 , the second image 102 , and the third image 103 by tracking a crop in one at a fixed position. Accordingly, the first image 101 , the second image 102 , and the third image 103 are connected to each other to obtain the crop image 100 , which is one panoramic image.
  • the controller of the measuring device may acquire a panoramic image of the crop by connecting the first image 101 , the second image 102 , and the third image 103 based on the reference line.
  • the baseline may be the original stem of the crop.
  • the measuring device may calculate fruit information and leaf information by using the crop image 100 .
  • a method of outputting error information from the measuring device and determining the sink capacity and the source capacity based on the output error information in the measurement device will be described using FIGS. 7 and 8 .
  • FIG. 7 is a flowchart of a method of calculating a sink capacity based on fruit according to an exemplary embodiment
  • FIG. 8 is a diagram for explaining a method of specifying a fruit of a crop by a measuring device.
  • the method for calculating the sink capacity includes a step of inputting an image obtained by a measuring device to the controller (S201), a step of the controller specifying crops and fruits based on the image (S202), and the controller
  • the controller of the measuring device may acquire an image including fruits and leaves of a crop.
  • the image may be acquired through an image acquisition unit in the measurement device.
  • the acquired image may be transmitted to a control unit in the measurement device.
  • the image may be an image in which a plurality of crops are photographed.
  • the measuring device may specify crops and fruits based on the images.
  • the measuring device may specify one crop with respect to a plurality of crops included in the image and may specify one fruit with respect to a plurality of fruits included in the crop.
  • one leaf may be specified for a plurality of leaves included in the crop.
  • This specification may utilize an artificial neural network included in the control unit in the measurement device.
  • the measuring device may specify one crop among a plurality of crops included in the image based on the characteristic points of the crop.
  • the characteristic point may be a growth point of a crop, and the characteristic point may be a traction line for fixing the position of the crop.
  • the artificial neural network included in the control unit in the measurement device may learn from the image.
  • the learned artificial neural network can extract features from the image or detect a specific object included in the image.
  • the artificial neural network may include all architectures having a function of learning from an image and extracting a feature from the image.
  • the artificial neural network may include a CNN-based algorithm model.
  • a method of specifying a fruit and a leaf using an artificial neural network in the measurement device will be described in detail with reference to FIG. 8 .
  • the artificial neural network may learn from a crop image (a).
  • the crop image (a) may include at least one fruit and at least one leaf.
  • the crop image (a) may be a crop image acquired in real time by the measuring device or a crop image stored in a storage unit.
  • the artificial neural network can recognize the fruit by receiving the crop image as shown in (a).
  • the output result of the artificial neural network recognizing the fruit can be confirmed by referring to the crop image (b).
  • the artificial neural network can display and output the area with fruit in the form of a bounding box, such as the crop image (b).
  • a fruit may be located inside the bounding box, and a fruit information vector may correspond to each of the bounding boxes.
  • the fruit information vector may include location information, size information, and ripeness information of the specified fruit.
  • the control unit may output the location information of the fruit specified by the (X,Y) coordinates of the fruit information vector.
  • the first bounding box 104 may correspond to the first fruit information vector 105 .
  • the first bounding box 104 and the first error information vector 105 may be result values output through the learned artificial neural network.
  • the first bounding box 104 and the first fruit information vector 105 may correspond to a fruit.
  • (X,Y) may indicate the position of the bounding box 104 .
  • (X, Y) in the fruit information vector 105 may be coordinates indicating the location of the fruit in the input image.
  • the (X,Y) may be location coordinate information of the most central point of the bounding box 104 or location coordinate information of one vertex of the bounding box.
  • the controller may output the location information of the fruit in consideration of the fruit information vector 105 and the photographing position of the image. For example, when the height of the photographing position of the image is Y1, the controller may output (X, Y+Y1) as the location information of the fruit.
  • the photographing position of the image may be calculated based on a specific position of the crop. That is, the photographing position of the image may be calculated based on the growth point of the crop, or may be calculated based on the bottom surface on which the crop is planted.
  • the panoramic image is configured in a form including a specific position of a crop, so a photographing position of the image may be calculated based on the panoramic image.
  • the controller may output information on the size of the fruit specified by the (L,H) coordinates of the fruit information vector.
  • (L,H) may indicate the size of the bounding box 104 .
  • L may represent the length of one horizontal side of the bounding box 104
  • H may represent the length of one vertical side of the bounding box 104 .
  • the area of the bounding box 104 may be obtained through L and H of the fruit information vector, and the area may correspond to the size of the fruit corresponding to the fruit information vector.
  • the size of the fruit corresponding to the fruit information vector may be calculated according to the area.
  • the size information may be information regarding an absolute value regarding the size of the specified fruit or a relative value compared with other fruits. More specifically, the size information may be area information about an area occupied by the specified fruit in the crop image. That is, the controller in the measuring device may determine that the larger the area occupied by the specified fruit in the crop image is, the larger the size of the fruit is. Alternatively, the size information may be information on the number of pixels in the area occupied by the specified fruit. For example, the larger the number of pixels in the area occupied by the specified fruit, the larger the size of the corresponding fruit may be determined.
  • the control unit may output ripeness information of the fruit specified by the fruit information vector.
  • the fruit information vector 105 has a vector form of (X, Y, L, H, 1), 1 excluding (X, Y, L, H) may be information on fruit ripeness.
  • Information on fruit ripeness may be data classified into “first ripeness”, “second ripeness”, and “third ripeness”. Information on fruit ripeness may be implemented as 0 labeling data when corresponding to "first ripeness”. Furthermore, if it corresponds to the "second ripeness”, it may be implemented with labeling data of 1. If it corresponds to the "third degree of maturity", it may be implemented with labeling data of 2.
  • Classifying the ripeness of fruit into three or more classes may be determined according to the color of the fruit corresponding to each class.
  • the color of the fruit corresponding to the "first ripeness”, the color of the fruit corresponding to the "second ripening degree”, and the color of the fruit corresponding to the "third ripening degree” are the colors of the fruit after the fruit is ripe. It can be one of several possible colors.
  • the fruit corresponding to the “first degree of maturity” may correspond to a case in which the time is longer based on the time of ripening than the fruit corresponding to the “second degree of maturity”.
  • the fruit corresponding to the “third degree of ripeness” may correspond to a case in which the time has continued longer than the fruit corresponding to the “second degree of ripeness” based on the time of ripening. That is, if the fruit corresponding to the "first ripening degree", the fruit corresponding to the "second ripening degree”, and the "fruit corresponding to the third ripening degree” are the same, it corresponds to the "first ripening degree” A fruit that corresponds to the "second ripening degree". It may be an older case based on the time of fruiting in the order of the fruit corresponding to the "third degree of ripeness".
  • the ripeness information may be information about an absolute value regarding the ripening degree of the specified fruit or a relative value compared with other fruits. More specifically, the ripeness information may be determined based on color information of an area occupied by the specified fruit. For example, the server may determine the first degree of ripeness, the second degree of ripeness, and the third degree of ripeness by comparing the color of the region occupied by the specified fruit with the reference color.
  • a method of plotting the area occupied by the specified fruit as an RGB (Red, Green, Blue) color histogram may be used. More specifically, the server may graph the area occupied by the specified fruit as an RGB color histogram, and calculate the number of pixels having a red color in the area. Based on the calculated number of red color pixels, the first ripening level, the second ripening level, and the third ripening level may be determined. For example, the server may determine that the greater the number of Red Color pixels, the greater the maturity level.
  • RGB Red, Green, Blue
  • the fruit information vector 105 is (X, Y, L, H, 1)
  • the fruit corresponding to the fruit information vector 105 has a fruit ripening degree of 1 and a second ripening degree corresponding to the labeling data. It can mean to have
  • the server may load the weights based on the error information received from the measurement device.
  • the fruit information may include at least one of location information, size information, and ripeness information of the fruit.
  • the server may load the location weight based on the location information of the specified error.
  • the server may set the position weight based on the position of the region where the fruit is located in the crop.
  • the location information of the fruit determined by the measuring device may be first location information or second location information. If the location information of the fruit determined by the measuring device is the first location information, the server may load the first location weight, and if the location information is the second location information, the server may load the second location weight.
  • the first location weight may have a higher value than the second location weight.
  • the server may set a higher weight for the most recently acquired fruit. Since more nutrients can be consumed in the initial stage after the fruit has arrived, a more accurate sink capacity can be calculated by setting different weights according to the height at which the fruit is located.
  • the server may load the size weight based on the size information of the specified fruit.
  • the server may set the size weight based on the size of the fruit.
  • the fruit size information determined by the measuring device may include first size information and second size information.
  • the server may load the first size weight when the specified fruit has the first size information, and load the second size weight when the specified fruit has the second size information.
  • the first size weight may be smaller than the second size weight.
  • the size information is pixel number information for an area occupied by the specified fruit in the crop image
  • the first size weight may be a value smaller than the second size weight .
  • the server may set a high weight when the size of the fruit is small. Since a smaller fruit size can consume more nutrients for growth, a more accurate sink capacity can be calculated by setting different weights according to the fruit size.
  • the server may load the ripeness weight based on the maturity information of the specified fruit.
  • the server may set the ripening level weight based on the ripening level of the fruit.
  • the ripening level information of the fruit determined by the measuring device may be the first ripening level information or the second ripening level information.
  • the server may load the first ripeness weight when the ripeness information of the specified fruit is the first ripeness information, and load the second ripeness weight when the ripeness information is the second ripeness information.
  • the ripeness information is determined based on the color information of the region occupied by the specified fruit, and when the first ripeness information is higher than the second ripeness information, the first maturity level weight is higher than the second ripeness level weight. It can be a high value.
  • the server can consume more nutrients when the ripeness of the fruit is high compared to when the ripeness of the fruit is low. have.
  • the first maturity level weight may be a value lower than the second maturity level weight value.
  • the server may load the same weight according to the ripeness of the fruit.
  • the server may calculate the sink capacity of the specified fruit based on the location weight, the size weight, and the ripeness weight for the specified fruit. (S209)
  • the server may calculate the sink capacity of the specified fruit by applying the location weight, the size weight, and the maturity weight to the specified fruit at a predetermined ratio.
  • the sink capacity of a specified fruit may represent the nutrients consumed by one specified fruit.
  • the constant ratio may be a ratio arbitrarily set by a user.
  • the server may calculate the sink capacity for the crop based on the sink weight for each of the fruits.
  • the server may calculate a sink capacity for each of a plurality of fruits that have been harvested on a specified crop.
  • the server may calculate the sink capacity for the specified crop by adding up the sink capacities of a plurality of fruits that have been harvested on the specified crop.
  • the server can calculate the total sink capacity. (S211)
  • the server may calculate the total sink capacity based on the sink capacity of a plurality of crops.
  • the server can calculate the total sink capacity by adding up the sink capacity of multiple crops.
  • the server may determine the same crop included in the plurality of images to prevent overlapping summing of the same crop included in the plurality of images, and may not overlap the sink capacity for the determined same crop.
  • the total sink capacity may mean the total sink capacity in the greenhouse or may be the total sink capacity for a specific area.
  • the specific area is a representative area in the greenhouse
  • the nutrient consumption of all crops in the greenhouse may be calculated by calculating the sink capacity of a plurality of crops located in the specific area.
  • the server may omit the process of calculating the total sink capacity. That is, the server can derive the sink capacity of the entire area in the greenhouse by calculating the sink capacity of one crop having representativeness.
  • FIG. 9 is a flowchart illustrating a method of calculating a sink capacity and a source capacity based on leaf information according to an embodiment.
  • 10 is a diagram for explaining a process of calculating information on leaves of a crop from an image according to an exemplary embodiment.
  • the method of calculating the sink capacity and the source capacity based on leaf information of a crop includes the step of inputting an image obtained by a measurement device to the control unit ( S301 ), and the control unit includes the crop and leaf based on the image.
  • step of specifying (S302), the step of the control unit calculating the location information on the leaf (S303), the server comparing the height of the specific leaf with a reference height based on the location information (S304), the specific leaf Calculating the source capacity when the height of is greater than the reference height (S305), calculating the sink capacity when the height of the specific leaf is smaller than the reference height (S306), the sink capacity and the source capacity for the specific leaf It may include calculating the total sink capacity and the source capacity based on the step (S307).
  • the controller of the measuring device may acquire an image including fruits and leaves of a crop. (S301)
  • the image may be acquired through an image acquisition unit in the measurement device.
  • the acquired image may be transmitted to a control unit in the measurement device.
  • An image as shown in (a) of FIG. 10 may be input to the controller of the measuring device.
  • the control unit of the measuring device may specify crops and leaves based on the image. (S302)
  • a process in which the control unit of the measuring device specifies the crop is the same as in FIG. 8 .
  • the control unit of the measuring device may include a learned artificial neural network, and the learned artificial neural network may recognize a leaf from a crop image.
  • the learned artificial neural network may output a specific leaf in the form as shown in FIG. 10(b).
  • the learned artificial neural network may display and output the area with leaves in the form of a bounding box.
  • a leaf may be positioned inside the bounding box, and a leaf information vector may be output for each of the bounding boxes.
  • the leaf information vector may be output corresponding to the bounding box.
  • the second bounding box 106 may correspond to the leaf information vector 107 .
  • the second bounding box 106 and the leaf information vector 107 may be output through the learned artificial neural network.
  • the controller may output the leaf information vector in the form of (X, Y) coordinates of the leaf information vector.
  • the leaf information vector may include location information of a specific leaf.
  • the leaf information vector may further include size information of a specific leaf.
  • the location information of the specific leaf may be expressed in the form of a bounding box, and one surface of the bounding box may meet an area where a side branch starts from a main branch. That is, the specific leaf may be an area including all portions extending from the main branch.
  • the server may compare the height of the specified leaf with the reference height. (S304)
  • the specified leaf height H1 may be a distance from the ground to an area where the leaf is located.
  • the specified leaf height H1 may be a distance between the second bounding box 104 from the ground.
  • the specified leaf height H1 may be the Y coordinate of one point located in the second bounding box 104 .
  • the specified leaf height H1 may be calculated based on the Y value of the leaf information vector.
  • the specified leaf height H1 may be calculated based on the Y value of the center point of the second bounding box.
  • the height H1 of the specified leaf may be specified as a flower room.
  • the height of the leaf of the crop may be defined as the flower room. That is, since side branches grow from a plurality of flower rooms as the crop grows, the height of the leaves of the crop may be defined when specifying the number of flower rooms in which the leaves are located.
  • the reference height Hth may be a value previously stored in the server.
  • the reference height Hth may be a predetermined value or a value that is changed according to the total height of the crop.
  • the reference height Hth may also be defined as a painting room. That is, the reference height Hth may be defined as, for example, the fifth room.
  • the server may output a result value by comparing the height of the specified leaf with the reference height.
  • the server may determine the specified leaf as the source or the sink according to a result of comparing the specified height of the leaf with the reference height.
  • the server may determine the specified leaf as the source if the height of the specified leaf is greater than the reference height, and may determine the specified leaf as the sink if the height of the specified leaf is less than the reference height.
  • the server may determine the specified leaf as a source, and the specified leaf flower room is If it has a lower value than the reference room, the server may determine the specified leaf as a synchro.
  • the server may determine the specified leaf as the source.
  • the server may determine the specified leaf as a synchro.
  • the server may compare the height of the leaf with the reference height, and calculate the source capacity when the specified leaf is determined as the source. (S305)
  • the server may assign different source weights according to the specified leaf height.
  • the server may calculate the source capacity of the specified leaf by giving a higher source weight as the height of the leaf increases. In the case of a leaf located at a high position from the ground, the portion covered by other crops is relatively small, so photosynthetic production can be relatively high.
  • the source capacity may be calculated to do so.
  • the server may assign different source weights according to the leaf size.
  • the server may calculate the source capacity of the specified leaf by giving a higher source weight as the size of the leaf increases.
  • the source capacity can be calculated to match the production of the crop by giving different source weights according to the size of the leaf.
  • the server may assign different source weights according to the area occupied by the actual leaf in the area specified as the leaf. For example, by calculating the area occupied by the leaf in the second bounding box 106 specifying the leaf, the actual size of the leaf may be derived and a source weight may be assigned. In this case, the area occupied by the leaf may be calculated by counting the number of green pixels in the second bounding box 106 .
  • the server may compare the height of the leaf with the reference height, and calculate the sink capacity when it is determined that the specified leaf is the sink. (S306)
  • the server may give different sink weights according to the height of the leaves.
  • the server may calculate the sink capacity to match the consumption of the crop by giving a sink weight higher as the height of the leaf is lower.
  • the server may give different sink weights according to the size of the leaf.
  • the server may calculate the sink capacity to match the consumption of crops by giving a higher sink weight as the size of the leaf increases.
  • the server may give different sink weights according to the area occupied by the actual leaf in the area specified as the leaf.
  • the server may determine the specified leaf according to the state of the leaf as the source and may determine it as the sink.
  • the leaves of crops can basically function as a source for generating nutrients, but in the case of leaves that do not produce nutrients properly due to aging, or do not receive sunlight, they may act as a sink rather than a source.
  • the server may determine whether the specified leaf is a source or a sink based on the pixel values for the leaf.
  • the server may determine the specified leaf as a synchro.
  • the server may determine the specified leaf as a sync, but is not limited thereto.
  • the server may determine a specific leaf as a synch.
  • the server may determine the specified leaf as a sync, but is not limited thereto.
  • the server can determine whether the specified leaf is a source or a sink based on the size of the leaf.
  • the server may determine the specified leaf as a sink when the leaf size is less than or equal to the reference size, but is not limited thereto.
  • the server may calculate the sink and source capacity of the entire crop.
  • the server may calculate the sink capacity of the entire crop based on the sink capacity of the specific leaf, and may calculate the source capacity of the entire crop based on the source capacity of the specific leaf. However, when calculating the sink capacity of the entire crop, the sink capacity of the fruit described in FIG. 7 may be taken into consideration.
  • the server may calculate the sink and source capacity of one crop, and calculate the sink capacity and source capacity of all crops in the greenhouse.
  • the server may use one crop as a representative crop to determine the sink capacity and the source capacity in the greenhouse through one crop.
  • the server may output a message for greenhouse control based on the source capacity and the sink capacity.
  • the server may output a message to remove the leaf at a height lower than the reference height.
  • the server outputs a message to remove the leaves at a height lower than the reference height, thereby removing the leaves that only consume nutrients, thereby improving the growth of crops and improving the quality of fruits.
  • FIGS. 7 to 9 relate to a method of determining a sink capacity and a sauce capacity based on fruits and leaves among various characteristics included in crops.
  • the sink capacity and the source capacity may be determined based on other characteristics included in the crop.
  • the sink capacity may be determined based on the characteristics of flowers included in the crop, but is not limited thereto.
  • the sink capacity may be determined based on the characteristics of the peak included in the crop, but is not limited thereto.
  • 11 and 12 are views for explaining a reference height according to an embodiment.
  • 11 is a view for showing the reference height setting according to the height of the crop.
  • the server may set different reference positions according to the height of the crop. That is, when the height of the crop is increased, the reference height may also be set high.
  • the reference height Hth may be set as the first reference height 324b, and when the height of the second crop is the second height 325a The reference height Hth may be set as the second reference height 325b.
  • the server can set the height of the crop and the reference height in the same ratio.
  • the ratio between the first height 324a and the first reference height 324b may be set to be the same as the ratio between the second height 325a and the second reference height 325b.
  • the ratio may be a value predefined in the server.
  • the height of the crop may be defined as a distance between a part located at the highest position among parts of the crop and the ground.
  • the height of the crop may be defined as the distance between the growth point of the crop and the ground.
  • the height of the crop may be defined as the distance between the traction line and the ground for guiding the growth of the crop,
  • the height of the crop and the reference height can be defined not only by the ground, but also by the distance from the greenhouse ceiling.
  • FIG. 12 is a view for showing the reference height setting according to the height of the crop.
  • the server may set different reference heights according to the height of the crop.
  • the distance between the height of the crop and the reference height may be set to be the same.
  • the reference height Hth may be set with reference to the common reference distance 334b, and the height of the second crop is the second height 335a.
  • the reference height Hth may be set with reference to the common reference distance 335b.
  • the common reference distance may be defined as a difference between the height of the crop and the reference height.
  • the reference height Hth of the first crop may be set to a point spaced apart in the ground direction by a common reference distance 334b based on the first growth point 330 .
  • the reference height Hth of the second crop may be set to a point spaced apart in the ground direction by a common reference distance 335b based on the second growth point 331 .
  • the common reference distance may be a value predefined in the server.
  • FIG. 13 is a flowchart of a method of calculating total sink capacity and source capacity according to an embodiment
  • FIG. 14 is a diagram of a crop image according to an embodiment.
  • the method of calculating the sink capacity and the source capacity described above relates to a method of calculating the total sink capacity and the source capacity based on the sink capacity and the source capacity for the crop by specifying one crop, but in FIG. 13 , the total sink capacity and the source capacity By calculating the capacity and the source capacity, it is also possible to calculate the sink capacity and the source capacity for one crop based thereon.
  • the method of calculating the total sink capacity and source capacity includes the steps of acquiring an image by a measuring device (S401), dividing the crop area from the image (S411), and dividing the target area from the crop area (S412), calculating a green area for each target area (S413), applying a weight for each target area (S414), and calculating total source capacity and sink capacity based on the weight (S414) ( S415) may be included.
  • the step of inputting an image to the measuring device will be omitted since it overlaps with the description described above with reference to FIGS. 5 and 6 .
  • the measuring device may acquire an image, and the acquired image may be input to the measuring device or a server. (S401)
  • the image may include at least one or more crops and an image of a greenhouse in which the crops are growing.
  • the image may be acquired at a fixed location each time. Alternatively, the image may be acquired at a fixed height each time.
  • the measuring device may classify a crop region in the image. (S411)
  • the server may classify the crop area in the image.
  • the measuring device may distinguish a non-crop area 410 and a crop area 420 with respect to the crop image 100 .
  • the non-crop area 410 may be an area that does not include a crop in the crop image 100 .
  • the crop area 420 may be an area including crops in the crop image 100 .
  • the non-crop area 410 may be an image including an inducement line for crop growth in the crop image or a specific buoy corresponding to each crop.
  • the non-crop area 410 and the crop area 420 may be divided based on color information.
  • the measuring apparatus may classify an area having a relatively large number of green or red colors in the crop image 100 as the crop area 420 , and may classify other areas as the non-crop area 410 .
  • the measuring device may classify at least one target area with respect to the crop area 420 . (S412)
  • the target area includes a first target area 421 , a second target area 422 , a third target area 423 , a fourth target area 424 , a fifth target area 425 , and a sixth target area ( 426) may be included.
  • the first target area 421 , the second target area 422 , the third target area 423 , the fourth target area 424 , the fifth target area 425 , and the sixth target area 426 are They can have the same height as each other.
  • the first target area 421 , the second target area 422 , the third target area 423 , the fourth target area 424 , the fifth target area 425 , and the sixth target area 426 are It may be set to have different heights.
  • the measuring device may calculate a green area for each target area. (S413)
  • the green area may be information on the number of green color pixels when the target area is plotted as an RGB color histogram. More specifically, the measuring apparatus may extract color information on pixels for each target region, and calculate information on the number of green color pixels among the color information as information on the green region. The measuring device may transmit information on the green area to the server.
  • the server may apply a weight for each target area. (S414)
  • the server may calculate the total source capacity and sink capacity based on the weight for each target area and information on the green area. (S415)
  • the server may load the weight for each target area.
  • the weight may be different for the target area.
  • the fifth weight and the sixth weight for the sixth target region may be the same as or different from each other.
  • the first weight for the first target region, the second weight for the second target region, and the third weight for the third target region may be a weight for calculating the source capacity.
  • the source weight may decrease from the first weight to the third weight.
  • the first target area has a smaller portion that is covered compared to the third area, so it can receive more light. Accordingly, the first weight is given a higher source weight than the third weight to obtain information related to the source capacity of the crop. It can be obtained to be closer to reality.
  • the fourth weight for the fourth target region, the fifth weight for the fifth target region, and the sixth weight for the sixth target region may be weights for calculating the sink capacity. Also, the sink weight may increase as the fourth to sixth weights increase. Since the sixth area has a larger portion that is covered compared to the fourth area, which contributes less to nutrient production, and thus consumes relatively more nutrients, the sixth weight is given as a sink weight higher than the fourth weight, so that the sink capacity of the crop is reduced. related information can be obtained closer to reality.
  • a boundary between the third target area and the fourth target area may be set as a reference height for dividing a source area and a sink area of a crop.
  • the server may calculate the total source capacity and sink capacity based on the weight for each target area and the information on the green area. More specifically, the server may calculate the total source capacity and sink capacity by multiplying the weight for each target area by the number of pixels in the green area. For example, the server may calculate the sink capacity or the source capacity by multiplying the green area for the first target area by the number of green color pixels and the first weight for the first target area.
  • the total source capacity may be calculated based on information on the green region of the first to third target regions.
  • the total sink capacity may be calculated based on information on the green region of the fourth to sixth target regions.
  • FIG. 15 is a flowchart of a method of calculating a crop source capacity and a sink capacity according to an embodiment
  • FIG. 16 is a diagram for explaining a crop image according to an embodiment.
  • the method for calculating the crop source capacity and the sink capacity includes the steps of inputting an image to a measuring device (S401), classifying a crop area with respect to the image (S411), and a non-crop area other than the crop area. Recognizing crop feature points in the area (S421), classifying a target area in the crop area (S412), calculating a green area for the target area (S413), the server calculates a weight for each target area step of applying (S414), calculating total source capacity and sink capacity using the weight for each target area and the green area (S415), crop source capacity based on the crop feature points and the total source capacity and sink capacity and calculating the sink capacity ( S402 ).
  • Steps (S411), (S412), (S413), (S414), and (S415) will be omitted since they overlap with the technical contents described above with reference to FIG. 13 .
  • the measuring device may recognize crop feature points in the non-crop area in the crop image.
  • the crop image 100 may be divided into a non-crop area 410 and a crop area 420 .
  • a method of dividing the non-crop area 410 and the crop area 420 will be omitted as described above with reference to FIG. 13 .
  • the measuring device may recognize crop feature points in the non-crop area 410 .
  • the crop feature points may be unique information for each crop.
  • the crop characteristic point may be a crop growth point.
  • the growth point may be a branching area in an arbitrary area at the top of the crop, and is not limited thereto.
  • the crop characteristic points may be specific buoys 411 for each crop.
  • the specific buoy may be a buoy in which, when a crop is grown in a greenhouse, an inducer line that helps the crop grow in the greenhouse is installed on the ceiling of the greenhouse and is hung on each of the attracting line.
  • the measuring device may recognize the number of the crop feature points.
  • the measuring device may transmit the number of feature points to the server.
  • the server may calculate the crop sink capacity and source capacity based on the number of feature points and the total sink capacity and source capacity. More specifically, the server may calculate the sink capacity and the source capacity corresponding to one crop by dividing the total sink capacity and the source capacity by the number of the feature points.
  • 17 is a diagram for explaining a parameter calculation system for controlling a greenhouse according to an embodiment.
  • the parameter calculation system 1000 for controlling a greenhouse may extract at least three features from an image of a crop obtained.
  • the at least three characteristics may include at least one of a characteristic of a flower of the crop, a characteristic of a peak of the crop, a characteristic of a fruit of the crop, and a characteristic of a leaf of the crop.
  • the at least three characteristics may include a first characteristic, a second characteristic and a third characteristic, wherein the first characteristic is a characteristic of a flower of the crop, and the second characteristic is a fruit of the crop.
  • the third characteristic may be a characteristic of the leaf of the crop, but is not limited thereto.
  • the parameter calculation system for controlling the greenhouse may acquire sub-parameters by using weights for the extracted features.
  • a first sub-parameter may be calculated based on a first weight for the first feature, and the first sub-parameter may be calculated.
  • the second sub-parameter may be calculated based on the second weight for the two features, and the third sub-parameter may be calculated based on the third weight for the third feature, but is not limited thereto.
  • the first weight may be greater than the second weight, but is not limited thereto.
  • first to third weights for the first to third features may be associated with at least one of size, shape, location, and presence or absence.
  • the correlation with the size of the first weight depends on the size of the second weight. may be less than the correlation.
  • the degree of change of the first weight according to the size of the first characteristic may be smaller than the degree of change of the second weight according to the magnitude of the second feature.
  • the first weight according to the size of the first characteristic is may be the same, and the second weight may be changed according to the size of the second feature, but is not limited thereto.
  • the parameter calculation system for controlling a greenhouse may calculate a first parameter based on the first sub-parameter and the second sub-parameter, and a second parameter based on the third sub-parameter. can be calculated.
  • the first parameter may be a parameter corresponding to the above-described sink capacity
  • the second parameter may be a parameter corresponding to the above-described source capacity, but is not limited thereto.
  • the greenhouse control system may control the greenhouse based on parameters calculated from the parameter calculation system for controlling the greenhouse.
  • the greenhouse control system may control the greenhouse based on the first parameter and the second parameter calculated from the parameter calculation system for controlling the greenhouse.
  • the greenhouse control system may perform at least one operation of a first group greenhouse control operation when the first parameter is greater than the second parameter, and when the second parameter is greater than the first parameter At least one of the second group greenhouse control operations may be performed.
  • the first group greenhouse control operation is an operation of changing the standard of fruit removal to remove more fruits in order to reduce the number of fruits remaining per one flower room, and at least one method to reduce the number of fruits remaining per flower room
  • the action of deciding to remove the fruit the action of changing the standard of leaf removal so that the number of leaves to be left on the new branch on the upper part increases in order to increase the number of leaves that can be a source in the future, Changing the standard of leaf removal so that only 3 leaves are left, in order to induce vegetative growth by giving less stress to the crop,
  • the operation of controlling the greenhouse to reduce the moisture content deviation the operation of controlling the greenhouse so that the average temperature of the greenhouse is lowered in order to reduce the respiration rate of crops, the operation of transmitting the guide message for the above-described control, and outputting the notification for the above-mentioned control It may include at least one of the operations to be performed.
  • the second group greenhouse control operation is an operation of changing the standard of fruit removal so as to remove fewer fruits in order to increase the number of remaining fruits per one flower room, and a leaf so that the number of leaves to be left on a new side branch is reduced at the upper end.
  • Changing the standard of removal changing the standard of leaf removal so that 0 to 1 leaves are left on the new geodesic in the upper part control operation, controlling the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crops; It may include at least one of an operation of transmitting a guide message for , and an operation of outputting a notification for the aforementioned control.
  • 18 is a diagram for explaining a parameter calculation system for controlling a greenhouse according to an embodiment.
  • a parameter calculation system 1100 for controlling a greenhouse may calculate a third parameter based on the first parameter and the second parameter.
  • the third parameter may be calculated as the first parameter - the second parameter, and the second parameter - may be calculated as the first parameter, etc. It may be calculated by a function to, but is not limited thereto.
  • the greenhouse control system may control the greenhouse based on parameters calculated from the parameter calculation system for controlling the greenhouse.
  • the greenhouse control system may control the greenhouse based on the third parameter calculated from the parameter calculation system for controlling the greenhouse.
  • the greenhouse control system may perform at least one operation by selecting a first group greenhouse control operation or a second group greenhouse control operation based on the third parameter.

Abstract

The present invention according to an embodiment is a method for controlling a greenhouse environment, the method comprising the steps of: acquiring at least one image of a crop; extracting a first feature, a second feature, and a third feature included in the at least one acquired image; calculating a first parameter on the basis of at least one feature among the first to third features; calculating a second parameter on the basis of at least one feature among the first to third features; calculating a third parameter on the basis of the first and second parameters; and controlling the greenhouse environment on the basis of the third parameter.

Description

싱크 용량 및 소스 용량 판단 시스템 및 방법.A system and method for determining sink capacity and source capacity.
본 발명은 작물의 싱크 용량 및 소스 용량 판단 시스템 및 방법에 관한 것으로, 보다 상세하게는 작물 이미지에서 작물의 과실 정보와 잎 정보를 기초로 작물의 싱크 및 소스를 판단하는 시스템 및 방법에 관한 것이다. The present invention relates to a system and method for determining sink capacity and source capacity of a crop, and more particularly, to a system and method for determining a sink and source of a crop based on fruit information and leaf information of a crop in a crop image.
스마트팜은 경작기술에 정보 통신 기술을 접목하여 만들어진 지능화된 농장이다.A smart farm is an intelligent farm created by combining information and communication technology with farming technology.
스마트 팜 중 온실은 작물 생장과 관련하여 균일한 환경을 제공할 수 있는 시스템을 갖춘 공간이다. 이러한 온실이 균일한 환경을 제공하기 위해서는 환경 제어에 필요한 다수의 센서가 요구된다. Among smart farms, a greenhouse is a space equipped with a system that can provide a uniform environment in relation to crop growth. In order for such a greenhouse to provide a uniform environment, a plurality of sensors required for environmental control are required.
온실 내 비치된 다수의 센서는 온도 센서, CO2 농도 센서 등이 있으며, 다수의 센서들은 온실 내 환경에 대해서 측정할 수 있다. 센서를 통해 측정된 측정값들을 통해 온실 내부의 균일한 환경을 제공하기 위해 온실을 제어한다. A plurality of sensors provided in the greenhouse include a temperature sensor, a CO2 concentration sensor, and the like, and the plurality of sensors can measure the environment in the greenhouse. The greenhouse is controlled to provide a uniform environment inside the greenhouse through the measured values measured through the sensor.
센서를 통해 측정된 값 중에는 작물 자체의 광합성양 및 호흡양에 기초한 싱크 및 소스 용량에 관한 값이 있으며, 이러한 값들은 온실 내 CO2 농도 및 온도에 국한되어 판단된다. 또한, 작물의 싱크 및 소스 용량을 판단하기 위해 복잡한 프로세스를 거쳐야 하므로, 시간적 비용이 소모되는 문제도 있다. Among the values measured through the sensor, there are values related to the sink and source capacity based on the photosynthetic amount and respiration amount of the crop itself, and these values are limited to the CO2 concentration and temperature in the greenhouse. In addition, since a complex process is required to determine the sink and source capacity of crops, there is a problem in that time and cost are consumed.
따라서, 보다 간편한 방법으로 작물의 싱크 및 소스 용량을 판단할 필요가 있으며, 작물의 생장함에 따라 작물의 싱크 및 소스 용량을 상이하게 판단할 수 있는 방법이 필요하다. Therefore, it is necessary to determine the sink and source capacity of the crop in a more convenient way, and a method is needed to determine the sink and source capacity of the crop differently according to the growth of the crop.
본 발명의 일 과제는 사용자에게 보다 간편한 방법으로 작물의 싱크 용량 및 소스 용량을 판단하는 시스템 및 그 방법을 제공함에 있다. One object of the present invention is to provide a system and method for determining the sink capacity and source capacity of crops in a more convenient way for the user.
본 발명의 또 다른 과제는 과실의 크기에 따른 상이한 가중치를 활용하여 싱크 용량을 판단하는 시스템 및 그 방법을 제공함에 있다. Another object of the present invention is to provide a system and method for determining a sink capacity by using different weights according to the size of fruit.
본 발명의 또 다른 과제는 과실이 위치하는 높이에 따라 상이한 가중치를 활용하여 싱크 용량을 판단하는 시스템 및 그 방법을 제공함에 있다. Another object of the present invention is to provide a system and method for determining a sink capacity by using different weights according to the height at which fruits are located.
본 발명의 또 다른 과제는 작물의 잎에 대해, 높이에 따라 싱크 용량으로 판단하는 시스템 및 그 방법을 제공함에 있다.Another object of the present invention is to provide a system and method for determining the sink capacity according to the height of the leaves of a crop.
실시 예에 따른 작물 이미지에서 작물의 싱크 용량을 판단하는 방법은, 과실 및 잎을 포함하는 작물 이미지를 입력 받는 단계; 상기 작물 이미지에 기초하여 과실의 위치, 크기, 숙성도를 포함하는 과실 정보를 획득하는 단계; 및 상기 과실 정보에 기초하여 작물의 싱크 용량을 산출하는 단계; 를 포함하고, 상기 싱크 용량을 산출하는 단계는 제1 크기를 가지는 제1 과실에 대한 제1 싱크 용량과 제2 크기를 가지는 제2 과실에 대한 제2 싱크 용량에 기초하여 상기 작물의 전체 싱크 용량을 판단하고, 상기 제1 과실의 상기 제1 싱크 용량은 상기 제1 크기와 대응되는 제1 크기 가중치에 기초하여 산출되고, 상기 제2 과실의 상기 제2 싱크 용량은 상기 제2 크기와 대응되는 제2 크기 가중치에 기초하여 산출되며, 상기 제1 크기는 제2 크기보다 더 크고, 상기 제1 크기 가중치는 상기 제2 크기 가중치보다 크다.According to an embodiment, a method for determining a sink capacity of a crop in a crop image includes: receiving a crop image including fruits and leaves; obtaining fruit information including a location, size, and maturity level of a fruit based on the crop image; and calculating a sink capacity of a crop based on the fruit information. wherein the calculating of the sink capacity comprises: a total sink capacity of the crop based on a first sink capacity for a first fruit having a first size and a second sink capacity for a second fruit having a second size is determined, the first sink capacity of the first fruit is calculated based on a weight of a first size corresponding to the first size, and the second sink capacity of the second fruit corresponds to the second size. It is calculated based on a second size weight, wherein the first size is greater than the second size, and the first size weight is greater than the second size weight.
실시 예에 따른 작물의 싱크 용량 및 소스 용량 판단 시스템은, 작물의 과실과 잎을 포함하는 작물 이미지를 획득하는 측정 장치; 및 상기 작물 이미지를 기초로 산출되는 과실 정보 및 잎 정보를 기초로 상기 작물의 싱크 용량 및 소스 용량을 산출하는 서버; 를 포함하고, 상기 과실 정보는 상기 과실의 위치 정보, 크기 정보, 및 숙성도 정보 중 적어도 하나를 포함하며, 상기 싱크 용량은 상기 과실의 상기 위치 정보에 대응하는 위치 가중치, 상기 크기 정보에 대응하는 크기 가중치, 상기 숙성도 정보에 대응하는 숙성도 가중치에 기초하여 산출된다.A system for determining a sink capacity and a source capacity of a crop according to an embodiment includes: a measuring device for acquiring a crop image including fruits and leaves of a crop; and a server for calculating a sink capacity and a source capacity of the crop based on fruit information and leaf information calculated based on the crop image. wherein the fruit information includes at least one of location information, size information, and ripeness information of the fruit, and the sink capacity includes a location weight corresponding to the location information of the fruit and a location weight corresponding to the size information. It is calculated based on the size weight and the maturity weight corresponding to the maturity level information.
실시예에 따른 온실 환경 제어 방법은, 작물에 대한 적어도 하나의 이미지를 획득하는 단계, 획득된 적어도 하나의 이미지에 포함되는 제1 특징, 제2 특징 및 제3 특징을 추출하는 단계, 상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제1 파라미터를 산출하는 단계, 상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제2 파라미터를 산출하는 단계, 상기 제1 및 제2 파라미터를 기초로 제3 파라미터를 산출하는 단계 및 상기 제3 파라미터를 기초로 온실 환경을 제어하는 단계를 포함하되, 상기 제1 파라미터를 산출하는 단계는 상기 제1 특징을 기초로 제1 서브 파라미터를 산출하는 단계, 상기 제2 특징을 기초로 제2 서브 파라미터를 산출하는 단계 및 적어도 상기 제1 서브 파라미터 및 상기 제2 서브 파라미터를 기초로 상기 제1 파라미터를 산출하는 단계를 포함하며, 상기 제2 파라미터를 산출하는 단계는 상기 제3 특징을 기초로 제3 서브 파라미터를 산출하는 단계 및 적어도 상기 제3 서브 파라미터를 기초로 상기 제2 파라미터를 산출하는 단계를 포함하고, 상기 제3 파라미터를 기초로 온실 환경을 제어하는 단계는 상기 제3 파라미터와 기준 값을 비교하는 단계 및 상기 제3 파라미터와 상기 기준 값의 비교 결과에 기초하여 제1 그룹 온실 제어 동작 또는 제2 그룹 온실 제어 동작에 포함되는 적어도 하나의 제어 동작을 수행하는 단계를 포함하며, 상기 제1 특징은 작물의 꽃에 대응되는 특징이며, 상기 제2 특징은 작물의 과실에 대응되는 특징이고, 상기 제3 특징은 작물의 잎에 대응되는 특징일 수 있다.The method for controlling a greenhouse environment according to an embodiment includes acquiring at least one image of a crop, extracting a first feature, a second feature, and a third feature included in the acquired at least one image, the first calculating a first parameter based on at least one of the first to third characteristics, calculating a second parameter based on at least one of the first through third characteristics, and the first and second parameters Calculating a third parameter based on , calculating a second sub-parameter based on the second characteristic, and calculating the first parameter based on at least the first sub-parameter and the second sub-parameter, wherein the second parameter The calculating comprises calculating a third sub-parameter based on the third characteristic and calculating the second parameter based on at least the third sub-parameter, and based on the third parameter, the greenhouse The controlling of the environment may include comparing the third parameter with a reference value, and at least one included in the first group greenhouse control operation or the second group greenhouse control operation based on the comparison result of the third parameter and the reference value. and performing a control operation of , wherein the first characteristic is a characteristic corresponding to a flower of a crop, the second characteristic is a characteristic corresponding to a fruit of a crop, and the third characteristic is a characteristic corresponding to a leaf of a crop may be characteristic.
본 발명에 의하면, 사용자는 복잡한 프로세스가 아닌 작물 이미지를 기초로 작물의 싱크 용량 및 소스 용량을 제공받을 수 있다. According to the present invention, the user can be provided with the sink capacity and the source capacity of the crop based on the crop image rather than a complicated process.
본 발명에 의하면, 사용자는 과실의 크기에 따라 상이한 가중치를 통해 작물의 싱크 용량을 산출할 수 있다. According to the present invention, the user can calculate the sink capacity of the crop through different weights according to the size of the fruit.
본 발명에 의하면 사용자에게 과실이 위치하는 높이에 따라 상이한 가중치를 통해 작물의 싱크 용량을 산출하여 제어함으로써, 작물이 효과적으로 생장할 수 있는 스마트팜 시스템을 제공할 수 있다. According to the present invention, it is possible to provide a smart farm system in which crops can grow effectively by calculating and controlling the sink capacity of crops through different weights according to the height at which the fruits are located to the user.
도 1은 일 실시 예에 따른 온실 시스템에 대한 개략도이다.1 is a schematic diagram of a greenhouse system according to an embodiment.
도 2는 일 실시 예에 따른 측정 장치를 나타내는 블록도이다. 2 is a block diagram illustrating a measuring device according to an exemplary embodiment.
도 3은 일 실시 예에 따른 서버를 나타내는 블록도이다. 3 is a block diagram illustrating a server according to an embodiment.
도 4는 일 실시 예에 따른 싱크 용량 및 소스 용량 측정 시스템 블록도이다.4 is a block diagram of a system for measuring sink capacity and source capacity according to an embodiment.
도 5는 일 실시 예에 따른 싱크 용량 및 소스 용량 측정 방법에 관한 순서도이다. 5 is a flowchart illustrating a method for measuring sink capacity and source capacity according to an embodiment.
도 6은 일 실시 예에 따른 작물 이미지 처리 과정에 관한 도면이다. 6 is a view of a crop image processing process according to an embodiment.
도 7은 일 실시 예에 따른 싱크 용량을 산출하는 방법에 관한 순서도이다. 7 is a flowchart illustrating a method of calculating a sink capacity according to an embodiment.
도 8은 일 실시 예에 따른 측정 장치에서 작물의 과실 및 잎을 특정하는 방법을 설명하기 위한 도면이다. 8 is a view for explaining a method of specifying fruits and leaves of a crop in a measuring device according to an exemplary embodiment.
도 9는 일 실시 예에 따른 잎 정보를 기초로 싱크 용량 및 소스 용량을 산출하는 방법에 관한 순서도이다. 9 is a flowchart illustrating a method of calculating a sink capacity and a source capacity based on leaf information according to an embodiment.
도 10 내지 도 12는 일 실시 예에 따른 기준 위치를 설명하기 위한 도면이다. 10 to 12 are diagrams for explaining a reference position according to an embodiment.
도 13 은 일 실시 예에 따른 전체 싱크 용량 및 소스 용량을 산출하는 방법에 관한 순서도이다. 13 is a flowchart illustrating a method of calculating total sink capacity and source capacity according to an embodiment.
도 14는 일 실시 예에 따른 작물 이미지에 대한 도면이다. 14 is a view of a crop image according to an embodiment.
도 15는 일 실시 예에 따른 작물 소스 용량 및 싱크 용량을 산출하는 방법에 관한 순서도이다.15 is a flowchart illustrating a method of calculating a crop source capacity and a sink capacity according to an embodiment.
도 16는 일 실시 예에 따른 작물 이미지를 설명하기 위한 도면이다. 16 is a view for explaining a crop image according to an embodiment.
도 17은 일 실시예에 따라 온실을 제어하기 위한 파라미터 산출 시스템에 대하여 설명하기 위한 도면이다.17 is a diagram for explaining a parameter calculation system for controlling a greenhouse according to an embodiment.
도 18은 일 실시예에 따라 온실을 제어하기 위한 파라미터 산출 시스템에 대하여 설명하기 위한 도면이다.18 is a diagram for explaining a parameter calculation system for controlling a greenhouse according to an embodiment.
본 발명의 상술한 목적, 특징들 및 장점은 첨부된 도면과 관련된 다음의 상세한 설명을 통해 보다 분명해질 것이다. 다만, 본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예들을 가질 수 있는 바, 이하에서는 특정 실시예들을 도면에 예시하고 이를 상세히 설명하고자 한다. The above-mentioned objects, features and advantages of the present invention will become more apparent from the following detailed description taken in conjunction with the accompanying drawings. However, since the present invention may have various changes and may have various embodiments, specific embodiments will be exemplified in the drawings and described in detail below.
도면들에 있어서, 층 및 영역들의 두께는 명확성을 기하기 위하여 과장되어진 것이며, 또한, 구성요소(element) 또는 층이 다른 구성요소 또는 층의 "위(on)" 또는 "상(on)"으로 지칭되는 것은 다른 구성요소 또는 층의 바로 위 뿐만 아니라 중간에 다른 층 또는 다른 구성요소를 개재한 경우를 모두 포함한다. 명세서 전체에 걸쳐서 동일한 참조번호들은 원칙적으로 동일한 구성요소들을 나타낸다. 또한, 각 실시예의 도면에 나타나는 동일한 사상의 범위 내의 기능이 동일한 구성 요소는 동일한 참조부호를 사용하여 설명한다.In the drawings, the thicknesses of layers and regions are exaggerated for clarity, and also that an element or layer is “on” or “on” another component or layer. What is referred to includes all cases in which another layer or other component is interposed in the middle as well as directly on top of another component or layer. Throughout the specification, like reference numerals refer to like elements in principle. In addition, components having the same function within the scope of the same idea shown in the drawings of each embodiment will be described using the same reference numerals.
본 발명과 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 본 명세서의 설명 과정에서 이용되는 숫자(예를 들어, 제1, 제2 등)는 하나의 구성요소를 다른 구성요소와 구분하기 위한 식별기호에 불과하다. If it is determined that a detailed description of a known function or configuration related to the present invention may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted. In addition, numbers (eg, first, second, etc.) used in the description process of the present specification are merely identification symbols for distinguishing one component from other components.
또한, 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. In addition, the suffixes "module" and "part" for the components used in the following description are given or mixed in consideration of only the ease of writing the specification, and do not have distinct meanings or roles by themselves.
실시 예에 따른 작물 이미지에서 작물의 싱크 용량을 판단하는 방법은, 과실 및 잎을 포함하는 작물 이미지를 입력 받는 단계; 상기 작물 이미지에 기초하여 과실의 위치, 크기, 숙성도를 포함하는 과실 정보를 획득하는 단계; 및 상기 과실 정보에 기초하여 작물의 싱크 용량을 산출하는 단계; 를 포함하고, 상기 싱크 용량을 산출하는 단계는 제1 크기를 가지는 제1 과실에 대한 제1 싱크 용량과 제2 크기를 가지는 제2 과실에 대한 제2 싱크 용량에 기초하여 상기 작물의 전체 싱크 용량을 판단하고, 상기 제1 과실의 상기 제1 싱크 용량은 상기 제1 크기와 대응되는 제1 크기 가중치에 기초하여 산출되고, 상기 제2 과실의 상기 제2 싱크 용량은 상기 제2 크기와 대응되는 제2 크기 가중치에 기초하여 산출되며, 상기 제1 크기는 제2 크기보다 더 크고, 상기 제1 크기 가중치는 상기 제2 크기 가중치보다 작다.According to an embodiment, a method for determining a sink capacity of a crop in a crop image includes: receiving a crop image including fruits and leaves; obtaining fruit information including a location, size, and maturity level of a fruit based on the crop image; and calculating a sink capacity of a crop based on the fruit information. wherein the calculating of the sink capacity comprises: a total sink capacity of the crop based on a first sink capacity for a first fruit having a first size and a second sink capacity for a second fruit having a second size is determined, the first sink capacity of the first fruit is calculated based on a weight of a first size corresponding to the first size, and the second sink capacity of the second fruit corresponds to the second size. It is calculated based on a second size weight, wherein the first size is greater than the second size, and the first size weight is smaller than the second size weight.
상기 싱크 용량을 산출하는 단계는 제1 위치를 가지는 제3 과실에 대한 제3 싱크 용량과 제2 위치를 가지는 제4 과실에 대한 제4 싱크 용량을 더 고려하여 전체 싱크 용량을 판단하고, 상기 제3 과실의 상기 제3 싱크 용량은 상기 제1 위치와 대응되는 제3 위치 가중치에 기초하여 산출되고, 상기 제4 과실의 상기 제4 싱크 용량은 상기 제2 위치와 대응되는 제4 위치 가중치에 기초하여 산출되며, 상기 제3 위치는 제4 위치보다 높고, 상기 제3 위치 가중치는 상기 제4 위치 가중치 보다 클 수 있다. In the calculating of the sink capacity, the total sink capacity is determined by further considering a third sink capacity for a third fruit having a first location and a fourth sink capacity for a fourth fruit having a second location, and The third sink capacity of three fruits is calculated based on a third position weight corresponding to the first position, and the fourth sink capacity of the fourth fruits is calculated based on a fourth position weight corresponding to the second position. , the third position may be higher than the fourth position, and the third position weight may be greater than the fourth position weight.
상기 작물 이미지에 기초하여 상기 잎에 관한 잎 정보를 획득하는 단계; 를 더 포함할 수 있다. obtaining leaf information about the leaf based on the crop image; may further include.
상기 싱크 용량을 산출하는 단계는 상기 잎 정보에 기초한 제5 싱크 용량을 더 고려하여 전체 싱크 용량을 판단하고, 상기 제5 싱크 용량은 상기 작물의 일부의 잎에 대해 제5 가중치를 부여하여 산출될 수 있다. In the calculating of the sink capacity, the total sink capacity is determined by further considering a fifth sink capacity based on the leaf information, and the fifth sink capacity is calculated by assigning a fifth weight to some leaves of the crop. can
상기 제5 싱크 용량은 상기 작물의 지면으로부터 일정 기준 위치 이하의 위치하는 잎에 대해 산출될 수 있다. The fifth sink capacity may be calculated for leaves positioned below a predetermined reference position from the ground of the crop.
상기 과실 및 잎을 포함하는 작물 이미지를 입력 받는 단계는 상기 작물 이미지에서 적어도 하나의 작물을 특정하고, 상기 작물에 포함된 다수의 과실 중 하나와 다수의 잎 중 하나를 특정하는 단계를 더 포함할 수 있다.The step of receiving the crop image including the fruit and leaves may further include specifying at least one crop from the crop image, and specifying one of a plurality of fruits and one of a plurality of leaves included in the crop. can
실시 예에 따른 작물의 싱크 용량 및 소스 용량 판단 시스템은, 작물의 과실과 잎을 포함하는 작물 이미지를 획득하는 측정 장치; 및 상기 작물 이미지를 기초로 산출되는 과실 정보 및 잎 정보를 기초로 상기 작물의 싱크 용량 및 소스 용량을 산출하는 서버; 를 포함하고, 상기 과실 정보는 상기 과실의 위치 정보, 크기 정보, 및 숙성도 정보 중 적어도 하나를 포함하며, 상기 싱크 용량은 상기 과실의 상기 위치 정보에 대응하는 위치 가중치, 상기 크기 정보에 대응하는 크기 가중치, 상기 숙성도 정보에 대응하는 숙성도 가중치에 기초하여 산출된다.A system for determining a sink capacity and a source capacity of a crop according to an embodiment includes: a measuring device for acquiring a crop image including fruits and leaves of a crop; and a server for calculating a sink capacity and a source capacity of the crop based on fruit information and leaf information calculated based on the crop image. wherein the fruit information includes at least one of location information, size information, and ripeness information of the fruit, and the sink capacity includes a location weight corresponding to the location information of the fruit and a location weight corresponding to the size information. It is calculated based on the size weight and the maturity weight corresponding to the maturity level information.
상기 숙성도 정보는 상기 작물 이미지의 RGB Color Histogram에 기초한 색상 정보를 기초로 판단할 수 있다. The maturity information may be determined based on color information based on the RGB Color Histogram of the crop image.
상기 숙성도 정보는 상기 RGB Color Histogram에서 Red pixel 수를 기초로 판단하는 숙성도 정보일 수 있다. The ripening level information may be aging level information determined based on the number of red pixels in the RGB Color Histogram.
상기 숙성도 가중치는 제1 숙성도 가중치 및 제2 숙성도 가중치를 포함하고, 상기 제1 숙성도 가중치는 제1 숙성도 정보와 대응되고 상기 제2 숙성도 가중치는 제2 숙성도 정보와 대응되며, 상기 제1 숙성도 정보가 상기 제2 숙성도 정보에 비해 Red Pixel 수가 더 많은 경우, 상기 제1 숙성도 가중치는 상기 제2 숙성도 가중치 보다 클 수 있다. The maturity weight includes a first maturity weight and a second maturity weight, wherein the first maturity weight corresponds to the first maturity information and the second maturity weight corresponds to the second maturity information; , when the first ripeness information has a greater number of red pixels than the second ripeness information, the first ripeness weight may be greater than the second ripeness weight.
상기 작물 이미지는 상기 작물의 생장점을 포함하며, 상기 위치 정보는 상기 생장점을 기초로 한 거리 정보일 수 있다. The crop image may include a growth point of the crop, and the location information may be distance information based on the growth point.
상기 위치 정보는 제1 위치 정보 및 제2 위치 정보를 포함하며, 상기 위치 가중치는 제1 위치 가중치 및 제2 위치 가중치를 포함하고, 상기 제1 위치 정보와 상기 제1 위치 가중치는 서로 대응되고, 상기 제2 위치 정보와 상기 제2 위치 가중치는 서로 대응되며, 상기 제1 위치 정보가 제2 위치 정보 보다 더 큰 경우, 상기 제1 위치 가중치는 제2 위치 가중치보다 더 작을 수 있다. the location information includes first location information and second location information, the location weight includes a first location weight and a second location weight, the first location information and the first location weight correspond to each other; The second location information and the second location weight may correspond to each other, and when the first location information is greater than the second location information, the first location weight may be smaller than the second location weight.
상기 측정 장치는 적어도 둘 이상의 작물 이미지를 연결한 파노라마 작물 이미지를 생성하고, 상기 적어도 둘 이상의 작물 이미지는 각각 하나에 작물에 대한 이미지일 수 있다. The measuring device may generate a panoramic crop image in which at least two or more crop images are connected, and the at least two or more crop images may each be an image of a crop.
상기 서버는 상기 작물 이미지에 대해 작물 영역 및 대상 영역을 구분하고, 상기 대상 영역에 대한 녹색 영역을 산출하고, 상기 서버는 상기 대상 영역에 대한 대상영역 별 가중치를 적용하고, 상기 대상영역 별 가중치와 상기 대상영역 및 상기 녹색 영역에 대한 정보를 기초로 전체 소스 용량 및 싱크 용량을 산출할 수 있다. The server divides a crop area and a target area for the crop image, calculates a green area for the target area, the server applies a weight for each target area to the target area, and the weight for each target area Total source capacity and sink capacity may be calculated based on the information on the target area and the green area.
상기 서버는, 상기 작물 이미지에서 특징점 정보를 추출하고, 상기 특징점 정보와 상기 전체 소스 용량 및 싱크 용량을 기초로 작물 소스 용량 및 싱크 용량을 산출할 수 있다.The server may extract key point information from the crop image, and calculate a crop source capacity and sink capacity based on the key point information and the total source capacity and sink capacity.
실시 예에 따른 작물의 싱크 용량 및 소스 용량에 기초하여 스마트팜을 제어하는 방법은, 과실 및 잎을 포함하는 작물 이미지를 입력 받는 단계; 상기 작물 이미지에 기초하여 과실의 위치, 크기, 숙성도를 포함하는 과실 정보를 획득하는 단계; 상기 작물 이미지에 기초하여 과실의 잎을 포함하는 잎 정보를 획득하는 단계; 상기 과실 정보 및 상기 잎 정보에 기초하여 작물의 싱크 용량을 산출하는 단계; 상기 잎 정보에 기초하여 작물의 소스 용량을 산출하는 단계; 및 상기 싱크 용량 및 소스 용량에 기초하여 스마트팜을 제어하는 단계; 를 포함한다.According to an embodiment, a method for controlling a smart farm based on a sink capacity and a source capacity of a crop may include: receiving an image of a crop including fruits and leaves; obtaining fruit information including a location, size, and maturity level of a fruit based on the crop image; obtaining leaf information including a leaf of a fruit based on the crop image; calculating a sink capacity of a crop based on the fruit information and the leaf information; calculating a source capacity of a crop based on the leaf information; and controlling the smart farm based on the sink capacity and the source capacity. includes
상기 스마트팜을 제어하는 단계는, 상기 싱크 용량이 상기 소스 용량 보다 큰 경우, 상기 스마트팜 내 온도를 미리 설정한 값으로 조정하는 것을 포함할 수 있다. The controlling of the smart farm may include adjusting the temperature in the smart farm to a preset value when the sink capacity is greater than the source capacity.
상기 스마트팜을 제어하는 단계는, 상기 싱크 용량이 상기 소스 용량 보다 큰 경우, 상기 스마트팜 내 온도를 상승시키도록 제어하는 것을 포함할 수 있다. The controlling of the smart farm may include controlling the temperature in the smart farm to increase when the sink capacity is greater than the source capacity.
상기 스마트팜을 제어하는 단계는, 상기 싱크 용량과 상기 싱크 용량의 차이가 큰 경우 상기 스마트팜의 현재 온도와의 편차가 더 크도록 상기 스마트팜 내 온도를 상승시키도록 제어하는 것을 포함할 수 있다. The step of controlling the smart farm may include controlling the temperature in the smart farm to increase so that the deviation from the current temperature of the smart farm is larger when the difference between the sink capacity and the sink capacity is large. .
상기 잎 정보는 복수의 잎 정보를 포함하고, 상기 복수의 잎 중 적어도 일부의 잎에 기초하여 싱크 용량이 산출되고, 상기 복수의 잎 중 나머지 일부에 기초하여 소스 용량이 산출될 수 있다. The leaf information may include a plurality of leaf information, a sink capacity may be calculated based on at least some of the leaves among the plurality of leaves, and a source capacity may be calculated based on a remaining part of the plurality of leaves.
상기 작물의 싱크 용량을 산출하는 단계는, 상기 작물의 지면으로부터 총 높이에서 기준 위치 이하에 위치하는 잎에 기초하여 싱크 용량을 산출할 수 있다. The calculating of the sink capacity of the crop may include calculating the sink capacity based on leaves positioned below a reference position in a total height from the ground of the crop.
상기 기준 위치는 상기 작물의 총 높이 변경에 따라 변경될 수 있다. The reference position may be changed according to a change in the total height of the crop.
상기 기준 위치는 상기 작물의 총 높이가 변경되더라도 일정한 위치가 유지될 수 있다. The reference position may be maintained at a constant position even if the total height of the crop is changed.
상기 스마트팜을 제어하는 단계는 상기 싱크 용량 및 소스 용량에 기초하여 잎을 제거하라는 메시지를 출력할 수 있다. The step of controlling the smart farm may output a message to remove leaves based on the sink capacity and the source capacity.
상기 스마트팜을 제어하는 단계는 상기 싱크 용량 및 소스 용량에 기초하여 상기 기준 위치 이하에 위치하는 잎을 제거하는 메시지를 출력할 수 있다. The controlling of the smart farm may output a message for removing leaves located below the reference position based on the sink capacity and the source capacity.
상기 스마트팜을 제어하는 단계는 상기 싱크 용량이 상기 소스 용량 보다 크고, 상기 싱크 용량과 소스용량 차이가 클수록 더 많은 잎을 제거하라는 메시지를 출력할 수 있다. The controlling of the smart farm may output a message to remove more leaves as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater.
상기 스마트팜을 제어하는 단계는 상기 싱크 용량 및 소스 용량에 기초하여 상기 작물의 과실 중 적어도 일부의 과실의 수확을 지시하는 메시지를 출력하는 단계일 수 있다. The controlling of the smart farm may be a step of outputting a message instructing harvesting of at least some of the fruits of the crop based on the sink capacity and the source capacity.
상기 스마트팜을 제어하는 단계는 상기 싱크 용량이 상기 소스 용량보다 큰 경우 상기 싱크 용량과 소스 용량의 편차에 따라 수확 대상 과실의 위치 및 개수 중 적어도 하나를 지정하는 메시지를 출력하는 단계일 수 있다.The controlling of the smart farm may be a step of outputting a message designating at least one of a location and number of fruits to be harvested according to a deviation between the sink capacity and the source capacity when the sink capacity is greater than the source capacity.
실시 예에 따른 스마트팜 제어 시스템은, 작물의 과실과 잎을 포함하는 작물 이미지를 획득하는 측정 장치; 및 상기 과실 정보 및 잎 정보를 기초로 산출된 정보에 기초하여 상기 작물의 싱크 용량 및 소스 용량을 산출하는 서버; 를 포함한다.A smart farm control system according to an embodiment includes: a measuring device for acquiring a crop image including fruits and leaves of a crop; and a server for calculating a sink capacity and a source capacity of the crop based on information calculated based on the fruit information and leaf information. includes
상기 작물 이미지는 적어도 하나 이상의 작물을 포함하는 작물 이미지이며, 상기 서버는 상기 작물 이미지에 대해서 작물 영역 및 비 작물 영역을 구분하고, 상기 작물 영역에서 대상 영역을 추출하고, 상기 서버는 상기 대상 영역에 대한 대상 영역 가중치에 기초하여, 전체 작물 싱크 용량 및 소스 용량을 산출할 수 있다. The crop image is a crop image including at least one crop, the server distinguishes a crop area and a non-crop area with respect to the crop image, and extracts a target area from the crop area, and the server is located in the target area. Based on the weight of the target area for , the total crop sink capacity and source capacity may be calculated.
상기 측정 장치는 상기 작물 이미지에서 작물 특징점을 인식할 수 있다. The measuring device may recognize a crop feature point in the crop image.
상기 작물 특징점은 작물의 생장점을 포함할 수 있다. The crop characteristic point may include the growth point of the crop.
상기 서버는 상기 작물 특징점의 개수에 기초하여 작물 싱크 용량 및 소스 용량을 산출할 수 있다. The server may calculate a crop sink capacity and a source capacity based on the number of the crop feature points.
상기 서버는 상기 과실 정보에 기초하여 적어도 하나 이상의 과실을 수확하라는 제어 메시지를 출력할 수 있다. The server may output a control message to harvest at least one or more fruits based on the fruit information.
상기 서버는 상기 잎 정보에 기초하여 적어도 하나 이상의 잎을 제거하라는 제어 메시지를 출력할 수 있다.The server may output a control message to remove at least one or more leaves based on the leaf information.
실시예에 따른 온실 환경 제어 방법은, 작물에 대한 적어도 하나의 이미지를 획득하는 단계, 획득된 적어도 하나의 이미지에 포함되는 제1 특징, 제2 특징 및 제3 특징을 추출하는 단계, 상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제1 파라미터를 산출하는 단계, 상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제2 파라미터를 산출하는 단계, 상기 제1 및 제2 파라미터를 기초로 제3 파라미터를 산출하는 단계 및 상기 제3 파라미터를 기초로 온실 환경을 제어하는 단계를 포함하되, 상기 제1 파라미터를 산출하는 단계는 상기 제1 특징을 기초로 제1 서브 파라미터를 산출하는 단계, 상기 제2 특징을 기초로 제2 서브 파라미터를 산출하는 단계 및 적어도 상기 제1 서브 파라미터 및 상기 제2 서브 파라미터를 기초로 상기 제1 파라미터를 산출하는 단계를 포함하며, 상기 제2 파라미터를 산출하는 단계는 상기 제3 특징을 기초로 제3 서브 파라미터를 산출하는 단계 및 적어도 상기 제3 서브 파라미터를 기초로 상기 제2 파라미터를 산출하는 단계를 포함하고, 상기 제3 파라미터를 기초로 온실 환경을 제어하는 단계는 상기 제3 파라미터와 기준 값을 비교하는 단계 및 상기 제3 파라미터와 상기 기준 값의 비교 결과에 기초하여 제1 그룹 온실 제어 동작 또는 제2 그룹 온실 제어 동작에 포함되는 적어도 하나의 제어 동작을 수행하는 단계를 포함하며, 상기 제1 특징은 작물의 꽃에 대응되는 특징이며, 상기 제2 특징은 작물의 과실에 대응되는 특징이고, 상기 제3 특징은 작물의 잎에 대응되는 특징일 수 있다.The method for controlling a greenhouse environment according to an embodiment includes acquiring at least one image of a crop, extracting a first feature, a second feature, and a third feature included in the acquired at least one image, the first calculating a first parameter based on at least one of the first to third characteristics, calculating a second parameter based on at least one of the first through third characteristics, and the first and second parameters Calculating a third parameter based on , calculating a second sub-parameter based on the second characteristic, and calculating the first parameter based on at least the first sub-parameter and the second sub-parameter, wherein the second parameter The calculating comprises calculating a third sub-parameter based on the third characteristic and calculating the second parameter based on at least the third sub-parameter, and based on the third parameter, the greenhouse The controlling of the environment may include comparing the third parameter with a reference value, and at least one included in the first group greenhouse control operation or the second group greenhouse control operation based on the comparison result of the third parameter and the reference value. and performing a control operation of , wherein the first characteristic is a characteristic corresponding to a flower of a crop, the second characteristic is a characteristic corresponding to a fruit of a crop, and the third characteristic is a characteristic corresponding to a leaf of a crop may be characteristic.
여기서, 상기 제3 파라미터가 상기 기준 값 이상인 경우 상기 제2 그룹 온실 제어 동작에 포함되는 적어도 하나의 제어 동작을 수행하며, 상기 제3 파라미터가 상기 기준 값 미만인 경우 상기 제1 그룹 온실 제어 동작에 포함되는 적어도 하나의 제어 동작을 수행할 수 있다.Here, when the third parameter is equal to or greater than the reference value, at least one control operation included in the second group greenhouse control operation is performed, and when the third parameter is less than the reference value, it is included in the first group greenhouse control operation At least one control operation may be performed.
여기서, 상기 제1 서브 파라미터를 산출하기 위한 제1 가중치는 상기 제2 서브 파라미터를 산출하기 위한 제2 가중치보다 클 수 있다.Here, the first weight for calculating the first sub-parameter may be greater than the second weight for calculating the second sub-parameter.
여기서, 상기 제2 서브 파라미터를 산출하기 위한 상기 제2 가중치는 상기 제2 특징의 크기에 기초하여 변경될 수 있다.Here, the second weight for calculating the second sub-parameter may be changed based on the magnitude of the second feature.
여기서, 상기 제2 서브 파라미터를 산출하기 위한 상기 제2 가중치는 상기 제2 특징의 크기가 작을수록 클 수 있다.Here, the second weight for calculating the second sub-parameter may increase as the size of the second feature decreases.
여기서, 상기 제1 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 줄이기 위해서 과실을 더 많이 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 한 화방 당 남는 과실의 개수를 줄이기 위해서 적어도 하나의 과실을 제거하도록 판단하는 동작, 향후 소스가 될 수 있는 잎을 더 늘리기 위해서 상단부에 새로 생기는 측지에 남길 잎의 개수가 많아지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎을 2개 에서 3개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 온습도 편차가 줄어들도록 온실을 제어하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 함수율 편차가 줄어들도록 온실을 제어하는 동작, 작물의 호흡량을 줄이기 위하여 온실의 평균 온도가 낮아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함할 수 있다.Here, the first group greenhouse control operation is an operation of changing the standard of fruit removal to remove more fruits in order to reduce the number of remaining fruits per one room, and at least one fruit to reduce the number of remaining fruits per one room. The action of deciding to remove Changing the standard of leaf removal so that there are 3 leaves in the , controlling the greenhouse to reduce the temperature and humidity deviation to induce vegetative growth by giving less stress to the crop, and reducing the stress on the crop to induce vegetative growth. The operation of controlling the greenhouse to reduce the deviation, the operation of controlling the greenhouse so that the average temperature of the greenhouse is lowered to reduce the respiration rate of crops, the operation of transmitting the guide message for the above-mentioned control, the operation of outputting a notification for the above-mentioned control It may include at least one of the operations.
여기서, 상기 제2 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 늘리기 위해서 과실을 더 적게 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 남길 잎의 개수가 적어지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎은 0개 에서 1개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 온습도 편차가 커지도록 온실을 제어하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 함수율 편차가 커지도록 온실을 제어하는 동작, 작물의 호흡량을 늘리기 위하여 온실의 평균 온도가 높아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함할 수 있다.Here, the second group greenhouse control operation is an operation of changing the standard of fruit removal so as to remove fewer fruits in order to increase the number of remaining fruits per one flower room, and a leaf so that the number of leaves to be left on a new side branch is reduced at the upper end. Changing the standard of removal, changing the standard of leaf removal so that 0 to 1 leaves are left on the new geodesic in the upper part control operation, controlling the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crops; It may include at least one of an operation of transmitting a guide message for , and an operation of outputting a notification for the aforementioned control.
여기서, 상기 제1 파라미터는 싱크 용량에 대응되는 파라미터이며, 상기 제2 파라미터는 소스 용량에 대응되는 파라미터일 수 있다.Here, the first parameter may be a parameter corresponding to the sink capacity, and the second parameter may be a parameter corresponding to the source capacity.
실시 예에 따른 온실 환경 제어 방법은 작물에 대한 적어도 하나의 이미지를 획득하는 단계, 획득된 적어도 하나의 이미지에 포함되는 제1 특징, 제2 특징 및 제3 특징을 추출하는 단계, 상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제1 파라미터를 산출하는 단계, 상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제2 파라미터를 산출하는 단계 및 상기 제1 파라미터 및 상기 제2 파라미터를 기초로 온실 환경을 제어하는 단계를 포함하되, 상기 제1 파라미터를 산출하는 단계는 상기 제1 특징을 기초로 제1 서브 파라미터를 산출하는 단계, 상기 제2 특징을 기초로 제2 서브 파라미터를 산출하는 단계 및 적어도 상기 제1 서브 파라미터 및 상기 제2 서브 파라미터를 기초로 상기 제1 파라미터를 산출하는 단계를 포함하며, 상기 제2 파라미터를 산출하는 단계는 상기 제3 특징을 기초로 제3 서브 파라미터를 산출하는 단계 및 적어도 상기 제3 서브 파라미터를 기초로 상기 제2 파라미터를 산출하는 단계를 포함하고, 상기 제1 파라미터 및 상기 제2 파라미터를 기초로 온실 환경을 제어하는 단계는 상기 제1 파라미터가 상기 제2 파라미터보다 큰 경우 제1 그룹 온실 제어 동작을 수행하는 단계 및 상기 제2 파라미터가 상기 제1 파라미터보다 큰 경우 제2 그룹 온실 제어 동작을 수행하는 단계를 포함하고, 상기 제1 특징은 작물의 꽃에 대응되는 특징이며, 상기 제2 특징은 작물의 과실에 대응되는 특징이고, 상기 제3 특징은 작물의 잎에 대응되는 특징일 수 있다.The method for controlling a greenhouse environment according to an embodiment includes acquiring at least one image of a crop, extracting a first feature, a second feature, and a third feature included in the acquired at least one image, the first to calculating a first parameter based on at least one characteristic of a third characteristic, calculating a second parameter based on at least one characteristic of the first to third characteristics, and the first parameter and the second characteristic A method comprising controlling a greenhouse environment based on a parameter, wherein the calculating of the first parameter includes calculating a first sub-parameter based on the first characteristic, and a second sub-parameter based on the second characteristic. and calculating the first parameter based on at least the first sub-parameter and the second sub-parameter, wherein the calculating of the second parameter comprises: calculating a sub-parameter and calculating the second parameter based on at least the third sub-parameter, wherein controlling the greenhouse environment based on the first parameter and the second parameter comprises the first performing a first group greenhouse control operation when the parameter is greater than the second parameter and performing a second group greenhouse control operation when the second parameter is greater than the first parameter, the first characteristic may be a characteristic corresponding to a flower of a crop, the second characteristic may be a characteristic corresponding to a fruit of a crop, and the third characteristic may be a characteristic corresponding to a leaf of a crop.
여기서, 상기 제1 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 줄이기 위해서 과실을 더 많이 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 한 화방 당 남는 과실의 개수를 줄이기 위해서 적어도 하나의 과실을 제거하도록 판단하는 동작, 향후 소스가 될 수 있는 잎을 더 늘리기 위해서 상단부에 새로 생기는 측지에 남길 잎의 개수가 많아지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎을 2개 에서 3개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 온습도 편차가 줄어들도록 온실을 제어하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 함수율 편차가 줄어들도록 온실을 제어하는 동작, 작물의 호흡량을 줄이기 위하여 온실의 평균 온도가 낮아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함할 수 있다.Here, the first group greenhouse control operation is an operation of changing the standard of fruit removal to remove more fruits in order to reduce the number of remaining fruits per one room, and at least one fruit to reduce the number of remaining fruits per one room. The action of deciding to remove Changing the standard of leaf removal so that there are 3 leaves in the , controlling the greenhouse to reduce the temperature and humidity deviation to induce vegetative growth by giving less stress to the crop, and reducing the stress on the crop to induce vegetative growth. The operation of controlling the greenhouse to reduce the deviation, the operation of controlling the greenhouse so that the average temperature of the greenhouse is lowered to reduce the respiration rate of crops, the operation of transmitting the guide message for the above-mentioned control, the operation of outputting a notification for the above-mentioned control It may include at least one of the operations.
여기서, 상기 제2 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 늘리기 위해서 과실을 더 적게 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 남길 잎의 개수가 적어지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎은 0개 에서 1개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 온습도 편차가 커지도록 온실을 제어하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 함수율 편차가 커지도록 온실을 제어하는 동작, 작물의 호흡량을 늘리기 위하여 온실의 평균 온도가 높아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함할 수 있다.Here, the second group greenhouse control operation is an operation of changing the standard of fruit removal so as to remove fewer fruits in order to increase the number of remaining fruits per one flower room, and a leaf so that the number of leaves to be left on a new side branch is reduced at the upper end. Changing the standard of removal, changing the standard of leaf removal so that 0 to 1 leaves are left on the new geodesic in the upper part control operation, controlling the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crops; It may include at least one of an operation of transmitting a guide message for , and an operation of outputting a notification for the aforementioned control.
이하에서는 도면을 참조하여 본 발명의 구체적인 실시예를 상세하게 설명한다. 다만, 본 발명의 사상은 제시되는 실시예에 제한되지 아니하고, 본 발명의 사상을 이해하는 당업자는 동일한 사상의 범위 내에서 다른 구성요소를 추가, 변경, 삭제 등을 통하여, 퇴보적인 다른 발명이나 본 발명 사상의 범위 내에 포함되는 다른 실시예를 용이하게 제안할 수 있을 것이나, 이 또한 본원 발명 사상 범위 내에 포함된다고 할 것이다. Hereinafter, specific embodiments of the present invention will be described in detail with reference to the drawings. However, the spirit of the present invention is not limited to the presented embodiment, and those skilled in the art who understand the spirit of the present invention may add, change, delete, etc. other elements within the scope of the same spirit, through addition, change, deletion, etc. Other embodiments included within the scope of the invention may be easily suggested, but this will also be included within the scope of the invention.
도 1은 일 실시 예에 따른 온실 시스템에 대한 개략도이다. 1 is a schematic diagram of a greenhouse system according to an embodiment.
도1을 참조하면, 일 실시 예에 따른 온실 시스템(1)은 온실(2), 측정 장치(20) 및 서버(30)를 포함할 수 있다. Referring to FIG. 1 , a greenhouse system 1 according to an embodiment may include a greenhouse 2 , a measurement device 20 , and a server 30 .
온실(2)은 작물이 생장하는 공간일 수 있다. 온실(2)은 작물의 생장을 위한 온실 내부 습도 및 온도 등, 온실 내부 기본 정보를 측정할 수 있는 시스템이 구축된 공간일 수 있다. 또한, 온실(2)은 측정된 내부 기본 정보를 바탕으로 온실 내부를 제어할 수 있는 시스템이 구축된 공간일 수 있다. The greenhouse 2 may be a space in which crops are grown. The greenhouse 2 may be a space in which a system capable of measuring basic information inside the greenhouse, such as humidity and temperature inside the greenhouse for the growth of crops, is built. In addition, the greenhouse 2 may be a space in which a system capable of controlling the inside of the greenhouse is built based on the measured internal basic information.
도면과 상세한 설명에는 온실(2)을 예로 들어 설명하였으나, 상기 온실(2)은 스마트팜일 수 있다. 즉, 실시 예에 따른 온실 시스템(1)은 온실(2)과 같은 폐쇄된 공간이 아니라 노지와 같은 공간에도 적용될 수 있다.In the drawings and detailed description, the greenhouse 2 has been described as an example, but the greenhouse 2 may be a smart farm. That is, the greenhouse system 1 according to the embodiment may be applied to a space such as an open field rather than a closed space such as the greenhouse 2 .
작물(10)은 온실(2)에서 생장할 수 있는 식물일 수 있다. 작물(10)은 토양에서 재배되는 식물이거나 양액을 통해 재배되는 식물일 수 있다. 예를 들어, 작물(10)은 토마토, 파프리카 등이 될 수 있다. The crop 10 may be a plant capable of growing in the greenhouse 2 . The crop 10 may be a plant grown in soil or a plant grown through a nutrient solution. For example, the crop 10 may be a tomato, paprika, or the like.
작물(10)은 온실(2)에서 서로 평행하는 열에 따라 배치될 수 있다. 즉, 작물(10)은 열에 따라 구분되어 온실에서 생장할 수 있다. The crops 10 may be arranged along rows parallel to each other in the greenhouse 2 . That is, the crop 10 may be classified according to heat and grown in a greenhouse.
작물(10)은 제1열 작물(11), 제2열 작물(12), 제3열 작물(13)을 포함할 수 있다. 제1열 작물(11)은 제1열에 배치되어 재배될 수 있고, 제2열 작물(12)은 제2열에 배치되어 재배될 수 있으며, 제3열 작물(13)은 제3열에 배치되어 재배될 수 있다. The crop 10 may include a first row crop 11 , a second row crop 12 , and a third row crop 13 . The crops 11 in the first row may be disposed and grown in the first row, the crops 12 in the second row may be disposed and grown in the second row, and the crops 13 in the third row may be disposed and grown in the third row can be
작물(10)은 각 열에서 일정한 간격을 두고 재배될 수 있다. 작물(10)은 생장함에 따라 열 내에서 일정한 간격에 따라 이동할 수 있다. 작물(10)은 유인선을 따라 열 내에서 일정한 간격에 따라 이동할 수 있다. Crops 10 may be grown at regular intervals in each row. The crop 10 may move at regular intervals within the row as it grows. The crop 10 may move at regular intervals within a row along the bait line.
측정 장치(20)는 온실(2) 내에서 이동할 수 있다. 측정 장치(20)는 작물이 재배되는 열 사이를 따라 이동할 수 있다. 측정 장치(20)는 제1열 작물(11)과 제2열 작물(12) 사이, 제2열 작물(12)과 제3열 작물(13) 사이를 이동할 수 있다. 측정 장치(20)는 제1열 작물(11)과 제2열 작물(12) 사이, 제2열 작물(12)과 제3열 작물(13) 사이에 설치된 레일을 통해 이동할 수도 있고, 레일 없이 작물 간의 간격을 일정 거리로 유지하며 이동할 수 있다. The measuring device 20 is movable within the greenhouse 2 . The measuring device 20 can move along between rows in which crops are grown. The measuring device 20 may move between the first row crop 11 and the second row crop 12 , and between the second row crop 12 and the third row crop 13 . The measuring device 20 may move through a rail installed between the crops in the first row 11 and the crops 12 in the second row, and between the crops in the second row 12 and the crop 13 in the third row, or without rails. It can move while maintaining a certain distance between crops.
측정 장치(20)는 온실(2) 내에서 과실 및 잎을 포함하는 작물 이미지를 획득할 수 있다. 측정 장치(20)는 온실(2) 내를 이동하면서, 작물 이미지를 획득할 수 있다. 측정 장치(20)는 제1열 작물(11)과 제2열 작물(12) 사이, 제2열 작물(12)과 제3열 작물(13) 사이를 이동하며 과실 및 잎을 포함하는 작물 이미지를 획득할 수 있다. 측정 장치(20)는 일정한 속도를 유지하며 작물 이미지를 획득할 수 있으며, 고정된 위치에서 작물 이미지를 획득할 수도 있다. The measuring device 20 may acquire an image of a crop including fruits and leaves in the greenhouse 2 . The measuring device 20 may acquire a crop image while moving in the greenhouse 2 . The measuring device 20 moves between the crops in the first row 11 and the crops in the second row 12 and between the crops in the second row 12 and the crop 13 in the third row, and crops images including fruits and leaves. can be obtained. The measuring device 20 may acquire a crop image while maintaining a constant speed, and may acquire a crop image at a fixed position.
측정 장치(20)는 작물 이미지에 기초하여 작물 이미지가 포함하는 작물 정보를 획득할 수 있다. 상기 작물 정보는 과실의 위치, 크기, 숙성도 및 잎의 위치 중 적어도 하나를 포함할 수 있다. 과실의 위치는 지면으로부터 과실이 위치하는 높이일 수 있으며, 잎의 위치 역시 지면으로부터 잎이 위치하는 높이일 수 있다. The measuring device 20 may acquire crop information included in the crop image based on the crop image. The crop information may include at least one of a position, size, maturity, and leaf position of a fruit. The position of the fruit may be a height at which the fruit is located from the ground, and the position of the leaf may also be a height at which the leaf is located from the ground.
측정 장치(20)는 상기 작물 정보를 서버(30)로 전달할 수 있다. The measuring device 20 may transmit the crop information to the server 30 .
서버(30)는 상기 작물 정보에 기초하여 작물의 생장 정보를 판단할 수 있다. 서버(30)는 상기 작물 정보에 대해서 가중치를 상이하게 적용하여 작물의 생장 정보를 판단할 수 있다. 상기 가중치는 작물이 포함하는 과실의 크기, 위치, 작물이 포함하는 잎의 위치에 따라 결정될 수 있다. The server 30 may determine the growth information of the crop based on the crop information. The server 30 may determine the growth information of crops by applying different weights to the crop information. The weight may be determined according to the size and position of the fruit included in the crop, and the position of the leaf included in the crop.
상기 생장 정보는 작물의 싱크 용량 및 소스 용량 중 적어도 하나를 포함할 수 있다. 상기 소스 용량은 필수 영양분이 얻어지는 용량을 의미할 수 있으며, 상기 싱크 용량은 양분이 사용되는 용량을 의미할 수 있다. The growth information may include at least one of a sink capacity and a source capacity of a crop. The source capacity may mean a capacity at which essential nutrients are obtained, and the sink capacity may mean a capacity at which nutrients are used.
또한, 상기 싱크 용량은 작물의 호흡량과 작물의 광합성양을 비교하여 작물의 호흡량이 광합성양 보다 많은 경우, 호흡량과 광합성양의 차이 용량을 의미할 수 있다. 상기 소스 용량은 작물의 광합성양과 호흡량을 비교하여, 작물의 광합성양이 호흡량 보다 많은 경우, 광합성양과 호흡량의 차이 용량을 의미할 수 있다. In addition, the sink capacity may mean a capacity difference between the respiratory rate and the photosynthetic amount when the crop's respiration rate is greater than the photosynthetic amount by comparing the crop's respiration rate and the photosynthetic amount. The source capacity compares the photosynthetic amount and the respiration rate of the crop, and when the photosynthetic amount of the crop is greater than the respiration rate, it may mean a difference capacity between the photosynthetic amount and the respiration rate.
서버(30)는 상기 생장 정보를 기초로 온실(2)을 제어할 수 있다. 상기 온실 제어는 상기 생장 정보를 기초로 작물의 과실을 수확하는 판단, 작물의 잎을 제거하는 판단, 및 온실(2) 내의 온도를 제어하는 판단 중 적어도 하나를 포함할 수 있다.The server 30 may control the greenhouse 2 based on the growth information. The greenhouse control may include at least one of a determination to harvest fruit of a crop, a determination to remove leaves of a crop, and a determination to control the temperature in the greenhouse 2 based on the growth information.
또한, 예를 들어, 상기 온실 제어는 과실 제거 기준의 변경, 한 화방 당 남길 과실의 수에 대한 변경, 측지에 남길 잎의 수에 대한 변경, 온습도 편차에 대한 변경, 함수율 편차에 대한 변경, 온실 온도에 대한 제어 중 적어도 하나를 포함할 수 있다.In addition, for example, the greenhouse control may include a change in fruit removal criteria, a change in the number of fruits to be left per one flower room, a change in the number of leaves to be left on a side branch, a change in temperature and humidity deviation, a change in moisture content deviation, a change in the greenhouse It may include at least one of controlling the temperature.
이하는 측정 장치(20)에 대한 상세한 설명이다. The following is a detailed description of the measuring device 20 .
도 2는 일 실시 예에 따른 측정 장치를 나타내는 블록도이다. 2 is a block diagram illustrating a measuring device according to an exemplary embodiment.
도 2를 참조하면, 일 실시 예에 따른 측정 장치(20)는 이미지 획득부(21), 제어부(22), 및 저장부(23)를 포함할 수 있다. Referring to FIG. 2 , the measurement apparatus 20 according to an embodiment may include an image acquisition unit 21 , a control unit 22 , and a storage unit 23 .
이미지 획득부(21)는 적어도 하나 이상의 카메라로 구현될 수 있다. The image acquisition unit 21 may be implemented as at least one camera.
이미지 획득부(21)는 이미지를 획득할 수 있다. 이미지 획득부(21)는 다수의 이미지를 획득할 수 있다. 상기 이미지는 온실에서 생장하는 작물의 과실, 잎 중 적어도 하나를 포함하는 이미지일 수 있다. 상기 이미지는 온실에서 생장하는 복수의 작물을 포함하는 이미지이거나, 상기 이미지는 복수의 작물 각각에 대해서 설치된 유인줄을 포함하는 이미지일 수도 있다. The image acquisition unit 21 may acquire an image. The image acquisition unit 21 may acquire a plurality of images. The image may be an image including at least one of fruits and leaves of crops grown in a greenhouse. The image may be an image including a plurality of crops grown in a greenhouse, or the image may be an image including an inducer line installed for each of the plurality of crops.
이미지 획득부(21)는 획득된 이미지를 제어부(22) 또는 저장부(23)로 전달할 수 있다. The image acquisition unit 21 may transmit the acquired image to the control unit 22 or the storage unit 23 .
제어부(22)는 이미지를 기초로 작물 정보를 판단할 수 있다. 상기 작물 정보는 과실의 위치, 크기, 숙성도 및 잎의 위치 중 적어도 하나를 포함할 수 있다. 상기 작물 정보는 작물이 포함하는 과실의 위치 정보, 상기 과실의 크기 정보, 상기 과실의 숙성도 정보, 및 작물이 포함하는 잎의 위치 정보를 포함할 수 있다. 상기 과실의 위치 정보 및 상기 잎의 위치 정보는 지면으로부터 과실의 수직 높이에 대한 정보이거나, 온실 내 천장의 특정 위치를 기준으로 이격된 수직 거리에 대한 정보이거나, 상기 작물의 생장점을 기준으로 이격된 거리에 대한 정보일 수도 있다. The controller 22 may determine crop information based on the image. The crop information may include at least one of a position, size, maturity, and leaf position of a fruit. The crop information may include location information of a fruit included in the crop, information on the size of the fruit, information on the maturity level of the fruit, and location information of a leaf included in the crop. The location information of the fruit and the location information of the leaves are information on the vertical height of the fruit from the ground, information on the vertical distance spaced apart from the specific location of the ceiling in the greenhouse, It may be information about distance.
제어부(22)는 상기 작물 정보를 저장부(23) 또는 서버(30)로 전달할 수 있다. The control unit 22 may transmit the crop information to the storage unit 23 or the server 30 .
저장부(23)는 이미지 획득부(21)가 획득한 이미지를 저장할 수 있다. 저장부(23)는 제어부(22)가 판단한 작물 정보를 저장할 수 있다. 저장부(23)는 서버(30)로 상기 작물 정보를 전달할 수 있다. The storage unit 23 may store the image acquired by the image acquisition unit 21 . The storage unit 23 may store crop information determined by the control unit 22 . The storage unit 23 may transmit the crop information to the server 30 .
이하에서는 서버에 대한 구체적인 설명을 하도록 한다. Hereinafter, a detailed description of the server will be provided.
도 3은 일 실시 예에 따른 서버를 나타내는 블록도이다. 3 is a block diagram illustrating a server according to an embodiment.
도 3을 참조하면 서버(30)는 제어부(31) 및 저장부(32)를 포함할 수 있다. Referring to FIG. 3 , the server 30 may include a control unit 31 and a storage unit 32 .
제어부(31)는 측정 장치(20)에서 전달받은 작물 정보를 기초로 작물의 생장 정보를 판단할 수 있다. 제어부(31)는 상기 작물 정보에 대해서 적어도 하나 이상의 가중치를 활용해서 작물의 생장 정보를 판단할 수 있다. The control unit 31 may determine the growth information of the crop based on the crop information received from the measuring device 20 . The control unit 31 may determine the growth information of the crop by using at least one weight for the crop information.
상기 작물의 생장 정보는 작물의 싱크 용량 및 소스 용량 중 적어도 하나를 포함할 수 있다.The growth information of the crop may include at least one of a sink capacity and a source capacity of the crop.
제어부(31)는 상기 작물 정보에 대해서 상이한 가중치를 활용하여 작물의 생장 정보를 판단할 수 있다. 예를 들어, 제어부(31)는 상기 작물 정보 중 작물의 과실 크기에 따른 상이한 가중치를 기초로 작물의 생장 정보를 판단할 수 있다. The control unit 31 may determine the growth information of the crop by using different weights for the crop information. For example, the controller 31 may determine the growth information of the crop based on different weights according to the fruit size of the crop among the crop information.
또는 제어부(31)는 상기 작물 정보 중 잎의 위치에 따라 작물의 생장 정보를 판단할 수 있다. 예를 들어, 제어부(31)는 지면으로부터 잎의 위치 정보를 기초로 위치에 따라 적어도 하나 이상의 잎은 싱크 용량 또는 소스 용량으로 판단할 수 있다. Alternatively, the control unit 31 may determine the growth information of the crop according to the position of the leaf among the crop information. For example, the controller 31 may determine that at least one leaf is a sink capacity or a source capacity according to a location based on location information of the leaf from the ground.
제어부(31)는 상기 생장 정보를 기초로 온실 내부 제어에 관한 정보를 판단할 수 있다. 상기 온실 내부 제어에 관한 정보는 싱크 용량 및 소스 용량을 비교하여 온실 내부의 온도를 제어에 관한 정보일 수 있다. 또는, 온실 내부 제어에 관한 정보는 싱크 용량 및 소스 용량을 비교하여 작물의 과실을 수확하는 판단에 관한 정보일 수 있고, 싱크 용량 및 소스 용량을 비교하여 작물의 잎을 제거하는 판단에 관한 정보일 수도 있다. The control unit 31 may determine information about the control inside the greenhouse based on the growth information. The information on the control inside the greenhouse may be information about controlling the temperature inside the greenhouse by comparing the sink capacity and the source capacity. Alternatively, the information on the control inside the greenhouse may be information on the determination to harvest the fruit of the crop by comparing the sink capacity and the source capacity, and information about the determination to remove the leaves of the crop by comparing the sink capacity and the source capacity may be
제어부(31)는 생장 정보를 저장부(32)로 전달할 수 있다. 제어부(31)는 온실 내부 제어에 관한 정보를 저장부(32)로 전달할 수 있다. The control unit 31 may transmit growth information to the storage unit 32 . The control unit 31 may transmit information related to the control of the inside of the greenhouse to the storage unit 32 .
저장부(32)는 상기 생장 정보를 저장할 수 있다. 저장부(32)는 상기 온실 내부 제어에 관한 정보를 저장할 수 있다. 저장부(32)는 상기 생장 정보 및 상기 온실 내부 제어에 관한 정보를 제어부(31)로 전달할 수도 있다. The storage unit 32 may store the growth information. The storage unit 32 may store information about the control inside the greenhouse. The storage unit 32 may transmit the growth information and information on the control inside the greenhouse to the control unit 31 .
이하에서는 도 4를 통해, 앞서 상술한 과실 정보를 기초로 작물의 생장 정보를 판단하는 구체적인 방법을 더욱 상세하게 설명하도록 한다. Hereinafter, a specific method for determining the growth information of a crop based on the aforementioned fruit information will be described in more detail with reference to FIG. 4 .
도 4 및 도 5는 일 실시 예에 따른 싱크 용량 및 소스 용량 측정 시스템 블록도 및 싱크 용량 및 소스 용량 측정 방법에 관한 순서도이다. 4 and 5 are a block diagram of a system for measuring sink capacity and source capacity and a flowchart of a method for measuring sink capacity and source capacity according to an embodiment.
도 4를 참조하면, 측정 장치(20)는 이미지(100)를 획득하고, 획득된 이미지(100)를 기초로 과실 정보(210) 및 잎 정보(220)를 추출할 수 있다. Referring to FIG. 4 , the measuring device 20 may acquire an image 100 , and extract fruit information 210 and leaf information 220 based on the acquired image 100 .
상기 이미지(100)은 적어도 하나 이상의 과실을 포함하는 이미지일 수 있다. 또는 상기 이미지(100)는 적어도 하나 이상의 과실과 적어도 하나 이상의 잎을 포함하는 작물에 관한 이미지일 수 있다. The image 100 may be an image including at least one fruit. Alternatively, the image 100 may be an image of a crop including at least one fruit and at least one leaf.
상기 이미지(100)는 하나의 작물에 관한 다수의 이미지일 수 있다. 예를 들어, 상기 이미지(100)는 하나의 작물에 대응하는 여러 이미지를 이어 붙인 파노라마 이미지일 수 있다. 다수의 이미지를 이어 붙여 하나에 이미지로 처리하는 과정은 도 6을 통해 후술하도록 한다. The image 100 may be a plurality of images related to one crop. For example, the image 100 may be a panoramic image in which several images corresponding to one crop are stitched together. The process of concatenating a plurality of images and processing them into one image will be described later with reference to FIG. 6 .
상기 잎은 작물에 가장 큰 원 가지에서 곁 가지로 뻗어 나간 줄기에 맺힌 모든 잎을 의미할 수 있다. 또는 상기 잎은 상기 곁 가지로 뻗어 나간 줄기에 맺힌 복수의 잎 중 하나를 의미할 수도 있다. The leaf may refer to all the leaves formed on the stem extending from the largest original branch to the side branch in the crop. Alternatively, the leaf may refer to one of a plurality of leaves formed on the stem extending from the side branch.
이미지(100)는 적어도 하나 이상의 작물을 포함할 수도 있고, 작물 하나만을 포함하는 이미지일 수도 있다. The image 100 may include at least one crop or an image including only one crop.
이미지(100)는 온실 내 특정 영역에서 측정 장치가 획득한 이미지일 수 있다. 이미지(100)는 온실 내 작물의 군집 영역을 포함하는 이미지일 수 있다. The image 100 may be an image acquired by the measuring device in a specific area in the greenhouse. The image 100 may be an image including a cluster area of crops in a greenhouse.
이미지(100)은 이미지 프로세싱을 통해 처리가 된 이미지일 수 있다. 예를 들어, 이미지 프로세싱은 다수의 이미지를 하나의 파노라마 이미지로 생성하는 과정일 수 있다. 보다 구체적으로, 이미지 프로세싱은 작물 하나에 대한 다수의 이미지를 이어 붙여, 상기 작물과 대응되는 하나의 이미지를 만드는 과정일 수 있다. The image 100 may be an image processed through image processing. For example, image processing may be a process of generating a plurality of images into one panoramic image. More specifically, image processing may be a process of concatenating a plurality of images of one crop to create one image corresponding to the crop.
측정 장치(20)는 이미지를 기초로 작물에 대한 과실 정보(210) 및 잎 정보(220)을 추출할 수 있다. The measuring device 20 may extract fruit information 210 and leaf information 220 about a crop based on the image.
이미지를 기초로 작물에 대한 과실 정보(210) 및 잎 정보(220)는 서버(30)에서 추출될 수도 있다. 이 경우 측정 장치(20)는 이미지를 서버(30)로 전달하고, 서버(30)는 전달받은 이미지를 기초로 작물에 대한 과실 정보(210) 및 잎 정보(220)를 추출할 수도 있다. Fruit information 210 and leaf information 220 about a crop based on the image may be extracted from the server 30 . In this case, the measuring device 20 transmits the image to the server 30 , and the server 30 may extract fruit information 210 and leaf information 220 about the crop based on the received image.
여기서 측정 장치(20) 또는 서버(30)에는 학습된 뉴럴 네트워크가 설치되어 있고, 학습된 뉴럴 네트워크에 의해 이미지를 기초로 작물에 대한 과실 정보(210) 및 잎 정보(220)가 추출될 수도 있다.Here, a learned neural network is installed in the measuring device 20 or the server 30, and fruit information 210 and leaf information 220 about a crop may be extracted based on the image by the learned neural network. .
상기 과실 정보(210)는 작물 이미지에 포함된 과실의 위치, 크기, 숙성도 중 적어도 하나를 포함하는 정보일 수 있다. The fruit information 210 may be information including at least one of the location, size, and maturity of the fruit included in the crop image.
과실의 위치에 관한 정보는 작물 이미지가 포함하는 하나의 작물에 대해서, 상기 작물이 포함하는 하나의 과실의 위치에 대한 정보일 수 있다. 보다 구체적으로, 상기 과실이 지면으로부터 이격된 높이에 관한 정보 이거나, 온실 내 천장으로부터 이격된 거리에 대한 정보이거나 상기 작물의 생장점으로부터 이격된 거리에 대한 정보일 수 있다.The information on the location of the fruit may be information on the location of one fruit included in the crop with respect to one crop included in the crop image. More specifically, it may be information about the height of the fruit separated from the ground, information about the distance away from the ceiling in the greenhouse, or information about the distance away from the growing point of the crop.
과실의 크기에 관한 정보는 작물 이미지가 포함하는 하나의 작물에 대해서, 상기 작물이 포함하는 하나의 과실의 크기에 대한 정보일 수 있다. 보다 구체적으로, 상기 과실이 다른 과실과의 비교한 상대적인 크기 정보이거나 상기 과실에 관한 절대적인 크기에 관한 정보일 수 있다. The information on the size of the fruit may be information on the size of one fruit included in the crop for one crop included in the crop image. More specifically, it may be information about the relative size of the fruit compared with other fruits, or information about the absolute size of the fruit.
과실의 숙성도에 관한 정보는 작물 이미지가 포함하는 하나의 작물에 대해서, 상기 작물이 포함하는 하나의 과실의 숙성도에 대한 정보일 수 있다. 보다 구체적으로, 상기 과실의 숙성 정도에 대해, 다른 과실과의 상대적인 숙성도 정보 이거나 절대적인 숙성도 정보일 수 있다. The information on the maturity level of the fruit may be information on the maturity level of one fruit included in the crop for one crop included in the crop image. More specifically, with respect to the ripening degree of the fruit, it may be relative maturity information with other fruits or absolute ripeness information.
상기 잎 정보(220)는 작물 이미지에 포함된 잎의 위치에 관한 정보일 수 있다. 상기 잎의 위치에 관한 정보는 작물이 포함하는 하나의 잎이 지면으로부터 이격된 높이에 관한 정보 이거나, 온실 내 천장으로부터 이격된 거리에 대한 정보이거나 상기 작물의 생장점으로부터 이격된 거리에 대한 정보일 수 있다.The leaf information 220 may be information about a position of a leaf included in a crop image. The information about the position of the leaf may be information about the height at which one leaf included in the crop is spaced apart from the ground, information about the distance away from the ceiling in the greenhouse, or information about the distance away from the growth point of the crop. have.
측정 장치(20)는 작물에 대한 과실 정보(210) 및 잎 정보(220)를 서버(30)로 전달할 수 있다. The measuring device 20 may transmit fruit information 210 and leaf information 220 about the crop to the server 30 .
도 4를 참조하면, 서버(30)는 과실 정보(210) 및 잎 정보(220) 기초로 싱크 용량(310) 및 소스 용량(320)을 산출할 수 있다. 또한, 서버(30)는 상기 싱크 용량(310) 및 소스 용량(320)을 기초로 온실 제어(400)를 할 수 있다. Referring to FIG. 4 , the server 30 may calculate the sink capacity 310 and the source capacity 320 based on the fruit information 210 and the leaf information 220 . In addition, the server 30 may control the greenhouse 400 based on the sink capacity 310 and the source capacity 320 .
서버(30)는 상기 과실 정보(210) 및 잎 정보(220)를 기초로 작물의 싱크 용량을 산출할 수 있다. The server 30 may calculate the sink capacity of the crop based on the fruit information 210 and the leaf information 220 .
서버(30)는 상기 과실 정보 중 과실의 위치, 크기, 숙성도 중 적어도 하나를 기초로 하여 상기 작물의 싱크 용량을 산출할 수 있다. 서버(30)는 상기 과실 정보에 대해서 상이한 가중치를 활용하여 싱크 용량을 산출할 수 있다. The server 30 may calculate the sink capacity of the crop based on at least one of the location, size, and maturity of the fruit among the fruit information. The server 30 may calculate the sink capacity by using different weights for the error information.
서버(30)는 상기 잎 정보를 활용하여 싱크 용량을 산출할 수 있다. 서버(30)는 상기 잎 정보 중 잎의 위치에 기초하여 싱크 용량으로 판단할 수 있다. 서버(30)가 싱크 용량을 산출하는 구체적인 방법은 도 7 및 도 8을 활용하여 후술하도록 한다.The server 30 may calculate the sink capacity by using the leaf information. The server 30 may determine the sink capacity based on the position of the leaf among the leaf information. A detailed method for the server 30 to calculate the sink capacity will be described later with reference to FIGS. 7 and 8 .
서버(30)는 상기 잎 정보를 활용하여 소스 용량을 산출할 수 있다. 서버(30)는 상기 잎 정보 중 잎의 위치 정보에 기초하여 소스 용량을 산출할 수 있다. 서버(30)은 상기 잎 정보 중 잎의 위치 정보에 대해서 상이한 가중치를 활용하여 작물의 소스 용량을 산출할 수 있다.The server 30 may calculate the source capacity by utilizing the leaf information. The server 30 may calculate the source capacity based on leaf position information among the leaf information. The server 30 may calculate the source capacity of the crop by using different weights for the leaf position information among the leaf information.
도 5를 참조하여 싱크 용량 및 소스 용량을 산출하는 방법에 대해 설명하자면, 싱크 용량 및 소스 용량을 산출하는 방법은 측정 장치가 작물의 과실 및 잎을 포함하는 작물 이미지를 입력 받는 단계(S101), 상기 측정 장치가 상기 작물 이미지를 기초로 과실 정보 및 잎 정보를 추출하는 단계(S102), 서버가 상기 과실 정보 및 상기 잎 정보를 기초로 작물의 싱크 용량 및 소스 용량을 판단하는 단계(S103), 및 서버가 상기 싱크 용량 및 소스 용량을 기초로 온실을 제어하는 단계(S104)를 포함한다. The method of calculating the sink capacity and the source capacity with reference to FIG. 5 will be described. The method for calculating the sink capacity and the source capacity includes the steps of receiving, by the measuring device, a crop image including fruits and leaves of the crop (S101); extracting, by the measuring device, fruit information and leaf information based on the crop image (S102); determining, by the server, a sink capacity and a source capacity of a crop based on the fruit information and the leaf information (S103); and the server controlling the greenhouse based on the sink capacity and the source capacity (S104).
상기 싱크 용량 및 소스 용량을 산출하는 방법은 측정 장치가 작물의 과실 및 잎을 포함하는 작물 이미지를 입력 받는 단계(S101), 상기 측정 장치가 상기 작물 이미지를 기초로 과실 정보 및 잎 정보를 추출하는 단계(S102), 서버가 상기 과실 정보 및 상기 잎 정보를 기초로 작물의 싱크 용량 및 소스 용량을 판단하는 단계(S103)에 대한 구체적인 설명은 앞서 상술한 싱크 용량 및 소스 용량 측정 시스템에 대한 설명과 중복되는 바 생략하기로 한다. The method for calculating the sink capacity and the source capacity includes the steps of: a measuring device receiving a crop image including fruits and leaves of a crop (S101), the measuring device extracting fruit information and leaf information based on the crop image The detailed description of the step (S102), the server determining the sink capacity and the source capacity of the crop based on the fruit information and the leaf information (S103), is the same as the description of the sink capacity and source capacity measurement system described above. Duplicate bars will be omitted.
서버가 상기 싱크 용량 및 소스 용량을 기초로 온실을 제어할 수 있다.The server may control the greenhouse based on the sink capacity and the source capacity.
상기 서버가 상기 싱크 용량 및 소스 용량을 기초로 상기 온실을 제어한다는 의미는 상기 온실에 대한 파라미터 중 적어도 일부를 직접적으로 변경하는 동작, 상기 온실에 대한 제어를 위한 명령을 전송하는 동작 및 상기 온실에 대한 제어를 위한 가이드 메시지를 전송하는 동작을 포함할 수 있으며, 이하에서는 설명의 편의를 위해서 상술한 동작들 중 하나의 동작을 예시로서 설명하기로 한다.The meaning that the server controls the greenhouse based on the sink capacity and the source capacity means an operation of directly changing at least some of parameters for the greenhouse, an operation of transmitting a command for controlling the greenhouse, and an operation of controlling the greenhouse. It may include an operation of transmitting a guide message for controlling the . Hereinafter, for convenience of description, one operation among the above-described operations will be described as an example.
일 실시예에 따른 서버는 상기 싱크 용량 및 상기 소스 용량을 기초로 과실 제거의 기준을 변경할 수 있다.The server according to an embodiment may change the error removal criterion based on the sink capacity and the source capacity.
예를 들어, 일 실시예에 따른 서버는 상기 싱크 용량이 상기 소스 용량보다 큰 경우 한 화방 당 남는 과실의 개수를 줄이기 위해서 과실을 더 많이 제거하도록 상기 과실 제거의 기준을 변경할 수 있으나, 이에 한정되지 않는다.For example, when the sink capacity is greater than the source capacity, the server according to an embodiment may change the criteria for removing fruits so that more fruits are removed in order to reduce the number of fruits remaining per room, but is not limited thereto. does not
또한, 예를 들어, 일 실시예에 따른 서버는 상기 싱크 용량이 상기 소스 용량보다 큰 경우 한 화방 당 남는 과실의 개수를 줄이기 위해서 적어도 하나의 과실을 제거하도록 판단할 수 있으나, 이에 한정되지 않는다.Also, for example, when the sink capacity is greater than the source capacity, the server according to an embodiment may determine to remove at least one fruit in order to reduce the number of remaining fruits per one room, but is not limited thereto.
또한, 예를 들어, 일 실시예에 따른 서버는 상기 소스 용량이 상기 싱크 용량보다 큰 경우 한 화방 당 남는 과실의 개수를 늘리기 위해서 과실을 더 적게 제거하도록 상기 과실 제거의 기준을 변경할 수 있으나, 이에 한정되지 않는다.Also, for example, when the source capacity is greater than the sink capacity, the server according to an embodiment may change the criteria for removing fruits so that fewer fruits are removed in order to increase the number of fruits remaining per one room. not limited
또한, 일 실시예에 따른 서버는 상기 싱크 용량 및 상기 소스 용량을 기초로 잎 제거의 기준을 변경할 수 있다.Also, the server according to an embodiment may change the leaf removal criterion based on the sink capacity and the source capacity.
예를 들어, 일 실시예에 따른 서버는 상기 싱크 용량이 상기 소스 용량보다 큰 경우 향후 소스가 될 수 있는 잎을 더 늘리기 위해서 상단부에 새로 생기는 측지에 남길 잎의 개수가 많아지도록 잎 제거의 기준을 변경할 수 있으나, 이에 한정되지 않는다.For example, when the sink capacity is larger than the source capacity, the server according to an embodiment sets the standard of leaf removal so that the number of leaves to be left on a new branch at the upper end increases in order to further increase leaves that can become sources in the future. It can be changed, but is not limited thereto.
보다 구체적인 예를 들어, 일 실시예에 따른 서버는 상기 싱크 용량이 상기 소스 용량보다 큰 경우 상단부에 새로 생기는 측지에 잎을 2개 에서 3개 남기도록 잎 제거의 기준을 변경할 수 있으나, 이에 한정되지 않는다.For a more specific example, the server according to an embodiment may change the leaf removal criteria so that, when the sink capacity is greater than the source capacity, 2 to 3 leaves are left on the newly created geodesic at the upper end, but is not limited thereto. does not
또한, 예를 들어, 일 실시예에 따른 서버는 상기 소스 용량이 상기 싱크 용량 보다 큰 경우 상단부에 새로 생기는 측지에 남길 잎의 개수가 적어지도록 잎 제거의 기준을 변경할 수 있으나, 이에 한정되지 않는다.Also, for example, when the source capacity is greater than the sink capacity, the server according to an exemplary embodiment may change the leaf removal criterion so that the number of leaves to be left on the newly created geodesic at the upper end decreases, but is not limited thereto.
보다 구체적인 예를 들어, 일 실시예에 따른 서버는 상기 소스 용량이 상기 싱크 용량보다 큰 경우 상단부에 새로 생기는 측지에 잎은 0개 에서 1개 남기도록 잎 제거의 기준을 변경할 수 있으나, 이에 한정되지 않는다.For a more specific example, the server according to an embodiment may change the leaf removal criteria so that, when the source capacity is greater than the sink capacity, 0 to 1 leaves are left on a new geodesic at the upper end, but is not limited thereto. does not
또한, 일 실시예에 따른 서버는 상기 싱크 용량 및 상기 소스 용량을 기초로 온습도 편차가 조절되도록 온실을 제어 할 수 있다.In addition, the server according to an embodiment may control the greenhouse so that a temperature and humidity deviation is adjusted based on the sink capacity and the source capacity.
예를 들어, 일 실시예에 따른 서버는 상기 싱크 용량이 상기 소스 용량보다 큰 경우 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 온습도 편차가 줄어들도록 온실을 제어할 수 있으나, 이에 한정되지 않는다.For example, when the sink capacity is greater than the source capacity, the server according to an embodiment may control the greenhouse to reduce the temperature and humidity deviation in order to induce vegetative growth by applying less stress to the crop, but is not limited thereto.
또한, 예를 들어, 일 실시예에 따른 서버는 상기 소스 용량이 상기 싱크 용량보다 큰 경우 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 온습도 편차가 커지도록 온실을 제어할 수 있으나, 이에 한정되지 않는다.Also, for example, when the source capacity is greater than the sink capacity, the server according to an embodiment may control the greenhouse to increase the temperature and humidity deviation in order to induce reproductive growth by applying more stress to the crop, but is not limited thereto. does not
또한, 일 실시예에 따른 서버는 상기 싱크 용량 및 상기 소스 용량을 기초로 함수율 편차가 조절되도록 온실을 제어할 수 있다.In addition, the server according to an embodiment may control the greenhouse so that a moisture content deviation is adjusted based on the sink capacity and the source capacity.
예를 들어, 일 실시예에 따른 서버는 상기 싱크 용량이 상기 소스 용량보다 큰 경우 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 함수율 편차가 줄어들도록 온실을 제어할 수 있으나, 이에 한정되지 않는다.For example, when the sink capacity is greater than the source capacity, the server according to an embodiment may control the greenhouse to reduce the moisture content deviation in order to induce vegetative growth by applying less stress to the crop, but is not limited thereto.
또한, 예를 들어, 일 실시예에 따른 서버는 상기 소스 용량이 상기 싱크 용량보다 큰 경우 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 함수율 편차가 커지도록 온실을 제어할 수 있으나, 이에 한정되지 않는다.Also, for example, when the source capacity is greater than the sink capacity, the server according to an embodiment may control the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crop, but is not limited thereto. does not
또한, 일 실시예에 따른 서버는 상기 싱크 용량 및 상기 소스 용량을 기초로 온실의 온도를 제어할 수 있다.In addition, the server according to an embodiment may control the temperature of the greenhouse based on the sink capacity and the source capacity.
예를 들어, 일 실시예에 따른 서버는 상기 싱크 용량이 상기 소스 용량보다 큰 경우 작물의 호흡량을 줄이기 위하여 온실의 평균 온도가 낮아지도록 온실을 제어할 수 있으나, 이에 한정되지 않는다.For example, when the sink capacity is greater than the source capacity, the server according to an embodiment may control the greenhouse to lower the average temperature of the greenhouse in order to reduce the respiration rate of crops, but is not limited thereto.
또한, 예를 들어, 일 실시예에 따른 서버는 상기 소스 용량이 상기 싱크 용량보다 큰 경우 작물의 호흡량을 늘리기 위하여 온실의 평균 온도가 높아지도록 온실을 제어할 수 있으나, 이에 한정되지 않는다.Also, for example, when the source capacity is greater than the sink capacity, the server according to an embodiment may control the greenhouse to increase the average temperature of the greenhouse to increase the respiration rate of crops, but is not limited thereto.
또한, 서버는 상기 싱크 용량이 소스 용량 보다 큰 경우, 이에 따라 온실의 온도 및 CO2 농도, 습도를 제어하는 판단을 할 수 있다. 상기 서버는 상기 싱크 용량이 소스 용량 보다 큰 경우 온실의 온도를 낮출 수 있다.In addition, when the sink capacity is greater than the source capacity, the server may determine to control the temperature, CO2 concentration, and humidity of the greenhouse accordingly. The server may lower the temperature of the greenhouse when the sink capacity is greater than the source capacity.
또는, 서버는 상기 싱크 용량이 소스 용량 보다 큰 경우, 서버는 온실 내 작물이 포함하는 임의의 과실을 제거하는 판단을 할 수 있다. 상기 서버는 상기 싱크 용량이 소스 용량 보다 큰 경우, 온실 내 작물의 특정 화방의 다수의 과실 중 적어도 하나를 제거해야 된다는 판단을 할 수 있다. 상기 서버는 상기 싱크 용량이 소스 용량보다 큰 경우, 상기 작물의 특정 높이 이하에 위치하는 제거을 수확하는 판단을 할 수 있다. 또는, 서버는 상기 싱크 용량이 소스 용량 보다 큰 경우, 온실 내 작물이 포함하는 임의의 잎을 제거하는 판단을 할 수 있다. 상기 임의의 잎은 잎이 위치하는 영역의 높이에 기초하여 서버가 판단한 잎일 수 있다. 상기 서버는 과실에 대한 제거 판단과 잎을 제거하는 판단에 기초하여 메시지를 출력할 수 있다.Alternatively, when the sink capacity is greater than the source capacity, the server may determine to remove any fruit included in the crop in the greenhouse. When the sink capacity is greater than the source capacity, the server may determine that at least one of a plurality of fruits of a specific flower room of a crop in the greenhouse should be removed. When the sink capacity is greater than the source capacity, the server may determine to harvest the removal located below a specific height of the crop. Alternatively, when the sink capacity is greater than the source capacity, the server may determine to remove any leaves included in the crop in the greenhouse. The arbitrary leaf may be a leaf determined by the server based on the height of the region where the leaf is located. The server may output a message based on the determination to remove the fruit and the determination to remove the leaf.
상기 서버는 상기 싱크 용량과 소스 용량의 차이에 기초하여 상기 온실을 제어할 수 있다.The server may control the greenhouse based on a difference between the sink capacity and the source capacity.
상기 서버는 상기 싱크 용량이 상기 소스 용량 보다 크고, 상기 싱크 용량과 상기 소스 용량의 차이가 클수록 상기 온실의 온도를 더 하강시킬 수 있다. 상기 서버는 상기 싱크 용량이 상기 소스 용량보다 제1 용량차만큼 큰 경우 상기 온실의 온도를 제1 편차만큼 하강시킬 수 있다. 상기 서버는 상기 싱크 용량이 상기 소스 용량보다 제2 용량차만큼 큰 경우 상기 온실의 온도를 제2 편차만큼 하강시킬 수 있다. The server may further lower the temperature of the greenhouse as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater. The server may lower the temperature of the greenhouse by the first deviation when the sink capacity is greater than the source capacity by a first capacity difference. The server may lower the temperature of the greenhouse by a second deviation when the sink capacity is greater than the source capacity by a second capacity difference.
이 때, 상기 제1 용량차는 제2 용량차보다 크고, 상기 제1 편차는 제2 편차보다 클 수 있다. In this case, the first capacity difference may be greater than the second capacity difference, and the first deviation may be greater than the second deviation.
반대로, 상기 싱크 용량이 상기 소스 용량보다 작고, 상기 싱크 용량과 상기 소스 용량의 차이가 클수록 상기 온실의 온도를 더 상승 시킬 수 있다. 상기 서버는 상기 싱크 용량이 상기 소스 용량보다 제3 용량차만큼 작은 경우 상기 온실의 온도를 제3 편차만큼 상승 시킬 수 있다. 상기 서버는 상기 싱크 용량이 상기 소스 용량보다 제4 용량차만큼 작은 경우 상기 온실의 온도를 제4 편차만큼 상승 시킬 수 있다.Conversely, as the sink capacity is smaller than the source capacity and the difference between the sink capacity and the source capacity is greater, the temperature of the greenhouse may be further increased. The server may increase the temperature of the greenhouse by a third deviation when the sink capacity is smaller than the source capacity by a third capacity difference. The server may increase the temperature of the greenhouse by a fourth deviation when the sink capacity is smaller than the source capacity by a fourth capacity difference.
이 때, 상기 제3 용량차는 상기 제4 용량차보다 크고, 상기 제3 편차는 상기 제4 편차보다 클 수 있다.In this case, the third capacity difference may be greater than the fourth capacity difference, and the third deviation may be greater than the fourth deviation.
상기 서버는 상기 싱크 용량이 상기 소스 용량 보다 크고, 상기 싱크 용량과 상기 소스 용량의 차이가 클수록 더 많은 과실을 수확하라는 메시지를 출력할 수 있다. 상기 서버는 상기 싱크 용량이 상기 소스 용량보다 제1 용량차만큼 큰 경우 a개의 과실을 수확하라는 메시지를 출력할 수 있고, 상기 싱크 용량이 상기 소스 용량보다 제2 용량차만큼 큰 경우 b개의 과실을 수확하라는 메시지를 출력할 수 있다.The server may output a message to harvest more fruits as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater. The server may output a message to harvest a number of fruits when the sink capacity is greater than the source capacity by a first capacity difference, and select b fruits when the sink capacity is greater than the source capacity by a second capacity difference You can print a message telling you to harvest.
이 때, 상기 제1 용량차는 상기 제2 용량차보다 클 수 있고, a는 b보다 클 수 있다.In this case, the first capacity difference may be greater than the second capacity difference, and a may be greater than b.
또한, 상기 서버는 상기 싱크 용량이 상기 소스 용량 보다 크고, 상기 싱크 용량과 상기 소스 용량의 차이가 클수록 수확 대상 과실의 위치를 지정함으로써 더 많은 과실을 수확하도록 할 수 있다.In addition, as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater, the server may harvest more fruits by designating a location of harvest target fruits.
상기 서버는 상기 싱크 용량이 상기 소스 용량보다 제1 용량차만큼 큰 경우 h1높이 이하의 과실을 수확하라는 메시지를 출력할 수 있고, 제2 용량차만큼 큰 경우 h2 높이 이하의 과실을 수확하라는 메시지를 출력할 수 있다. 이 때, h1은 h2보다 클 수 있다. 즉, 상기 서버는 수확 대상 과실의 위치를 범위로 지정함으로써 수확 대상 과실의 개수를 지정할 수 있어, 그 결과 작물의 싱크 용량이 낮아질 수 있도록 할 수 있다.When the sink capacity is greater than the source capacity by a first capacity difference, the server may output a message to harvest fruit with a height of h1 or less, and when the sink capacity is larger than the source capacity by a second capacity difference, a message to harvest fruits with a height of h2 or less can be printed out. In this case, h1 may be greater than h2. That is, the server can designate the number of harvest target fruits by designating the location of the harvest target fruit as a range, so that the sink capacity of the crop can be reduced as a result.
상기 서버는 상기 싱크 용량이 상기 소스 용량 보다 크고, 상기 싱크 용량과 소스 용량의 차이가 클수록 더 많은 하엽을 제거하라는 메시지를 출력할 수 있다.The server may output a message to remove more lower lobes as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater.
상기 서버는 상기 싱크 용량이 상기 소스 용량보다 제1 용량차만큼 큰 경우 c개의 잎을 제거하라는 메시지를 출력할 수 있고, 상기 싱크 용량이 상기 소스 용량보다 제2 용량차만큼 큰 경우 d개의 잎을 제거하라는 메시지를 출력할 수 있다.The server may output a message to remove c leaves when the sink capacity is greater than the source capacity by a first capacity difference, and remove d leaves when the sink capacity is greater than the source capacity by a second capacity difference You can print a message asking you to remove it.
이 때, 상기 제1 용량차는 상기 제2 용량차보다 클 수 있고, c는 d보다 클 수 있다.In this case, the first capacity difference may be greater than the second capacity difference, and c may be greater than d.
또한, 상기 서버는 상기 싱크 용량이 상기 소스 용량 보다 크고, 상기 싱크 용량과 상기 소스 용량의 차이가 클수록 제거 대상 잎의 높이를 지정함으로써 더 많은 잎을 제거하도록 할 수 있다.In addition, the server may remove more leaves by designating a height of leaves to be removed as the sink capacity is greater than the source capacity and the difference between the sink capacity and the source capacity is greater.
상기 서버는 상기 싱크 용량이 상기 소스 용량보다 제1 용량차만큼 큰 경우 h3 높이 이하의 잎을 제거하라는 메시지를 출력할 수 있고, 제2 용량차만큼 큰 경우 h4 높이 이하의 잎을 제거하라는 메시지를 출력할 수 있다. 이 때, h3는 h4 보다 클 수 있다. 즉, 상기 서버는 제거 대상 잎의 위치를 범위로 지정함으로써 제거 대상잎의 개수를 지정할 수 있고, 그 결과 작물의 싱크 용량이 낮아질 수 있다.When the sink capacity is greater than the source capacity by a first capacity difference, the server may output a message to remove leaves with a height of h3 or less, and when the sink capacity is larger than the source capacity by a second capacity difference, a message to remove leaves with a height of h4 or less can be printed out. In this case, h3 may be greater than h4. That is, the server may designate the number of leaves to be removed by designating the position of the leaves to be removed as a range, and as a result, the sink capacity of the crop may be lowered.
이 때의 높이는 잎의 싱크와 소스의 경계인 기준 높이일 수도 있고, 상기 기준 높이 보다 낮은 높이일 수도 있다. 결과적으로, 상기 싱크 용량이 상기 소스 용량보다 큰 경우에 양분을 소비하는 잎을 제거함으로써 작물의 수확량을 높일 수 있다.At this time, the height may be the reference height that is the boundary between the sink and the source of the leaf, or may be a height lower than the reference height. As a result, when the sink capacity is greater than the source capacity, it is possible to increase the yield of crops by removing the leaves consuming nutrients.
이하에서 상술한 서버에서 판단하는 온실 제어는 일 예에 해당하며, 상기 싱크 용량 및 소스 용량에 기초하여 온실을 제어하는 판단은 일 예에 한정되어 해석되지 아니한다. Hereinafter, the greenhouse control determined by the server described above corresponds to an example, and the determination to control the greenhouse based on the sink capacity and the source capacity is not interpreted as being limited to an example.
이하에서는, 도 6을 참조하여, 하나에 작물에 대응하는 여러 이미지를 하나에 이미지로 처리하는 과정에 대해서 상술하도록 한다. Hereinafter, with reference to FIG. 6 , a process of processing several images corresponding to one crop into one image will be described in detail.
도 6은 일 실시 예에 따른 작물 이미지 처리 과정에 관한 도면이다. 6 is a view of a crop image processing process according to an embodiment.
도 6을 참조하면, 측정 장치는 적어도 하나 이상의 이미지를 획득할 수 있다. 상기 이미지는 하나에 작물에 대응하는 여러 이미지를 포함할 수 있다. 도 6에서 측정 장치는 하나에 작물에 대응하는 제1 이미지(101), 제2 이미지(102), 제3 이미지(103)을 획득할 수 있다. 상기 제1 이미지(101), 제2 이미지(102), 제3 이미지(103)은 하나에 작물에 대응될 수 있다. 보다 구체적으로 하나에 작물에 대응한다는 의미는 제1 이미지(101), 제2 이미지(102), 제3 이미지(103)이 하나에 작물에 임의의 부분을 포함하고 있는 것을 의미할 수 있다. Referring to FIG. 6 , the measuring device may acquire at least one image. The image may include several images corresponding to one crop. 6 , the measuring device may acquire a first image 101 , a second image 102 , and a third image 103 corresponding to one crop. The first image 101 , the second image 102 , and the third image 103 may correspond to one crop. More specifically, the meaning of corresponding to one crop may mean that the first image 101 , the second image 102 , and the third image 103 include an arbitrary part in one crop.
측정 장치 내 제어부는 제1 이미지(101), 제2 이미지(102), 및 제3 이미지(103)을 이어 붙여 하나의 작물 이미지(100)을 생성할 수 있다. 상기 작물 이미지(100)은 하나의 작물에 대응되며 하나에 작물을 이미지 하나에 모두 포함하는 이미지 일 수 있다. The control unit in the measuring device may generate one crop image 100 by connecting the first image 101 , the second image 102 , and the third image 103 . The crop image 100 may be an image that corresponds to one crop and includes all crops in one image.
보다 구체적으로, 측정 장치 내 제어부는 제1 이미지(101), 제2 이미지(102), 및 제3 이미지(103)를 고정된 위치에서 하나에 작물을 트래킹 하여 획득할 수 있다. 따라서 획득된 제1 이미지(101), 제2 이미지(102), 및 제3 이미지(103)를 이어 붙여 하나의 파노라마 이미지인 작물 이미지(100)을 획득할 수 있다.More specifically, the control unit in the measuring device may acquire the first image 101 , the second image 102 , and the third image 103 by tracking a crop in one at a fixed position. Accordingly, the first image 101 , the second image 102 , and the third image 103 are connected to each other to obtain the crop image 100 , which is one panoramic image.
측정 장치의 제어부는 기준선을 기초로 제1 이미지(101), 제2 이미지(102), 및 제3 이미지(103)를 이어 붙여 작물에 대한 파노라마 이미지를 획득할 수 있다. 상기 기준선은 작물의 원줄기일 수 있다.The controller of the measuring device may acquire a panoramic image of the crop by connecting the first image 101 , the second image 102 , and the third image 103 based on the reference line. The baseline may be the original stem of the crop.
측정 장치는 상기 작물 이미지(100)을 활용하여 과실 정보 및 잎 정보를 산출할 수 있다. 이하에서는 도 7 및 도 8을 활용하여 측정 장치에서 과실 정보를 출력하여, 서버에서 이를 바탕으로 싱크 용량 및 소스 용량을 판단하는 방법을 설명하도록 한다. The measuring device may calculate fruit information and leaf information by using the crop image 100 . Hereinafter, a method of outputting error information from the measuring device and determining the sink capacity and the source capacity based on the output error information in the measurement device will be described using FIGS. 7 and 8 .
도 7은 일 실시 예에 따른 과실에 기초한 싱크 용량을 산출하는 방법에 관한 순서도이고, 도 8은 측정 장치에서 작물의 과실을 특정하는 방법을 설명하기 위한 도면이다. 7 is a flowchart of a method of calculating a sink capacity based on fruit according to an exemplary embodiment, and FIG. 8 is a diagram for explaining a method of specifying a fruit of a crop by a measuring device.
도 7을 참조하면, 싱크 용량을 산출하는 방법은 측정 장치에 의해 획득된 이미지가 제어부로 입력되는 단계(S201), 제어부가 상기 이미지를 기초로 작물 및 과실을 특정하는 단계(S202), 제어부가 상기 과실에 대한 위치 정보를 출력하여, 서버로 전달하는 단계(S203), 제어부가 상기 과실에 대한 크기 정보를 출력하여, 서버로 전달하는 단계(S204), 제어부가 상기 과실에 대한 숙성도 정보를 출력하여, 서버로 전달하는 단계(S205), 상기 위치에 대해서 서버가 위치 가중치를 로딩 하는 단계(S206), 상기 크기에 대해서 서버가 크기 가중치를 로딩 하는 단계(S207), 상기 숙성도에 대해서 서버가 숙성도 가중치를 로딩 하는 단계(S208), 서버가 위치 가중치, 크기 가중치, 숙성도 가중치를 기초로 특정 과실의 싱크 용량을 산출하는 단계(S209), 서버가 상기 싱크 가중치를 기초로 작물 싱크 용량을 출력하는 단계(S210), 및 서버가 상기 작물 싱크 용량을 기초로 전체 싱크 용량을 출력하는 단계(S211)를 포함할 수 있다. Referring to FIG. 7 , the method for calculating the sink capacity includes a step of inputting an image obtained by a measuring device to the controller (S201), a step of the controller specifying crops and fruits based on the image (S202), and the controller The step of outputting the location information on the fruit and transmitting it to the server (S203), the step of the controller outputting the size information of the fruit and sending it to the server (S204), the controller providing the ripeness information about the fruit The step of outputting and delivering to the server (S205), the step of loading the location weight by the server for the location (S206), the step of loading the size weight by the server for the size (S207), the server for the maturity level Loading the maturity weight (S208), the server calculating the sink capacity of a specific fruit based on the location weight, the size weight, and the maturity weight (S209), the server calculating the sink capacity of the crop based on the sink weight It may include outputting (S210), and the server outputting the total sink capacity based on the crop sink capacity (S211).
측정 장치의 제어부는 작물의 과실 및 잎을 포함하는 이미지를 획득할 수 있다. (S201)The controller of the measuring device may acquire an image including fruits and leaves of a crop. (S201)
상기 이미지는 측정 장치 내 이미지 획득부를 통해서 획득될 수 있다. 획득된 이미지는 상기 측정 장치 내 제어부로 전달될 수 있다.The image may be acquired through an image acquisition unit in the measurement device. The acquired image may be transmitted to a control unit in the measurement device.
상기 이미지는 다수의 작물이 촬영된 이미지일 수 있다.The image may be an image in which a plurality of crops are photographed.
측정 장치는 이미지에 기초하여 작물 및 과실을 특정할 수 있다. (S202)The measuring device may specify crops and fruits based on the images. (S202)
측정 장치는 상기 이미지가 포함하는 복수의 작물에 대해서 하나의 작물을 특정하고 상기 작물이 포함하는 복수의 과실에 대해서 하나의 과실을 특정할 수 있다. 또한, 상기 작물이 포함하는 복수의 잎에 대해서 하나의 잎을 특정할 수 있다. 이러한 특정은 측정 장치 내 제어부가 포함하는 인공신경망을 활용할 수 있다.The measuring device may specify one crop with respect to a plurality of crops included in the image and may specify one fruit with respect to a plurality of fruits included in the crop. In addition, one leaf may be specified for a plurality of leaves included in the crop. This specification may utilize an artificial neural network included in the control unit in the measurement device.
측정장치는 작물의 특징점에 기초하여 상기 이미지에 포함된 복수의 작물 중 하나의 작물을 특정할 수 있다. 상기 특징점은 작물의 생장점일 수도 있고, 상기 특징점은 상기 작물의 위치를 고정하기 위한 견인줄일 수도 있다.The measuring device may specify one crop among a plurality of crops included in the image based on the characteristic points of the crop. The characteristic point may be a growth point of a crop, and the characteristic point may be a traction line for fixing the position of the crop.
측정 장치 내 제어부가 포함하는 인공신경망은 이미지를 통해서 학습할 수 있다. 학습된 인공신경망은 이미지가 입력되면, 상기 이미지에 대해서 특징을 추출하거나 상기 이미지가 포함하는 특정 오브젝트를 detecting 할 수 있다. The artificial neural network included in the control unit in the measurement device may learn from the image. When an image is input, the learned artificial neural network can extract features from the image or detect a specific object included in the image.
상기 인공신경망은 이미지를 통해 학습하고, 이미지에 대한 특징을 추출할 수 있는 기능을 가지는 모든 아키텍쳐를 포함할 수 있다. 예를 들어 상기 인공신경망은 CNN 기반의 알고리즘 모델을 포함할 수 있다. The artificial neural network may include all architectures having a function of learning from an image and extracting a feature from the image. For example, the artificial neural network may include a CNN-based algorithm model.
측정 장치 내 인공신경망을 활용하여 과실과 잎을 특정하는 방법은 도 8을 통해서 상술하도록 한다. A method of specifying a fruit and a leaf using an artificial neural network in the measurement device will be described in detail with reference to FIG. 8 .
도 8을 참조하면, 인공신경망은 작물 이미지(a)를 통해 학습할 수 있다. 상기 작물 이미지(a)는 적어도 하나 이상의 과실과 적어도 하나 이상의 잎을 포함할 수 있다. 상기 작물 이미지(a)는 측정 장치가 실시간으로 획득한 작물 이미지이거나 또는 저장부에 저장된 작물 이미지일 수 있다. Referring to FIG. 8 , the artificial neural network may learn from a crop image (a). The crop image (a) may include at least one fruit and at least one leaf. The crop image (a) may be a crop image acquired in real time by the measuring device or a crop image stored in a storage unit.
인공신경망은 (a)와 같은 작물 이미지를 입력받아 과실을 인식할 수 있다. 인공신경망이 과실을 인식하여 출력된 결과는 작물 이미지(b)를 참조하여 확인할 수 있다. The artificial neural network can recognize the fruit by receiving the crop image as shown in (a). The output result of the artificial neural network recognizing the fruit can be confirmed by referring to the crop image (b).
인공신경망은 작물 이미지(b)와 같이, 과실이 있는 영역을 바운딩 박스 형태로 표시하여 출력할 수 있다. 상기 바운딩 박스 내부에는 과실이 위치할 수 있으며, 상기 바운딩 박스 각각에 대해서 과실 정보 벡터가 대응될 수 있다. The artificial neural network can display and output the area with fruit in the form of a bounding box, such as the crop image (b). A fruit may be located inside the bounding box, and a fruit information vector may correspond to each of the bounding boxes.
상기 과실 정보 벡터는 특정된 과실의 위치 정보, 크기 정보 및 숙성도 정보를 포함할 수 있다.The fruit information vector may include location information, size information, and ripeness information of the specified fruit.
상기 제어부는 과실 정보 벡터의 (X,Y) 좌표에 의해 특정된 과실의 위치 정보를 출력할 수 있다. (S203)The control unit may output the location information of the fruit specified by the (X,Y) coordinates of the fruit information vector. (S203)
예를 들어, 제1 바운딩 박스(104)는 제1 과실 정보 벡터(105)와 서로 대응될 수 있다. 상기 제1 바운딩 박스(104)와 제1 과실 정보 벡터(105)는 학습된 인공신경망을 통해서 출력된 결과값일 수 있다. 상기 제1 바운딩 박스(104)와 상기 제1 과실 정보 벡터(105)는 과실과 대응될 수 있다.For example, the first bounding box 104 may correspond to the first fruit information vector 105 . The first bounding box 104 and the first error information vector 105 may be result values output through the learned artificial neural network. The first bounding box 104 and the first fruit information vector 105 may correspond to a fruit.
상기 과실 정보 벡터(105)가 (X,Y,L,H)의 벡터 형태를 가지는 경우, (X,Y)는 바운딩 박스(104)의 위치를 나타낼 수 있다. 상기 과실 정보 벡터(105)에서의 (X,Y)는 입력된 이미지 내에서의 과실의 위치를 나타내는 좌표일 수 있다. 상기 (X,Y)는 바운딩 박스(104)의 가장 중심점의 위치 좌표 정보이거나 바운딩 박스의 일 꼭짓점의 위치 좌표 정보일 수 있다. When the fruit information vector 105 has a vector form of (X,Y,L,H), (X,Y) may indicate the position of the bounding box 104 . (X, Y) in the fruit information vector 105 may be coordinates indicating the location of the fruit in the input image. The (X,Y) may be location coordinate information of the most central point of the bounding box 104 or location coordinate information of one vertex of the bounding box.
상기 제어부는 상기 과실 정보 벡터(105) 및 이미지의 촬영 위치를 고려하여 상기 과실의 위치정보를 출력할 수 있다. 예를 들어, 상기 이미지의 촬영위치의 높이가 Y1인 경우 상기 제어부는 (X, Y+Y1)을 과실의 위치정보로 출력할 수 있다. The controller may output the location information of the fruit in consideration of the fruit information vector 105 and the photographing position of the image. For example, when the height of the photographing position of the image is Y1, the controller may output (X, Y+Y1) as the location information of the fruit.
상기 이미지의 촬영 위치는 작물의 특정 위치를 기초로 산출될 수 있다. 즉, 상기 이미지의 촬영 위치는 작물의 생장점을 기초로 산출될 수도 있고, 작물이 식재된 바닥면을 기준으로 산출될 수도 있다. 상기 이미지가 도 6과 같이 파노라마 이미지로 합성되는 경우 상기 파노라마 이미지에는 작물의 특정 위치를 포함하는 형태로 구성되므로, 파노라마 이미지에 기초하여 상기 이미지의 촬영 위치가 산출될 수 있다.The photographing position of the image may be calculated based on a specific position of the crop. That is, the photographing position of the image may be calculated based on the growth point of the crop, or may be calculated based on the bottom surface on which the crop is planted. When the image is synthesized into a panoramic image as shown in FIG. 6 , the panoramic image is configured in a form including a specific position of a crop, so a photographing position of the image may be calculated based on the panoramic image.
상기 제어부는 과실 정보 벡터의 (L,H) 좌표에 의해 특정된 과실의 크기 정보를 출력할 수 있다. (S203)The controller may output information on the size of the fruit specified by the (L,H) coordinates of the fruit information vector. (S203)
상기 과실 정보 벡터(105)가 (X,Y,L,H)의 벡터 형태를 가지는 경우, (L,H)는 바운딩 박스(104)의 크기를 나타낼 수 있다. L은 바운딩 박스(104)의 가로 일 변의 길이가, H는 바운딩 박스(104)의 세로 일 변의 길이를 뜻할 수 있다. When the fruit information vector 105 has a vector form of (X,Y,L,H), (L,H) may indicate the size of the bounding box 104 . L may represent the length of one horizontal side of the bounding box 104 , and H may represent the length of one vertical side of the bounding box 104 .
과실 정보 벡터의 L과 H를 통해 바운딩 박스(104)의 면적을 구할 수 있으며, 상기 면적은 과실 정보 벡터에 대응하는 과실의 크기와 대응될 수 있다. 예를 들어, 상기 면적에 따라 상기 과실 정보 벡터에 대응하는 과실의 크기를 산출할 수 있다.The area of the bounding box 104 may be obtained through L and H of the fruit information vector, and the area may correspond to the size of the fruit corresponding to the fruit information vector. For example, the size of the fruit corresponding to the fruit information vector may be calculated according to the area.
상기 크기 정보는 상기 특정된 과실의 크기에 관한 절대적인 수치 또는 다른 과실과 비교한 상대적인 수치에 관한 정보일 수 있다. 보다 구체적으로 상기 크기 정보는 상기 특정된 과실이 작물 이미지에서 차지하는 영역에 대한 넓이 정보일 수 있다. 즉, 측정 장치 내 제어부는 상기 특정된 과실이 작물 이미지에서 차지하는 영역이 넓을수록 상기 과실의 크기는 크다고 판단할 수 있다. 또는 상기 크기 정보는 상기 특정된 과실이 차지하는 영역의 픽셀 수에 대한 정보일 수 있다. 예를 들어 상기 특정된 과실이 차지하는 영역의 픽셀 수가 많을수록 대응되는 과실의 크기는 큰 것으로 판단할 수 있다. The size information may be information regarding an absolute value regarding the size of the specified fruit or a relative value compared with other fruits. More specifically, the size information may be area information about an area occupied by the specified fruit in the crop image. That is, the controller in the measuring device may determine that the larger the area occupied by the specified fruit in the crop image is, the larger the size of the fruit is. Alternatively, the size information may be information on the number of pixels in the area occupied by the specified fruit. For example, the larger the number of pixels in the area occupied by the specified fruit, the larger the size of the corresponding fruit may be determined.
상기 제어부는 과실 정보 벡터에 의해 특정된 과실의 숙성도 정보를 출력할 수 있다. (S203)The control unit may output ripeness information of the fruit specified by the fruit information vector. (S203)
상기 과실 정보 벡터(105)가 (X,Y,L,H, 1)의 벡터 형태를 가지는 경우, (X,Y,L,H)를 제외한 1은 과실 숙성도에 관한 정보일 수 있다. When the fruit information vector 105 has a vector form of (X, Y, L, H, 1), 1 excluding (X, Y, L, H) may be information on fruit ripeness.
과실 숙성도에 관한 정보는 "제1 숙성도", "제2 숙성도" 및 "제3 숙성도"로 분류한 데이터일 수 있다. 과실 숙성도에 관한 정보는 "제1 숙성도"에 대응되는 경우 0의 라벨링 데이터로 구현될 수 있다. 나아가 "제2 숙성도"에 대응되는 경우 1의 라벨링 데이터로 구현될 수 있다. "제3 숙성도"에 대응하는 경우에는 2의 라벨링 데이터로 구현될 수 있다. Information on fruit ripeness may be data classified into "first ripeness", "second ripeness", and "third ripeness". Information on fruit ripeness may be implemented as 0 labeling data when corresponding to "first ripeness". Furthermore, if it corresponds to the "second ripeness", it may be implemented with labeling data of 1. If it corresponds to the "third degree of maturity", it may be implemented with labeling data of 2.
과실의 숙성도를 3가지 이상의 클래스로 분류하는 것은 각 클래스에 대응되는 과실의 색상에 따라 결정될 수 있다. Classifying the ripeness of fruit into three or more classes may be determined according to the color of the fruit corresponding to each class.
예를 들어, "제1 숙성도"에 대응하는 과실의 색상과 "제2 숙성도"에 대응하는 과실의 색상, "제3 숙성도"에 대응하는 과실의 색상은 과실이 착과된 후 과실이 가질 수 있는 여러 색상 중에 하나일 수 있다. For example, the color of the fruit corresponding to the "first ripeness", the color of the fruit corresponding to the "second ripening degree", and the color of the fruit corresponding to the "third ripening degree" are the colors of the fruit after the fruit is ripe. It can be one of several possible colors.
보다 구체적으로, "제1 숙성도"에 대응하는 과실은 "제2 숙성도"에 대응하는 과실 보다 착과된 시점을 기준으로 시간이 더 지속된 경우에 해당할 수 있다. "제3 숙성도"에 대응하는 과실은 "제2 숙성도"에 대응하는 과실 보다 착과된 시점을 기준으로 시간이 더 지속된 경우에 해당할 수 있다. 즉 "제1 숙성도"에 대응하는 과실과 "제2 숙성도"에 대응하는 과실, 및 "제3 숙성도에 대응하는 과실"의 착과된 시점이 동일하다면, "제1 숙성도"에 대응하는 과실, "제2 숙성도"에 대응하는 과실. "제3 숙성도"에 대응하는 과실 순서대로 착과된 시점을 기준으로 더 오래된 경우일 수 있다.More specifically, the fruit corresponding to the “first degree of maturity” may correspond to a case in which the time is longer based on the time of ripening than the fruit corresponding to the “second degree of maturity”. The fruit corresponding to the “third degree of ripeness” may correspond to a case in which the time has continued longer than the fruit corresponding to the “second degree of ripeness” based on the time of ripening. That is, if the fruit corresponding to the "first ripening degree", the fruit corresponding to the "second ripening degree", and the "fruit corresponding to the third ripening degree" are the same, it corresponds to the "first ripening degree" A fruit that corresponds to the "second ripening degree". It may be an older case based on the time of fruiting in the order of the fruit corresponding to the "third degree of ripeness".
상기 숙성도 정보는 상기 특정된 과실의 숙성 정도에 관한 절대적인 수치 또는 다른 과실과 비교한 상대적인 수치에 관한 정보일 수 있다. 보다 구체적으로, 상기 숙성도 정보는 상기 특정된 과실이 차지하는 영역의 색상 정보를 기초하여 판단될 수 있다. 예를 들어, 서버는 상기 특정된 과실이 차지하는 영역의 색상을 기준 색상과 비교하여 제1 숙성도, 제2 숙성도 및 제3 숙성도를 판단할 수 있다. The ripeness information may be information about an absolute value regarding the ripening degree of the specified fruit or a relative value compared with other fruits. More specifically, the ripeness information may be determined based on color information of an area occupied by the specified fruit. For example, the server may determine the first degree of ripeness, the second degree of ripeness, and the third degree of ripeness by comparing the color of the region occupied by the specified fruit with the reference color.
또는, 상기 특정된 과실이 차지하는 영역을 RGB(Red, Green, Blue) Color Histogram으로 도식화하는 방법을 활용할 수도 있다. 보다 구체적으로, 서버는 상기 특정된 과실이 차지하는 영역을 RGB Color Histogram으로 도식화하고, 상기 영역에서 Red Color를 가지는 픽셀 수를 산출할 수 있다. 상기 산출된 Red Color 픽셀 수를 기초로 제1 숙성도, 제2 숙성도, 제3 숙성도를 판단할 수 있다. 예를 들어, 서버는 Red Color 픽셀 수가 많을수록 더 큰 숙성도를 가지는 것으로 판단할 수 있다. Alternatively, a method of plotting the area occupied by the specified fruit as an RGB (Red, Green, Blue) color histogram may be used. More specifically, the server may graph the area occupied by the specified fruit as an RGB color histogram, and calculate the number of pixels having a red color in the area. Based on the calculated number of red color pixels, the first ripening level, the second ripening level, and the third ripening level may be determined. For example, the server may determine that the greater the number of Red Color pixels, the greater the maturity level.
따라서, 과실 정보 벡터(105)가 (X,Y,L,H, 1)인 경우, 상기 과실 정보 벡터(105)와 대응되는 과실은 과실 숙성도가 1 라벨링 데이터에 대응되는 제2 숙성도를 가지는 것을 의미할 수 있다.Accordingly, when the fruit information vector 105 is (X, Y, L, H, 1), the fruit corresponding to the fruit information vector 105 has a fruit ripening degree of 1 and a second ripening degree corresponding to the labeling data. It can mean to have
서버는 측정 장치에서 전달받은 과실 정보를 기초로 가중치를 로딩할 수 있다. 상기 과실 정보는 과실의 위치 정보, 크기 정보, 숙성도 정보 중 적어도 하나를 포함할 수 있다. The server may load the weights based on the error information received from the measurement device. The fruit information may include at least one of location information, size information, and ripeness information of the fruit.
서버는 특정된 과실의 위치 정보를 기초로 위치 가중치를 로딩할 수 있다. (S206) The server may load the location weight based on the location information of the specified error. (S206)
서버는 상기 과실이 작물에서 위치하는 영역의 위치를 기초하여 상기 위치 가중치를 설정할 수 있다. The server may set the position weight based on the position of the region where the fruit is located in the crop.
측정 장치에서 판단한 과실의 위치 정보는 제1 위치 정보 또는 제2 위치 정보일 수 있다. 측정 장치에서 판단한 과실의 위치정보가 제1 위치 정보인 경우 상기 서버는 제1 위치 가중치를 로딩할 수 있으며, 제2 위치 정보인 경우 상기 서버는 제2 위치 가중치를 로딩할 수 있다. The location information of the fruit determined by the measuring device may be first location information or second location information. If the location information of the fruit determined by the measuring device is the first location information, the server may load the first location weight, and if the location information is the second location information, the server may load the second location weight.
상기 위치 정보가 지면으로부터 특정된 과실이 위치하고 있는 영역까지의 높이에 대한 정보인 경우 제1 위치정보가 제2 위치정보보다 크면, 제1 위치 가중치는 제2 위치 가중치보다 높은 값을 가질 수 있다. If the first location information is greater than the second location information when the location information is information on the height from the ground to the area where the specified fruit is located, the first location weight may have a higher value than the second location weight.
상기 위치 정보가 상기 특정된 과실이 위치하고 있는 영역으로부터 작물의 특징점까지의 거리인 경우 제1 위치 정보가 제2 위치 정보가 더 큰 경우, 제1 위치 가중치는 제2 위치 가중치보다 낮은 값일 수 있다. 다시 말해, 상기 서버는 최근에 착과된 과실일 수록 높은 가중치를 설정할 수 있다. 과실이 착과된 후 초기 단계에서 보다 많은 양분을 소비할 수 있으므로, 과실이 위치하는 높이에 따라 다른 가중치를 설정함으로써, 보다 정확한 싱크 용량이 산출될 수 있다.When the location information is a distance from an area in which the specified fruit is located to a feature point of a crop, when the first location information is greater than the second location information, the first location weight may be lower than the second location weight. In other words, the server may set a higher weight for the most recently acquired fruit. Since more nutrients can be consumed in the initial stage after the fruit has arrived, a more accurate sink capacity can be calculated by setting different weights according to the height at which the fruit is located.
서버는 특정된 과실의 크기 정보를 기초로 크기 가중치를 로딩할 수 있다. (S204)The server may load the size weight based on the size information of the specified fruit. (S204)
서버는 상기 과실의 크기에 기초하여 상기 크기 가중치를 설정할 수 있다. The server may set the size weight based on the size of the fruit.
측정 장치에서 판단한 과실의 크기 정보는 제1 크기 정보 및 제2 크기 정보를 포함할 수 있다. 서버는 특정된 과실이 제1 크기 정보를 가지는 경우 제1 크기 가중치를 로딩할 수 있고, 제2 크기 정보를 가지는 경우 제2 크기 가중치를 로딩할 수 있다. The fruit size information determined by the measuring device may include first size information and second size information. The server may load the first size weight when the specified fruit has the first size information, and load the second size weight when the specified fruit has the second size information.
상기 크기 정보가 특정된 과실이 작물 이미지에서 차지하는 영역에 대한 넓이 정보인 경우에 제1 크기 정보가 제2 크기 정보 보다 더 큰 경우, 제1 크기 가중치는 제2 크기 가중치보다 작은 값일 수 있다. When the first size information is larger than the second size information in the case where the size information is area information on an area occupied by the specified fruit in the crop image, the first size weight may be smaller than the second size weight.
또는. 상기 크기 정보가 상기 특정된 과실이 작물 이미지에서 차지하는 영역에 대한 픽셀 수 정보인 경우에 제1 크기 정보가 제2 크기 정보 보다 더 큰 경우, 제1 크기 가중치는 제2 크기 가중치보다 작은 값일 수 있다.or. When the size information is pixel number information for an area occupied by the specified fruit in the crop image, when the first size information is larger than the second size information, the first size weight may be a value smaller than the second size weight .
즉, 상기 서버는 과실의 크기가 작은 경우 높은 가중치를 설정할 수 있다. 과실의 크기가 작을수록 생장을 위해 더 많은 양분을 소비할 수 있으므로, 과실의 크기에 따라 서로 다른 가중치를 설정함으로써 보다 정확한 싱크 용량이 산출될 수 있다. That is, the server may set a high weight when the size of the fruit is small. Since a smaller fruit size can consume more nutrients for growth, a more accurate sink capacity can be calculated by setting different weights according to the fruit size.
서버는 특정된 과실의 숙성도 정보를 기초로 숙성도 가중치를 로딩할 수 있다. (S205)The server may load the ripeness weight based on the maturity information of the specified fruit. (S205)
서버는 상기 과실의 숙성도에 기초하여 상기 숙성도 가중치를 설정할 수 있다. The server may set the ripening level weight based on the ripening level of the fruit.
예를 들어, 측정 장치에서 판단한 과실의 숙성도 정보는 제1 숙성도 정보 또는 제2 숙성도 정보일 수 있다. 상기 서버는 특정된 과실의 숙성도 정보가 제1 숙성도 정보인 경우 제1 숙성도 가중치를 로딩할 수 있고, 제2 숙성도 정보인 경우 제2 숙성도 가중치를 로딩할 수 있다. For example, the ripening level information of the fruit determined by the measuring device may be the first ripening level information or the second ripening level information. The server may load the first ripeness weight when the ripeness information of the specified fruit is the first ripeness information, and load the second ripeness weight when the ripeness information is the second ripeness information.
상기 숙성도 정보는 상기 특정된 과실이 차지하는 영역의 색상 정보를 기초하여 판단되고, 상기 제1 숙성도 정보가 제2 숙성도 정보 보다 더 높은 경우, 제1 숙성도 가중치는 제2 숙성도 가중치보다 높은 값일 수 있다. The ripeness information is determined based on the color information of the region occupied by the specified fruit, and when the first ripeness information is higher than the second ripeness information, the first maturity level weight is higher than the second ripeness level weight. It can be a high value.
즉, 상기 서버는 과실의 숙성도가 높은 경우 과실의 숙성도가 낮은 경우에 비해 보다 많은 양분을 소비할 수 있으므로, 과실의 숙성도에 따라 서로 다른 과중치를 설정함으로써 보다 정확한 싱크 용량이 산출될 수 있다.That is, the server can consume more nutrients when the ripeness of the fruit is high compared to when the ripeness of the fruit is low. have.
또는 제1 숙성도 정보가 제2 숙성도 정보보다 높은 경우 제1 숙성도 가중치는 제2 숙성도 가중치보다 낮은 값일 수도 있다.Alternatively, when the first maturity level information is higher than the second maturity level information, the first maturity level weight may be a value lower than the second maturity level weight value.
또한, 상기 서버는 상기 과실의 숙성도에 따라 동일한 가중치를 로딩할 수도 있다.Also, the server may load the same weight according to the ripeness of the fruit.
서버는 상기 특정된 과실에 대한 위치 가중치, 크기 가중치 및 숙성도 가중치에 기초하여 특정된 과실의 싱크 용량을 산출할 수 있다. (S209)The server may calculate the sink capacity of the specified fruit based on the location weight, the size weight, and the ripeness weight for the specified fruit. (S209)
서버는 상기 특정된 과실에 대한 위치 가중치, 크기 가중치 및 숙성도 가중치를 일정 비율로 적용하여 특정된 과실의 싱크 용량을 산출할 수 있다. 특정된 과실의 싱크 용량은 하나의 특정된 과실이 소비하는 양분을 나타낼 수 있다. 상기 일정한 비율은 사용자가 임의로 설정한 비율일 수 있다. The server may calculate the sink capacity of the specified fruit by applying the location weight, the size weight, and the maturity weight to the specified fruit at a predetermined ratio. The sink capacity of a specified fruit may represent the nutrients consumed by one specified fruit. The constant ratio may be a ratio arbitrarily set by a user.
서버는 상기 과실 각각에 대한 싱크 가중치를 기초로 작물에 대한 싱크 용량을 산출할 수 있다. (S210)The server may calculate the sink capacity for the crop based on the sink weight for each of the fruits. (S210)
서버는 특정된 작물에 착과된 복수의 과실 각각에 대한 싱크용량을 산출할 수 있다. 상기 서버는 특정된 작물에 착과된 복수의 과실의 싱크용량을 합산하여 특정된 작물에 대한 싱크 용량을 산출할 수 있다. The server may calculate a sink capacity for each of a plurality of fruits that have been harvested on a specified crop. The server may calculate the sink capacity for the specified crop by adding up the sink capacities of a plurality of fruits that have been harvested on the specified crop.
서버는 전체 싱크 용량을 산출할 수 있다. (S211)The server can calculate the total sink capacity. (S211)
서버는 다수의 작물의 싱크용량에 기초하여 전체 싱크 용량을 산출할 수 있다. 서버는 다수의 작물의 싱크용량을 합산하여 전체 싱크 용량을 산출할 수 있다.The server may calculate the total sink capacity based on the sink capacity of a plurality of crops. The server can calculate the total sink capacity by adding up the sink capacity of multiple crops.
이 때, 서버는 복수의 이미지에 포함된 동일한 작물에 대한 중복 합산을 방지하기 위하여 복수의 이미지에 포함된 동일한 작물을 판단하며, 판단된 동일한 작물에 대하여 싱크 용량을 중복 합산하지 않을 수 있다.In this case, the server may determine the same crop included in the plurality of images to prevent overlapping summing of the same crop included in the plurality of images, and may not overlap the sink capacity for the determined same crop.
상기 전체 싱크 용량은 온실 내 전체 싱크 용량을 의미하거나 특정 영역에 대한 전체 싱크 용량일 수 있다. 예를 들어, 상기 특정 영역이 온실 내의 대표성을 가지는 영역인 경우, 상기 특정 영역에 위치하는 다수의 작물의 싱크용량을 산출함으로써 온실 내 전체 작물의 양분의 소비량을 산출할 수 있다.The total sink capacity may mean the total sink capacity in the greenhouse or may be the total sink capacity for a specific area. For example, when the specific area is a representative area in the greenhouse, the nutrient consumption of all crops in the greenhouse may be calculated by calculating the sink capacity of a plurality of crops located in the specific area.
특정 작물이 온실내의 대표성을 가지는 작물이 경우 상기 서버는 전체 싱크 용량을 산출하는 과정을 생략될 수도 있다. 즉, 상기 서버는 대표성을 가지는 하나의 작물의 싱크용량을 산출함으로써 온실내 전체 영역의 싱크용량을 도출할 수 있다.If a specific crop is a representative crop in the greenhouse, the server may omit the process of calculating the total sink capacity. That is, the server can derive the sink capacity of the entire area in the greenhouse by calculating the sink capacity of one crop having representativeness.
이하에서는 작물의 잎 정보를 통하여 싱크 용량 및 소스 용량을 산출하는 방법에 대해서 설명하도록 한다. Hereinafter, a method of calculating the sink capacity and the source capacity through the leaf information of the crop will be described.
도 9는 일 실시 예에 따른 잎 정보를 기초로 싱크 용량 및 소스 용량을 산출하는 방법에 관한 순서도이다. 도 10은 일 실시 예에 따른 이미지로부터 작물의 잎에 대한 정보를 산출하는 과정을 설명하기 위한 도면이다.9 is a flowchart illustrating a method of calculating a sink capacity and a source capacity based on leaf information according to an embodiment. 10 is a diagram for explaining a process of calculating information on leaves of a crop from an image according to an exemplary embodiment.
도 9을 참조하면, 작물의 잎 정보를 기초로 싱크 용량 및 소스 용량을 산출하는 방법은 측정 장치에 의해 획득된 이미지가 제어부로 입력되는 단계(S301), 제어부가 상기 이미지를 기초로 작물 및 잎을 특정하는 단계(S302), 제어부가 상기 잎에 대한 위치 정보를 산출하는 단계(S303), 상기 위치 정보에 기초하여 서버가 특정 잎의 높이와 기준높이를 비교하는 단계 (S304), 상기 특정 잎의 높이가 기준 높이보다 큰 경우 소스 용량을 산출하는 단계(S305), 상기 특정 잎의 높이가 기준 높이보다 작은 경우 싱크 용량을 산출하는 단계(S306), 상기 특정 잎에 대한 싱크 용량 및 소스 용량을 기초로 전체 싱크 용량 및 소스 용량을 산출하는 단계(S307)를 포함할 수 있다. Referring to FIG. 9 , the method of calculating the sink capacity and the source capacity based on leaf information of a crop includes the step of inputting an image obtained by a measurement device to the control unit ( S301 ), and the control unit includes the crop and leaf based on the image. step of specifying (S302), the step of the control unit calculating the location information on the leaf (S303), the server comparing the height of the specific leaf with a reference height based on the location information (S304), the specific leaf Calculating the source capacity when the height of is greater than the reference height (S305), calculating the sink capacity when the height of the specific leaf is smaller than the reference height (S306), the sink capacity and the source capacity for the specific leaf It may include calculating the total sink capacity and the source capacity based on the step (S307).
측정 장치의 제어부는 작물의 과실 및 잎을 포함하는 이미지를 획득할 수 있다. (S301)The controller of the measuring device may acquire an image including fruits and leaves of a crop. (S301)
상기 이미지는 측정 장치 내 이미지 획득부를 통해서 획득될 수 있다. 획득된 이미지는 상기 측정 장치 내 제어부로 전달될 수 있다. The image may be acquired through an image acquisition unit in the measurement device. The acquired image may be transmitted to a control unit in the measurement device.
측정 장치의 제어부에는 도 10의 (a)와 같은 이미지가 입력될 수 있다.An image as shown in (a) of FIG. 10 may be input to the controller of the measuring device.
측정 장치의 제어부는 상기 이미지를 기초로 작물 및 잎을 특정할 수 있다.(S302)The control unit of the measuring device may specify crops and leaves based on the image. (S302)
측정 장치의 제어부가 작물을 특정하는 과정은 도 8과 동일하다.A process in which the control unit of the measuring device specifies the crop is the same as in FIG. 8 .
측정 장치의 제어부는 학습된 인공신경망을 포함하고, 상기 학습된 인공신경망은 작물 이미지에서 잎을 인식할 수 있다. 상기 학습된 인공신경망은 도 10의 (b)와 같은 형태로 잎을 특정하여 출력할 수 있다.The control unit of the measuring device may include a learned artificial neural network, and the learned artificial neural network may recognize a leaf from a crop image. The learned artificial neural network may output a specific leaf in the form as shown in FIG. 10(b).
상기 학습된 인공 신경망은 잎이 있는 영역을 바운딩 박스 형태로 표시하여 출력할 수 있다. 상기 바운딩 박스 내부에는 잎이 위치할 수 있으며, 상기 바운딩 박스 각각에 대해 잎 정보 벡터가 출력될 수 있다. 상기 잎 정보 벡터는 상기 바운딩 박스에 대응되어 출력될 수 있다.The learned artificial neural network may display and output the area with leaves in the form of a bounding box. A leaf may be positioned inside the bounding box, and a leaf information vector may be output for each of the bounding boxes. The leaf information vector may be output corresponding to the bounding box.
예를 들어, 제2 바운딩 박스(106)는 잎 정보 벡터(107)와 대응될 수 있다. 상기 제2 바운딩 박스(106)와 잎정보 벡터(107)는 학습된 인공 신경망을 통해서 출력될 수 있다.For example, the second bounding box 106 may correspond to the leaf information vector 107 . The second bounding box 106 and the leaf information vector 107 may be output through the learned artificial neural network.
상기 제어부는 잎 정보 벡터의 (X, Y) 좌표형태로 상기 잎 정보 벡터를 출력할 수 있다. 이 경우 상기 잎 정보 벡터는 특정 잎의 위치정보를 포함할 수 있다. (S303)The controller may output the leaf information vector in the form of (X, Y) coordinates of the leaf information vector. In this case, the leaf information vector may include location information of a specific leaf. (S303)
상기 잎 정보 벡터는 특정 잎의 크기정보를 더 포함할 수 있다.The leaf information vector may further include size information of a specific leaf.
상기 잎의 위치정보는 도 8에서 설명한 과실의 위치정보와 동일하므로 상세한 설명은 생략한다.Since the location information of the leaf is the same as the location information of the fruit described with reference to FIG. 8 , a detailed description thereof will be omitted.
상기 특정 잎의 위치정보는 바운딩 박스 형태로 표현되고, 상기 바운딩 박스의 일면은 주가지에서 곁가지가 시작되는 영역과 만날 수 있다. 즉, 상기 특정 잎은 주가지에서 뻗어나오는 부분을 모두 포함하는 영역일 수 있다.The location information of the specific leaf may be expressed in the form of a bounding box, and one surface of the bounding box may meet an area where a side branch starts from a main branch. That is, the specific leaf may be an area including all portions extending from the main branch.
서버는 상기 특정된 잎의 높이와 기준 높이를 비교할 수 있다. (S304)The server may compare the height of the specified leaf with the reference height. (S304)
상기 특정된 잎의 높이(H1)는 지면으로부터 잎이 위치하는 영역까지의 거리일 수 있다. 상기 특정된 잎의 높이(H1)는 지면으로부터 상기 제2 바운딩박스(104) 사이의 거리일 수도 있다. 또는 상기 특정된 잎의 높이(H1)는 상기 제2 바운딩박스(104) 내에 위치하는 하나의 점의 Y좌표일 수도 있다. 상기 특정된 잎의 높이(H1)는 잎정보벡터의 Y값에 기초하여 산출될 수도 있다. 또는 상기 특정된 잎의 높이(H1)는 상기 제2 바운딩 박스의 중심점의 Y값에 기초하여 산출될 수도 있다.The specified leaf height H1 may be a distance from the ground to an area where the leaf is located. The specified leaf height H1 may be a distance between the second bounding box 104 from the ground. Alternatively, the specified leaf height H1 may be the Y coordinate of one point located in the second bounding box 104 . The specified leaf height H1 may be calculated based on the Y value of the leaf information vector. Alternatively, the specified leaf height H1 may be calculated based on the Y value of the center point of the second bounding box.
상기 특정된 잎의 높이(H1)는 화방으로 특정될 수도 있다.The height H1 of the specified leaf may be specified as a flower room.
상기 작물이 화방을 가지며 생장하는 작물인 경우 상기 작물의 잎의 높이는 화방으로 정의될 수도 있다. 즉, 작물이 생장함에 따라 다수의 화방으로부터 곁가지가 자라나므로, 상기 잎이 위치하는 화방이 몇 번째 화방인지를 특정하는 경우 상기 작물의 잎의 높이가 정의될 수도 있다. When the crop is a crop that has a flower room and grows, the height of the leaf of the crop may be defined as the flower room. That is, since side branches grow from a plurality of flower rooms as the crop grows, the height of the leaves of the crop may be defined when specifying the number of flower rooms in which the leaves are located.
상기 기준 높이(Hth)는 서버에 미리 저장된 값일 수 있다. 상기 기준 높이(Hth)는 미리 정해진 값일 수도 있고, 작물의 전체 높이에 따라 변경되는 값일 수도 있다.The reference height Hth may be a value previously stored in the server. The reference height Hth may be a predetermined value or a value that is changed according to the total height of the crop.
상기 기준 높이(Hth) 또한 화방으로 정의될 수도 있다. 즉, 상기 기준 높이(Hth)는 예를 들어, 제5화방으로 정의될 수 있다.The reference height Hth may also be defined as a painting room. That is, the reference height Hth may be defined as, for example, the fifth room.
서버는 상기 특정된 잎의 높이와 기준 높이를 비교하여 결과 값을 출력할 수 있다.The server may output a result value by comparing the height of the specified leaf with the reference height.
서버는 상기 특정된 잎의 높이와 기준 높이의 비교 결과에 따라 특정된 잎을 소스로 판단할 수도 있고, 싱크로 판단할 수도 있다. 상기 서버는 상기 특정된 잎의 높이가 기준 높이보다 큰 경우 특정된 잎을 소스로 판단할 수 있고, 상기 특정된 잎의 높이가 기준 높이보다 작은 경우 특정된 잎을 싱크로 판단할 수 있다.The server may determine the specified leaf as the source or the sink according to a result of comparing the specified height of the leaf with the reference height. The server may determine the specified leaf as the source if the height of the specified leaf is greater than the reference height, and may determine the specified leaf as the sink if the height of the specified leaf is less than the reference height.
상기 잎의 높이와 기준 높이가 화방으로 특정되는 경우 상기 특정된 잎의 화방이 상기 기준 화방보다 높은 값을 가지면 상기 서버는 상기 특정된 잎을 소스로 판단할 수 있고, 상기 특정된 잎의 화방이 상기 기준 화방보다 낮은 값을 가지면 상기 서버는 특정된 잎을 싱크로 판단할 수도 있다.When the height of the leaf and the reference height are specified as a flower room, if the specified leaf flower room has a higher value than the reference flower room, the server may determine the specified leaf as a source, and the specified leaf flower room is If it has a lower value than the reference room, the server may determine the specified leaf as a synchro.
예를 들어, 기준 화방이 제5화방이고, 특정된 잎의 화방이 제7화방인 경우 상기 서버는 상기 특정된 잎을 소스로 판단할 수 있다. 또한, 기준 화방이 제5화방이고, 특정된 잎의 화방이 제3 화방인 경우 상기 서버는 상기 특정된 잎을 싱크로 판단할 수 있다.For example, if the reference room is the 5th room and the specified leaf is the 7th room, the server may determine the specified leaf as the source. In addition, when the reference painting room is the 5th painting room and the specified leaf painting room is the 3rd painting room, the server may determine the specified leaf as a synchro.
서버는 상기 잎의 높이와 기준 높이를 비교하여, 특정된 잎이 소스로 판단되는 경우 소스 용량을 산출할 수 있다. (S305)The server may compare the height of the leaf with the reference height, and calculate the source capacity when the specified leaf is determined as the source. (S305)
서버는 특정된 잎의 높이에 따라 서로 다른 소스 가중치를 부여할 수도 있다. 상기 서버는 잎의 높이가 높을수록 높은 소스 가중치를 부여하여 특정된 잎의 소스 용량을 산출할 수 있다. 지면으로부터 높은 위치에 위치하는 잎의 경우 다른 작물의 부분에 의해 가려지는 부분이 상대적으로 작아 상대적으로 광합성 생산량이 많아질 수 있으므로, 잎의 높이에 따라 서로 다른 소스 가중치를 부여함으로써 작물의 생산량에 부합하도록 소스용량이 산출될 수 있다.The server may assign different source weights according to the specified leaf height. The server may calculate the source capacity of the specified leaf by giving a higher source weight as the height of the leaf increases. In the case of a leaf located at a high position from the ground, the portion covered by other crops is relatively small, so photosynthetic production can be relatively high. The source capacity may be calculated to do so.
서버는 잎의 크기에 따라 서로 다른 소스 가중치를 부여할 수도 있다. 상기 서버는 잎의 크기가 클수록 높은 소스 가중치를 부여하여 특정된 잎의 소스 용량을 산출할 수 있다. 잎의 크기가 상대적으로 큰 경우 광합성 생산량이 많아질 수 있으므로, 잎의 크기에 따라 서로 다른 소스 가중치를 부여함으로써 작물의 생산량에 부합하도록 소스용량이 산출될 수 있다.The server may assign different source weights according to the leaf size. The server may calculate the source capacity of the specified leaf by giving a higher source weight as the size of the leaf increases. When the size of the leaf is relatively large, the photosynthetic production can be increased, so the source capacity can be calculated to match the production of the crop by giving different source weights according to the size of the leaf.
서버는 잎으로 특정된 영역에서의 실제 잎이 점유하는 면적에 따라 서로 다른 소스 가중치를 부여할 수도 있다. 예를 들어, 잎을 특정하는 제2 바운딩 박스(106)에서 잎이 점유하는 면적을 산출하여 실질적인 잎의 크기를 도출하여 소스 가중치를 부여할 수도 있다. 이 경우 제2 바운딩 박스(106)내의 녹색 픽셀의 개수를 카운팅함으로써 잎이 점유하는 면적을 산출할 수도 있다.The server may assign different source weights according to the area occupied by the actual leaf in the area specified as the leaf. For example, by calculating the area occupied by the leaf in the second bounding box 106 specifying the leaf, the actual size of the leaf may be derived and a source weight may be assigned. In this case, the area occupied by the leaf may be calculated by counting the number of green pixels in the second bounding box 106 .
서버는 잎의 높이와 기준 높이를 비교하여, 특정된 잎이 싱크로 판단되는 경우 싱크 용량을 산출할 수 있다. (S306)The server may compare the height of the leaf with the reference height, and calculate the sink capacity when it is determined that the specified leaf is the sink. (S306)
서버는 잎의 높이에 따라 서로 다른 싱크 가중치를 부여할 수도 있다. 상기 서버는 잎의 높이가 낮을수록 높은 싱크 가중치를 부여하여 작물의 소비량에 부합하도록 싱크용량을 산출할 수 있다.The server may give different sink weights according to the height of the leaves. The server may calculate the sink capacity to match the consumption of the crop by giving a sink weight higher as the height of the leaf is lower.
서버는 잎의 크기에 따라 서로 다른 싱크 가중치를 부여할 수도 있다. 상기 서버는 잎의 크기가 클수록 높은 싱크 가중치를 부여하여 작물의 소비량에 부합하도록 싱크용량을 산출할 수 있다.The server may give different sink weights according to the size of the leaf. The server may calculate the sink capacity to match the consumption of crops by giving a higher sink weight as the size of the leaf increases.
서버는 잎으로 특정된 영역에서의 실제 잎이 점유하는 면적에 따라 서로 다른 싱크 가중치를 부여할 수도 있다.The server may give different sink weights according to the area occupied by the actual leaf in the area specified as the leaf.
또한, 서버는 잎의 상태에 따라 특정된 잎을 소스로 판단할 수 있고, 싱크로 판단할 수 있다. 작물의 잎은 기본적으로 양분을 생성하기 위한 소스로 기능할 수 있으나, 노화되어 양분을 제대로 생성하지 못하거나, 햇빛을 받지 못하는 잎의 경우 소스보다는 싱크로 작용될 수 있다.In addition, the server may determine the specified leaf according to the state of the leaf as the source and may determine it as the sink. The leaves of crops can basically function as a source for generating nutrients, but in the case of leaves that do not produce nutrients properly due to aging, or do not receive sunlight, they may act as a sink rather than a source.
따라서, 서버는 잎에 대한 픽셀 값들을 기초로 특정된 잎이 소스인지 싱크인지 판단할 수 있다.Accordingly, the server may determine whether the specified leaf is a source or a sink based on the pixel values for the leaf.
예를 들어, 상기 서버는 잎의 색이 특정 색 기준 값을 벗어나는 경우 특정된 잎을 싱크로 판단할 수 있다.For example, when the color of the leaf deviates from a specific color reference value, the server may determine the specified leaf as a synchro.
보다 구체적인 예를 들어, 상기 서버는 잎의 색이 초록색 기준 값을 벗어나는 경우 특정된 잎을 싱크로 판단할 수 있으나, 이에 한정되지 않는다.As a more specific example, when the color of the leaf is out of the green reference value, the server may determine the specified leaf as a sync, but is not limited thereto.
또한, 예를 들어, 상기 서버는 잎의 색이 특정 색 기준 값 범위에 포함되는 경우 특정 잎을 싱크로 판단할 수 있다.Also, for example, when the color of a leaf is included in a specific color reference value range, the server may determine a specific leaf as a synch.
보다 구체적인 예를 들어, 상기 서버는 잎의 색이 노란색 기준 값 이내에 포함되는 경우 특정된 잎을 싱크로 판단할 수 있으나, 이에 한정되지 않는다.As a more specific example, when the color of the leaf is included within the yellow reference value, the server may determine the specified leaf as a sync, but is not limited thereto.
또한, 작물의 잎은 작을 때는 생장을 위해서 에너지를 이용하여 싱크로 작용될 수 있으므로, 서버는 잎의 크기를 기초로 특정된 잎이 소스인지 싱크인지 판단할 수 있다.In addition, when the leaves of a crop are small, they can act as a sink using energy for growth, so the server can determine whether the specified leaf is a source or a sink based on the size of the leaf.
예를 들어, 상기 서버는 잎의 크기가 기준 크기 이하인 경우 특정된 잎을 싱크로 판단할 수 있으나, 이에 한정되지 않는다.서버는 작물 전체의 싱크 및 소스 용량을 산출할 수 있다. (S307)For example, the server may determine the specified leaf as a sink when the leaf size is less than or equal to the reference size, but is not limited thereto. The server may calculate the sink and source capacity of the entire crop. (S307)
서버는 특정 잎의 싱크 용량에 기초하여 작물 전체의 싱크 용량을 산출할 수 있고, 특정 잎의 소스 용량에 기초하여 작물 전체의 소스 용량을 산출할 수 있다. 다만, 작물 전체의 싱크 용량을 산출함에 있어서는 도 7에 기재된 과실의 싱크 용량을 함께 고려하여 산출할 수 있다.The server may calculate the sink capacity of the entire crop based on the sink capacity of the specific leaf, and may calculate the source capacity of the entire crop based on the source capacity of the specific leaf. However, when calculating the sink capacity of the entire crop, the sink capacity of the fruit described in FIG. 7 may be taken into consideration.
또한, 상기 서버는 하나의 작물의 싱크 및 소스 용량을 산출하여, 온실내 전체 작물의 싱크 용량 및 소스 용량을 산출할 수도 있다.In addition, the server may calculate the sink and source capacity of one crop, and calculate the sink capacity and source capacity of all crops in the greenhouse.
또는, 상기 서버는 하나의 작물을 대표 작물로 하여 온실내 싱크 용량 및 소스 용량을 하나의 작물을 통해 판단할 수도 있다.Alternatively, the server may use one crop as a representative crop to determine the sink capacity and the source capacity in the greenhouse through one crop.
서버는 상기 소스 용량 및 싱크 용량에 기초하여 온실 제어를 위한 메시지를 출력할 수 있다. 상기 서버는 싱크 용량이 소스 용량보다 큰 경우 상기 기준 높이보다 낮은 높이에 있는 잎을 제거하라는 메시지를 출력할 수 있다.The server may output a message for greenhouse control based on the source capacity and the sink capacity. When the sink capacity is greater than the source capacity, the server may output a message to remove the leaf at a height lower than the reference height.
상기 서버는 기준 높이보다 낮은 높이에 있는 잎을 제거하라는 메시지를 출력함으로써, 양분을 소비하는 역할만 하고 있는 잎을 제거하도록 하여 작물의 생장을 향상시킬 수 있고, 과실의 품질을 높일 수 있다. The server outputs a message to remove the leaves at a height lower than the reference height, thereby removing the leaves that only consume nutrients, thereby improving the growth of crops and improving the quality of fruits.
도 7 내지 도 9를 통해 기술한 내용들은 작물에 포함되는 다양한 특징들 중 과실과 잎을 기준으로 싱크용량 및 소스 용량을 판단하는 방법에 관한 내용들이다.The contents described through FIGS. 7 to 9 relate to a method of determining a sink capacity and a sauce capacity based on fruits and leaves among various characteristics included in crops.
다만, 도 7 내지 도 9를 통해 기술되지는 않았으나, 작물에 포함되는 다른 특징들을 기초로 싱크 용량 및 소스 용량이 판단될 수 있다.However, although not described with reference to FIGS. 7 to 9 , the sink capacity and the source capacity may be determined based on other characteristics included in the crop.
예를 들어, 작물에 포함되는 꽃에 관한 특징을 기초로 싱크 용량이 판단될 수 있으나, 이에 한정되지 않는다.For example, the sink capacity may be determined based on the characteristics of flowers included in the crop, but is not limited thereto.
또한, 예를 들어, 작물에 포함되는 봉우리에 관한 특징을 기초로 싱크 용량이 판단될 수 있으나, 이에 한정되지 않는다.Also, for example, the sink capacity may be determined based on the characteristics of the peak included in the crop, but is not limited thereto.
또한, 상기 꽃 또는 봉우리에 대한 감지는 상술한 과실 및 잎에 대하여 기술되었었던 내용들이 적용될 수 있으므로 중복되는 서술은 생략하기로 한다.In addition, since the contents described with respect to the above-described fruits and leaves may be applied to the detection of the flower or the bud, the overlapping description will be omitted.
또한, 상기 작물에 포함되는 꽃, 봉우리, 과실, 잎 등의 특징들에 대한 각각의 가중치들 및 연관관계는 아래에서 도 17을 활용하여 보다 구체적으로 기술하기로 한다.In addition, the respective weights and correlations with respect to features such as flowers, buds, fruits, and leaves included in the crop will be described in more detail using FIG. 17 below.
이하에서는 도 10 내지 도 12을 참조하여 상기 기준 위치에 관한 일 예에 대해서 보다 상세하게 설명하도록 한다. Hereinafter, an example of the reference position will be described in more detail with reference to FIGS. 10 to 12 .
도 11 및 도 12는 일 실시 예에 따른 기준 높이를 설명하기 위한 도면이다.11 and 12 are views for explaining a reference height according to an embodiment.
도 11은 작물의 높이에 따른 기준높이 설정을 나타내기 위한 도면이다.11 is a view for showing the reference height setting according to the height of the crop.
도 11을 참조하면, 서버는 작물의 높이에 따라 서로 다른 기준위치를 설정할 수 있다. 즉, 작물의 높이가 높아지면, 기준 높이 또한 높게 설정할 수 있다.Referring to FIG. 11 , the server may set different reference positions according to the height of the crop. That is, when the height of the crop is increased, the reference height may also be set high.
예를 들어, 제1 작물의 높이가 제1 높이(324a)인 경우 기준 높이(Hth)는 제1 기준 높이(324b)로 설정할 수 있고, 제2 작물의 높이가 제2 높이(325a)인 경우 기준 높이(Hth)는 제2 기준 높이(325b)로 설정할 수 있다. For example, when the height of the first crop is the first height 324a, the reference height Hth may be set as the first reference height 324b, and when the height of the second crop is the second height 325a The reference height Hth may be set as the second reference height 325b.
서버는 작물의 높이와 기준 높이를 동일한 비율로 설정할 수 있다.The server can set the height of the crop and the reference height in the same ratio.
예를 들어, 제1 높이(324a)와 제1 기준 높이(324b)사이의 비율을 제2 높이(325a)와 제2 기준 높이(325b) 사이의 비율과 동일하도록 설정할 수 있다. 상기 비율은 서버에서 미리 정의된 값일 수 있다.For example, the ratio between the first height 324a and the first reference height 324b may be set to be the same as the ratio between the second height 325a and the second reference height 325b. The ratio may be a value predefined in the server.
상기 작물의 높이는 작물의 부분 중 가장 높은 위치에 위치하는 부분과 지면 사이의 거리로 정의될 수 있다. 또는, 상기 작물의 높이는 작물의 생장점과 지면 사이의 거리로 정의될 수도 있다. 또한, 상기 작물의 높이는 작물의 생장을 가이드하기 위한 견인줄과 지면 사이의 거리로 정의될 수도 있다,The height of the crop may be defined as a distance between a part located at the highest position among parts of the crop and the ground. Alternatively, the height of the crop may be defined as the distance between the growth point of the crop and the ground. In addition, the height of the crop may be defined as the distance between the traction line and the ground for guiding the growth of the crop,
또한, 작물의 높이와 기준 높이는 지면이 아니라 온실 천장과의 거리에 의해서도 정의될 수 있다.In addition, the height of the crop and the reference height can be defined not only by the ground, but also by the distance from the greenhouse ceiling.
도 12는 작물의 높이에 따른 기준 높이 설정을 나타내기 위한 도면이다.12 is a view for showing the reference height setting according to the height of the crop.
도 12를 참조하면, 서버는 작물의 높이에 따라 서로 다른 기준 높이를 설정할 수 있다. 다만, 이 경우 작물의 높이와 기준 높이 사이의 거리는 동일하도록 설정될 수 있다.Referring to FIG. 12 , the server may set different reference heights according to the height of the crop. However, in this case, the distance between the height of the crop and the reference height may be set to be the same.
예를 들어, 제1 작물의 높이가 제1 높이(334a)인 경우 기준 높이(Hth)는 공통 기준 거리(334b)를 참조하여 설정될 수 있고, 제2 작물의 높이가 제2 높이(335a)인 경우 기준 높이(Hth)는 공통 기준 거리(335b)를 참조하여 설정될 수 있다.For example, when the height of the first crop is the first height 334a, the reference height Hth may be set with reference to the common reference distance 334b, and the height of the second crop is the second height 335a. In the case of , the reference height Hth may be set with reference to the common reference distance 335b.
상기 공통 기준 거리는 작물의 높이와 기준 높이 사이의 차이로 정의될 수 있다.The common reference distance may be defined as a difference between the height of the crop and the reference height.
즉, 제1 작물의 기준 높이(Hth)는 제1 생장점(330)을 기준으로 공통 기준 거리(334b)만큼 지면방향으로 이격된 지점으로 설정될 수 있다. 제2 작물의 기준 높이(Hth)는 제2 생장점(331)을 기준으로 공통 기준 거리(335b)만큼 지면방향으로 이격된 지점으로 설정될 수 있다.That is, the reference height Hth of the first crop may be set to a point spaced apart in the ground direction by a common reference distance 334b based on the first growth point 330 . The reference height Hth of the second crop may be set to a point spaced apart in the ground direction by a common reference distance 335b based on the second growth point 331 .
상기 공통 기준 거리는 서버에 미리 정의된 값일 수 있다. 상기 서버는 작물의 높이와 기준 높이 사이를 동일하도록 설정함으로써, 양분을 소비하는 잎을 보다 정확하게 특정하여 작물의 상태를 보다 정확하게 판단할 수 있다.The common reference distance may be a value predefined in the server. By setting the height of the crop to be the same between the height of the crop and the reference height, the server can more accurately determine the state of the crop by more accurately specifying the leaves that consume nutrients.
이하에서는 도 13을 참조하여, 작물 이미지에서 전체 싱크 용량 및 소스 용량을 산출하는 방법에 대해서 설명하도록 한다. Hereinafter, a method of calculating the total sink capacity and the source capacity from the crop image will be described with reference to FIG. 13 .
도 13 은 일 실시 예에 따른 전체 싱크 용량 및 소스 용량을 산출하는 방법에 관한 순서도이고, 도 14는 일 실시 예에 따른 작물 이미지에 대한 도면이다. 13 is a flowchart of a method of calculating total sink capacity and source capacity according to an embodiment, and FIG. 14 is a diagram of a crop image according to an embodiment.
앞서 상술한 싱크 용량 및 소스 용량을 산출하는 방법은 작물 하나를 특정하여 상기 작물에 대한 싱크 용량 및 소스 용량을 기초로 전체 싱크 용량 및 소스 용량을 산출하는 방법에 관한 것이었으나, 도 13에서는 전체 싱크 용량 및 소스 용량을 산출하여, 이를 기초로 작물 하나에 싱크 용량 및 소스 용량을 산출할 수도 있다. The method of calculating the sink capacity and the source capacity described above relates to a method of calculating the total sink capacity and the source capacity based on the sink capacity and the source capacity for the crop by specifying one crop, but in FIG. 13 , the total sink capacity and the source capacity By calculating the capacity and the source capacity, it is also possible to calculate the sink capacity and the source capacity for one crop based thereon.
도 13을 참조하면 전체 싱크 용량 및 소스 용량을 산출하는 방법은 측정 장치에 의해 이미지가 획득되는 단계(S401), 상기 이미지에서 작물 영역을 구분하는 단계(S411), 상기 작물 영역에서 대상 영역을 구분하는 단계(S412), 상기 대상 영역 별 녹색 영역을 산출하는 단계(S413), 상기 대상 영역 별 가중치를 적용하는 단계(S414), 및 상기 가중치에 기초하여 전체 소스 용량 및 싱크 용량을 산출하는 단계(S415)를 포함할 수 있다. Referring to FIG. 13 , the method of calculating the total sink capacity and source capacity includes the steps of acquiring an image by a measuring device (S401), dividing the crop area from the image (S411), and dividing the target area from the crop area (S412), calculating a green area for each target area (S413), applying a weight for each target area (S414), and calculating total source capacity and sink capacity based on the weight (S414) ( S415) may be included.
측정 장치에 이미지가 입력되는 단계는 앞서 도 5, 도 6에서 상술한 기술내용과 중복되는 바 생략하기로 한다. The step of inputting an image to the measuring device will be omitted since it overlaps with the description described above with reference to FIGS. 5 and 6 .
상기 측정 장치는 이미지를 획득할 수 있고, 획득된 이미지는 측정장치 또는 서버에 입력될 수 있다. (S401)The measuring device may acquire an image, and the acquired image may be input to the measuring device or a server. (S401)
상기 이미지는 적어도 하나 이상의 작물과 작물이 생장하고 있는 온실 이미지를 포함할 수 있다. 상기 이미지는 매번 고정된 위치에서 획득될 수 있다. 또는 상기 이미지는 매번 고정된 높이에서 획득될 수 있다.The image may include at least one or more crops and an image of a greenhouse in which the crops are growing. The image may be acquired at a fixed location each time. Alternatively, the image may be acquired at a fixed height each time.
상기 측정 장치는 상기 이미지에 중 작물 영역을 구분할 수 있다. (S411)The measuring device may classify a crop region in the image. (S411)
또는, 상기 서버는 상기 이미지 중 작물 영역을 구분할 수 있다.Alternatively, the server may classify the crop area in the image.
측정 장치는 작물 이미지(100)에 대해서 비 작물 영역(410)과 작물 영역(420)을 구분할 수 있다. 상기 비 작물 영역(410)은 작물 이미지(100)에서 작물을 포함하지 않는 영역일 수 있다. 상기 작물 영역(420)은 작물 이미지(100)에서 작물을 포함하는 영역일 수 있다. The measuring device may distinguish a non-crop area 410 and a crop area 420 with respect to the crop image 100 . The non-crop area 410 may be an area that does not include a crop in the crop image 100 . The crop area 420 may be an area including crops in the crop image 100 .
상기 비 작물 영역(410)은 작물 이미지에서 작물 생장에 관한 유인줄을 포함하거나, 작물 각각과 대응되는 특정 부표를 포함하는 이미지일 수 있다. The non-crop area 410 may be an image including an inducement line for crop growth in the crop image or a specific buoy corresponding to each crop.
상기 비 작물 영역(410)과 상기 작물 영역(420)은 색상 정보를 기초로 구분될 수도 있다. 측정 장치는 작물 이미지(100)에서 green 색상 또는 red 색상이 상대적으로 많은 영역은 작물 영역(420)으로 구분하고, 그 외의 영역을 비 작물 영역(410)으로 구분할 수 있다. The non-crop area 410 and the crop area 420 may be divided based on color information. The measuring apparatus may classify an area having a relatively large number of green or red colors in the crop image 100 as the crop area 420 , and may classify other areas as the non-crop area 410 .
측정 장치는 상기 작물 영역(420)에 대해서 적어도 하나 이상의 대상 영역을 구분할 수 있다. (S412)The measuring device may classify at least one target area with respect to the crop area 420 . (S412)
상기 대상 영역은 제1 대상 영역(421), 제2 대상 영역(422), 제3 대상 영역(423), 제4 대상 영역(424), 제5 대상 영역(425), 및 제6 대상 영역(426)을 포함할 수 있다. The target area includes a first target area 421 , a second target area 422 , a third target area 423 , a fourth target area 424 , a fifth target area 425 , and a sixth target area ( 426) may be included.
상기 제1 대상 영역(421), 제2 대상 영역(422), 제3 대상 영역(423), 제4 대상 영역(424), 제5 대상 영역(425), 및 제6 대상 영역(426)은 서로 같은 높이를 가질 수 있다. 또는 제1 대상 영역(421), 제2 대상 영역(422), 제3 대상 영역(423), 제4 대상 영역(424), 제5 대상 영역(425), 및 제6 대상 영역(426)은 서로 다른 높이를 가지도록 설정될 수도 있다. The first target area 421 , the second target area 422 , the third target area 423 , the fourth target area 424 , the fifth target area 425 , and the sixth target area 426 are They can have the same height as each other. Alternatively, the first target area 421 , the second target area 422 , the third target area 423 , the fourth target area 424 , the fifth target area 425 , and the sixth target area 426 are It may be set to have different heights.
측정 장치는 상기 대상 영역 별 녹색 영역을 산출할 수 있다. (S413)The measuring device may calculate a green area for each target area. (S413)
상기 녹색 영역은 상기 대상 영역을 RGB Color Histogram으로 도식화한 경우, green color 픽셀 수에 대한 정보일 수 있다. 보다 구체적으로, 측정 장치는 상기 대상 영역 별 픽셀에 대한 색상 정보를 추출하고, 상기 색상 정보 중 green color 픽셀 수에 대한 정보를 녹색 영역에 대한 정보로 산출할 수 있다. 측정 장치는 상기 녹색 영역에 대한 정보를 서버로 전달할 수 있다. The green area may be information on the number of green color pixels when the target area is plotted as an RGB color histogram. More specifically, the measuring apparatus may extract color information on pixels for each target region, and calculate information on the number of green color pixels among the color information as information on the green region. The measuring device may transmit information on the green area to the server.
서버는 상기 대상 영역 별 가중치를 적용할 수 있다. (S414)The server may apply a weight for each target area. (S414)
서버는 상기 대상 영역 별 가중치와 녹색 영역에 대한 정보에 기초하여 전체 소스 용량 및 싱크 용량을 산출할 수 있다. (S415)The server may calculate the total source capacity and sink capacity based on the weight for each target area and information on the green area. (S415)
서버는 상기 대상 영역 별 가중치를 로딩할 수 있다. 상기 가중치는 상기 대상 영역에 대해서 서로 다를 수 있다. 예를 들어, 제1 대상 영역에 대한 제1 가중치, 제2 대상 영역에 대한 제2 가중치, 제3 대상 영역에 대한 제3 가중치, 제4 대상 영역에 대한 제4 가중치, 제5 대상 영역에 대한 제5 가중치, 제6 대상 영역에 대한 제6 가중치는 서로 같거나 서로 다를 수 있다. The server may load the weight for each target area. The weight may be different for the target area. For example, the first weight for the first target area, the second weight for the second target area, the third weight for the third target area, the fourth weight for the fourth target area, and the fifth weight for the fifth target area The fifth weight and the sixth weight for the sixth target region may be the same as or different from each other.
또는, 제1 대상 영역에 대한 제1 가중치, 제2 대상 영역에 대한 제2 가중치, 제3 대상 영역에 대한 제3 가중치는 소스 용량을 산출하는 가중치일 수 있다. 제1 가중치에서 제3 가중치로 갈수록 소스 가중치는 감소할 수 있다. 상기 제1 대상 영역은 상기 제3 영역에 비해 가려지는 부분이 작아 보다 많은 광을 조사받을 수 있고, 이에 따라 제1 가중치를 제3 가중치 보다 높은 소스 가중치를 부여하여 작물의 소스 용량과 관련된 정보를 보다 실제에 가깝도록 획득할 수 있다.Alternatively, the first weight for the first target region, the second weight for the second target region, and the third weight for the third target region may be a weight for calculating the source capacity. The source weight may decrease from the first weight to the third weight. The first target area has a smaller portion that is covered compared to the third area, so it can receive more light. Accordingly, the first weight is given a higher source weight than the third weight to obtain information related to the source capacity of the crop. It can be obtained to be closer to reality.
제4 대상 영역에 대한 제4 가중치, 제5 대상 영역에 대한 제5 가중치, 제6 대상 영역에 대한 제6 가중치는 싱크 용량을 산출하는 가중치일 수 있다. 또한, 제4 가중치 내지 제6 가중치로 갈수록 싱크 가중치는 증가할 수 있다. 상기 제 6영역은 상기 제4 영역에 비해 가려지는 부분이 많아 양분 생산에 기여하는 바가 작아 상대적으로 양분 소비량이 많은 부분이므로, 제6 가중치를 제4 가중치보다 높은 싱크 가중치로 부여하여 작물의 싱크 용량과 관련된 정보를 보다 실제에 가깝도록 획득할 수 있다. The fourth weight for the fourth target region, the fifth weight for the fifth target region, and the sixth weight for the sixth target region may be weights for calculating the sink capacity. Also, the sink weight may increase as the fourth to sixth weights increase. Since the sixth area has a larger portion that is covered compared to the fourth area, which contributes less to nutrient production, and thus consumes relatively more nutrients, the sixth weight is given as a sink weight higher than the fourth weight, so that the sink capacity of the crop is reduced. related information can be obtained closer to reality.
이 경우 상기 제3 대상 영역과 상기 제4 대상 영역의 경계가 작물의 소스영역과 싱크 영역을 구분하는 기준 높이로 설정될 수 있다.In this case, a boundary between the third target area and the fourth target area may be set as a reference height for dividing a source area and a sink area of a crop.
서버는 상기 대상 영역 별 가중치와 상기 녹색 영역에 대한 정보를 기초로 전체 소스 용량 및 싱크 용량을 산출할 수 있다. 보다 구체적으로 상기 서버는 상기 대상 영역 별 가중치와 상기 녹색 영역의 픽셀 수를 곱해서 전체 소스 용량 및 싱크 용량을 산출할 수 있다. 예를 들어, 서버는 제1 대상 영역에 대한 녹색 영역에 green color 픽셀 수와 상기 제1 대상 영역에 대한 제1 가중치를 곱해서 싱크 용량 또는 소스 용량을 산출할 수 있다. The server may calculate the total source capacity and sink capacity based on the weight for each target area and the information on the green area. More specifically, the server may calculate the total source capacity and sink capacity by multiplying the weight for each target area by the number of pixels in the green area. For example, the server may calculate the sink capacity or the source capacity by multiplying the green area for the first target area by the number of green color pixels and the first weight for the first target area.
또는, 제1 가중치 내지 제3 가중치가 소스 용량을 산출하는 가중치인 경우, 제1 대상 영역 내지 제3 대상 영역에 관한 녹색 영역에 대한 정보를 기초로 전체 소스 용량을 산출할 수 있다. Alternatively, when the first to third weights are the weights for calculating the source capacity, the total source capacity may be calculated based on information on the green region of the first to third target regions.
또는, 제4 가중치 내지 제6 가중치가 싱크 용량을 산출하는 가중치인 경우, 제4 대상 영역 내지 제6 대상 영역에 관한 녹색 영역에 대한 정보를 기초로 전체 싱크 용량을 산출할 수 있다. Alternatively, when the fourth to sixth weights are the weights for calculating the sink capacity, the total sink capacity may be calculated based on information on the green region of the fourth to sixth target regions.
이하에서는 도 15, 도 16을 참조하여 전체 싱크 용량 및 소스 용량을 기초로 작물 싱크 용량 및 소스 용량을 산출하는 방법을 설명하도록 한다. Hereinafter, a method of calculating the crop sink capacity and the source capacity based on the total sink capacity and the source capacity will be described with reference to FIGS. 15 and 16 .
도 15는 일 실시 예에 따른 작물 소스 용량 및 싱크 용량을 산출하는 방법에 관한 순서도이고, 도 16는 일 실시 예에 따른 작물 이미지를 설명하기 위한 도면이다. 15 is a flowchart of a method of calculating a crop source capacity and a sink capacity according to an embodiment, and FIG. 16 is a diagram for explaining a crop image according to an embodiment.
도 15를 참조하면, 작물 소스 용량 및 싱크 용량을 산출하는 방법은 측정 장치에 이미지가 입력되는 단계(S401), 상기 이미지에 대해 작물 영역을 구분하는 단계(S411), 상기 작물 영역이 아닌 비 작물 영역에서 작물 특징점을 인식하는 단계(S421), 상기 작물 영역에서 대상 영역을 구분하는 단계(S412), 상기 대상 영역에 대한 녹색 영역을 산출하는 단계(S413), 상기 서버는 상기 대상 영역 별 가중치를 적용하는 단계(S414), 상기 대상 영역 별 가중치와 상기 녹색 영역을 활용하여 전체 소스 용량 및 싱크 용량을 산출하는 단계(S415), 상기 작물 특징점과 상기 전체 소스 용량 및 싱크 용량을 기초로 작물 소스 용량 및 싱크 용량을 산출하는 단계(S402)를 포함할 수 있다. 15 , the method for calculating the crop source capacity and the sink capacity includes the steps of inputting an image to a measuring device (S401), classifying a crop area with respect to the image (S411), and a non-crop area other than the crop area. Recognizing crop feature points in the area (S421), classifying a target area in the crop area (S412), calculating a green area for the target area (S413), the server calculates a weight for each target area step of applying (S414), calculating total source capacity and sink capacity using the weight for each target area and the green area (S415), crop source capacity based on the crop feature points and the total source capacity and sink capacity and calculating the sink capacity ( S402 ).
상기 (S411)단계, (S412)단계, (S413)단계, (S414)단계, (S415)단계는 앞서 도 13에서 상술한 기술적 내용과 중복되는 바 생략하기로 한다. Steps (S411), (S412), (S413), (S414), and (S415) will be omitted since they overlap with the technical contents described above with reference to FIG. 13 .
측정 장치는 작물 이미지에 비 작물 영역에서 작물 특징점을 인식할 수 있다. 도 16을 참조하면, 작물 이미지(100)은 비 작물 영역(410)과 작물 영역(420)으로 구분될 수 있다. 상기 비 작물 영역(410)과 작물 영역(420)을 구분하는 방법은 도 13에서 상술한 바 생략하기로 한다. The measuring device may recognize crop feature points in the non-crop area in the crop image. Referring to FIG. 16 , the crop image 100 may be divided into a non-crop area 410 and a crop area 420 . A method of dividing the non-crop area 410 and the crop area 420 will be omitted as described above with reference to FIG. 13 .
측정 장치는 비 작물 영역(410)에서 작물 특징점을 인식할 수 있다. 상기 작물 특징점은 작물 각각에 대한 고유 정보일 수 있다. 예를 들어, 상기 작물 특징점은 작물의 생장점일 수 있다. 상기 생장점은 상기 작물에 가장 상단에 임의의 영역에서 가지가 갈라지는 부위일 수 있으며 이에 한정되어 해석되지는 아니한다. The measuring device may recognize crop feature points in the non-crop area 410 . The crop feature points may be unique information for each crop. For example, the crop characteristic point may be a crop growth point. The growth point may be a branching area in an arbitrary area at the top of the crop, and is not limited thereto.
상기 작물 특징점은 작물에 각각에 대한 특정 부표(411)일 수도 있다. 상기 특정 부표는 온실에서 작물이 생장할 때, 온실에서 작물이 생장에 도움이 되는 유인줄이 온실 천장에 설치되고 상기 유인줄 마다 달려 있는 부표일 수 있다. The crop characteristic points may be specific buoys 411 for each crop. The specific buoy may be a buoy in which, when a crop is grown in a greenhouse, an inducer line that helps the crop grow in the greenhouse is installed on the ceiling of the greenhouse and is hung on each of the attracting line.
측정 장치는 상기 작물 특징점의 개수를 인식할 수 있다. 측정 장치는 특징점의 개수를 서버로 전달할 수 있다. The measuring device may recognize the number of the crop feature points. The measuring device may transmit the number of feature points to the server.
서버는 상기 특징점 개수와 전체 싱크 용량 및 소스 용량을 기초로 작물 싱크 용량 및 소스 용량을 산출할 수 있다. 보다 구체적으로 서버는 전체 싱크 용량과 소스 용량을 상기 특징점 개수로 나눠서 작물 하나에 대응하는 싱크 용량 및 소스 용량을 산출할 수 있다. The server may calculate the crop sink capacity and source capacity based on the number of feature points and the total sink capacity and source capacity. More specifically, the server may calculate the sink capacity and the source capacity corresponding to one crop by dividing the total sink capacity and the source capacity by the number of the feature points.
도 17은 일 실시예에 따라 온실을 제어하기 위한 파라미터 산출 시스템에 대하여 설명하기 위한 도면이다.17 is a diagram for explaining a parameter calculation system for controlling a greenhouse according to an embodiment.
도 17을 참조하면, 일 실시예에 따라 온실을 제어하기 위한 파라미터 산출 시스템(1000)은 획득된 작물에 대한 이미지로부터 적어도 3개의 특징을 추출할 수 있다.Referring to FIG. 17 , the parameter calculation system 1000 for controlling a greenhouse according to an embodiment may extract at least three features from an image of a crop obtained.
이 때, 상기 적어도 3개의 특징은 상기 작물의 꽃에 대한 특징, 상기 작물의 봉우리에 대한 특징, 상기 작물의 과실에 대한 특징, 상기 작물의 잎에 대한 특징 중 적어도 하나의 특징을 포함할 수 있다.In this case, the at least three characteristics may include at least one of a characteristic of a flower of the crop, a characteristic of a peak of the crop, a characteristic of a fruit of the crop, and a characteristic of a leaf of the crop. .
예를 들어, 상기 적어도 3개의 특징은 제1 특징, 제2 특징 및 제3 특징을 포함할 수 있으며, 상기 제1 특징은 상기 작물의 꽃에 대한 특징이고, 상기 제2 특징은 상기 작물의 과실에 대한 특징이며, 상기 제3 특징은 상기 작물의 잎에 대한 특징일 수 있으나, 이에 한정되지 않는다.For example, the at least three characteristics may include a first characteristic, a second characteristic and a third characteristic, wherein the first characteristic is a characteristic of a flower of the crop, and the second characteristic is a fruit of the crop. , and the third characteristic may be a characteristic of the leaf of the crop, but is not limited thereto.
또한, 일 실시예에 따라 온실을 제어하기 위한 파라미터 산출 시스템은 추출된 특징들에 대한 가중치를 이용하여 서브 파라미터를 획득할 수 있다.Also, according to an embodiment, the parameter calculation system for controlling the greenhouse may acquire sub-parameters by using weights for the extracted features.
예를 들어, 상기 적어도 3개의 특징이 제1 특징, 제2 특징 및 제3 특징을 포함하는 경우, 상기 제1 특징에 대한 제1 가중치를 기초로 제1 서브 파라미터를 산출할 수 있으며, 상기 제2 특징에 대한 제2 가중치를 기초로 제2 서브 파라미터를 산출할 수 있고, 상기 제3 특징에 대한 제3 가중치를 기초로 제3 서브 파라미터를 산출할 수 있으나, 이에 한정되지 않는다.For example, when the at least three features include a first feature, a second feature, and a third feature, a first sub-parameter may be calculated based on a first weight for the first feature, and the first sub-parameter may be calculated. The second sub-parameter may be calculated based on the second weight for the two features, and the third sub-parameter may be calculated based on the third weight for the third feature, but is not limited thereto.
또한, 상기 제1 특징이 상기 작물의 꽃에 대응되는 특징이고, 상기 제2 특징이 상기 작물의 과실에 대응되는 특징인 경우 상기 제1 가중치는 상기 제2 가중치 보다 클 수 있으나, 이에 한정되지 않는다.In addition, when the first characteristic corresponds to a flower of the crop and the second characteristic corresponds to a fruit of the crop, the first weight may be greater than the second weight, but is not limited thereto. .
또한, 상기 제1 내지 제3 특징에 대한 상기 제1 내지 제3 가중치는 크기, 모양, 위치, 존재 여부 중 적어도 하나와 연관될 수 있다.In addition, the first to third weights for the first to third features may be associated with at least one of size, shape, location, and presence or absence.
또한, 상기 제1 특징이 상기 작물의 꽃에 대응되는 특징이고, 상기 제2 특징이 상기 작물의 과실에 대응되는 특징인 경우, 상기 제1 가중치의 크기에 대한 연관성은 상기 제2 가중치의 크기에 대한 연관성보다 작을 수 있다.In addition, when the first characteristic is a characteristic corresponding to a flower of the crop and the second characteristic is a characteristic corresponding to a fruit of the crop, the correlation with the size of the first weight depends on the size of the second weight. may be less than the correlation.
예를 들어, 상기 제1 특징이 상기 작물의 꽃에 대응되는 특징이고, 상기 제2 특징이 상기 작물의 과실에 대응되는 특징인 경우, 상기 제1 특징의 크기에 따른 상기 제1 가중치의 변화정도는 상기 제2 특징의 크기에 따른 상기 제2 가중치의 변화정도보다 작을 수 있다.For example, when the first characteristic is a characteristic corresponding to a flower of the crop and the second characteristic is a characteristic corresponding to a fruit of the crop, the degree of change of the first weight according to the size of the first characteristic may be smaller than the degree of change of the second weight according to the magnitude of the second feature.
보다 구체적인 예를 들어, 상기 제1 특징이 상기 작물의 꽃에 대응되는 특징이고, 상기 제2 특징이 상기 작물의 과실에 대응되는 특징인 경우, 상기 제1 특징의 크기에 따라 상기 제1 가중치는 동일할 수 있으며, 상기 제2 특징의 크기에 따라 상기 제2 가중치는 변경될 수 있으나, 이에 한정되지 않는다.As a more specific example, when the first characteristic is a characteristic corresponding to a flower of the crop and the second characteristic is a characteristic corresponding to a fruit of the crop, the first weight according to the size of the first characteristic is may be the same, and the second weight may be changed according to the size of the second feature, but is not limited thereto.
또한, 일 실시예에 따라 온실을 제어하기 위한 파라미터 산출 시스템은 상기 제1 서브 파라미터 및 상기 제2 서브 파라미터를 기초로 제1 파라미터를 산출할 수 있으며, 상기 제3 서브 파라미터를 기초로 제2 파라미터를 산출할 수 있다.Also, according to an embodiment, the parameter calculation system for controlling a greenhouse may calculate a first parameter based on the first sub-parameter and the second sub-parameter, and a second parameter based on the third sub-parameter. can be calculated.
이 때, 상기 제1 파라미터는 상술한 싱크 용량에 대응되는 파라미터일 수 있으며, 상기 제2 파라미터는 상술한 소스 용량에 대응되는 파라미터일 수 있으나, 이에 한정되지 않는다.In this case, the first parameter may be a parameter corresponding to the above-described sink capacity, and the second parameter may be a parameter corresponding to the above-described source capacity, but is not limited thereto.
또한, 온실 제어 시스템(미도시)은 상기 온실을 제어하기 위한 파라미터 산출 시스템으로부터 산출된 파라미터에 기초하여 온실을 제어할 수 있다.In addition, the greenhouse control system (not shown) may control the greenhouse based on parameters calculated from the parameter calculation system for controlling the greenhouse.
예를 들어, 상기 온실 제어 시스템은 상기 온실을 제어하기 위한 파라미터 산출 시스템으로부터 산출된 상기 제1 파라미터 및 상기 제2 파라미터에 기초하여 온실을 제어할 수 있다.For example, the greenhouse control system may control the greenhouse based on the first parameter and the second parameter calculated from the parameter calculation system for controlling the greenhouse.
보다 구체적으로, 상기 온실 제어 시스템은 상기 제1 파라미터가 상기 제2 파라미터보다 큰 경우 제1 그룹 온실 제어 동작 중 적어도 하나의 동작을 수행할 수 있으며, 상기 제2 파라미터가 상기 제1 파라미터보다 큰 경우 제2 그룹 온실 제어 동작 중 적어도 하나의 동작을 수행할 수 있다.More specifically, the greenhouse control system may perform at least one operation of a first group greenhouse control operation when the first parameter is greater than the second parameter, and when the second parameter is greater than the first parameter At least one of the second group greenhouse control operations may be performed.
이 때, 상기 제1 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 줄이기 위해서 과실을 더 많이 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 한 화방 당 남는 과실의 개수를 줄이기 위해서 적어도 하나의 과실을 제거하도록 판단하는 동작, 향후 소스가 될 수 있는 잎을 더 늘리기 위해서 상단부에 새로 생기는 측지에 남길 잎의 개수가 많아지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎을 2개 에서 3개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 온습도 편차가 줄어들도록 온실을 제어하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 함수율 편차가 줄어들도록 온실을 제어하는 동작, 작물의 호흡량을 줄이기 위하여 온실의 평균 온도가 낮아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함할 수 있다.In this case, the first group greenhouse control operation is an operation of changing the standard of fruit removal to remove more fruits in order to reduce the number of fruits remaining per one flower room, and at least one method to reduce the number of fruits remaining per flower room The action of deciding to remove the fruit, the action of changing the standard of leaf removal so that the number of leaves to be left on the new branch on the upper part increases in order to increase the number of leaves that can be a source in the future, Changing the standard of leaf removal so that only 3 leaves are left, in order to induce vegetative growth by giving less stress to the crop, In order to control the greenhouse to reduce temperature and humidity deviation, to induce vegetative growth by giving less stress to the crop The operation of controlling the greenhouse to reduce the moisture content deviation, the operation of controlling the greenhouse so that the average temperature of the greenhouse is lowered in order to reduce the respiration rate of crops, the operation of transmitting the guide message for the above-described control, and outputting the notification for the above-mentioned control It may include at least one of the operations to be performed.
또한, 상기 제2 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 늘리기 위해서 과실을 더 적게 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 남길 잎의 개수가 적어지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎은 0개 에서 1개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 온습도 편차가 커지도록 온실을 제어하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 함수율 편차가 커지도록 온실을 제어하는 동작, 작물의 호흡량을 늘리기 위하여 온실의 평균 온도가 높아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함할 수 있다.In addition, the second group greenhouse control operation is an operation of changing the standard of fruit removal so as to remove fewer fruits in order to increase the number of remaining fruits per one flower room, and a leaf so that the number of leaves to be left on a new side branch is reduced at the upper end. Changing the standard of removal, changing the standard of leaf removal so that 0 to 1 leaves are left on the new geodesic in the upper part control operation, controlling the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crops; It may include at least one of an operation of transmitting a guide message for , and an operation of outputting a notification for the aforementioned control.
도 18은 일 실시예에 따라 온실을 제어하기 위한 파라미터 산출 시스템에 대하여 설명하기 위한 도면이다.18 is a diagram for explaining a parameter calculation system for controlling a greenhouse according to an embodiment.
도 18을 참조하면, 일 실시예에 따라 온실을 제어하기 위한 파라미터 산출 시스템(1100)은 도 17을 통해 서술한 내용들이 적용될 수 있으므로 중복되는 서술은 생략하기로 한다.Referring to FIG. 18 , since the contents described with reference to FIG. 17 may be applied to the parameter calculation system 1100 for controlling the greenhouse according to an embodiment, the overlapping description will be omitted.
도 18을 참조하면, 일 실시예에 따라 온실을 제어하기 위한 파라미터 산출 시스템(1100)은 상기 제1 파라미터 및 상기 제2 파라미터를 기초로 제3 파라미터를 산출할 수 있다.Referring to FIG. 18 , a parameter calculation system 1100 for controlling a greenhouse according to an embodiment may calculate a third parameter based on the first parameter and the second parameter.
예를 들어, 상기 제3 파라미터는 상기 제1 파라미터 - 상기 제2 파라미터로 산출될 수 있으며, 상기 제2 파라미터 - 상기 제1 파라미터로 산출 될 수도 있는 등 상기 제1 파라미터와 상기 제2 파라미터를 변수로 하는 함수에 의해 산출될 수 있으나, 이에 한정되지 않는다.For example, the third parameter may be calculated as the first parameter - the second parameter, and the second parameter - may be calculated as the first parameter, etc. It may be calculated by a function to, but is not limited thereto.
또한, 온실 제어 시스템(미도시)은 상기 온실을 제어하기 위한 파라미터 산출 시스템으로부터 산출된 파라미터에 기초하여 온실을 제어할 수 있다.In addition, the greenhouse control system (not shown) may control the greenhouse based on parameters calculated from the parameter calculation system for controlling the greenhouse.
예를 들어, 상기 온실 제어 시스템은 상기 온실을 제어하기 위한 파라미터 산출 시스템으로부터 산출된 상기 제3 파라미터에 기초하여 온실을 제어할 수 있다.For example, the greenhouse control system may control the greenhouse based on the third parameter calculated from the parameter calculation system for controlling the greenhouse.
보다 구체적으로, 상기 온실 제어 시스템은 상기 제3 파라미터를 기초로 제1 그룹 온실 제어 동작 또는 제2 그룹 온실 제어 동작 중 선택으로 적어도 하나의 동작을 수행할 수 있다.More specifically, the greenhouse control system may perform at least one operation by selecting a first group greenhouse control operation or a second group greenhouse control operation based on the third parameter.
이 때, 상기 제1 그룹 온실 제어 동작 및 상기 제2 그룹 온실 제어 동작에 대하여는 도 17에서 기술된 내용들이 적용될 수 있으므로, 중복되는 서술은 생략하기로 한다.In this case, since the contents described in FIG. 17 may be applied to the first group greenhouse control operation and the second group greenhouse control operation, overlapping descriptions will be omitted.
상기에서는 본 발명에 따른 온실을 기준으로 설명하였으나, 온실을 포함한 스마트팜에 널리 적용될 수 있다.Although described above based on the greenhouse according to the present invention, it can be widely applied to smart farms including greenhouses.
상기에서는 본 발명에 따른 실시예를 기준으로 본 발명의 구성과 특징을 설명하였으나 본 발명은 이에 한정되지 않으며, 본 발명의 사상과 범위 내에서 다양하게 변경 또는 변형할 수 있음은 본 발명이 속하는 기술분야의 당업자에게 명백한 것이며, 따라서 이와 같은 변경 또는 변형은 첨부된 특허청구범위에 속함을 밝혀둔다.In the above, the configuration and features of the present invention have been described based on the embodiments according to the present invention, but the present invention is not limited thereto, and it is understood that various changes or modifications can be made within the spirit and scope of the present invention. It is intended that such changes or modifications will be apparent to those skilled in the art, and therefore fall within the scope of the appended claims.
전술한 바와 같이, 상기 발명의 실시를 위한 최선의 형태에서, 관련된 사항을 기술하였다.As described above, in the best mode for carrying out the invention, related matters have been described.

Claims (12)

  1. 온실 환경 제어 방법으로서,A method for controlling a greenhouse environment, comprising:
    작물에 대한 적어도 하나의 이미지를 획득하는 단계;acquiring at least one image of the crop;
    획득된 적어도 하나의 이미지에 포함되는 제1 특징, 제2 특징 및 제3 특징을 추출하는 단계;extracting a first feature, a second feature, and a third feature included in the at least one acquired image;
    상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제1 파라미터를 산출하는 단계;calculating a first parameter based on at least one of the first to third characteristics;
    상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제2 파라미터를 산출하는 단계;calculating a second parameter based on at least one of the first to third characteristics;
    상기 제1 및 제2 파라미터를 기초로 제3 파라미터를 산출하는 단계; 및calculating a third parameter based on the first and second parameters; and
    상기 제3 파라미터를 기초로 온실 환경을 제어하는 단계;를 포함하되,Including; controlling the greenhouse environment based on the third parameter;
    상기 제1 파라미터를 산출하는 단계는The step of calculating the first parameter is
    상기 제1 특징을 기초로 제1 서브 파라미터를 산출하는 단계;calculating a first sub-parameter based on the first characteristic;
    상기 제2 특징을 기초로 제2 서브 파라미터를 산출하는 단계; 및calculating a second sub-parameter based on the second characteristic; and
    적어도 상기 제1 서브 파라미터 및 상기 제2 서브 파라미터를 기초로 상기 제1 파라미터를 산출하는 단계를 포함하며,calculating the first parameter based on at least the first sub-parameter and the second sub-parameter,
    상기 제2 파라미터를 산출하는 단계는The step of calculating the second parameter is
    상기 제3 특징을 기초로 제3 서브 파라미터를 산출하는 단계; 및calculating a third sub-parameter based on the third characteristic; and
    적어도 상기 제3 서브 파라미터를 기초로 상기 제2 파라미터를 산출하는 단계;를 포함하고,calculating the second parameter based on at least the third sub-parameter;
    상기 제3 파라미터를 기초로 온실 환경을 제어하는 단계는The step of controlling the greenhouse environment based on the third parameter
    상기 제3 파라미터와 기준 값을 비교하는 단계; 및comparing the third parameter with a reference value; and
    상기 제3 파라미터와 상기 기준 값의 비교 결과에 기초하여 제1 그룹 온실 제어 동작 또는 제2 그룹 온실 제어 동작에 포함되는 적어도 하나의 제어 동작을 수행하는 단계;를 포함하며,performing at least one control operation included in a first group greenhouse control operation or a second group greenhouse control operation based on a comparison result of the third parameter and the reference value;
    상기 제1 특징은 작물의 꽃에 대응되는 특징이며,The first characteristic is a characteristic corresponding to the flower of the crop,
    상기 제2 특징은 작물의 과실에 대응되는 특징이고,The second characteristic is a characteristic corresponding to the fruit of the crop,
    상기 제3 특징은 작물의 잎에 대응되는 특징인The third characteristic is a characteristic corresponding to the leaves of the crop.
    온실 환경 제어 방법.Greenhouse environmental control methods.
  2. 제1 항에 있어서,The method of claim 1,
    상기 제3 파라미터가 상기 기준 값 이상인 경우 상기 제1 그룹 온실 제어 동작에 포함되는 적어도 하나의 제어 동작을 수행하며When the third parameter is equal to or greater than the reference value, at least one control operation included in the first group greenhouse control operation is performed,
    상기 제3 파라미터가 상기 기준 값 미만인 경우 상기 제2 그룹 온실 제어 동작에 포함되는 적어도 하나의 제어 동작을 수행하는performing at least one control operation included in the second group greenhouse control operation when the third parameter is less than the reference value
    온실 환경 제어 방법.Greenhouse environmental control methods.
  3. 제1 항에 있어서,The method of claim 1,
    상기 제3 파라미터가 상기 기준 값 이상인 경우 상기 제2 그룹 온실 제어 동작에 포함되는 적어도 하나의 제어 동작을 수행하며When the third parameter is equal to or greater than the reference value, at least one control operation included in the second group greenhouse control operation is performed,
    상기 제3 파라미터가 상기 기준 값 미만인 경우 상기 제1 그룹 온실 제어 동작에 포함되는 적어도 하나의 제어 동작을 수행하는performing at least one control operation included in the first group greenhouse control operation when the third parameter is less than the reference value
    온실 환경 제어 방법.Greenhouse environmental control method.
  4. 제1 항에 있어서,The method of claim 1,
    상기 제1 서브 파라미터를 산출하기 위한 제1 가중치는 상기 제2 서브 파라미터를 산출하기 위한 제2 가중치보다 큰A first weight for calculating the first sub-parameter is greater than a second weight for calculating the second sub-parameter
    온실 환경 제어 방법.Greenhouse environmental control methods.
  5. 제1 항에 있어서,The method of claim 1,
    상기 제2 서브 파라미터를 산출하기 위한 상기 제2 가중치는 상기 제2 특징의 크기에 기초하여 변경되는The second weight for calculating the second sub-parameter is changed based on the magnitude of the second feature.
    온실 환경 제어 방법.Greenhouse environmental control methods.
  6. 제5 항에 있어서,6. The method of claim 5,
    상기 제2 서브 파라미터를 산출하기 위한 상기 제2 가중치는 상기 제2 특징의 크기가 작을수록 큰The second weight for calculating the second sub-parameter increases as the size of the second feature decreases.
    온실 환경 제어 방법.Greenhouse environmental control methods.
  7. 제1 항에 있어서,The method of claim 1,
    상기 제1 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 줄이기 위해서 과실을 더 많이 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 한 화방 당 남는 과실의 개수를 줄이기 위해서 적어도 하나의 과실을 제거하도록 판단하는 동작, 향후 소스가 될 수 있는 잎을 더 늘리기 위해서 상단부에 새로 생기는 측지에 남길 잎의 개수가 많아지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎을 2개 에서 3개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 온습도 편차가 줄어들도록 온실을 제어하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 함수율 편차가 줄어들도록 온실을 제어하는 동작, 작물의 호흡량을 줄이기 위하여 온실의 평균 온도가 낮아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함하는The first group greenhouse control operation is an operation of changing the criterion of fruit removal to remove more fruits in order to reduce the number of remaining fruits per one room, and removing at least one fruit to reduce the number of remaining fruits per one room. In order to increase the number of leaves that can become a source in the future, the operation of changing the standard of leaf removal so that the number of leaves to be left on the new geodesic on the upper part increases, The operation of changing the standard of leaf removal so as to leave a gap, the operation of controlling the greenhouse to reduce the temperature and humidity deviation to induce vegetative growth by giving less stress to the crop, the operation of reducing the moisture content deviation to induce vegetative growth by giving less stress to the crop During the operation of controlling the greenhouse to decrease, the operation of controlling the greenhouse so that the average temperature of the greenhouse is lowered to reduce the respiration rate of crops, the operation of transmitting the guide message for the above-mentioned control, the operation of outputting a notification for the above-mentioned control at least one action
    온실 환경 제어 방법.Greenhouse environmental control methods.
  8. 제1 항에 있어서,The method of claim 1,
    상기 제2 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 늘리기 위해서 과실을 더 적게 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 남길 잎의 개수가 적어지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎은 0개 에서 1개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 온습도 편차가 커지도록 온실을 제어하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 함수율 편차가 커지도록 온실을 제어하는 동작, 작물의 호흡량을 늘리기 위하여 온실의 평균 온도가 높아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함하는The second group greenhouse control operation is an operation of changing the standard of fruit removal so as to remove fewer fruits in order to increase the number of remaining fruits per one flower room, and removing leaves so that the number of leaves to be left on a new side branch is reduced at the upper end. The operation of changing the standard, the operation of changing the standard of leaf removal so that 0 to 1 leaves are left on the new geodesic at the upper part, and controlling the greenhouse to increase the temperature and humidity deviation in order to induce reproductive growth by adding more stress to the crop operation, controlling the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crops, controlling the greenhouse to increase the average temperature of the greenhouse to increase the respiration rate of crops, for the above-mentioned control comprising at least one of an operation of transmitting a guide message and an operation of outputting a notification for the above-described control
    온실 환경 제어 방법.Greenhouse environmental control methods.
  9. 제1 항에 있어서,The method of claim 1,
    상기 제1 파라미터는 싱크 용량에 대응되는 파라미터이며, 상기 제2 파라미터는 소스 용량에 대응되는 파라미터인The first parameter is a parameter corresponding to a sink capacity, and the second parameter is a parameter corresponding to a source capacity.
    온실 환경 제어 방법.Greenhouse environmental control methods.
  10. 온실 환경 제어 방법으로서,A method for controlling a greenhouse environment, comprising:
    작물에 대한 적어도 하나의 이미지를 획득하는 단계;acquiring at least one image of the crop;
    획득된 적어도 하나의 이미지에 포함되는 제1 특징, 제2 특징 및 제3 특징을 추출하는 단계;extracting a first feature, a second feature, and a third feature included in the at least one acquired image;
    상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제1 파라미터를 산출하는 단계;calculating a first parameter based on at least one of the first to third characteristics;
    상기 제1 내지 제3 특징 중 적어도 하나의 특징을 기초로 제2 파라미터를 산출하는 단계; 및calculating a second parameter based on at least one of the first to third characteristics; and
    상기 제1 파라미터 및 상기 제2 파라미터를 기초로 온실 환경을 제어하는 단계;를 포함하되,Including; controlling the greenhouse environment based on the first parameter and the second parameter;
    상기 제1 파라미터를 산출하는 단계는The step of calculating the first parameter is
    상기 제1 특징을 기초로 제1 서브 파라미터를 산출하는 단계;calculating a first sub-parameter based on the first characteristic;
    상기 제2 특징을 기초로 제2 서브 파라미터를 산출하는 단계; 및calculating a second sub-parameter based on the second characteristic; and
    적어도 상기 제1 서브 파라미터 및 상기 제2 서브 파라미터를 기초로 상기 제1 파라미터를 산출하는 단계를 포함하며,calculating the first parameter based on at least the first sub-parameter and the second sub-parameter,
    상기 제2 파라미터를 산출하는 단계는The step of calculating the second parameter is
    상기 제3 특징을 기초로 제3 서브 파라미터를 산출하는 단계; 및calculating a third sub-parameter based on the third characteristic; and
    적어도 상기 제3 서브 파라미터를 기초로 상기 제2 파라미터를 산출하는 단계;를 포함하고,calculating the second parameter based on at least the third sub-parameter;
    상기 제1 파라미터 및 상기 제2 파라미터를 기초로 온실 환경을 제어하는 단계는Controlling the greenhouse environment based on the first parameter and the second parameter comprises:
    상기 제1 파라미터가 상기 제2 파라미터보다 큰 경우 제1 그룹 온실 제어 동작을 수행하는 단계; 및performing a first group greenhouse control operation when the first parameter is greater than the second parameter; and
    상기 제2 파라미터가 상기 제1 파라미터보다 큰 경우 제2 그룹 온실 제어 동작을 수행하는 단계; 를 포함하고,performing a second group greenhouse control operation when the second parameter is greater than the first parameter; including,
    상기 제1 특징은 작물의 꽃에 대응되는 특징이며,The first characteristic is a characteristic corresponding to the flower of the crop,
    상기 제2 특징은 작물의 과실에 대응되는 특징이고,The second characteristic is a characteristic corresponding to the fruit of a crop,
    상기 제3 특징은 작물의 잎에 대응되는 특징인The third characteristic is a characteristic corresponding to the leaves of the crop.
    온실 환경 제어 방법.Greenhouse environmental control methods.
  11. 제10 항에 있어서,11. The method of claim 10,
    상기 제1 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 줄이기 위해서 과실을 더 많이 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 한 화방 당 남는 과실의 개수를 줄이기 위해서 적어도 하나의 과실을 제거하도록 판단하는 동작, 향후 소스가 될 수 있는 잎을 더 늘리기 위해서 상단부에 새로 생기는 측지에 남길 잎의 개수가 많아지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎을 2개 에서 3개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 온습도 편차가 줄어들도록 온실을 제어하는 동작, 작물에 스트레스를 적게 줘서 영양 생장으로 유도하기 위하여 함수율 편차가 줄어들도록 온실을 제어하는 동작, 작물의 호흡량을 줄이기 위하여 온실의 평균 온도가 낮아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함하는The first group greenhouse control operation is an operation of changing the criterion of fruit removal to remove more fruits in order to reduce the number of remaining fruits per one room, and removing at least one fruit to reduce the number of remaining fruits per one room. In order to increase the number of leaves that can become a source in the future, the operation of changing the standard of leaf removal so that the number of leaves to be left on the new geodesic on the upper part increases, The operation of changing the standard of leaf removal so as to leave a gap, the operation of controlling the greenhouse to reduce the temperature and humidity deviation to induce vegetative growth by giving less stress to the crop, the operation of reducing the moisture content deviation to induce vegetative growth by giving less stress to the crop During the operation of controlling the greenhouse to decrease, the operation of controlling the greenhouse so that the average temperature of the greenhouse is lowered to reduce the respiration rate of crops, the operation of transmitting the guide message for the above-mentioned control, the operation of outputting a notification for the above-mentioned control at least one action
    온실 환경 제어 방법.Greenhouse environmental control methods.
  12. 제10 항에 있어서,11. The method of claim 10,
    상기 제2 그룹 온실 제어 동작은 한 화방 당 남는 과실의 개수를 늘리기 위해서 과실을 더 적게 제거하도록 상기 과실 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 남길 잎의 개수가 적어지도록 잎 제거의 기준을 변경하는 동작, 상단부에 새로 생기는 측지에 잎은 0개 에서 1개 남기도록 잎 제거의 기준을 변경하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 온습도 편차가 커지도록 온실을 제어하는 동작, 작물에 스트레스를 더 줘서 생식 생장으로 유도하기 위하여 함수율 편차가 커지도록 온실을 제어하는 동작, 작물의 호흡량을 늘리기 위하여 온실의 평균 온도가 높아지도록 온실을 제어하는 동작, 상술한 제어를 위한 가이드 메시지를 전송하는 동작, 상술한 제어를 위한 알림을 출력하는 동작 중 적어도 하나의 동작을 포함하는The second group greenhouse control operation is an operation of changing the standard of fruit removal so as to remove fewer fruits in order to increase the number of remaining fruits per one flower room, and removing leaves so that the number of leaves to be left on a new side branch is reduced at the upper end. The operation of changing the standard, the operation of changing the standard of leaf removal so that 0 to 1 leaves are left on the new geodesic at the upper part, and controlling the greenhouse to increase the temperature and humidity deviation in order to induce reproductive growth by adding more stress to the crop operation, controlling the greenhouse to increase the moisture content deviation in order to induce reproductive growth by applying more stress to the crops, controlling the greenhouse to increase the average temperature of the greenhouse to increase the respiration rate of crops, for the above-mentioned control comprising at least one of an operation of transmitting a guide message and an operation of outputting a notification for the above-described control
    온실 환경 제어 방법.Greenhouse environmental control methods.
PCT/KR2022/002772 2021-02-26 2022-02-25 System and method for determining sync capacity and source capacity WO2022182190A1 (en)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2021-0026712 2021-02-26
KR10-2021-0026711 2021-02-26
KR1020210026712A KR102351652B1 (en) 2021-02-26 2021-02-26 Method and system for controlling smartfarm
KR1020210026711A KR102398294B1 (en) 2021-02-26 2021-02-26 System and method for determining sink capacity and source capacity

Publications (1)

Publication Number Publication Date
WO2022182190A1 true WO2022182190A1 (en) 2022-09-01

Family

ID=83049560

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2022/002772 WO2022182190A1 (en) 2021-02-26 2022-02-25 System and method for determining sync capacity and source capacity

Country Status (1)

Country Link
WO (1) WO2022182190A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012191903A (en) * 2011-03-17 2012-10-11 Nikon Corp Plant sorting device, robot, plant cultivation system, plant sorting method, and program
JP2017134585A (en) * 2016-01-27 2017-08-03 秋田県 Harvesting proper time determination support device and harvesting proper time determination support program
JP2019187259A (en) * 2018-04-20 2019-10-31 キッセイコムテック株式会社 Culture support method, culture support program, culture support device and culture support system
KR20200122612A (en) * 2019-04-18 2020-10-28 아이오크롭스 주식회사 Crop growth control system and controlling method of thereof
KR102351652B1 (en) * 2021-02-26 2022-01-14 아이오크롭스 주식회사 Method and system for controlling smartfarm

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012191903A (en) * 2011-03-17 2012-10-11 Nikon Corp Plant sorting device, robot, plant cultivation system, plant sorting method, and program
JP2017134585A (en) * 2016-01-27 2017-08-03 秋田県 Harvesting proper time determination support device and harvesting proper time determination support program
JP2019187259A (en) * 2018-04-20 2019-10-31 キッセイコムテック株式会社 Culture support method, culture support program, culture support device and culture support system
KR20200122612A (en) * 2019-04-18 2020-10-28 아이오크롭스 주식회사 Crop growth control system and controlling method of thereof
KR102351652B1 (en) * 2021-02-26 2022-01-14 아이오크롭스 주식회사 Method and system for controlling smartfarm

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
VU THI KIM OANH, LEE UG-YONG, CHOI JIN-HO, LEE HAN-CHAN, CHUN JONG-PIL: "Changes of Fruit Characteristics and Cell Wall Component during Maturation and Ripening in Asian Pear 'Hanareum', 'Manpungbae', and 'Niitaka' (Pyrus pyrifolia Nakai)", WŏNYE-KWAHAK-KISUL-CHI = KOREAN JOURNAL OF HORTICULTURAL SCIENCE & TECHNOLOGY, SUWEON, vol. 30, no. 4, 30 August 2012 (2012-08-30), Suweon , pages 345 - 356, XP055961490, ISSN: 1226-8763, DOI: 10.7235/hort.2012.12034 *

Similar Documents

Publication Publication Date Title
WO2016056787A1 (en) Display device and method of controlling the same
WO2020050499A1 (en) Method for acquiring object information and apparatus for performing same
WO2016182307A1 (en) Image processing apparatus and image processing method based on metadata
CN108291952A (en) The monitoring and managing method and monitoring system of unmanned plane and its state of flight
WO2016104988A1 (en) Mobile terminal, audio output device and audio output system comprising same
WO2019168332A1 (en) Signal processing apparatus and image display device having same
WO2021006366A1 (en) Artificial intelligence device for adjusting color of display panel, and method therefor
WO2022050507A1 (en) Method and system for monitoring photovoltaic power generation module
WO2015183050A1 (en) Optical tracking system, and method for calculating posture and location of marker part in optical tracking system
WO2021006437A1 (en) Lawn mower robot and method for controlling the same
WO2020139018A2 (en) Signal processing device and image display apparatus including the same
WO2020149619A1 (en) Video wall
WO2019198942A1 (en) Method of processing image, computer-readable storage medium recording method, and apparatus for processing image
WO2019231235A1 (en) Signal processing device and image display device comprising same
WO2021006436A1 (en) Lawn mower robot and method for controlling the same
EP3729149A1 (en) Lens curvature variation apparatus for varying lens curvature using sensed temperature information
WO2021040156A1 (en) Body measurement device and control method therefor
WO2022182191A1 (en) Method for determining fruits to be harvested, and fruit harvesting device
WO2022191662A1 (en) Performance production method and performance production system using same
CN107111319A (en) Unmanned plane during flying prompt system and method, control terminal, flight system
WO2022182190A1 (en) System and method for determining sync capacity and source capacity
WO2017039130A1 (en) Display device and operating method therefor
WO2019177343A1 (en) Refrigerator, and system and method for controlling same
WO2021149859A1 (en) Lawn mower robot and control method for same
WO2021060808A1 (en) Signal processing device and image display apparatus including same

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22760106

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 22760106

Country of ref document: EP

Kind code of ref document: A1