JP5764950B2 - Product judgment method and product judgment device - Google Patents

Product judgment method and product judgment device Download PDF

Info

Publication number
JP5764950B2
JP5764950B2 JP2011021176A JP2011021176A JP5764950B2 JP 5764950 B2 JP5764950 B2 JP 5764950B2 JP 2011021176 A JP2011021176 A JP 2011021176A JP 2011021176 A JP2011021176 A JP 2011021176A JP 5764950 B2 JP5764950 B2 JP 5764950B2
Authority
JP
Japan
Prior art keywords
article
distance
degree
influence
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011021176A
Other languages
Japanese (ja)
Other versions
JP2012158460A (en
Inventor
康弘 野尻
康弘 野尻
畑瀬 勉
勉 畑瀬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2011021176A priority Critical patent/JP5764950B2/en
Publication of JP2012158460A publication Critical patent/JP2012158460A/en
Application granted granted Critical
Publication of JP5764950B2 publication Critical patent/JP5764950B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明は、積合せ判定方法及び積合せ判定装置に関する。   The present invention relates to a product judgment method and a product judgment device.

野菜や果物などの農作物の物流では、農作物の鮮度を保つために、農作物が流通する過程、例えば倉庫で保管される段階や車両等によって輸送される段階で農作物が保存される環境を適切に保全することに注意が払われる。   In the logistics of agricultural products such as vegetables and fruits, in order to maintain the freshness of the agricultural products, the environment in which the agricultural products are preserved in the process of distributing the agricultural products, for example, when stored in a warehouse or when transported by a vehicle, etc. is appropriately preserved. Care is taken to do.

かかる農作物の保存環境を保全する技術の一例としては、農作物を梱包する梱包体と同梱されたセンサ内蔵のタグから、タグ用受信器、通信機器を経由して、各種センサによって検出されたデータを情報収集センタに収集する管理システムが挙げられる。この情報処理センタでは、タグに内蔵された温度センサ、湿度センサや衝撃センサなどのセンサから収集した温度、湿度や衝撃などが保存環境判定のしきい値で決められた範囲を外れたならば、そのタグを輸送するトラックに警報を通知する。このため、管理システムによれば、農作物が保管される環境の温度や湿度などを適切に保つことができる。   As an example of the technology for preserving the storage environment for such crops, data detected by various sensors from a tag with a built-in sensor packed with a package for packing the crops, via a tag receiver and a communication device. And a management system that collects information at an information collection center. In this information processing center, if the temperature, humidity, shock, etc. collected from the temperature sensor, humidity sensor, impact sensor, etc. built in the tag are outside the range determined by the storage environment judgment threshold, An alarm is sent to the truck carrying the tag. For this reason, according to the management system, the temperature, humidity, etc. of the environment where the agricultural products are stored can be appropriately maintained.

特開2002−358591号公報JP 2002-358591 A 特開2007−219730号公報JP 2007-219730 A

しかしながら、上記の従来技術では、依然として、流通過程での品質低下を防止することができないという問題がある。   However, the above-described conventional technology still has a problem that it is not possible to prevent quality deterioration during the distribution process.

すなわち、上記の管理システムは、あくまで農作物が保存される環境を適切に保つ支援を行うものに過ぎず、流通の過程で農作物の鮮度が損なわれることについては考慮していない。一例としては、農作物によって放出される植物ホルモンの一種である、エチレンガスによる影響が挙げられる。植物は収穫された後も呼吸をしており、その過程でエチレンガスを放出する。エチレンガスは、特定の植物の成長を促進させる作用を持つ。例えば、エチレンガスにより鮮度が低下しやすい農作物がエチレンガスを産出する農作物の近くに積み込まれた場合には、前者の農作物が後者の農作物によって産出されるエチレンガスの影響で鮮度が低下してしまう。   In other words, the management system described above merely provides support for appropriately maintaining the environment in which the crop is stored, and does not consider that the freshness of the crop is impaired during the distribution process. An example is the effect of ethylene gas, a type of plant hormone released by agricultural crops. Plants still breathe after they are harvested, releasing ethylene gas in the process. Ethylene gas has the effect of promoting the growth of certain plants. For example, if a crop whose freshness is likely to be reduced by ethylene gas is loaded near a crop that produces ethylene gas, the former crop will be affected by the ethylene gas produced by the latter crop. .

なお、ここでは、農作物が産出するエチレンガスによって他の農作物の鮮度が低下する場合を説明したが、物品によって産出されるにおい成分が他の物品に付着する場合にも同様に流通過程での品質低下という問題が生じる。   Here, the case where the freshness of other crops is reduced by the ethylene gas produced by the crops has been described, but the quality in the distribution process is also the same when the odorous components produced by the products adhere to other products. The problem of degradation occurs.

開示の技術は、上記に鑑みてなされたものであって、流通過程での品質低下を防止できる積合せ判定方法及び積合せ判定装置を提供することを目的とする。   The disclosed technique has been made in view of the above, and an object thereof is to provide a product determination method and a product determination device that can prevent quality degradation in a distribution process.

本願の開示する積合せ判定方法は、コンピュータが、所定の領域内に置かれた複数の物品を識別する処理を実行する。さらに、前記コンピュータが、前記複数の物品のうちの第1の物品及び第2の物品の識別結果に応じて、記憶部から前記第1の物品の産出度及び前記第2の物品の影響度を取得する処理を実行する。前記記憶部には、物品ごとに前記物品が産出するガスの産出度と前記物品がガスによって影響を受ける影響度とが記憶される。さらに、前記コンピュータが、前記第1の物品及び前記第2の物品が、前記第1の物品の産出度及び前記第2の物品の影響度によって定まる範囲内に積まれたか否かを判定する処理を実行する。さらに、前記コンピュータが、前記範囲内にあると判定された場合に報知を実行するように制御する処理を実行する。   In the product determination method disclosed in the present application, a computer executes a process of identifying a plurality of articles placed in a predetermined area. Further, the computer determines the output degree of the first article and the influence degree of the second article from the storage unit according to the identification result of the first article and the second article among the plurality of articles. Execute the acquisition process. The storage unit stores, for each article, a gas production level produced by the article and an influence level of the article affected by the gas. Further, the computer determines whether or not the first article and the second article are stacked within a range determined by the production degree of the first article and the influence degree of the second article. Execute. Further, the computer executes a process of controlling to perform notification when it is determined that the computer is within the range.

本願の開示する積合せ判定方法の一つの態様によれば、流通過程での品質低下を防止できるという効果を奏する。   According to one aspect of the product determination method disclosed in the present application, there is an effect that it is possible to prevent quality degradation during the distribution process.

図1は、実施例1に係る積合せ判定システムの構成を示す図である。FIG. 1 is a diagram illustrating a configuration of a product determination system according to the first embodiment. 図2は、実施例1に係る積合せ判定サーバの構成を示すブロック図である。FIG. 2 is a block diagram illustrating the configuration of the product determination server according to the first embodiment. 図3は、品物情報記憶部12に記憶される情報の構成例を示す図である。FIG. 3 is a diagram illustrating a configuration example of information stored in the product information storage unit 12. 図4は、産出率記憶部13aに記憶される情報の構成例を示す図である。FIG. 4 is a diagram illustrating a configuration example of information stored in the output rate storage unit 13a. 図5は、影響度記憶部13bに記憶される情報の構成例を示す図である。FIG. 5 is a diagram illustrating a configuration example of information stored in the influence storage unit 13b. 図6は、積荷記憶部14aに記憶される情報の構成例を示す図である。FIG. 6 is a diagram illustrating a configuration example of information stored in the load storage unit 14a. 図7は、距離記憶部14bに記憶される情報の構成例を示す図である。FIG. 7 is a diagram illustrating a configuration example of information stored in the distance storage unit 14b. 図8は、警告リストの一例を示す図である。FIG. 8 is a diagram illustrating an example of a warning list. 図9は、報知画面の一例を示す図である。FIG. 9 is a diagram illustrating an example of a notification screen. 図10は、報知画面の一例を示す図である。FIG. 10 is a diagram illustrating an example of a notification screen. 図11は、報知画面の一例を示す図である。FIG. 11 is a diagram illustrating an example of a notification screen. 図12は、実施例1に係る積荷管理処理の手順を示すフローチャートである。FIG. 12 is a flowchart illustrating the procedure of the load management process according to the first embodiment. 図13は、実施例1に係る報知制御処理の手順を示すフローチャートである。FIG. 13 is a flowchart illustrating a procedure of notification control processing according to the first embodiment. 図14は、応用例の一例を示す図である。FIG. 14 is a diagram illustrating an example of an application example. 図15は、実施例1及び実施例2に係る積合せ判定プログラムを実行するコンピュータの一例について説明するための図である。FIG. 15 is a schematic diagram illustrating an example of a computer that executes a product determination program according to the first and second embodiments.

以下に、本願の開示する積合せ判定方法及び積合せ判定装置の実施例を図面に基づいて詳細に説明する。なお、この実施例は開示の技術を限定するものではない。そして、各実施例は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。   Embodiments of the product judgment method and product judgment device disclosed in the present application will be described below in detail with reference to the drawings. Note that this embodiment does not limit the disclosed technology. Each embodiment can be appropriately combined within a range in which processing contents are not contradictory.

[システム構成]
まず、本実施例に係る積合せ判定システムのシステム構成について説明する。図1は、実施例1に係る積合せ判定システムの構成を示す図である。図1に示す積合せ判定システムには、カメラ30と、携帯端末50と、積合せ判定サーバ10とが収容される。なお、図1の例では、データセンタ1内の積合せ判定サーバ10がカメラ30によって車両3の荷台が撮像された画像から鮮度低下のおそれがある農作物の積合せが作業者5によってなされたか否かを判定する場合を想定する。
[System configuration]
First, the system configuration of the product determination system according to the present embodiment will be described. FIG. 1 is a diagram illustrating a configuration of a product determination system according to the first embodiment. The product determination system shown in FIG. 1 accommodates a camera 30, a portable terminal 50, and a product determination server 10. In the example of FIG. 1, whether or not the product 5 has been stacked by the worker 5 from the image obtained by the product determination server 10 in the data center 1 in which the loading platform of the vehicle 3 is captured by the camera 30. Assume a case of determining whether or not.

これらカメラ30及び携帯端末50と積合せ判定サーバ10との間は、ネットワーク7を介して通信可能に接続される。かかるネットワーク7の一例としては、インターネット(Internet)、LAN(Local Area Network)やVPN(Virtual Private Network)などの通信網が挙げられる。ネットワーク7は有線通信に限るものではなく、無線通信であっても構わない。なお、図1の例では、カメラ30及び携帯端末50を1つずつ収容する場合を例示したが、少なくとも1組のカメラ30及び携帯端末50を収容していればよく、任意の組数のカメラ30及び携帯端末50が収容される場合に適用することができる。   The camera 30 and the portable terminal 50 are connected to the product determination server 10 via the network 7 so that they can communicate with each other. Examples of the network 7 include communication networks such as the Internet (Internet), LAN (Local Area Network), and VPN (Virtual Private Network). The network 7 is not limited to wired communication, and may be wireless communication. In the example of FIG. 1, the case where the camera 30 and the portable terminal 50 are accommodated one by one is illustrated, but it is sufficient that at least one set of the camera 30 and the portable terminal 50 is accommodated. 30 and the portable terminal 50 can be applied.

このうち、カメラ30は、画像を撮像する撮像装置である。かかるカメラ30の一例としては、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)などを用いた撮像装置が挙げられる。   Among these, the camera 30 is an imaging device that captures an image. An example of such a camera 30 is an imaging device using a charge coupled device (CCD), a complementary metal oxide semiconductor (CMOS), or the like.

さらに、カメラ30は、ネットワークカメラとして機能し、車両3の荷台を撮像した画像を積合せ判定サーバ10に送信する。かかるカメラ30の設置例としては、作業者5が荷物を車両3の荷台へ積み込んだり、荷台内で積み直したり、荷台から車外へ積み出したりする作業の様子を撮像可能なように、車両3の荷台を俯瞰できる位置に設置される。なお、荷物が載置された位置を画像解析しやすい荷台画像を得るために、カメラ30としてステレオカメラを採用してもよく、カメラ30に広角レンズを用いることとしてもよく、カメラ30の取り付け台の向きを水平回転または仰角調整できるようにしてもよい。   Furthermore, the camera 30 functions as a network camera, and transmits an image obtained by capturing the loading platform of the vehicle 3 to the product determination server 10. As an example of installation of such a camera 30, the operator 5 can take an image of the operation of loading a load on the loading platform of the vehicle 3, loading it in the loading platform, and loading it from the loading platform to the outside of the vehicle. It is installed at a position where you can look down on the loading platform. Note that a stereo camera may be employed as the camera 30 or a wide-angle lens may be used as the camera 30 in order to obtain a loading platform image that facilitates image analysis of the position where the load is placed. The orientation may be horizontally rotated or the angle of elevation can be adjusted.

ここで、図1に示す例では、荷物として梱包された農作物が車両3の荷台に積まれて輸送されるものとし、1つの荷物には同種の農作物が梱包される場合を想定して以下の説明を行う。なお、以下では、カメラ30によって車両3の荷台が撮像された画像のことを「荷台画像」と表現するとともに、車両3の荷台に積み込まれた荷物のことを「積荷」と表現する場合がある。   Here, in the example shown in FIG. 1, assuming that the agricultural products packed as luggage are loaded on the loading platform of the vehicle 3 and transported, the same kind of agricultural products is packed in one luggage as follows. Give an explanation. In the following, an image of the loading platform of the vehicle 3 captured by the camera 30 is expressed as “loading platform image”, and a load loaded on the loading platform of the vehicle 3 may be expressed as “loading”. .

携帯端末50は、作業者5によって携帯される端末装置である。かかる携帯端末50の一態様としては、荷物の管理、例えば入荷、集荷、積込みや納品の検品を行うために、流通業者によって作業者5に貸与または支給された業務用の携帯端末を採用できる。他の一態様としては、携帯電話機、PHS(Personal Handyphone System)やPDA(Personal Digital Assistant)などの移動体端末を採用することもできる。なお、図1の例では、携帯端末50として業務用の携帯端末や移動体端末などを採用する場合を例示したが、作業者5に情報伝達可能な装置であればよく、必ずしも携帯端末である必要はない。例えば、車載端末、車載のランプやスピーカなどを採用することとしてもよい。   The portable terminal 50 is a terminal device that is carried by the worker 5. As one mode of the portable terminal 50, a portable terminal for business use that is lent or supplied to the worker 5 by a distributor for managing the package, for example, receiving, collecting, loading, or checking the delivery can be adopted. As another aspect, a mobile terminal such as a mobile phone, a PHS (Personal Handyphone System), or a PDA (Personal Digital Assistant) may be employed. In the example of FIG. 1, the case where a business-use portable terminal, a mobile terminal, or the like is employed as the portable terminal 50 is illustrated. However, any device that can transmit information to the worker 5 may be used, and the portable terminal 50 is not necessarily a portable terminal. There is no need. For example, an in-vehicle terminal, an in-vehicle lamp or a speaker may be employed.

積合せ判定サーバ10は、車両3の荷台に積み込まれた荷物の積合せが品質低下につながるおそれがあるか否かを判定するサービスを提供するネットワーク上のコンピュータである。一例としては、積合せ判定サーバ10は、車両3の荷台に搭載されたカメラ30によって車両3の荷台が撮像された荷台画像を取得する。かかる荷台画像を経時的に取得した場合には、車両3によって輸送されている状態が写った画像が含まれる他、作業者5によって積込み作業、積直し作業や積出し作業がなされた状態が写った画像が含まれる。積合せ判定サーバ10は、荷台画像の中のうち積込み作業または積直し作業が写った荷台画像を用いて、荷物が作業者5により農作物の鮮度低下のおそれがある状態で積み込まれたか、或いは積み直されたか否かを判定する。そして、積合せ判定サーバ10は、荷物が作業者5により農作物の鮮度低下のおそれがある状態で積み込まれたか、もしくは積み直された場合に、表示出力または音声出力による報知を携帯端末50に実行させる。   The product determination server 10 is a computer on a network that provides a service for determining whether or not the product of the cargo loaded on the loading platform of the vehicle 3 may lead to quality degradation. As an example, the product determination server 10 acquires a loading platform image in which the loading platform of the vehicle 3 is imaged by the camera 30 mounted on the loading platform of the vehicle 3. When such a cargo bed image is acquired over time, an image showing a state of being transported by the vehicle 3 is included, and a state in which loading work, reloading work, and loading work are performed by the worker 5 is shown. Contains images. The loading determination server 10 uses the loading platform image in which the loading operation or the reloading operation is reflected in the loading platform image, or the loading is performed in a state where there is a risk that the freshness of the crops may be reduced by the worker 5. It is determined whether or not it has been corrected. Then, when the load is loaded or reloaded by the operator 5 in a state where the freshness of the crop is likely to be lowered, the product determination server 10 performs notification by display output or voice output to the portable terminal 50. Let

ここで、本実施例に係る積合せ判定サーバ10は、車両3の荷台に積まれた荷物に梱包された農作物を識別する。そして、本実施例に係る積合せ判定サーバ10は、農作物ごとに農作物が梱包された荷物が産出するエチレンガスの産出度と農作物が梱包された荷物がエチレンガスによって影響を受ける影響度とを記憶する記憶部を参照する。続いて、本実施例に係る積合せ判定サーバ10は、第1の荷物及び第2の荷物の識別結果に応じて、先の記憶部から第1の荷物の産出度及び第2の荷物の影響度を取得する。さらに、本実施例に係る積合せ判定サーバ10は、第1の荷物及び第2の荷物が、第1の荷物の産出度及び第2の荷物の影響度によって定まる範囲内に積まれたか否かを判定する。その上で、本実施例に係る積合せ判定サーバ10は、第1の荷物及び第2の荷物が先の範囲内にあると判定された場合に報知を実行するように制御する。   Here, the combination determination server 10 according to the present embodiment identifies the crops packed in the luggage loaded on the loading platform of the vehicle 3. Then, the stack determination server 10 according to the present embodiment stores the degree of ethylene gas produced by the package packed with the crop for each crop and the degree of influence that the package packed with the crop is affected by the ethylene gas. Refer to the storage unit. Subsequently, according to the identification result of the first package and the second package, the product determination server 10 according to the present embodiment determines the first package output level and the influence of the second package from the previous storage unit. Get the degree. Furthermore, the product determination server 10 according to the present embodiment determines whether or not the first package and the second package have been loaded within a range determined by the production degree of the first package and the influence level of the second package. Determine. In addition, the product determination server 10 according to the present embodiment controls to execute notification when it is determined that the first package and the second package are within the previous range.

このように、本実施例に係る積合せ判定サーバ10は、車両3の荷台に積まれる荷物に梱包された農作物を識別し、エチレンガスを出す農作物が梱包された荷物とエチレンガスにより鮮度が低下する農作物が梱包された荷物とが近くに積まれた場合に報知を実行する。   As described above, the stack determination server 10 according to the present embodiment identifies the crops packed in the luggage loaded on the loading platform of the vehicle 3, and the freshness is reduced due to the packing of the crops that produce ethylene gas and the ethylene gas. Notification is executed when a load packed with agricultural products to be stacked is stacked nearby.

このとき、例えば、荷物同士を離して積むよう作業者5に促す警告を行った場合には、車両3の荷台でエチレンガスを出す農作物が梱包された荷物、あるいはエチレンガスにより鮮度が低下する荷物のいずれかが作業者5によって離れた場所に積み直される。したがって、本実施例に係る積合せ判定サーバ10によれば、荷物に梱包された農作物の鮮度が輸送中に低下するのを防止できる。   At this time, for example, when a warning is given to the operator 5 to load the packages apart, the packages in which crops that produce ethylene gas are packed on the loading platform of the vehicle 3 or packages whose freshness decreases due to ethylene gas are stored. Any one of the above is reloaded by the operator 5 at a remote location. Therefore, according to the product determination server 10 according to the present embodiment, it is possible to prevent the freshness of the crops packed in the luggage from being lowered during transportation.

[積合せ判定装置の構成]
続いて、本実施例に係る積合せ判定サーバの機能的な構成について説明する。図2は、実施例1に係る積合せ判定サーバの構成を示すブロック図である。図2に示すように、積合せ判定サーバ10は、通信I/F(interface)部11と、品物情報記憶部12と、産出率記憶部13aと、影響度記憶部13bと、積荷記憶部14aと、距離記憶部14bとを有する。さらに、積合せ判定サーバ10は、画像解析部15と、取得部16と、導出部17と、判定部18と、報知制御部19とを有する。なお、積合せ判定サーバ10は、図2に示した機能部以外にも既知のサーバ装置が有する各種の機能部、例えば各種の入力デバイスや音声出力デバイスなどの機能を有するものとする。
[Configuration of product judgment device]
Subsequently, a functional configuration of the product determination server according to the present embodiment will be described. FIG. 2 is a block diagram illustrating the configuration of the product determination server according to the first embodiment. As shown in FIG. 2, the product determination server 10 includes a communication I / F (interface) unit 11, an item information storage unit 12, a production rate storage unit 13a, an influence degree storage unit 13b, and a load storage unit 14a. And a distance storage unit 14b. Further, the product determination server 10 includes an image analysis unit 15, an acquisition unit 16, a derivation unit 17, a determination unit 18, and a notification control unit 19. In addition to the functional units shown in FIG. 2, the product determination server 10 has various functional units included in a known server device, such as various input devices and audio output devices.

このうち、通信I/F部11は、他の装置、例えばカメラ30や携帯端末50との間で通信制御を行うインタフェースである。例えば、通信I/F部11は、カメラ30から荷台画像を受信したり、後述の報知制御部19によって生成された報知用の画面や音声などの情報を携帯端末50へ送信したりする。かかる通信I/F部11の一態様としては、LANカードなどのネットワークインタフェースカード(NIC:Network Interface Card)やモデムを採用できる。   Among these, the communication I / F unit 11 is an interface that performs communication control with other devices such as the camera 30 and the portable terminal 50. For example, the communication I / F unit 11 receives a loading platform image from the camera 30 or transmits information such as a notification screen and sound generated by the notification control unit 19 described later to the portable terminal 50. As an aspect of the communication I / F unit 11, a network interface card (NIC) such as a LAN card or a modem can be employed.

品物情報記憶部12は、農作物の品物情報を記憶する記憶部である。一例として、品物情報記憶部12は、荷台画像から解析された荷物がどの農作物を梱包したものであるのかを識別するために、後述の画像解析部15によって参照される。   The item information storage unit 12 is a storage unit that stores item information of crops. As an example, the item information storage unit 12 is referred to by an image analysis unit 15 to be described later in order to identify which crop is packed by the package analyzed from the loading platform image.

かかる品物情報の一態様としては、農作物の品名及びその品名コードが対応付けられたデータを採用できる。かかる「品名」は、野菜や果物などの農作物の名称であり、農作物が梱包された荷物に表示されているものとする。以下では、農作物が直方体の段ボールによって梱包される場合を想定して説明を行う。この場合には、段ボールを形成する直方体の側面や天面などに「品名」が表示される。また、「品名コード」は、農作物の品名を特定するために予め付与されたコードを指す。これら「品名」及び「品名コード」の対応付けは、荷台画像から解析された荷物の「品名」を検索キーとしてその品名に対応する「品名コード」を後述の画像解析部15に検索させるためになされる。   As one aspect of such item information, data in which the item name of the agricultural product and its item name code are associated can be employed. The “product name” is a name of a crop such as a vegetable or a fruit, and is displayed on a package in which the crop is packed. In the following, description will be made on the assumption that agricultural products are packed with rectangular parallelepiped cardboard. In this case, the “product name” is displayed on the side or top surface of the rectangular parallelepiped forming the cardboard. The “product name code” indicates a code assigned in advance to specify the product name of the agricultural product. These “product name” and “product name code” are associated with each other in order to cause the image analysis unit 15 described later to search for a “product name code” corresponding to the product name using the “product name” of the package analyzed from the cargo bed image as a search key. Made.

図3は、品物情報記憶部12に記憶される情報の構成例を示す図である。図3の例では、品名「りんご」の品名コードが「001」であり、品名「すいか」の品名コードが「002」であり、また、品名「バナナ」の品名コードが「003」であることを示す。なお、図3〜図5の例では、日本語の品名を例示したが、外国から輸入された農作物や外国に輸出する農作物が荷物に表示される場合には、輸入先または輸出先の言語の品名を定義すればよい。また、図3の例では、農作物として果物の品名及び品名コードを例示したが、果物以外にも野菜及び花卉などの他の農作物の品名及び品名コードを定義しておくこともできる。また、上記の品物情報は、必ずしもテーブル形式で格納される必要はなく、他の形式で格納することとしてもかまわない。   FIG. 3 is a diagram illustrating a configuration example of information stored in the product information storage unit 12. In the example of FIG. 3, the product name code of the product name “apple” is “001”, the product name code of the product name “watermelon” is “002”, and the product name code of the product name “banana” is “003”. Indicates. In addition, in the examples of FIGS. 3 to 5, Japanese product names are illustrated. However, when agricultural products imported from overseas or agricultural products exported to foreign countries are displayed on the package, the language of the import destination or export destination Define the product name. In the example of FIG. 3, the product name and product name code of the fruits are illustrated as the agricultural products. However, product names and product name codes of other agricultural products such as vegetables and flowers can be defined in addition to the fruits. Further, the item information is not necessarily stored in a table format, and may be stored in another format.

産出率記憶部13aは、荷物によるエチレンガスの産出率情報を記憶する記憶部である。一例として、産出率記憶部13aは、農作物の品名コードが得られた荷物のエチレンガスの産出率を取得するために、後述の登録部15cや取得部16によって参照される。   The production rate storage unit 13a is a storage unit that stores production rate information of ethylene gas due to luggage. As an example, the output rate storage unit 13a is referred to by the registration unit 15c and the acquisition unit 16 described later in order to acquire the ethylene gas output rate of the cargo from which the product name code of the crop is obtained.

かかる産出率情報の一態様としては、品名コード及び産出率が対応付けられたデータを採用できる。ここで言う「産出率」とは、所定の容量の荷物に梱包された農作物が総量として産出するエチレンガスの濃度(例えば、ppm:Parts Per Million)を指す。なお、ここでは、荷物に梱包された農作物が総量として産出するエチレンガスの濃度を産出率として記憶する場合を例示するが、農作物1つあたりのエチレンガスの濃度を産出率として記憶することとしてもよい。また、荷物の容量は、任意の容量であってよく、荷物の梱包のサイズを変更することにより増減される。   As one aspect of the output rate information, data in which the product name code and the output rate are associated can be employed. The “production rate” here refers to the concentration (for example, ppm: Parts Per Million) of ethylene gas produced as a total amount of crops packed in a predetermined capacity of luggage. In addition, although the case where the concentration of ethylene gas produced as the total amount of the crops packed in the baggage is stored as an output rate is illustrated here, the concentration of ethylene gas per crop may be stored as the output rate. Good. Further, the capacity of the package may be an arbitrary capacity, and is increased or decreased by changing the size of the package of the package.

図4は、産出率記憶部13aに記憶される情報の構成例を示す図である。図4に示す産出率の値「A1」、「A2」及び「A3」の大小関係は、「A3<A2<A1」であるものとする。図4の例では、品名コード「001」のりんごを梱包した荷物のエチレンガスの産出率が「A1(ppm)」であることを示す。また、図4の例では、品名コード「002」のすいかを梱包した荷物のエチレンガスの産出率が「A2(ppm)」であることを示す。さらに、図4の例では、品名コード「003」のバナナを梱包した荷物のエチレンガスの産出率が「A3(ppm)」であることを示す。なお、ここでは、産出率としてエチレンガスの濃度を用いる場合を例示したが、荷物が産出するエチレンガスの量を表す指標であればよく、度数やレベルによって指し表される産出度であってもかまわない。また、上記の産出率情報は、必ずしもテーブル形式で格納される必要はなく、他の形式で格納することとしてもかまわない。   FIG. 4 is a diagram illustrating a configuration example of information stored in the output rate storage unit 13a. The magnitude relationship between the output rate values “A1”, “A2”, and “A3” shown in FIG. 4 is assumed to be “A3 <A2 <A1”. The example of FIG. 4 indicates that the production rate of ethylene gas in a package packed with apples with the product name code “001” is “A1 (ppm)”. Further, in the example of FIG. 4, it is shown that the ethylene gas production rate of the package packed with the watermelon having the product name code “002” is “A2 (ppm)”. Furthermore, in the example of FIG. 4, it is shown that the ethylene gas production rate of a package packed with bananas having the product name code “003” is “A3 (ppm)”. In addition, although the case where the density | concentration of ethylene gas was used as an output rate was illustrated here, it should just be the parameter | index showing the quantity of the ethylene gas which a load produces, and even if it is the output degree indicated by the frequency and the level It doesn't matter. The output rate information does not necessarily need to be stored in a table format, and may be stored in another format.

影響度記憶部13bは、荷物に梱包された農作物がエチレンガスによって影響を受ける度合いを示す影響度情報を記憶する記憶部である。一例として、影響度記憶部13bは、農作物の品名コードが得られた荷物のエチレンガスによる影響度を取得するために、後述の登録部15cや取得部16によって参照される。   The influence degree storage unit 13b is a storage part that stores influence degree information indicating the degree to which the agricultural products packed in the luggage are affected by the ethylene gas. As an example, the influence level storage unit 13b is referred to by a registration unit 15c and an acquisition unit 16 described later in order to acquire the degree of influence due to ethylene gas of a package from which a product name code of a crop is obtained.

かかる影響度情報の一態様としては、品名コード、影響度及び影響内容が対応付けられたデータを採用できる。ここで言う「影響度」とは、農作物が梱包された所定の容量の荷物の総体がエチレンガスによって影響を受ける度合いを表す指標であり、例えば、任意の数の段階で順位付けされたレベル値を採用できる。また、「影響内容」とは、荷物に梱包された農作物がエチレンガスの影響を受けることにより損なわれる鮮度の内容を指す。   As an aspect of the influence degree information, data in which the product name code, the influence degree, and the influence content are associated can be employed. The “influence degree” here is an index representing the degree to which the total amount of the cargo of a predetermined capacity in which agricultural products are packed is affected by ethylene gas. For example, a level value ranked in an arbitrary number of stages Can be adopted. The “effect content” refers to the content of freshness that is impaired by the effects of ethylene gas on the crops packed in the luggage.

図5は、影響度記憶部13bに記憶される情報の構成例を示す図である。図5に示す例では、1〜5の5段階で順位付けされたレベル値を影響度として採用し、レベル値が低いほど農作物がエチレンガスによる影響を受けやすいことを表すものとする。   FIG. 5 is a diagram illustrating a configuration example of information stored in the influence storage unit 13b. In the example shown in FIG. 5, level values ranked in five levels of 1 to 5 are adopted as the degree of influence, and the lower the level value, the more likely the crops are affected by ethylene gas.

図5の例では、品名コード「001」のりんごを梱包した荷物の影響度が「2」であり、りんごがエチレンガスの影響を受けた場合には表皮に日焼けが生じることを示す。また、図5の例では、品名コード「002」のすいかを梱包した荷物の影響度が「3」であり、すいかがエチレンガスの影響を受けた場合には腐敗が進むことを示す。さらに、図5の例では、品名コード「003」のバナナを梱包した荷物の影響度が「1」であり、バナナがエチレンガスの影響を受けた場合には腐敗が進むことを示す。なお、図5の例では、影響内容として日焼けや腐敗を例示したが、影響内容は図示のものに限定されず、日焼けや腐敗以外にも各々の農作物に合った影響内容、例えばカビや軟化が登録される。また、上記の影響度情報は、必ずしもテーブル形式で格納される必要はなく、他の形式で格納することとしてもかまわない。   In the example of FIG. 5, the degree of influence of a package packed with apples with the product name code “001” is “2”, and when the apples are affected by ethylene gas, the skin is tanned. Further, in the example of FIG. 5, the impact degree of the package packed with the watermelon having the product name code “002” is “3”, and when the watermelon is affected by the ethylene gas, the corruption proceeds. Further, in the example of FIG. 5, the influence degree of the package packed with the banana with the product name code “003” is “1”, and when the banana is affected by ethylene gas, the rot progresses. In the example of FIG. 5, tanning and rot are illustrated as the influence contents, but the influence contents are not limited to those shown in the figure, and other than the tanning and rot, the influence contents suitable for each crop such as mold and softening are present. be registered. Further, the above-mentioned influence degree information does not necessarily need to be stored in a table format, and may be stored in another format.

なお、図4及び図5の例では、積合せ判定サーバ10が農作物の産出率及び影響度を産出率記憶部13a及び影響度記憶部13bの2つに分けて保持する場合を例示したが、開示の装置はこれに限定されない。例えば、開示の装置では、産出率記憶部13a及び影響度記憶部13bの2つの記憶部を1つに統合した記憶部、例えば農作物の品名コードごとに産出率及び影響度を記憶する記憶部を保持することとしてもかまわない。   In the example of FIGS. 4 and 5, the product determination server 10 exemplifies the case where the output rate and the impact level of the crop are separately divided into the output rate storage unit 13a and the impact level storage unit 13b. The disclosed apparatus is not limited to this. For example, in the disclosed apparatus, a storage unit that integrates two storage units, namely, the output rate storage unit 13a and the influence degree storage unit 13b, for example, a storage unit that stores the output rate and the influence degree for each product name code of a crop. You can keep it.

積荷記憶部14aは、車両3の荷台に積み込まれた荷物の各種情報を記憶する記憶部である。一例として、積荷記憶部14aは、車両3の荷台に積み込まれた荷物の位置、産出率及び影響度などの情報を管理するために用いられる。かかる積荷記憶部14aの一態様としては、積込番号、品名コード、積荷位置、産出率及び影響度が対応付けられたデータが記憶される。   The load storage unit 14 a is a storage unit that stores various pieces of information on the luggage loaded on the loading platform of the vehicle 3. As an example, the load storage unit 14a is used to manage information such as the position, the output rate, and the degree of influence of the load loaded on the loading platform of the vehicle 3. As an aspect of the cargo storage unit 14a, data in which a loading number, a product name code, a cargo position, a production rate, and an influence degree are associated is stored.

ここで言う「積込番号」は、荷物が車両3の荷台に積み込まれた順に後述の画像解析部15aによって採番されるシーケンス番号を指す。かかる積込番号の採番例としては、初めに積み込まれた荷物に積込番号「01」が採番され、以降に積み込まれた荷物に積込番号「02」、・・・、積込番号「XX」が昇順に採番される。このように、積荷に連番を付与した場合には、荷物が積み込まれた順番も積荷記憶部14aによって管理させることができる。なお、ここでは、積込番号を昇順に採番する場合を例示したが、積込番号を降順に採番してもよく、また、異なる積込番号をランダムに採番することとしてもよい。   The “loading number” here refers to a sequence number assigned by an image analysis unit 15a (to be described later) in the order in which the load is loaded on the loading platform of the vehicle 3. As an example of the numbering of the loading number, the loading number “01” is assigned to the package loaded first, and the loading number “02”,... “XX” is numbered in ascending order. As described above, when serial numbers are assigned to the loads, the order in which the loads are loaded can be managed by the load storage unit 14a. In addition, although the case where the loading numbers are numbered in ascending order is illustrated here, the loading numbers may be numbered in descending order, or different loading numbers may be randomly numbered.

また、「積荷位置」は、荷物が車両3の荷台に積まれた位置を指し、一例として、積荷が車両3の荷台の中で占める占有領域を積荷の重心位置で代表させる場合を想定する。かかる「積荷の重心位置」は、車両3の荷台内の任意の点を原点(0,0,0)と定義した荷台のローカル座標系で表現される座標(X,Y,Z)であるものとする。一例として、荷台のローカル座標系は、XY平面が水平面であるものとし、X軸が荷台の長手方向を、Y軸が短手方向を、Z軸がXY平面に鉛直な高さ方向を表現する場合を想定する。   The “loading position” indicates a position where the load is loaded on the loading platform of the vehicle 3. As an example, it is assumed that the occupied area occupied by the loading in the loading platform of the vehicle 3 is represented by the center of gravity position of the loading. The “position of gravity of the load” is a coordinate (X, Y, Z) expressed in the local coordinate system of the loading platform in which an arbitrary point in the loading platform of the vehicle 3 is defined as the origin (0, 0, 0). And As an example, in the local coordinate system of the loading platform, the XY plane is a horizontal plane, the X axis represents the longitudinal direction of the loading platform, the Y axis represents the short direction, and the Z axis represents the height direction perpendicular to the XY plane. Assume a case.

かかる積荷位置が登録される局面の一態様としては、車両3の荷台に新たな荷物が積み込まれた場合に、後述の画像解析部15によって荷台画像から解析された積荷位置が登録されるケースが挙げられる。また、積荷位置が更新される局面の一態様としては、積荷が別の位置に積み直された場合に、後述の画像解析部15によって荷台画像から解析された積直し後の積荷位置を積直し前の積荷位置に上書きして更新されるケースが挙げられる。また、積荷位置が参照される局面の一態様としては、後述の判定部18によって荷物の積合せを判定させるのに先立って積荷間の距離を導出するために、後述の導出部17によって積荷位置が読み出されるケースが挙げられる。   As one aspect of the aspect in which such a loading position is registered, there is a case where when a new load is loaded on the loading platform of the vehicle 3, the loading position analyzed from the loading platform image by the image analysis unit 15 described later is registered. Can be mentioned. In addition, as one aspect of the situation in which the load position is updated, when the load is reloaded at another position, the load position after the reloading analyzed from the loading platform image by the image analysis unit 15 described later is reloaded. There is a case where it is updated by overwriting the previous loading position. In addition, as one aspect of the situation in which the load position is referred to, in order to derive the distance between the loads before the determination unit 18 described later determines the loading of the load, the load position is determined by the release unit 17 described later. Is read.

図6は、積荷記憶部14aに記憶される情報の構成例を示す図である。図6の例では、車両3の荷台に最初に積み込まれた品名コード「001」のりんごの積荷位置が(X1,Y1,Z1)であることを示す。さらに、りんごが梱包された積荷の産出率が「A1(ppm)」であり、積荷に梱包されたりんごの影響度が「2」であることを示す。また、図6の例では、車両3の荷台に2番目に積み込まれた品名コード「002」のすいかの積荷位置が(X2,Y2,Z2)であることを示す。さらに、すいかが梱包された積荷の産出率が「A2(ppm)」であり、積荷に梱包されたすいかの影響度が「3」であることを示す。なお、図6の例では、りんご及びすいかの2つの荷物が荷台に積み込まれている場合を例示したが、積荷記憶部14aのエントリ数が2つに固定される訳ではなく、荷台に積み込まれている荷物の数が変化するにしたがってエントリが作成又は削除される。   FIG. 6 is a diagram illustrating a configuration example of information stored in the load storage unit 14a. In the example of FIG. 6, it is indicated that the loading position of the apple with the product name code “001” first loaded on the loading platform of the vehicle 3 is (X1, Y1, Z1). Furthermore, the output rate of the load packed with apples is “A1 (ppm)”, and the influence degree of the apples packed in the load is “2”. Further, in the example of FIG. 6, the loading position of the watermelon of the product name code “002” loaded second on the loading platform of the vehicle 3 is (X2, Y2, Z2). Furthermore, the output rate of the load packed with watermelon is “A2 (ppm)”, and the influence degree of the watermelon packed in the load is “3”. In the example of FIG. 6, the case where two pieces of apple and watermelon are loaded on the loading platform is illustrated. However, the number of entries in the loading storage unit 14 a is not fixed to two, but loaded on the loading platform. Entries are created or deleted as the number of packages being changed changes.

距離記憶部14bは、後述の報知制御部19による警告を実行させる積荷間の警告距離を記憶する記憶部である。一例として、距離記憶部14bは、後述の導出部17によって導出された積荷間の距離と比較する警告距離を得るために、後述の判定部18によって参照される。かかる距離記憶部14bの一態様としては、産出率及び影響度の組合せごとに警告距離が対応付けられたデータが記憶される。   The distance memory | storage part 14b is a memory | storage part which memorize | stores the warning distance between the cargoes which perform the warning by the alerting | reporting control part 19 mentioned later. As an example, the distance storage unit 14b is referred to by the determination unit 18 described later in order to obtain a warning distance to be compared with the distance between the loads derived by the deriving unit 17 described later. As an aspect of the distance storage unit 14b, data in which a warning distance is associated with each combination of output rate and influence degree is stored.

ここで、上記の警告距離は、2つの荷物のうち一方の荷物の産出率及び他方の荷物の影響度に基づいて設定される。このように、警告距離を設定するのに一方の荷物の産出率及び他方の荷物の影響度を用いるのは、一方の荷物の産出率、他方の荷物の影響度及び積荷間の距離の三者が互いに下記のような相関関係を有するからである。すなわち、一方の荷物の産出率が高いほど、他方の荷物の影響度が高いほど、また、2つの積荷の距離が小さいほど、他方の荷物がエチレンガスから受ける影響が大きくなるという相関関係を持つ。よって、一方の荷物の産出率及び他方の荷物の影響度の組合せに対し、他方の荷物の鮮度低下をどの程度許容するかを定めれば、上記の三者の相関関係が定義されたアルゴリズムを用いて、互いの荷物を最低限遠ざけるのが好ましい距離を得ることができる。このようにして得た距離が上記の警告距離として使用される。   Here, the warning distance is set based on the production rate of one of the two packages and the degree of influence of the other package. In this way, the output rate of one package and the influence level of the other package are used to set the warning distance. The output rate of one package, the influence level of the other package, and the distance between loads This is because they have the following correlation with each other. In other words, there is a correlation that the higher the output rate of one baggage, the higher the influence of the other baggage, and the smaller the distance between the two loads, the greater the effect that the other baggage receives from ethylene gas. . Therefore, if the degree to which the freshness of the other baggage is tolerated is determined for the combination of the production rate of one baggage and the influence level of the other baggage, the above three-way correlation algorithm is defined. In use, it is possible to obtain a distance where it is preferable to keep the packages away from each other as much as possible. The distance thus obtained is used as the warning distance.

図7は、距離記憶部14bに記憶される情報の構成例を示す図である。図7に示す産出率「a」、「b」、「c」及び「d」の大小関係は、「d<c<b<a」であるものとする。なお、図7に示す産出率「a」、「b」、「c」及び「d」と、図4に示した品名コード「001」〜「003」の荷物の産出率「A1」、「A2」及び「A3」の大小関係は、「d<A3<c<A2<b<A1<a」であるものとする。   FIG. 7 is a diagram illustrating a configuration example of information stored in the distance storage unit 14b. The magnitude relationship between the output rates “a”, “b”, “c”, and “d” shown in FIG. 7 is assumed to be “d <c <b <a”. It should be noted that the output rates “a”, “b”, “c”, and “d” shown in FIG. 7 and the output rates “A1”, “A2” of the goods with the product name codes “001” to “003” shown in FIG. ”And“ A3 ”are assumed to be“ d <A3 <c <A2 <b <A1 <a ”.

図7の例では、エチレンガスの産出率が区間「a〜b」である場合には、エチレンガスの産出率が区間「b〜c」または区間「c〜d」である場合に比べて、同じ影響度に対応付けられた警告距離であっても長い警告距離が定義される。また、エチレンガスの産出率が区間「b〜c」である場合には、エチレンガスの産出率が区間「c〜d」である場合に比べて、同じ影響度に対応付けられた警告距離であっても長い警告距離が定義される。また、エチレンガスの産出率が区間「c〜d」である場合には、エチレンガスの産出率が区間「a〜b」または区間「b〜c」である場合に比べて、同じ影響度に対応付けられた警告距離であっても短い警告距離が定義される。また、エチレンガスの産出率が同じ区間同士の警告距離を比較した場合には、影響度が高いほど、すなわち影響度のレベル値が低いほど短い警告距離が定義される。   In the example of FIG. 7, when the production rate of ethylene gas is the section “a to b”, compared to the case where the production rate of ethylene gas is the section “b to c” or the section “c to d”, A long warning distance is defined even if the warning distance is associated with the same degree of influence. In addition, when the ethylene gas production rate is in the section “b to c”, the warning distance associated with the same degree of influence is compared to when the ethylene gas production rate is in the section “c to d”. Long warning distances are defined even if they exist. Further, when the ethylene gas production rate is in the section “c to d”, the influence degree is the same as in the case where the ethylene gas production rate is the section “a to b” or the section “b to c”. Even for the associated warning distance, a short warning distance is defined. Further, when comparing the warning distances between sections having the same ethylene gas production rate, a shorter warning distance is defined as the influence degree is higher, that is, as the influence level value is lower.

これら品物情報記憶部12、産出率記憶部13a、影響度記憶部13b、積荷記憶部14a及び距離記憶部14bなどの記憶部には、半導体メモリ素子や記憶装置を採用できる。例えば、半導体メモリ素子としては、VRAM(Video Random Access Memory)、RAM(Random Access Memory)、ROM(Read Only Memory)やフラッシュメモリ(flash memory)などが挙げられる。また、記憶装置としては、ハードディスク、光ディスクなどの記憶装置が挙げられる。   A semiconductor memory element or a storage device can be adopted as the storage unit such as the product information storage unit 12, the output rate storage unit 13a, the influence degree storage unit 13b, the load storage unit 14a, and the distance storage unit 14b. For example, examples of the semiconductor memory element include a video random access memory (VRAM), a random access memory (RAM), a read only memory (ROM), and a flash memory. Examples of the storage device include storage devices such as a hard disk and an optical disk.

画像解析部15は、カメラ30から受信した荷台画像を解析する処理部である。かかる画像解析部15は、図2に示すように、検知部15aと、識別部15bと、登録部15cとをさらに有する。   The image analysis unit 15 is a processing unit that analyzes the loading platform image received from the camera 30. As shown in FIG. 2, the image analysis unit 15 further includes a detection unit 15a, an identification unit 15b, and a registration unit 15c.

このうち、検知部15aは、荷台画像のフレーム間で荷物の動きを検知する処理部である。一例としては、検知部15aは、荷台画像のフレーム間の差分として検出された領域に、予め定義された荷物の梱包に関する特徴、例えば段ボールの色、模様や形状が存在するか否かを監視する。これによって、検知部15aは、作業者5によって動かされる荷物の始動を検知する。そして、検知部15aは、荷台画像のフレーム間で荷物の梱包に関する特徴が検出された場合には、それ以降に荷台画像のフレーム間で差分が検出されなくなるまで荷物の動きを採取する。これによって、検知部15aは、作業者5によって動かされていた荷物の停止を検知する。   Among these, the detection part 15a is a process part which detects the motion of a load between the frames of a loading platform image. As an example, the detection unit 15a monitors whether or not a predetermined feature related to packing of a package, such as a cardboard color, a pattern, or a shape, exists in a region detected as a difference between frames of the loading platform image. . Thereby, the detection unit 15a detects the start of the load moved by the worker 5. Then, when a feature relating to the packing of the package is detected between the frames of the loading platform image, the detection unit 15a collects the movement of the luggage until no difference is detected between the frames of the loading platform image thereafter. As a result, the detection unit 15a detects the stoppage of the load that has been moved by the worker 5.

その後、検知部15aは、荷台画像のフレーム間で差分が検出されなくなった場合に、それまでに荷台画像上で検出されていた荷物の動きが下記の進入軌跡、徘徊軌跡または離脱軌跡のうちいずれの軌跡に該当するかを判定する。かかる判定によって、検知部15aは、荷台画像から荷物の積込み作業、荷物の積直し作業または荷物の積出し作業のうちいずれの作業がなされたのかを検知する。   Thereafter, when no difference is detected between the frames of the loading platform image, the detection unit 15a detects any movement of the load that has been detected on the loading platform image so far from any of the following entry locus, saddle locus, or departure locus. It is determined whether it corresponds to the locus of. Based on this determination, the detection unit 15a detects whether a load loading operation, a load reloading operation, or a load unloading operation has been performed from the loading platform image.

ここで言う「進入軌跡」とは、車両3の荷台の外部、出入り口、荷台の内部の順に荷台内部に向かって進入する軌跡を指す。また、「徘徊軌跡」とは、車両3の荷台の内部を徘徊する軌跡を指す。また、「離脱軌跡」とは、車両3の荷台の内部、出入り口、荷台の外部の順に荷台外部に向かって離脱する軌跡を指す。   The “entry trajectory” here refers to a trajectory entering the inside of the cargo bed in the order of the outside of the cargo bed of the vehicle 3, the doorway, and the inside of the cargo bed. In addition, the “haze trajectory” refers to a trajectory that wanders inside the loading platform of the vehicle 3. Further, the “withdrawal locus” refers to a locus of leaving toward the outside of the loading platform in the order of the inside of the loading platform of the vehicle 3, the entrance / exit, and the outside of the loading platform.

例えば、荷台画像上で検出されていた荷物の動きが「進入軌跡」に該当する場合には、作業者5が車両3の荷台に積み込む積込み作業がなされたと推定できる。この場合には、車両3の荷台に新たに積み込まれた荷物に関する情報を管理するために、登録部15cによって積荷番号が採番され、積荷記憶部14a内に新規エントリが作成される。その後、新規エントリには、荷物から識別された農作物の品名コード、荷物の算出率及び影響度、さらには、荷物の積荷位置が後述の登録部15cによって登録される。   For example, when the movement of the load detected on the loading platform image corresponds to the “entry trajectory”, it can be estimated that the loading work that the worker 5 loads on the loading platform of the vehicle 3 has been performed. In this case, in order to manage information related to the load newly loaded on the loading platform of the vehicle 3, the load number is assigned by the registration unit 15c, and a new entry is created in the load storage unit 14a. Thereafter, in the new entry, the product name code of the crop identified from the package, the calculation rate and the degree of influence of the package, and the load position of the package are registered by the registration unit 15c described later.

また、荷台画像上で検出されていた荷物の動きが「徘徊軌跡」に該当する場合には、作業者5が積荷を荷台内の別の場所に積み直す積直し作業がなされたと推定できる。この場合には、積直しによって変更された荷物の積荷位置を更新するために、後述の登録部15cによって積荷記憶部14a内の荷物の積荷位置が更新される。   In addition, when the movement of the load detected on the loading platform image corresponds to the “徘徊 locus”, it can be estimated that the worker 5 has performed a reloading operation for reloading the loading to another place in the loading platform. In this case, in order to update the load position of the load changed by reloading, the load position of the load in the load storage unit 14a is updated by the registration unit 15c described later.

また、荷台画像上で検出されていた荷物の動きが「離脱軌跡」に該当する場合には、作業者5が積荷を車両3の外へ積み出す積出し作業がなされたと推定できる。この場合には、積出しを検知した荷物に対応する積込番号のエントリ、すなわち積込番号、品名コード、積荷位置、産出率及び影響度を含むレコードが後述の登録部15cによって削除される。   In addition, when the movement of the load detected on the loading platform image corresponds to the “disengagement locus”, it can be estimated that the worker 5 has performed the unloading operation of loading the load out of the vehicle 3. In this case, the entry of the loading number corresponding to the package whose loading has been detected, that is, the record including the loading number, the product name code, the loading position, the production rate, and the degree of influence is deleted by the registration unit 15c described later.

識別部15bは、車両3の荷台に積まれた荷物を識別する処理部である。これを説明すると、識別部15bは、検知部15aによって荷物の積込み又は積直しが検知された場合に、その積荷に表示された文字を認識する。そして、識別部15bは、荷台画像上の積荷から認識した文字認識の結果、すなわち「品名」に対応する農作物の「品名コード」を品物情報記憶部12から検索する。このとき、識別部15bは、検知部15aによって荷物の積込みが検知されていた場合には、品物情報記憶部12から検索した品名コードを検知部15aによって積込みが検出された荷物の積荷番号に対応付けて登録する。一方、識別部15bは、検知部15aによって荷物の積直しが検知されていた場合には、品物情報記憶部12から検索した品名コードを後述の取得部16へ出力する。なお、識別部15bの一態様としては、OCR(Optical Character Reader)が採用される。   The identification unit 15 b is a processing unit that identifies a load loaded on the loading platform of the vehicle 3. Explaining this, the identification unit 15b recognizes the character displayed on the load when the detection unit 15a detects the loading or unloading of the package. Then, the identification unit 15b searches the item information storage unit 12 for the character recognition result recognized from the cargo on the loading platform image, that is, the “item name code” of the crop corresponding to the “item name”. At this time, when the loading of the package is detected by the detection unit 15a, the identification unit 15b corresponds to the load number of the package whose loading is detected by the detection unit 15a, using the product name code retrieved from the product information storage unit 12. Add and register. On the other hand, the identification unit 15b outputs the product name code retrieved from the product information storage unit 12 to the later-described acquisition unit 16 when the reloading of the package is detected by the detection unit 15a. In addition, OCR (Optical Character Reader) is employ | adopted as one aspect | mode of the identification part 15b.

登録部15cは、車両3の荷台に積まれた荷物に関する情報を登録する処理部である。一例としては、登録部15cは、積荷記憶部14aを用いて車両3の荷台に現に積まれている荷物の情報を管理するために、品名コード、算出率、影響度及び積荷位置を積荷記憶部14aに登録したり、あるいは更新したりする。   The registration unit 15 c is a processing unit that registers information regarding the luggage loaded on the loading platform of the vehicle 3. As an example, the registration unit 15c uses the load storage unit 14a to manage the information on the load currently loaded on the loading platform of the vehicle 3, so that the product name code, the calculation rate, the influence degree, and the load position are stored in the load storage unit. 14a is registered or updated.

例えば、検知部15aによって積込みが検知された場合には、登録部15cは、積荷番号を採番し、積荷記憶部14a内に新規エントリを作成する。その後、登録部15cは、識別部15bによって荷物から識別された農作物の品名コードを積荷記憶部14a内の新規のエントリに登録する。また、登録部15cは、積込みが検知された荷物の品名コードに対応する産出率及び影響度を産出率記憶部13a及び影響度記憶部13bから読み出して積荷記憶部14a内の新規エントリに登録する。さらに、登録部15cは、積込みが検知された荷物の荷台画像上の画素位置、例えば荷物の重心が存在する画素位置を解析し、その画素位置を荷台の3次元ローカル座標に変換した上でその積荷位置を積荷記憶部14a内の新規エントリに登録する。   For example, when the loading is detected by the detection unit 15a, the registration unit 15c assigns a load number and creates a new entry in the load storage unit 14a. Thereafter, the registration unit 15c registers the product name code of the crop identified from the package by the identification unit 15b in a new entry in the cargo storage unit 14a. In addition, the registration unit 15c reads the output rate and the degree of influence corresponding to the product name code of the load detected to be loaded from the output rate storage unit 13a and the influence level storage unit 13b, and registers them in a new entry in the load storage unit 14a. . Furthermore, the registration unit 15c analyzes the pixel position on the cargo bed image of the load detected to be loaded, for example, the pixel position where the center of gravity of the luggage exists, converts the pixel position into the three-dimensional local coordinates of the cargo bed, The loading position is registered in a new entry in the loading storage unit 14a.

なお、荷台画像上の画素位置(x,y)と荷台ローカル座標系(X,Y,Z)との対応付けは、前もって対応付けが図示しない登録部15cの内部メモリに記憶されているものとする。この対応付けは、例えば、車両3の荷台が直方体であるとしたときには、荷台の隅、すなわち直方体の頂点の荷台ローカル座標と、荷台画像上における荷台の隅の画素位置とを対応付けることにより得られる。また、例えば、荷台画像上で位置を検出可能なマーカを車両3の荷台の壁面等に含め、そのようなマーカを含んだ荷台画像の中からマーカ位置を特定することで、上記の対応付けを得ることもできる。   The association between the pixel position (x, y) on the loading platform image and the loading platform local coordinate system (X, Y, Z) is previously stored in the internal memory of the registration unit 15c (not shown). To do. For example, when the loading platform of the vehicle 3 is a rectangular parallelepiped, this association is obtained by associating the corner of the loading platform, that is, the loading platform local coordinates of the top of the rectangular parallelepiped with the pixel position of the corner of the loading platform on the loading platform image. . Further, for example, by including a marker whose position can be detected on the loading platform image on the wall surface of the loading platform of the vehicle 3 and specifying the marker position from the loading platform image including such a marker, the above association can be performed. It can also be obtained.

また、検知部15aによって積直しが検知された場合には、登録部15cは、積直しが検知された荷物の荷台画像上の画素位置を解析し、その画素位置を荷台の3次元ローカル座標に変換した上で積直し後の積荷位置を積載前の積荷位置に上書きして更新する。また、検知部15aによって積出しが検知された場合には、登録部15cは、積出しが検知された荷物に対応する積込番号のエントリ、すなわち積込番号、品名コード、積荷位置、産出率及び影響度を含むレコードを積荷記憶部14aから削除する。   In addition, when the reloading is detected by the detection unit 15a, the registration unit 15c analyzes the pixel position on the cargo bed image of the baggage whose reloading is detected, and converts the pixel position into the three-dimensional local coordinates of the cargo bed. After the conversion, the loading position after reloading is overwritten and updated on the loading position before loading. When the shipment is detected by the detection unit 15a, the registration unit 15c enters the entry of the loading number corresponding to the package for which loading has been detected, that is, the loading number, the product name code, the loading position, the output rate, and the influence. The record including the degree is deleted from the load storage unit 14a.

取得部16は、積荷記憶部14aを用いて、荷物の産出率及び影響度を取得する処理部である。一例としては、取得部16は、積荷記憶部14aに記憶された積荷位置が更新された場合、すなわち積込み又は積直しが検知された場合に、処理を起動する。この場合には、取得部16は、積込み又は積直しが検知された荷物の品名コードに対応する産出率及び影響度を取得するとともに、それにまでに積み込まれていた荷物の産出率及び影響度を取得する。以下では、積込み又は積直しが検知された荷物のことを「第1の荷物」と表現するとともに、積込み又は積直しが検知される前に既に積み込まれていた荷物のことを「第2の荷物」と表現する場合がある。なお、ここでは、第1の荷物と第2の荷物との両者を対象に産出率及び影響度をそれぞれ取得する場合を例示するが、一方の荷物については産出率だけを取得し、他方の荷物については影響度だけを取得するようにしてもよい。   The acquisition unit 16 is a processing unit that acquires the output rate and the degree of influence of the package using the load storage unit 14a. As an example, the acquisition unit 16 activates the process when the load position stored in the load storage unit 14a is updated, that is, when loading or unloading is detected. In this case, the acquisition unit 16 acquires the output rate and the degree of influence corresponding to the item name code of the package in which loading or reloading is detected, and the output rate and the degree of influence of the package that has been loaded so far get. In the following, a package in which loading or reloading is detected is expressed as “first luggage”, and a package that has already been loaded before loading or reloading is detected as “second luggage”. May be expressed. In this example, the output rate and the degree of influence are acquired for both the first and second packages, but only the output rate is acquired for one package and the other package is acquired. Only the degree of influence may be acquired.

導出部17は、荷物間の距離を導出する処理部である。一例としては、導出部17は、第1の荷物の品名コードに対応する積荷位置(a,b,c)を積荷記憶部14aから読み出す。さらに、導出部17は、第2の荷物の品名コードに対応する積荷位置(α,β,γ)を積荷記憶部14aから読み出す。その上で、導出部17は、第1の荷物の積荷位置(a,b,c)及び第2の荷物の積荷位置(α,β,γ)を所定の公式、例えば三平方の定理の公式等に代入することによって第1の荷物及び第2の荷物の間の距離dを導出する。このとき、導出部17は、第1の荷物及び第2の荷物の間の直線距離を始め、距離に関する各種のパラメータを併せて導出することもできる。例えば、導出部17は、第1の荷物及び第2の荷物を水平面に投影した場合の水平距離、第1の荷物及び第2の荷物を正射影した場合の鉛直距離や一方の荷物から他方の荷物がどれだけ上に観測されるかを示す高度角などを併せて導出することもできる。   The deriving unit 17 is a processing unit that derives the distance between the packages. As an example, the deriving unit 17 reads the loading position (a, b, c) corresponding to the item name code of the first package from the loading storage unit 14a. Furthermore, the deriving unit 17 reads the loading position (α, β, γ) corresponding to the item name code of the second package from the loading storage unit 14a. After that, the deriving unit 17 determines the loading position (a, b, c) of the first load and the loading position (α, β, γ) of the second load, for example, the formula of the three square theorem. The distance d between the first package and the second package is derived by substituting into etc. At this time, the deriving unit 17 can also derive various parameters related to the distance including the linear distance between the first and second packages. For example, the derivation unit 17 can calculate the horizontal distance when the first luggage and the second luggage are projected on a horizontal plane, the vertical distance when the first luggage and the second luggage are orthogonally projected, and the one distance from the other luggage to the other. It is also possible to derive an altitude angle indicating how much the load is observed.

判定部18は、荷物の積合せを判定する処理部である。一例としては、車両3の荷台に第1の荷物の積込み又は積直しがなされることによって第2の荷物に鮮度低下のおそれがあるか否かを判定するとともに、既に積み込まれていた第2の荷物によって第1の荷物に鮮度低下のおそれがあるか否かを併せて判定する。なお、ここでは、第2の荷物の鮮度低下のおそれ及び第1の荷物の鮮度低下のおそれの両者を判定する場合を例示するが、いずれか一方の荷物だけを対象に判定を実行することとしてもかまわない。   The determination unit 18 is a processing unit that determines the product stacking. As an example, it is determined whether or not there is a possibility that the freshness of the second load may be reduced by loading or reloading the first load on the loading platform of the vehicle 3, and the second load that has already been loaded. It is also determined whether or not there is a risk of the freshness of the first package being reduced by the package. In addition, although the case where both the fear of the freshness fall of the 2nd load and the fear of the freshness fall of the 1st load is judged here is illustrated, it is assumed that the determination is performed only for one of the loads. It doesn't matter.

これを説明すると、判定部18は、導出部17によって導出された第1の荷物及び第2の荷物の距離が、距離記憶部14bに記憶された距離のうち第1の荷物の産出度及び第2の荷物の影響度に対応する警告距離D1以下であるか否かを判定する。例えば、第1の荷物の品名コードが「001」のりんごであり、第2の荷物の品名コードが「003」のバナナであるとしたときには、りんごが梱包された第1の荷物の産出率が「A1」であり、バナナが梱包された第2の荷物の影響度が「1」である。よって、第1の荷物及び第2の荷物の距離が第1の荷物の産出率「A1」及び第2の荷物の影響度「1」の組合せに対応する警告距離D1(=「500cm」)以下であるか否かが判定部18によって判定される。これら荷物間の距離が警告距離D1以下である場合には、このまま放置すると第2の荷物の鮮度がエチレンガスによって低下してしまうおそれがある。この場合には、判定部18は、図示しない内部メモリに記憶された警告リストに、警告対象となる第2の荷物の品名コードと、鮮度低下の原因となる第1の荷物の品名コードと、警告距離D1とを対応付けたエントリを作成する。   Explaining this, the determination unit 18 determines that the distance between the first baggage and the second baggage derived by the derivation unit 17 is the first baggage production degree and the first baggage of the distances stored in the distance storage unit 14b. It is determined whether or not the warning distance D1 is equal to or less than the impact degree of the second load. For example, if the item name code of the first package is an apple with “001” and the item code of the second package is “banana” with a “003”, the output rate of the first package with apples packed is “A1” and the influence degree of the second baggage packed with bananas is “1”. Therefore, the distance between the first luggage and the second luggage is equal to or less than the warning distance D1 (= “500 cm”) corresponding to the combination of the production rate “A1” of the first luggage and the influence degree “1” of the second luggage. Whether or not is determined by the determination unit 18. If the distance between these packages is equal to or less than the warning distance D1, the freshness of the second package may be lowered by ethylene gas if left as it is. In this case, the determination unit 18 includes, in a warning list stored in an internal memory (not shown), the item name code of the second package to be warned, the item name code of the first package that causes a decrease in freshness, An entry that associates the warning distance D1 is created.

さらに、判定部18は、導出部17によって導出された第1の荷物及び第2の荷物の距離が、距離記憶部14bに記憶された距離のうち第2の荷物の産出度及び第1の荷物の影響度に対応する警告距離D2以下であるか否かを判定する。これら荷物間の距離が警告距離D2以下である場合には、このまま放置すると第1の荷物の鮮度がエチレンガスによって低下してしまうおそれがある。この場合には、判定部18は、図示しない内部メモリに記憶された警告リストに、警告対象となる第1の荷物の積荷番号と、鮮度低下の原因となる第2の荷物の積荷番号と、警告距離D2とを対応付けたエントリを作成する。   Further, the determination unit 18 determines that the distance between the first baggage and the second baggage derived by the derivation unit 17 is the second baggage production degree and the first baggage out of the distances stored in the distance storage unit 14b. It is determined whether or not the warning distance D2 is less than or equal to the degree of influence. If the distance between these packages is equal to or less than the warning distance D2, if left as it is, the freshness of the first package may be reduced by ethylene gas. In this case, the determination unit 18 includes, in a warning list stored in an internal memory (not shown), the load number of the first package to be warned, the load number of the second package that causes a decrease in freshness, An entry that associates the warning distance D2 is created.

このようにして、判定部18は、検知部15aによって積込み又は積直しが検知された荷物が、積荷記憶部14aに記憶された荷物であって積込み又は積直しが検知されなかった全ての荷物との間で積合せが判定されるまで、上記の判定を繰り返し実行する。   In this way, the determination unit 18 determines that all the packages whose loading or reloading has been detected by the detection unit 15a are the packages stored in the loading storage unit 14a and whose loading or reloading has not been detected. Until the product is determined between the above, the above determination is repeated.

図8は、警告リストの一例を示す図である。図8に示す例では、車両3の荷台に第1の荷物の積込み又は積直しがなされることによって第2の荷物に鮮度低下のおそれがある場合を例示する。図8に示す警告リストの場合には、車両3の荷台に3番目に積まれたバナナが最初に積み込まれていたリンゴが原因となって鮮度低下のおそれがある旨の警告を後述の報知制御部19に実行させることが定義されている。さらに、図8に示す警告リストの場合には、両者を500cmよりも離すのが好ましい旨の推奨を後述の報知制御部19に実行させることが定義されている。   FIG. 8 is a diagram illustrating an example of a warning list. In the example illustrated in FIG. 8, a case where the freshness of the second load may be reduced by loading or reloading the first load on the loading platform of the vehicle 3 is illustrated. In the case of the warning list shown in FIG. 8, a warning that there is a risk of a decrease in freshness due to the apple that was first loaded with the banana that was loaded third on the loading platform of the vehicle 3 will be described later. It is defined to be executed by the unit 19. Furthermore, in the case of the warning list shown in FIG. 8, it is defined that the notification control unit 19 described later executes a recommendation that it is preferable to separate the two from 500 cm.

報知制御部19は、携帯端末50に対する報知の実行を制御する処理部である。一例としては、報知制御部19は、判定部18によって作成された警告リストにしたがって携帯端末50で警告または推奨させる報知の内容を規定した報知画面を生成する。このとき、警告リストにエントリが存在しない場合には、携帯端末50に対する報知は実行されない。そして、報知制御部19は、生成した報知画面を携帯端末50に送信する。このようにして報知制御部19が送信した報知画面は、携帯端末50によって表示される。なお、ここでは、携帯端末50に報知画面を表示させることによって報知を実行する場合を例示するが、携帯端末50に報知音声を出力させることによって報知を実行することとしてもかまわない。   The notification control unit 19 is a processing unit that controls execution of notification to the mobile terminal 50. As an example, the notification control unit 19 generates a notification screen that defines the content of notification to be warned or recommended by the mobile terminal 50 in accordance with the warning list created by the determination unit 18. At this time, if there is no entry in the warning list, the notification to the portable terminal 50 is not executed. Then, the notification control unit 19 transmits the generated notification screen to the mobile terminal 50. The notification screen transmitted by the notification control unit 19 in this way is displayed by the mobile terminal 50. Here, the case where the notification is executed by displaying the notification screen on the portable terminal 50 is illustrated, but the notification may be executed by causing the portable terminal 50 to output the notification voice.

一例として、報知制御部19は、文章によって警告内容及び推奨内容が報知された報知画面を生成する。図9は、報知画面の一例を示す図である。図9に示す報知画面の例では、バナナがりんごによってエチレンガスの影響を受ける旨、バナナがエチレンガスによって損なわれる鮮度の内容、さらには、バナナとりんごを警告距離500cmよりも離して置くのが好ましい旨の推奨が報知される。かかる図9に示す報知画面によって、作業者5は、バナナとりんごの積合せが悪いという知識がなくとも、現状の積合せではバナナの腐敗のおそれがあることを把握できる。さらに、図9に示す報知画面によって、作業者5はバナナ又はりんごを互いに警告距離500cmよりも離して積み直せばよいことが把握できるので、荷物の積直し回数を低減させることもできる。   As an example, the notification control unit 19 generates a notification screen in which warning content and recommended content are notified by text. FIG. 9 is a diagram illustrating an example of a notification screen. In the example of the notification screen shown in FIG. 9, the fact that the banana is affected by the ethylene gas by the apple, the freshness content that the banana is damaged by the ethylene gas, and further, the banana and the apple are placed apart from the warning distance of 500 cm. A recommendation to the effect is announced. With the notification screen shown in FIG. 9, the operator 5 can grasp that there is a risk of banana rot in the current stacking even without knowledge that the stacking of bananas and apples is bad. Further, the notification screen shown in FIG. 9 allows the worker 5 to grasp that the bananas or apples should be re-loaded apart from the warning distance of 500 cm, so that the number of times of re-loading the load can be reduced.

他の一例として、報知制御部19は、上記の文章による報知に加えて、車両3の荷台のレイアウトとともに鮮度低下の原因となる荷物の積荷位置を併せて報知する報知画面を生成する。図10は、報知画面の一例を示す図である。図10に示す報知画面の例では、図9に示した報知内容とともに、車両3の荷台を上面視した上面図にバナナの鮮度低下の原因となるりんごの積荷位置が描画された画像がさらに含まれる。かかる図10に示す報知画面によって、作業者5は、後に積み込んだ又は積み直したバナナを積み直してはいけない場所をより直感的に把握でき、積直し回数をさらに低減させることができる。   As another example, the notification control unit 19 generates a notification screen that notifies the loading position of the load that causes a decrease in freshness together with the layout of the loading platform of the vehicle 3 in addition to the notification by the above sentence. FIG. 10 is a diagram illustrating an example of a notification screen. In the example of the notification screen shown in FIG. 10, in addition to the notification content shown in FIG. 9, the top view of the loading platform of the vehicle 3 further includes an image in which the loading position of the apple that causes the banana freshness reduction is drawn. It is. With the notification screen shown in FIG. 10, the operator 5 can more intuitively grasp a place where a banana that has been loaded or reloaded later should not be reloaded, and can further reduce the number of reloads.

なお、図10の例では、車両3の荷台の上面図を携帯端末50に表示させる場合を例示したが、車両3の荷台を側面視した側面図を携帯端末50に表示させてもよく、また、車両3の荷台の斜視図を3次元画像として携帯端末50に表示させてもよい。一例としては、報知制御部19は、第1の荷物及び第2の荷物の間のZ座標の距離、すなわち荷台の高さ方向の距離が閾値以上である場合には、車両3の荷台の側面図を採用し、Z座標の距離が閾値未満である場合には、車両3の荷台の上面図を報知画面に採用する。これによって荷物間の高さ方向に関する距離の視認性を向上させることができる。また、開示の装置は、上記の例に限らず、高度角が閾値以上であるか否かによって車両3の荷台の上面図または車両3の荷台の側面図のいずれを採用するかを決定してもよい。   In the example of FIG. 10, the case where the top view of the loading platform of the vehicle 3 is displayed on the portable terminal 50 is illustrated, but the side view of the loading platform of the vehicle 3 may be displayed on the portable terminal 50, A perspective view of the loading platform of the vehicle 3 may be displayed on the portable terminal 50 as a three-dimensional image. As an example, when the distance of the Z coordinate between the first load and the second load, that is, the distance in the height direction of the load platform is equal to or greater than the threshold value, the notification control unit 19 has a side surface of the load platform of the vehicle 3. When the figure is adopted and the distance of the Z coordinate is less than the threshold value, the top view of the loading platform of the vehicle 3 is adopted as the notification screen. As a result, the visibility of the distance in the height direction between the loads can be improved. The disclosed device is not limited to the above example, and determines whether to adopt the top view of the loading platform of the vehicle 3 or the side view of the loading platform of the vehicle 3 depending on whether the altitude angle is equal to or greater than a threshold value. Also good.

更なる一例として、報知制御部19は、上記の文章による報知に加えて、車両3の荷台のレイアウトとともに警告対象となる荷物及び他の荷物の積荷位置、さらには荷物の積直しを推奨する推奨積直し領域が併せて報知された報知画面を生成する。図11は、報知画面の一例を示す図である。図11に示す報知画面の例では、図10に示した報知内容とともに、車両3の荷台を上面視した上面図に既に積み込まれているりんご及びすいかの積荷位置が描画される。さらに、図11に示す報知画面の例では、既に積み込まれているりんご及びすいかによるエチレンガスの影響を受けにくいと推定される領域が推奨積直し領域として塗りつぶしにより表示される。ここで、推奨積直し領域の一態様としては、全ての第2の荷物から警告距離D1及びD2を隔てた車両3の荷台上の領域が報知制御部19によって特定された上で採用される。かかる図11に示す報知画面によって、作業者5は、後に積み込んだ又は積み直したバナナをどこに積み直せばよいかをより直感的に把握でき、積直し回数をさらに低減させることができる。   As a further example, in addition to the notification by the above sentence, the notification control unit 19 recommends recommending the loading position of the load to be warned and other loads as well as the loading position of the load as well as the loading of the load. A notification screen in which the restacking region is also notified is generated. FIG. 11 is a diagram illustrating an example of a notification screen. In the example of the notification screen shown in FIG. 11, together with the notification content shown in FIG. 10, the loading positions of apples and watermelons already loaded are drawn in a top view when the loading platform of the vehicle 3 is viewed from above. Furthermore, in the example of the notification screen shown in FIG. 11, an area that is estimated to be less likely to be affected by ethylene gas due to already loaded apples and watermelon is displayed as a recommended reload area by painting. Here, as one aspect of the recommended reloading area, an area on the loading platform of the vehicle 3 that is separated from all the second loads by the warning distances D1 and D2 is used after being specified by the notification control unit 19. With the notification screen shown in FIG. 11, the operator 5 can more intuitively know where to place the bananas that have been loaded or reloaded later, and can further reduce the number of times of reloading.

なお、画像解析部15、取得部16、導出部17、判定部18及び報知制御部19には、各種の集積回路や電子回路を採用できる。また、画像解析部15に含まれる機能部の一部を別の集積回路や電子回路とすることもできる。例えば、集積回路としては、ASIC(Application Specific Integrated Circuit)が挙げられる。また、電子回路としては、CPU(Central Processing Unit)やMPU(Micro Processing Unit)などが挙げられる。   Note that various integrated circuits and electronic circuits can be employed for the image analysis unit 15, the acquisition unit 16, the derivation unit 17, the determination unit 18, and the notification control unit 19. Further, a part of the functional unit included in the image analysis unit 15 may be another integrated circuit or an electronic circuit. For example, an ASIC (Application Specific Integrated Circuit) is an example of the integrated circuit. Examples of the electronic circuit include a central processing unit (CPU) and a micro processing unit (MPU).

[処理の流れ]
次に、本実施例に係る積合せ判定サーバ10の処理の流れについて説明する。なお、ここでは、積合せ判定サーバ10によって実行される(1)積荷管理処理の処理手順を説明した後に、(2)報知制御処理の処理手順を説明する。
[Process flow]
Next, the flow of processing of the product determination server 10 according to the present embodiment will be described. Here, after describing the processing procedure of (1) cargo management processing executed by the product judgment server 10, the processing procedure of (2) notification control processing will be described.

(1)積荷管理処理
図12は、実施例1に係る積荷管理処理の手順を示すフローチャートである。この積荷管理処理は、カメラ30から荷台画像が供給される限り、繰り返し実行される処理であり、検知部15aによって荷台画像のフレーム間で荷物の動きが検知された場合に処理が起動される。
(1) Load Management Process FIG. 12 is a flowchart illustrating the procedure of the load management process according to the first embodiment. This cargo management process is a process that is repeatedly executed as long as the cargo bed image is supplied from the camera 30, and is activated when the movement of the cargo is detected between frames of the cargo bed image by the detection unit 15a.

図12に示すように、検知部15aによって荷物の積込みが検知された場合(ステップS101,Yes)には、登録部15cは、積荷番号を採番し、積荷記憶部14a内に新規エントリを作成する(ステップS102)。続いて、登録部15cは、識別部15bによって荷物から識別された荷物の品名コードを積荷記憶部14a内の新規のエントリに登録する(ステップS103)。   As shown in FIG. 12, when the loading of the package is detected by the detection unit 15a (step S101, Yes), the registration unit 15c assigns a load number and creates a new entry in the load storage unit 14a. (Step S102). Subsequently, the registration unit 15c registers the item name code of the package identified from the package by the identification unit 15b in a new entry in the cargo storage unit 14a (step S103).

そして、登録部15cは、積込みが検知された荷物の品名コードに対応する産出率及び影響度を産出率記憶部13a及び影響度記憶部13bから読み出して積荷記憶部14a内の新規エントリに登録する(ステップS104)。その後、登録部15cは、積込みが検知された荷物の積荷位置を積荷記憶部14a内の新規エントリに登録し(ステップS105)、処理を終了する。   Then, the registration unit 15c reads the output rate and the degree of influence corresponding to the item name code of the package whose loading has been detected from the output rate storage unit 13a and the influence level storage unit 13b, and registers them in a new entry in the load storage unit 14a. (Step S104). Thereafter, the registration unit 15c registers the loading position of the load detected to be loaded in a new entry in the load storage unit 14a (step S105), and ends the process.

また、検知部15aによって荷物の積直しが検知された場合(ステップS106,Yes)には、登録部15cは、積直しが検知された荷物の積荷位置を積載前の積荷位置に上書きして更新し(ステップS105)、処理を終了する。   If the reloading of the load is detected by the detection unit 15a (step S106, Yes), the registration unit 15c updates the load position of the load detected to be reloaded by overwriting the load position before loading. (Step S105), and the process ends.

また、検知部15aによって荷物の積直しが検知されなかった場合(ステップS106,No)には、荷物が車両3の荷台から積み出された場合に該当する。よって、登録部15cは、積出しが検知された荷物に対応する積込番号のエントリを積荷記憶部14aから削除し(ステップS107)、処理を終了する。   Further, when the loading of the load is not detected by the detection unit 15a (No in Step S106), this corresponds to the case where the load is loaded from the loading platform of the vehicle 3. Therefore, the registration unit 15c deletes the entry of the loading number corresponding to the package for which loading has been detected from the loading storage unit 14a (step S107), and ends the process.

なお、図12に示したステップS101及びS106の処理は、図示の順序通りに実行される必要はなく、互いの順序を入れ換えて実行することができる。さらに、図12に示したステップS103〜S105の処理は、図示の順序通りに実行される必要はなく、互いの順序を入れ換えて実行することができる。   Note that the processes of steps S101 and S106 shown in FIG. 12 do not have to be executed in the order shown, and can be executed in a mutually reversed order. Furthermore, the processes in steps S103 to S105 shown in FIG. 12 do not have to be executed in the order shown, and can be executed in a mutually reversed order.

(2)報知制御処理
図13は、実施例1に係る報知制御処理の手順を示すフローチャートである。この報知制御処理は、カメラ30から荷台画像が供給される限り、繰り返し実行される処理であり、積荷記憶部14aに記憶された積荷位置が更新された場合に処理が起動される。
(2) Notification Control Processing FIG. 13 is a flowchart illustrating a procedure of notification control processing according to the first embodiment. This notification control process is a process that is repeatedly executed as long as the loading platform image is supplied from the camera 30, and the process is started when the loading position stored in the loading storage unit 14a is updated.

図13に示すように、取得部16は、積込み又は積直しが検知された第1の荷物の品名コードに対応する産出率及び影響度を積荷記憶部14aから読み出す(ステップS301)。そして、導出部17は、第1の荷物の品名コードに対応する積荷位置を積荷記憶部14aから読み出す(ステップS302)。   As illustrated in FIG. 13, the acquisition unit 16 reads from the cargo storage unit 14a the output rate and the degree of influence corresponding to the item name code of the first package in which loading or reloading has been detected (step S301). The deriving unit 17 reads the loading position corresponding to the item name code of the first package from the loading storage unit 14a (step S302).

その後、取得部16は、第1の荷物が積込み又は積直しされる前に積み込まれていた第2の荷物の産出率及び影響度を積荷記憶部14aから読み出す(ステップS303)。続いて、導出部17は、第2の荷物の品名コードに対応する積荷位置を積荷記憶部14aから読み出す(ステップS304)。   Thereafter, the acquisition unit 16 reads the production rate and the influence degree of the second baggage loaded before the first baggage is loaded or reloaded from the load storage unit 14a (step S303). Subsequently, the deriving unit 17 reads the loading position corresponding to the item name code of the second package from the loading storage unit 14a (step S304).

そして、導出部17は、第1の荷物の積荷位置及び第2の荷物の積荷位置を所定の公式に代入することによって第1の荷物及び第2の荷物の間の距離dを導出する(ステップS305)。   Then, the deriving unit 17 derives the distance d between the first luggage and the second luggage by substituting the loading position of the first luggage and the loading position of the second luggage into a predetermined formula (Step S1). S305).

続いて、判定部18は、第2の荷物の鮮度低下を警告する警告距離D1、すなわち距離記憶部14bに記憶された距離のうち第1の荷物の産出度及び第2の荷物の影響度に対応する警告距離D1を読み出す(ステップS306)。さらに、判定部18は、第1の荷物の鮮度低下を警告する警告距離D2、すなわち距離記憶部14bに記憶された距離のうち第2の荷物の産出度及び第1の荷物の影響度に対応する警告距離D2を読み出す(ステップS307)。   Subsequently, the determination unit 18 determines the warning distance D1 that warns of a decrease in freshness of the second baggage, that is, the yield of the first baggage and the influence of the second baggage out of the distances stored in the distance storage unit 14b. The corresponding warning distance D1 is read (step S306). Further, the determination unit 18 corresponds to the warning distance D2 that warns of a decrease in freshness of the first baggage, that is, the second baggage production degree and the influence of the first baggage among the distances stored in the distance storage unit 14b. The warning distance D2 to be read is read (step S307).

ここで、判定部18は、導出部17によって導出された第1の荷物及び第2の荷物の距離が警告距離D1以下であるか否かを判定する(ステップS308)。このとき、第1の荷物及び第2の荷物の距離が警告距離D1以下である場合(ステップS308,Yes)には、このまま放置すると第2の荷物の鮮度がエチレンガスによって低下してしまうおそれがある。よって、判定部18は、図示しない内部メモリに記憶された警告リストに、警告対象となる第2の荷物の品名コードと、鮮度低下の原因となる第1の荷物の品名コードと、警告距離D1とを対応付けたエントリを作成する(ステップS309)。なお、第1の荷物及び第2の荷物の距離が警告距離D1よりも大きい場合(ステップS308,No)には、ステップS309をとばしてステップS310に移行する。   Here, the determination unit 18 determines whether or not the distance between the first package and the second package derived by the deriving unit 17 is equal to or less than the warning distance D1 (step S308). At this time, if the distance between the first baggage and the second baggage is equal to or less than the warning distance D1 (step S308, Yes), the freshness of the second baggage may be reduced by ethylene gas if left as it is. is there. Therefore, the determination unit 18 includes, in the warning list stored in the internal memory (not shown), the item name code of the second package that is a warning target, the item name code of the first package that causes a decrease in freshness, and the warning distance D1. Is created (step S309). If the distance between the first luggage and the second luggage is greater than the warning distance D1 (No at Step S308), Step S309 is skipped and the process proceeds to Step S310.

続いて、判定部18は、導出部17によって導出された第1の荷物及び第2の荷物の距離が警告距離D2以下であるか否かを判定する(ステップS310)。このとき、第1の荷物及び第2の荷物の距離が警告距離D2以下である場合(ステップS310,Yes)には、このまま放置すると第1の荷物の鮮度がエチレンガスによって低下してしまうおそれがある。よって、判定部18は、図示しない内部メモリに記憶された警告リストに、警告対象となる第1の荷物の品名コードと、鮮度低下の原因となる第2の荷物の品名コードと、警告距離D2とを対応付けたエントリを作成する(ステップS311)。なお、第1の荷物及び第2の荷物の距離が警告距離D2よりも大きい場合(ステップS310,No)には、ステップS311をとばしてステップS312に移行する。   Subsequently, the determination unit 18 determines whether or not the distance between the first package and the second package derived by the deriving unit 17 is equal to or less than the warning distance D2 (step S310). At this time, if the distance between the first baggage and the second baggage is equal to or less than the warning distance D2 (Yes in step S310), the freshness of the first baggage may be reduced by ethylene gas if left as it is. is there. Therefore, the determination unit 18 includes, in the warning list stored in the internal memory (not shown), the item name code of the first package that is a warning target, the item name code of the second package that causes a decrease in freshness, and the warning distance D2. Is created (step S311). If the distance between the first luggage and the second luggage is greater than the warning distance D2 (No at Step S310), Step S311 is skipped and the process proceeds to Step S312.

そして、積込み又は積直しが検知された荷物以外の全ての荷物を対象に積合せの判定が実行されるまで(ステップS312,No)、第2の荷物として処理対象とする荷物を、積荷記憶部14aに記憶されている荷物のうち未処理の荷物に変更して、上記のステップS303〜ステップS311までの処理が繰り返し実行される。   Then, until the determination of stacking is performed for all the packages other than the packages for which loading or unloading is detected (No in step S312), the packages to be processed as the second packages are stored in the load storage unit. The package stored in 14a is changed to an unprocessed package, and the processing from step S303 to step S311 is repeatedly executed.

その後、積込み又は積直しが検知された荷物以外の全ての荷物を対象に積合せの判定が実行された場合(ステップS312,Yes)には、報知制御部19は、警告リストにエントリが存在するか否かを判定する(ステップS313)。なお、警告リストにエントリが存在しない場合(ステップS313,No)には、報知制御部19は、携帯端末50に対する報知を実行せずにそのまま処理を終了する。   After that, when the determination of stacking is executed for all the packages other than the packages for which loading or unloading is detected (step S312, Yes), the notification control unit 19 has an entry in the warning list. It is determined whether or not (step S313). When there is no entry in the warning list (step S313, No), the notification control unit 19 ends the process without executing notification to the mobile terminal 50.

そして、警告リストにエントリが存在する場合(ステップS313,Yes)には、報知制御部19は、警告リストにしたがって携帯端末50で警告または推奨させる報知の内容を規定した報知画面を生成する(ステップS314)。その後、報知制御部19は、生成した報知画面を携帯端末50に送信し(ステップS315)、処理を終了する。   If there is an entry in the warning list (step S313, Yes), the notification control unit 19 generates a notification screen that defines the content of the notification to be warned or recommended by the portable terminal 50 according to the warning list (step S313). S314). Thereafter, the notification control unit 19 transmits the generated notification screen to the portable terminal 50 (step S315), and ends the process.

なお、図13に示したステップS301及びS302の処理は、図示の順序通りに実行される必要はなく、互いの順序を入れ換えて実行することができる。また、図13に示したステップS303及びS304の処理は、図示の順序通りに実行される必要はなく、互いの順序を入れ換えて実行することができる。さらに、図13に示したステップS305〜S307間での処理についても、図示の順序通りに実行される必要はなく、互いの順序を入れ換えて実行することができる。また、図13に示したステップS308及びS309の処理と、図13に示したステップS310及びS311の処理とは、図示の順序通りに実行される必要はなく、互いの順序を入れ換えて実行することができる。   Note that the processes in steps S301 and S302 shown in FIG. 13 do not have to be executed in the order shown, and can be executed in a reversed order. Further, the processes in steps S303 and S304 shown in FIG. 13 do not have to be executed in the order shown in the drawing, and can be executed by switching their order. Furthermore, the processing between steps S305 to S307 shown in FIG. 13 does not need to be executed in the order shown, and can be executed by switching the order of each other. Further, the processes in steps S308 and S309 shown in FIG. 13 and the processes in steps S310 and S311 shown in FIG. 13 do not have to be executed in the order shown in the figure, and are executed by switching the order of each other. Can do.

[実施例1の効果]
上述してきたように、本実施例に係る積合せ判定サーバ10は、車両3の荷台に積まれる荷物に梱包された農作物を識別し、エチレンガスを出す荷物とエチレンガスにより鮮度が低下する荷物とが近くに積まれた場合に報知を実行する。
[Effect of Example 1]
As described above, the stack determination server 10 according to the present embodiment identifies the crops packed in the luggage loaded on the loading platform of the vehicle 3, and the luggage which emits ethylene gas and the luggage whose freshness is reduced by ethylene gas. Notification is executed when is stacked nearby.

このとき、荷物同士を離して積むよう作業者5に促す警告を行った場合には、車両3の荷台でエチレンガスを出す農作物が梱包された荷物、あるいはエチレンガスにより鮮度が低下する荷物のいずれかが作業者5によって離れた場所に積み直される。したがって、本実施例に係る積合せ判定サーバ10によれば、荷物に梱包された農作物の鮮度が輸送中に低下するのを防止できる。   At this time, when a warning is given to the operator 5 to load the packages apart, either a package packed with crops that produce ethylene gas on the loading platform of the vehicle 3 or a package whose freshness is reduced by ethylene gas. Are restacked by the operator 5 at a remote location. Therefore, according to the product determination server 10 according to the present embodiment, it is possible to prevent the freshness of the crops packed in the luggage from being lowered during transportation.

また、エチレン対策の一例としてエチレン除去剤の使用を促す報知を行った場合には、作業者5によってエチレンガスを出す農作物が梱包された荷物にエチレン除去剤が使用される。それゆえ、本実施例に係る積合せ判定サーバ10によれば、荷物に梱包された農作物の鮮度が輸送中に低下するのを防止できる。さらに、本実施例に係る積合せ判定サーバ10では、常にエチレン除去剤を使用する必要はなく、報知がなされた場合にだけエチレン除去剤を使用すればよいので、エチレン対策の手間及びエチレン除去剤の使用効率を高めることもできる。   Moreover, when the notification which encourages the use of an ethylene remover is given as an example of measures against ethylene, the ethylene remover is used for a package in which crops that produce ethylene gas are packed by the worker 5. Therefore, according to the product determination server 10 according to the present embodiment, it is possible to prevent the freshness of the crops packed in the package from being lowered during transportation. Furthermore, in the product determination server 10 according to the present embodiment, it is not always necessary to use an ethylene remover, and it is sufficient to use the ethylene remover only when a notification is given. It is also possible to increase the use efficiency.

さらに、エチレン対策の一例として農作物を隔離または密閉する特殊梱包の使用を促す報知を行った場合には、エチレンガスを出す農作物が特殊梱包によって隔離されたり、あるいはエチレンガスにより鮮度が低下する荷物が特殊梱包によって密閉されたりする。それゆえ、本実施例に係る積合せ判定サーバ10によれば、荷物に梱包された農作物の鮮度が輸送中に低下するのを防止できる。さらに、本実施例に係る積合せ判定サーバ10では、常に特殊梱包を使用する必要はなく、報知がなされた場合にだけ特殊梱包を使用すればよいので、特殊梱包の使用効率を高めることもできる。   In addition, as an example of measures against ethylene, when a notice is given to encourage the use of special packaging that isolates or seals crops, crops that produce ethylene gas are isolated by special packaging, or there is a package whose freshness decreases due to ethylene gas. It is sealed with special packaging. Therefore, according to the product determination server 10 according to the present embodiment, it is possible to prevent the freshness of the crops packed in the package from being lowered during transportation. Furthermore, in the product determination server 10 according to the present embodiment, it is not always necessary to use special packaging, and it is only necessary to use special packaging when a notification is given, so that the use efficiency of the special packaging can be improved. .

加えて、本実施例に係る積合せ判定サーバ10では、クラウドコンピューティングによって報知を実現するので、車両3や携帯端末50などのクライアント端末側のハードウェアの改変を不要化できる。   In addition, since the product determination server 10 according to the present embodiment implements notification by cloud computing, it is not necessary to modify hardware on the client terminal side such as the vehicle 3 or the mobile terminal 50.

また、本実施例に係る積合せ判定サーバ10は、第1の荷物及び第2の荷物の距離が、距離記憶部14bによって記憶された距離のうち第1の荷物の産出度及び第2の荷物の影響度に対応する警告距離以下であるか否かを判定する。このため、本実施例に係る積合せ判定サーバ10では、荷物同士の距離が警告距離よりも大きい場合には報知を実行する必要がない。それゆえ、本実施例に係る積合せ判定サーバ10によれば、荷物に梱包された農作物の鮮度が輸送中に低下するのを防止しつつ、荷物同士に十分な距離がある場合には荷物の積直しを不要化したり、上記のエチレン対策を不要化したりすることができる。   Further, the product determination server 10 according to the present embodiment is configured such that the distance between the first baggage and the second baggage is the first baggage production degree and the second baggage among the distances stored in the distance storage unit 14b. It is determined whether the distance is equal to or less than the warning distance corresponding to the degree of influence. For this reason, the product determination server 10 according to the present embodiment does not need to perform notification when the distance between the packages is larger than the warning distance. Therefore, according to the stack determination server 10 according to the present embodiment, when the freshness of the crops packed in the baggage is prevented from being lowered during transportation, and there is a sufficient distance between the packages, It is possible to eliminate the need for reloading or to eliminate the above-mentioned measures against ethylene.

さらに、本実施例に係る積合せ判定サーバ10は、第1の荷物及び第2の荷物が警告距離D1以内に積まれたか、或いは警告距離D2以下である場合のいずれかに積まれたと判定された場合に、報知を実行するように制御する。このため、本実施例に係る積合せ判定サーバ10では、第1の荷物が第2の荷物にエチレンガスの影響を与える場合のみならず、第2の荷物が第1の荷物にエチレンガスの影響を与える場合にも、漏れなく報知を実行できる。それゆえ、本実施例に係る積合せ判定サーバ10によれば、荷物に梱包された農作物の鮮度が輸送中に低下するのをより確度よく防止できる。   Furthermore, the product combination determination server 10 according to the present embodiment determines that the first package and the second package are stacked within the warning distance D1 or when the load is within the warning distance D2. In such a case, control is performed so that notification is executed. Therefore, in the product determination server 10 according to the present embodiment, not only the case where the first load affects the second load but also the influence of ethylene gas, the second load affects the first load. Even in the case of giving a notification, the notification can be executed without omission. Therefore, according to the product determination server 10 according to the present embodiment, it is possible to more accurately prevent the freshness of the crops packed in the package from being lowered during transportation.

さて、これまで開示の装置に関する実施例について説明したが、本発明は上述した実施例以外にも、種々の異なる形態にて実施されてよいものである。そこで、以下では、本発明に含まれる他の実施例を説明する。   Although the embodiments related to the disclosed apparatus have been described above, the present invention may be implemented in various different forms other than the above-described embodiments. Therefore, another embodiment included in the present invention will be described below.

[積合せ判定の応用例]
例えば、上記の実施例1では、農作物が梱包された荷物が1つの車両3に積まれる場合を例示したが、開示の装置はこれに限定されない。例えば、開示の装置は、農作物が梱包された荷物が複数の車両のうちいずれかの車両の荷台に積まれる場合に、同じ荷台に積まれた荷物のうち一方の荷物が産出するガスによって他方の荷物が影響を受ける場合に異なる荷台に積み替える場合にも同様に適用できる。
[Application example of product judgment]
For example, in the above-described first embodiment, a case where a package in which agricultural products are packed is stacked on one vehicle 3 is illustrated, but the disclosed apparatus is not limited thereto. For example, the disclosed apparatus may be configured such that when a package in which agricultural products are packed is loaded on the loading platform of one of a plurality of vehicles, the gas produced by one of the loads loaded on the same loading platform is used for the other. The same applies to the case of transshipment to a different loading platform when the load is affected.

一例として、開示の装置は、第1の荷物及び第2の荷物が、範囲記憶部によって産出度及び影響度の組合せごとに記憶された範囲の有無のうち第1の物品の産出度及び第2の物品の影響度に対応する範囲が有りであるか否かを判定するようにしてもよい。   As an example, the disclosed apparatus includes the first article and the second article in the presence / absence of a range stored for each combination of the production degree and the influence degree by the range storage unit. It may be determined whether there is a range corresponding to the degree of influence of the article.

かかる範囲記憶部の一態様としては、産出度及び影響度の組合せごとに範囲の有無を対応付けて記憶する。ここで、範囲の有無は、一方の荷物が産出するエチレンガスによって他方の荷物が影響を受ける範囲が存在するか否かを表し、上記の距離記憶部14bと同様に、2つの荷物のうち一方の荷物の産出率及び他方の荷物の影響度に基づいて設定される。例えば、一方の荷物の産出率が低い場合には、他方の荷物に与える影響は少ない。よって、一方の荷物の産出率が低い場合には、他方の荷物の影響度の高さによらず、範囲無しと設定される。また、一方の荷物の影響度が低い場合には、他方の荷物が受ける影響も少なくなる。よって、一方の荷物の影響度が低い場合には、他方の荷物の産出度によらず、範囲無しと設定される。   As one aspect of such a range storage unit, the presence or absence of a range is stored in association with each combination of the output level and the influence level. Here, the presence / absence of a range indicates whether there is a range in which the other baggage is affected by the ethylene gas produced by one baggage, and, like the distance storage unit 14b, one of the two baggage items. It is set based on the production rate of one baggage and the degree of influence of the other baggage. For example, when the production rate of one package is low, the influence on the other package is small. Therefore, when the output rate of one piece of luggage is low, the range is set to no range regardless of the degree of influence of the other luggage. In addition, when the influence of one package is low, the influence of the other package is reduced. Therefore, when the influence degree of one baggage is low, no range is set regardless of the production degree of the other baggage.

図14は、応用例の一例を示す図である。図14に示す「低」、「中」及び「高」は、一方の荷物の産出率または他方の荷物の影響度の度合いを示す。また、図14に示す「○」は範囲有りを指し、図14に示す「×」は範囲無しを指す。図14の例では、一方の荷物の産出率が「低」である場合、或いは他方の荷物の産出率が「低」である場合には、範囲「無し」が設定されている。また、図14の例では、一方の荷物の産出率が「中」以上であり、かつ他方の荷物の産出率が「中」以上である場合には、範囲「有り」が設定されている。   FIG. 14 is a diagram illustrating an example of an application example. “Low”, “medium”, and “high” shown in FIG. 14 indicate the output rate of one package or the degree of influence of the other package. Further, “◯” shown in FIG. 14 indicates that there is a range, and “X” shown in FIG. 14 indicates that there is no range. In the example of FIG. 14, the range “none” is set when the output rate of one package is “low” or when the output rate of the other package is “low”. Further, in the example of FIG. 14, the range “present” is set when the output rate of one package is “medium” or more and the output rate of the other package is “medium” or more.

このため、開示の装置では、図14に示す範囲記憶部を用いて荷物の積合せ判定を行った場合には、第1の荷物の産出率が「低」であるか、或いは第2の荷物の産出率が「低」であるならば、携帯端末50に対する報知は実行されない。一方、開示の装置では、一方の荷物の産出率が「中」以上であり、かつ他方の荷物の産出率が「中」以上であるならば、第1の荷物または第2の荷物を異なる車両の荷台に積むのが好ましい旨が携帯端末50に報知される。このため、開示の装置では、図14に示す範囲記憶部を用いて荷物の積合せ判定を行った場合にも、上記の実施例1と同様に、荷物に梱包された農作物の鮮度が輸送中に低下するのをより確度よく防止できる。   For this reason, in the disclosed apparatus, when the load accumulation determination is performed using the range storage unit shown in FIG. 14, the output rate of the first baggage is “low” or the second baggage is output. If the output rate is “low”, the notification to the portable terminal 50 is not executed. On the other hand, in the disclosed apparatus, if the output rate of one baggage is “medium” or more and the output rate of the other baggage is “medium” or more, the first baggage or the second baggage is different from the vehicle. The portable terminal 50 is informed that it is preferable to load it on the carrier. For this reason, in the disclosed apparatus, the freshness of the crops packed in the parcel is also being transported in the same manner as in the first embodiment, even when the parcel accumulation determination is performed using the range storage unit illustrated in FIG. Can be more accurately prevented.

[積荷記憶部の応用例]
上記の実施例1では、積荷の重心位置を積荷位置として採用する場合を例示したが、開示の装置はこれに限定されない。例えば、開示の装置では、荷物を形成する立体の頂点の3次元座標を積荷位置として採用することもできる。このように、荷物を形成する立体の頂点の3次元座標を積荷位置として採用した場合には、荷物間の重心距離ではなく、荷物間の最短距離を導出することができるので、荷物の積合せ判定をより精度よく実行できる。
[Application example of cargo storage unit]
In the first embodiment, the case where the center of gravity position of the load is adopted as the load position is illustrated, but the disclosed apparatus is not limited to this. For example, in the disclosed apparatus, the three-dimensional coordinates of the three-dimensional vertex forming the luggage can be adopted as the loading position. In this way, when the three-dimensional coordinates of the vertices of the solid forming the luggage are adopted as the loading position, it is possible to derive the shortest distance between the luggage instead of the center-of-gravity distance between the luggage. Judgment can be executed with higher accuracy.

[距離記憶部の応用例1]
上記の実施例1では、2つの荷物のうち一方の荷物の産出率だけを用いて距離記憶部14bの警告距離を設定する場合を例示したが、開示の装置はこれに限定されない。例えば、開示の装置では、一方の荷物の産出率だけでなく、他方の荷物の産出率も用いて距離記憶部14bの警告距離を設定することもできる。これによって、他方の荷物が実際にエチレンガスから影響を受ける度合いを実際に荷物が積まれる環境に近づけて距離記憶部14bの警告距離を設定することができ、荷物の積合せ判定をより精度よく実行できる。
[Application 1 of distance storage unit]
In the first embodiment, the case where the warning distance of the distance storage unit 14b is set using only the production rate of one of the two packages is illustrated, but the disclosed device is not limited thereto. For example, in the disclosed apparatus, the warning distance of the distance storage unit 14b can be set using not only the output rate of one package but also the output rate of the other package. As a result, the warning distance of the distance storage unit 14b can be set by bringing the degree to which the other baggage is actually affected by ethylene gas closer to the environment in which the baggage is actually loaded. Can be executed.

[距離記憶部の応用例2]
上記の実施例1では、距離記憶部14bが1つのテーブルを記憶する場合を例示したが、開示の装置はこれに限定されない。一例としては、開示の装置は、温度や湿度などの保存環境別に複数のテーブルを距離記憶部に保持させることができる。この場合には、温度が低いほど、或いは湿度が低いほど、農作物の呼吸が抑えられて成長が抑制されるので、警告距離を長く設定するのが好ましい。そして、開示の装置は、図示しないセンサを介して取得された温度及び湿度に対応する警告距離を用いて荷物の積合せ判定を行うことで、荷物の積合せ判定の精度を向上させることができる。他の一例としては、X座標、Y座標及びZ座標の座標軸別の警告距離を距離記憶部に保持させることもできる。ここで、エチレンガスは空気に比べて比重が軽く、車両3の荷台の中でも荷台が高いほどエチレンガスの影響が大きくなるので、X座標及びY座標の警告距離よりもZ座標の警告距離を長く設定するのが好ましい。そして、開示の装置は、荷物間のX座標の距離、Y座標の距離及びZ座標の距離のうちいずれかが警告距離以内であるか否かを判定することで、荷物の積合せ判定の精度を向上させることができる。
[Application example 2 of distance storage unit]
In the first embodiment, the case where the distance storage unit 14b stores one table is illustrated, but the disclosed apparatus is not limited thereto. As an example, the disclosed apparatus can hold a plurality of tables in the distance storage unit for each storage environment such as temperature and humidity. In this case, the lower the temperature or the lower the humidity, the less the respiration of crops and the more the growth is suppressed. Therefore, it is preferable to set the warning distance longer. Then, the disclosed apparatus can improve the accuracy of the load determination of the load by performing the load determination of the load using the warning distance corresponding to the temperature and humidity acquired via a sensor (not shown). . As another example, the distance storage unit may store warning distances for each coordinate axis of the X coordinate, the Y coordinate, and the Z coordinate. Here, ethylene gas has a lower specific gravity than air, and the higher the loading platform of the vehicle 3, the greater the influence of ethylene gas. Therefore, the warning distance of the Z coordinate is longer than the warning distance of the X coordinate and the Y coordinate. It is preferable to set. The disclosed apparatus determines whether or not any of the X coordinate distance, the Y coordinate distance, and the Z coordinate distance between the packages is within the warning distance, thereby determining the accuracy of the package stacking determination. Can be improved.

[報知の応用例]
上記の実施例1では、積込み又は積直しが行われた時点で報知を実行する場合を例示したが、開示の装置はこれに限定されず、開示の装置は任意のタイミングで報知を実行することができる。一例としては、開示の装置は、第1の荷物の積込み作業または積直し作業が完了する前に荷物の積合せ判定を行って報知を実行することもできる。他の一例としては、開示の装置は、積込み対象とされる荷物の数量及び品名コードを受け付け、全ての荷物の組合せについて荷物間の距離が警告距離D1及びD2よりも大きくなる荷物の配置を特定した上でその荷物の配置を推奨することもできる。このとき、全ての荷物の組合せについて荷物間の距離が警告距離D1及びD2よりも大きくなる荷物の配置がない場合には、開示の装置は、荷物間で警告距離D1又はD2以下となる回数が最も少ない荷物の配置を推奨することもできる。
[Application example of notification]
In the first embodiment, the case where the notification is executed at the time when loading or reloading is performed is illustrated, but the disclosed device is not limited to this, and the disclosed device performs the notification at an arbitrary timing. Can do. As an example, the disclosed apparatus can perform notification by performing a load determination of a load before the first load loading operation or the reloading operation is completed. As another example, the disclosed apparatus accepts the quantity and name code of the packages to be loaded, and identifies the arrangement of the packages in which the distance between the packages is greater than the warning distances D1 and D2 for all combinations of packages. In addition, the placement of the luggage can be recommended. At this time, in the case where there is no arrangement of the packages in which the distance between the packages is larger than the warning distances D1 and D2 for all the combinations of packages, the disclosed apparatus can reduce the number of times that the warning distance D1 or D2 is less than or equal between the packages. It is also possible to recommend the least amount of luggage.

[荷物の梱包]
上記の実施例1では、農作物が段ボールによって梱包される場合を例示したが、農作物が梱包されずに車両3の荷台にそのまま積み込まれる場合にも開示の装置を適用できる。この場合には、農作物のテンプレート画像を予め登録しておき、荷台画像のフレーム間の差分として検出された領域に各々の農作物のテンプレート画像に類似する画像が存在するか否かを監視することによって農作物の動きを検知すればよい。これによって、開示の装置は、農作物の積込み作業、積直し作業及び積出し作業を同様に検知できる。また、開示の装置は、段ボール以外の梱包体、例えばかごやパレットなどによって梱包される場合にも開示の装置を同様に適用できる。この場合には、荷台画像のフレーム間の差分として検出された領域に、予め定義されたかごやパレットに関する特徴が存在するか否かを監視することによってかごやパレットの動きを検知すればよい。これによって、開示の装置は、農作物の積込み作業、積直し作業及び積出し作業を同様に検知できる。
[Packaging packing]
In the first embodiment, the case where the crop is packed by cardboard is illustrated. However, the disclosed device can be applied even when the crop is loaded as it is on the loading platform of the vehicle 3 without being packed. In this case, by registering crop template images in advance and monitoring whether there is an image similar to each crop template image in the area detected as the difference between frames of the loading platform image What is necessary is to detect the movement of the crop. Thus, the disclosed apparatus can similarly detect crop loading, unloading and loading operations. Further, the disclosed apparatus can be similarly applied to the case where the disclosed apparatus is packed by a packing body other than cardboard, such as a car or a pallet. In this case, the movement of the car or the pallet may be detected by monitoring whether or not a pre-defined characteristic regarding the car or the pallet exists in the area detected as the difference between frames of the loading platform image. Thus, the disclosed apparatus can similarly detect crop loading, unloading and loading operations.

[スタンドアローンへの適用]
上記の実施例1では、クラウドコンピューティングによりサーバがクライアントに荷物の積合せを判定するサービスを提供する場合を例示したが、開示の装置はこれに限定されない。例えば、開示の装置は、ネットワーク7を介さずとも、携帯端末50がスタンドアローンで動作する場合、すなわち携帯端末50が画像解析部15、取得部16、導出部17、判定部18及び報知制御部19の機能を有する場合にも同様に適用できる。
[Application to stand-alone]
In the first embodiment, the case where the server provides the client with a service for determining the stacking of the packages by cloud computing is illustrated, but the disclosed apparatus is not limited thereto. For example, in the disclosed device, when the mobile terminal 50 operates in a stand-alone manner without using the network 7, that is, the mobile terminal 50 includes the image analysis unit 15, the acquisition unit 16, the derivation unit 17, the determination unit 18, and the notification control unit. The same applies to the case of 19 functions.

[輸送以外の局面への適用]
上記の実施例1では、作業者5によって車両3の荷台に農作物が梱包された荷物が積まれる場合を例示したが、開示の装置はこれに限定されない。例えば、開示の装置は、農作物が流通する過程で荷物をコンテナで運搬したり、倉庫に保管したりする場合にも適用できる。即ち、荷台、コンテナ、倉庫のように空間的に閉ざされた領域内に複数種類の荷物が置かれるような場合に適用することが考えられる。例えば、コンテナや倉庫の場合であれば、コンテナや倉庫に設置されたカメラを用いて、荷物の積込み作業、積直し作業及び積出し作業を同様に検知できる。
[Application to aspects other than transportation]
In the above-described first embodiment, the case where the worker 5 loads the load on which the agricultural products are packed on the loading platform of the vehicle 3 is illustrated, but the disclosed apparatus is not limited thereto. For example, the disclosed apparatus can also be applied to cases where a package is transported by a container or stored in a warehouse in the process of distributing agricultural products. That is, it can be applied to a case where a plurality of types of luggage are placed in a spatially closed area such as a cargo bed, a container, and a warehouse. For example, in the case of a container or a warehouse, it is possible to similarly detect a loading operation, a loading operation, and a loading operation using a camera installed in the container or the warehouse.

[RFIDタグの使用]
上記の実施例1では、荷台画像から荷物の識別及び積荷位置の登録を行う場合を例示したが、開示の装置はこれに限定されない。例えば、開示の装置は、荷物に同梱されたRFID(Radio Frequency Identification)タグまたは貼付けられたRFIDタグから、荷物に梱包されている農作物の品名コードを取得することにより荷物を識別することもできる。また、開示の装置は、荷物に同梱されたRFIDタグまたは貼付けられたRFIDタグから荷物が車両3の荷台に積まれた積荷位置を取得することにより積荷位置を登録することもできる。
[Use of RFID tags]
In the first embodiment, the case where the identification of the luggage and the registration of the loading position are performed from the loading platform image is illustrated, but the disclosed apparatus is not limited thereto. For example, the disclosed apparatus can identify a package by obtaining a product name code of a crop packaged in the package from an RFID (Radio Frequency Identification) tag attached to the package or an attached RFID tag. . Further, the disclosed apparatus can also register the loading position by acquiring the loading position where the luggage is loaded on the loading platform of the vehicle 3 from the RFID tag bundled with the luggage or the attached RFID tag.

[農作物以外への適用]
上記の実施例1では、農作物が産出するエチレンガスによって他の農作物の鮮度が低下する場合を例示したが、開示の装置はこれに限定されない。開示の装置は、農作物を積み合わせる場合でなくとも、さらには、産出するガスがエチレンガスでなくとも、一方の物品が産出するガスによって他方の物品の品質が低下する場合に広く適用できる。一例としては、開示の装置は、におい成分を産出する魚介類などの物品と、におい成分が付着しやすいパンや衣類などの物品とが積み合わせられる場合に適用できる。
[Application to other than crops]
In Example 1 described above, the case where the freshness of other crops is reduced by the ethylene gas produced by the crops is illustrated, but the disclosed apparatus is not limited thereto. The disclosed apparatus can be widely applied not only when crops are stacked, but also when the gas produced is not ethylene gas and the quality of the other article is deteriorated by the gas produced by one article. As an example, the disclosed apparatus can be applied to a case where an article such as seafood that produces an odor component and an article such as bread or clothing to which the odor component easily adheres.

この場合には、開示の装置では、エチレンガスの産出率の代わりににおい成分のガスに関する産出率を物品別及びにおい成分の種類別に産出率記憶部13aへ登録しておく。開示の装置では、エチレンガスの影響度の代わりににおい成分のガスに関する影響度を物品別及びにおい成分の種類別に影響度記憶部13bへ登録しておく。さらに、開示の装置では、エチレンガスの警告距離の代わりににおい成分のガスに関する警告距離をにおい成分の種類別及び産出率と影響度の組合せ別に距離記憶部14bへ登録しておく。その上で、開示の装置は、車両3の荷台に第1の荷物の積込み又は積直しがなされることにより第2の荷物に品質低下のおそれがあるか否かを判定し、または、既に積込み済みの第2の荷物により第1の荷物に品質低下のおそれがあるか否かを判定してもよい。このとき、積合せ判定は、におい成分の種類ごとに行われるのが好ましい。なお、上記のにおい成分の種類は、アンモニアなどの刺激臭を持つ成分であってもよいし、魚が腐敗した時に発する成分であってもよいし、たまごが腐敗した時に発する成分であってもよい。   In this case, in the disclosed apparatus, instead of the ethylene gas production rate, the production rate relating to the odor component gas is registered in the production rate storage unit 13a for each article and for each odor component type. In the disclosed apparatus, instead of the influence degree of ethylene gas, the influence degree regarding the gas of the odor component is registered in the influence degree storage unit 13b for each article and for each kind of odor component. Furthermore, in the disclosed apparatus, instead of the warning distance of ethylene gas, the warning distance regarding the odor component gas is registered in the distance storage unit 14b for each type of odor component and for each combination of the production rate and the degree of influence. In addition, the disclosed apparatus determines whether there is a risk of quality deterioration in the second load due to the loading or reloading of the first load on the loading platform of the vehicle 3, or has already been loaded. It may be determined whether there is a risk of quality degradation of the first package due to the already completed second package. At this time, the product determination is preferably performed for each kind of odor component. The type of odor component may be a component having an irritating odor such as ammonia, a component emitted when the fish rots, or a component emitted when the eggs rot. Good.

[装置の分散・統合]
また、図示した各装置の各構成要素は、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。例えば、画像解析部15、取得部16、導出部17、判定部18または報知制御部19を積合せ判定サーバの外部装置としてネットワーク経由で接続するようにしてもよい。また、画像解析部15、取得部16、導出部17、判定部18または報知制御部19を別の装置がそれぞれ有し、ネットワーク接続されて協働することで、上記の積合せ判定サーバ10の機能を実現するようにしてもよい。また、品物情報記憶部12、産出率記憶部13a、影響度記憶部13b、積荷記憶部14a、距離記憶部14bの全部又は一部を別の装置がそれぞれ有し、ネットワーク接続されて協働することで、上記の積合せ判定サーバ10の機能を実現するようにしてもよい。
[Distribution and integration of devices]
In addition, each component of each illustrated apparatus does not necessarily need to be physically configured as illustrated. In other words, the specific form of distribution / integration of each device is not limited to that shown in the figure, and all or a part thereof may be functionally or physically distributed or arbitrarily distributed in arbitrary units according to various loads or usage conditions. Can be integrated and configured. For example, the image analysis unit 15, the acquisition unit 16, the derivation unit 17, the determination unit 18, or the notification control unit 19 may be connected as an external device of the product determination server via a network. In addition, the image analysis unit 15, the acquisition unit 16, the derivation unit 17, the determination unit 18, or the notification control unit 19 is provided in a separate device, and is connected to the network to cooperate. You may make it implement | achieve a function. In addition, another device has all or part of the product information storage unit 12, the output rate storage unit 13a, the impact storage unit 13b, the load storage unit 14a, and the distance storage unit 14b, and cooperates by being connected to a network. Thus, the function of the product determination server 10 may be realized.

[警告距離の補正]
上記の実施例1では、距離記憶部14bに記憶されている産出率と影響度との組み合わせごとに、警告距離を決定する場合を例示したが、開示の装置はこれに限定されない。開示の装置は、距離記憶部14bに記憶されている警告距離をそのまま処理に用いるのではなく、警告距離を補正してS308やS310での判断に用いても良い。例えば、産出率の大きい品物と、影響度の大きい(影響され易い)品物とが警告距離以内に置かれた場合であっても、そのような状態に置かれる時間が短ければ、影響は少ないことが予測できる。反対に、産出率の小さい品物と影響度の小さい(影響されにくい)品物とが警告距離以遠に置かれた場合であっても、そのような状態に置かれる時間が長ければ、影響は大きくなることが予測できる。
[Warning distance correction]
In the first embodiment, the case where the warning distance is determined for each combination of the output rate and the degree of influence stored in the distance storage unit 14b is illustrated, but the disclosed apparatus is not limited thereto. The disclosed apparatus does not use the warning distance stored in the distance storage unit 14b as it is for the processing, but may correct the warning distance and use it for the determination in S308 or S310. For example, even if a product with a high output rate and a product with a large impact (which is easily affected) are placed within the warning distance, the impact should be small if the time for such a state is short. Can be predicted. On the other hand, even if a product with a low output rate and a product with a low impact (hard to be affected) are placed beyond the warning distance, the impact will increase if the time for such a state is long. Can be predicted.

そこで、複数の荷物同士が置かれた状態が維持される時間として、例えば運送時間や倉庫での保管時間に関する情報が得られれば、1よりも大きい補正係数であって、時間が長いほど、時間が短い場合と比較して値が大きくなるような補正係数を設定することが考えられる。そして、距離記憶部14bに記憶されている警告距離に補正係数を掛けた値を、S308やS310での判断に用いることが考えられる。このようにすることで、短時間の輸送であれば荷物を置くことのできる位置の自由度を高めることができるので、荷物を積み込む作業の自由度を高めることができる。   Therefore, as the time for maintaining the state where a plurality of packages are placed, for example, if information on the transportation time or the storage time in the warehouse is obtained, the correction coefficient is larger than 1, and the longer the time, the longer the time. It is conceivable to set a correction coefficient such that the value becomes larger than when the value is short. A value obtained by multiplying the warning distance stored in the distance storage unit 14b by the correction coefficient may be used for the determination in S308 or S310. By doing in this way, if it is transport for a short time, the freedom degree of the position which can put a load can be raised, Therefore The freedom degree of the operation | work which loads a load can be raised.

また、産出率記憶部13aに記憶された品名コードごとの産出率をそのまま処理に用いるのではなく、産出率を補正しても良い。例えば、収穫直後と収穫から長時間が経過した後とでは、同一の農産物であっても産出率が変化することが考えられる。そこで、予め、品名コードごとに、産出量の経時変化量を記憶しておき、判定対象とする荷物内の農産物の収穫からの時間がわかれば、それらの情報を利用して産出率を補正することが考えられる。なお、開示の装置では、産出量の経時変化量を用いて産出率を補正する代わりに警告距離を補正することとしてもかまわない。   Further, instead of using the output rate for each product name code stored in the output rate storage unit 13a as it is in the process, the output rate may be corrected. For example, it is conceivable that the yield rate changes even immediately after harvesting and after a long time has passed since harvesting, even for the same agricultural product. Therefore, the amount of change over time of output is stored in advance for each product name code, and if the time since the harvest of the agricultural products in the luggage to be determined is known, the output rate is corrected using such information. It is possible. In the disclosed apparatus, the warning distance may be corrected instead of correcting the output rate using the amount of change in output over time.

[積合せ判定プログラム]
また、上記の実施例で説明した各種の処理は、予め用意されたプログラムをパーソナルコンピュータやワークステーションなどのコンピュータで実行することによって実現することができる。そこで、以下では、図15を用いて、上記の実施例と同様の機能を有する積合せ判定プログラムを実行するコンピュータの一例について説明する。
[Production judgment program]
The various processes described in the above embodiments can be realized by executing a prepared program on a computer such as a personal computer or a workstation. In the following, an example of a computer that executes a product determination program having the same function as that of the above-described embodiment will be described with reference to FIG.

図15は、実施例1及び実施例2に係る積合せ判定プログラムを実行するコンピュータの一例について説明するための図である。図15に示すように、コンピュータ100は、操作部110aと、スピーカ110bと、カメラ110cと、ディスプレイ120と、通信部130とを有する。さらに、このコンピュータ100は、CPU150と、ROM160と、HDD170と、RAM180と有する。これら110〜180の各部はバス140を介して接続される。   FIG. 15 is a schematic diagram illustrating an example of a computer that executes a product determination program according to the first and second embodiments. As illustrated in FIG. 15, the computer 100 includes an operation unit 110 a, a speaker 110 b, a camera 110 c, a display 120, and a communication unit 130. Further, the computer 100 includes a CPU 150, a ROM 160, an HDD 170, and a RAM 180. These units 110 to 180 are connected via a bus 140.

HDD170には、図15に示すように、上記の実施例1で示した画像解析部15と、取得部16と、導出部17と、判定部18と、報知制御部19と同様の機能を発揮する積合せ判定プログラム170aが予め記憶される。この積合せ判定プログラム170aについては、図2に示した各々の画像解析部15、取得部16、導出部17、判定部18及び報知制御部19の各構成要素と同様、適宜統合又は分離しても良い。すなわち、HDD170に格納される各データは、常に全てのデータがHDD170に格納される必要はなく、処理に必要なデータのみがHDD170に格納されれば良い。   As shown in FIG. 15, the HDD 170 exhibits the same functions as the image analysis unit 15, the acquisition unit 16, the derivation unit 17, the determination unit 18, and the notification control unit 19 described in the first embodiment. The product judgment program 170a to be stored is stored in advance. The product determination program 170a is appropriately integrated or separated as in each component of the image analysis unit 15, the acquisition unit 16, the derivation unit 17, the determination unit 18, and the notification control unit 19 shown in FIG. Also good. In other words, all data stored in the HDD 170 need not always be stored in the HDD 170, and only data necessary for processing may be stored in the HDD 170.

そして、CPU150が、積合せ判定プログラム170aをHDD170から読み出してRAM180に展開する。これによって、図15に示すように、積合せ判定プログラム170aは、積合せ判定プロセス180aとして機能する。この積合せ判定プロセス180aは、HDD170から読み出した各種データを適宜RAM180上の自身に割り当てられた領域に展開し、この展開した各種データに基づいて各種処理を実行する。なお、積合せ判定プロセス180aは、図2に示した画像解析部15、取得部16、導出部17、判定部18及び報知制御部19にて実行される処理、例えば図12及び図13に示す処理を含む。また、CPU150上で仮想的に実現される各処理部は、常に全ての処理部がCPU150上で動作する必要はなく、処理に必要な処理部のみが仮想的に実現されれば良い。   Then, the CPU 150 reads the product determination program 170 a from the HDD 170 and develops it in the RAM 180. Thus, as shown in FIG. 15, the product judgment program 170a functions as a product judgment process 180a. The product determination process 180a expands various data read from the HDD 170 in an area allocated to itself on the RAM 180 as appropriate, and executes various processes based on the expanded data. The product determination process 180a is performed by the image analysis unit 15, the acquisition unit 16, the derivation unit 17, the determination unit 18, and the notification control unit 19 illustrated in FIG. 2, for example, as illustrated in FIGS. Includes processing. In addition, each processing unit virtually realized on the CPU 150 does not always require that all processing units operate on the CPU 150, and only a processing unit necessary for the processing needs to be virtually realized.

なお、上記の積合せ判定プログラム170aについては、必ずしも最初からHDD170やROM160に記憶させておく必要はない。例えば、コンピュータ100に挿入されるフレキシブルディスク、いわゆるFD、CD−ROM、DVDディスク、光磁気ディスク、ICカードなどの「可搬用の物理媒体」に各プログラムを記憶させる。そして、コンピュータ100がこれらの可搬用の物理媒体から各プログラムを取得して実行するようにしてもよい。また、公衆回線、インターネット、LAN、WANなどを介してコンピュータ100に接続される他のコンピュータまたはサーバ装置などに各プログラムを記憶させておき、コンピュータ100がこれらから各プログラムを取得して実行するようにしてもよい。   Note that the product determination program 170a is not necessarily stored in the HDD 170 or the ROM 160 from the beginning. For example, each program is stored in a “portable physical medium” such as a flexible disk inserted into the computer 100, so-called FD, CD-ROM, DVD disk, magneto-optical disk, or IC card. Then, the computer 100 may acquire and execute each program from these portable physical media. In addition, each program is stored in another computer or server device connected to the computer 100 via a public line, the Internet, a LAN, a WAN, etc., and the computer 100 acquires and executes each program from these. It may be.

以上の実施例を含む実施形態に関し、さらに以下の付記を開示する。   The following supplementary notes are further disclosed with respect to the embodiments including the above examples.

(付記1)コンピュータが、
所定の領域内に置かれた複数の物品を識別し、
前記複数の物品のうちの第1の物品及び第2の物品の識別結果に応じて、物品ごとに前記物品が産出するガスの産出度と前記物品がガスによって影響を受ける影響度とを記憶する記憶部から、前記第1の物品の産出度及び前記第2の物品の影響度を取得し、
前記第1の物品及び前記第2の物品が、前記第1の物品の産出度及び前記第2の物品の影響度によって定まる範囲内に積まれたか否かを判定し、
前記範囲内にあると判定された場合に報知を実行するように制御する処理
を実行することを特徴とする積合せ判定方法。
(Supplementary note 1)
Identify multiple items placed within a given area,
According to the identification result of the first article and the second article among the plurality of articles, the degree of gas produced by the article and the degree of influence of the article affected by the gas are stored for each article. From the storage unit, obtain the production degree of the first article and the influence degree of the second article,
Determining whether or not the first article and the second article are stacked within a range determined by a production degree of the first article and an influence degree of the second article;
A product determination method, comprising: performing a process of performing notification when it is determined to be within the range.

(付記2)前記コンピュータが、
前記第1の物品及び前記第2の物品の距離を導出する処理をさらに実行し、
前記範囲内に積まれたか否かを判定する処理として、
前記第1の物品及び前記第2の物品の距離が、産出度及び影響度の組合せごとに距離を対応付けて記憶する距離記憶部によって記憶された距離のうち前記第1の物品の産出度及び前記第2の物品の影響度に対応する距離以下であるか否かを判定する処理を実行することを特徴とする付記1に記載の積合せ判定方法。
(Appendix 2) The computer
Further executing a process of deriving a distance between the first article and the second article;
As a process for determining whether or not the load is within the range,
The distance between the first article and the second article is the distance of the first article among the distances stored by the distance storage unit that stores the distance for each combination of the degree of production and the degree of influence. The product determination method according to claim 1, wherein a process of determining whether or not the distance is equal to or less than a distance corresponding to the degree of influence of the second article is executed.

(付記3)前記コンピュータが、
前記第1の物品及び前記第2の物品が積まれる期間に応じて、前記距離記憶部によって前記第1の物品の産出度及び前記第2の物品の影響度に対応付けて記憶された距離を補正する処理をさらに実行し、
前記範囲内に積まれたか否かを判定する処理として、
前記第1の物品及び前記第2の物品の距離が、前記補正された距離以下であるか否かを判定する処理を実行することを特徴とする付記2に記載の積合せ判定方法。
(Supplementary note 3)
The distance stored in association with the output degree of the first article and the influence degree of the second article by the distance storage unit according to a period during which the first article and the second article are stacked. Perform further processing to correct,
As a process for determining whether or not the load is within the range,
The product determination method according to appendix 2, wherein a process of determining whether or not a distance between the first article and the second article is equal to or less than the corrected distance is executed.

(付記4)前記範囲内に積まれたか否かを判定する処理として、
産出度及び影響度の組合せごとに範囲の有無を対応付けて記憶する範囲記憶部によって記憶された範囲の有無のうち前記第1の物品の産出度及び前記第2の物品の影響度に対応する範囲が有りであるか否かを判定する処理を実行することを特徴とする付記1に記載の積合せ判定方法。
(Supplementary Note 4) As a process for determining whether or not the load is within the range,
Corresponding to the output degree of the first article and the influence degree of the second article among the presence / absence of the range stored by the range storage unit that associates and stores the presence / absence of the range for each combination of the production degree and the influence degree. The product determination method according to appendix 1, wherein a process for determining whether or not there is a range is executed.

(付記5)前記産出度及び前記影響度を取得する処理として、
前記第2の物品の産出度及び前記第1の物品の影響度をさらに取得する処理を実行し、
前記範囲内に積まれたか否かを判定する処理として、
前記第1の物品及び前記第2の物品が、前記第2の物品の産出度及び前記第1の物品の影響度によって定まる範囲内に積まれたか否かをさらに判定し、
前記報知を実行するように制御する処理として、
前記第1の物品及び前記第2の物品が、前記第1の物品の産出度及び前記第2の物品の影響度によって定まる範囲内、又は、前記第2の物品の産出度及び前記第1の物品の影響度によって定まる範囲内に積まれたと判定された場合に、報知を実行するように制御することを特徴とする付記1〜4のいずれか1つに記載の積合せ判定方法。
(Supplementary Note 5) As a process for acquiring the output and the influence,
Executing a process of further obtaining the yield of the second article and the influence of the first article;
As a process for determining whether or not the load is within the range,
It is further determined whether or not the first article and the second article are stacked within a range determined by the production degree of the second article and the influence degree of the first article,
As a process of controlling to execute the notification,
The first article and the second article are within a range determined by the production degree of the first article and the influence degree of the second article, or the production degree of the second article and the first article. The product determination method according to any one of appendices 1 to 4, wherein when it is determined that the product has been stacked within a range determined by the degree of influence of the article, notification is performed.

(付記6)物品ごとに前記物品が産出するガスの産出度と前記物品がガスによって影響を受ける影響度とを記憶する記憶部と、
所定の領域内に置かれた複数の物品を識別する識別部と、
前記識別部により識別された、前記複数の物品のうちの第1の物品及び第2の物品につき、前記記憶部から前記第1の物品の産出度及び前記第2の物品の影響度を取得する取得部と、
前記第1の物品及び前記第2の物品が、前記取得部によって取得された第1の物品の産出度及び第2の物品の影響度によって定まる範囲内に積まれたか否かを判定する判定部と、
前記判定部によって範囲内にあると判定された場合に報知を実行するように制御する報知制御部と
を有することを特徴とする積合せ判定装置。
(Additional remark 6) The memory | storage part which memorize | stores the production degree of the gas which the said article produces for every goods, and the influence degree by which the said article is influenced by gas,
An identification unit for identifying a plurality of articles placed in a predetermined area;
For the first article and the second article among the plurality of articles identified by the identification unit, the production degree of the first article and the influence degree of the second article are acquired from the storage unit. An acquisition unit;
A determination unit that determines whether or not the first article and the second article are stacked within a range determined by the output degree of the first article and the influence degree of the second article acquired by the acquisition unit. When,
And a notification control unit that controls to perform notification when it is determined by the determination unit to be within the range.

(付記7)産出度及び影響度の組合せごとに距離を対応付けて記憶する距離記憶部と、
前記第1の物品及び前記第2の物品の距離を導出する導出部とをさらに有し、
前記判定部は、前記導出部によって導出された第1の物品及び第2の物品の距離が、前記距離記憶部によって記憶された距離のうち前記取得部によって取得された第1の物品の産出度及び第2の物品の影響度に対応する距離以下であるか否かを判定することを特徴とする付記6に記載の積合せ判定装置。
(Supplementary Note 7) A distance storage unit that stores a distance in association with each combination of the output degree and the influence degree;
A derivation unit for deriving a distance between the first article and the second article;
The determination unit is configured such that the distance between the first article and the second article derived by the deriving unit is the first article yield obtained by the obtaining unit among the distances stored by the distance storage unit. And the product determination apparatus according to appendix 6, wherein it is determined whether or not the distance is equal to or less than a distance corresponding to the degree of influence of the second article.

(付記8)前記第1の物品及び前記第2の物品が積まれる期間に応じて、前記距離記憶部によって前記第1の物品の産出度及び前記第2の物品の影響度に対応付けて記憶された距離を補正する補正部をさらに有し、
前記判定部は、前記導出部によって導出された第1の物品及び第2の物品の距離が、前記補正部によって補正された距離以下であるか否かを判定することを特徴とする付記7に記載の積合せ判定装置。
(Supplementary Note 8) According to a period during which the first article and the second article are stacked, the distance storage unit stores the first article in association with the output degree of the first article and the influence degree of the second article. A correction unit that corrects the measured distance,
The appendix 7 is characterized in that the determination unit determines whether or not the distance between the first article and the second article derived by the deriving unit is equal to or less than the distance corrected by the correction unit. The product determination apparatus described.

(付記9)産出度及び影響度の組合せごとに範囲の有無を対応付けて記憶する範囲記憶部をさらに有し、
前記判定部は、前記範囲記憶部によって記憶された範囲の有無のうち前記取得部によって取得された第1の物品の産出度及び第2の物品の影響度に対応する範囲が有りであるか否かを判定することを特徴とする付記6に記載の積合せ判定装置。
(Additional remark 9) It further has the range memory | storage part which matches and memorize | stores the presence or absence of a range for every combination of a production degree and influence degree,
Whether the determination unit has a range corresponding to the production degree of the first article and the influence degree of the second article acquired by the acquisition unit among the presence / absence of the range stored by the range storage unit. The product determining apparatus according to appendix 6, wherein the apparatus determines whether or not.

(付記10)前記取得部は、前記第2の物品の産出度及び前記第1の物品の影響度をさらに取得し、
前記判定部は、前記第1の物品及び前記第2の物品が、前記取得部によって取得された第2の物品の産出度及び第1の物品の影響度によって定まる範囲内に積まれたか否かをさらに判定し、
前記報知制御部は、前記判定部によって前記第1の物品及び前記第2の物品が前記第1の物品の産出度及び第2の物品の影響度によって定まる範囲内又は前記第2の物品の産出度及び前記第1の物品の影響度によって定まる範囲内に積まれたと判定された場合に、報知を実行するように制御することを特徴とする付記6〜9のいずれか1つに記載の積合せ判定装置。
(Additional remark 10) The said acquisition part further acquires the production degree of the said 2nd goods, and the influence degree of the said 1st goods,
The determination unit determines whether or not the first article and the second article are stacked within a range determined by the production degree of the second article and the influence degree of the first article acquired by the acquisition unit. Further determine
The notification control unit includes the first article and the second article within a range determined by the production degree of the first article and the influence degree of the second article, or the production of the second article. The product according to any one of appendices 6 to 9, wherein the product is controlled so as to perform notification when it is determined that the product has been loaded within a range determined by a degree and an influence degree of the first article. Matching judgment device.

(付記11)コンピュータに、
所定の領域内に置かれた複数の物品を識別し、
前記複数の物品のうちの第1の物品及び第2の物品の識別結果に応じて、物品ごとに前記物品が産出するガスの産出度と前記物品がガスによって影響を受ける影響度とを記憶する記憶部から、前記第1の物品の産出度及び前記第2の物品の影響度を取得し、
前記第1の物品及び前記第2の物品が、前記第1の物品の産出度及び前記第2の物品の影響度によって定まる範囲内に積まれたか否かを判定し、
前記範囲内にあると判定された場合に報知を実行するように制御する処理
を実行させることを特徴とする積合せ判定プログラム。
(Supplementary note 11)
Identify multiple items placed within a given area,
According to the identification result of the first article and the second article among the plurality of articles, the degree of gas produced by the article and the degree of influence of the article affected by the gas are stored for each article. From the storage unit, obtain the production degree of the first article and the influence degree of the second article,
Determining whether or not the first article and the second article are stacked within a range determined by a production degree of the first article and an influence degree of the second article;
A product determination program for executing a process of performing control so as to execute notification when it is determined to be within the range.

1 データセンタ
3 車両
5 作業者
10 積合せ判定サーバ
11 通信I/F部
12 品物情報記憶部
13a 産出率記憶部
13b 影響度記憶部
14a 積荷記憶部
14b 距離記憶部
15 画像解析部
15a 検知部
15b 識別部
15c 登録部
16 取得部
17 導出部
18 判定部
19 報知制御部
30 カメラ
50 携帯端末
DESCRIPTION OF SYMBOLS 1 Data center 3 Vehicle 5 Worker 10 Stack determination server 11 Communication I / F part 12 Product information storage part 13a Output rate storage part 13b Influence degree storage part 14a Load storage part 14b Distance storage part 15 Image analysis part 15a Detection part 15b Identification unit 15c Registration unit 16 Acquisition unit 17 Derivation unit 18 Determination unit 19 Notification control unit 30 Camera 50 Mobile terminal

Claims (4)

コンピュータが、
所定の領域内に置かれた複数の物品を識別し、
前記複数の物品のうちの第1の物品及び第2の物品の識別結果に応じて、物品の種類ごとに前記物品が産出するガスの産出度と前記物品が前記物品とは異なる他の物品が産出するガスによって影響を受ける影響度とを記憶する記憶部から、前記第1の物品の産出度及び前記第2の物品の影響度を取得し、
前記第1の物品及び前記第2の物品の距離を導出し、
前記第1の物品及び前記第2の物品の距離が、産出度及び影響度の組合せごとに距離を対応付けて記憶する距離記憶部によって記憶された距離のうち前記第1の物品の産出度及び前記第2の物品の影響度に対応する距離以下であるか否かを判定し、
前記距離以下であると判定された場合に前記第2の物品が前記第1の物品のガスにより影響を受けることを示す通知を所定の出力部へ出力する処理
を実行することを特徴とする積合せ判定方法。
Computer
Identify multiple items placed within a given area,
According to the identification result of the first article and the second article among the plurality of articles, there is another article in which the degree of gas produced by the article for each type of article and the article is different from the article. From the storage unit that stores the degree of influence affected by the produced gas, obtain the degree of production of the first article and the degree of influence of the second article,
Deriving a distance between the first article and the second article;
The distance between the first article and the second article is the distance of the first article among the distances stored by the distance storage unit that stores the distance for each combination of the degree of production and the degree of influence. It is determined whether or not the distance is equal to or less than the distance corresponding to the degree of influence of the second article ,
Executing a process of outputting a notification indicating that the second article is affected by the gas of the first article to a predetermined output unit when it is determined that the distance is equal to or less than the distance. Matching judgment method.
前記コンピュータが、
前記第1の物品及び前記第2の物品が積まれる期間に応じて、前記距離記憶部によって前記第1の物品の産出度及び前記第2の物品の影響度に対応付けて記憶された距離を補正する処理をさらに実行し、
記判定する処理として、
前記第1の物品及び前記第2の物品の距離が、前記補正された距離以下であるか否かを判定する処理を実行することを特徴とする請求項に記載の積合せ判定方法。
The computer is
The distance stored in association with the output degree of the first article and the influence degree of the second article by the distance storage unit according to a period during which the first article and the second article are stacked. Perform further processing to correct,
As a process of pre-Symbol-size constant,
The distance of the first article and the second article, the product combined determination method according to claim 1, characterized in that it executes a process of determining the corrected distance not less either.
前記産出度及び前記影響度を取得する処理として、
前記第2の物品の産出度及び前記第1の物品の影響度をさらに取得する処理を実行し、
記判定する処理として、
前記第1の物品及び前記第2の物品の距離が、前記距離記憶部によって記憶された距離のうち前記第2の物品の産出度及び前記第1の物品の影響度に対応する距離以下であるか否かをさらに判定し、
前記出力する処理として、
前記第1の物品及び前記第2の物品の距離が、前記第1の物品の産出度及び前記第2の物品の影響度に対応する距離以下、又は、前記第2の物品の産出度及び前記第1の物品の影響度に対応する距離以下である場合に、前記第2の物品が前記第1の物品のガスにより影響を受けることを示す通知、又は、前記第1の物品が前記第2の物品のガスにより影響を受けることを示す通知を出力することを特徴とする請求項1または2に記載の積合せ判定方法。
As a process for acquiring the yield and the influence,
Executing a process of further obtaining the yield of the second article and the influence of the first article;
As a process of pre-Symbol-size constant,
The distance between the first article and the second article is equal to or less than the distance corresponding to the output degree of the second article and the influence degree of the first article among the distances stored by the distance storage unit. Whether or not
As the output process,
The distance between the first article and the second article is equal to or less than the distance corresponding to the production degree of the first article and the influence degree of the second article , or the production degree of the second article and the A notification indicating that the second article is affected by the gas of the first article when the distance is equal to or less than the distance corresponding to the degree of influence of the first article, or the first article is the second article 3. The product determination method according to claim 1 , wherein a notification indicating that the product is affected by the gas of the product is output .
物品の種類ごとに前記物品が産出するガスの産出度と前記物品が前記物品とは異なる他の物品が産出するガスによって影響を受ける影響度とを記憶する記憶部と、
産出度及び影響度の組合せごとに距離を対応付けて記憶する距離記憶部と、
所定の領域内に置かれた複数の物品を識別する識別部と、
前記識別部により識別された、前記複数の物品のうちの第1の物品及び第2の物品につき、前記記憶部から前記第1の物品の産出度及び前記第2の物品の影響度を取得する取得部と、
前記第1の物品及び前記第2の物品の距離を導出する導出部と、
前記第1の物品及び前記第2の物品の距離が、前記距離記憶部によって記憶された距離のうち前記第1の物品の産出度及び前記第2の物品の影響度に対応する距離以下であるか否かを判定する判定部と、
前記距離以下であると判定された場合に前記第2の物品が前記第1の物品のガスにより影響を受けることを示す通知を所定の出力部へ出力する出力部と
を有することを特徴とする積合せ判定装置。
A storage unit that stores a production level of gas produced by the product for each type of product and an influence level of the product affected by a gas produced by another product different from the product ;
A distance storage unit that stores a distance associated with each combination of the degree of production and the degree of influence;
An identification unit for identifying a plurality of articles placed in a predetermined area;
For the first article and the second article among the plurality of articles identified by the identification unit, the production degree of the first article and the influence degree of the second article are acquired from the storage unit. An acquisition unit;
A deriving unit for deriving a distance between the first article and the second article;
The distance between the first article and the second article is equal to or less than the distance corresponding to the output degree of the first article and the influence degree of the second article among the distances stored by the distance storage unit. A determination unit for determining whether or not
And an output unit that outputs a notification indicating that the second article is affected by the gas of the first article to a predetermined output unit when it is determined that the distance is equal to or less than the distance. Product judgment device.
JP2011021176A 2011-02-02 2011-02-02 Product judgment method and product judgment device Expired - Fee Related JP5764950B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011021176A JP5764950B2 (en) 2011-02-02 2011-02-02 Product judgment method and product judgment device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011021176A JP5764950B2 (en) 2011-02-02 2011-02-02 Product judgment method and product judgment device

Publications (2)

Publication Number Publication Date
JP2012158460A JP2012158460A (en) 2012-08-23
JP5764950B2 true JP5764950B2 (en) 2015-08-19

Family

ID=46839313

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011021176A Expired - Fee Related JP5764950B2 (en) 2011-02-02 2011-02-02 Product judgment method and product judgment device

Country Status (1)

Country Link
JP (1) JP5764950B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10740576B2 (en) * 2015-02-18 2020-08-11 Fedex Corporate Services, Inc. Systems, apparatus, non-transient computer readable media, and methods for automatically managing and monitoring a load operation related to a logistics container using a scanning sensor node
JP7506352B2 (en) 2022-05-31 2024-06-26 日本製鉄株式会社 Item management device, item management method, and program

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001354311A (en) * 2000-06-14 2001-12-25 Cosmac:Kk Freshness managing method and freshness managing system
JP2002183875A (en) * 2000-12-14 2002-06-28 Isuzu Motors Ltd Physical distribution system
JP4498021B2 (en) * 2004-06-14 2010-07-07 株式会社日本総合研究所 Inventory management support system and support program

Also Published As

Publication number Publication date
JP2012158460A (en) 2012-08-23

Similar Documents

Publication Publication Date Title
US11090689B2 (en) Conveyor belt assembly for identifying an asset sort location and methods of utilizing the same
US11526840B2 (en) Detecting inventory changes
AU2018268566B2 (en) Smart cabinet system and control method therefor
US11105887B2 (en) Identifying an asset sort location
US10161746B2 (en) Systems and methods for cargo management
US20180247404A1 (en) Optical vibrometric testing of container for items
US9632313B1 (en) Augmented reality user interface facilitating fulfillment
US20190347613A1 (en) Logistics management device, logistics management method, and program
WO2017017504A1 (en) Method and apparatus for generating a dynamic environmental profile for transport of cargo
GB2581655A (en) Sytems and methods to establish digital chain of custody
CN113269500A (en) Cold-chain logistics monitoring method and system based on neural network
CN110136044B (en) Article sorting method, system and equipment and intelligent terminal
CA3046069A1 (en) Systems and methods for estimating product inventory
US20210198040A1 (en) Asset Loading System
US11783606B2 (en) Delivery system
JP5764950B2 (en) Product judgment method and product judgment device
JP2008297086A (en) Id reading device, id reading method, id reading program, and inspecting device
EP2645318A1 (en) Methods and devices for monitoring the integrity of an article during transporting said article
JP6730091B2 (en) Loading procedure determination device and loading procedure determination program
CN114819821A (en) Goods warehouse-out checking method and device, computer equipment and storage medium
WO2023053286A1 (en) Loading assistance device, loading assistance method, loading assistance system, and program
US20220051019A1 (en) Object detection system, object detection device, and object detection method
CN118095978A (en) Cargo transportation method and device and electronic equipment
CN118219989A (en) Cargo management method of vehicle storage bin, cargo management platform and vehicle
CN113128904A (en) Method, system and readable storage medium for assessing risk of chemicals entering and exiting situation

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131007

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141020

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141028

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150105

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150519

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150601

R150 Certificate of patent or registration of utility model

Ref document number: 5764950

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees