WO2022260034A1 - 水産物選別システムおよび船 - Google Patents

水産物選別システムおよび船 Download PDF

Info

Publication number
WO2022260034A1
WO2022260034A1 PCT/JP2022/022939 JP2022022939W WO2022260034A1 WO 2022260034 A1 WO2022260034 A1 WO 2022260034A1 JP 2022022939 W JP2022022939 W JP 2022022939W WO 2022260034 A1 WO2022260034 A1 WO 2022260034A1
Authority
WO
WIPO (PCT)
Prior art keywords
marine product
sorting
marine
product
processing unit
Prior art date
Application number
PCT/JP2022/022939
Other languages
English (en)
French (fr)
Inventor
憲昌 林
Original Assignee
株式会社エヌ・クラフト
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社エヌ・クラフト filed Critical 株式会社エヌ・クラフト
Priority to JP2023527870A priority Critical patent/JPWO2022260034A1/ja
Publication of WO2022260034A1 publication Critical patent/WO2022260034A1/ja

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A22—BUTCHERING; MEAT TREATMENT; PROCESSING POULTRY OR FISH
    • A22C—PROCESSING MEAT, POULTRY, OR FISH
    • A22C25/00—Processing fish ; Curing of fish; Stunning of fish by electric current; Investigating fish by optical means
    • A22C25/04—Sorting fish; Separating ice from fish packed in ice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B07—SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07C—POSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C5/00—Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
    • B07C5/04—Sorting according to size
    • B07C5/10—Sorting according to size measured by light-responsive means

Definitions

  • the present disclosure relates to a marine product sorting system and a ship equipped with this marine product sorting system.
  • Marine products There are various types of marine products that are caught by various fishing methods and landed, such as fish species, sex and individual size. Marine products are brought in such a mixture of various types to marine product processing plants and fish markets.
  • the processing plant may be mounted not only on land but also on a ship (fishing boat).
  • a sorting process is required to sort the fishery products by type according to the distribution method.
  • sorting processes have conventionally been performed manually in processing plants and fish markets.
  • Such a sorting process is subject to geographical restrictions, such as the work site being near the fishing port where the catch was landed, and the experience and skill level of the personnel performing the sorting.
  • Patent Document 1 For this reason, in recent years, marine product sorting systems that automatically perform such a sorting process have been developed (see Patent Document 1, for example).
  • the type of marine product is automatically determined from the image data acquired by the camera, and the marine product is sorted based on the determination result.
  • the problem of the present disclosure is to provide a marine product sorting system that can accurately sort marine products in a short time.
  • a marine product sorting system includes a camera, a display, and a control device.
  • a camera images fishery products.
  • the display shows a selection screen.
  • the control device can communicate with the camera and the display, respectively, generates a sorting screen for sorting marine products based on images captured by the camera, and displays the sorting screen on the display.
  • the marine product sorting system may further include a conveying device.
  • the transport device may transport marine products.
  • the controller may determine a first seafood product that can be sorted by the controller and a second seafood product that cannot be sorted by the controller.
  • the sorting screen may include information on at least the second seafood.
  • the marine product sorting system may further include a weight scale and an input device.
  • the weighing scale may measure the weight of the seafood conveyed by the conveying device.
  • the input device may receive at least the sorting information of the second marine product.
  • the controller may be able to communicate with the scale and the input device.
  • the control device may have a storage section and a processing section.
  • the storage unit may store shape information of marine products, and combination information of types and weights corresponding to the shape information.
  • the processing unit may estimate the type of marine products included in the image based on the image captured by the camera and the weight measured by the weight scale, and generate the sorting screen.
  • the first marine product may be a marine product whose type can be estimated in the processing unit.
  • the second marine product may be another marine product other than the first marine product.
  • the sorting screen is image information obtained by synthesizing a video, a first sorting unit corresponding to the first marine product and a second sorting unit corresponding to the second marine product among the marine products
  • the combination information may include at least one of the season in which the marine product was landed, the sea area, and the water depth.
  • the processing unit is capable of estimating the type when the shape of the fishery product included in the video has a matching rate with the shape information of the fishery product included in the combination information stored in the storage unit equal to or greater than a predetermined value. can be determined.
  • the first selection unit may include the first marine product and candidates for combination information corresponding to the first marine product selected based on the combination information stored in the storage unit.
  • the second selection unit may include the second marine product and candidates for combination information corresponding to the plurality of second marine products estimated based on the combinations stored in the storage unit.
  • the processing unit may determine a predetermined evaluation corresponding to the input of the combination information based on the combination information input via the input device.
  • the processing unit may evaluate the input to the second sorting unit more favorably than the input to the first sorting unit.
  • the camera may capture images of marine products from multiple directions.
  • the control device can generate a sorting screen for sorting marine products based on images captured by cameras.
  • the sorting screen can be generated without the control device performing extensive image processing and calculations for sorting seafood.
  • the marine product sorting system can accurately sort marine products in a short time.
  • FIG. 1 is a schematic diagram illustrating a seafood sorting system according to an embodiment of the present disclosure
  • FIG. 4 is a flow chart showing a processing procedure by the control device of the present disclosure
  • 4 is a schematic diagram showing an example of a selection screen according to the first embodiment of the present disclosure
  • FIG. FIG. 4 is a schematic diagram enlarging a part of FIG. 3
  • 7 is a schematic diagram showing an example of a selection screen according to the second embodiment of the present disclosure
  • FIG. The schematic which expanded a part of FIG. FIG. 3 is a schematic diagram of a ship equipped with a seafood sorting system according to a third embodiment of the present disclosure
  • the marine product sorting system includes a conveying device 2, a separating device 4, a camera 6, a first weight scale (an example of a weight scale) 8, a second A weighing scale 10 , a control device 12 , a display 14 , an input device 16 and a sorting area 18 are provided.
  • the marine product sorting system 1 is a marine product sorting system that sorts out a plurality of marine products X in which various types of landed seafood are mixed. When such marine products X are carried into the sorting site, they are carried into the conveying device 2 in a state where fish species Y (one example of types) are mixed, and sorting work is performed.
  • the marine product sorting system 1 sorts a plurality of marine products X for each predetermined fish species Y in the sorting operation.
  • the transport device 2 has an actuator 21 and a belt 22 .
  • the transport device 2 is a belt conveyor that transports the marine product X placed on the belt 22 at a predetermined speed.
  • the actuator 21 is electrically connected to and driven by the control device 12 .
  • the belt 22 is driven by an actuator 21 to move the marine product X placed on the belt 22 from upstream U to downstream B.
  • the conveying device 2 is not limited to a belt conveyor, and may be, for example, a slide that descends from the upstream U to the downstream B and conveys the seafood X by gravity, or a roller-type or chain-type conveyor.
  • the separation device 4 has actuators and separators (not shown). Furthermore, the separation device 4 has an escape passage 43 .
  • Actuators and separators are provided on the belt 22 of the transport device 2 .
  • the actuator is electrically connected to controller 12 to drive the separator.
  • Each separator is a plate-like member provided with an actuator at one end.
  • the separator is driven by an actuator to rotate on belt 22 .
  • the separator changes the transport path of the marine product X between the downstream of the belt 22 and the separation passage 43 .
  • the separation passage 43 is provided by branching from the middle of the belt 22 .
  • the separation passage 43 conveys the marine product X whose conveying route has been changed by the separator to the sorting area 18 described later.
  • the separation device 4 has three actuators, three separators, and a first separation passage 431 to a third separation passage 433 . That is, the conveying device 2 and the separating device 4 distribute and convey the marine product X on the belt 22 to four routes including the downstream B of the belt 22 and the three separating passages 43 .
  • the camera 6 takes an image of the marine product X transported by the transport device 2.
  • the camera 6 is arranged on the belt 22 of the conveying device 2 by being attached to an arm (not shown), and its attitude can be changed by an actuator (not shown).
  • the camera 6 may be attached to the ceiling, beams, or the like of the workplace where the sorting work is performed.
  • the camera 6 images the marine product X included in the imaging area W provided on the belt 22 of the conveying device 2 from a plurality of directions.
  • Camera 6 is electrically connected to control device 12 .
  • the camera 6 repeatedly images the imaging area W from different angles at predetermined intervals, and acquires image data (an example of video) D of the imaging area W as a plurality of still images.
  • the camera 6 may continuously capture images of the imaging area W while changing its posture, and acquire the image data D of the imaging area W as a moving image.
  • the camera 6 transmits captured image data D to the control device 12 .
  • the first weight scale 8 measures the first weight (an example of weight) W1 of the marine product X transported by the transport device 2 .
  • the first weighing scale 8 is arranged under the belt 22 of the conveying device 2 and electrically connected to the control device 12 .
  • the first weighing scale 8 measures a first weight W1 of the marine product X on the belt 22 downstream of the imaging area W and transmits the first weight W1 to the control device 12 .
  • the second weight scale 10 measures the second weight W2 of the marine products X sorted in a plurality of sorting areas 18, which will be described later.
  • the second weighing scale 10 is arranged below the plurality of sorting areas 18 and electrically connected to the control device 12 .
  • the second weighing scales 101 to 103 are arranged below the first sorting area 181, the second sorting area 182, and the third sorting area 183, respectively.
  • a weight W2 is measured.
  • the second weighing scale 10 transmits the second weight W2 to the control device 12 .
  • the number of second weighing scales 10 may be appropriately changed according to the number of sorting areas 18 .
  • the control device 12 is provided to control the marine product sorting system 1.
  • the control device 12 is electrically connected to the conveying device 2, the separating device 4, the camera 6, the first weighing scale 8, the second weighing scale 10, the display 14 described later, and the input device 16, They can communicate with each other.
  • the control device 12 has a storage unit 12a and a processing unit 12b.
  • the control device 12 actually includes a storage unit 12a including a HDD (Hard Disk Drive), a RAM (Random Access Memory), etc., a processing unit 12b including a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), etc. , an input/output buffer, and the like.
  • the storage unit 12a stores combination data (an example of combination) Z.
  • the processing unit 12b Based on the image data D captured by the camera 6 and the first weight W1 measured by the first weighing scale 8, the processing unit 12b selects the marine product X and the fish corresponding to the marine product X included in the image data D. A seed (an example of a type) Y is estimated, and a sorting screen S, which will be described later, is generated.
  • the display 14 displays the sorting screen S.
  • the display 14 is a touch input type portable communication terminal M integrated with an input device 16, which will be described later.
  • the communication terminal M is communicably connected to the control device 12 by wire or wirelessly via a line such as the Internet or VPN (Virtual Private Network).
  • the communication terminal M is located in a different room or building away from the workshop where the sorting work is carried out. Thereby, the operator H can carry out the sorting work by operating the communication terminal M without moving to the work place.
  • the marine product sorting system 1 allows the operator H to perform the sorting work without being restricted by the location of the workplace where the sorting work of the marine product X is carried out.
  • the input device 16 receives combination data (information) Z, which will be described later.
  • the input device 16 is a touch-type input interface integrated with the display 14 of the communication terminal M.
  • FIG. The operator H inputs the combination data Z to the input device 16 by directly operating the display 14 of the communication terminal M.
  • FIG. The input device 16 actually includes a storage unit 12a including a HDD (Hard Disk Drive), a RAM (Random Access Memory), etc., a processing device including a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), etc. It is composed of a microcomputer such as a smartphone, tablet computer, or desktop terminal having an input/output buffer and the like.
  • the display 14 and the input device 16 may be separately configured input devices.
  • the operator H may operate the input device 16 at hand while viewing the sorting screen S displayed on the display 14 .
  • a plurality of sorting areas 18 are provided downstream B of the transport device 2, and marine products X are sorted according to fish species Y.
  • the plurality of sorting areas 18 are composed of a first sorting area 181 corresponding to fish species Y1, a second sorting area 182 corresponding to fish species Y2, and a third sorting area 183 corresponding to fish species Y3. be done.
  • the number of sorting areas 18 may be appropriately changed according to the number of fish species Y to be sorted.
  • control device 12 drives the conveying device 2 and starts the control procedure.
  • the control device 12 acquires image data D captured by the camera 6 (step S1).
  • the control device 12 acquires the first weight W1 measured by the first weighing scale 8 (step S2)
  • the processing unit 12b of the control device 12 generates the marine product region x based on the obtained image data D and the first weight W1 (step S3).
  • the marine product area x is an area obtained by partitioning the image data D for each marine product X included in the image data D.
  • image data D When the number of marine products X included in the image data D is one, the image data D is divided into one marine product area x and a background area xs excluding the marine product area x. As shown in FIG. 3A, in the present embodiment, image data D includes five marine products X1 to X5. It is divided into areas x1 to x5 and a background area xs excluding these marine product areas x. That is, one fishery product X is included in one fishery product region x.
  • the camera 6 captures images of the marine product X included in the imaging area W from various angles.
  • the image data D can include the marine product X imaged at different angles.
  • the processing unit 12b of the control device 12 can accurately generate the marine product area x.
  • the processing unit 12b of the control device 12 refers to the combination data Z stored in the storage unit 12a, and identifies the seafood X included in the existing combination data Z stored in the storage unit 12a and the seafood X included in the seafood region x. , and the matching rate ⁇ is calculated (step S4).
  • the combination data Z includes the marine product X, the fish species Y of the marine product X, the shape information y1 which is information about the shape of the marine product X, the time and time when the marine product X was landed (an example of the season) y2, and the location information of the sea area ( An example of sea area) y3 and water depth y4 are combined.
  • the shape information y1 is information related to the shape characteristics, color, etc., corresponding to the fish species Y of the marine product X.
  • the combination data Z should include at least the fishery product X, the fish species Y of the fishery product X, and the shape information y1. is.
  • the matching rate ⁇ is calculated as an index for determining whether or not the control device 12 can estimate the fish species Y of the marine product X.
  • the processing unit 12b determines that the fish species Y of the marine product X can be estimated when the matching rate ⁇ is equal to or greater than a predetermined value. On the other hand, the processing unit 12b determines that the fish species Y of the marine product X cannot be estimated when the matching rate ⁇ is smaller than the predetermined value.
  • the processing unit 12b of the control device 12 calculates the difference ⁇ for each of the marine product regions x1 to x5 included in FIG. 3(a).
  • the difference ⁇ is a value indicating how much the image of the fishery product X included in the fishery product region x differs from the image of the fishery product X included in the combination data Z stored in the storage unit 12a.
  • the processing unit 12b detects the difference in shape between the image of the seafood X included in the seafood region x and the image of the seafood X included in the combination data Z stored in the storage unit 12a. Extract as difference ⁇ .
  • the processing unit 12b determines that the higher the difference ⁇ , the lower the match rate ⁇ .
  • the processing unit 12b determines that the match rate ⁇ is higher as the difference ⁇ is smaller. That is, the processing unit 12b uses the difference ⁇ as an indicator of whether or not the image of the fishery product X included in the fishery product region x matches the shape of the image of the fishery product X included in the combination data Z stored in the storage unit 12a. calculate.
  • predetermined image processing is performed on the images of the marine product region x and the marine product X, the feature points of the respective images are extracted, and the degree to which the feature points match is calculated as the difference ⁇ .
  • Such processing may be calculated in a wide variety of ways using known image processing techniques.
  • the processing unit 12b calculates the matching rate ⁇ based on the difference ⁇ .
  • the processing unit 12b calculates the matching rate ⁇ as a percentage between 0% and 100% based on the value of the difference ⁇ .
  • the processing unit 12b may consider at least one of the period and time y2 included in the combination data Z, the sea area position information y3, and the water depth y4. As a result, it is possible to accurately calculate the concordance rate ⁇ for the marine product X included in the marine product region x.
  • the processing unit 12b of the control device 12 determines whether the matching rate ⁇ of the image included in the marine product region x is equal to or less than a predetermined value A (step S5).
  • the predetermined value R is determined by comparing the image of the fishery product X included in the fishery product region x with the image of the fishery product X included in the existing combination data Z stored in the storage unit 12a, and considering the size and individual differences. is set as a numerical value that can be identified as the same fish species Y.
  • the match rate ⁇ can be arbitrarily set, and the higher the match rate ⁇ is set, the higher the accuracy of the sorting work.
  • step S5 If it is determined that the matching rate ⁇ is equal to or less than the predetermined value A (step S5 Yes), the processing unit 12b of the control device 12 classifies the marine product region x into the first marine product c1 (step S6). Subsequently, the processing unit 12b generates the first sorting unit C1 for the marine product X classified as the first marine product c1 (step S7).
  • marine products X1 to X4 are classified into the first marine product c1. These marine products X1 to X4 are distinguished from the second marine product c2, which will be described later, by showing the boundaries of the marine product regions x1 to x4 with bold solid lines. Also, the first screening units C11 to C14 are generated corresponding to the marine product regions x1 to x4, respectively.
  • FIG. 4(a) shows an enlarged view of a portion of the first sorting unit C11 corresponding to the marine product X1 and the marine product area x1 among the four first sorting units C11 to C14 shown in FIG. 3(b). is a schematic diagram.
  • the first sorting unit C1 includes a marine product region x divided into first marine products c1 and fish species candidates (an example of candidates) s. .
  • the fish species candidate s is an option of the combination data Z of the fish species Y corresponding to the marine product X included in the marine product region x, selected based on the combination data Z stored in the storage unit 12 a of the control device 12 .
  • the image of the fish species candidate s included in the first selection unit C1 has the smallest difference value from the fish product region x. This is the combination data Z that is included.
  • the first selection unit C1 selects a fishery product region x whose boundary is indicated by a thick solid line, a fish species candidate s placed near the fishery product region x, and a change to the second selection unit C2.
  • a button E1 is included.
  • the marine product region x included in the first sorting unit C1 may be an image display that distinguishes between the marine product region x classified as the second marine product c2 and the background region xs excluding the marine product region x.
  • the fishery product area x of the first sorting section C1 may be represented by an image display such as a thick solid line indicating a boundary, a pattern of oblique lines, or a translucent color.
  • the processing unit 12b does not need to display the first selection unit C1 when the fish species can be determined.
  • step S5 No If it is determined that the matching rate ⁇ is greater than the predetermined value A (step S5 No), the processing unit 12b of the control device 12 divides the seafood region x into the second seafood c2 (step S8). Subsequently, the processing unit 12b generates a second sorting unit C2 for the marine product area x divided into the second marine product c2 (step S9).
  • FIG. 4(b) is a schematic enlarged view of part of the second sorting section C2 shown in FIG. 3(b).
  • the second selection unit C2 includes a marine product region x divided into second marine products c2 and a plurality of fish species candidates s.
  • the fish species candidate s is an option of the combination data Z of the fish species Y corresponding to the marine product X included in the marine product region x, selected based on the combination data Z stored in the storage unit 12 a of the control device 12 .
  • the plurality of fish species candidates s are a plurality of combination data Z extracted from the existing combination data Z stored in the storage unit 12a based on the difference with the marine product region x.
  • the processing unit 12b extracts a predetermined number of combination data Z in which the difference between the fishery product region x and the image of the fishery product X included in the combination data Z is small in ascending order from the smallest difference value, and extracts a plurality of fish species. Set to candidate s. Any number of fish species candidates s can be set.
  • fish species candidates s having a small difference from the image of the fishery product X5 contained in the fishery product region x5 are selected as the plurality of fish species candidates s.
  • three fish species candidates having the smallest difference values are extracted and used as a plurality of fish species candidates s1 to s3.
  • the first sorting unit C1 and the second sorting unit C2 can include fish species candidates s that take into account information such as the season and sea area in which the marine product X was landed.
  • the second selection unit C2 includes a marine product area x whose boundary is indicated by a thick dashed line, and a selection button E2 that displays a plurality of fish species candidates s arranged near the marine product area x.
  • the plurality of fish species candidates s and the selection button E2 are displayed in an aligned state based on the value of the difference between the marine product area x and the image of the marine product X included in the combination data Z.
  • the three fish species candidates s1 to s3 are displayed in descending order of the difference value.
  • the operator H can input the combination data Z of the marine product X and the fish species Y in a short period of time, regardless of the experience and skill level of the sorting work.
  • the marine product sorting system 1 can sort the marine product X for each fish species Y accurately in a short time.
  • the marine product region x included in the second sorting unit C2 may be an image display that distinguishes between the marine product region x classified as the first marine product c1 and the background region xs excluding the marine product region x.
  • the fishery product area x of the second sorting section C2 may be represented by an image display such as a thick dashed line indicating a boundary, a hatched line pattern, or a translucent painted area.
  • the processing unit 12b of the control device 12 generates a selection screen S (step S10). As shown in FIG. 3B, the sorting screen S overlaps the image data D with the image display of the first sorting section C1 generated in step S6 and the image display of the second sorting section C2 generated in step S8. This is synthesized screen data.
  • the control device 12 transmits the selection screen S to the communication terminal M (step S11).
  • the control device 12 displays the selection screen S on the display 14 of the communication terminal M (step S12).
  • the operator H operates the first sorting unit C1 and the second sorting unit C2 to combine the marine product X and the fish species Y corresponding to the marine product X.
  • Input data Z is provided.
  • the operator H while viewing the sorting screen S displayed on the communication terminal M, operates the first sorting unit C1 or the second sorting unit C2.
  • the control device 12 determines whether or not the first sorting section C1 is operated by the operator H (step S13). When the control device 12 determines that the first sorting unit C1 is operated (step S13 Yes), the control proceeds to step S14. On the other hand, if not (step S13 No), control proceeds to step S15.
  • the operator H compares the fish species candidate s with the fish species region x included in the first sorting unit C1 being operated, and compares the fish species candidate s with the fish species Y corresponding to the marine product X contained in the seafood region x. is not appropriate, the change button E1 is operated.
  • the control device 12 determines whether or not the change button E1 included in the first selection section C1 has been operated (step S14). If it is determined that the change button E1 has been operated (step S14 Yes), the control device 12 returns the control to step S7, divides the marine product area x into the second marine product c2 (step S8), A sorting section C2 is generated (step S9). On the other hand, if not (step S14 No), control proceeds to step S17.
  • the control device 12 determines whether or not the second sorting section C2 is being operated by the operator H (step S15). When the control device 12 determines that the second sorting unit C2 is operated (step S15 Yes), the control advances to step S16. On the other hand, if not (step S15 No), control is returned to before step S13.
  • the operator H compares the marine product region x included in the second sorting unit C2 under operation with a plurality of fish species candidates s, and selects the most appropriate fish species Y corresponding to the marine product X contained in the marine product region x. and input via the selection button E2.
  • the control device 12 determines whether or not the selection button E2 included in the second selection section C2 has been operated (step S16). If it is determined that the selection button E2 has been operated (step S16 Yes), the control device 12 advances the control to step S17. On the other hand, if not (step S16 No), control is returned to before step S15.
  • the control device 12 acquires the marine product region x included in the first sorting unit C1 or the second sorting unit C2 in operation as the marine product X (step S17). That is, when the change button E1 included in the first sorting section C1 is not operated, and when the selection button E2 included in the second sorting section C2 is operated, the control device 12 acquires the marine product X.
  • the control device 12 acquires the fish species candidate s included in the operating first sorting unit C1 or the second sorting unit C2 as the fish species Y (step S18). Furthermore, the processing unit 12b of the control device 12 generates combination data Z by combining the marine product X acquired in step S17 and the fish species Y acquired in step S18 (step S19). The storage unit 12a of the control device 12 stores the combination data Z (step S20).
  • the processing unit 12b of the control device 12 generates evaluation data r corresponding to the combination data Z generated in step S19 (step S21).
  • the operator H determines whether or not the combination of the marine product region x and the fish species candidate s included in the first sorting unit C1 is appropriate.
  • the operator H selects the most suitable fish species candidate s for the marine product region x included in the second sorting section C2. For this reason, the operation of the second sorting unit C2 imposes a greater work load on the operator H than the operation of the first sorting unit C1.
  • the processing unit 12b evaluates the input to the second sorting unit C2 more favorably than the input to the first sorting unit C1. As a result, the processing unit 12b can evaluate the input to the second sorting unit C2, which imposes a heavy workload on the operator H, more preferentially.
  • the processing unit 12b of the control device 12 selects and generates one of predetermined evaluation stages set in advance as the evaluation data r.
  • the processing unit 12b may generate the evaluation data r based on the time required from when the selection screen S is displayed on the display 14 of the communication terminal M in step S12 to when the combination data Z is generated in step S19. good.
  • the processing unit 12b selects a high evaluation level.
  • Evaluation data r may be generated. In this manner, the processing unit 12b may select the evaluation stage and generate the evaluation data r according to the time required until the combination data Z is generated.
  • the processing unit 12b of the control device 12 generates evaluation data r based on the difference between the combination data Z stored in advance in the storage unit 12a of the control device 12 and the combination data Z generated in step S19. good too. Specifically, the processing unit 12b of the control device 12 compares the combination data Z of the fish species Y of the marine product X input by the operator H to the communication terminal M with the combination data Z stored in advance in the storage unit 12a. , when it is determined that the similarity is within a predetermined range, that is, when it is determined that the fish species Y of the marine product X is appropriately selected and input, even if a high evaluation level is selected to generate the evaluation data r good. In this manner, the processing unit 12b may select an evaluation stage and generate the evaluation data r according to the accuracy of the combination data Z generated in step S19.
  • the evaluation data r includes information such as the time period when the marine product X and the fish species Y of the marine product X were input via the communication terminal M, the identification information of the operator H stored in advance in the storage unit 12a of the control device 12, and the like. It may be changed according to various conditions. Specifically, when there is an input to the communication terminal M during a preset time zone or working hours, the processing unit 12b selects a high evaluation level and generates the evaluation data r. good. Further, the processing unit 12b may select an evaluation stage according to the skill level of the operator H and generate the evaluation data r.
  • the storage unit 12a of the control device 12 stores the evaluation data r generated in step S21 in association with the combination data Z generated in step S19 (step S22). Thereby, the evaluation data r linked to the combination data Z can be accumulated in the storage unit 12a. As a result, the marine product sorting system 1 can improve the speed and accuracy of the sorting work based on the combination data Z and the evaluation data r stored in the storage unit 12a.
  • the processing unit 12b of the control device 12 changes the marine product area x corresponding to the marine product X acquired in step S17 to the selected area xu (step S23). As a result, it is possible to prevent duplicate or repeated input designation of the fish species Y for the same marine product X via the display 14 of the communication terminal M. FIG. As a result, the marine product sorting system 1 can improve the implementation speed of the sorting work.
  • the processing unit 12b of the control device 12 determines whether the sorting screen S includes the marine product region x (step S24). When the processing unit 12b determines that the marine product region x is not included in the sorting screen S (step S24 Yes), the processing unit 12b determines the reward R based on the evaluation r stored in the storage unit 12a (step S25). On the other hand, if not (step S24 No), the processing unit 12b of the control device 12 returns the process to before step S13. In this embodiment, the processing unit 12b calculates and determines the reward R as a monetary reward given to the operator H who inputs the fishery product X and the fish species Y via the communication terminal M. The reward R may also be redeemable points or various other rewards given to the operator H. FIG.
  • the reward R is determined by the evaluation data r generated in step S21 and the number of inputs of the marine product X and the fish species Y to the communication terminal M by the operator H. Specifically, the higher the evaluation level of the evaluation data r and the more times the input is made, the greater the reward R given to the operator H. Therefore, an appropriate reward R can be given to the operator H according to the accuracy of the combination data Z of the marine product X and the fish species Y input to the communication terminal M and the number of inputs. As a result, the operator H can be more motivated to perform the input work on the communication terminal M. FIG. As a result, it is possible to secure a wide range of personnel engaged in the sorting work of the marine product X.
  • the processing unit 12b of the control device 12 controls the actuator of the separation device 4 to move the marine product X to one of the plurality of sorting areas 18 (step S26).
  • the processing unit 12b of the control device 12 separates the marine product X for moving to the sorting area 18 corresponding to the fish species Y based on the image data D and the combination data Z generated in step S18.
  • a motion control for the device 4 is generated to move the seafood X to a predetermined sorting area 18 .
  • the control device 12 acquires the second weight W2 measured by the second weighing scale 10 (step S27).
  • the processing unit 12b of the control device 12 updates the value of the first weight W1 included in the combination data Z based on the acquired second weight W2, and returns the process to before step S1 (step S28).
  • the control device 12 can update the combination data Z stored in the storage unit 12a based on the actually performed sorting work. For this reason, the accuracy of the sorting work of the marine product X can be improved.
  • control device 12 may perform learning to correct and update the existing combination data Z stored in the storage unit 12a based on the combination data Z generated in step S20.
  • control device 12 compares the combination data Z generated in step S20 with the existing combination data Z stored in the storage unit 12a.
  • Information y1, time and time y2, sea area position information y3, and water depth y4 may be added.
  • the marine product sorting system 201 sorts the cultivated marine products X of the same fish species according to quality (an example of type) Y2.
  • the quality Y2 is set according to the size, weight, body color, shape, etc. of the marine product X into three stages: excellent Y21, good Y22, and acceptable Y23.
  • image data D2 includes marine products X21 to X23 of the same fish species.
  • the processing unit 212b of the control device 212 partitions the image data D2 into three marine product regions x21 to x23 partitioned by solid lines and a background region xs.
  • the processing unit 212b calculates the matching rate ⁇ 2 for each of the marine product regions x21 to x23.
  • the matching rate ⁇ 2 is calculated as an index for determining whether or not the control device 212 can estimate the quality Y2 of the marine product X.
  • the processing unit 212b of the control device 212 distinguishes the marine products X21 to X23 into the first marine product c21 and the second marine product c22 based on the matching rate ⁇ 2. do.
  • the first marine product c21 is a marine product whose quality Y2 can be estimated based on the value of the concordance rate ⁇ 2, and the boundary of the marine product region x2 is indicated by a thick solid line.
  • the second marine product c22 is a marine product for which it is difficult to estimate whether the quality Y2 corresponds to any of excellent Y21, good Y22, and fair Y23, and the boundary of the marine product region x2 is indicated by a thick dashed line.
  • the processing unit 212b generates the first sorting unit C21 for the marine product regions x21 and x22 divided into the first marine product c21.
  • the processing unit 212b generates two first sorting units C211 and C212 corresponding to the marine product region x21 and the marine product region x22.
  • the first sorting unit C21 includes a seafood region x divided into first seafood c21 and quality candidates (an example of candidates) s2.
  • the quality candidate s2 is any one of excellent Y21, good Y22, and acceptable Y23 of quality Y2, which is estimated based on the value of matching rate ⁇ 2.
  • the processing unit 212b generates the second sorting unit C22 for the seafood region x23 divided into the second seafood c22.
  • the second sorting unit C22 includes a seafood area x23 divided into second seafood c22 and a plurality of quality candidates s2.
  • the plurality of quality candidates s2 are excellent Y21, good Y22, acceptable Y23 of quality Y2, selected and arranged based on the value of matching rate ⁇ 2.
  • the processing unit 212b of the control device 212 generates the selection screen S2.
  • the image data D2 is screen data obtained by overlapping and synthesizing the image displays of the marine product regions x21 to x23, the first sorting section C21 and the second sorting section C22.
  • the operator H can instantly identify the most suitable option as the combination data Z with the quality Y2 corresponding to the marine product X included in the marine product region x2, among the plurality of quality candidates s2.
  • the ship 301 includes a marine product sorting system 302 and a freezer 304.
  • the marine product sorting system 302 is the same system as the marine product sorting system 1 according to the first embodiment. Also, the marine product sorting system 302 may be the same system as the marine product sorting system 201 according to the second embodiment.
  • Such a ship needs to sort marine products pulled up by the trawl net 306, for example, and store them in a freezer for each fish species.
  • a vessel equipped with the seafood sorting system 302 of the present disclosure facilitates such sorting. As a result, the crew of the ship can be reduced and efficient fishing is possible.
  • the marine product sorting system 1, 201 that sorts marine product X by fish species Y or quality Y2 of marine product X has been described as an example, but the present disclosure is not limited to this.
  • the marine product sorting system 1, 201 may sort marine products according to sex, size, etc., in addition to fish species and quality.
  • the camera 6 is composed of one camera, but the present disclosure is not limited to this.
  • the camera 6 may take images by controlling a plurality of cameras installed at different positions and angles, and the image data D is image data obtained by integrating images detected by the plurality of cameras.
  • the processing unit 12b of the control device 12 selects and generates one of the preset predetermined evaluation stages as the evaluation data r, but the present disclosure is not limited to this. .
  • Various forms for determining the reward R can be selected for the evaluation data r, such as numerical values and variables.

Landscapes

  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Wood Science & Technology (AREA)
  • Zoology (AREA)
  • Food Science & Technology (AREA)
  • Sorting Of Articles (AREA)

Abstract

水産物選別システム１（２０１）は、カメラ６と、ディスプレイ１４と、制御装置１２（２１２）を、を備える。カメラ６は、水産物Ｘを撮像する。ディスプレイ１４は、選別画面Ｓ（Ｓ２）を表示する。制御装置１２（２１２）は、カメラ６と、ディスプレイ１４と、それぞれ通信可能であり、カメラ６で撮像した画像データＤ（Ｄ２）に基づいて水産物Ｘを選別する選別画面Ｓ（Ｓ２）を生成し、選別画面Ｓ（Ｓ２）をディスプレイ１４に表示してもよい。

Description

水産物選別システムおよび船
　本開示は、水産物選別システム、およびこの水産物選別システムを備える船に関する。
　種々の漁法で捕獲され、水揚げされた水産物は、魚種、雌雄、個体の大きさなど様々な種類がある。水産物の加工場や魚市場では、このような種々の種類が混在した状態で水産物が持ち込まれる。加工場は、陸地のみならず船（漁船）に搭載される場合もある。このような状態で持ち込まれた水産物を、市場に流通させ販売するためには、水産物を流通方法に即した種類毎に選別する選別工程が必要である。このような選別工程は、従来は、加工場や魚市場において人手によって行われている。このような選別工程は、作業場所が水揚げされた漁港付近であるなどの地理的制限や、選別を行う人材の経験や熟練度などの制限を受けるため、従事する人材を確保することが難しい場合がある。
　このため近年、このような選別工程を自動的に行う水産物選別システムが開発されている（例えば、特許文献１参照）。特許文献１の水産物選別システムでは、カメラが取得した画像データから自動的に水産物の種類を判定し、この判定結果に基づいて水産物を選別している。
特許２９８１８９１号
　しかし、加工場や魚市場に持ち込まれる水産物は、種々様々な魚種や大きさがある。これらの水産物を選別する工程は、水揚げした水産物の鮮度が低下することを防止するために、迅速に選別を完了することが望ましい。特許文献１の水産物選別システムでは、選別の対象となる水産物の魚種を限定した上で、形状や大きさを画像データから判定し、水産物を選別している。このような画像データからのみ判定する水産物選別システムでは、選別対象となる水産物の魚種が増えた場合に、膨大なデータ処理が必要となり、選別の精度とデータ処理短縮とを両立させることが難しい。この結果、短時間で精度よく水産物の選別を行うことが困難であるという課題がある。
　本開示の課題は、水産物を短時間で精度よく選別可能な水産物選別システムを提供することにある。
　（１）本開示に係る水産物選別システムは、カメラと、ディスプレイと、制御装置と、を備える。カメラは、水産物を撮像する。ディスプレイは、選別画面を表示する。制御装置は、カメラと、ディスプレイと、それぞれ通信可能であり、カメラで撮像した映像に基づいて水産物を選別する選別画面を生成し、選別画面をディスプレイに表示する。
　（２）水産物選別システムは、搬送装置と、をさらに備えてもよい。搬送装置は、水産物を搬送してもよい。制御装置は、制御装置によって選別可能な第１の水産物と、制御装置によって選別不可能な第２の水産物を判断してもよい。選別画面は、少なくとも第２の水産物の情報を含んでもよい。
　（３）水産物選別システムは、重量計と、入力装置と、をさらに備えてもよい。重量計は、搬送装置で搬送される水産物の重量を計測してもよい。入力装置は、少なくとも第２の水産物の選別情報が入力されてもよい。制御装置は、重量計と、入力装置と、通信可能であってもよい。制御装置は、記憶部と、処理部と、を有しても良い。記憶部は、水産物の形状情報と、形状情報に対応する種類と、重量と、の組み合わせ情報が記憶されてもよい。処理部は、カメラで撮像された映像と、重量計で計測された重量と、に基づいて、映像に含まれる水産物の種類とを推定し、選別画面を生成してもよい。第１の水産物は、処理部で種類を推定可能な水産物であってもよい。第２の水産物は、第１の水産物を除く他の水産物であってもよい。選別画面は、映像と、映像に含まれる水産物のうち、第１の水産物に対応する第１選別部と、第２の水産物に対応する第２選別部と、を映像に合成した画像情報であってもよい。
　（４）組み合わせ情報は、水産物が水揚げされた季節と、海域と、水深と、の少なくともいずれか一つを含んでもよい。
　（５）処理部は、映像に含まれる水産物の形状が、記憶部に記憶された組み合わせ情報に含まれる水産物の形状情報との一致率が所定の値以上である場合、種類を推定可能であると判定してもよい。
　（６）第１選別部は、第１の水産物と、記憶部に記憶された組み合わせ情報に基づいて選定された第１の水産物に対応する組み合わせ情報の候補と、を含んでもよい。第２選別部は、第２の水産物と、記憶部に記憶された組み合わせに基づいて推定された複数の第２の水産物に対応する組み合わせ情報の候補と、を含んでもよい。
　（７）処理部は、入力装置を介して入力された組み合わせ情報に基づいて、組み合わせ情報の入力に対応した所定の評価を決定してもよい。
　（８）処理部は、第２選別部への入力を、第１選別部への入力に比べて、優位に評価してもよい。
　（９）カメラは、水産物を複数の方向から撮像してもよい。
　この水産物選別システムによれば、制御装置は、カメラで撮像した映像に基づいて水産物を選別する選別画面を生成することができる。これにより、制御装置が水産物の選別のために膨大な画像処理および計算をすることなく、選別画面を生成することができる。この結果、水産物選別システムは、短時間で精度よく水産物を選別することができる。
　本開示によれば、水産物を短時間で精度よく選別可能な水産物選別システムを提供できる。
本開示の実施形態による水産物選別システムを示す概略図。 本開示の制御装置による処理手順を示すフローチャート。 本開示の第１実施形態による選別画面の一例を示す概略図。 図３の一部を拡大した概略図。 本開示の第２実施形態による選別画面の一例を示す概略図。 図５の一部を拡大した概略図。 本開示の第３実施形態による水産物選別システムを備える船の概略図。
　以下、本開示の実施形態について、図面を参照しながら説明する。
＜第１実施形態＞
　図１に示すように、本開示の第１実施形態に係る水産物選別システムは、搬送装置２と、分離装置４と、カメラ６と、第１重量計（重量計の一例）８と、第２重量計１０と、制御装置１２と、ディスプレイ１４と、入力装置１６と、選別エリア１８と、を備える。本実施形態では、水産物選別システム１は、水揚げされた種々様々な魚介類が混在した複数の水産物Ｘを選別する水産物選別システムである。このような水産物Ｘは、選別場に搬入されると、魚種Ｙ（種類の一例）が混在した状態で、搬送装置２に搬入され、選別作業が行われる。水産物選別システム１は、選別作業において、複数の水産物Ｘを、予め定められた魚種Ｙごとに選別する。
　搬送装置２は、アクチュエータ２１と、ベルト２２と、を有する。本実施形態では、搬送装置２は、ベルト２２上に配置された水産物Ｘを所定の速度で搬送するベルトコンベアである。アクチュエータ２１は、制御装置１２に電気的に接続されて駆動する。ベルト２２は、アクチュエータ２１によって駆動され、ベルト２２上に配置された水産物Ｘを上流Ｕから下流Ｂへと移動させる。なお、搬送装置２は、ベルトコンベアに限らず、例えば上流Ｕから下流Ｂにかけて下降し、重力によって水産物Ｘを搬送する滑り台や、その他ローラ式やチェーン式などのコンベアであってもよい。
　分離装置４は、図示しないアクチュエータおよびセパレータを有する。さらに分離装置４は、離通路４３を有する。アクチュエータおよびセパレータは、搬送装置２のベルト２２上に設けられる。アクチュエータは、制御装置１２と電気的に接続されセパレータを駆動する。各セパレータは、一方の端部にアクチュエータが設けられた板状の部材である。セパレータは、アクチュエータによって駆動され、ベルト２２上で回転する。セパレータは、水産物Ｘの搬送経路を、ベルト２２の下流と分離通路４３の間で変更する。分離通路４３は、ベルト２２の途中から分岐して設けられる。分離通路４３は、セパレータによって搬送経路が変更された水産物Ｘを、後述する選別エリア１８へと搬送する。本実施形態では、分離装置４は、３つのアクチュエータ第と、３つのセパレータと、第１分離通路４３１から第３分離通路４３３を有する。すなわち、搬送装置２および分離装置４は、ベルト２２上の水産物Ｘを、ベルト２２の下流Ｂおよび３つの分離通路４３からなる４つの経路に振り分けて搬送する。
　カメラ６は、搬送装置２で搬送される水産物Ｘを撮像する。本実施形態では、カメラ６は、搬送装置２のベルト２２上に図示しないアームに取り付けられて配置され、図示しないアクチュエータによって姿勢が変更可能である。また、カメラ６は、選別作業が実施される作業場の天井や梁などに取り付けられてもよい。さらに本実施形態では、カメラ６は、搬送装置２のベルト２２上に設けられた、撮像エリアＷに含まれる水産物Ｘを複数の方向から撮像する。カメラ６は、制御装置１２に電気的に接続される。カメラ６は、所定の間隔で異なる角度から繰り返し撮像エリアＷを撮像し、複数の静止画として撮像エリアＷの画像データ（映像の一例）Ｄを取得する。また、カメラ６は、姿勢を変更しながら継続して撮像エリアＷを撮像して、動画として撮像エリアＷの画像データＤを取得してもよい。カメラ６は、撮像した画像データＤを制御装置１２に送信する。
　第１重量計８は、搬送装置２で搬送される水産物Ｘの第１重量（重量の一例）Ｗ１を計測する。本実施形態では、第１重量計８は、搬送装置２のベルト２２の下に配置され、制御装置１２に電気的に接続される。第１重量計８は、撮像エリアＷの下流で、ベルト２２上の水産物Ｘの第１重量Ｗ１を計測し、第１重量Ｗ１を制御装置１２に送信する。
　第２重量計１０は、後述する複数の選別エリア１８に選別された水産物Ｘの第２重量Ｗ２を計測する。本実施形態では、第２重量計１０は、複数の選別エリア１８の下に配置され、制御装置１２に電気的に接続される。第２重量計１０１から１０３は、第１選別エリア１８１と、第２選別エリア１８２と、第３選別エリア１８３と、の下方にそれぞれ配置され、各選別エリア１８に選別された水産物Ｘの第２重量Ｗ２を計測する。第２重量計１０は、第２重量Ｗ２を制御装置１２に送信する。第２重量計１０の数は、複数の選別エリア１８の数に応じて適宜変更してもよい。
　制御装置１２は、水産物選別システム１を制御するために設けられる。制御装置１２は、搬送装置２と、分離装置４と、カメラ６と、第１重量計８と、第２重量計１０と、後述するディスプレイ１４と、入力装置１６と、電気的に接続され、それぞれ通信可能である。制御装置１２は、記憶部１２ａと、処理部１２ｂと、を有する。制御装置１２は、実際には、ＨＤＤ（Ｈａｒｄ　Ｄｉｓｋ　Ｄｒｉｖｅ）やＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）などを含む記憶部１２ａと、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）やＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）などを含む処理部１２ｂと、入出力バッファ等と、を有するマイクロコンピュータによって構成される。記憶部１２ａは、組み合わせデータ（組み合わせの一例）Ｚを記憶する。処理部１２ｂは、カメラ６で撮像された画像データＤと、第１重量計８で計測された第１重量Ｗ１と、に基づいて、画像データＤに含まれる水産物Ｘと水産物Ｘに対応する魚種（種類の一例）Ｙを推定し、後述する選別画面Ｓを生成する。
　ディスプレイ１４は、選別画面Ｓを表示する。本実施形態では、ディスプレイ１４は、後述する入力装置１６と一体に構成された、タッチ入力式の携帯可能な通信端末Ｍである。通信端末Ｍは、インターネットやＶＰＮ（Ｖｉｒｔｕａｌ　Ｐｒｉｖａｔｅ　Ｎｅｔｗｏｒｋ）等の回線を介して、有線または無線で制御装置１２と通信可能に接続される。通信端末Ｍは、選別作業を実施する作業場から離れた異なる部屋または建屋に配置される。これによって、オペレータＨは、作業場に移動することなく通信端末Ｍを操作することで、選別作業を実施することができる。この結果、水産物選別システム１は、オペレータＨが水産物Ｘの選別作業が実施される作業場の立地等の制約を受けることなく、選別作業を実施することができる。
　入力装置１６は、後述する組み合わせデータ（情報）Ｚが入力される。本実施形態では、入力装置１６は、通信端末Ｍのディスプレイ１４と一体に構成されたタッチ式の入力インターフェースである。オペレータＨは、通信端末Ｍのディスプレイ１４を直接操作することで、入力装置１６に組み合わせデータＺを入力する。入力装置１６は、実際には、ＨＤＤ（Ｈａｒｄ　Ｄｉｓｋ　Ｄｒｉｖｅ）やＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）などを含む記憶部１２ａと、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）やＧＰＵ（Ｇｒａｐｈｉｃｓ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）などを含む処理装置と、入出力バッファ等と、を有するスマートフォン、タブレット型コンピュータ、デスクトップ端末などのマイクロコンピュータによって構成される。
　また、ディスプレイ１４および入力装置１６は、別体に構成された入力用の機器であってもよい。オペレータＨは、ディスプレイ１４に表示される選別画面Ｓを見ながら、手元の入力装置１６を操作してもよい。
　複数の選別エリア１８は、搬送装置２の下流Ｂに設けられ、魚種Ｙに対応して水産物Ｘが選別される。本実施形態では、複数の選別エリア１８は、魚種Ｙ１に対応した第１選別エリア１８１、魚種Ｙ２に対応した第２選別エリア１８２、魚種Ｙ３に対応した第３選別エリア１８３、から構成される。複数の選別エリア１８は、選別する魚種Ｙの数に応じて適宜、数を変更してもよい。
　次に、図２のフローチャート、図３および図４を用いて、制御装置１２が行う制御手順を説明する。制御装置１２は、図示しないスタートボタンが押されると、搬送装置２を駆動させ制御手順と開始する。
　制御装置１２は、カメラ６で撮像された画像データＤを取得する（ステップ　Ｓ１）。制御装置１２は、第１重量計８で計測された第１重量Ｗ１を取得する（ステップ　Ｓ２）
　制御装置１２の処理部１２ｂは、取得した画像データＤと、第１重量Ｗ１基づいて、水産物領域ｘを生成する（ステップ　Ｓ３）。水産物領域ｘは、画像データＤを、画像データＤに含まれる水産物Ｘごとに区画した領域である。
　画像データＤに含まれる水産物Ｘが１匹である場合、画像データＤは、１つの水産物領域ｘと、当該水産物領域ｘを除く背景領域ｘｓと、に区画される。図３（ａ）に示すように、本実施形態では、画像データＤに５匹の水産物Ｘ１からＸ５が含まれており、処理部１２ｂは、画像データＤを、実線で区画された５つの水産物領域ｘ１からｘ５と、これらの水産物領域ｘを除く背景領域ｘｓと、に区画する。すなわち、一の水産物領域ｘには、一匹の水産物Ｘが含まれる。
　本実施形態では、カメラ６は、撮像エリアＷに含まれる水産物Ｘを様々な角度から撮像する。これにより、画像データＤは、異なる角度で撮像された水産物Ｘが含むことができる。この結果、制御装置１２の処理部１２ｂは、精度よく水産物領域ｘを生成することができる。
　制御装置１２の処理部１２ｂは、記憶部１２ａに記憶された組み合わせデータＺを参照し、記憶部１２ａに記憶された既存の組み合わせデータＺに含まれる水産物Ｘと、水産物領域ｘに含まれる水産物Ｘと、の一致率αを算出する（ステップ　Ｓ４）。
　組み合わせデータＺは、水産物Ｘと、水産物Ｘの魚種Ｙと、水産物Ｘの形状に関する情報である形状情報ｙ１、水産物Ｘが水揚げされた時期および時刻（季節の一例）ｙ２、海域の位置情報（海域の一例）ｙ３、水深ｙ４、とを組み合わせた情報である。形状情報ｙ１は、水産物Ｘの魚種Ｙに対応した、形状の特徴や色彩などに関する情報である。組み合わせデータＺには、少なくとも水産物Ｘ、水産物Ｘの魚種Ｙ、および形状情報ｙ１が含まれればよく、時期および時刻ｙ２と、海域の位置情報ｙ３と、水深ｙ４と、は、取捨選択が可能である。
　一致率αは、制御装置１２が水産物Ｘの魚種Ｙを推定可能であるか否かの判定の指標として算出される。処理部１２ｂは、一致率αが所定の値以上である場合に、水産物Ｘの魚種Ｙが推定可能であると判定する。一方、処理部１２ｂは、一致率αが所定の値より小さい場合に、水産物Ｘの魚種Ｙが推定不可能であると判定する。
　本実施形態では、制御装置１２の処理部１２ｂは、図３（ａ）に含まれる水産物領域ｘ１からｘ５について、それぞれ、差分βを算出する。差分βは、水産物領域ｘに含まれる水産物Ｘの画像と、記憶部１２ａに記憶された組み合わせデータＺに含まれる水産物Ｘの画像との差異がどの程度あるかを示す値である。より具体的には、処理部１２ｂは、水産物領域ｘに含まれる水産物Ｘの画像と、記憶部１２ａに記憶された組み合わせデータＺに含まれる水産物Ｘの画像との間で、形状が異なる点を差異βとして抽出する。処理部１２ｂは、差異βが多いほど一致率αが低いと判断する。また、処理部１２ｂは、差異βがすくないほど、一致率αが高いと判断する。すなわち、処理部１２ｂは、差異βを水産物領域ｘに含まれる水産物Ｘの画像と、記憶部１２ａに記憶された組み合わせデータＺに含まれる水産物Ｘの画像の形状が一致するか否かの指標として算出する。
　処理部１２ｂは、水産物領域ｘ１からｘ５に含まれる水産物Ｘ１からＸ５の画像と、記憶部１２ａに記憶された全ての組み合わせデータＺに含まれる水産物Ｘの形状情報ｙ１を比較し、これらの差分の値を算出する。さらに、処理部１２ｂは、差分を算出した水産物領域ｘと組み合わせデータＺに含まれる水産物Ｘとの、それぞれの組み合わせのうち最も低い差分の値を差分βとして算出する。水産物領域ｘと水産物Ｘの画像とが完全に一致する、すなわち、同一の画像である場合は、差分β＝０となる。差分βは、０から１の間の数値で算出される。本実施形態では、水産物領域ｘと水産物Ｘの画像に所定の画像処理を施し、それぞれの画像の特徴点を抽出し、特徴点がどの程度一致するか否かを差分βとして算出する。このような処理は、公知の画像処理技術を用いて種々様々な方法によって算出されてもよい。
　処理部１２ｂは、差分βに基づいて一致率αを算出する。本実施形態では、処理部１２ｂは、一致率αを、差分βの値に基づいて０％から１００％の間の割合として算出する。処理部１２ｂは、一致率αを算出する際に、組み合わせデータＺに含まれる時期および時刻ｙ２、海域の位置情報ｙ３、水深ｙ４、の少なくとも１つを考慮してもよい。これにより、水産物領域ｘに含まれる水産物Ｘについて、精度よく一致率αを算出することができる。
　制御装置１２の処理部１２ｂは、水産物領域ｘに含まれる画像の一致率αが、所定の値Ａ以下か否かを判定する（ステップ　Ｓ５）。所定の値Ｒは、水産物領域ｘに含まれる水産物Ｘの画像が、記憶部１２ａに記憶された既存の組み合わせデータＺに含まれる水産物Ｘの画像と比較して、大きさや個体差を勘案しても同一の魚種Ｙであると同定できる程度の数値として設定される。一致率αは任意に設定可能であり、一致率αの数値を高く設定する程、選別作業の精度が上がる。
　一致率αが所定の値Ａ以下であると判定された場合（ステップＳ５　Ｙｅｓ）、制御装置１２の処理部１２ｂは、水産物領域ｘを第１の水産物ｃ１に区分する（ステップ　Ｓ６）。続いて、処理部１２ｂは、第１の水産物ｃ１に区分された水産物Ｘについて、第１選別部Ｃ１を生成する（ステップ　Ｓ７）。
　本実施形態では、図３（ｂ）に示すように、水産物Ｘ１からＸ４は、第１の水産物ｃ１に区分される。これらの水産物Ｘ１からＸ４は、水産物領域ｘ１からｘ４の境界が、太線の実線で示されて、後述する第２の水産物ｃ２と区別される。また、水産物領域ｘ１からｘ４それぞれに対応して、第１選別部Ｃ１１からＣ１４が生成される。
　図４（ａ）は、図３（ｂ）に示した４つの第１選別部Ｃ１１からＣ１４のうち、水産物Ｘ１および水産物領域ｘ１に対応する第１選別部Ｃ１１の一部について、拡大して示した概略図である。
　図３（ｂ）および図４（ａ）に示すように、第１選別部Ｃ１は、第１の水産物ｃ１に区分された水産物領域ｘと、魚種候補（候補の一例）ｓと、を含む。魚種候補ｓは、制御装置１２の記憶部１２ａに記憶された組み合わせデータＺに基づいて選定された、水産物領域ｘに含まれる水産物Ｘに対応する魚種Ｙの組み合わせデータＺの選択肢である。本実施形態では、第１選別部Ｃ１に含まれる魚種候補ｓは、記憶部１２ａに記憶された既存の組み合わせデータＺのうち、水産物領域ｘとの差分の値が最も小さい水産物Ｘの画像が含まれる組み合わせデータＺである。第１選別部Ｃ１は、境界が太線の実線で示された水産物領域ｘと、当該水産物領域ｘの近傍に配置された魚種候補ｓ、および、第２選別部Ｃ２への変更を選択する変更ボタンＥ１が、含まれる。
　なお、第１選別部Ｃ１に含まれる水産物領域ｘは、第２の水産物ｃ２に区分された水産物領域ｘおよび水産物領域ｘを除く背景領域ｘｓと、を区別する画像表示であればよい。第１選別部Ｃ１の水産物領域ｘは、境界を示す太線の実線の他、斜線のパターンによる塗りつぶしや、半透明の塗りつぶしなどの画像表示であってもよい。また、処理部１２ｂは、魚種を確定できる場合、第１選別部Ｃ１を表示しなくてもよい。
　一致率αが所定の値Ａより大きいと判定された場合（ステップＳ５　Ｎｏ）、制御装置１２の処理部１２ｂは、水産物領域ｘを第２の水産物ｃ２に区分する（ステップ　Ｓ８）。続いて、処理部１２ｂは、第２の水産物ｃ２に区分された水産物領域ｘについて、第２選別部Ｃ２を生成する（ステップ　Ｓ９）。
　図４（ｂ）は、図３（ｂ）に示した第２選別部Ｃ２の一部について、拡大して示した概略図である。
　図３（ｂ）および図４（ｂ）に示すように、第２選別部Ｃ２は、第２の水産物ｃ２に区分された水産物領域ｘと、複数の魚種候補ｓと、を含む。魚種候補ｓは、制御装置１２の記憶部１２ａに記憶された組み合わせデータＺに基づいて選定された、水産物領域ｘに含まれる水産物Ｘに対応する魚種Ｙの組み合わせデータＺの選択肢である。複数の魚種候補ｓは、記憶部１２ａに記憶された既存の組み合わせデータＺから水産物領域ｘとの差分に基づいて抽出された複数の組み合わせデータＺである。処理部１２ｂは、水産物領域ｘと組み合わせデータＺに含まれる水産物Ｘの画像との差分が小さい組み合わせデータＺを、差分の値が小さいものから昇順で、所定の個数を抽出し、複数の魚種候補ｓに設定する。複数の魚種候補ｓは、任意の数を設定することができる。
　本実施形態では、複数の魚種候補ｓとして、記憶部１２ａに記憶された既存の組み合わせデータＺに含まれる水産物Ｘのうち、水産物領域ｘ５に含まれる水産物Ｘ５の画像との差分が小さいものを、差分の値が小さいものから３つ抽出して複数の魚種候補ｓ１からｓ３とする。
　上述の通り、水産物領域ｘに含まれる水産物Ｘと、既存の組み合わせデータＺに含まれる水産物Ｘと、の差分の値を算出する際には、組み合わせデータＺに含まれる時期および時刻ｙ２、海域の位置情報ｙ３、水深ｙ４、のうち少なくとも１つの情報を用いられる。
これにより、第１選別部Ｃ１および第２選別部Ｃ２には、水産物Ｘが水揚げされた季節や海域などの情報が加味された、魚種候補ｓが含むことができる。
　第２選別部Ｃ２は、境界が太線の破線で示された水産物領域ｘと、当該水産物領域ｘの近傍に配置された複数の魚種候補ｓを表示する選択ボタンＥ２が含まれる。複数の魚種候補ｓと選択ボタンＥ２は、水産物領域ｘと組み合わせデータＺに含まれる水産物Ｘの画像との差分の値に基づいて、整列された状態で表示される。本実施形態では、３つの魚種候補ｓ１からｓ３は、当該差分の値が小さい順に降順に整列された状態で表示される。これにより、オペレータＨは、複数の魚種候補ｓのうち、水産物領域ｘに含まれる水産物Ｘに対応する魚種Ｙとの組み合わせデータＺとして最も適切であろう選択肢を瞬時に識別することができる。これによって、オペレータＨは、選別作業の経験や熟練度に関わらず、水産物Ｘと魚種Ｙの組み合わせデータＺを短時間で入力することができる。この結果、水産物選別システム１は、短時間で精度よく水産物Ｘを魚種Ｙごとに選別することができる。
　なお、第２選別部Ｃ２に含まれる水産物領域ｘは、第１の水産物ｃ１に区分された水産物領域ｘおよび水産物領域ｘを除く背景領域ｘｓと、を区別する画像表示であればよい。第２選別部Ｃ２の水産物領域ｘは、境界を示す太線の破線の他、斜線のパターンによる塗りつぶしや、半透明の塗りつぶしなどの画像表示であってもよい。
　制御装置１２の処理部１２ｂは、選別画面Ｓを生成する（ステップ　Ｓ１０）。図３（ｂ）に示すように、選別画面Ｓは、画像データＤに、ステップＳ６において生成した第１選別部Ｃ１およびステップＳ８において生成した第２選別部Ｃ２の画像表示を、オーバーラップして合成した画面データである。
　制御装置１２は、選別画面Ｓを通信端末Ｍに送信する（ステップ　Ｓ１１）。制御装置１２は、選別画面Ｓを通信端末Ｍのディスプレイ１４に表示させる（ステップ　Ｓ１２）。ここで、オペレータＨは、ディスプレイ１４に表示された選別画面Ｓを見ながら、第１選別部Ｃ１および第２選別部Ｃ２を操作して、水産物Ｘおよび当該水産物Ｘに対応する魚種Ｙの組み合わせデータＺを入力する。
　オペレータＨは、通信端末Ｍに表示された選別画面Ｓを見ながら、任意の第１選別部Ｃ１または第２選別部Ｃ２を操作する。制御装置１２は、オペレータＨによって第１選別部Ｃ１が操作されているか否かを判定する（ステップ　Ｓ１３）。制御装置１２は、第１選別部Ｃ１が操作されていると判定した場合（ステップＳ１３　Ｙｅｓ）、制御をステップＳ１４へ進める。一方、そうでない場合（ステップＳ１３　Ｎｏ）、制御をステップＳ１５へ進める。
　オペレータＨは、操作中の第１選別部Ｃ１に含まれる水産物領域ｘと魚種候補ｓとを比較し、魚種候補ｓが、当該水産物領域ｘに含まれる水産物Ｘと対応する魚種Ｙとが適切でなければ、変更ボタンＥ１を操作する。制御装置１２は、第１選別部Ｃ１に含まれる変更ボタンＥ１が操作されたか否かを判定する（ステップ　Ｓ１４）。変更ボタンＥ１が操作されたと判定された場合（ステップＳ１４　Ｙｅｓ）、制御装置１２は、制御をステップＳ７に戻し、当該水産物領域ｘを第２の水産物ｃ２に区分するとともに（ステップ　Ｓ８）、第２選別部Ｃ２を生成する（ステップ　Ｓ９）。一方、そうでない場合（ステップＳ１４　Ｎｏ）、制御をステップＳ１７へと進める。
　制御装置１２は、オペレータＨによって第２選別部Ｃ２が操作されているか否かを判定する（ステップ　Ｓ１５）。制御装置１２は、第２選別部Ｃ２が操作されていると判定した場合（ステップＳ１５　Ｙｅｓ）、制御をステップＳ１６へ進める。一方、そうでない場合（ステップＳ１５　Ｎｏ）、制御をステップＳ１３の前に戻す。
　オペレータＨは、操作中の第２選別部Ｃ２に含まれる水産物領域ｘと複数の魚種候補ｓとを比較し、当該水産物領域ｘに含まれる水産物Ｘに対応する最も適切な魚種Ｙを選択し、選択ボタンＥ２を介して入力する。制御装置１２は、第２選別部Ｃ２に含まれる選択ボタンＥ２が操作されたか否かを判定する（ステップ　Ｓ１６）。選択ボタンＥ２が操作されたと判定された場合（ステップＳ１６　Ｙｅｓ）、制御装置１２は、制御をステップＳ１７へ進める。一方、そうでない場合（ステップＳ１６　Ｎｏ）、制御をステップＳ１５の前に戻す。
　制御装置１２は、操作中の第１選別部Ｃ１または第２選別部Ｃ２に含まれる水産物領域ｘを水産物Ｘとして取得する（ステップ　Ｓ１７）。すなわち、第１選別部Ｃ１に含まれる変更ボタンＥ１が操作されなかった場合、および、第２選別部Ｃ２に含まれる選択ボタンＥ２が操作された場合、制御装置１２は、水産物Ｘを取得する。
　続いて、制御装置１２は、操作中の第１選別部Ｃ１または第２選別部Ｃ２に含まれる魚種候補ｓを魚種Ｙとして取得する（ステップ　Ｓ１８）。さらに、制御装置１２の処理部１２ｂは、ステップＳ１７において取得した水産物Ｘと、ステップＳ１８において取得した魚種Ｙと、を組み合わせて組み合わせデータＺを生成する（ステップ　Ｓ１９）。制御装置１２の記憶部１２ａは、組み合わせデータＺを記憶する（ステップ　Ｓ２０）。
　制御装置１２の処理部１２ｂは、ステップＳ１９において生成された組み合わせデータＺに対応した評価データｒを生成する（ステップ　Ｓ２１）。第１選別部Ｃ１の操作において、オペレータＨは、第１選別部Ｃ１に含まれる水産物領域ｘと魚種候補ｓの組み合わせが適切か否かを判断する。一方で、第２選別部Ｃ２の操作において、オペレータＨは、第２選別部Ｃ２に含まれる水産物領域ｘに対して、複数の魚種候補ｓの中から最も適切なものを選択する。このため、第１選別部Ｃ１の操作に比べて、第２選別部Ｃ２の操作の方が、オペレータＨにとって作業負担が大きくなる。処理部１２ｂは、第２選別部Ｃ２への入力を、第１選別部Ｃ１への入力に比べて、優位に評価する。これにより、処理部１２ｂは、オペレータＨへの作業負担が大きい第２選別部Ｃ２への入力を、より優位に評価することができる。本実施形態では、制御装置１２の処理部１２ｂは、評価データｒとしては、予め設定された所定の評価段階の内の一つを選択して生成する。
　処理部１２ｂは、ステップＳ１２において選別画面Ｓが通信端末Ｍのディスプレイ１４に表示されてから、ステップＳ１９において組み合わせデータＺが生成されるまでの所要時間に基づいて、評価データｒを生成してもよい。処理部１２ｂは、組み合わせデータＺが生成されるまでの所用時間が短い場合、すなわち、オペレータＨが、短時間で水産物Ｘと魚種Ｙの入力を完了した場合は、高い評価段階を選択して評価データｒを生成してもよい。このように、処理部１２ｂは、組み合わせデータＺが生成されるまでの所要時間に応じて、評価段階を選択して評価データｒを生成してもよい。
　また、制御装置１２の処理部１２ｂは、予め制御装置１２の記憶部１２ａに記憶された組み合わせデータＺとステップＳ１９において生成された組み合わせデータＺとの差分に基づいて、評価データｒを生成してもよい。具体的には、制御装置１２の処理部１２ｂは、オペレータＨが通信端末Ｍに入力した水産物Ｘの魚種Ｙの組み合わせデータＺが、予め記憶部１２ａに記憶された組み合わせデータＺと比較して、所定の範囲内で近似していると判断した場合、すなわち、水産物Ｘの魚種Ｙが適切に選択され入力されたと判断した場合、高い評価段階を選択して評価データｒを生成してもよい。このように、処理部１２ｂは、ステップＳ１９において生成された組み合わせデータＺの確度に応じて、評価段階を選択して評価データｒを生成してもよい。
　また、評価データｒは、通信端末Ｍを介して水産物Ｘと当該水産物Ｘの魚種Ｙが入力された時間帯や、予め制御装置１２の記憶部１２ａに記憶されたオペレータＨの識別情報など、種々の条件に応じて変更されてもよい。具体的には、処理部１２ｂは、予め設定された時間帯や作業時間中に、通信端末Ｍに対して入力があった場合は、高い評価段階を選択して評価データｒを生成してもよい。また、処理部１２ｂは、オペレータＨの熟練度に応じて、評価段階を選択して評価データｒを生成してもよい。
　制御装置１２の記憶部１２ａは、ステップＳ２１において生成された評価データｒを、ステップＳ１９において生成された組み合わせデータＺに紐づけて記憶する（ステップ　Ｓ２２）。これにより、組み合わせデータＺに紐づけられた評価データｒを、記憶部１２ａに蓄積することができる。この結果、水産物選別システム１は、記憶部１２ａに記憶された組み合わせデータＺおよび評価データｒに基づいて、選別作業の実施速度および精度を向上させることができる。
　制御装置１２の処理部１２ｂは、ステップＳ１７において取得された水産物Ｘに対応する水産物領域ｘを選択済み領域ｘｕに変更する（ステップ　Ｓ２３）。これにより、通信端末Ｍのディスプレイ１４を介して、同一の水産物Ｘについて、重複または繰り返し魚種Ｙが入力指定されることを防止することができる。この結果、水産物選別システム１は、選別作業の実施速度を向上させることができる。
　制御装置１２の処理部１２ｂは、選別画面Ｓに水産物領域ｘが含まれるか否かを判定する（ステップ　Ｓ２４）。処理部１２ｂは、選別画面Ｓに水産物領域ｘが含まれないと判定した場合（ステップＳ２４　Ｙｅｓ）、記憶部１２ａに記憶された評価ｒに基づいて報酬Ｒを決定する（ステップ　Ｓ２５）。一方そうでない場合（ステップＳ２４　Ｎｏ）、制御装置１２の処理部１２ｂは、処理をステップＳ１３の前に戻す。本実施形態では、処理部１２ｂは、報酬Ｒを、通信端末Ｍを介して水産物Ｘと魚種Ｙを入力するオペレータＨに付与する金銭報酬として計算し決定する。また、報酬Ｒは換金可能なポイントや、オペレータＨに対して付与される他の種々様々な褒賞であってもよい。報酬Ｒは、ステップＳ２１で生成された評価データｒおよびオペレータＨが通信端末Ｍに対して行った水産物Ｘと魚種Ｙの入力回数によって決定される。具体的には、評価データｒの評価段階が高いほど、さらに、入力回数が多いほど、オペレータＨに付与される報酬Ｒは多くなる。このため、通信端末Ｍに入力した水産物Ｘと魚種Ｙの組み合わせデータＺの精度および入力回数に応じて、オペレータＨに対して適切な報酬Ｒを付与することができる。これにより、オペレータＨが通信端末Ｍに対して入力作業を行う意欲を高めることができる。この結果、水産物Ｘの選別作業に従事する人材を、広く確保することができる。
　制御装置１２の処理部１２ｂは、分離装置４のアクチュエータを制御して、水産物Ｘを複数の選別エリア１８のうちの１つへ移動させる（ステップ　Ｓ２６）。本実施形態では、制御装置１２の処理部１２ｂは、画像データＤとステップＳ１８において生成した組み合わせデータＺに基づいて、水産物Ｘを、魚種Ｙに対応した選別エリア１８への移動させるための分離装置４の動作制御を生成し、水産物Ｘを所定の選別エリア１８へ移動させる。
　制御装置１２は、第２重量計１０が計測した第２重量Ｗ２を取得する（ステップ　Ｓ２７）。制御装置１２の処理部１２ｂは、取得した第２重量Ｗ２に基づいて、組み合わせデータＺに含まれる第１重量Ｗ１の値を更新して、処理をステップＳ１の前に戻す（ステップ　Ｓ２８）。これにより、制御装置１２は、記憶部１２ａに記憶された組み合わせデータＺを、実際に実施された選別作業に基づいて更新することができる。このため、水産物Ｘの選別作業の精度を向上させることができる。
　制御装置１２は、さらに、ステップＳ２０で生成した組み合わせデータＺに基づいて、記憶部１２ａに記憶された既存の組み合わせデータＺを修正し更新する学習を実施してもよい。本実施形態では、制御装置１２は、ステップＳ２０で生成した組み合わせデータＺと、記憶部１２ａに記憶された既存の組み合わせデータＺとを比較して、魚種Ｙが同じ組み合わせデータＺについては、形状情報ｙ１、時期および時刻ｙ２、海域の位置情報ｙ３、水深ｙ４の情報を追加してもよい。
　＜第２実施形態＞
　次に、本開示の第２実施形態について図５および図６を用いて説明する。なお、第２実施形態の説明においては、第１実施形態と異なる点のみ説明する。
　本開示の第２実施形態に係る水産物選別システム２０１は、養殖された同一の魚種の水産物Ｘを、品質（種類の一例）Ｙ２によって選別する。品質Ｙ２は、水産物Ｘの大きさ、重量、体色および形状などによって、優Ｙ２１、良Ｙ２２、可Ｙ２３の３段階が設定される。
　本実施形態では、図５（ａ）に示すように、画像データＤ２は、同一の魚種の水産物Ｘ２１からＸ２３が含まれる。制御装置２１２の処理部２１２ｂは、画像データＤ２を、実線で区画された３つの水産物領域ｘ２１からｘ２３と、背景領域ｘｓと、に区画する。
　さらに、処理部２１２ｂは、水産物領域ｘ２１からｘ２３について、それぞれ、一致率α２を算出する。本実施形態では、一致率α２は、制御装置２１２が水産物Ｘの品質Ｙ２を推定可能であるか否かの判定の指標として算出される。
　図５（ｂ）に示すように、制御装置２１２の処理部２１２ｂは、一致率α２の値に基づいて、水産物Ｘ２１からＸ２３を、第１の水産物ｃ２１と、第２の水産物ｃ２２と、に区別する。本実施形態では、第１の水産物ｃ２１は、一致率α２の値に基づいて、品質Ｙ２を推定可能な水産物であり、水産物領域ｘ２の境界が太線の実線で示される。また、第２の水産物ｃ２２は、品質Ｙ２が優Ｙ２１、良Ｙ２２、可Ｙ２３、のいずれかに該当するか推定が困難な水産物であり、水産物領域ｘ２の境界が太線の破線で示される。
　図５（ｂ）および図６（ａ）に示すように、処理部２１２ｂは、第１の水産物ｃ２１に区分された水産物領域ｘ２１およびｘ２２について、第１選別部Ｃ２１を生成する。本実施形態では、処理部２１２ｂは、水産物領域ｘ２１および水産物領域ｘ２２に対応して、２つの第１選別部Ｃ２１１およびＣ２１２を生成する。第１選別部Ｃ２１は、第１の水産物ｃ２１に区分された水産物領域ｘと、品質候補（候補の一例）ｓ２と、を含む。品質候補ｓ２は、一致率α２の値に基づいて推定された、品質Ｙ２の優Ｙ２１、良Ｙ２２、可Ｙ２３、のいずれか１つである。
　図５（ｂ）および図６（ｂ）に示すように、処理部２１２ｂは、第２の水産物ｃ２２に区分された水産物領域ｘ２３について、第２選別部Ｃ２２を生成する。第２選別部Ｃ２２は、第２の水産物ｃ２２に区分された水産物領域ｘ２３と、複数の品質候補ｓ２と、を含む。複数の品質候補ｓ２は、一致率α２の値に基づいて選択され整列された、品質Ｙ２の優Ｙ２１、良Ｙ２２、可Ｙ２３、である。
　制御装置２１２の処理部２１２ｂは、選別画面Ｓ２を生成する。本実施形態では、画像データＤ２に、これらの水産物領域ｘ２１からｘ２３、第１選別部Ｃ２１および第２選別部Ｃ２２の画像表示をオーバーラップして合成した画面データである。
　これにより、オペレータＨは、複数の品質候補ｓ２のうち、水産物領域ｘ２に含まれる水産物Ｘに対応する品質Ｙ２との組み合わせデータＺとして最も適切であろう選択肢を瞬時に識別することができる。
　＜第３実施形態＞
　次に、本開示の第３実施形態について図７を用いて説明する。なお、第３実施形態の説明においては、第１実施形態と異なる点のみ説明する。
　図７に示すように、船３０１は、水産物選別システム３０２と、冷凍庫３０４と、を備える。水産物選別システム３０２は、第１実施形態による水産物選別システム１と同じシステムである。また、水産物選別システム３０２は、第２実施形態による水産物選別システ２０１と同じシステムであってもよい。このような、船は、例えばトロール網３０６によって引き上げた水産物を選別し、魚種毎に冷凍庫に保存することを要する。このため、本開示の水産物選別システム３０２を備える船は、このような選別が容易である。この結果、船の乗組員を削減でき効率的な漁が可能である。
　＜他の実施形態＞
　以上、本開示の実施形態について説明したが、本開示は上記実施形態に限定されるものではなく、発明の要旨を逸脱しない範囲で種々に変更が可能である。
　（ａ）上記実施形態では、水産物Ｘを水産物Ｘの魚種Ｙまたは品質Ｙ２ごとに選別する水産物選別システム１，２０１を例に説明したが、本開示はこれに限定されない。水産物選別システム１，２０１は、魚種や品質以外に、水産物の雌雄や大きさなどによって選別するものでもよい。
　（ｂ）上記実施形態では、カメラ６は、１つのカメラによって構成されていたが、本開示はこれに限定されない。すなわち、カメラ６は、設置される位置や角度が異なる複数のカメラを制御して撮像するものであってもよく、画像データＤは、複数のカメラが探像した映像を統合した画像データであってもよい。
　（ｃ）上記実施形態では、制御装置１２の処理部１２ｂは、評価データｒとして、予め設定された所定の評価段階の内の一つを選択して生成したが、本開示はこれに限定されない。評価データｒは、数値や変数など、報酬Ｒを決定するための種々の形態を選択することができる。
１，２０１，：水産物選別システム　　２：搬送装置　　４：分離装置　６：カメラ
８：第１重量計　　１０：第２重量計
１２，２１２：制御装置　　１２ａ，２１２ａ：記憶部
１２ｂ，２１２ｂ：処理部
１４：ディスプレイ　　１６：入力装置　　Ｓ（Ｓ２）：選別画面
船：３０１

Claims (10)

  1. 　水産物を撮像するカメラと、
    　選別画面を表示するディスプレイと、
    　前記カメラと、前記ディスプレイと、それぞれ通信可能であり、前記カメラで撮像した映像に基づいて前記水産物を選別する前記選別画面を生成し、前記選別画面を前記ディスプレイに表示する制御装置と、
    を備える水産物選別システム。
  2. 　前記水産物を搬送する搬送装置をさらに備え、
    　前記カメラは、前記搬送装置で搬送される前記水産物を撮像し、
    　前記制御装置は、前記制御装置によって選別可能な第１の水産物と、前記制御装置によって選別不可能な第２の水産物を判断し、
    　前記選別画面は、少なくとも前記第２の水産物の情報を含む、
    請求項１に記載の水産物選別システム。
  3. 　前記搬送装置で搬送される前記水産物の重量を計測する重量計と、
    　少なくとも前記第２の水産物の選別情報が入力される入力装置と、
    をさらに備え、
    　前記制御装置は、前記重量計と、前記入力装置と、通信可能であり、
    　前記水産物の形状情報と、前記形状情報に対応する種類と、前記重量と、の組み合わせ情報が記憶された記憶部と、
    　前記カメラで撮像された映像と、前記重量計で計測された前記重量と、に基づいて、前記映像に含まれる前記水産物の前記種類とを推定し、前記選別画面を生成する処理部と、
    を有し、
    　前記第１の水産物は、前記処理部で前記種類を推定可能な水産物であり、
    　前記第２の水産物は、前記第１の水産物を除く他の水産物であり、
    　前記選別画面は、前記映像と、前記映像に含まれる前記水産物のうち、前記第１の水産物に対応する第１選別部と、前記第２の水産物に対応する第２選別部と、を前記映像に合成した画像情報である、
    請求項２に記載の水産物選別システム。
  4. 　前記組み合わせ情報は、前記水産物が水揚げされた季節と、海域と、水深と、の少なくともいずれか一つを含む、
    請求項３に記載の水産物選別システム。
  5. 　前記処理部は、前記映像に含まれる前記水産物の形状が、前記記憶部に記憶された前記組み合わせ情報に含まれる前記水産物の形状情報との一致率が所定の値以上である場合、前記種類を推定可能であると判定する、
    請求項３または４に記載の水産物選別システム。
  6. 　前記第１選別部は、前記第１の水産物と、前記記憶部に記憶された前記組み合わせ情報に基づいて選定された前記第１の水産物に対応する前記組み合わせ情報の候補と、を含み、
    　前記第２選別部は、前記第２の水産物と、前記記憶部に記憶された前記組み合わせ情報に基づいて推定された複数の前記第２の水産物に対応する前記組み合わせ情報の候補と、含む
    請求項３から５のいずれか一項に記載の水産物選別システム。
  7. 　前記処理部は、前記入力装置を介して入力された前記組み合わせ情報に基づいて、前記組み合わせ情報の入力に対応した所定の評価を決定する、
    請求項３から６のいずれか一項に記載の水産物選別システム。
  8. 　前記処理部は、前記第２選別部への前記入力を、前記第１選別部への前記入力に比べて、優位に評価する
    請求項７に記載の水産物選別システム。
  9. 　前記カメラは、前記水産物を複数の方向から撮影する
    請求項１から８のいずれか１項記載の水産物選別システム。
  10. 　請求項１から９の水産物選別システムを備える船。
PCT/JP2022/022939 2021-06-09 2022-06-07 水産物選別システムおよび船 WO2022260034A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023527870A JPWO2022260034A1 (ja) 2021-06-09 2022-06-07

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021-096367 2021-06-09
JP2021096367 2021-06-09

Publications (1)

Publication Number Publication Date
WO2022260034A1 true WO2022260034A1 (ja) 2022-12-15

Family

ID=84425034

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/022939 WO2022260034A1 (ja) 2021-06-09 2022-06-07 水産物選別システムおよび船

Country Status (2)

Country Link
JP (1) JPWO2022260034A1 (ja)
WO (1) WO2022260034A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NO347741B1 (en) * 2022-12-20 2024-03-11 Aquaticode Ltd System and method for sorting animals

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0850052A (ja) * 1994-08-05 1996-02-20 Yamato Scale Co Ltd 魚の体長及び体重測定装置
JPH08131060A (ja) * 1994-11-09 1996-05-28 Mitsubishi Heavy Ind Ltd 魚体魚種判別装置
JP2000116314A (ja) * 1998-10-13 2000-04-25 Hideo Yamashita 鮭・鱒の水揚げ自動システム
JP2014232538A (ja) * 2014-07-07 2014-12-11 東芝テック株式会社 情報処理装置及びプログラム
WO2016092646A1 (ja) * 2014-12-10 2016-06-16 株式会社ニレコ 魚種判別装置および魚種判別方法
CN107691610A (zh) * 2017-10-31 2018-02-16 浙江海洋大学 一种船舶用鱼身加工分类设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0850052A (ja) * 1994-08-05 1996-02-20 Yamato Scale Co Ltd 魚の体長及び体重測定装置
JPH08131060A (ja) * 1994-11-09 1996-05-28 Mitsubishi Heavy Ind Ltd 魚体魚種判別装置
JP2000116314A (ja) * 1998-10-13 2000-04-25 Hideo Yamashita 鮭・鱒の水揚げ自動システム
JP2014232538A (ja) * 2014-07-07 2014-12-11 東芝テック株式会社 情報処理装置及びプログラム
WO2016092646A1 (ja) * 2014-12-10 2016-06-16 株式会社ニレコ 魚種判別装置および魚種判別方法
CN107691610A (zh) * 2017-10-31 2018-02-16 浙江海洋大学 一种船舶用鱼身加工分类设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NO347741B1 (en) * 2022-12-20 2024-03-11 Aquaticode Ltd System and method for sorting animals

Also Published As

Publication number Publication date
JPWO2022260034A1 (ja) 2022-12-15

Similar Documents

Publication Publication Date Title
US10747999B2 (en) Methods and systems for pattern characteristic detection
JP6693938B2 (ja) 外観検査装置
CN104392228B (zh) 基于条件随机场模型的无人机图像目标类检测方法
WO2022260034A1 (ja) 水産物選別システムおよび船
US9514369B2 (en) Program, method, and system for displaying image recognition processing suitability
CN110414559A (zh) 智能零售柜商品目标检测统一框架的构建方法及商品识别方法
KR101743270B1 (ko) 다수의 플랑크톤이 응집 혹은 산재해 있는 현미경 영상에서 딥러닝을 이용하여 개개 플랑크톤을 분리 및 인식하는 방법
EP2911090B1 (en) A method and arrangement for identifying a difference between a first 3D model of an environment and a second 3D model of the environment
CN108719424A (zh) 一种基于机器视觉的水产品分类方法及系统
KR20180057785A (ko) 영상분석을 통한 어류 개체수 측정 시스템 및 그 측정방법
CN108171162A (zh) 人群拥挤度检测方法、装置及系统
CN110008947A (zh) 一种基于卷积神经网络的粮仓粮食数量监测方法及装置
EP3764635A1 (en) Photographing device, photographing method, photographing program, and photographing system
CN114020043A (zh) 无人机建筑工程监理系统、方法、电子设备及存储介质
CN110188609A (zh) 一种杂草种子的检测方法
Andradi-Brown et al. Wariness of reef fish to passive diver presence with varying dive gear type across a coral reef depth gradient
CN114402362A (zh) 鱼计数系统、鱼计数方法以及程序
CN117726991B (zh) 一种高空吊篮安全带检测方法及终端
Tubau Comas et al. Automatic apple tree blossom estimation from UAV RGB imagery
EP3816935A1 (en) Display control device, display control method, and display control program
US20210327060A1 (en) Discerning device, cell mass discerning method, and computer program
CN1239406A (zh) 用光学图象处理评估半边屠宰动物的方法
Nagata et al. Study on Sorting System for Strawberry Using Machine Vision (Part 1) Development of Software for Determining the Direction of Strawberry (Akihime variety)
Zhu et al. Exploring soybean flower and pod variation patterns during reproductive period based on fusion deep learning
CN114863277A (zh) 一种基于机器视觉的不规则颗粒群超限颗粒快速检测方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22820213

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2023527870

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE