KR20240050768A

KR20240050768A - Apparatus for sorting fruit based on image using rotating roller

Info

Publication number: KR20240050768A
Application number: KR1020220130552A
Authority: KR
Inventors: 권경주
Original assignee: 주식회사 지에프
Priority date: 2022-10-12
Filing date: 2022-10-12
Publication date: 2024-04-19

Abstract

본 발명은 회전 롤러를 이용한 영상 기반의 과일 선별 장치에 관한 것으로, 대상 과일을 가로 방향 양측 중 어느 한 방향으로 선택적으로 분류하는 과일 선별부와, 상기 과일 선별부의 과일 선별 과정을 제어하는 선별 프로세싱부를 포함한다.
본 발명의 실시예에 따른 상기 과일 선별부는 선별 프레임과, 상기 선별 프레임에 세로 방향을 축으로 회전 가능하게 설치되는 선별 회전 부재와, 상기 선별 회전 부재의 상부 측에 노출된 상태로, 상기 선별 회전 부재에 상기 가로 방향 또는 상기 세로 방향을 축으로 회전 가능하게 설치되고, 상기 대상 과일이 상부로부터 안착되는 한 쌍의 회전 롤러와, 한 쌍의 상기 회전 롤러에 안착된 상기 대상 과일이 분류되도록 상기 선별 회전 부재를 상기 가로 방향 양측 중 어느 한 방향으로 회전시키는 선별 회전 구동부와, 한 쌍의 상기 회전 롤러에 안착된 상기 대상 과일이 회전하도록 한 쌍의 상기 회전 롤러 중 적어도 하나를 회전시키는 롤러 구동부와, 한 쌍의 상기 회전 롤러의 회전에 따라 회전하는 상기 대상 과일을 촬영하는 적어도 하나의 카메라 모듈을 갖는 카메라 어셈블리를 포함한다.
본 발명의 실시예에 따른 상기 선별 프로세싱부는 상기 카메라 모듈에 의해 촬영된 영상에 기초하여, 상기 대상 과일이 분류되도록 상기 선별 회전 구동부를 제어할 수 있다.The present invention relates to an image-based fruit sorting device using a rotating roller, comprising a fruit sorting unit that selectively sorts target fruits in either the horizontal direction, and a sorting processing unit that controls the fruit sorting process of the fruit sorting unit. Includes.
The fruit sorting unit according to an embodiment of the present invention includes a sorting frame, a sorting rotation member rotatably installed on the sorting frame about a longitudinal axis, and a state exposed on an upper side of the sorting rotation member, and the sorting rotation member. A pair of rotating rollers installed on a member to be rotatable about the horizontal or vertical directions, on which the target fruit is seated from the top, and the selection so that the target fruit seated on the pair of rotating rollers is sorted. a sorting rotation driving unit that rotates the rotating member in one of the two horizontal directions, a roller driving unit that rotates at least one of the pair of rotating rollers so that the target fruit seated on the pair of rotating rollers rotates; and a camera assembly having at least one camera module for photographing the target fruit rotating according to the rotation of the pair of rotating rollers.
The sorting processing unit according to an embodiment of the present invention may control the sorting rotation driving unit to sort the target fruit based on the image captured by the camera module.

Description

Image-based fruit sorting device using a rotating roller {APPARATUS FOR SORTING FRUIT BASED ON IMAGE USING ROTATING ROLLER}

본 발명은 회전 롤러를 이용한 영상 기반의 과일 선별 장치에 관한 것으로서, 보다 상세하게는, 선별의 대상이 되는 대상 과일을 촬영한 영상에 기반하여 과일을 선별하는 회전 롤러를 이용한 영상 기반의 과일 선별 장치에 관한 것이다.The present invention relates to an image-based fruit sorting device using a rotating roller, and more specifically, an image-based fruit sorting device using a rotating roller that selects fruit based on an image taken of the target fruit to be sorted. It's about.

사과 등과 같은 과일의 선별은 생산된 과일을 상품화시키는 공정이다. 수확된 과일을 신선하고 균일하게 선별하여 농산물의 상품적 가치를 향상시킴으로서 부가가치를 높일 수 있는 특성을 지니고 있다.Sorting of fruits such as apples is a process that commercializes the produced fruits. It has the characteristic of increasing added value by selecting harvested fruits freshly and uniformly to improve the commercial value of agricultural products.

특히 과일의 선별은 과일 각각 개체의 크기, 무게, 형상, 색깔, 상처 유무 등 과일의 품위를 결정지을 수 있는 요인이 다양하여 선별 기준은 과일의 종류뿐만 아니라 품종 간에도 차이가 있어 이에 따른 등급별 분류가 요구된다. 따라서 상품성을 높이기 위해서는 균일한 선별과 포장을 진행하여야 한다.In particular, when selecting fruit, there are various factors that can determine the quality of the fruit, such as the size, weight, shape, color, presence or absence of wounds, etc., so the selection criteria differs not only between types of fruit but also between varieties, so classification by grade is required accordingly. It is required. Therefore, in order to increase marketability, uniform selection and packaging must be performed.

일반적으로 과일 선별 과정은 컨베이어를 따라 이동하는 대상 과일을 작업자가 등급별도 분류하는 과정을 거치는데, 근래에는 과일의 크기나 무게별로 자동으로 분류하여 선별하는 과일 선별 장치가 널리 사용되고 있다.Generally, the fruit sorting process involves workers sorting target fruits moving along a conveyor into grades. Recently, fruit sorting devices that automatically sort and sort fruits by size or weight have been widely used.

대상 과일을 등급별로 분류하는 기준은 크기나 무게에 따라 분류하는 방법도 있으나, 동일한 크기나 무게에 대해서도 일정 기준의 등급으로 나누어 선별하는 방법도 있다.The standard for classifying target fruits by grade is one way to classify them according to size or weight, but there is also a way to sort the same size or weight by dividing them into grades based on a certain standard.

그러나, 기존의 크기나 무게 중심의 과일 선별 장치는 크기나 무게로 선별하는데 국한되어 있어, 동일 크기나 무게의 대상 과일을 등급별로 선별하는데에는 한계가 있었다.However, existing fruit sorting devices based on size or weight are limited to sorting by size or weight, so there are limitations in sorting target fruits of the same size or weight by grade.

이에, 대상 과일을 촬영한 영상을 기반으로 하여, 과일을 선별하는 기술이 제안되고 있는데, 근래에 한국공개특허공보 제10-2020-0084940호에 개시된 'CNN 기반 병해 및 손상 과일 분류 장치 및 방법'과 같이, 딥러닝(Deep learning)과 같은 AI 기술을 기반으로, 대상 과일에 대해 촬영된 영상을 이용하여 대상 과일을 분류하는 기술이 제안되고 있다.Accordingly, a technology for selecting fruits is being proposed based on images taken of target fruits. Recently, 'CNN-based diseased and damaged fruit classification device and method' was disclosed in Korean Patent Publication No. 10-2020-0084940. As shown, based on AI technology such as deep learning, a technology for classifying target fruit using images captured of the target fruit is being proposed.

이와 같은, 대상 과일을 촬영한 영상을 기반으로 하는 과일 선별 장치의 경우, 영상의 질(Quality)이 분류의 정확도에 영향을 미치게 된다. 과일의 경우, 촬영하는 방향에 따라 흠집과 같이 등급에 영향을 미치는 곳이 촬영되지 않을 수 있어, 정확도가 높은 AI 기반 분류 모델을 사용하더라도 정확한 분류가 이루어지지 않을 수 있다.In the case of such a fruit sorting device based on images taken of the target fruit, the quality of the images affects the accuracy of classification. In the case of fruit, depending on the direction of photography, parts that affect the grade, such as scratches, may not be captured, so accurate classification may not be achieved even if a highly accurate AI-based classification model is used.

한국공개특허공보 제10-2020-0084940호Korean Patent Publication No. 10-2020-0084940

본 발명은 상기와 같은 점을 감안하여 안출된 것으로서, 본 발명의 목적은 간단한 구조로 대상 과일을 다각도에서, 다양한 방향으로 촬영하고, 이를 기반으로 대상 과일을 분류할 수 있는 회전 롤러를 이용한 영상 기반의 과일 선별 장치를 제공하는데 그 목적이 있다.The present invention was conceived in consideration of the above points, and the purpose of the present invention is to film target fruits from various angles and directions with a simple structure, and to classify target fruits based on image based images using a rotating roller. The purpose is to provide a fruit sorting device.

또한, 본 발명은 영상 기반으로 대상 과일을 분류하는데 있어, 인공지능 기반의 분류 모델을 이용하여, 보다 정확한 분류가 가능한 회전 롤러를 이용한 영상 기반의 과일 선별 장치를 제공하는데 또 다른 목적이 있다.In addition, another object of the present invention is to provide an image-based fruit sorting device using a rotating roller that enables more accurate classification by using an artificial intelligence-based classification model in classifying target fruits based on images.

본 발명의 목적은, 본 발명에 따라, 회전 롤러를 이용한 영상 기반의 과일 선별 장치에 있어서, 대상 과일을 가로 방향 양측 중 어느 한 방향으로 선택적으로 분류하는 과일 선별부와, 상기 과일 선별부의 과일 선별 과정을 제어하는 선별 프로세싱부를 포함하며; 상기 과일 선별부는 선별 프레임과, 상기 선별 프레임에 세로 방향을 축으로 회전 가능하게 설치되는 선별 회전 부재와, 상기 선별 회전 부재의 상부 측에 노출된 상태로, 상기 선별 회전 부재에 상기 가로 방향 또는 상기 세로 방향을 축으로 회전 가능하게 설치되고, 상기 대상 과일이 상부로부터 안착되는 한 쌍의 회전 롤러와, 한 쌍의 상기 회전 롤러에 안착된 상기 대상 과일이 분류되도록 상기 선별 회전 부재를 상기 가로 방향 양측 중 어느 한 방향으로 회전시키는 선별 회전 구동부와, 한 쌍의 상기 회전 롤러에 안착된 상기 대상 과일이 회전하도록 한 쌍의 상기 회전 롤러 중 적어도 하나를 회전시키는 롤러 구동부와, 한 쌍의 상기 회전 롤러의 회전에 따라 회전하는 상기 대상 과일을 촬영하는 적어도 하나의 카메라 모듈을 갖는 카메라 어셈블리를 포함하며; 상기 선별 프로세싱부는 상기 카메라 모듈에 의해 촬영된 영상에 기초하여, 상기 대상 과일이 분류되도록 상기 선별 회전 구동부를 제어하는 것을 특징으로 하는 회전 롤러를 이용한 영상 기반의 과일 선별 장치에 의해서 달성된다.An object of the present invention is to provide, according to the present invention, an image-based fruit sorting device using a rotating roller, comprising a fruit sorting unit that selectively sorts target fruits in one of two horizontal directions, and a fruit sorting unit in the fruit sorting unit. It includes a selection processing unit that controls the process; The fruit sorting unit includes a sorting frame, a sorting rotation member rotatably installed on the sorting frame about a vertical axis, and is exposed on an upper side of the sorting rotation member, and is attached to the sorting rotation member in the horizontal or A pair of rotating rollers rotatable about a vertical direction, on which the target fruit is seated from the top, and the sorting rotary members on both sides in the horizontal direction so that the target fruit seated on the pair of rotating rollers is sorted. a sorting rotation driving unit that rotates in one of the directions, a roller driving unit that rotates at least one of the pair of rotating rollers so that the target fruit seated on the pair of rotating rollers rotates, and a pair of rotating rollers. It includes a camera assembly having at least one camera module for photographing the target fruit rotating according to rotation; This is achieved by an image-based fruit sorting device using a rotating roller, wherein the sorting processing unit controls the sorting rotation drive unit to sort the target fruit based on the image captured by the camera module.

여기서, 한 쌍의 상기 회전 롤러는 상기 세로 방향을 축으로 회전 가능하게 상기 선별 회전 부재에 설치되며; 상기 대상 과일이 상부로부터 안착 가능하게 상기 가로 방향으로 상호 소정 간격 이격된 상태로 배열될 수 있다.Here, the pair of rotating rollers is installed on the sorting rotation member to be rotatable about the longitudinal direction; The target fruits may be arranged to be spaced apart from each other at a predetermined distance in the horizontal direction so that they can be seated from the top.

또한, 각각의 상기 회전 롤러는 중앙 부분으로부터 상기 세로 방향 양측으로 테이퍼진 형상을 가질 수 있다.Additionally, each of the rotating rollers may have a shape tapered from the central portion to both sides in the longitudinal direction.

그리고, 상기 선별 회전 부재는 상기 세로 방향으로 상호 이격되고, 각각 상기 선별 프레임에 회전 가능하게 결합되는 한 쌍의 회전 플레이트와, 상기 한 쌍의 회전 플레이트를 상호 연결하는 연결 플레이트를 포함하며; 한 쌍의 상기 회전 롤러는 한 쌍의 상기 회전 플레이트 사이에서 한 쌍의 상기 회전 플레이트에 양측이 각각 회전 가능하게 결합되되, 상기 연결 플레이트의 상부에 위치할 수 있다.And, the sorting rotation member is spaced apart from each other in the longitudinal direction and includes a pair of rotating plates each rotatably coupled to the sorting frame, and a connecting plate connecting the pair of rotating plates to each other; The pair of rotary rollers are rotatably coupled on both sides to the pair of rotary plates between the pair of rotary plates, and may be located on an upper part of the connecting plate.

그리고, 상기 대상 과일을 상기 과일 선별부로 이송시켜 상기 대상 과일 하나씩이 한 쌍의 상기 회전 롤러에 안착시키는 과일 이송부와; 한 쌍의 상기 회전 롤러로 상기 대상 과일이 이동하는 것을 감지하는 이동 검출 센서를 더 포함할 수 있다.And, a fruit transfer unit that transfers the target fruit to the fruit sorting unit and seats each target fruit on the pair of rotating rollers; It may further include a movement detection sensor that detects movement of the target fruit with the pair of rotating rollers.

그리고, 상기 과일 이송부는 상기 세로 방향으로 상기 대상 과일이 이송되는 제1 컨베이어부와, 상기 제1 컨베이어부로부터 이송되는 상기 대상 과일을 하나씩 상기 세로 방향으로 상기 과일 선별부 측으로 이송시켜 한 쌍의 상기 회전 롤러에 하나씩의 상기 대상 과일을 안착시키는 제2 컨베이어부를 포함하며; 상기 제2 컨베이어부는 하나씩의 상기 대상 과일이 안착 가능한 형태로 마련되고, 상기 세로 방향으로 소정 간격 이격된 상태로 배열된 복수의 과일 트레이를 포함할 수 있다.In addition, the fruit transfer unit transfers the first conveyor unit to which the target fruit is transferred in the vertical direction, and the target fruits transferred from the first conveyor unit one by one to the fruit sorting unit in the vertical direction to form a pair of the It includes a second conveyor unit that seats each of the target fruits on a rotating roller; The second conveyor unit may be provided in a form on which each of the target fruits can be seated, and may include a plurality of fruit trays arranged at a predetermined distance apart in the vertical direction.

그리고, 상기 제2 컨베이어부는 상기 제1 컨베이어부로부터 일정 각도 경사지게 설치되며; 상기 제2 컨베이어부의 말단의 높이는 한 쌍의 상기 회전 롤러보다 높게 형성되어, 상기 제2 컨베이어부의 구동에 따라 상기 제2 컨베이어부의 말단에 위치하는 상기 과일 트레이 내의 상기 대상 과일이 상기 한 쌍의 회전 롤러로 낙하하여 안착될 수 있다.And, the second conveyor unit is installed to be inclined at a certain angle from the first conveyor unit; The height of the end of the second conveyor unit is formed to be higher than the pair of rotating rollers, and as the second conveyor unit is driven, the target fruit in the fruit tray located at the end of the second conveyor unit moves to the pair of rotating rollers. It can fall and land.

그리고, 상기 이동 검출 센서는 상기 제2 컨베이어부의 말단에서 상기 대상 과일의 이동을 감지할 수 있다.Additionally, the movement detection sensor may detect movement of the target fruit at the end of the second conveyor unit.

그리고, 상기 선별 프로세싱부는 상기 카메라 모듈에 의해 촬영된 영상을 입력받아 해당 대상 과일의 분류를 위한 추론 결과를 출력하는 인공 지능 기반의 분류 모델과; 상기 분류 모델의 추론 결과에 기초하여 해당 대상 과일이 분류되도록 상기 선별 회전 구동부를 제어하는 프로세싱 제어부를 포함할 수 있다.And, the selection processing unit includes an artificial intelligence-based classification model that receives the image captured by the camera module and outputs an inference result for classification of the target fruit; It may include a processing control unit that controls the selection rotation drive unit so that the target fruit is classified based on the inference result of the classification model.

그리고, 상기 분류 모델은 상기 대상 과일의 유형에 따라 구분되는 복수의 과일 유형별 분류 모델을 포함할 수 있다.Additionally, the classification model may include a plurality of classification models for each fruit type classified according to the type of the target fruit.

그리고, 각각의 상기 과일 유형별 분류 모델은 해당 대상 과일의 분류 기준 등급에 따라 구분되는 복수의 등급별 분류 모델을 포함하고; 상기 분류 기준 등급은 제1 등급으로부터 제N 등급으로 구분되며; 상기 등급별 분류 모델은 제1 등급과 그 외 등급으로 분류하기 위한 제1 등급 분류 모델로부터 제N-1 등급과 그 외 등급으로 분류하기 위한 제N-1 등급 분류 모델까지를 포함할 수 있다.In addition, each fruit type classification model includes a plurality of classification models classified according to the classification standard grade of the target fruit; The classification criteria grades are divided from the first grade to the Nth grade; The classification model for each class may include a first class classification model for classifying into the first class and other classes to an N-1 class classification model for classifying the class into the N-1 class and other classes.

그리고, 상기 카메라 모듈은 복수개로 구성되고, 한 쌍의 상기 회전 롤러의 상부에 상호 상이한 방향에서 상기 대상 과일을 촬영 가능하게 설치될 수 있다.Additionally, the camera module may be comprised of a plurality of camera modules, and may be installed on top of the pair of rotating rollers to be capable of photographing the target fruit from different directions.

그리고, 각각의 상기 카메라 모듈은 한 쌍의 상기 회전 롤러가 회전함에 따라 상기 대상 과일이 회전하는 동안 하나의 상기 대상 과일을 적어도 2 회 이상 촬영할 수 있다.Additionally, each camera module may photograph one target fruit at least twice or more while the target fruit rotates as the pair of rotation rollers rotates.

그리고, 상기 분류 모델은 복수의 상기 카메라 모듈 각각에서 촬영된 적어도 2장 이상의 영상을 입력으로 하여, 해당 대상 과일의 분류를 위한 추론 결과를 출력할 수 있다.In addition, the classification model may input at least two images captured by each of the plurality of camera modules and output an inference result for classifying the target fruit.

본 발명에 따르면, 간단한 구조로 대상 과일을 다각도에서, 다양한 방향으로 촬영하고, 이를 기반으로 대상 과일을 분류할 수 있는 회전 롤러를 이용한 영상 기반의 과일 선별 장치가 제공된다.According to the present invention, there is provided an image-based fruit sorting device using a rotating roller that can photograph target fruits from multiple angles and directions with a simple structure and classify target fruits based on the images.

또한, 영상 기반으로 대상 과일을 분류하는데 있어, 인공지능 기반의 분류 모델을 이용하여, 보다 정확한 분류가 가능한 회전 롤러를 이용한 영상 기반의 과일 선별 장치가 제공된다.In addition, in classifying target fruits based on images, an image-based fruit sorting device using a rotating roller that enables more accurate classification using an artificial intelligence-based classification model is provided.

또한, 분류 모델이 대상 과일의 유형별, 및/또는 대상 과일의 등급별로 구분되어, 간단한 분류 구조를 통해서도 다양한 분류 작업이 가능한 회전 롤러를 이용한 영상 기반의 과일 선별 장치가 제공된다.In addition, an image-based fruit sorting device using a rotating roller is provided, in which the classification model is divided by type of target fruit and/or grade of target fruit, enabling various classification tasks even through a simple classification structure.

도 1은 본 발명의 일 실시예에 따른 과일 선별 장치의 사시도이고,
도 2는 본 발명의 일 실시예에 따른 과일 선별 장치의 측면도이고,
도 3은 본 발명의 일 실시예에 따른 과일 선별 장치의 평면도이고,
도 4는 본 발명의 일 실시예에 따른 과일 선별 장치의 제어블록도이고,
도 5는 도 1의 A 영역을 확대한 도면이고,
도 6 및 도 7은 본 발명의 일 실시예에 따른 과일 선별부의 일부 분해 사시도이고,
도 8은 본 발명의 일 실시예에 따른 카메라 어셈블리의 사시도이고,
도 9는 본 발명의 일 실시예에 따른 카메라 어셈블리의 저면도이고,
도 10은 본 발명의 일 실시예에 따른 과일 선별 장치의 선별 프로세싱부의 구성의 예를 나타낸 도면이고,
도 11 및 도 12는 본 발명의 일 실시예에 따른 분류 모델의 종류, 학습 과정, 분류 과정을 설명하기 위한 도면이다.1 is a perspective view of a fruit sorting device according to an embodiment of the present invention;
Figure 2 is a side view of a fruit sorting device according to an embodiment of the present invention;
Figure 3 is a plan view of a fruit sorting device according to an embodiment of the present invention;
Figure 4 is a control block diagram of a fruit sorting device according to an embodiment of the present invention;
Figure 5 is an enlarged view of area A of Figure 1,
Figures 6 and 7 are partially exploded perspective views of the fruit sorting unit according to an embodiment of the present invention;
Figure 8 is a perspective view of a camera assembly according to an embodiment of the present invention;
9 is a bottom view of a camera assembly according to an embodiment of the present invention;
Figure 10 is a diagram showing an example of the configuration of a sorting processing unit of a fruit sorting device according to an embodiment of the present invention;
11 and 12 are diagrams for explaining the type of classification model, learning process, and classification process according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야의 통상의 기술자에게 본 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. The advantages and features of the present invention and methods for achieving them will become clear by referring to the embodiments described in detail below along with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below and may be implemented in various different forms. The present embodiments are merely provided to ensure that the disclosure of the present invention is complete and to provide a general understanding of the technical field to which the present invention pertains. It is provided to fully inform the skilled person of the scope of the present invention, and the present invention is only defined by the scope of the claims.

본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.The terminology used herein is for describing embodiments and is not intended to limit the invention. As used herein, singular forms also include plural forms, unless specifically stated otherwise in the context. As used in the specification, “comprises” and/or “comprising” does not exclude the presence or addition of one or more other elements in addition to the mentioned elements. Like reference numerals refer to like elements throughout the specification, and “and/or” includes each and every combination of one or more of the referenced elements. Although “first”, “second”, etc. are used to describe various components, these components are of course not limited by these terms. These terms are merely used to distinguish one component from another. Therefore, it goes without saying that the first component mentioned below may also be a second component within the technical spirit of the present invention.

다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술 분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.Unless otherwise defined, all terms (including technical and scientific terms) used in this specification may be used with meanings commonly understood by those skilled in the art to which the present invention pertains. Additionally, terms defined in commonly used dictionaries are not to be interpreted ideally or excessively unless clearly specifically defined.

이하, 첨부 도면을 참조하여 본 발명에 대해 상세히 설명한다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 과일 선별 장치(10)의 사시도이고, 도 2는 본 발명의 일 실시예에 따른 과일 선별 장치(10)의 측면도이고, 도 3은 본 발명의 일 실시예에 따른 과일 선별 장치(10)의 평면도이고, 도 4는 본 발명의 일 실시예에 따른 과일 선별 장치(10)의 제어블록도이다.Figure 1 is a perspective view of a fruit sorting device 10 according to an embodiment of the present invention, Figure 2 is a side view of a fruit sorting device 10 according to an embodiment of the present invention, and Figure 3 is an embodiment of the present invention. This is a top view of a fruit sorting device 10 according to an example, and Figure 4 is a control block diagram of the fruit sorting device 10 according to an embodiment of the present invention.

도 1 내지 도 4를 참조하여 설명하면, 본 발명의 일 실시예에 따른 회전 롤러를 이용한 영상 기반의 과일 선별 장치(10)는 과일 선별부(100) 및 선별 프로세싱부(200)를 포함할 수 있다.1 to 4, the image-based fruit sorting device 10 using a rotating roller according to an embodiment of the present invention may include a fruit sorting unit 100 and a sorting processing unit 200. there is.

본 발명의 실시예에 따른 과일 선별부(100)는 대상 과일(F)을 가로 방향(W) 양측 중 어느 한 방향을 선택적으로 분류한다. 그리고, 선별 프로세싱부(200)는 과일 선별부(100)의 과일 선별 과정을 제어한다. 즉, 본 발명의 실시예에 따른 선별 프로세싱부(200)는 과일 선별부(100)를 제어하여, 대상 과일(F)을 기 설정된 기준에 따라 두 분류로 분류하여 선별하게 된다.The fruit sorting unit 100 according to an embodiment of the present invention selectively sorts the target fruit (F) in either direction of the horizontal direction (W). And, the selection processing unit 200 controls the fruit selection process of the fruit selection unit 100. That is, the selection processing unit 200 according to an embodiment of the present invention controls the fruit selection unit 100 to classify and select the target fruit F into two categories according to preset standards.

또한, 본 발명의 실시예에 따른 과일 선별 장치(10)는 과일 이송부(300)를 더 포함하여 구성될 수 있다. 여기서, 과일 이송부(300)는 대상 과일(F)을 과일 선별부(100)로 이송시켜 대상 과일(F) 하나씩을 과일 선별부(100)로 이송시킨다. 본 발명의 실시예에 따른 과일 이송부(300)에 대한 상세한 설명은 후술한다.Additionally, the fruit sorting device 10 according to an embodiment of the present invention may be configured to further include a fruit transport unit 300. Here, the fruit transfer unit 300 transfers the target fruits (F) to the fruit sorting unit 100 and transfers each target fruit (F) to the fruit sorting unit 100 . A detailed description of the fruit transport unit 300 according to an embodiment of the present invention will be described later.

도 5는 도 1의 A 영역을 확대한 도면이다. 도 6 및 도 7은 본 발명의 일 실시예에 따른 과일 선별부(100)의 일부 분해 사시도이고, 도 8은 본 발명의 일 실시예에 따른 카메라 어셈블리(160)의 사시도이고, 도 9는 본 발명의 일 실시예에 따른 카메라 어셈블리(160)의 저면도이다.Figure 5 is an enlarged view of area A of Figure 1. Figures 6 and 7 are partially exploded perspective views of the fruit sorting unit 100 according to an embodiment of the present invention, Figure 8 is a perspective view of the camera assembly 160 according to an embodiment of the present invention, and Figure 9 is an exploded perspective view of the fruit sorting unit 100 according to an embodiment of the present invention. This is a bottom view of the camera assembly 160 according to an embodiment of the invention.

본 발명의 실시예에 따른 과일 선별부(100)는 선별 프레임(110), 선별 회전 부재(120), 한 쌍의 회전 롤러(130), 선별 회전 구동부(140), 롤러 구동부(150), 및 카메라 어셈블리(160)를 포함할 수 있다.The fruit sorting unit 100 according to an embodiment of the present invention includes a sorting frame 110, a sorting rotation member 120, a pair of rotating rollers 130, a sorting rotation driving part 140, a roller driving part 150, and It may include a camera assembly 160.

본 발명의 실시예에 따른 선별 프레임(110)은 과일 선별부(100)를 구성하는 선별 회전 부재(120)와 카메라 어셈블리(160) 등의 구성요소를 지지한다. 여기서, 도 1 및 도 2에서는 카메라 어셈블리(160)를 지지하는 선별 프레임(110)이 도시되어 있지 않으나, 카메라 어셈블리(160)의 상부 측에서 카메라 어셈블리(160)를 지지하기 위한 선별 프레임(110)이 배치될 수 있음은 물론이다.The sorting frame 110 according to an embodiment of the present invention supports components such as the sorting rotation member 120 and the camera assembly 160 that constitute the fruit sorting unit 100. Here, the selection frame 110 supporting the camera assembly 160 is not shown in FIGS. 1 and 2, but the selection frame 110 for supporting the camera assembly 160 is shown on the upper side of the camera assembly 160. Of course, this can be arranged.

일 예로, 가로, 세로 및 높이 방향(H)으로 빔 형태의 프레임이 상호 연결되어, 전체 지지 구조를 형성하는 메인 프레임을 구성하고, 메인 프레임의 일부가 카메라 어셈블리(160)를 지지하는 선별 프레임(110)으로 기능할 수 있다. 또는 메인 프레임에 카메라 어셈블리(160)를 지지하는 선별 프레임(110)이 고정된 상태로 카메라 어셈블리(160)를 지지하도록 구성될 수 있다.As an example, beam-shaped frames are interconnected in the horizontal, vertical, and height directions (H) to form a main frame that forms the entire support structure, and a portion of the main frame is a screening frame ( 110). Alternatively, the selection frame 110 supporting the camera assembly 160 may be configured to support the camera assembly 160 while being fixed to the main frame.

그리고, 선별 회전 부재(120)를 지지하는 선별 프레임(110)은, 도 5 내지 도 7에 도시된 바와 같이, 메인 프레임에 설치 가능한 형태로 마련되어 선별 회전 부재(120)를 지지한다.And, as shown in FIGS. 5 to 7, the sorting frame 110 supporting the sorting rotation member 120 is provided in a form that can be installed on the main frame and supports the sorting rotating member 120.

본 발명의 실시예에 따른 선별 회전 부재(120)는 선별 프레임(110)에 세로 방향(L)을 축으로 회전 가능하게 설치된다.The sorting rotation member 120 according to an embodiment of the present invention is installed on the sorting frame 110 to be rotatable about the longitudinal direction (L).

그리고, 한 쌍의 회전 롤러(130)는 선별 회전 부재(120)의 상부 측에 노출된 상태로, 선별 회전 부재(120)에 가로 방향(W) 또는 세로 방향(L)을 축으로 회전 가능하게 설치된다. 본 발명의 실시예에서는 한 쌍의 롤러가 세로 방향(L)을 축으로 회전 가능하게 설치되는 것을 예로 하여 도시하고 있다.In addition, the pair of rotation rollers 130 are exposed on the upper side of the selection rotation member 120 and can rotate about the horizontal direction (W) or the vertical direction (L) of the selection rotation member 120. It is installed. In the embodiment of the present invention, a pair of rollers is shown as an example installed to be rotatable about the longitudinal direction (L).

본 발명의 실시예에 따른 선별 회전 구동부(140)는 선별 회전 부재(120)를 세로 방향(L)을 축으로 정역 회전시킨다. 이를 통해, 한 쌍의 회전 롤러(130)에 대상 과일(F)이 안착되는 경우, 선별 프로세싱부(200)는 선별 회전 부재(120)가 선별 결과에 따라 가로 방향(W) 양측 중 어느 한 방향으로 회전하도록 선별 회전 구동부(140)를 제어함으로써, 대상 과일(F)을 양측으로 분류 가능하게 된다.The sorting rotation driving unit 140 according to an embodiment of the present invention rotates the sorting rotation member 120 forward and backward about the longitudinal direction (L). Through this, when the target fruit (F) is seated on the pair of rotating rollers 130, the selection processing unit 200 moves the selection rotation member 120 in either the horizontal direction (W) according to the selection result. By controlling the sorting rotation driving unit 140 to rotate, the target fruit F can be sorted on both sides.

본 발명의 실시예에 따른 한 쌍의 롤러 구동부(150)는 한 쌍의 회전 롤러(130)에 안착된 대상 과일(F)이 회전하도록 한 쌍의 회전 롤러(130) 중 적어도 하나를 회전시킨다. 본 발명의 실시예에서는 롤러 구동부(150)가 한 쌍의 회전 롤러(130) 중 하나에 축 연결되어, 하나의 회전 롤러(130)를 회전시키는 것을 예로 한다.A pair of roller driving units 150 according to an embodiment of the present invention rotates at least one of the pair of rotary rollers 130 so that the target fruit F mounted on the pair of rotary rollers 130 rotates. In an embodiment of the present invention, the roller driving unit 150 is axially connected to one of a pair of rotating rollers 130 and rotates one rotating roller 130.

본 발명의 실시예에 따른 카메라 어셈블리(160)는 적어도 하나의 카메라 모듈(161)을 포함하여 구성될 수 있다. 본 발명의 실시예에서는 3개의 카메라 모듈(161)이 카메라 어셈블리(160)를 구성하는 것을 예로 하는데, 이에 대한 상세한 설명은 후술한다.The camera assembly 160 according to an embodiment of the present invention may be configured to include at least one camera module 161. In an embodiment of the present invention, it is assumed that three camera modules 161 constitute the camera assembly 160, which will be described in detail later.

본 발명에서는, 카메라 모듈(161)이 한 쌍의 회전 롤러(130)의 회전에 따라 회전하는 대상 과일(F)을 촬영함으로써, 대상 과일(F)을 다양한 방향에서 촬영 가능하게 되어, 후술할 선별 프로세싱부(200)가 카메라 모듈(161)에 의해 촬영된 영상에 기반하여 과일을 선별할 때, 보다 정확한 선별이 가능하게 된다.In the present invention, the camera module 161 photographs the target fruit (F) rotating according to the rotation of the pair of rotating rollers 130, thereby enabling the target fruit (F) to be photographed from various directions, and the selection described later. When the processing unit 200 selects fruit based on the image captured by the camera module 161, more accurate selection is possible.

상기와 같은 구성에 따라, 앞서 설명한 바와 같이, 선별 프로세싱부(200)는 카메로 모듈에 의해 촬영된 영상에 기초하여, 대상 과일(F)이 분류되도록 선별 회전 구동부(140)를 제어함으로서, 대상 과일(F)이 선별 회전 부재(120)의 가로 방향(W) 양측 중 어느 하나에 선택적으로 분류 가능하게 된다.According to the above configuration, as described above, the selection processing unit 200 controls the selection rotation driving unit 140 to classify the target fruit F based on the image captured by the camera module, Fruits F can be selectively sorted on either side of the horizontal direction W of the sorting rotation member 120.

한편, 본 발명의 실시예에 따른 한 쌍의 회전 롤러(130)는 가로 방향(W)으로 상호 소정 간격 이격된 상태로 배열된다. 이를 통해, 대상 과일(F)이 한 쌍의 회전 롤러(130) 사이에 안정적으로 안착된 상태에서, 회전 롤러(130)의 회전에 따라 회전하면서 카메라 모듈(161)에 의해 촬영될 수 있다.Meanwhile, a pair of rotating rollers 130 according to an embodiment of the present invention are arranged at a predetermined distance from each other in the horizontal direction (W). Through this, the target fruit F can be photographed by the camera module 161 while being stably seated between the pair of rotating rollers 130 and rotating according to the rotation of the rotating roller 130.

또한, 본 발명에서는 각각의 회전 롤러(130)가 중앙 부분으로부터 세로 방향(L) 양측으로 테이퍼진 형상을 갖도록 구성되어, 대상 과일(F)이 보다 안정적으로 안착된 상태로 회전 가능하게 된다. 또한, 테이퍼진 형상에 따라, 선별 회전 부재(120)가 가로 방향(W) 양측 중 어느 한 방향으로 회전할 때, 해당 방향으로 회전 롤러(130)로부터 보다 용이하게 이탈이 가능하게 된다.In addition, in the present invention, each rotation roller 130 is configured to have a tapered shape from the central portion to both sides in the longitudinal direction (L), so that the target fruit (F) can be rotated while being seated more stably. Additionally, depending on the tapered shape, when the sorting rotation member 120 rotates in either direction of the horizontal direction (W), it can more easily separate from the rotation roller 130 in that direction.

여기서, 본 발명의 실시예에서는 선별 회전 부재(120)가 한 쌍의 회전 플레이트(121,122)와, 연결 플레이트(123)를 포함하는 것을 예로 한다.Here, in an embodiment of the present invention, it is assumed that the sorting rotation member 120 includes a pair of rotation plates 121 and 122 and a connection plate 123.

한 쌍의 회전 플레이트(121,122)는 각각 세로 방향(L)으로 상호 이격된 상태로, 선별 프레임(110)에 회전 가능하게 결합된다. 그리고, 연결 플레이트(123)는 한 쌍의 회전 플레이트(121,122)를 상호 연결한다.A pair of rotation plates 121 and 122 are spaced apart from each other in the longitudinal direction (L) and are rotatably coupled to the sorting frame 110. And, the connection plate 123 connects a pair of rotation plates 121 and 122 to each other.

여기서, 본 발명의 실시예에서는 연결 플레이트(123)가 한 쌍의 회전 플레이트(121,122)에 높이 방향(H)으로 중간 부분에서 한 쌍의 회전 플레이트(121,122)를 연결하고, 한 쌍의 회전 롤러(130)가 한 쌍의 회전 플레이트(121,122) 사이에서 연결 플레이트(123)의 상부에 위치하는 것을 예로 한다.Here, in the embodiment of the present invention, the connecting plate 123 connects the pair of rotating plates 121 and 122 in the middle portion in the height direction (H), and a pair of rotating rollers ( As an example, 130) is located on the upper part of the connection plate 123 between a pair of rotation plates 121 and 122.

그리고, 한 쌍의 회전 롤러(130)는 연결 플레이트(123)의 상부에서 각각 상호 이격된 한 쌍의 회전 플레이트(121,122)에 회전 가능하게 결합되는 것을 예로 한다.In addition, for example, a pair of rotating rollers 130 is rotatably coupled to a pair of rotating plates 121 and 122 spaced apart from each other at the upper part of the connecting plate 123.

한편, 본 발명의 실시예에 따른 과일 선별부(100)는 제1 등급 이동부(171) 및 제2 등급 이동부(172)를 더 포함하여 구성될 수 있다.Meanwhile, the fruit sorting unit 100 according to an embodiment of the present invention may be configured to further include a first grade moving unit 171 and a second grade moving unit 172.

본 발명의 실시예에 따른 제1 등급 이동부(171) 및 제2 등급 이동부(172)는 과일 선별 부재의 가로 방향(W) 양측에 각각 배치된다. 이를 통해, 과일 선별 부재가 세로 방향(L) 양측 중 어느 일 방향으로 회전하여, 한 쌍의 회전 롤러(130)에 안착된 대상 과일(F)을 한 쌍의 회전 롤러(130)로부터 이탈시키게 되면, 이탈된 대상 과일(F)은 제1 등급 이동부(171) 및 제2 등급 이동부(172) 중 어느 하나를 따라 이동하게 된다.The first grade moving unit 171 and the second grade moving unit 172 according to an embodiment of the present invention are respectively disposed on both sides of the fruit sorting member in the horizontal direction (W). Through this, when the fruit sorting member rotates in either direction of the vertical direction (L), the target fruit (F) seated on the pair of rotary rollers 130 is separated from the pair of rotary rollers 130. , the separated target fruit (F) moves along either the first grade moving part 171 or the second grade moving part 172.

여기서, 도면에 도시되지 않았으나, 제1 등급 이동부(171) 및 제2 등급 이동부(172)의 말단에는 제1 등급 이동부(171) 및 제2 등급 이동부(172)를 통해 이동하는 대상 과일(F)을 수집하기 위한 수집통이 배치될 수 있다.Here, although not shown in the drawing, an object moving through the first grade moving unit 171 and the second grade moving unit 172 is located at the end of the first grade moving unit 171 and the second grade moving unit 172. A collection bin for collecting fruit (F) may be placed.

한편, 본 발명의 실시에에 따른 카메라 어셈블리(160)는, 도 8 및 도 9에 도시된 바와 같이, 앞서 설명한 복수의 카메라 모듈(161), 카메라 브래킷(162)을 포함할 수 있다. 또한, 카메라 어셈블리(160)는 복수의 조명부(163,164)를 포함할 수 있다.Meanwhile, the camera assembly 160 according to an embodiment of the present invention may include a plurality of camera modules 161 and the camera bracket 162 described above, as shown in FIGS. 8 and 9. Additionally, the camera assembly 160 may include a plurality of lighting units 163 and 164.

본 발명의 실시예에 따른 카메라 브래킷(162)은 복수의 카메라 모듈(161)이, 도 6에 도시된 바와 같이, 한 쌍의 회전 롤러(130)의 상부에 상호 상이한 방향에서 대상 과일(F)을 촬영 가능하게 각각의 카메라 모듈(161)을 지지한다.The camera bracket 162 according to an embodiment of the present invention includes a plurality of camera modules 161, as shown in FIG. 6, on the upper part of a pair of rotating rollers 130 in mutually different directions to reach the target fruit (F). Supports each camera module 161 to enable shooting.

그리고, 각각의 카메라 모듈(161)은 한 쌍의 회전 롤러(130)가 회전함에 따라 대상 과일(F)이 회전하는 동안 하나의 대상 과일(F)에 대해 적어도 2회 이상 촬영하는 것을 예로 한다. 본 발명에서는 각각의 카메라 모듈(161)이 대상 과일(F)이 회전하는 동안 3회 촬영하여 각각 세장씩이 영상을 획득하여, 총 9장의 대상 과일(F)에 대한 영상이 촬영되는 것을 예로 한다.Also, as an example, each camera module 161 takes pictures of one target fruit F at least twice while the target fruit F rotates as the pair of rotation rollers 130 rotates. In the present invention, as an example, each camera module 161 captures the target fruit (F) three times while it rotates and acquires three images each, resulting in a total of nine images of the target fruit (F). .

본 발명의 실시예에서는 복수의 카메라 모듈(161)이 다양한 각도에서 대상 과일(F)을 촬영할 수 있도록, 한 쌍의 회전 롤러(130) 상부에서 일정 각도로 이격 배치된 상태로 대상 과일(F)을 주시하며 촬영하는 것을 예로 한다.In an embodiment of the present invention, a plurality of camera modules 161 are spaced apart at a certain angle on the top of a pair of rotating rollers 130 to capture the target fruit F from various angles. As an example, take pictures while keeping an eye on the camera.

일 예로, 도 9에 도시된 바와 같이, 3개의 카메라 모듈(161)이 각각 120ㅀ 간격으로 대상 과일(F)을 중심으로 방사상으로 배치되도록 카메라 브래킷(162)에 설치될 수 있다.For example, as shown in FIG. 9, three camera modules 161 may be installed on the camera bracket 162 to be radially arranged around the target fruit F at intervals of 120ㅀ.

여기서, 복수의 조명부(163,164)는 각각의 카메라 모듈(161) 인근에 배치되는 3개의 제1 카메라 모듈(161)과, 대상 과일(F)의 상부 측에 위치하는 제2 카메라 모듈(161)을 포함하는 것을 예로 한다.Here, the plurality of lighting units 163 and 164 include three first camera modules 161 disposed near each camera module 161 and a second camera module 161 located on the upper side of the target fruit (F). Examples include:

본 발명의 실시예에 따른 제1 조명부(163) 및 제2 조명부(164)는 대상 과일(F)에 광이 집중되지 않고 간접광 형태로 조사되도록, 전면에 확산판과 같은 광을 확산하는 시트가 배치되는 것을 예로 한다.The first lighting unit 163 and the second lighting unit 164 according to an embodiment of the present invention are sheets that diffuse light, such as a diffusion plate, on the front so that the light is not concentrated on the target fruit F but is irradiated in the form of indirect light. As an example, let's say that is placed.

다시, 도 1 내지 도 3을 참조하여 설명하면, 본 발명의 실시예에 따른 과일 이송부(300)는 제1 컨베이어부(320) 및 제2 컨베이어부(310)를 포함하여 구성될 수 있다.Again, referring to FIGS. 1 to 3 , the fruit transport unit 300 according to an embodiment of the present invention may be configured to include a first conveyor unit 320 and a second conveyor unit 310.

본 발명의 실시예에 따른 제1 컨베이어부(320)는 세로 방향(L)으로 대상 과일(F)을 이송한다. 그리고, 제2 컨베이어부(310)는 제1 컨베이어부(320)로부터 이송되는 대상 과일(F)을 하나씩 세로 방향(L)으로 과일 선별부(100) 측으로 이송시켜 한 쌍의 회전 롤러(130)에 하나씩의 대상 과일(F)을 안착시킨다.The first conveyor unit 320 according to an embodiment of the present invention transports the target fruit (F) in the vertical direction (L). Then, the second conveyor unit 310 transfers the target fruits (F) transferred from the first conveyor unit 320 one by one to the fruit sorting unit 100 in the vertical direction (L) and uses a pair of rotating rollers 130. Place one target fruit (F) on each.

여기서, 제2 컨베이어부(310)는, 도 5에 도시된 바와 같이, 하나씩의 대상 과일(F)이 안착 가능한 형태로 마련되고, 세로 방향(L)으로 소정 간격 이격된 상태로 배열되는 복수의 과일 트레이(311)를 포함하는 것을 예로 한다. 본 발명에서는, 도 5에 도시된 바와 같이, 인접한 한 쌍씩의 과일 트레이(311)가 하나의 대상 과일(F)을 이동시키도록 반원 형태의 함몰부가 형성되어, 하나의 대상 과일(F)이 인접한 한 쌍의 과일 트레이(311)에 안착된 상태로 이동하는 것을 에로 한다.Here, as shown in FIG. 5, the second conveyor unit 310 is provided in a form in which each target fruit (F) can be seated, and a plurality of units are arranged at a predetermined distance apart in the longitudinal direction (L). As an example, it includes a fruit tray 311. In the present invention, as shown in FIG. 5, a semicircular depression is formed so that each pair of adjacent fruit trays 311 moves one target fruit F, so that one target fruit F moves the adjacent fruit tray 311. It is tempting to move while seated on a pair of fruit trays (311).

또한, 본 발명의 실시예에 따른 제2 컨베이어부(310)는, 도 2에 도시된 바와 같이, 제1 컨베이어부(320)로부터 일정 각도 경사지게 설치되어, 대상 과일(F)을 이동시키는 것을 예로 한다.In addition, as shown in FIG. 2, the second conveyor unit 310 according to an embodiment of the present invention is installed to be inclined at a certain angle from the first conveyor unit 320, and moves the target fruit F as an example. do.

그리고, 제2 컨베이어부(310)의 말단은 도 2 및 도 5에 도시된 바와 같이, 그 높이가 한 쌍의 회전 롤러(130)보다 높게 형성되는 것을 예로 한다. 이를 통해, 제2 컨베이어부(310)의 구동에 따라 제2 컨베이어부(310)의 말단에 위치하는 과일 트레이(311) 내의 대상 과일(F)이 한 쌍의 회전 롤러(130)로 낙하하여 한 쌍의 회전 롤러(130)에 안착되는 것을 예로 한다.And, as shown in FIGS. 2 and 5, the end of the second conveyor unit 310 is formed to be higher than the pair of rotating rollers 130. Through this, as the second conveyor unit 310 is driven, the target fruit (F) in the fruit tray 311 located at the end of the second conveyor unit 310 falls to a pair of rotating rollers 130 and falls to one side. As an example, it is seated on a pair of rotating rollers 130.

여기서, 본 발명의 실시예에 따른 과일 선별 장치(10)는 한 쌍의 회전 롤러(130)로 대상 과일(F)이 이동하는 것을 감지하는 이동 검출 센서(400)를 더 포함하여 구성될 수 있다.Here, the fruit sorting device 10 according to an embodiment of the present invention may be configured to further include a movement detection sensor 400 that detects the movement of the target fruit F by a pair of rotating rollers 130. .

본 발명의 실시예에서는 이동 검출 센서(400)가 제2 컨베이어부(310)의 말단에서 대상 과일(F)이 이동하는 것을 감지하는 것을 예로 한다. 즉, 대상 과일(F)은 이동 검출 센서(400)에 의해 감지된 후, 한 쌍의 회전 롤러(130)로 낙하하게 된다. 본 발명의 실시예에서는 이동 검출 센서(400)는 적외선 센서 등이 적용되는 것을 예로 한다.In an embodiment of the present invention, it is assumed that the movement detection sensor 400 detects the movement of the target fruit F at the end of the second conveyor unit 310. That is, the target fruit F is detected by the movement detection sensor 400 and then falls to a pair of rotating rollers 130. In an embodiment of the present invention, it is assumed that the movement detection sensor 400 uses an infrared sensor or the like.

본 발명의 실시예에 따른 선별 프로세싱부(200)는, 도 4에 도시된 바와 같이, 제1 컨베이어부(320)를 회전시키는 제1 컨베이어 구동부(312)와, 제1 컨베이어부(320)를 회전시키는 제2 컨베이어 구동부(322)를 제어하여, 제1 컨베이어부(320) 및 제2 컨베이어부(310)를 통해 대상 과일(F)을 과일 선별부(100)로 이송시키게 된다.As shown in FIG. 4, the selection processing unit 200 according to an embodiment of the present invention includes a first conveyor drive unit 312 that rotates the first conveyor unit 320, and a first conveyor unit 320. By controlling the rotating second conveyor driving unit 322, the target fruit F is transferred to the fruit sorting unit 100 through the first conveyor unit 320 and the second conveyor unit 310.

도 2에 도시된 바와 같이, 본 발명의 실시예에 따른 제1 컨베이어부(320)와 제2 컨베이어부(310)가 지면으로부터 상부에 위치하는 것을 예로 한다. 이 경우, 작업자가 대상 과일(F)을 제1 컨베이어부(320)에 올려놓을 수 있다. 다른 예로, 과일 이송부(300)가 제3 컨베이어부를 더 포함하여 구성되고, 제3 컨베이어부가 지면으로부터 경사지게 제2 컨베이어부(310)와 연결된 상태로, 작업자가 지면에 놓인 과일 상자로부터 대상 과일(F)을 제3 컨베이어부에 올려 놓아 이송되도록 구성될 수도 있다.As shown in FIG. 2, for example, the first conveyor unit 320 and the second conveyor unit 310 according to an embodiment of the present invention are located above the ground. In this case, the worker can place the target fruit (F) on the first conveyor unit (320). As another example, the fruit transport unit 300 is configured to further include a third conveyor unit, and the third conveyor unit is connected to the second conveyor unit 310 at an angle from the ground, and the worker transfers the target fruit (F) from a fruit box placed on the ground. ) may be configured to be transported by placing it on the third conveyor unit.

상기와 같은 구성에 따라, 본 발명의 실시예에 따른 과일 선별 장치(10)의 선별 과정에 대해 상세히 설명한다.According to the above configuration, the sorting process of the fruit sorting device 10 according to an embodiment of the present invention will be described in detail.

먼저, 대상 과일(F)들이 제1 컨베이어부(320) 위에 놓여진 상태에서, 선별 프로세싱부(200)는 대상 과일(F)의 분류를 위해 제1 컨베이어 구동부(312) 및 제2 컨베이어 구동부(322)를 제어하여, 대상 과일(F)들이 제1 컨베이어부(320)를 거쳐 제2 컨베이어부(310)로 이송되도록 제??나다.First, with the target fruits (F) placed on the first conveyor unit 320, the selection processing unit 200 uses the first conveyor drive unit 312 and the second conveyor drive unit 322 to classify the target fruits (F). ) is controlled so that the target fruits (F) are transferred to the second conveyor unit 310 through the first conveyor unit 320.

그리고, 제2 컨베이어부(310)의 한 쌍의 과일 트레이(311)에 놓여진 대상 과일(F)이 제2 컨베이어부(310)의 말단으로 이동하여 이동 검출 센서(400)에 의해 감지되면, 선별 프로세싱부(200)는 대상 과일(F)이 낙하할 때까지 제2 컨베이어 구동부(322)를 구동시킨 후, 제2 컨베이어 구동부(322)를 정지시킨다. 여기서, 대상 과일(F)이 낙하하는지 여부는 이동 검출 센서(400)의 설치 위치와, 제2 컨베이어 구동부(322)의 회전 속도 등을 고려하여 설정되는 시간을 통해 인식 가능하다. 여기서, 선별 프로세싱부(200)는 대상 과일(F)의 낙하가 인식되는 경우, 제1 컨베이어 구동부(312)의 구동도 정지시킬 수 있다.Then, when the target fruit (F) placed on the pair of fruit trays 311 of the second conveyor unit 310 moves to the end of the second conveyor unit 310 and is detected by the movement detection sensor 400, it is selected. The processing unit 200 drives the second conveyor driver 322 until the target fruit F falls, and then stops the second conveyor driver 322. Here, whether the target fruit F has fallen can be recognized through a time set in consideration of the installation position of the movement detection sensor 400 and the rotation speed of the second conveyor driver 322. Here, when the selection processing unit 200 recognizes that the target fruit F has fallen, the selection processing unit 200 may also stop the operation of the first conveyor driving unit 312.

선별 프로세싱부(200)가 대상 과일(F)이 낙하여 한 쌍의 회전 롤러(130)에 안착된 것으로 인식되면, 롤러 구동부(150)를 회전시켜 한 쌍의 회전 롤러(130)에 안착된 대상 과일(F)이 회전하도록 한다.When the selection processing unit 200 recognizes that the target fruit F has fallen and is seated on the pair of rotating rollers 130, the roller driving unit 150 is rotated to place the target fruit F on the pair of rotating rollers 130. Make the fruit (F) rotate.

그리고, 대상 과일(F)이 회전하는 동안, 선별 프로세싱부(200)는 카메라 모듈(161)이 기 설정된 횟수, 예컨대 전술한 바와 같이, 3회씩 대상 과일(F)을 촬영하도록 제어하게 된다.And, while the target fruit (F) rotates, the selection processing unit 200 controls the camera module 161 to photograph the target fruit (F) a preset number of times, for example, three times as described above.

그런 다음, 선별 프로세싱부(200)는 각각의 카메라 모듈(161)에 의해 촬영된 영상을 수신하고, 이를 기반으로 현재 한 쌍의 회전 롤러(130)에 안착된 대상 과일(F)을 판독하여 분류 결과를 도출한다.Then, the selection processing unit 200 receives the images captured by each camera module 161, and based on this, reads and classifies the target fruit F currently seated on the pair of rotating rollers 130. To derive the results.

그리고, 선별 프로세싱부(200)는 분류 결과에 기반하여, 선별 회전 구동부(140)가 가로 방향(W) 양측 중 어느 일 방향으로 회전하도록 제어하여, 한 쌍의 회전 롤러(130)에 안착된 대상 과일(F)을 어느 일측을 분류하게 된다. 여기서, 선별 프로세싱부(200)는 카메라 모듈(161)에 의한 촬영이 완료된 후 롤러 구동부(150)의 구동을 정지시킬 수 있다.Then, based on the classification result, the sorting processing unit 200 controls the sorting rotation drive unit 140 to rotate in either direction of the horizontal direction (W), so that the target seated on the pair of rotating rollers 130 The fruit (F) is classified into one side. Here, the selection processing unit 200 may stop driving the roller driving unit 150 after photography by the camera module 161 is completed.

상기와 같이 하나의 대상 과일(F)에 대한 선별이 완료되면, 앞서 설명한 과정을 반복적으로 수행하여, 전체 대상 과일(F)에 대한 선별 과정을 완료하게 된다.Once the selection for one target fruit (F) is completed as described above, the process described above is repeatedly performed to complete the selection process for all target fruits (F).

도 10은 본 발명의 실시예에 따른 과일 선별 장치(10)의 선별 프로세싱부(200)의 구성의 예를 나타낸 도면이다.Figure 10 is a diagram showing an example of the configuration of the sorting processing unit 200 of the fruit sorting device 10 according to an embodiment of the present invention.

도 10을 참조하여 설명하면, 본 발명의 실시예에 따른 선별 프로세싱부(200)는 분류 모델(210) 및 프로세싱 제어부(220)를 포함할 수 있다. 또한, 선별 프로세싱부(200)는 선별 통신부(240), 영상 디스플레이부(230), 데이터 저장부(260) 및 사용자 입력부(250)를 더 포함하여 구성될 수 있다.When described with reference to FIG. 10 , the selection processing unit 200 according to an embodiment of the present invention may include a classification model 210 and a processing control unit 220. In addition, the selection processing unit 200 may further include a selection communication unit 240, an image display unit 230, a data storage unit 260, and a user input unit 250.

사용자 입력부(250)는 작업자의 조작에 따라 다양한 입력, 예를 들어, 분류 작업 개시 등의 입력 신호를 입력받는다. 여기서, 사용자 입력부(250)는 마우스, 키보드 형태로 마련될 수 있고, 영상 디스플레이부(230)와 화면 터치를 통해 입력되는 터치 입력부를 포함할 수 있다.The user input unit 250 receives various inputs, for example, input signals such as starting a classification task, according to the operator's operation. Here, the user input unit 250 may be provided in the form of a mouse or keyboard, and may include an image display unit 230 and a touch input unit that receives input through a screen touch.

데이터 저장부(260)는 카메라 모듈(161)에 의해 촬영된 영상이 저장될 수 있다. 여기서, 데이터 저장부(260)에 의해 저장된 대상 과일(F)에 대한 영상은 추후 전문가나 작업자의 레이블링 과정을 거친 후, 분류 모델(210)의 재학습 등에 사용될 수 있다.The data storage unit 260 may store images captured by the camera module 161. Here, the image of the target fruit (F) stored by the data storage unit 260 can later be used for retraining the classification model 210 after going through a labeling process by an expert or worker.

선별 통신부(240)는 선별 프로세싱부(200) 외부와 통신한다. 본 발명의 실시예에서는 선별 통신부(240)가 내부 통신부(241) 및 외부 통신부(242)를 포함하는 것을 예로 한다.The selection communication unit 240 communicates with the outside of the selection processing unit 200. In an embodiment of the present invention, it is assumed that the selection communication unit 240 includes an internal communication unit 241 and an external communication unit 242.

내부 통신부(241)는 본 발명의 실시예에 따른 과일 선별 장치(10)를 구성하는 구성 요소들과의 통신을 수행한다. 예를 들어 내부 통신부(241)는 선별 회전 구동부(140), 롤러 구동부(150), 제1 컨베이어 구동부(312), 제2 컨베이어 구동부(322), 카메라 모듈(161)과의 통신을 수행한다.The internal communication unit 241 performs communication with the components constituting the fruit sorting device 10 according to an embodiment of the present invention. For example, the internal communication unit 241 performs communication with the sorting rotation driving unit 140, the roller driving unit 150, the first conveyor driving unit 312, the second conveyor driving unit 322, and the camera module 161.

외부 통신부(242)는 본 발명의 실시예에 따른 과일 선별 장치(10)의 외부 디바이스와 통신할 수 있다. 예를 들어, 관리자의 휴대용 디바이스에 설치된 관리 앱과의 통신을 수행하거나, 본 발명의 실시예에 따른 과일 선별 장치(10)를 지원하는 과일 선별 지원 서버(미도시)와의 통신을 수행할 수 있다.The external communication unit 242 may communicate with an external device of the fruit sorting device 10 according to an embodiment of the present invention. For example, communication may be performed with a management app installed on the manager's portable device, or communication may be performed with a fruit sorting support server (not shown) that supports the fruit sorting device 10 according to an embodiment of the present invention. .

본 발명의 실시예에서는 내부 통신부(241)와 외부 통신부(242)가 구분되는 것으로 설명하고 있으나, 동일한 통신 방식을 통해 내부 및 외부와의 통신이 수행되도록 구성될 수 있음은 물론이다.In the embodiment of the present invention, the internal communication unit 241 and the external communication unit 242 are described as being separate, but it goes without saying that internal and external communication can be performed through the same communication method.

본 발명의 실시예에 따른 분류 모델(210)은 카메라 모듈(161)에 의해 촬영된 영상을 입력받아 해당 대상 과일(F)의 분류를 위한 추론 결과를 출력한다. 본 발명의 실시예에서는 분류 모델(210)이 딥러닝(Deep learning)과 같은 인공지능 기반의 추론을 통해 대상 과일(F)을 분류하는 것을 예로 한다.The classification model 210 according to an embodiment of the present invention receives an image captured by the camera module 161 and outputs an inference result for classification of the target fruit (F). In an embodiment of the present invention, the classification model 210 classifies the target fruit (F) through artificial intelligence-based reasoning such as deep learning.

본 발명의 실시예에 따른 프로세싱 제어부(220)는 앞서 설명한 바와 같이, 회전 롤러를 이용한 영상 기반의 과일 선별 장치(10)의 전체 동작을 제어한다. 특히, 프로세싱 제어부(220)는 분류 모델(210)의 추론 결과에 기초하여 해당 대상 과일(F)이 분류되도록 선별 회전 구동부(140)를 제어하게 된다.As described above, the processing control unit 220 according to an embodiment of the present invention controls the overall operation of the image-based fruit sorting device 10 using a rotating roller. In particular, the processing control unit 220 controls the selection rotation driving unit 140 so that the target fruit F is classified based on the inference result of the classification model 210.

여기서, 본 발명의 실시예에 따른 분류 모델(210)은 대상 과일(F)의 유형에 따라 분류되는 복수의 유형별 분류 모델(211a,211b)을 포함할 수 있다. 예를 들어, 사과를 분류하기 위한 제1 과일 분류 모델(211a), 배를 분류하기 위한 제L 과일 분류 모델(211b)을 포함할 수 있다.Here, the classification model 210 according to an embodiment of the present invention may include a plurality of type-specific classification models 211a and 211b that are classified according to the type of target fruit (F). For example, it may include a first fruit classification model 211a for classifying apples and an L fruit classification model 211b for classifying pears.

즉, 하나의 과일 선별 장치(10)를 이용하여, 다양한 유형의 대상 과일(F)에 대한 분류 모델(210)들을 개별적으로 등록시켜, 대상 과일(F)의 유형에 따라 해당 분류 모델(210)을 이용함으로써, 대상 과일(F)의 유형에 따라 선별을 위한 별도의 장치를 구입하지 않아도 무방하여, 비용을 최소화시킬 수 있다.That is, using one fruit sorting device 10, classification models 210 for various types of target fruits (F) are individually registered, and the corresponding classification models 210 are generated according to the type of target fruit (F). By using , there is no need to purchase a separate device for sorting depending on the type of target fruit (F), thereby minimizing costs.

또한, 본 발명의 실시예에서는 각각의 과일 유형별 분류 모델(211a,211b)이 해당 대상 과일(F)의 분류 기준 등급에 따라 구분되는 복수의 등급별 분류 모델(211a1,211a2,211a3,211b1,211b2,211b3)을 포함할 수 있다.In addition, in an embodiment of the present invention, the classification models 211a and 211b for each fruit type are classified into a plurality of classification models 211a1, 211a2, 211a3, 211b1, 211b2, 211b3) may be included.

도 10에서는 제1 과일 분류 모델(211a)이 제1 등급 분류 모델(211a1) 제2 등급 분류 모델(211a2), 제N-1 등급 분류 모델(211a3)을 포함하여 대상 과일(F)의 분류 기준 등급에 따라 N-1 개의 등급별 분류 모델(211a1,211a2,211a3)을 포함하는 것을 예로 하고 있다. 이 때, 제1 과일 분류 모델(211a)에 해당하는 대상 과일(F)의 분류 기준 등급은 N 등급으로 구분된다.In Figure 10, the first fruit classification model 211a includes a first grade classification model 211a1, a second grade classification model 211a2, and an N-1 grade classification model 211a3, and the classification criteria of the target fruit (F) An example is to include N-1 class classification models (211a1, 211a2, 211a3) depending on the class. At this time, the classification standard grade of the target fruit (F) corresponding to the first fruit classification model 211a is divided into N grades.

그리고, 제2 과일 분류 모델(210)이 제1 등급 분류 모델(211b1) 제2 등급 분류 모델(211b2), 제M-1 등급 분류 모델(211b3)을 포함하여 대상 과일(F)의 분류 기준 등급에 따라 M-1 개의 등급별 분류 모델(211b1,211b2,211b3)을 포함하는 것을 예로 하고 있다. 이 때, 제2 과일 분류 모델(210)에 해당하는 대상 과일(F)의 분류 기준 등급은 M 등급으로 구분된다.And, the second fruit classification model 210 includes the first grade classification model 211b1, the second grade classification model 211b2, and the M-1 grade classification model 211b3, and the classification criteria level of the target fruit (F). Accordingly, the example includes M-1 class classification models (211b1, 211b2, 211b3). At this time, the classification standard grade of the target fruit (F) corresponding to the second fruit classification model 210 is classified into M grade.

도 11을 참조하여 설명하면, 도 11에 도시된 예에서는 대상 과질의 분류 기준 등급이 4 등급을 구분되고, 등급별 분류 모델(211a1,211a2,211a3)이 3개, 즉 제1 등급 분류 모델(211a1), 제2 등급 분류 모델(211a2), 및 제3 등급 분류 모델(211a3)로 구분되는 것을 예로 한다.Referring to FIG. 11, in the example shown in FIG. 11, the classification criteria for the target quality is divided into 4 grades, and there are 3 classification models for each grade (211a1, 211a2, 211a3), that is, the first grade classification model (211a1) ), a second-class classification model (211a2), and a third-class classification model (211a3).

그리고, 등급별 분류 모델(211a1,211a2,211a3)의 학습을 위한 학습 데이터는 다음과 같이 구분된다.And, the learning data for learning the class classification models (211a1, 211a2, 211a3) are divided as follows.

○ : 제1 등급에 해당하는 대상 과일(F)에 대한 영상들○: Videos of the target fruit (F) corresponding to the first grade

◎ : 제2 등급에 해당하는 대상 과일(F)에 대한 영상들◎: Videos about the target fruit (F) corresponding to the second grade

⊙ : 제3 등급에 해당하는 대상 과일(F)에 대한 영상들⊙: Videos about the target fruit (F) corresponding to the third grade

● : 제4 등급에 해당하는 대상 과일(F)에 대한 영상들● : Videos about the target fruit (F) corresponding to the 4th grade

상기와 같은 학습 데이터에 해당하는 영상들 각각에는 해당 등급이 레이블링된다.Each of the images corresponding to the training data described above is labeled with a corresponding grade.

상기와 같이, 학습 데이터가 수집되면, 제1 등급 분류 모델(211a1)은 제1 등급의 대상 과일(F)을 분류하기 위해 학습된다. 도 11에 도시된 바와 같이, 제1 등급에 해당하는 대상 과일(F)에 대한 영상이 예컨대, 정(T)으로, 나머지 등급, 즉 제2 등급, 제3 등급, 제4 등급에 해당하는 대상 과일(F)에 대한 영상이 예컨대, 부(F)로 하는 입력 데이터로 입력되고, 정(T)에 해당하는 제1 등급의 영상을 출력으로 하도록 학습된다.As described above, when learning data is collected, the first grade classification model 211a1 is learned to classify the target fruit (F) of the first grade. As shown in Figure 11, the image of the target fruit (F) corresponding to the first class is, for example, a tablet (T), and the objects corresponding to the remaining classes, that is, the second class, the third class, and the fourth class. For example, an image of fruit (F) is input as input data for negative (F), and is learned to output a first-grade image corresponding to positive (T).

따라서, 제1 등급 분류 모델(211a1)을 이용하여 과일 선별 장치(10)가 동작하게 되면, 대상 과일(F)이, 제1 등급과 나머지 등급으로 분류된다.Accordingly, when the fruit sorting device 10 operates using the first grade classification model 211a1, the target fruit F is classified into the first grade and the remaining grades.

제2 등급 분류 모델(211a2)은 제1 등급과 제2 등급의 대상 과일(F)을 분류하기 위해 학습된다. 도 11에 도시된 바와 같이, 제1 등급 및 제2 등급에 해당하는 대상 과일(F)에 대한 영상이 정(T)으로, 나머지 등급, 즉 제3 등급, 제4 등급에 해당하는 대상 과일(F)에 대한 영상이 부(F)로 하는 입력 데이터로 입력되고, 정(T)에 해당하는 제1 등급 및 제2 등급의 영상을 출력으로 하도록 학습된다.The second class classification model 211a2 is learned to classify the target fruits (F) of the first and second classes. As shown in Figure 11, the image for the target fruit (F) corresponding to the first and second classes is positive (T), and the target fruits (T) corresponding to the remaining classes, that is, the third and fourth classes ( The image for F) is input as input data for negative (F), and the first and second class images corresponding to positive (T) are learned to be output.

따라서, 제2 등급 분류 모델(211a2)을 이용하여 과일 선별 장치(10)가 동작하게 되면, 대상 과일(F)이, 제1 등급 및 제2 등급이 하나로, 나머지 제3 등급 및 제4 등급이 다른 하나로 분류될 수 있다.Therefore, when the fruit sorting device 10 operates using the second grade classification model 211a2, the target fruit F has one first grade and one second grade, and the remaining third grade and fourth grade. It can be classified into one or the other.

마찬가지로, 제3 등급 분류 모델(211a3)은 제1 등급, 제2 등급 및 제3 등급의 대상 과일(F)을 분류하기 위해 학습된다. 도 11에 도시된 바와 같이, 제1 등급, 제2 등급, 제3 등급에 해당하는 대상 과일(F)에 대한 영상이 정(T)으로, 나머지 등급인 제4 등급에 해당하는 대상 과일(F)에 대한 영상이 부(F)로 하는 입력 데이터로 입력되고, 정(T)에 해당하는 제1 등급, 제2 등급, 및 제3 등급의 영상을 출력으로 하도록 학습된다.Likewise, the third-class classification model 211a3 is learned to classify the target fruit (F) of the first, second, and third classes. As shown in Figure 11, the image for the target fruit (F) corresponding to the first, second, and third classes is Jeong (T), and the target fruit (F) corresponding to the remaining class, the fourth class, is shown in Figure 11. ) is input as input data with negative (F), and is learned to output images of the first, second, and third grades corresponding to positive (T).

따라서, 제3 등급 분류 모델(211a3)을 이용하여 과일 선별 장치(10)가 동작하게 되면, 대상 과일(F)이, 제1 등급, 제2 등급, 및 제3 등급이 하나로, 나머지 제4 등급이 다른 하나로 분류될 수 있다.Accordingly, when the fruit sorting device 10 operates using the third grade classification model 211a3, the target fruit F has the first grade, second grade, and third grade as one, and the remaining fourth grade. This can be classified as one of the other.

상기와 같이, 대상 과일(F)에 대한 분류 모델(210)이 제1 등급 분류 모델(211a1), 제2 등급 분류 모델(211a2), 그리고 제3 등급 분류 모델(211a3)로 구분된 상황에서, 본 발명의 실시예에 대한 과일 선별 장치(10)를 이용하여 대상 과일(F)을 분류하는 다양한 방법에 대해, 도 12를 참조하여 설명한다.As described above, in a situation where the classification model 210 for the target fruit (F) is divided into a first-class classification model (211a1), a second-class classification model (211a2), and a third-class classification model (211a3), Various methods of classifying the target fruit (F) using the fruit sorting device 10 according to an embodiment of the present invention will be described with reference to FIG. 12.

일 실시예로, 대상 과일(F)들을 제1 등급, 제2 등급, 제3 등급, 제4 등급, 즉 각 등급별로 분로하고자 할 때, 먼저, 제1 등급 분류 모델(211a1)을 이용하게 되면, 전체 대상 과일(F) 중, 도 12의 (a)에 도시된 바와 같이, 제1 등급에 해당하는 대상 과일(F)이 선별될 수 있다.In one embodiment, when trying to classify target fruits F into first, second, third, and fourth grades, that is, by using the first grade classification model 211a1, the first grade classification model 211a1 is used. , Among all the target fruits (F), as shown in (a) of FIG. 12, the target fruit (F) corresponding to the first grade may be selected.

그런 다음, 제1 등급 분류 모델(211a1)을 통해 제1 등급이 아닌 것으로 분류된 나머지 대상 과일(F)을 제2 등급 분류 모델(211a2)을 통해 분류하게 되면, 도 12의 (b)에 도시된 바와 같이, 제2 등급에 해당하는 대상 과일(F)이 선별될 수 있다.Then, when the remaining target fruit (F) classified as not the first grade through the first grade classification model 211a1 is classified through the second grade classification model 211a2, as shown in (b) of FIG. 12 As described above, the target fruit (F) corresponding to the second grade can be selected.

그리고, 제2 등급 분류 모델(211a2)을 통해 제2 등급이 아닌 것으로 분류된 나머지 대상 과일(F), 즉 전체 대상 과일(F)에서 제1 등급 및 제2 등급에 해당하는 대상 과일(F)이 이미 선별된 나머지 대상 과일(F)을 제3 등급 분류 모델(211a33)을 통해 분류하게 되면, 도 12의 (c)에 도시된 바와 같이, 제3 등급과 제4 등급으로 분류되어 최종적으로, 대상 과일(F)들이 제1 등급, 제2 등급, 제3 등급 및 제4 등급으로 분류 가능하게 된다.And, the remaining target fruits (F) classified as not the second class through the second class classification model 211a2, that is, the target fruits (F) corresponding to the first and second classes among all target fruits (F). When the remaining target fruits (F) that have already been selected are classified through the third grade classification model 211a33, as shown in (c) of FIG. 12, they are classified into the third grade and the fourth grade, and finally, Target fruits (F) can be classified into first, second, third, and fourth grades.

다른 실시예로, 제2 등급 이상의 대상 과일(F)을 분류하고자 할 때, 즉, 전제 대상 과일(F) 중에, 제1 등급과 제2 등급에 해당하는 대상 과일(F) 만을 분류하고자 할 때에는 전체 대상 과일(F)을 제2 등급 분류 모델(211a2)을 통해 분류하게 되면, 이를 구현할 수 있게 된다.In another embodiment, when trying to classify target fruits (F) of the second or higher grades, that is, when classifying only the target fruits (F) corresponding to the first and second grades among the premise target fruits (F), This can be implemented by classifying all target fruits (F) through the second classification model 211a2.

상기와 같은 구성을 통해, 본 발명의 실시예에 따른 과일 선별부(100)와 같이, 단지 가로 방향(W) 양측, 즉 대상 과일(F)을 두가지로만 분류하기 위한 간단한 구조를 갖는 과일 선별 구조를 통해서도, 다양한 등급으로의 분류가 가능하게 된다.Through the above configuration, like the fruit sorting unit 100 according to the embodiment of the present invention, the fruit sorting structure has a simple structure for classifying only two types of target fruit (F) on both sides of the horizontal direction (W). Through this, classification into various grades is possible.

또한, 해마다 정부 시책이나, 그 해 해당 과일의 품질이 달라져, 최상위 등급 기준이 바뀌는 경우에도, 최상위 등급을 분류하기 위한 기준에 해당하는 어느 하나의 모델을 이용하여 분류할 수 있어, 분류 기준 등급의 변동에도 능동적으로 대처가 가능하게 된다.In addition, even if the highest grade standard changes every year due to government policies or the quality of the fruit in question, classification can be done using any model that corresponds to the standard for classifying the highest grade, so that the classification standard grade can be adjusted. It becomes possible to actively respond to changes.

앞서 설명한 바와 같이, 과일 선별 지원 서버와의 연동을 통해, 본 발명의 실시예에 따른 과일 선별 장치(10)의 작업자가 과일 선별 지원 서버에 접속하여 원하는 분류 모델(210)을 다운로드 받아 사용하게 되면, 모든 분류 모델(210)을 한번에 과일 선별 장치(10)에 등록하지 않더라도 상황에 따라 적용이 가능하게 된다.As described above, through linking with the fruit sorting support server, when the operator of the fruit sorting device 10 according to an embodiment of the present invention accesses the fruit sorting support server and downloads and uses the desired classification model 210, , Even if all classification models 210 are not registered in the fruit sorting device 10 at once, they can be applied depending on the situation.

이상, 첨부된 도면을 참조로 하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야의 통상의 기술자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며, 제한적이 아닌 것으로 이해해야만 한다.Above, embodiments of the present invention have been described with reference to the attached drawings, but those skilled in the art will understand that the present invention can be implemented in other specific forms without changing its technical idea or essential features. You will be able to understand it. Therefore, the embodiments described above should be understood in all respects as illustrative and not restrictive.

10 : 과일 선별 장치 100 : 과일 선별부
110 : 선별 프레임 120 : 선별 회전 부재
121,122 : 회전 플레이트 123 : 연결 플레이트
130 : 회전 롤러 140 : 선별 회전 구동부
150 : 롤러 구동부 160 : 카메라 어셈블리
161 : 카메라 모듈 162 : 카메라 브래킷
163 : 제1 조명부 164 : 제2 조명부
171 : 제1 등급 이동부 172 : 제2 등급 이동부
200 : 선별 프로세싱부 210 : 분류 모델
220 : 프로세싱 제어부 230 : 영상 디스플레이부
240 : 선별 통신부 241 : 내부 통신부
242 : 외부 통신부 250 : 사용자 입력부
260 : 데이터 저장부 300 : 과일 이송부
310 : 제2 컨테이너부 311 : 과일 트레이
320 : 제1 컨테이너부 400 : 이동 검출 센서10: fruit sorting device 100: fruit sorting unit
110: Sorting frame 120: Sorting rotation member
121,122: rotation plate 123: connection plate
130: Rotating roller 140: Sorting rotation driving unit
150: roller driving unit 160: camera assembly
161: Camera module 162: Camera bracket
163: first lighting unit 164: second lighting unit
171: first class moving part 172: second class moving part
200: Sorting processing unit 210: Classification model
220: processing control unit 230: image display unit
240: Selected communication department 241: Internal communication department
242: external communication unit 250: user input unit
260: data storage unit 300: fruit transfer unit
310: second container unit 311: fruit tray
320: first container unit 400: movement detection sensor

Claims

In an image-based fruit sorting device using a rotating roller,
a fruit sorting unit that selectively sorts target fruits in either the horizontal direction;
It includes a selection processing unit that controls the fruit selection process of the fruit selection unit;
The fruit sorting unit
a selection frame,
a sorting rotation member rotatably installed on the sorting frame about a longitudinal axis;
a pair of rotary rollers exposed on an upper side of the sorting rotary member, rotatably installed on the sorting rotary member about the horizontal direction or the vertical direction, and on which the target fruit is seated from the top;
a sorting rotation driving unit that rotates the sorting rotation member in one of the two horizontal directions so that the target fruit mounted on the pair of rotating rollers is sorted;
a roller driving unit that rotates at least one of the pair of rotary rollers so that the target fruit mounted on the pair of rotary rollers rotates;
It includes a camera assembly having at least one camera module for photographing the target fruit rotating according to the rotation of the pair of rotating rollers;
An image-based fruit sorting device using a rotating roller, wherein the sorting processing unit controls the sorting rotation drive unit to sort the target fruit based on the image captured by the camera module.

According to paragraph 1,
A pair of said rotating rollers
installed on the sorting rotation member to be rotatable about the longitudinal direction;
An image-based fruit sorting device using a rotating roller, characterized in that the target fruits are arranged at a predetermined distance from each other in the horizontal direction so that they can be seated from the top.

According to paragraph 2,
An image-based fruit sorting device using rotating rollers, wherein each rotating roller has a tapered shape from the central portion to both sides in the longitudinal direction.