KR102680753B1

KR102680753B1 - Bee counting device using heart valve structure and system comprising the same

Info

Publication number: KR102680753B1
Application number: KR1020210183166A
Authority: KR
Inventors: 류지수; 정지원; 최병조
Original assignee: 인천대학교 산학협력단
Priority date: 2021-12-20
Filing date: 2021-12-20
Publication date: 2024-07-01
Also published as: KR20230094028A

Abstract

본 발명의 일 실시예에 따른 판막 구조를 이용한 벌 계수 시스템에 있어서, 양측 끝단이 벌통 및 외부와 각각 연결되는 계수통을 포함하고, 상기 계수통에 벌이 상기 벌통에서 상기 외부를 향하는 방향으로만 이동하도록 형성된 판막 구조를 포함하는 제1통로 및 벌이 상기 외부에서 상기 벌통을 향하는 방향으로만 이동하도록 형성된 판막 구조를 포함하는 제2통로를 구비한 계수장치; 및 통신부; 상기 통신부를 통해 상기 계수장치를 촬영하는 카메라로부터 영상을 수신하고, 상기 영상 내 표시되는 벌에 대응하는 객체의 라벨링 정보에 따라 상기 벌의 이동을 인식하도록 학습된 모델에 기초하여 상기 벌의 이동을 식별하고, 상기 벌의 이동이 상기 제1통로 또는 상기 제2통로를 통과하는 것에 기초하여 상기 벌통의 벌 수를 계수하는 프로세서;를 포함하는 전자장치;를 포함한다.In the bee counting system using a valve structure according to an embodiment of the present invention, it includes a counting bin at both ends of which are connected to the hive and the outside, respectively, and the bees in the counting bin move only in the direction from the hive to the outside. a counting device having a first passage including a valve structure configured to allow bees to move only in a direction from the outside toward the beehive; and Ministry of Communications; Receive an image from a camera that captures the counting device through the communication unit, and identify the movement of the bee based on a model learned to recognize the movement of the bee according to labeling information of an object corresponding to the bee displayed in the image. and a processor that counts the number of bees in the hive based on the movement of the bees passing through the first passage or the second passage.

Description

Bee counting device using heart valve structure and system comprising the same}

본 발명은 판막 구조를 이용한 벌 계수 장치 및 시스템에 관한 것이다.The present invention relates to a bee counting device and system using a valve structure.

현재 지구상의 식물의 대다수는 꿀벌과 같은 화분 매개 곤충에 의해 수정되고 있으며, 양봉산업은 채밀 뿐 아니라 작물이나 과실 재배 등 안정적 농업생산에 큰 영향을 미친다. Currently, the majority of plants on Earth are fertilized by pollinating insects such as bees, and the beekeeping industry has a significant impact on stable agricultural production, such as crop and fruit cultivation as well as harvesting.

하지만 최근 살충제, 상위 포식자, 천재 지변 등 여러 요인에 의해 꿀과 꽃가루를 채집하러 나간 벌들이 벌통으로 돌아오지 못하여 벌통이 몰살당하는 이른바 군집 붕괴 현상(CCD, Colony Collapse Disorder)이 발생하고 있다. However, recently, due to various factors such as pesticides, top predators, and natural disasters, the so-called Colony Collapse Disorder (CCD) is occurring, in which bees that go out to collect honey and pollen are unable to return to the hive, leading to the death of the hive.

군집 붕괴 현상 등으로 인해 꿀벌의 개체 수가 급격히 줄어들면서 최근 꿀벌 개체 수 유지를 위한 최신 기술들에 대한 요구가 증가하고 있다.As the bee population is rapidly decreasing due to colony collapse, the demand for the latest technologies to maintain the bee population is increasing.

꿀벌 개체 수 유지를 위해 개발되는 기술 중 하나는 벌통을 드나드는 꿀벌의 수를 계수하는 기술이다. 벌통을 드나드는 꿀벌의 수는 꿀벌 군락의 활동에 관한 중요한 정보를 제공한다. 다만, 꿀벌의 개체 수를 모니터링하기 위해 많은 수의 벌통을 직접 살펴보기엔 쉽지 않고, 개체 수의 변화에 대해서 정밀하게 확인하기 어렵다. One of the technologies being developed to maintain the bee population is technology to count the number of bees entering and leaving the hive. The number of bees entering and leaving the hive provides important information about the activity of the bee colony. However, it is not easy to directly inspect a large number of bee hives to monitor the bee population, and it is difficult to precisely check changes in the number of bees.

따라서, 영상을 통해 꿀벌의 출입을 인식하는 기술이 개발되었는데, 한꺼번에 많은 벌이 출입하는 경우 영상에서 벌들을 인식하기 어려운 현상이 발생하였다. Therefore, a technology was developed to recognize the entry and exit of bees through video, but when many bees entered at the same time, it was difficult to recognize the bees in the video.

이를 해결하기 위해 다양한 실험 및 고찰을 통해 벌을 보다 정확하게 인식할 수 있는 하드웨어 구조를 개발하고, 하드웨어 구조를 이용하여 적용 가능한 소프트웨어 기술을 연구하였다.To solve this problem, we developed a hardware structure that can recognize bees more accurately through various experiments and considerations, and researched applicable software technology using the hardware structure.

본 발명의 목적은 보다 정확하게 벌을 계수할 수 있는 계수 장치 및 시스템을 제공하는 것이다.The purpose of the present invention is to provide a counting device and system that can count bees more accurately.

본 발명의 일 실시예에 따른 판막 구조를 이용한 벌 계수 시스템에 있어서, 양측 끝단이 벌통 및 외부와 각각 연결되는 계수통을 포함하고, 상기 계수통에 벌이 상기 벌통에서 상기 외부를 향하는 방향으로만 이동하도록 형성된 판막 구조를 포함하는 제1통로 및 벌이 상기 외부에서 상기 벌통을 향하는 방향으로만 이동하도록 형성된 판막 구조를 포함하는 제2통로를 구비한 계수장치; 및 통신부; 상기 통신부를 통해 상기 계수장치를 촬영하는 카메라로부터 영상을 수신하고, 상기 영상 내 표시되는 벌에 대응하는 객체의 라벨링 정보에 따라 상기 벌의 이동을 인식하도록 학습된 모델에 기초하여 상기 벌의 이동을 식별하고, 상기 벌의 이동이 상기 제1통로 또는 상기 제2통로를 통과하는 것에 기초하여 상기 벌통의 벌 수를 계수하는 프로세서;를 포함하는 전자장치;를 포함한다.In the bee counting system using a valve structure according to an embodiment of the present invention, it includes a counting bin at both ends of which are connected to the hive and the outside, respectively, and the bees in the counting bin move only in the direction from the hive to the outside. a counting device having a first passage including a valve structure configured to allow bees to move only in a direction from the outside toward the beehive; and Ministry of Communications; Receives an image from a camera that captures the counting device through the communication unit, and identifies the movement of the bee based on a model learned to recognize the movement of the bee according to labeling information of an object corresponding to the bee displayed in the image. and a processor that counts the number of bees in the hive based on the movement of the bees passing through the first passage or the second passage.

상기 제1통로 및 상기 제2통로는 벌 한 마리가 이동 가능한 폭을 가지도록 형성될 수 있다.The first passage and the second passage may be formed to have a width that allows one bee to move.

상기 판막 구조는 폴리프로필렌(Poly Propylene)으로 이루어질 수 있다.The valve structure may be made of polypropylene.

상기 프로세서는, 상기 객체를 라벨링한 박스에 대한 정보 및 상기 박스를 구성하는 좌표 정보를 포함하는 상기 라벨링 정보를 식별하고, 상기 좌표 정보에 기초하여 상기 벌의 이동을 식별할 수 있다.The processor may identify the labeling information including information about the box labeling the object and coordinate information constituting the box, and identify the movement of the bee based on the coordinate information.

상기 프로세서는, 상기 박스를 구성하는 복수의 좌표 정보 중 상기 박스의 정중앙 지점에 대응하는 제1좌표에 기초하여 상기 벌의 이동을 식별할 수 있다.The processor may identify the movement of the bee based on a first coordinate corresponding to the exact center point of the box among a plurality of coordinate information constituting the box.

상기 프로세서는, 상기 제1좌표의 x축 좌표와 상기 벌의 이동을 식별하기 위해 마련된 기준선의 x축 좌표를 비교하여 상기 벌통의 벌 수를 계수할 수 있다.The processor may count the number of bees in the hive by comparing the x-axis coordinate of the first coordinate with the x-axis coordinate of a reference line provided to identify the movement of the bees.

상기 시스템은 상기 전자장치와 통신하는 클라이언트 장치를 더 포함하고, 상기 프로세서는, 상기 계수한 벌 수가 기 정의된 값 이하이거나, 상기 제1통로를 통과한 벌 수와 상기 제2통로를 통과한 벌 수의 차이가 기 정의된 값 이상인 경우, 상기 통신부를 통해 상기 클라이언트 장치로 알림을 전송할 수 있다.The system further includes a client device that communicates with the electronic device, and the processor determines whether the counted number of bees is less than or equal to a predefined value, or the number of bees passing through the first passage and the number of bees passing through the second passage. If the difference in number is greater than or equal to a predefined value, a notification may be transmitted to the client device through the communication unit.

본 발명의 일 실시예에 따른 벌 계수장치에 있어서, 양측 끝단이 벌통 및 외부와 각각 연결되는 계수통을 포함하고, 상기 계수통에 벌이 상기 벌통에서 상기 외부를 향하는 방향으로만 이동하도록 형성된 판막 구조를 포함하는 제1통로 및 벌이 상기 외부에서 상기 벌통을 향하는 방향으로만 이동하도록 형성된 판막 구조를 포함하는 제2통로를 구비할 수 있다. In the bee counting device according to an embodiment of the present invention, it includes a counting bin at both ends of which are connected to the beehive and the outside, respectively, and a valve structure formed in the counting bin to allow bees to move only in the direction from the hive to the outside. It may be provided with a first passage including a second passage including a valve structure formed to allow bees to move only in a direction from the outside toward the hive.

본 발명의 일 실시예에 따르면, 벌통에 서식하는 벌 수를 계수하기 위한 최적의 하드웨어 구조를 고안함으로써 벌 수의 계수 효율 및 정확도를 높일 수 있다. According to an embodiment of the present invention, the efficiency and accuracy of counting the number of bees can be improved by designing an optimal hardware structure for counting the number of bees living in a beehive.

본 발명의 일 실시예에 따르면, 벌에 대응하는 객체를 인식하고, 인식한 객체를 추적함으로써 보다 정확하게 벌의 수를 계수할 수 있다.According to an embodiment of the present invention, the number of bees can be counted more accurately by recognizing objects corresponding to bees and tracking the recognized objects.

본 발명의 일 실시예에 따르면, 벌통의 소유주에게 인지시켜줌으로써 이상기후와 천적에 신속한 대처를 가능하게 하여 다양한 환경에서 꿀벌 개체 수의 감소를 막을 수 있으며 더 나은 양봉을 할 수 있도록 도움을 줄 수 있다.According to one embodiment of the present invention, by informing the owner of the bee hive, it is possible to quickly respond to abnormal weather and natural enemies, thereby preventing the decline of the bee population in various environments and helping to achieve better beekeeping. there is.

도 1은 본 발명의 일 실시예에 따른 벌 계수 시스템을 도시한 개략도이다.
도 2는 본 발명의 일 실시예에 따른 계수장치를 도시한 도면이다.
도 3은 본 발명의 다른 실시예에 따른 계수장치를 도시한 도면이다.
도 4는 본 발명의 일 실시예에 따른 전자장치의 구성을 도시한 블럭도이다.
도 5는 본 발명의 일 실시예에 따른 전자장치의 동작 흐름도를 도시한 도면이다.
도 6은 본 발명의 일 실시예에 따른 객체의 라벨링 모습을 도시한 도면이다.
도 7은 본 발명의 일 실시예에 따른 전자장치의 동작 모습을 도시한 도면이다.1 is a schematic diagram showing a punishment counting system according to an embodiment of the present invention.
Figure 2 is a diagram showing a counting device according to an embodiment of the present invention.
Figure 3 is a diagram showing a counting device according to another embodiment of the present invention.
Figure 4 is a block diagram showing the configuration of an electronic device according to an embodiment of the present invention.
Figure 5 is a diagram illustrating an operation flowchart of an electronic device according to an embodiment of the present invention.
Figure 6 is a diagram showing labeling of an object according to an embodiment of the present invention.
Figure 7 is a diagram showing the operation of an electronic device according to an embodiment of the present invention.

이하, 본 발명에 따른 바람직한 실시 형태를 첨부된 도면을 참조하여 상세하게 설명한다. 첨부된 도면과 함께 이하에 개시될 상세한 설명은 본 발명의 예시적인 실시형태를 설명하고자 하는 것이며, 본 발명이 실시될 수 있는 유일한 실시형태를 나타내고자 하는 것이 아니다. 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략할 수 있고, 명세서 전체를 통하여 동일 또는 유사한 구성 요소에 대해서는 동일한 참조 부호를 사용할 수 있다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the attached drawings. The detailed description set forth below in conjunction with the accompanying drawings is intended to illustrate exemplary embodiments of the invention and is not intended to represent the only embodiments in which the invention may be practiced. In order to clearly explain the present invention in the drawings, parts unrelated to the description may be omitted, and the same reference numerals may be used for identical or similar components throughout the specification.

도 1은 본 발명의 일 실시예에 따른 벌 계수 시스템을 도시한 개략도이다.1 is a schematic diagram showing a punishment counting system according to an embodiment of the present invention.

도 1에 도시된 벌 계수 시스템(1)(이하, 시스템(1)이라 한다.)은 계수장치(100)와 전자장치(200)를 포함한다.The bee counting system 1 (hereinafter referred to as system 1) shown in FIG. 1 includes a counting device 100 and an electronic device 200.

본 발명의 일 실시예에 따른 계수장치(100)는 벌이 서식하고 꿀을 저장할 수 있는 벌통(10) 및 벌이 꿀을 채집할 수 있는 외부와 각각 연결된다.The counting device 100 according to an embodiment of the present invention is connected to the beehive 10, where bees live and store honey, and the outside, where bees can collect honey.

벌들은 계수장치(100)를 통해 외부로 나가고, 벌통(10)으로 다시 들어오게 되고, 벌통(10)에 서식하는 벌의 개체 수를 계수하기 위해 전자장치(200)를 이용한다.The bees go outside through the counting device 100 and re-enter the beehive 10, and the electronic device 200 is used to count the number of bees living in the beehive 10.

본 발명의 일 실시예에 따르면, 전자장치(200)는 계수장치(100) 근처에 설치된 카메라(20)를 통해 영상을 수신하여, 벌통(10)에 서식하는 벌의 개체 수를 계수할 수 있다. 본 발명의 일 실시예에 따른 전자장치(200)는 컴퓨터, 서버 등으로 구현될 수 있으며 어느 하나에 한정되지 않는다.According to an embodiment of the present invention, the electronic device 200 can count the number of bees living in the beehive 10 by receiving an image through a camera 20 installed near the counting device 100. . The electronic device 200 according to an embodiment of the present invention may be implemented as a computer, a server, etc., and is not limited to any one.

본 발명의 일 실시예에 따른 카메라(20)는 그 설치 위치를 한정하지 않고, 계수장치(100)의 상면을 촬영하여 벌들이 출입하는 영상을 촬영할 수 있는 위치이면 족하다.The camera 20 according to an embodiment of the present invention is not limited to its installation location, and any location that can capture images of bees entering and exiting by photographing the upper surface of the counting device 100 is sufficient.

본 발명의 일 실시예에 따른 계수장치(100)는 판막 구조를 포함하는 통로들로 구성되어 벌의 출입을 구별하고, 벌의 역주행을 막아 정확한 출입여부를 확인하도록 구성된다. 이하 도면들을 참조하여, 계수장치(100)와 전자장치(200)의 구체적인 구성 및 전자장치(200)의 구체적인 동작에 대해서 서술한다.The counting device 100 according to an embodiment of the present invention is composed of passages including a valve structure to distinguish the entrance and exit of bees and prevents the bees from running backwards to confirm accurate entry and exit. With reference to the drawings below, the specific configuration of the counting device 100 and the electronic device 200 and the specific operation of the electronic device 200 will be described.

도 2는 본 발명의 일 실시예에 따른 계수장치를 도시한 도면이다.Figure 2 is a diagram showing a counting device according to an embodiment of the present invention.

본 발명의 일 실시예에 따른 계수장치(100)는 양측 끝단 각각이 벌통 및 외부와 연결되는 계수통(110)을 포함한다. 계수통(110)은 박스 형태로 만들어질 수 있으나, 계수통(110)의 형상은 이에 한정되는 것은 아니다.The counting device 100 according to an embodiment of the present invention includes a counting trough 110 at both ends of which are connected to the beehive and the outside. The counter 110 may be made in a box shape, but the shape of the counter 110 is not limited to this.

계수통(110)은 아크릴과 같은 재질로 구성되는 경우 바닥이 미끄러워 벌들이 이동하는데 제약이 존재하고, 계수통(110)의 재질에 따라 빛이 투과 시 통로 아래의 물건이나 색들이 일정하지 않은 이미지가 인식되는 등 문제가 다수 발생할 수 있다. If the counter 110 is made of a material such as acrylic, the floor is slippery, so there are restrictions on the movement of bees, and depending on the material of the counter 110, when light passes through, the objects or colors under the passage are not constant. Many problems may occur, such as when images are recognized.

따라서, 계수장치(100)의 재질은 벌이 미끄러지지 않고, 불투명하여 벌의 이동 및 벌에 대응하는 객체 인식에 영향을 주지 않는 재질을 선택함이 바람직하다. 예를 들면, 나무 재질로 계수장치(100)를 제작할 수 있다. Therefore, it is desirable to select a material for the counting device 100 that prevents the bee from slipping and is opaque so as not to affect the movement of the bee and the recognition of objects corresponding to the bee. For example, the counting device 100 can be manufactured from wood.

계수통(110)은 양측 끝단 각각이 벌통(10) 및 외부와 연결된다. 이를 위해 계수통(110)은 외부와 연결되는 입구(131) 및 벌통(10)과 연결되는 입구(132)를 포함할 수 있다. 이때, 각 입구(131, 132)의 형상은 제한되지 않는다. Each end of the counting bin 110 is connected to the beehive 10 and the outside. To this end, the counting bin 110 may include an entrance 131 connected to the outside and an entrance 132 connected to the beehive 10. At this time, the shape of each inlet 131 and 132 is not limited.

본 발명의 일 실시예에 따르면, 계수통(110) 상에는 벌의 출입을 용이하게 식별할 수 있도록 통로가 구비된다.According to one embodiment of the present invention, a passage is provided on the counter 110 to easily identify the entrance and exit of bees.

본 발명에서는 다양한 실험을 통해 벌의 수를 계수할 수 있는 최적의 통로를 구비하였다. 먼저, 통로를 두지 않은 경우, 너무 많은 벌들이 한번에 출입하게 되어 촬영된 영상에서 겹치는 벌들의 수가 많아져 인식이 어려운 문제점이 존재한다. 또한, 벌이 들어오는 곳과 나가는 곳의 구별이 없이 양방통행으로 구성되면, 양쪽에서 들어오는 벌들이 서로의 통행을 방해하고, 정체 구간이 생기는 것이 확인되었다.In the present invention, an optimal passage for counting the number of bees was provided through various experiments. First, if there is no passage, too many bees enter and exit at once, resulting in a large number of overlapping bees in the captured video, making recognition difficult. In addition, it has been confirmed that when two-way traffic is established without distinction between incoming and outgoing bees, bees coming from both sides block each other's passage, creating a congestion section.

이를 해결하기 위해 여러 통로로 나누어 실험을 진행하였으나, 통로가 너무 넓은 경우 여전히 벌들이 한꺼번에 이동하면서 인식을 방해하고, 통로가 좁은 경우 벌들이 통로를 바로 드나들지 못하고 머물러있는 시간이 길어지는 문제가 존재하였다. To solve this, an experiment was conducted by dividing the passage into several passages, but if the passage is too wide, the bees still move all at once, interfering with recognition, and if the passage is narrow, there is a problem that the bees are unable to enter and exit the passage immediately and the time they stay there increases. did.

따라서, 본 발명에서는 통로의 폭을 벌 한 마리가 지나갈 수 있도록 조정하고, 벌들이 양쪽에서 서로의 통행을 방해하지 않도록 일방통행 구조를 채택하였다.Therefore, in the present invention, the width of the passage was adjusted to allow one bee to pass, and a one-way passage structure was adopted so that the bees did not interfere with each other's passage on both sides.

이때, 통로를 지정해두더라도 벌이 이를 인식하지 못할 가능성이 크고 일방통행 구조를 구현하기 위해, 본 발명에서는 통로의 양쪽 출입구 중 한쪽에서의 진입만을 허용하도록 통로의 양 끝에 판막이 구비된다. 이는 심장 판막이 적절한 시점에 열리면서 혈액을 앞쪽으로 배출시킨 후 다시 닫히며 혈액이 역류되지 못하도록 차단하는 점을 이용해 벌들의 역주행을 막고 벌들이 통로에서 밀집되지 않게 조절하고자 판막 구조를 채용하였다. At this time, even if the passage is designated, there is a high possibility that the bees will not recognize it, and in order to implement a one-way traffic structure, in the present invention, valves are provided at both ends of the passage to allow entry only from one of the two entrances of the passage. This is because the heart valve opens at the appropriate time, discharges blood forward, and then closes again to block blood from flowing backwards. This valve structure was used to prevent bees from traveling backwards and to control bees from crowding in the passage.

따라서, 본 발명의 일 실시예에 따르면, 계수장치(100)는 벌이 벌통(10)에서 외부를 향하는 방향으로만 이동하도록 형성된 판막 구조를 포함하는 제1통로(121) 및 벌이 외부에서 벌통(10)을 향하는 방향으로만 이동하도록 형성된 판막 구조를 포함하는 제2통로(122)를 구비한다. 이때, 제1통로(121)와 제2통로(122)는 도 2에 도시된 바와 같이 각각 3개씩 구비될 수 있으나, 이에 한정되지 않고, 벌통(10)의 크기나 벌통(10)에 서식하는 벌의 개체 수에 기초하여 조절될 수 있다.Therefore, according to one embodiment of the present invention, the counting device 100 includes a first passage 121 including a valve structure formed to allow bees to move only in the direction toward the outside of the beehive 10, and a first passage 121 that allows bees to move from the outside of the hive 10. ) and a second passage 122 including a valve structure formed to move only in the direction facing. At this time, the first passage 121 and the second passage 122 may be provided with three each as shown in FIG. 2, but are not limited to this, and are not limited to the size of the beehive 10 or the number of beehives inhabiting the hive 10. It can be adjusted based on the bee population.

본 발명의 일 실시예에 따르면, 판막 구조 또한 다양한 실험을 통해 최적의 소재를 선택하였다. According to one embodiment of the present invention, the optimal material for the valve structure was selected through various experiments.

판막 구조의 경우 판막 역할을 효과적으로 할 수 있도록 탄성을 가지고, 벌들이 판막 구조를 밀고 지나다니는데 어려움이 없으며, 벌의 턱이나 수분에 노출됐을 경우 찢길 위험이 없도록 내구성을 가지는 재질로 구성됨이 바람직하다. In the case of the valve structure, it is desirable to be made of a material that has elasticity so that it can effectively function as a valve, so that bees do not have difficulty pushing and passing the valve structure, and is durable so that there is no risk of tearing when exposed to the bee's jaw or moisture.

본 발명에서, 스펀지, 색종이, 금속판, 폴리 프로필렌((Poly Propylene, PP)의 4가지 재질로 실험한 결과, 상기 조건을 만족하는 것으로 폴리 프로필렌이 가장 적합함을 판단하였다. 본 발명의 일 실시예에 따른 판막 구조는 폴리 프로필렌이 채택될 수 있으나, 상기 조건을 만족하는 다른 재질로도 얼마든지 채용이 가능할 것이다. In the present invention, as a result of experiments with four materials: sponge, colored paper, metal plate, and poly propylene (PP), it was determined that polypropylene was most suitable as it satisfied the above conditions. One embodiment of the present invention Polypropylene may be adopted as the valve structure according to the above, but other materials that satisfy the above conditions may also be adopted.

본 발명의 일 실시예에 따르면, 판막 구조를 채용함으로써 벌통에서 외부로 나가는 제1통로(121)와 외부에서 벌통으로 들어오는 제2통로(122)를 구별할 수 있고, 이를 통해 일방통행을 가능하게 하여 벌들의 역주행을 막고 밀집되지 않게 조절할 수 있다. 또한, 통로의 폭을 조정하여 동시에 여러 벌들이 겹쳐 이동하는 등의 영상 인식을 방해하는 요소를 제거한다. 이때, 통로의 폭은 관찰하려는 대상인 벌의 종류에 따라 달라질 수 있고, 한 마리의 벌이 지나갈 수 있는 적정한 폭 혹은 해당 폭에 마진을 두고 설계할 수 있다. According to one embodiment of the present invention, by employing a valve structure, it is possible to distinguish between the first passage 121 going out from the beehive and the second passage 122 entering the beehive from the outside, thereby enabling one-way traffic. This prevents bees from traveling backwards and prevents them from crowding together. Additionally, by adjusting the width of the passage, elements that interfere with image recognition, such as multiple bees moving simultaneously, are eliminated. At this time, the width of the passage may vary depending on the type of bee being observed, and may be designed with an appropriate width for one bee to pass through or a margin on that width.

본 발명의 일 실시예에 따르면, 벌을 계수하기 위한 최적의 하드웨어 구조를 고안함으로써 벌 수의 계수 효율 및 정확도를 높일 수 있다. According to an embodiment of the present invention, the efficiency and accuracy of bee counting can be improved by designing an optimal hardware structure for counting bees.

도 3은 본 발명의 다른 실시예에 따른 계수장치를 도시한 도면이다.Figure 3 is a diagram showing a counting device according to another embodiment of the present invention.

도 3의 계수장치(100)의 경우 도 2에 도시된 계수장치(100)를 그대로 채용하면서 출입 방향을 표시하는 화살표(310, 320)를 추가로 구비하고 있다.In the case of the counting device 100 shown in FIG. 3, the counting device 100 shown in FIG. 2 is adopted as is and additionally provided with arrows 310 and 320 indicating the exit and exit directions.

벌의 색상 구별에 대해 조사한 논문(Horridge, Adrian. 2015. How bees distinguish colors. Eye and brain vol. 7 17-34.)에 따르면, 꿀벌은 파란색 또는 녹색 대비로 색상을 감지할 수 있다고 한다. 구체적으로는 흰색, 녹색 또는 갈색의 배경에 적응한 다음 파란색 함량을 측정하여 파란색-노란색 연속체에서 색상을 찾는다고 한다. According to a paper investigating the color discrimination of bees (Horridge, Adrian. 2015. How bees distinguish colors. Eye and brain vol. 7 17-34.), bees can detect colors with blue or green contrast. Specifically, they adapt to a white, green, or brown background and then measure the blue content to find a color on the blue-yellow continuum.

이에 기초하여 본 발명의 다른 실시예에 따르면, 계수장치(100)에 출구를 나타내는 화살표(310)를 파란색 또는 노란색으로 표시하고, 입구를 나타내는 화살표(320)는 화살표(310)와 반대의 색으로 표시하여, 벌이 제1통로(121)와 제2통로(122)를 보다 용이하게 구별할 수 있도록 하였다. Based on this, according to another embodiment of the present invention, the arrow 310 indicating the exit in the counting device 100 is displayed in blue or yellow, and the arrow 320 indicating the entrance is in the opposite color to the arrow 310. By marking, the bees can more easily distinguish between the first passage (121) and the second passage (122).

도 4는 본 발명의 일 실시예에 따른 전자장치의 구성을 도시한 블럭도이다.Figure 4 is a block diagram showing the configuration of an electronic device according to an embodiment of the present invention.

본 발명의 일 실시예에 따른 전자장치(200)는 입력부(210), 통신부(220), 표시부(230), 메모리(240) 및 프로세서(250)를 포함한다.The electronic device 200 according to an embodiment of the present invention includes an input unit 210, a communication unit 220, a display unit 230, a memory 240, and a processor 250.

입력부(210)는 전자장치(200)의 사용자 입력에 대응하여 입력데이터를 발생시킨다. 사용자 입력은 벌 계수에 관한 사용자 입력을 포함할 수 있다. 벌 계수에 관한 사용자 입력은, 예를 들어, 벌의 이동을 인식하도록 학습된 모델이 저장된 프로그램을 구동하는 입력 등 벌 계수와 관련된 입력이라면 제한 없이 적용 가능하다. The input unit 210 generates input data in response to user input of the electronic device 200. User input may include user input regarding a punishment coefficient. The user input regarding the bee coefficient can be applied without limitation as long as it is input related to the bee coefficient, for example, an input that runs a program in which a model learned to recognize the movement of bees is stored.

입력부(210)는 적어도 하나의 입력수단을 포함한다. 입력부(210)는 키보드(key board), 키패드(key pad), 돔 스위치(dome switch), 터치패널(touch panel), 터치 키(touch key), 마우스(mouse), 메뉴 버튼(menu button) 등을 포함할 수 있다.The input unit 210 includes at least one input means. The input unit 210 includes a keyboard, key pad, dome switch, touch panel, touch key, mouse, menu button, etc. may include.

통신부(220)는 영상을 수신하기 위해 카메라(20) 등 외부장치와의 통신을 수행한다. 이를 위해, 통신부(220)는 5G(5th generation communication), LTE-A(long term evolution-advanced), LTE(long term evolution), Wi-Fi(wireless fidelity) 등의 통신을 수행할 수 있다.The communication unit 220 performs communication with an external device such as the camera 20 to receive images. To this end, the communication unit 220 may perform communications such as 5th generation communication (5G), long term evolution-advanced (LTE-A), long term evolution (LTE), and wireless fidelity (Wi-Fi).

표시부(230)는 전자장치(200)의 동작에 따른 표시 데이터를 표시한다. 표시부(230)는 벌 계수에 관한 표시데이터를 표시할 수 있다. 벌 계수에 관한 표시데이터란, 예를 들어, 입력데이터를 입력하기 위한 화면, 계수 진행 상황을 표시하는 화면, 카메라(20)로부터 수신한 영상을 표시하는 화면 등 벌 계수와 관련된 표시데이터라면 제한 없이 적용 가능하다. The display unit 230 displays display data according to the operation of the electronic device 200. The display unit 230 may display display data regarding the punishment coefficient. The display data related to the punishment count is, for example, a screen for inputting input data, a screen for displaying the counting progress, a screen for displaying the image received from the camera 20, etc., without limitation, as long as it is display data related to the punishment count. Applicable.

표시부(230)는 액정 디스플레이(LCD; liquid crystal display), 발광 다이오드(LED; light emitting diode) 디스플레이, 유기 발광 다이오드(OLED; organic LED) 디스플레이, 마이크로 전자기계 시스템(MEMS; micro electro mechanical systems) 디스플레이 및 전자 종이(electronic paper) 디스플레이를 포함한다. 표시부(230)는 입력부(210)와 결합되어 터치 스크린(touch screen)으로 구현될 수 있다.The display unit 230 includes a liquid crystal display (LCD), a light emitting diode (LED) display, an organic light emitting diode (OLED) display, and a micro electro mechanical systems (MEMS) display. and electronic paper displays. The display unit 230 may be combined with the input unit 210 and implemented as a touch screen.

메모리(240)는 전자장치(200)의 동작 프로그램들을 저장한다. 메모리(240)는 전원의 제공 유무와 무관하게 데이터(정보)를 보존할 수 있는 비휘발성 속성의 스토리지(storage)와, 프로세서(250)에 의해 처리되기 위한 데이터가 로딩되며 전원이 제공되지 않으면 데이터를 보존할 수 없는 휘발성 속성의 메모리(memory)를 포함한다. 스토리지에는 플래시메모리(flash-memory), HDD(hard-disc drive), SSD(solid-state drive) ROM(Read Only Memory) 등이 있으며, 메모리에는 버퍼(buffer), 램(RAM; Random Access Memory) 등이 있다.The memory 240 stores operation programs of the electronic device 200. The memory 240 is a non-volatile storage that can preserve data (information) regardless of whether power is provided, and data to be processed by the processor 250 is loaded. If power is not provided, the data is stored. Contains memory with volatile properties that cannot be preserved. Storage includes flash memory, HDD (hard-disc drive), SSD (solid-state drive), ROM (Read Only Memory), etc., and memory includes buffer and RAM (Random Access Memory). etc.

메모리(240)는 카메라(20)로부터 수신한 영상 등을 저장할 수 있다. 또한, 메모리(240)는 영상 내 표시되는 벌에 대응하는 객체의 라벨링 정보에 따라 벌의 이동을 인식하도록 학습된 모델에 관한 정보를 저장할 수 있다.The memory 240 can store images received from the camera 20, etc. Additionally, the memory 240 may store information about a model learned to recognize the movement of a bee according to labeling information of an object corresponding to a bee displayed in the image.

프로세서(250)는 프로그램 등 소프트웨어를 실행하여 전자장치(200)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)를 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다.The processor 250 may control at least one other component (eg, hardware or software component) of the electronic device 200 by executing software such as a program, and may perform various data processing or calculations.

한편, 프로세서(250)는 통신부(220)를 통해 계수장치(100)를 촬영하는 카메라(20)로부터 영상을 수신하고, 영상 내 표시되는 벌에 대응하는 객체의 라벨링 정보에 따라 벌의 이동을 인식하도록 학습된 모델에 기초하여 벌의 이동을 식별하고, 벌의 이동이 제1통로(121) 또는 제2통로(122)를 통과하는 것에 기초하여 벌통의 벌 수를 계수할 수 있다. Meanwhile, the processor 250 receives an image from the camera 20 that photographs the counting device 100 through the communication unit 220, and recognizes the movement of the bee according to the labeling information of the object corresponding to the bee displayed in the image. The movement of bees can be identified based on the learned model, and the number of bees in the hive can be counted based on the movement of bees passing through the first passage 121 or the second passage 122.

이때, 프로세서(250)는 계수장치(100)를 촬영하는 카메라(20)로부터 수신한 영상 내 표시되는 벌에 대응하는 객체의 라벨링 정보에 따라 벌의 이동을 인식하도록 학습된 모델에 기초하여 벌의 이동을 식별하고, 벌의 이동이 제1통로(121) 또는 제2통로(122)를 통과하는 것에 기초하여 벌통의 벌 수를 계수하기 위한 데이터 분석, 처리, 및 결과 정보 생성 중 적어도 일부를 규칙 기반 또는 인공지능(Artificial Intelligence) 알고리즘으로서 기계학습, 신경망 네트워크(neural network), 또는 이를 이용한 딥러닝 알고리즘 중 적어도 하나를 이용하여 수행할 수 있다. 신경망 네트워크의 예로는, CNN (Convolutional Neural Network), DNN (Deep Neural Network), RNN (Recurrent Neural Network)과 같은 모델을 포함할 수 있다.At this time, the processor 250 moves the bee based on a model learned to recognize the movement of the bee according to the labeling information of the object corresponding to the bee displayed in the image received from the camera 20 that photographs the counting device 100. At least some of the data analysis, processing, and resulting information generation for identifying and counting the number of bees in the hive based on the movement of bees passing through the first passage 121 or the second passage 122 is rule-based. Alternatively, as an artificial intelligence algorithm, it can be performed using at least one of machine learning, neural network, or deep learning algorithm using the same. Examples of neural networks may include models such as Convolutional Neural Network (CNN), Deep Neural Network (DNN), and Recurrent Neural Network (RNN).

도 5는 본 발명의 일 실시예에 따른 전자장치의 동작 흐름도를 도시한 도면이다.Figure 5 is a diagram illustrating an operation flowchart of an electronic device according to an embodiment of the present invention.

본 발명의 일 실시예에 따르면, 프로세서(250)는 통신부(220)를 통해 계수장치(100)를 촬영하는 카메라(20)로부터 영상을 수신한다(S10).According to one embodiment of the present invention, the processor 250 receives an image from the camera 20 that photographs the counting device 100 through the communication unit 220 (S10).

프로세서(250)는 카메라(20)로부터 실시간으로 영상을 수신하거나, 일정 주기로 영상을 수신할 수 있다. The processor 250 may receive images from the camera 20 in real time or may receive images at regular intervals.

본 발명의 일 실시예에 따르면, 프로세서(250)는 영상 내 표시되는 벌에 대응하는 객체의 라벨링 정보에 따라 벌의 이동을 인식하도록 학습된 모델에 기초하여 벌의 이동을 식별한다(S20).According to one embodiment of the present invention, the processor 250 identifies the movement of the bee based on a model learned to recognize the movement of the bee according to the labeling information of the object corresponding to the bee displayed in the image (S20).

이때, 프로세서(250)가 모델을 학습하거나, 기 학습되어 생성된 모델을 외부로부터 수신 및 저장하여 이용할 수 있으며, 어느 하나에 한정된 것은 아니다. At this time, the processor 250 can learn the model or receive and store a previously learned model from the outside and use it, but is not limited to either one.

프로세서(250)가 모델을 학습하는 경우의 동작에 관하여 구체적으로 살펴보면, 프로세서(250)는 벌을 인식하기 위해 영상 내 표시되는 벌에 대응하는 객체에 라벨링을 하고, 라벨링 정보를 이용할 수 있다. 본 발명의 일 실시예에 따른 라벨링 정보는 객체를 라벨링한 박스에 대한 정보, 그 박스를 구성하는 좌표 정보 등을 포함할 수 있다. Looking specifically at the operation when the processor 250 learns a model, the processor 250 may label an object corresponding to a bee displayed in an image and use the labeling information to recognize the bee. Labeling information according to an embodiment of the present invention may include information about the box labeling the object, coordinate information constituting the box, etc.

프로세서(250)는 벌 한 마리를 인식하는 기준을 정하여 라벨링을 수행할 수 있다. 라벨링에 대한 구체적인 내용은 도 6을 참조하여 설명한다.The processor 250 may perform labeling by setting standards for recognizing one bee. Specific details about labeling will be described with reference to FIG. 6.

프로세서(250)는 벌에 대응하는 객체를 라벨링을 통해 반복 학습시킴으로써 가중치를 부여할 수 있다. 벌에 대응하는 객체를 인식하는 알고리즘으로서, 영상을 동일한 크기의 박스로 나누고, 각 박스의 중앙을 중심으로 한 경계 박스의 개수를 예측하고 이를 기반으로 신뢰도를 계산한다. 계산 결과에 따라 높은 객체 신뢰도를 가진 위치를 선택해 객체를 인식하는데, 인식한 결과는 도 7의 박스(720)와 같이 표시될 수 있다. The processor 250 can assign weights by repeatedly learning objects corresponding to bees through labeling. As an algorithm for recognizing objects corresponding to bees, the image is divided into boxes of the same size, the number of bounding boxes centered on the center of each box is predicted, and reliability is calculated based on this. According to the calculation results, a location with high object reliability is selected to recognize the object, and the recognition result can be displayed as box 720 in FIG. 7.

본 발명의 일 실시예에 따른 프로세서(250)는 벌에 대응하는 객체를 인식한 후, 인식한 객체를 추적함으로써 벌의 이동을 식별할 수 있다. 이때, 객체의 라벨링 시 형성되는 박스에 대응하는 좌표값이 변수로 존재하는 점에 기초하여, 좌표 정보를 이용하여 객체를 추적할 수 있다. 일 예로, 객체를 라벨링한 박스를 구성하는 복수의 좌표 정보 중 박스의 정중앙 지점에 대응하는 좌표 정보를 추적함으로써 객체를 추적할 수 있다. The processor 250 according to an embodiment of the present invention can recognize the object corresponding to the bee and then identify the bee's movement by tracking the recognized object. At this time, based on the fact that the coordinate value corresponding to the box formed when labeling the object exists as a variable, the object can be tracked using the coordinate information. As an example, an object can be tracked by tracking coordinate information corresponding to the exact center point of the box among a plurality of coordinate information constituting a box labeling the object.

본 발명의 일 실시예에 따르면, 프로세서(250)는 벌의 이동이 제1통로(121) 또는 제2통로(122)를 통과하는 것에 기초하여 벌통의 벌 수를 계수한다(S30).According to one embodiment of the present invention, the processor 250 counts the number of bees in the hive based on the movement of the bees passing through the first passage 121 or the second passage 122 (S30).

본 발명의 일 실시예에 따른 프로세서(250)는 박스의 정중앙 지점을 추적하여 정중앙 지점에 대응하는 좌표가 일정 좌표를 지날 경우, 벌이 통로를 통과한 것으로 확인할 수 있다. 이에 대한 구체적인 내용은 도 7과 관련하여 서술한다. The processor 250 according to an embodiment of the present invention can track the center point of the box and confirm that the bee has passed through the passage when the coordinates corresponding to the center point pass a certain coordinate. Specific details about this are described in relation to FIG. 7.

프로세서(250)는 벌이 제1통로(121)를 통과하는 경우, 전체 벌 수에서 하나를 빼고, 벌이 제2통로(122)를 통과하는 경우, 전체 벌 수에서 하나를 더하여 계수할 수 있다. 혹은 프로세서(250)는 들어오는 벌과 나가는 벌의 수의 차이를 통해 개체수의 증감 여부를 확인할 수 있다. The processor 250 may count the bees by subtracting one from the total number of bees when the bees pass through the first passage 121, and adding one to the total number of bees when the bees pass through the second passage 122. Alternatively, the processor 250 can check whether the population is increasing or decreasing through the difference between the number of incoming and outgoing bees.

추가로, 시스템(1)은 전자장치(200)와 통신하는 클라이언트 장치를 더 포함할 수 있다. 프로세서(250)는 객체를 추적하여 하루마다 드나드는 벌의 수를 계수하고, 계수한 벌의 수가 기 정의된 값 이하인 경우 혹은 기 정의된 값 이상으로 개체 수가 감소한 경우 통신부(220)를 통해 클라이언트 장치로 알림을 전송할 수 있다. 이때, 클라이언트 장치는 벌통의 소유주의 휴대폰, 컴퓨터 등을 포함한다. 또 다른 실시예로, 프로세서(250)는 표시부(130)에 알림을 표시할 수 있다. Additionally, system 1 may further include a client device that communicates with electronic device 200 . The processor 250 tracks the object and counts the number of bees coming and going every day, and when the number of bees counted is less than a predefined value or the number of objects decreases beyond the predefined value, the client device through the communication unit 220 You can send notifications to . At this time, the client device includes the bee hive owner's mobile phone, computer, etc. In another embodiment, the processor 250 may display a notification on the display unit 130.

본 발명의 일 실시예에 따르면, 객체를 인식하고 인식한 객체를 추적함으로써 보다 정확하게 벌의 수를 계수할 수 있다.According to one embodiment of the present invention, the number of bees can be counted more accurately by recognizing objects and tracking the recognized objects.

또한, 벌통의 소유주에게 인지시켜줌으로써 이상기후와 천적에 신속한 대처를 가능하게 하여 다양한 환경에서 꿀벌 개체 수의 감소를 막을 수 있으며 더 나은 꿀벌 양봉을 할 수 있도록 도움을 줄 수 있다.In addition, by making the owner of the hive aware, it is possible to quickly respond to abnormal weather conditions and natural enemies, preventing the decline of the bee population in various environments and helping to achieve better beekeeping.

도 6은 본 발명의 일 실시예에 따른 객체의 라벨링 모습을 도시한 도면이다.Figure 6 is a diagram showing labeling of an object according to an embodiment of the present invention.

도 6은 카메라(20)에 의해 촬영된 4개의 영상(610, 620, 630, 640)을 라벨링한 모습을 도시하고 있다. FIG. 6 shows labeling of four images 610, 620, 630, and 640 captured by the camera 20.

본 발명의 일 실시예에 따르면, 도 3의 S20과 관련하여 서술한 바와 같이, 프로세서(250)는 벌에 대응하는 객체를 인식하기 위해 영상 내 표시되는 벌에 라벨링을 할 수 있다.According to one embodiment of the present invention, as described in relation to S20 of FIG. 3, the processor 250 may label a bee displayed in an image to recognize an object corresponding to the bee.

프로세서(250)는 벌 한 마리를 인식하는 기준을 정하여 라벨링을 수행할 수 있다. The processor 250 may perform labeling by setting standards for recognizing one bee.

도 6은 카메라(20)에 의해 촬영된 영상인 제1영상(610), 제2영상(620), 제3영상(630), 제4영상(640)을 도시하고 있다.FIG. 6 shows a first image 610, a second image 620, a third image 630, and a fourth image 640, which are images captured by the camera 20.

제1영상(610)과 같이 벌의 몸이 90% 이상 나온 경우 벌이라고 판단하고 라벨링을 수행한다. 이때, 벌의 몸이 전체 다 나온 경우 더듬이부터 발끝까지 라벨링을 수행한다.As in the first image 610, if more than 90% of the bee's body is visible, it is judged to be a bee and labeling is performed. At this time, when the bee's entire body is exposed, labeling is performed from antennae to toes.

그리고, 제2영상(620)과 같이 벌들이 위아래로 겹쳐서 표시된 경우 위에 위치한 벌을 먼저 라벨링하고, 아래에 위치한 벌을 라벨링한 박스가 겹치지 않게 라벨링한다. Also, when bees are displayed overlapping up and down as in the second image 620, the bees located above are labeled first, and the boxes labeling the bees located below are labeled so that they do not overlap.

이때, 제3영상(630)과 같이 벌의 몸이 90% 미만으로 나온 경우 벌이 화면에서 나갔다고 판단하고　라벨링하지 않는다. 제4영상(640)과 같이 벌들이 옆으로 겹쳐서 표시된 경우, 라벨링한 박스가 50% 이상 겹치지 않는 선에서 라벨링을 한다.At this time, if less than 90% of the bee's body appears as in the third image 630, it is determined that the bee has left the screen and no labeling is performed. When the bees are displayed sideways overlapping as in the fourth image 640, labeling is done in a line where the labeled boxes do not overlap by more than 50%.

본 발명의 일 실시예에 따르면, 라벨링을 수행하는 기준을 마련하여 동작함으로써 보다 더 정확하고 정교하게 벌을 인식할 수 있다. According to one embodiment of the present invention, it is possible to recognize bees more accurately and precisely by establishing and operating a standard for performing labeling.

도 7은 본 발명의 일 실시예에 따른 전자장치의 동작 모습을 도시한 도면이다.Figure 7 is a diagram showing the operation of an electronic device according to an embodiment of the present invention.

프로세서(250)는 카메라(20)로부터 수신한 영상을 통해 벌의 출입을 확인한다. 프로세서(250)는 벌의 출입을 판별하기 위해 기준선(710)을 설정할 수 있다. 기준선(710)은 도 7에 도시된 바와 같이 계수통(110)의 가로축의 중앙 지점을 가로지르도록 설정될 수 있다. 혹은 제1통로(121) 및 제2통로(122)의 가로축의 중앙 지점을 가로지르도록 설정될 수 있다. 다만 이에 한정되지 않고, 제1통로(121)의 외부 측 판막 구조의 설치 지점 또는 제2통로(122)의 벌통(10) 측 판막 구조의 설치 지점을 가로지르도록 설정될 수 있다. 이 경우, 제1통로(121)의 기준선과 제2통로(122)의 기준선은 서로 상이할 수 있다.The processor 250 confirms the entry and exit of the bee through the image received from the camera 20. The processor 250 may set a baseline 710 to determine the entry and exit of bees. The reference line 710 may be set to cross the central point of the horizontal axis of the counting bin 110, as shown in FIG. 7. Alternatively, it may be set to cross the central point of the horizontal axis of the first passage 121 and the second passage 122. However, it is not limited to this, and may be set to cross the installation point of the valve structure on the outer side of the first passage 121 or the installation point of the valve structure on the hive 10 side of the second passage 122. In this case, the baseline of the first passage 121 and the baseline of the second passage 122 may be different from each other.

본 발명의 일 실시예에 따르면, 프로세서(250)는 벌의 이동이 제1통로(121) 또는 제2통로(122)의 기준선(710)을 통과하는 것에 기초하여 벌통(10)의 벌 수를 계수할 수 있다. According to one embodiment of the present invention, the processor 250 determines the number of bees in the hive 10 based on the movement of the bees passing the reference line 710 of the first passage 121 or the second passage 122. It can be counted.

본 발명의 일 실시예에 따르면, 벌이 기준선(710)을 통과하는지, 즉 출입을 하는 것으로 계수할지는 벌에 대응하는 것으로 인식된 객체를 기준으로 판단한다. 프로세서(250)는 벌에 대응하는 객체를 인식하고, 인식된 객체를 박스(720)를 통해 표시할 수 있다. According to one embodiment of the present invention, whether a bee passes the reference line 710, that is, is counted as entering or leaving, is determined based on the object recognized as corresponding to the bee. The processor 250 may recognize an object corresponding to the bee and display the recognized object through the box 720.

프로세서(250)는 객체를 라벨링한 박스(720)에 대한 정보 및 박스(720)를 구성하는 좌표 정보를 포함하는 라벨링 정보를 식별할 수 있다. 그리고, 프로세서(250)는 식별된 좌표 정보에 기초하여 벌의 이동을 식별할 수 있다. The processor 250 may identify labeling information including information about the box 720 labeling the object and coordinate information constituting the box 720. Additionally, the processor 250 may identify the bee's movement based on the identified coordinate information.

보다 구체적으로, 프로세서(250)는 박스(720)를 추적하여 벌의 이동을 식별하는데 프로세서(250)는 박스(720)를 구성하는 복수의 좌표 정보 중 박스(720)의 정중앙 지점(730)에 대응하는 제1좌표에 기초하여 벌의 이동을 식별할 수 있다. 본 발명에서 제1좌표는 벌의 이동에 따라 지속적으로 변화하는 좌표이다.More specifically, the processor 250 identifies the movement of the bee by tracking the box 720. The processor 250 determines the exact center point 730 of the box 720 among a plurality of coordinate information constituting the box 720. The movement of the bee can be identified based on the corresponding first coordinates. In the present invention, the first coordinate is a coordinate that continuously changes as the bee moves.

프로세서(250)는, 박스(720)의 정중앙 지점(730)에 대응하는 제1좌표가 일정 좌표를 지날 경우, 벌이 제1통로(121) 또는 제2통로(122)를 통과한 것으로 확인할 수 있다. The processor 250 may confirm that the bee has passed through the first passage 121 or the second passage 122 when the first coordinate corresponding to the exact center point 730 of the box 720 passes a certain coordinate. .

이때, 일정 좌표는 상기 설정된 기준선(710)의 x축 좌표를 의미하고, 프로세서(250)는 정중앙 지점(730)에 대응하는 제1좌표의 x축 좌표와 기준선(710)의 x축 좌표를 비교하여 벌의 통과 여부를 판단한다. At this time, the constant coordinate means the x-axis coordinate of the set reference line 710, and the processor 250 compares the x-axis coordinate of the first coordinate corresponding to the exact center point 730 with the x-axis coordinate of the reference line 710. This determines whether the punishment has passed.

또한, 제1통로(121)와 제2통로(122)는 통과를 판단하는 방향이 서로 다르므로 박스(720)의 정중앙 지점(730)의 x축 좌표가 기준선(710)의 x축 좌표보다 작았다가 커지는 경우 벌이 제1통로(121)를 통과한 것으로 본다. 즉, 벌이 외부로 나간 것으로 판별한다. 반대로, 박스(720)의 정중앙 지점(730)의 x축 좌표가 기준선(710)의 x축 좌표보다 컸다가 작아지는 경우 벌이 제2통로(122)를 통과한 것으로 본다. 즉, 벌이 벌통(10)으로 들어온 것으로 판별한다.In addition, since the first passage 121 and the second passage 122 have different directions for determining passage, the x-axis coordinate of the exact center point 730 of the box 720 is smaller than the x-axis coordinate of the reference line 710. If the bee grows larger, it is considered that the bee has passed through the first passage (121). In other words, it is determined that the bee has gone outside. Conversely, when the x-axis coordinate of the exact center point 730 of the box 720 becomes larger than and then becomes smaller than the x-axis coordinate of the reference line 710, the bee is considered to have passed through the second passage 122. In other words, it is determined that the bees have entered the beehive 10.

프로세서(250)는 벌을 포함하는 박스(720)의 정중앙 지점(730)의 좌표가 제1통로(121)의 기준선(710)을 통과하는 경우, 전체 벌 수에서 하나를 빼고, 벌이 제2통로(122)의 기준선(710)을 통과하는 경우, 전체 벌 수에서 하나를 더하여 계수할 수 있다. 혹은 프로세서(250)는 제1통로(121)를 통과하는 벌과 제2통로(122)를 통과하는 벌의 수의 차이를 통해 개체수의 감소 여부를 확인할 수 있다. If the coordinates of the exact center point 730 of the box 720 containing the bee pass through the reference line 710 of the first passage 121, the processor 250 subtracts one from the total number of bees, and determines whether the bee moves to the second passage 121. If it passes the baseline 710 of (122), it can be counted by adding one to the total number of bees. Alternatively, the processor 250 can check whether the population is decreasing through the difference between the number of bees passing through the first passage 121 and the number of bees passing through the second passage 122.

본 발명의 일 실시예에 따르면, 벌의 출입 여부를 일정 기준에 기초하여 판단하므로 보다 정확하게 계수할 수 있다.According to one embodiment of the present invention, the entry or exit of bees is determined based on a certain standard, so it is possible to count them more accurately.

1: 계수 시스템
10: 벌통
20: 카메라
100: 계수장치
200: 전자장치
210: 입력부
220: 통신부
230: 표시부
240: 메모리
250: 프로세서1: Counting system
10: Beehive
20: Camera
100: counting device
200: Electronic device
210: input unit
220: Department of Communications
230: display unit
240: memory
250: processor

Claims

In the bee counting system using a valve structure,
A first passage including a hive at both ends of which are connected to the hive and the outside, respectively, and a valve structure formed in the hive to allow bees to move only in a direction from the hive to the outside, and a first passage through which bees enter the hive from the outside. A counting device having a second passage including a valve structure formed to move only in a facing direction; and
Ministry of Communications;
Receiving an image from a camera that photographs the counting device through the communication unit,
Identify labeling information including information about a box labeling an object corresponding to a bee displayed in the image and coordinate information constituting the box,
Identifying the movement of the bee based on a model learned to recognize the movement of the bee based on the coordinate information,
A counting system including a processor that counts the number of bees in the hive based on the movement of the bees passing through the first passage or the second passage.

According to paragraph 1,
A counting system, wherein the first passage and the second passage are formed to have a width that allows one bee to move.

According to paragraph 1,
A counting system, characterized in that the valve structure is made of polypropylene.

delete

According to paragraph 1,
The processor,
A counting system that identifies the movement of the bee based on a first coordinate corresponding to the exact center point of the box among a plurality of coordinate information constituting the box.

According to clause 5,
The processor,
A counting system that counts the number of bees in the hive by comparing the x-axis coordinate of the first coordinate with the x-axis coordinate of a reference line provided to identify the movement of the bees.

According to paragraph 1,
Further comprising a client device that communicates with the electronic device,
The processor,
If the counted number of bees is less than or equal to a predefined value, or if the difference between the number of bees that passed through the first passage and the number of bees that passed through the second passage is more than a predefined value, notification is sent to the client device through the communication unit. A counting system that transmits .

delete