KR20200077808A - 영상기반 감시 장치 및 그 동작방법 - Google Patents
영상기반 감시 장치 및 그 동작방법 Download PDFInfo
- Publication number
- KR20200077808A KR20200077808A KR1020180167048A KR20180167048A KR20200077808A KR 20200077808 A KR20200077808 A KR 20200077808A KR 1020180167048 A KR1020180167048 A KR 1020180167048A KR 20180167048 A KR20180167048 A KR 20180167048A KR 20200077808 A KR20200077808 A KR 20200077808A
- Authority
- KR
- South Korea
- Prior art keywords
- specific
- information
- module
- farmland
- pest
- Prior art date
Links
- 238000012544 monitoring process Methods 0.000 title claims description 31
- 238000000034 method Methods 0.000 title claims description 17
- 241000607479 Yersinia pestis Species 0.000 claims abstract description 80
- 238000012806 monitoring device Methods 0.000 claims abstract description 29
- 238000009313 farming Methods 0.000 claims description 33
- 239000002689 soil Substances 0.000 claims description 26
- 230000007613 environmental effect Effects 0.000 claims description 14
- 238000004891 communication Methods 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 7
- 230000005611 electricity Effects 0.000 claims 2
- 241000238631 Hexapoda Species 0.000 abstract 2
- 201000010099 disease Diseases 0.000 abstract 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 abstract 2
- 238000010586 diagram Methods 0.000 description 13
- 238000007726 management method Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000003306 harvesting Methods 0.000 description 3
- 239000000575 pesticide Substances 0.000 description 3
- 238000009331 sowing Methods 0.000 description 3
- 230000003595 spectral effect Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000000630 rising effect Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 238000003898 horticulture Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G06K9/4652—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/02—Agriculture; Fishing; Forestry; Mining
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/188—Vegetation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/194—Terrestrial scenes using hyperspectral data, i.e. more or other wavelengths than RGB
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/14—Central alarm receiver or annunciator arrangements
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02S—GENERATION OF ELECTRIC POWER BY CONVERSION OF INFRARED RADIATION, VISIBLE LIGHT OR ULTRAVIOLET LIGHT, e.g. USING PHOTOVOLTAIC [PV] MODULES
- H02S20/00—Supporting structures for PV modules
- H02S20/30—Supporting structures being movable or adjustable, e.g. for angle adjustment
- H02S20/32—Supporting structures being movable or adjustable, e.g. for angle adjustment specially adapted for solar tracking
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02S—GENERATION OF ELECTRIC POWER BY CONVERSION OF INFRARED RADIATION, VISIBLE LIGHT OR ULTRAVIOLET LIGHT, e.g. USING PHOTOVOLTAIC [PV] MODULES
- H02S50/00—Monitoring or testing of PV systems, e.g. load balancing or fault identification
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H04N9/04—
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02E—REDUCTION OF GREENHOUSE GAS [GHG] EMISSIONS, RELATED TO ENERGY GENERATION, TRANSMISSION OR DISTRIBUTION
- Y02E10/00—Energy generation through renewable energy sources
- Y02E10/50—Photovoltaic [PV] energy
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Tourism & Hospitality (AREA)
- Animal Husbandry (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- General Business, Economics & Management (AREA)
- Mining & Mineral Resources (AREA)
- Marine Sciences & Fisheries (AREA)
- Marketing (AREA)
- Agronomy & Crop Science (AREA)
- Emergency Management (AREA)
- Remote Sensing (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Human Computer Interaction (AREA)
- Sustainable Development (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Closed-Circuit Television Systems (AREA)
- Catching Or Destruction (AREA)
Abstract
본 발명은, RGB 영상 및 초분광 영상을 촬영하는 카메라 모듈, 작물을 재배하는 복수의 농경지 중 특정 농경지에 대한 선택 명령을 입력하는 입력 모듈 및 상기 선택 명령이 입력되면 상기 카메라 모듈을 제어하여 상기 특정 농경지의 특정 RGB 영상 및 특정 초분광 영상을 입력받고, 상기 특정 RGB 영상 및 상기 특정 초분광 영상을 기반으로 상기 특정 농경지의 농작업 정보 및 상기 작물의 병해충 정보를 생성하는 제어 모듈을 포함하는 영상기반 감시 장치를 제공한다.
Description
본 발명은 영상기반 감시 장치 및 그 동작방법에 관한 것으로서, 더욱 상세하게는 영상을 기반으로 농경지에 대한 농작업 정보, 작물의 병해충 정보 및 재배 상태 정보를 생성하기 용이한 영상기반 감시 장치 및 그 동작방법에 관한 것이다.
기존 노지재배에 사용되는 스마트팜 기술은 외기 환경정보(온도, 습도, 일사량, 풍향, 풍속, 날씨정보, 토양센서, RGB영상) 기반의 모니터링을 통한 농작물 상태를 모니터링하고 있어. 노지재배의 경우 시기별 환경정보와 농민의 경험에 기반한 농작물 재배가 이루어지고 있으며, 농민들이 농작업을 수기로 기록하지 않으면, 관리가 잘 되지 않는 문제가 발생한다.
대부분의 농민들은 자체 농작업 기록 관리를 소홀히 하고 있는게 현실이다.
스마트 팜(시설원예)에 있어서 온실 통합 관리 및 모니터링(센서 데이터 저장)은 시스템이 자동으로 관리하고 있으나, 노지재배의 경우 이를 자동 기록 해주는 시스템은 현재 전무한 수준이다.
최근들어, 노지재배에서 재배되는 작물의 병해충 상태, 농작업을 자동으로 인식하고 저장할 수 있는 기술이 요구된다. 기록 관리하는 시스템 기술이 필요하다.
본 발명의 목적은, 영상을 기반으로 농경지에 대한 농작업 정보, 작물의 병해충 정보 및 재배 상태 정보를 생성하기 용이한 영상기반 감시 장치 및 그 동작방법을 제공함에 있다.
또한, 본 발명의 목적은, 영상 촬영시 태양광에 의한 손실을 저감하기 용이한 영상기반 감시 장치 및 그 동작방법을 제공함에 있다.
또한, 본 발명의 목적은, 외부의 데이터베이스 서버로부터 복수의 작물에 대한 재배 상태 정보를 기계학습하여, 감시 중인 작물의 재새 상태 정보를 생성하기 용이한 영상기반 감시 장치 및 그 동작방법을 제공함에 있다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있고, 본 발명의 실시예에 의해 보다 분명하게 이해될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
본 발명의 제1 실시 예에 따른 영상기반 감시 장치는, RGB 영상 및 초분광 영상을 촬영하는 카메라 모듈, 작물을 재배하는 복수의 농경지 중 특정 농경지에 대한 선택 명령을 입력하는 입력 모듈 및 상기 선택 명령이 입력되면 상기 카메라 모듈을 제어하여 상기 특정 농경지의 특정 RGB 영상 및 특정 초분광 영상을 입력받고, 상기 특정 RGB 영상 및 상기 특정 초분광 영상을 기반으로 상기 특정 농경지의 농작업 정보 및 상기 작물의 병해충 정보를 생성하는 제어 모듈을 포함할 수 있다.
상기 카메라 모듈은, 상기 특정 RGB 영상을 촬영하는 RGB 카메라 및 상기 특정 초분광 영상을 촬영하는 초분광 카메라를 포함할 수 있다.
상기 입력 모듈은, 상기 복수의 농경지 각각에 대하여 설정된 감시 주기에 따라 상기 특정 농경지에 대한 상기 선택 명령을 입력할 수 있다.
상기 제어 모듈은, 상기 특정 RGB 영상을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 상기 농작업 정보를 생성하는 RGB 영상 인식부, 상기 특정 초분광 영상을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생된 병해충을 인식하고, 상기 병해충에 대한 상기 병해충 정보를 생성하는 초분광 영상 인식부 및 상기 선택 명령에 따라 상기 특정 농경지가 촬영되게 상기 카메라 모듈을 제어하며, 상기 농작업 정보 및 상기 병해충 정보를 저장하는 제어부를 포함할 수 있다.
본 발명의 제2 실시 예에 따른 영상기반 감시 장치는, 태양광으로 전력을 생산하는 태양광 패널, 상기 태양광 패널을 회전시키는 회전 모듈, RGB 영상 및 초분광 영상을 촬영하는 카메라 모듈, 작물을 재배하는 복수의 농경지 중 특정 농경지에 대한 선택 명령을 입력하는 입력 모듈 및 상기 태양광을 방출하는 태양의 위치에 따라 상기 태양광 패널의 그림자가 상기 카메라 모듈에 생성되게 상기 회전 모듈을 제어하고, 상기 선택 명령이 입력되면 상기 카메라 모듈을 제어하여 상기 특정 농경지의 특정 RGB 영상 및 특정 초분광 영상을 입력받고, 상기 특정 RGB 영상 및 상기 특정 초분광 영상을 기반으로 상기 특정 농경지의 농작업 정보 및 상기 작물의 병해충 정보를 생성하는 제어 모듈을 포함할 수 있다.
상기 제어 모듈은, 상기 태양의 위치를 판단하는 위치 판단부, 상기 태양의 위치에 따라 상기 회전 모듈의 회전량을 결정하는 회전 결정부, 상기 특정 RGB 영상을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 상기 농작업 정보를 생성하는 RGB 영상 인식부, 상기 특정 초분광 영상을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생된 병해충을 인식하고, 상기 병해충에 대한 상기 병해충 정보를 생성하는 초분광 영상 인식부 및 상기 회전량에 대응하여 상기 회전 모듈이 회전되게 제어하고, 상기 선택 명령에 따라 상기 특정 농경지가 촬영되게 상기 카메라 모듈을 제어하며, 상기 농작업 정보 및 상기 병해충 정보를 저장하는 제어부를 포함할 수 있다.
상기 위치 판단부는, 상기 태양광 패널의 현재 위치, 시간 및 날짜를 기반으로 상기 태앙의 위치를 판단할 수 있다.
본 발명의 제3 실시 예에 따른 영상기반 감시 장치는, 태양광으로 전력을 생산하는 태양광 패널, 상기 태양광 패널을 회전시키는 회전 모듈, RGB 영상 및 초분광 영상을 촬영하는 카메라 모듈, 작물을 재배하는 복수의 농경지 중 특정 농경지에 대한 선택 명령을 입력하는 입력 모듈, 상기 복수의 농경지 각각에 설치되어 해당 농경지의 토양온도 및 토양습도를 측정하는 제1 센서부 및 상기 복수의 농경지에 대한 외부온도 및 외부습도를 측정하는 제2 센서부를 포함하는 센서모듈 및 상기 태양광을 방출하는 태양의 위치에 따라 상기 태양광 패널의 그림자가 상기 카메라 모듈에 생성되게 상기 회전 모듈을 제어하고, 상기 선택 명령이 입력되면 상기 카메라 모듈을 제어하여 상기 특정 농경지의 특정 RGB 영상 및 특정 초분광 영상을 입력받고, 상기 특정 RGB 영상 및 상기 특정 초분광 영상을 기반으로 상기 특정 농경지의 농작업 정보 및 상기 작물의 병해충 정보와, 상기 센서모듈에서 측정된 상기 토양온도, 상기 토양습도, 상기 외부온도 및 상기 외부습도를 포함하는 환경 정보를 생성하고, 상기 농작업 정보, 상기 병해충 정보 및 상기 환경 정보에 따라 상기 작물에 대한 재배 상태 정보를 생성하는 제어 모듈을 포함할 수 있다.
또한, 본 발명의 제3 실시 예에 따른 영상기반 감시 장치는, 상기 센서모듈과 통신을 수행하여 상기 토양온도, 상기 토양습도, 상기 외부온도 및 상기 외부습도를 수신하여, 상기 제어 모듈로 전달하는 통신모듈을 더 포함할 수 있다.
상기 제어 모듈은, 상기 태양의 위치를 판단하는 위치 판단부, 상기 태양의 위치에 따라 상기 회전 모듈의 회전량을 결정하는 회전 결정부, 상기 특정 RGB 영상을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 상기 농작업 정보를 생성하는 RGB 영상 인식부, 상기 특정 초분광 영상을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생된 병해충을 인식하고, 상기 병해충에 대한 상기 병해충 정보를 생성하는 초분광 영상 인식부 및 상기 회전량에 대응하여 상기 회전 모듈이 회전되게 제어하고, 상기 선택 명령에 따라 상기 특정 농경지가 촬영되게 상기 카메라 모듈을 제어하며, 상기 센서모듈에서 측정한 상기 토양온도, 상기 토양습도, 상기 외부온도 및 상기 외부습도를 포함하여 생성한 상기 환경정보, 상기 농작업 정보 및 상기 변해충 정보를 기반으로 상기 작물에 대한 상기 재배 상태 정보를 생성 및 저장하는 제어부를 포함할 수 있다.
본 발명에 따른 영상기반 감시 장치의 동작방법은, 복수의 농경지 중 특정 농경지를 선택한 선택 명령이 입력되면 카메라 모듈을 동작시키는 단계, 상기 카메라 모듈에서 촬영한 특정 RBG 영상 및 특정 초분광 영상을 전달받는 단계 및 상기 특정 RGB 영상 및 상기 특정 초분광 영상을 기반으로 상기 특정 농경지의 농작업 정보 및 상기 특정 농경지에서 재배되는 작물의 병해충 정보를 생성 및 저장하는 단계를 포함할 수 있다.
상기 농작업 정보 및 상기 병해충 정보를 생성 및 저장하는 단계는, 상기 특정 RGB 영상을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 상기 농작업 정보를 생성하는 단계, 상기 특정 초분광 영상을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생된 병해충을 인식하고, 상기 병해충에 대한 상기 병해충 정보를 생성하는 단계 및 상기 농작업 정보 및 상기 병해충 정보를 저장하는 단계를 포함할 수 있다.
본 발명에 따른 영상기반 감시 장치 및 그 동작방법은, 농경지에 대한 RGB 영상 및 초분광 영상을 기반으로 농경지를 감시할 수 있으며, 자동적으로 농경지의 농작업 정보 및 작물의 병충해 정보를 생성 및 저장할 수 있음으로써, 사용자의 편의성을 증대시킬 수 있는 이점이 있다.
또한, 본 발명에 따른 영상기반 감시 장치 및 그 동작방법은, 태양광을 방출하는 태양의 위치에 따라 태양광 패널을 이동시켜 영상을 촬영하는 카메라 모듈에 그림자를 생성시켜, 태양광에 의해 카메라 모듈에서 촬영되는 RGB 영상 및 초분광 영상의 손실을 방지하고, 영상의 화질을 개선할 수 있는 이점이 있다.
또한, 본 발명에 따른 영상기반 감시 장치 및 그 동작방법은, 복수의 농경지 각각에서 측정한 토양온도, 토양습도, 외부온도 및 외부습도를 기반으로 생성한 환경 정보, 농작업 정보 및 병충해 정보를 기반으로 자동적으로 작물의 재배 상태 정보를 생성할 수 있는 이점이 있다.
상술한 효과와 더불어 본 발명의 구체적인 효과는 이하 발명을 실시하기 위한 구체적인 사항을 설명하면서 함께 기술한다.
도 1은 본 발명의 제1 실시 예에 따른 영상기반 감시 장치를 나타낸 구조도이다.
도 2는 도 1에 나타낸 영상기반 감시 장치의 제어 구성을 나타낸 제어 블록도이다.
도 3은 도 1에 나타낸 영상기반 감시 장치의 동작방법을 나타낸 순서도이다.
도 4는 본 발명의 제2 실시 예에 따른 영상기반 감시 장치를 나타낸 구조도이다.
도 5는 도 4에 나타낸 영상기반 감시 장치의 제어 구성을 나타낸 제어 블록도이다.
도 6 및 도 7은 도 4에 나타낸 영상기반 감시 장치에 포함된 회전 모듈의 동작을 나타낸 예시도이다.
도 8은 본 발명의 제3 실시 예에 따른 영상기반 감시 장치를 나타낸 구조도이다.
도 9은 도 8에 나타낸 영상기반 감시 장치의 제어 구성을 나타낸 제어 블록도이다.
도 9는 본 발명에 따른 영상기반 감시 시스템을 나타낸 시스템 블록도이다.
도 2는 도 1에 나타낸 영상기반 감시 장치의 제어 구성을 나타낸 제어 블록도이다.
도 3은 도 1에 나타낸 영상기반 감시 장치의 동작방법을 나타낸 순서도이다.
도 4는 본 발명의 제2 실시 예에 따른 영상기반 감시 장치를 나타낸 구조도이다.
도 5는 도 4에 나타낸 영상기반 감시 장치의 제어 구성을 나타낸 제어 블록도이다.
도 6 및 도 7은 도 4에 나타낸 영상기반 감시 장치에 포함된 회전 모듈의 동작을 나타낸 예시도이다.
도 8은 본 발명의 제3 실시 예에 따른 영상기반 감시 장치를 나타낸 구조도이다.
도 9은 도 8에 나타낸 영상기반 감시 장치의 제어 구성을 나타낸 제어 블록도이다.
도 9는 본 발명에 따른 영상기반 감시 시스템을 나타낸 시스템 블록도이다.
하기의 설명에서는 본 발명의 실시예를 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.
이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념으로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 바람직한 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 보다 상세하게 설명하고자 한다.
도 1은 본 발명의 제1 실시 예에 따른 영상기반 감시 장치를 나타낸 구조도, 및 도 2는 도 1에 나타낸 영상기반 감시 장치의 제어 구성을 나타낸 제어 블록도이다.
도 1 및 도 2를 참조하면, 영상기반 감시 장치(100)는 구조물 기둥(10), 입력 모듈(110), 카메라 모듈(120) 및 제어 모듈(130)를 포함할 수 있다.
구조물 기둥(10)은 입력 모듈(110), 카메라 모듈(120) 및 제어 모듈(130)이 설치될 수 있다.
여기서, 구조물 기둥(10)은 카메라 모듈(120)의 유지 보수를 위해, 카메라 모듈(120)이 설치된 영역이 상하로 이동될 수 있으며, 이에 한정을 두지 않는다.
예를 들어, 카메라 모듈(120)의 유지 보수를 위해 관리자 또는 작업자에 의해, 입력 모듈(110)은 구조물 기둥(10)에 대한 하강 명령이 입력되면, 제어 모듈(130)로 전달할 수 있다.
이때, 제어 모듈(130)은 하강 명령이 입력되면, 구조물 기둥(10)을 하강시키는 모터 등을 제어하여, 카메라 모듈(120)이 하강되게 제어할 수 있다.
이후, 입력 모듈(120)은 관리자 또는 작업자에 의해 구조물 기둥(10)에 대한 상승 명령이 입력되면, 제어 모듈(130)로 전달할 있다.
제어 모듈(130)은 상승 명령 입력 시, 구조물 기둥(10)이 상승되게 모터 등을 제어할 수 있다.
입력 모듈(110)은 구조물 기둥(10)에 대한 상승 명령, 하강 명령 및 작물을 재배하는 복수의 농경지 중 감시를 위한 특정 농경지를 선택하는 선택 명령(S_input)을 입력할 수 있다.
실시 예에서, 입력 모듈(110)은 선택 명령(S_input)을 입력하는 것으로 설명하며, 입력 모듈(110)은 복수의 농경지 각각을 감시하기 위해 설정된 감시 주기로 선택 명령(S_input)을 입력할 수 있다.
카메라 모듈(120)은 RGB 카메라(122) 및 초분광 카메라(124)를 포함할 수 있다. 실시 예에서, RGB 카메라(122) 및 초분광 카메라(124)은 각각 하나로 설명하지만, 그 개수에 대하여 한정을 두지 않는다.
RGB 카메라(122)는 제어 모듈(130)의 제어에 따라, 상기 특정 농경지에 대한 특정 RGB 영상(S_RGB)을 촬영하여 제어 모듈(130)로 전달할 수 있다.
초분광 카메라(124)는 RGB 카메라(122)와 동일하게 제어 모듈(130)의 제어에 따라, 상기 특정 농경지에 대한 특정 초분광 영상(hyperspectral image, S_HP)을 촬영하여 제어 모듈(130)로 전달할 수 있다.
초분광 카메라(124)는 가시광선 영역에서의 파장대역을 수백개의 파장정보로 세분화한 특정 초분광 영상(S_HP)을 출력하며, 특정 초분광 영상(S_HP)는 특정 RGB 영상(S_RGB) 보다 세분화된 영상일 수 있다.
제어 모듈(130)은 RGB 영상 인식부(132), 초분광 영상 인식부(134) 및 제어부(136)를 포함할 수 있다.
RGB 영상 인식부(132)는 특정 RGB 영상(S_RBG)을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 농작업 정보(SF1)를 생성할 수 있다.
여기서, 농작업 정보(SF1)는 상기 특정 농경지를 관리하며 작물을 재배하는 농민 또는 관리자가 행하는 일련의 동작에 대한 정보를 나타낸다.
예를 들어, 농작업 정보(SF1)는 상기 특정 농경지의 로타리 작업, 파종 작업, 농약 작업, 관리 작업 및 작물 수확 작업 등을 포함할 수 있다.
즉, RGB 영상 인식부(132)는 특정 RGB 영상(S_RBG)에서 상기 특정 농경지에 위치한 객체, 즉 농민 또는 관리자를 인식하고, 상기 객체가 수행하는 객체 형태를 인식할 수 있다.
이후, RGB 영상 인식부(132)는 상기 객체 형태에 대응하는 상기 농작업을 인식하여 농작업 정보(SF1)를 생성할 수 있다.
초분광 영상 인식부(134)는 특정 초분광 영상(S_HP)을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생되는 병해충을 인식하고, 상기 병해충에 대한 병해충 정보(SF2)를 생성할 수 있다.
즉, 초분광 영상 인식부(134)는 특정 초분광 영상(S_HP)을 분광 파장별 영상으로 분리하고, 설정된 파장별 병해충 정보와의 상관 관계를 분석하여 상기 병해충을 인식할 수 있다.
이후, 초분광 영상 인식부(134)는 상기 병해충에 대한 병해충 정보(SF2)를 생성할 수 있다.
제어부(136)는 입력 모듈(110)에서 입력된 선택 명령(S_input)에 따라 복수의 농경지 중 상기 특정 농경지에 대한 특정 RGB 영상(S_RBG) 및 특정 초분광 영상(S_HP)이 촬영되게 카메라 모듈(120)을 제어할 수 있다.
이후, 제어부(136)는 RGB 영상 인식부(132)에서 생성한 농작업 정보(SF1) 및 초분광 영상 인식부(134)에서 생성한 병해충 정보(SF2)를 실시간 또는 설정시간간격으로 상기 특정 농경지에 대한 감시 이력 리스트에 저장할 수 있다.
본 발명의 제1 실시 예에 따른 영상기반 감시 장치(100)는 복수의 농경지 각각에 대하여 실시간 또는 설정 시간 간격으로 RGB 영상 및 초분광 영상을 통하여 농경지 상태를 확인할 수 있는 감시 이력 리스트를 업데이트하여, 농민 또는 관리자가 농경지 상태를 용이하게 확인할 수 있는 이점이 있다.
도 3은 도 1에 나타낸 영상기반 감시 장치의 동작방법을 나타낸 순서도이다.
도 3을 참조하면, 영상기반 감시 장치(100)의 제어 모듈(130)은 입력 모듈(110)로부터 복수의 농경지 중 특정 농경지를 선택한 선택 명령(S_input)이 입력되면 카메라 모듈(120)을 동작시킬 수 있다(S110).
이후, 제어 모듈(130)은 카메라 모듈(120)에서 촬영한 특정 RBG 영상(S_RBG) 및 특정 초분광 영상(S_HP)을 전달받을 수 있다(S120).
제어 모듈(130)은 특정 RGB 영상(S_RBG)을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 농작업 정보(SF1)를 생성할 수 있다(S130).
제어 모듈(130)은 특정 초분광 영상(S_HP)을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생된 병해충을 인식하고, 상기 병해충에 대한 병해충 정보(SF2)를 생성할 수 있다(S140).
이후, 제어 모듈(130)은 농작업 정보(SF1) 및 병해충 정보(SF2)를 특정 농경지에 대한 감시 이력 리스트에 저장할 수 있다(S150).
도 4는 본 발명의 제2 실시 예에 따른 영상기반 감시 장치를 나타낸 구조도, 및 도 5는 도 3에 나타낸 영상기반 감시 장치의 제어 구성을 나타낸 제어 블록도이다.
도 4 및 도 5를 참조하면, 영상기반 감시 장치(200)는 구조물 기둥(20), 입력 모듈(210), 태양광 패널(220), 회전 모듈(230), 카메라 모듈(240) 및 제어 모듈(260)를 포함할 수 있다.
구조물 기둥(20)은 입력 모듈(210), 태양광 패널(220), 회전 모듈(230), 카메라 모듈(240) 및 제어 모듈(260)이 설치될 수 있다.
여기서, 구조물 기둥(20)은 태양광 패널(220), 회전 모듈(230) 및 카메라 모듈(240)의 유지 보수를 위해, 태양광 패널(220), 회전 모듈(230) 및 카메라 모듈(240)이 설치된 영역이 상하로 이동될 수 있으며, 이에 한정을 두지 않는다.
예를 들어, 태양광 패널(220), 회전 모듈(230) 및 카메라 모듈(240)의 유지 보수를 위해 관리자 또는 작업자에 의해, 입력 모듈(210)은 구조물 기둥(20)에 대한 하강 명령이 입력되면, 제어 모듈(260)로 전달할 수 있다.
이때, 제어 모듈(260)은 하강 명령이 입력되면, 구조물 기둥(20)을 하강시키는 모터 등을 제어하여, 태양광 패널(220), 회전 모듈(230) 및 카메라 모듈(240)이 하강되게 제어할 수 있다.
이후, 입력 모듈(120)은 관리자 또는 작업자에 의해 구조물 기둥(20)에 대한 상승 명령이 입력되면, 제어 모듈(260)로 전달할 있다.
제어 모듈(260)은 상승 명령 입력 시, 구조물 기둥(20)이 상승되게 모터 등을 제어할 수 있다.
입력 모듈(210)은 구조물 기둥(20)에 대한 상승 명령, 하강 명령 및 작물을 재배하는 복수의 농경지 중 감시를 위한 특정 농경지를 선택하는 선택 명령(S_input)을 입력할 수 있다.
실시 예에서, 입력 모듈(210)은 선택 명령(S_input)을 입력하는 것으로 설명하며, 입력 모듈(210)은 복수의 농경지 각각을 감시하기 위해 설정된 감시 주기로 선택 명령(S_input)을 입력할 수 있다.
태양광 패널(220)은 태양에서 방출되는 태양광을 흡수하여, 전력을 생산할 수 있으며, 복수 개의 태양광 집열판이 배치될 수 있으며, 이에 한정을 두지 않는다.
회전 모듈(230)은 제어 모듈(260)의 제어신호(SL)에 따라 태양광 패널(220)을 이동시킬 수 있다.
즉, 회전 모듈(230)은 제어신호(SC)에 따라 태양광 패널(220)을 회전 이동시키는 스텝 모터(미도시)를 포함할 수 있으며, 이에 한정을 두지 않는다.
카메라 모듈(240)은 RGB 카메라(242) 및 초분광 카메라(244)를 포함할 수 있다. 실시 예에서, RGB 카메라(242) 및 초분광 카메라(244)은 각각 하나로 설명하지만, 그 개수에 대하여 한정을 두지 않는다.
RGB 카메라(242)는 제어 모듈(260)의 제어에 따라, 상기 특정 농경지에 대한 특정 RGB 영상(S_RGB)을 촬영하여 제어 모듈(260)로 전달할 수 있다.
초분광 카메라(244)는 RGB 카메라(242)와 동일하게 제어 모듈(260)의 제어에 따라, 상기 특정 농경지에 대한 특정 초분광 영상(hyperspectral image, S_HP)을 촬영하여 제어 모듈(260)로 전달할 수 있다.
초분광 카메라(244)는 가시광선 영역에서의 파장대역을 수백개의 파장정보로 세분화한 특정 초분광 영상(S_HP)을 출력하며, 특정 초분광 영상(S_HP)는 특정 RGB 영상(RGB) 보다 세분화된 영상일 수 있다.
제어 모듈(260)은 위치 판단부(261), 회전 결정부(263), RGB 영상 인식부(265), 초분광 영상 인식부(267) 및 제어부(269)를 포함할 수 있다.
먼저, 위치 판단부(261)는 태양광 패널(220)의 현재 위치, 시간 및 날짜를 기반으로 태양의 위치(L)를 판단할 수 있다.
즉, 위치 판단부(261)는 태양광 패널(220)의 현재 위치 및 기 설정된 상기 시간과 날짜를 기반으로 태양의 위치(L)를 산출적으로 연산할 수 있다.
예를 들면, 위치 판단부(261)는 태양광 패널(220)의 현재 위치가 '1시'방향이고, 상기 시간이 '3시' 및 상기 날짜가 '12월'이면, 기 설정된 '12월'의 '3시'에 태양의 평균 위치을 산출하고, 상기 현재 위치와 상기 평균 위치를 비교하여, 태양의 위치를 판단할 수 있다.
회전 결정부(263)는 위치 판단부(261)에서 판단한 태양의 위치(L)에 따라 태양광 패널(220)의 현재 위치에서 회전 모듈(230)의 회전량(C)을 결정할 수 있다.
RGB 영상 인식부(265)는 특정 RGB 영상(S_RBG)을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 농작업 정보(SF1)를 생성할 수 있다.
여기서, 농작업 정보(SF1)는 상기 특정 농경지를 관리하며 작물을 재배하는 농민 또는 관리자가 행하는 일련의 동작에 대한 정보를 나타낸다.
예를 들어, 농작업 정보(SF1)는 상기 특정 농경지의 로타리 작업, 파종 작업, 농약 작업, 관리 작업 및 작물 수확 작업 등을 포함할 수 있다.
즉, RGB 영상 인식부(265)는 특정 RGB 영상(S_RBG)에서 상기 특정 농경지에 위치한 객체, 즉 농민 또는 관리자를 인식하고, 상기 객체가 수행하는 객체 형태를 인식할 수 있다.
이후, RGB 영상 인식부(265)는 상기 객체 형태에 대응하는 상기 농작업을 인식하여 농작업 정보(SF1)를 생성할 수 있다.
초분광 영상 인식부(267)는 특정 초분광 영상(S_HP)을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생되는 병해충을 인식하고, 상기 병해충에 대한 병해충 정보(SF2)를 생성할 수 있다.
즉, 초분광 영상 인식부(267)는 특정 초분광 영상(S_HP)을 분광 파장별 영상으로 분리하고, 설정된 파장별 병해충 정보와의 상관 관계를 분석하여 상기 병해충을 인식할 수 있다.
이후, 초분광 영상 인식부(267)는 상기 병해충에 대한 병해충 정보(SF2)를 생성할 수 있다.
제어부(269)는 회전 결정부(263)에서 결정한 회전량(C)에 대응하는 제어신호(SC)를 생성하고, 회전 모듈(230)이 회전되게 제어신호(SC)를 출력할 수 있다.
여기서, 제어신호(SC)는 회전량(C)에 대응하여 회전모듈(230)을 회전시키는 PWM 신호일 수 있으며, 이에 한정을 두지 않는다.
또한, 제어부(269)는 태양광 패널(220)에서 생산된 전력을 기반으로, 카메라 모듈(240)을 동작시키는 구동 전원을 생성할 수 있다.
그리고, 제어부(269)는 입력 모듈(210)에서 입력된 선택 명령(S_input)에 따라 복수의 농경지 중 상기 특정 농경지에 대한 특정 RGB 영상(S_RBG) 및 특정 초분광 영상(S_HP)이 촬영되게 카메라 모듈(240)을 제어할 수 있다.
이후, 제어부(269)는 RGB 영상 인식부(265)에서 생성한 농작업 정보(SF1) 및 초분광 영상 인식부(267)에서 생성한 병해충 정보(SF2)를 실시간 또는 설정시간간격으로 상기 특정 농경지에 대한 감시 이력 리스트에 저장할 수 있다.
본 발명의 제2 실시 예에 따른 영상기반 감시 장치(200)는 카메라 모듈(240)에서 촬영된 영상들이 태양광에 의한 회손을 방지하기 위해 태양광 패널(220)을 이용하여 카메라 모듈(240)에 그림자를 형성할 수 있는 이점이 있다.
또한, 본 발명의 제2 실시 예에 따른 영상기반 감시 장치(200)는 복수의 농경지 각각에 대하여 실시간 또는 설정 시간 간격으로 RGB 영상 및 초분광 영상을 통하여 농경지 상태를 확인할 수 있는 감시 이력 리스트를 업데이트하여, 농민 또는 관리자가 농경지 상태를 용이하게 확인할 수 있는 이점이 있다.
도 6 및 도 7은 도 4에 나타낸 영상기반 감시 장치에 포함된 회전 모듈의 동작을 나타낸 예시도이다.
먼저, 도 6는 태양이 12시 방향에 위치할 때 태양광 패널(220)의 위치를 나타내며, 도 7은 도 6에서 12시에 위치한 태양이 2시 방향에 위치할때를 나타낸 도이다.
즉, 도 6을 참조하면, 제어모듈(260)은 태양의 위치를 12시로 결정한 경우 태양광 패널(220)이 태양의 위치에 대응되게 배치되도록 회전 모듈(230)을 회전시켜 카메라모듈(240)에 태양광 패널(220)의 그림자를 생성시킬 수 있다.
이후, 제어모듈(260)은 카메라모듈(140)에서 촬영된 영상들을 수집할 수 있다.
도 7을 참조하면, 태양의 위치가 도 6에서 나타낸 바와 같이 12시 방향에서 2시 방향으로 이동되는 경우, 제어 모듈(260)은 회전 모듈(230)의 회전량(C)를 산출하고, 회전량(C)에 대응하는 제어신호(SC)를 회전 모듈(230)로 전달할 수 있다.
이때, 회전 모듈(230)은 제어신호(SC)에 의해 회전하여 태양광 패널(220)이 태양에 대응되게 위치시켜, 카메라모듈(240)에 태양광 패널(220)의 그림자를 생성시킬 수 있다.
이와 같이, 본 발명에 따른 영상기반 감시 장치(200)는 태양의 위치에 대응하게 태양광 패널을 이동시켜, 카메라 모듈에 직접적으로 태양광이 비춰지지 않도록 함으로써, 카메라 모듈에서 촬영되는 영상에 대한 손상을 줄일 수 있는 이점이 있다.
도 8은 본 발명의 제3 실시 예에 따른 영상기반 감시 장치를 나타낸 구조도, 및 도 9는 도 8에 나타낸 영상기반 감시 장치의 제어 구성을 나타낸 제어 블록도이다.
도 8 및 도 9를 참조하면, 영상기반 감시 장치(300)는 구조물 기둥(30), 입력 모듈(310), 태양광 패널(320), 회전 모듈(330), 센서 모듈(340), 카메라 모듈(350), 통신 모듈(360) 및 제어 모듈(370)를 포함할 수 있다.
도 8 및 도 9에 나타낸 구조물 기둥(30), 입력 모듈(310), 태양광 패널(320), 회전 모듈(330) 및 카메라 모듈(350)은 도 4 및 도 5에 나타낸 구조물 기둥(20), 입력 모듈(210), 태양광 패널(220), 회전 모듈(230) 및 카메라 모듈(240)과 서로 동일한 동작을 수행하므로, 자세한 설명은 생략하기로 한다.
먼저, 센서 모듈(340)은 복수의 농경지 각각에 설치되어 해당 농경지의 토양온도 및 토양 습도를 측정하여 토양 정보(P1)을 출력하는 제1 센서부(342) 및 상기 복수의 농경지에 대한 외부온도 및 외부습도를 측정하여 외부 정보(P2)를 출력하는 제2 센서부(344)를 포함할 수 있다.
이때, 센서 모듈(340)는 토양 정보(P1) 및 외부 정보(P2)를 통신 모듈(360)로 무선 또는 유선 통신을 통하여 송신할 수 있다.
카메라 모듈(350)은 RGB 카메라(352) 및 초분광 카메라(354)를 포함하며, RGB 카메라(352)는 제어 모듈(370)의 제어에 따라, 상기 특정 농경지에 대한 특정 RGB 영상(S_RGB)을 촬영하여 제어 모듈(370)로 전달할 수 있다.
또한, 초분광 카메라(354)는 RGB 카메라(352)와 동일하게 제어 모듈(370)의 제어에 따라, 상기 특정 농경지에 대한 특정 초분광 영상(hyperspectral image, S_HP)을 촬영하여 제어 모듈(370)로 전달할 수 있다.
통신 모듈(360)은 센서 모듈(340)과 통신을 수행하여 토양 정보(P1) 및 외부 정보(P2)를 수신하여, 제어 모듈(370)로 전달할 수 있다.
또한, 통신 모듈(360)은 제어 모듈(370)로부터 전달된 재배 상태 정보(SF3)를 외부의 이동 단말기 등으로 송신할 수 있으며, 이에 한정을 두지 않는다.
제어 모듈(370)은 위치 판단부(371), 회전 결정부(373), RGB 영상 인식부(375), 초분광 영상 인식부(377) 및 제어부(379)를 포함할 수 있다.
먼저, 위치 판단부(371)는 태양광 패널(320)의 현재 위치, 시간 및 날짜를 기반으로 태양의 위치(L)를 판단할 수 있다.
즉, 위치 판단부(371)는 태양광 패널(320)의 현재 위치 및 기 설정된 상기 시간과 날짜를 기반으로 태양의 위치(L)를 산출적으로 연산할 수 있다.
예를 들면, 위치 판단부(371)는 태양광 패널(320)의 현재 위치가 '1시'방향이고, 상기 시간이 '3시' 및 상기 날짜가 '12월'이면, 기 설정된 '12월'의 '3시'에 태양의 평균 위치을 산출하고, 상기 현재 위치와 상기 평균 위치를 비교하여, 태양의 위치를 판단할 수 있다.
회전 결정부(373)는 위치 판단부(371)에서 판단한 태양의 위치(L)에 따라 태양광 패널(320)의 현재 위치에서 회전 모듈(330)의 회전량(C)을 결정할 수 있다.
RGB 영상 인식부(375)는 특정 RGB 영상(S_RBG)을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 농작업 정보(SF1)를 생성할 수 있다.
여기서, 농작업 정보(SF1)는 상기 특정 농경지를 관리하며 작물을 재배하는 농민 또는 관리자가 행하는 일련의 동작에 대한 정보를 나타낸다.
예를 들어, 농작업 정보(SF1)는 상기 특정 농경지의 로타리 작업, 파종 작업, 농약 작업, 관리 작업 및 작물 수확 작업 등을 포함할 수 있다.
즉, RGB 영상 인식부(375)는 특정 RGB 영상(S_RBG)에서 상기 특정 농경지에 위치한 객체, 즉 농민 또는 관리자를 인식하고, 상기 객체가 수행하는 객체 형태를 인식할 수 있다.
이후, RGB 영상 인식부(375)는 상기 객체 형태에 대응하는 상기 농작업을 인식하여 농작업 정보(SF1)를 생성할 수 있다.
초분광 영상 인식부(377)는 특정 초분광 영상(S_HP)을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생되는 병해충을 인식하고, 상기 병해충에 대한 병해충 정보(SF2)를 생성할 수 있다.
즉, 초분광 영상 인식부(377)는 특정 초분광 영상(S_HP)을 분광 파장별 영상으로 분리하고, 설정된 파장별 병해충 정보와의 상관 관계를 분석하여 상기 병해충을 인식할 수 있다.
이후, 초분광 영상 인식부(377)는 상기 병해충에 대한 병해충 정보(SF2)를 생성할 수 있다.
제어부(379)는 회전 결정부(373)에서 결정한 회전량(C)에 대응하는 제어신호(SC)를 생성하고, 회전 모듈(330)이 회전되게 제어신호(SC)를 출력할 수 있다.
여기서, 제어신호(SC)는 회전량(C)에 대응하여 회전모듈(330)을 회전시키는 PWM 신호일 수 있으며, 이에 한정을 두지 않는다.
또한, 제어부(379)는 태양광 패널(320)에서 생산된 전력을 기반으로, 카메라 모듈(350)을 동작시키는 구동 전원을 생성할 수 있다.
그리고, 제어부(379)는 입력 모듈(310)에서 입력된 선택 명령(S_input)에 따라 복수의 농경지 중 상기 특정 농경지에 대한 특정 RGB 영상(S_RBG) 및 특정 초분광 영상(S_HP)이 촬영되게 카메라 모듈(350)을 제어할 수 있다.
또한, 제어부(379)는 센서모듈(340)을 제어하여 통신 모듈(360)로부터 수신한 토양 정보(P1) 및 외부 정보(P2)를 전달받을 수 있다.
제어부(379)는 토양 정보(P1) 및 외부 정보(P2)를 포함하는 환경 정보를 생성하고, 상기 환경 정보, RGB 영상 인식부(375)에서 생성한 농작업 정보(SF1) 및 초분광 영상 인식부(377)에서 생성한 병해충 정보(SF2)에 따라 상기 특정 농경지에서 재배되는 작물에 대한 재배 상태 정보(SF3)를 생성할 수 있다.
여기서, 재배 상태 정보(SF3)는 현재 작물의 성장 상태, 다음 수행해야할 농작업 등을 포함할 수 있다.
이후, 제어부(379)는 재배 상태 정보(SF3)를 실시간 또는 설정시간간격으로 상기 특정 농경지에 대한 감시 이력 리스트에 저장할 수 있다.
실시 예에서, 제어부(379)는 데이터베이스 서버로부터 수신 저장한 복수의 작물에 대한 다른 재배 상태 정보를 기계학습하여, 환경 정보, 농작업 정보 및 병충해 정보에 따라 정확한 작물의 재배 상태 정보(SF3)를 생성할 수 있으며, 이에 한정을 두지 않는다.
본 발명의 제3 실시 예에 따른 영상기반 감시 장치(300)는 카메라 모듈(350)에서 촬영된 영상들이 태양광에 의한 회손을 방지하기 위해 태양광 패널(320)을 이용하여 카메라 모듈(350)에 그림자를 형성할 수 있는 이점이 있다.
또한, 본 발명의 제3 실시 예에 따른 영상기반 감시 장치(300)는 센서 모듈(340) 및 통신 모듈(360)을 통하여, 토양 및 외부 환경의 온도 및 습도를 측정하여, 작물의 재배 환경을 확인하고 그에 따라 작물을 재배하기 위해 다음 수행해야할 농작업을 사용자가 확인할 수 있는 이점이 있다.
또한, 본 발명의 제3 실시 예에 따른 영상기반 감시 장치(300)는 복수의 농경지 각각에 대하여 실시간 또는 설정 시간 간격으로 RGB 영상 및 초분광 영상을 통하여 농경지 상태 및 환경 정보를 포함하는 재배 상태 정보를 감시 이력 리스트를 업데이트하여, 농민 또는 관리자가 농경지 상태를 용이하게 확인할 수 있는 이점이 있다.
이상에서 실시 예들에 설명된 특징, 구조, 효과 등은 본 발명의 적어도 하나의 실시 예에 포함되며, 반드시 하나의 실시 예에만 한정되는 것은 아니다. 나아가, 각 실시 예에서 예시된 특징, 구조, 효과 등은 실시 예들이 속하는 분야의 통상의 지식을 가지는 자에 의해 다른 실시 예들에 대해서도 조합 또는 변형되어 실시 가능하다. 따라서 이러한 조합과 변형에 관계된 내용들은 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.
또한, 이상에서 실시 예를 중심으로 설명하였으나 이는 단지 예시일 뿐 본 발명을 한정하는 것이 아니며, 본 발명이 속하는 분야의 통상의 지식을 가진 자라면 본 실시 예의 본질적인 특성을 벗어나지 않는 범위에서 이상에 예시되지 않은 여러가지의 변형과 응용이 가능함을 알 수 있을 것이다. 예를 들어, 실시 예에 구체적으로 나타난 각 구성 요소는 변형하여 실시할 수 있는 것이다. 그리고 이러한 변형과 응용에 관계된 차이점들은 첨부된 청구 범위에서 규정하는 본 발명의 범위에 포함되는 것으로 해석되어야 할 것이다.
Claims (12)
- RGB 영상 및 초분광 영상을 촬영하는 카메라 모듈;
작물을 재배하는 복수의 농경지 중 특정 농경지에 대한 선택 명령을 입력하는 입력 모듈; 및
상기 선택 명령이 입력되면 상기 카메라 모듈을 제어하여 상기 특정 농경지의 특정 RGB 영상 및 특정 초분광 영상을 입력받고, 상기 특정 RGB 영상 및 상기 특정 초분광 영상을 기반으로 상기 특정 농경지의 농작업 정보 및 상기 작물의 병해충 정보를 생성하는 제어 모듈을 포함하는,
영상기반 감시 장치. - 제 1 항에 있어서,
상기 카메라 모듈은,
상기 특정 RGB 영상을 촬영하는 RGB 카메라; 및
상기 특정 초분광 영상을 촬영하는 초분광 카메라를 포함하는,
영상기반 감시 장치. - 제 1 항에 있어서,
상기 입력 모듈은,
상기 복수의 농경지 각각에 대하여 설정된 감시 주기에 따라 상기 특정 농경지에 대한 상기 선택 명령을 입력하는,
영상기반 감시 장치. - 제 1 항에 있어서,
상기 제어 모듈은,
상기 특정 RGB 영상을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 상기 농작업 정보를 생성하는 RGB 영상 인식부;
상기 특정 초분광 영상을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생된 병해충을 인식하고, 상기 병해충에 대한 상기 병해충 정보를 생성하는 초분광 영상 인식부; 및
상기 선택 명령에 따라 상기 특정 농경지가 촬영되게 상기 카메라 모듈을 제어하며, 상기 농작업 정보 및 상기 병해충 정보를 저장하는 제어부를 포함하는,
영상기반 감시 장치. - 태양광으로 전력을 생산하는 태양광 패널;
상기 태양광 패널을 회전시키는 회전 모듈;
RGB 영상 및 초분광 영상을 촬영하는 카메라 모듈;
작물을 재배하는 복수의 농경지 중 특정 농경지에 대한 선택 명령을 입력하는 입력 모듈; 및
상기 태양광을 방출하는 태양의 위치에 따라 상기 태양광 패널의 그림자가 상기 카메라 모듈에 생성되게 상기 회전 모듈을 제어하고, 상기 선택 명령이 입력되면 상기 카메라 모듈을 제어하여 상기 특정 농경지의 특정 RGB 영상 및 특정 초분광 영상을 입력받고, 상기 특정 RGB 영상 및 상기 특정 초분광 영상을 기반으로 상기 특정 농경지의 농작업 정보 및 상기 작물의 병해충 정보를 생성하는 제어 모듈을 포함하는,
영상기반 감시 장치. - 제 5 항에 있어서,
상기 제어 모듈은,
상기 태양의 위치를 판단하는 위치 판단부;
상기 태양의 위치에 따라 상기 회전 모듈의 회전량을 결정하는 회전 결정부;
상기 특정 RGB 영상을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 상기 농작업 정보를 생성하는 RGB 영상 인식부;
상기 특정 초분광 영상을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생된 병해충을 인식하고, 상기 병해충에 대한 상기 병해충 정보를 생성하는 초분광 영상 인식부; 및
상기 회전량에 대응하여 상기 회전 모듈이 회전되게 제어하고, 상기 선택 명령에 따라 상기 특정 농경지가 촬영되게 상기 카메라 모듈을 제어하며, 상기 농작업 정보 및 상기 병해충 정보를 저장하는 제어부를 포함하는,
영상기반 감시 장치. - 제 6 항에 있어서,
상기 위치 판단부는,
상기 태양광 패널의 현재 위치, 시간 및 날짜를 기반으로 상기 태앙의 위치를 판단하는,
영상기반 감시 장치. - 태양광으로 전력을 생산하는 태양광 패널;
상기 태양광 패널을 회전시키는 회전 모듈;
RGB 영상 및 초분광 영상을 촬영하는 카메라 모듈;
작물을 재배하는 복수의 농경지 중 특정 농경지에 대한 선택 명령을 입력하는 입력 모듈;
상기 복수의 농경지 각각에 설치되어 해당 농경지의 토양온도 및 토양습도를 측정하는 제1 센서부 및 상기 복수의 농경지에 대한 외부온도 및 외부습도를 측정하는 제2 센서부를 포함하는 센서모듈; 및
상기 태양광을 방출하는 태양의 위치에 따라 상기 태양광 패널의 그림자가 상기 카메라 모듈에 생성되게 상기 회전 모듈을 제어하고, 상기 선택 명령이 입력되면 상기 카메라 모듈을 제어하여 상기 특정 농경지의 특정 RGB 영상 및 특정 초분광 영상을 입력받고, 상기 특정 RGB 영상 및 상기 특정 초분광 영상을 기반으로 상기 특정 농경지의 농작업 정보 및 상기 작물의 병해충 정보와, 상기 센서모듈에서 측정된 상기 토양온도, 상기 토양습도, 상기 외부온도 및 상기 외부습도를 포함하는 환경 정보를 생성하고, 상기 농작업 정보, 상기 병해충 정보 및 상기 환경 정보에 따라 상기 작물에 대한 재배 상태 정보를 생성하는 제어 모듈을 포함하는,
영상기반 감시 장치. - 제 8 항에 있어서,
상기 센서모듈과 통신을 수행하여 상기 토양온도, 상기 토양습도, 상기 외부온도 및 상기 외부습도를 수신하여, 상기 제어 모듈로 전달하는 통신모듈을 더 포함하는,
영상기반 감시 장치. - 제 8 항에 있어서,
상기 제어 모듈은,
상기 태양의 위치를 판단하는 위치 판단부;
상기 태양의 위치에 따라 상기 회전 모듈의 회전량을 결정하는 회전 결정부;
상기 특정 RGB 영상을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 상기 농작업 정보를 생성하는 RGB 영상 인식부;
상기 특정 초분광 영상을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생된 병해충을 인식하고, 상기 병해충에 대한 상기 병해충 정보를 생성하는 초분광 영상 인식부; 및
상기 회전량에 대응하여 상기 회전 모듈이 회전되게 제어하고, 상기 선택 명령에 따라 상기 특정 농경지가 촬영되게 상기 카메라 모듈을 제어하며, 상기 센서모듈에서 측정한 상기 토양온도, 상기 토양습도, 상기 외부온도 및 상기 외부습도를 포함하여 생성한 상기 환경정보, 상기 농작업 정보 및 상기 변해충 정보를 기반으로 상기 작물에 대한 상기 재배 상태 정보를 생성 및 저장하는 제어부를 포함하는,
영상기반 감시 장치. - 복수의 농경지 중 특정 농경지를 선택한 선택 명령이 입력되면 카메라 모듈을 동작시키는 단계;
상기 카메라 모듈에서 촬영한 특정 RBG 영상 및 특정 초분광 영상을 전달받는 단계; 및
상기 특정 RGB 영상 및 상기 특정 초분광 영상을 기반으로 상기 특정 농경지의 농작업 정보 및 상기 특정 농경지에서 재배되는 작물의 병해충 정보를 생성 및 저장하는 단계를 포함하는,
영상기반 감시 장치의 동작방법. - 제 11 항에 있어서,
상기 농작업 정보 및 상기 병해충 정보를 생성 및 저장하는 단계는,
상기 특정 RGB 영상을 기반으로 상기 특정 농경지에서 객체가 수행하는 농작업을 인식하고, 상기 농작업에 대한 상기 농작업 정보를 생성하는 단계;
상기 특정 초분광 영상을 기반으로 상기 특정 농경지에 재배되는 상기 작물에 발생된 병해충을 인식하고, 상기 병해충에 대한 상기 병해충 정보를 생성하는 단계; 및
상기 농작업 정보 및 상기 병해충 정보를 저장하는 단계를 포함하는,
영상기반 감시 장치의 동작방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180167048A KR102261087B1 (ko) | 2018-12-21 | 2018-12-21 | 영상기반 감시 장치 및 그 동작방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020180167048A KR102261087B1 (ko) | 2018-12-21 | 2018-12-21 | 영상기반 감시 장치 및 그 동작방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20200077808A true KR20200077808A (ko) | 2020-07-01 |
| KR102261087B1 KR102261087B1 (ko) | 2021-06-04 |
Family
ID=71601474
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020180167048A KR102261087B1 (ko) | 2018-12-21 | 2018-12-21 | 영상기반 감시 장치 및 그 동작방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102261087B1 (ko) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113640288A (zh) * | 2021-07-21 | 2021-11-12 | 盐城思源网络科技有限公司 | 一种基于第一视角的农田智能远程监测系统 |
| KR102347679B1 (ko) * | 2021-04-22 | 2022-01-07 | (주)아이티팩토리 | 지능적인 병충해 진단 및 병충해 전염의 방지가 가능한 스마트 팜 제어서버 및 그 제어방법 |
| KR102384334B1 (ko) * | 2021-02-26 | 2022-04-08 | 주식회사 이노드 | 재배지의 작물 정보 제공 장치 및 방법 |
| KR102428477B1 (ko) | 2022-03-14 | 2022-08-01 | 엄용철 | 이동객체 검출을 위한 이동식 cctv 카메라 시스템. |
| CN115511194A (zh) * | 2021-06-29 | 2022-12-23 | 布瑞克农业大数据科技集团有限公司 | 一种农业数据处理方法、系统、装置及介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20120005783A (ko) * | 2010-07-09 | 2012-01-17 | 이영모 | 이물질 제거 및 광 차단 기능이 구비된 감시카메라 |
| KR101263752B1 (ko) | 2011-08-03 | 2013-05-13 | 솔트웨어 주식회사 | 식물 생장 모니터링 시스템 및 그를 이용한 식물 생장 모니터링 방법 |
| KR101474996B1 (ko) * | 2014-08-22 | 2014-12-22 | 주식회사 아이티아이씨앤씨 | 태양 에너지를 이용한 감시 카메라 장치 |
| KR20180072641A (ko) * | 2018-06-20 | 2018-06-29 | 전남대학교산학협력단 | 사물인터넷 기반 식물 재배 데이터 수집 및 관리 시스템 |
-
2018
- 2018-12-21 KR KR1020180167048A patent/KR102261087B1/ko active IP Right Grant
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20120005783A (ko) * | 2010-07-09 | 2012-01-17 | 이영모 | 이물질 제거 및 광 차단 기능이 구비된 감시카메라 |
| KR101263752B1 (ko) | 2011-08-03 | 2013-05-13 | 솔트웨어 주식회사 | 식물 생장 모니터링 시스템 및 그를 이용한 식물 생장 모니터링 방법 |
| KR101474996B1 (ko) * | 2014-08-22 | 2014-12-22 | 주식회사 아이티아이씨앤씨 | 태양 에너지를 이용한 감시 카메라 장치 |
| KR20180072641A (ko) * | 2018-06-20 | 2018-06-29 | 전남대학교산학협력단 | 사물인터넷 기반 식물 재배 데이터 수집 및 관리 시스템 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102384334B1 (ko) * | 2021-02-26 | 2022-04-08 | 주식회사 이노드 | 재배지의 작물 정보 제공 장치 및 방법 |
| KR102347679B1 (ko) * | 2021-04-22 | 2022-01-07 | (주)아이티팩토리 | 지능적인 병충해 진단 및 병충해 전염의 방지가 가능한 스마트 팜 제어서버 및 그 제어방법 |
| CN115511194A (zh) * | 2021-06-29 | 2022-12-23 | 布瑞克农业大数据科技集团有限公司 | 一种农业数据处理方法、系统、装置及介质 |
| CN113640288A (zh) * | 2021-07-21 | 2021-11-12 | 盐城思源网络科技有限公司 | 一种基于第一视角的农田智能远程监测系统 |
| KR102428477B1 (ko) | 2022-03-14 | 2022-08-01 | 엄용철 | 이동객체 검출을 위한 이동식 cctv 카메라 시스템. |
Also Published As
| Publication number | Publication date |
|---|---|
| KR102261087B1 (ko) | 2021-06-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102261087B1 (ko) | 영상기반 감시 장치 및 그 동작방법 | |
| US20220107298A1 (en) | Systems and methods for crop health monitoring, assessment and prediction | |
| AU2019398116A1 (en) | Mapping field anomalies using digital images and machine learning models | |
| US20130235190A1 (en) | Leaf area index measurement system, device, method, and program | |
| CN114144061A (zh) | 用于基于图像识别的种植物处理的方法 | |
| US11925151B2 (en) | Stereo-spatial-temporal crop condition measurements for plant growth and health optimization | |
| US12067711B2 (en) | Data processing platform for analyzing stereo-spatio-temporal crop condition measurements to support plant growth and health optimization | |
| JP6914874B2 (ja) | 飛行経路生成装置及び飛行経路生成方法 | |
| CN111479459A (zh) | 生长状况或病虫害发生状况的预测系统、方法以及程序 | |
| JP5979573B1 (ja) | 水分量観察装置、水分量観察方法及び栽培装置 | |
| KR20190143680A (ko) | IoT 기반 온실 내 작물 생육상태 실시간 모니터링 시스템 | |
| WO2021237333A1 (en) | Real-time projections and estimated distributions of agricultural pests, diseases, and biocontrol agents | |
| AU2021204034B2 (en) | Information processing device, information processing method and program | |
| WO2022099403A1 (en) | Generation of stereo-spatio-temporal crop condition measurements based on human observations and height measurements | |
| KR102262382B1 (ko) | 무인기 기반 영상 취득의 광지역 공간정보 구축시스템 | |
| AU2021351645B2 (en) | Calibration of autonomous farming vehicle image acquisition system | |
| US12035665B2 (en) | Greenhouse control system | |
| EP4187344B1 (en) | Work machine distance prediction and action control | |
| CN107656287B (zh) | 一种基于激光雷达的麻类作物行的边界提取设备及方法 | |
| WO2020035875A1 (en) | "methods and systems for generating prescription plans for a region under cultivation" | |
| KR102649593B1 (ko) | 작물 모니터링 장치 | |
| JP5979572B1 (ja) | 水分量観察装置、水分量観察方法及び栽培装置 | |
| JP2023135998A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
| Story Jr | Autonomous multi-sensor and web-based decision support for crop diagnostics in greenhouse | |
| WO2023105112A1 (en) | Weeding robot |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| AMND | Amendment | ||
| E601 | Decision to refuse application | ||
| AMND | Amendment | ||
| X701 | Decision to grant (after re-examination) | ||
| GRNT | Written decision to grant |