KR101481323B1 - Providing system for plant information using plant image from mobile terminal - Google Patents

Providing system for plant information using plant image from mobile terminal Download PDF

Info

Publication number
KR101481323B1
KR101481323B1 KR20130114193A KR20130114193A KR101481323B1 KR 101481323 B1 KR101481323 B1 KR 101481323B1 KR 20130114193 A KR20130114193 A KR 20130114193A KR 20130114193 A KR20130114193 A KR 20130114193A KR 101481323 B1 KR101481323 B1 KR 101481323B1
Authority
KR
South Korea
Prior art keywords
information
plant
mobile terminal
image
module
Prior art date
Application number
KR20130114193A
Other languages
Korean (ko)
Inventor
홍광석
권형준
Original Assignee
성균관대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 성균관대학교산학협력단 filed Critical 성균관대학교산학협력단
Priority to KR20130114193A priority Critical patent/KR101481323B1/en
Application granted granted Critical
Publication of KR101481323B1 publication Critical patent/KR101481323B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/02Agriculture; Fishing; Forestry; Mining

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Marine Sciences & Fisheries (AREA)
  • Mining & Mineral Resources (AREA)
  • Agronomy & Crop Science (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Husbandry (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

A system (200) for providing plant information using a plant image transmitted from a mobile terminal includes: a mobile terminal (210) for transmitting first information which has a plant image obtained by using a camera and second information which includes at least one among weather information obtained by using a sensor, weather information received from an external server, location information obtained by using a location sensor, and time information including a date to a plant information server, and receiving plant information matching the plant image from the plant information server to output the plant information; a plant database (230) for storing the first and second information generated by the mobile terminal and biological source information for candidate plants; and a plant information server (220) for determining a final candidate plant group by filtering initial candidate plant groups which include candidate plants based on the second information, searching plant information which matches the first information from the final candidate plant group by using the first information, and transmitting the searched plant information to the mobile terminal.

Description

이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템{PROVIDING SYSTEM FOR PLANT INFORMATION USING PLANT IMAGE FROM MOBILE TERMINAL}TECHNICAL FIELD [0001] The present invention relates to a plant information providing system using a plant image transmitted from a mobile terminal. [0002]

이하 설명하는 기술은 사용자가 이동 단말을 통해 촬영한 영상을 기준으로 식물에 관한 정보를 사용자에게 제공하는 시스템에 관한 것이다.The present invention relates to a system for providing information on a plant to a user based on an image taken by a user through a mobile terminal.

식물 정보에 관한 연구 분야는 크게 식물 영상 인식 분야, 식물 정보 제공 분야, 식물 정보 관리 분야로 구분할 수 있다. The field of research on plant information can be roughly classified into plant image recognition field, plant information providing field, and plant information management field.

식물 영상 인식 분야의 종래기술은 식물의 외형에서 드러나는 특징인 색상, 윤곽선, 경계, 잎맥 등의 정보를 이용하는 식물 영상 인식 방법에 관해 다루고 있다.Background Art [0002] Conventional arts of plant image recognition are dealing with a plant image recognition method using information such as color, contour, boundary, vein, which are characteristic of the appearance of a plant.

식물 정보 제공 분야의 종래기술은 식물에 QR 코드 또는 바코드, 키오스크 등 별도의 시설물이 설치되는 제한적인 조건 하에서 개인의 휴대 단말을 이용하여 정보를 제공하는 기술이 대부분이다.Background Art Conventionally, most conventional technologies for providing plant information include providing information using a portable terminal of a person under limited conditions in which separate facilities such as a QR code, a bar code, and a kiosk are installed on a plant.

식물 정보 관리 분야의 종래기술은 식물원, 산림욕장 등 관리자가 식물의 생육에 필요한 환경과 장치를 조성하여 꾸준히 관리하면서 식물의 생장을 지속하기 위한 정보 관리에 목적을 두고 있다.Prior art in the field of plant information management is aimed at information management to maintain the growth of plants while continuously managing the environment and devices necessary for plant growth by administrators such as a botanical garden and a forest bath.

한국공개특허 10-2012-0002658호Korean Patent Laid-Open No. 10-2012-0002658 한국공개특허 10-2012-0076491호Korean Patent Publication No. 10-2012-0076491

종래 기술은 수많은 식물에 대한 정보를 제공하거나 관리하는데 한계가 있다. 영상을 이용한 정보 제공 방법은 촬영 시기 또는 촬영 조건에 따라 분류학적으로는 동일한 식물에 대하여 서로 다른 이미지가 생성될 수 있다. 식물의 종류가 너무나 많기 때문에 식물 영상만을 가지고 식물을 분류하는 것은 오류의 문제를 안고 있기도 하다. 나아가 자연계에 있는 식물에는 특정 마커 등을 이용하여 식물에 대한 정보를 제공할 수도 없다.The prior art has limitations in providing or managing information on a large number of plants. According to the information providing method using images, different images may be generated for the same plants by taxonomy depending on the shooting time or shooting conditions. Because there are so many kinds of plants, it is a problem of errors to classify plants only with plant images. Furthermore, plants in nature can not provide information about plants using specific markers or the like.

이하 설명하는 기술은 식물 영상뿐만 아니라 식물 영상을 촬영하는 시점의 기상 정보, 위치 정보 등을 이용하여 정확한 식물 정보를 제공하는 시스템에 관한 것이다. 이하 설명하는 기술은 사용자의 참여에 의하여 정보를 확장하고 업데이트하는 사용자 참여형 데이터 베이스를 제공하고자 한다.The following description relates to a system for providing accurate plant information by using weather information, location information, and the like at the time of photographing a plant image as well as a plant image. The technique described below is intended to provide a user participation database that expands and updates information by user participation.

이하 설명하는 기술의 해결과제는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 해결과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The solutions to the technical problems described below are not limited to those mentioned above, and other solutions not mentioned can be clearly understood by those skilled in the art from the following description.

상기 과제를 해결하기 위한 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템은 카메라를 통해 획득한 식물 영상, 센서를 이용하여 획득한 기상 정보 및 위치 센서를 이용하여 획득한 위치 정보를 식물 정보 서버로 전송하고, 식물 영상에 대한 정보를 식물 정보 서버로부터 수신하여 출력하는 이동 단말, 식물 영상, 자연 정보 및 위치 정보 중 적어도 하나를 이용하여 매칭되는 식물에 대한 정보를 검색하고, 검색된 정보를 이동 단말에 전송하는 식물 정보 서버 및 이동 단말과 식물 정보 서버가 데이터를 주고 받도록 연결하는 네트워크 장치를 포함한다.In order to solve the above problems, a plant information providing system using a plant image transmitted from a mobile terminal includes a plant image acquired through a camera, weather information acquired using a sensor, and location information acquired using a location sensor, Searches for information on plants matched using at least one of the mobile terminal, plant image, natural information, and location information, which receives and outputs information about the plant image from the plant information server, and transmits the retrieved information to the mobile terminal And a network device for connecting the mobile terminal and the plant information server to exchange data.

이동 단말은 식물 영상을 촬영하는 카메라, 온도 또는 습도 중 적어도 하나의 기상정보를 측정하는 기상 정보 센서, 위도, 경도 및 고도를 포함하는 위치 정보를 측정하는 위치 측정 센서, 식물 정보 서버와 데이터를 송수신하는 통신 모듈 및 식물 정보 서버로부터 수신한 식물 정보를 출력하는 정보 출력 모듈을 포함한다.The mobile terminal includes a camera for capturing plant images, a weather information sensor for measuring at least one weather information of temperature or humidity, a location sensor for measuring location information including latitude, longitude and altitude, And an information output module for outputting plant information received from the plant information server.

식물 정보 서버는 이동 단말과 데이터를 주고 받는 통신 모듈, 이동 단말이 전달한 식물 영상, 기상 정보 및 위치 정보를 저장하는 타겟 정보 저장 모듈, 식물에 대한 생물학적 소스 정보를 저장하는 소스 정보 저장 모듈 및 이동 단말이 전달한 식물 영상, 기상 정보 및 위치 정보를 기준으로 소스 정보 저장부에서 매칭되는 식물에 대한 식물 정보를 추출하는 정보 추출 모듈을 포함한다.The plant information server includes a communication module for exchanging data with the mobile terminal, a target information storage module for storing vegetation image, weather information and location information transmitted by the mobile terminal, a source information storage module for storing biological source information about the plant, And an information extraction module for extracting plant information for plants matched in the source information storage unit based on the delivered plant image, weather information, and location information.

정보 추출 모듈은 기상 정보 및 위치 정보를 기준으로 초기 후보 식물 그룹을 필터링하여, 최종 후보 식물 그룹을 생성하고, 식물 영상을 기준으로 최종 후보 식물 그룹에서 매칭되는 식물에 대한 정보를 추출한다.The information extraction module filters the initial candidate plant group based on the weather information and the location information, generates a final candidate plant group, and extracts information on the matching plants in the final candidate plant group based on the plant image.

다른 측면에서 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템은 카메라를 통해 획득한 식물 영상을 포함한 제1 정보 및 센서를 이용하여 획득한 기상 정보, 외부 서버로부터 수신한 기상 정보, 위치 센서를 이용하여 획득한 위치 정보 및 날짜를 포함하는 시간 정보 중 적어도 하나를 포함하는 제2 정보를 식물 정보 서버에 전달하고, 식물 영상에 매칭되는 식물 정보를 식물 정보 서버로부터 수신하여 출력하는 이동 단말, 이동 단말이 생성하는 제1 정보 및 제2 정보를 저장하고, 후보 식물들에 대한 생물학적 소스 정보를 저장하는 식물 데이터 베이스 및 제2 정보를 기준으로 후보 식물들을 포함하는 초기 후보 식물 그룹을 필터링하여 최종 후보 식물 그룹을 결정하고, 제1 정보를 이용하여 최종 후보 식물 그룹에서 제1 정보에 매칭되는 식물 정보를 검색하고, 검색된 식물 정보를 이동 단말에 전달하는 식물 정보 서버를 포함한다.In another aspect, a plant information providing system using a plant image transmitted from a mobile terminal includes first information including a plant image acquired through a camera, weather information acquired using the sensor, weather information received from an external server, A plant information server for receiving plant information corresponding to the plant image from the plant information server and outputting the plant information to the plant information server, A plant database storing first information and second information generated by a terminal and storing biological source information for candidate plants and an initial candidate plant group including candidate plants based on second information, Determine the plant group, and use the first information to add to the first information in the final candidate plant group Retrieve the plant information, and includes a plant information server to deliver the retrieved information to the mobile terminal plant.

식물 정보 서버는 이동 단말 및 식물 데이터 베이스와 데이터를 주고 받는 통신 모듈, 이동 단말에서 전달되는 제1 정보 및 제2 정보를 통신 규약에 따라 복호하고, 제1 정보 및 제2 정보를 식물 데이터 베이스에 저장하기 위한 포맷으로 변환하는 수신 정보 처리 모듈, 이동 단말이 전달한 제1 정보 및 제2 정보를 기준으로 식물 데이터 베이스에서 매칭되는 식물에 대한 식물 정보를 추출하는 정보 추출 모듈 및 추출한 식물 정보를 이동 단말에 전달하기 위한 데이터 포맷으로 가공하는 식물 정보 가공 모듈을 포함한다.The plant information server decodes the first information and the second information transmitted from the mobile terminal according to the communication protocol, and transmits the first information and the second information to the plant database An information extraction module for extracting plant information for a plant matched in the plant database on the basis of the first information and the second information transmitted by the mobile terminal, And a plant information processing module for processing the data into a data format for forwarding the plant information.

정보 추출 모듈은 제2 정보를 이용하여 초기 후보 식물 그룹에서 대상이 아닌 식물을 필터링하여 최종 후보 식물 그룹을 생성하는 후보 필터부, 제1 정보에 포함되는 식물 영상에서 타겟 식물 영역을 추출하는 식물 영상 처리부, 최종 후보 식물 그룹에서 타겟 식물 영역을 기준으로 매칭되는 식물을 검색하는 식물 매칭부 및 매칭되는 식물에 대한 생물학적 소스 정보를 추출하는 소스 정보 추출부를 포함한다.The information extraction module includes a candidate filter unit for generating a final candidate plant group by filtering the non-target plants in the initial candidate plant group using the second information, a plant filter unit for extracting the target plant region from the plant images included in the first information, And a source information extracting unit for extracting biological source information on a matching plant and a plant matching unit searching for a plant matched on the basis of the target plant area in the final candidate plant group.

이동 단말은 식물 영상을 획득한 시점의 조도를 측정하는 조도 센서 및 카메라에 대한 성능 정보를 생성하는 영상 정보 모듈을 더 포함할 수 있고, 이 경우 식물 매칭부는 조도 및 성능 정보를 고려하여 타겟 식물 영역과 매칭되는 식물을 검색한다.The mobile terminal may further include an illuminance sensor for measuring illuminance at the time of acquiring the plant image and an image information module for generating performance information for the camera. In this case, And matching plants.

식물 정보 서버는 식물 데이터 베이스에 접근하여 생물학적 소스 정보를 업데이트하는 관리자 모듈을 더 포함할 수 있다.The plant information server may further include a manager module for accessing the plant database and updating the biological source information.

관리자 모듈은 위치 정보에 기반한 전자 지도를 저장하는 지도 저장부, 전자 지도를 출력하는 디스플레이부 및 정보를 입력하는 인터페이스부를 포함하고, 전자 지도에서 위치 정보를 기준으로 상기 식물 데이터 베이스를 업데이트할 수 있다.The manager module includes a map storage unit for storing an electronic map based on the location information, a display unit for outputting the electronic map, and an interface unit for inputting the information, and the plant database can be updated based on the location information in the electronic map .

이하 설명하는 기술은 식물 영상 외에 다양한 정보를 이용하기 때문에 정확한 식물 분류가 가능하고, 사용자에게 정확한 정보를 제공할 수 있다. 나아가 사용자가 참여하는 데이터 베이스 구축을 통해 식물 자생정보 모니터링, 신종 및 희귀종의 발견, 외래종 생태교란 모니터링 등이 가능하다.Since the technology described below uses various information besides the plant image, accurate plant classification is possible and accurate information can be provided to the user. Furthermore, by constructing a database in which users can participate, it is possible to monitor plant indigenous information, discover new and rare species, and monitor exotic species ecological disturbances.

이하 설명하는 기술의 효과는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 효과들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The effects of the techniques described below are not limited to those mentioned above, and other effects not mentioned can be clearly understood by those skilled in the art from the following description.

도 1은 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템에 대한 구성을 도시한 블록도의 예이다.
도 2는 도 1의 시스템에서 이동 단말이 획득하는 정보 및 정보를 처리하는 구성에 대한 예이다.
도 3은 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템에 대한 구성을 도시한 블록도의 다른 예이다.
도 4는 도 3의 시스템에서 이동 단말이 획득하는 정보 및 정보를 처리하는 구성에 대한 예이다.
도 5는 도 3의 시스템에서 식물 정보 서버의 정보 추출 모듈의 구성 및 동작을 설명한 예이다.
도 6은 이동 단말의 인터페이스 화면의 예를 도시한다.
도 7은 관리자 모듈에서 식물 데이터 베이스를 업데이트하는 예를 도시한다.
1 is a block diagram illustrating a configuration of a plant information providing system using a plant image transmitted from a mobile terminal.
2 is an example of a configuration for processing information and information acquired by a mobile terminal in the system of FIG.
3 is another example of a block diagram showing a configuration of a plant information providing system using a plant image transmitted from a mobile terminal.
4 is an example of a configuration for processing information and information acquired by the mobile terminal in the system of FIG.
5 is a diagram illustrating an example of the configuration and operation of the information extraction module of the plant information server in the system of FIG.
6 shows an example of an interface screen of a mobile terminal.
7 shows an example of updating the plant database in the manager module.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.While the invention is susceptible to various modifications and alternative forms, specific embodiments thereof are shown by way of example in the drawings and will herein be described in detail. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 해당 구성요소들은 상기 용어들에 의해 한정되지는 않으며, 단지 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.The terms first, second, A, B, etc., may be used to describe various components, but the components are not limited by the terms, but may be used to distinguish one component from another . For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component. And / or < / RTI > includes any combination of a plurality of related listed items or any of a plurality of related listed items.

본 명세서에서 사용되는 용어에서 단수의 표현은 문맥상 명백하게 다르게 해석되지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함한다" 등의 용어는 설시된 특징, 개수, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 의미하는 것이지, 하나 또는 그 이상의 다른 특징들이나 개수, 단계 동작 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 배제하지 않는 것으로 이해되어야 한다.As used herein, the singular " include "should be understood to include a plurality of representations unless the context clearly dictates otherwise, and the terms" comprises & , Parts or combinations thereof, and does not preclude the presence or addition of one or more other features, integers, steps, components, components, or combinations thereof.

도면에 대한 상세한 설명을 하기에 앞서, 본 명세서에서의 구성부들에 대한 구분은 각 구성부가 담당하는 주기능 별로 구분한 것에 불과함을 명확히 하고자 한다. 즉, 이하에서 설명할 2개 이상의 구성부가 하나의 구성부로 합쳐지거나 또는 하나의 구성부가 보다 세분화된 기능별로 2개 이상으로 분화되어 구비될 수도 있다. 그리고 이하에서 설명할 구성부 각각은 자신이 담당하는 주기능 이외에도 다른 구성부가 담당하는 기능 중 일부 또는 전부의 기능을 추가적으로 수행할 수도 있으며, 구성부 각각이 담당하는 주기능 중 일부 기능이 다른 구성부에 의해 전담되어 수행될 수도 있음은 물론이다. 따라서, 본 명세서를 통해 설명되는 각 구성부들의 존재 여부는 기능적으로 해석되어야 할 것이며, 이러한 이유로 본 발명의 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템(100, 200)에 따른 구성부들의 구성은 본 발명의 목적을 달성할 수 있는 한도 내에서 대응하는 도면과는 상이해질 수 있음을 명확히 밝혀둔다.Before describing the drawings in detail, it is to be clarified that the division of constituent parts in this specification is merely a division by main functions of each constituent part. That is, two or more constituent parts to be described below may be combined into one constituent part, or one constituent part may be divided into two or more functions according to functions that are more subdivided. In addition, each of the constituent units described below may additionally perform some or all of the functions of other constituent units in addition to the main functions of the constituent units themselves, and that some of the main functions, And may be carried out in a dedicated manner. Therefore, the existence of each component described in the present specification should be interpreted as a function, and for this reason, the components of the plant information providing system (100, 200) using the plant image transmitted from the mobile terminal of the present invention It should be clear that the configuration may be different from the corresponding figures within the scope of achieving the object of the present invention.

또, 방법 또는 동작 방법을 수행함에 있어서, 상기 방법을 이루는 각 과정들은 문맥상 명백하게 특정 순서를 기재하지 않은 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 과정들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.
Also, in performing a method or an operation method, each of the processes constituting the method may take place differently from the stated order unless clearly specified in the context. That is, each process may occur in the same order as described, may be performed substantially concurrently, or may be performed in the opposite order.

본 발명은 사용자가 이동 단말을 통하여 획득하는 식물 영상을 기준으로 해당 식물에 대한 정보를 사용자에게 제공하는 시스템이다. 식물의 종류가 매우 많기 때문에 식물 영상만으로 해당 식물을 정확하게 식별하는 것은 어려운 일이다. 따라서 본 발명은 식물 영상을 획득하는 시점의 정보, 식물 영상을 획득하는 지점에 대한 정보 등을 이용하여 비교 대상이 되는 식물 데이터베이스를 필터링하여, 비교 대상이 되는 데이터를 줄이는 것이 특징이다. The present invention provides a system for providing information about a plant to a user based on a plant image acquired by a user through a mobile terminal. Because of the large number of plants, it is difficult to accurately identify the plant with only plant images. Therefore, the present invention is characterized in that the plant database to be compared is filtered using the information of the time of acquiring the plant image, the information of the point acquiring the plant image, and the like, thereby reducing the data to be compared.

본 발명에서 이동 단말은 2G, 3G, 4G 등의 통신 방식을 사용하는 휴대전화, 태블릿 PC, 노트북 컴퓨터, 별도의 단말 등을 포함하는 의미이다. 다른 측면에서 본 발명에서 이동 단말은 일정한 무선 네트워크를 통해 데이터를 주고 받을 수 있고, 카메라를 내장하거나 카메라를 연결하여 식물의 영상을 획득할 수 있는 단말을 포함한다.In the present invention, the mobile terminal includes a mobile phone, a tablet PC, a notebook computer, a separate terminal, etc. using a communication method such as 2G, 3G, and 4G. In another aspect of the present invention, a mobile terminal includes a terminal capable of exchanging data through a certain wireless network, and incorporating a camera or connecting a camera to acquire images of a plant.

본 발명에서 식물 영상을 카메라를 통해 획득한 식물에 대한 영상을 의미한다. 식물 영상은 일반적으로 적어도 하나의 이미지일 수도 있고, 나아가 식물에 대한 동영상일 수도 있다.
In the present invention, the term "plant image" means a plant image obtained through a camera. The plant image may generally be at least one image, or even a moving image for a plant.

이하에서는 도면을 참조하면서 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템(100, 200)에 관하여 구체적으로 설명하겠다.Hereinafter, the plant information providing system 100 or 200 using the plant image transmitted from the mobile terminal will be described in detail with reference to the drawings.

도 1은 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템(100)에 대한 구성을 도시한 블록도의 예이다.1 is an example of a block diagram showing a configuration of a plant information providing system 100 using a plant image transmitted from a mobile terminal.

이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템(100)은 카메라를 통해 획득한 식물 영상, 센서를 이용하여 획득한 기상 정보 및 위치 센서를 이용하여 획득한 위치 정보를 식물 정보 서버로 전송하고, 식물 영상에 대한 정보를 식물 정보 서버로부터 수신하여 출력하는 이동 단말(110), 식물 영상, 자연 정보 및 위치 정보 중 적어도 하나를 이용하여 매칭되는 식물에 대한 정보를 검색하고, 검색된 정보를 이동 단말에 전송하는 식물 정보 서버(130) 및 이동 단말과 식물 정보 서버가 데이터를 주고 받도록 연결하는 네트워크 장치(120)를 포함한다.The plant information providing system 100 using the plant image transmitted from the mobile terminal transmits the plant information acquired through the camera, the weather information acquired using the sensor, and the location information acquired using the location sensor to the plant information server A mobile terminal 110 receiving and outputting information about a plant image from a plant information server, searching for information on plants matched using at least one of plant images, natural information, and location information, And a network device 120 for connecting the mobile terminal and the plant information server to exchange data with each other.

네트워크 장치(120)는 이동 단말(110)과 식물 정보 서버(130)가 데이터를 주고 받을 수 있도록 연결하는 장치이다. 네트워크 장치(120)는 이동통신사업자가 제공하는 2G, 3G, 4G 등의 무선 네트워크 장치, WiFi 네트워크 장치, 무선 WiMAX 네트워크 장치 등 다양한 방식의 장치가 사용될 수 있다. 본 발명에서 네트워크 장치(120)는 통신 방식 등에 제한을 받는 것이 아니며, 이동 단말(110)과 식물 정보 서버(130) 사이에 특정한 데이터를 주고 받을 수 있는 어떠한 장치라도 사용될 수 있다. 예컨대, 이동 단말(110)은 SMS와 같은 문자 메시지, MMS 메시지 등을 통해서도 식물 정보 서버(130)에 특정 데이터를 전달할 수 있다. 다만 일반적으로 데이터를 주고 받는 통신 방식은 인터넷과 같은 경로를 사용하므로, 도 1에서는 "Internet"이라고 표기하였다.The network device 120 is a device for connecting the mobile terminal 110 and the plant information server 130 so as to exchange data. The network device 120 may be a variety of devices such as 2G, 3G, and 4G wireless network devices, WiFi network devices, and wireless WiMAX network devices provided by a mobile communication service provider. In the present invention, the network device 120 is not limited to the communication method, and any device capable of exchanging specific data between the mobile terminal 110 and the plant information server 130 can be used. For example, the mobile terminal 110 may transmit specific data to the plant information server 130 through a text message such as SMS or an MMS message. However, since the communication method for exchanging data generally uses the same route as the Internet, it is denoted as "Internet" in FIG.

이동 단말(110)은 영상을 촬영하는 카메라(111), 온도 또는 습도 중 적어도 하나의 기상정보를 측정하는 기상 정보 센서(112), 위도, 경도 및 고도를 포함하는 위치 정보를 측정하는 위치 측정 센서(113), 식물 정보 서버와 데이터를 송수신하는 통신 모듈(114) 및 식물 정보 서버로부터 수신한 식물 정보를 출력하는 정보 출력 모듈(115)을 포함한다.The mobile terminal 110 includes a camera 111 that captures an image, a weather information sensor 112 that measures at least one weather information of temperature or humidity, a position sensor that measures position information including latitude, longitude, A communication module 114 for transmitting and receiving data to and from the plant information server, and an information output module 115 for outputting plant information received from the plant information server.

카메라(110)는 이동 단말(110)에 내장된 모노 카메라, 입체 영상 촬영이 가능한 스테레오 카메라 등을 포함한다. 나아가 이동 단말(110)에 유선 또는 블루투스와 같은 무선 방식으로 연결된 별도의 카메라를 사용할 수도 있다. 카메라(110)의 감도, 셔터 속도, 조리개 성능 등은 카메라의 사양에 따라 달라질 수 있다.The camera 110 includes a mono camera built in the mobile terminal 110, a stereoscopic camera capable of taking a stereoscopic image, and the like. Further, a separate camera connected to the mobile terminal 110 in a wireless manner such as wired or Bluetooth may be used. The sensitivity, the shutter speed, the aperture performance, and the like of the camera 110 may vary depending on the specification of the camera.

기상 정보 센서(112)는 사용자가 카메라(110)로 식물 영상을 촬영하는 시점 및 지점의 기상 정보를 측정한다. 기상 정보 센서(112)는 온도를 측정하는 온도 센서, 습도를 측정하는 습도 센서 등을 포함하는 의미이다. 나아가 이동 단말(110)은 외부 서버로부터 수신하는 날씨 정보를 통신 모듈을 통해 식물 정보 서버(130)에 추가적으로 전송할 수도 있다. 스마트폰과 같은 이동 단말은 별도의 애플리케이션을 통해 날씨 정보를 수신할 수 있고, 해당 지역의 날씨 정보를 수집하여 식물 정보 서버(130)에 전송할 수 있다. 이 경우 온도 센서 또는 습도 센서와 같은 별도의 센서를 내장하지 않아도, 특정 지역에 대한 기상 정보를 식물 정보 서버(130)에 전송할 수 있다.The weather information sensor 112 measures weather information of a point and a point at which a user photographs a plant image with the camera 110. The weather information sensor 112 includes a temperature sensor for measuring temperature, a humidity sensor for measuring humidity, and the like. Further, the mobile terminal 110 may further transmit weather information received from the external server to the plant information server 130 through the communication module. A mobile terminal such as a smart phone can receive weather information through a separate application, and can collect weather information of the corresponding area and transmit it to the plant information server 130. In this case, weather information for a specific area can be transmitted to the plant information server 130 without incorporating a separate sensor such as a temperature sensor or a humidity sensor.

또한 이동 단말(110)은 날짜 등을 포함하는 시간 정보를 통신 모듈을 통해 식물 정보 서버(130)에 추가적으로 전송할 수도 있다.The mobile terminal 110 may further transmit the time information including the date and the like to the plant information server 130 through the communication module.

위치 측정 센서(113)는 외부 GPS 장치와 통신하여 식물 영상을 촬영하는 이동 단말의 위치를 측정하는 센서이다. 일반적으로 GPS 장치는 위도 및 경도를 측정하는데 사용된다. 진화된 위성 장치는 이동 단말의 Z좌표에 해당하는 고도를 측정할 수도 있다. 또는 위치 측정 센서(113)는 고도 측정을 위한 고도계 센서를 별도로 이용할 수도 있다.The position measurement sensor 113 is a sensor for measuring the position of a mobile terminal that captures a plant image by communicating with an external GPS device. Generally, GPS devices are used to measure latitude and longitude. The evolved satellite device may measure the altitude corresponding to the Z coordinate of the mobile terminal. Alternatively, the position measurement sensor 113 may use an altimeter sensor for altitude measurement separately.

도 2는 도 1의 시스템에서 이동 단말이 획득하는 정보 및 정보를 처리하는 구성에 대한 예이다. 도 2는 도 1의 시스템에서 이동 단말(110)이 대표적으로 획득하는 정보를 예시한다. 이동 단말(110)은 카메라(111)를 통해 식물 영상을 획득하고, 기상 정보 센서(112)를 통해 온도 및 습도 등을 포함하는 기상 정보를 획득하며, 위치 측정 센서(113)를 통해 이동 단말의 위치 정보인 위도, 경도 또는 고도 등을 획득할 수 있다.2 is an example of a configuration for processing information and information acquired by a mobile terminal in the system of FIG. FIG. 2 illustrates information that the mobile terminal 110 typically acquires in the system of FIG. The mobile terminal 110 obtains the vegetation image through the camera 111 and obtains weather information including temperature and humidity through the weather information sensor 112 and transmits the weather information including the temperature and humidity to the mobile terminal 110 Latitude, longitude, or altitude, which is positional information, can be obtained.

다시 도 1의 시스템에 대해 설명한다. 통신 모듈(114)은 카메라(111)가 획득한 식물 영상, 기상 정보 센서(112)가 측정한 기상 정보, 위치 측정 센서(113)가 측정한 위치 등의 정보를 식물 정보 서버(130)에 전송하고, 식물 정보 서버(130)에서 전송한 데이터를 수신하는 장치이다.The system of Fig. 1 will be described again. The communication module 114 transmits information such as the plant image acquired by the camera 111, the weather information measured by the weather information sensor 112, and the position measured by the position measurement sensor 113 to the plant information server 130 And receives data transmitted from the plant information server 130.

정보 출력 모듈(115)은 식물 정보 서버(130)에서 전송한 식물에 대한 정보를 출력하는 장치이다. 이동 단말(110)은 일반적으로 디스플레이 장치 등을 사용한다. 본 발명에서 정보 출력 모듈(115)은 특정 정보가 표시되는 디스플레이 장치를 포함하는 의미이다.The information output module 115 is a device for outputting information on plants transmitted from the plant information server 130. The mobile terminal 110 generally uses a display device or the like. In the present invention, the information output module 115 includes a display device in which specific information is displayed.

식물 정보 서버(130)는 이동 단말과 데이터를 주고 받는 통신 모듈(131), 이동 단말이 전달한 식물 영상, 기상 정보 및 위치 정보를 저장하는 타겟 정보 저장 모듈(133), 식물에 대한 생물학적 소스 정보를 저장하는 소스 정보 저장 모듈(134) 및 이동 단말이 전달한 식물 영상, 기상 정보 및 위치 정보를 기준으로 소스 정보 저장부에서 매칭되는 식물에 대한 식물 정보를 추출하는 정보 추출 모듈(132)을 포함한다.The plant information server 130 includes a communication module 131 for exchanging data with a mobile terminal, a target information storage module 133 for storing plant images, weather information, and location information transmitted by the mobile terminal, And an information extraction module 132 for extracting plant information for plants matched in the source information storage unit based on the plant image, weather information, and location information transmitted from the source information storage module 134 and the mobile terminal.

통신 모듈(131)은 네트워크 장치(120)를 통해 데이터를 주고 받는 구성이다. 이동 단말의 통신 모듈(114)과 같이 통신 방식에 따라 다양한 모듈이 사용될 수 있다.The communication module 131 is a configuration for exchanging data through the network device 120. Various modules may be used depending on the communication method, such as the communication module 114 of the mobile terminal.

타겟 정보 저장 모듈(133)은 이동 단말(110)에서 전달되는 각종 정보를 저장하는 저장 장치이다. 따라서 타겟 정보 저장 모듈(133)은 카메라(111)가 획득한 식물 영상, 기상 정보 센서(112)가 측정한 기상 정보, 위치 측정 센서(113)가 측정한 위치 정보 등을 저장한다.The target information storage module 133 is a storage device for storing various kinds of information transmitted from the mobile terminal 110. Therefore, the target information storage module 133 stores the plant image acquired by the camera 111, the weather information measured by the weather information sensor 112, the location information measured by the location sensor 113, and the like.

소스 정보 저장 모듈(134)은 식물에 대한 생물학적 소스 정보를 저장하는 장치이다. 정보 추출 모듈(132)은 이동 단말(110)에서 전송한 각종 정보를 기준으로 소스 정보 저장 모듈(134)에 저장된 소스 정보를 검색하여 매칭되는 식물을 찾는다. 결국 소스 정보 저장 모듈(134)은 비교 대상이 되는 식물 모 그룹의 생물학적 소스 정보를 저장한다. 생물학적 소스 정보는 식물의 형태학적 정보, 식물의 학명, 생물학적 분류, 분포지역, 평균적 크기와 너비, 개화시기, 꽃의 특징, 용도 등을 포함한다. 생물학적 소스 정보는 개별 식물에 대하여 생물학적으로 알려진 각종 정보를 포함하는 의미이다.The source information storage module 134 is a device for storing biological source information about a plant. The information extraction module 132 searches the source information stored in the source information storage module 134 based on various information transmitted from the mobile terminal 110 to find a matching plant. Finally, the source information storage module 134 stores the biological source information of the plant group to be compared. Biological source information includes morphological information of the plant, scientific name of the plant, biological classification, distribution area, average size and width, flowering time, flower characteristics, use and the like. Biological source information is meant to encompass various information known biologically for individual plants.

정보 추출 모듈(132)은 기상 정보 및 위치 정보 등을 기준으로 초기 후보 식물 그룹을 필터링하여, 최종 후보 식물 그룹을 생성하고, 식물 영상을 기준으로 최종 후보 식물 그룹에서 매칭되는 식물에 대한 정보를 추출한다. 초기 후보 식물 그룹은 소스 정보 저장 모듈(134)에 원시적으로 저장된 식물 그룹을 의미하고, 최종 후보 식물 그룹은 식물 영상을 제외하고 이동 단말(110)이 전달한 각종 정보를 이용하여 비교 대상이 축소된 식물 그룹을 의미한다. 정보 추출 모듈(132)은 최종 후보 식물 그룹에서 식물 영상을 기준으로 매칭되는 식물을 검색한다. 특정 식물들은 식물이 자생하는 환경이 서로 다르기 때문에, 이동 단말(110)에서 전송한 기상 정보 및 위치 정보 등을 이용하여 정보 추출 모듈(132)에 저장된 식물들 중에서 비교 대상이 되는 식물의 수를 줄일 수 있다.The information extraction module 132 filters the initial candidate plant group based on the weather information and the location information, generates a final candidate plant group, and extracts information about plants matched in the final candidate plant group based on the plant image do. The initial candidate plant group means a plant group that is stored in the source information storage module 134 in a primitive manner and the final candidate plant group is a plant group in which the comparison object is reduced by using various information transmitted from the mobile terminal 110, Group. The information extraction module 132 searches for plants matched based on the plant image in the final candidate plant group. The number of plants to be compared among the plants stored in the information extraction module 132 is reduced by using weather information and location information transmitted from the mobile terminal 110 because the specific plants have different environments in which the plants naturally live .

나아가 정보 추출 모듈(132)은 이동 단말이 전송하는 날씨 정보 또는 시간 정보 등을 이용하여, 초기 후보 식물 그룹을 필터링하는데 이용할 수도 있다.
Further, the information extraction module 132 may use the weather information or the time information transmitted by the mobile terminal to filter the initial candidate plant group.

도 3은 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템(200)에 대한 구성을 도시한 블록도의 다른 예이다. 도 3의 시스템(200)은 식물에 대한 정보를 저장하는 식물 데이터 베이스(230)를 별도로 갖고 있고, 식물 데이터 베이스(230)의 정보를 편집하거나 업데이트할 수 있는 관리자 모듈(240)을 더 포함한다. 또한 이동 단말(210) 및 식물 정보 서버(220)의 세부적인 구성이 도 1의 시스템(100)과 다소 상이하나, 기능적으로는 유사한 시스템이다.3 is another example of a block diagram showing a configuration of a plant information providing system 200 using a plant image transmitted from a mobile terminal. The system 200 of FIG. 3 further includes a plant database 230 for storing information on plants, and a manager module 240 for editing or updating information of the plant database 230 . The detailed configuration of the mobile terminal 210 and the plant information server 220 is somewhat different from that of the system 100 of FIG. 1, but is functionally similar.

이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템(200)은 카메라를 통해 획득한 식물 영상을 포함한 제1 정보 및 센서를 이용하여 획득한 기상 정보, 외부 서버로부터 수신한 기상 정보, 위치 센서를 이용하여 획득한 위치 정보 및 날짜를 포함하는 시간 정보 중 적어도 하나를 포함하는 제2 정보를 식물 정보 서버에 전달하고, 식물 영상에 매칭되는 식물 정보를 식물 정보 서버로부터 수신하여 출력하는 이동 단말(210), 이동 단말이 생성하는 제1 정보 및 제2 정보를 저장하고, 후보 식물들에 대한 생물학적 소스 정보를 저장하는 식물 데이터 베이스(230) 및 제2 정보를 기준으로 후보 식물들을 포함하는 초기 후보 식물 그룹을 필터링하여 최종 후보 식물 그룹을 결정하고, 제1 정보를 이용하여 최종 후보 식물 그룹에서 제1 정보에 매칭되는 식물 정보를 검색하고, 검색된 식물 정보를 이동 단말에 전달하는 식물 정보 서버(220)를 포함한다.The plant information providing system 200 using the plant image transmitted from the mobile terminal includes the first information including the plant image acquired through the camera and the weather information acquired using the sensor, the weather information received from the external server, And transmits the second information including at least one of the position information and the date information obtained by using the plant information server to the plant information server, receives the plant information matching the plant image from the plant information server, A plant database 230 for storing first information and second information generated by the mobile terminal and storing biological source information on candidate plants and an initial candidate plant including candidate plants based on the second information, The group is filtered to determine the final candidate plant group and the first information is used to match the first information in the final candidate plant group Retrieve the plant information, and a plant information server 220 to deliver the retrieved information to the mobile terminal plant.

이동 단말(210)은 식물 영상을 촬영하는 카메라(211), 온도 또는 습도 중 적어도 하나의 기상정보를 수집하는 기상 정보 모듈(212), 위도, 경도 및 고도를 포함하는 위치 정보를 측정하는 위치 측정 모듈(213), 날짜를 포함하는 시간 정보를 수집하는 시간 정보 모듈(214), 식물 정보 서버와 데이터를 송수신하는 통신 모듈(216) 및 식물 정보 서버로부터 수신한 식물 정보를 출력하는 정보 출력 모듈(217)을 포함한다.The mobile terminal 210 includes a camera 211 for capturing a plant image, a weather information module 212 for collecting at least one weather information of temperature or humidity, a position measurement for measuring position information including latitude, longitude and altitude A module 213, a time information module 214 for collecting time information including a date, a communication module 216 for transmitting and receiving data to and from the plant information server, and an information output module 217).

카메라(211), 기상 정보 모듈(212) 및 위치 측정 모듈(213)은 각각 전술한 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템(100)의 카메라(111), 기상 정보 센서(112) 및 위치 측정 센서(113)에 대응된다. 카메라(211)는 시스템(100)의 카메라(111)와 동일한 구성이다.The camera 211, the weather information module 212 and the position measurement module 213 are respectively connected to the camera 111, weather information sensor 112, and weather information sensor 110 of the plant information providing system 100 using the plant images transmitted from the above- And the position measuring sensor 113, respectively. The camera 211 has the same configuration as the camera 111 of the system 100.

기상 정보 모듈(212)은 온도 또는/및 습도를 측정하는 센서를 포함하여 온도 또는/및 습도를 측정할 수 있다. 나아가 기상 정보 모듈(212)은 외부 기상 서버로부터 수신하는 날씨 정보를 추출하여 재사용하는 구성일 수도 있다. 일반적으로 외부 기상 서버가 전송하는 날씨 정보는 온도, 습도, 바람의 방향, 바람의 세기, 날씨(맑음, 흐림, 비, 눈 등의 상태 정보) 등을 포함한다. 기상 정보 모듈(212)이 외부 기상 서버로부터 수신된 정보를 사용한다면, 기상 정보 모듈(212)은 온도 또는 습도 센서를 구비하지 않아도 된다.The weather information module 212 may include a temperature and / or humidity sensor to measure temperature and / or humidity. Furthermore, the weather information module 212 may be configured to extract and reuse weather information received from the external weather server. In general, the weather information transmitted by the external weather server includes temperature, humidity, wind direction, wind intensity, and weather (state information such as clear, cloudy, rain, and snow). If the weather information module 212 uses the information received from the external weather server, the weather information module 212 may not have a temperature or humidity sensor.

위치 측정 모듈(213)은 GPS 장치와 같은 위치 추적 시스템을 통해 이동 단말(210)의 위도, 경도 및 고도 등의 정보를 획득할 수 있다. 또한 이동통신 사업자가 제공하는 통신 방식을 사용하는 이동 단말(210)은 기지국을 이용한 위치 추정 방식을 사용할 수도 있다. 나아가, 위치 측정 모듈(213)에는 해당 분야의 기술자가 널리 알고 있는 다양한 통신 장치를 이용한 위치 추정 기술을 적용할 수도 있다.The location measurement module 213 may obtain information such as the latitude, longitude and altitude of the mobile terminal 210 through a location tracking system such as a GPS device. In addition, the mobile terminal 210 using the communication scheme provided by the mobile communication company may use the position estimation method using the base station. Further, the position measurement module 213 may be configured to use a position estimation technique using various communication devices widely known to a person skilled in the art.

이동 단말(210)은 식물 영상을 획득한 시점의 조도를 측정하는 조도 센서 및 카메라에 대한 성능 정보를 생성하는 영상 정보 모듈(215)을 더 포함할 수 있다. 조도 센서가 측정하는 조도 또는 카메라 성능에 대한 정보는 식물 영상을 처리하는 과정에서 정확한 이미지 처리를 위해 사용될 수 있다.The mobile terminal 210 may further include an illuminance sensor for measuring illuminance at the time of acquiring the plant image and an image information module 215 for generating performance information for the camera. Information about the illumination or camera performance measured by the illumination sensor can be used for accurate image processing in the processing of plant images.

정보 출력 모듈(217)은 도 1의 정보 출력 모듈(115)과 동일한 구성이다. 정보 출력 모듈(217)은 사용자가 요청한 정보에 대한 결과를 수신하고 사용자에게 이를 출력한다.
The information output module 217 has the same configuration as the information output module 115 of FIG. The information output module 217 receives the result of the information requested by the user and outputs the result to the user.

도 4는 도 3의 시스템(200)에서 이동 단말(210)이 획득하는 정보 및 정보를 처리하는 구성에 대한 예이다. 도 4는 도 3의 시스템(200)에서 이동 단말(210)이 대표적으로 획득하는 정보를 예시한다. 이동 단말(210)은 카메라(211)를 통해 식물 영상을 획득하고, 기상 정보 모듈(212)을 통해 온도 및 습도 등을 포함하는 기상 정보를 획득하며, 위치 측정 모듈(213)을 통해 이동 단말의 위치 정보인 위도, 경도 또는 고도 등을 획득할 수 있다. FIG. 4 is an example of a configuration for processing information and information acquired by the mobile terminal 210 in the system 200 of FIG. FIG. 4 illustrates information that the mobile terminal 210 typically acquires in the system 200 of FIG. The mobile terminal 210 obtains the vegetation image through the camera 211 and obtains the weather information including the temperature and the humidity through the weather information module 212, Latitude, longitude, or altitude, which is positional information, can be obtained.

나아가 이동 단말(210)은 시간 정보 모듈(214)을 통해 식물 영상을 획득한 시점의 시간 및 날짜를 획득할 수 있다. 본 발명에서 시간 정보는 날짜 및 시간 등을 포함하는 의미로 사용한다. 예컨대, 날짜는 해당 지역의 계절 및 기후를 추정할 수 있는 기준 정보로 사용될 수 있다. 또한 시간은 식물의 개화 특성 등을 파악하기 위한 기준 정보로 사용될 수도 있다.Further, the mobile terminal 210 can acquire the time and date at the time of acquiring the plant image through the time information module 214. In the present invention, the time information includes a date, a time, and the like. For example, the date can be used as reference information for estimating the season and climate of the area. The time may also be used as reference information for identifying the flowering characteristics of the plant.

이동 단말(210)은 영상 정보 모듈(215)을 통해 식물 영상을 촬영하는 시점의 조도를 측정할 수 있다. 영상 정보 모듈(215)이 조도를 측정하기 위해서는 조도 센서를 이용해야 할 것이다. 또한 영상 정보 모듈(215)은 이동 단말(210)이 사용하는 카메라(211)의 성능 정보를 전달할 수도 있다. 카메라(211)의 감도, 해상도, 조리개 속도, 셔터 속도 등과 같은 정보도 식물 영상에 대한 이미지 처리 과정에 사용될 수 있다.The mobile terminal 210 can measure the illuminance at the time of photographing the plant image through the image information module 215. The image information module 215 may need to use an illuminance sensor to measure illuminance. The video information module 215 may also transmit performance information of the camera 211 used by the mobile terminal 210. Information such as the sensitivity, resolution, aperture speed, shutter speed, and the like of the camera 211 can also be used for image processing of the plant image.

한편 이동 단말(210)의 각 구성은 카메라 또는 센서 등의 하드웨어 장치와 더불어 임베디드 소프트웨어 및 모바일 운영체제 기반 응용 소프트웨어 형태로 구성될 수 있다.
In addition, each configuration of the mobile terminal 210 can be configured in the form of embedded software and application software based on a mobile operating system, in addition to a hardware device such as a camera or a sensor.

도 3의 시스템(200)에 대한 나머지 구성에 대해 설명하기로 한다. The remaining configuration of the system 200 of FIG. 3 will now be described.

이동 단말(21)은 사용자에 의해 수집된 정보를 미리 정의된 통신 규약(프로토콜)에 따라 패키징하고, 암호화 과정에 의해 하나의 데이터로 구성되어 제반 모듈 중 하나인 통신 모듈(216)을 통해 식물 정보 서버(220)에 전송한다.The mobile terminal 21 packages the information collected by the user according to a predetermined communication protocol and encrypts the plant information through the communication module 216, which is one of the modules, To the server (220).

이동 단말(210)과 식물 정보 서버(220)의 연결은 OSI 7 계층 중 최상단인 응용 계층에서 소프트웨어 형태로 구성되어 유선 및 무선 통신 기술을 활용한다. 도 3에서는 "Internet"이라고 표시하였지만, 이동 단말(210)과 식물 정보 서버(220)를 연결하는 네트워크는 근거리(IrDA, 블루투스, Wi-Fi 등) 네트워크 및 중장거리(2G, 3G, WiMax, LTE 등) 무선 통신 네트워크 등을 포함한다. The connection between the mobile terminal 210 and the plant information server 220 is implemented in a software form in an application layer at the top of the OSI 7 layer, and utilizes wired and wireless communication technologies. 3, the network connecting the mobile terminal 210 and the plant information server 220 is a network in a short distance (IrDA, Bluetooth, Wi-Fi, etc.) network and a long distance (2G, 3G, WiMax, LTE Etc.) wireless communication networks.

식물 데이터 베이스(230)는 이동 단말(210)이 전송한 제1 정보 및 제2 정보를 저장하는 제1 데이터 베이스(231) 및 비교 대상이 되는 후보 식물들의 생물학적 소스 정보를 저장하는 제2 데이터 베이스(232)를 포함한다. 제1 정보는 식물 영상을 포함하고, 제2 정보는 기상 정보, 위치 정보, 시간 정보, 영상 정보 등을 포함한다. 생물학적 소스 정보는 일반적인 사용자가 알기 어려운 정보를 포함하고, 해당 식물의 대표 영상을 포함한다. 사용자가 알아내기 어려운 식물정보의 예를 들면, 식물의 학명, 생물학적 분류, 분포지역, 평균적 크기와 너비, 개화시기, 꽃의 특징, 용도 등이 있다.
The plant database 230 includes a first database 231 for storing first information and second information transmitted by the mobile terminal 210 and a second database 231 for storing biological source information of candidate plants to be compared, Lt; / RTI > The first information includes a plant image, and the second information includes weather information, location information, time information, image information, and the like. The biological source information includes information that is difficult for general users to understand, and includes a representative image of the plant. Examples of plant information that are difficult for the user to recognize include the scientific name, biological classification, distribution area, average size and width, flowering time, flower characteristics, and uses of plants.

식물 정보 서버(220)는 이동 단말(210) 및 식물 데이터 베이스(230)와 데이터를 주고 받는 통신 모듈(221), 이동 단말에서 전달되는 제1 정보 및 제2 정보를 통신 규약에 따라 복호하고, 제1 정보 및 제2 정보를 식물 데이터 베이스(230)에 저장하기 위한 포맷으로 변환하는 수신 정보 처리 모듈(222), 이동 단말이 전달한 제1 정보 및 제2 정보를 기준으로 식물 데이터 베이스(230)에서 매칭되는 식물에 대한 식물 정보를 추출하는 정보 추출 모듈(223) 및 추출한 식물 정보를 이동 단말에 전달하기 위한 데이터 포맷으로 가공하는 식물 정보 가공 모듈(224)을 포함한다.The plant information server 220 includes a communication module 221 for exchanging data with the mobile terminal 210 and the plant database 230, first and second information transmitted from the mobile terminal according to a communication protocol, A reception information processing module 222 for converting the first information and the second information into a format for storage in the plant database 230, a plant database 230 based on the first information and the second information transmitted by the mobile terminal, An information extraction module 223 for extracting plant information for plants matched in the plant information processing module 224 and a plant information processing module 224 for processing the extracted plant information into a data format for delivering the plant information to the mobile terminal.

수신 정보 처리 모듈(222)은 암호화된 데이터를 복호하고 통신 규약에 따라 패키징된 데이터를 분해하고, 이동 단말(210)이 전송한 식물 영상, 기상 정보, 위치 정보 등을 통신 모듈(221)을 통해 식물 데이터 베이스(230)에 전송한다. The reception information processing module 222 decodes the encrypted data, decomposes the packaged data according to the communication protocol, and transmits the plant image, weather information, location information, and the like transmitted from the mobile terminal 210 to the communication module 221 through the communication module 221 To the plant database 230.

정보 추출 모듈(223)은 이동 단말(210)이 전송한 제2 정보를 이용하여 식물 데이터 베이스(230)에 저장된 후보 식물 그룹을 필터링하고, 제1 정보 중 식물 영상을 이용하여 최종적으로 매칭되는 식물을 검색하고, 검색한 식물의 정보를 추출한다.The information extraction module 223 filters the candidate plant group stored in the plant database 230 by using the second information transmitted by the mobile terminal 210, And extracts the information of the searched plant.

정보 추출 모듈(223)은 제2 정보를 이용하여 초기 후보 식물 그룹에서 대상이 아닌 식물을 필터링하여 최종 후보 식물 그룹을 생성하는 후보 필터부(223-1), 제1 정보에 포함되는 식물 영상에서 타겟 식물 영역을 추출하는 식물 영상 처리부(223-2), 최종 후보 식물 그룹에서 타겟 식물 영역을 기준으로 매칭되는 식물을 검색하는 식물 매칭부(223-3) 및 매칭되는 식물에 대한 생물학적 소스 정보를 추출하는 소스 정보 추출부(223-4)를 포함한다.The information extraction module 223 includes a candidate filter unit 223-1 for filtering a non-target plant in the initial candidate plant group using the second information to generate a final candidate plant group, A plant image processing unit 223-2 for extracting a target plant area, a plant matching unit 223-3 for searching for a plant matched on the basis of the target plant area in the final candidate plant group, and biological source information on the matched plant And a source information extracting unit 223-4.

식물 정보 가공 모듈(224)은 사용자의 요청에 따라 처리된 정보를 이동 단말로 전송하기 위해 가공하는 역할을 수행한다.
The plant information processing module 224 processes the processed information to transmit the processed information to the mobile terminal at the request of the user.

도 5는 도 3의 시스템에서 식물 정보 서버(220)의 정보 추출 모듈(223)의 구성 및 동작을 설명한 예이다.5 illustrates an example of the configuration and operation of the information extraction module 223 of the plant information server 220 in the system of FIG.

식물 데이터 베이스(230)는 이동 단말(210)이 전송한 정보를 저장하는 제1 데이터 베이스(231) 및 식물에 대한 생물학적 소스 정보를 저장하는 제2 데이터 베이스(232)를 포함한다. 제1 데이터 베이스(231)는 식물 영상 DB, 영상 정보 DB, 기상 정보 DB, 위치 정보 DB, 시간 정보 DB를 포함한다. 제2 데이터 베이스(232)는 비교 대상이 되는 후보 식물 정보 DB를 포함한다.The plant database 230 includes a first database 231 for storing information transmitted by the mobile terminal 210 and a second database 232 for storing biological source information about the plant. The first database 231 includes a plant image DB, an image information DB, a weather information DB, a location information DB, and a time information DB. The second database 232 includes a candidate plant information DB to be compared.

정보 추출 모듈(223)의 식물 영상 처리부(231-2)는 식물 영상 DB에 저장된 식물 영상에서 타겟 식물 영역을 추출한다. 타겟 식물 영역은 식물 영상에서 식물에 대한 정보를 검색하기 위한 기준이 되는 영역을 의미한다. 식물의 꽃, 잎사귀 등이 주요한 타겟 식물 영역이 될 것이다. The plant image processing unit 231-2 of the information extraction module 223 extracts the target plant area from the plant image stored in the plant image DB. The target plant area is a reference area for searching for information on a plant in a plant image. Plant flowers, leaves, etc. will be the main target plant areas.

정보 추출 모듈(223)의 식물 영상 처리부(231-2)는 이미지 처리 기술을 사용하여 타겟 식물 영역을 추출하는데, 이 과정에서 사용되는 이미지 처리 과정은 널리 알려진 기술 등이 사용될 수 있다. 식물 영상 처리부(231-2)는 영상 정보 DB에 저장된 조도, 카메라의 감도, 카메라의 셔터 속도, 카메라의 해상도 등과 같은 정보를 이용하여 이미지 처리 과정에 사용할 수 있다. The plant image processing unit 231-2 of the information extraction module 223 extracts a target plant area by using an image processing technique. The image processing process used in this process can be widely known technology. The plant image processing unit 231-2 can use the information stored in the image information DB, such as the illuminance, the sensitivity of the camera, the shutter speed of the camera, the resolution of the camera, and the like, for image processing.

한편, 제1 데이터 베이스(231)에 축적되는 영상 정보 등은 다수의 사용자로부터 전송된 식물 영상의 신뢰성을 판단하기 위해 사용될 수 있다. 지나치게 높거나 낮은 조도, 감도, 조리개, 셔터 속도의 값은 식물 영상의 인식을 위한 학습 과정에 고려되어 유용한 식물 영상에 기반한 인식 모델을 자동 생성하도록 구성될 수 있다.Meanwhile, the image information accumulated in the first database 231 can be used to determine the reliability of the plant image transmitted from a plurality of users. Values of excessively high or low illuminance, sensitivity, iris, and shutter speed can be configured to automatically generate a recognition model based on useful plant images in consideration of the learning process for recognizing plant images.

정보 추출 모듈(223)의 후보 필터부(231-1)는 기상 정보 DB에 저장된 기상 정보, 위치 정보 DB에 저장된 위치 정보 및 시간 정보 DB에 저장된 시간 정보 중 적어도 하나를 이용하여 후보 식물 정보 DB에 포함된 최초 후보 그룹을 필터링한다. 기상 정보, 위치 정보 및 시간 정보 중 적어도 하나를 이용하여 최초 후보 그룹에서 대상이 되지 않는 식물들을 제거한 최종 후보 그룹을 결정한다.The candidate filter unit 231-1 of the information extraction module 223 uses at least one of the weather information stored in the weather information DB, the location information stored in the location information DB, and the time information stored in the time information DB, Filter the first candidate group included. The final candidate group is determined by removing at least one of the plants from the initial candidate group by using at least one of the weather information, the location information, and the time information.

후보 필터부(231-1)는 식물 데이터 베이스(230)에 축적된 자연정보인 습도, 온도, 고도의 높낮이를 판단하여 DB에 질의 후 조건에 부합하는 식물들로 1차 인식 후보를 구성할 수 있다. 또한, 위치정보를 활용하여 해당 위치에 주로 서식하는 식물들로 2차 인식 후보를 구성하고, 두 인식 후보 집단의 교집합 및 합집합 연산 또는 규칙기반 단계적 소거법 등을 통해 최종 후보 그룹을 결정할 수 있다. The candidate filter unit 231-1 can determine the humidity, temperature, and altitude of the natural information accumulated in the plant database 230 and construct a first recognition candidate with the plants matching the post-query condition in the DB have. Secondary recognition candidates can be composed of plants that mainly live in the corresponding locations using the location information, and the final candidate group can be determined through intersection and union calculation of two recognition candidate groups or rule-based stepwise elimination.

최종 후보 그룹이 결정되면, 식물 매칭부(223-3)는 식물 영상 처리부(223-2)에서 추출한 타겟 식물 영역을 기준으로 제2 데이터 베이스(232)에서 최종 후보 그룹 만을 대상으로 매칭되는 식물이 있는지 여부를 검색한다. 식물 매칭부(223-3)가 매칭되는 식물을 검색하면, 해당 식물에 대한 식별 정보(매칭 식물 식별 정보)를 소스 정보 추출부(223-4)에 전달한다.When the final candidate group is determined, the plant matching unit 223-3 determines whether the plant matched to only the final candidate group in the second database 232 based on the target plant region extracted by the plant image processing unit 223-2 Or not. When the plant matching unit 223-3 searches for a plant to be matched, it transmits identification information (matching plant identification information) to the source information extracting unit 223-4.

소스 정보 추출부(223-4)는 매칭 식물 식별 정보를 기준으로 제2 데이터 베이스에서 매칭되는 식물에 대한 정보를 추출한다. 소스 정보 추출부(223-4)가 추출한 식물 정보는 통신 모듈(221)을 통해 해당 식물 정보를 이동 단말(210)에 전달된다.The source information extracting unit 223-4 extracts information on plants matched in the second database based on the matching plant identification information. The plant information extracted by the source information extracting unit 223-4 is transmitted to the mobile terminal 210 via the communication module 221.

한편 제1 정보는 식물 영상에 촬영된 식물에 대한 생물학적 소스 정보 중 특정 정보를 요청하는 요청 메시지를 더 포함할 수 있다. 이 경우 정보 추출 모듈(223)은 요청 메시지를 소스 정보 추출부(223-4)에 전달하여, 요청된 특정 정보만을 추출할 수 있다. The first information may further include a request message for requesting specific information from the biological source information about the plant photographed in the plant image. In this case, the information extraction module 223 can transmit the request message to the source information extraction unit 223-4 to extract only the specific information requested.

나아가, 이동 단말(210)이 식물 영상 없이, 특정한 식물에 대한 정보를 조회할 수도 있다. 이 경우 식물 영상을 처리하는 구성(식물 영상 처리부)은 동작하지 않고, 정보 추출 모듈(223)은 제2 정보를 이용하여 최종 후보 그룹을 결정하고, 제1 정보에 포함되는 사용자가 입력한 정보를 이용하여 제2 데이터 베이스에서 해당하는 식물에 대한 정보만을 추출할 수 있다. 이 경우 식물 정보 가공 모듈(224)은 제1 정보에 식물 영상 정보가 있는지 또는 제1 정보에 포함된 요청 메시지가 단순한 정보 조회인지를 식별하여 사용자 요청에 맞게 정보 추출 모듈(223)로부터 전송된 데이터를 통합하여 가공한다.
Further, the mobile terminal 210 may inquire information about a specific plant without a plant image. In this case, the configuration for processing the plant image (the plant image processing unit) does not operate, and the information extraction module 223 determines the final candidate group using the second information and outputs the information input by the user included in the first information It is possible to extract only the information about the corresponding plant in the second database. In this case, the plant information processing module 224 identifies whether the first information includes the plant image information or the request message included in the first information is a simple information inquiry, and transmits the data transmitted from the information extraction module 223 .

도 6은 이동 단말(210)의 인터페이스 화면의 예를 도시한다. 도 6에서 홈 화면(301)은 이동 단말(210)의 초기 화면을 예시한다. "식물 인식" 메뉴를 선택하면, 카메라가 동작하여 카메라 화면(302)이 나타난다. 카메라 화면(302)에서 사용자가 원하는 식물 영상을 촬영하기 위하여 "찍기"라는 메뉴를 선택할 수 있고, "홈으로"라는 메뉴를 선택하면 홈 화면(301)으로 돌아갈 수 있다. "찍기"라는 메뉴를 선택한 경우 식물 영상을 획득하면, 이후 이동 단말(210)에서 식물 영상을 포함하는 제1 정보 및 기상 정보 등을 포함하는 제2 정보를 식물 정보 서버(220)에 전송하여 매칭되는 식물에 대한 정보를 수신하고, 매칭되는 식물 정보를 출력한다(303). FIG. 6 shows an example of an interface screen of the mobile terminal 210. FIG. In FIG. 6, the home screen 301 illustrates an initial screen of the mobile terminal 210. When the "plant recognition" menu is selected, the camera operates and the camera screen 302 is displayed. The user can select a menu called "Take" in order to photograph a desired plant image on the camera screen 302, and return to the home screen 301 by selecting a menu called "Home ". When the menu item "Take" is selected, the plant information server 220 transmits the second information including the first information and the weather information including the plant image to the plant information server 220, And outputs the matched plant information (303).

홈 화면(301)에서 "정보 조회"를 선택할 수 있다. 정보 조회는 식물 영상을 촬영하지 않고, 해당 지역 또는 지역에 관계없이 특정 식물에 대한 정보를 조회하기 위한 것이다. 해당 지역의 특정 식물을 조회하기 위한 하나의 방법으로 지도를 이용할 수 있다. 콘텐츠 지도 화면(304)은 사용자에게 지도를 제공하여, 지도에 표시되는 마커를 클릭하여 특정 지역을 선택하고, 해당 지역에 대한 식물 정보를 이동 단말의 화면에 출력한다(305). Quot; information inquiry "can be selected on the home screen 301. Information retrieval is for retrieving information about a specific plant, regardless of the region or region, without photographing the plant image. You can use the map as a way to look up specific plants in your area. The content map screen 304 provides a map to the user, selects a specific area by clicking the marker displayed on the map, and outputs plant information for the area to the screen of the mobile terminal (305).

또한 홈 화면(301)에서 "포스팅"을 선택하면, 인터넷 게시판을 쓰는 것과 같이 사용자가 관찰한 지역 또는 식물에 대한 정보를 입력할 수도 있다(306). 포스트 작성 화면(306)에서 제목과 내용을 입력하여 "등록" 메뉴를 선택하면, 해당 정보가 식물 정보 서버(220)에 전달된다. 개별 사용자가 등록한 정보는 이후 식물 데이터 베이스 업데이트에 사용될 수도 있다.
In addition, if "posting" is selected on the home screen 301, information on a region or a plant observed by the user, such as an Internet bulletin board, may be input (306). When the title and contents are entered on the post creation screen 306 and the "Registration" menu is selected, the information is transmitted to the plant information server 220. The information registered by individual users may be used for future plant database updates.

식물 정보 서버(220)는 식물 데이터 베이스에 접근하여 생물학적 소스 정보를 업데이트하는 관리자 모듈(240)을 더 포함할 수도 있다. 도 3에서는 관리자 모듈(240)을 식물 정보 서버(220)와는 별도로 도시하였다. 도 3과 같이 식물 정보 서버(220)와는 독립된 별도의 인터페이스 장치로 구성될 수도 있을 것이다.The plant information server 220 may further include an administrator module 240 for accessing the plant database and updating the biological source information. In FIG. 3, the administrator module 240 is shown separately from the plant information server 220. The plant information server 220 may be configured as a separate interface device independent of the plant information server 220 as shown in FIG.

관리자 모듈(240)은 위치 정보에 기반한 전자 지도를 저장하는 지도 저장부(241), 전자 지도를 출력하는 디스플레이부(242) 및 정보를 입력하는 인터페이스부(243)를 포함하고, 전자 지도에서 위치 정보를 기준으로 상기 식물 데이터 베이스를 업데이트할 수 있다.The manager module 240 includes a map storage section 241 for storing an electronic map based on position information, a display section 242 for outputting an electronic map, and an interface section 243 for inputting information. The plant database may be updated based on the information.

도 7은 관리자 모듈에서 식물 데이터 베이스를 업데이트하는 예를 도시한다. 도 7은 관리자 모듈(240)의 디스플레이부(242)에 출력되는 화면의 예를 도시한 것이다. 사용자 또는 관리자는 관리자 모듈(240)의 지도 저장부(241)의 데이터를 이용하여 도 7과 같이 특정 지도의 특정 지역(사각형 박스)을 선택할 수 있다. 특정 지역을 선택하면 해당 지역에 자생하는 식물의 종류가 표시될 수 있다. 자생하는 식물 중 특정한 식물을 선택하면, 해당 식물에 대한 정보가 하단에 표시될 수 있다. 도 7의 하단에는 선택한 식물에 대한 DB 정보가 출력되는 예를 도시하였다.7 shows an example of updating the plant database in the manager module. 7 shows an example of a screen that is output to the display unit 242 of the manager module 240. FIG. A user or an administrator can select a specific area (rectangular box) of a specific map as shown in FIG. 7 using the data stored in the map storage unit 241 of the manager module 240. [ If you select a specific area, the type of plant that is native to the area may be displayed. If a particular plant is selected among the native plants, information about that plant may be displayed at the bottom. 7 shows an example of outputting DB information about the selected plant.

관리자 모듈(240)은 일종의 컴퓨터 장치에 해당한다. 식물에 대한 정보가 출력되는 화면에서 관리자는 인터페이스부(243)를 통해 정보를 편집하거나 업데이트할 수 있다. 즉, 키보드 및 마우스와 같은 장치를 통해 해당 정보의 텍스트를 직접 편집할 수도 있고, 파일 입출력 장치를 이용하여 해당 정보를 전체적으로 업데이트하거나 변경할 수도 있을 것이다. 따라서 인터페이스부(243)은 관리자 모듈(242)에 연결된 키보드, 마우스 등뿐만 아니라, 관리자 모듈(242)에 내장된 파일 입출력 장치, 관리자 모듈(242)이 외부 서버와 데이터를 주고 받는 통신 모듈 등을 포함한다.The administrator module 240 corresponds to a kind of computer device. The administrator can edit or update the information through the interface unit 243 on the screen on which the information about the plant is output. That is, the text of the information may be directly edited through a device such as a keyboard and a mouse, or the information may be updated or changed as a whole using the file input / output device. Therefore, the interface unit 243 can be configured not only to connect a keyboard and a mouse connected to the manager module 242 but also to a file input / output device built in the manager module 242, a communication module for exchanging data with an external server, .

도 7의 하단에 식물 정보가 출력되는 화면은 몇 개의 탭이 있다. 현재는 "식물 DB 정보"가 선택된 상태이다. "수집 식물 영상" 탭을 선택하면, 해당 지역에서 개별 사용자가 전송한 식물 영상이 표시될 수 있다. 이 경우 관리자는 개별 사용자가 전송한 식물이 새로운 식물이거나, 종래 식물이라도 식물 영상에 대한 업데이트가 필요한 경우에는 수집 식물 영상을 이용할 수 있다. 또한 "포스팅 정보"는 개별 사용자가 식물에 대한 정보를 업로드한 내용을 표시하고, 관리자는 이를 참조하여 식물 데이터 베이스를 업데이트할 수도 있다.The screen on which the plant information is output at the bottom of Fig. 7 has several tabs. Currently, "plant DB information" is selected. If you select the "Collecting Plant Image" tab, the plant images transmitted by individual users in the area can be displayed. In this case, the manager can use the collected plant image when the plant transferred by the individual user is a new plant or an update of the plant image is required even in a conventional plant. The "posting information" may also indicate that individual users have uploaded information about the plant, and the administrator may update the plant database with reference to the information.

나아가 별도의 관리자 모듈(240)을 두지 않고, 관리자는 식물 정보 서버(220)를 통해 식물 데이터 베이스(230)에 저장되는 제1 정보 및 제2 정보를 매칭되는 식물 정보에 업데이트를 할 수도 있을 것이다.Further, the administrator may update the matching plant information with the first information and the second information stored in the plant database 230 through the plant information server 220 without installing a separate administrator module 240 .

본 실시예 및 본 명세서에 첨부된 도면은 본 발명에 포함되는 기술적 사상의 일부를 명확하게 나타내고 있는 것에 불과하며, 본 발명의 명세서 및 도면에 포함된 기술적 사상의 범위 내에서 당업자가 용이하게 유추할 수 있는 변형 예와 구체적인 실시예는 모두 본 발명의 권리범위에 포함되는 것이 자명하다고 할 것이다.It is to be understood that both the foregoing general description and the following detailed description of the present invention are exemplary and explanatory and are intended to provide further explanation of the invention as claimed. It will be understood that variations and specific embodiments which may occur to those skilled in the art are included within the scope of the present invention.

100 : 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템
110 : 이동 단말 111 : 카메라
112 : 기상 정보 센서 113 : 위치 측정 센서
114 : 통신 모듈 115 : 정보 출력 모듈
120 : 네트워크 장치 130 : 식물 정보 서버
131 : 통신모듈 132 : 정보 추출 모듈
133 : 타겟 정보 저장 모듈 134 : 소스 정보 저장 모듈
200 : 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템
210 : 이동 단말 211 : 카메라
212 : 기상 정보 모듈 213 : 위치 측정 모듈
214 : 시간 정보 모듈 215 : 영상 정보 모듈
216 : 통신 모듈 217 : 정보 출력 모듈
220 : 식물 정보 서버 221 : 통신 모듈
222 : 수신 정보 처리 모듈 223 : 정보 추출 모듈
223-1 : 후보 필터부 223-2 : 식물 영상 처리부
223-3 : 식물 매칭부 223-4 : 소스 정보 추출부
224 : 식물 정보 가공 모듈 230 : 식물 데이터 베이스
231 : 제1 데이터 베이스 232 : 제2 데이터 베이스
240 : 관리자 모듈 241 : 지도 저장부
242 : 디스플레이부 243 : 인터페이스부
100: Plant information providing system using plant images transmitted from a mobile terminal
110: mobile terminal 111: camera
112: weather information sensor 113: position sensor
114: communication module 115: information output module
120: network device 130: plant information server
131: communication module 132: information extraction module
133: target information storage module 134: source information storage module
200: Plant information providing system using plant image transmitted from mobile terminal
210: mobile terminal 211: camera
212: weather information module 213: position measurement module
214: Time information module 215: Image information module
216: Communication module 217: Information output module
220: Plant information server 221: Communication module
222: reception information processing module 223: information extraction module
223-1: candidate filter unit 223-2: plant image processing unit
223-3: Plant matching unit 223-4: Source information extracting unit
224: Plant information processing module 230: Plant database
231: first database 232: second database
240: Administrator module 241: Map storage section
242: display section 243: interface section

Claims (15)

삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 카메라를 통해 획득한 식물 영상을 포함한 제1 정보 및 센서를 이용하여 획득한 기상 정보, 외부 서버로부터 수신한 기상 정보, 위치 센서를 이용하여 획득한 위치 정보 및 날짜를 포함하는 시간 정보 중 적어도 하나를 포함하는 제2 정보를 식물 정보 서버에 전달하고, 상기 식물 영상에 매칭되는 식물 정보를 상기 식물 정보 서버로부터 수신하여 출력하는 이동 단말;
상기 이동 단말이 생성하는 상기 제1 정보 및 상기 제2 정보를 저장하고, 후보 식물들에 대한 영상 정보 및 상기 후보 식물에 대한 식물 정보를 저장하는 식물 데이터 베이스; 및
상기 식물 데이터 베이스에 저장된 모든 후보 식물들을 포함하는 초기 후보 식물 그룹에서 상기 제2 정보를 기준으로 최종 후보 식물 그룹을 결정하고, 상기 최종 후보 식물 그룹에서 상기 제1 정보에 포함된 상기 식물 영상과 매칭되는 영상 정보를 검색하고, 검색된 영상 정보에 대응되는 식물 정보를 상기 이동 단말에 전달하는 식물 정보 서버를 포함하되,
상기 이동 단말은 조도 센서를 더 포함하고, 상기 조도 센서를 통해 측정한 상기 식물 영상을 획득한 시점의 조도 및 상기 카메라에 대한 성능 정보를 상기 식물 정보 서버에 추가적으로 전달하고, 상기 식물 정보 서버는 상기 조도 및 상기 성능 정보를 이용하여 상기 식물 영상에 대한 이미지 처리를 수행하고, 상기 이미지 처리된 식물 영상과 매칭되는 상기 영상 정보를 검색하는 식물 영상을 이용한 식물 정보 제공 시스템.
At least one of weather information acquired using first information including a plant image acquired through a camera and weather information acquired using a sensor, weather information received from an external server, location information acquired using a location sensor, and time information including a date And transmitting the second information to the plant information server, receiving the plant information matching the plant image from the plant information server, and outputting the plant information;
A plant database for storing the first information and the second information generated by the mobile terminal and storing image information about candidate plants and plant information about the candidate plants; And
Determining a final candidate plant group based on the second information in an initial candidate plant group including all the candidate plants stored in the plant database and matching the final candidate plant group with the plant image included in the first information in the final candidate plant group And a plant information server for searching for image information to be transmitted to the mobile terminal and transmitting plant information corresponding to the retrieved image information to the mobile terminal,
Wherein the mobile terminal further comprises an illuminance sensor, and further transmits the illuminance at the time of acquiring the plant image measured through the illuminance sensor and performance information about the camera to the plant information server, A plant information providing system using the plant image to perform image processing on the plant image using the illuminance and the performance information, and to search the image information matched with the image of the plant image.
제7항에 있어서,
상기 이동 단말은
상기 식물 영상을 촬영하는 카메라;
온도 또는 습도 중 적어도 하나의 기상정보를 수집하는 기상 정보 모듈;
위도, 경도 및 고도를 포함하는 위치 정보를 측정하는 위치 측정 모듈;
날짜를 포함하는 시간 정보를 수집하는 시간 정보 모듈;
상기 식물 정보 서버와 데이터를 송수신하는 통신 모듈; 및
상기 식물 정보 서버로부터 수신한 식물 정보를 출력하는 정보 출력 모듈을 포함하는 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템.
8. The method of claim 7,
The mobile terminal
A camera for photographing the plant image;
A weather information module for collecting at least one weather information of temperature or humidity;
A position measurement module for measuring position information including latitude, longitude and altitude;
A time information module for collecting time information including a date;
A communication module for transmitting and receiving data to and from the plant information server; And
And an information output module for outputting plant information received from the plant information server.
제7항에 있어서,
상기 식물 정보 서버는
상기 이동 단말 및 상기 식물 데이터 베이스와 데이터를 주고 받는 통신 모듈;
상기 이동 단말에서 전달되는 상기 제1 정보 및 상기 제2 정보를 통신 규약에 따라 복호하고, 상기 제1 정보 및 상기 제2 정보를 상기 식물 데이터 베이스에 저장하기 위한 포맷으로 변환하는 수신 정보 처리 모듈;
상기 이동 단말이 전달한 상기 제1 정보 및 상기 제2 정보를 기준으로 상기 식물 데이터 베이스에서 매칭되는 식물에 대한 식물 정보를 추출하는 정보 추출 모듈;
상기 추출한 식물 정보를 상기 이동 단말에 전달하기 위한 데이터 포맷으로 가공하는 식물 정보 가공 모듈을 포함하는 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템.
8. The method of claim 7,
The plant information server
A communication module for exchanging data with the mobile terminal and the plant database;
A receiving information processing module that decodes the first information and the second information transmitted from the mobile terminal according to a communication protocol and converts the first information and the second information into a format for storage in the plant database;
An information extraction module for extracting plant information for a plant matched in the plant database based on the first information and the second information transmitted from the mobile terminal;
And a plant information processing module for processing the extracted plant information into a data format for delivering the plant information to the mobile terminal.
제9항에 있어서,
상기 정보 추출 모듈은
상기 제2 정보를 이용하여 상기 초기 후보 식물 그룹에서 대상이 아닌 식물을 필터링하여 상기 최종 후보 식물 그룹을 생성하는 후보 필터부;
상기 제1 정보에 포함되는 상기 식물 영상에서 타겟 식물 영역을 추출하는 식물 영상 처리부;
상기 최종 후보 식물 그룹에서 상기 타겟 식물 영역을 기준으로 매칭되는 식물을 검색하는 식물 매칭부; 및
상기 매칭되는 식물에 대한 식물 정보를 추출하는 소스 정보 추출부를 포함하는 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템.
10. The method of claim 9,
The information extraction module
A candidate filter unit for filtering the non-target plants in the initial candidate plant group using the second information to generate the final candidate plant group;
A plant image processing unit for extracting a target plant area from the plant image included in the first information;
A plant matching unit searching for a plant matched on the basis of the target plant area in the final candidate plant group; And
And a source information extracting unit for extracting plant information for the matching plant. The plant information providing system using the plant image transmitted from the mobile terminal.
삭제delete 제9항에 있어서,
상기 제1 정보는 상기 식물 영상에 촬영된 식물에 대한 식물 정보 중 특정 정보를 요청하는 요청 메시지를 더 포함하고, 상기 정보 추출 모듈은 상기 요청 메시지에 대응되는 식물 정보를 추출하는 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템.
10. The method of claim 9,
Wherein the first information further includes a request message for requesting specific information among the plant information about the plant photographed in the plant image, and the information extraction module transmits the plant information corresponding to the request message to the mobile terminal Plant information system using plant images.
제7항에 있어서,
상기 식물 정보 서버는
상기 식물 데이터 베이스에 접근하여 상기 식물 정보를 업데이트하는 관리자 모듈을 더 포함하는 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템.
8. The method of claim 7,
The plant information server
And a manager module for accessing the plant database and updating the plant information.
제13항에 있어서,
상기 관리자 모듈은
위치 정보에 기반한 전자 지도를 저장하는 지도 저장부, 전자 지도를 출력하는 디스플레이부 및 정보를 입력하는 인터페이스부를 포함하고, 상기 전자 지도에서 위치 정보를 기준으로 상기 식물 데이터 베이스를 업데이트하는 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템.
14. The method of claim 13,
The manager module
A map storage unit for storing an electronic map based on position information, a display unit for outputting an electronic map, and an interface unit for inputting information, wherein the electronic map is transmitted from a mobile terminal updating the plant database on the basis of positional information in the electronic map Plant information system using plant images.
제7항에 있어서,
상기 식물 정보 서버는
상기 식물 데이터 베이스에 저장되는 상기 제1 정보 및 상기 제2 정보를 상기 매칭되는 식물 정보에 업데이트하는 이동 단말로부터 전달되는 식물 영상을 이용한 식물 정보 제공 시스템.
8. The method of claim 7,
The plant information server
And the plant information is transmitted from a mobile terminal that updates the first information and the second information stored in the plant database with the matched plant information.
KR20130114193A 2013-09-26 2013-09-26 Providing system for plant information using plant image from mobile terminal KR101481323B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20130114193A KR101481323B1 (en) 2013-09-26 2013-09-26 Providing system for plant information using plant image from mobile terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130114193A KR101481323B1 (en) 2013-09-26 2013-09-26 Providing system for plant information using plant image from mobile terminal

Publications (1)

Publication Number Publication Date
KR101481323B1 true KR101481323B1 (en) 2015-01-14

Family

ID=52588694

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130114193A KR101481323B1 (en) 2013-09-26 2013-09-26 Providing system for plant information using plant image from mobile terminal

Country Status (1)

Country Link
KR (1) KR101481323B1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101792557B1 (en) * 2016-07-26 2017-11-20 박순구 Total management system for agriculture and stockbreeding or green facility
KR101822037B1 (en) * 2016-09-05 2018-01-25 (주)휴먼플래닛 Inspection system for natural ecosystem based on internet of things
CN107682400A (en) * 2017-09-01 2018-02-09 深圳市盛路物联通讯技术有限公司 Monitoring method and relevant device and related system based on mobile terminal
WO2019102954A1 (en) * 2017-11-21 2019-05-31 株式会社バイオーム Identifying device, identification method, identification system, and database structure
CN113049590A (en) * 2021-03-12 2021-06-29 湖南省林业科学院 Survey system based on big data intelligent recognition foreign plant
KR20220151279A (en) * 2021-05-06 2022-11-15 김광규 System for providing gps based plant exploration guidance service using multimedia contents

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08190573A (en) * 1995-01-12 1996-07-23 Hitachi Ltd Electronic picture book
JP2007188229A (en) * 2006-01-12 2007-07-26 Impress Japan:Kk Flower information inquiry method and flower information inquiry system
KR20120076491A (en) * 2010-11-26 2012-07-09 한국생명공학연구원 Plants information providing service system and method thereof
KR20130046250A (en) * 2011-10-27 2013-05-07 최영철 Smartphone to provide location information and dive condition

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08190573A (en) * 1995-01-12 1996-07-23 Hitachi Ltd Electronic picture book
JP2007188229A (en) * 2006-01-12 2007-07-26 Impress Japan:Kk Flower information inquiry method and flower information inquiry system
KR20120076491A (en) * 2010-11-26 2012-07-09 한국생명공학연구원 Plants information providing service system and method thereof
KR20130046250A (en) * 2011-10-27 2013-05-07 최영철 Smartphone to provide location information and dive condition

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101792557B1 (en) * 2016-07-26 2017-11-20 박순구 Total management system for agriculture and stockbreeding or green facility
KR101822037B1 (en) * 2016-09-05 2018-01-25 (주)휴먼플래닛 Inspection system for natural ecosystem based on internet of things
CN107682400A (en) * 2017-09-01 2018-02-09 深圳市盛路物联通讯技术有限公司 Monitoring method and relevant device and related system based on mobile terminal
WO2019102954A1 (en) * 2017-11-21 2019-05-31 株式会社バイオーム Identifying device, identification method, identification system, and database structure
JP2019095949A (en) * 2017-11-21 2019-06-20 株式会社バイオーム Determination device, method for determination, determination program, and determination system
US11048969B2 (en) 2017-11-21 2021-06-29 Biome Inc. Identification device, identification method, identification system, and database
CN113049590A (en) * 2021-03-12 2021-06-29 湖南省林业科学院 Survey system based on big data intelligent recognition foreign plant
CN113049590B (en) * 2021-03-12 2023-08-29 湖南省林业科学院 Foreign plant investigation system based on big data intelligent identification
KR20220151279A (en) * 2021-05-06 2022-11-15 김광규 System for providing gps based plant exploration guidance service using multimedia contents
KR102558086B1 (en) * 2021-05-06 2023-07-24 김광규 System for providing gps based plant exploration guidance service using multimedia contents

Similar Documents

Publication Publication Date Title
KR101481323B1 (en) Providing system for plant information using plant image from mobile terminal
US9672223B2 (en) Geo photo searching based on current conditions at a location
CN106060174A (en) Data analysis based agricultural guidance system
US9020265B2 (en) System and method of determining building numbers
US20120183172A1 (en) Community-Based Data for Mapping Systems
JP2009526302A (en) Method and system for tagging digital data
JP2005038103A (en) Guide device, guide system and guide method
JP5223034B2 (en) Information providing apparatus, information providing method, information providing processing program, and recording medium on which information providing processing program is recorded
CN106610983A (en) Picture management method and apparatus, and terminal
CN104392007A (en) Streetscape retrieval and identification method of intelligent mobile terminal
US20130246410A1 (en) Server, information-management method, information-management program, and computer-readable recording medium with said program recorded thereon
JPWO2012164685A1 (en) INFORMATION PROVIDING DEVICE, INFORMATION PROVIDING METHOD, INFORMATION PROVIDING PROCESSING PROGRAM, RECORDING MEDIUM CONTAINING INFORMATION PROVIDING PROCESSING PROGRAM, AND INFORMATION PROVIDING SYSTEM
KR101397873B1 (en) Apparatus and method for providing contents matching related information
CN108318024A (en) A kind of geo-positioning system and method based on image recognition cloud service
CN110413839A (en) A kind of label data sharing method, device and the equipment of image capture device
KR102107207B1 (en) Image Searching Method, and Media Recorded with Program Executing Image Searching Method
CN105808789A (en) Information search engine in combination with geographic positions
JP2003330953A (en) Server device, portable terminal, information provision system, information provision method, and information acquisition method
JP2005108027A (en) Method and program for providing object information
CN103226559B (en) For the SOI object of combination and the spatial information directory system of content
US9064020B2 (en) Information providing device, information providing processing program, recording medium having information providing processing program recorded thereon, and information providing method
CN115934634A (en) Machine patrol photo collection method, device, equipment and medium
US10331733B2 (en) System and method for presenting condition-specific geographic imagery
KR20070039250A (en) A system of seek for an identify object using mobile devices and method thereof
JP5687995B2 (en) Subject search device, subject search method, subject search information providing program, and subject search program

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180102

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190104

Year of fee payment: 5