KR101855488B1 - Apparatus for predicting ovulation day using estrogen cycle - Google Patents

Apparatus for predicting ovulation day using estrogen cycle Download PDF

Info

Publication number
KR101855488B1
KR101855488B1 KR1020160156482A KR20160156482A KR101855488B1 KR 101855488 B1 KR101855488 B1 KR 101855488B1 KR 1020160156482 A KR1020160156482 A KR 1020160156482A KR 20160156482 A KR20160156482 A KR 20160156482A KR 101855488 B1 KR101855488 B1 KR 101855488B1
Authority
KR
South Korea
Prior art keywords
saliva
unit
crystal structure
image
ovulation
Prior art date
Application number
KR1020160156482A
Other languages
Korean (ko)
Other versions
KR20180057959A (en
Inventor
이재민
Original Assignee
주식회사 바이탈스미스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 바이탈스미스 filed Critical 주식회사 바이탈스미스
Priority to KR1020160156482A priority Critical patent/KR101855488B1/en
Priority to US16/346,018 priority patent/US20190261960A1/en
Priority to PCT/KR2016/013570 priority patent/WO2018079916A1/en
Publication of KR20180057959A publication Critical patent/KR20180057959A/en
Application granted granted Critical
Publication of KR101855488B1 publication Critical patent/KR101855488B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B10/00Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements
    • A61B10/0012Ovulation-period determination
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0264Details of the structure or mounting of specific components for a camera module assembly

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Signal Processing (AREA)
  • Investigating Or Analysing Biological Materials (AREA)

Abstract

본 발명의 일 실시예는 대상체의 타액을 수용하는 타액수용부를 포함하는 타액 취득 장치가 삽입 가능한 배란일 예측 장치에 있어서, 일면에 전자 장치가 장착되며 상기 전자 장치의 카메라부가 위치하도록 상기 일면에 개구가 형성된 바디부, 상기 타액 취득 장치가 일정한 깊이로 삽입되도록 상기 바디부의 일측에 형성된 삽입부 및 상기 바디부의 내부에 배치되며 상기 타액 취득 장치로 광을 제공하는 광원부를 포함하는 여성호르몬(estrogen) 주기를 통한 배란일 예측 장치를 제공한다.An embodiment of the present invention is an ovulation date predicting apparatus capable of inserting a saliva acquiring device including a saliva receiving device for receiving a saliva of a target object, the ovulation-date predicting device comprising an electronic device mounted on one surface, An estrogen cycle including an insertion portion formed at one side of the body portion and a light source portion provided inside the body portion to provide light to the saliva acquisition device such that the saliva acquisition device is inserted at a predetermined depth, Thereby providing an apparatus for predicting ovulation date through ovulation.

Description

여성호르몬(에스트로겐) 주기를 통한 배란일 예측 장치{Apparatus for predicting ovulation day using estrogen cycle}[0001] Apparatus for predicting ovulation day using estrogen cycle [

본 발명의 실시예들은 여성호르몬(에스트로겐) 주기를 통한 배란일 예측 장치에 대한 것이다.Embodiments of the present invention are directed to an apparatus for predicting an ovulation date through a female hormone (estrogen) cycle.

사회가 변화되면서 임신계획 및 피임계획의 중요성이 점진적으로 중요시되고 있는데, 피임의 경우에는 여성의 배란주기를 고려한 자연피임과, 별도의 약품이나 도구를 이용한 인위적인 피임이 대표적이며, 임신의 경우에는 여성의 배란주기를 고려하여 성관계 일정을 조절하는 방법과, 수술등을 통한 인위적인 체외/체내 수정등의 방법이 널리 적용되고 있다. 그러나, 인위적인 방법은 피임과 임신의 성공확률이 높은 반면, 여성 혹은 남성의 신체에 좋지 않은 영향을 줄 수 있어서, 여성의 배란주기를 고려한 자연적인 방법이 장려되고 있다. As society changes, the importance of pregnancy planning and contraceptive planning becomes increasingly important. In contraception, natural contraception, which considers women's ovulation cycle, and artificial contraception using separate medications and tools, A method of regulating sexual intercourse in consideration of the ovulation cycle of the ovary, and an artificial in vitro / in vivo fertilization through surgery etc. have been widely applied. However, anthropogenic methods have a high probability of success in contraception and pregnancy, but can adversely affect the body of women or men, thus encouraging natural methods that take into account the female ovulation cycle.

여성의 배란상태를 측정하는 방법은 그 여부를 판단하는 매개변수에 따라서 여러가지 방식으로 구분되는데, 그 중에서도 인체의 체액으로부터 루테인(Lutein) 호르몬의 함량을 측정하여 이를 매개로 배란 여부를 판단하는 방법이 가장 정확하다고 할 수 있다. 그러나, 이러한 방법은 특수한 안전규칙을 요하므로, 지정된 기관의 전문가에게 검사를 의뢰해야 하는 불편함이 있어서, 여성들이 사실상 이를 기피하고 있는 실정이다. The method of measuring the ovulation status of a woman is classified into various methods according to the parameters for determining whether or not the ovulation state of the woman is a method of measuring the content of the lutein hormone from the body fluid of the human body It is the most accurate. However, since this method requires special safety rules, it is inconvenient for a specialist of a designated institution to request an inspection, and women are in fact avoiding it.

반면, 여성의 기초체온을 측정하여 이를 매개로 배란 여부를 판단하거나, 목의 목안의 점액을 채취한 후 이의 건조과정에서의 결정체를 관찰해서 배란 여부를 판단하는 방법은 그 사용이 매우 편리하여 여성들이 가장 손쉽게 이용하고 있지만, 점액의 결정체와 여성의 기초체온은 질병이나 주위환경변화와 같은 외부적인 요인 에 의해서 변화될 수 있기 때문에 배란 여부판단의 신뢰성이 크게 저하되는 문제가 있다. On the other hand, the method of determining the ovulation condition by measuring the basal body temperature of a woman and judging whether ovulation has occurred through mediation thereof or collecting mucus in the neck of a throat and observing the crystals in its drying process is very convenient, Is the easiest to use. However, since the mucus crystals and the basal body temperature of a woman can be changed by an external factor such as a disease or a change in the surrounding environment, there is a problem that the reliability of the judgment of ovulation is greatly reduced.

상기한 문제 및/또는 한계를 해결하기 위하여, 타액의 영상분석을 통해 배란일을 측정할 수 있는 배란일 예측 장치를 제공하는 데에 목적이 있다.An object of the present invention is to provide an apparatus for predicting an ovulation date by measuring an image of an ovulation date through saliva image analysis in order to solve the above problems and / or limitations.

본 발명의 일 실시예는 대상체의 타액을 수용하는 타액수용부를 포함하는 타액 취득 장치가 삽입 가능한 배란일 예측 장치에 있어서, 일면에 전자 장치가 장착되며 상기 전자 장치의 카메라부가 위치하도록 상기 일면에 개구가 형성된 바디부, 상기 타액 취득 장치가 일정한 깊이로 삽입되도록 상기 바디부의 일측에 형성된 삽입부 및 상기 바디부의 내부에 배치되며 상기 타액 취득 장치로 광을 제공하는 광원부를 포함하는 배란일 예측 장치를 제공한다.An embodiment of the present invention is an ovulation date predicting apparatus capable of inserting a saliva acquiring device including a saliva collecting device for containing a saliva of a subject, the apparatus having an electronic device mounted on one surface thereof and having an opening An insertion portion formed at one side of the body portion to insert the saliva acquisition device at a predetermined depth, and a light source portion disposed inside the body portion and providing light to the saliva acquisition device.

본 발명의 일 실시예에 있어서, 상기 카메라부의 외곽 형상에 대응되는 형상으로 이루어진 인입구를 포함하며, 상기 바디부의 일면의 일 영역에 착탈가능한 카메라거치부;를 더 포함할 수 있다.According to an embodiment of the present invention, the apparatus may further include a camera mount part including an inlet formed in a shape corresponding to an outer shape of the camera part, and attachable to and detachable from a part of one surface of the body part.

본 발명의 일 실시예에 있어서, 상기 개구와 상기 삽입부 사이에 배치되며, 상기 타액의 이미지를 확대시키는 하나 이상의 렌즈를 구비하는 광학부;를 더 포함할 수 있다.In one embodiment of the present invention, the apparatus may further include an optical part disposed between the opening and the insertion part, the optical part having at least one lens for enlarging an image of the saliva.

본 발명의 일 실시예에 있어서, 상기 타액 취득 장치에 수용된 상기 타액을 건조시키는 건조부;를 더 포함할 수 있다.In one embodiment of the present invention, the apparatus may further include a drying unit for drying the saliva stored in the saliva collecting apparatus.

본 발명의 다른 실시예는, 대상체의 타액을 수용하는 타액수용부를 포함하는 타액 취득 장치가 삽입 가능한 배란일 예측 장치에 있어서, 외관을 형성하는 바디부, 상기 타액 취득 장치가 일정한 깊이로 삽입되도록 상기 바디부의 일측에 형성된 삽입부, 상기 삽입부에 삽입된 상기 타액 취득 장치를 촬상하도록 상기 바디부의 내부에 배치되는 카메라부, 상기 바디부의 내부에 배치되며 상기 타액 취득 장치로 광을 제공하는 광원부 및 상기 카메라부를 이용하여 상기 타액의 촬상이미지를 획득하고, 상기 획득된 촬상이미지를 처리하여 상기 타액에 포함된 호르몬의 결정 구조 이미지를 추출하고, 상기 추출된 결정 구조 이미지에 기초하여 상기 대상체의 배란일 여부를 판단하는 제어부를 포함하는 배란일 예측 장치를 제공한다.According to another embodiment of the present invention, there is provided an ovulation-date predicting apparatus capable of inserting a saliva-collecting device including a saliva-receiving portion for receiving saliva of a subject, the apparatus comprising: a body portion for forming an outer appearance; A camera section disposed in the body section to capture the saliva acquisition device inserted into the insertion section, a light source section disposed in the body section and providing light to the saliva acquisition device, Extracting a crystal structure image of a hormone contained in the saliva by processing the acquired image and determining whether the subject is ovulation based on the extracted crystal structure image; And an ovulation date predicting device.

본 발명의 일 실시예에 있어서, 상기 제어부는 상기 획득된 촬상이미지를 복수의 단위 픽셀들로 구분하고, 상기 복수의 단위 픽셀들 각각을 수치화하여 상기 촬상이미지로부터 상기 결정 구조 이미지를 추출할 수 있다.In one embodiment of the present invention, the controller divides the obtained captured image into a plurality of unit pixels, and extracts the crystal structure image from the captured image by digitizing each of the plurality of unit pixels .

본 발명의 일 실시예에 있어서, 상기 제어부는 상기 획득된 촬상이미지로부터 복수의 코너점들을 추출하고, 상기 코너점의 수치 값을 기준으로 제1 수치범위 내의 수치 값을 갖고 상기 코너점으로부터 연속적으로 연결되는 제1 픽셀들을 추출하고, 상기 추출된 제1 픽셀들을 기초로 상기 추출된 제1 픽셀들이 상기 호르몬의 결정 구조에 해당하는지를 판단할 수 있다.In one embodiment of the present invention, the controller extracts a plurality of corner points from the obtained captured image, and has a numerical value within a first numerical range on the basis of the numerical value of the corner point, It is possible to extract first pixels connected and determine whether the extracted first pixels correspond to the crystal structure of the hormone based on the extracted first pixels.

본 발명의 일 실시예에 있어서, 상기 복수의 코너점들은 상기 획득된 촬상이미지에 포함된 복수의 영역들 각각에서 임의의 단위 픽셀과 상기 임의의 단위 픽셀에 인접한 주변 픽셀들의 수치 비교를 통해 상대적으로 추출될 수 있다.In an embodiment of the present invention, the plurality of corner points may be relatively moved through numerical comparison of any unit pixel in each of a plurality of regions included in the obtained captured image and neighboring pixels adjacent to the arbitrary unit pixel Can be extracted.

본 발명의 일 실시예에 있어서, 상기 제어부는 상기 제1 픽셀들이 사전에 설정된 제1 기준값 이상의 길이로 연결되는 경우, 상기 호르몬의 결정 구조라고 판단할 수 있다.In one embodiment of the present invention, when the first pixels are connected to a length greater than or equal to a predetermined first reference value, the control unit can determine the crystal structure of the hormone.

본 발명의 일 실시예에 있어서, 상기 제어부는 상기 추출된 결정 구조 이미지들 각각의 길이 또는 두께를 계산하고, 상기 길이 또는 두께를 기초로 하여 상기 추출된 결정 구조 이미지들을 분류하여 분류데이터를 생성하고, 상기 분류데이터를 이용하여 상기 배란일 여부에 관한 확률을 계산할 수 있다.In one embodiment of the present invention, the controller calculates the length or thickness of each of the extracted crystal structure images, classifies the extracted crystal structure images based on the length or thickness, generates classification data , The probability of the ovulation can be calculated using the classification data.

본 발명의 일 실시예에 있어서, 상기 제어부는 상기 제1 픽셀들의 방향성을 이용하여 상기 결정 구조 이미지의 유효 여부를 결정할 수 있다.In one embodiment of the present invention, the controller may determine the validity of the crystal structure image using the directionality of the first pixels.

본 발명의 일 실시예에 있어서, 상기 카메라부와 상기 삽입부 사이에 배치되며, 상기 타액의 이미지를 확대시키는 하나 이상의 렌즈를 구비하는 광학부;를 더 포함할 수 있다.According to an embodiment of the present invention, the apparatus may further include an optical unit disposed between the camera unit and the insertion unit, the optical unit including at least one lens for enlarging an image of the saliva.

본 발명의 일 실시예에 있어서, 상기 타액 취득 장치에 수용된 상기 타액을 건조시키는 건조부;를 더 포함할 수 있다.In one embodiment of the present invention, the apparatus may further include a drying unit for drying the saliva stored in the saliva collecting apparatus.

전술한 것 외의 다른 측면, 특징, 이점이 이하의 도면, 특허청구범위 및 발명의 상세한 설명으로부터 명확해질 것이다.Other aspects, features, and advantages will become apparent from the following drawings, claims, and detailed description of the invention.

본 발명의 실시예들에 따른 배란일 예측 장치는 촬상이미지로부터 결정 구조 이미지들을 추출하고 분류화하여 확률을 계산함으로써, 정확한 배란일 예측이 가능할 수 있다.The apparatus for predicting the ovulation date according to the embodiments of the present invention can extract accurate corpuscular images from the image,

도 1은 본 발명의 일 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템을 개략적으로 도시한 개념도이다.
도 2는 도 1의 배란일 예측 장치를 Ⅱ-Ⅱ'선을 따라 절취한 단면도이다.
도 3은 도 1의 타액 취득 장치를 개략적으로 나타낸 사시도이다.
도 4는 도 3의 타액 취득 장치의 동작 방법을 설명하기 위해 도시한 개념도이다.
도 5는 도 3의 S영역을 도시한 확대 도면이다.
도 6은 타액에 포함된 황체형성호르몬의 결정구조와 배란주기와의 상관관계를 개략적으로 도시한 도면이다.
도 7은 배란여부에 따른 황체형성호르몬의 결정 구조를 도시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템의 제어부에서의 제어 방법을 순차적으로 도시한 순서도이다.
도 9는 본 발명의 다른 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템(20)을 개략적으로 도시한 개념도이다.
도 10은 도 9의 영상처리 및 분석시스템에서의 제어 방법을 순차적으로 도시한 순서도이다.
1 is a conceptual diagram schematically illustrating an image processing and analysis system for measuring ovulation date according to an embodiment of the present invention.
2 is a cross-sectional view taken along line II-II 'of the apparatus for predicting the ovulation date of FIG.
Fig. 3 is a perspective view schematically showing the saliva acquisition device of Fig. 1; Fig.
Fig. 4 is a conceptual diagram for explaining a method of operating the saliva obtaining apparatus of Fig. 3; Fig.
5 is an enlarged view showing the area S in Fig.
FIG. 6 is a schematic view showing the correlation between the crystal structure of the luteinizing hormone contained in the saliva and the ovulation cycle. FIG.
FIG. 7 is a diagram showing the crystal structure of luteinizing hormone according to ovulation. FIG.
8 is a flowchart sequentially illustrating a control method in a controller of an image processing and analysis system for measuring ovulation date according to an embodiment of the present invention.
9 is a conceptual diagram schematically showing an image processing and analysis system 20 for measuring ovulation date according to another embodiment of the present invention.
10 is a flowchart sequentially showing control methods in the image processing and analysis system of FIG.

이하, 첨부된 도면을 참조하여 이하의 실시예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings, wherein like reference numerals refer to like or corresponding parts throughout the drawings, and a duplicate description thereof will be omitted.

본 실시예들은 다양한 변환을 가할 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 실시예들의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 내용들을 참조하면 명확해질 것이다. 그러나 본 실시예들은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다. These embodiments are capable of various transformations, and specific embodiments are illustrated in the drawings and described in detail in the detailed description. The effects and features of the embodiments, and how to achieve them, will be apparent from the following detailed description taken in conjunction with the drawings. However, the embodiments are not limited to the embodiments described below, but may be implemented in various forms.

이하의 실시예에서 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다. In the following embodiments, the terms first, second, and the like are used for the purpose of distinguishing one element from another element, not the limitative meaning.

이하의 실시예에서 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.In the following examples, the singular forms "a", "an" and "the" include plural referents unless the context clearly dictates otherwise.

이하의 실시예에서 포함하다 또는 가지다 등의 용어는 명세서상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징들 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다. In the following embodiments, terms such as inclusive or having mean that a feature or element described in the specification is present, and do not exclude the possibility that one or more other features or elements are added in advance.

이하의 실시예에서 유닛, 영역, 구성 요소 등의 부분이 다른 부분 위에 또는 상에 있다고 할 때, 다른 부분의 바로 위에 있는 경우뿐만 아니라, 그 중간에 다른 유닛, 영역, 구성 요소 등이 개재되어 있는 경우도 포함한다. In the following embodiments, when a unit, a region, an element, or the like is on or on another portion, not only the case where the portion is directly on another portion but also another unit, region, .

이하의 실시예에서 연결하다 또는 결합하다 등의 용어는 문맥상 명백하게 다르게 뜻하지 않는 한, 반드시 두 부재의 직접적 및/또는 고정적 연결 또는 결합을 의미하는 것은 아니며, 두 부재 사이에 다른 부재가 개재된 것을 배제하는 것이 아니다.In the following embodiments, terms such as joining or joining do not necessarily mean a direct and / or fixed connection or coupling of two members unless the context clearly indicates otherwise, and it is understood that other members are interposed between the two members It is not excluded.

명세서상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징들 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다.Means that there is a feature or element described in the specification and does not preclude the possibility that one or more other features or components will be added.

도면에서는 설명의 편의를 위하여 구성 요소들이 그 크기가 과장 또는 축소될 수 있다. 예컨대, 도면에서 나타난 각 구성의 크기 및 두께는 설명의 편의를 위해 임의로 나타내었으므로, 이하의 실시예는 반드시 도시된 바에 한정되지 않는다.In the drawings, components may be exaggerated or reduced in size for convenience of explanation. For example, the sizes and thicknesses of the components shown in the drawings are arbitrarily shown for convenience of explanation, and therefore, the following embodiments are not necessarily drawn to scale.

도 1은 본 발명의 일 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템(10)을 개략적으로 도시한 개념도이고, 도 2는 도 1의 배란일 예측 장치(100)를 Ⅱ-Ⅱ'선을 따라 절취한 단면도이다. FIG. 1 is a conceptual diagram schematically illustrating an image processing and analysis system 10 for measuring ovulation date according to an embodiment of the present invention. FIG. 2 is a schematic view illustrating an ovulation date prediction apparatus 100 of FIG. 1 along a line II-II ' FIG.

도 1을 참조하면, 배란일 측정을 위한 영상처리 및 분석 시스템(10)은 배란일 예측 장치(100), 타액 취득 장치(200), 전자 장치(300) 및 제어부(400)를 포함할 수 있다. 1, an image processing and analysis system 10 for measuring ovulation date may include an apparatus for predicting an ovulation date 100, a saliva acquisition apparatus 200, an electronic device 300, and a control unit 400.

전자 장치(300)는 일면에 배치되는 카메라부(310)를 포함하는 전자 장치로서, 이동이 가능한 휴대용 장치일 수 있다. 전자 장치(300)는 디스플레이부(미도시)를 포함할 수 있으며, 상기한 일면은 디스플레이부(미도시)가 배치되는 면과 대향되는 면일 수 있으며(도 1 참조), 다른 실시예로서, 디스플레이부(미도시)가 배치되는 면과 동일할 수 있다. 또 다른 실시예로서, 전자 장치(300)는 카메라부(310)를 둘 이상 포함하여, 디스플레이부(미도시)가 배치되는 면과 대향되는 면 모두에 배치될 수도 있다. 예를 들면, 휴대폰, 태블릿(tablet), 노트북, 그래핑 계산기(graphing calculator), 휴대용 게임기, 디지털 카메라, 디지털 캠코더, 포터블 미디어 플레이어 등일 수 있다.The electronic device 300 is an electronic device including a camera unit 310 disposed on one surface, and may be a portable device that can be moved. The electronic device 300 may include a display unit (not shown), which may be a surface opposite to a surface on which a display unit (not shown) is disposed (see FIG. 1) (Not shown) may be disposed. In another embodiment, the electronic device 300 may include two or more camera units 310, and may be disposed on both sides of a surface on which a display unit (not shown) is disposed. For example, it can be a mobile phone, a tablet, a notebook, a graphing calculator, a portable game machine, a digital camera, a digital camcorder, a portable media player, and the like.

카메라부(310)는 도시하지 않았지만, 적어도 하나의 렌즈를 포함하는 렌즈 모듈과 상기한 렌즈 모듈로 제공되는 광 이미지를 감지하는 이미지 센서를 포함하여 타액 취득 장치(200)의 촬상이미지를 촬영할 수 있다. Although not shown, the camera unit 310 may include a lens module including at least one lens, and an image sensor that senses a light image provided by the lens module, to capture an image of the saliva acquisition device 200 .

도 1 및 도 2를 참조하면, 배란일 예측 장치(100)는 일면(A1)에 전자 장치(300)가 장착되는 바디부(110)와, 타액 취득 장치(200)가 일정한 깊이로 삽입되도록 바디부(110)의 일측에 형성된 삽입부(120)를 포함할 수 있다. 또한, 배란일 예측 장치(100)는 전자 장치(300)의 카메라부(310)가 위치하도록 바디부(110)의 일면(A1)에 형성된 개구(115)와, 바디부(110)의 내부에 배치되며 타액 취득 장치(200)로 광을 조사하는 광원부(140)를 포함할 수 있다. 1 and 2, the apparatus 100 for predicting an ovulation date includes a body 110 on which an electronic device 300 is mounted on one side A1, And an insertion unit 120 formed at one side of the body 110. The apparatus 100 for predicting the ovulation date includes an opening 115 formed in one surface A1 of the body 110 and an opening 115 formed in the inside of the body 110 so that the camera 310 of the electronic device 300 is positioned. And a light source 140 for irradiating light to the saliva acquiring apparatus 200.

배란일 예측 장치(100)의 바디부(110)는 일정한 크기와 형상으로 형성될 수 있다. 바디부(110)는 삽입부(120)를 통해 타액 취득 장치(200)가 삽입되는 방향에 대하여 수직한 방향에 배치되는 상면인 일면(A1)이 평평하게 형성될 수 있으며, 일면(A1)에 전자 장치(300)가 장착될 수 있다. 바디부(110)의 일면(A1)은 전자 장치(300)에 일정한 마찰력을 부여할 수 있는 재질로 이루어져 전자 장치(300)가 안정적으로 장착될 수 있다. 예를 들면, 바디부(110)의 일면(A1)은 고무 재질을 포함할 수 있다. 그러나, 본 발명은 이에 제한되지 않으며, 전자 장치(300)를 안정적으로 장착할 수 있는 다양한 재질이 채용될 수 있음은 물론이다. 한편, 바디부(110)는 전자 장치(300)의 카메라부(310)가 위치하도록 일면(A1)에 개구(opening, 115)가 형성될 수 있다. 바디부(110)에 안착된 전자 장치(300)의 카메라부(310)는 개구(115)를 통해 타액 취득 장치(200)와 마주볼 수 있다. 한편, 타액 취득 장치(200)가 배란일 예측 장치(100)로 삽입되는 경우, 타액 취득 장치(200)의 관통홀(215)을 지나는 중심축과 개구(115)를 지나는 중심축이 일치하는 위치에 개구(115)가 형성될 수 있다. The body 110 of the apparatus 100 may be formed in a predetermined size and shape. The body 110 may have a flat surface A1 which is an upper surface disposed in a direction perpendicular to the direction in which the saliva acquisition device 200 is inserted through the insertion portion 120, The electronic device 300 can be mounted. One side A1 of the body 110 is made of a material capable of imparting a constant frictional force to the electronic device 300, so that the electronic device 300 can be stably mounted. For example, one side A1 of the body part 110 may include a rubber material. However, the present invention is not limited thereto, and it goes without saying that various materials capable of stably mounting the electronic device 300 can be employed. The body 110 may have an opening 115 on one side A1 so that the camera unit 310 of the electronic device 300 is positioned. The camera unit 310 of the electronic device 300 mounted on the body 110 can face the saliva acquisition device 200 through the opening 115. [ On the other hand, when the saliva obtaining device 200 is inserted into the ovulation prediction device 100, the center axis passing through the through hole 215 of the saliva acquiring device 200 and the center axis passing through the opening 115 coincide with each other An opening 115 may be formed.

삽입부(120)는 타액 취득 장치(200)가 일정한 깊이로 삽입되도록 바디부(110)의 일측에 형성될 수 있다. 삽입부(120)는 타액 취득 장치(200)에 대응되는 크기 및 형상으로 형성되어, 타액 취득 장치(200)가 안정적으로 삽입될 수 있다. 삽입부(120)는 삽입된 타액 취득 장치(200)를 전자 장치(300)의 카메라부(310)가 촬영할 수 있도록 개구(115)와 중첩되는 위치에 제1 노출부(121)가 형성될 수 있다. 또한, 삽입부(120)는 광원부(140)의 광이 타액 취득 장치(200)로 조사될 수 있도록 제2 노출부(123)가 형성될 수 있다. 제1 노출부(121)와 제2 노출부(123)는 바디부(110)의 개구(115)와 일직선 상에 위치할 수 있다. 또한, 제1 노출부(121)와 제2 노출부(123)의 크기는 서로 다를 수 있다. 예를 들면, 제2 노출부(123)의 크기는 제1 노출부(121)의 크기보다 클 수 있다. 제2 노출부(123)는 광원부(140)로부터 조사되는 광을 입사시키는 기능을 수행하므로 제1 노출부(121)보다 큰 크기로 형성될 수 있다.The insertion portion 120 may be formed at one side of the body 110 to allow the saliva acquisition device 200 to be inserted at a predetermined depth. The insertion portion 120 is formed in a size and shape corresponding to the saliva acquisition device 200 so that the saliva acquisition device 200 can be stably inserted. The insertion unit 120 may form the first exposed unit 121 at a position overlapping the opening 115 so that the camera unit 310 of the electronic device 300 can capture the inserted saliva acquisition device 200 have. The insertion unit 120 may be formed with a second exposed unit 123 so that the light from the light source unit 140 can be irradiated to the saliva obtaining apparatus 200. The first exposed portion 121 and the second exposed portion 123 may be positioned in a straight line with the opening 115 of the body 110. In addition, the sizes of the first exposed portion 121 and the second exposed portion 123 may be different from each other. For example, the size of the second exposed portion 123 may be larger than the size of the first exposed portion 121. The second exposed portion 123 may be formed to have a larger size than the first exposed portion 121 because the second exposed portion 123 performs the function of entering the light emitted from the light source portion 140.

광원부(140)는 바디부(110)의 내부에 배치되며 타액 취득 장치(200)로 광을 제공할 수 있다. 광원부(140)는 타액 취득 장치(200)로 광을 제공할 수 있는 모든 종류의 소스 장치를 적용할 수 있으며, 예를 들면, LED 소자일 수도 있다. 일 실시예로서, 도면에 도시된 바와 같이, 광원부(140)는 바디부(110)의 개구(115)의 중심을 지나는 연장선(C1) 상에 위치할 수 있다. 그러나, 이에 제한되지 않으며, 광원부(140)는 광원부(140)에서 제공되는 광을 통해 전자 장치(300)의 카메라부(310)가 타액 취득 장치(200)를 촬상할 수 있게 하는 어느 위치든 배치될 수 있다. 예를 들어 배란일 예측 장치(100)는 광원부(140)가 상기한 개구(115)의 중심을 지나는 연장선(C1) 상에 위치하지 않는 경우, 광원부(140)로부터 제공되는 광이 타액 취득 장치(200)로 전달될 수 있도록 광의 경로를 변경하는 광경로변경수단(미도시)을 더 구비할 수 있다. 광경로변경수단(미도시)은 미러 또는 렌즈를 포함하여 광원부(140)로부터 타액 취득 장치(200)로 광을 안내할 수 있다. The light source 140 may be disposed inside the body 110 and may provide light to the saliva acquisition device 200. The light source unit 140 may apply any kind of source device capable of providing light to the saliva obtaining apparatus 200, and may be an LED device, for example. In one embodiment, the light source 140 may be positioned on an extension line C1 passing through the center of the opening 115 of the body 110, as shown in the figure. The light source unit 140 may be disposed at any position that allows the camera unit 310 of the electronic device 300 to image the saliva acquisition device 200 through the light provided by the light source unit 140 . For example, when the light source unit 140 is not located on the extension line C1 passing through the center of the opening 115, the light supplied from the light source unit 140 is transmitted to the saliva obtaining apparatus 200 (Not shown) that changes the path of the light so that the light can be transmitted to the light source (not shown). The optical path changing means (not shown) may guide the light from the light source unit 140 to the saliva obtaining apparatus 200, including a mirror or a lens.

또한, 도면에서는 하나의 광원부(140)를 도시하였으나, 배란일 예측 장치(100)는 하나 이상의 광원부(140)를 포함할 수 있다. 배란일 예측 장치(100)는 광원부(140)를 통해 타액 취득 장치(200)에 광을 제공할 수 있을 뿐만 아니라, 배란일 예측 장치(100)의 외부로 광이 제공할 수 있다. 이때, 바디부(110)는 투명 또는 반투명 재질로 형성되어 광원부(140)로부터 조사되는 광이 외부로 전달될 수 있다. 이를 통해, 배란일 예측 장치(100)는 조명으로서의 기능도 수행할 수 있다. 배란일 예측 장치(100)는 조명의 기능을 수행하는 경우, 상기한 바디부(110)의 일면(A1)이 저면이 되도록 뒤집은 상태에서 이용될 수 있다. Although one light source 140 is shown in the drawing, the apparatus 100 for predicting the ovulation date may include one or more light sources 140. The ovulation day predicting apparatus 100 not only can provide light to the saliva obtaining apparatus 200 through the light source unit 140 but also can provide light outside the ovulation day predicting apparatus 100. [ At this time, the body 110 is formed of a transparent or translucent material so that the light emitted from the light source 140 can be transmitted to the outside. Thus, the apparatus 100 for predicting the ovulation date can also function as an illumination. When performing the function of illumination, the apparatus 100 for predicting the date of ovulation can be used in a state in which one side A1 of the body 110 is turned upside down.

한편, 배란일 예측 장치(100)는 광학부(150), 건조부(170), 카메라거치부(130) 및 전원부(미도시)를 더 포함할 수 있다. The ovulation prediction apparatus 100 may further include an optical unit 150, a drying unit 170, a camera mounting unit 130, and a power unit (not shown).

광학부(150)는 바디부(110)의 개구(115)와 삽입부(120) 사이에 배치되며, 타액의 이미지를 확대시키는 하나 이상의 렌즈를 구비할 수 있다. 일 실시예로서, 광학부(150)는 광각렌즈(wide angle lens, 152) 및 접사렌즈(macroscopic lens, 153)를 포함하고, 이들 렌즈를 고정시키는 고정부재(151)를 포함할 수 있다. 광학부(150)는 광각렌즈(152) 및 접사렌즈(153)를 이용하여 삽입된 타액 취득 장치(200)의 타액 이미지를 확대시킬 수 있으며, 일정한 초점 거리를 유지하도록 바디부(110) 내부에 고정될 수 있다. 광학부(150)는 바디부(110) 내부에 고정되며, 전자 장치(300)의 카메라부(310)와 광학부(150) 사이의 거리 및 광학부(150)와 타액 취득 장치(200) 사이의 거리는 일정할 수 있다. 따라서, 배란일 측정을 위한 영상처리 및 분석 시스템(10)은 배란일 예측 장치(100)를 통해 타액의 촬상 이미지를 선명하게 획득할 수 있다.The optical unit 150 may be disposed between the opening 115 of the body 110 and the insertion unit 120 and may include at least one lens for enlarging the image of the saliva. In one embodiment, the optical portion 150 includes a wide angle lens 152 and a macroscopic lens 153, and may include a fixing member 151 for fixing these lenses. The optical unit 150 can enlarge the saliva image of the inserted saliva acquisition device 200 by using the wide angle lens 152 and the macro lens 153 and can also enlarge the saliva image in the body part 110 Can be fixed. The optical part 150 is fixed inside the body part 110 and is disposed between the optical part 150 and the saliva acquisition device 200 between the camera part 310 and the optical part 150 of the electronic device 300, May be constant. Accordingly, the image processing and analysis system 10 for measuring the ovulation date can clearly acquire the sensed image of the saliva through the apparatus 100 for predicting the ovulation date.

건조부(170)는 타액 취득 장치(200)에 수용된 타액을 건조시킬 수 있다. 건조부(170)는 공기 및 열 중 적어도 하나를 이용할 수 있다. 예를 들면, 건조부(170)는 팬(fan)을 포함하여 타액 취득 장치(200)에 수용된 타액을 건조시킬 수 있다. 다른 실시예로서, 건조부(170)는 펠티어 소자로부터 공급되는 열을 이용하거나, 전기 저항열을 이용하여 타액 취득 장치(200)에 수용된 타액을 건조시킬 수 있다. 또는 건조부(170)는 팬(fan)과 펠티어 소자 등을 모두 구비하여 공기와 열을 이용하여 타액을 건조시킬 수 있다. 한편, 건조부(170)는 광원부(140)와 일체로 형성될 수도 있다. 구체적으로, 광원부(140)는 백열 전구를 이용할 수 있으며, 백열 전구를 구동하여 발생되는 열을 이용하여 타액을 건조시킬 수도 있다. 이외에도 다양한 건조 방법을 이용한 건조 장치를 이용할 수 있음은 물론이다.The drying unit 170 can dry the saliva contained in the saliva obtaining apparatus 200. [ The drying unit 170 may use at least one of air and heat. For example, the drying unit 170 may include a fan to dry the saliva contained in the saliva-collecting device 200. In another embodiment, the drying unit 170 can use the heat supplied from the Peltier element or dry the saliva contained in the saliva acquisition device 200 using electric resistance heat. Or the drying unit 170 may include both a fan and a Peltier element to dry the saliva using air and heat. Meanwhile, the drying unit 170 may be formed integrally with the light source unit 140. Specifically, the light source 140 may use an incandescent lamp, and the saliva may be dried using heat generated by driving the incandescent lamp. Needless to say, a drying apparatus using various drying methods may be used.

카메라거치부(130)는 카메라부(310)의 외곽 형상에 대응되는 형상으로 이루어진 인입구(135)를 포함하며, 바디부(110)의 일면(A1)의 일 영역에 착탈가능할 수 있다. 전자 장치(300)가 시중에 유통되고 있는 스마트폰인 경우, 스마트폰의 카메라부(310)는 스마트폰의 종류에 따라 그 형상이 다를 수 있다. 카메라 거치부(130)는 사용자의 카메라부(310)의 외곽 형상에 대응되어 안정적으로 타액의 촬상이미지를 획득할 수 있도록 할 수 있다. 이때, 인입구(135)의 중심축과 개구(115)의 중심축은 일치할 수 있다. 카메라 거치부(130)는 교체가능한 형태로 형성되어 필요에 따라 바디부(110)의 일면(A1)에 배치될 수 있다. 한편, 바디부(110)의 일면(A1)에는 카메라 거치부(130)의 외곽에 대응되는 형상으로 형성된 안착홈(미도시)을 더 포함할 수 있으며, 안착홈을 통해 전자 장치(300)가 안정적으로 바디부(110)에 장착될 수 있다. The camera mount 130 includes an inlet 135 formed in a shape corresponding to the outer shape of the camera unit 310 and may be removably attached to one area of the one surface A1 of the body 110. [ When the electronic device 300 is a smartphone distributed on the market, the shape of the camera unit 310 of the smartphone may be different depending on the type of the smartphone. The camera mount 130 can correspond to the outer shape of the camera 310 of the user and can stably acquire an image of saliva. At this time, the central axis of the inlet 135 and the central axis of the opening 115 may coincide. The camera mount 130 may be formed in a replaceable form and may be disposed on one side A1 of the body 110 as required. The body 110 may further include a seating groove (not shown) formed in a shape corresponding to the outer periphery of the camera mount 130 on one side A1 of the body 110. The electronic device 300 And can be stably mounted on the body 110.

한편, 배란일 예측 장치(100)는 광원부(140) 또는 건조부(170)에 전원을 공급하는 전원부(미도시)를 더 포함할 수 있다. 전원부(미도시)는 외부의 전원수단과 연결될 수도 있고, 내장된 배터리를 통해 전원을 공급할 수도 있다. 배란일 예측 장치(100)는 내장된 배터리를 이용하여 전원을 공급하는 경우, 내장된 배터리를 이용하여 이동식 배터리의 기능을 수행할 수도 있다. 도시하지 않았지만, 이 경우, 배란일 예측 장치(100)는 내장된 배터리를 충전하는 충전포트 및 배터리의 전원을 외부로 공급하는 공급포트를 더 포함할 수 있다. The ovulation day predicting apparatus 100 may further include a power source unit (not shown) for supplying power to the light source unit 140 or the drying unit 170. The power source unit (not shown) may be connected to an external power source unit or may supply power through a built-in battery. When the ovulation day predicting apparatus 100 supplies power using the built-in battery, the ovulation day predicting apparatus 100 may perform a portable battery function using the built-in battery. Although not shown, in this case, the ovulation prediction device 100 may further include a charging port for charging the built-in battery and a supply port for supplying the power of the battery to the outside.

도 3은 도 1의 타액 취득 장치(200)를 개략적으로 나타낸 사시도이고, 도 4는 도 3의 타액 취득 장치(200)의 동작 방법을 설명하기 위해 도시한 개념도이다. 도 5는 도 3의 S영역을 도시한 확대 도면이다.FIG. 3 is a perspective view schematically showing the saliva acquisition device 200 of FIG. 1, and FIG. 4 is a conceptual diagram illustrating a method of operating the saliva acquisition device 200 of FIG. 5 is an enlarged view showing the area S in Fig.

도 3 및 도 4를 참조하면, 타액 취득 장치(200)는 케이스(210), 타액수용부(220), 슬라이더(230), 가이드홈(240)을 포함할 수 있다. 3 and 4, the saliva obtaining apparatus 200 may include a case 210, a saliva receiving unit 220, a slider 230, and a guide groove 240.

타액수용부(220)는 대상체의 타액을 수용할 수 있다. 여기서, 타액이란, 배란일 예측이 가능한 황체형성호르몬이 포함된 침(saliva)일 수 있다. 타액수용부(220)는 아크릴 재질과 같은 투광성 재질로 이루어질 수 있다. 또한, 타액수용부(220)는 유연성을 갖는 재질로 이루어질 수 있으며, 이를 통해 대상체의 타액을 혀의 윗부분에서 채취할 뿐만 아니라 혀의 아래 부분에서 타액을 용이하게 채취할 수 있다. 또한, 타액수용부(220)는 케이스(210)의 외부로 일정한 길이만큼 돌출될 수 있어 사용자가 타액을 용이하게 채취할 수 있다. The saliva receiving portion 220 can receive the saliva of the object. Here, saliva may be saliva containing luteinizing hormone capable of predicting ovulation date. The saliva receiving part 220 may be made of a transparent material such as an acrylic material. In addition, the saliva receiving part 220 can be made of a flexible material, so that the saliva of the target body can be collected not only from the upper part of the tongue but also from the lower part of the tongue. In addition, the saliva receiving part 220 can protrude to the outside of the case 210 by a predetermined length, so that the user can easily collect the saliva.

케이스(210)는 타액수용부(220)를 내부에 배치시킬 수 있다. 케이스(210)의 일단에는 타액수용부(220)가 출입가능한 출입구(211)가 형성되고, 케이스(210)의 일면에는 타액이 외부에 노출되도록 관통홀(215)이 형성될 수 있다. 가이드홈(240)은 케이스(210)의 길이 방향을 따라 케이스(210)에 형성될 수 있다. 도면에서는 가이드홈(240)이 관통홀(215)과 동일한 면에 형성되는 경우를 도시하였으나, 이에 제한되지 않는다. 가이드홈(240)은 관통홀(215)이 형성된 일면과 다른 타면에 형성될 수도 있다. 한편, 케이스(210)는 관통홀(215)과 대향되는 타면을 관통하는 통기구(217)가 더 형성될 수 있다. 타액 취득 장치(200)는 통기구(217)를 통해 건조부(170)의 공기 또는 열이 타액으로 전달되며, 타액을 효과적으로 건조시킬 수 있다. 다른 실시예로서, 통기구(217)는 관통홀(215)과 대향되는 타면이 아닌 케이스(210)의 다른 면에 형성될 수도 있다. The case 210 may be disposed inside the saliva receiving portion 220. One end of the case 210 is provided with an entrance 211 through which the saliva receiving part 220 can enter and exit and a through hole 215 may be formed on one side of the case 210 to expose the saliva to the outside. The guide groove 240 may be formed in the case 210 along the longitudinal direction of the case 210. Although the guide groove 240 is formed on the same surface as the through hole 215 in the drawing, the present invention is not limited thereto. The guide groove 240 may be formed on the other side of the through hole 215. The case 210 may further include a ventilation hole 217 penetrating the other surface opposite to the through hole 215. Air or heat of the drying unit 170 is transferred to the saliva through the ventilation hole 217, and the saliva can be effectively dried. The ventilation hole 217 may be formed on the other surface of the case 210 that is not the other surface opposite to the through hole 215. [

슬라이더(230)는 타액수용부(220)의 일측에 연결되며 케이스(210)의 외부로 돌출되어 가이드홈(240)을 따라 이동가능할 수 있다. 다시 말해, 사용자는 슬라이더(230)를 밀거나 당기는 동작을 통해, 타액수용부(220)를 케이스(210)의 외부 또는 내부로 이동시킬 수 있다. 슬라이더(230)는 사용자의 조작이 용이하도록 마찰력을 갖는 재질로 이루어지거나 상부면에 복수의 돌기들이 형성될 수도 있다. The slider 230 may be connected to one side of the saliva receiving part 220 and protrude to the outside of the case 210 to be movable along the guide groove 240. In other words, the user can move the saliva receiving portion 220 to the outside or inside of the case 210 through an operation of pushing or pulling the slider 230. [ The slider 230 may be made of a material having a frictional force to facilitate the user's operation or may have a plurality of protrusions formed on the upper surface thereof.

도 4의 (a)를 참조하면, 타액 취득 장치(200)의 슬라이더(210)는 제품 사용 전에 'A'에 위치할 수 있다. 이때, 타액수용부(220)는 케이스(210) 내부에 배치되어 오염을 방지할 수 있다. 타액수용부(220)를 이용하여 타액을 채취하기 위해서, 도 4의 (b)와 같이 슬라이더(230)를 가이드홈(240)을 따라 'B'로 이동시켜 타액수용부(220)가 출입구(211)를 통해 외부로 노출되도록 한다. 사용자는 외부로 노출된 타액수용부(220)를 이용하여 대상체의 타액을 채취할 수 있다. Referring to FIG. 4A, the slider 210 of the saliva acquiring apparatus 200 may be positioned at 'A' before use of the product. At this time, the saliva receiving part 220 is disposed inside the case 210 to prevent contamination. The slider 230 is moved to the position 'B' along the guide groove 240 as shown in FIG. 4 (b) to collect the saliva using the saliva receiving part 220, 211 to the outside. The user can collect the saliva of the target object by using the saliva receiving part 220 exposed to the outside.

도 4의 (c)를 참조하면, 사용자는 슬라이더(230)를 'C'로 이동시켜 타액수용부(220)를 케이스(210) 내부로 인입시킬 수 있다. 타액수용부(220)에 수용된 타액은 관통홀(215)을 통해 외부로 노출될 수 있다. 이 상태에서 타액 취득 장치(200)는 배란일 예측 장치(100)에 삽입됨으로써, 전자 장치(300)의 카메라부(310)를 이용하여 타액의 촬상이미지를 획득할 수 있다. Referring to FIG. 4 (c), the user can move the slider 230 to 'C' to draw the saliva receiving part 220 into the case 210. The saliva contained in the saliva receiving part 220 may be exposed to the outside through the through hole 215. In this state, the saliva-acquiring apparatus 200 can be inserted into the ovulation-date predicting apparatus 100 to acquire an image of saliva using the camera unit 310 of the electronic device 300. [

한편, 타액 취득 장치(200)는 위생 및 정확한 분석을 위해 일회용으로 사용될 수 있다. 타액 취득 장치(200)는 일회성을 부여하기 위한 돌출부(270) 및 걸림부(235)를 더 포함할 수 있다. On the other hand, the saliva acquiring apparatus 200 can be used for hygiene and disposable for accurate analysis. The saliva acquiring apparatus 200 may further include a protruding portion 270 and an engaging portion 235 for imparting a one-time function.

돌출부(270)는 케이스(210)의 내부면에 출입구(211)와 이격되어 배치되며 케이스(210)의 내부로 돌출될 수 있다. 걸림부(235)는 타액수용부(220)의 일측에 연결되며 돌출부(270)에 걸리는 것에 의해 타액수용부(220)를 고정시킬 수 있다. 이때, 돌출부(270)는 출입구(211)를 향하여 소정의 각도로 경사진 경사면(271)을 포함하여 걸림부(235)의 진입을 용이하게 할 수 있다. 이를 통해, 걸림부(235) 및 돌출부(270)는 단방향성을 갖게 되어 걸림부(235)가 돌출부(270)를 지나게 되면 재사용할 수 없게 된다. 한편, 걸림부(235)는 슬라이더(230)와 일체로 형성될 수 있다. The protrusion 270 may be disposed on the inner surface of the case 210 so as to be spaced apart from the entrance 211 and protrude into the case 210. The latching part 235 is connected to one side of the saliva receiving part 220 and can be held by the protruding part 270 to fix the saliva receiving part 220. At this time, the projecting portion 270 may include an inclined surface 271 inclined at a predetermined angle toward the entrance 211 to facilitate entry of the engagement portion 235. As a result, the engaging portion 235 and the protruding portion 270 are unidirectional, so that if the engaging portion 235 passes the protruding portion 270, it can not be reused. On the other hand, the latching part 235 may be formed integrally with the slider 230.

도 5를 참조하면, 타액 취득 장치(200)는 제품정보부(260)를 더 포함할 수 있다. 제품정보부(260)는 관통홀(215)에 인접하게 배치되며 암호화된 패턴 및 시리얼 넘버(serial number) 중 적어도 하나를 포함할 수 있다. 상기한 암호화된 패턴은 바코드(L2), QR코드, 문자코드, 도형코드(L1) 등을 포함할 수 있다. 또는 암호화된 패턴은 제품정보부의 엣지 구조를 패턴으로 형성할 수도 있다. 타액 취득 장치(200)는 제품정보부(260)를 통해 정품 여부 또는 정상위치 여부를 확인할 수 있다. 다시 말해, 타액 취득 장치(200)를 배란일 예측 장치(100)에 삽입하였을 때, 타액의 촬상이미지뿐만 아니라 제품정보부(260)의 이미지를 함께 획득하여, 타액 취득 장치(200)가 자사 정상 제품인지 여부를 판단하거나, 타액 취득 장치(200)의 삽입 위치가 올바른가를 확인하여 사용자에게 알려줄 수 있다. 제품정보부(260)는 관통홀(215)과 인접한 케이스(210)의 표면에 암호화된 패턴(L1) 또는 시리얼 넘버를 배치할 수 있으나, 일 실시예로서, 관통홀(215)에 배치되는 투명유리창을 포함하여 투명유리창에 암호화된 패턴 또는 시리얼 넘버를 삽입할 수 있다. 한편, 제품정보부(260)는 RFID(radio frequency identification), IC(integrated circuit) 등의 칩(chip) 등을 포함할 수 있다. 일 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템(10)은 촬상된 제품정보부(260)의 이미지를 통해 암호화된 패턴을 인식하거나, 암호화된 패턴을 인식하는 패턴인식부(미도시)를 더 포함할 수 있다. 예를 들면, RFID, IC 등의 리더기와 연동되는 구성요소를 더 포함할 수 있다.Referring to FIG. 5, the saliva obtaining apparatus 200 may further include a product information unit 260. The product information unit 260 is disposed adjacent to the through hole 215 and may include at least one of an encrypted pattern and a serial number. The encrypted pattern may include a bar code (L2), a QR code, a character code, a graphic code (L1), and the like. Alternatively, the encrypted pattern may form the edge structure of the product information section as a pattern. The saliva acquiring apparatus 200 can confirm whether the saliva acquiring apparatus 200 is a genuine product or a normal position through the product information section 260. In other words, when the saliva acquiring apparatus 200 is inserted into the ovulation day predicting apparatus 100, both the image of the saliva image as well as the image of the product information section 260 are acquired, Or to confirm that the insertion position of the saliva acquisition device 200 is correct, and notify the user. The product information unit 260 may be configured to place the encrypted pattern L1 or the serial number on the surface of the case 210 adjacent to the through hole 215. However, To insert an encrypted pattern or serial number into the clear window. Meanwhile, the product information unit 260 may include a chip such as a radio frequency identification (RFID) or an integrated circuit (IC). The image processing and analysis system 10 for measuring ovulation date according to an embodiment includes a pattern recognition unit (not shown) for recognizing an encrypted pattern through an image of the captured product information unit 260 or recognizing an encrypted pattern . For example, a component interlocked with a reader such as an RFID, an IC, or the like.

한편, 제어부(400)는 카메라부(310)를 이용하여 타액의 촬상이미지를 획득하고, 획득된 촬상이미지를 처리하여 타액에 포함된 호르몬의 결정 구조 이미지를 추출할 수 있다. 또한, 제어부(400)는 추출된 결정 구조 이미지에 기초하여 대상체의 배란일 여부를 판단할 수 있다. 여기서, 제어부는 프로세서(processor)와 같이 데이터를 처리할 수 있는 모든 종류의 장치를 포함할 수 있다. 여기서, '프로세서(processor)'는, 예를 들어 프로그램 내에 포함된 코드 또는 명령으로 표현된 기능을 수행하기 위해 물리적으로 구조화된 회로를 갖는, 하드웨어에 내장된 데이터 처리 장치를 의미할 수 있다. 이와 같이 하드웨어에 내장된 데이터 처리 장치의 일 예로써, 마이크로프로세서(microprocessor), 중앙처리장치(central processing unit: CPU), 프로세서 코어(processor core), 멀티프로세서(multiprocessor), ASIC(application-specific integrated circuit), FPGA(field programmable gate array) 등의 처리 장치를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다. Meanwhile, the control unit 400 can acquire an image of saliva using the camera unit 310, and process the acquired image to extract a crystal structure image of the hormone contained in the saliva. In addition, the control unit 400 can determine whether the subject is ovulation based on the extracted crystal structure image. Here, the control unit may include all kinds of devices capable of processing data, such as a processor. Herein, the term " processor " may refer to a data processing apparatus embedded in hardware, for example, having a circuit physically structured to perform a function represented by a code or an instruction contained in the program. As an example of the data processing apparatus built in hardware, a microprocessor, a central processing unit (CPU), a processor core, a multiprocessor, an application-specific integrated circuit (ASIC) circuit, and a field programmable gate array (FPGA), but the scope of the present invention is not limited thereto.

일 실시예로서, 제어부(400)는 전자 장치(300) 내에 배치될 수 있다. 제어부(400)는 전자 장치(300)의 메모리부(미도시)에 저장된 응용 프로그램(application program) 또는 어플레케이션(application)을 구동함으로써 전술한 동작을 구현할 수 있다. 다른 실시예로서, 제어부(400)는 배란일 예측 장치(100)에 배치될 수도 있다. 이 경우, 배란일 예측 장치(100)는 카메라부를 따로 구비하여 전자 장치(300) 없이 영상을 처리 및 분석할 수도 있다. 다만 설명의 편의를 위하여 이하에서는 제어부(400)가 전자 장치(300)에 배치된 경우를 중심으로 설명하기로 한다. In one embodiment, the control unit 400 may be located within the electronic device 300. The control unit 400 may implement the above-described operation by driving an application program or an application stored in a memory unit (not shown) of the electronic device 300. [ In another embodiment, the control unit 400 may be disposed in the ovulation date predicting apparatus 100. [ In this case, the ovulation day predicting apparatus 100 may be equipped with a separate camera unit to process and analyze images without the electronic device 300. Hereinafter, for the sake of convenience of explanation, the case where the control unit 400 is disposed in the electronic device 300 will be described.

이하에서는, 본 발명의 일 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템(10)의 제어부(400)에서의 제어 방법을 설명하기로 한다.Hereinafter, a control method in the control unit 400 of the image processing and analysis system 10 for measuring ovulation date according to an embodiment of the present invention will be described.

도 6은 타액에 포함된 황체형성호르몬(luteinizing hormone, LH)의 결정구조와 배란주기와의 상관관계를 개략적으로 도시한 도면이고, 도 7은 배란여부에 따른 황체형성호르몬(LH)의 결정 구조를 도시한 도면이다. FIG. 6 is a schematic view showing the correlation between the crystal structure of luteinizing hormone (LH) contained in saliva and the ovulation cycle, and FIG. 7 is a graph showing the crystal structure of luteinizing hormone (LH) Fig.

도 6 및 도 7을 참조하면, 배란 주기에 따라 타액에 포함된 황체형성호르몬(LH)의 결정구조가 변화함을 알 수 있다. 이러한 결정 구조의 차이를 이용하여 불임기(도 7의 (a)), 과도기(도 7의 (b)) 및 배란기(도 7의 (c))를 판단할 수 있다. 타액에 포함된 황체형성호르몬은 배란기에 직선들이 교차하는 형상의 양치형 결정 구조를 가질 수 있다. 그러나, 타액에 양치형 결정 구조가 있다 하더라도 사람의 눈으로 정확한 배란일을 판단하는 것은 어려웠다. 본 발명의 일 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템은 카메라부(310)로부터 획득한 타액의 촬상이미지로부터 결정 구조 이미지를 추출하고 결정 구조 이미지들을 분석하여 배란일에 대한 확률을 사용자에게 정확하게 제공할 수 있다. 6 and 7, it can be seen that the crystal structure of the luteinizing hormone (LH) contained in the saliva changes according to the ovulation cycle. 7 (a)), transient (Fig. 7 (b)) and ovulatory period (Fig. 7 (c)) can be determined using the difference in crystal structure. The luteinizing hormone contained in the saliva may have a tooth-like crystal structure in which straight lines cross the ovulation period. However, it was difficult to judge the exact date of ovulation by the human eye even if there is a tooth-like crystal structure in the saliva. The image processing and analysis system for measuring ovulation date according to an embodiment of the present invention extracts a crystal structure image from an image of saliva acquired from the camera unit 310 and analyzes the crystal structure images to determine the probability of ovulation date to the user Can accurately provide.

도 8은 본 발명의 일 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템(10)의 제어부(400)에서의 제어 방법을 순차적으로 도시한 순서도이다. FIG. 8 is a flowchart sequentially illustrating a control method in the control unit 400 of the image processing and analysis system 10 for measuring ovulation date according to an embodiment of the present invention.

도 8을 참조하면, 제어부(400)에는 대상체의 월경주기정보를 포함하는 개인정보 및 호르몬 정보가 사전에 저장될 수 있다. 전자 장치(300)에서 어플리케이션을 실행하면 초기 대기화면, 달력화면, 환경설정 등의 메인 페이지가 활성화될 수 있다. 이때, 어플리케이션에는 사용자의 주기적인 또는 비주기적인 데이터를 저장하기 위하여 사용자의 개인정보를 저장할 수 있다. 상기한 개인 정보 또는 호르몬 정보는 사용자가 어플리케이션을 구동한 후, 직접 입력하여 저장할 수도 있고, 배란일을 측정할 때마다 도출된 판단 정보가 제어부(400)의 데이터 베이스(미도시) 저장될 수도 있다. 대상체의 개인 정보에는 키, 몸무게, 생년월일, 최근 3개월 간의 마지막 생리일, 생리 주기일수 등이 포함될 수 있다. Referring to FIG. 8, personal information and hormone information including menstrual cycle information of a subject may be stored in the controller 400 in advance. When an application is executed in the electronic device 300, a main page such as an initial idle screen, a calendar screen, and environment settings can be activated. At this time, the application may store the user's personal information to store the user's periodic or aperiodic data. The personal information or the hormone information may be directly input and stored after the user operates the application, and the derived judgment information may be stored in the database (not shown) of the controller 400 whenever the ovulation date is measured. The personal information of the object may include the key, the weight, the date of birth, the last menstrual period of the last three months, the menstrual cycle days, and the like.

다음 제어부(400)는 타액 취득 장치(200)가 배란일 예측 장치(100)에 삽입되면 먼저, 타액 취득 장치(200)의 제품정보부 이미지를 획득할 수 있다(S10). 제품정보부(260)는 암호화된 패턴 및 시리얼 넘버 중 적어도 하나를 포함하므로, 제어부(400)는 획득된 제품정보부 이미지로부터 정상위치 여부 또는 정품 여부를 확인할 수 있다(S20). 또는, 제어부(400)는 상기한 암호화된 패턴 또는 시리얼 넘버를 이용하여 사용횟수 및 결합 상태, 세척여부도 확인할 수 있다. 또는, 제어부(400)는 타액수용부(220)의 색상을 분석하여 정품여부를 확인할 수도 있다. 이때, 삽입된 타액 취득 장치(200)가 정품 또는 정상제품이 아니거나, 위치가 잘못된 경우 제어부(400)는 사용자에게 제품 교환을 요청하거나 타액 취득 장치(200)의 위치가 잘못되었으므로 위치를 조정하라고 요청할 수 있다(S15).Next, when the saliva acquisition device 200 is inserted into the ovulation prediction device 100, the controller 400 can acquire an image of the product information section of the saliva acquisition device 200 (S10). Since the product information unit 260 includes at least one of the encrypted pattern and the serial number, the control unit 400 can check whether the product information is normal or not (S20). Alternatively, the control unit 400 can also check the number of times of use, the state of coupling, and whether or not it is cleaned by using the encrypted pattern or serial number. Alternatively, the controller 400 may check the color of the saliva receiving unit 220 to check whether the sample is genuine. At this time, if the inserted saliva acquiring apparatus 200 is not a genuine product or a normal product, or if the position is wrong, the control unit 400 requests the user to exchange the product, or adjusts the position because the position of the saliva acquiring apparatus 200 is wrong (S15).

제어부(400)는 삽입된 타액 취득 장치(200)가 정품이며, 위치가 정상인 경우 카메라부(310)를 이용하여 타액의 촬상이미지를 획득하고(S30), 획득된 촬상이미지를 처리하여 타액에 포함된 호르몬의 결정 구조 이미지를 추출할 수 있다(S40). 타액의 촬상이미지에는 결정 구조뿐만 아니라 이물질이 포함될 수도 있다. 호르몬의 결정 구조와 이물질을 구분하기 위하여, 제어부(400)는 획득된 촬상이미지를 복수의 단위 픽셀들로 구분하고, 복수의 단위 픽셀들 각각을 수치화하여 촬상이미지로부터 결정 구조 이미지를 추출할 수 있다. 예를 들면, 복수의 단위 픽셀들 각각을 0 내지 255 레벨의 그레이 스케일(gray scale)로 구분할 수 있다. 이때, 제어부(400)는 획득된 촬상이미지에 포함된 복수의 영역들 각각에서 임의의 단위 픽셀과 임의의 단위 픽셀에 인접한 주변 픽셀들의 수치 비교를 통해 복수의 코너점들을 상대적으로 추출할 수 있다. 여기서, 코너점은 호르몬 결정 구조의 길이 방향에 대한 시작점 또는 끝점일 수 있다. 구체적으로, 일 영역에 대하여 코너점이 존재하는 경우 코너점에 인접한 주변 픽셀들은 코너점에 비해 밝은 수치값을 가질 수 있다. 다시 말해, 임의의 단위 픽셀에 인접한 주변픽셀들이 상기 임의의 단위 픽셀보다 밝은 수치값을 갖고 주변을 따라 연속적으로 연결되는 경우 해당 단위 픽셀을 코너점으로 추출할 수 있다. If the inserted saliva acquiring apparatus 200 is a genuine one and the position is normal, the control unit 400 acquires an image of saliva using the camera unit 310 (S30), processes the obtained image, The crystal structure of the hormone can be extracted (S40). The picked-up image of the saliva may include a foreign substance as well as a crystal structure. In order to distinguish between the crystal structure of the hormone and the foreign substance, the control unit 400 divides the obtained image into a plurality of unit pixels, and quantizes each of the plurality of unit pixels to extract a crystal structure image from the captured image . For example, each of the plurality of unit pixels may be divided into gray scale of 0 to 255 levels. At this time, the controller 400 can relatively extract a plurality of corner points by comparing numerical values of arbitrary unit pixels and neighboring pixels adjacent to arbitrary unit pixels in each of a plurality of regions included in the obtained captured image. Here, the corner point may be a starting point or an end point for the longitudinal direction of the hormone crystal structure. Specifically, when a corner point exists for one area, neighboring pixels adjacent to the corner point may have a bright numerical value relative to the corner point. In other words, if neighboring pixels adjacent to an arbitrary unit pixel have numerical values brighter than the arbitrary unit pixel and are continuously connected along the periphery, the corresponding unit pixel can be extracted as a corner point.

이후, 제어부(400)는 상기 코너점의 수치값을 기준으로 제1 수치범위 내의 수치값을 갖고 상기 코너점으로부터 연속적으로 연결되는 제1 픽셀들을 추출할 수 있다. 여기서, 제1 픽셀들은 코너점의 수치값과 유사한 값을 갖는 단위 픽셀들일 수 있다. 이러한 제1 픽셀들이 코너점으로부터 연속적으로 연결되는 경우 제어부(400)는 추출된 제1 픽셀들이 도 7의 (C)와 같이 선들이 연결된 양치형의 결정 구조를 포함한다고 판단할 수 있다. Then, the controller 400 may extract the first pixels continuously connected from the corner point with a numerical value within the first numerical range based on the numerical value of the corner point. Here, the first pixels may be unit pixels having a value similar to the numerical value of the corner point. When these first pixels are continuously connected from the corner point, the controller 400 may determine that the extracted first pixels include a tooth-like crystal structure in which the lines are connected as shown in FIG. 7C.

이때, 제어부(400)는 제1 픽셀들이 사전에 설정된 제1 기준값 이상의 길이로 연결되는 경우, 호르몬의 결정 구조라고 판단할 수 있다. 다시 말해, 코너점으로부터 제1 픽셀들이 연속적으로 연결되어 있다 하더라도 제1 기준값 이하인 경우에는 아직 배란일에 해당하는 양치형의 결정구조가 아니라고 판단하고, 결정 구조 이미지를 추출하지 않을 수 있다. 이러한 길이의 기준이 되는 제1 기준값은 예를 들면, 대상체마다 차이가 있을 수 있으며, 대상체의 개인정보, 호르몬정보를 기초로 하여 결정할 수 있다. 또한, 제어부(400)는 제1 픽셀들의 방향성을 이용하여 결정 구조 이미지의 유효 여부를 결정할 수 있다. 예를 들면, 양치 구조의 황체형성호르몬은 원의 형태를 이루지 않고 길쭉한 형상을 이루기 때문에, 추출된 제1 픽셀들이 일 방향성을 갖는 경우에 결정 구조 이미지로서 유효하다고 판단할 수 있다. At this time, when the first pixels are connected to a length longer than a preset first reference value, the controller 400 can determine that the crystal structure is a hormone. In other words, even if the first pixels are continuously connected from the corner point, if it is lower than the first reference value, it is determined that it is not a tooth-like type crystal structure corresponding to the ovulation date yet, and the crystal structure image may not be extracted. The first reference value serving as a reference of such a length may be different for each object, for example, and may be determined on the basis of the personal information and the hormone information of the object. In addition, the controller 400 may determine the validity of the crystal structure image using the directionality of the first pixels. For example, since the luteinizing hormone of the fern structure forms an elongated shape without forming a circle shape, it can be determined that the extracted first pixels are effective as a crystal structure image when they have unidirectionality.

다음, 제어부(400)는 추출된 결정 구조 이미지들 각각의 길이 또는 두께를 계산하고, 길이 또는 두께를 기초로 하여 추출된 결정 구조 이미지들을 분류할 수 있다(S50). 제어부(400)는 분류항목 및 각각의 분류항목에 해당하는 결정 구조 이미지들의 개수를 대응시켜 분류 데이터를 생성할 수 있다(S60). 도 7의 (C)를 참조하면, 타액에는 복수의 황체형성호르몬들이 결정 구조를 이룰 수 있으며, 복수의 결정 구조는 각각의 길이와 두께를 가질 수 있다. 제어부(400)는 유효한 결정 구조 이미지들을 길이 또는 두께를 이용하여 분류함으로써 분류 데이터를 생성할 수 있다. 이후, 제어부(400)는 분류데이터를 이용하여 배란일 여부에 관한 확률을 계산할 수 있다(S70). 예를 들면, 추출된 결정 구조 이미지들의 분류 항목에 대하여 등급(grade)을 나눌 수 있고, 등급에 해당하는 결정 구조 이미지들의 개수를 수치화함으로써, 배란일에 관한 확률을 계산할 수 있다. 일 실시예로서, 제어부(400)는 제1 픽셀이 15개 내지 20개가 연속적으로 연결되는 경우, 해당 결정 구조 이미지를 제1 등급으로 분류하고, 제1 픽셀이 10개 내지 15개가 연속적으로 연결되는 경우, 해당 결정 구조 이미지를 제2 등급으로 분류할 수 있다. 제어부(400)는 제1 등급을 90점으로 점수화하고 제2 등급을 70점으로 점수화할 수 있다. 제어부(400)는 이러한 등급의 수치와 각 등급에 포함된 결정 구조 이미지들의 개수를 이용하여 촬상이미지 전반에 걸쳐 총점을 계산할 수 있으며, 총점을 통해 상기 배란일에 관한 확률을 계산할 수 있다. 그러나, 이는 하나의 예일뿐, 본 발명은 이에 제한되지 않는다. Next, the controller 400 calculates the length or thickness of each of the extracted crystal structure images, and classifies the extracted crystal structure images based on the length or thickness (S50). The control unit 400 can generate classification data by associating the classification items and the number of the crystal structure images corresponding to the respective classification items (S60). Referring to FIG. 7 (C), a plurality of luteinizing hormones may form a crystal structure in saliva, and a plurality of crystal structures may have respective lengths and thicknesses. The control unit 400 can generate classification data by classifying valid crystal structure images using length or thickness. Thereafter, the control unit 400 may calculate the probability of ovulation using the classification data (S70). For example, the classification items of the extracted crystal structure images can be divided into grades, and the number of the crystal structure images corresponding to the grades can be numerically calculated, so that the probability of the ovulation date can be calculated. In one embodiment, when 15 to 20 pixels of the first pixel are serially connected, the controller 400 classifies the crystal structure image into a first class, and when 10 to 15 of the first pixels are consecutively connected , The corresponding crystal structure image can be classified into the second grade. The control unit 400 scales the first grade to 90 points and the second grade to 70 points. The controller 400 can calculate the total score over the entire image using the number of the grades and the number of the crystal structure images included in each grade, and calculate the probability of the ovulation date through the total score. However, this is only an example, and the present invention is not limited thereto.

제어부(400)는 계산된 확률을 외부로 표시하거나, 배란일을 판단하여 외부로 표시할 수 있다(S80). 사용자는 확률이 표시되거나 배란일 판단결과가 표시되는 것을 선택할 수 있다. 제어부(400)는 배란일에 관한 확률이 사전에 설정된 기준확률 이상인 경우에 배란일이라고 판단할 수 있다. 이때, 기준확률은 대상체의 기존 데이터 베이스를 기준으로 결정할 수도 있고, 사용자가 임의로 선택하여 결정될 수도 있다. The control unit 400 may display the calculated probability externally or may determine the ovulation date and display it externally (S80). The user can select whether the probability is displayed or the result of the ovulation date determination is displayed. The control unit 400 can determine that it is an ovulation date when the probability of the ovulation date is equal to or higher than a predetermined reference probability. At this time, the reference probability may be determined based on the existing database of the object, or may be determined by the user's choice.

전술한 바와 같이 본 발명의 일 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템 및 이의 제어 방법은 배란일 예측 장치를 이용하여 타액의 촬상이미지를 선명하게 획득할 수 있다. 또한, 배란일 측정을 위한 영상처리 및 분석 시스템은 촬상이미지로부터 결정 구조 이미지들을 추출하고 분류화하여 확률을 계산함으로써, 정확한 배란일 예측이 가능할 수 있다.As described above, the image processing and analysis system and the control method thereof for measuring ovulation date according to an embodiment of the present invention can clearly acquire an image of saliva by using an ovulation date predicting apparatus. In addition, the image processing and analysis system for measurement of ovulation date can accurately predict the ovulation date by extracting the crystal structure images from the image, classifying them, and calculating the probability.

도 9는 본 발명의 다른 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템(20)을 개략적으로 도시한 개념도이고, 도 10은 도 9의 영상처리 및 분석시스템(20)에서의 제어 방법을 순차적으로 도시한 순서도이다. FIG. 9 is a conceptual diagram schematically showing an image processing and analysis system 20 for measuring ovulation date according to another embodiment of the present invention, and FIG. 10 is a flowchart illustrating a control method in the image processing and analysis system 20 of FIG. And Fig.

도 9 및 도 10을 참조하면, 본 발명의 다른 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템(20)은 배란일 예측 장치(미도시), 타액 취득 장치(미도시), 복수의 전자 장치(300), 관리서버(500) 및 병원서버(600)를 포함할 수 있다. 본 발명의 다른 실시예에 따른 배란일 측정을 위한 영상처리 및 분석 시스템(20)은 일 실시예의 배란일 예측 장치(100), 타액 취득 장치(200) 및 전자 장치(300)와 구성이 동일하며, 관리서버(500) 및 병원서버(600)를 더 이용할 수 있다. 설명의 편의를 위하여 중복되는 설명은 생략하기로 한다. 이때, 제어부는 복수의 전자 장치(300) 각각에 위치할 수 있다. 9 and 10, an image processing and analysis system 20 for measuring ovulation date according to another embodiment of the present invention includes an ovulation date prediction device (not shown), a saliva acquisition device (not shown), a plurality of electronic devices (300), a management server (500), and a hospital server (600). The image processing and analysis system 20 for measuring the ovulation date according to another embodiment of the present invention has the same configuration as the ovulation prediction apparatus 100, the saliva obtaining apparatus 200 and the electronic apparatus 300 of the embodiment, The server 500 and the hospital server 600 can be further used. A detailed description will be omitted for the convenience of explanation. At this time, the control unit may be located in each of the plurality of electronic devices 300.

전자 장치(300)는 카메라부(310)를 포함할 수 있다. 사용자는 대상체의 타액을 타액 취득 장치(200)를 이용하여 채취한 후, 배란일 예측 장치(100)에 삽입하고 카메라부(310)를 이용하여 타액의 촬상이미지를 생성할 수 있다. The electronic device 300 may include a camera unit 310. The user can take the saliva of the target object by using the saliva acquiring device 200, insert it into the ovulation day predicting device 100, and generate the sensed image of the saliva using the camera part 310.

병원서버(600)는 병원에서 측정된 대상체의 배란일 정보, 호르몬 정보 등을 포함하는 병원 정보가 저장될 수 있다(S100). Hospital server 600 may store hospital information including ovulation date information, hormone information, and the like of the subject measured at the hospital (S100).

관리서버(500)는 복수의 대상체들의 개인 정보가 저장될 수 있으며, 복수의 대상체들의 개인 정보에는 키, 몸무게, 생년월일, 최근 3개월 간의 마지막 생리일, 생리 주기 일수 등이 포함될 수 있다. Personal information of a plurality of objects may be stored in the management server 500. The personal information of the plurality of objects may include the key, the weight, the date of birth, the last three months of the month, and the number of menstrual cycles.

먼저, 복수의 전자 장치(300)는 관리서버와 연결될 수 있는 어플리케이션이 설치될 수 있으며, 사용자는 어플리케이션을 구동하여 로그인할 수 있다(S110). 로그인 신호가 입력되면 관리서버(500)는 병원서버(600)로 대상체의 병원정보를 요청할 수 있다(S120). 도면에서는 사용자가 로그인요청 후 병원 정보를 요청하고 병원서버(600)는 병원정보를 전송하는 것으로 도시하였다(S125). 다만 본 발명은 이에 제한되지 않으며, 병원서버(600)는 병원정보를 미리 관리서버(500)로 전송하여 사전에 저장하게 할 수 있다. First, the plurality of electronic devices 300 can be installed with an application that can be connected to the management server, and the user can log in by driving the application (S110). When the log-in signal is input, the management server 500 can request hospital information of the object to the hospital server 600 (S120). In the drawing, a user requests hospital information after requesting a login, and the hospital server 600 transmits hospital information (S125). However, the present invention is not limited to this, and the hospital server 600 may transmit the hospital information to the management server 500 in advance and store it in advance.

사용자는 전자 장치(300)를 이용하여 타액 취득 장치(200)의 타액을 촬영할 수 있다. 이때, 전자 장치(300)의 카메라부(310)는 타액 취득 장치(200)의 제품정보부 이미지를 함께 촬영하여 제품정보부 이미지 및 촬상이미지를 획득할 수 있다(S130). The user can take the saliva of the saliva acquisition device 200 using the electronic device 300. [ At this time, the camera unit 310 of the electronic device 300 may acquire the product information part image and the sensed image by photographing the product information part image of the saliva acquisition device 200 together (S130).

전자 장치(300)는 먼저, 제품정보이미지 내의 암호화된 패턴 또는 시리얼 넘버를 이용하여 타액 취득 장치(200)가 정품인지 정상제품인지를 판단하거나, 타액 취득 장치(200)가 정상적으로 삽입되었는지 판단할 수 있다(S150). 전자 장치(300)는 정상 위치이고, 정상제품인 경우에는 촬상이미지를 이용하여 결정 구조 이미지를 추출할 수 있다(S160). 그러나, 정상 위치가 아니거나, 정상제품 또는 정품이 아닌 경우, 사용자로 하여금 위치를 조정하게 하는 메시지를 전송하거나, 제품을 교환하라는 메시지를 전송할 수 있다(S140).The electronic device 300 may first determine whether the saliva acquisition device 200 is a genuine product or a normal product by using an encrypted pattern or a serial number in the product information image or determine whether the saliva acquisition device 200 is normally inserted (S150). The electronic device 300 is in a normal position, and if it is a normal product, the crystal structure image may be extracted using the sensed image (S160). However, if it is not a normal position, or is not a normal product or a genuine product, the user can send a message to adjust the position or send a message to exchange the product (S140).

전자 장치(300)는 삽입된 타액 취득 장치(200)가 정품이며, 위치가 정상인 경우 타액의 촬상이미지를 처리하여 타액에 포함된 호르몬의 결정 구조 이미지를 추출할 수 있다(S160). 전자 장치(300)는 획득된 촬상이미지를 복수의 단위 픽셀들로 구분하고, 복수의 단위 픽셀들 각각을 수치화하여 촬상이미지로부터 결정 구조 이미지를 추출할 수 있다. 이 중 전술한 과정에서 코너점을 추출하고, 코너점의 수치값을 기준으로 제1 수치범위의 수치값을 가지며 코너점으로부터 연속적으로 연결되는 제1 픽셀들을 추출할 수 있다. 전자 장치(300)는 추출된 제1 픽셀들을 이용하여 결정 구조 이미지를 추출할 수 있다. The electronic device 300 can extract the crystal structure image of the hormone contained in the saliva by processing the sensed image of the saliva when the inserted saliva acquiring device 200 is a genuine product and the position is normal (S160). The electronic device 300 may divide the obtained captured image into a plurality of unit pixels and quantize each of the plurality of unit pixels to extract a crystal structure image from the captured image. In the above process, the corner points may be extracted, and the first pixels connected to the corner point having numerical values in the first numerical value range and based on the numerical values of the corner points may be extracted. The electronic device 300 may extract the crystal structure image using the extracted first pixels.

다음, 전자 장치(300)는 추출된 결정 구조 이미지들 각각의 길이 또는 두께를 계산하고, 길이 및 두께를 기초로 하여 추출된 결정 구조 이미지들을 분류할 수 있다(S163). 전자 장치(300)는 분류항목 및 각각의 분류항목에 해당하는 결정 구조 이미지들의 개수를 대응시켜 분류 데이터를 생성할 수 있다. 기준 레벨에 해당하는 유효한 결정 구조 이미지들을 길이 및 두께를 이용하여 분류함으로써 분류 데이터를 생성할 수 있다. Next, the electronic device 300 calculates the length or thickness of each of the extracted crystal structure images, and classifies the extracted crystal structure images based on the length and the thickness (S163). The electronic device 300 may generate classification data by associating the classification items and the number of the crystal structure images corresponding to the respective classification items. The classification data can be generated by classifying valid crystal structure images corresponding to the reference level using the length and the thickness.

전자 장치(300)는 분류데이터를 이용하여 배란일 여부에 관한 확률을 계산할 수 있다(S165). 전자 장치(300)는 계산된 확률을 외부로 표시하거나, 배란일을 판단하여 외부로 표시할 수 있다(S190). 사용자는 확률이 표시되거나 배란일 판단결과가 표시되는 것을 선택할 수 있다. 전자 장치(300)는 배란일에 관한 확률이 사전에 설정된 기준확률 이상인 경우에 배란일이라고 판단할 수 있다. 이때, 기준확률은 대상체의 기존 데이터 베이스를 기준으로 결정할 수도 있고, 사용자가 임의로 선택하여 결정될 수도 있다. 전자 장치(300)에는 관리서버(500)와 할 수 있는 통신부(미도시)를 포함할 수 있으며, 유무선통신망을 통해 생성된 배란일 여부에 관한 확률을 포함하는 확률데이터를 관리서버(500)로 전송할 수 있다. The electronic device 300 may calculate the probability of whether or not ovulation has occurred using the classification data (S165). The electronic device 300 may display the calculated probability externally or may determine the ovulation date and display it externally (S190). The user can select whether the probability is displayed or the result of the ovulation date determination is displayed. The electronic device 300 may determine that it is an ovulation date when the probability of the ovulation date is equal to or higher than a preset reference probability. At this time, the reference probability may be determined based on the existing database of the object, or may be determined by the user's choice. The electronic device 300 may include a communication unit (not shown) that can be connected to the management server 500, and may transmit probability data including a probability related to the ovulation date generated through the wired / wireless communication network to the management server 500 .

관리서버(500)는 전송된 확률데이터와 개인정보를 연동시켜 개인데이터를 생성할 수 있다. 관리서버(500)는 복수의 대상체들에 대한 개인데이터들이 저장되어 빅데이터가 저장될 수 있다. 또한, 관리서버(500)는 개인데이터를 병원서버(600)로 전송할 수 있다. 이때, 병원서버(600)는 관리서버(500)에 저장된 빅데이터를 이용하여 개인데이터를 분석할 수 있다(S180). 예를 들면, 관리서버(500)에는 복수의 대상체들의 BMI, 생리주기, 체중, 키, 운동량 등을 포함하는 개인정보가 상기 전자 장치(300)로부터 전송된 확률데이터와 연동된 빅데이터가 저장될 수 있다. 병원서버(600)는 이러한 빅데이터로부터 맞춤형 솔루션이 필요한 대상체와 유사한 체중, 키를 갖는 비교대상체를 비교분석하고, 배란일 확률을 높이기 위해 운동량을 높이거나, BMI 지수를 낮춰야 한다는 맞춤형 솔루션을 제시할 수 있다. 병원서버(600)는 이를 직접 전자 장치(300)로 전송할 수도 있고, 관리서버(500)에 맞춤형 솔루션을 제공하고(S185) 관리서버(500)를 통해 맞춤형 솔루션을 전자 장치(300)로 전송하도록 할 수 있다(S187). 전자 장치(300)는 맞춤형 솔루션을 외부로 표시할 수 있다(S200).The management server 500 can generate personal data by linking the transmitted probability data with the personal information. The management server 500 may store personal data for a plurality of objects to store the big data. In addition, the management server 500 may transmit the personal data to the hospital server 600. [ At this time, the hospital server 600 can analyze the personal data using the big data stored in the management server 500 (S180). For example, in the management server 500, the big data in which the personal information including the BMI, the menstrual cycle, the body weight, the key, and the exercise amount of a plurality of objects is linked with the probability data transmitted from the electronic device 300 is stored . The hospital server 600 can provide a customized solution that compares and analyzes comparative subjects having weight and height similar to those of a subject requiring a customized solution from such big data and raises the exercise amount or lower the BMI index to increase the probability of ovulation have. The hospital server 600 may send it to the direct electronic device 300 or provide a customized solution to the management server 500 at step S185 and send the customized solution to the electronic device 300 via the management server 500 (S187). The electronic device 300 may display the custom solution externally (S200).

이제까지 본 발명에 대하여 바람직한 실시예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 상기 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.The present invention has been described above with reference to preferred embodiments. It will be understood by those skilled in the art that the present invention may be embodied in various other forms without departing from the spirit or essential characteristics thereof. Therefore, the above-described embodiments should be considered in an illustrative rather than a restrictive sense. The scope of the present invention is indicated by the appended claims rather than by the foregoing description, and all differences within the scope of equivalents thereof should be construed as being included in the present invention.

100 : 배란일 예측 장치
110 : 바디부
120 : 삽입부
130 : 카메라 거치부
140 : 광원부
200 : 타액 취득 장치
210 : 케이스
220 : 타액수용부
300 : 전자 장치
310 : 카메라부
400 : 제어부
500 : 관리서버
600 : 병원서버
100: ovulation prediction device
110:
120:
130: camera mount
140: Light source
200: saliva acquisition device
210: Case
220: saliva receiving part
300: electronic device
310:
400:
500: management server
600: Hospital server

Claims (13)

삭제delete 삭제delete 삭제delete 삭제delete 대상체의 타액을 수용하는 타액수용부를 포함하는 타액 취득 장치가 삽입 가능한 배란일 예측 장치에 있어서,
외관을 형성하는 바디부;
상기 타액 취득 장치가 일정한 깊이로 삽입되도록 상기 바디부의 일측에 형성된 삽입부;
상기 삽입부에 삽입된 상기 타액 취득 장치를 촬상하도록 상기 바디부의 내부에 배치되는 카메라부;
상기 바디부의 내부에 배치되며 상기 타액 취득 장치로 광을 제공하는 광원부; 및
상기 카메라부를 이용하여 상기 타액의 촬상이미지를 획득하고, 상기 획득된 촬상이미지를 처리하여 상기 타액에 포함된 호르몬의 결정 구조 이미지를 추출하고, 상기 추출된 결정 구조 이미지에 기초하여 상기 대상체의 배란일 여부를 판단하는 제어부;를 포함하고,
상기 삽입부는 상기 카메라부와 상기 광원부 사이로 상기 타액 취득 장치가 삽입되도록 형성되며, 상기 삽입부에는 상기 카메라부와 중첩되는 위치에 상기 타액 취득 장치를 노출시키는 노출부가 형성되며,
상기 제어부는 상기 획득된 촬상이미지를 복수의 단위 픽셀들로 구분하고, 상기 복수의 단위 픽셀들 각각을 수치화하여 상기 촬상이미지로부터 상기 결정 구조 이미지를 추출하고, 상기 획득된 촬상이미지로부터 복수의 코너점들을 추출하고, 상기 코너점의 수치 값을 기준으로 제1 수치범위 내의 수치 값을 갖고 상기 코너점으로부터 연속적으로 연결되는 제1 픽셀들을 추출하고, 상기 추출된 제1 픽셀들을 기초로 상기 추출된 제1 픽셀들이 상기 호르몬의 결정 구조에 해당하는지를 판단하는, 여성호르몬(estrogen) 주기를 통한 배란일 예측 장치.
An ovulation-date predicting apparatus capable of inserting a saliva-collecting device including a saliva receiving section for receiving saliva of a subject,
A body portion forming an outer appearance;
An insertion portion formed at one side of the body portion to allow the saliva acquisition device to be inserted at a predetermined depth;
A camera portion disposed inside the body portion to capture the saliva acquisition device inserted into the insertion portion;
A light source unit disposed inside the body and providing light to the saliva retrieval apparatus; And
Acquiring a sensed image of the saliva using the camera unit, processing the acquired sensed image to extract a crystal structure image of a hormone contained in the saliva, and determining whether the subject is ovulation of the subject based on the extracted crystal structure image And a control unit,
Wherein the inserting portion is formed to insert the saliva collecting device between the camera portion and the light source portion and the inserting portion is formed with an exposed portion for exposing the saliva acquiring device at a position overlapping the camera portion,
The control unit divides the obtained captured image into a plurality of unit pixels, digitizes each of the plurality of unit pixels to extract the crystal structure image from the captured image, and acquires a plurality of corner points Extracting first pixels connected in succession from the corner point with a numerical value in a first numerical range on the basis of the numerical value of the corner point and extracting the extracted pixels based on the extracted first pixels, And determining whether one pixel corresponds to the crystal structure of the hormone.
삭제delete 삭제delete 제5 항에 있어서,
상기 복수의 코너점들은 상기 획득된 촬상이미지에 포함된 복수의 영역들 각각에서 임의의 단위 픽셀과 상기 임의의 단위 픽셀에 인접한 주변 픽셀들의 수치 비교를 통해 상대적으로 추출되는, 여성호르몬(estrogen) 주기를 통한 배란일 예측 장치.
6. The method of claim 5,
Wherein the plurality of corner points are relatively extracted through numerical comparison of any unit pixel in each of a plurality of regions included in the obtained captured image and neighboring pixels adjacent to the arbitrary unit pixel, .
제5 항에 있어서,
상기 제어부는 상기 제1 픽셀들이 사전에 설정된 제1 기준값 이상의 길이로 연결되는 경우, 상기 호르몬의 결정 구조라고 판단하는, 여성호르몬(estrogen) 주기를 통한 배란일 예측 장치.
6. The method of claim 5,
Wherein the control unit determines that the crystal structure of the hormone is the crystal structure of the first pixels when the first pixels are connected to the first reference value with a length greater than or equal to a predetermined first reference value.
제5 항에 있어서,
상기 제어부는 상기 추출된 결정 구조 이미지들 각각의 길이 또는 두께를 계산하고, 상기 길이 또는 두께를 기초로 하여 상기 추출된 결정 구조 이미지들을 분류하여 분류데이터를 생성하고, 상기 분류데이터를 이용하여 상기 배란일 여부에 관한 확률을 계산하는, 여성호르몬(estrogen) 주기를 통한 배란일 예측 장치.
6. The method of claim 5,
The control unit may calculate the length or thickness of each of the extracted crystal structure images, classify the extracted crystal structure images based on the length or thickness, generate classification data, (Estrogen) cycle, which calculates the probability of whether or not the ovulation has occurred.
제10 항에 있어서,
상기 제어부는 상기 제1 픽셀들의 방향성을 이용하여 상기 결정 구조 이미지의 유효 여부를 결정하는, 여성호르몬(estrogen) 주기를 통한 배란일 예측 장치.
11. The method of claim 10,
Wherein the control unit determines the validity of the crystal structure image using the directionality of the first pixels by using an estrogen cycle.
제5 항에 있어서,
상기 카메라부와 상기 삽입부 사이에 배치되며, 상기 타액의 이미지를 확대시키는 하나 이상의 렌즈를 구비하는 광학부;를 더 포함하는 여성호르몬(estrogen) 주기를 통한 배란일 예측 장치.
6. The method of claim 5,
And an optical unit disposed between the camera unit and the insertion unit, the optical unit including at least one lens for enlarging an image of the saliva.
제5 항에 있어서,
상기 타액 취득 장치에 수용된 상기 타액을 건조시키는 건조부;를 더 포함하는 여성호르몬(estrogen) 주기를 통한 배란일 예측 장치.
6. The method of claim 5,
And a drying unit for drying the saliva contained in the saliva-collecting device.
KR1020160156482A 2016-10-28 2016-11-23 Apparatus for predicting ovulation day using estrogen cycle KR101855488B1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020160156482A KR101855488B1 (en) 2016-11-23 2016-11-23 Apparatus for predicting ovulation day using estrogen cycle
US16/346,018 US20190261960A1 (en) 2016-10-28 2016-11-23 Image processing and analyzing system for ovulation detection and method for controlling same
PCT/KR2016/013570 WO2018079916A1 (en) 2016-10-28 2016-11-23 Image processing and analyzing system for ovulation detection and method for controlling same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160156482A KR101855488B1 (en) 2016-11-23 2016-11-23 Apparatus for predicting ovulation day using estrogen cycle

Publications (2)

Publication Number Publication Date
KR20180057959A KR20180057959A (en) 2018-05-31
KR101855488B1 true KR101855488B1 (en) 2018-06-11

Family

ID=62454558

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160156482A KR101855488B1 (en) 2016-10-28 2016-11-23 Apparatus for predicting ovulation day using estrogen cycle

Country Status (1)

Country Link
KR (1) KR101855488B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102008843B1 (en) * 2019-01-29 2019-08-07 주식회사 스타고 Smartphone based ovulation test system using saliva

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001178729A (en) * 1992-08-21 2001-07-03 Unipath Ltd Method of monitoring ovulation cycle for contraception
KR100860681B1 (en) * 2007-03-28 2008-09-26 삼성전자주식회사 Apparatus for predicting ovulation phase and wireless portable communicaton terminal using the same
KR20130130443A (en) * 2012-05-22 2013-12-02 성기용 Semen analysis system using portable device
KR101533343B1 (en) * 2014-11-14 2015-07-03 (주)종로의료기 A measuring device of salive for smart phone

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR960007076U (en) * 1994-08-17 1996-03-13 허중기 Ovulation Day Meter

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001178729A (en) * 1992-08-21 2001-07-03 Unipath Ltd Method of monitoring ovulation cycle for contraception
KR100860681B1 (en) * 2007-03-28 2008-09-26 삼성전자주식회사 Apparatus for predicting ovulation phase and wireless portable communicaton terminal using the same
KR20130130443A (en) * 2012-05-22 2013-12-02 성기용 Semen analysis system using portable device
KR101533343B1 (en) * 2014-11-14 2015-07-03 (주)종로의료기 A measuring device of salive for smart phone

Also Published As

Publication number Publication date
KR20180057959A (en) 2018-05-31

Similar Documents

Publication Publication Date Title
US20190261960A1 (en) Image processing and analyzing system for ovulation detection and method for controlling same
CN110916620A (en) Body temperature measuring method and terminal
KR101963427B1 (en) Image processing and analysis system for measuring estrogen cycle and method using thereof
CN110622000A (en) Image-based disease diagnosis using mobile device
US20160178607A1 (en) Acquiring Reliable Data
US20160139156A1 (en) Apparatuses, methods, and systems for home monitoring of physiological states and conditions
KR20200103676A (en) On-premises imaging devices, medical devices and programs
CN100361160C (en) Imager and personal identification system
KR20180046892A (en) Image processing and analysis system for measuring ovulation day
KR101452576B1 (en) the supplementary photographing device and the health detecting method using both mobile phone and the device
KR101855488B1 (en) Apparatus for predicting ovulation day using estrogen cycle
WO2007125794A1 (en) Data measuring device and data measuring method
WO2018079915A1 (en) Image processing system for ovulation prediction analysis
KR101812296B1 (en) Image processing system for analysis and measuring estrogen cycle
KR20180057960A (en) Saliva acquiring and keeping apparatus for measuring ovulation day
WO2008033010A1 (en) Device and method for positioning recording means for recording images relative to an object
KR102695543B1 (en) Apparatus for determining internal state of vagina based on deep learning model
KR102008843B1 (en) Smartphone based ovulation test system using saliva
KR20170133833A (en) Stand-alone type portable test device for body fluid analysis
TWM544629U (en) Portable point of care testing (POCT) system
US11521401B2 (en) Fertility window prediction using a convolutional neural network (CNN) and other learning methods
TWI612306B (en) Portable point of care testing (poct) system
KR20180057962A (en) Portable image obtaining apparatus for analysis and measuring ovulation day
KR20180057961A (en) Image obtaining apparatus for analysis and measuring ovulation day
US11049242B2 (en) Portable and rapid screening in vitro detection system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)