KR20200068451A - Method for analyzing and providing image - Google Patents
Method for analyzing and providing image Download PDFInfo
- Publication number
- KR20200068451A KR20200068451A KR1020180155462A KR20180155462A KR20200068451A KR 20200068451 A KR20200068451 A KR 20200068451A KR 1020180155462 A KR1020180155462 A KR 1020180155462A KR 20180155462 A KR20180155462 A KR 20180155462A KR 20200068451 A KR20200068451 A KR 20200068451A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- analysis
- unit
- display
- providing
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B10/00—Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements
- A61B10/0012—Ovulation-period determination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
- G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Radiology & Medical Imaging (AREA)
- Surgery (AREA)
- Pathology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Quality & Reliability (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Geometry (AREA)
- Investigating Or Analysing Biological Materials (AREA)
- Image Analysis (AREA)
Abstract
Description
본 발명의 실시예들은 디스플레이부를 구비한 전자 장치를 이용하여 샘플을 분석하고, 분석 결과를 영상으로 제공하는 방법에 대한 것이다.Embodiments of the present invention relates to a method of analyzing a sample using an electronic device having a display unit and providing an analysis result as an image.
사회가 변화되면서 임신계획 및 피임계획의 중요성이 점진적으로 중요시되고 있는데, 피임의 경우에는 여성의 배란주기를 고려한 자연피임과, 별도의 약품이나 도구를 이용한 인위적인 피임이 대표적이며, 임신의 경우에는 여성의 배란주기를 고려하여 성관계 일정을 조절하는 방법과, 수술 등을 통한 인위적인 체외·체내 수정 등의 방법이 널리 적용되고 있다. 그러나, 인위적인 방법은 피임과 임신의 성공확률이 높은 반면, 여성 혹은 남성의 신체에 좋지 않은 영향을 줄 수 있어서, 여성의 배란주기를 고려한 자연적인 방법이 장려되고 있다. As the society changes, the importance of pregnancy planning and contraception planning is becoming increasingly important. In the case of contraception, natural contraception considering the ovulation cycle of women and artificial contraception using separate drugs or tools are typical, and in the case of pregnancy, women The method of adjusting the sexual intercourse schedule in consideration of the ovulation cycle and the artificial in vitro and in vitro fertilization through surgery are widely applied. However, while artificial methods have a high probability of success in contraception and pregnancy, natural methods that consider women's ovulation cycles are encouraged because they may adversely affect the female or male body.
여성의 배란상태를 측정하는 방법은 그 여부를 판단하는 매개변수에 따라서 여러가지 방식으로 구분되는데, 그 중에서도 인체의 체액으로부터 루테인(Lutein) 호르몬의 함량을 측정하여 이를 매개로 배란 여부를 판단하는 방법이 가장 정확하다고 할 수 있다. 그러나, 이러한 방법은 특수한 안전규칙을 요하므로, 지정된 기관의 전문가에게 검사를 의뢰해야 하는 불편함이 있어서, 여성들이 사실상 이를 기피하고 있는 실정이다. Methods for measuring a woman's ovulation state are classified into various methods according to parameters determining whether or not, among them, a method of determining the ovulation by using the medium to measure the content of lutein hormone from body fluids It can be said to be the most accurate. However, since this method requires special safety rules, it is inconvenient to refer to an expert of a designated institution, and women are actually avoiding it.
반면, 여성의 기초체온을 측정하여 이를 매개로 배란 여부를 판단하거나, 목안의 점액을 채취한 후 이의 건조과정에서의 결정체를 관찰해서 배란 여부를 판단하는 방법은 그 사용이 매우 편리하여 여성들이 가장 손쉽게 이용하고 있지만, 점액의 결정체와 여성의 기초체온은 질병이나 주위환경변화와 같은 외부적인 요인 에 의해서 변화될 수 있기 때문에 배란 여부판단의 신뢰성이 크게 저하되는 문제가 있다.On the other hand, the method of judging whether a woman ovulates by measuring the basal body temperature of a woman to determine whether it is ovulation or by observing the crystals in its drying process after collecting mucus from the neck is very convenient. Although it is easily used, there is a problem in that the reliability of judging whether or not ovulation is greatly deteriorated because the crystal of mucus and the basal body temperature of women can be changed by external factors such as disease or environmental changes.
상기한 문제 및/또는 한계를 해결하기 위하여, 디스플레이부를 구비한 전자 장치를 이용하여 샘플의 영상을 분석하고, 영상분석을 통해 배란일을 예측하는 분석결과를 사용자에게 효과적으로 제공하기 위한 영상 분석 및 제공 방법을 제공하는 데에 목적이 있다.In order to solve the above problems and/or limitations, an image analysis and providing method for effectively analyzing an image of a sample using an electronic device equipped with a display unit and predicting an ovulation day through image analysis is provided to a user The purpose is to provide.
본 발명의 일 실시예는 디스플레이부를 구비하는 전자 장치를 이용하여 샘플 분석 결과를 영상으로 제공하는 방법에 있어서, 대상체로부터 획득한 샘플의 촬상이미지를 상기 디스플레이부를 통해 외부로 표시하는 단계, 상기 촬상이미지로부터 상기 샘플에 포함된 분석대상의 전체이미지를 추출하는 단계 및 상기 추출된 전체이미지를 상기 촬상이미지 상에 중첩시켜 외부로 표시하되, 사전에 설정된 제1 시간동안 상기 촬상이미지에 대한 상기 전체이미지의 중첩면적이 증가하도록 표시하는 단계를 포함하는, 영상 분석 및 제공 방법를 제공한다.According to an embodiment of the present invention, in a method of providing a sample analysis result as an image using an electronic device having a display unit, displaying the captured image of a sample obtained from an object to the outside through the display unit, the captured image Extracting the entire image of the analysis object included in the sample from and overlaying the extracted whole image on the captured image to display the outside, but of the whole image for the captured image for a predetermined first time. It provides a method for analyzing and providing an image, comprising displaying the overlapping area to be increased.
본 발명의 일 실시예에 있어서, 상기 전체 이미지를 하나 이상의 단위영역으로 구분하는 분석이미지를 생성하는 단계 및 상기 분석이미지를 상기 전체이미지 상에 중첩시켜 외부로 표시하는 단계를 더 포함할 수 있다.In one embodiment of the present invention, the method may further include generating an analysis image that divides the entire image into one or more unit regions, and superimposing the analysis image on the whole image to display the image as an external image.
본 발명의 일 실시예에 있어서, 상기 분석이미지를 상기 전체이미지 상에 중첩시켜 외부로 표시하는 단계는, 사전에 설정된 제2 시간동안 상기 전체이미지에 대한 상기 분석이미지의 중첩면적이 증가하도록 표시할 수 있다.In one embodiment of the present invention, the step of overlaying the analysis image on the entire image to display the outside is displayed to increase the overlapping area of the analysis image with respect to the whole image for a predetermined second time. Can be.
본 발명의 일 실시예에 있어서, 상기 분석대상의 전체 이미지를 추출하는 단계는, 상기 촬상이미지를 복수의 단위 픽셀로 구분하여 각각을 수치화하고, 사전에 설정된 제1 기준값 이상의 수치를 갖는 단위 픽셀들에 영상 가중치를 부여하여 전체 이미지를 추출할 수 있다.In one embodiment of the present invention, the step of extracting the entire image of the analysis target is divided into a plurality of unit pixels to quantify each, and unit pixels having a value equal to or greater than a first preset reference value. The whole image can be extracted by assigning the image weight to.
본 발명의 일 실시예에 있어서, 상기 단위영역 각각은 분석 결과 도출에 필요한 특징 정보를 포함하도록 상기 전체이미지를 하나 이상으로 구획할 수 있다.In one embodiment of the present invention, each of the unit regions may divide the entire image into one or more to include feature information necessary for deriving an analysis result.
본 발명의 일 실시예에 있어서, 상기 분석대상은 상기 샘플에 포함된 호르몬이며, 상기 특징 정보는 상기 호르몬의 결정구조에 관한 정보일 수 있다.In one embodiment of the present invention, the analysis target is a hormone included in the sample, and the characteristic information may be information regarding the crystal structure of the hormone.
본 발명의 일 실시예에 있어서, 상기 단위영역 각각은 사전에 설정된 범위 내의 수치를 갖는 단위 픽셀들의 집합으로 이루어질 수 있다.In one embodiment of the present invention, each of the unit regions may be formed of a set of unit pixels having a numerical value within a preset range.
본 발명의 일 실시예에 있어서, 상기 단위영역들에 포함된 상기 특징 정보에 근거하여 분석 결과를 도출하는 단계 및 상기 분석결과를 외부로 표시하는 단계;를 더 포함할 수 있다.In one embodiment of the present invention, based on the feature information included in the unit regions, deriving an analysis result and displaying the analysis result externally may further include.
전술한 것 외의 다른 측면, 특징, 이점이 이하의 도면, 특허청구범위 및 발명의 상세한 설명으로부터 명확해질 것이다.Other aspects, features, and advantages other than those described above will become apparent from the following drawings, claims, and detailed description of the invention.
본 발명의 실시예들에 따른 영상 분석 및 제공 방법은 촬상이미지에 분석대상이 추출된 전체이미지와 분석이미지를 중첩시켜 외부로 표시함으로써, 사용자에게 분석대상이 추출되는 과정과 분석 결과를 분석하는 과정을 효과적으로 전달할 수 있다. 또한, 영상 분석 및 제공 방법은 중첩되는 전체이미지 및/또는 분석이미지를 동적 이미지 효과를 이용하여 외부로 표시함으로써, 분석대상을 추출하는 과정을 사용자에게 명확하게 표시하여 분석결과에 대한 신뢰도를 향상시킬 수 있다.The method of analyzing and providing an image according to embodiments of the present invention is a process of analyzing an analysis result and a process of extracting an analysis object to a user by superimposing the entire image and an analysis image on which the analysis object is extracted on the captured image to the outside. Can effectively deliver. In addition, the image analysis and provision method improves the reliability of the analysis result by clearly displaying the process of extracting the analysis object to the user by displaying the entire overlapping image and/or the analysis image outside using dynamic image effects. Can be.
도 1은 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법을 순차적으로 도시한 순서도이다.
도 2는 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법에 이용되는 전자 장치를 개략적으로 도시한 블록도이다.
도 3은 도 2의 전자 장치의 다른 실시형태를 개략적으로 도시한 블록도이다.
도 4는 도 2의 전자 장치의 디스플레이부를 통해 분석 결과를 영상으로 제공하는 실시형태를 개략적으로 도시한 도면이다.
도 5는 타액에 포함된 황체형성호르몬(luteinizing hormone, LH)의 결정구조와 배란주기와의 상관관계를 개략적으로 도시한 도면이다.
도 6은 배란여부에 따른 황체형성호르몬(LH)의 결정 구조를 도시한 도면이다.
도 7 내지 도 9는 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법을 설명하기 위하여 디스플레이부의 일 영역을 확대하여 도시한 예시도들이다.
도 10 내지 도 12는 본 발명의 다른 실시예에 따른 영상 분석 및 제공 방법을 설명하기 위하여 디스플레이부의 일 영역을 확대하여 도시한 예시도들이다.
도 13 및 도 14는 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법의 다양한 분석 대상들을 도시한 예시도이다.
도 15는 본 발명의 다른 실시예에 따른 영상 분석 및 제공 방법에 있어서, 디스플레이부를 이용하여 촬상이미지를 표시하는 화면예를 나타낸 도면이다.
도 16은 촬상이미지 상에 전체이미지를 중첩시켜 표시하는 화면예를 나타낸 도면이다.
도 17은 전체이미지 상에 분석이미지를 중첩시켜 표시하는 화면예를 나타낸 도면이다.
도 18은 분석 결과를 나타내는 결과이미지을 분석이미지에 중첩시켜 외부로 표시한 화면예를 나타낸 도면이다.
도 19는 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법이 휴대용 단말기를 통해 구현되는 과정을 순차적으로 도시한 이미지이다.1 is a flowchart sequentially showing a method of analyzing and providing an image according to an embodiment of the present invention.
2 is a block diagram schematically illustrating an electronic device used in an image analysis and providing method according to an embodiment of the present invention.
3 is a block diagram schematically showing another embodiment of the electronic device of FIG. 2.
FIG. 4 is a diagram schematically showing an embodiment of providing an analysis result as an image through the display unit of the electronic device of FIG. 2.
FIG. 5 is a diagram schematically showing a correlation between a crystal structure of luteinizing hormone (LH) contained in saliva and an ovulation cycle.
6 is a view showing the crystal structure of luteinizing hormone (LH) depending on whether or not ovulation.
7 to 9 are exemplary views showing an enlarged area of a display unit to describe a method of analyzing and providing an image according to an embodiment of the present invention.
10 to 12 are exemplary views showing an enlarged area of a display unit to describe a method of analyzing and providing an image according to another embodiment of the present invention.
13 and 14 are exemplary views showing various analysis targets of an image analysis and providing method according to an embodiment of the present invention.
15 is a view showing an example of a screen for displaying a captured image using a display unit in an image analysis and providing method according to another embodiment of the present invention.
16 is a view showing an example of a screen for displaying the entire image superimposed on the captured image.
17 is a diagram showing an example of a screen for displaying an analysis image superimposed on an entire image.
18 is a diagram showing an example of a screen displayed externally by superimposing the result image representing the analysis result on the analysis image.
19 is an image sequentially illustrating a process in which an image analysis and providing method according to an embodiment of the present invention is implemented through a portable terminal.
이하, 첨부된 도면을 참조하여 이하의 실시예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, the following embodiments will be described in detail with reference to the accompanying drawings, and the same or corresponding components will be given the same reference numerals when described with reference to the drawings, and redundant description thereof will be omitted.
본 실시예들은 다양한 변환을 가할 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 실시예들의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 내용들을 참조하면 명확해질 것이다. 그러나 본 실시예들은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다. Since the present embodiments can apply various conversions, specific embodiments will be illustrated in the drawings and described in detail in the detailed description. Effects and features of the present embodiments and methods for achieving them will be clarified with reference to the contents described below in detail together with the drawings. However, the present embodiments are not limited to the embodiments disclosed below, and may be implemented in various forms.
이하의 실시예에서 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다. In the following examples, terms such as first and second are not limited, but are used for the purpose of distinguishing one component from other components.
이하의 실시예에서 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.In the following examples, singular expressions include plural expressions, unless the context clearly indicates otherwise.
이하의 실시예에서 포함하다 또는 가지다 등의 용어는 명세서상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징들 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다. In the following examples, terms such as include or have, mean that the features or components described in the specification exist, and do not exclude the possibility of adding one or more other features or components in advance.
이하의 실시예에서 유닛, 영역, 구성 요소 등의 부분이 다른 부분 위에 또는 상에 있다고 할 때, 다른 부분의 바로 위에 있는 경우뿐만 아니라, 그 중간에 다른 유닛, 영역, 구성 요소 등이 개재되어 있는 경우도 포함한다. In the following embodiments, when a part of a unit, area, component, etc. is said to be on or on another part, other units, areas, components, etc. are interposed therebetween, as well as directly above the other part. Also includes cases.
이하의 실시예에서 연결하다 또는 결합하다 등의 용어는 문맥상 명백하게 다르게 뜻하지 않는 한, 반드시 두 부재의 직접적 및/또는 고정적 연결 또는 결합을 의미하는 것은 아니며, 두 부재 사이에 다른 부재가 개재된 것을 배제하는 것이 아니다.In the following examples, terms such as connect or join do not necessarily mean direct and/or fixed connection or joining of two members, unless the context clearly indicates otherwise, that another member is interposed between the two members. It is not excluded.
명세서상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징들 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다.It means that the features or components described in the specification exist, and does not preclude the possibility of adding one or more other features or components in advance.
도면에서는 설명의 편의를 위하여 구성 요소들이 그 크기가 과장 또는 축소될 수 있다. 예컨대, 도면에서 나타난 각 구성의 크기 및 두께는 설명의 편의를 위해 임의로 나타내었으므로, 이하의 실시예는 반드시 도시된 바에 한정되지 않는다.In the drawings, the size of components may be exaggerated or reduced for convenience of description. For example, since the size and thickness of each component shown in the drawings are arbitrarily shown for convenience of description, the following embodiments are not necessarily limited to those illustrated.
도 1은 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법을 순차적으로 도시한 순서도이다. 도 2는 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법에 이용되는 전자 장치(10)를 개략적으로 도시한 블록도이고, 도 3은 도 2의 전자 장치(10')의 다른 실시형태를 개략적으로 도시한 블록도이다. 도 4는 도 2의 전자 장치(10)의 디스플레이부(110)를 통해 분석 결과를 영상으로 제공하는 실시형태를 개략적으로 도시한 도면이다. 1 is a flowchart sequentially showing a method of analyzing and providing an image according to an embodiment of the present invention. FIG. 2 is a block diagram schematically showing an
도 1 내지 도 4를 참조하면, 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법은 디스플레이부(110)를 구비하는 전자 장치(10, 10')를 이용하여 샘플을 분석하고, 분석 결과를 영상으로 제공할 수 있다. 1 to 4, an image analysis and providing method according to an embodiment of the present invention analyzes a sample using an
이때, 전자 장치(10)는 디스플레이부(110), 제어부(120), 촬상부(210) 및 광원부(220)를 구비할 수 있다. 전자 장치(10, 10')는 디스플레이부(110)를 통해 사용자에게 샘플에 대한 분석 결과를 제공할 수 있는 어떠한 형태든 가능하며, 일 실시예로서, 이동이 가능한 휴대용 장치일 수 있다. 예를 들면, 전자 장치(10)는 휴대폰, 태블릿(tablet), 노트북, 그래핑 계산기(graphing calculator), 휴대용 게임기, 디지털 카메라, 디지털 캠코더, 포터블 미디어 플레이어 등일 수 있다.In this case, the
디스플레이부(110)는 영상을 외부로 표시하는 화면 표시 수단으로서, 전자 장치(10)의 일면에 배치될 수 있다. 디스플레이부(110)는 액정표시패널(Liquid Crystal Display; LCD) 또는 유기발광표시패널(Organic Light Emitting Diodes Display; OLED Display)를 포함할 수 있으며, 이 밖에 화상을 표시할 수 있는 어떠한 수단이든 적용가능하다. The
디스플레이부(110)는 일 영역(P1)을 통해 후술하는 샘플의 촬상이미지, 전체이미지 및 분석이미지를 외부로 표시할 수 있다. 도 4에 도시된 바와 같이, 일 영역(P1)은 중앙에 원형으로 설정될 수 있으나, 반드시 그러할 필요는 없으며, 상기한 이미지들을 전달할 수 있는 어떠한 형태 또는 위치든 설정 가능하다. 디스플레이부(110)는 이미지뿐만 아니라, 다양한 정보들을 외부로 표시할 수 있다. 다시 말해, 디스플레이부(110)는 현재 날짜 정보, 테스트 날짜 정보, 분석 결과 정보(OM) 등을 일 영역(P1)을 제외한 다른 영역을 통해 외부로 표시할 수 있다. The
제어부(120)는 프로세서(processor)와 같이 데이터를 처리할 수 있는 모든 종류의 장치를 포함할 수 있다. 여기서, '프로세서(processor)'는, 예를 들어 프로그램 내에 포함된 코드 또는 명령으로 표현된 기능을 수행하기 위해 물리적으로 구조화된 회로를 갖는, 하드웨어에 내장된 데이터 처리 장치를 의미할 수 있다. 이와 같이 하드웨어에 내장된 데이터 처리 장치의 일 예로써, 마이크로프로세서(Microprocessor), 중앙처리장치(Central Processing Unit: CPU), 프로세서 코어(Processor Core), 멀티프로세서(Multiprocessor), ASIC(Application-Specific Integrated Circuit), FPGA(Field Programmable Gate Array) 등의 처리 장치를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다. 제어부(120)는 샘플의 촬상이미지로부터 전체이미지 및 분석이미지를 획득하고, 이미지를 분석하여 분석결과를 생성하고, 이러한 결과들을 외부로 제공하도록 디스플레이부(110)를 제어할 수 있다. 제어부(120)를 이용하여 영상을 분석하고 제공하는 구체적인 방법에 대해서는 후술하기로 한다. The
촬상부(210)는 도시하지 않았지만, 적어도 하나의 렌즈를 포함하는 렌즈 모듈과 상기한 렌즈 모듈로 제공되는 광 이미지를 감지하는 이미지 센서를 포함하여 샘플의 촬상이미지를 촬영할 수 있다. Although the
광원부(220)는 일반적인 휴대폰과 같은 전자 장치에 사용되는 광원으로서, 넓은 파장 대역을 갖는 광원일 수 있으며, 예를 들면, 가시광선 전 파장 대역의 광을 조사하는 광원일 수 있다. The
일 실시예에 따른 전자 장치(10)는 디스플레이부(110), 제어부(120), 촬상부(210) 및 광원부(220)를 하나의 바디 유닛에 포함시켜, 샘플의 촬상이미지 획득부터 분석결과를 표시하는 단계까지 하나의 장치 내에서 수행할 수 있다. 다시 말해, 전자 장치(10)는 광원부(220)를 이용하여 대상체로부터 획득한 샘플에 광을 조사하고, 촬상부(210)를 이용하여 샘플의 촬상이미지를 획득할 수 있다. 또한, 전자 장치(10)는 제어부(120)를 이용하여 촬상이미지를 분석하고, 디스플레이부(110)를 이용하여 분석 과정 및 분석 결과를 영상으로 사용자에게 제공할 수 있다. The
다른 실시예로서, 도 3을 참조하면, 전자 장치(10')는 샘플의 촬상이미지를 획득하는 촬상이미지 획득 유닛(200)과 촬상이미지를 분석하고 영상으로 사용자에게 제공하는 영상 제공 유닛(100)을 분리하여 구비할 수 있다. 이때, 전자 장치(10')는 촬상이미지 획득 유닛(200)에 구비되는 제1 통신부(230) 및 영상 제공 유닛(100)에 구비되는 제2 통신부(130)를 더 포함할 수 있다. 전자 장치(10')는 제1 통신부(230) 및 제2 통신부(130)를 이용하여 유무선통신망을 통해 촬상이미지 획득 유닛(200)으로부터 획득한 촬상이미지를 영상 제공 유닛(100)으로 전송할 수 있다. As another embodiment, referring to FIG. 3, the
이하에서는, 본 발명의 일 실시예에 따른 제어부(120)에서 샘플을 분석하고, 영상으로 제공하는 방법에 대하여 설명하기로 한다. Hereinafter, a method of analyzing a sample and providing it as an image in the
본 발명의 실시예들에 따른 영상 분석 및 제공 방법은 분석하고자 하는 샘플의 촬상된 이미지로부터 분석대상의 분석 결과를 도출하고, 영상으로서 분석 결과를 표시하여 사용자에게 상기한 분석 결과를 효과적으로 전달할 수 있다. 다시 말해, 본 발명의 실시예들에 따른 영상 분석 및 제공 방법은 샘플의 분석결과를 영상으로 제공하는 어떠한 기술 분야에도 적용될 수 있음은 물론이다. The method of analyzing and providing an image according to embodiments of the present invention derives an analysis result of an analysis object from a captured image of a sample to be analyzed, and displays the analysis result as an image to effectively deliver the above analysis results to a user. . In other words, the image analysis and providing method according to the embodiments of the present invention can be applied to any technical field that provides an analysis result of a sample as an image.
먼저, 이하에서는 하나의 실시예로서, 배란일 예측을 위해 타액의 촬상이미지를 분석하고 영상으로 분석결과를 제공하는 방법을 예로 들어 설명하기로 한다. First, as an example, a method of analyzing an image of saliva for predicting ovulation day and providing an analysis result as an image will be described as an example.
도 5는 타액에 포함된 황체형성호르몬(luteinizing hormone, LH)의 결정구조와 배란주기와의 상관관계를 개략적으로 도시한 도면이고, 도 6은 배란여부에 따른 황체형성호르몬(LH)의 결정 구조를 도시한 도면이다. 5 is a diagram schematically showing a correlation between a luteinizing hormone (LH) crystal structure and ovulation cycle included in saliva, and FIG. 6 is a crystal structure of luteinizing hormone (LH) depending on whether ovulation is present. It is a diagram showing.
도 5 및 도 6을 참조하면, 배란 주기에 따라 타액에 포함된 황체형성호르몬(LH)의 결정구조가 변화함을 알 수 있다. 이러한 결정 구조의 차이를 이용하여 불임기(도 6의 (a)), 과도기(도 6의 (b)) 및 배란기(도 6의 (c))를 판단할 수 있다. 타액에 포함된 황체형성호르몬은 배란기에 직선들이 교차하는 형상의 양치형 결정 구조를 가질 수 있다. 그러나, 타액에 양치형 결정 구조가 있다 하더라도 사람의 눈으로 정확한 배란일을 판단하는 것은 어려웠다. 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법은 촬상부(210)로부터 획득한 타액의 촬상이미지로부터 결정구조를 포함하는 전체이미지를 추출하고, 전체이미지들을 분석하여 배란일에 대한 확률을 사용자에게 정확하게 제공할 수 있다. 5 and 6, it can be seen that the crystal structure of luteinizing hormone (LH) contained in saliva changes according to the ovulation cycle. Infertility (FIG. 6(a)), transient (FIG. 6(b)) and ovulation (FIG. 6(c)) can be determined using the difference in the crystal structure. The luteinizing hormone contained in saliva may have a fern-like crystal structure in which straight lines intersect in the ovulatory phase. However, it was difficult to determine the exact ovulation day with the human eye even if the saliva had a brushed crystal structure. The image analysis and providing method according to an embodiment of the present invention extracts the entire image including the crystal structure from the saliva captured image acquired from the
도 7 내지 도 9는 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법을 설명하기 위하여 디스플레이부(110)의 일 영역(P1)을 확대하여 도시한 예시도들이다. 7 to 9 are exemplary views showing an enlarged area P1 of the
다시 도 1 및 도 7을 참조하면, 제어부(120)는 촬상부(210)를 이용하여 대상체로부터 획득한 샘플의 촬상이미지(M)를 획득할 수 있다. 제어부(120)는 획득한 촬상이미지(M)를 디스플레이부(110)를 통해 외부로 표시한다(S100). 이때, 분석대상은 샘플에 포함된 호르몬이며, 구체적으로는 황체형성호르몬(LH)일 수 있다. 전술한 바와 같이, 배란기에 가까워지면 황체형성호르몬(LH)은 양치형 결정 구조를 갖게 된다. 시기에 따라 샘플의 촬상이미지(M)에는 양치형 결정구조(M1, M3, M5)와 아직 결정구조를 형성하지 못한 미결정구조(M2, M4)가 혼재할 수 있다. 또한, 샘플의 촬상이미지(M)에는 호르몬의 결정구조가 아닌 이물질에 의한 노이즈(M6)도 존재할 수 있다.Referring back to FIGS. 1 and 7, the
도 1 및 도 8을 참조하면, 제어부(120)는 촬상이미지(M)로부터 샘플에 포함된 분석대상의 전체 이미지(C)를 추출할 수 있다(S200). 제어부(120)는 분석대상인 호르몬의 결정구조와 이물질을 구분하기 위해, 복수의 단위 픽셀(UP1)들 각각을 수치화하여 촬상이미지(M)로부터 결정 구조 이미지인 분석대상의 전체이미지(C)를 추출할 수 있다. 예를 들면, 복수의 단위 픽셀들 각각을 0 내지 255 레벨의 그레이 스케일(gray scale)로 구분할 수 있다. 1 and 8, the
이때, 제어부(120)는 수치화된 단위 픽셀들 중 사전에 설정된 제1 기준값 이상의 수치를 갖는 단위 픽셀들을 추출할 수 있다. 촬상이미지(M)에 포함된 이물질(M6)의 경우, 분석대상인 호르몬에 비해 흐릿한 이미지로 촬영될 수 있다. 따라서, 수치화된 단위픽셀들 중 사전에 설정된 제1 기준값 이상의 수치를 갖는 단위 픽셀들을 추출하는 것에 의해 1차적으로 촬상이미지(M)로부터 이물질(M6)을 노이즈로서 제거할 수 있다. 한편, 제어부(120)는 추출된 사전에 설정된 제1 기준값 이상의 수치를 갖는 단위 픽셀들에 영상 가중치를 부여하여 전체 이미지(C)를 추출할 수 있다. 여기서, 영상 가중치는 상기한 그레이 스케일에 대한 가중치일 수도 있고, 색채에 관한 가중치일 수도 있다. 전체 이미지(C)는 이러한 영상 가중치를 통해 분석대상을 좀 더 명확하게 표현할 수 있다. In this case, the
이후, 제어부(120)는 추출된 전체 이미지(C)를 촬상이미지(M) 상에 중첩시켜 외부로 표시할 수 있다(S300). 제어부(120)는 분석대상 중 양치형 결정구조(M1, M3, M5)에 대한 결정구조 이미지(MP1, MP3, MP5)와 미결정구조(M2, M4)에 대한 미결정구조 이미지(MP2, MP4)가 각각 대응되도록 중첩시켜 외부로 표시할 수 있다. Thereafter, the
이후, 도 1, 도 8 및 도 9를 참조하면, 제어부(120)는 전체 이미지(C)를 하나 이상의 단위 영역(D1, D3, D5)으로 구분하는 분석이미지(D)를 생성할 수 있다. 단위 영역(D1, D3, D5) 각각은 분석 결과 도출에 필요한 특징 정보를 포함하도록 전체 이미지(C)를 하나 이상으로 구획할 수 있다. 이때, 단위 영역 각각은 사전에 설정된 범위 내의 수치를 갖는 단위 픽셀들의 집합으로 이루어질 수 있다. 본 명세서에서는 상기한 특징 정보는 호르몬의 결정구조에 관한 정보일 수 있다. Thereafter, referring to FIGS. 1, 8, and 9, the
제어부(120)는 획득된 촬상 이미지(M)에 포함된 복수의 영역들 각각에서 임의의 단위 픽셀과 임의의 단위 픽셀에 인접한 주변 픽셀들의 수치 비교를 통해 복수의 코너점(C1, C2, C3)들을 상대적으로 추출할 수 있다. 여기서 코너점(C1, C2, C3)은 호르몬 결정 구조의 길이 방향에 대한 시작점 또는 끝점일 수 있다. 구체적으로, 일 영역에 대하여 코너점(C1, C2, C3)이 존재하는 경우 코너점(C1, C2, C3)에 인접한 주변 픽셀들은 코너점(C1, C2, C3)에 비해 밝은 수치값을 가질 수 있다. 다시 말해, 임의의 단위 픽셀에 인접한 주변픽셀들이 상기 임의의 단위 픽셀보다 밝은 수치값을 갖고 주변을 따라 연속적으로 연결되는 경우 해당 단위 픽셀을 코너점으로 추출할 수 있다. The
이후, 제어부(120)는 상기 코너점의 수치값을 기준으로 사전에 설정된 제1 수치범위 내의 수치값을 갖고 상기 코너점으로부터 연속적으로 연결되는 제1 픽셀들을 추출할 수 있다. 여기서, 제1 픽셀들은 코너점(C1, C2, C3)의 수치값과 유사한 값을 갖는 단위 픽셀들일 수 있다. 이러한 제1 픽셀들이 코너점(C1, C2, C3)으로부터 연속적으로 연결되는 경우 제어부(120)는 추출된 제1 픽셀들이 도 8에 도시된 바와 같이 선들이 연결된 양치형의 결정 구조를 포함한다고 판단할 수 있다. Subsequently, the
이때, 제어부(120)는 제1 픽셀들이 사전에 설정된 제1 길이값 이상의 길이(L1, L2, L3)로 연결되는 경우, 호르몬의 결정 구조라고 판단할 수 있다. 다시 말해, 코너점(C1, C2, C3)으로부터 제1 픽셀들이 연속적으로 연결되어 있다고 하더라도 제1 길이값 이하인 경우에는 아직 배란일에 해당하는 양치형의 결정구조가 아니라고 판단하고, 이에 해당하는 단위영역 이미지를 생성하지 않게 된다. 이러한 길이의 기준이 되는 제1 길이값은 예를 들면, 대상체마다 차이가 있을 수 있으며, 대상체의 개인정보, 호르몬 정보를 기초로 하여 결정할 수 있다. 또한, 제어부(120)는 제1 픽셀들의 방향성을 이용하여 결정 구조 이미지(MP1, MP2, MP3)들의 유효 여부를 결정할 수 있다. 예를 들면, 양치 구조의 황체형성호르몬은 원의 형태를 이루지 않고, 길쭉한 형상을 이루기 때문에, 추출된 제1 픽셀들이 일 방향성을 갖는 경우에 결정 구조 이미지(MP1, MP2, MP3)로서 유효하다고 판단할 수 있다. At this time, the
제어부(120)는 도 9에 도시된 바와 같이, 분석이미지(D)를 전체 이미지(C) 상에 중첩시켜 외부로 표시할 수 있다. 이때, 분석이미지(D)는 단위 영역(D1, D3, D5)을 경계선으로 구획하는 이미지일 수 있다. 경계선은 전체 이미지(C)의 색상과 다른 색상을 가질 수 있다. 이를 통해, 영상 분석 및 제공 방법은 단위 영역(D1, D3, D5)을 명확하게 외부로 표시할 수 있다. 다른 실시예로서, 분석이미지(D)는 단위 영역(D1, D3, D5)을 구획하는 경계선이미지 및 경계선이미지 내부 영역을 채우는 반투명이미지를 포함할 수도 있다. As illustrated in FIG. 9, the
다음, 제어부(120)는 단위 영역들에 포함된 특징 정보에 근거하여 분석결과를 도출할 수 있다. 일 실시예로서, 제어부(120)는 전체 이미지(C)의 총 면적 대비 분석이미지(D)의 중첩 면적을 분석하여 분석 결과를 확률로서 도출할 수 있다. 예를 들면, 제어부(120)는 전체 이미지(C)에 포함된 분석대상들의 총 면적 대비 전술한 바와 같이 유효하다고 판단된 결정구조 이미지(MP1, MP2, MP3)들의 중첩 면적을 이용하여 배란일 예측 결과를 확률로서 도출할 수 있다. Next, the
다른 실시예로서, 제어부(120)는 단위 영역들에 포함된 특징 정보를 사전에 설정된 분류 항목에 의해 분류하여 분류데이터를 생성하고, 분류데이터의 점수에 의해 분석결과를 도출할 수 있다. As another embodiment, the
예를 들면, 제어부(120)는 추출된 결정 구조 이미지(MP1, MP2, MP3)들 각각의 길이 또는 두께를 계산하고, 길이 또는 두께를 기초로 하여 추출된 결정 구조 이미지(MP1, MP2, MP3)들을 분류할 수 있다. 제어부(120)는 분류항목 및 각각의 분류항목에 해당되는 결정구조 이미지(MP1, MP2, MP3)들의 개수를 대응시켜 분류데이터를 생성할 수 있다. 도 8을 참조하면, 타액에는 복수의 황체형성호르몬들이 결정 구조를 이룰 수 있으며, 복수의 결정 구조는 각각의 길이와 두께를 가질 수 있다. 제어부(120)는 유효한 결정구조 이미지(MP1, MP2, MP3)들을 길이 또는 두께를 이용하여 분류함으로써 분류 데이터를 생성할 수 있다. For example, the
이후, 제어부(120)는 분류데이터를 이용하여 배란일 여부에 관한 확률을 계산할 수 있다. 예를 들면, 추출된 결정 구조 이미지(MP1, MP2, MP3)들의 분류 항목에 대하여 등급(grade)을 나눌 수 있고, 등급에 해당하는 결정 구조 이미지들의 개수를 수치화함으로써, 배란일에 관한 확률을 계산할 수 있다. 일 실시예로서, 제어부(120)는 제1 픽셀이 15개 내지 20개가 연속적으로 연결되는 경우, 해당 결정 구조 이미지를 제1 등급으로 분류하고, 제1 픽셀이 10내지 15개가 연속적으로 연결되는 경우, 해당 결정 구조 이미지를 제2 등급으로 분류할 수 있다. 제어부(120)는 제1 등급을 90점으로 점수화하고, 제2 등급을 70점으로 점수화할 수 있다. 제어부(120)는 이러한 등급의 수치와 각 등급에 포함된 결정 구조 이미지들의 개수를 이용하여 촬상이미지 전반에 걸쳐 총점을 계산할 수 있으며, 총점을 통해 상기 배란일에 관한 확률을 계산할 수 있다. 그러나, 상기한 실시예들은 하나의 예일뿐이며, 본 발명의 기술적 사상을 제한하지는 않는다. Thereafter, the
제어부(120)는 상기한 분석 결과를 나타내는 결과이미지(OM)를 생성하여 외부로 표시할 수 있다. 일 실시예로서, 도 4에 도시된 바와 같이, 제어부(120)는 분석결과를 나타내는 결과이미지(OM)를 분석이미지(D)와 비중첩시켜 외부로 표시할 수 있다. 다른 실시예로서, 제어부(120)는 분석이미지(D) 상에 분석 결과를 나타내는 결과이미지를 중첩시켜 외부로 표시할 수 있다(도 16 참조).The
한편, 이하에서는 다른 실시예로서, 전술한 타액의 촬상이미지와 같은 정적이미지(static image)가 아닌 움직이는 물체 예를 들면, 정자(spermatozoon)의 촬상이미지인 동적이미지(dynamic image)를 분석하고 영상으로 분석결과를 제공하는 방법에 대하여 설명하기로 한다.Meanwhile, hereinafter, as another embodiment, a dynamic object that is not a static image such as the above-described saliva captured image, for example, a moving image of a spermatozoon, is analyzed and an image is obtained. How to provide the analysis results will be described.
도 10 내지 도 12는 본 발명의 다른 실시예에 따른 영상 분석 및 제공 방법을 설명하기 위하여 디스플레이부(110)의 일 영역(P1)을 확대하여 도시한 예시도들이다. 10 to 12 are exemplary views illustrating an enlarged area P1 of the
먼저, 제어부(120)는 촬상부(210)를 이용하여 대상체로부터 획득한 샘플의 촬상이미지를 획득할 수 있다. 제어부(120)는 획득한 촬상이미지를 디스플레이부(110)를 통해 외부로 표시할 수 있는데, 이때, 분석대상은 샘플에 포함된 움직임을 갖는 대상체일 수 있으며, 예를 들어, 정자(spermatozoon)일 수 있다. First, the
정자는 운동성을 갖는 대상체로서, 일정 면적에서 관찰되는 정자수, 특히, 정상적인 운동성을 갖는 정자의 수가 얼마나 되는지에 따라 불임 여부를 판단할 수 있다. 다시 말해, 불임 여부의 판단은 정자수, 기형정자인지 여부, 운동성 저하 여부 등으로 판단될 수 있다. Sperm is an object having mobility, and it is possible to determine infertility according to the number of sperm observed in a certain area, in particular, the number of sperm having normal mobility. In other words, the determination of infertility may be determined by the number of sperm, whether it is malformed sperm, or whether mobility is deteriorated.
도 10을 참조하면, 제어부(120)는 촬상이미지로부터 샘플에 포함된 분석대상의 전체이미지(C)를 추출할 수 있다. 전술한 바와 마찬가지로, 제어부(120)는 분석대상인 정자와 이물질을 구분하기 위해, 복수의 단위 픽셀(UP1)들 각각을 수치화하여 촬상이미지로부터 정자 이미지인 분석 대상의 전체 이미지(C)를 추출할 수 있다. 예를 들면, 복수의 단위 픽셀들 각각을 0 내지 255 레벨의 그레이 스케일(gray scale)로 구분할 수 있다. Referring to FIG. 10, the
이때, 제어부(120)는 수치화된 단위 픽셀들 중 사전에 설정된 제1 기준값 이상의 수치를 갖는 단위 픽셀들을 추출할 수 있다. 촬상이미지에 포함된 이물질의 경우, 분석대상인 정자에 비해 흐릿한 이미지로 촬영될 수 있다. 따라서, 수치화된 단위픽셀들 중 사전에 설정된 제1 기준값 이상의 수치를 갖는 단위 픽셀들을 추출하는 것에 의해 1차적으로 촬상이미지로부터 이물질을 노이즈로서 제거할 수 있다. In this case, the
한편, 제어부(120)는 추출된 사전에 설정된 제1 기준값 이상의 수치를 갖는 단위 픽셀들에 영상 가중치를 부여하여 전체 이미지(C)를 추출할 수 있다. 여기서, 영상 가중치는 상기한 그레이 스케일에 대한 가중치일 수도 있고, 색채에 관한 가중치일 수도 있다. 전체 이미지(C)는 이러한 영상 가중치를 통해 분석대상을 좀 더 명확하게 표현할 수 있다. Meanwhile, the
이후, 제어부(120)는 추출된 전체 이미지(C)를 촬상이미지 상에 중첩시켜 외부로 표시할 수 있다. 제어부(120)는 획득된 촬상 이미지에 포함된 정자 이미지들 각각에서 임의의 단위 픽셀에 인접한 주변 픽셀들의 수치 비교를 통해 복수의 코너점(C1, C2, C3)들을 상대적으로 추출할 수 있다. 여기서, 코너점(C1, C2, C3)은 정자의 길이 방향에 대한 시작점 또는 끝점일 수 있다. 제어부(120)는 코너점의 수치값을 기준으로 사전에 설정된 제1 수치범위 내의 수치값을 갖고 상기 코너점으로부터 연속적으로 연결되는 제1 픽셀들을 추출할 수 있다. 여기서, 제1 픽셀들은 코너점(C1, C2, C3)의 수치값과 유사한 값을 갖는 단위 픽셀들일 수 있다. 이러한 제1 픽셀들은 코너점(C1, C2, C3)으로부터 연속적으로 연결되는 경우, 일단 제어부(120)는 추출된 제1 픽셀들이 도 10에 도시된 바와 같이, 정자를 포함한다고 판단할 수 있다. Thereafter, the
이때, 제어부(120)는 제1 픽셀들이 사전에 설정된 제1 길이값 이상의 길이(L1, L2, L3)로 연결되는 경우, 정자라고 판단할 수 있다. 다시 말해, 코너점(C1, C2, C3)으로부터 제1 픽셀들이 연속적으로 연결된다 하더라도, 제1 길이값 이하인 경우에는 정상적인 정자가 아니라고 판단할 수 있다. 예를 들면, 도 10에서 도시된 바와 같이, 제4 정자 이미지(SP4)의 경우 제4 길이(L4)가 사전에 설정된 제1 길이값보다 작기 때문에, 이는 비정상 정자라고 판단할 수 있다. At this time, the
한편, 정자는 운동성을 갖기 때문에, 정상정자 여부를 판단하기 위해서, 촬영부(210)는 일정 시간 간격에 따라 촬상 이미지를 획득할 수 있다. 제어부(120)는 시간에 따라 획득한 복수의 촬상이미지를 통해 각 정자의 움직임을 추적할 수 있으며, 각 정자들의 운동성을 파악하여 정상 정자들을 추출할 수 있다. On the other hand, since the sperm has a mobility, in order to determine whether or not the normal sperm, the photographing
도 11을 참조하면, 도 11은 도 10의 촬상이미지(C)보다 일정 시간(t) 지난 후 획득된 촬상이미지(C')로서, 정자의 운동성에 의해 분석 대상의 위치가 변화하였음을 확인할 수 있다. 제어부(120)는 운동성을 확인함에 있어, 정자 이미지 전체가 움직였는지를 확인하여 판단할 수도 있으나, 코너점(C1, C3)을 기준으로 하여 코너점(C1, C3)의 좌표가 변화했는지를 비교함으로써, 움직임을 확인할 수도 있다. 예를 들면, 제1 정자 이미지(SP1) 및 제3 정자 이미지(SP3)는 제1 방향(x방향)으로 움직였음을 확인할 수 있다. 이때, 정자들의 운동성을 확인하기 위해서, 먼저, 처음 촬상이미지(C)에서 검출한 정자들 각각에 식별인자(ID)를 부여할 수 있다. 상기한 제4 정자 이미지(SP4)와 같이, 길이가 사전에 설정된 제1 값보다 작기 때문에 비정상 정자라고 판단하고, 식별인자(ID)를 부여하지 않을 수도 있다. Referring to FIG. 11, FIG. 11 is a captured image C′ obtained after a certain period of time t after the captured image C of FIG. 10, and it can be confirmed that the position of the analysis object has changed due to the mobility of sperm. have. The
제어부(120)는 일정 시간 간격에 따라 촬영한 촬영 이미지(C, C')를 비교하여 식별인자(ID)가 부여된 정자들의 운동성을 확인하고, 정상 운동을 하는 경우에 이를 정상 정자라고 판단하게 된다. 예를 들어, 제2 정자 이미지(SP2)를 참조하면, 도 10과 도 11에서 그 움직임의 변화가 없음을 확인할 수 있으며, 운동성이 없는 비정상 정자라고 판단할 수 있다. 또는, 제4 정자 이미지(SP4)와 같이 움직임이 있더라도, 전향적인 운동이 아닌 회전운동인 경우에도 마찬가지로 비정상 정자라고 판단할 수 있다. The
이후, 도 12를 참조하면, 제어부(120)는 분석이미지(D)를 전체 이미지(C) 상에 중첩시켜 외부로 표시할 수 있다. 이때, 분석이미지(D)는 단위 영역(D1, D3)을 경계선으로 구획하는 이미지일 수 있다. 경계선은 전체 이미지(C)의 색상과 다른 색상을 가질 수 있다. 이를 통해, 영상 분석 및 제공 방법은 단위 영역(D1, D3)을 명확하게 외부로 표시할 수 있다. 다른 실시예로서, 분석이미지(D)는 단위 영역(D1, D3)을 구획하는 경계선이미지 및 경계선이미지 내부 영역을 채우는 반투명 이미지를 포함할 수도 있다. Thereafter, referring to FIG. 12, the
다음, 제어부(120)는 단위 영역들에 포함된 특징 정보에 근거하여 분석결과를 도출할 수 있다. 일 실시예로서, 제어부(120)는 전체 이미지(C)의 총면적 대비 분석이미지(D)의 중첩 면적을 분석하거나, 전체 이미지(C) 내에서 총 촬영된 정자 이미지 수 대비 단위 영역(D1, D3)의 개수를 이용하여, 정자 상태를 분석할 수 있다. 제어부(120)는 전체 이미지(C) 내에서 총 촬영된 정자 이미지 수 대비 단위 영역(D1, D3)의 개수 또는, 단위 영역(D1, D3)에 포함된 정상정자들의 이동 속도, 이동방향 등을 이용하여 분류함으로써, 분류데이터를 생성할 수 있다.Next, the
이후, 제어부(120)는 전술한 분류 항목에 대하여 등급(grade)을 나눌 수 있고, 등급에 해당하는 정상정자 이미지들의 개수를 수치화함으로써, 불임 또는 난임에 대한 확률을 계산할 수 있다. 제어부(120)는 이러한 분석 결과를 나타내는 결과이미지를 생성하여 외부로 표시할 수 있다. 이는 호르몬의 결정구조 이미지를 추출하여 배란일 여부를 분석하고 이를 외부로 표시하는 방법과 실질적으로 동일할 수 있다. Subsequently, the
도 13 및 도 14는 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법의 다양한 분석 대상들을 도시한 예시도이다. 13 and 14 are exemplary views showing various analysis targets of an image analysis and providing method according to an embodiment of the present invention.
도 13 및 도 14를 참조하면, 본 발명의 일 실시예에 따른 영상 분석 및 제공방법은 전술한 타액의 호르몬 결정 구조 또는 정자와 같은 분석대상뿐만 아니라, 배란일 또는 임신 진단기와 같이 진단 결과를 시각적으로 표시하는 장치 또는 시약을 직접 투여하여 색 변화를 통해 진단 결과를 보여주는 다양한 테스터에 활용될 수 있음은 물론이다. 상기한 종래의 테스터기들은 사용자가 육안으로 진단 결과를 확인할 수 밖에 없기 때문에, 정확도가 떨어질 수 밖에 없다. 그러나, 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법은 진단 결과를 나타내는 표시부(DA)의 변경된 색을 픽셀 단위의 수치로 비교하거나, 패턴의 형태를 픽셀 단위의 수치로 변환함으로써, 분석 대상의 상태를 수치로 정확히 표현할 수 있다는 장점을 갖게 된다. 13 and 14, the image analysis and providing method according to an embodiment of the present invention provides visual analysis of diagnosis results such as ovulation days or pregnancy diagnostic devices, as well as analysis targets such as the saliva hormone crystal structure or sperm. Of course, it can be used for various testers that show diagnostic results through color changes by directly administering a display device or reagent. Since the above-described conventional testers have no choice but to confirm the diagnosis result with the naked eye, accuracy is inevitably deteriorated. However, in the method of analyzing and providing an image according to an embodiment of the present invention, an object to be analyzed is compared by comparing the changed color of the display unit DA indicating the diagnosis result to a numerical value in pixels, or converting a pattern form into a numerical value in pixels. It has the advantage of being able to accurately represent the state of.
도 15은 본 발명의 다른 실시예에 따른 영상 분석 및 제공 방법에 있어서, 디스플레이부를 이용하여 촬상이미지(M)를 표시하는 화면예를 나타낸 도면이고, 도 16은 촬상이미지(M) 상에 전체이미지(C)를 중첩시켜 표시하는 화면예를 나타낸 도면이며, 도 17은 전체이미지(C) 상에 분석이미지(D)를 중첩시켜 표시하는 화면예를 나타낸 도면이다. 도 18은 분석 결과를 나타내는 결과이미지(OM)를 분석이미지(D)에 중첩시켜 외부로 표시한 화면예를 나타낸 도면이다. 15 is a diagram illustrating an example of a screen for displaying an image of an image M using a display unit in an image analysis and providing method according to another embodiment of the present invention, and FIG. 16 is a full image on the image M (C) is a diagram showing an example of a screen to be superimposed, and FIG. 17 is a diagram showing an example of a screen to superimpose and display an analysis image D on the entire image C. 18 is a view showing an example of a screen displayed externally by superimposing the result image OM representing the analysis result on the analysis image D.
도 15을 참조하면, 디스플레이부(110)는 일 영역(P1)을 통해 샘플로부터 획득한 촬상이미지(M)를 외부로 표시할 수 있다. 촬상이미지(M)는 촬상부(210)를 통해 사용자가 실시간으로 획득한 영상이거나, 사용자가 촬영하여 데이터베이스 또는 외부 서버에 기 저장한 영상일 수 있다. Referring to FIG. 15, the
도 16을 참조하면, 디스플레이부(110)는 일 영역(P1)을 통해 촬상이미지(M)으로부터 샘플이 포함된 추출한 분석대상의 전체 이미지(C)를 촬상이미지(M) 상에 중첩시켜 외부로 표시할 수 있다. 이때, 제어부(120)는 전체이미지(C)에 동적 이미지 효과를 부여하여 촬상이미지(M) 상에 중첩되도록 표시할 수 있다. 일 실시예로서, 제어부(120)는 추출된 전체이미지(C)를 촬상이미지 상에 중첩시켜 외부로 표시하되, 사전에 설정된 제1 시간동안 촬상이미지(M)에 대한 전체 이미지(C)의 중첩면적이 증가하도록 외부로 표시할 수 있다. 다시 말해, 도 11의 (a) 내지 (c)에 순차적으로 도시된 바와 같이, 사전에 설정된 제1 시간동안 추출된 전체이미지(C)는 촬상이미지(M)의 일 지점을 시작으로 중첩되기 시작하여, 상기 일 지점에 대향되는 타 지점까지 중첩될 수 있다. 그러나, 본 발명의 기술적 사상은 이에 제한되지 않으며, 전체 이미지를 외부로 표시하는 동안 적용될 수 있는 어떠한 동적 이미지 효과도 적용가능함은 물론이다. Referring to FIG. 16, the
이때, 사전에 설정된 제1 시간은 제어부(120)에서 촬상이미지(M)로부터 전체이미지(C)를 추출하는 추출시간보다 길 수 있다. 본 발명의 다른 실시예에 따른 영상 분석 및 제공 방법은 이러한 동적이미지 효과를 통해 전체이미지를 사용자에게 제공함으로써, 분석대상을 추출하는 과정을 사용자에게 명확하게 표시하여 분석결과에 대한 신뢰도를 향상시킬 수 있다. At this time, the first time set in advance may be longer than the extraction time for extracting the entire image C from the captured image M by the
이후, 도 17을 참조하면, 디스플레이부(110)는 일 영역(P1)을 통해 전체 이미지(C) 상에 분석이미지(D)를 중첩시켜 외부로 표시할 수 있다. 도시하지 않았지만, 분석이미지(D) 또한, 사전에 설정된 제2 시간동안 동적 이미지 효과를 부여하여 촬상이미지(M) 상에 중첩되도록 표시할 수 있다. 제어부(120)는 사전에 설정된 제2 시간동안 전체이미지(C)에 대한 분석이미지(D)의 중첩면적이 증가하도록 표시할 수 있다. 분석이미지(D)를 나타내는 동적이미지 효과는 전체 이미지(C)를 나타내는 동적이미지 효과와 다를 수 있다. 예를 들면, 전체 이미지(C)를 나타내는 동적 이미지 효과는 전술한 바와 같이, 제1 지점에서 제2 지점으로 순차적으로 이미지를 중첩시키는 효과라면, 분석 이미지(D)를 나타내는 동적이미지 효과는 단위영역 이미지를 전체 이미지(C) 상에 산발적으로 중첩시키는 효과일 수 있다. Thereafter, referring to FIG. 17, the
또한, 일 실시예로서, 제어부(120)는 제2 시간과 제1 시간을 서로 다르게 설정하여 동적이미지 효과를 부여할 수 있다. 예를 들면, 전체 이미지(C)를 표시할 때의 설정시간인 제1 시간보다 분석 이미지(D)를 표시할 때의 설정시간인 제2 시간을 더 짧게 설정함으로써, 분석 결과가 거의 끝나가고 있음을 사용자에게 영상으로 알릴 수 있다. 다만, 이는 하나의 실시예일뿐이며, 제1 시간과 제2 시간이 동일할 수도 있고, 제1 시간보다 제2 시간이 더 길 수 있음은 물론이다. In addition, as an embodiment, the
도 18을 참조하면, 디스플레이부(110)는 분석 이미지(D) 상에 분석 결과를 나타내는 결과 이미지를 중첩시켜 외부로 표시할 수 있다. 일 실시예로서, 분석 결과는 배란일 여부를 나타내는 확률로서 나타낼 수 있다. 다른 실시예로서, 분석 결과는 배란일 가능성을 "높음", "중간", "낮음"과 같이 사전에 설정된 단계로 구분하여, 해당되는 단계를 외부로 표시할 수도 있다. 또한 전술한 바와 같이, 디스플레이부(110)는 결과이미지를 분석이미지와 비중첩되는 다른 영역에 표시할 수도 있다. Referring to FIG. 18, the
도 19는 본 발명의 일 실시예에 따른 영상 분석 및 제공 방법이 휴대용 단말기를 통해 구현되는 과정을 순차적으로 도시한 이미지이다. 19 is an image sequentially illustrating a process in which an image analysis and providing method according to an embodiment of the present invention is implemented through a portable terminal.
도 19를 참조하면, 디스플레이부(110)는 획득한 촬상이미지를 외부로 표시한 후(Ⅰ), 영상 처리 및 분석 과정(Ⅱ)을 촬상 이미지 상에 중첩시켜 표시할 수 있다. 이후, 디스플레이부(110)는 완료된 분석 결과를 외부로 표시할 수 있다(Ⅲ).전술한 바와 같이, 본 발명의 실시예들에 따른 영상 분석 및 제공 방법은 촬상이미지에 분석대상이 추출된 전체이미지와 분석이미지를 중첩시켜 외부로 표시함으로써, 사용자에게 분석대상이 추출되는 과정과 분석 결과를 분석하는 과정을 효과적으로 전달할 수 있다. 또한, 영상 분석 및 제공 방법은 중첩되는 전체이미지 및/또는 분석이미지를 동적 이미지 효과를 이용하여 외부로 표시함으로써, 분석대상을 추출하는 과정을 사용자에게 명확하게 표시하여 분석결과에 대한 신뢰도를 향상시킬 수 있다.Referring to FIG. 19, the
이제까지 본 발명에 대하여 바람직한 실시예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 상기 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.So far, the present invention has been focused on preferred embodiments. Those skilled in the art to which the present invention pertains will understand that the present invention can be implemented in a modified form without departing from the essential characteristics of the present invention. Therefore, the disclosed embodiments should be considered from an explanatory point of view rather than a restrictive point of view. The scope of the present invention is shown in the claims rather than the foregoing description, and all differences within the equivalent range should be construed as being included in the present invention.
10: 전자 장치
110 : 디스플레이부
120 : 제어부
130 : 제2 통신부
210 : 촬상부
220 : 광원부
230 : 제1 통신부10: electronic device
110: display unit
120: control unit
130: second communication unit
210: imaging unit
220: light source unit
230: first communication unit
Claims (8)
대상체로부터 획득한 샘플의 촬상이미지를 상기 디스플레이부를 통해 외부로 표시하는 단계;
상기 촬상이미지로부터 상기 샘플에 포함된 분석대상의 전체이미지를 추출하는 단계; 및
상기 추출된 전체이미지를 상기 촬상이미지 상에 중첩시켜 외부로 표시하되, 사전에 설정된 제1 시간동안 상기 촬상이미지에 대한 상기 전체이미지의 중첩면적이 증가하도록 표시하는 단계;를 포함하는, 영상 분석 및 제공 방법.In the method of providing a sample analysis result as an image using an electronic device having a display,
Displaying an captured image of a sample obtained from an object to the outside through the display unit;
Extracting the entire image of the analysis target included in the sample from the captured image; And
Displaying the extracted entire image by superimposing it on the captured image, but displaying it so as to increase the overlapping area of the whole image with respect to the captured image for a predetermined first time. How to provide.
상기 전체 이미지를 하나 이상의 단위영역으로 구분하는 분석이미지를 생성하는 단계; 및
상기 분석이미지를 상기 전체이미지 상에 중첩시켜 외부로 표시하는 단계;를 더 포함하는, 영상 분석 및 제공 방법.According to claim 1,
Generating an analysis image that divides the entire image into one or more unit areas; And
The method further comprising, superimposing the analysis image on the entire image and displaying it externally.
상기 분석이미지를 상기 전체이미지 상에 중첩시켜 외부로 표시하는 단계는,
사전에 설정된 제2 시간동안 상기 전체이미지에 대한 상기 분석이미지의 중첩면적이 증가하도록 표시하는, 영상 분석 및 제공 방법.According to claim 2,
The step of superimposing the analysis image on the entire image to display the outside,
A method of displaying and analyzing an image, wherein the overlapping area of the analysis image with respect to the entire image is increased for a predetermined second time.
상기 분석대상의 전체 이미지를 추출하는 단계는,
상기 촬상이미지를 복수의 단위 픽셀로 구분하여 각각을 수치화하고, 사전에 설정된 제1 기준값 이상의 수치를 갖는 단위 픽셀들에 영상 가중치를 부여하여 전체 이미지를 추출하는, 영상 분석 및 제공 방법.According to claim 2,
Extracting the entire image of the analysis object,
A method of analyzing and providing an image, wherein the captured image is divided into a plurality of unit pixels to quantify each, and an entire image is extracted by assigning an image weight to unit pixels having a value equal to or greater than a predetermined first reference value.
상기 단위영역 각각은 분석 결과 도출에 필요한 특징 정보를 포함하도록 상기 전체이미지를 하나 이상으로 구획하는, 영상 분석 및 제공 방법.According to claim 4,
Each of the unit areas divides the entire image into one or more to include feature information necessary for deriving an analysis result, and the method of analyzing and providing an image.
상기 분석대상은 상기 샘플에 포함된 호르몬이며,
상기 특징 정보는 상기 호르몬의 결정구조에 관한 정보인, 영상 분석 및 제공 방법.The method of claim 5,
The analysis target is a hormone included in the sample,
The feature information is information related to the crystal structure of the hormone, an image analysis and providing method.
상기 단위영역 각각은 사전에 설정된 범위 내의 수치를 갖는 단위 픽셀들의 집합으로 이루어지는, 영상 분석 및 제공 방법.According to claim 4,
Each of the unit areas consists of a set of unit pixels having a numerical value within a predetermined range, and the image analysis and providing method.
상기 단위영역들에 포함된 상기 특징 정보에 근거하여 분석 결과를 도출하는 단계; 및
상기 분석결과를 외부로 표시하는 단계;를 더 포함하는, 영상 분석 및 제공 방법.
According to claim 4,
Deriving an analysis result based on the feature information included in the unit areas; And
Displaying the analysis results to the outside; further comprising, image analysis and providing method.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180155462A KR102223104B1 (en) | 2018-12-05 | 2018-12-05 | Method for analyzing and providing image |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180155462A KR102223104B1 (en) | 2018-12-05 | 2018-12-05 | Method for analyzing and providing image |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20200068451A true KR20200068451A (en) | 2020-06-15 |
KR102223104B1 KR102223104B1 (en) | 2021-03-04 |
Family
ID=71081753
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020180155462A KR102223104B1 (en) | 2018-12-05 | 2018-12-05 | Method for analyzing and providing image |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102223104B1 (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017212653A1 (en) * | 2016-06-10 | 2017-12-14 | オリンパス株式会社 | Image processing device, image processing method, and image processing program |
JP2017227466A (en) * | 2016-06-20 | 2017-12-28 | 富士フイルム株式会社 | Measurement support device, and measurement support method |
JP2018073070A (en) * | 2016-10-27 | 2018-05-10 | Line株式会社 | Display program, display method, and information processing terminal |
-
2018
- 2018-12-05 KR KR1020180155462A patent/KR102223104B1/en active IP Right Grant
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017212653A1 (en) * | 2016-06-10 | 2017-12-14 | オリンパス株式会社 | Image processing device, image processing method, and image processing program |
JP2017227466A (en) * | 2016-06-20 | 2017-12-28 | 富士フイルム株式会社 | Measurement support device, and measurement support method |
JP2018073070A (en) * | 2016-10-27 | 2018-05-10 | Line株式会社 | Display program, display method, and information processing terminal |
Also Published As
Publication number | Publication date |
---|---|
KR102223104B1 (en) | 2021-03-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Williams et al. | The discerning eye of computer vision: Can it measure Parkinson's finger tap bradykinesia? | |
US7292719B2 (en) | System and method for imaging | |
Hontanilla et al. | Automatic three-dimensional quantitative analysis for evaluation of facial movement | |
US10872408B2 (en) | Method and system for imaging and analysis of anatomical features | |
CN101398891A (en) | Human identification apparatus | |
CN110418627A (en) | Medicament identification device, medicament recognition methods and medicament recognizer | |
JP2007222073A (en) | Method for evaluating cell motility characteristic by image processing, image processor therefor and image processing program | |
CN107373892B (en) | Accurate station position automatic monitoring and prompting system and method of three-dimensional foot type scanner | |
US20220036575A1 (en) | Method for measuring volume of organ by using artificial neural network, and apparatus therefor | |
CN115170629A (en) | Wound information acquisition method, device, equipment and storage medium | |
CN114049683A (en) | Post-healing rehabilitation auxiliary detection system, method and medium based on three-dimensional human skeleton model | |
Alagha et al. | Objective grading facial paralysis severity using a dynamic 3D stereo photogrammetry imaging system | |
AU2021405157A1 (en) | Joint angle determination under limited visibility | |
Cassidy et al. | Artificial intelligence for automated detection of diabetic foot ulcers: A real-world proof-of-concept clinical evaluation | |
KR102223099B1 (en) | Method for analyzing and providing image | |
KR102223104B1 (en) | Method for analyzing and providing image | |
CN113488163A (en) | Hypomyosis identification method, device, equipment and medium based on machine vision | |
Niri et al. | Smartphone-based thermal imaging system for diabetic foot ulcer assessment | |
US20210345942A1 (en) | Method and Device for Determining Nature or Extent of Skin Disorder | |
CN116452745A (en) | Hand modeling, hand model processing method, device and medium | |
CN114442808A (en) | Pose tracking module testing method, device, equipment, system and medium | |
CN110060785A (en) | Remote traditional Chinese medical observation information process- system and method | |
JP2006181100A (en) | Method of measuring shape of hair | |
Gabriel et al. | Development and clinical application of Vertebral Metrics: Using a stereo vision system to assess the spine | |
Zhang et al. | An approach of region of interest detection based on visual attention and gaze tracking |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |